Em setembro, a OpenAI iniciou um novo processo de avaliação com o objetivo de comparar o desempenho de seus modelos de IA com o de profissionais humanos em diversos setores. A empresa considera essa comparação uma métrica crucial em seu progresso para alcançar a inteligência geral artificial (AGI), definida como um sistema de IA capaz de superar as capacidades humanas na maioria das tarefas economicamente valiosas.

Um documento confidencial da OpenAI declarou: "Contratamos pessoas de diversas ocupações para ajudar a coletar tarefas do mundo real modeladas a partir daquelas que vocês realizaram em seus empregos em tempo integral, para que possamos medir o desempenho dos modelos de IA nessas tarefas. Pegue trabalhos existentes de longo prazo ou complexos (horas ou dias) que você realizou em sua ocupação e transforme cada um em uma tarefa."

O esforço de coleta de dados destaca o desafio contínuo de avaliar o desempenho da IA, principalmente à medida que os modelos se tornam mais sofisticados. Ao comparar os resultados da IA com o trabalho humano real, a OpenAI pretende obter uma compreensão mais precisa dos pontos fortes e fracos de seus modelos. Essa abordagem reflete uma tendência crescente no campo da IA em direção a métodos de avaliação mais rigorosos e centrados no ser humano.

As implicações de alcançar a AGI são de longo alcance, potencialmente transformando setores e remodelando a natureza do trabalho. Embora a OpenAI enfatize os benefícios potenciais da AGI, como aumento da produtividade e inovação, o desenvolvimento também levanta preocupações sobre o deslocamento de empregos e as considerações éticas de sistemas de IA cada vez mais autônomos.

O pedido para que os contratados enviem seu trabalho levanta questões sobre privacidade de dados e propriedade intelectual. Não está claro quais medidas a OpenAI está tomando para proteger a confidencialidade das informações confidenciais contidas nas tarefas enviadas. A empresa ainda não divulgou detalhes sobre as salvaguardas específicas em vigor para evitar o uso indevido dos dados.

A OpenAI continua a refinar suas metodologias de avaliação à medida que desenvolve modelos de IA mais avançados. O foco da empresa no desempenho em nível humano ressalta a importância de alinhar o desenvolvimento da IA com os valores humanos e garantir que os sistemas de IA sejam benéficos para a sociedade. Os resultados dessas avaliações provavelmente influenciarão a direção futura dos esforços de pesquisa e desenvolvimento da OpenAI.