A ironia atingiu o mundo da IA. A GPTZero, uma startup de detecção de IA, encontrou citações alucinadas em artigos apresentados na NeurIPS, uma das principais conferências de IA. A empresa escaneou 4.841 artigos aceitos do evento realizado no mês passado em San Diego. Eles descobriram 100 citações falsas em 51 artigos.
A NeurIPS é um local de pesquisa de IA altamente respeitado. A descoberta levanta questões sobre o uso de grandes modelos de linguagem (LLMs) na escrita acadêmica. Embora 100 citações alucinadas em dezenas de milhares sejam estatisticamente insignificantes, isso destaca um problema potencial. Uma citação imprecisa não invalida a pesquisa, mas prejudica o rigor acadêmico.
A NeurIPS reconheceu o problema. Eles disseram à Fortune que, mesmo com referências incorretas, o conteúdo do artigo não é necessariamente invalidado. A conferência se orgulha de seus altos padrões. O incidente gera debate sobre o papel da IA na pesquisa e a necessidade de uma verificação cuidadosa dos fatos.
Os LLMs são treinados em vastos conjuntos de dados. Eles podem, às vezes, gerar informações plausíveis, mas falsas, conhecidas como "alucinações". Este incidente ressalta a importância da supervisão humana ao usar ferramentas de IA. A comunidade de IA provavelmente discutirá essas descobertas e explorará maneiras de evitar ocorrências futuras. Mais investigações e diretrizes atualizadas para pesquisa assistida por IA são esperadas.
Discussion
Join the conversation
Be the first to comment