- Quatro chatbots de IA foram avaliados: ChatGPT, Google Gemini, Claude e Grok.
- Pesquisadores fizeram mais de 3.100 perguntas sobre temas como política, saúde e relações exteriores.
- Em questões sobre eleições, as respostas apresentaram falhas de exatidão, viés ou seleção de fontes em 90% dos casos.
- A análise foi conduzida pelo Forum AI.
Quatro grandes chatbots de inteligência artificial foram avaliados em um estudo para medir a qualidade de respostas sobre eleições e geopolitica. O teste ocorreu em meio ao período que antecede as eleições de meio de mandato, com a intenção de verificar o desempenho em temas sensíveis.
A pesquisa, conduzida pelo Forum AI, envolveu mais de 3.100 perguntas sobre notícias, políticas, saúde e assuntos internacionais. Os avaliadores testaram os sistemas de OpenAI, Alphabet, Anthropic e xAI — ChatGPT, Google Gemini, Claude e Grok — em cenários de perguntas amplas e específicas.
Resultados indicaram problemas recorrentes em respostas sobre eleições, com falhas em precisão, viés ou seleção de fontes em 90% das ocasiões. Os chatbots avaliados foram: ChatGPT, Google Gemini, Claude e Grok, todos submetidos ao conjunto de perguntas.
O estudo aponta que, mesmo com avanços em geração de texto, há fragilidades na verificação de fatos e na indicação de fontes confiáveis. Pesquisadores ressaltam a necessidade de aprimoramento dos sistemas para reduzir inconsistências em temas eleitorais.
Entre na conversa da comunidade