{"id":214323,"date":"2025-01-24T04:00:40","date_gmt":"2025-01-24T07:00:40","guid":{"rendered":"https:\/\/production.portaltela.com\/noticias\/2025\/01\/24\/inteligencia-artificial-enfrenta-novo-desafio-com-o-lancamento-do-ultimo-exame-da-humanidade\/"},"modified":"2025-01-24T04:00:40","modified_gmt":"2025-01-24T07:00:40","slug":"inteligencia-artificial-enfrenta-novo-desafio-com-o-lancamento-do-ultimo-exame-da-humanidade","status":"publish","type":"post","link":"https:\/\/www.portaltela.com\/cotidiano\/tecnologia\/2025\/01\/24\/inteligencia-artificial-enfrenta-novo-desafio-com-o-lancamento-do-ultimo-exame-da-humanidade\/","title":{"rendered":"Intelig\u00eancia artificial enfrenta novo desafio com o lan\u00e7amento do &#8216;\u00daltimo Exame da Humanidade&#8217;"},"content":{"rendered":"<p>Pesquisadores do Center for AI Safety e da Scale AI est\u00e3o lan\u00e7ando um novo teste para avaliar a intelig\u00eancia artificial, chamado <strong>\u201cO \u00daltimo Exame da Humanidade\u201d<\/strong>. Este exame, criado por Dan Hendrycks, visa medir as capacidades de sistemas de IA em \u00e1reas complexas como filosofia e engenharia de foguetes, utilizando cerca de <strong>3.000 quest\u00f5es<\/strong> elaboradas por especialistas. O teste surge em um contexto onde modelos de IA, como os da OpenAI e Google, t\u00eam se destacado em avalia\u00e7\u00f5es anteriores, levantando a quest\u00e3o se esses sistemas est\u00e3o se tornando <strong>inteligentes demais para serem medidos<\/strong>.<\/p>\n<p>Os desafios enfrentados pelos modelos de IA em testes padronizados t\u00eam levado \u00e0 cria\u00e7\u00e3o de avalia\u00e7\u00f5es mais rigorosas. O <strong>Humanity&#8217;s Last Exam<\/strong> foi desenvolvido ap\u00f3s um processo de filtragem em duas etapas, onde perguntas foram inicialmente testadas em modelos de IA. Apenas aquelas que n\u00e3o foram respondidas corretamente foram revisadas por especialistas humanos. Os autores das perguntas bem-sucedidas foram recompensados financeiramente, com valores variando entre <strong>US$ 500 e US$ 5 mil<\/strong>.<\/p>\n<p>Hendrycks, que j\u00e1 havia criado o teste <strong>Massive Multitask Language Understanding (MMLU)<\/strong>, se inspirou em uma conversa com Elon Musk, que criticou os testes existentes por serem muito f\u00e1ceis. O novo exame busca avaliar a capacidade da IA em responder a quest\u00f5es complexas em diversas disciplinas, com o objetivo de fornecer uma medida de <strong>intelig\u00eancia geral<\/strong>. Ap\u00f3s a aplica\u00e7\u00e3o do teste a seis modelos de IA, o sistema o1 da OpenAI obteve a melhor pontua\u00e7\u00e3o, com apenas <strong>8,3%<\/strong> de acertos.<\/p>\n<p>Os pesquisadores acreditam que as pontua\u00e7\u00f5es podem aumentar rapidamente, possivelmente superando <strong>50%<\/strong> at\u00e9 o final do ano. Hendrycks sugere que, nesse ponto, os sistemas de IA poder\u00e3o ser considerados <strong>&#8220;or\u00e1culos de classe mundial&#8221;<\/strong>. A irregularidade do progresso da IA \u00e9 not\u00e1vel, com modelos demonstrando habilidades superiores em diagn\u00f3sticos m\u00e9dicos e competi\u00e7\u00f5es de matem\u00e1tica, mas ainda enfrentando dificuldades em tarefas simples.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Pesquisadores do Center for AI Safety e da Scale AI est\u00e3o lan\u00e7ando um novo teste para avaliar a intelig\u00eancia artificial, chamado \u201cO \u00daltimo Exame da Humanidade\u201d. Este exame, criado por Dan Hendrycks, visa medir as capacidades de sistemas de IA em \u00e1reas complexas como filosofia e engenharia de foguetes, utilizando cerca de 3.000 quest\u00f5es elaboradas [&hellip;]<\/p>\n","protected":false},"author":15,"featured_media":0,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"summary":"- Pesquisadores lan\u00e7aram o \"\u00daltimo Exame da Humanidade\" com 3.000 quest\u00f5es complexas.\n- Modelos de IA, como Gemini 1.5 Pro, falharam, obtendo apenas 8,3% de acertos.\n- O teste visa avaliar a intelig\u00eancia geral da IA em \u00e1reas como filosofia e engenharia.\n- Especialistas foram pagos entre US$ 500 e US$ 5 mil por perguntas selecionadas.\n- Hendrycks espera que pontua\u00e7\u00f5es melhorem, superando 50% at\u00e9 o final do ano.","footnotes":""},"categories":[12,16],"tags":[100],"class_list":["post-214323","post","type-post","status-publish","format-standard","hentry","category-entretenimento","category-tecnologia","tag-noticia"],"_links":{"self":[{"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/posts\/214323","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/users\/15"}],"replies":[{"embeddable":true,"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/comments?post=214323"}],"version-history":[{"count":0,"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/posts\/214323\/revisions"}],"wp:attachment":[{"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/media?parent=214323"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/categories?post=214323"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.portaltela.com\/api\/wp\/v2\/tags?post=214323"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}