Estudo analisa técnicas de persuasão usadas para enganar pessoas

O teste proposto avalia se grandes modelos de linguagem atingem nível humano ao ensinar uma criança a falar um segundo idioma, em sessões interativas.
A ideia é que, se a IA conseguir engajar a criança o suficiente para que haja assimilação do idioma, ela teria alcançado o patamar humano no aprendizado.
A referência histórica envolve o teste de Turing, criado por Alan Turing em mil novecentos cinquenta, para distinguir máquina de humano via diálogo.
O texto também traz a própria experiência de uma controvérsia de 2022, envolvendo um engenheiro da Google que afirmou que o chatbot LaMDA era senciente.
Observa-se que, segundo Noam Chomsky, a linguagem humana nasce de uma capacidade inata e de contexto social; sem interação social real, a passagem no teste pode ser dificultada.

O texto discute um teste para avaliar se IAs alcançaram capacidade humana, propondo observar se um modelo de linguagem pode ensinar uma criança a falar um segundo idioma em sessões interativas. A ideia cita oTeste de Turing, criado por Alan Turing em 1950, que identifica se uma máquina consegue enganar um interlocutor ao ponto de parecer humano.

Segundo o autor, versões modernas do conceito aparecem com frequência na internet, incluindo o uso de captchas que distinguem imagens de semáforos ou motos. A hipótese central é definir se grandes modelos de linguagem (LLMs) atingem padrão humano ao ensinar uma segunda língua por meio de diálogo.

A discussão recorre a Noam Chomsky, que aponta que a aquisição de língua envolve uma capacidade inata aliada a um contexto social. A ideia é que uma criança aprenda observando interações sociais reais, não apenas por exposição a frases isoladas ou conteúdo audiovisual.

O autor sugere que, se os LLMs conseguirem estabelecer uma relação dialógica capaz de levar uma criança pequena a adquirir um segundo idioma, isso seria considerado um marco. No entanto, ele ressalta que a presença de um corpo para tornar as interações mais físicas pode ser crucial para o sucesso do teste.

Proposta de teste para LLMs

O texto aponta que o avanço social dos modelos depende da habilidade de sustentar contextos reais de comunicação. A discussão envolve o papel do contexto paralinguístico e a imersão em situações que simulam dinâmicas de sala de aula. Em análise, a inteligência humana é apresentada como mais visceral do que se imagina.