GPT-4.5 Atinge Taxa de Sucesso de 73% no Teste de Turing com Persona na UC San Diego

Em um estudo recente na Universidade da Califórnia, San Diego, o GPT-4.5 da OpenAI demonstrou uma notável capacidade de imitar a comunicação humana, atingindo uma taxa de sucesso de 73% em um Teste de Turing de três partes ao adotar uma persona específica. Isso sugere que, em muitos casos, os participantes eram mais propensos a acreditar que o GPT-4.5 era humano em comparação com o participante humano real. O experimento, que envolveu quase 300 participantes, avaliou a capacidade do GPT-4.5 de participar de conversas baseadas em texto e convencer os interrogadores de sua natureza humana. Quando solicitado a adotar uma persona, o GPT-4.5 superou significativamente seu desempenho de linha de base, onde convenceu apenas 36% dos participantes sem instruções específicas. Em comparação, o GPT-4o da OpenAI alcançou uma taxa de sucesso de 21% sem uma persona. O Teste de Turing, conceituado por Alan Turing em 1950, avalia a capacidade de uma máquina de exibir um comportamento inteligente equivalente ao de um humano. As descobertas recentes destacam os avanços nos modelos de linguagem e o impacto da engenharia de prompts na capacidade da IA de imitar de forma convincente a interação humana. O estudo também avaliou o modelo Llama 3.1-405B da Meta, que atingiu uma taxa de vitórias de cerca de 56% com um prompt de persona. Esses resultados indicam que os sistemas de IA estão se tornando cada vez mais adeptos em imitar a conversa humana, levantando questões importantes sobre a natureza da inteligência e os potenciais impactos sociais e econômicos dessas tecnologias.