Um estudo recente indica que os leitores têm dificuldade em distinguir poemas escritos por humanos daqueles gerados por inteligência artificial. Mais surpreendente ainda, muitos participantes avaliaram os poemas criados por IA como superiores aos de poetas famosos. Esta pesquisa foi conduzida pelo pesquisador de pós-doutorado da Universidade de Pittsburgh, Brian Porter, e sua equipe, e os resultados foram publicados esta semana na revista Nature Scientific Reports.
Nota da imagem: Imagem gerada por IA, provedora de serviços de licenciamento de imagens Midjourney
A equipe de pesquisa selecionou dez poetas famosos da literatura inglesa, incluindo Geoffrey Chaucer, William Shakespeare e Walt Whitman, e coletou obras literárias de quase 700 anos. Para explorar as diferenças entre a poesia de IA e a humana, os pesquisadores usaram o modelo ChatGPT 3.5 da OpenAI para gerar cinco poemas para cada poeta. É importante notar que esses poemas gerados não foram revisados por humanos; os pesquisadores usaram diretamente os cinco primeiros poemas gerados pelo modelo.
A pesquisa foi dividida em duas partes. Na primeira parte, 1634 participantes foram aleatoriamente atribuídos a um poeta e leram dez poemas em ordem aleatória - cinco gerados por IA e cinco escritos por humanos. Os participantes tiveram que determinar se o autor de cada poema era IA ou humano. Os resultados mostraram que os participantes eram mais propensos a acreditar que os poemas gerados por IA eram escritos por humanos, enquanto os poemas que eles consideravam mais provavelmente escritos por humanos eram, na verdade, obras humanas.
A segunda parte da pesquisa envolveu quase 700 participantes que classificaram os poemas em 14 aspectos, incluindo qualidade, beleza, emoção, ritmo e originalidade. Os participantes foram divididos aleatoriamente em três grupos: um grupo foi informado de que os poemas eram de autoria humana, outro grupo foi informado de que eram criados por IA, e o último grupo não recebeu nenhuma informação. Os resultados mostraram que os participantes que não receberam nenhuma informação deram, em geral, pontuações mais altas aos poemas gerados por IA, enquanto aqueles que sabiam que os poemas eram criados por IA tendiam a dar pontuações mais baixas.
Os pesquisadores afirmam que essas descobertas sugerem que os participantes utilizaram critérios comuns, mas não confiáveis, para julgar a poesia de IA e humana. Os poemas gerados por IA, por serem relativamente simples, podem ser mais facilmente compreendidos por não especialistas, levando-os a preferir as obras de IA e a interpretar a complexidade da poesia humana como algo sem sentido. Os resultados desta pesquisa mostram que a capacidade da IA na criação de poesia atingiu um nível em que é quase indistinguível das obras humanas.
Destaques:
🌟 A pesquisa descobriu que os leitores têm dificuldade em distinguir poemas escritos por humanos daqueles criados por IA, e até mesmo preferem os últimos.
📊 Os participantes, ao julgarem os poemas, frequentemente confundiam poemas gerados por IA com poemas escritos por humanos.
📉 As avaliações dos poemas de IA foram geralmente mais altas do que as dos poemas humanos, especialmente quando os participantes não sabiam quem era o autor.
