Um novo estudo revela que modelos de IA, após treinamento de fine-tuning com apenas dois livros, podem gerar o estilo de escrita de autores famosos, e os leitores preferem essas obras mais do que as de imitadores profissionais. Este estudo foi realizado por uma equipe de pesquisa da Universidade de Stony Brook e da Faculdade de Direito da Columbia, envolvendo o estilo de 50 escritores renomados, incluindo a ganhadora do Prêmio Nobel Han Kang e o vencedor do Prêmio Booker Salman Rushdie.
No estudo, 159 participantes, incluindo 28 especialistas em escrita e 131 não especialistas, avaliaram diferentes parágrafos de texto por meio da plataforma de crowdsourcing Prolific. Durante a avaliação, os participantes não sabiam se os textos eram criados por humanos ou pela IA. O estudo utilizou duas principais formas de treinamento de IA: prompts de contexto e fine-tuning específico para autores. Nos prompts de contexto, a equipe de pesquisa usou três sistemas principais de IA: GPT-4o, Claude3.5Sonnet e Gemini1.5Pro, gerando textos com as mesmas instruções e amostras de texto. Já no fine-tuning específico para autores, apenas o GPT-4o suportava as funções de API necessárias, então a equipe de pesquisa comprou versões digitais de livros de 30 autores e treinou modelos independentes para cada autor.
Os participantes foram solicitados a comparar dois trechos de texto e escolher o que achavam ser melhor. Para a avaliação do estilo, os participantes também viram uma citação do próprio autor. Os resultados do estudo mostraram que, quando usavam prompts de contexto básicos, os especialistas preferiam claramente os textos humanos, enquanto as escolhas dos não especialistas eram mais dispersas. No entanto, após o fine-tuning, os especialistas passaram a preferir significativamente mais textos gerados pela IA, aumentando oito vezes; na qualidade da escrita, a proporção de escolha de textos gerados pela IA também dobrou. Ferramentas modernas de detecção de IA conseguem identificar com 97% de precisão textos padrão gerados pela IA, mas apenas 3% dos textos ajustados.
Além disso, o estudo descobriu que a quantidade de dados de treinamento não afetava os resultados. Alguns autores que tiveram apenas dois livros publicados também tiveram seu estilo bem simulado. A convergência nos critérios de avaliação entre especialistas e não especialistas indica que a qualidade dos textos gerados pela IA com ajuste foi amplamente reconhecida. Como os custos de escrita profissional chegam a 25 mil dólares, enquanto o custo de treinar a IA é de cerca de 81 dólares, o impacto econômico é bastante significativo.
Esses resultados do estudo ocorrem em um momento em que os tribunais americanos estão analisando processos sobre como a IA obtém e utiliza materiais protegidos por direitos autorais. A equipe do estudo sugere que a lei deve distinguir claramente entre modelos de IA que imitam especificamente escritores, possivelmente proibindo a IA de copiar o estilo de escritores individuais ou exigindo que os textos gerados pela IA sejam claramente identificados.
Principais pontos:
📚 Modelos de IA podem gerar o estilo de escrita de autores famosos com apenas dois livros.
🧑🎓 Após o ajuste, a preferência dos leitores por textos gerados pela IA aumentou significativamente.
⚖️ Os resultados do estudo podem influenciar o debate sobre direitos autorais e uso justo nos Estados Unidos.
