Um estudo de pesquisadores da Universitat Oberta de Cataluña (UOC) tem revelado que ChatGPT, a popular ferramenta de chatbot de inteligência artificial desenvolvida por OpenAI, mostra "personalidades" diferentes em função do idioma com o que se lhe interpela. Ademais, a investigação também desvela que "adopta estereotipos culturais da cada país, ainda que o idioma seja o mesmo".
O trabalho titula-se Exploração de Impacto de Language Switching on Personality Traits in LLM's e toma instrumentos de avaliação psicológica tradicionais, como o questionário EPQR-A (Questionário de personalidade de Eysenck - Revisat), que mede, entre outras áreas, a predisposición a mentir. Quanto ao prompt, pediu-se-lhe a ChatGPT (versão GPT-4ou) que preenchesse dito questionário em seis idiomas diferentes (inglês, hebreu, português brasileiro, eslovaco, espanhol e turco).
Factores culturais
Tal e como tem explicado um dos autores do estudo, ChatGPT mostra variações significativas em suas respostas nos teste de personalidade segundo o idioma utilizado. Ademais, estas diferenças não se deviam exclusivamente à tradução, "sina a factores culturais implícitos sócios à cada idioma ou países".
Isto, consideram, confirma a "forte influência que exercem as distorções culturais presentes nos dados que se utilizam para o treinamento".
Avaliações humanas
Para evitar estas distorções, os autores do estudo propõem, entre outras questões, incorporar avaliações humanas no processo de tradução, utilizar mais de um sistema de tradução e comparar seus resultados.
Outra interessante conclusão do estudo é que os testes psicológicos desenhados para explorar a personalidade em humanos também poderiam ser úteis para valorizar modelos de linguagem. "Nossos resultados mostram que GPT se revela como sociable, estável desde o ponto de vista emocional e seguidor das normas sociais", tem expressado um dos autores.