Título: Alinhamento Cultural de LLMs no Contexto Brasileiro: Uma Análise Comparativa entre ChatGPT -4 e Sabiá 3.1
Autores: Felipe Barbosa Pereira, Murilo Bellezoni Loiola
Resumo: Este trabalho traz uma abordagem de metrificação de alinhamento cultural dos grandes modelos de linguagem (LLMs, do inglês Large Language Models), no contexto português brasileiro, por meio de uma análise comparativa entre o ChatGPT-4 e o Sabiá 3.1. Para isso, são utilizadas as seis dimensões culturais do modelo de Hofstede, aplicando 24 perguntas para os dois modelos e solicitando que eles criassem uma persona brasileira para responderàs perguntas, de modo que fosse possível comparar as respostas do modelo com a de uma pessoa real. Para essa comparação foram utilizadas métricas como o RMSE e a distância euclidiana. Os resultados mostram que, apesar da disparidade entre os investimentos e a capacidade computacional, o Sabiá 3.1 trouxe resultados mais próximos com os valores culturais brasileiros, sendo um forte indicativo de que o uso de dados locais pode favorecer o alinhamento cultural em LLMs.
Palavras-chave: Large Language Models; Cultural Alignment; Natural Language Processing; Brazilian Context.
Páginas: 6
Código DOI: 10.21528/CBIC2025-1191454
Artigo em PDF: CBIC_2025_paper1191454.pdf
Arquivo BibTeX:
CBIC_2025_1191454.bib