Biases, illusions, and decisions: to what extent can we trust artificial intelligence?
DOI:
https://doi.org/10.30905/rde.v10i1.1108Keywords:
Artificial Intelligence;, Trustworthiness;, Human Mediation;, AI Literacy.Abstract
The Artificial Intelligence (AI), developed since the 1950s, is a general-purpose technology that requires critical analysis of its ethical, epistemological, and sociotechnical implications. While it promises innovation and efficiency, it raises concerns such as algorithmic biases, social bubbles, hallucinations, and model opacity. In this theoretical essay, AI reliability is discussed from three main perspectives: biases, “illusions,” and the decisions made based on its outputs. A qualitative methodological approach is adopted, centered on a literature review and engaging with authors such as Rivoltella (2024) and Fantin (2024). It is shown that algorithmic biases reflect prejudices embedded in training data, as seen with ChatGPT and facial recognition systems that fail to identify black faces, reinforcing hegemonic cultures and affecting the educational field. The “illusions” contribute to the spread of misinformation and strengthen the post-truth era. In this context, AI literacy becomes essential so that users can recognize limitations and flaws. Automated decisions often rely on opaque models that compromise explainability and require active human mediation. Furthermore, the concentration of AI development within large private corporations exacerbates the lack of transparency and deepens technological inequalities, especially in peripheral countries. It is concluded that trust in AI should be understood as an ongoing and situated construction, intertwined with human decisions, economic interests, and power structures. Thus, trusting AI requires maintaining responsibility over its use, through critical mediation and grounding in principles of justice, equity, and cognitive freedom, reinforcing the urgent need for critical education and AI literacy.
Downloads
References
ALMEIDA, Ana Paula; ARAÚJO, Cláudia Helena dos Santos; FERRARO, Danielle Soares e Silva Bicudo; VIEIRA, Lívia Carolina; CASTRO, Karolina Batista; COELHO, Márcia Azevedo; QUADROS, Paulo da Silva. Carta de recomendação para o uso da inteligência artificial na educação: desafios e potencialidades. 1. ed. [S. l.]: Instituto Federal de Educação, Ciência e Tecnologia de Goiás, 2025. e-book, 1,55 MB. Disponível em: http://educapes.capes.gov.br/handle/capes/972722. Acesso em: 19 jun. 2025.
ARAÚJO, Júlio; ARAÚJO, Júlio. Racismo algorítmico e inteligência artificial: uma análise crítica multimodal. Revista Linguagem em Foco, v.16, n.2, 2024. p. 89-109. Disponível em: https://revistas.uece.br/index.php/linguagememfoco/article/view/13108 . Acesso em: 20 de jun. 2025.
BLUM, Rodrigo; ENDO, Paulo Cesar. O quarto golpe. Percurso, São Paulo, Brasil, v. 35, n. 70, p. 69–80, 2023. Disponível em: https://percurso.openjournalsolutions.com.br/index.php/ojs/article/view/1427. Acesso em: 2 jul. 2025.
CORREIA, Ana-Paula. É o ChatGPT uma nova tendência no Ensino Superior? Notícias, Revista Docência e Cibercultura. Abril de 2023. Online. Disponível em: https://www.e-publicacoes.uerj.br/index.php/re-doc/an nouncement/view/1622.
Acesso em: 19 jun. 2025.
DICIO. Pós-verdade. Dicionário Online de Português, [s.d.]. Disponível em: https://www.dicio.com.br/pos-verdade/. Acesso em: 1 jul. 2025.
FANTIN, Mônica. Confinamentos, pedagogia do lugar e terceiro espaço na educação. In: BORGES, Gabriela; GRÁCIO, Rui Alexandre; RIBEIRO, Orquídea (Orgs.). Cidadania digital e culturas do contemporâneo. Coimbra: Grácio Editor, 2024. p. 93–102. ISBN 978-989-35413-3-3. DOI: 10.5281/zenodo.11127615. Disponível em: https://ciac.pt/wp-content/uploads/2024/07/Cidadania-digital-e-culturas-do-contemporaneo_digital-1.pdf. Acesso em: 20 jun. 2025.
FREIRE, Paulo. Pedagogia da Autonomia: saberes necessários à prática educativa. São Paulo: Paz e Terra, 1996.
HARARI, Yuval Noah. Nexus: uma breve história das redes de informação, da Idade da Pedra à inteligência artificial. 1. ed. São Paulo: Companhia das Letras, 2024. 504 p.
NORMAN, Donald. A. The Invisible Computer: Why Good Products Can Fail, the Personal Computer Is So Complex, and Information Appliances Are the Solution. Cambridge, MA: MIT Press, 1998.
O´NEIL, Cathy. Algoritmos de destruição em massa: como o big data aumenta a desigualdade e ameaça a democracia. Santo André, SP: Rua do Sabão, 2020.
PANCIROLI, Paolo; RIVOLTELLA, Pier Cesare. Collaborating with Machines. AI, Literacies, School. In: Artificial Intelligence in Education. Tradução de SCHOLÉ – Grupo de Estudos e Pesquisas sobre Inovação na Educação. 2024. Disponível em: https://www.morcelliana.net/img/cms/Rivista%20Schol%C3%A9/2024/1%202024/Panciroli%20Rivoltella%20Schole%CC%81%201_2024%20finale-15-48.pdf. Acesso em: 22 jun. 2025.
RIVOLTELLA, Pier Cesare. Talking to Machines: Semiotic Analysis, Implications for Teaching and Media Literacy. AN-ICON. Studies in Environmental Images. 2024 [ISSN 2785-7433], 3(II), 17–35. https://doi.org/10.54103/ai/23944
ROSSETTI, Regina; ANGELUCI, Alan. Ética Algorítmica: questões e desafios éticos do avanço tecnológico da sociedade da informação. Galáxia, São Paulo, 2021. https://doi.org/10.1590/1982-2553202150301. Disponível em: https://www.scielo.br/j/gal/a/R9F45HyqFZMpQp9BGTfZnyr . Acesso em: 19 jun. de 2025.
SANTAELLA, Lucia. A inteligência artificial é inteligente? São Paulo: Edições 70, 2023.
SAMPAIO, Rafael Cardoso; NICOLÁS, Maria Alejandra; JUNQUILHO, Tainá Aguiar; SILVA, Luiz Rogério Lopes; FREITAS, Christiana Soares de; TELLES, Márcio; TEIXEIRA, João Senna; ESCÓSSIA, Fernanda da; SANTOS, Luiza Carolina dos. ChatGPT e outras IAs transformarão a pesquisa científica: reflexões sobre seus usos. Revista de Sociologia e Política, [S.L.], v. 32, p. 1-24, 2024. FapUNIFESP (SciELO). http://dx.doi.org/10.1590/1678-98732432e008. Acesso em: 04 ago. 2025.
SAYAD, Alexandre Le Voice. Inteligência Artificial e Pensamento Crítico: caminhos para uma educação midiática. 1.ed. São Paulo: Instituto Palavra Aberta, 2023.
SEVERINO, Antônio Joaquim. Metodologia do Trabalho Científico. 23. ed. São Paulo: Cortez, 2007.
SILVA, Tarcízio. Visão Computacional e Racismo Algorítmico: Branquitude e Opacidade no Aprendizado de Máquina. Revista ABPN, v. 12, p. 428-448, 2020. Disponível em: https://abpnrevista.org.br/site/article/view/744. Acesso em: 19 jun. 2025.
VELANDER, Johanna; TAIYE, Mohammed Ahmed; OTERO, Nuno; MILRAD, Marcelo. Artificial Intelligence in K-12 Education: eliciting and reflecting on swedish teachers' understanding of ai and its implications for teaching & learning. Education And Information Technologies, [S.L.], v. 29, n. 4, p. 4085-4105, 3 jul. 2023. Springer Science and Business Media LLC. http://dx.doi.org/10.1007/s10639-023-11990-4.
Downloads
Published
How to Cite
Issue
Section
License
Copyright (c) 2026 Devir Educação

This work is licensed under a Creative Commons Attribution 4.0 International License.
A reprodução, total ou parcial, dos artigos aqui publicados fica sujeita à expressa menção da procedência de sua publicação, citando-se a edição e data dessa publicação. Para efeitos legais, deve ser consignada a fonte de publicação original.
