Em um experimento com 56 universitários falantes de árabe, interações por voz e com avatar foram associadas a maior engajamento, emoções mais positivas e código mais legível do que o apoio por texto em uma tarefa de programação. Como as interfaces de chatbot eram simuladas por um operador humano, os resultados orientam o desenho de ferramentas educacionais, mas não comprovam o desempenho de um tutor autônomo.

O QUE HÁ DE NOVO: Pesquisadores da Universidade de Birzeit compararam quatro formas de apoio a estudantes de ciência da computação durante uma atividade de Java: mensagens de texto, conversa por voz, conversa por voz com um avatar animado e orientação por voz de um professor visível em vídeo. Os 56 participantes, que já haviam cursado fundamentos de Java, foram distribuídos aleatoriamente em grupos de 14; todas as interações ocorreram em árabe, em laboratórios da universidade.

COMO FUNCIONA: Todos receberam o mesmo projeto inicial para desenvolver funções de um sistema de registros de estudantes, com até 60 minutos para concluir a tarefa. Nas três condições apresentadas como chatbot, um operador humano invisível aos participantes formulava as respostas em tempo real, seguindo orientações pedagógicas comuns. Essa técnica, conhecida como Wizard-of-Oz, permitiu comparar as interfaces sem depender da capacidade de resposta de um sistema de inteligência artificial (IA) autônomo; na condição de texto, o operador podia consultar um assistente de IA ao elaborar respostas.

Uma ferramenta analisava expressões faciais para produzir indicadores de emoção em todas as condições, mas esses sinais só orientavam ajustes nas explicações do professor e do operador do avatar. Os pesquisadores registraram as sessões e o tempo de interação, aplicaram questionários antes e depois da atividade e pediram a dois avaliadores independentes que examinassem os códigos produzidos.

PRINCIPAIS RESULTADOS: Voz e avatar superaram o texto nas medidas de engajamento relatado e de tempo de interação. O avatar apresentou a maior média de valência emocional, indicador derivado de expressões faciais, em uma escala de 1 a 5: 4,70, ante 4,18 na condição de voz, 3,21 na de texto e 3,11 na do professor. Não houve diferenças estatisticamente significativas entre os grupos em satisfação ou facilidade de uso percebida.

Na conclusão da tarefa, as maiores médias foram registradas com apoio por voz (83,71%) e do professor (82,53%), contra 63,54% com texto e 67,28% com avatar; voz e professor superaram significativamente o texto nessa medida. Já os códigos das condições de voz e avatar obtiveram avaliações superiores às do texto em legibilidade e facilidade de manutenção. A precisão funcional do código não apresentou diferença estatisticamente significativa entre os grupos.

POR QUE ISSO IMPORTA PARA A EDUCAÇÃO: Para cursos de programação, o estudo sugere que a forma de oferecer ajuda pode influenciar tanto a disposição dos alunos para pedir orientação quanto características do trabalho que entregam, e que maior interação não equivale necessariamente a maior conclusão da tarefa. Para docentes e gestores, o interesse está em combinar canais de apoio adequados a diferentes objetivos, sem tratar a interface mais envolvente como substituta do acompanhamento pedagógico. A preferência da maioria dos participantes por uma combinação de professor e chatbot reforça a pertinência de modelos híbridos, caso a tecnologia consiga reproduzir de modo confiável o suporte testado.

LIMITES E CUIDADOS: A amostra veio de uma única universidade e realizou apenas uma atividade curta, sem avaliação de aprendizagem duradoura ou transferência de habilidades. Além disso, o operador humano e o professor podiam interpretar dúvidas e ajustar respostas de maneiras que um chatbot real talvez não consiga; tempo de conversa também não mede, por si só, aprendizagem. O uso de expressões faciais como indicador emocional exige cautela, pois não revela necessariamente o que o estudante sente e envolve dados sensíveis. Os próximos passos indicados são testar sistemas autônomos com grupos maiores, em outras instituições e por períodos mais longos, mantendo salvaguardas para a coleta desses dados.

Fonte: Enhancing programming education with emotion-aware chatbot interfaces: a Wizard-of-Oz study among Arabic-speaking university students