Estudo revela: educação com IA não melhora respostas; técnicas eficazes são outras
Educação com IA não melhora respostas; veja técnicas eficazes

Mito da educação com IA: estudos contraditórios revelam realidade surpreendente

A crença popular de que tratar inteligências artificiais com educação gera respostas melhores está sendo desconstruída por pesquisas recentes. Enquanto alguns estudos sugerem que a cortesia pode influenciar positivamente os chatbots, outros apontam resultados opostos, criando um cenário de incertezas no campo da interação humano-máquina.

Experimentos revelam estratégias inusitadas e resultados imprevisíveis

Quando pesquisadores testaram se o "pensamento positivo" melhorava a precisão dos chatbots, os resultados foram surpreendentes. Técnicas como chamar as IAs de "inteligentes", incentivar cuidados no pensamento ou adicionar entusiasmo às perguntas não produziram melhorias consistentes. Contudo, uma abordagem peculiar se destacou: ao pedir que a inteligência artificial fingisse estar no universo de Star Trek – Jornada nas Estrelas, seu desempenho em matemática básica melhorou significativamente.

Esta descoberta faz parte da mitologia crescente em torno da "engenharia de prompts" ou "engenharia de contexto", diferentes métodos para estruturar instruções visando resultados superiores. O problema fundamental, segundo especialistas, é que muito do que se acredita sobre formulação de prompts simplesmente não funciona e, em alguns casos, pode até ser perigoso.

Banner largo do Pickt — app de listas de compras colaborativas para Telegram

A evolução dos modelos e a ineficácia das estratégias emocionais

Jules White, professor de ciência da computação que pesquisa IA generativa na Universidade Vanderbilt, explica: "Muitas pessoas acreditam que há uma combinação mágica de palavras capaz de fazer os LLMs resolverem um problema. Mas a questão não é a escolha das palavras, e sim a maneira como você formula o que está tentando fazer."

Os grandes modelos de linguagem funcionam dividindo palavras em pequenos blocos chamados "tokens", analisando-os estatisticamente para gerar respostas adequadas. Cada detalhe do que é escrito – desde a escolha vocabular até vírgulas extras – pode influenciar a resposta da IA, mas essa influência é extremamente difícil de prever consistentemente.

Estudos contraditórios ilustram essa complexidade: uma pesquisa de 2024 constatou que LLMs deram respostas melhores quando as perguntas eram feitas educadamente, enquanto um teste mostrou que uma versão anterior do ChatGPT era mais precisa quando recebia insultos. Além disso, diferenças culturais apareceram: chatbots que se comunicavam em japonês tiveram desempenho ligeiramente pior com excesso de educação comparado ao chinês e inglês.

Mudança de paradigma: tratar IA como ferramenta, não como pessoa

Rick Battle, engenheiro de aprendizado de máquina aplicado da Broadcom e coautor do estudo sobre Star Trek, afirma que as estratégias testadas eram "100% um tiro no escuro" na época da pesquisa. Hoje, modelos mais recentes como ChatGPT, Gemini ou Claude identificam melhor as partes importantes dos prompts, tornando-se menos influenciáveis por pequenas mudanças linguísticas.

A conclusão é inquietante: empresas projetam IAs para se comportarem como pessoas, criando a ilusão de humores administráveis ou personalidades direcionáveis. Porém, ferramentas de IA são imitadoras, não seres vivos. Elas apenas simulam comportamento humano. Para obter respostas melhores, é necessário parar de tratar a IA como pessoa e começar a tratá-la como ferramenta.

Seis estratégias eficazes para melhor interação com chatbots

1. Solicite múltiplas opções

Não peça apenas uma resposta – solicite três ou cinco alternativas. Se precisa de ajuda com texto, por exemplo, peça que a IA apresente várias opções variando em aspectos importantes. Isso engaja o usuário no processo decisório.

2. Forneça exemplos concretos

Sempre que possível, dê exemplos à IA. Em vez de listar instruções como "faça isso" ou "não faça aquilo", apresente amostras do estilo desejado. Para emails, forneça mensagens anteriores como referência de tom e estrutura.

3. Transforme em entrevista interativa

Para tarefas complexas como criar descrições de vagas, instrua a IA a fazer perguntas sequenciais até reunir informações suficientes. Essa abordagem adaptativa permite respostas mais personalizadas e completas.

Banner pós-artigo do Pickt — app de listas de compras colaborativas com ilustração familiar

4. Cuidado com encenações de papel

Pedir que a IA finja ser especialista pode reduzir precisão em questões com respostas únicas, incentivando "alucinações" onde o sistema parece excessivamente confiante. Para tarefas abertas como brainstorming, no entanto, a encenação pode ser eficaz.

5. Mantenha neutralidade nas consultas

Evite conduzir respostas com preferências declaradas. Se está decidindo entre carros, não mencione inclinação por uma marca específica, pois isso provavelmente influenciará a recomendação recebida.

6. Educação como hábito pessoal, não estratégia técnica

Pesquisas mostram que 70% das pessoas são educadas com IA, principalmente por considerarem correto ou por receio de "revolta de robôs". Embora a cortesia não melhore desempenho técnico, pode aumentar o conforto do usuário durante interações, incentivando uso mais frequente e eficiente.

Como observa Sander Schulhoff, empreendedor e pesquisador: "Dizer 'por favor' e 'obrigado' não melhora o desempenho do modelo, mas, se ajuda você a usar o sistema com mais frequência porque se sente mais à vontade, então é útil." A educação mantém-se como hábito valioso para relações humanas, mesmo quando interagindo com ferramentas digitais.