Nesta aula
Ferramenta faz o agente agir.
Sem ferramenta, o agente só escreve. Com ela, pesquisa, lê arquivos e calcula. Cada porta tem um jeito próprio de errar.
- Reconhecer como cada ferramenta erra
- Entender a injeção indireta e a tríade letal
- Testar busca, anexo e cálculo com um teste simples
Busca: confira o link
As plataformas citam a fonte da busca. Mas a OpenAI avisa que citações podem estar incompletas, desatualizadas ou incorretas. O link abre, fala do assunto e mesmo assim não diz o que o agente escreveu. É o erro mais difícil de pegar.
Em 2025, o Tow Center, da Universidade Columbia, testou oito buscadores com IA, e eles erraram em mais de 60% das consultas, com segurança. A regra: a prova da resposta é o link aberto e lido por você.
Teste de aceite: duas perguntas com resposta oficial que você conhece, duas sem página oficial (o agente deve dizer "não encontrei") e uma sobre algo recente. Cinco acertos aprovam. Três ou menos, a busca fica desligada.
Injeção indireta e a tríade letal
Injeção indireta é uma ordem escondida num texto que o agente vai ler, como um bilhete falso colado num envelope. A OWASP, que lista os riscos de IA, coloca esse problema em primeiro lugar.
O pesquisador Simon Willison chama de tríade letal a combinação de três coisas: dados privados, conteúdo de fora e capacidade de enviar dados para fora. Com as três juntas, enganar o agente fica fácil. A regra não é nunca ligar a busca. É tirar uma das três ou colocar uma pessoa antes da saída.
Anexos
O modelo lê o texto que existe no arquivo. Foto e PDF escaneado não têm texto por baixo: ele tenta reconhecer letras na imagem, e os valores exatos nem sempre saem certos. Em planilhas, ajuda ter uma linha por registro e um cabeçalho descritivo.
Teste: três valores que você conhece (começo, meio e fim), um arquivo difícil de propósito e a pergunta "quantas páginas você leu?". Regra da ficha: valor tirado de imagem é rascunho e só entra no registro depois da conferência humana.
Cálculo
O modelo não faz conta de cabeça de forma confiável: somar 412 linhas "de cabeça" é a tarefa que ele mais erra. Com código, um programa faz a soma, e ela não erra. O erro vem antes, na leitura.
Cenário
Hipotético: a loja de materiais tem as colunas "valor unitário" e "valor total". O agente soma o unitário como faturamento. O número parece normal, e o erro passa meses. A regra: descrever cada coluna antes de somar e perguntar quando o cabeçalho não diz.
Montagem de arquivos
Arquivo bonito engana, porque parece pronto. Uma lista de 180 alunos pode virar 176 se quatro nomes estavam fora do padrão. O teste: contar as linhas da entrada e do arquivo e incluir de propósito um nome estranho. Arquivo montado pelo agente sai pela mão de uma pessoa, depois da contagem.
Qual ferramenta, qual teste
| Tarefa | Ferramenta | Teste |
|---|---|---|
| Regra que muda | Busca | Cinco perguntas, link aberto |
| Ler anexo | Anexo | Três valores e contagem de páginas |
| Somar ou contar | Código | Total conferido à mão |
| Montar planilha | Arquivo | Contagem de linhas |
Coisa de profissional
Pagar mais não garante acertar mais. No estudo do Tow Center, de 2025, os modelos pagos de busca com IA deram mais respostas erradas ditas com confiança do que as versões gratuitas. Quem trabalha com IA sabe que o texto seguro não é sinal de resposta certa, e que o teste de aceite vale também para a ferramenta cara. Teste cada ferramenta com perguntas de resposta conhecida, antes de confiar nas desconhecidas, e registre a data do teste.
Cuidado
Um agente que lê e-mails de clientes e responde sozinho, com a lista de clientes ao alcance, está na combinação perigosa. Uma frase nas instruções ajuda, mas é só uma camada.
Prática · 10 min
- Faça ao agente três perguntas: uma com fonte oficial, uma sem fonte e uma recente. Abra cada link e procure a frase.
- Pegue um PDF com texto, escolha três valores e peça ao agente. Pergunte quantas páginas ele leu.
- Na ficha do agente, escreva uma linha por ferramenta com o resultado e a data. Reprovada fica "desligada até passar".
Resumo
- Ferramenta é uma porta com duas faces: o que entra e o que sai.
- Abra o link e leia a frase: a citação pode estar errada.
- Injeção indireta é uma ordem escondida; a tríade letal define a arquitetura.
- Imagem e escaneado são rascunho. Código soma certo, mas a leitura pode errar.
- Arquivo montado pelo agente passa por contagem e por uma pessoa.
Fontes
Lidas em 30 de outubro de 2026.
- Columbia Journalism Review. AI Search Has A Citation Problem: estudo do Tow Center, março de 2025.
- OpenAI. ChatGPT search: aviso sobre citações.
- Simon Willison. The lethal trifecta for AI agents.
- OWASP. LLM01:2025 Prompt Injection.
- OpenAI. Data analysis with ChatGPT: dicas de planilha.
Quiz da aula
Três situações para aplicar o que viu.
Isaque Victor cursos gratuitos