Submódulo 4: Avaliação prática da qualidade dos resultados de IA

🔎 Técnicas rápidas para validar uma saída

Vamos do simples ao robusto. Essas ações não exigem programação e você pode fazer em minutos ao usar qualquer assistente de texto.

Passo a passo (validação em 3–6 minutos)

1. Pedir fontes concretas: solicite URLs, autores ou títulos de onde a informação foi obtida — se a IA não consegue, marque como não verificado. (1)
2. Pedir explicação passo a passo: peça que explique como chegou à resposta (raciocínio, suposições). Isso revela se houve inferência indevida. (2)
3. Testar com um cenário real: troque nomes/datas ou peça um contraexemplo — respostas contraditórias indicam baixa confiança.
4. Comparar 2–3 saídas: gere variações do prompt (pequenas mudanças) e compare consistência e fontes.
5. Usar recuperação de documentos (RAG) quando disponível: ligar a busca por documentos confiáveis reduz alucinações ao ancorar respostas em textos reais. (3)

🧩 Estrutura COSERAF:
C: Contexto — Sou [cargo/papel] e preciso de [uso: e-mail/resumo/post/etc.] para [finalidade].
O: Objetivo — O que preciso que a saída faça (informar, convencer, ensinar).
S: Saída — Formato, extensão e público (ex.: 1 parágrafo, linguagem simples, público leigo).
E: Exemplos — Cite 1 exemplo curto do estilo desejado.
R: Restrições — Não usar dados sensíveis, evitar jargões, não inventar fatos.
A: Avaliação — Critérios: clareza, factualidade, fontes (URLs), tom adequado.
F: Feedback — "Se errar, explique e sugira 2 alternativas."

Por que incluir COSERAF? Ele torna explícitos os critérios com os quais você avaliará o resultado — isso reduz ambiguidades e facilita a revisão humana.