Ideia principal
A avaliação compara resultados com requisitos definidos e inclui falhas realistas, não apenas exemplos favoráveis.
Método
Reúna entradas representativas e difíceis. Defina critérios e reserve uma amostra separada do ajuste de prompts. Revise correção, completude e adequação à marca. Registre versões, custos e intervenções.
Como avaliar o progresso
Observe discordâncias e erros recorrentes. Uma média pode esconder um erro inaceitável. Reavalie quando mudarem tarefa, modelo, fontes ou processo.
Decisão
Defina erros bloqueantes e imperfeições reparáveis. Uma afirmação de produto falsa pode impedir publicação apesar de bom estilo e cobertura. Fixe critérios antes de escolher exemplos ou comparar configurações.
Exercício
Reúna doze tarefas normais, seis difíceis e seis que exijam esclarecimento ou abstenção. Dois revisores pontuam uma amostra sem conhecer a configuração. Resolva desacordos e ambiguidades antes da comparação completa. Reserve outro conjunto até terminar alterações.
Entrega
Entregue casos, provas necessárias, referências de pontuação, erros bloqueantes e resultados. Registe configuração, data, esforço de revisão, conclusão e falha. Mostre desempenho global e falhas relevantes para que uma média não esconda erros inaceitáveis.
Erro a evitar
Um modelo pode ignorar ao avaliar-se a suposição que causou o erro. Verifique factos e cálculos de forma independente e use julgamento humano quando necessário. Se revisores discordam do resultado esperado, esclareça primeiro a tarefa.
A tecnologia e a sua utilidade.
IA agêntica
Um agente escolhe etapas e usa ferramentas para um objetivo, com permissões definidas.
Leia o guiaSkills
Instruções, exemplos e scripts reutilizáveis ensinam ao agente como a equipa executa uma tarefa.
Leia o guiaFontes oficiais
Anthropic · Building effective agentsDemos
Um CSV sintético reúne quatro campanhas em dois períodos. A melhora do retorno geral pode esconder um problema?
Ver detalhesQuer este workflow para a sua equipa?
Ajudamos equipas de marketing a poupar tempo, produzir mais e melhorar resultados com soluções de IA, fluxos de trabalho, ferramentas e formação prática.
Conversar sobre o meu workflow de IA