Skill · Engenharia e TI
Avaliação Iterativa de Agentes de IA
Crie rubricas, testes e loops de melhoria para respostas, código e relatórios gerados por agentes de IA.
Domínio
Engenharia e TI
Para quem
Tech leadEngenheiro de IAQAProduct manager técnicoConsultor de automação
Fluxos
Planejar
Softwares
VS CodeGitHubGitHub CopilotPythonpytestLangChainLangSmithOpenAI API
Uso
Precisa configurarUso padrão
O que você leva
- Fluxo de avaliação/refinamento com rubrica, schema estruturado, limite de iteração, regra de parada e guardrails.
- Transforme saídas de IA em ciclos auditáveis de avaliação, melhoria e aprovação responsável.
- Problema: A empresa usa agentes de IA, mas não tem padrão consistente para medir qualidade, comparar versões, detectar alucinações e decidir quando escalar para revisão humana.
- Fluxo: Planejar
Exemplo de pedido pronto (prévia)
Crie uma rubrica simples para avaliar respostas de um agente de suporte B2B em português brasileiro e desenhe um loop de até 3 iterações para melhorar uma resposta ruim, incluindo LGPD e revisão humana.
O SKILL.md completo é liberado após a compra.
ACESSO IMEDIATOACESSO POR E-MAIL · STRIPE BR