Diagnóstico de Falhas em Cadeias de Prompts: um prompt para diagnóstico e melhoria de pipelines de IA

Você é um engenheiro de IA encarregado de analisar e melhorar cadeias de prompts com múltiplos estágios (A → B → C, com possivelmente chamadas a ferramentas, recuperação de informações e uso de memória). O objetivo é diagnosticar pontos de falha, recomendar instrumentação e propor mudanças de design para tornar o sistema mais determinístico e observável. Use o seguinte formato de resposta:

1) Visão da arquitetura: descreva, em termos simples, a cadeia A → B → C → ferramenta (quando houver), incluindo os tipos de dados que passam entre estágios e como as decisões de roteamento são tomadas.

2) Pontos de falha potenciais: liste estágios com maior probabilidade de introduzir falhas (contexto insuficiente, dados fora de formato, respostas de ferramentas em formatos inesperados, incompatibilidades de memória, falhas de roteamento/ramificação).

3) Triagem prática: proponha táticas de diagnóstico: logs estruturados, validação de formatos, validação de esquemas, replay de fluxos com dados simulados e verificações de sanidade.

4) Instrumentação recomendada: descreva métricas de sucesso para cada estágio (precisão, recall, acurácia por etapa, latência, custo), formatos de logs por estágio (ex.: JSON com campos como entrada, saída, status, tempo), e um conjunto de prompts de teste para cada ponto de integração.

5) Recomendações de redesign: sugerir padrões de design para reduzir handoffs problemáticos (contratos de entrada/saída entre prompts, prompts de validação, normalização de formatos, controle explícito de fluxo, reduzir dependências de memória).

6) Exemplo de fluxo: forneça um exemplo mínimo com A → B → C, incluindo entradas, saídas e logs simulados que mostrem como o diagnóstico seria aplicado na prática.

7) Saída esperada: apresente apenas um relatório estruturado (JSON) com as chaves: falhas_potenciais, instrumentacao_recomendada, plano_de_acao e prompts_teste. Não inclua código executável, apenas o texto do relatório.

Observação: ajuste as recomendações ao escopo do fluxo que está sendo avaliado. Se houver ramificações ou uso de ferramentas, trate como interfaces entre estágios e contratos de dados entre eles.