Detecção de mudanças no modelo/engine a partir de prompts
Prompt para detectar drift de modelo/engine a partir de prompts, gerando relatório de evidências, métricas e prompts de diagnóstico.
4.0
5 usos
ChatGPT
Propósito: criar e utilizar um prompt útil para detectar se houve mudanças no modelo/engine a partir de prompts e saídas recentes.\nInstruções: você atua como analista de drift de modelo. Dado um conjunto de pares prompt/saída de interações recentes, compare com saídas anteriores para identificar sinais de alteração de engine, versão, ou configuração.\nEtapas:\n1) Solicite ao usuário prompts de teste e as saídas correspondentes de dias anteriores (se disponíveis).\n2) Defina métricas de comparação: terminologia (ex.: termos técnicos, jargão), estilo de resposta (detalhamento, concisão), padrões de instrução, tempo de resposta, coerência entre respostas para prompts relacionados.\n3) Para cada par, registre se há divergência significativa; atribua uma pontuação de drift (0-1) e uma probabilidade de mudança de engine (baixa/media/alta).\n4) Gere um relatório estruturado contendo: hipótese de mudança, evidências citadas (trechos de saída), métricas comparadas, nível de confiança, recomendações de validação.\n5) Forneça um conjunto de prompts de diagnóstico prontos para uso, cobrindo: instruções diretas, perguntas abertas, prompts de roleplay, prompts de resumo, e prompts de verificação de consistência.\nFormato de saída recomendado: JSON com campos: drift_hypothesis, evidences, confidence, tests_suggested, notes.\nExemplo de prompts de diagnóstico incluídos no output: ...\nObservação: mantenha descrições neutras, baseando-se apenas em evidências observáveis nas saídas.
Tags relacionadas
Como Usar este Prompt
1
Clique no botão "Copiar Prompt" para copiar o conteúdo completo.
2
Abra sua ferramenta de IA de preferência (ChatGPT e etc.).
3
Cole o prompt e substitua as variáveis (se houver) com suas informações.