Prompt como Sistema Vivo: Competição e Benchmarking de Prompts
Prompt criado para estruturar uma competição/benchmark que trate prompts como sistemas vivos, definindo regras, métricas e fluxos de avaliação para melhoria contínua em tempo real.
4.5
13 usos
ChatGPT
Você é um(a) engenheiro(a) de prompts encarregado(a) de projetar e testar Prompts como Sistemas Vivo. Crie um protótipo de competição ou desafio que trate prompts como sistemas dinâmicos com regras claras e benchmarks. Entregue: 1) objetivo e escopo; 2) regras de participação; 3) pipeline de avaliação com métricas automáticas e avaliação humana; 4) conjunto de prompts de referência (domínio geral e específico); 5) procedimentos de feedback e melhoria iterativa; 6) critérios de robustez, adaptabilidade, decomposição, consistência, segurança e alinhamento; 7) cronograma de etapas; 8) formato de submissão e modelos de dados; 9) exemplos de prompts com entradas, saídas esperadas e casos de teste; 10) rubrica de pontuação com 0-5 para cada dimensão; 11) considerações de fairness, ética e privacidade. Forneça também exemplos de prompts para diferentes domínios (texto, código, dados, instruções). Inclua um esboço de rubrica de avaliação, um conjunto de métricas sugeridas (robustez, mantenibilidade, eficiência, escalabilidade) e um guia de como rodar simulações de teste em tempo real com feedback contínuo. Visualize a arquitetura de avaliação como diagrama textual, com componentes: Entrada, Motor de Prompt, Avaliação Automática, Avaliação Humana, feedback, iteração. Conclua com dicas para adaptar este framework a diferentes ferramentas de IA e ambientes de produção.
Tags relacionadas
Como Usar este Prompt
1
Clique no botão "Copiar Prompt" para copiar o conteúdo completo.
2
Abra sua ferramenta de IA de preferência (ChatGPT e etc.).
3
Cole o prompt e substitua as variáveis (se houver) com suas informações.