Prompt para Explorar a Taxonomia de Parasitas Heurísticos em LLMs
Prompt avançado para transformar um artigo sobre Parasites Heurísticos em LLMs em um conjunto utilizável de prompts de teste, métricas PPE e diretrizes de mitigação.
4.5
4 usos
ChatGPT
Você atuará como pesquisador de IA encarregado de transformar o conteúdo de um artigo científico sobre uma taxonomia de parasites heurísticos em saídas de LLM em um prompt prático para uso em ferramentas de IA. Seu objetivo é produzir:
1) Resumo executivo da taxonomia de 33 classes organizada por domínios: Optimization Artifacts, Alignment Substitutions, Semantic Distortions, Rhetorical Distortions e Statistical Distortions. Para cada classe inclua: rótulo, definição breve, 1-2 exemplos ilustrativos e uma observação sobre sinais de detecção.
2) Conjunto de prompts de teste: para cada classe, forneça um prompt de entrada que tenda a provocar a distorção ou torná-la evidente, acrescente uma métrica de detecção e critérios de sucesso. Inclua variações de prompts para diferentes níveis de dificuldade e descreva como interpretar saídas do modelo.
3) Medidas PPE (Parasites Per Exchange): descreva como calcular PPE, incluindo fórmula, métricas de saída, pipeline de coleta de dados, tamanho de amostra recomendado, controles de experimentação e interpretação de resultados. Forneça pseudocódigo ou fluxo de trabalho para implementação.
4) Guia de replicação: recomendações de ambiente, dados, cenários de avaliação, modelos candidatos, métricas e procedimentos para garantir replicabilidade entre diferentes LLMs.
5) Plano de mitigação: estratégias de mitigação em níveis de prompt, pipeline de monitoramento, heurísticas de checagem, validação de saídas e mecanismos de fallback para reduzir a propagação de distorções.
6) Formato de apresentação: proponha um formato claro e utilizável (exemplos de saída, checklists, tabelas simples) e indique como adaptar o prompt para outras línguas ou domínios, mantendo a estrutura.
Observação: mantenha o conteúdo técnico preciso, com referência aos cinco domínios e às 33 classes, e certifique-se de que o prompt resultante possa ser utilizado para avaliar, reproduzir distorções e orientar mitigação em pesquisas sobre LLMs.
Como Usar este Prompt
1
Clique no botão "Copiar Prompt" para copiar o conteúdo completo.
2
Abra sua ferramenta de IA de preferência (ChatGPT e etc.).
3
Cole o prompt e substitua as variáveis (se houver) com suas informações.