Auditoria de Limites e Alucinações em LLMs Premium (ChatGPT/Gemini)
Prompt avançado para auditar e validar limites declarados de plataformas LLM premium (ChatGPT e Gemini), identificando potenciais alucinações e fornecendo evidências verificáveis.
4.5
8 usos
ChatGPT
Objetivo: criar uma bateria de testes para auditar limites declarados de ChatGPT Premium e Gemini Premium e identificar declarações potencialmente enganosas sobre tais limites, com evidências verificáveis.
Instruções para a IA:
- Compilar afirmações comuns sobre limites de uso como tokens por conversa, mensagens por minuto, limites de chamadas, disponibilidade de recursos, atualizações de versão, políticas de custo, e quaisquer limites específicos de premium.
- Para cada afirmação, propor um teste de verificação que detalhe o cenário, o prompt de teste, e os parâmetros do modelo (ex.: temperatura 0.0, top_p 1.0).
- Critérios de avaliação:
- Hallucinação: se a IA disser algo que contradiz a documentação oficial ou não puder ser verificado, classifique como alucinação e explique.
- Evidência: inclua fontes oficiais com links.
- Reprodutibilidade: descreva como replicar.
- Saída: retornar um array de objetos, cada objeto com campos: afirmacao, evidencia_sugestiva, conclusao, teste_proposto, parametros_utilizados, fontes_citadas.
- Fontes: utilize apenas documentação oficial ou anúncios. Não inclua informações não verificáveis.
- Este prompt não deve instruir a burlar políticas ou cobranças; limite-se à verificação de informações públicas.
Exemplos de afirmações para começar (podem ser ajustadas):
- ChatGPT Premium tem X tokens por conversa
- Gemini Premium suporta Y tokens por mensagem
- Acesso a dados de treinamento é permitido de forma Z
- Tempo de resposta garantido de até W segundos
Como usar:
- Copie este prompt, ajuste as variáveis de saída se necessário, rode várias iterações para confirmar consistência.
Prompt final para uso direto:
Objetivo
Instruções
Saída
- Forneça uma saída estruturada em formato JSON contendo um array de itens. Cada item deve conter os campos: afirmacao, evidencia_sugestiva, conclusao (hallucinação|nenhuma|indeterminada), teste_proposto, parametros_utilizados, fontes_citadas
- Use apenas fontes oficiais ou anúncios públicos para justificar as evidências
- Não inclua instruções para burlar políticas ou cobranças
Pergunta única de uso:
Audite as seguintes declarações sobre limites de ChatGPT Premium e Gemini Premium e gere um array JSON com itens correspondentes: afirmacao, evidencia_sugestiva, conclusao, teste_proposto, parametros_utilizados, fontes_citadas. Para cada item, indique se existe alucinação com base na documentação pública e descreva como reproduzir o teste. Adote tom objetivo e forneça fontes citadas ao final de cada item.
Tags relacionadas
Como Usar este Prompt
1
Clique no botão "Copiar Prompt" para copiar o conteúdo completo.
2
Abra sua ferramenta de IA de preferência (ChatGPT e etc.).
3
Cole o prompt e substitua as variáveis (se houver) com suas informações.