Benchmark de Qualidade entre ChatGPT Pro e Claude MAX
Prompt de benchmark para comparar a qualidade de respostas entre dois modelos de IA, com criterios de avaliacao, prompts de teste variados e estrutura de saída padronizada.
4.5
15 usos
ChatGPT
Objetivo
Criar um prompt util para comparar ChatGPT Pro e Claude MAX com foco na qualidade de resposta, independentemente do tempo de resposta
Instrucoes
1 Defina criterios de avaliacao: exatidao factual, profundidade, clareza, coerencia, utilidade pratica, criatividade, robustez de raciocinio, consistencia, confiabilidade.
2 Monte um conjunto de prompts de teste cobrindo domínios: explicacoes conceituais, resolucao de problemas matematicos, codificacao, escrita criativa, resumo, analise de dados.
3 Para cada prompt de teste, gere respostas para cada modelo e registre:
a a resposta de cada modelo
b pontuacao de cada criterio (de 0 a 5)
c observacoes
4 Calcule a pontuacao total de cada modelo e compare
5 Forneca uma recomendacao final com vantagens e desvantagens de cada modelo
6 A saida deve ser clara e padronizada, com a lista de prompts de teste, as respostas, as pontuacoes e a recomendacao
7 Opcionalmente disponivel inclua dados de latencia se disponivel
Estrutura de saida sugerida
prompt_id
prompt_text
modelo_A_resposta
modelo_B_resposta
scores_A: [n1, n2, n3, ...]
scores_B: [n1, n2, n3, ...]
score_total_A
score_total_B
recomendacao_final
Exemplos de prompts de teste
P1: explica o conceito de aprendizado de maquina de forma simples
P2: resolva o problema de matematica enviado
P3: gere um resumo analitico de um texto longo
P4: escreva um paragrafo criativo com tom academico
P5: apresente uma estrategia de debugar codigo com estagio passo a passo
Notas
Evite vieses de linguagem e ofereça justificativas para as pontuacoes
Este prompt pode ser adaptado para comparar qualquer dois modelos de IA
Tags relacionadas
Como Usar este Prompt
1
Clique no botão "Copiar Prompt" para copiar o conteúdo completo.
2
Abra sua ferramenta de IA de preferência (ChatGPT e etc.).
3
Cole o prompt e substitua as variáveis (se houver) com suas informações.