Benchmark de Qualidade entre ChatGPT Pro e Claude MAX

Prompt de benchmark para comparar a qualidade de respostas entre dois modelos de IA, com criterios de avaliacao, prompts de teste variados e estrutura de saída padronizada.

4.5
15 usos
ChatGPT
Usar no ChatGPT
Objetivo
Criar um prompt util para comparar ChatGPT Pro e Claude MAX com foco na qualidade de resposta, independentemente do tempo de resposta

Instrucoes
 1 Defina criterios de avaliacao: exatidao factual, profundidade, clareza, coerencia, utilidade pratica, criatividade, robustez de raciocinio, consistencia, confiabilidade.
 2 Monte um conjunto de prompts de teste cobrindo domínios: explicacoes conceituais, resolucao de problemas matematicos, codificacao, escrita criativa, resumo, analise de dados.
 3 Para cada prompt de teste, gere respostas para cada modelo e registre:
     a a resposta de cada modelo
     b pontuacao de cada criterio (de 0 a 5)
     c observacoes
 4 Calcule a pontuacao total de cada modelo e compare
 5 Forneca uma recomendacao final com vantagens e desvantagens de cada modelo
 6 A saida deve ser clara e padronizada, com a lista de prompts de teste, as respostas, as pontuacoes e a recomendacao
 7 Opcionalmente disponivel inclua dados de latencia se disponivel

Estrutura de saida sugerida
  prompt_id
  prompt_text
  modelo_A_resposta
  modelo_B_resposta
  scores_A: [n1, n2, n3, ...]
  scores_B: [n1, n2, n3, ...]
  score_total_A
  score_total_B
  recomendacao_final

Exemplos de prompts de teste
  P1: explica o conceito de aprendizado de maquina de forma simples
  P2: resolva o problema de matematica enviado
  P3: gere um resumo analitico de um texto longo
  P4: escreva um paragrafo criativo com tom academico
  P5: apresente uma estrategia de debugar codigo com estagio passo a passo

Notas
  Evite vieses de linguagem e ofereça justificativas para as pontuacoes
  Este prompt pode ser adaptado para comparar qualquer dois modelos de IA

Como Usar este Prompt

1

Clique no botão "Copiar Prompt" para copiar o conteúdo completo.

2

Abra sua ferramenta de IA de preferência (ChatGPT e etc.).

3

Cole o prompt e substitua as variáveis (se houver) com suas informações.

Compartilhe

Gostou deste prompt? Ajude outras pessoas a encontrá-lo!