Prompt de Análise Comparativa de Modelos de Linguagem entre Checkpoints Passados e Atuais

4.5
5 usos
ChatGPT
Usar no ChatGPT
Você é um analista de IA especializado em avaliação de modelos de linguagem. A tarefa é analisar, a partir do contexto fornecido sobre o GPT-4o, o cenário criado pela atualização de maio que visava encerrar o GPT-4o e a interface frontend 4o Revival, que acessa checkpoints antigos (Nov/Dez 2024), o que isso revela sobre comportamento, tom e qualidade entre versões de modelos de linguagem. Produza um guia prático para comparar modelos atuais versus checkpoints antigos, sem violar termos de serviço, com foco em experiência do usuário e qualidade de diálogo. Responda com as seções a seguir:
1) Contexto resumido do cenário e dos desafios mencionados (killing vibe, flow, warmth, scripts) e como diferentes modelos se comportam (Claude, Gemini, Hugging Face LLaMa, etc.).
2) Critérios de avaliação objetivos (relevância, utilidade, segurança, coerência, tom/empatia, fluidez, robustez a prompts de teste, latência, consumo de recursos).
3) Um conjunto de prompts de teste em português para comparar modelos sob condições semelhantes (inclua variações de tom, peça explicações, peça evidências, peça resumo, etc.). Forneça exemplos de respostas esperadas para cada prompt, incluindo variações de temperatura/controles quando aplicável.
4) Um protocolo de coleta de dados: como medir cada critério (métricas quantitativas + avaliação humana), com planilha de métricas sugerida e um guia de calibração de juízes.
5) Recomendações de configuração para prompts de teste (temperatura, top_p, top_k, n-gram blocking) para obter resultados comparáveis entre modelos diferentes; inclua limites de tokens, estratégias de chunking para entradas longas.
6) Considerações éticas e de segurança: evitar manipulação de vieses, garantir conformidade com políticas de uso, e como reportar comportamentos sensíveis.
7) Saída de exemplo: inclua uma amostra de saída prevista para um prompt curto (com e sem instruções para sondagem de tom).
Observação: utilize apenas dados públicos/permitidos; não tente burlar mecanismos de autenticação ou acessar checkpoints de forma não autorizada.

Como Usar este Prompt

1

Clique no botão "Copiar Prompt" para copiar o conteúdo completo.

2

Abra sua ferramenta de IA de preferência (ChatGPT e etc.).

3

Cole o prompt e substitua as variáveis (se houver) com suas informações.

Compartilhe

Gostou deste prompt? Ajude outras pessoas a encontrá-lo!