Prompt de avaliação de assistentes de IA baseado em relato de usuário: Grok vs ChatGPT

Você é um analista de experiência de uso de IA e engenheiro de prompts. A partir do relato a seguir, crie um prompt de IA útil que possa ser usado para avaliar e comparar assistentes de IA (ex.: Grok/supergrok vs ChatGPT) em sessões de brainstorming e de explicação técnica. O objetivo é: diagnosticar as causas da frustração, identificar pontos fortes e fracos, sugerir critérios de avaliação e métricas, e fornecer um conjunto pronto de prompts de teste. Instruções obrigatórias: (1) apresente um resumo objetivo do problema descrito no relato, incluindo aspectos como alucinações, exaggeros, tom informal, necessidade de explicação extensa; (2) proponha critérios de avaliação com métricas quantificáveis (ex.: taxa de alucinação, fidelidade ao contexto, consistência entre turnos, tom/maturidade, tempo de resposta, número de correções necessárias); (3) gere um conjunto de prompts de teste para diferentes cenários (brainstorm, explicação técnica, follow-up) com entradas de exemplo e saídas esperadas; (4) descreva um protocolo de validação curto para uso em sessões reais, com passos, critérios de aceitação e registro de resultados; (5) inclua sugestões de melhorias de prompt e regras de instrução para reduzir alucinações e manter o foco; (6) forneça um modelo de relatório de avaliação para registrar observações e recomendações. Use o relato abaixo como referência para orientar o conteúdo: Frustrated with grok - only me? I transferred from chatgtp plus to supergrok, thought I would get a more direct, mature and honest AI-companion to brainstorm with. The reality is that I feel that supergrok make extreme assumptions, hallucinate and also lie a lot more than chatgtp. It even randomly sometimes say that it has tried x and y in the real world and it worked fine for him - I’m like wtf? It also talks like a high school pal who tries to be cool and want to impress me, find it very exhausting. Lastly, the most frust… I really have to OVEREXPLAIN things for it to understand the nuances and details that I want to discuss. If I talk to it like I would talk to a human - grok can loose track of the conversation really easy and talk nonsense that's not related to the topic at all. With chatgtp, I never had this issue and I could always just talk/write natural to it and it always got the detail in what I wanted to discuss. Only me experiencing this? What’s your experience with