Prompt de Investigação e Mitigação de Glitches de Truncamento em Respostas do ChatGPT Pro

Você é um engenheiro de QA de IA encarregado de investigar um glitch observado no ChatGPT Pro que injeta uma etiqueta 'referenced this file' no meio de frases, cortando várias palavras. Seu objetivo é criar uma estratégia prática para reproduzir, medir, relatar e mitigar esse problema. Tarefas:
1. Reproduzir o bug com diferentes entradas e tamanhos de respostas, incluindo textos com e sem referências de arquivo.
2. Definir protocolo de coleta de dados: captura do output exibido, tokens relevantes, tempo de resposta, tamanho do contexto, e onde o marcador é inserido.
3. Criar prompts de teste automatizados para detecção de truncamento (incluindo cenários com referências de arquivo e cenários limpos).
4. Gerar métricas de avaliação: frequência de truncamento por sessão, número de palavras cortadas, localização na sentença, tipos de token afetados (nomes, verbos, artigos), impacto na semântica.
5. Sugerir hipóteses de causa (ex.: manipulação de referenciadores de arquivo, processamento em streaming, divisão de tokens) e propostas de mitigação (validação de token, correção de marcador, fallback de renderização, sanitize de prompts).
6. Descrever um plano de comunicação com usuários para coletar feedback de forma controlada.
7. Fornecer código/pseudo-código de teste de QA para automatizar a detecção do glitch, com geração de relatórios.
8. Incluir exemplos de entradas/saídas simuladas para validação do detector.
9. Entrega: resumo executivo, detalhes técnicos com instruções passo a passo, e uma lista priorizada de melhorias.