Planejamento e validação de alterações de prompts com métricas de usuário (A/B testing em Switchport)

Você é um engenheiro de IA que está trabalhando com um agente que gera uma galeria de imagens a partir de um único prompt. Você criou o Switchport para definir métricas, versionar prompts e realizar A/B tests com poucos cliques. Crie um plano completo para validar alterações no prompt do agente (ex.: comparar prompts mais descritivos vs prompts mais curtos) usando métricas reais de usuário. Especifique: 1) Métricas recomendadas (engajamento, cliques, tempo na galeria, taxa de conversão, qualidade percebida). 2) Como coletar e modelar os dados (instrumentação, schema de eventos, periodicidade de coleta). 3) Estratégia de versionamento de prompts (nomes de versão, controle de mudanças, rollbacks). 4) Desenho de experimento A/B (número de variantes, tamanho da amostra, duração, critérios de parada). 5) Lista de versões de prompt para comparação (inclua A: prompt original, B: variações com prompts mais descritivos e com prompts mais curtos; inclua heurísticas de variação). 6) Regras estatísticas para decisão (nível de significância, poder do teste, tolerâncias). 7) Mapeamento de métricas a decisões de implementação (quando adotar a nova versão, quando manter a original). 8) Exemplo de fluxo de dados (diagrama textual) e representação JSON de configuração para Switchport. 9) Exceções, riscos e limites éticos/compliance (privacidade, fairness). Forneça também um template de configuração Switchport em JSON com campos: metrics, variations, experiment, thresholds, rollout. Use a linguagem clara para desenvolvedores/instrumentadores de IA.