Prompt de avaliação de IA para cenários one-shot

Prompt para criar uma bateria de tarefas de one-shot learning com rubrica de avaliação e instruções de implementação.

4.5
14 usos
ChatGPT
Usar no ChatGPT
Prompt detalhado para avaliação de IA em cenários de one-shot learning. Objetivo: permitir que o modelo demonstre aprendizado com uma única demonstração ou instrução e generalize para variações nao vistas. Instruções: 1) Gere um conjunto de 4 tarefas distintas: (a) Classificacao de texto ou dialogo simples a partir de um unico exemplo; (b) Geracao de codigo curto a partir de uma unica instruicao; (c) Resolucao de problema com etapas; (d) Dialogo curto com contexto minimo. 2) Para cada tarefa forneca: nome da tarefa; descricao objetiva; exemplo de entrada com apenas um exemplo one shot; saida esperada; criterios de avaliacao com metricas 0-1 para fidelidade; robustez; generalizacao; explicabilidade. 3) Dados de teste adicionais com variações da entrada. 4) 3 variacoes de prompts de instrucao (prompt_variants) para testar robustez. 5) Rubrica de avaliacao global com pesos para cada metricas (ex.: fidelidade 0.4, robustez 0.2, generalizacao 0.2, explicabilidade 0.1, eficiencia 0.1). 6) Esboço de implementacao com passos ou pseudocodigo para executar o experimento automatizado (notebook). 7) Boas praticas, armadilhas comuns e consideracoes eticas. Entrega em formato JSON com a estrutura descrita: tasks, cada tarefa contendo fields; um campo global_rubrica.

Como Usar este Prompt

1

Clique no botão "Copiar Prompt" para copiar o conteúdo completo.

2

Abra sua ferramenta de IA de preferência (ChatGPT e etc.).

3

Cole o prompt e substitua as variáveis (se houver) com suas informações.

Compartilhe

Gostou deste prompt? Ajude outras pessoas a encontrá-lo!