05 Dataset

O material do workshop é mantido no repositório público langfuse/langfuse-workshop. Use o repositório para executar a aplicação, acessar os branches de checkpoint e fazer a configuração local.

Ver este arquivo Markdown

Guia do participante: 05 Dataset

Notas para o instrutor

• Apresente o dataset como o escopo do produto por escrito: entradas esperadas dos usuários, comportamento esperado e metadados para segmentação.
• O caminho no código é intencionalmente simples: carregar JSON selecionado no Langfuse e examinar o dataset hospedado.
• Explique por que expectedOutput tem dois campos: idealAnswer alimenta o juiz Correctness, enquanto expectedKeywords alimenta a verificação determinística keyword_overlap do próximo capítulo.
• Relacione este capítulo ao monitoramento: bons itens de dataset muitas vezes vêm de traces inesperados de produção.

Ritmo da demonstração

1. Abra data/seed-dataset.json e mostre input, expectedOutput e metadata.
2. Execute npm run dataset:seed.
3. Abra no Langfuse a lista de datasets e a tabela de itens.

Fique atento

• Participantes esperando uma comparação exata de respostas. A resposta ideal é material de referência para os avaliadores, não um alvo de igualdade de strings.
• Itens duplicados quando o script de carga é executado repetidamente no mesmo projeto.