05 Dataset

El material del workshop se mantiene en el repositorio público langfuse/langfuse-workshop. Usa el repositorio para ejecutar la aplicación, acceder a las ramas de checkpoint y realizar la configuración local.

Ver este archivo Markdown

Guía del participante: 05 Dataset

Notas para el instructor

• Presenta el dataset como el alcance del producto por escrito: entradas esperadas de los usuarios, comportamiento esperado y metadatos para segmentar.
• El recorrido del código es intencionadamente sencillo: cargar JSON seleccionado en Langfuse y examinar el dataset alojado.
• Explica por qué expectedOutput tiene dos campos: idealAnswer alimenta al juez Correctness y expectedKeywords alimenta la comprobación determinista keyword_overlap del capítulo siguiente.
• Relaciona este capítulo con la monitorización: los buenos elementos de un dataset suelen proceder de traces inesperados de producción.

Ritmo de la demostración

1. Abre data/seed-dataset.json y señala input, expectedOutput y metadata.
2. Ejecuta npm run dataset:seed.
3. Abre en Langfuse la lista de datasets y la tabla de elementos.

Presta atención

• Participantes que esperen una comparación exacta de respuestas. La respuesta ideal es material de referencia para los evaluadores, no un objetivo de igualdad de strings.
• Elementos duplicados si el script de carga se ejecuta varias veces contra el mismo proyecto.