05 Kumpulan Data

Materi workshop dikelola dalam repositori publik langfuse/langfuse-workshop repository. Gunakan repositori untuk aplikasi yang dapat dijalankan, cabang checkpoint, dan pengaturan lokal.

Lihat file Markdown ini

Panduan pelajar: 05 Dataset

Catatan instruktur

• Bingkai dataset sebagai ruang lingkup produk yang ditulis: input pengguna yang diharapkan, perilaku yang diharapkan, dan metadata untuk mengiris.
• Jalur kode sengaja sederhana: benih JSON yang dikurasi ke Langfuse, kemudian periksa dataset yang dihosting.
• Tunjukkan mengapa expectedOutput memiliki dua bidang: idealAnswer memberi makan hakim Correctness, dan expectedKeywords memberi makan pemeriksaan keyword_overlap deterministik dalam bab berikutnya.
• Hubungkan bab ini kembali ke pemantauan: item dataset yang baik sering kali berasal dari jejak produksi yang mengejutkan.

Ritme demo

1. Buka data/seed-dataset.json dan tunjukkan input, expectedOutput, dan metadata.
2. Jalankan npm run dataset:seed.
3. Buka daftar dataset dan tabel item di Langfuse.

Perhatikan

• Pelajar mengharapkan pencocokan jawaban yang tepat. Jawaban ideal adalah materi referensi untuk evaluator, bukan target kesetaraan string.
• Item dataset duplikat jika skrip benih dijalankan berulang kali terhadap proyek yang sama.