05 Tập dữ liệu

Tài liệu hội thảo được duy trì trong kho lưu trữ langfuse/langfuse-workshop công khai. Sử dụng kho lưu trữ cho ứng dụng có thể chạy, nhánh điểm kiểm tra và thiết lập cục bộ.

Xem tệp Markdown này

Hướng dẫn học viên: 05 Dataset

Ghi chú hướng dẫn viên

• Khung dataset làm phạm vi sản phẩm được viết xuống: đầu vào người dùng dự kiến, hành vi dự kiến và siêu dữ liệu để cắt lát.
• Con đường mã có chủ đích đơn giản: gieo JSON được quản lý vào Langfuse, sau đó kiểm tra dataset được lưu trữ.
• Gọi ra lý do expectedOutput có hai trường: idealAnswer nuôi dưỡng Correctness judge, và expectedKeywords nuôi dưỡng kiểm tra keyword_overlap xác định trong chương tiếp theo.
• Kết nối chương này quay lại giám sát: các mục dataset tốt thường đến từ các traces sản xuất ngạc nhiên.

Nhịp độ Demo

1. Mở data/seed-dataset.json và chỉ ra input, expectedOutput và metadata.
2. Chạy npm run dataset:seed.
3. Mở danh sách dataset và bảng mục trong Langfuse.

Chú ý

• Học viên mong đợi khớp câu trả lời chính xác. Câu trả lời lý tưởng là tài liệu tham khảo cho các đánh giá, không phải là mục tiêu bình đẳng chuỗi.
• Mục dataset trùng lặp nếu tập lệnh gieo hạt được chạy lặp lại chống lại cùng một dự án.