05 데이터셋

워크숍 자료는 공개 langfuse/langfuse-workshop 저장소에서 관리됩니다. 저장소를 사용하여 실행 가능한 앱, 체크포인트 분기, 로컬 설정을 확인하세요.

이 마크다운 파일 보기

학습자 가이드: 05 데이터셋

강사 노트

• 데이터셋을 제품 범위로 작성한 것으로 프레임하세요: 예상되는 사용자 입력, 예상되는 동작, 슬라이싱 메타데이터.
• 코드 경로는 의도적으로 간단합니다: 큐레이티드 JSON을 Langfuse로 시드하고 호스팅된 데이터셋을 검사합니다.
• expectedOutput이 두 필드를 가진 이유를 호출하세요: idealAnswer는 정확성 판사를 공급하고, expectedKeywords은 다음 장의 결정론적 keyword_overlap 확인을 공급합니다.
• 이 장을 모니터링으로 다시 연결하세요: 좋은 데이터셋 항목은 종종 놀라운 프로덕션 추적에서 나옵니다.

데모 리듬

1. data/seed-dataset.json를 열고 input, expectedOutput, metadata을 지적합니다.
2. npm run dataset:seed를 실행합니다.
3. Langfuse의 데이터셋 목록 및 항목 테이블을 엽니다.

주의할 점

• 학습자가 정확한 답변 일치를 예상합니다. 이상적인 답변은 문자열 평등 대상이 아닌 평가자 참고 자료입니다.
• 시드 스크립트가 동일한 프로젝트에 대해 반복적으로 실행되는 경우 중복 데이터셋 항목.