ZefanCai、カスタマーサポート評価用データセット Open-Jev を HuggingFace で公開
顧客対応のカテゴリやフラストレーション度合いを合成制御変数付きで判定する合成データセット。
リリース: 2026-09-23 · 読了 2 分記事の要約
1. 核心（What）
- ZefanCai 氏が HuggingFace にてデータセット Open-Jev を公開した。
- 各サポートチケットに対して category、bug_severity、refund_requested などの制御変数が定義されている。
- 合成アノテーションによる customer_support_fanout_control ケースが複数収録されている。
2. 影響（Why）
- サポート評価の効率化: 実運用データの収集に頼らず、複雑な顧客要求や感情変化を網羅した評価を即座に開始できる。
- 国内 SaaS への応用: 国内カスタマーサポート SaaS の開発チームは、対話エージェントの判定精度を定量評価する共通ベンチマークとして活用できる。
3. 根拠・詳細（How）
- 合成制御変数の設計: ambiguity や frustration などの control_latents を付与し、対話文脈からの多次元評価を行える構成になっている。