JJEV 実践ガイド
ホーム/RAG 資料の絞り込み

USE CASE / Noul + Score

RAG 資料の絞り込み

回答の根拠があるかと関連度を判断

代表的な入力(state)

質問と候補の文書抜粋

質問の種類

Noul + Score

質問文(英語を推奨)

回答の根拠があるかと関連度を判断

しきい値より低い場合

コードが候補を残し、文章モデルへ渡す。引用は別途確認する

関連性と正しさを分ける

抜粋の出典、版、日付を保管します。Noul は直接の根拠があるか、Score は定義した尺度で関連度を問えます。ただし内容の真実性や鮮度は保証しません。最終的な引用も確認します。

確認すべき三つの境界例

  1. 古い返金規則:関連しても使えない
  2. 同じ語だけ:答えの根拠ではない
  3. 矛盾する抜粋:出典を確認する

リクエスト例

これは設計案であり、Jev の実際の回答や精度測定ではありません。

{
  "state": "Question: What is the refund period? Excerpt: Refunds are accepted within 14 days.",
  "model": "jev-latest",
  "questions": {
    "decision": {
      "type": "noul",
      "instructions": "Does the excerpt contain evidence directly relevant to the question?"
    }
  }
}

制約と引き継ぎ

関連性は真実性ではなく、得点は事実確認ではない。

担当者が最初に決めることは何か

問い合わせの原文から確認済みの事実、三つの質問、説明用の返り値、境界事例、公開前の評価まで順を追います。

実例で学ぶ:未着の荷物を Jev でどう振り分けるか