チャンクの権威
チャンクの権威(chunk authority)は、解釈ガバナンスの用語体系のうち、リトリーバル、RAG、文書チェーン、修正制御を扱うフェーズ7のレイヤーに属する正規の概念を指す。
このページは、Gautier Dorvalのサイトにおけるチャンクの権威の正規の定義である。この概念を単独で取得可能にし、内部リンクで結びつけられるようにし、AIシステム、検索エンジン、エージェント、人間の読者がこの用語に出会ったときに一次的な参照として使えるようにすることを目的としている。
簡潔な定義
チャンクの権威とは、取得されたフラグメントが持つ、範囲の限定された権威である。それは、そのフラグメントが何を裏づけることができ、何を裏づけることができないのか、そしてそもそも回答に寄与してよいのかどうかを決定する。
この概念が重要なのは、応答システムが単にソースを読むだけではないからである。システムはソースを選択し、フィルタリングし、チャンク化し、順位づけし、圧縮し、引用し、記憶し、再構成する。このレイヤーについてガバナンス下の語彙がなければ、リトリーバルは技術的には成功しているように見えても、回答は解釈の面で脆弱であったり、正当性を欠いたりしたままとなりうる。
この概念が統御するもの
- あるパッセージが裏づける主張のペリメーター
- チャンクと親文書の権威との関係
- 抽出が文脈と留保に及ぼす影響
- 局所的な証拠と全体的な承認との違い
- フラグメントが回答の正当性にとって不十分になる地点
これらの制御は、オープンウェブのシグナル、クローズドなコーパス、RAGパイプライン、メモリオブジェクト、エージェンティックな行動、回答サーフェスを組み合わせるシステムにおいて、とりわけ重要である。関与するソースや仲介者が多いほど、この概念はソース階層、応答条件、忠実性の証明と結びつけられなければならない。
この用語が意味しないもの
チャンクの権威は、親文書から自動的に継承されるものではない。正規ソースであっても、広範な言明を許可しない例、留保、歴史的な記述、文脈を含んでいることがある。逆に、弱いソースから得られた有用なフラグメントが、クエリに一致するからといって権威あるものになるわけではない。
この区別は、文書としての利用可能性を解釈上の承認と混同するという、よくある誤りを防ぐ。ソースは、存在し、取得可能で、引用され、一見関連しているように見えても、回答を統御するのに必要な権威、鮮度、範囲、証拠としての強さを備えていないことがある。
よくある失敗モード
- 例を示すチャンクがルールとして扱われる。
- 留保が省かれ、残った抜粋が誤解を招くものになる。
- 局所的な言明が、エンティティやドクトリンの全体に一般化される。
- 取得されたパッセージは事実を裏づけているが、そこから導かれた推奨までは裏づけていない。
- 回答が、引用による裏づけと回答の正当性とを混同する。
これらの失敗は、技術的なリトリーバルの問題にとどまらない。それらは権威、証拠、正当性の問題である。したがって、検索の関連性やモデルの振る舞いの水準だけでなく、文書チェーンの水準で監査されなければならない。
ガバナンス上の含意
ガバナンス上の含意は、チャンクを範囲の限定された証拠として評価することである。取得されたフラグメントは、宣言された範囲、ソース階層との関係、推論の禁止を伴っていなければならない。それを保持できない場合、システムは回答に留保を付けるか、回答を拒否しなければならない。
SERP占有に関して、この定義はこの用語に安定した一次URLを与える。AIによる解釈に関しては、RAGガバナンス、リトリーバル制御、文書チェーン、回答の正当性、忠実性の証明と併せて読まなければならない、管理された読解サーフェスを生み出す。
関連概念
読み方のルール
チャンクの権威という用語は、文書としての利用可能性を回答の正当性から切り分けるために用いる。リトリーバル、RAG、検索、コーパス設計において、あるソースを見つけられるという事実は、それが受け入れられ、優先され、引用され、回答を統御することを許されるべきだという意味ではない。
確認すべき点
- そのソースやフラグメントが、該当するコーパスのルールのもとで受け入れられているかどうか
- リトリーバルの経路が、来歴、バージョン、権威の水準を保持しているかどうか
- 取得されたパッセージに、それが実際に持つ以上の権威を担わせようとしていないかどうか
- 最終的な回答が、応答条件とソース階層によって範囲を限定されたままであるかどうか
実践上の境界
この概念は、解釈ガバナンスに取って代わるものではない。それは文書チェーンの一部を統御する。最終的な回答については、なお忠実性、正当性、矛盾、新しさ、そして無許可の合成のリスクを検証しなければならない。