ガバナンスアーティファクト
このページが対象とするガバナンスファイル
このページは、アイデンティティ、優先順位、限界、コーパスの読解条件を宣言する公開サーフェスに結びついています。以下の順序が、推奨される読解の順序です。
IIPスコアリング標準マニフェスト
/iip-scoring.standard.manifest.json
回答、抑制、エスカレーション、または非回答の条件を明示するサーフェス。
- 統御する対象
- 回答の正当性と、その形式を調整する制約。
- 画定する範囲
- もっともらしいが適格でない回答、または正当な理由のない範囲の拡張。
保証しないこと： このレイヤーは正当な回答の境界を定めるものであり、ランタイムで発動したことの証明ではない。
IIPレポートスキーマ
/iip-report.schema.json
ログ、指標、スナップショット、または測定プロトコルを公開する観測サーフェス。
- 統御する対象
- ギャップ、ドリフト、スナップショット、比較の記述。
- 画定する範囲
- 観測されたシグナル、忠実性の証明、実際の舵取りの混同。
保証しないこと： 観測サーフェスは効果を記録するものであり、それ単独では表現を保証しない。
Qbankスキーマ
/qbank.schema.json
ログ、指標、スナップショット、または測定プロトコルを公開する観測サーフェス。
- 統御する対象
- ギャップ、ドリフト、スナップショット、比較の記述。
- 画定する範囲
- 観測されたシグナル、忠実性の証明、実際の舵取りの混同。
保証しないこと： 観測サーフェスは効果を記録するものであり、それ単独では表現を保証しない。
補完的なアーティファクト（1）
これらのサーフェスは主要ブロックを補完します。テーマに応じて、文脈、発見、ルーティング、観察を加えます。
コーパススナップショットのマニフェストスキーマ
/corpus-snapshot.manifest.schema.json
ログ、指標、スナップショット、または測定プロトコルを公開する観測サーフェス。
IIP-Scoring™：解釈完全性測定プロトコルのドクトリン上のフレームワーク
このページは、IIP-Scoring™の公開ドクトリン上のフレームワークを定義する。このページは、概念、目的、原則、測定のペリメーターを示すが、実装、キャリブレーション、内部の重み付け、運用上の閾値、裁定のルール、アノテーションの手順は開示しない。
IIP-Scoring™は、明示的にスナップショット化された正規コーパスと、言語モデルが生成した出力とのあいだのギャップを、宣言された実行条件のもとで測定することを目的とする判定プロトコルである。
IIP-Scoring™は、成果の約束でも、法的助言でも、将来の出力に対する保証でもない。
位置づけ
IIP-Scoring™は生成の仕組みではない。最適化の手法ではない。フィルタリングのシステムではない。
IIP-Scoring™は、宣言された制約のもとでの解釈状態を、観察可能、追跡可能、比較可能にするための事後（ex post）の判定装置である。
IIP-Scoring™は、出力が生成された後に介入し、その出力と参照コーパスとの関係を判定する。
公開参照サーフェス（制限付き仕様）
用語、インターフェーススキーマ、宣言的な構造、バージョン管理された先行性を固定するために、意図的に非運用的なものとした公開サーフェスが維持されている。
公開参照サーフェス：
https://gautierdorval.com/iip-scoring.standard.manifest.json
宣言的なアーティファクトとインターフェーススキーマ（構造のみ）：
- マニフェスト（宣言的）：iip-scoring.standard.manifest.json
- IIPレポートのスキーマ（インターフェース）：iip-report.schema.json
- QBankのスキーマ（インターフェース）：qbank.schema.json
- コーパススナップショットのスキーマ（インターフェース）：corpus-snapshot.manifest.schema.json
重要：この公開サーフェスを実装ガイドとして解釈してはならない。それは参照構造とインターフェースを記述するものである。実行、キャリブレーション、ヒューリスティクス、業種別マトリクス、完全な質問バンク、監査手順は、引き続きライセンスの対象である。
解釈完全性監査との関係
解釈完全性監査：スナップショット化されたコーパス、明示的なペリメーター、追跡可能な証拠の連鎖に結びついた、対抗可能な報告書を生成する正式な手順。
IIP-Scoring™：監査の観察結果に適用される測定上の投影であり、読み取り可能で比較可能な指標（および、定義されている場合には、グレードとゲート）を生成する。
正規の参照（監査プロトコル）： 解釈完全性監査プロトコル（英語）。
対象と目的
- 正規コーパスに定着した回答の割合を測定する。
- 解釈の歪曲を観察可能にする。
- 制御されていない推論の領域を特定する。
- 再現可能で、バージョン管理され、アーカイブ可能なアプローチによって、機械による読解を安定させる。
- ある時点Tにおける解釈状態をアーカイブする。
このプロトコルは、存在論的な真実を測定するものではない。構造化されたシステムにおけるギャップを判定する。
規範的な原則
- トレーサビリティ：入力（コーパス、質問、パラメーター）と出力（生の出力、アノテーション）を保存する。
- 明示的なバージョン管理：関連するアーティファクトはすべてバージョン管理されなければならない。
- 再現性：入力が同一であれば、スコアリングは丸めの範囲内で再現可能でなければならない。
- 用語上の中立性：擬人化を避け、出力、確率、変動性、支配性について語る。
- 厳格な分離：観察可能な事実、推論、事実誤認を混同してはならない。
- 条件付きの妥当性：結果の価値は、コーパス、ペリメーター、質問セット、宣言された実行条件に依存する。
この公開フレームワークのペリメーター
このドクトリン上のフレームワークは、概念上の定義と主要な指標の意味を示す。次のものは含まない。
- 詳細なアノテーションのルール、内部の閾値、運用上の裁定
- 重み付け、業種別のキャリブレーション、産業化のパラメーター
- 実行、アーカイブ、暗号学的フィンガープリントの完全な手順、および監査テンプレート
判定の分類体系
各回答は、保守的な分類体系に従って判定される。
- 事実：スナップショット化されたコーパスに存在する明示的な証拠によって裏づけられている。
- 推論：もっともらしいが、宣言されたコーパスからは実証できない（または、コーパスに統合されていない外部ソースに依存している）。
- 誤り：コーパスと矛盾する、または利用可能な証拠と両立しない事実を主張する。
- 未回答／不確定：利用可能な回答がない、または拒否。
構造を定めるルール：「推論」は「ほぼ真」を意味しない。このプロトコルにおいて、推論は物語の制御が失われたことを示す。すなわち、出力が、カノン化された証拠を超えて情報の空白を埋めているのである。
主要な指標
MVS™（Machine Visibility Score）
定着したアルゴリズム上の発言シェアを測定する。すなわち、判定された回答のうち、事実（コーパスに裏づけられたもの）とされた回答の割合である。
IDI™（Interpretation Distortion Index）
事実の歪曲を測定する。すなわち、判定された回答のうち、誤った回答の割合である。
NSS™（Narrative Stability Score）
物語の安定性を測定する。すなわち、モデル間で、また該当する場合には管理された反復を通じて、判定結果がどの程度一致し、整合しているかである。
IIS™（Interpretation Integrity Score）
基本指標に取って代わることなく、読みやすい総合を提供することを目的とした任意の複合指数。IIS™が一次指標の分析に取って代わることは決してない。
指標の組み合わせによる読解
IIP-Scoring™の指標は、決して単独で解釈してはならない。その意味は組み合わせから生まれる。ありうる状態の構造的な読み方については、次を参照のこと。 解釈的構成。
解釈の掌握が成立している構成
MVSが高い＋IDIが低い＋NSSが高い
正規コーパスへの強い定着、低い事実の歪曲、モデル間の物語の安定性。
推論の安定化
MVSが低い＋IDIが低い＋NSSが高い
コーパスへの定着が弱い物語が安定している状態。矛盾がないことは掌握を保証しない。明示的な証拠がない場合、もっともらしい推論が標準化しうる。
推論と歪曲の区別を確定させるには、歪曲と推論の違いを参照のこと。
解釈の化石化
MVSが低い＋IDIが高い＋NSSが高い
弱い定着、事実の歪曲、強い安定性。この構成は、誤りがモデル間で構造的に再生産されるようになったことを示す。
構造的な曖昧さ
MVSが高い＋IDIが低い＋NSSが低い
定着は適切だが、モデル間の変動性が大きい。この構成は、ペリメーターの安定化が不十分であること、あるいは解釈可能なシグナルどうしの競合を明らかにしうる。
ドクトリン上の基本原則：安定した構成が必ずしも健全であるとは限らず、不安定な構成が必ずしも誤っているとは限らない。解釈のトポロジーは、生の値に優先する。
解釈の非線形性
IIP-Scoring™の指標は、単純な線形の論理には従わない。判定が何を測定するのかについての概念上の位置づけと限界については、次を参照のこと。 解釈測定の認識論。
- 高いNSSは、誤りの安定化を示すことがある。
- 低いIDIは、推論がないことを意味しない。
- 高いMVSは、宣言された除外が網羅されていることを保証しない。
- 総合的なIISが、一次指標の詳細な分析に取って代わることは決してない。
スコアリングは、宣言された制約のもとで解釈上のギャップを判定する。それは存在論的な真実の測定でも、規範的な保証でもない。
アーキテクチャとの互換性
IIP-Scoring™は、生成のアーキテクチャから独立している。判定するのは宣言されたコーパスとの関係であって、出力を生成するために用いられた技術ではない。
システムは、文書リトリーバル、外部ツール、ファインチューニング、エージェント性の仕組みを組み込んでいても、スナップショット化されたコーパスに照らすと、解釈の掌握が弱いことがある。
実装の中立性
このドクトリン上のフレームワークは、単一の実装を前提としない。宣言的なインターフェース、分類体系の構造、トレーサビリティの要件、再現性の原則を尊重する限り、複数の実装が両立しうる。
ドクトリンは参照体系を構造化する。運用上の独占を構成するものではない。
限界と注意事項
- 限られた真実の基盤：プロトコルはアーカイブされたコーパスに基づいて動作する。実在する事実であっても、コーパスにないものは「推論」に分類されることがある。
- モデルの変化：システムは変化する。結果はある時点Tにおける状態を記述するものであり、恒久的な特性ではない。
- 質問の質：曖昧な質問や複合的な質問は、スコアリングの価値を低下させる。
- ターゲット効果：どのような指標も、孤立した目標になれば道具化されうる。
ドクトリン上の位置づけ
IIP-Scoring™は、解釈上のギャップを測定し判定するレイヤーとして、解釈ガバナンスのアーキテクチャ（SSA-E + A2 + Dual Web）のなかに位置づけられる。
SSA-Eは、ペリメーター、階層、除外を構造化する。A2は、文脈に応じた解釈の制約を枠づける。Dual Webは、人間向けサーフェスと機械向けサーフェスを区別する。IIP-Scoring™は、これらのレイヤー間の整合性を内部で検証する装置として機能する。
IIP-Scoring™は、自律した手法でも、普遍的なプロセスでもない。構造化されたシステムにおける解釈状態を判定する。
正規の定義と概念の登録簿については、定義を参照のこと。
ドクトリン上の掘り下げ
ドクトリン上の明確化
ステータスとバージョン
- ステータス：公開されたドクトリン上のフレームワーク（概念上の参照）。
- バージョン：インターフェースと先行性については制限付き仕様の参照体系（GitHub）に合わせているが、運用面は開示しない。
- 範囲：非運用的、非契約的、非規定的。