Auditing longitudinal data across institutional regimes: a graph-based compatibility protocol with evidence from Tunisia

技術要約：制度的レジームを横断する縦断データの監査

問題提起
縦断的データセットは、異なる法的、行政的、または統計的レジームの下で生成された記録を連結していることが多い。共通の尺度や変数名は維持されている場合でも、その背後にある意味、サンプリング・フレーム、コーディング規則、または法的カテゴリーが頻繁に変更される。標準的なデータ品質指標（欠損値、測定誤差など）や統計的手法（構造変化検出、測定不変性など）では、この特定の課題に対処するには不十分である。構造変化の手法は確率論的な法則の変化を特定するが、正当な行政レベルのシフトと、時間的な形状（temporal shape）における根本的な相違を区別することはできない。同様に、潜在変数モデルは公的部門の集計データでは利用できないことが多い。核心となる問題は、連続するレジミ間の記録を、異なる行政的事実を混同することなく、単一の分析対象として扱えるかどうかを判断することである。

手法：グラフに基づく適合性プロトコル
本論文は、レジーム間の不一致を、監査可能な個別の構成要素へと分解する、決定論的で順序付けられた監査フレームワークを提案する。本手法は、データ環境を有限連結グラフ $G=(V, E)$ としてモデル化する。ここで、頂点はレジーム固有のデータ環境を表し、エッジは登録された比較ウィンドウを表す。

監査は以下の4つの順序立てられた段階を経て進行する：

1. レベル登録（Level Registration）： 各エッジ（レジームのペア）に対して、座標成分ごとの中央値最小化（$L_1$ ノルム）を用いて、定数レベルのクロスウォーク（架け橋）を推定する。これにより、データから「レベル・シフト」を分離する。
2. 承認された補正（Authorized Correction）： 残差を、事前に承認されたコンパクトな凸集合（$C_e$）へと投影する。この集合は、宣言された限定的な正規化や再コーディング（例：15%の調整）を許容するが、歴史的な時系列への裁量的な変更は禁止する。
3. 形状の不一致測定（Shape Disagreement Measurement）： 登録および承認された補正後の残差（$D_e$）は、「形状」の不一致、すなわち定数的な平行移動や宣言された正規化では吸収できない差異を測定する。
4. グローバルな整合性と実現可能性（Global Consistency and Feasibility）：
   • サイクル整合性： ペアごとの平行移動のシステムを、グラフのインシデンス行列を用いてグローバルな一貫性の観点からテストする。もしサイクルに沿った符号付き平行移動の総和がゼロでない場合、個別のエッジの残差に関わらず、クロスウォークは不整合である。
   • フルレコード・リフト（Full-Record Lift）： 数値的に調整されたベクトルが、行政的、法的、および容量的な制約（例：非負性、予算上限）を満たす完全な記録へと「リフト（持ち上げ）」可能であるかをテストする。これは線形実現可能性問題として定式化される。もし実現不可能であれば、双対証明（dual certificate）が有効なフルレコードの存在の不可能性を証明する。

最終的な出力は、複合的な品質スコアではなく、形状残差の大きさ、レジーム内のコントロールに対するそのランク、およびハードな不適合性の有無に基づいた、順序付けられた処分（「分離して保持」、「レビュー」、「条件付き統合」）である。

主な貢献

• 不一致の分解： レベル変換（許容される平行移動）と形状の不一致（構造的不適合）を厳密に分離し、大きなレベル・シフトが小さな残差と共存し得ること、またその逆も然りであることを実証した。
• グラフ理論的定式化： 政策データに対して層（sheaf）理論的概念（局所的な合意 vs グローバルな厳密性）を適応させ、ペアワイズの診断では見落とされるクロスウォーク・ネットワークにおけるサイクル不整合を明示的に特定した。
• 行政的妥当性： 「フルレコード・リフト」テストを導入し、数値的な調整が法的または物理的な制約（例：調整された合計値が、許容されるサブコンポーネントの合計を超えてしまう等）を犯さないことを保証する。
• 順序付き監査手順： 変数、ウィンドウ、および補正集合が残差を検査する前に登録されることを強制する厳格なシーケンスを課すことで、望ましい結果を得るための遡及的なモデルチューニングを防止する。

実証結果：チュニジアからの証拠
本手法は、チュニジア（2000Q1–2019Q4）の、制度的信頼、危機ストレス、および政策対応の3つの座標をカバーする構築された四半期パネルに適用される。分析は、3つの歴史的境界に焦点を当てている：プレ・ショック（2010）、ショック・トランジション（2011）、およびトランジション・ポスト（2014）である。

• 残差分析： レベル登録と限定的な補正の後、ショック・トランジションの境界（2010Q4–2012Q2）は、36のモデル仕様のうち30において最大の形状残差（0.209）を示した。これは、33のレジーム内疑似境界コントロールをすべて上回った。
• レベル診断との対比： 従来のレベル診断（平均/中央値のシフト）は、プレ・ショックおよびトランジション・ポストの境界を最も顕著なものとして強調した。しかし、登録後の形状残差は、ショック・トランジションの境界を例外的なものとして独自に特定した。
• 感度分析： ショック・トランジションの境界は、多項式の次数、リッジ罰則、およびウィンドウ長の変動にかかわらず、最も例外的な状態であり続けた。ただし、絶対的な大きさは変動した。
• 処分： プロトコルに基づき、ショック・トランジションの境界は「分離して保持」（レジームの断絶を維持）が必要であり、その他の境界は「統合前のレビュー」を必要とする。

意義と主張
本論文は、チュニジアの変遷に関する因果関係の分析ではなく、責任ある統合のためのプロトコルを提供することを控えめに主張している。

• 因果的ではない： この監査は、革命や憲法の因果効果を推定するものではない。境界は統計的に推定されるものではなく、制度的に固定されている。
• 主張の分離： 数値的な調整、形状の適合性、一貫した変換、および行政的な妥当性が、それぞれ異なる命題であることを実証している。時系列は数値的に調整可能であっても、行政的に妥当ではない場合がある。
• ガバナンスへの有用性： 本手法は、異種混合の記録を明確な正当化なしに統合することを防ぎ、レジーム間のレベル変換と根本的な構造的不適合を区別する透明で再現可能な監査トレイルを提供することで、公的部門のデータガバナンスを支援する。

本研究は、計算上の連続性（時系列の連結）が、制度的な比較可能性の証拠にはならないと結論付けている。提案されたグラフベースの監査は、統合前に適合性を検証するための構造化されたメカニズムを提供し、制度的レジームを横断する縦断的分析の完全性を維持するものである。