Evaluating the Impact of Rhode Island's Self-Sustaining Reemployment Services and Eligibility Assessment (RESEA) Program on Employment Outcomes

本論文は、ロードアイランド州のRESEAプログラムが失業者、特に高齢者や低所得者の雇用成果と賃金を大幅に改善し、一方で支出1ドルにつき2.64ドルのコスト削減を実現したことを示す、大規模なランダム化比較試験を提示するものである。

要約

失業保険制度を、巨大なセーフティネットだと想像してみてください。人々が仕事を失ったとき、このネットが彼らをキャッチし、新しい仕事を探している間にお金を支給します。しかし、一つ落とし穴があります。もし人々がネットの上に長く留まりすぎると、ネットは重くなり、州にとって維持費が高くつきます。また、ネットの上にいる人々は「仕事を見つける筋肉」を衰退させてしまうかもしれません。

これを解決するために、ロードアイランド州は「RESEA」と呼ばれる新しい戦略を試みました。RESEAを、「ジョブコーチとの定期面談」と考えてみてください。州は、失業給付を申請した人々の約半分をランダムに選び、「近いうちにジョブコーチに会う必要があります。さもなければ、給付を停止する可能性があります」という手紙を送りました。残りの半分には手紙は届かず、彼らはこれまで通り過ごしていました。

研究者のハリソン・リー、シャナ・ピアソン＝マーコウィッツ、デビッド・ヨクムは、この「定期面談」が実際に効果があるのかどうかを確認するために、23,000人以上の人々を対象とした大規模な実験（科学的な味見のようなもの）を行いました。彼らが分かったことを、分かりやすく説明します。

1. 主な結果：効果があった

ジョブコーチと面談することを強制された人々は、そうでない人々よりも良い結果を出しました。

• より多くの収入を得た： 平均して、「定期面談」グループは手紙を受け取らなかったグループよりも、年間で約1,153ドル多く稼ぎました。
• より早く仕事を見つけた： 「定期面談」グループの約1.5%の割合で、他のグループよりも早く1年以内に仕事を見つけました。
• 失業期間が短縮された： 「定期面談」グループは、もう一方のグループよりも失業給付を受けている期間が、実質的に2週間近く短くなりました。

2. 手紙の「魔法」

ここで驚きの展開があります。恩恵を受けるために、必ずしもジョブコーチとの面談を「完了」させる必要はありませんでした。手紙を受け取った人のうち、約31%は面談に出席しませんでした。しかし、それでも彼らはより早く仕事を見つけ、より多くの収入を得ていたのです。

比喩： 手紙を「目覚ましアラーム」と考えてみてください。たとえベッドから出てアラームを止めなくても、アラームの音が聞こえるだけで、「あ、起きなきゃ、一日を始めなきゃ」と気づかせてくれることがあります。手紙そのものが、人々に対して「仕事を探さなければならない」ということを思い出させ、コーチの助けを借りずとも、仕事探しを加速させたのです。

3. 誰が最も恩恵を受けたのか？

研究者たちは、誰が最大のブーストを得たのかを調べるために、特別なコンピューターツール（「因果フォレスト」と呼ばれる、人々をグループ分けするデジタルな木のようなもの）を使用しました。

• 高齢の労働者と低所得の労働者は、賃金の伸びが最も大きくなりました。
• 興味深いことに、すでに順調に進んでいた人々（高所得者や高学歴者）であっても、失業期間を短縮できましたが、彼らの賃金上昇幅はそれほど大きくありませんでした。

4. お金の計算：州にとって素晴らしい取引

州はこのプログラムを運営するために資金を投じましたが、それ以上に節約できました。

• 人々がより早く仕事を見つけたため、州が支払う失業給付金が減少しました。
• 研究者たちは、州がプログラムに1ドル支出するごとに、失業給付として2.64ドルを節約できたと算出しました。それは、1ドルのチケットを買って、お釣りとして2.64ドルを受け取るようなものでした。

5. 計算の秘訣：どのように計算を行ったか

この論文はまた、研究者が使用した、他の研究が見落としがちな「トリック」についても指摘しています。

• 問題点： 彼らは実験を週単位で行いました。多くの申請者がいる週もあれば、少ない週もありました。高齢の労働者が多い週もあれば、若い労働者が多い週もありました。もし全員を混ぜ合わせて比較してしまうと、週ごとの違いによって結果が歪んでしまう（バイアスがかかる）可能性があります。
• 解決策： 彼らは各週を独立した「ミニ実験」として扱い、その後、結果を慎重に統合しました。これにより、「週」という要素が計算を狂わせることがなくなりました。彼らは、過去の多くの研究がこのステップを見落としており、それが結果の正確性を損なっていた可能性があると主張しています。

まとめ

要するに、失業中の労働者にジョブコーチと面談するように伝える手紙を送ることは、ウィン・ウィン（双方に利益があること）でした。それは労働者が仕事を見つけ、より多くの収入を得る助けとなり、同時に州にとっても多額の費用を節約することにつながりました。「恐ろしい」手紙そのものが強力なナッジ（後押し）として機能し、プログラムに完全に参加していなくても、人々を動かすきっかけとなったのです。

技術概要

技術要約：ロードアイランド州のRESEAプログラムの影響評価

問題と背景
長期的な失業は、個人および州に対して重大な経済的、健康的、およびウェルビーイングへのコストをもたらす。失業保険（UI）は重要なセーフティネットを提供する一方で、再雇用へのインセンティブを低下させることで、意図せず失業を長期化させてしまうのではないかという懸念が存在する。これに対処するため、米国連邦政府およびほとんどの州は、再雇用サービスおよび資格評価（RESEA）プログラムを運営している。これらのプログラムは、以前の再雇用および資格評価（REA）イニシアチブの後継であり、UI受給者が労働市場へ迅速に復帰することを促進するために、対象となる受給者に対してターゲットを絞ったサービスを義務付けている。広範に採用されているものの、現在のマクロ経済および人口統計学的条件下において、RESEAモデルが依然として効果的かつ費用対効果が高いかどうかを判断するために、これらプログラムの厳密かつ現代的な因果関係の評価が必要となっている。

方法論
著者らは、2022年2月から2023年9月までの間にロードアイランド州における$N = 23,549$人のUI受給者を対象とした、大規模で事前登録されたランダム化比較試験（RCT）を実施した。

• 実験デザイン: 本研究では、ブロックが週に対応するブロック化ランダム化デザインを利用した。毎週水曜日に、新たに資格を得たUI申請者のうち約150名（後に135名に削減）が治療群（RESEA選択群）としてランダムに選出され、残りが対照群を形成した。退役軍人は規制上の要件により決定論的に治療群に割り当てられたため、因果関係の分析からは除外された。
• 介入: 選出された受給者には、18日以内にジョブコーチとの面談を行うよう義務付ける書簡が送付された。介入には、資格確認、スキル評価、求職ガイダンス、労働市場情報、およびリファラル（紹介）が含まれる。コンプライアンス（遵守）は、給付停止の脅しを通じて強制されたが、治療群の約31%は面談に参加しなかった。
• アウトカム指標: 研究は、事前に登録された3つの主要なアウトカムに焦点を当てた：
  1. 年換算賃金: ランダム化後の第2四半期から第5四半期における、最も高い2四半期の賃金の合計を年換算したもの。
  2. 再雇用: 前述の期間における、少なくとも2四半期でのプラスの賃金の有無を示すバイナリ指標。
  3. UI受給期間: クレーム発生日から78週間以内に引き出されたUI給付の週数。
     *これらのアウトカムの短期的バリアントについても、ランダム化後の第2四半期について分析を行った。
• 統計分析:
  • 主要推定法: 著者らは、ブロックサイズ重み付け平均を用いた差の平均（difference-in-means）推定法を用いて、意図した治療（ITT）効果を推定した。
  • 精度向上: 精度を高めつつバイアスを導入しないために、ブロック内でのLin（2013）の相互作用線形回帰法を用い、事前共変量（扶養家族、性別、年齢、基礎賃金）で調整した共変量調整済みITT推定値を採用した。
  • 異質性: 条件付き平均治療効果（CATE）を推定するために、因果フォレスト（Wager & Athey, 2018）を用い、プログラムから最も恩恵を受けるサブグループを特定した。
  • 方法論的洗練: 本研究の主要な方法論的貢献は、治療割り当ての週（ブロック）を明示的に制御したことである。著者らは、ブロック化ランダム化デザインにおいて、ブロック（週）を調整しないと、治療を受ける個人の割合や申請者の特性が週によって大きく変動するため、交絡バイアスが生じる可能性があると主張している。

主な結果
本研究の結果、RESEAプログラムへの選出は、すべての主要なアウトカムにおいて統計的に有意な正の効果を示した：

• 賃金: 選出により、年換算賃金が1,153ドル増加した（95% CI: [$166, $2,141];$p=0.022）。これは対照群の平均に対して3.5%の増加である。
• 再雇用: 選出により、再雇用の確率が1.47パーセントポイント上昇した（95% CI: [0.32, 2.62]; $p=0.013）。
• UI受給期間: 選出により、UI給付の期間が1.99週間短縮された（95% CI: [1.75, 2.24]; $p<0.001）。これは対照群の平均に対して11.5%の減少である。
• タイミング: 賃金および再雇用への効果は迅速に現れ、最初の給与支払日から2四半期以内に発現し、その後少なくとも1年間持続した。短期的な推定値は、長期的な推定値と実質的に同様であった。
• 異質的効果: 因果フォレスト分析により、すべての参加者が賃金のプラスの恩恵を受けた一方で、その効果は特に高齢者および低所得層の労働者において大きかった。逆に、高所得者や高学歴の労働者は再雇用の効果は小さかったものの、UI受給期間および給付枯渇率の有意な減少を示した。
• 費用便益分析: UI給付の引き出し額の減少により、治療を受けた個人あたり約676ドルの節約となった。総プログラム支出が299万ドルであるのに対し、州はUI支払額において推定790万ドルを節約し、1ドルの支出に対して2.64ドルの節約というリターンを生み出した。

意義と主張
本論文は、ロードアイランド州のRESEAプログラムが、労働者の職場復帰を早め、州のUIリソースを保護するという二重の目標を効果的に達成しているという強力な因果関係の証拠を提供していると主張している。

• 政策的関連性: これらの知見は、連邦政府による採用を動機付けた元の研究とは異なる条件下においても、RESEAプログラムへの継続的な投資を支持するものである。
• 方法論的貢献: 著者らは、職業訓練プログラムの先行研究のRCTにおいて欠落しがちな重要な方法論的洗練、すなわち、ブロック化ランダム化デザインにおける治療割り当ての週（ブロック）を明示的に制御する必要性を強調している。彼らは、ブロックを無視すると、時変的な申請者の特性による交絡により、推定値にバイアスが生じる可能性があることを示している。彼らは、不偏かつ精密な推定を確保するために、ブロックサイズ重み付け平均またはブロック内の共変量調整済み推定値を使用することを推奨している。
• 頑健性: 結果はHolm法による多重検定補正後も統計的に有意であった。また、著者らは州外での就業や自営業に関する潜在的なバイアスについても対処し、RESEAの選出がこれらの観察されない雇用形態に差別的な影響を与えたという証拠は見られなかったとしている。

結論として、本研究は、RESEAモデルが、高齢者や低所得者などの脆弱なサブグループに大きな恩恵を与えつつ、労働者の再雇用を加速させ、失業給付への依存を軽減する費用対効果の高い介入であることを検証している。