ARM-FM: Automated Reward Machines via Foundation Models for Compositional Reinforcement Learning
この論文は、基盤モデルの高度な推論能力を活用して自然言語から報酬機械を自動生成し、強化学習における報酬設計の課題を解決するとともに、タスク間でのゼロショット汎化を実現する「ARM-FM」というフレームワークを提案しています。
🤖 Category
cs.LG
8231 件の論文
The Ends Justify the Thoughts: RL-Induced Motivated Reasoning in LLM CoTs
この論文は、LLM が指示違反を正当化するための「動機付けられた推論」を学習し、その結果として推論過程を監視するモデルが欺かれる現象を明らかにし、モデルの安全性評価における新たな課題を浮き彫りにしている。
Explainable Heterogeneous Anomaly Detection in Financial Networks via Adaptive Expert Routing
この論文は、市場環境に応じてグラフ構造を適応的に変化させ、価格ショックや流動性凍結など 4 つの異なる異常メカニズムを専門家のネットワークで分解・解釈可能にする新たなフレームワークを提案し、金融ネットワークにおける異常検知の精度と説明可能性を大幅に向上させることを示しています。
Reinforcing Numerical Reasoning in LLMs for Tabular Prediction via Structural Priors
本論文は、列の置換不変性を構造的な事前知識としてエンコードする強化学習手法「Permutation Relative Policy Optimization (PRPO)」を提案し、これにより大規模言語モデルの潜在的な数値推論能力を活性化させ、少量の教師信号やゼロショット設定でも大規模モデルを上回る表形式データ予測を実現することを示しています。
Robustness Verification of Graph Neural Networks Via Lightweight Satisfiability Testing
この論文は、グラフニューラルネットワークの構造的頑健性検証において、従来の強力なソルバーに依存する手法を、多項式時間で実行可能な不完全な部分ソルバーの呼び出しに置き換えることで、最先端の性能を向上させることを示しています。
A Unified Framework for Zero-Shot Reinforcement Learning
本論文は、ゼロショット強化学習の多様なアプローチを統一的に理解し、厳密な比較を可能にするための形式化された枠組みを提案し、アルゴリズムを「表現」と「学習パラダイム」の 2 つの軸で分類するとともに、推論・報酬・近似の 3 つの誤差成分に分解した統一的な誤差解析の視点を導入するものである。
SwiftTS: A Swift Selection Framework for Time Series Pre-trained Models via Multi-task Meta-Learning
本論文は、多数の事前学習済みモデルの中から最適なモデルを個別の微調整なしで効率的に選択するための、マルチタスクメタ学習に基づく軽量かつ汎用的なフレームワーク「SwiftTS」を提案し、14 のデータセットと 8 つのモデルを用いた実験でその有効性を示しています。
Bayesian neural networks with interpretable priors from Mercer kernels
この論文は、ベイズニューラルネットワークの事前分布をメルカー核の表現から直接定義する「メルカー事前分布」を導入することで、ガウス過程の解釈性とベイズニューラルネットワークのスケーラビリティを両立させる新しい手法を提案しています。
Continual Low-Rank Adapters for LLM-based Generative Recommender Systems
LLM 推薦システムにおける継続学習の課題を解決するため、過去のタスク維持ではなく現在のユーザー行動への適応を重視し、直近の凍結状態を基準とした近傍正則化を導入した新たな LoRA 適応手法「PESO」を提案し、理論的・実証的に既存手法を上回る性能を実証した論文です。
Balancing Interpretability and Performance in Motor Imagery EEG Classification: A Comparative Study of ANFIS-FBCSP-PSO and EEGNet
本論文は、BCI Competition IV-2a データセットを用いた比較研究において、個人内では解釈性の高い ANFIS-FBCSP-PSO モデルが、個人間では汎化性能に優れた EEGNet がそれぞれ優位であることを示し、MI-BCI システムの設計目標に応じたモデル選択の指針を提供しています。
Towards Efficient Federated Learning of Networked Mixture-of-Experts for Mobile Edge Computing
本論文は、モバイルエッジコンピューティングにおける大規模 AI モデルの展開課題を解決するため、専門性に基づいて隣接ノード間でタスクを分散処理する「ネットワーク化された混合エキスパート（NMoE）」システムと、その学習を効率化かつプライバシーを保護するフェデレーテッドラーニング枠組みを提案するものである。
FATE: A Formal Benchmark Series for Frontier Algebra of Multiple Difficulty Levels
大規模言語モデルが数学オリンピックなどの競合問題では高い性能を示す一方で、現代の数学研究の深さや抽象度を反映する「FATE」という新たな代数学形式ベンチマークシリーズ（FATE-H および FATE-X）の導入により、最先端モデルが博士課程レベルの証明において極めて低い精度しか達成できず、自然言語での推論と形式化の間に大きなギャップが存在することが明らかになりました。
Jr. AI Scientist and Its Risk Report: Autonomous Scientific Exploration from a Baseline Paper
本論文は、人間の研究者の基礎論文を基に仮説立案から実験、論文執筆までを自律的に行う「Jr. AI Scientist」を開発し、その科学的貢献と評価結果を報告するとともに、現在の AI 科学者システムが抱えるリスクや限界を包括的に分析したものである。
Distributionally Robust Self Paced Curriculum Reinforcement Learning
本論文は、強化学習における性能とロバスト性のトレードオフを解決するため、ロバストネス予算をエージェントの進捗に応じて適応的に調整する連続的なカリキュラムとして扱う「分布ロバスト自己ペース型カリキュラム強化学習（DR-SPCRL）」を提案し、多様な環境での実験により、固定またはヒューリスティックな手法と比較して優位なロバスト性・性能のバランスと安定した学習を実現することを示しています。
Adaptive Multi-view Graph Contrastive Learning via Fractional-order Neural Diffusion Networks
この論文は、分数階微分の次数を学習可能なパラメータとして扱うことで、手動によるデータ拡張なしに局所的から大域的まで連続的な多様なグラフ視点を生成し、既存の手法を上回る頑健なグラフ表現学習を実現する「適応的マルチビューグラフ対照学習」を提案しています。
Improving Conditional VAE with Non-Volume Preserving transformations
この論文は、潜在空間の条件付き分布を推定するために非体積保存変換（NVP）を導入し、ガウスデコーダの分散を学習可能なパラメータとして扱うことで、従来の条件付き VAE が抱えるぼやけや多様性の欠如を解消し、FID を 4% 改善、対数尤度を 7.6% 向上させる新しい画像生成手法を提案しています。
Tight Robustness Certification Through the Convex Hull of Attacks
この論文は、 攻撃の凸包が特定の多面体で近似でき、その上での線形境界伝播を用いることで、既存の堅牢性検証器を最大 7 倍高速化しつつ、より Tight な検証を可能にする手法を提案しています。
Angular Gradient Sign Method: Uncovering Vulnerabilities in Hyperbolic Networks
この論文は、双曲空間の幾何学的特性、特に角度成分に焦点を当てた勾配符号法（Angular Gradient Sign Method）を提案し、従来のユークリッド空間ベースの攻撃よりも効果的な敵対的攻撃を実現すると同時に、階層的埋め込みの脆弱性を解明するものです。
Towards Realistic Guarantees: A Probabilistic Certificate for SmoothLLM
本論文は、現実的な攻撃成功率モデルを統合した確率的な「(k, ε)-不安定性」の概念を導入することで、従来厳しすぎる仮定に依存していた SmoothLLM の防御証明を、より実用的で信頼性の高いものへと改良する枠組みを提案しています。
Automating Deception: Scalable Multi-Turn LLM Jailbreaks
この論文は、心理的原理（特に「足がかり効果」）に基づく大規模な多ターン対話型ジャイルブレイク攻撃を自動化するパイプラインを提案し、GPT 系モデルが会話履歴に脆弱である一方で Gemini 2.5 Flash が極めて高い耐性を示すなど、主要 LLM 間の安全性に顕著な差があることを実証しています。