Can LLMs Perceive Time? An Empirical Investigation
この論文は、大規模言語モデルが自身の推論タスクの所要時間を過大評価したり、相対的な順序を誤って判断したりするなど、学習データからの命題的知識は保有しているものの、推論プロセスにおける時間の実感的な基盤を欠いていることを、複数の実験を通じて実証的に示しています。
原論文は CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
この論文は、**「AI(大規模言語モデル)は、自分が作業をするのにどれくらい時間がかかるか、全く見当がつかない」**という驚くべき事実を突き止めた研究報告です。
タイトルにある「I Can't Believe It's Not Better(信じられないほど良くない)」という皮肉なワークショップ名が示す通り、AI は賢そうに見えますが、この「自分の時間の感覚」については、まるで盲目のようです。
以下に、難しい専門用語を排し、日常の例え話を使って分かりやすく解説します。
🕰️ 核心となる問題:AI は「自分の時計」を持っていない
私たちが何かをするとき(例えば、料理を作る、レポートを書く)、その作業にどれくらい時間がかかるか、経験から大まかに予想できますよね。「これは 10 分くらいかな」「あれは 1 時間かかりそう」と。
しかし、この研究によると、AI はその感覚が全くありません。
- AI の思考: 「このタスクは難しいから、人間なら 1 時間かかるだろうな。だから、私も 1 時間くらいかかるはずだ!」
- 実際の AI: 「よし、計算開始!」→(数秒で完了)→「はい、できました!」
- AI の予想: 「えっ、たった数秒?いや、私は 1 時間かかると言っていたはずなのに!」
AI は「自分が処理している間、現実世界の時間がどれくらい流れているか」を感知するセンサーを持っていません。文字(トークン)を並べることはできますが、そのプロセスに「何秒かかったか」という感覚が欠落しているのです。
🧪 4 つの実験で明らかになった「時間感覚の欠如」
研究者たちは、68 種類の異なるタスク(プログラミング、要約、創作など)で AI をテストしました。その結果、4 つの面白い(そして怖い)パターンが見つかりました。
1. 事前予想:「大げさな勘違い」
タスクを始める前に「どれくらい時間がかかる?」と聞くと、AI は実際の 4〜7 倍も長い時間を予想します。
- 例え話: 実際には「トーストを焼くだけ(数秒)」の作業なのに、AI は「本格的なフルコース料理(数十分)」を作るつもりで時間を予想してしまいます。
- 結果: 実際には数秒で終わるタスクを、「数分かかる」と予想して、システムが待たされたり、リソースを無駄に使ったりします。
2. 比較判断:「難しそうなものが速い」
「A と B、どっちが時間がかかる?」と聞くと、AI は**「難しそうに見えるもの」を「時間がかかるもの」と思い込みます。**
- 例え話:
- タスク A:「複雑な数学の問題を解く(難しそう)」
- タスク B:「簡単な文章を書く(簡単そう)」
- AI の判断: 「A の方が難しそうだから、A の方が時間がかかるはず!」
- 現実: 実際には、A は AI が得意すぎて瞬殺され、B の方が時間がかかったりします。
- 結果: AI は「難易度」と「時間」を混同しており、「難しい=時間がかかる」という単純な思い込みで判断して、実際には**確率以下(18% の正解率!)**の的外れな答えを出してしまいます。
3. 事後回想:「記憶と現実のズレ」
タスクが終わった後に「さっき、どれくらいかかった?」と聞くと、AI は現実と全く違う記憶を語ります。
- 例え話: 実際には「8 秒」で終わったのに、「42 秒かかった!」と主張したり、逆に「30 秒かかった」のに「10 分かかった」と言ったりします。
- 結果: AI は自分の作業時間を「記憶」していません。後から聞かれても、適当に(あるいは人間らしい感覚で)推測しているだけです。
4. 複雑な仕事(エージェント):「計画の崩壊」
複数のステップを踏む複雑な仕事(例:ウェブサイトを構築する、バグを直す)を任せても、同じ失敗が繰り返されます。
- 例え話: 10 分かかる作業を「30 秒で終わる」と予想して計画を立ててしまい、システム全体がタイムアウトしたり、他のタスクを待たせたりします。
- 結果: AI 自身が「自分たちのスケジュール」を管理しようとしても、時間感覚がないため、計画が破綻します。
🤔 なぜこんなことになるの?
この現象の理由は、**「AI は『経験』ではなく『テキスト』で学んでいるから」**です。
- 人間の場合: 「料理をする」→「実際に 30 分かかる」→「次は 30 分かかるだろう」と、体感として時間を学びます。
- AI の場合: 「料理をする」というテキストデータを読み、「料理には時間がかかる」という知識は持っていますが、「自分が料理をしている間、現実の時間が流れている」という体験がありません。
AI は「トーストを焼く」という言葉を知っていますが、トースターが温まる「待機時間」や、パンが焦げる「経過時間」を自分の感覚として持っていないのです。また、AI の速度は「使っているサーバーの性能」や「ネットワークの混雑」によって変わるので、AI 自身には「自分がどれくらい速いか」という情報も与えられていません。
💡 私たちにとっての教訓
この研究は、AI を使う人々(特に AI を管理するシステム設計者)に重要なメッセージを送っています。
- AI の「自己申告」を信じてはいけない:
AI が「これには 10 分かかります」と言っても、それは単なる推測に過ぎません。実際の時間を計測する「外部の時計」や「タイムアウト機能」をシステムに組み込む必要があります。 - AI は「時間管理」が苦手:
AI に「スケジュール管理」や「リソース配分」を任せるのは危険です。AI は「自分がどれくらい時間を使うか」を把握できないため、計画が破綻する可能性があります。 - 未来の AI には「時間感覚」が必要:
今後、AI がより複雑な現実世界の作業(医療、緊急対応、ロボット制御など)を行うためには、単に言葉を理解するだけでなく、「時間の経過」を体験として学習させる新しい技術が必要です。
🎯 まとめ
この論文は、**「AI は言葉の天才だが、時間の感覚はゼロ」**だと告げています。
AI は「自分が何をしているか」は知っていますが、「それが何秒で終わったか」は全く分かりません。まるで、**「料理のレシピは完璧に覚えているのに、実際に火をかけたことがない料理人」**のような状態です。
私たちが AI を現実世界で使うためには、AI 自身に時計を持たせるのではなく、人間やシステム側が「時間」を厳格に管理してあげないといけないというのが、この研究の結論です。
自分の分野の論文に埋もれていませんか?
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。