Has ACL Lost Its Crown? A Decade-Long Quantitative Analysis of Scale and Impact Across Leading AI Conferences
主要な7つのAI会議を対象としたこの10年間の定量的研究は、会議の規模拡大が学術的インパクトの比例的な成長をもたらしていない一方で、ACL会議が引用指標および画期的な貢献における指導的な地位を維持し続けていることを明らかにしている。
原論文は CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
人工知能という名の、科学者たちが人間のように読み、書き、語り合うデジタル脳を構築している、巨大で活気あふれるアイデアの街を想像してみてください。この街において、新しい発見を共有するための最も重要な方法は、「カンファレンス」で発表することです。これは、街の最大級の年次音楽フェスティバルや科学フェアのようなものだと考えてください。長い間、誰もが最高であると認める一つのフェスティバルがあり、それは一連のイベントの中でも「至宝」とされてきました。しかし最近、この街は爆発的な成長を遂げました。デジタル脳を作る人々が増え、論文が書かれる数も増え、フェスティバルは巨大化しました。このブームに伴い、街の路地ではある噂が囁かれ始めました。「質は低下しているのではないか？ トップのフェスティバルはその魔法を失いつつあるのか？ パーティーを継続するために、あまりにも多くのものを受け入れすぎているのではないか？」 本論文は、噂に耳を傾けたり、ソーシャルメディアの怒りに満ちたコメントを読んだりするのではなく、10年間の膨大な数字を精査することで、これらの問いに答えるべく登場しました。
研究者たちは探偵役を務めることに決め、主要な7つのAIフェスティバルにおける2014年から2024年までのデータを調査しました。彼らは「品質・量弾力性（Quality-Quantity Elasticity: QQE）」と呼ぶ特別な測定ツールを構築しました。これは、ゴムバンドのようなものだと考えてください。もしゴムバンドを伸ばしたとき（受理される論文を増やしたとき）、新しい価値の大きな跳ね返り（他の科学者からの引用）とともにパチンと戻ってくるでしょうか？ それとも、ただ緩んでだらりと垂れ下がってしまうのでしょうか？ 彼らはまた、論文がいかに有名であるか、注目がどのように分散しているか、そして各フェスティバルが互いにどれほど影響を与え合っているかも調査しました。
以下が彼らの発見です。ゴムバンドは明らかに緩くなってきています。フェスティバルは規模が劇的に拡大しているにもかかわらず、新たな学術的インパクトはそれに追いついていません。言い換えれば、カンファレンスがより多くの論文を受理したからといって、それらの論文がより多く引用されるわけではないということです。つまり、「人気」の成長は「量」の成長に遅れをとっています。しかし、最大の驚きは、「王冠」が落ちてはいないことです。混乱や不満があるにもかかわらず、トップのカンファレンスとして知られるACLは、依然として山の上の王であり続けています。引用数の中央値、最も重要なマイルストーンとなる論文、そして研究がいかに広く読まれているかという点を見ると、ACLは依然としてライバルたちを圧倒しています。したがって、パーティーは混雑し、個々の新しいエントリーの質は薄まりつつあるかもしれませんが、メインステージは依然として、この界隈で最も影響力のある場所としての称号を保持しています。著者たちは、景観は変化したものの、影響力の階層構造は驚くほど安定していることを示すために、この10年間の証拠を提示しています。
自分の分野の論文に埋もれていませんか？
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。