機械学習学会の採択価値は低下しているのか？
Original: [D] Is Conference prestige slowing reducing? View original →
背景
r/MachineLearningで700以上の高評価を獲得したスレッドが、主要ML学会における採択数の急増とその学術的意義をめぐる議論を巻き起こした。CVPRは年間約4,000本、ICLRは約5,300本の論文を採択しており、わずか数年前と比べて数倍の規模に膨れ上がっている。
提起された核心的疑問
スレッド投稿者は3つの鋭い問いを投げかけた：
- 学会採択はかつてと同じ意味を持ち続けているか？
- これほど大量の論文を現実的に把握できるのか？
- 学会はただの大型arXivイベントになりつつあるのではないか？
コミュニティの反応
最も共感を集めたコメントは、実際の専門家による査読の欠如を問題として指摘した。査読者も採択された研究者から選ばれる構造では、誤った結果や特定データセットのみで有効な知見が学会を通過するケースが増えているという。
反論と文脈
一方で、採択数の増加はAI分野の爆発的な拡大を反映しており、より多くの研究者に発表の機会を提供するという肯定的な見方もある。問題は数そのものではなく、品質管理メカニズムがスケールに追いついていない点にあると指摘する声も多かった。
示唆
この議論は、ML研究コミュニティが成長に伴う課題に直面していることを示している。研究のアウトプットは急増しているが、それを厳密に評価するコミュニティの能力が追いついていないという構造的問題は、今後も重要な課題となり続けるだろう。
Related Articles
184-point の r/MachineLearning スレッドでは、ICML の no-LLM review policy 違反に対する reported enforcement をめぐり、canary ベースの検出と coauthor risk が主な論点になった。
2024年に複雑度理論を用いて「機械学習では人間レベルの分類器を学習できない」と主張した論文（Ingenia定理）が、同じ学術誌Computational Brain & Behaviorで反論論文により否定された。証明は「回復不可能な誤り」を含むと指摘されている。
Microsoft ResearchはMemoraを、保存内容と検索方法を分離するagent memory systemとして紹介した。研究blogではLoCoMoとLongMemEvalでMem0、RAG、full-context inferenceを上回り、context tokenを最大98%減らすとしている。