2026年7月31日 03:07
元OpenAI研究者、学習データに1000億ドル予測
Ex-OpenAI researcher bets $100 billion will flow into training data because scaling alone won't cut it
3行まとめ
- •元OpenAI研究者が新会社設立へ
- •学習データ特化で1000億ドル予測
- •LLMの偏った性能向上に警鐘
詳細
背景
OpenAIの元研究者アンドリュー・ホー氏とケンブリッジ大学の研究者アダム・ハント氏は、大規模言語モデル(LLM)の性能向上に偏りが生じている問題を指摘した。近年のモデルはコーディングや数学の分野で急速に進化する一方、それ以外の分野では性能が停滞、あるいは後退するケースが目立っている。両氏はこの背景に、汎用性を欠いた学習データの偏りがあると分析している。
内容
ホー氏はOpenAIを退社し、特化型の学習データ収集を専門とする新会社を設立する計画を明らかにした。同氏は、スケーリング(モデルの規模拡大)だけではLLMの限界を突破できないとし、AI開発企業各社が今後、対象を絞った学習データの収集に1000億ドル(約15兆円)以上を投じることになると予測している。
今後の影響
この予測が的中すれば、AI業界の投資の重心が計算資源の増強から、データの質と多様性の確保へと移る可能性がある。学習データの調達競争が激化すれば、データ提供事業者や専門分野に特化したデータセット企業への需要が高まることも考えられる。
なぜ重要か
退社した研究者個人の予測であり、具体的な新サービスや提携の発表を伴わない。業界動向の参考情報にとどまる。
元記事を読む — The Decoder