中国の人工知能ラボであるDeepSeekは、1月に市場を揺るがし、アメリカの競合製品よりも安価で効率的なAIモデルを発表したことを受けて、テクノロジーおよび半導体の大規模な売却を引き起こしました。
しかし、この売却を引き起こした基盤となる懸念やブレークスルーは、単なるAIスタートアップの問題に留まらず、シリコンバレーはAI開発における「蒸留」と呼ばれる技術に直面しています。この技術はAIのリーダーボードを一新する可能性を秘めています。
蒸留とは、大規模なAIモデルから知識を抽出し、より小さなモデルを作成するプロセスです。この技術を活用すれば、ほぼリソースを持たない小規模なチームでも先進的なモデルを作成できるのです。大手テクノロジー企業がトップクラスのモデルを開発するために何年もの時間と多額の資金を投じる一方で、DeepSeekのような小規模チームは、より大きな「教師」モデルに質問をすることで、自らの専門的なモデルを訓練することが可能になります。このプロセスにより、大企業のモデルとほぼ同等の能力を持ちながらも、より迅速かつ効率的に訓練された新しいモデルが生まれます。
「この蒸留技術は非常に強力で、非常に安価で、誰でも利用可能です」とデータブリックス(Databricks)のCEOであるAli Ghodsi氏は述べ、今後の大規模言語モデル(LLM)の構築方法における革新に期待を寄せています。「私たちはLLMにおける競争が激化するのを見るでしょう。これが私たちが入っている新しい時代です。」
蒸留技術のおかげで、資本の少ないスタートアップや研究ラボも、従来以上に迅速に最前線で競争できるようになっています。バークレーの研究者たちは、先月、OpenAIの推論モデルをわずか450ドルで19時間で再現したと報告しています。その後、スタンフォード大学とワシントン大学の研究者たちは、50ドル未満の計算クレジットを使用して、自らの推論モデルをわずか26分で作成したと述べています。また、スタートアップのHugging Faceは、OpenAIの新しい機能であるDeep Researchを24時間のコーディングチャレンジとして再現しました。
DeepSeekは蒸留技術を発明したわけではありませんが、その破壊的な可能性をAIの世界に再認識させました。さらに、透明性とアクセス可能性が閉鎖的な研究よりも迅速に革新を推進するという新しいオープンソースの理念をもたらしました。
「テクノロジー業界ではオープンソースが常に勝つ」と、企業向けのAI駆動検索エンジンを開発するGleanのCEOアーヴィンド・ジェイン氏は述べ、「成功したオープンソースプロジェクトが生み出す勢いには勝てません。」と語っています。
OpenAI自身も、DeepSeekの成功を受けて自らのクローズドソース戦略を見直す方向に向かっています。「個人的には、私たちは歴史の誤った側にいたと思いますし、異なるオープンソース戦略を考えなければならない」とOpenAIのCEOであるサム・アルトマン氏は1月31日にRedditに投稿しました。
蒸留の人気の高まりとオープンソースの台頭が相まって、AIの競争環境は根本的に変化しています。これにより、さまざまな側面で新たな革新と試みが進行することが期待されています。



