Google IOカンファレンスで、Google CEOのサンダー・ピチャイ(Sundar Pichai)は、OpenAIの最新の大規模言語モデル(LLM)であるPaLM 2の競合製品として、Googleの最新の大規模言語モデル(LLM)であるPaLM 2を世界中のAI開発者に公開しました。強力な多言語能力と推論能力を発揮します。
PaLM 2 はほぼすべての指標で前モデルを上回っていますが、Google は新しいモデルが特に優れていると考えられる 3 つの領域のみを強調することにしました。
1つ目は多言語対応です。PaLM 2 のトレーニング データには英語以外のテキストがさらにロードされており、一連のさまざまな言語テストに合格して「熟練」レベルに到達できるようになりました。現在では Google 独自の翻訳エンジンよりも優れており、言語、イディオム、比喩、およびその背後にある文化を微妙に理解していることを示しています。
2つ目は「推論」だ。トレーニングデータに含まれる数学と科学の論文が注目を集めており、Googleはそれが「論理、常識的推論、数学の能力の向上」を示していると述べている。特に数学は、LLMS 全体が苦戦しているところですが、これは彼らの得意分野ではありません。実際、PaLM 2 は一部のベンチマークで GPT-4 を上回っていますが、ここでの進歩は革命的ではなく漸進的であるようです。
3 つ目はコーディングです。これは、LLMS にとって大きな可能性を秘めた分野です。Google は、PaLM 2 は Python と Javascript において優れているだけでなく、より特殊なプログラミング言語の範囲においても非常に強力であると主張しています。
さらに、他の専門分野における PaLM 2 の拡張性を過小評価してはなりません。Med-PaLM 2 は、Google DeepMind の医療および健康チームによって PaLM 2 に基づいて微調整されました。Med-PaLM 2はX線フィルムを直接入力することができ、入力された情報に応じて患者の状態を自動的に解析・診断します。
Med-PaLM 2 は、ユーザー入力に基づいて医療知識を取得し、医学的質問に答える推論を行うことができ、医師が日報を作成するのを支援したり、医師の診断を支援したりすることもできます。
PaLM 2 は Google の確実な進歩を表しており、OpenAI が過去数か月間に GPT-4 で達成した進歩に近づいています。しかし、PaLM 2 が現実世界の厳しい環境でどのように機能するかは注目すべき点です。