Google のオープンソース AI モデルである Gemma を紹介します。
水曜日、Google発表された「開発者と研究者が責任を持って AI を構築するのを支援する」ための新しいモデル ファミリ。ジェマGemini の作成に使用されたのと同じ研究とテクノロジーに基づいて構築されており、Gemini チャットボットを駆動するそのクローズドソース モデル (以前はBard) および Workspace (旧 Duet AI) 用の AI 関連ツール。
ジェマは Google を AI 競争で優位に立たせることができるでしょうか?
GoogleとOpenAIのAI競争は2024年も引き続き激しいが、OpenAIが優位にあるようだ。ほぼ隔週で、Google から新機能やアップデートが提供されますが、OpenAI がさらに大きなものを発表するのは唯一のことです。 12月にGoogleが発表したジェミニそして 1 か月も経たないうちに OpenAI がリリースされました。GPT ストア。先週、Google は「派手「Gemini へのアップデートは「Gemini 1.5」です。しかし、それは OpenAI が AI ビデオ ジェネレーターを発表したことですぐに覆されました。ソラ。
しかし、OpenAI がまだ行っていないことの 1 つは、そのモデルのオープンソース バージョンを開発することです (透明性それは実際には強いスーツではありません.) Google は、その仕組みについて完全には明らかにしていない。AIモデルはトレーニングされていますどちらでもよいが、発表によれば、同社は「AI をすべての人に役立つものにする」と信じているため、Gemma を作成したという。
マッシュ可能な光の速度
Gemma には、Gemma 2B と Gemma 7B の 2 つのモデル重量があります。どちらも事前トレーニングされており、命令が調整されたバリアントがあり、CPU または GPU を搭載した開発者のラップトップまたはデスクトップ、および GPU と TPU アクセラレーションを備えた Google Cloud で実行できます。マルチモーダルな Gemini とは異なり、Gemma はテキストからテキストへのサポートのみを備えています。しかし、パフォーマンスの点では、Gemma は「安全で責任ある出力に関する厳格な基準を遵守しながら、主要なベンチマークで大幅に大型モデルを上回っている」と Google は述べています。 (この技術文書は出版時点では入手できなかったことに注意してください。)
安全性と責任について言えば、Gemma は個人情報や機密情報を除外するように事前に訓練されています。調整のために人間のフィードバックからの強化学習 (RLHF) を使用してテストされました。さらに、手動によるレッドチーム化と潜在的な危害に対する敵対的テストも受けています。
Gemma に加えて、Google は新しい Responsible Generative AI Toolkit もリリースします。これには、安全性分類、デバッグ、LLM 開発のためのベスト プラクティス リソースが含まれています。
Gemma は Kaggle と Colab で無料でアクセスできます。 Hugging Face、MaxText、Nvidia NeMo からも入手できます。さらに、初めて Google Cloud ユーザーに 300 ドルのクレジットが付与されます。