Meta、AIの戦いでOpenAIとGoogleと戦うためにLlama 3の初期バージョンを発売

Meta は本日、最新の大規模言語モデル (LLM)、Llama 3 という嬉しいサプライズを発表しました。同社は、新しい Llama 3 8B には 80 億のパラメータが含まれ、Llama 3 70B には 700 億のパラメータが含まれていると説明しています。

2

ギャラリーを見る – 2 枚の画像

Meta は以前の Llama 2 8B および Llama 2 70B モデルと比べてパフォーマンスが大幅に向上すると約束しており、同社は Llama 3 8B および Llama 3 70B が現在利用可能な生成 AI モデルの中で最もパフォーマンスが高く、2 つのカスタムビルドでトレーニングされたものであると主張しています。 24,000 GPU クラスター。

同社は、すべて「公的に入手可能なソース」から収集された15兆を超えるトークンで新しいLlama 3モデルをトレーニングした。そのMet'aトレーニングデータセットはLlama 2で使用されたものより7倍大きく、それには4倍以上のコードが含まれている。

Meta の新しい Llama 3 のポイント:

• 本日は、最先端のオープンソース大規模言語モデルの次世代モデルである Meta Llama 3 を紹介します。
• Llama 3 モデルは、AWS、Databricks、Google Cloud、Hugging Face、Kaggle、IBM WatsonX、Microsoft Azure、NVIDIA NIM、Snowflake で間もなく利用可能になり、AMD、AWS、Dell、Intel、NVIDIA、そしてクアルコム。
• 私たちは責任ある方法で Llama 3 を開発することに専念しており、他の人が責任を持って Llama 3 を使用できるようにするためのさまざまなリソースを提供しています。 これには、Llama Guard 2、Code Shield、Cyber​​Sec Eval 2 を使用した新しい信頼性と安全性のツールの導入が含まれます。
• 今後数か月以内に、新しい機能、より長いコンテキスト ウィンドウ、追加のモデル サイズ、および強化されたパフォーマンスを導入する予定であり、Llama 3 の研究論文を共有する予定です。
• Llama 3 テクノロジーで構築された Meta AI は、知性を高め、負荷を軽減できる世界有数の AI アシスタントの 1 つとなり、学習、作業の遂行、コンテンツの作成、あらゆる瞬間を最大限に活用するための接続を支援します。 ここでメタ AI を試すことができます。

Meta の新しい Llama 3 モデルからオタク的な内容をすべて読むことができます ここ。