Meta「Llama 4」正式リリース — Scout・Maverickの2モデル構成で1000万トークン対応

伊東雄歩
監修者 伊東 雄歩

株式会社ウォーカー CEO。東北大学卒。MENSA会員、JDLA認定講師、健全AI教育協会理事。生成AI×教育・学習科学を専門とし、2億円超のシステム開発プロジェクトを統括。

taolis.net X note Voicy YouTube

Metaの新しい大型言語モデル「Llama 4」

Metaは最新の大型言語モデル「Llama 4」を正式に発表しました。このモデルはオープンソースで提供され、研究者や開発者が利用しやすくなっています。

ScoutとMaverickの2つのモデル構成

Llama 4はScoutとMaverickの2種類のモデルで構成されています。各モデルは用途や性能に合わせて設計されており、幅広いニーズに応えられるようになっています。

最大1000万トークンのコンテキストウィンドウ

特に注目されているのは、最大1000万トークンという非常に長いコンテキストウィンドウを搭載している点です。これにより、長文の理解や複雑な会話などに強みを持つことが期待されています。

マルチモーダル対応とMoEアーキテクチャ

Llama 4はテキストだけでなく、画像など複数のモードを扱えるマルチモーダル対応を目指しています。また、専門性に応じて異なる部分を活性化するMixture of Experts(MoE)アーキテクチャを採用している可能性があり、効率的な処理が期待されます。

業界標準を塗り替える可能性

これらの特徴により、Llama 4は今後の大型言語モデルの業界標準を変える可能性があります。特にオープンソースであることから、多くの開発者が新しい技術を試しやすくなるでしょう。

まとめ

MetaのLlama 4はScoutとMaverickの2モデル構成で、最大1000万トークンのコンテキストウィンドウを搭載した最新の大型言語モデルです。マルチモーダル対応やMoEアーキテクチャの導入により、今後のAI技術の発展に注目が集まっています。

参考リンク

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です