Meta「Llama 3.1」のイノベーション--4050億パラメーターを誇る最新LLM
Tiernan Ray （Special to ZDNET.com） 翻訳校正： 川村インターナショナル 2024-07-31 07:30 Metaは米国時間7月23日、同社の大規模言語モデル（LLM）ファミリー「Llama」の最新版を発表した。同社によると、「Llama 3.1」は初のオープンソースの「フロンティアモデル」だという。この表現は一般的に、AIコードの模範となる極めて重要な存在に使われるものだ。 Llama 3.1には複数のサイズがある。最大の「Llama 3.1 405B」は、ニューラルの「重み」、すなわちパラメーター数が4050億個で、これはNVIDIAの「Nemotron 4」やGoogleの「Gemma 2」、そして「Mixtral」といった著名なオープンソースモデルを上回るが、405Bで注目すべきはそのコンピューティングの規模だけではない。Metaのチームによる3つ
メタ、オープンソースのAI「Llama 3」でOpenAIとグーグルに宣戦布告 | Forbes JAPAN 公式サイト（フォーブス ジャパン）
インスタグラム、フェイスブック、WhatsAppの親会社であるメタは先にスタンドアロン型のAIチャットボットと高性能なオープンソースモデル「Llama 3」を発表し、AI分野への本格参入を表明した。これにより、グーグルやOpenAIなど、強力なAIシステム開発を競う企業間の競争が激化する。 メタはAIアシスタント「Meta AI」がフェイスブック、インスタグラム、WhatsApp、メッセンジャーアプリの検索バーに統合され、フェイスブックのメインフィードをスクロールする際にもアクセスできるようになったと発表した。 Meta AIはウェブサイトMeta.aiを通じてスタンドアロンツールとしても提供される予定だ。 Meta AIは、同社のアプリ内では数カ月前から利用可能だったが、今回の発表により、メタのソーシャルメディアエコシステム外で独立したプロダクトとして初めて利用可能になる。 これまでの制
「NVIDIA H100 GPU」を2万4576基搭載して「Llama 3」などのトレーニングに活用されているGPUクラスターの情報をMetaが公開
「AI開発をリードするということは、ハードウェアインフラへの投資でリードするということ」として、MetaがAIのための投資として行っている、2万4000基以上のGPUを搭載したデータセンタースケールのクラスターの情報を明らかにしました。 Building Meta’s GenAI Infrastructure - Engineering at Meta https://engineering.fb.com/2024/03/12/data-center-engineering/building-metas-genai-infrastructure/ Meta reveals details of two new 24k GPU AI clusters - DCD https://www.datacenterdynamics.com/en/news/meta-reveals-details-o
MetaがInstagram・Facebook・ThreadsでAI生成された画像に対しラベル付けを行うことを発表
Metaが現地時間2024年2月6日、InstagramやFacebook、Threadsに投稿されたAIが生成した画像を検出し、ラベル付けを行う方針であることを発表しました。この機能は早ければ数カ月以内に全ての言語で導入される予定です。 Labeling AI-Generated Images on Facebook, Instagram and Threads | Meta https://about.fb.com/news/2024/02/labeling-ai-generated-images-on-facebook-instagram-and-threads/ Meta to start labeling AI-generated images from companies like OpenAI, Google | Reuters https://www.reuters.com
Meta、安全で責任あるAI開発を支援する「Purple Llama」プロジェクトを開始
印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます Metaは米国時間12月7日、開発者による責任ある人工知能（AI）の開発を支援するための包括的なプロジェクト「Purple Llama」（パープル・ラマ）を発表した。 このプロジェクトの目的は、同社が2月に公開したオープンソースの大規模言語モデル「Llama」を使用する開発者に、サイバーセキュリティー向けのツールや検証、そして入出力のセーフガードを提供することだ。 同社によると、生成AIのリスクを軽減するには、攻撃（レッドチーム）と防御（ブルーチーム）の姿勢を組み合わせたパープルチームのアプローチが必要だという。プロジェクトの名称はこの考え方に基づいている。 Purple Llamaではまず、サイバーセキュリティー向けツールおよび検証、
Metaが日本語音声を入力するだけで文字起こしなどが可能なAI「SeamlessM4T」の改良版「SeamlessM4T v2」をリリース
Metaが2023年8月に公開したAI「SeamlessM4T」は、音声を入力するだけで文字起こしや別言語への翻訳、別言語への吹き替えが可能です。さらにMetaは2023年11月30日に、SeamlessM4Tの改良版となる「SeamlessM4T v2」を発表しました。この「SeamlessM4T V2」では、SeamlessM4Tのパフォーマンスを向上させているだけでなく、感情やスタイルを維持しながら、別の言語へ吹き替えを行うことも可能です。 Introducing a suite of AI language translation models that preserve expression and improve streaming https://ai.meta.com/blog/seamless-communication/ Seamless Communication T
コード生成AIは1兆5,000億ドルの経済価値に、メタは最新のコード生成AI「Code Llama」をリリース、その実力は | AMP[アンプ] - ビジネスインスピレーションメディア
コード生成AIがもたらす経済効果 ジェネレーティブAIツール活用による生産性改善が期待されている。マッキンゼーの推計によると、ジェネーティブAIによる自動化が進むと、生産性向上により2045年頃には、最大で4兆4,000億ドルもの経済価値が創出される可能性がある。 業務別で見た場合、ジェネレーティブAIの付加価値が最大となるのは、マーケティング／営業で、7,600億〜1兆2,000億ドルの価値創出につながるとされる。この分野では、パーソナライズされたコンテンツ生成などにより、マーケティングの生産性は5〜15％増加、また営業の生産性も3〜5％向上すると推計されている。 マーケティング／営業に次いで、ジェネーティブAIの恩恵を受けるとみられているのが、ソフトウェア開発だ。自動化によってもたらされる価値は、5,800億〜1兆2,000億ドルに達すると予想されている。コード作成、修正と再構築、原因
2023年秋、AI業界勢力図② Metaがオープンソースで大暴れ
＜AI新聞編集長の湯川鶴章氏が解説する、「2023年秋、AI業界勢力図」。第2弾は自社開発の言語モデルを、一般企業も一定限度まで無料で使えるかたちでリリースしたMetaに焦点を当てる＞ ＊エクサウィザーズ AI新聞から転載 AIは大きくなるほど性能が向上する傾向にある。この傾向が理由で、AIの巨大化が今もなお続いている。そしてその結果としてAI業界のいろいろなレイヤーで激しい競争が繰り広げられ、業界勢力図の流動的な状態が続いている。どのレイヤーにどのようなプレイヤーがいて、勢力図はどう変化していっているのか。詳しく見ていくことにしよう。 AI言語モデルがクラウドの差別化戦略に さて半導体レイヤーの上は、クラウドコンピューティングのレイヤーだ。実はこのクラウドレイヤーは、その上の言語モデルレイヤーと密接に関わっている。なぜならクラウド事業者は、どこよりも優秀なAIモデルを自社のクラウド向けに
Meta製SNS「Threads」が「Appleのデータ保護は幻想」という実態を浮き彫りにしているとの指摘
Metaは2023年7月6日に、当時Twitterという名称だったXの対抗馬と目されるSNSアプリ「Threads」をリリースしましたが、プライバシーの不透明さにより記事作成時点でもEUでの公開が実現していません。そんなThreadsを開発したMetaや、アプリの配信をApp Storeで承認しているAppleのプライバシー慣行の問題点について、デザインに関する情報や知識を発信している「Growth Design」がわかりやすいスライド資料にまとめて解説しました。 Apple vs Meta: The Illusion of Privacy https://growth.design/case-studies/apple-privacy-policy 上記URLにアクセスしたのが以下。右下のボタンかキーボードの右矢印キーで次のページに移ることができます。 Growth Designの共同設
Metaのコーディング支援AI「Code Llama」に調整を加えることでOpenAIのGPT-4の性能を上回る可能性が報告される
FacebookやInstagramなどを運営するMetaが2023年8月にリリースした「Code Llama」は、テキスト入力を元にプログラムのコードを生成してくれるコーディング支援AIです。そんなCode Llamaを微調整した「CodeLlama-34B」と「CodeLlama-34B-Python」をOpenAIのテストデータセット「HumanEval」でテストした結果、OpenAIの大規模言語モデル「GPT-4」の結果を上回ったことが報告されています。 Phind: AI Search Engine and Pair Programmer https://www.phind.com/blog/code-llama-beats-gpt4 Code LlamaはMetaが2023年7月にリリースした「Llama 2」をコード固有のデータセットでさらにトレーニングしたものです。コードの
Meta、AI翻訳モデル「SeamlessM4T」を発表--約100言語の音声とテキストに対応
Metaは米国時間8月22日、人工知能（AI）を活用する新たな翻訳モデル「SeamlessM4T」を発表した。多様な翻訳機能を一元化したオールインワン型のモデルと呼び、「世界共通の翻訳機を作る探求」に向けた大きな一歩と位置付けている。 SeamlessM4Tは、約100の言語間で、テキストから音声、音声からテキスト、音声から音声、テキストからテキストといった数種の翻訳を実行できる。複数のモデルを使用する他の言語翻訳システムとは異なり、SeamlessM4Tは単一のシステムであり、「エラーと遅延を減らし、翻訳プロセスの効率と品質を高める」とMetaは述べている。 SeamlessM4Tは、MetaのこれまでのAI関連事業を基盤としている。同社は2022年7月、200種類もの言語翻訳が可能なAIモデル「NLLB（No Language Left Behind）-200」をオープンソース化したと
Metaが商用利用可能なコーディング支援AI「Code Llama」をリリース、Llama 2と同じライセンスで無料公開へ
FacebookやInstagramを運営するMetaが、テキスト入力を元にプログラムのコードを生成するAI「Code Llama」をリリースしたと発表しました。モデルはLlama 2と同じ「Llama 2 Community License」で公開されており、月間アクティブユーザー数が7億人以下の場合は無償で商用利用することが可能です。 Introducing Code Llama, a state-of-the-art large language model for coding https://ai.meta.com/blog/code-llama-large-language-model-coding/ Introducing Code Llama, an AI Tool for Coding | Meta https://about.fb.com/news/2023/08/co
Meta、コーディングに特化したLLM「Code Llama」を発表
米Metaは8月24日（現地時間）、コーディング向けの大規模言語モデル（LLM）「Code Llama」を発表した。研究、産業、オープンソース・プロジェクト、NGO、企業などあらゆる分野において、ソフトウェア・エンジニリングの反復的な作業を減らしてワークフローを効率化できるように設計しており、またコーディングを学ぶための教育ツールに活用されることも期待している。同社はCode Llamaを、Llama 2と同じCommunity Licenseの下でリリースする。 Code Llamaは、自然言語およびコードによるプロンプト（例：Write me a function that outputs the fibonacci sequence）からコードを生成し、自然言語による対話で利用者のコーディング作業や学習をサポートする。Python、C++、Java、PHP、Typescript、C#
Metaがコーディング補助AI「Code Llama」の無料公開を計画中か
Metaは「Llama」や「Llama 2」といった大規模言語モデルをオープンソースで公開しています。新たに、Metaがコーディング補助向けに最適化した言語モデル「Code Llama」を開発中であることが報じられました。報道によると、Code Llamaもオープンソースで公開される予定とのことです。 Meta’s Next AI Attack on OpenAI: Free Code-Generating Software — The Information https://www.theinformation.com/articles/metas-next-ai-attack-on-openai-free-code-generating-software FacebookやInstagramなどのSNSを運営するMetaはAI関連の研究開発にも力を入れており、2023年2月にはOpen
Meta、テキストプロンプトで作曲できる生成AIスイート「AudioCraft」をオープンソース化
米Metaは8月2日（現地時間）、テキストプロンプトから音楽や音声を生成する生成AIツールスイート「AudioCraft」をオープンソース化したと発表した。トレーニングに使うデータの多様化もオープンソース化のねらいの1つだ。 AudioCraftは、エフェクトやサウンドスケープを生成する「AudioGen」、テキストからメロディーを生成する「MusicGen」、ニューラルネットワークベースのオーディオ圧縮コーデックの「EnCodec」の3つのコンポーネントで構成されている。MusicGenは単体で6月にオープンソース化されている。EnCodecは昨年11月に公開済みだが、最近の改良でより高品質な音楽生成が可能になったという。 MusicGenは、Metaが所有する音楽と、「この目的のために特別にライセンスを取得した音楽」をあわせて2万時間分のデータでトレーニングしたとしている。 Metaは
テキストから音楽や効果音を生成するためのオープンソースなAIツール「AudioCraft」をMetaが発表
近年はAI技術が急速に進歩しており、高精度なテキストや画像を生成するAIが登場しています。新たに、FacebookやInstagtramなどを運営するMetaが、テキストを基に音楽や効果音を生成するオープンソースのAIツール「AudioCraft」を発表しました。 AudioCraft: A simple one-stop shop for audio modeling https://ai.meta.com/blog/audiocraft-musicgen-audiogen-encodec-generative-ai-audio/ Meta releases AudioCraft AI tool to create music from text | Reuters https://jp.reuters.com/article/meta-platforms-ai/meta-release
Metaが商用利用可能な大規模言語モデル「Llama 2」リリース 無料でブラウザから動かせるデモも続々登場 | AIDB
Meta AIは、新たな大規模言語モデル「Llama 2」をリリースしました。このモデルは、7Bから70Bのパラメータを持つプレトレーニングおよびファインチューニングされた言語モデルを提供します。本記事では、Llama 2の特徴、技術的詳細、そしてその応用例について詳しく解説します。 参照論文情報 タイトル：Llama 2: Open Foundation and Fine-Tuned Chat Models 著者：Hugo Touvron et al. 所属：GenAI （Meta） URL：https://ai.meta.com/research/publications/llama-2-open-foundation-and-fine-tuned-chat-models/ GitHub：https://github.com/facebookresearch/llama 関連研究 画像
【なぜ？】Metaが音声生成AIを一般リリースしないことを決定 | Ubergizmo JAPAN
Meta(旧 Facebook)は、「Voicebox」と呼ばれる音声複製AIテクノロジーをリリースしないという決定で、最近注目を集めました。この画期的なAIモデルは、驚くべき精度で音声を複製及び模倣するという驚くべき能力を備えています。その優れた機能にも関わらず、Metaは、その誤用に伴う潜在的なリスクと危険性を理由にこの技術を一般公開しないことを選択しました。 Metaのプレスリリースでは、Voiceboxは幅広い用途を備えた強力なツールであると説明されています。オーディオ編集目的にも利用可能で、録音から不要なサウンドを除去することが出来ます。さらに、多言語音声生成機能を備えているため、メタバース内の仮想アシスタントやノンプレイヤーキャラクターに対して自然な音声を作成出来ます。Voiceboxは、書かれたメッセージを、友人の声を使って読み上げることも出来るので、視覚障害者の支援も目指し
［速報］マイクロソフト、Metaの最新大規模言語モデル「Llama 2 」をAzureとWindowsでサポート。独自の生成的AIを開発可能に
オープンソースで商用利用も可能な大規模言語モデル Llama 2はこのマイクロソフトの発表とほぼ同時にMetaが発表した最新の大規模言語モデルです。 オープンソースとして公開され商用利用も可能で、AI分野で高い実績を残してきたMetaが満を持して公開するモデルとして高い能力を備えていることが期待されています。 Llama 2はパラメータ数が7B、13B、70Bの3つのモデルに分かれており、Microsoft Azureではこの3つのモデルを現在パブリックプレビュー中のAzure AIモデルカタログから選択し、ファインチューニングし、デプロイが可能。 また、Windowsマシン上でもLlama 2が実行できるように最適化される予定です。 これらにより開発者は独自の生成的AIをMicrosoft AzureやWindows上で開発し、アプリケーションに組み込めるようになります。 マイクロソフト
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Meta エンジニアを助けるコーディングAI「Code Llama」公開 無料で商用可能 | Ledge.ai