Liquid AI が LFM3 を発表、2B クラスの 6 モデルを 1 つのバックボーンで

LFM3-1.7B は 22T トークンで事前学習し、24 層のうち 13 層がゲート付き短畳み込み、5 層がスライディングウィンドウ注意、6 層がグローバル注意。4bit で約 1 GB、128K コンテキストの KV キャッシュは 1.6 GB に収まる。視覚・音声・オムニ・判断の各モデルも同じ骨格から派生した。

日本語
コピー
浅底色的 LFM3-1.7B-Base 架构图,左侧是 24 层堆叠,右侧画出门控短卷积与分组查询注意力的内部结构,底部一排色块标出 13 层卷积、6 层全局注意力、5 层滑窗注意力的排布

本日、次世代の Liquid Foundation Models(LFM)であるLFM3を発表します。特化型インテリジェンスのために設計したモデルです。LFM3 ファミリーはマルチモーダルを前提とした設計で、テキスト、ビジョン、オーディオ、オムニ、意思決定の各モデルを新しい共通バックボーン上に載せています。LFM3 ファミリーの最初のリリースは、2B パラメータ規模のモデル群です。

新しいハイブリッドアーキテクチャと 22T トークンの事前学習に基づく LFM3 は、LFM2の効率を保ちながら、表現力を大幅に高めています。小型で高速なモデルに増えた容量は、特化型インテリジェンスにおける同クラスの出発点として LFM3 を最適な選択にします。ローカルでファインチューニングでき、あらゆるデバイスで動作し、特定タスクの信頼できるエキスパートになれるだけの能力があるからです。

ベースモデルと事後学習済みモデルはオープンウェイトで、本日からHugging Face、Playground、Liquid AI APIで利用できます。ローカルでの実行方法とファインチューニング方法はドキュメントを参照してください。

ハイライト

  • パラメータあたりの性能が向上: 新しい tri-hybrid アーキテクチャと学習レシピにより、LFM3-1.7B はパラメータ数が 35% 少ないながら、従来の LFM2.5-2.6B を上回る性能を実現しました。
  • すべてのモダリティを 1 つのバックボーンで: LFM3-1.7B-Base から学習した 6 つの 2B クラスモデル(テキスト、ビジョン、オーディオ、オムニ、意思決定)。
  • エッジ向け設計: テキストモデルは 4bit 精度で約 1GB に収まります。
  • 自社開発の新しいフラッグシップ視覚・音声エンコーダを搭載。
  • テキストモデルは 256K のコンテキストウィンドウに対応。
  • 特化させるためのモデル: どのモデルも単一の GPU でファインチューニングできます。

LFM3 の各モデルは、特化型インテリジェンスの有力な候補です。自社データでファインチューニングし、アプリケーションが動く場所にそのままデプロイできます。それでは記事をお楽しみください。

表現力を高める新アーキテクチャ

LFM2 は、短い畳み込みとアテンションを組み合わせたハイブリッド構成が、品質を犠牲にせずオンデバイスで高速に動作することを示しました。この設計はハードウェア・イン・ザ・ループの自動アーキテクチャ探索から生まれたものです。LFM3 では、この探索を使ってアーキテクチャをエージェント用途向けに再設計しました。エージェント用途では、パラメータあたりの性能と、長いコンテキストでの高速推論が求められます。

ハードウェア・イン・ザ・ループの対象も広げました。LFM2 ではスマートフォン 1 台とノート PC1 台の CPU だけでしたが、LFM3 では 14 種類のデバイスとバックエンドの組み合わせで探索しています。スマートフォン(Samsung Galaxy S26 Ultra、OnePlus 15)、Raspberry Pi 5、ノート PC(Apple M4 Max、AMD Ryzen AI)、Arm と x86 のクラウド CPU、さらに GPU と Qualcomm Hexagon NPU です。

ゲート付き短畳み込みは、今もレイヤーの半分以上を占めています。長いコンテキストを遅くせずに性能を高めるため、一部を別のシーケンスブロックに置き換えてみたところ、sliding-window attention(SWA)が品質と速度のバランスで最も優れていました。以下に挙げるその他の変更は、速度を大きく損なわずに品質が向上した場合にのみ採用しています。その効果は長いコンテキストで現れます。パラメータあたりで見ると、LFM3-1.7B は短いプロンプトではエッジデバイス上で LFM2-1.2B と同等、コンテキストに 8K トークンを含めると約 25% 高速です。

LFM3-1.7B-Base のアーキテクチャ。24 層のスタックで、SwiGLU FFN を挟んだシーケンスブロックを交互に配置し、13 層のゲート付きショート畳み込み、6 層のフルアテンション GQA、5 層のスライディングウィンドウ GQA を組み合わせている

図: LFM3-1.7B-Base のアーキテクチャ。層のパターン(下段)は、畳み込みとグローバルアテンション、スライディングウィンドウアテンションの層を交互に並べている。

3 種の演算子を組み合わせた層構成。 LFM3 はゲート付きショート畳み込み、スライディングウィンドウアテンション(SWA)、グローバルアテンションという 3 つの演算子を組み合わせている。24 層のうち 13 層が畳み込み、5 層がウィンドウ幅 256 トークンの SWA、6 層がグローバルアテンションだ。畳み込みのカーネルサイズも LFM2 の 3 から 7 に広げた。

ヘッド単位のゲート付きアテンション。 シグモイドゲートが各ヘッドの出力をスケーリングするため、ヘッドは寄与するものがないときにオフにできる。これにより、量子化を妨げる活性化の外れ値の抑制や学習の安定性の向上に役立つ可能性がある。

部分 RoPE。 グローバルアテンション層では、各ヘッドの高周波側の半分だけを回転させ、低周波側の半分は回転させない。こうした次元は距離によらず内容でマッチする。SWA 層は RoPE を全次元に適用する。

サンドイッチ正規化。 各ブロックは入力と出力の両方を正規化し、活性化のスケールを適切に保つ。

LFM3 の語彙は LFM2.5-8B-A1B と同じ 128K で、非ラテン文字をより効率よくトークン化できるよう設計されている。

学習。 LFM3-1.7B-Base は 22T トークンで事前学習した。LFM2 と比べて、科学論文、リポジトリ単位のコード、より幅広い知識ソース、そして大幅に増えた数学のデータを混ぜている。最後の 3.5T トークンは、厳選した高品質データによるミッドトレーニング段階で、エージェントの軌跡や多様なツール呼び出しの比率を高め、エージェント向けのポストトレーニングに備えている。この段階でコンテキストウィンドウも 256K トークンに拡張する。

用途に合わせて選べるマルチモーダルファミリー

LFM3 の最初のリリースには 6 つのモデルが含まれる。いずれも同じ LFM3-1.7B-Base をバックボーンに派生したモデルで、パラメータ数はおよそ 2B。うち 4 つは入力モダリティの異なるモデル(テキスト、視覚、音声、オムニ)で、残る 2 つは視覚モデルとオムニモデルを特化させた意思決定モデルだ。汎用の大型モデルを 1 つ動かすのではなく、用途に合うモデルを選んでカスタマイズし、オンデバイスで動かせる。

LFM3 ファミリーの系譜。LFM3-1.7B-Base から、それぞれ異なる SFT ・ mid-train ・ RL の経路を経て LFM3-1.7B、LFM3-VL-2B、LFM3-Audio-2B、LFM3-Omni-2B が分岐し、vision モデルと omni モデルから d1-2B と d1-Omni-2B が派生する

図: LFM3 ファミリー。テキスト、vision、audio、omni、decision の各タスク向け 2B クラスのモデル 6 種は、すべて共通のバックボーン LFM3-1.7B-Base 上に構築されている。

各モデルの性能と推論結果の詳細は、それぞれのモデルカードを参照してほしい。

AI の重心がクラウドからクライアントへ移るにつれ、開発者には多様な AI PC 上で効率よく動かせるモデルが求められるようになった。Liquid AI の LFM3 ファミリーは、強力なマルチモーダル能力とオンデバイス AI に適したコンパクトなサイズを両立している。AMD は複数世代のモデルにわたり Liquid AI と緊密に協力してきた。LFM3 によって、AMD Ryzen™ AI プロセッサを搭載したシステム上でローカルに動く特化型 AI アプリケーションの可能性が広がることを楽しみにしている。

AMD のシニアディレクター兼 ISV イネーブリング責任者、ジョシュ・ホート

業界全体で、エッジ AI は検出・認識専用モデルの実行から、vision-language モデル、自然言語インターフェース、マルチモーダル推論など複数の AI ワークロードを同時に処理する段階へと進みつつある。課題は、エッジデバイスの演算能力、メモリ、消費電力の制約の中でこうした機能を実現することだ。LFM3 はテキスト、vision、audio を一つのアーキテクチャに統合し、効率的なデプロイを前提に設計されている。重みはオープンで、用途に合わせてファインチューニングできる。開発者は Cooper Model Garden を通じて Ambarella のシリコン上で Liquid AI の LFM2.5-VL モデルをすでに実行でき、同じプラットフォームで LFM3 の提供も開始している。

アンバレラの AI 担当シニアディレクター、マルハル・パルカル

次世代の AI は、デバイスとクラウドに分散しながら、よりマルチモーダルで、パーソナライズされ、プライバシーにも配慮したものになる。Liquid AI の LFM3 ファミリーはその方向への大きな一歩であり、Snapdragon®プロセッサ搭載デバイスに高速で効率的、かつ革新的な AI 体験を届けるため共に取り組めることを嬉しく思う。

クアルコム・テクノロジーズ社バイスプレジデント、ヴィネシュ・スクマール

テキスト

LFM3-1.7B は、256K トークンのコンテキストウィンドウを持つ、ローカルエージェントや特定用途向けのテキストモデルだ。

Hermes Agent、Pi、OpenClaw といったエージェントハーネス上で動くようポストトレーニングされている。受信トレイの仕分け、カレンダー管理、ウェブでの調査、WhatsApp での朝のブリーフィング送信、そして何千もの候補から適切なツールを探し出すツール検索までこなす。トークンは無料なので、何十ものエージェントをバックグラウンドで常時動かしておける。単一 GPU での短時間のファインチューニングで、自分のドメインやハーネス、ツールに適応させられる。

ベンチマークLFM3-1.7B (1.7B)LFM2.5-2.6B (2.6B)MiniCPM5 2B (2.5B)Gemma 4 E4B (8B)Qwen3.5 4B (4.7B)Qwen3.5 9B (9.7B)
エージェント
LiveClaw45.6014.7030.3720.3619.9435.77
Claw-Eval General (EN), average68.6462.6360.7456.1461.9666.53
Claw-Eval General (EN), pass^351.4037.5234.5822.4342.9951.87
BrowseComp-Plus (OpenClaw subset)37.0026.3316.8321.0024.6738.00
WebArena-Verified38.423.029.1117.0621.9228.94
EnterpriseOps-Gym28.207.9413.419.8625.9628.97
AutomationBench (public)41.290.944.711.928.6715.10
ツール利用
BFCL V471.3955.8962.6548.2555.1262.83
ToolSandbox80.3678.0468.1669.2775.4076.41
MCP-Atlas32.5716.4526.386.1941.3742.67
τ³-bench68.0156.7769.4433.5365.9867.11
エージェント型コーディング
SWE-bench Verified (OpenCode)43.4018.0034.800.5041.2051.20
SWE-bench Multilingual (OpenCode)23.008.0015.670.6723.3335.00
Terminal-Bench 2.1 (OpenCode)12.920.005.620.0013.4817.98
コーディング
LiveCodeBench v673.4660.5770.5271.0061.9969.86
LiveCodeBench Pro 25Q231.7419.1629.3429.9424.2534.43
SciCode28.4716.3227.7825.0023.0231.60
指示追従
IFEval96.6695.3987.8390.0292.5292.08
IFBench73.0360.4862.0844.5638.1648.84
IFStruct93.7282.1872.6578.4587.0589.20
Multi-IF89.1084.8073.1981.0380.3284.44
知識
GPQA Diamond63.3757.7865.1557.8875.7680.40
Humanity's Last Exam (no tools)7.175.888.204.7712.8416.41
Humanity's Last Exam (with tools)13.909.6011.506.0011.6017.50
AA-Omniscience (public)0.50-33.17-5.00-15.33-57.17-28.00
AA-Omniscience accuracy (public)7.078.759.139.8315.6713.17
AA-Omniscience non-hallucination (public)92.9353.6984.4472.0913.6452.59
長文コンテキスト
AA-LCR52.836.0049.3439.3352.6762.00
RULER 128K65.561.1537.9618.8284.6387.11
平均49.3731.5539.1931.7439.2747.24

エージェントタスクでは、LFM3-1.7B は数倍のサイズのモデルと互角に渡り合う。BFCL と ToolSandbox の指示追従と function calling では首位に立ち、ブラウザや業務アプリでの長いタスク(WebArena-Verified、AutomationBench)では Qwen3.5-9B を上回る。エージェントコーディングと知識では、サイズが最もものを言うため、より大きなモデルが依然として勝つ。ただし検索を使えば知識の差は縮まり、Humanity's Last Exam のスコアはほぼ 2 倍になる。

この結果を出すために、モデルは 4 段階のポストトレーニングを経ている。

  • 教師ありファインチューニング(SFT): チャット、推論、ツール呼び出し、エージェントのトレースなど、さまざまなタスクで 1.75T トークン。
  • 混合強化学習: 数学やコードから SQL、構造化出力まで、多数のドメインを同時に学習する。報酬に長さペナルティを入れ、回答を簡潔に保つ。
  • マルチドメイン・オンポリシー蒸留(MOPD): 6 つの専門家 RL 教師(コード、数学、ツール使用、長文脈、エージェント作業、エンタープライズワークフロー)を 1 つのモデルに蒸留し直す。
  • エージェント RL: Web ブラウジングからオフィス作業まで、実際のエージェントハーネスの中でタスクを実行し、デプロイに備える。

オンデバイスでは、llama.cpp、Q4_0、32K トークンのコンテキストで指標を測定した。LFM3-1.7B は 3 台すべてのデバイスで最速のモデルであり、次に速いモデルより 1.8〜2.8 倍速くデコードし、メモリ使用量も最も少ない。長いコンテキストも低コストで済む。128K トークンのコンテキスト全体で必要な KV キャッシュは 1.6 GB、Qwen3.5-4B は 4.3 GB、MiniCPM5-2B は 5.6 GB だ。

AMD Ryzen AI Max+ 395、Apple M5 Max、iPhone 17 Pro における LFM3-1.7B のエッジ推論を示す棒グラフ。MiniCPM5-2B、Qwen3.5-4B、Qwen3.5-9B、Gemma 4 E4B と比較した、プリフィルとデコードの毎秒トークン数、およびメモリ(GB)

図: デバイス別の LFM3-1.7B エッジ推論。Q4_0 GGUF と llama.cpp、32K トークンの入力コンテキスト、バッチサイズ 1、出力 100 トークン、GPU オフロード。メモリは、AMD ではホストと GPU のピークを合算し、Apple デバイスではユニファイドメモリの使用量。

SGLang を使った BF16 の NVIDIA B300 1 台では、LFM3-1.7B は 1,024 の同時リクエストで 1 日あたり 36 億トークンを生成できる。この比較のどのモデルよりも多い。

NVIDIA B300 1 基でリクエストの同時実行数を増やしたときの LFM3-1.7B のスループット曲線

図: NVIDIA B300 1 基における同時実行数別の LFM3-1.7B GPU 推論スループット。BF16、LFM3 対応の SGLang 0.5.22、入力 1,024 トークン・出力 256 トークン、3 回実行の平均。

このスループットで何が可能になるかを示すため、30 万を超える LFM3-1.7B エージェントを並列に走らせ、Enron のメールアーカイブを調査した。

LFM3-1.7B はランダムなトラフィック下でも低レイテンシで配信でき、Liquid RIPL上で動かせばオンライン不正検知のようなリアルタイムのユースケースにも対応できる。高負荷時でも P95 リクエストレイテンシは安定しており、vLLM上で配信した競合モデルを上回る。

RIPL 上の LFM3 モデルと vLLM 上の競合モデルについて、リクエストレートに対する p95 レイテンシを示したグラフ

図: NVIDIA B200 1 台でテキストモデルを動かし、ランダムに到着するトラフィックのリクエストレートを上げていったときの、リクエストあたりの p95 エンドツーエンドレイテンシ。LFM モデルは RIPL 上、その他のモデルは vLLM 上で実行。各線はエンジンが維持できた最大のリクエストレートで終わっている。

実際の macOS 環境で、65 の日常的なエージェントタスクについて LFM3-1.7B と Qwen3.5-2B を比較した。勝ったのは小さいほうのモデルだ。タスク成功率は 64% 対 48%、タスクあたりのトークン数は 58% 少なく、試行が行き詰まった割合は 1% 未満に対し 15% だった。小型モデルは Mac 上の実用的なエージェント作業に使える水準に達しており、LFM3 がその証拠だ。LFM3 は、Mac 上の実用的なエージェント作業に使えると当社が確認した初の 2B 未満モデルである。より大きなモデルをタスク成功率で上回り、しかもトークン消費は 58% 少なく、ほぼ行き詰まらない。

Ivan Petrukha、MacPaw のスタッフ AI エンジニア兼 LLM 効率化リード

ビジョン

LFM3-VL-2Bは、物理世界を観察し、推論し、理解できる:

  • 動画理解: LFM のビジョンモデルが初めて動画を入力として受け取る。録画した講義、スマートフォンで撮影した散策の映像、カメラフィードのクリップについて質問できる。
  • 思考: モデルは答える前に段階的に推論する。これによりユーザーの入力をよりよく理解し、数学やグラフ、多段階の問題といった難しい視覚的課題を解けるようになる。
  • 空間・身体性推論: 物体を特定し、その空間的関係を推論する能力は、下流のロボティクス応用の強固な基盤になる。

LFM3-VL-2B は LFM2.5-VL シリーズから性能が大きく向上した。62 のビジョンベンチマークで、LFM3-VL-2B は同程度のサイズのすべてのモデルを少なくとも 7.4 ポイント上回る。そのサイズにもかかわらず、6 倍以上大きい Gemma 4 12B の性能に並び、Gemini 3.5 Flash Lite を上回り、GPT-5.6 Luna とは 2 ポイント差に収まっている。詳細はモデルカードを参照。

ベンチマークカテゴリLFM3-VL-2B (1.9B)LFM2.5-VL-3B (3.1B)MiniCPM-V 4.7 1B (1.6B)Qwen 3.5 2B (2.3B)Gemma 4 E2B (5.1B)Gemma 4 12B (12B)GPT-5.6 LunaGemini 3.5 Flash Lite
総合66.057.659.864.056.974.072.274.1
知覚75.667.965.571.259.173.571.073.0
文書・ OCR ・グラフ83.971.273.079.172.385.784.482.3
数学・論理推論68.840.651.861.051.879.377.366.7
視覚グラウンディング77.368.351.161.241.274.172.763.5
身体性推論64.448.045.351.241.559.161.550.3
GUI 理解83.166.045.367.244.376.182.571.0
動画61.241.353.757.046.658.972.870.0
多言語84.481.277.478.673.486.182.185.8
エージェント42.521.116.915.223.843.656.162.4
平均71.457.657.564.053.671.773.470.0

注: 各カテゴリのスコアは、そのカテゴリに含まれるベンチマークスコアの単純平均。平均行は 62 の評価すべての単純平均。

これらはすべてオンデバイスで効率よく動作し、データがデバイスの外に出ることもクラウド接続も必要ないため、日常的に知能を活用できる。オンデバイスでは、LFM3-VL-2B は同サイズクラスの他のモデルと比べて、計測したすべてのデバイスで prefill スループットが最も高く、メモリ使用量が最も少ない。

AMD、Apple、スマートフォンでの LFM3-VL-2B エッジ推論を示す棒グラフ: prefill と decode の毎秒トークン数、および GB 単位のメモリ

図: デバイス別の LFM3-VL-2B エッジ推論。Q4_0 GGUF と llama.cpp、F16 の vision encoder、512×512 の画像 1 枚と 1,024 トークンのテキスト入力、バッチサイズ 1、出力 256 トークン。AMD と Apple のデバイスは GPU で実行し、Galaxy S26 Ultra は CPU の 4 スレッドで実行。メモリは、AMD ではホストと GPU のピーク値を合計し、Apple デバイスでは統合メモリの使用量、Galaxy S26 Ultra ではプロセスの使用量。

NVIDIA B300 1 基で SGLang を BF16 で動かした場合、LFM3-VL-2B は毎秒 12,000 トークン以上を生成でき、同サイズクラスの他のどのモデルよりも高速です。

NVIDIA B300 1 基でリクエスト同時実行数を増やしたときの LFM3-VL-2B のスループット曲線

図: NVIDIA B300 1 基における同時実行数ごとの LFM3-VL-2B の GPU 推論スループット。BF16、LFM3 対応の SGLang 0.5.22、1 リクエストあたり 512×512 画像 1 枚と入力 1,024 トークン、出力 256 トークン、3 回の平均。

LFM3-VL-2B はランダムなトラフィック下でも低レイテンシで提供でき、Liquid RIPL 上で動かせば画像アセットのタグ付けのようなリアルタイム用途に使えます。高負荷時でも P95 レイテンシは安定しており、vLLM 上で提供する競合モデルを上回ります。

ビジョンモデルのリクエストレートに対する p95 レイテンシ

図: ランダムに到着するトラフィックのリクエストレートが上がるにつれての、NVIDIA B200 1 基におけるテキストモデルの 1 リクエストあたり p95 エンドツーエンドレイテンシ。LFM モデルは RIPL 上、それ以外のモデルは vLLM 上で動作。各線はエンジンが維持できた最大リクエストレートで終わっている。

ビジョンエンコーダ

LFM3 バックボーンの改良に加えて、LFM3-VL には新たに自社開発のビジョンエンコーダを搭載した。計算量は、従来の LFM VL モデルで使われていた SigLIP2 エンコーダの 3 分の 1 で済む。

Liquid のビジョンエンコーダは畳み込みとアテンションを組み合わせることで、同じ品質を保ちながら ViT ベースのエンコーダより大幅に効率が高い。下の性能対効率のグラフがそれを示している。164M パラメータのこのエンコーダは、13 のビジョン言語モデルベンチマークで平均精度 55.9% と Qwen3.5-2B のビジョンエンコーダに並び、FLOPs は 2.2 分の 1 で済む。

ビジョンエンコーダの精度をエンコーダ+コネクタの TFLOPs に対してプロットした散布図。164M の Liquid エンコーダのそばに Qwen3.5-2B、C-RADIOv4、Kimi-K3、SigLIP2、Qwen3.5-0.8B、Penguin が並ぶ

図:LFM2.5-230M の言語バックボーンを共通で使った、13 の VLM ベンチマークにおける平均精度。エンコーダ+コネクタの FLOPs は、評価した各前処理設定で 1024×768 の入力画像を処理した場合の理論値であり、実測レイテンシではない。

動画では、サンプリングしたフレームの各ペアを 1 つの時間スライスの視覚特徴にまとめて埋め込み、以降のエンコードの前に時間方向の系列長を半分にする。これらの設計により、このエンコーダはより豊かな画像理解と効率的な動画処理の両方を支える基盤になっている。

オーディオ

LFM3-Audio-2B は、ノート PC やエッジデバイス上でローカルに動作する、機能を一通り備えたコンパクトなオーディオモデルだ。テキストまたはオーディオを入力として受け取り、テキスト、音声、あるいはその両方で応答する。

LFM3-Audio-2B は、自社開発のオーディオエンコーダとコーデックを組み合わせた新しいアーキテクチャを採用している。音声品質は LFM2.5-Audio を上回り、対応言語は 18 言語に広がった。オーディオ理解、汎用的なオーディオ推論、ツール呼び出しが新たに加わっている。

  • 音声チャット: 音声で質問すると、テキストと音声でストリーミング応答が返る。テキストのみの応答では、答える前に推論させることもできる。
  • 多言語音声: 18 言語の音声を文字起こし、合成、翻訳する。
  • オーディオ理解と推論: 録音を解釈し、そこに含まれる発話、音、出来事についての質問に答える。
  • ツール呼び出し: 音声のリクエストをツール呼び出しに変換し、アプリやデバイスを操作する。呼び出しとあわせてテキストや音声で応答することもできる。

私たちが目指すのは、ドライバーとクルマのやり取りをできるだけ自然で直感的にすることです。Liquid とともに、オンデバイス AI の力で MBUX Virtual Assistant をどこまで高められるかを探っています。その一方で、高速でプライベート、クラウドに依存しない体験も可能にします。こうしたイノベーションを車両に載せる土台になるのが MB.OS アーキテクチャです。

メルセデス・ベンツ・グループ AG 取締役会メンバー、最高技術責任者、開発・調達担当 イェルク・ブルツァー

ASR(WER、%、低いほど良い)

LFM3-Audio-2BLFM2.5-Audio-1.5BGemma 4 E2BGemma 4 E4BQwen2.5-Omni-3BNvidia Audex 2BVoxtral Mini 3BMiMo-Audio-7B-InstructKimi-Audio-7B-Instruct
総パラメータ数2B1.5B5B8B6B3B5B8B10B
英語6.26.18.37.86.365.58.55.3
多言語(en, es, pt, de, fr, it, zh, ja, ko の平均)6–8.16.57.46.47.8––

英語 TTS(UTMOSv2、1〜5、高いほど良い)(WER、%、低いほど良い)

LFM3-Audio-2BLFM2.5-Audio-1.5BQwen2.5-Omni-3BMiMo-Audio-7B-Instruct
総パラメータ数2B1.5B6B8B
UTMOSv23.83.23.42.8
WER1.41.93.24.9

VoiceBench、ツール呼び出し、音声理解(音声入力・テキスト出力、%、高いほど良い)

LFM3-Audio-2BLFM2.5-Audio-1.5BQwen2.5-Omni-3BGemma 4 E2BGemma 4 E4BVoxtral Mini 3BMiMo-Audio-7B-InstructKimi-Audio-7B-Instruct
総パラメータ数2B1.5B6B5B8B5B8B10B
VoiceBench73.155.266.463.372.965.877.376.9
ツール呼び出し(社内評価)58.5–44.355.672.444.533.450.6
音声理解(MMAR)50.625.954.444.549.150.162.353.3

新しい LFM ベースの音声エンコーダは、スライディングウィンドウアテンションと短い畳み込み層を組み合わせた構成で、メモリ使用量を抑えています。完全に因果的で、マイクからの入力をリアルタイムに処理し、話している最中に prefill を進められます。発話が終わってからの待ち時間が短くなり、最初のトークンまでの時間は最短 50 ms です。

音声エンコーダ:16 kHz の波形が毎秒 100 フレームの 128 ビン log-mel スペクトログラムになり、ストライド 2 の畳み込み 3 層が毎秒 12.5 フレームまで削り、エンコーダ 17 層が因果 2.56 秒の窓で文脈を加え、MLP コネクタが各フレームをバックボーンの幅に引き上げる

図:16 kHz の波形は毎秒 100 フレームの 128 ビン log-mel スペクトログラムになる。ストライド 2 の畳み込み 3 層がこれを毎秒 12.5 フレームまで削り、エンコーダ 17 層が因果 2.56 秒のアテンション窓で文脈を加え、MLP コネクタが各フレームをバックボーンの幅に引き上げる。実時間の 4 分の 1 で表示。

新しい音声トークナイザである LiquidCodec は、LFM3-Audio と LFM3-Omni の両方で多言語音声生成を支える。LFM3 アーキテクチャ上に構築され、生成したトークンを単一 CPU スレッド(Apple M4 Max)で実時間の約 87 倍の速さで音声に変える。ストリーミングデコードにも対応する。

量子化は、80 ms の音声を 12 個の離散トークンに圧縮する。従来の LFM Audio モデルと違い、トークンを逐次的に予測する必要はなく、複数のトークンを並列に反復予測できる。バックボーンが新しいトークンを生成すると、デトークナイザがそれを順次音声へ変換していく。すべて実時間より速いため、会話は滑らかで応答性が高い。

LFM3-Audio-2B のエッジ推論:デバイス別の音声 prefill と decode のスループット、およびメモリ(GB)の棒グラフ

図:デバイス別の LFM3-Audio-2B エッジ推論。llama.cpp 上の Q4_0 GGUF、F16 音声エンコーダ、30 秒の音声と 1,024 トークンのテキスト入力、バッチサイズ 1、出力 256 トークン。AMD と Apple のデバイスは GPU で実行し、Galaxy S26 Ultra は CPU の 4 スレッドで実行する。メモリは、AMD ではホストと GPU のピークの合計、Apple デバイスではユニファイドメモリのフットプリント、Galaxy S26 Ultra ではプロセスのフットプリント。

Omni

LFM3-Omni のアーキテクチャ:音声、画像、動画、テキストを 1 つの入力シーケンスにエンコードして LFM3-1.7B バックボーンに渡し、LM ヘッドがテキストを、Liquid 音声コーデックを備えた depthformer が音声を生成する

図:LFM3-Omni は音声・画像・動画・テキストをひとつの入力シーケンスに符号化し、LFM3-1.7B バックボーンに渡す。LM ヘッドがその出力をテキストに変え、Liquid audio codec を用いた depthformer が音声に変える。

LFM3-Omni-2B は私たち初のオムニモデルであり、視覚・音声・言語をひとつのモデルに統合し、見て、聞いて、話し返す:

  • 音声による視覚的質問応答: 画像や実世界のシーンについて音声で質問すると、テキスト・音声・その両方で答えが返る。
  • 映像と音声の理解: 動画のフレームと対応する音声を同時に処理し、画面で何が起きているかと、何が話され、聞こえているかの両方を推論する。
  • マルチモーダルなツール呼び出し: 視覚的な文脈と音声の指示を組み合わせて構造化されたツール呼び出しを生成する。アシスタントは見たものとユーザーの発話の両方を使って、アプリケーションやインターフェースを操作できる。

LFM3-Omni は、視覚情報と聴覚情報を同時に理解する必要があるクロスモーダルなやり取りを扱える。画像について音声で質問したり、音声が同期された動画を渡して、見えるものと聞こえるものの両方に依存する質問を投げかけたりできる。

LFM3-Omni-2BQwen2.5-Omni-3BQwen2.5-Omni-7BGemma 4 E2BGemma 4 E4BPhi-4-multimodal
Params2.2B6B10.7B5B8B5.6B
Video + Audio UnderstandingDaily-Omni70.158.861.350.654.148.9
WorldSense47.14545.438.143.542.4
AV-SpeakerBench46.840.443.232.336.438
Image + Audio UnderstandingOmniBench (overall)46.347.149.716.820.739
OmniBench Speech48.245.74816.121.338.9
Spoken Visual QARealWorldQA64.761.169.939.44964.3
MMStar51.850.857.338.944.654.8
POPE83.885.385.474.277.883
ERQA39.437.339.220.632.130.8
EmbSpatial67.653.459.544.154.042.6

LFM3-Omni はクロスモーダル理解に加え、単体の LFM3 モデルが持つ主要な機能をそのまま備えています。視覚的質問応答、音声認識、音声合成、言語インストラクションへの追従などです。

「LFM3-Omni: One model for every modality」と題したレーダーチャート。テキスト、視覚、音声、omni の各ベンチマーク軸で LFM3-Omni-2B と 2 つのベースラインを比較している

LFM3-Omni-2B は、リソースの限られた環境で効率よく動かせるよう設計されています。その機能により、文脈を踏まえた案内を返し、ハンズフリーのやり取りを支え、自然な音声コマンドでユーザーの作業を手助けする対話アシスタントを実現できます。視覚理解、音声対話、ツール呼び出しを組み合わせることで、パーソナライズされた学習や日常のアシスタントから、デジタルインターフェースやロボットシステムの操作まで、幅広い用途に対応します。

パラメータ数 2.2B で、こうしたマルチモーダルアシスタントをオンデバイスに搭載できます。手書きの数式を見て話しかけられた質問に答える家庭教師、持ち歩きながら見えているものについて尋ねられるタブレット、カメラが捉えた映像とドライバーの発話を組み合わせる車載アシスタントなどが例です。

音声からのグラウンディングされたツール使用:LFM3-Omni は音声から直接構造化ツール呼び出しへ。精密な視覚グラウンディングが画面上のあらゆる要素を特定し、1 つのモデルが聞き、見て、行動できる。

判定モデル

今回のリリースでは、新しい判定モデルを 2 つ追加する。d1-2BはLFM3-VL-2Bをベースにテキストと画像を読み、d1-Omni-2BはLFM3-Omni-2Bをベースに音声も聞き取る。どちらも答えを文章で書く代わりに、ミリ秒単位で判定を下す。状況(サポートチケット、請求書、アプリの画面、写真、ボイスメモ)と質問のリストを渡せば、1 回のフォワードパスで全問に回答し、それぞれに較正済みの確率を付ける。

新しい LFM3 バックボーンに加え、d1-3Bからの大きな変更点が型付きの回答だ。yes/no、選択肢、スコアに加えて、両モデルは次のことができるようになった。

  • 指し示す: 説明した対象を囲むボックスを描く。あるいは該当するものをすべて見つけ、件数も返す。
  • 読み取る: 文書からテキスト、数値、日付を抜き出し、その由来となる正確なスパンを示す。フィールドが存在しなければ「not found」と答える。
  • 見積もる: 数値と、その想定レンジを返す。
  • 選ぶ: 該当する選択肢をすべて選び、それぞれに確率を付ける。

質問の数に制限はない。同じ入力に対する 1 回のパスでまとめて読まれる。

より小さく、より強く。 d1-2B は前世代の d1-3B を置き換える。パラメータ数は 3 分の 1 減だ。

d1-3Bd1-2B
Decision Bench(実企業のレコード)83.685.2
Decision Index(公開スイート)49.051.1
ImajevBench(写真とルールからの判定)64.075.5
社内 Meta index(非公開・公開の 117 ベンチマーク)58.863.2

話して判定できる。 d1-Omni-2B は同じ質問を音声で受け取る。音声のリクエストも、テキストと同じようにルーティングし、チェックし、回答できる。書き言葉ではなく音声で尋ねた場合でも、精度はほぼ落ちない。

書き言葉音声
DecisionBench(業務のルーティングとトリアージ)83.478.2
Typed Decisions(カスタマーサービス案件)50.548.0
JevBench87.689.0

日常的な音も認識し(ESC-50 で 84.5%)、43 言語のうちどれが話されているかも判別する(FLEURS で 92.5%)。

テキストと画像なら d1-2B、入力に音声が含まれるなら d1-Omni-2B を選べばよい。どちらもオンデバイスで動作し、チケット、文書、通話、カメラのフレームの流れを、クラウドへのラウンドトリップなしで構造化された判定に変える。

次のデモでは、d1-2B が MacBook 上で動作します。探したいものを自然言語で伝えると、新しい Point 回答タイプによって、1 回のフォワードパスで該当箇所すべてにバウンディングボックスが描画されます。

特化型インテリジェンスのために

LFM3 は特化を前提に設計されている。2B クラスのモデルは、自前のデータでファインチューニングでき、アプリケーションが動く場所でそのまま動かせる程度に小さい。以下では LFM3-VL-2B を使った 2 つの例を示す。1 つ目は、狭い範囲の産業タスク向けに検査モデルへ変える短時間のファインチューニング。2 つ目は、ロボットコントローラへ変える研究上の拡張だ。

ドメイン知識:LFM3 を自分の分野に特化させる

フロンティアモデルは強力な汎用モデルではあるが、個々のユースケースに必ずしも精通しているわけではない。このデモでは、風力タービンブレードを撮影したドローン写真から欠陥を見つけて分類できるよう、LFM3-VL-2B をファインチューニングした。学習には公開写真約 3,000 枚(WTBs2025)を使い、A100 1 台で SFT と GRPO を数時間回した。その後、ベースモデルと GPT-6 Luna を、約 1,400 枚のホールドアウト写真で比較した。

風力タービンブレードのホールドアウト写真。アノテーション済みの正解、ファインチューニングした LFM3-VL-2B の検出結果、GPT-6 Luna の検出結果を示す

図:風力タービンブレードのホールドアウト写真における欠陥検出。欠陥タイプごとに 2 枚ずつ、アノテーション済みの正解、ファインチューニングした LFM3-VL-2B、GPT-6 Luna を並べている。破線の輪郭がアノテーションされた欠陥。正しいタイプのボックスが IoU ≥ 0.5 で重なった場合に、その欠陥を検出できたとみなす。写真:WTBs2025、CC BY 4.0。

そのままでは、LFM3-VL-2B と GPT-6 Luna がこれらの欠陥タイプを正しく識別できる画像は 10% 未満だ。短時間のファインチューニングで、LFM3-VL-2B の分類精度は 67%に上がり、検出 F1 は 0.003 から 0.11 に改善した。GPT-6 Luna は 0.01 だった。違いがはっきり出るのが落雷の画像で、GPT-6 Luna は欠陥の位置を正しく捉えることが多いもののラベルを誤るのに対し、ファインチューニングしたモデルは落雷と正しく識別する。分類と検出にとどまらず、同じ画像について自然言語で質問に答えることもできる。たとえば、目に見える損傷の位置を示したり、欠陥タイプ・根拠・位置を含む短い検査所見を書いたりできる。

ロボティクス:LFM3 に行動を教える

LFM3-VL-2B をロボティクス分野の基盤として使えるかどうかを調べる。検討するのは、(1) 高レベルなツールオーケストレーション、(2) 視覚言語ナビゲーション、(3) 低レベルなマニピュレーションという、互いに補完し合う 3 つの方向性である。

オーケストレーション。 LLM ベースのロボット計画・制御(SayCan、Code as Policies)と最近のフィジカルオーケストレータ(VoLo、Gemini Robotics ER 2)を踏まえ、LFM3-VL-2B をファインチューニングし、ツールを通じてロボットアームを操作する。リクエストと現在のカメラ画像を受け取ると、ステップごとに推論し、ポインティングで物体をグラウンディングし、深度ツールで寸法を測り、モーションプランナー経由で操作する。その後、次の画像で各結果を検証して報告する。リクエストが到達不能だったり曖昧だったりした場合も同様だ。タスクには関係に基づく選択、測定した属性による並べ替え、環境の摂動が含まれ、いずれも Isaac Sim 上でシミュレーションしている。アーキテクチャの変更は不要だった。rank-32 の LoRA アダプタを約 40,000 サンプルで学習した。操作軌道に、汎用的なツール使用とポインティングのデータを組み合わせている。AMD Instinct MI325X 1 基で約 6 GPU 時間かかった。ファインチューニングした d1-2B スキルモニタと組み合わせると、滑り、詰まり、引きずりといった外乱下での復帰成功率をさらに 2 倍にできる。

ナビゲーション。 視覚と言語によるナビゲーションでは、LFM3-VL-2B が経路記述と RGB フレームの短い履歴を読み、ナビゲーション目標と残差量子化した軌道プリミティブを予測する。LightNav-0 のアクションインターフェースに着想を得た。各決定は 5 トークンで構成される。空間・制御用の 2 トークンと、階層的に量子化された 3 つのコードだ。後者は 10 ウェイポイントの経路を表し、速度コントローラが追従できる。語彙のうち 2,068 トークンを作り替えるだけで、アーキテクチャはそれ以外変更していない。MI325X GPU 上で 280 万サンプルを 72 GPU 時間かけて学習した。未見の検証シーンにおいて、得られたモデルは R2R で 53%、RxR で 43%の成功率を達成した。評価プロトコルは厳格な連続制御で、壁沿いの滑りを無効化し、明示的な停止を必須としている。カメラ角度や指示言語が変わっても堅牢であることも確認した。Jetson AGX Orin 上では、視覚プロンプトのキャッシュなしで TensorRT FP16 を使い、ナビゲーションモデルが 2.5 Hz 超でウェイポイント軌道を更新する。

操作生成。 LFM3-VL-2B を視覚言語行動(VLA)モデルにするにあたり、OpenVLA-OFT と StarVLA-α に着想を得た並列行動予測を採用した。小さな残差 MLP が、8 個の行動クエリトークンの隠れ状態を、1 回のフォワードパスで 8 ステップ分の連続ロボット行動チャンクに変換する。固有感覚は、離散化したテキストと、実体ごとに学習した射影の両方から与え、ネットワーク全体をエンドツーエンドでファインチューニングする。単一アームや移動マニピュレータから双腕プラットフォーム、ヒューマノイドまで 15 種類の実体のシミュレーションおよび実機データを用い、MI325X GPU で 170 GPU 時間をかけて汎用チェックポイントを 1 つ学習した。得られた VLA は、LIBERO の 4 スイートで平均成功率 96.2%、RoboCasa-GR1 の卓上タスクで 45.7% を達成する。Jetson AGX Orin 上では、TensorRT と FP16 精度により 50 ms 未満で行動チャンクを生成できる。

はじめに

LFM3 は本日から利用できる。Hugging Face と Liquid AI API で公開中だ。

LFM3 は「どこでも動く AI」という私たちの構想を形にするものだ。これらのモデルは次のとおり。

  • オープンウェイト: ダウンロードし、ファインチューニングし、デプロイできる。
  • 初日から高速: Apple、AMD、NVIDIA、SGLang、Qualcomm の各ハードウェアで llama.cpp、MLX、vLLM をネイティブにサポート。低レイテンシ・大規模ワークロードには Liquid Real-time Inference Pipeline でデプロイできる。
  • 揃ったモデルファミリー: カスタマイズ向けのベースモデルから、テキスト、視覚、音声、オムニ、意思決定に特化したモデルまで、単一のアーキテクチャで多様なユースケースをカバーする。

どんなものを作るのか、楽しみにしている。

ローンチパートナー

day-0 ローンチパートナーの支援に感謝する。LFM3 は本日から次のプラットフォームで利用できる: Ambarella、AMD、Arm、OpenVINO 経由の Intel、NVIDIA、OpenRouter、Qualcomm AI Hub と GenieX 経由の Qualcomm、Vercel。リリース前のテストと評価に協力いただいた Mercedes-Benz と Shopify にも感謝する。

ビルダーエコシステムからの支援に感謝します:Atomic、Cactus、Hugging Face、llama.cpp、LM Studio、MLX、Ollama、SGLang 上の RadixArk、.txt、Unsloth、vLLM、ZML。

引用

引用には以下の参考文献または BibTeX を使用してください:

Liquid AI, "Introducing LFM3: Every Modality for Specialized Intelligence", Liquid AI Blog, October 2026.

@article{liquidAI2026LFM3,
  author = {Liquid AI},
  title = {Introducing LFM3: Every Modality for Specialized Intelligence},
  journal = {Liquid AI Blog},
  year = {2026},
  note = {www.liquid.ai/blog/lfm3},
}

出典: Liquid AI Blog← ホームへ戻る