AI News JAPAN

世界のAIニュースを最速で把握できるメディア

Advertisement

NVIDIA、エージェント向け高速小型モデル「Nemotron 3.5 Lightning」を公開

30秒サマリー

  • NVIDIAが30Bパラメータ・実効3BのMoEモデルを正式公開、同規模比で最大4倍の出力速度を実現
  • ツール呼び出しや結果検証など高頻度タスクをフロンティアモデル不要で処理し、コスト・レイテンシを削減
  • 重み・学習データ・レシピをオープンライセンスで提供し、企業が自社業務向けにカスタマイズ可能

何が起きたか

NVIDIAは2026年8月11日、AIエージェント向け推論特化モデル「NVIDIA Nemotron 3.5 Lightning」を発表した。総パラメータ数30Bのオープン型Mixture-of-Experts(MoE)モデルで、推論時に実際に動作するのは3Bパラメータのみ。MoEアーキテクチャにより、大規模モデル相当の能力を小型モデルの計算コストで実現するとしている。

性能面では、「Artificial Analysis Intelligence Index」においてaccuracy-speed Paretoフロンティアを達成したと報告されている。また、ベンチマーク「PinchBench」において、同精度帯の競合モデル「Qwen3.6 35B」と比較して1万タスクを30%速く処理しながら86%の精度を維持したとしている。速度向上の主な技術要因として、投機的デコーディング(Speculative Decoding)、エージェントハーネス最適化トレーニング、NVFP4およびBF16量子化チェックポイントが挙げられている。

展開環境はDGX SparkやGeForce RTX 5090などのローカルハードウェアからデータセンターまで対応する。重み・学習データ・レシピはOpenMDW-1.1ライセンスのもとHugging FaceおよびModelScopeで公開されており、LoRAやSFTによるファインチューニング、強化学習を用いた追加訓練が可能とされている。また、Google Cloud、Microsoft Foundry、Oracle Cloud Infrastructure(OCI)などのクラウドプラットフォームや、AccentureやTata Consultancy Servicesなどのグローバルシステムインテグレーターがパートナーとして列挙されている。

あわせてNVIDIAは「NeMo Switchyard」を発表した。これは複数モデルへのタスクルーティングを自動化するライブラリで、計画・推論などの高難度タスクは上位の「Nemotron 3 Ultra」へ、ツール呼び出しや書式整形などの定型タスクはNemotron 3.5 Lightningへと振り分けることで、トークンコストの最適化を図る仕組みとされている。

原典ハイライト

原文では「長期稼働エージェントはその大半の時間をツール呼び出し・結果検証・サブエージェント委譲といった高頻度実行に費やしており、すべてのステップにフロンティア推論モデルを使うとコストとレイテンシが増大する」と課題を明示した上で、Nemotron 3.5 LightningをそのExecutionレイヤーに最適化された解として位置付けている。

出典: NVIDIA Technical Blog(公式ブログ)

So What?(なぜ重要か)

大規模推論モデルが「考える」役割を担い、小型高速モデルが「実行する」役割を分担するという「モデル分業アーキテクチャ」が、エージェント設計の実用的な標準に近づきつつある。フロンティアモデル一本足打法ではコストが事業化の障壁になるケースで、Lightningクラスのモデルをルーティング層と組み合わせることが、コスト許容範囲内でのエージェント実用化の現実解として浮上している。

日本企業への示唆

日本企業がAIエージェントを業務システムへ組み込む際、最大の懸念はAPIコストの予測困難性と応答速度の不安定さである。NeMo Switchyardのようなモデルルーティング層を導入すれば、高頻度の定型処理(伝票チェック、フォーム入力、ステータス照会など)を低コストモデルで処理し、例外判断や複雑な推論のみを上位モデルに回す設計が現実的になる。オープンライセンスで重みが公開されているため、自社データでのファインチューニングによる特定業務への適応も可能。先行してPoC環境を構築し、ルーティング設計のノウハウを蓄積しておくことが、将来の本番移行コストを左右する可能性がある。なお、TCS・Tech Mahindra・Wipro等インド系大手SIがパートナーとして名を連ねており、国内SIを通じた導入支援の選択肢も今後広がるとみられる。

背景・経緯

NVIDIAのNemotronファミリーは、大規模オーケストレーション向けの「Nemotron 3 Ultra」を上位に、実行層向けの小型モデルを下位に配置する階層構造を持つ。原文によれば、Nemotron 3.5 LightningはそのファミリーにおいてNemotron 3 SuperおよびUltraと共通の技術(Multi-token Predictionなど)を受け継いだ最小モデルとして位置付けられている。セキュリティ・管理スタック「NemoClaw」との統合も進めており、常時稼働エージェントの運用基盤整備を並行して進めている。