ArXiv AI 2026年9月25日

マルチモーダルLLM「Pistis」モデルファミリー発表:IDRLで効率的な知識転移とLLM最適化

なぜ重要か

Pistisモデルファミリーは、新しい後学習パラダイム「IDRL」によりマルチモーダルLLMの効率と性能を飛躍的に向上させ、次世代AI応用を加速する。

要約

Qwen3.6およびQwen3.5をベースとした27Bおよび9Bパラメータのマルチモーダル大規模言語モデル「Pistis」モデルファミリーが発表されました。Pistisは、大規模なマルチモーダル教師ありファインチューニングで基盤を構築し、Interleaved Distillation and Reinforcement Learning(IDRL)という新しい後学習パラダイムを導入しています。

要点

  • PistisマルチモーダルLLM発表
  • Qwen3.6/3.5ベース、27B/9Bパラメータ
  • 大規模SFTで強固な基盤構築
  • IDRLパラダイムで知識転移最適化
  • マルチモーダルAIの性能向上に貢献

詳細解説

マルチモーダルAIの進化は、テキストだけでなく画像や動画も理解し生成できる次世代のAIシステムを構築する上で不可欠です。Pistisモデルファミリーは、Qwen3.6とQwen3.5を基盤とする270億および90億パラメータのマルチモーダルLLMとして、この分野の最新の進歩を示しています。このモデルの重要な技術的特徴は、汎用性とスケーラビリティを兼ね備えた後学習フレームワークです。まず、大規模なマルチモーダル教師ありファインチューニング(SFT)によって強固な基盤を確立します。その上で、「Interleaved Distillation and Reinforcement Learning(IDRL)」という革新的なパラダイムを導入しています。IDRLは、オンポリシー蒸留と強化学習を単一のトレーニングループ内で密接に統合し、これらを交互に最適化することで、より効果的な知識転移と汎化性能の向上を実現します。このアプローチは、モデルのトレーニングプロセスにおける既存の課題を克服し、より高性能で効率的なマルチモーダルLLMの開発に道を開くものです。Pistisのようなモデルは、画像認識、動画理解、マルチモーダル対話システムなど、多様なAIアプリケーションの性能を飛躍的に向上させ、より自然で人間らしいAIとのインタラクションを可能にすると期待されます。

元記事を読む

ArXiv AI で読む →
← 2026年9月26日(土) の一覧に戻る