本文へスキップ
研究 · 2026年9月

AIを自分のパソコンに入れる

Qwen、Jev、LayaからComfyUIまで、そして2台の普通のマシンでの実測

2026-09

ローカルで動く大規模モデルには何があるのか?言語、推論、画像、動画、全部あるのか?2026年9月時点で代表的なローカルモデルを並べ、48GBユニファイドメモリのMac miniと16GB VRAMのRTX 3080 TiノートPCという2台の普通のマシンに実際にインストールして動かし、数字も落とし穴も記録しました。

3つのポイント

モデルの大きさと重要性に単純な関係はない

322Mの分類モデルから30Bの全モダリティモデルまで、幅は約2桁。契約書から表や印章を抜き出すだけなら0.9Bの専用モデルで足りますが、6秒の動画はハイエンドGPUを何分も占有します。AIは少しずつ道具箱の様相を呈してきました。

16GB VRAMが22Bの動画モデルを動かした

48GBユニファイドメモリのMacはLLMには最適ですが、この動画ワークフローは動きませんでした——int8加速がCUDAカーネルに依存し、MPSに相当する最適化がないためです。16GB VRAMの3080 TiノートPCは、ComfyUI DynamicVRAMが収まらない重みを64GBのシステムメモリにオフロードし、22BのLTX-2.5を無理やり動かしました:6秒・1152×640の動画で1本約6.2分。

「全方位」とは役割分担であり、何でもできる1つのモデルではない

同じマシン、同じ27Bモデルでも、量子化・エンジン・デコード方式を変えると速度は約2倍になりました(omlx + MTPで22.2 token/s)。ローカルで動くことと、すべてをローカルに置くべきことは別です——大量生産は最終的にクラウドへ。全方位とは、それぞれが誰に仕事を渡すべきかを知っていることなのかもしれません。

代表的なローカルデプロイモデルのパラメータ規模(対数スケール)、用途別に色分け:322Mの分類モデルから30Bの全モダリティモデルまで、約2桁の幅。
代表的なローカルデプロイモデルのパラメータ規模(対数スケール)、用途別に色分け:322Mの分類モデルから30Bの全モダリティモデルまで、約2桁の幅。

全文

資料は2026年9月22日時点。全文は中国語のみの提供です。