ローカルAIモデルおすすめランキングと必要なPCスペック
RTX 4090から8 GBのGPU、Mac、CPUのみの環境まで、実測値をもとにローカルAIモデルの動作状況とおすすめを紹介します。
👁 127閲覧数
ローカルAIは、文章・画像・動画・音声のオープンモデルを自分のPCで動かす使い方です。アカウントも月額料金も不要で、入力したデータがPCの外に出ません。RTX 4090での実測では、まず試すなら文章はGemma 4 12B(VRAM約8 GB)、画像はZ-Image Turbo(1枚4.2秒、商用利用可)、短い動画はWan 2.2 5B(720p・5秒で約4分)がおすすめです。ただし手直しなしで使える文章の質では、Claude Opus 5.5やGPT-6 Lunaなどのクラウドモデルにまだ大きく届きません。このページでは、GPUのメモリー別に動くモデルの表、2026年10月時点のオープンモデルのランキング、10分で始める手順をまとめます。
実測レビューとガイド
01Gemma 4 12BなどローカルAI 7モデルを比較、RTX 4090で検証RTX 4090でローカルAI 7モデルの文章作成、速度、VRAMを比較。クラウドのHaikuとのAPI料金も補足します。読む →
02Z-Image TurboとQwen-Image 2.1:RTX 4090実測とVRAM同じ8プロンプトで生成した16枚とRTX 4090の実測値。小容量GPUの未測定条件、ComfyUIの設定、日本語の文字品質を判断できる範囲を整理します。読む →
03Wan 2.2をRTX 4090で実測:生成時間・VRAMと4本の作例Wan 2.2 TI2V 5Bで生成した4本の動画とRTX 4090の測定値。初回読み込み、VRAM、電力量、小容量GPUに結果を当てはめる際の限界を整理します。読む →
04ローカルAIモデル新作まとめ 2026年10月:動画・画像・音楽Kandinsky 6.0、Qwen-Image 2.1 Turbo、FLUX 3 Klein、YuE2をRTX 4090で検証。生成時間、VRAM使用量、ライセンスを紹介します。読む →
05FLUX 3 Image Kleinをローカル実行:RTX 4090での速度とVRAM使用量RTX 4090での生成速度とVRAM使用量を検証。ComfyUIでの使い方と、ボックスによるレイアウト指定も紹介します。読む →
06Kandinsky 6.0 VideoをRTX 4090で実行:音声付き動画をローカル生成Kandinsky 6.0 VideoをComfyUIとRTX 4090でテスト。LiteとProの生成時間、VRAM使用量、音声生成とポーランド語音声の結果を紹介します。読む →
07Hangar:Windowsで画像・動画・音楽を生成できる無料ローカルAIHangar 0.2は、NVIDIA GPUを検出し、モデルをSHA-256で検証して取得できるWindows向け無料ツールです。対応モデル、必要VRAM、ライセンス、導入手順を紹介します。読む →
08ローカルAIとAPIの料金比較:RTX 4090の実測コストRTX 4090でローカルAIの電力コストを測定し、API料金と比較。モデル別の品質スコアや、GPU購入費の損益分岐点も紹介します。読む →PCのスペック別に動くローカルAIモデル
動くかどうかを決めるのは、何よりGPUのビデオメモリー(VRAM)です。Macではユニファイドメモリがポイントになります。以下では、よくある5種類の環境を紹介します。速度の数値は、自分で測定した値か、日付が明記された情報源の値だけを掲載しています。実機で所有しているGPUはRTX 4090 24 GBのみです。小容量GPUの数値はシミュレーションで確認しました。OllamaでGPUに割り当てるレイヤー数を制限し、8・12・16 GBのGPUで使用可能なメモリ(容量からシステム用の1 GBを差し引いた量)にモデルが収まるようにして、残りの処理をCPUに割り当てています。実際の8 GB・12 GB GPUはRTX 4090よりメモリ帯域幅が狭いため、これらの速度は上限の目安としてご覧ください。測定値も情報源もない場合は「未測定」と記載しています。
RTX 4090 24 GB(RTX 3090、5090も対象)- 実測値
| モデルとライセンス | GPUメモリ | 速度 |
|---|---|---|
| 文章: Gemma 4 31B QAT、Apache 2.0 | 19.2 GB | 41-43 tok/s |
| 文章: Qwen 3.8 27B(Q4_K_M)、Apache 2.0 | 17 GB | 50 tok/s |
| 文章: Bielik 11B v3(Q8、ポーランド語特化)、Apache 2.0 | 16.7 GB | 72 tok/s |
| 文章: GPT-OSS 20B、Apache 2.0 | 12.2 GB | 218 tok/s |
| 画像: Z-Image Turbo、Apache 2.0 | 最大18 GB | 1枚あたり4.2秒 |
| 画像: Qwen-Image 2.1、非商用のみ | 最大16 GB | 1枚あたり6.5秒 |
| 動画: Wan 2.2 TI2V 5B、Apache 2.0 | 約20 GB | 720pの5秒動画に約4分 |
| 音声: XTTS v2、非商用のみ | 3.0 GB | 53秒の音声を17.6秒で生成 |
| 音声: Chatterbox Multilingual、MIT | 5.3 GB | 33秒の音声を26.4秒で生成 |
文章生成はllama.cpp CUDA(26.09)とOllama 0.40(Gemma 31B、10月8日)、コンテキストは8,000-32,000トークンです。画像生成はComfyUIで1344×768、初回ロード時間を除いた値です。音声は10月8日にポーランド語の同じ文章で測った結果です。Gemma 4 31BはGPUのほぼ全容量を使うため、同時に画像生成モデルを動かすことはできません。
12 GB GPU(RTX 3060、4070)- シミュレーションと情報源
| モデルとライセンス | メモリ | 速度 |
|---|---|---|
| 文章: Gemma 4 12B(Q4)、Apache 2.0 | 約8 GB、全体が収まる | 12 GBでは未測定。4090では91-104 tok/s |
| 文章: GPT-OSS 20B、Apache 2.0 | 11.2 GB、ほぼ上限で収まる | シミュレーションで165 tok/s |
| 文章: Bielik 11B v3(Q8)、Apache 2.0 | 50レイヤー中45レイヤーをGPUに配置 | シミュレーションで23.6 tok/s |
| 文章: Qwen 3.8 27B、Apache 2.0 | 65レイヤー中44レイヤーをGPUに配置 | シミュレーションで6.9 tok/s |
| 比較用: 実機のRTX 3060 12 GBでLlama 2 7B Q4_0 | 約4 GB | 76.9 tok/s(llama.cpp、下記の情報源を参照) |
| 画像: Z-Image Turbo、Apache 2.0 | メーカーによると16 GBで動作 | 12 GBでは未測定 |
| 音声: XTTS v2 / Chatterbox | 3.0 / 5.3 GB、どちらも収まる | 12 GBでは未測定 |
8 GB GPU(RTX 4060、3070)- シミュレーションと情報源
| モデルとライセンス | メモリ | 速度 |
|---|---|---|
| 文章: Gemma 4 E4B、Apache 2.0 | 5.4-6.1 GB、収まる | 8 GBでは未測定。4090では110-129 tok/s |
| 文章: Gemma 4 12B(Q4)、Apache 2.0 | 48レイヤー中45レイヤーをGPUに配置 | シミュレーションで48 tok/s |
| 文章: GPT-OSS 20B、Apache 2.0 | 24レイヤー中14レイヤーをGPUに配置 | シミュレーションで29 tok/s |
| 文章: Bielik 11B v3(Q8)、Apache 2.0 | 50レイヤー中28レイヤーをGPUに配置 | シミュレーションで8 tok/s |
| 比較用: 実機のRTX 4060 Ti 8 GBでLlama 2 7B Q4_0 | 約4 GB | 64.0 tok/s(llama.cpp、下記の情報源を参照) |
| 画像: Z-Image Turbo、Qwen-Image | 実測では16-18 GB | 8 GBでは未測定 |
| 音声: XTTS v2(3.0 GB)、Piper(GPU不要) | 収まる | XTTSは8 GBで未測定 |
8 GBのGPUでは、モデル全体がメモリに収まるものを選びましょう。Bielik 11B Q8をGPUとCPUに分けたシミュレーションでは8 tok/sまで低下しました。GPUメモリ全体に収まる環境では70 tok/sでした。
Mシリーズ搭載Mac(16、32、64 GB)- 情報源に基づく参考値、実測なし
テスト用のMacは所有していません。MacのメモリはシステムとGPUで共有するため、macOSやアプリ用の領域が常に必要です。以下に示すファイルサイズは、テストしたモデルそのものを動かすための最低限のメモリの目安です。速度は同じ小型モデル(Llama 2 7B Q4_0)について、llama.cppの公開ベンチマークから引用しています。
| Mac | 動作するモデル(ファイルサイズ) | 速度 |
|---|---|---|
| 16 GB | Gemma 4 12B Q4(7.0 GB)、Gemma 4 E4B(5-8 GB)、Bielik 11B Q4 | Gemmaは未測定。M4(120 GB/s)でLlama 2 7Bは24.1 tok/s |
| 32 GB | 上記に加えてGPT-OSS 20B(12.1 GB)、Qwen 3.8 27B Q4(16.5 GB)、Gemma 4 31B QAT(17.65 GB) | 未測定。M4 Pro(273 GB/s)でLlama 2 7Bは50.7 tok/s |
| 64 GB | 同じモデルをより長いコンテキストで利用可能。それ以上のモデルは未確認 | 未測定。M4 Max(546 GB/s)でLlama 2 7Bは83.1 tok/s |
| 画像と音声 | ComfyUIはMacで動作 | 未測定 |
GPUなし、CPUのみ
| 用途 | わかっていること | 速度 |
|---|---|---|
| 文章 | モデルファイルのサイズ以上のRAMが必要(Gemma 4 E4Bは5-8 GB、Gemma 4 12B Q4は7 GB)。さらにコンテキスト用の余裕も必要 | CPUのみでは未測定 |
| 文章、モデルの一部をCPUで処理 | Qwen 3.8 27Bの66レイヤー中18レイヤーをCPUに配置 | 46 tok/sから8.4 tok/sに低下(Ollamaでの実測) |
| 音声 | 音声合成Piper(ポーランド語音声「gosia」で測定)はGPUなしで動作 | i9-14900KFで36秒の音声を5.8秒で生成 |
| 画像と動画 | 技術的には可能 | 未測定。実用上は遅すぎる |
同じモデルを異なる環境で比較
公平に比較するため、同じモデルLlama 2 7B Q4_0で128トークンを生成したllama.cppのベンチマークを使いました。NVIDIA GPUの値はFlash Attentionを使ったディスカッション#15013、Macの値はディスカッション#4167に基づきます。速度はGPUの価格ではなく、メモリ帯域幅に応じて上がります。
もうひとつの実測結果から、モデルがGPUメモリに収まらない場合、速度は数十パーセントではなく一桁以上低下することがわかります。同じQwen 3.8 27Bを小容量GPUのシミュレーションで比較しました。
目安として、量子化した文章モデルはファイルサイズに加えて、コンテキストの長さに応じた数GBの余裕が必要です。モデルがVRAMに収まるかどうかで、速度は桁違いに変わります。
10分でローカルAIを始める方法
10分というのはインストールと初回起動にかかる時間です。モデルのダウンロード時間は通信環境によって変わります。Gemma 4 31B(18 GB)は私の環境で40分、軽量なGemma 4 12B(7 GB)は高速なインターネットで数分かかりました。
Ollama - ターミナルで文章生成
- ollama.comからインストーラーをダウンロードしてインストールします(Windows、macOS、Linux)。
- PowerShellまたはターミナルを開き、
ollama run gemma4:12bと入力します。モデルがダウンロードされ、そのままチャット画面が開きます。 ollama psを実行して、すべての処理がGPU上で行われているか確認します。「PROCESSOR」列が「100% GPU」になっている必要があります。--verboseフラグを追加すると、「eval rate」の行で速度を確認できます。
OllamaをRTX 4090で使った別の検証はbasal-omniをローカルで実行する方法にあります。
LM Studio - ウィンドウで文章生成
- lmstudio.aiからLM Studioをダウンロードしてインストールします。アカウントは不要です。
- 検索タブで「gemma 4 12b」などのモデル名を入力し、Q4版を選びます。使っているGPUに収まるモデルをプログラムが提案します。
- 「Load」をクリックしてチャットで入力します。データはすべてPC内にとどまります。
ComfyUI - 画像と動画の生成
- instaluj-comfyui.ps1を実行します。GPUに合ったPyTorchを含むComfyUIをインストールし、Z-Image Turboをダウンロードするスクリプトです。
- ComfyUIが表示するアドレスをブラウザーで開きます。初期設定では127.0.0.1:8188です。
- Z-Image Turboのテンプレートを選び、指示を入力して「Run」をクリックします。初回はモデルをディスクから読み込むため、画像生成に時間がかかります。
ComfyUIを直接触らずに画像・動画モデルを入れたい場合は、無料ツールのHangarも使えます。
オープンモデルのランキング(2026年10月)
このランキングは、Artificial Analysis(AA)の独立したベンチマークと、私がポーランド語で行ったテストを並べたものです。AAは主に英語で評価しています。日本語での性能は、どちらも測っていません。
文章生成
| モデル | 結果 | GPU 1枚、24 GBで動くか |
|---|---|---|
| MiMo-V2.6-Pro(Xiaomi)、1兆パラメーター | AAで46点 | 不可 |
| GLM-5.3 Max(Z AI)、7530億パラメーター | AAで45点 | 不可 |
| Kimi K3 Max(Moonshot)、2.8兆パラメーター | AAで44点 | 不可 |
| GLM-5.3 Flash(Z AI)、3200億パラメーター | AAで42点 | 不可 |
| DeepSeek V4.1 Flash、5520億パラメーター | AAで39点 | 不可 |
| Qwen 3.8 27B(Alibaba) | AAで34点。私のポーランド語テストでは72.2点 | 可能、17 GB |
| Gemma 4 31B(Google) | AAのランキング対象外。私のポーランド語テストでは9.5/10 | 可能、19.2 GB |
| Gemma 4 12B(Google) | AAのランキング対象外。私のポーランド語テストでは72.3点 | 可能、8 GB |
AA:Intelligence Index v4.3.2、オープンウェイトモデルのランキング。2026年10月9日確認。上位モデルはサーバー向けで、上位6モデルのうち一般向けGPU 1枚で動かせるのはQwen 3.8 27Bのみです。一般的なPCで動くモデルのうち、私のポーランド語テストで最も評価が高かったのはGemma 4(31Bと12B)でした。
画像生成
| モデル | 結果 | ライセンス |
|---|---|---|
| Qwen-Image-2.1(Alibaba) | AAで1034 Elo。私の環境では1枚6.5秒 | 非商用のみ |
| Ideogram 4.0(Quality) | AAで1011 Elo | 非商用 |
| FLUX.2 [dev](Black Forest Labs) | AAで1000 Elo | 非商用 |
| Qwen-Image-2512(Alibaba) | AAで999 Elo | Apache 2.0 |
| Z-Image Turbo(Tongyi-MAI) | AAで941 Elo。私の環境では1枚4.2秒 | Apache 2.0 |
AAのランキングは2026年10月2日時点。
音声
| モデル | 結果 | ライセンス |
|---|---|---|
| XTTS v2(音声合成) | 私の発音テストで10/15点 | 非商用 |
| Piper、音声gosia(音声合成) | 私のテストで6/15点 | エンジンはGPL-3.0、音声データはモデルカードを参照 |
| Chatterbox Multilingual(音声合成) | 私のテストで4/15点。数字を読み上げられない | MIT |
| Whisper large-v3(音声認識) | AAで単語誤り率4.1-10.1%。提供元によって異なる | MIT |
| Voxtral Small 24B(音声認識) | AAで単語誤り率2.8%。オープンモデルで最高 | Apache 2.0。ただしポーランド語には非対応 |
音声合成は2026年10月8日、同じポーランド語の文章でテストしました。クラウドサービスの最高評価はEleven v4の15/15点でした。音声認識のAAランキングは2026年10月9日確認で、英語の録音における誤りを測定しています。モデルカードによると、Voxtral Smallは対応言語にポーランド語がなく、約55 GBのGPUメモリーが必要です。自宅のPCで動かせる多言語の音声認識なら、Whisper large-v3が現実的な選択肢です。
10月に重みが公開された大型モデル
StepFunは2026年10月15日、Step 5 Previewの重み(BF16とFP8)をHugging Faceで公開しました。総パラメーター6000億(アクティブ270億)、コンテキスト100万トークンのモデルで、一般向けのGPU 1枚には到底収まりません。ほかのオープンウェイトの大型モデルとの比較はオープンウェイトAIモデル比較にまとめています。PCで動かせる10月の新作(Kandinsky 6.0、FLUX 3 Klein、Qwen-Image 2.1 Turbo、YuE2)はローカルAIモデル新作まとめで検証しました。
ローカルAIを動かすソフト
- LM Studio - モデル検索機能付きのGUIアプリ。文章モデルを手軽に始められます。
- Ollama - ターミナルで文章モデルを実行できる、シンプルなAPIサーバー。自動化にもよく使われます。
- llama.cpp - 上記2つの基盤となるエンジン。細かく制御でき、ブラウザー上のチャットも利用できます。NVIDIA GPUではCUDA版がおすすめです。私の環境ではVulkan版は1.9-2.6倍遅くなりました。
- ComfyUI - 画像と動画を生成するソフト。ノードをつないで操作し、新しいモデル向けのテンプレートやスクリプトによる制御も利用できます。
ダウンロードできるスクリプト
各ガイド用に用意したスクリプトは、2026年9月26日にWindows 11とRTX 4090で動作確認しています。コメント付きのコード全文は各記事に掲載しています。ライセンスはMITです。5つのスクリプトをまとめたZIPファイル(15 KB)もダウンロードできます。
- instaluj-llama-cpp.ps1(5 KB)- CUDA版またはVulkan版のllama.cpp、Gemma 4 12B、起動用ファイルをインストールします。
- instaluj-comfyui.ps1(6 KB)- GPUに合ったPyTorchを含むComfyUIと、Z-Image Turbo、Wan 2.2をインストールします。
- generuj-obrazy.py(6 KB)- 指示のリストから画像を連続生成し、処理時間を記録します。解説。
- generuj-wideo.py(6 KB)- Wan 2.2でMP4動画を生成します。解説。
- zmierz-model.py(6 KB)- モデルの速度、GPUメモリ、電力コストを測定します。解説。
ローカルAIは安い?電気代は小さく、GPU代が大きい
Gemma 4 12Bで13件の課題を処理したときのGPUの消費電力量は合計0.004 kWh、Z-Imageの画像1枚は約0.0004 kWhでした。電気代そのものはごくわずかですが、GPUの購入費を回収するには数百時間の利用が必要です。また、最も安いAPIのほうが文章生成の品質は高いという結果でした。ローカルAIの主な利点はプライバシーです。データがPCの外に出ません。詳しい比較はローカルモデルとAPIの比較をご覧ください。
よくある質問
8 GBのGPUで動くAIモデルは?
Gemma 4 E4Bは全体で5.4-6.1 GBのため、メモリに収まります。Gemma 4 12B Q4はほぼ収まり、8 GBのシミュレーションでは48レイヤー中45レイヤーをGPUに配置して48 tok/sでした。より大きなモデルをGPUとCPUに分けると、速度は毎秒数トークンまで落ちます。
ローカルAIはMacで使えますか?
はい。Ollama、LM Studio、ComfyUIにはmacOS版があります。Macでの実測はしていません。llama.cppのベンチマークによると、小型の7BモデルはM4で約24 tok/s、M4 Proで約51 tok/s、M4 Maxで約83 tok/sです。32 GBのMacでは、私の環境で17-19 GBを使うQwen 3.8 27BやGemma 4 31Bなどのモデルが収まります。
GPUなしでローカルAIを動かせますか?
小型の文章モデルと音声合成ソフトPiperは、CPUだけでも動作します。CPUのみの文章生成速度は測定していません。私の環境ではQwenの66レイヤー中18レイヤーだけがCPUに割り当てられた際、速度が46 tok/sから8.4 tok/sに低下しました。GPUなしでの画像や動画生成は、実用上遅すぎます。
ローカルAIはインターネット接続なしで使えますか?
はい。モデルをダウンロードした後は、LM Studio、Ollama、llama.cpp、ComfyUIを完全にオフラインで使えます。入力内容やファイルがPCの外に出ることもありません。
日本語に強いローカルモデルはどれですか?
このページの文章テストはポーランド語で行ったため、日本語の順位は分かりません。日本語で使う場合も、まずGemma 4 12Bのような軽いモデルを入れ、同じ質問を何問か試して比べるのが確実です。
情報源と確認日
- RTX 4090 24 GBでの実測(Windows 11、i9-14900KF、RAM 64 GB):文章モデルは2026年9月26日(llama.cpp b11194 CUDA)、8・12・16 GB GPUのシミュレーションは2026年10月3日(Ollama 0.35.1)、Gemma 4 31Bは2026年10月8日(Ollama 0.40.1)、画像と動画は2026年9月26日(ComfyUI 0.37)、音声合成は2026年10月8日。
- Artificial Analysis - オープンウェイトモデル(Intelligence Index v4.3.2)、2026年10月9日確認。
- Artificial Analysis - 音声認識、2026年10月9日確認。画像ランキングは2026年10月2日時点。
- NVIDIA GPUでのllama.cpp、ディスカッション#15013、Apple Siliconでのllama.cpp、ディスカッション#4167(Llama 2 7B Q4_0)、2026年10月9日確認。
- Z-Image Turboのモデルカード(16 GB、Apache 2.0)、Voxtral Small 24B(対応言語、55 GB)、2026年10月9日確認。
- MarkTechPost:StepFun Releases Step 5 Preview Open Weights(2026年10月16日)
- Hugging Face:stepfun-ai
ランキングとベンチマークの数値は2026年10月9日時点。2026年10月30日に確認。


