DeepSeek-V4-Flash-Vision-ExpのGGUF量子化モデルが公開
Unslothによる「DeepSeek-V4-Flash-Vision-Exp-GGUF」が公開されました。多様な量子化フォーマット（IQ4_XSやQ4_K_XLなど）が用意され、ローカル環境での実行に対応しています。
大規模なビジョン言語モデルであるDeepSeek-V4-Flash-Vision-Expを、多様な量子化によってローカル環境で試行できるようになります。
何が公開された？
Hugging Face上の「unsloth/DeepSeek-V4-Flash-Vision-Exp-GGUF」が更新されています。確認時点の指標は downloads=2,987、likes=62 です。
モデルの特徴
元モデルは deepseek-ai/DeepSeek-V4-Flash-Vision-Exp。
量子化・ファイル構成
ファイル名から判別できた量子化は Q4_K_XL, Q8_K_XL, IQ1_M, IQ1_S, IQ2_XXS, IQ3_S, IQ3_XXS, IQ4_XS, Q2_K_XL, Q3_K_XL, F16, BF16。GGUFファイルは 40 件確認できました。
どんなPCなら使えそう？
確認できたGGUFのファイル容量は 5.1 MB〜46.6 GB。実際の推論ではKVキャッシュ等も必要なため、VRAM/RAMには追加の余裕が必要です。
LM Studio / llama.cppで使える？
GGUF形式はllama.cpp系ランタイムで利用されます。ただし新しいアーキテクチャではランタイム側の対応が必要なため、LM Studio / llama.cppの対応状況を確認してください。
注意点
コンテキスト長をconfig/APIから確定できませんでした。
主な仕様
| モデルID | unsloth/DeepSeek-V4-Flash-Vision-Exp-GGUF |
|---|---|
| 配布者 | unsloth |
| 元モデル | deepseek-ai/DeepSeek-V4-Flash-Vision-Exp |
| ライセンス | mit |
| アーキテクチャ | 情報不足 |
| コンテキスト長 | 情報不足 |
| 用途タグ | 情報不足 |
| Downloads | 2,987 |
| Likes | 62 |
| 量子化 | Q4_K_XL, Q8_K_XL, IQ1_M, IQ1_S, IQ2_XXS, IQ3_S, IQ3_XXS, IQ4_XS, Q2_K_XL, Q3_K_XL, F16, BF16 |
推奨量子化
一般的なGGUF選択の目安であり、モデル固有の品質保証ではありません。
| バランス重視 | IQ4_XS (127.3 GB) |
|---|---|
| 品質重視 | 情報不足 |
| 省メモリ重視 | IQ4_XS (127.3 GB) |
必要メモリ目安
モデルファイル容量を基準にした概算です。コンテキスト長などで必要量は変わります。
| 基準量子化 | IQ4_XS |
|---|---|
| モデルファイル容量 | 127.28 GiB |
| 最低RAM目安 | 148.5 GiB |
| 推奨RAM目安 | 176.0 GiB |
| フルGPUオフロード時VRAM目安 | 147.5 GiB |
対応ランタイム
| ランタイム | 判定 | 根拠 |
|---|---|---|
| llama.cpp | 明示あり | モデルカードまたはタグ内にllama.cpp関連記載があります。 |
| LM Studio | 互換候補 | GGUFを扱えますが、新しいアーキテクチャではLM Studio側の対応確認が必要です。 |
| Ollama | インポート候補 | GGUFを取り込める場合がありますが、モデルアーキテクチャとテンプレートの対応確認が必要です。 |
| KoboldCpp | 互換候補 | GGUF系ランタイムですが、アーキテクチャ対応状況の確認が必要です。 |
| Transformers | 明示あり | モデルカードまたはタグ内に関連記載があります。 |
用途評価
| 用途 | 評価 | 根拠 |
|---|---|---|
| チャット | 高 | モデル名・タグ・モデルカードにチャット/Instruction系の手掛かりがあります。 |
| コーディング | 情報不足 | コード特化を示す明確な記載を取得できませんでした。 |
| 推論・数学 | 高 | Reasoning/Thinking/Math系の記載があります。 |
| 日本語 | 情報不足 | 日本語対応を直接裏付ける情報を取得できませんでした。 |
| ツール利用・エージェント | 高 | Tool/Function CallingまたはAgent系の記載があります。 |
| 画像理解・マルチモーダル | 高 | Vision/Multimodal系の記載があります。 |
GGUFファイル
| 量子化 | ファイル | 容量 |
|---|---|---|
| Q4_K_XL | UD-Q4_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q4_K_XL-00001-of-00005.gguf | 5.1 MB |
| Q8_K_XL | UD-Q8_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q8_K_XL-00001-of-00005.gguf | 5.1 MB |
| IQ1_M | UD-IQ1_M/DeepSeek-V4-Flash-Vision-Exp-UD-IQ1_M-00001-of-00003.gguf | 5.1 MB |
| IQ1_S | UD-IQ1_S/DeepSeek-V4-Flash-Vision-Exp-UD-IQ1_S-00001-of-00003.gguf | 5.1 MB |
| IQ2_XXS | UD-IQ2_XXS/DeepSeek-V4-Flash-Vision-Exp-UD-IQ2_XXS-00001-of-00003.gguf | 5.1 MB |
| IQ3_S | UD-IQ3_S/DeepSeek-V4-Flash-Vision-Exp-UD-IQ3_S-00001-of-00004.gguf | 5.1 MB |
| IQ3_XXS | UD-IQ3_XXS/DeepSeek-V4-Flash-Vision-Exp-UD-IQ3_XXS-00001-of-00004.gguf | 5.1 MB |
| IQ4_XS | UD-IQ4_XS/DeepSeek-V4-Flash-Vision-Exp-UD-IQ4_XS-00001-of-00004.gguf | 5.1 MB |
| Q2_K_XL | UD-Q2_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q2_K_XL-00001-of-00003.gguf | 5.1 MB |
| Q3_K_XL | UD-Q3_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q3_K_XL-00001-of-00004.gguf | 5.1 MB |
| F16 | mmproj-F16.gguf | 890.0 MB |
| BF16 | mmproj-BF16.gguf | 891.2 MB |
| IQ3_XXS | UD-IQ3_XXS/DeepSeek-V4-Flash-Vision-Exp-UD-IQ3_XXS-00004-of-00004.gguf | 3.8 GB |
| Q4_K_XL | UD-Q4_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q4_K_XL-00005-of-00005.gguf | 6.7 GB |
| Q8_K_XL | UD-Q8_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q8_K_XL-00005-of-00005.gguf | 12.6 GB |
| IQ3_S | UD-IQ3_S/DeepSeek-V4-Flash-Vision-Exp-UD-IQ3_S-00004-of-00004.gguf | 13.7 GB |
| Q3_K_XL | UD-Q3_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q3_K_XL-00004-of-00004.gguf | 27.3 GB |
| IQ1_S | UD-IQ1_S/DeepSeek-V4-Flash-Vision-Exp-UD-IQ1_S-00003-of-00003.gguf | 30.2 GB |
| IQ1_M | UD-IQ1_M/DeepSeek-V4-Flash-Vision-Exp-UD-IQ1_M-00003-of-00003.gguf | 34.9 GB |
| IQ4_XS | UD-IQ4_XS/DeepSeek-V4-Flash-Vision-Exp-UD-IQ4_XS-00004-of-00004.gguf | 35.0 GB |
| IQ2_XXS | UD-IQ2_XXS/DeepSeek-V4-Flash-Vision-Exp-UD-IQ2_XXS-00003-of-00003.gguf | 38.3 GB |
| Q2_K_XL | UD-Q2_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q2_K_XL-00003-of-00003.gguf | 44.1 GB |
| Q4_K_XL | UD-Q4_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q4_K_XL-00002-of-00005.gguf | 45.6 GB |
| Q4_K_XL | UD-Q4_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q4_K_XL-00003-of-00005.gguf | 45.6 GB |
| Q8_K_XL | UD-Q8_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q8_K_XL-00002-of-00005.gguf | 45.8 GB |
| Q3_K_XL | UD-Q3_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q3_K_XL-00002-of-00004.gguf | 46.0 GB |
| IQ1_M | UD-IQ1_M/DeepSeek-V4-Flash-Vision-Exp-UD-IQ1_M-00002-of-00003.gguf | 46.0 GB |
| IQ4_XS | UD-IQ4_XS/DeepSeek-V4-Flash-Vision-Exp-UD-IQ4_XS-00002-of-00004.gguf | 46.0 GB |
| Q2_K_XL | UD-Q2_K_XL/DeepSeek-V4-Flash-Vision-Exp-UD-Q2_K_XL-00002-of-00003.gguf | 46.0 GB |
| IQ3_XXS | UD-IQ3_XXS/DeepSeek-V4-Flash-Vision-Exp-UD-IQ3_XXS-00003-of-00004.gguf | 46.0 GB |
発表・更新の内容
deepseek-aiのDeepSeek-V4-Flash-Vision-ExpをベースとしたGGUF量子化モデルです。UnslothのDynamic 3.0量子化技術を活用し、IQシリーズやQシリーズなどの豊富な量子化バリエーションが提供されています。モデルファイルサイズは約127.28 GiB（推奨量子化IQ4_XS）となっており、実行には十分なシステムメモリとVRAMの確保が必要です。
タグ
GGUFHugging Facetransformersggufunslothdeepseeklicense:mitendpoints_compatibleregion:usimatrix
この記事は一次情報を日本語で整理したものです。開発元が公表した性能値は独立検証済みとは限りません。導入・購入・ライセンス判断の前に、リンク先の最新版も確認してください。