Local LLM Wiki
モデル

Tiel-Coder-35B-A3B-GGUFの公開

Ornith-1.5-35B-A3Bをベースにした動的量子化GGUFモデル「peculiar-ragdoll/Tiel-Coder-35B-A3B-GGUF」が公開されました。Hugging Face上で多数のダウンロードと高い評価を獲得しています。

根拠公式モデルカード/配布ページ
作成方法AIによる要約補助を使用
検証範囲実機での速度・品質・互換性は未検証です。
ローカル利用者への判断
プログラミングやエージェント用途に特化した大規模なGGUFモデルであり、ローカル環境での高度なコード生成や推論の検証に有用です。

何が公開された?

Hugging Face上の「peculiar-ragdoll/Tiel-Coder-35B-A3B-GGUF」が更新されています。確認時点の指標は downloads=282,068、likes=246 です。

モデルの特徴

元モデルは ornith-ai/Ornith-1.5-35B-A3B。用途タグは image-text-to-text。

量子化・ファイル構成

ファイル名から判別できた量子化は BF16, Q2_K_XL, IQ3_XXS, Q3_K_XL, IQ4_XS, Q4_K_S, Q4_K_XL, Q5_K_XL, Q6_K_XL, Q8_K_XL。GGUFファイルは 12 件確認できました。

どんなPCなら使えそう?

確認できたGGUFのファイル容量は 183.3 MB〜35.8 GB。実際の推論ではKVキャッシュ等も必要なため、VRAM/RAMには追加の余裕が必要です。

LM Studio / llama.cppで使える?

GGUF形式はllama.cpp系ランタイムで利用されます。ただし新しいアーキテクチャではランタイム側の対応が必要なため、LM Studio / llama.cppの対応状況を確認してください。

注意点

コンテキスト長をconfig/APIから確定できませんでした。

主な仕様

モデルIDpeculiar-ragdoll/Tiel-Coder-35B-A3B-GGUF
配布者peculiar-ragdoll
元モデルornith-ai/Ornith-1.5-35B-A3B
ライセンスmit
アーキテクチャ情報不足
コンテキスト長情報不足
用途タグimage-text-to-text
Downloads282,068
Likes246
量子化BF16, Q2_K_XL, IQ3_XXS, Q3_K_XL, IQ4_XS, Q4_K_S, Q4_K_XL, Q5_K_XL, Q6_K_XL, Q8_K_XL

推奨量子化

一般的なGGUF選択の目安であり、モデル固有の品質保証ではありません。

バランス重視Q4_K_S (19.5 GB)
品質重視情報不足
省メモリ重視IQ4_XS (16.5 GB)

必要メモリ目安

モデルファイル容量を基準にした概算です。コンテキスト長などで必要量は変わります。

基準量子化Q4_K_S
モデルファイル容量19.46 GiB
最低RAM目安24.5 GiB
推奨RAM目安30.5 GiB
フルGPUオフロード時VRAM目安23.5 GiB

対応ランタイム

ランタイム判定根拠
llama.cpp明示ありモデルカードまたはタグ内にllama.cpp関連記載があります。
LM Studio互換候補GGUFを扱えますが、新しいアーキテクチャではLM Studio側の対応確認が必要です。
Ollamaインポート候補GGUFを取り込める場合がありますが、モデルアーキテクチャとテンプレートの対応確認が必要です。
KoboldCpp互換候補GGUF系ランタイムですが、アーキテクチャ対応状況の確認が必要です。

用途評価

用途評価根拠
チャット高モデル名・タグ・モデルカードにチャット/Instruction系の手掛かりがあります。
コーディング高コード生成・Coder系の記載があります。
推論・数学高Reasoning/Thinking/Math系の記載があります。
日本語情報不足日本語対応を直接裏付ける情報を取得できませんでした。
ツール利用・エージェント高Tool/Function CallingまたはAgent系の記載があります。
画像理解・マルチモーダル高Vision/Multimodal系の記載があります。

GGUFファイル

量子化ファイル容量
Tiel-Coder-35B-A3B.imatrix.gguf183.3 MB
BF16mmproj-BF16.gguf861.0 MB
mtp-Tiel-Coder-35B-A3B.gguf1.4 GB
Q2_K_XLTiel-Coder-35B-A3B-UD-Q2_K_XL.gguf11.4 GB
IQ3_XXSTiel-Coder-35B-A3B-UD-IQ3_XXS.gguf12.3 GB
Q3_K_XLTiel-Coder-35B-A3B-UD-Q3_K_XL.gguf15.7 GB
IQ4_XSTiel-Coder-35B-A3B-UD-IQ4_XS.gguf16.5 GB
Q4_K_STiel-Coder-35B-A3B-UD-Q4_K_S.gguf19.5 GB
Q4_K_XLTiel-Coder-35B-A3B-UD-Q4_K_XL.gguf20.8 GB
Q5_K_XLTiel-Coder-35B-A3B-UD-Q5_K_XL.gguf24.8 GB
Q6_K_XLTiel-Coder-35B-A3B-UD-Q6_K_XL.gguf29.7 GB
Q8_K_XLTiel-Coder-35B-A3B-UD-Q8_K_XL.gguf35.8 GB

発表・更新の内容

本モデルはMITライセンスの下で公開され、BF16から各種IQ/Qquantization(Q4_K_Sなど)までの幅広い量子化フォーマットが用意されています。推奨量子化であるQ4_K_Sでのモデルファイルサイズは約19.46 GiBとなっており、実行時には十分なシステムRAMおよびVRAMの確保が必要です。

タグ

GGUFHugging Faceggufllama.cppqwen35moemoeimatrixunsloth-dynamicagentic-codingtoken-efficient

この記事は一次情報を日本語で整理したものです。開発元が公表した性能値は独立検証済みとは限りません。導入・購入・ライセンス判断の前に、リンク先の最新版も確認してください。

関連記事