モデル紹介
FP8 dynamic quantization of huihui-ai/Huihui-Qwen3.6-35B-A3B-abliterated, produced for inference on **NVIDIA DGX Spark (GB10, SM121)** under its 128 GB unified-memory budget. This is **the clean abliteration variant** quantized to FP8, distinct from existing Claude-distilled variants on the Hub. Uses llm-compressor `FP8_DYNAMIC` scheme + compressed-tensors `float-quantized` format. > ### ⚠️ Vision pipeline fix (2026-05-03) > > Pre-2026-05-03 uploads of this checkpoint had **broken vision input** — the model would emit `!!!!!` token loops on any image. Root cause: vLLM (≤0.20.0) expects vision tensor keys at `visual.*`, but `Qwen3_5MoeForConditionalGeneration` saves them under `model.language_model.visual.*`, so all 333 vision-tower tensors got silently skipped during load. > > **This is now fixed**: shard 19 + `model.safetensors.index.json` re-uploaded with the visual prefix stripped. Text-only output is unaffected. > > If you cloned the model before 2026-05-03, the cleanest path is `huggingface_hub.snapshot_download(..., force_download=True, allow_patterns=["model-00019-of-00019.safetensors", "model.safetensors.index.json"])` — only ~600 MB of changed weights. > > Diagnosis + remap script: see `remap_visual_path.py` in this repo.
主な特徴
特点摘要待依据来源补齐，不凭模型名称推断能力。
制約と注意点
具体的な制約を判断する出典が不足しています。実際の性能、遅延、データ方針、ライセンス、提供期間を確認してください。
出典別料金と費用分析
料金はチャネル・地域・設定によって異なります。各チャネルの料金は個別に表示し、提供元の統一公式料金とは見なしません。
| 出典・チャネル | 入力 | 出力 | 課金単位 | 収集日時 |
|---|---|---|---|---|
| 確認可能な料金がありません。出典を確認してください。 | ||||
月額の基本トークン費用を試算
試算はキャッシュ割引、段階料金、マルチモーダル追加料金、検索、税金、追加推論出力を含みません。
公開評価と実行設定
暂无已采集的可核验公开评分。模型未上榜不代表能力较低。
収録済みの全ランキング →よくある質問
オープンウェイトなら無料で商用利用できますか？
必ずしもそうではありません。バージョン別のライセンス、商用条件、利用方針を確認してください。自前運用には計算資源と保守費用も必要です。
これはリアルタイムの請求料金ですか？
収集日時付きの料金スナップショットです。最新のバージョン、地域、割引、課金方式は各チャネルで確認してください。
出典と追跡記録
许可证：apache-2.0。模型介绍与第三方评测均以原来源的具体版本和方法为准。