Qwen3-235B-A22B-Instruct-2507
235B/22B active·LLM·专家
预估硬件成本
¥42.00万
235B/22B active专家部署装机4× 4x A100 80GB·280 GB 总显存
vLLM/SGLang · FP8/GGUF Q4
硬件配置
- GPU 型号
- 4× 4x A100 80GB
- 总显存
- 280 GB
- 内存
- 128 GB
- 存储
- 470 GB
- 量化方式
- FP8/GGUF Q4
- 推理引擎
- vLLM/SGLang
性能与场景
- 生成速度
- 25 tokens/s
- 适用场景
- 旗舰推理/代码/数学
- 部署难度
- 专家
- 数据来源
- 🟢 实测参考
- 测试环境
- 4x 4x A100 80GB 280GB 总显存 · vLLM/SGLang FP8/GGUF Q4
阿里通义7月更新旗舰,MoE架构235B总参/22B激活。FP8需4卡A100,GGUF Q4可降至120GB显存。