Qwen2-VL-72B
72B·VLM·进阶
预估硬件成本
¥8.80万
72B进阶部署装机4× RTX 4090·96 GB 总显存
vLLM · INT4
硬件配置
- GPU 型号
- 4× RTX 4090
- 总显存
- 96 GB
- 内存
- 128 GB
- 存储
- 500 GB
- 量化方式
- INT4
- 推理引擎
- vLLM
性能与场景
- 生成速度
- 25 tokens/s
- 适用场景
- 图文理解/文档分析
- 部署难度
- 进阶
- 数据来源
- 🟢 实测参考
- 测试环境
- 4x RTX 4090 96GB 总显存 · vLLM INT4
4 卡 4090 + INT4 量化，支持图文多模态理解。适合文档分析、图表理解、视觉问答等场景。