NVIDIA RTX PRO 5000 Blackwell 48G(工作站):能跑什么模型
48GB GDDR7 ECC / 384-bit / 1344GB/s / 300W。官方口径「48 GB of GPU memory and 1.3 TB/s bandwidth」。对本站读者:48G 单卡 ≈ 32B Q4 全驻留档,是「不魔改也能跑 32B」的工作站方案;2026 年初另有 72GB 版本(同带宽同核心,仅容量不同)。零售渠道可买(Dell/PNY/BestBuy),不是只有数据中心的卡。
一、这张卡能装下哪些模型
能装 / 装不下是推算,不是实测;点开一行是这个模型的完整文章。带测试环境的真机数字在第三节。
二、多少 G 显存开多少 K 上下文
行是量化档,列是上下文档位,格子里是「总需显存 / 估算 tok/s」。这张表回答的是「开到 32K、40K 还剩多少」这类问题。默认展开Qwen3-32B;换别的模型看同一张卡,选一下即可。
· Qwen3-32B,模型原生上下文上限 40960 token| 量化 | 4K | 8K | 16K | 32K | 40K | 64K | 128K | 最多可开 |
|---|---|---|---|---|---|---|---|---|
| Q8_0 34G | 36G 23–32 | 37G 22–31 | 39G 21–29 | 43G 混跑 | 45G 混跑 | 51G 混跑† | 67G 混跑† | 29184 token(显存) |
| Q6_K 26.2G | 28.2G 29–41 | 29.2G 28–39 | 31.2G 26–36 | 35.2G 22–30 | 37.2G 20–28 | 43.2G 混跑† | 59.2G 混跑† | 40960 token(模型原生上限) |
| Q5_K_M 22.4G | 24.4G 34–48 | 25.4G 32–45 | 27.4G 29–41 | 31.4G 24–34 | 33.4G 23–31 | 39.4G 18–25† | 55.4G 混跑† | 40960 token(模型原生上限) |
| Q4_K_M 19.2G | 21.2G 39–55 | 22.2G 37–52 | 24.2G 33–46 | 28.2G 27–37 | 30.2G 25–34 | 36.2G 20–27† | 52.2G 混跑† | 40960 token(模型原生上限) |
| IQ4_XS 17G | 19G 44–62 | 20G 41–58 | 22G 36–50 | 26G 29–40 | 28G 27–37 | 34G 21–29† | 50G 混跑† | 40960 token(模型原生上限) |
| IQ3_K 14G | 16G 53–74 | 17G 48–68 | 19G 42–58 | 23G 33–45 | 25G 30–41 | 31G 23–31† | 47G 混跑† | 40960 token(模型原生上限) |
| IQ3_XXS 12.1G | 14.1G 60–85 | 15.1G 55–77 | 17.1G 46–64 | 21.1G 35–49 | 23.1G 32–44 | 29.1G 24–33† | 45.1G 混跑† | 40960 token(模型原生上限) |
格子里上行是总需显存(权重 + 该上下文的 KV + 1G 框架开销),下行是单流 decode 估算 tok/s;「混跑」表示超出显存、要靠内存放层,速度会明显低于同容量的全显存方案。带 † 的列超出该模型原生上下文,属于 rope/yarn 超纲使用,质量不保证。全部为推算,非实测。
三、别人测的 NVIDIA RTX PRO 5000 Blackwell 48G(工作站) 速度(他测汇总)
本卡行情(整卡价)
本卡暂无可核对出处的整卡价快照。语料里出现过的价格必须带作者、链接、发布日期才入库, 没有就空着——价格是最容易过期、也最容易被编的字段。
同档显存的其它卡
手上有 48G 卡就点自己的型号;一行一张卡,点开就是那张卡的结论页。
规格与数据来源
上面的显存、带宽、架构数字来自下面这些页面;口径说明逐条附后。没有可核对出处的字段,本站留空,不填一个编出来的数。
口径:48 GB GDDR7 with ECC / 1344 GB/s(官方 datasheet 原文「48 GB of GPU memory and 1.3 TB/s bandwidth」)/ 300W 逐字来自 NVIDIA 官方 RTX PRO 5000 Blackwell 产品页与 datasheet(2026-11-08 抓取)。官方 Quick Specs 另列 72GB 配置(同带宽同核心数),本条为 48G 版。