搜“DeepSeek 本地部署要多少显存”,出来的多是对照表:这张卡跑 8B,那张卡跑 14B。表没错,可换一个量化版本、换一张表里没列的卡,就又不会算了。其实有条乘法可以自己估:显存占用约等于参数量乘量化位数,再除以八。
这篇把公式拆开讲清楚,代入 DeepSeek 各档验算一遍。不想算也有兜底:「软领DS一键本地部署大师」的模型广场会识别你的 CPU、内存和显卡,模型卡片直接标显存要求,打开仅兼容筛选,列表里剩下的都是能跑的。
公式本体:参数量 × 量化位 ÷ 8
模型文件里装的就是一大堆数字,行话叫权重。参数量是数字的个数,量化位数是每个数字占几个比特。8 比特等于 1 字节,除以八就把比特换算成了字节。单位也巧:参数量按十亿(B)计,算出来的结果正好落在 GB 上。
拿 DeepSeek R1 8B 举例。Q4 量化是每个参数占 4 比特,8 × 4 ÷ 8 = 4,权重约 4GB。同一个模型按 FP16 跑,8 × 16 ÷ 8 = 16,一下就要 16GB。位数砍到四分之一,显存需求跟着砍到四分之一,量化版能进家用电脑,道理就在这。
权重之外还有两笔开销。一是对话时的上下文缓存,聊得越长占得越多;二是系统和驱动的固定占用。毛估的做法是在权重数上再加两成:8B 的 Q4 算出 4GB,按 5GB 准备,和实际下载包的表现基本对得上。
代入 DeepSeek 各档验算一遍
常见下载包大多是 Q4 档,每个参数按 0.5 字节算就行。把 DeepSeek 蒸馏系列挨个代进公式,得到的数和市面显卡一对照,选型的答案自己就出来了。
| 档位 | Q4 权重(公式) | 留余量后 | 显卡参考 |
|---|---|---|---|
| 1.5B | 1.5×4÷8 ≈ 0.8GB | 1GB 出头 | 2G 显存的老卡也能试 |
| 8B | 8×4÷8 = 4GB | 5GB 上下 | 8G 卡(3050、4060 这一档) |
| 14B | 14×4÷8 = 7GB | 9GB 上下 | 12G 卡起步 |
| 32B | 32×4÷8 = 16GB | 20GB 上下 | 24G 卡(3090、4090) |
| 70B | 70×4÷8 = 35GB | 40GB 以上 | 单张消费级显卡装不下 |
判断标准就一条:留完余量的数小于显存容量,模型整卡加载,速度正常;超了就要借系统内存,能出字,但速度掉一个台阶。8G 卡的推荐档停在 8B、12G 卡敢摸 14B,背后都是这笔账。
量化位数换了,公式照用。同一个 8B,位数从 16 降到 4,需求从 16GB 缩到 4GB,中间隔着好几个显卡价位。
注意边界
公式管的是蒸馏加量化的档位。671B 满血版代进去,Q4 也要 300GB 级显存,那是多卡服务器的话题,家用电脑别硬套。另外不同量化版本的实际体积有出入,公式是毛估,最终以软件里模型卡片标注的显存要求为准。
算完之后,部署这步不用手算
公式的价值在买卡和选档时心里有数。真到部署那一步,「DS一键部署大师」会替你把关:软件识别本机的 CPU、内存和显卡,模型卡片上标着显存要求,和你手算的数对一对,差不多就可以点部署。全程不用自己装 Ollama,也不用敲命令。
部署步骤
- 下载安装「DS一键部署大师」,打开进「模型」页面。
- 页面提示模型服务未安装的话,按提示装好,下载、解压、启动都由软件处理。
- 打开“仅兼容”,列表里剩下的就是当前配置能跑的模型。
- 对照卡片标的显存要求,选一个和你公式估算相符的档位。
- 点部署等下载完成,模型默认存在
C:\ds-deploy,中断了可以续传。 - 切到「对话」页面,选已部署的模型开始用。

要是卡片标的数和你算的对不上,先信卡片。它按的是实际包体积,公式只是毛估。
大家常问
公式算出来的数和模型卡片标的不一样,听谁的
听卡片的。公式按标准位数毛估,实际下载包的量化方式有差别,体积会浮动。公式适合提前判断该买多大显存的卡,部署时以软件界面标注为准。
量化到 4bit,模型会不会变傻
有损失,但日常问答、翻译、写代码这类任务感知不明显。显存充裕可以选位数更高的版本;显存紧张时,能流畅跑的 Q4 比卡顿的高精度实用。
显存不够,拿内存凑行不行
能跑,不好用。超出显存的部分挪到内存里算,出字速度明显下降,短问题还能忍,长回答要等很久。按公式选装得进显存的档位,体验好得多。
完全不想算,有没有更省事的办法
有。打开「DS一键部署大师」的仅兼容筛选,模型广场只显示当前硬件能部署的模型,从推荐里挑一个就行,显存这笔账软件替你算好了。
671B 满血版按公式要多少显存
Q4 量化代进公式约 335GB,再留余量就奔 400GB 去了,只有多卡服务器有这种配置。家用电脑看 8B、14B 这些蒸馏档更实际。

提示