先说我的结论
这两年「把大模型搬回家」的声音特别多,标配叙事是:买两张卡,从此免费无限用。我自己的判断恰恰相反——对大多数个人和小团队来说,第一反应不应该是买显卡,而是先算清楚「调 API 到底要花多少」。
这不是劝退本地部署,而是不想让你在没想清楚之前,就把几万块压在一台 7×24 才划算的机器上。下面是我自己的测算逻辑,所有单价都来自 2026 年公开的渠道/官网口径,测算部分会明确标出假设,你可以直接套自己的数。
为什么这股热情容易让人算错账
「本地部署」话题里最常见的起手式是:这个模型要多少显存、买哪张卡。但账本远不止显卡。一台能稳定跑 20B~30B 量级开源模型的双卡机器,后面还挂着三笔持续支出:电费、机房/托管、还有最容易被低估的——你自己的时间。
更关键的是,很多人把「买断硬件」当成了成本的终点,却没和另一条路比过价:直接调商用 API。2026 年的 API 价格,已经低到让「自建一定更省」这个直觉站不住脚了。
先把 API 的账算清楚
我查了一圈 2026 年国内主流平台的公开单价(元 / 每百万 tokens,输入 / 输出),结论是:同量级的开源模型,走 API 便宜得惊人。
| 模型 / 平台 | 输入 | 输出 | 备注 |
|---|---|---|---|
| Qwen3-30B-A3B(阿里百炼) | 1 元 | 4 元 | 30B 级 MoE,性价比代表 |
| Qwen3-8B(阿里百炼) | 0.5 元 | 2 元 | 轻量场景够用 |
| DeepSeek V4-Flash(硅基流动) | 1 元 | 2 元 | 闲时更低,官方高峰翻倍 |
| doubao-seed 2.0-pro(火山方舟) | 3.2 元 | 16 元 | 字节生态 |
口径说明:以上为 2026-08 前后各平台官网公开价,同一模型在不同渠道价差可达数倍(比如 DeepSeek V4-Flash 官方高峰输出 9 元,硅基流动只要 2 元),调用前以官网实时价为准。免费额度(百炼新用户数千万 token、硅基流动代金券等)通常足够把原型跑通,等于前期几乎零成本。
拿 Qwen3-30B-A3B 算一笔日常账:一轮对话大约 3K 输入 + 1K 输出,成本是 0.003 + 0.004 = 0.007 元 / 轮。一个月 10 万轮对话,API 账单大约 700 元。这个量级,对绝大多数个人项目和小团队都绰绰有余。
我自己的盈亏平衡测算
那自建到底要跑多少才回本?下面是我给自己做的粗略模型,每一步假设都写出来,你可以替换成自己的情况。核心思路:把一次性硬件摊到每月,再加持续支出,得到「自建每月真实成本」,然后看 API 要调用多少轮才追平。
假设场景:双卡跑 20B~30B 开源模型(参考 L20 48GB 方案)
【一次性硬件】
2 × L20 48GB ≈ 60,000 元(渠道价 ~3 万/张,2026-09 口径)
服务器整机 ≈ 25,000 元(CPU/内存/SSD/电源/机箱)
小计 ≈ 85,000 元
按 3 年摊销 ≈ 2,360 元 / 月
【持续支出 / 月】
电费 1kW × 24h × 365 × 0.8 元/度 ÷ 12 ≈ 584 元
IDC 托管(含电/带宽,约 1~2U) ≈ 800 元
运维(你的时间,保守 4h/月折算) ≈ 1,000 元
【自建每月真实成本】≈ 2,360 + 584 + 800 + 1,000 ≈ 4,744 元
【对比 API】
Qwen3-30B-A3B:0.007 元 / 轮
盈亏平衡 ≈ 4,744 ÷ 0.007 ≈ 677,000 轮 / 月
≈ 22,500 轮 / 天
结论:日均不到两万多轮对话,调 API 比自建更划算。
补充一条常被忽略的路:不想一次性掏钱,也可以租云 GPU。2026 年云上 L20 大约 3.5~3.7 元 / 卡·时,双卡 24 小时跑满一个月 ≈ 5,000 元,和上面「自建每月成本」接近,但零首付、随时退。也就是说,在没跨过盈亏平衡线之前,租比买更灵活,调 API 比租更轻。
那什么情况下才值得自建
我不是反对自建,是反对「为了省钱」而自建。以下几种情况,我会认真考虑把模型搬回家:
- 数据出不了内网:医疗、金融、企业内部敏感文档,合规要求数据不能出域,这时候 API 再便宜也没法用。
- 稳定高负载:日均对话量确实能长期顶到几万轮以上,或者要做大规模批处理,自建的边际成本才摊得薄。
- 要改模型本身:微调、合并权重、跑自定义推理栈,只有拿到权重自己部署才灵活。
- 离线 / 弱网环境:现场设备、内网隔离场景,没有可调用的云。
反过来,下面这些情况我建议先别买卡:只是想接个聊天/摘要/RAG 到自己的小产品里、调用量波动大、团队里没人愿意长期背运维、或者还没验证需求是否成立。这些场景下,API 的「用多少付多少」刚好帮你把风险压到最低。
我给自己定的决策顺序
以后再有「要不要本地部署」的念头,我按这个顺序走,省得冲动消费:
- 先用免费额度和按量 API 把产品跑起来,验证需求。
- 记录真实月调用量和峰值并发,估算盈亏平衡线。
- 跨过平衡线、或撞上隐私/离线硬约束,再评估自建或长租。
- 真要买,才去比显卡渠道价、整机方案和电费托管。
一句话:2026 年调 API 已经便宜到让「自建=省钱」的直觉失效。把显卡当成「能力选项」而不是「省钱选项」,决策会清醒很多。上面的数字都是可替换的模型,别照抄结论——把你自己的电价、时薪、调用量填进去,才算你自己的账。