TL;DR 直接答案:跑 7B 模型(Qwen2.5-7B、Llama-3-8B 这一档),推理选 RTX 3090 或 RTX 4090(24GB)就够,LoRA 微调建议 24GB 起步;按量租 ¥1.3~2.5/时,一天跑 4 小时成本不到 ¥10。别碰 A100——那是给 70B 模型准备的,你多花 5 倍钱用不满。
先搞清你要干嘛:推理还是微调
这是选卡的第一分叉口,搞错了要么跑不动、要么白花钱:
- 纯推理(加载现成模型问答/写代码):7B 模型 FP16 约 15GB 显存,INT8 量化后约 9GB,INT4 只要 5GB 左右。一张 24GB 消费卡绰绰有余,甚至 16GB 的 4080 也能跑量化版。
- LoRA 微调:模型本体 + 优化器状态 + 梯度,7B 全量微调要 60GB+,但 LoRA/QLoRA 只训练 1% 参数,24GB 能跑 QLoRA(4bit 加载),32GB 以上更稳。
- 全量微调/预训练:学生党基本不需要,真要做直接看 A100/H100 页面。
三个档位,对号入座
① 极致省钱档(¥1.3/时上下):RTX 3090。24GB 显存,推理 7B 飞快,QLoRA 微调也能跑。缺点是老卡功耗高、部分新框架优化少。学生作业、课程设计、论文复现首选。
② 均衡档(¥2/时上下):RTX 4090。比 3090 快 60%~80%,跑推理每分钟能多出近一倍 token。赶 deadline 就选它,省下的时间比多花的那几毛钱值钱。
③ 显存焦虑档(¥3~5/时):RTX 5090 32GB。模型想跑 FP16 不量化、或者 batch 开大点刷吞吐量,32GB 给你安全感。
当前各平台实时价格
| 平台 | 价格 ⇅ | 24小时 | 库存 | 计费说明 | |
|---|---|---|---|---|---|
| Salad(美国)批量地板价北美
稳定性 74·C |
¥0.65/时当前监测较低价实时竞价 | ¥16/天 | 充足 | Salad 分布式云最低优先级档 $0.090/hr 折算(24G,共4档,高档更稳定) | 去租用 |
| 晨涧云长租划算中国
稳定性 100·A |
¥0.80/时实时按量 | ¥19/天 | 充足 | 晨涧云官网包日价 ¥19.25/天 ÷24 折算(NVIDIA GeForce RTX 3090 24G),按量小时价可能略高 | 去租用 |
| Vast.ai(美国)全球地板价北美
稳定性 100·A |
¥0.87/时▲38.1%实时竞价 | ¥21/天 | 充足 | Vast.ai 实时竞价最低价折算(RTX 3090,USD×7.2),随时变动 | 去租用 |
| 智星云中国
数据积累中 5/30天 |
¥1.10/时实时按量 | ¥26/天 | 充足 | 智星云 AI Galaxy(中国)低价专区挂牌按量价 ¥1.1/小时(RTX 3090) | 去租用 |
| 优云智算现金返利中国
稳定性 100·A |
¥1.19/时实时按量 | ¥29/天 | 充足 | 优云智算按量计费最低配置 ¥1.19/小时(包日/包月/抢占式更低价见官网,高校企业95折) | 去租用 |
| AutoDL生态最全中国
稳定性 98·A |
¥1.56/时实时按量 | ¥37/天 | 充足 | AutoDL 按量计费最低价 ¥1.56/时(官网市场 RTX 3090,空闲卡 4) | 去租用 |
| RunPod(美国)海外人气王北美
稳定性 73·C |
¥1.58/时实时竞价 | ¥38/天 | 充足 | RunPod 社区云最低价 $0.22/hr 折算(NVIDIA GeForce RTX 3090;Secure Cloud $0.50/hr) | 去租用 |
| Featurize自由度最高中国
数据积累中 5/30天 |
¥1.62/时实时按量 | ¥39/天 | 充足 | Featurize(中国)官方挂牌按量价:RTX 3090 按量计费低至 ¥1.62/小时 | 去租用 |
| 矩池云标价竞争力中国
稳定性 100·A |
¥1.85/时实时按量 | ¥44/天 | 充足 | 矩池云按分钟计费 ¥1.85/小时(0 区,官网明码标价) | 去租用 |
| 并行智算云3090低价中国
数据积累中 1/30天 |
¥3.30/时▲233.3%实时按量 | ¥79/天 | 充足 | 并行智算云按量实时价 ¥3.30/时 | 去租用 |
| 算家云当前低价中国
稳定性 100·A |
¥1.20/时按量 | ¥29/天 | 充足 | 算家云官网标价 ¥1.20/小时(原价 ¥1.68);2026-10-30 国内出口实测,因新加坡出口不可达暂无法 45 分钟自动刷新,按参考价处理、不参与最低价排名 | 去租用 |
| TensorDock(美国)全球低价北美
人工维护 |
¥1.44/时参考价·待核实按量 | ¥35/天 | 充足 | 官方起价 $0.20×7.2;$5起充按秒计费 ⚠ 口径提示:本站价格取自官方「8 卡起租」报价口径,与其余平台的单卡按量价不完全可比,仅供参考 |
去租用 |
| 平台 | 价格 ⇅ | 24小时 | 库存 | 计费说明 | |
|---|---|---|---|---|---|
| Vast.ai(美国)全球地板价北美
稳定性 100·A |
¥0.87/时▼40.4%当前监测较低价实时竞价 | ¥21/天 | 充足 | Vast.ai 实时竞价最低价折算(RTX 4090,USD×7.2),随时变动 | 去租用 |
| Salad(美国)批量地板价北美
稳定性 74·C |
¥1.15/时实时竞价 | ¥28/天 | 充足 | Salad 分布式云最低优先级档 $0.160/hr 折算(24G,共4档,高档更稳定) | 去租用 |
| PPIO 派欧云国内Spot低价中国
稳定性 71·C |
¥1.16/时实时竞价 | ¥28/天 | 充足 | PPIO 派欧云 GPU Spot 价 ¥1.16/小时(4090,默认1小时保护期,提前1小时中断通知) | 去租用 |
| 算家云当前低价中国
稳定性 100·A |
¥1.24/时实时按量 | ¥30/天 | 充足 | 算家云官网标价 ¥1.24/小时(原价 ¥2.08,长期租用另有折上折) | 去租用 |
| 晨涧云长租划算中国
稳定性 100·A |
¥1.38/时实时按量 | ¥33/天 | 充足 | 晨涧云官网包日价 ¥33.01/天 ÷24 折算(NVIDIA GeForce RTX 4090 24G),按量小时价可能略高 | 去租用 |
| 智星云中国
数据积累中 5/30天 |
¥1.65/时实时按量 | ¥40/天 | 充足 | 智星云 AI Galaxy(中国)低价专区挂牌按量价 ¥1.65/小时(RTX 4090 24G) | 去租用 |
| 优云智算现金返利中国
稳定性 100·A |
¥1.92/时实时按量 | ¥46/天 | 充足 | 优云智算按量计费最低配置 ¥1.92/小时(包日/包月/抢占式更低价见官网,高校企业95折) | 去租用 |
| AutoDL生态最全中国
稳定性 98·A |
¥1.98/时实时按量 | ¥48/天 | 充足 | AutoDL 按量计费最低价 ¥1.98/时(官网市场 RTX 4090,空闲卡 48) | 去租用 |
| 矩池云标价竞争力中国
稳定性 100·A |
¥2.20/时实时按量 | ¥53/天 | 充足 | 矩池云按分钟计费 ¥2.20/小时(13 区,官网明码标价) | 去租用 |
| RunPod(美国)海外人气王北美
稳定性 73·C |
¥2.45/时实时竞价 | ¥59/天 | 充足 | RunPod 社区云最低价 $0.34/hr 折算(NVIDIA GeForce RTX 4090;Secure Cloud $0.89/hr) | 去租用 |
| Cloudrift(美国)结构化明码价北美
数据积累中 2/30天 |
¥2.81/时实时按量 | ¥67/天 | 充足 | Cloudrift 官网 JSON-LD RTX 4090 的 On-Demand Hourly Rate $0.39/hr 折算 | 去租用 |
| 并行智算云3090低价中国
数据积累中 1/30天 |
¥3.60/时实时按量 | ¥86/天 | 充足 | 并行智算云按量实时价 ¥3.60/时 | 去租用 |
| 蓝耘中国
人工维护 |
¥2.00/时参考价·待核实按量 | ¥48/天 | 充足 | 实测稳定性较好,响应较快 ⚠ 口径提示:官网价格由前端接口动态加载,暂无公开可抓取来源,本站每季度人工复核一次 |
去租用 |
| TensorDock(美国)全球低价北美
人工维护 |
¥2.52/时参考价·待核实按量 | ¥60/天 | 充足 | 官方起价 $0.35×7.2(2026-10核实);低价机$0.25起但常断货;第三方机房 ⚠ 口径提示:本站价格取自官方「8 卡起租」报价口径,与其余平台的单卡按量价不完全可比,仅供参考 |
去租用 |
算一笔账:跑一次课程作业多少钱
假设你的任务是「用 Qwen-7B 微调一个课程问答机器人」:环境安装 20 分钟 + 数据处理 30 分钟 + QLoRA 训练 2 小时 + 调试推理 1 小时 ≈ 4 小时。按 3090 约 ¥1.4/时算,总成本 ¥5.6,一杯蜜雪冰城的钱。用竞价/闲时实例还能再砍 30%。
避坑三条
- 先选「按量」别包月:学生任务都是脉冲式的,包月机器 90% 时间在空转。跑完立刻释放实例。
- 数据先传网盘/OSS:实例释放后系统盘清空,数据集和 checkpoint 一定存到平台云盘或对象存储。
- 竞价实例要会 checkpoint:闲时价最低但可能被回收,训练脚本里加定期保存,被踢了重开接着练。
还不知道选哪张?用本站免费选型工具:选任务类型,自动推荐卡型和当日最低价平台。价格每小时自动更新,部分链接含推广返佣,不影响排序。
