NVIDIA GeForce RTX 4090 参数详解 — 算力、显存、功耗与价格
个人与小团队本地部署大模型的第一选择，推理性价比极高。
GeForce RTX 4090 核心参数规格表
| 型号 | NVIDIA GeForce RTX 4090 |
|---|---|
| 类别 | 消费级 |
| 架构 | Ada Lovelace |
| 发布年份 | 2022 |
| 显存 | 24GB GDDR6X |
| 显存带宽 | 1008 GB/s |
| FP32 算力 | 82.6 TFLOPS |
| FP16/BF16 算力 | 165 TFLOPS |
| 低精度算力 | INT8 330 |
| 互联方案 | PCIe 4.0 |
| TDP 功耗 | 450W |
| 市场参考价 | 约1.5-2万（约 17500 元，每万元 94 TFLOPS） |
| 综合算力评分 | 70 / 100（全站第 38 名，本站加权计算） |
本页 8 项核心参数中，无约值标记 8 项。 带 ~ 的为约值或折算值，— 表示厂商未公开；稀疏加速值已在「低精度算力」一栏注明。价格为市场参考区间，不是报价。
GeForce RTX 4090 怎么部署、配什么生态
| 供电要求 | 450W，建议 850W 电源 |
|---|---|
| 机箱形态 | 普通塔式机箱即可，注意显卡长度与电源余量 |
| 软件生态 | CUDA，PyTorch / vLLM / TensorRT 原生支持，生态最成熟 |
| 跑 70B 的方案 | 跑 70B 的 4bit 量化约需 40GB，按 24GB 显存算要 2 张并联，但这张卡只有 PCIe 互联，多卡效率会打折 |
生态成熟度直接决定「买回来能不能跑起来」，比算力更该先看。国产卡的迁移成本主要花在算子适配与调优上。
GeForce RTX 4090 的算力水平与瓶颈在哪
NVIDIA GeForce RTX 4090 采用 Ada Lovelace 架构，FP32 单精度算力 82.6 TFLOPS， FP16/BF16 半精度算力 165 TFLOPS，低精度算力 INT8 330。 按大模型训练与推理的综合权重计算，该卡在本站 115 张算力卡中排第 38 位，适合大模型微调（LoRA/QLoRA）与中等规模推理服务。
显存 24GB GDDR6X，带宽 1008 GB/s。在「1 – 5 万元」档的 25 款卡里，它的每万元 FP16 算力排第 6（94 TFLOPS/万元）。与排名相邻的 NVIDIA GeForce RTX 5090D 相比，它的 FP16 算力低出 21%、显存少 8GB、显存带宽低 44%、参考价低 17%。
互联是 PCIe 4.0，没有专用卡间互联，多卡训练会被通信拖住，更适合单卡推理或数据并行。按 24GB 显存算，单卡可跑 14B 全精度或 32B 的 4bit 量化模型。
GeForce RTX 4090 能跑多大的模型
按「权重 + 20% 运行时开销 ≤ 90% 显存」估算，✓ 表示单卡可运行，— 表示需要多卡或降精度。
| 模型规模 | FP16/BF16（2 字节） | FP8/INT8（1 字节） | 4bit 量化（0.5 字节） |
|---|---|---|---|
| 7B | ✓ | ✓ | ✓ |
| 14B | — | ✓ | ✓ |
| 32B | — | — | ✓ |
| 70B | — | — | — |
| 110B | — | — | — |
估算不含长上下文场景的 KV Cache 膨胀，也不含张量并行带来的额外显存占用；实际部署请以实测为准。
与 GeForce RTX 4090 同级的显卡对比
对比对象是总榜中与它排名相邻的显卡，点击型号可查看各自的完整参数。
| 型号 | 显存 | FP16/BF16 | FP8/INT8 | TDP | 参考价 | 评分 |
|---|---|---|---|---|---|---|
| NVIDIA GeForce RTX 4090Ada Lovelace | 24 GB | 165 | INT8 330 | 450W | 约1.5-2万 | 70 |
| NVIDIA H20Hopper | 96 GB | 148 | FP8 296 | 400W | 约9万 | 70 |
| NVIDIA RTX 6000 AdaAda Lovelace | 48 GB | 182 | FP8 364 | 300W | 约5-6万 | 71 |
| AMD Instinct MI250CDNA2 | 128 GB | 362 | INT8 362 | 560W | 约7万 | 69 |
GeForce RTX 4090 常见问题
GeForce RTX 4090 多少钱一张？
NVIDIA GeForce RTX 4090 的市场参考价为 约1.5-2万（2026 年 11 月行情）。采购前建议向厂商或代理商询实价，表内价格只作横向比较用。
GeForce RTX 4090 的算力是多少？
NVIDIA GeForce RTX 4090 的 FP32 算力为 82.6 TFLOPS，FP16/BF16 算力为 165 TFLOPS，低精度算力 INT8 330。在本站 115 张算力卡中综合排名第 38 位。
GeForce RTX 4090 能跑多大的大模型？
NVIDIA GeForce RTX 4090 配备 24GB GDDR6X 显存，单卡可跑 14B 全精度或 32B 的 4bit 量化模型。按 FP16 每 10 亿参数约 2GB 估算，实际可用规模还要留出 KV Cache 与框架开销。
GeForce RTX 4090 的功耗和部署要求？
NVIDIA GeForce RTX 4090 的 TDP 为 450W。普通塔式机箱即可容纳，建议电源预留 1.5 倍以上余量。
GeForce RTX 4090 的性价比怎么样？
按参考价中位数 17500 元计算，NVIDIA GeForce RTX 4090 每万元可买到约 94 TFLOPS 的 FP16 算力。这个指标只反映算力单价，不包含显存容量、带宽与软件生态的差异，跨类别比较时需谨慎。
相关显卡与延伸阅读
算力概念与选型方法：
