Radeon RX 7600M XT 能跑哪些大模型?
在 8GB、4K 上下文下,索引中 151 个模型有 59 个可从容运行,各自取仍留有余量的最高质量档位。
Radeon RX 7600M XT 的简短答案
8 GB,GDDR6,带宽未列出。索引中 151 个模型里有 59 个能在 4K 上下文下从容运行,65 个至少能加载。
硬件规格来源- 能装下的最大模型
- Metis-1.6 Logos — IQ4_XS 下约 6.4 GB —— 4K 时仅剩 1.6 GB,上下文再拉长就要动用这点余量。下载这个文件: Lernex/Metis-1.6-Logos-GGUF · Metis-1.6-Logos-IQ4_XS.gguf · 6.07 GB · 2026-11-04 核对
- 留有余量的选择
- Qwen3 4B Instruct — Q6_K 下约 4.0 GB —— 占用不到显存的 60%,留下 4.0 GB 给长上下文或第二个进程。
- 你会先撞到的墙
- 即使显卡型号相同,不同笔记本的散热和功耗限制也会影响实际速度。请按标称显存判断能否装下模型,不要用同名桌面显卡的跑分推断速度。
10–20B · 1
| 模型 | 量化档位 | 预估显存 | 余量 |
|---|---|---|---|
| Metis-1.6 Logos10B MoE | IQ4_XS | 6.4 GB | +1.6 GB |
4–10B · 36
| 模型 | 量化档位 | 预估显存 | 余量 |
|---|---|---|---|
| Qwen3.5 9B9B | Q4_K_M | 6.58 GB | +1.4 GB |
| K2 Horizon 7B7B | Q4_K_M | 6.47 GB | +1.5 GB |
| GLM-4-9B-Chat9B | Q4_K_M | 5.87 GB | +2.1 GB |
| MiMo-V2.6-Distill-Qwen-9B9B | Q4_K_M | 6.25 GB | +1.8 GB |
| Clairic Flash 9B9B | Q5_K_M | 6.93 GB | +1.1 GB |
| Qwen3-VL 8B Instruct8B | Q4_K_M | 6.19 GB | +1.8 GB |
| TwIL 8B balanced8.8B | Q4_K_M | 6.28 GB | +1.7 GB |
| Granite 4.2 8B8B | Q4_K_M | 6.47 GB | +1.5 GB |
| Ministral 3 8B Instruct8B | Q5_K_M | 6.92 GB | +1.1 GB |
| LFM2.5 8B-A1B8B-A1.5B | Q5_K_M | 6.36 GB | +1.6 GB |
| Qwen2-VL 7B Instruct7B | Q4_K_M | 5.49 GB | +2.5 GB |
| Granite 3.1 8B Instruct8B | Q4_K_M | 5.88 GB | +2.1 GB |
| Shot Reader 8B8B | Q5_K_M | 6.73 GB | +1.3 GB |
| Qwen3 8B Instruct8B | Q4_K_M | 5.81 GB | +2.2 GB |
| Llama 3.1 8B Instruct8B | Q4_K_M | 5.64 GB | +2.4 GB |
| Nous Hermes 3 Llama 3.1 8B8B | Q4_K_M | 5.64 GB | +2.4 GB |
| Aya 23 8B8B | Q4_K_M | 5.64 GB | +2.4 GB |
| OpenChat 3.6 8B8B | Q4_K_M | 5.64 GB | +2.4 GB |
| DeepSeek-R1-Distill-Llama-8B8B | Q5_K_M | 6.51 GB | +1.5 GB |
| InternLM2 7B Chat7B | Q4_K_M | 5.45 GB | +2.6 GB |
| Qwen2.5 7B Instruct7B | Q6_K | 6.77 GB | +1.2 GB |
| Qwen2.5-Coder 7B Instruct7B | Q4_K_M | 5.07 GB | +2.9 GB |
| DeepSeek-R1-Distill-Qwen-7B7B | Q4_K_M | 5.07 GB | +2.9 GB |
| Gemma 4 E4B ITE4B | Q4_K_M | 5.32 GB | +2.7 GB |
| Nemotron 3.5 Bolt E4BE4B | Q4_K_M | 6.57 GB | +1.4 GB |
| OLMo 2 7B Instruct7B | Q4_K_M | 6.82 GB | +1.2 GB |
| OLMo 3 7B Instruct7B | Q4_K_M | 6.82 GB | +1.2 GB |
| WizardLM-2 7B7B | Q4_K_M | 5.14 GB | +2.9 GB |
| Mistral 7B Instruct v0.37B | Q6_K | 6.75 GB | +1.3 GB |
| Zephyr 7B Beta7B | Q6_K | 6.75 GB | +1.3 GB |
| K2 Horizon 3.7B3.7B | Q8_0 | 6.24 GB | +1.8 GB |
| Gemma 4 E2B ITE2B | Q8_0 | 5.2 GB | +2.8 GB |
| Qwen3.5 4B4B | Q8_0 | 4.97 GB | +3 GB |
| Gemma 3 4B IT4B | Q8_0 | 5.05 GB | +3 GB |
| Spark-X2.6 4B4B | Q8_0 | 4.84 GB | +3.2 GB |
| Qwen3 4B Instruct4B | Q6_K | 4.05 GB | +4 GB |
<4B · 22
| 模型 | 量化档位 | 预估显存 | 余量 |
|---|---|---|---|
| Phi-4 Mini Instruct3.8B | Q8_0 | 4.81 GB | +3.2 GB |
| Phi-3.5 Mini Instruct3.8B | Q8_0 | 5.89 GB | +2.1 GB |
| Granite 4.2 3B3B | Q8_0 | 4.41 GB | +3.6 GB |
| Ministral 3 3B Instruct3B | Q8_0 | 4.26 GB | +3.7 GB |
| Llama 3.2 3B Instruct3B | Q8_0 | 4.05 GB | +4 GB |
| Qwen2.5 3B Instruct3B | Q8_0 | 3.59 GB | +4.4 GB |
| SmolLM3 3B3B | Q8_0 | 3.73 GB | +4.3 GB |
| Metis-1.6 Praxis3B MoE | Q8_0 | 3.4 GB | +4.6 GB |
| Gemma 2 2B Instruct2B | Q8_0 | 3.34 GB | +4.7 GB |
| Qwen3.5 2B2B | Q8_0 | 2.23 GB | +5.8 GB |
| LFM3 1.7B1.7B | Q8_0 | 1.99 GB | +6 GB |
| LFM3-VL 2B2B | Q8_0 | 1.99 GB | +6 GB |
| Qwen3 1.7B Instruct1.7B | Q8_0 | 2.39 GB | +5.6 GB |
| Qwen2.5 1.5B Instruct1.5B | Q8_0 | 1.83 GB | +6.2 GB |
| Llama 3.2 1B Instruct1B | Q8_0 | 1.51 GB | +6.5 GB |
| LFM2.5 1.2B Instruct1.2B | Q8_0 | 1.35 GB | +6.7 GB |
| K2 Horizon 0.9B0.9B | Q8_0 | 1.44 GB | +6.6 GB |
| Qwen3.5 0.8B0.8B | Q8_0 | 0.94 GB | +7.1 GB |
| BotPsy 0.8B0.75B | Q8_0 | 0.9 GB | +7.1 GB |
| Qwen2.5 0.5B Instruct0.5B | Q8_0 | 0.6 GB | +7.4 GB |
| MNN-Pocket 0.3B Instruct0.36B | Q8_0 | 0.46 GB | +7.5 GB |
| MNN-Pocket 0.3B QAT0.30B | Q4_1 | 0.26 GB | +7.7 GB |
这个列表是怎么算出来的
每一行取该模型中困惑度损失最低、且预估总量(权重 + 4K 上下文下的 KV 缓存 + 激活缓冲)不超过显存 88% 的量化档位。88% 是计算器的「绿色」阈值,因此每一项估算都留有余量。提高上下文长度,列表会变短;计算器可直接验证任意组合。
另有 6 个模型能加载但不留余量(占用至多为显存的 105%)—— 模型库的显卡快捷筛选把它们也计入,因此那里的数字更大。
在这张卡上的实测数据
本站没有这款笔记本显卡的推理实测记录。模型适配数据为估算,并非实测结果。
显存预算相同的显卡
能装下什么由显存决定,所以同类型的每张 8GB 显卡返回的列表都一样。这几个页面给出的不是不同答案 —— 它们的差别在吞吐,而本索引并未逐卡实测吞吐。
这张卡的部署指南
针对 Radeon RX 7600M XT 的运行时或显存容量编写的分步指南,包括具体命令,以及确认模型确实跑在这张卡上的检查方法。
再往上一档
Radeon RX 7700 XT(12GB)比这张卡多装下 20 个索引内的模型。 Radeon RX 7700 XT →
常见问题
Radeon RX 7600M XT 上最适合本地运行的大模型是哪个?
日常使用推荐 Qwen3 4B Instruct(Q6_K)—— 在 4K 上下文下约占这张卡 8 GB 中的 4.0 GB,还剩 4.0 GB 给更长的窗口。如果你要的是能加载的最大模型,那是 Metis-1.6 Logos(IQ4_XS,约 6.4 GB,余量 1.6 GB)。这里的「最适合」指的是最契合显存预算 —— 本索引不跑任务基准,无法告诉你哪个模型更聪明。
Radeon RX 7600M XT 能跑 Falcon 3 10B Instruct 吗?
勉强。它在本索引中最小的构建 Q4_K_M 约需 7.3 GB,而这张卡可用约 8.0 GB —— 在没有其他程序占用时能加载,但没有任何余量留给更长的上下文。上面的清单里没有它,因为那份清单要求模型占用不超过可用显存的 88%。
本地跑大模型,Radeon RX 7600M XT 还是 Radeon RX 9060 XT 8G?
两者装得下的模型并不相同:4K 下 Radeon RX 7600M XT 可从容运行 151 个中的 59 个,Radeon RX 9060 XT 8G 为 62 个——两者能加载的格式不同。本站没有同时记录两张卡的带宽,因此本页不就速度给出排序。
在 8GB、4K 上下文下,索引中 151 个模型有 59 个可从容运行,各自取仍留有余量的最高质量档位。
本页数字会随模型数据或运行时版本的变化而更新。最近更新 2026-11-22 RSS → /zh/feed.xml