Qwen2.5-Coder 7B Instruct

7B

Alibaba Qwen2.5

最佳 7B 代码模型,适合 8–16GB 显存的本地开发助手。

175.8K HF 下载量375 点赞Qwen/Qwen2.5-Coder-7B-Instruct-GGUF· 数据更新于 8/14/2026
消费级显卡Mac / 苹果芯片CPU / 轻量VPS

131K

最大上下文

3

量化变体

EXL2 4.65bpw

最佳质量

98.0%

精度保留率

量化变体对比

各量化级别的显存、质量损失及 RTX 4090 推理速度

实测 = 本站基准 · 估算 = 公式推算 · 社区 = 公开报告

格式级别BPW显存PPL 损失速度来源操作
GGUFQ4_K_M4.855.4 GB2.8%158 tok/s估算
计算HF
AWQINT444.8 GB4.0%225 tok/s估算
计算HF
EXL24.65bpw4.655.2 GB2.0%248 tok/s估算
计算HF