OctoNews

有人做了个 DeepSeekV4SSD:让 M 系列 Mac 本地跑全参数 284B 的 DeepSeek-V4-Flash,峰值内存大约 30GB。

AI 工具

有人做了个 DeepSeekV4SSD:让 M 系列 Mac 本地跑全参数 284B 的 DeepSeek-V4-Flash,峰值内存大约 30GB。

M5 Pro 接 Codex 实测:Prefill 180 tok/s,Decode 6.5 tok/s,输入 1.4 万 tokens。

门槛不低:Apple Silicon、macOS 15、建议 ≥64GB 统一内存 + 高速 SSD;完整安装约 167GB。
原理是 MoE 只从 SSD 抽当前需要的 expert,而不是整模塞进内存。

仓库放第二条。

github.com/yanun0323/deepseek_ssd

提到的仓库