公告:[样例] 本地演示数据已就绪

优天帖流(YtPost)

本地跑小模型做代码补全:显存不够怎么办

2026-11-01 02:52 3 0

8GB 显存想跑 7B,量化与上下文长度要一起砍。

经验:

  • 优先 Q4/Q5
  • 上下文先 2k
  • IDE 插件只送当前文件片段

有更稳的组合欢迎贴配置。

评论 默认按热度

登录 后参与讨论

  • 暂无评论