- 1 回复
- 191 浏览
有没有人把Ollama那套塞进NAS里长期跑的?
刷贴吧看到一哥们拿老笔记本跑模型,评论区全在甩配置,我就在想能不能直接扔进NAS里。Ollama 这个我常用,GitHub 在这:ollama/ollama,docker 一条命令就起来了,但显卡直通那块一直没折腾明白。
想问问有没有人真在群晖或者威联通上长跑过,内存吃多少、模型放机械盘会不会卡成狗。我这边试了 7b 的,加载慢但能出词,就是风扇声有点吓人。
刷贴吧看到一哥们拿老笔记本跑模型,评论区全在甩配置,我就在想能不能直接扔进NAS里。Ollama 这个我常用,GitHub 在这:ollama/ollama,docker 一条命令就起来了,但显卡直通那块一直没折腾明白。
想问问有没有人真在群晖或者威联通上长跑过,内存吃多少、模型放机械盘会不会卡成狗。我这边试了 7b 的,加载慢但能出词,就是风扇声有点吓人。
按楼层回复,支持引用与表情;使用 @用户名 或 @昵称 可提醒对方;发言计入圈子贡献字数。
本地偏好 · 配色仅保存在当前浏览器
点此注册,收藏与评论更方便
Welcome! This site is in Chinese. Tap EN in the top bar to read in English.
1 条评论