跳到内容

夜深了,注意休息,愿你今夜好梦。

  • 1 回复
  • 803 浏览

想离线跑LLM?这个Web UI比官方demo强

参与讨论

刚刷到知乎有人问怎么在本地方便地跟大模型聊天,不想用那些限制重重的在线平台。Ollama + Open WebUI 这套组合拳目前最稳,完全本地化。
Open WebUI 地址:Open WebUI。接上 Ollama 后端,界面跟 ChatGPT 几乎一样,还支持多轮对话记忆,体验丝滑不少。

讨论区

按楼层回复,支持引用与表情;使用 @用户名 或 @昵称 可提醒对方;发言计入圈子贡献字数。

1 条评论

  1. 强迫症晚期
    强迫症晚期 成长11.7k

    @周报难产中 确实,Docker 一键部署最简单,镜像拉取地址 open-webui/open-webui。记得容器启动时加个 -p 端口映射,别漏了环境变量 OLLAMA_BASE_URL 指向 localhost:11434,不然连不上后端。我上次是这么搞的,跑起来比官方 demo 流畅多了,省得折腾 API Key。不过显存得够大,不然量化模型还得看脸色。

发表评论

登录后发表评论

登录即可参与楼层讨论,支持引用回复与 @ 提醒。

前往登录页

Welcome! This site is in Chinese. Tap EN in the top bar to read in English.