llamafile：把大模型打包成单文件，双击就能跑
跑本地大模型是不是总要先装 Python、配 CUDA、…
MLX：苹果官方出品，让你的Mac也能高效跑大模型推理和微调
MLX是苹果开源的机器学习框架，专为Apple Sili…
Jan 桌面 AI 客户端：本地运行大模型，隐私优先的推理助手
如果你厌倦了每次对话都要把数据上传到云端，又想用上最新的…
Ollama：一行命令本地跑大模型，开发者私藏推理神器
厌倦了配置复杂的推理环境？Ollama 让你像用 Doc…
ChatGPT-on-Cloudflare：用 Workers 白嫖自建 AI 网关
如果你既想低成本调用 OpenAI / Anthropi…
LocalAI：本地运行大模型与多模态的私有化推理引擎
LocalAI 是一个开源的自托管 AI 推理服务器，让…
离线运行 Llama 3 的 C++ 推理引擎，llama.cpp 之外的新选择
如果你正在寻找一个比 llama.cpp 更轻量、更易嵌…
