跳到内容

晚上好,辛苦一天了,放松一下吧。

GitHub项目

共 114 篇文章

GitHub项目

CogVideo 开源视频生成模型,零门槛生成高清短片

如果你在找一款开源的文本到视频生成模型,CogVideo 值得你点开仓库。它来自清华团队,基于预训练的语言模型进行视频生成,不需要昂贵的商业 API,本地部署就能跑。对于想研究视频生成或者快速产出短视频原型的开发者来说,这是目前少有的高质量开源选择。核心看点- 多版本可选:官方提供了 9B 和 5B 参数的模型权重,兼顾效果与资源消耗。支持文本生成视频、图像生成视频两种模式。 - 高效推理架构:采用 VQ-VAE + Transformer 结构,结合 3D causal attention,能在 10 秒左右生成 4 秒 720×480 分辨率的视频(取决于显存)。 - 中文友好:模型对中文提示词理解较好,直接输入中文描述即可生成符合语义的视频,无需额外翻译。▲ github.com(阿里云通义万相 生成配图,非网页截图)上手提示部署需要至少 24GB 显存的 GPU(推荐 RTX 4090 或 A100),项目基于 PyTorch,通过 Hugging Face 下载权重。官方提供了详细的 Docker 镜像和 gradio demo,拉下来就能跑。无需 API Key,所有推理在本地完成。MIT 许可证,商用或二次开发都很自由。不过注意,当前版本生成的人脸细节和复杂动作仍有失真,适合做概念演示或辅助素材生成。建议先去 README 看看模型局限性和未来计划,说不定你的使用场景正好契合。仓库地址: CogVideo GitHub 仓库

GitHub项目

Khoj:本地AI搜索你的知识库,比Obsidian自带搜索好用十倍

还在为记不清笔记放在哪个文件夹而抓狂?Khoj 能直接索引你本地的 Markdown、PDF、图片甚至代码,并用本地或云端的大模型给你精准答案。对 Obsidian、Logseq 用户来说,这几乎是知识管理的终局形态——安装一个插件,你的所有笔记瞬间拥有一个会思考的搜索引擎。核心看点- 多种数据源统一索引:支持本地文件、Obsidian 保险库、LaTeX、Org-mode 等,甚至能读取图片中的文字。索引后可通过自然语言提问,Khoj 会召回最相关片段并生成回答。 - 自由选择推理后端:既可以用 ChatGPT、Claude 等云端 API,也能全部在本地跑(通过 llama.cpp、Ollama),完全离线也能用。MIT 许可证,代码透明,隐私可控。 - 跨平台触手可及:桌面端有 Obsidian 插件、Emacs 包、Web 界面,移动端也有对应客户端。查询时还能一键跳到原始文件位置,非常顺手。▲ github.com(阿里云通义万相 生成配图,非网页截图)适合谁- 笔记重度用户:如果你每天记大量笔记但检索低效,Khoj 能直接给出理解后的答案,而不是单纯的关键词匹配。 - 隐私敏感的研究者:选择本地模型,所有数据不出机器,适合处理敏感文档。 - 喜欢折腾的自部署玩家:通过 Docker 或 pip install khoj 就能跑起来,依赖 Python 3.10+ 和至少 8GB 内存。若用本地模型还需 GPU,但也可纯 CPU 推理(速度稍慢)。Khoj 的 README 写得相当详尽,从安装到自定义插件都有教程。如果你也想让自己的笔记“活”起来,不妨点开仓库看看:GitHub - khoj-ai/khoj

GitHub项目

Jan 桌面 AI 客户端:本地运行大模型,隐私优先的推理助手

如果你厌倦了每次对话都要把数据上传到云端,又想用上最新的开源大模型(Llama、Mistral、Phi 等),Jan 就是你要找的本地 AI 客户端。它为开发者和隐私敏感用户提供了一套开箱即用的桌面推理环境,无需命令行折腾,双击即可下载模型并开始对话。核心看点- 一键下载与切换模型:内置模型中心,支持从 Hugging Face 等源直接拉取并管理多个大模型,免去手动配置路径和环境依赖的烦恼。 - 本地推理,数据不出设备:所有计算在本地完成,CPU、GPU(通过 llama.cpp 后端)均可加速,适合有隐私需求或需要离线使用的场景。 - 可扩展的插件机制:支持通过插件接入不同的推理引擎(如 TensorRT-LLM、Ollama 后端),社区正在贡献更多功能,基础功能不设门槛。▲ github.com(阿里云通义万相生成配图,非网页截图)适合谁- 隐私优先的日常用户:希望把聊天记录和文件留在自己电脑上的 AI 爱好者。 - 快速体验新模型的开发者:在下载新模型前,先在 Jan 里跑个对话试试效果,省去搭建环境的功夫。 - 需要离线推理的小团队:内网环境或无网络办公场景下,Jan 提供简洁的桌面界面,支持多轮对话。项目采用 AGPL-3.0 许可证,桌面端无需额外 API Key,仅需满足模型本身的许可条款。如果你已经受够了 Web 端的输入限制,不妨打开 Jan 的 GitHub 仓库 下载体验版,看看它如何把你的笔记本变成私人 AI 工作台。

GitHub项目

MetaGPT:多Agent协作写代码,不只是聊天机器人

还在让AI写单个函数?MetaGPT直接把一个软件公司搬进命令行——产品经理、架构师、工程师、QA各司其职,输入一句话需求,自动输出PRD、设计文档、代码甚至测试用例。对于想要探索Agent协作开发、或者懒得写重复性工程代码的开发者来说,这个仓库能省下大量沟通和编排成本。核心看点- 角色化分工:内置Product Manager、Architect、Project Manager、Engineer等角色,每个Agent有独立的Prompt和记忆,模拟真实团队协作流程,产出的文档和代码结构清晰。 - SOP驱动:基于标准操作流程(SOP)组织对话,从需求分析到代码生成分阶段执行,减少Agent间的混乱,生成的代码可直接运行或作为项目骨架。 - 增量迭代:支持对已有项目进行增量修改,而非每次都从头生成;通过git管理版本变化,方便开发者审查和回滚。▲ github.com(阿里云通义万相 生成配图,非网页截图)上手提示Python 3.9+,建议配置OpenAI API Key(或兼容的本地模型)。安装简单:pip install metagpt 即可。第一次运行会自动创建角色配置,根据提示输入需求描述(中英文均可)。如果本地有可用的LLM(如通过Ollama),可以配置成本地推理,无需联网。适合快速验证想法、生成MVP原型,也适合研究多Agent协作机制。项目采用Apache-2.0许可证,社区贡献活跃,Issues和PR响应快。想深入了解Agent如何分工协作、处理复杂任务,直接去MetaGPT GitHub页面看示例和文档,会发现很多值得复用的设计思路。

GitHub项目

LangChain:构建LLM应用的首选框架,从原型到生产一步到位

开发AI应用时,最头疼的就是繁琐的模型调用、提示词管理和外部工具集成。LangChain 帮你把这些抽象成模块化组件,让你专注于业务逻辑,而不是重复造轮子。无论你是想做问答机器人、文档分析助手还是自动化Agent,这个框架都能大幅缩短开发周期。核心看点- 统一接口:支持OpenAI、Hugging Face、Claude、本地模型等数百种LLM,切换模型只需改一行配置。 - 预置组件:内置Prompt模板、链式调用、记忆模块、文档分割、检索引用(RAG)等开箱即用,Agent 机制更是能自主调用工具完成任务。 - 生态活跃:Apache-2.0许可证,社区贡献了数百个集成包(LangChain Hub),从向量数据库到Excel操作,什么都接。▲ github.com(阿里云通义万相生成配图,非网页截图)上手提示Python 3.8+即可安装 pip install langchain,搭配LangChain CLI或LangSmith调试更爽。无需GPU,但调用外部模型仍需API Key(或自己部署的开源模型)。适合Python开发者、AI产品经理、想快速验证想法的研究者。推荐先去README的「Quickstart」跑一个最简单的LLM链,再翻翻「Use Cases」里的文档问答或聊天机器人示例,你会立刻感受到模块化设计的爽快。仓库地址:langchain-ai/langchain

GitHub项目

SD WebUI Forge:比A1111更省显存的Stable Diffusion推理引擎

还在用AUTOMATIC1111跑图时频繁爆显存?Forge是lllyasviel在同一个UI框架下做的深度优化分支,直接替换启动器就能感受到内存占用和生成速度的改善,特别适合显存吃紧又想跑大模型、多ControlNet的用户。无论是开发者研究LoRA训练,还是爱好者日常生图,这个仓库都能让老显卡再战几年。核心看点- 内存与注意力机制重构:替换了默认的Cross-Attention实现,大幅降低显存峰值,实测6GB卡也能跑1024分辨率+多个ControlNet,不再轻易OOM。 - 100%兼容原生态:所有A1111的扩展(如ControlNet、ADetailer、LoRA)直接迁移,几乎不改动操作习惯,启动参数也完全一致。 - 持续迭代与社区响应:作者几乎每周都有提交,修复bug和兼容新版PyTorch的速度比原版还快,Issues里讨论氛围也务实。▲ github.com(阿里云通义万相 生成配图,非网页截图)上手提示如果你是A1111用户,直接把原版启动器换成webui-user.bat(Windows)或webui.sh(Linux)就能切到Forge;需要至少6GB VRAM才能流畅使用推荐的模型组合。项目基于Apache-2.0许可证,预编译的PyTorch包会自动下载,不用手动配什么API Key,解压即跑。要是想试试看真实体感,直接去stable-diffusion-webui-forge的README看一键启动命令,或者翻翻社区的Workflow分享,比看截图更直观。

GitHub项目

对话式AI开发利器!NVIDIA NeMo帮你快速构建定制LLM应用

如果你正为如何高效搭建支持多轮对话、知识检索的 AI 应用而头疼,NVIDIA 的 NeMo 框架会是一个值得试试的选择。它专为对话式 AI 场景设计,集成了训练、微调、推理和服务全套能力,对研究者和工程团队都很友好。核心看点- 端到端一站式:从数据处理、模型训练到部署推理,NeMo 提供了统一的工具链,省去拼凑多个库的麻烦。 - 多模态与多语言支持:除了文本对话,还集成了语音识别(ASR)、语音合成(TTS)和图像理解模块,适合构建更自然的交互体验。 - 大规模分布式训练:基于 NVIDIA 的优化,能高效利用多 GPU 集群进行预训练或 LoRA 微调,社区持续在贡献新模型和 checkpoint。▲ github.com(阿里云通义万相 生成配图,非网页截图)适合谁主要面向有一定深度学习基础的开发者或研究人员,希望快速验证对话式 AI 原型或定制企业级应用。需要 Python 3.8+ 和 CUDA 环境,推荐使用 NVIDIA GPU 以获得最佳体验。框架本身是 Apache-2.0 许可证,模型权重需遵循各自许可。如果你想把 RAG、多模态、语音交互整合到一个相对成熟的工程框架里,不妨仔细翻翻它的 README 和示例,很多细节都在 NVIDIA NeMo GitHub 仓库 里藏着。

GitHub项目

Chainlit:几分钟为LLM搭出可交互聊天界面,开发者效率利器

如果你正为搭建一个能跟大模型对话的Web界面而头疼,Chainlit 可能是目前最快上手的方案。它专为LLM应用设计,让你用少量Python代码就能生成带聊天历史、文件上传、流式响应的UI,适合想快速验证原型或做内部分享的开发者。核心看点- 开箱即用的聊天组件:装饰器风格集成,几行代码就能把LLM调用包装成Web聊天,自动处理消息渲染和会话管理。 - 内置反馈与监控:支持点赞/点踩、会话回放、成本统计,方便迭代和排查问题,对团队协作很有帮助。 - 原生异步流式支持:直接对接OpenAI、Llama等流式接口,用户能即时看到逐字生成,体验接近原生ChatGPT。▲ github.com(阿里云通义万相 生成配图,非网页截图)上手提示用 pip install chainlit 即可安装,项目采用MIT许可证。你只需写一个普通的Python函数,用 @cl.on_message 装饰就能开始接受用户消息并返回回复。如果想要更复杂的多步Agent流程,官方文档提供了丰富的示例。更多用法和社区模板可以点进仓库 README 里翻翻,尤其是 examples/ 目录下的几个Demo很直观。想快速把想法跑起来,不妨直接拉到项目主页试试。Chainlit 的 GitHub 仓库 上有详细的入门指南和讨论区。

GitHub项目

Ragas:给RAG系统做体检的开源评估框架,开发者的Debug提效利器

如果你的RAG应用总出“答非所问”的幻觉,盲目调prompt或embedding就像在黑箱里打转。Ragas提供了一套结构化的评测指标(忠实度、答案相关性、上下文精度等),让你能量化知道哪里出了问题,而不是靠感觉迭代。核心看点- 端到端评估:覆盖检索(context recall/precision)和生成(faithfulness、answer relevancy),避免只看LLM输出而忽略检索质量。 - 无须人工标注:利用LLM自动生成测试集并打分,配合少量文档就能跑通评估流程,降低上手成本。 - 可与LangChain/LlamaIndex集成:把评估挂到现有pipeline里,每次修改后一键跑分,用数字追踪改进效果。▲ github.com(阿里云通义万相 生成配图,非网页截图)适合谁正在构建或优化RAG系统的开发者、研究员。项目用Python 3.8+,依赖OpenAI或本地LLM(如通过Ollama)作为评估模型,无特殊GPU要求。API Key视评估模型而定,评测逻辑本身不需要额外秘钥。想给你的RAG应用装一个客观的“监工”?去仓库README看一下metric说明和示例,用pip install ragas就能开始跑第一轮评估:Ragas GitHub

GitHub项目

Text Generation WebUI: 本地跑LLM的最强开源面板

厌倦了给大模型平台充API额度?想私有化部署却卡在命令行参数里?oobabooga/text-generation-webui 就是那个让你用浏览器轻松管理、加载、对话各种开源模型的“一站式”神器。无论是玩转Llama、Mistral、Gemma,还是实验LoRA微调,它把复杂的推理引擎封装成了开箱即用的UI,特别适合研究者、爱好者以及想在公司内网搭个AI助手的开发者。核心看点- 模型全家桶支持:原生对接Transformers、ExLlamaV2、llama.cpp、AutoGPTQ等多种推理后端,一个面板就能跑GPTQ、GGUF、AWQ等量化格式。扩展LoRA/QLoRA微调:无需额外脚本,在UI里就能上传LoRA权重并热切换,做角色扮演或领域适配非常方便。 - 丰富的交互模式:除了标准聊天,内置Notebook模式(逐段生成)和聊天指令系统(/reset、/load指令),还能直接上传PDF/TXT做上下文注入,实测对长文档摘要很实用。 - 开箱即用的Web API:自带兼容OpenAI格式的API端点,方便对接其他UI(如LobeChat)或自动化工作流,社区还有Docker一键部署脚本(许可证为AGPL-3.0)。▲ github.com(阿里云通义万相生成配图,非网页截图)上手提示需要一张至少6GB显存的GPU(集成显卡推理极慢),推荐用CUDA 12+环境。下载后执行 start_windows.bat(Windows)或 python server.py(Linux/macOS),首次运行会自动安装依赖。如果只做CPU推理,可加载GGUF格式的小模型(如Qwen2.5-1.5B-GGUF)。无需任何API Key,所有推理在本机完成,数据不出门。就这么简单——点上Star,去README看看--listen参数能帮你暴露到局域网,或翻翻Extensions栏…

Welcome! This site is in Chinese. Tap EN in the top bar to read in English.