Translating this page to English in your browser…
跳到内容

晚上好,辛苦一天了,放松一下吧。

GitHub项目

共 179 篇文章

GitHub项目
最新

unstructured:PDF 表格公式啃得动,RAG 入库少踩坑

做 RAG 最耗时间的往往不是选模型,而是把一份双栏、带表格和页眉页脚的 PDF 拆成能喂给模型的干净片段。unstructured 就是干这件事的:先把文档拆成带类型的元素,再让你决定怎么拼。做知识库、文档问答的开发者可以直接点开看。核心看点元素级切分:不按固定字数硬切,而是先识别标题、正文、列表、表格、图片、公式,再按语义边界组合,后面 chunk 的质量会好很多。多格式统一入口:PDF、DOCX、PPTX、HTML、邮件、图片都能转成同一套 JSON 元素流,接 LangChain、LlamaIndex 有现成 loader。策略可选:追求速度用 fast,表格和扫描件走 hi_res,配合 OCR 与视觉模型处理复杂版式。▲ github.com(阿里云通义万相 生成配图,非网页截图)上手提示pip 装完就能跑,纯 CPU 用 fast 策略足够应付结构规整的文档;hi_res 会下载版面检测模型权重,需要额外 OCR 依赖,第一次跑会比较慢。只有在让大模型生成表格摘要或图片描述时才需要接 API Key。许可证为 Apache-2.0,模型权重的条款以仓库 LICENSE 为准。建议先翻 README 里的 partitioning 说明,再拿手头最脏的一份 PDF 试一遍。unstructured 仓库主页

GitHub项目
最新

FunASR:中文语音转写一条流水线,VAD、标点、说话人分离都齐了

做会议纪要、客服录音分析,或者给视频批量上字幕时,真正麻烦的往往是把 VAD、语音识别、标点恢复、说话人分离这几套脚本拼在一起,而不是模型本身的效果。FunASR 把这条链路做成了一个可以直接调用的工具包,开发者不用从零搭建流水线。核心看点- 链路完整:语音端点检测、识别、标点、时间戳、说话人分离都有现成模型和配置,省去大量胶水代码。 - 中文场景打磨得细:Paraformer 系列对口音和口语化表达处理得比较实在,支持热词定制,专有名词不容易被识别错。 - 接入方式多:Python 库、命令行、Docker 服务、ONNX 导出都能用,先快速跑通,再考虑优化,比较顺手。▲ github.com(阿里云通义万相 生成配图,非网页截图)上手提示适合要把语音转写接入自己产品的开发者,也适合做语音方向实验的研究者。装好 Python 环境后按 README 拉推理即可,小模型在 CPU 上也能跑,追求速度再上 GPU;模型权重从 ModelScope 或 Hugging Face 下载,项目本体是 MIT 许可,权重和第三方模型的具体条款仍以仓库 LICENSE 及各模型页说明为准。想先看效果,可以直接翻 README 里的示例音频和在线体验,再决定要不要拉代码——FunASR 仓库 的 Releases 与 Issues 也值得扫一眼。

GitHub项目
最新

DiffSynth-Studio:图像视频生成,一套脚本跑通多个扩散模型

每次想试 Wan、FLUX、Qwen-Image 这类新模型,就得重新配环境、改脚本、对着报错调半天?DiffSynth-Studio 把这些扩散模型的推理与训练收进同一个工程,按模型切换配置就能跑,适合不想在环境上反复折腾的开发者和图像/视频爱好者。核心看点- 一个框架覆盖多类生成任务:文生图、图生视频、视频转视频都在同一套管线里,模型清单直接写在 README,点名就能用。 - 推理和训练同仓:LoRA 与全参微调都有现成脚本,省去自己拼 dataloader 和训练循环的功夫。 - 显存优化做得比较实在:分块、量化、offload 这些手段都能在配置里打开,显存紧的机器也能先跑通再谈效果。▲ github.com(阿里云通义万相 生成配图,非网页截图)上手提示建议用独立的 Python 环境,按 requirements 安装依赖;首次运行会自动拉取模型权重,体积不小,记得留够磁盘。权重多为各自独立许可,商用前请以仓库与模型页的 LICENSE 为准。想先看效果再决定装不装,README 中的示例图和启动命令都能直接复制;版本变化和踩坑经验可以去 DiffSynth-Studio 仓库 翻翻。

GitHub项目

F5-TTS:几秒语音样本,让文字用同一音色读出来

想给应用加上自然点的中英文朗读,又不希望被某家云服务限制住,F5-TTS 是个能在本地直接跑起来的选择。它面向愿意自己配置环境的开发者和内容创作者:提供一段几秒长的参考音频,再输入文本,就能用相近的音色把文字念出来。核心看点它用 流匹配(Flow Matching) 来做语音合成,而不是传统扩散模型那种多步采样思路,因此生成过程更轻;项目支持多语言与中英混排,做字幕配音或播客试听都比较省心;仓库里还给了 Gradio 界面和命令行入口,想先听效果再改代码都可以。文档里也有训练和微调的说明,换数据集或调整音色时,不必从零摸索。▲ github.com 仓库页截图(仅供参考,以 GitHub 为准)上手提示需要 Python 环境,推理建议配一块 GPU;CPU 也能跑,但会慢不少。首次运行时,要从 Hugging Face 下载模型权重,请留意权重页面上的许可说明。代码仓库采用 MIT 许可证;二次修改或商用前,请以仓库内的 LICENSE 和权重条款为准。如果想听合成样例、看最近的更新记录和社区讨论,可以直接从 README 里的演示音频入手,再逛一圈 F5-TTS 开源仓库。

GitHub项目

Stagehand:让浏览器听懂人话,网页自动化不用再死抠选择器

写网页自动化最烦的往往不是反爬,而是对方改一次版,几百行选择器全打翻。Stagehand 换了个思路:你直接写「点开登录、填账号、提交」,由模型去理解页面结构。常写爬虫脚本的开发者、想把网页操作接进 Agent 的团队,都可以先点进来看看。核心看点- 三个动词搞定页面:act 执行动作、observe 先看页面有哪些可操作项、extract 按 schema 抽字段,DOM 变了也不至于整段重写。 - 底层还是 Playwright:需要精确定位时可以下探到原生 API,不是那种全托管黑盒,调试路径还在。 - 两套定位方式:以 DOM 理解为主,页面结构混乱时也能走截图加坐标点击那条路。▲ github.com(阿里云通义万相 生成配图,非网页截图)上手提示Node/TypeScript 项目,npm 装包即可;需要本地浏览器环境,模型侧要配 OpenAI 或 Anthropic 的 API Key,也支持自定义 base URL 接其他网关。建议第一次先用 observe 看模型怎么理解目标页面,再写 act,既省钱也少踩坑。许可证为 MIT,涉及模型服务条款请以仓库 LICENSE 为准。README 里有能直接跑通的最小示例,Releases 更新节奏不慢,碰到古怪页面可以去 Discussions 翻翻别人的解法。去 Stagehand 仓库看看

GitHub项目

VibeVoice:小时级长语音一次合成,多说话人播客不用再切片

做播客、有声书、课程音频的人大概都遇到过同一个麻烦:TTS 一次只能合成几十秒,换人、停顿、语气衔接都得手动拼。VibeVoice 针对的正是这个「长语音」场景,仓库由微软开源,MIT 许可,README 里把推理方式和示例摆得比较直白。核心看点- 长音频连贯输出:面向小时级长语音设计,多人对谈可以一口气跑完,省掉切片、拼接、对齐的重复劳动。 - 对话感更好:对说话人轮换和语气延续做了处理,生成的多人口播比逐句合并自然不少。 - 落地成本低:仓库带推理脚本和网页界面,权重与代码分开托管,想先听效果再决定要不要下模型都行。▲ github.com(阿里云通义万相 生成配图,非网页截图)适合谁音视频内容创作者、播客制作团队,以及在做 AI 语音产品的开发者。常见玩法是本地跑推理,需要 GPU,显存和依赖版本以 README 为准;中文表现建议自己拿几段稿子小样本试听。模型权重的下载范围与商用条款,请以仓库 LICENSE 和模型卡说明为准。想细看就去翻 README 里的示例音频与参数说明,Releases 也能看到模型版本的变化,VibeVoice 仓库主页 值得先收藏一下。

GitHub项目

OpenRLHF:把 RLHF 训练从一堆脚本里拎出来

想跑一轮 PPO 或 GRPO,往往要先在训练框架、推理引擎、分布式调度之间来回拼装。OpenRLHF 把这些环节收进同一个仓库,给想动手做对齐实验的开发者省下大量胶水代码。核心看点- 算法覆盖全:PPO、GRPO、DPO、KTO、RLOO、REINFORCE++ 等都有对应的启动脚本。想换算法基本就是换一个配置文件,不必照着论文重新实现一遍。 - 工程分工明确:调度交给 Ray,训练侧用 DeepSpeed,采样侧接 vLLM 或 SGLang。长回复、多机场景下,吞吐和显存都更可控。 - 示例按规模分层:从单机小模型到集群配置分开摆放,配合文档说明每一步在做什么,读起来不容易迷路。▲ github.com(阿里云通义万相 生成配图,非网页截图)适合谁适合手里有一批偏好数据、想做 RL 微调或复现对齐实验的算法同学和研究者。需要 NVIDIA GPU 和对应的 CUDA 环境,多机训练还得有可用集群;动手前建议先看 README 里的依赖与镜像说明,模型权重的授权条款以各自 LICENSE 为准。项目本身是 Apache-2.0。建议先翻 README 的快速开始,再去 examples 里挑一个最接近你需求的脚本试跑。OpenRLHF 仓库

GitHub项目

SurfSense:NotebookLM 的开源替代,资料自己存、模型自己选

几十篇 PDF、播客转写、YouTube 访谈堆在文件夹里,真正读完的没几篇。SurfSense 针对的正是这个场景:把资料丢进去,再换成自己的模型来提问。如果你不太想把论文和会议纪要交给别人的云,这个仓库值得点开。核心看点多来源归拢:PDF、网页链接、YouTube 视频、搜索结果都能作为输入,自动切片、向量化后进入知识库,不用手工整理目录。模型自己挑:LLM 和 embedding 都能替换,本地 Ollama 或任意兼容接口都行,回答带原文引用,方便回查是哪一页说的。▲ github.com(阿里云通义万相 生成配图,非网页截图)数据留在本地:Docker 起一套,数据库和文件都在自己机器上;Apache-2.0 许可,改起来没太多顾虑。适合谁写综述的研究生、要盯行业动态的产品和投资岗,以及想把访谈素材充分整理利用的播客作者。需要 Docker 环境,外加一个可用模型(云端 API Key 或本地小模型都可以);首次拉镜像、建索引会花点时间,内存太紧的机器别硬扛。仓库 README 里有 Docker Compose 的逐步部署说明,Releases 能看出最近的改动方向,卡住了就去 Discussions 搜一圈。去 SurfSense 看一眼

GitHub项目

moondream:不烧显卡的视觉问答模型,树莓派上也能看图说话

手上有张图片想让模型讲清楚里面有什么,却先被显存门槛劝退?moondream 是个体量很小的视觉语言模型,主打在普通 CPU 甚至边缘设备上直接运行,适合想低成本尝试多模态的开发者、学生和硬件爱好者。核心看点- 不止看图说话:除了图片描述和视觉问答,还支持目标检测与指向(pointing),给一句自然语言描述就能返回框或坐标。 - 体积友好:权重规模很克制,量化之后在 CPU 上也能推理,不必为了处理几张图专门配显卡。 - 接入简单:装好 Python 包,几行代码就能拿到结果,也能起本地服务,方便塞进自己的小应用里。▲ github.com(阿里云通义万相 生成配图,非网页截图)适合谁典型场景包括给相册或扫描件自动生成描述、做低成本的视觉问答小助手、在树莓派一类设备上验证多模态想法。依赖 Python 环境并需下载模型权重;GPU 会更快,但没有也能跑。代码部分有明确的开源许可证,权重另有使用条款,动手前请以仓库 LICENSE 与模型页说明为准。想少走弯路,README 里各类任务的示例和参数写得挺清楚,拿自己手机里的一张照片试起最直观:moondream 仓库

GitHub项目

STORM:给一个选题,让 AI 先做调研再写带引用的长文

写调研报告最烦的不是写,而是前期翻资料:链接散在十几个标签页里,读完还得自己捋观点。STORM 想解决的正是这段最耗时间的「前置调研」,适合经常写综述、行业分析或做课题的人,直接打开仓库照着跑。核心看点- 多视角提问:给它一个主题,它会模拟不同立场的人轮流向资料「提问」,再把答案拼成大纲,比单向搜索更容易覆盖到你没想到的角度。 - 带引用的成稿:输出接近维基百科结构的长文,每个段落附来源链接,方便回头核对,而不是那种一看就很虚的 AI 散文。 - 两种用法:官方有网页 demo 可以直接试;本地运行则是一套 Python 流程,检索模块也留了接口,方便你换成自己的数据源。▲ github.com(阿里云通义万相 生成配图,非网页截图)适合谁写文献综述的学生、做行业研究的产品和市场同学,以及想研究「检索 + 长文生成」链路的开发者。本地跑建议有 GPU 更舒服,也可以只调用 API;走检索的话需要自己准备搜索引擎或向量库的 Key。代码采用 MIT 许可证,模型权重和第三方服务条款仍以仓库 LICENSE 和对应说明为准。想先看效果,README 里有演示和命令行示例,可改造的地方集中在检索与大纲两段,翻一遍 STORM 的 README 基本就能判断值不值得动手。

Welcome! This site is in Chinese. Tap EN in the top bar to read in English.