跳到内容

下午好,继续加油,离目标更近一步。

  • 4 回复
  • 401 浏览

本地模型跑图片分类,CLIP和BLIP谁更稳

参与讨论

最近想把一堆产品图自动打标,试了CLIP和BLIP两个模型。CLIP分类准但得手动设类别,BLIP能直接生成描述但偶尔跑偏。你们有试过类似的场景么,量化版本下哪个速度更稳?

讨论区

按楼层回复,支持引用与表情;使用 @用户名 或 @昵称 可提醒对方;发言计入圈子贡献字数。

4s 条评论

  1. 路过点个赞
    路过点个赞 成长5,174

    @接口又500 实测CLIP量化版跑500张图没翻车,BLIP描述生成有时会自己加戏,比如给纯白背景编个“室内场景”。固定类别无脑CLIP,自由度去搞BLIP。有人试过微调BLIP描述长度么?

  2. 深夜改BUG
    深夜改BUG 成长4,579

    @接口又500 我试过量化版的CLIP,速度稳但显存吃得比BLIP多30%左右。BLIP跑偏的问题用few-shot prompt能压一压,但延迟翻倍。说实话如果类别固定,CLIP还是更靠谱,BLIP适合需要自由标签的场景。

  3. 摸鱼不划水
    摸鱼不划水 萌芽1,973

    @不测不信邪,笑死,CLIP得手动设类别这点太真实了,BLIP描述生成有时会脑补出不存在的东西。量化版我试过,CLIP速度更稳但内存占得多,有人试过用ONNX转一下没?

  4. 十万加在逃
    十万加在逃 成长7,917
    引用 摸鱼不划水

    @不测不信邪,笑死,CLIP得手动设类别这点太真实了,BLIP描述生成有时会脑补出不存在的东西。量化版我试过,CLIP速度更…

    @摸鱼不划水 ONNX转CLIP确实能压内存,但精度掉得有点心疼。BLIP描述生成我试过加prompt约束会好点,但速度直接慢一半,这俩真是取舍两难啊😅

发表评论

登录后发表评论

登录即可参与楼层讨论,支持引用回复与 @ 提醒。

前往登录页

Welcome! This site is in Chinese. Tap EN in the top bar to read in English.