跳到内容

夜深了,注意休息,愿你今夜好梦。

  • 9 回复
  • 535 浏览

AI漫画分镜的bug修疯了

参与讨论

试了ComfyUI+AnimateDiff做漫画分镜,结果角色脸崩得像换了个人。有人用ControlNet修过连续性的吗?版本1.5,采样器Euler a,步数25,还是飘。

讨论区

按楼层回复,支持引用与表情;使用 @用户名 或 @昵称 可提醒对方;发言计入圈子贡献字数。

9s 条评论

  1. 运维祭天
    运维祭天 绽放14.1k

    @接口又500 脸崩到亲妈不认?我私藏一个偏方:AnimateDiff 1.5 配合 LoRA 固定角色,再加个 IP-Adapter 做风格锁定。步数25确实少了,我一般稳在40。@周末补作业 运动镜头飘的话,试试把 ControlNet 换成 OpenPose,骨架锁死了轮廓就稳了。SDE 采样器我试过,细节好点但耗时翻倍,DPM++ 2M Karras 反而更飘,别踩。

  2. 安全佬路过
    安全佬路过 成长9,731
    引用 运维祭天

    @接口又500 脸崩到亲妈不认?我私藏一个偏方:AnimateDiff 1.5 配合 LoRA 固定角色,再加个 IP-Adapter 做风格锁定。步数25确实少了,我一般稳在40。@周末补作业 运动镜头飘的话,试试把 ControlNet 换成 OpenPose,骨架锁死了轮廓就稳了。SDE 采样器我试过,细节好点但…

    @运维祭天 OpenPose锁运动镜头我试过,但背景也跟着乱飘。你用的哪个预处理器?带个版本号

  3. paper难产中
    paper难产中 绽放12.2k
    引用 安全佬路过

    @运维祭天 OpenPose锁运动镜头我试过,但背景也跟着乱飘。你用的哪个预处理器?带个版本号

    @安全佬路过 OpenPose预处理器我用的是openpose_faceonly,背景乱飘可以加个depth-only ControlNet做双路锁定,但显存直接翻倍…实验还没跑完

  4. 深夜改BUG
    深夜改BUG 绽放14.4k
    引用 运维祭天

    @接口又500 脸崩到亲妈不认?我私藏一个偏方:AnimateDiff 1.5 配合 LoRA 固定角色,再加个 IP-Adapter 做风格锁定。步数25确实少了,我一般稳在40。@周末补作业 运动镜头飘的话,试试把 ControlNet 换成 OpenPose,骨架锁死了轮廓就稳了。SDE 采样器我试过,细节好点但…

    @运维祭天 IP-Adapter 加 LoRA 这套我试过,角色脸是不崩了,但背景细节糊成一坨,尤其特写镜头。你 IP-Adapter 用的 clip 还是 plus?@周末补作业 1.5 对大幅度运动就是不行,我后来切了 SVD,虽然模型大但骨骼锁死效果好很多。Canny 权重拉到 0.8 再高也会飘,不如直接上 OpenPose + DensePose 双路 ControlNet。

  5. 午后续命水
    午后续命水 成长9,188
    引用 深夜改BUG

    @运维祭天 IP-Adapter 加 LoRA 这套我试过,角色脸是不崩了,但背景细节糊成一坨,尤其特写镜头。你 IP-Adapter 用的 clip 还是 plus?@周末补作业 1.5 对大幅度运动就是不行,我后来切了 SVD,虽然模型大但骨骼锁死效果好很多。Canny 权重拉到 0.8 再高也会飘,不如直接上 O…

    OpenPose+DensePose双路ControlNet试过,显存占用直接爆炸,40系16G都扛不住。 @深夜改BUG 你SVD切哪个版本?1.0还是1.1?

  6. Debug到秃头
    Debug到秃头 绽放12.1k
    引用 午后续命水

    OpenPose+DensePose双路ControlNet试过,显存占用直接爆炸,40系16G都扛不住。 @深夜改BUG 你SVD切哪个版本?1.0还是1.1?

    @午后续命水 SVD 1.1显存优化过,16G勉强能跑,但得开xformers和fp16。DensePose我换过ResNet34版,比默认的50省点显存,轮廓精度没差太多。

  7. Debug到秃头
    Debug到秃头 绽放12.1k
    引用 午后续命水

    OpenPose+DensePose双路ControlNet试过,显存占用直接爆炸,40系16G都扛不住。 @深夜改BUG 你SVD切哪个版本?1.0还是1.1?

    @午后续命水 SVD 1.1配xformers+fp16,16G能跑但batchsize得压到1。DensePose用ResNet34版确实省显存,我试过轮廓精度和50版差不到5%,够用了。

  8. P值小于0.05
    P值小于0.05 成长11.4k

    @接口又500 我也踩过这坑,1.5的AnimateDiff角色一致性就是玄学。试试把ControlNet的Canny权重拉到0.8,步数加到35,样本量够的话脸能稳住八成。

  9. 周末补作业
    周末补作业 成长10.5k
    引用 P值小于0.05

    @P值小于0.05 拉Canny权重到0.8试了,步数也加到35,但角色轮廓还是有点飘。版本1.5是不是对运动幅度大的镜头无解?有人试过换SDE或DPM++ 2M Karras没?

发表评论

登录后发表评论

登录即可参与楼层讨论,支持引用回复与 @ 提醒。

前往登录页

Welcome! This site is in Chinese. Tap EN in the top bar to read in English.