15分钟入门AI动画!Mov2Mov零基础教学,用Stable Diffusion生成酷炫逐帧重绘动画短视频,开启低成本动画时代 | 扩展插件教程

作者: Nenly同学分类: 设计·创意 发布时间: 2023-07-05 00:04:11 浏览:212641 次

15分钟入门AI动画!Mov2Mov零基础教学,用Stable Diffusion生成酷炫逐帧重绘动画短视频,开启低成本动画时代 | 扩展插件教程

渣男DJ:
万人血书,求一期ps控制sd进行ai绘画的教程[打call](1/10000)

【回复】看到这条,已经做出来啦,见:BV1Zj411h7od
【回复】回复 @Nenly同学 : 能不能出一期deforum的讲解视频[大哭]
Nenly同学:
下集渲了快一个小时,要上字幕才发现渲崩了,大家留着明早一起看吧[tv_笑哭]

【回复】回复 @暴走傻瓜 :已发!
【回复】up主你好 能麻烦出一期mod net的教程嘛[脱单doge]
粉色少女会魔法:
ai动画试了一段时间,各种插件方法也试过,还是不可避免的会闪,就算补帧也会,要是删得太多再去补,动画会变得不流畅。而且特征很难把握,花纹细节更是闪得离谱,手更是重灾区。而且不知为何,我图生图后,所有参数都一样的情况下,再次重绘序列,也会变得完全不一样…也有看过up以太之尘。我只是想试试把这种技术与纪录片结合一下,用作历史还原、特效和片头片尾而已。希望能得到解惑

【回复】以现在的SD以及controlnet基础,即使是使用ebs或者其他辅助工具,up提到的几个难点也是不可能轻易解决的。我包括我熟悉的一些ai动画up,制作一个视频,大多数时间也在不断试错,真正成品率也不高。当然有人分享经验,能够更少的走弯路,肯定更好。
【回复】ai动画只能说图一乐,生成图片都有良品率问题
【回复】回复 @粉色少女会魔法 : 可以去搜可口可乐制作的一个叫做《Masterpiece》的广告片,就是使用StableDiffusion结合实拍、建模生成的,调教得非常好,应该可以属于目前业内AI“动画”应用的典范之一了。
Reio丶Luffy:
尝试了ai动画,我的1660ti开始叫了,它是不是要进化了[脱单doge][微笑]

【回复】我的也开始叫了[大哭][大哭][大哭]
可能性盗墓:
一个理解啊,在我感知上AI 动画并没有真正做出动画的能力,这种感觉就好像是手机相册的滤镜,拆解了每一帧画面然后添加滤镜后导出。用他做动画感觉上整完分镜后你还要拍一个视频或者做一个mmd。然后给这个视频套上滤镜。 然后因为ai本身生成图片的不稳定,要做到完全无崩坏还有动画的特效和细节,到最后还是要一帧一帧修正画面。 未来可期吧[思考]

以太之尘丨:
讲AI动画那我可就不困啦[打call] 确实需要这样一个基础的教程,让大家知道AI动画的原理是什么和困难在哪里,up逻辑清晰的展现了出来。

泰瑞尒:
mov2mov安装后怎不显示啊,插件栏里没有这个插件,从拓展里安装也没用

【回复】回复 @六月份jbbn :降版本可以用
【回复】回复 @泰瑞尒 :现在我这里都没法下载了[tv_笑哭][tv_笑哭][tv_笑哭]怎么搞哥交流一下
【回复】回复 @六月份jbbn :秋叶的绘世启动器里可以切换sd的版本,我记得是用上一个版本的sd就可以用mov,但是在老版本里会有一些其他插件功能用不了。
小鲁班fight:
UP!实在搞不懂需要Python(GPU)版的EbSynth配置,你这边正确的modnet全网独一份,我就用这个了,泰裤辣!

【回复】我提供一个额外的方式,ISNET Pro里面也有一个可以智能提取蒙版的功能,看了下集的朋友如果生成蒙版有问题,可以试着用ISNET Pro拆帧生成蒙版以后,把帧和蒙版分别放进frame和mask里,再运行下面的步骤也可以起效的!
【回复】回复 @Nenly同学 : 好的谢谢UP!
咸鱼老王6:
up啥时候讲下脚本 multi frame rendering[星星眼]

【回复】MFR的优劣势我在最后一部分也抓出来分析啦,它的好处在于连续、丝滑,但这一点EbSynth也能做到,3倍时长渲染的代价有点太大了,会让试错成本变得非常高。而且对于一些较为复杂的多分镜视频来说,这种连续渲染的思路可能也会导致一些奇怪的过渡。综合来说我不认为它现在是一个比较实用的方案,后续不一定会专题介绍。但借助脚本里的部分功能进行单帧提示词反推是一个挺实用的小技巧,这个可能会讲一讲哈!
最后の魅:
本来想睡了,一看干货终于来了,起床开电脑[吃瓜] 记得炼丹lora快点啊[星星眼]

【回复】注意休息!明早还有一集,可以攒着一起看~
【回复】回复 @Nenly同学 :不了,立马实操,早都准备好了[doge]
叶锁枯城:
半年多没玩这些,看到补针和流畅的ai视频又来了兴趣 关于AI视频转绘和重绘,99.9%都营销号,四处翻找,想起来之前看过up做的comfyui教程 果然还是up专业一些,学东西光学操作有个锤子用,不了解原理到最后还是一团雾水只能被别人牵着走 [脱单doge]给有耐心的up点赞

【回复】感谢,这期其实是去年手段还没有那么成熟的时候做的,看看了解一个大概就好!现在有更优的方案了,是使用AnimateDiff结合ControlNet做转绘,上个月更了一期基础教程,后续有机会再更新转绘这块的专门操作~
【回复】回复 @Nenly同学 : [打call]up加油,对于这种比较内行的知识科普还是很有必要的
坏坏de嗳:
安装了mov2mov ,界面里,没有 视频生成模式 个

菜叙鯤:
求教安装完插件后在ui界面不显示该插件选项,这是为什么呢

靈cynthia:
请问Nenly大佬,我下载你云盘里的安装包并解压到extensions的方法安装,重启后在webui的扩展标签下能看见“已安装”里有mov2mov,但顶端标签里没有mov2mov。尝试换了git上最新的mov2mov-master也一样,也是已安装的表格里能看见它、顶端没有标签。我用的是云端部署,xiaolxl大佬的社区镜像v10。所以我装到哪里去了呢?

喝酸奶的坚坚:
安装了以后,重新加载UI界面上没有mov2mov,是不是插件太多了 有限制?

【回复】不是,1.6版本以后的WebUI和mov2mov不兼容,作者小丁老师好像也有段时间没维护过了。可以先尝试用批处理合成,目前下集EbSynth这个流程也是跑的通的~
【回复】回复 @Nenly同学 : 用1.4和1.5也没有啊,但扩展那边确确实实是安装完整了的,可以看到。就是主界面没有mov2mov的选项...头疼[大哭][大哭][大哭]
【回复】回复 @_布鲁克林一枝花 : https://www.bilibili.com/read/cv24812100/?jump_opus=1 在这个页面里找 mov2mov的git,用这个安装,然后重启软件就可以了
拉胯运动员:
大佬我的m2m插件安装好之后重启ui,但是显示不出来这个插件……代码显示这样怎么回事啊[大哭][大哭][大哭]

鸡总么么哒:
秋叶的脚本的m2m怎么用不了呢,选了之后没有额外的设置页面

【回复】另一期视频底下的反馈,1.5.1似乎和m2m不兼容,有需要的朋友可能得等作者更新了

教程 AI动画 StableDiffusion 零基础教学 插件 你被骗了 AI绘画 原神 AIGC 这就是AIGC

如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!

更多相关阅读