然后好奇屋: 万字分享我的《Devices》AI视频全流程复盘，免费开源我的ComfyUI工作流 包括创作灵感、工作流解析、AI可控与不可控的经验思考。 全文：https://f7rdq2pzot.feishu.cn/docx/HjZXduuNgolptzxiAhDcgeJdnYg 我一直在思考“AI原生内容”是怎样的？ 如何平衡可控性与不可控性？ 如何做出AI“原生”视频？ 如何结合传统视频工作流与AI工作流？ 🎶创作灵感：发挥AI优势，做AI原生内容 制作这个世界原本就存在的动画/视频，观众会不自觉的将它与原有事物进行比较。 将AI无限生成的特性发挥到极致，不要让AI做稳定可控的多帧连续渲染，让它多变风格，发挥想象力和算力优势。 在看到OpenInterpreter的宣传开场，有被炫目的色彩震惊，也是我的灵感来源之一。 变化的是风格，不变的是视觉焦点的主体。 🎊工作流详解：转绘是AI可控的最佳实践 Blender动画制作 + ComfyUI转绘 + 蒙太奇剪辑 就是工作流核心。 1. 利用Blender动画的可控性，输出深度图和线框图，为转绘提供可控要素。 2. ComfyUI使用模型控制风格、提示词控制语义 3. 基于文字的蒙太奇剪辑配合音乐传递流动色彩 🪄利用AI的可控与不可控 1. 动画思路：关掉AnimateDiff平滑吧！ 放弃动画平滑控制，AnimateDiff适合比较高帧率的平滑动画，可控反而阻碍了AI的发挥；保持线条不变控制，最核心的控制模块在于深度图和线框图的利用。线框图我会调到0.8+，深度图视情况<=0.35。 2. 动画思路：试试Prompt Travel？ 变化的是色彩 - 设置时间戳，每个时间戳的提示词不一样。 - 时间戳变幻之间会有线性插值，实现自然平滑的过渡。 不变的是规律与节奏 它其实没有那么多种的风格，是在固定的频率、固定的顺序和有限的风格中循环切换。 - 在单个设备的两秒中，我保持了每隔3帧的变化色彩节奏。 - 不同的设备，色彩变幻规律是一样的，按照相同提示词描绘的色彩变化的。 3. 单帧思路：怎么又潮又好看？ - 线条不能多不能少：使用了Flat2D的base model和anime_minimalist 的lora尝试了大量的风格和提示词的测试。经常会出现错乱情况，详情见原文 - 引入人物的严重错乱：尽可能使用与人不太相关的物体。然后在负向提示词中拼命加手、人、头等词语 - 背景出现主体无关的设备：加高深度图ControlNet的权重 - IpAdapter控制线条风格：weight适当0.4，noise0.4放行给prompt控制 🪴把工作流串联起来 要是纯粹AI生图去做，肯定做不出来，你怎么保证它可以按照你想要的方向去旋转？ 还有如果只是用传统的方式，做这个短片肯定非常耗时，因为很多背景只是{placeholder_for_colors}，不需要精细处理。 只是用AI+Blender做一个类似迪士尼的动画，效果也一定没有原来工业界的动画好看，仅仅是AnimateDiff的闪烁就会让人昏眩摸不着头脑。 AI的不可控，就让它发挥不可控的价值，以前的工作流也一定不要丢掉。 而两者结合做出来的，可能才是AI原生视频。 创作不易！终于肝完了！望转发收藏点赞！ 视频链接：https://m.okjike.com/originalPosts/6605652da922aa28d0300178?s=ewoidSI6ICI2NDk0MzEwNDA1MDU0NDcyNjRkNmI3MDEiCn0= 飞书链接：https://f7rdq2pzot.feishu.cn/docx/HjZXduuNgolptzxiAhDcgeJdnYg 工作流：https://openart.ai/workflows/pXkm6GZX8G19I22Odeo4 公众号链接：https://mp.weixin.qq.com/s/tkcvmtybmj2xHkIaeIQypw