在当今的数字创作领域,借助强大的 AI 工具如 StableDiffusion(SD)模型,能轻松制作出令人惊艳的视频。下面为大家详细介绍利用 SD 模型提示词制作视频的流程。
有需要stable diffusion整合包以及提示词插件,可以扫描下方,免费获取
一、准备工作
- 安装 SD 模型:你可以从官方网站或相关开源平台获取 SD 模型的安装包。安装过程可能因版本和操作系统而略有不同,但一般都有详细的安装指南可供参考。确保安装完成后,软件能正常运行。=
- 准备提示词:提示词是引导 SD 模型生成画面的关键。例如,如果你想制作一个梦幻森林的视频,提示词可以是 “阳光透过茂密树叶洒在神秘森林的地面,有五彩斑斓的蘑菇和飞舞的蝴蝶”(Sunlight shines through the thick leaves and sprinkles on the ground of the mysterious forest. There are colorful mushrooms and fluttering butterflies.)。提示词越详细、生动,生成的画面就越符合你的预期,同时也别忘了添加反向提示词。
二、生成图片序列
-
打开 SD 模型软件:启动已安装好的 SD 模型应用程序。
-
-
-
**
** -
输入提示词:在软件界面的指定位置,输入你精心准备好的提示词。
-
设置参数:根据需求调整参数,如图片尺寸(常见的有 512×512、768×768 等)、生成图片数量(一般一个视频需要多帧图片,可根据视频时长决定生成数量,例如每秒 24 帧的视频,10 秒可能需要生成 240 张图片)、采样方法等。不同参数会影响生成图片的效果和质量。
-
生成图片:点击 “生成” 按钮,SD 模型会根据提示词和参数设置,生成一系列图片。生成过程可能需要一些时间,具体取决于你的电脑性能和设置的参数复杂度。
三、视频合成
-
选择视频编辑软件:推荐使用deform插件。
-
-
接下来就要讲到具体提示词和工具操作。
启动 SD WebUI 后,来到 “扩展 – 可下载” 页面搜索 “Deforum ”,然后点击安装即可。安装完成后,重启 SD WebUI,页面中就会多出一个 Deforum。
选中 Deforum,然后选择一个基础模型(和文生图选择模型的方式一样),然后点击生成就会开始生成一个视频。
为什么什么都没输入就开始生成视频了?
原因是 Deforum 默认给我们填好了一些参数。
点开提示词可以看到一段 JSON
{
"0": "tiny cute bunny, vibrant diffraction, highly detailed, intricate, ultra hd, sharp photo, crepuscular rays, in focus",
"30": "anthropomorphic clean cat, surrounded by fractals, epic angle and pose, symmetrical, 3d, depth of field",
"60": "a beautiful coconut --neg photo, realistic",
"90": "a beautiful durian, award winning photography"
}
这段 JSON 的意思是:
- 第0帧要生成:可爱的小兔子,明亮的衍射,非常详细,复杂,超高清,清晰的照片,黄昏光线,聚焦
- 到了30帧要生成:拟人化干净的猫,被分形包围,史诗般的角度和姿势,对称,3d,景深
- 到了60帧要生成:一个美丽的椰子——底片,逼真
- 到了90帧要生成:美丽的榴莲,获奖摄影
需要注意的是,这段 JSON 用的是标准 JSON 格式,key 和 value 都要用双引号包着,最后一段不需要添加逗号。
等待一段时间就会得到一个视频。
这个原理其实和图生图有点类似,基于提示词以及上一帧画面去生成下一帧画面。
你可以根据自己想要的内容去写提示词,天马行空一点也没关系。
根据需求去设置视频的宽高,在“运行”面板可以设置。
而关键帧面板呢,可以设置视频的总帧数、动画模式(2D或者3D)。页面往下拉还可以看到“运动”这个面板,在这里可以根据自己需求设置运镜方式。
在生成文章开头的那个视频效果,用到的提示词是:
{
"0": "A whimsical forest with giant mushrooms glowing in various colors, and strange creatures peeking from behind trees.",
"30": "A river of liquid light flows through the forest, with luminescent fish swimming against the current, casting a magical glow.",
"60": "Floating islands in the sky, each with its own unique ecosystem and creatures.",
"90": "A meadow where flowers bloom in rapid succession, changing colors and shapes in a mesmerizing dance.",
"120": "A bustling fantasy city with streets lined with floating lanterns and buildings with intricate, otherworldly architecture."
}
正向提示词我输入了 Retro Ghibli scene
,这是宫崎骏动漫的风格。
视频最终出来的风格和质量和你选择的模型也有很大关系。
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
对于0基础小白入门:
如果你是零基础小白,想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!
零基础AI绘画学习资源介绍
👉stable diffusion新手0基础入门PDF👈
(全套教程文末领取哈)
👉AI绘画必备工具👈
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉AI绘画基础+速成+进阶使用教程👈
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
评论(0)