一看就会的AIGC动态视频全流程

Recommanded by editor
北京/设计爱好者/1年前/1198浏览
一看就会的AIGC动态视频全流程Recommanded by editor
YiYuy
一看就会的AIGC动态视频全流程
Collect
前言:
本教程会从4个阶段依次递进完成动态视频制作,依次是:
1.大模型生成剧本→2.midjourney生成静帧→3.runway生成动效→4.suno生成音频
。相关模块比较熟悉的朋友可以自行跳过。
首先请看AIGC全流程的动态视频展示:
Current Time 0:00
/
Duration Time 0:00
Progress: NaN%
Playback Rate
1.00x
一. 大模型生成剧本:
1.
大家可能经常会遇到一个问题,为什么我的语言大模型像是一个傻子,经常答非所问,或者给我讲一些范范的大道理。这里就要引入一个词语概念:
Prompt(提示词)
想要让语言大模型回答的更专业,实际上要让大模型知道自己
要扮演的角色、完成的工作和达到的目的
,话不多说,直接展示:
“假设你的身份是一名专业的AIGC动效设计师,要制作电影《星际穿越》的重置视频,目标是创作一个能引发对宇宙、人生和未来的深刻思考的视频。首先第一步,要用midjourney制作静帧,请你写出分镜脚本,并写出相应的提示词,用来给midjourney做参考。脚本和提示词尽可能的详细,镜头画面和配色风格可以参考《星际穿越》的预告片。”
一看就会的AIGC动态视频全流程
Collect
一看就会的AIGC动态视频全流程
Collect
画面关键词描述我觉得还不错,但是镜头有点少了,
采用追问的方法
,在让大模型多写点看看。
一看就会的AIGC动态视频全流程
Collect
这里推荐一个公开的Prompt库,提供了多种场景的提示词以供大家进行使用。
地址:https://prompt-shortcut.writeathon.cn/
一看就会的AIGC动态视频全流程
Collect
2.
相信大家也在常用MJ,SD这些产品了,其中一个关键点就在于“抽卡”,想要获得好的效果,适量的抽卡可以说是必不可少。大模型类产品也是同理,想要获得满意的答案,除了优化Prompt(提示词)外,
通过在不同平台进行提问,也能获得更多的答案。
这是因为不同大模型投喂的参数各有所长,通过获得更多的答案来进行筛选比较,往往也能提高效率。
这里共享一下我常用的大模型平台,其中的前3个也是目前仅有的超过万亿参数的大模型:
1.chat gpt:https://chat.openai.com/
2.谷歌gemini:https://deepmind.google/technologies/gemini/
3.文心一言:https://yiyan.baidu.com/
4.通义千问:https://tongyi.aliyun.com/
二. midjourney生成静帧
首先进入midjourney官网,点击打开discord进入生图频道
midjourney官网:https://discord.com/
一看就会的AIGC动态视频全流程
Collect
通过大模型给出的答案,我们已经获得了相关的镜头画面和提示词,我们可以直接复制关键词并翻译到midjourney上开始文生图。
一看就会的AIGC动态视频全流程
Collect
这是通过关键词生成的效果图,看上去还是不错的,但是相比电影画面,还是缺少了一些质感和色彩对比,接下来就需要添加一些关于风格和质量的提示词来让画面更接近电影质感。
一看就会的AIGC动态视频全流程
Collect
我添加了“尼康D850,超高清,电影质感,解剖学正确和墨镜”关键词来增加电影质感。可以看到整体的色调和明暗关系有了很大的提升。我觉得第2张图很有张力,接下来就选择第2张图进行视频生成。
一看就会的AIGC动态视频全流程
Collect
这里可能会有朋友不知道填写哪些关键词, 推荐一个网站moonvy。网站提供:
质量、绘画、画面效果、容貌、构图、命令6个模块
,可以通过点击添加自己喜欢的效果来进行测试。
网址::https://moonvy.com/apps/ops/
一看就会的AIGC动态视频全流程
Collect
三. runway生成视频
接下来就是激动人心的视频抽卡时刻,ruanway视频生成,
选择Start Generating进入
视频生成页面。
runway官网: https://app.runwayml.com/
一看就会的AIGC动态视频全流程
Collect
一看就会的AIGC动态视频全流程
Collect
1.runway提供了多种视频制作模式,首先是
上传图片让runway自动理解画面并生成动态视频
,点击generate 4S即可生成4秒钟的视频。
一看就会的AIGC动态视频全流程
Collect
一看就会的AIGC动态视频全流程
Collect
2.第2种方法是
笔刷动态调节功能
,目前至多支持5个笔刷,每个笔刷都可以
控制物体进行XYZ三轴向运动
和环境融合动态。涂抹好运动部分后,还可以调整数值参数的大小,根据自己的喜好让画面的物体进行运动。
一看就会的AIGC动态视频全流程
Collect
一看就会的AIGC动态视频全流程
Collect
3.同时runway也
支持文生图和文生视频功能
,不过画面美感相对于MJ还是有些差距,同时也会出现一些明显的画面问题,例如手指时多时少。
一看就会的AIGC动态视频全流程
Collect
一看就会的AIGC动态视频全流程
Collect
四. suno生成音频
Suno AI平台能够生成高质量音频和立体声效果的歌曲。同时
支持多语言音乐输出
,输入什么语言的提示词,就会以什么语言展示,输入中文提示词,就会生成中文歌曲,此外还可以
生成纯音乐或选择特定的音乐风格
suno官网:https://app.suno.ai/
由于我想生成《星际穿越》的预告背景音乐,所以写出的提示词为:为电影《星际穿越》创造史诗般的音乐,前半部分节奏偏快,后半部分节奏偏慢。
一看就会的AIGC动态视频全流程
Collect
同时,suno也支持更进一步的
定制化作曲
,打开Custom Mode开关,填写想要的歌词,曲风以及标题。
一看就会的AIGC动态视频全流程
Collect
suno.wiki提供了相应的提示词标签。有需要的朋友可以对照标签来进行抽卡听曲
一看就会的AIGC动态视频全流程
Collect
结尾:
AIGC流程的出现,极大的提高了生产效率。
天马星空的想象和良好的审美在这里就是杀出重围的宝剑。
希望大家看完文章后,能有所收获。
33
Report
|
67
Share
相关推荐
何享健科学基金 | 奖章设计
Recommanded by editor
内容含视频
新生纪元
Recommanded by editor
内容含视频
2021工作总结
Recommanded by editor
内容含视频
2020 年度作品总结
Recommanded by editor
内容含视频
《暗夜骑士》
Recommanded by editor
内容含视频
科技
科技
科技
科技
作品收藏夹
评论
in to comment
Add emoji
喜欢TA的作品吗?喜欢就快来夸夸TA吧!
推荐素材
You may like
相关收藏夹
科技
科技
科技
科技
作品收藏夹
AIGC
AIGC
AIGC
AIGC
作品收藏夹
AIGC
AIGC
AIGC
AIGC
作品收藏夹
AI
AI
AI
AI
作品收藏夹
AIGC
AIGC
AIGC
AIGC
作品收藏夹
游戏
游戏
游戏
游戏
作品收藏夹
大家都在看
Log in