如何使用MidJourney和ChatGPT制作动画短片?

article/2024/9/20 14:58:04

e2ee7b8e969b74d9a5368e5e2a503f5c.png

Ammaar Reshi

当我制作这部使用生成式人工智能制作的蝙蝠侠动画短片时——我不知道它会在不到一周的时间内获得 700 万次观看。

34ec7764eed4d4f0da8da22cabdd4868.jpeg

想学!给我们讲解下是整体的制作流程吧!!

463dd05c527ae1ef96eb8bc8a7d5088d.png

opus

5ff10eeb3a21902a875c9f8bb8a26e42.png

Ammaar Reshi

我不是电影制作人,也从未写过剧本。我只是有还不错的想象力。有一天,我看到有人用 Midjourney 制作了一部动画短片。然后我就心动了…

我花了 6 个小时来研究他们是如何做到的。我疯狂地实验,在室友的鼓励下,我把制作成果分享了出来。 我将在下面详细说明我的实现步骤。

  1. 从一个想法开始

  2. 使用 ChatGPT 创建引人注目的脚本

  3. 可视化你的脚本

  4. 使用 MidJourney 创建场景

  5. 使用 Pixelmator 清理 MidJourney 生成的图像以获得高质量结果

  6. 使用 MotionLeap 制作动画让您的短片栩栩如生

  7. 使用 Adobe 的 AI 工具添加旁白、挑选音乐和清理音频

  8. 把它们放在一起

从一个想法开始

从一个想法开始!这个想法将串联所有的过程:脚本、图像以及风格。它对你来说越个性化——你就越容易挑选出表达该想法的素材。这可能是您做过的一个梦想,一个您想要讲述自己故事的心爱角色,或者您想要重现的珍贵回忆。

所以,我最终选择了蝙蝠侠。我喜欢马特·里夫斯的《蝙蝠侠》,也喜欢保罗·达诺的《谜语人》的深度。我也很喜欢他不确定蝙蝠侠是不是布鲁斯韦恩,我想重复一下故事的那一部分:谜语人终于弄明白了。

840e0ca60036e62b4c8769d2f1dfd0d1.png

蝙蝠侠最大的秘密被一个恶棍慢慢揭开,这个恶棍以通过隐秘表达自己的方式制造悬念和紧张而闻名。

但是……ChatGPT 能够体现这种来势汹汹的形象吗?试试!现在我们有了想法,是时候生成脚本并找出答案了。

PS 如果你想不出一个主意……你可以问 ChatGPT 并集思广益,直到你找到你喜欢的东西 😂。

把这个想法变成剧本

输入一个提示,我最初的输入是:

“Write a riddle in the style of the Riddler from Batman where he slowly reveals Batman's identity”

“以蝙蝠侠谜语人的风格写一个谜语,慢慢揭示蝙蝠侠的身份”

c0ef4415d3adeff097744e3cdc995d12.png

我意识到这里的提示不够清楚——它写得很混乱,而且并不是那么神秘。

但是,这是一个迭代的过程!所以我得到了更具体的:

b2540842328e43dac13c543cb9fb9d9e.png

在这里,我意识到谜语并不是那么好,对话产生了相当平淡的结果。但这给了我一个想法:我不想在两个角色之间来回切换,我想要一个独白,他慢慢地揭示蝙蝠侠的身份,所以我只要求:

f99cb1898a27e08dd8fd20bc63092c3e.png

现在我们到了某个地方!有很多废话,比如第二段——而且它真的没有增加任何内容。但是,许多其他位足以使用。

我还单击了“重新生成”响应按钮,这有助于保留第一个提示的方向,但让独白有所不同。您只需要筛选内容即可找到您喜欢的内容。例如,我偶然发现了这行精华:

84cd9acb32e723e9c99441d545bb6b96.png

现在独白需要来自 The Riddler,所以它不能是第三人称,但这里的想法基础很棒!所以我只是改写了它。

“And the truth is that you are the Riddler's greatest puzzle, the one that he has finally solved.”

→ “You were my greatest riddle, the one I have finally solved!”

“事实是,你是谜语人最大的谜题,他终于解开了这个谜题。”

→ “你是我最大的谜语,我终于解开了!”

我喜欢它如何捕捉到你意想不到的东西;谜语大师,一个谜题和神秘信息的大师,自己被一个谜题吞噬了。尝尝自己的药。他终于破解了一个。

既然剧本有了坚实的基础,就该考虑如何将它付诸实践了!

想想你将如何让你的剧本栩栩如生

在这里,我从 ChatGPT 中获取脚本并删除了我不喜欢的部分,并添加了一些我自己的部分。

f08208950f404481f36bb6d40badd023.png

我希望最后的镜头是戏剧性的。当他的身份被揭露时,我正在想象穿着他的服装的蝙蝠侠和穿着同样的服装但没有面具的布鲁斯韦恩之间的强烈闪光。

慢慢,勾勒出想象中的场景 

-接下来 是时候用 MidJourney 将它们变成现实了!

使用 MidJourney 可视化脚本

我喜欢做的第一件事就是尝试不同的美学来感受故事中的场景会是什么样子。一旦你缩小了范围,你的短片中的所有图像就会有一个一致的风格。

我想让它给人一种阴森、孤独、险恶的感觉——毕竟这是被关在阿卡姆疯人院里的谜语人。我想看看我是否可以将其与蜘蛛侠电影的感觉结合起来。所以这就是我最初的想法,输入:

44d2e5d78bbc6551d4f1c7538f43bb48.png

详细参数说明如下:

a69c4c3d37123e7dceff61f00d981272.png

dfed4c7bda1069fe359813bd2cea35ce.png

哦,这里有一些好东西。所以,现在我可以做三件事:

单击按钮编号U 1、2、3、4 以在网格上生成该编号图像的放大版本,非常适合挑选您想要使用的镜头或查看它的更高分辨率版本。

单击按钮编号V 1、2、3、4 以在网格上生成该编号图像的变体,有助于更深入地了解特定风格但生成不同的镜头。

单击 U4 旁边的刷新按钮,如果您不喜欢任何选项但想使用相同的描述重试,这只会尝试使用相同的提示重新生成全新的结果。

我喜欢 U1 和 U3 的表演,所以我把它们挑了出来,这是 U3,很可爱吧?

8a15c823abbc0bc0b6bfacc10c1b0b7e.png

这是一种很好的风格,有点俏皮——但我想让我的短裤感觉更黑、更冷酷。

所以我稍微改变了它并添加了更多描述符:

0a94145e780d4131b7b5f3d9642cdde3.png

从描述中删除“卡通”并选择“恐怖恐怖电影”是第一个变化。然后我在提示的部分中加入了更多的感觉描述,所以“怪异”进入了我描述背景的部分。

最后是艺术风格,我选择了“Arkham asylum art”,我认为这会让 MidJourney 挑选出描绘蝙蝠侠精神病院的艺术。不可能让人觉得卡通,对吧?

da433a7baed8b1030f6a8290425a173d.png

是的,这很可怕……

11852baa2acabd8b3516da51aa28874f.png

瞧,这基本上就是使用 MidJourney 生成图像的过程!在您获得想要的结果之前,这只是很多来回。

只需迭代并继续试验您的提示!

在上面的结构中,您在 [场景类型]、[主题]、[背景]、[形容词]、[参数] 部分描述提示通常有助于保持一定程度的一致性。

bd4aa79a3de911a73109d4549f8cbf2e.png

现在,一旦您获得了每个场景的图像,就该修正它们了!(奇怪的手、奇怪的眼睛)

准备为短片创作的艺术

在我们为任何场景制作动画之前,您需要做两件事:

清理任何奇怪的细节

放大图像,使其具有足够高的视频分辨率。我想以 4K 格式导出,所以它需要非常高分辨率。

因此,要清理伪影,请从 App Store 获取 Pixelmator!这是一款很棒的 Mac 应用程序,具有一套工具,可帮助您编辑任何图像,而且超级易于使用。

下载并安装后,将图像拖放到 Pixelmator 中。让我们一起编辑一个。

请注意它添加的怪异蝙蝠侠耳朵,除此之外,这是一个非常不错的镜头!不要害怕,这很容易解决。

89d45192b82ef7e4159a95af10ba713e.png

你要做的是选择修复工具,放大,然后刷掉看起来有点奇怪的部分。修复工具基本上会尝试擦除您选择的部分并将其与图像的其余部分融合在一起,而且效果出奇地好!这是一个快速演示:

c780e1d83258362ddc609eec54be6c03.gif

就这样,我们从 1500 像素宽的图像变成了 13,824 像素宽的图像,只需单击两次,同时提高了质量——这太神奇了。

准备好所有图像后,就该用一些动画使它们栩栩如生了!

通过运动让场景栩栩如生

我在 iOS 上使用了 MotionLeap。在您的手机或 iPad 上安装该应用程序后,您需要将场景图像传输到您的设备,以便将它们导入该应用程序。从那里开始,为您的图像添加效果非常简单!让我们重现我的短片中的开场场景:

e4f06c8825608f54e69c007c87af170c.gif

首先,我点击“动画”并刷掉我想要添加运动的场景部分。在这种情况下,我想让薄雾围绕着建筑物旋转,让建筑物下方的水流变得非常轻微。绘制完我想要移动的区域后,我点击箭头按钮并绘制它需要流入的方向。点击播放,您应该会看到您的图像栩栩如生!如果感觉有点奇怪,只需尝试您要移动的部分即可!

对于闪电,我点击了效果按钮,找到了“闹鬼的恐怖”部分,并在那里使用了闪电效果。

最后,当您喜欢自己制作的内容时,请点击导出并确保选中 16:9 作为宽高比,以确保您的视频以正确的尺寸导出。

然后您可以选择视频的持续时间。我通常将它保持在 45 秒左右,因为如果我想在现场保持足够长的时间,但也可以在需要时轻松缩短。

最后,选择 4K 并点击导出!

一旦您的视频准备就绪,只需将它们 AirDrop 回您的 Mac,我们就快完成了!

录制您的音频并挑选您的音乐

除了实现您的配音梦想之外,这里没有什么可添加的!我真的在我的 iPhone 上使用了语音备忘录应用程序并一遍又一遍地记录台词,直到我得到一个我满意的交付。

您当然也可以使用 AI 文本转音频工具,但我想以某种方式在我自己的短片中出演 😄。

接下来我想做的是挑选一首背景曲目,让我的短片充满悬念。扎实的背景音乐本身就可以营造出一种氛围。为此,我访问了 Epidemic Sounds,这是一个令人难以置信的网站,其中包含大量您可以使用的免版税曲目。

3f4ea0c4d1670f45eb71fbf77c51e258.png

我去了惊悚片/悬疑片悬疑片部分,挑选了几个选项,直到我确定了我最终选择的那个作为我的短片。

此外,我的短片还以雨和闪电为特色。

Epidemic Sounds 有一个完整的音效部分,您可以在其中下载雷声或雨声。

我抓取了几个选项并将它们混合在一起,以便图像和声音效果将每个镜头都变成一种身临其境的体验。

清理你的音频

对于我的对话,我使用了 Adobe 的音频增强工具来消除任何背景噪音或奇怪的回声,并为我的视频做准备。

这非常简单。只需将音频文件空投到您的 Mac,上传到 Adobe 的网站,剩下的就交给它吧!podcast.adobe.com/enhance

完美的!您现在可以像使用任何其他 JavaScript 对象一样使用名为“puzzles”的对象。就这么简单。

有了这些知识,您就可以开始构建许多令人兴奋的东西了。随意使用拼图作为一个想法,也许它会是一个很酷的派对游戏?!

ba9b95241ce97231b16f1207878c0309.png

把它们放在一起

使用您从 MotionLeap 导出的视频、您的对话以及来自 Epidemic Sounds 的音乐和音效,转到您最喜欢的视频编辑器并将它们拼接在一起。

我最喜欢的是 Final Cut Pro,但是如果你想要一个免费的,它有很多技巧可以让编辑变得超级简单,只需从 App Store 下载 CapCut,它有很多简洁的功能专为社交分享而设计的功能(如自动字幕生成)。

909d2527d434cba16cba9be4356f724b.png


完成制作。您无需学习计算机科学或编码即可制作出很棒的东西。尽快开始创作并选择您认为很酷的想法。


30d275bbb279748ec381a4faf188b471.jpeg

如何创作复杂的内容,交流社群已开启。

9c51cde49c61b777c41714a14d6d2cac.png

英文见“底部”原文


http://chatgpt.dhexx.cn/article/eVXwaSiY.shtml

相关文章

人人都能懂的ChatGPT解读

作者 | 张杰,中关村科金技术副总裁 策划 | 刘燕 ChatGPT 发布了两个多月,热度不降反增,不断火爆出圈。是时候,为不懂 AI 技术的同学们白话科普一下了。本文将用浅显且不严谨的语言解惑以下问题:ChatGPT 为什么能火起来…

询问ChatGPT的高质量答案艺术——提示工程指南

目录 前言一、提示工程简介二、提示技巧2-1、生成法律文件2-2、添加提示技巧 三、角色扮演3-1、智能手机产品描述3-2、添加角色扮演 四、标准提示4-1、写一篇有关于新智能手机的评论4-2、添加标准提示、角色提示、种子词提示等等 五、示例很少、或者没有示例5-1、生成一个手机配…

最新版chatgpt4人工智能系统源码 支持电脑手机+小程序

分享一款最新的chatgpt4人工智能系统源码,完美运营版,系统支持电脑版手机版小程序端三合一,含完整代码包和详细的安装部署教程。 系统主要功能一览: 1、可以在电脑端、手机端上使用,还可以通过小程序进行在线交互和对…

【ChatGPT实战案例】ChatGPT快速生成短视频

目录 使用工具 实现方法(任选一种) 使用步骤 方法1示例:ChatGPT百度AIGC 方法2示例:ChatGPT剪映 使用工具 - ChatGPT - 剪映:手机or电脑应用商场下载app - 百度AIGC:度加创作工具-百度官方出品-人人…

【chatgpt】学习开源项目chatgpt-web,搭建自己的chatgpt服务,功能非常丰富有打字效果

目录 前言1,开源的chatgpt项目2,项目可以直接使用docker-compose跑起来3,关于打字模式SSE, octet-stream (打字特效)4,关于内容存储5,总结 前言 本文的原文连接是: https://blog.csd…

chatGPT的体验,是不是真智能?

目录 🏆一、前言 🏆二、安装 🏆三、普通对话 🚩1、chatGPT的ikun性 🚩2、chatGPT的日常对话 🏆四、实用能力 🏆五、代码改正 🏆六、写代码 🏆七、讲解代码 🏆…

chatgpt赋能python:Python手机怎么下载:简易教程

Python手机怎么下载:简易教程 随着移动互联网和智能手机的普及,越来越多的人开始使用手机进行日常工作和娱乐,而Python语言作为一种广泛应用于科学计算、数据分析、Web开发等领域的编程语言,也逐渐受到手机用户的青睐。那么&…

独家 | CodeGPT:具有类ChatGPT功能的VSCode扩展

作者:The PyCoach‍翻译:陈之炎 校对:赵鉴开本文约1300字,建议阅读7分钟 本文为你介绍在VSCode中使用GPT-3的官方OpenAI API。 用Canva制作图片 我并非VSCode的忠实粉丝,但不得不承认,它比我每天使用的代码…

ChatGPT专业应用:生成演讲稿

正文共 1138 字,阅读大约需要 7 分钟 教育工作者、企业家等必备技巧,您将在7分钟后获得以下超能力: 生成演讲稿 Beezy评级 :A级 *经过寻找和一段时间的学习,一部分人能掌握。主要提升效率并增强自身技能。 推荐人 | …

5个 ChatGPT 功能,帮助你提升日常编码效率

ChatGPT 作为最快完成亿活用户的应用,最近真的是火出天际了。今天分享5个 ChatGPT 功能,来提升我们的日常工作以及如何使用它提高代码质量。 ChatGPT 的出现,彻底改变了开发代码的方式。但是目前为止,大多数软件开发人员和数据专业…

让你的ChatGPT更加强大——200+小白用来解锁ChatGPT高级功能的提示(Prompts)——即开即用-开源纯免费-实时更新

让你的ChatGPT更加强大——200小白用来解锁ChatGPT高级功能的提示(Prompts) 使用说明标签筛选关键词搜索展示区复制语言切换常见问题为什么提示词用英文?中文搜索出错输出虚假信息提示词不好用为什么执着于 ChatGPT?最后 参考博客…

一款和chatgpt功能相似的产品 Perplexity ai

场景: 比起传统的列表式搜索,Perplexity AI把艳惊四座的ChatGPT和必应搜索结合起来,既有ChatGPT式的问答,又有像普通搜索引擎那样列出的链接,就连马斯克也亲自称赞:它不仅总结出了推文的由来,还…

SpringBoot调取OpenAi接口实现ChatGpt功能

很高兴和大家分享我实现的一个小项目,利用 Spring Boot 实现了一个 ChatGpt 对话系统。在本文中,我将详细介绍这个项目的实现步骤,以及代码实现。 什么是 ChatGpt ChatGpt 是一种基于 GPT 技术的对话系统,能够生成连贯、流畅、…

ChatGPT api 接口调用测试

参考文档: https://platform.openai.com/docs/quickstart/build-your-application示例说明: 本示例会生成一个简单的ChatGPT api接口调用server程序,该程序可以给用户输入的宠物类别为宠物取三个名字。打开网页后,会看到用户输入…

测试真的会被ChatGPT代替一文告诉你

送走最后一车货,最后三个工人,老王吃力的关上大铁门。左手从口袋摸出一盒烟,轻轻一颠,滑落一根,右手娴熟的夹住。掏出打火机,点燃,一丝青烟腾起,萦绕在指头。 夕阳穿过玻璃&#xf…

ChatGPT开通后测试 来看看效果如何

我的ChatGPT开通后测试 来看看效果如何开通了,简单测试测试它吧。 先让它写首诗吧,读起来还不错: 再让写个简单小代码 问了它不会什么,它也不谦虚 问他怎么在抖音上赚钱,它回答的头头是道。 问它几个弱弱的问题&#x…

ChatGPT给测试工程师带来的机会和威胁

一、什么是ChatGPT ChatGPT(全名:Chat Generative Pre-trained Transformer),美国OpenAI [1] 研发的聊天机器人程序 [12] ,于2022年11月30日发布 [2-3] 。ChatGPT是人工智能技术驱动的自然语言处理工具&#xff0c…

测试人员如何巧妙使用ChatGPT

《庄子天地》篇中描述了一个“抱瓮灌园”的寓言故事,一位“为圃者”不辞辛苦“凿隧而入井,抱瓮而出灌”,当子贡告诉他有一种先进的取水装置“桔槔”时,他却以“无非不知,羞而不为也”的理由加以拒绝。在不少人眼中&…

【实测】用chatGPT来完整的走一次测试流程吧,看看它到底相当于我们什么等级的工程师?

大家好,实测系列是含金量非常高且首发的专业论文性质文章,请一定要保存,点赞,分享哦~ chatgpt我不多做介绍了,连我乡下的舅妈都知晓的东西。都说这玩意挺神的,那今天我就亲自来测试一下用gpt来做一次完整的…

ChatGPT会替代开发和测试吗?

从去年11月底开始,ChatGPT的消息一次次刷新我们的认知,OpenAI公布的前几个版本我还只是震惊和感叹,可最近GPT4.0的公开让我彻底坐不住了,这已经超越了绝大部分人的能力,有这玩意儿还要啥搜索引擎。 首先,Ch…