

万物可吉卜力
最近,你的朋友圈是不是被吉卜力给刷屏了?
微信头像、表情包、名人恶搞、经典名场面、科普图……一时间,万物都在吉卜力。
更牛的是,已经有创作者直接做成了吉卜力风格的经典电影名场面。
比如,X上网友@PJaccetturo 制作的吉卜力版《指环王》片段。
以及@saltxdiamond 制作的《杀死比尔》片段。
是不是很好玩?
对此,我也制作了一支由周董配音、配图的吉卜力视频。“你们要多给沃垠AI点关注,看完记得一键三连。”

怎么做的?
其实核心步骤很简单,就四步:
-
1、从影视作品中截取关键画面。
-
2、将截图发给ChatGPT-4o,转成吉卜力风格。
-
3、将吉卜力风格图片发给海螺AI,生成视频(图生)。
-
4、用剪映等剪辑工具,添加音频,导出。
这里,我们以上面周董的视频,带大家看一下我的制作过程。
Step1:截取关键画面图
首先,从影视作品中截取关键画面图,也可以在网上下载。
这里周董的图片,我们是在网上下载的。

如果是人物图片,尽量是人物居中、构图自然、画质清晰、人物动作正常以及情绪饱满的图片,因为它是你接下来要制作视频的首帧图。
所以,尽量要让图片看起来正常,与你接下来的视频剧情关系密切。
Step2:生成吉卜力风格图片
然后,将图片发给ChatGPT-4o。
4o网址:https://chatgpt.com
在会话框处,点击左下角+号,上传你的图片;点击右下角三个点···,选择画布模式。

然后输入超级简单的提示词:
将图片转换成吉卜力风格,1:1比例。

很快,大概1分钟左右,吉卜力风格图片就创建好了。

然后,将图片下载下来(4o下载图片没有水印)。如果对出的图不满意,也可以点击图片,进行二次修改。

过程中要注意3点:
-
1、4o出图的比例一直不太可控,一定要做提示设定,比如添加“比例1:1、16:9、9:16”等Prompt要求。
-
2、如果对图片不太满意,也可以进行二次修改(直接说描述词就行),比如“表情深邃”、“向左扭头”等。
-
3、画面尽量简单,不宜太复杂,最好是单人物。
Step3:用吉卜力风格图片生成视频
这里,我们用的是海螺AI的图生视频。
国内版:https://hailuoai.com/video
海外版:https://hailuoai.video/create
上传图片,输入提示词,选择模型(I2V系列),然后点击生成。

这里,我的提示词是:
人物抬头,微微张嘴说:“你们要多给沃垠AI点关注,看完记得一键三连。”

同时,也开启了提示词优化。

大概1分钟左右,视频就生成好了。

这里,有一些使用技巧:
1)图生视频Prompt遵循简单原则,主要是基于首帧图片来进行画面描述。
图生视频Prompt基础公式=首帧中的主要表现物+运动/变化。
-
首帧中的主要表现物:即画面中的物品,包括主要信息和环境信息,海螺AI能够精确识别图像中的人物、物品等画面信息,并根据Prompt需求进行视频生成。
-
运动 /变化:运动和变化是对于主要表现物在视频中的状态描述,例如物体的静止、运动,环境空间的转化等等。
2)让画面里的人物说话,可以用类似Prompt。
人物眨眼,微微张嘴呢喃几个词。
人物抬头,微微张嘴说xxx(比如1234567)。
3)让双人物说话,一定要用明确的人物描述词来做提示,要用AI能懂的词。
比如,我截取了一张球2里的图片,这里的提示词我用的就是“亚洲男子”、“女孩”等词来描述。既不是左中右等方位词,更不是吴京、韩朵朵等人名词。

关于海螺AI视频的详细使用攻略,我之前写了一篇长文,欢迎大家了解。
原文链接:《凭什么?海螺AI登顶全球第一》
Step4:为视频配音,剪辑导出。
配音,我用的是MiniMax Audio,之前已经给大家介绍过了。
体验地址(需要魔法):https://www.minimax.io/audio
可以音色克隆,也可以使用300+的官方音色库来合成音频。这款TTS工具的停顿、语调变化、情感表达都非常的自然,强烈推荐大家使用。

原文链接:《这可能是目前最强的TTS,10秒复刻你的声音》
由于我之前已经做好了音频,这里我就不展示过程了。直接将音频和视频同步导入到剪映里,然后对齐一下口型,导出,这个视频就做好了。
这只是一个片段,通常1-2分钟的视频需要10-30个片段。只要重复上面动作就可以了。

一些Case
下面,给大家看一些我用海螺AI图生视频制作的其他case。
小猫起身走到女孩腿上,女孩抱起小猫。

火车从山洞中开出,萤火虫飞舞,植被随风摇动[左移,推进,右摇]。

[固定镜头]女孩向左走出画面,空中漂浮着植物孢子,微风吹动植物摇晃。

科幻电影,微距镜头,缓缓拉进,女宇航员面罩和瞳孔里都闪动着蓝色的数码信息流,微表情,惊讶,眉头微微锁紧。

特写 ,小时候的 “你” 蹲在大树下,阳光透过树叶洒在脸上,好奇地伸手触碰光斑,推镜头,柔和自然光 。

窗外的雪随风飘动,人物眨眼,微微张嘴呢喃几个词[变焦拉远]。

宇航员穿过一扇扇的门。

飞船驶离空间站,飞出画面。

[跟随]小船向前方驶去。

在一艘飞船上,人物透过玻璃望向远方,仿佛在思考着什么,镜头快速拉远。[变焦拉远]


写在最后
最近,模型进步越来越快。通过不同的模型组合,我们可以得到不同的创意玩法。
比如,4o+海螺AI可以制作吉卜力视频,海螺AI+MiniMax Audio可以制作有声视频,影视剧截图+海螺AI可以复现经典名场面。
这里面,既有娱乐,也有生产力。
国内版:https://hailuoai.com/video
海外版:https://hailuoai.video/create
昨天,X上一位博主@Ratul_AI 发了条推文说:我的视频播放量破亿了,感谢hailuo。

不得不说,国产AI真的太强了。在视频赛道,China AI就是世界第一。
我们正在见证神奇的海螺时刻。
且将,持续见证。
(文:沃垠AI)