全网刷屏的吉卜力视频,我用海螺+4o轻松复现



万物可吉卜力


最近,你的朋友圈是不是被吉卜力给刷屏了?


微信头像、表情包、名人恶搞、经典名场面、科普图……一时间,万物都在吉卜力。


更牛的是,已经有创作者直接做成了吉卜力风格的经典电影名场面。


比如,X上网友@PJaccetturo 制作的吉卜力版《指环王》片段。


以及@saltxdiamond 制作的《杀死比尔》片段。


是不是很好玩?


对此,我也制作了一支由周董配音、配图的吉卜力视频。“你们要多给沃垠AI点关注,看完记得一键三连。”


怎么做的?


其实核心步骤很简单,就四步:


  • 1、从影视作品中截取关键画面。

  • 2、将截图发给ChatGPT-4o,转成吉卜力风格。

  • 3、将吉卜力风格图片发给海螺AI,生成视频(图生)

  • 4、用剪映等剪辑工具,添加音频,导出。


这里,我们以上面周董的视频,带大家看一下我的制作过程。


Step1:截取关键画面图


首先,从影视作品中截取关键画面图,也可以在网上下载。


这里周董的图片,我们是在网上下载的。


如果是人物图片,尽量是人物居中、构图自然、画质清晰、人物动作正常以及情绪饱满的图片,因为它是你接下来要制作视频的首帧图。


所以,尽量要让图片看起来正常,与你接下来的视频剧情关系密切。


Step2:生成吉卜力风格图片


然后,将图片发给ChatGPT-4o。


4o网址:https://chatgpt.com


在会话框处,点击左下角+号,上传你的图片;点击右下角三个点···,选择画布模式。


然后输入超级简单的提示词:


将图片转换成吉卜力风格,1:1比例。


很快,大概1分钟左右,吉卜力风格图片就创建好了。


然后,将图片下载下来(4o下载图片没有水印)。如果对出的图不满意,也可以点击图片,进行二次修改。


过程中要注意3点:


  • 1、4o出图的比例一直不太可控,一定要做提示设定,比如添加“比例1:1、16:9、9:16”等Prompt要求。

  • 2、如果对图片不太满意,也可以进行二次修改(直接说描述词就行),比如“表情深邃”、“向左扭头”等。

  • 3、画面尽量简单,不宜太复杂,最好是单人物。


Step3:用吉卜力风格图片生成视频


这里,我们用的是海螺AI的图生视频。


国内版:https://hailuoai.com/video

海外版:https://hailuoai.video/create


上传图片,输入提示词,选择模型(I2V系列),然后点击生成。


这里,我的提示词是:


人物抬头,微微张嘴说:“你们要多给沃垠AI点关注,看完记得一键三连。”


同时,也开启了提示词优化。


大概1分钟左右,视频就生成好了。


这里,有一些使用技巧:


1)图生视频Prompt遵循简单原则,主要是基于首帧图片来进行画面描述。


图生视频Prompt基础公式=首帧中的主要表现物+运动/变化。


  • 首帧中的主要表现物:即画面中的物品,包括主要信息和环境信息,海螺AI能够精确识别图像中的人物、物品等画面信息,并根据Prompt需求进行视频生成。


  • 运动 /变化:运动和变化是对于主要表现物在视频中的状态描述,例如物体的静止、运动,环境空间的转化等等。


2)让画面里的人物说话,可以用类似Prompt。


人物眨眼,微微张嘴呢喃几个词。

人物抬头,微微张嘴说xxx(比如1234567)。


3)让双人物说话,一定要用明确的人物描述词来做提示,要用AI能懂的词。


比如,我截取了一张球2里的图片,这里的提示词我用的就是“亚洲男子”、“女孩”等词来描述。既不是左中右等方位词,更不是吴京、韩朵朵等人名词。


关于海螺AI视频的详细使用攻略,我之前写了一篇长文,欢迎大家了解。


原文链接:《凭什么?海螺AI登顶全球第一》


Step4:为视频配音,剪辑导出。


配音,我用的是MiniMax Audio,之前已经给大家介绍过了。


体验地址(需要魔法):https://www.minimax.io/audio


可以音色克隆,也可以使用300+的官方音色库来合成音频。这款TTS工具的停顿、语调变化、情感表达都非常的自然,强烈推荐大家使用。


原文链接:《这可能是目前最强的TTS,10秒复刻你的声音


由于我之前已经做好了音频,这里我就不展示过程了。直接将音频和视频同步导入到剪映里,然后对齐一下口型,导出,这个视频就做好了。


这只是一个片段,通常1-2分钟的视频需要10-30个片段。只要重复上面动作就可以了。


一些Case


下面,给大家看一些我用海螺AI图生视频制作的其他case。


小猫起身走到女孩腿上,女孩抱起小猫。


火车从山洞中开出,萤火虫飞舞,植被随风摇动[左移,推进,右摇]。


[固定镜头]女孩向左走出画面,空中漂浮着植物孢子,微风吹动植物摇晃。


科幻电影,微距镜头,缓缓拉进,女宇航员面罩和瞳孔里都闪动着蓝色的数码信息流,微表情,惊讶,眉头微微锁紧。


特写 ,小时候的 “你” 蹲在大树下,阳光透过树叶洒在脸上,好奇地伸手触碰光斑,推镜头,柔和自然光 。


窗外的雪随风飘动,人物眨眼,微微张嘴呢喃几个词[变焦拉远]。


宇航员穿过一扇扇的门。


飞船驶离空间站,飞出画面。


[跟随]小船向前方驶去。


在一艘飞船上,人物透过玻璃望向远方,仿佛在思考着什么,镜头快速拉远。[变焦拉远]



写在最后


最近,模型进步越来越快。通过不同的模型组合,我们可以得到不同的创意玩法。


比如,4o+海螺AI可以制作吉卜力视频,海螺AI+MiniMax Audio可以制作有声视频,影视剧截图+海螺AI可以复现经典名场面。


这里面,既有娱乐,也有生产力。


国内版:https://hailuoai.com/video

海外版:https://hailuoai.video/create


昨天,X上一位博主@Ratul_AI 发了条推文说:我的视频播放量破亿了,感谢hailuo。


不得不说,国产AI真的太强了。在视频赛道,China AI就是世界第一。


我们正在见证神奇的海螺时刻。


且将,持续见证。


(文:沃垠AI)

发表评论