新晋流量密码!AI生成宫崎骏《龙猫》真人版,3天拿下20万点赞


编辑 | 杨文


时隔 28 年,宫崎骏的经典之作《幽灵公主》在国内重映。


影片中,男主阿席达卡骑着一头白色驯鹿远离家乡,久石让极具史诗感的配乐在此时响起,那种震撼和感动让人直飙眼泪。


视频来自up主光影音乐会


这部动漫电影制作规格极高,宫崎骏老爷子从 1980 年就开始构思,光制作就历时 3 年,使用了 14 万张纯手绘稿,吉卜力工作室更是砸了 25 亿日元。


1997 年该片一上映,就打破了当年的日本影史票房记录,即使到了今天,它也稳居日本影史前十。


视频来自up主光影音乐会


趁着《幽灵公主》重映的热度,网友「造梦迪迪」开始用 AI 整活了。


在他制作的视频中,宫崎骏动漫人物化身真人,坐在地板上看着电视中的自己。


短短三天时间,该视频就在各大社交平台上斩获 20 万点赞量。


动图来自博主造梦迪迪


接下来,我们就来详细介绍一下其中的制作流程。


我们用到的工具就两款:GPT-4o 和豆包。


第一步:撰写文生图提示词。


提示词不会写怎么办?没关系,我们可以直接套模版。


之前咱们在《梅西、C 罗打卡广州小蛮腰?百万网友被 AI 忽悠得团团转》这篇稿件里,介绍了 AI 生成游戏主角玩古早游戏的图片提示词。


这是一张复古风格的胶片照片,照片中是【角色名字】,在【年份或时代】玩【游戏名称】,游戏平台是【主机名称,例如初代 PlayStation】。照片拍摄于一个昏暗的卧室,她坐在地上,面前是一台90 年代的阴极射线管(CRT)电视。她一只手拿着【主机名称,例如:PlayStation 1】手柄,另一只手回头看着拍摄者,而背景中游戏画面清晰可见。照片是用闪光灯拍摄的,未经任何编辑。



我们将其稍微一修改,就摇身一变成了宫崎骏动漫真人版的提示词。


一张复古模拟照片,描绘了【动漫名称】中的真人版【动漫人物】坐在昏暗的卧室木地板上,观看自己电影的场景。电视机是一台 90 年代的 CRT 电视,屏幕上清晰地显示着【动漫名称】中的动画场景。真人版【动漫角色】盘腿坐在电视前,穿着她标志性的【动漫人物的穿着打扮和发型】。她回头看向镜头,轻轻微笑。CRT 电视散发着柔和的光,照亮了她的脸。使用闪光灯拍摄,略微曝光过度,未经编辑,照片中可见镜头尘土和胶片颗粒,营造出一种怀旧的 2000 年代初的氛围,强调动画屏幕与模拟显示照片之间的对比,比例 2:3。


由于该提示词模板中有一段关于动漫人物的穿着和发型的描述,如果词穷,我们也可以借助大模型。


比如,我们在豆包中上传一张《幽灵公主》小桑的图片,让它描述图片中的女孩,然后稍微修改一下即可。



经过润色的提示词如下:


一张复古模拟照片,描绘了《幽灵公主》真人版San坐在昏暗的卧室木地板上,观看自己动漫的场景。电视机是一台 90 年代的 CRT 电视,屏幕上清晰显示着《幽灵公主》动漫画面。真人版San盘腿坐在电视前,穿着她标志性的无袖浅色上衣且披着白色毛皮,利落短发,头戴一条深色头带,面部绘有红色条纹装饰,佩戴着一对醒目大圆形白色耳环,脖子戴着一串兽牙项链,身边趴卧着一匹白色的狼。她回头看向镜头,轻轻微笑。CRT 电视散发着柔和的光,照亮了她的脸。使用闪光灯拍摄,略微曝光过度,未经编辑,照片中可见镜头尘土和胶片颗粒,营造出一种怀旧的 2000 年代初的氛围,强调动画屏幕与模拟显示照片之间的对比,比例 2:3。


我们将其丢给 GPT-4o,就能得到一张《幽灵公主》真人版小桑坐在地板上回眸的图片。



服饰发型倒是一比一复刻了,就是真人版小桑这张脸怎么像混血?还有趴在旁边的不是狼,是狗吧?


我们又用同样的方法让豆包生成了一张《魔女宅急便》琪琪的图片。


豆包生成的真人版琪琪很是可爱,红色发箍上大大的蝴蝶结格外显眼。



经过多次尝试,我们发现 GPT-4o 生成的图片更复古、更有质感,但生成的真人角色总是欧美脸。


而豆包生成的人物角色更符合亚洲少女的长相,但电视里播放的动漫画面总是串台,比如明明让它们生成的电视屏幕画面是《千与千寻》的场景,但最后呈现出来的是《龙猫》的片段。



这时,我们就可以使用豆包的「区域重绘」功能,选中想要修改的区域一涂抹,再输入提示词:将电视中播放的画面替换成动漫《千与千寻》中的千寻角色剧照。



豆包领到任务立马就会按照要求进行画面替换,而且替换后的效果毫无违和感。



当然,这也有个 bug,就是豆包生成的电视画面太随机,要想呈现我们喜欢的动漫场景,我们也可以使用 photopea 来进行抠图。


photopea 链接:https://www.photopea.com/


上传图片后,系统跳转到操作界面。然后,在左侧工具栏找到「多边形套索」。



接着把电视屏幕抠出来,点击「编辑」-「清除」即可。



点击「文件」-「导出为」-「PNG 格式」,下载保存。



最后,打开剪映,点击「开始创作」,导入抠过的图片和喜欢的动漫场景,并将其添加到时间轴上。


值得注意的是,抠图在上,宫崎骏动漫素材在下。再通过缩放比例,调整宫崎骏动漫素材的画面大小,让它铺满整个抠图阴影处。



来看看效果:



左右滑动查看更多


第二步:图片转视频。


目前国内市面上有不少 AI 图生视频工具,比如豆包(或即梦)、可灵、Vidu、PixVerse、智谱清影、通义万相、MOKI、HiDream……


我们以豆包的「视频生成」功能为例。上传生成的图片,输入提示词:画面中的男孩开心地笑起来。



最后将这些 AI 生成的素材全部导入剪映,拼接在一起,再配上音乐,齐活!



今天的 AI 小课堂就到这儿啦!大家快去试试吧,古德拜!


工具链接:

GPT-4o:https://chatgpt.com/

豆包:https://www.doubao.com/

photopea:https://www.photopea.com/


(文:AI好好用)

发表评论

×

下载每时AI手机APP

 

和大家一起交流AI最新资讯!

立即前往