国产模型生成的《山海经》动画震撼网友

扬子晚报网  |  2024-08-30作者:姜天圣

扬子晚报/紫牛新闻记者 姜天圣

还记得年初用AI(人工智能)生成《西游记》动画短片的冯先生吗?经扬子晚报报道后,AI版《西游记》登上了多平台热搜。如今,他又结合最新的AI技术,在网络平台上发布了一段《山海经》动画短片,将穷奇、山神、龙鱼等传说中的生物搬上屏幕,震撼效果令无数网友点赞。

接受扬子晚报/紫牛新闻记者采访时,冯先生感叹,“年初我用AI一周时间做出了4分钟的短片,如今一周时间能做出16分钟了,并且效果好上很多。”更令人惊喜的是,冯先生使用的是国产文生视频模型。在他看来,这个领域中国已经处于世界一流水平。

《山海经》让网友“惊为天人”

“这是属于我们的故事,属于我们中华儿女的美丽传说。”狮头蛇尾还长着翅膀的穷奇、犹如巨人般的山神、一出场就掀起惊涛骇浪的龙鱼……冯先生的《山海经》AI视频,向网友们展示了宏大的神话世界。“看完第一集,我震惊了,全片太震撼了,画面、叙事、配音以及神兽的还原都做得非常好”“看到这个视频真的惊为天人,曾经的想象终于有了落脚点”。

冯先生告诉记者,自己用AI生成视频需要四步:生成剧本、生成静态图片、让图片动起来、整理剪辑。“我会结合《山海经》书中的描述,让AI生成剧本确定需要多少画面,需要多少分镜。然后根据书中描述,用AI生成静态图片,把静图修改到书中描述的样子。接着用文生视频工具将静态图片动起来,最后整理剪接,配音部分也是用AI生成的。”

用国产AI,效率提升4倍

“才过去半年时间,AI已经迭代了许多个模型,如今又有了很多进步”。冯先生告诉记者,半年前AI文生视频只能做出三秒的镜头,并且在处理运动时会非常不自然,如今的AI已经可以做到二十秒的视频,无论是走路、奔跑还是游泳都非常自然,哪怕用于现实中并不存在的神兽。

“这次我在制作过程中,用到的大部分都是国产AI模型,一方面是国产模型更能理解中国神话故事,另一方面是经过多次迭代,已经处于世界一流水平了。”冯先生向记者介绍道。

今年初,冯先生用AI技术生成4分钟的《西游记》动画短片,当时他表示这段视频如果人工制作至少需要半年,而自己在AI的帮助下用时一周就完成了。如今再提及AI的工作效率,冯先生表示,“这次一周时间,我就完成了16分钟的《山海经》视频,效果还好上了很多。现在AI理解能力更强了,年初用AI有时要生成几十次才能有满意的画面,现在3~5次基本就可以。”

正制作英文版“震撼老外”

冯先生是B站一位UP主,网名“AI疯人院”,除了《山海经》、《西游记》视频外,他还用AI生成了丝绸之路、龙生九子、克鲁苏神话等视频动画。

“我从事美术行业15年,后来进入了AI行业,其实我也不指望我的视频能赚钱,就是希望把记录在书本中的神兽还原出来。”冯先生向记者透露,《山海经》系列自己希望做到100集,预计两三年时间,争取把书中记载的每一样都搬到屏幕。

“个人感觉,AI行业在今年还会有大变化,主要和算法及算力有关系。现在AI在做一些高难度动作,例如转头、翻跟头的时候还会处理不好,我认为这块有望今年解决。”冯先生表示,希望能有更多人参与到AI创作中,“模型的训练是需要数据支持的,大家不要对国产模型有偏见,现在国产模型真的很优秀,大家都用的话,它迭代速度是快上不少的。”

“目前几期《山海经》在互联网平台上传播挺好的,这段时间我打算做一份英文版,放到国外平台上让老外看看中国的神话故事。”谈到未来,冯先生表示,希望自己的视频能带给老外一些震撼。

责任编辑:李丹萍