2024-09-09 14:52 点击次数:150
今年初,文生视频模型Sora在社会各界激起了广泛的讨论和关注,如今半年多时间过去,AI视频行业又发生了翻天覆地的变化。近日,四川冯先生在网络平台上发布了一段用AI技术生成的《山海经》动画短片,将穷奇、山神、龙鱼等传说中的生物搬上屏幕,其效果震撼令无数网友点赞。
今年初,冯先生用AI生成的《西游记》动画片短片经本报报道后登上多平台热搜。如今他又结合了最新的AI技术继续为网友们带来震撼,再次接受扬子晚报/紫牛新闻记者采访时,冯先生感叹,“年初我用AI一周时间做出了4分钟的短片,如今一周时间能做出16分钟了,并且效果好上很多。”更令人惊喜的是,如今冯先生使用的是国产的文生视频模型,在他看来这个领域中国已经处于世界一流水平。
《山海经》再次震撼
网友:想象有了落脚点
“这是属于我们的故事,属于我们中华儿女的美丽传说。”狮头蛇尾还长着翅膀的穷奇、犹如巨人般的山神、一出场就掀起惊涛骇浪的龙鱼……在冯先生《山海经》AI视频向网友们展示了宏大的神话世界,除了神兽外还有坐落在雪山之巅上的宫殿、高山上飞流直下的瀑布。这段视频引发网友啧啧称奇,“看完第一集,我震惊了,全片太震撼了,画面、叙事、配音以及神兽的还原都做的非常好”、“看到这个视频真的惊为天人,曾经的想象终于有了落脚点。”
冯先生告诉记者,自己用AI生成视频需要四步:生成剧本、生成静态图片、让图片动起来、整理剪辑。“我会结合《山海经》书中的描述,让AI生成剧本确定需要多少画面,需要多少分镜;然后根据书中描述,用AI生成静态图片,用PS把静图修改到书中描述的样子;接着用文生视频工具将静态图片动起来,最后整理剪接,配音部分也是用AI生成的。”
“才过去了半年时间,AI已经迭代了许多个模型了,如今又有了很多进步”。冯先生告诉记者,半年前AI文生视频只能做出三秒的镜头,并且在处理运动时会非常不自然,如今的AI已经可以做到二十秒的视频,无论是走路、奔跑还是游泳都非常自然,哪怕用于现实中并不存在的神兽。
用的是国产AI
工作效率比年初提升4倍
“这次我在制作过程中用到大部分都是国产AI模型,一方面是国产模型更能理解中国神话故事,另一方面是经过多次迭代已经处于世界一流水平了。”冯先生向记者介绍,就在前段时间还有一个国产模型在海外火了一把,因为比海外的同款模型优秀不少。
“自Sora问世以来,AI视频领域的迭代实在太快了,无论出现新的花样人们都习以为常了,可能过几天又会出现更优秀的,所以很难有当时Sora的热度了。”冯先生向记者解释,由于AI行业发展太迅猛,国产AI模型仅仅在圈内比较火,但掀起破圈的热度比以前困难多了。“这么说吧,今天我晚上睡下,都不敢想象第二天早起AI又能做出哪些新东西,应该是无论做出什么我都不会感到意外。”
今年初,冯先生用AI技术生成的4分钟的《西游记》动画短片,当时他表示这段视频如果人工制作至少需要半年,而自己在AI的帮助下用时一周就完成了。如今再提及AI的工作效率,冯先生表示,“这次一周时间,我就完成了16分钟的《山海经》视频,效果还好上了很多。现在AI理解能力更强了,年初用AI有时要生成几十次才能有满意的画面,现在3-5次基本就可以。”
正制作英文版
想给老外来点震撼
冯先生是B站一位UP主,网名“AI疯人院”,除了《山海经》、《西游记》视频外,他还用生成了丝绸之路、龙生九子、克鲁苏神话等视频动画。
“AI绘画问世以来引发过很多次争议,插画师们认为AI用自己的作品进行训练,现在倒过头来抢自己的饭碗。”冯先生坦言,AI技术的迭代确实影响了一部分人的利益,“但这是没办法的事情,就像潘多拉魔盒一样,一旦被打开,再要关上就不可能了,现在大家基本都意识到了这一点,质疑的声音少了很多,都在期望AI下一步又能做出哪些新东西。”
“我从事美术行业15年了,后来进入了AI行业,其实我也不指望我的视频能赚钱,就是希望把记录在书本中的神兽还原出来。”冯先生向记者透露,《山海经》系列自己希望做到100集,预计两三年时间,争取把书中记载的每一样都搬到屏幕。
“个人感觉,AI行业在今年还会有大变化,主要和算法和算力有关系。现在AI在做一些高难度动作,例如转头、翻跟头的时候还会处理不好,我认为这个这块有望今年解决。”冯先生表示,希望能有更多人参与到AI创作中,“模型的训练是需要数据支持的,大家不要对国产模型有偏见,现在国产模型真的很优秀,大家都用的话,它迭代速度是快上不少的。”
“目前发布了几期《山海经》在互联网平台上传播挺好的,这段时间我打算做一份英文版,放到国外平台上让老外看看中国的神话故事。”谈到未来,冯先生表示,希望自己的视频能带给老外一些震撼。
扬子晚报/紫牛新闻记者 姜天圣
校对 徐珩