敖飞寺的齐岳
量子比特|公众号QbitAI
MinMax Conch AI新模型让2D角色动起来!
日本漫画、游戏、插画等各种风格的静态人物可以流畅转变成生动的2D风格视频。
量子比特也立即启动,测量到了—— 波。
首先,请选择今年的顶级悟空老师,然后输入以下提示(输入是英文,这里是意译):
悟空在波涛汹涌的大海上准备战斗。金箍闪烁着金光,衣摆被风吹起。气氛紧张。
我们来看看海螺生成效果:
不得不说,真有大片大战即将打响的感觉!
然后,我们以经典动漫《你的名字》的海报为例,输入以下提示:
男孩和女孩转身相对,表情感动,眼含泪水,渐渐靠近,最后拥抱在一起。
最终生成的效果真是太神奇了。
甚至人物动作中的一些停顿也被捕捉到。还有AI最不擅长的头发问题,视频中的效果并没有感觉太不协调。
最后,这是一个抽象的(doge):
鸣人向哆啦A梦要草帽,一个女孩带着哆啦A梦拿着草帽出现,然后柯南在一旁思考。
输入图像:
我们来看看海螺生成效果。
视频中,火影忍者、哆啦A梦、草帽一伙的元素都自然地结合在一起。然而,由于柯南在提示中使用了柯南一词,因此无法完全理解。视频整体非常自然,可以看到一些生动的衣服和头发的动作。
海洛I2V-01-Live是海洛图像转视频系列的最新型号,大大提高了生成图像的流畅度和动作的生动连贯性。
主要针对稳定性和微妙的表达进行了优化,同时还支持非常丰富的美术风格,可以制作出更加流畅精致的作品。
更多网友作品
网友们见状按捺不住,立马创作了不少作品。
例如最近非常流行的《双城之战》中的Jinx:
与之前的I2V-01模型相比,人物动作更加流畅,体验就像从24帧增加到60帧一样。
更复杂的插图和水彩风格也很容易掌握:
另一个例子是知名博主Hyacinth尝试的中世纪插画风格:
还有类似经典动漫《超时空要塞》风格的太空飞船片段:
经典日本动漫风格,内置摄像调度+武士元素:
甚至还有水墨风格、插画风格以及熟悉的迪士尼3D风格:
国产AI视频模型之光
说到MinMax的海螺,其实在网络视频创作社区里已经流行很久了。绝对是这一波最国产的AI视频机型之一。光!
在Vbench(知名视频生成模型的测试基准)多个维度均名列前茅,尤其是图片生成质量维度,排名第三。
经常被国内外网友用来创作一些奇怪的表情包或影视剧创作。
例如,欺骗《黑客帝国》:
专业电影导演Dave Clark 也使用海螺生成非常高质量的科幻电影剪辑:
很多网友表示,海螺模型的优点主要在于生成更细腻的表情和更流畅的动作。
让我们看一些例子来感受一下:
比如下面这段来自国外的病毒视频,画面中的女子瞬间从大笑变成了捂脸哭泣,但这个变化过程非常自然,观看起来非常有代入感:
如果仔细看的话,可以看到小姐姐眼里的泪水逐渐增多,还有眉头慢慢皱起的过程。这演技绝对是一流的。
愤怒、悲伤、害怕、惊讶……多种表情可以快速生成:
看下面海螺生成的运行场景。作者表示,不仅生成更加自然,而且人物的一致性控制也很完美。
One More Thing
下半年图像视频生成模式,海螺主攻二维风格,而其他公司也开始主打“风格化”和“差异化”
例如,Runway的frames功能可以协调修改多个相关的屏幕:
还有最近流行的复古电影风格的recraft形象:
以及刚刚开源的腾讯混元的真实感:
有艺术家评价,未来选择型号就像选择不同的相机品牌一样。真的很有趣!
参考链接:
[1]https://x.com/Hailuo_AI/status/1863961575574622662
[2]https://huggingface.co/spaces/Vchitect/VBench_Leaderboard
– 超过-
量子比特QbitAI·今日头条签约
关注我们,第一时间了解前沿技术动态
版权声明:本文转载于网络,版权归作者所有。如有侵权,请联系本站编辑删除。