当前位置:首页 > 科技资讯 > 正文

字节新招:Seedance 2.0让AI视频创作触手可及

文章开始之前,让我们先欣赏一段动图吧。

字节新招:Seedance 2.0让AI视频创作触手可及 Seedance 2.0 AI视频创作 字节 即梦 第1张

(图源:哔哩哔哩)

看到这样酷炫的大片场景,你是否也被其逼真的材质和氛围所震撼?但如果我告诉你,这一切都是由纯AI生成的呢?相信不少读者会感到惊讶,并试图从片段中寻找可能的穿帮之处。

随着技术的飞速发展,特效与AI之间的界限日益模糊,制作视频似乎从未如此简单。然而,尽管技术门槛看似降低,但大多数人可能仍停留在光看不练的阶段,或是尝试了却难以入门。

原因其实很简单:这个领域太容易让人望而却步了。

想要做出高质量的作品,就需要自己部署模型,并在ComfyUI上创建稳定可控的工作流。但面对那一堆密密麻麻的参数,即便是经验丰富的老手也可能感到头疼,更不用说普通人了。

对于想随便玩玩的人来说,Sora和Veo可能是个选择,但这些网站不仅价格不菲,效果还像抽卡一样随机,且在国内难以使用。

然而,在大家被困扰了许久之后,国内的字节跳动却悄然放了个大招。

字节新招:Seedance 2.0让AI视频创作触手可及 Seedance 2.0 AI视频创作 字节 即梦 第2张

(图源:即梦)

就在这个星期,字节跳动旗下的视频模型Seedance 2.0突然上线。没有漫长的排队申请,也没有隐秘的内测邀请,它就在春节这个年度最大流量窗口,直接面向大众开放。

体验过后,我只想说,对于想自己动手做AI视频的朋友们,好日子来了。

生成15秒,排队一小时

首先来谈谈如何使用。

Seedance 2.0目前已在即梦平台上线,会员用户(至少69元)可以直接使用最新模型,电脑web版、手机APP均可用,预计过几天会全量开放。

如果不想充钱,也可以用字节旗下的小云雀,目前登录新用户赠送三次Seedance 2.0免费生成机会,同时每天赠送120积分。

用完免费机会后,用Seedance 2.0生成视频每秒耗费8积分,即每天最多可免费生成15秒视频内容,尝鲜倒是没问题。

字节新招:Seedance 2.0让AI视频创作触手可及 Seedance 2.0 AI视频创作 字节 即梦 第3张

(图源:雷科技)

接下来看能力层面。

众所周知,以前国内大部分视频模型只能播放默片,就连字节也是直到去年年底的Seedance 1.5版本才加入配音功能。

而现在,Seedance 2.0的声音和画面配合得已十分默契。

该模型在生成视频的同时可生成匹配的音效和配乐,并支持口型同步和情绪匹配,确保角色说话时嘴型、表情和语气都正确无误。

为了验证其能力,我输入了一段简单的提示词:第一人称视角,坐在老式绿皮火车的窗边,看着窗外飞驰而过的田野,桌上的玻璃杯微微震动。

或许是因为体验者太多,我排队一个多小时才等到视频生成完毕。

说实话,这个画面的精细度并不让我感到意外,真正让我有些起鸡皮疙瘩的是声音。视频里不仅有柔和的BGM,还有火车压过铁轨特有的“况且况且”的低频节奏声,甚至当镜头扫过桌上的玻璃杯时,杯子里的水因震动泛起的波澜都清晰可见。

看着窗外的田野和西下的斜阳,真的很难想象这一切都不曾存在过。

这种“原生音效”的体验与后期硬贴上去的配音截然不同。它说明AI不仅仅在画画,更理解了画面里发生了什么,并知道在这个场景下应该发出什么声音。

从文案到成片一人跑通,但语音错乱与画面乱码依旧存在

基础测试过关后,接下来是更高难度的挑战。

对于大多数想做自媒体的朋友来说,我们不仅希望AI能画得像,更希望它能懂我们的脑洞。

为此,Seedance 2.0引入了自分镜和自运镜的概念。

简单来说,就是它可以根据你的描述自动规划分镜和运镜,只需告诉它需求即可。

我试着输入了一句简单的指令:一个穿着运动鞋的人在松软的沙滩上用力奔跑,夕阳西下。

这句话的难点不仅在于分镜上,更在于对物理世界的理解。

因为沙子是流体,脚踩下去会陷落、抬起来会带起沙粒等细节以前很难还原。

在生成的视频里,我确实看到了脚掌陷入沙地的凹陷感、沙粒向后飞溅的轨迹以及小腿肌肉的颤动感。

说实话,看到这个结果时我脑海里闪过一个念头:这个效果已经可以直接用在短视频里了

总结

在我看来,Seedance 2.0的出现算是给国内创作者打了一针强心剂。 不可否认从纯粹的技术指标或内容产出来看Sora在超长镜头的连贯性和画面艺术感上可能仍是行业标杆。 但在科技圈有一个朴素的道理: 好用的技术首先得是能用到的技术。 就目前来说Seedance 2.0几乎没有使用门槛人人都能轻松注册使用价格相比同类竞品甚至还挺有性价比的。 知名自媒体博主“影视飓风”Tim也在今天盛赞了Seedance 2.0模型的生成结果他认为模型生成视频的精细程度、摄像机的运动情况、分镜连续性效果以及音画的匹配度都很出色称其为“改变视频行业的AI”。 某种意义上来说影像行业从业者的看法比自媒体的评价和大模型榜单的跑分要重要得多。 我打赌在未来半年内大家会在抖音、视频号里刷到大量由Seedance 2.0生成的短剧、悬疑解说甚至是带货视频。 那些不需要复杂演技主打视觉奇观或剧情反转的内容将是第一波被AI彻底改造的领域。 你敢相信从来没有任何美术、动画乃至视频经验的我也能做出这样流畅的角色动画吗? 当然它还是有缺点的。 比如目前的算力成本依然很高普通用户如果不大规模氪金生成速度可能会让他们等到花儿都谢了而且这种抽卡式的创作逻辑注定了它还不能完全替代需要精确控制的传统影视制作。 此外除了训练数据的来源争议视频大模型带来的“真假难辨”的视频还将引发一系列社会问题比如DeepFake视频诈骗、AI视频假新闻、新型网暴、人身侵权等等……这些都值得社会关注。 但我相信随着AI技术成熟这些问题都会得到妥善解决。 在我看来Seedance 2.0不需要替代好莱坞。 它只需要让每一个普通人当在脑子里蹦出一个好故事的时候能低成本地把它变成画面这就足够了。 毕竟路是一步步走出来的而不是画饼画出来的。