实测字节豆包·视频生成模型:Sora画的饼被实现了......

字节跳动ai视频生成模型“豆包”横空出世,实力碾压竞品!近期,中国ai视频赛道捷报频传,快手可灵、minimax海螺ai等产品备受全球瞩目,甚至有国外网友惊呼“我们不再需要sora了!”。然而,最受期待的,莫过于字节跳动迟迟未露面的视频生成模型。

去年11月,字节跳动的“Make Pixels Dance”项目就已展现其在解决长视频角色一致性问题上的实力,引发外网热议:“字节跳动在哪里?” 如今,谜底揭晓!火山引擎AI创新巡展深圳站上,字节跳动重磅推出PixelDance和Seaweed两款视频生成模型,其流畅的运镜和转场效果令人叹为观止。短短10秒钟,镜头跟随人物穿梭人群,转身、旋转、变焦,切换至另一场景,技术领先优势显著。

我们有幸获得了测试资格,并对“豆包”模型进行了全面评估,重点关注了现有AI视频产品普遍存在的不足:语义理解偏差和一致性问题。

测试一:空间理解

测试提示词(中文/英文):胶片质感,下雨天,四周堆满垃圾的小巷里,镜头拍摄一只橘猫转身走向巷子深处,雨水倒映它的身体。(Film texture, on a rainy day, the camera shot an orange cat turned to go deep into the alley, the rain reflected its body.)

测试结果显示,“豆包”模型以其极高的完成度脱颖而出。一次生成便完美展现了胶片质感、场景细节、猫的转身动作以及雨水倒影,甚至连猫脚踩过水面泛起的涟漪和垃圾堆的地形起伏都精准呈现,令人震撼。

相比之下,快手可灵1.5高画质模式虽然动态天气效果出色,但胶片质感处理过度,猫的尾巴也出现变形;Minimax海螺AI画面观感较好,但未能理解猫转身的动作;LUMA和Runway则表现欠佳,场景和人物细节均存在诸多问题。

测试二:特效电影

测试提示词(中文/英文):深夜的巷子漂浮着浓烟,地面污水横流,许多老鼠走来走去,镜头逐渐推进到一个雪人戴着礼帽坐在垃圾桶上仰头喝啤酒,随后扔掉啤酒瓶。镜头特写啤酒瓶在地面上滚动,老鼠向四周逃窜。(There is thick smoke floating in the alley late at night, sewage flowing across the ground, and many rats walking around. The camera gradually advances to a snowman wearing a top hat sitting on a trash can, drinking beer, and then throwing away the beer bottle. Close-up shot of beer bottles rolling on the ground and mice scurrying around.)

此测试场景复杂,对场景一致性和现实与3D动画风格融合提出了更高要求。“豆包”模型再次展现其强大的实力,完美呈现了所有细节,包括镜头推进、特写切换以及场景的一致性,令人惊叹。

其他模型则或多或少存在不足,例如可灵模型人物动作不符合要求,海螺AI镜头方向错误,Runway和LUMA则画面粗糙,细节缺失。

测试三:多角色动作控制及与Sora的对比

“豆包”模型在多角色动作控制方面也表现出色,例如生成的毛毡动画短片中,14只动物能够同步完成动作,展现其强大的协调能力。 此外,“豆包”模型还解决了Sora存在的角色一致性差、语义理解差等问题,在画面细节、流畅度和效率方面均大幅领先。

总结:

字节跳动“豆包”模型的惊艳表现并非偶然,其背后是长期技术积累和创新突破的结果。 “豆包”采用DiT架构,并通过自主研发的语言大模型、扩散模型训练方法以及Transformer结构优化,实现了前所未有的视频生成能力,在多个方面超越了现有竞品,为AI视频生成领域树立了新的标杆。 虽然不能断言其完全压倒Sora,但其强大的实力不容忽视,尤其是在长视频、多角色控制和画面一致性方面,已经展现出显著的优势。

以上就是实测字节豆包·视频生成模型:Sora画的饼被实现了......的详细内容,更多请关注昆居客【www.kunjuke.com】AI人工智能频道。

相关推荐:

别墅可用:华为靳玉志实测启境 GT7,首曝 ADS 5 能自定义收藏没划线的「野生车位」

7 月 12 日消息,启境 GT7 已于 7 月 9 日正式开启全国交付,启境汽车 CEO 刘嘉铭和华为智能汽车解决方案 BU CEO 靳玉志昨日直播实测了这款新车。注意到,在直播中,靳玉志首曝了华为乾崑智驾 ADS 5 的一项新特性 —— 没划线的「野生车位」也能自定义收藏。靳玉志称,有一个朋友提出了一个场景,说他家是一个别墅,然后别墅里的车位没有划线,属于自由车位,而他希望 ADS 能够支持自...

字节旗下付费小说 App 红烛故事宣布将停止运营

7 月 12 日消息,字节旗下付费小说 App 红烛故事发布《站内停服通知》,称红烛故事 App 将于 2026 年 7 月 9 日起至 2026 年 8 月 17 日,逐步停止相关运营服务。应用商店显示,该 App 开发商和运营商均为江西笔绘墨影科技有限公司,为字节跳动间接全资控股的子公司,由北京笔墨留香科技有限公司 100% 持股。不同于字节旗下的“番茄免费小说”,红烛故事除了有免费专区外,还...

路透社实测发现,Meta 检测工具面对裁剪后的自家 AI 生成图片竟然“失灵”

7 月 11 日消息,路透社 10 日披露的测试结果显示,Meta 本周公布的一款 AI 图像检测工具存在明显局限:部分由 Meta 自家模型 Muse Image 生成的图片只要经过裁剪,检测工具便无法确认其 AI 来源。Meta 在推出 Muse Image 的同时介绍了这款检测工具,并声称即使图片经过裁剪,工具仍可识别由 Meta AI 生成的内容。不过,路透社的测试结果显示,常见的图片修改...

特斯拉柏林超级工厂推出电池初创企业挑战赛,产线直接实测新技术

7 月 7 日消息,特斯拉正向外部创新企业开放柏林超级工厂,以此加速完善欧洲供应链体系。该公司推出了全新产业加速项目,邀请电池科技初创企业将自研硬件与解决方案直接落地至正在运行的生产车间,用以解决生产瓶颈、提升整体产能。特斯拉刚刚正式启动电池电芯超级工厂挑战赛,该项目由特斯拉与柏林、勃兰登堡地区深耕科研型科技企业的创业孵化器 JUNI 联合打造。柏林超级工厂厂长安德烈 · 蒂里希在社交平台 X 上...

字节发布多模态图像创作模型 Seedream 5.0 Pro:复杂信息可视化、交互式精准编辑

7 月 8 日消息,字节跳动今日宣布,正式发布多模态图像创作模型 Seedream 5.0 Pro。据介绍,相比之前版本,Seedream 5.0 Pro 在图文匹配、结构合理性、文字渲染与画面美感等基础能力上全面提升:复杂信息可视化:将数据、概念与密集文字准确转化为专业排版,直接用于高信息密度的内容生产。▲ Prompt:生成一张《新手观鸟入门指南》自然科普信息图,采用清新配色的网格排版,展示 ...

IT早报 0706:豆包千问智能体 Agent 下线;多地推行网约车“一车一码”;我国“人造太阳”计划 2030 年演示发出第一度电;微信承诺异常企微拉群将强制确认...

“IT早报”时间,大家好,现在是 2026 年 7 月 6 日星期一,今天的重要科技资讯有:1、继豆包后,阿里千问宣布拟人化互动类智能体、用户自建智能体 7 月 10 日下线千问平台发布公告称,因功能升级与维护,拟人化互动类智能体及用户自建智能体功能将于 2026 年 7 月 10 日正式下线(注:App 端显示“智能体功能与服务”将于 7 月 15 日正式下线)。>> 查看详情2、多...

豆包又一功能下线,“应用生成”已停止服务

7 月 6 日消息,据《读佳》今日消息,豆包在宣布全面下线“智能体”功能之前,其“应用生成”功能已于 5 月 31 日率先停止服务。目前,用户此前通过该功能创建的历史应用,仍可在豆包会话中进行查看、复制、下载及分享,但无法再新建或更新。不过,其编程功能依然保留。豆包应用生成能让普通人不用写代码,靠描述需求就能做出可运行的小应用或小游戏。它主要面向非技术背景用户,把创意直接变成能体验的产品。查询发现...

华为何庭波发布 V2 版“韬定律”论文,补充工程细节和实测数据

感谢网友 pzvincent 的线索投递! 7 月 4 日消息,根据中国科学院科技论文预发布平台 ChinaXiv 最新公示论文,华为半导体负责人何庭波于 7 月 3 日发布《面向多层级电子系统的时间缩微理论》(业内也称“韬定律”)V2 版本。相比较 5 月 25 日发布的 V1 版本,新版论文在原有理论框架基础上,补充了大量工程落地细节、实测量化数据与产品演进路线,进一步完善了以时间常数 τ 为...