豆包视频生成大模型正式发布,首次突破多主体互动难关
字节跳动正式宣告进军AI视频生成。9月24日,字节跳动旗下火山引擎在深圳举办AI创新巡展,一举发布了豆包视频生成-PixelDance、豆包视频生成-Seaweed两款大模型,面向企业市场开启邀测。
活动现场展示的视频生成效果令人惊叹。无论是语义理解能力,多个主体运动的复杂交互画面,还是多镜头切换的内容一致性,豆包视频生成大模型均达到业界先进水平。火山引擎总裁谭待表示,“视频生成有很多难关亟待突破。豆包两款模型会持续演进,在解决关键问题上探索更多可能性,加速拓展AI视频的创作空间和应用落地。”
此前视频生成模型大多只能完成简单指令,豆包视频生成模型则能实现自然连贯的多拍动作与多主体复杂交互。有创作者在抢鲜体验豆包视频生成模型时发现,其生成的视频不仅能够遵循复杂指令,让不同人物完成多个动作指令的互动,人物样貌、服装细节甚至头饰在不同运镜下也保持一致,接近实拍效果。
据火山引擎介绍,豆包视频生成模型基于DiT架构,通过高效的DiT融合计算单元,让视频在大动态与运镜中自由切换,拥有变焦、环绕、平摇、缩放、目标跟随等多镜头语言能力。全新设计的扩散模型训练方法更是攻克了多镜头切换的一致性难题,在镜头切换时可同时保持主体、风格、氛围的一致性,这也是豆包视频生成模型独树一帜的技术创新。
经过剪映、即梦AI等业务场景打磨和持续迭代,豆包视频生成模型具备专业级光影布局和色彩调和,画面视觉极具美感和真实感。深度优化的Transformer结构,则大幅提升了豆包视频生成的泛化能力,支持3D动画、2D动画、国画、黑白、厚涂等多种风格,适配电影、电视、电脑、手机等各种设备的比例,不仅适用于电商营销、动画教育、城市文旅、微剧本等企业场景,也能为专业创作者和艺术家们提供创作辅助。
目前,新款豆包视频生成模型正在即梦AI内测版小范围测试,未来将逐步开放给所有用户。剪映和即梦AI市场负责人陈欣然认为,AI能够和创作者深度互动,共同创作,带来很多惊喜和启发,即梦AI希望成为用户最亲密和有智慧的创作伙伴。
此次活动中,豆包大模型不仅新增视频生成模型,还发布了豆包音乐模型和同声传译模型,已全面覆盖语言、语音、图像、视频等全模态,全方位满足不同行业和领域的业务场景需求。
在产品能力日益完善的同时,豆包大模型的使用量也在极速增长。据火山引擎披露,截至9月,豆包语言模型的日均tokens使用量超过1.3万亿,相比5月首次发布时猛增十倍,多模态数据处理量也分别达到每天5000万张图片和85万小时语音。
此前,豆包大模型公布低于行业99%的定价,引领国内大模型开启降价潮。谭待认为,大模型价格已不再是阻碍创新的门槛,随着企业大规模应用,大模型支持更大的并发流量正在成为行业发展的关键因素。
据谭待介绍,业内多家大模型目前最高仅支持300K甚至100K的TPM(每分钟token数),难以承载企业生产环境流量。例如某科研机构的文献翻译场景,TPM峰值为360K,某汽车智能座舱的TPM峰值为420K,某AI教育公司的TPM峰值更是达到630K。为此,豆包大模型默认支持800K的初始TPM,远超行业平均水平,客户还可根据需求灵活扩容。
“在我们努力下,大模型的应用成本已经得到很好解决。大模型要从卷价格走向卷性能,卷更好的模型能力和服务。”谭待表示。
- 最近发表
-
- 随机阅读
-
- 别克君越2025白金款越级上市,限时一口价15.99万元起
- 黑龙江省举行数字贸易推介交流会 总签约额约12.4亿元
- 文明之美看东方|从古城到最早水利,走近五千年良渚
- 男孩被蜱虫叮咬妈妈自行拔虫不当致病
- 欧盟延长对委内瑞拉制裁 将15名个人列为制裁对象
- 探访江西望仙谷:“好商量”催生山区“民宿村”
- 二里头都邑多网格式布局等考古新发现:进入王朝国家最重要标志
- 杀父凶手出狱后在被害者家门口大摆宴席,律师:或涉嫌寻衅滋事
- 巴西发生6.6级地震 震源深度630千米
- 美国众议院投票决定驱逐众议员桑托斯
- 北京拟对全市用水设置总量控制指标
- 2024年纽约国际车展启幕 多品牌全新车型受关注
- “人民楷模”国家荣誉称号获得者王启民同志逝世 享年87岁
- 工信部:中国算力总规模位居全球第二
- 海南中小学开学不早于9月5日 各高校自主研判开学和返校时间
- 5月中国国家铁路发送货物3.37亿吨
- 铁路上海站迎来“五一”假期返程客流高峰 预计到达旅客58.0万人次
- 国际最新研究:神经义肢接口能让仿生腿完全响应人体神经系统
- 【冰雪春天】浙江宁波:山村寻年味 民俗“过小年”
- 2024中国产业转移发展对接活动(云南)开幕 千余企业来滇觅新机
- 热门推荐
-
- 当你的有序遇到同事的无序
- 呈演狂野西部风情 歌剧《西部女郎》邀媒体探班
- 解锁北方林区深处的“慢生活”小镇 自驾族的理想之城
- 1月中国非制造业商务活动指数稳中有升
- 西藏普兰“萌娃”讨新年“彩头”
- 台风“苏拉”将影响中国
- 2023生物多样性友好城市主题活动在宁波举办
- 中新财经年中会大咖云集,邀请您来参会
- 《我是刑警》大火,短视频平台现“周克华情人”?辩护律师:应该是蹭流量的
- 墨西哥就厄瓜多尔涉嫌违反国际法向国际法院提起诉讼
- 安徽去年新增注册商标超12万件
- 嘀嗒出租车智慧出行星级体系如何助力各地出租车服务提质增效?
- 甘肃推动税务热线“办问协同” 为企业画像实现“政策找人”
- 联合国秘书长古特雷斯发表新年致辞呼吁世界“不再分裂”
- 西安喂子坪村山洪泥石流致21人遇难6人失联
- 北京人艺新排跨年大戏《迷幻》将登台
- 中日版画艺术家同台对话 近年新作首次在国内展出
- 走进海南博后村:品黎族风情 赴“玫瑰之约”
- 往返8534公里!东航全球首架C919大型客机海外“首秀”归来
- 重庆渝中区通远门城墙因暴雨导致局部险情 无人员伤亡