中国首个Sora级视频大模型Vidu发布,生数科技与清华联合推出

中关村

发布时间:

2024-04-28 10:46:46

来源:IPO早知道
中国首个Sora级视频大模型Vidu发布,生数科技与清华联合推出

中国首个长时长、高一致性、高动态性视频大模型。

本文为IPO早知道原创

作者|Stone Jin

据IPO早知道消息,在4月27日举行的中关村论坛未来人工智能先锋论坛上,生数科技联合清华大学正式发布中国首个长时长、高一致性、高动态性视频大模型——Vidu。

该模型采用团队原创的Diffusion与Transformer融合的架构U-ViT,支持一键生成长达16秒、分辨率高达1080P的高清视频内容。Vidu不仅能够模拟真实物理世界,还拥有丰富想象力,具备多镜头生成、时空一致性高等特点。Vidu是自Sora发布之后全球率先取得重大突破的视频大模型,性能全面对标国际顶尖水平,并在加速迭代提升中

事实上,Vidu的快速突破源自于团队在贝叶斯机器学习和多模态大模型的长期积累和多项原创性成果。其核心技术U-ViT架构由团队于2022年9月提出,早于Sora采用的DiT架构,是全球首个Diffusion与Transformer融合的架构,完全由团队自主研发

自今年2月Sora发布推出后,团队基于对U-ViT架构的深入理解以及长期积累的工程与数据经验,在短短两个月进一步突破长视频表示与处理关键技术,研发推出Vidu视频大模型,显著提升视频的连贯性与动态性。

从图文任务的统一到融合视频能力,作为通用视觉模型,Vidu能够支持生成更加多样化、更长时长的视频内容,同时面向未来,灵活架构也将能够兼容更广泛的模态,进一步拓展多模态通用能力的边界。

Vidu的问世,不仅是U-ViT融合架构在大规模视觉任务中的又一次成功验证,也代表了生数科技在多模态原生大模型领域的持续创新能力和领先性。同时生数科技表示,大模型的突破是一个多维度、跨领域的综合性过程,需要技术与产业应用的深度融合。因此在发布之际,生数科技正式推出“Vidu大模型合作伙伴计划”,诚邀产业链上下游企业、研究机构加入,共同构建合作生态。

成立于 2023 年 3 月的生数科技致力于打造全球领先的多模态大模型及应用产品,现已推出产业级多模态大模型,全链路自主训练、自主研发,支持图像生成、3D 模型生成、视频生成等多项任务。同时依托于 MaaS(模型即服务)能力,生数科技推出视觉创意设计平台 PixWeaver、3D 资产创建工具 VoxCraft 等应用工具,面向艺术设计、游戏制作、影视动画、社交娱乐等领域提供赋能,致力于用 AI 提升全人类的创造力和生产力。

截至目前,生数科技已完成数亿元融资,投资方包括启明创投蚂蚁集团、BV百度风投、达泰资本、锦秋基金、卓源亚洲等知名机构。

免责声明:泡财经所有平台仅提供服务对接功能,资讯信息、数据资料来源于第三方,其中发布的文章、视频、数据仅代表内容发布者个人的观点,并不代表泡财经平台的观点,不构成任何投资建议,仅供参考,用户需独立做出投资决策,自行承担因信赖或使用第三方信息而导致的任何损失。投资有风险,入市需谨慎。

泡财经

请先登录后发表评论

0条评论