比 Sora DiT 架构早两个月的 U-ViT,由这家中国 AIGC 公司提出

比 Sora DiT 架构早两个月的 U-ViT,由这家中国 AIGC 公司提出

AIGC动态欢迎阅读

原标题:比 Sora DiT 架构早两个月的 U-ViT,由这家中国 AIGC 公司提出
关键字:模型,架构,科技,团队,图文
文章来源:AI科技评论
内容字数:6551字

内容摘要:


CVPR2023 曾拒稿 OpeanAI 的 DiT,收录生数科技的 U-ViT。作者丨王悦
编辑丨陈彩娴
「Sora 出来之后,团队就开始连轴转,没休息过。」这是 AI 科技评论了解到的,目前国内诸多 AIGC 创业公司的现状。
Sora 的确让世界范围内的创业公司措手不及。随之而来的,有一种悲观论调和怀疑态度:创业公司和 OpenAI 拼术是否有意义?是否有必要做同样的事情?有多大的生存空间?
诚然,要弥合和 OpenAI 的差距并非易事,基于算力、投资等前提条件, OpenAI 的效果自然不是短期内可以达到,但是也不见得到了技术层的创业公司无路可走的地步。
清华系创业团队生数科技提出的技术路线,和 Sora 在架构路线上完全一致,均是提出了将Transformer 与扩散模型融合的思路,在具体的实验路径上也一致。并且,生数科技的 U-ViT 比 OpenAI 的 DiT 早了两个月。
甚至,彼时的 CVPR2023 选择收录了U-ViT,而将 DiT 拒稿。
目前,生数科技的多模态大模型全链路均自主训练、自主研发,是全球首个将Transformer架构引入扩散模型的骨干网络。在文


原文链接:比 Sora DiT 架构早两个月的 U-ViT,由这家中国 AIGC 公司提出

联系作者

文章来源:AI科技评论
作者微信:aitechtalk
作者简介:雷峰网旗下AI新媒体。聚焦AI前沿研究,关注AI工程落地。

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...