Sora出圈,背后DiT也火了!作者NYU谢赛宁官宣全新升级版SiT

AIGC动态3个月前发布 新智元
21 0 0

Sora出圈,背后DiT也火了!作者NYU谢赛宁官宣全新升级版SiT

AIGC动态欢迎阅读

原标题:Sora出圈,背后DiT也火了!作者NYU谢赛宁官宣全新升级版SiT
关键字:模型,方法,时间,系数,团队
文章来源:新智元
内容字数:5071字

内容摘要:


新智元报道编辑:好困
【新智元导读】扩散Transformer(DiT)重磅升级——可扩展插值Transformer(SiT)!虽然核心架构没变,但在质量、处理速度和使用灵活性方面都实现了显著提升。最近,OpenAI的视频生成模型Sora实火。
根据纽约大学计算机系助理教授谢赛宁的分析,Sora是基于自己和William Peebles共同提出的DiT框架设计而成。论文被ICCV 2023接收。
随后,William Peebles加入了OpenAI,领导了开发Sora的技术团队。
论文地址:https://arxiv.org/abs/2212.09748
与此同时,随着大家对DiT的关注越来越高,谢赛宁团队还官宣了重磅升级之后的SiT架构——Scalable Interpolant Transformer,即可扩展插值Tranformer。
虽然基于相同的骨干,但SiT实现了更好的质量、速度和灵活性。
对此,谢赛宁表示,SiT突破了传统扩散技术的限制,从而可以利用插值法开拓更加广泛的设计领域!
论文地址:https://arxiv.org/abs/2401.08740
可扩展插值T


原文链接:Sora出圈,背后DiT也火了!作者NYU谢赛宁官宣全新升级版SiT

联系作者

文章来源:新智元
作者微信:AI_era
作者简介:智能+中国主平台,致力于推动中国从互联网+迈向智能+新纪元。重点关注人工智能、机器人等前沿领域发展,关注人机融合、人工智能和机器人革命对人类社会与文明进化的影响,领航中国新智能时代。

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...