惨遭拒稿的Mamba,7个月后拿下首届COLM杰出论文,华为实验室等4篇入选

AIGC动态3个月前发布 量子位
11 0 0

惨遭拒稿的Mamba,7个月后拿下首届COLM杰出论文,华为俄罗斯实验室等4篇入选

AIGC动态欢迎阅读

原标题:惨遭拒稿的Mamba,7个月后拿下首届COLM杰出论文,华为实验室等4篇入选
关键字:华为,报告,模型,语言,人工智能
文章来源:量子位
内容字数:0字

内容摘要:


梦晨 发自 凹非寺量子位 | 公众号 QbitAI顶流新会议首届COLM成功举办,Mamba等4篇论文获得杰出论文奖。
新架构Mamba系列经历了原论文被ICLR拒稿引起热议等后,Mamba 2后续被ICML 2024接收,现在开山之作也终于获得了应有的认可。
虽然COLM刚刚才办第一届,热闹程度已不输老牌顶会,根据参会者现场返图,海报区人挤人。
作为专注语言建模的会议(Conference on Language Modeling),四篇获奖论文分别探讨了序列建模的新架构、语言模型中的评估问题、数据中的知识截止问题、以及生成文本的检测。
Mamba作者Tri Dao参会感觉,由于专注于单一领域,人们投入程度更高。
最佳论文讲了啥第一篇:Mamba: Linear-Time Sequence Modeling with Selective State Spaces,团队来自CMU、斯坦福
https://arxiv.org/abs/2312.00752
获奖理由
Mamba 解决了结构化状态空间序列模型中的关键架构和实现问题,创造了一个潜在可行的Transformer替代方案。虽然


原文链接:惨遭拒稿的Mamba,7个月后拿下首届COLM杰出论文,华为实验室等4篇入选

联系作者

文章来源:量子位
作者微信:
作者简介:

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...