AIGC动态欢迎阅读
原标题:清华太极-Ⅱ 光芯片登上Nature,首创架构突破智能光计算训练难题
关键字:太极,神经网络,系统,架构,光子
文章来源:大数据文摘
内容字数:0字
内容摘要:
大数据文摘授权转载学术头条
撰文:马雪薇
未来的人工智能(AI)模型,或许可以用“光”来训练了。长期以来,传统的电子计算推动着 AI 模型规模的不断扩展,但大规模意味着高算力,也意味着高能耗,因此,亟需一种高效低能耗的计算方法来解决未来 AI 模型所面临的能源问题。
近年间,具有高算力低功耗特性的智能光计算逐步登上了算力发展的舞台。通用智能光计算芯片“太极”的问世便是其中的一个缩影,它首次将光计算从原理验证推向了大规模实验应用,以 160TOPS/W 的系统级能效为大规模复杂任务的“推理”带来了曙光,但未能够释放智能光计算的“训练之能”。
训练和推理是 AI 大模型核心能力的两大基石,缺一不可。相较于模型推理而言,模型训练更需要大规模算力。
然而,现有的光神经网络训练严重依赖电计算进行离线建模并且要求物理系统精准对齐。正因如此,光学训练的规模受到了极大的限制。
由清华大学电子工程系教授方璐、自动化系戴琼海院士及其科研团队提出的全前向智能光计算训练架构太极-II,摆脱了原有光计算系统对电计算离线建模的依赖,实现了大规模神经网络的在线训练,并有潜力支撑未来 AI 大模型的高速、低功耗训练。
原文链接:清华太极-Ⅱ 光芯片登上Nature,首创架构突破智能光计算训练难题
联系作者
文章来源:大数据文摘
作者微信:
作者简介:
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...