OpenAI 是如何估计与分析模型计算量的?

AIGC动态3个月前发布 算法邦
6 0 0

OpenAI 是如何估计与分析模型计算量的?

AIGC动态欢迎阅读

原标题:OpenAI 是如何估计与分析模型计算量的?
关键字:知乎,侵权,政策,方法,算法
文章来源:算法邦
内容字数:0字

内容摘要:


直播预告 | 6月25日10点,「智猩猩AI新青年讲座」第241讲正式开讲,伊利诺伊大学厄巴纳-香槟分校在读博士赵晓明将直播讲解《从单目视频中合成动态新视图》,欢迎扫码报名~导读本文来自知乎,作者为APlayBoy。出于学术/技术分享进行转载,如有侵权,联系删文。
本文指出自2012年起,AI训练计算量指数增长,对性能提升至关重要,预计这一趋势将持续,并强调了AI安全问题的重要性。
原文链接:https://zhuanlan.zhihu.com/p/704020641?今天看到Open前些年发布的一个模型计算量的分析,感觉很有价值,有需求的人童鞋可以看一下, 内容如下:
自 2012 年以来,最大规模 AI 训练运行中使用的计算量呈指数级增长,翻倍时间为 3.4 个月(相比之下,摩尔定律的翻倍期为 2 年)。自 2012 年以来,这一指标增长了 300,000 多倍(2 年的翻倍期只能产生 7 倍的增长)。计算能力的提升一直是 AI 进步的关键组成部分,因此只要这一趋势持续下去,就值得为远远超出当今能力的系统带来的影响做好准备。
AlexNet 到 AlphaGo Zero:计算量增加


原文链接:OpenAI 是如何估计与分析模型计算量的?

联系作者

文章来源:算法邦
作者微信:allplusai
作者简介:智猩猩矩阵账号之一,聚焦生成式AI,重点关注模型与应用。

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...