15小时、几千元训完中文版LLaMA2!低成本方案全面开源,包含代码权重,支持商用

AIGC动态12个月前发布 量子位
27 0 0

15小时、几千元训完中文版LLaMA2!低成本方案全面开源,包含代码权重,支持商用

AIGC动态欢迎阅读

原标题:15小时、几千元训完中文版LLaMA2!低成本方案全面开源,包含代码权重,支持商用

关键字:模型,数据,中文,词表,能力

文章来源:量子位

内容字数:7744字

内容摘要:明敏 发自 凹非寺量子位 公众号 | QbitAI训练大模型,几千块就能实现了!现在,15小时、几千块钱、85亿 token数据,即可训出中文LLaMA2。综合性能达到开源社区同规模从头预训练SOTA模型水平。方案完全开源,包括全套训练流程、代码及权重。而且无商业限制,还可迁移应用到任意垂类领域和从头预训练大模型的低成本构建。要知道,从头预训练大模型此前被戏称“要5000万美元才能入局”,让许多开…

原文链接:点此阅读原文:15小时、几千元训完中文版LLaMA2!低成本方案全面开源,包含代码权重,支持商用

联系作者

文章来源:量子位

作者微信:QbitAI

作者简介:追踪人工智能新趋势,关注科技行业新突破

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...