NeurIPS 2023精选回顾:大模型最火,清华ToT思维树上榜

AIGC动态10个月前发布 新智元
6 0 0

NeurIPS 2023精选回顾:大模型最火,清华ToT思维树上榜

AIGC动态欢迎阅读

原标题:NeurIPS 2023精选回顾:大模型最火,清华ToT思维树上榜
关键字:模型,论文,语言,能力,题目
文章来源:新智元
内容字数:7913字

内容摘要:


新智元报道编辑:Mindy
【新智元导读】美国著名科技播客Latent Space对于刚刚过去的NeurIPS 2023上的精彩论文进行了一个全面的总结,回顾了多篇优秀论文,虽然没有获奖,但同样值得学界关注。近日,作为美国前十的科技博客,Latent Space对于刚刚过去的NeurIPS 2023大会进行了精选回顾总结。
在NeurIPS会议总共接受的3586篇论文之中,除去6篇获奖论文,其他论文也同样优秀和具有潜力,甚至有可能预示着下一个AI领域的新突破。
那就让我们来一起看看吧!
论文题目:QLoRA: Efficient Finetuning of Quantized LLMs论文地址:https://openreview.net/pdf?id=OUIFPHEgJU
这篇论文提出了QLoRA,这是LoRA的一种更省内存但速度较慢的版本,它使用了几种优化技巧来节省内存。
总体而言,QLoRA使得在对大型语言模型进行微调时可以使用更少的GPU内存。
他们训练了一个新模型,Guanaco,仅在单个GPU上进行了为期24小时的微调,并在Vicuna基准测试中表现优于先前的模型。
与此


原文链接:NeurIPS 2023精选回顾:大模型最火,清华ToT思维树上榜

联系作者

文章来源:新智元
作者微信:AI_era
作者简介:智能+中国主平台,致力于推动中国从互联网+迈向智能+新纪元。重点关注人工智能、机器人等前沿领域发展,关注人机融合、人工智能和机器人革命对人类社会与文明进化的影响,领航中国新智能时代。

阅读原文
© 版权声明

相关文章

暂无评论

暂无评论...