JioNLP 的 2023 年终总结，再立新一年的 flag

AIGC动态欢迎阅读

原标题：JioNLP 的 2023 年终总结，再立新一年的 flag
关键字：模型,知乎,课程,算法,工具包
文章来源：JioNLP
内容字数：5623字

内容摘要：

大家好，我是JioNLP，2023年又要马上过去了。趁着2024年元旦到来之前，我也来做一个今年的年终总结。
2023年，我主要做了如下的一些工作：
一、大模型方向的工作ChatGPT 确实带动了过去一年的 AI 行业的发展。我也按着自己的兴趣，做了一些相关的工作。
受限于我当前资源条件，我并没有直接去做大模型的训练和调优，而是，主要是做了一系列的模型评测算法。
主要是提出了一种自动评测模型的方法 MELLM，并且做实验验证了该方法的有效性：
如何优雅地自动评测 LLM 模型质量
给大模型LLM评测画一个句号
并且还出了若干份评测数据集，这些评测数据集，包含了我所了解和认为的大模型适合的发展方向。
出一份试题，评测国内对标ChatGPT的大语言模型（三）
推出一份大语言模型评测的测试题（更新版）
另外，这些评测内容，和自动评测实现算法的实现代码，感兴趣的读者可以随意取用：
当然，另一方面，我也参与制作了一些大模型 AI 的技术课程：
课程链接https://juejin.cn/book/7225592349563289600?utm_source=course_list
目前这

原文链接：JioNLP 的 2023 年终总结，再立新一年的 flag