文章主题：moss-moon-003, 基座模型, 多轮对话数据, 偏好模型
IT之家 4 月 21 日消息，复旦大学自然语言处理实验室开发的新版 MOSS 模型今日正式上线，成为国内首个插件增强的开源对话语言模型。
目前，MOSS 模型已上线开源，相关代码、数据、模型参数已在 Github 和 Hugging Face 等平台开放，供科研人员下载。
据介绍，MOSS 是一个支持中英双语和多种插件的开源对话语言模型，moss-moon 系列模型具有 160 亿参数，在 FP16 精度下可在单张 A100 / A800 或两张 3090 显卡运行，在 INT4/8 精度下可在单张 3090 显卡运行。MOSS 基座语言模型在约七千亿中英文以及代码单词上预训练得到，后续经过对话指令微调、插件增强学习和人类偏好训练具备多轮对话能力及使用多种插件的能力。
MOSS 来自复旦大学自然语言处理实验室的邱锡鹏教授团队，名字与《流浪地球》电影中的 AI 同名，已发布至公开平台（https://moss.fastnlp.top/），邀请公众参与内测。
IT之家查看 MOSS 的 GitHub 页面发现，该项目所含代码采用 Apache 2.0 协议，数据采用 CC BY-NC 4.0 协议，模型权重采用 GNU AGPL 3.0 协议。如需将该项目所含模型用于商业用途或公开部署，需要签署文件并发送至 robot@fudan.edu.cn 取得授权，商用情况仅用于记录，不会收取任何费用。
MOSS 用例： ▲ 解方程▲ 生成图片▲ 无害性测试模型在本研究中，我们成功地利用MOSS-003基座模型进行了自监督预训练。该模型是在大量高质量的中英文语料上完成的，其中包括约700B的词汇量以及约6.67×10^22次浮点数运算。通过这种方式，我们不仅提高了模型的语言理解能力，还降低了其对人类指令的依赖性，从而为自然语言处理领域带来了新的可能性。
moss-moon-003-sft: 基座模型在约 110 万多轮对话数据上微调得到，具有指令遵循能力、多轮对话能力、规避有害请求能力。
在对大量多轮对话数据（约110万轮）以及30万插件增强的多轮对话数据进行微调之后，MOSS-MOON-003-SFT插件得以完善。基于此，该插件在MOSS-MOON-003-SFT的基础上，进一步配备了四种插件功能，包括搜索引擎、文生图、计算器以及解方程等。
本文将介绍一种基于MOSS-MOON-003-SFT收集的偏好反馈数据训练得到的偏好模型,该模型将在近期开源。
基于moss-moon-003-sft模型，通过偏好模型moss-moon-003-pm进行训练，最终获得的模型在事实性、安全性及回复质量方面表现更为优异。此模型预计将在不久的将来正式开源，为我国人工智能领域的发展做出重要贡献。
moss-moon-003-plugin是基于moss-moon-003-sft-plugin并通过偏好模型moss-moon-003-pm训练而来的一种高级模型,它能够更好地理解和解释用户的意图,并且在插件使用方面表现更为出色。预计该模型将在不久的将来开源发布。
数据MOSS-002所采用的多轮对话数据，涵盖了有益性、精确性和安全性三个关键方面，其中包括大约57万条由text-davinci-003生成的英文对话以及59万条中文对话。
在MOSS-003-SFT-Data中，我们利用了MOSS-002内测阶段收集的大约10万用户输入数据以及gpt-3.5-turbo构建的数据，一同构成了这个多轮对话数据集。相较于MOSS-002-SFT-Data，MOSS-003-SFT-Data更能反映真实用户的操作意图，其包含的粒度更细、有用的类别标记更全面、无害的数据更丰富，并且对话轮数也更为延长，大约包含了110万条对话数据。目前，我们已经开放了部分示例数据，而完整的数据预计将在不久的将来公开。
moss-003-sft-plugin-data: 这款名为”moss-moon-003-sft-plugin”的插件所应用的多轮对话数据增强功能，涵盖了包括搜索引擎、文生图、计算器以及解方程在内的四个插件，总共有约30万条多轮对话数据。目前，该插件已经开放了部分示例数据，而完整的数据预计将在不久的将来得以开源。
moss-003-pm-data: moss-moon-003-pm 所使用的偏好数据，包含在约 18 万额外对话上下文数据及使用 moss-moon-003-sft 所产生的回复数据上构造得到的偏好对比数据，将在近期开源。
MOSS 的 GitHub 页面：点此查看
moss-moon-003, 基座模型, 多轮对话数据, 偏好模型
AI时代，拥有个人微信机器人AI助手！AI时代不落人后！
免费ChatGPT问答，办公、写作、生活好得力助手！
搜索微信号aigc666aigc999或上边扫码，即可拥有个人AI助手！
