您当前的位置:首页> 滚动 >正文
复旦大学 MOSS 对话式大型语言模型今日开源:可通过与人类交互实现迭代优化 每日简讯

2023-04-21 23:41:18     来源 : 站长之家


(资料图片仅供参考)

站长之家(ChinaZ.com) 4月21日消息:复旦大学自然语言处理实验室今日发布了新版 MOSS 模型,这是国内首个插件增强的开源对话语言模型。

图片来自MOSS

MOSS 模型基于公开的中英文数据训练,目前已拥有 200 亿参数,具有和人类对话的能力,并可以通过与人类交互实现迭代优化。目前 MOSS 模型已上线开源,相关代码、数据、模型参数已在 Github 和 Hugging Face 等平台开放,供科研人员下载。

MOSS 系统负责人邱锡鹏表示,下一阶段的大型语言模型需要和现实世界以及人类的价值观进行「对齐」,成为一个真正的智能体。MOSS 的开源,希望改善大型语言模型的生态环境,让科研人员在该基座上接不同的细分领域。

邱锡鹏说,人们之所以很容易有「卡脖子」问题,是因为缺乏一个好的行业生态。就拿 ChatGPT 来说,OpenAI 公司只需专注做好模型,算力、数据和系统则交给其他公司。反观国内,很多公司在做大型语言模型时所有环节都需要自己做,每家的数据和算力也有限,结果是每家都做不大。在发展过程中,大型语言模型训练与在线推理成本过高也是一个重大问题。

「我们考虑把 MOSS 开源而不是商业化,就是希望改善这种生态,有了这样一个基座,大家就不用重复开发底层技术,可以在上面接不同的细分领域。」复旦大学计算机科学技术学院教授、MOSS 系统负责人邱锡鹏说。

(举报)

标签:

X 关闭

行业要闻
土巴兔公司持续盈利能力存疑 毛利率超90%比肩茅台净利率仅10%

土巴兔公司持续盈利能力存疑 毛利率超90%比肩茅台净利率仅10%

6月底前河南省实现“场所码”全覆盖 升级后的“场所码”有啥功能

6月底前河南省实现“场所码”全覆盖 升级后的“场所码”有啥功能

公安部推行新车上牌新规 便利群众快捷上牌

公安部推行新车上牌新规 便利群众快捷上牌

北京市经信局公布今年第三批北京市“专精特新”中小企业名单

北京市经信局公布今年第三批北京市“专精特新”中小企业名单

“520”迎婚姻登记高峰!深圳市民政局:高峰日扎堆登记可能影响体验感

“520”迎婚姻登记高峰!深圳市民政局:高峰日扎堆登记可能影响体验感

北京市东城区41条措施落地 2790家中小微企业享受政策支持

北京市东城区41条措施落地 2790家中小微企业享受政策支持

地球上最幸福的人!56岁非洲建筑师获普利兹克建筑奖

地球上最幸福的人!56岁非洲建筑师获普利兹克建筑奖

新疆阿克苏地区库车市发生4.1级地震 震源深度21千米

新疆阿克苏地区库车市发生4.1级地震 震源深度21千米

从东北到西北 他在“军垦第一城”规划着城建未来

从东北到西北 他在“军垦第一城”规划着城建未来

西藏米林“家庭农场”:引领种植产业 助力乡村振兴

西藏米林“家庭农场”:引领种植产业 助力乡村振兴