据澎湃新闻报道,针对MOSS与ChatGPT的差异,复旦大学计算机科学技术学院邱锡鹏表示,ChatGPT的参数量多达1750亿个,而MOSS大约是前者的1/10左右。
邱锡鹏解释称,选择百亿规模这样级别的参数,是因为学术界主要是做一些探索性的技术,这个规模也在财力物力承受范围之内。实验结果证实了我们的猜想,MOSS模型可以非常顺利地与人类进行聊天互动。
2月20日,复旦大学自然语言处理实验室发布了国内第一个对话式大型语言模型MOSS(moss.fastnlp.top/#/),并通过邀请码进行内测。
复旦大学自然语言处理实验室称,MOSS只是想在百亿规模参数上探索和验证chatGPT的技术路线,并且实现各种对话能力。MOSS还是一个非常不成熟的模型,距离ChatGPT还有很长的路需要走。由于训练数据中的多语言语料库有限,MOSS 在理解和生成非英语文本方面表现不佳。目前正在开发一个改进版本,以提高其中文语言能力。
邱锡鹏表示,如果优化顺利,计划在三月底开源MOSS。
免责声明:本网站内容主要来自原创、合作伙伴供稿和第三方自媒体作者投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。任何单位或个人认为本网站中的网页或链接内容可能涉嫌侵犯其知识产权或存在不实内容时,应及时向本网站提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明。本网站在收到上述法律文件后,将会依法尽快联系相关文章源头核实,沟通删除相关内容或断开相关链接。