当前位置:首页 > 源码资源 > 正文内容

复旦大学发布大语言模型 MOSS 引发轰动

二向箔2023-04-29 19:28:44源码资源486

example_moss_search.gif

复旦大学发布了一个引发轰动的大语言模型:MOSS

这是一个支持中英双语和多种插件的开源对话语言模型,moss-moon系列模型具有160亿参数,在FP16精度下可在单张A100/A800或两张3090显卡运行,在INT4/8精度下可在单张3090显卡运行。

MOSS基座语言模型在约七千亿中英文以及代码单词上预训练得到,后续经过对话指令微调、插件增强学习和人类偏好训练具备多轮对话能力及使用多种插件的能力。


GitHub地址:

https://github.com/OpenLMLab/MOSS


扫描二维码推送至手机访问。

版权声明:本站内容为原创和部分整理自网络,如有侵权务必联系我们删除,保障您的权益,本站所有软件资料仅供学习研究使用,不可进行商业用途和违法活动,本站不承担任何法律责任。

本文链接:https://www.erxbo.com/post/778.html

分享给朋友:

“复旦大学发布大语言模型 MOSS 引发轰动” 的相关文章

第一个通过强化学习人类反馈 (RHLF) 进行训练的大型开源聊天机器人

第一个通过强化学习人类反馈 (RHLF) 进行训练的大型开源聊天机器人

第一个通过强化学习人类反馈 (RHLF) 进行训练的大型开源聊天机器人模型下载:https://huggingface.co/CarperAI/stable-vicuna-13b-deltaStability AI 发布了 StableVicuna,这是 AI 世界上第一个开源 RLHF LLM 聊...

让你可以跟 GitHub 仓库对话的 Python工具:Chat-with-GitHub-Repo

让你可以跟 GitHub 仓库对话的 Python工具:Chat-with-GitHub-Repo

一个让你可以跟 GitHub 仓库进行对话的 Python 工具:Chat-with-GitHub-Repo。仓库包含两个 Python 脚本,演示如何使用 Streamlit、OpenAI GPT-3.5-turbo 和 Deep Lake 来创建 AI 聊天机器人。聊天机器人搜索存储在 Deep...

tsuki-wscp是一个网络爬虫,为 AI 模型训练提供数据收集

tsuki-wscp是一个网络爬虫,为 AI 模型训练提供数据收集

tsuki-wscp 是一个网络爬虫,为 AI 模型训练提供数据收集 GitHub地址:https://github.com/Tsujimar/tsuki-wscp...

Midjourney  prompt 提示词生成工具

Midjourney prompt 提示词生成工具

基于GPT-2用25万条Midjourney的promps训练出来的小模型,可以生成高质量的Midjourney  prompt。其中包含用户在一个月内向Midjourney文本到图像服务发出的 250k 文本提示。此提示生成器可用于自动完成任何文本到图像模型(包括 DALL·E 系列)的...

Palantir 将 AI和LLMs 应用于战争军事中(大语言模型用于军事辅助作战)

Palantir 将 AI和LLMs 应用于战争军事中(大语言模型用于军事辅助作战)

Palantir 将 AI和LLMs 应用于战争军事中Palantir 正在研发的 AIP汇集了最新的LLMs和尖端AI技术,尝试以合规的方式使用高度敏感环境的数据和模型,为国防机构提供AI技术优势。AIP包括了用于数据发现、准备和集成的一套工具,以及自然语言处理、计算机视觉和机器学习等相关技术。P...

一个动画图解、能运行、可提问的数据结构与算法快速入门教程

一个动画图解、能运行、可提问的数据结构与算法快速入门教程

一个动画图解、能运行、可提问的数据结构与算法快速入门教程 主要内容包括:    复杂度分析:数据结构与算法的评价维度、算法效率的评估方法。时间复杂度、空间复杂度,包括推算方法、常见类型、示例等。    数据结构:常见基本数据类型,数据在内存中的存储形...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。