部分开源大摸型的预鸿练摸型开源与两用情况-小牛行研(hangyan.co)-AI驱动的行业研究数据服务

部分开源大摸型的预鸿练摸型开源与两用情况

研究报告节选:

预训练数据集开源对模型商用至关重要。在后 LLaMA 时代,开源大模型犹如雨后春笋般涌现,但很快大家便发现由于 LLaMA 和 OpenAI 的限制,基于其开发的模型无法商用(Alpaca、Koala、GPT4All、Vicuna),为了打破这一局面,Dolly2.0 率先出手,“为了解决这个难题,我们开始寻找方法来创建一个新的,未被“污染”的数据集以用于商业用途。”随后 Red Pajama 和 MOSS 接踵而至。
最后更新: 2023-05-31

相关行业研究图表


Cross-Modal Retrieval
Cross-Modal Retrieval-小牛行研(hangyan.co)-AI驱动的行业研究数据服务
由GPT-4评估的回答质量
由GPT-4评估的回答质量-小牛行研(hangyan.co)-AI驱动的行业研究数据服务
弊分开粥大换生指数塔装的井3与尚用清说
弊分开粥大换生指数塔装的井3与尚用清说-小牛行研(hangyan.co)-AI驱动的行业研究数据服务
Zeno Build评结果
Zeno Build评结果-小牛行研(hangyan.co)-AI驱动的行业研究数据服务
歌工程师发文阑述对大模型竞争格局的担忧
歌工程师发文阑述对大模型竞争格局的担忧-小牛行研(hangyan.co)-AI驱动的行业研究数据服务
2021年,中国服务器操作系统市场,Lux装机量市占率远超Un心
2021年,中国服务器操作系统市场,Lux装机量市占率远超Un心-小牛行研(hangyan.co)-AI驱动的行业研究数据服务

相关行业研究报告


图表内容


图表18:部分开源大摸型的预鸿练摸型开源与两用情况
预训练数据集是否开源
模型是否可商用
LLaMA
Alpaca
Vicuna
Koala
Dolly2
RedPajama
MOSS
黄料来源:LLaMA.Alpaca.GPT4ALL、Vicuna、Koala、Dolly.2.0.Red Pajama.MOSS模型官网,国盛证泰研