MIT-IBM 提出的鲑鱼模型:最优非蒸馏、可商用的开源大模型

<img src="MIT-IBM 提出的鲑鱼模型:最优非蒸馏、可商用的开源大模型">

AIGC动态欢迎阅读

本文转载自夕小瑶科技说,原标题为:《目前最优的非蒸馏、可商用的开源大模型!MIT-IBM 提出鲑鱼模型!》。文章介绍了IBM在今年上半年推出的一种全新的大模型方法,即SELF-ALIGN(自对齐),该方法基于LLM Self-Instruct,并采用原则驱动的方式。借助开源LLaMA平台,仅使用不到300行代码(包括195个种子prompt、16个原则和5个范例)以及人类标注数据,就成功训练出了名为Dromedary的模型。此模型在TruthfulQA数据集上表现出色。

关键词:模型、原则、报告、数据、人类。

原文链接:点此阅读原文:目前最优的非蒸馏、可商用的开源大模型!MIT-IBM 提出鲑鱼模型!

联系作者

文章来源:夕小瑶科技说

作者微信:xixiaoyaoQAQ

作者简介:夕小瑶科技说是一个聚集25万AI应用开发者、算法工程师和研究人员的平台,致力于提供更快的AI前沿资讯和更深入的行业洞见。其一线作者均来自清北、国外顶级AI实验室和互联网大厂,具备丰富的媒体sense和技术深度。

© 版权声明

相关AI热点

暂无评论

none
暂无评论...