Stable LM 2 是一个先进的 16 亿和 120 亿参数的语言模型,经过在英语、西班牙语、德语、意大利语、法语、葡萄牙语和荷兰语等多种语言数据上训练。

16亿 120亿

10.81万 10个月前

自述文件

Stable LM 2 16 亿 是一个先进的 16 亿和 120 亿参数的小型语言模型,经过在英语、西班牙语、德语、意大利语、法语、葡萄牙语和荷兰语等多种语言数据上训练。

该模型在公开可用的数据集和合成数据集的混合上进行训练,利用直接偏好优化 (DPO)。

参考

公告

HuggingFace