Starling 是一个大型语言模型,通过 AI 反馈的强化学习进行训练,专注于提高聊天机器人的帮助性。

7b

81.3K 11 个月前

自述文件

Starling-7B 是一个开放(非商业)的大型语言模型 (LLM),通过 AI 反馈的强化学习进行训练。(RLAIF)

该模型利用了我们新的 GPT-4 标记的排名数据集 Nectar,以及我们新的奖励训练和策略调整流水线的强大功能。 Starling-7B-alpha 在 MT Bench 中获得 8.09 分,使用 GPT-4 作为评估者,性能优于 MT-Bench 上迄今为止的所有模型,除了 OpenAI 的 GPT-4 和 GPT-4 Turbo。

*基于 MT Bench 评估,使用 GPT-4 评分。 需要进一步的人工评估。

作者:Banghua Zhu, Evan Frick, Tianhao Wu, Hanlin Zhu 和 Jiantao Jiao。

如有任何问题,请联系 Banghua Zhu (banghua@berkeley.edu)。

参考

Starling-7B:使用 RLAIF 增加 LLM 的帮助性和无害性

HuggingFace