Zephyr 是一系列微调后的 Mistral 和 Mixtral 模型,经过训练可以充当有用的助手。

7b 141b

238.3K 11 个月前

自述文件

Zephyr 是一系列被训练成有用的助手的大语言模型。 Zephyr 141B-A35B 是该系列中的最新模型,是 Mixtral 8x22b 的微调版本。

尺寸

  • zephyr:141b:一个具有 141B 总参数和 35B 活跃参数的混合专家 (MoE) 模型。
  • zephyr:7b:原始的 Zephyr 模型

来源