结合了7B中优秀模型的4个MoE模型

2,156 Pulls 更新于5个月前

5个月前

338de1d21230 · 20GB

README

这是一个中型 MoE 模型,结合了 openchat/openchat-3.5-1210beowolx/CodeNinja-1.0-OpenChat-7Bmaywell/PiVoT-0.1-Starling-LM-RPWizardLM/WizardMath-7B-V1.1.

我认为这个模型非常好。重量更轻,并且优于 Mixtral。

这是模型的 V2 版本,包含最新更新的量化(The Bloke 的量化已过时)。

如有问题,请随时联系我

Reddit: /u/spooknik | Discord: .spooknik