Athene-V2 是一个拥有 720 亿参数的模型,擅长代码补全、数学和日志提取任务。

工具 72b

76.9K 3 个月前

自述文件

Athene-V2

Nexusflow 的 Athene-V2 聊天模型,建立在 Qwen 2.5 的 72B 基础上,在关键基准测试中实现了 GPT-4o 级别的性能,同时展示了有针对性的优化如何增强特定能力,超越传统的扩展方法。

模型特点

  • 72B 参数,从 Qwen 2.5 微调而来
  • 最先进的聊天性能,与 GPT-4o 匹配或超过 GPT-4o
  • 卓越的代码补全能力(在 bigcode-bench-hard 上排名第 2)
  • 增强的数学能力(MATH 基准)
  • 精确的长篇日志提取
  • 先进的后训练管道,推动帕累托前沿

参考资料

博客文章

HuggingFace