MathΣtral: 一个由 Mistral AI 设计的 7B 模型,用于数学推理和科学发现。

7b

32.7K 7 个月前

自述文件

Mistral AI 正在向科学界贡献 Mathstral,以支持需要复杂、多步骤逻辑推理的高级数学问题的研究工作。 Mathstral 的发布是他们支持学术项目更广泛努力的一部分——它是在 Mistral AI 与 Project Numina 合作的背景下产生的。

Mathstral 类似于艾萨克·牛顿时代,站在 Mistral 7B 的肩膀上,专注于 STEM 学科。 它在其规模类别中实现了各种行业标准基准的最新推理能力。

mathstral-breakdown.png

基准测试

Mathstral 可以通过更多的推理时间计算获得明显更好的结果:Mathstral 7B 在 MATH 上以多数投票获得 68.37% 的分数,并在 64 名候选者中使用强大的奖励模型获得 74.59% 的分数。

mathstral-benchmarks.png

参考资料

博客文章

Hugging Face