DeepSeek的第一代推理模型,性能与OpenAI-o1相当,包括基于Llama和Qwen,从DeepSeek-R1提炼出的六个稠密模型。

1.5b 7b 8b 14b 32b 70b 671b

25.5M 4 周前

自述文件

DeepSeek的第一代推理模型,在数学、代码和推理任务中实现了与OpenAI-o1相当的性能。

模型

DeepSeek-R1

ollama run deepseek-r1:671b

蒸馏模型

DeepSeek团队已经证明,大型模型的推理模式可以被提炼成小型模型,与通过RL在小型模型上发现的推理模式相比,可以获得更好的性能。

以下是通过针对研究社区广泛使用的几个稠密模型,使用 DeepSeek-R1 生成的推理数据进行微调创建的模型。 评估结果表明,提炼出的小型稠密模型在基准测试中表现出色。

DeepSeek-R1-Distill-Qwen-1.5B

ollama run deepseek-r1:1.5b

DeepSeek-R1-Distill-Qwen-7B

ollama run deepseek-r1:7b

DeepSeek-R1-Distill-Llama-8B

ollama run deepseek-r1:8b

DeepSeek-R1-Distill-Qwen-14B

ollama run deepseek-r1:14b

DeepSeek-R1-Distill-Qwen-32B

ollama run deepseek-r1:32b

DeepSeek-R1-Distill-Llama-70B

ollama run deepseek-r1:70b

deepseek

许可

模型权重根据MIT许可证授权。 DeepSeek-R1系列支持商业用途,允许任何修改和衍生作品,包括但不限于用于训练其他LLM的蒸馏。 请注意

Qwen蒸馏模型源自Qwen-2.5系列,最初根据Apache 2.0许可证授权,现在使用DeepSeek-R1策划的80万个样本进行微调。

Llama 8B 蒸馏模型源自 Llama3.1-8B-Base,最初根据 llama3.1 许可证授权。

Llama 70B 蒸馏模型源自 Llama3.3-70B-Instruct,最初根据 llama3.3 许可证授权。