更新于 6 个月前
6 个月前
8ca13bcda28b · 812GB
模型
架构llama
·
参数量406B
·
量化F16
812GB
参数
{ "stop": [ "<|start_header_id|>", "<|end_header_id|>", "<|eot_id|>"
96B
模板
{{- if or .System .Tools }}<|start_header_id|>system<|end_header_id|> {{- if .System }} {{ .System
1.5kB
许可
LLAMA 3.1 COMMUNITY LICENSE AGREEMENT Llama 3.1 版本发布日期:2024 年 7 月 23 日 “协议”
12kB
Readme
Meta Llama 3.1
Llama 3.1 系列模型可用
- 8B
- 70B
- 405B
Llama 3.1 405B 是第一个公开可用的模型,其在通用知识、可操控性、数学、工具使用和多语言翻译方面的先进功能可以媲美顶尖的 AI 模型。
升级后的 8B 和 70B 模型是多语言的,并且具有显着更长的 128K 上下文长度、最先进的工具使用以及整体更强的推理能力。这使 Meta 最新的模型能够支持高级用例,例如长文本摘要、多语言对话代理和编码助手。
Meta 还更改了他们的许可,允许开发人员使用 Llama 模型(包括 405B 模型)的输出,以改进其他模型。
模型评估
对于此版本,Meta 评估了 150 多个基准数据集的性能,这些数据集涵盖了广泛的语言。此外,Meta 还进行了广泛的人工评估,将 Llama 3.1 与现实场景中的竞争模型进行比较。 Meta 的实验评估表明,我们的旗舰模型在包括 GPT-4、GPT-4o 和 Claude 3.5 Sonnet 在内的一系列任务中,与领先的基础模型具有竞争力。此外,Meta 的较小模型与具有相似参数数量的封闭和开放模型具有竞争力。