Dolphin 2.9是由Eric Hartford基于Llama 3开发的新模型,包含8B和70B两种尺寸,具有多种指令、对话和编码技能。
8b 70b
293.6K 拉取次数 更新于 10 个月前
更新于 10 个月前
10 个月前
9b6fb904576c · 8.5GB
模型
架构llama
·
参数8.03B
·
量化Q8_0
8.5GB
系统
你是Dolphin,一个有用的AI助手。
41B
参数
{ "stop": [ "<|im_start|>", "<|im_end|>" ] }
59B
模板
{{ if .System }}<|im_start|>system {{ .System }}<|im_end|> {{ end }}{{ if .Prompt }}<|im_start|>user
182B
许可
META LLAMA 3 COMMUNITY LICENSE AGREEMENT Meta Llama 3 Version Release Date: April 18, 2024 “Agree
12kB
自述文件
🐬 Dolphin 2.9 Llama 3
Dolphin-2.9具有多种指令、对话和编码技能。它还具有初步的代理能力并支持函数调用。
Dolphin是未审查的。数据集经过过滤以消除对齐和偏差。这使得模型更具兼容性。
由 Eric Hartford、Lucas Atkins 和 Fernando Fernandes 以及 Cognitive Computations 策划和培训。
尺寸
dolphin-llama3:8b
dolphin-llama3:70b
256K 上下文窗口
注意:使用 256k 上下文窗口至少需要 64GB 内存。
Dolphin Llama 3 还有一个 256k 上下文窗口版本。要扩展上下文窗口,请使用
API
curl http://localhost:11434/api/generate -d '{
"model": "dolphin-llama3:8b-256k",
"prompt": "Why is the sky blue?",
"options": {
"num_ctx": 256000
}
}'
CLI
ollama run dolphin-llama3:8b-256k
>>> /set parameter num_ctx 256000