rjmalagon / lumimaid-v0.2-12b

工具 12B

73 请求 2周前更新

2周前

11c3a3819a13 · 25GB

模型
llama
·
12.2B
·
F16
参数
{"stop":["[INST]","[/INST]"]}
模板
{{- range $i, $_ := .Messages }} {{- if eq .Role "user" }} {{- if and $.Tools (le (len (slice $.Messages $i)) 2) }}[AVAILABLE_TOOLS] {{ $.Tools }}[/AVAILABLE_TOOLS] {{- end }}[INST] {{ if and $.System (eq (len (slice $.Messages $i)) 1) }}{{ $.System }} {{ end }}{{ .Content }}[/INST] {{- else if eq .Role "assistant" }} {{- if .Content }} {{ .Content }}{{ if not (eq (len (slice $.Messages $i)) 1) }}</s>{{ end }} {{- else if .ToolCalls }}[TOOL_CALLS] [ {{- range .ToolCalls }}{"name": "{{ .Function.Name }}", "arguments": {{ .Function.Arguments }}} {{- end }}]</s> {{- end }} {{- else if eq .Role "tool" }}[TOOL RESULTS] {"content": {{ .Content }}} [/TOOL_RESULTS] {{- end }} {{- end }}

自述文件

Lumimaid 0.2

Image


8b -
[12b] -
70b -
123b

本模型基于：Mistral-Nemo-Instruct-2407

Wandb: https://wandb.ai/undis95/Lumi-Mistral-Nemo?nw=nwuserundis95

注意：正如在Mistral-Nemo-Instruct-2407存储库中解释的那样，建议使用低温，请尝试！

Lumimaid 0.1 -> 0.2 在数据集方面取得了巨大的飞跃。

正如有些人告诉我们，我们的模型很糟糕，Ikari决定放弃，实际上用大多数糟糕的东西将所有对话都删除了。

我们的数据集从第一天起就保持不变，我们随着时间的推移添加数据，清理它们，然后重复。由于我们从未满意，所以我们一直没有发布模型，我们认为现在是时候回来！

提示模板：Mistral

<s>[INST] {input} [/INST] {output}</s>

致谢

  • Undi
  • IkariDev

制作我们数据集所使用的训练数据

遗憾的是，我们没有找到以下内容的原因，如果您认出您的设备，请通过私信联系我们！

  • Opus_Instruct-v2-6.5K-Filtered-v2-sharegpt
  • claude_sharegpt_trimmed
  • CapybaraPure_Decontaminated-ShareGPT_reduced

数据集版权信息

  • Epiculous
  • ChaoticNeutrals
  • Gryphe
  • meseca
  • PJMixers
  • NobodyExistsOnTheInternet
  • cgato
  • kalomaze
  • Doctor-Shotgun
  • Norquinal
  • nothingiisreal

https://hugging-face.cn/NeverSleep/Lumimaid-v0.2-12B