orca2:13b-q3_K_M - Ollama 框架

orca2

Orca 2 由 Microsoft Research 构建，是 Meta 的 Llama 2 模型的微调版本。该模型的设计尤其擅长推理。

7b 13b

63.8K 拉取更新于 15 个月前

33 个标签

更新于 15 个月前

15 个月前

bfb9c1d63867 · 6.3GB

{ "num_ctx": 4096, "stop": [ "<|im_start", "<|im_end", "|im_start",

82B

模板

<|im_start|>system {{ .System }}<|im_end|> <|im_start|>user {{ .Prompt }}<|im_end|> <|im_start|>assi

106B

系统

您是 Orca，是由 Microsoft 创建的 AI 语言模型。您是一位谨慎的助手。你小心地

215B

许可

MICROSOFT RESEARCH LICENSE TERMS IF YOU LIVE IN THE UNITED STATES, PLEASE READ THE “BINDING ARBIT

11kB

自述文件

Orca 2 模型由 Microsoft Research 构建。它们在 Meta 的 Llama 2 上进行了微调，使用了一个合成数据集，该数据集旨在增强小型模型的推理能力。所有合成训练数据都使用 Microsoft Azure 内容过滤器进行了审核。

用例

Orca 2 是一位有用的助手，可以在诸如推理给定数据、阅读理解、数学问题解决和文本摘要等任务中提供答案。

该模型的设计尤其擅长推理。

Microsoft Research 开发此模型的目的是为了鼓励进一步研究小型语言模型的开发、评估和对齐。

命令行界面 (CLI)

70 亿参数模型

ollama run orca2

130 亿参数模型

ollama run orca2:13b

应用程序接口 (API)

示例

curl -X POST http://localhost:11434/api/generate -d '{
  "model": "orca2",
  "prompt":"Why is the sky blue?"
 }'

参考

Microsoft Research 发布公告的博客
Microsoft Research 发表的论文，Orca 2：教导小型语言模型如何推理

Orca 2 models are built by Microsoft Research. They are fine-tuned on Meta's Llama 2 using a synthetic dataset that was created to enhance the small model's reasoning abilities. All synthetic training data was moderated using Microsoft Azure content filters.

### Use case

Orca 2 is a helpful assistant, and provides an answer in tasks such as reasoning over your given data, reading comprehension, math problem solving and text summarization.

The model is designed to excel particularly in reasoning.

Microsoft Research's intended purpose for this model is to encourage further research on the development, evaluation, and alignment of smaller language models.

### CLI

7 billion parameter model:

```
ollama run orca2
```

13 billion parameter model:

```
ollama run orca2:13b
```

### API

Example:

```bash
curl -X POST http://localhost:11434/api/generate -d '{
  "model": "orca2",
  "prompt":"Why is the sky blue?"
 }'
```

### References

- [Microsoft Research announcement blog](https://www.microsoft.com/en-us/research/blog/orca-2-teaching-small-language-models-how-to-reason/)

- Microsoft Research published paper, [Orca 2: Teaching Small Language Models How to Reason](https://arxiv.org/pdf/2311.11045.pdf)

粘贴、拖放或单击以上传图像 (.png、.jpeg、.jpg、.svg、.gif)

Orca 2 由 Microsoft Research 构建，是 Meta 的 Llama 2 模型的微调版本。 该模型的设计尤其擅长推理。

自述文件

用例

命令行界面 (CLI)

应用程序接口 (API)

参考

Orca 2 由 Microsoft Research 构建，是 Meta 的 Llama 2 模型的微调版本。该模型的设计尤其擅长推理。