IBM Granite 1B 和 3B 模型是 IBM 的长上下文混合专家 (MoE) Granite 模型,专为低延迟使用而设计。
工具 1b 3b
35.6K 拉取 更新于 7 周前
自述文件
Granite 混合专家模型
IBM Granite 1B 和 3B 模型是 IBM 的长上下文混合专家 (MoE) Granite 模型,专为低延迟使用而设计。
这些模型经过超过 10 万亿个数据标记的训练,Granite MoE 模型非常适合部署在设备上应用程序或需要即时推理的情况下。
参数大小
1B
ollama run granite3.1-moe:1b
3B
ollama run granite3.1-moe:3b
支持的语言
英语、德语、西班牙语、法语、日语、葡萄牙语、阿拉伯语、捷克语、意大利语、韩语、荷兰语、中文(简体)
功能
- 摘要
- 文本分类
- 文本提取
- 问答
- 检索增强生成 (RAG)
- 代码相关任务
- 函数调用任务
- 多语言对话用例
- 长上下文任务,包括长文档/会议摘要、长文档 QA 等。
Granite 密集模型
Granite 密集模型有 2B 和 8B 参数大小,旨在支持基于工具的用例,并用于检索增强生成 (RAG)、简化代码生成、翻译和错误修复。
了解更多
- 开发者: IBM 研究院
- GitHub 仓库: ibm-granite/granite-language-models
- 网站: Granite Docs
- 发布日期: 2024 年 12 月 18 日
- 许可: Apache 2.0。