IBM Granite 1B 和 3B 模型是 IBM 的長上下文混合專家 (MoE) Granite 模型,專為低延遲使用而設計。
工具 1b 3b
20.6K 下載次數 更新於 2 週前
Readme
Granite 混合專家模型
IBM Granite 1B 和 3B 模型是 IBM 的長上下文混合專家 (MoE) Granite 模型,專為低延遲使用而設計。
這些模型在超過 10 兆個 tokens 的數據上進行訓練,Granite MoE 模型非常適合部署在設備端應用程式或需要即時推論的情況。
參數大小
1B
ollama run granite3.1-moe:1b
3B
ollama run granite3.1-moe:3b
支援語言
英文、德文、西班牙文、法文、日文、葡萄牙文、阿拉伯文、捷克文、義大利文、韓文、荷蘭文、中文(簡體)
功能
- 摘要
- 文本分類
- 文本提取
- 問答
- 檢索增強生成 (RAG)
- 程式碼相關任務
- 函數呼叫任務
- 多語言對話用例
- 長上下文任務,包括長文檔/會議摘要、長文檔問答等。
Granite 稠密模型
Granite 稠密模型提供 2B 和 8B 參數大小,旨在支援基於工具的用例和檢索增強生成 (RAG),簡化程式碼生成、翻譯和錯誤修復。
了解更多
- 開發者: IBM Research
- GitHub 儲存庫: ibm-granite/granite-language-models
- 網站: Granite 文件
- 發布日期:2024 年 12 月 18 日
- 許可證: Apache 2.0。