Granite 專家混合模型

IBM Granite 1B 和 3B 模型是 IBM 首批為低延遲使用而設計的專家混合 (MoE) Granite 模型。

這些模型使用超過 10 兆個 tokens 的資料進行訓練，Granite MoE 模型非常適合部署在裝置端應用程式或需要即時推論的場景中。

參數大小

1B

ollama run granite3-moe:1b

3B

ollama run granite3-moe:3b

支援的語言

英語、德語、西班牙語、法語、日語、葡萄牙語、阿拉伯語、捷克語、義大利語、韓語、荷蘭語、中文（簡體）

功能

• 摘要
• 文本分類
• 文本提取
• 問答
• 檢索增強生成 (RAG)
• 程式碼相關
• 函數呼叫
• 多語言對話用例

Granite 密集模型

Granite 密集模型提供 2B 和 8B 參數大小，旨在支援基於工具的用例以及檢索增強生成 (RAG)，簡化程式碼生成、翻譯和錯誤修復。

查看模型頁面

了解更多

• 開發者： IBM Research
• GitHub 儲存庫： ibm-granite/granite-3.0-language-models
• 網站： Granite 文件
• 發布日期： 2024 年 10 月 21 日
• 授權條款： Apache 2.0。