IBM Granite 2B 和 8B 模型是純文字密集型 LLM,使用超過 12 兆個 tokens 的資料進行訓練,在 IBM 的初步測試中,效能和速度都比前代產品有顯著提升。
工具 2b 8b
46.3K 下載次數 更新於 2 週前
2 週前更新
2 週前
fba1ad01113e · 1.6GB
模型
架構granite
·
參數2.53B
·
量化Q4_K_M
1.6GB
系統
Knowledge Cutoff Date: April 2024. You are Granite, developed by IBM.
69B
模板
<|start_of_role|>system<|end_of_role|> {{- if and (gt (len .Messages) 0) (eq (index .Messages 0).Rol
1.4kB
授權條款
Apache License Version 2.0, January 2004
11kB
Readme
Granite 密集模型
IBM Granite 2B 和 8B 模型是純文字密集型 LLM,使用超過 12 兆個 tokens 的資料進行訓練,在 IBM 的初步測試中,效能和速度都比前代產品有顯著提升。
它們旨在支援基於工具的使用案例和檢索增強生成 (RAG),簡化程式碼生成、翻譯和錯誤修復。
參數大小
2B
ollama run granite3.1-dense:2b
8B
ollama run granite3.1-dense:8b
支援的語言
英文、德文、西班牙文、法文、日文、葡萄牙文、阿拉伯文、捷克文、義大利文、韓文、荷蘭文、中文 (簡體)
功能
- 摘要
- 文本分類
- 文本提取
- 問答
- 檢索增強生成 (RAG)
- 程式碼相關任務
- 函數呼叫任務
- 多語言對話使用案例
- 長上下文任務,包括長文檔/會議摘要、長文檔問答等。
Granite 混合專家模型
Granite 混合專家模型有 1B 和 3B 參數大小可供選擇,專為低延遲使用而設計。
了解更多
- 開發者: IBM Research
- GitHub 儲存庫: ibm-granite/granite-language-models
- 網站: Granite Docs
- 發布日期: 2024 年 12 月 18 日
- 授權條款: Apache 2.0。