IBM Granite 2B 和 8B 模型旨在支援基於工具的使用案例和檢索增強生成 (RAG),簡化程式碼生成、翻譯和錯誤修復。
tools 2b 8b
45.5K 下載次數 更新於 2 個月前
更新於 2 個月前
2 個月前
c1a94d47b25c · 4.0GB
模型
archgranite
·
parameters8.17B
·
quantizationQ3_K_M
4.0GB
系統
你是 Granite,是由 IBM 於 2024 年開發的人工智慧語言模型。
63B
模板
{{- if .Tools }}<|start_of_role|>available_tools<|end_of_role|> {{- range .Tools }} {{ . }} {{ end }
664B
授權條款
Apache License Version 2.0, 2004 年 1 月
11kB
Readme
Granite 密集模型
IBM Granite 2B 和 8B 模型是僅限文字的密集 LLM,在超過 12 兆個 tokens 的資料上訓練,在 IBM 的初步測試中,效能和速度都比其前代產品有了顯著提升。Granite-8B-Instruct 現在在 OpenLLM Leaderboard v1 和 OpenLLM Leaderboard v2 基準測試中均可與 Llama 3.1 8B-Instruct 匹敵。
它們旨在支援基於工具的使用案例以及檢索增強生成 (RAG),簡化程式碼生成、翻譯和錯誤修復。
參數大小
2B
ollama run granite3-dense:2b
8B
ollama run granite3-dense:8b
支援的語言
英文、德文、西班牙文、法文、日文、葡萄牙文、阿拉伯文、捷克文、義大利文、韓文、荷蘭文、簡體中文
功能
- 摘要
- 文本分類
- 文本提取
- 問答
- 檢索增強生成 (RAG)
- 程式碼相關
- 函數呼叫
- 多語言對話使用案例
Granite 混合專家模型
Granite 混合專家模型提供 1B 和 3B 參數大小,專為低延遲使用而設計。
了解更多
- 開發者: IBM Research
- GitHub 儲存庫: ibm-granite/granite-3.0-language-models
- 網站: Granite 文件
- 發布日期:2024 年 10 月 21 日
- 授權條款: Apache 2.0。