IBM Granite 2B 和 8B 模型旨在支援基於工具的使用案例,並支援檢索增強生成 (RAG),簡化程式碼生成、翻譯和錯誤修正。
tools 2b 8b
45.5K 下載次數 更新於 2 個月前
更新於 2 個月前
2 個月前
ae4ab94be005 · 6.1GB
模型
archgranite
·
parameters8.17B
·
quantizationQ5_1
6.1GB
系統
您是 Granite,是由 IBM 於 2024 年開發的人工智慧語言模型。
63B
範本
{{- if .Tools }}<|start_of_role|>available_tools<|end_of_role|> {{- range .Tools }} {{ . }} {{ end }
664B
授權條款
Apache License Version 2.0, January 2004
11kB
說明文件
Granite 密集模型
IBM Granite 2B 和 8B 模型是僅限文本的密集 LLM,使用超過 12 兆個 tokens 的數據進行訓練,在 IBM 的初步測試中,在性能和速度方面都展現出比其前代產品顯著的改進。Granite-8B-Instruct 現在在 OpenLLM Leaderboard v1 和 OpenLLM Leaderboard v2 基準測試中,可與 Llama 3.1 8B-Instruct 相媲美。
它們被設計用於支援基於工具的使用案例和檢索增強生成 (RAG),簡化程式碼生成、翻譯和錯誤修正。
參數大小
2B
ollama run granite3-dense:2b
8B
ollama run granite3-dense:8b
支援語言
英文、德文、西班牙文、法文、日文、葡萄牙文、阿拉伯文、捷克文、義大利文、韓文、荷蘭文、繁體中文
功能
- 摘要
- 文本分類
- 文本提取
- 問答
- 檢索增強生成 (RAG)
- 程式碼相關
- 函式呼叫
- 多語言對話使用案例
Granite 混合專家模型
Granite 混合專家模型提供 1B 和 3B 參數大小,專為低延遲使用而設計。
了解更多
- 開發者: IBM Research
- GitHub 儲存庫: ibm-granite/granite-3.0-language-models
- 網站: Granite 文件資料
- 發布日期: 2024 年 10 月 21 日
- 授權條款: Apache 2.0。