讀我檔案
Falcon 是由技術創新研究所 (TII) 開發的高效能大型語言模型系列,該研究所是阿布達比政府先進技術研究委員會轄下的研究中心,負責監督技術研究。
CLI
ollama run falcon "Why is the sky blue?"
API
curl -X POST https://#:11434/api/generate -d '{
"model": "falcon",
"prompt": "Why is the sky blue?"
}'
參數計數
參數計數 | 建議記憶體 | ||
---|---|---|---|
70 億 | 8GB | 查看 | ollama run falcon:7b |
400 億 | 32GB | 查看 | ollama run falcon:40b |
1800 億 | 192GB | 查看 | ollama run falcon:180b |
變體
聊天 |
聊天模型在聊天和指令資料集上進行微調,其中混合了多個大型對話資料集。 |
指令 |
指令模型遵循指令,並在 baize 指令資料集上進行微調。 |
文本 |
文本模型是基礎模型,未經任何對話微調,最適合用於簡單的文本完成。 |
Falcon 180B
截至 2023 年 9 月,擁有 1800 億參數的模型 Falcon 180B 是效能最佳的公開發布 LLM。其效能介於 OpenAI 的 GPT 3.5 和 GPT 4 之間。為了運行 Falcon 180B,建議使用至少 192GB 總記憶體的強大系統。
注意:Falcon 180B 的發布許可證與其較小的兄弟版本不同,該許可證限制在特定條件下的商業用途。請參閱模型詳細資訊和許可證以取得更多資訊。