更新於 2 個月前
2 個月前
dbd6b9ea93de · 243GB
模型
架構llama
·
參數406B
·
量化Q4_K_M
243GB
參數
{ "stop": [ "<|start_header_id|>", "<|end_header_id|>", "<|eot_id|>"
96B
模板
{{- if or .System .Tools }}<|start_header_id|>system<|end_header_id|> {{- if .System }} {{ .System
1.5kB
授權條款
LLAMA 3.1 社群授權協議 Llama 3.1 版本發布日期:2024 年 7 月 23 日 「協議」
12kB
讀我
Meta Llama 3.1
Llama 3.1 系列模型現已推出
- 8B
- 70B
- 405B
Llama 3.1 405B 是首個公開可用的模型,在通用知識、可控性、數學、工具使用和多語言翻譯等頂尖能力方面,可與頂級 AI 模型相媲美。
升級後的 8B 和 70B 模型支援多語言,並具有顯著更長的 128K 上下文長度、頂尖的工具使用能力和更強的整體推理能力。這使得 Meta 最新的模型能夠支援進階用例,例如長文本摘要、多語言對話代理和程式碼助手。
Meta 也對其授權條款進行了變更,允許開發人員使用 Llama 模型(包括 405B 模型)的輸出,以改進其他模型。
模型評估
對於此版本,Meta 評估了超過 150 個基準數據集的效能,這些數據集涵蓋了廣泛的語言。此外,Meta 進行了廣泛的人工評估,比較了 Llama 3.1 與競爭模型在真實場景中的表現。Meta 的實驗性評估表明,我們的旗艦模型在一系列任務中,包括 GPT-4、GPT-4o 和 Claude 3.5 Sonnet,都與領先的基礎模型具有競爭力。此外,Meta 的較小模型與具有相似參數數量的封閉和開放模型相比也具有競爭力。