Meta Llama 3.1

Llama 3.1 系列模型已推出

• 8B
• 70B
• 405B

Llama 3.1 405B 是首個公開可用的模型，在通用知識、可操控性、數學、工具使用和多語翻譯等最先進的功能方面，可與頂尖 AI 模型相媲美。

升級後的 8B 和 70B 模型支援多語，並具有顯著更長的 128K 上下文長度、最先進的工具使用能力和整體更強大的推理能力。 這使 Meta 最新的模型能夠支援進階使用案例，例如長篇文本摘要、多語對話代理和程式碼助理。

Meta 也變更了其許可證，允許開發人員使用 Llama 模型（包括 405B 模型）的輸出，以改進其他模型。

模型評估

在此版本中，Meta 評估了超過 150 個基準資料集的效能，這些資料集涵蓋多種語言。 此外，Meta 進行了廣泛的人工評估，將 Llama 3.1 與真實情境中的競爭模型進行比較。 Meta 的實驗評估表明，我們的旗艦模型在包括 GPT-4、GPT-4o 和 Claude 3.5 Sonnet 在內的一系列任務中，可與領先的基礎模型相匹敵。 此外，Meta 較小的模型可與參數數量相近的封閉和開放模型相匹敵。

參考文獻

• Meta AI Llama 3.1 發布部落格文章