Athene-V2 是一個 720 億參數的模型,擅長程式碼完成、數學和日誌提取任務。

工具 72b

7萬 2 個月前

說明文件

Athene-V2

Nexusflow 的 Athene-V2 聊天模型,基於 Qwen 2.5 的 720 億參數基礎,在關鍵基準測試中實現了 GPT-4o 等級的性能,同時展示了目標優化如何增強超出傳統擴展方法的特定能力。

模型特色

  • 基於 Qwen 2.5 微調的 720 億參數
  • 達到或超越 GPT-4o 的最先進聊天性能
  • 優越的程式碼完成能力(在 bigcode-bench-hard 上排名第 2)
  • 增強的數學能力(MATH 基準測試)
  • 精確的長篇日誌提取
  • 推進帕雷托前沿的先進後訓練流程

參考文獻

部落格文章

HuggingFace