一個效能頂尖的專家混合模型,使用高品質資料進行微調。

8x7b

24.4K 14 months ago

Readme

此模型是 Mixtral 的微調版本,使用高品質、精選的資料集。截至 2023 年 12 月 26 日,此模型在 Hugging Face Open LLM Leaderboard 上是排名最高的 MoE (專家混合) 模型。

參考文獻

HuggingFace

Argilla