Zephyr 是一系列微調過的 Mistral 和 Mixtral 模型,這些模型經訓練後可作為實用的助手。

7b 141b

233.2K 9 個月前

說明文件

Zephyr 是一系列語言模型,經訓練後可作為實用的助手。Zephyr 141B-A35B 是此系列中最新的模型,並且是 Mixtral 8x22b 的微調版本。

尺寸

  • zephyr:141b:一個混合專家 (MoE) 模型,總共有 1410 億個參數和 350 億個活動參數。
  • zephyr:7b:原始的 Zephyr 模型

來源