Starling 是一個大型語言模型,透過 AI 回饋的強化學習進行訓練,專注於提升聊天機器人的實用性。

7b

75.5K 10 個月前

說明文件

Starling-7B 是一個開放(非商業用途)的大型語言模型 (LLM),透過 AI 回饋的強化學習進行訓練。(RLAIF)

此模型運用了我們新的 GPT-4 標記排名資料集 Nectar,以及我們新的獎勵訓練和策略調整管線。Starling-7B-alpha 在 MT Bench 基準測試中,以 GPT-4 作為評審,獲得 8.09 分,優於迄今為止在 MT-Bench 上的所有模型,除了 OpenAI 的 GPT-4 和 GPT-4 Turbo。

*基於 MT Bench 評估,使用 GPT-4 評分。需要進一步的人工評估。

作者:Banghua Zhu, Evan Frick, Tianhao Wu, Hanlin Zhu 和 Jiantao Jiao。

如有任何問題,請聯絡 Banghua Zhu (banghua@berkeley.edu)。

參考文獻

Starling-7B:透過 RLAIF 提升 LLM 的實用性與無害性

HuggingFace