Starling 是一個大型語言模型,透過 AI 回饋的強化學習進行訓練,專注於提升聊天機器人的 helpfulness (助益性)。

7b

75.5K 10 個月前

Readme

Starling-7B 是一個開放 (非商業用途) 的大型語言模型 (LLM),透過 AI 回饋的強化學習進行訓練。(RLAIF)

此模型運用了我們新的 GPT-4 標記排名資料集 Nectar,以及我們新的獎勵訓練和策略調整管線。Starling-7B-alpha 在 MT Bench 上的得分為 8.09 (使用 GPT-4 作為評審),效能超越目前 MT-Bench 上除了 OpenAI 的 GPT-4 和 GPT-4 Turbo 之外的所有模型。

*基於 MT Bench 評估,使用 GPT-4 評分。尚需進一步的人工評估。

作者:Banghua Zhu, Evan Frick, Tianhao Wu, Hanlin Zhu 和 Jiantao Jiao。

如有任何問題,請聯繫 Banghua Zhu (banghua@berkeley.edu)。

參考文獻

Starling-7B:透過 RLAIF 提升 LLM 的助益性與無害性

HuggingFace