Starling 是一個大型語言模型,透過來自 AI 回饋的強化學習進行訓練,專注於提升聊天機器人的實用性。

7b

75.5K 10 個月前

說明文件

Starling-7B 是一個開放 (非商業用途) 的大型語言模型 (LLM),透過來自 AI 回饋的強化學習進行訓練。(RLAIF)

此模型運用了我們新的 GPT-4 標記排序資料集 Nectar,以及我們新的獎勵訓練和政策調整管線。Starling-7B-alpha 在 MT Bench 中以 GPT-4 作為評審獲得 8.09 分,在 MT-Bench 上的表現優於至今為止的所有模型,除了 OpenAI 的 GPT-4 和 GPT-4 Turbo。

*基於 MT Bench 評估,使用 GPT-4 評分。需要進一步的人工評估。

作者:Banghua Zhu, Evan Frick, Tianhao Wu, Hanlin Zhu 和 Jiantao Jiao。

如需聯繫,請洽 Banghua Zhu (banghua@berkeley.edu)。

參考文獻

Starling-7B:透過 RLAIF 提升 LLM 的實用性與無害性

HuggingFace