Starling 是一個大型語言模型,透過來自 AI 反饋的強化學習進行訓練,專注於提升聊天機器人的 helpfulness (樂於助人程度)。
7b
75.5K 下載次數 更新於 10 個月前
更新於 10 個月前
10 個月前
b17e67a4be34 · 5.4GB
模型
archllama
·
parameters7.24B
·
quantizationQ5_1
5.4GB
參數
{ "stop": [ "<|endoftext|>", "<|end_of_turn|>", "Human:", "Assis
87B
模板
{{ if .System }}GPT4 Correct System: {{ .System }}<|end_of_turn|>{{ end }}{{ if .Prompt }}GPT4 Corre
200B
授權條款
Apache License Version 2.0, January 2004
11kB
Readme
Starling-7B 是一個開放 (非商業用途) 的大型語言模型 (LLM),透過來自 AI 反饋的強化學習進行訓練 (RLAIF)。
此模型利用了我們新的 GPT-4 標記排名資料集 Nectar,以及我們新的獎勵訓練和策略調整管線的功能。Starling-7B-alpha 在 MT Bench 中以 GPT-4 作為評審獲得 8.09 分,在 MT-Bench 上的表現優於至今為止的所有模型,除了 OpenAI 的 GPT-4 和 GPT-4 Turbo。
*基於 MT Bench 評估,使用 GPT-4 評分。 需要進一步的人工評估。
作者:Banghua Zhu, Evan Frick, Tianhao Wu, Hanlin Zhu 和 Jiantao Jiao。
如有任何問題,請聯繫 Banghua Zhu (banghua@berkeley.edu)。