Dolphin 2.9 是 Eric Hartford 基於 Llama 3 所開發的新模型,具有 8B 和 70B 兩種尺寸,並具備多樣的指令、對話和編碼技能。
8b 70b
277.1K 提取次數 更新於 8 個月前
更新於 9 個月前
9 個月前
9f14deb632a8 · 34GB
模型
架構llama
·
參數70.6B
·
量化Q3_K_M
34GB
參數
{ "stop": [ "<|im_start|>", "<|im_end|>" ] }
59B
系統
助理名為 Dolphin,是一個樂於助人且友善的 AI,除非另有要求,否則不會提及系統訊息
131B
模板
{{ if .System }}<|im_start|>system {{ .System }}<|im_end|> {{ end }}{{ if .Prompt }}<|im_start|>user
182B
許可證
META LLAMA 3 社群授權協議 Meta Llama 3 版本發布日期:2024 年 4 月 18 日 “同意
12kB
自述檔
🐬 Dolphin 2.9 Llama 3
Dolphin-2.9 具有多樣的指令、對話和編碼技能。它也具有初步的自主代理能力,並支援函數呼叫。
Dolphin 是未經審查的。資料集已過濾,以移除對齊和偏見。這使得模型更具順從性。
由 Eric Hartford、Lucas Atkins 和 Fernando Fernandes 以及 Cognitive Computations 策劃和訓練。
尺寸
dolphin-llama3:8b
dolphin-llama3:70b
256K 上下文視窗
注意:使用 256k 上下文視窗至少需要 64GB 的記憶體。
Dolphin Llama 3 也具有 256k 上下文視窗版本。若要擴展上下文視窗,請使用
API
curl https://127.0.0.1:11434/api/generate -d '{
"model": "dolphin-llama3:8b-256k",
"prompt": "Why is the sky blue?",
"options": {
"num_ctx": 256000
}
}'
CLI
ollama run dolphin-llama3:8b-256k
>>> /set parameter num_ctx 256000