Dolphin 2.9 是一個基於 Llama 3 的新模型,由 Eric Hartford 開發,具有多種指令、對話和程式碼編寫技能。

8b 70b

277.1K 8 個月前

Readme

🐬 Dolphin 2.9 Llama 3

Dolphin-2.9 具有多種指令、對話和程式碼編寫技能。它還具有初始的代理能力並支援函數呼叫。

Dolphin 是未經審查的。資料集已過濾,以移除對齊和偏差。這使得模型更符合規範。

由 Eric Hartford、Lucas Atkins 和 Fernando Fernandes 以及 Cognitive Computations 策劃和訓練。

大小

  • dolphin-llama3:8b
  • dolphin-llama3:70b

256K 內容視窗

注意:使用 256k 內容視窗至少需要 64GB 的記憶體。

Dolphin Llama 3 也有 256k 內容視窗版本。要擴展內容視窗,請使用

API

curl https://127.0.0.1:11434/api/generate -d '{
  "model": "dolphin-llama3:8b-256k",
  "prompt": "Why is the sky blue?",
  "options": {
    "num_ctx": 256000
  }
}'

CLI

ollama run dolphin-llama3:8b-256k
>>> /set parameter num_ctx 256000

參考文獻

HuggingFace