Llama-3.1-Nemotron-70B-Instruct 是一個由 NVIDIA 客製化的大型語言模型,旨在提升 LLM 生成的回應用戶查詢的回應之 helpfulness (有幫助程度)。

工具 70b

60.7K 3 個月前

讀我檔案

Llama-3.1-Nemotron-70B-Instruct 是一個由 NVIDIA 客製化的大型語言模型,旨在提升 LLM 生成的回應用戶查詢的回應之 helpfulness (有幫助程度)。

此模型使用 RLHF (具體而言,是 REINFORCE) 進行訓練、Llama-3.1-Nemotron-70B-RewardHelpSteer2-Preference prompts,並以 Llama-3.1-70B-Instruct 模型作為初始策略。

$ ollama run nemotron
>>> How many r in strawberry?
A sweet question!

Let's count the "R"s in "strawberry":

1. S
2. T
3. R
4. A
5. W
6. B
7. E
8. R
9. R
10. Y

There are **3** "R"s in the word "strawberry".

參考文獻

Hugging Face