🎩 Magicoder 是一個 7B 參數模型系列,使用 OSS-Instruct 在 75K 合成指令數據上進行訓練,OSS-Instruct 是一種新穎的方法,利用開源程式碼片段啟發 LLM。

7b

31.3K 14 months ago

Readme

🎩

Magicoder 是一個模型系列,由 OSS-Instruct 驅動,OSS-Instruct 是一種新穎的方法,利用開源程式碼片段啟發 LLM,以生成低偏差和高品質的程式碼指令數據。

OSS-Instruct 通過利用豐富的開源參考來增強 LLM 合成指令數據的能力,從而減輕了 LLM 合成指令數據固有的偏差,以產生更多樣化、真實且可控的數據。

參考文獻

GitHub

HuggingFace