🎩 Magicoder 是一個 7B 參數模型系列,使用 OSS-Instruct 訓練,OSS-Instruct 是一種新穎的方法,透過開源程式碼片段啟發 LLM,並使用 7.5 萬個合成指令資料進行訓練。

7b

31.3K 14 個月前

說明文件

🎩

Magicoder 是一個模型系列,由 OSS-Instruct 驅動,OSS-Instruct 是一種新穎的方法,透過開源程式碼片段啟發 LLM,以產生低偏差和高品質的程式碼指令資料。

OSS-Instruct 透過使用大量的開源參考資料來增強 LLM 合成指令資料的能力,從而減輕 LLM 合成指令資料的固有偏差,以產生更多樣化、更真實且更可控的資料。

參考資料

GitHub

HuggingFace