如何用 TRL 和 OpenEnv 訓練程式碼模型繪製水彩畫

作者基於開源方案復現了讓大語言模型通過編寫 JavaScript 程式碼繪製水彩畫的強化學習流程，並公開了參考影像池、強化學習環境、訓練指令碼及訓練好的模型。文章對比了不同美學獎勵權重配置下的多項實驗結果，詳細記錄了基礎設施搭建及訓練調優過程中的發現。