はじめに 安かったから買ったってだけで!1 nikkieです。 Hugging Faceの記事の中に、Googleのgemmaをファインチューンする記事があります。 こちらについて手を動かす中で、どうやらデバッグに成功したように思われるのでこちらに記します。 なお、trlをはじめとするライブラリ2の経験は少なく勘違いしている可能性もありますので、お気づきの点がありましたら@ftnextまでお知らせください。 目次 はじめに 目次 「Fine-Tuning Gemma Models in Hugging Face」 改良点のまとめ trlのSFTTrainerのドキュメントから Quicksta…