LFM2 모델, QLoRA·DPO 결합 파인튜닝 전체 코드 공개
Liquid AI의 LFM2 모델을 QLoRA로 경량화하고, SFT와 DPO 단계를 거쳐 선호도 정렬까지 완료하는 전체 파인튜닝 파이프라인이 Google Colab 환경에서 공개됐다.
[태그:] Google Colab
Liquid AI의 LFM2 모델을 QLoRA로 경량화하고, SFT와 DPO 단계를 거쳐 선호도 정렬까지 완료하는 전체 파인튜닝 파이프라인이 Google Colab 환경에서 공개됐다.
