SFT, DPO, ORPO를 사용해 언어 모델을 추가 사전 학습하고 사람 또는 AI의 선호에 맞게 정렬하는 학습 레시피와 스크립트입니다.
5.7천496PythonApache-2.0업데이트 29일 전
#preference-alignment
preference-alignment 관련 엄선 GitHub 저장소. AI 요약과 주요 지표를 함께 제공합니다.
SFT, DPO, ORPO를 사용해 언어 모델을 추가 사전 학습하고 사람 또는 AI의 선호에 맞게 정렬하는 학습 레시피와 스크립트입니다.