PEFT

1 개요

parameter-efficient fine-tuning (PEFT)

파라미터-효율적 파인튜닝 (페프트)

• 대규모 모델의 전체 파라미터를 파인튜닝하기는 현실적으로 어려우니, 일부 파라미터만 파인튜닝하는 것

2 같이 보기

• LoRA
• 파인튜닝
• 대규모 언어 모델

3 참고

• https://huggingface.co/docs/peft/index
• https://www.mercity.ai/blog-post/fine-tuning-llms-using-peft-and-lora