데이터셋 증류
대규모 모델의 지식을 작은 모델로 전달하기 위해 데이터를 정제하고 요약하는 기법이다. 방대한 데이터 중 핵심적인 정보만을 추출하여 학습 효율을 극대화하며, 적은 비용으로 고성능 모델을 만드는 데 필수적이다.