지식 증류
거대한 모델(교사 모델)의 지식을 작고 효율적인 모델(학생 모델)로 전달하여 성능은 유지하면서 연산 속도를 높이는 기법이다. 실시간성이 중요한 로봇 제어 환경에서 대형 비전 모델을 최적화하는 핵심 방법론이다.