토큰 확률
다음에 올 단어나 기호(토큰)를 통계적으로 예측하는 확률값이다. 현재 LLM의 핵심 작동 원리로, 방대한 데이터를 바탕으로 가장 그럴듯한 다음 토큰을 선택하여 문장을 생성하는 메커니즘이다.