KL 발산

불확실성의 수학

KL 발산은 한 분포 q가 다른 분포 p로부터 얼마나 멀리 떨어져 있는지를 측정합니다. 진실 p를 잘못된 분포 q로 모델링했을 때 치르게 되는 추가 놀라움이며, 교차 엔트로피 안에 들어 있는 간격입니다:

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ KL 발산
← 교차 엔트로피상호 정보량 →