Entropía

Las matemáticas de la incertidumbre

La entropía mide la incertidumbre: cuán sorprendido te esperas estar con un resultado aleatorio. Una moneda justa es máximamente incierta; una moneda de dos caras no tiene ninguna sorpresa. Claude Shannon convirtió esto en un número, la sorpresa esperada, donde la sorpresa por un evento raro es −log p(x) (más raro significa más sorprendente).

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ Entropía
← Covarianza y correlaciónEntropía Cruzada →