Wederzijdse informatie

De wiskunde van onzekerheid

Wederzijdse informatie meet hoeveel het kennen van de ene variabele je over een andere vertelt: de vermindering van onzekerheid over X zodra je Y waarneemt. Het is de KL-divergentie tussen de ware gezamenlijke verdeling en het "doe alsof ze onafhankelijk zijn"-product van marginalen:

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ Wederzijdse informatie
← KL-divergentieWet van de Grote Aantallen →