Αμοιβαία Πληροφορία

Τα μαθηματικά της αβεβαιότητας

Η αμοιβαία πληροφορία μετρά πόσο το να γνωρίζουμε μία μεταβλητή μας λέει για μία άλλη: τη μείωση της αβεβαιότητας σχετικά με το X μόλις παρατηρήσουμε το Y. Είναι η απόκλιση KL μεταξύ της πραγματικής από κοινού κατανομής και του γινομένου των περιθώριων κατανομών «υποθέτοντας ότι είναι ανεξάρτητες»:

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ Αμοιβαία Πληροφορία
← Απόκλιση KLΝόμος των Μεγάλων Αριθμών →