Die Wahl von k und der Fluch der Dimensionalität

Klassische Modelle, die aus der Mathematik aufgebaut sind, die du bereits kennst

Seit k-Nächste-Nachbarn zunächst für Regression und dann für Klassifikation eingeführt wurde, sind zwei Fragen offen. Erstens wurde bisher nicht erklärt, wie man k tatsächlich auswählt; wir wissen nur, dass es wie der bereits bekannte Kapazitätsregler wirkt. Zweitens – und überraschender – setzt die ganze Idee des „nächsten“ Nachbarn stillschweigend voraus, dass die Distanz Punkte sinnvoll vergleichbar macht. Bei zwei oder drei Merkmalen funktioniert diese Annahme gut. Doch das bleibt nicht unbegrenzt so.

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.