Projecties

Meetkunde en algebra van lineaire afbeeldingen, vectoren en matrices

Een projectie beantwoordt "wat is het dichtstbijzijnde punt bij b dat in een gegeven deelruimte leeft?" Stel je een punt voor dat boven een vloer zweeft: zijn projectie is de plek op de vloer recht eronder, de voet van de loodlijn. Het is de beste benadering van b die binnen de deelruimte beschikbaar is.

Om een vector b op een enkele richting a te projecteren, schaal a met hoeveel van b erlangs ligt (een inwendig product), genormaliseerd door a's eigen lengtekwadraat:

Sleep b rond in de figuur en kijk hoe zijn schaduw langs de lijn a schuift, altijd landend op het dichtstbijzijnde punt, met het gestreepte foutsegment dat de lijn in een rechte hoek ontmoet.

Waar dit voorkomt in MLProjectie is de meetkunde achter aandacht en residual streams. Kleinste-kwadraten regressie projecteert doelen op de kolomruimte van het model. De residual stream in een transformer wordt herhaaldelijk uit gelezen en naar geschreven via projecties, en Gram–Schmidt-achtige orthogonalisatie houdt geleerde richtingen onderscheiden. "Dichtstbijzijnde punt in een deelruimte" is een zet die modellen…
▶ Projecties
← MatrixnormenKwadratische vormen →