Rango, Nulidad, Espacio Columna

Geometría y álgebra de aplicaciones lineales, vectores y matrices

Tres cantidades capturan lo que realmente hace una matriz. El espacio columna es todo lo que Ax puede alcanzar: el espacio generado por las columnas, la región de salida de la matriz. El rango es la dimensión de ese espacio columna, el número de direcciones genuinamente independientes que A produce. Y la nulidad es todo lo que A comprime a cero, todas las x con Ax = 0.

Imagina dar indicaciones usando puntos de referencia. Si dices "ve hacia la torre" y "ve hacia la gemela de la torre justo a su lado", realmente solo has dado una dirección genuina — la segunda no añade nada nuevo. El rango cuenta cuántas de las direcciones de una matriz son verdaderamente independientes como esta; cualquier dirección que colapsa a ningún movimiento en absoluto pertenece al espacio nulo.

Las dimensiones obedecen un equilibrio limpio, el teorema del rango-nulidad: las dimensiones de entrada se dividen en las direcciones que sobreviven (rango) y las direcciones que se comprimen (nulidad).

Dónde aparece en el MLEl rango mide la verdadera expresividad. Una matriz de pesos que es de bajo rango tiene neuronas redundantes (varias computando combinaciones de las otras) y puede comprimirse sin pérdida. Esto es el motor de LoRA: reemplazar una actualización grande de peso con un producto de bajo rango BA, entrenando muchos menos parámetros porque la útil actualización vive en solo unas pocas direcciones.
▶ Rango, Nulidad, Espacio Columna
← Eliminación GaussianaMatriz inversa →