U ovom poglavlju dat ćemo kratki uvod u matrični problem najmanjih
kvadrata. Metoda najmanjih kvadrata se koristi kod
preodređenih sustava
u slučaju
kada imamo više jednadžbi nego nepoznanica i kada sustav nije rješiv
po Kronecker-Capellijevom teoremu (vidi
M1, teorem 2.5).
Problem najmanjih kvadrata se često koristi u raznim tehničkim primjenama te u ekonomiji (linearna regresija).
Duljina ili norma
-dimenzionalnog vektora
je broj (vidi
M1, poglavlje 3.6)