Regresie liniară simplă
Luați în considerare funcția modelului
y = α + β x, {\ displaystyle y = \ alpha + \ beta x,}
care descrie o linie cu pantă β și y-interceptează α. În general, o astfel de relație s-ar putea să nu fie exact pentru populația în mare parte neobservată a valorilor variabilelor independente și dependente; numim abaterile neobservate de la ecuația de mai sus erori. Să presupunem că observăm n perechi de date și le numim {(xi, yi), i = 1, …, n}. Putem descrie relația de