误差与残差，这两个概念在某程度上具有很大的相似，都是衡量不确定性的指标，可是两者又存在区别，误差与测量有关，误差大小可以衡量测量的准确性，误差越大则表示测量越不准确。误差分为两类：系统误差与随机误差，其中，系统误差与测量方案有关，通过改进测量方案可以避免系统误差。随机误差与观测者，测量工具，被观测物体的性质有关，只能尽量减小，却不能避免残差，与预测有关，残差大小可以衡量预测的准确性。残差越大表示预测越不准确，残差与数据本身的分布特性，回归方程的选择有关。