基于最小二乘法的数据处理问题研究综述VIP专享

基于最小二乘法的数据处理问题讨论综述摘要:对基于最小二乘法的数据处理方法进行了介绍。首先对传统最小二乘法基本原理进行了介绍，然后根据例子来说明怎样运用传统最小二乘法来解决实际辨识问题。而且本文针对传统最小二乘存在的缺陷进一步阐述了一些改进型最小二乘法，综述了最小二乘法的讨论现状,最后对最小二乘的进展趋势做了预测。关键字：最小二乘法 数据处理 改进型最小二乘法 进展趋势1 引言在科学实验中常常要把离散的测量数据转化为直观的便于讨论的曲线方程，即曲线拟合［1］.由于在实验室或实际应用中，误差是不可避开的，所以为了不把原有离散数据中的误差引入，人们常常用拟合来确定模拟函数。拟合方法不要求模拟函数通过已知离散的点，而追求的是所有点到模拟函数达到某种误差指标的最小化,是一种整体上的逼近性质.最小二乘法是解决这类曲线拟合中一种较为常用的方法，根据最小二乘法的定义［2］:“最小二乘法是一种数学 优 化技术,它通过最小化 误差 的平方和寻找数据的最佳函数匹配.”最小二乘法是从误差拟合角度对回归模型进行参数估量或系统辨识,因此最小二乘在参数估量、系统辨识以及预测、预报等众多领域中得到极为广泛的应用。本文在阐述最小二乘法理论的基础上对于其在实际问题中的辨识应用做了简单介绍，并指出实际应用中存在的不足,列举了几种改进型的最小二乘算法来进行优化比较，最后给出了最小二乘法的进展趋势。2 最小二乘法的理论基础及应用2。1 最小二乘法的理论基础最小二乘法作为一种传统的参数估量方法,早已经被大家所了解. 然而大多同学对最小二乘法的认识都比较模糊,仅仅把最小二乘法理解为简单的线性参数估量。 事实上，最小二乘法在参数估量、系统辨识以及预测、预报等众多领域都有着广泛的应用［3］。特别是针对动态系统辨识的方法有很多［4］,但其中应用最广泛，辨识效果良好的就是最小二乘辨识方法，讨论最小二乘法的应用在就要对其基本原理有较为深刻的理解.下面是一般的最小二乘法问题：求实系数线性方程组（1）方程组可能无解。即很可能不存在一组实数 x1，x2，……,xn使（2）恒成立.因此我们转而求其次，设法找到实数组 x1，x2，…,xn使误差的平方和最小，这样的 x1，x2,…，xn称为方程组的最小二乘解，这样问题就叫最小二乘法问题［5］.2。2 最小二乘法的应用举例理论只有被利用才能体现其价值意义，下面我就以系统辨识中的最小二乘法的例子为大家讲讲怎样在实际中应用最小二乘法解...