1.1回归分析的基本思想及其初步应用我们知道,函数关系是一种确定性关系,而相关关系是一种非确定性关系.回归分析(regressionanalysis)是对具有相关关系的两个变量进行统计分析的一种常用方法.下面我们通过具体问题,进一步学习回归分析的基本思想及其应用于问题1从某大学中随机选取8名女大学生,其身高和体重数据如表1-1所示。5943616454505748体重/kg170155165175170157165165身高/cm87654321编号求根据女大学生的身高预报她的体重的回归方程,并预报一名身高为172cm的女大学生的体重。问题一:结合例1得出线性回归模型及随机误差。并且区分函数模型和回归模型。解:1、选取身高为自变量x,体重为因变量y,作散点图:2.回归方程:172.85849.0ˆxyˆ学身高172cm女大生体重y=0.849×172-85.712=60.316(kg)探究:身高为172cm的女大学生的体重一定是60.316kg吗?如果不是,你能解析一下原因吗?答:用这个回归方程不能给出每个身高为172cm的女大学生的体重的预测值,只能给出她们平均体重的估计值。由于所有的样本点不共线,而只是散布在某一直线的附近,所以身高和体重的关系可以用线性回归模型来表示:其中a和b为模型的未知参数,e称为随机误差.eabxy函数模型与“回归模型”的关系函数模型:因变量y完全由自变量x确定回归模型:预报变量y完全由解释变量x和随机误差e确定注:e产生的主要原因:(1)所用确定性函数不恰当;(2)忽略了某些因素的影响;(3)观测误差。思考:产生随机误差项e的原因是什么?问题二:在线性回归模型中,e是用bx+a预报真实值y的随机误差,它是一个不可观测的量,那么应如何研究随机误差呢?,1,2,...,,1,2,...iiiiiiiiybxaineyyybxaine1122nniii残差:一般的对于样本点(x,y),(x,y),...,(x,y),它们的随机误差为e其估计值为称为相应于点(x,y)的残差。结合例1除了身高影响体重外的其他因素是不可测量的,不能希望有某种方法获取随机误差的值以提高预报变量的估计精度,但却可以估计预报变量观测值中所包含的随机误差,这对我们查找样本数据中的错误和模型的评价极为有用,因此在此我们引入残差概念。e=y-(bx+a)eyy随机误差ˆˆeyye的估计量样本点:1122(,),(,),...,(,)nnxyxyxy相应的随机误差为:,1,2,...,iiiiieyyybxain随机误差的估计值为:ˆˆˆˆ,1,2,...,iiiiieyyybxainˆie称为相应于点的残差.(,)iixy22111ˆˆˆˆ(,)(2)22niieQabnnn的估计量2为ˆˆ(,)Qab称为残差平方和.问题三:如何发现数据中的错误?如何衡量随机模型的拟合效果?(1)我们可以通过分析发现原始数据中的可疑数据,判断建立模型的拟合效果。iiieybxa(1)计算(i=1,2,...n)残差分析(2)画残差图(1)查找异常样本数据(3)分析残差图(2)残差点分布在以O为中心的水平带状区域,并沿水平方向散点的分布规律相同。残差图的制作和作用:制作:坐标纵轴为残差变量,横轴可以有不同的选择.横轴为编号:可以考察残差与编号次序之间的关系,常用于调查数据错误.横轴为解释变量:可以考察残差与解释变量的关系,常用于研究模型是否有改进的余地.作用:判断模型的适用性若模型选择的正确,残差图中的点应该分布在以横轴为中心的带形区域.下面表格列出了女大学生身高和体重的原始数据以及相应的残差数据。编号12345678身高/cm165165157170175165155170体重/kg4857505464614359残差-6.3732.6272.419-4.6181.1376.627-2.8830.382残差图的制作及作用。•坐标纵轴为残差变量,横轴可以有不同的选择;•若模型选择的正确,残差图中的点应该分布在以横轴为心的带形区域;•对于远离横轴的点,要特别注意。身高与体重残差图异常点•错误数据•模型问题几点说明:第一个样本点和第6个样本点的残差比较大,需要确认在采集过程中是否有人为的错误。如果数据采集有错误,就予以纠正,然后再重新利用线性回归模型拟合数据;如果数据采集没有错误,则需要寻找其他的原因。另外,残差点比较均匀地落在水平的带状区域中,说明选用的模型计较合适,这样的带状...