第七章回归分析 现实世界中的种种现象大体可分为确定性现象和随机 现象,因此表现在变量与变量之间的关系大致可分为: (1)确定性关系,即大家熟知的函数关系,如圆的面积 与圆的半径的关系 (2)相关关系.如人的身高与体重,农作物的总产量与种 植面积,农作物的单位面积产量与施肥量等等.其特点 是:变量之间既有密切的关系,但又不能由一个变量的 数值精确地定出另一个变量的数值,也就是这两个变量 之间的关系不能用函数关系来表示我们称变量之间的 这种关系为相关关系 湘潭大学数学与计算科学学院一页一页
湘潭大学数学与计算科学学院 上一页 下一页 1 第七章 回归分析 现实世界中的种种现象大体可分为确定性现象和随机 现象,因此表现在变量与变量之间的关系大致可分为: (1)确定性关系,即大家熟知的函数关系, 如圆的面积 与圆的半径的关系. (2)相关关系.如人的身高与体重,农作物的总产量与种 植面积,农作物的单位面积产量与施肥量等等.其特点 是:变量之间既有密切的关系,但又不能由一个变量的 数值精确地定出另一个变量的数值,也就是这两个变量 之间的关系不能用函数关系来表示.我们称变量之间的 这种关系为相关关系
对于相关关系,虽然不能找出变量之间确定的 函数表达式,但通过大量的观测数据,可以发现它 们之间存在一定的统计规律性.回归分析就是研究 相关关系的一种有效方法 湘潭大学数学与计算科学学院一页一页
湘潭大学数学与计算科学学院 上一页 下一页 2 对于相关关系,虽然不能找出变量之间确定的 函数表达式,但通过大量的观测数据,可以发现它 们之间存在一定的统计规律性.回归分析就是研究 相关关系的一种有效方法
§7.1一元线性回归分析 设有两个变量X和V,其中X是可以精确测量或控 制的非随机变量,而Y是随机变量,Y随X的变化而变 化,但它们之间的变化关系是不确定的给定X的取 值,Y服从一定的概率分布,则称随机变量Y与变量X 之间存在着相关关系 设进行n次独立试验,测得试验数据如下: x2 VI y2 yn 其中x表示变量X在第i次试验中的观测值,y表 示随机变量Y相应的观测值 湘潭大学数学与计算科学学院一页一页
湘潭大学数学与计算科学学院 上一页 下一页 3 §7.1 一 元线性回归分析 设有两个变量X和Y,其中X是可以精确测量或控 制的非随机变量,而Y是随机变量,Y随X的变化而变 化,但它们之间的变化关系是不确定的.给定X的取 值,Y服从一定的概率分布,则称随机变量Y与变量X 之间存在着相关关系. 设进行n次独立试验,测得试验数据如下: X x1 x2 … xn Y y1 y2 … yn 其中 xi表示变量 X 在第 i 次试验中的观测值,yi表 示随机变量 Y 相应的观测值
由于Y是随机变量,且其概率分布随X的取值而变化, 所以我们希望取在X=x时随机变量Y的数学期望作为 X=x时Y的估计值,即 j=E(IX=x) (1.1) 显然,E(Y|X=x)是x的函数,记作 u(x)=EYIX=x) (1.2) 这样,我们得到一个确定的函数关系式 =(x) (1.3) 来大致地描述Y与X之间的变化规律 湘潭大学数学与计算科学学院一页一页
湘潭大学数学与计算科学学院 上一页 下一页 4 由于Y是随机变量,且其概率分布随X的取值而变化, 所以我们希望取在X=x时随机变量Y的数学期望作为 X=x时Y的估计值,即 y ˆ = E(Y | X = x). (1.1) 显然, E(Y | X = x)是 x 的函数,记作 (x) = E(Y | X = x). (1.2) 这样,我们得到一个确定的函数关系式 yˆ = (x) (1.3) 来大致地描述 Y 与 X 之间的变化规律
函数(x)称为Y关于X的回归函数,方程(1.3)称为Y关 于X的回归方程.回归方程反映了Y的数学期望随X的 变化而变化的规律性 一般来说,从任意的x的函数中找出回归函数y(x)是非 常困难的,因此通常限制八(x)为某一类型的函数确定 y(x)的函数类型后,就可设 (x)=以(x;a,a,…,a) 其中a1,a2,…a为未知参数,只要确定了这些未知参 数就确定了Y关于X的回归方程 湘潭大学数学与计算科学学院一页一页
湘潭大学数学与计算科学学院 上一页 下一页 5 函数(x)称为 Y 关于 X 的回归函数,方程(1.3)称为 Y 关 于 X 的回归方程. 回归方程反映了 Y 的数学期望随 X 的 变化而变化的规律性. 一般来说,从任意的 x 的函数中找出回归函数(x)是非 常困难的,因此通常限制(x)为某一类型的函数.确 定 (x)的函数类型后,就可设 ( ) ( ; , , , ), x = x a1 a2 ak (1.4) 其 中 k a ,a , ,a 1 2 为未知参数,只要确定了这些未知参 数,就确定了 Y 关于 X 的回归方程