回归直线拟合优度 | 学习笔记

简介: 快速学习回归直线拟合优度

开发者学堂课程【人工智能必备基础:概率论与数理统计:回归直线拟合优度 】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/545/detail/7433


回归直线拟合优度

内容介绍

一、 回归直线的拟合优度

二、 显著性检验

一、 回归直线的拟合优度

一、 回归直线的拟合优度

回归直线与各观测点的接近程度称为回归直线对数据的拟合优度

总平方和(SST):

image.png

回归平方和(SSR)

image.png

残差平方和(SSE):

image.png

总平方和可以分解为回归平方和、残差平方和两部分: SST= SSR+SSE

总平方和( SST ),反映因变量的n个观察值与其均值的总离差

回归平方和 SSR 反映了 y 的总变差中,由于 x 与 y 之间的线性关系引起的 y 的变化部分

残差平方和 ISSE 反映了除了 x 对 y 的线性影响之外的其他因素对 y 变差的作用,是不能由回归直线来解释的 y 的变差部分

判定系数

回归平方和占总平方和的比例,用 R^2 表示,其值在 0 到 1 之间。

R^2 == 0: 说明y的变化与 x 无关,x 完全无助于解释y的变

R^2== 1: 说明残差平方和为 0,拟合是完全的,y 的变化只与 x 有关

 image.png

image.png

 

二、显著性检验

显养性检验的主要目的是根据所建立的估计方程用自变量 x 来估计或预测因变量 y 的取值。当建立了估计方程后,还不能马上进行估计或预测,因为该估计方程是根据样本数据得到的,它是否真实的反映了变量 x 和 y 之间的关系,则需要通过检验后才能证实。
根据样本数据拟合回归水程时,实际上就已经假定变量 x 与 y 之间存在着线性关系,并假定误差项是一个服从正态分布的随机变量,凡具有相同的方差。但这些假设是否成立需要检验
显著性检验包括两方面:

线性关系检验

回归系数检验
线性关系检验
线性关系检验是检验自变量 x 和因变量 y 之同的线性关系是否显苦,或者说,它们之间能否用一个线性模型来表示。

将均方回归(MSR) 同均方残差 (MSE) 加以比较,应用 F 检验来分析二者之间的差别是否显著。

均方回归:回归平方和 SSR 除以相应的自由度(自变量的个数 K)

均方残差:残差平方和 SSE 除以相应的自由度( n-k-1 )
H0: β1=0 所有回归系数与零无显落差异,y 与全体 x 的线性关系不显著

计算检验统计量 F:

image.png

回归系数的显著性检验
回归系数显著性检验的目的是通过检验回归系数 β 的值与 0 是否有显著性养异,来判断 Y 与 X 之间是否有显著的线性关系,若 β=0,则总体回归方程中不含 X 项(即 Y 不随 X 变动而变动),因此,变量 Y 与 X 之间并不存在线性关系;若 β≠0,说明变量 Y 与 X 之间存在显著的线性关系。
image.png是根据最小二乘法求出的样本统计量,服从正态分布:

image.png

image.png的分布具有如下性质

数学期望:image.png

标准差:image.png

由于 σ 未知,需用其估计量 Se 来代替得到image.png的估计标准差

image.png

计算检验的统计量:

image.png

线性关系检验与回归系数检验的区别:
线性关系的检验是检验自变量与因变量是否可以用线性来表达,而回归系数的检验是对样本数据计算的回归系数检验总体中回归系数是否为 0

在一元线性回归中,自变量只有一个,线性关系检验与回归系数检验是等价的

多元回归分析中,这两种检验的意义是不同的。线性关系检验只能用来检验总体回归关系的显著性,而回归系数检验可以对各个回归系数分别进行检验

相关文章
|
存储 JSON 资源调度
10分钟带你从0到1搭建monorepo 工程化项目(一)
前言 大家好,我是Fly哥, 之前写博客的仓库,还是用的原生的html 和js 也没有引入 ts , 和一些工程化的东西, 所以自己重新搭建了一套前端项目架构 基于 lerna + yarn 的 monrepo的仓库, 主要是后面会学习输出的一些东西, 整个架子先搭建起来。 2d 和 3d 公共 util 的封装 个人 npm 包的发布 (rollup) 2d react 项目 搭建(vite) 3d react 项目 搭建 (webpack) 搭建一套基于webpack 5 的cli 每个项目都有一些特定的依赖, 但是也会有一些相同的依赖。比如eslint、 babel 的一些基础配置,
10分钟带你从0到1搭建monorepo 工程化项目(一)
|
机器学习/深度学习 资源调度 监控
PyTorch使用Tricks:Dropout,R-Dropout和Multi-Sample Dropout等 !!
PyTorch使用Tricks:Dropout,R-Dropout和Multi-Sample Dropout等 !!
613 0
【科研技巧】Matlab 绘制论文所需格式图实现(柱状图、折线、散点图)
【8月更文挑战第5天】Matlab绘制不同类型的图表(包括折线图、柱状图和散点图)的代码示例,以及如何调整图表的字体大小、坐标轴描述、图例和网格线等属性,以满足论文所需的格式要求。
1277 10
Vue3文字提示(Tooltip)
这是一篇关于 Vue2 文字提示(Tooltip)组件的教程,支持多种自定义属性,如最大宽度、展示文本、提示文本、样式、背景色、箭头显示等,并提供了在线预览示例。组件通过监听插槽和 `requestAnimationFrame` 实现了延迟显示与隐藏效果。文章详细介绍了组件实现代码及在页面中的使用方法。
756 0
Vue3文字提示(Tooltip)
国家自然科学基金委员会管理科学部认定的管理类30种重要期刊
A类: 1 管理科学学报 A 2 系统工程理论与实践 A  3 管理世界 A  4 数量经济技术经济研究 A  5 中国软科学 A  6 金融研究 A  7 中国管理科学 A  8 系统工程学报 A  9 会计研究 A  10系统工程理论方法应用 A  11 管理评论 A  12...
11009 0
|
SpringCloudAlibaba 监控 Java
SpringCloud Alibaba微服务-- Sentinel的使用(保姆级)
SpringCloud Alibaba微服务-- Sentinel的使用(保姆级)
|
SQL 安全 Linux
国产数据库---达梦应用技巧及使用案例
达梦数据库管理系统是达梦公司推出的具有完全自主知识产权的高性能数据库管理系统,简称DM。达梦数据库管理系统的最新版本是8.0版本,简称DM8。
1136 1
|
JavaScript 前端开发
JavaScript基础—— 数组
JavaScript基础—— 数组
163 0
|
负载均衡 Java API
【java_wxid项目】【第四章】【Spring Cloud Ribbon集成】
【java_wxid项目】【第四章】【Spring Cloud Ribbon集成】
242 0
|
算法 安全 网络协议
阿里云如何申请国密SSL证书?
阿里云平台上线的沃通WoSign SSL证书,支持国密SM2算法和RSA算法,阿里云用户可以直接通过“云盾证书服务”申请到WoSign国密SSL证书,也可根据需要选择RSA算法的SSL证书。
4288 0
阿里云如何申请国密SSL证书?