相关系数分析(相关性分析的6种方法)

小鱼SEO专员2年前行业资讯563

从事质量行业的朋友一定经常需要对数据进行分析,这也是一项最基础的技能。那么你知道几种数据相关性分析的方法呢?

做数据分析时,为了提炼观点,相关性分析是必不可少,而且尤为重要的一个环节。但是,对于不同类型的数据,相关性分析的方法都各不相同。本文,主要按照不同的数据类型,来对各种相关性分析方法进行梳理总结。

相关性分析是指对两个或多个具备相关性的变量元素进行分析,相关性不等于因果性。

卡方检验是一种用途很广的计数资料的假设检验方法。它属于非参数检验的范畴,主要是比较两个及两个以上样本率( 构成比)以及两个分类变量的关联性分析。其根本思想就是在于比较理论频数和实际频数的吻合程度或拟合优度问题。

卡方检验是一种用途很广的计数资料的假设检验方法。它属于非参数检验的范畴,主要是比较两个及两个以上样本率( 构成比)以及两个分类变量的关联性分析。其根本思想就是在于比较理论频数和实际频数的吻合程度或拟合优度问题。

它在分类资料统计推断中的应用,包括:两个率或两个构成比比较的卡方检验;多个率或多个构成比比较的卡方检验以及分类资料的相关分析等。

(1)假设,多个变量之间不相关

(2)根据假设计算得出每种情况的理论值,根据理论值与实际值的差别,计算得到卡方值 及 自由度

df=(C-1)(R-1)

(3)查卡方表,求p值

卡方值越大,P值越小,变量相关的可能性越大,当P<=0.05,否定原假设,认为变量相关。

在介绍信息增益之前,先来介绍两个基础概念,信息熵和条件熵。

信息熵,就是一个随机变量的不确定性程度。

条件熵,就是在一个条件下,随机变量的不确定性。

(1)信息增益:熵 - 条件熵

在一个条件下,信息不确定性减少的程度。

Gain(Y,X)=H(Y)-H(Y|X)

信息增益越大,表示引入条件X之后,不纯度减少得越多。信息增益越大,则两个变量之间的相关性越大。

(2)信息增益率

假设,某个变量存在大量的不同值,例如ID,引入ID后,每个子节点的不纯度都为0,则信息增益减少程度达到最大。所以,当不同变量的取值数量差别很大时,引入取值多的变量,信息增益更大。因此,使用信息增益率,考虑到分支个数的影响。

Gain_ratio=(H(Y)-H(Y|X))/H(Y|X)

协方差,表达了两个随机变量的协同变化关系。如果两个变量不相关,则协方差为0。

Cov(X,Y)=E{[X-E(X)],[Y-E(Y)]}

当 cov(X, Y)>0时,表明 X与Y 正相关;

当 cov(X, Y)<0时,表明X与Y负相关;

当 cov(X, Y)=0时,表明X与Y不相关。

协方差只能对两组数据进行相关性分析,当有两组以上数据时就需要使用协方差矩阵。

协方差通过数字衡量变量间的相关性,正值表示正相关,负值表示负相关。但无法对相关的密切程度进行度量。当我们面对多个变量时,无法通过协方差来说明那两组数据的相关性最高。要衡量和对比相关性的密切程度,就需要使用下一个方法:相关系数。

也叫Pearson相关系数, 主要衡量两个变量线性相关的程度。

r=cov(X,Y)/(D(X)D(Y))

相关系数是用协方差除以两个随机变量的标准差。相关系数的大小在-1和1之间变化。再也不会出现因为计量单位变化,而数值暴涨的情况了。

线性相关系数必须建立在因变量与自变量是线性的关系基础上,否则线性相关系数是无意义的。

将连续变量离散化,然后,使用离散与离散变量相关性分析的方法来分析相关性。

使用画箱形图的方法,看离散变量取不同值,连续变量的均值与方差及取值分布情况。

如果,离散变量取不同值,对应的连续变量的箱形图差别不大,则说明,离散变量取不同值对连续变量的影响不大,相关性不高;反之,相关性高。

-----文章转自微信公众号《品质人生质量开讲》

-----盈飞无限实时SPC软件解决方案提供商。

相关文章

什么是根目录,网站根目录是什么意思

网站的根目录是什么意思?在什么地方? 根目录就是代表是一级目录c:\这就是根目录c:\XXX 这就代表二级目录c:\XXX\xxx 这代表三级目录 什么叫根目录? 根目录指逻辑驱动器的最...

淘宝网笔记本电脑(DA7NP无疑是最佳选择)

因为以前卖过电脑,所以身边的朋友经常会咨询我一些关于电脑的事。比如近期,一位同事就想换一台6000元左右的笔记本,用来打游戏和做图,问我哪一款比较合适。而经过仔细对比后,我觉得神舟最新的战神Z7-DA...

好奇纸尿裤官网(“萌”系产品能否打破营销瓶颈)

最近,笔者在小红书上发现一款带柯基尾巴的纸尿裤,有宝妈分享说:“真的是因为颜值才买的,这也太可爱了!”“救命!这款纸尿裤有没有宝宝都想买一包。”这款让宝妈们和非宝妈们的女性消费者直呼“萌翻了”的柯基尾...

4寸管直径是多少厘米(160mm直径是多少寸的管)

3寸,4寸,5寸铁管的直径是多少 一英寸=2.54CM楼上说的不对啊,听我的没错。 咱们平常说的三寸管是φ75的管,四寸的是φ100的,五寸的是φ133的管。 没错的,放心吧! 1寸的是φ25...

什么游戏赚钱快(游戏中哪种方式挣钱比较快)

这里以骑砍1为例开局玩家开局一般会接到第一个任务,大概率是帮一个商人解救下他的兄弟之类的,商人会先给你一笔钱,让你去招募队伍,这是第一笔启动资金,大概几百第纳尔。在完成这个任务的时候,路上遇到的领主也...

淘宝网大学(淘宝大学首发千万学习基金补贴)

封面新闻记者 易弋力8月17日,淘宝大学第二届88学习节举办,千名新老学员齐聚杭州,迎来了一场精彩纷呈的学习狂欢。为满足学员们多样的学习需求,第二届88学习节不仅安排了电商学习主会场,还特别设置了双十...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。