。

当然#xff0c;如果这篇文章还能入得了各位“看官…在上一篇“数据白化”的文章中说到了数据“相关性”的概念但是在统计学中不仅存在“相关性”还存在“独立性”等等所以本文主要对数据“相关性”进行一些补充。

当然如果这篇文章还能入得了各位“看官”的法眼麻烦点赞、关注、收藏支持一下

本文主要想解释两个问题一个是“不相关”和“独立性”的区别一个是降低数据“相关性”有啥用

一、“不相关”和“独立性”有什么区别

相信很多人对于“相关性”中的“不相关”和“独立性”傻傻分不清所以先给出结论不相关不一定独立独立一定不相关。

至于为什么先给出私人版的“相关性”和“独立性”的定义然后再给出一个例子让大家直观感受一下

“相关性”数据特征变化趋势始终一致或相反

比如说医生和律师医生的工资是由国家发的每个月医生的工资收入都是固定的而律师的工资是由律师事务所发的律师每个月都是在增长的从这里我们可以看出医生的工资变化趋势是不增不减而律师的工资变化趋势是增涨的两者工资变化明显不存在一致或者相反的变化趋势所以两者工资收入是不相关的但是如果律师得了病只有一名医生能看这个医生又因为工资老是不涨闹情绪不给律师看病那么律师势必无法工作收入也就会暴跌从这我们就可以看出医生的收入可能会在某种程度上影响到律师收入这就表明两者是不独立的即医生工资变化会对律师工资变化产生影响。

上面的例子说明了“不相关不一定独立”那么下面就对“独立一定不相关”进行说明。

从上面的定义可以看出“独立性”侧重于“影响”“相关性”侧重于“趋势”那么是否存在两个特征独立且相关的情况呢我的答案是不存在因为独立意味着“随机”而且是完全随机这意味着没有任何规律可以寻找这样特征之间才能保持互不影响就好像你都猜不到我心里想的你怎么可能跟我同频共振既然都没有没有规律可循那么数据特征之间也就不存在“同增同减”或者“一减一增”这样的规律也就表明数据特征之间不存在一致或相反的变化趋势即数据特征之间不相关。

二、降低数据“相关性”有啥用

网上看了很多但是个人感觉最有用的就是降低数据“相关性”可以降低计算难度下面举例说明

比如说上图中两数据蓝点的在原始坐标系下的坐标分别是(-1,-1)和(1,1)对他进行进行诸如PCA等去相关性的方法降低数据两个特征之间的“相关性”。

于是建立了一个新的坐标系两红线新坐标系的横轴就是两点之间的连线所以在不同坐标系下同样的两点坐标矩阵就发生了如下的变化

从上面例子我们可以很直观的看到对数据进行去“相关性”操作后数据矩阵零更多了这也就表明计算难度就降低了所以降低数据“相关性”可以降低计算难度

本文参考