描述的方法来判断正态性

为什么用要描述的方法呢?之前的检验不可行吗?

我们在前一篇推文中已经发现,右图y的分布挺像正态的,尤其是CDF图和理论曲线十分接近,为什么SW检验和AD检验仍然提示不满足正态分布?

1、检验方法的弊端

(1)首先要明确,正态性检验的无效假设是"数据服从正态分布“,也就是说, SW等方法先计算偏离正态的程度,然后看能否推翻无效假设。跟其他的假设检验一样,当数据越多时,越容易推翻无效假设。就像t检验中比较两组均值一样,当样本量很大的时候,即使差别0.01也会有统计学意义;同样, 当样本量很大的时候,即使偏离正态很小,也会有统计学意义。 (2)有统计学意义未必代表有实际意义,因为统计学的差异有时对我们来说并不是很重要,如两组身高的差值为0.1cm, 即便有统计学意义,也没有多大实际意义。同样,正态性检验结果的P=0.09和P=0.01,也并不意味着前者的正态性更好,也许只是说明后者样本更多而已。在大样本的时候,从统计检验的角度来看,你的数据几乎永远也不符合正态分布。

2、描述性方法应运而生

不少统计学家并不建议用统计学检验的方法来判断正态性,而是推荐用图形等描述性方法来进行判断。虽然略带主观性,但是考虑到多数的经典统计方法对“偏离正态”这一问题都是有一定抵抗力的,因此图形判断法还是比较有价值的。

3、常见的判断正态性的描述性方法

(1)Q-Q图和P-P图

Q-Q图(左图)是Quantile-Quantile 的缩写,也就是分位数-分位数图。在Q-Q图中,横坐标是正态分位数,纵坐标是实际数据的分位数。其思想就是:比较理论分位数和实际分位数的差距,如果理论分位数和实际分位数没什么差别,那么图中所有的点应该都在一条直线上;如果差别大,就会偏离直线较远

因此, <u style="box-sizing: border-box;">Q-Q 图判断正态性的原则就是:如果图中的点大致呈一条从左下至右上的直线,则可以认为是正态的。</u>

P-P(Probability-Probability) 图(右图)的思想跟Q-Q 图差不多,只不过不是用分位数,而是用累积概率。它比较理论上正态分布的累积概率与样本数据的累积概率,其横坐标为理论的累积概率分布,纵坐标为样本数据的累积概率分布。显然,如果二者吻合,则应该是一条从左下至右上的直线;如果偏离直线较远,则说明样本数据不服从正态分布。

Q-Q图和P-P图

图片中x变量所对应的Q-Q图和P-P图,不难得出,这两幅图的点都不像一条直线,提示可能不满足正态分布

(2)茎叶图

x和y的频数分布图

首先我们看一下上图,变量x的值都是小于30 的,也就是说,最多只有两位数。下图的“茎"列是变量x的十位数,“叶"列是变量x的个位数,“计数”列则是频数。例如,最后一行的0|33 表示有两个3 (凡是在2.5~3 .5 之间的,都显示为整数3); 第三行的2|23 表示有一个22 (凡是21.5 和22.5 之间的数值都算是22,如22.1 或21.9) 和一个23; 其他以此类推。
变量x

从茎叶图中可以看出很多信息,如可以很容易发现,大多数数据集中在10 以下,而且整个茎叶图的形状并不是对称的,这些都说明变量x很可能是不服从正态分布的。 作为对比,我们可以看下y变量的对比,变量y的茎叶图提示,大多数数据集中在50到90之间

变量y

变量y可能比变量x更接近正态分布。变量y的茎叶图提示,大多数数据集中在50~90之间

(3)利用四分位数间距和标准差进行简易判断

对于一个来自正态分布的样本,其四分位数间距(IQR) 和标准差(s) 之比大约为1.34 。因此,如果IQR/s的值在1.34左右,则可以认为其满足正态分布。 对于图11.1中的变量x 和y, 其IQR/s分别为4.00/3 .97=1.01和20.65/13.07=1.58, 相对而言,1.58偏离1.34更小一些,因此可以简单判断很可能变量x偏离正态更严重一些。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,636评论 5 468
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,890评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,680评论 0 330
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,766评论 1 271
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,665评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,045评论 1 276
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,515评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,182评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,334评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,274评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,319评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,002评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,599评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,675评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,917评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,309评论 2 345
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,885评论 2 341