数学思维4:零假设和显著性检验

数学思维

知识线索

我们今天介绍统计学中的零假设和显著性检验的概念。我们人类容易盲目轻信,习惯在没有联系的事物之间想象出因果关系。为了避免这种错误,我们要借鉴归谬法的思路,用零假设和显著性检验来一步步推理。所谓的零假设,就是要先假设毫无关系、毫无作用,然后,我们再观察实验结果中出现异常情况的概率,如果出现异常情况的概率较高,我们就说,可以推翻原来的零假设,我们发现了统计上的显著性。但是,显著性检验也有误区。所以,统计也是会撒谎的,你得擦亮眼睛。

知识内容

1.死鱼能读出人的情绪变化吗?

我先给你讲个科学界的笑话。2009年,加州大学圣塔芭芭拉分校的神经学家克雷格·巴尼特(Craig M. Bennett )在旧金山的一次国际学术会议上做了个报告,题目是:《大西洋死鲑鱼对人类神经活动的观察》。

他们研究的是什么呢?先介绍一个背景。现在研究脑科学的时候,通常采用的办法是用功能性磁共振成像装置扫描人或动物的大脑,然后观察在特定的行为、情绪下,哪一个大脑的功能区更为活跃。巴尼特和他的小伙伴们就是这么做的。他们煞有其事地把一些人类的照片给一条死鱼看,然后用功能性磁共振成像装置扫描死鱼的脑袋。结果,他们发现这条死鱼竟然能够“正确地”判断出照片中人类的情绪。这个研究当之无愧地获得了2012年搞笑诺贝尔奖。

虽然只是搞笑,但这个研究揭示了一个深刻的道理,人类是容易轻信的,我们会试图寻找世间万物的联系,即使找到的仅仅是错误的联系。我们会在找到第一个支持证据之后就放手,不再思考这种联系到底是不是存在的,是因果关系,还是相关关系。

普通人是这样,科学家也未能免俗。巴尼特的研究小组就是想要挖苦一下有些装模作样的研究。当脑科学家扫描大脑的时候,他们会把大脑分成成千上万个极小的区域。即使是在扫描死鱼的时候,死鱼大脑上每个极小的区域也会随机出现一些噪音。这些噪音中,很可能会有一些看起来跟照片上人的情绪变化相匹配。说白了,这跟看见天上的白云,觉得一会儿像马,一会儿像老头儿,是一样的。

2.从归谬法到显著性检验

那我们怎样才能避免这样的错误?今天,我们就来介绍一下零假设和显著性检验这两个概念。

先说什么是零假设?零假设好比你抓到一个犯罪嫌疑人,但你不能先假设他或她有罪,你要先假设他或她是无辜的。做研究的时候,我们也要用同样的思路。假如你要检测一种新药到底有没有疗效,你不能先假设它是有效的,你只能先假设它是无效的。假如你要研究在得到学习是否真的能提升自己在职场和人生的竞争力,你不能先假设是有用的,只能先假设是没有用的。这就是零假设,零假设是假设毫无效果,或假设丝毫不起作用,或是假设没有任何相关关系。我们在做研究的时候,要从零假设开始,然后通过做实验,或是搜集数据,看看能不能推翻零假设。如果能够推翻零假设,那么,你就能讲,这种新药是有疗效的,或者,在得到学习之后能够提升你的水平。

怎么推翻零假设呢?这要用到显著性检验。在讲显著性检验之前,我们先谈谈亚里士多德提出的归谬法。归谬法的思路是,为了证明某个命题不正确,我们先假设该命题是真的,然后,我们看看能不能推导出来什么结论,如果这个结论明显是错误的,那么,该假设就是假的命题。

我再更严格地表述一下:我们先假定假设H为真,根据H,某个事实F不成立,但是,F是成立的,因此,H不成立。比如,在2017年12月31日那天晚上,北京发生了一起盗窃案。有人怀疑是你作的案。假设H就是:你是这起盗窃案的案犯。如果这个假设成立,那么,你就不应该在2017年12月31日晚上出现在上海的罗胖跨年演讲的现场(事实F)。也就是说,根据H,事实F是不可能成立的,但F成立了,有你在朋友圈发的自拍照为证,因此,假设H是不成立的,你不可能是这起盗窃案的案犯。

在大多数研究中,我们不可能如此斩钉截铁地得出结论。我们最多只能用一种模糊的归谬法。这就是显著性检验的思路。也就是说,我们先假定假设H为真,根据H得到某个结果为O的可能性应该非常小,但是,很不幸,我们看到事件O发生了,因此,H成立的可能性非常地小。比如,我们假定S先生是工作积极认真的,如果他工作是积极认真的,那么,在工作时间发现他打王者荣耀的概率就会很小,可是,我们却发现,此人确实曾有过该开重要的会议了,他还在打王者荣耀,那这说明什么?说明我们原来的假设,也就是说,他工作积极认真的假设很可能是错的。

我们再把显著性检验的程序介绍一下:

第一步:开始实验。

第二步:假定零假设成立。

第三步:观察实验结果中出现事件O的概率,我们把这个概率称为P值。P值反映的是零假设成立的可能性。

第四步:如果P值很小,我们就认为实验结果满足零假设的可能性很小,你可以通过这种归谬法判断,你原来想检验的猜想具有统计学上的显著性。如果P值很大,我们就得承认零假设还没有被推翻。

3.“显著性检验”其实并不显著

通过这样的推理过程,你就能理清思路,在判断相关关系的时候更加谨慎。但是,我还要提醒你,显著性检验里面也有潜在的陷阱,如果不注意,还是会出现认为死鱼能读出人的情绪变化的荒谬观点。

你要记住以下三个陷阱:

P值多小才是显著的呢?在显著性与非显著性之间并没有一条泾渭分明的界限。在实践中,大部分研究者都认为0.05是临界值。可是,这只是一种约定俗成。你有没有注意到,老师在改卷子的时候,更习惯把59分顺手改为60分,所以59分较少,60分更多?在做研究的时候也有类似的情况,如果差一点没有过0.05的临界值,有的研究者就会修改数据,通过“威逼利诱”,把结果改为有显著性。

你不能假设一种因素一定会有影响力。如果你太想得出有影响力的结论,就可能会操纵实验。比如说,我们要研究吃糖豆会不会得痤疮。科学家可能会发现,吃糖豆和得痤疮之间没有关系。但是,他们还可能会分析吃紫色的糖豆、咖啡色的糖豆、粉红色的糖豆、红色的糖豆和得痤疮的关系。照这样分析下去,很可能会像死鱼读出人的情绪一样,偶然地发现某一种糖豆,比如说吃绿色的糖豆和得痤疮之间有相关性。这种研究其实是没有意义的。

不要误解“显著性”。很多科学术语都有误导,显著性这个词就是典型的例子。在我们的日常用语中,显著指的是很重要、很有意义。统计学家进行的显著性检验,并不是为了检验它的重要性。比如,如果我们测试一种新药的疗效,零假设是这种药没有任何疗效。如果能够推翻零假设,我们也仅仅证明了这种药是有疗效的,但是它的疗效可能非常地小。 统计学家认为有显著性,但临床的大夫却会告诉你,这种药在治疗中其实没有任何疗效。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,319评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,801评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,567评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,156评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,019评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,090评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,500评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,192评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,474评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,566评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,338评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,212评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,572评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,890评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,169评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,478评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,661评论 2 335

推荐阅读更多精彩内容