零公式讲解统计学——ROC曲线

今天来聊聊ROC(Receiver Operator Characteristic)曲线。

在上一篇中我们介绍了灵敏度与特异度。在事实和检测都只有两种可能(疾病/非疾病,阴性/阳性)的情况下,这两项指标都不难理解。但是如果检测结果不只有阴性和阳性,还有其他的可能的话,就比较难办了。

假设某种血液检测,数值指标有1,2,3,4,5,五种可能。我们并不确定用大于等于哪个值来作为诊断癌症的指标。

如果我们说检测指标大于等于1就是患有癌症,那么这项测试的灵敏度为100%,因为所有人都会被诊断为癌症,我们不会错过任何一个得癌症的病人。但是这项测试的特异度为0,因为任何健康的人也会被诊断为癌症。

对于用其他数值作为判断癌症的指标,假设该血液检测的数值如下:

血液检测1

举例来说,如果我们说检测指标大于等于2是患有癌症,假设这项测试的灵敏度为96%,而特异度为39%。意思就是96%的癌症患者会被检测出来。在非癌症患者中,有39%的人能被正确诊断出他们并不患有癌症。

现在有另一个血液检测,数值指标同样有1,2,3,4,5,五种可能,特异度和灵敏度表格如下:

血液检测2

请问,哪一种血液指标对于癌症的判断更好呢?

从表格中看,我们可以发现血液检测1的特异度和灵敏度都比较高,说明血液检测1比血液检测2的检测效果要好。但是如果数据很多,比较起来就很麻烦。有一种十分简便方法,就是ROC曲线。

ROC曲线的横轴为1减去特异度,而竖轴为灵敏度。ROC曲线直观地表现了某种检测,使用不同的数值来判断疾病时,特异度和灵敏度之间的关系。将上述两个表格的数据画为ROC曲线,就会得到下面的这张图:

ROC曲线

我们发现,血液检测1的ROC曲线(红线)在血液检测2之上,那么就说明血液检测1比较好。在看ROC曲线的时候,曲线越靠近左上角,也就是说灵敏度越高时特异值越低的检测效果比较好。

如果有以下两种检测,他们的ROC曲线互相交叉的话,如何比较呢?

ROC曲线

这个时候可以利用AUC(Area Under Curve),即曲线下面积来比较两种曲线的优劣。曲线下面积说的是,曲线和横轴之间的面积。在上图中,红线的AUC为0.8,绿线的AUC为0.78。虽然两种曲线有所交叉, 也就是说在某些情况下,绿线会比红线好。但是总体来说,因为红线的AUC比较高,所以检测3会比检测4更好。

ROC和AUC不仅仅在统计中被广泛应用,在现在火热的机器学习中也有着非常多的用途,但是其原理是一致的。简单来说,ROC和AUC是一种十分直观,用来比较不同检测/模型的方法。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,968评论 6 482
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,601评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 153,220评论 0 344
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,416评论 1 279
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,425评论 5 374
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,144评论 1 285
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,432评论 3 401
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,088评论 0 261
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,586评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,028评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,137评论 1 334
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,783评论 4 324
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,343评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,333评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,559评论 1 262
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,595评论 2 355
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,901评论 2 345

推荐阅读更多精彩内容