基于驾驶员行为特征的疲劳驾驶检测系统

【论文地址】:An Improved Fatigue Detection System Based on Behavioral Characteristics of Driver(https://arxiv.org/pdf/1709.05669.pdf

提出的方法

有助于确定驾驶员昏昏欲睡状态的迹象和症状:

  • 白日梦和注意力不集中(Daydreaming and lack of focusing)。
  • 频繁眨眼,眼睛部分闭合(Blinking frequently and partially closed eye)。
  • 无法记住行进路径(Not able to remember the traveled path)。
  • 每过一小段时间打哈欠(Yawning after very small period)。
  • 漂移或者离开车道(Drifting or maybe move out from the lane)。
  • 点头(Head nodding)。
  • 注意力不集中(Poor Concentration)。
  • 反应缓慢(Slow reaction)。

实验重点放在眼部和嘴部特征,例如:频繁眨眼,打哈欠等。提出将疲劳监测系统分为4个部分:

  1. 利用摄像机对驾驶过程中的驾驶员进行实时视频流传输,并将视屏反馈发送给计算机视觉系统,使其能够在视频帧中检测驾驶员的面部。
  2. 获取人脸图像后,将其发送到SVM分类器,判别是否疲劳。+1表示疲劳,-1表示不疲劳。该数字输入到一个连续输出值相加的运行和中。
  3. 然后,这些输出作为警报系统单元的输入,然后对这些输入进行操作,生成它们的结果。
  4. 根据时间将结果划分为不同的疲劳程度,即:不疲劳,轻度疲劳以及重度疲劳。

数据

数据比算法更加重要,海量数据可以跑胜一个好的算法,而且数据多样性越高,性能越好。在疲劳驾驶检测系统中,数据集应该包含广泛的面部图像,即:正在谈话的面部,微笑的面部,戴着墨镜或者透明眼镜的面部。在带墨镜的情况下,系统只学习嘴部特征。此外,人们打哈欠时把手放在嘴上的图像,有助于系统正确预测疲劳。还需要考虑光亮的影响。

提出的系统

疲劳驾驶系统划分为以下4个子系统:
A. 视频捕获单元(Video Capture Unit)
B. 人脸检测单元和特征提取(Face Detection Unit and Features Extraction)
C. 基于特征的疲劳检测(Fatigue Detection on Extracted Features)
D. 警报单元(Alert Unit)

疲劳驾驶检测系统流程图

A. 视频捕获单元

通过安装在仪表盘上的摄像头,实时记录包含驾驶员脸部图帧的视频。对视频进行一定频率的采样,并将采样帧发送到人脸检测单元。

B. 人脸检测单元和特征提取

接收来自视频捕获单元的采样视频帧。对于非常昏暗的光线条件,执行低光图像增强和噪声消除。由于人脸检测不需要颜色数据,把图像更改为灰度图像。人脸检测单元返回人脸图像中矩形框的横坐标、纵坐标、长度以及宽度。
因为我们只需要眼部和嘴部作为特征集。首先,我们把面部图像中的矩形框缩放为100100像素,然后眼部使用8030矩形像素窗口,嘴部使用40*40像素窗口。眼部和嘴部的矩形窗口坐标分别为(10,20)和(30,60)。然后将上述部分传送到疲劳检测单元进一步处理。

C. 基于特征的疲劳检测
从人脸检测单元获得的驾驶员的一些列眼部和嘴部照片,我们可以对各种面部特征进行疲劳检测分析。这些面部特征包括眼睛(快速眨眼或昏昏欲睡的眼睛),嘴巴(打哈欠检测)。结合这些面部特征的疲劳检测结果,得出驾驶员是否处于疲劳或者警戒状态。
先对特征向量进行PCA降维处理,然后使用SVM分类器判别是否疲劳驾驶(1-疲劳,-1-不疲劳)。

D. 警报单元
警报单元的模型是按照格式(r,t),{r>=0,t>=0}进行的,其中r是结果值,t是时间。整个模型取决于疲劳检测单元的输出值。SVM对图像进行分类:是否疲劳,分类的输出为+1或-1。具体而言,SVM分类的输出传递给运行和中,连续相加,且最小值为0。
警报单元采取两个阈值。第一个阈值用来检测是否存在不疲劳或者轻度疲劳水平。第二个阈值用来标记轻度疲劳和重度疲劳之间的差异。当结果值超过指定阈值,都意味着检测到疲劳,并根据疲劳程度采取相应的警报。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,126评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,254评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,445评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,185评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,178评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,970评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,276评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,927评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,400评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,883评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,997评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,646评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,213评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,204评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,423评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,423评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,722评论 2 345

推荐阅读更多精彩内容