I 基于深度学习的疲劳驾驶检测Fatigue driving detection based on deep learning内容摘要眼睛的作用对我们不光是看见世界的窗口，也是我们表情达意的一种载体。通过眼睛我们可以表现出多种状态，并且眼睛还具有传达感情、体现人的精神状态等功能。譬如人困乏的时候会频繁眨眼，人精神充足时，眼睛就会更加生动。眨眼睛的频率在一定程度上可以反映出人是否处在疲劳的状态，本文正是立足在检测眼睛睁开闭合的频度之上来判断驾驶员是否正在疲劳驾驶。在驾驶车辆的状态下，可以排除身体因素以外影响人眨眼频率的情况，所以本文采用基于深度学习的检测眼睛开闭频率的方法来进行疲劳驾驶检测。本文主要工作内容如下所示：（1）基 于 深 度 学 习 的 多 任 务 卷 积 神 经 网 络 （ Multitask Convolutional Neural Network，后文称ｍｔｃｎｎ）的模型修改、模型训练、人脸区域检测及眼睛区域定位。这里选择使用 MTCNN，是因为它有识 别 率 高 、 识 别 速 度 快 的 优 点 。 它 具 有 三 层 级 联 卷 积 神 经 网 络 -Pnet、Rnet、Onet，对输入的数据层层优化精选出人脸特征，实质上是特征分类和特征回归，最终可以得到人脸区域的特征以及眼睛鼻子嘴巴的特征点，再经过非极大值抑制（NMS），来获得人脸部的。本文在此基础上修 改 了 MTCNN 模 型 ， 使 网 络 模 型 通 过 新 级 联 的 网 络 层 输 出 得 到 的landmark_regress 通过该层网络回归得到眼睛区域左上右下特征点的偏移量。（2）通过上文提到的 MTCNN 进行改进得到人脸特征区域以及眼睛特征区域之后，裁剪眼睛特征区域图像，并输入疲劳判断 CNN 层中，来判断人员是否有疲劳的症状。该层模型主要是起分类的作用，来解决眼睛睁开与眼睛闭合的二分类问题。本文采用计算眼睛闭合再到睁开的时间与整体测试时间的百分率（Percentage of Eyelid Closure Ｏｖｅｒ ｔｈｅ Ｐｕｐｉｌ Ｏｖｅｒ Ｔｉｍｅ，下文称ｐｅｒｃｌｏｓ），来判断驾驶人员是否出现疲劳现象。 II关 键 词 ： 卷 积 神 经 网 络 ； MTCNN ； Ｐ Ｅ Ｒ Ｃ Ｌ Ｏ Ｓ ； 疲 劳 驾 驶Abstract The function of the eyes is not only a window to see the world, but also a carrier of expression. Through the eyes, we can show a variety of States, and the eyes also...
