开发环境: Pycharm + Python3.6 + 卷积神经网络算法
基于人脸表面特征的疲劳检测,主要分为三个部分,打哈欠、眨眼、点头。本实验从人脸朝向、位置、瞳孔朝向、眼睛开合度、眨眼频率、瞳孔收缩率等数据入手,并通过这些数据,实时地计算出驾驶员的注意力集中程度,分析驾驶员是否疲劳驾驶和及时作出安全提示。
视觉疲劳检测原理:因为人在疲倦时大概会产生两种状态: 眨眼:正常人的眼睛每分钟大约要眨动10-15次,每次眨眼大概0.2-0.4秒,如果疲倦时眨眼次数会增多,速度也会变慢。打哈欠:此时嘴会长大而且会保持一定的状态。因此检测人是否疲劳可以从眼睛的开合度,眨眼频率,以及嘴巴张合程度来判断一个人是否疲劳。
检测工具
dlib :一个很经典的用于图像处理的开源库,shape_predictor_68_face_landmarks.dat是一个用于人脸68个关键点检测的dat模型库,使用这个模型库可以很方便地进行人脸检测,并进行简单的应用。
眨眼计算原理:
(1) 计算眼睛的宽高比
基本原理:计算 眼睛长宽比 Eye Aspect Ratio,EAR.当人眼睁开时,EAR在某个值上下波动,当人眼闭合时,EAR迅速下降,理论上会接近于零,当时人脸检测模型还没有这么精确。所以我们认为当EAR低于某个阈值时,眼睛处于闭合状态。为检测眨眼次数,需要设置同一次眨眼的连续帧数。眨眼速度比较快,一般1~3帧就完成了眨眼动作。两个阈值都要根据实际情况设置。
(2)当前帧两双眼睛宽高比与前一帧的差值的绝对值(EAR)大于0.2,则认为是疲劳
代码思路
第一步:使用dlib.get_frontal_face_detector() 获得脸部位置检测器
第二步:使用dlib.shape_predictor获得脸部特征位置检测器
第三步:分别获取左右眼面部标志的索引
第四步:打开cv2 本地摄像头
第五步:从视频流进行循环,读取图片,并对图片做维度扩大,并进灰度化
第六步:使用detector(gray, 0) 进行脸部位置检测
第七步:循环脸部位置信息,使用predictor(gray, rect)获得脸部特征位置的信息
第八步:将脸部特征信息转换为数组array的格式
第九步:提取左眼和右眼坐标
第十步:构造函数计算左右眼的EAR值,使用平均值作为最终的EAR
第十一步:使用cv2.convexHull获得凸包位置,使用drawContours画出轮廓位置进行画图操作
第十二步:进行画图操作,用矩形框标注人脸
第十三步:分别计算左眼和右眼的评分求平均作为最终的评分,如果小于阈值,则加1,如果连续3次都小于阈值,则表示进行了一次眨眼活动
第十四步:进行画图操作,68个特征点标识
第十五步:进行画图操作,同时使用cv2.putText将眨眼次数进行显示
第十六步:统计总眨眼次数大于50次屏幕显示睡着。
流华追梦
- 粉丝: 1w+
- 资源: 3850
最新资源
- 基于matlab simulink分布式四轮驱动整车控制仿真模型,其中包括轮毂电机扭矩分配控制策略模型、驾驶员模型、轮毂电机模型、动力电池模型、变速箱模型、整车动力学模型等 -1可进行动力性经济
- 全新交友盲盒+付费进群二合一源码 +保姆级视频搭建教程
- 光伏混合储能VSG并网运行,构网型变流器, 同步机 优质仿真资料 混合储能HESS:蓄电池+超级电容器 电压补偿 削峰填谷、一次调频、功率指令跟随 光伏储能参与一次调频、功率平抑、 直流母线电压控制
- 【机器学习&数据挖掘】时间序列算法-源代码+数据集
- 目标检测道路覆雪数据集1636张YOLO+VOC格式(已增强).zip
- 机械臂,基于模糊补偿的两自由度机械臂自适应控制算法,MATLAB脚本结合simulink仿真
- 基于Matlab simulink的增程式混合动力汽车建模仿真模型(增程纯电,与日产的e-power整车配置策略类似),包含增程器模型、电机模型、电池模型,驾驶员模型,整车VCU控制模型等 基于模型的
- 目标检测-道路坍塌数据集241张YOLO+VOC格式.zip
- 基于动力学模型MPC的加入规划层的轨迹跟踪避障控制(优化过的,效果比书本的好)
- 功能强大的私域引流宝PHP源码 活码+短链+分享卡片+多用户
- (源程序版)1600W 双向光伏储能微逆设计方案:设计文档+软件硬件资料 产品介绍: 本项目用于光伏储能逆变系统,实现基于GaN的1.6kW四通道单相双向微逆变器,可以作为双向光伏储能微逆的设计参考
- 索尼(SONY)Walkman NW-WM1_V1.00.10升级固件
- 索尼(SONY)Walkman NW-WM1_V0.94.00升级固件
- 索尼(SONY)Walkman NW-WM1_V0.92.10 升级固件
- 目标检测-电缆电线缺陷数据集3890张1类YOLO+VOC格式(已增强).zip
- 索尼(SONY)Walkman NW-WM1_V1.01.00升级固件
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈