FaceRecognition:活体人脸识别，识别人脸，识别张嘴和摇头动作，并拍照

# FaceRecognition 之前公司项目需要，研究了一下人脸识别和活体识别，并运用免费的讯飞人脸识别，在其基础上做了二次开发，添加了活体识别。项目需要就开发了张嘴和摇头两个活体动作的识别。 这里简单介绍一下当时的开发思路和一些个人拙见，欢迎大神指点。 首先说一下讯飞第三方的人脸识别的几个缺点：1.识别不稳定，各点坐标跳动偏差比较大，不容易捕捉；2.CPU使用率比较高，连续识别一会儿手机会明显发烫，手机配置低的，就会反应很慢，本人使用的iPhone 6s，配置还可以，还算比较流畅，但也会发烫。3.屏幕小的手机识别率相对会低一点，当然这也和手机的配置脱不了干系。 # 目录 1. [确定位置](https://github.com/fuzheng0301/FaceRecognition/blob/master/README.md#确定位置) 2. [张嘴识别](https://github.com/fuzheng0301/FaceRecognition/blob/master/README.md#张嘴识别) 3. [摇头识别](https://github.com/fuzheng0301/FaceRecognition/blob/master/README.md#摇头识别) 4. [其他细节](https://github.com/fuzheng0301/FaceRecognition/blob/master/README.md#其他细节) 5. [尾声](https://github.com/fuzheng0301/FaceRecognition/blob/master/README.md#尾声) 下面开始我们的活体识别开发之路： ## 确定位置 讯飞的人脸识别坐标跳动比较大，如果全屏识别发现很容易出现错误的识别，导致识别错误的被通过，所以为了降低这个可能性，特意加了脸部位置的限制，把识别位置和范围大大缩小，大大提高了识别精度和成功率。 原版的Demo里给出了人脸框的坐标，也显示出了人脸的框，代码如下： ``` -(void)drawPointWithPoints:(NSArray *)arrPersons { if (context) { CGContextClearRect(context, self.bounds) ; } context = UIGraphicsGetCurrentContext(); for (NSDictionary *dicPerson in arrPersons) { if ([dicPerson objectForKey:POINTS_KEY]) { for (NSString *strPoints in [dicPerson objectForKey:POINTS_KEY]) { CGPoint p = CGPointFromString(strPoints); CGContextAddEllipseInRect(context, CGRectMake(p.x - 1 , p.y - 1 , 2 , 2)); } } BOOL isOriRect=NO; if ([dicPerson objectForKey:RECT_ORI]) { isOriRect=[[dicPerson objectForKey:RECT_ORI] boolValue]; } if ([dicPerson objectForKey:RECT_KEY]) { CGRect rect=CGRectFromString([dicPerson objectForKey:RECT_KEY]); if(isOriRect){//完整矩形 CGContextAddRect(context,rect) ; } else{ //只画四角 // 左上 CGContextMoveToPoint(context, rect.origin.x, rect.origin.y+rect.size.height/8); CGContextAddLineToPoint(context, rect.origin.x, rect.origin.y); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width/8, rect.origin.y); //右上 CGContextMoveToPoint(context, rect.origin.x+rect.size.width*7/8, rect.origin.y); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width, rect.origin.y); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width, rect.origin.y+rect.size.height/8); //左下 CGContextMoveToPoint(context, rect.origin.x, rect.origin.y+rect.size.height*7/8); CGContextAddLineToPoint(context, rect.origin.x, rect.origin.y+rect.size.height); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width/8, rect.origin.y+rect.size.height); //右下 CGContextMoveToPoint(context, rect.origin.x+rect.size.width*7/8, rect.origin.y+rect.size.height); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width, rect.origin.y+rect.size.height); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width, rect.origin.y+rect.size.height*7/8); } } } [[UIColor greenColor] set]; CGContextSetLineWidth(context, 2); CGContextStrokePath(context); } ``` 在这段代码的启发下，我对此作了改装，把动态的人脸框，改成了静态的框，这个静态框，就是指示和限定人脸位置的框，根据屏幕大小画出的，代码如下： ``` -(void)drawFixedPointWithPoints:(NSArray *)arrFixed { for (NSDictionary *dicPerson in arrFixed) { if ([dicPerson objectForKey:POINTS_KEY]) { for (NSString *strPoints in [dicPerson objectForKey:POINTS_KEY]) { CGPoint p = CGPointFromString(strPoints); CGContextAddEllipseInRect(context, CGRectMake(p.x - 1 , p.y - 1 , 2 , 2)); } } if ([dicPerson objectForKey:RECT_KEY]) { CGRect rect=CGRectFromString([dicPerson objectForKey:RECT_KEY]); // 左上 CGContextMoveToPoint(context, rect.origin.x, rect.origin.y+rect.size.height/8); CGContextAddLineToPoint(context, rect.origin.x, rect.origin.y); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width/8, rect.origin.y); //右上 CGContextMoveToPoint(context, rect.origin.x+rect.size.width*7/8, rect.origin.y); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width, rect.origin.y); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width, rect.origin.y+rect.size.height/8); //左下 CGContextMoveToPoint(context, rect.origin.x, rect.origin.y+rect.size.height*7/8); CGContextAddLineToPoint(context, rect.origin.x, rect.origin.y+rect.size.height); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width/8, rect.origin.y+rect.size.height); //右下 CGContextMoveToPoint(context, rect.origin.x+rect.size.width*7/8, rect.origin.y+rect.size.height); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width, rect.origin.y+rect.size.height); CGContextAddLineToPoint(context, rect.origin.x+rect.size.width, rect.origin.y+rect.size.height*7/8); } } [[UIColor blueColor] set]; CGContextSetLineWidth(context, 2); CGContextStrokePath(context); } ``` 这里的框是限定脸部位置的，所以脸部位置超出设置的范围的时候，就需要停止人脸识别，停止动作识别，并给出用户提示，提示用户调整位置，或者明确告诉用户，脸部距离屏幕太近了，或者太远了。判定脸部位置的代码如下： ``` #pragma mark --- 判断位置 -(BOOL)identifyYourFaceLeft:(CGFloat)left right:(CGFloat)right top:(CGFloat)top bottom:(CGFloat)bottom { //判断位置 if (right - left < 230 || bottom - top < 250) { self.textLabel.text = @"太远了..."; [self delateNumber];//清数据 isCrossBorder = YES; return YES; }else if (right - left > 320 || bottom - top > 320) { self.textLabel.text = @"太近了..."; [self delateNumber];//清数据 isCrossBorder = YES; return YES; }else{ if (isJudgeMouth != YES) { self.textLabel.text = @"请重复张嘴动作..."; [self tomAnimationWithName:@"openMouth" count:2]; #pragma mark --- 限定脸部位置为中间位置 if (left < 100 || top < 100 || right > 460 || bottom > 400) { isCrossBorder = YES; isJudgeMouth = NO; self.textLabel.text = @"调整下位置先..."; [self delateNumber];//清数据 return YES; } }else if (isJudgeMouth == YES && isShakeHead != YES) { self.textLabel.text = @"请重复摇头动作..."; [self tomAnimationWithName:@"shakeHead" count:4]; number = 0; }else{ takePhotoNumber += 1; if (takePhotoNumber == 2) { [self timeBegin]; } } isCrossBorder = NO; } return NO; } ``` 这个方法基于Demo中第三方封装库中给的代理方法-(NSString*)praseDetect:(NSDictiona