草庐IT

人脸识别 -- 活体检测(张嘴摇头识别)

网络安全苏柒 2024-01-17 原文

一:简介

最近项目在做了身份证银行卡识别之后,开始实现人脸识别和活体识别,其中人脸识别包括人脸入库、人脸查找、人脸1:N对比、人脸N:N对比,另外活体识别运用在安全登录功能。

大家都熟知的支付宝使用face++ 的服务来实现人脸识别,在实际项目中使用了讯飞的人脸识别SDK进行二次封装来实现活体识别。主要实现了张嘴和摇头两个活体动作的识别。据我所知,讯飞的服务是基于face++,识别率还是很高,并且iOS和Android都对应有封装好的SDK。

在实际运用中,有很多app为了高度保证用户使用的安全问题,除了常规的账号密码登录之外,相继实现了指纹登录,手势登录,第三方登陆(QQ、微信、支付宝)、刷脸登录,接下里我就和大家分享一下如何实现人脸识别的活体检测,这是实现刷脸登录最基础的实现。

另外,这些博文都是来源于我日常开发中的技术总结,在时间允许的情况下,我会针对技术点分别分享iOS、Android两个版本,尽量附上demo以供大家参考,如果有其他技术点需要,可在文章后留言,我会尽全力帮助大家。

二:实现思路分析

1.点击识别按钮,调用相机2.CameraRules类,检测相机权限3.初始化页面,创建摄像页面,创建张嘴数据和摇头数据4.开启识别,脸部框识别5.脸部部位识别,脸部识别判断是否检测到人脸6.检测到人脸之后,判断位置7.位置判断合适,判断是否张嘴8.张嘴判断完毕,验证是否摇头9.摇头判断完毕,3秒倒计时拍照10.拍照完毕,选择重拍或者上传图片11.选择重拍重复5-9步骤,选择上传将图片数据回调12.数据clean三:实现源码分析

根据实现思路分析,一步步进行编码实现:

1. 点击识别按钮,调用相机

if([CameraRules isCapturePermissionGranted]){[self setDeviceAuthorized:YES];}else{dispatch_async(dispatch_get_main_queue(), ^{NSString* info=@"没有相机权限";[self showAlert:info];[self setDeviceAuthorized:NO];});} 

2. CameraRules类,检测相机权限

//检测相机权限
+(BOOL)isCapturePermissionGranted{if([AVCaptureDevice respondsToSelector:@selector(authorizationStatusForMediaType:)]){AVAuthorizationStatus authStatus = [AVCaptureDevice authorizationStatusForMediaType:AVMediaTypeVideo];if(authStatus ==AVAuthorizationStatusRestricted || authStatus ==AVAuthorizationStatusDenied){return NO;}else if(authStatus==AVAuthorizationStatusNotDetermined){dispatch_semaphore_t sema = dispatch_semaphore_create(0);__block BOOL isGranted=YES;[AVCaptureDevice requestAccessForMediaType:AVMediaTypeVideo completionHandler:^(BOOL granted) {isGranted=granted;dispatch_semaphore_signal(sema);}];dispatch_semaphore_wait(sema, DISPATCH_TIME_FOREVER);return isGranted;}else{return YES;}}else{return YES;}
} 

3. 初始化页面,创建摄像页面,创建张嘴数据和摇头数据

 //创建摄像页面,创建张嘴数据和摇头数据[self faceUI];[self faceCamera];[self faceNumber]; 

4. 开启识别,脸部框识别

 float cx = (left+right)/2;float cy = (top + bottom)/2;float w = right - left;float h = bottom - top;float ncx = cy ;float ncy = cx ;CGRect rectFace = CGRectMake(ncx-w/2 ,ncy-w/2 , w, h);if(!isFrontCamera){rectFace=rSwap(rectFace);rectFace=rRotate90(rectFace, faceImg.height, faceImg.width);}BOOL isNotLocation = [self identifyYourFaceLeft:left right:right top:top bottom:bottom];if (isNotLocation==YES) {return nil;} 

5. 脸部部位识别,脸部识别判断是否检测到人脸

 for(id key in keys){id attr=[landmarkDic objectForKey:key];if(attr && [attr isKindOfClass:[NSDictionary class]]){if(!isFrontCamera){p=pSwap(p);p=pRotate90(p, faceImg.height, faceImg.width);}if (isCrossBorder == YES) {[self delateNumber];return nil;}p=pScale(p, widthScaleBy, heightScaleBy);[arrStrPoints addObject:NSStringFromCGPoint(p)];}} 

6. 检测到人脸之后,判断位置动作提醒

 if (right - left < 230 || bottom - top < 250) {self.textLabel.text = @"太远了";[self delateNumber];isCrossBorder = YES;return YES;}else if (right - left > 320 || bottom - top > 320) {self.textLabel.text = @"太近了";[self delateNumber];isCrossBorder = YES;return YES;}else{if (isJudgeMouth != YES) {self.textLabel.text = @"请重复张嘴动作";[self tomAnimationWithName:@"openMouth" count:2];if (left < 100 || top < 100 || right > 460 || bottom > 400) {isCrossBorder = YES;isJudgeMouth = NO;self.textLabel.text = @"调整下位置先";[self delateNumber];return YES;}}else if (isJudgeMouth == YES && isShakeHead != YES) {self.textLabel.text = @"请重复摇头动作";[self tomAnimationWithName:@"shakeHead" count:4];number = 0;}else{takePhotoNumber += 1;if (takePhotoNumber == 2) {[self timeBegin];}}isCrossBorder = NO;} 

7. 位置判断合适,判断是否张嘴

 if (rightX && leftX && upperY && lowerY && isJudgeMouth != YES) {number ++;if (number == 1 || number == 300 || number == 600 || number ==900) {mouthWidthF = rightX - leftX < 0 ? abs(rightX - leftX) : rightX - leftX;mouthHeightF = lowerY - upperY < 0 ? abs(lowerY - upperY) : lowerY - upperY;NSLog(@"%d,%d",mouthWidthF,mouthHeightF);}else if (number > 1200) {[self delateNumber];[self tomAnimationWithName:@"openMouth" count:2];}mouthWidth = rightX - leftX < 0 ? abs(rightX - leftX) : rightX - leftX;mouthHeight = lowerY - upperY < 0 ? abs(lowerY - upperY) : lowerY - upperY;NSLog(@"%d,%d",mouthWidth,mouthHeight);NSLog(@"张嘴前:width=%d,height=%d",mouthWidthF - mouthWidth,mouthHeight - mouthHeightF);if (mouthWidth && mouthWidthF) { if (mouthHeight - mouthHeightF >= 20 && mouthWidthF - mouthWidth >= 15) {isJudgeMouth = YES;imgView.animationImages = nil;}}} 

8. 张嘴判断完毕,验证是否摇头

if ([key isEqualToString:@"mouth_middle"] && isJudgeMouth == YES) {if (bigNumber == 0 ) {firstNumber = p.x;bigNumber = p.x;smallNumber = p.x;}else if (p.x > bigNumber) {bigNumber = p.x;}else if (p.x < smallNumber) {smallNumber = p.x;} if (bigNumber - smallNumber > 60) {isShakeHead = YES;[self delateNumber];}} 

9. 摇头判断完毕,3秒倒计时拍照

if(timeCount >= 1){self.textLabel.text = [NSStringstringWithFormat:@"%ld s后拍照",(long)timeCount];}else{[theTimer invalidate];theTimer=nil;[self didClickTakePhoto];} 

10. 拍照完毕,选择重拍或者上传图片

-(void)didClickPhotoAgain
{[self delateNumber];[self.previewLayer.session startRunning];self.textLabel.text = @"请调整位置";[backView removeFromSuperview];isJudgeMouth = NO;isShakeHead = NO;} 

11. 选择重拍重复5-9步骤,选择上传将图片数据回调

-(void)didClickUpPhoto
{//上传照片成功[self.faceDelegate sendFaceImage:imageView.image];[self.navigationController popViewControllerAnimated:YES];
} 

12. 数据clean

-(void)delateNumber
{number = 0;takePhotoNumber = 0;mouthWidthF = 0;mouthHeightF = 0;mouthWidth = 0;mouthHeight = 0;smallNumber = 0;bigNumber = 0;firstNumber = 0;imgView.animationImages = nil;imgView.image = [UIImage imageNamed:@"shakeHead0"];
} 

四:讯飞SDK下载及配置

1. SDK下载

因为项目中使用到讯飞人脸识别SDK,需要去讯飞开放平台创建应用,下载SDK。

2. 添加系统库

将开发工具包中lib目录下的iflyMSC.framework添加到工程中。同时请将Demo中依赖的其他库也添加到工程中。 按下图示例添加 SDK 所需要的 iOS系统库:

3. 设置Bitcode

在Targets - Build Settings 中搜索Bitcode 即可,找到相应选项,设置为NO,如下图:

4. 用户隐私权限配置

在Info.plist 中增加下图设置:

五:项目实际使用

1. 下载demo

下载demo,将demo中FBYFaceData文件夹引入项目中。

2. 在项目中引入FBYFaceRecognitionViewController

#import "FBYFaceRecognitionViewController.h" 

3. 在项目识别按钮的点击事件中添加代码

-(void)pushToFaceStreamDetectorVC
{FBYFaceRecognitionViewController *faceVC = [[FBYFaceRecognitionViewController alloc]init];faceVC.faceDelegate = self;[self.navigationController pushViewController:faceVC animated:YES];
} 

4. 图片回调函数

-(void)sendFaceImage:(UIImage *)faceImage
{NSLog(@"图片上传成功");
}

- (void)sendFaceImageError {NSLog(@"图片上传失败");
} 

网络安全基础入门需要学习哪些知识?

网络安全学习路线

这是一份网络安全从零基础到进阶的学习路线大纲全览,小伙伴们记得点个收藏!

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-0LAce2jH-1676656152437)(data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)]编辑

阶段一:基础入门

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-fmJQz6M0-1676656152438)(data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)]

网络安全导论

渗透测试基础

网络基础

操作系统基础

Web安全基础

数据库基础

编程基础

CTF基础

该阶段学完即可年薪15w+

阶段二:技术进阶(到了这一步你才算入门)

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-kFBgemnW-1676656152438)(data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)]

弱口令与口令爆破

XSS漏洞

CSRF漏洞

SSRF漏洞

XXE漏洞

SQL注入

任意文件操作漏洞

业务逻辑漏洞

该阶段学完年薪25w+

阶段三:高阶提升

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-MGn7fyiw-1676656152439)(data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)]

反序列化漏洞

RCE

综合靶场实操项目

内网渗透

流量分析

日志分析

恶意代码分析

应急响应

实战训练

该阶段学完即可年薪30w+

阶段四:蓝队课程

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-uFrNcY8I-1676656152439)(data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==)]

蓝队基础

蓝队进阶

该部分主攻蓝队的防御,即更容易被大家理解的网络安全工程师。

攻防兼备,年薪收入可以达到40w+

阶段五:面试指南&阶段六:升级内容

需要上述路线图对应的网络安全配套视频、源码以及更多网络安全相关书籍&面试题等内容

网络安全重磅福利:入门&进阶全套282G学习资源包免费分享!

有关人脸识别 -- 活体检测(张嘴摇头识别)的更多相关文章

  1. ruby - RuntimeError(自动加载常量 Apps 多线程时检测到循环依赖 - 2

    我收到这个错误:RuntimeError(自动加载常量Apps时检测到循环依赖当我使用多线程时。下面是我的代码。为什么会这样?我尝试多线程的原因是因为我正在编写一个HTML抓取应用程序。对Nokogiri::HTML(open())的调用是一个同步阻塞调用,需要1秒才能返回,我有100,000多个页面要访问,所以我试图运行多个线程来解决这个问题。有更好的方法吗?classToolsController0)app.website=array.join(',')putsapp.websiteelseapp.website="NONE"endapp.saveapps=Apps.order("

  2. 报告回顾丨模型进化狂飙,DetectGPT能否识别最新模型生成结果? - 2

    导读语言模型给我们的生产生活带来了极大便利,但同时不少人也利用他们从事作弊工作。如何规避这些难辨真伪的文字所产生的负面影响也成为一大难题。在3月9日智源Live第33期活动「DetectGPT:判断文本是否为机器生成的工具」中,主讲人Eric为我们讲解了DetectGPT工作背后的思路——一种基于概率曲率检测的用于检测模型生成文本的工具,它可以帮助我们更好地分辨文章的来源和可信度,对保护信息真实、防止欺诈等方面具有重要意义。本次报告主要围绕其功能,实现和效果等展开。(文末点击“阅读原文”,查看活动回放。)Ericmitchell斯坦福大学计算机系四年级博士生,由ChelseaFinn和Chri

  3. [Vuforia]二.3D物体识别 - 2

    之前说过10之后的版本没有3dScan了,所以还是9.8的版本或者之前更早的版本。 3d物体扫描需要先下载扫描的APK进行扫面。首先要在手机上装一个扫描程序,扫描现实中的三维物体,然后上传高通官网,在下载成UnityPackage类型让Unity能够使用这个扫描程序可以从高通官网上进行下载,是一个安卓程序。点到Tools往下滑,找到VuforiaObjectScanner下载后解压数据线连接手机,将apk文件拷入手机安装然后刚才解压文件中的Media文件夹打开,两个PDF图打印第一张A4-ObjectScanningTarget.pdf,主要是用来辅助扫描的。好了,接下来就是扫描三维物体。将瓶

  4. ruby-on-rails - 在 heroku 的 .fonts 文件夹中包含自定义字体,似乎无法识别它们 - 2

    Heroku支持人员告诉我,为了在我的Web应用程序中使用自定义字体(未安装在系统中,您可以在bash控制台中使用fc-list查看已安装的字体)我必须部署一个包含所有字体的.fonts文件夹里面的字体。问题是我不知道该怎么做。我的意思是,我不知道文件名是否必须遵循heroku的任何特殊模式,或者我必须在我的代码中做一些事情来考虑这种字体,或者如果我将它包含在文件夹中它是自动的......事实是,我尝试以不同的方式更改字体的文件名,但根本没有使用该字体。为了提供更多详细信息,我们使用字体的过程是将PDF转换为图像,更具体地说,使用rghostgem。并且最终图像根本不使用自定义字体。在

  5. ruby-on-rails - 没有这样的文件或目录 - 用 Mini Magick 识别 - 2

    在我让另一个人重做我的前端UI之前,我的Rails应用程序运行平稳。我已经尝试解决此错误3天了。这是错误:Nosuchfileordirectory-identifyExtractedsource(aroundline#59):575859606162@post=Post.find(params[:id])authorize@postif@post.update_attributes(post_params)flash[:notice]="Postwasupdated."redirect_to[@topic,@post]else{"utf8"=>"✓","_method"=>"patc

  6. ruby - 检测由 RSpec、Ruby 运行的代码 - 2

    我想知道我的代码是否在rspec下运行。这可能吗?原因是我正在加载一些错误记录器,这些记录器在测试期间会被故意错误(expect{x}.toraise_error)弄得乱七八糟。我查看了我的ENV变量,没有(明显的)测试环境变量的迹象。 最佳答案 在spec_helper.rb的开头添加:ENV['RACK_ENV']='test'现在您可以在代码中检查RACK_ENV是否经过测试。 关于ruby-检测由RSpec、Ruby运行的代码,我们在StackOverflow上找到一个类似的问题

  7. ruby - 使用 Ruby Daemons gem 检测停止 - 2

    我正在使用rubydaemongem。想知道如何向停止操作添加一些额外的步骤?希望我能检测到停止被调用,并向其添加一些额外的代码。任何人都知道我如何才能做到这一点? 最佳答案 查看守护程序gem代码,它似乎没有用于此目的的明显扩展点。但是,我想知道(在守护进程中)您是否可以捕获守护进程在发生“停止”时发送的KILL/TERM信号...?trap("TERM")do#executeyourextracodehereend或者你可以安装一个at_exit钩子(Hook):-at_exitdo#executeyourextracodehe

  8. ruby - 使用 ruby​​ 识别阵列上的运行 - 2

    如果我们有一个数组array=[1,1,0,0,2,3,0,0,0,3,3,3]我们如何识别给定数字的运行(具有相同值的连续数字的数量)?例如:run_pattern_for(array,0)->2run_pattern_for(array,3)->1run_pattern_for(array,1)->1run_pattern_for(array,2)->0没有2的运行,因为没有连续出现2。3有一个运行,因为只有一个幻影以树为连续数字。 最佳答案 尝试:classArraydefcount_runs(element)chunk{|n

  9. ruby - Ruby 脚本如何检测到它正在 irb 中运行? - 2

    我有一个定义类的Ruby脚本。我希望脚本执行语句BoolParser.generate:file_base=>'bool_parser'仅当脚本作为可执行文件被调用时,而不是当它被irbrequire(或通过-r在命令行上传递)时。我可以用什么来包装上面的语句,以防止它在我的Ruby文件加载时执行? 最佳答案 条件$0==__FILE__...!/usr/bin/ruby1.8classBoolParserdefself.generate(args)p['BoolParser.generate',args]endendif$0==_

  10. Ruby 无法检测字符串中的换行符 - 2

    我有以下字符串,我想检测那里的换行符。但是Ruby的字符串方法include?检测不到它。我正在运行Ruby1.9.2p290。我哪里出错了?"/'ædres/\nYour".include?('\n')=>false 最佳答案 \n需要在双引号内,否则无法转义。>>"\n".include?'\n'=>false>>"\n".include?"\n"=>true 关于Ruby无法检测字符串中的换行符,我们在StackOverflow上找到一个类似的问题: h

随机推荐