PC人脸识别登录,出乎意料的简单

本文收录在 GitHub 地址 https://github.com/chengxy-nds/Springboot-Notebook

之前不是做了个开源项目嘛,在做完GitHub登录后,想着再显得有逼格一点,说要再加个人脸识别登录,就我这佛系的开发进度,过了一周总算是抽时间安排上了。

源码在文末

其实最近对写文章有点小抵触,写的东西没人看,总有点小失落,好在有同行大佬们的开导让我重拾了信心。调整了自己的心态,只要我分享的东西对大家有帮助就好,至于多少人看那就随缘吧!

废话不多说先看人脸识别效果动态,马赛克有点重哈,没办法长相实在是拿不出手。

实现原理

我们看一下实现人脸识别登录的大致流程,三个主要步骤:

  1. 前端登录页打开摄像头,进行人脸识别,注意:只识别画面中是不是有人脸

  2. 识别到人脸后,拍照上传当前画面图片

  3. 后端接受图片并调用人脸库SDK,对人像进行比对,通过则登录成功,并将人像信息注册到人脸库和本地mysql

前端实现

上边说过要在前端识别到人脸,所以这里就不得不借助工具了,我使用的 tracking.js,一款轻量级的前端人脸识别框架。

前端 Vue 代码实现逻辑比较简单,tracking.js 打开摄像头识别到人脸信息后,对视频图像拍照,将图片信息上传到后台,等待图片对比的结果就可以了。

1data() { 2 return { 3 showContainer: true, // 显示 4 tracker: null, 5 tipFlag: false, // 提示用户已经检测到 6 flag: false, // 判断是否已经拍照 7 context: null, // canvas上下文 8 removePhotoID: null, // 停止转换图片 9 scanTip: '人脸识别中...',// 提示文字 10 imgUrl: '', // base64格式图片 11 canvas: null 12 } 13 }, 14 mounted() { 15 this.playVideo() 16 }, 17 methods: { 18 19 playVideo() { 20 var video = document.getElementById('video'); 21 this.canvas = document.getElementById('canvas'); 22 this.context = this.canvas.getContext('2d'); 23 this.tracker = new tracking.ObjectTracker('face'); 24 this.tracker.setInitialScale(4); 25 this.tracker.setStepSize(2); 26 this.tracker.setEdgesDensity(0.1); 27 28 tracking.track('#video', this.tracker, {camera: true}); 29 30 this.tracker.on('track', this.handleTracked); 31 }, 32 33 handleTracked(event) { 34 this.context.clearRect(0, 0, this.canvas.width, this.canvas.height); 35 if (event.data.length === 0) { 36 this.scanTip = '未识别到人脸' 37 } else { 38 if (!this.tipFlag) { 39 this.scanTip = '识别成功,正在拍照,请勿乱动~' 40 } 41 // 1秒后拍照,仅拍一次 42 if (!this.flag) { 43 this.scanTip = '拍照中...' 44 this.flag = true 45 this.removePhotoID = setTimeout(() => { 46 this.tackPhoto() 47 this.tipFlag = true 48 }, 49 2000 50 ) 51 } 52 event.data.forEach(this.plot); 53 } 54 }, 55 56 plot(rect){ 57 this.context.strokeStyle = '#eb652e'; 58 this.context.strokeRect(rect.x, rect.y, rect.width, rect.height); 59 this.context.font = '11px Helvetica'; 60 this.context.fillStyle = "#fff"; 61 this.context.fillText('x: ' + rect.x + 'px', rect.x + rect.width + 5, rect.y + 11); 62 this.context.fillText('y: ' + rect.y + 'px', rect.x + rect.width + 5, rect.y + 22); 63 }, 64 65 // 拍照 66 tackPhoto() { 67 68 this.context.drawImage(this.$refs.refVideo, 0, 0, 500, 500) 69 // 保存为base64格式 70 this.imgUrl = this.saveAsPNG(this.$refs.refCanvas) 71 var formData = new FormData(); 72 formData.append("file", this.imgUrl); 73 this.scanTip = '登录中,请稍等~' 74 75 axios({ 76 method: 'post', 77 url: '/faceDiscern', 78 data: formData, 79 }).then(function (response) { 80 alert(response.data.data); 81 window.location.href="http://127.0.0.1:8081/home"; 82 }).catch(function (error) { 83 console.log(error); 84 }); 85 86 this.close() 87 }, 88 89 // 保存为png,base64格式图片 90 saveAsPNG(c) { 91 return c.toDataURL('image/png', 0.3) 92 }, 93 94 // 关闭并清理资源 95 close() { 96 this.flag = false 97 this.tipFlag = false 98 this.showContainer = false 99 this.tracker && this.tracker.removeListener('track', this.handleTracked) && tracking.track('#video', this.tracker, {camera: false}); 100 this.tracker = null 101 this.context = null 102 this.scanTip = '' 103 clearTimeout(this.removePhotoID) 104 } 105 }

人脸识别

之前也搞过一个人脸识别案例 《基于 Java 实现的人脸识别功能(附源码)》 ,不过调用SDK的方式太过繁琐,而且代码量巨大。所以这次为了简化实现,改用了百度的人脸识别API,没想到出乎意料的简单。

别抬杠问我为啥不自己写人脸识别工具,别问,问就是不会

在百度云注册一个应用 https://console.bce.baidu.com/ai/?_=1595996996657&fromai=1#/ai/face/app/list,得到 API KeySecret Key,为了后续获取 token用。

在这里插入图片描述

百度云人脸识别的API非常友好,各种操作的 demo都写好了,拿过来简单改改就可以。

第一步先获取token,这是调用百度人脸识别API的基础。

1https://aip.baidubce.com/oauth/2.0/token? 2grant_type=client_credentials& 3client_id=【百度云应用的AK& 4client_secret=【百度云应用的SK

接下来我们开始对图片进行比对,百度云提供了一个在线的人脸库,用户登录我们先在人脸库查询人像是否存在,存在则表示登录成功,如果不存在则注册到人脸库。每个图片有一个唯一标识face_token

百度人脸识别 API 实现比较简单,需要特别注意参数image_type,它有三种类型

  • BASE64:图片的base64值,base64编码后的图片数据,编码后的图片大小不超过2M;
  • URL:图片的 URL地址( 可能由于网络等原因导致下载图片时间过长);
  • FACE_TOKEN:人脸图片的唯一标识,调用人脸检测接口时,会为每个人脸图片赋予一个唯一的 FACE_TOKEN,同一张图片多次检测得到的FACE_TOKEN是同一个。

而我们这里使用的是图片BASE64文件,所以image_type要设置成BASE64

1 @Override 2 public BaiDuFaceSearchResult faceSearch(String file) { 3 4 try { 5 byte[] decode = Base64.decode(Base64Util.base64Process(file)); 6 String faceFile = Base64Util.encode(decode); 7 8 Map<String, Object> map = new HashMap<>(); 9 map.put("image", faceFile); 10 map.put("liveness_control", "NORMAL"); 11 map.put("group_id_list", "user"); 12 map.put("image_type", "BASE64"); 13 map.put("quality_control", "LOW"); 14 String param = GsonUtils.toJson(map); 15 16 String result = HttpUtil.post(faceSearchUrl, this.getAccessToken(), "application/json", param); 17 BaiDuFaceSearchResult searchResult = JSONObject.parseObject(result, BaiDuFaceSearchResult.class); 18 log.info(" faceSearch: {}", JSON.toJSONString(searchResult)); 19 return searchResult; 20 } catch (Exception e) { 21 log.error("get faceSearch error {}", e.getStackTrace()); 22 e.getStackTrace(); 23 } 24 return null; 25 } 26 27 @Override 28 public BaiDuFaceDetectResult faceDetect(String file) { 29 30 try { 31 byte[] decode = Base64.decode(Base64Util.base64Process(file)); 32 String faceFile = Base64Util.encode(decode); 33 34 Map<String, Object> map = new HashMap<>(); 35 map.put("image", faceFile); 36 map.put("face_field", "faceshape,facetype"); 37 map.put("image_type", "BASE64"); 38 String param = GsonUtils.toJson(map); 39 40 String result = HttpUtil.post(faceDetectUrl, this.getAccessToken(), "application/json", param); 41 BaiDuFaceDetectResult detectResult = JSONObject.parseObject(result, BaiDuFaceDetectResult.class); 42 log.info(" detectResult: {}", JSON.toJSONString(detectResult)); 43 return detectResult; 44 } catch (Exception e) { 45 log.error("get faceDetect error {}", e.getStackTrace()); 46 e.getStackTrace(); 47 } 48 return null; 49 } 50 51 @Override 52 public BaiDuFaceAddResult addFace(String file, UserFaceInfo userFaceInfo) { 53 54 try { 55 byte[] decode = Base64.decode(Base64Util.base64Process(file)); 56 String faceFile = Base64Util.encode(decode); 57 58 Map<String, Object> map = new HashMap<>(); 59 map.put("image", faceFile); 60 map.put("group_id", "user"); 61 map.put("user_id", userFaceInfo.getUserId()); 62 map.put("user_info", JSON.toJSONString(userFaceInfo)); 63 map.put("liveness_control", "NORMAL"); 64 map.put("image_type", "BASE64"); 65 map.put("quality_control", "LOW"); 66 String param = GsonUtils.toJson(map); 67 68 String result = HttpUtil.post(addfaceUrl, this.getAccessToken(), "application/json", param); 69 BaiDuFaceAddResult addResult = JSONObject.parseObject(result, BaiDuFaceAddResult.class); 70 log.info("addResult: {}", JSON.toJSONString(addResult)); 71 return addResult; 72 } catch (Exception e) { 73 log.error("get addFace error {}", e.getStackTrace()); 74 e.getStackTrace(); 75 } 76 return null; 77 }

项目是前后端分离的,但为了大家学习方便,我把人脸识别页面整合到了后端项目。

最后 run FireControllerApplication 访问地址:http://localhost:8082/face 即可。

源码GitHub地址:https://github.com/chengxy-nds/fire.git,欢迎大家来耍~

整理了几百本各类技术电子书,送给小伙伴们。关注公号回复【666】自行领取。和一些小伙伴们建了一个技术交流群,一起探讨技术、分享技术资料,旨在共同学习进步,如果感兴趣就加入我们吧!

在这里插入图片描述

无论你是刚入行、还是已经有几年经验的程序员,相信这份面试提纲都会给你不少助力,长按二维码关注 『 程序员内点事 』 ,回复 『 offer 』 自行领取,祝大家 offer 拿到手软

在这里插入图片描述

点赞
收藏

评论区

加载中...

相关推荐

MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1

文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s

Oracle 分组与拼接字符串同时使用

SELECTT.,ROWNUMIDFROM(SELECTT.EMPLID,T.NAME,T.BU,T.REALDEPART,T.FORMATDATE,SUM(T.S0)S0,MAX(UPDATETIME)CREATETIME,LISTAGG(TOCHAR(

MySQL部分从库上面因为大量的临时表tmp_table造成慢查询

背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_

皕杰报表之UUID

​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为

手写Java HashMap源码

HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程22

2020年前端实用代码段,为你的工作保驾护航

有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )