基于嵌入式人脸识别的智能考勤系统的设计.pdf

第14 卷第14 期2023年7 月黑龙江科学HEILONGJIANG SCIENCEVol.14Jul.2023基于嵌入式人脸识别的智能考勤系统的设计姜智轩，侯涵宇（南京大学金陵学院，南京2 10 0 8 9）摘要：根据现代办公考勤需求，设计了一套基于人脸识别的智能考勤系统，使用开源opencv库、RFBNet网络、AdaFace算法作为软件系统的主要算法，采用意法半导体公司的STM32微处理器作为核心控制处理器，使用低功耗传输模块、云服务器、MySQL数据库及单目摄像头等实现了个性化系统数据分析及考勤签到打卡功能，方便简洁，可用于多种生活场景（如高校、企事业单位等），具有良好的应用价值。关键词：人脸识别；考勤系统；opencv；机器学习；模型训练；云服务器；MCU中图分类号：TP311.52Intelligent Attendance System Based on Embedded Face RecognitionAbstract:According to the demand of modern office attendance,a set of intelligent attendance system based on facerecognition is designed.Open source opencv library,RFBNet network and AdaFace algorithm are used as the mainalgorithms of the software system.The STM32 microprocessor of ST is adopted as the core control processor,and thefunctions of personalized system data analysis and attendance check-in are realized by using low-power transmissionmodule,cloud server,MySQL database and mono camera.It is convenient and concise,and can be used in various lifescenarios(such as universities,enterprises and institutions,etc.),and has good application value.Key words:Face recognition;Attendance system;Opencv;Machine learning;Model training;Cloud server;MCU基于MCU微系统、实时操作系统技术,设计了基于人脸识别的智能考勤系统,其结构简单，逻辑严密，可将获取的信息由低功耗网络传输模块上传到云端，实现个性化数据分析功能，配套的移动端app可用于运营管理，节约时间,提高管理效率。1系统结构设计1.1石硬件结构硬件设计是一个系统的基础，需从以下几方面进行分析：市场需求。通过用户的真实需求，分析系统需要实现的功能，进行系统各模块的功能分配与设计。确定整体方案。通过市场调研确定好元器件并进行测试,完善各模块的配合工作。绘制原理图。根据方案设计电路图，参照电路图绘制PCB。电路板工作。依据所电路图进行各模块器件的焊接与测试,将调试程序下载到开发板上进行进一步的测试。收稿日期:2 0 2 3-0 4-2 7作者简介：姜智轩（2 0 0 1），男，本科在读。研究方向：电子信息；侯涵宇（19 9 9），男，本科在读。研究方向：电子信息。文献标志码：AJiang Zhixuan,Hou Hanyu(Nanjing University Jinling College,Nanjing 210089,China)文章编号：16 7 4-8 6 4 6(2 0 2 3)14-0 14 7-0 31.2硬件电路的设计采用模块化设计方式，先确定总体方案，再逐个模块进行层次设计。采用意法半导体公司ARM?32位Cor-tex?-M3 CPUSTM32系列微处理器STM32107VCT6作为核心控制模块。主要包括0 V2640为核心的人脸图像采集模块、开源RT-thread实时操作系统内核、外部存储器扩展模块、网络通信模块及LCD显示模块+CubeMX+TouchGFX GUI开发,具有高性能、低功耗、高集成度等特点。STM32107VCT6集成了高性能ARM Cortex-M3 32 位 RISC 内核,工作频率为 7 2 MHz,具有高速嵌人式存储器（闪存高达2 56 KB和SRAM64KB)及连接到两条APB总线的大量增强型I/O与外围设备，可外接数字摄像头，支持多分辨率显示屏。采用数片容量为6 4 M的IS42S16400J-7TLI芯片作为SDRAM的存储扩展，采用Samsung公司的K9F1G08UOA的NandFlash作为Flash的存储扩展。图像获取采用ATK-0V2640模块，ATK-0V2640CMOS内置图像传感器高清摄像头模块，具有2 0 0 W像素，支持图像压缩，可输出JPEG图像数据，内部集成LDO与有源晶振，仅需3.3V电源即可工作支持大多数嵌人式系统的应用，自带嵌人式微处理器，支持AEC、AGC、A WB、自动消除灯光条纹、ABLC等自动控制功147能，支持色饱和度、色相、伽马、锐度与图像缩放、平移等待同步(VSYNC)等待HREF为高电平及窗口设置。+等待第一个PCLK上升沿读取第一个像素低字节等待第二个PCLK上升沿读取第一个像素高字节等待第三个PCLK上升沿读取第二个像素低字节循环读取剩余像素.图1硬件电路的设计Fig.1 Design of hardware circuit1.3软件结构通过嵌人式系统对人脸数据进行采集，利用无线网络模块上传到云端数据库，由云端人脸提取与识别算法分析并做出判断，给数据库及嵌入式数据采集端返回相应的分析结果。一个处理器在某一时刻只能运行一个任务,但由于每次对一个任务的执行时间很短，任务之间通过任务调度器进行快速切换（调度器根据优先级决定此刻该执行的任务），会给人造成多个任务在一个时刻同时运行的错觉。RT_Thread是支持多种微处理器的开源免费RTOS,支持多任务。在RT_Thread系统中，任务通过线程来实现,RT_Thread中的线程调度器即任务调度器。该RT操作系统采用C语言编写，应用面向对象的思维设计范式，代码简明，架构清晰，体积小，成本低，功耗低，启动快速，实时性高，资源量占用小。1.4软件设计1.4.1嵌人式系统的搭建从RT_Thread官方下载RT_Thread源码包、Env开发工具，从ST意法半导体官方处下载CubeMX开发工具、TouchGFX GUI开发组件，进行交叉编译开发环境的搭建及开发环境的配置。通过Env工具对源码功能进行配置或裁减，编译BSP文件，生成带有RT_Thread实时内核的MDK工程,配合MDK编译。由PC机通过MDK平台将配置好的内核系统写入嵌人式系统板中。通过串口与ST_Link下载器联合调用实现实时调试。1.4.2人脸识别系统的设计人脸检测。基于Receptive Fields（R Fs），提出了RFBlock（R FB），该模块考虑了RFs 的大小和离心率（E c c e n t r i c i t y）之间的关系，提高了特征的可辨识性和鲁棒性。然后基于 RFB,对以VGG16为基础架构的ssd进行了改进,形成最终的RFBNet。引入RFB的缘由其实在于模拟人类视觉感受野，以此进而加强网络148结束特征提取能力，在结构上RFB借鉴了Inception的思想，在前者的基础上加人dilated convolution，从而有效增大了receptivefield。在整体层面上对SSD网络改进,所以结果的检测速度较快，也有一定的精度保证。进一步将 RFB组装到 SSD 的顶部,构建RFB Net 检测器。RFBNet网络能够在保持实时速度的同时达到高性能检测的能力。从两部分看：用差异化尺度卷积核尺度的卷积核来模拟多尺度RFs空洞卷积操作的方式模拟人类receptivefield中RFs 的尺度与Eccen-tricity 间的关系。人脸编码及匹配。ArcFace也称为加角边际损失,是一种用于人脸识别的损失函数。softmax损失函数被用于这些任务中，但softmax没有对特征嵌人进行明确的优化,无法对执行类内样本的高相似性及类间样本的多样性起到预期作用,这导致在类内外观变化较大的情况下,深度人脸识别结果存在差距。ArcFace损失转换了对数,是权重与特征之间的角度。单个权重、嵌入特征通过归一化固定，而后重新缩放，特征与权重的归一化步骤令预测只取决于特征与权重之间的角度。学习得到嵌人特征，在特征与权重中加人一个加法角度余量惩罚。矫正后的人脸由ArcFaceNet来编码,输出嵌入特征。调用该结果计算余弦距离，根据所设定的阈值来确定不同的人，余弦距离公式如下：iXcosO=同一个人人脸的不同位置，余弦距离小，但不同人脸之间的余弦距离很大，可由数据库内人脸与待匹配人脸余弦距离差来判断。采用RFBnet网络检测并提取人脸,用Arcface网络获取待检测人脸的嵌入特征并计算余弦距离，与数据库内人脸余弦距离的差比较判断，准确率高，解决以往常有的漏检问题。采用“云”保存考勤信息，通过智N能手机等设备查询实时数据及历史记录，具有有较大的推广价值。系统使用流程如下：上电或复位，自检设备正常运行，初始化基本配置设置，进行考勤，按下考勤键后发出视频采集控制信号，启动图像采集功能。数据库下载一图2 系统流程Fig.2System flow2楼数据库设计采用数据库设计可以在云端服务器与本地分别存储打卡记录及人脸图像信息，实时更新人脸图像信息及个人资料。MySQL数据库是基于关系型数据库搭建而成的管理系统,具有较高的灵活性及运行速度,是访问数据库最常用的标准化语言，体积小，成本低，开放源码,适用于本系统的数据库搭建。采用Java对MySQL数据库进行操作。连接数据库，加载驱动程序以调用Class.forName（）函数,再调用DriverManager 对象的getConnection（）函数，得到Connection 对象。创建一个Statement对象、PreparedStatement语句（预编译的语句）或CallableStatement对象（存储过程调用的语句）及一个SQL语句。调用excuteQuery(）等函数执行SQL语句，在ResultSet对象中保存结果，调用execute-Update()等函数执行SQL语句，不返回ResultSet对象的结果。对返回的ResultSet对象进行显示等处理，释放资源。(上接第14 6 页)3结束语对Y市不动产登记综合管理平台进行设计，分析了技术方案、软硬件环境、整体架构及主要功能等。平台开发完成后将提升当地国土资源管理的数字化及信息化，为不动产登记信息处理、管理及共享方面提供便利。未来还将继续完善该平台的功能，提高其稳定性及用户体验，为土地资源管理提供更加优质的数字服务。采集后以文件格式存储到SDRAM中,完成存储后,经过算法处理,界面显示该员工的相关信息。保存员工考勤记录，记录到服务器数据库中。系统流程如图2所示。签到开始采集人脸图像一上传用户注册检测人脸图像+Y人脸图像预处理人脸图像特征提取一上传特征匹配、识别一下载一一上传一下载一3结束语设计了一套基于嵌入式人脸识别的智能考勤系统,通过系统硬件结构、系统软件结构、数据库及APP的设计,将嵌人式系统与人脸识别技术有效结合，在安卓智能手机环境下用摄像头进行人脸图像信息采集，再将数据传输到云端服务器进行识别,实时反馈结果，实现了考勤签到打卡功能。本系统方便简洁，可用于多种生活场景（如高校、企事业单位等），具有良好的实际应用价值。参考文献：1黄琳,蒋为,杨铁军.基于 Caffe 框架的人脸定位与识别系统的设计 J.计算机时代,2 0 19（0 6)：56-58,6 2.2许淑扬.深度学习框架Caffe在图像分类中的应用探析 J.信息与电脑（理论版）,2 0 19,31（2 3）:9 5-9 6.3】袁铭择，夏时洪.人脸特征点跟踪系统与仿真分析 J.系统仿真学报,2 0 18,30(12):4 6 18-4 6 2 4.参考文献：1】钱志友，符海月，史晓云.基于ArcEngine的不动产登记信息管理系统设计 J.地理空间信息，2 0 19,17（0 8）9 5-9 7,118,12.2吴振刚.市级不动产登记信息管理基础平台的设计与关键技术研究 J.西部资源，2 0 2 0,9 8（0 5）：18 1-18 3.3】张伟，刘言东.河南省级不动产“一窗受理平台”系统设计与实现J.地理空间信息,2 0 2 2,2 0（0 2）：10 7-10 9,113.4苏志宏不动产登记系统的设计与实现D.南宁：广西大学,2 0 2 1.5殷中强不动产登记信息管理基础平台的设计与实现 D.长春：吉林大学,2 0 18.考勤登记签到结束149