综合人脸识别系统.doc

综合人脸识别系统 技术方案文档编号ZAST-GC-ITS-KKH200S版 本V1.0-150504编 制审 核工程部批 准中安视通电子科技有限公司二一五年五月第一章 系统概述随着社会的发展,对一些如：机场安检、银行、军事基地、酒店、涉密机构等安全性要求较高的场所，能够实现快速有效的自动身份验证的要求日益迫切。由于生物特征是人的内在属性,具有很强的自身稳定性和个体差异性,因此是身份验证的最理想依据。但是人脸识别的优势体现在哪里呢？作为生物特征识别领域中一种基于生理特征的识别技术，人脸识别技术是通过有摄像头的终端设备拍摄人的行为图像，通过人脸检测算法，从原始的行为图像中得到人脸区域，用特征提取算法提取人脸的特征，并根据这些特征确认身份的一种技术。与其它生物特征识别技术相比，人脸识别在实用性方面具有独到的技术优势，主要体现在以下方面：n 不需要检测人员配合，具有操作隐蔽性强，因为不容易引起人的注意而不容易被欺骗。利用采集指纹、虹膜等，这些特殊的采集方式很容易被人察觉，从而更有可能被伪装欺骗。n 采用非接触式采集，没有侵犯性，不会令人反感，容易被接受。而指纹、虹膜采集往往给人造成不适的感觉。n 并发性，即实际应用场景下可以进行多个人脸的抓拍、判断及识别。n 事后追踪能力强，简单易用，普通操作人员即可进行判断核实。而普通人一般不具备对于指纹、虹膜的判断能力。n 实现设备通用、简单，尤其是采集设备成本较低。而虹膜采集仪、DNA鉴别仪等都需要专用的采集设备，而且设备昂贵。1.2.3.1.1 系统简介中安视通通过多年的潜心研发，成功推出了人脸识别系统，系统主要采用具有自主知识产权的人脸检测算法、人脸跟踪算法、人脸质量评分算法以及高速人脸对比识别算法。其实现了实时人脸抓拍建模、实时黑名单对报警和人脸后台检索等功能。1.2 系统架构系统前端高清网络摄像机或人脸抓拍机、流媒体服务器(可选) 、人脸智能分析服务器、人脸比对搜索服务器、中心管理服务器、客户端管理软件等组成。系统网络架构图如下:前端摄像机：前端摄像机有两种选择，可以采用普通高清网络摄像机或者人脸抓拍机。普通高清网络摄像机主要实现图像采集、编码等功能。人脸抓拍机不仅实现普通高清网络摄像机的所有功能，其DSP内置智能分析算法，还能对人脸进行自动捕获、跟踪、抓拍的功能。人脸抓拍机分担了人脸智能分析服务器的人脸抓拍运算量，使人脸智能分析服务器能有更多的资源用来人脸的建模、比对识别等功能。前端摄像机支持以下几种类型:1.普通ONVIF网络摄像机2.本公司配套的网络摄像机 3.组合人脸前端(小工控机USB工业摄像机) 4.Mjpeg网络摄像机5.带前端捕获人脸的网络摄像机6.利用监控系统内的摄像机(前端可能来自网络摄像机，也可能是需要流媒体服务器对此视频兼容接入,目前上海万达信息流媒体服务器经测试可接入用于人脸识别的视频设备品牌有(海康、大华、雄迈、天视通、海芯威视等) 。视频存储流媒体服务器可选: 本服务器为可选服务器，通过视频存储流媒体服务器，将不同品牌的网络摄像机和NVR视频接入进来，实现流媒体转发和录像功能，并为人脸智能分析服务器提供视频流媒体转发服务，一般在用户需要在人脸识别报警后，还需要联动查看当时录像时，可以选配或者人脸识别系统跟视频监控管理平台融合在一起使用时配用。人脸抓拍记录服务器:人脸抓拍记录服务器主要实现对前端摄像机采集的图像或从视频流媒体服务器进获取视频图像进行人脸抓拍、建模、并发起与中心后台人脸搜索比对服务器的检索识别功能。针对小型人脸系统，人脸抓拍、建模、比对识别以及后检索功能可以在一台人脸智能分析服务器中全部完成。对于一些大型人脸系统中，涉及人脸算法的高运算量，我们推荐使用人脸抓拍机，在前端摄像机中实现人脸抓拍功能，在后端将人脸建模、比对功能和人脸后台检索功能分别采用两台人脸智能分析服务器来实现。人脸识别服务器:本服务器以要实现人脸样本库的管理、人脸搜索、对比等核心算法计算服务，并提供相关检索、比对接口。是整个人脸对比系统中的核心单元。本服务器默认人脸搜索模式中，支持在 30W张人脸库中，实时对比时间少于1秒。同时，本服务器支持海量比对模式，支持1000级别高速比对。此技术处于国产人脸识别系统中绝对领先地位。中心管理服务器：系统可以根据不同的规模和实际环境选择NVR或IPSAN等 。另外我们建议架设单独的数据库服务器专门存储人脸系统的数据。操作客户端：客户端管理平台主要实现人脸抓拍机、人脸智能分析服务器、报警联动等配置和管理。客户端实现对图像的预览、各种报警信息的查看等操作。1.3 系统功能1.3.1 人脸登记本系统能够通过平台客户端利用USB摄像机和导入相片两种方式实现人脸登记入库支持一人多态人脸样本登记入库，提高人员对比识别效果除本地摄像机采集人脸登记入库之外，系统还支持批量导入身份证相片入库功能这些照片不错，但图中的打叉的部分很不好，最好能补齐1.3.2 人脸抓拍本系统能够对经过摄像机的行人进行人脸检测和人脸提取，并存储管理起来，然后利用然后根据系统对该摄像机的设置对比模式(黑名单模式白名单模式)将捕获到的合格人脸图像发送到后台人脸对比服务器，获取识别结果，达到设定相似度阀值的就产生一个报警。操作人员可以在事后，对报警记录或人脸记录过程图片进行查阅和转到当时的视频录像进行录像回放。人脸抓拍流程图1.3.3 人脸识别与报警系统可以按通道对人脸进行布防，每个通道可以单独配置黑名单数据库，实现单独布防。人脸比对识别主要是利用人脸识别算法对抓拍到的人脸图像进行建模，同时与黑名单数据库中的人脸模型进行实时比对，如果人脸的相识度达到设定阀值，系统自动可通过声音等方式进行预警，提醒监控管理人员。监控管理人员可以根据双击报警信息查看抓拍原图和录像进行核实。具体流程如下图所示。人脸比对识别流程图黑名单报警识别超远距离，40 * 40300*300 的人脸图片，能准确快速识别，并支持秒级实时比对报警，咱应联动报警实时视频弹出1.3.4 人脸检索人脸检索功能，在系统中输入待查询的人脸照片，系统自动检测出照片中的人脸信息并截取人脸，用户选择需要检索的人脸后进行相似度、时间段等参数设置后开始检索，最后检索出的相似人脸的结果会在界面上显示出来。1.3.5 查询人脸系统查询包括黑名单报警查询和人脸抓拍查询。我们可以通过时间、通道等相关参数快速查询信息。n 黑名单报警：可以查询某个时间段、通道的所有报警事件，并可详细查看报警详细信息。n 人脸抓拍查询：可以查询某个时间段、通道的所有抓拍人脸事件，并可详细查看图片、具体抓拍时间点等信息。1.3.6 其他功能此系统同时具备传统监控系统包括的人脸异常报警、视频预览、设备管理、智能配置、报警设置、用户管理等功能。人脸异常报警示意图1.4 摄像机选型及架设要求1.4.1 摄像机选择摄像机一般选用百万高清摄像机。由于需要保证拍摄到的图像中的人脸区域像素不小于80*80像素，因此摄像机的型号与监控范围有着密切关系，具体选型如下表所示。监控区域宽度像素要求推荐型号备注3-5米500万高清3米200万高清2米130万高清1米标清注意：如果监控区域宽度在5米以上，需要多加装高清摄像机。 现场环境复杂多样，根据具体得实际环境，摄像机还需要考虑到以下几个方面：n 支持低照度、宽动态等功能主要考虑室内光线偏暗，或逆光情况。n 支持自动光圈夜晚抓拍或光线变化剧烈场所。1.4.2 镜头选择不同的相机、镜头焦距、监控的宽度也决定了其不同的监控距离和摄像机架设。其之间的换算关系如下U f*W/ah=U*tan(13*3.1415926/180)+1.7n senser粑面尺寸a（mm）n 监控宽度W（米）n 监控距离U(米)n 镜头焦距f(mm)n 相机架设高度h（米）摄像机类型senser粑面尺寸a（mm）监控宽度W（米）监控距离U(米)镜头焦距(mm)相机架设高度（米）俯视角（度）9768.52.52.582.31339768.52.53.5122.51339768.52.55162.81339768.52.57253.31339768.52.5103541339768.52.515505.21339768.52282.21339768.523122.41339768.524162.61339768.5262531339768.528353.51339768.5212504.51339768.51.51.5821339768.51.52122.21339768.51.53162.41339768.51.54.5252.81339768.51.563531339768.51.59503.813386461.5282.213386461.53122.413386461.54162.613386461.5625313386461.59353.813386461.513504.7133864611.582133864612122.2133864612.8162.4133864614252.6133864616353133864618.5503.71338934.80.81.5821338934.80.82122.21338934.80.82.8162.41338934.80.84.5252.81338934.80.863531338934.80.88.5503.71331.4.3 安装位置选择n 摄像机设在通道正前方，正面抓拍人脸，左右偏转30，上下偏转15 n 建议架设高度h大约2.0-3.5米左右。n 推荐摄像机的俯视角度=15度。n d和选用的不同镜头的焦距有关系，焦点在通道出入口，且人脸像素大小不小于80*80像素。注意：摄像机架设位置主要目的是要抓拍到一张正面清晰人脸照片，且需要尽量避免前后人脸遮挡情况。详细位置的选点和镜头选择有关系，可以查看镜头选择章节中的详细列表。1.4.4 人脸成像要求 本系统对人脸成像要求很低，在偏暗，偏亮等可看清人脸(大小等于40*40像素)的条件下，都可以具备人脸捕捉和识别的要求，建议以下图为标准：1.5 应用场景目前人脸抓拍比对系统主要应用在以下几个方面： n 企业、住宅安全和管理等：在一些关键出入口、通道等卡口位置加强对进出人员的管理和安全防范。主要应用在对一些敏感人员布控，一旦发现可疑人员进出（黑名单人员），系统自动报警，并提示安保人员。n 公安、司法和刑侦：针对一些人员密集区域（如车站、地铁站、机场、社区、酒店等）的关键出入口、通道等卡口位置做人脸识别，实现搜捕嫌疑犯、逃犯等。n 重要通关口岸的身份验证：主要是实现对进出口岸人员和电子护照及身份证等信息的核实和确认。n 电力及涉密机构：电厂、变电站(防非法人员进入)、计量箱(防偷电)报警n 其他应用场景，包括活动场馆，政府机构等。需要很方便地录入人脸图像，尤其是能够进行批量导入，并进行实时比对。第二章 性能指标性能指标包括人脸抓拍率、建模成功率和比对性能等指标。人脸抓拍率：对于光线较好的监控环境下，正常的人脸抓拍率可以达到95%左右（其中抓拍到的人脸姿态偏转在左右60度之内、上下偏转30度之内），即100个人经过，大约有95个人的脸会被准确抓拍。建模成功率：由于当前的人脸识别主要针对准正面人脸进行（左右偏转30度，上下偏转15度，脸部区域分辨率不能低于40*40个像素，且成像清晰），因此在建模时必须要对抓拍到的人脸进行筛选。如果满足上述条件，建模成功率不低于90%，即100个人经过，大约有90个人的脸能够符合建模标准。比对性能：人脸比对性能与黑名单注册图像质量和黑名单数据库大小密切相关，性能指标主要从由两个指标进行衡量：误拒率和误识率，误拒率是指黑名单人员漏报的比率，误识率是指错误报警的比率。一般情况下如果错误报警越多（误识率越高），那么漏报的可能性就越小（误拒率越低），如果错误报警越少（误识率越低），那么漏报的可能性就越大（误拒率越高）。在非常理想情况下（注册图像的采集环境与真实监控环境接近，包括相机型号与架设角度一致且近一年之内采集），误识率为千分之一情况下，误拒率小于10%，也就是说有90%以上为正确识别，系统可以根据客户实际需要设置不同的人脸相识度阀值来调节误识率和误拒率之间关系。另外，人脸比对性能和黑名单注册图像质量、数据库大小、环境、光线等因素影响很大，具体比对性能视实际场景及实际注册图像质量而定。第三章 人脸抓拍比对系统局限性虽然人脸识别有其得天独厚的优势和广泛的应用范围。但是目前国内外的人脸识别的技术还不是特别成熟。人脸识别率的高低还受很多条件的限制，所以详细得了解人脸抓拍比对系统的局限性是系统应用好坏的一个关键环节。相似性不同人脸之间的区别不大，所有的人脸的结构都相似，甚至有些人脸器官的结构外形都很相似。这种情况对人脸识别率有很大影响。本系统客户可以手动调节相识度的大小进行自动预警（如大于80%的相识度才报警），相识度越高识别的准确率也就越高，但是同时漏报的可能性也会增加。所以系统对人脸相识度的设置就显得非常重要，客户可以根据实际情况合理的调节其大小。易变性人脸的外形很不稳定，在不同年龄，不同时间段人脸也会不同的变化，当然对人脸识别率高低也会产生一定影响。 所以导入黑名单时，我们需要尽量选择最近时间的人脸照片。照片质量人脸照片质量的好坏直接影响到识别的效果，照片质量包括清晰度、人脸大小的分辨率等。人脸照片包括前端高清摄像机抓拍到人脸的照片和导入黑名单库中的照片。所以导入黑名单时，我们需要选择尽量清晰的人脸照片。人脸照片的角度人脸照片一般需要一张正面人脸的清晰照片。如果始终没有一张正面人脸的清晰照片，其会大大影响其识别率的高低。所以导入黑名单时，我们需要尽量选择正面的人脸照片。遮挡物干扰人脸会有很多遮盖物（例如口罩、墨镜、头发等）多方面因素的影响，其也会对人脸识别率高低产生一定影响。所以导入黑名单时，我们需要尽量选择没有遮挡的人脸照片。光线的影响光线的变化会大大影响人脸的外观，从而影响识别的性能。 现代人脸识别技术的多项测试都表明光照变化仍是实用人脸识别系统的瓶颈之一。 所以现场环境尽量选择光线变化不大的场景，同时做好补光。黑名单来源目前我们黑名单导入有三种方式进行添加，分别是前端摄像机、已有照片和身份证照。目前识别率最高的是通过客户端摄像机采集的人脸照片作为黑名单，其次是已有照片（其他摄像机的照片或数码相机照的相片等），最后是公安库中的二代身份证照片。黑名单数据库的大小本系统算法可达到单服务器下 30万人脸库,实现秒级速度实时对比，建议黑名单或白名单库在 30万条记录以内,如果实际情况超过此数量，可以厂家联系统，以二次开发方式实现100万级或1000万级的秒级对比业务，优秀的算法，是我们敢于承诺的基础第四章 配置清单设备名称推荐型号规格数量备注人脸抓拍机IVPS-US100A/F监控区域3米带人脸抓拍功能，二选一IVPS-AS30A/F监控区域2米人脸比对服务器IVPS-SEA100/A/B/C/M实现人脸库、比对前端选择人脸抓拍机选择该款服务器A型为30W人脸库级服务器B型为20W级人脸库服务器C型为10W级人脸库服务器M型为1W级人脸库服务器人脸抓拍记录服务器IVPS-C100/A/D/E/F/M实现人脸检索可支持接入人脸人脸抓拍机(前端捕人脸)，普通网络摄像机(服务器捕人脸)中心管理服务器CMS8000核心业务管理存储录像人脸识别管理软件授权VMS-000标配支持10个IP1套第五章 主要设备介绍4.5.6.7.5.1 IVPS-US100A/F产品介绍5.1.1 产品概述IVPS-US100A/F人脸抓拍机采用高清晰逐行扫描传感器，具有清晰度高、低照度、帧率高、色彩还原度好等特点，其DSP中内嵌人脸抓拍算法，能对图像中的人脸进行检测、跟踪和抓拍，可广泛应用于人员卡口系统。人员卡口系统可以通过设卡，利用人脸抓拍机对经过卡口的行人进行治安监控及抓拍，并通过网络将抓拍数据上传至后台人脸分析服务器，利用后台人脸分析服务器上的智能人脸分析技术实现实时人脸识别和动态报警，为公安部门实现人员的管理提供准确的辅助信息。5.1.2 功能特点n 同时支持编码和抓拍功能，采用先进的视频压缩技术，压缩比高，且处理非常灵活n 支持人脸抓拍和人脸图片上传功能，满足人员卡口应用的基本需求n 支持智能人脸录像检索功能n 信息叠加功能n H264，JPEG编码n 摄像机参数配置功能：曝光速度、AGC控制、白平衡方式控制等n 本地视频，方便调试n SD/SDHC本地存储n 超强的网络功能5.1.3 面板说明5.1.3.1 侧面板说明图2.2.1序号描述1镜头接口（CS型）2固定支架安装座3自动光圈镜头插座自动光圈镜头插座接口类型为阴式方四孔型，其各个针定义如图2.2.2。视频驱动自动光圈接口使用三个针，即电源正、视频、接地；直流驱动自动光圈接口使用四个针，即阻尼正、阻尼负、驱动正、驱动负。图2.2.25.1.3.2 后面板说明图2.2.2序号描述1F1+,F1-, F2+,F2-, F3+,F3-：触发输出接口2T1 ,T2, T3, T4, GND：暂不用，保留3RS-485接口410M/100M自适应标准以太网口5VIDEO OUT：模拟视频输出接口6RESET：暂不用，保留7RS-232接口8电源接口9POWER：电源指示灯10SD卡插槽11AUDIO IN：暂不用，保留12AUDIO OUT：暂不用，保留13GND接地端5.1.4 技术参数 型号参数IVPS-US100A/F200万 1/1.8 CCD人脸识别网络摄像机摄像机传感器类型1/1.8 SONY Progressive Scan CCD最小照度0.1Lux(F1.2,AGC ON)快门1/25秒至1/30,000秒镜头接口类型C/CS 接口自动光圈DC驱动压缩标准视频压缩标准H.264压缩输出码率32 Kbps16M bps图像图像格式JPEG最大图像尺寸16001200帧率15fps(16001200)图像设置饱和度,亮度,对比度,白平衡,增益通过软件可调网络功能存储功能支持SD/SDHC,NAS支持协议TCP/IP,HTTP,DHCP,DNS,RTP/RTCP,支持FTP上传图片通用功能心跳,密码保护 专用功能支持人脸检测, 人脸录像检索, 支持JPEG抓图功能接口通讯接口1 个RJ45 10M / 100M 自适应以太网口,1个RS-485 接口触发输入4路外部触发输入触发输出3路(光耦隔离3500VAC),可作为闪光灯同步输出控制视频输出1Vp-p Composite Output(75/BNC)一般规范工作温度和湿度-1060,湿度小于90%(无凝结)电源DC12V10% 功率10W MAX尺寸(mm)71.667.6165重量750g5.2 人脸抓拍服务器产品介绍5.2.1 产品概述人脸抓拍服务器IVPS-C100是上海万达通过多年的潜心研发，成功推出了一款新品，IVPS-C100主要采用具有自主知识产权的人脸检测算法、人脸跟踪算法、人脸海量卡口记录管理方法。其实现了实时人脸抓拍建模、与对比服务器进行实时黑名单比对报警和人脸后检索等功能。5.2.2 功能特性n 提供后端智能视频分析集中处理的解决方案。n 支持人脸抓拍、建模、与对比服务器的对比和后检索功能。n 操作人性化，简洁方便，支持黑名单批量导入功能。n 支持图片、录像、实时图像等多种方式注册黑名单。 5.2.3 相关型号区别n A型为前端人脸抓拍机接入型号(支持64路前端)n D型为后台分析型服务器，可以接入12台高清摄像机n E型为后台分析型服务器，可以接入8台高清摄像机n F型为后台分析型服务器，可以接入4台高清摄像机n M型为后台分析迷你型服务器，可以接入1台高清摄像机5.2.4 面板说明1. 电源接口2. 电源开关3. 网络接口4. 网络接口5. VGA接口6. USB接口声明：面板物理接口的分布与类型以实物为准。5.2.5 技术参数型号IVPS-C100处理器Intel I7 -4770系列多核处理器智能分析能力8路720P或4路1080P视频接入做人脸比对芯片组Intel z87芯片组内存DDR3 1333 DIMM 8G网络控制器集成两个Intel千兆自适应以太网控制器显卡/F型号支持GPU加速显卡 显存,其它支持核显外部设备接口大于4个USB接口电源交流电源输入 220V，4763 Hz 500W工作环境温度535外形3U机架式最大重量15Kg声明：以上配置仅供参考，以实际发货为准。5.2.6 订货型号人脸抓拍比对服务器IVPS-C1005.3 人脸比对服务器产品介绍5.3.1 产品概述人脸比对服务器IVPS-SEA100是上海万达通过多年的潜心研发，成功推出了一款新品,其核心算法处于国际领先，支持大人脸库秒级查询比对5.3.2 功能特性n 支持30万人脸库秒级实时动态查询n 支持输入人脸图片静态查询n 支持每人多张人脸样本对比方式，提高识别率n 支持小像素图像比对，大于40*40的人脸图像，即可成功实现与人脸库搜索比对n 非合作方式人脸对比n 支持远距离人脸对比5.3.3 相关型号区别n A型为30W人脸库级服务器n B型为20W级人脸库服务器n C型为10W级人脸库服务器n M型为1W级人脸库服务器5.3.4 技术参数型号IVPS-SEA100处理器Intel 至强 E5-2600系列多核处理器硬盘128GB-512GB固态硬盘智能分析能力100路前端并发对比芯片组Intel芯片组内存DDR3 1333 DIMM 8G网络控制器集成两个Intel千兆自适应以太网控制器显卡支持核显外部设备接口大于4个USB接口电源交流电源输入 220V，4763 Hz 500W工作环境温度535外形2U机架式最大重量15Kg声明：以上配置仅供参考，以实际发货为准。5.3.5 订货型号人脸比对服务器IVPS-SEA1008. 人脸抓拍服务器产品介绍