随着我国社会经济的发展,各类经济活动日趋频繁,流动人口迅速增加,这给综治维稳、公安户籍管理等工作带来了巨大的压力。随着众多厂家对人脸产品的宣传和市场推广力度的加大,人脸识别系列产品的用户接受度定将大幅度提高,已被相关领域的用户广泛接受,但绝大多数厂家的产品都是单一应用产品,以各类终端化人脸业务应用系统为基础上报人脸图片到公安综合平台进行人脸布控预警,建设具有大泛围的人脸布控区域、高价值的人脸大数据的智慧城市融合型人脸识别综合管理平台有利于社会综治维稳,是刚性需求。
1.2技术可行性分析人脸识别是人工智能机器视觉技术领域中以生物特征来区分生物体个体一项视觉分析技术,这项技术发展今,动态人脸识别技术已经成熟,需在架构设计上对技术进行应用化平台化设计,综合统一管理,大规模多模式应用方式实现一体化的城市级人脸识别综合管理平台。
1.3目标与方向融合永道以提供城市级人脸识别综合管理解决方案为目标,在统一平台的架构之下,将人脸布控预警、人脸通行、人证合一验证、行业化各式人脸身份验证等应用进行统一联网综合管理,在公安综治部门建立多级中心平台、联网与整合辖区内各类人脸识别应用子系统,各辖区人脸系统本地自治、同时与上级综治人脸平台进行联网,上传抓拍人脸等信息。
二.平台架构 2.1 主要特点 2.1.1 多级联网、协同作战
本人脸识别综合管理平台支持多级独立部署,平台上下级联网,支持省、市、区、街道办(派出所)、社区多级联网,每级平台独立部署并支持接入下级平台,同时本级平台可支持被上级平台接入,联网后可实现上级查询本级或所有子平台的人脸抓拍、对比历史记录、轨迹信息、人脸库,支持下级报警事件上报到上级平台,上级平台可布人脸黑名单分发到本级所有子节点平台形成全网布控。
2.1.2异质人脸子系统接入兼容
本平台可以接入人脸识别通行系统(人脸道闸系统),人证合一验证系统,移动人脸布控系统,各子系统运行自身的业务功能之外,同时支持上传捕获的人脸到当地公安综治人脸识别综合管理平台,与人脸黑名单库进行对比并存储人脸图片与特征信息。
2.1.3 分布式人脸抓拍大数据
在分布式多级综合人脸平台里,各级平台接受辖区内相关人脸子系统上报的人脸与特征信息,分别存储在各自的服务器内,实现分布式人脸大数据,各级客户端可通过查询功能模块发起分布式查询人脸轨迹列表。
2.1.4分布式人脸布控大数据
在多级平台的层,如各级派出所平台,各自发布本地治安人脸黑名单,进行本地化布控,同时也接收上级平台发布的全局布控人脸黑名单。各级平台客户端可以选择人脸图片发起分布式“以图搜图”,搜索本级系统或所有下级系统人脸黑名单库,返回相似度的人脸布控图片列表。
层平台负责接入在城市各重要通道,如车站、网吧、机场、学校、办公大楼出入口、出租房门或通道、路口、景区入口、各类场馆出入口建立的人脸采集卡点,实时采集的人脸并建立人脸记录模型库,分布式单元建立人脸卡口库,以便采集海量人脸图片及特征信息,当通过图像技侦手段采集到可疑人脸时,可通过输入可疑人员人脸图片,自动分布式搜索对比人脸卡口库海量记录,获得相似人脸记录形成轨迹信息,提供技侦线索。
2.1.5异质人脸识别算法兼容
人脸识别综合管理平台支持接入采用不同人脸算法的子系统,避免算法升级或不同厂家算法不兼容,造成系统无法使用。
2.2 系统架构网络拓扑图
典型三级联网系统架构示意图
三.综合管理平台功能 3.1上下级平台联网
系统在机构联网功能里具有添加下级平台服务器的功能,输入下级平台服务器地址、端口、用户名、密码信息确认保存后,手工进行执行数据同步,即即可完成联网,后台会自动检测下级数据节点变动执行数据同步功能。
3.2 上下级报警事件分级处置系统客户端自动接收本级系统报警或下级系统上报的报警事件,上级平台向下级平台发布黑名单时,可根据设置确认报警事件是否上报到上级平台处置,否则报警事件则由下级平台管理人员处置。
3.3动态人脸实时抓拍对比预览
中心平台客户端功能模块之一,可任意点播某个下级人脸抓拍对比单元系统下的摄像机,实时播放摄像机视频并接收查看抓拍人脸图片与对比结果。
3.4 人脸对比历史记录查询中心平台客户端功能模块之一,可任意查询某个下级人脸抓拍对比单元系统下的摄像机某天下某时间段的人脸对比历史记录。
支持查看相关联的录像片段。
3.5人脸抓拍历史记录查询中心平台客户端功能模块之一,可任意查询某个下级人脸抓拍对比单元系统下的摄像机某天下某时间段的人脸对比历史记录。
支持“以图搜图”方式全局搜索人脸抓拍历史记录,形成轨迹记录。
支持查看相关联的录像片段。
3.6 人脸黑名单报警及联动处理
客户端可实时接收人脸布控黑名单预警事件,并支持在接收事件时弹出报警框列出相关信息和对比结果,同时打开该摄像机的视频和执行预先设置的联动动作,联动动作可包含如下功能:
l 客户端打开某个或一组摄像机视频
l 切换某个或一组摄像机到电视墙显示
l 执行某个或多个摄像机预置位
具有支持定制其它动作的扩展功能。
3.7 报警历史记录查询中心平台客户端功能模块之一,可任意查询某个下级人脸抓拍对比单元系统下的摄像机某天下某时间段的人脸对比报警历史记录。并可还原列出对比前100人的按相似度排序记录。
支持查看相关联的录像片段。
3.8人脸库管理
l 黑名单人脸库
黑名单人脸库用于同步分发到各个人脸抓拍对比单元系统,同时提供中心平台客户端查询对比。
l 白名单人脸库
白名单人脸库为户籍人脸库,通常为大型人脸数据库,按项目所在地身份证高清正面底照建库,支持批量导入。由一台或多台人脸对比服务器组成集群对外提供人脸查询对比服务。
支持手工选中人脸图片,搜索人脸库内相似的人脸列表,按评分高排序。
3.9统计分析
中心平台客户端功能模块之一,可任意查询下级人脸抓拍对比单元系统下的某个摄像机(或全部)在某时间段、某天、某小时人脸抓拍/报警记录数,并支持以图表方式呈现出来。
3.10系统配置
本功能添加修改删除下级人脸抓拍对比单元系统服务器,添加修改删除流媒体服务器,添加修改解码显示服务器等设备,并进行视频源对象同频,分组管理,用户及权限设置,地图源设置等操作。
3.11 软件升级
系统支持通过客户端统一对中心管理服务器、人脸布控单元服务器、客户端进行软件版本进行远程升级。
四.融合永道人脸识别业务子系统介绍
4.1融合永道动态人脸识别道闸系统 4.1.1 系统简介
融合永道动态人脸识别道闸系统是集成了人脸识别技术的道闸产品,包含了人脸识别翼闸、人脸识别平移闸、人脸识别摆闸三种闸机类型。根据需求的不同,可提供人脸识别单向识别通道和人脸识别双向别通道两种通道类型。融合永道动态人脸识别道闸解决了普通道闸在身份识别问题上的安全漏洞,大大提高了身份识别的度,了道闸管理区域内的财产安全及人员人身安全,人脸识别过程中的人脸图片存档,也为管理中的安全事件事后查证提供了证据,并且具有人脸访客功能。可广泛应用于各种工业园出入口管理、写字楼电梯厅管理,大型景区二次入园门票管理等。
4.1.2 系统结构图
人脸识别道闸系统结构示意图
4.1.3 主要功能 4.1.3.1 白名单管理支持10W人大白名单库管理,支持道闸分组访问授权。
4.1.3.2 刷脸通行支持刷脸联动开门,具有防尾随功能
4.1.3.3 人证合一通行支持刷身份证取出证上相片+刷脸取出摄像机人脸进行1:1对比验证后开闸
4.1.3.4 访客临时通行支持保安操作刷身份证录入临时访客信息或手工录入访客信息,同时现场拍照录入访客人脸,访客刷脸进入,待访客刷脸出闸后自动删除临时访客的人脸模型,同时记录该访客信息到历史数据库,以备事后查询。
4.1.3.5 本地黑名单报警支持录入禁入的黑名单人脸,在黑名单人员出现时在保安室或监控中心报预警。
4.1.3.6 历史记录查询支持客户端远程查询系统人脸抓拍记录、对比历史记录、访客历史记录,并导出相关图片文件,图片文件名记录相关信息。
4.1.3.7 与公安人脸平台对接联网人脸道闸系统支持与我司平安城市人脸预警平台联网,支持通过互联网或专网模式联网,即将产生的人脸图片及得得取的特征,上传到预警平台,进行公安黑名单人脸布控库对比预警,并记录人脸大数据库。
4.2.融合永道人证合一验证系统 4.2.1 系统简介
系统采用人脸识别算法,结合代身份证阅读器应用技术,通过身份证阅读器读取身份证卡片上存储的人员信息(含照片),从照片中提取人脸与与摄像机内实时视频中的人脸进行一对一对比,给出对比验证结果。
4.2.2 产品图
(1)采用前沿深度学人脸识别算法,一对一人证识别可达到99%的率。人证识别模式支持从身份证卡片取上相片与摄像机内实时人脸进行对比验证。
(2)本系统可支持64个识别验证终端,组成联网型人证识别系统.同时支持与大型视频综合管理平台进行分布式大范围联网。
(3)同时支持人证识别验证和黑名单报警
(4)对比速度快一对一对比在 1ms以下,10000人脸库对比在 200ms
(5)人脸建模速度快,支持人工刷证建模、手工建模、批量建模
(6)支持目前市面主要摄像机私有协议和ONVIF协议
(7)操作简单易用,支持海量历史记录存储
(8)支持流媒体转发,可以与网络视频管理系统联网。
(9)支持联动输出开关(控制开门等)。
(10)提供二次开发SDK包
(11) 支持与中心平台联网
4.3.融合永道移动人脸布控系统 4.3.1 系统简介
融合永道移动人脸识别布控系统是便携蹲守式单步人脸布控系统,包含了迷你人脸识别主机、网络摄像机。主要为需要针对某类高危人员进行临时布控。迷你人脸识别终端主机,本地自成单系统,可在本地布控万人以内的小型人脸库,实现本地化对比预警与人脸图片存储,同时可以通过互联网或专网与公安人脸布控平台进行联网,在本地化对比的同时,实时发送捕获的人脸到公安人脸布控平台进行后台对比记录预警等,除此之外,本地系统还支持导入(MP4\AVI\RM\3GP)等主流视频录像文件进行提取人脸与对比预警操作。
4.3.2 系统结构图
4.3.3 主要功能 4.3.3.1 便携式蹲守式布控
人脸识别仪为迷你型X86分析主机,电话机大小,适合携带,适用于临时蹲守式人脸识别布控任务,导入布控黑名单人脸库,通过网口与网络摄像机连接,通过网络获取网络摄像机视频流并解码检测跟踪捕获对比人脸,任务完成后更换布控场所。
4.3.3.2 录像文件导入分析对比
人脸识别仪软件支持导入标准通用的视频录像文件,进行人脸捕获对比预警。
4.3.3.3 人脸上传公安平台人脸识别仪支持通过Internet 或专用网络与公安人脸布控预警平台联网,实时传送捕获的人脸到公安人脸布控预警平台,录入人脸大数据库并进行大黑名单库对比预警。
4.4.融合永道动态人脸布控预警系统 4.4.1 系统简介
本系统采用服务器后台接入模式,支持接入兼容主流ONVIF协议或主流私有协议的网络摄像机,同时支持接入前端人脸检测抓拍的人脸摄像机,兼容多种人脸特征提取对比算法,在动态实时视频环境下进行大容易的黑名单人脸特征库实时对比预警,适用于各种公安、行业人脸布控预警应用。
4.4.2网络结构
单元服务器结构
堆叠式集中管理结构
4.4.3 功能特性动态人脸单元服务器功能特性表:
序号
名称
描述
1
人脸抓拍
1. 支持检出黄色人种、白色人种、黑色人种、棕色人种等不同人种的人脸
2. 支持检出抬头、头、左右转动、右斜向上、右斜向下、左斜向上、左斜向下等的人脸
3. 支持检出微笑、大笑、瞪眼、闭眼、张嘴、歪嘴、吐舌头等表情的人脸
4. 支持检出面部过曝、面部欠曝、阴阳脸、逆光等不同光照条件下人脸
5. 支持比对两眼瞳距不小于20像素点人脸图片
6. 支持对人脸跟踪抓拍去除冗余人脸功能,可设置跟踪丢失或跟踪N秒后取出人脸存储并对比
7. 人脸抓拍记录需含两张图片,一张人脸特写图片,一张全身图片,一张全景图片(选项)
2
人脸误拍
人脸误拍率
3
人脸漏拍
人脸漏拍率小于等于0.1%
4
人脸建模
支持各种质量具有人脸的相片进行人脸建模
5
人脸库容量
实时对比黑名单人脸库容量支持超过30W
6
对比率
人脸与人脸库搜索对比率高于99%
7
搜索响应速度
发起单次对比,30W人脸库规则以下响应速度在60ms以内
8
历史记录容量
支持海量存储,单元系统存储人脸图片及人脸物征数据容量需达10亿对。
9
单元系统本地化操作功能
单元系统具有客户端软件,且需要支持如下功能
1, 实时预览视频和人脸捕获(带叠加人脸框),实时对比记录展现
2, 历史记录查询(抓拍人脸图片和对比人脸图片按时间查询,支持“以图搜图”方式查询)
3, 人脸库管理,支持接收综合联网平台下发人脸布控,本地单元系统支持本地化建立黑白人脸库,支持批量导入人脸图片建模
4, 支持本地化视频源及系统参数配置功能
10
单元系统支持摄像机终端数量
多种接入方式(服务器解码人脸检测模式\前端人脸检测模式)
单元服务器系统支持8路1080p解码接入,支持接入100个下级单元系统,100台前端人脸识别相机,根据服务器型号对应接入摄像机数量
1. 综合联网平台要求
序号
名称
描述
1
多级联网
综合联网平台支持无限级的上下级联网,即本级机构平台可堆叠添加接入多个下级平台,实现树型架构的多级级联模式的联网方式,联网成功后上级平台即可自动与下级平台相关资源进行关联,实现跨级查询和多级报警等功能。
2
堆叠接入管理人脸抓拍对比单元系统
本级机构综合联网平台可添加接入本机构部署的多个人脸抓拍对比单元系统
3
堆叠接入管理车牌识别系统
本级机构综合联网平台可添加接入本机构部署的多个车牌识别抓拍对比单元系统
4
堆叠接入管理智能视频分析系统
本级机构综合联网平台可添加接入本机构部署的多个智能分析抓拍预警单元系统
5
堆叠接入管理视频监控管理系统
本级机构综合联网平台可添加接入本机构部署的多个视频监控管理系统
6
多级查询
支持在本级平台按时间范围查询本级或下级平台所有人脸识别、智能分析、车牌识别、视频等对象通道的报警或历史记录,并支持下载这些记录、图片、视频片段等信息。
7
人脸“以图搜图”
支持在本级平台,输入人脸图片和时间段,在本级平台和所有下级平台范围内,发起“以图搜图”功能,返回相似的前N条人脸记录,展现人员运动轨道信息。
8
多级报警管理
以各级平台接收处理本级部署的单元系统报警为主,可选项设置某些重点报警事件上
9
一键布控、全网响应
支持在本级平台,录入人脸黑名单,同步发送到下级平台,实现“一键布控、全网响应”的功能
10
地图展示
支持卫星航拍地图、地图模式,在地图上可查找到各类摄像机的专题图标,查阅视频或闪动响应报警事件。
11
报警联动
报警产生后,可设置联动动作,动作需支持多视频上传、客户端弹出视频等事件,支持二次开发其它动作。
12
在线客户端用户数
每级平台可支持不少于100个客户端用户
联系我时,请说是在找找去看到的,谢谢!