一、视频监控现状
视频监控系统作为一种有效的技术手段,在威慑和打击犯罪,保障人们的人身和财产的安全,维护社会秩序方面有着不可替代的作用,得到公安部门的青睐。随着“平安城市”、“城市治安防控”、“智慧城市”、“3111工程”等科技强警项目建设的开展不断深入,我国基础视频监控系统的建设在城市的覆盖已日趋完善。
传统的安防技术更加强调事件响应的实时性或事后查证的有效性,也就是以视频为核心的“实时监控,实时指挥,实时录像,事后查证”。因此高清、无延时、IP联网代表了这时期安防行业视频监控的主要发展方向。平安城市解决方案为这时期的代表,如宇视引领的监控平台系统、标准互联、高清4K、H.265等就有着鲜明的特点。一方面利用IMOS Inside视频监控平台技术,为各省、市、区县各级公安机关开展视频类的侦查应用提供服务,另一方面公安部门根据各自情况组建围绕视频监控的专业侦查等应用队伍,反过来也有力地促进了监控视频在公安领域的应用。
随着视频监控平台在公安部门的应用不断深入,视频信息与公安业务系统的不断整合将是视频综合应用的发展方向。图侦已成为公安刑侦、技侦和网侦之后的第四种侦查手段。全国主要城市的公安机关积极探索监控视频与其自身业务相结合的应用模式,深入挖掘视频信息的潜在价值,从而实现了精确指挥、精确打击、精确管理、精确防范控制的要求。
二、公安的智能需求
随着高清IP摄像机的普及,视频监控系统平台的视频接入和存储也越来越多,如何有效利用这些视频资源,挖掘其潜在价值,是用户当前面临的首要问题。传统的视频监控解决了视频的存储和回放以及各厂商视频流的互联互通的问题,但仍然无法准确识别、定位和查找视频中的人、车、物等目标信息。目前,要实现全方位的实时监控、指挥调度、视频录像中可疑目标的检索查证,还必须依靠大量的工作人员时刻紧盯屏幕,监视所有摄像机的实况视频,以及回放相关视频录像,查找可疑人员,车辆目标和线索。这显然需要耗费大量人力,而且难免也会因为疲劳和疏忽,而错漏掉某些稍纵即逝的重要信息。
因此,围绕公安业务需求,宇视推出的公安实战平台,结合视频图像侦查业务,对监控画面中感兴趣的目标视频进行智能分析,提取可疑的人、车、物等目标信息,生成结构化的语义描述,从而实现特定目标的快速定位、查找和检索。例如,当某地发生案件,收集案发现场监控视频及所有联网的公安视频图像、政府建设视频、社会监控视频,对涉案视频进行智能分析,对其相关联视频中人、车目标进行信息提取。并对每个图片和视频进行目标对象的人工标注描述,实现视频、图片与对应人、车、物信息的关联。然后上传到视频信息数据库,作为基础数据资源用于情报信息研判,还可利用GIS地图可视化,结合时空信息,详细刻画可疑目标的活动轨迹,为侦破案件提供重要支持。公安实战平台有效地提升了监控视频资源利用,协助快速而准确的研判,提升了工作效率。
三、智能分析技术应用
视频智能分析是利用计算机图像视觉处理、模式识别和机器学习等算法,分析和识别运动目标信息。作为公安实战平台中最为重要的环节,如下几种智能分析需求应用更为迫切。
1.人脸识别
为了应对公共安全突发事件,公安业务部门对人脸识别技术尤为关注。如公安部门借助人脸卡口IPC摄像机的智能人脸检测技术,在城市道路、广场、娱乐场所及各类重点场所布控,提取包括人的性别、戴眼镜、年龄段等特征信息,从而实现人脸的实时布控、高危人员比对、以图搜图、语义搜索等方面的业务应用。比如,人脸布控业务是通过对视频进行实时人脸采集和视频分析,并与各种人脸库提供的图片(警综、信综、出入境、人口库、追逃库、犯罪人员库等)进行实时比对。如果发现重点关注人员,将推送到公安实战平台客户端或手机终端。另外公安实战平台与全国人口库、常住人口库、居住证人口库等数据关联,可实现城市地铁、机场、酒店的人脸识别系统的联动。结合地图业务应用,可实现轨迹回放、告警、查询的可视化。
现实中,实际监控场所得到的人脸图片往往质量不高,距离研究领域的图片(如LFW数据库)还相差甚远。例如,光照、姿态、表情、饰物、遮挡、运动模糊、分辨率等都影响着人脸识别算法的实际应用推广,已有的训练算法或者说已有的训练数据无法表达出一个具有很强泛化能力的算法模型。
未来人脸识别模型如果需要取得突破,一方面需要更多更丰富的海量样本数据,如各种光照、姿态表情下的人脸图像;另一方面深度学习模型还可以进一步优化和调整。不过到底什么样的模型才算是最优的,目前业界并没有很好的答案。
2.车辆识别
近年来,随着智能交通高清卡口相机的广泛建设和应用,借助于智能识别算法和大规模集成电路技术的迅速发展,交通管理部门利用视频监控系统将电警、卡口、停车场出入口等场所的车辆相关结构化信息存入基础信息库,包括有车牌、车牌颜色、车标、车身颜色、车型、车款,以及遮阳板、系安全带、司乘人员的人脸检测和抓拍、驾驶员打电话等细微信息。基于这些车辆关键的特征信息,形成上亿条过车记录数据,从而推动了后台大数据分析服务的发展应用和行业数据挖掘,形成例如套牌车分析识别、高危车辆积分模型、车辆行驶轨迹分析、时空碰撞等实战技战法的应用。在此基础上对车辆特征数据的大数据搜索,即可迅速找到所有符合条件的车辆信息,包括行驶时间与方向、行驶速度、车牌号码、车标、年款等,还可以结合以图搜图的检索方法,在公安实战平台上调取卡口视频和图像文件,快速查询到有关嫌疑车辆信息,还原车辆行驶的轨迹历史信息,而且可以实现嫌疑车辆在整个城市的全程运行轨迹查询,或结合视频监控信息,实现车辆全程化的可视化轨迹回放,以及对涉事车辆的精确布控和查询,也可以联合车管所车辆信息库,得到车辆和车主的信息、车辆活动信息、跟车信息等记录。
3.视频浓缩摘要
视频浓缩摘要是通过对视频录像的智能分析,将其中有运动目标部分视频截取下来,丢弃没有运动目标的片段,通过视频剪辑,形成一段简短浓缩的视频内容。可以将24小时内具有运动目标的视频浓缩在短短十几分钟,甚至几分钟内的短片形式。通过视频解码,提取目标的图像特征信息,先定义好事件规则,过滤掉大部分用户不关心的信息,保留行人、车辆或其他目标的活动细节。
4.图像增强与复原
图像增强与复原是指通过图像处理算法,使用增强工具对图像清晰化处理。利用多种图像处理算法,如对视频图片的亮度、白平衡、去雾、去模糊等多种智能处理,帮助还原现场车辆和行人的本来面目,快速梳理和清晰化相关线索。
5.视频诊断
视频诊断是指检测摄像机的图像画质异常,对如图像模糊、镜头虚焦、摄像机外罩脏、亮度、对比度、偏色、横条纹、雪花噪声等图像异常状态进行检测。随着监控设备的不断扩容,因此检测和维护也愈加重要。
四、面临的问题
尽管各行业对智能分析的需求旺盛,但在实际应用中也面临很多问题,主要有以下几个方面:
1.准确率受环境影响大
视频检测、识别和报警功能在关键场合已能发挥作用,但无法广泛部署和规模化应用。究其原因,视频图像分析算法仍然对环境敏感,环境中存在对智能分析算法的干扰因素较多,对智能分析的效果影响较大。如智能分析算法对环境中的光照变化敏感,针对不同角度的复杂异常运动建模困难;目标与背景接近会导致目标检测和特征信息提取困难;运动目标被遮挡会造成目标信息缺失;目标移动速度过快或算法过于复杂导致跟踪的有效性较低。如果无法解决误警率、漏报率高、目标跟踪丢失等环境适应性的困难,市场仍将很难规模推广应用。
2.海量数据分析速度慢
面对海量前端摄像机送回的视频、图片数据,虽然后端智能分析平台的性能不断提升,但目标检索速度仍然满足不了公安业务部门的要求。为了提升检出率同时降低误报率,算法复杂度也在不断提升,数据分析和目标检索的速度仍然有提升的空间。
五、发展趋势分析
1.深度学习,高性能计算,海量训练数据
2006年,加拿大多伦多大学教授、机器学习领域泰斗——Geoffrey Hinton在顶尖学术刊物《科学》上发表了一篇文章,掀起了深度学习在学术界和工业界的浪潮。
深度学习还有很多应用场景,只要涉及到目标检测、目标识别的地方,都可以应用深度学习来解决。在目标对象的识别,如人脸识别、行人识别、车辆识别、物体检测识别、图像分割、光学字符识别等应用场景,进一步的细化特征识别,包括人和车辆的更多特征将得到检测和识别。随着芯片技术的发展,计算性能不断提升,利用大量丰富的数据样本“锤炼”,算法成熟周期越来越短,场景适应性的增强,识别指标的不断提升,性价比越来越高,越来越丰富的结构化智能分析信息,必然在公安业务中得到应用。
2.多维信息结合
视频图像可以视作一个维度的传感信号。除了视频信息以外,引入和融合更多维传感数据信息,有利于排除干扰,提升识别准确率。如,结构光的深度摄像机、双目摄像机等技术,能检测物体的深度和高度信息,更有利于排除光照和背景干扰。智能识别和检测算法的指标更加实用化,在某些场合已经可以实际应用。结合人工智能领域的计算机视觉技术,在公安行业,为智慧城市构建全新的智慧、可视、物联的数据系统。
3.大数据挖掘分析
传统监控数据只有视频和图片这些非结构化信息,查询只能是空间和时间两个维度,这样的信息利用效率低下,隐含的价值信息也会被大量冗余的信息所覆盖。随着智能化的发展,提供更多的数据信息,检出更多人、车、物等目标的辨别特征以及其他维度数据信息,再结合时间和空间,挖掘出目标对象的行为和变化关联等等。这就衍生出了很多紧贴实战的特色管理应用,如积分模型、可疑目标行为模型等。
在传统的案件侦察工作中,录像倒查等这类简单的视频研判往往是分散和孤立的,同时存在视频格式不一、存储散乱、与其他信息资源脱节等问题。公安部门需要一套标准化的视频研判流程,对视频中的目标信息进行统一提取和分析研判,更好地组织警力完成案件视频侦查工作,推动传统办案模式转变。笔者认为通过大量数据的接入及数据之间的关联挖掘分析,可以为案件研判过程提供精确的推测提示,协助分析目标对象在某一时刻可能的行驶运动轨迹,从而大大缩小人工研判分析范围,提高工作效率。以当前的应用来看,智能视频分析技术在物联网大背景下,将会随着安防监控大平台发展,向更加集成化、智能化的方向发展。智能视频分析技术的应用,不止停留在原来能“看”(监控)的程度;还要能“识”得监控场景中目标物体的行为;能够“辨”出目标物体是什么、行为意味着什么;更可以把结果“呈”出来。其最大变革在于从以前的“记录监控”向“事前控制、主动预警、事中追踪、事后分析”转变。
未来无疑是智能化的时代,海量数据挖掘的时代,一个更加便捷的时代,这一切的前提都依赖于智能算法、数据挖掘技术不断突破和成熟。
(供稿:谭炽烈 浙江宇视科技有限公司)