视频检索——新型安防数据的分析管理

视频检索就是要从大量的视频数据中，找出所需要的视频片段，伴随着计算机技术和网络技术的发展，视频检索技术已经广泛应用在视频点播、数字电视、数字图书馆远程教育和远程医疗等领域。

在安防领域，各地平安城市、智慧城市的建设和公共安全领域的信息化建设的推进，都产生了大量监控视频数据，同时高清化和智能化的安防行业发展的趋势，视频数据的数量正在指数级增长。然而，视频数据却又不同于安防领域的其他传统的信息数据。以往的传统信息，经过多年的数据库技术的发展，已经形成了一套完善的基于信息管理系统的管理平台，可以快速准确地对所关心的数据进行检索查询，例如人口信息管理系统，报警平台，车辆管理系统等。而视频数据目前还没有这样有效的管理系统，还不能对确实存在的数据进行方便快速的查询和使用，视频检索技术的发展就是希望能解决这样的问题。

在安防领域视频检索技术主要应用在图像侦查方面，视频数据对案件侦破的作用，也促使图侦成为一个规模很大的新的警种。视频检索的具体应用主要包括视频浓缩和特征检索，而特征检索通常需要智能分析和图像增强技术的支持。

监控视频数据所蕴含的信息密度很低，针对某一具体需求，24小时的视频数据中有用的数据也许只有几秒钟，然而这几秒的数据的信息价值却很高。视频浓缩技术就是用来有效提高视频数据的信息密度的，它会将视频的运动目标从背景中分离出来，然后按照时间先后和位置关系集中叠加在背景中形成新的视频，这样既能最大程度地保留环境信息，同时在时间和空间上压缩无用信息。特征检索技术是指对视频内容中目标的特征进行标记索引，然后通过对特征的描述或样图显示的特征对视频进行搜索，找出符合特征的视频片段，快速从中获取更多信息，提升效率，节省人力成本。

应用与现状——初见成效，亟待完善

我国很多的安防企业或相关机构都陆续推出了自己的视频检索系统，具体工作过程和原理都类似，第一步是对需要检索的视频数据进行采集和集中存储，以供视频检索系统快速调用，有些厂家研发了专门的设备对硬盘里的视频数据进行快速拷贝来提高采集速度;第二步则是正式进行视频检索，其一是对数据进行浓缩摘要，浓缩后的视频数据提供给侦办人员进行人工排查，也可以用于特征检索;其二是通过用户提供的特征对视频数据进行检索。

办案人员可以通过查看浓缩视频，极大地节省排查视频的时间，当在浓缩视频中发现可疑目标时，可以通过点击视频上的目标快速打开对应的原始视频片断，进行详细查看。办案人员可以进一步通过提供目标特征，例如人或车，目标颜色、高度、运动方向、运动速度，行人着装、步态，或者通过提供一幅样片来发起搜索。视频检索系统，首先通过高效的解码器将未解码的视频数据解码，然后通过背景建模算法分离提取出运动的目标，而后通过智能分析算法对这些运动目标的被关注特征进行提取和分析，将分析结果恰当描述，存放到数据库，与被请求搜索的特征进行比对，最后，高相关度的目标会以快照或其他方式作为结果显示出来，并可以快速定位到原始视频片段。

还有些厂商将一些运动目标的基本特征，例如目标类别、颜色、速度等信息在视频录制时就实时进行了分析，并通过这些特征对视频内容进行索引，存放在自己的设备中。这样，在需要进行特征检索的时候，只需要将用户提供的特征与视频内容的索引信息进行比对就可以定位到相关视频片段，而不需要对视频再次进行处理分析，可以有效节省分析时间。但目前不同厂商的视频内容索引和描述的标准都不尽相同，这样就会产生不同厂商之间的系统的对接和视频内容索引的共享问题，无法充分发挥系统的作用。MPEG-7标准化了对音视频特征的描述，对该问题给出了解决的指导方向，还需要针对安防视频数据的特点进一步规范和标准化。

目前我国正在应用的视频检索系统，还只能对目标的一些基本的特征进行索引和检索，当下的视频检索系统并不能完成“找到一个拿着iPhone6的女孩”这样的任务，因为受到分辨率、清晰度和视频角度等多重因素的影响，我们无法分辨出手机的型号，甚至我们不知道目标手上到底有没有东西;我们甚至无法判断这个目标是个男孩还是女孩，因为这个流行因素快速变化的时代。一些影视作品里所表现出的令人感叹的智能分析效果，只能是为研究者提供一些研究思路和方向。除了能对前文提到的一些目标基本特征外进行检索外，目前我们能做到的是对车量牌照信息的检索，这得益于车牌识别相关技术的成熟和智能交通系统的建设。对于像人脸识别这样的任务，对于一般的监控视频，即便是高清卡口，也很难做到较高的准确率，还是要结合人工比对才能真正发挥作用，人眼可以准确分辨和识别的目标，视频检索系统却不一定能做到，达到人眼的分辨能力，那毕竟是目前机器视觉领域的最高境界和终极目标，还有相当长的路要走。看到有些产品的隐性宣传中表示，视频中的嫌疑人换了衣服，戴了帽子，更换交通工具，检索系统还能准确检索到目标，恕笔者孤陋寡闻，实在是深表怀疑。

我们介绍一个真实的案例，这也是目前视频检索技术在我国安防领域最常规的应用模式。2013年4月，某地发生重大蒙面抢劫案件，经过专案组人员分析，认为是一起精心准备和预谋的案件，嫌疑人可能会事先多次勘察过犯罪现场。为了尽快破案，当地公安局图侦大队调取了案发现场周边一周的各类监控录像，包括交通监控录像、治安监控录像和附近店铺的自有监控录像，总时长超过2000小时，希望能从中找出可疑目标，提供破案线索。按传统的方式，几名警官同时查看视频，也需要几天的时间，通过视频浓缩技术，一名警官数小时内就能排查完视频中的可疑人员或车辆，同时，同一名刑侦人员完成排查也可以对画面中可疑人员的重复出现率更加敏感，即节省了排查时间，又降低了遗漏的概率。当过滤出可疑车辆时，通过车牌识别信息，在系统中形成车辆的行驶轨迹，给布控方案提供参考，通过车辆的行动规律，定位到了车辆长时间停留的区域，可能是嫌疑人的暂住地，再调用该区域周边的视频进行摘要排查，结合案发现场的可疑目标比对，最终锁定了嫌疑人员。

大数据时代——视频检索技术的机遇与挑战

安防基础设施的建设规模在不断地扩大，实时数据的规模已经达到PB的量级，同时来自消费领域的视频数据也在为安防提供着数据支持，每个人手中的手机都可能向公安平台上传图像信息，提供案件线索，要从这些海量的信息里快速高效地筛选有效信息，视频检索技术需要向两个方向来进行提升：首先需要提升对视频数据的处理能力和效率，要满足在海量数据级别上更准确和快速地处理数据，提取和描述信息的内容，并进行高效的索引和存储，以满足后续的数据信息检索、分析和挖掘业务。其次，需要从架构的层面上有针对性地改进目前的数据处理技术和存储架构，引入针对大数据业务的新技术，以满足大数据环境下的安防数据信息的检索需求。

目前安防领域的视频数据的分布方式还主要是分散独立地存储在各级机构的服务器上，视频检索的应用也主要是由某个独立的服务器在执行，随着数据量的急速地膨胀，这种方式必将在不久的将来遇到数据移动和计算能力的瓶颈。大数据相关的云计算、云存储技术应用到安防的视频检索业务，即能解决数据搬移的问题，又充分发挥了分布式计算的优势，发掘出充分的计算能力。

在安防领域大数据和视频检索技术实际是在相互促进发展，视频检索技术的为大数据的有效应用提供了技术支撑，大数据也倒逼着视频检索技术的效率、准确度和覆盖面的提高，这两种技术将在相互的磨合中逐步完成提升和统一。