浅谈大数据和视频检索技术
【CPS中安网 cps.com.cn】近年来,大数据一词越来越多地被提及与使用,其含义是广泛的,涉及到各行业,我们正处在一个数据爆炸性增长的“大数据”时代,大数据对社会经济、政治、文化,人们生活等方面产生深远的影响,大数据对人类的数据驾驭能力提出了新的挑战与机遇。人们用大数据来描述和定义信息爆炸时代产生的海量数据。这些数据包括:移动互联、社交网络、电子商务、科学计算等等。其中视频又是构成大数据最大的一部分。
大数据的产生
根据相关机构的调查显示,全球监控摄像机市场在未来五年内将保持稳步增长,到2017年预计将上升到1亿台。仅视频监控录像而言,每天的数据量就达上千PB,累计的历史数据将更为庞大,由此也可以看出,监控视频在大数据体系中占有极大地位置。如今随着4K时代的到来,更高清的应用越来越普及,由此产生的数据将会越来越大,视频监控也将步入更高清的大数据井喷时代。
大数据技术之视频检索
“大数据或称巨量数据、海量数据、大资料,指的是所涉及的数据量规模巨大到无法通过人工,在合理时间内达到截取、管理、处理、并整理成为人类所能解读的信息。”维基百科对大数据的定义将大数据的特点阐释得非常清晰:“海量”和“非结构化”。这两个特点在视频监控行业尤为突出,如何在“海量”和“非结构化”的监控视频数据中快速找到对人们有用的信息变的尤为重要。
正是基于上述思考,视频检索技术应运而生。视频检索主要是依赖于视频算法对视频进行预处理,通过对视频内容进行结构化处理,提取出视频内容中的有效信息,进行标记或者相关处理后,人后可以通过各种属性描述进行快速检索。因此视频检索最主要的是利用视频检测算法对视频进行结构化描述,目前已经在相应的产品中得到应用的算法主要有以下几种:行为分析算法、车牌识别算法、车辆颜色识别算法、车标识别算法、车型识别算法、人脸检测识别算法、人体特征识别算法等。其中人体特征识别又包括人的年龄、性别、身高、衣服颜色、是否戴眼镜等特征信息的识别。视频检索技术在安防领域的重要作用是毋庸置疑的,其可以快速地从海量的数以万计的监控录像中,找到有用的关键信息,将为视频监控带来革命性的影响。
在视频检索技术出现之前,海量视频的分析一直是困扰人们的一个难题。据南方都市报报道,一个也门商人在广州打的丢行李,广州交通委花了两天的时间才从海量的出租车GPS信息和交通监控视频找到丢失的行李。面对如此多的监控数据,去寻找到证据和线索,无异于大海捞针,但目前的现实情况通常是被迫使用人海战术进行查看。一个案件的审看需要更为广泛的查看相关的摄像机视频,所审看的视频量时常达到数百上千小时。在目前的人工查看模式下,传统的方法需要从头到尾顺序播放,往往需要数倍于原始视频的时间才能审看完成,因此需要大量人员审看。为了规避遗漏和误差,很多刑侦队采用加大人力投入的方法,但是这种办法既影响了破案进度和效率,又使得工作人员疲惫不堪。如果有视频检索技术对视频中运动的物体等进行检索和排除,就能比较大的提高办案效率。
虽然视频检索技术在实际应用过程中,可以快速地从海量监控录像中找到一些有明显特征的人或物,但是技术所限,传统的检索方式显得比较单一,检索方式不够“智能”,这已经成为大型监控系统视频资料分析中的一个瓶颈。随着视频检索技术的不断发展,国家、企事业单位人力物力的大量投入,比如杭州海康威视数字技术股份有限公司着力于此应用的研发,并开发出视频检索系统,系统采用海康威视自主高效智能分析算法技术,保证分析信息的全面和准确,同时系统采用集群化计算方式,可提供几十上百倍实时以上的快速分析能力,并可根据应用需要进行线性扩展,提高计算能力。
本系统在视频资料录入的同时,就自动对视频中的目标信息进行格式归一化与智能预处理分析,对视频进行快速处理,提取视频中目标的相关信息作为智能元数据保存至数据库中。之后的相关操作,如智能审看、智能检索等等就不用再做复杂的解码以及智能分析的工作,而是直接从智能元数据中提取,大大的提高了工作效率。根据智能元数据信息,可对目标及目标细化特征等视频内容级别进行筛选,如颜色、人/车分类等。用户还可根据案情的需要自定义设置不同的周界防范规则,通过在数据库中对元数据进行检索提取触发规则的目标信息,达到快速检索的目的,极大地提高了效率。系统可以帮助刑侦人员高效、精准地聚焦到所关注的目标,有效解决目前视频众多、信息量巨大等视频查找的棘手问题,使通过视频调查取证不再费时和繁琐,提高办案民警的工作效率,达到科技强警的目的,符合公安部对于公安信息化建设的要求。 
大数据技术的延伸
大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有丰富内容和意义的数据进行专业化处理。换言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于如何让数据会“说话”。如何将海量的数据落地,广泛的应用于商业趋势分析、打击犯罪或测定实时交通路况等,这些贴近民生的应用正是“大数据”盛行的本质。在大数据的发展趋势下,对海量视频监控数据的存储和管理是当下各大厂商积极探索的命题之一。围绕大数据的命题,经过采集后的视频数据通过创建数据仓库,结构化处理,进行数据的分析和挖掘,最终进行可视化的呈现,就是大数据的衍变过程。虽然基于视频分析的技术还有其局限性,但是我们也看得到视频分析技术的前景,正是有此期望,企事业单位加大人员投入,将更多的计算机技术应用于视频分析,比如视频摘要技术,视频摘要形成视频片断,不同时刻的目标“穿越时空”同时展现播放,使24小时的视频被制作成一个简短到几分钟摘要视频成为现实。视频摘要不仅浓缩的是事件的精华,也是活动事件的全部,没有价值的视频将被剔除。通过多分格快照技术,可以在几秒中看完所有的活动目标成为可能,回溯原始视频功能,瞬间锁定目标在原始视频中的位置。这些智能视频分析功能的实现和应用将大大提高海量视频监控录像分析的效率。
结束语
虽然,目前海量搜索视频信息对相关工作人员来说是件让人感觉苦楚的事情,但是智能视频检索技术的引入可以极大的提升原有海量监控视频存储系统的检索效率和命中率。随着安防高清化、智能化的发展,智能视频检索技术的运用会逐渐大众化。但是限于目前智能视频分析技术的现状,这一方案中还存在一些技术风险。虽然可以借助一些概率方法,引入类似“相似度”的概念来缓解“漏检”的风险,这一方案的离最终的用户要求还有一段距离。然而,从另一个角度看“距离产生美”,技术之所以引人入胜,很大程度上就是因为“距离”的存在。有理由相信,随着行业的快速发展,在海量监控视频存储系统上,引入智能视频检索技术将成为一种趋势。到那时,再也不会出现花费许多天的时间、许多的人力去海量搜寻一辆的士信息的情况了。
【作者单位:杭州海康威视系统技术有限公司】
声明:
凡文章来源标注为"CPS中安网"的文章版权均为本站所有,如需转载请务必注明出处为"CPS中安网",违反者本网将追究相关法律责任。非本网作品均来自互联网,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。
相关阅读
征稿:
为了更好的发挥CPS中安网资讯平台价值,促进诸位自身发展以及业务拓展,更好地为企业及个人提供服务,中安网诚征各类稿件,欢迎有实力安防企业、机构、研究员、行业分析师。投稿邮箱: tougao@cps.com.cn(查看征稿详细)