如何让安防大数据摆脱好事多磨的窘境
对任何一个新事物来说,它在出现和发展过程中都不可能是一帆风顺的,安防大数据在其成长路上又在经历着哪些“磨难”的考验呢?
数据共享问题
目前安防行业内各系统以及各领域之间比较孤立,数据与数据之间并没有互通,从而形成了一个个数据孤岛,这导致各个系统按照大数据的方式使用起来比较困难。他认为,如果利用云存储技术对大数据进行统一管理,把视频与存储进行分离并做成一个通用的共享层,对安防大数据来说将不失为一大进步。
筛选有效数据问题
众所周知,以视频监控数据为主的安防拥有着海量的数据,然而,在这海量的数据中,可利用的、有价值的数据却是少之又少的,如何在海量数据中高效地筛选出有效数据便成为一个非常困难的问题。如何在大数据中快速高效地筛选有效信息正是目前安防大数据技术发展的问题所在。他认为,安防的数据量大,且传统的安防多是事后查证,于是把所有有用无用的数据全存储下来,其造成检索查找不便。众多厂商都在致力于探索如何从安防大数据中提取有价值的数据信息。
大数据的最终目标是尽可能快速地利用各种数据来做出最好的决策。当前需要高效筛选安防数据,依然需要对安防监控关注的业务对象进行人工监督的建模,基于业务对象建模反向指导数据采集汇聚与分析。当前有两种决策分析模型,一种是基于假设的模型,要关注哪些高价值数据,关注相关领域的数据,关注那些能够提升效率的数据;另一种模型就是一种不是基于假设的模型,是一种机器学习(如神经网络算法等)的模型,大数据带来的变化是分析必须减少对于固有数据的依赖,分析模型将能够根据数据流中的动态数据自适应。这种模型跟假设模型完全不同,两种模型暂时无法相互替代。从长期来看,一定会有更多的数据需要我们去关注。对安防大数据来说,它能够不断增加安防监控量,帮助我们基于数据做出更合理的决策,这是它的优势。他认为,经过长时间数据和技术的发展,机器学习方式可能会取代假设模型。
安防厂商想要在大数据中快速高效地筛选出有效信息,需要两个基础来保证:于非结构化信息的分析、识别和提取等处理要准确和高效;对大量结构化信息,或者半结构化信息的综合搜索要准确和快速。因此,安防厂商首先需要提升对非结构化信息的处理能力和效率,准确和快速地处理视频图像、人脸特征建模等数据,从里面提取出有用的信息,并且能够进行信息的某种表述,在大数据的存储层面上完成数据信息的提取和存储工作,以便进行后续的数据信息检索,分析和挖掘业务。其次,通过使用并且针对性地改进目前的大数据处理技术以及平台框架,提供针对安防数据信息的快速检索机制,形成有针对性的海量安防数据信息处理架构,从这些大量的结构化和半结构化信息中进行快速检索和分析。
智能分析困难
在安防大数据中,如何对海量数据进行智能分析是关键。现阶段,如何平衡网络带宽承载、降低系统存储成本则成为处理海量数据的前提性要求。在实际应用中,视频图像的分析处理需求日益增加,如车牌识别、人脸识别等,对图像质量提出了更高的要求,也对芯片的解码能力提出了更大的挑战。解决方案不单单是一个芯片就可以完成的,它是一个完整的架构。
目前,数据分析往往在数据中心执行,市场缺少一个端到端的计算架构,使不同摄像设备的关键信息被快速关联起来,从而迅速、及时地进行分析。如何有效提取高质量的视频信息以及实现更高效的数据中心智能搜索和分析正在成为业界的重要诉求。而在前端设备中使用更高性能、整合了GPU(图形处理单元)的CPU(中央处理器)的芯片,通过相应的开发工具使GPU和CPU的能力得到充分利用,可使前端视频的解析更有效率;同时,在后端使用对于开源或其它Apache Hadoop商用版(如Cloundera)深度优化的至强系列服务器集群,可以合理地分配系统整体的计算资源,使图像视频处理及智能分析得以高效实现。
安防系统性能问题
安防大数据以视频数据为主,然而视频数据则对带宽有着很高的要求,海量视频数据的快速调取对高分辨率视频数据的处理能力也有着很高的要求。目前安防行业对图像信息的分析处理过程中,应用的性能瓶颈虽然会出现在计算层面,但对于大容量的数据上传而言,下载和调度也是一个重要的瓶颈。
数据安全问题
在IT行业中,数据安全问题很是令人担忧的,这个问题在安防行业内同样不容忽视。大华王海丰认为数据安全问题主要分为三个方面:数据丢失、数据篡改以及数据泄露。针对这些问题,除了可采用多副本存储、算法容错技术之外,还可采用视频水印及进行信道加密、存储加密、数据加密技术等。
对于安防领域而言,数据量大,图像信息蕴含的信息量更多,且还涉及到个人隐私,公共安全等问题。所以,在系统安全方面更不容忽视。在安防领域,由于其公共安全的特性,除一般的如采用信息加密、传输加密、数据冗余、安全账号控制、系统安全检测、入侵检测等信息数据安全措施外,更需要一些特殊保护措施。如从法规层面的保护,即涉及个人隐私和公共安全视频信息的使用和控制,要加强对重点领域敏感数据的监管,特别是在公安和政府层面,需要明确重点领域数据内容和范围,制定完善的重点领域数据库管理和安全操作制度,加强日常对信息数据监管。另外,还需要规划信息敏感域,做好本域的信息隔离和保护工作,如使用安全边界接入平台等方式,切断直接的数据通讯链接,减少甚至避免受攻击的情况。实际上,数据安全问题的解决,并不是靠一个人,一个企业或者一个行业就能彻底解决的,而是需要整个社会,各行各业的共同努力。
征稿:
为了更好的发挥CPS中安网资讯平台价值,促进诸位自身发展以及业务拓展,更好地为企业及个人提供服务,中安网诚征各类稿件,欢迎有实力安防企业、机构、研究员、行业分析师。投稿邮箱: cps-tougao@cps.com.cn(查看征稿详细)