佳都新太

海量视频回放太久 视频摘要检索只争分秒

2013-01-17 13:49:22   作者:佳都新太 开发中心解决方案部   来源:CTI论坛   评论:0 点击:


  众所周知,一篇完整的论文都要求写随文摘要,摘要是提供论文内容梗概为目的,它可以让读者尽快了解论文的主要内容。视频摘要的概念源自文本摘要,指从原始视频中提取精华信息,把若干小时视频浓缩为十几分钟甚至更少,大幅度缩短视频查看的时间。通过采用视频目标特征检索技术,克服视频底层特征与人类思维所能理解的高层语义的鸿沟,迅速寻找到感兴趣的目标。视频摘要与检索充分挖掘海量视频监控录像中的宝藏,大大提高海量监控视频录像分析的效率。

  海量视频调阅检索

  面临着巨大的挑战,人工查找线索犹如大海捞针一般来说,视频录像中的很多重要的线索或活动对象,在监控画面中仅仅出现十几秒甚至数秒,而这样的信息散落在数十小时的视频中,人工查看极易遗漏这些转瞬即逝的重要信息。据IMF研究实验表明,连续观察12分钟的视频图像,观察者会错过45%的场景,而在连续观察22分钟后会错过95%的场景,从而忽略了许多重要的信息。这使得视频录像的真正有效使用率大为降低,即使有足够的人力和时间,通过人工查看原始视频的方式来捕捉转瞬即逝的线索,也存在遗漏的可能。传统视频线索的查找,犹如大海捞针,面临巨大的挑战。面对海量视频录像调阅慢、分析难等问题,急需采用智能化的手段,快速处理和检索海量视频,提高视频监控录像分析水平和工作效率。

  佳都新太视频摘要技术

  大显身手,若干小时视频浓缩为视频摘要精华视频摘要(Video Abstraction),即对视频的结构和内容进行分析,从视频文件中提取出有意义的部分,并将它们以某种方式进行组合,形成简洁的、能够充分表现视频语义内容的概要。从时间轴上看,视频是由一系列连续的图像帧和相应音频构成的集合,集合中的基本元素是图像帧。视频数据的结构化就是对视频在时间上的层次分割,完成原始的非结构化的视频流到结构化的视频实体的转换。将原始的视频流划分为合理的结构单位后,形成视频内容的层次模型,并得到视频内容对象的相关描述。视频内容的提取采用模式识别或视频结构探测的方法,获取能够被计算机直接处理,或能够被人的感观直接感觉到的信息。此时,视频被分成背景(全静止,不活动的物体)以及前景(活动的物体),活动的物体会被提取出来,系统加以描述并插入到数据库中。通过一定的选择准则,选择前景和背景内容对象作为视频摘要的组成元素,视频内容对象以一定的方式组合起来,经过渲染后形成某种形式的视频摘要,并以可视化的形式将摘要展现出来。

  视频摘要技术具有非常实用的价值,将若干小时视频浓缩为短小精悍、信息全面的视频摘要精华,大大提高海量监控视频录像分析的效率。

\

  强大的视频特征搜索,对类似视频轻松获取

  视频数据本质上是有文本、视频、声音、图像等多种多媒体融合而成,这些媒体之间并非孤立的而是相互之间存在语义上的关联。因此,对视频检索综合分析各种媒介在视频数据中所蕴含的丰富的语义信息,才能检索到符合人们要求的视频片段。利用视频本身的底层特征,如类型、颜色、大小等进行标引,采用获取图像帧底层特征来“逼近”语义概念。

  为了快速的从海量视频数据中提取目标信息,利用基于内容的视频检索技术,跨越视频底层特征和高层语义之间的语义鸿沟,实现对安防场景中海量视频数据的主动模糊查找功能。基于内容分析的视频目标分类检索使用一种有效的运动分割方法提取运动目标,这些运动目标的基本特征(人车类别、颜色、大小等)作为元数据被提取出来并保存。利用对提取出的目标进行目标特征分析,通过监控人员的描述特征对特征库进行匹配,快速找出类似视频搜索目标,实现利用人类思维中高层语义概念来进行视频内容的处理。

  采用视频摘要技术可大幅度缩短视频监控录像倒查的时间,采用视频目标特征搜索可有效缩小视频录像的搜索范围,视频摘要与检索充分挖掘海量视频监控录像中的宝藏,大大提高海量监控视频录像分析的效率。下图为一个街道的夜景,通过视频摘要与检索,准确地输出人流和车流的摘要文件。

\

  佳都新太自主研发,拥有核心知识产权

  在智能视频监控录像分析领域,国外公司无论在算法研究还是在产品化应用方面都起步较早,但是直接运用于国内市场显然有些水土不服。相对来说,国内公司进入该领域比较晚,在分析算法的成熟度、上层应用的开发、与传统安防系统的无缝集成等方面有待进一步优化。

\


\

  佳都新太通过分析市场需求,在国内率先研究视频摘要检索技术,目前已成功研发PCI-VSRS 1008/1016以及公安侦查案件专用的PCI-VIAI 1008/1016,核心分析算法均拥有自主知识产权,且分析算法的准确性、系统的稳定性均具有较为明显的优势。PCI-VSRS兼容多种主流视频格式,适用于公安、交通、金融、监狱、大型企业等多种行业;PCI-VIAI适应于公安刑侦部门的视频调查,为公安办案人员快速寻找线索、高效的追嫌追逃提供了强而有力的技术支撑。视频摘要检索技术的成功应用,开创了海量视频录像分析的新时代——海量视频回放太久,视频摘要检索只争分秒!

相关阅读:

分享到: 收藏