业界动态
智能视频检索算法
2024-11-10 18:04

能视频检索依赖于视频算法对视频内容进行分析,通过提取视频中关键信息,进行标记或者相关处理,并形成相应事件和告警的监控方式,人们可以通过各种属性描述进行快速检索。如果把摄像机看作人的眼睛,而智能视频监控系统可以理解为人的大脑。智能视频技术借助处理器的强大计算功能,对视频画面中的海量数据进行高速分析,获取人们需要的信息;

智能视频检索算法

 

      帧差可说是最简单的一种背景模型,指定视频中的一幅图像为背景,用当前帧与背景进行比较,根据需要过滤较小的差异,得到的结果就是前景了。

   背景统计模型是:对一段时间的背景进行统计,然后计算其统计数据(例如平均值、平均差分、标准差、均值漂移值等等),将统计数据作为背景的方法。

 编码本的基本思路是这样的:针对每个像素在时间轴上的变动,建立多个(或者一个)包容近期所有变化的Box(变动范围);在检测时,用当前像素与Box去比较,如果当前像素落在任何Box的范围内,则为背景。

混合高斯背景建模是背景建模比较成功的一种。

为什么这么说呢? 机器视觉算法提取运动目标面临的基本问题:图像抖动,噪声干扰,光线变化,云飘动,阴影(包括目标阴影和区域外物体阴影),区域内部反光(如水面,显示器),运动目标缓慢移动等。那我们来看看,混合高斯背景建模是怎么解决这些问题的?

 

 

通过背景建模与前景提取,把视频帧中的目标对象提取了出来,不过提取得到的是所有非背景对象,也就是是混合的,可能包含很多人、车、动物等对象,最终以图搜图检索所要对比的是当个对象与搜索目标的相似性,这里就需要通过目标检测与跟踪把这些混合的对象分离开来分别处理;

在目标检测方面,所了解到的算法有贝叶斯方法、卡尔曼滤波器、粒子滤波器几种,他们之间的关系如下:

贝叶斯方法利用已知的信息建立系统的概率密度函数可以得到对系统状态估计的最优解。

对于线性高斯的估计问题,期望的概率密度函数仍是高斯分布,它的分布特性可用均值和方差来描述,卡尔曼滤波器很好地解决了这类估计问题。

粒子(particle)滤波器——序列重要性采样粒子滤波器,是一种适用于强非线性、无高斯约束的基于模拟的统计滤波器。

综合上,粒子滤波的效果要更好;

 

光照处理:同一个物体,在不同光照下的视觉效果是不同的,所对应的数据也是不同的,所以,为了提高分析准确性,召回率,需要对目标对象做光照处理;光照处理方面,业界比较流行的算法是本征图像分解法;

照相机所获得的图像中的每个像素点值所具有的属性所表示的信息中最为重要的是亮度(shading)和反照率(reflectance)这两种。其中亮度对应环境中的光照信息,反照率对应于物体的材质信息,即物体对光照的反射特性,反照率主要表现为物体的颜色信息。本征图像求解问题就是从图像出发,恢复所有像素点对应的场景中的亮度和反照率信息,分别形成亮度本征图和反照率本征图

本征图像分解可以表述为I(x,y) = L(x,y)R(x,y),其中I(x,y)表示输入图像, R(x,y)表示反照率图像, L(x,y)表示亮度图像。因为在对数域中,乘法被转换成了更加易于计算的加法,因此我们在图像的对数域中进行计算,记 /(X,y) = log(I(x, y)) , r0,y) = log(R(x,少)),l(x,y) = log(L(x,y))。如此原来的乘法关系被转化为:i(x,y,t) = r(x,y) + l(x,y,t)。

安防监控所采集的视频数据量非常大,如果对视频的每一帧都进行特征提取、建立高维索引、检索,那么在视频分析和检索方面的时间开销将非常大,所以第一步,要先对视频流进行关键帧提取,只对关键帧进行特征提取、建立高维索引、检索的操作,大幅度缩短计算量;

视频关键帧提取是指按照一定的规则提取能够代表原视频内容的帧,该技术能够去除视频数据中大部分冗余信息,仅保留视频数据有用的部分;关键帧提取是后续特征提取。索引建立的前提,算法的优劣会直接影响整个视频分析的准确率和性能;

关键帧提取的方法

关键帧提取方法主要分为两类:基于全图像序列的方法和基于压缩视频的方法;  

目前大多数关键帧的提取研究是基于全图像视频分析的.具体实现方法的区别主要在于检测方法的应用、特征的选择以及帧图像子块的划分。主要可以分为以下几类:

该方法将视频流分割成很多的镜头,把镜头中的第一帧和最后一帧以及中间几帧作为关键帧。该方法简单易行,适于内容活动性小或内容保持不变的镜头。但未考虑镜头视觉内容的复杂性:限制了镜头关键帧的个数:提取的关键帧代表性不强,效果不够稳定。

该方法基于每一帧的颜色、纹理等视觉信息的改变来提取关键帧。比较经典的方法是帧平均法和直方图平均法。帧平均法是在镜头中计算所有帧在某个位置上像素值的平均值.然后将镜头中该点位置的像素值最接近平均值的帧作为关键帧;直方图平均法是将镜头中所有帧的统计直方图取平均.然后选取与该平均直方图最接近的帧作为关键帧。

此方法是根据运动信息提取关键帧.代表算法是Wolf提出的运动极小值算法 Wolf通过光流分析来计算镜头中的运动量.在运动量取局部最小值处选取关键帧。

该方法是目前关键帧提取的主流技术.其基本思想是:首先确定一个初始类心.然后根据当前帧与类心的距离来判断当前帧是归为该类还是作为新的类心.将镜头中帧分类后.取各类中离类心距离最近的帧作为关键帧。

上述方法都是基于全图像序列的,即在提取关键帧之前.对视频进行解压,还原成帧图像。运算量大。基于压缩域的方法是直接从MPEG压缩视频流上提取关键帧.无需对视频流解压或只需部分解压,降低了计算的复杂性。

 

     业界比较常用的是基于聚类的方法和基于压缩域的方法进行关键帧提取;

 

     关键帧提取完成后,就需要对提取到的关键帧进行特征提取操作,主要是颜色特征、纹理特征、形状特征等几个角度;特征提取完成后,会对目标特征建立高维索引,来提高检索速度,最后通过对索引进行检索来搜索目标图像,返回搜索结果;

    以上就是本篇文章【智能视频检索算法】的全部内容了,欢迎阅览 ! 文章地址:http://sjzytwl.xhstdz.com/news/4386.html 
     资讯      企业新闻      行情      企业黄页      同类资讯      首页      网站地图      返回首页 物流园资讯移动站 http://mip.xhstdz.com/ , 查看更多   
最新新闻
剑仙的文案短句唯美干净,名句说说汇总
剑仙的文案短句唯美干净,名句说说汇总剑仙一个承载着武侠世界无尽浪漫与想象的名字。在无数武侠小说和影视作品中剑仙们以剑为伴
京东11.11发布六大消费热词,京东汉服成交额同比增长超100%
消费热词反映着市场的动态与风向,也是人们生活方式和生活理念变化的直观体现。在京东11.11开启之际,京东消费及产业发展研究院
为什么很多人想当心理咨询师,却很少人真的干这行?
M:“飞哥,年后我打算放弃做心理咨询师了。”W:“噢?你有什么打算呢?”M:“我可能去做销售吧...”W:“为什么会有这个选择
抖音再战搜索引擎,试图颠覆传统搜索格局?
抖音又有新动作了。近日,抖音悄悄在安卓应用市场上线了一款搜索引擎软件,名为“抖音搜索”。抖音开发独立搜索应用软件的举措并
上海百度爱采购代理商上海企顶顶公司解读百度爱采购开户入驻流程
上海百度爱采购代理商上海企顶顶网络技术有限公司近期接到很多用户想了解百度爱采购开户入驻流程,今天网络营销实战专家梁水才老
10月语言学联合书单|老龄化与老年语言学
  《基于认知形态学的汉语类词缀构词研究》  张未然著,北京大学出版社  赵青青著,北京大学出版社  通感(linguistic s
NLP-语料库:语料库资源介绍
国内可用免费语料库(凡没有标注不可用的链接均可用) (一) 国家语委 1.国家语委现代汉语语料库http://www.cncorpus
“买家秀”沦为“生意场”,寄拍平台借机设陷阱
  “买家秀”沦为“生意场”,寄拍平台借机设陷阱  阅读提示  部分商家想要依靠“买家秀”来吸引更多人购买,从而衍生出生
名医堂 | 成都市第七人民医院郭靓:健康管理中心从“0”到“1”,团队、责任感和自信是关键!
您的浏览器不支持此视频格式封面新闻记者 曾亚 实习生 郑嘉雯“我们是成都市征兵体检以及高考体检的定点单位,承担了成都市主城
如何在百度免费打广告——以苹果手机为例
本文目录导读:优化百度搜索引擎排名利用百度贴吧进行推广利用百度知道进行推广利用百度文库进行推广在当今数字化的时代,广告已
本企业新闻