安防中常用的视频运动目标的检测与识别方法

更新时间:2023-05-08
        随着视频监控系统在现代社会中的广泛应用,大量前端视频釆集设备的应用产生了海量的监控视频信息,传统的人工处理方式巳经无法满足大规模视频监控应用的需求,许多视频信息无法得到及时、高效的处理,因而大规模视频监控应用亟待智能视频图像信息处理技术的支撑。在诸多智能视频图像信息处理技术中,目标的检测识别是其中最基本也是最重要的技术,首先对不同的运动物体进行正确地检测识别和分类,才能使后续的行为理解和异常行为报警等功能更加具有针对性。
        目标的检测识别是指将某一个或多个特殊目标从其他目标中区分出来的过程,这其中既包括两个相似度较高的目标的检测识别,也包括一种类型的目标同其他类型目标的检测识别,该技术可应用到军事监视、海底探测、动物追踪、人脸识别等。
目标特征的形态具有多样性,如人体的非刚性,颜色的多样性等,加上遮挡、阴影等干扰,都会造成目标检测的高难度和较差稳定性。因此,稳健而高识别率的目标检测与识别,是极其重要的一个研究课题。
        根据摄像机与目标背景之间是否存在相对运动,目标检测识别算法可以分为两类:静止背景的目标检测识别与运动背景的目标检测识别,其中,静止背景的目标检测识别是运动背景的目标检测识别的基础。由于背景与摄像机之间位置保持相对不变,那么背景图像的大小和位置在不同图像序列中将保持不变。而常用的运动背景的目标检测识别的方法主要有背景差法、帧间差法和光流法,下面将分节论述。

1. 背景差法

1.背景差法的基本原理

        在计算机视觉领域中,图像可以用灰度来表示,灰度是指黑白图像中像素点的颜色深度,其取值范围一般为0〜255。背景差法正是利用了安防视频监控系统中图像的运动目标的灰度值和背景的灰度值差别较大的特性,对存在运动目标的区域内图像选择一个适当的阈值T,当差值图像某点的灰度值小于T时,认为背景点;反之,则认为运动目标点。
        背景差法的原理,如图7-12所示,由图可知,背景差法主要涉及背景提取、背景更新和阈值选取三个问题。在实际应用中,还要考虑运动目标的阴影和背景变化等因素的影响。
图7-12背景差法的原理

2.背景差法的算法推导

        在图像序列中,固定像素点的灰度值,通常在某一稳定值上下进行小幅振荡,当有某一位置有运动目标岀现时,在该位置的像素会有较大幅度的变化。
       利用视频图像序列灰度值变化的特征来提取背景图像,可采取的步骤如下。 
       (1)读入图像的N帧图像序列,对这些图像序列中每个对应的像素点取平均值,得到平均图像即为背景,完成初始化。
       (2)用当前帧和背景做差,通过比较各像素差值与固定的阈值来判断哪些像素属于前景(即目标),哪些像素属于背景。
其计算公式为
       式中,fi为第i帧视频图像;B为提取的背景图像;T是灰度阈值;Gi为二值化后的差值图像。阈值T的选择,对最后的识别效果影响非常大,其选取原则是既可以将背景噪声和运动目标引起的变化分开,又能够消除噪声带来的影响。
        由式(7-14)中可知,背景差法需要一个合适的背景图像3来与当前图像做差。由于光线、温度、湿度等外部环境的影响,其背景是在缓慢变化的,但是在一段时间内可以认为是不变化的。背景图像的获取及更新对背景差法的最终效果会产生较大影响,因而在背景差法中不仅需要准确获得背景图像,还要在适当的时候对其进行更新,否则会导致很多识别误差。例如,一个进入监控区域的静止物体会被认为运动目标;一个离开监控区域的物体会会在以前停留的地方留下一个空洞,进而会被认为一个新的目标。

3.背景差法优缺点分析

        背景差法的优点是,原理简单、算法复杂度低、容易实现,而且能够得到较为完整的运动目标信息,因此在运动目标识别图像分析上应用很广泛,是常用算法之一。
        背景差法的缺点是,该方法过于依赖背景图像、而背景图像易受各种外部因素影响发生渐变或者突变,需要进行及时的背景更新,否则会影响最终目标识别的实时性。此外,该算法需要人为设定阈值,依赖具体应用而缺乏统一尺度。

2. 帧间差法

1.帧间差法基本原理

       帧间差法又称为序列差分法或相邻帧差分法,其原理与背景差法原理类似,只是将背景差法中的背景图像换成前一帧图像。其基本的工作原理是,在静止背景的目标识别中,相邻两个图像帧之间的背景区域基本不变,做差后基本可以相互抵消;但当某一图像帧的某区域出现运动目标时,则两帧在运动目标出现区域就会有较明显的差别。与前述的背景差法类似,帧间差法通过做差求出两帧的差分图像之后,再对差分图像按一定的规则进行二值化,得到二值化图像,最后通过对星值化图像进行分析并设置一个合适的灰度阈值"就可以判断出目标的区域。其具体过程如图7-13所示。
图7-13   帧间差法的原理
        帧间差法比背景差法应用范围要广,也不需要背景更新,而且很适用于存在多个运动目标和摄像机移动的情况。

2.帧间差法算法推导

帧间差法可以选择与前k帧做差分,设差分图像为D,则
式中,In和In-k别代表当前帧和前k帧图像,这里k是预先设定的差帧间隔。如果图像序列中目标运动缓慢,则可将间隔k设置较大;反之,则将间隔K设置较小,当K=1时,退化成相邻帧差法。
        对差分图像D,按下式进行二值化,即
当差值大于7时,认为是运动目标;反之,

3.帧间差法优缺点分析

        由于差分的对象为相邻或间隔不远的两帧,帧间差法最大的优点是,对背景变化不敏感,当背景部分往往变化不大时,差分运算时,能相互抵消。同时,由于只依赖于邻近的几个图像帧,稳定性也较好,对环境变化适应性很强,在外部环境变化剧烈的情况下,仍然能够取得很好的效果。
       然而帧间差法的缺点是,只能提取目标的边界,而不能对运动目标的完整区域进行提取,且帧间间隔的k选取,也对目标识别的结果影响较大。

3. 光流法

1.光流法基本原理

       光流法是一种利用图像的连续变化识别出目标的方法。人眼之所以能够看到物体运动,是因为经物体反射的光线,可以在人眼的视网膜上形成不断变化的、连续的图像,就像水一样流过人眼的视网膜,因而直观上可以将这理解为一种由光线形成的流,故称为光流。这种光流包含了运动目标的信息,反映了图像的变化过程,因此可以从光流中来寻找运动目标。
         由于图像中每个像素点的灰度值,都可能不停地发生变化,如果将这个变化的速率定义成光流矢量,整帧图像的光流矢量就形成了一个光流场。当图像中不存在运动目标时,光流场在整帧图像中变化是连续的;当图像中出现运动目标时,运动目标和图像背景之间,就会存在相对运动。这样,运动目标所形成的光流场和图像背景形成的光流场就存在差别,据此就可以得到运动目标的区域和位置信息。
光流法基本原理如图7-14所示。
—卄当[帧|~光流场I二值化一
图7-14    光流法的基本原理
2.光流法算法推导
       设函数G(x,j,t)是像素点(xy)在时刻t的灰度值,设t+dt时刻该像素点运动到(x+dx,y+Ay),它的灰度值为G(x+dx,i+djV+df)。对于同一个像素点来说,在很小的时间间隔内,其灰度值可近似为没有发生变化,因此得出光流约束方程为
G(x,y,t)=G(x+dx,y+-dy,f+dt)                                (7-17)
将式(7-17)右边做泰勒展开,并使由>0,可得到等式
Gxm+Gyn+Gt=0                                               (7-18)
式中,Gx=dG/dx,Gy=dG/dy,G(=dG/dt,m=dx/dt,n=dy/dt.
       上面的Gx、Gy、Gt可以用离散的差分来代替,然后可以根据光流约束方程求出m和n。假设摄像机固定,图像可分为运动的目标区域和静止的背景区域。静止的背景区域在理想情况下,其光流为0,只有运动的目标区域才有光流。因此,可求出光流梯度方向的速率,即
根据光流约束方程推导岀的光流速率表达式为
再设定一个阈值T把光流速率进行二值化,有
        当Oi为1时,当前像素点属于运动目标区域,反之,则属于背景区域。从而在得到所有像素点信息后,就可以得到完整的运动目标区域。'

3.光流法优缺点分析

        光流法的优点是,无须了解场景的信息,就可以准确地检测识别运动目标位置,且在摄像机处于运动的情况下仍然适用。
        光流法的缺点主要体现在,计算量大,耗时长,在对实时性要求苛刻的情况下并不适用;由于变化的光线会被错误地识别为光流,因此该方法对光线敏感,从而会影响到识别效果

下一篇

智能化弱电工程学习资料免费送

弱电工程

智能化弱电工程学习资料免费送

本次主要对智能化弱电工程资料文章及目录进行重新分类定义,涉及到“报警、公共广播、可视对讲、门禁、综合布线、无线覆盖、数字电视、楼宇自控“等常见系统施工报价的内容,非常全面,是做弱电智能化项目非常实用的资料,可以直接参考,省时省力。 ...

相关内容

可视电话的安防功能有哪些?

可视电话的安防功能有哪些?

可视电话是一种集图像和语音于一体的多媒体通信工具,通过实时传输音频和视频信号,实......

通信百科

2024-12-13

智能化应急指挥项目中使用的网关

智能化应急指挥项目中使用的网关

应急指挥项目中通常需要集成大量的音视频设备。特别是基于融合通信构建的应急指挥平台......

通信系统集成

2024-04-02

好用的外呼系统app

好用的外呼系统app

随着企业的发展,外呼已经成为了企业营销的重要手段之一。而如今,随着科技的不断发展......

通信系统集成

2023-09-25