Nothing Special   »   [go: up one dir, main page]

CN105072439A - 视频编码中关键帧的插入方法和装置 - Google Patents

视频编码中关键帧的插入方法和装置 Download PDF

Info

Publication number
CN105072439A
CN105072439A CN201510467670.9A CN201510467670A CN105072439A CN 105072439 A CN105072439 A CN 105072439A CN 201510467670 A CN201510467670 A CN 201510467670A CN 105072439 A CN105072439 A CN 105072439A
Authority
CN
China
Prior art keywords
frame
sum
difference
present frame
evaluating
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510467670.9A
Other languages
English (en)
Other versions
CN105072439B (zh
Inventor
陈家大
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhuhai Jieli Technology Co Ltd
Original Assignee
Zhuhai Jieli Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=54501707&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN105072439(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Zhuhai Jieli Technology Co Ltd filed Critical Zhuhai Jieli Technology Co Ltd
Priority to CN201510467670.9A priority Critical patent/CN105072439B/zh
Publication of CN105072439A publication Critical patent/CN105072439A/zh
Application granted granted Critical
Publication of CN105072439B publication Critical patent/CN105072439B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Color Television Image Signal Generators (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开一种视频编码中关键帧的插入方法和装置。所述方法包括:采集编码图像数据;计算编码图像数据中的当前帧的评价参数,进而计算当前帧的评价参数的差值和评价参数的差值的累计之和;判断当前帧的评价参数的差值或评价参数的差值的累计之和是否满足预设条件,若是,则将当前帧设为关键帧;若否,则将当前帧设为非关键帧,并返回计算所述编码图像数据中的当前帧的评价参数步骤,直至编码结束。所述装置包括数据采集模块、评价参数计算模块和关键帧设定模块。上述视频编码中关键帧的插入方法和装置,能够节省对于关键帧的评价开销。

Description

视频编码中关键帧的插入方法和装置
技术领域
本发明涉及编码技术领域,尤其涉及一种视频编码中关键帧的插入方法和装置。
背景技术
视频监控系统通常包括视频采集设备(Sensor),数字信号处理器(DSP),视频图像压缩设备(Codec)等,Sensor采集数据并将采集到的数据经DSP分析和处理后,传送给Codec进行编码,最后得到相应的视频压缩码流。在主流编码方法中,Codec通常采用Mpeg4/h.264等编码标准,这些标准需要在编码过程中动态的加入编码关键帧,以保证图像质量和编码的比特率符合要求。一般来说,当画面发生明显改变时,就需要插入关键帧从而更好的保存信息。而由于成本和运算能力的限制,嵌入式设备一般在固定间隔内插入一帧关键帧。这种做法在较静止的场景时,容易浪费码率,在画面快速变化时,容易丢失信息,导致画面质量降低。
发明内容
基于此,有必要提供一种更优的视频编码中关键帧的插入方法。
一种视频编码中关键帧的插入方法,包括以下步骤:
采集编码图像数据;
计算所述编码图像数据中的当前帧的评价参数,进而计算当前帧的所述评价参数的差值和当前帧的所述评价参数的差值的累计之和;所述当前帧的所述评价参数的差值为当前帧的所述评价参数与前一帧的所述评价参数之差;
判断当前帧的所述评价参数的差值或所述评价参数的差值的累计之和是否满足预设条件,若是,则将当前帧设为关键帧;若否,则将当前帧设为非关键帧,并返回所述计算所述编码图像数据中的当前帧的评价参数,进而计算当前帧的所述评价参数的差值和当前帧的所述评价参数的差值的累计之和步骤,直至编码结束。
在其中一个实施例中,所述评价参数包括采集所述编码图像数据的装置的曝光指数和白平衡增益。
在其中一个实施例中,通过计算公式AEL=k*F(AG)*DG*EXPTIME计算当前帧的曝光指数;
其中,AEL为曝光指数,k为预设权重系数,F(AG)为采集所述编码图像数据的装置的模拟增益的影响因子,DG为采集所述编码图像数据的装置采集当前帧时的数字增益,EXPTIME为采集所述编码图像数据的装置采集当前帧时的曝光时间;
通过以下计算公式计算当前帧的白平衡增益:
WBG=│256-G_SUM*256/R_SUM│+│256-G_SUM*256/B_SUM│
其中,WBG为白平衡增益,R_SUM为当前帧各个像素点上R通道的值的总和,G_SUM为当前帧各个像素点上G通道的值的总和,B_SUM为当前帧各个像素点上B通道的值的总和。
在其中一个实施例中,所述判断当前帧的曝光指数的差值、白平衡增益的差值、曝光指数的差值的累计之和或白平衡增益的差值的累计之和是否满足预设条件的方法为:
判断AELD(i)>AELD_MAX和
AELD_SUM>AELD_TH和
WBGD(i)>WBGD_MAX和
WBGD_SUM>WBGD_TH中是否至少一个成立,若是,则满足预设条件;
其中,i为大于等于0的整数,AELD(i)为当前帧的曝光指数的差值,AELD_SUM为从上一关键帧的下一帧开始,截止到当前帧的各帧的曝光指数的差值的累计之和,WBGD(i)为当前帧的白平衡增益的差值,WBGD_SUM为从上一关键帧的后一帧开始,截止到当前帧的各帧的白平衡增益的差值的累计之和,AELD_MAX、AELD_TH、WBGD_MAX和WBGD_TH均为预设的阈值,且
若AELD(i)>AELD_MAX和AELD_SUM>AELD_TH和WBGD(i)>WBGD_MAX和WBGD_SUM>WBGD_TH均不成立,则i加1;否则,i清零,AELD_SUM清零,WBGD_SUM清零。
在其中一个实施例中,在计算所述编码图像数据中的当前帧的评价参数,以及当前帧的所述评价参数的差值步骤之前,所述视频编码中关键帧的插入方法还包括:将所述编码图像数据的第一帧设为关键帧。
本发明还提供了一种视频编码中关键帧的插入装置,包括数据采集模块、评价参数计算模块和关键帧设定模块;
所述数据采集模块,被配置以采集编码图像数据;
所述评价参数计算模块,被配置以根据预存的计算公式计算所述编码图像数据中的当前帧的评价参数,进而计算当前帧的所述评价参数的差值和当前帧的所述评价参数的差值的累计之和;所述当前帧的所述评价参数的差值为当前帧的所述评价参数与前一帧的所述评价参数之差;
所述关键帧设定模块,被配置以判断当前帧的所述评价参数的差值或所述评价参数的差值的累计之和是否满足预设条件,若是,则将当前帧设为关键帧;若否,则将当前帧设为非关键帧,并判定所述评价参数计算模块计算出的下一帧的所述评价参数的差值或所述评价参数的差值的累计之和是否满足预设条件,直至编码结束。
在其中一个实施例中,所述评价参数包括所述数据采集模块的曝光指数和白平衡增益。
在其中一个实施例中,所述评价参数计算模块通过所述预存的计算公式中的AEL=k*F(AG)*DG*EXPTIME计算当前帧的曝光指数;
其中,AEL为曝光指数,k为预设权重系数,F(AG)为所述数据采集模块的模拟增益的影响因子,DG为所述数据采集模块采集当前帧时的数字增益,EXPTIME为所述数据采集模块采集当前帧时的曝光时间;
所述评价参数计算模块通过所述预存的计算公式中的以下计算公式计算当前帧的白平衡增益:
WBG=│256-G_SUM*256/R_SUM│+│256-G_SUM*256/B_SUM│
其中,WBG为白平衡增益,R_SUM为当前帧各个像素点上R通道的值的总和,G_SUM为当前帧各个像素点上G通道的值的总和,B_SUM为当前帧各个像素点上B通道的值的总和。
在其中一个实施例中,所述关键帧设定模块判断当前帧的曝光指数差值、白平衡增益差值、曝光指数差值的累计之和或白平衡增益差值的累计之和是否满足预设条件的方法为:
判断AELD(i)>AELD_MAX和
AELD_SUM>AELD_TH和
WBGD(i)>WBGD_MAX和
WBGD_SUM>WBGD_TH中是否至少一个成立,若是,则满足预设条件;
其中,i为大于等于0的整数,AELD(i)为当前帧的曝光指数的差值,AELD_SUM为从上一关键帧的下一帧开始,截止到当前帧的各帧的曝光指数的差值的累计之和,WBGD(i)当前帧的白平衡增益的差值,WBGD_SUM为从上一关键帧的下一帧开始,截止到当前帧的各帧的白平衡增益的差值的累计之和,AELD_MAX、AELD_TH、WBGD_MAX和WBGD_TH均为预设的阈值,且
若AELD(i)>AELD_MAX或AELD_SUM>AELD_TH或WBGD(i)>WBGD_MAX或WBGD_SUM>WBGD_TH均不成立,则i加1;否则,i清零,AELD_SUM清零,WBGD_SUM清零。
在其中一个实施例中,所述关键帧设定模块还被配置以将所述数据采集模块采集的所述编码图像数据的第一帧设为关键帧。
在其中一个实施例中,所述数据采集模块为视频采集设备,所述评价参数计算模块为数字信号处理器,所述关键帧设定模块为视频图像压缩设备。
上述视频编码中关键帧的插入方法和装置,通过设定评价参数的差值及评价参数的差值的累计之和需满足的预设条件,将评价参数作为评价当前帧是否为关键帧的依据,在对较静止的图像编码时不易浪费码率,在对快速变化的画面编码时也不易丢失信息,还能够节省对于关键帧的评价开销。进一步地,选用采集编码数据的装置常用的曝光指数和白平衡增益作为评价参数,曝光指数和白平衡增益的累计变化,能够引起画面的面相变化,因此会更加方便对关键帧进行评价。
附图说明
图1为本发明视频编码中关键帧的插入方法一个实施例的流程示意图;
图2为本发明视频编码中关键帧的插入装置一个实施例的结构示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚明白,以下结合附图对本发明视频编码中关键帧的插入方法和装置的具体实施方式进行说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参见图1,一个实施例中,本发明视频编码中关键帧的插入方法可以包括以下步骤:
S100,采集编码图像数据。
其中,可以通过视频采集设备来采集编码图像数据,并将编码图像数据发送给其他设备进行后续步骤的处理。
S200,计算编码图像数据中的当前帧的评价参数,以及当前帧的评价参数的差值。
其中,当前帧的评价参数的差值为当前帧的评价参数与前一帧的评价参数的差值。一个实施例中,当前帧的评价参数包括采集编码图像数据的装置的曝光指数和白平衡增益,当前帧的评价参数的差值包括当前帧的曝光指数的差值和当前帧的白平衡增益的差值。采集编码图像数据的装置可以为在步骤S100内容下所说的视频采集设备。
本实施例中,通过计算公式AEL=k*F(AG)*DG*EXPTIME计算当前帧的曝光指数。当然也可以通过此计算公式计算每一帧的曝光指数。
其中,AEL为曝光指数,k为预设权重系数,F(AG)为采集编码图像数据的装置的模拟增益的影响因子,DG为采集编码图像数据的装置采集当前帧时的数字增益,EXPTIME为采集编码图像数据的装置采集当前帧时的曝光时间。
以下以采集编码图像数据的装置为视频采集设备为例进行说明。F(AG)可以用于表征不同模拟增益下,采集视频采集设备的输出响应情况。一般情况下,可以通过视频采集设备的供应商来获取F(AG)。
当前帧的曝光指数的差值AELD(i)=AEL(i)-AEL(i-1)。其中,i为大于等于0的整数,i取0时对应的帧为上一关键帧的下一帧,AEL(i)表示当前帧的曝光指数,AEL(i-1)表示前一帧的曝光指数。当然,i还可以为大于等于其他数的整数,例如i为大于等于1的整数时,i取1时对应的帧为上一关键帧的下一帧。
另外,通过以下计算公式计算当前帧的白平衡增益:
WBG=│256-G_SUM*256/R_SUM│+│256-G_SUM*256/B_SUM│。
其中,WBG为白平衡增益,R_SUM为当前帧各个像素点上R通道的值的总和,G_SUM为当前帧各个像素点上G通道的值的总和,B_SUM为当前帧各个像素点上B通道的值的总和。│256-G_SUM*256/R_SUM│为求(256-G_SUM*256/R_SUM)的绝对值,同理│256-G_SUM*256/B_SUM│为求(256-G_SUM*256/B_SUM)的绝对值。当然也可以通过此计算公式计算每一帧的白平衡增益。
当前帧的白平衡增益的差值WBGD(i)=WBG(i)-WBG(i-1)。其中,i为大于等于0的整数,i取0时对应的帧为上一关键帧的下一帧,WBG(i)表示当前帧的白平衡增益,WBG(i-1)表示前一帧的白平衡增益。当然,i还可以为大于等于其他数的整数,例如i为大于等于1的整数时,i取1时对应的帧为上一关键帧的下一帧。
S300,判断当前帧的评价参数的差值或评价参数的差值的累计之和是否满足预设条件,若是,则将当前帧设为关键帧;若否,则将当前帧设为非关键帧,并返回步骤S200,重复步骤S200和S300,直至编码结束。
其中,当前帧的评价参数可以包括视频采集设备的曝光指数和白平衡增益,当前帧的评价参数的差值包括当前帧的曝光指数的差值和当前帧的白平衡增益的差值。因此,一个实施例中,判断当前帧的评价参数的差值或评价参数的差值的累计之和是否满足预设条件的方法可以为:
判断AELD(i)>AELD_MAX和
AELD_SUM>AELD_TH和
WBGD(i)>WBGD_MAX和
WBGD_SUM>WBGD_TH中是否至少一个成立,
若是,则当前帧的评价参数的差值或评价参数的差值的累计之和满足预设条件,将当前帧设为关键帧;否则,不满足,将当前帧设为非关键帧。
其中,i为大于等于0的整数,AELD(i)为当前帧的曝光指数的差值,AELD_SUM为从上一关键帧的后一帧开始,截止到当前帧的各帧的曝光指数差值的累计之和。WBGD(i)当前帧的白平衡增益的差值,WBGD_SUM为从上一关键帧的后一帧开始,截止到当前帧的各帧的白平衡增益的差值的累计之和。AELD_MAX、AELD_TH、WBGD_MAX和WBGD_TH均为预设的阈值。且
若AELD(i)>AELD_MAX和AELD_SUM>AELD_TH和WBGD(i)>WBGD_MAX或WBGD_SUM>WBGD_TH均不成立,则i加1;否则,i清零,AELD_SUM清零,WBGD_SUM清零。
可以理解的,在上一关键帧的下一帧对应i的起始值0,若经判定上一关键帧的下一帧为非关键帧,则i=i+1,并判定下一帧是否为关键帧,以此类推,直至某一帧被设定为关键帧,i被清零,AELD_SUM被清零,WBGD_SUM被清零。
需要说明的是,i还可以为大于等于其他数的整数,例如i为大于等于1的整数,i的起始值1对应的帧为上一关键帧的下一帧。
优选的,在步骤S200之前,本发明视频编码中关键帧的插入方法还包括:将编码图像数据的第一帧设为关键帧。
本实施例中,采用视频采集设备采集编码图像数据,采用数字信号处理器计算编码图像数据当前帧的评价参数及评价参数的差值,采用视频图像压缩设备判断当前帧的评价参数的差值及评价参数的差值的累计之和是否满足预设条件,即当前帧是否可设定为关键帧。
可以理解的,插入关键帧的原因是因为编码图像有显著的变化。而引起编码图像变化的原因中,视频采集设备中的自动曝光和自动白平衡是引起图像变化的很大一部份因素。所以本发明将关键帧的判断融入到视频采集设备的自动曝光和自动白平衡的判断过程中,而视频采集设备的自动曝光对应视频采集设备的曝光指数,视频采集设备的自动白平衡对应视频采集设备的白平衡增益,通过曝光指数和白平衡增益设定关键帧,编码器中关键帧判断的运算过程被大大简化了,降低了成本。
以下通过一个具体实施例对本发明视频编码中关键帧的插入方法进行详细说明。
首先,通过视频图像压缩设备将编码图像数据的第一帧设定为关键帧,开始编码。
然后,初始化视频采集设备、数字信号处理器和视频图像压缩设备,将计数器的数值i清零,曝光参数的差值的累计之和清零,白平衡增益的差值的累计之和清零。
其次,通过视频采集设备抓取一帧图像,并判断所抓取的帧是否为最后一帧,若是,则结束编码,否则进行下一步。
接着,根据步骤S200中的计算公式计算所抓取的帧的曝光参数和白平衡增益,进而计算所抓取的帧曝光参数的差值、白平衡增益的差值、曝光参数的差值的累计之和及白平衡增益的差值的累计之和。
随后,判定所抓取的帧的曝光参数的差值、曝光参数的差值的累计之和、白平衡增益的差值或白平衡增益的差值的累计之和是否满足步骤S300中的预设条件,若满足,则将该帧设定为关键帧,并返回本实施例中的第二步;否则,将该帧设定为非关键帧,且数器的数值i=i+1,并返回本实施例中的第三步。
重复上述过程,直至编码结束。
上述视频编码中关键帧的插入方法,通过设定评价参数的差值及评价参数的差值的累计之和需满足的预设条件,将评价参数作为评价当前帧是否为关键帧的依据,在对较静止的图像编码时不易浪费码率,在对快速变化的画面编码时也不易丢失信息,还节省了对于关键帧的评价开销。进一步地,选用采集编码数据的装置常用的曝光指数和白平衡增益作为评价参数,曝光指数和白平衡增益的累积变化,能够引起画面的面相变化,因此会更加方便对关键帧进行评价。采用上述视频编码中关键帧的插入方法,编码速度快,且成本低。上述视频编码中关键帧的插入方法特别适合应用到嵌入式视频监控系统中。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)或随机存储记忆体(RandomAccessMemory,RAM)等。
基于同一发明构思,本发明实施例提供一种视频编码中关键帧的插入装置,由于此装置解决问题的原理与前述一种视频编码中关键帧的插入方法相似,因此,该装置的实施可以按照前述方法的具体步骤实现,重复之处不再赘述。
参见图2,一个实施例中,本发明视频编码中关键帧的插入装置包括数据采集模块100、评价参数计算模块200和关键帧设定模块300。
数据采集模块100,被配置以采集编码图像数据。
其中,数据采集模块100可以为视频采集设备。即可以通过视频采集设备来采集编码图像数据,并将编码图像数据发送给其他设备进行后续的处理。
评价参数计算模块200,被配置以根据预存的计算公式计算编码图像数据中的当前帧的评价参数,进而计算当前帧的评价参数的差值及评价参数的差值的累计之和。
具体的,计算公式可以包括计算编码图像数据当前帧的评价参数的计算公式、计算当前帧的评价参数的差值的计算公式及计算当前帧的评价参数的差值的累计之和的计算公式。
其中,当前帧的评价参数的差值为当前帧的评价参数与前一帧的评价参数的差值。一个实施例中,当前帧的评价参数包括采集编码图像数据的装置的曝光指数和白平衡增益;当前帧的评价参数的差值包括当前帧的曝光指数的差值和当前帧的白平衡增益的差值;当前帧的评价参数的差值的累计之和为从上一关键帧的后一帧开始,截止到当前帧的曝光指数差值的累计之和。
一个实施例中,预存的计算当前帧的曝光指数的计算公式为:
AEL=k*F(AG)*DG*EXPTIME。
其中,AEL为曝光指数,k为预设权重系数,F(AG)为数据采集模块100的模拟增益的影响因子,DG为数据采集模块100采集当前帧时的数字增益,EXPTIME为数据采集模块100采集当前帧时的曝光时间。当然,也可以通过此计算公式计算每一帧的曝光指数。
当前帧的曝光指数的差值AELD(i)=AEL(i)-AEL(i-1)。其中,i为大于等于0的整数,i取0时对应的帧为上一关键帧的下一帧,AEL(i)表示当前帧的曝光指数,AEL(i-1)表示前一帧的曝光指数。当然,i还可以为大于等于其他数的整数,例如i为大于等于1的整数时,i取1时对应的帧为上一关键帧的下一帧。
另外,预存的计算当前帧的白平衡增益的计算公式为:
WBG=│256-G_SUM*256/R_SUM│+│256-G_SUM*256/B_SUM│。
其中,WBG为白平衡增益,R_SUM为当前帧各个像素点上R通道的值的总和,G_SUM为当前帧各个像素点上G通道的值的总和,B_SUM为当前帧各个像素点上B通道的值的总和。│256-G_SUM*256/R_SUM│表示(256-G_SUM*256/R_SUM)的绝对值,同理│256-G_SUM*256/B_SUM│表示(256-G_SUM*256/B_SUM)的绝对值。当然,也可以通过此计算公式计算每一帧的白平衡增益。
当前帧的白平衡增益的差值WBGD(i)=WBG(i)-WBG(i-1)。其中,i为大于等于0的整数,i取0时对应的帧为上一关键帧的下一帧,WBG(i)表示当前帧的白平衡增益,WBG(i-1)表示前一帧的白平衡增益。当然,i还可以为大于等于其他数的整数,例如i为大于等于1的整数时,i取1时对应的帧为上一关键帧的下一帧。
可以理解的,上述计算公式可以预存在数据库中,也可以嵌入在实际的计算函数里,还可以采用其他方式进行存储。评价参数计算模块200获取预存的计算当前帧的曝光指数和白平衡增益的计算公式后,计算当前帧的曝光指数和白平衡增益,然后计算当前帧的曝光指数的差值、白平衡增益的差值、曝光指数的差值的累计之和及白平衡增益的差值的累计之和。
一个实施例中,评价参数计算模块200可以为数字信号处理器。
关键帧设定模块300,被配置以判断当前帧的所述评价参数的差值或所述评价参数的差值的累计之和是否满足预设条件,若是,则将当前帧设为关键帧;若否,则将当前帧设为非关键帧,并判定所述评价参数计算模块计算出的下一帧的所述评价参数的差值或所述评价参数的差值的累计之和是否满足预设条件,直至编码结束。
其中,当前帧的评价参数可以包括视频采集设备的曝光指数和白平衡增益,当前帧的评价参数的差值包括当前帧的曝光指数的差值和当前帧的白平衡增益的差值。因此,一个实施例中,关键帧设定模块300判断当前帧的评价参数的差值或评价参数的差值的累计之和是否满足预设条件的方法可以为:
判断AELD(i)>AELD_MAX和
AELD_SUM>AELD_TH和
WBGD(i)>WBGD_MAX和
WBGD_SUM>WBGD_TH中是否至少一个成立,
若是,则当前帧的评价参数的差值或评价参数的差值的累计之和满足预设条件,将当前帧设为关键帧;否则,不满足,将当前帧设为非关键帧。
其中,i为大于等于0的整数,AELD(i)为当前帧的曝光指数的差值,AELD_SUM为从上一关键帧的后一帧开始,截止到当前帧的各帧的曝光指数差值的累计之和。WBGD(i)当前帧的白平衡增益的差值,WBGD_SUM为从上一关键帧的后一帧开始,截止到当前帧的各帧的白平衡增益的差值的累计之和。AELD_MAX、AELD_TH、WBGD_MAX和WBGD_TH均为预设的阈值。且
若AELD(i)>AELD_MAX和AELD_SUM>AELD_TH和WBGD(i)>WBGD_MAX或WBGD_SUM>WBGD_TH均不成立,则i加1;否则,i清零,AELD_SUM清零,WBGD_SUM清零。
可以理解的,在上一关键帧的下一帧对应i的起始值0,若经判定上一关键帧的下一帧为非关键帧,则i=i+1,并判定下一帧是否为关键帧,以此类推,直至某一帧被设定为关键帧,i被清零,AELD_SUM被清零,WBGD_SUM被清零。
需要说明的是,i还可以为大于等于其他数的整数,例如i为大于等于1的整数,i的起始值1对应的帧为上一关键帧的下一帧。
优选的,关键帧设定模块300还被配置以将数据采集模块100采集的编码图像数据的第一帧设为关键帧。
一个实施例中,关键帧设定模块300可以为视频图像压缩设备。
可以理解的,插入关键帧的原因是因为编码图像有显著的变化。而引起编码图像变化的原因中,视频采集设备中的自动曝光和自动白平衡是引起图像变化的很大一部份因素。所以本发明将关键帧的判断融入到自动曝光和自动白平衡的判断过程中,而视频采集设备的自动曝光对应视频采集设备的曝光指数,视频采集设备的自动白平衡对应视频采集设备的白平衡增益,通过曝光指数和白平衡增益设定关键帧,编码器中关键帧判断的运算过程被大大简化了,降低了成本。
以下通过一个具体实施例对本发明视频编码中关键帧的插入装置进行详细说明。本实施例中,数据采集模块100为视频采集设备,评价参数计算模块200为数字信号处理器,键帧设定模块300为视频图像压缩设备。
首先,视频图像压缩设备将编码图像数据的第一帧设定为关键帧,开始编码。
然后,初始化视频采集设备、数字信号处理器和视频图像压缩设备,将计数器的数值i清零,AELD_SUM清零,WBGD_SUM清零。
其次,视频采集设备抓取一帧图像,并判断所抓取的帧是否为最后一帧,若是,则结束编码,否则将抓取的帧发送给数字信号处理器。
接着,数字信号处理器获取预存的计算公式,计算所抓取的帧的曝光参数和白平衡增益,进而计算所抓取的帧的曝光参数的差值、白平衡增益的差值、曝光参数的差值的累计之和和白平衡增益的差值的累计之和。
随后,视频图像压缩设备判定所抓取的帧的曝光参数的差值、曝光参数的差值的累计之和、白平衡增益的差值或白平衡增益的差值的累计之和是否满足预设条件,若满足,则将该帧设定为关键帧,并返回本实施例中的第二步;否则,将该帧设定为非关键帧,且数器的数值i=i+1,并返回本实施例中的第三步。
重复上述过程,直至编码结束。
上述视频编码中关键帧的插入装置,通过设定评价参数的差值及评价参数的差值的累计之和需满足的预设条件,将评价参数作为评价当前帧是否为关键帧的依据,在对较静止的图像编码时不易浪费码率,在对快速变化的画面编码时也不易丢失信息,还节省了对于关键帧的评价开销。进一步地,选用数据采集模块常用的曝光指数和白平衡增益作为评价参数,曝光指数和白平衡增益的累积变化,能够引起画面的面相变化,因此会更加方便对关键帧进行评价。采用上述视频编码中关键帧的插入装置,编码速度快,且成本低。上述视频编码中关键帧的插入装置特别适合应用到嵌入式视频监控系统中。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (11)

1.一种视频编码中关键帧的插入方法,其特征在于,包括以下步骤:
采集编码图像数据;
计算所述编码图像数据中的当前帧的评价参数,进而计算当前帧的所述评价参数的差值和当前帧的所述评价参数的差值的累计之和;所述当前帧的所述评价参数的差值为当前帧的所述评价参数与前一帧的所述评价参数之差;
判断当前帧的所述评价参数的差值或所述评价参数的差值的累计之和是否满足预设条件,若是,则将当前帧设为关键帧;若否,则将当前帧设为非关键帧,并返回所述计算所述编码图像数据中的当前帧的评价参数,进而计算当前帧的所述评价参数的差值和当前帧的所述评价参数的差值的累计之和步骤,直至编码结束。
2.根据权利要求1所述的视频编码中关键帧的插入方法,其特征在于,所述评价参数包括采集所述编码图像数据的装置的曝光指数和白平衡增益。
3.根据权利要求2所述的视频编码中关键帧的插入方法,其特征在于,通过计算公式AEL=k*F(AG)*DG*EXPTIME计算当前帧的曝光指数;
其中,AEL为曝光指数,k为预设权重系数,F(AG)为采集所述编码图像数据的装置的模拟增益的影响因子,DG为采集所述编码图像数据的装置采集当前帧时的数字增益,EXPTIME为采集所述编码图像数据的装置采集当前帧时的曝光时间;
通过以下计算公式计算当前帧的白平衡增益:
WBG=│256-G_SUM*256/R_SUM│+│256-G_SUM*256/B_SUM│
其中,WBG为白平衡增益,R_SUM为当前帧各个像素点上R通道的值的总和,G_SUM为当前帧各个像素点上G通道的值的总和,B_SUM为当前帧各个像素点上B通道的值的总和。
4.根据权利要求3所述的视频编码中关键帧的插入方法,其特征在于,所述判断当前帧的曝光指数的差值、白平衡增益的差值、曝光指数的差值的累计之和或白平衡增益的差值的累计之和是否满足预设条件的方法为:
判断AELD(i)>AELD_MAX和
AELD_SUM>AELD_TH和
WBGD(i)>WBGD_MAX和
WBGD_SUM>WBGD_TH中是否至少一个成立,若是,则满足预设条件;
其中,i为大于等于0的整数,AELD(i)为当前帧的曝光指数的差值,AELD_SUM为从上一关键帧的下一帧开始,截止到当前帧的各帧的曝光指数的差值的累计之和,WBGD(i)为当前帧的白平衡增益的差值,WBGD_SUM为从上一关键帧的后一帧开始,截止到当前帧的各帧的白平衡增益的差值的累计之和,AELD_MAX、AELD_TH、WBGD_MAX和WBGD_TH均为预设的阈值,且
若AELD(i)>AELD_MAX和AELD_SUM>AELD_TH和WBGD(i)>WBGD_MAX和WBGD_SUM>WBGD_TH均不成立,则i加1;否则,i清零,AELD_SUM清零,WBGD_SUM清零。
5.根据权利要求1至4任意一项所述的视频编码中关键帧的插入方法,其特征在于,在计算所述编码图像数据中的当前帧的评价参数,以及当前帧的所述评价参数的差值步骤之前,所述视频编码中关键帧的插入方法还包括:将所述编码图像数据的第一帧设为关键帧。
6.一种视频编码中关键帧的插入装置,其特征在于,包括数据采集模块、评价参数计算模块和关键帧设定模块;
所述数据采集模块,被配置以采集编码图像数据;
所述评价参数计算模块,被配置以根据预存的计算公式计算所述编码图像数据中的当前帧的评价参数,进而计算当前帧的所述评价参数的差值和当前帧的所述评价参数的差值的累计之和;所述当前帧的所述评价参数的差值为当前帧的所述评价参数与前一帧的所述评价参数之差;
所述关键帧设定模块,被配置以判断当前帧的所述评价参数的差值或所述评价参数的差值的累计之和是否满足预设条件,若是,则将当前帧设为关键帧;若否,则将当前帧设为非关键帧,并判定所述评价参数计算模块计算出的下一帧的所述评价参数的差值或所述评价参数的差值的累计之和是否满足预设条件,直至编码结束。
7.根据权利要求6所述的视频编码中关键帧的插入装置,其特征在于,所述评价参数包括所述数据采集模块的曝光指数和白平衡增益。
8.根据权利要求7所述的视频编码中关键帧的插入装置,其特征在于,所述评价参数计算模块通过所述预存的计算公式中的AEL=k*F(AG)*DG*EXPTIME计算当前帧的曝光指数;
其中,AEL为曝光指数,k为预设权重系数,F(AG)为所述数据采集模块的模拟增益的影响因子,DG为所述数据采集模块采集当前帧时的数字增益,EXPTIME为所述数据采集模块采集当前帧时的曝光时间;
所述评价参数计算模块通过所述预存的计算公式中的以下计算公式计算当前帧的白平衡增益:
WBG=│256-G_SUM*256/R_SUM│+│256-G_SUM*256/B_SUM│
其中,WBG为白平衡增益,R_SUM为当前帧各个像素点上R通道的值的总和,G_SUM为当前帧各个像素点上G通道的值的总和,B_SUM为当前帧各个像素点上B通道的值的总和。
9.根据权利要求8所述的视频编码中关键帧的插入装置,其特征在于,所述关键帧设定模块判断当前帧的曝光指数差值、白平衡增益差值、曝光指数差值的累计之和或白平衡增益差值的累计之和是否满足预设条件的方法为:
判断AELD(i)>AELD_MAX和
AELD_SUM>AELD_TH和
WBGD(i)>WBGD_MAX和
WBGD_SUM>WBGD_TH中是否至少一个成立,若是,则满足预设条件;
其中,i为大于等于0的整数,AELD(i)为当前帧的曝光指数的差值,AELD_SUM为从上一关键帧的下一帧开始,截止到当前帧的各帧的曝光指数的差值的累计之和,WBGD(i)当前帧的白平衡增益的差值,WBGD_SUM为从上一关键帧的下一帧开始,截止到当前帧的各帧的白平衡增益的差值的累计之和,AELD_MAX、AELD_TH、WBGD_MAX和WBGD_TH均为预设的阈值,且
若AELD(i)>AELD_MAX或AELD_SUM>AELD_TH或WBGD(i)>WBGD_MAX或WBGD_SUM>WBGD_TH均不成立,则i加1;否则,i清零,AELD_SUM清零,WBGD_SUM清零。
10.根据权利要求6至9任意一项所述的视频编码中关键帧的插入装置,其特征在于,所述关键帧设定模块还被配置以将所述数据采集模块采集的所述编码图像数据的第一帧设为关键帧。
11.根据权利要求6至9任意一项所述的视频编码中关键帧的插入装置,其特征在于,所述数据采集模块为视频采集设备,所述评价参数计算模块为数字信号处理器,所述关键帧设定模块为视频图像压缩设备。
CN201510467670.9A 2015-07-31 2015-07-31 视频编码中关键帧的插入方法和装置 Active CN105072439B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510467670.9A CN105072439B (zh) 2015-07-31 2015-07-31 视频编码中关键帧的插入方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510467670.9A CN105072439B (zh) 2015-07-31 2015-07-31 视频编码中关键帧的插入方法和装置

Publications (2)

Publication Number Publication Date
CN105072439A true CN105072439A (zh) 2015-11-18
CN105072439B CN105072439B (zh) 2017-10-03

Family

ID=54501707

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510467670.9A Active CN105072439B (zh) 2015-07-31 2015-07-31 视频编码中关键帧的插入方法和装置

Country Status (1)

Country Link
CN (1) CN105072439B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114979533A (zh) * 2022-05-18 2022-08-30 青岛海信移动通信技术股份有限公司 一种视频录制方法、装置及终端
WO2024109701A1 (zh) * 2022-11-24 2024-05-30 维沃移动通信有限公司 视频编解码方法、装置、电子设备及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101184226A (zh) * 2006-11-14 2008-05-21 腾讯科技(深圳)有限公司 一种插入视频关键帧的方法及装置
CN101360184A (zh) * 2008-09-22 2009-02-04 腾讯科技(深圳)有限公司 提取视频关键帧的系统及方法
CN101720006A (zh) * 2009-11-20 2010-06-02 张立军 一种适用于视频关键帧提取的代表帧定位方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101184226A (zh) * 2006-11-14 2008-05-21 腾讯科技(深圳)有限公司 一种插入视频关键帧的方法及装置
CN101360184A (zh) * 2008-09-22 2009-02-04 腾讯科技(深圳)有限公司 提取视频关键帧的系统及方法
CN101720006A (zh) * 2009-11-20 2010-06-02 张立军 一种适用于视频关键帧提取的代表帧定位方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
丁洪丽,陈怀新: "《基于镜头内容变化率的关键帧提取算法》", 《计算机工程》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114979533A (zh) * 2022-05-18 2022-08-30 青岛海信移动通信技术股份有限公司 一种视频录制方法、装置及终端
WO2024109701A1 (zh) * 2022-11-24 2024-05-30 维沃移动通信有限公司 视频编解码方法、装置、电子设备及介质

Also Published As

Publication number Publication date
CN105072439B (zh) 2017-10-03

Similar Documents

Publication Publication Date Title
JP5496914B2 (ja) 知覚上の品質を評価する方法
JP6016332B2 (ja) 画像処理装置、画像処理方法
US20050123052A1 (en) Apparatus and method for detection of scene changes in motion video
CN101160951A (zh) 一种多媒体视频通信的质量检测方法
CN112732785A (zh) 时序数据异常检测方法、装置、设备及存储介质
CN110263699B (zh) 视频图像处理方法、装置、设备及存储介质
CN111601162B (zh) 视频切分方法、装置和计算机存储介质
CN113938682A (zh) 视频编码方法、装置和电子设备
CN112085768B (zh) 光流信息预测方法、装置、电子设备和存储介质
CN105072439A (zh) 视频编码中关键帧的插入方法和装置
CN106572352A (zh) 一种关键帧大小控制方法及装置
CN110114801A (zh) 图像前景检测装置及方法、电子设备
CN113158963B (zh) 一种高空抛物的检测方法及装置
CN105554375A (zh) 一种硬盘录像机中视频预览的方法及装置
KR20080055941A (ko) 영상 식별 장치
CN107454408A (zh) 一种图像编码码率动态调整的方法
CN103428407B (zh) 一种视频中打架的侦测方法
CN114339250B (zh) 一种图像压缩方法及装置
CN114241401B (zh) 异常判定方法、装置、设备、介质及产品
CN113810695A (zh) 视频编码方法、装置及计算机可读存储介质
CN101902631A (zh) 压缩视频中静态场景的快速定位方法
CN112533024A (zh) 一种人脸视频处理方法、装置及存储介质
CN113919971A (zh) 基于区块链与大数据的污水处理样本数据管理方法及系统
CN102148984B (zh) 一种调整jpeg编码码率的方法及设备
CN113657590B (zh) 模型压缩方法、人脸识别方法、电子设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 519085 Guangdong city of Zhuhai province Jida West Road No. 107 Building 9 Building (1-4)

Applicant after: Zhuhai jelee Polytron Technologies Inc

Address before: 519085 Guangdong city of Zhuhai province Jida West Road No. 107 Building 9 Building

Applicant before: Zhuhai Jieli Technology Co., Ltd.

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant
CP02 Change in the address of a patent holder

Address after: 519000 No. 333, Kexing Road, Xiangzhou District, Zhuhai City, Guangdong Province

Patentee after: ZHUHAI JIELI TECHNOLOGY Co.,Ltd.

Address before: Floor 1-107, building 904, ShiJiHua Road, Zhuhai City, Guangdong Province

Patentee before: ZHUHAI JIELI TECHNOLOGY Co.,Ltd.

CP02 Change in the address of a patent holder