Nothing Special   »   [go: up one dir, main page]

CN103916626A - 一种监控录像信息提供方法、装置及视频监控系统 - Google Patents

一种监控录像信息提供方法、装置及视频监控系统 Download PDF

Info

Publication number
CN103916626A
CN103916626A CN201310002264.6A CN201310002264A CN103916626A CN 103916626 A CN103916626 A CN 103916626A CN 201310002264 A CN201310002264 A CN 201310002264A CN 103916626 A CN103916626 A CN 103916626A
Authority
CN
China
Prior art keywords
video
information corresponding
feature
ith
characteristic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310002264.6A
Other languages
English (en)
Inventor
肖翰林
周洪济
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201310002264.6A priority Critical patent/CN103916626A/zh
Priority to EP13870272.5A priority patent/EP2916541A4/en
Priority to US14/649,383 priority patent/US20150331944A1/en
Priority to PCT/CN2013/081487 priority patent/WO2014106384A1/zh
Publication of CN103916626A publication Critical patent/CN103916626A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G06F16/784Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content the detected or recognised objects being people
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例提供一种监控录像信息提供方法、装置及系统。方法包括:接收监控录像;对所述监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息;其中,所述监控录像中的第i录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的第i目标物特征信息匹配;确定所述第i录像片断对应的录像相关信息;将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端。本发明实施例为用户提供了与目标人、物等关键信息有关的录像信息,减少了用户找到期望的录像信息所花费的时间及人力成本。

Description

一种监控录像信息提供方法、装置及视频监控系统
技术领域
本发明实施例涉及视频监控领域,尤其涉及一种监控录像信息提供方法、装置及系统。
背景技术
视频监控业务(Video Surveillant Service,VSS)是一项完全基于宽带网的图像远程传输、管理的新增值业务。该业务系统利用无处不在的宽带网络端口将分散、独立的图像采集点进行联网,实现跨区域、全球范围内的统一管理,资源共享,为各行业的管理决策者提供一种全新的直观的扩大视觉和听觉范围的管理工具,提高工作绩效。
图1为VSS视频监控系统模型图,参照图1,视频监控系统由前端(PU)、客户端(Client Unit,CU)和业务平台三大部分组成,其中前端布置在监控点实现视音频信号的采集和编码上传、报警信号采集上传、摄像机和外围辅助设备控制等功能,前端设备是以视频服务器或者网络摄像机为核心包括摄像机、麦克风、报警探头、云头等多种设备组成的。视频监控客户端主要是给使用者提供视频监控、录像、设备控制和管理等功能,是面向最终用户实现业务能力的门户。
目前视频监控系统将监控到的录像保存为多个监控录像文件,用户调出每个监控录像文件,在该每个监控录像文件的播放过程中寻找与目标人、物等关键信息有关的录像信息。目前视频监控系统的录像保存与支持用户寻找期望信息的方式往会耗费较多的时间及人力成本。
发明内容
有鉴于此,本发明实施例的目的是提供一种监控录像信息提供方法、装置及系统,以为用户提供与目标人、物等关键信息有关的录像信息,节约用户找到期望的录像信息所花费的时间及人力成本。
为解决上述技术问题,本发明实施例提供方案如下:
本发明实施例提供一种监控录像信息提供方法,用于一视频监控系统,包括:
接收监控录像;
对所述监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息;其中,所述监控录像中的第i录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的第i目标物特征信息匹配,i的取值范围为[1,M];
确定所述第i录像片断对应的录像相关信息;
将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端。
优选的,所述第i录像片断对应的录像相关信息包括录像时间段和/或录像设备信息。
优选的,所述将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端之前,所述方法还包括:
将所述第i录像片断对应的第i特征信息与所述第i录像片断对应的录像相关信息关联存储到一检索数据库中;其中,所述第i特征信息为所述第i录像片断中满足一预设条件的视频帧对应的特征信息;
将所述至少一个录像片断中的任一录像片断对应的录像相关信息发送给客户端具体包括:
根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息;
根据所述任一录像片断中满足所述预设条件的视频帧对应的特征信息搜索所述检索数据库,得到所述任一录像片断对应的录像相关信息;
将所述任一录像片断对应的录像相关信息发送给客户端。
优选的,所述查询请求包括用户通过所述客户端在全部所述第i特征信息中选择的所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
优选的,所述查询请求包括一查询特征图片,所述根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息具体包括:
根据所述查询特征图片确定查询特征信息;
将全部所述第i特征信息中与所述查询特征信息匹配的特征信息确定为所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
本发明实施例提供一种监控录像信息提供装置,用于一视频监控系统,包括:
接收模块,用于接收监控录像;
识别模块,用于对所述监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息;其中,所述监控录像中的第i录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的第i目标物特征信息匹配,i的取值范围为[1,M];
确定模块,用于确定所述第i录像片断对应的录像相关信息;
发送模块,用于将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端。
优选的,所述第i录像片断对应的录像相关信息包括录像时间段和/或录像设备信息。
优选的,所述装置还包括:
存储模块,用于在所述发送模块将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端之前,将所述第i录像片断对应的第i特征信息与所述第i录像片断对应的录像相关信息关联存储到一检索数据库中;其中,所述第i特征信息为所述第i录像片断中满足一预设条件的视频帧对应的特征信息;
对所述至少一个录像片断中的任一录像片断,所述发送模块具体包括:
确定单元,用于根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息;
搜索单元,用于根据所述任一录像片断中满足所述预设条件的视频帧对应的特征信息搜索所述检索数据库,得到所述任一录像片断对应的录像相关信息;
将所述任一录像片断对应的录像相关信息发送给客户端。
优选的,所述查询请求包括用户通过所述客户端在全部所述第i特征信息中选择的所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
优选的,所述查询请求包括一查询特征图片,所述确定单元具体包括:
第一确定子单元,用于根据所述查询特征图片确定查询特征信息;
第二确定子单元,用于将全部所述第i特征信息中与所述查询特征信息匹配的特征信息确定为所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
本发明实施例提供一种包括以上所述的监控录像信息提供装置的视频监控系统。
从以上所述可以看出,本发明实施例至少存在如下有益效果:
通过对监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息,确定与M个目标物特征信息对应的M个录像片断所对应的录像相关信息,将其中至少一个录像片断对应的录像相关信息发送给客户端,又至少一个录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的至少一个目标物特征信息一一匹配,从而为用户提供了与目标人、物等关键信息有关的录像信息,减少了用户找到期望的录像信息所花费的时间及人力成本。
附图说明
图1为VSS视频监控系统模型图;
图2为本发明实施例提供的一种监控录像信息提供方法的步骤流程图;
图3为本发明实施例的优选实施方式的录像特征搜索系统的结构示意图;
图4为本发明实施例的优选实施方式的特征识别模块的结构示意图;
图5为本发明实施例的优选实施方式的录像特征搜索模块的结构示意图;
图6为本发明实施例的优选实施方式的智能录像特征关联存储方法例子的流程图;
图7为本发明实施例的优选实施方式的监控录像特征搜索方法例子的流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图及具体实施例对本发明实施例进行详细描述。
图2为本发明实施例提供的一种监控录像信息提供方法的步骤流程图,参照图2,本发明实施例提供一种监控录像信息提供方法,用于一视频监控系统,包括如下步骤:
步骤101,接收监控录像;
步骤102,对所述监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息;其中,所述监控录像中的第i录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的第i目标物特征信息匹配,i的取值范围为[1,M];
步骤103,确定所述第i录像片断对应的录像相关信息;
步骤104,将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端。
可见,通过对监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息,确定与M个目标物特征信息对应的M个录像片断所对应的录像相关信息,将其中至少一个录像片断对应的录像相关信息发送给客户端,又至少一个录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的至少一个目标物特征信息一一匹配,从而为用户提供了与目标人、物等关键信息有关的录像信息,减少了用户找到期望的录像信息所花费的时间及人力成本。
其中,监控录像可以为用户输入的一段已经拍摄好的监控录像,也可以为前端设备以码流的形式传输过来的实时监控录像。
特征信息例如:特征图片,图像特征信息等。
目标物可以为目标人物、物体等。
在步骤102中,所述进行特征识别可以与接收监控录像同步进行,例如,接收视频监控系统的前端设备以码流的形式传输的实时监控录像,从通过分析实时监控录像码流得到第一个视频帧开始,在通过分析实时监控录像码流得到一个视频帧时,就对该视频帧进行特征识别,得到该视频帧对应的特征信息。
此外,在监控录像为一段已经拍摄好的监控录像的情况下,具体实现中可以以任何顺序对监控录像中的每个视频帧进行特征识别,在此不作限定。
录像片断是指监控录像中某录像时间段内的部分录像。
由i的取值范围为[1,M],则M个所述录像片断是指第1录像片断~第M录像片断这M个录像片断。
M个录像片断中的不同录像片断在录像时间上可以不交叠、部分交叠或重合。
步骤102中提到,第i录像片断中的每个视频帧对应的特征信息与第i目标物特征信息匹配。这里的匹配例如:通过像素颜色进行图像识别时,相似度大于百分之八十。当然,本领域技术人员很容易想到判定两个图像的特征信息匹配的各种方式,在此不再赘述。
在步骤103中,所述第i录像片断对应的录像相关信息可以包括录像时间段,例如,录像持续时间,录像开始时间,录像结束时间,录像持续时间等。且/或,
所述第i录像片断对应的录像相关信息可以包括录像设备信息,例如,录像设备的编号,录像设备的分类信息(如高清录像、低清录像、告警录像、实时录像)等。
步骤103中并不限定第i录像片断中时间最靠前的视频帧的前一视频帧所对应的特征信息是否与第i目标物特征信息匹配,也就是说,可以将监控录像中最先被识别得到与第i目标物特征信息匹配的特征信息的视频帧的拍摄时间作为第i录像片断的录像开始时间;或者,也可以在连续多个视频帧对应的特征信息都与第i目标物特征信息匹配后才将下一视频帧的拍摄时间作为第i录像片断的录像开始时间。
在本发明实施例中,考虑到所述至少一个录像片断对应的录像相关信息与M个目标物特征信息中的至少一个目标特征信息一一对应,则可以根据用户通过客户端输入的查询条件来确定该至少一个目标特征信息,从而得到所述至少一个录像片断对应的录像相关信息并将其发送给客户端。或者,
也可以将有关信息进行关联存储并支持根据用户的查询请求来搜索出相应的录像相关信息,于是有:
所述将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端之前,所述方法还可以包括:
将所述第i录像片断对应的第i特征信息与所述第i录像片断对应的录像相关信息关联存储到一检索数据库中;其中,所述第i特征信息为所述第i录像片断中满足一预设条件的视频帧对应的特征信息;
所述将所述至少一个录像片断中的任一录像片断对应的录像相关信息发送给客户端具体可以包括:
根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息;
根据所述任一录像片断中满足所述预设条件的视频帧对应的特征信息搜索所述检索数据库,得到所述任一录像片断对应的录像相关信息;
将所述任一录像片断对应的录像相关信息发送给客户端。
其中,所述预设条件例如:在第i录像片断中的所有视频帧中时间最靠前或最靠后或某一中间时间,或者,与第i目标物特征信息匹配程度最高(例如,通过像素颜色进行图像识别时,对应的相似度最大)。
所述查询请求可以包括用户通过所述客户端在全部所述第i特征信息中选择的所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。或者,
所述查询请求可以包括一查询特征图片,所述根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息具体可以包括:
根据所述查询特征图片确定查询特征信息;
将全部所述第i特征信息中与所述查询特征信息匹配的特征信息确定为所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
其中,由i的取值范围为[1,M],则全部所述第i特征信息是指第1特征信息~第M特征信息这M个特征信息。
为将本发明实施例阐述得更加清楚明白,下面给出本发明实施例的优选实施方式。
在本优选实施方式中,所述检索数据库为特征库。
图3为本优选实施方式的录像特征搜索系统的结构示意图,参照图3,在本优选实施方式中,可通过录像特征搜索系统来实现,该系统包括特征库管理模块、特征策略模块、特征识别模块、录像特征存储模块和录像特征搜索模块;特征库管理模块与VSS视频监控系统中的视频监控录像模块之间存在接口,该系统通过该接口与VSS视频监控系统交互信息。其中,
特征库管理模块提供了对外接口,处理智能录像的请求,调度各个模块进行相应的处理工作、管理各个模块的数据同步等。最后把智能录像存储结果通过该接口返回给VSS视频监控系统;
特征策略模块用于制定录像特征的识别策略,识别策略可以指导特征识别模块对关键图像、信息进行识别和分类等处理;
特征识别模块通过读取特征识别策略,使用特定的特征识别算法进行录像中的特征识别;
录像特征存储模块通过特征识别模块识别出的图像、信息等数据和录像特征信息进行关联、匹配存储,比如存储某人的脸部图像以及关联存储这个人脸在监控录像中的相关信息包括:摄像头信息、开始时间、结束时间、分类信息等;
录像特征搜索模块处理用户的特定搜索请求,通过用户提交的图片或者用户选择的特征库中已有的特征图片对相关录像信息进行搜索,得以快速定位相关录像。
具体地,
特征库管理模块,主要用于特征库的管理、和VSS视频监控系统的交互、系统配置等功能。特征库管理模块通过接口与任意VSS视频监控系统进行交互,通用性很高。任意的VSS视频监控系统需要进行智能录像搜索功能的时候,通过接口发送请求到特征库管理模块,特征库管理模块把相应的请求下发到特征库的相应模块。处理结束后,把相应的信息通过接口发给相应的VSS视频监控系统。
特征策略模块,主要用于特征识别策略和算法和制定。该模块的特征识别策略、算法可以用户进行自定义扩充,具有高扩展性。特征策略制定好之后提供给特征识别模块使用。
特征识别模块,主要用于录像中人物、物体等特征图像的识别。在收到特征库管理模块的录像特征识别请求后,特征识别模块通过调特征策略模块设置的策略和算法进行录像中特征图像信息的识别。识别出的特征图像信息后,特征识别模块发送请求到录像特征存储模块把识别出的相应的特征图像信息和录像相关信息进行关联存储:比如摄像头信息、特征进入摄像头开始时间、结束时间、特征分类、特征图片信息等。
录像特征存储模块,主要用于通过把传入的特征信息、图片与相应的录像关联信息进行关联存储,以达到特定监控录像与特征图像信息能够进行快速搜索的目的。
录像特征搜索模块,主要用于处理用户搜索录像的请求。用户可以在特征库中选择相应的图片、信息、分类等线索,通过特征搜索模块对相应的录像关联信息进行搜索。由于特征信息和相关的录像已经进行了关联信息存储,这种搜索方式速度快、定位准。对于搜索出的录像和特征信息,通过响应单元返回给特征库管理模块,再由特征库管理模块发送给VSS视频监控系统,VSS视频监控系统中的CU将搜索结果展示给用户。
基于该录像特征搜索系统进行VSS视频监控智能录像存储和搜索的方法包括如下步骤:
步骤A:用户通过CU请求发起监控录像智能存储功能;
步骤B:特征库管理模块通过用户选择或新建的特征策略请求特征策略模块设置该次录像请求的策略和算法;
步骤C:特征库管理模块开始发起监控录像智能存储请求,通过特征识别模块对码流进行分析和图像特征识别;
步骤D:特征识别模块通过相应的识别策略和算法识别出了相应的特征信息,通过查询特征库中现有的特征信息来决定是否存为新的特征信息。并请求录像特征存储模块对监控录像进行智能关联存储功能;
步骤E:录像特征存储模块对步骤D识别出的该特征信息和相应摄像头、时间段、分类信息进行关联存储。存储成功后返回响应给特征库管理模块;
步骤F:用户通过CU进行特定录像的查询,用户可以根据特征库中的图片、分类、时间段等信息进行录像查询选择;
步骤G:特征库管理模块通过请求录像特征搜索模块进行相应的录像查询,最后把响应的录像列表返回给CU用户。
该方法和原始的录像查找方法相比大幅度缩短监控录像的搜索时间、提高了监控录像使用效率、提高了录像搜索精确度。该方法节省了视频监控系统的成本、人力等。
图4为本优选实施方式的特征识别模块的结构示意图,参照图4,在该录像特征搜索系统中,特征识别模块还可以进一步细分为特征策略设置单元、特征算法设置单元、录像码流接受单元、录像码流分析识别单元和录像特征分类处理单元。其中,
特征策略设置单元主要用于获取用户设置的特征识别策略;
特征算法设置单元主要用于获取特征识别策略相应的算法;
录像码流接受单元主要用于获取需要分析的录像码流;
录像码流分析识别单元主要用于对码流进行算法分析,识别出相应的特征信息,如特征图片等;
录像特征分类处理单元主要用于对识别出的特征信息进行分类并发送分析出的特征信息给存储模块进行存储。
图5为本优选实施方式的录像特征搜索模块的结构示意图,参照图5,在该录像特征搜索系统中,录像特征搜索模块进一步细分为:搜索请求接收单元、特征信息查询单元、录像特征关联查询单元和查询结果处理单元。其中,
搜索请求接收单元主要用于接受CU通过VSS视频监控系统发给特征库管理模块的查询请求,并进行相应的处理;
特征信息查询单元主要用于查询特征库中已存在的特征图片、其它特征信息等内容;
录像特征关联查询单元主要用于特征信息和相应的录像关联查询工作;
查询结果处理单元主要用于把录像特征关联查询单元查询的结果返回给特征库管理模块,然后返回给VSS视频监控系统进行展现。
图6为本优选实施方式的智能录像特征关联存储方法例子的流程图,参照图6,本优选实施方式中智能录像特征关联存储方法的例子包括如下步骤:
步骤601,接受用户的智能录像请求;
用户通过CU发出智能录像请求,通过VSS视频监控系统中的视频监控录像模块转发到该录像特征搜索系统中的特征库管理模块,然后特征识别模块接受到该请求。
步骤602,使用当前设置的特征识别策略和算法;
特征识别模块通过请求特征库管理模块获取特征策略模块中相应的识别策略和算法。
步骤603,录像开始同时进行特征物体识别;
录像通过分析录像码流识别出特征图像信息、或者其它特征信息。这里的同时指的是,视频监控系统开始了录像工作,而该录像特征搜索系统就开始了对每一帧视频进行识别、匹配的工作。
步骤604,通过查询特征库现有的特征信息判断特征库中是否已有该特征物体被识别出的特征信息,是则进入步骤605,否则进入步骤606;
步骤605,在特征库中查询出已有的特征信息;
通过请求特征库管理模块发出查询已有特征信息的请求。然后通过录像特征存储模块查询出已有的特征信息。
步骤606,存入新识别出的特征信息;
通过请求特征库管理模块发出保存新特征信息的请求。然后通过录像特征存储模块保存新的特征信息。
步骤607,开始关联存储特征信息和录像的关联数据;
录像特征存储模块开始存储录像开始时间、摄像头信息等录像数据与该特征物体被识别出的特征信息进行关联。
步骤608,该特征物体被识别出的特征信息在录像中消失或者录像结束时存入录像结束的关联数据;
录像特征存储模块存储录像结束时间与该特征物体被识别出的特征信息进行关联。
步骤609,结束该智能存储录像的请求。
图7为本优选实施方式的监控录像特征搜索方法例子的流程图,参照图7,本优选实施方式中智能录像特征关联存储方法的例子包括如下步骤:
步骤701,用户通过CU发出特征录像查询请求;
CU将特征录像查询请求发送给特征库管理模块。
步骤702,用户通过设置特征查询条件进行特征录像查询;
特征库管理模块和VSS视频监控系统交互,确定特征查询条件。然后把特征查询条件发送给录像特征搜索模块。
步骤703,通过搜索特征库判断是否在特征库中匹配到特征信息,如果是,则进入步骤704;否则进入步骤705;
步骤704,在特征库中在查询出所有特征相关录像;
录像特征搜索模块基于该匹配到的特征信息对录像特征存储模块进行查询,得到与该匹配到的特征信息对应的所有录像相关信息。
步骤705,结束录像搜索。
本发明实施例还提供一种监控录像信息提供装置,用于一视频监控系统,包括:
接收模块,用于接收监控录像;
识别模块,用于对所述监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息;其中,所述监控录像中的第i录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的第i目标物特征信息匹配,i的取值范围为[1,M];
确定模块,用于确定所述第i录像片断对应的录像相关信息;
发送模块,用于将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端。
可见,通过对监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息,确定与M个目标物特征信息对应的M个录像片断所对应的录像相关信息,将其中至少一个录像片断对应的录像相关信息发送给客户端,又至少一个录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的至少一个目标物特征信息一一匹配,从而为用户提供了与目标人、物等关键信息有关的录像信息,减少了用户找到期望的录像信息所花费的时间及人力成本。
其中,所述第i录像片断对应的录像相关信息可以包括录像时间段和/或录像设备信息。
此外,所述装置还可以包括:
存储模块,用于在所述发送模块将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端之前,将所述第i录像片断对应的第i特征信息与所述第i录像片断对应的录像相关信息关联存储到一检索数据库中;其中,所述第i特征信息为所述第i录像片断中满足一预设条件的视频帧对应的特征信息;
对所述至少一个录像片断中的任一录像片断,所述发送模块具体包括:
确定单元,用于根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息;
搜索单元,用于根据所述任一录像片断中满足所述预设条件的视频帧对应的特征信息搜索所述检索数据库,得到所述任一录像片断对应的录像相关信息;
将所述任一录像片断对应的录像相关信息发送给客户端。
进一步地,所述查询请求可以包括用户通过所述客户端在全部所述第i特征信息中选择的所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。或者,
所述查询请求可以包括一查询特征图片,所述确定单元具体可以包括:
第一确定子单元,用于根据所述查询特征图片确定查询特征信息;
第二确定子单元,用于将全部所述第i特征信息中与所述查询特征信息匹配的特征信息确定为所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
本发明实施例还提供一种视频监控系统,所述视频监控系统包括以上所述的监控录像信息提供装置。
以上所述仅是本发明实施例的实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明实施例原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明实施例的保护范围。

Claims (11)

1.一种监控录像信息提供方法,用于一视频监控系统,其特征在于,包括:
接收监控录像;
对所述监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息;其中,所述监控录像中的第i录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的第i目标物特征信息匹配,i的取值范围为[1,M];
确定所述第i录像片断对应的录像相关信息;
将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端。
2.根据权利要求1所述的方法,其特征在于,所述第i录像片断对应的录像相关信息包括录像时间段和/或录像设备信息。
3.根据权利要求1所述的方法,其特征在于,所述将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端之前,所述方法还包括:
将所述第i录像片断对应的第i特征信息与所述第i录像片断对应的录像相关信息关联存储到一检索数据库中;其中,所述第i特征信息为所述第i录像片断中满足一预设条件的视频帧对应的特征信息;
将所述至少一个录像片断中的任一录像片断对应的录像相关信息发送给客户端具体包括:
根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息;
根据所述任一录像片断中满足所述预设条件的视频帧对应的特征信息搜索所述检索数据库,得到所述任一录像片断对应的录像相关信息;
将所述任一录像片断对应的录像相关信息发送给客户端。
4.根据权利要求3所述的方法,其特征在于,所述查询请求包括用户通过所述客户端在全部所述第i特征信息中选择的所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
5.根据权利要求3所述的方法,其特征在于,所述查询请求包括一查询特征图片,所述根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息具体包括:
根据所述查询特征图片确定查询特征信息;
将全部所述第i特征信息中与所述查询特征信息匹配的特征信息确定为所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
6.一种监控录像信息提供装置,用于一视频监控系统,其特征在于,包括:
接收模块,用于接收监控录像;
识别模块,用于对所述监控录像中的每个视频帧进行特征识别,得到所述每个视频帧各自对应的特征信息;其中,所述监控录像中的第i录像片断中的每个视频帧对应的特征信息与M个目标物特征信息中的第i目标物特征信息匹配,i的取值范围为[1,M];
确定模块,用于确定所述第i录像片断对应的录像相关信息;
发送模块,用于将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端。
7.根据权利要求6所述的装置,其特征在于,所述第i录像片断对应的录像相关信息包括录像时间段和/或录像设备信息。
8.根据权利要求6所述的装置,其特征在于,所述装置还包括:
存储模块,用于在所述发送模块将M个所述录像片断中的至少一个录像片断对应的录像相关信息发送给客户端之前,将所述第i录像片断对应的第i特征信息与所述第i录像片断对应的录像相关信息关联存储到一检索数据库中;其中,所述第i特征信息为所述第i录像片断中满足一预设条件的视频帧对应的特征信息;
对所述至少一个录像片断中的任一录像片断,所述发送模块具体包括:
确定单元,用于根据用户通过所述客户端输入的查询请求确定所述任一录像片断中满足所述预设条件的视频帧对应的特征信息;
搜索单元,用于根据所述任一录像片断中满足所述预设条件的视频帧对应的特征信息搜索所述检索数据库,得到所述任一录像片断对应的录像相关信息;
将所述任一录像片断对应的录像相关信息发送给客户端。
9.根据权利要求8所述的装置,其特征在于,所述查询请求包括用户通过所述客户端在全部所述第i特征信息中选择的所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
10.根据权利要求8所述的装置,其特征在于,所述查询请求包括一查询特征图片,所述确定单元具体包括:
第一确定子单元,用于根据所述查询特征图片确定查询特征信息;
第二确定子单元,用于将全部所述第i特征信息中与所述查询特征信息匹配的特征信息确定为所述任一录像片断中满足所述预设条件的视频帧对应的特征信息。
11.一种视频监控系统,其特征在于,包括如权利要求6至10所述的监控录像信息提供装置。
CN201310002264.6A 2013-01-05 2013-01-05 一种监控录像信息提供方法、装置及视频监控系统 Pending CN103916626A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201310002264.6A CN103916626A (zh) 2013-01-05 2013-01-05 一种监控录像信息提供方法、装置及视频监控系统
EP13870272.5A EP2916541A4 (en) 2013-01-05 2013-08-14 METHOD, DEVICE AND VIDEO SURVEILLANCE SYSTEM FOR MONITORING VIDEO INFORMATION
US14/649,383 US20150331944A1 (en) 2013-01-05 2013-08-14 Method, apparatus and video monitoring system for providing monitoring video information
PCT/CN2013/081487 WO2014106384A1 (zh) 2013-01-05 2013-08-14 一种监控录像信息提供方法、装置及视频监控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310002264.6A CN103916626A (zh) 2013-01-05 2013-01-05 一种监控录像信息提供方法、装置及视频监控系统

Publications (1)

Publication Number Publication Date
CN103916626A true CN103916626A (zh) 2014-07-09

Family

ID=51041977

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310002264.6A Pending CN103916626A (zh) 2013-01-05 2013-01-05 一种监控录像信息提供方法、装置及视频监控系统

Country Status (4)

Country Link
US (1) US20150331944A1 (zh)
EP (1) EP2916541A4 (zh)
CN (1) CN103916626A (zh)
WO (1) WO2014106384A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104580974A (zh) * 2015-01-30 2015-04-29 成都华迈通信技术有限公司 一种智能监控录像回放的方法
CN105357475A (zh) * 2015-10-28 2016-02-24 小米科技有限责任公司 用于视频播放的方法及装置
CN105760844A (zh) * 2016-02-29 2016-07-13 北京时代云英科技有限公司 一种视频流数据的处理方法、设备和系统
CN105787062A (zh) * 2016-02-29 2016-07-20 北京时代云英科技有限公司 一种基于视频平台对目标对象进行搜索的方法和设备
CN106295489A (zh) * 2015-06-29 2017-01-04 株式会社日立制作所 信息处理方法、信息处理装置和视频监控系统
CN106529456A (zh) * 2016-11-04 2017-03-22 北京锐安科技有限公司 信息匹配和信息收发方法、装置及目标对象找寻系统
CN106878670A (zh) * 2016-12-24 2017-06-20 深圳云天励飞技术有限公司 一种视频处理方法及装置
CN107203638A (zh) * 2017-06-08 2017-09-26 北京深瞐科技有限公司 监控视频处理方法、装置及系统
CN107222700A (zh) * 2017-07-10 2017-09-29 深圳市海清视讯科技有限公司 一种智能监控信息获取方法和一种高清智能识别硬盘录像机
CN113050464A (zh) * 2019-12-27 2021-06-29 广州市双敏电子产品有限公司 一种基于物联网的智能监控方法及系统

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106530567A (zh) * 2016-10-25 2017-03-22 上海银晨智能识别科技有限公司 适于大规模布控的报警比对模块、系统及方法
CN107396139A (zh) * 2017-08-22 2017-11-24 无锡天脉聚源传媒科技有限公司 一种视频处理方法及装置
CN110110110A (zh) * 2018-02-02 2019-08-09 杭州海康威视数字技术股份有限公司 一种以图搜图方法、装置、电子设备及存储介质
US10878030B1 (en) * 2018-06-18 2020-12-29 Lytx, Inc. Efficient video review modes
CN108900793A (zh) * 2018-07-25 2018-11-27 武汉恩智电子科技有限公司 一种基于视频监控的人脸识别视频回放系统
CN109101805A (zh) * 2018-08-16 2018-12-28 连云港伍江数码科技有限公司 信息确认方法、装置、计算机设备和存储介质
CN111263108A (zh) * 2019-12-20 2020-06-09 中译语通文娱科技(青岛)有限公司 一种智能生产视频监测方法
CN111666907B (zh) * 2020-06-09 2024-03-08 北京奇艺世纪科技有限公司 一种视频中对象信息的识别方法、装置及服务器
CN111918054B (zh) * 2020-06-29 2021-05-04 普瑞达建设有限公司 视屏侦测分析系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101281593A (zh) * 2008-04-16 2008-10-08 安防科技(中国)有限公司 智能视频监控事件检索方法及系统
CN101378499A (zh) * 2007-08-29 2009-03-04 Lg电子株式会社 处理视频帧的方法和装置
CN101388145A (zh) * 2008-11-06 2009-03-18 北京汇大通业科技有限公司 道路交通安全自动警示方法及装置
CN101783900A (zh) * 2010-03-10 2010-07-21 华为终端有限公司 一种图像分区缩放的方法和装置
JP4736096B2 (ja) * 2007-05-28 2011-07-27 Necソフト株式会社 セキュリティ監視システム、セキュリティ監視方法及び情報処理端末

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7634662B2 (en) * 2002-11-21 2009-12-15 Monroe David A Method for incorporating facial recognition technology in a multimedia surveillance system
CN102663366A (zh) * 2012-04-13 2012-09-12 中国科学院深圳先进技术研究院 行人目标识别方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4736096B2 (ja) * 2007-05-28 2011-07-27 Necソフト株式会社 セキュリティ監視システム、セキュリティ監視方法及び情報処理端末
CN101378499A (zh) * 2007-08-29 2009-03-04 Lg电子株式会社 处理视频帧的方法和装置
CN101281593A (zh) * 2008-04-16 2008-10-08 安防科技(中国)有限公司 智能视频监控事件检索方法及系统
CN101388145A (zh) * 2008-11-06 2009-03-18 北京汇大通业科技有限公司 道路交通安全自动警示方法及装置
CN101783900A (zh) * 2010-03-10 2010-07-21 华为终端有限公司 一种图像分区缩放的方法和装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104580974A (zh) * 2015-01-30 2015-04-29 成都华迈通信技术有限公司 一种智能监控录像回放的方法
CN106295489B (zh) * 2015-06-29 2021-09-28 株式会社日立制作所 信息处理方法、信息处理装置和视频监控系统
CN106295489A (zh) * 2015-06-29 2017-01-04 株式会社日立制作所 信息处理方法、信息处理装置和视频监控系统
CN105357475A (zh) * 2015-10-28 2016-02-24 小米科技有限责任公司 用于视频播放的方法及装置
CN105760844A (zh) * 2016-02-29 2016-07-13 北京时代云英科技有限公司 一种视频流数据的处理方法、设备和系统
CN105787062A (zh) * 2016-02-29 2016-07-20 北京时代云英科技有限公司 一种基于视频平台对目标对象进行搜索的方法和设备
CN106529456A (zh) * 2016-11-04 2017-03-22 北京锐安科技有限公司 信息匹配和信息收发方法、装置及目标对象找寻系统
CN106878670A (zh) * 2016-12-24 2017-06-20 深圳云天励飞技术有限公司 一种视频处理方法及装置
CN106878670B (zh) * 2016-12-24 2018-04-20 深圳云天励飞技术有限公司 一种视频处理方法及装置
CN107203638B (zh) * 2017-06-08 2020-09-25 北京深瞐科技有限公司 监控视频处理方法、装置及系统
CN107203638A (zh) * 2017-06-08 2017-09-26 北京深瞐科技有限公司 监控视频处理方法、装置及系统
CN107222700A (zh) * 2017-07-10 2017-09-29 深圳市海清视讯科技有限公司 一种智能监控信息获取方法和一种高清智能识别硬盘录像机
CN113050464A (zh) * 2019-12-27 2021-06-29 广州市双敏电子产品有限公司 一种基于物联网的智能监控方法及系统

Also Published As

Publication number Publication date
US20150331944A1 (en) 2015-11-19
WO2014106384A1 (zh) 2014-07-10
EP2916541A1 (en) 2015-09-09
EP2916541A4 (en) 2016-03-23

Similar Documents

Publication Publication Date Title
CN103916626A (zh) 一种监控录像信息提供方法、装置及视频监控系统
US11605229B2 (en) Inmate tracking system in a controlled environment
US11568723B2 (en) Video surveillance and object recognition
US20130148898A1 (en) Clustering objects detected in video
CN105243060B (zh) 一种检索图片的方法及装置
JP2020042834A5 (zh)
KR101561628B1 (ko) 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법
CN105159958B (zh) 一种基于移动终端的图片信息处理的方法及系统
CN110659560A (zh) 一种关联对象的识别方法及系统
CN112200067B (zh) 智能视频事件检测方法、系统、电子设备和存储介质
CN110290346B (zh) 一种基于智能视频分析的招投标视频的获取方法
CN113378616A (zh) 视频分析方法、视频分析的管理方法及相关设备
CN108540760B (zh) 视频监控识别方法、装置和系统
CN108537088B (zh) 监控方法和系统
GB2575388A (en) Method, apparatus and system for discovering and displaying information related to video content
CN114265952B (zh) 一种目标检索方法和装置
CN110876090A (zh) 视频摘要回放方法、装置、电子设备及可读存储介质
CN111291595A (zh) 一种信息关联性处理方法、装置及系统
CN111382306B (zh) 查询视频帧的方法和装置
CN110876029B (zh) 视频摘要回放方法、装置、电子设备及可读存储介质
CN112507824A (zh) 一种视频图像特征识别的方法及系统
US10108861B2 (en) Systems and methods of providing content differentiation between thumbnails
KR20180046586A (ko) 멀티 센싱을 활용한 객체 식별 방법 및 장치
GB2611949A (en) Video surveillance and object recognition
CN117197721A (zh) 一种报警短视频的检索方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140709

WD01 Invention patent application deemed withdrawn after publication