Nothing Special   »   [go: up one dir, main page]

CN104113778B - 一种视频流解码方法及装置 - Google Patents

一种视频流解码方法及装置 Download PDF

Info

Publication number
CN104113778B
CN104113778B CN201410377484.1A CN201410377484A CN104113778B CN 104113778 B CN104113778 B CN 104113778B CN 201410377484 A CN201410377484 A CN 201410377484A CN 104113778 B CN104113778 B CN 104113778B
Authority
CN
China
Prior art keywords
video
buffering areas
dsp buffering
dsp
detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201410377484.1A
Other languages
English (en)
Other versions
CN104113778A (zh
Inventor
邝锐强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Cheetah Network Technology Co Ltd
Original Assignee
Guangzhou Cheetah Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Cheetah Network Technology Co Ltd filed Critical Guangzhou Cheetah Network Technology Co Ltd
Priority to CN201410377484.1A priority Critical patent/CN104113778B/zh
Publication of CN104113778A publication Critical patent/CN104113778A/zh
Priority to PCT/CN2015/085602 priority patent/WO2016015667A1/zh
Application granted granted Critical
Publication of CN104113778B publication Critical patent/CN104113778B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例公开了一种视频流解码方法及装置，一种视频流解码方法，包括：检测数字信号处理器DSP缓冲区是否处于不饱和状态，所述DSP缓冲区用于缓存视频帧数据；如果是，则向DSP缓冲区中插入空白帧EOS，直至DSP缓冲区达到饱和状态；对DSP缓冲区内的帧数据进行解码。应用上述技术方案，在DSP缓冲区处于不饱和状态、DSP缓冲区中残留视频流不能被立即解码的情况下，本发明实施例能够采用向DSP缓冲区内插入不影响视频流播放效果的空白帧的方法，使该DSP缓冲区快速达到饱和状态，继而对包含上述残留视频流的帧数据进行解码，实现了在不影响该部分视频流后续播放效果的基础上，对上述残留视频流数据的立即解码。

Description

一种视频流解码方法及装置
技术领域
本发明涉及流媒体技术领域，特别涉及一种视频流解码方法及装置。
背景技术
为降低网络环境不稳定给视频流解码带来的影响，在对视频流进行解码之前，具有视频流解码功能的电子设备通常会在本地预先建立视频流缓冲区，比如图1中的H.264缓冲区；此外，为合理分配CPU(Central Processing Unit，中央处理器)资源，该电子设备通常采用DSP(Digital Signal Processor，数字信号处理器)对视频流进行硬解，其中，该DSP内部有输入缓冲区，为了方便描述，这里将它称作DSP缓冲区。
现有技术中，视频解码过程如图1所示，当网络视频流到达该电子设备时，首先缓存到预先建立的H.264缓冲区，之后H.264缓冲区中的视频流缓存到DSP缓冲区，待DSP缓冲区中充满视频流时，立即将DSP缓冲区中的视频流推送到DSP中的DSP解码器内进行解码。
然而，由于DSP缓冲区中的视频流只能来源于H.246缓冲区，在网络中的视频流发生堵塞的情况下，网络视频流不能够持续地缓存到H.246缓冲区，H.264缓冲区中的视频流很快就会被耗尽，而DSP缓冲区仍有可能未被充满，此时，DSP缓冲区中残留的视频流不能被立即解码，只有等待其他来自H.264缓冲区中的视频流填满该DSP缓冲区时，这部分残留的视频流才能够被解码，这就导致DSP缓冲区中残留视频流被延时解码。
发明内容
为了解决上述问题，本发明实施例公开了一种视频流解码方法及装置，具体技术方案如下：
一种视频流解码方法，包括：
检测数字信号处理器DSP缓冲区是否处于不饱和状态，其中，所述DSP缓冲区用于缓存视频帧数据；
如果是，则向DSP缓冲区中插入空白帧EOS，直至该DSP缓冲区达到饱和状态；
对DSP缓冲区内的帧数据进行解码。
优选的，在所述检测数字信号处理器DSP缓冲区是否处于不饱和状态之前，还包括：
检测当前是否有视频流数据缓存到所述DSP缓冲区，如果否，则执行所述检测数字信号处理器DSP缓冲区是否处于不饱和状态，其中，所述视频流数据为：预先建立的视频数据缓冲区中的视频帧数据，所述预先建立的视频数据缓冲区用于缓存来源于网络服务器侧的视频帧数据。
优选的，所述检测数字信号处理器DSP缓冲区是否处于不饱和状态，包括：
实时检测DSP缓冲区是否处于不饱和状态；
或
根据预设的检测周期，周期性地检测DSP缓冲区是否处于不饱和状态。
优选的，所述检测数字信号处理器DSP缓冲区是否处于不饱和状态，包括：
检测DSP缓冲区处于不饱和状态的时长是否超过预设的阈值。
优选的，所述检测数字信号处理器DSP缓冲区是否处于不饱和状态，包括：
检测DSP缓冲区中是否存在来自预先建立的视频数据缓冲区中的视频帧数据，且未被视频帧数据充满。
优选的，所述对DSP缓冲区内的帧数据进行解码，包括：
对DSP缓冲区内的携带有网络标识的视频帧进行解码，所述携带有网络标识的视频帧为来源于预先建立的视频流缓冲区的帧数据。
一种视频流解码装置，包括：
第一检测模块，用于检测数字信号处理器DSP缓冲区是否处于不饱和状态，其中，所述DSP缓冲区用于缓存视频帧数据；
空白帧填充模块，用于在所述第一检测模块的检测结果为是的情况下，向DSP缓冲区中插入空白帧EOS，直至该DSP缓冲区达到饱和状态；
解码模块，用于对DSP缓冲区内的帧数据进行解码。
优选的，该装置还包括：
第二检测模块，用于检测当前是否有视频流数据缓存到所述DSP缓冲区，并在检测结果为否的情况下，触发所述第一检测模块进行工作，其中，所述视频流数据为：预先建立的视频数据缓冲区中的视频帧数据，所述预先建立的视频数据缓冲区用于缓存来源于网络服务器侧的视频帧数据。
优选的，所述第一检测模块，具体用于：
实时检测DSP缓冲区是否处于不饱和状态；
或
根据预设的检测周期，周期性地检测DSP缓冲区是否处于不饱和状态。
优选的，所述第一检测模块，具体用于：
检测DSP缓冲区处于不饱和状态的时长是否超过预设的阈值。
优选的，所述第一检测模块，具体用于：
检测DSP缓冲区中是否存在来自预先建立的视频数据缓冲区中的视频帧数据，且未被视频帧数据充满。
优选的，所述解码模块，具体用于：
对DSP缓冲区内的携带有网络标识的视频帧进行解码，所述携带有网络标识的视频帧为来源于预先建立的视频流缓冲区的帧数据。
本发明实施例通过引入覆盖在待播放视频帧上但不会影响该待播放视频帧展示效果的空白帧，及将该类型空白帧插入到DSP缓冲区的技术，从而实现在DSP缓冲区处于不饱和状态的情况下，立即对DSP缓冲区中的残留视频流进行解码，具体实现步骤如下：在DSP缓存区处于不饱和状态情况下，能够向该DSP缓冲区插入空白帧，直至该DSP缓冲区达到饱和状态；对DSP缓冲区内的帧数据进行解码。
与现有技术相比，在DSP缓冲区处于不饱和状态、DSP缓冲区中残留视频流不能被立即解码的情况下，本发明实施例能够采用向DSP缓冲区内插入不影 响视频流播放效果的空白帧的方法，使该DSP缓冲区快速达到饱和状态，继而对包含上述残留视频流的帧数据进行解码，实现了在不影响该部分视频流后续播放效果的基础上，对上述残留视频流数据的立即解码。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为现有技术中视频流解码方法的示例性流程图；
图2a为本发明实施例提供的一种视频流解码方法的流程图；
图2b为本发明实施例提供的一种视频流解码方法的示例性流程图；
图3为本发明实施例提供的另一种视频流解码方法的流程图；
图4为本发明实施例提供的一种视频流解码装置的结构示意图；
图5为本发明实施例提供的另一种视频流解码装置的结构示意图。
具体实施方式
为了使本领域技术人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
随着网络多媒体技术的快速发展，多元化的网络多媒体文件不断丰富人们视觉和听觉感受；流媒体(比如视频流、音频流等)的出现，使得用户不必像非流式播放方式那样，待整个多媒体文件完全下载到播放设备本地后才能观看其中的内容；而只需经过几秒或几十秒的传输延迟即可在播放设备上对其进行解码及播放，它为用户带来了新的视听体验。
作为视频的一种存在形式，视频流在该视频文件的网络传输、播放设备的解码及播放方面有着重要的作用。为了便于理解，现对视频流的播放过程进行 简要说明：在接收到网络服务器侧发送的视频流后，播放设备首先将该视频流缓存到预先建立的视频流缓冲区(比如图1中的H.264缓冲区)，之后再将该视频流缓存到DSP缓冲区，继而对该网络侧视频流进行解码及播放，为了能够对DSP缓冲区中缓存的网络服务器侧视频流进行实时播放，本发明实施例提供了一种视频流解码方法及装置。
下面首先对本发明实施例提供的一种视频流解码方法进行介绍。
需要说明的是，本发明实施例方法适用于电子设备中，在实际应用中，该电子设备可以为笔记本电脑、台式电脑、平板电脑，及智能手机等等，本发明实施例对此不作限定；
此外，由于目前市场上主流的视频编码方式为H.264，而H.264的四种画质级别BP(Baseline Profile，基本画质)、EP(Extended Profile，进阶画质)、MP(Main Profile，主流画质)、HP(High Profile，高级画质)中BP最为基础，全文将着重以H.264中的BP视频流为例对本发明实施例方法进行介绍。
如图2a所示，一种视频流解码方法，可以包括：
S201，检测数字信号处理器DSP缓冲区是否处于不饱和状态；如果是，转到S202。
通常情况下，DSP(Digital Signal Processor，数字信号处理器)内包含输入缓冲区和输出缓冲区，为了便于描述，在本发明实施例中，将数字信号处理器的输入缓冲区简称为DSP缓冲区，它的主要作用是对进入DSP的视频帧数据进行暂时缓存。
为了能够在网络不稳定的情况(比如网络不稳导致网络服务器侧的H.264视频流会瞬间涌入播放设备)下正常工作，通常会预先在视频播放设备的驱动或硬件中开辟一块视频流缓冲区，来暂时缓存来自网络服务器侧的H.264视频流数据，为了便于描述，在本发明实施例中，将开辟的视频流缓冲区简称为H.264缓冲区，如图2b所示。
可以理解的是，开辟的缓冲区越小，视频流到达DSP缓冲区的延时就越小，该视频流的播放延时也就越小，但可能导致播放不平滑；开辟的缓冲区越大，播放则越平滑，但视频流到达DSP缓冲区的延时就越长。
在本发明实施例中，如图2b所示，网络服务器侧的H.264视频流首先缓存到H.264缓冲区中，H.264缓冲区内的视频流缓存到DSP缓冲区中，检测DSP缓冲区处于不饱和状态可以理解为检测DSP缓冲区是否未被来自H.264缓冲区内的视频帧充满。
可选的，在本发明的一个实施方式中，可以实时检测DSP缓冲区是否处于不饱和状态。
可选的，在本发明的另一个实施方式中，可以根据预设的检测周期，周期性地检测DSP缓冲区是否处于不饱和状态；比如每隔1s对DSP的缓冲区进行一次检测。
需要说明的是，本发明中的预设的检测周期可以为播放设备系统默认的检测周期，或用户根据实际需求自行设定的检测周期，本发明实施例对此不作限定。
S202，向DSP缓存区中插入空白帧EOS，直至该DSP缓冲区达到饱和状态。
本发明实施例中的空白帧可以理解为透明帧，覆盖在具有实际画面内容的视频帧上不会对该视频帧的播放效果产生影响，在H.264编码方式中，该空白帧也被叫做EOS帧。
前面已经提到，只有当DSP缓冲区被充满时，DSP解码器才能够对该处于饱和状态的DSP缓冲区的视频帧进行解码；在本发明实施例中，当由于网络阻塞等原因致使DSP缓冲区处于不饱和状态时，可以向该处于未饱和状态的DSP缓冲区内插入空白帧(如图2b所示)，以使该DSP缓冲区迅速达到饱和状态。
需要说明的是，当DSP缓冲区处于饱和状态时，本发明实施例方法不会继续向该DPS缓冲区中插入空白帧，以避免因DSP缓冲区中帧数据过满而导致的丢帧问题。
S203，对DSP缓冲区内的帧数据进行解码。
在DSP缓冲区达到饱和状态时，可以迫使该DSP缓冲区的包含空白帧在内的帧数据全部溢出，从而实现对该DSP缓冲区内残留的帧数据进行解码。
应用上述技术方案，本发明实施例通过引入覆盖在待播放视频帧上但不会影响该待播放视频帧展示效果的空白帧，及将该类型空白帧插入到DSP缓冲区 的技术，从而实现在DSP缓冲区处于不饱和状态的情况下，立即对DSP缓冲区中的残留视频流进行解码，具体实现步骤如下：在DSP缓存区处于不饱和状态情况下，能够向该DSP缓冲区插入空白帧，直至该DSP缓冲区达到饱和状态；对DSP缓冲区内的帧数据进行解码。
与现有技术相比，在DSP缓冲区处于不饱和状态、DSP缓冲区中残留视频流不能被立即解码的情况下，本发明实施例能够采用向DSP缓冲区内插入不影响视频流播放效果的空白帧的方法，使该DSP缓冲区快速达到饱和状态，继而对包含上述残留视频流的帧数据进行解码，实现了在不影响该部分视频流后续播放效果的基础上，对上述残留视频流数据的立即解码。
可选的，在本发明的一个实施例中，上述S201，可以包括：
检测DSP缓冲区处于不饱和状态的时长是否超过预设的阈值。
可以理解的是，如图2b所示，正常情况下，H.264缓冲区中的H.264视频流缓存到DSP缓冲区只需极短的时间；有时，网络会出现暂时阻塞的问题，但很快会恢复正常，此时DSP缓冲区可能会短暂的处于不饱和状态，很快又会达到饱和状态，且不会对后续的播放效果产生较大的影响。
基于上述情况，在本发明实施例中，可以设置一个不影响整体观看效果的时长阈值，如果DSP缓冲区处于不饱和状态的时长超过时长阈值，则向该DSP缓冲区内插入空白帧，使该DSP缓冲区迅速达到饱和状态；如果DSP缓冲区处于不饱和状态的时长不超过时长阈值(比如上述情况)，则可以不向该DSP缓冲区内插入空白帧。
可选的，在本发明的一个实施例中，上述S201，可以包括：
检测DSP缓冲区中是否存在来自预先建立的视频数据缓冲区中的视频帧数据，且未被视频帧数据充满。
可选的，在本发明的一个实施例中，上述S203，可以包括：
对DSP缓冲区内的携带有网络标识的视频帧数据进行解码；其中，所述携带有网络标识的视频帧为来源于预先建立的视频流缓冲区的帧数据。
可以理解的是，网络服务器侧发送的视频帧数据都携带有时间戳等网络标识，本发明实施例中的携带有网络标识的视频帧数据可以理解为网络服务器侧 发送到播放设备中的视频帧数据，由于网络服务器侧发送的帧数据首先缓存到H.264缓冲区中，故也可以理解为来源于预先建立的H.264缓冲区的视频帧数据。
在本发明实施例中，可以只对包含实质内容的视频帧进行解码，从而维持了该视频帧的原始展示效果。
可选的，在本发明的另一个实施例中，如图3所示，在上述S201之前，还可以包括：
S200，检测当前是否有视频流数据缓存到所述DSP缓存区。
在本发明实施例中，在检测DSP缓冲区是否处于不饱和状态之前，可以通过检测当前是否有视频流数据缓存到该DSP缓冲区，来确定是否需要检测DSP缓冲区是否处于不饱和状态；如果检测到当前没有视频流数据缓存到该DSP缓冲区，则可以确定当前网络阻塞较严重，如果此时该DSP缓冲区中残留部分视频流数据，则可以向该DSP缓冲区插入空白帧，以达到将上述残留视频流数据尽快进行解码的目的。
相应于上面的方法实施例，本发明实施例还提供了一种视频流解码装置。
如图4所示，一种视频流解码装置，可以包括：
第一检测模块401，用于检测数字信号处理器DSP缓冲区是否处于不饱和状态，其中，所述DSP缓冲区用于缓存视频帧数据；
空白帧填充模块402，用于在所述第一检测模块401的检测结果为是的情况下，向DSP缓冲区中插入空白帧EOS，直至该DSP缓冲区达到饱和状态；
解码模块403，用于对DSP缓冲区内的帧数据进行解码。
可选的，在本发明一个实施方式中，所述第一检测模块401，可以用于实时检测DSP缓冲区是否处于不饱和状态。
可选的，在本发明的另一个实施方式中，所述第一检测模块401，可以用于根据预设的检测周期，周期性地检测DSP缓冲区是否处于不饱和状态。
可选的，在本发明的一个实施方式中，所述第一检测模块401，可以用于检测DSP缓冲区处于不饱和状态的时长是否超过预设的阈值。
可选的，在本发明的一个实施例中，所述第一检测模块401，可以用于检测 DSP缓冲区中是否存在来自预先建立的视频数据缓冲区中的视频帧数据，且未被视频帧数据充满。
在本发明的一个实施例中，所述推送模块403，具体用于：
对DSP缓冲区内的携带有网络标识的视频帧进行解码，所述携带有网络标识的视频帧为来源于预先建立的视频流缓冲区的帧数据。
可选的，在本发明的另一个实施例中，如图5所示，该装置还包括：
第二检测模块400，用于检测当前是否有视频流数据缓存到所述DSP缓冲区，并在检测结果为否的情况下，触发所述第一检测模块进行工作，其中，所述视频流数据为：预先建立的视频数据缓冲区中的视频帧数据，所述预先建立的视频数据缓冲区用于缓存来源于网络服务器侧的视频帧数据。
对于装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
为了描述的方便，描述以上装置时以功能分为各种模块分别描述。当然，在实施本发明时可以把各模块的功能在同一个或多个软件和/或硬件中实现。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，所述的程序可以存储于计算机可读 取存储介质中，这里所称得的存储介质，如：ROM/RAM、磁碟、光盘等。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (12)

1.一种视频流解码方法，其特征在于，该方法包括：
检测数字信号处理器DSP缓冲区是否处于不饱和状态，其中，所述DSP缓冲区用于缓存视频帧数据；
如果是，则向DSP缓冲区中插入空白帧EOS，直至该DSP缓冲区达到饱和状态；
对DSP缓冲区内的帧数据进行解码。
2.根据权利要求1所述的方法，其特征在于，在所述检测数字信号处理器DSP缓冲区是否处于不饱和状态之前，还包括：
检测当前是否有视频流数据缓存到所述DSP缓冲区，如果否，则执行所述检测数字信号处理器DSP缓冲区是否处于不饱和状态，其中，所述视频流数据为：预先建立的视频数据缓冲区中的视频帧数据，所述预先建立的视频数据缓冲区用于缓存来源于网络服务器侧的视频帧数据。
3.根据权利要求1所述的方法，其特征在于，所述检测数字信号处理器DSP缓冲区是否处于不饱和状态，包括：
实时检测DSP缓冲区是否处于不饱和状态；
或
根据预设的检测周期，周期性地检测DSP缓冲区是否处于不饱和状态。
4.根据权利要求1所述的方法，其特征在于，所述检测数字信号处理器DSP缓冲区是否处于不饱和状态，包括：
检测DSP缓冲区处于不饱和状态的时长是否超过预设的阈值。
5.根据权利要求1所述的方法，其特征在于，所述检测数字信号处理器DSP缓冲区是否处于不饱和状态，包括：
检测DSP缓冲区中是否存在来自预先建立的视频数据缓冲区中的视频帧数据，且未被视频帧数据充满。
6.根据权利要求5所述的方法，其特征在于，所述对DSP缓冲区内的帧数据进行解码，包括：
对DSP缓冲区内的携带有网络标识的视频帧进行解码，所述携带有网络标识的视频帧为来源于预先建立的视频流缓冲区的帧数据。
7.一种视频流解码装置，其特征在于，该装置包括：
第一检测模块，用于检测数字信号处理器DSP缓冲区是否处于不饱和状态，其中，所述DSP缓冲区用于缓存视频帧数据；
空白帧填充模块，用于在所述第一检测模块的检测结果为是的情况下，向DSP缓冲区中插入空白帧EOS，直至该DSP缓冲区达到饱和状态；
解码模块，用于对DSP缓冲区内的帧数据进行解码。
8.根据权利要求7所述的装置，其特征在于，该装置还包括：
第二检测模块，用于检测当前是否有视频流数据缓存到所述DSP缓冲区，并在检测结果为否的情况下，触发所述第一检测模块进行工作，其中，所述视频流数据为：预先建立的视频数据缓冲区中的视频帧数据，所述预先建立的视频数据缓冲区用于缓存来源于网络服务器侧的视频帧数据。
9.根据权利要求7所述的装置，其特征在于，所述第一检测模块，具体用于：
实时检测DSP缓冲区是否处于不饱和状态；
或
根据预设的检测周期，周期性地检测DSP缓冲区是否处于不饱和状态。
10.根据权利要求7所述的装置，其特征在于，所述第一检测模块，具体用于：
检测DSP缓冲区处于不饱和状态的时长是否超过预设的阈值。
11.根据权利要求7所述的装置，其特征在于，所述第一检测模块，具体用于：
检测DSP缓冲区中是否存在来自预先建立的视频数据缓冲区中的视频帧数据，且未被视频帧数据充满。
12.根据权利要求11所述的装置，其特征在于，所述解码模块，具体用于：
对DSP缓冲区内的携带有网络标识的视频帧进行解码，所述携带有网络标识的视频帧为来源于预先建立的视频流缓冲区的帧数据。
CN201410377484.1A 2014-08-01 2014-08-01 一种视频流解码方法及装置 Expired - Fee Related CN104113778B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201410377484.1A CN104113778B (zh) 2014-08-01 2014-08-01 一种视频流解码方法及装置
PCT/CN2015/085602 WO2016015667A1 (zh) 2014-08-01 2015-07-30 一种视频流解码方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410377484.1A CN104113778B (zh) 2014-08-01 2014-08-01 一种视频流解码方法及装置

Publications (2)

Publication Number Publication Date
CN104113778A CN104113778A (zh) 2014-10-22
CN104113778B true CN104113778B (zh) 2018-04-03

Family

ID=51710390

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410377484.1A Expired - Fee Related CN104113778B (zh) 2014-08-01 2014-08-01 一种视频流解码方法及装置

Country Status (2)

Country Link
CN (1) CN104113778B (zh)
WO (1) WO2016015667A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104113778B (zh) * 2014-08-01 2018-04-03 广州猎豹网络科技有限公司 一种视频流解码方法及装置
CN106792269B (zh) * 2016-08-16 2020-01-24 炫熵（上海）互联网科技有限公司 P2p直播的延时控制系统及方法
CN111193956B (zh) * 2018-11-15 2023-04-18 深圳市茁壮网络股份有限公司 一种视频数据处理方法及视频播放设备
CN111901666B (zh) * 2020-07-01 2021-05-11 腾讯科技（深圳）有限公司 图像处理方法、装置、电子设备以及存储介质
CN112929792B (zh) * 2021-01-21 2022-06-28 稿定（厦门）科技有限公司 基于Sox的音频处理方法、介质、设备及装置
CN113296597B (zh) * 2021-05-08 2022-08-26 展讯通信（上海）有限公司 一种功耗控制方法及终端设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103747317A (zh) * 2013-12-27 2014-04-23 高新兴科技集团股份有限公司 一种播放库在不稳定网络下的流畅播放控制方法
CN103780908A (zh) * 2014-02-25 2014-05-07 成都佳发安泰科技股份有限公司 一种高效的h264解码方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3511988B2 (ja) * 2000-08-10 2004-03-29 日本電気株式会社 フレーム転送装置、フレーム転送方法、フレーム転送システム
JP2002140875A (ja) * 2000-11-01 2002-05-17 Matsushita Electric Ind Co Ltd ディスク再生装置およびディスク読み出し方法
US7130528B2 (en) * 2002-03-01 2006-10-31 Thomson Licensing Audio data deletion and silencing during trick mode replay
US20050048995A1 (en) * 2003-08-25 2005-03-03 Motorola, Inc. System and method for controlling the operating characteristics of a buffer
US7624021B2 (en) * 2004-07-02 2009-11-24 Apple Inc. Universal container for audio data
KR100735276B1 (ko) * 2005-08-18 2007-07-03 삼성전자주식회사 디지털 비디오 방송 시스템에서 다중 프로토콜 캡슐화순방향 오류 정정 프레임의 복호 방법 및 장치
JP2009200938A (ja) * 2008-02-22 2009-09-03 Toshiba Corp バッファ制御装置及び受信装置
CN101651512B (zh) * 2009-09-24 2013-06-05 中兴通讯股份有限公司 一种实现数据业务透明传送的方法、系统及装置
CN102547435B (zh) * 2011-12-16 2014-06-25 Tcl集团股份有限公司 一种多媒体文件播放处理系统及方法
US20130215745A1 (en) * 2012-02-16 2013-08-22 Broadcom Corporation Dynamic buffer management in high-throughput wireless systems
CN103582147A (zh) * 2012-08-03 2014-02-12 上海航天测控通信研究所 一种基于fpga的动态虚拟信道调度器及其调度方法
MY162260A (en) * 2012-09-10 2017-05-31 Mimos Berhad Load balancing of graphics processing units in an image processing system
CN103854653B (zh) * 2012-12-06 2016-12-28 华为技术有限公司 信号解码的方法和设备
CN103596037B (zh) * 2013-11-19 2016-09-28 天津市亚安科技有限公司 一种实时视频流缓冲的控制方法
CN103945221B (zh) * 2014-04-09 2018-08-07 浙江大学 视频编解码方法、装置及生成的视频码流
CN104113778B (zh) * 2014-08-01 2018-04-03 广州猎豹网络科技有限公司 一种视频流解码方法及装置
CN104113777B (zh) * 2014-08-01 2018-06-05 广州猎豹网络科技有限公司 一种音频流解码方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103747317A (zh) * 2013-12-27 2014-04-23 高新兴科技集团股份有限公司 一种播放库在不稳定网络下的流畅播放控制方法
CN103780908A (zh) * 2014-02-25 2014-05-07 成都佳发安泰科技股份有限公司 一种高效的h264解码方法

Also Published As

Publication number Publication date
CN104113778A (zh) 2014-10-22
WO2016015667A1 (zh) 2016-02-04

Similar Documents

Publication Publication Date Title
CN104113777B (zh) 一种音频流解码方法及装置
CN104113778B (zh) 一种视频流解码方法及装置
CN106658133B (zh) 一种音视频同步播放的方法及终端
CN103856812B (zh) 一种视频播放方法及装置
CN109168078B (zh) 一种视频清晰度切换方法及装置
CN107509100A (zh) 音视频同步方法、系统、计算机装置及计算机可读存储介质
CN103200461A (zh) 一种多台播放终端同步播放系统及播放方法
WO2020001536A1 (zh) 一种信息处理方法、装置和系统
CN102271280A (zh) 一种数字音视频变速播放的方法和装置
CN103024603B (zh) 一种用于解决播放网络视频时短时停顿的装置及方法
CN101478683B (zh) 同步音频帧与视频帧
CN108235107A (zh) 视频录制方法、装置及电子终端
US11217279B2 (en) Method and device for adjusting video playback speed
CN105979347A (zh) 一种视频的播放方法和装置
CN106385620A (zh) 一种基于流媒体的数据平滑输出方法
CN106604064A (zh) 一种快速开播方法及装置
CN107801092A (zh) 一种视频倍速播放方法和装置
WO2018086303A1 (zh) 一种广告插播方法、装置及可读存储介质
CN107223334A (zh) 用于将mmtp流转换为mpeg‑2ts的方法和装置
CN106792154A (zh) 视频播放器的跳帧同步系统及其控制方法
CN107517400A (zh) 流媒体播放方法及流媒体播放器
CN108337553A (zh) 一种多媒体数据预下载方法
EP2079233A3 (en) Digital broadcast receiver and digital broadcast receiving method
CN105897759A (zh) 一种网络动态自适应音视频缓存方法及系统
CN104333778A (zh) 一种动态播放缓冲处理方法及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 510623 3101-31063108-3110, Huaxia Road, Guangzhou, Guangdong, Tianhe District

Applicant after: Guangzhou cheetah Network Technology Co.,Ltd.

Address before: 510623 unit 01-B, Guangzhou bank building, No. 30 Zhujiang Road, Guangzhou, Guangdong, Tianhe District, China

Applicant before: GUANGZHOU KINGSOFT NETWORK TECHNOLOGY Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180403

CF01 Termination of patent right due to non-payment of annual fee