CN110933513A - 一种音视频数据传输方法及装置 - Google Patents

Abstract

本发明提供了一种音视频数据传输方法及装置，属于通信技术领域领域。音视频数据传输方法包括：获取音视频数据、以及第一电子设备的网络信号参数，根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包，网络信号参数位于RTP音视频数据包中的RTP包头的扩展头部中，向第二电子设备发送RTP音视频数据包。通过在RTP音视频数据包的RTP包头的扩展头部中添加网络信号参数，可以实现音视频数据与网络信号参数的同步发送，实现网络信号参数的实时交互，可以解决基于RTCP传输控制信息不实时，电子设备不能及时调整音视频编码码率，导致音视频数据的传输效率和传输质量下降的问题。

Description

一种音视频数据传输方法及装置

技术领域

本发明属于通信技术领域，特别是涉及一种音视频数据传输方法及装置。

背景技术

随着信息产业的发展，人们对信息资源的需求已经逐渐由文字和图片过渡到音视频数据。实时传输协议(RTP，Real-time Transport Protocol)与实时传输控制协议(RTCP，Real-time Transport Control Protocol)配合使用，可以实现音视频数据的实时传输。

目前，为了保证传输音视频数据的实时性，在电子设备之间基于RTP实时传输音视频数据。同时为了提高音视频数据的传输效率和传输质量，基于RTCP在各电子设备之间传输控制信息，以使电子设备根据控制信息调整音视频编码码率。

然而，由于基于RTCP传输的控制信息并不是实时传输的，所以并不能及时的实现电子设备之间控制信息的交互，从而导致电子设备不能及时调整音视频编码码率，降低了音视频数据的传输效率和传输质量。

发明内容

本发明提供一种音视频数据传输方法及电子设备，以便解决电子设备不能实时调整音视频编码码率，导致的音视频传输效率和传输质量降低的问题。

为了解决上述技术问题，本发明是这样实现的：

第一方面，本发明实施例提供了一种音视频数据传输方法，应用于第一电子设备，所述方法包括：

获取音视频数据、以及所述第一电子设备的网络信号参数；

根据所述音视频数据和所述网络信号参数，生成实时传输协议RTP音视频数据包，其中，所述网络信号参数位于所述RTP音视频数据包中的RTP包头的扩展头部中；

向第二电子设备发送所述RTP音视频数据包。

第二方面，本发明实施例提供了一种音视频数据传输方法，应用于第二电子设备，所述方法包括：

接收第一电子设备发送的RTP音视频数据包，所述RTP音视频数据包中的RTP包头的扩展头部中添加有所述第一电子设备的网络信号参数；

解析所述RTP音视频数据包，得到所述网络信号参数；

根据所述网络信号参数，调整所述第二电子设备的音视频编码码率，以获得调整后的音视频编码码率。

第三方面，本发明实施例提供了一种音视频数据传输装置，设置于第一电子设备，所述装置包括：

获取模块，用于获取音视频数据、以及所述第一电子设备的网络信号参数；

生成模块，用于根据所述音视频数据和所述网络信号参数，生成实时传输协议RTP音视频数据包，其中，所述网络信号参数位于所述RTP音视频数据包中的RTP包头的扩展头部中；

发送模块，用于向第二电子设备发送所述RTP音视频数据包。

第四方面，本发明实施例提供了一种音视频数据传输装置，设置于第二电子设备，所述装置包括：

接收模块，用于接收第一电子设备发送的RTP音视频数据包，所述RTP音视频数据包中的RTP包头的扩展头部中添加有所述第一电子设备的网络信号参数；

解析模块，用于解析所述RTP音视频数据包，得到所述网络信号参数；

调整模块，用于根据所述网络信号参数，调整所述第二电子设备的音视频编码码率，以获得调整后的音视频编码码率。

在本发明实施例中，第一电子设备获取音视频数据、以及第一电子设备的网络信号参数，根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包，网络信号参数位于RTP音视频数据包中的RTP包头的扩展头部中，向第二电子设备发送RTP音视频数据包，第二电子设备可以根据RTP音视频数据包中的RTP包头的扩展头部中的网络信号参数，实时调整音视频编码码率，得到适合当前时刻网络状况的编码码率，采用调整后的音视频编码码率传输音视频数据。本发明实施例中，通过在RTP音视频数据包的RTP包头的扩展头部中添加网络信号参数，可以实现音视频数据与网络信号参数的同步发送，实现网络信号参数的实时交互，可以解决基于RTCP传输控制信息不实时，电子设备不能及时调整音视频编码码率，导致音视频数据的传输效率和传输质量下降的问题。

附图说明

图1示出了本发明实施例中提供的一种音视频数据传输方法的步骤流程图；

图2示出了本发明实施例中提供的一种包括扩展头部的RTP包头的结构示意图；

图3示出了本发明实施例中提供的一种音视频数据传输方法的步骤流程图；

图4示出了本发明实施例中提供的一种未包括扩展头部的RTP包头的结构示意图；

图5示出了本发明实施例中提供的一种RTP包头的扩展头部的结构示意图；

图6示出了本发明实施例中提供的一种RTP协议一字节扩展头部的结构示意图；

图7示出了本发明实施例中提供的一种RTP协议二字节扩展头部的结构示意图；

图8示出了本发明实施例中提供的一种音视频数据传输装置的结构框图；

图9示出了本发明实施例中提供的另一种音视频数据传输装置的结构框图；

图10示出了本发明实施例中提供的又一种音视频数据传输装置的结构框图；

图11示出了本发明实施例中提供的再一种音视频数据传输装置的结构框图；

图12示出了本发明实施例中提供的电子设备的硬件结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

参照图1，示出了本发明实施例中提供的一种音视频数据传输方法的步骤流程图，该方法可以应用于第一电子设备，如图1所示，该方法可以包括如下步骤：

步骤101、获取音视频数据、以及第一电子设备的网络信号参数。

其中，第一电子设备可以为手机、计算机、服务器等可进行音视频数据传输的电子设备。音视频数据为第一电子设备需要发送至其他电子设备的音视频数据，音视频数据可以是第一电子设备预先存储的音视频数据，也可以是第一电子设备实时接收到的用户输入的音视频数据。网络信号参数可以为表示第一电子设备当前网络的信号质量的参考信号功率、参考信号质量、接收信号强度、信噪比等网络信号参数中的至少一个种。例如，若第一电子设备正在使用第四代移动通信技术(4G，the 4th generation mobile communicationtechnology)进行音视频数据的传输，则第一电子设备的网络信号参数可以包括4G网络当前的参考信号功率、参考信号质量、接收信号强度、信噪比等网络信号参数中的至少一种。若第一电子设备正在使用第五代移动通信技术(5G，the 5th generation mobilecommunication technology)进行音视频数据的传输，则第一电子设备的网络信号参数可以包括5G网络的参考信号功率、参考信号质量、接收信号强度、信噪比等网络信号参数中的至少一种。实际使用时，网络信号参数中包括的具体参数可以根据需求设置，本实施例对此不做限制。

本发明实施例中，第一电子设备可以从预设的存储位置中获取音视频数据，也可以直接接收用户输入的音视频数据。第一电子设备可以采集当前网络的网络信号参数中的至少一种，得到网络信号参数。第一电子设备获取音视频数据，以及网络信号参数的过程可以根据需求设置，本实施例对此不做限制。

需要说明的是，第一电子设备获取音视频数据和获取网络信号参数的过程可以同步进行，也可以分步进行，本实施例对此不做限制。

步骤102、根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包。

其中，网络信号参数位于RTP音视频数据包中的RTP包头的扩展头部中。

需要说明的是，第一电子设备采用RTP进行音视频数据的发送，RTP提供扩展机制，允许在RTP数据包的RTP包头中增加一个字节或两个字节的扩展头部，用于实现个性化的功能开发。参照图2，示出了本发明实施例中提供的一种包括扩展头部的RTP包头的结构示意图，如图2所示，可以设置RTP包头中的扩展位(X)202，以在RTP包头201中增加扩展头部203。RTP包头的具体结构，设置RTP包头中的扩展位(X)，以及在RTP包头中增加扩展头部的过程可参考现有技术，本实施例对此不做详细描述。

本实施例中，第一电子设备获取到音视频数据后，可以设置RTP包头，获得包括扩展头部的RTP包头，将获取到的网络信号参数添加到RTP包头的扩展头部中，并将添加有网络信号参数的RTP包头和音视频数据封装为RTP音视频数据包，获得添加有网络信号参数的RTP音视频数据包。

步骤103、向第二电子设备发送RTP音视频数据包。

现有技术中，在使用RTP传输音视频数据的过程中，通过RTCP传输字节数、分组数、丢失分组数等控制信息，电子设备利用RTCP传输的控制信息动态调整音视频编码码率。由于采用RTCP传输控制信息，而RTCP的传输却不是实时的，一般情况下，对RTP音频数据包是五秒反馈一次，对RTP视频数据包是一秒反馈一次。也就是说利用RTCP传输的控制信息具有滞后性，从而使得电子设备不能根据实时的控制信息及时的调整音视频编码码率。例如，第二电子设备在第20秒接收到第一电子设备传输的RTP数据包时，接着在第25秒接收到与该RTP数据包对应的控制信息，该控制信息只能反映第20秒的网络状况，并不能反映当前时刻(也即第25秒时)的网络状况，因此第二电子设备并不能根据该RTCP数据包对应的控制信息及时的调整音视频编码码率。

而本发明实施例中，第一电子设备可以将网络信号参数添加到RTP音视频数据包中的RTP包头的扩展头部中，向第二电子设备发送添加有网络信号参数的RTP音视频数据包。第二电子设备接收到第一电子设备发送的RTP音视频数据包后，可以解析RTP音视频数据包，获取RTP音视频数据包中RTP包头的扩展头部中的网络信号参数，可以得到第一电子设备实时的网络信号参数，并根据得到的网络信号参数，结合已经获得的历史网络信号参数，准确的判断第一电子设备的信号变化趋势，计算出适合当前时刻信号状况的音视频编码码率，将音视频编码码率及时调整为适合当前时刻网络状况的编码码率。由于编码码率指数据传输时单位时间传送的数据位数，一般我们用的单位是kbps即千位每秒，也即每秒要发出去的数据量，传输速率是当前网络中每秒可以传输的数据量，如果第二电子设备每秒发送的数据量大于网络每秒可以传输的数据量(即编码码率大于传输速率)，会造成部分数据延迟发送，造成音视频卡顿的问题。相反的，如果第二电子设备每秒发送的数据量远小于网络每秒可以传输的数据量，则会出现在较高的网络条件下，传输编码码率较低的音视频数据的情况，获得质量较差的音视频资源(音视频资源不清晰)，造成网络资源的浪费。而本实施例中第二电子设备可以将音视频编码码率调整为适合当前网络状况的编码码率，因此可以在一定程度上降低音视频卡顿问题，提高音视频数据的传输效率和质量。其中，第二电子设备根据第一电子设备的网络信号参数，计算第二电子设备的音视频编码码率的过程可参考现有技术，本实施例对此不作详细描述。

综上所述，本发明实施例一提供的用于音视频数据的传输方法，第一电子设备获取音视频数据、以及第一电子设备的网络信号参数，根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包，网络信号参数位于RTP音视频数据包中的RTP包头的扩展头部中，向第二电子设备发送RTP音视频数据包，第二电子设备可以根据RTP音视频数据包中的RTP包头的扩展头部中的网络信号参数，实时调整音视频编码码率，得到适合当前时刻网络状况的编码码率，采用调整后的音视频编码码率传输音视频数据。本发明实施例中，通过在RTP音视频数据包中的RTP包头的扩展头部中添加网络信号参数，可以实现音视频数据与网络信号参数的同步发送，实现网络信号参数的实时交互，可以解决基于RTCP传输控制信息不实时，电子设备不能及时调整音视频编码码率，导致音视频数据的传输效率和传输质量下降的问题。

参照图3，示出了本发明实施例中提供的一种音视频数据传输方法的步骤流程图，如图3所示，该方法可以包括：

步骤301、第一电子设备获取音视频数据、以及第一电子设备的网络信号参数。

本实施例中，第一电子设备获取音视频数据、以及第一电子设备的网络信号参数的过程可参考步骤101，本实施例在此不做赘述。

步骤302、第一电子设备设置RTP包头，获得包括扩展头部的RTP包头。

本发明实施例中，在获得音视频数据和信号状况参数后，可以设置RTP包头，参照图4，示出了本发明实施例中提供的一种未包括扩展头部的RTP包头的结构示意图，参照图4，可以对RTP包头中的版本号、扩展位和时间戳等参数进行设置，得到如图2所示的包括扩展头部203的RTP包头。

步骤303、第一电子设备将网络信号参数添加在RTP包头的扩展头部中。

本发明实施例中，第一电子设备在设置RTP包头，获得包括扩展头部的RTP包头后，可以将获取到的网络信号参数添加到RTP包头的扩展头部中。参照图5，示出了本发明实施例中提供的一种RTP包头的扩展头部的结构示意图，可以将网络信号参数添加在如图5所示的扩展头部中。

可选的，在将网络信号参数添加在RTP包头的扩展头部中之前，第一电子设备可以对网络信号参数进行编码，得到编码后的网络信号参数。

相应的，将网络信号参数添加在RTP包头的扩展头部中的步骤，可以包括：将编码后的网络信号参数添加在RTP包头的扩展头部中。

本发明实施例中，在获取到网络信号参数后，可以对获得的网络信号参数进行编码，以压缩网络信号参数，降低网络信号参数的数据量。例如，若网络信号参数为当前网络的参考信号功率，参考信号功率的原始数据范围在-44分贝毫瓦至-140分贝毫瓦之间，以原始数据传输参考信号功率时，至少需要7比特。因此，可以对参考信号功率进行分级编码，将参考信号功率设置为7级。例如：0级：参考信号功率<-125分贝毫瓦；1级：-125分贝毫瓦≤参考信号功率<-115分贝毫瓦；2级：-115分贝毫瓦≤参考信号功率<-105分贝毫瓦；3级：-105分贝毫瓦≤参考信号功率<-95分贝毫瓦；4级：-95分贝毫瓦≤参考信号功率<-85分贝毫瓦；5级：-85分贝毫瓦≤参考信号功率<-75分贝毫瓦；6级：参考信号功率≥-75分贝毫瓦。可知，在编码后，只需传输参考信号功率对应的级别，不需要传输原始的参考信号功率，此时传输参考信号功率只需要3比特。

获得编码后的网络信号参数，可以将编码后的网络信号参数添加到RTP包头的扩展头部中。例如，若当前的参考信号功率为110分贝毫瓦，编码后获得的网络信号参数为2(110分贝毫瓦参考信号功率对应的级别)，则可以将网络信号参数2添加到扩展头部中。实际使用时，网络信号参数的编码方式可以根据需求设置，本实施例对此不做限制。

为了对扩展头部进行详细介绍，在此结合图6和图7进行示例说明。图6示出了本发明实施例中提供的一种RTP协议一字节扩展头部的结构示意图，图7示出了本发明实施例中提供的一种RTP协议二字节扩展头部的结构示意图。本实施例中，通过对网络信号参数进行编码，可以降低网络信号参数的数据量，减少添加到RTP包头的扩展头部中的数据量，例如可以将图7中的二字节扩展头部替换为图6中的一字节扩展头部。同时，在RTP包头的扩展头部的容量有限的情况下(一个字节扩展头部或两个字节扩展头部)，可以增加传输数据的种类，例如在传输参考信号功率的同时，传输接收信号强度、信噪比等参数。

步骤304、第一电子设备将音视频数据和添加网络信号参数后的RTP包头封装为RTP音视频数据包。

本实施例中，结合图2、图4和图5，可以将添加有网络信号参数的扩展头部、RTP包头和音、视频数据封装为RTP音视频数据包，封装过程可参考现有技术中封装RTP数据包的过程，本实施例在此不做详细描述。

步骤305、第一电子设备向第二电子设备发送RTP音视频数据包。

本实施例中，第一电子设备向第二电子设备发送RTP音视频数据包的过程可参考现有技术，本实施例对此不做详细描述。

步骤306，第二电子设备接收第一电子设备发送的RTP音视频数据包。

其中，RTP音视频数据包中的RTP包头的扩展头部中添加有第一电子设备的网络信号参数。

本实施例中，第二电子设备接收第一电子设备发送的RTP音视频数据包的过程可参考现有技术，本实施例对此不做详细描述。

步骤307，第二电子设备解析RTP音视频数据包，得到网络信号参数。

本发明实施例中，第二电子设备接收到第一电子设备发送的RTP音视频数据包后，可以解析RTP音视频数据包，获取RTP音视频数据包中的音视频数据，对获得的音视频数据进行播放和/或存储。同时，可以获取位于RTP包头的扩展头部中的网络信号参数。第二电子设备解析RTP音视频数据包的过程可参考现有技术，本实施例对此不做详细描述。

步骤308，第二电子设备根据网络信号参数，调整第二电子设备的音视频编码码率，以获得调整后的音视频编码码率。

本发明实施例中，第二电子设备在获得第一电子设备的网络信号参数后，可以根据获得第一电子设备的网络信号参数对第二电子设备的音视频编码码率进行调整。

其中，在网络信号参数为编码后的网络信号参数时，在根据网络信号参数，调整第二电子设备的音视频编码码率之前，第二电子设备可以对编码后的网络信号参数进行解码，得到解码后的网络信号参数。

相应的，第二电子设备可以根据解码后的网络信号参数，调整第二电子设备的音视频编码码率，获得调整后的音视频编码码率。

本发明实施例中，第二电子设备可以对编码后的网络信号参数进行解码，得到解码后的网络信号参数。例如，结合步骤302至步骤304，若RTP包头的扩展头部中的网络信号参数为2，则对网络信号参数进行解码后，可以确定第一电子设备的参考信号功率在115至105分贝毫瓦之间。实际使用时，第二电子设备对编码后的网络信号参数进行解码的方法，可以根据第一电子设备的编码方法进行设置，本实施例对此不做限制。

示例的，第一电子设备在通过RTP向第二电子设备发送音视频数据的过程中，可以在每个RTP音视频数据包的RTP包头的扩展头部中添加第一电子设备的参考信号功率。第二电子设备接收第一电子设备发送的每个RTP音视频数据包，记录解析得到的每个RTP音视频数据包中的参考信号功率，根据记录的参考信号功率和当前时刻接收得到的RTP音视频数据包中的参考信号功率判断第一电子设备的信号变化趋势。例如，结合步骤301至步骤307，若当前时刻接收到的参考信号功率的级别为2，第二电子设备在当前时刻之前接收到的参考信号功率的级别按记录的时间顺序依次为6、5、3，则可以确定第一电子设备的信号质量逐渐下降，处于下降趋势。此时，第二电子设备可以降低当前的音频编码码率，将当前的音视频编码码率12.65HZ调整为8.85HZ，8.85HZ为调整后的音视频编码码率。同理，若根据记录的参考信号功率确定第一电子设备的信号质量处于上升趋势，则第二电子设备可以提高当前的音频频编码码率，可以将当前的音视频编码码率12.65HZ调整为14.25HZ，14.25HZ为调整后的音视频编码码率。实际使用中，第二电子设备根据第一电子设备的信号质量趋势调整第二电子设备的音视频编码码率的方法可以根据需求设置，本实施例对此不做限制。

本实施例中，第二电子设备也可以结合自身的网络信号参数，以及RTP/RTCP原有的丢包判断机制，调整音视频编码码率。第二电子设备根据解码后的网络信号参数，结合自身的网络信号参数，以及RTP/RTCP原有的丢包判断机制调整第二电子设备的音视频编码码率的方法可以根据需求设置，本实施例对此不做限制。

第一电子设备通过将实时的网络信号参数添加到正在发送的RTP音视频数据包中的RTP包头的扩展头部中，可以将当前时刻的网络信号参数实时的发送至第二电子设备，提高了网络信号参数传输的实时性，可以使第二电子设备根据实时的网络信号参数及时调整第二电子设备的音视频编码码率，使音视频编码码率适合当前时刻的网络状况。

可选的，在调整第二电子设备的编码码率，获得调整后的音视频编码码率之后，第二电子设备可以向第一电子设备发送调整后的音视频编码码率。

本发明实施例中，第二电子设备在根据第一电子设备的网络信号参数调整得到调整后的音视频编码码率后，可以将调整得到的音视频编码码率发送至第一电子设备，以使第一电子设备根据调整后的音视频编码码率，调整第一电子设备的音视频编码码率，实现第一电子设备与第二电子设备之间音视频编码码率的统一，使第一电子设备和第二电子设备采用调整后的编码码率进行音视频数据的传输。

示例的，若第二电子设备通过自适应多速率宽带(Adaptive Multi-RateWideband，AMR-WB)进行音频数据的编码，则可以在向第一电子设备发送的音频数据包的头域中配置调整后的音视频编码码率，第一电子设备接收到第二电子设备发送的音频数据包后，根据音频数据包头域中的音视频编码码率，调整第一电子设备的音视频编码码率。实际使用时，第二电子设备也可以将调整后的音视频编码码率通过RTCP发送至第二电子设备，第二电子设备向第一电子发送调整后的音视频编码码率的方法可以根据需求设置，本实施例对此不做限制。

综上所述，本发明实施例二提供的音视频数据传输方法，第一电子设备获取音视频数据、以及第一电子设备的网络信号参数，根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包，向第二电子设备发送RTP音视频数据包，第二电子设备可以根据RTP音视频数据包中的RTP包头的扩展头部中的网络信号参数，实时调整第二电子设备的音视频编码码率。本发明实施例中，通过在RTP音视频数据包的RTP包头的扩展头部中添加网络信号参数，可以实现音视频数据与网络信号参数的同步发送，实现网络信号参数的实时交互，可以解决基于RTCP传输控制信息不实时，不能及时调整音视频编码码率，导致音视频数据的传输效率和传输质量下降的问题。

图8示出了本发明实施例中提供的一种音视频数据传输装置的结构框图，如图8所示，该装置800可以设置于第一电子设备，可以包括：获取模块801、生成模块802和发送模块803。

获取模块801用于获取音视频数据、以及第一电子设备的网络信号参数。

生成模块802用于根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包，其中，网络信号参数位于RTP音视频数据包中的RTP包头的扩展头部中。

发送模块803用于向第二电子设备发送RTP音视频数据包。

可选的，参照图9，示出了本发明实施例中提供的另一种音视频数据传输装置的结构框图，装置900包括的生成模块802可以包括：

设置单元8021，用于设置RTP包头，获得包括扩展头部的RTP包头；

添加单元8022，用于将网络信号参数添加在RTP包头的扩展头部中；

封装单元8023，用于将音视频数据和添加网络信号参数后的RTP包头封装为RTP音视频数据包。

可选的，生成模块802还可以包括：编码单元8024。

编码模块8024用于在将网络信号参数添加在RTP包头的扩展头部中之前，对网络信号参数进行编码，得到编码后的网络信号参数。

添加单元8022具体用于将编码后的网络信号参数添加在RTP包头的扩展头部中。

综上所述，本发明实施例提供的音视频数据传输装置能够实现图1的方法实施例中各个过程，为避免重复，这里不再赘述。本发明实施例提供的音视频数据传输装置，获取模块用于获取音视频数据、以及第一电子设备的网络信号参数，生成模块用于根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包，其中，网络信号参数位于RTP音视频数据包中的RTP包头的扩展头部中，向第二电子设备发送RTP音视频数据包。本发明实施例中，通过在RTP音视频数据包的RTP包头的扩展头部中添加网络信号参数，可以实现音视频数据与网络信号参数的同步发送，实现网络信号参数的实时交互，可以解决基于RTCP传输控制信息不实时，电子设备不能及时调整音视频编码码率，导致音视频数据的传输效率和传输质量下降的问题。

参照图10，图10示出了本发明实施例中提供的又一种音视频数据传输装置的结构框图，如图10所示，该装置1000设置于第二电子设备，可以包括：

接收模块1001用于接收第一电子设备发送的RTP音视频数据包，RTP音视频数据包中的RTP包头的扩展头部中添加有第一电子设备的网络信号参数。

解析模块1002用于解析RTP音视频数据包，得到网络信号参数。

调整模块1003用于根据网络信号参数，调整第二电子设备的音视频编码码率。

可选的，参照图11，示出了本发明实施例中提供的再一种音视频数据传输装置的结构框图。网络信号参数为编码后的网络信号参数，该装置1100还可以包括：解码模块1101。

解码模块1101用于在根据网络信号参数，调整第二电子设备的音视频编码码率之前，对编码后的网络信号参数进行解码，得到解码后的网络信号参数。

调整模块1003具体用于根据解码后的网络信号参数，调整第二电子设备的音视频编码码率，以获得调整后的音视频编码码率。

可选的，装置1100还包括：发送模块1102。

发送模块1102用于向第一电子设备发送调整后的音视频编码码率，以使第一电子设备根据调整后的音视频编码码率，调整第一电子设备的音视频编码码率。

综上所述，本发明实施例提供的音视频数据传输装置，接收模块用于接收第一电子设备发送的RTP音视频数据包，RTP音视频数据包中的RTP包头的扩展头部中添加有第一电子设备的网络信号参数，解析模块用于解析RTP音视频数据包，获得网络信号参数，调整模块用于根据网络信号参数，调整第二电子设备的音视频编码码率，获得调整后的音视频编码码率。本发明实施例中，通过在RTP音视频数据包的RTP包头的扩展头部中添加网络信号参数，可以实现音视频数据与网络信号参数的同步发送，实现网络信号参数的实时交互，可以解决基于RTCP传输控制信息不实时，不能及时调整音视频编码码率，导致音视频数据的传输效率和传输质量下降的问题。

图12为实现本发明各个实施例的一种电子设备的硬件结构示意图，

该电子设备1200包括但不限于：射频单元1201、网络模块1202、音频输出单元1203、输入单元1204、传感器1205、显示单元1206、用户输入单元1207、接口单元1208、存储器1209、处理器1210、以及电源1211等部件。本领域技术人员可以理解，图12中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、以及计步器等。

其中，处理器1210，用于获取音视频数据、以及第一电子设备的网络信号参数。

处理器1210，用于根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包，其中，网络信号参数位于RTP音视频数据包中的RTP包头的扩展头部中。

处理器1210，用于向第二电子设备发送RTP音视频数据包。

本发明实施例中，电子设备可以获取音视频数据、以及该电子设备的网络信号参数，根据音视频数据和网络信号参数，生成实时传输协议RTP音视频数据包，网络信号参数位于RTP音视频数据包中的RTP包头的扩展头部中，向第二电子设备发送RTP音视频数据包。本发明实施例中，通过在RTP音视频数据包的RTP包头的扩展头部中添加网络信号参数，可以实现音视频数据与网络信号参数的同步发送，实现网络信号参数的实时交互，可以解决基于RTCP传输控制信息不实时，电子设备不能及时调整音视频编码码率，导致音视频数据的传输效率和传输质量下降的问题。

应理解的是，本发明实施例中，射频单元1201可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器1210处理；另外，将上行的数据发送给基站。通常，射频单元1201包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元1201还可以通过无线通信系统与网络和其他设备通信。

电子设备通过网络模块1202为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

音频输出单元1203可以将射频单元1201或网络模块1202接收的或者在存储器1209中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元1203还可以提供与电子设备1200执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元1203包括扬声器、蜂鸣器以及受话器等。

输入单元1204用于接收音频或视频信号。输入单元1204可以包括图形处理器(Graphics Processing Unit，GPU)12041和麦克风12042，图形处理器12041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元1206上。经图形处理器12041处理后的图像帧可以存储在存储器1209(或其它存储介质)中或者经由射频单元1201或网络模块1202进行发送。麦克风12042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元1201发送到移动通信基站的格式输出。

电子设备1200还包括至少一种传感器1205，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板12061的亮度，接近传感器可在电子设备1200移动到耳边时，关闭显示面板12061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器1205还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

显示单元1206用于显示由用户输入的信息或提供给用户的信息。显示单元1206可包括显示面板12061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板12061。

用户输入单元1207可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元1207包括触控面板12071以及其他输入设备12072。触控面板12071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板12071上或在触控面板12071附近的操作)。触控面板12071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器1210，接收处理器1210发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板12071。除了触控面板12071，用户输入单元1207还可以包括其他输入设备12072。具体地，其他输入设备12072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

进一步的，触控面板12071可覆盖在显示面板12061上，当触控面板12071检测到在其上或附近的触摸操作后，传送给处理器1210以确定触摸事件的类型，随后处理器1210根据触摸事件的类型在显示面板12061上提供相应的视觉输出。虽然在图5中，触控面板12071与显示面板12061是作为两个独立的部件来实现电子设备的输入和输出功能，但是在某些实施例中，可以将触控面板12071与显示面板12061集成而实现电子设备的输入和输出功能，具体此处不做限定。

接口单元1208为外部装置与电子设备1200连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元1208可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到电子设备1200内的一个或多个元件或者可以用于在电子设备1200和外部装置之间传输数据。

存储器1209可用于存储软件程序以及各种数据。存储器1209可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器1209可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器1210是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器1209内的软件程序和/或模块，以及调用存储在存储器1209内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。处理器1210可包括一个或多个处理单元；优选的，处理器1210可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1210中。

电子设备1200还可以包括给各个部件供电的电源1211(比如电池)，优选的，电源1211可以通过电源管理系统与处理器1211逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外，电子设备1200包括一些未示出的功能模块，在此不再赘述。

优选的，本发明实施例还提供一种电子设备，包括处理器1210，存储器1209，存储在存储器1209上并可在所述处理器1210上运行的计算机程序，该计算机程序被处理器1210执行时实现上述音视频数据传输方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述音视频数据传输方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random AccessMemory，简称RAM)、磁碟或者光盘等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台电子设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims (12)

1.一种音视频数据传输方法，其特征在于，应用于第一电子设备，所述方法包括：

获取音视频数据、以及所述第一电子设备的网络信号参数；

根据所述音视频数据和所述网络信号参数，生成实时传输协议RTP音视频数据包，其中，所述网络信号参数位于所述RTP音视频数据包中的RTP包头的扩展头部中；

向第二电子设备发送所述RTP音视频数据包。

2.根据权利要求1所述的方法，其特征在于，所述根据所述音视频数据和所述网络信号参数，生成实时传输协议RTP音视频数据包，包括：

设置所述RTP包头，获得包括所述扩展头部的所述RTP包头；

将所述网络信号参数添加在所述RTP包头的所述扩展头部中；

将所述音视频数据和添加所述网络信号参数后的所述RTP包头封装为所述RTP音视频数据包。

3.根据权利要求2所述的方法，其特征在于，在将所述网络信号参数添加在所述RTP包头的所述扩展头部中之前，还包括；

对所述网络信号参数进行编码，得到编码后的网络信号参数；

所述将所述网络信号参数添加在所述RTP包头的所述扩展头部中，包括：

将所述编码后的网络信号参数添加在所述RTP包头的所述扩展头部中。

4.一种音视频数据传输方法，其特征在于，应用于第二电子设备，所述方法包括：

接收第一电子设备发送的RTP音视频数据包，所述RTP音视频数据包中的RTP包头的扩展头部中添加有所述第一电子设备的网络信号参数；

解析所述RTP音视频数据包，得到所述网络信号参数；

根据所述网络信号参数，调整所述第二电子设备的音视频编码码率，以获得调整后的音视频编码码率。

5.根据权利要求4所述的方法，其特征在于，所述网络信号参数为编码后的网络信号参数，在所述根据所述网络信号参数，调整所述第二电子设备的音视频编码码率之前，还包括：

对所述编码后的网络信号参数进行解码，得到解码后的网络信号参数；

所述根据所述网络信号参数，调整所述第二电子设备的音视频编码码率，包括：

根据所述解码后的网络信号参数，调整所述第二电子设备的音视频编码码率，以获得调整后的音视频编码码率。

6.根据权利要求4所述的方法，其特征在于，在所述调整所述第二电子设备的编码码率，以获得调整后的音视频编码码率之后，还包括：

向所述第一电子设备发送所述调整后的音视频编码码率，以使所述第一电子设备根据所述调整后的音视频编码码率，调整所述第一电子设备的音视频编码码率。

7.一种音视频数据传输装置，其特征在于，设置于第一电子设备，所述装置包括：

获取模块，用于获取音视频数据、以及所述第一电子设备的网络信号参数；

生成模块，用于根据所述音视频数据和所述网络信号参数，生成实时传输协议RTP音视频数据包，其中，所述网络信号参数位于所述RTP音视频数据包中的RTP包头的扩展头部中；

发送模块，用于向第二电子设备发送所述RTP音视频数据包。

8.根据权利要求7所述的装置，其特征在于，所述生成模块，包括：

设置单元，用于设置所述RTP包头，获得包括所述扩展头部的所述RTP包头；

添加单元，用于将所述网络信号参数添加在所述RTP包头的所述扩展头部中；

封装单元，用于将所述音视频数据和添加所述网络信号参数后的所述RTP包头封装为所述RTP音视频数据包。

9.根据权利要求8所述的装置，其特征在于，所述生成模块还包括：

编码单元，用于在将所述网络信号参数添加在所述RTP包头的所述扩展头部中之前，对所述网络信号参数进行编码，得到编码后的网络信号参数；

所述添加单元，具体用于将所述编码后的网络信号参数添加在所述RTP包头的所述扩展头部中。

10.一种音视频数据传输装置，其特征在于，设置于第二电子设备，所述装置包括：

接收模块，用于接收第一电子设备发送的RTP音视频数据包，所述RTP音视频数据包中的RTP包头的扩展头部中添加有所述第一电子设备的网络信号参数；

解析模块，用于解析所述RTP音视频数据包，得到所述网络信号参数；

调整模块，用于根据所述网络信号参数，调整所述第二电子设备的音视频编码码率，以获得调整后的音视频编码码率。

11.根据权利要求10所述的装置，其特征在于，所述网络信号参数为编码后的网络信号参数，所述装置还包括：

解码模块，用于在所述根据所述网络信号参数，调整所述第二电子设备的音视频编码码率之前，对所述编码后的网络信号参数进行解码，得到解码后的网络信号参数；

所述调整模块，具体用于根据所述解码后的网络信号参数，调整所述第二电子设备的音视频编码码率，以获得调整后的音视频编码码率。

12.根据权利要求10所述的装置，其特征在于，还包括：

发送模块，用于向所述第一电子设备发送所述调整后的音视频编码码率，以使所述第一电子设备根据所述调整后的音视频编码码率，调整所述第一电子设备的音视频编码码率。

Images