CN101588252B - 一种多点会议的控制方法及装置 - Google Patents

Abstract

一种多点会议的控制方法及装置，包括：确定各个终端的分辨率分层编码参数，并分别输出给各个终端；接收各个终端输出的码流；根据各个终端的显示需求、分辨率能力信息，从接收到的各个码流中选择出各个终端需要显示的码流，并将得到的码流转码映射为所述终端能够解码的码流；将各个终端能够解码的码流分别输出给各个终端。本发明实施例采用多点控制单元控制分辨率分层编码的技术方案，使得系统既能够存在支持分层协议的终端，也能够存在不支持分层协议的终端，并且，能够降低运算量，提高系统的效率。

Description

一种多点会议的控制方法及装置

技术领域

本发明涉及电子通信技术领域，尤其涉及一种多点会议的控制方法及装置。

背景技术

目前，通信技术广泛地应用于图像传输领域。图像传输领域中的一个重要应用是视讯应用，包括各个终端同时进行通信的一般视讯应用，以及在一个终端的显示屏中同时显示多个终端的视频信息的多画面视讯应用。

在一般视讯应用中，视讯系统中可能存在处理能力不同的终端，比如：在一个视讯系统中包含高清终端(通常为720P(表示象素为1280×720，逐行扫描)及以上)、标清终端(通常为4CIF(表示象素为704×576))、通用终端(通常为CIF(表示象素为352×288))。在各种处理能力不同的终端同时开会的情况下，需要协调各个终端的图像传输能力，以便于各个终端的显示屏均能够合适的显示出图像。

协调各个终端的图像传输能力的一种方法包括：视讯系统中的用于控制各个终端的多点控制单元接收各个终端分辨率能力信息，取各个终端公共最高能力开会，视讯系统中的各个终端即按照协商出来的公共最高能力编解码图像。但是，在视讯系统中的终端均采用协商出的公共最高能力开会的情况下，只要其中有一个低分辨率终端，具有高分辨率的终端之间相互传输图像，也只能看到低分辨率图像。

协调各个终端的图像传输能力的另一种方法包括：多点控制单元对码流进行适配转码操作，主要的处理过程是：多点控制单元将接收到的一个高分辨率的码流解码后，将解码后的图像缩小为低分辨率的图像，再对该低分辨率的图像进行编码得到该低分辨率图像的码流，最后将该低分辨率图像的码流发给需要以低分辨率显示的终端。但是，采用该方法需要对每一个高分辨率图像进行解码、缩小，并对低分辨率画面进行编码，运算复杂，效率低。

现有的视讯系统结构图如图1所示，包括：End-user(终端)1-N和用于连接各个终端的MCU(多点控制单元)。MCU可以是独立的一个设备，也可以是嵌入终端的一个功能模块。

采用图1所示结构的视讯系统的一种开会过程包括：

步骤1：系统中的多点控制单元确定系统中各个终端的公共最高开会能力，并将该结果发送给系统中的各个终端。

步骤2：系统中的各个终端获知公共最高开会能力之后，按该公共最高开会能力的要求将图像信息编码并发送码流。

步骤3：系统中的多点控制单元接收终端发送的码流，并将码流传输至需要接收码流的终端。

但是，采用该方法有如下缺点：只要其中有一个低分辨率终端，具有高分辨率的终端之间相互传输图像，也只能看到低分辨率图像。。

采用图1所示结构的视讯系统的另一种开会过程包括：

步骤1：系统中的多点控制单元记录系统中各个终端的开会能力；

步骤2：当多点控制单元发现接收终端能力与发送终端能力不匹配时，则对发送终端发来的码流解码，按接收终端的能力编码，并将码流传输至需要接收的终端。

但是，采用该方法有如下缺点：需要进行解码，并进行编码，运算复杂，效率低。

采用图1所示结构的视讯系统的第三种开会过程包括：

系统中的多点控制单元接收一个大画面的码流，对于只显示此大画面的终端转发大画面码流；对于需要显示包含此画面的多画面的终端，即需要显示多个小画面的终端，多点控制单元解码此码流，缩小解出的图像到子画面大小，与其它子画面组成一个组合大画面，编码此组合大画面，将组合大画面码流发给需要显示的终端。

但是，采用该方法有如下缺点：对每一个子画面需要进行解码、缩小，并对组合大画面进行编码，运算复杂，效率低。

发明内容

本发明实施例提供一种多点会议的控制方法及装置，能够支持系统中各种不同显示能力终端的图像显示需求。

本发明实施例是通过以下技术方案实现的：

本发明实施例提供一种多点会议的控制方法，所述方法包括：

确定各个终端的分辨率分层编码参数，并分别输出给各个终端；

接收各个终端输出的码流；根据各个终端的显示需求、分辨率能力信息，从接收到的各个码流中选择出各个终端需要显示的码流，并将得到的码流转码映射为所述终端能够解码的码流；将各个终端能够解码的码流分别输出给各个终端。

本发明实施例提供一种多点控制单元，所述单元包括：

第一处理单元，用于确定各个终端的分辨率分层编码参数，并将所述参数分别输出给各个终端；

第二处理单元，用于从接收到的各个码流中选择出各个终端需要显示的码流；将得到的码流转码映射为所述终端能够解码的码流；并分别输出给各个终端。

本发明实施例提供一种多点会议系统，包括：

多点控制单元，用于确定各个终端的分辨率分层编码参数，并将所述参数分别输出给各个终端；并从接收到的各个码流中选择出各个终端需要显示的码流；将得到的码流转码映射为所述终端能够解码的码流；并分别输出给各个终端；

终端，用于根据接收到的分辨率分层编码参数，对待发送的图像进行分辨率分层编码，并输出编码后的码流；以及对接收到的码流进行解码操作。

由上述本发明实施例提供的技术方案可以看出，本发明实施例采用多点控制单元控制分辨率分层编码的技术方案，使得系统既能够存在支持分层协议的终端，也能够存在不支持分层协议的终端，并且，能够降低运算量，提高系统的效率。

附图说明

图1为现有的视讯系统结构图；

图2为本发明第一个实施例的过程图；

图3为本发明第四个实施例的结构图。

具体实施方式

本发明的第一个实施例为一种编解码的方法，如图2所示，其具体实现包括如下步骤：

步骤1：确定各个终端的分辨率分层编码参数，并分别输出给各个终端。具体可以由系统中用于控制各个终端的多点控制单元来确定。

步骤2：终端根据接收到的分辨率分层编码参数，对待发送的图像进行分辨率分层编码，并输出编码后的码流。具体可以将该码流输出给多点控制单元。

步骤3：接收各个终端输出的码流；根据各个终端的图像显示需求，从接收到的各个码流中选择出各个终端需要解码的码流，并将所述需要解码的码流转码映射为所述终端能够解码的码流；将各个终端能够解码的码流分别输出给各个终端。具体可以由多点控制单元完成该步骤的操作。

步骤4：终端对接收到的码流进行解码操作，以得到能够显示的图像。

该分辨率分层编码参数可以包括：SVC协议确定的分辨率分层编码参数；或者，H263协议确定的分辨率分层编码参数。

本发明实施例可以应用于各个终端同时进行通信的一般视讯应用，以及在一个终端的显示屏中同时显示多个终端的视频信息的多画面视讯应用中。下面分别以在一般视讯应用中的具体步骤作为本发明的第二个实施例，在多画面视讯应用中的具体步骤作为本发明的第三个实施例，对本发明实施例进行详细叙述。

本发明的第二个实施例具体包括如下步骤：

步骤1：确定各个终端的基本层分辨率。具体可以由系统中用于控制各个终端的多点控制单元来确定。在预先设置基本层分辨率的情况下，应确认不出现确定的基本层分辨率比系统中某些终端最高解码分辨率高的情况；在没有预先设置基本层分辨率的情况下，该多点控制单元可以将接收到的系统中的所有终端解码分辨率的公共最高分辨率确定为基本层分辨率。

步骤2：根据确定的基本层分辨率、各个终端的显示需求和预先确定的分辨率分层编码标准确定各个终端的基本层编码标准、增强层编码层数和编码标准，并分别输出给各个终端。

对分辨率等于基本层分辨率的终端，确定其编码协议为基本层编码协议，编码分辨率为基本层分辨率，此时仅向该终端输出预先确定的基本层编码标准与基本层分辨率；

对分辨率高于基本层分辨率但不具备分层编码能力的终端，确定其编码协议为基本层编码协议，编码分辨率为基本层分辨率，此时仅向该终端输出预先确定的基本层编码标准与基本层分辨率；

对分辨率高于基本层分辨率且具备分层编码能力的终端，确定其编码协议为分层编码协议，基本层编码分辨率为所述基本层分辨率，并确定增强层参数；具体可以通过下述方法确定增强层参数：分辨率大于公共最高能力、且至少有两个终端支持的分辨率，每个分辨率对应一个增强层；和/或，对分辨率聚类，聚类后的每个分辨率对应一个增强层。

基本层编码标准可以包括：AVC标准，或H263标准；增强层编码标准可以包括：SVC标准，或H263标准。

步骤3：终端根据接收到的基本层分辨率、基本层编码标准、增强层编码层数、增强层分辨率和增强层编码标准，进行分辨率分层编码，并输出编码后的码流。在终端仅接收到基本层编码标准与基本层分辨率的情况下，按照该基本层编码标准对图像进行编码；在终端接收到基本层编码标准与基本层分辨率、增强层编码层数、分辨率和编码标准的情况下，按照该基本层编码标准与基本层分辨率、增强层编码层数、分辨率和编码标准对图像进行编码。

步骤4：接收各个终端输出的码流，根据预先设置的终端的解码需要，确定各个终端需要解码的码流；根据各个终端的码流解码能力，将各个终端需要解码的码流转换为各个终端能够解码的码流。

即对于分辨率等于基本层分辨率的终端，选择出需要解码的基本层码流；对于分辨率高于公共最高能力且具备分层解码能力的终端，选择出需要解码的基本层码流，及增强层码流；或者，将包含基本层与增强层的分层码流转码映射到基本层编码标准码流；对于分辨率高于公共最高能力但不具备分层解码能力的终端，选择出需要解码的基本层码流；或者，将包含基本层与增强层的分层码流转码映射到基本层编码标准码流。

转码映射可以是完全解码后再编码，可以是直接进行预测系数调整及相应的语法语义调整，而不需要进行复杂的变换运算且不会引入飘移误差。最后再将得到的各个码流输出给各个终端。

比如：系统中存在终端1、终端2、终端3和终端4，由多点控制单元接收各个终端输出的码流；若预先设置的终端的图像显示需求为：终端4显示终端1的发送的图像，则多点控制单元设置终端4需要解码的码流为终端1发送的码流。在终端4仅能解码按照AVC标准编码的码流(即AVC码流)的情况下，若终端1输出的是SVC码流，则多点控制单元需要选择出需要解码的基本层AVC码流；或者，将SVC码流转码映射到AVC码流之后输出；在终端4能解码SVC码流的情况下，若终端1输出的是SVC码流，则多点控制单元可以将SVC码流直接输出。

采用本发明实施例的多点会议的控制方法，使得系统既能够存在支持分层协议的终端，也能够存在不支持分层协议的终端，并且，能够降低运算量，提高系统的效率。

本发明实施例中的多点控制单元可以为视讯系统中某一终端上的多点控制单元，也可以为系统中单独设置的多点控制单元。

下面以包括终端1、2、3、4的视讯系统为例，说明本发明的第二个实施例，其中，终端1包括多点控制单元，预先设置分辨率分层编码标准为SVC标准。终端1的解码能力为CIF、4CIF、720P，需要显示终端2传输的图像且能解码SVC码流；终端2的解码分辨率最低，终端2的解码能力为CIF，需要显示终端3传输的图像且仅能解码AVC码流，终端3的解码能力为CIF、4CIF，需要显示终端4传输的图像且能解码SVC码流。终端4的解码能力为CIF、4CIF、720P。若采用对分辨率大于基本层分辨率、且至少有两个终端支持的分辨率，每个分辨率对应一个增强层的增强层分层方法，系统的具体实现包括如下步骤：

步骤1：多点控制单元接收视讯系统中各个终端发送的解码分辨率能力，确定基本层分辨率为终端2的解码分辨率。

步骤2：多点控制单元根据确定的基本层分辨率、各个终端的显示需求和预先设置的SVC分辨率分层编码标准确定视讯系统中各个终端的编码方式，并将各个终端的编码方式分别发送给各个终端。对终端1、3、4，基本层采用AVC标准编码，编码的分辨率为基本层分辨率，增强层采用SVC标准编码，增强层编码层数按照分辨率大于基本层分辨率、且至少有两个终端支持的分辨率，每个分辨率对应一个增强层的方法确定，则增强层编码层数为2，增强层1分辨率为4CIF，增强层2分辨率为720P；对终端2，基本层采用AVC标准编码，编码的分辨率为基本层分辨率CIF，没有增强层。

步骤3：各个终端按照接收到的编码方式对图像进行编码，并向多点控制单元输出编码后的码流。即，终端1、3、4输出的码流为SVC码流，终端2输出的码流为AVC码流。

步骤4：多点控制单元接收到各个终端传输的码流之后，根据终端的解码能力，对码流进行选择转换，并输出。即，将终端2传输过来的码流(AVC码流)直接发送至终端1；将终端3传输过来的码流(SVC码流)选择基本层AVC码流发送至终端2；将终端4传输过来的码流(SVC码流)选择基本层码流及增强层1码流发送至终端3。

步骤5：各个终端将接收到的码流进行解码操作。

若采用对增强层聚类的增强层分层方法，系统的具体实现包括如下步骤：

步骤1：多点控制单元接收视讯系统中各个终端发送的解码分辨率能力，确定基本层分辨率为终端2的解码分辨率。

步骤2：多点控制单元根据确定的基本层分辨率、各个终端的显示需求和预先设置的SVC分辨率分层编码标准确定视讯系统中各个终端的编码方式，并将各个终端的编码方式分别发送给各个终端。对终端1、3、4，基本层采用AVC标准编码，编码的分辨率为基本层分辨率，增强层采用SVC标准编码，增强层编码层数按照分辨率大于基本层分辨率、且至少有两个终端支持的分辨率聚类的方法确定，则增强层编码层数为1，增强层1分辨率为4CIF；对终端2，基本层采用AVC标准编码，编码的分辨率为基本层分辨率CIF，没有增强层。

步骤3：各个终端按照接收到的编码方式对图像进行编码，并向多点控制单元输出编码后的码流。即，终端1、3、4输出的码流为SVC码流，终端2输出的码流为AVC码流。

步骤4：多点控制单元接收到各个终端传输的码流之后，根据终端的解码能力，对码流进行选择转换，并输出。即，将终端2传输过来的码流(AVC码流)直接发送至终端1；将终端3传输过来的码流(SVC码流)选择基本层AVC码流发送至终端2；将终端4传输过来的码流(SVC码流)选择基本层码流及增强层1码流发送至终端3。

步骤5：各个终端将接收到的码流进行解码操作。

本发明的第三个实施例具体包括如下步骤：

步骤1：接收各个终端发送的分辨率能力信息，并根据该信息和各个终端的显示需求确定子画面分辨率及组合大画面分辨率；具体可以由系统中的多点控制单元确定。

步骤2：根据确定的子画面分辨率、组合大画面分辨率和预先确定的分辨率分层编码标准确定各个终端的基本层编码标准、增强层编码层数和编码标准，并分别输出给各个终端。

对于分辨率等于子画面分辨率的终端，确定其编码协议为基本层编码协议，编码分辨率为子画面分辨率；

对于分辨率高于子画面分辨率但不具备分层编码能力的终端，确定其编码协议为基本层编码协议，编码分辨率为子画面分辨率；

对于分辨率高于子画面分辨率且具备分层编码能力的终端，确定其编码协议为分层编码协议，基本层编码分辨率为所述子画面分辨率，增强层编码分辨率为所述组合大画面分辨率。

步骤3：终端根据接收到的基本层分辨率、基本层编码标准、增强层编码层数、增强层分辨率和增强层编码标准，进行分辨率分层编码，并输出编码后的码流。在终端仅接收到基本层编码标准与基本层分辨率的情况下，按照该基本层编码标准对图像进行编码；在终端接收到基本层编码标准与基本层分辨率、增强层编码层数、分辨率和编码标准的情况下，按照该基本层编码标准与基本层分辨率、增强层编码层数、分辨率和编码标准对图像进行编码。

步骤4：接收各个终端输出的码流，对需要显示多个小画面的终端，直接将选择出的需要显示的至少一个需要解码的码流组合成一个基本层码流；和/或，将选择出的至少一个需要解码的码流进行解码操作，将各个解码后的画面组成一个大画面，之后，将该大画面进行编码操作，得到一个基本层码流。

对需要显示一个大画面的终端，根据终端的不同解码能力，可以采取如下两种方式：对于具备分层解码能力的终端，选择出需要解码的子画面码流，及增强层码流；或者，将包含子画面码流与增强层码流的分层码流转码映射到基本层编码标准码流；

对于不具备分层解码能力的终端，将包含子画面码流与增强层码流的分层码流转码映射到基本层编码标准码流。

比如：在本发明的第三个实施例中，多画面视讯系统中包括终端1、2、3、4以及多点控制单元，预先设置编码标准为SVC标准。终端1的解码能力为CIF、4CIF、720P，需要显示终端2传输的图像且能解码SVC码流，终端2的解码分辨率最低，终端2的解码能力为CIF，需要显示终端3传输的图像且仅能解码AVC码流，终端3的解码能力为CIF、4CIF，需要同时显示终端1、2、4传输的图像且能解码SVC码流，终端4的解码能力为CIF、4CIF、720P。若采用对分辨率大于基本层分辨率、且至少有两个终端支持的分辨率，每个分辨率对应一个增强层的增强层分层方法，系统的具体实现包括如下步骤：

步骤1：多点控制单元接收视讯系统中各个终端发送的解码分辨率能力，确定子画面分辨率为CIF，组合大画面分辨率为4CIF。

步骤2：确定各个终端的分层参数，并将各个终端的编码方式分别发送给各个终端。对终端1、3、4，基本层采用AVC标准编码，编码的分辨率为子画面分辨率CIF，增强层采用SVC标准编码，增强层编码层数按照分辨率大于基本分辨率、且至少有两个终端支持的分辨率，每个分辨率对应一个增强层的方法确定，则增强层编码层数为2，增强层1分辨率为4CIF，增强层2分辨率为720P；对终端2，基本层采用AVC标准编码，编码的分辨率为子画面分辨率CIF，没有增强层。

步骤3：各个终端按照接收到的编码方式对图像进行编码，并向多点控制单元输出编码后的码流。即，终端1、3、4输出的码流为SVC码流，终端2输出的码流为AVC码流。

步骤4：多点控制单元接收到各个终端传输的码流之后，根据终端的解码能力与显示需求，对码流进行转换，并输出。即，由于终端1、2不需要显示小画面，因此对需要发送给终端1、2的码流的处理过程与第二个实施例相同，即将终端2传输过来的码流(AVC码流)直接发送至终端1；将终端3传输过来的码流(SVC码流)选择基本层AVC码流发送至终端2；。

由于终端3需要显示组合画面，因此多点控制单元可以直接选择终端1传输的基本层AVC码流、终端2传输的AVC码流、终端4传输的基本层AVC码流组合成一个大画面基本层AVC码流发送给终端3。

步骤5：多画面视讯系统中的各个终端将接收到的码流进行解码操作。对需要显示组合画面的终端3，将接收到的组合画面基本层码流进行解码。

若采用对增强层聚类的增强层分层方法，系统的具体实现包括如下步骤：

步骤1：多点控制单元接收视讯系统中各个终端发送的解码分辨率能力，确定子画面分辨率为CIF，组合大画面分辨率为4CIF。

步骤2：确定各个终端的分层参数，并将各个终端的编码方式分别发送给各个终端。对终端1、3、4，基本层采用AVC标准编码，编码的分辨率为子画面分辨率CIF，增强层采用SVC标准编码，增强层编码层数按照分辨率大于公共最高能力、且至少有两个终端支持的分辨率聚类的方法确定，则增强层编码层数为1，增强层1分辨率为4CIF；对终端2，基本层采用AVC标准编码，编码的分辨率为子画面分辨率CIF，没有增强层。

步骤3：各个终端按照接收到的编码方式对图像进行编码，并向多点控制单元输出编码后的码流。即，终端1、3、4输出的码流为SVC码流，终端2输出的码流为AVC码流。

步骤4：多点控制单元接收到各个终端传输的码流之后，根据终端的解码能力与显示需求，对码流进行转换，并输出。即，由于终端1、2不需要显示小画面，因此对需要发送给终端1、2的码流的处理过程与第二个实施例相同，即将终端2传输过来的码流(AVC码流)直接发送至终端1；将终端3传输过来的码流(SVC码流)选择基本层AVC码流发送至终端2；。

由于终端3需要显示组合画面，因此多点控制单元可以将选择出的终端1传输的基本层AVC码流、终端2传输的AVC码流、终端3传输的基本层AVC码流、终端4传输的基本层AVC码流解码后的画面组成一个大画面，之后，将该组合大画面进行编码操作，得到一个基本层AVC码流发送给终端3。

步骤5：多画面视讯系统中的各个终端将接收到的码流进行解码操作。对需要显示组合画面的终端3，将接收到的组合画面基本层码流进行解码。

采用本发明实施例的多点会议的控制方法，使得系统既能够存在支持分层协议的终端，也能够存在不支持分层协议的终端，并且，能够降低运算量，提高系统的效率。

本发明的第四个实施例为一种多点会议系统，具体结构如图3所示，包括一种多点控制单元和一种设置于终端中的编解码装置，该多点控制单元包括：用于确定各个终端的分辨率分层编码参数，并将所述参数分别输出给各个终端的第一处理单元，以及用于从接收到的各个码流中选择出各个终端需要显示的码流；将得到的码流转码映射为所述终端能够解码的码流；并分别输出给各个终端的第二处理单元，其中：

该第一处理单元具体包括：

信息接收单元，用于接收各个终端的显示需求、分辨率能力信息；

参数确定单元，包括第一参数确定单元和/或第二参数确定单元，其中：

第一参数确定单元用于一般视讯应用中，用于根据信息接收单元接收到的各个终端的显示需求、分辨率能力信息，将所有终端解码分辨率的公共最高分辨率确定为基本层分辨率，确定各个终端的分辨率分层编码参数；可以采用如下方式确定分辨率分层编码参数：对于分辨率等于公共最高能力的终端，确定其编码协议为基本层编码协议，编码分辨率为基本层分辨率；对于分辨率高于公共最高能力但不具备分层编码能力的终端，确定其编码协议为基本层编码协议，编码分辨率为基本层分辨率；对于分辨率高于公共最高能力且具备分层编码能力的终端，确定其编码协议为分层编码协议，基本层编码分辨率为所述基本层分辨率，并确定增强层参数。可以采用如下方式确定增强层参数：分辨率大于基本层分辨率、且至少有两个终端支持的分辨率，每个分辨率对应一个增强层；和/或，对分辨率聚类，聚类后的每个分辨率对应一个增强层；

第二参数确定单元用于多画面视讯系统中，用于根据所述分辨率能力信息和各个终端的显示需求，确定子画面分辨率及组合大画面分辨率，确定各个终端的分辨率分层编码参数；可以采用如下方式确定分辨率分层编码参数：针对多画面视讯系统，对于分辨率等于子画面分辨率的终端，确定其编码协议为基本层编码协议，编码分辨率为子画面分辨率；对于分辨率高于子画面分辨率但不具备分层编码能力的终端，确定其编码协议为基本层编码协议，编码分辨率为子画面分辨率；对于分辨率高于子画面分辨率且具备分层编码能力的终端，确定其编码协议为分层编码协议，基本层编码分辨率为所述子画面分辨率，并确定增强层参数。可以采用如下方式确定增强层参数：分辨率大于基本层分辨率、且至少有两个终端支持的分辨率，每个分辨率对应一个增强层；和/或，对分辨率聚类，聚类后的每个分辨率对应一个增强层。

参数输出单元，用于将参数确定单元确定的各个终端的分辨率分层编码参数分别输出给各个终端。

该第二处理单元具体包括：

码流接收单元，用于接收各个终端发送的码流；

码流选择单元，用于从接收到的各个码流中选择出各个终端需要显示的码流；

码流转码映射单元，将所述码流选择单元选择得到的码流转码映射为所述终端能够解码的码流，具体包括第一转码映射单元、第二转码映射单元和第三转码映射单元中的至少一个单元，其中：

第一转码映射单元，用于一般视讯应用中，包括：对于分辨率等于基本层分辨率的终端，选择出需要解码的基本层码流；

对于分辨率高于基本层分辨率且具备分层解码能力的终端，选择出需要解码的基本层码流，及增强层码流；或者，将包含基本层与增强层的分层码流转码映射到基本层编码标准码流；

对于分辨率高于基本层分辨率但不具备分层解码能力的终端，选择出需要解码的基本层码流；或者，将包含基本层与增强层的分层码流转码映射到基本层编码标准码流；

第二转码映射单元，用于多画面视讯应用中：直接将选择出的至少一个所述需要解码的码流组合成一个基本层码流；和/或，将选择出的至少一个所述需要解码的码流进行解码操作，将各个解码后的画面组成一个大画面，之后，将所述组合画面进行编码操作，得到一个基本层码流；

第三转码映射单元，用于多画面视讯应用中：对于具备分层解码能力的终端，选择出需要解码的子画面码流，及增强层码流；或者，将包含子画面码流与增强层码流的分层码流转码映射到基本层编码标准码流；对于不具备分层解码能力的终端，将包含子画面码流与增强层码流的分层码流转码映射到基本层编码标准码流；

码流输出单元，将转码映射后的码流分别输出给各个终端。

该编解码的装置包括：

参数接收单元，用于接收分辨率分层编码参数；

编码单元，用于根据参数接收单元接收到的分辨率分层编码参数，对待发送的图像进行分辨率分层编码，并输出编码后的码流；

解码单元，用于对接收到的码流进行解码操作。

采用本发明实施例的多点会议系统，使得系统既能够存在支持分层协议的终端，也能够存在不支持分层协议的终端，并且，能够降低运算量，提高系统的效率。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求书的保护范围为准。

Claims (9)

1.一种多点会议的控制方法，其特征在于，所述方法包括：

确定各个终端的分辨率分层编码参数，并分别输出给各个终端；

接收各个终端输出的码流；根据各个终端的显示需求、分辨率能力信息，从接收到的各个码流中选择出各个终端需要显示的码流，并将得到的码流转码映射为所述终端能够解码的码流；将各个终端能够解码的码流分别输出给各个终端；

所述将得到的码流转码映射为所述终端能够解码的码流包括：

对于分辨率等于基本层分辨率的终端，选择出需要解码的基本层码流；

对于分辨率高于基本层分辨率且具备分层解码能力的终端，选择出需要解码的基本层码流，及增强层码流；或者，将包含基本层与增强层的分层码流转码映射到基本层编码标准码流；

对于分辨率高于基本层分辨率但不具备分层解码能力的终端，选择出需要解码的基本层码流；或者，将包含基本层与增强层的分层码流转码映射到基本层编码标准码流；

或者，所述将得到的码流转码映射为所述终端能够解码的码流包括：

将选择出的至少一个需要解码的码流组合成一个基本层码流；

和/或，将选择出的至少一个需要解码的码流进行解码操作，将各个解码后的画面组成一个大画面，之后，将所述大画面进行编码操作，得到一个基本层码流；

或者，所述将得到的码流转码映射为所述终端能够解码的码流包括：

对于具备分层解码能力的终端，选择出需要解码的子画面码流，及增强层码流；或者，将包含子画面码流与增强层码流的分层码流转码映射到基本层编码标准码流；

对于不具备分层解码能力的终端，将包含子画面码流与增强层码流的分层码流转码映射到基本层编码标准码流。

2.如权利要求1所述的方法，其特征在于，所述确定各个终端的分辨率分层编码参数包括：

接收各个终端分辨率能力信息；

根据接收到的各个终端的分辨率能力信息，将所有终端解码分辨率的公共最高分辨率确定为基本层分辨率；

对于分辨率等于公共最高能力的终端，确定其编码协议为基本层编码协议，编码分辨率为基本层分辨率；

对于分辨率高于公共最高能力但不具备分层编码能力的终端，确定其编码协议为基本层编码协议，编码分辨率为基本层分辨率；

对于分辨率高于公共最高能力且具备分层编码能力的终端，确定其编码协议为分层编码协议，基本层编码分辨率为所述基本层分辨率，并确定增强层参数。

3.如权利要求1所述的方法，其特征在于，所述确定各个终端的分辨率分层编码参数包括：

接收各个终端发送的分辨率能力信息，并根据所述信息和显示需求确定子画面分辨率；

对于分辨率等于子画面分辨率的终端，确定其编码协议为基本层编码协议，编码分辨率为子画面分辨率；

对于分辨率高于子画面分辨率但不具备分层编码能力的终端，确定其编码协议为基本层编码协议，编码分辨率为子画面分辨率；

对于分辨率高于子画面分辨率且具备分层编码能力的终端，确定其编码协议为分层编码协议，基本层编码分辨率为所述子画面分辨率，并确定增强层参数。

4.如权利要求2或3所述的方法，其特征在于，所述确定增强层参数包括：

分辨率大于基本层分辨率、且至少有两个终端支持的分辨率，每个分辨率对应一个增强层；

和/或，对分辨率聚类，聚类后的每个分辨率对应一个增强层。

5.如权利要求1或2或3任一项所述的方法，其特征在于，所述分辨率分层编码参数包括：SVC协议确定的分辨率分层编码参数；或者，H263协议确定的分辨率分层编码参数。

6.一种多点控制单元，其特征在于，所述单元包括：

第一处理单元，用于确定各个终端的分辨率分层编码参数，并将所述参数分别输出给各个终端；

第二处理单元，用于从接收到的各个码流中选择出各个终端需要显示的码流；将得到的码流转码映射为所述终端能够解码的码流；并分别输出给各个终端；

所述第二处理单元包括：

码流选择单元，用于从接收到的各个码流中选择出各个终端需要显示的码流；

码流转码映射单元，将所述码流选择单元选择得到的码流转码映射为所述终端能够解码的码流，具体包括第一转码映射单元、第二转码映射单元和第三转码映射单元中的至少一个单元，其中：

第一转码映射单元，用于对于分辨率等于基本层分辨率的终端，选择出需要解码的基本层码流；对于分辨率高于基本层分辨率且具备分层解码能力的终端，选择出需要解码的基本层码流，及增强层码流；或者，将包含基本层与增强层的分层码流转码映射到基本层编码标准码流；对于分辨率高于基本层分辨率但不具备分层解码能力的终端，选择出需要解码的基本层码流；或者，将包含基本层与增强层的分层码流转码映射到基本层编码标准码流；

第二转码映射单元，用于直接将选择出的至少一个需要解码的码流组合成一个基本层码流；和/或，将选择出的至少一个需要解码的码流进行解码操作，将各个解码后的画面组成一个大画面，之后，将所述大画面进行编码操作，得到一个基本层码流；

第三转码映射单元，用于：对于具备分层解码能力的终端，选择出需要解码的子画面码流，及增强层码流；或者，将包含子画面码流与增强层码流的分层码流转码映射到基本层编码标准码流；对于不具备分层解码能力的终端，将包含子画面码流与增强层码流的分层码流转码映射到基本层编码标准码流；

码流输出单元，将转码映射后的码流分别输出给各个终端。

7.如权利要求6所述的多点控制单元，其特征在于，所述第一处理单元包括：

信息接收单元，用于接收各个终端的显示需求、分辨率能力信息；

参数确定单元，用于根据信息接收单元接收到的各个终端的显示需求、分辨率能力信息，将所有终端解码分辨率的公共最高分辨率确定为基本层分辨率，确定各个终端的分辨率分层编码参数；和/或，根据所述分辨率能力信息和各个终端的显示需求，确定子画面分辨率，确定各个终端的分辨率分层编码参数；

参数输出单元，用于将参数确定单元确定的各个终端的分辨率分层编码参数分别输出给各个终端。

8.一种多点会议系统，其特征在于，包括终端和权利要求6或7任一项所述的多点控制单元：

所述终端，用于根据接收到的分辨率分层编码参数，对待发送的图像进行分辨率分层编码，并输出编码后的码流；以及对接收到的码流进行解码操作。

9.如权利要8所述的系统，其特征在于，所述终端包括：

参数接收单元，用于接收分辨率分层编码参数；

编码单元，用于根据参数接收单元接收到的分辨率分层编码参数，对待发送的图像进行分辨率分层编码，并输出编码后的码流；

解码单元，用于对接收到的码流进行解码操作。

Images