Nothing Special   »   [go: up one dir, main page]

WO2013181965A1 - 多画面显示的控制方法、装置及系统 - Google Patents

多画面显示的控制方法、装置及系统 Download PDF

Info

Publication number
WO2013181965A1
WO2013181965A1 PCT/CN2013/073713 CN2013073713W WO2013181965A1 WO 2013181965 A1 WO2013181965 A1 WO 2013181965A1 CN 2013073713 W CN2013073713 W CN 2013073713W WO 2013181965 A1 WO2013181965 A1 WO 2013181965A1
Authority
WO
WIPO (PCT)
Prior art keywords
screen
user
dividing line
picture
operated
Prior art date
Application number
PCT/CN2013/073713
Other languages
English (en)
French (fr)
Inventor
王东琦
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Publication of WO2013181965A1 publication Critical patent/WO2013181965A1/zh
Priority to US14/560,648 priority Critical patent/US20150109400A1/en

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking

Definitions

  • the present invention relates to information processing technologies, and in particular, to a method, device and system for controlling multi-picture display, and belongs to the field of communication technologies.
  • Telepresence System With the development of Telepresence System, more and more enterprises choose telepresence systems to establish video conferencing systems.
  • the so-called telepresence system the image displayed by the system is life-size, the person in the display and the user in the venue can perform eye-to-eye communication, the system can image the received image and It can realize the characteristics of sound image parity; at the same time, in order to facilitate the user's operation, a control device with a touch screen is usually provided to facilitate the user to control the conference.
  • a multi-point conference due to the large number of participants, participants will expect to see more images of the venue at certain times. This can be achieved by presenting multiple venue images in one display, ie multi-screen. .
  • a common multi-picture display mode includes, for example, 4 pictures (a), 6 pictures (b), and 9 pictures (c), etc., for Let the user see the picture of 4, 6 or 9 sites.
  • FIG. 1b is a schematic diagram of a networking structure of a video conference system in the prior art.
  • the networking structure of the general video conferencing system is shown in Figure lb.
  • Including three conference sites, as shown, each conference site has one conference terminal, and three conference sites communicate with the multipoint control server (for media control). Communicate with the distributed device).
  • the site 1 Take the site 1 in Figure lb as an example.
  • the participant or conference administrator of the site 1 needs to set or switch the multi-screen display mode, for example, to switch the multi-screen display mode from 4 to 6 screens, the display needs to be called up.
  • the display mode selection menu provided above sets the multi-screen display mode of the display to 6 screens in the display mode selection menu, and clicks the OK button.
  • the mode triggers the adjustment of the multi-picture display mode, and notifies the multi-point control server by sending a message (for example, the multi-point control server is called a multi-point control unit, referred to as an MCU when the specific product is implemented), and the MCU
  • the video source of the multi-screen corresponding site is combined into a multi-screen video and sent to the corresponding site.
  • the corresponding site decodes the code stream and presents it on the corresponding screen.
  • embodiments of the present invention provide a control method, apparatus, and system for multi-picture display, which are used to implement an intuitive and flexible setting of a multi-picture display mode.
  • an embodiment of the present invention provides a method for controlling multi-screen display, including: receiving a sliding trajectory operated by a user, and performing a multi-screen segmentation line according to the sliding trajectory operated by the user;
  • the control target screen is displayed on the screen according to the multi-screen display mode formed by the multi-screen dividing line after the operation.
  • an embodiment of the present invention provides a multi-picture display control apparatus, including a display screen, a first processor, and a second processor, wherein the first processor is respectively connected to the display screen and the second processor. , among them:
  • the display screen is configured to receive a sliding track of a user operation, and send the sliding track of the user operation to the first processor;
  • the first processor is configured to perform an operation of the multi-screen dividing line according to the sliding track of the user operation, and send the processed multi-screen dividing line to the second processor;
  • the second processor is configured to control the target screen to perform screen display according to the multi-screen display mode formed by the multi-screen dividing line after the operation.
  • an embodiment of the present invention provides a multi-screen display control system, including a target screen and a multi-screen display control device provided by an embodiment of the present invention.
  • the user can operate on the multi-screen dividing line in the multi-picture display mode by clicking and dragging operations. Therefore, a multi-screen display mode formed according to the adjusted multi-screen dividing line is obtained, and an intuitive and flexible setting of the multi-screen display mode is realized.
  • Figure l a is a schematic diagram of a multi-picture display mode in the prior art
  • Figure lb is a schematic diagram of a networking structure of a video conference system in the prior art
  • Figure 2 is a typical video conferencing system architecture diagram
  • Figure 3 is a schematic diagram of a control interface of the control device
  • Figure 4 is a schematic view showing a display area of the control device
  • FIG. 5 is a schematic flowchart of a method for controlling multi-screen display according to Embodiment 1 of the present invention
  • FIG. 6 is a schematic diagram of generating a multi-screen dividing line
  • FIG. 7 is a schematic diagram of a moving multi-screen dividing line
  • FIG. 8 is a first schematic diagram of selecting a multi-screen dividing line
  • FIG. 9 is a second schematic diagram of selecting a multi-screen dividing line
  • Figure 10 is a first schematic diagram of a rotating multi-screen dividing line
  • FIG. 11 is a first schematic diagram of setting a multi-screen display mode according to multi-screen dividing line generation information
  • FIG. 12 is a second schematic diagram of setting a multi-screen display mode according to multi-screen dividing line generation information
  • FIG. 13 is for deleting information according to a multi-screen dividing line
  • a first schematic diagram of setting a multi-screen display mode FIG. 14 is a first schematic diagram of setting a multi-screen display mode according to multi-screen dividing line movement information
  • FIG. 15 is a second schematic diagram of setting a multi-screen display mode according to multi-screen dividing line movement information
  • 16 is a first schematic diagram of setting a multi-screen display mode according to multi-screen split line rotation information
  • FIG. 17 is a second schematic diagram of a rotating multi-screen split line;
  • FIG. 18 is a third schematic diagram of setting a multi-screen display mode according to multi-screen dividing line generation information
  • FIG. 19 is a second schematic diagram of setting a multi-screen display mode according to multi-screen dividing line deletion information
  • FIG. 20 is a multi-screen dividing line according to various multi-screen dividing lines. Operation information sets the schematic diagram of the multi-screen display mode
  • FIG. 21 is a schematic diagram of the multi-screen display mode saved in the database
  • 22 is a schematic diagram of selecting a second multi-picture display mode according to a first multi-picture display mode
  • FIG. 23 is a schematic structural diagram of a multi-picture display control apparatus according to Embodiment 7 of the present invention.
  • FIG. 24 is a schematic structural diagram of a multi-screen display control apparatus according to still another embodiment of the present invention
  • FIG. 25 is a schematic structural diagram of a multi-screen display control apparatus according to still another embodiment of the present invention
  • FIG. 27 is a schematic structural diagram of a multi-screen display control device according to still another embodiment of the present invention
  • FIG. 28 is a schematic structural diagram of a multi-screen display control device according to still another embodiment of the present invention.
  • FIG. 2 shows the architecture of a typical video conferencing system.
  • the video conference system includes two or more conference sites, and each conference site is provided with a video conference device, which includes a terminal device, a display device, a microphone, and a speaker.
  • each conference is also equipped with a control device, which can control the video conference equipment and the conference process in the conference, such as opening/closing the video conference equipment, holding/closing a conference, and the like.
  • FIG. 3 is a schematic diagram of a control interface of the control device.
  • the display screen of the entire control device includes a display area 1 and a control area 2, and may also optionally include an auxiliary area 3.
  • 4 is a schematic diagram of a display area of the control device.
  • the display area corresponds to the controlled screen, and the controlled screen can display the video activity image actually displayed on the screen in real time (as shown in (a) of FIG. 4). It is also possible not to display the video status, and only the border of each sub-picture of 4 bar multi-picture, that is, the dividing line of the multi-picture is presented (as shown in (b) of FIG. 4).
  • the control area is used for operations such as configuration of the multi-screen display mode by the user.
  • the control area includes the display area and the auxiliary area (as shown in (a) of FIG. 3); when the control interface includes the auxiliary area
  • the control area is equal to the display area (as shown in (b) of Figure 3).
  • the auxiliary area is used to display the site information of each site in the conference, for example, including the site name or the reduced display image of the site.
  • the auxiliary area can be hidden at a certain time, and then the control interface of the control device is as shown in FIG. 3(b).
  • FIG. 5 is a schematic flowchart of the control method of the multi-screen display according to the first embodiment of the present invention. As shown in FIG. 5, the method specifically includes the following steps:
  • Step S101 Receive a sliding track of a user operation, and perform an operation of a multi-screen dividing line according to the sliding track of the user operation;
  • Step S102 controlling the target display to display the screen according to the multi-screen display mode formed by the multi-screen dividing line after the operation.
  • the screen of the venue may display the conference image according to the single screen display mode or the multi-screen display mode.
  • the screen does not contain the dividing line.
  • the division between the multiple screens is achieved by setting the multi-screen dividing line between any two screens.
  • the user operates on the control area of the control device.
  • the control interface of the control device converts the user operation into operation information executable by the device, that is, multi-screen dividing line operation information, and adjusts the multi-screen dividing line of the boundary of the display area according to the multi-screen dividing line operation information, and the adjustment includes, for example, Add, delete, move, and/or rotate, etc., to achieve adjustment of the multi-screen display mode.
  • the user operation may be any operation, for example, including a user's touch (click) operation, a double-click operation, a drag operation, or a long-time pressing operation.
  • the user can operate the multi-screen dividing line in the multi-picture display mode by performing operations such as clicking and dragging on the control device, thereby obtaining the multi-screen segmentation according to the adjustment.
  • the multi-screen display mode formed by the line realizes intuitive and flexible setting of the multi-screen display mode.
  • the user can implement the multi-screen display mode setting by the touch control device. Specifically, the user can perform operations such as generating, deleting, moving, and rotating the multi-screen dividing line (hereinafter simply referred to as "dividing line") by touching the control area of the control device.
  • dividing line the multi-screen dividing line
  • FIG. 6 is a schematic diagram of generating a multi-screen dividing line.
  • the user wants to draw a line from point A to point B on the screen, he can first click with the finger on the A point of the screen, and then click with the finger on the control device screen point B, at the end of the operation. After that, a line from A to B is obtained.
  • the operation is saved as a multi-screen dividing line generation information; the user can also drag on the screen after clicking at point A.
  • the control device records the trajectory of the finger touching the screen, and generates a curve from point A to point B, as shown by the solid line in (b) of FIG.
  • the control device after the user finishes the operation, the control device according to the point A and B of the curve
  • the coordinates of the line, generating a line from point A to point B, as shown in (b) of Figure 6, the attribute information of the line, which may include the coordinates of the endpoint of the line (the coordinates of the starting endpoint A and the ending endpoint B) Coordinates) are saved as multi-screen split line generation information.
  • the control device allows the user to arbitrarily drag freely in the free state during the drawing process, it is necessary to calculate the inclination rate of the finally generated A point and B point straight line; the control device can also give constraints when the user generates the dividing line, that is, only allowed Extend horizontally or vertically while drawing.
  • Fig. 7 is a schematic diagram of a moving multi-screen dividing line.
  • the dividing line AB is first selected by touch, and the selected method can be selected by long pressing the dividing line, and then the dividing line AB is dragged from the position 1 1 ' to the position 22', after the operation is completed, the end point coordinates of 22' are used as the new attribute information of the line, and the operation corresponds to the moving information of the multi-screen dividing line of one dividing line.
  • FIG. 8 is a first schematic diagram of selecting a multi-screen dividing line, and selecting a dividing line by means of clicking, that is, receiving a click operation of the user on a multi-screen dividing line, and dividing the multi-screen selected in the click operation
  • the line is determined as the multi-screen dividing line to be operated.
  • taking a typical 3 x 3 multi-screen configuration mode as an example from point A to point H consists of three segmentation lines, namely AC, CE and EH.
  • the user needs to select a certain segmentation line to operate, use a finger to select any point between the two points of the segmentation line to select the segmentation line to operate.
  • the AC segment For example, to operate the AC segment, select the AC with the finger. Point B on the segment can be. This applies to the selection of line segments that have no intermediate split points other than the endpoint, and for deletion and movement. If you want to perform cross-segment operations, for example, to operate on the AE segment, you need to select a certain point of the AC segment (for example, point B) and a certain point of the CE segment (for example, point D). After the selection, the AC and CE segments are selected. Can be seen as a complete split line to operate. For example, if you want to operate on the AH segment, you need to select points in the AC segment and the EH segment separately, for example, point B and point F. The above is to select the dividing line to be selected.
  • the dividing line to be operated can be selected in a frame selection manner.
  • Figure 9 shows the selection of multi-screen dividing lines The second schematic. As shown in Figure 9, to select AH, select LT1 point on the screen first, and LT1 point should be outside the corresponding display frame of the screen; then slide to the area RB1 outside the multi-screen screen, LT1 and RB1 respectively
  • the dividing line completely contained in the frame L1 includes AH, indicating that AH is selected; similarly, due to the upper left vertex coordinate LT2 and the lower right vertex coordinate RB2 L2 does not contain the complete IP, so only the split line IM can be selected for further operation with L2.
  • the user first selects a dividing line on the screen for dividing the multi-screen, and then drags the dividing line out of the control area according to the manner of moving the dividing line, that is, the dividing line no longer affects the configuration of the multi-screen, and the multi-screen is configured.
  • the other dividing lines are used to generate a corresponding multi-picture, which corresponds to deleting the multi-picture dividing line deletion information of one dividing line.
  • Figure 10 is a first schematic diagram of a rotating multi-screen split line.
  • the dividing line AB is first selected by touch, and the selected method can be selected by long pressing the dividing line, and two points on the dividing line AB are selected by two fingers, and then touched.
  • the method is to rotate the dividing line AB from 1 1 ' to 22'.
  • the end point coordinates of 22' are used as new attribute information of the line, and the operation corresponds to the rotation information of the multi-screen dividing line of one dividing line.
  • the auxiliary area of the control device may also provide operation buttons corresponding to various multi-screen dividing line operation signaling, for example, including a multi-screen dividing line generating button, a multi-screen dividing line moving button, Multi-screen split line rotation button or multi-screen split line delete button.
  • the user can complete the operation of the dividing line by clicking the corresponding operation button, selecting the dividing line to be operated and the relevant position.
  • the multi-screen dividing line should generally be vertical or horizontal, the rotation angle is usually 90 degrees or 180 degrees, but as a technical solution, the present invention does not exclude a non-90 degree or 180 rotation operation, and its implementation is similar. , will not repeat them here.
  • the control device After the control device obtains the corresponding multi-screen dividing line operation information by the above user operation, the corresponding multi-screen display mode is generated according to the multi-screen dividing line operation information, which is specifically described below.
  • FIG. 11 is a first schematic diagram of setting a multi-screen display mode according to multi-screen dividing line generation information. As shown in Figure 11, for example, to configure a four-screen multi-screen display mode on a screen that does not display any site image, the following two steps are included:
  • the target screen is adjusted to a 2 X 2 multi-screen.
  • FIG. 12 is a second schematic diagram of setting a multi-screen display mode according to multi-screen split line generation information.
  • FIG. 12 for example, if a screen of a current single-screen display of a site image is configured as a four-screen multi-screen display mode, when the site S1 is already displayed in the target screen (as shown in FIG. 12(a)). After the first dividing line AA' is generated, the site S1 is automatically adjusted to the left display area (as shown in (b) of Fig. 12), and then the second dividing line BB' is generated (Fig. 12(c) As shown, the screen is adjusted to a four-screen display mode, and the field S1 is automatically adjusted to the upper left display area display (as shown in (d) of Figure 12).
  • FIG. 13 is a first schematic diagram of setting a multi-screen display mode according to multi-screen dividing line deletion information.
  • a four-screen screen displaying one site S1 is configured as a multi-screen display mode of 1 ⁇ 2, and the multi-screen display mode in the initial state is as shown in (a) of FIG. 13, the site S1.
  • the picture is displayed in the upper left corner of the target screen; the dividing line ⁇ ' is deleted, and the generated multi-picture display mode is as shown in (b) of FIG. 13, and the screen of the meeting place S1 is automatically adjusted to the upper half of the display area of the target screen.
  • a multi-screen display mode of 1 X 2 is obtained.
  • the target screen is adjusted to a 2 X 2 multi-screen.
  • FIG. 14 is a first schematic diagram of setting a multi-screen display mode according to multi-screen dividing line movement information.
  • the control device can adjust the size of each sub-screen in the multi-screen display mode according to the multi-screen dividing line movement information.
  • the multi-screen display mode is as shown in (a) of FIG. 14, the site S1 is displayed on the upper left corner area on the target screen; and the control device moves the information according to the multi-screen dividing line, and the dividing line is AA' moves to CC', and the multi-screen display mode at this time is as shown in (b) of FIG.
  • control device automatically adjusts the screen of the field S1 to the middle position of the sub-screen for display, two of the sub-pictures
  • the side position is a free area as shown in (c) of FIG.
  • the control device can also crop and/or scale the image of the site S1 in the sub-picture according to the adjusted sub-picture size, so that the image of the site S1 is filled with the sub-picture.
  • FIG. 15 is a second schematic diagram of setting a multi-screen display mode according to multi-screen dividing line movement information.
  • the user can also perform multi-screen display mode setting by simultaneously moving two intersecting dividing lines.
  • the site S1 is displayed on the upper left corner of the target screen, and the intersection of AA' and BB' is shown.
  • the cross point is the O point;
  • the user selects the intersection position 0 of the dividing lines AA' and BB', and drags the intersection position to 0, then the dividing line AA' is adjusted to CC',
  • the dividing line BB' is adjusted to DD';
  • the control device adjusts the multi-picture to a four-picture as shown in (c) of Fig. 15, and automatically adjusts the field S1 to the new area size for display.
  • FIG. 16 is a first schematic diagram of setting a multi-screen display mode according to multi-screen split line rotation information.
  • the multi-screen display mode in which the left and right display modes are adjusted to the multi-screen display mode displayed in the up and down mode will be described as an example.
  • the image of the site S1 is displayed on the left side of the screen; as shown in (b) of FIG. 16, the user selects the dividing line ⁇ '; as shown in FIG. 16(c)
  • the dividing line AA' is rotated clockwise, then AA' is changed from the vertical direction to the horizontal direction; the control device automatically adjusts the field S1 to the upper area of the target screen to form, as shown in (d) of FIG. Multi-screen display mode.
  • the user can flexibly perform the operations of generating, deleting, moving, and rotating the dividing line by manually touching the control area of the control device, thereby realizing an effective and convenient multi-screen operation.
  • the user can realize the multi-screen display mode setting by using a mouse operation. Specifically, the user can operate the control area by means of a mouse, and realize a multi-screen dividing line (hereinafter referred to as "dividing line") to perform operations such as generation, deletion, movement, and rotation.
  • dividing line a multi-screen dividing line
  • the manner of selecting the dividing line in this embodiment is the same as that selected in the second embodiment. The operation of the above various multi-screen dividing lines will be described in detail below.
  • the user wants to draw a line from point A to point B on the screen.
  • You can move the mouse to point A of the screen and click, then click to move the mouse to point B of the control device screen.
  • a line from A to B is obtained, as shown in (a) of Fig. 6, the operation is saved as a multi-screen dividing line generation information; the user can also drag on the screen after clicking at point A.
  • the control device records the trajectory of the mouse on the touch screen, and generates a curve from point A to point B, as shown by the solid line in (b) of FIG.
  • the control device after the user finishes the operation, the control device according to the curve A Point and B coordinates, generate a line from point A to point B, as shown by the dotted line in (b) of Figure 6, the genus of the dividing line
  • the sex information including the endpoint coordinates (starting coordinates and ending coordinates) of the dividing line, is saved as multi-screen dividing line generation information. If the control device allows the user to arbitrarily drag freely in the free state during the drawing process, it is necessary to calculate the inclination rate of the finally generated A point and B point straight line; the control device can also give constraints when the user generates the dividing line, that is, only allowed Extend horizontally or vertically while drawing.
  • first select the dividing line AB with the mouse first select the dividing line AB with the mouse.
  • the selected method can be selected by short pressing the left mouse button, and dragging the dividing line AB from the position 1 1 ' to 22', after the operation is completed, the end point coordinates of 22' are used as the new attribute information of the line, and the operation corresponds to the moving information of the multi-screen dividing line of one dividing line.
  • the user first selects a dividing line on the screen for dividing the multi-screen, and then drags the dividing line out of the control area according to the manner of moving the dividing line, that is, the dividing line no longer affects the configuration of the multi-screen, and the multi-screen is configured.
  • the other dividing lines are used to generate a corresponding multi-picture, which corresponds to deleting the multi-picture dividing line deletion information of one dividing line.
  • Figure 17 is a second schematic diagram of a rotating multi-screen split line.
  • the mouse mode is different from the touch mode operation, for example, the dividing line is changed from the vertical position to the horizontal position.
  • first select the dividing line AB to be rotated (as shown in (a) of Fig. 17), and then move the mouse to the position near AB when the mouse is close to the center position (for example, the distance from the center point of AB is less than the point A).
  • a rotatable symbol prompt appears at a distance of 1/3 from point B (as shown in (b) of Figure 17); when a rotatable symbol prompt appears, long press the left mouse button and drag to the right.
  • the control device can also obtain a drag operation of the user on the conference screen, and generate corresponding multi-screen split line operation information according to the drag operation, and generate a multi-screen display mode according to the multi-screen split line operation information.
  • FIG. 18 is a third schematic diagram of setting a multi-screen display mode according to multi-screen split line generation information.
  • the auxiliary area of the control device can be used to display four site screens that are not displayed on the current screen.
  • the screen displays the screen of the site S1 on a single screen, and the auxiliary area displays the small screen of the site S2 - the site S5.
  • the multi-screen display mode is as shown in (a) of FIG. 18; the user displays the auxiliary area.
  • the screen of the site S2 is dragged to the right side of the target screen, and the user's drag operation of the screen implicitly generates a split line ⁇ ', and the control device generates a multi-screen split line generation information according to the user's drag operation of the screen, and according to the The screen dividing line generation information generates a dividing line ⁇ ', and the multi-screen display mode is as shown in (b) of FIG.
  • a small screen of the site S3-site S6 is displayed in the auxiliary area, and the user assists
  • the screen of the site S3 displayed in the area is dragged to the lower left of the target screen, and the user's drag operation of the screen implicitly generates the dividing line BO, and the control device generates the multi-screen dividing line generation information according to the user's drag operation of the screen, and
  • the split line BO is generated according to the multi-screen split line generation information, and the multi-screen display mode is as shown in (c) of FIG. 18; After that, the small screen of the site S4 and the site S6 is displayed in the auxiliary area.
  • the user drags the screen of the site S4 displayed in the auxiliary area to the lower right of the target screen, and the user's drag operation of the screen implicitly generates the dividing line ⁇ '
  • the device generates multi-screen split line generation information according to the user's screen drag operation, and generates a split line ⁇ ' according to the multi-screen split line generation information, and the multi-screen display mode is as shown in (d) of FIG. 18 .
  • the multi-screen with the single-screen display mode configured to 2 x 2 is completed, and each display area in the screen, that is, each sub-screen displays the user-specified site screen.
  • FIG. 19 is a second schematic diagram of setting a multi-screen display mode according to multi-screen split line deletion information. As shown in FIG. 19, a multi-screen display mode in which a four-screen screen on which one site S1 is displayed is arranged as one 1 ⁇ 2 will be described as an example. As shown in (a) of Fig.
  • the target screen is a 4 x 4 multi-screen display mode; the user drags the site S4 in (a) from the display area, implicitly deleting the dividing line ⁇ , forming a figure The multi-screen display mode shown in (b) of 19; the user drags the site S3 in (b) from the display area, implicitly deletes the dividing line BO, and forms a multi-screen display mode as shown in (c) of FIG. ; use The user pulls the site S2 in (c) from the display area, and implicitly deletes the dividing line ⁇ ' to form a multi-screen display mode as shown in (d) of FIG.
  • the dividing line is moved; for example, when the size of the site screen is adjusted by dragging the boundary of the site screen, it is equivalent to moving the two intersecting dividing lines simultaneously as shown in FIG. 15 to perform multi-screen display control.
  • receiving a sliding track that the user performs a drag operation on the site screen to be operated in the target screen is configured to display the to-be-operated site
  • the multi-screen dividing line at the boundary of the display area of the screen is rotated.
  • the dividing line AA' can be automatically generated from FIG.
  • the position shown in (a) is rotated to the multi-screen split line rotation information at the position shown in Fig. 16 (d).
  • control device can also perform multi-screen display mode setting in combination with a plurality of multi-screen split line operation information to obtain a multi-screen display mode desired by the user.
  • FIG. 20 is a schematic diagram of setting a multi-screen display mode according to a plurality of multi-screen dividing line operation information. As shown in Figure 20, setting the single-screen display mode to 3 X 3 for multi-screen display mode requires four adjustments.
  • the display mode of the screen is as shown in (a) of Figure 20; the split line ⁇ ' is generated, the screen is switched to the multi-screen display mode of 1 X 2, and the split line ⁇ ' is generated, and the screen is switched to 2 x 2
  • the multi-picture display mode as shown in (b) of FIG.
  • the control target screen for screen display specifically includes:
  • the first multi-picture display mode is a multi-picture display mode formed by the multi-screen dividing line after the operation;
  • the second multi-picture display mode has the same number of display areas as the first multi-picture display mode, or
  • the area difference between the second multi-picture display mode and the first multi-picture display mode is smaller than an area difference between any other multi-picture display mode and the first multi-picture display mode stored in the pre-stored multi-picture display mode.
  • the various multi-picture display modes supported by the system can be saved as a database, and after obtaining the user operation, temporarily or virtually generating the first multi-picture display mode corresponding to the user operation, the first multi-screen is searched from the database.
  • the second multi-picture display mode in which the mode is most similar is displayed, and the second multi-picture display mode is used as the multi-picture display mode of the screen.
  • the judgment of the similarity is based, for example, on the number of display regions of the two multi-screen display modes or the difference in area of each display region.
  • the second multi-screen display mode is selected based on the phase difference area.
  • Figure 21 is a schematic diagram of a multi-screen display mode saved in a database.
  • the control device can support six multi-picture display modes (a) to (f).
  • 22 is a schematic diagram of selecting a second multi-picture display mode according to a first multi-picture display mode.
  • a first multi-picture display mode is formed according to a user operation in a broken line to realize supportable in the database.
  • Screen display mode. (a) of FIG. 22 is a comparison of the first multi-picture display mode with the first multi-picture display mode in the database (as shown in (a) of FIG. 21), wherein the shaded area is the difference area between the two, and is recorded as The first phase difference area; (b) of FIG.
  • phase difference area 22 is a comparison of the first multi-picture display mode with the second multi-picture display mode in the database (as shown in (b) of FIG. 21), wherein the shaded area is both
  • the phase difference area is recorded as the second phase difference area; in the same manner, the phase difference area between the first multi-picture display mode and the remaining four multi-picture display modes in the database can be obtained, which is not shown here.
  • the second multi-picture display mode is used as the multi-picture display mode of the screen.
  • control method of the multi-screen display of the above-described first to sixth embodiments the control method of the multi-screen display according to the embodiment of the present invention will be described as an example in which the user provides a sliding trajectory of the user operation to the control device by a touch operation or a mouse operation.
  • the technical solution of the embodiment of the present invention can be implemented when the control device can receive the sliding track of the user operation by any other means.
  • the control device receives the sliding trajectory of the user operation by means of gesture recognition.
  • a user operation corresponding to the user gesture is pre-stored in the control device, and when the user gesture and the gesture movement position are acquired by the camera, the user operation is recognized according to the mapping relationship between the user gesture and the user operation, and the movement is performed according to the user gesture.
  • the position forms a sliding trajectory of the user's operation.
  • the camera recognizes that the user's index finger is straight and the other four-finger gesture is closed, if the mapping relationship between the user gesture and the user operation is stored in advance, it is learned that the gesture corresponds to the multi-screen dividing line generating operation; According to the camera recognizing that the user keeps the gesture moving from one position (corresponding to the first coordinate) to another position (corresponding to the second coordinate), generating a multi-screen dividing line with the first coordinate and the second coordinate as two endpoints .
  • the technical solution of the embodiment of the present invention can be implemented by pre-defining different user gestures corresponding to the multi-screen split line deletion operation, the movement operation, and the rotation operation, respectively.
  • the multi-picture display control apparatus provided in this embodiment is for performing the control method of the multi-picture display of any of the above embodiments.
  • the multi-screen display control device is, for example, the control device in the above embodiment, and can be separately provided, and is also integrated with a terminal, a personal telepresence or a three-screen telepresence device.
  • the multi-screen display control apparatus includes a display screen 71, a first processor 72, and a second processor 73.
  • a processor 72 is respectively connected to the display screen 71 and the second processor 73, wherein: the display screen 71 is configured to receive a sliding track of a user operation, and send the sliding track of the user operation to the The first processor 72;
  • the first processor 72 is configured to perform operation of a multi-screen dividing line according to the sliding trajectory of the user operation, and send the processed multi-screen dividing line to the second processor 73;
  • the second processor 73 is configured to draw according to the multi-screen dividing line after the operation
  • the face display mode controls the target screen for screen display.
  • the display screen 71 is, for example, a display screen of the control device shown in FIG. 3.
  • the first processor 72 and the second processor 73 are, for example, processors integrated in the control device, or are shown in FIG. 1(b).
  • the flow of the multi-screen display control by the multi-screen display control device of the present embodiment is the same as the control method of the multi-screen display of the above-described embodiment, and therefore will not be described herein.
  • the multi-screen dividing line in the multi-screen display mode is operated, thereby obtaining the adjusted
  • the multi-screen display mode formed by the multi-screen dividing line realizes intuitive and flexible setting of the multi-screen display mode.
  • Fig. 24 is a view showing the configuration of a multi-screen display control device according to still another embodiment of the present invention.
  • the display screen 71 includes:
  • a first user interface 71 a configured to receive a sliding track of a user operating the multi-screen dividing line, and send the sliding track of the user to operate the multi-screen dividing line to the first processor;
  • the second user interface 71b is configured to receive a sliding track for the user to operate the site screen displayed on the target screen, and send the sliding track of the user to display the site screen displayed on the target screen to the The first processor 72;
  • the first processor 72 includes:
  • the first processing module 72a is configured to perform a multi-screen dividing line operation according to the sliding track in which the user operates the multi-screen dividing line;
  • the second processing module 72b is configured to perform an operation of the multi-screen dividing line according to the sliding track in which the user operates the site screen displayed on the target screen.
  • FIG. 25 is a view showing the configuration of a multi-screen display control device according to still another embodiment of the present invention. As shown in FIG. 25, in the multi-screen display control device of the above embodiment,
  • the first processing module 72a specifically includes:
  • a first generating unit 72a1 configured to receive, by using the first user interface 71a, a sliding track of the user from a first coordinate point to a second coordinate point, and generate the first coordinate point and the second coordinate a multi-screen split line that is an endpoint; or a first adjusting unit 72a2, configured to receive, by using the first user interface 71a, a selection operation of selecting a multi-screen dividing line by the user, determining a multi-screen dividing line to be operated according to the selecting operation; a first user interface 71 a, receiving a sliding track for the user to operate the multi-screen dividing line to be operated, according to the sliding track of the user operating the multi-screen dividing line to be operated, The multi-screen dividing line that describes the operation is moved, rotated, or deleted.
  • the first user interface is specifically configured to receive a click operation of the user on a multi-screen dividing line, and send a click operation of the user to the multi-screen dividing line to the first adjusting unit; correspondingly, the first The adjusting unit is configured to determine the multi-screen dividing line selected in the click operation as the multi-screen dividing line to be operated; or
  • the first user interface is specifically configured to receive a frame selection operation of the user, and send the frame selection operation of the user to the first adjustment unit; correspondingly, the first adjustment unit is configured to use the frame
  • the multi-screen dividing line within the range of the selection frame formed by the selection operation is determined as the multi-screen dividing line to be operated.
  • the first user interface is specifically configured to receive a sliding operation of the user to perform a drag operation on the multi-screen dividing line to be operated in the target screen. a trajectory, and a sliding trajectory of the user dragging the multi-screen dividing line to be operated in the target screen to the adjusting unit; correspondingly, the first adjusting unit is configured to be used according to the user Moving a sliding track of the multi-screen dividing line to be operated in the target screen, and moving the multi-screen dividing line to be operated to an ending position of the sliding track of the drag operation; or
  • the first user interface is specifically configured to receive a sliding track that the user drags the multi-screen dividing line to be operated out of the target screen, and drag the multi-screen dividing line to be operated by the user.
  • the sliding track of the target screen is sent to the first adjusting unit; correspondingly, the first adjusting unit is configured to drag the multi-screen dividing line to be operated out of the sliding track of the target screen according to the user , deleting the multi-screen dividing line to be operated; or
  • the first user interface is specifically configured to receive a sliding track of a rotation operation of the multi-screen dividing line to be operated by the user, and send a sliding track of the rotating operation of the multi-screen dividing line to be operated by the user to the first
  • the first adjusting unit is configured to perform a rotating trajectory according to a rotation operation of the multi-screen dividing line to be operated by the user, and the to-be-operated The multi-screen dividing line is rotated.
  • Fig. 26 is a view showing the configuration of a multi-picture display control device according to still another embodiment of the present invention.
  • the second processing module 72b specifically includes:
  • a second generating unit 72b1 configured to receive, by using the second user interface 71b, a sliding track that is dragged into the site screen by the user to the target screen, and generate, according to the sliding track of the dragged-in site screen
  • a second screen adjusting unit 72b2 configured to receive, by the second user interface 71 b, the site screen displayed by the user on the target screen.
  • Performing a selection operation determining a site screen to be operated according to the selection operation; and receiving, by the second user interface 71 b, a sliding track of the user operating the site screen, according to the user
  • the sliding track on which the site screen is operated is moved, rotated, or deleted on the multi-screen dividing line that constitutes the boundary of the display area in which the site screen to be operated is displayed.
  • the second user interface is specifically configured to receive a sliding track of the user to perform a size adjustment operation on the site screen to be operated, and The sliding track of the site screen to be operated is sent to the second adjusting unit; correspondingly, the second adjusting unit is configured to perform a size adjustment operation on the site screen to be operated according to the user a sliding track for moving a multi-screen dividing line for constituting a boundary of a display area in which the site screen to be operated is displayed;
  • the second user interface is specifically configured to receive a sliding track of the user performing a drag operation on the site screen to be operated in the target screen, and the user is in the target screen
  • the sliding track of the operation site screen is sent to the second adjustment unit; correspondingly, the second adjustment unit is configured to perform, according to the user, the site screen to be operated in the target screen.
  • a sliding track of the drag operation rotating the multi-screen dividing line for forming a boundary of the display area in which the site screen to be operated is displayed; or
  • the second user interface is specifically configured to receive a sliding track of the user to drag the site screen to be operated out of the target screen, and drag the user to move the site screen to be operated out of the target screen.
  • the sliding path is sent to the second adjusting unit.
  • the second adjusting unit is configured to delete the sliding track for the user to move the site screen to be displayed according to the sliding track of the target screen. Multi-screen segmentation of the boundary of the display area of the site screen to be operated Line.
  • Fig. 27 is a view showing the configuration of a multi-picture display control device according to still another embodiment of the present invention.
  • the second processor 73 includes:
  • the screen adjustment module 73a is configured to adjust the screen to be displayed according to the aspect ratio and/or the position of each display area in the formed multi-screen display mode;
  • the first display control module 73b is configured to control the target screen to display the adjusted site screen in the display area.
  • Fig. 28 is a view showing the configuration of a multi-picture display control device according to still another embodiment of the present invention.
  • the multi-screen display control device of the above embodiment further includes a memory 74 connected to the second processor 73 for pre-storing the multi-screen display mode; correspondingly, the second processing
  • the device 73 includes:
  • the retrieving module 73c is configured to: retrieve, from the multi-screen display mode pre-stored by the memory, a second multi-screen display mode that is similar to the first multi-screen display mode; wherein the first multi-screen display mode is an operation a multi-screen display mode formed by the subsequent multi-screen dividing line; the second multi-screen display mode and the first multi-screen display mode have the same number of display regions, or the second multi-screen display mode and The area difference of the first multi-picture display mode is smaller than the area difference of any other multi-picture display mode and the first multi-picture display mode stored in the pre-stored multi-picture display mode;
  • the second display control module 73d is configured to control the target screen to perform screen display according to the second multi-screen display mode.
  • the first user interface and the second user interface are specifically configured to receive a user touch operation or receive a user mouse operation, or identify a gesture sliding track of the user.
  • the present embodiment provides a multi-picture display control system including a target screen and any of the multi-screen display control devices of the above embodiments.
  • the flow of executing the multi-screen display control by the multi-screen display control system is the same as the control method of the multi-screen display of the foregoing embodiment, and therefore will not be described herein.
  • the multi-screen display control system of the present embodiment since the user can perform operations such as clicking and dragging on the multi-screen display control device, the multi-screen dividing line in the multi-screen display mode is operated, thereby obtaining more adjustments.
  • the multi-screen display mode formed by the screen dividing line realizes intuitive and flexible setting of the multi-screen display mode.
  • the storage medium may be a magnetic disk, an optical disk, a read-only memory (ROM), or a random access memory (RAM).

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明实施例提供多画面显示的控制方法、装置及系统。该方法包括：接收用户操作的滑动轨迹，根据所述用户操作的滑动轨迹进行多画面分割线的操作；根据操作后的多画面分割线所形成的多画面显示模式，控制目标屏幕进行画面显示。本发明实施例的多画面显示的控制方法、装置及系统，能够实现多画面显示模式的直观、灵活设置。

Description

多画面显示的控制方法、 装置及系统 本申请要求于 2012 年 6 月 5 日提交中国专利局、 申请号为 201210182098.8、 发明名称为"多画面显示控制方法、 装置及系统，，的中国专利 申请的优先权， 其全部内容通过引用结合在本申请中。
技术领域
本发明涉及信息处理技术， 尤其涉及一种多画面显示的控制方法、 装置 及系统， 属于通信技术领域。
背景技术
随着远程呈现系统（ Telepresence System ) 的发展， 越来越多的企业选择 远程呈现系统建立视频会议系统。 所谓的远程呈现系统， 该系统显示的图像 具有真人大小， 显示器中的人和会场中的用户能够进行眼对眼（eye-to-eye ) 交流、 该系统能够对接收到的图像进行图像拼接以及能够实现声像同位等特 点； 同时， 为便于用户的操作， 通常会提供具有触摸屏的控制设备， 以方便 用户对会议进行控制。 在多点会议中， 由于与会者众多， 与会者会在某些时 段期望看到更多会场的图像， 这可以通过在一个显示屏中呈现多个会场图像 的方法， 即多画面的方式来实现。 图 la为现有技术中的多画面显示模式示意 图， 如图 la所示， 常见的多画面显示模式例如包括 4画面（a )、 6画面 （b )、 和 9画面 （c )等， 用于使用户看到 4个、 6个或 9个会场的画面。
图 lb为现有技术中视频会议系统的组网结构示意图。 一般的视频会议系 统的组网架构如图 lb所示， 其中， 包括三个会场， 作为示意， 每个会场具有 1个会议终端， 三个会场通过通信网络与多点控制服务器 (用于媒体控制与分 发的设备）进行通信。 以图 lb的会场 1为例， 当会场 1的与会者或者会议管 理员需要进行多画面显示模式的设置或切换时， 例如将多画面显示模式由 4 画面切换到 6 画面， 需调出显示屏上提供的显示模式选择菜单， 在显示模式 选择菜单中将显示屏的多画面显示模式设定为 6 画面， 并通过点击确定键的 方式触发多画面显示模式的调节，以发送消息的方式通知多点控制服务器（作 为举例， 该多点控制服务器在具体产品实现时称为多点控制单元， Multipoint Control Unit, 简称为 MCU ), MCU根据设定的多画面显示模式， 将多画面对 应会场的视频源组合成一个多画面视频发送给对应的会场， 对应的会场接收 到视频源后对码流进行解码并在对应屏幕上进行呈现。
可以看出， 釆用上述方式进行多画面显示模式设置时， 与会者或者会议 管理员仅能通过浏览列表的方式， 从预置的几种多画面显示模式中选择一种 作为当前的多画面显示模式， 无法实现多画面显示模式的直观、 灵活设置。
发明内容
基于现有技术存在的技术问题， 本发明实施例提供多画面显示的控制方 法、 装置及系统， 用以实现多画面显示模式的直观、 灵活设置。
一方面， 本发明实施例提供一种多画面显示的控制方法， 包括： 接收用户操作的滑动轨迹， 根据所述用户操作的滑动轨迹进行多画面分 割线的操作；
根据操作后的多画面分割线所形成的多画面显示模式， 控制目标屏幕进 行画面显示。
一方面， 本发明实施例提供一种多画面显示控制装置， 包括显示屏、 第 一处理器和第二处理器， 所述第一处理器分别与所述显示屏和所述第二处理 器连接， 其中：
所述显示屏， 用于接收用户操作的滑动轨迹， 并将所述用户操作的滑动 轨迹发送至所述第一处理器；
所述第一处理器， 用于根据所述用户操作的滑动轨迹进行多画面分割线 的操作， 并将操作后的多画面分割线发送至所述第二处理器；
所述第二处理器， 用于根据所述操作后的多画面分割线所形成的多画面 显示模式， 控制目标屏幕进行画面显示。
一方面， 本发明实施例提供一种多画面显示控制系统， 包括目标屏幕和 本发明实施例提供的多画面显示控制装置。
根据本发明实施例提供的多画面显示的控制方法、 装置及系统， 由于用 户可通过点击和拖动等操作 , 针对多画面显示模式中的多画面分割线进行操 作， 从而获得按照调节后的多画面分割线形成的多画面显示模式， 实现了多 画面显示模式的直观、 灵活设置。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案， 下面将对实 施例或现有技术描述中所需要使用的附图作简单地介绍， 显而易见地， 下面 描述中的附图仅仅是本发明的一些实施例， 对于本领域普通技术人员来讲， 在不付出创造性劳动性的前提下， 还可以根据这些附图获得其他的附图。
图 l a为现有技术中的多画面显示模式示意图；
图 lb为现有技术中视频会议系统的组网结构示意图；
图 2为典型的视频会议系统架构图；
图 3为控制设备的控制界面示意图；
图 4为控制设备的显示区域示意图；
图 5为本发明实施例一的多画面显示的控制方法的流程示意图； 图 6为生成多画面分割线的示意图；
图 7为移动多画面分割线的示意图；
图 8为选择多画面分割线的第一示意图；
图 9为选择多画面分割线的第二示意图；
图 10为旋转多画面分割线的第一示意图；
图 11为根据多画面分割线生成信息设置多画面显示模式的第一示意图； 图 12为根据多画面分割线生成信息设置多画面显示模式的第二示意图； 图 13为根据多画面分割线删除信息设置多画面显示模式的第一示意图； 图 14为根据多画面分割线移动信息设置多画面显示模式的第一示意图； 图 15为根据多画面分割线移动信息设置多画面显示模式的第二示意图； 图 16为根据多画面分割线旋转信息设置多画面显示模式的第一示意图； 图 17为旋转多画面分割线的第二示意图；
图 18为根据多画面分割线生成信息设置多画面显示模式的第三示意图； 图 19为根据多画面分割线删除信息设置多画面显示模式的第二示意图； 图 20为根据多种多画面分割线操作信息设置多画面显示模式的示意图； 图 21为数据库中保存的多画面显示模式示意图； 图 22为根据第一多画面显示模式选择第二多画面显示模式的示意图； 图 23为本发明实施例七的多画面显示控制装置的结构示意图；
图 24为本发明又一实施例的多画面显示控制装置的结构示意图； 图 25为本发明又一实施例的多画面显示控制装置的结构示意图； 图 26为本发明又一实施例的多画面显示控制装置的结构示意图； 图 27为本发明又一实施例的多画面显示控制装置的结构示意图； 图 28为本发明又一实施例的多画面显示控制装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图， 对本发明实施例中的技术方案进行 清楚、 完整地描述， 显然， 所描述的实施例仅仅是本发明一部分实施例， 而 不是全部的实施例。 基于本发明中的实施例， 本领域普通技术人员在没有做 出创造性劳动前提下所获得的所有其他实施例 , 都属于本发明保护的范围。
图 2为典型的视频会议系统架构图。 如图 2所示， 视频会议系统包括两个 或两个以上的会场， 每个会场都设置有视频会议设备， 该视频会议设备包括 终端设备、 显示设备、 麦克风和扬声器等。 此外每个会议还配备有控制设备， 该控制设备能够对该会场内的视频会议设备以及会议过程进行控制， 例如打 开 /关闭视频会议设备、 召开 /结束一个会议等。
图 3为控制设备的控制界面示意图， 如图 3所示， 整个控制设备的显示屏 包括显示区域 1和控制区域 2, 还可选择性地包括辅助区域 3。 图 4为控制设备 的显示区域示意图， 如图 4所示， 显示区域对应被控制的屏幕， 被控制屏幕可 以实时显示该屏幕真实显示的视频活动图像（如图 4中的 （a )所示） ， 也可 以不显示视频状态， 仅 4巴多画面的各个子画面的边框， 也就是多画面的分割 线呈现出来（如图 4中的 （b ) 所示） 。 控制区域用于由用户进行多画面显示 模式的配置等操作， 当控制界面包括辅助区域时， 控制区域包括显示区域和 辅助区域（如图 3中 （a ) 所示） ； 当控制界面包括辅助区域时， 控制区域与 显示区域等同 （如图 3中 （b ) 所示） 。 辅助区域用于显示会议中各个会场的 会场信息， 例如包括会场名称或会场的缩小显示图像等。 辅助区域可以在某 一时段隐藏起来， 则此时控制设备的控制界面如图 3中 （b ) 所示。 实施例一
本发明实施例一的多画面显示的控制方法可由图 2所示的控制设备来执 行， 图 5为本发明实施例一的多画面显示的控制方法的流程示意图。 如图 5所 示， 该方法具体包括以下步骤：
步骤 S101 , 接收用户操作的滑动轨迹， 根据所述用户操作的滑动轨迹进 行多画面分割线的操作；
步骤 S102, 根据操作后的多画面分割线所形成的多画面显示模式， 控制 目标展幕进行画面显示。
具体地， 视频会议系统中， 会场的屏幕可以按照单屏显示模式或多画面 显示模式显示会场图像。 在单屏显示模式下， 屏幕中不包含分割线， 在多画 面显示模式下， 多画面之间的分割是通过设置在任意两画面间的多画面分割 线来实现的。
用户对控制设备的控制区域进行操作。 控制设备的控制接口将用户操作 转化为设备可执行的操作信息， 即多画面分割线操作信息， 并根据多画面分 割线操作信息对显示区域的边界的多画面分割线进行调节， 该调节例如包括 增加、 删除、 移动和 /或旋转等， 从而实现多画面显示模式的调节。 其中， 用 户操作可以为任一种操作， 例如包括用户的触碰（单击）操作、 双击操作、 拖动操作或长时间按压操作等。
根据本实施例的多画面显示的控制方法， 由于用户可通过对控制设备进 行点击和拖动等操作， 针对多画面显示模式中的多画面分割线进行操作， 从 而获得按照调节后的多画面分割线形成的多画面显示模式， 实现了多画面显 示模式的直观、 灵活设置。 实施例二
在实施例一的基础上， 本实施例的多画面显示的控制方法中， 用户可通 过触摸控制设备实现多画面显示模式设置。 具体地， 用户可通过触摸控制设 备的控制区域的方式， 对多画面分割线（以下简称为 "分割线" ）进行生成、 删除、 移动和旋转等操作。 下面分别针对上述各种多画面分割线的操作进行 详细说明。
(一）用户以触摸方式生成分割线。 图 6为生成多画面分割线的示意图。 如图 6所示， 例如用户欲在屏幕上画 一条从 A点到 B点的线， 可以先用手指在屏幕的 A点点击， 然后在用手指在控 制设备屏幕的 B点点击， 在结束操作后， 即得到 A到 B的一个直线， 如图 6中的 ( a ) 所示， 该操作作为多画面分割线生成信息保存下来； 用户也可以在 A点 点击后， 一直在屏幕上拖动， 控制设备记录下手指触摸屏幕的轨迹， 生成一 条从 A点到 B点的曲线， 如图 6中 （b )所示的实线； 在用户结束操作后， 控制 设备根据该曲线的 A点和 B的坐标，生成一条从 A点到 B点的直线，如图 6中（b ) 所示的虚线， 该直线的属性信息， 可以包括该直线的端点坐标（起始端点 A的 坐标和结束端点 B坐标）， 被作为多画面分割线生成信息保存下来。 若控制设 备允许用户在绘制的过程中任意以自由态任意拖动，则需要计算最终生成的 A 点和 B点直线的倾斜率； 控制设备还可以在用户生成分割线时给予约束， 即只 允许在绘制时沿水平或者垂直方向进行延伸。
(二）用户以触摸方式移动 （平移）分割线。
图 7为移动多画面分割线的示意图。 如图 7所示，首先用触摸的方式选定 分割线 AB, 选定的方式可以用长按该分割线的方式选定， 然后用触摸的方式 将分割线 AB从位置 1 1 '拖动到 22' , 操作完毕后， 以 22'的端点坐标作为该直线 的新的属性信息， 该操作对应移动一个分割线的多画面分割线移动信息。
下面， 对选定分割线的方式进行具体说明。 图 8为选择多画面分割线的第 一示意图， 釆用点选的方式来选定分割线， 即接收所述用户对多画面分割线 的点击操作， 将所述点击操作所选中的多画面分割线确定为所述待操作的多 画面分割线。 如图 8所示， 以一个典型 3 x 3的多画面配置模式为例， 从 A点到 H点由三段分割线组成， 即 AC、 CE和 EH。 当用户需要选择某一段分割线进行 操作时， 用手指选定该段分割线两点间的任一点即可选定该段分割线进行操 作， 例如要对 AC段进行操作， 用手指选定 AC段上的 B点即可。 这适用于对除 了端点之外无其它中间分割点的线段进行选择， 并进行删除和移动等操作。 如果要进行跨段操作， 例如要对 AE段进行操作， 则需要分别选定 AC段的某一 点 (例如 B点)和 CE段的某一点 (例如 D点），选定后， AC和 CE段可看作一条完整 的分割线进行操作。 例如要对 AH段进行操作， 则需要在 AC段和 EH段进行分 别选定一点， 例如 B点和 F点， 上述是釆用选点的方式来确定待选择的分割线。
此外， 可以用框选的方式选中要操作的分割线。 图 9为选择多画面分割线 的第二示意图。 如图 9所示， 要选择 AH , 则在屏幕上先选择 LT1点， LT1点要 在该屏幕对应的显示框之外； 再滑动到多画面屏幕之外的区域 RB1点， LT1和 RB1则分别为选择框 L1的左上顶点坐标和右下顶点坐标， 可见框 L1完整包含 的分割线包括 AH , 则表示选定了 AH; 同理， 由于根据左上顶点坐标 LT2和右 下顶点坐标 RB2所构成的 L2并没有完整的包含 IP, 因此用 L2仅能选定分割线 IM以进行进一步的操作。
(三）用户以触摸方式删除分割线。
用户首先选择屏幕上用以分割多画面的分割线， 然后按照上述移动分割 线的方式， 将该分割线拖出控制区域， 即表示将该分割线不再影响多画面的 配置， 由配置多画面的其它分割线来生成对应的多画面， 该操作对应删除一 个分割线的多画面分割线删除信息。
(四）用户以触摸方式旋转分割线。
图 10为旋转多画面分割线的第一示意图。 如图 10所示， 首先用触摸的方 式选定分割线 AB, 选定的方式可以用长按该分割线的方式选定， 用两个手指 选定分割线 AB上的两点， 然后用触摸的方式将分割线 AB从 1 1 '旋转到 22' , 操 作完毕后， 以 22'的端点坐标作为该直线的新的属性信息， 该操作对应旋转一 个分割线的多画面分割线旋转信息。
用户除通过上述方式对分割线进行操作以外， 控制设备的辅助区域还可 提供各种多画面分割线操作信令对应的操作按钮， 例如包括多画面分割线生 成按钮、 多画面分割线移动按钮、 多画面分割线旋转按钮或多画面分割线删 除按钮。 在此情况下， 用户可通过点击相应操作按钮、 选择需操作的分割线 及相关位置即可完成对分割线的操作。 由于在实际应用中， 多画面分割线通 常应垂直或水平， 因此旋转角度通常为 90度或 180度， 但作为技术方案， 本发 明并不排除非 90度或者 180的旋转操作， 其实现方式类似， 在此不再赘述。
控制设备通过上述用户操作得到了对应的多画面分割线操作信息后， 根 据多画面分割线操作信息， 生成对应的多画面显示模式， 具体说明如下。
图 1 1为根据多画面分割线生成信息设置多画面显示模式的第一示意图。 如图 1 1所示， 例如欲在一个没有显示任何会场图像的屏幕上配置一个四画面 的多画面显示模式， 包括以下两个步骤：
(1)首先使用多画面分割线生成信息生成第一分割线 ΑΑ', 将目标屏幕分 为一个 1 x 2的多画面；
(2)使用另一多画面分割线生成信息生成第二分割线 ΒΒ',则目标屏幕调整 为一个 2 X 2的多画面。
图 12为根据多画面分割线生成信息设置多画面显示模式的第二示意图。 如图 12所示， 例如欲将一个目前单屏显示会场图像的屏幕配置为一个四画面 的多画面显示模式， 则当会场 S1已经显示在目标屏幕中时（如图 12的（a )所 示） ， 生成第一分割线 AA'后， 会场 S1自动调整到左侧显示区域内 （如图 12 的 （b )所示） ， 之后再生成第二分割线 BB' (如图 12的 （c )所示） ， 屏幕 调整为一个四画面显示模式， 并将会场 S1自动调整到左上显示区域显示 （如 图 12的 （d )所示） 。
图 13为根据多画面分割线删除信息设置多画面显示模式的第一示意图。 如图 13所示， 例如欲将显示有一个会场 S1的四画面屏幕配置为一个 1 χ 2的多 画面显示模式， 初始状态下多画面显示模式如图 13中的 （a ) 所示， 会场 S1 的画面在目标屏幕的左上角显示； 删除分割线 ΑΑ', 生成的多画面显示模式如 图 13中的（b )所示， 会场 S1的画面自动调节到目标屏幕的上半部显示区域显 示。 至此， 获得了 1 X 2的多画面显示模式。
(2)使用另一多画面分割线生成信息生成第二分割线 ΒΒ',则目标屏幕调整 为一个 2 X 2的多画面。
图 14为根据多画面分割线移动信息设置多画面显示模式的第一示意图。 控制设备根据多画面分割线移动信息可实现多画面显示模式下， 各子画面的 大小调节。 如图 14所示， 初始状态下， 多画面显示模式如图 14中的（a )所示， 会场 S1显示在目标屏幕上的左上角区域； 控制设备根据多画面分割线移动信 息， 将分割线 AA'移动至 CC', 此时的多画面显示模式如图 14中的 （b )所示； 之后， 控制设备自动将会场 S1的画面调节至子画面的中间位置进行显示， 该 子画面的两侧位置为空闲区域， 如图 14中的（c )所示。 控制设备还可根据调 节后的子画面尺寸对子画面内的会场 S1的图像进行裁剪和 /或缩放， 以使会场 S1的图像将所在子画面填满。
图 15为根据多画面分割线移动信息设置多画面显示模式的第二示意图。 用户还可通过同时移动两条相互交叉的分割线进行多画面显示模式设置。 如 图 15中 （a ) 所示， 会场 S1显示在目标屏幕上的左上角区域， AA'和 BB'的交 叉点为 O点； 如图 15中 （b )所示， 用户选择分割线 AA'和 BB'的交叉位置 0, 并拖动交叉点位置到 0， ， 则分割线 AA'调节至 CC', 分割线 BB'调节至 DD'; 控制设备将多画面调整为一个如图 15中（c )所示的四画面， 并将会场 S1自动 调整至新的区域大小进行显示。
图 16为根据多画面分割线旋转信息设置多画面显示模式的第一示意图。 以将左右方式显示的多画面显示模式调整为上下方式显示的多画面显示模式 为例进行说明。 初始状态下， 如图 16中 （a )所示， 会场 S1的图像显示在屏幕 的左侧； 如图 16中 （b )所示， 用户选定分割线 ΑΑ'; 如图 16中 （c )所示， 将 分割线 AA'进行顺时针旋转， 则 AA'由垂直方向变为水平方向； 控制设备自动 将会场 S1调整至目标屏幕的上部区域显示， 形成如图 16中（d )所示的多画面 显示模式。
根据本实施例的多画面显示模式设置方法， 用户可通过用手触摸控制设 备的控制区域， 即可灵活地进行分割线的生成、 删除、 移动和旋转等操作， 实现了有效、 便捷的多画面显示模式设置。 实施例三
在实施例一的基础上， 本实施例的多画面显示模式设置方法中， 用户可 通过用鼠标操作实现多画面显示模式设置。 具体地， 用户可通过鼠标的方式 对控制区域进行操作， 实现多画面分割线 （以下简称为 "分割线" ）进行生 成、 删除、 移动和旋转等操作。 本实施例中的选择分割线的方式与实施例二 中介绍的选择方式相同。 下面分别针对上述各种多画面分割线的操作进行详 细说明。
(一）用户以鼠标方式生成分割线。
仍以图 6为例，用户欲在屏幕上画一条从 A点到 B点的线，可以先将鼠标移 动屏幕的 A点并点击， 然后在将鼠标移动到控制设备屏幕的 B点点击， 在结束 操作后， 即得到 A到 B的一个直线， 如图 6中的 （a ) 所示， 该操作作为多画面 分割线生成信息保存下来； 用户也可以在 A点点击后， 一直在屏幕上拖动， 控 制设备记录下鼠标在触摸屏幕的轨迹， 生成一条从 A点到 B点的曲线， 如图 6 中（b )所示的实线； 在用户结束操作后， 控制设备根据该曲线的 A点和 B的坐 标， 生成一条从 A点到 B点的直线， 如图 6中 （b )所示的虚线， 该分割线的属 性信息， 包括了该分割线的端点坐标（起始坐标和结束坐标） ， 被作为多画 面分割线生成信息保存下来。 若控制设备允许用户在绘制的过程中任意以自 由态任意拖动， 则需要计算最终生成的 A点和 B点直线的倾斜率； 控制设备还 可以在用户生成分割线时给予约束， 即只允许在绘制时沿水平或者垂直方向 进行延伸。
(二）用户以鼠标方式移动分割线。
仍以图 7为例， 首先用鼠标选定分割线 AB, 选定的方式可以用短按鼠标 左键的方式， 将该分割线选定， 拖动分割线 AB从位置 1 1 '拖动到 22' , 操作完 毕后， 以 22'的端点坐标作为该直线的新的属性信息， 该操作对应移动一个分 割线的多画面分割线移动信息。
(三）用户以鼠标方式删除分割线。
用户首先选择屏幕上用以分割多画面的分割线， 然后按照上述移动分割 线的方式， 将该分割线拖出控制区域， 即表示将该分割线不再影响多画面的 配置， 由配置多画面的其它分割线来生成对应的多画面， 该操作对应删除一 个分割线的多画面分割线删除信息。
(四）用户以鼠标方式旋转分割线。
图 17为旋转多画面分割线的第二示意图。 旋转多画面分割线时， 鼠标方 式与触摸方式的操作不同， 例如想把分割线从垂直位置变换为水平位置。 如 图 17所示， 首先选定要旋转的分割线 AB (如图 17中 （a ) 所示） ， 选定后将 鼠标移至 AB靠近中心位置时 (例如距离 AB中心点为距离小于 A点到 B点的距离 1/3)出现可旋转的符号提示 （如图 17中 （b ) 所示） ； 当出现可旋转的符号提 示时， 长按鼠标左键并向右侧拖动， 即可完成从垂直位置到水平位置的转换 (如图 17中 （c ) 所示） 。 操作完毕后， 以 22'的端点坐标作为该直线的新的 属性信息， 该操作对应旋转一个分割线的多画面分割线旋转信息。
控制设备通过上述用户操作得到了对应的多画面分割线操作信息后， 根 据多画面分割线操作信息生成对应的多画面显示模式的具体流程与实施例二 相同， 故此处不再赘述。 实施例四
除上述实施例二或三中所述的获取用户直接对分割线进行的操作之外， 控制设备还可获取用户对会议画面的拖动操作， 并根据该拖动操作生成相应 的多画面分割线操作信息， 并根据多画面分割线操作信息生成多画面显示模 式。
图 18为根据多画面分割线生成信息设置多画面显示模式的第三示意图。 如图 18所示， 例如当前具有 6个可显示的会场画面， 即会场 S1 -会场 S6。 控制 设备的辅助区域可用于显示四个当前屏幕未显示的会场画面。 例如在初始状 态下， 屏幕单屏显示会场 S1的画面， 辅助区域显示会场 S2-会场 S5的小画面， 此时多画面显示模式如图 18中的 （a ) 所示； 用户将辅助区域显示的会场 S2 的画面拖入到目标屏幕的右侧， 用户的该画面拖动操作隐含生成分割线 ΑΑ', 控制设备根据用户的该画面拖动操作生成多画面分割线生成信息， 并根据该 多画面分割线生成信息生成分割线 ΑΑ' , 此时多画面显示模式如图 18中的（ b ) 所示； 在完成上述操作后， 辅助区域中显示会场 S3-会场 S6的小画面， 用户将 辅助区域显示的会场 S3的画面拖入到目标屏幕的左下方， 用户的该画面拖动 操作隐含生成分割线 BO, 控制设备根据用户的该画面拖动操作生成多画面分 割线生成信息， 并才艮据该多画面分割线生成信息生成分割线 BO, 此时多画面 显示模式如图 18中的（c )所示； 在完成上述操作后，辅助区域中显示会场 S4- 会场 S6的小画面， 用户将辅助区域显示的会场 S4的画面拖入到目标屏幕的右 下方， 用户的该画面拖动操作隐含生成分割线 ΟΒ', 控制设备根据用户的该画 面拖动操作生成多画面分割线生成信息， 并根据该多画面分割线生成信息生 成分割线 ΟΒ' , 此时多画面显示模式如图 18中的 （d )所示。 至此， 完成了将 单屏显示模式配置为 2 x 2的多画面， 并且屏幕中的各显示区域， 即各子画面 均显示用户指定的会场画面。
除了通过以拖拽分割线的方法来删除分割线之外， 也可以通过将会场画 面拖出显示区域的方法来删除分割线， 从而得到新的多画面显示模式。 图 19 为根据多画面分割线删除信息设置多画面显示模式的第二示意图。 如图 19所 示， 以将显示有一个会场 S1的四画面屏幕配置为一个 1 X 2的多画面显示模式 为例进行说明。 如图 19中的 （a ) 所示，目标屏幕是一个 4 x 4的多画面显示模 式； 用户将（a ) 中的会场 S4从显示区域拖出， 隐含删除分割线 ΟΒ， ， 形成 如图 19中的 （b ) 所示多画面显示模式； 用户将（b ) 中的会场 S3从显示区域 拖出， 隐含删除分割线 BO, 形成如图 19中的 （c ) 所示多画面显示模式； 用 户将（c ) 中的会场 S2从显示区域拖出， 隐含删除分割线 ΑΑ', 形成如图 19中 的 （d ) 所示多画面显示模式。
此外， 还可通过对会场画面进行操作来移动或旋转分割线， 从而得到新 的多画面显示模式。
具体地， 接收所述用户对所述待操作的会场画面进行尺寸调节操作的滑 动轨迹， 根据尺寸调节的滑动轨迹， 对用于构成显示所述待操作的会场画面 的显示区域的边界的多画面分割线进行移动； 例如通过拖拉会场画面的边界 来对会场画面的尺寸进行调节时， 等同于图 15中所示的同时移动两条相互交 叉的分割线进行多画面显示控制。
具体地， 接收所述用户在所述目标屏幕内对所述待操作的会场画面进行 拖动操作的滑动轨迹， 根据所述拖动操作的滑动轨迹， 对用于构成显示所述 待操作的会场画面的显示区域的边界的多画面分割线进行旋转。 以图 16为例， 当将会场画面 S1由图 16 ( a )所示的左侧位置拖动至图 16 ( d ) 中所示的上部 位置时， 可自动生成将分割线 AA'由图 16 ( a )中所示位置旋转至图 16 ( d )中 所示位置的多画面分割线旋转信息。 实施例五
在上述实施例的基础上， 控制设备还可结合多种多画面分割线操作信息 进行多画面显示模式设置， 以得到用户期望的多画面显示模式。
图 20为根据多种多画面分割线操作信息设置多画面显示模式的示意图。 如图 20所示， 将一个单屏显示模式设置为 3 X 3的多画面显示模式需通过四次 调整来实现。 初始状态下， 屏幕的显示模式如图 20中的（a )所示； 生成分割 线 ΒΒ', 屏幕切换为 1 X 2的多画面显示模式， 并生成分割线 ΑΑ', 屏幕切换为 2 x 2的多画面显示模式， 如图 20中的 （b ) 所示； 拖动 BB， 和 AA， 的交点 0 至 00' , 生成分割线 DD', 并生成分割线 CC', 形成如图 20中的（c )所示的多 画面显示模式； 生成分割线 DE和分割线 FC, 最终形成如图 20中的 （d )所示 的多画面显示模式。 实施例六
在上述任一实施例的基础上， 所述根据操作后的多画面分割线所形成的 多画面显示模式， 控制目标屏幕进行画面显示具体包括：
从预先存储的多画面显示模式中， 调取与第一多画面显示模式相近的第 二多画面显示模式， 并控制所述目标屏幕根据所述第二多画面显示模式进行 画面显示； 其中， 所述第一多画面显示模式为操作后的多画面分割线所形成 的多画面显示模式；
其中： 所述第二多画面显示模式与所述第一多画面显示模式具有相同数 量的显示区域， 或者
所述第二多画面显示模式与所述第一多画面显示模式的面积差， 小于预 先存储的多画面显示模式中任意其它多画面显示模式与所述第一多画面显示 模式的面积差。
由于常用的视频图像显示格式有 4:3和 16:9等， 如果用户以任何比例设置 图像大小， 都将相关会场的图像调整进行调整为用户设置的大小和比例， 则 往往需要进行裁剪和缩放操作， 这会耗费设备相当多的运算量， 导致系统端 到端延时的产生。 因此可将系统支持的各种多画面显示模式作为一个数据 库保存下来， 并在获得用户操作， 临时或虚拟生成与用户操作对应的第一多 画面显示模式后， 从数据库中查找与第一多画面显示模式最相似的第二多画 面显示模式， 并将该第二多画面显示模式作为屏幕的多画面显示模式。 其中， 相似性的判断例如基于两种多画面显示模式的显示区域的个数或各显示区域 相差面积等。 下面以基于相差面积来选择第二多画面显示模式为例进行说明。
图 21为数据库中保存的多画面显示模式示意图。 如图 21所示， 控制设备 可支持（a ) 至 （f ) 六种多画面显示模式。 图 22为根据第一多画面显示模式 选择第二多画面显示模式的示意图， 在图 22所示， 以虚线表示根据用户操作 形成第一多画面显示模式， 以实现表示数据库中的可支持的多画面显示模式。 图 22的（ a )为将第一多画面显示模式与数据库中的第一种多画面显示模式（如 图 21中 （a )所示）进行比较， 其中阴影区域为两者相差面积， 记为第一相差 面积； 图 22的（b )为将第一多画面显示模式与数据库中的第二种多画面显示 模式（如图 21中 （b )所示）进行比较， 其中阴影区域为两者相差面积， 记为 第二相差面积； 按照相同方式， 可获得第一多画面显示模式与数据库中其余 四种多画面显示模式的相差面积， 此处未示出。 通过将各相差面积进行比较， 例如获知第一相差面积小于第二相差面积 （及其它各相差面积） ， 则可选定 第二种多画面显示模式作为屏幕的多画面显示模式。
在上述实施例一至六的多画面显示的控制方法中， 虽然以用户通过触摸 操作或鼠标操作向控制设备提供用户操作的滑动轨迹为例， 对本发明实施例 的多画面显示的控制方法进行说明。 但本领域的技术人员能够理解， 控制设 备还可通过任意其它方式来接收用户操作的滑动轨迹时， 均能够实现本发明 实施例的技术方案。
例如， 控制设备通过手势识别的方式来接收用户操作的滑动轨迹。 具体 地， 控制设备中预先存储有与用户手势相对应的用户操作， 通过摄像头获取 用户手势和手势移动位置时， 根据用户手势与用户操作的映射关系， 识别出 用户操作， 并根据用户手势的移动位置形成用户操作的滑动轨迹。 更为具体 地， 例如当摄像头识别出用户食指伸直， 其他四指合拢的手势时， 若根据预 先存储的用户手势与用户操作的映射关系， 获知该手势对应于多画面分割线 生成操作； 并根据摄像头识别出用户保持该手势从一个位置 （对应于第一坐 标）移动至另一个位置 （对应于第二坐标） ， 则生成以第一坐标和第二坐标 为两个端点的多画面分割线。 类似地， 通过预先定义分别与多画面分割线删 除操作、 移动操作和旋转操作对应的不同用户手势， 则可实现本发明实施例 的技术方案。 实施例七
本实施例提供的多画面显示控制装置用于执行上述任一实施例的多画面 显示的控制方法。 该多画面显示控制装置例如为上述实施例中的控制设备， 既可单独设置， 也与终端、 个人智真或三屏网真设备等集成设置。
图 23为本发明实施例七的多画面显示控制装置的结构示意图， 如图 23所 示， 该多画面显示控制装置包括显示屏 71、 第一处理器 72和第二处理器 73, 所述第一处理器 72分别与所述显示屏 71和所述第二处理器 73连接， 其中： 所述显示屏 71 , 用于接收用户操作的滑动轨迹， 并将所述用户操作的滑 动轨迹发送至所述第一处理器 72;
所述第一处理器 72, 用于根据所述用户操作的滑动轨迹进行多画面分割 线的操作， 并将操作后的多画面分割线发送至所述第二处理器 73;
所述第二处理器 73, 用于根据所述操作后的多画面分割线所形成的多画 面显示模式， 控制目标屏幕进行画面显示。
其中， 显示屏 71例如为图 3所示的控制设备的显示屏， 第一处理器 72和第 二处理器 73例如为控制设备中集成的处理器， 或是图 1 ( b ) 中所示的多点控 制服务器的处理器， 其中多点控制服务器与各会场的控制设备连接。
本实施例的多画面显示控制装置执行多画面显示控制的流程， 与前述实 施例的多画面显示的控制方法相同， 故此处不再赘述。
根据本实施例的多画面显示控制装置， 由于用户可通过对多画面显示模 式设置装置进行点击和拖动等操作， 针对多画面显示模式中的多画面分割线 进行操作， 从而获得按照调节后的多画面分割线形成的多画面显示模式， 实 现了多画面显示模式的直观、 灵活设置。
进一步地， 图 24为本发明又一实施例的多画面显示控制装置的结构示意 图。 如图 24所示， 在上述实施例的多画面显示控制装置中， 所述显示屏 71包 括：
第一用户接口 71 a, 用于接收用户对多画面分割线进行操作的滑动轨迹， 并将所述用户对多画面分割线进行操作的滑动轨迹发送至所述第一处理器； 或者
第二用户接口 71 b ,用于接收所述用户对所述目标屏幕显示的会场画面进 行操作的滑动轨迹， 并将所述用户对所述目标屏幕显示的会场画面进行操作 的滑动轨迹发送至所述第一处理器 72;
相应地， 所述第一处理器 72包括：
第一处理模块 72a,用于根据所述用户对多画面分割线进行操作的滑动轨 迹进行多画面分割线的操作； 或者
第二处理模块 72b,用于根据所述用户对所述目标屏幕显示的会场画面进 行操作的滑动轨迹， 进行多画面分割线的操作。
进一步地， 图 25为本发明又一实施例的多画面显示控制装置的结构示意 图。 如图 25所示， 在上述实施例的多画面显示控制装置中，
所述第一处理模块 72a具体包括：
第一生成单元 72a1 ,用于通过所述第一用户接口 71 a,接收所述用户从第 一坐标点至第二坐标点的滑动轨迹， 生成以所述第一坐标点和所述第二坐标 点为端点的多画面分割线； 或者 第一调节单元 72a2,用于通过所述第一用户接口 71 a,接收所述用户对多 画面分割线进行选择的选择操作， 根据所述选择操作确定待操作的多画面分 割线； 并通过所述第一用户接口 71 a, 接收所述用户对所述待操作的多画面分 割线进行操作的滑动轨迹， 根据所述用户对所述待操作的多画面分割线进行 操作的滑动轨迹， 对所述待操作的多画面分割线进行移动、 旋转或删除。
进一步地， 在上述实施例的多画面显示控制装置中，
所述第一用户接口具体用于接收所述用户对多画面分割线的点击操作， 将所述用户对多画面分割线的点击操作发送至所述第一调节单元； 相应地， 所述第一调节单元用于将所述点击操作所选中的多画面分割线确定为所述待 操作的多画面分割线； 或者
所述第一用户接口具体用于接收所述用户的框选操作， 将所述用户的框 选操作发送至所述第一调节单元； 相应地， 所述第一调节单元用于将所述框 选操作所形成的选择框范围内的多画面分割线确定为所述待操作的多画面分 割线。
进一步地， 在上述实施例的多画面显示控制装置中， 所述第一用户接口 具体用于接收所述用户在所述目标屏幕内对所述待操作的多画面分割线进行 拖动操作的滑动轨迹， 并将用户在所述目标屏幕内对所述待操作的多画面分 割线进行拖动操作的滑动轨迹发送至所述调节单元； 相应地， 所述第一调节 单元用于根据所述用户在所述目标屏幕内对所述待操作的多画面分割线进行 拖动操作的滑动轨迹， 将所述待操作的多画面分割线移动至所述拖动操作的 滑动轨迹的结束位置； 或者
所述第一用户接口具体用于接收所述用户将所述待操作的多画面分割线 拖出所述目标屏幕的滑动轨迹， 并将所述用户将所述待操作的多画面分割线 拖出所述目标屏幕的滑动轨迹发送至所述第一调节单元； 相应地， 所述第一 调节单元用于根据所述用户将所述待操作的多画面分割线拖出所述目标屏幕 的滑动轨迹， 对所述待操作的多画面分割线进行删除； 或者
所述第一用户接口具体用于接收所述用户对待操作的多画面分割线进行 旋转操作的滑动轨迹， 并将所述用户对待操作的多画面分割线进行旋转操作 的滑动轨迹发送至所述第一调节单元； 相应地， 所述第一调节单元用于根据 所述用户对待操作的多画面分割线进行旋转操作的滑动轨迹， 对所述待操作 的多画面分割线进行旋转。
进一步地， 图 26为本发明又一实施例的多画面显示控制装置的结构示意 图。 如图 26所示， 在上述实施例的多画面显示控制装置中， 所述第二处理模 块 72b具体包括：
第二生成单元 72b1 ,用于通过所述第二用户接口 71 b,接收所述用户向所 述目标屏幕拖入会场画面的滑动轨迹， 并根据所述拖入会场画面的滑动轨迹， 生成用于构成显示所拖入的会场画面的显示区域的边界的多画面分割线； 第二调节单元 72b2,用于通过所述第二用户接口 71 b,接收所述用户对所 述目标屏幕显示的会场画面进行选择的选择操作， 根据所述选择操作确定待 操作的会场画面； 并通过所述第二用户接口 71 b, 接收所述用户对所述会场画 面进行操作的滑动轨迹， 根据所述用户对所述会场画面进行操作的滑动轨迹， 对用于构成显示所述待操作的会场画面的显示区域的边界的多画面分割线进 行移动、 旋转或删除。
进一步地， 在上述实施例的多画面显示控制装置中， 所述第二用户接口 具体用于接收所述用户对所述待操作的会场画面进行尺寸调节操作的滑动轨 迹， 并将所述用户对所述待操作的会场画面进行尺寸调节操作的滑动轨迹发 送至所述第二调节单元； 相应地， 所述第二调节单元用于根据所述用户对所 述待操作的会场画面进行尺寸调节操作的滑动轨迹， 对用于构成显示所述待 操作的会场画面的显示区域的边界的多画面分割线进行移动；
所述第二用户接口具体用于接收所述用户在所述目标屏幕内对所述待操 作的会场画面进行拖动操作的滑动轨迹， 并将所述用户在所述目标屏幕内对 所述待操作的会场画面进行拖动操作的滑动轨迹发送至所述第二调节单元； 相应地， 所述第二调节单元用于根据所述用户在所述目标屏幕内对所述待操 作的会场画面进行拖动操作的滑动轨迹， 对用于构成显示所述待操作的会场 画面的显示区域的边界的多画面分割线进行旋转； 或者
所述第二用户接口具体用于接收所述用户将所述待操作的会场画面拖出 所述目标屏幕的滑动轨迹， 并将所述用户将所述待操作的会场画面拖出所述 目标屏幕的滑动轨迹发送至所述第二调节单元； 相应地， 所述第二调节单元 用于根据所述用户将所述待操作的会场画面拖出所述目标屏幕的滑动轨迹， 删除用于构成显示所述待操作的会场画面的显示区域的边界的多画面分割 线。
进一步地， 图 27为本发明又一实施例的多画面显示控制装置的结构示意 图。 如图 27所示， 在上述实施例的多画面显示控制装置中， 所述第二处理器 73包括：
画面调节模块 73a,用于根据所形成的多画面显示模式中各显示区域的宽 高比和 /或位置， 对待显示的会场画面进行调节；
第一显示控制模块 73b,用于控制所述目标屏幕在所述显示区域内显示调 节后的会场画面。
进一步地， 图 28为本发明又一实施例的多画面显示控制装置的结构示意 图。 如图 28所示， 在上述实施例的多画面显示控制装置中， 还包括存储器 74, 与所述第二处理器 73连接， 用于预先存储多画面显示模式； 相应地， 所述第 二处理器 73包括：
调取模块 73c, 用于从所述存储器预先存储的多画面显示模式中， 调取与 第一多画面显示模式相近的第二多画面显示模式； 其中， 所述第一多画面显 示模式为操作后的多画面分割线所形成的多画面显示模式； 所述第二多画面 显示模式与所述第一多画面显示模式具有相同数量的显示区域， 或者， 所述 第二多画面显示模式与所述第一多画面显示模式的面积差， 小于预先存储的 多画面显示模式中任意其它多画面显示模式与所述第一多画面显示模式的面 积差；
第二显示控制模块 73d,用于控制所述目标屏幕根据所述第二多画面显示 模式进行画面显示。
进一步地， 在上述实施例的多画面显示控制装置中， 所述第一用户接口 以及所述第二用户接口， 具体用于接收用户触摸操作或接收用户鼠标操作， 或识别用户的手势滑动轨迹。 实施例八
本实施例提供一种多画面显示控制系统， 该多画面显示模式设置系统包 括目标屏幕和上述实施例的任一多画面显示控制装置。
利用该多画面显示控制系统执行多画面显示控制的流程与前述实施例的 多画面显示的控制方法相同， 故此处不再赘述。 根据本实施例的多画面显示控制系统， 由于用户可通过对多画面显示控 制装置进行点击和拖动等操作， 针对多画面显示模式中的多画面分割线进行 操作， 从而获得按照调节后的多画面分割线形成的多画面显示模式， 实现了 多画面显示模式的直观、 灵活设置。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流 程， 是可以通过计算机程序来指令相关的硬件来完成， 所述的程序可存储于 一计算机可读取存储介质中， 该程序在执行时， 可包括如上述各方法的实施 例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体（ Read-Only Memory, ROM )或随机存 己忆体 ( Random Access Memory, RAM )等。
最后应说明的是： 以上实施例仅用以说明本发明的技术方案， 而非对其 限制； 尽管参照前述实施例对本发明进行了详细的说明， 本领域的普通技术 人员应当理解： 其依然可以对前述各实施例所记载的技术方案进行修改， 或 者对其中部分技术特征进行等同替换； 而这些修改或者替换， 并不使相应技 术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims

权 利 要求 书
1、 一种多画面显示的控制方法， 其特征在于， 包括：
接收用户操作的滑动轨迹， 根据所述用户操作的滑动轨迹进行多画面分割 线的操作；
根据操作后的多画面分割线所形成的多画面显示模式， 控制目标屏幕进行 画面显示。
2、 根据权利要求 1所述的多画面显示的控制方法， 其特征在于， 所述接收 用户操作的滑动轨迹， 根据所述用户操作的滑动轨迹进行多画面分割线的操作 具体包括：
接收用户对多画面分割线进行操作的滑动轨迹， 并根据所述用户对多画面 分割线进行操作的滑动轨迹进行多画面分割线的操作； 或者
接收所述用户对所述目标屏幕显示的会场画面进行操作的滑动轨迹， 并根 据所述用户对所述目标屏幕显示的会场画面进行操作的滑动轨迹， 进行多画面 分割线的操作。
3、 根据权利要求 2所述的多画面显示的控制方法， 其特征在于， 所述接收 用户对多画面分割线进行操作的滑动轨迹， 并根据所述用户对多画面分割线进 行操作的滑动轨迹进行多画面分割线的操作具体包括：
接收所述用户从第一坐标点至第二坐标点的滑动轨迹， 生成以所述第一坐 标点和所述第二坐标点为端点的多画面分割线； 或者
接收所述用户对多画面分割线进行选择的选择操作， 根据所述选择操作确 定待操作的多画面分割线； 并接收所述用户对所述待操作的多画面分割线进行 操作的滑动轨迹， 根据所述用户对所述待操作的多画面分割线进行操作的滑动 轨迹， 对所述待操作的多画面分割线进行移动、 旋转或删除。
4、 根据权利要求 3所述的多画面显示的控制方法， 其特征在于， 所述接收 所述用户对多画面分割线进行选择的选择操作， 根据所述选择操作确定待操作 的多画面分割线具体包括：
接收所述用户对多画面分割线的点击操作， 将所述点击操作所选中的多画 面分割线确定为所述待操作的多画面分割线； 或者
接收所述用户的框选操作， 将所述框选操作所形成的选择框范围内的多画 面分割线确定为所述待操作的多画面分割线。
5、 根据权利要求 3所述的多画面显示的控制方法， 其特征在于， 所述接收 所述用户对所述待操作的多画面分割线进行操作的滑动轨迹， 根据所述用户对 所述待操作的多画面分割线进行操作的滑动轨迹， 对所述待操作的多画面分割 线进行移动、 旋转或删除具体包括：
接收所述用户在所述目标屏幕内对所述待操作的多画面分割线进行拖动操 作的滑动轨迹， 将所述待操作的多画面分割线移动至所述拖动操作的滑动轨迹 的结束位置；
接收所述用户将所述待操作的多画面分割线拖出所述目标屏幕的滑动轨 迹， 对所述待操作的多画面分割线进行删除； 或者
接收所述用户对待操作的多画面分割线进行旋转操作的滑动轨迹， 根据旋 转操作的滑动轨迹对所述待操作的多画面分割线进行旋转。
6、 根据权利要求 2所述的多画面显示的控制方法， 其特征在于， 所述接收 所述用户对所述目标屏幕显示的会场画面进行操作的滑动轨迹， 并根据所述用 户对所述目标屏幕显示的会场画面进行操作的滑动轨迹进行多画面分割线的操 作具体包括：
接收所述用户向所述目标屏幕拖入会场画面的滑动轨迹， 根据拖入会场画 面的滑动轨迹， 生成用于构成显示所拖入的会场画面的显示区域的边界的多画 面分割线；
接收所述用户对所述目标屏幕显示的会场画面进行选择的选择操作， 根据 所述选择操作确定待操作的会场画面； 并接收所述用户对所述会场画面进行操 作的滑动轨迹， 根据所述用户对所述会场画面进行操作的滑动轨迹， 对用于构 成显示所述待操作的会场画面的显示区域的边界的多画面分割线进行移动、 旋 转或删除。
7、 根据权利要求 6所述的多画面显示的控制方法， 其特征在于， 所述接收 所述用户对所述会场画面进行操作的滑动轨迹， 根据所述用户对所述会场画面 进行操作的滑动轨迹， 对用于构成显示所述待操作的会场画面的显示区域的多 画面分割线进行移动、 旋转或删除具体包括：
接收所述用户对所述待操作的会场画面进行尺寸调节操作的滑动轨迹， 根 据尺寸调节的滑动轨迹， 对用于构成显示所述待操作的会场画面的显示区域的 边界的多画面分割线进行移动； 接收所述用户在所述目标屏幕内对所述待操作的会场画面进行拖动操作的 滑动轨迹， 根据所述拖动操作的滑动轨迹， 对用于构成显示所述待操作的会场 画面的显示区域的边界的多画面分割线进行旋转； 或者
接收所述用户将所述待操作的会场画面拖出所述目标屏幕的滑动轨迹， 删 除用于构成显示所述待操作的会场画面的显示区域的边界的多画面分割线。
8、 根据权利要求 1 -7任一所述的多画面显示的控制方法， 其特征在于， 所 述根据操作后的多画面分割线所形成的多画面显示模式， 控制目标屏幕进行画 面显示具体包括：
根据所形成的多画面显示模式中各显示区域的宽高比和 /或位置， 对待显示 的会场画面进行调节， 并在所述显示区域内显示调节后的会场画面。
9、 根据权利要求 1 -7任一所述的多画面显示的控制方法， 其特征在于， 所 述根据操作后的多画面分割线所形成的多画面显示模式， 控制目标屏幕进行画 面显示具体包括：
从预先存储的多画面显示模式中， 调取与第一多画面显示模式相近的第二 多画面显示模式， 并控制所述目标屏幕根据所述第二多画面显示模式进行画面 显示； 其中， 所述第一多画面显示模式为操作后的多画面分割线所形成的多画 面显示模式；
其中： 所述第二多画面显示模式与所述第一多画面显示模式具有相同数量 的显示区域； 或者
所述第二多画面显示模式与所述第一多画面显示模式的面积差， 小于预先 存储的多画面显示模式中任意其它多画面显示模式与所述第一多画面显示模式 的面积差。
10、 根据权利要求 1 -7任一所述的多画面显示的控制方法， 其特征在于， 所 述接收用户操作的滑动轨迹具体包括：
接收用户触摸操作的滑动轨迹； 或者
接收用户鼠标操作的滑动轨迹； 或者
识别用户的手势滑动轨迹。
1 1、 一种多画面显示控制装置， 其特征在于， 包括显示屏、 第一处理器和 第二处理器， 所述第一处理器分别与所述显示屏和所述第二处理器连接， 其中： 所述显示屏， 用于接收用户操作的滑动轨迹， 并将所述用户操作的滑动轨 迹发送至所述第一处理器；
所述第一处理器， 用于根据所述用户操作的滑动轨迹进行多画面分割线的 操作， 并将操作后的多画面分割线发送至所述第二处理器；
所述第二处理器， 用于根据所述操作后的多画面分割线所形成的多画面显 示模式， 控制目标屏幕进行画面显示。
12、 根据权利要求 1 1所述的多画面显示控制装置， 其特征在于， 所述显示 屏包括：
第一用户接口， 用于接收用户对多画面分割线进行操作的滑动轨迹， 并将 所述用户对多画面分割线进行操作的滑动轨迹发送至所述第一处理器； 或者 第二用户接口， 用于接收所述用户对所述目标屏幕显示的会场画面进行操 作的滑动轨迹， 并将所述用户对所述目标屏幕显示的会场画面进行操作的滑动 轨迹发送至所述第一处理器；
相应地， 所述第一处理器包括：
第一处理模块， 用于根据所述用户对多画面分割线进行操作的滑动轨迹进 行多画面分割线的操作； 或者
第二处理模块， 用于根据所述用户对所述目标屏幕显示的会场画面进行操 作的滑动轨迹， 进行多画面分割线的操作。
13、 根据权利要求 12所述的多画面显示控制装置， 其特征在于， 所述第一 处理模块具体包括：
第一生成单元， 用于通过所述第一用户接口， 接收所述用户从第一坐标点 至第二坐标点的滑动轨迹， 生成以所述第一坐标点和所述第二坐标点为端点的 多画面分割线； 或者
第一调节单元， 用于通过所述第一用户接口， 接收所述用户对多画面分割 线进行选择的选择操作， 根据所述选择操作确定待操作的多画面分割线； 并通 过所述第一用户接口， 接收所述用户对所述待操作的多画面分割线进行操作的 滑动轨迹， 根据所述用户对所述待操作的多画面分割线进行操作的滑动轨迹， 对所述待操作的多画面分割线进行移动、 旋转或删除。
14、 根据权利要求 13所述的多画面显示控制装置， 其特征在于， 所述第一 用户接口具体用于接收所述用户对多画面分割线的点击操作， 将所述用户对多 画面分割线的点击操作发送至所述第一调节单元； 相应地， 所述第一调节单元 用于将所述点击操作所选中的多画面分割线确定为所述待操作的多画面分割 线； 或者
所述第一用户接口具体用于接收所述用户的框选操作， 将所述用户的框选 操作发送至所述调节单元； 相应地， 所述第一调节单元用于将所述框选操作所 形成的选择框范围内的多画面分割线确定为所述待操作的多画面分割线。
15、 根据权利要求 13所述的多画面显示控制装置， 其特征在于， 所述第一 用户接口具体用于接收所述用户在所述目标屏幕内对所述待操作的多画面分割 线进行拖动操作的滑动轨迹， 并将用户在所述目标屏幕内对所述待操作的多画 面分割线进行拖动操作的滑动轨迹发送至所述第一调节单元； 相应地， 所述第 一调节单元用于根据所述用户在所述目标屏幕内对所述待操作的多画面分割线 进行拖动操作的滑动轨迹， 将所述待操作的多画面分割线移动至所述拖动操作 的滑动轨迹的结束位置； 或者
所述第一用户接口具体用于接收所述用户将所述待操作的多画面分割线拖 出所述目标屏幕的滑动轨迹， 并将所述用户将所述待操作的多画面分割线拖出 所述目标屏幕的滑动轨迹发送至所述第一调节单元； 相应地， 所述第一调节单 元用于根据所述用户将所述待操作的多画面分割线拖出所述目标屏幕的滑动轨 迹， 对所述待操作的多画面分割线进行删除； 或者
所述第一用户接口具体用于接收所述用户对待操作的多画面分割线进行旋 转操作的滑动轨迹， 并将所述用户对待操作的多画面分割线进行旋转操作的滑 动轨迹发送至所述第一调节单元； 相应地， 所述第一调节单元用于根据所述用 户对待操作的多画面分割线进行旋转操作的滑动轨迹， 对所述待操作的多画面 分割线进行旋转。
16、 根据权利要求 12所述的多画面显示控制装置， 其特征在于， 所述第二 处理模块具体包括：
第二生成单元， 用于通过所述第二用户接口， 接收所述用户向所述目标屏 幕拖入会场画面的滑动轨迹， 并根据所述拖入会场画面的滑动轨迹， 生成用于 构成显示所拖入的会场画面的显示区域的边界的多画面分割线；
第二调节单元， 用于通过所述第二用户接口， 接收所述用户对所述目标屏 幕显示的会场画面进行选择的选择操作， 根据所述选择操作确定待操作的会场 画面； 并通过所述第二用户接口， 接收所述用户对所述会场画面进行操作的滑 动轨迹， 根据所述用户对所述会场画面进行操作的滑动轨迹， 对用于构成显示 所述待操作的会场画面的显示区域的边界的多画面分割线进行移动、 旋转或删 除。
17、 根据权利要求 16所述的多画面显示控制装置， 其特征在于， 所述第二 用户接口具体用于接收所述用户对所述待操作的会场画面进行尺寸调节操作的 滑动轨迹， 并将所述用户对所述待操作的会场画面进行尺寸调节操作的滑动轨 迹发送至所述第二调节单元； 相应地， 所述第二调节单元用于根据所述用户对 所述待操作的会场画面进行尺寸调节操作的滑动轨迹， 对用于构成显示所述待 操作的会场画面的显示区域的边界的多画面分割线进行移动；
所述第二用户接口具体用于接收所述用户在所述目标屏幕内对所述待操作 的会场画面进行拖动操作的滑动轨迹， 并将所述用户在所述目标屏幕内对所述 待操作的会场画面进行拖动操作的滑动轨迹发送至所述第二调节单元； 相应地， 所述第二调节单元用于根据所述用户在所述目标屏幕内对所述待操作的会场画 面进行拖动操作的滑动轨迹， 对用于构成显示所述待操作的会场画面的显示区 域的边界的多画面分割线进行旋转； 或者
所述第二用户接口具体用于接收所述用户将所述待操作的会场画面拖出所 述目标屏幕的滑动轨迹， 并将所述用户将所述待操作的会场画面拖出所述目标 屏幕的滑动轨迹发送至所述第二调节单元； 相应地， 所述第二调节单元用于根 据所述用户将所述待操作的会场画面拖出所述目标屏幕的滑动轨迹， 删除用于 构成显示所述待操作的会场画面的显示区域的边界的多画面分割线。
18、 根据权利要求 1 1 -17任一所述的多画面显示控制装置， 其特征在于， 所 述第二处理器包括：
画面调节模块， 用于根据所形成的多画面显示模式中各显示区域的宽高比 和 /或位置， 对待显示的会场画面进行调节；
第一显示控制模块， 用于控制所述目标屏幕在所述显示区域内显示调节后 的会场画面。
19、 根据权利要求 1 1 -17任一所述的多画面显示控制装置， 其特征在于， 还 包括存储器， 与所述第二处理器连接， 用于预先存储多画面显示模式； 相应地， 所述第二处理器包括：
调取模块， 用于从所述存储器预先存储的多画面显示模式中， 调取与第一 多画面显示模式相近的第二多画面显示模式； 其中， 所述第一多画面显示模式 为操作后的多画面分割线所形成的多画面显示模式； 所述第二多画面显示模式 与所述第一多画面显示模式具有相同数量的显示区域， 或者， 所述第二多画面 显示模式与所述第一多画面显示模式的面积差， 小于预先存储的多画面显示模 式中任意其它多画面显示模式与所述第一多画面显示模式的面积差；
第二显示控制模块， 用于控制所述目标屏幕根据所述第二多画面显示模式 进行画面显示。
20、 根据权利要求 1 1 -17任一所述的多画面显示控制装置， 其特征在于， 所 述第一用户接口以及所述第二用户接口， 具体用于接收用户触摸操作， 或接收 用户鼠标操作， 或识别用户的手势滑动轨迹。
21、一种多画面显示控制系统，其特征在于，包括目标屏幕和权利要求 11-20 任一所述的多画面显示控制装置。
PCT/CN2013/073713 2012-06-05 2013-04-03 多画面显示的控制方法、装置及系统 WO2013181965A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/560,648 US20150109400A1 (en) 2012-06-05 2014-12-04 Method, Apparatus and System for Controlling Multipicture Display

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201210182098.8A CN102750122B (zh) 2012-06-05 2012-06-05 多画面显示控制方法、装置及系统
CN201210182098.8 2012-06-05

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US14/560,648 Continuation US20150109400A1 (en) 2012-06-05 2014-12-04 Method, Apparatus and System for Controlling Multipicture Display

Publications (1)

Publication Number Publication Date
WO2013181965A1 true WO2013181965A1 (zh) 2013-12-12

Family

ID=47030346

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2013/073713 WO2013181965A1 (zh) 2012-06-05 2013-04-03 多画面显示的控制方法、装置及系统

Country Status (3)

Country Link
US (1) US20150109400A1 (zh)
CN (1) CN102750122B (zh)
WO (1) WO2013181965A1 (zh)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102750122B (zh) * 2012-06-05 2015-10-21 华为技术有限公司 多画面显示控制方法、装置及系统
CN103686066B (zh) * 2012-09-25 2017-05-03 杭州海康威视数字技术股份有限公司 调整多画面播放分割模式的方法及客户端
CN103905860A (zh) * 2012-12-28 2014-07-02 鸿富锦精密工业（深圳）有限公司 显示装置的远程控制系统及方法
CN103902242A (zh) * 2012-12-28 2014-07-02 鸿富锦精密工业（深圳）有限公司 显示装置的远程控制系统及方法
US8976202B2 (en) * 2013-01-28 2015-03-10 Dave CAISSY Method for controlling the display of a portable computing device
CN104035704B (zh) * 2013-03-07 2017-10-10 北京三星通信技术研究有限公司 分屏操作的方法及装置
CN103324435B (zh) 2013-05-24 2017-02-08 华为技术有限公司 分屏显示的方法、装置及其电子设备
USD757064S1 (en) * 2013-06-05 2016-05-24 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
KR102131257B1 (ko) * 2013-07-02 2020-07-07 삼성전자주식회사 전자장치 및 전자장치의 멀티윈도우 제어방법
CN104423851B (zh) * 2013-08-22 2019-12-20 深圳富泰宏精密工业有限公司 调整画面显示的系统及方法
CN104423908B (zh) * 2013-08-26 2019-04-26 联想(北京)有限公司 电子设备及其显示处理方法
JP6151157B2 (ja) * 2013-10-29 2017-06-21 京セラ株式会社 電子機器および制御プログラム並びに電子機器の動作方法
CN105446449A (zh) * 2014-08-25 2016-03-30 纬创资通股份有限公司 具有多窗口显示的电子装置
CN104267894B (zh) * 2014-09-03 2018-05-08 努比亚技术有限公司 移动终端分屏控制方法和系统
CN104360798B (zh) * 2014-10-29 2018-05-15 宇龙计算机通信科技(深圳)有限公司 一种桌面布局的方法和终端
KR102343990B1 (ko) * 2015-06-15 2021-12-28 삼성전자주식회사 디스플레이의 서로 다른 영역을 독립적으로 제어하는 전자 장치 및 방법
KR20170014356A (ko) * 2015-07-29 2017-02-08 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US10466817B2 (en) 2015-10-01 2019-11-05 Huawei Technologies Co., Ltd. Electronic device with rotatably mounted bezel for interaction and method of operating such an electronic device
CN105472360A (zh) * 2015-11-16 2016-04-06 联想(北京)有限公司 一种投影显示方法及电子设备
TWI617969B (zh) 2016-11-24 2018-03-11 新加坡商雲網科技新加坡有限公司 畫面控制方法及使用者終端
DK180117B1 (en) 2017-05-15 2020-05-15 Apple Inc. SYSTEMS AND METHODS FOR INTERACTING WITH MULTIPLE APPLICATIONS THAT ARE SIMULTANEOUSLY DISPLAYED ON AN ELECTRONIC DEVICE WITH A TOUCHSENSITIVE DISPLAY
CN107493498A (zh) * 2017-08-08 2017-12-19 陕西中联电科电子有限公司 通过可触控移动图标实现视频会议多屏视频显示的方法
CN107967100A (zh) * 2017-12-06 2018-04-27 Tcl移动通信科技（宁波）有限公司 基于移动终端摄像头的操作控制处理方法、及存储介质
CN108182662A (zh) * 2017-12-29 2018-06-19 政采云有限公司 图片处理方法及装置、计算机可读存储介质
CN108491149B (zh) * 2018-03-28 2020-11-03 维沃移动通信有限公司 一种分屏显示方法及终端
CN110636242B (zh) * 2018-06-22 2023-02-17 中兴通讯股份有限公司 一种视频会议中画面切换方法、终端及mcu
CN109947313B (zh) * 2019-02-21 2020-10-16 贵安新区新特电动汽车工业有限公司 车载显示屏分割显示方法及装置
CN113157227A (zh) * 2020-01-23 2021-07-23 苏州佳世达电通有限公司 显示画面的控制方法及显示系统
CN111459392A (zh) * 2020-03-13 2020-07-28 中天智领（北京）科技有限公司 一种信号源内容推送方法、装置及系统
CN112584223A (zh) * 2020-12-04 2021-03-30 深圳创维－Rgb电子有限公司 基于电视的自适应分屏显示方法、装置、智能终端及介质
CN112911196A (zh) * 2021-01-15 2021-06-04 随锐科技集团股份有限公司 多镜头采集的视频图像处理方法及系统
CN113422972B (zh) * 2021-06-03 2023-04-07 五八到家有限公司 直播画面切换方法及装置、电子设备及可读介质
CN113720337B (zh) * 2021-08-20 2024-06-07 珠海格力电器股份有限公司 扫地机器人的地图编辑方法及装置、存储介质、电子设备
US20230412656A1 (en) * 2022-06-20 2023-12-21 Zoom Video Communications, Inc. Dynamic Aspect Ratio Adjustment During Video Conferencing
WO2024018601A1 (ja) * 2022-07-21 2024-01-25 日本電信電話株式会社 表示画面作成システム、表示画面作成方法及び画像中継プログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101167365A (zh) * 2005-03-09 2008-04-23 高通股份有限公司 用于视频电话的感兴趣区域处理
CN101196792A (zh) * 2007-12-28 2008-06-11 宇龙计算机通信科技(深圳)有限公司 一种文档自动校正方法和装置
CN101420534A (zh) * 2008-11-07 2009-04-29 深圳华为通信技术有限公司 多画面显示方法和装置
CN102750122A (zh) * 2012-06-05 2012-10-24 华为技术有限公司 多画面显示控制方法、装置及系统

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5712995A (en) * 1995-09-20 1998-01-27 Galileo Frames, Inc. Non-overlapping tiling apparatus and method for multiple window displays
US6874128B1 (en) * 2000-03-08 2005-03-29 Zephyr Associates, Inc. Mouse driven splitter window
CN1268122C (zh) * 2002-07-23 2006-08-02 精工爱普生株式会社 显示方法及投影机
US20060020903A1 (en) * 2004-07-26 2006-01-26 Shih-Yang Wang Window split system and method
JP4700539B2 (ja) * 2006-03-22 2011-06-15 パナソニック株式会社 表示装置
JP4389090B2 (ja) * 2007-10-03 2009-12-24 シャープ株式会社 情報表示装置
KR101386473B1 (ko) * 2007-10-04 2014-04-18 엘지전자 주식회사 휴대 단말기 및 그 메뉴 표시 방법
JP4591568B2 (ja) * 2008-07-16 2010-12-01 セイコーエプソン株式会社 画像表示制御方法、画像供給装置及び画像表示制御プログラム
US8600446B2 (en) * 2008-09-26 2013-12-03 Htc Corporation Mobile device interface with dual windows
KR101640460B1 (ko) * 2009-03-25 2016-07-18 삼성전자 주식회사 휴대 단말기의 분할 화면 운용 방법 및 이를 지원하는 휴대 단말기
CN101959051A (zh) * 2010-09-01 2011-01-26 华为终端有限公司 远程呈现系统的屏幕选看方法及装置
US9696880B2 (en) * 2011-12-26 2017-07-04 Inadev Corporation Screen management system
US9098484B2 (en) * 2012-05-07 2015-08-04 Patrick Viry Structuring and editing a recursively multi-dimensional spreadsheet

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101167365A (zh) * 2005-03-09 2008-04-23 高通股份有限公司 用于视频电话的感兴趣区域处理
CN101196792A (zh) * 2007-12-28 2008-06-11 宇龙计算机通信科技(深圳)有限公司 一种文档自动校正方法和装置
CN101420534A (zh) * 2008-11-07 2009-04-29 深圳华为通信技术有限公司 多画面显示方法和装置
CN102750122A (zh) * 2012-06-05 2012-10-24 华为技术有限公司 多画面显示控制方法、装置及系统

Also Published As

Publication number Publication date
US20150109400A1 (en) 2015-04-23
CN102750122A (zh) 2012-10-24
CN102750122B (zh) 2015-10-21

Similar Documents

Publication Publication Date Title
WO2013181965A1 (zh) 多画面显示的控制方法、装置及系统
WO2019237662A1 (zh) 显示界面控制方法以及装置、设备及存储介质
JP6257329B2 (ja) 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
JP6196017B2 (ja) 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
US10628010B2 (en) Quick review of captured image data
JP2017108366A (ja) ビデオ会議を制御する方法、システム、及びプログラム
US11908246B2 (en) View layout configuration for increasing eye contact in video communications
WO2012092853A1 (zh) 视频会议的控制方法和会议终端
JP6200270B2 (ja) 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
NO332170B1 (no) Anordning og fremgangsmate for kamerakontroll
JP2013145455A (ja) 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
JP2013145468A (ja) 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
US11076125B2 (en) Information processing apparatus and information processing method
JP6885416B2 (ja) 電子黒板、電子黒板の画像処理方法、及びプログラム
WO2023207145A1 (zh) 截屏方法、装置、电子设备及计算机可读介质
TWI578798B (zh) 監控視訊顯示方法及電腦程式產品
WO2017032193A1 (zh) 用户界面布局的调整方法及装置
WO2019192498A1 (zh) 一种窗口分屏显示方法、装置及设备
TW201408063A (zh) 電子設備及其圖片縮放方法
US20170228137A1 (en) Local zooming of a workspace asset in a digital collaboration environment
WO2015078127A1 (zh) 一种文档呈现方法及用户终端
JP2014059722A (ja) 携帯情報装置、ソフトキーボード表示方法、ソフトキーボード表示プログラム、および、プログラム記録媒体
JP2016024433A (ja) マルチディスプレイシステムおよびディスプレイ
WO2016165589A1 (zh) 图像显示方法及装置
US8943411B1 (en) System, method, and computer program for displaying controls to a user

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13799882

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13799882

Country of ref document: EP

Kind code of ref document: A1