Nothing Special   »   [go: up one dir, main page]

WO2015013981A1 - 一种图像显示方法和装置 - Google Patents

一种图像显示方法和装置 Download PDF

Info

Publication number
WO2015013981A1
WO2015013981A1 PCT/CN2013/080728 CN2013080728W WO2015013981A1 WO 2015013981 A1 WO2015013981 A1 WO 2015013981A1 CN 2013080728 W CN2013080728 W CN 2013080728W WO 2015013981 A1 WO2015013981 A1 WO 2015013981A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
strategy
image display
displayed
display instruction
Prior art date
Application number
PCT/CN2013/080728
Other languages
English (en)
French (fr)
Inventor
陈普
许天锡
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Priority to CN201380002633.XA priority Critical patent/CN103858095B/zh
Priority to PCT/CN2013/080728 priority patent/WO2015013981A1/zh
Priority to EP17177039.9A priority patent/EP3301585A3/en
Priority to EP13802518.4A priority patent/EP2849080B1/en
Priority to CA2920050A priority patent/CA2920050C/en
Priority to JP2016530302A priority patent/JP6276408B2/ja
Priority to US14/143,852 priority patent/US8856385B1/en
Priority to US14/492,966 priority patent/US10320886B2/en
Publication of WO2015013981A1 publication Critical patent/WO2015013981A1/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/957—Browsing optimisation, e.g. caching or content distillation
    • G06F16/9577—Optimising the visualization of content, e.g. distillation of HTML documents
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435—Change or adaptation of the frame rate of the video stream
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00—Solving problems of bandwidth in display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content

Definitions

  • Embodiments of the present invention relate to computer technology, and in particular, to an image display method, system, and apparatus. Background technique
  • Remote Desktop can include technologies such as display of desktop images of remote computers, remote sound transfer, or pluggable hardware mapping. Remote desktops can also be called virtual desktops. At least one server and one client exist in the virtual desktop scenario, and log in to the remote server through the virtual desktop client software installed on the client.
  • the transfer of desktop images to the client can be done by drawing instructions.
  • the client receives "fill XX area with XX color", "Draw XX color from XX point, XX line from XX point to XX point", or "Draw XX picture to XX position" sent by remote computer.
  • the client receives "fill XX area with XX color", "Draw XX color from XX point, XX line from XX point to XX point", or "Draw XX picture to XX position" sent by remote computer.
  • For the last drawing instruction because it carries image information occupying bandwidth, when the remote computer sends it to the client, it processes the image according to a certain strategy, in order to reduce the data transmitted between the remote computer and the client. Quantity, reduce bandwidth usage, such as image compression strategy. What kind of processing strategy is used by the remote computer for the image sent to the client.
  • the image recognition technology is mainly relied on, and the remote computer recognizes the type of the image, and determines the corresponding processing strategy according to different types of the image.
  • this technique relies on the recognition of the image type by the remote computer, and determining the image processing strategy according to the image type may cause the image data transmitted to the client to fail to meet the requirements of the client.
  • the remote computer uses the lossy compression of the recognized image. After that, after being transmitted to the client for display, the client cannot meet the high quality requirements of the image quality, which affects the user experience. Summary of the invention
  • the embodiment of the invention provides an image display method, device and system, which no longer adopts a method for formulating an image processing strategy according to an image type, but adopts an image processing method closer to a client's requirement, thereby realizing an image satisfying a client's demand. display.
  • an embodiment of the present invention provides an image display method, including: acquiring an image display instruction, the image display instruction carrying an image to be displayed; determining an application that triggers the image display instruction; according to the application Processing the image to be displayed; sending an image display message to the client, the image display message including the processed image to be displayed, so that the client performs an image according to the image display message display.
  • the processing, by the application, the image to be displayed including: determining an image of the image to be displayed according to the application Processing a policy; processing the image to be displayed according to the image processing strategy.
  • the method further includes: pre-configuring a correspondence between the application and the image processing policy; correspondingly, determining, according to the application, The image processing strategy of the image to be displayed includes: querying the corresponding relationship according to the application, and determining an image processing policy of the image to be displayed.
  • the corresponding relationship between the pre-configured application and the image processing policy includes: configuring a first correspondence, where The first correspondence includes an image compression policy corresponding to different applications.
  • the image compression policy includes a lossless compression policy
  • the first correspondence of the configuration includes: configuring a first correspondence between the lossless compression policy and the first type of application software, or configuring the first using the lossless compression policy. a process name set; or the image compression policy includes a lossy compression policy, where the configuring the first correspondence comprises: dividing the lossy compression policy into multiple lossy compression levels; configuring for each lossy compression level Corresponding application software type, or configure a corresponding process name set for each lossy compression level.
  • the correspondence between the pre-configured application and the image processing policy includes:
  • a second correspondence is configured, where the second correspondence includes an image frequency control policy corresponding to different applications.
  • the image compression strategy includes an image frequency control policy lower than a default value, and the default value is a default image display frame rate or a delay time of the system;
  • the second corresponding relationship of the configuration includes:
  • the corresponding relationship between the pre-configured application and the image processing policy includes:
  • a third correspondence is configured, where the third correspondence includes a cursor rendering policy corresponding to different applications.
  • the cursor rendering strategy includes a server cursor rendering policy
  • the third correspondence of the configuration includes:
  • the determining, by the application, the application that triggers the image display instruction includes:
  • an embodiment of the present invention provides an image display apparatus, including:
  • An obtaining unit configured to acquire an image display instruction, where the image display instruction carries a map to be displayed
  • a determining unit configured to determine an application that triggers the image display instruction
  • a processing unit configured to process the image to be displayed according to the application determined by the determining unit
  • a sending unit configured to send an image display message to the client, where the image display message includes the image to be displayed processed by the processing unit, so that the client performs image display according to the image display message.
  • an embodiment of the present invention provides an image display system, including:
  • a server configured to acquire an image display instruction, the image display instruction carries an image to be displayed, determines an application that triggers the image display instruction, processes the image to be displayed according to the application program, and processes the image to the client Sending an image display message, where the image display message includes the processed image to be displayed;
  • a client configured to receive the image display message sent by the server, and perform image display according to the image display message.
  • an embodiment of the present invention provides a computer, including an application module, an operating system module, a display driver module, and a remote communication module, where the operating system module is configured to send a message according to a call instruction of the application module.
  • the display driving module sends an image display instruction; after receiving the image display instruction sent by the operating system module, the display driving module sends the image display instruction to the remote communication module;
  • the remote communication module is configured to acquire the image display finger sent by the display driving module
  • the image display instruction carries an image to be displayed, determines an application that triggers the image display instruction, processes the image to be displayed according to the application, and sends an image display message to the client.
  • the image display message includes the processed image to be displayed, so that the client performs image display according to the image display message.
  • a computer including: a processor, a memory, a bus, and a communication interface;
  • the memory is configured to store a computer execution instruction
  • the processor is connected to the memory through the bus, and when the computer is running, the processor executes the computer execution instruction stored in the memory to make The computer performs the following methods:
  • an image display instruction carrying an image to be displayed; determining an application that triggers the image display instruction; and processing the image to be displayed according to the application program;
  • an embodiment of the present invention provides a computer readable medium, including computer execution instructions, when the processor of the computer executes the computer execution instruction, the computer executes the following method:
  • the image display instruction carrying an image to be displayed; determining an application that triggers the image display instruction; processing the image to be displayed according to the application; sending an image display message to the client And the image display message includes the processed image to be displayed, so that the client performs image display according to the image display message.
  • the present invention after acquiring the image display instruction, determining an application that triggers the image display instruction, and performing image processing according to the application program, and sending the image to the client for display, because the image processing is triggered according to the current trigger of the user
  • the application is executed, so the determined image processing strategy satisfies the user's current application requirements, avoiding the prior art to determine the image processing strategy according to the identification of the image category, so that the final image display on the client ignores the current application of the client.
  • FIG. 1 is a flowchart of a method according to an embodiment of the present invention
  • FIG. 2 is a block diagram of a system according to an embodiment of the present invention.
  • FIG. 3 is a flow chart of still another method according to an embodiment of the present invention.
  • FIG. 5 is a schematic diagram of a composition of an image display apparatus according to an embodiment of the present invention.
  • FIG. 6 is a composition diagram of still another image display device according to an embodiment of the present invention.
  • FIG. 6 is a composition diagram of an image display system according to an embodiment of the present invention.
  • FIG. 8 is a structural diagram of a computer according to an embodiment of the present invention.
  • FIG. 9 is a structural diagram of a computer according to an embodiment of the present invention. detailed description
  • an image display method provided by an embodiment of the present invention includes:
  • an image display instruction where the image display instruction carries an image to be displayed; preferably, in an embodiment of the present invention, an image processing module configured in a remote computer or a server may be used from an operating system module of a remote computer or a server.
  • An image display instruction is acquired in any one of the display driver module or the remote communication module.
  • the image processing module may be configured in any one of the operating system, the display driver module, or the remote communication module, or may be independently configured, and the specific implementation manner of any image processing module can implement the present invention.
  • the image display method of the embodiment of the present invention does not limit its specific implementation.
  • the source that triggers the display instruction needs to be probed to determine which application or applications trigger the image display.
  • the processing of the image to be displayed in the embodiment of the present invention no longer relies on image recognition, but performs corresponding image processing according to an application that triggers the image display instruction.
  • the S103 comprises:
  • S103-1 determining an image processing policy of the image to be displayed according to the application; determining image processing according to information of the application after determining the application Policy; preferably, the image processing policy pre-configured according to the type of the application or the name of the application may be determined, and the specific embodiment will be described in detail in the subsequent embodiments.
  • processing the image to be displayed according to the image processing policy may be for the purpose of saving transmission bandwidth, or may be based on the purpose of satisfying customer requirements, or may be based on Both are considered at the same time. However, the processing of image processing is performed based on the image processing strategy determined in step 103-2.
  • S104 Send image display information to the client, where the image display information includes the processed image to be displayed, so that the client performs image display according to the image display message.
  • the image processing module disposed in the remote computer or the server determines an application that triggers the image display instruction, and performs image processing according to the application, and sends the image to the client. Displaying, since the image processing is performed according to the application currently triggered by the user, the determined image processing strategy satisfies the current application requirements of the user, and avoids determining the image processing strategy according to the identification of the image category in the prior art, so that Eventually the image display on the client ignores the customer's current application needs.
  • the system includes a server 20.
  • the server 20 may include multiple virtual machines VM200.
  • Each virtual machine VM200 includes a remote communication module 201, an application module 202, The operating system module 203 and the display driving module 204;
  • the remote communication module 201 is responsible for communication between the VM and the external communication, for example, communication with the client or the management system, and is responsible for reading the display command uploaded by the display driver, and It is sent to the client, and receives the user mouse and keyboard operation event sent by the client and reports it to the operating system module 203.
  • the application module 202 runs in the user mode and is used to initiate the call to the operating system module 203.
  • the operating system module 203 is configured to provide a service implementation; the operating system module 203 is configured to manage the hardware resources of the server, control the operation of other modules, and provide an interactive operation interface for the user. In this embodiment, the operating system module 203 is configured to be used according to the application.
  • the calling instruction of the module 202 sends an image display instruction to the display driving module 204.
  • the display driving module 204 After receiving the image display instruction sent by the operating system module 203, the display driving module 204 performs format conversion on the unified instruction format sent by the operating system module 203.
  • the converted image display instruction is sent to the remote communication module 201 to instruct the remote communication module 201 to send the image display information to the client through the remote communication protocol.
  • the display driver module 204 may also perform the format conversion step described above, but the format conversion is performed by the remote communication module 201.
  • the remote communication module 201 of the embodiment of the present invention further implements the function of the graphics processing module, that is, the remote communication module 201 is further configured to acquire an image display instruction, and determine an application that triggers the image display instruction. Determining, according to the application, an image processing policy of the image to be displayed, processing the image to be displayed according to the image processing policy, and sending image display information to the client, where the image display information includes The processed image to be displayed is such that the client performs image display according to the image display message.
  • the function of the image processing module is implemented by the remote communication module 201.
  • the function of the image processing module may also be implemented by the operating system module 203 or the display driving module 204, or
  • the image processing module is configured independently, and the embodiment of the present invention does not limit its specific implementation.
  • another image display method provided by the embodiment of the present invention, as shown in FIG. 3 includes:
  • S300 Pre-configure the correspondence between the application and the image processing strategy.
  • an image processing strategy for the application is proposed.
  • Method that is, pre-configure the correspondence between the application and the image processing strategy, and the corresponding module is based on the application letter.
  • the information is searched for the corresponding relationship, and the corresponding image processing strategy is determined.
  • the image processing policy includes an image compression policy, the step 300 is:
  • the first correspondence is configured, where the first correspondence includes an image compression policy corresponding to different applications.
  • the configuring the first correspondence includes: configuring a first correspondence between the lossless compression policy and the first type of application software, or configuring the first using the lossless compression policy A process name set; wherein, the first type of application software mainly refers to software that has high image quality display quality requirements, and may include, for example, medical industry software or professional drawing software, and the first process name set may include : xtop.exe (pro/E, graphics software), CNEXT.exe (CAITA, graphics software), acad.exe (AutoCAD, graphics software), Revit.exe (Revit, architectural design software), Inventor.exe (Inventor, Mechanical design software), 3dsmax.exe (3ds Max, 3D animation software) or Showcase.exe
  • the process name set can be selected according to the actual situation, this embodiment is no longer - enumerated.
  • the configuring the first correspondence includes: dividing the lossy compression policy into multiple lossy compression levels; and configuring corresponding applications for each lossy compression level.
  • the step 300 is as follows: S300-b: configuring a second correspondence, where the second correspondence includes an image frequency control policy corresponding to different applications.
  • the configuring the second correspondence includes: configuring the lowering The second value corresponding to the default image frequency control strategy and the second type of application software Relationship, or a second set of process names that employ an image frequency control policy that is lower than the default value.
  • the number of images is large. If each image is transmitted to the client, it will occupy a large amount of bandwidth. Therefore, image frequency control is adopted. For software with large image traffic, lower than the default value can be used.
  • the image frequency control strategy for example, the system default image frequency control strategy is 30 frames/second, and in this embodiment, the image frequency control policy lower than the default value is configured to be 20 frames/second.
  • the second type of application software mainly refers to software with large image traffic, for example, may include video software, and the second process name set may include: wmplayer.exe (windows Media Player), qqplayer.exe ( Tencent QQ video player), splayer.exe (shooter player vlc.exe (VLC player) or StomPlayer.exe (storm video player), etc., the process name set is selected according to the actual situation, this embodiment is no longer one An enumeration.
  • the step 300 is: S300-C: configuring a third correspondence, wherein the third correspondence includes a cursor rendering strategy corresponding to different applications.
  • the configuring the third correspondence includes: configuring a third correspondence between the server cursor rendering policy and the third type application software, or configuring the server cursor rendering strategy The third process name collection.
  • the cursor rendering strategy includes the server cursor rendering strategy and the client cursor rendering strategy, the server cursor rendering strategy is performed by the server to perform cursor rendering, the client cursor rendering strategy is performed by the client to perform cursor rendering, and the client cursor rendering makes the response to the user faster, but There may be a positional deviation between the cursor displayed on the image and the cursor drawn by the application itself, and the server cursor can be guaranteed to be displayed on the image.
  • the cursor is consistent with the cursor drawn by the application itself.
  • mapping industry software or game software which require high precision, server cursor can be used for rendering.
  • the third type of application software mainly refers to some precision.
  • a higher level of drawing software, mapping industry software or game software, the third process name set may include: xtop.exe, vlc.exe, or autocad.exe, etc., the process name set may be configured according to the actual situation, This embodiment is not enumerated one by one.
  • image processing strategies such as an image compression strategy, an image frequency control strategy, and a cursor rendering strategy, are listed by way of example.
  • first correspondence relationship, the second correspondence relationship or the first related relationship between the image compression strategy, the image frequency control strategy, and the cursor rendering strategy are The three-correspondence relationship may be configured separately, or may be configured at the same time or in any combination.
  • first correspondence relationship and the second correspondence relationship may be configured at the same time, or the first correspondence relationship and the third correspondence relationship may be configured at the same time, or three corresponding configurations may be configured at the same time. relationship.
  • the configuration form can be in the form of a data table, and each correspondence can be configured with a separate form, or multiple corresponding relationships can be configured on one form.
  • the application module 202 initiates a call instruction to the operating system module 203.
  • the application module 202 of the application initiates a call instruction to the operating system module 203, specifically, Can be a graphics function call instruction.
  • the operating system module 203 sends an image display instruction to the display driving module 204 according to the calling instruction, where the image display instruction carries an image to be displayed;
  • the display driving module 204 sends the image display instruction to the remote communication module 201.
  • the display driving module 204 may further, after receiving the image display instruction, the image according to a format pre-defined by the client.
  • the display instruction performs format conversion, and then the converted image display instruction is sent to the remote communication module 201.
  • the remote communication module 201 acquires the image display instruction, and determines an application that triggers the image display instruction. Specifically, the remote communication module 201 determines that an application that triggers the image display instruction can be implemented in various manners. In an embodiment, an exemplary implementation is listed as follows: The remote communication module 201 determines process information to which the image display instruction belongs. Since the application is executed by the computer through the process, the process to which the image display instruction belongs may represent an application that triggers the image display instruction. Further, since the operating system module 203 allocates a process space for each executed process, process information is included in the process space. When the drawing occurs, the display driver module 204 for executing the image display instruction operates in the process space of the process.
  • the display driver module 204 can query the process information through the interface provided by the operating system module 203, for example, through the application of the Windows operating system.
  • the program interface API function GetCurrentProcessId or EngGetCurrentProcessId gets the current process ID number, or calls the Windows API functions PsGetCurrentProcess and PsGetProcessImageFileName to get the process name of the current process.
  • the remote communication module 201 can query the process name corresponding to the process ID through the interface provided by the operating system module 203, for example, through the application interface API functions OpenProcess and GetModuleFileName of the Windows operating system.
  • the operating system module 203 can be queried by the remote communication module 201 or the display driver module 204 to obtain the process name.
  • step 304 determines that the process information to which the image display instruction belongs may be implemented as follows: S304-al: The remote communication module 201 queries the operating system module 203 for the process identifier to which the image display instruction belongs;
  • the remote communication module 201 queries the operating system module 203 for the process name of the process according to the process identifier. Or,
  • the remote communication module 201 queries the operating system module 203 for the name of the process to which the image display instruction belongs;
  • the remote communication module 201 acquires the process name returned by the operating system module 203. If the display driver module 204 is queried to the operating system module 203, the display driver module 204 may also execute before step 303:
  • the display driver module 204 queries the operating system module 203 for the process identifier to which the image display instruction belongs;
  • the display driver module 204 queries the operating system module 203 for the process name of the process according to the process identifier; or
  • the display driver module 204 queries the operating system module 203 for the name of the process to which the image display instruction belongs;
  • the display driver module 204 obtains the name of the process returned by the operating system module 203; or
  • the display driver module 204 queries the operating system module 203 for the process identifier to which the image display instruction belongs.
  • the display driving module 204 sends the process information, that is, the process identifier or the process name, which is queried, to the remote communication module 201, in addition to the image display instruction to the remote communication module 201;
  • the remote communication module 201 acquires the process name carried by the image display instruction in step 304;
  • the display driver module 204 sends the process identifier obtained by the query to the remote communication module 201.
  • the remote communication module 201 queries the operating system module 203 for the process name of the process according to the process identifier.
  • the above exemplarily describes various implementation manners for the remote communication module to determine the process of the image display instruction.
  • the evolution may be A variety of flexible implementations are implemented, and embodiments of the present invention are not implemented in detail.
  • the remote communication module 201 determines an image processing policy of the image to be displayed according to the application program. Specifically, if the remote communication module 201 determines the process information to which the image display instruction belongs in step 304, The remote communication module 201 queries the corresponding relationship configured in step 300 according to the process information, and determines an image processing policy for the image to be displayed.
  • the remote communication module 201 processes the image to be displayed according to the image processing policy. Specifically, if the image processing policy is a lossless compression policy, the remote communication module 201 compares the image to be displayed. Performing lossless compression; if the image processing policy is a lossy compression policy, the remote communication module 201 performs lossy compression on the image to be displayed according to the level of the lossy compression policy; if the image processing strategy is an image frequency a control strategy, the remote communication module 201 calculates a first interval time according to a frequency specified by the image frequency control policy, performs a de-redundancy operation on the plurality of images received in the first interval time, and obtains a frame An image; if the image processing policy is a server-side cursor rendering policy, the remote communication module 201 notifies the display The driving module 204 renders a cursor on the image to be displayed, and obtains the rendered image to be displayed returned by the display driving module 204.
  • the image processing policy is a lossless compression policy
  • the remote communication The module 201 calculates a first interval time according to the frequency specified by the image frequency control strategy, performs a de-redundancy operation on the plurality of images received in the first interval time, and obtains an image.
  • the resulting image is compressed using the image compression strategy.
  • the remote communication module 201 sends image display information to the client 22, and the image display information includes the processed image to be displayed, so that the client 22 performs image display according to the image display message.
  • the correspondence between the application and the image processing policy is configured, and after the remote communication module receives the image display instruction, determining an application that triggers the image display instruction, and determining an image processing policy according to the application. And performing image processing according to the determined image processing strategy, and sending the image to the client for display.
  • the determined image processing strategy satisfies the current application requirement of the user, and avoids In the prior art, the image processing strategy is determined according to the identification of the image category, so that the final image display on the client ignores the problem of the current application requirement of the client, and can also balance the bandwidth consumption of the data transmission between the remote computer and the client. .
  • the software for high image quality display quality is configured with a lossless compression strategy
  • the image sent to the client for display can meet the requirements of such users for high-precision and high-simulation of images
  • the software is configured with an image frequency control strategy lower than the default value, so that the image sent to the client is redundant, and the bandwidth between the server and the client is reduced, and the system transmission efficiency is improved
  • the high software is configured with a server cursor rendering strategy to ensure that the cursor displayed on the image is consistent with the cursor drawn by the application itself, improving the user experience.
  • another image display method provided by the embodiment of the present invention, as shown in FIG. 4 includes: S400: Pre-configure the corresponding relationship between the application and the image processing policy in the management system; the specific configuration and the method of the corresponding relationship are similar to the description of step S300, and details are not described herein again.
  • S401 The client establishes a connection with the virtual machine in the server;
  • the client establishes a remote desktop connection with the remote communication module 201 in the virtual machine.
  • S402 The management system sends the corresponding relationship between the application and the image processing policy to the virtual machine.
  • the management system sends the corresponding relationship to the remote communication module 201, and the remote communication module 201 saves the corresponding relationship.
  • the application module 202 initiates a call instruction to the operating system module 203.
  • the application module 202 of the application initiates a call instruction to the operating system module 203, specifically, Can be a graphics function call instruction.
  • the operating system module 203 sends an image display instruction to the display driving module 204 according to the calling instruction, where the image display instruction carries an image to be displayed;
  • the display driver module 204 queries the operating system module 203 for the process identifier to which the image display instruction belongs.
  • the display driver module 204 receives the process identifier returned by the operating system module 203, and determines the process name of the process according to the process identifier.
  • the display driving module 204 sends the image display instruction and the process name to the remote communication module 201. In another embodiment, the display driving module 204 sends the image display instruction to the remote communication module 201, the image. Displaying instructions carrying the process name; S408: The remote communication module 201 queries the saved correspondence between the application and the image processing policy according to the process name, and determines an image processing policy of the image to be displayed.
  • the remote communication module 201 processes the image to be displayed according to the image processing policy. Specifically, if the image processing policy is a lossless compression policy, the remote communication module 201 compares the image to be displayed. Performing lossless compression; if the image processing policy is a lossy compression policy, the remote communication module 201 performs lossy compression on the image to be displayed according to the level of the lossy compression policy; if the image processing strategy is an image frequency a control strategy, the remote communication module 201 calculates a first interval time according to a frequency specified by the image frequency control policy, performs a de-redundancy operation on the plurality of images received in the first interval time, and obtains a frame If the image processing policy is a server-side cursor rendering policy, the remote communication module 201 notifies the display driving module 204 to render a cursor on the image to be displayed, and then obtains the rendered waiting to be returned by the display driving module 204.
  • the image processing policy is a server-side cursor rendering policy
  • the remote communication module 201 calculates a first interval time according to a frequency specified by the image frequency control policy, performs a de-redundancy operation on the plurality of images received in the first interval time, and obtains a And an image obtained by performing the de-redundancy operation is compressed by the image compression strategy.
  • the remote communication module 201 sends image display information to the client 22, and the image display information includes the processed image to be displayed, so that the client 22 performs image display according to the image display message.
  • the correspondence between the application and the image processing policy is configured, and after the remote communication module receives the image display instruction, determining an application that triggers the image display instruction, and determining an image processing policy according to the application. And performing image processing according to the determined image processing strategy, and sending the image to the client for display. Since the image processing program is determined according to the application currently triggered by the user, the determined image processing strategy satisfies the current application requirement of the user.
  • the image processing strategy is determined according to the identification of the image category in the prior art, so that the final image display on the client ignores the problem of the current application requirement of the client.
  • the software for high image quality display quality is configured with a lossless compression strategy, the image sent to the client for display can meet the requirements of such users for high-precision and high-simulation of images;
  • the software is configured with an image frequency control strategy lower than the default value, so that the image sent to the client is redundant, and the bandwidth between the server and the client is reduced, and the system transmission efficiency is improved;
  • the high software is configured with a server cursor rendering strategy to ensure that the cursor displayed on the image is consistent with the cursor drawn by the application itself, improving the user experience.
  • an image display apparatus includes: an obtaining unit 501, configured to acquire an image display instruction, where the image display instruction carries an image to be displayed; and a determining unit 502, configured to determine the triggering An image display instruction application; a processing unit 503, configured to process the image to be displayed according to the application determined by the determining unit 502; the sending unit 504, configured to send an image display message to the client,
  • the image display message includes the image to be displayed processed by the processing unit 503, so that the client performs image display according to the image display message.
  • the processing unit 503 includes: a policy subunit 5031, configured to determine, according to the application determined by the determining unit 502, An image processing strategy for the image to be displayed;
  • the processing sub-unit 5032 is configured to process the image to be displayed according to the image processing policy.
  • the device further includes a configuration unit 601, configured to pre-configure a correspondence between the application and the image processing policy; and the policy sub-unit 5031 is configured to query the corresponding device according to the application determined by the determining unit.
  • a relationship determining an image processing strategy of the image to be displayed.
  • the configuration unit 601 includes:
  • the first configuration sub-unit 6011 is configured to configure a first correspondence, where the first correspondence includes an image compression policy corresponding to different applications.
  • the image compression policy includes a lossless compression policy, and the first configuration sub-unit 6011 is specifically configured to: configure a first correspondence between the lossless compression policy and the first type of application software, or configure the lossless compression policy The first set of process names.
  • the image compression policy includes a lossy compression policy, and the first configuration subunit 6011 is specifically configured to: divide the lossy compression policy into multiple lossy compression levels; and configure corresponding applications for each lossy compression level. Software type, or configure a corresponding set of process names for each lossy compression level.
  • the configuration unit 601 includes:
  • a second configuration subunit 6012 configured to configure a second correspondence, where the second corresponding It includes image frequency control strategies corresponding to different applications.
  • the image compression policy includes an image frequency control policy that is lower than a default value, and the default value is a system default image display frame rate or a delay time.
  • the second configuration sub-unit 6012 is specifically configured to: A second correspondence between the image frequency control policy lower than the default value and the second type of application software, or a second process name set using the image frequency control policy lower than the default value.
  • the configuration unit 601 includes:
  • the third configuration sub-unit 6013 is configured to configure a third correspondence, where the third correspondence includes a cursor rendering policy corresponding to different applications.
  • the cursor rendering policy includes a server cursor rendering policy
  • the third configuration sub-unit is specifically configured to: configure a third correspondence between the server cursor rendering policy and the third type application software, or configure the server cursor The third set of process names for the rendering policy.
  • the determining unit 502 is specifically configured to determine a process in which the image display instruction is currently assigned.
  • the determining unit 502 is specifically configured to query the operating system for the process name currently belonging to the image display instruction, or query the operating system for the process identifier currently belonging to the image display instruction, and determine the process name according to the process identifier. Or acquiring the process name currently owned by the image display instruction carried by the image display instruction, or acquiring the image display command to carry The image of the band displays the process ID of the current assignment, and the process name is determined according to the process identifier.
  • the processing sub-unit 5032 includes any one or any combination of the following modules: a compression module, if the image processing policy includes an image compression policy, for compressing the image to be displayed according to the image compression policy Processing; removing the redundancy module, if the image processing strategy includes an image frequency control policy, configured to calculate a first interval time according to a frequency specified by the image frequency control policy, and to receive the first interval time
  • a de-redundancy operation to obtain an image to be displayed
  • a cursor processing module wherein the image processing strategy includes a server cursor rendering strategy for rendering a cursor on the image to be displayed. As shown in FIG.
  • an image display system includes: a server 70, configured to acquire an image display instruction, where the image display instruction carries an image to be displayed, and determines an application that triggers the image display instruction, And processing, according to the application, the image to be displayed, and sending an image display message to the client, where the image display message includes the processed image to be displayed;
  • the client 72 is configured to receive the image display message sent by the server, and display an image according to the image display message.
  • the embodiment of the present invention further provides a computer.
  • the computer shown in FIG. 8 may be a virtual machine as shown in FIG. 2, or may be a physical server.
  • the computer includes: an application module 802, an operating system module 803, and a display driver module. 804 and a remote communication module 801, the operating system module 803 is configured to send an image display instruction to the display driving module 804 according to the calling instruction of the application module 801; the display driving module 804 receives the operating system After the image display instruction sent by the module 803, the image display instruction is sent to the remote communication module 801; the remote communication module 801 is configured to acquire the image display instruction sent by the display driving module, The image display instruction carries an image to be displayed, determines an application that triggers the image display instruction, processes the image to be displayed according to the application, and sends an image display message to the client, the image display message The processed image to be displayed is included to cause the client to perform image display according to the image display message.
  • the remote communication module 801 is specifically configured to determine an image processing policy of the image to be displayed according to the application, and process the image to be displayed according to the image processing policy.
  • the remote communication module 801 is further configured to acquire a correspondence between a pre-configured application and an image processing policy; and the remote communication module 801 queries the corresponding relationship according to the application, and determines the to-be-displayed Image processing strategy for images.
  • the display driving module 804 is further configured to query the operating system module 803 for information about a process currently belonging to the image display instruction, and carry the information of the process in the image display instruction and send the information to the remote a communication module 801; the remote communication module 801 acquires information about a process currently belonging to the image display instruction carried by the image display instruction, and determines an image of the image to be displayed according to the information of the process Processing strategy.
  • the remote communication module 801 is further configured to query the operating system module 803 for information about a process currently instructed by the image display instruction, and determine an image processing policy of the image to be displayed according to the information of the process.
  • FIG. 9 is a schematic structural diagram of a computer according to an embodiment of the present invention.
  • the computer of the embodiment of the present invention may include:
  • CPU 90K memory 902 and communication interface 905 are connected by system bus 904 and communicate with each other.
  • Processor 901 may be a single core or multi-core central processing unit, or a particular integrated circuit, or one or more integrated circuits configured to implement embodiments of the present invention.
  • the memory 902 can be a high speed RAM memory or a nonvolatile memory.
  • non-volatile memory such as at least one disk storage.
  • Memory 902 is used by computer to execute instructions 903.
  • the computer execution instructions 903 may include program code.
  • the processor 901 runs the computer execution instruction 903, which can execute Figure 1.
  • aspects of the present invention, or possible implementations of various aspects can be embodied as a system, method, or computer program product.
  • aspects of the invention, or possible implementations of various aspects may be in the form of an entirely hardware embodiment, an entirely software embodiment (including firmware, resident software, etc.), or a combination of software and hardware aspects. They are collectively referred to herein as "circuits,"”modules," or “systems.”
  • aspects of the invention, or possible implementations of various aspects may take the form of a computer program product, which is a computer readable program code stored on a computer readable medium.
  • the computer readable medium can be a computer readable signal medium or a computer readable storage medium.
  • the computer readable storage medium includes, but is not limited to, an electronic, magnetic, optical, electromagnetic, infrared, or semiconductor system, device, or device, or any suitable combination of the foregoing, such as random access memory (RAM), read only memory (ROM), Erase programmable read-only memory (EPROM or flash memory), optical fiber, portable read-only memory (CD-ROM).
  • a processor in a computer reads computer readable program code stored in a computer readable medium, such that the processor is capable of performing the various functional steps specified in each step of the flowchart, or a combination of steps; A device that functions as specified in each block, or combination of blocks.
  • the computer readable program code can execute entirely on the user's computer, partly on the user's computer, as a separate software package, partly on the user's computer and partly on the remote computer, or entirely on the remote computer or server.
  • the functions noted in the various steps of the flowchart, or in the blocks of the block diagrams may not occur in the order noted. For example, two steps, or two blocks shown in succession may be executed substantially concurrently, or the blocks may sometimes be executed in the reverse order, depending upon the functionality involved.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Stored Programmes (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本发明实施例提出了一种图像显示方法、装置和系统，在获取图像显示指令之后，确定触发所述图像显示指令的应用程序，并根据所述应用程序进行图像处理，并发送给客户端进行显示，由于图像处理是根据用户当前触发的应用程序执行的，因此所确定的图像处理策略满足了用户当前的应用需求，避免了现有技术中根据图像类别的识别来确定图像处理策略，使得最终在客户端的图像显示忽略了客户当前应用需求的问题。

Description

一种图像显示方法和装置 技术领域
本发明实施例涉及计算机技术，特别是一种图像显示方法、系统和装置。 背景技术
当用户登录远程计算机，远程计算机需要将其桌面内容通过远程桌面技 术传送到客户端， 并通过客户端的本地设备显示远程计算机的桌面内容。 目 前大多数的远程桌面系统都是基于 IP 网络来传送远程桌面内容。 远程桌面 可以包括远程计算机的桌面图像的显示、远程声音传送或可插拔硬件映射等 技术。 远程桌面又可以称为虚拟桌面。 在虚拟桌面场景下至少存在一台服务 器和一台客户机，通过客户机上安装的虚拟桌面客户端软件登陆到远端服务 器上。
桌面图像传送到客户端可以绘图指令的方式进行。 例如， 客户端接收到 远程计算机发送的 "将 XX区域填充为 XX颜色"、 "从 XX点画一条 XX颜 色， 宽度为 XX的直线到 XX点"、 或者 "将 XX图片画到 XX位置"。 对于 最后一种绘图指令， 由于其携带了占用带宽的图像信息， 远程计算机在发送 到客户端的时候， 会根据一定的策略对图像进行处理， 目的是为了降低远程 计算机和客户端之间传送的数据量， 减少带宽占用量， 例如图片压缩策略。 而远程计算机对发往客户端的图像采用何种处理策略， 现有技术中， 主要依 赖对图像的识别技术， 远程计算机识别图像的类型， 根据图像的不同类型确 定其对应的处理策略。 然而， 该技术依赖于远程计算机对图像类型的识别， 而根据图像类型确定图像处理策略将可能导致传输到客户端的图像数据无 法达到客户端的要求， 例如， 远程计算机将识别出来的图像采用有损压缩之 后， 传输到客户端进行显示后无法到达客户端对图像画质高质量的要求， 影 响用户体验。 发明内容
本发明实施例提出了一种图像显示方法、 装置和系统， 不再采用根据图 像类型制定图像处理策略的方法， 而采用更贴近于客户端需求的图像处理方 法， 从而实现满足客户端需求的图像显示。
第一方面，本发明实施例提出了一种图像显示方法，包括： 获取图像显示指令，所述图像显示指令携带待显示的图像； 确定触发所述图像显示指令的应用程序； 根据所述应用程序，对所述待显示的图像进行处理； 向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述 待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。 结合第一方面，在第一种可能的实现方式中 ，所述根据所述应用程序， 对所述待显示的图像进行处理，包括： 根据所述应用程序，确定所述待显示的图像的图像处理策略； 根据所述图像处理策略，对所述待显示的图像进行处理。 结合第一方面的第一种可能的实现方式，在第二种可能的实现方式中 ， 还包括： 预先配置应用程序与图像处理策略的对应关系； 相应地，所述根据所述应用程序，确定所述待显示的图像的图像处理策 略，包括： 根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像处 理策略。 结合第一方面或者第一方面的第二种可能的实现方式，在第三种可能的 实现方式中 ，所述预先配置应用程序与图像处理策略的对应关系包括： 配置第一对应关系，其中 ，所述第一对应关系包括不同应用程序所对应 的图像压缩策略。
其中 ，所述图像压缩策略包括无损压缩策略，所述配置第一对应关系包 括：配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置 采用所述无损压缩策略的第一进程名称集合；或者，所述图像压缩策略包括 有损压缩策略，所述配置第一对应关系包括：将所述有损压缩策略划分为多 个有损压缩级别 ；为每个有损压缩级别配置对应的应用软件类型，或者为每 个有损压缩级别配置对应的进程名称集合。
结合第一方面或第一方面的第二种可能的实现方式，在第四种可能的实 现方式中 ，所述预先配置应用程序与图像处理策略的对应关系包括：
配置第二对应关系，其中 ，所述第二对应关系包括不同应用程序所对应 的图像频率控制策略。
其中 ，所述图像压缩策略包括低于默认值的图像频率控制策略，所述默 认值为系统默认的图像显示帧率或延时时间 ；
所述配置第二对应关系包括：
配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二 对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名 称集合。 结合第一方面或第一方面的第二种可能的实现方式，在第五种可能的实 现方式中 ，所述预先配置应用程序与图像处理策略的对应关系包括：
配置第三对应关系，其中 ，所述第三对应关系包括不同应用程序所对应 的光标渲染策略。
其中 ，所述光标渲染策略包括服务器光标渲染策略，所述配置第三对应 关系包括：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或 者配置采用所述服务器光标渲染策略的第三进程名称集合。
结合第一方面或第一方面的上述所有的可能的实现方式，在第六种可能 的实现方式中 ，所述确定触发所述图像显示指令的应用程序，包括：
确定所述图像显示指令当前归属的进程。
结合第一方面的第六种可能的实现方式，在第七种可能的实现方式中 ， 所述确定所述图像显示指令当前归属的进程，包括：向操作系统查询所述图 像显示指令当前归属的进程名称；或者，向操作系统查询所述图像显示指令 当前归属的进程标识，根据所述进程标识确定进程名称；或者，获取所述图 像显示指令携带的所述图像显示指令当前归属的进程名称；或者，获取所述 图像显示指令携带的所述图像显示指令当前归属的进程标识，根据所述进程 标识确定进程名称。
第二方面，本发明实施例提出了一种图像显示装置，包括：
获取单元，用于获取图像显示指令，所述图像显示指令携带待显示的图 像；
确定单元，用于确定触发所述图像显示指令的应用程序；
处理单元，用于根据确定单元确定的所述应用程序，对所述待显示的图 像进行处理；
发送单元，用于向客户端发送图像显示消息，所述图像显示消息包括经 过所述处理单元处理后的所述待显示的图像，以使得所述客户端根据所述图 像显示消息进行图像显示。
第三方面，本发明实施例提出了一种图像显示系统，包括：
服务器，用于获取图像显示指令，所述图像显示指令携带待显示的图像， 确定触发所述图像显示指令的应用程序，根据所述应用程序，对所述待显示 的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息包括 经过处理后的所述待显示的图像；
客户端，用于接收所述服务器发送的所述图像显示消息，根据所述图像 显示消息进行图像显示。
第四方面，本发明实施例提出了一种计算机，包括应用程序模块、 操作 系统模块、 显示驱动模块和远程通信模块，所述操作系统模块用于根据所述 应用程序模块的调用指令，向所述显示驱动模块发送图像显示指令；所述显 示驱动模块接收到所述操作系统模块发送的所述图像显示指令之后，将所述 图像显示指令发送给所述远程通信模块；
所述远程通信模块用于获取所述显示驱动模块发送的所述图像显示指 令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的应 用程序，根据所述应用程序，对所述待显示的图像进行处理，以及向客户端 发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图 像，以使得所述客户端根据所述图像显示消息进行图像显示。 第五方面，本发明实施例提出了一种计算机，包括：处理器、 存储器、 总线和通信接口；
所述存储器用于存储计算机执行指令， 所述处理器与所述存储器通过 所述总线连接， 当所述计算机运行时， 所述处理器执行所述存储器存储的 所述计算机执行指令， 以使所述计算机执行如下方法：
获取图像显示指令，所述图像显示指令携带待显示的图像； 确定触发所述图像显示指令的应用程序； 根据所述应用程序，对所述待显示的图像进行处理；
向客户端发送图像显示消息， 所述图像显示消息包括经过处理后的所述 待显示的图像， 以使得所述客户端根据所述图像显示消息进行图像显示。
第六方面， 本发明实施例提出了一种计算机可读介质， 包括计算机执 行指令， 当计算机的处理器执行所述计算机执行指令时， 所述计算机执行 如下方法：
获取图像显示指令，所述图像显示指令携带待显示的图像； 确定触发所述图像显示指令的应用程序； 根据所述应用程序，对所述待显示的图像进行处理； 向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述 待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。 本发明实施例中， 在获取图像显示指令之后， 确定触发所述图像显示指 令的应用程序， 并根据所述应用程序进行图像处理， 并发送给客户端进行显 示， 由于图像处理是根据用户当前触发的应用程序执行的， 因此所确定的图 像处理策略满足了用户当前的应用需求，避免了现有技术中根据图像类别的 识别来确定图像处理策略，使得最终在客户端的图像显示忽略了客户当前应 用需求的问题。 附图说明
为了更清楚地说明本发明实施例的技术方案， 下面将对实施例中所需要 使用的附图作筒单地介绍， 显而易见地， 下面描述中的附图仅仅是本发明的 一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下， 还可以根据这些附图获得其他的附图。
图 1是根据本发明实施例提供的一种方法流程图；
图 2是根据本发明实施例提供的一种系统的架构图；
图 3是根据本发明实施例提供的又一种方法流程图；
图 4是根据本发明实施例提供的又一种方法流程图；
图 5是根据本发明实施例提供的一种图像显示装置的组成图；
图 6是根据本发明实施例提供的又一种图像显示装置的组成图； 图 Ί是根据本发明实施例提供的一种图像显示系统的组成图；
图 8是根据本发明实施例提供的一种计算机的组成图；
图 9是根据本发明实施例提供的一种计算机的组成图。 具体实施方式
本发明实施例提出了一种图像显示方法、 装置和系统， 避免采用根据图 像类型制定图像处理策略的方法， 而采用更贴近于客户端需求的图像策略制 定方法， 从而实现满足客户端不同需求的图像显示。 本发明实施例一 如图 1所示， 为本发明实施例提供的流程图， 本发明实施例提供的图像 显示方法包括：
5101：获取图像显示指令，所述图像显示指令携带待显示的图像； 优选地，在本发明实施例中 ，可以由配置于远程计算机或者服务器内的 图像处理模块从远程计算机或者服务器的操作系统模块、显示驱动模块或者 远程通信模块的任意一个模块中获取图像显示指令。 具体实施中 ，所述图像 处理模块可以配置于所述操作系统、显示驱动模块或者远程通信模块中的任 意一个之中 ，或者是独立配置，任何一种图像处理模块的具体实现方式都能 够实现本发明实施例的图像显示方法，本发明实施例对其具体实现不作出限 制。
5102：确定触发所述图像显示指令的应用程序；
本发明实施例中 ，当图像处理模块接收到显示指令后，需要对触发该显 示指令的源头进行探查，确定是哪一个或者是哪些应用程序触发该图像显示 A
十曰 Ti o
S103：根据所述应用程序，对所述待显示的图像进行处理；
本发明实施例对待显示图像的处理不再依赖图像识别，而是根据触发图 像显示指令的应用程序来进行相应的图像处理。
优选地，所述 S103包括：
S103-1：根据所述应用程序，确定所述待显示的图像的图像处理策略； 在确定了所述应用程序之后，即根据所述应用程序的信息确定图像处理 策略；优选地，可以根据所述应用程序的类型或者应用程序的名称确定为其 预先配置的图像处理策略，具体实施方式将在后续的实施例中详细描述。
S103-2：根据所述图像处理策略，对所述待显示的图像进行处理； 根据策略对图像进行处理可以出于节省传输带宽的目的，也可能是基于 满足客户需求的目的 ，也可能是基于两者同时考虑。但图像处理的处理是基 于在步骤 103-2所确定的图像处理策略来进行的。
S104: 向客户端发送图像显示信息， 所述图像显示信息包括经过处理后 的所述待显示的图像， 以使得所述客户端根据所述图像显示消息进行图像显 示。
在本实施例中， 在获取图像显示指令之后， 配置于远程计算机或者服务 器内的图像处理模块确定触发所述图像显示指令的应用程序， 并根据所述应 用程序进行图像处理， 并发送给客户端进行显示， 由于图像处理是根据用户 当前触发的应用程序执行的， 因此所确定的图像处理策略满足了用户当前的 应用需求， 避免了现有技术中根据图像类别的识别来确定图像处理策略， 使 得最终在客户端的图像显示忽略了客户当前应用需求的问题。 本发明实施例二
如图 2所示，为本发明实施例提供的系统架构图，该系统包括服务器 20, 该服务器 20可以包含多个虚拟机 VM200, 每个虚拟机 VM200 包括远程通 信模块 201、应用程序模块 202、操作系统模块 203和显示驱动模块 204; 所 述远程通信模块 201用于负责其所在的 VM与外部的通信，例如与客户端或 者管理系统的通信， 负责读取显示驱动上传的显示指令， 并将其发送给客户 端， 接收客户端发来的用户鼠标键盘操作事件并上报给操作系统模块 203; 所述应用程序模块 202运行在用户模式， 用于对操作系统模块 203发起调用 指令以提供业务实现； 所述操作系统模块 203用于管理服务器的硬件资源， 控制其他模块的运行， 以及为用户提供交互式操作界面， 在本实施例中， 操 作系统模块 203用于根据应用程序模块 202的调用指令，向显示驱动模块 204 发送图像显示指令； 显示驱动模块 204接收到操作系统模块 203发送的图像 显示指令之后，将所述操作系统模块 203发送的统一的指令格式进行格式转 换， 再将转换后的图像显示指令发送给远程通信模块 201 , 以指令远程通信 模块 201通过远程通信协议向客户端发送图像显示信息。 当然， 显示驱动模 块 204也可不执行上述格式转换步骤，而由远程通信模块 201进行格式转换。 另夕卜， 本发明系统实施例中所述远程通信模块 201还实现图形处理模块 的功能， 即所述远程通信模块 201还用以获取图像显示指令， 确定触发所述 图像显示指令的应用程序， 根据所述应用程序， 确定所述待显示的图像的图 像处理策略， 根据所述图像处理策略， 对所述待显示的图像进行处理， 以及 向客户端发送图像显示信息， 所述图像显示信息包括经过处理后的所述待显 示的图像， 以使得所述客户端根据所述图像显示消息进行图像显示。
本实施例中 ，由远程通信模块 201实现图像处理模块的功能，在其他的 实施例中 ，所述图像处理模块的功能还可以可以由所述操作系统模块 203或 者显示驱动模块 204实现，或者是图像处理模块独立配置，本发明实施例对 其具体实现不作出限制。 在如图 2所示的系统架构实施例下， 本发明实施例提供的又一图像显示 方法， 如图 3所示， 包括：
S300: 预先配置应用程序与图像处理策略的对应关系； 本发明实施例， 为了解决现有技术图像处理策略是根据图像类型来确定 所带来的一系列问题， 提出了针对应用程序配置图像处理策略的方法， 即预 先配置应用程序与图像处理策略的对应关系，相应的模块根据应用程序的信 息查询对应关系， 确定对应的图像处理策略。 具体地，如果所述图像处理策略包括图像压缩策略，所述步骤 300为 ：
S300-a: 配置第一对应关系， 其中， 所述第一对应关系包括不同应用程 序所对应的图像压缩策略。 当所述图像压缩策略具体包括无损压缩策略时，所述配置第一对应关系 包括： 配置所述无损压缩策略与第一类型应用软件的第一对应关系， 或者配 置采用所述无损压缩策略的第一进程名称集合； 其中， 优选地， 所述第一类 型应用软件主要指对图像画质显示质量要求高的软件， 例如可以包括医学行 业软件或专业绘图软件，所述第一进程名称集合可以包括： xtop.exe ( pro/E, 制图软件）、 CNEXT.exe ( CAITA, 制图软件）、 acad.exe ( AutoCAD, 制图 软件)、 Revit.exe ( Revit, 建筑设计软件)、 Inventor.exe ( Inventor, 机械设 计软件）、 3dsmax.exe ( 3ds Max, 3D动画制作软件 )或 Showcase.exe
( Showcase, 3D视觉创意软件）等等， 进程名称集合可以根据实际情况选 择配置， 本实施例不再——列举。
当所述图像压缩策略具体包括有损压缩策略时，所述配置第一对应关系 包括：将所述有损压缩策略划分为多个有损压缩级别；为每一个有损压缩级 别配置对应的应用软件类型，或者为每一个有损压缩级别配置对应的进程名 称集合，其中 ，所述的每一个有损压缩级别包括有损压缩的算法或级别。 如果所述图像处理策略具体包括图像频率控制策略，所述步骤 300为 ： S300-b：配置第二对应关系，其中 ，所述第二对应关系包括不同应用程 序所对应的图像频率控制策略。 当所述图像压缩策略包括低于默认值的图像频率控制策略时（所述默认 值为系统默认的图像显示帧率或延时时间），所述配置第二对应关系包括： 配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二对应 关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名称集 合。 对于一些类型的软件，其图像数量较多，如果每一幅图像都传送到客户 端，将占用大量的带宽，因此，采用图像频率控制，对于图像流量大的软件， 可以采用低于默认值的图像频率控制策略，例如系统默认的图像频率控制策 略为 30帧 /秒，在本实施例中将低于默认值的图像频率控制策略配置为 20 帧 /秒。 其中 ，优选地，所述第二类型应用软件主要指图像流量大的软件，例 如可以包括视频类软件，所述第二进程名称集合可以包括： wmplayer.exe ( windows Media Player ) , qqplayer.exe (腾讯 QQ影音播放器 ) , splayer.exe (射手播放器 vlc.exe ( VLC播放器）或 StomPlayer.exe (暴风影音播放 器）等等，进程名称集合根据实际情况选择配置，本实施例不再一一列举。
如果所述图像处理策略具体包括光标渲染策略，所述步骤 300为 ： S300-C：配置第三对应关系，其中 ，所述第三对应关系包括不同应用程 序所对应的光标渲染策略。
当所述光标渲染策略包括服务器光标渲染策略时，所述配置第三对应关 系包括：配置所述服务器光标渲染策略与第三类型应用软件的第三对应关 系，或者配置采用所述服务器光标渲染策略的第三进程名称集合。 光标渲染 策略包括服务器光标渲染策略和客户端光标渲染策略，服务器光标渲染策略 由服务器执行光标渲染，客户端光标渲染策略由客户端执行光标渲染，客户 端光标渲染使得对用户的响应更快，但可能存在显示在图像上的光标与应用 程序自行绘制的光标存在位置偏差，服务器光标则能够保证显示在图像上的 光标与应用程序自行绘制的光标保持一致，因此，对于一些精准度要求较高 的绘图软件、 测绘行业软件或者游戏软件，可以采用服务器光标渲染，所述 所述第三类型应用软件主要指一些精准度要求较高的绘图软件、测绘行业软 件或者游戏软件，所述第三进程名称集合可以包括： xtop.exe , vlc.exe ,或 autocad.exe等等，进程名称集合可以根据实际情况选择配置，本实施例不再 一一列举。 本实施例中仅以示例形式列出了可能的图像处理策略，例如图像压缩策 略、 图像频率控制策略以及光标渲染策略，实际上，根据本发明实施例和公 制技术，本领域技术人员还可以联想到更多的图像策略，本发明实施例不再 一一列举。 另外， 上述实施例中的各个策略虽然是单独列出，本领域技术 人员却完全可以明了 ，上述图像压缩策略、 图像频率控制策略以及光标渲染 策略相关的第一对应关系、 第二对应关系或第三对应关系可以单独配置，也 可以同时或者以任意组合的形式配置，例如同时配置第一对应关系和第二对 应关系，或者同时配置第一对应关系和第三对应关系，或者同时配置三个对 应关系。 其配置形式可以采用数据表的形式，每一个对应关系可以单独配置 一个表单，也可以将多个对应关系配置在一个表单上。
S301 : 应用程序模块 202向操作系统模块 203发起调用指令； 优选地， 若用户或者系统自动触发某个应用程序， 则该应用程序的应用 程序模块 202向操作系统模块 203发起调用指令， 具体地， 可以是图形函数 调用指令。 S302: 操作系统模块 203根据所述调用指令， 向显示驱动模块 204发送 图像显示指令， 所述图像显示指令携带待显示的图像；
S303: 显示驱动模块 204向远程通信模块 201发送所述图像显示指令； 优选地， 所述显示驱动模块 204还可以在接收到所述图像显示指令后， 根据客户端预先制定的格式对所述图像显示指令进行格式转换，再将转换格 式后的图像显示指令发送给所述远程通信模块 201。
S304: 远程通信模块 201获取所述图像显示指令， 确定触发所述图像显 示指令的应用程序； 具体地，远程通信模块 201确定触发所述图像显示指令的应用程序可以 通过多种方式实现， 在本实施例中， 列举出的一种示例性的实现方式是： 远 程通信模块 201确定所述图像显示指令所归属的进程信息。 由于应用程序是 通过进程被计算机执行的， 所述图像显示指令归属的进程可以代表触发所述 图像显示指令的应用程序。 进一步地， 由于操作系统模块 203会为每个被执 行的进程分配进程空间， 在该进程空间内包含进程信息。 绘图发生时， 用于 执行图像显示指令的显示驱动模块 204工作在该进程的进程空间， 因此， 显 示驱动模块 204可以通过操作系统模块 203提供的接口去查询进程信息， 例 如通过 Windows操作系统的应用程序接口 API函数 GetCurrentProcessId或 EngGetCurrentProcessId获取当前进程 ID号， 或者调用 Windows API函数 PsGetCurrentProcess 和 PsGetProcessImageFileName得到当前进程的进程名 称。 远程通信模块 201可通过操作系统模块 203提供的接口去查询进程 ID 对应的进程名称， 例如通过 Windows 操作系统的应用程序接口 API 函数 OpenProcess 和 GetModuleFileName。 在具体实现中， 可以由远程通信模块 201或者显示驱动模块 204查询操作系统模块 203获取进程名称。
如果由远程通信模块 201来向操作系统模块 203查询， 则步骤 304确定 所述图像显示指令所归属的进程信息可以通过如下方式实现： S304-al : 远程通信模块 201向操作系统模块 203查询所述图像显示指 令所归属的进程标识；
S304-a2: 远程通信模块 201根据所述进程标识向操作系统模块 203查 询所述进程的进程名称。 或者，
S304-al， ： 远程通信模块 201向操作系统模块 203查询所述图像显示 指令所归属的进程名称；
S304-a2， ： 远程通信模块 201获取操作系统模块 203返回的进程名称。 如果由显示驱动法模块 204来向操作系统模块 203查询， 则在步骤 303 之前， 显示驱动模块 204还可以执行：
S303-al : 显示驱动模块 204向操作系统模块 203查询所述图像显示指 令所归属的进程标识；
S303-a2: 显示驱动模块 204根据所述进程标识向操作系统模块 203查 询所述进程的进程名称； 或者，
S303-al， ： 显示驱动模块 204向操作系统模块 203查询所述图像显示 指令所归属的进程名称；
S303-a2， ： 显示驱动模块 204获取操作系统模块 203返回的进程名称； 或者，
S303-C1 : 显示驱动模块 204向操作系统模块 203查询所述图像显示指 令所归属的进程标识。 相应地， 所述步骤 303中， 显示驱动模块 204除了向 远程通信模块 201发送所述图像显示指令之外，还向远程通信模块 201发送 其所查询到的进程信息， 即进程标识或者进程名称； 相应地，如果步骤 303中所述显示驱动模块 204向远程通信模块 201发 送其查询获取到的进程名称， 则步骤 304中， 远程通信模块 201获取所述图 像显示指令携带的进程名称； 如果步骤 303中所述显示驱动模块 204向远程 通信模块 201发送其查询获取到的进程标识， 则步骤 304中， 远程通信模块 201根据所述进程标识， 向操作系统模块 203查询所述进程的进程名称。
上述示例性地介绍了远程通信模块确定所述图像显示指令的进程的多 种实现方式， 总之， 根据根据本发明实施例提到的查询操作系统模块中进程 空间中的信息的实现原理， 可以演变出多种灵活的实现方式， 具体实现本发 明实施例不再——介绍。
Figure imgf000018_0001
S305: 远程通信模块 201根据所述应用程序， 确定所述待显示的图像的 图像处理策略； 具体地，如果在步骤 304中远程通信模块 201确定了所述图像显示指令 所归属的进程信息， 则远程通信模块 201根据所述进程信息， 查询步骤 300 中配置的对应关系， 确定针对所述待显示的图像的图像处理策略。
S306：远程通信模块 201根据所述图像处理策略，对所述待显示的图像 进行处理； 具体地，如果所述图像处理策略为无损压缩策略，所述远程通信模块 201 对所述待显示的图像进行无损压缩； 如果所述图像处理策略为有损压缩策 略， 所述远程通信模块 201根据有损压缩策略的级别对所述待显示的图像进 行有损压缩； 如果所述图像处理策略为图像频率控制策略， 所述远程通信模 块 201根据图像频率控制策略所指定的频率， 计算出第一间隔时间， 将在所 述第一间隔时间内收到的多幅图像进行去冗余操作并得到一幅图像； 如果所 述图像处理策略为服务器端光标渲染策略， 所述远程通信模块 201通知显示 驱动模块 204在所述待显示图像上渲染光标， 再获得所述显示驱动模块 204 返回的渲染后的待显示图像； 如果所述图像处理策略包括图像压缩策略和图 像频率控制策略， 所述远程通信模块 201根据图像频率控制策略所指定的频 率， 计算出第一间隔时间， 将在所述第一间隔时间内收到的多幅图像进行去 冗余操作并得到一幅图像，对所述去冗余操作得到的图像采用所述图像压缩 策略进行压缩。
S307: 远程通信模块 201向客户端 22发送图像显示信息， 所述图像显 示信息包括经过处理后的所述待显示的图像， 以使得所述客户端 22根据所 述图像显示消息进行图像显示。 在本实施例中， 首先配置应用程序与图像处理策略的对应关系， 在远程 通信模块在接收图像显示指令之后， 确定触发所述图像显示指令的应用程 序， 并根据所述应用程序确定图像处理策略， 根据确定的图像处理策略进行 图像处理， 并发送给客户端进行显示， 由于图像处理程序是根据用户当前触 发的应用程序确定的， 因此所确定的图像处理策略满足了用户当前的应用需 求， 避免了现有技术中根据图像类别的识别来确定图像处理策略， 使得最终 在客户端的图像显示忽略了客户当前应用需求的问题， 并且还可以平衡远程 计算机和客户端之间的数据传输的带宽占用量。 具体地， 由于为图像画质显 示质量要求高的软件配置了无损压缩策略，使得发送到客户端进行显示的图 像能够满足此类用户对图像高精度高仿真的要求； 由于为视频类流量大的软 件配置了低于默认值的图像频率控制策略，使得发送到客户端的图像时去冗 余之后的图像， 减轻了服务器和客户端之间的带宽占用， 提高了系统传输效 率； 由于为光标精度要求高的软件配置了服务器光标渲染策略， 能够保证显 示在图像上的光标与应用程序自行绘制的光标保持一致， 提高用户的体验。 在如图 2所示的系统架构实施例下， 本发明实施例提供的又一图像显示 方法， 如图 4所示， 包括： S400: 在管理系统中预先配置应用程序与图像处理策略的对应关系； 所述对应关系的具体配置形式和方法与步骤 S300的描述类似， 在此不 再赘述。
S401 : 客户端与服务器中的虚拟机建立连接；
具体地， 客户端与虚拟机中的远程通信模块 201建立远程桌面连接。
S402: 管理系统将所述应用程序与图像处理策略的对应关系下发给所述 虚拟机；
具体地， 管理系统将所述对应关系下发给所述远程通信模块 201 , 所述 远程通信模块 201将所述对应关系进行保存。 S403: 应用程序模块 202向操作系统模块 203发起调用指令； 优选地， 若用户或者系统自动触发某个应用程序， 则该应用程序的应用 程序模块 202向操作系统模块 203发起调用指令， 具体地， 可以是图形函数 调用指令。
S404: 操作系统模块 203根据所述调用指令， 向显示驱动模块 204发送 图像显示指令， 所述图像显示指令携带待显示的图像；
S405:显示驱动模块 204向操作系统模块 203查询所述图像显示指令所 归属的进程标识；
S406: 显示驱动模块 204接收操作系统模块 203返回的进程标识， 根据 所述进程标识确定所述进程的进程名称；
S407:显示驱动模块 204向远程通信模块 201发送所述图像显示指令和 所述进程名称； 在另一种实施例中，显示驱动模块 204向远程通信模块 201发送所述图 像显示指令， 所述图像显示指令携带所述进程名称； S408:远程通信模块 201根据所述进程名称查询保存的所述应用程序与 图像处理策略的对应关系， 确定所述待显示的图像的图像处理策略；
S409：远程通信模块 201根据所述图像处理策略，对所述待显示的图像 进行处理； 具体地，如果所述图像处理策略为无损压缩策略，所述远程通信模块 201 对所述待显示的图像进行无损压缩； 如果所述图像处理策略为有损压缩策 略， 所述远程通信模块 201根据有损压缩策略的级别对所述待显示的图像进 行有损压缩； 如果所述图像处理策略为图像频率控制策略， 所述远程通信模 块 201根据图像频率控制策略所指定的频率， 计算出第一间隔时间， 将在所 述第一间隔时间内收到的多幅图像进行去冗余操作并得到一幅图像； 如果所 述图像处理策略为服务器端光标渲染策略， 所述远程通信模块 201通知显示 驱动模块 204在所述待显示图像上渲染光标， 再获得所述显示驱动模块 204 返回的渲染后的待显示图像； 如果所述图像处理策略包括图像压缩策略和图 像频率控制策略， 所述远程通信模块 201根据图像频率控制策略所指定的频 率， 计算出第一间隔时间， 将在所述第一间隔时间内收到的多幅图像进行去 冗余操作并得到一幅图像，对所述去冗余操作得到的图像采用所述图像压缩 策略进行压缩。
S410: 远程通信模块 201向客户端 22发送图像显示信息， 所述图像显 示信息包括经过处理后的所述待显示的图像， 以使得所述客户端 22根据所 述图像显示消息进行图像显示。 在本实施例中， 首先配置应用程序与图像处理策略的对应关系， 在远程 通信模块在接收图像显示指令之后， 确定触发所述图像显示指令的应用程 序， 并根据所述应用程序确定图像处理策略， 根据确定的图像处理策略进行 图像处理， 并发送给客户端进行显示， 由于图像处理程序是根据用户当前触 发的应用程序确定的， 因此所确定的图像处理策略满足了用户当前的应用需 求， 避免了现有技术中根据图像类别的识别来确定图像处理策略， 使得最终 在客户端的图像显示忽略了客户当前应用需求的问题。 具体地， 由于为图像 画质显示质量要求高的软件配置了无损压缩策略，使得发送到客户端进行显 示的图像能够满足此类用户对图像高精度高仿真的要求； 由于为视频类流量 大的软件配置了低于默认值的图像频率控制策略，使得发送到客户端的图像 时去冗余之后的图像， 减轻了服务器和客户端之间的带宽占用， 提高了系统 传输效率； 由于为光标精度要求高的软件配置了服务器光标渲染策略， 能够 保证显示在图像上的光标与应用程序自行绘制的光标保持一致，提高用户的 体验。
本发明实施例的装置
如图 5 ,本发明实施例提供的一种图像显示装置，包括： 获取单元 501 ,用于获取图像显示指令，所述图像显示指令携带待显示 的图像； 确定单元 502 ,用于确定触发所述图像显示指令的应用程序； 处理单元 503 ,用于根据确定单元 502确定的所述应用程序，对所述待 显示的图像进行处理； 发送单元 504 ,用于向客户端发送图像显示消息，所述图像显示消息包 括经过所述处理单元 503处理后的所述待显示的图像，以使得所述客户端根 据所述图像显示消息进行图像显示。 优选地，如图 6所示，本发明实施例提供的又一装置实施例中 ，所述处 理单元 503包括： 策略子单元 5031，用于根据确定单元 502确定的所述应用程序，确定所 述待显示的图像的图像处理策略；
处理子单元 5032,用于根据所述图像处理策略，对所述待显示的图像进 行处理。
优选地，所述装置还包括配置单元 601 ,用于预先配置应用程序与图像 处理策略的对应关系； 则所述策略子单元 5031，具体用于根据确定单元确定的所述应用程序查 询所述对应关系，确定所述待显示的图像的图像处理策略。
优选地， 所述配置单元 601包括：
第一配置子单元 6011，用于配置第一对应关系，其中 ，所述第一对应关 系包括不同应用程序所对应的图像压缩策略。 其中 ，所述图像压缩策略包括无损压缩策略，所述第一配置子单元 6011 具体用于： 配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置 采用所述无损压缩策略的第一进程名称集合。 所述图像压缩策略包括有损压缩策略，所述第一配置子单元 6011具体 用于： 将所述有损压缩策略划分为多个有损压缩级别； 为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级 别配置对应的进程名称集合。
优选地， 所述配置单元 601包括：
第二配置子单元 6012 ,用于配置第二对应关系，其中 ，所述第二对应关 系包括不同应用程序所对应的图像频率控制策略。 其中 ，所述图像压缩策略包括低于默认值的图像频率控制策略，所述默 认值为系统默认的图像显示帧率或延时时间 ； 所述第二配置子单元 6012具体用于： 配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二 对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名 称集合。
优选地， 所述配置单元 601包括：
第三配置子单元 6013，用于配置第三对应关系，其中 ，所述第三对应关 系包括不同应用程序所对应的光标渲染策略。 其中 ，所述光标渲染策略包括服务器光标渲染策略，所述第三配置子单 元具体用于： 配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或 者配置采用所述服务器光标渲染策略的第三进程名称集合。
优选地，所述确定单元 502具体用于确定所述图像显示指令当前归属的 进程.
优选地，所述确定单元 502具体用于向操作系统查询所述图像显示指令 当前归属的进程名称，或者向操作系统查询所述图像显示指令当前归属的进 程标识，根据所述进程标识确定进程名称，或者，获取所述图像显示指令携 带的所述图像显示指令当前归属的进程名称，或者获取所述图像显示指令携 带的所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名 称。 优选地，所述处理子单元 5032包括以下模块任意之一或任意组合： 压缩模块，若所述图像处理策略包括图像压缩策略，用于根据所述图像 压缩策略对所述待显示的图像进行压缩处理； 去冗余模块，若所述图像处理策略包括图像频率控制策略，用于根据所 述图像频率控制策略所指定的频率，计算出第一间隔时间 ，将在所述第一间 隔时间内收到的多幅待显示的图像进行去冗余操作，获得一幅待显示的图 像； 光标处理模块，若所述图像处理策略包括服务器光标渲染策略，用于在 所述待显示图像上渲染光标。 如图 7所示，本发明实施例提供的图像显示系统，包括： 服务器 70，用于获取图像显示指令，所述图像显示指令携带待显示的图 像，确定触发所述图像显示指令的应用程序，根据所述应用程序，对所述待 显示的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息 包括经过处理后的所述待显示的图像；
客户端 72,用于接收所述服务器发送的所述图像显示消息，根据所述图 像显示消息进行图像显示。
本发明实施例还提供一种计算机， 如图 8所示， 该图 8所示的计算机可 以是如图 2所示的虚拟机， 也可是是一台物理服务器。
该计算机包括：应用程序模块 802、 操作系统模块 803、 显示驱动模块 804和远程通信模块 801 ,所述操作系统模块 803用于根据所述应用程序模 块 801的调用指令，向所述显示驱动模块 804发送图像显示指令；所述显示 驱动模块 804接收到所述操作系统模块 803发送的所述图像显示指令之后， 将所述图像显示指令发送给所述远程通信模块 801； 所述远程通信模块 801用于获取所述显示驱动模块发送的所述图像显示 指令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的 应用程序，根据所述应用程序，对所述待显示的图像进行处理，以及向客户 端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图 像，以使得所述客户端根据所述图像显示消息进行图像显示。
具体地， 所述所述远程通信模块 801具体用于根据所述应用程序， 确定 所述待显示的图像的图像处理策略， 以及根据所述图像处理策略， 对所述待 显示的图像进行处理。
优选地，所述远程通信模块 801还用于获取预先配置的应用程序与图像 处理策略的对应关系；则所述远程通信模块 801根据所述应用程序查询所述 对应关系，确定所述待显示的图像的图像处理策略。 优选地，所述显示驱动模块 804还用于向操作系统模块 803查询所述图 像显示指令当前归属的进程的信息，并将所述进程的信息携带在所述图像显 示指令中发送到所述远程通信模块 801； 所述远程通信模块 801获取所述图像显示指令携带的所述图像显示指令 当前归属的进程的信息，根据所述进程的信息确定所述待显示的图像的图像 处理策略。
优选地，所述所述远程通信模块 801还用于向操作系统模块 803查询所 述图像显示指令当前归属的进程的信息，根据所述进程的信息确定所述待显 示的图像的图像处理策略。
如图 9 ,为本发明实施例的计算机的结构组成示意图。 本发明实施例的 计算机可包括：
处理器 901、 存储器 902、 系统总线 904和通信接口 905。 CPU90K 存 储器 902和通信接口 905之间通过系统总线 904连接并完成相互间的通信。
处理器 901可能为单核或多核中央处理单元，或者为特定集成电路，或 者为被配置成实施本发明实施例的一个或多个集成电路。
存储器 902可以为高速 RAM存储器，也可以为非易失性存储器
( non-volatile memory ) ,例如至少一个磁盘存储器。
存储器 902用于计算机执行指令 903。 具体的，计算机执行指令 903中 可以包括程序代码。
当计算机运行时，处理器 901运行计算机执行指令 903 ,可以执行图 1、
3或 4任意之一所述的方法流程。
本领域普通技术人员将会理解，本发明的各个方面、 或各个方面的可能 实现方式可以被具体实施为系统、 方法或者计算机程序产品。 因此，本发明 的各方面、 或各个方面的可能实现方式可以采用完全硬件实施例、 完全软件 实施例 （包括固件、驻留软件等等），或者组合软件和硬件方面的实施例的形 式，在这里都统称为 "电路" 、 "模块"或者 "系统" 。 此外，本发明的各 方面、 或各个方面的可能实现方式可以采用计算机程序产品的形式，计算机 程序产品是指存储在计算机可读介质中的计算机可读程序代码。
计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。 计算机可读存储介质包含但不限于电子、 磁性、 光学、 电磁、 红外或半导体 系统、 设备或者装置，或者前述的任意适当组合，如随机存取存储器 (RAM), 只读存储器 （ROM)、 可擦除可编程只读存储器 (EPROM或者快闪 存储器)、 光纤、 便携式只读存储器 (CD-ROM)。
计算机中的处理器读取存储在计算机可读介质中的计算机可读程序代 码，使得处理器能够执行在流程图中每个步骤、 或各步骤的组合中规定的功 能动作；生成实施在框图的每一块、或各块的组合中规定的功能动作的装置。
计算机可读程序代码可以完全在用户的计算机上执行、部分在用户的计 算机上执行、 作为单独的软件包、 部分在用户的计算机上并且部分在远程计 算机上，或者完全在远程计算机或者服务器上执行。 也应该注意，在某些替 代实施方案中 ，在流程图中各步骤、 或框图中各块所注明的功能可能不按图 中注明的顺序发生。 例如，依赖于所涉及的功能，接连示出的两个步骤、 或 两个块实际上可能被大致同时执行，或者这些块有时候可能被以相反顺序执 行。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各 示例的单元及算法步骤，能够以电子硬件、 或者计算机软件和电子硬件的结 合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特 定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方 法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限 于此，任何熟悉本技术领域的技术人员在本发明掲露的技术范围内 ，可轻易 想到变化或替换，都应涵盖在本发明的保护范围之内。 因此，本发明的保护 范围应所述以权利要求的保护范围为准。

Claims

权利要求
1、 一种图像显示方法，其特征在于，包括：
获取图像显示指令，所述图像显示指令携带待显示的图像；
确定触发所述图像显示指令的应用程序；
根据所述应用程序，对所述待显示的图像进行处理；
向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述 待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
2、 根据权利要求 1所述的方法，其特征在于，所述根据所述应用程序， 对所述待显示的图像进行处理，包括：
根据所述应用程序，确定所述待显示的图像的图像处理策略；
根据所述图像处理策略，对所述待显示的图像进行处理。
3、 根据权利要求 2所述的方法，其特征在于，还包括：
预先配置应用程序与图像处理策略的对应关系；
相应地，所述根据所述应用程序，确定所述待显示的图像的图像处理策 略，包括：
根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像处 理策略。
4、 根据权利要求 3所述的方法，其特征在于，所述预先配置应用程序 与图像处理策略的对应关系包括：
配置第一对应关系，其中 ，所述第一对应关系包括不同应用程序所对应 的图像压缩策略。
5、 根据权利要求 4所述的方法，其特征在于，所述图像压缩策略包括 无损压缩策略，所述配置第一对应关系包括：
配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置 采用所述无损压缩策略的第一进程名称集合。
6、 根据权利要求 4或 5所述的方法，其特征在于，所述图像压缩策略 包括有损压缩策略，所述配置第一对应关系包括：
将所述有损压缩策略划分为多个有损压缩级别；
为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级 别配置对应的进程名称集合。
7、 根据权利要求 3或 4所述的方法，其特征在于，所述预先配置应用 程序与图像处理策略的对应关系包括：
配置第二对应关系，其中 ，所述第二对应关系包括不同应用程序所对应 的图像频率控制策略。
8、 根据权利要求 7所述的方法，其特征在于，所述图像压缩策略包括 低于默认值的图像频率控制策略，所述默认值为系统默认的图像显示帧率或 延时时间 ；
所述配置第二对应关系包括：
配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二 对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名 称集合。
9、 根据权利要求 3或 4或 7所述的方法，其特征在于，所述预先配置 应用程序与图像处理策略的对应关系包括：
配置第三对应关系，其中 ，所述第三对应关系包括不同应用程序所对应 的光标渲染策略。
10、 根据权利要求 9所述的方法，其特征在于，所述光标渲染策略包括 服务器光标渲染策略，所述配置第三对应关系包括：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或 者配置采用所述服务器光标渲染策略的第三进程名称集合。
11、根据权利要求 1-10任一项所述的方法，其特征在于，所述确定触发 所述图像显示指令的应用程序，包括：
确定所述图像显示指令当前归属的进程。
12、 根据权利要求 11所述的方法，其特征在于，所述确定所述图像显 示指令当前归属的进程，包括：
向操作系统查询所述图像显示指令当前归属的进程名称；或者， 向操作系统查询所述图像显示指令当前归属的进程标识，根据所述进程 标识确定进程名称；或者，
获取所述图像显示指令携带的所述图像显示指令当前归属的进程名称； 或者，
获取所述图像显示指令携带的所述图像显示指令当前归属的进程标识， 根据所述进程标识确定进程名称。
13、 根据权利要求 12所述的方法，其特征在于，所述根据所述应用程 序，确定所述待显示的图像的图像处理策略，包括： 确定所述进程名称属于的进程类型或者所述进程名称所对应的图像处 理策略。
14、 根据权利要求 11所述的方法，其特征在于，所述根据所述图像处 理策略，对所述待显示的图像进行处理，包括： 若所述图像处理策略包括图像压缩策略，根据所述图像压缩策略对所述 待显示的图像进行压缩处理；或者， 若所述图像处理策略包括图像频率控制策略，根据所述图像频率控制策 略所指定的频率，计算出第一间隔时间 ，将在所述第一间隔时间内收到的多 幅待显示的图像进行去冗余操作，获得一幅待显示的图像；或者， 若所述图像处理策略包括服务器光标渲染策略，则在所述待显示图像上 渲染光标；或者， 若所述图像处理策略包括图像压缩策略和图像频率控制策略， 则根据所 述图像频率控制策略所指定的频率， 计算出第一间隔时间， 将在所述第一间 隔时间内收到的多幅待显示的图像进行去冗余操作， 获得一幅待显示的图 像， 对所述去冗余操作得到的待显示的图像采用所述图像压缩策略进行压 缩。
15、 一种图像显示装置，其特征在于，包括： 获取单元，用于获取图像显示指令，所述图像显示指令携带待显示的图 像； 确定单元，用于确定触发所述图像显示指令的应用程序； 处理单元，用于根据确定单元确定的所述应用程序，对所述待显示的图 像进行处理； 发送单元，用于向客户端发送图像显示消息，所述图像显示消息包括经 过所述处理单元处理后的所述待显示的图像，以使得所述客户端根据所述图 像显示消息进行图像显示。
16、 根据权利要求 15所述的装置，其特征在于，所述处理单元包括： 策略子单元，用于根据确定单元确定的所述应用程序，确定所述待显示 的图像的图像处理策略；
处理子单元， 用于根据所述图像处理策略， 对所述待显示的图像进行处 理。
17、 根据权利要求 16所述的装置， 其特征在于， 所述装置还包括： 配置单元，用于预先配置应用程序与图像处理策略的对应关系； 则所述策略子单元，具体用于根据确定单元确定的所述应用程序查询所 述对应关系，确定所述待显示的图像的图像处理策略。
18、 根据权利要求 17所述的装置， 其特征在于， 所述配置单元包括： 第一配置子单元，用于配置第一对应关系，其中 ，所述第一对应关系包 括不同应用程序所对应的图像压缩策略。
19、 根据权利要求 18所述的装置，其特征在于，所述图像压缩策略包 括无损压缩策略，所述第一配置子单元具体用于： 配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置 采用所述无损压缩策略的第一进程名称集合。
20、 根据权利要求 18或 19所述的装置，其特征在于，所述图像压缩策 略包括有损压缩策略，所述第一配置子单元具体用于： 将所述有损压缩策略划分为多个有损压缩级别； 为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级 别配置对应的进程名称集合。
21、 根据权利要求 17或 18所述的装置， 其特征在于， 所述配置单元包 括：
第二配置子单元，用于配置第二对应关系，其中 ，所述第二对应关系包 括不同应用程序所对应的图像频率控制策略。
22、 根据权利要求 21所述的装置，其特征在于，所述图像压缩策略包 括低于默认值的图像频率控制策略，所述默认值为系统默认的图像显示帧率 或延时时间 ； 所述第二配置子单元具体用于： 配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二 对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名 称集合。
23、 根据权利要求 17或 18或 21所述的装置， 其特征在于， 所述配置 单元包括：
第三配置子单元，用于配置第三对应关系，其中 ，所述第三对应关系包 括不同应用程序所对应的光标渲染策略。
24、 根据权利要求 23所述的装置，其特征在于，所述光标渲染策略包 括服务器光标渲染策略，所述第三配置子单元具体用于：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或 者配置采用所述服务器光标渲染策略的第三进程名称集合。
25、 根据权利要求 15-24任一项所述的装置，其特征在于，所述确定单 元具体用于确定所述图像显示指令当前归属的进程。
26、 根据权利要求 25所述的装置，其特征在于，所述确定单元具体用 于向操作系统查询所述图像显示指令当前归属的进程名称，或者向操作系统 查询所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名 称，或者，获取所述图像显示指令携带的所述图像显示指令当前归属的进程 名称，或者获取所述图像显示指令携带的所述图像显示指令当前归属的进程 标识，根据所述进程标识确定进程名称。
27、 根据权利要求 26所述的装置，其特征在于，所述策略子单元具体 用于确定所述进程名称属于的进程类型或者所述进程名称所对应的图像处 理策略。
28、 根据权利要求 25所述的装置，其特征在于，所述处理子单元包括 以下模块任意之一或任意组合：
压缩模块，若所述图像处理策略包括图像压缩策略，用于根据所述图像 压缩策略对所述待显示的图像进行压缩处理； 去冗余模块，若所述图像处理策略包括图像频率控制策略，用于根据所 述图像频率控制策略所指定的频率，计算出第一间隔时间 ，将在所述第一间 隔时间内收到的多幅待显示的图像进行去冗余操作，获得一幅待显示的图 像；
光标处理模块，若所述图像处理策略包括服务器光标渲染策略，用于在 所述待显示图像上渲染光标。
29、 根据权利要求 28所述的装置，其特征在于， 当所述处理子单元包 括压缩模块和去冗余模块，所述去冗余模块根据所述图像频率控制策略所指 定的频率，计算出第一间隔时间 ，将在所述第一间隔时间内收到的多幅待显 示的图像进行去冗余操作，获得一幅待显示的图像；所述压缩模块对所述去 冗余操作得到的待显示的图像采用所述图像压缩策略进行压缩。
30、 一种图像显示系统，其特征在于，包括：
服务器，用于获取图像显示指令，所述图像显示指令携带待显示的图像， 确定触发所述图像显示指令的应用程序，根据所述应用程序，对所述待显示 的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息包括 经过处理后的所述待显示的图像；
客户端，用于接收所述服务器发送的所述图像显示消息，根据所述图像 显示消息进行图像显示。
31、 根据权利要求 30所述的系统，其特征在于，所述服务器具体用于 根据确定的所述应用程序，确定所述待显示的图像的图像处理策略，以及根 据所述图像处理策略，对所述待显示的图像进行处理。
32、 根据权利要求 31所述的系统，其特征在于，所述服务器还用于预 先配置应用程序与图像处理策略的对应关系。
33、 根据权利要求 32所述的系统，其特征在于，所述服务器具体用于 配置第一对应关系，其中 ，所述第一对应关系包括不同应用程序所对应的图 像压缩策略；和 /或，配置第二对应关系，其中 ，所述第二对应关系包括不同 应用程序所对应的图像频率控制策略；和 /或，配置第三对应关系，其中 ，所 述第三对应关系包括不同应用程序所对应的光标渲染策略。
34、 根据权利要求 33所述的系统，其特征在于，所述图像压缩策略包 括无损压缩策略，所述服务器具体用于：
配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置 采用所述无损压缩策略的第一进程名称集合。
35、 根据权利要求 33或 34所述的系统，其特征在于，所述图像压缩策 略包括有损压缩策略，所述服务器具体用于：
将所述有损压缩策略划分为多个有损压缩级别；
为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级 别配置对应的进程名称集合。
36、 根据权利要求 33所述的系统，其特征在于，所述图像压缩策略包 括低于默认值的图像频率控制策略，所述默认值为系统默认的图像显示帧率 或延时时间 ； 所述服务器具体用于：配置所述低于默认值的图像频率控制策略与第二 类型应用软件的第二对应关系，或者配置采用所述低于默认值的图像频率控 制策略的第二进程名称集合。
37、 根据权利要求 33所述的系统，其特征在于，所述光标渲染策略包 括服务器光标渲染策略，所述服务器具体用于：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或 者配置采用所述服务器光标渲染策略的第三进程名称集合。
38、 根据权利要求 30-37任一项所述的系统，其特征在于，所述服务器 具体用于确定所述图像显示指令当前归属的进程。
39、 一种计算机，其特征在于，包括应用程序模块、 操作系统模块、 显 示驱动模块和远程通信模块，所述操作系统模块用于根据所述应用程序模块 的调用指令，向所述显示驱动模块发送图像显示指令；所述显示驱动模块接 收到所述操作系统模块发送的所述图像显示指令之后，将所述图像显示指令 发送给所述远程通信模块；
所述远程通信模块用于获取所述显示驱动模块发送的所述图像显示指 令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的应 用程序，根据所述应用程序，对所述待显示的图像进行处理，以及向客户端 发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图 像，以使得所述客户端根据所述图像显示消息进行图像显示。
40、 根据权利要求 39所述的计算机，其特征在于，所述远程通信模块 具体用于根据所述应用程序，确定所述待显示的图像的图像处理策略，以及 根据所述图像处理策略，对所述待显示的图像进行处理。
41、 根据权利要求 40所述的计算机，其特征在于，所述远程通信模块 还用于获取预先配置的应用程序与图像处理策略的对应关系；则所述远程通 信模块根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像 处理策略。
42、 根据权利要求 40或 41所述的计算机，其特征在于，所述显示驱动 模块还用于向操作系统模块查询所述图像显示指令当前归属的进程的信息， 并将所述进程的信息携带在所述图像显示指令中发送到所述远程通信模块； 所述远程通信模块获取所述图像显示指令携带的所述图像显示指令当 前归属的进程的信息，根据所述进程的信息确定所述待显示的图像的图像处 理策略。
43、 根据权利要求 40或 41所述的计算机，其特征在于，所述所述远程 通信模块还用于向操作系统模块查询所述图像显示指令当前归属的进程的 信息，根据所述进程的信息确定所述待显示的图像的图像处理策略。
44、 一种计算机，其特征在于，包括：处理器、 存储器、 总线和通信接 口；
所述存储器用于存储计算机执行指令， 所述处理器与所述存储器通过 所述总线连接， 当所述计算机运行时， 所述处理器执行所述存储器存储的 所述计算机执行指令， 以使所述计算机执行如下方法：
获取图像显示指令，所述图像显示指令携带待显示的图像； 确定触发所述图像显示指令的应用程序； 根据所述应用程序，对所述待显示的图像进行处理；
向客户端发送图像显示消息， 所述图像显示消息包括经过处理后的所述 待显示的图像， 以使得所述客户端根据所述图像显示消息进行图像显示。
45、 一种计算机可读介质， 其特征在于， 包括计算机执行指令， 当计 算机的处理器执行所述计算机执行指令时， 所述计算机执行如下方法： 获取图像显示指令，所述图像显示指令携带待显示的图像； 确定触发所述图像显示指令的应用程序； 根据所述应用程序，对所述待显示的图像进行处理； 向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述 待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
PCT/CN2013/080728 2013-08-02 2013-08-02 一种图像显示方法和装置 WO2015013981A1 (zh)

Priority Applications (8)

Application Number Priority Date Filing Date Title
CN201380002633.XA CN103858095B (zh) 2013-08-02 2013-08-02 一种图像显示方法和装置
PCT/CN2013/080728 WO2015013981A1 (zh) 2013-08-02 2013-08-02 一种图像显示方法和装置
EP17177039.9A EP3301585A3 (en) 2013-08-02 2013-08-02 Image display method and apparatus
EP13802518.4A EP2849080B1 (en) 2013-08-02 2013-08-02 Image display method and device
CA2920050A CA2920050C (en) 2013-08-02 2013-08-02 Image display method and apparatus
JP2016530302A JP6276408B2 (ja) 2013-08-02 2013-08-02 画像表示方法および装置
US14/143,852 US8856385B1 (en) 2013-08-02 2013-12-30 Image display method and apparatus
US14/492,966 US10320886B2 (en) 2013-08-02 2014-09-22 Image display method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2013/080728 WO2015013981A1 (zh) 2013-08-02 2013-08-02 一种图像显示方法和装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US14/143,852 Continuation US8856385B1 (en) 2013-08-02 2013-12-30 Image display method and apparatus

Publications (1)

Publication Number Publication Date
WO2015013981A1 true WO2015013981A1 (zh) 2015-02-05

Family

ID=50864333

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2013/080728 WO2015013981A1 (zh) 2013-08-02 2013-08-02 一种图像显示方法和装置

Country Status (6)

Country Link
US (2) US8856385B1 (zh)
EP (2) EP3301585A3 (zh)
JP (1) JP6276408B2 (zh)
CN (1) CN103858095B (zh)
CA (1) CA2920050C (zh)
WO (1) WO2015013981A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9582240B2 (en) * 2012-12-26 2017-02-28 Vmware, Inc. Using contextual and spatial awareness to improve remote desktop imaging fidelity
CN104636445B (zh) * 2015-01-16 2019-05-24 白天 截屏图像的处理和分组操作方法及其装置
CN106454403B (zh) * 2016-09-09 2020-06-12 北京星选科技有限公司 数据显示方法、设备及系统
CN108319493A (zh) * 2017-06-28 2018-07-24 新华三云计算技术有限公司 数据处理方法、装置及机器可读存储介质
CN107729483B (zh) * 2017-10-17 2021-05-11 Oppo广东移动通信有限公司 一种分类显示方法、装置、终端及计算机可读存储介质
CN111433743B (zh) * 2017-12-12 2022-05-20 荣耀终端有限公司 一种app远程控制方法及相关设备
CN109741463B (zh) 2019-01-02 2022-07-19 京东方科技集团股份有限公司 虚拟现实场景的渲染方法、装置及设备
CN110740352B (zh) * 2019-11-14 2021-07-20 北京京航计算通讯研究所 显卡透传环境下基于spice协议的差异图像显示方法
CN110868614B (zh) * 2019-11-14 2021-09-28 北京京航计算通讯研究所 显卡透传环境下基于spice协议的差异图像显示系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101849224A (zh) * 2007-10-20 2010-09-29 思杰系统有限公司 用于远程处理三维图像数据的方法和系统
US20100306413A1 (en) * 2009-05-26 2010-12-02 Yaniv Kamay Methods for detecting and handling video and video-like content in remote display system
CN102196033A (zh) * 2010-03-08 2011-09-21 微软公司 远程内容分类以及使用多个传输信道的传输
CN102203760A (zh) * 2008-10-30 2011-09-28 微软公司 为客户端提供高保真显示和交互性的远程计算平台
US20120069036A1 (en) * 2010-09-18 2012-03-22 Makarand Dharmapurikar Method and mechanism for delivering applications over a wan

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8352400B2 (en) * 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
JP3339668B2 (ja) * 1996-06-19 2002-10-28 株式会社日立製作所 時系列データ圧縮・復元方法および装置
US6675239B1 (en) * 1999-10-05 2004-01-06 Ati Technologies Inc. Method and apparatus for providing commands to a command memory
IL155377A0 (en) * 2000-10-17 2003-11-23 Moonlight Cordless Ltd Method and system for remote video display through a wireless projector
CN1332300C (zh) * 2005-04-30 2007-08-15 广东威创日新电子有限公司 一种基于服务器端\客户端结构远程显示处理方法
JP4751647B2 (ja) * 2005-06-03 2011-08-17 株式会社リコー 画面共有装置、画面共有方法、画面共有プログラム及び記録媒体
JP2007206644A (ja) * 2006-02-06 2007-08-16 Seiko Epson Corp 画像表示システム，画像表示方法，画像表示プログラム，記録媒体，データ処理装置，画像表示装置
JP4785579B2 (ja) * 2006-03-17 2011-10-05 キヤノン株式会社 情報処理装置および情報処理装置における印刷設定反映方法とプログラム
US20070288640A1 (en) * 2006-06-07 2007-12-13 Microsoft Corporation Remote rendering of multiple mouse cursors
US8244883B2 (en) * 2006-08-03 2012-08-14 Citrix Systems, Inc. Systems and methods of for providing multi-mode transport layer compression
CN101420610B (zh) * 2007-10-26 2010-08-18 闪联信息技术工程中心有限公司 显示远程桌面内容的方法及其装置
US8675739B2 (en) * 2007-12-17 2014-03-18 Samsung Electronics Co., Ltd. Method and apparatus for video decoding based on a multi-core processor
US8456380B2 (en) * 2008-05-15 2013-06-04 International Business Machines Corporation Processing computer graphics generated by a remote computer for streaming to a client computer
US8200896B2 (en) * 2008-06-06 2012-06-12 Microsoft Corporation Increasing remote desktop performance with video caching
US8189661B2 (en) * 2009-03-09 2012-05-29 Microsoft Corporation Remote desktop protocol (RDP) tile image classification for improving compression efficiency and quality
JP5077272B2 (ja) * 2009-03-12 2012-11-21 カシオ計算機株式会社 クライアント装置、サーバベース・コンピューティング・システム、およびクライアント制御プログラム
JP2010237726A (ja) * 2009-03-30 2010-10-21 Nec Personal Products Co Ltd 情報処理装置、そのパラメータ設定方法、プログラム及び記録媒体
EP2237526A1 (en) * 2009-03-30 2010-10-06 NEC Corporation Method for optimizing the remote display transfer in thin client computing environment
US9854254B2 (en) * 2009-08-04 2017-12-26 Avocent Corporation Method and system for remote viewing of static and video images
WO2011032114A1 (en) * 2009-09-11 2011-03-17 Citrix Systems, Inc. Remote rendering of three-dimensional images using virtual machines
WO2011060442A2 (en) * 2009-11-16 2011-05-19 Citrix Systems, Inc. Methods and systems for selective implementation of progressive display techniques
US8676949B2 (en) * 2009-11-25 2014-03-18 Citrix Systems, Inc. Methods for interfacing with a virtualized computing service over a network using a lightweight client
US9582238B2 (en) * 2009-12-14 2017-02-28 Qualcomm Incorporated Decomposed multi-stream (DMS) techniques for video display systems
US8868642B2 (en) * 2010-07-08 2014-10-21 Red Hat Israel, Ltd. System and method for dynamically switching between mouse modes
CN102446341A (zh) * 2010-09-30 2012-05-09 联想(北京)有限公司 服务器及其图像处理方法
US20130039408A1 (en) * 2011-02-07 2013-02-14 Screenovate Technologies Ltd Method for enhancing compression and transmission process of a screen image
US20130132971A1 (en) * 2011-11-22 2013-05-23 International Business Machines Corporation System, method and program product for streamlined virtual machine desktop display
US20150200998A1 (en) * 2012-01-30 2015-07-16 Google Inc. Displaying portions of a host display area of a host device at a client device
US8774536B1 (en) * 2012-07-03 2014-07-08 Google Inc. Efficient processing of streams of images within a moving window session
US9930082B2 (en) * 2012-11-20 2018-03-27 Nvidia Corporation Method and system for network driven automatic adaptive rendering impedance

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101849224A (zh) * 2007-10-20 2010-09-29 思杰系统有限公司 用于远程处理三维图像数据的方法和系统
CN102203760A (zh) * 2008-10-30 2011-09-28 微软公司 为客户端提供高保真显示和交互性的远程计算平台
US20100306413A1 (en) * 2009-05-26 2010-12-02 Yaniv Kamay Methods for detecting and handling video and video-like content in remote display system
CN102196033A (zh) * 2010-03-08 2011-09-21 微软公司 远程内容分类以及使用多个传输信道的传输
US20120069036A1 (en) * 2010-09-18 2012-03-22 Makarand Dharmapurikar Method and mechanism for delivering applications over a wan

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2849080A4 *

Also Published As

Publication number Publication date
CA2920050C (en) 2019-04-02
EP3301585A3 (en) 2018-07-25
CN103858095A (zh) 2014-06-11
JP2016532952A (ja) 2016-10-20
EP2849080B1 (en) 2017-10-11
CN103858095B (zh) 2015-08-19
EP3301585A2 (en) 2018-04-04
EP2849080A1 (en) 2015-03-18
CA2920050A1 (en) 2015-02-05
US10320886B2 (en) 2019-06-11
US8856385B1 (en) 2014-10-07
JP6276408B2 (ja) 2018-02-07
EP2849080A4 (en) 2015-09-09
US20150046520A1 (en) 2015-02-12

Similar Documents

Publication Publication Date Title
WO2015013981A1 (zh) 一种图像显示方法和装置
CA2922867C (en) Desktop-cloud-based media control method and device
CA2935114C (en) Computer, control device, and data processing method
WO2018223786A1 (zh) 云桌面系统、及其图像序列压缩编码方法和介质
CN106648832B (zh) 提高虚拟机资源利用率的装置及方法
CN113037795B (zh) 瘦终端系统及其处理方法
CN104639501B (zh) 一种数据流传输的方法、设备及系统
JP2018077897A (ja) 画像表示方法および装置
CN105282194A (zh) 虚拟桌面的配置、获取方法及装置
CN115840538A (zh) 一种cdn刷新分片的方法及装置
WO2023035619A1 (zh) 一种场景渲染方法、装置、设备及系统
CN114416656A (zh) 一种远程操作文件夹的方法、设备及存储介质
JP6354854B2 (ja) 情報処理システム、情報処理方法、情報処理装置およびその制御方法と制御プログラム
CN118170499B (zh) 虚拟云盘分割的方法及装置、电子设备和存储介质
WO2022111435A1 (zh) 一种usb设备随通道录音的方法、装置及存储介质
CN115373746A (zh) 渲染指令的抓取方法、装置、电子设备及存储介质
CN118842829A (zh) 云桌面连接控制方法及装置
CN114461157A (zh) 一种idv客户端多屏分治方法及系统
CN116389758A (zh) 视频转码方法及装置、电子设备和存储介质
CN119376852A (zh) 虚拟机的创建方法、装置、电子设备与可读存储介质
CN115865908A (zh) 远程桌面系统启动控制方法及相关设备
CN115378938A (zh) 网络资源调度方法、网关设备、边缘和云数据中心服务器

Legal Events

Date Code Title Description
REEP Request for entry into the european phase

Ref document number: 2013802518

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2013802518

Country of ref document: EP

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13802518

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2920050

Country of ref document: CA

Ref document number: 2016530302

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE