Nothing Special   »   [go: up one dir, main page]

JP5844816B2 - Information processing system, multimedia information processing method and system - Google Patents

Information processing system, multimedia information processing method and system Download PDF

Info

Publication number
JP5844816B2
JP5844816B2 JP2013543516A JP2013543516A JP5844816B2 JP 5844816 B2 JP5844816 B2 JP 5844816B2 JP 2013543516 A JP2013543516 A JP 2013543516A JP 2013543516 A JP2013543516 A JP 2013543516A JP 5844816 B2 JP5844816 B2 JP 5844816B2
Authority
JP
Japan
Prior art keywords
user
video information
information
target
conversion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013543516A
Other languages
Japanese (ja)
Other versions
JP2014504091A (en
Inventor
シュエ、シアンホェイ
リアン、ビン
ホワン、ウェイセン
Original Assignee
中国移動通信集団広東有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中国移動通信集団広東有限公司 filed Critical 中国移動通信集団広東有限公司
Publication of JP2014504091A publication Critical patent/JP2014504091A/en
Application granted granted Critical
Publication of JP5844816B2 publication Critical patent/JP5844816B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42684Client identification by a unique number or address, e.g. serial number, MAC address, socket ID
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Power Engineering (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Description

本願は、2012年12月16日に中国専利局に提出した、出願番号が201010590867.9であって、発明の名称が「情報処理システム、マルチメディア情報処理方法及びシステム」である中国特許出願の優先権を主張し、本願で、その全ての内容を援用するものとする。   The present application is a Chinese patent application filed with the Chinese Patent Office on December 16, 2012, whose application number is 201010590867.9 and whose title is “Information Processing System, Multimedia Information Processing Method and System”. Claim priority and use the entire contents of this application.

本発明は、データサービス技術分野に係り、特に、情報処理システム、マルチメディア情報処理方法及びシステムに係る。   The present invention relates to the field of data service technology, and more particularly, to an information processing system, a multimedia information processing method and system.

リングバックトーン、着信メロディ、画像、マルチメディア表情のようなマルチメディアエレメントは、既に人間の携帯電話及びコンピュータ上の生活の一部になっており、現在、これらのマルチメディアエレメントは、主にインターネット及び電気通信付加価値サービスプロバイダに由来する。   Multimedia elements such as ringback tones, ringtones, images, and multimedia expressions are already part of the life on human mobile phones and computers, and these multimedia elements are now mainly on the Internet. And from telecommunications value-added service providers.

現在の技術条件で、テレビ番組の区間から抽出して個人化されたリングバックトーンを形成しようとすると、一般的には、以下の過程が必要である。即ち、技術者がテレビ番組をデジタルファイルに作製し、ビデオ編集ツールを利用して目標ビデオ区間を位置決めしてオーディオエレメントを抽出し、その後、オーディオエレメントを電気通信事業者のリングバックトーンサービスプラットフォームにアップロードし、最後に、電気通信事業者のリングバックトーンサービスシステムを介してこのリングバックトーンを自分のリングバックトーンに設定することができる。   In order to form a personalized ringback tone extracted from a TV program section under the current technical conditions, the following process is generally required. That is, an engineer creates a TV program into a digital file, uses a video editing tool to locate a target video segment and extracts an audio element, and then converts the audio element to a telecommunications carrier's ringback tone service platform. You can upload and finally set this ringback tone to your ringback tone via the telecommunications carrier's ringback tone service system.

よって、テレビ番組区間から抽出して個人化されたリングバックトーンを形成しようとすると、その実現されるプロセス全体は、専門技術者が実現する必要があり、一般のユーザーは完成できるものではない。したがって、ラジオ及びテレビジョンネットワーク内のマルチメディアコンテンツの高付加価値を掘り起こすことはハードルが高く、多くのユーザーが業務上のマルチメディアコンテンツを自己定義するニーズを満足できないことが分かる。   Therefore, when an attempt is made to form a personalized ringback tone extracted from a TV program section, the entire process to be realized needs to be realized by a professional engineer and cannot be completed by a general user. Accordingly, it can be seen that digging up the high added value of multimedia content in radio and television networks is a high hurdle and many users cannot meet the need to self-define multimedia content on the job.

関連技術において、ユーザーが自己の意志に従ってテレビマルチメディアコンテンツから所望のマルチメディア情報を抽出して利用することができない問題について、未だ有効な解決方案が提案されていない。   In related technology, an effective solution has not yet been proposed for the problem that users cannot extract and use desired multimedia information from television multimedia contents according to their own will.

本発明の実施例は、情報処理システム、マルチメディア情報処理方法及びシステムを提供し、ユーザーの指示に従ってユーザーの所望するマルチメディア情報を抽出することができ、ユーザーが抽出したマルチメディア情報を利用してサービスの自己定義を行う等に寄与し、ユーザー体験を向上する。   Embodiments of the present invention provide an information processing system, a multimedia information processing method and system, and can extract multimedia information desired by a user according to a user's instruction, and use the multimedia information extracted by the user. Contribute to self-definition of services and improve user experience.

本発明の実施例の技術案は、以下のように実現される。
情報処理システムであって、
操作を発令するユーザーの選択したビデオ情報と変換命令を、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信するためのセットトップボックスと、
上記セットトップボックスの標識を決定し、上記セットトップボックスの標識に基づいて目標標識を決定し、上記ビデオ情報、上記変換命令及び上記目標標識をマルチメディア情報処理システムに送信するための上記ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームと、
上記ビデオ情報、上記変換命令及び上記目標標識を受信し、上記変換命令に従って、上記ビデオ情報を、上記ユーザーにより選択されたフォーマットのマルチメディア情報に変換し、上記マルチメディア情報を、上記目標標識に対応するユーザーに提供するための上記マルチメディア情報処理システムとを含むことを特徴とする情報処理システム。
The technical solution of the embodiment of the present invention is realized as follows.
An information processing system,
A set-top box for transmitting user selected video information and conversion instructions to the radio and television interactive television network platform;
A radio for determining a sign of the set-top box, determining a target sign based on the sign of the set-top box, and transmitting the video information, the conversion command, and the target sign to a multimedia information processing system; A television interactive television network platform,
The video information, the conversion command and the target indicator are received, and the video information is converted into multimedia information in a format selected by the user according to the conversion command, and the multimedia information is converted into the target indicator. An information processing system comprising the multimedia information processing system for providing to a corresponding user.

ここで上記セットトップボックスの標識に基づいて目標標識を決定する操作は、
上記セットトップボックスの標識に基づいて、予め保存された対応関係により上記操作を発令するユーザーに複数の標識を表示して、上記操作を発令するユーザーに上記複数の標識から目標標識を選択させることを含む。
Here, the operation to determine the target sign based on the sign of the set top box is
Based on the sign of the set top box, a plurality of signs are displayed to a user instructing the operation according to a correspondence stored in advance, and the user instructing the operation selects a target sign from the plurality of signs. including.

なお、上記マルチメディア情報処理システムが上記変換命令に従って、上記ビデオ情報を上記ユーザーにより選択されたフォーマットのマルチメディア情報に変換し、上記マルチメディア情報を、上記目標標識に対応するユーザーに提供することは、具体的に、
上記ビデオ情報からオーディオ情報を抽出して予め定められたフォーマットのオーディオファイルに変換し、上記オーディオファイルと上記目標標識とをリングバックトーンサービスプラットフォームに送信して、上記リングバックトーンサービスプラットフォームが上記オーディオファイルを上記目標標識に対応するユーザーのリングバックトーンに設定するようにし、又は
上記ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出した上記キーフレームに基づいて上記ビデオ情報に対応する表情画像ファイルを形成し、上記表情画像ファイルを、上記目標標識に対応するユーザーに対して構築した画像ライブラリに保存して、上記ユーザーの使用に供することを含む。
The multimedia information processing system converts the video information into multimedia information in a format selected by the user according to the conversion command, and provides the multimedia information to a user corresponding to the target sign. Specifically,
Audio information is extracted from the video information, converted into an audio file of a predetermined format, the audio file and the target indicator are transmitted to a ringback tone service platform, and the ringback tone service platform transmits the audio information. The file is set to the user's ringback tone corresponding to the target indicator, or one or more key frames are extracted from the video information, and the facial expression corresponding to the video information based on the extracted key frames Forming an image file, and storing the expression image file in an image library constructed for a user corresponding to the target sign for use by the user.

マルチメディア情報処理方法であって、
セットトップボックスからの、操作を発令するユーザーが上記セットトップボックスにより選択したビデオ情報、変換命令及び目標標識を伴って有する変換要求を受信し、
上記変換命令に従って、上記ビデオ情報を上記ユーザーにより選択されたフォーマットのマルチメディア情報に変換し、
上記マルチメディア情報を、上記目標標識に対応するユーザーに提供することを含む。
A multimedia information processing method comprising:
Receiving from the set top box a conversion request having the video information selected by the set top box by the user issuing the operation, the conversion instruction and the target indicator;
According to the conversion instruction, the video information is converted into multimedia information in a format selected by the user,
Providing the multimedia information to a user corresponding to the target indicator.

なお、上記変換命令は、
上記ビデオ情報からオーディオ情報を抽出して予め定められたフォーマットのオーディオファイルに変換する操作、及び、
上記ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出した上記キーフレームに基づいて上記ビデオ情報に対応する表情画像ファイルを形成する操作のうちの、少なくとも一つを行うように指示するためのものである。
The above conversion command is
An operation for extracting audio information from the video information and converting it into an audio file of a predetermined format, and
Instructing to perform at least one of operations for extracting one or more key frames from the video information and forming a facial expression image file corresponding to the video information based on the extracted key frames. belongs to.

具体的には、上記変換命令が、上記操作を発令するユーザーが上記ビデオ情報の中からオーディオ情報を抽出するように要求することを示す場合に、上記マルチメディア情報を上記目標標識に対応するユーザーに提供する処理過程は、
上記オーディオ情報を予め定められたフォーマットのオーディオファイルに変換し、上記オーディオファイルと上記目標標識をリングバックトーンサービスプラットフォームに送信して、上記リングバックトーンサービスプラットフォームが上記オーディオファイルを上記目標標識に対応するユーザーのリングバックトーンに設定するようにすることを含む。
Specifically, when the conversion command indicates that the user who issues the operation requests to extract audio information from the video information, the multimedia information corresponds to the target indicator. The process provided to
The audio information is converted into an audio file of a predetermined format, the audio file and the target indicator are transmitted to a ringback tone service platform, and the ringback tone service platform corresponds the audio file to the target indicator. Including setting the user's ringback tone.

具体的には、上記変換命令は上記操作を発令するユーザーが上記ビデオ情報から一つ又は複数のキーフレームを抽出して、表情画像ファイルを形成するように要求することを示す場合に、上記マルチメディア情報を上記目標標識に対応するユーザーに提供する処理は、
上記表情画像ファイルを、上記目標標識に対応するユーザーに対して構築した画像ライブラリに保存して、上記ユーザーの使用に供するようにすることを含む。
Specifically, when the conversion command indicates that the user issuing the operation requests to extract one or more key frames from the video information to form a facial expression image file, The process of providing media information to the user corresponding to the target sign is as follows:
Storing the facial expression image file in an image library constructed for the user corresponding to the target sign for use by the user.

上記表情画像を、上記目標標識に対応するユーザーに対して構築した画像ライブラリに保存する処理過程は、
上記表情画像ファイルの平均画素値を算出し、上記平均画素値を上記表情画像ファイルのインデックス値とし、
上記インデックス値と、上記表情画像ファイルの名称と、上記表情画像ファイルとの三者間の対応関係を構築することを含むことが好ましい。
The process of storing the facial expression image in an image library constructed for the user corresponding to the target sign is as follows:
An average pixel value of the facial expression image file is calculated, and the average pixel value is set as an index value of the facial expression image file.
Preferably, the method includes establishing a correspondence relationship between the index value, the name of the facial expression image file, and the facial expression image file.

マルチメディア情報処理システムであって、
セットトップボックスからの、操作を発令するユーザーが上記セットトップボックスにより選択したビデオ情報、変換命令及び目標標識を伴って有する変換要求を受信するための受信モジュールと、
上記変換命令に従って、上記ビデオ情報を、上記ユーザーにより選択されたフォーマットのマルチメディア情報に変換するためのコーディング処理モジュールと、
上記マルチメディア情報を、上記目標標識に対応するユーザーに提供するための応用制御モジュールとを含む。
A multimedia information processing system,
A receiving module for receiving from the set-top box a conversion request having the video information selected by the set-top box by the user issuing the operation, the conversion command, and the target indicator;
A coding processing module for converting the video information into multimedia information in a format selected by the user according to the conversion instruction;
And an application control module for providing the multimedia information to a user corresponding to the target indicator.

なお、上記変換命令は、
上記ビデオ情報からオーディオ情報を抽出し、予め定められたフォーマットのオーディオファイルに変換する操作、及び、
上記ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出した上記キーフレームに基づいて上記ビデオ情報に対応する表情画像ファイルを形成する操作のうちの少なくとも一つを行うように指示するためのものである。
The above conversion command is
An operation for extracting audio information from the video information and converting it into an audio file of a predetermined format; and
Extracting one or more key frames from the video information and instructing to perform at least one of operations for forming a facial expression image file corresponding to the video information based on the extracted key frames Is.

上記変換命令が上記操作を発令するユーザーが上記ビデオ情報からオーディオ情報を抽出するように要求することを示す場合に、応用制御モジュールは、具体的に、上記オーディオ情報を予め定められたフォーマットのオーディオファイルに変換し、上記オーディオファイルと上記目標標識をリングバックトーンサービスプラットフォームに送信して、上記リングバックトーンサービスプラットフォームが上記オーディオファイルを上記目標標識に対応するユーザーのリングバックトーンに設定するようにするためのものであることが好ましい。   When the conversion command indicates that the user who issues the operation requests to extract audio information from the video information, the application control module specifically specifies the audio information to be in a predetermined format audio. Converting to a file and sending the audio file and the target indicator to a ringback tone service platform so that the ringback tone service platform sets the audio file to the user's ringback tone corresponding to the target indicator. It is preferable that

上記変換命令が、上記操作を発令するユーザーが上記ビデオ情報から一つ又は複数のキーフレームを抽出して、表情画像ファイルを形成するように要求することを示す場合に、応用制御モジュールは、具体的に、上記表情画像ファイルを、上記目標標識に対応するユーザーに対して構築した画像ライブラリに保存し、上記ユーザーの使用に供するようにするためのものであることが好ましい。   When the conversion command indicates that the user issuing the operation requests to extract one or more key frames from the video information to form a facial expression image file, the application control module In particular, the facial expression image file is preferably stored in an image library constructed for the user corresponding to the target sign so as to be used by the user.

マルチメディア情報送信方法であって、
操作を発令するユーザーが送信したビデオ情報選択指令を受信し、
受信した選択指令に従って、放送されるビデオコンテンツから、操作を発令するユーザーの選択したビデオ情報を決定し、
操作を発令するユーザーが送信した、選択したビデオ情報を変換する変換命令を受信し、
受信した変換命令と、決定したビデオ情報とをラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信して、決定したビデオ情報に対して変換命令に従って変換するように要求することを含む。
A multimedia information transmission method comprising:
Receive the video information selection command sent by the user who issues the operation,
According to the received selection command, determine the video information selected by the user issuing the operation from the broadcast video content,
Receive the conversion command to convert the selected video information sent by the user issuing the operation,
Including transmitting the received conversion instructions and the determined video information to a radio and television interactive television network platform to request the determined video information to be converted according to the conversion instructions.

セットトップボックスであって、
操作を発令するユーザーが送信したビデオ情報選択指令と、選択したビデオ情報を変換する変換命令とを受信するための受信モジュールと、
受信モジュールの受信した選択指令に従って、放送するビデオコンテンツから、操作を発令するユーザーの選択したビデオ情報を決定するための決定モジュールと、
受信モジュールの受信した変換命令と、決定モジュールの決定したビデオ情報とをラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信して、決定したビデオ情報を変換命令に従って変換するための送信モジュールとを含む。
A set-top box,
A receiving module for receiving a video information selection command transmitted by a user issuing an operation and a conversion command for converting the selected video information;
A determination module for determining the video information selected by the user issuing the operation from the broadcast video content according to the selection command received by the reception module;
A transmission module for transmitting the received conversion command of the receiving module and the determined video information of the determination module to the radio and television interactive television network platform and converting the determined video information according to the conversion command.

本発明の上記技術案によれば、ユーザーの選択に基づいて関連のマルチメディア情報を変換し、関連のネットワークエレメントに伝送することにより、ユーザーの指示に基づいてユーザーの所望するマルチメディア情報を抽出し、ユーザーが抽出したマルチメディア情報によりサービスの自己定義を行う等に寄与して、サービスのユーザー体験を向上させるとともに、上記技術案はテレビシステムにおける資源の閉鎖性を克服して、テレビシステムにおける大量のマルチメディア資源を掘り起こして利用し、関連の技術的空白を埋めるものである。   According to the above technical solution of the present invention, the multimedia information desired by the user is extracted based on the user's instruction by converting the related multimedia information based on the user's selection and transmitting it to the relevant network element. In addition to improving the user experience of services by contributing to self-definition of services using multimedia information extracted by users, the above technical solution overcomes the resource closure of TV systems, It digs up and uses large amounts of multimedia resources to fill the relevant technical gaps.

本発明の実施例によるマルチメディア情報処理方法のフローチャートである。3 is a flowchart of a multimedia information processing method according to an embodiment of the present invention. 本発明の実施例によるマルチメディア情報処理システムの構成ブロック図である。1 is a configuration block diagram of a multimedia information processing system according to an embodiment of the present invention. FIG. 本発明の実施例による情報処理システムの構成ブロック図である。1 is a configuration block diagram of an information processing system according to an embodiment of the present invention. 本発明の実施例による情報処理システムの具体的な構成ブロック図である。It is a concrete block diagram of the information processing system by the Example of this invention. 本発明の実施例によるセットトップボックスの具体的な構成ブロック図である。It is a concrete block diagram of a set top box according to an embodiment of the present invention. 本発明の実施例1によるテレビ番組を利用して携帯電話の着信メロディを生成する処理システムの具体的な構成ブロック図である。1 is a specific configuration block diagram of a processing system for generating a ringtone of a mobile phone using a TV program according to Embodiment 1 of the present invention. FIG. 本発明の実施例2によるテレビ番組を利用してインスタント通信表情サービスを制作する処理システムの具体的な構成ブロック図である。It is a concrete block diagram of a processing system for producing an instant communication facial expression service using a television program according to Embodiment 2 of the present invention.

現在、マルチメディア変換技術は以下の欠点がある。1.テレビマルチメディア資源が相対的に閉鎖的であり、資源の掘り起こしはハードルが高い。つまり、テレビネットワーク、通信ネットワーク、インターネットが相対的に隔絶するので、ユーザーがテレビにより番組を見て、ビデオレコーダー又はセットトップボックスによりテレビ番組を作製することしかできない。従って、ソースファイルの抽出は、ハードルが高い。2.マルチメディアファイル処理の専門性が高く、ユーザーにとってハードルが高い。つまり、作製したビデオからオーディオ抽出、GIF画像変換、キャプチャ等の操作のいずれも専門のマルチメディア処理のソフトウェアの協同が必要であり、且つユーザーが基本的なマルチメディア知識を持つ必要があり、操作のハードルが高い。3.マルチメディアエレメントが、制作から応用手配までの一連のサービスを欠いている。つまり、マルチメディアエレメントの抽出、変換、アップロード発信まで、ユーザーはそれぞれ異なるプラットフォームで操作せざるを得ず、プロセス全体が非常に煩わしい。   Currently, multimedia conversion technology has the following drawbacks. 1. TV multimedia resources are relatively closed, and digging up resources is a hurdle. That is, since the television network, the communication network, and the Internet are relatively isolated, the user can only watch the program on the television and create the television program on the video recorder or the set-top box. Therefore, extraction of the source file has a high hurdle. 2. High expertise in multimedia file processing, high hurdles for users. In other words, all operations such as audio extraction, GIF image conversion, and capture from the created video require cooperation with specialized multimedia processing software, and the user must have basic multimedia knowledge. The hurdles are high. 3. Multimedia elements lack a range of services from production to application arrangements. In other words, users are forced to operate on different platforms from the extraction, conversion, and upload transmission of multimedia elements, and the entire process is very troublesome.

これに基づいて、本発明の主旨は、インタラクティブテレビネットワークに基づく3スクリーン(携帯電話のスクリーン、テレビのスクリーン、コンピュータのスクリーン)融合サービスの解決方案全体(テレビプラットフォーム、携帯電話プラットフォーム、コンピュータプラットフォームを跨ぐ解決方案であると理解してよい)を提供することであり、テレビ番組からマルチメディアエレメントを抽出し、中間プラットフォーム変換を行い、最後に携帯電話/PCでサービスの発信を実現し、従来のテレビマルチメディア資源が携帯電話/PCプラットフォームへの手配変換の各種のハードルを解消し、テレビマルチメディア情報の閉鎖性を克服した。   Based on this, the gist of the present invention is that the entire three-screen (mobile phone screen, TV screen, computer screen) fusion service solution based on interactive TV network (TV platform, mobile phone platform, computer platform) It can be understood as a solution), extracting multimedia elements from TV programs, converting to an intermediate platform, and finally delivering services on mobile phones / PCs. Multimedia resources have solved various hurdles for arrangement conversion to mobile phone / PC platform and overcame the closure of TV multimedia information.

以下、図面に基づいて、本発明の実施例について詳しく説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は、本発明の実施例によるマルチメディア情報処理方法のフローチャートであり、図1に示すように、当該方法は、以下のステップを含む。
ステップS101、マルチメディア情報処理システムがセットトップボックスからの変換要求を受信し、当該変換要求に操作を発令するユーザーがセットトップボックスを介して選択したビデオ情報、変換命令及び目標標識を付加する。なお、目標標識は、指定ユーザーの端末番号又はインスタント通信番号であってもよく、指定ユーザーが予め設定したニックネーム等であってもよい。
ステップS103、マルチメディア情報処理システムは、変換命令に従って、ビデオ情報を、ユーザーの選択したフォーマットのマルチメディア情報に変換する。
ステップS105、マルチメディア情報処理システムは、マルチメディア情報を目標標識に対応するユーザーに提供する。
FIG. 1 is a flowchart of a multimedia information processing method according to an embodiment of the present invention. As shown in FIG. 1, the method includes the following steps.
In step S101, the multimedia information processing system receives a conversion request from the set top box, and adds video information, a conversion command, and a target indicator selected via the set top box by the user who issues an operation to the conversion request. The target sign may be a designated user's terminal number or instant communication number, or may be a nickname or the like preset by the designated user.
Step S103, the multimedia information processing system converts the video information into multimedia information of a format selected by the user according to the conversion command.
Step S105, the multimedia information processing system provides multimedia information to a user corresponding to the target sign.

上記処理を介して、ユーザーの選択に応じて関連のマルチメディア情報を変換して関連のネットワークエレメントに伝送することにより、ユーザーの指示に従ってユーザーの所望するマルチメディア情報を抽出することができ、ユーザーが抽出したマルチメディア情報を利用してサービスの自己定義等を行うのに寄与し、サービスのユーザー体験を向上する。   Through the above process, by converting related multimedia information according to the user's selection and transmitting it to the relevant network element, it is possible to extract the multimedia information desired by the user according to the user's instructions, It contributes to self-definition of services using multimedia information extracted by, and improves the service user experience.

上記ステップS101において、マルチメディア情報処理システムは、直接にセットトップボックスからの変換要求を受信してもよく、間接にセットトップボックスからの変換要求を受信してもよい。例えば、セットトップボックスは、操作を発令するユーザーの選択したビデオ情報と変換命令とを受信し、ビデオ情報と変換命令とをラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信し、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、セットトップボックスの標識を決定し、予め保存した対応関係に基づいて操作を発令するユーザーに対して複数の標識を表示して、操作を発令するユーザーが複数の標識から目標標識を選択させ、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、ビデオ情報、変換命令、目標標識を変換要求に付加してマルチメディア情報処理システムに送信する。なお、目標標識は一つであってもよく、複数であってもよく、操作を発令するユーザーが必要に応じて選択してもよい。   In step S101, the multimedia information processing system may directly receive a conversion request from the set top box or indirectly receive a conversion request from the set top box. For example, the set top box receives video information and conversion instructions selected by the user issuing the operation, sends the video information and conversion instructions to the radio and television interactive television network platform, and the radio and television interactive television. The network platform determines the sign of the set-top box, displays a plurality of signs to the user who issues an operation based on the correspondence stored in advance, and the user who issues the operation selects the target sign from the multiple signs. Once selected, the radio and television interactive television network platform adds the video information, conversion instructions, and target indicators to the conversion request and transmits them to the multimedia information processing system. The target sign may be one or plural, and may be selected as necessary by the user who issues the operation.

変換命令は、ビデオ情報からオーディオ情報を抽出することを指示するものであってもよく、ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出したキーフレームに基づいてビデオ情報に対応する表情画像ファイルを形成することを指示するものであってもよいが、これに限定されるものではなく、その他の操作を指示するその他の変換命令についても、これと類似して、本発明の保護範囲内である。   The conversion command may be an instruction to extract audio information from the video information, extract one or a plurality of key frames from the video information, and an expression corresponding to the video information based on the extracted key frames. The image file may be instructed to form, but the present invention is not limited to this, and other conversion instructions instructing other operations are similar to the above, and the protection scope of the present invention is similar to this. Is within.

変換命令がビデオ情報からのオーディオ情報の抽出を指示するものである場合に、マルチメディア情報処理システムは、オーディオ情報を、予め定められたフォーマットのオーディオファイルに変換し、オーディオファイルと目標標識とをリングバックトーンサービスプラットフォームに送信し、リングバックトーンサービスプラットフォームは、オーディオファイルを、目標標識に対応するユーザーのリングバックトーンに設定する。なお、予め定められたフォーマットのオーディオファイルとは、リングバックトーンサービスプラットフォーム要求に合致するオーディオフォーマットのオーディオファイルを言う。   When the conversion instruction instructs extraction of audio information from the video information, the multimedia information processing system converts the audio information into an audio file of a predetermined format, and the audio file and the target indicator are converted. Transmit to the ringback tone service platform, which sets the audio file to the user's ringback tone corresponding to the target sign. The audio file having a predetermined format refers to an audio file having an audio format that meets the ring back tone service platform requirements.

変換命令がビデオ情報から一つ又は複数のキーフレームを抽出し、抽出したキーフレームに基づいたビデオ情報に対応する表情画像ファイルの形成を指示するものである場合(ビデオ情報から一つのキーフレームを抽出する場合は、表情画像ファイルが静的表情画像ファイルであり、ビデオ情報から二つ以上のキーフレームを抽出すると、表情画像ファイルが動的表情画像ファイルである)に、マルチメディア情報処理システムは、表情画像ファイルを、目標標識に対応するユーザーに対して構築した画像ライブラリに保存して、ユーザーの使用に供することができる。具体的には、マルチメディア情報処理システムは、表情画像ファイルの平均画素値を算出し、平均画素値を表情画像ファイルのインデックス値とすることができ、マルチメディア情報処理システムは、インデックス値と、表情画像ファイルの名称と、表情画像ファイルとの三者間の対応関係を構築する。なお、表情画像ファイルの名称は、操作を発令するユーザーが変換要求に入力するか、又は目標標識に対応するユーザーが画像ライブラリに登録する際に入力する。   When the conversion command extracts one or more key frames from the video information and instructs the formation of a facial expression image file corresponding to the video information based on the extracted key frames (one key frame from the video information). In the case of extraction, the expression image file is a static expression image file, and when two or more key frames are extracted from video information, the expression image file is a dynamic expression image file). The facial expression image file can be stored in an image library constructed for the user corresponding to the target sign and can be used by the user. Specifically, the multimedia information processing system can calculate an average pixel value of the facial expression image file, and can use the average pixel value as an index value of the facial expression image file. Build a correspondence between the name of the facial expression image file and the facial expression image file. Note that the name of the facial expression image file is input when the user who issues an operation inputs the conversion request or when the user corresponding to the target sign registers in the image library.

図2は、本発明の実施例によるマルチメディア処理システムの構成ブロック図であり、図2に示すように、当該システムは、受信モジュール21と、コーディング処理モジュール22と、応用制御モジュール23とを含み、
受信モジュール21は、セットトップボックスからの変換要求を受信するためのものであり、当該変換要求は、操作を発令するユーザーがセットトップボックスを介して選択したビデオ情報、変換命令及び目標標識を伴って有する。なお、変換命令は、以下の操作の一つを行うものである。即ち、ビデオ情報からオーディオ情報を抽出する操作、及び、ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出したキーフレームに基づいてビデオ情報に対応する表情画像ファイルを形成する操作である。
コーディング処理モジュール22は、変換命令に従って、ビデオ情報をユーザーが選択したフォーマットのマルチメディア情報に変換するためのものである。
応用制御モジュール23は、マルチメディア情報を、目標標識に対応するユーザーに提供するためのものである。
変換命令が操作を発令するユーザーのビデオ情報からのオーディオ情報の抽出の要求を示す場合には、応用制御モジュール23は、具体的に、オーディオ情報を予め定められたフォーマットのオーディオファイルに変換し、オーディオファイルと目標標識とをリングバックトーンサービスプラットフォームに送信し、リングバックトーンサービスプラットフォームがオーディオファイルを目標標識に対応するユーザーのリングバックトーンに設定する。
FIG. 2 is a configuration block diagram of a multimedia processing system according to an embodiment of the present invention. As shown in FIG. 2, the system includes a receiving module 21, a coding processing module 22, and an application control module 23. ,
The receiving module 21 is for receiving a conversion request from the set top box, and the conversion request is accompanied by video information, a conversion command, and a target indicator selected by the user who issues the operation via the set top box. Have. Note that the conversion command performs one of the following operations. That is, an operation of extracting audio information from the video information, and an operation of extracting one or a plurality of key frames from the video information and forming a facial expression image file corresponding to the video information based on the extracted key frames.
The coding processing module 22 is for converting the video information into multimedia information in a format selected by the user in accordance with the conversion command.
The application control module 23 is for providing multimedia information to the user corresponding to the target sign.
When the conversion command indicates a request to extract audio information from the video information of the user who issues the operation, the application control module 23 specifically converts the audio information into an audio file of a predetermined format, The audio file and the target sign are sent to the ringback tone service platform, and the ringback tone service platform sets the audio file to the user's ringback tone corresponding to the target sign.

変換命令が操作を発令するユーザーのビデオ情報から一つ又は複数のキーフレームを抽出して、表情画像ファイルを形成することを要求することを示す場合に、応用制御モジュール23は、具体的に、表情画像ファイルを、目標標識に対応するユーザーに対して構築した画像ライブラリに保存して、ユーザーの使用に供する。   When the conversion command indicates that one or more key frames are extracted from the video information of the user issuing the operation and requests to form a facial expression image file, the application control module 23 specifically specifies: The facial expression image file is stored in an image library constructed for the user corresponding to the target sign and used for the user.

図3は、本発明の実施例による情報処理システムの構成ブロック図であり、図3に示すように、当該システムは、セットトップボックス31、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォーム32、及びマルチメディア情報処理システム33を含み、
セットトップボックス31は、操作を発令するユーザーが選択したビデオ情報の選択指令と選択したビデオ情報に対して変換する変換命令とに基づいて、受信した選択指令に従って放送されたビデオコンテンツにおいて操作を発令するユーザーの選択したビデオ情報を決定し、その後、決定したビデオ情報と変換命令とをラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信し、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに決定したビデオ情報に対して変換命令に従って変換するように要求する。
FIG. 3 is a configuration block diagram of an information processing system according to an embodiment of the present invention. As shown in FIG. 3, the system includes a set-top box 31, a radio and television interactive television network platform 32, and multimedia information. Including a processing system 33;
The set-top box 31 issues an operation on the video content broadcast according to the received selection command based on the selection command of the video information selected by the user who issues the operation and the conversion command to convert the selected video information. Determining the video information selected by the user, and then transmitting the determined video information and conversion instructions to the radio and television interactive television network platform for the video information determined to the radio and television interactive television network platform. Requests conversion according to conversion instructions.

なお、セットトップボックスは、さらに、自身のデバイス標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信し、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームから送信されてきた、当該デバイス標識に基づいて探し出した少なくとも一つのユーザー標識を受信し、その後、受信した複数のユーザー標識を操作を発令するユーザーに提示し、操作を発令するユーザーが提示された複数のユーザー標識から選択した少なくとも一つの目標標識を受信し、受信した目標標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信して、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに、ビデオ情報を変換命令に従って変換したマルチメディア情報を、上記目標標識に対応するユーザーに提供するように指示する。   The set-top box further transmits its device indicator to the radio and television interactive TV network platform, and at least one of the devices detected based on the device indicator transmitted from the radio and television interactive TV network platform. Receiving one user indicator, then presenting the received plurality of user indicators to the user issuing the operation, receiving at least one target indicator selected from the plurality of user indicators presented by the user issuing the operation, Send the received target sign to the radio and television interactive television network platform to convert the video information to the radio and television interactive television network platform Multimedia information converted according to decree an instruction to provide users corresponding to the target label.

ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォーム32は、セットトップボックスの標識を決定し、予め保存された対応関係に基づいて操作を発令するユーザーに複数の標識を表示して、操作を発令するユーザーに複数の標識から目標標識を選択させ、ビデオ情報、変換命令及び目標標識をマルチメディア情報処理システムに送信する。
マルチメディア情報処理システム33は、ビデオ情報、変換命令及び目標標識を受信し、変換命令に従ってビデオ情報をユーザーによって選択されたフォーマットのマルチメディア情報に変換し、マルチメディア情報を、目標標識に対応するユーザーに提供する。
The radio and television interactive television network platform 32 determines the sign of the set-top box, displays a plurality of signs to the user who issues an operation based on the correspondence stored in advance, and gives the user who issues the operation a plurality of signs. The target sign is selected from the signs, and the video information, the conversion command, and the target sign are transmitted to the multimedia information processing system.
The multimedia information processing system 33 receives the video information, the conversion command, and the target indicator, converts the video information into multimedia information in a format selected by the user according to the conversion command, and corresponds the multimedia information to the target indicator. Provide to users.

本発明は、従来のラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォーム及び電気通信事業者のリングバックトーンサービスプラットフォームをもとに、その両者をドッキングするマルチメディア情報の個人化制作プラットフォーム(即ち、上記のマルチメディア処理システム)を導入することにより、テレビ、携帯電話、コンピュータの3つのスクリーンを跨ぐマルチメディア変換サービスを実現する。図4は、本発明の実施例による情報処理システムの具体的構成ブロック図であり、図4に示すように、デジタルセットトップボックスと、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームと、マルチメディア情報個人化制作プラットフォームと、リングバックトーンサービスプラットフォームとを含む。   The present invention is based on a conventional radio and television interactive television network platform and a telecommunications carrier's ringback tone service platform, and a multimedia information personalization production platform that docks both (ie, the above-mentioned multimedia By introducing a processing system, a multimedia conversion service across three screens of a television, a mobile phone, and a computer is realized. FIG. 4 is a block diagram illustrating a specific configuration of an information processing system according to an embodiment of the present invention. As illustrated in FIG. 4, a digital set-top box, a radio and television interactive television network platform, and multimedia information personalization are illustrated. Includes production platform and ringback tone service platform.

デジタルセットトップボックス(テレビ側インタラクティブデバイス)は、ユーザーがテレビビデオを検索、抽出する指令を収集して、放送するビデオコンテンツからユーザーの選択したビデオ情報を抽出し、その後、抽出したビデオ情報と、受信した、ビデオ情報を変換する変換指令とを、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームへ伝送するためのものである。
なお、セットトップボックスは、さらに、自身のデバイス標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信し、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームから送信されてきた、当該デバイス標識に基づいて探し出された少なくとも一つのユーザー標識を受信し、その後、受信した複数のユーザー標識を操作を発令するユーザーに提示し、操作を発令するユーザーが提示された複数のユーザー標識から選択した少なくとも一つの目標標識を受信し、受信した目標標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信して、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームがビデオ情報を変換命令に従って変換したマルチメディア情報を、上記目標標識に対応するユーザーに提供するように指示する。
The digital set-top box (TV-side interactive device) collects instructions for users to search and extract TV videos, extracts user-selected video information from the broadcast video content, and then extracts the extracted video information, The received conversion command for converting the video information is transmitted to the radio and television interactive television network platform.
The set-top box further transmitted its device indicator to the radio and television interactive television network platform, and was found based on the device indicator transmitted from the radio and television interactive television network platform. Receive at least one user sign, then present the received multiple user signs to the user issuing the operation and receive at least one target sign selected from the multiple user signs presented by the user issuing the operation And sends the received target sign to the radio and television interactive television network platform, which converts the video information Multimedia information converted according to decree an instruction to provide users corresponding to the target label.

ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、デジタルテレビセットトップボックスを介してユーザーへインタラクティブテレビサービスを提供するとともに、セットトップボックスが送信したビデオ変換指令(オーディオ/ビデオ/画像を抽出することを明示する)、及び対応するマルチメディア情報の区間をマルチメディア情報個人化制作プラットフォームに伝達するためのものである。   The radio and television interactive television network platform provides interactive television services to users via a digital television set-top box and specifies that the video conversion commands (audio / video / image extraction) transmitted by the set-top box are extracted. ) And corresponding multimedia information sections to the multimedia information personalization production platform.

マルチメディア情報個人化制作プラットフォームは、応用制御/ウェブサーバー、ストリートメディアコーディング処理サーバー及びマルチメディアデータベースを含む。   The multimedia information personalization production platform includes an application control / web server, a street media coding processing server, and a multimedia database.

なお、応用制御/ウェブサーバー(当該サーバーが上記の受信モジュール21と応用制御モジュール23機能を有する)は、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームからのビデオ変換指令及びマルチメディア情報区間を受信し、ストリートメディアコーディング処理サーバーに伝送して処理を行い、またマルチメディアデータベース資源と協調して、電気通信事業者のリングバックトーンサービスプラットフォームへリングバックトーン作品をアップロードし、さらに、テレビDIY表情、着信メロディウェブ管理ポータルを提供し、ユーザーへテレビDIY表情のダウンロード及び着信メロディの推薦を提供するためのものである。   The application control / web server (which has the functions of the reception module 21 and the application control module 23) receives the video conversion command and the multimedia information section from the radio and television interactive TV network platform, and Transmit to the media coding processing server for processing, and in cooperation with multimedia database resources, upload ring back tone works to the telecommunications carrier's ring back tone service platform, and also provide TV DIY expressions, incoming melody web A management portal is provided to provide users with downloads of TV DIY expressions and recommendation of ringtones.

ストリートメディアコーディング処理サーバー(上記のコーディング処理モジュール22に対応する)について、当該サーバーはシステムの変換コアであり、ラジオ及びテレビジョンインタラクティブテレビプラットフォームから伝達されてきたビデオストリームに対して、以下の処理を行なうためのものである。即ち、ビデオストリームからオーディオストリームを抽出して、電気通信事業者リングバックトーンサービスプラットフォームの要求に合致する着信メロディのフォーマットに変換し、又は、ビデオストリームからキーフレームを抽出してGIF表情画像に変換し、変換したファイルをマルチメディアデータベースへ伝送して保存し、受信した画像ファイルは、当該サーバーは変換せずに、そのままマルチメディアデータベースへ伝送して保存する。   Regarding the street media coding processing server (corresponding to the coding processing module 22 described above), the server is a conversion core of the system, and the following processing is performed on the video stream transmitted from the radio and television interactive television platform. It is for doing. That is, the audio stream is extracted from the video stream and converted into a ringtone melody format that meets the requirements of the telecommunications carrier ringback tone service platform, or keyframes are extracted from the video stream and converted into a GIF facial expression image. Then, the converted file is transmitted to the multimedia database and stored, and the received image file is transmitted to the multimedia database and stored without being converted by the server.

マルチメディアデータベースは、着信メロディ、表情及び画像ファイルを記憶して応用制御/ウェブサーバーによる呼び出に供するためのものである。上記の画像ライブラリは、当該マルチメディアデータベース中に設置されてもよい。   The multimedia database is used for storing incoming melody, facial expression and image file for application control / calling by a web server. The image library may be installed in the multimedia database.

リングバックトーンサービスプラットフォームは、第三者のプラットフォームからのリングバックトーンファイルを受信して、事業者に審査されて配布され、コール接続中に、ユーザーの設定に応じてリングバックトーン放送を挿入する。   The ringback tone service platform receives the ringback tone file from the third party platform, is reviewed and distributed to the operator, and inserts the ringback tone broadcast according to the user's settings during the call connection .

図5は本発明の実施例によるセットトップボックスの構成ブロック図であり、受信モジュールと、決定モジュールと、送信モジュールとを含む。
受信モジュールは、操作を発令するユーザーの送信したビデオ情報選択指令、及び選択したビデオ情報を変換する変換指令を受信するためのものである。
決定モジュールは、受信モジュールの受信した選択指令に従って放送されたビデオコンテンツから操作を発令するユーザーの選択したビデオ情報を決定するためのものである。
送信モジュールは、受信モジュールの受信した変換命令と決定モジュールの決定したビデオ情報とをラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信し、決定したビデオ情報に対して変換命令に従って変換を行うように要求するためのものである。
FIG. 5 is a block diagram of a set top box according to an embodiment of the present invention, which includes a receiving module, a determining module, and a transmitting module.
The receiving module is for receiving a video information selection command transmitted by a user who issues an operation and a conversion command for converting the selected video information.
The determination module is for determining video information selected by the user who issues an operation from the video content broadcast according to the selection command received by the reception module.
The transmission module transmits the conversion command received by the reception module and the video information determined by the determination module to the radio and television interactive television network platform, and requests the determined video information to be converted according to the conversion command. Is for.

なお、本発明の実施例において、ここでのセットトップボックスの送信モジュールは、さらに、セットトップボックスのデバイス標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信するたものである。
上記受信モジュールは、さらに、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームから送信されてきた、上記送信モジュールの送信したデバイス標識に基づいて探し出された少なくとも一つのユーザー標識を受信するたものである。
上記のセットトップボックスは、受信モジュールの受信した複数のユーザー標識を操作を発令するユーザーに提示するための提示モジュールをさらに含む。
上記受信モジュールは、さらに、操作を発令するユーザーが提示モジュールの提示している複数のユーザー標識から選択した少なくとも一つの目標標識を受信するためのものである。
上記送信モジュールは、さらに、受信モジュールの受信した目標標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信し、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに、ビデオ情報を変換命令に従って変換された取得されたマルチメディア情報を、上記目標標識に対応するユーザーに提供するように指示するためのものである。
In the embodiment of the present invention, the transmission module of the set top box here further transmits the device indicator of the set top box to the radio and television interactive television network platform.
The reception module further receives at least one user indicator transmitted from the radio and television interactive television network platform and found based on the device indicator transmitted by the transmission module.
The set top box further includes a presentation module for presenting a plurality of user indicators received by the receiving module to a user who issues an operation.
The receiving module is further for receiving at least one target sign selected from a plurality of user signs presented by the presentation module by a user who issues an operation.
The transmission module further transmits the target indicator received by the reception module to the radio and television interactive television network platform, and the acquired multi-channel information obtained by converting the video information according to the conversion command to the radio and television interactive television network platform. It is for instructing to provide the media information to the user corresponding to the target sign.

以下、テレビマルチメディアコンテンツの3スクリーン融合変換サービスについて詳細に説明する。   Hereinafter, the television multimedia content three-screen fusion conversion service will be described in detail.

実施例1
以下、図6を参照して、テレビ番組により携帯電話着信メロディを形成するサービスフローを例として、本発明、即ち、テレビビデオソースから快速にリングバックトーンメロディーの抽出を詳細に説明する。
Example 1
Hereinafter, the present invention, that is, extraction of a ringback tone melody from a television video source, will be described in detail with reference to FIG. 6, taking as an example a service flow for forming a mobile phone ring melody by a TV program.

ステップ1:ユーザーA(即ち、上記記載の操作を発令するユーザー)がリモコン(又は他の選択ツール)を用いて、セットトップボックスを介して番組区間(即ち、上記のビデオ情報)、変換命令及びユーザー標識(即ち、上記の目標標識)を選択し、当該変換命令は、ビデオ情報からのオーディオ情報の抽出を指示するためのものであり、この場合に、ユーザーAは、セットトップボックスを介してラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームへリングバックトーン変換要求を発令する。具体的には、本ステップにおいて、ユーザーAは、まず、リモコンを用いて、セットトップボックス(例えば、セットトップボックスa)を介して番組区間と変換命令とを選択し、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームが当該番組区間と変換命令とを受信すると、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、要求を発令したセットトップボックス(例えば、セットトップボックスa)のデバイスIDに基づいて当該ユーザーの家庭IDを照会して、ユーザーの家庭構成員及び/又は関連構成員(例えば、当該家庭ユーザーの友達)のユーザー標識(例えば、携帯電話番号、インスタント通信番号、ニックネーム等)を取得し、取得した複数のユーザー標識をセットトップボックスに戻して、テレビスクリーンに表示し、ユーザーが当該複数のユーザー標識から目標標識(ユーザーは、表示されている標識から一つ又は複数の目標標識を指定することができる)を指定し、セットトップボックスは、当該指定した目標標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに戻す。   Step 1: User A (that is, the user who issues the operation described above) uses a remote control (or other selection tool) to set a program section (that is, the above video information), a conversion command, The user sign (ie, the target sign described above) is selected, and the conversion instruction is for instructing the extraction of audio information from the video information. In this case, the user A passes through the set top box. Issue ringback tone conversion request to radio and television interactive television network platform. Specifically, in this step, the user A first selects a program section and a conversion command via a set top box (for example, the set top box a) using a remote controller, and performs radio and television interactive television. When the network platform receives the program section and the conversion command, the radio and television interactive television network platform determines the home ID of the user based on the device ID of the set top box (eg, set top box a) that issued the request. To obtain a user indicator (eg, mobile phone number, instant communication number, nickname, etc.) of the user's household member and / or related member (eg, a friend of the household user) Set user indicator Return to the top box and display it on the TV screen, and the user specifies the target sign from the multiple user signs (the user can specify one or more target signs from the displayed sign) The set top box returns the designated target sign to the radio and television interactive television network platform.

なお、ユーザー標識は、ユーザーごとの唯一の標識であり、具体的には、マルチメディア情報個人化制作プラットフォームは、各家庭に一つの家庭IDを配分し、一つの家庭IDが、当該家庭のセットトップボックスデバイスIDと、家庭構成員の携帯電話番号と一対多の対応関係を形成することができる。つまり、一つの家庭IDが、複数のセットトップボックスデバイスIDと複数の家庭構成員(関連構成員を含んでもよい)のユーザー標識に対応することができる。   The user sign is the only sign for each user. Specifically, the multimedia information personalization production platform allocates one home ID to each home, and one home ID is a set of the home. A one-to-many correspondence can be formed between the top box device ID and the mobile phone number of the household member. That is, one home ID can correspond to a plurality of set-top box device IDs and user indicators of a plurality of home members (which may include related members).

ステップ2:ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、リングバックトーン変換要求をマルチメディア情報個人化制作プラットフォームに送信し、即ち、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、上記変換命令、目標標識及びビデオ区間(即ち、上記の番組区間)を、マルチメディア情報個人化制作プラットフォームに送信する。   Step 2: The radio and television interactive television network platform sends a ringback tone conversion request to the multimedia information personalization production platform, i.e., the radio and television interactive television network platform sends the conversion instruction, target sign and video. The section (that is, the above program section) is transmitted to the multimedia information personalization production platform.

ステップ3:マルチメディア情報個人化制作プラットフォームの応用制御サーバーは、リングバックトーン変換要求を受信して、変換命令、とビデオ区間とを、ストリートメディアコーディング処理サーバーに送信する。   Step 3: The application control server of the multimedia information personalization production platform receives the ringback tone conversion request and transmits the conversion command and the video section to the street media coding processing server.

ステップ4:ストリートメディアコーディング処理サーバーは、上記ビデオ区間を処理して、ビデオストリームからオーディオストリームを抽出して、リングバックトーンサービスプラットフォームが認識可能なオーディオファイルを形成した後に、当該オーディオファイルをマルチメディアデータベースに伝送し、マルチメディアデータベースが当該オーディオファイルを記憶する。   Step 4: The street media coding processing server processes the video segment to extract an audio stream from the video stream to form an audio file that can be recognized by the ringback tone service platform, and then converts the audio file to multimedia. The multimedia database stores the audio file.

ステップ5:応用制御サーバーは、マルチメディアデータベースに対して、その前に形成したオーディオファイルの取得を要求する。   Step 5: The application control server requests the multimedia database to obtain a previously formed audio file.

ステップ6:マルチメディアデータベースは、オーディオファイルを、応用制御サーバーに伝送する。   Step 6: The multimedia database transmits the audio file to the application control server.

ステップ7:応用制御サーバーは、オーディオファイルを電気通信事業者のリングバックトーンサービスプラットフォームにアップロードし、審査を経て(例えば、当該オーディオファイルが適法なものであるかどうかを審査する)、審査が通った後に、応用制御サーバーは、リングバックトーンサービスプラットフォームに設置要求を発令し、上記オーディオファイルを、目標標識に対応するユーザーのリングバックトーンに設定する。   Step 7: The application control server uploads the audio file to the telecommunications carrier's ringback tone service platform, undergoes a review (eg, examines whether the audio file is legitimate), and the review passes. Thereafter, the application control server issues an installation request to the ringback tone service platform, and sets the audio file to the user's ringback tone corresponding to the target sign.

例えば、ユーザーAが上記過程によりユーザーBに新しいリングバックトーンを設定する。この場合に、発呼側がユーザーBに電話をかけ、電話トラフィック接続過程が開始されると、モバイルネットワークエレメントが、リングバックトーンサービスプラットフォームにリングバックトーン放送を要求し、リングバックトーンサービスプラットフォームが接続過程でリングバックトーン放送を挿入し、発呼側には、ユーザーAが上記過程によりユーザーBに設定したリングバックトーンが聞こえる。   For example, user A sets a new ringback tone for user B through the above process. In this case, when the calling party calls user B and the telephone traffic connection process is started, the mobile network element requests the ringback tone broadcast from the ringback tone service platform, and the ringback tone service platform connects. A ringback tone broadcast is inserted in the process, and the calling party hears the ringback tone set by the user A in the process B for the user B.

実施例2
以下、図7を参照して、テレビ番組によりインスタント通信表情サービスを制作するサービスフローを例として、本発明、即ち、テレビビデオソースからのインスタントチャット表情の抽出を詳細に説明する。
Example 2
Hereinafter, the present invention, that is, the extraction of an instant chat expression from a TV video source, will be described in detail with reference to FIG. 7, taking as an example a service flow for creating an instant communication expression service by a TV program.

ステップ1:ユーザーA(即ち、上記記載の操作を発令するユーザー)がリモコン(又は他の選択ツール)を用いて、セットトップボックスを介して番組区間(即ち、上記のビデオ情報)、変換命令及びユーザー標識(即ち、上記の目標標識)を選択し、当該変換命令は、ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出したキーフレームに基づいたビデオ情報に対応する表情画像ファイルの形成を指示するためのものであり、この場合に、ユーザーAがセットトップボックスを介してラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに表情変換要求を発令することができる。具体的には、当該ステップにおいて、ユーザーAは、まず、リモコンを用いて、セットトップボックス(例えば、セットトップボックスa)を介して番組区間と変換命令とを選択し、そして、ユーザーが生成待ちの画像ファイルにつけた名称を入力することができ、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームが当該番組区間と変換命令とを受信する(ユーザーが生成待ちの画像ファイルにつけた画像名称を入力すると、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームが当該画像名称を受信する)と、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、要求を発令したセットトップボックス(例えば、セットトップボックスa)のデバイスIDに応じて当該ユーザーの家庭IDを照会して、ユーザー家庭構成員及び/又は関連構成員(例えば、当該家庭ユーザーの友達)のユーザー標識(例えば、携帯電話番号、インスタント通信番号、ニックネーム等)を取得し、取得した複数のユーザー標識を、セットトップボックスに戻して、テレビスクリーン上に表示し、その後、ユーザーは当該複数のユーザー標識から目標標識を指定でき(ユーザーが一つ又は複数の目標標識を指定することができる)、セットトップボックスは、当該指定した目標標識を、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに戻す。
同様に、上記ユーザー標識は、ユーザーごとの唯一の標識であり、マルチメディア情報個人化制作プラットフォームは、各家庭に一つの家庭IDを配分でき、一つの家庭IDが、当該家庭セットトップボックスデバイスIDと家庭構成の員携帯電話番号と一対多の対応を形成し、一つの家庭IDが複数のセットトップボックスデバイスIDと複数の家庭構成員(関連構成員を含んでもよい)のユーザー標識とに対応することができる。
Step 1: User A (that is, the user who issues the operation described above) uses a remote control (or other selection tool) to set a program section (that is, the above video information), a conversion command, The user sign (ie, the target sign described above) is selected, and the conversion command extracts one or more key frames from the video information and forms a facial expression image file corresponding to the video information based on the extracted key frames. In this case, the user A can issue a facial expression conversion request to the radio and television interactive television network platform via the set top box. Specifically, in this step, the user A first selects a program section and a conversion command via a set top box (for example, the set top box a) using a remote controller, and the user waits for generation. The radio and television interactive television network platform receives the program section and the conversion command. The television interactive television network platform receives the image name), and the radio and television interactive television network platform is the device of the set top box (eg, set top box a) that issued the request. The user ID of the user's home member and / or related member (eg, a friend of the home user) (eg, mobile phone number, instant communication number, nickname, etc.) The acquired multiple user signs are returned to the set-top box and displayed on the TV screen, after which the user can specify a target sign from the multiple user signs (the user can specify one or more target signs) The set-top box returns the designated target sign to the radio and television interactive television network platform.
Similarly, the user indicator is the only indicator for each user, and the multimedia information personalization production platform can allocate one home ID to each home, and one home ID is the home set top box device ID. And one-to-many correspondence with the mobile phone number of the member of the home configuration, and one home ID corresponds to a plurality of set-top box device IDs and a user indicator of a plurality of home members (which may include related members) be able to.

ステップ2:ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、表情変換要求をマルチメディア情報個人化制作プラットフォームに送信する。即ち、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームは、上記変換命令、目標標識及びビデオ区間(即ち、上記の番組区間)(ユーザーAの入力した画像名称付加可能がある)を、マルチメディア情報個人化制作プラットフォームに送信する。   Step 2: The radio and television interactive television network platform sends a facial expression conversion request to the multimedia information personalization production platform. In other words, the radio and television interactive television network platform is used to personalize the multimedia information for the conversion command, the target sign, and the video section (that is, the program section) (the image name input by the user A can be added). Send to platform.

ステップ3:マルチメディア情報個人化制作プラットフォームの応用制御サーバーが表情変換要求を受信して、変換命令とビデオ区間とを、ストリートメディアコーディング処理サーバーに送信する。   Step 3: The application control server of the multimedia information personalization production platform receives the expression conversion request, and transmits the conversion command and the video section to the street media coding processing server.

ステップ4:ストリートメディアコーディング処理サーバーは、上記ビデオ区間を処理し、ビデオストリームから一つ又は複数のキーフレームを抽出し、画像ファイル(例えば、GIFフォーマットの画像ファイル)(即ち、上記の表情画像ファイル)を生成し、当該画像ファイルをマルチメディアデータベースに送信して記憶し(ユーザーAが画像名称を入力すると、当該画像ファイルと当該画像名称とが対応関係を有する)、マルチメディアデータベースは、画像ファイルを、目標標識に対応するユーザーに対して構築した画像ライブラリに保存し、マルチメディアデータベースは、表情テキストの記述に従ってインデックスを記憶する。記憶フローは以下の通りである。即ち、画像ファイルの平均画素値を算出して、表情インデックス値とし、当該表情インデックス値に基づいて、画像ファイル及び記述キーワード(即ち、上記記載の画像名称)をマルチメディアデータベースに保存する。即ち、表情インデックス値と、画像ファイルと、記述キーワードとの対応関係を形成する。   Step 4: The street media coding processing server processes the video section, extracts one or more key frames from the video stream, and outputs an image file (for example, an image file in GIF format) (ie, the expression image file described above). The image file is transmitted to and stored in the multimedia database (when the user A inputs the image name, the image file and the image name have a corresponding relationship), and the multimedia database Is stored in an image library constructed for the user corresponding to the target sign, and the multimedia database stores the index according to the description of the facial expression text. The storage flow is as follows. That is, the average pixel value of the image file is calculated as an expression index value, and based on the expression index value, the image file and the description keyword (that is, the image name described above) are stored in the multimedia database. That is, a correspondence relationship between the expression index value, the image file, and the description keyword is formed.

ユーザーAが上記ステップ1とステップ4によりユーザーBのために画像ファイルを選択すると、ユーザーBは、ウェブサーバーを介してマルチメディア情報個人化制作プラットフォームのマルチメディアデータベースにアクセスし、自分の画像ライブラリにおける画像ファイルを調べ、当該画像ファイルに画像名称をつけることができ、また、ユーザーBは、キーワード又はインデックス値を入力することにより、マルチメディアデータベースに画像ファイルを照会する操作を発令することができ、マルチメディアデータベースは、キーワードのファジーマッチング結果又は表情インデックス値の精確なマッチング結果に基づいて、ウェブサーバーに表情ファイルグループを戻す。また、ネットワーク側にPCインスタントチャットクライアントとユーザーBの画像ライブラリとの対応関係を設定することができ、PCインスタントチャットクライアントは、サービスバックグラウンドに画像ライブラリにおける画像ファイルのダウンロードをリモート要求し、要求情報はユーザーチャットの状況に応じて関連の画像ファイルを戻すことができ、ウェブサーバーは、さらに、PCインスタントチャットクライアントに表情ファイルグループを送信し、当該表情ファイルの数が一つより大きい場合には、ユーザーは、その中の一つ又は複数を選択してローカル記憶することができる。   When user A selects an image file for user B in steps 1 and 4 above, user B accesses the multimedia database of the multimedia information personalization production platform via the web server and stores it in his image library. The image file can be examined and an image name can be given to the image file, and the user B can issue an operation for inquiring the image file to the multimedia database by inputting a keyword or an index value. The multimedia database returns the facial expression file group to the web server based on the keyword fuzzy matching result or the precise matching result of the facial expression index value. Also, the correspondence between the PC instant chat client and the image library of the user B can be set on the network side, and the PC instant chat client remotely requests the service background to download the image file in the image library, and the request information Can return related image files according to the user chat situation, and the web server further sends a facial expression file group to the PC instant chat client, and if the number of facial expression files is greater than one, The user can select one or more of them and store them locally.

本発明による上記技術案は、現有の複数のプラットフォーム(テレビシステム、コンピュータシステム、モバイル通信システム)に存在しているデータギャップを跨いで、現在テレビ番組ソースから携帯電話リングバックトーンやPCインスタント通信の表情を抽出して生成する技術及びユーザーのハードルを有効に解消した。現在の解決方案が大量の専門技術及び知識ストックを要し、ユーザーハードルが高く、且つ一定のサービスフローが欠如していることに比べて、本発明は、ワンキー式、ワンストップの操作ユーザーインターフェースを実現し、閉鎖しているテレビビデオ資源を十分に掘り起こすために、優れた技術及びサービスプラットフォームの基盤を築いた。   The above technical solution according to the present invention crosses the data gap existing in a plurality of existing platforms (TV system, computer system, mobile communication system), and from the current TV program source to the mobile phone ringback tone and PC instant communication. The technology to extract and generate facial expressions and the user's hurdles were effectively eliminated. Compared with current solutions requiring a large amount of expertise and knowledge stock, high user hurdles and lack of a certain service flow, the present invention provides a one-key, one-stop operation user interface. In order to fully exploit the closed and closed TV video resources, it has laid the foundation for an excellent technology and service platform.

図2、図3及び図4は、前の方法に対応するシステムであり、システムの作動過程及び作動原理は、方法部分で詳細に記述した。ここでは再度説明しない。方法の相当する部分の記述を参照すればよい。   2, 3 and 4 are systems corresponding to the previous method, and the operating process and operating principle of the system are described in detail in the method part. It will not be described again here. Reference may be made to the description of the corresponding part of the method.

以上説明したように、本発明の上記技術案により、ユーザーの選択に基づいて関連のマルチメディア情報を変換して関連のネットワークエレメントに伝送することにより、ユーザーの指示に基づいてユーザーの所望するマルチメディア情報を抽出することができ、ユーザーが抽出したマルチメディア情報によりサービスの自己定義等を行うことに寄与し、サービスのユーザー体験を向上する。また、本発明の技術案は、テレビシステムにおける資源の閉鎖性を克服して、テレビシステムにおける大量のマルチメディア資源を掘り起こして利用し、関連の技術の空白を埋める。   As described above, according to the above technical solution of the present invention, the related multimedia information is converted on the basis of the user's selection and transmitted to the related network element. Media information can be extracted, and the user's experience of the service is improved by contributing to self-definition of the service by the multimedia information extracted by the user. Also, the technical solution of the present invention overcomes the resource closure in the television system, digs up and uses a large amount of multimedia resources in the television system, and fills the gaps in related technologies.

以上の説明は、本発明の好適な実施例に過ぎず、本発明を限定するものではなく、本発明の精神と原則で行う各種の修正、均等置換、改善等は、本発明の保護範囲内に含まれる。   The above description is only a preferred embodiment of the present invention, and is not intended to limit the present invention. Various modifications, equivalent replacements, improvements, etc. made in the spirit and principle of the present invention are within the protection scope of the present invention. include.

当業者は、本発明の実施例が方法、システム、又はコンピュータプログラム製品として提供されることを理解すべきである。従って、本発明は、全体的なハードウェア実施例、全体的なソフトウェア実施例、ソフトウェアとハードウェアを組合せた実施例の形式を採用することができる。そして、本発明は、一つ又は複数の、コンピュータに使用可能なプログラムコードを含むコンピュータ記憶可能な媒体(磁気ディスクメモリ、CD−ROM、光学メモリ等を含むが、これに限定されない)で実施されるコンピュータプログラム製品の形式を採用することができる。   Those skilled in the art should appreciate that embodiments of the present invention are provided as methods, systems, or computer program products. Accordingly, the present invention can adopt the form of an overall hardware embodiment, an overall software embodiment, or an embodiment combining software and hardware. The present invention is implemented on one or more computer-storable media (including but not limited to magnetic disk memory, CD-ROM, optical memory, etc.) containing computer-usable program code. The format of the computer program product can be adopted.

本発明は、本発明の実施例による方法、デバイス(システム)、コンピュータプログラム製品のフローチャート及び/又はブロック図を参照して記述する。コンピュータプログラム指令により、フローチャート及び/又はブロック図における各フロー及び/又はブロック、フローチャート及び/又はブロック図におけるフロー及び/又はブロックの組み合わせが実現されることを理解すべきである。これらのコンピュータプログラム指令を、汎用コンピュータ、専用コンピュータ、組み込みプロセッサー、又は他のプログラマブルデータ処理デバイスのプロセッサーに提供すると、一つの機器を生じることができ、コンピュータ又は他のプログラマブルデータ処理デバイスのプロセッサーで実行した指令が、フローチャートの一つのフロー又は複数のフロー及び/又はブロック図の一つのブロック又は複数のブロックで指定した機能を実現する装置を生させることができる。   The present invention is described with reference to flowchart illustrations and / or block diagrams of methods, devices (systems), computer program products according to embodiments of the invention. It should be understood that each flow and / or block in the flowcharts and / or block diagrams, and combinations of flows and / or blocks in the flowcharts and / or block diagrams are implemented by computer program instructions. Providing these computer program instructions to a general purpose computer, special purpose computer, embedded processor, or processor of another programmable data processing device can result in one piece of equipment running on the computer or other programmable data processing device processor The command may cause a device that realizes a function specified by one or more flows in the flowchart and / or one block or more blocks in the block diagram.

これらのコンピュータプログラム指令は、コンピュータ又は他のプログラマブルデータ処理デバイスが特定の方式で作動するように案内することができるコンピュータ読み取り可能なメモリに記憶され、当該コンピュータ読み取り可能なメモリに記憶された指令が指令装置を含む製品を生じるようにしてもよく、当該指令装置は、フローチャートの一つのフロー又は複数のフロー及び/又はブロック図の一つのブロック又は複数のブロックで指定した機能を実現する。   These computer program instructions are stored in a computer readable memory that can guide a computer or other programmable data processing device to operate in a particular manner, and the instructions stored in the computer readable memory are stored in the computer readable instructions. A product including a command device may be generated, and the command device implements a function specified by one or more flows in the flowchart and / or one or more blocks in the block diagram.

これらのコンピュータプログラム指令は、コンピュータ又は他のプログラマブルデータ処理デバイスにロードし、コンピュータ又は他のプログラマブルデバイスで一連の操作ステップを実行するようにしてコンピュータの実現する処理を生じさせることにより、コンピュータ又は他のプログラマブルデバイスで実行される指令が、フローチャートの一つのフロー又は複数のフロー及び/又はブロック図の一つのブロック又は複数のブロックで指定した機能を実現するためのステップを提供することもできる。   These computer program instructions can be loaded into a computer or other programmable data processing device, causing the computer or other programmable device to perform a series of operational steps, resulting in a computer-implemented process. The instructions executed by the programmable device may also provide steps for implementing the function specified in one or more flows of the flowchart and / or one or more blocks of the block diagram.

本発明の好適な実施例を記述したが、当業者は基本的な進歩性の概念を了解すると、これらの実施例に対して他の変更と修正を行うことができる。従って、請求項は、好適実施例及び本発明範囲内にある全ての変更と修正とを含むものとして解釈されることを意図する。   Although preferred embodiments of the present invention have been described, those skilled in the art will be able to make other changes and modifications to these embodiments once they understand the basic inventive concept. Accordingly, the claims are intended to be construed as including the preferred embodiment and all changes and modifications that fall within the scope of the invention.

当業者は、本発明の実施例の精神と範囲を逸脱せず、本発明の実施例に対して各種変更及び変形を行ってもよい。このように、本発明の実施例の修正及び変形が本発明の請求項及び均等技術の範囲に属する場合、本発明は、この変更及び変形を含むことも意図する。   Those skilled in the art may make various changes and modifications to the embodiments of the present invention without departing from the spirit and scope of the embodiments of the present invention. Thus, when modifications and variations of the embodiments of the present invention fall within the scope of the claims of the present invention and equivalent technology, the present invention is also intended to include these changes and variations.

Claims (9)

情報処理システムであって、
操作を発令するユーザーの選択したビデオ情報と変換命令とを、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信するためのセットトップボックスと、
上記セットトップボックスの標識を決定し、上記セットトップボックスの標識に基づいて目標標識を決定し、上記ビデオ情報、上記変換命令及び上記目標標識をマルチメディア情報処理システムに送信するための上記ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームと、
上記ビデオ情報、上記変換命令及び上記目標標識を受信し、上記変換命令に従って上記ビデオ情報を、上記ユーザーにより選択されたフォーマットのマルチメディア情報に変換し、上記マルチメディア情報を、上記目標標識に対応するユーザーに提供するための上記マルチメディア情報処理システムと、を含み、
上記した、上記セットトップボックスの標識に基づいて目標標識を決定する操作は、
上記セットトップボックスの標識に基づいて、予め保存された対応関係により上記操作を発令するユーザーに複数の標識を表示して、上記操作を発令するユーザーに上記複数の標識から上記目標標識を選択させることを含むことを特徴とする情報処理システム。
An information processing system,
A set-top box for transmitting the video information and conversion instructions selected by the user issuing the operation to the radio and television interactive television network platform;
A radio for determining a sign of the set-top box, determining a target sign based on the sign of the set-top box, and transmitting the video information, the conversion command, and the target sign to a multimedia information processing system; A television interactive television network platform,
The video information, the conversion command and the target indicator are received, and the video information is converted into multimedia information in a format selected by the user according to the conversion command, and the multimedia information corresponds to the target indicator. and the multi-media information processing system to be provided to the user that, the only free,
As described above, the operation for determining the target sign based on the sign of the set top box is as follows.
Based on the sign of the set top box, a plurality of signs are displayed to a user who issues the operation according to a correspondence stored in advance, and the user who issues the operation selects the target sign from the plurality of signs. An information processing system characterized by including
上記マルチメディア情報処理システムが上記変換命令に従って上記ビデオ情報を上記ユーザーにより選択されたフォーマットのマルチメディア情報に変換し、上記マルチメディア情報を、上記目標標識に対応するユーザーに提供することは、具体的には 、
上記ビデオ情報からオーディオ情報を抽出して予め定められたフォーマットのオーディオファイルに変換し、上記オーディオファイルと上記目標標識とをリングバックトーンサービスプラットフォームに送信して、上記リングバックトーンサービスプラットフォームが上記オーディオファイルを上記目標標識に対応するユーザーのリングバックトーンに設定するようにするか、又は
上記ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出した上記キーフレームに基づいて上記ビデオ情報に対応する表情画像ファイルを形成し、上記表情画像ファイルを、上記目標標識に対応するユーザーに対して構築した画像ライブラリに保存して、上記ユーザーの使用に供することを含むことを特徴とする請求項1に記載の情報処理システム。
The multimedia information processing system converts the video information into multimedia information in a format selected by the user according to the conversion command, and provides the multimedia information to a user corresponding to the target indicator. In particular,
Audio information is extracted from the video information, converted into an audio file of a predetermined format, the audio file and the target indicator are transmitted to a ringback tone service platform, and the ringback tone service platform transmits the audio information. Set the file to the user's ringback tone corresponding to the target indicator, or extract one or more keyframes from the video information and support the video information based on the extracted keyframes The method further comprises: forming a facial expression image file to be stored, and storing the facial expression image file in an image library constructed for a user corresponding to the target sign for use by the user. Information processing system described in 1.
マルチメディア情報処理方法であって、
セットトップボックスからの変換要求を受信し、当該変換要求に、操作を発令するユーザーが上記セットトップボックスを介して選択したビデオ情報、変換命令及び目標標識を付加し、
上記変換命令に従って、上記ビデオ情報を上記ユーザーにより選択されたフォーマットのマルチメディア情報に変換し、
上記マルチメディア情報を、上記目標標識に対応するユーザーに提供することを含み、
上記変換命令は、
上記ビデオ情報からオーディオ情報を抽出して予め定められたフォーマットのオーディオファイルに変換する操作、及び
上記ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出した上記キーフレームに基づいて上記ビデオ情報に対応する表情画像ファイルを形成する操作のうちの、少なくとも一つを行うように指示するためのものであり、
上記変換命令は上記操作を発令するユーザーが上記ビデオ情報からオーディオ情報を抽出するように要求することを示す場合に、上記マルチメディア情報を上記目標標識に対応するユーザーに提供する処理過程は、
上記オーディオ情報を予め定められたフォーマットのオーディオファイルに変換し、上記オーディオファイルと上記目標標識とをリングバックトーンサービスプラットフォームに送信して、上記リングバックトーンサービスプラットフォームが上記オーディオファイルを上記目標標識に対応するユーザーのリングバックトーンに設定するようにすることを含むことを特徴とするマルチメディア情報処理方法。
A multimedia information processing method comprising:
The conversion request from the set top box is received, and the video information, the conversion instruction and the target indicator selected via the set top box by the user who issues the operation are added to the conversion request.
According to the conversion instruction, the video information is converted into multimedia information in a format selected by the user,
The multi-media information, see including that provided to the user corresponding to the target label,
The above conversion instruction is
An operation of extracting audio information from the video information and converting it to an audio file of a predetermined format; and
Instructing to perform at least one of operations for extracting one or more key frames from the video information and forming a facial expression image file corresponding to the video information based on the extracted key frames. And
When the conversion command indicates that the user issuing the operation requests to extract audio information from the video information, the process of providing the multimedia information to the user corresponding to the target indicator is:
The audio information is converted into an audio file of a predetermined format, the audio file and the target indicator are transmitted to a ringback tone service platform, and the ringback tone service platform converts the audio file into the target indicator. A multimedia information processing method comprising: setting a ringback tone of a corresponding user .
上記変換命令は上記操作を発令するユーザーが上記ビデオ情報から一つ又は複数のキーフレームを抽出して、表情画像ファイルを形成するように要求することを示す場合には、上記マルチメディア情報を上記目標標識に対応するユーザーに提供する処理は、
上記表情画像ファイルを、上記目標標識に対応するユーザーに対して構築した画像ライブラリに保存して、上記ユーザーの使用に供することを含むことを特徴とする請求項に記載のマルチメディア情報処理方法。
If the conversion command indicates that the user issuing the operation requests to extract one or more key frames from the video information and form a facial expression image file, the multimedia information is The processing provided to the user corresponding to the target sign is
4. The multimedia information processing method according to claim 3 , further comprising storing the facial expression image file in an image library constructed for a user corresponding to the target sign and using the facial expression image file. .
上記表情画像ファイルを、上記目標標識に対応するユーザーに対して構築した画像ライブラリに保存する処理過程は、
上記表情画像ファイルの平均画素値を算出し、上記平均画素値を上記表情画像ファイルのインデックス値とし、
上記インデックス値と、上記表情画像ファイルの名称と、上記表情画像ファイルとの三者の対応関係を構築することを含むことを特徴とする請求項に記載のマルチメディア情報処理方法。
The process of saving the facial expression image file in an image library constructed for the user corresponding to the target sign is as follows:
An average pixel value of the facial expression image file is calculated, and the average pixel value is set as an index value of the facial expression image file.
5. The multimedia information processing method according to claim 4 , further comprising constructing a three-way correspondence between the index value, the name of the facial expression image file, and the facial expression image file.
マルチメディア情報処理システムであって、
セットトップボックスからの、操作を発令するユーザーが上記セットトップボックスにより選択したビデオ情報、変換命令及び目標標識を伴って有する変換要求を受信するための受信モジュールと、
上記変換命令に従って、上記ビデオ情報を、上記ユーザーよりに選択されたフォーマットのマルチメディア情報に変換するためのコーディング処理モジュールと、
上記マルチメディア情報を、上記目標標識に対応するユーザーに提供するための応用制御モジュールとを含み、
上記変換命令は、
上記ビデオ情報からオーディオ情報を抽出して予め定められたフォーマットのオーディオファイルに変換する操作、及び
上記ビデオ情報から一つ又は複数のキーフレームを抽出し、抽出した上記キーフレームに基づいて上記ビデオ情報に対応する表情画像ファイルを形成する操作のうちの少なくとも一つを行うことを指示するためのものであり、
上記変換命令は上記操作を発令するユーザーが上記ビデオ情報からのオーディオ情報の抽出の要求を示す場合に、応用制御モジュールは、具体的に、上記オーディオ情報を予め定められたフォーマットのオーディオファイルに変換するとともに、上記オーディオファイルと上記目標標識とをリングバックトーンサービスプラットフォームに送信して、上記リングバックトーンサービスプラットフォームが上記オーディオファイルを上記目標標識に対応するユーザーのリングバックトーンに設定するようにすることを特徴とするマルチメディア情報処理システム。
A multimedia information processing system,
A receiving module for receiving from the set-top box a conversion request having the video information selected by the set-top box by the user issuing the operation, the conversion command, and the target indicator;
A coding processing module for converting the video information into multimedia information in a format selected by the user according to the conversion instruction;
The multimedia information, and application control module for providing a user corresponding to the target label seen including,
The above conversion instruction is
An operation of extracting audio information from the video information and converting it to an audio file of a predetermined format; and
Extracting one or more key frames from the video information and instructing to perform at least one of operations for forming a facial expression image file corresponding to the video information based on the extracted key frames Is,
When the user who issues the operation indicates a request to extract audio information from the video information, the application control module specifically converts the audio information into an audio file of a predetermined format. And transmitting the audio file and the target indicator to a ringback tone service platform so that the ringback tone service platform sets the audio file to the user's ringback tone corresponding to the target indicator. A multimedia information processing system characterized by this.
上記変換命令は上記操作を発令するユーザーが上記ビデオ情報から一つ又は複数のキーフレームを抽出して、表情画像ファイルを形成するように要求することを示す場合に、応用制御モジュールは、具体的に、上記表情画像ファイルを、上記目標標識に対応するユーザーに対して構築した画像ライブラリに保存し、上記ユーザーの使用に供することを特徴とする請求項に記載のマルチメディア情報処理システム。 If the conversion command indicates that the user issuing the operation requests to extract one or more key frames from the video information and form a facial expression image file, the application control module shall 7. The multimedia information processing system according to claim 6 , wherein the facial expression image file is stored in an image library constructed for a user corresponding to the target sign and used for the user. マルチメディア情報送信方法であって、
操作を発令するユーザーが送信したビデオ情報選択指令を受信し、
受信した選択指令に従って、放送するビデオコンテンツから操作を発令するユーザーの選択したビデオ情報を決定し、
操作を発令するユーザーが送信した、選択されたビデオ情報を変換する変換命令を受信し、
受信した変換命令と、決定したビデオ情報とをラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信して、決定したビデオ情報に対して変換命令に従って変換するよう要求することを含み、
操作を発令するユーザーの使用するセットトップボックスのデバイス標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信し、
ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームが送信した、上記セットトップボックスのデバイス標識に基づいて探し出された少なくとも一つのユーザー標識を受信し、
受信した複数のユーザー標識を、操作を発令するユーザーに提示し、
操作を発令するユーザーが、提示された複数のユーザー標識から選択した少なくとも一つの目標標識を受信し、
受信した目標標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信して、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームがビデオ情報を変換命令に従って変換したマルチメディア情報を、上記目標標識に対応するユーザーに提供するように指示することを、さらに含むことを特徴とするマルチメディア情報送信方法。
A multimedia information transmission method comprising:
Receive the video information selection command sent by the user who issues the operation,
In accordance with the received selection command, determine the video information selected by the user issuing the operation from the broadcast video content,
Receive a conversion command to convert the selected video information sent by the user issuing the operation,
A received conversion command, determined by sending the video information in radio and television interactive TV network platform, seen including that required to convert in accordance with the conversion instruction to the determined video information,
Send device signs of set-top boxes used by users who issue operations to radio and television interactive television network platforms,
Receiving at least one user sign transmitted based on the device sign of the set top box transmitted by the radio and television interactive television network platform;
Present multiple received user signs to the user issuing the operation,
The user issuing the operation receives at least one target sign selected from the plurality of presented user signs,
The received target sign is transmitted to the radio and television interactive television network platform, and the multimedia information obtained by converting the video information according to the conversion command by the radio and television interactive television network platform is provided to a user corresponding to the target sign. The multimedia information transmitting method , further comprising: instructing
セットトップボックスであって、
操作を発令するユーザーが送信したビデオ情報選択指令と、選択したビデオ情報を変換する変換命令とを受信するための受信モジュールと、
受信モジュールの受信した選択指令に従って、放送するビデオコンテンツから、操作を発令するユーザーの選択したビデオ情報を決定するための決定モジュールと、
受信モジュールの受信した変換命令と、決定モジュールの決定したビデオ情報とをラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信して、決定したビデオ情報を変換命令に従って変換するように要求するための送信モジュールとを含み、
上記送信モジュールは、さらに、上記セットトップボックスのデバイス標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信するためのものであり、
上記受信モジュールは、さらに、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームが送信した、上記送信モジュールの送信したデバイス標識に基づいて探し出された少なくとも一つのユーザー標識を受信するためのものであり、
上記セットトップボックスは、受信モジュールの受信した複数のユーザー標識を、操作を発令するユーザーに提示するためのものであり、
上記受信モジュールは、さらに、操作を発令するユーザーが提示モジュールにより提示された複数のユーザー標識から選択した少なくとも一つの目標標識を受信するためのものであり、
上記送信モジュールは、受信モジュールの受信した目標標識をラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームに送信して、ラジオ及びテレビジョンインタラクティブテレビネットワークプラットフォームがビデオ情報を変換命令に従って変換したマルチメディア情報を、上記目標標識に対応するユーザーに提供するように指示するためのものであることを特徴とするセットトップボックス。
A set-top box,
A receiving module for receiving a video information selection command transmitted by a user issuing an operation and a conversion command for converting the selected video information;
A determination module for determining the video information selected by the user issuing the operation from the broadcast video content according to the selection command received by the reception module;
A transmission module for transmitting the received conversion instructions received by the reception module and the video information determined by the determination module to a radio and television interactive television network platform and requesting the determined video information to be converted according to the conversion instructions; only including,
The transmission module is further for transmitting the device indicator of the set top box to a radio and television interactive television network platform,
The receiving module is further for receiving at least one user indicator transmitted by the radio and television interactive television network platform and located based on the transmitted device indicator of the transmitting module;
The set top box is for presenting a plurality of user signs received by the receiving module to a user who issues an operation.
The receiving module is further for receiving at least one target sign selected from a plurality of user signs presented by the presentation module by a user who issues an operation,
The transmission module transmits the target indicator received by the reception module to the radio and television interactive television network platform, and the multimedia information obtained by the radio and television interactive television network platform converting the video information according to the conversion command is transmitted to the target information. A set-top box for instructing a user corresponding to a sign to provide it .
JP2013543516A 2010-12-16 2011-12-16 Information processing system, multimedia information processing method and system Active JP5844816B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201010590867.9A CN102547432B (en) 2010-12-16 2010-12-16 Information processing system, method for processing multimedia information and system
CN201010590867.9 2010-12-16
PCT/CN2011/084122 WO2012079533A1 (en) 2010-12-16 2011-12-16 Information processing system, and multimedia information processing method and system

Publications (2)

Publication Number Publication Date
JP2014504091A JP2014504091A (en) 2014-02-13
JP5844816B2 true JP5844816B2 (en) 2016-01-20

Family

ID=46244119

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013543516A Active JP5844816B2 (en) 2010-12-16 2011-12-16 Information processing system, multimedia information processing method and system

Country Status (4)

Country Link
JP (1) JP5844816B2 (en)
KR (1) KR101814154B1 (en)
CN (1) CN102547432B (en)
WO (1) WO2012079533A1 (en)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014139068A1 (en) * 2013-03-11 2014-09-18 华为终端有限公司 Television signal processing method and device
CN104038774B (en) * 2014-06-30 2017-09-26 北京奇艺世纪科技有限公司 Generate the method and device of ring signal file
CN104038773B (en) * 2014-06-30 2017-08-25 北京奇艺世纪科技有限公司 Generate the method and device of ring signal file
CN104079948B (en) * 2014-06-30 2017-09-29 北京奇艺世纪科技有限公司 Generate the method and device of ring signal file
CN104540022A (en) * 2014-11-12 2015-04-22 科大讯飞股份有限公司 Color ring setting method and system based on television running information and software assistant
CN104361891A (en) * 2014-11-17 2015-02-18 科大讯飞股份有限公司 Method and system for automatically checking customized polyphonic ringtones of specific population
CN105992172B (en) * 2015-02-12 2020-01-14 Oppo广东移动通信有限公司 Ringtone processing method, server, mobile terminal and system
CN104866116A (en) * 2015-03-25 2015-08-26 百度在线网络技术(北京)有限公司 Method and device for outputting expression information
CN106331068B (en) * 2016-08-15 2019-08-20 中国联合网络通信集团有限公司 Remote resource sharing method and resource sharing platform
CN110069758B (en) * 2018-01-19 2024-05-31 北京搜狗科技发展有限公司 Method, device and storage medium for publishing multimedia information
CN111031183A (en) * 2019-11-18 2020-04-17 咪咕文化科技有限公司 Color ring back tone playing method, electronic equipment and storage medium
CN113365108A (en) * 2021-05-26 2021-09-07 联通沃音乐文化有限公司 Audio and video transcoding system and method based on color ring back tone

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW463503B (en) * 1998-08-26 2001-11-11 United Video Properties Inc Television chat system
JP4352653B2 (en) * 2002-04-12 2009-10-28 三菱電機株式会社 Video content management system
JP2005101927A (en) * 2003-09-25 2005-04-14 Ntt Data Corp Communication service providing device
KR20050046509A (en) * 2003-11-14 2005-05-18 민정기 System and method for ring back tone of wire & wireless phone by real-time based program of radio and television
CN100531360C (en) * 2004-08-18 2009-08-19 华为技术有限公司 Set-top box system with multimedia communication function
KR20060082185A (en) * 2005-01-11 2006-07-18 에스케이 텔레콤주식회사 Broadcasting ring-back tone/image providing apparatus, broadcasting ring-back tone/image service system and method thereof using it
JP2006295586A (en) * 2005-04-12 2006-10-26 Hitachi Ltd Content conversion apparatus and transcoding system
CN100366088C (en) * 2005-05-13 2008-01-30 北京中星微电子有限公司 System for mobile terminal receiving multimedia content, method and apparatus thereof
CN1870742A (en) * 2005-05-28 2006-11-29 华为技术有限公司 Format conversion method of multimedia data
CN100471114C (en) * 2005-07-01 2009-03-18 萧学文 Method and system for accessing computer resource through mobile terminal
JP4464894B2 (en) * 2005-09-09 2010-05-19 オリンパスメディカルシステムズ株式会社 Image display device
JP2008205992A (en) * 2007-02-22 2008-09-04 Ntt Docomo Inc System and method for setting ringback tone
CN101388780A (en) * 2007-09-12 2009-03-18 英华达(南京)科技有限公司 System and method for sharing cabled digital program by mobile communication devices
US8453185B2 (en) * 2008-12-08 2013-05-28 Echostar Global B.V. Data transmission from a set-top box
JP2010171679A (en) * 2009-01-22 2010-08-05 Keio Gijuku Server device in advertisement melody distribution system
CN101505408B (en) * 2009-03-06 2011-04-20 深圳市融创天下科技发展有限公司 Remote video accessing system and method
CN101527690B (en) * 2009-04-13 2012-03-21 腾讯科技(北京)有限公司 Method for intercepting dynamic image, system and device thereof
CN101909048B (en) * 2009-12-08 2013-03-06 新奥特(北京)视频技术有限公司 Centralized trans-coding treatment method and device

Also Published As

Publication number Publication date
WO2012079533A1 (en) 2012-06-21
KR101814154B1 (en) 2018-01-02
CN102547432B (en) 2015-07-29
KR20140032982A (en) 2014-03-17
JP2014504091A (en) 2014-02-13
CN102547432A (en) 2012-07-04

Similar Documents

Publication Publication Date Title
JP5844816B2 (en) Information processing system, multimedia information processing method and system
CN109963162B (en) Cloud directing system and live broadcast processing method and device
CN100589552C (en) System and method for transmitting multimedia message in network television system
CN101938710B (en) Method and device for multi-screen service notification and interaction in communication system
US9712590B2 (en) Method and device for transmitting streaming media
KR101249014B1 (en) Media resource system and media resource providing method
CN110650255B (en) Method and device for editing color ring back tone, color ring back tone editing unit and storage medium
CN103414921B (en) A kind of method for building up of distributed IPTV multi-terminal video service switchover
CN107517411B (en) Video playing method based on GSstreamer frame
KR20090108500A (en) Appratus for providing interactive service in ubiquitous environment
CN101895834A (en) Method for producing and distributing contents of wireless multimedia system
CN101296369A (en) Video system and video broadcasting method
CN102065340B (en) System and method for implementing multimedia synchronous interaction
CN103354563A (en) Method of customizing EPG (electronic program guide) interface based on Internet television client and apparatus thereof
CN101621667B (en) Video providing method and system, and network device
CN102137287A (en) Television system capable of providing three-screen seamless fusion service
JP2011523253A (en) Internet protocol television (IPTV) service providing method and internet broadcast system therefor
CN102123320A (en) Information sending and receiving method and system based on bidirectional digital television network
CN111869225B (en) Information processing apparatus, information processing method, and non-transitory computer readable storage medium
Zimmermann Adaption of multimedia E-Learning services to mobile environments
CN112637676B (en) Multimedia file processing method, system, communication device and readable storage medium
KR20160087225A (en) System for cloud streaming service, method of image cloud streaming service to provide a multi-view screen, and apparatus for the same
CN106330667A (en) WeChat postcard generation method and system
CN104079948A (en) Ring file generating method and device
CN116744040A (en) Method and system for displaying dynamic user data in real time by EPG (electronic program guide) based on communication network

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140922

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150701

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151001

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151023

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151119

R150 Certificate of patent or registration of utility model

Ref document number: 5844816

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250