Nothing Special   »   [go: up one dir, main page]

WO2012081469A1 - 画像処理装置 - Google Patents

画像処理装置 Download PDF

Info

Publication number
WO2012081469A1
WO2012081469A1 PCT/JP2011/078305 JP2011078305W WO2012081469A1 WO 2012081469 A1 WO2012081469 A1 WO 2012081469A1 JP 2011078305 W JP2011078305 W JP 2011078305W WO 2012081469 A1 WO2012081469 A1 WO 2012081469A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
signal
processing apparatus
image processing
image data
Prior art date
Application number
PCT/JP2011/078305
Other languages
English (en)
French (fr)
Inventor
浩 竹下
Original Assignee
株式会社Jvcケンウッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Jvcケンウッド filed Critical 株式会社Jvcケンウッド
Priority to CN201180059562.8A priority Critical patent/CN103262555B/zh
Priority to EP11848775.0A priority patent/EP2654306A4/en
Publication of WO2012081469A1 publication Critical patent/WO2012081469A1/ja
Priority to US13/905,862 priority patent/US20130302013A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/87Regeneration of colour television signals
    • H04N9/8715Regeneration of colour television signals involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/261Image signal generators with monoscopic-to-stereoscopic image conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/356Image reproducers having separate monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/007Aspects relating to detection of stereoscopic image format, e.g. for adaptation to the display format

Definitions

  • the present invention relates to an image processing apparatus having a function of converting a 2D image into a pseudo 3D image.
  • Any 2D image signal can be processed into a pseudo 3D image and displayed on a display device by using the above pseudo stereoscopic image generation device.
  • the content source of the image signal may be one that is distributed by television broadcasting or the Internet, or one that is supplied on a recording medium such as a DVD.
  • the pseudo-stereoscopic image generation apparatus may be any one of those image signals. It is a device that can also be applied to.
  • Package media such as DVDs often contain the title logo of the content holder and a copyright protection warning message at the beginning. This is intended to prevent content infringements such as illegal copying by asserting content ownership by presenting an image such as an alert message to the viewer of the content.
  • an image such as an alert message
  • the display image is a superimposed image of the right eye image and the left eye image.
  • a device for enabling the viewer himself to perform a stereoscopic view for example,
  • the viewed image is a double image in which the right-eye image and the left-eye image are overlapped, which makes it difficult to normally view.
  • the 2D-3D conversion function hinders normal display of content ownership claims and warnings of copyright infringement acts such as illegal copying, which are intended by the content holder.
  • the present invention provides an image processing apparatus for appropriately controlling the enabling / disabling of 2D-3D conversion without intentional operation by the viewer, thereby allowing messages from content holders to be transmitted.
  • the purpose is to present it to the viewer as intended by the content holder.
  • Subtitle information is often added to package media content such as DVDs.
  • subtitle information is not added in the portion where the title logo of the above-mentioned content holder and a copyright warning message are recorded. The reason for this is that when subtitles are displayed superimposed on the content screen, the content holder will obscure the screen that the user wants to present to the user, and the user will not be able to view the message from the content holder normally. Because the content holder does not want it.
  • the playback process does not depend on the intention of the content holder regardless of the content viewer's intention or voluntary operation.
  • a predetermined message is displayed for the viewer for the time desired by the content holder.
  • This control function is defined by the DVD standard, etc., and the manufacturer of the DVD playback device is obliged to manufacture a product with a specification conforming to this standard. A viewer who views the content inevitably views the message from the content holder.
  • the function for restricting the playback operation of the package media is realized by the navigation command in the DVD standard, for example.
  • the DVD playback device monitors the navigation data stored accompanying the content data when reproducing the disc content data, and restricts the playback operation by the user according to the convention. Since this operation restriction can be controlled in accordance with the content scene, it is possible to restrict the reproduction operation by the user only to the scene intended by the content holder.
  • Subtitles are additional information included in image content, and are implemented for users to view them, and are not intended for other uses.
  • the navigation command is defined to limit the user's playback operation, and is not assumed to be applied to other uses and has no application record.
  • a playback operation restriction signal which is a signal representing a playback operation restriction in navigation command information originally included to restrict a user's playback operation, included in image data such as a DVD playback signal, or a simple content. It is intended to be applied to control of validation / invalidation of the 2D-3D conversion function, which is a use different from that originally assumed, based on a caption information signal indicating presence / absence of caption, which is additional information. .
  • the navigation command information and the presence / absence information of the subtitles are used to perform the 2D-3D conversion without the intentional operation by the viewer.
  • an image processing apparatus generates a reproduction operation restriction signal indicating reproduction operation restriction of image data based on data added to the image data.
  • a reproduction operation restriction signal generation unit (12) for generating and a 2D-3D converter (15) for converting image data into a pseudo 3D image are provided.
  • the 2D-3D converter (15) controls the validation and invalidation of the operation for converting the image data from the 2D image to the pseudo 3D image based on the reproduction operation restriction signal.
  • the image processing apparatus further includes a caption information signal generation unit (15) that generates a caption information signal indicating the presence or absence of captions based on data added to the image data. You may prepare.
  • the 2D-3D converter controls the validation and invalidation of the operation of converting the image data from the 2D image to the pseudo 3D image based on the caption information signal in addition to the reproduction operation restriction signal.
  • a reproduction operation restriction signal which is a signal representing reproduction operation restriction in navigation command information included in image data such as a DVD reproduction signal, and a caption information signal representing the presence or absence of captions
  • FIG. 1 is a block diagram showing a basic configuration used in an image processing apparatus according to each embodiment of the present invention.
  • FIG. 2 is a block configuration diagram illustrating an example in which the image processing apparatus according to the first embodiment is applied to a DVD reproducing apparatus.
  • FIG. 3 is a diagram for explaining the operation of the image processing apparatus according to the first embodiment.
  • FIG. 4 is an image processing apparatus according to the second embodiment and is a block configuration diagram illustrating an example where the image processing apparatus of the present invention is applied to a DVD playback apparatus.
  • FIG. 5 is a block diagram illustrating an example in which the image processing apparatus according to the third embodiment is applied to a system in which a DVD playback apparatus and a 2D-3D conversion apparatus are separated.
  • FIG. 6 is a block diagram illustrating an example in which the image processing apparatus according to the fourth embodiment is applied to a system in which a DVD playback apparatus and a 2D-3D conversion apparatus are separated.
  • the DVD playback signal 11 is input to a decoder 12 having a function of reading subtitle information and navigation command information included in the DVD playback signal 11. Then, the decoder 12 generates a subtitle information signal 18 indicating the presence / absence of subtitles and a reproduction operation restriction signal 13 which is a signal representing the reproduction operation restriction in the navigation command information, based on the input DVD reproduction signal 11. Output. That is, the decoder 12 functions as a reproduction operation restriction signal generation unit and a caption information signal generation unit.
  • An image signal 14 obtained by decoding the DVD playback signal 11 by some means is input to a 2D-3D converter 15. Then, the 2D-3D converter 15 generates and outputs a left pseudo stereoscopic image signal 16 and a right pseudo stereoscopic image signal 17.
  • the caption information signal 18 and the reproduction operation restriction signal 13 are input to the 2D-3D converter 15, and at least one of the caption information signal 18 and the reproduction operation restriction signal 13 enables / disables the 2D-3D conversion function. It is used to perform control to switch between the two.
  • the image processing apparatus is applied to a DVD playback apparatus 20 having a DVD playback function and a function of converting a playback image on a DVD into a pseudo 3D image.
  • the image signal 14 is encoded and recorded on the reproduced DVD.
  • the DVD reproduction signal 11 output from the DVD signal reading device 21 is input to the decoder 12, decoded into an image signal 14, and output.
  • the output image signal 14 is input to a 2D-3D converter 15 that converts a non-stereo (2D) image into a pseudo-stereo (3D) image.
  • the 2D-3D converter 15 generates and outputs a left pseudo stereoscopic image signal 16 and a right pseudo stereoscopic image signal 17.
  • the two pseudo stereoscopic image signals 16 and 17 are input to the 3D display converter 28, converted to a 3D image format signal 29 that is a signal format for transmission to the stereoscopic display device 30, and output from the DVD playback device 20. .
  • the output 3D image format signal 29 is input to the stereoscopic display device 30 and stereoscopically displayed.
  • the viewer 31 who views the stereoscopic display device 30 takes a 2D image signal recorded on the DVD as a pseudo 3D by using a viewing method adapted to the stereoscopic display device 30, for example, by wearing stereoscopic glasses. Can be viewed with images.
  • the decoder 12 outputs a caption information signal 18 indicating the presence / absence of captions, and a reproduction operation restriction signal 13 which is a signal representing the reproduction operation restriction in the navigation command information. This signal is input to the 2D-3D converter 15.
  • the 2D-3D control signal 33 is a signal for controlling the enabling / disabling of 2D-3D conversion by a user operation.
  • the 2D-3D conversion operation performed by the 2D-3D converter 15 is controlled to be enabled / disabled by a logical operation based on the caption information signal 18, the reproduction operation restriction signal 13, and the 2D-3D control signal 33.
  • the conversion operation is configured to be enabled / disabled.
  • Fig. 3 shows the control method for enabling / disabling 2D-3D conversion in this device.
  • the first row in FIG. 3 represents a DVD playback signal, and shows a portion where the content holder does not intend to restrict the user playback operation and a portion which is a message from the content holder and intends to restrict the user playback operation.
  • the second row in FIG. 3 is a signal indicating the presence / absence of subtitle information accompanying the DVD playback signal, where the solid line portion indicates no subtitle and the broken line portion indicates subtitle.
  • the third row in FIG. 3 is a signal indicating the reproduction operation restriction in the navigation command information accompanying the DVD reproduction signal.
  • the solid line part indicates no reproduction restriction and the broken line part indicates reproduction restriction.
  • the 3 is a signal for controlling the validation / invalidation of 2D-3D conversion by a user operation, and the low (L) level period indicates a period instructing invalidation of 2D-3D conversion.
  • the high (H) level period represents a period instructing the validation of 2D-3D conversion.
  • the fifth row in FIG. 3 represents the validation / invalidation period of the 2D-3D converter, and represents the validity period of the 2D-3D converter and the invalid period of the 2D-3D converter.
  • the 2D-3D conversion is invalidated. Controlled automatically as is done.
  • the caption information signal 18 and the playback operation restriction signal 13 are output from the decoder 12, and the 2D-3D control signal 33 is output from the 2D-3D converter 15.
  • An example in which the logical operation is performed is shown. However, for example, this logical operation may be performed inside the decoder 12 and only the resulting signal for switching the control of 2D-3D conversion may be input to the 2D-3D converter 15.
  • the 2D-3D control signal 33 is directly input to the decoder 12, and a caption information signal indicating the presence / absence of a caption detected inside the decoder 12 and A logical operation is performed with a reproduction operation restriction signal, which is a signal representing the reproduction operation restriction in the navigation command information detected inside the decoder 12.
  • the decoder 12 outputs a 2D-3D conversion control switching signal (reference signal) 19 that is the result of the logical operation. That is, the decoder 12 functions as a reproduction operation restriction signal generation unit, a caption information signal generation unit, and a reference signal generation unit. Only the 2D-3D conversion control switching signal 19 is input to the 2D-3D converter 15, and only this signal controls the validation / invalidation of the 2D-3D conversion.
  • examples of the DVD playback devices 20 and 20a in which the DVD playback function and the function of converting the playback image into a pseudo 3D image are included in the same housing are shown.
  • the system is separated into a DVD playback device 20b having a DVD playback function and a 2D-3D conversion device 34 having a function of converting a playback image into a pseudo 3D image. explain.
  • the caption information signal 18 and the playback operation restriction signal 13 are input to the 2D-3D conversion device 34 through independent transmission paths.
  • the validation / invalidation of the 2D-3D conversion operation performed by the 2D-3D conversion device 34 is performed in the same manner as in the first and second embodiments.
  • the 2D-3D control signal 33, the caption information signal 18, and the reproduction operation restriction are performed. It is controlled by the result of the logical operation with the signal 13.
  • the image signal 14, the caption information signal 18, and the reproduction operation restriction signal 13 are transmitted from the DVD reproduction apparatus 20b to the 2D-3D conversion apparatus 34 through independent paths.
  • the fourth embodiment a case where the image signal 14, the caption information signal 18, and the reproduction operation restriction signal 13 are transmitted in a superimposed manner will be described with reference to FIG.
  • a Vendor in a CEC (Consumer Electronics Control) command defined in the HDMI (High-Definition Multimedia Interface) transmission standard is used as an example of a means for superimposing the image signal 14 and the reproduction operation restriction signal 13.
  • CEC Consumer Electronics Control
  • HDMI High-Definition Multimedia Interface
  • Vendor Specific Commands (CEC 13.9) is open to manufacturers of products with an image transmission function compatible with the HDMI standard, and Vendor Specific Commands (CEC 13.9) Data can be transmitted.
  • the function of transmitting the playback operation restriction signal 13 is implemented by Vendor Specific Command (CEC 13.9).
  • CEC 13.9 a function of taking out the reproduction operation restriction signal 13 transmitted by Vendor Specific Commands (CEC 13.9) is implemented.
  • the reproduction operation restriction signal 13 and the reproduction operation restriction signal 13 together with the image signal 14 can be transmitted via the HDMI transmission path 35 between the DVD reproduction apparatus 20c and the 2D-3D conversion apparatus 34a. Therefore, automatic switching between enabling / disabling of 2D-3D conversion can be realized without increasing a new transmission line as in the third embodiment even in a system in which both are separated.
  • the image signal 14, the caption information signal 18, and the reproduction operation restriction signal 13 are transmitted from the DVD reproduction apparatus 20 c to the 2D-3D conversion apparatus 34 a as one HDMI transmission path 35. It was shown that it was transmitted superimposed on.
  • a signal (reference signal) corresponding to the 2D-3D conversion control switching signal 19 in FIG. 4 is generated from at least one of the caption information signal 18 and the playback operation restriction signal 13 in the DVD playback device 20c.
  • the DVD playback device 20c functions as an image playback device, a playback operation restriction signal generator, a caption information signal generator, and a reference signal generator.
  • a signal (reference signal) corresponding to the generated 2D-3D conversion control switching signal 19 is superimposed and transmitted on one HDMI transmission path 35 together with the image signal 14.
  • the two signal lines of the caption information signal 18 and the reproduction operation restriction signal 13 in FIG. 6 correspond to the 2D-3D conversion control switching signal 19 as shown in FIG. It is the same as the one replaced with the signal line of the book.
  • the image processing apparatus can automatically enable / disable 2D-3D conversion control as intended by the content holder without user operation.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

 画像処理装置は、画像データに付加されているデータを基に画像データの再生操作制限を表す再生操作制限信号を生成する再生操作制限信号生成部(12)と、画像データを擬似3D画像に変換する2D-3D変換器(15)とを備える。2D-3D変換器(15)は、再生操作制限信号を基に、画像データを2D画像から擬似3D画像に変換する動作の有効化と無効化を制御する。

Description

画像処理装置
 本発明は、2D画像を疑似3D画像に変換する機能を有する画像処理装置に関する。
 非立体(2D)画像を疑似立体(3D)画像に変換する機能(2D-3D変換機能)を有する画像処理装置として、特許文献1に記載の疑似立体画像生成装置が知られている。
 また、特許文献1に記載の疑似立体画像生成装置に関して、公知となっている適用事例としては、業務用3Dイメージプロセッサ「IF-2D3D1」(日本ビクター株式会社)が知られている。
 これら上記の疑似立体画像生成装置を用いることにより、あらゆる2D画像信号を擬似3D画像に加工し、表示装置に表示することが可能である。
 画像信号のコンテンツソースとしては、テレビ放送やインターネットなどで配信されるものや、DVDなどの記録媒体で供給されるものなどが考えられるが、上記疑似立体画像生成装置は、それらのいずれの画像信号にも適応可能な装置である。
 しかしながら、コンテンツの種別によっては、社会の一般通念上、擬似3D画像への変換がふさわしくないケースもある。その一例を以下に挙げる。
 DVDなどのパッケージメディアでは、多くはその冒頭部分に、コンテンツホルダーのタイトルロゴ、及び著作権保護の注意喚起メッセージなどが収録されている。これは、コンテンツの視聴者に注意喚起メッセージなどの画像を提示することにより、コンテンツの所有権を主張したり、違法コピーなどの著作権侵害行為を抑止することを目的としている。しかしながら、このような注意喚起メッセージなどの画像を擬似3D画像に変換し、表示装置に表示した場合、表示画像は右目用の画像と左目用の画像が重畳されたものとなる。この場合、例えば、表示装置が立体視機能を有しないものであったり、あるいは、表示装置が立体視機能を有する場合であっても、視聴者自身が立体視を可能にするための装置、例えば立体視メガネなどを装着せずにコンテンツを視聴した場合は、視聴される画像は右目用画像と左目用画像が重なった2重画像となり、正常な視聴が困難な画像となる。このため、2D-3D変換機能は、コンテンツホルダーの意図するところである、コンテンツの所有権主張や、違法コピーなどの著作権侵害行為の注意喚起を正常に表示することを阻害することとなる。
 この場合は、2D-3D変換機能をユーザー操作により無効にし、オリジナルの画像である2D表示状態で視聴することが、コンテンツホルダーの意図を叶える上で必要となる。しかし、2D-3D変換の有効化/無効化を視聴者自身の操作に委ねることは、前述のコンテンツホルダーからのメッセージの視聴を視聴者の意図により回避することが可能となることを意味する。すなわち、視聴者が視聴者自身の意思により意図的に2D-3D変換を有効状態にすることによって、コンテンツホルダーからのメッセージの視聴を行わないことが可能になる。
特開2009-44722号公報
 そこで、本発明は、視聴者による意図的な操作を経ることなく、2D-3D変換の有効化/無効化を適切に制御するための画像処理装置を提供することにより、コンテンツホルダーからのメッセージを、コンテンツホルダーの意図どおりに、視聴者に対して確実に提示することを目的とする。
 DVDなどのパッケージメディアコンテンツには、字幕情報が付加されていることが多い。しかしながら、前述のコンテンツホルダーのタイトルロゴ、及び著作権保護の注意喚起メッセージなどが収録されている部分では、字幕情報は付加されていない。その理由は、コンテンツ画面に字幕を重畳して表示した場合、コンテンツホルダーがユーザーに対して提示したい画面を覆い隠すことになるため、ユーザーがコンテンツホルダーからのメッセージを正常に視聴できなくなるからであり、コンテンツホルダーがそれを望まないからである。
 また、一般に、DVDなどのパッケージメディアと、それを再生しコンテンツを視聴するための再生機においては、その再生プロセスにおいて、コンテンツ視聴者の意思や自発的操作にかかわらず、コンテンツホルダーの意図どおりの再生が行われるように制御する仕組みが備わっている。この仕組みを利用し、前述のコンテンツホルダーのタイトルロゴ、及び著作権保護の注意喚起メッセージなどが収録されている部分では、早送り再生、スキップ再生、チャプター送り、などのユーザー操作を不可能にすることにより、視聴者に対して、コンテンツホルダーの希望する時間だけ、所定のメッセージが表示されるようになっている。この制御機能は、DVD規格などで規定されており、DVD再生装置の製造者には、この規格に則った仕様で製品を製造することが義務付けられているため、この装置を使用してコンテンツを視聴する視聴者は、コンテンツホルダーからのメッセージを必然的に視聴するようになっている。
 この、パッケージメディア再生操作の制限機能は、例えばDVD規格における、ナビゲーションコマンドの規定によって実現されている。ナビゲーションコマンドの規定では、DVD再生機器は、ディスクコンテンツデータの再生に際して、コンテンツデータに付随して格納されているナビゲーションデータを監視し、その規定に従ってユーザーによる再生操作を制限する。この操作制限は、コンテンツのシーンに応じて制御が可能であるため、コンテンツホルダーの意図するシーンにのみ、限定的に、ユーザーによる再生操作制限を行うことが可能となっている。
 字幕は画像コンテンツに含まれる付加情報で、ユーザーがそれを視聴するために実装されているものであり、それ以外の用途への適用を想定されているものではない。
 また、上記に述べたように、ナビゲーションコマンドは、ユーザーの再生操作に制限をかけるために規定されたものであり、その他の用途への適応は想定されておらず、適用実績もない。
 本発明では、DVD再生信号などの画像データに含まれる、本来ユーザーの再生操作を制限するために存在するナビゲーションコマンド情報の中の再生操作制限を表す信号である再生操作制限信号や、単なるコンテンツの付加情報である字幕の有無を表す字幕情報信号に基づいて、本来想定されているのとは異なる用途である、2D-3D変換機能の有効化/無効化の制御に適用することを目的とする。
 すなわち、2D-3D変換機能の有効化/無効化の制御に対し、ナビゲーションコマンド情報や字幕の有無の情報を利用することにより、視聴者による意図的な操作を経ることなく、2D-3D変換の有効化/無効化を自動で切り替え、視聴者に対して、コンテンツホルダーからのメッセージを、擬似3D化による画像の乱れなしに、適切に提示することを可能にする画像処理装置を提供することを目的とする。
 上記の課題を解決するために、本発明の第1の技術的側面に係る画像処理装置は、画像データに付加されているデータを基に、画像データの再生操作制限を表す再生操作制限信号を生成する再生操作制限信号生成部(12)と、画像データを擬似3D画像に変換する2D-3D変換器(15)とを備える。2D-3D変換器(15)は、再生操作制限信号を基に、画像データを2D画像から擬似3D画像に変換する動作の有効化と無効化を制御する。
 本発明の第1の技術的側面に係る画像処理装置は、前記画像データに付加されているデータを基に、字幕の有無を表す字幕情報信号を生成する字幕情報信号生成部(15)を更に備えてもよい。この場合、2D-3D変換器は、再生操作制限信号に加え、字幕情報信号を基に、画像データを2D画像から擬似3D画像に変換する動作の有効化と無効化を制御する。
 DVD再生信号などの画像データに含まれる、ナビゲーションコマンド情報の中の再生操作制限を表す信号である再生操作制限信号や字幕の有無を表す字幕情報信号に基づいて、2D-3D変換機能の有効化/無効化の制御を行うことにより、ユーザーの操作を経ることなく、コンテンツホルダーの意図どおりに、2D-3D変換の有効化/無効化の制御を自動で行うことが可能になる。
図1は、本発明の各実施例に係る画像処理装置において用いられる基本的な構成を示すブロック図である。 図2は、実施例1に係る画像処理装置であって、本発明の画像処理装置をDVD再生装置に適用した場合の例を示すブロック構成図である。 図3は、実施例1に係る画像処理装置の動作を説明する図である。 図4は、実施例2に係る画像処理装置であって、本発明の画像処理装置をDVD再生装置に適用した場合の例を示すブロック構成図である。 図5は、実施例3に係る画像処理装置であって、DVD再生装置と2D-3D変換装置が分離したシステムに本発明の画像処理装置を適用した場合の例を示すブロック構成図である。 図6は、実施例4に係る画像処理装置であって、DVD再生装置と2D-3D変換装置が分離したシステムに本発明の画像処理装置を適用した場合の例を示すブロック構成図である。
 以下、本発明の実施の形態について、図面を参照しながら詳細に説明する。なお、各実施例において、先行して説明した実施例の構成要素と同じ構成要素には同じ符号を付け、重複する説明は省略する。
 まず、図1に示すような、DVDの再生信号に含まれる字幕情報とナビゲーションコマンド情報とを読み取る機能と、DVD再生画像を擬似3D画像に変換する機能とを有する装置を用いることを想定する。
 DVDの再生信号11は、DVDの再生信号11に含まれる字幕情報とナビゲーションコマンド情報とを読み取る機能を持つ復号器12に入力される。すると、復号器12は、入力されたDVDの再生信号11に基づき、字幕の有無を示す字幕情報信号18とナビゲーションコマンド情報の中の再生操作制限を表す信号である再生操作制限信号13を生成し出力する。すなわち、復号器12は、再生操作制限信号生成部および字幕情報信号生成部として機能する。DVDの再生信号11を何らかの手段により復号化して得られた画像信号14は、2D-3D変換器15に入力される。すると、2D-3D変換器15は、左の擬似立体画像信号16と右の擬似立体画像信号17とを生成し出力する。このとき、字幕情報信号18と再生操作制限信号13とが2D-3D変換器15に入力され、字幕情報信号18と再生操作制限信号13との少なくとも一方が2D-3D変換機能の有効化/無効化を切り替える制御を行うのに用いられる。
 実施例1に係る画像処理装置では、図2に示すように、DVD再生機能とDVDの再生画像を擬似3D画像に変換する機能とを有したDVD再生装置20に適用する。
 再生されるDVDには、画像信号14が符号化されて記録されている。DVD信号読み取り装置21から出力されたDVDの再生信号11は、復号器12に入力され、画像信号14に復号されて出力される。出力された画像信号14は、非立体(2D)画像を疑似立体(3D)画像に変換する2D-3D変換器15に入力される。すると、2D-3D変換器15は、左の擬似立体画像信号16と右の擬似立体画像信号17とを生成し出力する。2つの擬似立体画像信号16、17は、3D表示変換器28に入力され、立体表示装置30に伝送するための信号フォーマットである3D画像フォーマット信号29に変換され、DVD再生装置20から出力される。出力された3D画像フォーマット信号29は、立体表示装置30に入力され、立体視表示される。立体表示装置30を視聴する視聴者31は、この立体表示装置30にあわせた視聴方法、例えば立体メガネをかける、などの方法をとることにより、DVDに記録されている2D画像信号を、擬似3D画像で視聴することができる。また、復号器12から、字幕の有無を表す字幕情報信号18と、ナビゲーションコマンド情報の中の再生操作制限を表す信号である、再生操作制限信号13が出力される。この信号は、2D-3D変換器15に入力される。また、2D-3D制御信号33は、ユーザー操作により2D-3D変換の有効化/無効化を制御する信号である。2D-3D変換器15で行われる2D-3D変換動作は、字幕情報信号18と、再生操作制限信号13と、2D-3D制御信号33に基づいた論理演算により、有効化/無効化が制御される。字幕情報信号18が字幕無しの状態で、かつ、再生操作制限信号13が再生制限ありの状態のときは、2D-3D制御信号33で2D-3D変換動作の有効化を行っても、2D-3D変換動作有効にはならず無効化に固定され、字幕情報信号18が字幕あり、または、再生操作制限信号13が再生制限なしの状態のときにのみ、2D-3D制御信号33によって2D-3D変換動作の有効化/無効化を切り替えることができるように構成されている。
 この装置における、2D-3D変換の有効化/無効化の制御方法を図3に示す。図3の1段目はDVD再生信号を表し、コンテンツホルダーがユーザー再生操作制限を意図しない部分と、コンテンツホルダーからのメッセージであってユーザー再生操作制限を意図する部分とを示す。図3の2段目は、DVD再生信号に付随する字幕情報の有無を表す信号であり、実線部分は字幕無し、破線部分は字幕ありを表す。図3の3段目は、DVD再生信号に付随するナビゲーションコマンド情報の中の、再生操作制限を表す信号であり、実線部分は再生制限無し、破線部分は再生制限ありを表す。図3の4段目は、ユーザー操作により2D-3D変換の有効化/無効化を制御する信号であり、ロー(L)レベルの期間は2D-3D変換の無効化を指示している期間を表し、ハイ(H)レベルの期間は2D-3D変換の有効化を指示している期間を表す。図3の5段目は、2D-3D変換機の有効化/無効化期間を表し、2D-3D変換機の有効期間と、2D-3D変換機の無効期間とを表す。図3に示すとおり、コンテンツホルダーがユーザー再生操作制限を意図する、コンテンツホルダーからのメッセージ部分においては、ユーザーが2D-3D変換機の有効化を指示したとしても、2D-3D変換の無効化がなされるように自動で制御される。
 実施例1のDVD再生装置20では、図2に示したように、復号器12から字幕情報信号18と再生操作制限信号13が出力され、2D-3D変換器15において2D-3D制御信号33との論理演算が行われる例を示した。しかし、例えば、この論理演算を復号器12の内部で行い、その結果である2D-3D変換の制御を切り替える信号のみを2D-3D変換器15に入力するようにしてもよい。
 実施例2のDVD生成装置20aでは、図4に示すように、2D-3D制御信号33は復号器12に直接入力され、復号器12の内部で検出される字幕の有無を表す字幕情報信号と復号器12の内部で検出されるナビゲーションコマンド情報の中の再生操作制限を表す信号である再生操作制限信号との論理演算が行われる。復号器12からは、上記の論理演算の結果である2D―3D変換制御切り替え信号(基準信号)19が出力される。すなわち、復号器12は、再生操作制限信号生成部と字幕情報信号生成部と基準信号生成部として機能する。2D-3D変換器15には、2D-3D変換制御切り替え信号19のみが入力され、この信号でのみ、2D-3D変換の有効化/無効化の制御が行われる。
 実施例1と実施例2では共に、DVD再生機能と、再生画像を擬似3D画像に変換する機能が同じ躯体に内包されたDVD再生装置20、20aの例を示した。実施例3では、図5に示すように、DVD再生機能を有するDVD再生装置20bと再生画像を擬似3D画像に変換する機能を有する2D-3D変換装置34とにシステムが分離している場合について説明する。
 DVD再生装置20bから、画像信号14と共に、字幕情報信号18と、再生操作制限信号13が、それぞれ独立した伝送路を経て、2D-3D変換装置34に入力される。2D-3D変換装置34で行われる2D-3D変換動作の有効化/無効化は、実施例1や実施例2と同様に、2D-3D制御信号33と、字幕情報信号18と、再生操作制限信号13との論理演算の結果により制御される。
 実施例3では、DVD再生装置20bから2D-3D変換装置34へ、画像信号14と字幕情報信号18と再生操作制限信号13とが独立した経路で伝送されていることを示した。実施例4では、画像信号14と字幕情報信号18と再生操作制限信号13を重畳して伝送する場合について、図6を例に説明する。
 実施例4では、画像信号14と再生操作制限信号13とを重畳する手段の一例として、HDMI(High-Definition Multimedia Interface)の伝送規格で定められているCEC(Consumer Electronics Control)コマンドの中のVendor Specific Commands(CEC13.9)を使用する場合について述べる。
 CECコマンドの伝送は、HDMI伝送路にて、画像データ伝送と同時に行われるため、画像データのシーンに同期した情報を伝送することができる。Vendor Specific Commands(CEC13.9)は、HDMI規格に対応した画像伝送機能を持つ製品の製造者に開放されており、製造者独自の取り決めにより、Vendor Specific Commands(CEC13.9)にて、独自のデータを伝送することが可能になっている。
 DVD再生装置20cでは、Vendor Specific Commands(CEC13.9)にて、再生操作制限信号13を伝送する機能を実装する。そして、2D-3D変換装置34aでは、Vendor Specific Commands(CEC13.9)にて伝送された再生操作制限信号13を取り出す機能を実装する。このことにより、DVD再生装置20cと2D-3D変換装置34aとの間で、再生操作制限信号13を画像信号14と共に再生操作制限信号13をHDMI伝送路35を経て伝送することができる。したがって、2D-3D変換の有効化/無効化の自動切り替えを、双方が分離しているシステムにおいても、実施例3のように、新たな伝送路を増やすことなく実現できる。
 実施例4では、図6に示したように、DVD再生装置20cから2D-3D変換装置34aへ、画像信号14と字幕情報信号18と再生操作制限信号13とが、一本のHDMI伝送路35に重畳されて伝送されていることを示した。実施例5では、DVD再生装置20cの内部において、図4の2D-3D変換制御切り替え信号19に相当する信号(基準信号)を、字幕情報信号18と再生操作制限信号13との少なくとも一方から生成する。すなわち、実施例4では、DVD再生装置20cが画像再生装置と再生操作制限信号生成部と字幕情報信号生成部と基準信号生成部として機能する。そして、生成した2D-3D変換制御切り替え信号19に相当する信号(基準信号)を、画像信号14と共に、一本のHDMI伝送路35に重畳して伝送伝送する。実施例5の場合の構成図は、図6における字幕情報信号18と再生操作制限信号13の2本の信号線が、図4に示したような2D-3D変換制御切り替え信号19に相当する1本の信号線に置き換わったものと同一となる。
 本出願は、2010年12月16日に出願された日本国特許願第2010-280314号に基づく優先権を主張しており、この出願の内容が参照により本発明の明細書に組み込まれる。
 本発明に係る画像処理装置によれば、ユーザーの操作を経ることなく、コンテンツホルダーの意図どおりに、2D-3D変換の有効化/無効化の制御を自動で行うことが可能になる。

Claims (9)

  1.  2D画像の画像データを処理するための画像処理装置であって、
     前記画像データに付加されているデータを基に、前記画像データの再生操作制限を表す再生操作制限信号を生成する再生操作制限信号生成部と、
     前記画像データを擬似3D画像に変換する2D-3D変換器と、
    を備え、
     前記2D-3D変換器は、前記再生操作制限信号を基に、前記画像データを2D画像から擬似3D画像に変換する動作の有効化と無効化を制御する
    ことを特徴とする画像処理装置。
  2.  請求項1に記載の画像処理装置であって、
     前記画像データに付加されているデータを基に、字幕の有無を表す字幕情報信号を生成する字幕情報信号生成部を更に備え、
     前記2D-3D変換器は、前記再生操作制限信号に加え、前記字幕情報信号を基に、前記画像データを2D画像から擬似3D画像に変換する動作の有効化と無効化を制御することを特徴とする画像処理装置。
  3.  請求項1に記載の画像処理装置であって、
     前記画像データが格納された記録媒体から、前記画像データを読み取り出力するための画像データ再生装置を更に備えることを特徴とする画像処理装置。
  4.  請求項2に記載の画像処理装置であって、
     前記画像データが格納された記録媒体から、前記画像データを読み取り出力するための画像データ再生装置を更に備えることを特徴とする画像処理装置。
  5.  請求項3に記載の画像処理装置であって、
     前記画像再生装置から出力された前記画像データと前記再生操作制限信号生成部で生成された前記再生操作制限信号とを重畳して、前記2D-3D変換器に伝送する画像出力伝送路を更に備えることを特徴とする画像処理装置。
  6.  請求項4に記載の画像処理装置であって、
     前記画像再生装置から出力された前記画像データと前記再生操作制限信号生成部で生成された前記再生操作制限信号と前記字幕情報信号生成部で生成された前記字幕情報信号とを重畳して、前記2D-3D変換器に伝送する画像出力伝送路を更に備えることを特徴とする画像処理装置。
  7.  請求項1または2に記載の画像処理装置であって、
     前記画像データが画像処理装置の外部から入力されることを特徴とする画像処理装置。
  8.  請求項1に記載の画像処理装置であって、
     前記再生操作制限信号を基に、2D画像から擬似3D画像に変換する動作を制御するための基準信号を生成する基準信号生成部を更に備え、
     前記2D-3D変換器は、前記基準信号を基に、前記画像データを2D画像から擬似3D画像に変換する動作の有効化と無効化を制御する
    ことを特徴とする画像処理装置。
  9.  請求項2に記載の画像処理装置であって、
     前記再生操作制限信号と前記字幕情報信号とを基に、2D画像から擬似3D画像に変換する動作を制御するための基準信号を生成する基準信号生成部を更に備え、
     前記2D-3D変換器は、前記基準信号を基に、前記画像データを2D画像から擬似3D画像に変換する動作の有効化と無効化を制御する
    ことを特徴とする画像処理装置。
PCT/JP2011/078305 2010-12-16 2011-12-07 画像処理装置 WO2012081469A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201180059562.8A CN103262555B (zh) 2010-12-16 2011-12-07 图像处理装置
EP11848775.0A EP2654306A4 (en) 2010-12-16 2011-12-07 IMAGE PROCESSING DEVICE
US13/905,862 US20130302013A1 (en) 2010-12-16 2013-05-30 Image processor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010-280314 2010-12-16
JP2010280314A JP2012129845A (ja) 2010-12-16 2010-12-16 画像処理装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/905,862 Continuation US20130302013A1 (en) 2010-12-16 2013-05-30 Image processor

Publications (1)

Publication Number Publication Date
WO2012081469A1 true WO2012081469A1 (ja) 2012-06-21

Family

ID=46244576

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/078305 WO2012081469A1 (ja) 2010-12-16 2011-12-07 画像処理装置

Country Status (5)

Country Link
US (1) US20130302013A1 (ja)
EP (1) EP2654306A4 (ja)
JP (1) JP2012129845A (ja)
CN (1) CN103262555B (ja)
WO (1) WO2012081469A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9053562B1 (en) 2010-06-24 2015-06-09 Gregory S. Rabin Two dimensional to three dimensional moving image converter
US9992021B1 (en) 2013-03-14 2018-06-05 GoTenna, Inc. System and method for private and point-to-point communication between computing devices
US9583377B2 (en) * 2013-12-17 2017-02-28 Lam Research Corporation Installation fixture for elastomer bands

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH099296A (ja) * 1995-06-21 1997-01-10 Sanyo Electric Co Ltd 立体映像装置
JP2001352564A (ja) * 2000-06-08 2001-12-21 Mixed Reality Systems Laboratory Inc 表示制御装置及び方法
JP2004207773A (ja) * 2002-09-27 2004-07-22 Sharp Corp 立体画像表示装置、立体画像記録装置および立体画像記録方法
WO2007129404A1 (ja) * 2006-05-09 2007-11-15 Pioneer Corporation 情報記録媒体
JP2009044722A (ja) 2007-07-19 2009-02-26 Victor Co Of Japan Ltd 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法
JP2010280314A (ja) 2009-06-05 2010-12-16 Toyota Motor Corp 車載電子システム

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11289555A (ja) * 1998-04-02 1999-10-19 Toshiba Corp 立体映像表示装置
JP4086477B2 (ja) * 2001-03-23 2008-05-14 三洋電機株式会社 コンテンツ符号化方法及びコンテンツ配信方法及びコンテンツ受信端末装置
JP4610799B2 (ja) * 2001-06-25 2011-01-12 オリンパス株式会社 立体観察システム、及び内視鏡装置
CN1703915A (zh) * 2002-09-27 2005-11-30 夏普株式会社 3-d图像显示单元,3-d图像记录装置和3-d图像记录方法
JP2004287857A (ja) * 2003-03-20 2004-10-14 Sanyo Electric Co Ltd プログラム、記録媒体、サーバ装置および画像フィルタ
JP4324435B2 (ja) * 2003-04-18 2009-09-02 三洋電機株式会社 立体視用映像提供方法及び立体映像表示装置
JP4251952B2 (ja) * 2003-10-01 2009-04-08 シャープ株式会社 立体画像表示装置および立体画像表示方法
KR100965883B1 (ko) * 2003-10-17 2010-06-24 삼성전자주식회사 모드 정보가 포함된 동영상 데이터가 기록된 저장 매체,재생 장치 및 재생 방법
US8463019B2 (en) * 2007-07-19 2013-06-11 JVC Kenwood Corporation Pseudo 3D image generation device, image encoding device, image encoding method, image transmission method, image decoding device, and image decoding method
KR20100002032A (ko) * 2008-06-24 2010-01-06 삼성전자주식회사 영상 생성 방법, 영상 처리 방법, 및 그 장치
JP2010258583A (ja) * 2009-04-22 2010-11-11 Panasonic Corp 立体画像表示装置、立体画像再生装置および立体画像視認システム
US8290338B2 (en) * 2009-05-27 2012-10-16 Panasonic Corporation Recording medium, playback device, encoding device, integrated circuit, and playback output device
JP4861496B2 (ja) * 2010-05-31 2012-01-25 株式会社東芝 映像変換装置及び映像変換方法
JP5058316B2 (ja) * 2010-09-03 2012-10-24 株式会社東芝 電子機器、画像処理方法、及び画像処理プログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH099296A (ja) * 1995-06-21 1997-01-10 Sanyo Electric Co Ltd 立体映像装置
JP2001352564A (ja) * 2000-06-08 2001-12-21 Mixed Reality Systems Laboratory Inc 表示制御装置及び方法
JP2004207773A (ja) * 2002-09-27 2004-07-22 Sharp Corp 立体画像表示装置、立体画像記録装置および立体画像記録方法
WO2007129404A1 (ja) * 2006-05-09 2007-11-15 Pioneer Corporation 情報記録媒体
JP2009044722A (ja) 2007-07-19 2009-02-26 Victor Co Of Japan Ltd 擬似立体画像生成装置、画像符号化装置、画像符号化方法、画像伝送方法、画像復号化装置及び画像復号化方法
JP2010280314A (ja) 2009-06-05 2010-12-16 Toyota Motor Corp 車載電子システム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2654306A4

Also Published As

Publication number Publication date
EP2654306A4 (en) 2014-06-25
US20130302013A1 (en) 2013-11-14
CN103262555A (zh) 2013-08-21
EP2654306A1 (en) 2013-10-23
CN103262555B (zh) 2016-07-06
JP2012129845A (ja) 2012-07-05

Similar Documents

Publication Publication Date Title
RU2506708C2 (ru) Механизм выбора режима 3d для воспроизведения видео
JP4959830B2 (ja) 映像再生装置
JP5452537B2 (ja) 映像表示システム及び表示装置
JP4742174B1 (ja) 3次元映像再生方法、および3次元映像再生装置
CN102257825A (zh) 用于在3d视频上覆盖3d图形的方法和设备
JP2011172216A (ja) 再生装置
RU2613729C2 (ru) Чересстрочное 3d видео
WO2012081469A1 (ja) 画像処理装置
JP5543892B2 (ja) 再生装置、再生方法、表示装置、及び表示方法
JP2010268048A (ja) 映像表示装置及びその制御方法
JP5550520B2 (ja) 再生装置及び再生方法
WO2011077673A1 (ja) 再生装置
JP5568404B2 (ja) 映像表示システム及び再生装置
US9848185B2 (en) Video display system, display device and source device
JP2012243330A (ja) ディスク再生装置
JP2012105229A (ja) 再生装置
TW201225639A (en) Playback device, playback method, program, and recording medium
WO2012017687A1 (ja) 映像再生装置
JP2012080306A (ja) 表示装置および表示方法
US20130265390A1 (en) Stereoscopic image display processing device, stereoscopic image display processing method, and stereoscopic image display processing program
US20120033934A1 (en) Video displaying system and reproducing apparatus
JP2012039339A (ja) 映像表示システム及び表示装置
JP2011114641A (ja) 記録装置、再生装置、立体映像記録再生方法、記録方法、及び再生方法
JP2012222376A (ja) 表示装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11848775

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2011848775

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2011848775

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE