Nothing Special   »   [go: up one dir, main page]

JP6904250B2 - 送信装置、送信方法、受信装置および受信方法 - Google Patents

送信装置、送信方法、受信装置および受信方法 Download PDF

Info

Publication number
JP6904250B2
JP6904250B2 JP2017510973A JP2017510973A JP6904250B2 JP 6904250 B2 JP6904250 B2 JP 6904250B2 JP 2017510973 A JP2017510973 A JP 2017510973A JP 2017510973 A JP2017510973 A JP 2017510973A JP 6904250 B2 JP6904250 B2 JP 6904250B2
Authority
JP
Japan
Prior art keywords
stream
decoding
coded
data
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017510973A
Other languages
English (en)
Other versions
JPWO2016163327A1 (ja
Inventor
一彰 鳥羽
一彰 鳥羽
市村 元
元 市村
敏 宮崎
敏 宮崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2016163327A1 publication Critical patent/JPWO2016163327A1/ja
Application granted granted Critical
Publication of JP6904250B2 publication Critical patent/JP6904250B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4398Processing of audio elementary streams involving reformatting operations of audio signals
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/167Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/23Reproducing arrangements
    • H04N1/2307Circuits or arrangements for the control thereof, e.g. using a programmed control device, according to a measured quantity
    • H04N1/2315Circuits or arrangements for the control thereof, e.g. using a programmed control device, according to a measured quantity according to characteristics of the reproducing apparatus, e.g. capability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/23Reproducing arrangements
    • H04N1/2307Circuits or arrangements for the control thereof, e.g. using a programmed control device, according to a measured quantity
    • H04N1/2346Circuits or arrangements for the control thereof, e.g. using a programmed control device, according to a measured quantity according to a detected condition or state of the reproducing device, e.g. temperature or ink quantity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/23Reproducing arrangements
    • H04N1/2307Circuits or arrangements for the control thereof, e.g. using a programmed control device, according to a measured quantity
    • H04N1/2369Selecting a particular reproducing mode from amongst a plurality of modes, e.g. paper saving or normal, or simplex or duplex
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635HDMI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/12Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11Positioning of individual sound objects, e.g. moving airplane, within a sound field

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

この発明は、送信装置、送信方法、受信装置および受信方法に関し、詳しくは、優先度情報を持つ複数の符号化データを取り扱う送信装置等に関する。
従来、受信機は復号化可能であることのみデジタルインタフェースを介して送信機に通知することが可能であった。この場合、送信機と受信機の両方が復号化可能であった場合、送信機がどちらで復号化を行うかを判断する、あるいは視聴者が自身の操作で復号化を行う機器を指定するという形で伝送が行われている。送信機は受信機の復号化能力の品質を知るすべがなく、また視聴者も両機器のうちどちらの復号化能力が優れているかを判断することは非常に困難であった。
例えば、特許文献1には、オブジェクトベースオーディオのミキシング技術が記載されている。オブジェクトベースオーディオは、個々のオブジェクト音源をミキシングせずに供給し、再生機器側でレンダリングすることで立体音響を実現するものである。
オブジェクトベースオーディオの符号化ストリームには、複数のオブジェクト音源の符号化データが含まれる。各オブジェクト音源の符号化データは、音データの他に、座標軸上の位置情報などのメタデータから構成されている。各オブジェクト音源の符号化データに、復号化の際の優先度を示す優先度情報を持たせることも考えられている。
特表2014−523190号公報
本技術は、優先度情報を持つ複数の符号化データを含む符号化ストリームに対して最適な復号化処理の適用を可能とすることにある。
本技術の概念は、
優先度情報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得部と、
上記ストリーム取得部で取得された符号化ストリームに復号化処理を施して復号化済データを含む復号化済ストリームを生成するデコード部と、
何番目の優先度まで復号化可能かを示す受信側の復号化能力情報に基づいて上記受信側の復号化能力が自身の復号化能力以上か否かを判断する判断部と、
上記受信側に、デジタルインタフェースを介して、上記判断部で上記受信側の復号化能力が自身の復号化能力以上であると判断されたときは上記ストリーム取得部で取得された符号化ストリームを送信し、上記判断部で上記受信側の復号化能力が自身の復号化能力以上でないと判断されるときは上記デコード部で生成された復号化済ストリームを送信する送信部を備える
送信装置にある。
本技術において、ストリーム取得部により、優先度情報を持つ複数の符号化データを含む符号化ストリームが取得される。デコード部により、ストリーム取得部で取得された符号化ストリームに復号化処理が施されて復号化済データを含む復号化済ストリームが生成される。例えば、符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、デコード部は、ストリーム取得部で取得された符号化オーディオストリームに復号化処理を施して復号化済データとして所定チャネル数のオーディオデータを含む復号化済オーディオストリームを生成する、ようにされてもよい。
判断部により、何番目の優先度まで復号化可能かを示す受信側の復号化能力情報に基づいて、受信側の復号化能力が自身の復号化能力以上か否かが判断される。例えば、受信側から、デジタルインタフェースを介して、受信側の復号化能力情報を受信する情報受信部をさらに備える、ようにされてもよい。
送信部により、受信側に、デジタルインタフェースを介して、ストリーム取得部で取得された符号化ストリームあるいはデコード部で生成された復号化済ストリームが送信される。例えば、デジタルインタフェースは、HDMIである、ようにされてもよい。この場合、判断部で受信側の復号化能力が自身の復号化能力以上であると判断されたときは符号化ストリームが送信され、判断部で受信側の復号化能力が自身の復号化能力以上でないと判断されたときは復号化済ストリームが送信される。
このように本技術においては、受信側の復号化能力が自身の復号化能力以上であるときは符号化ストリームを送信し、受信側の復号化能力が自身の復号化能力以上でないときは復号化済ストリームを送信するものであり、符号化ストリームに対して最適な復号化処理の適用が可能となる。
また、本技術の他の概念は、
何番目の優先度まで復号化可能かを示す自身の復号化能力情報を、デジタルインタフェースを介して、送信側に送信する情報送信部と、
上記送信側から、上記デジタルインタフェースを介して、優先度情報を持つ複数の符号化データを含む符号化ストリームまたは該符号化ストリームに復号化処理が施されて生成された復号化済データを持つ復号化済ストリームを受信する受信部と、
上記受信部で上記符号化ストリームが受信されたとき、該符号化ストリームに復号化処理を施して復号化済データを含む復号化済ストリームを生成するデコード部を備える
受信装置にある。
本技術において、情報送信部により、何番目の優先度まで復号化可能かを示す自身の復号化能力情報が、デジタルインタフェースを介して、送信側に送信される。例えば、デジタルインタフェースはHDMIである、ようにされてもよい。
受信部により、送信側から、デジタルインタフェースを介して、優先度情報を持つ複数の符号化データを含む符号化ストリームまたはこの符号化ストリームに復号化処理が施されて生成された復号化済データを持つ復号化済ストリームが受信される。デコード部により、受信部で符号化ストリームが受信されたとき、この符号化ストリームに復号化処理が施されて復号化済データを含む復号化済ストリームが生成される。
例えば、符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、復号化済ストリームは、符号化オーディオストリームに復号化処理が施されて生成された所定チャネル数のオーディオデータを復号化済みデータとして含む、ようにされてもよい。
このように本技術においては、自身の復号化能力情報を、デジタルインタフェースを介して、送信側に送信するものであり、送信側ではこの復号化能力情報に基づいて受信側の復号化能力が自身の復号化能力以上か否かを判断し、受信側の復号化能力が自身の復号化能力以上であるときは符号化ストリームを送信し、受信側の復号化能力が自身の復号化能力以上でないときは復号化済ストリームを送信することが可能となり、符号化ストリームに対して最適な復号化処理の適用が可能となる。
本技術によれば、優先度情報を持つ複数の符号化データを含む符号化ストリームに対して最適な復号化処理の適用が可能となる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
実施の形態としてのAVシステムの構成例を示すブロック図である。 AVシステムを構成するBDプレーヤの構成例を示すブロック図である。 受信側の復号化能力情報の一例の構造を示す図である。 BDプレーヤのCPUにおける制御処理手順の一例を示すフローチャートである。 AVシステムを構成するオーディオアンプの構成例を示すブロック図である。 AVシステムを構成するテレビ受信機の構成例を示すブロック図である。 BDプレーヤのHDMI送信部とオーディオアンプのHDMI受信部の構成例を示すブロック図である。 TMDSチャネルにおいて横×縦が1920ピクセル×1080ラインの画像データが伝送される場合の各種の伝送データの区間を示す図である。
以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
1.実施の形態
2.変形例
<1.実施の形態>
[AVシステムの構成例]
図1は、実施の形態としてのAV(Audio Visual)システム10の構成例を示している。このAVシステム10は、ソース機器としてのBD(Blu-Ray Disc)プレーヤ100と、リピータ機器としてのオーディオアンプ200と、シンク機器としてのテレビ受信機300を有している。オーディオアンプ200には、マルチチャネル用のスピーカシステム400が接続されている。
また、BDプレーヤ100およびオーディオアンプ200はHDMIケーブル510を介して接続されている。BDプレーヤ100には、HDMI送信部(HDNI TX)102が接続されたHDMI端子101が設けられている。オーディオアンプ200には、HDMI受信部(HDMI RX)202aが接続されたHDMI端子201aが設けられている。HDMIケーブル510の一端はBDプレーヤ100のHDMI端子101に接続され、その他端はオーディオアンプ200のHDMI端子201aに接続されている。
オーディオアンプ200およびテレビ受信機300はHDMIケーブル520を介して接続されている。オーディオアンプ200には、HDMI送信部(HDMI TX)202bが接続されたHDMI端子201bが設けられている。テレビ受信機100には、HDMI受信部(HDMI RX)302が接続されたHDMI端子301が設けられている。HDMIケーブル520の一端はオーディオアンプ200のHDMI端子201bに接続され、その他端はテレビ受信機300のHDMI端子301に接続されている。なお、「HDMI」は登録商標である。
[BDプレーヤの構成例]
図2は、BDプレーヤ100の構成例を示している。このBDプレーヤ100は、HDMI端子101と、HDMI送信部102を有している。また、このBDプレーヤ100は、内部バス103と、CPU(Central Processing Unit)104と、フラッシュROM(Read Only Memory)105と、SDRAM(Synchronous Random Access Memory)106と、表示制御部107と、リモコン受信部108と、リモコン送信機109を有している。
また、BDプレーヤ100は、記憶(記録)媒体制御インタフェース111と、BD(Blu-Ray Disc)ドライブ112と、HDD(Hard disk drive)113と、SSD(Solid State Drive)114と、イーサネットインタフェース(Ethernet I/F)115と、ネットワーク端子116を有している。なお、「イーサネット」および「Ethernet」は登録商標である。
また、BDプレーヤ100は、デマルチプレクサ121と、ビデオデコーダ122と、グラフィック生成回路123と、映像出力端子124と、パネル駆動回路125と、表示パネル126と、オーディオデコーダ127と、選択部128と、音声出力端子129を有している。また、BDプレーヤ100は、電源部131を有している。電源部131は、BDプレーヤ100の各部に電源を供給する。なお、電源部131は、AC電源であっても、電池(蓄電池、乾電池)であってもよい。
CPU104、フラッシュROM105、SDRAM106、表示制御部107、記憶媒体制御インタフェース111、イーサネットインタフェース115およびデマルチプレクサ121は、内部バス103に接続されている。CPU104は、BDプレーヤ100の各部の動作を制御する。
フラッシュROM105は、制御ソフトウェアの格納およびデータの保管を行う。SDRAM106は、CPU104のワークエリアを構成する。CPU104は、フラッシュROM105から読み出したソフトウェアやデータをSDRAM106上に展開してソフトウェアを起動させ、BDプレーヤ100の各部を制御する。
リモコン受信部108は、リモコン送信機109から送信されたリモーコントロール信号(リモコンコード)を受信し、CPU104に供給する。CPU104は、リモコンコードに従ってBDプレーヤ100の各部を制御する。なお、この実施の形態では、ユーザ指示入力部としてリモートコントロール部を示しているが、ユーザ指示入力部は、その他の構成、例えば、スイッチ、ホイール、近接/タッチにより指示入力を行うタッチパネル部、マウス、キーボード、カメラで指示入力を検出するジェスチャ入力部、音声により指示入力を行う音声入力部などであってもよい。
BDドライブ112は、ディスク状記録メディアとしてのBDディスクに対して、コンテンツデータを記録し、あるいは、このBDディスクからコンテンツデータを再生する。HDD113は、コンテンツデータを記録し、あるいは、そのコンテンツデータを再生する。SSD114は、メモリカード等の半導体メモリに対して、コンテンツデータを記録し、あるいは、この半導体メモリからコンテンツデータを再生する。
BDドライブ112、HDD113、SSD114は、記憶媒体制御インタフェース111を介して内部バス103に接続されている。例えば、BDドライブ112やHDD113のためのインタフェースとしてはSATAインタフェースが使用される。また、例えば、SSD114のためのインタフェースとしてSATAインタフェースあるいはPCIeインタフェースが使用される。
ネットワーク端子116は、ネットワークに接続する端子であり、イーサネットインタフェース115に接続される。イーサネットインタフェース115は、ネットワーク端子116を介して、ネットワーク接続をする。
デマルチプレクサ121は、BDドライブ112、HDD113あるいはSSD114で再生されたコンテンツデータである多重化ストリームから符号化ビデオストリームおよび符号化オーディオストリームを抽出する。ビデオデコーダ122は、符号化ビデオストリームに対して復号化処理を行って、非圧縮の画像データを得る。
グラフィック生成回路123は、ビデオデコーダ122で得られた画像データに対して、必要に応じてグラフィックスデータの重畳処理等を行う。映像出力端子124は、グラフィック生成回路123から出力される画像データを出力する。
パネル駆動回路125は、グラフィック生成回路123から出力される画像データに基づいて、表示パネル126を駆動する。表示制御部107は、グラフィクス生成回路123やパネル駆動回路125を制御して、表示パネル126における表示を制御する。表示パネル126は、例えば、LCD(Liquid Crystal Display)、PDP(Plasma Display Panel)、有機ELパネル(Organic Electro-Luminescence Panel)等で構成されている。
なお、この実施の形態では、CPU104の他に、表示制御部107を有する例を示しているが、表示パネル126における表示をCPU104が直接制御するようにしてもよい。また、CPU104と表示制御部107は、1つのチップになっていても、複数コアであってもよい。
オーディオデコーダ127は、デマルチプレクサ121で抽出された符号化オーディオストリームに対して復号化処理を行って、非圧縮の音声データを得る。この実施の形態において、符号化オーディオストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームである。各オブジェクト音源の符号化データは、音データの他に、座標軸上の位置情報などのメタデータから構成されている。
オーディオデコーダ127は、符号化オーディオストリームに対して復号化処理を施し、所定チャネル数の非圧縮の音声データを得ると共に、この所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームを生成する。音声出力端子129は、オーディオデコーダ127で得られた所定チャネル数の非圧縮の音声データを出力する。
なお、音声出力端子129に出力する非圧縮の音声データのチャネル数は、復号化済オーディオストリームに含める非圧縮の音声データのチャネル数と異なっていてもよい。例えば、復号化済オーディオストリームに含める非圧縮の音声データのチャネル数が5.1チャネル用の「6」であるのに対して、音声出力端子129に出力する非圧縮の音声データのチャネル数がステレオ用の「2」などである。
オーディオデコーダ127は、符号化オーディオストリームに対して復号化処理を施す際に、自身の復号化能力の範囲で行う。すなわち、オーディオデコーダ127は、符号化オーディオストリームに含まれる複数のオブジェクト音源の符号化データのうち、自身が復号化可能な優先度までの範囲に含まれる優先度を持つ所定数のオブジェクト音源の符号化データに対して復号化処理を施して、所定チャネル数の非圧縮の音声データを得る。
選択部128は、CPU104の制御のもと、HDMIのデジタルインタフェースで受信側に送信するオーディオストリームとして、デマルチプレクサ121で抽出された符号化オーディオストリームまたはオーディオデコーダ127で生成された復号化済オーディオストリームを取り出す。
CPU104は、受信側の復号化能力情報、すなわち、受信側、この実施の形態ではオーディオアンプ200が何番目の優先度まで復号化可能かを示す情報に基づいて、受信側の復号化能力が自身の復号化能力以上か否かを判断する。この実施の形態において、CPU104は、この受信側の復号化能力情報を、HDMIのデジタルインタフェースで受信側から受信する。
図3は、受信側の復号化能力情報の一例の構造を示している。この復号化能力情報は、図3(a)に示すように、全体として8ビット情報であるが、図3(b)に示すように、第3ビットから第0ビットまでの下位4ビットが実質的な情報を構成している。例えば、“0000”は、オブジェクトベースオーディオの符号化オーディオストリームに対する復号化に非対応であることを示す。
また、例えば、“0001”は、優先度1のみ復号化可能であること、つまり優先度1を持つオブジェクト音源の符号化データの復号化のみが可能であることを示す。また、例えば、“0010”は、優先度2まで復号化可能であること、つまり優先度1,2を持つオブジェクト音源の符号化データの復号化が可能であることを示す。以下、同様である。
CPU104は、受信側の復号化能力が自身の復号化能力以上であると判断するとき、選択部128で符号化オーディオストリームが取り出されるように制御する。また、CPU104は、受信側の復号化能力が自身の復号化能力以上でないと判断するとき、選択部128で復号化済オーディオストリームが取り出されるように制御する。このように制御されることで、符号化オーディオストリームに対して最適な復号化処理の適用が可能となる。
図4のフローチャートは、CPU104における制御処理手順の一例を示している。CPU104は、ステップST1において、判断処理を開始する。そして、CPU104は、ステップST2において、受信側からHDMIのデジタルインタフェースを通じて、受信側の復号化能力情報(図3参照)を受信する。例えば、受信側において復号化能力情報はEDID(Extended Display Identification Data)の一つとして記録されている。CPU104は、DDC(Display Data Channel)チャネルでEDIDを読み出すことで、受信側の復号化能力情報を取得する。
次に、CPU104は、ステップST3において、受信側がオブジェクトベースオーディオの符号化オーディオストリームに対する復号化に対応しているか否かを判断する。復号化に対応しているとき、CPU104は、ステップST4において、受信側の復号化能力が自身の復号化能力以上であるか否かを判断する。
受信側の復号化能力が自身の復号化能力以上であるとき、CPU104は、ステップST5において、符号化オーディオストリームを出力することとし、選択部128で符号化オーディオストリームが取り出されるように制御する。その後、CPU104は、ステップST6において、制御処理を終了する。
また、ステップST3で受信側がオブジェクトベースオーディオの符号化オーディオストリームに対する復号化に対応していないとき、あるいはステップST4で受信側の復号化能力が自身の復号化能力以上でないとき、CPU104は、ステップST7において、復号化済オーディオストリームを出力することとし、選択部128で復号化済オーディオストリームが取り出されるように制御する。その後、CPU104は、ステップST6において、制御処理を終了する。
図2に戻って、HDMI送信部102は、HDMIに準拠した通信により、ビデオデコーダ122で得られた非圧縮の画像データと、選択部128で取り出されたオーディオストリームを、HDMI端子101から送出する。HDMI送信部102は、HDMIのTMDSチャネルで送信するため、画像データおよびオーディオストリームをパッキングして、HDMI端子101に出力する。このHDMI送信部102の詳細は後述する。
図2に示すBDプレーヤ100の動作を簡単に説明する。記録時には、図示されていないデジタルチューナを介して、あるいはネットワーク端子116からイーサネットインタフェース115を介して、記録すべきコンテンツデータが取得される。このコンテンツデータは、記憶媒体制御インタフェース111に入力され、BDドライブ112によりBDディスクに、HDD113に、あるいはSSD114により半導体メモリに、記録される。
再生時には、BDドライブ112、HDD113、あるいはSSD114で再生されたコンテンツデータである多重化ストリームは、記憶媒体制御インタフェース111を介してデマルチプレクサ121に供給される。デマルチプレクサ121では、多重化ストリームから符号化ビデオストリームおよび符号化オーディオストリームが抽出される。
デマルチプレクサ121で抽出された符号化ビデオストリームは、ビデオデコーダ122に供給される。ビデオデコーダ122では、符号化ビデオストリームに対して復号化処理が施されて、非圧縮の画像データが得られる。この画像データは、グラフィック生成回路123で必要に応じてグラフィックスデータの重畳処理等が行われた後に、映像出力端子124に出力される。また、ユーザ操作に応じて、グラフィック生成回路123からパネル駆動回路125に画像データが供給され、表示パネル126に再生画像が表示される。
また、デマルチプレクサ121で抽出された符号化オーディオストリームは、オーディオデコーダ127に供給される。この符号化オーディオストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームである。
オーディオデコーダ127では、符号化オーディオストリームに対して復号化処理が施されて、所定チャネル数の非圧縮の音声データが得られると共に、この所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームが生成される。オーディオデコーダ127で生成された所定チャネル数の非圧縮の音声データは、音声出力端子129に出力される。
また、デマルチプレクサ121で抽出された符号化オーディオストリームは、選択部128に供給される。この選択部128には、オーディオデコーダ127で生成された復号化済オーディオストリームも供給される。選択部128では、CPU104の制御のもと、HDMIで受信側に送信するオーディオストリームとして、符号化オーディオストリームまたは復号化済オーディオストリームが取り出される。
CPU104では、受信側の復号化能力情報(何番目の優先度まで復号化可能かを示す情報)に基づいて、受信側の復号化能力が自身の復号化能力以上か否かが判断され、その判断結果に基づいて選択部128を制御することが行われる。受信側の復号化能力が自身の復号化能力以上であるとき、選択部128では符号化オーディオストリームが取り出される。一方、受信側の復号化能力が自身の復号化能力以上でないととき、選択部128では復号化済オーディオストリームが取り出される。
再生時に、BDドライブ112、HDD113、あるいはSSD114で再生されたコンテンツデータをHDMIのTMDSチャネルで送信する場合、選択部128で取り出されたオーディオストリームがHDMI送信部102に供給されると共に、ビデオデコーダ122で得られた非圧縮の画像データがHDMI送信部102に供給される。HDMI送信部102では、これらの画像データおよびオーディオストリームがパッキングされ、HDMI端子101に出力される。
[オーディオアンプの構成例]
図5は、オーディオアンプ200の構成例を示している。オーディオアンプ200は、HDMI端子201a,201bと、HDMI受信部202aと、HDMI送信部202bを有している。また、オーディオアンプ200は、オーディオデコーダ221と、選択部222と、音声処理回路223と、音声増幅回路224と、音声出力端子225を有している。
また、オーディオアンプ200は、内部バス203と、CPU204と、フラッシュROM205と、SDRAM206と、表示制御部207と、パネル駆動回路208と、表示パネル209と、リモコン受信部210と、リモコン送信機211と、電源部212を有している。CPU204、フラッシュROM205、SDRAM206および表示制御部207は、内部バス203に接続されている。
CPU204は、オーディオアンプ200の各部の動作を制御する。フラッシュROM205は、制御ソフトウェアの格納およびデータの保管を行う。SDRAM206は、CPU204のワークエリアを構成する。CPU204は、フラッシュROM205から読み出したソフトウェアやデータをSDRAM206上に展開してソフトウェアを起動させ、オーディオアンプ200の各部を制御する。
リモコン受信部210は、リモコン送信機211から送信されたリモーコントロール信号(リモコンコード)を受信し、CPU204に供給する。CPU204は、このリモコンコードに基づいて、オーディオアンプ200の各部を制御する。なお、この実施の形態では、ユーザ指示入力部としてリモートコントロール部を示しているが、ユーザ指示入力部は、その他の構成、例えば、スイッチ、ホイール、近接/タッチにより指示入力を行うタッチパネル部、マウス、キーボード、カメラで指示入力を検出するジェスチャ入力部、音声により指示入力を行う音声入力部などであってもよい。
表示制御部207は、例えば、ユーザインタフェース表示あるいはオーディオアンプ200のステータス表示等を行うために、パネル駆動回路208を制御し、表示パネル209における表示を制御する。表示パネル209は、例えば、LCD(Liquid Crystal Display)、有機ELパネル(Organic Electro-Luminescence Panel)等で構成されている。
なお、この実施の形態では、CPU204の他に表示制御部207を有する例を示しているが、表示パネル209における表示をCPU204が直接制御するようにしてもよい。また、CPU204と表示制御部207は、1つのチップになっていても、複数コアであってもよい。電源部212は、オーディオアンプ200の各部に電源を供給する。この電源部212は、AC電源であっても、電池(蓄電池、乾電池)であってもよい。
HDMI受信部202aは、HDMIに準拠した通信により、HDMIケーブルを介してHDMI端子201aに供給される非圧縮の画像データとオーディオストリームを受信する。このオーディオストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリーム、あるいは所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームである。このHDMI受信部202aの詳細は後述する。
オーディオデコーダ221は、HDMI受信部202aで受信されたオーディオストリームが符号化オーディオストリームであるとき、この符号化オーディオストリームに対して復号化処理を施し、所定チャネル数の非圧縮の音声データを得ると共に、この所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームを生成する。
選択部222は、CPU204の制御のもと、HDMI受信部202aで受信されたオーディオストリームまたはオーディオデコーダ221で得られた復号化済オーディオストリームを取り出す。この場合、選択部222は、HDMI受信部202aで受信されたオーディオストリームが符号化オーディオストリームであるときは、オーディオデコーダ221で得られた復号化済オーディオストリームを取り出す。また、選択部222は、HDMI受信部202aで受信されたオーディオストリームが復号化済オーディオストリームであるときは、その復号化済オーディオストリームを取り出す。
音声処理回路223は、選択部222で取り出された復号化済オーディオストリームから所定チャネル数の非圧縮の音声データを取り出し、D/A変換等の必要な処理を施す。なお、音声処理回路223は、接続されるスピーカシステム400の構成に応じて必要なアップ/ダウンミックス処理を行って、必要なチャネル数の音声信号を得る。音声増幅回路224は、音声処理回路223で得られた各チャネルのオーディオ信号を増幅して音声出力端子225に出力する。なお、音声出力端子225にはスピーカシステム400が接続される。
HDMI送信部202bは、HDMIに準拠した通信により、HDMI受信部202aで受信された非圧縮の画像データと、選択部222で取り出された復号化済オーディオストリームを、HDMI端子201bから送出する。HDMI送信部202bは、HDMIのTMDSチャネルで送信するため、画像データおよびオーディオストリームをパッキングして、HDMI端子201bに出力する。このHDMI送信部202bの詳細は後述する。
図5に示すオーディオアンプ200の動作を簡単に説明する。HDMI受信部202aでは、HDMI端子201aにBDプレーヤ100からHDMIケーブルを介して送信されてくる、非圧縮の画像データとオーディオストリーム(符号化オーディオストリームまたは復号化済オーディオストリーム)が受信される。
HDMI受信部202aで受信されたオーディオストリームは、オーディオデコーダ221に供給される。オーディオデコーダ221では、HDMI受信部202aで受信されたオーディオストリームが符号化オーディオストリームであるとき、この符号化オーディオストリームに対して復号化処理が施されて、所定チャネル数の非圧縮の音声データが得られると共に、この所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームが生成される。
選択部222では、CPU204の制御のもと、HDMI受信部202aで受信されたオーディオストリームまたはオーディオデコーダ221で得られた復号化済オーディオストリームが取り出される。この場合、選択部222では、HDMI受信部202aで受信されたオーディオストリームが符号化オーディオストリームであるときは、オーディオデコーダ221で得られた復号化済オーディオストリームが取り出される。一方、選択部222では、HDMI受信部202aで受信されたオーディオストリームが復号化済オーディオストリームであるときは、その復号化済オーディオストリームが取り出される。
これにより、選択部222からは、常に、復号化済オーディオストリームが取り出される。復号化済オーディオストリームは、自身の復号化能力が送信側の復号化能力以上であるときは、オーディオデコーダ221で生成されたものでる。また、この復号化済オーディオストリームは、自身の復号化能力が送信側の復号化能力以上でないときは、送信側のオーディオデコーダ(図2のオーディオデコーダ127参照)で生成されたものである。従って、この復号化済オーディオストリームは、符号化オーディオストリームに対して最適な復号化処理が適応されて得られたものとなる。
選択部222で取り出された復号化済オーディオストリームは、音声処理回路223に供給される。音声処理回路223では、復号化済オーディオストリームから所定チャネル数の非圧縮の音声データが取り出され、さらにアップ/ダウンミックス、D/A変換等の必要な処理が施され、必要なチャネル数の音声信号が得られる。そして、ミューティングがオフ状態にあるとき、音声処理回路223から出力される各チャネルの音声信号が音声増幅回路224で増幅されて音声出力端子225に出力される。そのため、音声出力端子225に接続されたスピーカシステム400から所定チャネル数の音声出力が得られる。
また、HDMI受信部202aで受信された非圧縮の画像データと、選択部222で取り出された復号化済オーディオストリームは、HDMI送信部202bに供給される。なお、HDMI受信部202aで受信された非圧縮の画像データそのものではなく、この画像データにグラフィックスデータの重畳等の処理が施された後の画像データがHDMI送信部202bに供給されてもよい。HDMI送信部202bでは、これらの画像データおよびオーディオストリームがパッキングされ、HDMI端子201bに出力される。
[テレビ受信機の構成例]
図6は、テレビ受信機300の構成例を示している。テレビ受信機300は、HDMI端子301と、HDMI受信部302を有している。また、テレビ受信機300は、内部バス303と、CPU304と、フラッシュROM305と、SDRAM(Synchronous RAM)306と、表示制御部307と、リモコン受信部308と、リモコン送信機309と、電源部310と、イーサネットインタフェース(Ethernet I/F)311と、ネットワーク端子312を有している。
また、テレビ受信機300は、アンテナ端子321と、デジタルチューナ322と、デマルチプレクサ323と、ビデオデコーダ324と、映像処理回路325と、グラフィック生成回路326と、パネル駆動回路327と、表示パネル328を有している。また、テレビ受信機300は、オーディオデコーダ329と、音声処理回路330と、音声増幅回路331と、スピーカ332を有している。CPU304、フラッシュROM305、SDRAM306、表示制御部307、イーサネットインタフェース311およびデマルチプレクサ323は、内部バス303に接続されている。
CPU304は、テレビ受信機300の各部の動作を制御する。フラッシュROM305は、制御ソフトウェアの格納およびデータの保管を行う。SDRAM306は、CPU304のワークエリアを構成する。CPU304は、フラッシュROM305から読み出したソフトウェアやデータをSDRAM306上に展開してソフトウェアを起動させ、テレビ受信機300の各部を制御する。
リモコン受信部308は、リモコン送信機309から送信されたリモートコントロール信号(リモコンコード)を受信し、CPU304に供給する。CPU304は、このリモコンコードに基づいて、テレビ受信機300の各部を制御する。なお、この実施の形態では、ユーザ指示入力部としてリモートコントロール部を示しているが、ユーザ指示入力部は、その他の構成、例えば、スイッチ、ホイール、近接/タッチにより指示入力を行うタッチパネル部、マウス、キーボード、カメラで指示入力を検出するジェスチャ入力部、音声により指示入力を行う音声入力部などであってもよい。
電源部310は、テレビ受信機300の各部に電源を供給する。なお、電源部310は、AC電源であっても、電池(蓄電池、乾電池)であってもよい。ネットワーク端子312は、ネットワークに接続する端子であり、イーサネットインタフェース311に接続される。イーサネットインタフェース311は、ネットワーク端子312を介して、ネットワーク接続をする。
HDMI受信部302は、HDMIに準拠した通信により、HDMIケーブルを介してHDMI端子301に供給される非圧縮の画像データと復号化済オーディオストリームを受信する。この復号化済オーディオストリームには、所定チャネル数の非圧縮の音声データが含まれている。このHDMI受信部302の詳細は後述する。
アンテナ端子321は、受信アンテナ(図示せず)で受信されたテレビ放送信号を入力する端子である。デジタルチューナ322は、アンテナ端子321に入力されたテレビ放送信号を処理して、ユーザの選択チャネルに対応したコンテンツデータである多重化ストリームを得る。
デマルチプレクサ323は、デジタルチューナ322で得られた多重化ストリームから符号化ビデオストリームおよび符号化オーディオストリームを抽出する。ビデオデコーダ324は、符号化ビデオストリームに対して復号化処理を行って、非圧縮の画像データを得る。映像処理回路325およびグラフィック生成回路326は、ビデオデコーダ324で得られた画像データ、あるいはHDMI受信部302で受信された画像データに対して、必要に応じてスケーリング処理(解像度変換処理)、グラフィックスデータの重畳処理等を行う。
パネル駆動回路327は、グラフィック生成回路326から出力される画像データに基づいて、表示パネル328を駆動する。表示制御部307は、グラフィクス生成回路326やパネル駆動回路327を制御して、表示パネル328における表示を制御する。表示パネル328は、例えば、LCD(Liquid Crystal Display)、PDP(Plasma Display Panel)、有機ELパネル(Organic Electro-Luminescence Panel)等で構成されている。
なお、この実施の形態では、CPU304の他に表示制御部307を有する例を示しているが、表示パネル328における表示をCPU304が直接制御するようにしてもよい。また、CPU304と表示制御部307は、1つのチップになっていても、複数コアであってもよい。
オーディオデコーダ329は、デマルチプレクサ323で抽出された符号化オーディオストリームに対して復号化処理を施し、所定チャネル数の非圧縮の音声データを得る。
音声処理回路330は、オーディオデコーダ329で得られた所定チャネル数の非圧縮の音声データに、スピーカ332の構成に応じたアップ/ダウンミックスやD/A変換等の必要な処理を施し、必要なチャネル数の音声信号を得る。あるいは、音声処理回路330は、HDMI受信部302で受信された復号化済オーディオストリームから所定チャネル数の非圧縮の音声データを取り出し、スピーカ332の構成に応じたアップ/ダウンミックスやD/A変換等の必要な処理を施し、必要なチャネル数の音声信号を得る。
音声増幅回路331は、音声処理回路330で得られた各チャネルのオーディオ信号を増幅してスピーカ332に供給する。なお、スピーカ332は、モノラルでもステレオでもよい。また、スピーカ332は、イヤホン、ヘッドホンでもよい。また、スピーカ332は、2.1チャネルや、5.1チャネルなどのマルチチャネル対応であってもよい。また、スピーカ332は、テレビ受信機300と無線で接続されてもよい。また、スピーカ332は、他機器であってもよい。
図6に示すテレビ受信機300の動作を簡単に説明する。HDMI受信部302では、HDMI端子301にオーディオアンプ200からHDMIケーブルを介して送信されてくる、非圧縮の画像データと復号化済オーディオストリームが受信される。復号化済オーディオストリームには、所定チャネル数の非圧縮の音声データが含まれている。非圧縮の画像データは、映像処理回路325に供給され、復号化済オーディオストリームは音声処理回路330に供給される。
また、アンテナ端子321に入力されたテレビ放送信号はデジタルチューナ322に供給される。このデジタルチューナ322では、テレビ放送信号が処理されて、ユーザの選択チャネルに対応したコンテンツデータである多重化ストリームが得られる。この多重化ストリームは、デマルチプレクサ323に供給される。
デマルチプレクサ323では、多重化ストリームから符号化ビデオストリームおよび符号化オーディオストリームが抽出される。符号化ビデオストリームはビデオデコーダ324に供給される。ビデオデコーダ324では、符号化ビデオストリームに対して復号化処理が施されて、非圧縮の画像データが得られる。この非圧縮の画像データは、映像処理回路325に供給される。
映像処理回路325およびグラフィック生成回路326では、ビデオデコーダ324で得られた画像データ、あるいはHDMI受信部302で受信された画像データに対して、必要に応じてスケーリング処理(解像度変換処理)、グラフィックスデータの重畳処理等が行われる。処理後の画像データは、パネル駆動回路327に供給され、表示パネル328には、その画像データに対応した画像が表示される。
また、デマルチプレクサ323で抽出された符号化オーディオストリームは、オーディオデコーダ329に供給される。オーディオデコーダ329では、符号化オーディオストリームに対して復号化処理が施されて、所定チャネル数の非圧縮の音声データが得られる。この所定チャネル数の非圧縮の音声データは、音声処理回路330に供給される。
音声処理回路330では、オーディオデコーダ329で得られた所定チャネル数の非圧縮の音声データに、スピーカ332の構成に応じたアップ/ダウンミックスやD/A変換等の必要な処理が施されて、必要なチャネル数の音声信号が得られる。あるいは、この音声処理回路330では、HDMI受信部302で受信された復号化済オーディオストリームから所定チャネル数の非圧縮の音声データが取り出された後に、スピーカ332の構成に応じたアップ/ダウンミックスやD/A変換等の必要な処理が施されて、必要なチャネル数の音声信号が得られる。
音声処理回路330で得られた所定チャネル数の音声信号は、音声増幅回路331で増幅された後に、スピーカ332に供給される。そのため、スピーカ332から、表示パネル328の画像表示に対応した、モノラル、ステレオあるいはマルチチャネルの音声が出力される。
「HDMI送信部/受信部の構成例」
図7は、図1のAVシステム10における、BDプレーヤ100のHDMI送信部102とオーディオアンプ200のHDMI受信部202aの構成例を示している。なお、オーディオアンプ200のHDMI送信部202bとテレビ受信機300のHDMI受信部302の構成例に関しては、同様の構成となるので、説明は省略する。
HDMI送信部102は、一の垂直同期信号から次の垂直同期信号までの区間から、水平帰線区間22および垂直帰線区間23を除いた区間である有効画像区間21(以下、適宜、「アクティブビデオ区間」ともいう)(図8参照)において、非圧縮の1画面分の画像の画素データに対応する差動信号を、複数のチャネルで、HDMI受信部202aに一方向に送信する。また、HDMI送信部102は、水平帰線区間22または垂直帰線区間23において、少なくとも画像に付随する音声データや制御データ、その他の補助データ等に対応する差動信号を、複数のチャネルで、HDMI受信部202aに一方向に送信する。
すなわち、HDMI送信部102は、HDMIトランスミッタ31を有する。トランスミッタ31は、例えば、非圧縮の画像の画素データを対応する差動信号に変換し、複数のチャネルである3つのTMDS(Transition Minimized Differential Signaling)チャネル#0,#1,#2で、HDMI受信部202aに、一方向にシリアル伝送する。
また、トランスミッタ31は、非圧縮の画像に付随する音声データ、さらには、必要な制御データその他の補助データ等を、対応する差動信号に変換し、3つのTMDSチャネル#0,#1,#2で、HDMI受信部202aに一方向にシリアル伝送する。
HDMI受信部202aは、アクティブビデオ区間21(図8参照)において、複数のチャネルで、HDMI送信部102から一方向に送信されてくる、画素データに対応する差動信号を受信する。また、HDMI受信部202aは、水平帰線区間22(図8参照)または垂直帰線区間23(図8参照)において、複数のチャネルで、HDMI送信部102から一方向に送信されてくる、音声データや制御データに対応する差動信号を受信する。
HDMI送信部102とHDMI受信部202aとからなるHDMIシステムの伝送チャネルには、画素データおよび音声データを伝送するための伝送チャネルとしての3つのTMDSチャネル#0乃至#2と、ピクセルクロックを伝送する伝送チャネルとしてのTMDSクロックチャネルの他に、DDC(Display Data Channel)33やCEC(Consumer Electronics Control)ライン34と呼ばれる伝送チャネルがある。
DDC33は、HDMIケーブル510に含まれる2本の信号線からなり、HDMI送信部102が、HDMIケーブル510を介して接続されたHDMI受信部202aから、EDID(Extended Display Identification Data)を読み出すために使用される。すなわち、HDMI受信部202aは、HDMIレシーバ32の他に、自身の性能(Configuration・Capability)に関する性能情報であるEDIDを記憶している、EDID ROM(Read Only Memory)を有している。オーディオアンプ200においては、このEDIDの一つとして復号化能力情報(図3参照)が記録されている。HDMI送信部102がEDIDを読み出すことで、受信側の復号化能力情報が送信側に送られることになる。
HDMI送信部102は、HDMIケーブル510を介して接続されているHDMI受信部202aから、EDIDを、DDC33を介して読み出す。そして、BDプレーヤ100のCPU104は、そのEDIDに基づき、HDMI受信部202aを有するオーディオアンプ200の性能を認識する。
CECライン34は、HDMIケーブル510に含まれる1本の信号線からなり、HDMI送信部102とHDMI受信部202aとの間で、制御用のデータの双方向通信を行うために用いられる。また、HDMIケーブル510には、HPD(Hot Plug Detect)と呼ばれるピンに接続されるHPDライン35が含まれている。
ソース機器は、このHPDライン35を利用して、直流バイアス電位により、シンク機器の接続を検出することができる。この場合、HPDライン35は、ソース機器側から見ると、直流バイアス電位によってシンク機器から接続状態の通知を受ける機能を有するものとなる。一方、このHPDラインは、シンク機器側から見ると、直流バイアス電位によってソース機器に接続状態を通知する機能を有するものとなる。
また、HDMIケーブル510には、ソース機器からシンク機器に電源を供給するために用いられる電源ライン36が含まれている。さらに、HDMIケーブル510には、リザーブライン37が含まれている。HPDライン35とリザーブライン37を用い て、一対の差動伝送路を構成し、双方向通信路として用いる場合もある。
図8は、TMDSチャネルにおいて、横×縦が1920ピクセル×1080ラインの画像データが伝送される場合の、各種の伝送データの区間を示している。HDMIの3つのTMDSチャネルで伝送データが伝送されるビデオフィールド(Video Field)には、伝送データの種類に応じて、ビデオデータ区間24(Video Data Period)、データアイランド区間25(Data Island Period)、およびコントロール区間26(Control Period)の3種類の区間が存在する。
ここで、ビデオフィールド区間は、ある垂直同期信号の立ち上がりエッジ(Active Edge)から次の垂直同期信号の立ち上がりエッジまでの区間であり、水平帰線期間22(Horizontal Blanking)、垂直帰線期間23(Vertical Blanking)、並びに、ビデオフィールド区間から、水平帰線期間および垂直帰線期間を除いた区間である有効画素区間21(Active Video)に分けられる。
ビデオデータ区間24は、有効画素区間21に割り当てられる。このビデオデータ区間24では、非圧縮の1画面分の画像データを構成する1920ピクセル(画素)×1080ライン分の有効画素(Active Pixel)のデータが伝送される。データアイランド区間25およびコントロール区間26は、水平帰線期間22および垂直帰線期間23に割り当てられる。このデータアイランド区間25およびコントロール区間26では、補助データ(Auxiliary Data)が伝送される。
すなわち、データアイランド区間25は、水平帰線期間22と垂直帰線期間23の一部分に割り当てられている。このデータアイランド区間25では、補助データのうち、制御に関係しないデータである、例えば、音声データのパケット等が伝送される。コントロール区間26は、水平帰線期間22と垂直帰線期間23の他の部分に割り当てられている。このコントロール区間26では、補助データのうちの、制御に関係するデータである、例えば、垂直同期信号および水平同期信号、制御パケット等が伝送される。
上述したように、図1に示すAVシステム10において、BDプレーヤ100はオーディオアンプ200に、HDMIのデジタルインタフェースを介して、受信側の復号化能力が自身の復号化能力以上であるときは符号化ストリームを送信し、受信側の復号化能力が自身の復号化能力以上でないときは復号化済ストリームを送信するものである。そのため、符号化ストリームに対して最適な復号化処理の適用が可能となり、ユーザはオーディオアンプ200に接続されているスピーカシステム400から最適な状態の音声出力を得ることができる。
また、図1に示すAVシステム10において、BDプレーヤ100はオーディオアンプ200から復号化能力情報を受信して、受信側の復号化能力が自身の復号化能力以上であるか否かを判断し、符号化ストリームを送信するか復号化済ストリームを送信するかを決定する。そのため、ユーザは、何等かの操作が課されることなく、オーディオアンプ200に接続されているスピーカシステム400から最適な状態の音声出力を得ることができる。
<2.変形例>
なお、上述実施の形態においては、優先度情報を持つ複数の符号化データを含む符号化ストリームがオブジェクトベースオーディオの符号化オーディオストリームである例を示した。本技術は、優先度情報を持つ複数の符号化ビデオデータを含む符号化ビデオストリームを取り扱う場合にも同様に適用できることは勿論である。この場合、符号化ビデオストリームに対する復号化処理は、送信側と受信側のうち復号化能力の高い方で行われる。
また、上述実施の形態においては、HDMIのデジタルインタフェースである例を示したが、デジタルインタフェースはHDMIに限定されない。
また、技術は、以下のような構成もとることができる。
(1)優先度情報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得部と、
上記ストリーム取得部で取得された符号化ストリームに復号化処理を施して復号化済データを含む復号化済ストリームを生成するデコード部と、
何番目の優先度まで復号化可能かを示す受信側の復号化能力情報に基づいて上記受信側の復号化能力が自身の復号化能力以上か否かを判断する判断部と、
上記受信側に、デジタルインタフェースを介して、上記判断部で上記受信側の復号化能力が自身の復号化能力以上であると判断されたときは上記ストリーム取得部で取得された符号化ストリームを送信し、上記判断部で上記受信側の復号化能力が自身の復号化能力以上でないと判断されたときは上記デコード部で生成された復号化済ストリームを送信する送信部を備える
送信装置。
(2)上記符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、
上記デコード部は、上記ストリーム取得部で取得された上記符号化オーディオストリームに復号化処理を施して上記復号化済データとして所定チャネル数の音声データを含む復号化済オーディオストリームを生成する
前記(1)に記載の送信装置。
(3)上記受信側から、上記デジタルインタフェースを介して、上記受信側の復号化能力情報を受信する情報受信部をさらに備える
前記(1)または(2)に記載の送信装置。
(4)上記デジタルインタフェースはHDMIである
前記(1)から(3)のいずれかに記載の送信装置。
(5)優先度報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得ステップと、
何番目の優先度まで復号化可能かを示す受信側の復号化能力情報に基づいて上記受信側の復号化能力が自身の復号化能力以上か否かを判断する判断ステップと、
送信部により、上記受信側に、デジタルインタフェースを介して、上記判断ステップで上記受信側の復号化能力が自身の復号化能力以上であると判断されたときは上記ストリーム取得ステップで取得された符号化ストリームを送信し、上記判断ステップで上記受信側の復号化能力が自身の復号化能力以上でないと判断されたときは上記ストリーム取得ステップで取得された符号化ストリームに復号化処理を施して生成された、復号化済データを持つ復号化済ストリームを送信する送信ステップを有する
送信方法。
(6)何番目の優先度まで復号化可能かを示す自身の復号化能力情報を、デジタルインタフェースを介して、送信側に送信する情報送信部と、
上記送信側から、上記デジタルインタフェースを介して、優先度情報を持つ複数の符号化データを含む符号化ストリームまたは該符号化ストリームに復号化処理が施されて生成された復号化済データを持つ復号化済ストリームを受信する受信部と、
上記受信部で上記符号化ストリームが受信されたとき、該符号化ストリームに復号化処理を施して復号化済データを含む復号化済ストリームを生成するデコード部を備える
受信装置。
(7)上記符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、
上記復号化済ストリームは、上記符号化オーディオストリームに復号化処理が施されて生成された所定チャネル数の音声データを上記復号化済みデータとして含む
前記(6)に記載の受信装置。
(8)上記デジタルインタフェースはHDMIである
前記(6)または(7)に記載の受信装置。
(9)何番目の優先度まで復号化可能かを示す自身の復号化能力情報を、デジタルインタフェースを介して、送信側に送信する情報送信ステップと、
受信部により、上記送信側から、上記デジタルインタフェースを介して、優先度情報を持つ複数の符号化データを含む符号化ストリームまたは該符号化ストリームに復号化処理が施されて生成された復号化済データを持つ復号化済ストリームを受信する受信ステップと、
上記受信ステップで上記符号化ストリームが受信されたとき、該符号化ストリームに復号化処理を施して復号化済データを含む復号化済ストリームを生成するデコードステップを有する
受信方法。
10・・・・AVシステム
100・・・BDプレーヤ
101・・・HDMI端子
102・・・HDMI送信部
103・・・内部バス
104・・・CPU
105・・・フラッシュROM
106・・・SDRAM
107・・・表示制御部
108・・・リモコン受信部
109・・・リモコン送信機
111・・・記憶媒体制御インタフェース
112・・・BDドライブ
113・・・HDD
114・・・SSD
115・・・イーサネットインタフェース
116・・・ネットワーク端子
121・・・デマルチプレクサ
122・・・ビデオデコーダ
123・・・グラフィック生成回路
124・・・映像出力端子
125・・・パネル駆動回路
126・・・表示パネル
127・・・オーディオデコーダ
128・・・選択部
129・・・音声出力端子
131・・・電源部
200・・・オーディオアンプ
201a,201b・・・HDMI端子
202a・・・HDMI受信部
202b・・・HDMI送信部
203・・・内部バス
204・・・CPU
205・・・フラッシュROM
206・・・SDRAM
207・・・表示制御部
208・・・パネル駆動回路
209・・・表示パネル
210・・・リモコン受信部
211・・・リモコン送信機
212・・・電源部
221・・・オーディオデコーダ
222・・・選択部
223・・・音声処理回路
224・・・音声増幅回路
225・・・音声出力端子
300・・・テレビ受信機
301・・・HDMI端子
302・・・HDMI受信部
303・・・内部バス
304・・・CPU
305・・・フラッシュROM
306・・・SDRAM
307・・・表示制御部
308・・・リモコン受信部
309・・・リモコン送信機
310・・・電源部
311・・・イーサネットインタフェース
312・・・ネットワーク端子
321・・・アンテナ端子
322・・・デジタルチューナ
323・・・デマルチプレクサ
324・・・ビデオデコーダ
325・・・映像処理回路
326・・・グラフィック生成回路
327・・・パネル駆動回路
328・・・表示パネル
329・・・オーディオデコーダ
330・・・音声処理回路
331・・・音声増幅回路
332・・・スピーカ
400・・・スピーカシステム
510,520・・・HDMIケーブル

Claims (9)

  1. 優先度情報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得部と、
    何番目の優先度まで復号化可能かで示される受信側の復号化能力が何番目の優先度まで復号化可能かで示される自身の復号化能力以上か否かを判断する判断部と、
    上記受信側に、デジタルインタフェースを介して、上記判断部で上記受信側の復号化能力が自身の復号化能力以上であると判断されたときは上記ストリーム取得部で取得された符号化ストリームを送信し、上記判断部で上記受信側の復号化能力が自身の復号化能力以上でないと判断されたときは上記ストリーム取得部で取得された符号化ストリームに復号化処理を施して生成された復号化済データを持つ復号化済ストリームを送信する送信部を備える
    送信装置。
  2. 上記符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、
    上記復号化済ストリームは、上記符号化オーディオストリームに復号化処理を施して生成された所定チャネル数の音声データを上記復号化済データとして
    請求項1に記載の送信装置。
  3. 上記受信側から、上記デジタルインタフェースを介して、上記受信側の復号化能力の情報を受信する情報受信部をさらに備える
    請求項1または2に記載の送信装置。
  4. 上記デジタルインタフェースはHDMIである
    請求項1から3のいずれかに記載の送信装置。
  5. 優先度報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得ステップと、
    何番目の優先度まで復号化可能かで示される受信側の復号化能力が何番目の優先度まで復号化可能かで示される自身の復号化能力以上か否かを判断する判断ステップと、
    送信部により、上記受信側に、デジタルインタフェースを介して、上記判断ステップで上記受信側の復号化能力が自身の復号化能力以上であると判断されたときは上記ストリーム取得ステップで取得された符号化ストリームを送信し、上記判断ステップで上記受信側の復号化能力が自身の復号化能力以上でないと判断されたときは上記ストリーム取得ステップで取得された符号化ストリームに復号化処理を施して生成された復号化済データを持つ復号化済ストリームを送信する送信ステップを有する
    送信方法。
  6. 何番目の優先度まで復号化可能かで示される自身の復号化能力の情報を、デジタルインタフェースを介して、送信側に送信する情報送信部と、
    上記送信側から、上記デジタルインタフェースを介して、優先度情報を持つ複数の符号化データを含む符号化ストリームまたは該符号化ストリームに復号化処理が施されて生成された復号化済データを持つ復号化済ストリームを受信する受信部と、
    上記受信部で上記符号化ストリームが受信されたとき、該符号化ストリームに復号化処理を施して復号化済データを含む復号化済ストリームを生成するデコード部を備える
    受信装置。
  7. 上記符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、
    上記復号化済ストリームは、上記符号化オーディオストリームに復号化処理が施されて生成された所定チャネル数の音声データを上記復号化済データとして含む
    請求項6に記載の受信装置。
  8. 上記デジタルインタフェースはHDMIである
    請求項6または7に記載の受信装置。
  9. 何番目の優先度まで復号化可能かで示される自身の復号化能力の情報を、デジタルインタフェースを介して、送信側に送信する情報送信ステップと、
    受信部により、上記送信側から、上記デジタルインタフェースを介して、優先度情報を持つ複数の符号化データを含む符号化ストリームまたは該符号化ストリームに復号化処理が施されて生成された復号化済データを持つ復号化済ストリームを受信する受信ステップと、
    上記受信ステップで上記符号化ストリームが受信されたとき、該符号化ストリームに復号化処理を施して復号化済データを含む復号化済ストリームを生成するデコードステップを有する
    受信方法。
JP2017510973A 2015-04-08 2016-04-04 送信装置、送信方法、受信装置および受信方法 Active JP6904250B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015078962 2015-04-08
JP2015078962 2015-04-08
PCT/JP2016/060985 WO2016163327A1 (ja) 2015-04-08 2016-04-04 送信装置、送信方法、受信装置および受信方法

Publications (2)

Publication Number Publication Date
JPWO2016163327A1 JPWO2016163327A1 (ja) 2018-02-01
JP6904250B2 true JP6904250B2 (ja) 2021-07-14

Family

ID=57072520

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017510973A Active JP6904250B2 (ja) 2015-04-08 2016-04-04 送信装置、送信方法、受信装置および受信方法

Country Status (3)

Country Link
US (1) US10477269B2 (ja)
JP (1) JP6904250B2 (ja)
WO (1) WO2016163327A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10885921B2 (en) * 2017-07-07 2021-01-05 Qualcomm Incorporated Multi-stream audio coding

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1816868B1 (en) * 2004-11-25 2010-05-19 Panasonic Corporation Repeater apparatus and method for controlling the same
WO2010109918A1 (ja) * 2009-03-26 2010-09-30 パナソニック株式会社 復号化装置、符号化復号化装置および復号化方法
US9412330B2 (en) * 2011-03-15 2016-08-09 Lattice Semiconductor Corporation Conversion of multimedia data streams for use by connected devices
CN103650536B (zh) 2011-07-01 2016-06-08 杜比实验室特许公司 上混合基于对象的音频
JP2013135454A (ja) * 2011-12-27 2013-07-08 Toshiba Corp 電子機器、及び電子機器相互の映像および音声の出力方法
WO2014088328A1 (ko) 2012-12-04 2014-06-12 삼성전자 주식회사 오디오 제공 장치 및 오디오 제공 방법
JP6439296B2 (ja) * 2014-03-24 2018-12-19 ソニー株式会社 復号装置および方法、並びにプログラム
US9948994B2 (en) * 2014-07-16 2018-04-17 Crestron Electronics, Inc. Transmission of digital audio signals using an internet protocol

Also Published As

Publication number Publication date
JPWO2016163327A1 (ja) 2018-02-01
US10477269B2 (en) 2019-11-12
WO2016163327A1 (ja) 2016-10-13
US20180069911A1 (en) 2018-03-08

Similar Documents

Publication Publication Date Title
US11716189B2 (en) Interface circuit and information processing system
US8898347B2 (en) Repeater device and control method
JP6863282B2 (ja) 受信装置および受信方法
US20130053992A1 (en) Device control apparatus, device control method, and program
US9973787B2 (en) Communication device and communication method
JP6589875B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6809470B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6777071B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6904250B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6973403B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6973402B2 (ja) 送信装置、送信方法、受信装置および受信方法
WO2016052185A1 (ja) 送信装置、送信方法、受信装置および受信方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190315

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190315

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200407

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200605

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201013

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201210

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210525

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210607

R151 Written notification of patent or utility model registration

Ref document number: 6904250

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151