Nothing Special   »   [go: up one dir, main page]

JP5007681B2 - 放送システム - Google Patents

放送システム Download PDF

Info

Publication number
JP5007681B2
JP5007681B2 JP2008032673A JP2008032673A JP5007681B2 JP 5007681 B2 JP5007681 B2 JP 5007681B2 JP 2008032673 A JP2008032673 A JP 2008032673A JP 2008032673 A JP2008032673 A JP 2008032673A JP 5007681 B2 JP5007681 B2 JP 5007681B2
Authority
JP
Japan
Prior art keywords
information
image
data
unit
material data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008032673A
Other languages
English (en)
Other versions
JP2009194594A5 (ja
JP2009194594A (ja
Inventor
哲二郎 近藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2008032673A priority Critical patent/JP5007681B2/ja
Application filed by Sony Corp filed Critical Sony Corp
Priority to CN200980104689XA priority patent/CN101939988B/zh
Priority to US12/735,489 priority patent/US8767067B2/en
Priority to RU2010132906/07A priority patent/RU2454024C2/ru
Priority to BRPI0907897-5A priority patent/BRPI0907897A2/pt
Priority to KR1020107017592A priority patent/KR20100121614A/ko
Priority to EP09711145A priority patent/EP2242271A4/en
Priority to PCT/JP2009/052363 priority patent/WO2009101997A1/ja
Publication of JP2009194594A publication Critical patent/JP2009194594A/ja
Publication of JP2009194594A5 publication Critical patent/JP2009194594A5/ja
Application granted granted Critical
Publication of JP5007681B2 publication Critical patent/JP5007681B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/09—Arrangements for device control with a direct linkage to broadcast information or to broadcast space-time; Arrangements for control of broadcast-related services
    • H04H60/13—Arrangements for device control affected by the broadcast information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4131—Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/28—Arrangements for simultaneous broadcast of plural pieces of information

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Circuits (AREA)
  • Television Signal Processing For Recording (AREA)

Description

本発明は、放送システムに関し、特に、例えば、放送システムの受信側において、適切な処理を行うことができるようにする放送システムに関する。
例えば、現行の、アナログ放送やディジタル放送の放送システムでは、送信側である放送局において、素材データとしての画像や音声が編集され、その編集後の画像及び音声が、番組として放送される。
一方、受信側である、例えば、各家庭では、TV(テレビジョン受像機)等によって、放送局からの番組の出力、すなわち、番組としての画像の表示、及び、音声の出力が行われる。
なお、１本の番組に注目した場合、現行の放送システムでは、放送局での編集の結果得られる１種類の画像、及び音声が、１本の番組として放送される。したがって、受信側のユーザは、１種類の画像、及び音声しか楽しむことができない。
しかしながら、例えば、ドラマ番組等の１本の番組について、ユーザの好みの登場人物からの視点でそのドラマ番組の展開を見たいという要求や、見方によってはストーリ展開そのものが異なるようにしたいという、ユーザ参加型の要求が潜在的に存在する。
そこで、本件出願人は、予め用意された視点の異なる複数の素材を、ユーザが任意に選択してモニタすることができるディジタル放送受信装置を、先に提案している（例えば、特許文献１を参照）。
特開2006-217662号公報
ところで、放送局では、例えば、上述のように、画像や音声が編集されるが、その編集は、受信側のTVの、画像を表示する表示画面を考慮して行われるものではない。
したがって、受信側のTVの表示画面が大である場合には、TVにおいて、人の顔が、実際に見た場合の大きさよりも大きく表示され、臨場感が薄れることがある。
また、受信側のTVでは、例えば、上述のように、放送局で編集がされた、編集後の画像及び音声が表示等される。
したがって、例えば、放送局において、多数のテロップが、画像に合成される編集が行われた場合には、テロップによる演出を不要と感じるユーザ（視聴者）であっても、多数のテロップが合成された画像を視聴しなければならない。
本発明は、このような状況に鑑みてなされたものであり、放送システムの受信側において、適切な処理を行うことができるようにし、これにより、例えば、ユーザに臨場感を感じさせることや、ユーザの好みに合った画像を表示すること等ができるようにするものである。
本発明の一側面の放送システムは、データを送信する送信装置と、前記データを受信する受信装置とからなる放送システムであり、前記送信装置は、カメラで撮影された画像を素材データとして送信すると共に、前記カメラの撮影範囲を表す撮影範囲情報を含む、前記受信装置で前記素材データを加工するために用いられる付加情報を送信する送信手段を有し、前記受信装置は、前記素材データと前記付加情報とを受信する受信手段と、前記素材データ、前記付加情報、及び表示装置の表示画面の大きさを表す大きさ情報を含む、前記表示装置の特性を表す特性情報に基づいて、前記表示装置で表示される画像から認識される物体の大きさが、実世界での大きさに同定されるように、前記表示装置に表示させる画像を出力データとして生成する生成手段と、前記生成手段により前記出力データとして生成された前記画像を表示する前記表示装置を含む、出力手段とを有する放送システムである。
以上のような一側面においては、前記送信装置において、カメラで撮影された画像が素材データとして送信されると共に、前記カメラの撮影範囲を表す撮影範囲情報を含む、前記受信装置で前記素材データを加工するために用いられる付加情報が送信される。前記受信装置では、前記素材データと前記付加情報とが受信され、前記素材データ、前記付加情報、及び表示装置の表示画面の大きさを表す大きさ情報を含む、前記表示装置の特性を表す特性情報に基づいて、前記表示装置で表示される画像から認識される物体の大きさが、実世界での大きさに同定されるように、前記表示装置に表示させる画像を出力データとして生成される。そして、前記出力データとして生成された前記画像が表示される表示装置が含まれる。
また、送信装置、又は、受信装置は、独立した装置であっても良いし、１つの装置を構成している内部ブロックであっても良い。
さらに、データの送信（放送）（伝送）は、有線、又は、無線のうちのいずれの伝送媒体を介して行うこともできるし、有線、及び、無線が混在する伝送媒体を介して行うこともできる。
本発明の一側面によれば、放送システムの受信側において、適切な処理を行うことができる。
図１は、本発明を適用した放送システム（システムとは、複数の装置が論理的に集合した物をいい、各構成の装置が同一筐体中にあるか否かは、問わない）の一実施の形態の構成例を示している。
図１において、放送システムは、送信装置１１と受信装置１２とから構成されている。
送信装置１１は、例えば、放送局に設置され、番組としての各種のデータを、地上波や衛星回線、インターネット、CATV(Cable Television)網等の伝送媒体１３を介して送信する。
受信装置１２は、例えば、家庭等に設置され、送信装置１１から伝送媒体１３を介して送信されてくるデータを受信する。
なお、受信装置１２は、例えば、TV等として機能することができる。
また、放送システムにおいて、送信装置１１は、１つだけではなく、複数設けることができる。受信装置１２も同様である。
図２は、図１の送信装置１１の構成例を示している。
図２において、送信装置１１は、センサ部３１、編集装置３２、符号化部３３、及び送信部３４から構成されている。
なお、センサ部１１や編集装置３２は、送信装置１１とは別個の装置とすることができる。
センサ部３１は、編集装置３２での編集の素材となる素材データを取得し、編集装置３２、及び、符号化部３３に供給する。
ここで、センサ部３１としては、１種類の１つのセンサや、１種類の複数のセンサ、複数種類のセンサを採用することができる。
また、センサの種類としては、例えば、光をセンシングし、画像を出力する（撮影を行う）カメラ、音をセンシングし、音声を出力する（集音を行う）マイクロフォン、その他、温度や、湿度、風向き、風速、振動、明るさ等をそれぞれセンシングするセンサがある。
カメラによれば、撮影がされ、画像（データ）が、素材データとして出力される。また、マイクロフォンによれば、集音が行われ、音声（データ）が、素材データとして出力される。その他、温度、湿度、風向き、風速、振動、又は、明るさをそれぞれセンシングするセンサによれば、温度、湿度、風向き、風速、振動、又は、明るさを表すデータが、素材データとして出力される。
編集装置３２は、センサ部３１からの素材データに基づき、受信装置１２で素材データを加工するために用いられる付加情報を生成し、符号化部３３に供給する。
ここで、付加情報には、センサ部３１によるセンシングが行われた対象についての実世界の物理量を表す実世界情報と、素材データの加工に用いられる情報であるエフェクト情報とが含まれる。
エフェクト情報は、例えば、放送局において、番組の制作を行う番組制作者が、編集装置３２を操作することにより、その操作に従って生成される。
実世界情報は、番組制作者の操作に関係なく生成される。
なお、編集装置３２において、付加情報は、例えば、１種類の素材データごとに生成される。したがって、センサ部３１において、複数種類のセンサが採用されており、センサ部３１から、符号化部３３に対して、複数種類の素材データが供給される場合には、編集装置３２から、符号化部３３に対しては、その複数種類の素材データの各種類に対応する付加情報が供給される。
符号化部３３は、センサ部３１からの素材データと、編集装置３２からの付加情報とを符号化する。なお、符号化部３３は、必要に応じて、素材データ及び符号化データの多重化を行う。そして、符号化部３３は、符号化の結果得られる符号化データを、送信部３４に供給する。
送信部３４は、符号化部３３からの符号化データ、すなわち、センサ部３１で取得した素材データと、編集装置３２で生成した付加情報とを、伝送媒体１３（図１）を介して送信する。
次に、編集装置３２で生成される付加情報のうちのエフェクト情報について説明する。
図３は、素材データと、その素材データに対するエフェクト情報とを示している。
すなわち、図３Ａは、素材データとしての、複数ストリームの画像（動画）を示している。
例えば、ある番組の画像が、複数であるN個のストリームの画像S#1，S#2，・・・，S#Nを編集して構成される場合、その番組の画像については、そのN個のストリームの画像S#1ないしS#Nが、素材データとなる。
ここで、N個のストリームの画像S#1ないしS#Nは、N個のセンサとしてのN個のカメラで、それぞれ取得した画像であっても良いし、N個未満（かつ１個以上）のM個のセンサとしてのM(<N)個のカメラで取得した画像であっても良い。
すなわち、N個のストリームの画像S#1ないしS#Nとしては、例えば、１個のカメラで、異なる時間に、異なる場所の風景を撮影して得られるN個のストリームの画像を採用することができる。
また、N個のストリームの画像S#1ないしS#Nとしては、例えば、N個のカメラで、オーケストラの全体、指揮者、特定の楽器の演奏者、観客席等を、それぞれ撮影して得られるN個のストリームの画像や、サッカー等のスポーツ中継において、競技場全体、スコアボード、特定の選手、観客席等を、それぞれ撮影して得られるN個のストリームの画像、音楽番組等において、スタジオ全体、各出演者等を、それぞれ撮影して得られるN個のストリームの画像等を採用することができる。
図３Ｂは、図３Ａの素材データであるN個のストリームの画像S#1ないしS#Nに対するエフェクト情報を示している。
エフェクト情報としては、例えば、切り替え情報、表示画枠情報、及び合成用データ等がある。
切り替え情報は、例えば、素材データであるN個のストリームの画像S#1ないしS#Nから、１つのストリームの画像を選択することにより、受信装置１２の、後述する表示装置に表示する画像を切り替えるための情報である。
表示画枠情報は、例えば、素材データである画像（図３では、画像S#1ないしS#Nのうちのいずれか）のうちの、受信装置１２の表示装置に表示する部分の領域を表す。
合成用データは、例えば、素材データである画像（図３では、画像S#1ないしS#Nのうちのいずれか）との合成に用いられるデータで、その画像に合成される被合成データを含む。
ここで、被合成データとしては、ピクチャインピクチャの子画面の画像（以下、PinP画像という）のデータ（ピクチャインピクチャ用のデータ）や、テロップのデータ（字幕のデータ）等がある。
次に、図４を参照して、図３のエフェクト情報のうちの切り替え情報について説明する。
切り替え情報は、例えば、上述したように、ある番組Aの画像が、N個のストリームの画像S#1ないしS#Nを編集して構成される場合、そのN個のストリームの画像S#1ないしS#Nから、１つのストリームの画像を選択することにより、受信装置１２の表示装置に表示する画像を切り替えるための情報である。
例えば、図２の編集装置３２において、番組制作者の操作に応じて、図４に示すように、素材データである画像S#1のタイムコードts1ないしte1、素材データである画像S#2のタイムコードts2ないしte2、素材データである画像S#3のタイムコードts3ないしte3、素材データである画像S#1のタイムコードts4ないしte4、・・・の範囲を、順次つなぎ合わせるカット編集が行われることによって、ある番組A（の画像）が制作された場合、例えば、番組Aの各時刻において、番組Aの画像となる素材データと、その素材データのタイムコードとを特定する情報が、切り替え情報となる。
なお、編集装置３２において、例えば、ある画像S#iと、他の画像#i'とのつなぎ目（いわゆる編集点）に、ワイプ等の特殊効果が施された場合には、切り替え情報には、その特殊効果に関する情報も含められる。
次に、図５を参照して、図３のエフェクト情報のうちの表示画枠情報について説明する。
表示画枠情報は、例えば、上述したように、素材データである画像のうちの、受信装置１２の表示装置に表示する部分の領域を表す。
すなわち、例えば、素材データが、画像である場合、編集装置３２では、番組制作者の操作に応じて、図５に示すように、素材データである画像の一部分の矩形の領域を、受信装置１２の表示装置に表示する部分の領域（以下、表示用領域ともいう）として、番組の画像とする編集を行うことができるようになっている。
この場合、編集装置３２によれば、番組制作者は、素材データである画像の領域を最大限として、その領域内において、カメラを、番組制作者自身が、パンや、チルト、ズームの操作をして撮影を行ったかのような番組を制作することができる。
ここで、表示用領域の最大は、素材データである画像の領域である。したがって、センサ部３１（図２）としてのカメラを、最大画角（最も広角側）にして撮影を行うことにより、表示用領域を、最も大きくすることができる。
なお、表示画角情報としては、表示用領域を特定することができる情報であれば、どのような情報であっても良い。
すなわち、表示画角情報としては、例えば、素材データである画像の領域を基準とする座標系を定義し、その座標系における、表示用領域の１つの頂点と、その頂点の対角にある頂点との座標や、表示用領域の１の頂点の座標と、表示用領域の横及び縦の長さ等を採用することができる。
また、表示画角情報としては、例えば、所定の位置の、所定の大きさの表示用領域を、デフォルトの表示用領域として、そのデフォルトの表示用領域に対して、番組制作者が編集として行ったパン、チルト、及びズームの操作の履歴を採用することができる。
次に、図６を参照して、図３のエフェクト情報のうちの合成用データについて説明する。
合成用データは、上述したように、素材データとの合成に用いられるデータで、素材データに合成される被合成データと、その被合成データを用いた合成を行うタイミングを表すタイミング情報とを含む。
すなわち、例えば、素材データが、画像であり、図２の編集装置３２において、番組制作者の操作に応じて、素材データである画像に、PinP画像やテロップを重畳（合成）する編集が行われることによって、番組が制作された場合、そのPinP画像や、テロップが、被合成データとなる。
また、被合成データとしてのPinP画像や、テロップを重畳している時間（例えば、重畳を開始する時刻と、重畳を終了する時刻）を表す、例えば、番組のタイムコードが、タイミング情報となる。
なお、合成用データは、その他、例えば、被合成データとしてのPinP画像や、テロップを重畳する画像上の位置を表す情報等を含む。
また、例えば、素材データが、音声である場合には、BGM(Background Music)等が、被合成データとなる。
ある種類の素材データが、音声であり、その音声が、他の種類の素材データである画像（動画）に付随する音声である場合には、音声に合成されるBGMのタイミング情報としては、その音声を基準とする時刻を表す情報を採用することもできるし、その音声に付随する画像のタイムコードを採用することもできる。
次に、編集装置３２（図２）で生成される付加情報のうちの実世界情報について説明する。
実世界情報は、上述したように、センサ部３１（図２）によるセンシングが行われた対象についての実世界の物理量を表す情報であり、例えば、センサ部３１がカメラである場合に、そのカメラで撮影する撮影対象（以下、撮影オブジェクトともいう）の位置における撮影範囲を表す撮影範囲情報等が、実世界情報に含まれる。
ここで、図７を参照して、カメラの撮影範囲について説明する。
図７は、カメラで撮影を行っている状態を模式的に示す上面図である。
いま、説明を簡単にするために、カメラの光学系（レンズ群）に歪みがないこととし、カメラの水平方向の画角（以下、カメラ画角ともいう）を、θとするとともに、カメラから撮影オブジェクトまでの距離（以下、オブジェクト距離ともいう）を、Xとする。
なお、カメラ画角θは、既知であることとする。
また、オブジェクト距離Xは、例えば、いわゆるオートフォーカスの技術を利用して測定される。
すなわち、オブジェクト距離Xは、例えば、赤外線センサや、ソナーを用いて測定することができる。また、オブジェクト距離Xは、カメラで撮影される画像のコントラストを最大にするように、フォーカスを調整するコントラスト検知式や、カメラで撮影される画像の位相差をなくすように、フォーカスを調整する位相差検知式等を利用して測定することができる。
なお、カメラでの撮影時に、オブジェクト距離Xがあらかじめ分かっている場合には、オブジェクト距離Xの測定を行う必要はない。
いま、説明を簡単にするために、撮影オブジェクトの位置において、カメラで撮影される実世界の横及び縦の長さのうちの、例えば、横の長さだけに注目し、その横の長さを、撮影オブジェクトの位置における撮影範囲Dということとする。
撮影範囲Dは、カメラ画角θと、オブジェクト距離Xとから、式D=2×X×tan(θ/2)に従って求めることができる。
そこで、図２の編集装置３２は、センサ部３１としてのカメラから、素材データである画像の他、カメラ画角θ及びオブジェクト距離Xをも取得し、そのカメラ画角θ及びオブジェクト距離Xから、撮影範囲Dを求める。そして、編集装置３２は、撮影範囲Dを撮影範囲情報として、実世界情報に含めて、符号化部３３に供給する。
次に、図８を参照して、図２の送信装置１１の処理（送信処理）について説明する。
送信装置１１では、センサ部３１で取得された素材データが、編集装置３２、及び、符号化部３３に供給される。
編集装置３２では、センサ部３１からの素材データ等に基づき、エフェクト情報、及び、実世界情報のうちの一方、又は両方を含む付加情報が生成され、符号化部３３に供給される。
符号化部３３は、以上のようにして、センサ部３１から素材データが供給されるとともに、編集装置３２から付加情報が供給されると、ステップＳ１１において、センサ部３１からの素材データと、編集装置３２からの付加情報とを符号化し、その結果得られる符号化データを、送信部３４に供給して、処理は、ステップＳ１２に進む。
ステップＳ１２では、送信部３４は、符号化部３３からの符号化データを、伝送媒体１３（図１）を介して送信する。
次に、図９は、図１の受信装置１２の構成例を示している。
図９において、受信装置１２は、受信部５１、復号部５２、分離部５３、生成部５４、出力部５５、及び、入力部５６から構成される。
なお、出力部５５や入力部５６は、受信装置１２とは別個の装置とすることができる。
受信部５１は、送信装置１１から伝送媒体１３を介して送信されてくる符号化データ、すなわち、素材データと付加情報を受信し、復号部５２に供給する。
復号部５２は、受信部５１からの符号化データを復号し、分離部５３に供給する。
分離部５３は、復号部５２から供給されるデータを、素材データと、付加情報とに分離し、生成部５４に供給する。
生成部５４は、分離部５３からの素材データと付加情報とに基づいて、出力データを生成し、出力部５５に供給する。
出力部５５は、生成部５４からの出力データに基づき、所定の出力を行う。
ここで、出力部５５としては、人の五感を刺激する装置（デバイス）を採用することができる。
すなわち、出力部５５としては、例えば、画像を表示する表示装置や、光を発する照明装置等の、視覚を刺激する装置を採用することができる。また、出力部５５としては、例えば、音を発するスピーカ等の、聴覚を刺激する装置を採用することができる。
さらに、出力部５５としては、温度や、湿度、風の、いわゆる空調（空気調節）（空気調和）をすることができるエアコンディショナや、振動を与える動揺装置等の、触覚を刺激する装置を採用することができる。
入力部５６は、受信装置１２のユーザによって操作される。ユーザが、ある指示を行うために、入力部５６を操作すると、入力部５６は、そのユーザによる指示を受け付け、その指示を表す指示情報を、生成部５４に供給する。
ここで、生成部５４は、入力部５６から指示情報が供給された場合、その指示情報に基づいて、出力データを生成する。
次に、図１０を参照して、図９の受信装置１２の処理（受信処理）について説明する。
受信部５１は、送信装置１１から伝送媒体１３を介して符号化データが送信されてくるのを待って、ステップＳ３１において、その符号化データを受信し、復号部５２に供給して、処理は、ステップＳ３２に進む。
ステップＳ３２では、復号部５２は、受信部５１からの符号化データを復号し、分離部５３に供給して、処理は、ステップＳ３３に進む。
ステップＳ３３では、分離部５３は、復号部５２から供給されるデータ（復号データ）を、素材データと、付加情報とに分離し、生成部５４に供給して、処理は、ステップＳ３４に進む。
ステップＳ３４では、生成部５４は、分離部５３からの素材データと付加情報とに基づいて、出力データを生成し、出力部５５に供給して、処理は、ステップＳ３５に進む。
ステップＳ３５では、出力部５５は、生成部５４からの出力データに基づき、所定の出力を行う。
以上のように、図９の受信装置１２では、生成部５４において、素材データと付加情報とに基づいて、出力データを生成する処理が行われるが、この処理は、リアリティモード処理と、エンターテイメントモード処理とに分けられる。
すなわち、付加情報には、上述したように、実世界情報とエフェクト情報とが含まれるが、出力データを生成する処理のうちの、実世界情報を用いて行われる処理が、リアリティモード処理であり、エフェクト情報を用いて行われる処理が、エンターティメントモード処理である。
以下、リアリティモード処理と、エンターティメントモード処理について説明する。
図１１は、受信装置１２が、リアリティモード処理を行う場合に、生成部５４に供給されるデータ（情報）を示している。
リアリティモード処理では、生成部５４に対しては、分離部５３から、素材データと、付加情報に含まれる実世界情報が供給される。
また、リアリティモード処理では、ユーザが、ズームを指示するように、入力部５６を操作すると、その操作に対応した指示情報が、入力部５６から生成部５４に供給される。
さらに、リアリティモード処理では、生成部５４に対しては、出力部５５の特性を表す特性情報が、例えば、出力部５５から供給される。
そして、リアリティモード処理では、生成部５４は、素材データ、実世界情報、及び、出力部５５の特性情報に基づき、出力部５５の出力から認識される物理量が、実世界情報が表す物理量に同定されるように、出力データを生成する。
ここで、生成部５４は、入力部５６から指示情報が供給された場合、その指示情報にも基づき、出力データを生成する。
なお、リアリティモード処理については、受信装置１２は、入力部５６を設けずに構成することができる。受信装置１２が、入力部５６を設けずに構成される場合、生成部５４に対しては、指示情報は、供給されない。
次に、例えば、出力部５５が、表示装置であり、出力データが、表示装置である出力部５５で表示される画像であるとして、リアリティモード処理を説明する。
ここで、実世界情報には、図７で説明した撮影範囲情報Dが含まれることとし、また、特性情報には、表示装置である出力部５５が画像を表示する表示画面の大きさを表す大きさ情報Fが含まれることとする。
なお、ここでは、説明を簡単にするために、大きさ情報Fは、撮影範囲情報D（撮影範囲D）と同様に、表示装置である出力部５５の表示画面の横及び縦の長さのうちの、例えば、横の長さを表すこととする。
図１２は、受信装置１２がリアリティモード処理を行う場合の生成部５４の構成例を示している。
図１２において、生成部５４は、BF（バッファ）７１、付加情報解析部７２、及び、画像処理部７３から構成される。
BF７１には、分離部５３（図１１）から、素材データである画像が供給される。BF７１は、分離部５３からの素材データである画像を記憶する。
付加情報解析部７２には、分離部５３から、付加情報に含まれる実世界情報が供給される。付加情報解析部７２は、分離部５３からの実世界情報を解析し、例えば、その実世界情報に含まれる撮影範囲情報D（図７）を抽出して、画像処理部７３に供給する。
画像処理部７３には、上述したように、付加情報解析部７２から、撮影範囲情報Dが供給される。さらに、画像処理部７３には、BF７１に記憶された素材データである画像が供給されるとともに、表示装置である出力部５５（図１１）から、その表示装置の特性情報である大きさ情報Fが供給される。
また、ユーザが、ズームを指示するように、入力部５６（図１１）を操作すると、画像処理部７３には、その操作に対応した指示情報が、入力部５６から供給される。
画像処理部７３は、BF７１からの素材データである画像、付加情報解析部７２からの撮影範囲情報D、及び、出力部５５からの特性情報である大きさ情報Fに基づき、素材データである画像を加工することにより、表示装置である出力部５５で表示される画像から認識される物体（撮影オブジェクト）の大きさが、実世界での大きさに同定されるように、出力データである画像を生成して、表示装置である出力部５５（図１１）に供給する。
また、画像処理部７３は、BF７１からの素材データである画像、付加情報解析部７２からの撮影範囲情報D、及び、出力部５５からの特性情報である大きさ情報Fに基づき、素材データである画像を加工することにより、表示装置である出力部５５で表示される画像から認識される撮影オブジェクトの大きさが、実世界での大きさを越えない大きさとなる画像を、出力データとして生成して、表示装置である出力部５５（図１１）に供給する。
すなわち、画像処理部７３は、入力部５６から、指示情報が供給された場合、BF７１からの素材データである画像を、入力部５６からの指示情報が指示するズームの倍率だけ拡大する加工を行うことで、出力データを生成する。
但し、この場合、画像処理部７３は、素材データである画像の拡大を、表示装置である出力部５５で表示される画像から認識される撮影オブジェクトの大きさが、実世界での大きさを越えない大きさとなるように制限する。
なお、素材データである画像を拡大するときの倍率を、表示ズーム倍率zということとすると、表示ズーム倍率zが、１未満（かつ０より大）である場合の拡大は、縮小になる。
また、図１２では、大きさ情報Fが、表示装置である出力部５５から、生成部５４の画像処理部７３に供給されることとしたが、大きさ情報Fは、その他、例えば、生成部５４に、あらかじめ記憶させておくことができる。
次に、画像処理部７３の処理について、さらに説明する。
なお、ここでは、説明を簡単にするため、表示画角情報が表す表示用領域（図５）は、素材データである画像の領域全体に等しいこととする。
図１３は、カメラで撮影オブジェクトの撮影を行っている状態と、その撮影によって得られた素材データである画像の、表示装置である出力部５５での表示の状態とを模式的に示している。
すなわち、図１３Ａは、カメラで撮影を行っている状態を模式的に示す上面図であり、図７と同一の図である。
上述したように、撮影範囲情報Dは、カメラ画角θと、オブジェクト距離Xとから、式D=2×X×tanθ/2に従って求めることができる。
図１３Ｂは、カメラで、図１３Ａのように撮影を行って得られる素材データである画像を、拡大することなく、表示装置である出力部５５で表示した表示状態を示している。
表示装置である出力部５５では、大きさが撮影範囲情報Dの実世界が、大きさが大きさ情報Fの表示画面に表示される。
したがって、撮影オブジェクトは、実世界での大きさのF/D倍の大きさで表示される。
いま、撮影範囲情報Dが、大きさ情報F以上であるとすると（F≦D）、表示ズーム倍率zがD/F以下であれば、表示装置である出力部５５に表示される撮影オブジェクトの大きさは、実世界での大きさ以下となる。
したがって、撮影範囲情報Dが、大きさ情報F以上である場合には、表示ズーム倍率zがD/F以下であれば、表示装置である出力部５５において、撮影オブジェクトが、実世界での大きさよりも大きく表示されることによって、表示装置である出力部５５で表示される撮影オブジェクトのリアリティが損なわれることはない。
そこで、画像処理部７３（図１２）では、撮影範囲情報Dが、大きさ情報F以上である場合には、素材データである画像を拡大するときの表示ズーム倍率zがD/F以下に制限される。
一方、撮影範囲情報Dが、大きさ情報F未満である場合には(F>D)、素材データである画像を、そのまま、表示装置である出力部５５で表示すると、その出力部５５に表示される撮影オブジェクトの大きさは、実世界での大きさを越える大きさとなる。
このように、表示装置である出力部５５において、撮影オブジェクトが、実世界での大きさよりも大きく表示されると、表示装置である出力部５５で表示される撮影オブジェクトのリアリティが損なわれ、臨場感が失われることになる。
以上のように、撮影範囲情報Dが、大きさ情報F未満になる場合としては、例えば、出力部５５が、大画面の表示装置である場合がある。
また、例えば、素材データである画像が、いわゆる光学ズームや、ディジタルズームを使用して撮影された場合も、撮影範囲情報Dが、大きさ情報F未満になることがある。
図１４は、カメラで、光学ズームを使用して、撮影オブジェクトの撮影を行っている状態と、その撮影によって得られた素材データである画像の、表示装置である出力部５５での表示の状態とを模式的に示している。
すなわち、図１４Ａは、カメラで、光学ズームを使用して撮影を行っている状態を模式的に示す上面図である。
光学ズームを使用することにより、カメラ画角θは狭くなり（小になり）、その結果、撮影範囲情報Dは、例えば、図１３Ａの場合よりも小となる。
図１４Ｂは、カメラで、図１４Ａのように撮影を行って得られる素材データである画像を、表示装置である出力部５５で表示した表示状態を示している。
表示装置である出力部５５では、大きさが撮影範囲情報Dの実世界が、大きさが大きさ情報Fの表示画面に表示される。
図１４では、撮影範囲情報Dが、大きさ情報F未満になっており、そのため、表示装置である出力部５５では、撮影オブジェクトが、実世界での大きさよりも大きく（F/D倍の大きさで）表示されている。
図１５は、カメラで、ディジタルズームを使用して、撮影オブジェクトの撮影を行っている状態と、その撮影によって得られた素材データである画像の、表示装置である出力部５５での表示の状態とを模式的に示している。
すなわち、図１５Ａは、カメラで、ディジタルズームを使用して撮影を行っている状態を模式的に示す上面図である。
ディジタルズームでは、カメラで撮影された画像の、例えば、中央部分を切り取り、信号処理によって拡大するトリミングによって得られる画像が、素材データである画像として出力される。
ディジタルズームを使用して得られた素材データである画像については、カメラ画角θが、光学ズームの場合（図１４）と同様に狭くなり、その結果、撮影範囲情報Dは、例えば、図１３Ａの場合よりも小となる。
図１５Ｂは、カメラで、図１５Ａのように撮影を行って得られる素材データである画像を、表示装置である出力部５５で表示した表示状態を示している。
表示装置である出力部５５では、大きさが撮影範囲情報Dの実世界が、大きさが大きさ情報Fの表示画面に表示される。
図１５では、撮影範囲情報Dが、大きさ情報F未満になっており、そのため、表示装置である出力部５５では、撮影オブジェクトが、実世界での大きさよりも大きく（F/D倍の大きさで）表示されている。
以上のように、素材データである画像が、光学ズームや、ディジタルズームを使用して撮影されると、撮影範囲情報Dが、大きさ情報F未満になることがあり、その場合、撮影オブジェクトは、実世界での大きさよりも大きく表示され、リアリティが損なわれる。
そこで、画像処理部７３（図１２）は、撮影範囲情報Dが、大きさ情報F未満である場合には、表示ズーム倍率zを、D/F倍に設定し、素材データである画像を、D/F倍に拡大する（ここでは、D/Fは、１未満であるため、画像は縮小される）。
この場合、画像処理部７３で拡大（縮小）を行わなければ、実世界での大きさのF/D倍で表示される撮影オブジェクトが、そのD/F倍、つまり、実世界での大きさに等しい大きさで表示される。
図１６は、撮影範囲情報Dが、大きさ情報F未満である場合に、表示装置である出力部５５に表示される画像を示している。
すなわち、図１６Ａは、光学ズームを使用して撮影された素材データである画像を、表示装置である出力部５５で表示した表示状態を示しており、図１６Ｂは、ディジタルズームを使用して撮影された素材データである画像を、表示装置である出力部５５で表示した表示状態を示している。
撮影範囲情報Dが、大きさ情報F未満である場合には、画像処理部７３は、表示ズーム倍率zを、D/F(<1)倍に設定し、素材データである画像を、D/F倍に拡大して、出力データとして出力部５５に供給する。
その結果、表示装置である出力部５５では、撮影オブジェクトが、実世界での大きさに等しい大きさで表示される。
ここで、画像処理部７３では、素材データである画像が、D/F(<1)倍に拡大（縮小）される結果、その拡大によって得られる画像（出力データ）は、横の長さが、撮影範囲情報Dに等しい画像となる。
そして、いまの場合、撮影範囲情報Dが、大きさ情報F未満であるため、出力データである画像の横の長さF'(=D)は、大きさ情報F、つまり、表示装置である出力部５５の表示画面の横の長さよりも小となる。
そのため、表示装置である出力部５５では、その表示画面のうちの、出力データである画像が表示される部分以外の部分には、例えば、図１６Ａに示すように、黒（いわゆる黒枠）等が表示される。
なお、素材データである画像が、ディジタルズームを使用して撮影された場合には、カメラで撮影された画像のうちの、ディジタルズームで拡大された中央部分以外の部分（図１５Ａにおいて、斜線を付してある部分）（以下、トリミング部分ともいう）が残っていることがある。
この場合、表示装置である出力部５５では、その表示画面のうちの、出力データである画像が表示される部分以外の部分には、例えば、図１６Ｂに示すように、トリミング部分が表示される。
次に、図１７を参照して、図１２の画像処理部７３で行われるリアリティモード処理について説明する。
画像処理部７３は、ステップＳ５１において、付加情報解析部７２から供給される実世界情報に含まれる撮影範囲情報Dと、表示装置である出力部５５の特性情報である大きさ情報Fとに基づき、素材データである画像を拡大する表示ズーム倍率zの最大値である最大ズーム倍率D/Fを求めるとともに、入力部５６（図１１）から指示情報が供給されない場合の表示ズーム倍率zである標準ズーム倍率z1を設定し、処理は、ステップＳ５２に進む。
ここで、撮影範囲情報Dが、大きさ情報F以上である場合、標準ズーム倍率z1は、１倍に設定される。撮影範囲情報Dが、大きさ情報F未満である場合、標準ズーム倍率z1は、最大ズーム倍率D/Fに設定される。
ステップＳ５２では、画像処理部７３は、入力部５６から、ズームを指示する指示情報が供給されたかどうかを判定する。
ステップＳ５２において、入力部５６から画像処理部７３に、指示情報が供給されていないと判定された場合、処理は、ステップＳ５３に進み、画像処理部７３は、表示ズーム倍率zを、標準ズーム倍率z1に設定して、処理は、ステップＳ５７に進む。
また、ステップＳ５２において、入力部５６から画像処理部７３に、指示情報が供給されたと判定された場合、処理は、ステップＳ５４に進み、画像処理部７３は、入力部５６からの指示情報が指示するズームの倍率（以下、指示ズーム倍率Aともいう）が、最大ズーム倍率D/F以下であるかどうかを判定する。
ステップＳ５４において、指示ズーム倍率Aが、最大ズーム倍率D/F以下であると判定された場合、処理は、ステップＳ５５に進み、画像処理部７３は、表示ズーム倍率zを、指示ズーム倍率Aに設定して、処理は、ステップＳ５７に進む。
また、ステップＳ５４において、指示ズーム倍率Aが、最大ズーム倍率D/F以下でないと判定された場合、すなわち、撮像オブジェクトを、実世界での大きさよりも大きく表示する、最大ズーム倍率D/Fを越える倍率のズームが、ユーザによって指示された場合、処理は、ステップＳ５６に進み、画像処理部７３は、表示ズーム倍率zを、最大ズーム倍率D/Fに設定して、処理は、ステップＳ５７に進む。
ステップＳ５７では、画像処理部７３は、BF７１に記憶された素材データとしての画像を、表示ズーム倍率zだけ拡大した拡大画像を、出力データとして生成し、表示装置である出力部５５（図１１）に供給する。
そして、表示装置である出力部５５では、画像処理部７３からの出力データである拡大画像が表示され、これにより、撮影オブジェクトは、図１３で説明したように、実世界での大きさのF/D倍の大きさで表示される。
したがって、入力部５６から画像処理部７３に、指示情報が供給されていない場合、つまり、ユーザが、ズームを指示する操作をしていない場合には、表示装置である出力部５５において、撮影オブジェクトは、実世界での大きさに等しい大きさ(z(=D/F)×F/D)、又は、実世界での大きさのF/D倍の大きさ(z(=1)×F/D)で表示される。
すなわち、撮影範囲情報Dが、大きさ情報F未満である場合には、上述したように、標準ズーム倍率z1、ひいては、表示ズーム倍率zは、最大ズーム倍率D/Fに設定されるので、撮影オブジェクトは、実世界での大きさのD/F×F/D倍の大きさ、つまり、実世界での大きさに等しい大きさで表示される。
また、撮影範囲情報Dが、大きさ情報F以上である場合には、上述したように、標準ズーム倍率z1、ひいては、表示ズーム倍率zは、１倍に設定されるので、撮影オブジェクトは、実世界での大きさのF/D(≦1)倍の大きさで表示される。
一方、入力部５６から画像処理部７３に、指示情報が供給された場合、つまり、ユーザが、指示ズーム倍率Aのズームを指示する操作をした場合には、指示ズーム倍率Aが、最大ズーム倍率D/F以下であるときには、撮影オブジェクトは、実世界での大きさのF/D×A倍の大きさ(z(=A)×F/D)で表示され、指示ズーム倍率Aが、最大ズーム倍率D/F以下でないときには、撮影オブジェクトは、実世界での大きさに等しい大きさ(z(=D/F)×F/D)で表示される。
すなわち、指示ズーム倍率Aが、最大ズーム倍率D/F以下である場合には、上述したように、表示ズーム倍率zは、指示ズーム倍率Aに設定されるので、撮影オブジェクトは、実世界での大きさのA(≦D/F)×F/D倍の大きさで表示される。
また、指示ズーム倍率Aが、最大ズーム倍率D/F以下でない場合には、上述したように、表示ズーム倍率zは、最大ズーム倍率D/Fに設定されるので、撮影オブジェクトは、実世界での大きさのD/F×F/D倍の大きさ、つまり、実世界での大きさに等しい大きさで表示される。
いずれにしても、撮影オブジェクトは、実世界での大きさ以下の大きさで表示される。
なお、図１７のリアリティモード処理は、例えば、フレーム（又はフィールド）ごとに行われる。
また、図１７のリアリティモード処理は、撮影オブジェクトが、実世界での大きさを越える大きさで表示される場合にだけ行うことが可能である。
すなわち、リアリティモード処理は、例えば、実世界での大きさを越える大きさで表示された撮影オブジェクトを見たユーザが、その表示の改善を指示するように、入力部５６を操作した場合に行うようにすることが可能である。
図１８は、受信装置１２が、エンターテイメントモード処理を行う場合に、生成部５４に供給されるデータ（情報）を示している。
エンターテイメントモード処理では、生成部５４に対しては、分離部５３から、素材データと、付加情報に含まれるエフェクト情報が供給される。
また、エンターテイメントモード処理では、ユーザが、素材データの加工を指示するように、入力部５６を操作すると、その操作に対応した指示情報が、入力部５６から生成部５４に供給される。
そして、エンターテイメントモード処理では、生成部５４は、分離部５３からのエフェクト情報、又は、入力部５６からの指示情報に基づき、分離部５３からの素材データに対して加工を施すことにより、出力データを生成する。
すなわち、生成部５４は、入力部５６からの指示情報の供給がない場合には、分離部５３からのエフェクト情報に基づき、分離部５３からの素材データに対して加工を施すことにより、出力データを生成する。
また、生成部５４は、入力部５６からの指示情報の供給がある場合には、その指示情報に基づき、分離部５３からの素材データに対して加工を施すことにより、出力データを生成する。
次に、例えば、出力部５５が、表示装置であり、出力データが、表示装置である出力部５５で表示される画像であるとして、エンターテイメントモード処理を説明する。
図１９は、受信装置１２がエンターテイメントモード処理を行う場合の生成部５４の構成例を示している。
ここで、エフェクト情報には、図３ないし図６で説明した切り替え情報、表示画枠情報、及び、合成用データが含まれることとし、素材データとしては、N個のストリームの画像S#1ないしS#Nがあることとする。
図２０において、生成部５４は、画像データBF（バッファ）８１、付加情報解析部８２、被合成データBF８３、及び、画像処理部８４から構成される。
画像データBF８１には、分離部５３（図１８）から、素材データであるN個のストリームの画像S#1ないしS#Nが供給される。画像データBF８１は、分離部５３からの素材データであるN個のストリームの画像S#1ないしS#Nを記憶する。
付加情報解析部８２には、分離部５３から、付加情報に含まれるエフェクト情報が供給される。
付加情報解析部８２は、分離部５３からのエフェクト情報を解析し、例えば、そのエフェクト情報に含まれる切り替え情報、表示画枠情報、及び、合成用データを抽出する。
さらに、付加情報解析部８２は、合成用データから、素材データに合成される被合成データと、その合成のタイミングを表すタイミング情報を抽出する。
そして、付加情報解析部８２は、被合成データを、被合成データBF８３に供給するとともに、切り替え情報、表示画枠情報、及び、タイミング情報を、画像処理部８４に供給する。
ここで、付加情報解析部８２が画像処理部８４に供給する切り替え情報、表示画枠情報、及び、タイミング情報、つまり、エフェクト情報に含まれる切り替え情報、表示画枠情報、及び、タイミング情報を、まとめて、デフォルト情報ともいう。
被合成データBF８３は、付加情報解析部８２からの被合成データを記憶する。
画像処理部８４には、上述したように、付加情報解析部８２から、デフォルト情報が供給される。さらに、画像処理部８４には、画像データBF８１に記憶された素材データであるN個のストリームの画像S#1ないしS#Nが供給されるとともに、被合成データBF８３に記憶された被合成データが供給される。
また、ユーザが、素材データ等の加工を指示するように、入力部５６（図１８）を操作すると、画像処理部８４には、その操作に対応した指示情報が、入力部５６から供給される。
ここで、ユーザは、入力部５６を操作することにより、表示装置である出力部５５（図１８）に表示される画像を撮影しているカメラを、パン、チルト、又は、ズームさせるかのような指示（以下、PTZ(pan,tilt,zoom)指示ともいう）を行うことができる。
さらに、ユーザは、入力部５６を操作することにより、表示装置である出力部５５に表示される画像を、素材データであるN個のストリームの画像S#1ないしS#Nのうちの、１の画像S#iから、他の１の画像S#i'に切り替える指示（以下、切り替え指示ともいう）を行うことができる。
また、ユーザは、入力部５６を操作することにより、表示装置である出力部５５に表示される画像に、被合成データを合成（重畳）する指示（以下、合成指示ともいう）を行うことができる。
ユーザが、入力部５６を操作することにより、PTZ指示を行うと、入力部５６は、そのPTZ指示に従って移動、又は、大きさを変更した表示用領域（図５）を特定する表示画枠情報を生成し、その表示画枠情報を含む指示情報を、画像処理部８４に供給する。
また、ユーザが、入力部５６を操作することにより、切り替え指示を行うと、入力部５６は、その切り替え指示に従って、切り替え情報（図４）を生成し、その切り替え情報を含む指示情報を、画像処理部８４に供給する。
さらに、ユーザが、入力部５６を操作することにより、合成指示を行うと、入力部５６は、その合成指示に従って、素材データに合成する被合成データを選択するための選択情報を生成し、その選択情報を含む指示情報を、画像処理部８４に供給する。
画像処理部８４は、付加情報解析部８２からのデフォルト情報、又は、入力部５６からの指示情報に基づき、画像データBF８１に記憶された素材データに対して、被合成データBF８３に記憶された被合成データを必要に応じて用いて、加工を施すことにより、出力データである画像を生成し、表示装置である出力部５５（図１８）に供給する。
すなわち、画像処理部８４は、入力部５６からの指示情報の供給がない場合には、付加情報解析部８２からのデフォルト情報に基づき、画像データBF８１に記憶された素材データに対して加工を施すことにより、出力データである画像を生成する。
具体的には、例えば、画像処理部８４は、デフォルト情報に含まれる切り替え情報に基づいて、画像データBF８１に記憶された素材データであるN個のストリームの画像S#1ないしS#Nの中から、１つのストリームの画像を、出力データとする画像（以下、出力用画像ともいう）として選択する。
さらに、例えば、画像処理部８４は、デフォルト情報に含まれる表示画枠情報に基づいて、その表示画枠情報が表す表示用領域の画像を、出力用画像から抽出する。
また、例えば、画像処理部８４は、デフォルト情報に含まれるタイミング情報に基づいて、表示用領域の画像に、被合成データBF８３に記憶された被合成データを合成する。なお、ここでは、被合成データBF８３に、複数の被合成データが記憶されている場合には、その複数の被合成データのうちの、どの被合成データを、表示用領域の画像に合成するかの情報は、デフォルト情報に含まれるタイミング情報に含まれていることとする。
以上のように、画像処理部８４では、入力部５６からの指示情報の供給がない場合には、付加情報解析部８２からのデフォルト情報、すなわち、送信装置１１の編集装置３２（図２）で生成されたエフェクト情報（に含まれる切り替え情報、表示画枠情報、及び、タイミング情報）に基づき、素材データの加工が行われるので、表示装置である出力部５５では、番組制作者が編集装置３２を操作することにより行った編集により得られる画像が表示される。
一方、画像処理部８４は、入力部５６からの指示情報の供給があった場合には、その指示情報に基づき、画像データBF８１に記憶された素材データに対して加工を施すことにより、出力データである画像を生成する。
具体的には、例えば、画像処理部８４は、指示情報に切り替え情報が含まれている場合には、デフォルト情報に含まれる切り替え情報ではなく、指示情報に含まれる切り替え情報に基づいて、画像データBF８１に記憶された素材データであるN個のストリームの画像S#1ないしS#Nの中から、１つのストリームの画像を、出力用画像として選択する。
また、例えば、画像処理部８４は、指示情報に表示画枠情報が含まれている場合には、デフォルト情報に含まれる表示画枠情報ではなく、指示情報に含まれる表示画枠情報に基づいて、その表示画枠情報が表す表示用領域の画像を、出力用画像から抽出する。
さらに、例えば、画像処理部８４は、指示情報に選択情報が含まれている場合には、デフォルト情報に含まれるタイミング情報ではなく、指示情報に含まれる選択情報に従って、表示用領域の画像に合成する被合成データを、被合成データBF８３に記憶された被合成データの中から選択し、その被合成データを、表示用領域の画像に合成する。
なお、タイミング情報や、選択情報を用いた被合成データの選択では、複数の被合成データ（例えば、複数の字幕や、１つの字幕及び１つのPinP画像等）が選択されることがある。
また、選択情報は、被合成データを選択しないことを表すことがある。選択情報が、被合成データを選択しないことを表している場合、画像処理部８４では、デフォルト情報に含まれるタイミング情報が、ある被合成データを、表示用領域の画像に合成することを表していても、その被合成データの合成は、行われない。
以上のように、画像処理部８４は、入力部５６からの指示情報の供給があった場合には、デフォルト情報ではなく、指示情報に基づき、画像データBF８１に記憶された素材データに対して加工を施すことにより、出力データである画像を生成する。
なお、画像処理部８４に対して、入力部５６から、指示情報の供給があった後、その供給がなくなった場合には、画像処理部８４は、デフォルト情報に基づいて、画像データBF８１に記憶された素材データに対して加工を施すことにより、出力データである画像を生成する。
したがって、例えば、タイミング情報が、ある被合成データとしての字幕を、表示用領域の画像に合成することを表している場合において、ユーザが、被合成データの合成を禁止する（行わない）ように、入力部５６を操作したときには、字幕は、その入力部５６の操作に従って表示されない。
そして、その後、被合成データの合成の禁止を解除するように、入力部５６を操作すると、字幕が、デフォルト情報に含まれるタイミング情報に従って、表示用領域の画像に合成されて表示される。
なお、図１９の生成部５４では、画像処理部８４に対して、分離部５３から、実世界情報を供給するとともに、出力部５５から、特性情報を供給し、画像処理部８４において、図１２の画像処理部７３と同様のリアリティモード処理を、さらに行うようにすることができる。
すなわち、画像処理部８４では、入力部５６からの指示情報の供給がない場合に、図１７のリアリティモード処理のうちの、ステップＳ５１，Ｓ５３、及びＳ５７の処理を行うようにすることが可能である。この場合、画像処理部８４では、表示装置である出力部５５の表示（出力）から認識される撮影オブジェクトの大きさ（物理量）が、実世界情報に含まれる撮影範囲情報Dに対応する大きさ（実世界での撮影オブジェクトの大きさ）に同定されるように、出力データである画像が生成される。
次に、図２０は、図１９の画像処理部８４の構成例を示している。
図２０において、画像処理部８４は、画像選択部９１、指示選択部９２、表示領域設定部９３、ゲート部９４、及び重畳処理部９５から構成される。
画像選択部９１には、画像データBF８１に記憶された素材データであるN個のストリームの画像S#1ないしS#Nが供給される。
また、指示選択部９２には、付加情報解析部８２（図１９）から、デフォルト情報が供給されるとともに、入力部５６（図１８）から、指示情報が供給される。
指示選択部９２は、付加情報解析部８２からのデフォルト情報に含まれる切り替え情報を、画像選択部９１に供給するとともに、そのデフォルト情報に含まれる表示画枠情報を、表示領域設定部９３に供給する。
また、指示選択部９２は、デフォルト情報に含まれるタイミング情報に基づき、被合成データを合成すべきタイミングで、合成に用いる被合成データを選択するための選択情報を生成し、ゲート部９４に供給する。
但し、指示選択部９２は、入力部５６（図１８）から、指示情報が供給された場合には、その指示情報を優先的に選択する。
すなわち、指示選択部９２は、入力部５６から、指示情報が供給され、その指示情報に切り替え情報が含まれている場合には、デフォルト情報に含まれる切り替え情報ではなく、指示情報に含まれる切り替え情報を、画像選択部９１に供給する。
また、指示選択部９２は、入力部５６から、指示情報が供給され、その指示情報に表示画枠情報が含まれている場合には、デフォルト情報に含まれる表示画枠情報ではなく、指示情報に含まれる表示画枠情報を、表示領域設定部９３に供給する。
さらに、指示選択部９２は、入力部５６から、指示情報が供給され、その指示情報に選択情報が含まれている場合には、デフォルト情報に含まれるタイミング情報から生成した選択情報ではなく、指示情報に含まれる選択情報を、ゲート部９４に供給する。
画像選択部９１は、指示選択部９２からの切り替え情報に基づき、画像データBF８１からの素材データであるN個のストリームの画像S#1ないしS#Nの中から、１つのストリームの画像を、出力用画像として選択し、表示領域設定部９３に供給する。
表示領域設定部９３は、画像選択部９１の出力用画像から、指示選択部９２からの表示画枠情報が表す表示用領域の画像を抽出し、重畳処理部９５に供給する。
一方、ゲート部９４には、上述したように、指示選択部９２から選択情報が供給される他、被合成データBF８３に記憶された被合成データが供給される。
ゲート部９４は、被合成データBF８３に記憶された被合成データのうちの０個以上の被合成データを、指示選択部９２から選択情報に従って選択し、重畳処理部９５に供給する。
重畳処理部９５は、表示領域設定部９３からの表示用領域の画像に、ゲート部９４からの０個以上の被合成データを合成（重畳）し、その合成後の画像を、出力データとして、出力部５５（図１８）に供給する。
なお、ゲート部９４から重畳処理部９５に対して、０個の被合成データが供給された場合、つまり、被合成データが供給されなかった場合、重畳処理部９５は、表示領域設定部９３からの表示用領域の画像を、そのまま、出力データとして、出力部５５に供給する。
次に、図２１は、図１の受信装置１２の他の構成例を示している。
なお、図中、図９の場合と対応する部分については、同一の符号を付してあり、以下では、その説明は、適宜省略する。
図２で説明したように、送信装置１１では、センサ部３１として、光をセンシングし、画像を出力するカメラや、温度をセンシングする温度センサ、湿度をセンシングする湿度センサ、風速をセンシングする風速センサ、振動をセンシングする振動センサ、明るさをセンシングする明るさセンサ等の様々な種類のセンサを採用することができる。
送信装置１１において、センサ部３１として、例えば、カメラ、温度センサ、湿度センサ、及び、振動センサを採用した場合には、カメラで取得された画像、温度センサで取得された温度、湿度センサで取得された湿度、及び、振動センサで取得された振動のデータのそれぞれが、対応する付加情報とともに送信される。
この場合、受信装置１２の分離部５３は、図２１に示すように、復号部５２から供給されるデータを、素材データである画像のデータ、温度のデータ、湿度のデータ、振動のデータ、及び、各素材データに対応する付加情報のそれぞれに分離する。
そして、分離部５３は、素材データである画像のデータと、対応する付加情報を、生成部５４に供給する。
また、分離部５３は、素材データである温度及び湿度のデータと、対応する付加情報を、生成部１０１に供給するとともに、素材データである動揺のデータと、対応する付加情報を、生成部１１１に供給する。
生成部５４は、上述したように、分離部５３からの素材データである画像のデータと、付加情報、又は、入力部５６からの指示情報に基づき、素材データを加工することで、出力データである画像を生成して、出力部５５に供給する。
出力部５５は、例えば、上述したように、表示装置であり、生成部５４からの出力データに基づき、画像の表示（出力）を行う。
一方、生成部１０１には、分離部５３から、素材データである温度及び湿度のデータと、対応する付加情報が供給される他、入力部５６と同様に、ユーザによって操作される入力部１０３から指示情報が供給される。
生成部１０１は、分離部５３からの素材データである温度及び湿度のデータと、付加情報、又は、入力部１０３からの指示情報に基づき、素材データを加工することで、出力データを生成して、出力部１０２に供給する。
すなわち、出力部１０２は、例えば、エアコンディショナ等の空調装置であり、生成部１０１は、温度及び湿度のデータを加工することで、空調装置である出力部１０２を制御する空調制御情報を生成し、出力データとして、出力部１０２に供給する。
出力部１０２は、生成部１０１からの出力データである空調制御情報に基づき、風向き、温度、風速、湿度等を調整した風（空気）を出力する。
また、生成部１１１には、分離部５３から、素材データである振動のデータと、対応する付加情報が供給される他、入力部５６と同様に、ユーザによって操作される入力部１１３から指示情報が供給される。
生成部１１１は、分離部５３からの素材データである振動のデータと、付加情報、又は、入力部１１３からの指示情報に基づき、素材データを加工することで、出力データを生成して、出力部１１２に供給する。
すなわち、出力部１１２は、例えば、椅子や、表示装置である出力部５５を動揺（振動）させる動揺装置であり、生成部１１１は、振動のデータを加工することで、動揺装置である出力部１１２を制御する振動情報を生成し、出力データとして、出力部１１２に供給する。
出力部１１２は、生成部１１１からの出力データである振動情報に基づき、椅子等を動揺させる。
その他、例えば、送信装置１１において、明るさをセンシングする明るさセンサで取得した明るさのデータを、素材データとして、対応する付加情報とともに送信することができ、その場合、受信装置１２では、その素材データ、及び、付加情報から生成される出力データに基づき、例えば、受信装置１２が設置されている部屋の照明装置による照明を調整することができる。
また、例えば、送信装置１１では、風速をセンシングする風速センサで取得した風速のデータを、素材データとして、対応する付加情報とともに送信することができ、その場合、受信装置１２では、その素材データ、及び、付加情報から生成される出力データに基づき、空調装置である出力部１０２が出力する風の風速を調整することができる。
以上のように、送信装置１１において、センサ部３１で取得した、画像や、温度、湿度、風速、振動、明るさ等の素材データを、対応する付加情報とともに送信し、受信装置１２において、素材データと付加情報とに基づいて、出力データを生成し、出力データに基づき、出力を行う表示装置、空調装置、動揺装置、照明装置等において、出力を行うことで、センサ部３１で素材データを取得した環境における風景や、温度、風速、湿度、揺れ、明るさ等を、写実的に再現し、ユーザは、臨場感がある体験をすることができる。
次に、上述した一連の処理は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
そこで、図２２は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。
プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク２０５やROM２０３に予め記録しておくことができる。
あるいはまた、プログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブル記録媒体２１１に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体２１１は、いわゆるパッケージソフトウエアとして提供することができる。
なお、プログラムは、上述したようなリムーバブル記録媒体２１１からコンピュータにインストールする他、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送し、コンピュータでは、そのようにして転送されてくるプログラムを、通信部２０８で受信し、内蔵するハードディスク２０５にインストールすることができる。
コンピュータは、CPU(Central Processing Unit)２０２を内蔵している。CPU２０２には、バス２０１を介して、入出力インタフェース２１０が接続されており、CPU２０２は、入出力インタフェース２１０を介して、ユーザによって、キーボードや、マウス、マイク等で構成される入力部２０７が操作等されることにより指令が入力されると、それに従って、ROM(Read Only Memory)２０３に格納されているプログラムを実行する。あるいは、また、CPU２０２は、ハードディスク２０５に格納されているプログラム、衛星若しくはネットワークから転送され、通信部２０８で受信されてハードディスク２０５にインストールされたプログラム、またはドライブ２０９に装着されたリムーバブル記録媒体２１１から読み出されてハードディスク２０５にインストールされたプログラムを、RAM(Random Access Memory)２０４にロードして実行する。これにより、CPU２０２は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU２０２は、その処理結果を、必要に応じて、例えば、入出力インタフェース２１０を介して、LCD(Liquid Crystal Display)やスピーカ等で構成される出力部２０６から出力、あるいは、通信部２０８から送信、さらには、ハードディスク２０５に記録等させる。
ここで、本明細書において、コンピュータに各種の処理を行わせるためのプログラムを記述する処理ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含むものである。
また、プログラムは、１のコンピュータにより処理されるものであっても良いし、複数のコンピュータによって分散処理されるものであっても良い。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであっても良い。
以上のように、図１の放送システムでは、送信装置１１において、センサ部３１で取得した素材データと、対応する付加情報とを送信し、受信装置１２において、素材データと付加情報とに基づいて、出力データを生成し、出力データに基づき、出力を行うので、受信装置１２側において、適切な処理を行うことができ、これにより、例えば、ユーザに臨場感を感じさせることや、ユーザの好みに合った画像を表示すること等が可能となる。
すなわち、受信装置１２では、適切な処理として、リアリティモード処理を行うことができ、リアリティモード処理によれば、例えば、撮影オブジェクトが、実世界での大きさよりも大きく表示されることによって、リアリティが損なわれることを防止することができる。
具体的には、例えば、人の顔が、実際の大きさよりも大きく表示されるといった、いわばミスマッチを解消し、ユーザに臨場感を感じさせることができる。
なお、リアリティモード処理において、出力部５５として、表示画面が大きい（例えば、100インチ以上等）表示装置を採用した場合には、いわば借景的な表示を行うことができる。
また、リアリティモード処理は、例えば、風景の画像や、オーケストラの演奏の音楽を、素材データとする場合に、特に有用である。
すなわち、例えば、実際の風景の画像のデータを、センサとしてのカメラで取得し、その画像のデータを、素材データとして、リアリティモード処理を行うことにより、実際の風景が見える場所で、その風景を見ているかのような大きさで、その風景を構成する木や山等の画像を表示することができる。
また、例えば、実際のオーケストラの演奏の音楽のデータを、センサとしてのマイク（マイクロフォン）で取得し、その音楽のデータを、素材データとして、リアリティモード処理を行うことにより、実際の演奏会場で、オーケストラの演奏を聴いているかのような音量で、音楽（音）を出力することができる。
さらに、受信装置１２では、適切な処理として、エンターテイメントモード処理を行うことができ、エンターテイメントモード処理によれば、例えば、ユーザの好みにあった画像を表示することができる。
すなわち、エンターテイメントモード処理によれば、番組制作者が編集により行った、ユーザにとって不要な演出を排除することや、ユーザの好みの演出を付加すること、情報を選択すること、デフォルメ表示等が可能となる。
具体的には、例えば、エンターテイメントモード処理によれば、ユーザが、入力部５６を操作することにより、合成指示を行うと、入力部５６において、その合成指示に従って、素材データに合成する被合成データを選択するための選択情報が生成され、画像処理部８４（図１９）では、その選択情報に従って、画像に合成する字幕（テロップ）やPinP画像等の被合成データの選択（又は、非選択）が行われる。
したがって、テロップやPinP画像が多い、例えば、ニュース番組について、そのテロップやPinP画像による演出を不要と感じるユーザは、入力部５６を操作することにより、テロップやPinP画像がない状態のニュース番組を視聴することが可能となる。
また、例えば、エンターテイメントモード処理によれば、ユーザが、入力部５６を操作することにより、PTZ指示を行うと、入力部５６において、そのPTZ指示に従って、表示用領域（図５）を特定する表示画枠情報が生成され、画像処理部８４（図１９）では、その表示画枠情報が表す表示用領域の画像が、素材データから抽出される。
したがって、スポーツ番組や、音楽番組において、特定の選手や芸能人のファンであるユーザは、入力部５６を操作することにより、特定の選手や芸能人を追いかけた画像を視聴することが可能となる。
なお、上述したように、画像処理部８４（図１９）は、入力部５６からの指示情報の供給がある場合には、その指示情報を優先的に選択し、その指示情報に基づき、素材データの加工を行うことで、ユーザの好みにあった画像を表示するが、入力部５６からの指示情報の供給がない場合には、デフォルト情報、すなわち、送信装置１１の編集装置３２で生成されたエフェクト情報（に含まれる切り替え情報、表示画枠情報、及び、タイミング情報）に基づき、素材データの加工が行われる。
したがって、ユーザは、入力部５６を操作することにより、表示装置である出力部５５に、ユーザの好みにあった画像を表示させることができ、入力部５６の操作をしないことにより（入力部５６を操作することにより行ったPTZ指示や、切り替え指示、合成指示を解除するように、入力部５６を操作することにより）、表示装置である出力部５５に、番組制作者が編集装置３２を操作することにより行った編集により得られる画像を表示させることができる。
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
本発明を適用した放送システムの一実施の形態の構成例を示すブロック図である。 送信装置１１の構成例を示すブロック図である。 素材データとエフェクト情報を説明する図である。 切り替え情報を説明する図である。 表示画角情報を説明する図である。 合成用データを説明する図である。 実世界情報を説明する図である。 送信処理を説明するフローチャートである。 受信装置１２の構成例を示すブロック図である。 受信処理を説明するフローチャートである。 リアリティモード処理において、生成部５４に供給されるデータを説明する図である。 リアリティモード処理を行う生成部５４の構成例を示すブロック図である。 カメラで撮影オブジェクトの撮影を行っている状態と、表示装置である出力部５５での表示の状態とを模式的に示す図である。 カメラで、光学ズームを使用して、撮影オブジェクトの撮影を行っている状態と、表示装置である出力部５５での表示の状態とを模式的に示す図である。 カメラで、ディジタルズームを使用して、撮影オブジェクトの撮影を行っている状態と、表示装置である出力部５５での表示の状態とを模式的に示す図である。 表示装置である出力部５５に表示される画像を示す図である。 リアリティモード処理を説明するフローチャートである。 エンターテイメントモード処理において、生成部５４に供給されるデータを説明する図である。 エンターテイメントモード処理を行う生成部５４の構成例を示すブロック図である。 画像処理部８４の構成例を示すブロック図である。 受信装置１２の他の構成例を示すブロック図である。 本発明を適用したコンピュータの一実施の形態の構成例を示すブロック図である。
符号の説明
１１ 送信装置， １２ 受信装置， １３ 伝送媒体， ３１ センサ部， ３２ 編集装置， ３３ 符号化部， ３４ 送信部， ５１ 受信部， ５２ 復号部， ５３ 分離部， ５４ 生成部， ５５ 出力部， ５６ 入力部， ７１ BF， ７２ 付加情報解析部， ７３ 画像処理部， ８１ 画像データBF， ８２ 付加情報解析部， ８３ 被合成データBF， ８４ 画像処理部， ９１ 画像選択部， ９２ 指示選択部， ９３ 表示領域設定部， ９４ ゲート部， ９５ 重畳処理部， １０１ 生成部， １０２ 出力部， １０３ 入力部， １１１ 生成部， １１２ 出力部， １１３ 入力部， ２０１ バス， ２０２ CPU， ２０３ ROM， ２０４ RAM， ２０５ ハードディスク， ２０６ 出力部， ２０７ 入力部， ２０８ 通信部， ２０９ ドライブ， ２１０ 入出力インタフェース， ２１１ リムーバブル記録媒体

Claims (10)

  1. データを送信する送信装置と、前記データを受信する受信装置とからなる放送システムにおいて、
    前記送信装置は、カメラで撮影された画像を素材データとして送信すると共に、前記カメラの撮影範囲を表す撮影範囲情報を含む、前記受信装置で前記素材データを加工するために用いられる付加情報を送信する送信手段を有し、
    前記受信装置は、
    前記素材データと前記付加情報とを受信する受信手段と、
    前記素材データ、前記付加情報、及び表示装置の表示画面の大きさを表す大きさ情報を含む、前記表示装置の特性を表す特性情報に基づいて、前記表示装置で表示される画像から認識される物体の大きさが、実世界での大きさに同定されるように、前記表示装置に表示させる画像を出力データとして生成する生成手段と、
    前記生成手段により前記出力データとして生成された前記画像を表示する前記表示装置を含む、出力手段と
    を有する
    放送システム。
  2. 前記付加情報は、さらに、前記素材データの加工に用いられる情報であるエフェクト情報を含み、
    前記生成手段は、さらに、前記エフェクト情報に基づいて、前記素材データに対して加工を施すことにより、出力データを生成する
    請求項１に記載の放送システム。
  3. 前記受信装置は、ユーザによる加工の指示を受け付ける指示入力手段をさらに有し、
    前記生成手段は、ユーザによる加工を指示するための指示情報に基づいて、前記素材データに対して、ユーザが所望する加工を施す
    請求項２に記載の放送システム。
  4. 前記指示情報は、前記素材データである画像のうちの、前記表示装置に表示する部分の領域を表す表示画枠情報を含み、
    前記生成手段は、前記素材データである画像から、前記表示画枠情報が表す領域の画像を抽出することにより、前記出力データを生成する
    請求項３に記載の放送システム。
  5. 前記エフェクト情報は、前記素材データである画像に合成される被合成データを含み、
    前記生成手段は、前記エフェクト情報に基づいて、前記素材データである画像に、前記被合成データを合成することにより、前記出力データを生成する
    請求項２に記載の放送システム。
  6. 前記被合成データは、字幕のデータ、又は、ピクチャインピクチャ用のデータである
    請求項５に記載の放送システム。
  7. 前記エフェクト情報は、前記素材データである画像のうちの、前記表示装置に表示する部分の領域を表す表示画枠情報を含み、
    前記生成手段は、前記素材データである画像から、前記表示画枠情報が表す領域の画像を抽出することにより、前記出力データを生成する
    請求項２に記載の放送システム。
  8. 前記素材データは、前記カメラで撮影された複数ストリームの画像であり、
    前記エフェクト情報は、前記素材データである複数ストリームの画像から、１つのストリームの画像を選択することにより、前記表示装置に表示する画像を切り替えるための切り替え情報を含み、
    前記生成手段は、前記切り替え情報に基づいて、前記素材データである複数ストリームの画像から、１つのストリームの画像を選択することにより、前記出力データを生成する
    請求項２に記載の放送システム。
  9. 前記受信装置は、ユーザによる加工の指示を受け付ける指示入力手段をさらに有し、
    前記生成手段は、前記エフェクト情報、又は、ユーザによる加工を指示するための指示情報に基づいて、前記素材データに対して、ユーザが所望する加工を施す
    請求項５に記載の放送システム。
  10. 前記エフェクト情報は、前記被合成データの合成を行うタイミングを表すタイミング情報をさらに含み、
    前記生成手段は、ユーザによる加工の指示がなかった場合には、前記タイミング情報に基づいて、前記素材データである画像に、前記被合成データを合成することにより、前記出力データを生成する
    請求項９に記載の放送システム。
JP2008032673A 2008-02-14 2008-02-14 放送システム Expired - Fee Related JP5007681B2 (ja)

Priority Applications (8)

Application Number Priority Date Filing Date Title
JP2008032673A JP5007681B2 (ja) 2008-02-14 2008-02-14 放送システム
US12/735,489 US8767067B2 (en) 2008-02-14 2009-02-13 Broadcasting system, sending apparatus and sending method, receiving apparatus and receiving method, and program
RU2010132906/07A RU2454024C2 (ru) 2008-02-14 2009-02-13 Система широковещания, устройство передачи и способ передачи, устройство приема и способ приема и программа
BRPI0907897-5A BRPI0907897A2 (pt) 2008-02-14 2009-02-13 Sistema de radiodifusão, aparelhos de transmissão e de recepção, método de transmissão para um aparelho de transmissão, programa, e, método de recepção para um aparelho de recepção
CN200980104689XA CN101939988B (zh) 2008-02-14 2009-02-13 广播系统、发送设备和发送方法、接收设备和接收方法
KR1020107017592A KR20100121614A (ko) 2008-02-14 2009-02-13 방송 시스템, 송신 장치 및 송신 방법, 수신 장치 및 수신 방법, 및 프로그램
EP09711145A EP2242271A4 (en) 2008-02-14 2009-02-13 RADIATION SYSTEM, TRANSMITTER AND TRANSMISSION PROCEDURE, RECEIVER AND RECEPTION METHOD AND PROGRAM
PCT/JP2009/052363 WO2009101997A1 (ja) 2008-02-14 2009-02-13 放送システム、送信装置、及び送信方法、受信装置、及び受信方法、並びにプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008032673A JP5007681B2 (ja) 2008-02-14 2008-02-14 放送システム

Publications (3)

Publication Number Publication Date
JP2009194594A JP2009194594A (ja) 2009-08-27
JP2009194594A5 JP2009194594A5 (ja) 2009-10-08
JP5007681B2 true JP5007681B2 (ja) 2012-08-22

Family

ID=40957028

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008032673A Expired - Fee Related JP5007681B2 (ja) 2008-02-14 2008-02-14 放送システム

Country Status (8)

Country Link
US (1) US8767067B2 (ja)
EP (1) EP2242271A4 (ja)
JP (1) JP5007681B2 (ja)
KR (1) KR20100121614A (ja)
CN (1) CN101939988B (ja)
BR (1) BRPI0907897A2 (ja)
RU (1) RU2454024C2 (ja)
WO (1) WO2009101997A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101493884B1 (ko) * 2010-11-19 2015-02-17 한국전자통신연구원 4ｄ 방송 서비스를 위한 방송 네트워크와 홈 네트워크의 제어 방법 및 장치
MX338815B (es) 2012-02-07 2016-05-03 Sony Corp Dispositivo de recepcion, metodo de recepcion, y programa.
US9693108B2 (en) 2012-06-12 2017-06-27 Electronics And Telecommunications Research Institute Method and system for displaying user selectable picture
KR20140004341A (ko) 2012-07-02 2014-01-13 한국전자통신연구원 시청자 선택형 증강방송 서비스 제공 장치 및 방법
US20140115649A1 (en) * 2012-10-19 2014-04-24 Electronics And Telecommunications Research Institute Apparatus and method for providing realistic broadcasting
GB2517730A (en) * 2013-08-29 2015-03-04 Mediaproduccion S L A method and system for producing a video production
CN108965963A (zh) * 2018-09-30 2018-12-07 联想(北京)有限公司 电子设备

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6443840B2 (en) * 1986-03-10 2002-09-03 Response Reward Systems, L.C. Evaluation of responses of participatory broadcast audience with prediction of winning contestants; monitoring, checking and controlling of wagering, and automatic crediting and couponing
JP2829962B2 (ja) * 1988-04-28 1998-12-02 松下電器産業株式会社 テレビジョン受像機
JP2906462B2 (ja) * 1989-07-18 1999-06-21 ソニー株式会社 テレビジョン受信機
US5208660A (en) * 1989-07-29 1993-05-04 Sharp Kabushiki Kaisha Television display apparatus having picture-in-picture display function and the method of operating the same
JP3192924B2 (ja) 1995-06-20 2001-07-30 三洋電機株式会社 電子カタログシステム
JP3162633B2 (ja) * 1996-09-27 2001-05-08 松下電器産業株式会社 放送システム及びこれに用いる情報放送受信端末装置
JP3750760B2 (ja) * 1996-10-24 2006-03-01 ソニー株式会社 繰返し使用データ挿入装置およびディジタル放送送信システム
JP4240554B2 (ja) * 1997-07-11 2009-03-18 ソニー株式会社 画像符号化装置および画像符号化方法、並びに画像復号化装置および画像復号化方法
DE69842037D1 (de) * 1997-09-04 2011-01-20 Comcast Ip Holdings I Llc Vorrichtung für videozugang und kontrolle über ein rechnernetzwerk mit bildkorrektur
US6557171B1 (en) * 1998-02-02 2003-04-29 Matsushita Electric Industrial Co., Ltd. Digital tv broadcast sending apparatus, digital tv broadcast receiving apparatus, and digital tv broadcast sending / receiving system which facilitate preselection of tv programs, and computer readable recording medium storing a program for achieving a function of the digital tv broadcast receiving apparatus
JP4822304B2 (ja) * 1998-08-06 2011-11-24 ソニー株式会社 画像処理装置および画像処理方法、並びに記録媒体
JP2000358222A (ja) * 1999-06-15 2000-12-26 Toshiba Corp 表示表現装置および情報伝送方式
US7013479B2 (en) * 2000-04-14 2006-03-14 Matsushita Electric Industrial Co., Ltd. Broadcasting apparatus and method for pre-transmitting data carousel and receiving apparatus for receiving data carousel
US7647619B2 (en) * 2000-04-26 2010-01-12 Sony Corporation Scalable filtering table
JP2001344352A (ja) * 2000-05-31 2001-12-14 Toshiba Corp 生活支援装置および生活支援方法および広告情報提供方法
US20040014484A1 (en) * 2000-09-25 2004-01-22 Takahiro Kawashima Mobile terminal device
CN1262955C (zh) * 2001-01-23 2006-07-05 索尼公司 通信设备及方法,电子装置及控制方法
JP3818575B2 (ja) * 2001-09-19 2006-09-06 株式会社日立製作所 デジタル放送受信装置
JP4000844B2 (ja) * 2001-12-11 2007-10-31 日本電気株式会社 コンテンツ配信システム、コンテンツ配信システムの配信サーバ及び表示端末、コンテンツ配信プログラム
US7196733B2 (en) * 2002-01-28 2007-03-27 Canon Kabushiki Kaisha Apparatus for receiving broadcast data, method for displaying broadcast program, and computer program
JP4136383B2 (ja) * 2002-01-28 2008-08-20 キヤノン株式会社 テレビ受信装置及びその制御方法
US7073193B2 (en) * 2002-04-16 2006-07-04 Microsoft Corporation Media content descriptions
US20060161309A1 (en) * 2002-04-19 2006-07-20 Moore Steven E Irrigation control system
US7403840B2 (en) * 2002-04-19 2008-07-22 Irrisoft, Inc. Irrigation control system
US20030018969A1 (en) * 2002-06-21 2003-01-23 Richard Humpleman Method and system for interactive television services with targeted advertisement delivery and user redemption of delivered value
US7878908B2 (en) * 2002-11-14 2011-02-01 Nintendo Co., Ltd. Multiplexed secure video game play distribution
EP1526714A1 (en) * 2003-08-06 2005-04-27 Matsuhita Electric Industrial Co., Ltd. Information processing apparatus
JP2005210707A (ja) * 2003-12-26 2005-08-04 Sharp Corp 表示装置、テレビジョン受信機、画像表示制御方法及び画像表示制御処理プログラム
JP2005198061A (ja) * 2004-01-08 2005-07-21 Matsushita Electric Ind Co Ltd Ｃａｔｖシステム
CN1750612A (zh) * 2004-09-14 2006-03-22 乐金电子（沈阳）有限公司 具有风信息接收功能的图像显示设备及其控制方法
JP2006302052A (ja) * 2005-04-22 2006-11-02 Hitachi Ltd ストレージシステムおよびデジタル放送システム
US20070100698A1 (en) * 2005-07-08 2007-05-03 Onestop Media Group Adaptive advertisements and adaptive advertising distribution system
KR100757865B1 (ko) * 2005-07-20 2007-09-11 삼성전자주식회사 디지털 방송 수신기에서의 영상 처리 장치 및 방법
CN101258492A (zh) * 2005-09-07 2008-09-03 国际商业机器公司 显示装置、输出装置、显示系统、显示方法、媒体、程序以及外部单元
JP2006217662A (ja) 2006-04-26 2006-08-17 Sony Corp ディジタル放送受信装置
US20090144137A1 (en) * 2006-07-21 2009-06-04 Gregory Hagan Moulton Automated content production for largely continuous transmission
KR101295301B1 (ko) * 2006-11-10 2013-08-08 엘지전자 주식회사 수신기 및 이 수신기에서 방송 신호를 처리하는 방법
KR101176501B1 (ko) * 2006-11-17 2012-08-22 엘지전자 주식회사 데이터 서비스를 이용하여 방송관련정보를 표시할 수 있는방송수신 단말기 및 그 제어방법
KR100903070B1 (ko) * 2007-04-16 2009-06-18 삼성전자주식회사 데이터 재생 장치 및 방법
KR101333065B1 (ko) * 2007-07-04 2013-11-27 삼성전자주식회사 화면 속 화면을 이용한 방송데이터 표시방법 및 장치
US8904432B2 (en) * 2007-12-28 2014-12-02 Verizon Patent And Licensing Inc. Method and apparatus for providing displayable applications
JP5225037B2 (ja) * 2008-11-19 2013-07-03 株式会社東芝 番組情報表示装置および方法

Also Published As

Publication number Publication date
RU2454024C2 (ru) 2012-06-20
EP2242271A4 (en) 2012-02-29
WO2009101997A1 (ja) 2009-08-20
US8767067B2 (en) 2014-07-01
BRPI0907897A2 (pt) 2015-07-28
RU2010132906A (ru) 2012-02-10
EP2242271A1 (en) 2010-10-20
CN101939988B (zh) 2013-05-08
US20100289894A1 (en) 2010-11-18
JP2009194594A (ja) 2009-08-27
KR20100121614A (ko) 2010-11-18
CN101939988A (zh) 2011-01-05

Similar Documents

Publication Publication Date Title
JP5007681B2 (ja) 放送システム
JP6267961B2 (ja) 映像提供方法および送信装置
CN111742353B (zh) 信息处理装置、信息处理方法和程序
JP4126663B2 (ja) 立体映像視覚効果確認装置及び立体映像視覚効果確認方法
JP5777185B1 (ja) 全周動画配信システム、全周動画配信方法、通信端末装置およびそれらの制御方法と制御プログラム
US20070122786A1 (en) Video karaoke system
CN107852476B (zh) 动画播放装置、动画播放方法、动画播放系统以及动画发送装置
WO2015174501A1 (ja) 全周動画配信システム、全周動画配信方法、画像処理装置、通信端末装置およびそれらの制御方法と制御プログラム
US20150036050A1 (en) Television control apparatus and associated method
WO2012046371A1 (ja) 画像表示装置および画像表示方法
JP5517598B2 (ja) 映像再生装置及びその制御方法
JP4670923B2 (ja) 表示制御装置、表示制御方法、およびプログラム
JP2010074775A (ja) 表示制御装置、表示制御方法、およびプログラム
KR20080048308A (ko) 기본 장치와 확장 장치의 연동 장치 및 방법
JP6002191B2 (ja) 全周動画配信システム、全周動画配信方法、通信端末装置およびそれらの制御方法と制御プログラム
JP6024002B2 (ja) 動画配信システム
US20180176628A1 (en) Information device and display processing method
JP6934052B2 (ja) 表示制御装置、表示制御方法及びプログラム
KR102084970B1 (ko) 가상현실 관람 방법 및 가상현실 관람 시스템
KR100619494B1 (ko) 삼차원 가상 스투디오를 이용한 가라오케
KR20050116916A (ko) 환경 정보를 포함하는 콘텐츠를 생성하고 재생하는 방법과그 재생 장치
KR101194825B1 (ko) 멀티 앵글 디지털 방송 시스템 및 그 방법
JPH11261884A (ja) パノラマ映像放送方法および放送受信装置
KR100811022B1 (ko) 방송카메라와 연동된 주문형 방송서비스방법
JP5646033B2 (ja) 画像表示装置および画像表示方法

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090727

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120207

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120329

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120501

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120514

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150608

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees