Nothing Special   »   [go: up one dir, main page]

JP2014110604A - 車両周辺監視装置 - Google Patents

車両周辺監視装置 Download PDF

Info

Publication number
JP2014110604A
JP2014110604A JP2012265274A JP2012265274A JP2014110604A JP 2014110604 A JP2014110604 A JP 2014110604A JP 2012265274 A JP2012265274 A JP 2012265274A JP 2012265274 A JP2012265274 A JP 2012265274A JP 2014110604 A JP2014110604 A JP 2014110604A
Authority
JP
Japan
Prior art keywords
image
vehicle
bird
obstacle
periphery monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2012265274A
Other languages
English (en)
Inventor
Heishin O
丙辰 王
Muneaki Matsumoto
宗昭 松本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2012265274A priority Critical patent/JP2014110604A/ja
Priority to PCT/JP2013/006832 priority patent/WO2014087594A1/ja
Publication of JP2014110604A publication Critical patent/JP2014110604A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】鳥瞰画像の生成に伴って画像の一部に大きな歪みが生じても、車両運転者の違和感をより抑制することが可能な車両周辺監視装置を提供する。
【解決手段】車両の後退時には、車室内のディスプレイに車両後方の鳥瞰画像が表示される。この鳥瞰画像は、例えば車両後方にある駐車中の他車両11が車両に接近するにつれて(選択図中(a)→(b)→(c)→(d))、その切り出し範囲が可変設定される。鳥瞰画像内の他車両11は、鳥瞰画像の俯角が大きくなると大きく歪んだ状態で表示されるが、このように鳥瞰画像の切り出し範囲を調整することで、そのような領域をマスク画像12で覆い隠す場合(選択図中(e)参照)と比較して、より自然な画像を表示できる。
【選択図】図2

Description

本発明は、車両周辺を撮影して、その画像を車室内で表示することにより、車両周辺に存在する障害物等を、車両運転者が車室内から監視できるように構成された車両周辺監視装置に関する。
従来、この種の車両周辺監視装置として、車両に搭載されたカメラで撮影した車両周辺の原画像を加工して仮想的な鳥瞰画像を生成し、その鳥瞰画像を車室内の表示装置に表示する装置が知られている。
このような車両周辺監視装置において、原画像から鳥瞰画像への座標変換を行う際には、例えば、路面の高さを基準とする座標変換が行われる。この場合、高さのある障害物が原画像内に撮影されていると、路面から高い位置に存在する部分に相当する画素は、上記座標変換に伴って、路面から高い位置に存在する部分の陰に隠れた「背景側の路面」と同一位置へと移動することになる。このため、上記のような座標変換が行われた場合、鳥瞰画像内において上記障害物に相当する画像は「障害物が実際に存在する位置」から「障害物の陰に隠れた背景側の路面」にわたって存在するかのように見える歪んだ形態の画像となる。よって、車両運転者が鳥瞰画像を見たときに、上記のように大きく歪んだ障害物が鳥瞰画像内に見えると、無用な圧迫感を与えてしまうなど、例えば駐車支援する上で好ましくない状況になるおそれがあった。
これに対し、本願出願人は、このような鳥瞰画像において歪みの大きい範囲にマスク画像を重畳することで、車両運転者が戸惑わないように鳥瞰画像の表示形態を制御可能な車両周辺監視装置を提案している(例えば、特許文献1参照)。
特開2009−71790号公報
しかしながら、特許文献1記載の車両周辺監視装置では、鳥瞰画像の一部分がマスク画像に覆い隠されたかたちで表示されるため、このようにマスク部分が鳥瞰画像内に見えると、車両運転者に違和感を与えてしまうおそれがあった。
本発明は、上記問題を解決するためになされたものであり、その目的は、鳥瞰画像の生成に伴って画像の一部に大きな歪みが生じても、車両運転者の違和感をより抑制することが可能な車両周辺監視装置を提供することにある。
以下、本発明において採用した構成について説明する。
本発明の車両用周辺監視装置において、画像処理手段は、撮影手段によって撮影された原画像の少なくとも一部に対して所定の座標変換を施すことにより、撮影手段によって撮影された原画像に基づく仮想的な鳥瞰画像を生成する。
このような鳥瞰画像を、例えば俯角を大きくして生成すると、より近傍の障害物を監視しやすい鳥瞰画像とすることができる反面、高さのある障害物の画像が、鳥瞰画像内において大きく歪む傾向がある。
これに対して、本発明の画像処理手段は、このような鳥瞰画像から少なくとも一部を切り出すことにより、検知手段によって検知される障害物を含む障害物画像を生成する際、障害物と自車両との間の距離が所定の距離よりも短くなると、鳥瞰画像の切り出し範囲を可変設定する。
したがって、本発明によれば、鳥瞰画像上で広範囲にわたって障害物に過大な歪みが生じる場合に、鳥瞰画像の切り出し範囲を可変設定することにより、障害物における歪みが小さい領域だけが含まれるように表示して、車両運転者の違和感をより抑制することができる。
ところで、上記のように鳥瞰画像の切り出し範囲を可変設定するには、鳥瞰画像の切り出し範囲の中心位置を、その鳥瞰画像の上下方向にオフセットさせる(換言すれば、シフトさせる、移動させる)ことによって自車両の位置を示す自車両画像を障害物画像中に表示してもよいし、鳥瞰画像の切り出し範囲の大きさを小さくすることによって上記障害物画像を拡大表示させる態様であってもよい。
前者の場合、上記障害物画像における情報量を低下させることなく、車両運転者の違和感をより抑制できるというメリットを有し、後者の場合、切り出し範囲の中心位置を必ずしも変更することなく、車両運転者の違和感をより抑制できるため、画像処理手段に係る処理負担を軽減できるというメリットを有する。
また、本発明の画像処理手段は、検知手段によって検知される障害物までの距離に基づき、その障害物が車両に接近するほど、鳥瞰画像の俯角を大きくするものであるとよい。
このような車両周辺監視装置によれば、障害物が遠方にあるときは、鳥瞰画像の俯角を小さくして、より遠方にある障害物を監視できるようにする一方、障害物が接近したときは、鳥瞰画像の俯角を大きくして、車両のごく近傍の状況を監視することができる。また、このような俯角の変更に伴って鳥瞰画像上の歪みの目立つ範囲が変動しても、そのような範囲の変動に対応して鳥瞰画像の切り出し範囲を変更できる。
本発明の実施形態として例示した車両周辺監視装置の概略を示すブロック図である。 車両周辺監視装置による車両周辺の表示態様を例示した説明図である。 (a)は障害物までの距離と鳥瞰画像の俯角との関係を例示したグラフであり、(b)は障害物までの距離と鳥瞰画像のオフセット量との関係を例示したグラフである。 車両周辺監視装置が備えるECUにおいて実行される処理のフローチャートである。
次に、本発明の実施形態について一例を挙げて説明する。
[車両周辺監視装置の構成]
図1は、車両周辺監視装置全体の構成を示すブロック図である。
この車両周辺監視装置は、ECU1、超音波ソナー3a、シフト位置センサ3b、インテリジェント・カメラ5、およびディスプレイ(表示装置)7などを備えている。
ECU1は、マイクロコンピュータを中心に構成された周知の電子制御装置であり、このECU1によって車両周辺監視装置の各部が制御される。なお、このECU1は、車両周辺監視装置の制御専用に用意されたものであってもよいし、車両周辺監視装置以外の制御をも行う汎用のものであってもよい。
また、単一のECU1で構成してもよいし、複数のECUが協働して機能するものであってもよい。具体例を挙げれば、例えば、カメラ機能を制御するカメラECUをメインECUとして、ソナー機能を制御するソナーECUを従属させ、カメラECUの制御下でソナーECUが機能する構成としてもよい。
超音波ソナー3aは、本実施形態の場合は4つあり、これらが車両の後方に配設されている。この超音波ソナー3aから車両の後方における検知対象領域に向けて超音波を送波し、障害物によって反射された反射波を受波することにより、障害物の存在を検知したり、検知した障害物までの距離を測定したりすることができる。この超音波ソナー3を利用して得られた検知情報は、上述のECU1へと伝送される。
また、シフト位置センサ3bを利用して得られた検知情報も、上述のECU1へと伝送される。なお、シフト位置センサ3bは、車両のシフトレバーの位置(シフトレンジ)を検知するセンサであり、周知の構成が採用される。
インテリジェント・カメラ5は、車両の後方に配設され、車両後方における撮影対象領域の光景を撮影できるようになっている。また、このインテリジェント・カメラ5は、カメラ5aおよび制御装置5bによって構成されていて、ECU1から切り出し画角の指示を与えると、指示に応じた画角にて原画像の一部を原画像から切り出して提供する機能を備えている。
この機能を利用するため、インテリジェント・カメラ5には、ECU1から切り出し画角の指示が与えられる。具体的には、本実施形態の場合、切り出し画角の指示として、超音波ソナー3から取得した障害物までの距離に関する情報が、ECU1からインテリジェント・カメラ5に与えられる。
この指示を受け取ったインテリジェント・カメラ5は、指示に応じた画角にて原画像の一部を原画像から切り出す。具体的には、まず、障害物までの距離に基づいて、切り出し範囲や座標変換規則を決定する。なお、原画像のどの範囲を切り出して、どのような座標変換を行うかは、あらかじめ障害物までの距離に対応付けてプログラムされており、そのプログラムは、インテリジェント・カメラ5が備える制御装置5bのROMに記憶されている。
インテリジェント・カメラ5が備えるカメラ5aは、概ね180度の画角(視野角)を持つ広角カメラとなっているため、このカメラ5aによって撮像される原画像は、いわゆる魚眼レンズを利用して撮影されたような画像となっている。
しかし、インテリジェント・カメラ5が備える制御装置5bは、上記原画像に対して歪み補正や画角切り出し処理などの画像処理を施し、これにより、原画像に基づく仮想的な鳥瞰画像が生成されて、この鳥瞰画像がECU1に対して提供される。
ディスプレイ7は、車室内に配設される装置で、ECU1がインテリジェント・カメラ5から取得した鳥瞰画像の一部を鳥瞰画像から切り出した画像(但し、障害物が存在する場合には、その障害物を含む画像)が、ディスプレイ7に表示されるようになっている。
[車両周辺監視装置による車両周辺の表示態様]
次に、車両周辺監視装置による車両周辺の表示態様について説明する。
本実施形態の車両周辺監視装置は、車両が後退する際に、車両後方の光景を車室内のディスプレイ7に表示するものである。また、超音波ソナー3により車両の後方で障害物を検知した場合には、車室内に表示される鳥瞰画像の俯角が、障害物に近づくほど大きくなるように構成されている。さらに、鳥瞰画像の俯角によっては、鳥瞰画像の切り出し範囲が変更された画像が表示され、鳥瞰画像の俯角が大きくなるほど、鳥瞰画像の切り出し範囲の大きさが小さくなったり、切り出し範囲の中心が鳥瞰画像の上下方向にオフセットされる量(オフセット量)が大きくなったりするように構成されている。
以下、具体的な表示例を図示して説明すると、まず、車両運転者の操作によってシフトレバー位置がRに変更されると、ディスプレイ7には、図2(a)に示すように、車両後方の画像が表示される。この画像内には、車両後方に存在する障害物としての駐車中の他車両11が存在するが、この時点で他車両11は充分に遠い位置(本実施形態の場合、車両から1.5m以上離れた位置)にあるため、警告対象とはなっていない。
一方、車両が後退を開始し、上記他車両11が車両に接近すると(本実施形態の場合、車両から1.5m以内に至ると)、ディスプレイ7に表示される他車両11を含む画像(障害物画像)は、図2(b)に示すように、図2(a)よりもやや俯角が大きい鳥瞰画像となり、且つ、鳥瞰画像の切り出し範囲の中心がその鳥瞰画像の下方向にオフセットされた画像となり、他車両11における上方部の一部分が含まれないように表示される。
そして、さらに車両が後退して他車両11に接近すると、図2(c)に示すように、図2(b)よりもさらに俯角が大きい鳥瞰画像となり、且つ、鳥瞰画像の切り出し範囲の大きさが小さくなることで、他車両11における下方部が拡大され、これにより、他車両11における上方部の多くの部分が含まれないように表示される。
そして、さらに車両が後退して他車両11に接近すると、図2(d)に示すように、図2(c)よりもさらに俯角が大きい鳥瞰画像となり、且つ、鳥瞰画像の切り出し範囲の中心がその鳥瞰画像の下方向にさらにオフセットされた画像となり、他車両11における上方部の大部分が含まれないように表示される。
以上のように変化する画像のうち、図2(a)に示す画像は、最も俯角が小さいので、より遠方まで見渡すことができる画像となり、遠方にある障害物を確認しやすくなっている。
一方、図2(c)および(d)に示す画像は、俯角が大きいので、画面の下部には自車両の位置を示す画像(自車両画像)の一部(例えば、CGによって描かれた模擬的な自車両の画像の一部であってもよい)が映り込み、しかも自車両のごく近傍まで接近した他車両11を真上に近いところから見下ろすことができ、自車両と他車両11との位置関係を容易に把握することができる。
しかも、図2(b)、(c)および(d)に示す画像は、画像の歪みが大きくなる範囲をディスプレイ7の表示領域から追い出してあるので、車両運転者が歪んだ画像に違和感を覚えるのを抑制することができる。
このような他車両11の歪みは、俯角の大きい鳥瞰画像を生成した場合に、原画像の撮像視点と鳥瞰画像の仮想的な視点とのずれに起因して発生し、他車両11の高さが高い場合ほど、より大きな歪みが生じる傾向がある。このような歪みの大きい他車両11がディスプレイ7に映ると、車両運転者には、他車両11の大きさを誤解させ、圧迫間を与える原因となるので、駐車支援をする上では好ましいことではない。
さらに、このような歪みが大きくなる範囲を、図2(e)に示すように、マスク画像12によって覆い隠すと、マスク画像12が表示される分、ディスプレイ7による表示画像部分13が狭くなってしまい、視認性が低下したり、突如マスク画像12が映り込むことによって、車両運転者に違和感を与えたりする原因となる。
この点、上記のように鳥瞰画像の切り出し範囲を変更することにより、マスク画像12を表示させることなく(換言すれば、ディスプレイ7による表示画像部分13が狭くなることなく)、より自然な障害物画像をディスプレイ7に表示することができる。したがって、車両運転者は、歪みの大きい領域やマスク画像12を目にすることなく、歪みの小さい領域において車両と他車両11との関係を把握することができる。
図3(a)は、障害物までの距離と鳥瞰画像の俯角との関係を例示したグラフである。これらのような関係で、インテリジェント・カメラ5が、障害物までの距離に応じた俯角で鳥瞰画像を生成すれば、図2(a)に示したような鳥瞰画像をディスプレイ7に表示することができる。
また、図3(b)は、障害物までの距離と鳥瞰画像における切り出し範囲の中心がその鳥瞰画像の下方向にオフセットされる量(オフセット量)との関係を例示したグラフである。これらのような関係で、ECU1が、鳥瞰画像の俯角に応じた切り出し範囲で鳥瞰画像の一部を切り出せば、図2(b)〜同図(d)に示したような障害物画像をディスプレイ7に表示することができる。
なお、図3(a)は、検知距離に応じて、俯角が0度から90度まで連続的かつ線形に変化する例であるが、この俯角は段階的に変更されても非線形に変更されてもよく、例えば、0度、30度、60度、90度と4段階に変化するようにしてもよい。また、俯角の変動範囲も0度〜90度に限定されるものではなく、例えば、0度〜80度のものや、10度〜90度のものなど、俯角の下限・上限ともに任意に設定することができる。
また、図3(b)に例示したグラフは、検知距離に応じて、オフセット量が対画面比で0〜1/2まで連続的かつ線形に変化する例であるが、このオフセット量も段階的に変更されても非線形に変更されてもよく、例えば、0、1/4、1/2と3段階に変化するようにしてもよい。また、オフセット量の変動範囲も0〜1/2に限定されるものではなく、例えば、0〜2/3のものや、0〜1/4のものなど、具体的な数値範囲は下限・上限ともに任意に設定することができる。
なお、図示は省略するが、オフセット量と同様に、検知距離が小さくなるほど、鳥瞰画像の切り出し範囲の大きさを小さくすることによって、障害物画像をディスプレイ7に拡大表示させる倍率を大きくしてもよい。つまり、俯角が大きくなるほど障害物の像において歪んだ状態となる上方部の多くが含まれないように、オフセット量を大きくするか、画像を拡大表示させる倍率を大きくするかの少なくとも一方を行うようにすればよい。
[車両周辺監視装置が備えるECUにおいて実行される処理]
次に、上記のような表示形態を実現するため、車両周辺漢詩装置が備えるECU1において実行される処理の一例を、図4に基づいて説明する。
図4は、エンジン始動に伴ってECU1が稼動を開始した際に、ECU1が実行する処理の中から、車両周辺監視装置に関連する処理ステップのみを抽出してフローチャート化したものである。
この処理を開始すると、ECU1は、インテリジェント・カメラ5および超音波ソナー3aの初期状態として、それらを作動停止状態にする(S10)。そして、シフト位置センサ3bから供給される検知情報に基づいて、シフトレンジがRか否かを判断する(S20)。
ここで、シフトレンジがRでない場合は(S20:NO)、S10へと戻ることにより、S10〜S20の処理を繰り返す。この繰り返し処理により、インテリジェント・カメラ5および超音波ソナー3aは、シフトレンジがRに変更されるまでは、作動停止状態のまま待機することになる。
一方、車両運転者の操作によってシフトレンジがRに変更されたら(S20:YES)、その場合は、通常のリアビュー表示を行う(S30)。この通常のリアビュー表示は、最も俯角が小さい鳥瞰画像に相当する画像が表示される(図2(a)参照)。したがって、より俯角が大きい鳥瞰画像に比べ、車両運転者は、より遠方にある障害物を確認しやすくなる。
続いて、ECU1は、超音波ソナー3から障害物の検知情報を取得するため、超音波ソナー3aを制御して超音波送受波動作を実行させる(S40)。そして、障害物を検知したか否かを判断し(S50)、障害物を検知していない場合は(S50:NO)、S40の処理へと戻る。
一方、S50の処理において、障害物を検知した場合は(S50:YES)、検知距離を読み取り(S60)、俯角制御、および鳥瞰画像の切り出し制御(オフセット量制御、切り出し範囲制御)を実行する(S70)。
S70の処理では、S60の処理で読み取った検知距離をインテリジェント・カメラ5に与えることにより、インテリジェント・カメラ5に対して切り出し画角の指示を与える。インテリジェント・カメラ5は、ECU1から与えられた検知距離に応じた俯角で、鳥瞰画像を生成し、その鳥瞰画像をECU1に提供する。
この鳥瞰画像を取得したECU1は、さらに、インテリジェント・カメラ5から提供される鳥瞰画像から、検知距離に応じたオフセット量および切り出し範囲の大きさを変更することによって鳥瞰画像の一部を切り出した画像(障害物画像)を生成して、ディスプレイ7に表示する。また、このときのオフセット量に応じて、自車両の多くの部分が含まれるように自車両画像を生成して、検知距離に応じた位置に生成した自車両画像を障害物画像とともに、ディスプレイ7に表示する。
こうしてS70の処理を終えたら、ECU1は、シフトレンジの変更があるか否かを判断し(S80)、変更がなければ(S80:NO)、S40の処理へと戻って、S40移行の処理を繰り返す。一方、S80の処理において、シフトレンジの変更があった場合は(S80:YES)、S20の処理へと戻る。
その結果、シフトレンジがRであれば(S20:YES)、再びS30以降の処理が実行される一方、シフトレンジがRでなければ(S20:NO)、S10の処理へと戻り、インテリジェント・カメラ5および超音波ソナー3aは、作動停止状態に移行する。
[本実施形態の効果]
以上説明した通り、上記車両周辺監視装置によれば、インテリジェント・カメラ5が生成した鳥瞰画像内の一部に歪みの大きい部分が存在していても、そのような歪みがある部分が含まれないようにディスプレイ7に表示することができる。したがって、そのような歪みに起因して車両運転者が戸惑わないような表示状態にすることができる。
また、上記車両周辺監視装置においては、インテリジェント・カメラ5が生成する鳥瞰画像の俯角、オフセット量、および切り出し範囲の大きさは、双方とも超音波ソナー3によって検知した障害物までの距離に応じて変動させている。そのため、鳥瞰画像の俯角、オフセット量、および切り出し範囲の大きさは、互いに連動して変化することになる。
すなわち、本実施形態において、オフセット量や切り出し範囲の大きさの可変設定によって鳥瞰画像から除外される障害物における上方部の範囲は、鳥瞰画像の俯角が大きくなるほど拡大する構成になっている。したがって、このような構成を採用すれば、俯角を小さくして、より遠方の障害物を確認しやすい鳥瞰画像とすることができ、また、俯角を大きくして、より近傍の障害物を監視しやすい障害物画像とすることもできる。
しかも、俯角を大きくしたことに伴って歪み具合が拡大すれば、そのような歪みの大きい範囲が障害物画像に含まれないように、オフセット量を大きくしたり、画像を拡大表示させる倍率を大きくしたりすることができるので、車両運転者の違和感を払拭することができる。
さらに、このような歪みが大きくなる範囲をマスク画像によって覆い隠さずに済むので、ディスプレイ7による表示画像部分13が狭くなることなく、より自然な障害物画像をディスプレイ7に表示することができる。したがって、車両運転者は、歪みの大きい領域やマスク画像12を目にすることなく、歪みの小さい領域において車両と障害物との関係を好適に把握することができる。
また、自車両と他車両11との間の距離が短くなると、ディスプレイ7における画面の下部に自車両の位置を示す画像(自車両画像)の一部を表示させることにより、自車両と他車両11との位置関係を容易に把握することができる。
[発明との対応]
なお、本実施形態において、インテリジェント・カメラ5のカメラ5aが撮影手段、超音波ソナー3aが検知手段、インテリジェント・カメラ5の制御装置5bおよび車両周辺監視装置のECU1が画像処理手段、ディスプレイ7が表示手段の各一例にそれぞれ相当する。
[他の実施形態]
以上、本発明の実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、様々な態様にて実施することが可能である。
例えば、上記実施形態の車両周辺監視装置では、撮影手段としてインテリジェント・カメラ5のカメラ5aを採用し、インテリジェント・カメラ5の制御装置5bが鳥瞰画像を生成するように構成されているが、これに限定されるものではなく、車両周辺監視装置のECU1が、カメラ5aによって撮影された原画像に基づいて鳥瞰画像を生成し、さらに鳥瞰画像から少なくとも一部を切り出すことにより障害物画像を生成してもよい。
また、上記実施形態の車両周辺監視装置では、超音波ソナー3aでの検知距離に応じて鳥瞰画像の俯角が変更される例を示したが、これについては、俯角が変更されずに一定であってもよい。この場合、俯角が一定であり、超音波ソナー3aでの検知距離に基づき、障害物が車両に接近するほど、オフセット量および表示画像の倍率が大きくなるように変更されることになる。
あるいは、手動で鳥瞰画像の俯角を変更可能な装置として構成されていてもよい。この場合でも、俯角の変動に連動してオフセット量や切り出し範囲の大きさを可変設定させれば、上記実施形態同様、歪みの大きい範囲をディスプレイ7の表示領域から追い出すことができる。
さらに、上記実施形態の車両周辺監視装置では、検知手段として超音波ソナー3aを採用しているが、これに限定されるものではなく、例えばレーザ波やミリ波といった電磁波を用いた他のレーダ装置を採用してもよい。
1…ECU、3a…超音波ソナー、3b…シフト位置センサ、5…インテリジェント・カメラ、5a…カメラ、5b…制御装置、7…ディスプレイ、11…他車両、12…マスク画像、13…表示画像部分。

Claims (4)

  1. 自車両周辺を撮影可能な撮影手段(5a)と、
    前記自車両周辺に存在する障害物および前記障害物と自車両との間の距離を検知可能な検知手段(3a)と、
    前記撮影手段によって撮影された原画像の少なくとも一部に対して所定の座標変換を施すことにより、前記原画像に基づく仮想的な鳥瞰画像を生成し、該鳥瞰画像から少なくとも一部を切り出すことにより、前記検知手段によって検知された前記障害物を含む障害物画像を生成する画像処理手段(5b,1)と、
    前記画像処理手段によって生成された画像を、車室内において所定の表示領域に表示する表示手段(7)と、
    を備え、
    前記画像処理手段は、前記障害物画像を生成する際、前記障害物と前記自車両との間の距離が所定の距離よりも短くなると、前記鳥瞰画像からの切り出し範囲を可変設定することを特徴とする車両周辺監視装置。
  2. 前記画像処理手段は、前記切り出し範囲の中心位置を前記鳥瞰画像の上下方向にオフセットさせ、前記自車両の位置を示す自車両画像を前記障害物画像中に表示することを特徴とする請求項1に記載の車両周辺監視装置。
  3. 前記画像処理手段は、前記切り出し範囲を小さくすることによって前記障害物画像を前記表示手段に拡大表示させることを特徴とする請求項1または請求項2に記載の車両周辺監視装置。
  4. 前記画像処理手段は、前記検知手段によって検知される前記障害物までの距離に基づき、該障害物が前記車両に接近するほど、前記鳥瞰画像の俯角を大きくすることを特徴とする請求項1ないし請求項3のいずれか1項に記載の車両周辺監視装置。
JP2012265274A 2012-12-04 2012-12-04 車両周辺監視装置 Withdrawn JP2014110604A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2012265274A JP2014110604A (ja) 2012-12-04 2012-12-04 車両周辺監視装置
PCT/JP2013/006832 WO2014087594A1 (ja) 2012-12-04 2013-11-21 車両監視装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012265274A JP2014110604A (ja) 2012-12-04 2012-12-04 車両周辺監視装置

Publications (1)

Publication Number Publication Date
JP2014110604A true JP2014110604A (ja) 2014-06-12

Family

ID=50883036

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012265274A Withdrawn JP2014110604A (ja) 2012-12-04 2012-12-04 車両周辺監視装置

Country Status (2)

Country Link
JP (1) JP2014110604A (ja)
WO (1) WO2014087594A1 (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104554009A (zh) * 2014-12-31 2015-04-29 广东光阵光电科技有限公司 双视角倒车摄像方法及系统
US20150341597A1 (en) * 2014-05-22 2015-11-26 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Method for presenting a vehicle's environment on a display apparatus; a display apparatus; a system comprising a plurality of image capturing units and a display apparatus; a computer program
CN107264400A (zh) * 2016-03-31 2017-10-20 株式会社斯巴鲁 显示装置
WO2018012070A1 (ja) * 2016-07-12 2018-01-18 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2018014583A (ja) * 2016-07-20 2018-01-25 クラリオン株式会社 画像処理装置
JP2018012483A (ja) * 2016-07-12 2018-01-25 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2018180142A1 (ja) * 2017-03-31 2018-10-04 マツダ株式会社 車両用画像表示装置及び画像処理方法
WO2021111891A1 (ja) * 2019-12-05 2021-06-10 ソニーグループ株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP2022181281A (ja) * 2021-05-26 2022-12-08 トヨタ自動車株式会社 駐車支援装置
WO2023100415A1 (ja) * 2021-11-30 2023-06-08 株式会社光庭インフォ 情報処理装置、移動体、情報処理方法及びプログラム
JP7551699B2 (ja) 2022-07-05 2024-09-17 キヤノン株式会社 カメラシステムおよびその制御方法、プログラム

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6493143B2 (ja) * 2015-10-15 2019-04-03 株式会社デンソー 表示制御装置及び表示制御プログラム
EP3537713B1 (en) * 2016-11-01 2021-09-01 Sumitomo (S.H.I.) Construction Machinery Co., Ltd. Surroundings monitoring system for a work machine
JP6586972B2 (ja) * 2017-03-31 2019-10-09 マツダ株式会社 車両用画像表示装置及び画像処理方法
CN118355655A (zh) * 2021-12-06 2024-07-16 株式会社日本光庭信息 信息处理装置、移动体、信息处理方法及程序

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4458138B2 (ja) * 2007-09-18 2010-04-28 株式会社デンソー 車両周辺監視装置
JP2010064725A (ja) * 2008-09-15 2010-03-25 Denso Corp 車載撮影画像表示制御装置、車載撮影画像表示制御装置用のプログラム、および車載撮影画像表示システム
JP2010116086A (ja) * 2008-11-14 2010-05-27 Alpine Electronics Inc 車載用表示装置、表示方法および表示プログラム
JP5212651B2 (ja) * 2009-03-27 2013-06-19 株式会社デンソー 車外撮影画像表示システム。
JP2011091527A (ja) * 2009-10-21 2011-05-06 Panasonic Corp 映像変換装置及び撮像装置

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150341597A1 (en) * 2014-05-22 2015-11-26 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Method for presenting a vehicle's environment on a display apparatus; a display apparatus; a system comprising a plurality of image capturing units and a display apparatus; a computer program
CN104554009A (zh) * 2014-12-31 2015-04-29 广东光阵光电科技有限公司 双视角倒车摄像方法及系统
CN107264400B (zh) * 2016-03-31 2019-09-06 株式会社斯巴鲁 显示装置
CN107264400A (zh) * 2016-03-31 2017-10-20 株式会社斯巴鲁 显示装置
WO2018012070A1 (ja) * 2016-07-12 2018-01-18 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
JP2018012483A (ja) * 2016-07-12 2018-01-25 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2018016274A1 (ja) * 2016-07-20 2018-01-25 クラリオン株式会社 画像処理装置
JP2018014583A (ja) * 2016-07-20 2018-01-25 クラリオン株式会社 画像処理装置
WO2018180142A1 (ja) * 2017-03-31 2018-10-04 マツダ株式会社 車両用画像表示装置及び画像処理方法
JP2018171965A (ja) * 2017-03-31 2018-11-08 マツダ株式会社 車両用画像表示装置及び画像処理方法
WO2021111891A1 (ja) * 2019-12-05 2021-06-10 ソニーグループ株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP2022181281A (ja) * 2021-05-26 2022-12-08 トヨタ自動車株式会社 駐車支援装置
JP7375792B2 (ja) 2021-05-26 2023-11-08 トヨタ自動車株式会社 駐車支援装置
WO2023100415A1 (ja) * 2021-11-30 2023-06-08 株式会社光庭インフォ 情報処理装置、移動体、情報処理方法及びプログラム
JP7551699B2 (ja) 2022-07-05 2024-09-17 キヤノン株式会社 カメラシステムおよびその制御方法、プログラム

Also Published As

Publication number Publication date
WO2014087594A1 (ja) 2014-06-12

Similar Documents

Publication Publication Date Title
WO2014087594A1 (ja) 車両監視装置
JP4458138B2 (ja) 車両周辺監視装置
US20220210344A1 (en) Image display apparatus
JP5500877B2 (ja) 車載用画像表示装置および画像のトリミング方法
JP6493361B2 (ja) 車両用装置、車両用プログラム、フィルタ設計プログラム
JP5953824B2 (ja) 車両用後方視界支援装置及び車両用後方視界支援方法
WO2009116327A1 (ja) 画像処理装置及び方法、運転支援システム、車両
US20120293659A1 (en) Parameter determining device, parameter determining system, parameter determining method, and recording medium
US10499014B2 (en) Image generation apparatus
JP2009055427A (ja) 映像処理装置及びカメラ
US9463743B2 (en) Vehicle information display device and vehicle information display method
JP6744236B2 (ja) 画像表示装置
US20220166924A1 (en) Image display apparatus
JP5760999B2 (ja) 画像処理装置及び画像処理方法
JP2018127083A (ja) 画像表示装置
JP2005301144A (ja) 虚像表示装置およびプログラム
JP2013506897A (ja) 交通状況のビデオデータと間隔データを組み合わせて視覚的に表示するための方法および装置
US11816787B2 (en) Method for representing an environmental region of a motor vehicle with virtual, elongated distance markers in an image, computer program product as well as display system
KR20180020274A (ko) 패널 변환
KR20180021822A (ko) 후방 교차 교통-퀵 룩스
CN112351242A (zh) 图像处理装置以及图像处理方法
JP6269014B2 (ja) フォーカス制御装置およびフォーカス制御方法
WO2017168953A1 (ja) 車両用装置、車両用プログラム、フィルタ設計プログラム
JP7135378B2 (ja) 周辺監視装置
US20200231099A1 (en) Image processing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140528

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20150219