CN110073415A - 用于交通工具的全景环视系统 - Google Patents
用于交通工具的全景环视系统 Download PDFInfo
- Publication number
- CN110073415A CN110073415A CN201780076469.5A CN201780076469A CN110073415A CN 110073415 A CN110073415 A CN 110073415A CN 201780076469 A CN201780076469 A CN 201780076469A CN 110073415 A CN110073415 A CN 110073415A
- Authority
- CN
- China
- Prior art keywords
- real camera
- image
- camera
- level
- vehicles
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000009466 transformation Effects 0.000 claims abstract description 20
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 claims abstract description 13
- 238000000034 method Methods 0.000 claims description 12
- 238000010586 diagram Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000011248 coating agent Substances 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000009738 saturating Methods 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/02—Affine transformations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/102—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using 360 degree surveillance camera system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Geometry (AREA)
- Computing Systems (AREA)
- Computer Graphics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本发明涉及一种用于交通工具的全景环视系统。该全景环视系统至少包含真实摄像机(2)、虚拟摄像机(7)、图像处理单元、显示单元,该真实摄像机用于从非居中的位置拍摄交通工具周围环境的图像,其中,显示单元设置用于以投影方式:显示由真实摄像机(2)拍摄的图像并在由真实摄像机(2)拍摄的图像上方作为叠加层显示至少一个几何形状(11至13)。图像处理单元设置用于将真实摄像机(2)拍摄的图像投影到垂直于真实摄像机(2)的第一层面(9),以矫正由真实摄像机(2)拍摄的图像中因该真实摄像机(2)的非居中位置造成的透视失真,将所述至少一个几何形状(11至13)投影到垂直于虚拟摄像机(7)的第二层面(10)上,以使该至少一个几何形状(11至13)不失真地显示在显示单元(4)上。另外,借助在真实摄像机(2)和虚拟摄像机(7)之间的Delta变换确定出在第一层面(9)和第二层面(10)之间的仿射变换(T),将所确定的仿射变换(T)应用于含有由真实摄像机(2)拍摄的、经投影和矫正的真实摄像机(2)图像(8‘)的第一层面(9),以使经矫正的真实摄像机(2)图像(8‘)的、经修正的显示(8λ“)在第二层面(10)中相对于非失真的所述至少一个几何形状(11至13)取向。
Description
本发明涉及一种用于交通工具的全景环视系统。此外,本发明涉及一种用于交通工具周围环境的全景环视显示的方法。其它权利要求涉及用于执行该方法的程序单元和计算机可读的媒介。
在全景环视系统显示单元上的显示典型情况下包括真实摄像机的投影图像,该摄像机安装在交通工具上并对交通工具周围环境进行拍摄。此外,几何形状作为叠加层/悬浮覆盖层/图层被置于摄像机的投影图像上方,其中,所述几何形状例如可是交通工具的轨迹。在此,摄像机的投影图象必须与叠加层相匹配。但如果摄像机以非居中形式安装在交通工具上,则叠加层或摄像机图像看起来会失真。这样失真的外观是违背意愿的。
因此,本发明的任务是,提供一种开篇所提形式的全景环视系统和方法,它能使叠加层和摄像机图像都无失真地、以预定方式相对取向地显示在交通工具显示单元上。
该任务通过独立权利要求的主题解决。有益的实施方式是从属权利要求、下面的描述以及图示的主题。
根据本发明的第一方面,提供了一种用于交通工具的全景环视系统。
全景环视系统至少包括用于从非居中位置拍摄交通工具周围环境的图像的实体摄像机或者说真实摄像机。所述真实摄像机优选是指数字式摄像机,它能拍摄交通工具周围环境的图像或视频,并将代表所拍摄图像或视频的数据加以存储、输出以及传输。全景环视系统也可包含几个,例如四个真实摄像机,其可以这样安装在交通工具上,多个真实摄像机的单一图像可被合成一总的全景图像(例如交通工具的一360度全景图像)。至少一个真实摄像机尤其被设置为,从一非居中位置拍摄交通工具周围环境的多幅图像。虽然本发明针对拍摄单一摄像机的单一图像的情况进行说明,但这类解释也适用于可由至少一个真实摄像机拍摄的,源于交通工具周围环境非居中位置的多幅图像中的其他图像。“非居中位置”的特征在此尤其可理解为,摄像机关于交通工具的假想纵轴偏心地或倾斜地安装在交通工具中或交通工具上并可对交通工具前方区域进行拍摄。
此外,全景环视系统包括虚拟摄像机、图像处理单元和显示单元。图像处理单元一方面以通信的方式与真实摄像机相连接。另一方面,也以通信的方式与显示单元相连接。以此方式,尤其是真实摄影机可将图像数据发送到图像处理单元,图像处理单元可处理图像数据并将所处理的图像数据传送到显示单元。图像处理单元可基于软件实现。
一方面,显示单元设置为以投影方式显示由真实摄像机拍摄的图像。另一方面,显示单元还被设置为将至少一个几何形状作为叠加层投影到真实摄像机所拍摄图像上方加以显示。
图像处理单元设置用于,将由真实摄像机拍摄的图像投影到垂直于真实摄像机的第一表面或第一层面,以矫正真实摄像机拍摄的图像中因真实摄像机的非居中位置造成的透视失真。
此外,图像处理单元还设置用于,将至少一个几何形状投影到垂直于虚拟摄像机的第二表面或第二层面上,以使至少一个几何形状不失真地显示在显示单元上。由此,真实摄影机在结构上实际存在,而虚拟相机仅是假想的或输入到显示单元上显示的图像中,并代表根据本发明的全方位视觉系统的用户或具有根据本发明的全方位视觉系统的交通工具的虚拟视角。第二层面是在显示单元上显示的层面,该层面例如在交通工具仪表板区域的监视器上,并是交通工具用户可见的。
此外,图像处理单元设置用于,借助在真实摄像机和虚拟摄像机之间的Delta变换确定出第一层面和第二层面之间的仿射变换,并将所确定的仿射变换应用于含有由真实摄像机拍摄的、经投影和矫正的真实摄像机图像的第一层面,以使经矫正的真实摄像机图像的、经修正的显示(包含在第一层面中)在第二层面中相对于非失真的所述至少一个几何形状取向。
Delta变换考虑了真实摄像机与虚拟摄像机有关外部摄像机参数和固有摄像机参数方面的偏差。为了使由真实摄像机拍摄的图像中的对象不倾斜地显示在第二平面中,这将是透视校正的,Delta变换特别是考虑到真实摄像机非居中地安装在交通工具上的情况。
借助仿射变换,经矫正地投影在第一层面上的摄像机图像以如下的方式被人为地失真:就像它是从一虚拟摄像机的位置出发拍摄的。由此,能使在由真实摄像机拍摄的图像中包含的目标在第二层面上被矫正显示,同时至少一个例如交通工具轨迹等几何形状被作为叠加层不失真地显示在第二层面上,其中,对象和至少一个几何形状在第二层面上正确地相对取向。
根据本发明的第二方面提供了一种交通工具,它包括根据本发明第一方面的全景环视系统,其中,真实摄像机以非居中的形式安装在交通工具上。交通工具例如可以是汽车、巴士或载重汽车等机动车,也可以是有轨车辆、船、诸如直升飞机或飞机等飞行工具,或是例如自行车。
根据本发明的第三观点,提供了一种对根据本发明第二观点的交通工具的周围环境进行全景环视显示的方法。该方法包括:借助真实摄像机拍摄交通工具周围环境的图像,并将由真实摄像机拍摄的图像投影到垂直于真实摄像机的第一层面上,以矫正由真实摄像机拍摄的图像中因该真实摄像机的非居中位置造成的透视失真。此外,将至少一个几何形状作为叠加层投影到垂直于虚拟摄像机的第二层面上,以使该至少一个几何形状不失真地显示在显示单元上。此外,借助在真实摄像机和虚拟摄像机之间的Delta变换确定出在第一层面和第二层面之间的仿射变换,并将所确定的仿射变换应用于含有由真实摄像机拍摄的、经投影和矫正的真实摄像机图像的第一层面,以使经矫正的真实摄像机图像的、经修正的显示在第二层面中相对于非失真的所述至少一个几何形状取向。
根据本发明第四方面提供了一种程序单元,当在处理器上执行程序单元时该程序单元指示处理器执行根据本发明第三观点的方法步骤。
根据本发明第五观点提供了一种上计算机可读的媒介,在该计算机可读的媒介上存储有程序单元,当在处理器上执行程序单元时该程序单元指示处理器执行根据本发明第三观点的方法步骤。
下面根据示意图详细解释本发明的实施例。其中:
图1是带有根据本发明的全景环视系统的实施例的交通工具的侧视图,
图2是图1所示交通工具的高度简化的俯视图,以及
图3是图1所示全景环视系统的可能工作方式的原理图。
图1和2示出机动车形式的交通工具1。交通工具1包括至少一个数字式的实体摄像机或真实摄像机2、图像处理单元3,以及监视器形式的显示单元4,该监视器在交通工具1内设置在用户(未示出)的可见范围中。图像处理单元3以通信方式与真实摄像机2和显示单元4相连接,以使真实摄像机2拍摄的图像的图像数据能被传输给图像处理单元3,图像处理单元又能处理所接收的图像数据并将处理后的图像数据传输到显示单元4。作为替代选择,图像处理单元3也可集成在真实摄像机2或显示单元4中。
交通工具1在一道路5上运动,真实摄像机2安装在交通工具1上的方式是,使真实摄像机2能够拍摄在交通工具1外部周围环境中的前方区域6的图像。从图2中可见,真实摄像机2以非居中形式安装在交通工具1上。图2展示了交通工具1的纵轴L,其中,真实摄像机2横向错开地安装在交通工具1的纵轴L旁边。此外,图2还显示,真实摄像机2在交通工具上的安装相对于交通工具1的纵轴L是倾斜的,即不是与其平行的。真实摄像机2、图像处理单元3和显示单元4共同构成了交通工具1的全景环视系统,其中,图像处理单元3还附加生成一不存在的虚拟摄像机7。
图3示出了怎样处理由真实摄像机2拍摄的交通工具1周围环境6的图像,以在交通工具1的显示单元4上在交通工具1的全景图中加以显示。由真实摄像机2拍摄的图像包含多个对象,其中,在图3中非常示意性地示出了这些对象中的一个8。该对象8例如可以是交通工具1前方区域中另一交通工具(未示出)的保险杠。尽管下面参照对象8对全景环视系统的工作原理进行解释,但这些解释同样适用于由真实摄像机2拍摄的图像中所含的其他对象(未示出)。
带有对象8的、由真实摄像机2拍摄的图像被投影到垂直于真实摄像机2的第一表面或第一层面9,以矫正真实摄像机2拍摄的图像因真实摄像机2非居中的定位所造成的透视失真。这样,在第一层面9内形成了对象8的经修正的第一显示8‘。交通工具1的显示单元4上不显示第一层面9的图像内容,而是显示第二层面10的图像内容,这将在后面解释。
图像处理单元3将至少一个几何形状11到13作为叠加层投影到垂直于虚拟摄像机7的第二层面10,以使带有该至少一个几何形状11至13的第二层面10不失真地显示在交通工具1的显示单元4上。在图3中作为示例,示出了描述交通工具1的预定轨迹的三个几何形状。
此外,图像处理单元3借助真实摄像机2和虚拟摄像机7之间的Delta变换确定出第一层面9和第二层面10之间的仿射变换T,并将所确定的仿射变换T应用到含有对象8的第一修正显示8‘的第一层面9上。由此,在第二层面10内形成了对象8的经修正的第二显示8“,其中,在第二平面10中使经修正的第二显示8“相对于至少一个不失真的几何形状11至13取向。带有对象8的经修正的显示8“以及几何形状11至13的第二层面被显示在显示单元4上。
Claims (5)
1.用于交通工具(1)的全景环视系统,该全景环视系统至少包含真实摄像机(2)、虚拟摄像机(7)、图像处理单元(3)、显示单元(4),该真实摄像机用于从非居中的位置拍摄交通工具(1)周围环境(6)的图像,其中,显示单元(4)设置用于以投影方式:
-显示由真实摄像机(2)拍摄的图像并
-在由真实摄像机(2)拍摄的图像上方作为叠加层显示至少一个几何形状(11至13),
其中,图像处理单元(3)设置用于,
-将真实摄像机(2)拍摄的图像投影到垂直于真实摄像机(2)的第一层面(9),以矫正由真实摄像机(2)拍摄的图像中因该真实摄像机(2)的非居中位置造成的透视失真,
-将所述至少一个几何形状(11至13)投影到垂直于虚拟摄像机(7)的第二层面(10)上,以使该至少一个几何形状(11至13)不失真地显示在显示单元(4)上,
-借助在真实摄像机(2)和虚拟摄像机(7)之间的Delta变换确定出在第一层面(9)和第二层面(10)之间的仿射变换(T),
-将所确定的仿射变换(T)应用于含有由真实摄像机(2)拍摄的、经投影和矫正的真实摄像机(2)图像(8‘)的第一层面(9),以使经矫正的真实摄像机(2)图像(8‘)的、经修正的显示(8“)在第二层面(10)中相对于非失真的所述至少一个几何形状(11至13)取向。
2.交通工具(1),其包含根据权利要求1所述的全景环视系统,其中,真实摄像机(2)非居中地安装在交通工具(1)上。
3.用于以全景环视的方式显示根据权利要求2所述的交通工具(1)的周围环境(6)的方法,该方法包括下列步骤:
-借助真实摄像机(2)拍摄交通工具(1)周围环境(6)的图像,
-将由真实摄像机(2)拍摄的图像投影到垂直于真实摄像机(2)的第一层面(9),以矫正由真实摄像机(2)拍摄的图像中因该真实摄像机(2)的非居中位置造成的透视失真,
-将至少一个几何形状(11至13)作为叠加层投影到垂直于虚拟摄像机(7)的第二层面(9)上,以使该至少一个几何形状(11至13)不失真地显示在显示单元(4)上,
-借助在真实摄像机(2)和虚拟摄像机(7)之间的Delta变换确定出在第一层面(9)和第二层面(10)之间的仿射变换(T),
-将所确定的仿射变换(T)应用于含有由真实摄像机(2)拍摄的、经投影和矫正的真实摄像机(2)图像的第一层面(9),以使经矫正的真实摄像机(2)图像(8‘)的、经修正的显示(8“)在第二层面(10)中相对于非失真的所述至少一个几何形状(11至13)取向。
4.程序单元,当在处理器上执行程序单元时该程序单元指示处理器执行根据权利要求3所述的方法步骤。
5.计算机可读的媒介,在该计算机可读的媒介上存储有程序单元,当在处理器上执行程序单元时该程序单元指示处理器执行根据权利要求3所述的方法步骤。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102016225066.3A DE102016225066A1 (de) | 2016-12-15 | 2016-12-15 | Rundumsichtsystem für ein Fahrzeug |
DE102016225066.3 | 2016-12-15 | ||
PCT/DE2017/200113 WO2018108213A1 (de) | 2016-12-15 | 2017-10-25 | Rundumsichtsystem für ein fahrzeug |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110073415A true CN110073415A (zh) | 2019-07-30 |
CN110073415B CN110073415B (zh) | 2023-08-22 |
Family
ID=60515069
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780076469.5A Active CN110073415B (zh) | 2016-12-15 | 2017-10-25 | 用于交通工具的全景环视系统 |
Country Status (7)
Country | Link |
---|---|
US (1) | US10904432B2 (zh) |
EP (1) | EP3555843A1 (zh) |
JP (1) | JP2020502640A (zh) |
KR (1) | KR102315748B1 (zh) |
CN (1) | CN110073415B (zh) |
DE (2) | DE102016225066A1 (zh) |
WO (1) | WO2018108213A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114633692A (zh) * | 2022-03-14 | 2022-06-17 | 深圳市艾为智能有限公司 | 一种偏心镜头在cms系统中的应用方法 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102016211227A1 (de) | 2016-06-23 | 2017-12-28 | Conti Temic Microelectronic Gmbh | Verfahren und Fahrzeugsteuersystem zum Erzeugen von Abbildungen eines Umfeldmodells und entsprechendes Fahrzeug |
DE102018203590A1 (de) | 2018-03-09 | 2019-09-12 | Conti Temic Microelectronic Gmbh | Surroundview-System mit angepasster Projektionsfläche |
US11544895B2 (en) * | 2018-09-26 | 2023-01-03 | Coherent Logix, Inc. | Surround view generation |
TWI693578B (zh) * | 2018-10-24 | 2020-05-11 | 緯創資通股份有限公司 | 影像拼接處理方法以及其系統 |
CN111667538B (zh) * | 2020-04-20 | 2023-10-24 | 长城汽车股份有限公司 | 一种全景环视系统的标定方法、装置及系统 |
KR20230067218A (ko) | 2021-11-09 | 2023-05-16 | 에이엠알오 주식회사 | 안전비행을 위한 항공기의 3d 영상표시 시스템 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080136912A1 (en) * | 2006-09-26 | 2008-06-12 | Hirotaka Iwano | Image generating apparatus and image generating method |
JP2010239409A (ja) * | 2009-03-31 | 2010-10-21 | Aisin Seiki Co Ltd | 車載カメラの校正装置 |
GB201403384D0 (en) * | 2013-02-28 | 2014-04-09 | Bosch Gmbh Robert | Method and apparatus for three-dimensional imaging of at least a partial region of a vehicle environment |
CN104303211A (zh) * | 2011-10-11 | 2015-01-21 | 戴姆勒股份公司 | 用于在车辆显示器上整合虚拟对象的方法 |
US20150042799A1 (en) * | 2013-08-07 | 2015-02-12 | GM Global Technology Operations LLC | Object highlighting and sensing in vehicle image display systems |
CN104851076A (zh) * | 2015-05-27 | 2015-08-19 | 武汉理工大学 | 用于商用车的全景环视泊车辅助系统及摄像头安装方法 |
US20160360104A1 (en) * | 2015-06-02 | 2016-12-08 | Qualcomm Incorporated | Systems and methods for producing a combined view from fisheye cameras |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3624769B2 (ja) | 1999-09-30 | 2005-03-02 | 株式会社豊田自動織機 | 車両後方監視装置用画像変換装置 |
JP2002083285A (ja) | 2000-07-07 | 2002-03-22 | Matsushita Electric Ind Co Ltd | 画像合成装置および画像合成方法 |
JP4195966B2 (ja) | 2002-03-05 | 2008-12-17 | パナソニック株式会社 | 画像表示制御装置 |
JP3871614B2 (ja) | 2002-06-12 | 2007-01-24 | 松下電器産業株式会社 | 運転支援装置 |
DE102007044535B4 (de) | 2007-09-18 | 2022-07-14 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur Fahrerinformation in einem Kraftfahrzeug |
JP5223811B2 (ja) | 2009-08-06 | 2013-06-26 | 株式会社日本自動車部品総合研究所 | 画像補正装置、画像補正方法、及びそれらに用いられる変換マップ作成方法 |
JP2012244600A (ja) | 2011-05-24 | 2012-12-10 | Fujitsu Ten Ltd | 画像表示システム、画像処理装置、及び、画像表示方法 |
DE102011108470A1 (de) * | 2011-07-23 | 2013-01-24 | Sciknowtec Gmbh | Verfahren zur Reduktion, zur Speicherung und zur Verarbeitung von Bilddaten und Anordnung dazu |
US10793067B2 (en) | 2011-07-26 | 2020-10-06 | Magna Electronics Inc. | Imaging system for vehicle |
DE112012003549A5 (de) | 2011-10-28 | 2014-05-08 | Continental Teves Ag & Co. Ohg | Gitterbasiertes Umfeldmodell für ein Fahrzeug |
KR101339121B1 (ko) * | 2011-12-08 | 2013-12-09 | ㈜베이다스 | 다중 룩업 테이블을 이용한 차량 어라운드 뷰 영상 생성장치 |
KR101469717B1 (ko) * | 2012-05-30 | 2014-12-05 | 동의대학교 산학협력단 | 광각 카메라를 이용한 영상 시스템 및 그 방법 |
US9225942B2 (en) * | 2012-10-11 | 2015-12-29 | GM Global Technology Operations LLC | Imaging surface modeling for camera modeling and virtual view synthesis |
US20140114534A1 (en) * | 2012-10-19 | 2014-04-24 | GM Global Technology Operations LLC | Dynamic rearview mirror display features |
US9445011B2 (en) * | 2012-10-22 | 2016-09-13 | GM Global Technology Operations LLC | Dynamic rearview mirror adaptive dimming overlay through scene brightness estimation |
US8892358B2 (en) | 2013-03-14 | 2014-11-18 | Robert Bosch Gmbh | System and method for distortion correction in three-dimensional environment visualization |
TWI528325B (zh) | 2013-10-18 | 2016-04-01 | 財團法人資訊工業策進會 | 影像處理方法及應用影像處理方法之系統 |
US20150109444A1 (en) * | 2013-10-22 | 2015-04-23 | GM Global Technology Operations LLC | Vision-based object sensing and highlighting in vehicle image display systems |
JP6096155B2 (ja) | 2014-09-12 | 2017-03-15 | アイシン精機株式会社 | 運転支援装置及び運転支援システム |
JP6276719B2 (ja) * | 2015-02-05 | 2018-02-07 | クラリオン株式会社 | 画像生成装置、座標変換テーブル作成装置および作成方法 |
DE102015206477A1 (de) | 2015-04-10 | 2016-10-13 | Robert Bosch Gmbh | Verfahren zur Darstellung einer Fahrzeugumgebung eines Fahrzeuges |
US10946799B2 (en) * | 2015-04-21 | 2021-03-16 | Magna Electronics Inc. | Vehicle vision system with overlay calibration |
DE102016211227A1 (de) | 2016-06-23 | 2017-12-28 | Conti Temic Microelectronic Gmbh | Verfahren und Fahrzeugsteuersystem zum Erzeugen von Abbildungen eines Umfeldmodells und entsprechendes Fahrzeug |
-
2016
- 2016-12-15 DE DE102016225066.3A patent/DE102016225066A1/de not_active Withdrawn
-
2017
- 2017-10-25 KR KR1020197014361A patent/KR102315748B1/ko active IP Right Grant
- 2017-10-25 US US16/469,330 patent/US10904432B2/en active Active
- 2017-10-25 JP JP2019528435A patent/JP2020502640A/ja active Pending
- 2017-10-25 CN CN201780076469.5A patent/CN110073415B/zh active Active
- 2017-10-25 EP EP17807696.4A patent/EP3555843A1/de not_active Withdrawn
- 2017-10-25 DE DE112017004931.8T patent/DE112017004931A5/de active Pending
- 2017-10-25 WO PCT/DE2017/200113 patent/WO2018108213A1/de unknown
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080136912A1 (en) * | 2006-09-26 | 2008-06-12 | Hirotaka Iwano | Image generating apparatus and image generating method |
JP2010239409A (ja) * | 2009-03-31 | 2010-10-21 | Aisin Seiki Co Ltd | 車載カメラの校正装置 |
CN104303211A (zh) * | 2011-10-11 | 2015-01-21 | 戴姆勒股份公司 | 用于在车辆显示器上整合虚拟对象的方法 |
GB201403384D0 (en) * | 2013-02-28 | 2014-04-09 | Bosch Gmbh Robert | Method and apparatus for three-dimensional imaging of at least a partial region of a vehicle environment |
US20150042799A1 (en) * | 2013-08-07 | 2015-02-12 | GM Global Technology Operations LLC | Object highlighting and sensing in vehicle image display systems |
CN104851076A (zh) * | 2015-05-27 | 2015-08-19 | 武汉理工大学 | 用于商用车的全景环视泊车辅助系统及摄像头安装方法 |
US20160360104A1 (en) * | 2015-06-02 | 2016-12-08 | Qualcomm Incorporated | Systems and methods for producing a combined view from fisheye cameras |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114633692A (zh) * | 2022-03-14 | 2022-06-17 | 深圳市艾为智能有限公司 | 一种偏心镜头在cms系统中的应用方法 |
CN114633692B (zh) * | 2022-03-14 | 2023-10-03 | 深圳市艾为智能有限公司 | 一种偏心镜头在cms系统中的应用方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2018108213A1 (de) | 2018-06-21 |
EP3555843A1 (de) | 2019-10-23 |
JP2020502640A (ja) | 2020-01-23 |
US10904432B2 (en) | 2021-01-26 |
DE112017004931A5 (de) | 2019-06-13 |
DE102016225066A1 (de) | 2018-06-21 |
KR20190096970A (ko) | 2019-08-20 |
KR102315748B1 (ko) | 2021-10-20 |
CN110073415B (zh) | 2023-08-22 |
US20200112675A1 (en) | 2020-04-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110073415A (zh) | 用于交通工具的全景环视系统 | |
CN107660337B (zh) | 用于从鱼眼摄像机产生组合视图的系统及方法 | |
JP5072576B2 (ja) | 画像表示方法および画像表示装置 | |
JP5134784B2 (ja) | 空中写真測量方法 | |
CN111800589B (zh) | 图像处理方法、装置和系统,以及机器人 | |
CN106331527A (zh) | 一种图像拼接方法及装置 | |
US10354358B2 (en) | Image generation device, coordinate transformation table creation device and creation method | |
JP6616967B2 (ja) | 地図作成装置、および地図作成方法 | |
JP5178454B2 (ja) | 車両周囲監視装置及び車両周囲監視方法 | |
JP6151535B2 (ja) | パラメータ取得装置、パラメータ取得方法及びプログラム | |
CN107249934A (zh) | 无失真显示车辆周边环境的方法和装置 | |
US10863111B2 (en) | Method and system for generating a composed top-view image of a road | |
CN112825546A (zh) | 使用中间图像表面生成合成图像 | |
JP4679293B2 (ja) | 車載パノラマカメラシステム | |
JP2011087319A (ja) | 車載パノラマカメラシステム | |
CN108701349B (zh) | 显示车辆周围环境前视图的方法和装置及相应车辆 | |
US11019245B2 (en) | Bundle adjustment system | |
CN116894773A (zh) | 图像处理方法、装置、电子设备和存储介质 | |
US20220327784A1 (en) | Image reprojection method, and an imaging system | |
CN113011212B (zh) | 图像识别方法、装置及车辆 | |
JP6785480B2 (ja) | 画像合成装置、及び、制御方法 | |
CN111033555A (zh) | 修正装置、修正程序以及记录介质 | |
JP2003331259A (ja) | オルソフォト画像生成方法およびオルソフォト画像生成システム | |
CN113592704B (zh) | 一种图像生成方法、装置及系统 | |
US11568552B2 (en) | Imaging systems and methods incorporating improved culling of virtual objects |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20240412 Address after: Ingolstadt, Germany Patentee after: Continental Zhixing Germany Co.,Ltd. Country or region after: Germany Address before: Nuremberg, Germany Patentee before: CONTI TEMIC MICROELECTRONIC GmbH Country or region before: Germany |
|
TR01 | Transfer of patent right |