CN116679419A - 用于光学防抖的装置和方法 - Google Patents
用于光学防抖的装置和方法 Download PDFInfo
- Publication number
- CN116679419A CN116679419A CN202310684792.8A CN202310684792A CN116679419A CN 116679419 A CN116679419 A CN 116679419A CN 202310684792 A CN202310684792 A CN 202310684792A CN 116679419 A CN116679419 A CN 116679419A
- Authority
- CN
- China
- Prior art keywords
- camera
- folding
- rotational movement
- actuator
- scanning
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003287 optical effect Effects 0.000 title claims abstract description 66
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000004075 alteration Effects 0.000 claims description 11
- 230000001419 dependent effect Effects 0.000 claims description 3
- 239000013598 vector Substances 0.000 description 26
- 230000009466 transformation Effects 0.000 description 20
- 238000005259 measurement Methods 0.000 description 9
- 230000001960 triggered effect Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000000844 transformation Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 206010044565 Tremor Diseases 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
- G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
- G02B26/0875—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more refracting elements
- G02B26/0883—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more refracting elements the refracting element being a prism
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/001—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
- G02B13/0055—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element
- G02B13/0065—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element having a beam-folding prism or mirror
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/001—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
- G02B13/0055—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element
- G02B13/0065—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element having a beam-folding prism or mirror
- G02B13/007—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras employing a special optical element having a beam-folding prism or mirror the beam folding prism having at least one curved surface
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/02—Telephoto objectives, i.e. systems of the type + - in which the distance from the front vertex to the image plane is less than the equivalent focal length
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B13/00—Optical objectives specially designed for the purposes specified below
- G02B13/06—Panoramic objectives; So-called "sky lenses" including panoramic objectives having reflecting surfaces
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
- G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
- G02B26/10—Scanning systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/64—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
- G02B27/642—Optical derotators, i.e. systems for compensating for image rotation, e.g. using rotating prisms, mirrors
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/64—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
- G02B27/646—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/02—Bodies
- G03B17/12—Bodies with means for supporting objectives, supplementary lenses, filters, masks, or turrets
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/02—Bodies
- G03B17/17—Bodies with reflectors arranged in beam forming the photographic image, e.g. for reducing dimensions of camera
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B30/00—Camera modules comprising integrated lens units and imaging units, specially adapted for being embedded in other devices, e.g. mobile phones or vehicles
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B5/00—Adjustment of optical system relative to image or object surface other than for focusing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
- G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
- G02B26/0816—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light by means of one or more reflecting elements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
- G02B7/04—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
- G02B7/08—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification adapted to co-operate with a remote control mechanism
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/02—Mountings, adjusting means, or light-tight connections, for optical elements for lenses
- G02B7/04—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
- G02B7/09—Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification adapted for automatic focusing or varying magnification
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
- G03B2205/0007—Movement of one or more optical elements for control of motion blur
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
Abstract
本公开内容提供一种用于光学防抖的装置和方法。所述装置或方法是用于补偿包括望远折叠相机的手持电子装置的一非期望的转动运动,其中所述补偿取决于所述非期望的转动运动以及取决于所述望远折叠相机的一视点。
Description
相关申请
本申请为申请号202180004818.9(PCT申请号为PCT/IB2021/056617)、申请日2021年07月22日、发明名称“扫描折叠相机中的光学防抖”的分案申请。
技术领域
本文公开的示例一般涉及数码相机,特别是涉及使用折叠数码相机获得的图像的校正。
背景技术
已知具有折叠光学器件(folded optics)的紧凑型数码相机,也被称为“折叠相机”,例如参见共同拥有的国际专利申请PCT/IB2016/057366。在诸如智能手机、平板电脑等手持电子装置(在本文中也称为“手持装置”)中,一折叠望远相机通常是一多相机的一部分,并伴有一个或多个附加的相机,例如一超广角相机和一广角相机。一超广角相机的视场(FOVUW)比一广角相机大,所述广角相机具有比具有FOVT的一望远相机更大的FOVW(假设图像传感器尺寸相似)。
图1A从一透视图中示意性地示出了编号为100的一折叠望远相机。相机100包括:具有一透镜光轴110的一透镜102、一光路折叠元件(optical path folding element,OPFE)104和一图像传感器106。光路折叠元件104将从一对象、场景或全景视图部分114沿基本上平行于X轴的轴108的一第一光路折叠成沿基本上平行于Z轴的轴110的一第二光路。相机100被设计为使光路折叠元件104相对于所述图像传感器围绕轴110(X轴)旋转,即在Y-Z平面中,由一箭头112指示的旋转。也就是说,折叠望远相机100是一"扫描"望远相机(scanning Tele camera,STC)。图1B显示了从零位置旋转30度之后的光路折叠元件104。
图1C显示了俯视图的包括具有透镜102、光路折叠元件104和图像传感器106的一STC 100的一手持装置120。一装置法线(“N”)与装置120的一屏幕116正交并且朝向观察者。所述相机的光轴是平行于X轴。在其他例子中,STC 100可以被包含在120中,因此所述相机的光轴是平行于Y轴。
图像是从一相机的某个视点(point of view,POV)中获取的。所述视点是由所述矢量定义的方向,所述矢量以一相机的光圈位置为起点,以FOV中心的一对象点为终点(见图3A,两个视点矢量324和328对应于两个FOVT 326和332)。除了视点矢量,还可以说FOV中心方向矢量(FOV center direction,FOVCD)。作为一个例子,在根据ISO约定定义的球坐标(r,θ,φ)中,一相机在r=0的所述视点是由(1,θ,φ)定义,极角θ和方位角φ定义所述对象点的位置在所述望远FOV的中心。所述视点矢量的长度可能是1(单位矢量)或可能具有某个恒定长度(例如EFL)或可能具有一可变长度,例如,使其位于特定平面上。
例如在共同拥有的PCT专利申请号PCT/IB2016/057366中所描述并且参考图1A-1B,所述光路折叠元件的旋转可以围绕X轴和围绕Y轴来执行,以在图1A-1B中的二维(2D)中利用FOV进行“扫描”。
手持装置中所包含的现代相机通常包括光学防抖(optical imagestabilization,OIS),其用于缓解由一用户的手部运动(通常称为“手抖动”)引起的非期望的相机运动。对于OIS,光学部件被移动以减少在一相机的图像传感器上成像对象的移动。可以移动所述透镜模块和/或所述图像传感器和/或所述光路折叠元件和/或整个相机。所述手持装置中包含的一惯性测量单元(inertial measurement unit,IMU)提供沿6个自由度(degrees of freedom)的运动数据,亦即且参考图1C,X-Y-Z中的线性运动、围绕Z轴滚动(roll)“倾斜”、偏航(yaw)(围绕Y轴倾斜)以及俯仰(pitch)(围绕X轴倾斜)。通常,OIS仅用于俯仰和偏航旋转补偿,而不是用于滚动旋转,因为俯仰和偏航旋转占手抖引起的图像劣化的主要份额。所述IMU、普通(即非扫描)相机以及所述包括手持装置的坐标系统可以被对齐并且不会随时间变化。对于一STC来说,这是无效的。当FOV扫描被执行时,一手持装置的坐标系统与一STC的坐标系统之间的关系确实会发生变化。因此,本领域已知的OIS不能被用于一STC中的手部运动补偿。
需要用于扫描望远相机的OIS,这将是有利的。
发明内容
为了简单起见,术语“电子装置”、“电子手持装置”、“手持装置”或仅“装置”可互换地被使用。为了简单起见,术语“智能手机”可被用于表示具有扫描折叠相机的所有电子手持装置以及在本文描述的此类相机中实现OIS的方法。
在各种实施例中,提供了多种望远折叠相机,其用于补偿包括这种相机的一手持电子装置的一非期望的转动运动,其中所述补偿取决于所述非期望的转动运动以及取决于所述望远折叠相机的一视点(point of view,POV)。
在各种实施例中,一手持电子装置包括:
一望远折叠相机,所述望远折叠相机包括:一光路折叠元件(optical pathfolding element,OPFE),用于将来自一第一光路的光折叠朝向一第二光路,所述第一光路与所述装置的一法线(normal)形成小于90度的角度,所述第二光路基本上正交于所述装置的所述法线;一透镜,具有沿所述第二光路的一透镜光轴;以及一图像传感器,其中所述装置是一手持电子装置;一光路折叠元件致动器,用于在一个或多个方向上倾斜所述光路折叠元件,以将所述望远折叠相机的一视点(point of view,POV)指向一场景的一部份;
一运动传感器,用于感测所述装置的一非期望的转动运动;以及
至少一致动器,用于移动所述望远折叠相机的至少一部件,以补偿所述装置的所述非期望的转动运动,其中所述补偿取决于所述装置的所述非期望的转动运动以及取决于所述望远折叠相机的视点。
在一些实施例中,所述非期望的转动运动围绕所述装置法线。
在一些实施例中,一装置还包括一广角相机,所述广角相机的一视场FOVW(fieldof view FOVW)大于所述望远相机的一视场FOVT。
在一些实施例中,所述感测所述转动运动包括在三个方向上测量所述转动运动。
在一些实施例中,用于移动所述望远折叠相机的所述部件以补偿所述装置的非期望的转动运动的所述致动器是所述光路折叠元件致动器,所述光路折叠元件致动器用于在一个或多个方向上倾斜所述光路折叠元件,以将所述望远折叠相机的一视点指向一场景的一部份。
在一些实施例中,所述移动所述望远折叠相机的所述部件以补偿所述装置的非期望的转动运动包括移动所述透镜。
在一些实施例中,所述移动所述望远折叠相机的所述部件以补偿所述装置的非期望的转动运动包括移动所述图像传感器。
在一些实施例中,一装置还包括一处理单元,所述处理单元被配置为执行一座标变换,以将所述望远相机的座标对齐所述手持装置的座标,反之亦然。
在一些实施例中,一装置还包括一处理单元,所述处理单元被配置为执行一座标变换,所述座标变换将一参考座标系统的座标对齐所述手持装置的座标和所述望远相机的座标。
在一些实施例中,所述座标变换是使用罗德里格旋转公式(Rodrigues'rotationformula)来执行。
在一些实施例中,所述运动传感器包括一惯性测量单元(inertial measurementunit,IMU)。
在一些实施例中,一装置还包括一微控制器(microcontroller unit,MCU),所述微控制器被配置为读出所述运动传感器,且被配置为提供控制信号至所述转动运动补偿致动器。在一些实施例中,所述微控制器(MCU)被包含在一应用处理器(applicationprocessor,AP)中。
在一些实施例中,一装置还包括一应用处理器,所述应用处理器被配置为向所述光路折叠元件致动器提供视点控制信号,以倾斜所述光路折叠元件。
在各种实施例中,提供了多种方法,其包括:
提供包括一望远折叠相机的一手持装置,所述望远折叠相机包括:一光路折叠元件(OPFE),用于将来自一第一光轴的光折叠朝向一第二光轴,所述第一光轴与所述装置的一法线形成小于90度的角度,所述第二光轴基本上正交于所述装置的一法线;一透镜,具有沿所述第二光轴的一透镜轴;以及一图像传感器;
提供一光路折叠元件致动器,所述光路折叠元件致动器用于在一个或多个方向上倾斜所述光路折叠元件,以将所述望远折叠相机的一视点(POV)指向一场景的一部份;
感测所述装置的一非期望的转动运动;以及
补偿所述非期望的转动运动,其中所述补偿取决于所述非期望的转动运动以及取决于所述望远折叠相机的视点。
在一些实施例中,所述补偿所述非期望的转动运动包括移动所述望远折叠相机的一部件。
在一些实施例中,所述补偿所述非期望的转动运动包括补偿围绕所述装置的法线方向的一转动运动。
在一些实施例中,一方法还包括执行一座标变换,以将所述望远相机的座标对齐一惯性测量单元(IMU)的座标。
在一些实施例中,一方法还包括执行一座标变换,以将所述惯性测量单元的座标对齐所述望远相机的座标。
在一些实施例中,一方法还包括执行一座标变换,以将一参考座标系统的座标对齐所述惯性测量单元的座标和所述望远相机的座标。
在一些实施例中,所述执行所述座标变换包括使用罗德里格旋转公式执行所述变换。
在一些实施例中,所述感测所述装置的一非期望的转动运动包括在三个方向上感测所述非期望的转动运动。
在一些实施例中,所述补偿所述装置的所述非期望的转动运动包括转动所述光路折叠元件。
在一些实施例中,所述补偿所述装置的所述非期望的转动运动包括移动所述透镜。
在一些实施例中,所述补偿所述装置的所述非期望的转动运动包括移动所述图像传感器。
在一些实施例中,所述补偿所述非期望的转动运动包括通过使用以下等式在所述X方向上计算由所述非期望的转动运动引起的一被改变的视点:PF P=(PI·cos(hnd_pitch)+cross(PI,RP)·sin(hnd_pitch)+RP·(dot(PI,RP)·(1-cos(hnd_pitch))))。
在一些实施例中,所述补偿所述非期望的转动运动包括通过使用以下等式在所述Y方向上计算由所述非期望的转动运动引起的一被改变的视点:PF Y=(PI·cos(hnd_yaw)+cross(PI,RY)·sin(hnd_yaw)+RY·(dot(PI,RY)·(1-cos(hnd_yaw))))。
在一些实施例中,所述补偿所述非期望的转动运动包括通过使用以下等式在所述X方向上计算由所述非期望的转动运动引起的一被改变的视点:PF R=(PI·cos(hnd_roll)+cross(PI,RR)·sin(hnd_roll)+RR·(dot(PI,RR)·(1-cos(hnd_roll))))。
在一些实施例中,所述补偿所述非期望的转动运动包括通过使用以下等式在X、Y和Z方向上计算由所述非期望的转动运动引起的一被改变的视点的一方向:PF’=PI+(PI-PF P)+(PI-PF Y)+(PI-PF R)。
在一些实施例中,所述补偿所述非期望的转动运动包括通过使用以下等式在X、Y和Z方向上计算由所述非期望的转动运动引起的一被改变的视点的一矢量:PF=PF’·EFLT/PF’z。
附图说明
本文中所公开的实施例的非限制性示例在下文中参考本文所附的附图进行描述,其在本段后面列出。附图和描述意在说明和阐明本文中所公开的实施例,并且不应被认为以任何方式限制。不同附图中的相同元件可以由相同的附图标记指示。
图1A示意性地示出了一已知的折叠扫描相机的透视图;
图1B示出了图1A的所述望远相机中的所述光路折叠元件从零位置旋转30度后的图。
图1C示出了例如图1A-B中所示的一扫描相机,其集成为一智能手机中的“后向”或“面向世界(world-facing)”的相机;
图2A示例性地示出了包括在零位置的一第一扫描望远相机以及一第二广角相机的一智能手机;
图2B示出了图2A的所述智能手机,其中所述望远相机在非零位置;
图2C示出了图2A的所述智能手机,其中所述望远相机在另一个非零位置;
图3A示出了用于导出所述望远相机的一坐标系统的二维(2D)图表;
图3B示出了手抖动引起的转动装置运动对图3A的2D图表的影响。
图3C示出了用于扫描本文公开的望远相机OIS的一方法的主要步骤流程图;
图4A以框图示意性地示出了一手持装置的实施例,所述实施例包括具有至少一个本文公开的扫描望远相机的多光圈相机;以及
图4B以框图示意性地示出了一手持装置的另一实施例,其包括具有至少一个本文公开的扫描望远相机的多光圈相机。
具体实施方式
图2A示例性地示出了一智能手机200,其包括处于零位置(zero position)的一STC 202和一广角相机P204。广角相机204不是一扫描相机,且其视点(“POVW”)是平行于所述智能手机的一装置法线N(平行于Z轴)。装置法线N与智能手机200表面上面积最大的一法线平行(或反平行)。智能手机200的IMU的一坐标系统(例如图4A和4B中的IMU
460,此处未示出)可以对齐智能手机200的一坐标系统,例如图2A中所示的所述坐标系统,其中所述坐标系统的三个轴平行于智能手机200的三个对称轴,以使IMU(和智能手机200)的坐标系统的Z轴平行于POVW。STC202的所述视点(“POVT”)指向其零位置(“POVT,0”),对应于如图1A所示的一光路折叠元件转动状态。POVT在零位置时,IMU的所述坐标系统、广角相机204和STC 202对齐。
在用于OIS的第一示例性方法(“示例1”)中,考虑广角相机204的OIS,其(为简单起见)仅可以对俯仰旋转进行校正。为了检测非期望的手部运动量,可以从IMU(“XIMU”)读出绕X轴的俯仰旋转值,并且通过一特定量移动例如一个特定方向(dir1)中的所述透镜,其中移动量(或行程)与XIMU成正比,即,所述透镜行程SW满足SW=CW·XIMU(具有一些恒定的CW)。这同样适用于STC 202在零位置的OIS。通过在dir1中按ST=CT·XIMU(具有一些恒定CT)移动所述透镜,可以补偿手部运动。
图2B示出了STC 202在非零位置的智能手机200。POVT相对于POVW具有α度角。例如,对于α=30度,这对应于如图1B所示的一光路折叠元件转动状态。IMU的所述坐标系统、广角相机204和STC 202不再对齐。
考虑STC 202在非零位置的示例1(俯仰方向的手部运动)。广角相机204的OIS可以如示例1中被执行。然而,对于STC 202的OIS,示例1的方法不再允许执行手部运动补偿,即(通常)没有CT,因此通过按ST=CT·XIMU移动所述透镜,可以补偿手部运动。这是因为STC202的所述坐标系统和IMU不再对齐。
对于OIS的一第二示例性方法(“示例2”),请参阅图2C。与图2A相比,POVT绕Y轴旋转了90度,即POVT和POVW相互垂直。与示例1一样,我们考虑所述广角相机的OIS仅用于俯仰旋转的校正。手部运动可以通过读取旋转XIMU的IMU值以及通过在dir1中按SW=CW·XIMU(具有一些恒定的CW)移动所述广角相机的一透镜(未显示)被完全地补偿。然而,手部运动不能通过在dir1中按ST=CT·XIMU(具有一些恒定CT)移动STC的一透镜(未显示,但类似于透镜102)来补偿。相反,必须将旋转方向从dir1修改为与dir1不同的一特定方向dir2。所述手部运动可以通过在dir2中按ST=CT·XIMU移动所述STC透镜来补偿。一般来说,对于一STC,所述OIS轴取决于所述视点或STC的扫描状态,因此不是恒定的,就像一广角相机的情况一样。
图3A示出了用于导出STC的一坐标系统的二维(2D)图表320。STC的光圈322位于坐标(0,0,0)。一零状态STC POVT(POVT,0)324对应于平行于一装置法线N(参见图2A-C)的一第一光路并且可以具有坐标(0,0,EFLT),其中EFLT是STC的EFL。FOVT 326对应于STC在POVT,0324处的FOVT。还示出了具有相应FOVT 332的期望或目标POVT 328(“POVT,T”)。
图3B示出了在包括STC的所述手持装置经历绕Z轴的旋转“滚动”运动之后的图3A的2D图表320,例如,因为用户的手部运动。POVT,0 324没有发生任何变化。然而,相应的FOVT变为一旋转的FOVT 326'。相反,所述转动运动将POVT,T 328变为POVT,T 328’。响应于一转动装置运动的POV(例如POVT,T 328)的变化不仅取决于旋转角度或旋转量,而且还取决于POVT的位置。
图3C以流程图的形式示出了本文公开的用于STC OIS的方法的主要步骤。
在第一步骤302中,由一人类用户或一程序触发并由一FOV扫描器442(图4A)处理的一命令将FOVT引导到一场景内的感兴趣区域(region of interest,ROI)。所述扫描可以通过使用一光路折叠元件致动器414旋转一光路折叠元件(图4A)来执行。通过光路折叠元件转动的所述FOV扫描不是即时执行的,而是需要一些稳定时间,对于扫描2至5度,可能为1至50毫秒(ms),对于扫描10至45度,可能为5至500毫秒。在稳定时间之后,STC可用于捕获长焦图像。STC可以通过一用户命令或自主地聚焦到一对象。STC的扫描方向可以由一初始(或目标)视点矢量PI给出。
在步骤304中,IMU被读出并提供围绕俯仰(Pitch)、偏航(Yaw)和滚动(Roll)方向的旋转运动,即分别为XIMU、YIMU和ZIMU。通常,IMU提供有关角加速度的数据,其被整合以确定所述旋转角度。IMU数据可被用于计算所述装置的所述非期望的转动运动。
在步骤306中,一坐标变换被执行。由于所述装置的一非期望的转动运动引起的STC的视点变化和所述非期望的转动运动的感测发生在不同的坐标系统中,所以需要进行所述坐标变换。
像是AP或MCU的一处理单元可以被配置用于执行所述坐标变换(例如,装置400或装置480的AP 440,或者图4A中装置400的MCU 470)。在一些例子中,AP或MCU可以解析求解以下等式,或者AP或MCU可以使用一多项式拟合或一线性拟合来近似求解所述等式。在其他例子中,AP或MCU可能不执行计算,但对座标变换使用一查找表(Look Up Table,LUT)。在一些例子中,例如如图4A所示,所述座标变换可以由连接到STC模块410的MCU(例如MCU 470)来执行。
在一些例子中,可以执行所述变换以便在IMU的所述坐标系统中表达STC的坐标。然后,可以在所述IMU的坐标系统中计算装置转动和补偿运动。
在一些例子中,诸如图3B中所示的图表320的2D图表可以被使用来表示STC在IMU的坐标系统中的坐标。图表320可能类似于用于校准STC或用于校准一双相机的校准图表,例如包括一望远相机和一广角相机。STC光圈322可以位于(0,0,0)。所述手持装置可以在“横向”方向上指向图表320,即参考图3B的所述坐标系统,如图1C中所示的一智能手机的长边可以平行于X轴并且短边平行于Y轴,STC光圈在Z方向指向所述图表。STC可以到达的所有视点是由“视点矢量”或“相机指向矢量”P给出,其指向位于图表320上的坐标。零状态位置的坐标可以是(0,0,EFLT),其中EFLT是STC的EFL。在零位置上,IMU(和所述手持装置)的坐标与STC的坐标重叠。
如果STC被指向一非零视点,从IMU坐标到STC坐标的一座标变换则必须被执行。在一些例子中,罗德里格旋转公式可以被使用。IMU的俯仰/偏航/滚动旋转值可以被命名为“hnd_pitch”、“hnd_yaw”和“hnd_roll”。IMU在具有以下单位矢量的一坐标系统中提供hnd_pitch、hnd_yaw和hnd_roll:
-俯仰(Pitch)单位矢量RP:RP=(1,0,0),
-偏航(Yaw)单位矢量RY:RY=(0,1,0),
-滚动(Roll)单位矢量RR:RR=(0,0,1)。
通常,OIS仅校正小角度。因此,在某些情况下并且近似地,可以独立地处理所述俯仰/偏航/滚动旋转。对于所述装置的任何(轻微)旋转,罗德里格旋转公式可单独地应用于俯仰/偏航/滚动旋转,其中所述(轻微)旋转可以由俯仰/偏航/滚动旋转的总和来表示。仅通过hnd_pitch、或仅通过hnd_yaw或仅通过hnd_roll(在IMU的坐标RP、RY和RR)应用于任何初始视点矢量PI的一手部运动可能导致以下最终视点矢量PF(“cross(x,y)”表示矢量x和y的叉积,“dot(x,y)”表示矢量x和y的点积):
绕RP旋转hnd_pitch后的视点矢量PF P(hnd_yaw,hnd_roll=0):PF P=(PI·cos(hnd_pitch)+cross(PI,RP)·sin(hnd_pitch)+RP·(dot(PI,RP)·(1-cos(hnd_pitch))));
绕RY旋转hnd_yaw后的视点矢量PF Y(hnd_pitch,hnd_roll=0):PF Y=(PI·cos(hnd_yaw)+cross(PI,RY)·sin(hnd_yaw)+RY·(dot(PI,RY)·(1-cos(hnd_yaw))));
绕RR旋转hnd_roll后的视点矢量PF R(hnd_pitch,hnd_yaw=0):PF R=(PI·cos(hnd_roll)+cross(PI,RR)·sin(hnd_roll)+RR·(dot(PI,RR)·(1-cos(hnd_roll))))。
对于小角度,经过俯仰、偏航和滚动旋转的一最终视点矢量(归一化之前)PF’可以由下式给出:
PF’=PI+(PI-PF P)+(PI-PF Y)+(PI-PF R)
归一化可以被执行以确保所述最终视点矢量PF位于图表320上。在一些例子中,PF可以通过用EFLT/PF'z对PF'进行归一化来获得,其中PF'z是PF'的z-部件,即:
PF=PF’·EFLT/PF’z。
从上面的等式可以明显看出,为了补偿STC中非期望的手部旋转运动,与一非扫描相机相比,例如广角相机204,其中可以仅补偿围绕偏航和俯仰的非期望的手部旋转运动,必须补偿围绕偏航、俯仰和滚动三个方向的旋转手部运动。
在座标变换的其他例子中,所述变换可以被执行以在STC的所述坐标系统中表达IMU的坐标。然后手部运动旋转和补偿运动可以在STC的坐标系统中被计算。如上所述,罗德里格旋转公式可以被使用。
在座标变换的其他例子中,所述变换可以是到一第三坐标系统(“参考系统”)。STC和IMU的坐标均以所述参考座标系统来表示。然后手部运动旋转和补偿运动可以在所述参考座标系统中被计算。如上所述,罗德里格旋转公式可以被使用。
在步骤308中,OIS的移动可以被执行。在一些例子中,OIS可以通过移动STC的光路折叠元件来执行。在其他例子中,可以为OIS移动诸如透镜102之类的一透镜和/或诸如图像传感器106之类的一图像传感器。假设理想的OIS,光路折叠元件和/或透镜和/或传感器的运动可能会导致一POC矢量修正POIS完全抵消手部运动对所述视点矢量的影响,即:PF+POIS=
PI。因此,在执行步骤308之后,STC再次指向PI。在其他例子中,可以为OIS移动整个STC。亦即,光路折叠元件、透镜和图像传感器作为OIS的一个单元一起移动。
在一些实施例中,步骤304至308可以被重复以连续地稳定STC。包括步骤304至308的OIS循环可以以例如500Hz至100kHz的频率被执行。在执行上述OIS方法时,STC图像或图像流被捕获。
在一些实施例中,IMU可以固定地附接到所述光路折叠元件,使得当移动所述光路折叠元件时,IMU也会随之移动。这允许对所述STC和所述IMU两者使用具有多个相同基本矢量的多个坐标系统,从而不需要步骤306的所述座标变换。
在一些实施例中,一传感器致动器可以启动所述图像传感器来校正一STC图像的视点像差。如共同拥有的国际专利申请PCT/IB2021/056311中所述,STC图像经历视点像差。一像差是STC图像在所述图像传感器上的一旋转(“旋转视点像差”)。当一非期望的旋转手部运动通过移动如本文公开的一光路折叠元件来补偿时,所述光路折叠元件的移动引入了一视点像差。一传感器致动器可被用于围绕所述图像传感器的一法线旋转一图像传感器,以补偿旋转的视点像差。
图4A示意性地示出了编号为400并且包括具有本文公开的至少一个STC的多光圈相机的一手持装置的一实施例。装置400包括一个STC模块410,其包括一光路折叠元件412以及用于FOV扫描和/或OIS的一光路折叠元件致动器414,以及形成由一图像传感器416记录的一长焦图像的一望远透镜模块420。一望远透镜致动器422可以移动透镜模块420以用于聚焦和/或OIS。手持装置400还可以包括一应用处理器(application processor,AP)440,所述应用处理器包括一FOV扫描器442、一OIS控制器444、一图像生成器446和一对象跟踪器448。
在其他例子中,装置400可以包括一STC,所述STC包括两个光路折叠元件以及所述两个光路折叠元件各自的一光路折叠元件致动器。在一些例子中,所述光路折叠元件致动器可以致动所述光路折叠元件以执行如本文所公开的OIS。在其他例子中,一透镜致动器可致动一透镜或一传感器致动器可致动用于执行如本文所公开的OIS的一传感器。例如在
PCT/IB2021/054186中描述了基于两个光路折叠元件的一STC相机。在这样的STC中,所述相机内的光路被折叠了两次,因此可以说是一双折叠扫描望远相机。
手持装置400还包括一广角(或超广角)相机模块430,所述广角相机模块430包括一第二透镜模块434,所述第二透镜模块434形成由一第二图像传感器432记录的一图像。一第二透镜致动器436可以移动透镜模块434以进行对焦和/或OIS。在一些例子中,STC可以扫描整个FOVW或更大的FOV。在其他例子中,STC可以扫描小于FOVW的一FOV。
在一些例子中,对象跟踪器448可以被配置为跟踪FOVW中的一对象,并向FOV扫描器442和/或所述OIS控制器444提供跟踪数据。基于所述跟踪数据,FOV扫描器442和/或所述OIS控制器444可以向光路折叠元件致动器414提供多个控制信号,光路折叠元件致动器414启动一光路折叠元件转动以使用STC跟踪一对象。作为一个例子,可以跟踪一对象,使其以FOVT的中心为中心。以下描述的示例3-7涉及此跟踪场景,其中所述广角相机图像数据被使用于提供触发望远FOV扫描的跟踪信息。
在一些例子中,跟踪信息和OIS信息可能会互相干扰,并且可能需要跟踪和OIS之间的协调,以实现一个期望的对象跟踪和/或OIS结果。
作为OIS的第三示例性方法,考虑诸如装置400或480的一装置,其包括不具有OIS的一广角相机和一STC。STC可以跟踪静止的一对象,以便所述对象的中心位于FOVT的中心。所述跟踪可能发生在实时(real-time,RT)中,即我们假设在跟踪偏差的检测与其补偿之间没有延迟。由一用户的手部运动引起的一装置的转动运动将在所述广角相机中被检测为一对象移动。作为响应,STC的一跟踪运动将被触发,并且在望远FOV中所述对象的位置将被更新。总之,在RT场景中,所述对象跟踪器执行OIS时,所述对象将始终位于FOVT的中心,并且不会受到用户手部运动的影响。
作为OIS的第四示例性方法,考虑诸如装置400或480的一装置,其包括没有OIS的一广角相机和具有OIS的一STC。如示例3,我们假设在FOVW上进行RT对象跟踪,以致一(非移动)对象的中心位于FOVT的中心。OIS也可以在RT中被执行。由一用户的手部运动引起的一装置的转动运动将在所述广角相机中被检测为一对象移动。作为响应,STC的一跟踪运动ΔT将被触发。同时,所述装置的转动运动也会通过STC的OIS而被检测,STC的一OIS移动ΔOIS将作为响应被触发。OIS移动可以根据本文公开的OIS方法来执行。ΔT和ΔOIS在方向和幅度方面是相同的,即2·ΔT=
2·ΔOIS的一STC运动将被触发,这是(i)将对象保持在FOVT中心(期望的跟踪结果)和(ii)抑制手部运动对STC图像的影响(期望OIS结果)所需移动量的两倍。总之,无论是望远跟踪还是望远OIS,都没有达到预期的结果。因此,在一些例子中,当使用对象跟踪时,所述STC的OIS被禁用。
作为OIS的第五示例性方法,考虑诸如装置400或480的一装置,其包括没有OIS的一广角相机和具有OIS的一STC。对象跟踪可以在FOVW上被执行,以便一(非移动)对象的中心位于FOVT的中心。然而,对象跟踪和OIS可能无法在RT中被执行。通常,OIS在比对象跟踪更高的频率下被执行。作为一个例子,OIS可以在500Hz至100kHz下被执行,而对象跟踪可以在1Hz至100Hz下被执行。在一些例子中,为防止OIS和对象跟踪之间的非期望的干扰,可以在使用对象跟踪时禁用OIS。在其他实施例中,可以在频域(frequency domain)中单独控制OIS和对象跟踪。作为一个例子,对于由一用户的手部运动引起的装置的转动运动(发生频率高于例如30Hz),可以使用OIS进行装置运动校正。对于低于例如30Hz的频率,不得使用OIS进行装置运动校正。相反,所述低频装置运动将由所述对象跟踪器来补偿。
作为OIS的第六示例性方法,考虑诸如装置400或480的一装置,其包括具有OIS的一广角相机和不具有OIS的一STC。对象跟踪可以在FOVW上被执行,以便一(非移动)对象的中心位于FOVT的中心。对象跟踪和OIS可以在RT中被执行。对于所述广角相机的OIS,由一用户的手部运动引起的一装置的转动运动不会对广角图像流产生影响。由于所述对象在FOVW中没有移动,因此不会触发STC的跟踪移动。总之,没有手部运动补偿,且所述对象将不再位于FOVT的中心,导致一个非期望的对象跟踪结果。在一些防止这种非期望的结果的例子中,可以在执行对象跟踪时禁用所述广角相机的OIS。在其他例子中,提供给STC的对象跟踪控制信号还可以包括所述广角相机的多个OIS控制信号。通过叠加所述两个信号,可以同时享受广角相机OIS和适当的STC跟踪的好处。
作为OIS的第七示例性方法,考虑诸如装置400或480的一装置,其具有所述广角相机和所述具有OIS的STC。我们假设RT跟踪,因此一对象的中心位于FOVT的中心。由一用户的手部运动引起的一装置的转动运动将通过所述广角相机和RT中STC中的一OIS运动进行校正。总之,用户的手部运动不会影响所述对象跟踪器的期望输出。
校准数据可以被存储在一第一存储器424中,例如在一电可擦可编程序只读存储器(electrically erasable programmable read only memory,EEPROM)中,和/或在一第二存储器438中,和/或在诸如非易失性存储器(non-volatile memory,NVM)的一第三存储器450中。所述校准数据可以包括广角相机430和STC 410之间的校准数据。所述校准数据还可以包括一光路折叠元件的位置和STC对应的视点之间的校准数据。
手持装置400还包括一惯性测量单元(inertial measurement unit,IMU;例如一陀螺仪)460,其提供400的运动信息。例如,一微控制器(microcontroller unit,MCU)可被用于读取和处理IMU 460的数据。在一些例子中,所述MCU可以由AP 440的一部分的一OIS控制器444来控制。在一些例子中,步骤304和步骤306可以由所述MCU来执行,并且步骤308可以由光路折叠元件致动器414(和/或透镜致动器436和/或传感器致动器418,在OIS分别由透镜移位或传感器移位来执行的情况下)来执行。在一些例子中,MCU 470可以被集成到AP440中。
编号为480并且包括如本文所公开的具有至少一个STC的一多光圈相机的一手持装置的另一个实施例如图4B所示。用于从IMU 460读取和处理运动数据以及用于提供多个OIS控制信号的一MCU(未示出)可以被包括在STC模块410中,例如被包括在光路折叠元件致动器414的驱动程序中。
在一些例子中,额外的数据可被用于手部运动估计。额外的数据可能例如是来自所述广角相机430的图像数据,或者是来自所述手持装置中存在的其他传感单元的数据。
在一些例子中,来自广角相机430的图像数据可以被用于估计来自如本领域已知的多个图像的“光流(optical flow)”,其中OIS控制器444可以使用光流的数据以及来自IMU 460的数据来估计装置400的运动。在其他例子中,仅从相机410和/或相机430的图像数据所估计的光流数据可被用于估计装置400的运动。
图像生成器446可以被配置为生成图像和图像流。在一些例子中,图像生成器446可以被配置为仅使用来自相机430的第一图像数据。在其他例子中,图像生成器446可以使用来自相机410和/或相机430的图像数据。
尽管已经根据某些实施例和一般相关联的方法对本公开进行了描述,但是实施例和方法的更改和置换对于本领域技术人员而言将是显而易见的。本公开要被理解为不受本文中所描述的具体实施例的限制,而是仅由所附权利要求的范围限定。
除非另有说明,否则在供选择的选项列表的最后两个选项之间使用“和/或”一词表示对所列选项中的一个或多个进行选择是适当的,并且可以作出选择。
应该理解的是,在权利要求书或说明书中提及“一个(a)”或“一个(an)”元件的情况下,这种引用不应被解释为只有那个元件中的一个。
此外,为了清楚起见,术语“基本上”在本文中用于暗指值在可接受范围内变化的可能性。根据一个示例,本文中所使用的术语“基本上”应当被解释为暗指在任何指定值之上或之下可能的变化高达5%。根据另一示例,本文中所使用的术语“基本上”应当被解释为暗指在任何指定值之上或之下可能的变化高达2.5%。根据另一示例,本文中所使用的术语“基本上”应当被解释为暗指在任何指定值之上或之下可能的变化高达1%。
本说明书中提及的所有专利和专利申请在本文都通过引用的方式全部并入本说明书中,如同每个单独的参考文献都具体并单独地指定为通过引用的方式并入此处。此外,本申请中对任何参考文献的引用或识别都不应当理解为承认所述参考文献可用作对本发明的现有技术。
Claims (17)
1.一种用于光学防抖的装置,其特征在于,包括:
一扫描望远折叠相机,所述扫描望远折叠相机包括:一第一光路折叠元件,用于将来自一第一光路的光折叠朝向一第二光路,所述第一光路与所述装置的一法线形成小于90度的角度,所述第二光路是正交于所述装置的所述法线;一透镜,具有沿所述第二光路的一透镜光轴;以及一图像传感器,其中所述装置是一手持电子装置;
一第一光路折叠元件致动器,可配置为在一个或多个方向上倾斜所述第一光路折叠元件,以将所述扫描望远折叠相机的一视点指向一场景的一部份;
一运动传感器,用于感测所述装置的一非期望的转动运动;
一第二致动器,可配置为移动所述扫描望远折叠相机的至少一部件,以补偿所述装置的所述非期望的转动运动,其中所述补偿取决于所述装置的所述非期望的转动运动以及取决于所述扫描望远折叠相机的视点;以及
一广角相机,所述广角相机的一视场FOVW大于所述望远相机的一视场FOVT,其中所述广角相机提供图像数据,所述图像数据被使用于跟踪所述FOVW中的一对象,且其中从所述跟踪得到的信息被使用于将所述扫描望远折叠相机的所述视点指向所述被跟踪的对象,以便使用所述扫描望远折叠相机进行对象跟踪。
2.根据权利要求1所述的装置,其特征在于:所述移动所述扫描望远折叠相机的至少一部件以补偿所述装置的所述非期望的转动运动是在使用所述扫描望远折叠相机进行所述对象跟踪期间被禁用。
3.根据权利要求1所述的装置,其特征在于:所述广角相机包括一广角相机部件,所述广角相机部件被移动以补偿所述装置的所述非期望的转动运动,且其中所述广角相机部件的所述移动是在使用所述扫描望远折叠相机进行所述对象跟踪期间被禁用。
4.根据权利要求1所述的装置,其特征在于:所述移动所述扫描望远折叠相机的至少一部件以补偿所述装置的所述非期望的转动运动是在与被用于使用所述扫描望远折叠相机进行所述对象跟踪的一频率范围不同的一频率范围内被执行。
5.根据权利要求4所述的装置,其特征在于:所述对象跟踪的所述频率范围是小于30Hz,且其中用以补偿所述装置的所述非期望的转动运动的频率范围是大于30Hz。
6.根据权利要求1所述的装置,其特征在于:所述扫描望远折叠相机是一双折叠望远相机,所述双折叠望远相机除了包括所述第一光路折叠元件之外还包括一第二光路折叠元件。
7.根据权利要求1所述的装置,其特征在于:所述非期望的转动运动围绕所述装置法线。
8.根据权利要求1所述的装置,其特征在于:所述非期望的转动运动的所述感测包括在三个方向上感测所述非期望的转动运动。
9.根据权利要求1所述的装置,其特征在于:所述非期望的转动运动的所述补偿包括在三个方向上补偿所述非期望的转动运动。
10.根据权利要求1所述的装置,其特征在于:所述第一光路折叠元件致动器被使用于移动所述第一光路折叠元件,以补偿所述装置的所述非期望的转动运动。
11.根据权利要求1所述的装置,其特征在于:所述第二致动器包括移动所述透镜的一透镜致动器。
12.根据权利要求1所述的装置,其特征在于:所述第二致动器包括移动所述传感器的一传感器致动器。
13.根据权利要求1所述的装置,其特征在于:所述手持电子装置是一智能手机。
14.一种用于光学防抖的装置,其特征在于,包括:
一扫描望远折叠相机,所述扫描望远折叠相机包括:一光路折叠元件,用于将来自一第一光路的光折叠朝向一第二光路,所述第一光路与所述装置的一法线形成小于90度的角度,所述第二光路是正交于所述装置的所述法线;一透镜,具有沿所述第二光路的一透镜光轴;以及一图像传感器,其中所述装置是一手持电子装置;
一光路折叠元件致动器,用于在一个或多个方向上倾斜所述光路折叠元件,以将所述扫描望远折叠相机的一视点指向一场景的一部份,其中所述光路折叠元件的所述倾斜引入了一旋转的视点像差;以及
一传感器致动器,其中所述传感器致动器围绕所述图像传感器的一法线旋转所述图像传感器以补偿所述旋转的视点像差。
15.根据权利要求14所述的装置,其特征在于:所述装置还包括:一运动传感器,用于感测所述装置的一非期望的转动运动;以及至少一致动器,用于移动所述扫描望远折叠相机的至少一部件,以补偿所述装置的所述非期望的转动运动,且其中所述补偿取决于所述装置的所述非期望的转动运动以及取决于所述扫描望远折叠相机的视点。
16.一种用于光学防抖的方法,其特征在于,包括:
提供包括一扫描望远折叠相机的一装置,所述扫描望远折叠相机包括:一光路折叠元件,用于将来自一第一光路的光折叠朝向一第二光路,所述第一光路与所述装置的一法线形成小于90度的角度,所述第二光路是正交于所述装置的所述法线;一透镜,具有沿所述第二光路的一透镜光轴;以及一图像传感器,其中所述装置是一手持电子装置;
提供一光路折叠元件致动器,所述光路折叠元件致动器用于在一个或多个方向上倾斜所述光路折叠元件,以将所述扫描望远折叠相机的一视点指向一场景的一部份,其中所述光路折叠元件的所述倾斜引入了一旋转的视点像差;以及
提供一传感器致动器,所述传感器致动器用于围绕所述图像传感器的一法线旋转所述图像传感器以补偿所述旋转的视点像差。
17.根据权利要求16所述的方法,其特征在于:所述方法还包括:提供一运动传感器,所述运动传感器用于感测所述装置的一非期望的转动运动;以及
提供至少一致动器,所述至少一致动器用于移动所述扫描望远折叠相机的至少一部件,以补偿所述装置的所述非期望的转动运动,且其中所述补偿取决于所述装置的所述非期望的转动运动以及取决于所述扫描望远折叠相机的视点。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063064565P | 2020-08-12 | 2020-08-12 | |
US63/064,565 | 2020-08-12 | ||
PCT/IB2021/056617 WO2022034402A1 (en) | 2020-08-12 | 2021-07-22 | Optical image stabilization in a scanning folded camera |
CN202180004818.9A CN114424104B (zh) | 2020-08-12 | 2021-07-22 | 扫描折叠相机中的光学防抖 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180004818.9A Division CN114424104B (zh) | 2020-08-12 | 2021-07-22 | 扫描折叠相机中的光学防抖 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116679419A true CN116679419A (zh) | 2023-09-01 |
Family
ID=80247779
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310685723.9A Pending CN116679420A (zh) | 2020-08-12 | 2021-07-22 | 用于光学防抖的方法 |
CN202310684792.8A Pending CN116679419A (zh) | 2020-08-12 | 2021-07-22 | 用于光学防抖的装置和方法 |
CN202310682624.5A Pending CN116626960A (zh) | 2020-08-12 | 2021-07-22 | 用于光学防抖的方法 |
CN202180004818.9A Active CN114424104B (zh) | 2020-08-12 | 2021-07-22 | 扫描折叠相机中的光学防抖 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310685723.9A Pending CN116679420A (zh) | 2020-08-12 | 2021-07-22 | 用于光学防抖的方法 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310682624.5A Pending CN116626960A (zh) | 2020-08-12 | 2021-07-22 | 用于光学防抖的方法 |
CN202180004818.9A Active CN114424104B (zh) | 2020-08-12 | 2021-07-22 | 扫描折叠相机中的光学防抖 |
Country Status (5)
Country | Link |
---|---|
US (2) | US11968453B2 (zh) |
EP (1) | EP4038432A4 (zh) |
KR (4) | KR102598070B1 (zh) |
CN (4) | CN116679420A (zh) |
WO (1) | WO2022034402A1 (zh) |
Family Cites Families (327)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4199785A (en) | 1979-01-05 | 1980-04-22 | Honeywell Inc. | Electronic zoom system |
JPS59191146A (ja) | 1983-04-13 | 1984-10-30 | Hitachi Ltd | 光学走査装置 |
US5099263A (en) | 1984-11-10 | 1992-03-24 | Minolta Camera Kabushiki Kaisha | Variable focal length camera |
DE58902538D1 (de) | 1988-05-19 | 1992-12-03 | Siemens Ag | Verfahren zur beobachtung einer szene und einrichtung zur durchfuehrung des verfahrens. |
DE3927334C1 (zh) | 1989-08-18 | 1991-01-10 | Messerschmitt-Boelkow-Blohm Gmbh, 8012 Ottobrunn, De | |
JP2703105B2 (ja) | 1989-10-20 | 1998-01-26 | 富士写真フイルム株式会社 | 手振れ補正装置 |
US5032917A (en) | 1990-03-12 | 1991-07-16 | Rca Licensing Corporation | Video signal blending apparatus |
JPH0443773A (ja) | 1990-06-11 | 1992-02-13 | Matsushita Electric Ind Co Ltd | 演算回路 |
US5041852A (en) | 1990-10-18 | 1991-08-20 | Fjui Photo Film Co., Ltd. | Camera shake correction system |
JP3261152B2 (ja) | 1991-03-13 | 2002-02-25 | シャープ株式会社 | 複数の光学系を備えた撮像装置 |
US5394520A (en) | 1991-09-26 | 1995-02-28 | Hughes Aircraft Company | Imaging apparatus for providing a composite digital representation of a scene within a field of regard |
US5657402A (en) | 1991-11-01 | 1997-08-12 | Massachusetts Institute Of Technology | Method of creating a high resolution still image using a plurality of images and apparatus for practice of the method |
US5248971A (en) | 1992-05-19 | 1993-09-28 | Mandl William J | Method and apparatus for multiplexed oversampled analog to digital modulation |
JPH06177706A (ja) | 1992-12-08 | 1994-06-24 | Sony Corp | 信号処理装置 |
KR940017747A (ko) | 1992-12-29 | 1994-07-27 | 에프. 제이. 스미트 | 영상 처리 디바이스 |
US5682198A (en) | 1993-06-28 | 1997-10-28 | Canon Kabushiki Kaisha | Double eye image pickup apparatus |
US6128416A (en) | 1993-09-10 | 2000-10-03 | Olympus Optical Co., Ltd. | Image composing technique for optimally composing a single image from a plurality of digital images |
JP3355787B2 (ja) | 1994-05-20 | 2002-12-09 | ソニー株式会社 | 光軸補正機構 |
US6714665B1 (en) | 1994-09-02 | 2004-03-30 | Sarnoff Corporation | Fully automated iris recognition system utilizing wide and narrow fields of view |
CA2155719C (en) | 1994-11-22 | 2005-11-01 | Terry Laurence Glatt | Video surveillance system with pilot and slave cameras |
JPH08271976A (ja) | 1995-03-29 | 1996-10-18 | Canon Inc | カメラ |
US5768443A (en) | 1995-12-19 | 1998-06-16 | Cognex Corporation | Method for coordinating multiple fields of view in multi-camera |
US5982951A (en) | 1996-05-28 | 1999-11-09 | Canon Kabushiki Kaisha | Apparatus and method for combining a plurality of images |
US5926190A (en) | 1996-08-21 | 1999-07-20 | Apple Computer, Inc. | Method and system for simulating motion in a computer graphics application using image registration and view interpolation |
JPH10126796A (ja) | 1996-09-12 | 1998-05-15 | Eastman Kodak Co | デュアル・モード・ソフトウェア処理を用いた動画・静止画像用デジタル・カメラ |
US5960218A (en) | 1997-02-18 | 1999-09-28 | Mobi Corporation | Dual focal length camera |
US5940641A (en) | 1997-07-10 | 1999-08-17 | Eastman Kodak Company | Extending panoramic images |
US6148120A (en) | 1997-10-30 | 2000-11-14 | Cognex Corporation | Warping of focal images to correct correspondence error |
US6268611B1 (en) | 1997-12-18 | 2001-07-31 | Cellavision Ab | Feature-free registration of dissimilar images using a robust similarity metric |
JP3695119B2 (ja) | 1998-03-05 | 2005-09-14 | 株式会社日立製作所 | 画像合成装置、及び画像合成方法を実現するプログラムを記録した記録媒体 |
US6208765B1 (en) | 1998-06-19 | 2001-03-27 | Sarnoff Corporation | Method and apparatus for improving image resolution |
GB9823689D0 (en) | 1998-10-30 | 1998-12-23 | Greenagate Limited | Improved methods and apparatus for 3-D imaging |
US6611289B1 (en) | 1999-01-15 | 2003-08-26 | Yanbin Yu | Digital cameras using multiple sensors with multiple lenses |
US20020063711A1 (en) | 1999-05-12 | 2002-05-30 | Imove Inc. | Camera system with high resolution image inside a wide angle view |
US20020075258A1 (en) | 1999-05-12 | 2002-06-20 | Imove Inc. | Camera system with high resolution image inside a wide angle view |
US6738073B2 (en) * | 1999-05-12 | 2004-05-18 | Imove, Inc. | Camera system with both a wide angle view and a high resolution view |
US6346950B1 (en) | 1999-05-20 | 2002-02-12 | Compaq Computer Corporation | System and method for display images using anamorphic video |
US7038716B2 (en) | 1999-07-30 | 2006-05-02 | Pixim, Inc. | Mobile device equipped with digital image sensor |
US7015954B1 (en) | 1999-08-09 | 2006-03-21 | Fuji Xerox Co., Ltd. | Automatic video system using multiple cameras |
US6650368B1 (en) | 1999-10-26 | 2003-11-18 | Hewlett-Packard Development Company, Lp. | Digital camera and method of enhancing zoom effects |
US6643416B1 (en) | 1999-11-30 | 2003-11-04 | Eastman Kodak Company | Method for determining necessary resolution for zoom and crop images |
US20020005902A1 (en) | 2000-06-02 | 2002-01-17 | Yuen Henry C. | Automatic video recording system using wide-and narrow-field cameras |
JP2002010276A (ja) | 2000-06-22 | 2002-01-11 | Olympus Optical Co Ltd | 撮像装置 |
JP4501239B2 (ja) | 2000-07-13 | 2010-07-14 | ソニー株式会社 | カメラ・キャリブレーション装置及び方法、並びに、記憶媒体 |
US7002583B2 (en) | 2000-08-03 | 2006-02-21 | Stono Technologies, Llc | Display of images and image transitions |
US6778207B1 (en) | 2000-08-07 | 2004-08-17 | Koninklijke Philips Electronics N.V. | Fast digital pan tilt zoom video |
US7345277B2 (en) | 2000-08-09 | 2008-03-18 | Evan Zhang | Image intensifier and LWIR fusion/combination system |
JP2002214662A (ja) | 2001-01-23 | 2002-07-31 | Olympus Optical Co Ltd | 光学装置の振れ補正装置 |
US6741250B1 (en) | 2001-02-09 | 2004-05-25 | Be Here Corporation | Method and system for generation of multiple viewpoints into a scene viewed by motionless cameras and for presentation of a view path |
US7346217B1 (en) | 2001-04-25 | 2008-03-18 | Lockheed Martin Corporation | Digital image enhancement using successive zoom images |
JP2002341220A (ja) | 2001-05-14 | 2002-11-27 | Olympus Optical Co Ltd | 光学機器 |
GB0116877D0 (en) | 2001-07-10 | 2001-09-05 | Hewlett Packard Co | Intelligent feature selection and pan zoom control |
US6680748B1 (en) | 2001-09-27 | 2004-01-20 | Pixim, Inc., | Multi-mode camera and method therefor |
US20030093805A1 (en) | 2001-11-15 | 2003-05-15 | Gin J.M. Jack | Dual camera surveillance and control system |
US7339621B2 (en) | 2001-12-13 | 2008-03-04 | Psion Teklogix Systems, Inc. | Imager output signal processing |
JP4198449B2 (ja) | 2002-02-22 | 2008-12-17 | 富士フイルム株式会社 | デジタルカメラ |
JP2003298920A (ja) | 2002-03-29 | 2003-10-17 | Fuji Photo Film Co Ltd | デジタルカメラ |
JP4657564B2 (ja) | 2002-04-30 | 2011-03-23 | イーストマン コダック カンパニー | 電子スチルカメラ及び画像処理方法 |
GB2388265B (en) | 2002-04-30 | 2005-10-12 | Hewlett Packard Co | Improvements in and relating to processing of images |
CA2386560A1 (en) | 2002-05-15 | 2003-11-15 | Idelix Software Inc. | Controlling optical hardware and dynamic data viewing systems with detail-in-context viewing tools |
JP3870124B2 (ja) | 2002-06-14 | 2007-01-17 | キヤノン株式会社 | 画像処理装置及びその方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体 |
US6839067B2 (en) | 2002-07-26 | 2005-01-04 | Fuji Xerox Co., Ltd. | Capturing and producing shared multi-resolution video |
US20040061788A1 (en) | 2002-09-26 | 2004-04-01 | Logitech Europe S.A. | Multiple mode capture button for a digital camera |
US7321470B2 (en) | 2002-10-08 | 2008-01-22 | Olympus Corporation | Camera |
JP4481560B2 (ja) | 2002-10-08 | 2010-06-16 | オリンパス株式会社 | レンズ鏡筒 |
GB2394852B (en) | 2002-10-31 | 2006-12-20 | Hewlett Packard Co | Image capture systems using motion detection |
JP2004219569A (ja) | 2003-01-10 | 2004-08-05 | Olympus Corp | 電子撮像装置 |
JP3861815B2 (ja) | 2003-01-17 | 2006-12-27 | コニカミノルタフォトイメージング株式会社 | 手振れ補正機能付きカメラ |
JP4055599B2 (ja) | 2003-02-13 | 2008-03-05 | コニカミノルタオプト株式会社 | 撮像レンズ装置およびそれを備えた電子機器 |
WO2004084542A1 (ja) | 2003-03-20 | 2004-09-30 | Seijiro Tomita | パノラマ画像生成方法及びその装置並びにこれらの方法・装置を用いた監視システム |
KR20040103786A (ko) | 2003-06-02 | 2004-12-09 | 펜탁스 가부시키가이샤 | 다초점 촬상 장치 및 다초점 촬상 장치를 가진 모바일 장치 |
US7596284B2 (en) | 2003-07-16 | 2009-09-29 | Hewlett-Packard Development Company, L.P. | High resolution image reconstruction |
US7619683B2 (en) | 2003-08-29 | 2009-11-17 | Aptina Imaging Corporation | Apparatus including a dual camera module and method of using the same |
JP2005099265A (ja) | 2003-09-24 | 2005-04-14 | Fujinon Corp | 撮像装置および撮像方法、ならびに測距方法 |
EP1536633A1 (en) | 2003-11-27 | 2005-06-01 | Sony Corporation | Photographing apparatus and method, supervising system, program and recording medium |
JP2005208194A (ja) | 2004-01-21 | 2005-08-04 | Konica Minolta Photo Imaging Inc | 撮影装置 |
KR20050090780A (ko) | 2004-03-10 | 2005-09-14 | 삼성전자주식회사 | 영상촬영장치 |
WO2006040687A2 (en) | 2004-07-19 | 2006-04-20 | Grandeye, Ltd. | Automatically expanding the zoom capability of a wide-angle video camera |
EP1780567B1 (en) | 2004-07-20 | 2011-09-14 | Five Dimension Co., Ltd. | Electronic imaging device |
US7916180B2 (en) | 2004-08-25 | 2011-03-29 | Protarius Filo Ag, L.L.C. | Simultaneous multiple field of view digital cameras |
EP1812968B1 (en) | 2004-08-25 | 2019-01-16 | Callahan Cellular L.L.C. | Apparatus for multiple camera devices and method of operating same |
US7564019B2 (en) | 2005-08-25 | 2009-07-21 | Richard Ian Olsen | Large dynamic range cameras |
US7465107B2 (en) | 2004-09-21 | 2008-12-16 | Canon Kabushiki Kaisha | Photographing apparatus and control method therefor |
KR101054344B1 (ko) | 2004-11-17 | 2011-08-04 | 삼성전자주식회사 | 박막 트랜지스터 표시판 및 그 제조 방법 |
US7688364B2 (en) | 2004-12-10 | 2010-03-30 | Ambarella, Inc. | Decimating and cropping based zoom factor for a digital camera |
KR100636969B1 (ko) | 2004-12-30 | 2006-10-19 | 매그나칩 반도체 유한회사 | Isp 내장형 이미지 센서 및 듀얼 카메라 시스템 |
US7573514B2 (en) | 2005-02-03 | 2009-08-11 | Eastman Kodak Company | Digital imaging system with digital zoom warning |
US7663662B2 (en) | 2005-02-09 | 2010-02-16 | Flir Systems, Inc. | High and low resolution camera systems and methods |
US7256944B2 (en) | 2005-02-18 | 2007-08-14 | Eastman Kodak Company | Compact image capture assembly using multiple lenses and image sensors to provide an extended zoom range |
US20060187322A1 (en) | 2005-02-18 | 2006-08-24 | Janson Wilbert F Jr | Digital camera using multiple fixed focal length lenses and multiple image sensors to provide an extended zoom range |
US7206136B2 (en) | 2005-02-18 | 2007-04-17 | Eastman Kodak Company | Digital camera using multiple lenses and image sensors to provide an extended zoom range |
US7236306B2 (en) | 2005-02-18 | 2007-06-26 | Eastman Kodak Company | Digital camera using an express zooming mode to provide expedited operation over an extended zoom range |
US7561191B2 (en) | 2005-02-18 | 2009-07-14 | Eastman Kodak Company | Camera phone using multiple lenses and image sensors to provide an extended zoom range |
JP2006238325A (ja) | 2005-02-28 | 2006-09-07 | Canon Inc | カメラシステム |
KR100658150B1 (ko) | 2005-04-08 | 2006-12-15 | 삼성전기주식회사 | 카메라 모듈 및 이의 제작방법 |
JP3934151B2 (ja) | 2005-06-22 | 2007-06-20 | 松下電器産業株式会社 | 画像生成装置および画像生成方法 |
KR20070005946A (ko) | 2005-07-05 | 2007-01-11 | 엘지전자 주식회사 | 휴대 단말기용 카메라 렌즈의 위치 검출 장치 |
JP2007033879A (ja) | 2005-07-27 | 2007-02-08 | Sony Corp | 撮像レンズ装置及び撮像装置 |
US7424218B2 (en) | 2005-07-28 | 2008-09-09 | Microsoft Corporation | Real-time preview for panoramic images |
JP4573724B2 (ja) | 2005-08-01 | 2010-11-04 | イーストマン コダック カンパニー | 複数光学系を有する撮像装置 |
JP4573725B2 (ja) | 2005-08-01 | 2010-11-04 | イーストマン コダック カンパニー | 複数光学系を有する撮像装置 |
US7964835B2 (en) | 2005-08-25 | 2011-06-21 | Protarius Filo Ag, L.L.C. | Digital cameras with direct luminance and chrominance detection |
US7822330B2 (en) | 2005-11-14 | 2010-10-26 | Nikon Corporation | Image blur correction device and camera |
JP4788953B2 (ja) | 2005-11-16 | 2011-10-05 | ソニー株式会社 | 撮像装置及びズームレンズ |
US8238695B1 (en) | 2005-12-15 | 2012-08-07 | Grandeye, Ltd. | Data reduction techniques for processing wide-angle video |
US20070177025A1 (en) | 2006-02-01 | 2007-08-02 | Micron Technology, Inc. | Method and apparatus minimizing die area and module size for a dual-camera mobile device |
JP2009526257A (ja) | 2006-02-06 | 2009-07-16 | ノキア コーポレイション | ジンバルプリズムを用いた光学像スタビライザ |
JP4579842B2 (ja) | 2006-02-06 | 2010-11-10 | イーストマン コダック カンパニー | 撮像装置 |
CN101401022B (zh) | 2006-02-06 | 2010-07-21 | 诺基亚公司 | 在成像系统中进行位置检测的方法和设备 |
US9182228B2 (en) | 2006-02-13 | 2015-11-10 | Sony Corporation | Multi-lens array system and method |
JP4622882B2 (ja) | 2006-02-21 | 2011-02-02 | カシオ計算機株式会社 | デジタルカメラ |
US7708478B2 (en) | 2006-04-13 | 2010-05-04 | Nokia Corporation | Actuator mechanism and a shutter mechanism |
US7773121B1 (en) | 2006-05-03 | 2010-08-10 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | High-resolution, continuous field-of-view (FOV), non-rotating imaging system |
JP2007306282A (ja) | 2006-05-11 | 2007-11-22 | Citizen Electronics Co Ltd | カメラモジュール |
KR100749337B1 (ko) | 2006-06-13 | 2007-08-14 | 삼성전자주식회사 | 복수의 카메라렌즈를 구비한 이동통신단말기를 이용한 촬영방법 및 장치 |
US7737379B2 (en) | 2006-07-19 | 2010-06-15 | Witdouck Calvin J | System and method for sorting larvae cocoons |
US8189100B2 (en) | 2006-07-25 | 2012-05-29 | Qualcomm Incorporated | Mobile device with dual digital camera sensors and methods of using the same |
US7756330B2 (en) | 2006-07-27 | 2010-07-13 | Eastman Kodak Company | Producing an extended dynamic range digital image |
US7667762B2 (en) | 2006-08-01 | 2010-02-23 | Lifesize Communications, Inc. | Dual sensor video camera |
US20080030592A1 (en) | 2006-08-01 | 2008-02-07 | Eastman Kodak Company | Producing digital image with different resolution portions |
JP2008076485A (ja) | 2006-09-19 | 2008-04-03 | Konica Minolta Opto Inc | レンズ鏡胴、及び撮像装置 |
JP2008096584A (ja) | 2006-10-10 | 2008-04-24 | Nikon Corp | カメラ |
US7697053B2 (en) | 2006-11-02 | 2010-04-13 | Eastman Kodak Company | Integrated display having multiple capture devices |
JP4448844B2 (ja) | 2006-11-22 | 2010-04-14 | 富士フイルム株式会社 | 複眼撮像装置 |
KR100871566B1 (ko) | 2006-12-04 | 2008-12-02 | 삼성전자주식회사 | 이미지 촬상 장치의 손떨림 보상을 위한 장치 및 방법 |
US7533819B2 (en) | 2007-01-31 | 2009-05-19 | Symbol Technologies, Inc. | Dual camera assembly for an imaging-based bar code reader |
US7978239B2 (en) | 2007-03-01 | 2011-07-12 | Eastman Kodak Company | Digital camera using multiple image sensors to provide improved temporal sampling |
US7859588B2 (en) | 2007-03-09 | 2010-12-28 | Eastman Kodak Company | Method and apparatus for operating a dual lens camera to augment an image |
US7676146B2 (en) | 2007-03-09 | 2010-03-09 | Eastman Kodak Company | Camera using multiple lenses and image sensors to provide improved focusing capability |
US7729602B2 (en) | 2007-03-09 | 2010-06-01 | Eastman Kodak Company | Camera using multiple lenses and image sensors operable in a default imaging mode |
US7683962B2 (en) | 2007-03-09 | 2010-03-23 | Eastman Kodak Company | Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map |
WO2008129552A1 (en) | 2007-04-19 | 2008-10-30 | Dvp Technologies Ltd. | Imaging system and method for use in monitoring a field of regard |
US7918398B2 (en) | 2007-06-04 | 2011-04-05 | Hand Held Products, Inc. | Indicia reading terminal having multiple setting imaging lens |
US8390729B2 (en) | 2007-09-05 | 2013-03-05 | International Business Machines Corporation | Method and apparatus for providing a video image having multiple focal lengths |
US20090086074A1 (en) | 2007-09-27 | 2009-04-02 | Omnivision Technologies, Inc. | Dual mode camera solution apparatus, system, and method |
JP2009109904A (ja) | 2007-10-31 | 2009-05-21 | Sony Corp | レンズ鏡筒及び撮像装置 |
US20090122195A1 (en) | 2007-11-09 | 2009-05-14 | Van Baar Jeroen | System and Method for Combining Image Sequences |
US20090128644A1 (en) | 2007-11-15 | 2009-05-21 | Camp Jr William O | System and method for generating a photograph |
KR20090058229A (ko) | 2007-12-04 | 2009-06-09 | 삼성전기주식회사 | 듀얼 카메라 모듈 |
US8310587B2 (en) | 2007-12-04 | 2012-11-13 | DigitalOptics Corporation International | Compact camera optics |
US8824833B2 (en) | 2008-02-01 | 2014-09-02 | Omnivision Technologies, Inc. | Image data fusion systems and methods |
US8115825B2 (en) | 2008-02-20 | 2012-02-14 | Apple Inc. | Electronic device with two image sensors |
CN101276415A (zh) | 2008-03-03 | 2008-10-01 | 北京航空航天大学 | 用多定焦摄像机实现多分辨率图像采集的装置和方法 |
US20100097444A1 (en) | 2008-10-16 | 2010-04-22 | Peter Lablans | Camera System for Creating an Image From a Plurality of Images |
US8866920B2 (en) | 2008-05-20 | 2014-10-21 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
FI20085510L (fi) | 2008-05-28 | 2009-11-29 | Valtion Teknillinen | Zoom-kamera -järjestely, joka käsittää useita alikameroita |
JP4513906B2 (ja) | 2008-06-27 | 2010-07-28 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム及び記録媒体 |
KR101477178B1 (ko) | 2008-07-17 | 2014-12-29 | 삼성전자주식회사 | 듀얼 카메라를 구비하는 휴대 단말기 및 이를 이용한 촬영방법 |
US8134589B2 (en) | 2008-07-17 | 2012-03-13 | Eastman Kodak Company | Zoom by multiple image capture |
GB2462095A (en) | 2008-07-23 | 2010-01-27 | Snell & Wilcox Ltd | Processing of images to represent a transition in viewpoint |
US8237807B2 (en) | 2008-07-24 | 2012-08-07 | Apple Inc. | Image capturing device with touch screen for adjusting camera settings |
WO2010029689A1 (ja) | 2008-09-10 | 2010-03-18 | パナソニック株式会社 | カメラ本体および撮像装置 |
CN101394487B (zh) | 2008-10-27 | 2011-09-14 | 华为技术有限公司 | 一种合成图像的方法与系统 |
JP5230376B2 (ja) | 2008-11-28 | 2013-07-10 | 三星電子株式会社 | 撮像装置及び撮像方法 |
JP5265336B2 (ja) | 2008-12-25 | 2013-08-14 | 富士フイルム株式会社 | 手振れ補正装置及び光学機器 |
JP2010204341A (ja) | 2009-03-03 | 2010-09-16 | Nikon Corp | カメラ |
CN101833157A (zh) | 2009-03-13 | 2010-09-15 | 鸿富锦精密工业(深圳)有限公司 | 相机模组 |
CN102356630B (zh) | 2009-03-19 | 2016-01-27 | 数字光学公司 | 双传感器照相机 |
WO2010116369A1 (en) | 2009-04-07 | 2010-10-14 | Nextvision Stabilized Systems Ltd | Methods of manufacturing a camera system having multiple image sensors |
KR101552481B1 (ko) | 2009-04-13 | 2015-09-21 | 삼성전자 주식회사 | 줌 렌즈 모듈 |
WO2010122841A1 (ja) | 2009-04-22 | 2010-10-28 | コニカミノルタオプト株式会社 | レンズ鏡胴、撮像装置及びレンズ鏡胴の製造方法 |
US8553106B2 (en) | 2009-05-04 | 2013-10-08 | Digitaloptics Corporation | Dual lens digital zoom |
BRPI0924540A2 (pt) | 2009-06-16 | 2015-06-23 | Intel Corp | Aplicações de câmera em um dispositivo portátil |
WO2010148363A2 (en) | 2009-06-18 | 2010-12-23 | Theia Technologies, Llc | Compact dome camera |
CN102461157B (zh) | 2009-06-22 | 2016-01-20 | 豪威科技有限公司 | 多视频标准中可操作的用于图像传感器的系统和方法 |
WO2011009108A2 (en) | 2009-07-17 | 2011-01-20 | Universal Robotics, Inc. | System and method for automatic calibration of stereo images |
JP5846346B2 (ja) | 2009-08-21 | 2016-01-20 | ミツミ電機株式会社 | カメラの手振れ補正装置 |
CN201514511U (zh) | 2009-09-08 | 2010-06-23 | 华晶科技股份有限公司 | 潜望式镜头结构 |
KR101613928B1 (ko) | 2009-09-09 | 2016-04-20 | 엘지전자 주식회사 | 이동 단말기 |
EP2478464B1 (en) | 2009-09-14 | 2019-05-08 | VIION Systems Inc. | Saccadic dual-resolution video analytics camera |
KR101617289B1 (ko) | 2009-09-30 | 2016-05-02 | 엘지전자 주식회사 | 휴대 단말기 및 그 동작 제어방법 |
JP5513834B2 (ja) | 2009-10-13 | 2014-06-04 | 台湾東電化股▲ふん▼有限公司 | レンズ駆動装置 |
CA2781064C (en) | 2009-11-19 | 2019-07-02 | Esight Corp. | Image magnification on a head mounted display |
WO2011063347A2 (en) | 2009-11-20 | 2011-05-26 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
US8400555B1 (en) | 2009-12-01 | 2013-03-19 | Adobe Systems Incorporated | Focused plenoptic camera employing microlenses with different focal lengths |
US20110128288A1 (en) | 2009-12-02 | 2011-06-02 | David Petrou | Region of Interest Selector for Visual Queries |
WO2011094292A1 (en) | 2010-01-28 | 2011-08-04 | Pathway Innovations And Technologies, Inc. | Document imaging system having camera-scanner apparatus and personal computer based processing software |
JP5445235B2 (ja) | 2010-03-09 | 2014-03-19 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP2011205374A (ja) | 2010-03-25 | 2011-10-13 | Fujifilm Corp | 表示装置 |
TWI478828B (zh) | 2010-03-26 | 2015-04-01 | Hon Hai Prec Ind Co Ltd | 車載影像系統及安裝有該車載影像系統的汽車 |
JP4783465B1 (ja) | 2010-03-26 | 2011-09-28 | 富士フイルム株式会社 | 撮像装置及び表示装置 |
US8456518B2 (en) | 2010-03-31 | 2013-06-04 | James Cameron & Vincent Pace | Stereoscopic camera with automatic obstruction removal |
US9001227B2 (en) | 2010-04-05 | 2015-04-07 | Qualcomm Incorporated | Combining data from multiple image sensors |
US8547389B2 (en) | 2010-04-05 | 2013-10-01 | Microsoft Corporation | Capturing image structure detail from a first image and color from a second image |
US8446484B2 (en) | 2010-04-21 | 2013-05-21 | Nokia Corporation | Image processing architecture with pre-scaler |
EP2567287B1 (en) | 2010-05-03 | 2019-08-21 | InVisage Technologies, Inc. | Devices and methods for high-resolution image and video capture |
US20130250150A1 (en) | 2010-05-03 | 2013-09-26 | Michael R. Malone | Devices and methods for high-resolution image and video capture |
US20120069224A1 (en) * | 2010-05-06 | 2012-03-22 | Andrew Cilia | Method and system for single-camera license-plate recognition and magnification |
DE102010017057B4 (de) | 2010-05-21 | 2015-03-19 | Jena-Optronik Gmbh | Kamera mit mehreren Festbrennweiten |
AU2011277892B2 (en) | 2010-07-13 | 2014-06-26 | Ram Srikanth Mirlay | Variable three-dimensional camera assembly for still photography |
JP2012027263A (ja) | 2010-07-23 | 2012-02-09 | Sony Corp | 撮像装置、その制御方法およびプログラム |
US8493482B2 (en) | 2010-08-18 | 2013-07-23 | Apple Inc. | Dual image sensor image processing system and method |
US8896655B2 (en) | 2010-08-31 | 2014-11-25 | Cisco Technology, Inc. | System and method for providing depth adaptive video conferencing |
JP5609467B2 (ja) | 2010-09-15 | 2014-10-22 | 株式会社リコー | 撮像装置及び撮像方法 |
US8780251B2 (en) | 2010-09-20 | 2014-07-15 | Canon Kabushiki Kaisha | Image capture with focus adjustment |
US20120075489A1 (en) | 2010-09-24 | 2012-03-29 | Nishihara H Keith | Zoom camera image blending technique |
US20140192238A1 (en) | 2010-10-24 | 2014-07-10 | Linx Computational Imaging Ltd. | System and Method for Imaging and Image Processing |
US9204026B2 (en) | 2010-11-01 | 2015-12-01 | Lg Electronics Inc. | Mobile terminal and method of controlling an image photographing therein |
JP5719148B2 (ja) | 2010-11-10 | 2015-05-13 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム |
KR101731346B1 (ko) | 2010-11-12 | 2017-04-28 | 엘지전자 주식회사 | 멀티미디어 장치의 디스플레이화면 제공 방법 및 그에 따른 멀티미디어 장치 |
WO2012075250A1 (en) | 2010-12-01 | 2012-06-07 | Magna Electronics Inc. | System and method of establishing a multi-camera image using pixel remapping |
US10200671B2 (en) | 2010-12-27 | 2019-02-05 | 3Dmedia Corporation | Primary and auxiliary image capture devices for image processing and related methods |
US8274552B2 (en) | 2010-12-27 | 2012-09-25 | 3Dmedia Corporation | Primary and auxiliary image capture devices for image processing and related methods |
JP2012141442A (ja) | 2010-12-28 | 2012-07-26 | Sony Corp | レンズ保護装置、レンズユニット及び撮像装置 |
US8803990B2 (en) | 2011-01-25 | 2014-08-12 | Aptina Imaging Corporation | Imaging system with multiple sensors for producing high-dynamic-range images |
US8520080B2 (en) | 2011-01-31 | 2013-08-27 | Hand Held Products, Inc. | Apparatus, system, and method of use of imaging assembly on mobile terminal |
JP5814566B2 (ja) | 2011-02-28 | 2015-11-17 | オリンパス株式会社 | 撮像装置、撮像方法及び撮像装置の制御プログラム |
EP2684026A4 (en) | 2011-03-08 | 2014-09-10 | Spectral Instr Imaging Llc | IMAGING SYSTEM COMPRISING PRIMARY AND AUXILIARY CAMERA SYSTEMS |
JP5708097B2 (ja) | 2011-03-18 | 2015-04-30 | 株式会社リコー | 撮像装置、撮像方法、及び撮像プログラム |
US9172856B2 (en) | 2011-03-29 | 2015-10-27 | Microsoft Technology Licensing, Llc | Folded imaging path camera |
CN102739949A (zh) | 2011-04-01 | 2012-10-17 | 张可伦 | 多镜头相机和多镜头装置的控制方法 |
EP2523450B1 (en) | 2011-05-10 | 2014-05-14 | HTC Corporation | Handheld electronic device with dual image capturing method and computer program product |
US8553129B2 (en) | 2011-05-10 | 2013-10-08 | Htc Corporation | Handheld electronic device with two lens modules, dual image capturing method applying for the handheld electronic device, and computer program product for load into the handheld electronic device |
KR101224790B1 (ko) | 2011-06-14 | 2013-01-21 | 삼성전기주식회사 | 영상 촬상 장치 |
US8605199B2 (en) | 2011-06-28 | 2013-12-10 | Canon Kabushiki Kaisha | Adjustment of imaging properties for an imaging assembly having light-field optics |
JP5821356B2 (ja) | 2011-07-15 | 2015-11-24 | ミツミ電機株式会社 | レンズ駆動装置 |
US9270875B2 (en) | 2011-07-20 | 2016-02-23 | Broadcom Corporation | Dual image capture processing |
JP6103840B2 (ja) | 2011-07-28 | 2017-03-29 | キヤノン株式会社 | 補正光学装置及び撮像装置 |
US8988564B2 (en) | 2011-09-09 | 2015-03-24 | Apple Inc. | Digital camera with light splitter |
EP2582128A3 (en) | 2011-10-12 | 2013-06-19 | Canon Kabushiki Kaisha | Image-capturing device |
US8947627B2 (en) | 2011-10-14 | 2015-02-03 | Apple Inc. | Electronic devices having displays with openings |
JP5884421B2 (ja) | 2011-11-14 | 2016-03-15 | ソニー株式会社 | 画像処理装置、画像処理装置の制御方法およびプログラム |
JP5741395B2 (ja) | 2011-11-16 | 2015-07-01 | コニカミノルタ株式会社 | 撮像装置 |
US8970655B2 (en) | 2011-12-16 | 2015-03-03 | Polycom, Inc. | Reflective and refractive solutions to providing direct eye contact videoconferencing |
US8619148B1 (en) | 2012-01-04 | 2013-12-31 | Audience, Inc. | Image correction after combining images from multiple cameras |
JP2013143753A (ja) | 2012-01-12 | 2013-07-22 | Olympus Corp | 撮像装置 |
KR20130090225A (ko) | 2012-02-03 | 2013-08-13 | 삼성전자주식회사 | 카메라 이미지 센서의 동작 모드 변경 방법 |
GB2499200B (en) | 2012-02-07 | 2014-12-17 | Canon Kk | Method and device for transitioning between an image of a first video sequence and an image for a second video sequence |
US8866943B2 (en) | 2012-03-09 | 2014-10-21 | Apple Inc. | Video camera providing a composite video sequence |
US20130258044A1 (en) | 2012-03-30 | 2013-10-03 | Zetta Research And Development Llc - Forc Series | Multi-lens camera |
US9029759B2 (en) | 2012-04-12 | 2015-05-12 | Nan Chang O-Film Optoelectronics Technology Ltd | Compact camera modules with features for reducing Z-height and facilitating lens alignment and methods for manufacturing the same |
JP2013238848A (ja) | 2012-04-20 | 2013-11-28 | Hoya Corp | 撮像装置 |
CN102722321A (zh) | 2012-05-22 | 2012-10-10 | 中兴通讯股份有限公司 | 双摄像头切换的方法及装置 |
US8953084B2 (en) | 2012-05-30 | 2015-02-10 | Digimarc Corporation | Plural focal-plane imaging |
US9583133B2 (en) | 2012-06-11 | 2017-02-28 | Sony Corporation | Image generation device and image generation method for multiplexing captured images to generate an image stream |
KR101991719B1 (ko) | 2012-06-29 | 2019-06-21 | 엘지이노텍 주식회사 | 카메라 모듈 |
US9134503B2 (en) | 2012-07-06 | 2015-09-15 | Apple Inc. | VCM OIS actuator module |
WO2014008939A1 (en) | 2012-07-12 | 2014-01-16 | Dual Aperture, Inc. | Gesture-based user interface |
WO2014010303A1 (ja) | 2012-07-12 | 2014-01-16 | ソニー株式会社 | 像振れ補正装置と像振れ補正方法および撮像装置 |
KR102051501B1 (ko) | 2012-07-26 | 2019-12-03 | 엘지이노텍 주식회사 | 카메라 모듈 |
US9398264B2 (en) | 2012-10-19 | 2016-07-19 | Qualcomm Incorporated | Multi-camera system using folded optics |
US9609190B2 (en) | 2012-10-31 | 2017-03-28 | Invisage Technologies, Inc. | Devices, methods, and systems for expanded-field-of-view image and video capture |
EP2917783A4 (en) | 2012-11-08 | 2016-07-13 | Dynaoptics Pte Ltd | MINIATURIZED OPTICAL ZOOMOBJEKTIV |
WO2014076959A1 (ja) | 2012-11-16 | 2014-05-22 | パナソニック株式会社 | カメラ駆動装置 |
KR101960493B1 (ko) | 2012-12-12 | 2019-07-15 | 삼성전자주식회사 | 광학조절장치 |
CN103024272A (zh) | 2012-12-14 | 2013-04-03 | 广东欧珀移动通信有限公司 | 移动终端的双摄像头控制装置、方法、系统以及移动终端 |
WO2014107634A2 (en) | 2013-01-05 | 2014-07-10 | Tinz Optics, Inc. | Methods and apparatus relating to the use of multipe optical chains |
US20140313316A1 (en) | 2013-01-30 | 2014-10-23 | SeeScan, Inc. | Adjustable variable resolution inspection systems and methods using multiple image sensors |
US20140218587A1 (en) | 2013-02-07 | 2014-08-07 | Motorola Mobility Llc | Double sided camera module |
WO2014152855A2 (en) | 2013-03-14 | 2014-09-25 | Geerds Joergen | Camera system |
US10268276B2 (en) | 2013-03-15 | 2019-04-23 | Eyecam, LLC | Autonomous computing and telecommunications head-up displays glasses |
JP6214206B2 (ja) | 2013-05-13 | 2017-10-18 | キヤノン株式会社 | 撮像装置、制御方法及びプログラム |
JP6100089B2 (ja) | 2013-05-17 | 2017-03-22 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
DE102013209829B4 (de) | 2013-05-27 | 2016-04-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Optische Struktur mit daran angeordneten Stegen und Verfahren zur Herstellung derselben |
KR102166262B1 (ko) | 2013-06-10 | 2020-10-15 | 삼성전자주식회사 | 카메라 렌즈 어셈블리 |
EP3008890A4 (en) | 2013-06-13 | 2016-05-04 | Corephotonics Ltd | ZOOM OF A DIGITAL CAMERA WITH DUAL IRIS |
TWI546570B (zh) | 2013-07-01 | 2016-08-21 | 台灣東電化股份有限公司 | 可切換光路徑之光學防震機構 |
US9137447B2 (en) | 2013-07-31 | 2015-09-15 | Panasonic Intellectual Property Management Co., Ltd. | Imaging apparatus that generates an image including an emphasized in-focus part of a captured image |
US9285566B2 (en) | 2013-08-08 | 2016-03-15 | Apple Inc. | Mirror tilt actuation |
WO2015025878A1 (ja) * | 2013-08-21 | 2015-02-26 | オリンパスイメージング株式会社 | 撮像装置、撮像方法およびプログラム |
US9494769B2 (en) | 2013-09-12 | 2016-11-15 | Hong Kong Applied Science And Technology Research Institute Co. Ltd. | Multi-lens imaging module and actuator with auto-focus adjustment |
US10151859B2 (en) | 2013-09-23 | 2018-12-11 | Lg Innotek Co., Ltd. | Camera module and manufacturing method for same |
US9615012B2 (en) | 2013-09-30 | 2017-04-04 | Google Inc. | Using a second camera to adjust settings of first camera |
CN104581136B (zh) | 2013-10-14 | 2017-05-31 | 钰立微电子股份有限公司 | 图像校准系统和立体摄像机的校准方法 |
US9736365B2 (en) | 2013-10-26 | 2017-08-15 | Light Labs Inc. | Zoom related methods and apparatus |
US9344626B2 (en) | 2013-11-18 | 2016-05-17 | Apple Inc. | Modeless video and still frame capture using interleaved frames of video and still resolutions |
CN104680501B (zh) | 2013-12-03 | 2018-12-07 | 华为技术有限公司 | 图像拼接的方法及装置 |
US9215377B2 (en) | 2013-12-04 | 2015-12-15 | Nokia Technologies Oy | Digital zoom with sensor mode change |
EP3062509B1 (en) | 2013-12-06 | 2020-06-03 | Huawei Device Co., Ltd. | Terminal and image processing method |
US9973672B2 (en) | 2013-12-06 | 2018-05-15 | Huawei Device (Dongguan) Co., Ltd. | Photographing for dual-lens device using photographing environment determined using depth estimation |
KR101916355B1 (ko) | 2013-12-06 | 2018-11-07 | 후아웨이 디바이스 (둥관) 컴퍼니 리미티드 | 듀얼-렌즈 장치의 촬영 방법, 및 듀얼-렌즈 장치 |
JP6263623B2 (ja) | 2013-12-06 | 2018-01-17 | 華為終端(東莞)有限公司 | 画像生成方法及びデュアルレンズ装置 |
US9538096B2 (en) | 2014-01-27 | 2017-01-03 | Raytheon Company | Imaging system and methods with variable lateral magnification |
KR102128468B1 (ko) | 2014-02-19 | 2020-06-30 | 삼성전자주식회사 | 복수의 이미지 신호 프로세서들을 포함하는 이미지 처리 장치 및 이미지 처리 방법 |
TW201533514A (zh) | 2014-02-27 | 2015-09-01 | Tdk Taiwan Corp | 相機模組的反射鏡結構 |
US9316810B2 (en) | 2014-03-07 | 2016-04-19 | Apple Inc. | Folded telephoto camera lens system |
US9557627B2 (en) | 2014-03-07 | 2017-01-31 | Apple Inc. | Folded camera lens systems |
US20150271471A1 (en) | 2014-03-19 | 2015-09-24 | Htc Corporation | Blocking detection method for camera and electronic apparatus with cameras |
KR102214193B1 (ko) | 2014-03-25 | 2021-02-09 | 삼성전자 주식회사 | 깊이 카메라 장치, 그것을 구비한 3d 영상 디스플레이 시스템 및 그 제어방법 |
US9383550B2 (en) | 2014-04-04 | 2016-07-05 | Qualcomm Incorporated | Auto-focus in low-profile folded optics multi-camera system |
KR101771778B1 (ko) | 2014-04-11 | 2017-08-25 | 삼성전기주식회사 | 카메라 모듈 |
CN105024516B (zh) | 2014-04-30 | 2017-12-01 | 光宝电子(广州)有限公司 | 音圈马达阵列模块 |
EP3099044B1 (en) | 2014-05-15 | 2018-12-26 | Huawei Technologies Co. Ltd. | Multi-frame noise reduction method and terminal |
US20150334309A1 (en) | 2014-05-16 | 2015-11-19 | Htc Corporation | Handheld electronic apparatus, image capturing apparatus and image capturing method thereof |
US9360671B1 (en) | 2014-06-09 | 2016-06-07 | Google Inc. | Systems and methods for image zoom |
US9541740B2 (en) * | 2014-06-20 | 2017-01-10 | Qualcomm Incorporated | Folded optic array camera using refractive prisms |
US9392188B2 (en) | 2014-08-10 | 2016-07-12 | Corephotonics Ltd. | Zoom dual-aperture camera with folded lens |
JP2016057468A (ja) | 2014-09-10 | 2016-04-21 | Hoya株式会社 | 屈曲撮像装置 |
EP3190781B1 (en) | 2014-09-30 | 2019-05-22 | Huawei Technologies Co. Ltd. | Autofocus method, device and electronic apparatus |
US9476744B2 (en) | 2014-10-08 | 2016-10-25 | Dieterich Standard, Inc. | Integrated orifice plate assembly |
WO2016081567A1 (en) | 2014-11-19 | 2016-05-26 | Orlo James Fiske | Thin optical system and camera |
KR102287013B1 (ko) | 2014-11-25 | 2021-08-06 | 삼성디스플레이 주식회사 | 박막 트랜지스터, 이를 포함하는 유기 발광 표시 장치 및 그 제조 방법 |
US10634867B2 (en) | 2014-11-28 | 2020-04-28 | Samsung Electro-Mechanics Co., Ltd. | Camera module |
US9286680B1 (en) | 2014-12-23 | 2016-03-15 | Futurewei Technologies, Inc. | Computational multi-camera adjustment for smooth view switching and zooming |
WO2016101155A1 (en) * | 2014-12-23 | 2016-06-30 | SZ DJI Technology Co., Ltd. | Uav panoramic imaging |
US11019330B2 (en) | 2015-01-19 | 2021-05-25 | Aquifi, Inc. | Multiple camera system with auto recalibration |
US9800798B2 (en) | 2015-02-13 | 2017-10-24 | Qualcomm Incorporated | Systems and methods for power optimization for imaging devices with dual cameras |
CN111061041B (zh) * | 2015-04-16 | 2021-02-26 | 核心光电有限公司 | 紧凑型折叠式相机中的自动对焦和光学图像稳定 |
US9485432B1 (en) | 2015-04-29 | 2016-11-01 | Uurmi Systems Private Limited | Methods, systems and apparatuses for dual-camera based zooming |
US20160353012A1 (en) | 2015-05-25 | 2016-12-01 | Htc Corporation | Zooming control method for camera and electronic apparatus with camera |
US10192133B2 (en) * | 2015-06-22 | 2019-01-29 | Seiko Epson Corporation | Marker, method of detecting position and pose of marker, and computer program |
CN111812910B (zh) | 2015-06-24 | 2021-05-11 | 核心光电有限公司 | 折叠式相机模块 |
CN106709899B (zh) | 2015-07-15 | 2020-06-02 | 华为终端有限公司 | 双摄像头相对位置计算方法、装置和设备 |
CN112672024B (zh) | 2015-08-13 | 2022-08-02 | 核心光电有限公司 | 视频支持和切换/无切换动态控制的双孔径变焦摄影机 |
US20170070731A1 (en) | 2015-09-04 | 2017-03-09 | Apple Inc. | Single And Multi-Camera Calibration |
US10070060B2 (en) | 2015-09-06 | 2018-09-04 | Corephotonics Ltd | Auto focus and optical image stabilization with roll compensation in a compact folded camera |
KR20170075442A (ko) | 2015-12-23 | 2017-07-03 | 삼성전자주식회사 | 촬상 장치 모듈, 이를 포함하는 사용자 단말 장치 및 촬상 장치 모듈의 작동 방법 |
KR102433623B1 (ko) * | 2015-12-29 | 2022-08-18 | 코어포토닉스 리미티드 | 자동 조정가능 텔레 시야(fov)를 갖는 듀얼-애퍼처 줌 디지털 카메라 |
US9843736B2 (en) | 2016-02-26 | 2017-12-12 | Essential Products, Inc. | Image capture with a camera integrated display |
KR20170112491A (ko) | 2016-03-31 | 2017-10-12 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
WO2017208090A1 (en) | 2016-05-30 | 2017-12-07 | Corephotonics Ltd. | Rotational ball-guided voice coil motor |
US10303042B2 (en) | 2016-07-12 | 2019-05-28 | Tdk Taiwan Corp. | Lens driving module |
CN106251305B (zh) * | 2016-07-29 | 2019-04-30 | 长春理工大学 | 一种基于惯性测量单元imu的实时电子稳像方法 |
TWM533229U (en) | 2016-08-26 | 2016-12-01 | Largan Precision Co Ltd | Optical path folding element, imaging lens module and electronic device |
CN106603765B (zh) | 2016-12-20 | 2020-03-17 | Oppo广东移动通信有限公司 | 支架组件及移动终端 |
CN106534655B (zh) | 2017-01-11 | 2019-04-16 | Oppo广东移动通信有限公司 | 摄像头模组及移动终端 |
CN113805406A (zh) | 2017-01-12 | 2021-12-17 | 核心光电有限公司 | 紧凑型折叠式摄影机及其组装方法 |
US10334149B2 (en) | 2017-02-23 | 2019-06-25 | Qualcomm Incorporated | Adjustment for cameras for low power mode operation |
JP2020512581A (ja) * | 2017-03-15 | 2020-04-23 | コアフォトニクス リミテッド | パノラマ走査範囲付きカメラ |
KR102426728B1 (ko) | 2017-04-10 | 2022-07-29 | 삼성전자주식회사 | 포커스 제어 방법 및 이를 지원하는 전자 장치 |
JP6967715B2 (ja) | 2017-04-18 | 2021-11-17 | パナソニックIpマネジメント株式会社 | カメラ校正方法、カメラ校正プログラム及びカメラ校正装置 |
CN107747941B (zh) * | 2017-09-29 | 2020-05-15 | 歌尔股份有限公司 | 一种双目视觉定位方法、装置及系统 |
US10740431B2 (en) * | 2017-11-13 | 2020-08-11 | Samsung Electronics Co., Ltd | Apparatus and method of five dimensional (5D) video stabilization with camera and gyroscope fusion |
WO2019150188A1 (en) * | 2018-02-05 | 2019-08-08 | Corephotonics Ltd. | Reduced height penalty for folded camera |
WO2019155289A1 (en) * | 2018-02-12 | 2019-08-15 | Corephotonics Ltd. | Folded camera with optical image stabilization |
US11019242B2 (en) * | 2018-06-14 | 2021-05-25 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Camera assembly and electronic device using the same, both having a decorative member mounted on a shell and comprising a decorative ring and a flange |
US11190689B1 (en) * | 2020-07-29 | 2021-11-30 | Google Llc | Multi-camera video stabilization |
-
2021
- 2021-07-22 CN CN202310685723.9A patent/CN116679420A/zh active Pending
- 2021-07-22 CN CN202310684792.8A patent/CN116679419A/zh active Pending
- 2021-07-22 US US17/614,382 patent/US11968453B2/en active Active
- 2021-07-22 EP EP21855686.8A patent/EP4038432A4/en active Pending
- 2021-07-22 KR KR1020237020587A patent/KR102598070B1/ko active IP Right Grant
- 2021-07-22 CN CN202310682624.5A patent/CN116626960A/zh active Pending
- 2021-07-22 KR KR1020217038426A patent/KR102480820B1/ko active IP Right Grant
- 2021-07-22 KR KR1020227044442A patent/KR102547198B1/ko active IP Right Grant
- 2021-07-22 CN CN202180004818.9A patent/CN114424104B/zh active Active
- 2021-07-22 KR KR1020237037379A patent/KR20230154290A/ko active IP Right Grant
- 2021-07-22 WO PCT/IB2021/056617 patent/WO2022034402A1/en unknown
-
2024
- 2024-03-18 US US18/607,757 patent/US20240244326A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2022034402A1 (en) | 2022-02-17 |
KR20230154290A (ko) | 2023-11-07 |
CN116679420A (zh) | 2023-09-01 |
KR20230004931A (ko) | 2023-01-06 |
KR102598070B1 (ko) | 2023-11-02 |
CN114424104A (zh) | 2022-04-29 |
EP4038432A4 (en) | 2022-12-14 |
KR102547198B1 (ko) | 2023-06-22 |
US20230164437A1 (en) | 2023-05-25 |
US11968453B2 (en) | 2024-04-23 |
CN114424104B (zh) | 2023-06-30 |
KR102480820B1 (ko) | 2022-12-22 |
KR20220021469A (ko) | 2022-02-22 |
KR20230093539A (ko) | 2023-06-27 |
US20240244326A1 (en) | 2024-07-18 |
CN116626960A (zh) | 2023-08-22 |
EP4038432A1 (en) | 2022-08-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107770433B (zh) | 影像获取装置及其影像平顺缩放方法 | |
CN107079086B (zh) | 用于相机的图像稳定系统及方法 | |
JP6170395B2 (ja) | 撮像装置およびその制御方法 | |
JP5163409B2 (ja) | 撮像装置、撮像方法、およびプログラム | |
US8294773B2 (en) | Image capturing apparatus and image processing method | |
JP6209002B2 (ja) | 撮像装置およびその制御方法 | |
JP4618370B2 (ja) | 撮像装置、撮像方法、およびプログラム | |
CN107113376A (zh) | 一种图像处理方法、装置及摄像机 | |
JP2022017401A (ja) | ブレ補正装置、交換レンズ及び撮像装置 | |
JP2020095069A (ja) | 撮像装置 | |
JP2023089098A (ja) | 撮像支援装置、撮像支援システム、撮像システム、撮像支援方法、及びプログラム | |
KR20160087684A (ko) | 손떨림 보정 장치를 이용한 고해상도 이미지 형성 장치 및 방법 | |
CN114424104B (zh) | 扫描折叠相机中的光学防抖 | |
CN113596322B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
US8817127B2 (en) | Image correction device for image capture device and integrated circuit for image correction device | |
JP2018197825A (ja) | 制御装置及び方法、及び撮像装置 | |
TWI639338B (zh) | 影像擷取裝置及其影像平順縮放方法 | |
JP3827108B2 (ja) | 画像振れ補正装置 | |
US20190306414A1 (en) | Moving Object Imaging System and Moving Object Imaging Method | |
WO2018180908A1 (ja) | ブレ補正装置、交換レンズおよび撮像装置 | |
WO2018180909A1 (ja) | 交換レンズおよびカメラボディ | |
JP6234335B2 (ja) | 撮像装置及び撮像装置を設置した移動体 | |
US9560340B2 (en) | Three-dimensional image pickup lens system and image pickup system including the same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |