Nothing Special   »   [go: up one dir, main page]

JP6865720B2 - Mobile objects, imaging control methods, programs, and recording media - Google Patents

Mobile objects, imaging control methods, programs, and recording media Download PDF

Info

Publication number
JP6865720B2
JP6865720B2 JP2018141602A JP2018141602A JP6865720B2 JP 6865720 B2 JP6865720 B2 JP 6865720B2 JP 2018141602 A JP2018141602 A JP 2018141602A JP 2018141602 A JP2018141602 A JP 2018141602A JP 6865720 B2 JP6865720 B2 JP 6865720B2
Authority
JP
Japan
Prior art keywords
imaging
gimbal
unit
image
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018141602A
Other languages
Japanese (ja)
Other versions
JP2020017924A (en
Inventor
崇彦 吉田
崇彦 吉田
玲▲瓏▼ 朱
玲▲瓏▼ 朱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Priority to JP2018141602A priority Critical patent/JP6865720B2/en
Publication of JP2020017924A publication Critical patent/JP2020017924A/en
Application granted granted Critical
Publication of JP6865720B2 publication Critical patent/JP6865720B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Accessories Of Cameras (AREA)
  • Studio Devices (AREA)

Description

本開示は、撮像部が搭載されたジンバル部を備える移動体、合焦制御方法、プログラム、及び記録媒体に関する。 The present disclosure relates to a moving body including a gimbal portion on which an imaging unit is mounted, a focusing control method, a program, and a recording medium.

従来、光量の少ない夜の時間帯に撮像するための撮像方法が知られている(特許文献1参照)。特許文献1の撮像装置では、シャッタボタンが押される前に撮影されたライブビュー用の画像に基づいて、撮影シーンの分類が行われる。撮影シーンが夜景シーンであると分類された場合、連写機能が自動的にONに設定され、ユーザによりシャッタボタンが1回押されることに応じて、連続して複数の画像の撮影が行われる。また、連続して撮影された複数の画像の合成処理が行われる。この合成処理は、明るく動きのある花火などを撮影している場合と、明るく動きのある花火などを背景として人物を撮影している場合とで切り替えられる。 Conventionally, an imaging method for imaging in a night time zone when the amount of light is low is known (see Patent Document 1). In the image pickup apparatus of Patent Document 1, shooting scenes are classified based on the live view image taken before the shutter button is pressed. When the shooting scene is classified as a night view scene, the continuous shooting function is automatically set to ON, and a plurality of images are continuously shot according to the user pressing the shutter button once. .. In addition, a composite process of a plurality of images taken continuously is performed. This compositing process can be switched between the case of shooting bright and moving fireworks and the case of shooting a person against the background of bright and moving fireworks.

特開2012−119858号公報Japanese Unexamined Patent Publication No. 2012-119858

特許文献1では、撮像装置がジンバルに搭載されることが考慮されていない。ジンバルは、ジンバルに搭載された搭載物(例えば撮像装置)の振れを補正し、搭載物の姿勢を安定化させる。そのため、ジンバルに搭載された撮像装置とジンバルに搭載されていない撮像装置とでは、撮像装置の振れ方が異なる。例えば、ジンバルに搭載された撮像装置は、3軸方向に対する姿勢が可変であり、振れが発生した際に振れが収束するまでに時間を要する。そのため、振れによる画質への影響が大きい夜景シーンでの撮像時には、ジンバルに搭載された撮像装置特有の画質の劣化が発生し易い。 Patent Document 1 does not consider that the imaging device is mounted on the gimbal. The gimbal corrects the runout of the load (for example, an image pickup device) mounted on the gimbal and stabilizes the posture of the load. Therefore, the vibration of the image pickup device differs between the image pickup device mounted on the gimbal and the image pickup device not mounted on the gimbal. For example, the image pickup device mounted on the gimbal has a variable posture in three axial directions, and when a shake occurs, it takes time for the shake to converge. Therefore, when imaging in a night scene where the image quality is greatly affected by the shake, deterioration of the image quality peculiar to the image pickup device mounted on the gimbal is likely to occur.

一態様において、撮像部と、撮像部が搭載され撮像部の振れを補正するジンバル部と、を備える移動体であって、ジンバル部は、相互に直交する3軸の少なくとも1つの回転軸を中心に、撮像部を回転自在に支持し、3軸の少なくとも1つの回転軸を中心に、撮像部を回転させるモータを備え、撮像部により画像が撮像される撮像シーンが夜景シーンであるか否かを判定し、撮像部により撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定し、撮像シーンが夜景シーンであり、撮像モードが静止画撮像モードである場合、モータの回転許容量を小さくするよう制御し、撮像部で得られる画像信号の増幅量を小さくするよう撮像部に指示し、撮像部のシャッタスピードを遅くするよう撮像部に指示する。 In one aspect, it is a moving body including an imaging unit and a gimbal unit on which the imaging unit is mounted and corrects the runout of the imaging unit, and the gimbal unit is centered on at least one rotation axis of three axes orthogonal to each other. In addition, a motor that rotatably supports the imaging unit and rotates the imaging unit around at least one of the three axes is provided, and whether or not the imaging scene in which the image is captured by the imaging unit is a night view scene. Is determined, and whether or not the imaging mode for imaging by the imaging unit is the still image imaging mode for capturing a still image is determined, the imaging scene is a night scene, and the imaging mode is the still image imaging mode. In some cases, the motor is controlled to reduce the allowable rotation amount, the image pickup unit is instructed to reduce the amplification amount of the image signal obtained by the image pickup unit, and the image pickup unit is instructed to slow down the shutter speed of the image pickup unit.

撮像部は、ジンバル部により制御された回転許容量で、静止画を撮像してよい。ジンバル部は、ジンバル部により制御された回転許容量を、ジンバル部により制御される前の状態に復帰してよい。 The imaging unit may capture a still image with a rotation allowance controlled by the gimbal unit. The gimbal portion may return the rotation allowance controlled by the gimbal portion to the state before being controlled by the gimbal portion.

撮像部は、ジンバル部により指示された画像信号の増幅量及びシャッタスピードで、静止画を撮像してよい。ジンバル部は、ジンバル部により指示された画像信号の増幅量及びシャッタスピードを、ジンバル部により指示される前の状態に復帰する。 The imaging unit may capture a still image with the amplification amount and shutter speed of the image signal instructed by the gimbal unit. The gimbal unit returns the amplification amount and shutter speed of the image signal instructed by the gimbal unit to the state before being instructed by the gimbal unit.

ジンバル部は、撮像部により撮像されたライブビュー画像の輝度に基づいて、夜景シーンであるか否かを判定してよい。 The gimbal unit may determine whether or not it is a night view scene based on the brightness of the live view image captured by the imaging unit.

移動体は、ユーザにより把持される把持部、を更に備えてよい。 The moving body may further include a grip portion that is gripped by the user.

移動体は、移動体の飛行を制御する制御部、を更に備えてよい。 The moving body may further include a control unit that controls the flight of the moving body.

一態様において、撮像制御方法は、撮像部と、撮像部が搭載され、撮像部の振れを補正し、相互に直交する3軸の少なくとも1つの回転軸を中心に撮像部を回転自在に支持し、3軸の少なくとも1つの回転軸を中心に撮像部を回転させるモータを備えるジンバル部と、を備える移動体における撮像制御方法であって、撮像部により画像が撮像される撮像シーンが夜景シーンであるか否かを判定するステップと、撮像部により撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定するステップと、撮像シーンが夜景シーンであり、撮像モードが静止画撮像モードである場合、モータの回転許容量を小さくし、撮像部で得られる画像信号の増幅量を小さくし、撮像部のシャッタスピードを遅くするよう制御するステップと、を有する。 In one aspect, the imaging control method includes an imaging unit and an imaging unit, corrects the runout of the imaging unit, and rotatably supports the imaging unit around at least one of three axes that are orthogonal to each other. This is an imaging control method for a moving body including a gimbal unit including a motor that rotates an imaging unit around at least one of three rotation axes, and an imaging scene in which an image is captured by the imaging unit is a night view scene. A step of determining whether or not there is a step, a step of determining whether or not the imaging mode for imaging by the imaging unit is a still image imaging mode for capturing a still image, and a step of determining whether or not the imaging scene is a night view scene. When the imaging mode is the still image imaging mode, it has a step of reducing the rotation allowance of the motor, reducing the amplification amount of the image signal obtained by the imaging unit, and controlling the shutter speed of the imaging unit to be slowed down. ..

撮像制御方法は、制御された回転許容量で、静止画を撮像するステップと、制御された回転許容量を、制御される前の状態に復帰するステップと、を更に含んでよい。 The imaging control method may further include a step of capturing a still image with a controlled rotation allowance and a step of returning the controlled rotation allowance to a state before being controlled.

撮像制御方法は、制御された画像信号の増幅量及びシャッタスピードで、静止画を撮像するステップと、制御された画像信号の増幅量及びシャッタスピードを、指示される前の状態に復帰するステップと、更に含んでよい。 The imaging control method includes a step of capturing a still image with a controlled image signal amplification amount and a shutter speed, and a step of returning the controlled image signal amplification amount and the shutter speed to the state before being instructed. , Further may be included.

夜景シーンであるか否かを判定するステップは、撮像部により撮像されたライブビュー画像の輝度に基づいて、夜景シーンであるか否かを判定してよい。 The step of determining whether or not it is a night view scene may determine whether or not it is a night view scene based on the brightness of the live view image captured by the imaging unit.

一態様において、プログラムは、撮像部と、撮像部が搭載され、撮像部の振れを補正し、相互に直交する3軸の少なくとも1つの回転軸を中心に撮像部を回転自在に支持し、3軸の少なくとも1つの回転軸を中心に撮像部を回転させるモータを備えるジンバル部と、を備える移動体に、撮像部により画像が撮像される撮像シーンが夜景シーンであるか否かを判定するステップと、撮像部により撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定するステップと、撮像シーンが夜景シーンであり、撮像モードが静止画撮像モードである場合、モータの回転許容量を小さくし、撮像部で得られる画像信号の増幅量を小さくし、撮像部のシャッタスピードを遅くするよう制御するステップと、を実行させるためのプログラムである。 In one aspect, the program includes an imaging unit and an imaging unit, corrects the runout of the imaging unit, and rotatably supports the imaging unit around at least one of three axes that are orthogonal to each other. A step of determining whether or not the imaging scene in which an image is captured by the imaging unit on a moving body including a gimbal portion including a motor that rotates the imaging unit around at least one rotation axis of the axis is a night view scene. The step of determining whether or not the imaging mode for imaging by the imaging unit is the still image imaging mode for capturing a still image, the imaging scene is a night scene, and the imaging mode is the still image imaging mode. In some cases, it is a program for executing a step of reducing the rotation allowance of the motor, reducing the amplification amount of the image signal obtained by the imaging unit, and controlling the shutter speed of the imaging unit to be slowed down.

一態様において、記録媒体は、撮像部と、撮像部が搭載され、撮像部の振れを補正し、相互に直交する3軸の少なくとも1つの回転軸を中心に撮像部を回転自在に支持し、3軸の少なくとも1つの回転軸を中心に撮像部を回転させるモータを備えるジンバル部と、を備える移動体に、撮像部により画像が撮像される撮像シーンが夜景シーンであるか否かを判定するステップと、撮像部により撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定するステップと、撮像シーンが夜景シーンであり、撮像モードが静止画撮像モードである場合、モータの回転許容量を小さくし、撮像部で得られる画像信号の増幅量を小さくし、撮像部のシャッタスピードを遅くするよう制御するステップと、を実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体である。 In one aspect, the recording medium includes an imaging unit and an imaging unit, corrects the runout of the imaging unit, and rotatably supports the imaging unit around at least one of three axes that are orthogonal to each other. It is determined whether or not the imaging scene in which the image is captured by the imaging unit on the moving body including the gimbal portion including the motor that rotates the imaging unit around at least one of the three rotation axes is a night view scene. The step, the step of determining whether or not the imaging mode for imaging by the imaging unit is the still image imaging mode for capturing a still image, the imaging scene is a night view scene, and the imaging mode is the still image imaging mode. In the case of, a program for executing a step of reducing the rotation allowance of the motor, reducing the amplification amount of the image signal obtained by the imaging unit, and controlling the shutter speed of the imaging unit to be slowed down was recorded. It is a computer-readable recording medium.

なお、上記の発明の概要は、本開示の特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。 The outline of the above invention does not list all the features of the present disclosure. Sub-combinations of these feature groups can also be inventions.

実施形態におけるジンバルカメラ装置の外観を示す斜視図A perspective view showing the appearance of the gimbal camera device according to the embodiment. ジンバルカメラ装置のハードウェア構成を示すブロック図Block diagram showing the hardware configuration of the gimbal camera device ジンバルカメラ装置の動作例を示すフローチャートFlow chart showing an operation example of the gimbal camera device 他のジンバルカメラ装置の外観例を示す斜視図Perspective view showing an external example of another gimbal camera device ジンバルが搭載された無人航空機の外観例を示す斜視図Perspective view showing an example of the appearance of an unmanned aerial vehicle equipped with a gimbal

以下、発明の実施形態を通じて本開示を説明するが、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須とは限らない。 Hereinafter, the present disclosure will be described through embodiments of the invention, but the following embodiments do not limit the invention according to the claims. Not all combinations of features described in the embodiments are essential to the solution of the invention.

特許請求の範囲、明細書、図面、及び要約書には、著作権による保護の対象となる事項が含まれる。著作権者は、これらの書類の何人による複製に対しても、特許庁のファイル又はレコードに表示される通りであれば異議を唱えない。ただし、それ以外の場合、一切の著作権を留保する。 The claims, description, drawings, and abstracts include matters that are subject to copyright protection. The copyright holder will not object to any person's reproduction of these documents as long as they appear in the Patent Office files or records. However, in other cases, all copyrights are reserved.

以下の実施形態では、移動体として、撮像者が手に把持して撮像するジンバルカメラ装置を例示する。ジンバルカメラ装置は、無人航空機に搭載されたジンバルカメラ装置でもよい。撮像制御方法は、移動体の動作が規定されたものである。また、記録媒体は、プログラム(例えば移動体に各種の処理を実行させるプログラム)が記録されたものである。 In the following embodiment, a gimbal camera device that the imager holds in his / her hand to take an image is illustrated as a moving body. The gimbal camera device may be a gimbal camera device mounted on an unmanned aerial vehicle. The image pickup control method defines the operation of the moving body. Further, the recording medium is a recording medium in which a program (for example, a program for causing a moving body to execute various processes) is recorded.

図1は、実施形態におけるジンバルカメラ装置10の外観を示す斜視図である。ジンバルカメラ装置10は、ジンバル20と、カメラ30と、モニタ55と、装置本体60とを含む構成を有する。 FIG. 1 is a perspective view showing the appearance of the gimbal camera device 10 according to the embodiment. The gimbal camera device 10 has a configuration including a gimbal 20, a camera 30, a monitor 55, and a device main body 60.

装置本体60は、例えば略円柱状に形成された部材である。装置本体60の上端には、ジンバル20が着脱自在に装着される。装置本体60の図中左側面には、モニタ50を取付可能な取付部63が設けられる。装置本体60の右側面には、三脚に取り付けられる雌ねじ部(図示せず)が形成される。 The device main body 60 is, for example, a member formed in a substantially columnar shape. A gimbal 20 is detachably attached to the upper end of the apparatus main body 60. A mounting portion 63 to which the monitor 50 can be mounted is provided on the left side surface of the apparatus main body 60 in the drawing. A female screw portion (not shown) to be attached to a tripod is formed on the right side surface of the apparatus main body 60.

また、装置本体60の上部正面には、前方に傾斜した操作面610が形成される。操作面610には、各種ボタンやインジケータ614が配置される。各種ボタンは、シャッタボタン611、録画ボタン612及び操作ボタン613を含む。装置本体60の中央下部は、撮像者の手で把持される把持部620に形成される。シャッタボタン611は、静止画の撮像を指示する。録画ボタン612は、動画の撮像を指示する。録画ボタン612は、動画の撮像の停止を指示してもよい。 Further, an operation surface 610 inclined forward is formed on the upper front surface of the apparatus main body 60. Various buttons and indicators 614 are arranged on the operation surface 610. The various buttons include a shutter button 611, a recording button 612, and an operation button 613. The lower center of the apparatus main body 60 is formed in a grip portion 620 that is gripped by the imager's hand. The shutter button 611 instructs the image capture of a still image. The record button 612 instructs the image capture of the moving image. The recording button 612 may instruct to stop the imaging of the moving image.

ジンバル20は、カメラ30が搭載され、カメラ30の振れを補正する。ジンバル20は、カメラ30の姿勢を3軸方向(ロール軸、ピッチ軸、ヨー軸)において可変自在に支持する。ジンバル20は、ジンバル部の一例である。ジンバル20は、装置本体60の上端部に設けられた取付部210に取り付けられる。取付部210には、ジンバル20と装置本体60との係合を解除する解除ボタン211が設けられる。 The gimbal 20 is equipped with a camera 30 and corrects the runout of the camera 30. The gimbal 20 variably supports the posture of the camera 30 in three axial directions (roll axis, pitch axis, yaw axis). The gimbal 20 is an example of a gimbal portion. The gimbal 20 is attached to an attachment portion 210 provided at the upper end portion of the apparatus main body 60. The mounting portion 210 is provided with a release button 211 that disengages the gimbal 20 from the device body 60.

ジンバル20は、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217を有する。ヨー軸モータ215は、装置本体60の上端に配置される。ロール軸モータ216は、アーム部材221を介してヨー軸モータ215に取り付けられる。ピッチ軸モータ217は、アーム部材222を介してロール軸モータ216に取り付けられる。ジンバル20は、ヨー軸、ピッチ軸、及びロール軸を中心にカメラ30を回転可能に支持してよい。 The gimbal 20 includes a yaw axis motor 215, a roll axis motor 216, and a pitch axis motor 217. The yaw axis motor 215 is arranged at the upper end of the apparatus main body 60. The roll shaft motor 216 is attached to the yaw shaft motor 215 via the arm member 221. The pitch shaft motor 217 is attached to the roll shaft motor 216 via the arm member 222. The gimbal 20 may rotatably support the camera 30 about a yaw axis, a pitch axis, and a roll axis.

ロール軸(図1のx軸参照)は、光軸Ocに一致してよく、前後方向に沿って設定される回転軸である。ピッチ軸(図1のy軸参照)は、ロール軸に垂直な方向に設定され、左右方向に沿って設定される回転軸である。ヨー軸(図1のz軸参照)は、ロール軸及びピッチ軸に垂直な方向に設定され、上下方向に設定される回転軸である。ロール軸、ピッチ軸及びヨー軸は、相互に直交する3軸の一例である。 The roll axis (see the x-axis in FIG. 1) may coincide with the optical axis Occ and is a rotation axis set along the front-rear direction. The pitch axis (see the y-axis in FIG. 1) is a rotation axis set in a direction perpendicular to the roll axis and set along the left-right direction. The yaw axis (see the z-axis in FIG. 1) is a rotation axis set in a direction perpendicular to the roll axis and the pitch axis and set in the vertical direction. The roll axis, pitch axis, and yaw axis are examples of three axes that are orthogonal to each other.

ヨー軸モータ215は、ヨー軸周りにカメラ30が回転するための駆動力を供給する。カメラ30は、ヨー軸モータ215の駆動力により、ヨー軸を中心に回転自在である。よって、ヨー軸モータ215は、ヨー軸周りにカメラ30を回転させるロータとして動作する。 The yaw axis motor 215 supplies a driving force for rotating the camera 30 around the yaw axis. The camera 30 is rotatable about the yaw axis by the driving force of the yaw axis motor 215. Therefore, the yaw axis motor 215 operates as a rotor that rotates the camera 30 around the yaw axis.

ロール軸モータ216は、ロール軸周りにカメラ30が回転するための駆動力を供給する。カメラ30は、ロール軸モータ216の駆動力により、ロール軸を中心に回転自在である。よって、ロール軸モータ216は、ヨー軸周りにカメラ30を回転させるロータとして動作する。 The roll axis motor 216 supplies a driving force for rotating the camera 30 around the roll axis. The camera 30 is rotatable about the roll axis by the driving force of the roll axis motor 216. Therefore, the roll axis motor 216 operates as a rotor that rotates the camera 30 around the yaw axis.

ピッチ軸モータ217は、ピッチ軸周りにカメラ30が回転するための駆動力を供給する。カメラ30は、ピッチ軸モータ217の駆動力により、ピッチ軸を中心に回転自在である。よって、ピッチ軸モータ217は、ピッチ軸周りにカメラ30を回転させるロータとして動作する。 The pitch axis motor 217 supplies a driving force for rotating the camera 30 around the pitch axis. The camera 30 is rotatable about the pitch axis by the driving force of the pitch axis motor 217. Therefore, the pitch axis motor 217 operates as a rotor that rotates the camera 30 around the pitch axis.

ジンバル20は、ヨー軸、ピッチ軸、及びロール軸の少なくとも1つを中心にカメラ30を回転させることで、カメラ30の撮像方向を変更してよい。この場合、ジンバル20は、把持部620を把持するユーザがカメラ30の向きを変更することで、カメラ30の撮像方向を変更してよい。ジンバル20は、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217の駆動により、カメラ30の撮像方向を変更してよい。ジンバル20は、手振れ等の外力に起因して、カメラ30の撮像方向が変化し得る。 The gimbal 20 may change the imaging direction of the camera 30 by rotating the camera 30 around at least one of the yaw axis, the pitch axis, and the roll axis. In this case, the gimbal 20 may change the imaging direction of the camera 30 by changing the direction of the camera 30 by the user who grips the grip portion 620. The gimbal 20 may change the imaging direction of the camera 30 by driving the yaw axis motor 215, the roll axis motor 216, and the pitch axis motor 217. The gimbal 20 may change the imaging direction of the camera 30 due to an external force such as camera shake.

ジンバル20は、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217を駆動し、被写体に対するカメラ30の向きが振れないように、ヨー軸、ロール軸及びピッチ軸の3軸方向にカメラ30を回転自在に支持してよい。つまり、ジンバル20は、カメラ30の向き(姿勢)を安定化させるスタビライザ機能を有する。なお、ここでは、3軸方向で姿勢を調整可能とすることを例示するが、3軸方向のいずれか2軸方向で姿勢を調整可能としてもよいし、1軸方向のみで姿勢を調整可能としてもよい。 The gimbal 20 drives the yaw axis motor 215, the roll axis motor 216, and the pitch axis motor 217, and moves the camera 30 in three axial directions of the yaw axis, the roll axis, and the pitch axis so that the direction of the camera 30 with respect to the subject does not swing. It may be rotatably supported. That is, the gimbal 20 has a stabilizer function that stabilizes the orientation (posture) of the camera 30. Here, it is illustrated that the posture can be adjusted in the three-axis direction, but the posture may be adjusted in any two-axis direction of the three-axis direction, or the posture can be adjusted only in the one-axis direction. May be good.

また、ジンバル20は、各モータがカメラ30に駆動力を供給しない場合でも、機構的に、3軸(ロール軸、ピッチ軸、ヨー軸)周りに回転自在である。また、各モータからの駆動力がなくカメラ30に対する外力を受けない場合、カメラ30は、3軸方向のそれぞれにおいて、基準方向を向く姿勢が維持されてよい。基準方向は、予め定められた方向でよい。 Further, the gimbal 20 is mechanically rotatable around three axes (roll axis, pitch axis, yaw axis) even when each motor does not supply a driving force to the camera 30. Further, when there is no driving force from each motor and no external force is received from the camera 30, the camera 30 may be maintained in a posture facing the reference direction in each of the three axial directions. The reference direction may be a predetermined direction.

カメラ30は、被写体を撮像可能な撮像部を内蔵し、ロール軸モータ216及びピッチ軸モータ217によって回転自在に支持される筐体311を有する。カメラ30は、所望の撮像範囲に含まれる被写体(例えば、人物、山や川等の景色、建物、物品)を撮像する撮像用のカメラでよい。 The camera 30 has a built-in image pickup unit capable of photographing a subject, and has a housing 311 rotatably supported by a roll axis motor 216 and a pitch axis motor 217. The camera 30 may be a camera for imaging that captures a subject (for example, a person, a landscape such as a mountain or a river, a building, or an article) included in a desired imaging range.

モニタ50は、カメラ30で撮像された画像(例えば、静止画、動画)を表示する。なお、モニタ50は、オプションとして、交換自在に取り付けられてよい。ここでは、モニタ50には、カメラ30と無線通信可能な携帯端末(スマートフォン)が用いられてよい。なお、モニタ50が設けられなくてもよい。 The monitor 50 displays an image (for example, a still image or a moving image) captured by the camera 30. The monitor 50 may be replaceably attached as an option. Here, as the monitor 50, a mobile terminal (smartphone) capable of wirelessly communicating with the camera 30 may be used. The monitor 50 may not be provided.

図2は、ジンバルカメラ装置10のハードウェア構成を示すブロック図である。ジンバルカメラ装置10は、ジンバル20と、カメラ30と、モニタ50とを含む構成を有する。ジンバル20は、ジンバル制御部21、メモリ22、慣性計測装置23、角度検出器24、ヨー軸回転機構25、ピッチ軸回転機構26、ロール軸回転機構27、インタフェース28及び操作部29を有する。 FIG. 2 is a block diagram showing a hardware configuration of the gimbal camera device 10. The gimbal camera device 10 has a configuration including a gimbal 20, a camera 30, and a monitor 50. The gimbal 20 includes a gimbal control unit 21, a memory 22, an inertial measurement unit 23, an angle detector 24, a yaw axis rotation mechanism 25, a pitch axis rotation mechanism 26, a roll axis rotation mechanism 27, an interface 28, and an operation unit 29.

メモリ22は、各種データ、情報、ジンバル制御部21が実行可能なプログラム、カメラ30による撮像画像の画像データ、撮像画像に関する付加データ(メタデータ)、等を記憶してよい。メモリ22は、例えば、RAM(Random Access Memory)、ROM(Read-Only Memory)、SDカード、その他のメモリ、を含んでよい。 The memory 22 may store various data, information, a program that can be executed by the gimbal control unit 21, image data of an image captured by the camera 30, additional data (metadata) related to the captured image, and the like. The memory 22 may include, for example, a RAM (Random Access Memory), a ROM (Read-Only Memory), an SD card, or other memory.

慣性計測装置23は、ジンバルカメラ装置10の前後、左右、及び上下の3軸方向の加速度と、ピッチ軸、ロール軸、及びヨー軸の3軸方向の角速度とを検出して取得する。慣性計測装置23は、磁束の変化を検出するホールセンサや、ジンバルカメラ装置10の姿勢(傾き)を検出するジャイロセンサを有してよい。なお、慣性計測装置23の代わりに、加速度センサが用いられてよい。 The inertial measurement unit 23 detects and acquires the acceleration in the three axial directions of the front / rear, left / right, and up / down of the gimbal camera device 10 and the angular velocities in the three axial directions of the pitch axis, the roll axis, and the yaw axis. The inertial measurement unit 23 may include a hall sensor that detects a change in magnetic flux and a gyro sensor that detects the posture (tilt) of the gimbal camera device 10. An acceleration sensor may be used instead of the inertial measurement unit 23.

角度検出器24は、例えば、ジンバルカメラ装置10の向きとして、ピッチ軸、ロール軸、及びヨー軸の3軸方向の角度を検出する。検出される角度は、基準方向に対する角度でよい。 The angle detector 24 detects, for example, the angles of the pitch axis, the roll axis, and the yaw axis in the three axial directions as the direction of the gimbal camera device 10. The detected angle may be an angle with respect to the reference direction.

したがって、ジンバル制御部21は、角度検出器24により検出された角度と、この角度の変化に要した時間を基に、角速度を算出して取得してよい。また、ジンバル制御部21は、慣性計測装置23から角速度を取得してよい。また、ジンバル制御部21は、角度検出器24から角度を取得してよい。ジンバル制御部21は、慣性計測装置23から取得された角速度を積分し、角度を取得してよい。 Therefore, the gimbal control unit 21 may calculate and acquire the angular velocity based on the angle detected by the angle detector 24 and the time required for the change of the angle. Further, the gimbal control unit 21 may acquire the angular velocity from the inertial measurement unit 23. Further, the gimbal control unit 21 may acquire an angle from the angle detector 24. The gimbal control unit 21 may integrate the angular velocity acquired from the inertial measurement unit 23 to acquire the angle.

ヨー軸回転機構25は、カメラ30をヨー軸方向に駆動するヨー軸モータ215を含む。ヨー軸回転機構25は、ヨー軸を中心に(ヨー軸周りに)カメラ30を回転自在に支持する。ピッチ軸回転機構26は、カメラ30をピッチ軸方向に駆動するピッチ軸モータ217を含む。ピッチ軸回転機構26は、ピッチ軸を中心に(ピッチ軸周りに)カメラ30を回転自在に支持する。ロール軸回転機構27は、カメラ30をロール軸方向に駆動するロール軸モータ216を含む。ロール軸回転機構27は、ロール軸を中心に(ロール軸周りに)カメラ30を回転自在に支持する。 The yaw axis rotation mechanism 25 includes a yaw axis motor 215 that drives the camera 30 in the yaw axis direction. The yaw axis rotation mechanism 25 rotatably supports the camera 30 around the yaw axis (around the yaw axis). The pitch axis rotation mechanism 26 includes a pitch axis motor 217 that drives the camera 30 in the pitch axis direction. The pitch axis rotation mechanism 26 rotatably supports the camera 30 around the pitch axis (around the pitch axis). The roll axis rotation mechanism 27 includes a roll axis motor 216 that drives the camera 30 in the roll axis direction. The roll axis rotation mechanism 27 rotatably supports the camera 30 around the roll axis (around the roll axis).

インタフェース28は、入力装置、出力装置、記録媒体、等の外部機器を接続可能である。インタフェース28は、有線通信又は無線通信するための通信インタフェースを含んでよい。有線通信は、USB(Universal Serial Bus)ケーブルを介した通信を含んでよい。無線通信用の通信インタフェースは、無線LAN(Local Area Network)、Bluetooth(登録商標)、又は公衆無線回線を介した通信を含んでよい。 The interface 28 can be connected to external devices such as an input device, an output device, and a recording medium. The interface 28 may include a communication interface for wired or wireless communication. Wired communication may include communication via a USB (Universal Serial Bus) cable. The communication interface for wireless communication may include communication via a wireless LAN (Local Area Network), Bluetooth®, or a public wireless line.

操作部29は、操作面610に配置された各種ボタンを含む。操作部29は、各種ボタン、キー、タッチパッド、タッチパネルを含んでよい。操作部29は、ユーザからの操作を受け、操作に関する操作信号をジンバル制御部21へ出力する。 The operation unit 29 includes various buttons arranged on the operation surface 610. The operation unit 29 may include various buttons, keys, a touch pad, and a touch panel. The operation unit 29 receives an operation from the user and outputs an operation signal related to the operation to the gimbal control unit 21.

ジンバル制御部21は、例えばCPU(Central Processing Unit)、MPU(Micro Processing Unit)又はDSP(Digital Signal Processor)を用いて構成される。ジンバル制御部21は、ジンバル20の各部の動作を統括して制御するための信号処理、他の各部との間のデータの入出力処理、データの演算処理及びデータの記憶処理を行う。 The gimbal control unit 21 is configured by using, for example, a CPU (Central Processing Unit), an MPU (Micro Processing Unit), or a DSP (Digital Signal Processor). The gimbal control unit 21 performs signal processing for controlling the operation of each part of the gimbal 20 in a centralized manner, data input / output processing with and from other parts, data calculation processing, and data storage processing.

ジンバル制御部21は、カメラ30の撮像範囲を示す撮像範囲情報を取得してよい。ジンバル制御部21は、撮像範囲を特定するためのパラメータとして、カメラ30の画角を示す画角情報をカメラ30から取得してよい。ジンバル制御部21は、撮像範囲を特定するためのパラメータとして、カメラ30の撮像方向を示す情報を取得してよい。ジンバル制御部21は、例えばカメラ30の撮像方向を示す情報として、カメラ30の姿勢の状態を示す姿勢情報を取得してよい。カメラ30の姿勢情報は、ジンバル20のロール軸、ピッチ軸、及びヨー軸の基準回転角度からの回転角度を示してよい。ジンバル制御部21は、ジンバル制御部21は、カメラ30の画角及び撮像方向に基づいて、カメラ30が撮像する撮像範囲を画定し、撮像範囲情報を生成してよい。 The gimbal control unit 21 may acquire image pickup range information indicating the image pickup range of the camera 30. The gimbal control unit 21 may acquire the angle of view information indicating the angle of view of the camera 30 from the camera 30 as a parameter for specifying the imaging range. The gimbal control unit 21 may acquire information indicating the imaging direction of the camera 30 as a parameter for specifying the imaging range. The gimbal control unit 21 may acquire posture information indicating the posture state of the camera 30, for example, as information indicating the imaging direction of the camera 30. The posture information of the camera 30 may indicate the rotation angle of the gimbal 20 from the reference rotation angle of the roll axis, the pitch axis, and the yaw axis. The gimbal control unit 21 may generate image pickup range information by defining an image pickup range to be imaged by the camera 30 based on the angle of view and the image pickup direction of the camera 30.

ジンバル制御部21は、カメラ30の撮像方向又は画角を変更することによって、カメラ30の撮像範囲を制御してよい。ジンバル制御部21は、ジンバル20の回転機構(ヨー軸回転機構25、ピッチ軸回転機構26、ロール軸回転機構27)を制御することで、ジンバル20に支持されているカメラ30の撮像範囲を制御してよい。 The gimbal control unit 21 may control the imaging range of the camera 30 by changing the imaging direction or the angle of view of the camera 30. The gimbal control unit 21 controls the imaging range of the camera 30 supported by the gimbal 20 by controlling the rotation mechanism of the gimbal 20 (yaw axis rotation mechanism 25, pitch axis rotation mechanism 26, roll axis rotation mechanism 27). You can do it.

撮像範囲とは、撮像部220又は撮像部230により撮像される地理的な範囲でよい。撮像範囲は、3次元空間データにおける範囲でよいし、2次元空間データにおける範囲でもよい。撮像範囲は、カメラ30の画角及び撮像方向に基づいて特定されてよい。カメラ30の撮像方向は、カメラ30の撮像レンズが設けられた正面が向く方向でよい。撮像部220の撮像方向は、ジンバル20に対するカメラ30の姿勢の状態とから特定される方向でよい。 The imaging range may be a geographical range imaged by the imaging unit 220 or the imaging unit 230. The imaging range may be a range in three-dimensional spatial data or a range in two-dimensional spatial data. The imaging range may be specified based on the angle of view and the imaging direction of the camera 30. The imaging direction of the camera 30 may be the direction in which the front surface of the camera 30 provided with the imaging lens faces. The imaging direction of the imaging unit 220 may be a direction specified from the state of the posture of the camera 30 with respect to the gimbal 20.

ジンバル制御部21は、カメラ30により撮像された複数の画像を解析することで、ジンバルカメラ装置10の周囲の環境(例えば、人物、建物、風景等の被写体までの距離、朝昼夜等の時間帯)を特定してよい。ジンバル制御部21は、周囲の環境に基づいて、カメラ30の撮像モードを決定してよい。 The gimbal control unit 21 analyzes a plurality of images captured by the camera 30 to analyze the environment around the gimbal camera device 10 (for example, the distance to a subject such as a person, a building, or a landscape, a time zone such as morning, day, or night). ) May be specified. The gimbal control unit 21 may determine the imaging mode of the camera 30 based on the surrounding environment.

ジンバル制御部21は、カメラ30の撮像方向を示す情報として、ジンバル20からカメラ30の姿勢の状態を示す姿勢情報を取得してよい。カメラ30の姿勢情報は、ジンバル20のピッチ軸及びヨー軸の基準回転角度からの回転角度を示してよい。回転角度は、角度検出器24から取得されてよい。ジンバル制御部21は、ジンバル20の回転機構を制御することで、ジンバル20に支持されているカメラ30の撮像範囲を制御してよい。 The gimbal control unit 21 may acquire posture information indicating the posture state of the camera 30 from the gimbal 20 as information indicating the imaging direction of the camera 30. The posture information of the camera 30 may indicate the rotation angle of the gimbal 20 from the reference rotation angle of the pitch axis and the yaw axis. The rotation angle may be obtained from the angle detector 24. The gimbal control unit 21 may control the imaging range of the camera 30 supported by the gimbal 20 by controlling the rotation mechanism of the gimbal 20.

ジンバル制御部21は、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217の少なくとも1つを駆動するための駆動電力(駆動電圧)を制御してよい。つまり、ジンバル制御部21は、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217の少なくとも1つに印加される印加電力(印加電圧)を制御してよい。駆動電圧が高い程、各モータの回転角度を細かく調整でき(例えば0.01度毎)、駆動電圧が高い程、各モータの回転角度を大まかに調整できる(例えば0.1度毎)。 The gimbal control unit 21 may control the drive power (drive voltage) for driving at least one of the yaw axis motor 215, the roll axis motor 216, and the pitch axis motor 217. That is, the gimbal control unit 21 may control the applied power (applied voltage) applied to at least one of the yaw axis motor 215, the roll axis motor 216, and the pitch axis motor 217. The higher the drive voltage, the finer the rotation angle of each motor can be adjusted (for example, every 0.01 degrees), and the higher the drive voltage, the more roughly the rotation angle of each motor can be adjusted (for example, every 0.1 degrees).

ジンバル制御部21は、慣性計測装置23又は角度検出器24により導出(例えば検出、算出)された角度に基づいて、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217の少なくとも1つの駆動を制御してよい。つまり、ジンバル制御部21は、導出された角度に応じて、3軸方向におけるカメラ30の姿勢を調整してよい。 The gimbal control unit 21 drives at least one of the yaw axis motor 215, the roll axis motor 216, and the pitch axis motor 217 based on the angle derived (for example, detected and calculated) by the inertial measurement unit 23 or the angle detector 24. You may control it. That is, the gimbal control unit 21 may adjust the posture of the camera 30 in the three-axis directions according to the derived angle.

ジンバル制御部21は、例えば、カメラ30の姿勢(角度)がロール軸周りに角度A(度)分変化した場合、この角度の変化を相殺するように、又は角度の変化が許容量の範囲内となるように、少なくとも1つのモータを駆動し、カメラ30の姿勢を制御してよい。角度の変化の許容量は、固定値でも可変値でもよい。このように、ジンバル制御部21は、角度に応じて、カメラ30の振れ(姿勢の変化)に対する振れ補正を行ってよい。 For example, when the posture (angle) of the camera 30 changes by the angle A (degrees) around the roll axis, the gimbal control unit 21 offsets the change in the angle, or the change in the angle is within the permissible amount. At least one motor may be driven to control the posture of the camera 30 so as to be. The allowable amount of change in angle may be a fixed value or a variable value. In this way, the gimbal control unit 21 may perform shake correction for the shake (change in posture) of the camera 30 according to the angle.

ジンバル制御部21は、慣性計測装置23又は角度検出器24により導出(例えば検出、算出)された角速度に基づいて、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217の少なくとも1つの駆動を制御してよい。つまり、ジンバル制御部21は、導出された角速度に応じて、3軸方向におけるカメラ30の姿勢を調整してよい。 The gimbal control unit 21 drives at least one of the yaw axis motor 215, the roll axis motor 216, and the pitch axis motor 217 based on the angular velocity derived (for example, detected and calculated) by the inertial measurement unit 23 or the angle detector 24. You may control it. That is, the gimbal control unit 21 may adjust the posture of the camera 30 in the three-axis directions according to the derived angular velocity.

例えば、カメラ30の姿勢(角度)がロール軸周りに角速度B(度/秒)分変化した場合、ジンバル制御部21は、この角速度の変化を相殺するように、又は角速度の変化が許容量の範囲内となるように、少なくとも1つのモータを駆動し、カメラ30の姿勢を制御してよい。角速度の変化の許容量は、固定値でも可変値でもよい。このように、ジンバル制御部21は、角速度に応じて、カメラ30の振れ(姿勢の変化)に対する振れ補正を行ってよい。 For example, when the posture (angle) of the camera 30 changes by the angular velocity B (degrees / second) around the roll axis, the gimbal control unit 21 cancels the change in the angular velocity or allows the change in the angular velocity to be an allowable amount. At least one motor may be driven to control the posture of the camera 30 so as to be within the range. The permissible amount of change in angular velocity may be a fixed value or a variable value. In this way, the gimbal control unit 21 may perform shake correction for the shake (change in posture) of the camera 30 according to the angular velocity.

ジンバル制御部21は、操作部29による操作に基づいて、撮像方向や撮像範囲を変更してよい。 The gimbal control unit 21 may change the imaging direction and the imaging range based on the operation by the operation unit 29.

ジンバル制御部21は、操作部29の十字キー入力を介して、カメラ30を上下左右に回転させてよい。操作部29により上下方向に移動を指示した場合、ジンバル制御部21は、ピッチ軸を中心に回転するよう、ピッチ軸モータ217の回転を制御してよい。操作部29により左右方向に移動を指示した場合、ジンバル制御部21は、ヨー軸を中心に回転するよう、ヨー軸モータ215の回転を制御してよい。よって、ジンバル制御部21は、操作部29の十字キーの操作に応じて、上下左右方向に撮像方向を変更可能である。撮像方向が変化することで、撮像範囲が変化する。 The gimbal control unit 21 may rotate the camera 30 up / down / left / right via the cross key input of the operation unit 29. When the operation unit 29 instructs the movement in the vertical direction, the gimbal control unit 21 may control the rotation of the pitch axis motor 217 so as to rotate around the pitch axis. When the operation unit 29 instructs the movement in the left-right direction, the gimbal control unit 21 may control the rotation of the yaw axis motor 215 so as to rotate around the yaw axis. Therefore, the gimbal control unit 21 can change the imaging direction in the up / down / left / right directions according to the operation of the cross key of the operation unit 29. The imaging range changes as the imaging direction changes.

ジンバル制御部21は、所望の被写体を追跡対象に決定してよい。ジンバル制御部21は、追跡対象が撮像範囲に含まれるように、各モータを制御し、撮像方向を変更するよう制御してよい。追跡対象とカメラ30との相対的な位置が変化した場合、つまり、追跡対象が移動した場合やカメラ30の位置や向きが変化した場合、各モータへの印加電圧の指令値を変更してよく、つまり各モータの回転角度の指令値を変更してよい。これにより、追跡対象が撮像範囲に含まれるように追跡される。 The gimbal control unit 21 may determine a desired subject as a tracking target. The gimbal control unit 21 may control each motor so that the tracking target is included in the imaging range, and may control to change the imaging direction. When the relative position between the tracking target and the camera 30 changes, that is, when the tracking target moves or when the position or orientation of the camera 30 changes, the command value of the voltage applied to each motor may be changed. That is, the command value of the rotation angle of each motor may be changed. As a result, the tracking target is tracked so as to be included in the imaging range.

ジンバル制御部21は、各モータを制御する際の1回あたりの又は単位時間あたりのモータの回転角度や回転速度を制御してよい。よって、ジンバル制御部21は、カメラ30の向き(撮像方向)をモータ駆動により変更する場合、目標となる撮像方向となるまでにかかる時間の長さを変更可能である。 The gimbal control unit 21 may control the rotation angle and rotation speed of the motor per time or per unit time when controlling each motor. Therefore, when the orientation (imaging direction) of the camera 30 is changed by driving the motor, the gimbal control unit 21 can change the length of time required to reach the target imaging direction.

ジンバル制御部21は、ジンバル20の動作モード(ジンバルモード)を決定し、設定してよい。ジンバルモードは、カメラ30がどの程度振れることを許容するかを示してよい。これにより、例えば、ジンバル20は、ジンバル20による振れ補正によりカメラ30の姿勢を安定化させる度合を調整可能である。 The gimbal control unit 21 may determine and set the operation mode (gimbal mode) of the gimbal 20. The gimbal mode may indicate how much the camera 30 is allowed to swing. Thereby, for example, the gimbal 20 can adjust the degree to which the posture of the camera 30 is stabilized by the vibration correction by the gimbal 20.

ジンバルモードは、例えば、通常モード、高精度モードを有してよい。通常モードでは、カメラ30が、基準位置(基準向き、例えば被写体の向き)に対して3軸方向の少なくとも1方向に、角度閾値th1以下の角度で振れることが許容される。高精度モードでは、カメラ30が、基準位置(基準向き例えば被写体の向き)に対して3軸方向の少なくとも1方向に、角度閾値th2以下の角度で振れることが許容される。なお、高精度モードに設定された場合には、通常モードに設定された場合よりもカメラ30の振れが許容されないので、角度閾値th2は角度閾値th1よりも小さく設定される。つまり、th2<th1である。なお、ジンバルモードは、通常モードと高精度モードとの2種類だけでなく、3種類以上あってもよい。この場合、角度閾値がそれぞれ異なることで、カメラ30の振れの許容度が3段階以上で異なる。 The gimbal mode may have, for example, a normal mode and a high precision mode. In the normal mode, the camera 30 is allowed to swing at an angle equal to or less than the angle threshold value th1 in at least one direction in the three axial directions with respect to the reference position (reference direction, for example, the direction of the subject). In the high-precision mode, the camera 30 is allowed to swing at an angle equal to or less than the angle threshold value th2 in at least one of the three axial directions with respect to the reference position (reference direction, for example, the direction of the subject). When the high-precision mode is set, the camera 30 is not allowed to shake as compared with the case where the normal mode is set, so that the angle threshold value th2 is set smaller than the angle threshold value th1. That is, th2 <th1. The gimbal mode may have three or more types as well as two types, a normal mode and a high-precision mode. In this case, since the angle thresholds are different, the tolerance of the camera 30 for vibration is different in three or more stages.

ジンバル制御部21は、通常モードに設定された場合よりも高精度モードに設定された場合の方が、各モータに印加される印加電圧が大きくなるように制御してよい。この場合、ジンバル制御部21は、高精度モードの場合、通常モードの場合よりも、各モータの回転角度を細かく調整でき、例えばカメラ30の振れにおいて可能な限りカメラ30の姿勢をなるべく固定できる。なお、高精度モードでは、印加電圧が大きくなるので、通常モードよりも消費電力が大きくなる。 The gimbal control unit 21 may control the applied voltage applied to each motor to be larger when the high precision mode is set than when the normal mode is set. In this case, the gimbal control unit 21 can finely adjust the rotation angle of each motor in the high-precision mode as compared with the case in the normal mode, and can fix the posture of the camera 30 as much as possible in the swing of the camera 30, for example. In the high-precision mode, the applied voltage is large, so that the power consumption is larger than in the normal mode.

ジンバル制御部21は、カメラ30により撮像するためのカメラパラメータの設定や変更を、カメラ30に指示してよい。カメラパラメータは、シャッタスピード、F値、ISO感度、等を含んでよい。 The gimbal control unit 21 may instruct the camera 30 to set or change the camera parameters for imaging by the camera 30. Camera parameters may include shutter speed, F-number, ISO sensitivity, and the like.

カメラ30は、撮像制御部31、レンズ制御部32、メモリ33、撮像素子34、レンズ駆動部35,36、フォーカスレンズ37及びズームレンズ38を有する。 The camera 30 includes an image pickup control unit 31, a lens control unit 32, a memory 33, an image pickup element 34, lens drive units 35 and 36, a focus lens 37, and a zoom lens 38.

撮像制御部31は、例えばCPU、MPU又はDSPを用いて構成される。撮像制御部31は、カメラ30の各部の動作を統括して制御するための信号処理、他の各部との間のデータの入出力処理、データの演算処理及びデータの記憶処理を行う。 The image pickup control unit 31 is configured by using, for example, a CPU, MPU, or DSP. The image pickup control unit 31 performs signal processing for controlling the operation of each unit of the camera 30, data input / output processing with and from other units, data calculation processing, and data storage processing.

撮像制御部31は、撮像素子34を駆動して撮像動作を行う。撮像制御部31は、ジンバル20からの撮像の指示に従い、撮像素子34を駆動して撮像動作してよい。撮像制御部31は、撮像素子34で撮像された画像の画像データ(画像信号)を処理(画像処理)し、メモリ33に記憶する。撮像制御部31は、画像処理として、例えば、シェーディング補正、色補正、輪郭強調、ノイズ除去、ガンマ補正、ディベイヤ、圧縮等の各処理を行ってよい。 The image pickup control unit 31 drives the image pickup device 34 to perform an image pickup operation. The image pickup control unit 31 may drive the image pickup device 34 to perform an image pickup operation in accordance with an image pickup instruction from the gimbal 20. The image pickup control unit 31 processes (image processing) the image data (image signal) of the image captured by the image pickup element 34, and stores it in the memory 33. The image pickup control unit 31 may perform, for example, shading correction, color correction, contour enhancement, noise removal, gamma correction, debayer, compression, and the like as image processing.

撮像制御部31は、各カメラパラメータ(シャッタスピード、F値(絞り値)、ISO感度(画像信号のゲイン)、ズーム倍率、等)を調整してよい。撮像制御部31は、ジンバル20からの指示に従い、各カメラパラメータを調整して設定してよい。撮像制御部31は、設定されたシャッタスピード及びF値に従って、画像撮像時にシャッタを開閉させてよい。撮像制御部31は、設定されたISO感度に従って、撮像素子34で得られた画像信号の増幅を制御してよい。また、撮像制御部31は、画像信号の増幅量(ゲインの値)を調整してよい。撮像制御部31は、ズーム倍率の変更や自動露出(AE:Auto Exposure)を行うための指示を、レンズ制御部32に送出してよい。撮像制御部31は、光学ズームを実施する場合に、レンズ制御部32にレンズを駆動させてよい。レンズ制御部32は、電子ズームを実施する場合が、撮像画像の一部を切り出してよい。 The image pickup control unit 31 may adjust each camera parameter (shutter speed, F value (aperture value), ISO sensitivity (gain of image signal), zoom magnification, etc.). The image pickup control unit 31 may adjust and set each camera parameter according to the instruction from the gimbal 20. The image pickup control unit 31 may open and close the shutter at the time of image capturing according to the set shutter speed and F value. The image pickup control unit 31 may control the amplification of the image signal obtained by the image pickup device 34 according to the set ISO sensitivity. Further, the image pickup control unit 31 may adjust the amplification amount (gain value) of the image signal. The image pickup control unit 31 may send an instruction for changing the zoom magnification or performing automatic exposure (AE: Auto Exposure) to the lens control unit 32. The image pickup control unit 31 may drive the lens to the lens control unit 32 when performing optical zoom. When performing electronic zooming, the lens control unit 32 may cut out a part of the captured image.

撮像制御部31は、操作部29による操作に基づいて、各種撮像の実施や撮像条件(例えば、撮像方向、撮像範囲、各種カメラパラメータ)の設定、変更等を行ってよい。撮像制御部31は、録画ボタン612の押下により動画の撮像の指示を受けると、動画を撮像する。撮像制御部31は、シャッタボタン611の押下により静止画の撮像の指示を受けると、静止画を撮像する。 The image pickup control unit 31 may perform various types of imaging and set or change imaging conditions (for example, imaging direction, imaging range, various camera parameters) based on the operation by the operation unit 29. When the image pickup control unit 31 receives an instruction to capture a moving image by pressing the recording button 612, the image capturing control unit 31 captures the moving image. When the image pickup control unit 31 receives an instruction to capture a still image by pressing the shutter button 611, the image pickup control unit 31 captures the still image.

撮像制御部31は、操作部29を介してズームアップの指示を受けた場合、撮像範囲が小さくなるように、ズームレンズの移動をさせて光学ズームを実施してよい。撮像制御部31は、操作部29を介してズームアップの指示を受けた場合、撮像範囲が小さくなるように、撮像画像の切り出し範囲を小さくして、電子ズームを実施してよい。撮像制御部31は、操作部29を介してズームアウトの指示を受けた場合、撮像範囲が大きくなるように、光学ズーム又は電子ズームを実施してよい。撮像制御部31は、操作部29のズームボタンの操作に応じて、ズームアップ(ズームイン)やズームアウトを行い、撮像範囲を変更可能である。 When the image pickup control unit 31 receives a zoom-up instruction via the operation unit 29, the image pickup control unit 31 may perform optical zoom by moving the zoom lens so that the image pickup range becomes smaller. When the image pickup control unit 31 receives a zoom-up instruction via the operation unit 29, the image pickup control unit 31 may perform electronic zooming by reducing the cutout range of the captured image so that the image pickup range becomes smaller. When the image pickup control unit 31 receives a zoom out instruction via the operation unit 29, the image pickup control unit 31 may perform optical zoom or electronic zoom so as to increase the image pickup range. The image pickup control unit 31 can change the image pickup range by zooming up (zooming in) or zooming out according to the operation of the zoom button of the operation unit 29.

撮像制御部31は、所望の被写体に焦点を合わせるための合焦制御を実施してよい。撮像制御部31は、ジンバル20からの指示に従い、合焦制御してよい。撮像制御部31は、合焦制御を実施する場合、レンズ制御部32にレンズの位置を調整するようレンズを駆動させてよい。合焦制御は、自動合焦制御(AF:Auto Focus)を含んでよい。自動合焦制御は、継続的に焦点位置を変更しながら合焦制御を行うこと(CAF:Continuous AF)を含んでよい。CAFでは、例えば、所望の被写体に対して焦点が合わせられた状態が継続する。合焦制御には、通常、例えば1〜2秒の時間を要し、カメラ30の姿勢が安定していない場合、更に長く時間を要し得る。 The image pickup control unit 31 may perform focusing control for focusing on a desired subject. The image pickup control unit 31 may perform focusing control according to the instruction from the gimbal 20. When performing focusing control, the image pickup control unit 31 may drive the lens to adjust the position of the lens by the lens control unit 32. Focusing control may include automatic focusing control (AF). The automatic focusing control may include performing focusing control (CAF: Continuous AF) while continuously changing the focus position. In CAF, for example, the state of being focused on a desired subject continues. Focusing control usually takes, for example, 1 to 2 seconds, and may take even longer if the posture of the camera 30 is not stable.

レンズ制御部32は、フォーカスレンズ37のレンズ位置を光軸方向に移動させて焦点を調節するレンズ駆動部35、及び、ズームレンズ38のレンズ位置を光軸方向に移動させてズーム倍率を変更するレンズ駆動部36を制御する。レンズ制御部32は、ジンバル20からの合焦制御の指示に従い、合焦動作を実施してよい。レンズ駆動部35及びレンズ駆動部36は、それぞれ駆動モータ(図示せず)を含む。 The lens control unit 32 changes the zoom magnification by moving the lens position of the focus lens 37 in the optical axis direction to adjust the focus, and the lens position of the zoom lens 38 in the optical axis direction. It controls the lens drive unit 36. The lens control unit 32 may perform the focusing operation in accordance with the focusing control instruction from the gimbal 20. The lens drive unit 35 and the lens drive unit 36 each include a drive motor (not shown).

フォーカスレンズ37は、被写体からの光を集光し、撮像素子34の撮像面に光学像を結像させる。ズームレンズ38は、レンズを収容する鏡筒(図示せず)を有し、ズーミング動作を行う際に鏡筒を前後方向に伸縮させる。なお、ズームレンズ38が設けられていなくてもよい。 The focus lens 37 collects light from the subject and forms an optical image on the image pickup surface of the image pickup device 34. The zoom lens 38 has a lens barrel (not shown) for accommodating the lens, and expands and contracts the lens barrel in the front-rear direction when performing a zooming operation. The zoom lens 38 may not be provided.

メモリ33は、各種データ、情報、プログラムを保持する。メモリ33は、カメラパラメータや画像データ等を記憶してよい。メモリ33は、カメラパラメータとして、例えばシャッタスピード、F値、ISO感度、等を記憶する。メモリ33は、例えば、RAM、ROM、SDカード、その他のメモリ、を含んでよい。 The memory 33 holds various data, information, and programs. The memory 33 may store camera parameters, image data, and the like. The memory 33 stores, for example, a shutter speed, an F value, an ISO sensitivity, and the like as camera parameters. The memory 33 may include, for example, a RAM, a ROM, an SD card, or other memory.

撮像素子34は、撮像面上に結像した光学像を電気信号に光電変換し、画像信号として出力する。撮像素子には、CCD(Charge Coupled Device:電荷結合素子)イメージセンサやCMOS(Complementary Metal Oxide Semiconductor:相補型MOS)イメージセンサが用いられてよい。 The image pickup device 34 photoelectrically converts the optical image formed on the image pickup surface into an electric signal and outputs it as an image signal. As the image pickup device, a CCD (Charge Coupled Device) image sensor or a CMOS (Complementary Metal Oxide Semiconductor: Complementary MOS) image sensor may be used.

モニタ50は、タッチパネルが前面に配置されたスマートフォンでよい。なお、モニタとしては、スマートフォンに限らず、液晶ディスプレイや有機EL(Electro Luminescence)等を有する表示ユニットでもよい。また、モニタ50として動作するスマートフォンが実行するアプリケーションに連動して、ジンバル20やカメラ30が動作してもよい。 The monitor 50 may be a smartphone in which the touch panel is arranged on the front surface. The monitor is not limited to a smartphone, and may be a display unit having a liquid crystal display, an organic EL (Electro Luminescence), or the like. Further, the gimbal 20 and the camera 30 may operate in conjunction with the application executed by the smartphone operating as the monitor 50.

カメラ30及びモニタ50は、相互に有線通信(例えばUSB通信)又は無線通信(例えば無線LAN、Bluetooth(登録商標)、近距離通信、公衆無線回線)により通信可能である。カメラ30による撮像画像は、モニタ50にリアルタイムに表示されてよい。この画像は、ライブビュー画像とも称される。 The camera 30 and the monitor 50 can communicate with each other by wired communication (for example, USB communication) or wireless communication (for example, wireless LAN, Bluetooth (registered trademark), short-range communication, public wireless line). The image captured by the camera 30 may be displayed on the monitor 50 in real time. This image is also referred to as a live view image.

次に、ジンバルカメラ装置10の動作について説明する。 Next, the operation of the gimbal camera device 10 will be described.

図3は、ジンバルカメラ装置10の動作例を示すフローチャートである。なお、図3の初期設定では、ジンバルモードが通常モードに設定されていることを想定する。なお、ジンバル制御部21が実施する各種動作の一部は、カメラ30の撮像制御部31により実施されてもよい。同様に、ジンバル制御部21が実施する各種動作の一部は、カメラ30の撮像制御部31により実施されてもよい。 FIG. 3 is a flowchart showing an operation example of the gimbal camera device 10. In the initial setting of FIG. 3, it is assumed that the gimbal mode is set to the normal mode. Some of the various operations performed by the gimbal control unit 21 may be performed by the image pickup control unit 31 of the camera 30. Similarly, some of the various operations performed by the gimbal control unit 21 may be performed by the image pickup control unit 31 of the camera 30.

まず、ジンバル部のジンバル制御部21は、カメラ30により画像が撮像される撮像シーンが夜景シーンであり、且つ、カメラ30が被写体を撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定する(S11)。 First, in the gimbal control unit 21 of the gimbal unit, the imaging scene in which the image is captured by the camera 30 is a night view scene, and the imaging mode for the camera 30 to capture the subject is a still image for capturing a still image. It is determined whether or not the imaging mode is used (S11).

S11では、ジンバル制御部21は、例えば操作部29を介して撮像シーンとして夜景シーンが選択されている場合に、夜景シーンであると判定してよい。選択可能な複数の撮像シーンの情報は、メモリ22に保持されていてよい。 In S11, the gimbal control unit 21 may determine that it is a night view scene when, for example, a night view scene is selected as the imaging scene via the operation unit 29. Information on a plurality of selectable imaging scenes may be stored in the memory 22.

ジンバル制御部21は、例えば、カメラ30で撮像されたライブビュー画像における各画素の輝度を基に、夜景シーンであるか否かを判定してよい。この場合、ジンバル制御部21は、カメラ30からライブビュー画像を取得し、取得したライブビュー画像の輝度を基に、夜景シーンであるか否かを判定してよい。また、カメラ30の撮像制御部31が、ライブビュー画像の輝度を基に、夜景シーンであるか否かを判定し、夜景シーンの判定情報をジンバル制御部21が取得することが、ジンバル制御部21により夜景シーンであるか否かを判定することに含まれてもよい。 The gimbal control unit 21 may determine whether or not it is a night view scene, for example, based on the brightness of each pixel in the live view image captured by the camera 30. In this case, the gimbal control unit 21 may acquire a live view image from the camera 30 and determine whether or not it is a night view scene based on the brightness of the acquired live view image. Further, the gimbal control unit 31 determines whether or not the image is a night view scene based on the brightness of the live view image, and the gimbal control unit 21 acquires the determination information of the night view scene. 21 may be included in determining whether or not the scene is a night view.

ジンバル制御部21は、例えば、カメラ30で撮像されたライブビュー画像を、メモリ22に予め格納された複数枚の夜景シーンで撮像された画像(夜景画像)と比較し、夜景画像との類似度(例えば画像の輝度の類似度)を算出してよい。ジンバル制御部21は、ライブビュー画像と夜景画像との類似度が閾値th0以上である場合に、夜景シーンであると判定してよい。メモリ22に保持された夜景画像は、インタフェース28の通信インタフェースを介してネットワークと接続して外部サーバ等から取得され、適宜更新されてよい。メモリ22に保持された夜景画像は、カメラ30で過去に撮影された画像(ライブビュー画像の一部や静止画像)であってもよい。 The gimbal control unit 21 compares, for example, a live view image captured by the camera 30 with an image (night view image) captured in a plurality of night view scenes stored in advance in the memory 22, and has a degree of similarity to the night view image. (For example, the similarity of the brightness of the image) may be calculated. The gimbal control unit 21 may determine that it is a night view scene when the similarity between the live view image and the night view image is equal to or higher than the threshold value th0. The night view image held in the memory 22 may be connected to the network via the communication interface of the interface 28, acquired from an external server or the like, and updated as appropriate. The night view image held in the memory 22 may be an image (a part of the live view image or a still image) taken in the past by the camera 30.

ジンバルカメラ装置10は、ライブビュー画像の輝度を基に夜景シーンであるか否かを判定する場合、例えば手動で操作部29を介して撮像シーンを設定するよりも、ライブビュー画像が撮像された際の実際の周囲環境の光量を加味して、撮像シーンの判定が可能である。 When the gimbal camera device 10 determines whether or not it is a night view scene based on the brightness of the live view image, the live view image is captured rather than manually setting the imaging scene via the operation unit 29, for example. It is possible to determine the imaging scene by taking into account the amount of light in the actual surrounding environment.

S11では、ジンバル制御部21は、例えばメモリ22に保持されている撮像モードの設定情報を参照し、撮像モードとして静止画撮像モードに設定されている場合、撮像モードが静止画撮像モードであると判定してよい。撮像モードには、例えば、静止画撮像モード、動画撮像モード、等が含まれる。 In S11, the gimbal control unit 21 refers to, for example, the setting information of the imaging mode held in the memory 22, and when the still image imaging mode is set as the imaging mode, the imaging mode is the still image imaging mode. You may judge. The imaging mode includes, for example, a still image imaging mode, a moving image imaging mode, and the like.

ジンバル制御部21は、撮像シーンが夜景シーンであり、且つ、撮像モードが静止画撮像モードである場合、夜景シーンでの静止画撮像を行うためのカメラパラメータの設定を行う。カメラパラメータの設定は、少なくとも1つのカメラパラメータの現状の設定状態からの変更を含んでよい。 When the imaging scene is a night scene and the imaging mode is the still image imaging mode, the gimbal control unit 21 sets the camera parameters for capturing the still image in the night scene. The camera parameter setting may include a change from the current setting state of at least one camera parameter.

具体的には、ジンバル制御部21は、ジンバルモードを変更してよい(S12)。ここでは、ジンバル制御部21は、ジンバルモードを通常モードから高精度モードに変更してよい。ジンバル制御部21は、上記のカメラ30の振れの許容量を規定する角度閾値を、角度閾値th1(例えば0.1度)から角度閾値th2(例えば0.05度)に変更してよい。この角度閾値の設定情報は、メモリ22に保持されてよい。また、ジンバルモードを通常モードから高精度モードに変更する場合、ジンバル20の各モータへの印加電力(印加電圧)を大きくしてよく、例えば「3W」から「5W」に変更してよい。 Specifically, the gimbal control unit 21 may change the gimbal mode (S12). Here, the gimbal control unit 21 may change the gimbal mode from the normal mode to the high precision mode. The gimbal control unit 21 may change the angle threshold value that defines the allowable amount of vibration of the camera 30 from the angle threshold value th1 (for example, 0.1 degree) to the angle threshold value th2 (for example, 0.05 degree). The setting information of this angle threshold value may be stored in the memory 22. Further, when changing the gimbal mode from the normal mode to the high precision mode, the applied power (applied voltage) to each motor of the gimbal 20 may be increased, and for example, it may be changed from "3W" to "5W".

また、ジンバル制御部21は、ISO感度を変更してよい(S13)。この場合、ジンバル制御部21は、ISO感度を小さくするよう、つまり、画像信号の増幅量を小さくするよう、カメラ30に指示してよい。カメラ30の撮像制御部31は、ジンバル20からの指示に従って、ISO感度を小さくしてよい。このISO感度の設定情報(例えば画像信号の増幅量の設定情報)は、メモリ33に保持されてよい。 Further, the gimbal control unit 21 may change the ISO sensitivity (S13). In this case, the gimbal control unit 21 may instruct the camera 30 to reduce the ISO sensitivity, that is, to reduce the amplification amount of the image signal. The image pickup control unit 31 of the camera 30 may reduce the ISO sensitivity according to the instruction from the gimbal 20. The ISO sensitivity setting information (for example, setting information of the amplification amount of the image signal) may be held in the memory 33.

ここで、ISO感度は、画像信号のゲインを示し、ISO感度を大きくすると、画像信号及び画像信号以外のノイズ信号の増幅量が共に大きくなり、ISO感度を小さくすると、画像信号の増幅量が小さくなる。画像信号は、実信号成分とノイズ成分とを含む。夜景シーンでは、実信号成分の信号レベルが小さいと想定されるので、実信号成分に対するノイズ成分の大きさが相対的に大きくなる。よって、ジンバルカメラ装置10は、夜景シーンではノイズ成分の増幅による影響を加味して、画像信号の増幅量を現状の設定値よりも(例えばジンバルモードが通常モードの場合よりも)小さくすることで、ノイズが抑制されて画質が向上した静止画を撮像できる。 Here, the ISO sensitivity indicates the gain of the image signal, and when the ISO sensitivity is increased, the amplification amount of the image signal and the noise signal other than the image signal is increased, and when the ISO sensitivity is decreased, the amplification amount of the image signal is decreased. Become. The image signal includes a real signal component and a noise component. In the night view scene, since the signal level of the real signal component is assumed to be small, the magnitude of the noise component with respect to the real signal component is relatively large. Therefore, the gimbal camera device 10 makes the amplification amount of the image signal smaller than the current set value (for example, compared to the case where the gimbal mode is the normal mode) in consideration of the influence of the amplification of the noise component in the night view scene. , It is possible to capture a still image in which noise is suppressed and the image quality is improved.

また、ジンバル制御部21は、シャッタスピードを変更してよい(S14)。ここでは、ジンバル制御部21は、シャッタスピードを遅くするよう、カメラ30に指示してよい。ここでは、シャッタスピードが、例えば「1秒」から「3〜5秒」に変更されるよう指示されてよい。カメラ30の撮像制御部31は、ジンバル20からの指示に従って、シャッタスピードを遅くしてよい。このシャッタスピードの設定情報は、メモリ33に保持されてよい。 Further, the gimbal control unit 21 may change the shutter speed (S14). Here, the gimbal control unit 21 may instruct the camera 30 to slow down the shutter speed. Here, the shutter speed may be instructed to be changed from, for example, "1 second" to "3 to 5 seconds". The image pickup control unit 31 of the camera 30 may slow down the shutter speed according to the instruction from the gimbal 20. The shutter speed setting information may be stored in the memory 33.

ジンバルカメラ装置10は、シャッタスピードを現状の設定値よりも(例えばジンバルモードが通常モードの場合よりも)小さくすることで、静止画撮像時の光量が増加するので、ISO感度を小さくすることによる画像信号の増幅量の低下による画像信号の実信号成分の低下を補填できる。 In the gimbal camera device 10, by making the shutter speed smaller than the current set value (for example, compared to the case where the gimbal mode is the normal mode), the amount of light at the time of capturing a still image increases, so that the ISO sensitivity is reduced. It is possible to compensate for the decrease in the actual signal component of the image signal due to the decrease in the amplification amount of the image signal.

カメラ30の撮像制御部31は、カメラパラメータが夜景シーン且つ静止画撮像モードに合わせて設定された状態で、撮像素子34に静止画の撮像を指示する(S15)。この場合、撮像制御部31は、例えばシャッタボタン611の押下を検知して、静止画を撮像させてよい。 The image pickup control unit 31 of the camera 30 instructs the image pickup element 34 to take a still image in a state where the camera parameters are set according to the night view scene and the still image image pickup mode (S15). In this case, the image pickup control unit 31 may detect the pressing of the shutter button 611, for example, to take a still image.

ジンバル20のジンバル制御部21は、静止画の撮像後に、ジンバルモードを復帰させてよい(S16)。ここでは、ジンバル制御部21は、ジンバルモードを高精度モードから通常モードに復帰させる。つまり、ジンバル制御部21は、ジンバルモードを、S12における変更の前の設定情報に戻してよい。この場合、ジンバル制御部21は、角度閾値の設定を、角度閾値th2から角度閾値th1に変更してよい。また、ジンバル制御部21は、ジンバルモードの復帰と同様に、他のカメラパラメータ(例えばISO感度、シャッタスピード)についても、例えばS13、S14における変更の前の設定状態に復帰させてよい。 The gimbal control unit 21 of the gimbal 20 may return the gimbal mode after capturing a still image (S16). Here, the gimbal control unit 21 returns the gimbal mode from the high precision mode to the normal mode. That is, the gimbal control unit 21 may return the gimbal mode to the setting information before the change in S12. In this case, the gimbal control unit 21 may change the setting of the angle threshold value from the angle threshold value th2 to the angle threshold value th1. Further, the gimbal control unit 21 may return other camera parameters (for example, ISO sensitivity, shutter speed) to the set state before the change in, for example, S13 and S14, as in the case of returning to the gimbal mode.

一方、ジンバル制御部21は、ジンバル制御部231は、撮像シーンが夜景シーン以外の撮像シーンであり、又は、撮像モードが静止画撮像モード以外の撮像モード(例えば動画撮像モード)である場合、カメラパラメータの設定を変更せずに、画像(例えば動画又は夜景シーン以外の静止画)を撮像する(S17)。 On the other hand, in the gimbal control unit 21, when the gimbal control unit 231 is an imaging scene other than the night scene, or the imaging mode is an imaging mode other than the still image imaging mode (for example, a moving image imaging mode), the camera An image (for example, a still image other than a moving image or a night scene) is captured without changing the parameter settings (S17).

このように、ジンバルカメラ装置10は、夜景シーンで静止画を撮像する際に、ジンバルの精度を上げることで、カメラ30の振れを抑制できる(ジンバル20を長期間安定化できる)。言い換えると、ジンバルカメラ装置10は、ジンバルの精度を上げることで、例えば追跡対象の被写体からのカメラ30の振れに対して許容量が少なくなるので、カメラ30の姿勢を迅速に安定化できる。よって、ジンバルカメラ装置10は、安定した静止画撮像を短時間で行うことが可能となる。 As described above, the gimbal camera device 10 can suppress the shake of the camera 30 by increasing the accuracy of the gimbal when capturing a still image in a night view scene (the gimbal 20 can be stabilized for a long period of time). In other words, by increasing the accuracy of the gimbal, the gimbal camera device 10 can quickly stabilize the posture of the camera 30 because, for example, the allowable amount of the camera 30 from the subject to be tracked is reduced. Therefore, the gimbal camera device 10 can perform stable still image imaging in a short time.

また、ジンバルカメラ装置10は、夜景シーンにおいてカメラ30により撮影する場合でも、手振れを抑えるためにISO感度を上げて撮像することを回避し、画像信号の増幅量(ゲイン)が上がることにより、ノイズ成分により画質が劣化することを回避できる。 Further, even when the gimbal camera device 10 takes a picture with the camera 30 in a night view scene, the gimbal camera device 10 avoids taking an image by increasing the ISO sensitivity in order to suppress camera shake, and increases the amplification amount (gain) of the image signal to cause noise. It is possible to avoid deterioration of image quality due to the components.

また、カメラ30の振れが発生すると、カメラ30の姿勢が安定化するまでに時間を要し、自動露出(AE:Auto Exprosure)に要する時間が長くなる傾向がある。これに対し、毎回、自動露出が実施される場合でも、ジンバルカメラ装置10は、シャッタスピードを遅くすることで、自動露出に要する時間を待機でき、夜間撮像においても振れの抑制された状態で静止画を撮像できる。 Further, when the camera 30 shakes, it takes time for the posture of the camera 30 to stabilize, and the time required for automatic exposure (AE) tends to be long. On the other hand, even when the automatic exposure is performed every time, the gimbal camera device 10 can wait for the time required for the automatic exposure by slowing the shutter speed, and is stationary even in the nighttime imaging in a state where the shake is suppressed. You can take an image.

また、ジンバルカメラ装置10は、ISO感度を上げずにシャッタスピードを遅くし、更にジンバル20の精度を一時的に上げることで、カメラ30の振れを抑えつつ、高画質な夜景シーンで画像を撮像できる。 Further, the gimbal camera device 10 captures an image in a high-quality night view scene while suppressing the shake of the camera 30 by slowing down the shutter speed without increasing the ISO sensitivity and further temporarily increasing the accuracy of the gimbal 20. it can.

また、ジンバルカメラ装置10は、夜景シーンで画像を撮像する際に、ジンバル20の各モータに印加される電圧を上げることで、カメラ30の振れ補正量を細かく調整できる。よって、ジンバルカメラ装置10は、カメラ30の振れの許容量の低減を実現でき、つまりカメラ30の姿勢を一層安定化(例えば固定)できる。ジンバルカメラ装置10は、カメラ30の姿勢を安定化した状態でISO感度とシャッタスピードとを下げることで、ジンバル20を用いた夜景撮影を安定化できる。よって、ジンバルカメラ装置10は、夜景を良好な画質で撮影できる。 Further, the gimbal camera device 10 can finely adjust the shake correction amount of the camera 30 by increasing the voltage applied to each motor of the gimbal 20 when capturing an image in a night view scene. Therefore, the gimbal camera device 10 can realize a reduction in the allowable amount of vibration of the camera 30, that is, the posture of the camera 30 can be further stabilized (for example, fixed). The gimbal camera device 10 can stabilize night view photography using the gimbal 20 by lowering the ISO sensitivity and the shutter speed while the posture of the camera 30 is stabilized. Therefore, the gimbal camera device 10 can shoot a night view with good image quality.

このように、ジンバルカメラ装置10(移動体の一例)は、カメラ30(撮像部の一例と、カメラ30が搭載されカメラ30の振れを補正するジンバル20(ジンバル部の一例)と、を備える。ジンバル20は、相互に直交する3軸の少なくとも1つの回転軸を中心に、カメラ30を回転自在に支持してよい。ジンバル20は、3軸の少なくとも1つの回転軸を中心に、カメラを回転させるモータ(例えばヨー軸モータ215、ロール軸モータ216、ピッチ軸モータ217)を備えてよい。ジンバル20は、撮像シーンが夜景シーンであるか否かを判定し、撮像モードが静止画撮像モードであるか否かを判定してよい。ジンバル20は、撮像シーンが夜景シーンであり、撮像モードが静止画撮像モードである場合、モータの回転許容量(例えば角度閾値)を小さくするよう制御し、カメラ30で得られる画像信号の増幅量を小さくするようカメラ30に指示し、カメラ30のシャッタスピードを遅くするようカメラ30に指示してよい。 As described above, the gimbal camera device 10 (an example of a moving body) includes a camera 30 (an example of an imaging unit and a gimbal 20 (an example of a gimbal unit) on which the camera 30 is mounted and corrects the vibration of the camera 30). The gimbal 20 may rotatably support the camera 30 around at least one of three axes that are orthogonal to each other. The gimbal 20 rotates the camera about at least one of the three axes of rotation. A motor (for example, a yaw axis motor 215, a roll axis motor 216, and a pitch axis motor 217) may be provided. The gimbal 20 determines whether or not the imaging scene is a night view scene, and the imaging mode is the still image imaging mode. The gimbal 20 may control whether or not the gimbal 20 is present. When the imaging scene is a night view scene and the imaging mode is the still image imaging mode, the gimbal 20 is controlled to reduce the rotation allowance (for example, the angle threshold value) of the motor. The camera 30 may be instructed to reduce the amplification amount of the image signal obtained by the camera 30, and the camera 30 may be instructed to slow down the shutter speed of the camera 30.

ジンバル20に対してカメラ30の振れが一度発生すると、振れが収まるまでに(安定化するまでに)時間がかかる。振れが安定化するとは、所定の撮像シーン(例えば夜景シーン)や所定の撮像モード(例えば静止画撮像モード)での撮像に対する振れによる影響を無視できる程度に、振れが収まることとも言える。ジンバルカメラ装置10は、印加電圧を大きくすることで、モータの細かな調整が可能となり、回転許容量を小さくできる。したがって、ジンバルカメラ装置10は、振れが安定化するまでの時間を短くでき、カメラ30の振れによる画像のブレを軽減できる。よって、安定化するまでの時間を短くすることで、夜景撮像時の撮像画像の画質を向上し易くなる。夜景撮像時は、例えば星空の撮像時を含んでよい。 Once the camera 30 shakes with respect to the gimbal 20, it takes time for the shake to subside (stabilize). It can be said that the stabilization of the shake means that the shake is suppressed to the extent that the influence of the shake on the imaging in a predetermined imaging scene (for example, a night view scene) or a predetermined imaging mode (for example, a still image imaging mode) can be ignored. By increasing the applied voltage of the gimbal camera device 10, the motor can be finely adjusted and the rotation allowance can be reduced. Therefore, the gimbal camera device 10 can shorten the time until the shake stabilizes, and can reduce the blurring of the image due to the shake of the camera 30. Therefore, by shortening the time until stabilization, it becomes easy to improve the image quality of the captured image at the time of capturing the night view. The night view image may include, for example, the image of a starry sky.

カメラ30の振れがある場合に撮像された画像の画像信号の増幅量を小さくすることで、ノイズ成分が増幅されて画質が劣化することを抑制できる。また、増幅量を下げることで静止画の輝度(画素値、画像信号の信号レベル)が小さくなるが、シャッタスピードを遅くして多くの光量を取り入れることで、静止画の輝度を確保でき、画質を向上できる。夜景撮像時には、少しのカメラ30の振れでも撮像される画像の画質に大きく影響するが、ジンバルカメラ装置10は、夜景シーンで撮像される画像の画質を改善可能な複数の処理を連携させて、効率良く画質改善できる。 By reducing the amplification amount of the image signal of the captured image when the camera 30 is shaken, it is possible to suppress the deterioration of the image quality due to the amplification of the noise component. Also, by lowering the amplification amount, the brightness of the still image (pixel value, signal level of the image signal) becomes smaller, but by slowing down the shutter speed and taking in a large amount of light, the brightness of the still image can be secured and the image quality Can be improved. At the time of night view imaging, even a slight shake of the camera 30 greatly affects the image quality of the image to be captured, but the gimbal camera device 10 links a plurality of processes capable of improving the image quality of the image captured in the night view scene by linking them. Image quality can be improved efficiently.

また、カメラ30は、ジンバル20により制御された回転許容量で、静止画を撮像してよい。ジンバル20は、ジンバル20により制御された回転許容量を、ジンバル20により制御される前の状態に復帰してよい。 Further, the camera 30 may capture a still image with a rotation allowance controlled by the gimbal 20. The gimbal 20 may return the rotation allowance controlled by the gimbal 20 to the state before being controlled by the gimbal 20.

これにより、ジンバルカメラ装置10は、静止画撮像を行うタイミング以外では、モータの印加電圧を元に戻す(つまり小さくする)ことで、ジンバル20の各モータを駆動するための電圧を大きくする期間を限定できる。したがって、ジンバルカメラ装置10は、消費電力を小さくできる。 As a result, the gimbal camera device 10 increases the voltage for driving each motor of the gimbal 20 by returning (that is, decreasing) the applied voltage of the motors except for the timing of capturing the still image. Can be limited. Therefore, the gimbal camera device 10 can reduce the power consumption.

また、カメラ30は、ジンバル20により指示された画像信号の増幅量及びシャッタスピードで、静止画を撮像してよい。ジンバル20は、ジンバル20により指示された画像信号の増幅量及び前記シャッタスピードを、ジンバル部により指示される前の状態に復帰してよい。 Further, the camera 30 may capture a still image with the amplification amount and shutter speed of the image signal instructed by the gimbal 20. The gimbal 20 may return the amplification amount of the image signal and the shutter speed instructed by the gimbal 20 to the state before being instructed by the gimbal portion.

これにより、ジンバルカメラ装置10は、ジンバルモードとともに、夜景撮像時の画質向上を行うための各カメラパラメータの変更も解除できる。これにより、夜景撮像前の撮像シーンや撮像モードに適したカメラパラメータで、画像を撮像できる。 As a result, the gimbal camera device 10 can cancel the change of each camera parameter for improving the image quality at the time of night view imaging as well as the gimbal mode. This makes it possible to capture an image with camera parameters suitable for the imaging scene before night view imaging and the imaging mode.

また、ジンバル20は、カメラ30により撮像されたライブビュー画像の輝度に基づいて、夜景シーンであるか否かを判定してよい。 Further, the gimbal 20 may determine whether or not it is a night view scene based on the brightness of the live view image captured by the camera 30.

これにより、ジンバルカメラ装置10は、静止画を撮像する際に撮像素子34に実際に取り込まれている光量を加味して、夜景シーンか否かを判断できる。よって、ジンバルカメラ装置10は、実際の撮像空間における光量を加味して、静止画の画質改善を行うことができる。また、ジンバルカメラ装置10は、夜時間帯であっても光量が十分である場合には夜景シーンではないと判定されることで、夜景シーンを撮像するための消費電力の大きい静止画撮像を行うことを抑制でき、省電力化できる。 As a result, the gimbal camera device 10 can determine whether or not it is a night view scene by adding the amount of light actually captured by the image sensor 34 when capturing a still image. Therefore, the gimbal camera device 10 can improve the image quality of the still image by adding the amount of light in the actual imaging space. Further, the gimbal camera device 10 determines that the gimbal camera device 10 is not a night view scene when the amount of light is sufficient even in the night time zone, so that the gimbal camera device 10 captures a still image with high power consumption for capturing the night view scene. This can be suppressed and power can be saved.

また、ジンバルカメラ装置10が把持部620を備えることで、撮像者(ユーザ)が自由にジンバルカメラ装置10を把持して移動できる。この場合でも、ジンバルカメラ装置10は、手振れによるカメラ30の振れを加味して、夜景撮像時の画質の劣化を抑制できる。 Further, since the gimbal camera device 10 is provided with the grip portion 620, the imager (user) can freely grip and move the gimbal camera device 10. Even in this case, the gimbal camera device 10 can suppress the deterioration of the image quality at the time of capturing the night view by adding the shake of the camera 30 due to the camera shake.

(他のジンバルカメラ装置)
図4は、他のジンバルカメラ装置10Bの外観例を示す斜視図である。図4において、図1に示したジンバルカメラ装置10と同様の構成部については、同一の符号を付し、その説明を省略又は簡略化する。
(Other gimbal camera devices)
FIG. 4 is a perspective view showing an external example of another gimbal camera device 10B. In FIG. 4, the same components as those of the gimbal camera device 10 shown in FIG. 1 are designated by the same reference numerals, and the description thereof will be omitted or simplified.

ジンバルカメラ装置10Bは、装置本体60Bと、ジンバル20Bと、携帯端末50Bとを含む構成を有する。装置本体60Bは、例えば略円柱状に形成された部材である。装置本体60Bの上端には、ジンバル20Bが着脱自在に装着される。装置本体60Bの上部正面には、傾斜を有する操作面610が形成される。操作面610には、各種ボタンが配置される。各種ボタンは、シャッタボタン611、録画ボタン612、及び操作ボタン613を含む。装置本体60の中央下部は、撮像者の手で把持される把持部620に形成される。 The gimbal camera device 10B has a configuration including a device main body 60B, a gimbal 20B, and a mobile terminal 50B. The device main body 60B is, for example, a member formed in a substantially columnar shape. A gimbal 20B is detachably attached to the upper end of the apparatus main body 60B. An inclined operation surface 610 is formed on the upper front surface of the apparatus main body 60B. Various buttons are arranged on the operation surface 610. Various buttons include a shutter button 611, a recording button 612, and an operation button 613. The lower center of the apparatus main body 60 is formed in a grip portion 620 that is gripped by the imager's hand.

ジンバル20Bは、装置本体60Bの上端に着脱自在に取り付けられる。ジンバル20Bには、取付部315を介して、携帯端末50Bが取り付けられる。ジンバル20Bは、取付部315に取り付けられた携帯端末50Bの位置や向きを可変自在に支持する。 The gimbal 20B is detachably attached to the upper end of the apparatus main body 60B. The mobile terminal 50B is attached to the gimbal 20B via the attachment portion 315. The gimbal 20B variably supports the position and orientation of the mobile terminal 50B attached to the attachment portion 315.

ジンバル20Bは、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217を有する。ヨー軸モータ215は、装置本体60Bの上端に配置される。ロール軸モータ216は、アーム部材221を介してヨー軸モータ215に取り付けられる。ピッチ軸モータ217は、アーム部材221を介してロール軸モータ216に取り付けられる。ジンバル20Bは、ヨー軸モータ215、ロール軸モータ216及びピッチ軸モータ217を駆動し、被写体に対する携帯端末50B(携帯端末50Bが備える撮像部)の向きが振れないように、ヨー軸、ロール軸及びピッチ軸の3軸方向に携帯端末50Bを回転自在に支持する。つまり、ジンバル20Bは、携帯端末50B(携帯端末50Bが備える撮像部)の向き(姿勢)を安定化させるスタビライザ機能を有する。ここでは、携帯端末50Bの撮像部が、図1のカメラ30に相当する。 The gimbal 20B includes a yaw axis motor 215, a roll axis motor 216, and a pitch axis motor 217. The yaw axis motor 215 is arranged at the upper end of the apparatus main body 60B. The roll shaft motor 216 is attached to the yaw shaft motor 215 via the arm member 221. The pitch shaft motor 217 is attached to the roll shaft motor 216 via the arm member 221. The gimbal 20B drives the yaw axis motor 215, the roll axis motor 216, and the pitch axis motor 217, and the yaw axis, the roll axis, and the gimbal 20B so that the direction of the mobile terminal 50B (the imaging unit included in the mobile terminal 50B) does not swing with respect to the subject. The portable terminal 50B is rotatably supported in the three axes of the pitch axis. That is, the gimbal 20B has a stabilizer function for stabilizing the orientation (posture) of the mobile terminal 50B (imaging unit included in the mobile terminal 50B). Here, the imaging unit of the mobile terminal 50B corresponds to the camera 30 in FIG.

ジンバル20B及び携帯端末50Bは、相互に有線通信(例えばUSB通信)又は無線通信(例えば無線LAN、Bluetooth(登録商標)、近距離通信、公衆無線回線)により通信可能である。 The gimbal 20B and the mobile terminal 50B can communicate with each other by wired communication (for example, USB communication) or wireless communication (for example, wireless LAN, Bluetooth®, short-range communication, public wireless line).

携帯端末50Bは、携帯端末50Bが備える撮像部(不図示)により撮像された画像を、リアルタイムに表示してよい。この画像は、ライブビュー画像とも称される。携帯端末50Bの撮像部は、ジンバル20Bに搭載されているので、ジンバルカメラ装置10と同様に、ジンバル20Bによる振れ補正による影響(例えばカメラ30の撮像方向が振れの発生前の時点に戻ろうとすることによる影響)を受け、ジンバルモードによって携帯端末50Bの振れが安定化するまでの時間が長くなることもある。この場合でも、ジンバルカメラ装置10Bは、ジンバルカメラ装置10と同様に、ジンバル20Bによる振れ補正(姿勢の調整)やカメラパラメータを加味して夜景シーンにおいて撮像できるので、画質の低下を抑制して静止画等を撮像できる。 The mobile terminal 50B may display an image captured by an imaging unit (not shown) included in the mobile terminal 50B in real time. This image is also referred to as a live view image. Since the image pickup unit of the mobile terminal 50B is mounted on the gimbal 20B, the influence of the shake correction by the gimbal 20B (for example, the imaging direction of the camera 30 tries to return to the time before the occurrence of the shake) like the gimbal camera device 10. The gimbal mode may take a long time to stabilize the runout of the mobile terminal 50B. Even in this case, the gimbal camera device 10B can take an image in a night scene by adding the shake correction (posture adjustment) by the gimbal 20B and the camera parameters as in the gimbal camera device 10, so that the deterioration of the image quality is suppressed and the image is stationary. Images can be imaged.

(無人航空機に搭載されたジンバル)
図5は、ジンバル200が搭載された無人航空機100の外観を示す斜視図である。無人航空機100は移動体の一例である。無人航空機100は、UAV本体102と、ジンバル200と、撮像部220と、複数の撮像部230と、UAV制御部110(不図示)と、を含む構成である。UAV制御部110は、制御部の一例である。
(Gimbal mounted on an unmanned aerial vehicle)
FIG. 5 is a perspective view showing the appearance of the unmanned aerial vehicle 100 equipped with the gimbal 200. The unmanned aerial vehicle 100 is an example of a mobile body. The unmanned aerial vehicle 100 includes a UAV main body 102, a gimbal 200, an imaging unit 220, a plurality of imaging units 230, and a UAV control unit 110 (not shown). The UAV control unit 110 is an example of a control unit.

UAV本体102は、複数の回転翼(プロペラ)を備える。UAV本体102は、複数の回転翼の回転を制御することにより無人航空機100を飛行させる。UAV本体102は、例えば4つの回転翼を用いて無人航空機100を飛行させる。回転翼の数は、4つに限定されない。また、無人航空機100は、回転翼を有さない固定翼機でよい。 The UAV main body 102 includes a plurality of rotary wings (propellers). The UAV main body 102 flies the unmanned aerial vehicle 100 by controlling the rotation of a plurality of rotor blades. The UAV body 102 flies the unmanned aerial vehicle 100 using, for example, four rotors. The number of rotor blades is not limited to four. Further, the unmanned aerial vehicle 100 may be a fixed-wing aircraft having no rotary wings.

ジンバル200は、ヨー軸、ピッチ軸、及びロール軸を中心に撮像部220を回転可能に支持してよい。ジンバル200は、ヨー軸、ピッチ軸、及びロール軸の少なくとも1つを中心に撮像部220を回転させることで、撮像部220の撮像方向を変更してよい。 The gimbal 200 may rotatably support the imaging unit 220 about the yaw axis, the pitch axis, and the roll axis. The gimbal 200 may change the imaging direction of the imaging unit 220 by rotating the imaging unit 220 around at least one of the yaw axis, the pitch axis, and the roll axis.

撮像部220は、所望の撮像範囲に含まれる被写体(例えば、空撮対象となる上空の様子、山や川等の景色、地上の建物)を撮像する撮像用のカメラである。 The imaging unit 220 is a camera for imaging that captures a subject (for example, a state of the sky to be aerial photographed, a landscape such as a mountain or a river, a building on the ground) included in a desired imaging range.

複数の撮像部230は、無人航空機100の飛行を制御するために無人航空機100の周囲を撮像するセンシング用のカメラである。 The plurality of imaging units 230 are sensing cameras that image the surroundings of the unmanned aerial vehicle 100 in order to control the flight of the unmanned aerial vehicle 100.

UAV制御部110は、無人航空機100の飛行を制御する。UAV制御部110は、ジンバル200、回転翼機構(不図示)、撮像部220及び撮像部230を制御する。また、UAV制御部110は、ジンバル制御部21と同様の機能を有する。この場合、無人航空機100の場合、UAV制御部110がジンバル制御部21に相当し、撮像部220がカメラ30に相当する。 The UAV control unit 110 controls the flight of the unmanned aerial vehicle 100. The UAV control unit 110 controls the gimbal 200, the rotor blade mechanism (not shown), the image pickup unit 220, and the image pickup section 230. Further, the UAV control unit 110 has the same function as the gimbal control unit 21. In this case, in the case of the unmanned aerial vehicle 100, the UAV control unit 110 corresponds to the gimbal control unit 21, and the image pickup unit 220 corresponds to the camera 30.

このように、撮像部220は、ジンバル200に搭載されているので、ジンバルカメラ装置10と同様に、ジンバル200による振れ補正による影響(例えば撮像部220の撮像方向が振れの発生前の時点に戻ろうとすることによる影響)を受ける。この場合でも、無人航空機100は、ジンバルカメラ装置10,10Bと同様に、ジンバル200による振れ補正を加味して夜景シーンにおいて撮像できるので、画質の低下を抑制して静止画等を撮像できる。また、無人航空機100は、飛行中に、例えば気流の影響を受けても、ジンバル200により撮像部220の振れを補正しながら、高画質で夜景の画像を撮像できる。よって、無人航空機100は、自由な方向に飛行しながら、撮像部220による撮像方向を任意の方向に向け、夜間に高画質な画像を撮像できる。 In this way, since the imaging unit 220 is mounted on the gimbal 200, the influence of the shake correction by the gimbal 200 (for example, the imaging direction of the imaging unit 220 returns to the time before the occurrence of the shake) is returned to the time before the occurrence of the shake, similarly to the gimbal camera device 10. Affected by trying). Even in this case, the unmanned aerial vehicle 100 can take an image in a night view scene in consideration of the shake correction by the gimbal 200, as in the gimbal camera devices 10 and 10B, so that the deterioration of the image quality can be suppressed and a still image or the like can be taken. Further, the unmanned aerial vehicle 100 can capture an image of a night view with high image quality while correcting the vibration of the imaging unit 220 by the gimbal 200 even if it is affected by an air flow during flight. Therefore, the unmanned aerial vehicle 100 can capture a high-quality image at night by directing the imaging direction by the imaging unit 220 to an arbitrary direction while flying in a free direction.

以上、本開示を実施形態を用いて説明したが、本開示の技術的範囲は上述した実施形態に記載の範囲には限定されない。上述した実施形態に、多様な変更又は改良を加えることが当業者に明らかである。その様な変更又は改良を加えた形態も本開示の技術的範囲に含まれ得ることが、特許請求の範囲の記載からも明らかである。 Although the present disclosure has been described above using the embodiments, the technical scope of the present disclosure is not limited to the scope described in the above-described embodiments. It will be apparent to those skilled in the art to make various changes or improvements to the embodiments described above. It is clear from the description of the claims that the form with such changes or improvements may be included in the technical scope of the present disclosure.

特許請求の範囲、明細書、及び図面中において示した装置、システム、プログラム、及び方法における動作、手順、ステップ、及び段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現可能である。特許請求の範囲、明細書、及び図面中の動作フローに関して、便宜上「先ず、」、「次に」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。 The execution order of each process such as operation, procedure, step, and step in the device, system, program, and method shown in the claims, the specification, and the drawing is particularly "before" and "prior to". As long as the output of the previous process is not used in the subsequent process, it can be realized in any order. Even if the scope of claims, the specification, and the operation flow in the drawings are explained using "first", "next", etc. for convenience, it means that it is essential to carry out in this order. is not it.

また、本開示は、上記実施形態の装置の機能を実現するプログラムを、ネットワークあるいは各種記憶媒体を介して装置に供給し、この装置内のコンピュータが読み出して実行するプログラム、及びこのプログラムが記憶された記録媒体も適用範囲である。 Further, in the present disclosure, a program that realizes the function of the device of the above embodiment is supplied to the device via a network or various storage media, and a computer in the device reads and executes the program, and this program is stored. The recording medium is also applicable.

10,10B ジンバルカメラ装置
20,20B,200 ジンバル
21 ジンバル制御部
22 メモリ
23 慣性計測装置
24 角度検出器
25 ヨー軸回転機構
26 ピッチ軸回転機構
27 ロール軸回転機構
28 インタフェース
29 操作部
30 カメラ
31 撮像制御部
32 レンズ制御部
33 メモリ
34 撮像素子
35,36 レンズ駆動部
37 フォーカスレンズ
38 ズームレンズ
50 モニタ
50B 携帯端末
60 装置本体
63 取付部
100 無人航空機
102 UAV本体
210 取付部
211 解除ボタン
215 ヨー軸モータ
216 ロール軸モータ
217 ピッチ軸モータ
220,230 撮像部
221,222 アーム部材
311 筐体
315 取付部
330 把持部
610 操作面
611 シャッタボタン
612 録画ボタン
613 操作ボタン
614 インジケータ
620 把持部
10,10B Gimbal camera device 20, 20B, 200 Gimbal 21 Gimbal control unit 22 Memory 23 Inertial measurement unit 24 Angle detector 25 Yaw axis rotation mechanism 26 Pitch axis rotation mechanism 27 Roll axis rotation mechanism 28 Interface 29 Operation unit 30 Camera 31 Imaging Control unit 32 Lens control unit 33 Memory 34 Image pickup element 35, 36 Lens drive unit 37 Focus lens 38 Zoom lens 50 Monitor 50B Mobile terminal 60 Device body 63 Mounting part 100 Unmanned aircraft 102 UAV body 210 Mounting part 211 Release button 215 Yaw axis motor 216 Roll axis motor 217 Pitch axis motor 220, 230 Imaging unit 221,222 Arm member 311 Housing 315 Mounting unit 330 Grip unit 610 Operation surface 611 Shutter button 612 Record button 613 Operation button 614 Indicator 620 Grip unit

Claims (12)

撮像部と、前記撮像部が搭載され前記撮像部の振れを補正するジンバル部と、を備える移動体であって、
前記ジンバル部は、
相互に直交する3軸の少なくとも1つの回転軸を中心に、前記撮像部を回転自在に支持し、
前記3軸の少なくとも1つの回転軸を中心に、前記撮像部を回転させるモータを備え、
前記撮像部により画像が撮像される撮像シーンが夜景シーンであるか否かを判定し、
前記撮像部により撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定し、
前記撮像シーンが夜景シーンであり、前記撮像モードが静止画撮像モードである場合、前記モータの回転許容量を小さくするよう制御し、前記撮像部で得られる画像信号の増幅量を小さくするよう前記撮像部に指示し、前記撮像部のシャッタスピードを遅くするよう前記撮像部に指示する、
移動体。
A mobile body including an imaging unit and a gimbal unit on which the imaging unit is mounted and for correcting the runout of the imaging unit.
The gimbal part is
The imaging unit is rotatably supported around at least one of three axes that are orthogonal to each other.
A motor for rotating the image pickup unit is provided around at least one rotation axis of the three axes.
It is determined whether or not the imaging scene in which the image is captured by the imaging unit is a night view scene.
It is determined whether or not the imaging mode for imaging by the imaging unit is the still image imaging mode for capturing a still image.
When the imaging scene is a night scene and the imaging mode is a still image imaging mode, the motor is controlled to reduce the rotation allowance, and the amplification amount of the image signal obtained by the imaging unit is reduced. Instruct the imaging unit to slow down the shutter speed of the imaging unit.
Mobile body.
前記撮像部は、前記ジンバル部により制御された前記回転許容量で、前記静止画を撮像し、
前記ジンバル部は、前記ジンバル部により制御された前記回転許容量を、前記ジンバル部により制御される前の状態に復帰する、
請求項1に記載の移動体。
The imaging unit captures the still image with the rotation allowance controlled by the gimbal unit.
The gimbal portion returns the rotation allowance controlled by the gimbal portion to the state before being controlled by the gimbal portion.
The mobile body according to claim 1.
前記撮像部は、前記ジンバル部により指示された前記画像信号の増幅量及び前記シャッタスピードで、前記静止画を撮像し、
前記ジンバル部は、前記ジンバル部により指示された前記画像信号の増幅量及び前記シャッタスピードを、前記ジンバル部により指示される前の状態に復帰する、
請求項1に記載の移動体。
The imaging unit captures the still image with the amplification amount of the image signal and the shutter speed instructed by the gimbal unit.
The gimbal portion returns the amplification amount of the image signal and the shutter speed instructed by the gimbal portion to the state before being instructed by the gimbal portion.
The mobile body according to claim 1.
前記ジンバル部は、前記撮像部により撮像されたライブビュー画像の輝度に基づいて、前記夜景シーンであるか否かを判定する、
請求項1〜3のいずれか1項に記載の移動体。
The gimbal unit determines whether or not it is the night view scene based on the brightness of the live view image captured by the imaging unit.
The moving body according to any one of claims 1 to 3.
ユーザにより把持される把持部、を更に備える、
請求項1〜4のいずれか1項に記載の移動体。
A grip portion that is gripped by the user is further provided.
The moving body according to any one of claims 1 to 4.
前記移動体の飛行を制御する制御部、を更に備える、
請求項1〜4のいずれか1項に記載の移動体。
A control unit that controls the flight of the moving body is further provided.
The moving body according to any one of claims 1 to 4.
撮像部と、
前記撮像部が搭載され、前記撮像部の振れを補正し、相互に直交する3軸の少なくとも1つの回転軸を中心に前記撮像部を回転自在に支持し、前記3軸の少なくとも1つの回転軸を中心に前記撮像部を回転させるモータを備えるジンバル部と、
を備える移動体における撮像制御方法であって、
前記撮像部により画像が撮像される撮像シーンが夜景シーンであるか否かを判定するステップと、
前記撮像部により撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定するステップと、
前記撮像シーンが夜景シーンであり、前記撮像モードが静止画撮像モードである場合、前記モータの回転許容量を小さくし、前記撮像部で得られる画像信号の増幅量を小さくし、前記撮像部のシャッタスピードを遅くするよう制御するステップと、
を有する撮像制御方法。
Imaging unit and
The image pickup unit is mounted, the vibration of the image pickup unit is corrected, the image pickup unit is rotatably supported around at least one rotation axis of three axes orthogonal to each other, and at least one rotation axis of the three axes is supported. A gimbal unit including a motor that rotates the image pickup unit around the
It is an image pickup control method in a moving body provided with
A step of determining whether or not the imaging scene in which an image is captured by the imaging unit is a night view scene,
A step of determining whether or not the imaging mode for imaging by the imaging unit is a still image imaging mode for capturing a still image, and
When the imaging scene is a night view scene and the imaging mode is a still image imaging mode, the rotation allowance of the motor is reduced, the amplification amount of the image signal obtained by the imaging unit is reduced, and the imaging unit is used. Steps to control the shutter speed to slow down,
Imaging control method having.
制御された前記回転許容量で、前記静止画を撮像するステップと、
制御された前記回転許容量を、制御される前の状態に復帰するステップと、更に含む、
請求項7に記載の撮像制御方法。
The step of capturing the still image with the controlled rotation allowance, and
The controlled rotation allowance is further included with a step of returning to the state before being controlled.
The imaging control method according to claim 7.
制御された前記画像信号の増幅量及び前記シャッタスピードで、前記静止画を撮像するステップと、
制御された前記画像信号の増幅量及び前記シャッタスピードを、制御される前の状態に復帰するステップと、更に含む、
請求項8に記載の撮像制御方法。
A step of capturing the still image with the controlled amplification amount of the image signal and the shutter speed, and
A step of returning the controlled amplification amount of the image signal and the shutter speed to the state before being controlled is further included.
The imaging control method according to claim 8.
前記夜景シーンであるか否かを判定するステップは、前記撮像部により撮像されたライブビュー画像の輝度に基づいて、前記夜景シーンであるか否かを判定する、
請求項7〜9のいずれか1項に記載の撮像制御方法。
The step of determining whether or not it is a night view scene determines whether or not it is a night view scene based on the brightness of the live view image captured by the imaging unit.
The imaging control method according to any one of claims 7 to 9.
撮像部と、
前記撮像部が搭載され、前記撮像部の振れを補正し、相互に直交する3軸の少なくとも1つの回転軸を中心に前記撮像部を回転自在に支持し、前記3軸の少なくとも1つの回転軸を中心に前記撮像部を回転させるモータを備えるジンバル部と、
を備える移動体に、
前記撮像部により画像が撮像される撮像シーンが夜景シーンであるか否かを判定するステップと、
前記撮像部により撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定するステップと、
前記撮像シーンが夜景シーンであり、前記撮像モードが静止画撮像モードである場合、前記モータの回転許容量を小さくし、前記撮像部で得られる画像信号の増幅量を小さくし、前記撮像部のシャッタスピードを遅くするよう制御するステップと、
を実行させるためのプログラム。
Imaging unit and
The image pickup unit is mounted, the vibration of the image pickup unit is corrected, the image pickup unit is rotatably supported around at least one rotation axis of three axes orthogonal to each other, and at least one rotation axis of the three axes is supported. A gimbal unit including a motor that rotates the image pickup unit around the
For mobiles equipped with
A step of determining whether or not the imaging scene in which an image is captured by the imaging unit is a night view scene,
A step of determining whether or not the imaging mode for imaging by the imaging unit is a still image imaging mode for capturing a still image, and
When the imaging scene is a night view scene and the imaging mode is a still image imaging mode, the rotation allowance of the motor is reduced, the amplification amount of the image signal obtained by the imaging unit is reduced, and the imaging unit is used. Steps to control the shutter speed to slow down,
A program to execute.
撮像部と、
前記撮像部が搭載され、前記撮像部の振れを補正し、相互に直交する3軸の少なくとも1つの回転軸を中心に前記撮像部を回転自在に支持し、前記3軸の少なくとも1つの回転軸を中心に前記撮像部を回転させるモータを備えるジンバル部と、
を備える移動体に、
前記撮像部により画像が撮像される撮像シーンが夜景シーンであるか否かを判定するステップと、
前記撮像部により撮像するための撮像モードが静止画を撮像するための静止画撮像モードであるか否かを判定するステップと、
前記撮像シーンが夜景シーンであり、前記撮像モードが静止画撮像モードである場合、前記モータの回転許容量を小さくし、前記撮像部で得られる画像信号の増幅量を小さくし、前記撮像部のシャッタスピードを遅くするよう制御するステップと、
を実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体。
Imaging unit and
The image pickup unit is mounted, the vibration of the image pickup unit is corrected, the image pickup unit is rotatably supported around at least one rotation axis of three axes orthogonal to each other, and at least one rotation axis of the three axes is supported. A gimbal unit including a motor that rotates the image pickup unit around the
For mobiles equipped with
A step of determining whether or not the imaging scene in which an image is captured by the imaging unit is a night view scene,
A step of determining whether or not the imaging mode for imaging by the imaging unit is a still image imaging mode for capturing a still image, and
When the imaging scene is a night view scene and the imaging mode is a still image imaging mode, the rotation allowance of the motor is reduced, the amplification amount of the image signal obtained by the imaging unit is reduced, and the imaging unit is used. Steps to control the shutter speed to slow down,
A computer-readable recording medium that contains a program for executing the program.
JP2018141602A 2018-07-27 2018-07-27 Mobile objects, imaging control methods, programs, and recording media Active JP6865720B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018141602A JP6865720B2 (en) 2018-07-27 2018-07-27 Mobile objects, imaging control methods, programs, and recording media

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018141602A JP6865720B2 (en) 2018-07-27 2018-07-27 Mobile objects, imaging control methods, programs, and recording media

Publications (2)

Publication Number Publication Date
JP2020017924A JP2020017924A (en) 2020-01-30
JP6865720B2 true JP6865720B2 (en) 2021-04-28

Family

ID=69580692

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018141602A Active JP6865720B2 (en) 2018-07-27 2018-07-27 Mobile objects, imaging control methods, programs, and recording media

Country Status (1)

Country Link
JP (1) JP6865720B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023092556A1 (en) * 2021-11-29 2023-06-01 深圳市大疆创新科技有限公司 Control method and control system

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8087315B2 (en) * 2006-10-10 2012-01-03 Honeywell International Inc. Methods and systems for attaching and detaching a payload device to and from, respectively, a gimbal system without requiring use of a mechanical tool
JP2015171064A (en) * 2014-03-10 2015-09-28 ソニー株式会社 Light projector, imaging apparatus, beam light control method and program

Also Published As

Publication number Publication date
JP2020017924A (en) 2020-01-30

Similar Documents

Publication Publication Date Title
US9648229B2 (en) Image processing device and associated methodology for determining a main subject in an image
JP6904843B2 (en) Imaging device and its control method
WO2019227441A1 (en) Video control method and device of movable platform
JP2017072986A (en) Autonomous flying device, control method and program of autonomous flying device
JP2016090973A (en) Imaging device
WO2019104569A1 (en) Focusing method and device, and readable storage medium
WO2020227998A1 (en) Image stability augmentation control method, photography device and movable platform
JP6056774B2 (en) Imaging apparatus, imaging method, and program.
CN110291777B (en) Image acquisition method, device and machine-readable storage medium
CN109076101B (en) Holder control method, device and computer readable storage medium
JP6865720B2 (en) Mobile objects, imaging control methods, programs, and recording media
JP2020020878A (en) Moving vehicle, focus control method, program, and recording medium
US20230341079A1 (en) Control method based on image capturing apparatus, control method and apparatus for gimbal
JP2021096865A (en) Information processing device, flight control instruction method, program, and recording medium
CN112189333B (en) Following shooting, holder control method, shooting device, handheld holder and shooting system
JP6641573B1 (en) Determination device, imaging device, imaging system, moving object, determination method, and program
WO2022041013A1 (en) Control method, handheld gimbal, system, and computer readable storage medium
JP2018197825A (en) Control device and method, and imaging device
US9106822B2 (en) Image apparatus with motion control
JP2007208310A (en) Photographing method by digital camera using gimbal
KR102085866B1 (en) Image photographing device, image photographing system and method of operation the same
JP2021100239A (en) Tracking device, control method of the same, and imaging apparatus
CN111213370B (en) Moving object, focus control method, program, and recording medium
JP2021142819A (en) Flight vehicle, vehicle monitoring system, flight vehicle control method and flight control program
JP6700868B2 (en) Imaging control device and control method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200109

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210309

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210406

R150 Certificate of patent or registration of utility model

Ref document number: 6865720

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150