Nothing Special   »   [go: up one dir, main page]

JP2015103944A - Imaging apparatus and image signal processing method - Google Patents

Imaging apparatus and image signal processing method Download PDF

Info

Publication number
JP2015103944A
JP2015103944A JP2013242742A JP2013242742A JP2015103944A JP 2015103944 A JP2015103944 A JP 2015103944A JP 2013242742 A JP2013242742 A JP 2013242742A JP 2013242742 A JP2013242742 A JP 2013242742A JP 2015103944 A JP2015103944 A JP 2015103944A
Authority
JP
Japan
Prior art keywords
output
image signal
image
imaging mode
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013242742A
Other languages
Japanese (ja)
Other versions
JP6207360B2 (en
Inventor
貴史 影山
Takashi Kageyama
貴史 影山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2013242742A priority Critical patent/JP6207360B2/en
Priority to US14/551,224 priority patent/US9924094B2/en
Priority to DE102014223858.7A priority patent/DE102014223858B4/en
Priority to DE102014020074.4A priority patent/DE102014020074B3/en
Priority to GB1601511.7A priority patent/GB2534040B/en
Priority to CN201410687648.0A priority patent/CN104660894B/en
Priority to GB1420914.2A priority patent/GB2522747B/en
Publication of JP2015103944A publication Critical patent/JP2015103944A/en
Application granted granted Critical
Publication of JP6207360B2 publication Critical patent/JP6207360B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To switch an imaging drive mode for live view without lowering accuracy of other processes during the live view display and generating freeze of the live view display.SOLUTION: When an image signal is acquired through a first output channel and a second output channel from an image pickup element, the image signal of the first output channel is used for live view, and the image signal of the second output channel is used for uses except live view, a drive mode of the image pickup element is switched so that the image signal output from the second output channel can be used for live view, an acquisition destination of the image signal for live view is switched from the first output channel to the second output channel, the drive mode of the image pickup element is switched from the first output channel so that the image signal for high definition live view can be output, and an acquisition destination of the image signal for live view is switched from the second output channel to the first output channel, thereby the live view is changed to the high definition display without generating freeze of the display.

Description

本発明は、画像信号を2つ以上の経路から同時に出力することができる撮像センサを備える撮像装置と、この撮像装置で実行される画像信号処理方法に関する。   The present invention relates to an imaging apparatus including an imaging sensor capable of simultaneously outputting image signals from two or more paths, and an image signal processing method executed by the imaging apparatus.

CCDセンサやCMOSセンサ等の撮像素子を用いた撮像装置には、ライブビュー機能を有するものがある。ライブビュー機能とは、撮像素子から連続的に読み出された画像信号に基づく画像を、撮像装置の背面等に設けられた液晶ディスプレイ等の表示装置に、順次、出力することによって、被写体像の確認を行うことができる機能である。   Some imaging devices using an imaging element such as a CCD sensor or a CMOS sensor have a live view function. The live view function is to sequentially output an image based on an image signal continuously read from the image sensor to a display device such as a liquid crystal display provided on the back surface of the image pickup device, thereby This is a function that can be confirmed.

撮像装置の電源としてバッテリを使用する場合、撮影待機状態ではライブビュー表示のための消費電力を抑えることが望ましいが、その一方で、高精細なライブビュー表示が望まれる場面もある。そこで、無操作状態のライブビュー表示と撮影準備状態(例えば、シャッタボタンが半押しされて、被写体に対するAF動作等が行われる状態)とで、ライブビュー表示方式を切り替える技術が知られている。   When a battery is used as the power source of the image pickup apparatus, it is desirable to suppress power consumption for live view display in a shooting standby state, but there are also situations where high-definition live view display is desired. Therefore, a technique for switching the live view display method between a live view display in a non-operation state and a shooting preparation state (for example, a state in which an AF operation or the like is performed on a subject when the shutter button is half-pressed) is known.

高精細なライブビュー表示のための技術が、例えば、特許文献1に提案されている。特許文献1では、画素に対する露光時間を行単位等の画素領域単位で異なるように制御して高感度画素情報と低感度画素情報を取得し、これらの異なる感度の画素情報に基づいて出力画素値を決定することにより、広ダイナミックレンジ画像の生成を可能としている。   A technique for high-definition live view display is proposed in Patent Document 1, for example. In Patent Document 1, high-sensitivity pixel information and low-sensitivity pixel information are acquired by controlling the exposure time for pixels to be different for each pixel area such as a row unit, and output pixel values based on pixel information of these different sensitivities. Thus, it is possible to generate a wide dynamic range image.

特開2012−105225号公報JP 2012-105225 A

しかしながら、ライブビュー表示を低消費電力モードの低画質表示と撮影準備のための高精細表示とで切り替えるためには、ライブビュー用の撮影駆動モードを切り替える必要がある。ライブビュー用の撮影駆動モードを切り替えるときにはタイムラグが生じるため、その間のライブビュー用画像が得られず、ライブビュー画面のフリーズ(同画像の連続表示時間が延びてしまうこと)が発生してしまう。   However, in order to switch the live view display between the low image quality display in the low power consumption mode and the high definition display for preparation for shooting, it is necessary to switch the shooting driving mode for live view. Since a time lag occurs when switching the shooting driving mode for live view, a live view image during that time cannot be obtained, and the live view screen is frozen (the continuous display time of the image is extended).

そこで、本発明は、ライブビュー表示のフリーズを発生させずにライブビュー用の撮影駆動モードを切り替えることを可能にする技術を提供することを目的とする。   SUMMARY OF THE INVENTION An object of the present invention is to provide a technique that makes it possible to switch a shooting drive mode for live view without causing a freeze of live view display.

本発明に係る撮像装置は、行方向と列方向に並べられた複数の画素を有する撮像素子と、前記撮像素子の所定の行の画素から画像信号を読み出す第1の撮像モードと、前記撮像素子からの画像信号の読み出し行数が前記第1の撮像モードでの画像信号の読み出し行数とは異なる第2の撮像モードと、前記撮像素子からの画像信号の読み出し行が前記第1の撮像モードおよび前記第2の撮像モードでの画像信号の読み出し行と重複しない第3の撮像モードとから選ばれた1又は複数の撮像モードで前記撮像素子を駆動する駆動手段と、前記第1の撮像モード、前記第2の撮像モード及び前記第3の撮像モードのうちの少なくとも2つの撮像モードが実行されたときに前記撮像素子から読み出された画像信号を別々に出力するための第1の出力経路と第2の出力経路とを含む少なくとも2つの出力経路を有する出力手段と、前記第1の出力経路から出力される前記第1の撮像モードでの画像信号を表示手段における画像表示に用い、前記第2の出力経路からの出力される前記第3の撮像モードによる画像信号を前記画像表示とは異なる用途に用いている状態から、前記画像表示に用いる画像信号を前記第1の撮像モードでの画像信号から前記第2の撮像モードでの画像信号へ切り替えるときに、前記画像表示に用いる画像信号の取得先を一時的に前記第1の出力経路から前記第2の出力経路に切り替え、前記第1の出力経路から前記第2の撮像モードでの画像信号が出力されるように前記第1の撮像モードを前記第2の撮像モードへ切り替え、前記画像表示に用いる画像信号の取得先を前記第2の出力経路から前記第1の出力経路へ切り替える制御手段とを備えることを特徴とする。   An imaging device according to the present invention includes an imaging device having a plurality of pixels arranged in a row direction and a column direction, a first imaging mode for reading an image signal from pixels in a predetermined row of the imaging device, and the imaging device A second imaging mode in which the number of readout rows of the image signal from the first imaging mode is different from the number of readout rows of the image signal in the first imaging mode, and a readout row of the image signal from the imaging element is the first imaging mode. Driving means for driving the imaging device in one or a plurality of imaging modes selected from the third imaging mode that does not overlap with the readout row of the image signal in the second imaging mode, and the first imaging mode A first output path for separately outputting image signals read from the image sensor when at least two of the second imaging mode and the third imaging mode are executed. Output means having at least two output paths including a second output path and an image signal in the first imaging mode output from the first output path for image display on a display means, From the state where the image signal output from the second output path in the third imaging mode is used for an application different from the image display, the image signal used for the image display is used in the first imaging mode. When switching from an image signal to an image signal in the second imaging mode, the acquisition source of the image signal used for the image display is temporarily switched from the first output path to the second output path, The first imaging mode is switched to the second imaging mode so that the image signal in the second imaging mode is output from one output path, and the acquisition destination of the image signal used for the image display is changed. And a controlling means for switching from the serial second output path to the first output path.

本発明によれば、撮像素子から第1の出力経路と第2の出力経路を通して画像信号を取得し、第1の出力経路の画像信号をライブビュー表示(画像表示)に用い、第2の出力経路の画像信号をライブビュー表示以外の用途に用いる。このとき、先ず、第2の出力経路から出力される画像信号をライブビュー表示に用いることができるように撮像素子の駆動モードを切り替え、ライブビュー表示用の画像信号の取得先を第1の出力経路から第2の出力経路へ切り替える。次に、第1の出力経路から精細度の異なるライブビュー表示用の画像信号が出力されるように撮像素子の駆動モードを切り替え、ライブビュー表示用の画像信号の取得先を第2の出力経路から第1の出力経路へ切り替える。   According to the present invention, an image signal is acquired from the image sensor through the first output path and the second output path, the image signal of the first output path is used for live view display (image display), and the second output The image signal of the route is used for purposes other than live view display. At this time, first, the drive mode of the image sensor is switched so that the image signal output from the second output path can be used for live view display, and the acquisition source of the image signal for live view display is the first output. Switch from the path to the second output path. Next, the drive mode of the image sensor is switched so that live view display image signals of different definition are output from the first output path, and the acquisition source of the live view display image signals is set to the second output path. To the first output path.

これにより、ライブビュー表示のフリーズを発生させることなく、ライブビュー表示用の撮影駆動モードを切り替えることができ、ユーザのライブビュー表示の利用時のストレスを軽減して、利便性を向上させることができる。   As a result, it is possible to switch the shooting drive mode for live view display without causing the freeze of live view display, reducing the stress when using the user's live view display, and improving convenience. it can.

本発明の実施形態に係るデジタルカメラの外観を背面側から見て示す斜視図である。It is a perspective view which shows the external appearance of the digital camera which concerns on embodiment of this invention seeing from the back side. 図1のデジタルカメラのハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware constitutions of the digital camera of FIG. 図1のデジタルカメラの撮像部が備える撮像素子の構造を表す概略斜視図(a)とその構成を示すブロック図(b)である。FIG. 2 is a schematic perspective view (a) showing a structure of an image pickup element included in the image pickup unit of the digital camera of FIG. 1 and a block diagram (b) showing the configuration thereof. 図1のデジタルカメラにおけるライブビュー表示時における、図3の撮像素子からの信号の読み出し行を模式的に説明する図である。FIG. 4 is a diagram schematically illustrating a signal reading line from the image sensor of FIG. 3 during live view display in the digital camera of FIG. 1. 図1のデジタルカメラの独立AF動作時の撮像部におけるCh1の出力信号、Ch2の出力信号及び独立AF動作開始信号の関係を示すタイミングチャートである。2 is a timing chart showing the relationship between an output signal of Ch1, an output signal of Ch2, and an independent AF operation start signal in the imaging unit during the independent AF operation of the digital camera of FIG. 従来技術を用いた場合に想定される、通常ライブビュー用撮像駆動モードをより高精細な高精細ライブビュー用撮像駆動モードへと切り替えするときのタイミングチャートである。It is a timing chart when switching the normal live view imaging drive mode to a higher definition high-definition live view imaging drive mode that is assumed when the conventional technology is used. 従来技術を用いた場合に想定される、シャッタボタンの第1スイッチの操作(半押し)が行われたときのライブビューモードの切り替え処理のフローチャートである。It is a flowchart of the switching process of the live view mode when operation (half press) of the 1st switch of a shutter button assumed when the prior art is used. 従来技術に係る図7のフローチャートに従う撮像駆動モードの切り替えに伴う撮像信号の変化等を示すタイミングチャートである。It is a timing chart which shows the change etc. of the imaging signal accompanying switching of the imaging drive mode according to the flowchart of FIG. 図1のデジタルカメラでの、独立AF動作中であるが撮像素子内AF評価モードではない場合において第1スイッチが操作されたときに実行される画像信号処理のフローチャートである。6 is a flowchart of image signal processing executed when the first switch is operated when the independent AF operation is being performed but the AF evaluation mode is not in the imaging device in the digital camera of FIG. 1. 図9のフローチャートに従う撮像駆動モードの切り替えに伴う撮像信号の変化等を示すタイミングチャートである。FIG. 10 is a timing chart showing a change in an imaging signal associated with switching of an imaging drive mode according to the flowchart of FIG. 9. FIG. 図1のデジタルカメラでの、独立AF動作中ではない状態において第1スイッチが操作されたときに実行される画像信号処理のフローチャートである。6 is a flowchart of image signal processing executed when the first switch is operated in the state where the independent AF operation is not being performed in the digital camera of FIG. 1. 図11のフローチャートに従う駆動モードの切り替えに伴う撮像信号の変化等を示すタイミングチャートである。FIG. 12 is a timing chart showing a change in an imaging signal associated with switching of a drive mode according to the flowchart of FIG. 11. 図9のフローチャートのステップS904において、ライブビュー用撮像信号の取得先がCh1からCh2へ切り替えられた後、そのままCh2からの出力信号をライブビュー用に用いる場合の画像信号処理のタイミングチャートである。FIG. 10 is a timing chart of image signal processing in a case where the output signal from Ch2 is used for live view as it is after the acquisition source of the live view imaging signal is switched from Ch1 to Ch2 in step S904 of the flowchart of FIG. 図11のフローチャートのステップS1103において、ライブビュー用撮像信号の取得先がCh1からCh2へ切り替えられた後、そのままCh2からの出力信号をライブビュー用に用いる場合の画像信号処理のタイミングチャートである。FIG. 12 is a timing chart of image signal processing when an output signal from Ch2 is used for live view as it is after the acquisition source of the live view imaging signal is switched from Ch1 to Ch2 in step S1103 of the flowchart of FIG.

以下、本発明の実施の形態について、添付図面を参照して詳細に説明する。ここでは、本発明に係る撮像装置として、コンパクトタイプのデジタルカメラ(以下「デジタルカメラ」という)を取り上げることとするが、本発明はこれに限定されるものではない。   Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. Here, although a compact digital camera (hereinafter referred to as “digital camera”) is taken up as an imaging apparatus according to the present invention, the present invention is not limited to this.

<第1実施形態>
図1は、本発明の第1実施形態に係るデジタルカメラ100の外観を背面側から見て示す斜視図である。
<First Embodiment>
FIG. 1 is a perspective view showing the appearance of the digital camera 100 according to the first embodiment of the present invention as seen from the back side.

デジタルカメラ100の背面には、画像や各種情報を表示する表示部101が設けられている。表示部101は、例えば、液晶ディスプレイ或いは有機ELディスプレイ等であり、タッチパネルとして入力機能を備えることにより操作部として機能するものであってもよい。また、デジタルカメラ100の背面には、ユーザによる各種操作を受け付ける各種スイッチやボタン等の操作部材からなる操作部102と、被写体に対する撮影モード等を切り替えるモード切り替えスイッチ104と、回転操作可能なコントローラホイール103が設けられている。なお、操作部102の一部は、デジタルカメラ100の上面にも設けられている。操作部102、コントローラホイール103及びモード切り替えスイッチ104の機能等の詳細については、図2を参照して後述する。   On the back of the digital camera 100, a display unit 101 for displaying images and various information is provided. The display unit 101 is, for example, a liquid crystal display or an organic EL display, and may function as an operation unit by providing an input function as a touch panel. Further, on the back of the digital camera 100, an operation unit 102 including operation members such as various switches and buttons for receiving various operations by a user, a mode switching switch 104 for switching a photographing mode for a subject, and a controller wheel that can be rotated. 103 is provided. A part of the operation unit 102 is also provided on the upper surface of the digital camera 100. Details of functions of the operation unit 102, the controller wheel 103, and the mode changeover switch 104 will be described later with reference to FIG.

デジタルカメラ100の上面には、撮影指示を行うシャッタボタン121と、デジタルカメラ100の電源オン/電源オフを切り替える電源スイッチ122とが設けられている。シャッタボタン121の機能の詳細については、図2を参照して後述する。   On the top surface of the digital camera 100, a shutter button 121 for instructing photographing and a power switch 122 for switching the power on / off of the digital camera 100 are provided. Details of the function of the shutter button 121 will be described later with reference to FIG.

デジタルカメラ100の側面には、接続ケーブル111及びコネクタ112を介して、外部装置を接続することができるようになっている。デジタルカメラ100は、接続ケーブル111及びコネクタ112を介して、外部装置に画像データ(静止画データ、動画データ)を出力することができる。   An external device can be connected to the side surface of the digital camera 100 via a connection cable 111 and a connector 112. The digital camera 100 can output image data (still image data, moving image data) to an external device via the connection cable 111 and the connector 112.

デジタルカメラ100の下面には、蓋131により開閉可能な記憶媒体スロット(不図示)が設けられており、記憶媒体スロットには、メモリカード等の記憶媒体130を挿抜することができるようになっている。記憶媒体スロットに格納された記憶媒体130は、デジタルカメラ100の制御部(図2を参照して説明するシステム制御部210)と通信可能である。なお、記憶媒体130は、記憶媒体スロットに対して挿抜可能なメモリカード等に限定されるものではなく、DVD−RWディスク等の光学ディスクやハードディスク等の磁気ディスクであってもよく、更に、カメラ本体に内蔵されていてもよい。   A storage medium slot (not shown) that can be opened and closed by a lid 131 is provided on the lower surface of the digital camera 100, and a storage medium 130 such as a memory card can be inserted into and removed from the storage medium slot. Yes. The storage medium 130 stored in the storage medium slot can communicate with the control unit of the digital camera 100 (system control unit 210 described with reference to FIG. 2). The storage medium 130 is not limited to a memory card that can be inserted into and removed from the storage medium slot, but may be an optical disk such as a DVD-RW disk or a magnetic disk such as a hard disk. It may be built in the main body.

図2は、デジタルカメラ100のハードウェア構成を示すブロック図である。デジタルカメラ100は、バリア201と、撮像光学系を構成する撮影レンズ202及びシャッタ203と、撮像部204と、AF評価値算出部205と、ストロボ217とを備える。   FIG. 2 is a block diagram illustrating a hardware configuration of the digital camera 100. The digital camera 100 includes a barrier 201, a photographing lens 202 and a shutter 203 that constitute an imaging optical system, an imaging unit 204, an AF evaluation value calculation unit 205, and a strobe 217.

バリア201は、撮像光学系を覆うことにより、撮像光学系の汚れや破損を防止する。撮影レンズ202は、ズームレンズ、フォーカスレンズを含むレンズ群により構成される。シャッタ203は、絞り機能を備え、露光量を調節する。撮像部204は、光学像を電気信号(アナログ信号)に変換する撮像素子を有する。撮像素子は、具体的には、CCDセンサやCMOSセンサである。また、撮像部204は、A/D変換処理機能を備えており、撮像素子から出力されるアナログ電気信号をデジタル信号(デジタル画像データ)へ変換する。   The barrier 201 covers the imaging optical system to prevent the imaging optical system from being soiled or damaged. The photographing lens 202 is constituted by a lens group including a zoom lens and a focus lens. The shutter 203 has a diaphragm function and adjusts the exposure amount. The imaging unit 204 includes an imaging element that converts an optical image into an electrical signal (analog signal). Specifically, the image sensor is a CCD sensor or a CMOS sensor. The imaging unit 204 has an A / D conversion processing function, and converts an analog electric signal output from the imaging element into a digital signal (digital image data).

AF評価値検出部205は、撮像部204により生成されたデジタル信号から得られるコントラスト情報等からAF評価値を算出し、得られたAF評価値を後述のシステム制御部210へ撮像部204を通して出力する。ストロボ217を撮影時に発光させることにより、低照度シーンでの撮影や逆光シーンでの撮影時に照度を補うことができる。   The AF evaluation value detection unit 205 calculates an AF evaluation value from contrast information obtained from the digital signal generated by the imaging unit 204, and outputs the obtained AF evaluation value to the system control unit 210, which will be described later, through the imaging unit 204. To do. By making the strobe light 217 emit light at the time of shooting, the illuminance can be supplemented when shooting in a low-light scene or shooting in a backlight scene.

デジタルカメラ100は、画像処理部206、メモリ制御部207、D/A変換器208、メモリ209、システム制御部210、不揮発性メモリ211、システムタイマ212、システムメモリ213及び表示部101を備える。   The digital camera 100 includes an image processing unit 206, a memory control unit 207, a D / A converter 208, a memory 209, a system control unit 210, a nonvolatile memory 211, a system timer 212, a system memory 213, and a display unit 101.

画像処理部206とメモリ制御部207は、撮像部204においてA/D変換処理により生成されたデジタル信号を受信する。画像処理部206は、撮像部204から受信するデータ(デジタル画像データ)又はメモリ制御部207から受信するデータに対し、所定の画素補間や縮小等のリサイズ処理、色変換処理等の信号処理を行う。また、画像処理部206では、撮影した画像の画像データを用いて所定の演算処理が行われ、システム制御部210は、画像処理部206が生成した演算結果を用いて露光制御やフォーカス制御を行う。例えば、システム制御部210により、TTL(スルー・ザ・レンズ)方式のAF(オートフォーカス)処理、AE(自動露出)処理、調光処理、AWB(オートホワイトバランス)処理等が行われる。なお、画像処理部206ではAF処理が行われるが、このとき撮像部204が備えるAF評価値検出部205の出力が用いられることもある。   The image processing unit 206 and the memory control unit 207 receive the digital signal generated by the A / D conversion process in the imaging unit 204. The image processing unit 206 performs signal processing such as predetermined pixel interpolation and resizing processing, color conversion processing, and the like on data received from the imaging unit 204 (digital image data) or data received from the memory control unit 207. . The image processing unit 206 performs predetermined arithmetic processing using image data of the captured image, and the system control unit 210 performs exposure control and focus control using the arithmetic result generated by the image processing unit 206. . For example, the system control unit 210 performs TTL (through the lens) AF (autofocus) processing, AE (automatic exposure) processing, light control processing, AWB (auto white balance) processing, and the like. The image processing unit 206 performs AF processing. At this time, the output of the AF evaluation value detection unit 205 included in the imaging unit 204 may be used.

撮像部204から出力されるデジタル信号(デジタル画像データ)は、画像処理部206及びメモリ制御部207を介して、或いは、メモリ制御部207を介して、メモリ209に書き込まれる。メモリ209は、この他にも、撮像部204によって取得されてA/D変換された画像データや、表示部101に表示する画像データを格納する。メモリ209は、所定枚数の静止画像や所定時間の動画像、音声データを格納することができる十分な記憶容量を備えている。また、メモリ209は、画像表示用メモリ(ビデオメモリ)を兼ねている。   A digital signal (digital image data) output from the imaging unit 204 is written into the memory 209 via the image processing unit 206 and the memory control unit 207 or via the memory control unit 207. In addition to this, the memory 209 stores image data acquired by the imaging unit 204 and subjected to A / D conversion, and image data to be displayed on the display unit 101. The memory 209 has a sufficient storage capacity capable of storing a predetermined number of still images, a moving image for a predetermined time, and audio data. The memory 209 also serves as an image display memory (video memory).

メモリ209に格納されている画像表示用のデジタルデータは、D/A変換器208に送信される。D/A変換器208は、受信したデジタルデータをアナログ信号に変換して表示部101に供給し、これにより表示部101に画像が表示される。表示部101は、前述の通り、液晶ディスプレイ等の表示器であり、D/A変換器208からのアナログ信号に基づいて画像を表示する。なお、撮像部204によってアナログ信号から変換されてメモリ209に蓄積されるデジタル信号を、D/A変換器208においてアナログ信号に変換して表示部101に逐次転送して表示することにより、電子ビューファインダ機能を実現することができる。即ち、こうして、スルー画像表示を行うことができるようになっている。   Digital data for image display stored in the memory 209 is transmitted to the D / A converter 208. The D / A converter 208 converts the received digital data into an analog signal and supplies it to the display unit 101, whereby an image is displayed on the display unit 101. As described above, the display unit 101 is a display such as a liquid crystal display, and displays an image based on an analog signal from the D / A converter 208. Note that a digital signal converted from an analog signal by the imaging unit 204 and stored in the memory 209 is converted into an analog signal by the D / A converter 208 and sequentially transferred to the display unit 101 for display, thereby displaying an electronic view. A finder function can be realized. That is, the through image display can be performed in this way.

不揮発性メモリ211は、電気的に消去や記憶が可能なメモリであり、例えば、フラッシュメモリ等に代表されるEEPROM等である。不揮発性メモリ211には、システム制御部210が実行するプログラムや動作用の定数等が記憶される。なお、ここでいうプログラムとは、後述する各フローチャートを実行するためのプログラムを指す。   The non-volatile memory 211 is a memory that can be electrically erased and stored, and is, for example, an EEPROM typified by a flash memory or the like. The nonvolatile memory 211 stores a program executed by the system control unit 210, operation constants, and the like. The program here refers to a program for executing each flowchart described later.

システム制御部210は、不揮発性メモリ211に記憶されている各種のプログラムを実行することにより、デジタルカメラ100の全体的な動作を制御し、その一例として、後述する各種の処理を実行する。更に、システム制御部210は、メモリ209やD/A変換器208、表示部101等を制御することにより、表示制御を行う。システム制御部210が不揮発性メモリ211から読み出したプログラムや動作用の定数や変数等は、システムメモリ213上に展開される。システムメモリ213には、RAMが用いられる。システムタイマ212は、各種の制御に用いる時間や内蔵された時計の時間を計測する。   The system control unit 210 controls the overall operation of the digital camera 100 by executing various programs stored in the nonvolatile memory 211, and executes various processes described below as an example. Further, the system control unit 210 performs display control by controlling the memory 209, the D / A converter 208, the display unit 101, and the like. Programs, operation constants, variables, and the like read from the nonvolatile memory 211 by the system control unit 210 are expanded on the system memory 213. A RAM is used as the system memory 213. The system timer 212 measures the time used for various controls and the time of a built-in clock.

図2に示される操作部102、コントローラホイール103、シャッタボタン121、モード切り替えスイッチ104、電源スイッチ122は、図1を参照して説明したものと同じである。   The operation unit 102, controller wheel 103, shutter button 121, mode switch 104, and power switch 122 shown in FIG. 2 are the same as those described with reference to FIG.

操作部102を構成する各種の操作部材は、表示部101に表示される種々の機能アイコンの選択等に用いられ、所定の機能アイコンが選択されることにより、場面毎に、適宜、機能が割り当てられる。即ち、操作部102の各操作部材は、各種の機能ボタンとして用いられる。   Various operation members constituting the operation unit 102 are used for selecting various function icons displayed on the display unit 101, and functions are appropriately assigned to each scene by selecting a predetermined function icon. It is done. That is, each operation member of the operation unit 102 is used as various function buttons.

回転操作が可能な操作部材であるコントローラホイール103は、4方向ボタンと共に選択項目を指示するとき等に使用される。コントローラホイール103を回転操作すると、操作量(回転角度や回転回数等)に応じた電気的なパルス信号が発生する。システム制御部210は、このパルス信号を解析して、デジタルカメラ100の各部を制御する。   A controller wheel 103, which is an operation member capable of rotating, is used when a selection item is instructed together with a four-way button. When the controller wheel 103 is rotated, an electrical pulse signal corresponding to the operation amount (rotation angle, number of rotations, etc.) is generated. The system control unit 210 analyzes the pulse signal and controls each unit of the digital camera 100.

なお、コントローラホイール103は、回転操作が検出できる操作部材であれば、部材自体が回転するものや、部材自体は回転しないがタッチセンサで回転操作を検出するものなど、どのようなものでもよい。   Note that the controller wheel 103 may be any operation member that can detect a rotation operation, such as a member that rotates itself, or a member that does not rotate but detects a rotation operation with a touch sensor.

シャッタボタン121は、第1スイッチSW1と、第2スイッチSW2とを有する。第1スイッチSW1は、シャッタボタン121の操作途中の半押し状態でONとなり、これにより、撮影準備を指示する信号がシステム制御部210に送信される。システム制御部210は、第1スイッチSW1がONになった信号を受信すると、AF処理、AE処理、AWB処理、調光処理等の動作を開始する。第2スイッチSW2は、シャッタボタン121の操作が完了する全押し状態でONとなり、これにより、撮影開始を指示する信号がシステム制御部210に送信される。システム制御部210は、第2スイッチSW2がONになった信号を受信すると、撮像部204からの信号読み出しから記憶媒体130への画像データの書き込みまでの一連の撮影動作を行う。   The shutter button 121 includes a first switch SW1 and a second switch SW2. The first switch SW <b> 1 is turned on when the shutter button 121 is half-pressed while the shutter button 121 is being operated, whereby a signal instructing preparation for shooting is transmitted to the system control unit 210. When receiving a signal that the first switch SW1 is turned on, the system control unit 210 starts operations such as AF processing, AE processing, AWB processing, and light control processing. The second switch SW2 is turned on when the shutter button 121 is fully pressed, and a signal instructing to start photographing is thereby transmitted to the system control unit 210. When receiving a signal with the second switch SW2 turned ON, the system control unit 210 performs a series of shooting operations from reading a signal from the imaging unit 204 to writing image data into the storage medium 130.

モード切り替えスイッチ104は、デジタルカメラ100の動作モードを、静止画記憶モード、動画記憶モード、再生モード等の各種モードの間で切り替えるためのスイッチである。静止画記憶モードには、例えば、オート撮影モード、オートシーン判定モード、マニュアルモード、撮影シーン別の撮影設定となる各種シーンモード、プログラムAEモード、カスタムモード等がある。モード切り替えスイッチ104の操作により、静止画撮影モードに含まれるこれらのモードのいずれかに、直接、切り替えることができるようになっている。但し、このような構成に限定されず、例えば、モード切り替えスイッチ104で静止画撮影モードに切り替えた後に、他の操作部材を用いて静止画撮影モードに含まれる前出のモードのいずれかに切り替えるようにしてもよい。同様に、動画撮影モードにも、複数のモードが含まれていてもよい。   The mode switch 104 is a switch for switching the operation mode of the digital camera 100 between various modes such as a still image storage mode, a moving image storage mode, and a reproduction mode. The still image storage mode includes, for example, an auto shooting mode, an auto scene determination mode, a manual mode, various scene modes serving as shooting settings for each shooting scene, a program AE mode, a custom mode, and the like. By operating the mode switching switch 104, it is possible to directly switch to one of these modes included in the still image shooting mode. However, the present invention is not limited to such a configuration. For example, after switching to the still image shooting mode with the mode switch 104, the operation mode is switched to one of the above modes included in the still image shooting mode using another operation member. You may do it. Similarly, the moving image shooting mode may include a plurality of modes.

デジタルカメラ100は、電源部214と、電源制御部215を備える。電源部214は、アルカリ電池やリチウム電池等の一次電池、NiCd電池やNiMH電池、Li電池等の二次電池、或いは、ACアダプター等であり、電源制御部215へ電力を供給する。電源制御部215は、電池検出回路やDC−DCコンバータ、通電ブロックを切り替えるスイッチ回路等により構成されている。電源制御部215は、電源部214における電池の装着の有無、電池の種類、電池残量等を検出し、その検出結果及びシステム制御部210の指示に基づいてDC−DCコンバータを制御し、必要な電圧を必要な期間、記憶媒体130を含む各部へ供給する。   The digital camera 100 includes a power supply unit 214 and a power supply control unit 215. The power supply unit 214 is a primary battery such as an alkaline battery or a lithium battery, a secondary battery such as a NiCd battery, a NiMH battery, or a Li battery, or an AC adapter, and supplies power to the power supply control unit 215. The power supply control unit 215 is configured by a battery detection circuit, a DC-DC converter, a switch circuit that switches an energization block, and the like. The power supply control unit 215 detects the presence / absence of the battery in the power supply unit 214, the type of battery, the remaining battery level, etc., and controls the DC-DC converter based on the detection result and the instruction of the system control unit 210, and is necessary A sufficient voltage is supplied to each part including the storage medium 130 for a necessary period.

デジタルカメラ100は、記憶媒体130が記憶媒体スロット(不図示)に装着された際に、記憶媒体130とシステム制御部210との間の通信を可能にするための記憶媒体I/F216を備える。記憶媒体130の詳細については、図1を参照して既に説明しているため、ここでの説明を省略する。   The digital camera 100 includes a storage medium I / F 216 that enables communication between the storage medium 130 and the system control unit 210 when the storage medium 130 is mounted in a storage medium slot (not shown). The details of the storage medium 130 have already been described with reference to FIG.

図3は、撮像部204が備える撮像素子の構造を表す概略斜視図(a)とその構成を示すブロック図(b)である。   FIG. 3 is a schematic perspective view (a) showing the structure of the image sensor provided in the imaging unit 204 and a block diagram (b) showing the configuration thereof.

撮像素子は、複数の画素301が形成されて光入射側に配置される第1のチップ30と、列走査回路313a,313bや行走査回路312等の画素駆動回路及びAF評価値検出部205(これらを「周辺回路」と称する)が形成された第2のチップ31とからなる。撮像素子は、第1のチップ30が第2のチップ31の上に積層されて構成されている。第1のチップ30に画素301を形成し、第2のチップ31に周辺回路を形成することにより、周辺回路と画素301の製造プロセスを分けることができ、これにより、周辺回路部の配線の細線化、高密度化による高速化、小型化、高機能化を実現することができる。   The imaging device includes a first chip 30 in which a plurality of pixels 301 are formed and arranged on the light incident side, pixel driving circuits such as column scanning circuits 313a and 313b and a row scanning circuit 312 and an AF evaluation value detection unit 205 ( These are referred to as “peripheral circuits”) and the second chip 31 formed thereon. The imaging element is configured by laminating a first chip 30 on a second chip 31. By forming the pixel 301 on the first chip 30 and forming the peripheral circuit on the second chip 31, the manufacturing process of the peripheral circuit and the pixel 301 can be separated. High speed, small size, and high functionality can be realized by increasing the density and increasing the density.

第1のチップ30は、マトリクス状に行方向と列方向に一定の間隔で配置された複数の画素301を有する。また、第1のチップ30は、各画素301に行方向(水平方向)に接続された転送信号線303と、リセット信号線304及び行選択信号線305と、各画素301の列方向に接続された列信号線302a,302bとを有する。列信号線302a,302bはそれぞれ、読み出し行単位によって接続先が区別されている。画素接続方式に関しては、図4を参照して後述する。   The first chip 30 has a plurality of pixels 301 arranged in a matrix at regular intervals in the row direction and the column direction. The first chip 30 is connected to each pixel 301 in the row direction (horizontal direction), the transfer signal line 303, the reset signal line 304 and the row selection signal line 305, and the column direction of each pixel 301. Column signal lines 302a and 302b. The connection destinations of the column signal lines 302a and 302b are distinguished by the read row unit. The pixel connection method will be described later with reference to FIG.

第2のチップ31は、列信号線302a,302bがそれぞれ接続されるカラムADCブロック311と、各行を走査する行走査回路312と、各列を走査する列走査回路313a,313bを有する。また、第2のチップ31は、タイミング制御回路314と、水平信号線315a,315bと、フレームメモリ317と、AF評価値検出部205と、スイッチ316とを有する。   The second chip 31 includes a column ADC block 311 to which the column signal lines 302a and 302b are connected, a row scanning circuit 312 that scans each row, and column scanning circuits 313a and 313b that scan each column. The second chip 31 includes a timing control circuit 314, horizontal signal lines 315a and 315b, a frame memory 317, an AF evaluation value detection unit 205, and a switch 316.

タイミング制御回路314は、システム制御部210からの制御信号を受けて、行走査回路312、列走査回路313a,313b及びカラムADCブロック311のそれぞれのタイミングを制御する。水平信号線315a,315bは、列走査回路313a,313bにより制御されるタイミングに従い、カラムADCブロック311からのデジタル信号を転送する。フレームメモリ317は、水平信号線315bから出力される画像信号である後述のAF評価値検出用撮像信号を一時的に記憶する。AF評価値検出部205(適宜、図2参照)は、フレームメモリ317から出力されるAF評価値検出用撮像信号からAF評価値を検出する。スイッチ316は、水平信号線315bに出力されたAF評価値検出用撮像信号を、AF評価値検出部205へ出力するか又は画像処理部206へ出力するかを切り替える。   The timing control circuit 314 receives the control signal from the system control unit 210 and controls the respective timings of the row scanning circuit 312, the column scanning circuits 313 a and 313 b, and the column ADC block 311. The horizontal signal lines 315a and 315b transfer digital signals from the column ADC block 311 according to the timing controlled by the column scanning circuits 313a and 313b. The frame memory 317 temporarily stores a later-described AF evaluation value detection imaging signal that is an image signal output from the horizontal signal line 315b. The AF evaluation value detection unit 205 (see FIG. 2 as appropriate) detects the AF evaluation value from the AF evaluation value detection imaging signal output from the frame memory 317. The switch 316 switches whether to output the AF evaluation value detection imaging signal output to the horizontal signal line 315b to the AF evaluation value detection unit 205 or to the image processing unit 206.

撮像素子において、画素301は、フォトダイオードPD、フローティングディフュージョンFD、転送トランジスタM1、リセットトランジスタM2、増幅トランジスタM3及び選択トランジスタM4を含む。なお、ここでは、各トランジスタはnチャネルMOSFETであるとする。   In the imaging device, the pixel 301 includes a photodiode PD, a floating diffusion FD, a transfer transistor M1, a reset transistor M2, an amplification transistor M3, and a selection transistor M4. Here, each transistor is assumed to be an n-channel MOSFET.

転送トランジスタM1、リセットトランジスタM2及び選択トランジスタM4の各ゲートには、転送信号線303、リセット信号線304及び行選択信号線305が接続されている。これらの信号線は、行方向に延在して、同一行に含まれる画素301を同時に駆動するようになっており、これによりライン順次動作型のローリングシャッタや、全行同時動作型のグローバルシャッタの動作を制御することが可能になっている。選択トランジスタM4のソースには、列信号線302a又は列信号線302bが、行単位で分かれて接続されている。   A transfer signal line 303, a reset signal line 304, and a row selection signal line 305 are connected to the gates of the transfer transistor M1, the reset transistor M2, and the selection transistor M4. These signal lines extend in the row direction and simultaneously drive the pixels 301 included in the same row, thereby enabling a line-sequential operation type rolling shutter and an all-row simultaneous operation type global shutter. It is possible to control the operation. The column signal line 302a or the column signal line 302b is connected to the source of the selection transistor M4 in units of rows.

フォトダイオードPDは、光電変換により生成された電荷を蓄積し、そのP側は接地され、そのN側は転送トランジスタM1のソースに接続されている。転送トランジスタM1がONすると、フォトダイオードPDの電荷がフローティングディフュージョンFDに転送されるが、フローティングディフュージョンFDには寄生容量があるので、この部分に電荷が蓄積される。   The photodiode PD accumulates electric charges generated by photoelectric conversion, the P side is grounded, and the N side is connected to the source of the transfer transistor M1. When the transfer transistor M1 is turned on, the charge of the photodiode PD is transferred to the floating diffusion FD. However, since the floating diffusion FD has a parasitic capacitance, the charge is accumulated in this portion.

増幅トランジスタM3のドレインは電源電圧Vddとされ、増幅トランジスタM3のゲートはフローティングディフュージョンFDに接続されている。増幅トランジスタM3は、フローティングディフュージョンFDの電圧を電気信号に変換する。選択トランジスタM4は、信号を読み出す画素を行単位で選択するためのものである。選択トランジスタM4のドレインは増幅トランジスタM3のソースに接続され、選択トランジスタM4のソースは列信号線302a又は列信号線302bに接続されている。選択トランジスタM4がONしたときに、フローティングディフュージョンFDの電圧に対応する電圧が列信号線302a又は列信号線302bに出力される。リセットトランジスタM2のドレインは電源電圧Vddとされ、リセットトランジスタM2のソースはフローティングディフュージョンFDに接続されている。リセットトランジスタM2は、フローティングディフュージョンFDの電圧を電源電圧Vddにリセットする。   The drain of the amplification transistor M3 is set to the power supply voltage Vdd, and the gate of the amplification transistor M3 is connected to the floating diffusion FD. The amplification transistor M3 converts the voltage of the floating diffusion FD into an electric signal. The selection transistor M4 is for selecting a pixel from which a signal is read out in units of rows. The drain of the selection transistor M4 is connected to the source of the amplification transistor M3, and the source of the selection transistor M4 is connected to the column signal line 302a or the column signal line 302b. When the selection transistor M4 is turned on, a voltage corresponding to the voltage of the floating diffusion FD is output to the column signal line 302a or the column signal line 302b. The drain of the reset transistor M2 is the power supply voltage Vdd, and the source of the reset transistor M2 is connected to the floating diffusion FD. The reset transistor M2 resets the voltage of the floating diffusion FD to the power supply voltage Vdd.

次に、図4を参照して、列信号線302a,302bの画素選択について説明する。図4は、デジタルカメラ100におけるライブビュー表示時における、撮像素子からの信号の読み出し行を模式的に説明する図である。図4の左側には、撮像素子の画素301の配列を、画素配列に対応して配置されるベイヤー配列を有するカラーフィルタの各色(R,G(Gb,Gr),B)で示している。図4の右側には、以下に説明する各読み出しモードでの選択行の例が示されている。   Next, pixel selection of the column signal lines 302a and 302b will be described with reference to FIG. FIG. 4 is a diagram for schematically explaining a signal reading line from the image sensor at the time of live view display in the digital camera 100. On the left side of FIG. 4, the arrangement of the pixels 301 of the image sensor is indicated by each color (R, G (Gb, Gr), B) of a color filter having a Bayer arrangement arranged corresponding to the pixel arrangement. The right side of FIG. 4 shows an example of a selected row in each readout mode described below.

ライブビュー表示が行われている状態では、ライブビュー用撮像信号は列信号線302aへ出力されている。列信号線302aに出力されたライブビュー用撮像信号は、カラムADCブロック311においてアナログ信号からデジタル信号に変換される。カラムADCブロック311においてデジタル信号化されたライブビュー用撮像信号は、列走査回路313aの操作によってカラムADCブロック311から水平信号線315aへ読み出される。水平信号線315aへ読み出されたデジタル信号化されたライブビュー用撮像信号は、撮像部204から画像処理部206へ出力される。   In a state where live view display is performed, the live view imaging signal is output to the column signal line 302a. The live view imaging signal output to the column signal line 302 a is converted from an analog signal to a digital signal in the column ADC block 311. The live view imaging signal converted into a digital signal in the column ADC block 311 is read from the column ADC block 311 to the horizontal signal line 315a by the operation of the column scanning circuit 313a. The digitalized live view imaging signal read out to the horizontal signal line 315a is output from the imaging unit 204 to the image processing unit 206.

ここで、システム制御部210は、主被写体の動きやライブビュー用撮像信号に基づく画像処理部206でのAF評価値が小さいことを検出すると、独立AF動作開始信号を撮像部204に対して出力する。撮像部204では、独立AF動作開始信号が第2のチップ31へ到達すると、ライブビュー用撮像とAF評価値検出用撮像とを同時に行うことができるように画素301の読み出し行を分けて、AF評価値検出用撮像信号が列信号線302bへ出力される。   Here, when the system control unit 210 detects that the AF evaluation value in the image processing unit 206 based on the movement of the main subject and the live view imaging signal is small, the system control unit 210 outputs an independent AF operation start signal to the imaging unit 204. To do. In the imaging unit 204, when the independent AF operation start signal reaches the second chip 31, the readout line of the pixel 301 is divided so that live view imaging and AF evaluation value detection imaging can be performed simultaneously, and AF An imaging signal for evaluation value detection is output to the column signal line 302b.

本実施形態では、図4に示す行番号1,2はAF用撮像行であり、AF用撮像駆動モード(第3の撮像モード)では、行番号1,2からの信号読み出しを行う。図4に示す行番号3,4は通常ライブビューを行うための撮像行であり、通常ライブビュー用撮像駆動モード(第1の撮像モード)では、行番号3,4からの信号読み出しを行う。本実施形態では、行番号1,2及び行番号3,4からの読み出し走査を行単位で順次行うこととし、8行単位で繰り返して読み出し走査を行うとする。また、AF用撮像と通常ライブビュー用撮像はいずれも、垂直同色4画素中3画素間引き読み出しの駆動としている。したがって、AF評価値検出用撮像での出力画像信号は、通常ライブビュー用撮像での出力画像信号と同画質であるため、ライブビュー表示に使用することができる。同様に、通常ライブビュー用撮像の出力画像信号をAF評価値検出に用いることができる。   In the present embodiment, row numbers 1 and 2 shown in FIG. 4 are AF imaging rows, and signal readout from row numbers 1 and 2 is performed in the AF imaging drive mode (third imaging mode). Row numbers 3 and 4 shown in FIG. 4 are imaging rows for performing a normal live view. In the normal live view imaging drive mode (first imaging mode), signal reading from the row numbers 3 and 4 is performed. In the present embodiment, it is assumed that readout scanning from row numbers 1 and 2 and row numbers 3 and 4 is sequentially performed in units of rows, and readout scanning is repeatedly performed in units of 8 rows. In addition, both the AF imaging and the normal live view imaging are driven by thinning-out readout of 3 out of 4 pixels of the same vertical color. Therefore, since the output image signal in the AF evaluation value detection imaging has the same image quality as the output image signal in the normal live view imaging, it can be used for live view display. Similarly, the output image signal of normal live view imaging can be used for AF evaluation value detection.

一方、操作部102等の操作により、ライブビュー用撮像として画質重視のために読み出しライン数の多い撮像を行うこともできる。例えば、通常ライブビューよりの精細度の高い高精細ライブビューA1の撮像を行う高精細ライブビューA1用撮像駆動モード(第2の撮像モード)では、行番号3,4,7,8を撮像行とする。また、AF用撮像行である行番号1,2を撮像行に含むように、高精細ライブビューA1と同じ精細度の高精細ライブビューA2の撮像を行うことも可能である。高精細ライブビューA2の撮像を行う高精細ライブビューA2用撮像駆動モード(第4の撮像モード)では、行番号1,2,5,6を撮像行とする。なお、AF用撮像駆動モードと高精細ライブビューA2用撮像駆動モードで画像信号を読み出す読み出し行は、通常ライブビュー用撮像駆動モードと高精細ライブビューA1用撮像駆動モードで画像信号を読み出す読み出し行とは重複しないように設定されている。   On the other hand, by operating the operation unit 102 or the like, it is possible to perform imaging with a large number of readout lines in order to emphasize image quality as live view imaging. For example, in the imaging drive mode for the high-definition live view A1 (second imaging mode) that captures the high-definition live view A1 with higher definition than the normal live view, the row numbers 3, 4, 7, and 8 are imaged rows. And It is also possible to image the high-definition live view A2 having the same definition as the high-definition live view A1 so that the image lines include the row numbers 1 and 2 that are AF imaging rows. In the imaging drive mode (fourth imaging mode) for high-definition live view A2 that performs imaging of high-definition live view A2, row numbers 1, 2, 5, and 6 are taken as imaging rows. Note that the readout line for reading out the image signal in the AF imaging drive mode and the high-definition live view A2 imaging drive mode is the readout line for reading out the image signal in the normal live view imaging drive mode and the high-definition live view A1 imaging drive mode. Is set so as not to overlap.

より精細度の高い高精細ライブビューBの撮像を行うこともでき、この場合の高精細ライブビューB用撮像駆動モード(第5の撮像モード)では、垂直同色4画素中1画素間引き3画素加算の駆動とすることもできる。この場合には、行番号3,4,5,6、7,8がライブビュー用撮像行となる。このように選択行毎にAF用撮像とライブビュー用撮像とを分けることにより、異なる電荷蓄積時間でデータサイズの異なるフレームレートの画像データを取得することができる。   High-definition live view B with higher definition can also be captured. In this case, in the high-definition live view B imaging drive mode (fifth imaging mode), 1 pixel thinning out of 4 pixels of the same color is added. It is also possible to drive. In this case, row numbers 3, 4, 5, 6, 7, and 8 are live view imaging rows. In this way, by separating AF imaging and live view imaging for each selected row, it is possible to acquire image data of different frame rates with different data sizes in different charge accumulation times.

列信号線302bに出力されたAF評価値検出用撮像信号は、カラムADCブロック311においてアナログ信号からデジタル信号に変換される。カラムADCブロック311においてデジタル信号化されたAF評価値検出用撮像信号は、列走査回路313bの操作によってカラムADCブロック311から水平信号線315bへ読み出される。水平信号線315bへ読み出されたデジタル信号化されたAF評価値検出用撮像信号は、スイッチ316に出力される。   The AF evaluation value detection imaging signal output to the column signal line 302 b is converted from an analog signal to a digital signal in the column ADC block 311. The imaging signal for AF evaluation value detection converted into a digital signal in the column ADC block 311 is read from the column ADC block 311 to the horizontal signal line 315b by the operation of the column scanning circuit 313b. The AF evaluation value detection imaging signal converted into a digital signal read to the horizontal signal line 315b is output to the switch 316.

システム制御部210からの制御信号により撮像素子内AF評価モードになっている場合は、水平信号線315bからスイッチ316を経てフレームメモリ317で保存されたAF評価値検出用撮像信号はAF評価値検出部205へ送られる。AF評価値検出部205は、受信したAF評価値検出用撮像信号のコントラスト情報に基づいてAF評価値を算出し、AF評価値信号のみを撮像部204の撮像素子からシステム制御部210へ出力する。一方、システム制御部210からの制御信号により撮像素子内AF評価モードになっていない場合は、AF評価値検出用撮像信号は、水平信号線315bからスイッチ316を経て画像処理部206へと出力される。   When the in-image sensor AF evaluation mode is set by the control signal from the system control unit 210, the AF evaluation value detection imaging signal stored in the frame memory 317 from the horizontal signal line 315b via the switch 316 is detected by the AF evaluation value. Sent to the unit 205. The AF evaluation value detection unit 205 calculates an AF evaluation value based on the contrast information of the received AF evaluation value detection imaging signal, and outputs only the AF evaluation value signal from the imaging element of the imaging unit 204 to the system control unit 210. . On the other hand, when the image sensor AF evaluation mode is not set by the control signal from the system control unit 210, the AF evaluation value detection imaging signal is output from the horizontal signal line 315b to the image processing unit 206 via the switch 316. The

以下の説明では、列信号線302aから水平信号線315aへ撮像信号を出力する経路(第1の出力経路)をチャンネル1(以下「Ch1」と記す)と称することとする。また、列信号線302bから水平信号線315bへ撮像信号を出力する経路(第2の出力経路)をチャンネル2(以下「Ch2」と記す)と称することとする。本実施形態では、撮像素子に対する画像信号の読み出しに用いる選択行の異なる2つのモードを実行し、各モードで読み出された画像信号をCh1,Ch2から別々に出力させることができる。   In the following description, a path (first output path) for outputting an imaging signal from the column signal line 302a to the horizontal signal line 315a is referred to as channel 1 (hereinafter referred to as “Ch1”). A path (second output path) for outputting an imaging signal from the column signal line 302b to the horizontal signal line 315b is referred to as channel 2 (hereinafter referred to as “Ch2”). In this embodiment, it is possible to execute two modes with different selected rows used for reading image signals to the image sensor, and to output the image signals read in each mode separately from Ch1 and Ch2.

図5は、独立AF動作時の撮像部204におけるCh1の出力信号、Ch2の出力信号及び独立AF動作開始信号の関係を示すタイミングチャートである。垂直同期信号は、Ch1、Ch2から出力可能な高速のフレームレート出力が実現可能なタイミングで出力されている。ここでは、Ch1からはライブビュー用撮像信号が出力されており、ライブビュー用撮像信号は、30FPSのフレームレートで駆動されて出力されている一方で、垂直同期信号は240Hzで入力されている。この場合、Ch1からのライブビュー用撮像信号の出力は、垂直同期信号を3回無視して4回に1回出力されるように制御される。Ch1からライブビュー用撮像信号が出力されているタイミングT1までは、画像処理部206に入力されたライブビュー用撮像信号に基づいて画像処理部206が演算した結果に基づいて、システム制御部210がオートフォーカス制御(AF制御)を行う。   FIG. 5 is a timing chart showing the relationship between the output signal of Ch1, the output signal of Ch2, and the independent AF operation start signal in the imaging unit 204 during the independent AF operation. The vertical synchronization signal is output at a timing at which a high-speed frame rate output that can be output from Ch1 and Ch2 can be realized. Here, an image signal for live view is output from Ch1, and the image signal for live view is driven and output at a frame rate of 30 FPS, while a vertical synchronization signal is input at 240 Hz. In this case, the output of the live view imaging signal from Ch1 is controlled to be output once every four times, ignoring the vertical synchronization signal three times. Until the timing T1 when the live view imaging signal is output from Ch1, the system control unit 210 performs the operation based on the result calculated by the image processing unit 206 based on the live view imaging signal input to the image processing unit 206. Auto focus control (AF control) is performed.

タイミングT1において、システム制御部210により独立AF動作が必要と判断され、独立AF動作開始信号が入力されている。独立AF動作開始信号が入力されると、次に入力される垂直同期信号に同期してCh2のAF評価値検出用撮像信号の出力制御が開始される。画素301に対する露光を行った後、タイミングT2において最初のAF評価値検出用撮像信号の出力が行われる。このとき、撮像素子内AF評価モードになっている場合は、撮像部204内のAF評価値検出部205が、AF評価値検出用撮像信号に基づいてAF評価値を検出し、検出したAF評価値をシステム制御部210へ出力する。一方、撮像素子内AF評価モードになっていない場合は、AF評価値検出用撮像信号は画像処理部206に入力され、AF評価値検出用撮像信号に基づいて画像処理部206が演算した結果に基づいてシステム制御部210によるAF制御が行われる。   At timing T1, the system control unit 210 determines that an independent AF operation is necessary, and an independent AF operation start signal is input. When the independent AF operation start signal is inputted, output control of the imaging evaluation signal for AF evaluation value detection of Ch2 is started in synchronization with the next inputted vertical synchronizing signal. After the pixel 301 is exposed, the first AF evaluation value detection imaging signal is output at timing T2. At this time, when the imaging device AF evaluation mode is set, the AF evaluation value detection unit 205 in the imaging unit 204 detects the AF evaluation value based on the AF evaluation value detection imaging signal, and detects the detected AF evaluation. The value is output to the system control unit 210. On the other hand, when the imaging element AF evaluation mode is not set, the AF evaluation value detection imaging signal is input to the image processing unit 206, and the image processing unit 206 calculates the result based on the AF evaluation value detection imaging signal. Based on this, AF control is performed by the system control unit 210.

図5は、Ch2からのAF評価値検出用撮像信号の出力がフレームレート可変であることを示している。つまり、タイミングT3において、システム制御部210によりCh2からのAF評価値検出用撮像信号の出力のフレームレートを1/2にする制御信号が入力される。これにより、次の垂直同期信号の入力以降は、垂直同期信号を1回無視して、2回に1回出力されるよう制御されている。フレームレートを変化させることによって最長露光時間を変化させることができるため、システム制御部210は、撮影シーンに応じてフレームレートを変化させてAF精度を確保する制御を行う。Ch1出力とCh2出力のフレームレートは独立に制御可能であり、タイミングT4における独立AF動作開始信号の入力終了を受けて、Ch2からのAF評価値検出用撮像信号の出力が停止される。   FIG. 5 shows that the output of the imaging signal for AF evaluation value detection from Ch2 is variable in frame rate. That is, at timing T3, the system control unit 210 inputs a control signal for reducing the frame rate of the output of the AF evaluation value detection imaging signal from Ch2. Thus, after the next vertical synchronizing signal is input, the vertical synchronizing signal is ignored once and is controlled to be output once every two times. Since the longest exposure time can be changed by changing the frame rate, the system control unit 210 performs control to ensure AF accuracy by changing the frame rate according to the shooting scene. The frame rates of the Ch1 output and the Ch2 output can be controlled independently, and the output of the AF evaluation value detection imaging signal from Ch2 is stopped in response to the input end of the independent AF operation start signal at timing T4.

ここで、図6乃至図8を参照して、ライブビュー表示を利用した撮影時に想定される従来技術の問題点について説明する。なお、図6乃至図8の説明において、デジタルカメラ100と同等の構成要素での処理や動作については、適宜、その要素の符号を付して説明を行うこととする。   Here, with reference to FIG. 6 to FIG. 8, problems of the prior art assumed at the time of shooting using live view display will be described. In the description of FIG. 6 to FIG. 8, processing and operation with components equivalent to those of the digital camera 100 will be described with appropriate reference numerals.

図6は、一般的な従来技術を用いた場合に想定される、通常ライブビュー用撮像駆動モードをより高精細な高精細ライブビュー用撮像駆動モードへ切り替えるときのタイミングチャートである。垂直同期信号に同期して撮像素子の画素301に対する露光が行われ(撮像面露光)、撮像部204から1フレームの撮像信号が出力される。撮像素子が備える複数の画素301の1行毎の撮像駆動及び信号出力は、図6に不図示の水平同期信号に同期して制御されている。行走査回路312により撮像面の上部行から下部行に向かって、順次、リセット信号線304への信号入力によりリセット処理が行われ、露光時間経過後に、順次、カラムADCブロック311によりA/D変換されることで、撮像信号が出力される。このような撮像面露光を、図6では横軸を時間に取って、平行四辺形で表現している。   FIG. 6 is a timing chart for switching the normal live view imaging drive mode to a higher definition high-definition live view imaging drive mode, which is assumed when a general prior art is used. The pixel 301 of the image sensor is exposed in synchronization with the vertical synchronizing signal (imaging surface exposure), and an image signal of one frame is output from the imaging unit 204. The imaging drive and signal output for each row of the plurality of pixels 301 provided in the imaging device are controlled in synchronization with a horizontal synchronization signal (not shown in FIG. 6). The row scanning circuit 312 sequentially performs reset processing by inputting a signal to the reset signal line 304 from the upper row to the lower row of the imaging surface. After the exposure time has elapsed, the column ADC block 311 sequentially performs A / D conversion. As a result, an imaging signal is output. Such imaging surface exposure is represented by a parallelogram in FIG. 6 taking the horizontal axis as time.

画像処理部206に読み出された撮像信号は、画像処理部206での画像処理(現像・画処理等)を経て、メモリ制御部207による信号制御によりメモリ209のビデオメモリ領域へ蓄積される。D/A変換器208により、メモリ209に格納されている画像表示用データがアナログ信号に変換され、表示部101に供給されることで、ライブビュー表示が行われる。   The image pickup signal read out by the image processing unit 206 is stored in the video memory area of the memory 209 through signal processing by the memory control unit 207 through image processing (development / image processing, etc.) in the image processing unit 206. The D / A converter 208 converts the image display data stored in the memory 209 into an analog signal and supplies it to the display unit 101, thereby performing live view display.

通常ライブビュー用撮像駆動モードを高精細ライブビュー用撮像駆動モードへ切り替える際に、切り替えに伴って使用することができないフレームが発生するため、図6に示すように、表示部101の表示画面に一時的にフリーズが発生する。高精細ライブビュー用撮像駆動モードでは、通常ライブビュー用撮像駆動モードよりも読み出し行数が多いため、撮像面の上部行から下部行までの行走査に要する時間が長くなる。このことを、図6では、傾斜角を大きくした平行四辺形の形状で表している。   When the normal live view imaging drive mode is switched to the high-definition live view imaging drive mode, a frame that cannot be used is generated in association with the switching. Therefore, as shown in FIG. Temporary freeze occurs. In the high-definition live view imaging drive mode, since the number of readout rows is larger than that in the normal live view imaging drive mode, the time required for line scanning from the upper row to the lower row of the imaging surface becomes longer. In FIG. 6, this is represented by the shape of a parallelogram with a large inclination angle.

上述した通常ライブビュー表示から高精細ライブビュー表示への切り替えが発生するケースの一例としては、シャッタボタン121の第1スイッチSW1の操作(シャッタボタン121の半押し)がある。図7は、一般的な従来技術を用いた場合に想定される、シャッタボタン121の第1スイッチSW1の操作が行われたときのライブビューモードの切り替え処理のフローチャートである。   As an example of the case where switching from the normal live view display to the high-definition live view display described above occurs, there is an operation of the first switch SW1 of the shutter button 121 (half-pressing of the shutter button 121). FIG. 7 is a flowchart of live view mode switching processing when the first switch SW1 of the shutter button 121 is operated, which is assumed when a general conventional technique is used.

通常ライブビュー表示状態で第1スイッチSW1の操作が行われると、ステップS701において、システム制御部210は、AE処理を行う。なお、AE処理は、第1スイッチSW1の操作前に終了していてもよい。続くステップS702において、システム制御部210は、撮像駆動モードを通常ライブビュー用撮像駆動モードからAF用撮像駆動モードへ切り替える。なお、AF用撮像駆動モードは、通常ライブビュー用撮像駆動モードと同じであってもよく、その場合には駆動モードの切り替えは発生しない。AF用撮像駆動モードは、通常ライブビュー用撮像駆動モードよりも高フレームレートで駆動されるため、ここでは、ステップS702においてAF用撮像駆動モードへと駆動切り替えを行い、これによりAF制御を高速化させるものとする。   When the first switch SW1 is operated in the normal live view display state, in step S701, the system control unit 210 performs AE processing. Note that the AE process may be ended before the operation of the first switch SW1. In subsequent step S702, the system control unit 210 switches the imaging drive mode from the normal live view imaging drive mode to the AF imaging drive mode. Note that the AF imaging drive mode may be the same as the normal live view imaging drive mode, and in this case, switching of the drive mode does not occur. Since the AF imaging drive mode is driven at a higher frame rate than the normal live view imaging drive mode, the drive is switched to the AF imaging drive mode in step S702, thereby speeding up AF control. Shall be allowed to.

次に、ステップS703において、システム制御部210は、AF処理を行う。続いて、ステップS704において、システム制御部210は、撮像駆動モードをAF用撮像駆動モードから高精細ライブビュー用撮像駆動モードへ切り替える。これにより、シャッタボタン121の第2スイッチSW2の操作待機状態では、高精細ライブビュー表示が実現されていることとなる。   Next, in step S703, the system control unit 210 performs AF processing. Subsequently, in step S704, the system control unit 210 switches the imaging drive mode from the AF imaging drive mode to the high-definition live view imaging drive mode. Thereby, in the operation standby state of the second switch SW2 of the shutter button 121, high-definition live view display is realized.

図8は、図7のフローチャートに従う撮像駆動モードの切り替えに伴う撮像信号の変化等を、図6と同様にして示すタイミングチャートである。シャッタボタン121の第1スイッチSW1の操作が行われてから第2スイッチSW2の操作待機状態となるまでの間に、2回のフリーズが発生していることがわかる。   FIG. 8 is a timing chart showing the change of the imaging signal and the like accompanying the switching of the imaging drive mode according to the flowchart of FIG. It can be seen that two freezes occur between the time when the operation of the first switch SW1 of the shutter button 121 is performed and the time when the operation of the second switch SW2 is entered.

図6乃至図8を参照して説明したように、従来技術では、駆動モードの切り替えに伴って表示画面にフリーズが発生するという問題が想定される。これに対して、本実施形態では、以下に図9乃至図12を参照して説明する通り、表示画面にフリーズを発生させることなく、駆動モードを切り替えることができるようにする。   As described with reference to FIGS. 6 to 8, in the related art, there is a problem that the display screen is frozen as the drive mode is switched. On the other hand, in the present embodiment, as described below with reference to FIGS. 9 to 12, the drive mode can be switched without causing the display screen to freeze.

図9は、デジタルカメラ100において、独立AF動作中であるが撮像素子内AF評価モードではない場合において第1スイッチSW1が操作されたときに実行される画像信号処理のフローチャートである。   FIG. 9 is a flowchart of image signal processing executed when the first switch SW1 is operated when the digital camera 100 is in the independent AF operation but is not in the imaging element AF evaluation mode.

ステップS901において、システム制御部210は、Ch1から出力されて通常ライブビュー表示に使用されている通常ライブビュー用撮像信号(図9では「Ch1撮像信号」と記する)を用いてAE処理を行う。なお、AE処理は、第1スイッチSW1の操作前に終了していてもよい。続くステップS902において、システム制御部210は、Ch2から出力されるAF評価値検出用撮像信号(図9では「Ch2撮像信号」と記する)を用いてAF処理を行う。   In step S901, the system control unit 210 performs AE processing using a normal live view imaging signal (denoted as “Ch1 imaging signal” in FIG. 9) output from Ch1 and used for normal live view display. . Note that the AE process may be ended before the operation of the first switch SW1. In subsequent step S902, the system control unit 210 performs an AF process using an AF evaluation value detection imaging signal output from Ch2 (denoted as “Ch2 imaging signal” in FIG. 9).

次に、ステップS903において、システム制御部210は、AF評価値検出用撮像信号に代えてライブビュー用撮像信号がCh2から出力されるように、AF用撮像駆動モードからライブビュー用撮像駆動モードへ駆動モードを切り替える。なお、ステップS903で切り替えるライブビュー用撮像駆動モードは、通常ライブビュー用撮像駆動モードであってもよいし高精細ライブビュー用撮像駆動モード(高精細ライブビューA2)であってもよい。ここでは、通常ライブビュー用撮像駆動モードに切り替えられたものとする。   Next, in step S903, the system control unit 210 changes from the AF imaging drive mode to the live view imaging drive mode so that the live view imaging signal is output from Ch2 instead of the AF evaluation value detection imaging signal. Switch the drive mode. Note that the live view imaging drive mode switched in step S903 may be the normal live view imaging drive mode or the high definition live view imaging drive mode (high definition live view A2). Here, it is assumed that the mode is switched to the normal live view imaging drive mode.

なお、本実施形態では、図4に示したように、AF用撮像と通常ライブビュー用撮像とでは読み出し行数が同じ(読み出し行は異なる)であるため、駆動切り替えは不要となる。但し、本実施形態では、システム制御部210は、切り替え後のCh2のフレームレートをCh1と同じになるように制御すると共に、Ch2の撮像信号の露出(感度、露光時間)をCh1と同じになるように制御する。   In the present embodiment, as shown in FIG. 4, since the number of readout rows is the same (the readout rows are different) between the AF imaging and the normal live view imaging, drive switching is not necessary. However, in this embodiment, the system control unit 210 controls the frame rate of Ch2 after switching to be the same as that of Ch1, and the exposure (sensitivity, exposure time) of the imaging signal of Ch2 is the same as that of Ch1. To control.

次に、ステップS904において、システム制御部210は、ライブビュー用撮像信号の取得先をCh1からCh2へ切り替える。続いて、ステップS905において、システム制御部210は、Ch1からの出力信号が通常ライブビュー用撮像信号から高精細ライブビュー用撮像信号(高精細ライブビューA1)へ切り替わるように、駆動モードを切り替える。更にステップS906において、システム制御部210は、ライブビュー用撮像信号の取得先をCh2からCh1へ切り替える。これにより、第2スイッチSW2の操作待機状態において、高精細ライブビュー表示が実現されることとなる。   Next, in step S904, the system control unit 210 switches the acquisition source of the live view imaging signal from Ch1 to Ch2. Subsequently, in step S905, the system control unit 210 switches the drive mode so that the output signal from Ch1 is switched from the normal live view imaging signal to the high definition live view imaging signal (high definition live view A1). Further, in step S906, the system control unit 210 switches the acquisition source of the live view imaging signal from Ch2 to Ch1. As a result, high-definition live view display is realized in the operation standby state of the second switch SW2.

その後、継続して独立AF動作が必要であれば、システム制御部210は、Ch2の撮像信号出力を、再びAF評価値検出用撮像信号が出力されるように、AF用撮像駆動モード(又はAF用フレームレート)へ切り替える。一方、システム制御部210は、AF走査が不要であれば、撮像信号の出力を停止させる。   After that, if the independent AF operation is necessary continuously, the system control unit 210 outputs the imaging signal for Ch2, and the imaging drive mode for AF (or AF) so that the AF evaluation value detection imaging signal is output again. To frame rate). On the other hand, the system control unit 210 stops the output of the imaging signal if the AF scanning is unnecessary.

図10は、図9のフローチャートに従う撮像駆動モードの切り替えに伴う撮像信号の変化等を示すタイミングチャートである。ライブビュー用撮像信号の取得先を切り替えることにより、表示画面でフリーズが発生することなく、第2スイッチSW2の操作待機状態において、高精細ライブビュー表示へと切り替わっていることがわかる。なお、高精細ライブビュー用撮像駆動モードでの画像信号の出力開始からこの画像信号をライブビュー表示のために信号処理を行って表示部101へ出力するまでの時間は、通常ライブビュー用撮像駆動モードでの同処理を行う時間と同じとしている。また、本実施形態では、高精細ライブビュー表示時の信号処理(現像・画処理等)の完了が表示周期に間に合うように、通常ライブビュー表示時における画像処理の完了後からライブビュー表示が行われるまでの時間にマージンを持たせている。   FIG. 10 is a timing chart showing the change of the imaging signal accompanying the switching of the imaging drive mode according to the flowchart of FIG. By switching the acquisition source of the live view imaging signal, it is understood that the display screen is switched to the high-definition live view display in the operation standby state of the second switch SW2 without causing the freeze. The time from the start of the output of the image signal in the high-definition live view imaging drive mode to the time when the image signal is processed for live view display and output to the display unit 101 is the normal live view imaging drive. The time for performing the same processing in the mode is the same. Further, in this embodiment, live view display is performed after image processing is completed during normal live view display so that signal processing (development, image processing, etc.) during high definition live view display is completed in time for the display cycle. A margin is given to the time until it is displayed.

図11は、デジタルカメラ100において、独立AF動作中ではない状態において第1スイッチSW1が操作されたときに実行される画像信号処理のフローチャートである。   FIG. 11 is a flowchart of image signal processing executed when the first switch SW1 is operated in the digital camera 100 in a state where the independent AF operation is not being performed.

ステップS1101において、システム制御部210は、Ch1から出力されて通常ライブビュー表示に使用している通常ライブビュー用撮像信号を用いてAE処理を行う。なお、AE処理は、第1スイッチSW1の操作前に終了していてもよい。続くステップS1102において、システム制御部210は、Ch2からライブビュー用撮像信号の出力が開始されるように、撮像駆動モードをライブビュー用撮像駆動モードに設定する。   In step S1101, the system control unit 210 performs AE processing using the normal live view imaging signal output from Ch1 and used for normal live view display. Note that the AE process may be ended before the operation of the first switch SW1. In subsequent step S1102, the system control unit 210 sets the imaging drive mode to the live view imaging drive mode so that the output of the live view imaging signal is started from Ch2.

なお、このときのライブビュー用撮像駆動モードは、通常ライブビュー用撮像駆動モードであってもよいし、高精細ライブビュー用撮像駆動モード(高精細ライブビューA2)であってもよい。ここでは、通常ライブビュー用撮像駆動モードが設定されたものとし、本実施形態では、AF用撮像と通常ライブビュー用撮像とでは読み出し行数が同じであるため、駆動切り替えは不要となる。但し、本実施形態では、システム制御部210は、切り替え後のCh2のフレームレートをCh1と同じになるように制御すると共に、Ch2の撮像信号の感度、露光時間をCh1と同じになるように制御している。   Note that the live view imaging drive mode at this time may be the normal live view imaging drive mode or the high definition live view imaging drive mode (high definition live view A2). Here, it is assumed that the normal live view imaging drive mode is set, and in this embodiment, since the number of read rows is the same between the AF imaging and the normal live view imaging, drive switching is not necessary. However, in the present embodiment, the system control unit 210 controls the frame rate of Ch2 after switching to be the same as that of Ch1, and controls the sensitivity and exposure time of the imaging signal of Ch2 to be the same as that of Ch1. doing.

ステップS1103において、システム制御部210は、ライブビュー用撮像信号の取得先をCh1からCh2へ切り替える。続くステップS1104において、システム制御部210は、Ch1から高精細ライブビュー用撮像信号(第1の高精細ライブビューA1)が出力されるように、駆動モードを通常ライブビュー用駆動モードから高精細ライブビュー用撮像駆動モードへ切り替える。更にステップS1105において、システム制御部210は、ライブビュー用撮像信号の取得先をCh2からCh1へ切り替える。これにより、第2スイッチSW2の操作待機状態において、高精細ライブビュー表示が実現されることとなる。その後、ステップS1106において、システム制御部210は、Ch2からの撮像信号の出力を停止させる。   In step S1103, the system control unit 210 switches the acquisition source of the live view imaging signal from Ch1 to Ch2. In subsequent step S1104, the system control unit 210 changes the drive mode from the normal live view drive mode to the high definition live view so that the high-definition live view imaging signal (first high-definition live view A1) is output from Ch1. Switch to view imaging drive mode. Further, in step S1105, the system control unit 210 switches the acquisition source of the live view imaging signal from Ch2 to Ch1. As a result, high-definition live view display is realized in the operation standby state of the second switch SW2. Thereafter, in step S1106, the system control unit 210 stops the output of the imaging signal from Ch2.

図12は、図11のフローチャートに従う駆動モードの切り替えに伴う撮像信号の変化等を示すタイミングチャートである。ここでも、Ch1とCh2からのそれぞれから出力される撮像信号を切り替えると共に、ライブビュー用撮像信号の取得先を切り替える。これにより、表示画面でフリーズを発生させることなく、第2スイッチSW2の操作待機状態において、高精細ライブビュー表示を行うことができる。   FIG. 12 is a timing chart showing a change in the imaging signal and the like associated with switching of the drive mode according to the flowchart of FIG. Again, the imaging signals output from each of Ch1 and Ch2 are switched, and the acquisition source of the live view imaging signal is switched. Thereby, high-definition live view display can be performed in the operation standby state of the second switch SW2 without causing a freeze on the display screen.

なお、上記実施形態において、AF用として説明した撮像信号に代えて、露出制御、ホワイトバランス制御、被写体の特徴点の検出制御、被写体の動きの検出制御等の用途にそれぞれ用いられている撮像信号のいずれかを用いることができる。   In the above-described embodiment, instead of the image pickup signal described for AF, the image pickup signals used for applications such as exposure control, white balance control, subject feature point detection control, subject movement detection control, etc. Either of these can be used.

<第2実施形態>
上記第1実施形態では、ライブビュー用撮像信号は、撮像部204からの2つの撮像信号出力Ch1及びCh2の双方から出力される一方で、AF評価値検出用撮像信号はCh2からのみ出力されるように構成されている。これに対して、第2実施形態は、AF評価値検出用撮像信号として、Ch1からの出力信号を使用することができるように構成されている。なお、第2実施形態で用いられるデジタルカメラ(撮像装置)のハードウェア構成は、第1実施形態で用いたデジタルカメラ100と同じであるため、ここでの説明を省略する。
Second Embodiment
In the first embodiment, the live view imaging signal is output from both of the two imaging signal outputs Ch1 and Ch2 from the imaging unit 204, while the AF evaluation value detection imaging signal is output only from Ch2. It is configured as follows. In contrast, the second embodiment is configured such that the output signal from Ch1 can be used as the AF evaluation value detection imaging signal. Note that the hardware configuration of the digital camera (imaging device) used in the second embodiment is the same as that of the digital camera 100 used in the first embodiment, and thus description thereof is omitted here.

図13は、図9のフローチャートのステップS904において、ライブビュー用撮像信号の取得先がCh1からCh2へ切り替えられた後、そのままCh2からの出力信号をライブビューに用いる場合の画像信号処理のタイミングチャートである。但し、ステップS903におけるCh2の撮像駆動モードの切り替えは、高精細ライブビュー用撮像駆動モード(高精細ライブビューA2)へと切り替えられているものとする。その結果、ステップS902で行われていたAF処理は、一時的に中止されることになる。   FIG. 13 is a timing chart of image signal processing in a case where the acquisition source of the live view imaging signal is switched from Ch1 to Ch2 and the output signal from Ch2 is used as it is for live view in step S904 of the flowchart of FIG. It is. However, the switching of the imaging drive mode of Ch2 in step S903 is assumed to be switched to the imaging drive mode for high-definition live view (high-definition live view A2). As a result, the AF process performed in step S902 is temporarily stopped.

ライブビュー用撮像信号の取得先を切り替えた後、独立AF動作が必要な場合には、Ch1からAF評価値検出用撮像信号が出力されるように、AF用撮像駆動モードに切り替えられる。これにより、AF処理を再開することができる。一方、AF処理が不要な場合には、Ch1からの撮像信号の出力を停止すればよい。図13には、AF用撮像駆動モードへと切り替えられた例が示されている。本実施形態では、AF用撮像と通常ライブビュー用撮像とでは読み出し行数が同じであるため、駆動切り替えは不要となるが、フレームレートをAF用に切り替えている。   After switching the acquisition source of the live view imaging signal, when an independent AF operation is required, the AF imaging drive mode is switched so that the AF evaluation value detection imaging signal is output from Ch1. Thereby, the AF process can be resumed. On the other hand, when AF processing is unnecessary, the output of the imaging signal from Ch1 may be stopped. FIG. 13 shows an example of switching to the AF imaging drive mode. In this embodiment, since the number of read rows is the same between the AF imaging and the normal live view imaging, the drive switching is not necessary, but the frame rate is switched to AF.

図14は、図11のフローチャートのステップS1103において、ライブビュー用撮像信号の取得先をCh1からCh2へ切り替えた後、そのままCh2からの出力信号をライブビュー用に用いる場合の画像信号処理のタイミングチャートである。但し、ステップS1102におけるCh2の撮像駆動モードの切り替えは、高精細ライブビュー用撮像駆動モード(高精細ライブビューA2)へと切り替えられている。ライブビュー用撮像信号の取得先がCh1からCh2へ切り替えられた後には、Ch1からの撮像信号の出力を停止される。   FIG. 14 is a timing chart of image signal processing when the output signal from Ch2 is used for live view as it is after the acquisition source of the live view imaging signal is switched from Ch1 to Ch2 in step S1103 of the flowchart of FIG. It is. However, the switching of the imaging drive mode of Ch2 in step S1102 is switched to the imaging drive mode for high definition live view (high definition live view A2). After the acquisition source of the live view imaging signal is switched from Ch1 to Ch2, output of the imaging signal from Ch1 is stopped.

以上の第2実施形態でも、第1実施形態と同様に、第2スイッチSW2の操作待機状態において、高精細ライブビュー表示を行うことができる。   In the second embodiment described above, as in the first embodiment, high-definition live view display can be performed in the operation standby state of the second switch SW2.

<その他の実施形態>
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。
<Other embodiments>
Although the present invention has been described in detail based on preferred embodiments thereof, the present invention is not limited to these specific embodiments, and various forms within the scope of the present invention are also included in the present invention. included.

本発明は以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU等)がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。   The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, etc.) of the system or apparatus reads the program code. It is a process to be executed. In this case, the program and the storage medium storing the program constitute the present invention.

101 表示部
204 撮像部
205 AF評価値検出部
206 画像処理部
210 システム制御部
DESCRIPTION OF SYMBOLS 101 Display part 204 Image pick-up part 205 AF evaluation value detection part 206 Image processing part 210 System control part

Claims (16)

行方向と列方向に並べられた複数の画素を有する撮像素子と、
前記撮像素子の所定の行の画素から画像信号を読み出す第1の撮像モードと、前記撮像素子からの画像信号の読み出し行数が前記第1の撮像モードでの画像信号の読み出し行数とは異なる第2の撮像モードと、前記撮像素子からの画像信号の読み出し行が前記第1の撮像モードおよび前記第2の撮像モードでの画像信号の読み出し行と重複しない第3の撮像モードとから選ばれた1又は複数の撮像モードで前記撮像素子を駆動する駆動手段と、
前記第1の撮像モード、前記第2の撮像モード及び前記第3の撮像モードのうちの少なくとも2つの撮像モードが実行されたときに前記撮像素子から読み出された画像信号を別々に出力するための第1の出力経路と第2の出力経路とを含む少なくとも2つの出力経路を有する出力手段と、
前記第1の出力経路から出力される前記第1の撮像モードでの画像信号を表示手段における画像表示に用い、前記第2の出力経路からの出力される前記第3の撮像モードによる画像信号を前記画像表示とは異なる用途に用いている状態から、前記画像表示に用いる画像信号を前記第1の撮像モードでの画像信号から前記第2の撮像モードでの画像信号へ切り替えるときに、前記画像表示に用いる画像信号の取得先を一時的に前記第1の出力経路から前記第2の出力経路に切り替え、前記第1の出力経路から前記第2の撮像モードでの画像信号が出力されるように前記第1の撮像モードを前記第2の撮像モードへ切り替え、前記画像表示に用いる画像信号の取得先を前記第2の出力経路から前記第1の出力経路へ切り替える制御手段とを備えることを特徴とする撮像装置。
An image sensor having a plurality of pixels arranged in a row direction and a column direction;
The first imaging mode in which image signals are read from pixels in a predetermined row of the image sensor and the number of image signal readout rows from the image sensor are different from the number of image signal readout rows in the first imaging mode. The second imaging mode and the third imaging mode in which the readout line of the image signal from the imaging device does not overlap with the readout line of the image signal in the first imaging mode and the second imaging mode are selected. Driving means for driving the image sensor in one or more imaging modes;
In order to separately output image signals read from the image sensor when at least two of the first imaging mode, the second imaging mode, and the third imaging mode are executed. Output means having at least two output paths including a first output path and a second output path;
The image signal in the first imaging mode output from the first output path is used for image display on the display means, and the image signal in the third imaging mode output from the second output path is used. When the image signal used for the image display is switched from the image signal in the first imaging mode to the image signal in the second imaging mode from a state where the image display is used for a different purpose from the image display, the image The acquisition source of the image signal used for display is temporarily switched from the first output path to the second output path, and the image signal in the second imaging mode is output from the first output path. Control means for switching the first imaging mode to the second imaging mode and switching the acquisition destination of the image signal used for the image display from the second output path to the first output path. Imaging device according to claim and.
前記第1の撮像モードと前記第3の撮像モードとでは、前記撮像素子からの画像信号の読み出し行数が等しいことを特徴とする請求項1記載の撮像装置。   The imaging apparatus according to claim 1, wherein the first imaging mode and the third imaging mode have the same number of readout rows of image signals from the imaging element. 前記画像表示に用いる画像信号を前記一時的に前記第1の出力経路から前記第2の出力経路に切り替える前に、前記第2の出力経路から出力される画像信号を得るための露出を、前記第1の出力経路から出力される画像信号を得るための露出と同じとすることを特徴とする請求項1又は2記載の撮像装置。   Before the image signal used for the image display is temporarily switched from the first output path to the second output path, an exposure for obtaining an image signal output from the second output path, The imaging apparatus according to claim 1, wherein the exposure is the same as the exposure for obtaining an image signal output from the first output path. 前記第1の撮像モードは、所定の精細度の画像表示を行うために画像信号を取得するモードであり、
前記第2の撮像モードは、前記第1の撮像モードよりも精細度の高い画像表示を行うために画像信号を取得するモードであり、
前記第3の撮像モードは、被写体に対するオートフォーカスを行うための画像信号を得るモードであることを特徴とする請求項1乃至3のいずれか1項に記載の撮像装置。
The first imaging mode is a mode for acquiring an image signal in order to perform image display with a predetermined definition;
The second imaging mode is a mode in which an image signal is acquired in order to display an image with higher definition than the first imaging mode,
The imaging apparatus according to claim 1, wherein the third imaging mode is a mode for obtaining an image signal for performing autofocus on a subject.
行方向と列方向に並べられた複数の画素を有する撮像素子と、
前記撮像素子の所定の行の画素から画像信号を読み出す第1の撮像モードと、前記撮像素子からの画像信号の読み出し行数が前記第1の撮像モードでの画像信号の読み出し行数とは異なる第2の撮像モードと、前記撮像素子からの画像信号の読み出し行が前記第1の撮像モードおよび前記第2の撮像モードでの画像信号の読み出し行と重複しない第3の撮像モードおよび第4の撮像モードとから選ばれた1又は複数の撮像モードで前記撮像素子を駆動する駆動手段と、
前記第1の撮像モード、前記第2の撮像モード、前記第3の撮像モード及び第4の撮像モードのうちの少なくとも2つの撮像モードが実行されたときに前記撮像素子から読み出された画像信号を別々に出力するための第1の出力経路と第2の出力経路とを含む少なくとも2つの出力経路を有する出力手段と、
前記第1の出力経路から出力される前記第1の撮像モードでの画像信号を表示手段における画像表示に用い、前記第2の出力経路から出力される前記第3の撮像モードによる画像信号を前記画像表示とは異なる用途に用いている状態から、前記画像表示に用いる画像信号を前記第1の撮像モードでの画像信号から前記第2の撮像モードでの画像信号へ切り替えるときに、前記第2の出力経路から前記第4の撮像モードでの画像信号が出力されるように前記第3の撮像モードを前記第4の撮像モードへ切り替え、前記画像表示に用いる画像信号の取得先を前記第1の出力経路から前記第2の出力経路に一時的に切り替え、前記第1の出力経路から前記第2の撮像モードでの画像信号が出力されるように前記第1の撮像モードを前記第2の撮像モードへ切り替え、前記画像表示に用いる画像信号の取得先を前記第2の出力経路から前記第1の出力経路に切り替え、前記第2の出力経路から前記第3の撮像モードでの画像信号が出力されるように前記第4の撮像モードを前記第3の撮像モードへ切り替えるモードへと切り替える制御手段とを備えることを特徴とする撮像装置。
An image sensor having a plurality of pixels arranged in a row direction and a column direction;
The first imaging mode in which image signals are read from pixels in a predetermined row of the image sensor and the number of image signal readout rows from the image sensor are different from the number of image signal readout rows in the first imaging mode. The second imaging mode, the third imaging mode and the fourth imaging mode in which the readout line of the image signal from the imaging element does not overlap with the readout line of the image signal in the first imaging mode and the second imaging mode. Drive means for driving the image sensor in one or a plurality of imaging modes selected from an imaging mode;
An image signal read from the image sensor when at least two of the first imaging mode, the second imaging mode, the third imaging mode, and the fourth imaging mode are executed. Output means having at least two output paths including a first output path and a second output path for separately outputting
The image signal in the first imaging mode output from the first output path is used for image display on the display means, and the image signal in the third imaging mode output from the second output path is used as the image signal. When the image signal used for the image display is switched from the image signal in the first imaging mode to the image signal in the second imaging mode from a state where it is used for an application different from the image display, the second The third imaging mode is switched to the fourth imaging mode so that the image signal in the fourth imaging mode is output from the output path, and the acquisition destination of the image signal used for the image display is the first Is temporarily switched from the output path to the second output path, and the first imaging mode is changed to the second output path so that an image signal in the second imaging mode is output from the first output path. Imaging model The image signal used for the image display is switched from the second output path to the first output path, and the image signal in the third imaging mode is output from the second output path. As described above, an imaging apparatus comprising: control means for switching the fourth imaging mode to a mode for switching to the third imaging mode.
前記第2の撮像モードと前記第4の撮像モードとでは、前記撮像素子からの画像信号の読み出し行数が等しいことを特徴とする請求項5記載の撮像装置。   The imaging apparatus according to claim 5, wherein the second imaging mode and the fourth imaging mode have the same number of readout rows of image signals from the imaging element. 前記第1の撮像モードは、所定の精細度の画像表示を行うために画像信号を取得するモードであり、
前記第2の撮像モード及び前記第4の撮像モードはそれぞれ、前記第1の撮像モードよりも精細度の高い画像表示を行うために画像信号を取得するモードであり、
前記第3の撮像モードは、被写体に対するオートフォーカスを行うための画像信号を得るモードであることを特徴とする請求項5又は6記載の撮像装置。
The first imaging mode is a mode for acquiring an image signal in order to perform image display with a predetermined definition;
Each of the second imaging mode and the fourth imaging mode is a mode for acquiring an image signal in order to perform an image display with a higher definition than the first imaging mode,
The imaging apparatus according to claim 5 or 6, wherein the third imaging mode is a mode for obtaining an image signal for performing autofocus on a subject.
前記画像表示に用いる画像信号を前記一時的に前記第1の出力経路から前記第2の出力経路に切り替える前に、前記第2の出力経路から出力される画像信号のフレームレートを前記第1の出力経路から出力されている画像信号のフレームレートと同じにすることを特徴とする請求項1乃至請求項7のいずれか1項に記載の撮像装置。   Before the image signal used for the image display is temporarily switched from the first output path to the second output path, the frame rate of the image signal output from the second output path is changed to the first output path. The imaging apparatus according to claim 1, wherein the imaging apparatus has the same frame rate as that of an image signal output from the output path. 行方向と列方向に並べられた複数の画素を有する撮像素子と、
前記撮像素子の所定の行の画素から画像信号を読み出す第1の撮像モードと、前記撮像素子からの画像信号の読み出し行数が前記第1の撮像モードでの画像信号の読み出し行数とは異なる第2の撮像モードと、前記撮像素子からの画像信号の読み出し行が前記第1の撮像モードおよび前記第2の撮像モードでの画像信号の読み出し行と重複しない第3の撮像モードとから選ばれた1又は複数の撮像モードで前記撮像素子を駆動する駆動手段と、
前記第1の撮像モード、前記第2の撮像モード及び前記第3の撮像モードのうちの少なくとも2つの撮像モードが実行されたときに前記撮像素子から読み出された画像信号を別々に出力するための第1の出力経路と第2の出力経路とを含む少なくとも2つの出力経路を有する出力手段と、
前記第1の出力経路から出力される前記第1の撮像モードでの画像信号を表示手段における画像表示に用い、前記第2の出力経路から出力される前記第3の撮像モードによる画像信号を前記画像表示とは異なる用途に用いている状態から、前記画像表示に用いる画像信号を前記第1の撮像モードでの画像信号から前記第2の撮像モードでの画像信号へ切り替えるときに、前記第3の撮像モードによる画像信号を用いた前記画像表示とは異なる用途の処理を一時的に中止し、前記第2の出力経路から前記第2の撮像モードでの画像信号が出力されるように前記第2の撮像モードでの駆動を開始し、前記画像表示に用いる画像信号の取得先を前記第1の出力経路から前記第2の出力経路に切り替え、前記第1の出力経路から前記第3の撮像モードでの画像信号が出力されるように前記第1の撮像モードを前記第3の撮像モードへ切り替え、前記第1の出力経路から出力される前記第3の撮像モードでの画像信号を用いて前記画像表示とは異なる用途の処理を再開する制御手段とを備えることを特徴とする撮像装置。
An image sensor having a plurality of pixels arranged in a row direction and a column direction;
The first imaging mode in which image signals are read from pixels in a predetermined row of the image sensor and the number of image signal readout rows from the image sensor are different from the number of image signal readout rows in the first imaging mode. The second imaging mode and the third imaging mode in which the readout line of the image signal from the imaging device does not overlap with the readout line of the image signal in the first imaging mode and the second imaging mode are selected. Driving means for driving the image sensor in one or more imaging modes;
In order to separately output image signals read from the image sensor when at least two of the first imaging mode, the second imaging mode, and the third imaging mode are executed. Output means having at least two output paths including a first output path and a second output path;
The image signal in the first imaging mode output from the first output path is used for image display on the display means, and the image signal in the third imaging mode output from the second output path is used as the image signal. When the image signal used for the image display is switched from the image signal in the first imaging mode to the image signal in the second imaging mode from a state where it is used for a purpose different from the image display, the third The processing for the purpose different from the image display using the image signal in the imaging mode is temporarily stopped, and the image signal in the second imaging mode is output from the second output path. Driving in the second imaging mode, switching the acquisition destination of the image signal used for the image display from the first output path to the second output path, and from the first output path to the third imaging mode The first imaging mode is switched to the third imaging mode so that the image signal is output, and the image is output using the image signal in the third imaging mode output from the first output path. An image pickup apparatus comprising: control means for resuming processing for a use different from display.
前記画像表示とは異なる用途とは、オートフォーカス制御、露出制御、ホワイトバランス制御、被写体の特徴点の検出制御、被写体の動きの検出制御のいずれかの用途であることを特徴とする請求項1乃至9のいずれか1項に記載の撮像装置。   The use different from the image display is any of auto focus control, exposure control, white balance control, subject feature point detection control, and subject motion detection control. The imaging device according to any one of 1 to 9. 前記第2の撮像モードでの画像信号の出力開始から該画像信号を前記画像表示のために信号処理を行って前記表示手段へ出力するまでの時間は、前記第1の撮像モードでの画像信号の出力開始から該画像信号を前記画像表示のために信号処理を行って前記表示手段へ出力するまでの時間と同じであることを特徴とする請求項1乃至請求項10のいずれか1項に記載の撮像装置。   The time from the start of output of the image signal in the second imaging mode until the image signal is processed for signal display and output to the display means is the image signal in the first imaging mode. 11. The method according to claim 1, wherein the time from the start of output to the display means after performing signal processing for displaying the image is output to the display means. The imaging device described. 行方向と列方向に並べられた複数の画素を有する撮像素子から第1の出力経路と第2の出力経路とを含む複数の出力経路を通して画像信号を取得し、取得した画像信号を用いて表示手段に画像表示を行う画像信号処理方法であって、
前記撮像素子の所定の行の画素から画像信号を読み出す第1の撮像モードで前記撮像素子を駆動することによって前記第1の出力経路から出力される画像信号を前記画像表示に用いている状態から、前記第1の撮像モードよりも画像信号の読み出し行数の多い第2の撮像モードで前記撮像素子を駆動することによって前記第1の出力経路から出力される画像信号を用いた前記画像表示に切り替える場合に、
前記第1の撮像モードにより前記第1の出力経路から出力される画像信号を前記画像表示に用いるステップと、
前記撮像素子からの画像信号の読み出し行が前記第1の撮像モードおよび前記第2の撮像モードでの画像信号の読み出し行と重複しない第3の撮像モードで前記撮像素子を駆動することによって前記第2の出力経路からの出力される画像信号を前記画像表示とは異なる用途に用いるステップと、
前記画像表示に用いる画像信号の取得先を一時的に前記第1の出力経路から前記第2の出力経路に切り替えるステップと、
前記第1の出力経路から前記第2の撮像モードでの画像信号が出力されるように前記第1の撮像モードでの駆動を前記第2の撮像モードでの駆動に切り替えるステップと、
前記画像表示に用いる画像信号の取得先を前記第2の出力経路から前記第1の出力経路へ切り替えるステップとを有することを特徴とする画像信号処理方法。
An image signal is acquired from an imaging device having a plurality of pixels arranged in a row direction and a column direction through a plurality of output paths including a first output path and a second output path, and displayed using the acquired image signals An image signal processing method for displaying an image on a means,
From a state in which the image signal output from the first output path is used for the image display by driving the image sensor in a first imaging mode in which an image signal is read from pixels in a predetermined row of the image sensor. The image display using the image signal output from the first output path by driving the image sensor in the second imaging mode in which the number of rows of image signals to be read is larger than that in the first imaging mode. When switching,
Using an image signal output from the first output path in the first imaging mode for the image display;
By driving the imaging device in a third imaging mode in which a readout row of image signals from the imaging device does not overlap with readout rows of image signals in the first imaging mode and the second imaging mode. Using the image signals output from the two output paths for an application different from the image display;
Temporarily switching the acquisition destination of the image signal used for the image display from the first output path to the second output path;
Switching the driving in the first imaging mode to the driving in the second imaging mode so that an image signal in the second imaging mode is output from the first output path;
And a step of switching the acquisition destination of the image signal used for the image display from the second output path to the first output path.
行方向と列方向に並べられた複数の画素を有する撮像素子から第1の出力経路と第2の出力経路とを含む複数の出力経路を通して画像信号を取得し、取得した画像信号を用いて表示手段に画像表示を行う画像信号処理方法であって、
前記撮像素子の所定の行の画素から画像信号を読み出す第1の撮像モードで前記撮像素子を駆動することによって前記第1の出力経路から出力される画像信号を前記画像表示に用いている状態から、前記第1の撮像モードよりも画像信号の読み出し行数の多い第2の撮像モードで前記撮像素子を駆動することによって前記第1の出力経路から出力される画像信号を用いた前記画像表示に切り替えるときに、
前記第1の撮像モードにより前記第1の出力経路から出力される画像信号を前記画像表示に用いるステップと、
前記撮像素子からの画像信号の読み出し行が前記第1の撮像モードおよび前記第2の撮像モードでの画像信号の読み出し行と重複しない第3の撮像モードで前記撮像素子を駆動することによって前記第2の出力経路から出力される画像信号を前記画像表示とは異なる用途に用いるステップと、
前記撮像素子の駆動モードを前記撮像素子からの画像信号の読み出し行が前記第1の撮像モードおよび前記第2の撮像モードでの画像信号の読み出し行と重複しない第4の撮像モードへ前記第3の撮像モードから切り替えるステップと、
前記画像表示に用いる画像信号の取得先を前記第1の出力経路から前記第2の出力経路に一時的に切り替えるステップと、
前記第1の出力経路から前記第2の撮像モードでの画像信号が出力されるように前記第1の撮像モードを前記第2の撮像モードへ切り替えるステップと、
前記画像表示に用いる画像信号の取得先を前記第2の出力経路から前記第1の出力経路に切り替えるステップと、
前記第2の出力経路から前記第3の撮像モードでの画像信号が出力されるように前記第4の撮像モードを前記第3の撮像モードへ切り替えるモードへと切り替えるステップとを有することを特徴とする画像信号処理方法。
An image signal is acquired from an imaging device having a plurality of pixels arranged in a row direction and a column direction through a plurality of output paths including a first output path and a second output path, and displayed using the acquired image signals An image signal processing method for displaying an image on a means,
From a state in which the image signal output from the first output path is used for the image display by driving the image sensor in a first imaging mode in which an image signal is read from pixels in a predetermined row of the image sensor. The image display using the image signal output from the first output path by driving the image sensor in the second imaging mode in which the number of rows of image signals to be read is larger than that in the first imaging mode. When switching
Using an image signal output from the first output path in the first imaging mode for the image display;
By driving the imaging device in a third imaging mode in which a readout row of image signals from the imaging device does not overlap with readout rows of image signals in the first imaging mode and the second imaging mode. Using the image signal output from the two output paths for an application different from the image display;
The third drive mode of the image pickup device is changed to a fourth image pickup mode in which an image signal readout row from the image pickup device does not overlap an image signal readout row in the first imaging mode and the second imaging mode. Switching from the imaging mode of
Temporarily switching the acquisition source of the image signal used for the image display from the first output path to the second output path;
Switching the first imaging mode to the second imaging mode so that an image signal in the second imaging mode is output from the first output path;
Switching the acquisition source of the image signal used for the image display from the second output path to the first output path;
Switching the fourth imaging mode to a mode for switching to the third imaging mode so that an image signal in the third imaging mode is output from the second output path. Image signal processing method.
行方向と列方向に並べられた複数の画素を有する撮像素子から第1の出力経路と第2の出力経路とを含む複数の出力経路を通して画像信号を取得し、取得した画像信号を用いて表示手段に画像表示を行う画像信号処理方法であって、
前記撮像素子の所定の行の画素から画像信号を読み出す第1の撮像モードで前記撮像素子を駆動することによって前記第1の出力経路から出力される画像信号を前記画像表示に用いている状態から、前記第1の撮像モードよりも画像信号の読み出し行数の多い第2の撮像モードで前記撮像素子を駆動することによって前記第2の出力経路から出力される画像信号を用いた前記画像表示に切り替えると共に、前記撮像素子からの画像信号の読み出し行が前記第1の撮像モードおよび前記第2の撮像モードでの画像信号の読み出し行と重複しない第3の撮像モードで前記撮像素子を駆動することによって前記第2の出力経路から出力される画像信号を前記画像表示とは異なる用途に用いている状態から、前記第1の出力経路から前記第3の撮像モードでの画像信号が出力されるようにするときに、
前記第1の撮像モードにより前記第1の出力経路から出力される画像信号を前記画像表示に用いるステップと、
前記第3の撮像モードにより前記第2の出力経路から出力される画像信号を前記画像表示とは異なる用途に用いるステップと、
前記第3の撮像モードによる画像信号を用いた前記画像表示とは異なる用途の処理を一時的に中止するステップと、
前記第2の出力経路から前記第2の撮像モードでの画像信号が出力されるように前記第2の撮像モードでの駆動を開始するステップと、
前記画像表示に用いる画像信号の取得先を前記第1の出力経路から前記第2の出力経路に切り替えるステップと、
前記第1の出力経路から前記第3の撮像モードでの画像信号が出力されるように前記第1の撮像モードを前記第3の撮像モードへ切り替えるステップと、
前記第1の出力経路から出力される前記第3の撮像モードでの画像信号を用いて前記画像表示とは異なる用途の処理を再開するステップとを有することを特徴とする画像信号処理方法。
An image signal is acquired from an imaging device having a plurality of pixels arranged in a row direction and a column direction through a plurality of output paths including a first output path and a second output path, and displayed using the acquired image signals An image signal processing method for displaying an image on a means,
From a state in which the image signal output from the first output path is used for the image display by driving the image sensor in a first imaging mode in which an image signal is read from pixels in a predetermined row of the image sensor. The image display using the image signal output from the second output path by driving the image sensor in the second imaging mode in which the number of rows of image signals read out is larger than that in the first imaging mode. And switching the image sensor from the image sensor and driving the image sensor in a third imaging mode in which the image signal readout line does not overlap the image signal readout line in the first imaging mode and the second imaging mode. From the state where the image signal output from the second output path is used for a purpose different from that of the image display, the third imaging mode is output from the first output path. When the image signal at the de is to be outputted,
Using an image signal output from the first output path in the first imaging mode for the image display;
Using the image signal output from the second output path in the third imaging mode for an application different from the image display;
Temporarily stopping processing for an application different from the image display using the image signal in the third imaging mode;
Starting driving in the second imaging mode so that an image signal in the second imaging mode is output from the second output path;
Switching the acquisition destination of the image signal used for the image display from the first output path to the second output path;
Switching the first imaging mode to the third imaging mode so that an image signal in the third imaging mode is output from the first output path;
And a step of resuming processing for an application different from the image display using the image signal in the third imaging mode output from the first output path.
撮像素子から第1の出力経路と第2の出力経路を通して画像信号を取得することができる撮像装置であって、
前記第1の出力経路からの画像信号を表示手段でのライブビューに用い、前記第2の出力経路からの画像信号を前記ライブビューとは異なる用途に用いているときに、前記第2の出力経路から出力される画像信号を第1の精細度でのライブビュー表示に用いることができるように前記撮像素子の駆動モードを切り替え、前記ライブビューに用いる画像信号の取得先を前記第1の出力経路から前記第2の出力経路へ切り替え、前記第1の出力経路から前記第1の精細度とは異なる第2の精細度でのライブビューに用いることができる画像信号が前記第1の出力経路から出力されるように前記撮像素子の駆動モードを切り替え、前記ライブビューのための画像信号の取得先を前記第2の出力経路から前記第1の出力経路へ切り替える制御手段を有することを特徴とする撮像装置。
An imaging apparatus capable of acquiring an image signal from an imaging element through a first output path and a second output path,
When the image signal from the first output path is used for a live view on a display unit, and the image signal from the second output path is used for an application different from the live view, the second output The drive mode of the image sensor is switched so that the image signal output from the path can be used for live view display at the first definition, and the acquisition destination of the image signal used for the live view is the first output. An image signal that can be used for live view at a second definition different from the first definition from the first output route is switched from the first output route to the second output route. Control means for switching the drive mode of the image sensor so that the image signal is output from the second output path to the first output path. Imaging device according to claim Rukoto.
撮像素子から第1の出力経路と第2の出力経路を通して画像信号を取得することができる撮像装置における画像信号処理方法であって、
前記第1の出力経路からの画像信号を表示手段でのライブビューに用いるステップと、
前記第2の出力経路からの画像信号を前記ライブビューとは異なる用途に用いるステップと、
前記第2の出力経路から出力される画像信号を第1の精細度でのライブビューに用いることができるように前記撮像素子の駆動モードを切り替えるステップと、
前記ライブビューに用いる画像信号の取得先を前記第1の出力経路から前記第2の出力経路へ切り替えるステップと、
前記第1の出力経路から前記第1の精細度とは異なる第2の精細度でのライブビューに用いることができる画像信号が前記第1の出力経路から出力されるように前記撮像素子の駆動モードを切り替えるステップと、
前記ライブビューのための画像信号の取得先を前記第2の出力経路から前記第1の出力経路へ切り替えるステップと、
前記第2の出力経路から前記ライブビューとは異なる用途に用いることができる画像信号が前記第2の出力経路から出力されるかまたは前記第2の出力経路から画像信号が出力されなくなるように前記撮像素子の駆動モードを切り替えるステップとを有することが特徴とする画像信号処理方法。
An image signal processing method in an imaging apparatus capable of acquiring an image signal from an imaging element through a first output path and a second output path,
Using the image signal from the first output path for live view on a display means;
Using the image signal from the second output path for an application different from the live view;
Switching the drive mode of the image sensor so that an image signal output from the second output path can be used for live view at a first definition;
Switching the acquisition source of the image signal used for the live view from the first output path to the second output path;
Driving the imaging device so that an image signal that can be used for live view at a second definition different from the first definition from the first output path is output from the first output path. A step of switching modes,
Switching the acquisition source of the image signal for the live view from the second output path to the first output path;
The image signal that can be used for an application different from the live view from the second output path is output from the second output path, or the image signal is not output from the second output path. And a step of switching the drive mode of the image sensor.
JP2013242742A 2013-11-25 2013-11-25 Imaging apparatus and image signal processing method Expired - Fee Related JP6207360B2 (en)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2013242742A JP6207360B2 (en) 2013-11-25 2013-11-25 Imaging apparatus and image signal processing method
DE102014223858.7A DE102014223858B4 (en) 2013-11-25 2014-11-24 Image pickup device and image signal control method
DE102014020074.4A DE102014020074B3 (en) 2013-11-25 2014-11-24 Image pickup device and image signal control method
US14/551,224 US9924094B2 (en) 2013-11-25 2014-11-24 Image pickup apparatus capable of changing drive mode and image signal control method
GB1601511.7A GB2534040B (en) 2013-11-25 2014-11-25 Image pickup apparatus capable of changing drive mode and image signal control method
CN201410687648.0A CN104660894B (en) 2013-11-25 2014-11-25 Image pickup apparatus capable of changing drive mode and image signal control method
GB1420914.2A GB2522747B (en) 2013-11-25 2014-11-25 Image pickup apparatus capable of changing drive mode and image signal control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013242742A JP6207360B2 (en) 2013-11-25 2013-11-25 Imaging apparatus and image signal processing method

Publications (2)

Publication Number Publication Date
JP2015103944A true JP2015103944A (en) 2015-06-04
JP6207360B2 JP6207360B2 (en) 2017-10-04

Family

ID=53379330

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013242742A Expired - Fee Related JP6207360B2 (en) 2013-11-25 2013-11-25 Imaging apparatus and image signal processing method

Country Status (1)

Country Link
JP (1) JP6207360B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020088447A (en) * 2018-11-16 2020-06-04 キヤノン株式会社 Imaging device and control method thereof
CN112887430A (en) * 2021-03-12 2021-06-01 胡冬冬 Household health management device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002247443A (en) * 2001-02-21 2002-08-30 Sanyo Electric Co Ltd Digital camera
JP2010014788A (en) * 2008-07-01 2010-01-21 Nikon Corp Imaging element and imaging device
JP2012015911A (en) * 2010-07-02 2012-01-19 Olympus Corp Reading control device, reading control method, program, solid-state imaging device, and imaging device
JP2012044536A (en) * 2010-08-20 2012-03-01 Olympus Corp Reading control device, reading control method, program, imaging device, and solid-state imaging device
JP2013055589A (en) * 2011-09-06 2013-03-21 Sony Corp Imaging device, control method, and imaging apparatus

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002247443A (en) * 2001-02-21 2002-08-30 Sanyo Electric Co Ltd Digital camera
JP2010014788A (en) * 2008-07-01 2010-01-21 Nikon Corp Imaging element and imaging device
JP2012015911A (en) * 2010-07-02 2012-01-19 Olympus Corp Reading control device, reading control method, program, solid-state imaging device, and imaging device
JP2012044536A (en) * 2010-08-20 2012-03-01 Olympus Corp Reading control device, reading control method, program, imaging device, and solid-state imaging device
JP2013055589A (en) * 2011-09-06 2013-03-21 Sony Corp Imaging device, control method, and imaging apparatus

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020088447A (en) * 2018-11-16 2020-06-04 キヤノン株式会社 Imaging device and control method thereof
JP7241511B2 (en) 2018-11-16 2023-03-17 キヤノン株式会社 Imaging device and its control method
CN112887430A (en) * 2021-03-12 2021-06-01 胡冬冬 Household health management device
CN112887430B (en) * 2021-03-12 2022-12-20 深圳市环阳通信息技术有限公司 Household health management device

Also Published As

Publication number Publication date
JP6207360B2 (en) 2017-10-04

Similar Documents

Publication Publication Date Title
US9924094B2 (en) Image pickup apparatus capable of changing drive mode and image signal control method
JP2008263452A (en) Imaging apparatus, imaging system and driving method of imaging apparatus
US8866948B2 (en) Imaging apparatus
US20110018978A1 (en) 3d image display apparatus and 3d image display method
JP6296767B2 (en) Imaging apparatus and image signal processing method
US9363440B2 (en) Imaging device and imaging method that sets a phase difference between first and second synchronization signals
JP7320024B2 (en) IMAGE SENSOR, IMAGING DEVICE, IMAGE DATA PROCESSING METHOD, AND PROGRAM
US20210314486A1 (en) Imaging element, imaging apparatus, operation method of imaging element, and program
JP6207360B2 (en) Imaging apparatus and image signal processing method
JP2016219949A (en) Imaging apparatus, and control method and control program of the same
JP6066949B2 (en) Imaging apparatus, control method therefor, and program
KR102423994B1 (en) Control device, control method, and program
JP6808350B2 (en) Imaging device and its control method, program, and storage medium
CN109218607B (en) Image pickup apparatus, control method, and storage medium
JP4034603B2 (en) Digital camera
KR20130092213A (en) Digital photographing apparatus and control method thereof
JP2011061672A (en) Imaging apparatus and program for the same
JP4993683B2 (en) Imaging apparatus and control method thereof
JP2005012403A (en) Digital camera and picture information acquisition method
JP4227181B2 (en) Digital camera
CN107666571B (en) Image pickup apparatus having focus detection technology, control method therefor, and storage medium
JP2017034344A (en) Imaging apparatus and control method therefor
JP2015126386A (en) Image pickup device, and control method and program of the same
JP5726244B2 (en) Imaging apparatus and imaging method
JP2014064094A (en) Image pickup device, image processing method, and image processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170718

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170808

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170905

R151 Written notification of patent or utility model registration

Ref document number: 6207360

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees