JP4036060B2 - Electronic camera and white balance control circuit - Google Patents
Electronic camera and white balance control circuit Download PDFInfo
- Publication number
- JP4036060B2 JP4036060B2 JP2002250104A JP2002250104A JP4036060B2 JP 4036060 B2 JP4036060 B2 JP 4036060B2 JP 2002250104 A JP2002250104 A JP 2002250104A JP 2002250104 A JP2002250104 A JP 2002250104A JP 4036060 B2 JP4036060 B2 JP 4036060B2
- Authority
- JP
- Japan
- Prior art keywords
- color temperature
- white balance
- balance control
- illumination
- control value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Processing Of Color Television Signals (AREA)
- Color Television Image Signal Generators (AREA)
- Exposure Control For Cameras (AREA)
- Stroboscope Apparatuses (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、閃光撮影(ストロボ撮影)可能な電子カメラ、及びその電子カメラに適用されるホワイトバランス制御回路に関する。
【0002】
【従来の技術】
一般に、電子カメラ内部のホワイトバランス制御は、撮影された画像や測色センサの出力などから求められた照明の色温度や照明の種類に基づいて行われる。なお、照明の種類に基づくのは、異なる種類の2つの照明(例えば、蛍光灯と自然光)は、仮に同じ色温度であっても、ホワイトバランス制御値の最適値が互いに異なるからである。
【0003】
一方、閃光撮影時、照明は閃光(ストロボ光)が外光(閃光以外の照明)に重複したものとなるので、理想的なホワイトバランス制御は、外光の種類、外光の色温度、閃光の種類、及び閃光の色温度に基づいて行われる。
但し、実際は、閃光の種類及び閃光の色温度については使用する閃光発光装置にほぼ固有なので、ホワイトバランス制御値の決定方法として現在提案されているのは、次の(1)〜(4)の方法などである。
【0004】
(1)如何なる外光よりも閃光の方が被写体に与える影響が圧倒的に強いと仮定し、閃光単独の照明に対する最適値にホワイトバランス制御値を固定する。
(2)閃光発光前の予備撮影又は測色センサの出力に基づいて外光の種類と外光の色温度とを求め、そのような外光に対する最適値と、閃光単独の照明に対する最適値とを平均し、その平均値にホワイトバランス制御値を設定する。
【0005】
(3)(2)においてさらに外界の輝度を測定して閃光の発光量(すなわち閃光の被写体に対する影響度)を予測し、前記平均をその影響度に応じた重み付け平均にする。
(4)閃光発光前の予備撮影又は測色センサの出力に基づいて外光の種類と外光の色温度とを求めると共に、被写体の距離を測定して閃光の被写体への到達量を予測し、外光に対する最適値と閃光単独の照明に対する最適値との何れか一方を、その到達量に応じて選択する(さらには、距離の測定、到達量の予測、及び最適値の選択を、外界の各領域についてそれぞれ行う。)。
【0006】
【発明が解決しようとする課題】
しかしながら、(1)の方法によると、常に同じホワイトバランス制御値でホワイトバランス制御がなされてしまうので、或る特定の閃光撮影シーンは、極めて不適切に再現されてしまう。例えば、被写体の背景が遠くにあってその背景にはあまり閃光が到達せず、しかも、背景の照明の色温度が低いような閃光撮影シーンは、背景が不自然に赤味がかって再現されることがある。
【0007】
一方、(2)(3)(4)の何れかの方法を採用した場合、様々な閃光撮影シーンに対応できる可能性はあるものの、処理が複雑である割には再現画像に対するユーザの満足度はあまり高くない。
そこで本発明は、閃光撮影時のホワイトバランス制御値を比較的簡単な処理で適切に設定することのできる(具体的には、(2)(3)(4)の方法よりも簡単な処理で(1)の方法よりも適切に設定することのできる)電子カメラ、及びホワイトバランス制御回路を提供することを目的とする。
【0008】
【課題を解決するための手段】
請求項1に記載の電子カメラは、閃光発光装置又はその閃光発光装置への接続端子を備えた電子カメラにおいて、外界を撮像して画像データを取得する撮像手段と、前記閃光発光装置による閃光発光中に取得された前記画像データに基づいて、外光と閃光とによる重複照明の色温度を算出する色温度算出手段と、前記算出された色温度である算出色温度に応じて、前記画像データに対するホワイトバランス制御値を決定するホワイトバランス制御値決定手段とを備え、前記ホワイトバランス制御値決定手段は、前記算出色温度が所定範囲に属するときには、前記ホワイトバランス制御値に対する算出色温度の反映量を低減することを特徴とする。
【0009】
請求項2に記載の電子カメラは、請求項1に記載の電子カメラにおいて、前記ホワイトバランス制御値決定手段は、前記算出色温度が前記閃光単独の照明の色温度より高いときには、前記ホワイトバランス制御値をその照明に対する最適値に近づけることを特徴とする。
請求項3に記載の電子カメラは、請求項2に記載の電子カメラにおいて、前記ホワイトバランス制御値決定手段は、前記算出色温度が前記閃光単独の照明の色温度より高いときには、前記ホワイトバランス制御値をその照明に対する最適値に一致させることを特徴とする。
【0010】
請求項4に記載の電子カメラは、請求項1〜請求項3の何れか一項に記載の電子カメラにおいて、前記ホワイトバランス制御値決定手段は、前記算出色温度が日中光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記閃光単独の照明に対する最適値に近づけることを特徴とする。
請求項5に記載の電子カメラは、請求項4に記載の電子カメラにおいて、前記ホワイトバランス制御値決定手段は、前記算出色温度が日中光相当の照明の色温度より低く、かつ夕焼け光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記最適値にさらに近づけることを特徴とする。
【0011】
請求項6に記載の電子カメラは、請求項5に記載の電子カメラにおいて、前記ホワイトバランス制御値決定手段は、前記算出色温度が日中光相当の照明の色温度より低く、かつ夕焼け光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記最適値に一致させることを特徴とする。
請求項7に記載の電子カメラは、請求項1〜請求項3の何れか一項に記載の電子カメラにおいて、前記ホワイトバランス制御値決定手段は、前記算出色温度が日中光相当の照明の色温度よりも低いときには、前記ホワイトバランス制御値をその照明に対する最適値に近づけることを特徴とする。
【0012】
請求項8に記載の電子カメラは、請求項1に記載の電子カメラにおいて、前記閃光の非発光中に前記外光の種類を識別する手段を更に備え、前記ホワイトバランス制御値決定手段は、前記識別された種類に応じて、前記算出色温度の範囲と前記反映量との関係を可変することを特徴とする。
請求項9に記載のホワイトバランス制御回路は、閃光撮影可能な電子カメラに適用されるホワイトバランス制御回路であって、前記電子カメラによる閃光撮影で取得された画像データに基づいて、外光と閃光とによる重複照明の色温度を算出する色温度算出手段と、前記算出された色温度である算出色温度に応じて、前記画像データに対するホワイトバランス制御値を決定するホワイトバランス制御値決定手段とを備え、前記ホワイトバランス制御値決定手段は、前記算出色温度が所定範囲に属するときには、前記ホワイトバランス制御値に対する算出色温度の反映量を低減することを特徴とする。
【0013】
請求項10に記載のホワイトバランス制御回路は、請求項9に記載のホワイトバランス制御回路において、前記ホワイトバランス制御値決定手段は、前記算出色温度が前記閃光単独の照明の色温度より高いときには、前記ホワイトバランス制御値をその照明に対する最適値に近づけることを特徴とする。
請求項11に記載のホワイトバランス制御回路は、請求項10に記載のホワイトバランス制御回路において、前記ホワイトバランス制御値決定手段は、前記算出色温度が前記閃光単独の照明の色温度より高いときには、前記ホワイトバランス制御値をその照明に対する最適値に一致させることを特徴とする。
【0014】
請求項12に記載のホワイトバランス制御回路は、請求項9〜請求項11の何れか一項に記載のホワイトバランス制御回路において、前記ホワイトバランス制御値決定手段は、前記算出色温度が日中光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記閃光単独の照明に対する最適値に近づけることを特徴とする。
【0015】
請求項13に記載のホワイトバランス制御回路は、請求項12に記載のホワイトバランス制御回路において、前記ホワイトバランス制御値決定手段は、前記算出色温度が日中光相当の照明の色温度より低く、かつ夕焼け光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記最適値にさらに近づけることを特徴とする。
【0016】
請求項14に記載のホワイトバランス制御回路は、請求項13に記載のホワイトバランス制御回路において、前記ホワイトバランス制御値決定手段は、前記算出色温度が日中光相当の照明の色温度より低く、かつ夕焼け光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記最適値に一致させることを特徴とする。
【0017】
請求項15に記載のホワイトバランス制御回路は、請求項9〜請求項11の何れか一項に記載の電子カメラにおいて、前記ホワイトバランス制御値決定手段は、前記算出色温度が日中光相当の照明の色温度よりも低いときには、前記ホワイトバランス制御値をその照明に対する最適値に近づけることを特徴とする。
請求項16に記載のホワイトバランス制御回路は、請求項9に記載のホワイトバランス制御回路において、前記電子カメラは、前記外光の種類を識別することの可能な電子カメラであり、前記ホワイトバランス制御値決定手段は、前記識別された種類に応じて、前記算出色温度の範囲と前記反映量との関係を可変することを特徴とする。
【0018】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態について説明する。
[第1実施形態]
図1、図2、図3、図4、図5を参照して本発明の第1実施形態について説明する。
【0019】
本実施形態では、本発明の電子カメラ(本発明のホワイトバランス制御回路を搭載している。)を適用したカメラシステムを説明する。
図1は、本実施形態のカメラシステムの概略構成図である。
カメラシステムは、電子カメラ本体11、撮影レンズ12、電子閃光装置13からなる。例えば、撮影レンズ12と電子閃光装置13とは、電子カメラ本体11に対し着脱可能である。
【0020】
電子カメラ本体11には、レリーズ釦などの操作釦16が設けられ、操作者はその操作釦16を介して電子カメラ本体11の状態を非閃光撮影モード/閃光撮影モードなどの間で切り替えたり、電子カメラ本体11に対し所望のタイミングで撮影の指示を与えることができる。
因みに、電子カメラ本体11は、例えば、図1に示すような一眼レフレックスカメラである(シャッタ11e、CCD撮像素子11fの他、ミラー11a、スクリーン11b、ペンタプリズム11c、接眼レンズ11dなどを備える。)。
【0021】
なお、電子カメラ本体11中に点線で示すのは、後述する第2実施形態で使用される測色センサ11h、及び測色センサ11hへの入射光束を集光する集光レンズである(第1実施形態では、この測色センサ11h、集光レンズ11gは使用されないので非必須である。)。
非撮影時、ミラー11aは点線で示すような「ミラーダウン状態」となり、撮影レンズ12から入射する被写界からの光束は、ミラー11a、スクリーン11b、ペンタプリズム11c、接眼レンズ11dを介して操作者の眼に導かれる。この状態で、操作者は、被写界を目視することができる。なお、この状態で、測色センサ11hによる被写界の測色も可能となる。
【0022】
撮影時、電子カメラ本体11内のミラー11aは実線で示すような「ミラーアップ状態」となると共にシャッタ11eが駆動され、被写界からの光束によってCCD撮像素子11fが露光する。この状態で、CCD撮像素子11fが駆動されると被写界の画像が取得される。
一方、電子閃光装置13は、この電子カメラ本体11に対し、不図示の接点を介して電気的に接続され、その電子カメラ本体11からの電気信号による指示に従って駆動される。
【0023】
撮影時、特に、電子カメラ本体11が閃光撮影モードに設定されていた場合には、前記した露光のタイミングで被写界が照明されるよう、電子カメラ本体11から電子閃光装置13に対し閃光発光の指示が与えられる。
なお、電子閃光装置13の閃光の発光量などが可変である場合、その発光量などについても電子カメラ本体11から電子閃光装置13へ指示が与えられる。
【0024】
図2は、電子カメラ本体11内に備えられる回路部15のブロック図である。なお、以上説明した電子カメラ本体11の動作は、この回路部15のCPU15aが操作釦16の操作に応じて電子カメラ本体11内の各部(CCD撮像素子11f、シャッタ11e、ミラー11aなど)を駆動制御した結果、実現するものである。
【0025】
回路部15は、CPU15aの他、信号処理回路15b、ホワイトバランス制御回路15c、色変換回路15d、階調変換回路15e、画像メモリ15fなどを有する。これら信号処理回路15b、ホワイトバランス制御回路15c、色変換回路15d、階調変換回路15e、画像メモリ15fは、CPU15aによって制御される。
【0026】
回路部15には、CCD撮像素子11fが取得した画像の信号が入力される。この信号は、信号処理回路15bにおいて所定の信号処理、ホワイトバランス制御回路15cにおいてホワイトバランス処理、色変換回路15dにおいて色変換処理、階調変換回路15eにおいて階調変換処理がそれぞれ施された後、画像メモリ15fに格納される。
【0027】
ホワイトバランス制御回路15cは、例えば、ホワイトバランス処理部15c−1、色温度算出部15c−2、ホワイトバランスゲイン決定部15c−3を有する。
ホワイトバランス処理部15c−1は、信号処理回路15bから出力される信号(R,G,B)のR成分及びB成分(R,B)に対し、ホワイトバランスゲイン(Kr,Kb)を乗算することにより、ホワイトバランス処理を施すものである。
【0028】
このホワイトバランスゲイン(Kr,Kb)は、撮影毎に(つまり画像毎に)決定される。
決定は、色温度算出部15c−2、及びホワイトバランスゲイン決定部15c−3によりなされる。
色温度算出部15c−2は、信号処理回路15bから出力される1画像分の信号を参照し、その信号に基づく公知の何れかの手法で被写界の照明の色温度を算出する。
【0029】
ホワイトバランスゲイン決定部15c−3は、色温度算出部15c−2の出力する色温度(以下、「算出色温度」という。)に応じて、前記画像に対し最適なホワイトバランスゲイン(Kr,Kb)を決定する。
ホワイトバランスゲイン決定部15c−3には、その決定の処理を簡単にするため、例えば、ルックアップテーブルが備えられる(図2右下表参照)。
【0030】
ルックアップテーブルには、色温度の各値と、各色温度にそれぞれ最適なホワイトバランスゲイン(Kr,Kb)とが互いに対応付けて格納される。
なお、本実施形態では、色温度算出部15c−2の出力する算出色温度と、ルックアップテーブルを参照する際にそのルックアップテーブルに入力する色温度が同じとは限らないので、後者については、「参照色温度」という。
【0031】
ここで、非閃光撮影時、被写界を照明しているのは外光のみなので、色温度算出部15c−2の出力する算出色温度は外光の色温度を示す。一方、閃光撮影時、被写界を照明しているのは外光と閃光との重複照明なので、その算出色温度は重複照明の色温度を示す。
したがって、仮に算出色温度が同じであったとしても、非閃光撮影時と閃光撮影時とでは、最適なホワイトバランスゲイン(Kr,Kb)は異なる。
【0032】
よって、ルックアップテーブルは、非閃光撮影用と閃光撮影用との両方が用意される。
先ず、非閃光撮影用のルックアップテーブルの内容(ホワイトバランスゲイン(Kr,Kb))は、各色温度の外光に対する最適値を、それぞれ実測などにより求めたものである。
【0033】
因みに、低い色温度に対応付けられるものほどKb(B成分に乗算すべきホワイトバランスゲイン)が高く、高い色温度に対応付けられるものほどKr(R成分に乗算すべきホワイトバランスゲイン)が高くなっている。
【0034】
また、非閃光撮影時には、被写界を照明しているのは外光のみなので、前記1画像分の信号から、その外光の種類(蛍光灯であるか否か)を判別することができる。
蛍光灯は、それ以外の外光(非蛍光灯)よりも演色性が低いので、仮に、算出色温度が同じであっても、ホワイトバランスゲイン(Kr,Kb)を高くする必要がある。このため、非閃光撮影時、色温度算出部15c−2は、色温度を算出すると共に、同じ画像の信号に基づいて外光の種類(蛍光灯であるか否か)を判別する。
【0035】
そして、ホワイトバランスゲイン決定部15c−3の非閃光撮影用のルックアップテーブルとしては、蛍光灯用と非蛍光灯用とが別に用意され、両者は判別の結果に応じて選択的に使用される(図2右下表参照)。
一方、閃光撮影用のルックアップテーブルの内容(ホワイトバランスゲイン(Kr,Kb))は、各色温度の閃光に対する最適値(つまり、閃光単独の照明に対する最適値)を、それぞれ実測などにより求めたものである。
【0036】
因みに、閃光撮影用のルックアップテーブルにおいても、低い色温度に対応付けられるものほどKb(B成分に乗算すべきホワイトバランスゲイン)が高く、高い色温度に対応付けられるものほどKr(R成分に乗算すべきホワイトバランスゲイン)が高くなっている。
但し、この閃光撮影用のルックアップテーブルの内容(ホワイトバランスゲイン(Kr,Kb))は、閃光のみに対する最適値であるので、特定の閃光撮影シーン(外光の演色性が閃光のそれと同じであるような閃光撮影シーン)に対してしか適さない。
【0037】
そこで、本実施形態のホワイトバランスゲイン決定部15c−3は、閃光撮影時、閃光撮影用のルックアップテーブルの参照方法(算出色温度−参照色温度曲線)に工夫を施す。なお、閃光撮影であるか非閃光撮影であるかについては、ホワイトバランスゲイン決定部15c−3はCPU15aからの信号により認識する(CPU15aは、操作釦16の状態から、電子カメラ本体11の状態が閃光撮影モードであるか非閃光撮影モードであるかなどを認識している。)。
【0038】
図3は、ホワイトバランスゲイン決定部15c−3による閃光撮影用のルックアップテーブルの参照方法(算出色温度−参照色温度曲線)を示す図である。横軸が算出色温度であり、縦軸が参照色温度である。
先ず、ここでは、閃光単独の照明の色温度を、6500Kとする。
通常の閃光撮影では、算出色温度は、その色温度(6500K)と同じとなるか、そうでなければ、外光の影響でその色温度(6500K)よりも小さくなることが多い。
【0039】
本実施形態では、仮に、算出色温度が、閃光単独の照明の色温度(6500K)よりも高くなったとき(図3(a))には、その算出色温度は誤って算出されたものであり、外光と閃光との重複照明の色温度を正確に示していないとみなされる。
例えば、海を背景にした閃光撮影シーンのように、遠くに青色の背景のある閃光撮影シーンについては、海の青色の影響によって、閃光単独の照明の色温度(6500K)よりも算出色温度が高く算出される傾向にある。
【0040】
仮に、この閃光撮影シーンの算出色温度をそのまま参照色温度に使用すると、青味を抑えるようなホワイトバランスゲイン(Kr,Kb)が設定されてしまうので、人物などの被写体が不自然に赤味がかって再現されてしまう。
この場合、本実施形態のホワイトバランスゲイン決定部15c−3は、参照色温度を閃光単独の照明の色温度(6500K)に近づける。
【0041】
例えば、算出色温度の値の大小に拘わらず参照色温度を閃光単独の照明の色温度(6500K)に一致させる。
つまり、算出色温度が図3(a)の範囲に属するときには、算出色温度−参照色温度曲線は、太点線で示す「参照色温度=算出色温度」ではなく、「参照色温度=6500K」に設定される。
【0042】
このようにすれば、海を背景にした閃光撮影シーンの画像も、不自然に赤味がかることなく自然に再現される。
一方、算出色温度が、閃光単独の照明の色温度(6500K)以下であり、かつ日中光相当の照明の色温度(ここでは、5200Kとする。)以上であるとき(図3(b))には、算出色温度の信頼性が高いとみなし、算出色温度をそのまま参照色温度とする。
【0043】
つまり、算出色温度が図3(b)の範囲に属するときには、算出色温度−参照色温度曲線は、太点線で示す「参照色温度=算出色温度」に設定される。
さらに、本実施形態では、算出色温度が日中光相当の照明の色温度(5200K)よりも低いとき(図3(c))には、参照色温度を閃光単独の照明の色温度(6500K)に近づける。
【0044】
特に、算出色温度が、夕焼け光相当の照明の色温度(ここでは、3900Kとする。)以下であるとき(図3(d))には、参照色温度を閃光単独の照明の色温度(6500K)にさらに近づける。例えば、算出色温度の値の大小に拘わらず参照色温度を閃光単独の照明の色温度(6500K)に一致させる。
つまり、算出色温度が図3(d)の範囲に属するときには、算出色温度−参照色温度曲線は「参照色温度=6500K」に設定される。
【0045】
なぜなら、遠くに赤色の背景のある閃光撮影シーンは、夕焼けを背景にした場合など、操作者が赤味がかるのを狙って撮影したものであることが多い。このとき、算出色温度は3900K又はそれよりも低く算出される。
仮に、この閃光撮影シーンの算出色温度をそのまま参照色温度に使用すると、赤味を抑えるようなホワイトバランスゲイン(Kr,Kb)が設定されてしまうので、その赤味が薄れて操作者の意図と異なる色に再現されてしまう。
【0046】
本実施形態のように、参照色温度を閃光単独の照明の色温度(6500K)にすれば、操作者の意図通りの画像が得られる。
なお、算出色温度が図3(c)の(d)以外の範囲に属するときには、算出色温度−参照色温度曲線は、隣り合う直線に連続する曲線、例えば「参照色温度=10400−算出色温度」に設定されることが好ましい。この場合、算出色温度−参照色温度曲線は、全体として、「V字カーブ」を描く。
【0047】
以上、本実施形態では、「算出色温度が所定範囲(ここでは、6500K以上及び5200K以下)にあるときに算出色温度のホワイトバランスゲイン(Kr,Kb)に対する反映量を積極的に低減する」という簡単な処理によって、各種の閃光撮影シーンのそれぞれに対応している。
すなわち、本実施形態によれば、閃光撮影時のホワイトバランスゲイン(Kr,Kb)が比較的簡単な処理で適切に設定される。
【0048】
なお、算出色温度−参照色温度曲線を図3に示す「V字カーブ」にするためのホワイトバランスゲイン決定部15c−3の動作フローチャートは、例えば図4に示すとおりである。
すなわち、先ず、算出色温度が4つの範囲の何れに属するのかが判別される(ステップS1,S3,S5)。
【0049】
4つの範囲とは、3900K以下の範囲、3900K〜5200Kの範囲、5200K〜6500Kの範囲、及び6500Kを上回る範囲である。
3900K以下の範囲、又は6500Kを上回る範囲であるときには(ステップS1YES,又は、ステップS1NO→S3NO→S5NO)、参照色温度を6500Kに決定する(ステップS2)。
【0050】
また、5200K〜6500Kの範囲であるときには(ステップS1NO,ステップS3NO,ステップS5YES)、算出色温度を参照色温度にそのまま使用する(ステップS6)。
また、3900K〜5200Kの範囲であるときには(ステップS1NO,ステップS3YES)、参照色温度を(10400−算出色温度)Kに決定する(ステップS4)。
【0051】
因みに、図3に示すV字カーブは、閾値3900から閾値5200までの間隔と、閾値5200から閾値6500までの間隔とが均等なので、V字の左側の傾斜部の設定(図4のステップS4における処理)に必要な演算が簡単(加減算)になっている。なお、値「10400」は、閾値6500と閾値3900との和である。
【0052】
また、本実施形態のホワイトバランスゲイン決定部15c−3においては、閃光撮影時の参照色温度の範囲は、3900K〜6500Kのみなので、閃光撮影用のルックアップテーブルに用意されるホワイトバランスゲイン(Kr,Kb)も、5200K〜6500Kに対する最適値のみ(図2右下表中、点線で囲われた部分)でよい。
【0053】
[第1実施形態の補足]
本実施形態では、夕焼け光相当の照明の色温度を3900Kとしたが、3000〜4000Kの別の値に代えてもよい。
また、夕焼け光の色温度は、地域によって異なるので、電子カメラの使用地域に応じて最適な値が設定されることが好ましい。
【0054】
また、本実施形態では、日中光相当の照明の色温度を5200Kとしたが、5000〜5500Kの別の値に代えてもよい。
また、日中光の色温度は、地域によって異なるので、電子カメラの使用地域に応じて最適な値が設定されることが好ましい。
また、本実施形態では、閃光相当の照明の色温度を6500Kとしたが、6000〜7000Kの別の値に代えてもよい。
【0055】
また、閃光の色温度については、電子閃光装置13の種類や電子閃光装置13の設定内容によって異なるので、それら種類や設定内容に応じて最適な値に設定されることが好ましい。
また、本実施形態において、閃光撮影用のルックアップテーブルの内容(ホワイトバランスゲイン(Kr,Kb))についても、電子閃光装置13の種類や設定内容に応じたものであることが好ましい。
【0056】
また、本実施形態では、閃光撮影用のルックアップテーブルとして、各色温度の閃光に対しそれぞれ最適なホワイトバランスゲインを対応付けたルックアップテーブルを用意すると共に(図2参照)、そのルックアップテーブルの参照方法(算出色温度−参照色温度曲線)に工夫を施した(図3参照)が、各算出色温度とそれら算出色温度に対しそれぞれ設定されるべきホワイトバランスゲインとを予め対応付けたルックアップテーブルを用意し、算出色温度をそのまま参照色温度として使用しても、上記説明したものと同じ効果を得ることができる。
【0057】
また、本実施形態におけるホワイトバランスゲイン決定部15c−3による閃光撮影用のルックアップテーブルの参照方法(算出色温度−参照色温度曲線)は、図4に示すものに限らず、例えば、図5に示すように変形することもできる。図5に示す曲線は、範囲(a)及び範囲(d)において、それぞれ右上がり、及び左下がりとなるよう若干傾きが付与されたものである。
【0058】
[第2実施形態]
図1、図6、図7を参照して本発明の第2実施形態について説明する。
本実施形態は、第1実施形態の変形例である。第1実施形態との相違点についてのみ説明する。
図1に示すように、本実施形態の電子カメラ本体11’には、集光レンズ11g、測色センサ11hが備えられる。この測色センサ11hの出力に基づけば、外光の種類(蛍光灯であるか否か)を識別することができる。また、本実施形態の電子カメラ本体11’には、回路部15に代えて回路部15’が備えられる。
【0059】
図6に示すように、本実施形態の回路部15’は、第1実施形態の回路部15において、CPU15aに代えてCPU15a’が備えられ、ホワイトバランス制御回路15cに代えてホワイトバランス制御回路15c’が備えられたものに等しい。
ホワイトバランス制御回路15c’は、第1実施形態のホワイトバランス制御回路15cにおいて、ホワイトバランスゲイン決定部15c−3に代えてホワイトバランスゲイン決定部15c−3’が備えられたものに等しい。
【0060】
本実施形態のCPU15a’は、閃光撮影の直前における測色センサ11hの出力に基づいて、外光の種類(蛍光灯であるか否か)を識別する。
そして、CPU15a’はホワイトバランスゲイン決定部15c−3’に対し、その識別の結果に応じて異なる処理を行わせる。
図7は、ホワイトバランスゲイン決定部15c−3’による閃光撮影用のルックアップテーブルの参照方法(算出色温度−参照色温度曲線)を示す図である。
【0061】
先ず、非蛍光灯であると識別されたときには、図7(I)に示すように第1実施形態と同様の参照方法が採用される(その詳細は第1実施形態を参照。)。
一方、蛍光灯であると識別されたときには、図7(II)に示すような参照方法が採用される。以下、具体的に説明する。
算出色温度が日中光相当の照明の色温度(5200K)以上であるとき(図7(II)(a)(b))には、算出色温度−参照色温度曲線は、第1実施形態と同じに設定される。
【0062】
一方、算出色温度が日中光相当の照明の色温度(5200K)よりも低いとき(図7(II)(c))には、参照色温度をその照明の色温度(5200K)に近づける。例えば、算出色温度の値の大小に拘わらず参照色温度をその照明の色温度(5200K)に一致させる。つまり、算出色温度−参照色温度曲線は、「参照色温度=5200K」に設定される。
【0063】
なぜなら、外光が蛍光灯であり、かつ、算出色温度がこの範囲(図7(II)(c))に属するような閃光撮影シーンは、蛍光灯の影響が比較的強いと考えられる。また、夕焼けなどの自然光とは異なり人工光である蛍光灯は、一般の操作者に嫌われる傾向にある。よって、操作者は、この閃光撮影シーンの蛍光灯の雰囲気をなるべく除去したいと望んでいる可能性が高い。
【0064】
但し、この範囲(図7(II)(c))の参照色温度を閃光単独の照明の色温度(6500K)に一致させてしまうと、隣接する範囲(図7(II)(b))の曲線(算出色温度−参照色温度曲線)と不連続になってしまう。
このため、参照色温度は、閃光単独の照明の色温度(6500K)ではなく、日中光相当の照明の色温度(5200K)に一致させられる。
【0065】
この場合、算出色温度−参照色温度曲線は、全体として、「逆Z字カーブ」を描く。
なお、算出色温度−参照色温度曲線を図7(II)に示す「逆Z字カーブ」にするためのホワイトバランスゲイン決定部15c−3’の動作フローチャートは、例えば図8に示すとおりである。なお、図8の冒頭には、外光が蛍光灯であるか否かを判別するステップS21を示した。非蛍光灯である場合(ステップS21NO)に実行されるのは、第1実施形態の図4に示した動作である。
【0066】
蛍光灯である場合、先ず、算出色温度が3つの範囲の何れに属するのかが判別される(ステップS3,S5)。
3つの範囲とは、5200Kを下回る範囲、5200K〜6500Kの範囲、6500Kを上回る範囲である。
6500Kを上回る範囲であるときには(ステップS3NO→S5NO)、参照色温度を6500Kに決定する(ステップS2)。
【0067】
また、5200K〜6500Kの範囲であるときには(ステップS3NO,ステップS5YES)、算出色温度を参照色温度にそのまま使用する(ステップS6)。
また、5200Kを下回る範囲であるときには(ステップS3YES)、参照色温度を5200Kに決定する(ステップS24)。
以上、本実施形態では、第1実施形態において、さらに、測色センサ11hの出力から外光の種類(蛍光灯であるか否か)が識別され、その識別された種類に応じて算出色温度の範囲と前記反映量との関係が可変されるものである。
【0068】
そして、蛍光灯/非蛍光灯の何れであったとしても、「算出色温度が所定範囲にあるときに算出色温度のホワイトバランスゲイン(Kr,Kb)に対する反映量を積極的に低減する」という簡単な処理によって、各種の閃光撮影シーンのそれぞれに対応している。
よって、本実施形態においても、閃光撮影時のホワイトバランスゲイン(Kr,Kb)が比較的簡単な処理で適切に設定される。
【0069】
[第2実施形態の補足]
なお、本実施形態では、測色センサとして、撮影レンズ12を通過した光を受光する測色センサ11hが使用されたが、そのような測色センサの代わりに、電子カメラ本体11の前面部などに設けられ、被写界の方向から撮影レンズ12を通過せずに入射する光を受光する外光センサを使用してもよい。
【0070】
或いは、閃光撮影の直前に電子カメラ本体11が非閃光撮影を行うこととし、それにより取得された画像に基づいて外光の種類を求めてもよい。
また、本実施形態では、閃光撮影用のルックアップテーブルとして、各色温度の閃光に対しそれぞれ最適なホワイトバランスゲインを対応付けたルックアップテーブルを用意すると共に(図6参照)、そのルックアップテーブルの参照方法(算出色温度−参照色温度曲線)に工夫を施した(7(I)(II)参照)が、各算出色温度とそれら算出色温度に対しそれぞれ設定されるべきホワイトバランスゲインとを予め対応付けたルックアップテーブルを用意し、算出色温度をそのまま参照色温度として使用しても、上記説明したものと同じ効果を得ることができる。
【0071】
但し、本実施形態では、閃光撮影時の外光が蛍光灯であるときと非蛍光灯であるときとでは、設定されるホワイトバランスゲインが互いに異なるので、この場合の閃光撮影用のルックアップテーブルは、(少なくとも算出色温度が5200を下回る範囲については)蛍光灯用と非蛍光灯用との2種類を設ける必要がある。
[その他]
なお、上記各実施形態のホワイトバランス制御回路(15c,15c’)は、算出色温度が図3(図7)に示す範囲(a)に属するとき、及び範囲(c)に属するときのどちらの場合にも、ホワイトバランス制御値(ホワイトバランスゲイン)に対する算出色温度の反映量を低減したが、範囲(a)に属するときにのみ低減するよう構成したり、範囲(b)に属するときにのみ低減するよう構成することもできる。
【0072】
また、上記各実施形態では、ホワイトバランス制御値(ホワイトバランスゲイン)を設定するに当たりルックアップテーブルが使用されているが、その設定に当たり他の方法が適用されてもよいことはいうまでもない。
【0073】
【発明の効果】
以上説明したとおり、本発明によれば、閃光撮影時のホワイトバランス制御値を比較的簡単な処理で適切に設定することのできる電子カメラ、及びホワイトバランス制御回路が実現する。
【図面の簡単な説明】
【図1】第1実施形態及び第2実施形態のカメラシステムの概略構成図である。
【図2】電子カメラ本体11内に備えられる回路部15のブロック図である。
【図3】ホワイトバランスゲイン決定部15c−3による閃光撮影用のルックアップテーブルの参照方法(算出色温度−参照色温度曲線)を示す図である。
【図4】ホワイトバランスゲイン決定部15c−3の動作フローチャート(部分)である。
【図5】ホワイトバランスゲイン決定部15c−3による閃光撮影用のルックアップテーブルの参照方法(算出色温度−参照色温度曲線)の別の例を示す図である。
【図6】回路部15’のブロック図である。
【図7】ホワイトバランスゲイン決定部15c−3’による閃光撮影用のルックアップテーブルの参照方法(算出色温度−参照色温度曲線)を示す図である。
【図8】ホワイトバランスゲイン決定部15c−3’の動作フローチャート(部分)である。
【符号の説明】
11 電子カメラ本体
12 撮影レンズ
11a ミラー
11b スクリーン
11c ペンタプリズム
11d 接眼レンズ
11h 測色センサ
11g 集光レンズ
11e シャッタ
11f CCD撮像素子
13 電子閃光装置
15,15’ 回路部
16 操作釦
15a,15a’ CPU
15b 信号処理回路
15c,15c’ ホワイトバランス制御回路
15c−1 ホワイトバランス処理部
15c−2 色温度算出部
15c−3,15c−3’ ホワイトバランスゲイン決定部
15d 色変換回路
15e 階調変換回路
15f 画像メモリ[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an electronic camera capable of flash photography (strobe photography) and a white balance control circuit applied to the electronic camera.
[0002]
[Prior art]
In general, white balance control in an electronic camera is performed based on the color temperature of illumination and the type of illumination obtained from a photographed image, the output of a colorimetric sensor, or the like. Note that the reason why the illumination is based on the type of illumination is that the two different types of illumination (for example, fluorescent light and natural light) have different white balance control values even if they have the same color temperature.
[0003]
On the other hand, during flash photography, the illumination is a combination of flash (strobe light) and external light (non-flash illumination), so the ideal white balance control is the type of external light, the color temperature of the external light, the flash And the color temperature of the flash.
However, since the type of flash and the color temperature of the flash are actually specific to the flash light emitting device to be used, the following (1) to (4) are currently proposed as methods for determining the white balance control value. And so on.
[0004]
(1) The white balance control value is fixed to the optimum value for the illumination of the flash alone, assuming that the influence of the flash on the subject is overwhelmingly stronger than any external light.
(2) The type of external light and the color temperature of the external light are obtained based on the preliminary photographing before the flash emission or the output of the colorimetric sensor, and the optimal value for such external light and the optimal value for the illumination of the flash alone And the white balance control value is set to the average value.
[0005]
(3) In (2), the brightness of the external environment is further measured to predict the flash emission amount (that is, the degree of influence of the flash on the subject), and the average is set to a weighted average corresponding to the degree of influence.
(4) The type of external light and the color temperature of external light are obtained based on preliminary shooting before flash emission or the output of a colorimetric sensor, and the distance of the subject is measured to predict the amount of flash reaching the subject. The optimal value for the external light and the optimal value for the illumination of the flash alone are selected in accordance with the amount of the arrival (in addition, the distance measurement, the prediction of the amount of arrival, and the selection of the optimum value are selected by the outside world). For each of the areas.)
[0006]
[Problems to be solved by the invention]
However, according to the method (1), since white balance control is always performed with the same white balance control value, a specific flash photography scene is reproduced extremely inappropriately. For example, a flash photography scene where the background of the subject is far away and the flash does not reach the background and the background lighting color temperature is low is reproduced with an unnatural reddish background. Sometimes.
[0007]
On the other hand, when any one of the methods (2), (3), and (4) is adopted, although there is a possibility that it can cope with various flash photography scenes, the degree of satisfaction of the user with respect to the reproduced image although the processing is complicated Is not so expensive.
Therefore, according to the present invention, the white balance control value at the time of flash photography can be appropriately set by a relatively simple process (specifically, the process is simpler than the methods (2), (3), and (4)). An object of the present invention is to provide an electronic camera and a white balance control circuit that can be set more appropriately than the method (1).
[0008]
[Means for Solving the Problems]
The electronic camera according to
[0009]
The electronic camera according to
The electronic camera according to
[0010]
The electronic camera according to claim 4 is the electronic camera according to any one of
The electronic camera according to
[0011]
The electronic camera according to claim 6 is the electronic camera according to
The electronic camera according to claim 7 is the electronic camera according to any one of
[0012]
An electronic camera according to an eighth aspect of the present invention is the electronic camera according to the first aspect, further comprising means for identifying the type of the external light during non-emission of the flashlight, wherein the white balance control value determining means is The relationship between the calculated color temperature range and the reflection amount is varied according to the identified type.
The white balance control circuit according to claim 9 is a white balance control circuit applied to an electronic camera capable of flash photography, and is based on image data acquired by flash photography by the electronic camera and external light and flash light. And a color temperature calculation means for calculating a color temperature of the overlapping illumination, and a white balance control value determination means for determining a white balance control value for the image data in accordance with the calculated color temperature which is the calculated color temperature. The white balance control value determination means reduces the amount of reflection of the calculated color temperature with respect to the white balance control value when the calculated color temperature falls within a predetermined range.
[0013]
The white balance control circuit according to claim 10 is the white balance control circuit according to claim 9, wherein when the calculated color temperature is higher than a color temperature of illumination of the flash alone, The white balance control value is brought close to an optimum value for the illumination.
A white balance control circuit according to an eleventh aspect is the white balance control circuit according to the tenth aspect, wherein the white balance control value determining means is configured such that when the calculated color temperature is higher than a color temperature of illumination of the flash alone. The white balance control value is matched with an optimum value for the illumination.
[0014]
The white balance control circuit according to
[0015]
The white balance control circuit according to
[0016]
The white balance control circuit according to claim 14 is the white balance control circuit according to
[0017]
The white balance control circuit according to
The white balance control circuit according to claim 16 is the white balance control circuit according to claim 9, wherein the electronic camera is an electronic camera capable of identifying the type of the external light, and the white balance control circuit The value determining means varies the relationship between the calculated color temperature range and the reflection amount according to the identified type.
[0018]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[First Embodiment]
A first embodiment of the present invention will be described with reference to FIGS. 1, 2, 3, 4, and 5.
[0019]
In the present embodiment, a camera system to which the electronic camera of the present invention (the white balance control circuit of the present invention is mounted) will be described.
FIG. 1 is a schematic configuration diagram of a camera system according to the present embodiment.
The camera system includes an electronic camera body 11, a photographing
[0020]
The electronic camera body 11 is provided with an operation button 16 such as a release button, and the operator can switch the state of the electronic camera body 11 between the non-flash photography mode / flash photography mode and the like via the operation button 16. A photographing instruction can be given to the electronic camera body 11 at a desired timing.
Incidentally, the electronic camera body 11 is, for example, a single-lens reflex camera as shown in FIG. 1 (in addition to the
[0021]
A dotted line in the electronic camera body 11 indicates a
At the time of non-photographing, the
[0022]
At the time of shooting, the
On the other hand, the
[0023]
At the time of shooting, particularly when the electronic camera body 11 is set to the flash photography mode, the electronic camera body 11 flashes the
When the flash amount of the
[0024]
FIG. 2 is a block diagram of the
[0025]
In addition to the
[0026]
The
[0027]
The white
The white
[0028]
The white balance gain (Kr, Kb) is determined for each shooting (that is, for each image).
The determination is made by the color
The color
[0029]
The white balance
In order to simplify the determination process, the white balance
[0030]
In the lookup table, each value of the color temperature and the optimum white balance gain (Kr, Kb) for each color temperature are stored in association with each other.
In the present embodiment, the calculated color temperature output from the color
[0031]
Here, at the time of non-flash photography, since only the outside light illuminates the object scene, the calculated color temperature output from the color
Therefore, even if the calculated color temperature is the same, the optimum white balance gain (Kr, Kb) differs between non-flash shooting and flash shooting.
[0032]
Therefore, both the non-flash photographing and the flash photographing are prepared for the lookup table.
First, the contents of the look-up table for non-flash photography (white balance gain (Kr, Kb)) are obtained by measuring the optimum values for the external light at each color temperature.
[0033]
Incidentally, Kb (white balance gain to be multiplied by B component) is higher as it is associated with a lower color temperature, and Kr (white balance gain to be multiplied with R component) is higher as it is associated with a higher color temperature. ing.
[0034]
In non-flash photography, since only the outside light illuminates the object scene, the type of the outside light (whether it is a fluorescent lamp) can be determined from the signal for the one image. .
Since the fluorescent lamp has lower color rendering than other external light (non-fluorescent lamp), it is necessary to increase the white balance gain (Kr, Kb) even if the calculated color temperature is the same. For this reason, during non-flash photography, the color
[0035]
As the look-up table for non-flash photography of the white balance
On the other hand, the contents of the look-up table for flash photography (white balance gain (Kr, Kb)) are obtained by measuring the optimum values for the flashes of each color temperature (that is, the optimum values for the illumination of the flash alone). It is.
[0036]
Incidentally, in the flash photography look-up table, Kb (white balance gain to be multiplied by B component) is higher as it is associated with a lower color temperature, and Kr (R component is associated with a higher color temperature). The white balance gain to be multiplied is high.
However, since the contents of the look-up table for flash photography (white balance gain (Kr, Kb)) are optimum values for only flash, the specific flash photography scene (the color rendering property of external light is the same as that of flash) It is only suitable for certain flash photography scenes).
[0037]
Therefore, the white balance
[0038]
FIG. 3 is a diagram illustrating a look-up table reference method (calculated color temperature-reference color temperature curve) for flash photography by the white balance
First, here, the color temperature of the flash alone illumination is 6500K.
In normal flash photography, the calculated color temperature is often the same as the color temperature (6500K) or otherwise, it is often lower than the color temperature (6500K) due to the influence of external light.
[0039]
In the present embodiment, if the calculated color temperature is higher than the color temperature (6500K) of the flash alone illumination (FIG. 3A), the calculated color temperature is calculated by mistake. Yes, it is considered not to accurately indicate the color temperature of the overlapping illumination of ambient light and flash.
For example, for a flash photography scene with a blue background in the distance, such as a flash photography scene with the sea in the background, the calculated color temperature is higher than the color temperature of the flash alone illumination (6500K) due to the influence of the blue of the sea. It tends to be highly calculated.
[0040]
If the calculated color temperature of this flash photography scene is used as it is as the reference color temperature, a white balance gain (Kr, Kb) that suppresses bluishness is set, so that subjects such as people appear reddish unnaturally. Will be reproduced.
In this case, the white balance
[0041]
For example, the reference color temperature is made to coincide with the color temperature (6500K) of the illumination of the flash alone, regardless of the value of the calculated color temperature.
That is, when the calculated color temperature belongs to the range of FIG. 3A, the calculated color temperature-reference color temperature curve is not “reference color temperature = calculated color temperature” indicated by a thick dotted line, but “reference color temperature = 6500K”. Set to
[0042]
In this way, an image of a flash photography scene with the sea as a background can be reproduced naturally without being unnaturally reddish.
On the other hand, when the calculated color temperature is equal to or lower than the color temperature of the flash alone illumination (6500K) and equal to or higher than the color temperature of illumination equivalent to daylight (here, 5200K) (FIG. 3B). ), The calculated color temperature is considered to be highly reliable, and the calculated color temperature is directly used as the reference color temperature.
[0043]
That is, when the calculated color temperature belongs to the range of FIG. 3B, the calculated color temperature-reference color temperature curve is set to “reference color temperature = calculated color temperature” indicated by a thick dotted line.
Furthermore, in this embodiment, when the calculated color temperature is lower than the color temperature of illumination equivalent to daylight (5200K) (FIG. 3C), the reference color temperature is set to the color temperature of flash only illumination (6500K). ).
[0044]
In particular, when the calculated color temperature is equal to or lower than the color temperature of illumination equivalent to sunset light (here, 3900K) (FIG. 3D), the reference color temperature is the color temperature of the flash alone illumination ( 6500K). For example, the reference color temperature is made to coincide with the color temperature (6500K) of the illumination of the flash alone, regardless of the value of the calculated color temperature.
That is, when the calculated color temperature belongs to the range of FIG. 3D, the calculated color temperature-reference color temperature curve is set to “reference color temperature = 6500K”.
[0045]
This is because flash photography scenes with a red background in the distance are often taken with the aim of the reddishness of the operator, such as when the sunset is the background. At this time, the calculated color temperature is calculated to be 3900K or lower.
If the calculated color temperature of this flash photography scene is used as it is for the reference color temperature, a white balance gain (Kr, Kb) that suppresses redness is set, so that the redness fades and the operator's intention It will be reproduced in a different color.
[0046]
If the reference color temperature is set to the color temperature of flash only illumination (6500K) as in this embodiment, an image as intended by the operator can be obtained.
When the calculated color temperature belongs to a range other than (d) in FIG. 3C, the calculated color temperature-reference color temperature curve is a curve continuous to adjacent straight lines, for example, “reference color temperature = 10400−calculated color”. It is preferable that the temperature is set. In this case, the calculated color temperature-reference color temperature curve as a whole draws a “V-shaped curve”.
[0047]
As described above, in the present embodiment, “the amount of reflection of the calculated color temperature with respect to the white balance gain (Kr, Kb) is positively reduced when the calculated color temperature is within a predetermined range (here, 6500K or more and 5200K or less)”. With this simple process, each flash photography scene is supported.
That is, according to the present embodiment, the white balance gain (Kr, Kb) at the time of flash photography is appropriately set by a relatively simple process.
[0048]
An operation flowchart of the white balance
That is, first, it is determined which of the four ranges the calculated color temperature belongs to (steps S1, S3, S5).
[0049]
The four ranges are a range of 3900K or less, a range of 3900K to 5200K, a range of 5200K to 6500K, and a range exceeding 6500K.
When the range is 3900K or less or over 6500K (step S1YES or step S1NO → S3NO → S5NO), the reference color temperature is determined to be 6500K (step S2).
[0050]
When the range is from 5200K to 6500K (step S1NO, step S3NO, step S5YES), the calculated color temperature is used as it is for the reference color temperature (step S6).
If it is in the range of 3900K to 5200K (step S1NO, step S3YES), the reference color temperature is determined to be (10400−calculated color temperature) K (step S4).
[0051]
Incidentally, since the interval from the
[0052]
In the white balance
[0053]
[Supplement to the first embodiment]
In this embodiment, the color temperature of the illumination equivalent to the sunset light is 3900K, but may be replaced with another value of 3000 to 4000K.
Further, since the color temperature of the sunset light varies depending on the region, it is preferable that an optimal value is set according to the region where the electronic camera is used.
[0054]
Further, in this embodiment, the color temperature of the illumination equivalent to daylight is 5200K, but it may be replaced with another value of 5000 to 5500K.
In addition, since the color temperature of daylight varies depending on the region, it is preferable to set an optimal value according to the region where the electronic camera is used.
Further, in this embodiment, the color temperature of the illumination equivalent to the flash is 6500K, but it may be replaced with another value of 6000 to 7000K.
[0055]
Further, since the color temperature of the flash differs depending on the type of
In the present embodiment, it is preferable that the contents of the flash photography look-up table (white balance gain (Kr, Kb)) also correspond to the type and setting contents of the
[0056]
In the present embodiment, as a lookup table for flash photography, a lookup table in which optimum white balance gains are associated with each color temperature flash is prepared (see FIG. 2). A look has been devised in the reference method (calculated color temperature-reference color temperature curve) (see FIG. 3), in which each calculated color temperature and a white balance gain to be set for each calculated color temperature are associated in advance. Even if an uptable is prepared and the calculated color temperature is used as it is as the reference color temperature, the same effect as described above can be obtained.
[0057]
In addition, the reference method (calculated color temperature-reference color temperature curve) of the flash photography lookup table by the white balance
[0058]
[Second Embodiment]
A second embodiment of the present invention will be described with reference to FIGS.
This embodiment is a modification of the first embodiment. Only differences from the first embodiment will be described.
As shown in FIG. 1, the electronic camera body 11 ′ according to the present embodiment includes a
[0059]
As shown in FIG. 6, the
The white
[0060]
The
Then, the
FIG. 7 is a diagram showing a method of referring to a flash photography look-up table (calculated color temperature-reference color temperature curve) by the white balance
[0061]
First, when a non-fluorescent lamp is identified, a reference method similar to that of the first embodiment is employed as shown in FIG. 7I (refer to the first embodiment for details).
On the other hand, when a fluorescent lamp is identified, a reference method as shown in FIG. 7 (II) is adopted. This will be specifically described below.
When the calculated color temperature is equal to or higher than the color temperature of illumination equivalent to daylight (5200K) (FIG. 7 (II) (a) (b)), the calculated color temperature-reference color temperature curve is the first embodiment. Is set the same as
[0062]
On the other hand, when the calculated color temperature is lower than the color temperature of illumination equivalent to daylight (5200K) (FIG. 7 (II) (c)), the reference color temperature is brought close to the color temperature of the illumination (5200K). For example, the reference color temperature is made to coincide with the color temperature (5200K) of the illumination regardless of the value of the calculated color temperature. That is, the calculated color temperature-reference color temperature curve is set to “reference color temperature = 5200K”.
[0063]
This is because a flash photography scene in which the outside light is a fluorescent lamp and the calculated color temperature belongs to this range (FIGS. 7 (II) and (c)) is considered to have a relatively strong influence of the fluorescent lamp. In addition, fluorescent lights that are artificial light unlike natural light such as sunset tend to be disliked by general operators. Therefore, there is a high possibility that the operator desires to remove the fluorescent lamp atmosphere in this flash photography scene as much as possible.
[0064]
However, if the reference color temperature in this range (FIGS. 7 (II) and (c)) matches the color temperature (6500K) of the flash only illumination, the adjacent range (FIGS. 7 (II) and (b)) It becomes discontinuous with the curve (calculated color temperature-reference color temperature curve).
For this reason, the reference color temperature is made equal to the color temperature (5200K) of illumination equivalent to daylight, not the color temperature (6500K) of illumination with flash alone.
[0065]
In this case, the calculated color temperature-reference color temperature curve as a whole draws an “inverse Z-shaped curve”.
An operation flowchart of the white balance
[0066]
If it is a fluorescent lamp, it is first determined which of the three ranges the calculated color temperature belongs to (steps S3 and S5).
The three ranges are a range below 5200K, a range from 5200K to 6500K, and a range above 6500K.
When it is in the range exceeding 6500K (step S3NO → S5NO), the reference color temperature is determined to be 6500K (step S2).
[0067]
When the range is from 5200K to 6500K (step S3NO, step S5YES), the calculated color temperature is used as it is for the reference color temperature (step S6).
If it is in the range below 5200K (step S3 YES), the reference color temperature is determined to be 5200K (step S24).
As described above, in the present embodiment, in the first embodiment, the type of external light (whether it is a fluorescent lamp) is further identified from the output of the
[0068]
Then, whether it is a fluorescent lamp or a non-fluorescent lamp, “when the calculated color temperature is within a predetermined range, the amount of reflection of the calculated color temperature with respect to the white balance gain (Kr, Kb) is actively reduced”. It corresponds to each of various flash photography scenes by simple processing.
Therefore, also in the present embodiment, the white balance gain (Kr, Kb) at the time of flash photography is appropriately set by a relatively simple process.
[0069]
[Supplement of the second embodiment]
In the present embodiment, the
[0070]
Alternatively, the electronic camera body 11 may perform non-flash shooting immediately before flash shooting, and the type of external light may be obtained based on the image acquired thereby.
In the present embodiment, a lookup table in which an optimum white balance gain is associated with each color temperature flash is prepared as a lookup table for flash photography (see FIG. 6). The reference method (calculated color temperature-reference color temperature curve) has been devised (see 7 (I) and (II)) to calculate each calculated color temperature and the white balance gain to be set for each calculated color temperature. Even if a lookup table associated in advance is prepared and the calculated color temperature is directly used as the reference color temperature, the same effect as described above can be obtained.
[0071]
However, in the present embodiment, the set white balance gain is different between when the external light at the time of flash photography is a fluorescent lamp and when it is a non-fluorescent lamp. Need to provide two types of fluorescent lamps and non-fluorescent lamps (at least in the range where the calculated color temperature is below 5200).
[Others]
Note that the white balance control circuit (15c, 15c ′) of each of the above embodiments is either when the calculated color temperature belongs to the range (a) shown in FIG. 3 (FIG. 7) or when the calculated color temperature belongs to the range (c). In this case, the reflected amount of the calculated color temperature with respect to the white balance control value (white balance gain) is reduced, but it is configured to be reduced only when belonging to the range (a), or only when belonging to the range (b). It can also be configured to reduce.
[0072]
In each of the above embodiments, a look-up table is used for setting the white balance control value (white balance gain), but it goes without saying that other methods may be applied for the setting.
[0073]
【The invention's effect】
As described above, according to the present invention, an electronic camera and a white balance control circuit that can appropriately set a white balance control value at the time of flash photography by a relatively simple process are realized.
[Brief description of the drawings]
FIG. 1 is a schematic configuration diagram of a camera system according to a first embodiment and a second embodiment.
2 is a block diagram of a
FIG. 3 is a diagram showing a look-up table reference method (calculated color temperature-reference color temperature curve) for flash photography by the white balance
FIG. 4 is an operation flowchart (part) of a white balance
FIG. 5 is a diagram showing another example of a method for referring to a flash photography lookup table (calculated color temperature-reference color temperature curve) by the white balance
FIG. 6 is a block diagram of a
FIG. 7 is a diagram showing a look-up table reference method (calculated color temperature-reference color temperature curve) for flash photography by the white balance
FIG. 8 is an operation flowchart (part) of a white balance
[Explanation of symbols]
11 Electronic camera body
12 Shooting lens
11a mirror
11b screen
11c Penta prism
11d eyepiece
11h Colorimetric sensor
11g condenser lens
11e Shutter
11f CCD image sensor
13 Electronic flash device
15,15 'circuit part
16 Operation buttons
15a, 15a 'CPU
15b Signal processing circuit
15c, 15c 'White balance control circuit
15c-1 White balance processing section
15c-2 Color temperature calculator
15c-3, 15c-3 ′ White balance gain determination unit
15d color conversion circuit
15e gradation conversion circuit
15f image memory
Claims (16)
外界を撮像して画像データを取得する撮像手段と、
前記閃光発光装置による閃光発光中に取得された前記画像データに基づいて、外光と閃光とによる重複照明の色温度を算出する色温度算出手段と、
前記算出された色温度である算出色温度に応じて、前記画像データに対するホワイトバランス制御値を決定するホワイトバランス制御値決定手段とを備え、
前記ホワイトバランス制御値決定手段は、
前記算出色温度が所定範囲に属するときには、前記ホワイトバランス制御値に対する算出色温度の反映量を低減する
ことを特徴とする電子カメラ。In an electronic camera equipped with a flash light emitting device or a connection terminal to the flash light emitting device,
Imaging means for imaging the outside world and acquiring image data;
Based on the image data acquired during flash emission by the flash light emitting device, color temperature calculation means for calculating the color temperature of overlapped illumination by external light and flash light;
White balance control value determining means for determining a white balance control value for the image data in accordance with the calculated color temperature that is the calculated color temperature;
The white balance control value determining means includes
When the calculated color temperature falls within a predetermined range, an amount of reflection of the calculated color temperature with respect to the white balance control value is reduced.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が前記閃光単独の照明の色温度より高いときには、前記ホワイトバランス制御値をその照明に対する最適値に近づける
ことを特徴とする電子カメラ。The electronic camera according to claim 1,
The white balance control value determining means includes
An electronic camera characterized in that when the calculated color temperature is higher than the color temperature of the flash alone illumination, the white balance control value is brought close to an optimum value for the illumination.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が前記閃光単独の照明の色温度より高いときには、前記ホワイトバランス制御値をその照明に対する最適値に一致させる
ことを特徴とする電子カメラ。The electronic camera according to claim 2,
The white balance control value determining means includes
When the calculated color temperature is higher than the color temperature of the flash alone illumination, the white balance control value is made to coincide with the optimum value for the illumination.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が日中光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記閃光単独の照明に対する最適値に近づける
ことを特徴とする電子カメラ。In the electronic camera according to any one of claims 1 to 3,
The white balance control value determining means includes
An electronic camera characterized in that when the calculated color temperature is lower than the color temperature of illumination equivalent to daylight, the white balance control value is brought close to an optimum value for illumination of the flash alone.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が日中光相当の照明の色温度より低く、かつ夕焼け光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記最適値にさらに近づける
ことを特徴とする電子カメラ。The electronic camera according to claim 4,
The white balance control value determining means includes
An electronic camera characterized in that when the calculated color temperature is lower than the color temperature of illumination equivalent to daylight and lower than the color temperature of illumination equivalent to sunset light, the white balance control value is made closer to the optimum value.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が日中光相当の照明の色温度より低く、かつ夕焼け光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記最適値に一致させる
ことを特徴とする電子カメラ。The electronic camera according to claim 5,
The white balance control value determining means includes
An electronic camera characterized in that when the calculated color temperature is lower than the color temperature of illumination equivalent to daylight and lower than the color temperature of illumination equivalent to sunset light, the white balance control value is matched with the optimum value.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が日中光相当の照明の色温度よりも低いときには、前記ホワイトバランス制御値をその照明に対する最適値に近づける
ことを特徴とする電子カメラ。In the electronic camera according to any one of claims 1 to 3,
The white balance control value determining means includes
The electronic camera according to claim 1, wherein when the calculated color temperature is lower than a color temperature of illumination equivalent to daylight, the white balance control value is brought close to an optimum value for the illumination.
前記閃光の非発光中に前記外光の種類を識別する手段を更に備え、
前記ホワイトバランス制御値決定手段は、
前記識別された種類に応じて、前記算出色温度の範囲と前記反映量との関係を可変する
ことを特徴とする電子カメラ。The electronic camera according to claim 1,
Means for identifying the type of external light during non-emission of the flashlight;
The white balance control value determining means includes
An electronic camera, wherein the relationship between the calculated color temperature range and the reflection amount is varied according to the identified type.
前記電子カメラによる閃光撮影で取得された画像データに基づいて、外光と閃光とによる重複照明の色温度を算出する色温度算出手段と、
前記算出された色温度である算出色温度に応じて、前記画像データに対するホワイトバランス制御値を決定するホワイトバランス制御値決定手段とを備え、
前記ホワイトバランス制御値決定手段は、
前記算出色温度が所定範囲に属するときには、前記ホワイトバランス制御値に対する算出色温度の反映量を低減する
ことを特徴とするホワイトバランス制御回路。A white balance control circuit applied to an electronic camera capable of flash photography,
Based on image data acquired by flash photography with the electronic camera, color temperature calculation means for calculating the color temperature of overlapping illumination with external light and flash,
White balance control value determining means for determining a white balance control value for the image data in accordance with the calculated color temperature that is the calculated color temperature;
The white balance control value determining means includes
When the calculated color temperature belongs to a predetermined range, a reflection amount of the calculated color temperature with respect to the white balance control value is reduced.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が前記閃光単独の照明の色温度より高いときには、前記ホワイトバランス制御値をその照明に対する最適値に近づける
ことを特徴とするホワイトバランス制御回路。In the white balance control circuit according to claim 9,
The white balance control value determining means includes
When the calculated color temperature is higher than the color temperature of the flash alone illumination, the white balance control circuit approaches the optimum value for the illumination.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が前記閃光単独の照明の色温度より高いときには、前記ホワイトバランス制御値をその照明に対する最適値に一致させる
ことを特徴とするホワイトバランス制御回路。The white balance control circuit according to claim 10,
The white balance control value determining means includes
When the calculated color temperature is higher than the color temperature of the flash alone illumination, the white balance control circuit makes the white balance control value coincide with the optimum value for the illumination.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が日中光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記閃光単独の照明に対する最適値に近づける
ことを特徴とするホワイトバランス制御回路。In the white balance control circuit according to any one of claims 9 to 11,
The white balance control value determining means includes
A white balance control circuit, wherein when the calculated color temperature is lower than a color temperature of illumination equivalent to daylight, the white balance control value is brought close to an optimum value for illumination of the flash alone.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が日中光相当の照明の色温度より低く、かつ夕焼け光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記最適値にさらに近づける
ことを特徴とするホワイトバランス制御回路。The white balance control circuit according to claim 12,
The white balance control value determining means includes
When the calculated color temperature is lower than the color temperature of illumination equivalent to daylight and lower than the color temperature of illumination equivalent to sunset light, the white balance control value is made closer to the optimum value. circuit.
前記算出色温度が日中光相当の照明の色温度より低く、かつ夕焼け光相当の照明の色温度より低いときには、前記ホワイトバランス制御値を前記最適値に一致させる
ことを特徴とするホワイトバランス制御回路。The white balance control circuit according to claim 13, wherein the white balance control value determining means includes:
When the calculated color temperature is lower than the color temperature of illumination equivalent to daylight and lower than the color temperature of illumination equivalent to sunset light, the white balance control value is made to coincide with the optimum value. circuit.
前記ホワイトバランス制御値決定手段は、
前記算出色温度が日中光相当の照明の色温度よりも低いときには、前記ホワイトバランス制御値をその照明に対する最適値に近づける
ことを特徴とするホワイトバランス制御回路。The electronic camera according to any one of claims 9 to 11,
The white balance control value determining means includes
When the calculated color temperature is lower than the color temperature of illumination equivalent to daylight, the white balance control circuit approaches the optimum value for the illumination.
前記電子カメラは、
前記外光の種類を識別することの可能な電子カメラであり、
前記ホワイトバランス制御値決定手段は、
前記識別された種類に応じて、前記算出色温度の範囲と前記反映量との関係を可変する
ことを特徴とするホワイトバランス制御回路。In the white balance control circuit according to claim 9,
The electronic camera is
An electronic camera capable of identifying the type of external light;
The white balance control value determining means includes
A white balance control circuit, wherein the relationship between the calculated color temperature range and the reflection amount is varied according to the identified type.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002250104A JP4036060B2 (en) | 2002-08-29 | 2002-08-29 | Electronic camera and white balance control circuit |
US10/646,832 US7365778B2 (en) | 2002-08-29 | 2003-08-25 | Electronic camera and white balance correction circuit |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002250104A JP4036060B2 (en) | 2002-08-29 | 2002-08-29 | Electronic camera and white balance control circuit |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004088684A JP2004088684A (en) | 2004-03-18 |
JP4036060B2 true JP4036060B2 (en) | 2008-01-23 |
Family
ID=31972609
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002250104A Expired - Fee Related JP4036060B2 (en) | 2002-08-29 | 2002-08-29 | Electronic camera and white balance control circuit |
Country Status (2)
Country | Link |
---|---|
US (1) | US7365778B2 (en) |
JP (1) | JP4036060B2 (en) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4207148B2 (en) * | 2003-01-21 | 2009-01-14 | 富士フイルム株式会社 | Digital camera |
JP4500229B2 (en) * | 2005-08-01 | 2010-07-14 | 富士フイルム株式会社 | Imaging device |
US7903962B2 (en) * | 2006-03-07 | 2011-03-08 | Nikon Corporation | Image capturing apparatus with an adjustable illumination system |
US7623780B2 (en) * | 2006-03-17 | 2009-11-24 | Nikon Corporation | Image capturing apparatus with color compensation |
US7831137B2 (en) * | 2006-03-28 | 2010-11-09 | Nikon Corporation | Image apparatus with selective image compensation |
US7760994B2 (en) * | 2006-04-06 | 2010-07-20 | Nikon Corporation | Image capturing apparatus with underwater image compensation and underwater flash compensation |
US20070236564A1 (en) * | 2006-04-06 | 2007-10-11 | Nikon Corporation | Color compensation system for images captured underwater |
US7710465B2 (en) * | 2006-12-22 | 2010-05-04 | Nikon Corporation | Image capturing apparatus with clarity sensor, underwater image compensation and underwater flash compensation |
US7720371B2 (en) * | 2007-01-18 | 2010-05-18 | Nikon Corporation | Depth layer extraction and image synthesis from focus varied multiple images |
US7925150B2 (en) * | 2008-03-27 | 2011-04-12 | Nikon Corporation | Camera system, camera body, flash device, and illumination method |
JP5374231B2 (en) * | 2009-05-18 | 2013-12-25 | オリンパス株式会社 | Imaging device |
JP5222785B2 (en) * | 2009-05-25 | 2013-06-26 | パナソニック株式会社 | Camera device and color correction method |
US20120154627A1 (en) * | 2010-12-20 | 2012-06-21 | William Rivard | Systems and methods for controlling color balance for a photographic illuminator |
KR101896386B1 (en) * | 2011-11-22 | 2018-09-11 | 삼성전자주식회사 | Device and method for adjusting white balance |
FR3021487B3 (en) * | 2014-05-26 | 2016-07-08 | Canberra France | CAMERA SYSTEM AND METHOD FOR RADIATION |
US11736804B2 (en) | 2020-09-07 | 2023-08-22 | Mediatek Inc. | Method and apparatus for generating high dynamic range frame through white balance compensation that uses white balance gain table generated from combining multiple sets of white balance gain settings |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5099313A (en) * | 1988-03-06 | 1992-03-24 | Fuji Photo Film Co., Ltd. | White balance controlling device having a device for determining whether fluorescent light is being illuminated on a scene |
US5410225A (en) * | 1991-08-30 | 1995-04-25 | Aiwa Co., Ltd. | Video camera and camera system employing aperture control |
JP3339876B2 (en) * | 1992-04-28 | 2002-10-28 | 株式会社日立製作所 | Imaging device |
US5568194A (en) * | 1994-05-31 | 1996-10-22 | Asahi Kogaku Kogyo Kabushiki Kaisha | Adjusting a white balance in a camera using a flash |
JPH0823473A (en) * | 1994-07-05 | 1996-01-23 | Canon Inc | Image pickup device |
JP3540485B2 (en) * | 1995-04-13 | 2004-07-07 | 株式会社リコー | Electronic still camera |
US6160579A (en) * | 1995-08-01 | 2000-12-12 | Canon Kabushiki Kaisha | Image processing apparatus and method |
JPH10322580A (en) * | 1997-05-20 | 1998-12-04 | Minolta Co Ltd | Electronic still camera |
JP3847965B2 (en) * | 1998-07-30 | 2006-11-22 | キヤノン株式会社 | Imaging device |
JP3849834B2 (en) * | 1999-02-02 | 2006-11-22 | 富士写真フイルム株式会社 | Auto white balance control method |
US6906744B1 (en) * | 1999-09-28 | 2005-06-14 | Nikon Corporation | Electronic camera |
JP4288553B2 (en) * | 2000-07-25 | 2009-07-01 | 富士フイルム株式会社 | Camera strobe device |
US6989859B2 (en) * | 2000-12-22 | 2006-01-24 | Eastman Kodak Company | Camera having user interface ambient sensor viewer adaptation compensation and method |
JP2002374539A (en) * | 2001-06-15 | 2002-12-26 | Olympus Optical Co Ltd | Camera capable of correcting white balance |
US6529235B1 (en) * | 2002-03-21 | 2003-03-04 | Sunplus Technology Co., Ltd. | Auto white balance apparatus and method in a digital camera with a strobe |
-
2002
- 2002-08-29 JP JP2002250104A patent/JP4036060B2/en not_active Expired - Fee Related
-
2003
- 2003-08-25 US US10/646,832 patent/US7365778B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20040041941A1 (en) | 2004-03-04 |
US7365778B2 (en) | 2008-04-29 |
JP2004088684A (en) | 2004-03-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4036060B2 (en) | Electronic camera and white balance control circuit | |
RU2428811C2 (en) | Photographic camera and method realised by photographic camera | |
US7711257B2 (en) | Image quality in cameras using flash | |
CN103905724B (en) | Picture pick-up device and dimming controlling method | |
KR20140035274A (en) | Imaging apparatus and control method | |
JP2002232901A (en) | Camera provided with user interface including confirmation display and colorcast indicator and its photographing method | |
US9497433B2 (en) | Imaging device with color adjustment function, imaging method using the same, and non-transitory storage medium in which imaging program is stored | |
JP2002290979A (en) | Camera having verification display with reverse white balanced viewer adaptation compensation and capturing method therefor | |
JP2006340000A (en) | Imaging device | |
JP4021716B2 (en) | Camera with strobe adjustment function | |
JP2013225746A (en) | Image processing device and image processing method | |
JP2009044221A (en) | Imaging apparatus | |
JP2002287235A (en) | Camera and method for displaying principal color of multicolor scene and/or photographed multicolor image in the scene | |
JP4500229B2 (en) | Imaging device | |
JP4029206B2 (en) | Imaging device | |
JP3777643B2 (en) | Flashable camera | |
JP2007251902A (en) | Imaging apparatus and imaging control method | |
JP4412109B2 (en) | Electronic camera having color balance adjustment function and program | |
JP2003215673A (en) | Camera with light emitting device | |
JP2013058869A (en) | Image processor, image processing method, and program | |
KR100978675B1 (en) | Method of controlling white balance at flashlight photographing | |
CN111277736B (en) | Flash lamp device capable of emitting auxiliary continuous light and control method thereof | |
JP2003309854A (en) | Digital camera | |
JP4592892B2 (en) | Electronic camera | |
JP2009260927A (en) | Camera system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050822 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070926 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20071009 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20071022 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4036060 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101109 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131109 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131109 Year of fee payment: 6 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131109 Year of fee payment: 6 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |