JP5121675B2 - 画像処理装置、映像表示装置、撮像装置、画像処理方法 - Google Patents
画像処理装置、映像表示装置、撮像装置、画像処理方法 Download PDFInfo
- Publication number
- JP5121675B2 JP5121675B2 JP2008290673A JP2008290673A JP5121675B2 JP 5121675 B2 JP5121675 B2 JP 5121675B2 JP 2008290673 A JP2008290673 A JP 2008290673A JP 2008290673 A JP2008290673 A JP 2008290673A JP 5121675 B2 JP5121675 B2 JP 5121675B2
- Authority
- JP
- Japan
- Prior art keywords
- area
- gradation conversion
- small block
- gradation
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims description 45
- 238000003384 imaging method Methods 0.000 title claims description 19
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000006243 chemical reaction Methods 0.000 claims description 188
- 238000004364 calculation method Methods 0.000 claims description 32
- 238000011156 evaluation Methods 0.000 description 38
- 230000002093 peripheral effect Effects 0.000 description 17
- 238000000034 method Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 14
- 230000001186 cumulative effect Effects 0.000 description 8
- 238000012937 correction Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 3
- 101100074792 Danio rerio lhx1a gene Proteins 0.000 description 2
- 241000209504 Poaceae Species 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 229910052745 lead Inorganic materials 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
- Image Processing (AREA)
- Picture Signal Circuits (AREA)
- Facsimile Image Signal Circuits (AREA)
Description
この問題に対して特許文献1では、エリアの境界では距離による重み付けによって補正値を連続的に変化するように制御し、境界が目立たないようにしている。
また、特許文献2では、階調変換の対象であるエリアより広いエリアの統計量から階調変換特性を求めることで、隣接するエリアであまり階調変換特性に差が生じないようにしている。
図13は、従来の技術による階調変換の問題を説明する図である。
特許文献1の手法では、例えば、図13のポイントPの日傘の部分は、エリアの境界付近の場所なので左隣のエリアの階調変換特性の影響を強く受けてしまう。図13の例では、左隣のエリアは一面草原のエリアであり、草原に適した階調変換特性になっている。よって、草原に適した階調変換特性が日傘の部分であるポイントPに強く影響した場合、日傘の部分に適した階調変換特性から外れた階調変換が行われてしまうという問題があった。
例えば、図13のポイントPを中心に破線のエリアの統計量を基に階調変換を行うと、エリア内に日傘以外の草も含まれているため、日傘の部分に適した階調変換特性から外れた階調変換が行われてしまうという問題があった。
なお、以下に示す各図は、模式的に示した図であり、各部の大きさ、形状は、理解を容易にするために、適宜誇張して示している。
また、以下の説明では、具体的な数値、構成、動作等を示して説明を行うが、これらは、適宜変更することができる。
図1は、本発明による画像処理装置を用いた映像表示装置の第1実施形態を示す図である。
本実施形態の映像表示装置は、映像入力部1、画像処理部100、システム制御部2、操作部3、記録部4、表示部5を備えたテレビジョン受像機である。
映像入力部1は、放送受信部1a、外部入力部1bを有している。
放送受信部1aは、放送局が送信するテレビジョン放送波を不図示のアンテナを介して受信し、必要に応じて復号を行い、画像処理部100が処理可能な映像信号への変換を行う。放送受信部1aが取得した映像信号は、画像処理部100へ送られる。
外部入力部1bは、不図示の映像再生機器等から取得し、必要に応じて画像処理部100が処理可能な映像信号への変換を行う。外部入力部1bが取得した映像信号は、画像処理部100へ送られる。
映像入力部1は、システム制御部2からの指示に応じて放送受信部1aからの映像信号と外部入力部1bからの映像信号と切り換えて、画像処理部100へ送る。
本実施形態では、この画像処理部100が本発明における画像処理装置に相当するものである。
システム制御部2は、映像表示装置全体を制御する制御部であり、マイクロコンピュータによって構成されている。
操作部3は、各種設定を行う操作ボタン等からなり、操作に応じた信号がシステム制御部2へ送られる。
記録部4は、映像データをハードディスク装置やメモリカード等の記録媒体へ記録する。
表示部5は、システム制御部2の指示に応じて、文字、画像等を表示する。表示部5は、例えばLCD(Liquid Crystal Display)により構成されている。
なお、図1では、画像データ等は、システム制御部2を介して記録部4や表示部5へ送られるように示したが、これらは、システム制御部2の指示に応じて直接各部へ送られるようにしてもよい。
本実施形態の画像処理部100は、エリア統計量算出部101、階調変換特性算出部102、小ブロック統計量算出部103、階調変換特性決定部104、階調変換部105を備え、映像信号Y、Cb、Cr各8ビットのうちY信号に階調変換を行う。ここで、Yは、輝度信号であり、Cb、Crは、色差信号である。
階調変換特性算出部102では、エリア毎に取得した輝度ヒストグラムからエリア毎に黒側局所MAX階調、白側局所MAX階調を求める。黒側局所MAX階調とは、輝度ヒストグラムにおいて最も低階調側にあるピークの階調、白側局所MAX階調とは最も高階調側にあるピークの階調である。ここで、低階調、及び、高階調という文言は、それぞれ、映像信号(ここではY信号であるので、輝度信号)を階調分割したときの信号値が低い(ここでは、低輝度)こと、及び、高いこと(ここでは、高輝度)を指すものとする。よってこれらは、階調数が少ない低階調、階調数が多い高階調を指すものではない。
まず、局所MAX判定条件を満たす階調を探索する。局所MAX判定条件は、hist[n]を階調nの度数、閾値lim1と調整値magを定数とすると、以下の3条件からなる。
条件1:hist[n]>lim1
条件2:hist[n−4]からhist[n+4]のうちhist[n]が一番大きい
条件3:(hist[n−4]+hist[n+4])×mag>hist[n]
この3つの条件を満たす階調が局所MAX階調になる。
そして、これらの局所MAX階調のうち、階調0〜128の範囲にあり、最も低階調側にある局所MAX階調を黒側局所MAX階調とする。階調0〜128の範囲に局所MAX階調がない場合は便宜上、階調128を黒側局所MAXとする。
また、階調192〜255の範囲にあり、最も高階調側にある局所MAX階調を白側局所MAX階調とする。階調192〜255の範囲に局所MAX階調がない場合は便宜上、階調192を白側局所MAXとする。
図3は、黒側局所MAX階調及び白側局所MAX階調の取得方法を説明する輝度ヒストグラム例を示す図である。
例えば、図3のような輝度ヒストグラムでは、階調24が黒側局所MAX階調、階調232が白側局所MAX階調になる。
例えば、黒側局所MAX階調が24、白側局所MAX階調が232の場合は、図4のように黒側局所MAX階調24に対応する黒側変換カーブ、白側局所MAX階調232に対応する白側変換カーブを選択する。
階調変換特性決定部104は、小ブロック毎の階調変換特性を決定する。このとき、階調変換特性決定部104は、階調変換特性算出部102で求めたエリア毎の黒側変換カーブと白側変換カーブ、黒側局所MAX階調、白側局所MAX階調、及び、小ブロック統計量算出部103で求めた小ブロック毎の評価値を用いる。
小ブロック毎の階調変換特性の決定方法について、図5のフローチャートを用いて説明する。図5においてdcとは黒側変換カーブ、wcとは白側変換カーブを意味する。
ここで、自エリアとは、ある小ブロックが属するエリアのことを指すものとする。
図6は、自エリアと周辺エリア及び小ブロックの関係を示す図である。
周辺エリアとは、図6に示すように小ブロックの中心からエリアの中心までの距離が近い自エリアを除く3つのエリアのことである。
図5に戻って、STEP403で、評価値が周辺エリアの黒側局所MAX階調±16以内の場合は、周辺エリアの黒側変換カーブを使用するのが望ましいのでSTEP405に進む。上記範囲内でなければSTEP404に進み自エリアの黒側変換カーブを使用する。
STEP405では、黒側変換カーブは、STEP403で条件を満たした周辺エリアの黒側変換カーブを選択する。もし複数のエリアが条件を満たした場合は、評価値と黒側局所MAX階調が一番近いエリアの黒側変換カーブを選択する。白側変換カーブは、自エリアのものを選択する。
STEP410では、黒側変換カーブは、自エリアのものを使用する。白側変換カーブは、STEP408で条件を満たした周辺エリアの白側変換カーブを選択する。もし複数のエリアが条件を満たした場合は、評価値と白側局所MAX階調が一番近いエリアの白側変換カーブを選択する。
STEP411では、黒側変換カーブ、白側変換カーブ共に自エリアのものを選択する。
図7は、階調変換を説明する図である。
図7に示す注目画素を階調変換する場合は、注目画素からブロックの中心が近い小ブロック(i,j)、小ブロック(i,j+1)、小ブロック(i−1,j)、小ブロック(i−1,j+1)の4つ小ブロックの変換特性を使用する。注目画素を各小ブロックの変換特性で階調変換し、その結果を距離による重み付けで補間することで階調変換結果とする。
第2実施形態は、第1実施形態とは異なる階調変換特性算出方法を用いた形態である。
なお、前述した第1実施形態と同様の機能を果たす部分には、同一の符号を付して、重複する説明を適宜省略する。
図8は、第2実施形態の画像処理部200のブロック図である。
第2実施形態の画像処理部200は、第1実施形態と同様なエリア統計量算出部101、階調変換部105の他に、階調変換特性算出部701、小ブロック統計量算出部702、エリア平均値算出部703、階調変換特性決定部704を備えている。
図9は、累積輝度ヒストグラムの例を示す図である。
図10は、図9に示す累積輝度ヒストグラムの階調を入力階調、正規化した度数を出力階調として示す図である。
例えば、図2のような輝度ヒストグラムを累積輝度ヒストグラムにすると図9のようになる。そして、求めた累積ヒストグラムの度数を255に正規化し、図10のように階調を入力階調、正規化した度数を出力階調として階調変換特性を算出する。
エリア平均値算出部703では、エリア毎のY平均値、Cb平均値、Cr平均値を求める。
小ブロック毎の階調変換特性の決定方法について、図11のフローチャートを用いて説明する。
STEP1004では、STEP1002で条件を満たした周辺エリアの階調変換特性を選択する。もし複数のエリアが条件を満たした場合は、Y評価値とY平均値、Cb評価値とCb平均値、Cr評価値とCr平均値の差分の絶対値の合計が一番少ないエリアの階調変換特性を選択する。
そして選択した階調変換特性がその小ブロックの階調変換特性となる。
図12は、本発明による画像処理装置を用いた映像機器の第3実施形態である撮像装置を示す図である。
第3実施形態は、本発明による画像処理装置をビデオカメラやデジタルスチルカメラ等の撮像装置に用いる形態である。
なお、前述した第1実施形態と同様の機能を果たす部分には、同一の符号を付して、重複する説明を適宜省略する。
撮影レンズ11は、被写体像を撮像素子12上に結像させる撮影光学系である。
撮像素子12は、光学像を電気信号に変換する光電変換手段であり、被写体像を撮像する撮像手段として機能する。本実施形態の撮像素子12は、CCD(Charge Coupled Device)イメージセンサを用いている。なお、撮像素子としては、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等、他のタイプのイメージセンサでもよい。
画像処理部100の動作については、第1実施形態と同様である。
本実施形態によれば、撮像装置において、より自然な階調変換を行える。
以上説明した実施形態に限定されることなく、種々の変形や変更が可能であって、それらも本発明の範囲内である。
1a 放送受信部
1b 外部入力部
2 システム制御部
3 操作部
4 記録部
5 表示部
11 撮影レンズ
12 撮像素子
100,200 画像処理部
101 エリア統計量算出部
102 階調変換特性算出部
103 小ブロック統計量算出部
104 階調変換特性決定部
105 階調変換部
701 階調変換特性算出部
702 小ブロック統計量算出部
703 エリア平均値算出部
704 階調変換特性決定部
Claims (7)
- 画像を複数のエリアに分割して、前記エリア毎に画像データに関する統計量を算出するエリア統計量算出手段と、
前記エリア統計量算出手段が算出した前記エリア毎の統計量を用いて前記エリア毎に階調変換特性を算出する階調変換特性算出手段と、
前記エリアをさらに小さな複数の小ブロックに分割して、前記小ブロック毎に画像データに関する統計量を算出する小ブロック統計量算出手段と、
前記小ブロック統計量算出手段が算出した前記小ブロック毎の統計量に基づいて、前記小ブロック毎の階調変換に用いる階調変換特性を、前記小ブロックが属するエリアの階調変換特性と、前記小ブロックが属するエリアに隣接するエリアの階調変換特性との何れかから選択して決定する階調変換特性決定手段と、
前記小ブロック毎に前記階調変換特性決定手段が決定した階調変換特性を用いて前記小ブロック毎に階調変換を行う階調変換手段と、
を備える画像処理装置。 - 前記小ブロック統計量算出手段が算出する統計量は、輝度信号の平均値であること、
を特徴とする請求項1に記載の画像処理装置。 - 前記エリア毎に画像データに関する平均値を算出するエリア平均値算出手段を備え、
前記階調変換特性決定手段は、前記小ブロックの統計量と前記小ブロックが属するエリアの平均値との比較、及び、前記小ブロックの統計量と前記小ブロックが属するエリアに隣接するエリアの平均値との比較を行い、比較した値同士が近い値であるエリアの階調変換特性を選択すること、
を特徴とする請求項1に記載の画像処理装置。 - 前記小ブロック統計量算出手段が算出する統計量は、前記小ブロック毎の輝度信号の平均値と色差信号又は色信号の平均値であり、
前記エリア平均値算出手段が算出する統計量は、前記エリア毎の輝度信号の平均値と色差信号又は色信号の平均値であること、
を特徴とする請求項3に記載の画像処理装置。 - 映像データを受信又は入力する入力手段と、
前記入力手段により得た映像データに対して画像処理を行う請求項1から請求項4までのいずれか1項に記載の画像処理装置と、
前記画像処理装置により処理された映像データを表示する表示手段と、
を備える映像表示装置。 - 被写体像を撮像する撮像手段と、
前記撮像手段により得た画像データに対して画像処理を行う請求項1から請求項4までのいずれか1項に記載の画像処理装置と、
を備える撮像装置。 - 画像を複数のエリアに分割して、前記エリア毎に画像データに関する統計量を算出し、
算出した前記エリア毎の統計量を用いて前記エリア毎に階調変換特性を算出し、
前記エリアをさらに小さな複数の小ブロックに分割して、前記小ブロック毎に画像データに関する統計量を算出し、
算出した前記小ブロック毎の統計量に基づいて、前記小ブロック毎の階調変換に用いる階調変換特性を、前記小ブロックが属するエリアの階調変換特性と、前記小ブロックが属するエリアに隣接するエリアの階調変換特性との何れかから選択して決定し、
前記小ブロック毎に決定した階調変換特性を用いて前記小ブロック毎に階調変換を行う画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008290673A JP5121675B2 (ja) | 2008-11-13 | 2008-11-13 | 画像処理装置、映像表示装置、撮像装置、画像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008290673A JP5121675B2 (ja) | 2008-11-13 | 2008-11-13 | 画像処理装置、映像表示装置、撮像装置、画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010117884A JP2010117884A (ja) | 2010-05-27 |
JP5121675B2 true JP5121675B2 (ja) | 2013-01-16 |
Family
ID=42305523
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008290673A Expired - Fee Related JP5121675B2 (ja) | 2008-11-13 | 2008-11-13 | 画像処理装置、映像表示装置、撮像装置、画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5121675B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06102549B2 (ja) * | 1988-08-12 | 1994-12-14 | 東京大学長 | Ca−Sr−Bi−Cu−O系酸化物超伝導性光伝導物質及びその製造法 |
JP5701010B2 (ja) * | 2010-10-22 | 2015-04-15 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
JP6243629B2 (ja) | 2013-05-29 | 2017-12-06 | キヤノン株式会社 | 画像処理装置及び方法、及び撮像装置 |
JP6216181B2 (ja) * | 2013-08-20 | 2017-10-18 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、記憶媒体 |
US8958658B1 (en) * | 2013-09-10 | 2015-02-17 | Apple Inc. | Image tone adjustment using local tone curve computation |
JP6931475B2 (ja) * | 2016-12-01 | 2021-09-08 | 株式会社サイバーコア | 画像処理装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3902894B2 (ja) * | 1999-10-15 | 2007-04-11 | 理想科学工業株式会社 | 画像処理装置及び画像処理方法 |
JP2002204353A (ja) * | 2000-12-28 | 2002-07-19 | Fujitsu Ltd | 画像状態推定方法、画像補正方法および補正装置 |
-
2008
- 2008-11-13 JP JP2008290673A patent/JP5121675B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2010117884A (ja) | 2010-05-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8363123B2 (en) | Image pickup apparatus, color noise reduction method, and color noise reduction program | |
US8199223B2 (en) | Image processing device, image processing method, and computer readable storage medium storing image processing program | |
JP5121675B2 (ja) | 画像処理装置、映像表示装置、撮像装置、画像処理方法 | |
US7671909B2 (en) | Method and apparatus for processing Bayer-pattern digital color video signal | |
US7876970B2 (en) | Method and apparatus for white balancing digital images | |
JP5060447B2 (ja) | ノイズキャンセル処理回路および固体撮像装置 | |
CN107395991B (zh) | 图像合成方法、装置、计算机可读存储介质和计算机设备 | |
JP2008113222A (ja) | 画像処理装置、撮影装置、および、これらにおける画像処理方法ならびに当該方法をコンピュータに実行させるプログラム | |
US20130010163A1 (en) | Image processing apparatus, imaging apparatus, image processing method, and program | |
JP2013218487A (ja) | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム | |
JP4992698B2 (ja) | 色収差補正装置、撮像装置、色収差算出方法および色収差算出プログラム | |
US8189066B2 (en) | Image processing apparatus, image processing method, and computer-readable medium | |
JP4985124B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
EP1933549B1 (en) | Image correction device and image correction method | |
JP6282123B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JPWO2003058554A1 (ja) | 画素の類似度判定を行う画像処理装置および画像処理プログラム | |
JP2004363853A (ja) | 画像信号のノイズ低減方法及びノイズ低減装置 | |
US8625007B2 (en) | Image pickup apparatus, image combination method, and computer program | |
JP2014010776A (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
JPWO2009093294A1 (ja) | 画像信号処理装置及び画像信号処理プログラム | |
JP6415094B2 (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
JP3730063B2 (ja) | 色成分生成装置および色成分生成方法並びにこれを用いた多色画像撮像装置 | |
JP2008219230A (ja) | 撮像装置及び画像処理方法 | |
US20050220350A1 (en) | Image processing apparatus, image processing method, image processing program, and recording medium storing image processing program | |
JP2006078552A (ja) | 画像拡大装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111107 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120919 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120925 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121023 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151102 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5121675 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151102 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |