JP6265588B2 - 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム - Google Patents
画像処理装置、画像処理装置の作動方法、及び画像処理プログラム Download PDFInfo
- Publication number
- JP6265588B2 JP6265588B2 JP2012133187A JP2012133187A JP6265588B2 JP 6265588 B2 JP6265588 B2 JP 6265588B2 JP 2012133187 A JP2012133187 A JP 2012133187A JP 2012133187 A JP2012133187 A JP 2012133187A JP 6265588 B2 JP6265588 B2 JP 6265588B2
- Authority
- JP
- Japan
- Prior art keywords
- inspection area
- inspection
- imaging distance
- image
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 130
- 238000000034 method Methods 0.000 title claims description 43
- 238000007689 inspection Methods 0.000 claims description 344
- 238000003384 imaging method Methods 0.000 claims description 237
- 230000002159 abnormal effect Effects 0.000 claims description 97
- 230000005856 abnormality Effects 0.000 claims description 65
- 238000010521 absorption reaction Methods 0.000 claims description 24
- 238000006243 chemical reaction Methods 0.000 claims description 12
- 238000010606 normalization Methods 0.000 claims description 8
- 230000003252 repetitive effect Effects 0.000 claims description 4
- 230000009466 transformation Effects 0.000 claims 2
- 238000010586 diagram Methods 0.000 description 35
- 238000012986 modification Methods 0.000 description 29
- 230000004048 modification Effects 0.000 description 29
- 239000013598 vector Substances 0.000 description 12
- 239000011159 matrix material Substances 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- VZSRBBMJRBPUNF-UHFFFAOYSA-N 2-(2,3-dihydro-1H-inden-2-ylamino)-N-[3-oxo-3-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)propyl]pyrimidine-5-carboxamide Chemical class C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)C(=O)NCCC(N1CC2=C(CC1)NN=N2)=O VZSRBBMJRBPUNF-UHFFFAOYSA-N 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000007717 exclusion Effects 0.000 description 4
- 238000003672 processing method Methods 0.000 description 4
- CONKBQPVFMXDOV-QHCPKHFHSA-N 6-[(5S)-5-[[4-[2-(2,3-dihydro-1H-inden-2-ylamino)pyrimidin-5-yl]piperazin-1-yl]methyl]-2-oxo-1,3-oxazolidin-3-yl]-3H-1,3-benzoxazol-2-one Chemical class C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)N1CCN(CC1)C[C@H]1CN(C(O1)=O)C1=CC2=C(NC(O2)=O)C=C1 CONKBQPVFMXDOV-QHCPKHFHSA-N 0.000 description 3
- 210000004204 blood vessel Anatomy 0.000 description 3
- 239000002775 capsule Substances 0.000 description 3
- 239000000470 constituent Substances 0.000 description 3
- 239000006185 dispersion Substances 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- AFCARXCZXQIEQB-UHFFFAOYSA-N N-[3-oxo-3-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)propyl]-2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidine-5-carboxamide Chemical class O=C(CCNC(=O)C=1C=NC(=NC=1)NCC1=CC(=CC=C1)OC(F)(F)F)N1CC2=C(CC1)NN=N2 AFCARXCZXQIEQB-UHFFFAOYSA-N 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000031700 light absorption Effects 0.000 description 2
- 230000015654 memory Effects 0.000 description 2
- 210000004877 mucosa Anatomy 0.000 description 2
- 210000004400 mucous membrane Anatomy 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000002547 anomalous effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/40—Analysis of texture
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0676—Endoscope light sources at distal tip of an endoscope
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30028—Colon; Small intestine
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Surgery (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Signal Processing (AREA)
- Pathology (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Optics & Photonics (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Endoscopes (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Description
図1は、本発明の実施の形態1に係る画像処理装置を示すブロック図である。本実施の形態1に係る画像処理装置1は、一例として、内視鏡又はカプセル型内視鏡(以下、これらをまとめて単に内視鏡という)によって生体の管腔内を撮像することにより取得された管腔内画像(以下、単に画像ともいう)に対し、粘膜表面の微細構造の異常を識別する画像処理を施す装置である。管腔内画像は、通常、各画素位置においてR(赤)、G(緑)、B(青)の波長成分(色成分)に対して、所定の(例えば256階調の)画素レベル(画素値)を有するカラー画像である。
表示部40は、LCDやELディスプレイ等の表示装置によって実現され、制御部10の制御の下で、管腔内画像を含む各種画面を表示する。
図1に示すように、演算部100は、画像に映る被写体までの撮像距離を推定する撮像距離推定部110と、上記画像内に検査領域を、該検査領域に映る被写体の撮像距離の分布の広がりを示す指標が所定の範囲内となるように設定する120と、検査領域に応じて特定される、検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別部130とを備える。
次に、実施の形態1の変形例1−1について説明する。
図8は、変形例1−1に係る画像処理装置が備える演算部の構成を示すブロック図である。図8に示すように、変形例1−1に係る演算部100−1は、撮像距離推定部110と、検査領域設定部140と、異常構造識別部150とを備える。なお、撮像距離推定部110の構成及び動作は、実施の形態1と同様である。また、演算部100−1以外の画像処理装置全体の構成及び動作も、実施の形態1と同様である。
演算部100−1の動作は全体として図2に示すものと同様であり、ステップS13及びS14における詳細な処理が異なる。図9は、検査領域設定部140が実行する処理(ステップS13)を詳細に示すフローチャートである。図10は、検査領域設定部140が実行する処理を説明する模式図である。図11は、異常構造識別部150が実行する処理(ステップS14)を詳細に示すフローチャートである。
ここで、実施の形態1においては、全ての波長成分(R成分、G成分、B成分)における特定空間周波数成分を用いて微細構造の異常を識別した。しかしながら、粘膜表面の微細構造の異常は、毛細血管の形成状態に起因する場合が多い。このため、血液の吸収帯域に近い波長成分ほど顕著な変化が見られる。そこで、本変形例1−1においては、生体内での吸収又は散乱の度合いが高い特定の波長における特定空間周波数成分をテクスチャ特徴量として用いて異常構造の識別を行う。
次に、実施の形態1の変形例1−2について説明する。
図12は、変形例1−2に係る画像処理装置が備える演算部の構成を示すブロック図である。図12に示すように、変形例1−2に係る演算部100−2は、撮像距離推定部110と、検査領域設定部160と、異常構造識別部170とを備える。なお、撮像距離推定部110の構成及び動作は、実施の形態1と同様である。また、演算部100−2以外の画像処理装置全体の構成及び動作も、実施の形態1と同様である。
演算部100−2の動作は全体として図2に示すものと同様であり、ステップS13及びS14における詳細な処理が異なる。図13は、検査領域設定部160が実行する処理(ステップS13)を詳細示すフローチャートである。図14は、異常構造識別部170が実行する処理(ステップS14)を詳細に示すフローチャートである。なお、図13に示すステップS231、S234、及びS235は、図9と対応している。
その後のステップS234、235は変形例1−1と同様である。
ここで、変形例1−1においては、生体内における吸収又は散乱の度合いが高い特定波長における特定空間周波数成分を用いて微細構造の異常を識別した。しかしながら、画像に映った微細構造における画素値変化は撮像距離の影響を受け、遠景部では変化が小さく、近景部では変化が大きくなる。このため、変形例1−1において算出した特定空間周波数成分の平均強度には、撮像距離に応じた画素値変化が含まれてしまい、同一の識別関数を用いて異常構造の識別を行うと、識別精度が低下してしまうおそれがある。そこで、本変形例1−2においては、撮像距離に伴う画素値変化の影響を抑制するため、生体内での吸収又は散乱の度合いが互いに異なる特定波長成分間の比率を算出し、該比率における特定空間周波数成分をテクスチャ特徴量として用いて異常構造の識別を行う。
次に、本発明の実施の形態2について説明する。
図15は、本発明の実施の形態2に係る画像処理装置の構成を示すブロック図である。図15に示すように、実施の形態2に係る画像処理装置2は、図1に示す演算部100の代わりに演算部200を備える。演算部200以外の画像処理装置2の各部の構成及び動作は、実施の形態1と同様である。
まず、ステップS21において、演算部200は、記録部50に記録された画像データを読み込むことにより、処理対象の管腔内画像を取得する。
さらに、ステップS28において、演算部200は、異常識別結果を出力する(図2のステップS15参照)。
次に、本発明の実施の形態3について説明する。
図17は、本発明の実施の形態3に係る画像処理装置の構成を示すブロック図である。図17に示すように、実施の形態3に係る画像処理装置3は、図1に示す演算部100の代わりに演算部300を備える。演算部300以外の画像処理装置3の各部の構成及び動作は、実施の形態1と同様である。
画像処理装置3の動作は全体として図3に示すものと同様であり、ステップS13及びS14における詳細な処理が異なる。図18は、検査領域設定部310が実行する処理(ステップS13)を詳細に示すフローチャートである。図19は、検査領域設定部310が実行する処理を説明する模式図である。図20は、異常構造識別部320が実行する処理(ステップS14)を詳細に示すフローチャートである。図21は、管腔内画像における撮像距離に応じた周波数成分の強度特性を示す模式図である。
詳細には、ステップS341において、代表撮像距離取得部321は、各検査領域(分割領域)B1〜B4に映る被写体までの代表的な撮像距離を取得する。代表的な撮像距離としては、検査領域B1〜B4に含まれる被写体までの撮像距離の平均値や、検査領域B1〜B4の重心座標における撮像距離等が挙げられる。
ここで、上述したとおり、内視鏡によって撮像される管腔内画像においては、撮像距離に応じて粘膜表面の微細構造の解像度が異なる。具体的には、撮像距離が長くなるほど、解像度が低下する。このため、例えば、図21に示すように、撮像距離が短い場合(近景)に、微細構造の異常を識別可能な特定空間周波数がf1であるとすると、同じ微細構造の異常を識別可能な空間周波数は、撮像距離が長くなると高周波側にシフトする(遠景:空間周波数f2)。
続くステップS142及びS143については、実施の形態1と同様である。
次に、本発明の実施の形態4について説明する。
図22は、本発明の実施の形態4に係る画像処理装置の構成を示すブロック図である。図22に示すように、実施の形態4に係る画像処理装置4は、図1に示す演算部100の代わりに演算部400を備える。演算部400以外の画像処理装置4の各部の構成及び動作は、実施の形態1と同様である。
図23は、画像処理装置4の動作を示すフローチャートである。なお、図23に示すステップS11、S12、S14、及びS15は、実施の形態1に対応している(図2参照)。
次に、本発明の実施の形態5について説明する。
図26は、本発明の実施の形態5に係る画像処理装置の構成を示すブロック図である。図26に示すように、実施の形態5に係る画像処理装置5は、図1に示す演算部100の代わりに演算部500を備える。演算部500以外の画像処理装置5の各部の構成及び動作は、実施の形態1と同様である。
図27は、画像処理装置5の動作を示すフローチャートである。なお、図27に示すステップS11〜S15は、実施の形態1と対応している(図2参照)。
ここで、上述したとおり、内視鏡によって撮像される管腔内画像において、撮像距離に応じて粘膜表面の微細構造の解像度が異なる。そこで、本実施の形態5においては、設定された検査領域までの撮像距離に応じて、検査領域内の画像を変形し、変形後の画像における特定空間周波数成分をテクスチャ特徴量として用いて微細構造の異常の識別を行うことにより、識別精度を向上させる。
次に、実施の形態5の変形例5−1について説明する。
図30は、変形例5−1における検査領域変形部の構成を示すブロック図である。変形例5−1に係る演算部は、図26に示す検査領域変形部510の代わりに、図30に示す検査領域変形部520を備える。この検査領域変形部520は、検査領域内に映る被写体上の少なくとも3箇所の基準点に対して、撮像距離及び画像内における座標を基に3次元座標を推定する3次元座標推定部521と、上記少なくとも3箇所の基準点によって張られる平面における検査領域を所定の距離から正対して撮像した場合の画像となるように、検査領域に対して画像変換を施す画像変換部522とを備える。
図31は、検査領域変形部520が実行する処理(ステップS51)の詳細を示すフローチャートである。また、図32A及び図32Bは、検査領域変形部520が実行する処理の概念を説明する模式図である。
ここで、実施の形態5においては検査領域のサイズを正規化したが、検査領域内に残る所定範囲内に収まる撮像距離の差は補正されず、同一の検査領域内において撮像距離が短い粘膜表面の微細構造の解像度と、撮像距離が長い粘膜表面の微細構造の解像度との差による影響が生じてしまう。そこで、本変形例5−1においては、図32Aに示すように、管腔7内の粘膜表面8上の3箇所の基準点を含む領域を内視鏡6によって正面から撮像したかのように、検査領域を変形する。
6 内視鏡
7 管腔
8 粘膜表面
10 制御部
20 画像取得部
30 入力部
40 表示部
50 記録部
51 画像処理プログラム
100、100−1、100−2、200、300、400、500 演算部
110 撮像距離推定部
111 低吸収波長選択部
120、140、160、310、410 検査領域設定部
121、141 候補領域設定部
122 領域確定部
122a 撮像距離範囲算出部
130、150、170、320 異常構造識別部
131、152、172、322 特定周波数成分算出部
132、153、173、323 統計分類部
141a、321 代表撮像距離取得部
142a 撮像距離分散算出部
151 特定波長成分選択部
161 候補領域設定部
161a 代表撮像距離勾配算出部
171 特定波長間比率算出部
210 非検査領域除外部
220 繰返し制御部
311 階層分類部
312 領域分割部
411 局所領域設定部
411a 距離変換画像算出部
510、520 検査領域変形部
511 代表撮像距離取得部
512 サイズ正規化部
521 3次元座標推定部
522 画像変換部
Claims (20)
- 画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定部と、
前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定部と、
前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別部と、
を備え、
前記検査領域設定部は、
前記画像内に矩形の検査候補領域を設定する候補領域設定部と、
前記検査候補領域に映る被写体の撮像距離情報を基に検査領域を確定する領域確定部と、
を備えることを特徴とする画像処理装置。 - 前記画像は、複数の波長成分からなり、
前記撮像距離推定部は、前記複数の波長成分のうち、生体内における吸収又は散乱の度合いが最も低い波長成分である低吸収波長成分を選択する低吸収波長選択部を備え、前記低吸収波長成分を基に、前記画像に映る被写体までの撮像距離を推定することを特徴とする請求項1に記載の画像処理装置。 - 前記候補領域設定部は、前記検査候補領域を設定しようとする位置に映る被写体までの代表的な撮像距離を取得する代表撮像距離取得部を備え、前記代表的な撮像距離に応じたサイズの前記検査候補領域を設定することを特徴とする請求項1に記載の画像処理装置。
- 前記領域確定部は、前記検査候補領域内に映る被写体までの撮像距離の分布範囲を算出する撮像距離範囲算出部を備え、前記分布範囲が所定の閾値以下となる検査候補領域を前記検査領域として確定することを特徴とする請求項1に記載の画像処理装置。
- 前記領域確定部は、前記検査候補領域内に映る被写体までの撮像距離の分散を算出する撮像距離分散算出部を備え、前記分散が所定の閾値以下となる検査候補領域を前記検査領域として確定することを特徴とする請求項1に記載の画像処理装置。
- 前記検査領域が未設定の領域に対して、前記検査領域設定部による処理を繰返す制御を行う繰返し制御部をさらに備えることを特徴とする請求項1に記載の画像処理装置。
- 前記繰返し制御部は、前記処理の繰返しに応じて、前記検査領域設定部が実行する処理の内容を変更することを特徴とする請求項6に記載の画像処理装置。
- 前記異常構造識別部は、
前記テクスチャ特徴量として、前記検査領域に映る被写体の微細構造の異常を識別可能な特定空間周波数成分を算出する特定周波数成分算出部と、
前記特定空間周波数成分を基に統計分類を行う統計分類部と、
を備えることを特徴とする請求項1に記載の画像処理装置。 - 前記異常構造識別部は、生体内における吸収又は散乱の度合いに応じて特定される特定波長成分を選択する特定波長成分選択部をさらに備え、
前記特定周波数成分算出部は、前記特定波長成分に対して前記特定空間周波数成分を算出することを特徴とする請求項8に記載の画像処理装置。 - 前記異常構造識別部は、生体内における吸収又は散乱の度合いが異なる特定波長成分間の比率を算出する特定波長間比率算出部をさらに備え、
前記特定周波数成分算出部は、前記特定波長成分間の比率に対して前記特定空間周波数成分を算出することを特徴とする請求項8に記載の画像処理装置。 - 前記異常構造識別部は、前記検査領域に映る被写体までの代表的な撮像距離を取得する代表撮像距離取得部をさらに備え、
前記特定周波数成分算出部は、前記代表的な撮像距離に応じて前記特定空間周波数成分の周波数を特定し、前記特定空間周波数成分を算出することを特徴とする請求項8に記載の画像処理装置。 - 画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定部と、
前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定部と、
前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別部と、
を備え、
前記検査領域設定部は、
前記検査領域を設定する位置の撮像距離勾配が大きくなるほど検査領域を小さく設定することを特徴とする画像処理装置。 - 画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定部と、
前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定部と、
前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別部と、
前記検査領域内の画像を変形する検査領域変形部と、
を備え、
前記検査領域変形部は、
前記検査領域に映る被写体までの代表的な撮像距離を取得する代表撮像距離取得部と、
前記代表的な撮像距離に応じて前記検査領域のサイズを正規化するサイズ正規化部と、
を備え、
前記異常構造識別部は、前記サイズ正規化部により正規化されたサイズを有する前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別することを特徴とする画像処理装置。 - 画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定部と、
前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定部と、
前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別部と、
前記検査領域内の画像を変形する検査領域変形部と、
を備え、
前記検査領域変形部は、
前記検査領域内に映る被写体上の少なくとも3箇所の基準点に対して、撮像距離及び画像内における対応する画素の座標を基に、3次元座標を推定する3次元座標推定部と、
前記少なくとも3箇所の基準点により張られる平面における前記検査領域を所定の距離から正対して撮像した画像となるように、前記検査領域に対して画像変換を施す画像変換部と、
を備えることを特徴とする画像処理装置。 - 画像処理装置の作動方法であって、
演算部が、画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定ステップと、
演算部が、前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定ステップと、
演算部が、前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別ステップと、
を含み、
前記検査領域設定ステップは、
演算部が、前記画像内に矩形の検査候補領域を設定する候補領域設定ステップと、
演算部が、前記検査候補領域に映る被写体の撮像距離情報を基に検査領域を確定する領域確定ステップと、
を含むことを特徴とする画像処理装置の作動方法。 - 画像処理装置の作動方法であって、
演算部が、画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定ステップと、
演算部が、前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定ステップと、
演算部が、前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別ステップと、
を含み、
前記検査領域設定ステップは、
演算部が、前記検査領域を設定する位置の撮像距離勾配が大きくなるほど前記検査領域を小さく設定することを特徴とする画像処理装置の作動方法。 - 画像処理装置の作動方法であって、
演算部が、画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定ステップと、
演算部が、前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定ステップと、
演算部が、前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別ステップと、
演算部が、前記検査領域内の画像を変形する検査領域変形ステップと、
を含み、
前記検査領域変形ステップは、
演算部が、前記検査領域に映る被写体までの代表的な撮像距離を取得する代表撮像距離取得ステップと、
演算部が、前記代表的な撮像距離に応じて前記検査領域のサイズを正規化するサイズ正規化ステップと、
を含み、
前記異常構造識別ステップは、前記サイズ正規化ステップにより正規化されたサイズを有する前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別することを特徴とする画像処理装置の作動方法。 - 画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定ステップと、
前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定ステップと、
前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別ステップと、
をコンピュータに実行させ、
前記検査領域設定ステップは、
前記画像内に矩形の検査候補領域を設定する候補領域設定ステップと、
前記検査候補領域に映る被写体の撮像距離情報を基に検査領域を確定する領域確定ステップと、
をコンピュータに実行させることを特徴とする画像処理プログラム。 - 画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定ステップと、
前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定ステップと、
前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別ステップと、
をコンピュータに実行させ、
前記検査領域設定ステップは、
前記検査領域を設定する位置の撮像距離勾配が大きくなるほど前記検査領域を小さく設定することを特徴とする画像処理プログラム。 - 画像内の画素に映る被写体までの撮像距離を推定する撮像距離推定ステップと、
前記画像内に検査領域を、該検査領域内の複数の画素に映る被写体の撮像距離の分布が所定の範囲内となるように設定する検査領域設定ステップと、
前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別する異常構造識別ステップと、
前記検査領域内の画像を変形する検査領域変形ステップと、
をコンピュータに実行させ、
前記検査領域変形ステップは、
前記検査領域に映る被写体までの代表的な撮像距離を取得する代表撮像距離取得ステップと、
前記代表的な撮像距離に応じて前記検査領域のサイズを正規化するサイズ正規化ステップと、
をコンピュータに実行させ、
前記異常構造識別ステップは、前記サイズ正規化ステップにより正規化されたサイズを有する前記検査領域に応じて特定される、前記検査領域に映る被写体の微細構造の異常を識別可能なテクスチャ特徴量を用いて、前記検査領域に映る被写体の微細構造が異常であるか否かを識別することを特徴とする画像処理プログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012133187A JP6265588B2 (ja) | 2012-06-12 | 2012-06-12 | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム |
PCT/JP2013/064332 WO2013187206A1 (ja) | 2012-06-12 | 2013-05-23 | 画像処理装置、画像処理方法、及び画像処理プログラム |
CN201380030577.0A CN104363815B (zh) | 2012-06-12 | 2013-05-23 | 图像处理装置以及图像处理方法 |
EP13803772.6A EP2859833A4 (en) | 2012-06-12 | 2013-05-23 | PICTURE PROCESSING DEVICE, PICTURE PROCESSING METHOD AND PICTURE PROCESSING PROGRAM |
US14/564,453 US9916666B2 (en) | 2012-06-12 | 2014-12-09 | Image processing apparatus for identifying whether or not microstructure in set examination region is abnormal, image processing method, and computer-readable recording device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012133187A JP6265588B2 (ja) | 2012-06-12 | 2012-06-12 | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013255656A JP2013255656A (ja) | 2013-12-26 |
JP6265588B2 true JP6265588B2 (ja) | 2018-01-24 |
Family
ID=49758036
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012133187A Active JP6265588B2 (ja) | 2012-06-12 | 2012-06-12 | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US9916666B2 (ja) |
EP (1) | EP2859833A4 (ja) |
JP (1) | JP6265588B2 (ja) |
CN (1) | CN104363815B (ja) |
WO (1) | WO2013187206A1 (ja) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6616071B2 (ja) * | 2014-12-22 | 2019-12-04 | 富士フイルム株式会社 | 内視鏡用のプロセッサ装置、内視鏡用のプロセッサ装置の作動方法、内視鏡用の制御プログラム |
CN107105989B (zh) * | 2015-01-23 | 2018-12-18 | 奥林巴斯株式会社 | 图像处理装置、图像处理方法和记录介质 |
JP6507747B2 (ja) * | 2015-03-18 | 2019-05-08 | カシオ計算機株式会社 | 情報処理装置、コンテンツ決定方法、及びプログラム |
WO2016170656A1 (ja) * | 2015-04-23 | 2016-10-27 | オリンパス株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP6603709B2 (ja) * | 2015-04-23 | 2019-11-06 | オリンパス株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP6552613B2 (ja) | 2015-05-21 | 2019-07-31 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム |
JP6461333B2 (ja) * | 2015-06-04 | 2019-01-30 | オリンパス株式会社 | 可撓管挿入装置、及び可撓管挿入装置の作動方法 |
JP6177458B2 (ja) * | 2015-07-03 | 2017-08-09 | オリンパス株式会社 | 画像処理装置及び内視鏡システム |
JP6704933B2 (ja) * | 2015-11-26 | 2020-06-03 | オリンパス株式会社 | 画像処理装置、画像処理方法およびプログラム |
US20180137369A1 (en) * | 2016-11-13 | 2018-05-17 | Pointgrab Ltd. | Method and system for automatically managing space related resources |
JP7021183B2 (ja) | 2017-03-03 | 2022-02-16 | 富士フイルム株式会社 | 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法 |
WO2018159082A1 (ja) * | 2017-03-03 | 2018-09-07 | 富士フイルム株式会社 | 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法 |
CN107049211B (zh) * | 2017-03-13 | 2019-02-12 | 重庆金山医疗器械有限公司 | 一种测量胶囊式内窥镜与胃壁距离的装置 |
WO2019156022A1 (ja) * | 2018-02-07 | 2019-08-15 | Hoya株式会社 | 内視鏡システム |
CN112535451A (zh) * | 2019-09-22 | 2021-03-23 | 深圳硅基智控科技有限公司 | 胶囊内窥镜用的测距系统 |
CN115813320A (zh) * | 2019-09-22 | 2023-03-21 | 深圳硅基智控科技有限公司 | 具有双透镜的胶囊内窥镜 |
CN116778520B (zh) * | 2023-08-11 | 2023-11-10 | 山东省大数据中心 | 一种海量证照数据质量检验方法 |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2918162B2 (ja) | 1988-11-02 | 1999-07-12 | オリンパス光学工業株式会社 | 内視鏡画像処理装置 |
JPH03105483A (ja) * | 1989-09-19 | 1991-05-02 | Olympus Optical Co Ltd | 内視鏡装置 |
JP4450973B2 (ja) | 2000-11-30 | 2010-04-14 | オリンパス株式会社 | 診断支援装置 |
US7545965B2 (en) * | 2003-11-10 | 2009-06-09 | The University Of Chicago | Image modification and detection using massive training artificial neural networks (MTANN) |
JP4652694B2 (ja) | 2004-01-08 | 2011-03-16 | オリンパス株式会社 | 画像処理方法 |
JP4804742B2 (ja) * | 2004-11-19 | 2011-11-02 | オリンパス株式会社 | 画像処理装置、及び画像処理プログラム |
US7764817B2 (en) * | 2005-08-15 | 2010-07-27 | Siemens Medical Solutions Usa, Inc. | Method for database guided simultaneous multi slice object detection in three dimensional volumetric data |
JP5086563B2 (ja) | 2006-05-26 | 2012-11-28 | オリンパス株式会社 | 画像処理装置及び画像処理プログラム |
WO2008139812A1 (ja) * | 2007-05-08 | 2008-11-20 | Olympus Corporation | 画像処理装置および画像処理プログラム |
JP5028138B2 (ja) * | 2007-05-08 | 2012-09-19 | オリンパス株式会社 | 画像処理装置および画像処理プログラム |
JP5190944B2 (ja) * | 2008-06-26 | 2013-04-24 | 富士フイルム株式会社 | 内視鏡装置および内視鏡装置の作動方法 |
JP5117353B2 (ja) * | 2008-11-07 | 2013-01-16 | オリンパス株式会社 | 画像処理装置、画像処理プログラムおよび画像処理方法 |
WO2010081048A1 (en) * | 2009-01-08 | 2010-07-15 | American Biooptics Llc | Probe apparatus for recognizing abnormal tissue |
JP2013505763A (ja) * | 2009-09-24 | 2013-02-21 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 増加した走査速度を持つ光プローブシステム |
JP5011452B2 (ja) * | 2010-04-12 | 2012-08-29 | オリンパスメディカルシステムズ株式会社 | 医用画像処理装置および医用画像処理装置の制御方法 |
JP5570866B2 (ja) * | 2010-04-30 | 2014-08-13 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム |
JP5800468B2 (ja) | 2010-05-11 | 2015-10-28 | オリンパス株式会社 | 画像処理装置、画像処理方法、および画像処理プログラム |
JP5622461B2 (ja) * | 2010-07-07 | 2014-11-12 | オリンパス株式会社 | 画像処理装置、画像処理方法、および画像処理プログラム |
JP5620194B2 (ja) * | 2010-08-24 | 2014-11-05 | オリンパス株式会社 | 画像処理装置、画像処理方法、および画像処理プログラム |
JP5658945B2 (ja) * | 2010-08-24 | 2015-01-28 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム |
JP5830295B2 (ja) * | 2011-07-29 | 2015-12-09 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム |
JP5800626B2 (ja) * | 2011-07-29 | 2015-10-28 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
JP5851160B2 (ja) * | 2011-08-31 | 2016-02-03 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム |
JP5931418B2 (ja) * | 2011-11-25 | 2016-06-08 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム |
JP5926937B2 (ja) * | 2011-11-30 | 2016-05-25 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
JP6422198B2 (ja) * | 2012-11-29 | 2018-11-14 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
JP6045396B2 (ja) * | 2013-02-27 | 2016-12-14 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び画像処理プログラム |
-
2012
- 2012-06-12 JP JP2012133187A patent/JP6265588B2/ja active Active
-
2013
- 2013-05-23 EP EP13803772.6A patent/EP2859833A4/en not_active Withdrawn
- 2013-05-23 CN CN201380030577.0A patent/CN104363815B/zh active Active
- 2013-05-23 WO PCT/JP2013/064332 patent/WO2013187206A1/ja unknown
-
2014
- 2014-12-09 US US14/564,453 patent/US9916666B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP2859833A1 (en) | 2015-04-15 |
CN104363815A (zh) | 2015-02-18 |
EP2859833A4 (en) | 2016-03-23 |
US20150092993A1 (en) | 2015-04-02 |
JP2013255656A (ja) | 2013-12-26 |
CN104363815B (zh) | 2018-04-13 |
WO2013187206A1 (ja) | 2013-12-19 |
US9916666B2 (en) | 2018-03-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6265588B2 (ja) | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム | |
JP6422198B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
CN111325739B (zh) | 肺部病灶检测的方法及装置,和图像检测模型的训练方法 | |
Loizou et al. | Snakes based segmentation of the common carotid artery intima media | |
US11514270B2 (en) | Speckle contrast analysis using machine learning for visualizing flow | |
JP5576782B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP5281826B2 (ja) | 画像処理装置、画像処理プログラムおよび画像処理方法 | |
US8244009B2 (en) | Image analysis device | |
JP5851160B2 (ja) | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム | |
JP5576775B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP6361776B2 (ja) | 診断支援装置、及び診断支援装置における画像処理方法、並びにプログラム | |
WO2015141302A1 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
Wu et al. | Detection of blur artifacts in histopathological whole-slide images of endomyocardial biopsies | |
CN108601509B (zh) | 图像处理装置、图像处理方法以及记录有程序的介质 | |
TWI624807B (zh) | 醫學影像之迭代式分析法 | |
JP6578058B2 (ja) | 画像処理装置、画像処理装置の作動方法及び画像処理装置の作動プログラム | |
JP5800549B2 (ja) | 画像処理装置、画像処理装置の作動方法、及び画像処理プログラム | |
CN107529962B (zh) | 图像处理装置、图像处理方法和记录介质 | |
WO2018011928A1 (ja) | 画像処理装置、画像処理装置の作動方法及び画像処理装置の作動プログラム | |
Wang et al. | Organic Boundary Location Based on Color‐Texture of Visual Perception in Wireless Capsule Endoscopy Video | |
Ramesh et al. | Automatic Endoscopic Ultrasound Station Recognition with Limited Data | |
Jütte et al. | Integrating generative AI with ABCDE rule analysis for enhanced skin cancer diagnosis, dermatologist training and patient education | |
Kakade et al. | Gradient Ridge Enhancer: A Robust Approach for Ridge Detection in Infant’Retinal Images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150513 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160607 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20160725 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160923 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170307 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20170424 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170705 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171212 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6265588 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |