CN102843952A - 荧光观察装置和荧光图像处理方法 - Google Patents
荧光观察装置和荧光图像处理方法 Download PDFInfo
- Publication number
- CN102843952A CN102843952A CN2011800182273A CN201180018227A CN102843952A CN 102843952 A CN102843952 A CN 102843952A CN 2011800182273 A CN2011800182273 A CN 2011800182273A CN 201180018227 A CN201180018227 A CN 201180018227A CN 102843952 A CN102843952 A CN 102843952A
- Authority
- CN
- China
- Prior art keywords
- fluoroscopic image
- white light
- image
- normalization
- fluorescence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0071—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
- A61B5/0084—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
Landscapes
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Physics & Mathematics (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Radiology & Medical Imaging (AREA)
- Optics & Photonics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Signal Processing (AREA)
- Endoscopes (AREA)
Abstract
即使在荧光图像与反射光图像之间产生位置偏差的情况下,也能够防止对医师提供错误信息,能够防止误诊。提供荧光观察装置(1),其具有:白色光图像生成部(17),其根据对观察对象(A)照射的白色光的反射光生成白色光图像(G1);荧光图像生成部(18),其对观察对象(A)照射激励光而生成荧光图像(G2);荧光图像校正部(23),其通过白色光图像(G1)对荧光图像(G2)进行归一化;位移量计算部(21),其对隔开时间间隔的多个白色光图像(G1)进行处理,计算观察对象(A)的位移量(d);区域尺寸计算部(22),其对荧光图像(G2)进行处理,计算具有规定阈值以上的荧光强度的区域的大小(D);以及控制部(26),其对荧光图像校正部(23)进行控制,以使得在、观察对象(A)的位移量(d)相对于区域的大小(D)大到规定比例以上时,停止荧光图像(G2)的归一化。
Description
技术领域
本发明涉及荧光观察装置和荧光图像处理方法。
背景技术
以往,公知有如下的荧光观察装置:针对来自特异性聚积在存在于活体组织中的肿瘤等病变部的荧光物质的荧光强度,通过相同活体组织的表面的反射光强度对其进行归一化(例如参照专利文献1。)。
现有技术文献
专利文献
专利文献1:日本特开昭62-247232号公报
发明内容
发明要解决的课题
但是,通过对活体组织照射激励光来进行活体组织的荧光观察,通过对活体组织照射白色光等来进行活体组织的反射光观察,所以,由于荧光观察与反射光观察的时间偏差,有时在所取得的荧光图像与反射光图像之间产生偏差。荧光图像与反射光图像之间的偏差是由于活体组织的脉动、曝光时间的差异、荧光观察装置与活体组织的相对位置偏差等而产生的。
该情况下,通过相对于荧光图像具有偏差的反射光图像对荧光图像进行归一化,由于没有进行正确的归一化,所以存在如下不良情况:在不是病变部位的位置显示得好像存在病变,或病变部位被显示得好像是非病变的位置,对医师提供错误信息。
本发明是鉴于上述情况而完成的,本发明提供如下的荧光观察装置和荧光图像处理方法:即使在荧光图像与反射光图像之间产生位置偏差的情况下,也能够防止对医师提供错误信息,能够防止误诊。
用于解决课题的手段
为了实现上述目的,本发明提供以下手段。
本发明的第一方式是一种荧光观察装置,其具有:白色光图像生成部,其根据拍摄反射光而得到的信号生成白色光图像,该反射光是对观察对象照射的白色光的反射光;荧光图像生成部,其根据拍摄荧光而得到的信号生成荧光图像,该荧光是对观察对象照射激励光而产生的;荧光图像校正部,其通过由所述白色光图像生成部生成的白色光图像,对由该荧光图像生成部生成的荧光图像进行归一化;位移量计算部,其对根据隔开时间间隔拍摄得到的信号而由所述白色光图像生成部生成的多个白色光图像进行处理,计算该白色光图像内的所述观察对象的位移量;区域尺寸计算部,其对由所述荧光图像生成部生成的荧光图像进行处理,计算具有规定阈值以上的荧光强度的区域的大小;以及控制部,其对所述荧光图像校正部进行控制,以使得在由所述位移量计算部计算出的所述观察对象的位移量相对于由该区域尺寸计算部计算出的所述区域的大小大到规定比例以上时,停止荧光图像的归一化。
根据上述本发明的第一方式的荧光观察装置,当得到由白色光图像生成部生成的观察对象的隔开时间间隔的多个白色光图像时,通过位移量计算部计算白色光图像内的观察对象的位移量。另一方面,当得到由荧光图像生成部生成的观察对象的荧光图像时,通过区域尺寸计算部计算荧光图像内的具有规定阈值以上的荧光强度的区域的大小。
而且,在相对于高荧光强度区域的大小、观察对象的位移量较大时,利用白色光图像对荧光图像进行归一化时的精度低,所以,在位移大到规定比例以上时,控制部停止荧光图像校正部进行的荧光图像的归一化,由此,能够防止生成以低精度归一化的荧光图像。即,仅在相对于高荧光强度区域的大小、观察对象的位移量小于规定比例时,控制部进行荧光图像的归一化,仅生成以高精度归一化的荧光图像,能够将对医师提供错误信息的情况防患于未然。
在上述本发明的第一方式的荧光观察装置中,也可以是,所述荧光观察装置具有归一化停止报知部,在所述控制部停止所述荧光图像校正部进行的荧光图像的归一化时,该归一化停止报知部报知该情况。
由此,医师等能够通过归一化停止报知部识别控制部停止荧光图像的归一化的情况。
在上述本发明的第一方式的荧光观察装置中,也可以是,所述荧光观察装置具有:归一化精度计算部,其根据由所述区域尺寸计算部计算出的所述区域的大小和由所述位移量计算部计算出的所述观察对象的位移量,计算所述荧光图像校正部进行的归一化的精度;以及归一化精度报知部,其报知由该归一化精度计算部计算出的归一化的精度。
由此,相对于高荧光亮度区域的大小、观察对象的位移量越大,荧光图像与白色光图像的位置偏差越大,归一化的精度低,所以,通过归一化精度报知部报知由归一化精度计算部计算出的精度,医师等能够识别归一化的荧光图像的可靠性。
在上述本发明的第一方式的荧光观察装置中,也可以是,所述荧光观察装置具有停止比率计算部,该停止比率计算部计算所述控制部停止所述荧光图像校正部进行的荧光图像的归一化的时间的比率,所述控制部根据由所述停止比率计算部计算出的归一化的停止时间的比率,调节所述比例。
由此,在荧光图像与白色光图像的位置偏差较大时,成为保持停止归一化的状态,所以,缓和了用于停止归一化的比例,能够得到精度低、但归一化的荧光图像。
本发明的第二方式是一种荧光图像处理方法,包括以下步骤:白色光图像生成步骤,根据拍摄反射光而得到的信号生成白色光图像,该反射光是对观察对象照射的白色光的反射光;荧光图像生成步骤,根据拍摄荧光而得到的信号生成荧光图像,该荧光是对观察对象照射激励光而产生的;区域尺寸计算步骤,对通过该荧光图像生成步骤生成的荧光图像进行处理,计算具有规定阈值以上的荧光强度的区域的大小;位移量计算步骤,对根据隔开时间间隔拍摄得到的信号而生成的多个白色光图像进行处理,计算该白色光图像内的所述观察对象的位移量;以及荧光图像校正步骤,仅在通过所述位移量计算步骤计算出的所述观察对象的位移量相对于通过所述区域尺寸计算步骤计算出的所述区域的大小小于规定比例时,通过所述白色光图像对所述荧光图像进行归一化。
发明效果
根据本发明,发挥如下效果:即使在荧光图像与反射光图像之间产生位置偏差的情况下,也能够防止对医师提供错误信息,能够防止误诊。
附图说明
图1是示出本发明的一个实施方式的荧光观察装置的框图。
图2是说明由图1的荧光观察装置取得的荧光图像中的高荧光亮度区域和表示其大小的内切圆的直径的图。
图3是示出图2的高荧光亮度区域的位移量的图。
图4是示出由图1的荧光观察装置取得的荧光图像和白色光图像的取得定时的图。
图5是示出用于说明基于图1的荧光观察装置的荧光图像处理方法的流程图的图。
图6是示出图5的荧光图像处理方法的第1变形例的流程图的图。
图7是示出通过图6的荧光图像处理方法而在监视器中显示的合成图像的显示例的图。
图8是示出在图6的荧光图像处理方法的第2变形例中存储在控制部中的归一化的级别与阈值的对应表的图。
图9是示出用于说明图8的荧光图像处理方法的流程图的图。
具体实施方式
下面,参照附图对本发明的一个实施方式的荧光观察装置1和荧光图像处理方法进行说明。
本实施方式的荧光观察装置1是荧光内窥镜装置,具有被插入体内的细长的插入部2、射出白色光和激励光的光源装置3、从插入部2的前端朝向观察对象A照射来自该光源装置3的白色光和激励光的照明单元4、设置在插入部2的前端并取得作为观察对象A的活体组织的图像信息的摄像单元5、配置在插入部2的基端侧并对由摄像单元5取得的图像信息进行处理的图像处理部6、以及显示由该图像处理部6处理后的图像G的监视器7。
照明单元4具有:光导纤维8,其配置在插入部2的长度方向的大致全长范围内,对从光源装置3射出的白色光和激励光进行导光;以及照明光学系统9,其设置在插入部2的前端,对由光导纤维8导光的白色光和激励光进行扩散,将其照射到与插入部2的前端面2a对置的观察对象A。
摄像单元5具有:物镜10,其对从观察对象A的规定观察范围返回的返回光进行会聚;二色镜12,其反射由该物镜10会聚的返回光内的激励波长以上的光(激励光和荧光),透射波长比激励波长短的白色光;2个会聚透镜11、13,它们分别对透过二色镜12的白色光和由二色镜12反射的荧光进行会聚;以及CCD这样的2个摄像元件14、15,它们对由会聚透镜11、13会聚的白色光和荧光进行摄像。图中,标号16是从由二色镜12反射的光中截断激励光的激励光截止滤波器。
如图1所示,图像处理部6具有:白色光图像生成部17,其根据由摄像元件14以隔开时间间隔的方式取得的白色光图像信号,依次生成白色光图像G1;荧光图像生成部18,其根据由摄像元件15以隔开时间间隔的方式取得的荧光图像信号,依次生成荧光图像G2;白色光图像存储部19,其依次存储由白色光图像生成部17依次生成的白色光图像G1;以及荧光图像存储部20,其依次存储由荧光图像生成部18依次生成的荧光图像G2。
并且,图像处理部6具有:位移量计算部21,其根据存储在白色光图像存储部19中的白色光图像G1,计算观察对象A相对于插入部2的前端面2a的相对位移量;以及区域尺寸计算部22,其根据存储在荧光图像存储部20中的荧光图像G2,提取预想为相当于病变部位的区域,计算其大小(区域尺寸)。
进而,图像处理部6具有:归一化运算部23,其使用由白色光图像生成部17生成的白色光图像G1和由荧光图像生成部18生成的荧光图像G2,对荧光图像G2进行归一化;图像合成部24,其将归一化的荧光图像(以下也称为归一化荧光图像。)G2’与白色光图像G1进行合成;以及归一化图像存储部25,其存储归一化荧光图像。
进而,图像处理部6具有控制部26,该控制部26根据由位移量计算部21计算出的位移量d和由区域尺寸计算部22计算出的区域尺寸D,判定归一化运算部23进行的荧光图像G2的归一化的好坏,对归一化运算部23进行控制。
例如,位移量计算部21在隔开与观察周期对应的时间间隔而拍摄的2张连续的白色光图像G1中,分别提取共同的特征点(例如高亮度区域等),求出所提取出的特征点间的距离,由此,计算取得2张白色光图像G1的期间内的插入部2的前端面2a与观察对象A的相对位移量d。
区域尺寸计算部22利用规定阈值对各荧光图像G2进行二值化处理,由此,提取具有规定阈值以上的荧光亮度的区域(高荧光亮度区域)R,如图2所示,计算与该区域R内切的圆C的直径作为该高荧光亮度区域R的区域尺寸D。
控制部26被输入在位移量计算部21中计算出的位移量d和由区域尺寸计算部22计算出的高荧光亮度区域R的区域尺寸D,由此,计算位移量d相对于区域尺寸D的比例d/D,在该比例d/D大到规定比例以上时,停止归一化运算部23进行的荧光图像G2的归一化运算,仅在该比例d/D小于规定比例时,使归一化运算部23进行荧光图像G2的归一化运算。
例如如图4所示,在白色光图像G1(-1~-6)的曝光时间为33msec、荧光图像G2的曝光时间为100msec的情况下,在观察周期100msec的期间内取得3张白色光图像G1、1张荧光图像G2。在本实施方式中,根据按照每个观察周期取得的荧光图像G2-1、G2-2和白色光图像G1-3、G1-6,进行荧光图像G2的归一化运算。
这里,为了充分确保归一化的精度,当将荧光图像G2和白色光图像G1重合假设为病变部位的高荧光亮度区域R的大致一半作为条件时,在每隔2张而取得的白色光图像G1之间,可以认为容许偏差高荧光亮度区域R的区域尺寸D的1/2。即,当设表示区域尺寸D的圆的直径为D时,在大约100msec的期间内,在图3所示的位移量d为1/2D以下的情况下,可以认为维持了归一化的精度。
因此,控制部26判定位移量d相对于荧光图像G2的区域尺寸D的比例是否为1/2以下,如果为1/2以下,则容许归一化运算部23进行归一化,在大于1/2的情况下,禁止归一化运算部23进行归一化。
归一化运算部23在控制部26容许归一化的情况下,通过使从荧光图像生成部18输入的荧光图像G2除以从白色光图像生成部17输入的白色光图像G1,计算归一化荧光图像G2’。然后,图像合成部24生成使从白色光图像生成部17送来的白色光图像G1与从归一化运算部23输出的归一化荧光图像G2’并列(或重叠)后的合成图像G,将其输出到监视器7。在将归一化荧光图像G2’重叠在白色光图像G1上的情况下,优选对归一化荧光图像G2’的具有高于规定阈值的亮度值的区域赋予蓝色等颜色,重叠在白色光图像G1上。
下面,对使用这样构成的本实施方式的荧光观察装置1的荧光图像处理方法进行说明。
首先,如图5所示,对计数器N进行复位(步骤S1),当通过摄像元件15取得荧光图像信号时,通过荧光图像生成部18,根据荧光图像信号生成荧光图像G2,并且依次存储在荧光图像存储部20中(步骤S2)。
存储在荧光图像存储部20中的荧光图像G2被送出到区域尺寸计算部22。在区域尺寸计算部22中,依次对以与观察周期对应的时间间隔100msec从荧光图像存储部20送来的荧光图像G2进行处理,提取高荧光亮度区域R,计算内切圆C的直径尺寸D作为其大小(步骤S3)。
另一方面,当通过摄像元件14取得白色光图像信号时,通过白色光图像生成部17,根据白色光图像信号生成白色光图像G1,并且依次存储在白色光图像存储部19中(步骤S4)。
存储在白色光图像存储部19中的白色光图像G1被送出到位移量计算部21。在位移量计算部21中,依次对从白色光图像存储部19送来的、隔开与观察周期对应的时间间隔100msec而取得的连续的2张白色光图像G1进行图像处理,提取各个白色光图像G1内的特征点,在2个白色光图像G1之间计算同一特征点间的距离。
由此,计算表示在取得2张白色光图像G1的期间内、观察对象A相对于插入部2的前端面2a相对移动多少的位移量d(步骤S5)。
在位移量计算部21中计算出的位移量d和在区域尺寸计算部22中计算出的高荧光亮度区域R的区域尺寸D被送出到控制部26。
在控制部26中,计算位移量d相对于送来的区域尺寸D的比例。在位移量d相对于区域尺寸D的比例d/D为1/2以下的情况下,控制部26容许归一化运算部23进行归一化运算(步骤S6)。当控制部26容许归一化运算时,归一化运算部23使计数器N增加计数(步骤S7),通过使荧光图像G2除以白色光图像G1,从而进行归一化(步骤S8)。然后,所生成的归一化荧光图像G2’被存储在归一化图像存储部25中(步骤S9),然后,反复进行步骤S2及以后的步骤。
另一方面,在位移量d相对于区域尺寸D的比例d/D大于1/2的情况下,不进行归一化运算,在监视器7中显示白色光图像G1,反复进行步骤S1及以后的步骤(步骤S10)。
在步骤S2及以后的步骤的反复进行中,只要位移量d相对于区域尺寸D的比例d/D不超过1/2,则计数器N的值继续增加,判定是否成为计数器N=10、即位移量是否连续10次小于1/2(步骤S11)。在成为计数器N=10的情况下,在图像合成部24中,将归一化荧光图像G2’与白色光图像G1进行合成(步骤S12),在监视器7中显示所生成的合成图像G(步骤S13)。以后,只要计数器N≧10、即位移量d较少的状态连续10次以上,则将归一化荧光图像G2’与白色光图像G1进行合成,在监视器7中显示所生成的合成图像G。然后,判断观察是否结束,在继续观察的情况下,反复进行步骤S2及以后的步骤(步骤S14)。
另一方面,在步骤S2及以后的步骤的反复进行中,在位移量d相对于区域尺寸D的比例d/D至少一次超过1/2的情况下,在该时点切换为仅显示白色光图像G1,返回步骤S1,对计数器N进行复位。
这样,根据本实施方式的荧光观察装置1和荧光图像处理方法,通过白色光图像G1中的位移量d,判定荧光图像G2与为了对该荧光图像G2进行归一化而使用的白色光图像G1的位置偏差,在位置偏差较大的情况下,不进行归一化,所以,不显示精度低的归一化荧光图像G2’,能够将对医师等提供错误信息的不良情况的产生防患于未然。
并且,仅在通过计数器N而得到位移量d连续10次以上较小的情况下,显示归一化荧光图像G2’,所以,在位移量d较大的情况下、或者位移量d较小的状态不持续的情况下,不显示归一化荧光图像G2’,能够防止产生在短时间内(1秒以下)切换合成图像G和白色光图像G1的不良情况。
另外,在本实施方式中,设观察周期为100msec,仅在位移量d较小的状态持续10次观察周期的情况下,显示合成图像G,但是不限于此,观察周期和计数器N的次数可以任意设定。
并且,在本实施方式的荧光图像处理方法中,在位移量d相对于区域尺寸D的比例d/D超过1/2的情况下,停止荧光图像G2的归一化,但是,该比例d/D不限于1/2,可以任意设定。例如,在比例d/D超过1的情况下、即区域尺寸D与位移量d相等的情况下,认为荧光图像G2和白色光图像G1没有重复而完全错开,所以,也可以仅在该情况下,停止荧光图像G2的归一化,在除此之外的情况下,进行归一化。由此,能够缩短停止荧光图像G2的归一化的期间。
并且,该情况下,如图6和图7所示,也可以一并显示表示归一化的精度的信息。
例如,也可以分为位移量d相对于区域尺寸D的比例d/D为1/2以下的情况、大于1/2且为1以下的情况、以及大于1的情况这3种情况,在以10次的观察周期计算出的比例d/D全部为1/2以下的情况下,将归一化的精度设定为LEVEL1,在至少1次大于1的情况下设定为LEVEL3,在除此之外的情况下设定为LEVEL2。
具体而言,在步骤S1中对计数器N和计数器L进行初始化,在步骤S6中判断为位移量d相对于区域尺寸D的比例d/D为1/2以下的情况下,使计数器L、N增加计数(步骤S20、S7),在判断为比例d/D大于1/2且为1以下的情况下(步骤S21),仅使计数器N增加计数(步骤S7)。
然后,在这些情况下,均实施荧光图像G2的归一化(步骤S8),存储归一化荧光图像G2’(步骤S9)。然后,在步骤S11中成为计数器N=10的情况下,判定是否成为计数器L=0(步骤S22),在计数器L=0的情况下、即比例d/D在10次的观察周期内始终为1/2以下的情况下,将归一化的精度设为LEVEL1(步骤S23),在除此之外的情况下、即存在至少1次大于1/2且为D以下的情况的情况下,将归一化的精度设为LEVEL2(步骤S24)。
然后,对计数器N、L进行复位(步骤S25),在图像合成部24中对归一化荧光图像G2’、白色光图像G1、表示归一化的精度的信息进行合成(步骤S12),如图7所示,在监视器7中显示所生成的合成图像G(步骤S13)。然后,判断观察是否结束,在继续观察的情况下,反复进行步骤S2及以后的步骤(步骤S14)。
另一方面,在步骤S21中判断为比例d/D大于1时,将归一化的精度设定为LEVEL3(步骤S26),对白色光图像G1和表示归一化的精度为LEVEL3的信息进行合成(步骤S27),在监视器7中显示所生成的合成图像G(步骤S28)。
在图7所示的例子中,在归一化的精度为最高的LEVEL1的情况下,2个圆形的显示B1、B2双方均点亮,在LEVEL2的情况下,仅1个显示B1点亮,在LEVEL3的情况下,一个显示也不点亮。图7示出仅1个显示B1点亮的LEVEL2的状态。该归一化的精度的显示方法不限于图7的例子,而是任意的。并且,代替在监视器7中进行显示,也可以通过声音等进行报知。
并且,如图8和图9所示,控制部26也可以根据归一化的精度对用于进行归一化的阈值进行变更。即,当开始观察时,在步骤S1中的计数器N、M的初始化后,设定归一化精度的级别(步骤S30)。如图8所示,控制部26对应地存储归一化精度的级别和阈值S,在最初的设定中,例如,将归一化精度的级别设定为作为最严格的阈值S的LEVEL1。此时,阈值S例如为0。
接着,计数器N增加计数(步骤S31),进行荧光图像G2的生成/存储(步骤S2)、区域尺寸D的计算(步骤S3)、白色光图像G1的生成/存储(步骤S4)和位移量d的计算(步骤S5),判定位移量d相对于区域尺寸D是否为阈值S以下(步骤S32)。
在位移量d相对于区域尺寸D的比例d/D为阈值S以下的情况下,对荧光图像G2进行归一化(步骤S8),存储归一化荧光图像G2’(步骤S9),反复进行步骤S31~S9,直到计数器N=10为止。
另一方面,在位移量d相对于区域尺寸D的比例d/D大于阈值S的情况下,不进行荧光图像G2的归一化,使计数器M增加计数(步骤S33),在显示白色光图像G1后(步骤S10),反复进行步骤S1~S9,直到计数器N=10为止。
然后,在步骤S9结束后,判定是否成为计数器N=10(步骤S11),在成为计数器N=10的情况下,判定计数器M是否大于9(步骤S34),在M>9的情况下、即10次内没有进行1次归一化的情况下,使归一化精度的级别降低1级(步骤S35)。在该例子中,将最初LEVEL6的级别变更为LEVEL5。
另一方面,在步骤S34中判定计数器M是否小于7(步骤S36),在M<7的情况下、即10次中进行4次以上的归一化的情况下,将归一化精度的级别提高1级(步骤S37)。在处于最高级别的情况下,不提高到更高的级别。
然后,在图像合成部24中对归一化荧光图像G2’、白色光图像G1、表示归一化的精度的信息进行合成(步骤S12),在监视器7中显示所生成的合成图像G(步骤S13)。然后,判断观察是否结束,在继续观察的情况下,反复进行步骤S31及以后的步骤(步骤S14)。
由此,始终以一定的时间比例进行归一化运算,能够进行适合于观察环境的归一化运算。
另外,存储在图8所示的控制部26中的使归一化精度的级别与阈值S对应起来的值可以存储有2种以上的模式,能够通过设置在监视器7上的触摸开关等选择适合于观察条件的模式。并且,也可以通过将内窥镜的插入部2与图像处理部6连接,内置于插入部中的ID(识别码)被送出到控制部26,选择适合于要使用的插入部的模式。
标号说明
1:荧光观察装置;7:监视器(归一化停止报知部、归一化精度报知部);17:白色光图像生成部;18:荧光图像生成部;21:位移量计算部;22:区域尺寸计算部;23:归一化运算部(荧光图像校正部);26:控制部(归一化精度计算部、停止比率计算部);A:观察对象;d:位移量;D:区域尺寸(大小);G1:白色光图像;G2:荧光图像;R:高荧光亮度区域(区域);S2:荧光图像生成步骤;S3:区域尺寸计算步骤;S4:白色光图像生成步骤;S5:位移量计算步骤;S9:归一化步骤(荧光图像校正步骤)。
Claims (5)
1.一种荧光观察装置,其具有:
白色光图像生成部,其根据拍摄反射光而得到的信号生成白色光图像,该反射光是对观察对象照射的白色光的反射光;
荧光图像生成部,其根据拍摄荧光而得到的信号生成荧光图像,该荧光是对观察对象照射激励光而产生的;
荧光图像校正部,其通过由所述白色光图像生成部生成的白色光图像,对由该荧光图像生成部生成的荧光图像进行归一化;
位移量计算部,其对根据隔开时间间隔拍摄得到的信号而由所述白色光图像生成部生成的多个白色光图像进行处理,计算该白色光图像内的所述观察对象的位移量;
区域尺寸计算部,其对由所述荧光图像生成部生成的荧光图像进行处理,计算具有规定阈值以上的荧光强度的区域的大小;以及
控制部,其对所述荧光图像校正部进行控制,以使得在由所述位移量计算部计算出的所述观察对象的位移量相对于由该区域尺寸计算部计算出的所述区域的大小大到规定比例以上时,停止荧光图像的归一化。
2.根据权利要求1所述的荧光观察装置,其中,
所述荧光观察装置具有归一化停止报知部,在所述控制部停止所述荧光图像校正部进行的荧光图像的归一化时,该归一化停止报知部报知该情况。
3.根据权利要求1所述的荧光观察装置,其中,
所述荧光观察装置具有:
归一化精度计算部,其根据由所述区域尺寸计算部计算出的所述区域的大小和由所述位移量计算部计算出的所述观察对象的位移量,计算所述荧光图像校正部进行的归一化的精度;以及
归一化精度报知部,其报知由该归一化精度计算部计算出的归一化的精度。
4.根据权利要求1所述的荧光观察装置,其中,
所述荧光观察装置具有停止比率计算部,该停止比率计算部计算所述控制部停止所述荧光图像校正部进行的荧光图像的归一化的时间的比率,
所述控制部根据由所述停止比率计算部计算出的归一化的停止时间的比率,调节所述比例。
5.一种荧光图像处理方法,包括以下步骤:
白色光图像生成步骤,根据拍摄反射光而得到的信号生成白色光图像,该反射光是对观察对象照射的白色光的反射光;
荧光图像生成步骤,根据拍摄荧光而得到的信号生成荧光图像,该荧光是对观察对象照射激励光而产生的;
区域尺寸计算步骤,对通过该荧光图像生成步骤生成的荧光图像进行处理,计算具有规定阈值以上的荧光强度的区域的大小;
位移量计算步骤,对根据隔开时间间隔拍摄得到的信号而生成的多个白色光图像进行处理,计算该白色光图像内的所述观察对象的位移量;以及
荧光图像校正步骤,仅在通过所述位移量计算步骤计算出的所述观察对象的位移量相对于通过所述区域尺寸计算步骤计算出的所述区域的大小小于规定比例时,通过所述白色光图像对所述荧光图像进行归一化。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010-091431 | 2010-04-12 | ||
JP2010091431A JP5484997B2 (ja) | 2010-04-12 | 2010-04-12 | 蛍光観察装置および蛍光観察装置の作動方法 |
PCT/JP2011/058780 WO2011129255A1 (ja) | 2010-04-12 | 2011-04-07 | 蛍光観察装置および蛍光画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102843952A true CN102843952A (zh) | 2012-12-26 |
CN102843952B CN102843952B (zh) | 2015-03-25 |
Family
ID=44798631
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201180018227.3A Expired - Fee Related CN102843952B (zh) | 2010-04-12 | 2011-04-07 | 荧光观察装置和荧光图像处理方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8421034B2 (zh) |
JP (1) | JP5484997B2 (zh) |
CN (1) | CN102843952B (zh) |
WO (1) | WO2011129255A1 (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2447262A1 (en) | 2001-05-17 | 2002-11-21 | Xenogen Corporation | Method and apparatus for determining target depth, brightness and size within a body region |
JP5558178B2 (ja) * | 2010-04-07 | 2014-07-23 | オリンパス株式会社 | 蛍光観察装置 |
JP6015452B2 (ja) * | 2013-01-07 | 2016-10-26 | 株式会社リコー | 画像処理装置、方法およびプログラム |
WO2016164118A2 (en) | 2015-04-10 | 2016-10-13 | Robert Bosch Gmbh | Object position measurement with automotive camera using vehicle motion data |
JP6622295B2 (ja) * | 2015-04-30 | 2019-12-18 | 富士フイルム株式会社 | 画像処理装置、画像処理装置の作動方法及びプログラム |
DE112015006505T5 (de) * | 2015-06-17 | 2018-03-15 | Olympus Corporation | Bildgebungsvorrichtung |
JP7134759B2 (ja) * | 2018-07-13 | 2022-09-12 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用画像処理装置及び医療用観察システム |
JP7286948B2 (ja) * | 2018-11-07 | 2023-06-06 | ソニーグループ株式会社 | 医療用観察システム、信号処理装置及び医療用観察方法 |
JP7281308B2 (ja) * | 2019-03-07 | 2023-05-25 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用画像処理装置及び医療用観察システム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4768513A (en) * | 1986-04-21 | 1988-09-06 | Agency Of Industrial Science And Technology | Method and device for measuring and processing light |
JPH08224209A (ja) * | 1995-02-23 | 1996-09-03 | Olympus Optical Co Ltd | 蛍光観察装置 |
US20060025692A1 (en) * | 2004-07-30 | 2006-02-02 | Olympus Corporation | Endoscope apparatus |
CN101188965A (zh) * | 2005-06-08 | 2008-05-28 | 奥林巴斯医疗株式会社 | 内窥镜装置和图像处理装置 |
CN101583304A (zh) * | 2007-01-18 | 2009-11-18 | 奥林巴斯株式会社 | 荧光观察装置和荧光观察方法 |
CN101636102A (zh) * | 2007-03-20 | 2010-01-27 | 奥林巴斯株式会社 | 荧光观察装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07246184A (ja) * | 1994-03-09 | 1995-09-26 | Fuji Photo Optical Co Ltd | 面順次式撮像装置 |
-
2010
- 2010-04-12 JP JP2010091431A patent/JP5484997B2/ja not_active Expired - Fee Related
-
2011
- 2011-04-07 CN CN201180018227.3A patent/CN102843952B/zh not_active Expired - Fee Related
- 2011-04-07 WO PCT/JP2011/058780 patent/WO2011129255A1/ja active Application Filing
-
2012
- 2012-10-05 US US13/646,169 patent/US8421034B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4768513A (en) * | 1986-04-21 | 1988-09-06 | Agency Of Industrial Science And Technology | Method and device for measuring and processing light |
JPH08224209A (ja) * | 1995-02-23 | 1996-09-03 | Olympus Optical Co Ltd | 蛍光観察装置 |
US20060025692A1 (en) * | 2004-07-30 | 2006-02-02 | Olympus Corporation | Endoscope apparatus |
CN101188965A (zh) * | 2005-06-08 | 2008-05-28 | 奥林巴斯医疗株式会社 | 内窥镜装置和图像处理装置 |
CN101583304A (zh) * | 2007-01-18 | 2009-11-18 | 奥林巴斯株式会社 | 荧光观察装置和荧光观察方法 |
CN101636102A (zh) * | 2007-03-20 | 2010-01-27 | 奥林巴斯株式会社 | 荧光观察装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2011129255A1 (ja) | 2011-10-20 |
JP2011218003A (ja) | 2011-11-04 |
US20130026390A1 (en) | 2013-01-31 |
US8421034B2 (en) | 2013-04-16 |
CN102843952B (zh) | 2015-03-25 |
JP5484997B2 (ja) | 2014-05-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102843952A (zh) | 荧光观察装置和荧光图像处理方法 | |
CN102361583B (zh) | 图像处理装置、摄像装置、图像处理程序以及图像处理方法 | |
US7123756B2 (en) | Method and apparatus for standardized fluorescence image generation | |
EP2108306B1 (de) | Vorrichtung und Verfahren zur endoskopischen 3D-Datenerfassung | |
CN103124515B (zh) | 摄像装置 | |
US6456769B1 (en) | Fiber bundle and endoscope apparatus | |
US20040162492A1 (en) | Diagnosis supporting device | |
EP2859837A1 (en) | Imaging device, microscope device, and endoscope device | |
CN105338881B (zh) | 内窥镜系统 | |
US20130245411A1 (en) | Endoscope system, processor device thereof, and exposure control method | |
US20110012025A1 (en) | Fluorescence observation apparatus | |
CN102802493B (zh) | 荧光观察装置 | |
US20170251915A1 (en) | Endoscope apparatus | |
CN102724908B (zh) | 荧光观察装置 | |
CN103889302A (zh) | 内窥镜系统 | |
US20210096351A1 (en) | Endoscope processor, display setting method, computer-readable recording medium, and endoscope system | |
JP2011005002A (ja) | 内視鏡装置 | |
CN107072506B (zh) | 摄像装置和处理装置 | |
JP2019187598A (ja) | 内視鏡装置 | |
US20220133140A1 (en) | Light source apparatus, medical observation system, adjustment apparatus, illumination method, adjustment method, and program | |
CN104271025B (zh) | 内窥镜装置 | |
CN105473052A (zh) | 摄像装置以及内窥镜装置 | |
CN105142492B (zh) | 内窥镜系统 | |
JP6706026B2 (ja) | 内視鏡システムおよび内視鏡装置の作動方法 | |
JP6574101B2 (ja) | 内視鏡システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150325 Termination date: 20180407 |