JP6961603B2 - 切断されていない組織検体を撮像するための方法及び装置 - Google Patents
切断されていない組織検体を撮像するための方法及び装置 Download PDFInfo
- Publication number
- JP6961603B2 JP6961603B2 JP2018542183A JP2018542183A JP6961603B2 JP 6961603 B2 JP6961603 B2 JP 6961603B2 JP 2018542183 A JP2018542183 A JP 2018542183A JP 2018542183 A JP2018542183 A JP 2018542183A JP 6961603 B2 JP6961603 B2 JP 6961603B2
- Authority
- JP
- Japan
- Prior art keywords
- imaging system
- image
- sample
- auxiliary
- tissue
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 332
- 238000000034 method Methods 0.000 title claims description 114
- 210000001519 tissue Anatomy 0.000 claims description 248
- 238000012545 processing Methods 0.000 claims description 108
- 238000005286 illumination Methods 0.000 claims description 99
- 210000003855 cell nucleus Anatomy 0.000 claims description 73
- 239000002872 contrast media Substances 0.000 claims description 73
- 230000003287 optical effect Effects 0.000 claims description 42
- 230000003595 spectral effect Effects 0.000 claims description 42
- 238000012800 visualization Methods 0.000 claims description 30
- WZUVPPKBWHMQCE-UHFFFAOYSA-N Haematoxylin Chemical compound C12=CC(O)=C(O)C=C2CC2(O)C1C1=CC=C(O)C(O)=C1OC2 WZUVPPKBWHMQCE-UHFFFAOYSA-N 0.000 claims description 29
- YQGOJNYOYNNSMM-UHFFFAOYSA-N eosin Chemical compound [Na+].OC(=O)C1=CC=CC=C1C1=C2C=C(Br)C(=O)C(Br)=C2OC2=C(Br)C(O)=C(Br)C=C21 YQGOJNYOYNNSMM-UHFFFAOYSA-N 0.000 claims description 28
- 238000012634 optical imaging Methods 0.000 claims description 27
- 230000000295 complement effect Effects 0.000 claims description 22
- 239000012530 fluid Substances 0.000 claims description 20
- 239000003795 chemical substances by application Substances 0.000 claims description 18
- 239000002131 composite material Substances 0.000 claims description 18
- 230000005284 excitation Effects 0.000 claims description 15
- 230000008569 process Effects 0.000 claims description 13
- 230000005540 biological transmission Effects 0.000 claims description 11
- 102000008186 Collagen Human genes 0.000 claims description 6
- 108010035532 Collagen Proteins 0.000 claims description 6
- 238000002835 absorbance Methods 0.000 claims description 6
- 229920001436 collagen Polymers 0.000 claims description 6
- 210000000805 cytoplasm Anatomy 0.000 claims description 6
- 238000011161 development Methods 0.000 claims description 6
- 230000004044 response Effects 0.000 claims description 6
- 210000003205 muscle Anatomy 0.000 claims description 4
- 238000000862 absorption spectrum Methods 0.000 claims description 3
- 230000009347 mechanical transmission Effects 0.000 claims description 3
- 239000000976 ink Substances 0.000 description 43
- 230000007170 pathology Effects 0.000 description 29
- 238000001356 surgical procedure Methods 0.000 description 27
- 239000002904 solvent Substances 0.000 description 20
- 238000011282 treatment Methods 0.000 description 20
- 238000011156 evaluation Methods 0.000 description 19
- 210000004027 cell Anatomy 0.000 description 17
- 238000010186 staining Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 16
- 239000011521 glass Substances 0.000 description 16
- 239000000853 adhesive Substances 0.000 description 12
- 230000001070 adhesive effect Effects 0.000 description 12
- 238000005192 partition Methods 0.000 description 12
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N Silicium dioxide Chemical compound O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 11
- 239000003086 colorant Substances 0.000 description 10
- 239000000463 material Substances 0.000 description 10
- 206010006187 Breast cancer Diseases 0.000 description 9
- 208000026310 Breast neoplasm Diseases 0.000 description 9
- 210000000481 breast Anatomy 0.000 description 9
- 230000014759 maintenance of location Effects 0.000 description 9
- IAZDPXIOMUYVGZ-UHFFFAOYSA-N Dimethylsulphoxide Chemical compound CS(C)=O IAZDPXIOMUYVGZ-UHFFFAOYSA-N 0.000 description 8
- 230000009102 absorption Effects 0.000 description 8
- 238000010521 absorption reaction Methods 0.000 description 8
- 238000005520 cutting process Methods 0.000 description 8
- 239000000975 dye Substances 0.000 description 8
- 208000035346 Margins of Excision Diseases 0.000 description 7
- 238000012735 histological processing Methods 0.000 description 7
- 239000000203 mixture Substances 0.000 description 7
- 230000001575 pathological effect Effects 0.000 description 7
- 238000007639 printing Methods 0.000 description 7
- 238000001228 spectrum Methods 0.000 description 7
- 238000003745 diagnosis Methods 0.000 description 6
- 238000002372 labelling Methods 0.000 description 6
- 229920003023 plastic Polymers 0.000 description 6
- 238000002271 resection Methods 0.000 description 6
- WSFSSNUMVMOOMR-UHFFFAOYSA-N Formaldehyde Chemical compound O=C WSFSSNUMVMOOMR-UHFFFAOYSA-N 0.000 description 5
- 206010028980 Neoplasm Diseases 0.000 description 5
- CTQNGGLPUBDAKN-UHFFFAOYSA-N O-Xylene Chemical compound CC1=CC=CC=C1C CTQNGGLPUBDAKN-UHFFFAOYSA-N 0.000 description 5
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 5
- 230000004075 alteration Effects 0.000 description 5
- SEACYXSIPDVVMV-UHFFFAOYSA-L eosin Y Chemical group [Na+].[Na+].[O-]C(=O)C1=CC=CC=C1C1=C2C=C(Br)C(=O)C(Br)=C2OC2=C(Br)C([O-])=C(Br)C=C21 SEACYXSIPDVVMV-UHFFFAOYSA-L 0.000 description 5
- 239000005350 fused silica glass Substances 0.000 description 5
- 210000004940 nucleus Anatomy 0.000 description 5
- 239000012188 paraffin wax Substances 0.000 description 5
- 239000004033 plastic Substances 0.000 description 5
- 239000008096 xylene Substances 0.000 description 5
- FWBHETKCLVMNFS-UHFFFAOYSA-N 4',6-Diamino-2-phenylindol Chemical compound C1=CC(C(=N)N)=CC=C1C1=CC2=CC=C(C(N)=N)C=C2N1 FWBHETKCLVMNFS-UHFFFAOYSA-N 0.000 description 4
- 230000008901 benefit Effects 0.000 description 4
- WUKWITHWXAAZEY-UHFFFAOYSA-L calcium difluoride Chemical compound [F-].[F-].[Ca+2] WUKWITHWXAAZEY-UHFFFAOYSA-L 0.000 description 4
- 229910001634 calcium fluoride Inorganic materials 0.000 description 4
- 239000006059 cover glass Substances 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 239000000834 fixative Substances 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000012333 histopathological diagnosis Methods 0.000 description 4
- 238000003364 immunohistochemistry Methods 0.000 description 4
- 229910052751 metal Inorganic materials 0.000 description 4
- 239000002184 metal Substances 0.000 description 4
- 238000000386 microscopy Methods 0.000 description 4
- 238000002360 preparation method Methods 0.000 description 4
- 238000009877 rendering Methods 0.000 description 4
- 239000000126 substance Substances 0.000 description 4
- PRDFBSVERLRRMY-UHFFFAOYSA-N 2'-(4-ethoxyphenyl)-5-(4-methylpiperazin-1-yl)-2,5'-bibenzimidazole Chemical compound C1=CC(OCC)=CC=C1C1=NC2=CC=C(C=3NC4=CC(=CC=C4N=3)N3CCN(C)CC3)C=C2N1 PRDFBSVERLRRMY-UHFFFAOYSA-N 0.000 description 3
- 239000008186 active pharmaceutical agent Substances 0.000 description 3
- 238000013459 approach Methods 0.000 description 3
- 230000004888 barrier function Effects 0.000 description 3
- 239000008280 blood Substances 0.000 description 3
- 210000004369 blood Anatomy 0.000 description 3
- 201000011510 cancer Diseases 0.000 description 3
- 238000004040 coloring Methods 0.000 description 3
- 125000002485 formyl group Chemical class [H]C(*)=O 0.000 description 3
- 238000004020 luminiscence type Methods 0.000 description 3
- 230000035515 penetration Effects 0.000 description 3
- 239000000243 solution Substances 0.000 description 3
- 238000007794 visualization technique Methods 0.000 description 3
- RBTBFTRPCNLSDE-UHFFFAOYSA-N 3,7-bis(dimethylamino)phenothiazin-5-ium Chemical compound C1=CC(N(C)C)=CC2=[S+]C3=CC(N(C)C)=CC=C3N=C21 RBTBFTRPCNLSDE-UHFFFAOYSA-N 0.000 description 2
- -1 DRAQ5 Chemical compound 0.000 description 2
- LFQSCWFLJHTTHZ-UHFFFAOYSA-N Ethanol Chemical compound CCO LFQSCWFLJHTTHZ-UHFFFAOYSA-N 0.000 description 2
- 239000012981 Hank's balanced salt solution Substances 0.000 description 2
- DPKHZNPWBDQZCN-UHFFFAOYSA-N acridine orange free base Chemical compound C1=CC(N(C)C)=CC2=NC3=CC(N(C)C)=CC=C3C=C21 DPKHZNPWBDQZCN-UHFFFAOYSA-N 0.000 description 2
- 150000001298 alcohols Chemical class 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- DZBUGLKDJFMEHC-UHFFFAOYSA-N benzoquinolinylidene Natural products C1=CC=CC2=CC3=CC=CC=C3N=C21 DZBUGLKDJFMEHC-UHFFFAOYSA-N 0.000 description 2
- 230000007248 cellular mechanism Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000003153 chemical reaction reagent Substances 0.000 description 2
- 238000010226 confocal imaging Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 239000013078 crystal Substances 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000012153 distilled water Substances 0.000 description 2
- 238000002073 fluorescence micrograph Methods 0.000 description 2
- 238000000799 fluorescence microscopy Methods 0.000 description 2
- 230000008595 infiltration Effects 0.000 description 2
- 238000001764 infiltration Methods 0.000 description 2
- 230000031700 light absorption Effects 0.000 description 2
- 229960000907 methylthioninium chloride Drugs 0.000 description 2
- 238000012014 optical coherence tomography Methods 0.000 description 2
- 239000000377 silicon dioxide Substances 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Chemical compound O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- HPTJABJPZMULFH-UHFFFAOYSA-N 12-[(Cyclohexylcarbamoyl)amino]dodecanoic acid Chemical compound OC(=O)CCCCCCCCCCCNC(=O)NC1CCCCC1 HPTJABJPZMULFH-UHFFFAOYSA-N 0.000 description 1
- 206010004146 Basal cell carcinoma Diseases 0.000 description 1
- 239000004593 Epoxy Substances 0.000 description 1
- 230000005355 Hall effect Effects 0.000 description 1
- 241000078511 Microtome Species 0.000 description 1
- 206010036618 Premenstrual syndrome Diseases 0.000 description 1
- 238000001069 Raman spectroscopy Methods 0.000 description 1
- 208000000453 Skin Neoplasms Diseases 0.000 description 1
- FAPWRFPIFSIZLT-UHFFFAOYSA-M Sodium chloride Chemical compound [Na+].[Cl-] FAPWRFPIFSIZLT-UHFFFAOYSA-M 0.000 description 1
- 230000004308 accommodation Effects 0.000 description 1
- BGLGAKMTYHWWKW-UHFFFAOYSA-N acridine yellow Chemical compound [H+].[Cl-].CC1=C(N)C=C2N=C(C=C(C(C)=C3)N)C3=CC2=C1 BGLGAKMTYHWWKW-UHFFFAOYSA-N 0.000 description 1
- XKRFYHLGVUSROY-UHFFFAOYSA-N argon Substances [Ar] XKRFYHLGVUSROY-UHFFFAOYSA-N 0.000 description 1
- 229910052786 argon Inorganic materials 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 239000005388 borosilicate glass Substances 0.000 description 1
- 239000007975 buffered saline Substances 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003251 chemically resistant material Substances 0.000 description 1
- 238000003776 cleavage reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 230000018044 dehydration Effects 0.000 description 1
- 238000006297 dehydration reaction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- IINNWAYUJNWZRM-UHFFFAOYSA-L erythrosin B Chemical compound [Na+].[Na+].[O-]C(=O)C1=CC=CC=C1C1=C2C=C(I)C(=O)C(I)=C2OC2=C(I)C([O-])=C(I)C=C21 IINNWAYUJNWZRM-UHFFFAOYSA-L 0.000 description 1
- ZMMJGEGLRURXTF-UHFFFAOYSA-N ethidium bromide Chemical compound [Br-].C12=CC(N)=CC=C2C2=CC=C(N)C=C2[N+](CC)=C1C1=CC=CC=C1 ZMMJGEGLRURXTF-UHFFFAOYSA-N 0.000 description 1
- 229960005542 ethidium bromide Drugs 0.000 description 1
- 238000012854 evaluation process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000007850 fluorescent dye Substances 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 239000003292 glue Substances 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000010562 histological examination Methods 0.000 description 1
- XMBWDFGMSWQBCA-UHFFFAOYSA-N hydrogen iodide Chemical compound I XMBWDFGMSWQBCA-UHFFFAOYSA-N 0.000 description 1
- 238000001746 injection moulding Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000005291 magnetic effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000007431 microscopic evaluation Methods 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000002667 nucleating agent Substances 0.000 description 1
- 238000000399 optical microscopy Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000010827 pathological analysis Methods 0.000 description 1
- 238000012335 pathological evaluation Methods 0.000 description 1
- 229920006324 polyoxymethylene Polymers 0.000 description 1
- XJMOSONTPMZWPB-UHFFFAOYSA-M propidium iodide Chemical compound [I-].[I-].C12=CC(N)=CC=C2C2=CC=C(N)C=C2[N+](CCC[N+](C)(CC)CC)=C1C1=CC=CC=C1 XJMOSONTPMZWPB-UHFFFAOYSA-M 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- PYWVYCXTNDRMGF-UHFFFAOYSA-N rhodamine B Chemical compound [Cl-].C=12C=CC(=[N+](CC)CC)C=C2OC2=CC(N(CC)CC)=CC=C2C=1C1=CC=CC=C1C(O)=O PYWVYCXTNDRMGF-UHFFFAOYSA-N 0.000 description 1
- 230000007017 scission Effects 0.000 description 1
- 238000007789 sealing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 201000000849 skin cancer Diseases 0.000 description 1
- 241000894007 species Species 0.000 description 1
- 238000004611 spectroscopical analysis Methods 0.000 description 1
- 230000000087 stabilizing effect Effects 0.000 description 1
- 239000012192 staining solution Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- MPLHNVLQVRSVEE-UHFFFAOYSA-N texas red Chemical compound [O-]S(=O)(=O)C1=CC(S(Cl)(=O)=O)=CC=C1C(C1=CC=2CCCN3CCCC(C=23)=C1O1)=C2C1=C(CCC1)C3=[N+]1CCCC3=C2 MPLHNVLQVRSVEE-UHFFFAOYSA-N 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
- 238000002211 ultraviolet spectrum Methods 0.000 description 1
- 238000001429 visible spectrum Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/16—Microscopes adapted for ultraviolet illumination ; Fluorescence microscopes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/01—Arrangements or apparatus for facilitating the optical investigation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/6428—Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes"
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/645—Specially adapted constructive features of fluorimeters
- G01N21/6456—Spatial resolved fluorescence measurements; Imaging
- G01N21/6458—Fluorescence microscopy
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/6486—Measuring fluorescence of biological material, e.g. DNA, RNA, cells
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/0088—Inverse microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/06—Means for illuminating specimens
- G02B21/08—Condensers
- G02B21/086—Condensers for transillumination only
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/24—Base structure
- G02B21/26—Stages; Adjusting means therefor
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/361—Optical details, e.g. image relay to the camera or image sensor
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/01—Arrangements or apparatus for facilitating the optical investigation
- G01N2021/0106—General arrangement of respective parts
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/6408—Fluorescence; Phosphorescence with measurement of decay time, time resolved fluorescence
Landscapes
- Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Optics & Photonics (AREA)
- Immunology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Pathology (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Multimedia (AREA)
- Chemical Kinetics & Catalysis (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Microscoopes, Condenser (AREA)
- Investigating Or Analysing Biological Materials (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Description
G=(1/(1−exp(−k))^2)*(exp(−B_Hematoxylin,green*I_nuclear*k)−exp(−k))*(exp(−B_Eosin,green*I_secondary*k)−exp(−k))
B=(1/(1−exp(−k))^2)*(exp(−B_Hematoxylin,blue*I_nuclear*k)−exp(−k))*(exp(−B_Eosin,blue*I_secondary*k)−exp(−k))
なお、本発明は、実施の態様として以下の内容を含む。
[態様1]
組織検体のリアルタイム光学撮像のための装置であって、
照明光源を使用して、1つ以上の分光チャネルを通して、組織検体の画像を取得するように構成されている主撮像システムであって、前記1つ以上の分光チャネルのうちの少なくとも1つは、前記照明光源の波長範囲とは異なる波長範囲を検出するように構成されており、前記主撮像システムは、フレーム取得速度を有する倒立顕微鏡であり、光学的深部断面可視化を実行するように構成されており、前記主撮像システムは、連続的な画像を取得するように構成されている主撮像システムと、
補助撮像システムであって、前記補助撮像システムは、前記組織検体の補助画像を取得するように構成されており、前記補助画像の領域は、前記主撮像システムにより取得された前記連続的な画像の各画像の領域より大きい補助撮像システムと、
内部に透明窓を有する検体ホルダであって、前記検体ホルダは、前記主撮像システムの焦点面に一致する検体面に配設され、前記検体ホルダは、前記透明窓上に前記組織検体を保持するように構成されており、前記検体ホルダは、1つ以上の位置センサを含み、前記検体ホルダは、前記検体面において移動可能なように構成されており、前記1つ以上の位置センサは、検体ホルダ位置を測定するように構成されており、前記検体ホルダは、前記補助撮像システムの焦点面に対して移動可能なように構成されている検体ホルダと、
ユーザ入力を受け取るように構成されているユーザ入力装置であって、前記検体ホルダは、前記ユーザ入力に応じてリアルタイムに移動するように構成されているユーザ入力装置と、
前記主撮像システム、前記補助撮像システム、及び前記位置センサと電気的に通信する処理装置であって、前記処理装置は、前記主撮像システムにより取得される前記連続的な画像、前記補助画像、及び少なくとも1つの検体ホルダ位置に対して一連の命令を実行して、前記検体中の細胞核の表示画像を含む前記組織検体の合成表示画像を生成するように構成されている処理装置と、
前記処理装置と電気的に通信する表示装置であって、前記組織検体の前記合成表示画像をリアルタイムに表示するように構成されている表示装置と、
を備える装置。
[態様2]
態様1に記載の装置において、前記細胞核の表示画像が、仮想透過照明顕微観察を含む装置。
[態様3]
態様2に記載の装置において、前記主撮像システムが、多光子、共焦点、光シート、紫外表面励起、又は構造化照明顕微鏡である装置。
[態様4]
態様2に記載の装置において、前記主撮像システムが、2つ以上の交換可能な対物レンズを備える装置。
[態様5]
態様2に記載の装置において、前記主撮像システムにより取得される前記連続的な画像の各画像が、2つ以上の分光チャネルを通して取得され、
前記2つ以上の分光チャネルのうちの少なくとも1つが、核造影剤により発光される光を検出するように構成されており、前記2つ以上の分光チャネルのうちの少なくとも1つが、補完的な造影源から発光される光を検出するように構成されている装置。
[態様6]
態様2に記載の装置において、前記検体ホルダが、前記検体ホルダの移動のための1つ以上のアクチュエータを更に備える装置。
[態様7]
態様2に記載の装置において、前記ユーザ入力装置が、ジョイスティック、ノブ、ダイヤル、キーボード、又は他のデジタル入力装置である装置。
[態様8]
態様2に記載の装置において、前記ユーザ入力装置が、前記ユーザから前記検体ホルダへ力を伝達して前記検体ホルダを移動させる機械的伝達装置を含む装置。
[態様9]
態様2に記載の装置において、前記補助撮像システムが、光センサの一次元デジタル配列を有する装置。
[態様10]
態様2に記載の装置において、前記補助撮像システムが、2つ以上の分光チャネルを有する装置。
[態様11]
態様10に記載の装置において、前記処理装置が、前記補助撮像システムの前記2つ以上の分光チャネルを比較して、前記組織サンプルにおける手術用インク、縫合糸、又は外在性マークの位置を特定するように構成されている装置。
[態様12]
態様11に記載の装置において、前記組織検体の前記合成表示画像は、前記組織検体における前記手術用インク、縫合糸、又は外在性マークの1つ以上の位置を含む装置。
[態様13]
態様2に記載の装置において、前記補助撮像システムが、狭帯域照明器を備える装置。
[態様14]
態様2に記載の装置において、前記検体ホルダが、取り外し可能な透明窓を更に備える装置。
[態様15]
態様14に記載の装置において、前記取り外し可能な透明窓が、前記透明窓を囲む流体保持構造を含む装置。
[態様16]
態様2に記載の装置において、前記検体ホルダが、検体仕切りを更に備える装置。
[態様17]
態様2に記載の装置において、前記検体ホルダが、蓋を更に備える装置。
[態様18]
態様2に記載の装置において、前記補助撮像システムが、照明光源を更に備える装置。
[態様19]
態様18に記載の装置において、前記照明光源が、前記蓋に取り付けられるように構成されている装置。
[態様20]
態様17に記載の装置において、前記蓋が、前記組織検体を前記透明窓に対して保持するように構成された検体ガイドを更に備える装置。
[態様21]
態様2に記載の装置において、前記透明窓が、ガラス、溶融水晶、シリカ、又はフッ化カルシウムを含む装置。
[態様22]
態様2に記載の装置において、前記処理装置が、並列処理のためのハードウェアを有するグラフィック処理装置を更に備え、更に、前記グラフィック処理装置が、前記主撮像システムにより取得される前記連続的な画像に対する一連の並列処理動作のためのコンピュータ実行可能な命令を含む装置。
[態様23]
態様2に記載の装置において、前記処理装置が、前記検体ホルダの250ミリ秒未満の移動後に、前記組織検体の合成表示画像を更新するように構成されている装置。
[態様24]
態様22に記載の装置において、前記グラフィック処理装置が、仮想透過照明顕微観察処理のための一連の並列処理動作のためのコンピュータ実行可能な命令を含む装置。
[態様25]
態様5に記載の装置において、前記処理装置が、以下の非線形プロセス:
R=(1/(1−exp(−k))^2) * (exp(−B_Hematoxylin,Red * I_nuclear * k)−exp(−k)) * (exp(−B_Eosin,Red * I_secondary * k)−exp(−k))
G=(1/(1−exp(−k))^2) * (exp(−B_Hematoxylin,green * I_nuclear * k)−exp(−k)) * (exp(−B_Eosin,green * I_secondary * k)−exp(−k))
B=(1/(1−exp(−k))^2) * (exp(−B_Hematoxylin,blue * I_nuclear * k)−exp(−k)) * (exp(−B_Eosin,blue * I_secondary * k)−exp(−k))
(式中、R、G、及びBは、それぞれ、前記仮想透過照明画像の赤色、緑色、及び青色の強度であり、B_Hematoxylin,Red、B_Hematoxylin,green、及びB_Hematoxylin,blueは、赤色、緑色、及び青色それぞれの光についてのヘマトキシリンの吸光度であり、B_Eosin,Red、B_Eosin,green、及びB_Eosin,blueは、赤色、緑色、及び青色それぞれの光についてのエオシンの吸光度であり、I_nuclearは細胞核又は細胞核成分に対する発色特異性を有する前記造影剤の強度であり、I_secondaryは前記補完的な造影源の強度であり、kは任意のスケール定数である。)
を使用した、前記連続的な画像に対する仮想透過照明顕微観察処理のためのコンピュータ実行可能な命令を含む装置。
[態様26]
態様2に記載の装置において、前記組織検体の前記合成表示画像が、前記主撮像システムにより取得される前記連続的な画像からの各画像に対して、
前記連続的な画像からの前記画像の表示画像、及び
前記連続的な画像からの前記画像が取得された前記検体ホルダ上の位置を示す前記補助画像のサブ領域を有する補助画像の表示画像であって、前記補助画像の前記サブ領域が、前記1つ以上の位置センサからの1つ以上の検体ホルダ位置を使用して計算される表示画像を含む装置。
[態様27]
態様1〜26のいずれか一項に記載の装置と、
前記主撮像システムにより発光される光を吸収する主蛍光核造影剤とを含み、
前記主蛍光核造影剤の蛍光発光波長は、前記分光チャネルの少なくとも1つに対応するキット。
[態様28]
態様27に記載の装置において、前記主蛍光核造影剤の前記蛍光発光波長とは異なる蛍光発光波長を有する二次蛍光造影剤を更に含み、
前記二次蛍光造影剤が、細胞質、間質、コラーゲン、又は筋肉から選択される構造に対する発色特異性を有する装置。
[態様29]
態様28に記載の装置において、前記二次蛍光造影剤がエオシン−Yである装置。
[態様30]
態様28に記載の装置において、前記主蛍光造影剤又は前記二次蛍光造影剤のうちの少なくとも一方が可溶性である流体媒体を更に含む装置。
[態様31]
態様27に記載の装置において、前記装置が、識別子リーダを更に含み、前記キットが、識別子を更に含む装置。
[態様32]
組織検体をリアルタイム光学撮像する方法であって、
1つ以上の蛍光造影剤を組織検体に適用するステップであって、前記1つ以上の蛍光造影剤の少なくとも1つは核造影剤である、ステップと、
装置を提供するステップであって、当該装置は
照明光源を使用して、1つ以上の分光チャネルを通して、組織検体の画像を取得するように構成されている主撮像システムであって、前記1つ以上の分光チャネルのうちの少なくとも1つは、前記照明光源の波長とは異なる範囲の波長を検出するように構成されており、前記主撮像システムは、フレーム取得速度を有する倒立顕微鏡であり、光学的深部断面可視化を実行するように構成されており、前記主撮像システムは、連続的な画像を取得するように構成されている主撮像システムと、
補助撮像システムであって、前記補助撮像システムは、前記組織検体の補助画像を取得するように構成されており、前記補助画像の領域は、前記主撮像システムにより取得された前記連続的な画像の各画像の領域より大きい補助撮像システムと、
内部に透明窓を有する検体ホルダであって、前記検体ホルダは、前記主撮像システムの焦点面に一致する検体面に配設され、前記検体ホルダは、前記透明窓上に前記組織検体を保持するように構成されており、前記検体ホルダは、1つ以上の位置センサを含み、前記検体ホルダは、前記検体面において移動可能なように構成されており、前記1つ以上の位置センサは、検体ホルダ位置を測定するように構成されており、前記検体ホルダは、前記補助撮像システムの焦点面に対して移動可能なように構成されている検体ホルダと、
ユーザ入力を受け取るように構成されているユーザ入力装置であって、前記検体ホルダは、前記ユーザ入力に応じてリアルタイムに移動するように構成されているユーザ入力装置と、
前記主撮像システム、前記補助撮像システム、及び前記位置センサと電気的に通信する処理装置であって、前記処理装置は、前記主撮像システムにより取得される前記連続的な画像、前記補助画像、及び少なくとも1つの検体ホルダ位置に対して一連の命令を実行して、細胞核の表示画像を形成し、前記組織検体の合成表示画像を生成するように構成されている処理装置と、
前記処理装置と電気的に通信している表示装置であって、前記表示装置は、前記組織検体の前記合成表示画像をリアルタイムに表示するように構成されている表示装置とを備えているステップと、
前記組織検体を、前記検体ホルダに載置するステップと、
前記検体ホルダを、前記補助撮像システムの前記焦点面に位置合わせするステップと、
前記補助撮像システムに、前記補助画像を取得させるステップと、
前記検体ホルダを、前記主撮像システムの前記焦点面に位置合わせするステップと、
前記主撮像システムに、前記連続的な画像を取得させるステップと、
処理装置に、前記組織検体内の細胞核を検出させ、前記組織検体の合成表示画像を生成させるステップと、
前記表示装置に、前記組織検体の前記合成表示画像をリアルタイムに表示させるステップと、
前記検体ホルダに、前記ユーザ入力装置を使用して、前記検体面において移動させるステップと、
を含む方法。
[態様33]
態様32に記載の方法において、前記連続的な画像を取得することが、多光子、共焦点、光シート、紫外表面励起、又は構造化照明顕微観察を使用することを含む方法。
[態様34]
態様32に記載の方法において、前記主撮像システムが、スキャンされる領域を変えることにより倍率を調節するように構成されており、前記方法が、前記主撮像システムの倍率を調節することを更に含む方法。
[態様35]
態様32に記載の方法において、前記主撮像システムにより取得される前記連続的な画像の各画像が、2つ以上の分光チャネルを通して取得され、
前記2つ以上の分光チャネルのうちの少なくとも1つが、前記核造影剤により発光される光を検出し、前記2つ以上の分光チャネルのうちの少なくとも1つが、補完的な造影源から発光する光を検出する方法。
[態様36]
態様32に記載の方法において、前記核造影剤が、急速拡散剤である方法。
[態様37]
態様32に記載の方法において、前記核造影剤が、細胞核と会合することにより蛍光発光が増大する剤である方法。
[態様38]
態様32に記載の方法において、前記検体ホルダが、取り外し可能な窓を含み、前記方法が、
前記透明窓を前記検体ホルダから取り外すステップと、
1つ以上の組織検体を前記透明窓上に載置するステップと、
前記透明窓を前記検体ホルダに戻すように挿入するステップと、
を更に含む方法。
[態様39]
態様32に記載の方法において、前記検体ホルダが、2つ以上の組織検体を隔離するように構成されている検体仕切りを含む方法。
[態様40]
態様32に記載の方法において、前記検体ホルダが、蓋を含み、前記方法が、前記組織検体を前記蓋により覆うことを更に含む方法。
[態様41]
態様40に記載の方法において、前記蓋が、検体ガイドを含み、前記方法が、前記組織検体を前記透明窓に対して、前記検体ガイドを使用して圧迫することを更に含む方法。
[態様42]
態様32に記載の方法において、医療的処置の間に作製される前記組織検体における手術用インク、縫合糸、又は外在性マークを、前記補助画像を使用して特定することを更に含む方法。
[態様43]
態様42に記載の方法において、前記主撮像システムにより取得される前記連続的な画像のうちの任意の1つにおける選択位置と、前記組織検体における前記手術用インク、縫合糸、又は外在性マークとの間の距離を、前記補助画像の表示画像を使用して測定することを更に含む方法。
[態様44]
態様42に記載の方法において、前記組織検体を、狭帯域照明により照明することと、手術用インク、縫合糸、又は外在性マークを、既知の吸収スペクトルから特定することとを更に含む方法。
[態様45]
態様42に記載の方法において、前記組織検体を、前記照明光源により透過照明することと、手術用インク、縫合糸、又は外在性マークを特定することとを更に含む方法。
[態様46]
態様32に記載の方法において、前記処理装置に、前記主撮像システムにより取得される前記連続的な画像、前記検体ホルダ位置、前記補助画像、又は前記合成表示画像のうちの少なくとも1つを記録させることを更に含む方法。
[態様47]
態様32に記載の方法において、グラフィック処理装置に、前記連続的な画像に対する一連の並列処理動作のためのコンピュータ実行可能な命令を実行させることを更に含む方法。
[態様48]
態様47に記載の方法において、前記グラフィック処理装置が、仮想透過照明顕微観察処理のための一連の並列処理動作のためのコンピュータ実行可能な命令を含む方法。
[態様49]
態様32に記載の方法において、前記処理装置に、前記組織検体の前記合成表示画像を生成させることを更に含み、前記合成表示画像が、前記主撮像システムにより取得される前記連続的な画像からの各画像に対して、
前記連続的な画像からの前記画像の表示画像、及び
前記連続的な画像からの前記画像が取得された前記検体ホルダ上の位置を示す前記補助画像のサブ領域を有する前記補助画像の表示画像であって、前記補助画像の前記サブ領域が、1つ以上の検体ホルダ位置を使用して計算される表示画像を含む方法。
[態様50]
底壁及び検体保持構造を有する開口端容器と、
前記開口端容器を閉じるように構成された検体カバーと、
前記開口端容器及び前記検体カバーを連結するように構成された検体カバーコネクタと、
透明窓と、
前記底壁又は前記検体カバーと前記透明窓とを連結するように構成された透明窓コネクタと、
前記開口端容器、前記透明窓、又は前記検体カバーの1つまたは複数における複数の穿孔と、
を備える、組織学用検体カセット装置。
[態様51]
態様50に記載の装置において、前記検体カバーコネクタが、ノッチ、タブ、ヒンジ、又は磁石の1つまたは複数である装置。
[態様52]
態様50に記載の装置において、前記検体保持構造が、外側表面を有する傾斜壁を備える装置。
[態様53]
態様50に記載の装置において、前記透明窓が、ガラス、溶融水晶、シリカ、又はフッ化カルシウムを含む装置。
[態様54]
態様50に記載の装置において、前記透明窓が、透明なプラスチックを含む装置。
[態様55]
態様50に記載の装置において、前記透明窓コネクタが、キシレン、アルデヒド、及びアルコールに耐性を有する装置。
[態様56]
態様50に記載の装置において、前記透明窓コネクタが、耐溶媒性接着剤を含む装置。
[態様57]
態様50に記載の装置において、前記透明窓コネクタが、組織学用処理溶媒に耐性を有する装置。
Claims (34)
- 組織検体のリアルタイム光学撮像のための装置であって、
照明光源を使用して、1つ以上の分光チャネルを通して、組織検体の画像を取得するように構成されている主撮像システムであって、前記1つ以上の分光チャネルのうちの少なくとも1つは、前記照明光源の波長範囲とは異なる波長範囲を検出するように構成されており、前記主撮像システムは、フレーム取得速度を有する倒立顕微鏡であり、光学的深部断面可視化を実行するように構成されており、前記主撮像システムは、連続的な画像を取得するように構成されている主撮像システムと、
補助撮像システムであって、前記補助撮像システムは、前記組織検体の補助画像を取得するように構成されており、前記補助画像の領域は、前記主撮像システムにより取得された前記連続的な画像の各画像の領域より大きい補助撮像システムと、
前記組織検体の組織特徴を識別するための、前記補助撮像システム専用に設けられた照明器と、
前記補助撮像システムに設けられた、2つ以上の分光チャネルと、
内部に透明窓を有する検体ホルダであって、前記検体ホルダは、前記主撮像システムの焦点面に一致する検体面に配設され、前記検体ホルダは、前記透明窓上に前記組織検体を保持するように構成されており、前記検体ホルダは、1つ以上の位置センサを含み、前記検体ホルダは、前記検体面において移動可能なように構成されており、前記1つ以上の位置センサは、検体ホルダ位置を測定するように構成されており、前記検体ホルダは、前記補助撮像システムの焦点面に対して移動可能なように構成されている検体ホルダと、
を備える装置であって、
前記主撮像システムと前記補助撮像システムとは、前記検体面に対して同一側に配置されており、
当該装置は、さらに、
ユーザ入力を受け取るように構成されているユーザ入力装置であって、前記検体ホルダは、前記ユーザ入力に応じてリアルタイムに移動するように構成されているユーザ入力装置と、
前記主撮像システム、前記補助撮像システム、及び前記位置センサと電気的に通信する処理装置であって、前記処理装置は、前記主撮像システムにより取得される前記連続的な画像、前記補助画像、及び少なくとも1つの検体ホルダ位置に対して一連の命令を実行して、前記検体中の細胞核の表示画像を含む前記組織検体の合成表示画像を生成するように構成されている処理装置と、
前記処理装置と電気的に通信する表示装置であって、前記組織検体の前記合成表示画像をリアルタイムに表示するように構成されている表示装置と、
を備える装置。 - 請求項1に記載の装置において、前記細胞核の表示画像が、従来の透過照明顕微観察に存在する診断的特徴をコンピュータを用いて再現することにより仮想画像を生成する仮想透過照明顕微観察によって生成される表示画像を含む装置。
- 請求項2に記載の装置において、前記主撮像システムが、多光子、共焦点、光シート、紫外表面励起、又は構造化照明顕微鏡である装置。
- 請求項2に記載の装置において、前記主撮像システムにより取得される前記連続的な画像の各画像が、2つ以上の分光チャネルを通して取得され、
前記2つ以上の分光チャネルのうちの少なくとも1つが、核造影剤により発光される光を検出するように構成されており、前記2つ以上の分光チャネルのうちの少なくとも1つが、補完的な造影源から発光される光を検出するように構成されている装置。 - 請求項2に記載の装置において、前記検体ホルダが、前記検体ホルダの移動のための1つ以上のアクチュエータを更に備える装置。
- 請求項2に記載の装置において、前記ユーザ入力装置が、前記ユーザから前記検体ホルダへ力を伝達して前記検体ホルダを移動させる機械的伝達装置を含む装置。
- 請求項1に記載の装置において、前記処理装置が、前記補助撮像システムの前記2つ以上の分光チャネルを比較して、前記組織検体における手術用インク、縫合糸、又は外在性マークの位置を特定するように構成されており、
さらに、選択的に、前記組織検体の前記合成表示画像は、前記組織検体における前記手術用インク、縫合糸、又は外在性マークの1つ以上の位置を含む装置。 - 請求項2に記載の装置において、前記補助撮像システムが、狭帯域照明器を備える装置。
- 請求項2に記載の装置において、前記検体ホルダが、取り外し可能な透明窓を更に備え、
さらに、選択的に、前記取り外し可能な透明窓が、前記透明窓を囲む流体保持構造を含む装置。 - 請求項2に記載の装置において、前記検体ホルダが、蓋を更に備え、
さらに、選択的に、前記蓋が、前記組織検体を前記透明窓に対して保持するように構成された検体ガイドを更に備える装置。
- 請求項2に記載の装置において、前記処理装置が、並列処理のためのハードウェアを有するグラフィック処理装置を更に備え、更に、前記グラフィック処理装置が、前記主撮像システムにより取得される前記連続的な画像に対する一連の並列処理動作のためのコンピュータ実行可能な命令を含む装置。
- 請求項2に記載の装置において、前記処理装置が、前記検体ホルダの250ミリ秒未満の移動後に、前記組織検体の合成表示画像を更新するように構成されている装置。
- 請求項11に記載の装置において、前記グラフィック処理装置が、仮想透過照明顕微観察処理のための一連の並列処理動作のためのコンピュータ実行可能な命令を含む装置。
- 請求項4に記載の装置において、前記処理装置が、以下の非線形プロセス:
R=(1/(1−exp(−k))^2)*(exp(−B_Hematoxylin,Red*I_nuclear*k)−exp(−k))*(exp(−B_Eosin,Red*I_secondary*k)−exp(−k))
G=(1/(1−exp(−k))^2)*(exp(−B_Hematoxylin,green*I_nuclear*k)−exp(−k))*(exp(−B_Eosin,green*I_secondary*k)−exp(−k))
B=(1/(1−exp(−k))^2)*(exp(−B_Hematoxylin,blue*I_nuclear*k)−exp(−k))*(exp(−B_Eosin,blue*I_secondary*k)−exp(−k))
(式中、R、G、及びBは、それぞれ、前記仮想透過照明画像の赤色、緑色、及び青色の強度であり、B_Hematoxylin,Red、B_Hematoxylin,green、及びB_Hematoxylin,blueは、赤色、緑色、及び青色それぞれの光についてのヘマトキシリンの吸光度であり、B_Eosin,Red、B_Eosin,green、及びB_Eosin,blueは、赤色、緑色、及び青色それぞれの光についてのエオシンの吸光度であり、I_nuclearは細胞核又は細胞核成分に対する発色特異性を有する前記造影剤の強度であり、I_secondaryは前記補完的な造影源の強度であり、kは任意のスケール定数である。)
を使用した、前記連続的な画像に対する仮想透過照明顕微観察処理のためのコンピュータ実行可能な命令を含む装置。 - 請求項2に記載の装置において、前記組織検体の前記合成表示画像が、前記主撮像システムにより取得される前記連続的な画像からの各画像に対して、
前記連続的な画像からの前記画像の表示画像、及び
前記連続的な画像からの前記画像が取得された前記検体ホルダ上の位置を示す前記補助画像のサブ領域を有する補助画像の表示画像であって、前記補助画像の前記サブ領域が、前記1つ以上の位置センサからの1つ以上の検体ホルダ位置を使用して計算される表示画像を含む装置。 - 請求項1〜15のいずれか一項に記載の装置と、
前記主撮像システムにより発光される光を吸収する主蛍光核造影剤とを含み、
前記主蛍光核造影剤の蛍光発光波長は、前記分光チャネルの少なくとも1つに対応するキット。 - 請求項16に記載のキットにおいて、前記主蛍光核造影剤の前記蛍光発光波長とは異なる蛍光発光波長を有する二次蛍光造影剤を更に含み、
前記二次蛍光造影剤が、細胞質、間質、コラーゲン、又は筋肉から選択される構造に対する発色特異性を有するキット。 - 請求項17に記載のキットにおいて、前記主蛍光造影剤又は前記二次蛍光造影剤のうちの少なくとも一方が可溶性である流体媒体を更に含むキット。
- 請求項16に記載のキットにおいて、前記装置が、識別子リーダを更に含み、前記キットが、識別子を更に含むキット。
- 組織検体をリアルタイム光学撮像する方法であって、
1つ以上の蛍光造影剤を組織検体に適用するステップであって、前記1つ以上の蛍光造影剤の少なくとも1つは核造影剤である、ステップと、
装置を提供するステップであって、当該装置は
照明光源を使用して、1つ以上の分光チャネルを通して、組織検体の画像を取得するように構成されている主撮像システムであって、前記1つ以上の分光チャネルのうちの少なくとも1つは、前記照明光源の波長とは異なる範囲の波長を検出するように構成されており、前記主撮像システムは、フレーム取得速度を有する倒立顕微鏡であり、光学的深部断面可視化を実行するように構成されており、前記主撮像システムは、連続的な画像を取得するように構成されている主撮像システムと、
補助撮像システムであって、前記補助撮像システムは、前記組織検体の補助画像を取得するように構成されており、前記補助画像の領域は、前記主撮像システムにより取得された前記連続的な画像の各画像の領域より大きい補助撮像システムと、
前記組織検体の組織特徴を識別するための、前記補助撮像システム専用に設けられた照明器と、
前記補助撮像システムに設けられた、2つ以上の分光チャネルと、
内部に透明窓を有する検体ホルダであって、前記検体ホルダは、前記主撮像システムの焦点面に一致する検体面に配設され、前記検体ホルダは、前記透明窓上に前記組織検体を保持するように構成されており、前記検体ホルダは、1つ以上の位置センサを含み、前記検体ホルダは、前記検体面において移動可能なように構成されており、前記1つ以上の位置センサは、検体ホルダ位置を測定するように構成されており、前記検体ホルダは、前記補助撮像システムの焦点面に対して移動可能なように構成されている検体ホルダと、
を備える装置であって、
前記主撮像システムと前記補助撮像システムとは、前記検体面に対して同一側に配置されており、
当該装置は、さらに、
ユーザ入力を受け取るように構成されているユーザ入力装置であって、前記検体ホルダは、前記ユーザ入力に応じてリアルタイムに移動するように構成されているユーザ入力装置と、
前記主撮像システム、前記補助撮像システム、及び前記位置センサと電気的に通信する処理装置であって、前記処理装置は、前記主撮像システムにより取得される前記連続的な画像、前記補助画像、及び少なくとも1つの検体ホルダ位置に対して一連の命令を実行して、細胞核の表示画像を形成し、前記組織検体の合成表示画像を生成するように構成されている処理装置と、
前記処理装置と電気的に通信している表示装置であって、前記表示装置は、前記組織検体の前記合成表示画像をリアルタイムに表示するように構成されている表示装置とを備えているステップと、
前記組織検体を、前記検体ホルダに載置するステップと、
前記検体ホルダを、前記補助撮像システムの前記焦点面に位置合わせするステップと、
前記補助撮像システムに、前記補助画像を取得させるステップと、
前記検体ホルダを、前記主撮像システムの前記焦点面に位置合わせするステップと、
前記主撮像システムに、前記連続的な画像を取得させるステップと、
処理装置に、前記組織検体内の細胞核を検出させ、前記組織検体の合成表示画像を生成させるステップと、
前記表示装置に、前記組織検体の前記合成表示画像をリアルタイムに表示させるステップと、
前記検体ホルダに、前記ユーザ入力装置を使用して、前記検体面において移動させるステップと、
を含む方法。 - 請求項20に記載の方法において、前記連続的な画像を取得することが、多光子、共焦点、光シート、紫外表面励起、又は構造化照明顕微観察を使用することを含む方法。
- 請求項20に記載の方法において、前記主撮像システムが、スキャンされる領域を変えることにより倍率を調節するように構成されており、前記方法が、前記主撮像システムの倍率を調節することを更に含む方法。
- 請求項20に記載の方法において、前記主撮像システムにより取得される前記連続的な画像の各画像が、2つ以上の分光チャネルを通して取得され、
前記2つ以上の分光チャネルのうちの少なくとも1つが、前記核造影剤により発光される光を検出し、前記2つ以上の分光チャネルのうちの少なくとも1つが、補完的な造影源から発光する光を検出する方法。 - 請求項20に記載の方法において、前記核造影剤が、急速拡散剤である方法。
- 請求項20に記載の方法において、前記核造影剤が、細胞核と会合することにより蛍光発光が増大する剤である方法。
- 請求項20に記載の方法において、前記検体ホルダが、取り外し可能な窓を含み、前記方法が、
前記透明窓を前記検体ホルダから取り外すステップと、
1つ以上の組織検体を前記透明窓上に載置するステップと、
前記透明窓を前記検体ホルダに戻すように挿入するステップと、
を更に含む方法。 - 請求項20に記載の方法において、前記検体ホルダが、蓋を含み、前記方法が、前記組織検体を前記蓋により覆うことを更に含み、
さらに、選択的に、前記蓋が、検体ガイドを含み、前記方法が、前記組織検体を前記透明窓に対して、前記検体ガイドを使用して圧迫することを更に含む方法。 - 請求項20に記載の方法において、医療的処置の間に作製される前記組織検体における手術用インク、縫合糸、又は外在性マークを、前記補助画像を使用して特定することを更に含む方法。
- 請求項28に記載の方法において、前記主撮像システムにより取得される前記連続的な画像のうちの任意の1つにおける選択位置と、前記組織検体における前記手術用インク、縫合糸、又は外在性マークとの間の距離を、前記補助画像の表示画像を使用して測定することを更に含む方法。
- 請求項28に記載の方法において、前記組織検体を、狭帯域照明により照明することと、手術用インク、縫合糸、又は外在性マークを、既知の吸収スペクトルから特定することとを更に含む方法。
- 請求項20に記載の方法において、前記処理装置に、前記主撮像システムにより取得される前記連続的な画像、前記検体ホルダ位置、前記補助画像、又は前記合成表示画像のうちの少なくとも1つを記録させることを更に含む方法。
- 請求項20に記載の方法において、グラフィック処理装置に、前記連続的な画像に対する一連の並列処理動作のためのコンピュータ実行可能な命令を実行させることを更に含む方法。
- 請求項32に記載の方法において、前記グラフィック処理装置が、仮想透過照明顕微観察処理のための一連の並列処理動作のためのコンピュータ実行可能な命令を含む方法。
- 請求項20に記載の方法において、前記処理装置に、前記組織検体の前記合成表示画像を生成させることを更に含み、前記合成表示画像が、前記主撮像システムにより取得される前記連続的な画像からの各画像に対して、
前記連続的な画像からの前記画像の表示画像、及び
前記連続的な画像からの前記画像が取得された前記検体ホルダ上の位置を示す前記補助画像のサブ領域を有する前記補助画像の表示画像であって、前記補助画像の前記サブ領域が、1つ以上の検体ホルダ位置を使用して計算される表示画像を含む方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662294473P | 2016-02-12 | 2016-02-12 | |
US62/294,473 | 2016-02-12 | ||
PCT/US2017/017478 WO2017139649A2 (en) | 2016-02-12 | 2017-02-10 | Method and apparatus for imaging unsectioned tissue speciments |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2019511736A JP2019511736A (ja) | 2019-04-25 |
JP2019511736A5 JP2019511736A5 (ja) | 2020-03-19 |
JP6961603B2 true JP6961603B2 (ja) | 2021-11-05 |
Family
ID=58228554
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018542183A Active JP6961603B2 (ja) | 2016-02-12 | 2017-02-10 | 切断されていない組織検体を撮像するための方法及び装置 |
Country Status (5)
Country | Link |
---|---|
US (2) | US10416434B2 (ja) |
EP (1) | EP3414553B1 (ja) |
JP (1) | JP6961603B2 (ja) |
CN (1) | CN109154569A (ja) |
WO (1) | WO2017139649A2 (ja) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016109355A1 (en) | 2014-12-23 | 2016-07-07 | Bribbla Dynamics Llc | Optical inspection system and method including accounting for variations of optical path length within a sample |
EP4148416A1 (en) | 2015-09-01 | 2023-03-15 | Apple Inc. | System for taking a measurement and method for taking a measurement of a sample using a device |
JP6961603B2 (ja) | 2016-02-12 | 2021-11-05 | マサチューセッツ インスティテュート オブ テクノロジー | 切断されていない組織検体を撮像するための方法及び装置 |
KR102272877B1 (ko) | 2016-04-21 | 2021-07-05 | 애플 인크. | 레퍼런스 스위칭을 위한 광학 시스템 |
CN116893160A (zh) * | 2017-09-29 | 2023-10-17 | 苹果公司 | 路径解析的光学采样架构 |
CN112041655B (zh) * | 2018-01-26 | 2024-09-10 | 罗切斯特大学 | 用于生物学表面的紫外激发显微术的方法 |
EP3752873A1 (en) | 2018-02-13 | 2020-12-23 | Apple Inc. | Integrated photonics device having integrated edge outcouplers |
JP2019159031A (ja) * | 2018-03-12 | 2019-09-19 | オリンパス株式会社 | 細胞観察装置、細胞観察方法 |
JP7377215B2 (ja) * | 2018-04-27 | 2023-11-09 | ベクトン・ディキンソン・アンド・カンパニー | 粒子分析器画像の画像制御および表示のための方法および装置 |
US10740949B2 (en) * | 2018-09-18 | 2020-08-11 | Microsoft Technology Licensing, Llc | Multi-spectral rendering for synthetics |
US20200137380A1 (en) * | 2018-10-31 | 2020-04-30 | Intel Corporation | Multi-plane display image synthesis mechanism |
JP7482894B2 (ja) * | 2019-04-12 | 2024-05-14 | インベニオ イメージング、インコーポレイテッド | 組織における術中造影剤の検出のための撮像システム |
US11500154B1 (en) | 2019-10-18 | 2022-11-15 | Apple Inc. | Asymmetric optical power splitting system and method |
US11545055B2 (en) * | 2019-11-26 | 2023-01-03 | Samuel Castillo | Apparatus and methodology for customizing vehicle signage |
DE102019133457A1 (de) * | 2019-12-06 | 2021-06-10 | Thomas Märsch | Mehrfachkassette zum Einlegen von Gewebeproben und Verfahren zum Handhaben von Gewebeproben |
FR3107063B1 (fr) * | 2020-02-11 | 2022-01-14 | Pera Pellenc Sa | Procédé et équipement pour la préparation d'un produit alimentaire, notamment à base de baies |
EP4176304A1 (en) | 2020-09-09 | 2023-05-10 | Apple Inc. | Optical system for noise mitigation |
CN112285090A (zh) * | 2020-09-29 | 2021-01-29 | 军事科学院系统工程研究院卫勤保障技术研究所 | 一种便携式共焦单细胞拉曼散射检测系统 |
US11703791B2 (en) * | 2020-12-01 | 2023-07-18 | Eastman Kodak Company | Method for correcting media position errors in a printing system |
US20220284603A1 (en) * | 2021-03-04 | 2022-09-08 | Cytoveris Inc. | System and Method for Producing an Image-based Registration of Surgically Excised Tissue Specimens |
KR20220150547A (ko) * | 2021-05-04 | 2022-11-11 | 주식회사 피직스랩코리아 | 공초점 센싱 시스템 |
US20240085284A1 (en) * | 2022-01-14 | 2024-03-14 | KUB Technologies Inc. | System and method for a specimen container for use in cabinet x-ray systems |
WO2024009204A1 (en) * | 2022-07-04 | 2024-01-11 | Leica Instruments (Singapore) Pte. Ltd. | Controller for a surgical microscope and method |
WO2024025891A1 (en) * | 2022-07-25 | 2024-02-01 | The Johns Hopkins University | System for simultaneous contractile force and calcium/voltage transient measurement of engineered tissue |
Family Cites Families (42)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0390845A (ja) * | 1989-09-01 | 1991-04-16 | Hitachi Ltd | 表面分析方法およびその装置 |
JPH0734012B2 (ja) * | 1991-02-27 | 1995-04-12 | 東亜医用電子株式会社 | フローイメージサイトメータ |
JP3121849B2 (ja) * | 1991-02-27 | 2001-01-09 | シスメックス株式会社 | フローイメージサイトメータ |
US6025917A (en) * | 1996-09-24 | 2000-02-15 | Laboratory Of Molecular Biophotonics | Polarization characteristic measuring method and apparatus |
JP3917731B2 (ja) * | 1996-11-21 | 2007-05-23 | オリンパス株式会社 | レーザ走査顕微鏡 |
JP3735190B2 (ja) * | 1997-10-28 | 2006-01-18 | オリンパス株式会社 | 走査型サイトメータ |
EP1161702B1 (en) * | 1999-02-17 | 2014-07-23 | Lucid, Inc. | Tissue specimen holder |
US20020138008A1 (en) * | 2000-01-13 | 2002-09-26 | Kazuhiro Tsujita | Method and apparatus for displaying fluorescence images and method and apparatus for acquiring endoscope images |
DE10156695B4 (de) * | 2001-11-17 | 2004-07-15 | Leica Microsystems Heidelberg Gmbh | Scanmikroskop, Verfahren zur Scanmikroskopie und Bandpassfilter |
DE10206979A1 (de) * | 2002-02-20 | 2003-08-21 | Leica Microsystems | Verfahren zum Benutzertraining für ein Scanmikroskop, Scanmikroskop und Software zum Benutzertraining für ein Scanmikroskop |
US20050008253A1 (en) * | 2003-07-10 | 2005-01-13 | Joseph Rozgonyi | Method and apparatus for eliminating irrelevant luminescent signals |
JP5461753B2 (ja) * | 2004-07-30 | 2014-04-02 | オリンパス株式会社 | 内視鏡装置 |
US20070070349A1 (en) * | 2005-09-23 | 2007-03-29 | Helicos Biosciences Corporation | Optical train and method for TIRF single molecule detection and analysis |
US20060134004A1 (en) * | 2004-12-21 | 2006-06-22 | The University Of Utah | Methods and apparatus for detection of carotenoids in macular tissue |
EP1691189A3 (en) * | 2005-02-14 | 2010-12-01 | Kabushiki Kaisha Kobe Seiko Sho (Kobe Steel, Ltd.) | Photothermal conversion measurement apparatus, photothermal conversion measurement method, and sample cell |
EP3203235A1 (en) * | 2005-05-23 | 2017-08-09 | Harald F. Hess | Optical microscopy with phototransformable optical labels |
US7706060B2 (en) * | 2005-09-26 | 2010-04-27 | National University Corporation Hamamatsu University School Of Medicine | Microscopic cell observation and inspection system using a plurality of observation methods |
US20100219353A1 (en) * | 2005-12-27 | 2010-09-02 | Olympus Corporation | Apparatus and method of acquiring images of a sample of biological origin |
US7498551B2 (en) * | 2006-10-06 | 2009-03-03 | Los Alamos National Security, Llc | Apparatus and method for tracking a molecule or particle in three dimensions |
WO2009115108A1 (en) * | 2008-03-19 | 2009-09-24 | Ruprecht-Karls-Universität Heidelberg | A method and an apparatus for localization of single dye molecules in the fluorescent microscopy |
WO2011033013A1 (de) * | 2009-09-17 | 2011-03-24 | Roche Diagnostics Gmbh | Hochdichte barcodes für medizinische verbrauchsartikel |
JP2011115556A (ja) * | 2009-10-29 | 2011-06-16 | Konan Medical Inc | 移植用角膜観察システム |
JP5498129B2 (ja) * | 2009-11-09 | 2014-05-21 | オリンパス株式会社 | バーチャル顕微鏡システム |
JP5490568B2 (ja) * | 2010-02-26 | 2014-05-14 | オリンパス株式会社 | 顕微鏡システム、標本観察方法およびプログラム |
JP5459399B2 (ja) * | 2010-06-03 | 2014-04-02 | 株式会社ニコン | 顕微鏡装置 |
JP5555061B2 (ja) * | 2010-06-09 | 2014-07-23 | オリンパス株式会社 | 観察装置および観察方法 |
US9946058B2 (en) * | 2010-06-11 | 2018-04-17 | Nikon Corporation | Microscope apparatus and observation method |
WO2012029817A1 (ja) * | 2010-08-30 | 2012-03-08 | 三洋電機株式会社 | 観察装置、観察プログラム及び観察システム |
DE102011002990B4 (de) * | 2011-01-21 | 2014-02-27 | Carl Zeiss Meditec Ag | Visualisieren von Gewebe in einem Operationsbereich |
EP2668465A1 (en) * | 2011-01-25 | 2013-12-04 | Massachusetts Institute Of Technology | Single-shot full-field reflection phase microscopy |
US9134241B2 (en) * | 2011-04-11 | 2015-09-15 | Li-Cor, Inc. | Differential scan imaging systems and methods |
DE102012201003B4 (de) * | 2012-01-24 | 2024-07-25 | Carl Zeiss Microscopy Gmbh | Mikroskop und Verfahren für die hochauflösende 3-D Fluoreszenzmikroskopie |
DE102012102983A1 (de) * | 2012-04-05 | 2013-10-10 | Carl Zeiss Microscopy Gmbh | Verfahren und Vorrichtung zum Bestimmen eines kritischen Winkels eines Anregungslichtstrahls |
US8785885B1 (en) * | 2013-01-30 | 2014-07-22 | Omnivision Technologies, Inc. | Fluorescence imaging module |
DE102013103971A1 (de) * | 2013-04-19 | 2014-11-06 | Sensovation Ag | Verfahren zum Erzeugen eines aus mehreren Teilbildern zusammengesetzten Gesamtbilds eines Objekts |
EP2992377B1 (en) * | 2013-05-01 | 2021-01-06 | Bio-Rad Laboratories, Inc. | Adjustable digital microscope display |
JP6416887B2 (ja) * | 2013-05-15 | 2018-10-31 | ジ アドミニストレーターズ オブ ザ テュレーン エデュケーショナル ファンド | 構造化照明を用いた組織試料の顕微鏡観察 |
TWI493171B (zh) * | 2013-06-27 | 2015-07-21 | Univ China Medical | System and method for analyzing tissue cells by using hyperspectral image |
JP2015099104A (ja) * | 2013-11-19 | 2015-05-28 | ソニー株式会社 | 画像処理装置および画像処理方法 |
US10507059B2 (en) * | 2014-07-03 | 2019-12-17 | Zhenhua LAI | Melanin ablation guided by stepwise multi-photon activated fluorescence |
WO2016157346A1 (ja) * | 2015-03-27 | 2016-10-06 | 株式会社ニコン | 顕微鏡装置、観察方法、及び制御プログラム |
JP6961603B2 (ja) | 2016-02-12 | 2021-11-05 | マサチューセッツ インスティテュート オブ テクノロジー | 切断されていない組織検体を撮像するための方法及び装置 |
-
2017
- 2017-02-10 JP JP2018542183A patent/JP6961603B2/ja active Active
- 2017-02-10 EP EP17708916.6A patent/EP3414553B1/en active Active
- 2017-02-10 CN CN201780018633.7A patent/CN109154569A/zh active Pending
- 2017-02-10 WO PCT/US2017/017478 patent/WO2017139649A2/en active Application Filing
-
2018
- 2018-01-26 US US15/881,224 patent/US10416434B2/en active Active
-
2019
- 2019-08-05 US US16/531,714 patent/US10642019B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP3414553A2 (en) | 2018-12-19 |
WO2017139649A2 (en) | 2017-08-17 |
US20180259762A1 (en) | 2018-09-13 |
EP3414553B1 (en) | 2022-09-28 |
US10642019B2 (en) | 2020-05-05 |
JP2019511736A (ja) | 2019-04-25 |
WO2017139649A3 (en) | 2017-09-21 |
US20190377170A1 (en) | 2019-12-12 |
US10416434B2 (en) | 2019-09-17 |
CN109154569A (zh) | 2019-01-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6961603B2 (ja) | 切断されていない組織検体を撮像するための方法及び装置 | |
JP6775492B2 (ja) | 蛍光剤による染色後に紫外線励起を利用した蛍光顕微鏡検査によって組織内の撮像深度を制御するシステムおよび方法 | |
US9964489B2 (en) | System and method for controlling depth of imaging in tissues using fluorescence microscopy under ultraviolet excitation following staining with fluorescing agents | |
JP5540102B2 (ja) | 高められた病理学的決定のための複数モダリティコントラストおよび明視野コンテキスト表現、および組織内の複数検体検出 | |
JP2019511736A5 (ja) | ||
CN102892348B (zh) | 多光谱光子成像的方法和装置 | |
ES2772073T3 (es) | Microscopía confocal rápida para apoyar procedimientos quirúrgicos | |
EP2176647B1 (en) | Method and system for imaging samples | |
Giacomelli et al. | Multiscale nonlinear microscopy and widefield white light imaging enables rapid histological imaging of surgical specimen margins | |
Yoshitake et al. | Direct comparison between confocal and multiphoton microscopy for rapid histopathological evaluation of unfixed human breast tissue | |
US11219370B2 (en) | Devices and methods for optical pathology | |
WO2010056945A2 (en) | Methods and systems for tissue processing and imaging | |
JP2020157076A (ja) | コヒーレントラマンイメージング用生検装置 | |
WO2018175565A1 (en) | System and method for controlling depth of imaging in tissues using fluorescence microscopy under ultraviolet excitation following staining with fluorescing agents | |
JP2018532132A (ja) | デジタル病理学システム | |
JP7565621B2 (ja) | 蛍光模倣明視野イメージング | |
KR20120016638A (ko) | 자외선 스캔 플래닝 방법 및 장치 | |
JP7231345B2 (ja) | 蛍光に基づく検知を使用する組織切片の調製 | |
Yoshitake | Nonlinear Microscopy System and Protocol for Rapid Evaluation of Freshly Excised Human Tissue | |
US20210325302A1 (en) | Determination of Margin in Freshly Resected Tissue Specimens Using Tumor Responsive Tissue Marking Dye | |
CN118591749A (zh) | 自动化样品分析中的表面感测 | |
WO2021096950A1 (en) | Cryostat or microtome with optical imaging detector |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200204 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200204 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210105 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201228 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210401 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210928 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211013 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6961603 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |