JP7237089B2 - MEDICAL DOCUMENT SUPPORT DEVICE, METHOD AND PROGRAM - Google Patents
MEDICAL DOCUMENT SUPPORT DEVICE, METHOD AND PROGRAM Download PDFInfo
- Publication number
- JP7237089B2 JP7237089B2 JP2020561180A JP2020561180A JP7237089B2 JP 7237089 B2 JP7237089 B2 JP 7237089B2 JP 2020561180 A JP2020561180 A JP 2020561180A JP 2020561180 A JP2020561180 A JP 2020561180A JP 7237089 B2 JP7237089 B2 JP 7237089B2
- Authority
- JP
- Japan
- Prior art keywords
- medical
- document
- image
- interpretation report
- medical document
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 23
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 230000002159 abnormal effect Effects 0.000 claims description 18
- 210000000988 bone and bone Anatomy 0.000 claims description 13
- 238000012790 confirmation Methods 0.000 claims description 10
- 230000004048 modification Effects 0.000 claims description 10
- 238000012986 modification Methods 0.000 claims description 10
- 210000004556 brain Anatomy 0.000 claims description 5
- 210000004072 lung Anatomy 0.000 claims description 4
- 238000002360 preparation method Methods 0.000 claims description 4
- 230000002123 temporal effect Effects 0.000 claims description 4
- 210000004185 liver Anatomy 0.000 claims description 3
- 238000012546 transfer Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 34
- 238000004458 analytical method Methods 0.000 description 32
- 238000004195 computer-aided diagnosis Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 14
- 238000003860 storage Methods 0.000 description 14
- 238000002591 computed tomography Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 10
- 238000003384 imaging method Methods 0.000 description 9
- 230000003902 lesion Effects 0.000 description 9
- 230000008859 change Effects 0.000 description 8
- 206010027476 Metastases Diseases 0.000 description 7
- 238000002595 magnetic resonance imaging Methods 0.000 description 7
- 230000009401 metastasis Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 6
- 210000003582 temporal bone Anatomy 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 238000013527 convolutional neural network Methods 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 3
- 238000003745 diagnosis Methods 0.000 description 3
- 230000002685 pulmonary effect Effects 0.000 description 3
- 238000012706 support-vector machine Methods 0.000 description 3
- 206010008111 Cerebral haemorrhage Diseases 0.000 description 2
- 206010008118 cerebral infarction Diseases 0.000 description 2
- 208000026106 cerebrovascular disease Diseases 0.000 description 2
- 210000000038 chest Anatomy 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 230000008595 infiltration Effects 0.000 description 2
- 238000001764 infiltration Methods 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 201000007270 liver cancer Diseases 0.000 description 2
- 208000014018 liver neoplasm Diseases 0.000 description 2
- 230000000010 osteolytic effect Effects 0.000 description 2
- 210000004224 pleura Anatomy 0.000 description 2
- 238000002600 positron emission tomography Methods 0.000 description 2
- 230000000306 recurrent effect Effects 0.000 description 2
- 210000000779 thoracic wall Anatomy 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 239000002872 contrast media Substances 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000007373 indentation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000001582 osteoblastic effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 210000000115 thoracic cavity Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Description
本開示は、読影レポート等の医療文書の作成を支援する医療文書作成支援装置、方法およびプログラムに関する。
The present disclosure relates to a medical document creation support device, method, and program for assisting creation of medical documents such as interpretation reports.
近年、CT(Computed Tomography)装置およびMRI(Magnetic Resonance Imaging)装置等の医療機器の進歩により、より質の高い高解像度の医用画像を用いての画像診断が可能となってきている。とくに、CT画像およびMRI画像等を用いた画像診断により、病変の領域を精度よく特定することができるため、特定した結果に基づいて適切な治療が行われるようになってきている。
In recent years, advances in medical equipment such as CT (Computed Tomography) devices and MRI (Magnetic Resonance Imaging) devices have enabled image diagnosis using medical images of higher quality and higher resolution. In particular, image diagnosis using CT images, MRI images, and the like enables accurate identification of lesion regions, and appropriate treatment has come to be performed based on the identification results.
また、ディープラーニング等により学習がなされた判別器を用いたCAD(Computer-Aided Diagnosis)により医用画像を解析して、医用画像に含まれる病変等の領域、位置および体積等を抽出し、これらを解析結果として取得することも行われている(例えば非特許文献1)。このように、解析処理により生成される解析結果は、患者名、性別、年齢および医用画像を取得したモダリティ等の検査情報と対応づけられて、データベースに保存されて、診断に供される。この際、医用画像を取得した放射線科等の技師が、医用画像に応じた読影医を決定し、医用画像およびCADによる解析結果が存在することを、決定した読影医に伝えるようにしている。読影医は、自身の読影端末において、配信された医用画像および解析結果を参照して医用画像の読影を行い、読影レポートを作成する。
In addition, medical images are analyzed by CAD (Computer-Aided Diagnosis) using classifiers trained by deep learning, etc., and the regions, positions, volumes, etc. of lesions included in the medical images are extracted, and these are Acquisition as an analysis result is also performed (for example, Non-Patent Document 1). In this way, the analysis results generated by the analysis process are associated with examination information such as the patient's name, sex, age, and modality in which the medical image was acquired, are stored in a database, and are used for diagnosis. At this time, the radiologist who acquired the medical image decides an interpreting doctor according to the medical image, and informs the decided interpreting doctor that the medical image and the analysis result by CAD exist. The interpreting doctor interprets the medical image by referring to the delivered medical image and the analysis result at his own interpreting terminal, and creates an interpretation report.
また、CADの解析結果の入力により病変の大きさ、形状および推定病名等の所見を出力するように学習がなされた判別器を用いて、CADの解析結果から所見を生成する手法が提案されている(特許文献1参照)。また、このように推定された所見を含む読影レポートを定型文に基づいて生成する手法も提案されている(特許文献2参照)。このように読影レポートを自動で生成することにより、読影レポートを作成する際の読影医の負担を軽減することができる。
In addition, a method of generating findings from CAD analysis results using a discriminator trained to output findings such as lesion size, shape, and estimated disease name from input of CAD analysis results has been proposed. (See Patent Document 1). A technique has also been proposed for generating an interpretation report including findings estimated in this way based on fixed phrases (see Patent Document 2). By automatically generating the interpretation report in this way, the burden on the interpretation doctor when creating the interpretation report can be reduced.
一方、CADの解析結果には誤検出が含まれる場合がある。また、自動で作成された読影レポートに含まれる所見に誤りがある場合がある。このため、検出結果および読影レポートの正確性を期すためには、CADの検出結果および作成された読影レポートを、必ず医師が確認する必要がある。この際、医師は、読影レポートに含まれるCADの検出結果とそれに対応する所見とを個々に確認して、読影レポートが確認済みであるか否か、および未確認の場合には誤検出および所見に誤りがあるか否かを確認する必要がある。しかしながら、読影レポートが確認済みであるのか否かは、読影レポートを一見するのみでは分かりにくい。
On the other hand, CAD analysis results may include false detections. In addition, there may be errors in the findings included in the automatically generated interpretation report. Therefore, in order to ensure the accuracy of the detection results and the interpretation report, the doctor must always check the CAD detection results and the created interpretation report. At this time, the doctor individually confirms the CAD detection results and the corresponding findings included in the interpretation report to determine whether the interpretation report has been confirmed and, if not, whether there are false detections and findings. I need to check if there are any errors. However, it is difficult to know whether or not the interpretation report has been confirmed by just looking at the interpretation report.
本開示は上記事情に鑑みなされ、作成された読影レポート等の医療文書が、確認済みであるか否かを容易に認識できるようにすることを目的とする。
The present disclosure has been made in view of the above circumstances, and aims to make it possible to easily recognize whether or not a created medical document such as an interpretation report has been confirmed.
本開示による医療文書作成支援装置は、医用画像に含まれる異常部位に基づいて生成された医療文書を表示部に表示する表示制御部と、
表示された医療文書の確認の指示に基づいて、医療文書が確認済みであることを認識可能に医療文書の一部を変更する文書変更部とを備える。
A medical document creation support apparatus according to the present disclosure includes a display control unit that displays a medical document generated based on an abnormal site included in a medical image on a display unit;
a document changing unit that changes a part of the medical document so that it can be recognized that the medical document has been confirmed, based on the displayed instruction to confirm the medical document.
なお、本開示による医療文書作成支援装置においては、文書変更部は、医療文書が確認済みであることを表す表現に医療文書を変更してもよい。
In addition, in the medical document creation support apparatus according to the present disclosure, the document changing unit may change the medical document to an expression indicating that the medical document has been confirmed.
この場合、医療文書が確認済みであることを表す表現は、断定表現であってもよい。
In this case, the expression indicating that the medical document has been verified may be an assertive expression.
また、本開示による医療文書作成支援装置においては、文書変更部は、医療文書における変更された箇所の文字色を変更することにより、変更された箇所を認識可能に医療文書を修正してもよい。
Further, in the medical document creation support device according to the present disclosure, the document modification unit may modify the medical document so that the modified part can be recognized by changing the character color of the modified part in the medical document. .
また、本開示による医療文書作成支援装置においては、文書変更部は、医療文書に含まれる文言についての1以上の変更候補を提示し、提示された変更候補から選択された変更候補に基づいて医療文書をさらに変更してもよい。
Further, in the medical document creation support apparatus according to the present disclosure, the document changing unit presents one or more change candidates for the wording included in the medical document, and based on the change candidates selected from the presented change candidates, the medical document creation support device Further changes to the document may be made.
また、本開示による医療文書作成支援装置においては、医療文書は、医用画像についての読影レポートに含まれる、医用画像に関する文書であってもよい。
Further, in the medical document creation support apparatus according to the present disclosure, the medical document may be a document related to medical images included in an interpretation report related to medical images.
また、本開示による医療文書作成支援装置においては、確認の指示は、読影レポートを管理するシステムへ、読影レポートを転記する指示であってもよい。
Further, in the medical document creation support apparatus according to the present disclosure, the confirmation instruction may be an instruction to transfer the interpretation report to a system that manages the interpretation report.
また、本開示による医療文書作成支援装置においては、医用画像は、脳の医用画像、肺の医用画像、肝臓の医用画像および骨の医用画像の少なくとも1つであってもよく、CT画像およびMRI画像の少なくとも一方であってもよい。また、医用画像は、経時サブトラクション画像であってもよい。
Further, in the medical document creation support apparatus according to the present disclosure, the medical image may be at least one of a brain medical image, a lung medical image, a liver medical image, and a bone medical image, and may be a CT image and an MRI image. It may be at least one of the images. Also, the medical image may be a temporal subtraction image.
また、本開示による医療文書作成支援装置においては、医用画像を解析することにより異常部位を検出する解析部と、
検出された異常部位に基づいて医療文書を生成する文書生成部とをさらに備えてもよい。
Further, in the medical document creation support device according to the present disclosure, an analysis unit that detects an abnormal site by analyzing a medical image;
A document generation unit that generates a medical document based on the detected abnormal site may be further included.
本開示による医療文書作成支援方法は、医用画像に含まれる異常部位に基づいて生成された医療文書を表示部に表示し、
表示された医療文書の確認の指示に基づいて、医療文書が確認済みであることを認識可能に医療文書の一部を変更する。
A medical document creation support method according to the present disclosure displays a medical document generated based on an abnormal site included in a medical image on a display unit,
Part of the medical document is changed so that it can be recognized that the medical document has been confirmed based on the displayed instruction to confirm the medical document.
なお、本開示による医療文書作成支援方法をコンピュータに実行させるためのプログラムとして提供してもよい。
In addition, you may provide as a program for making a computer perform the medical document preparation support method by this indication.
本開示による他の医療文書作成支援装置は、コンピュータに実行させるための命令を記憶するメモリと、
記憶された命令を実行するよう構成されたプロセッサとを備え、プロセッサは、
医用画像に含まれる異常部位に基づいて生成された医療文書を表示部に表示し、
表示された医療文書の確認の指示に基づいて、医療文書が確認済みであることを認識可能に医療文書の一部を変更する処理を実行する。
Another medical documentation support device according to the present disclosure includes a memory that stores instructions for a computer to execute;
a processor configured to execute stored instructions, the processor comprising:
displaying a medical document generated based on an abnormal site included in a medical image on a display unit;
Based on the displayed instruction to confirm the medical document, a process is executed to change a part of the medical document so that it can be recognized that the medical document has been confirmed.
本開示によれば、修正された医療文書を見れば、その医療文書が確認済みであるか否かを容易に認識することができる。
According to the present disclosure, viewing a revised medical document makes it easy to recognize whether the medical document has been verified.
以下、図面を参照して本開示の実施形態について説明する。図1は本開示の実施形態による医療文書作成支援装置を適用した医療情報システムの概略構成を示す図である。図1に示す医療情報システム1は、公知のオーダリングシステムを用いた診療科の医師からの検査オーダに基づいて、被写体の検査対象部位の撮影、撮影により取得された医用画像の保管、読影医による医用画像の読影と読影レポートの作成、および依頼元の診療科の医師による読影レポートの閲覧と読影対象の医用画像の詳細観察とを行うためのシステムである。図1に示すように、医療情報システム1は、複数のモダリティ(撮影装置)2、読影端末である複数の読影ワークステーション(WS)3、診療科ワークステーション(WS)4、画像サーバ5、画像データベース6、読影レポートサーバ7、読影レポートデータベース8、および解析サーバ9が、有線または無線のネットワーク10を介して互いに通信可能な状態で接続されて構成されている。
Embodiments of the present disclosure will be described below with reference to the drawings. FIG. 1 is a diagram showing a schematic configuration of a medical information system to which a medical document creation support device according to an embodiment of the present disclosure is applied. The
各機器は、医療情報システム1の構成要素として機能させるためのアプリケーションプログラムがインストールされたコンピュータである。アプリケーションプログラムは、DVD(Digital Versatile Disc)あるいはCD-ROM(Compact Disc Read Only Memory)等の記録媒体に記録されて配布され、その記録媒体からコンピュータにインストールされる。または、ネットワーク10に接続されたサーバコンピュータの記憶装置、もしくはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じてコンピュータにダウンロードされ、インストールされる。
Each device is a computer in which an application program for functioning as a component of the
モダリティ2は、被写体の診断対象となる部位を撮影することにより、診断対象部位を表す医用画像を生成する装置である。具体的には、単純X線撮影装置、CT装置、MRI装置、およびPET(Positron Emission Tomography)装置等である。モダリティ2により生成された医用画像は画像サーバ5に送信され、保存される。
The
読影WS3は、本実施形態による医療文書作成支援装置を内包する。読影WS3の構成については後述する。
The interpretation WS3 includes the medical document creation support device according to this embodiment. The configuration of the interpretation WS3 will be described later.
診療科WS4は、診療科の医師が画像の詳細観察、読影レポートの閲覧、および電子カルテの作成等に利用するコンピュータであり、処理装置、ディスプレイ等の表示装置、並びにキーボードおよびマウス等の入力装置により構成される。診療科WS4では、患者のカルテ(電子カルテ)の作成、画像サーバ5に対する画像の閲覧要求、画像サーバ5から受信した画像の表示、画像中の病変らしき部分の自動検出または強調表示、読影レポートサーバ7に対する読影レポートの閲覧要求、および読影レポートサーバ7から受信した読影レポートの表示等の各処理が、各処理のためのソフトウェアプログラムを実行することにより行われる。
The clinical department WS4 is a computer used by doctors in the clinical department for detailed observation of images, viewing of interpretation reports, and preparation of electronic medical charts. Consists of In the clinical department WS4, a patient's medical chart (electronic medical chart) is created, an image viewing request is sent to the
画像サーバ5は、コンピュータにデータベース管理システム(DataBase Management System: DBMS)の機能を提供するソフトウェアプログラムがインストールされた装置である。また、画像サーバ5は画像データベース6が構成されるストレージを備えている。このストレージは、画像サーバ5とデータバスとによって接続されたハードディスク装置であってもよいし、ネットワーク10に接続されているNAS(Network Attached Storage)およびSAN(Storage Area Network)に接続されたディスク装置であってもよい。また、画像サーバ5は、モダリティ2からの医用画像の登録要求を受け付けると、その医用画像をデータベース用のフォーマットに整えて画像データベース6に登録する。
The
画像データベース6には、モダリティ2において取得された医用画像の画像データと付帯情報とが登録される。付帯情報には、例えば、個々の医用画像を識別するための画像ID(identification)、被写体を識別するための患者ID、検査を識別するための検査ID、医用画像毎に割り振られるユニークなID(UID:unique identification)、医用画像が生成された検査日、検査時刻、医用画像を取得するための検査で使用されたモダリティの種類、患者氏名、年齢、性別等の患者情報、検査部位(撮影部位)、撮影情報(撮影プロトコル、撮影シーケンス、撮像手法、撮影条件、造影剤の使用等)、1回の検査で複数の医用画像を取得したときのシリーズ番号あるいは採取番号等の情報が含まれる。
In the
また、画像サーバ5は、読影WS3からの閲覧要求をネットワーク10経由で受信すると、画像データベース6に登録されている医用画像を検索し、検索された医用画像を要求元の読影WS3に送信する。
When the
読影レポートサーバ7は、コンピュータにデータベース管理システムの機能を提供するソフトウェアプログラムが組み込まれる。読影レポートサーバ7は、読影WS3からの読影レポートの登録要求を受け付けると、その読影レポートをデータベース用のフォーマットに整えて読影レポートデータベース8に登録する。また、読影レポートの検索要求を受け付けると、その読影レポートを読影レポートデータベース8から検索する。
The
読影レポートデータベース8には、例えば、読影対象の医用画像を識別する画像ID、読影を行った画像診断医を識別するための読影医ID、病変名、病変の位置情報、所見、および所見の確信度等の情報が記録された読影レポートが登録される。
The
解析サーバ9は、コンピュータにCAD等により医用画像を解析して病変等の異常部位を検出する機能を提供するソフトウェアプログラム、およびCADによる解析結果から読影レポートを作成する機能を提供するソフトウェアプログラムがインストールされた装置である。解析サーバ9における医用画像の解析処理および読影レポートの作成処理は、診療科WS4または読影WS3からの指示により行われる。解析サーバ9は、医用画像の解析処理および読影レポートの作成処理を受信すると、画像サーバ5から処理の対象となる医用画像を取得する。そして、解析サーバ9は、取得した医用画像を解析し、さらに読影レポートを作成し、作成した読影レポートを読影レポートサーバ7に送信する。この場合、読影レポートの登録要求は、解析サーバ9から行われることとなる。
The
なお、CADによる解析処理としては、例えば上記非特許文献1に記載された手法を用いることができる。また、CADによる解析処理から所見を生成し、所見から読影レポートを作成する手法は、例えば上記特許文献1および2に記載された手法を用いることができる。しかしながら、CADによる解析処理および読影レポートを作成する手法は、これらに限定されない。
As the analysis processing by CAD, for example, the method described in
ネットワーク10は、病院内の各種機器を接続する有線または無線のローカルエリアネットワークである。読影WS3が他の病院あるいは診療所に設置されている場合には、ネットワーク10は、各病院のローカルエリアネットワーク同士をインターネットまたは専用回線で接続した構成としてもよい。
A
以下、本実施形態による読影WS3について詳細に説明する。読影WS3は、医用画像の読影医が、医用画像の読影および読影レポートの作成に利用するコンピュータであり、処理装置、ディスプレイ等の表示装置、並びにキーボードおよびマウス等の入力装置により構成される。読影WS3では、画像サーバ5に対する医用画像の閲覧要求、画像サーバ5から受信した医用画像に対する各種画像処理、医用画像の表示、医用画像に対する解析処理、解析結果に基づく医用画像の強調表示、解析結果に基づく読影レポートの作成、読影レポートの作成の支援、読影レポートサーバ7に対する読影レポートの登録要求と閲覧要求、並びに読影レポートサーバ7から受信した読影レポートの表示等の各処理が、各処理のためのソフトウェアプログラムを実行することにより行われる。なお、これらの処理のうち、本実施形態の医療文書作成支援装置が行う処理以外の処理は、周知のソフトウェアプログラムにより行われるため、ここでは詳細な説明は省略する。また、本実施形態の医療文書作成支援装置が行う処理以外の処理を読影WS3において行わず、別途その処理を行うコンピュータをネットワーク10に接続しておき、読影WS3からの処理の要求に応じて、そのコンピュータにおいて要求された処理を行うようにしてもよい。
The interpretation WS3 according to this embodiment will be described in detail below. The interpretation WS3 is a computer used by medical image interpretation doctors to interpret medical images and create interpretation reports, and is composed of a processing device, a display device such as a display, and an input device such as a keyboard and mouse. The
読影WS3は、本実施形態による医療文書作成支援装置が内包されてなる。このため、読影WS3には、本実施形態による医療文書作成支援プログラムがインストールされてなる。医療文書作成支援プログラムは、DVDあるいはCD-ROM等の記録媒体に記録されて配布され、その記録媒体から読影WS3にインストールされる。または、ネットワークに接続されたサーバコンピュータの記憶装置、もしくはネットワークストレージに、外部からアクセス可能な状態で記憶され、要求に応じて読影WS3にダウンロードされ、インストールされる。
The interpretation WS3 includes the medical document creation support apparatus according to this embodiment. Therefore, the medical document creation support program according to the present embodiment is installed in the interpretation WS3. The medical document creation support program is recorded on a recording medium such as a DVD or CD-ROM, distributed, and installed in the
図2は、医療文書作成支援プログラムをインストールして実行することにより実現される、本開示の実施形態による医療文書作成支援装置の概略構成を示す図である。図2に示すように、医療文書作成支援装置20は、標準的なコンピュータの構成として、CPU(Central Processing Unit)21、メモリ22およびストレージ23を備えている。また、医療文書作成支援装置20には、液晶ディスプレイ等の表示装置(以下表示部とする)24、並びにキーボードおよびマウス等の入力装置(以下、入力部とする)25が接続されている。
FIG. 2 is a diagram showing a schematic configuration of a medical document creation support device according to an embodiment of the present disclosure, which is realized by installing and executing a medical document creation support program. As shown in FIG. 2, the medical document
ストレージ23は、ハードディスクまたはSSD(Solid State Drive)等のストレージデバイスからなる。ストレージ23には、ネットワーク10を経由して画像サーバ5から取得した、医用画像および医療文書作成支援装置20の処理に必要な情報を含む各種情報が記憶されている。
The
また、メモリ22には、医療文書作成支援プログラムが記憶されている。メモリ22は、一時的な記録媒体である揮発性メモリでもよいし、非一時的な記録媒体である不揮発性メモリでもよい。メモリ22が揮発性メモリの場合は、医療文書作成支援プログラムがCPU21により他の場所から読み出され、メモリ22へ一時的に記憶され実行される。医療文書作成支援プログラムは、CPU21に実行させる処理として、読影レポートおよび医用画像等を取得する情報取得処理、取得した読影レポートを表示部24に表示する表示制御処理、並びに表示された読影レポートの確認の指示に基づいて、読影レポートに含まれる文書の一部を、その文書が確認済みであることを認識可能に変更する文書変更処理を規定する。なお、医療文書作成支援プログラムは、図示しない外部記録媒体に記録されて配布され、その記録媒体からCPU21によりインストールされてもよい。または、医療文書作成支援プログラムは、ネットワークに接続されたサーバ等に、外部からアクセス可能な状態で記憶され、要求に応じてCPU21によりメモリ22やストレージ23にダウンロードされ、インストールおよび実行されてもよい。
The
そして、CPU21が医療文書作成支援プログラムに従いこれらの処理を実行することにより、コンピュータは、情報取得部31、表示制御部32および文書変更部33として機能する。なお、読影レポートに含まれる文書が医療文書に対応する。
The computer functions as an
情報取得部31は、操作者である読影医による入力部25からの指示により、読影レポートサーバ7から読影レポートを取得する。また、読影レポートの内容の確認のために、読影レポートを作成した医用画像を、画像サーバ5から取得する。また、後述するように読影医による確認済みの読影レポートを、読影レポートサーバ7に送信する。
The
表示制御部32は、取得した読影レポートを表示部24に表示する。図3は、表示された読影レポートを示す図である。図3に示すように、読影レポート40には、CADによる解析によって、病変が検出された医用画像41および文書42が含まれる。医用画像41においては、病変が検出された箇所にマークMが付与されている。なお、医用画像41は、人体の胸部のアキシャル断面におけるCT画像、すなわち肺のCT画像である。
The
また、文書42の内容は、「CADによって、左肺胸膜下に、不整形でスピキュラを有する最大横径4.2cmの腫瘤陰影が検出されました。胸壁に接していて、胸膜陥入を認めますが、浸潤は認めません。」である。
In addition, the contents of
読影医は表示された読影レポート40に含まれる医用画像41および文書42を見て、必要であれば文書42を修正する。そして、読影医は、文書42を確認した旨の指示を入力部25から行う。
The radiologist sees the
文書変更部33は、入力部25からの確認の指示を受けて、読影レポート40に含まれる文書42の一部を、その文書42が確認済みであることを認識可能に変更する。例えば、文書変更部33は、確認済みであることを表す表現、具体的には断定表現に文書42の一部を変更する。断定表現とは、読影医が、読影結果に、ある程度の確信を持っていることがわかる表現である。このために、文書変更部33は、入力された文書の一部を確認済みであることを認識可能に変更するように学習がなされた学習済みモデルを有する。文書変更部33が有する学習済みモデルは、例えば、ディープラーニング(深層学習)がなされたニューラルネットワークからなる。しかしながら、ディープラーニングがなされたニューラルネットワークの他、例えばサポートベクタマシン(SVM(Support Vector Machine))、畳み込みニューラルネットワーク(CNN(Convolutional Neural Network))、およびリカレントニューラルネットワーク(RNN(Recurrent Neural Network))等からなってもよい。なお、確認の指示は、例えば、入力部25のキーボードにおけるリターンキーを押す、あるいは表示部24に表示された確認のコマンドのクリック等により行うことができる。また、確認の指示としては、読影レポートの読影レポートサーバ7への転記の指示であってもよい。なお、読影レポートサーバ7が、読影レポートを管理するシステムに対応する。
Upon receiving a confirmation instruction from the
図4は文書が変更された読影レポートを示す図である。図3に示した読影レポート40に含まれる文書42は、文書変更部33が有する学習済みモデルにより、「CADによって、」が削除され、「検出されました」が「認められます」の断定表現に変更されて、「左肺胸膜下に、不整形でスピキュラを有する最大横径4.2cmの腫瘤陰影が認められます。胸壁に接していて、胸膜陥入を認めますが、浸潤は認めません。」の文書43に変更されている。なお、図4の文書43においては、変更された「認められます」に下線を付与しているが、下線の付与に代えて、フォントを変更したり、色を変更したりしてもよい。
FIG. 4 is a diagram showing an interpretation report in which the document has been changed. In the
次いで、本実施形態において行われる処理について説明する。図5は本実施形態において行われる処理を示すフローチャートである。読影医が医用画像の読影の指示を入力部25から行うことにより処理が開始され、情報取得部31が、読影レポートサーバ7から読影レポートを取得する(ステップST1)。そして、表示制御部32が、読影レポートを表示部24に表示する(ステップST2)。
Next, processing performed in this embodiment will be described. FIG. 5 is a flow chart showing the processing performed in this embodiment. The processing is started when the interpretation doctor gives an instruction to interpret a medical image from the
読影医による読影レポートの確認の指示が入力部25からなされると(ステップST3,YES)、文書変更部33が、読影レポートに含まれる文書の一部を確認済みであることを認識可能に変更する(文書変更;ステップST4)。なお、ステップST3が肯定されるまで、読影レポートの表示が行われる(ステップST2)。そして、情報取得部31が変更された読影レポートを読影レポートサーバ7に送信し(ステップST5)、処理を終了する。読影レポートサーバ7に送信された読影レポートは、読影レポートデータベース8に登録される。
When the interpretation doctor gives an instruction to confirm the interpretation report from the input unit 25 (step ST3, YES), the
このように、本実施形態においては、読影レポート40を表示部24に表示し、表示された読影レポート40の確認の指示に基づいて、読影レポート40に含まれる文書42の一部を、確認済みであることを認識可能に変更するようにした。このため、文書が変更された読影レポート40を見れば、その読影レポート40が確認済みであるか否かを容易に認識することができる。
As described above, in the present embodiment, the
なお、上記実施形態においては、胸部のアキシャル断面におけるCT画像を医用画像41として含む読影レポート40を処理の対象としているが、これに限定されない。例えば、対象とされる部位の経時サブトラクション画像であってもよい。とくに、特開2017-63936号公報および特開2017-158781号公報に記載された、骨転移を診断するための骨経時サブトラクション画像を医用画像として含む読影レポートを処理の対象としてもよい。ここで、骨経時サブトラクション画像は、同一被写体の背骨について撮影時期が異なる2つの放射線画像を位置合わせし、対応する画素間の差分値を算出して差分画像を生成し、差分画像を2つの放射線画像のいずれかに重畳することにより生成される。
In the above embodiment, the object of processing is the
解析サーバ9においては、このような骨経時サブトラクション画像が解析されて、異常部位が検出され、検出された異常部位に基づいて読影レポートが作成される。作成された読影レポートは読影レポートサーバ7に送信され、読影レポートデータベース8に登録される。
The
図6は、骨経時サブトラクション画像についての読影レポートを示す図である。図6に示すように、読影レポート50には、骨経時サブトラクション画像51および文書52が含まれる。骨経時サブトラクション画像51においては、差分値が予め定められたしきい値よりも大きい画素からなる部位51Aに斜線が付与されている。
FIG. 6 is a diagram showing an interpretation report for bone time-lapse subtraction images. As shown in FIG. 6 , the
また、文書52の内容は、「CADによって、T5に溶骨型骨転移の所見が検出されました。」である。T5とは、椎骨に付与された符号であり、椎骨のうちの5番目の胸椎であることを表している。
Further, the content of the
読影医が読影レポート50を確認すると、文書変更部33は読影レポート50に含まれる文書52の一部を、その文書52が確認済みであることを認識可能に変更する。図7は文書が変更された読影レポートを示す図である。図6に示した読影レポート50に含まれる文書52は、「CADによって、」が削除され、「検出されました」が「疑われます」に変更されて、「T5に溶骨型骨転移が疑われます。」の文書53に変更されている。なお、図7の文書53においては、変更された「疑われます」に下線を付与しているが、下線の付与に代えて、フォントを変更したり、色を変更したりしてもよい。
When the interpretation doctor confirms the
なお、読影レポート50に対して確認の指示を行う際に、骨転移のタイプを読影医に選択させるようにしてもよい。この場合、文書変更部33が、図8に示すように、骨転移のタイプを選択させるための選択ボックス54を表示する。選択ボックス54には、溶骨型、造骨型および混合型という、癌についての3つの骨転移タイプが、文書52に含まれる文言の変更候補として選択可能に提示されている。読影医が骨経時サブトラクション画像51を診断した結果、骨転移が混合型であった場合、入力部25を用いて、選択ボックス54において「混合型」を選択する。これにより、読影レポート50に含まれる文書52は、図9に示すように、「T5に混合型骨転移が疑われます。」の内容の文書55に変更される。なお、図9の文書55においては、変更された「混合型」および「疑われます」に下線を付与しているが、下線の付与に代えて、フォントを変更したり、色を変更したりしてもよい。
It should be noted that the radiologist may be allowed to select the type of bone metastasis when instructing confirmation of the
なお、上記実施形態においては、解析サーバ9において、医用画像の解析および読影レポートの自動作成を行っているが、これに限定されない。読影WS3に、CAD等により医用画像を解析して病変等の異常部位を検出する機能を提供するソフトウェアプログラム、およびCADによる解析結果から読影レポートを作成する機能を提供するソフトウェアプログラムをインストールし、読影WS3において、医用画像の解析および読影レポートの作成を行うようにしてもよい。
In the above embodiment, the
この場合、読影WS3において作成された読影レポートが表示制御部32により表示部24に表示され、上記と同様に読影医による読影レポートの確認の作業が行われる。確認された読影レポートは上記と同様に変更され、変更された読影レポートは読影レポートサーバ7に送信されて、読影レポートデータベース8に登録される。
In this case, the interpretation report created in the interpretation WS3 is displayed on the
また、上記実施形態においては、解析サーバ9において、医用画像を解析して異常部位を検出しているがこれに限定されない。解析サーバ9において医用画像を表示し、表示された医用画像を医師が確認することにより、医用画像から異常部位を検出するようにしてもよい。この場合、解析サーバ9は、医師が検出した異常部位に基づいて、読影レポートを自動で作成する。なお、読影WS3において、医師が検出した異常部位に基づいて、読影レポートを自動で作成するようにしてもよい。
In addition, in the above embodiment, the
また、上記各実施形態においては、医療文書として読影レポートを作成する際に、本開示を適用しているが、電子カルテおよび診断レポート等の読影レポート以外の医療文書を作成する場合にも、本開示を適用できることはもちろんである。
In each of the above embodiments, the present disclosure is applied when creating an interpretation report as a medical document. Of course disclosure is applicable.
また、上記実施形態においては、医用画像として肺のCT画像および骨の経時サブトラクション画像を用いているが、これらに限定されない。医用画像として脳のCT画像および脳のMRI画像を用いてもよい。脳のCT画像およびMRI画像からは、解析によって脳出血および脳梗塞等が異常部位として検出され、検出された脳出血および脳梗塞等に基づいて読影レポートが作成されることとなる。また、医用画像として肝臓のCT画像を用いてもよい。この場合、解析により医用画像から肝臓癌等が異常部位として検出され、検出された肝臓癌等に基づいて読影レポートが作成されることとなる。
In addition, in the above embodiment, the CT image of the lung and the time-lapse subtraction image of the bone are used as the medical image, but the medical image is not limited to these. A CT image of the brain and an MRI image of the brain may be used as the medical image. Cerebral hemorrhage, cerebral infarction, and the like are detected as abnormal sites by analysis from CT and MRI images of the brain, and an interpretation report is created based on the detected cerebral hemorrhage, cerebral infarction, and the like. A CT image of the liver may also be used as the medical image. In this case, liver cancer or the like is detected as an abnormal site from the medical image by the analysis, and an interpretation report is created based on the detected liver cancer or the like.
また、上記実施形態において、例えば、情報取得部31、表示制御部32および文書変更部33といった各種の処理を実行する処理部(Processing Unit)のハードウェア的な構造としては、次に示す各種のプロセッサ(Processor)を用いることができる。上記各種のプロセッサには、上述したように、ソフトウェア(プログラム)を実行して各種の処理部として機能する汎用的なプロセッサであるCPUに加えて、FPGA(Field Programmable Gate Array)等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device :PLD)、ASIC(Application Specific Integrated Circuit)等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
Further, in the above-described embodiment, for example, the
1つの処理部は、これらの各種のプロセッサのうちの1つで構成されてもよいし、同種または異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGAの組み合わせまたはCPUとFPGAとの組み合わせ)で構成されてもよい。また、複数の処理部を1つのプロセッサで構成してもよい。
One processing unit may be configured with one of these various processors, or a combination of two or more processors of the same or different type (for example, a combination of multiple FPGAs or a combination of a CPU and an FPGA). ). Also, a plurality of processing units may be configured by one processor.
複数の処理部を1つのプロセッサで構成する例としては、第1に、クライアントおよびサーバ等のコンピュータに代表されるように、1つ以上のCPUとソフトウェアとの組み合わせで1つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第2に、システムオンチップ(System On Chip:SoC)等に代表されるように、複数の処理部を含むシステム全体の機能を1つのIC(Integrated Circuit)チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサの1つ以上を用いて構成される。
As an example of configuring a plurality of processing units in one processor, first, as represented by computers such as clients and servers, one processor is configured by combining one or more CPUs and software, There is a form in which this processor functions as a plurality of processing units. Secondly, as typified by System On Chip (SoC), etc., there is a form of using a processor that realizes the functions of the entire system including multiple processing units with a single IC (Integrated Circuit) chip. be. In this way, the various processing units are configured using one or more of the above various processors as a hardware structure.
さらに、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子等の回路素子を組み合わせた電気回路(Circuitry)を用いることができる。
Furthermore, more specifically, as the hardware structure of these various processors, an electric circuit (circuitry) in which circuit elements such as semiconductor elements are combined can be used.
1 医療情報システム
2 モダリティ
3 読影ワークステーション
4 診療科ワークステーション
5 画像サーバ
6 画像データベース
7 読影レポートサーバ
8 読影レポートデータベース
9 解析サーバ
10 ネットワーク
20 医療文書作成支援装置
21 CPU
22 メモリ
23 ストレージ
24 表示部
25 入力部
31 情報取得部
32 表示制御部
33 文書変更部
40,50 読影レポート
41 医用画像
42,43,52,53,55 読影レポートの文書
51 骨経時サブトラクション画像
51A 差分値が予め定められたしきい値よりも大きい画素からなる部位
54 選択ボックス
1 Medical information system
2 modalities
3 Interpretation workstation
4 Clinical department workstation
5 Image server
6 Image database
7 Interpretation report server
8 Interpretation report database
9 Analysis server
10 network
20 medical document creation support device
21 CPUs
22 memory
23 Storage
24 Display
25 input section
31 information acquisition unit
32 display control unit
33 DOCUMENT CHANGES
40,50 Interpretation report
41 Medical Imaging
42, 43, 52, 53, 55 Interpretation report documents
51 Bone temporal subtraction images
51A A portion consisting of pixels whose difference value is larger than a predetermined threshold value
54 selection box
Claims (10)
入力された文書の一部を確認済みであることを認識可能に変更するように学習がなされた学習済みモデルにより、表示された前記医療文書を確認した旨の指示の入力に基づいて、前記医療文書が確認済みであることを表す表現に前記医療文書を変更することにより、および/または前記医療文書から前記コンピュータにより生成されたことを表す表現を削除することにより、確認済みであることを認識可能に前記医療文書の一部を変更する文書変更部とを備えた医療文書作成支援装置。 a display control unit for displaying a medical document generated by a computer based on an abnormal site included in a medical image on a display unit;
Based on the input of the displayed indication that the medical document has been confirmed, the medical Recognizing that the document has been verified by altering the medical document to a representation that the document has been verified and/or removing the computer-generated representation from the medical document and a document modification unit that can modify a part of the medical document.
入力された文書の一部を確認済みであることを認識可能に変更するように学習がなされた学習済みモデルにより、表示された前記医療文書を確認した旨の指示の入力に基づいて、前記医療文書が確認済みであることを表す表現に前記医療文書を変更することにより、および/または前記医療文書から前記コンピュータにより生成されたことを表す表現を削除することにより、確認済みであることを認識可能に前記医療文書の一部を変更する医療文書作成支援方法。 a computer displaying, on a display unit, a medical document generated by the computer or a computer different from the computer, based on the abnormal site included in the medical image;
Based on the input of the displayed indication that the medical document has been confirmed, the medical Recognizing that the document has been verified by altering the medical document to a representation that the document has been verified and/or removing the computer-generated representation from the medical document A medical document creation support method for modifying a part of the medical document to be possible.
入力された文書の一部を確認済みであることを認識可能に変更するように学習がなされた学習済みモデルにより、表示された前記医療文書を確認した旨の指示の入力に基づいて、前記医療文書が確認済みであることを表す表現に前記医療文書を変更することにより、および/または前記医療文書から前記コンピュータにより生成されたことを表す表現を削除することにより、確認済みであることを認識可能に前記医療文書の一部を変更する手順とを前記コンピュータまたは前記コンピュータとは異なるコンピュータに実行させる医療文書作成支援プログラム。 a procedure for displaying on a display unit a medical document generated by a computer based on an abnormal site included in a medical image;
Based on the input of the displayed indication that the medical document has been confirmed, the medical Recognizing that the document has been verified by altering the medical document to a representation that the document has been verified and/or removing the computer-generated representation from the medical document A medical document creation support program that causes the computer or a computer different from the computer to execute a procedure for modifying a part of the medical document.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018237452 | 2018-12-19 | ||
JP2018237452 | 2018-12-19 | ||
PCT/JP2019/041043 WO2020129385A1 (en) | 2018-12-19 | 2019-10-18 | Medical document creation assistance device, method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020129385A1 JPWO2020129385A1 (en) | 2021-09-27 |
JP7237089B2 true JP7237089B2 (en) | 2023-03-10 |
Family
ID=71102813
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020561180A Active JP7237089B2 (en) | 2018-12-19 | 2019-10-18 | MEDICAL DOCUMENT SUPPORT DEVICE, METHOD AND PROGRAM |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7237089B2 (en) |
WO (1) | WO2020129385A1 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022220081A1 (en) * | 2021-04-14 | 2022-10-20 | 富士フイルム株式会社 | Document creation assistance device, document creation assistance method, and document creation assistance program |
WO2022220158A1 (en) * | 2021-04-14 | 2022-10-20 | 富士フイルム株式会社 | Work assitance device, work assitance method, and work assitance program |
WO2023054646A1 (en) * | 2021-09-30 | 2023-04-06 | 富士フイルム株式会社 | Information processing device, information processing method, and information processing program |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013037553A (en) | 2011-08-08 | 2013-02-21 | Nagoya Univ | Medical report preparation support system, medical report preparation support program, medical report creation device and medical image observation device |
JP2013041428A (en) | 2011-08-16 | 2013-02-28 | Canon Inc | Medical diagnosis support device and medical diagnosis support method |
JP2016122397A (en) | 2014-12-25 | 2016-07-07 | キヤノン株式会社 | Diagnosis support apparatus, diagnosis support method, and program |
JP2016126398A (en) | 2014-12-26 | 2016-07-11 | キヤノンマーケティングジャパン株式会社 | Information processing device, method for controlling information processing device, information processing system, method for controlling information processing system, and program |
JP2017191457A (en) | 2016-04-13 | 2017-10-19 | キヤノン株式会社 | Report creation apparatus and control method thereof |
-
2019
- 2019-10-18 WO PCT/JP2019/041043 patent/WO2020129385A1/en active Application Filing
- 2019-10-18 JP JP2020561180A patent/JP7237089B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013037553A (en) | 2011-08-08 | 2013-02-21 | Nagoya Univ | Medical report preparation support system, medical report preparation support program, medical report creation device and medical image observation device |
JP2013041428A (en) | 2011-08-16 | 2013-02-28 | Canon Inc | Medical diagnosis support device and medical diagnosis support method |
JP2016122397A (en) | 2014-12-25 | 2016-07-07 | キヤノン株式会社 | Diagnosis support apparatus, diagnosis support method, and program |
JP2016126398A (en) | 2014-12-26 | 2016-07-11 | キヤノンマーケティングジャパン株式会社 | Information processing device, method for controlling information processing device, information processing system, method for controlling information processing system, and program |
JP2017191457A (en) | 2016-04-13 | 2017-10-19 | キヤノン株式会社 | Report creation apparatus and control method thereof |
Also Published As
Publication number | Publication date |
---|---|
JPWO2020129385A1 (en) | 2021-09-27 |
WO2020129385A1 (en) | 2020-06-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20160321427A1 (en) | Patient-Specific Therapy Planning Support Using Patient Matching | |
US20190295248A1 (en) | Medical image specifying apparatus, method, and program | |
JP2019153250A (en) | Device, method, and program for supporting preparation of medical document | |
JP7000206B2 (en) | Medical image processing equipment, medical image processing methods, and medical image processing programs | |
US11468659B2 (en) | Learning support device, learning support method, learning support program, region-of-interest discrimination device, region-of-interest discrimination method, region-of-interest discrimination program, and learned model | |
JP7237089B2 (en) | MEDICAL DOCUMENT SUPPORT DEVICE, METHOD AND PROGRAM | |
US20220028510A1 (en) | Medical document creation apparatus, method, and program | |
US11688498B2 (en) | Medical document display control apparatus, medical document display control method, and medical document display control program | |
US20230005580A1 (en) | Document creation support apparatus, method, and program | |
WO2019102917A1 (en) | Radiologist determination device, method, and program | |
WO2021193548A1 (en) | Document creation assistance device, method, and program | |
US11923069B2 (en) | Medical document creation support apparatus, method and program, learned model, and learning apparatus, method and program | |
JP7109345B2 (en) | Priority determination device, method and program | |
JP7299314B2 (en) | Medical documentation device, method and program, learning device, method and program, and trained model | |
WO2022215530A1 (en) | Medical image device, medical image method, and medical image program | |
WO2022153702A1 (en) | Medical image display device, method, and program | |
US20220277577A1 (en) | Document creation support apparatus, document creation support method, and document creation support program | |
WO2022196106A1 (en) | Document creation device, method, and program | |
JP7371220B2 (en) | Information processing device, information processing method, and information processing program | |
JP2021175454A (en) | Medical image processing apparatus, method and program | |
JP7376715B2 (en) | Progress prediction device, method of operating the progress prediction device, and progress prediction program | |
US20230225681A1 (en) | Image display apparatus, method, and program | |
US20230281810A1 (en) | Image display apparatus, method, and program | |
WO2021172477A1 (en) | Document creation assistance device, method, and program | |
US20230121783A1 (en) | Medical image processing apparatus, method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210402 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220607 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220714 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221115 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230207 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230228 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7237089 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |