JP2007282794A - Image display - Google Patents
Image display Download PDFInfo
- Publication number
- JP2007282794A JP2007282794A JP2006112367A JP2006112367A JP2007282794A JP 2007282794 A JP2007282794 A JP 2007282794A JP 2006112367 A JP2006112367 A JP 2006112367A JP 2006112367 A JP2006112367 A JP 2006112367A JP 2007282794 A JP2007282794 A JP 2007282794A
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- control unit
- images
- time difference
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Endoscopes (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
この発明は、時系列に沿って撮像した被検体内の一連の画像を表示する画像表示装置に関し、特に、複数の撮像素子を搭載した多眼のカプセル型内視鏡によって撮像された複数の画像を表示する画像表示装置に関するものである。 The present invention relates to an image display device that displays a series of images in a subject taken in time series, and in particular, a plurality of images taken by a multi-lens capsule endoscope equipped with a plurality of image sensors. The present invention relates to an image display device that displays
従来から、内視鏡分野においては、撮像機能と無線通信機能とを備えた飲込み型のカプセル型内視鏡が提案され、このようなカプセル型内視鏡を用いて被検体内の画像を取得する被検体内情報取得システムが開発されている。カプセル型内視鏡は、観察(検査)のために被検体の口から飲込まれた後、自然排出されるまでの間、体腔内、例えば胃、小腸等の臓器の内部をその蠕動運動に従って移動するとともに、例えば0.5秒間隔で被検体内の画像を順次撮像する。 Conventionally, in the field of endoscope, a swallowable capsule endoscope having an imaging function and a wireless communication function has been proposed, and an image in a subject can be captured using such a capsule endoscope. An in-subject information acquisition system has been developed. The capsule endoscope is swallowed through the body cavity, for example, the stomach, small intestine, and other organs, after being swallowed from the subject's mouth for observation (examination) and before being spontaneously discharged. While moving, images in the subject are sequentially captured at intervals of, for example, 0.5 seconds.
カプセル型内視鏡が被検体内を移動する間、このカプセル型内視鏡によって撮像された画像は、順次無線通信によって外部の受信装置に送信される。受信装置は、無線通信機能とメモリ機能とを有し、被検体内のカプセル型内視鏡から受信した画像をメモリに順次保存する。被検体は、かかる受信装置を携帯することによって、カプセル型内視鏡を飲込んでから自然排出するまでの間に亘り、自由に行動できる。カプセル型内視鏡が被検体から自然排出された後、医師または看護師においては、受信装置のメモリに蓄積された画像を画像表示装置に取り込ませ、被検体内の臓器の画像を画像表示装置に表示させて被検体の診断を行うことができる(例えば、特許文献1参照)。 While the capsule endoscope moves in the subject, images captured by the capsule endoscope are sequentially transmitted to an external receiving device by wireless communication. The receiving device has a wireless communication function and a memory function, and sequentially stores images received from the capsule endoscope in the subject in the memory. The subject can act freely by carrying such a receiving apparatus from swallowing the capsule endoscope to spontaneous discharge. After the capsule endoscope is spontaneously ejected from the subject, the doctor or nurse takes the image stored in the memory of the receiving device into the image display device, and the image of the organ in the subject is displayed in the image display device. It is possible to make a diagnosis of a subject by displaying the information (for example, see Patent Document 1).
一方、このような被検体内情報取得システムには、複数の撮像素子を搭載した多眼のカプセル型内視鏡が用いられる場合もある。かかる多眼のカプセル型内視鏡は、互いに異なる方向を撮像する複数の撮像素子を有し、かかる複数の撮像素子によって撮像された複数方向の画像を取得する(例えば、特許文献2参照)。この場合、多眼のカプセル型内視鏡は、取得した複数方向の画像を受信装置に無線送信する。受信装置は、かかる多眼のカプセル型内視鏡によって撮像された複数方向の画像を順次蓄積する。画像表示装置は、かかる受信装置に蓄積された複数方向の画像を取り込み、取得した複数方向の画像を上述した多眼のカプセル型内視鏡の撮像素子毎に分類し、保存する。その後、画像表示装置は、このように撮像素子毎に分類した各画像群の画像を順次表示する。 On the other hand, in such an in-subject information acquisition system, a multi-lens capsule endoscope equipped with a plurality of image sensors may be used. Such a multi-lens capsule endoscope has a plurality of image sensors that capture images in different directions, and acquires images in a plurality of directions imaged by the plurality of image sensors (see, for example, Patent Document 2). In this case, the multi-lens capsule endoscope wirelessly transmits the acquired images in a plurality of directions to the receiving device. The receiving apparatus sequentially accumulates images in a plurality of directions captured by such a multi-lens capsule endoscope. The image display device captures images in a plurality of directions accumulated in the receiving device, classifies the acquired images in the plurality of directions for each imaging element of the multi-lens capsule endoscope described above, and stores the images. Thereafter, the image display device sequentially displays the images of the respective image groups classified for each imaging element in this way.
しかしながら、上述した従来の画像表示装置は、多眼のカプセル型内視鏡によって撮像された各画像群の画像を単に時系列に沿って同一画面に表示するので、かかる多眼のカプセル型内視鏡によって撮像された複数方向の画像、すなわち、全く異なる被写体が撮像された複数の画像を同一画面に並べて表示することになる。このような複数の画像を同時に観察しつつ各画像内容を把握することは困難であり、したがって、多眼のカプセル型内視鏡によって撮像された被検体内の画像の観察が困難であるという問題点があった。 However, the above-described conventional image display device displays images of each image group captured by the multi-lens capsule endoscope simply on the same screen in time series. A plurality of images captured by the mirror, that is, a plurality of images captured from completely different subjects are displayed side by side on the same screen. It is difficult to grasp the contents of each image while observing a plurality of such images at the same time. Therefore, it is difficult to observe an image in a subject imaged by a multi-lens capsule endoscope. There was a point.
本発明は、上記事情に鑑みてなされたものであって、多眼のカプセル型内視鏡によって撮像された被検体内の画像を観察し易い態様で表示できる画像表示装置を提供することを目的とする。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an image display device capable of displaying an image in a subject imaged by a multi-lens capsule endoscope in an easily observable manner. And
上述した課題を解決し、目的を達成するために、請求項1にかかる画像表示装置は、多眼のカプセル型内視鏡に搭載した撮像素子群によって撮像された被検体内の複数の画像群のうちの第1および第2の画像群にそれぞれ含まれる各画像を表示する表示手段と、前記第1の画像群に含まれる第1の画像と前記第2の画像群に含まれる画像であって前記第1の画像に共通する被写体が撮像された第2の画像とを前記表示手段の各表示領域に同期表示する同期表示モードを設定する設定手段と、前記設定手段によって前記同期表示モードが設定された場合、前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行う制御手段と、を備えたことを特徴とする。
In order to solve the above-described problems and achieve the object, an image display device according to
また、請求項2にかかる画像表示装置は、上記の発明において、前記設定手段は、前記第1の画像の撮像時刻と前記第2の画像の撮像時刻との時間差を設定し、前記制御手段は、前記時間差を有する前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行うことを特徴とする。 According to a second aspect of the present invention, in the above invention, the setting means sets a time difference between the imaging time of the first image and the imaging time of the second image, and the control means The first image having the time difference and the second image are controlled to be synchronously displayed on each display area of the display means.
また、請求項3にかかる画像表示装置は、上記の発明において、前記第1の画像の撮像時刻と前記第2の画像の撮像時刻との時間差を前記被検体内の部位毎に設定したデフォルトデータを保存する記憶手段を備え、前記制御手段は、前記デフォルトデータをもとに前記時間差を前記被検体内の部位毎に切り替えるとともに、前記被検体内の部位毎に設定された前記時間差を有する前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行うことを特徴とする。 According to a third aspect of the present invention, there is provided the image display device according to the above invention, wherein the time difference between the imaging time of the first image and the imaging time of the second image is set for each region in the subject. Storage means for storing, the control means switches the time difference for each part in the subject based on the default data, and has the time difference set for each part in the subject Control for synchronously displaying the first image and the second image in each display area of the display means is performed.
また、請求項4にかかる画像表示装置は、上記の発明において、前記設定手段は、前記時間差を変更できることを特徴とする。 According to a fourth aspect of the present invention, in the above invention, the setting means can change the time difference.
また、請求項5にかかる画像表示装置は、上記の発明において、前記設定手段は、前記第1の画像と前記第2の画像とのフレーム番号の差を設定し、前記制御手段は、前記フレーム番号の差を有する前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行うことを特徴とする。 According to a fifth aspect of the present invention, in the above invention, the setting means sets a difference in frame numbers between the first image and the second image, and the control means Control is performed to synchronously display the first image and the second image having a number difference in each display area of the display means.
また、請求項6にかかる画像表示装置は、上記の発明において、前記第1の画像と前記第2の画像とのフレーム番号の差を前記被検体内の部位毎に設定したデフォルトデータを保存する記憶手段を備え、前記制御手段は、前記デフォルトデータをもとに前記フレーム番号の差を前記被検体内の部位毎に切り替えるとともに、前記被検体内の部位毎に設定された前記フレーム番号の差を有する前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行うことを特徴とする。 According to a sixth aspect of the present invention, in the above invention, the image display device stores default data in which a difference in frame number between the first image and the second image is set for each region in the subject. Storage means, wherein the control means switches the frame number difference for each part in the subject based on the default data, and the frame number difference set for each part in the subject. Control is performed to display the first image and the second image having the above in synchronization with each display area of the display means.
また、請求項7にかかる画像表示装置は、上記の発明において、前記設定手段は、前記フレーム番号の差を変更できることを特徴とする。 According to a seventh aspect of the present invention, in the above invention, the setting means can change the difference between the frame numbers.
また、請求項8にかかる画像表示装置は、上記の発明において、前記表示手段は、前記第1の画像に対応する第1の縮小画像と前記第2の画像に対応する第2の縮小画像とをさらに表示し、前記設定手段は、前記第1の縮小画像と前記2の縮小画像との関連付けを設定することを特徴とする。
In the image display apparatus according to
また、請求項9にかかる画像表示装置は、上記の発明において、前記表示手段は、前記第1の縮小画像と前記第2の縮小画像との関連付けを示す指標を表示することを特徴とする。 According to a ninth aspect of the present invention, in the above invention, the display means displays an index indicating an association between the first reduced image and the second reduced image.
また、請求項10にかかる画像表示装置は、上記の発明において、前記表示手段は、前記第1の画像群に含まれる画像の時間的な位置を示す第1のタイムスライダと前記第2の画像群に含まれる画像の時間的な位置を示す第2のタイムスライダとを表示し、前記第1のタイムスライダおよび前記第2のタイムスライダは、前記第1の画像と前記第2の画像との前記時間差または前記フレーム番号の差を設定する前記設定手段の一つであることを特徴とする。 According to a tenth aspect of the present invention, in the image display device according to the first aspect, the display means includes a first time slider indicating a temporal position of an image included in the first image group and the second image. A second time slider indicating a temporal position of an image included in the group, wherein the first time slider and the second time slider are the first image and the second image. It is one of the setting means for setting the time difference or the frame number difference.
また、請求項11にかかる画像表示装置は、上記の発明において、前記第2の画像は、前記第1の画像に共通する被写体を前記第1の画像と異なる撮像方向から撮像したものであることを特徴とする。
Further, in the image display device according to
また、請求項12にかかる画像表示装置は、上記の発明において、前記設定手段は、前記第1の画像群に含まれる画像を時系列に沿って表示する表示モードと前記第2の画像群に含まれる画像を時系列に沿って表示する表示モードとを独立して設定することを特徴とする。 According to a twelfth aspect of the present invention, in the above invention, the setting unit includes a display mode for displaying images included in the first image group in time series and the second image group. It is characterized in that the display mode for displaying the included images in time series is set independently.
この発明によれば、被検体の複数の画像群にそれぞれ含まれる第1および第2の画像に共通する同一被写体を複数の撮像方向から撮像して得られる画像同士を表示部の各表示領域に順次同期表示できる。この結果、多眼のカプセル型内視鏡に搭載した撮像素子群によって撮像された被検体内の多方向の画像群にそれぞれ含まれる各画像を観察し易い態様で順次表示できる画像表示装置を実現することができるという効果を奏する。 According to the present invention, images obtained by imaging the same subject common to the first and second images respectively included in a plurality of image groups of the subject from a plurality of imaging directions are displayed in each display area of the display unit. Sequentially synchronous display is possible. As a result, an image display device capable of sequentially displaying each image included in the multidirectional image group in the subject imaged by the imaging element group mounted on the multi-lens capsule endoscope in an easily observable manner is realized. There is an effect that can be done.
以下、図面を参照して、本発明にかかる画像表示装置の好適な実施の形態を詳細に説明する。なお、この実施の形態によって本発明が限定されるものではない。 DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, exemplary embodiments of an image display device according to the invention will be described in detail with reference to the drawings. Note that the present invention is not limited to the embodiments.
(実施の形態1)
図1は、本発明の実施の形態1にかかる画像表示装置を有する被検体内情報取得システムの一構成例を模式的に例示する模式図である。図1に示すように、この被検体内情報取得システムは、被検体1の消化管内を移動するとともに被検体1内の画像を撮像するカプセル型内視鏡2と、カプセル型内視鏡2によって送信された無線信号を受信し、受信した無線信号に含まれる画像を蓄積する受信装置3と、受信装置3に蓄積された画像、すなわちカプセル型内視鏡2によって撮像された画像を表示する画像表示装置4と、受信装置3と画像表示装置4との間のデータの受け渡しを行うための携帯型記録媒体5とを備える。
(Embodiment 1)
FIG. 1 is a schematic diagram schematically illustrating a configuration example of an in-vivo information acquiring system including an image display device according to the first embodiment of the present invention. As shown in FIG. 1, this in-subject information acquisition system includes a
カプセル型内視鏡2は、互いに異なる方向の画像をそれぞれ撮像する撮像素子群を搭載した多眼のカプセル型内視鏡である。このような多眼のカプセル型内視鏡2は、被検体1の内部に導入され、この被検体1内の複数方向の画像を時系列に沿って順次撮像する多方向の撮像機能と、撮像した多方向の画像群を外部に無線送信する無線通信機能とを有する。具体的には、カプセル型内視鏡2は、被検体1に飲込まれることによって被検体1内の食道を通過し、消化管腔の蠕動によって体腔内を進行する。これと同時に、カプセル型内視鏡2は、所定間隔、例えば0.5秒間隔で被検体1内の多方向の画像を逐次撮像し、所定の電波を介して、かかる被検体1内の多方向の画像を受信装置3に逐次送信する。
The
受信装置3は、例えば被検体1の体表上に分散配置された複数の受信アンテナ3a〜3hが接続され、かかる複数の受信アンテナ3a〜3hのいずれかを介してカプセル型内視鏡2からの無線信号を受信し、受信した無線信号をもとに被検体1内の多方向の画像を取得する。また、受信装置3は、携帯型記録媒体5が着脱可能に挿着され、カプセル型内視鏡2からの無線信号をもとに逐次取得した画像、すなわちカプセル型内視鏡2によって撮像された多方向の画像を携帯型記録媒体5に逐次格納する。このようにして、受信装置3は、カプセル型内視鏡2の撮像素子群が時系列に沿ってそれぞれ撮像した被検体1内の多方向の画像群(すなわち撮像素子毎に分類される複数の画像群)を携帯型記録媒体5に蓄積する。
The receiving device 3 is connected to, for example, a plurality of receiving
受信アンテナ3a〜3hは、例えばループアンテナを用いて実現され、カプセル型内視鏡2によって送信された無線信号を受信する。受信アンテナ3a〜3hは、図1に示すように、被検体1の体表上の所定位置、例えば被検体1内におけるカプセル型内視鏡2の通過経路(すなわち消化管)に対応する位置に分散配置される。なお、受信アンテナ3a〜3hは、被検体1に着用させるジャケットの所定位置に分散配置されてもよい。この場合、受信アンテナ3a〜3hは、被検体1がこのジャケットを着用することによって、被検体1内におけるカプセル型内視鏡2の通過経路に対応する被検体1の体表上の所定位置に配置される。このような受信アンテナは、被検体1に対して1以上配置されればよく、その配置数は、特に8つに限定されない。
The receiving
携帯型記録媒体5は、コンパクトフラッシュ(登録商標)等の携帯可能な記録メディアである。携帯型記録媒体5は、受信装置3および画像表示装置4に対して着脱可能であって、両者に対する挿着時にデータの出力および記録が可能な構造を有する。具体的には、携帯型記録媒体5は、受信装置3に挿着された場合、受信装置3によって取得されたカプセル型内視鏡2による多方向の画像群およびその撮像時刻等の各種データを逐次格納する。一方、携帯型記録媒体5は、画像表示装置4に挿着された場合、上述したカプセル型内視鏡2による多方向の画像群等の保存データを画像表示装置4に出力する。このようにして、携帯型記録媒体5の保存情データは、画像表示装置4に取り込まれる。また、携帯型記録媒体5は、カプセル型内視鏡検査の被検体1に関する情報等が画像表示装置4によって書き込まれる。なお、このカプセル型内視鏡検査とは、被検体1の内部にカプセル型内視鏡2を導入し、かかるカプセル型内視鏡2によって撮像された画像を観察するものである。
The
画像表示装置4は、カプセル型内視鏡2によって撮像された多方向の画像等を表示するためのものである。具体的には、画像表示装置4は、受信装置3によって携帯型記録媒体5に蓄積された各種データを取り込むことによって、カプセル型内視鏡2によって撮像された多方向の画像等の各種データを取得し、得られたデータをもとに被検体1内の多方向の画像を表示するワークステーション等のような構成を有する。この場合、画像表示装置4は、取得した多方向の画像群をカプセル型内視鏡2の撮像素子毎に分類して記憶部に保存する。このような画像表示装置4は、かかる被検体1内の多方向の画像群のうちの一方の画像群に含まれる各画像と他方の画像群に含まれる各画像との少なくとも一つを所定の表示領域内に順次表示する画像表示機能を有する。さらに、画像表示装置4は、医師または看護師等のユーザが被検体1内の画像を観察(検査)して被検体1を診断するための処理機能を有する。この場合、ユーザは、画像表示装置4に被検体1内の画像を順次表示させて被検体1内の部位、例えば食道、胃、小腸、および大腸等を観察(検査)し、これをもとに、被検体1を診断できる。
The
つぎに、本発明の実施の形態1にかかる画像表示装置4の構成について説明する。図2は、本発明の実施の形態1にかかる画像表示装置4の一構成例を模式的に示すブロック図である。図2に示すように、この画像表示装置4は、各種情報またはデータを入力する入力部11と、被検体1内の画像およびGUI(Graphical User Interface)等を画面表示する表示部12と、被検体1内の画像等の携帯型記録媒体5に蓄積された保存データを取り込むためのカードインターフェース(I/F)13とを有する。また、画像表示装置4は、外部のコンピュータまたはプリンタ等あるいは可搬の記録媒体に対して各種情報またはデータを入出力するための入出力I/F14と、被検体1の画像等の各種データを保存する記憶部15と、画像表示装置4の各構成部の駆動を制御する制御部16とを有する。
Next, the configuration of the
入力部11は、キーボードおよびマウス等の入力デバイスを用いて実現され、ユーザによる入力操作によって、制御部16に各種情報またはデータを入力する。具体的には、入力部11は、制御部16に対して指示する指示情報、被検体1に関する患者情報、表示部12に表示する被検体1の画像の画像表示モードを設定するための設定情報、かかる画像表示モードで被検体1の画像を表示するために必要なデータ等を入力する。
The
なお、この患者情報は、被検体1に対するカプセル型内視鏡検査を行うための受信装置として受信装置3を初期設定するために、例えば携帯型記録媒体5を媒介して受信装置3に登録されるものである。かかる患者情報として、例えば被検体1の患者名、性別、生年月日、および患者ID等が例示される。
The patient information is registered in the receiving device 3 through, for example, the
表示部12は、CRTディスプレイまたは液晶ディスプレイ等の各種ディスプレイを用いて実現され、制御部16によって表示指示された各種情報またはデータ等を表示する。具体的には、表示部12は、被検体1を観察し診断するための各種情報およびデータ、例えば、カプセル型内視鏡2の撮像素子群によって撮像された被検体1の複数の画像のうちの2つの画像群にそれぞれ含まれる各画像等を表示する。また、表示部12は、かかる被検体1の画像を表示する各種画像表示モードを設定する設定手段として機能するGUIを表示する。このようなGUIは、各種画像表示モードを設定する他に、設定した画像表示モードで被検体1の画像を表示するために必要なデータ(例えば後述する時間差データ)を設定する設定手段として機能し、さらに、かかる被検体1の画像を表示操作する操作手段として機能する。
The
カードI/F13は、上述した携帯型記録媒体5の保存データを取り込むためのものである。具体的には、カードI/F13は、携帯型記録媒体5が着脱可能に挿着され、かかる携帯型記録媒体5に蓄積された保存データを読み出すとともに、得られた保存データを制御部16に転送する。また、カードI/F13は、挿着された携帯型記録媒体5に対し、制御部16によって書き込み指示された情報、例えば上述した患者情報等を書き込む。
The card I /
入出力I/F14は、例えば外部のコンピュータまたはプリンタ等の周辺機器と画像表示装置4との間で各種データを入出力し、あるいは、挿着された可搬な記録媒体と画像表示装置4との間で各種データを入出力する。具体的には、入出力I/F14は、フレキシブルディスク(FD)、コンパクトディスク(CD)、またはDVD(Digital Versatile Disk)等の可搬な記録媒体を着脱可能に挿着でき、挿着された記録媒体に対して各種データの読取処理または書込処理を行うドライブ等を用いて実現される。また、入出力I/F14は、所定のケーブルまたはLANを介して外部のコンピュータまたはプリンタ等の周辺機器にデータ通信可能な構造を有する。このような入出力I/F14は、制御部16によって書き込み指示されたデータをドライブ内の記録媒体に書き込み、または、制御部16によって出力指示されたデータを外部のコンピュータまたはプリンタ等の周辺機器に出力する。また、入出力I/F14は、制御部16によって読み取り指示されたデータをドライブ内の記録媒体から読み取り、得られたデータを制御部16に転送する。
The input / output I /
記憶部15は、RAM、EEPROM、またはハードディスク等の各種データおよび情報の保存および読み出しが可能な情報記録手段を用いて実現され、制御部16によって書き込み指示された情報またはデータを保存し、制御部16によって読み出し指示された保存情報または保存データを制御部16に送信する。このような記憶部15は、被検体1の画像群、患者情報、および検査情報(例えば検査日および検査ID)等を含む被検体1の検査ファイルを保持管理するための検査フォルダ15aと、画像表示装置4の処理機能によって生成した被検体1のカルテ(レポート)、静止画像、および動画像等の各種ファイルを保持管理するための管理フォルダ15bとを有する。この場合、記憶部15は、かかる検査フォルダ15a内に、上述した多眼のカプセル型内視鏡2の撮像素子群によって撮像された被検体1内の画像群のうちの第1画像群PG1と第2画像群PG2とを保存する。
The
なお、かかる第1画像群PG1および第2画像群PG2は、上述した多眼のカプセル型内視鏡2に搭載した撮像素子群のうちの互いに異なる方向の画像を撮像する2つの撮像素子によってそれぞれ撮像された画像群である。例えば、第1画像群PG1は、カプセル型内視鏡2の前方向(すなわち被検体1の消化管内における進行方向)の画像を撮像する撮像素子によって撮像されたものである。一方、第2画像群PG2は、カプセル型内視鏡2の後方向(すなわち被検体1の消化管内における進行方向に対して反対方向)の画像を撮像する撮像素子によって撮像されたものである。
Note that the first image group PG1 and the second image group PG2 are respectively provided by two image sensors that capture images in different directions from among the image sensor groups mounted on the
制御部16は、上述したように、画像表示装置4の各構成部、例えば入力部11、表示部12、カードI/F13、入出力I/F14、および記憶部15の各駆動を制御し、かかる各構成部との間の情報の入出力を制御する。具体的には、制御部16は、携帯型記録媒体5を媒介にして取得した被検体1の多方向の画像群(例えば上述した第1画像群PG1および第2画像群PG2)と、かかる多方向の画像群に含まれる各画像の撮像時刻に関する時間情報と、被検体1の患者情報と、被検体1に対する検査情報とを対応付けてファイル化した検査ファイルを生成し、得られた検査ファイルを検査フォルダ15aに保存する。この場合、制御部16は、かかる検査フォルダ15aに保存した各検査ファイルを例えば被検体毎または検査ID毎に保持管理する。
As described above, the
このような制御部16は、表示制御部16a、画像処理部16b、レポート作成部16c、および画像ファイル作成部16dを有する。表示制御部16aは、複数の画像表示モードを有し、かかる複数の画像表示モードの中から選択したモードに応じて表示部12の表示動作を制御する。
Such a
画像処理部16bは、携帯型記録媒体5を媒介して取得した被検体1内の複数の画像群に対して各種処理を行う。具体的には、画像処理部16bは、携帯型記録媒体5を媒介して取得した複数の画像群に対して所定の画像処理を行い、かかる複数の画像群(すなわち多方向の画像群)をカプセル型内視鏡2の撮像素子毎に分類し、分類した各画像群(例えば第1画像群および第2画像群)を記憶部15に保存する。また、画像処理部16bは、入力部11によって入力された指示情報に基づいて、表示部12の表示領域に表示された画像の縮小画像(例えばサムネイル画像)を作成する。
The
レポート作成部16cは、入力部11によって入力された各種情報および被検体1の画像等を用いて、被検体1に関する診断結果等を記載したレポートを作成する。画像ファイル作成部16dは、検査ファイルに含まれる画像群(例えば被検体1の第1画像群PG1または第2画像群PG2)をもとに、所望の静止画像または動画像の画像ファイルを作成する。
The
つぎに、表示部12の表示画面を具体的に例示し、表示部12に表示した各種GUIと表示部12の表示動作を制御する表示制御部16aの動作とを説明する。図3は、表示部12に表示される各種GUIの一具体例を模式的に示す模式図である。表示制御部16aは、制御部16によって所定のログイン処理が行われた場合、図3に示すようなウィンドウW1を表示部12に表示させる。
Next, the display screen of the
このウィンドウW1には、記憶部15の検査フォルダ15a内に保存された第1画像群PG1に含まれる画像Pn(n=0,1,2,3,…)と、第2画像群PG2に含まれる画像Qm(m=0,1,2,3,…)と、上述した各種GUIとが表示される。具体的には、図3に示すように、ウィンドウW1には、かかる画像Pn,Qmを表示する主画像表示領域100と、主画像表示領域100に表示する画像の各種表示操作を行うための操作GUIである表示操作アイコン群110と、主画像表示領域100に表示された画像の縮小画像(例えばサムネイル画像)を作成指示するためのGUIであるキャプチャーアイコン120とが形成される。この場合、主画像表示領域100は、かかる画像Pnを順次表示する表示領域101と、かかる画像Qmを順次表示する表示領域102とを有する。
In this window W1, images P n (n = 0, 1, 2, 3,...) Included in the first image group PG1 stored in the
また、ウィンドウW1には、上述した表示制御部16aが有する複数の画像表示モードのうちのいずれかを設定する設定GUIである同期アイコン130と、主画像表示領域100内の各表示領域101,102にそれぞれ表示される画像Pnの撮像時刻とQmの撮像時刻との時間差ΔTを設定するデータ設定領域131とが形成される。さらに、ウィンドウW1には、主画像表示領域100に表示される第1画像群PG1および第2画像群PG2の時間的な長さ(例えば第1画像群PG1および第2画像群PG2の撮像開始からの経過時間)を示すタイムスケールTSと、表示領域101に表示されている画像Pnの時間的な位置(すなわち画像Pnに時間的に対応するタイムスケールTS上の位置)を指し示すGUIであるタイムスライダ132と、表示領域102に表示されている画像Qmの時間的な位置(すなわち画像Qmに時間的に対応するタイムスケールTS上の位置)を指し示すGUIであるタイムスライダ133とが形成される。
The window W1 includes a
ここで、タイムスライダ132は、表示領域101に表示されている画像Pnの時間的な位置を指し示すとともに、表示制御部16aの制御に基づいて、表示領域101における画像Pnの切り替わりに同期してタイムスケールTS上を時系列の順方向または逆方向に移動する。この場合、表示制御部16aは、かかるタイムスライダ132の移動に同期して、このタイムスライダ132によって指し示される現在の時間的な位置に対応する画像Pnを表示領域101に表示させる。一方、タイムスライダ133は、表示領域102に表示されている画像Qmの時間的な位置を指し示すとともに、表示制御部16aの制御に基づいて、表示領域102における画像Qmの切り替わりに同期してタイムスケールTS上を時系列の順方向または逆方向に移動する。この場合、表示制御部16aは、かかるタイムスライダ133の移動に同期して、このタイムスライダ133によって指し示される現在の時間的な位置に対応する画像Qmを表示領域102に表示させる。
Here, the
このようなタイムスライダ132,133は、入力部11を用いてドラッグ操作することによって、上述したデータ設定領域131と同様に画像Pn,Qmの時間差ΔTを設定できる。この場合、図3に示すように、かかるタイムスライダ132,133によって指し示される時間的な位置の間隔が、データ設定領域131に表示される画像Pn,Qmの時間差ΔTに対応する。
したがって、上述した同期アイコン130、データ設定領域131、およびタイムスライダ132,133は、時間差ΔTを有する画像Pn,Qmを各表示領域101,102に同期表示する同期表示モードを表示制御部16aの画像表示モードとして設定する設定手段として機能するGUIである。このような同期アイコン130は、入力部11を用いてクリック操作が行われた場合に同期表示モードを設定する。具体的には、入力部11は、同期アイコン130のクリック操作を1度行うことによって同期表示モードを設定指示する設定情報を制御部16に入力する。この場合、表示制御部16aは、入力部11によって入力された設定情報に基づいて、複数の画像表示モードの中から同期表示モードを選択する。
Accordingly, the
また、同期アイコン130は、このようなクリック操作が再度行われた場合に表示制御部16aの画像表示モードとして通常表示モードを設定する(すなわち同期表示モードを解除する)。具体的には、入力部11は、同期アイコン130のクリック操作を再度行うことによって通常表示モードを設定指示する設定情報を制御部16に入力する。この場合、表示制御部16aは、入力部11によって入力された設定情報に基づいて、複数の画像表示モードの中から通常表示モードを選択する。
The
なお、かかる同期表示モードは、画像Pnと該画像Pnに共通する被写体(例えば病変部E)が撮像された画像Qmとを各表示領域101,102に同期表示する画像表示モードである。このような同期表示モードにおいて、各表示領域101,102に同期表示された画像Pn,Qmの各撮像時刻の差は、上述したデータ設定領域131またはタイムスライダ132,133によって設定された時間差ΔTとほぼ同等である。この場合、第1画像群PG1における画像Pnのフレーム番号n(n=0,1,2,3,…)と第2画像群PG2における画像Qmのフレーム番号m(m=0,1,2,3,…)との差は、かかる時間差ΔTに対応する。例えば、第1画像群PG1および第2画像群PG2がともに1画像当たり0.5秒間隔で撮像されたものである場合、画像Pn,Qmの撮像時刻の時間差ΔTを1000msecに設定すれば、かかる画像Pn,Qmのフレーム番号の差(m−n)は2である。
Note that this synchronous display mode is an image display mode in which the image P n and the image Q m obtained by imaging the subject common to the image P n (for example, the lesion E) are synchronously displayed in the
一方、上述した通常表示モードは、時間差ΔTによらず、各表示領域101,102に画像Pn,Qmをフレーム番号に沿って順次表示する画像表示モードである。かかる通常表示モードにおいて、各表示領域101,102に表示された画像Pn,Qmの各フレーム番号n,mは、通常、同値である。
On the other hand, the above-described normal display mode is an image display mode in which the images P n and Q m are sequentially displayed along the frame numbers in the
また、図3に示すように、ウィンドウW1は、キャプチャーアイコン120のクリック操作によって作成指示された画像Pn,Qmの各縮小画像を追加表示する副画像表示領域140と、この副画像表示領域140に表示された縮小画像(例えばサムネイル画像)のスクロール操作を行うためのスクロールバー141とが形成される。具体的には、入力部11は、キャプチャーアイコン120のクリック操作を行うことによって、各表示領域101,102に表示されている画像Pn,Qmの縮小画像を作成指示する指示情報を制御部16に入力する。この場合、画像処理部16bは、かかる指示情報が入力部11によって入力される毎に、画像Pn,Qmの各縮小画像を作成する。表示制御部16aは、かかる画像処理部16bによって作成された縮小画像を記憶部15に保存するとともに副画像表示領域140に順次追加表示させる。このようにして、副画像表示領域140には、例えば、表示領域101に表示された画像に対応するサムネイル画像SP1,SP2,SP3,SP5と、表示領域102に表示された画像に対応するサムネイル画像SP4,SP6とが表示される。
Further, as shown in FIG. 3, the window W1 includes a
その他、ウィンドウW1には、入力部11の操作によって各種GUIのクリック操作またはドラッグ操作等を行うためのカーソルKと、このようなウィンドウW1を閉じるためのCloseアイコン150とが形成される。
In addition, a cursor K for performing click operations or drag operations of various GUIs by operating the
ここで、かかるウィンドウW1に表示された表示操作アイコン群110は、再生アイコン111と、コマ再生アイコン112と、頭出しアイコン113と、逆再生アイコン114と、逆コマ再生アイコン115と、逆頭出しアイコン116とからなる。このような表示操作アイコン群110は、入力部11を用いたクリック操作によって各表示領域101,102の画像Pn,Qmの表示操作を設定する。この場合、入力部11は、表示操作アイコン群110のいずれかをクリック操作することによって、かかる表示操作アイコン群110に含まれるアイコンに応じた表示指示情報を制御部16に入力する。表示制御部16aは、かかる入力部11によって入力された表示指示情報に基づいて、各表示領域101,102に画像Pn,Qmを順次表示させる。
Here, the display
具体的には、表示制御部16aは、再生アイコン111のクリック操作が行われた場合、各表示領域101,102に画像Pn,Qmを時系列の順方向に沿って順次表示させ、コマ再生アイコン112のクリック操作が行われた場合、その都度、各表示領域101,102に画像Pn,Qmを時系列の順方向に沿って順次表示させる。また、表示制御部16aは、逆再生アイコン114のクリック操作が行われた場合、各表示領域101,102に画像Pn,Qmを時系列の逆方向に沿って順次表示させ、逆コマ再生アイコン115のクリック操作が行われた場合、その都度、各表示領域101,102に画像Pn,Qmを時系列の逆方向に沿って順次表示させる。
Specifically, when the
一方、表示制御部16aは、頭出しアイコン113のクリック操作が行われた場合、第1画像群PG1の最後尾の画像を表示領域101に表示させるとともに、第2画像群PG2の最後尾の画像を表示領域102に表示させる。また、表示制御部16aは、逆頭出しアイコン116のクリック操作が行われた場合、第1画像群PG1の先頭の画像を表示領域101に表示させるとともに、第2画像群PG2の先頭の画像を表示領域102に表示させる。
On the other hand, when the click operation of the
なお、上述した表示領域101,102は、画像が表示される場合に所定の色または模様によって枠状に強調表示される。この場合、表示領域101に表示される画像Pnの時間的な位置を指し示すタイムスライダ132および表示領域101に表示された画像に対応するサムネイル画像SP1,SP2,SP3,SP5は、かかる表示領域101の強調表示と同様に強調表示される。また、表示領域102に表示される画像Qmの時間的な位置を指し示すタイムスライダ133および表示領域102に表示された画像に対応するサムネイル画像SP4,SP6は、かかる表示領域102の強調表示と同様に強調表示される。このような強調表示によって、表示領域101とタイムスライダ132とサムネイル画像SP1,SP2,SP3,SP5との対応付けを容易に視認でき、且つ、表示領域102とタイムスライダ133とサムネイル画像SP4,SP6との対応付けを容易に視認できる。
The
つぎに、上述したデータ設定領域131またはタイムスライダ132,133を用いた時間差ΔTの設定について説明する。図4は、データ設定領域131またはタイムスライダ132,133を用いた時間差ΔTの設定手順を説明するための模式図である。
Next, setting of the time difference ΔT using the
図4において、まず、主画像表示領域100の各表示領域101,102に画像Pn,Qmをそれぞれ表示させる。つぎに、第1画像群PG1がカプセル型内視鏡2の前方向に撮像視野を向ける撮像素子によって撮像されたものである場合、各表示領域101,102に表示した画像Pn,Qmを参照しつつ入力部11を用いてタイムスライダ133をドラッグ操作し、タイムスライダ133を移動させるとともに画像Qmを順次切り替える。かかるタイムスライダ133のドラッグ操作によって、表示領域101に現在表示されている画像Pnに共通する被写体が撮像された画像Qmを第2画像群PG2の中から探し出し、かかる画像Pn,Qmを各表示領域101,102に表示させる。この場合、かかる画像Pn,Qmは、互いに共通する被写体を異なる方向からそれぞれ撮像したものになる。
In FIG. 4, first, images P n and Q m are displayed in the
この状態において、タイムスライダ132,133の間隔は、かかる画像Pn,Qmの時間差ΔTに対応する。このようにして、タイムスライダ132,133は、かかる画像Pn,Qmの時間差ΔTを設定できる。この場合、データ設定領域131には、かかるタイムスライダ132,133によって設定された時間差ΔTの数値が表示される。
In this state, the interval between the
あるいは、病変部Eまたは消化管内の特徴的な内壁が視点を変えて撮像された画像Pn,Qmを探し出すようにタイムスライダ132,133のドラッグ操作を行って、画像Pn,Qmの時間差ΔTを設定してもよい。
Alternatively, the
具体的には、主画像表示領域100の各表示領域101,102に画像Pn,Qmをそれぞれ表示させた後、表示領域101に表示した画像Pnを参照しつつ入力部11を用いてタイムスライダ132をドラッグ操作し、タイムスライダ132を移動させるとともに画像Pnを順次切り替える。かかるタイムスライダ132のドラッグ操作によって、特徴的な被写体(例えば病変部Eまたは消化管内の特徴的な内壁)が撮像された画像Pnを第1画像群PG1の中から探し出し、かかる特徴的な被写体の画像Pnを表示領域101に表示させる。
Specifically, the images P n and Q m are displayed on the
つぎに、表示領域102に表示した画像Qmを参照しつつ入力部11を用いてタイムスライダ133をドラッグ操作し、タイムスライダ133を移動させるとともに画像Qmを順次切り替える。かかるタイムスライダ133のドラッグ操作によって、上述した画像Pnに共通する特徴的な被写体が撮像された画像Qmを第2画像群PG2の中から探し出し、かかる特徴的な被写体の画像Qmを表示領域102に表示させる。この場合、かかる画像Pn,Qmは、互いに共通する特徴的な被写体を異なる方向からそれぞれ撮像したものになる。
Then, the
この状態において、タイムスライダ132,133の間隔は、かかる画像Pn,Qmの時間差ΔTに対応し、この結果、タイムスライダ132,133は、かかる画像Pn,Qmの時間差ΔTを設定できる。この場合も、データ設定領域131には、かかるタイムスライダ132,133によって設定された時間差ΔTの数値が表示される。
In this state, the interval between the
なお、かかる画像Pn,Qmの時間差ΔTは、入力部11を用いてデータ設定領域131に直接数値入力しても設定できる。この場合、タイムスライダ132,133は、データ設定領域131に入力された時間差ΔTに対応する間隔をなすように移動する。
The time difference ΔT between the images P n and Q m can also be set by directly inputting a numerical value into the
このようなデータ設定領域131またはタイムスライダ132,133によって時間差ΔTが設定された場合、入力部11は、かかる時間差ΔTに対応する時間差データを制御部16に入力する。この場合、制御部16は、かかる入力部11によって入力された時間差データを記憶部15に保存し、この時間差データを上述した同期表示モードにおける画像Pn,Qmの時間差ΔTとして保持管理する。また、制御部16は、かかるデータ設定領域131またはタイムスライダ132,133によって時間差ΔTが再設定された場合、記憶部15に保持管理していた時間差データを再設定後(すなわち変更後)の時間差ΔTに対応する時間差データに更新する。
When the time difference ΔT is set by the
つぎに、同期表示モードにおいて各表示領域101,102に画像Pn,Qmを同期表示する制御を行う制御部16の動作について説明する。図5は、GUIを用いて設定した時間差ΔTを有する画像Pn,Qmを各表示領域101,102に同期表示させる制御部16の処理手順を説明するフローチャートである。
Next, the operation of the
図5において、まず、制御部16は、上述した同期アイコン130によって設定された同期表示モードを画像表示モードとして選択する(ステップS101)。この場合、表示制御部16aは、同期アイコン130のクリック操作によって入力部11から入力される設定情報に基づいて、複数の画像表示モードの中から同期表示モードを選択する。このように同期表示モードが設定された場合、制御部16は、上述したデータ設定領域131またはタイムスライダ132,133によって設定された時間差データを記憶部15から読み出す(ステップS102)。表示制御部16aは、このように読み出した時間差データを同期表示モードにおける画像Pn,Qmの時間差ΔTとして取得する。
In FIG. 5, first, the
つぎに、制御部16は、第1画像群PG1のフレーム番号を初期化する(ステップS103)。この場合、表示制御部16aは、第1画像群PG1のうちの表示処理対象の画像のフレーム番号nを初期化する(例えばn=0にする)。続いて、制御部16は、設定された時間差データをもとに、第2画像群PG2のうちの表示処理対象のフレーム番号mを算出する(ステップS104)。この場合、表示制御部16aは、上述したステップS102において読み出した時間差データをもとに、表示領域101に同期表示する画像Pn(例えばn=0)に対して時間差ΔTを有する画像Qmのフレーム番号mを算出する。
Next, the
その後、制御部16は、かかる画像Pn,Qmの画像表示指示があったか否かを判断する(ステップS105)。具体的には、入力部11は、上述した表示操作アイコン群110に含まれるいずれかのアイコン(例えば再生アイコン111、コマ再生アイコン112、頭出しアイコン113、逆再生アイコン114、逆コマ再生アイコン115、逆頭出しアイコン116)をクリック操作した場合に、このクリック操作されたアイコンに対応した表示指示情報を制御部16に入力する。制御部16は、かかる表示指示情報が入力部11から入力されない場合、画像Pn,Qmの画像表示指示なしと判断し(ステップS105,No)、このステップS105を繰り返す。すなわち、制御部16は、かかる表示指示情報が入力部11によって入力されるまで、このステップS105を繰り返す。
Thereafter, the
一方、制御部16は、かかる表示指示情報が入力部11から入力された場合、この入力された表示指示情報に基づいて画像Pn,Qmの画像表示指示ありと判断し(ステップS105,Yes)、現在のフレーム番号n,mの各画像Pn,Qmを各表示領域101,102に同期表示させる(ステップS106)。この場合、表示制御部16aは、記憶部15に保存された第1画像群PG1の中から現在のフレーム番号n(n=0,1,2,3,…)の画像Pnを読み出し、得られた画像Pnを表示領域101に表示する制御を行う。かかる画像Pnの表示に同期して、表示制御部16aは、記憶部15に保存された第2画像群PG2の中から現在のフレーム番号mの画像Qmを読み出し、得られた画像Qmを表示領域102に表示する制御を行う。このようにして、表示制御部16aは、設定された時間差ΔTを有する画像Pn,Qmを各表示領域101,102に同期表示させる。
On the other hand, when such display instruction information is input from the
ここで、かかる現在のフレーム番号mは、ステップS106において表示領域101に表示させた画像Pnに対して時間差ΔTを有する画像Qmのフレーム番号である。したがって、かかる現在のフレーム番号mは、このフレーム番号nに対して時間差ΔTに対応するフレーム番号差α(α=1,2,3,・・・)を有する。すなわち、かかるステップS106において、表示制御部16aは、設定された時間差ΔTに対応するフレーム番号差αを有する画像Pn,Qm(m=n+α)を各表示領域101,102に表示させる。
Here, the current frame number m is the frame number of the image Q m having a time difference ΔT with respect to the image P n displayed in the
なお、かかるステップS106における現在のフレーム番号nは、上述したステップS103において初期化したフレーム番号n(=0)または後述するステップS107において更新したフレーム番号nである。 The current frame number n in step S106 is the frame number n (= 0) initialized in step S103 described above or the frame number n updated in step S107 described later.
その後、制御部16は、第1画像群PG1のフレーム番号nを更新する(ステップS107)。この場合、表示制御部16aは、つぎのステップS106において表示領域101に表示する画像Pnを記憶部15から読み出すために第1画像群PG1のフレーム番号nを更新(例えば+1加算)する。
Thereafter, the
つぎに、制御部16は、上述したデータ設定領域131またはタイムスライダ132,133によって時間差データが変更(再設定)されたか否かを判断する(ステップS108)。具体的には、入力部11は、データ設定領域131またはタイムスライダ132,133によって再設定された時間差データを制御部16に入力する。制御部16は、かかる再設定された時間差データが入力部11から入力されない場合、時間差ΔTの変更なしと判断し(ステップS108,No)、第2画像群PG2のフレーム番号mを更新する(ステップS109)。この場合、表示制御部16aは、つぎのステップS106において画像Pnに同期して表示領域102に表示する画像Qmを記憶部15から読み出すために第2画像群PG2のフレーム番号m(m=n+α)をフレーム番号nに合わせて更新(例えば+1加算)する。
Next, the
一方、制御部16は、かかる再設定された時間差データが入力部11から入力された場合、この入力された時間差データに基づいて時間差ΔTの変更ありと判断するとともに(ステップS108,Yes)、記憶部15内の時間差データを変更後の時間差ΔTに対応する時間差データに更新する。その後、制御部16は、かかる変更後の時間差データをもとに第2画像群PG2のフレーム番号mを算出する(ステップS110)。この場合、表示制御部16aは、かかる変更後(再設定後)の時間差データをもとに、つぎのステップS106において表示領域101に同期表示する画像Pnに対して変更後の時間差ΔTを有する画像Qmのフレーム番号m(m=n+β)を算出する。なお、このフレーム番号差βは、かかる変更後の時間差ΔTを有する画像Pn,Qmのフレーム番号差である。
On the other hand, when the reset time difference data is input from the
その後、制御部16は、各表示領域101,102に画像Pn,Qmを表示する制御に対して一時停止指示があったか否かを判断する(ステップS111)。具体的には、制御部16は、上述したステップS105においてコマ再生アイコン112、頭出しアイコン113、逆コマ再生アイコン115、および逆頭出しアイコン116のいずれかに対応する表示指示情報が入力部11から入力された場合に一時停止指示ありと判断する(ステップS111,Yes)。この場合、制御部16は、上述したステップS105に戻り、このステップS105以降の処理手順を繰り返す。
Thereafter, the
一方、制御部16は、上述したステップS105において再生アイコン111または逆再生アイコン114に対応する表示指示情報が入力部11から入力された場合に一時停止指示なしと判断する(ステップS111,No)。この場合、制御部16は、かかる同期表示モードにおける画像Pn,Qmの同期表示処理が終了したか否かを判断する(ステップS112)。
On the other hand, when the display instruction information corresponding to the
具体的には、制御部16は、上述したステップS107において更新したフレーム番号nが第1画像群PG1のフレーム数以上である場合、あるいは、上述したステップS109において更新したフレーム番号mまたは上述したステップS110において算出したフレーム番号mが第2画像群PG2のフレーム数以上である場合、かかる同期表示モードにおける画像Pn,Qmの同期表示処理が終了したと判断し(ステップS112,Yes)、かかる同期表示モードの同期表示処理を完了する。 Specifically, when the frame number n updated in step S107 described above is equal to or greater than the number of frames of the first image group PG1, or the frame number m updated in step S109 described above or the step described above. If the frame number m calculated in S110 is equal to or greater than the number of frames of the second image group PG2, it is determined that the synchronous display processing of the images P n and Q m in the synchronous display mode has been completed (Yes in step S112). The synchronous display process in the synchronous display mode is completed.
一方、制御部16は、上述したステップS107において更新したフレーム番号nが第1画像群PG1のフレーム数未満であり、且つ、上述したステップS109において更新したフレーム番号mまたは上述したステップS110において算出したフレーム番号mが第2画像群PG2のフレーム数未満である場合、かかる同期表示モードにおける画像Pn,Qmの同期表示処理が終了していないと判断し(ステップS112,No)、上述したステップS106に戻る。その後、制御部16は、このステップS106以降の処理手順を繰り返す。
On the other hand, the
つぎに、多眼のカプセル型内視鏡2の撮像素子群によって1画像当たり0.5秒間隔で被検体1内の第1画像群PG1および第2画像群PG2を撮像した場合を例示して、同期表示モードにおいて各表示領域101,102に画像Pn,Qmを順次同期表示する制御を行う制御部16の動作を具体的に説明する。図6は、設定した時間差ΔTを有する画像Pn,Qmを各表示領域101,102に順次同期表示させる制御部16の動作の一具体例を説明するための模式図である。
Next, the case where the first image group PG1 and the second image group PG2 in the subject 1 are imaged at intervals of 0.5 seconds per image by the imaging element group of the
図6において、第1画像群PG1は、多眼のカプセル型内視鏡2に搭載した撮像素子群のうち前方向(カプセル型内視鏡2の進行方向)に撮像視野を有する撮像素子2aによって例えば0.5秒間隔で撮像された画像群である。第2画像群PG2は、かかる撮像素子群のうちの後方向(カプセル型内視鏡2の進行方向に対して反対方向)に撮像視野を有する撮像素子2bによって例えば0.5秒間隔で撮像された画像群である。制御部16は、携帯型記録媒体5を媒介して取り込んだ多方向の画像群を記憶部15の検査フォルダ15a内に保存する。この場合、画像処理部16bは、かかる多方向の画像群をカプセル型内視鏡2の撮像素子毎に分類して第1画像群PG1と第2画像群PG2とを形成し、これらを検査フォルダ15a内に保存する。
In FIG. 6, the first image group PG <b> 1 is obtained by an
ここで、データ設定領域131またはタイムスライダ132,133によって時間差ΔTが設定され且つ同期アイコン130によって同期表示モードが設定された場合、制御部16は、上述したように、この時間差ΔTを有する画像Pn,Qmを各表示領域101,102に同期表示させる。具体的には、この時間差ΔTが例えば1000msecに設定された場合、表示制御部16aは、0.5秒間隔で撮像された第1画像群PG1の先頭の画像P0(フレーム番号n=0)と、0.5秒間隔で撮像された第2画像群PG2の中から画像P0に対して1000msecの時間差ΔTを有する画像Q2とを各表示領域101,102に同期表示させる。その後、表示制御部16aは、各表示領域101,102に対し、フレーム番号n=1の画像P1と該画像P1に対して1000msecの時間差ΔTを有する画像Q3とを同期表示させ、フレーム番号n=2の画像P2と該画像P2に対して1000msecの時間差ΔTを有する画像Q4とを同期表示させ、フレーム番号n=3の画像P3と該画像P3に対して1000msecの時間差ΔTを有する画像Q5とを同期表示させる。
Here, when the time difference ΔT is set by the
このように、表示制御部16aは、フレーム番号nの画像Pnと該画像Pnに対して1000msecの時間差ΔTを有する画像Qm(m=n+α)とを各表示領域101,102に順次同期表示させる。なお、第1画像群PG1および第2画像群PG2がそれぞれ1画像当たり0.5秒間隔で撮像された場合、1000msecの時間差ΔTを有する画像Pn,Qmのフレーム番号差αは2である。
Thus, the
また、表示制御部16aは、データ設定領域131またはタイムスライダ132,133によって時間差ΔTが変更(再設定)された場合、その都度、各表示領域101,102に同期表示させる画像Pn,Qmの時間差ΔTを変更後の時間差ΔTに切り替える。この場合、表示制御部16aは、かかる変更後のΔTに対応するフレーム番号差β(β:整数)を有する画像Pn,Qm(m=n+β)を各表示領域101,102に順次同期表示させる。
The
つぎに、同期表示モードにおいて各表示領域101,102に同期表示される画像Pn,Qmについて説明する。図7は、同期表示モードにおいて各表示領域101,102に同期表示した画像Pn,Qmの関係を説明するための模式図である。図7に示すように、設定された時間差ΔTを有する画像Pn,Qm(例えばm=n+2)は、同期表示モードにおける表示制御部16aの制御に基づいて、主画像表示領域100内の各表示領域101,102に同期表示される。
Next, the images P n and Q m that are synchronously displayed in the
このように各表示領域101,102に画像Pn,Qmを同期表示した場合、この画像Qmには、この画像Pnに共通する被写体が撮像されている。具体的には、撮像素子2aは、カプセル型内視鏡2の前方向(すなわち被検体1の消化管内におけるカプセル型内視鏡2の進行方向)に位置する例えば病変部Eを被写体に含む画像Pnを撮像する。一方、撮像素子2bは、カプセル型内視鏡2が病変部Eの位置を通過した後、このカプセル型内視鏡2の後方向に位置する病変部Eを被写体に含む画像Qmを撮像する。
When the images P n and Q m are synchronously displayed in the
ここで、かかる病変部Eが撮像素子2aによって一撮像方向から撮像されてから撮像素子2bによって他の撮像方向から撮像されるまでの経過時間は、同期表示モードにおいて各表示領域101,102に同期表示される画像Pn,Qmの時間差ΔTとほぼ同等である。すなわち、かかる経過時間とほぼ同等の時間差ΔTをデータ設定領域131またはタイムスライダ132,133を用いて設定することによって、かかる時間差ΔTを有する画像Pn,Qmは、互いに共通する被写体(例えば病変部E)を異なる撮像方向からそれぞれ撮像して得られる画像同士になる。
Here, the elapsed time from when the lesioned part E is imaged from one imaging direction by the
なお、かかる経過時間は、撮像素子2aがカプセル型内視鏡2の前方に位置する病変部Eを撮像してから、カプセル型内視鏡2が病変部Eの位置を通過し、その後、撮像素子2bがカプセル型内視鏡2の後方に位置する病変部Eを撮像するまでに経過した時間である。
Note that the elapsed time is such that after the
このように互いに共通する被写体が撮像された画像Pn,Qmを各表示領域101,102に順次同期表示することによって、医師または看護師等のユーザは、被検体1内の画像を容易に観察できるとともに、例えば病変部E等の特徴的な部位および一方向からでは観察し難い消化管の内壁(例えばひだ状の部位)等を複数の方向から容易に観察することができる。
Thus the image P n which subject to common is imaged together, by displaying sequential synchronization on each of the
つぎに、制御部16が有するレポート作成部16cについて説明する。レポート作成部16cは、上述したように、入力部11によって入力された各種情報および被検体1の画像等を用いて、この被検体1に関する診断結果等を記載したレポートを作成する。この場合、レポート作成部16cは、かかるレポートの所望の位置に、被検体1を検査した施設のファシリティロゴを入れることができる。図8は、レポート内の所望の位置にファシリティロゴを付するための設定GUIを表示するウィンドウの一具体例を示す模式図である。
Next, the
図8に示すように、このウィンドウW2には、入出力I/F14または記憶部15の各ドライブの中から所望のドライブを設定するためのドライブ設定部201と、ドライブ設定部201によって設定されたドライブ内のファイルを一覧表示するファイル表示領域202と、ファイル表示領域202の中から選択されたファイル内に保存されたファシリティロゴを表示するロゴ表示領域203とが形成される。また、ウィンドウW2には、レポート内に入れるファシリティロゴの位置を設定するためのロゴ位置設定部204と、ロゴ表示領域203に表示されたファシリティロゴを消去するためのClearアイコン205と、レポート内へのファシリティロゴの挿入を決定するためのOKアイコン206と、かかるファシリティロゴの挿入設定をキャンセルするためのCancelアイコン207とが形成される。
As shown in FIG. 8, in this window W2, a
ドライブ設定部201は、入力部11の操作によって、入出力I/F14および記憶部15の各ドライブのドロップダウンリストを表示し、このドロップリストの中から所望のドライブを設定する。ファイル表示領域202は、かかるドライブ設定部201によって設定されたドライブ内のファイルを一覧表示する。かかるファイル表示領域202に一覧表示されたファイルのうちの所望のファイルが、入力部11のクリック操作によって選択される。ロゴ表示領域203は、かかるファイル表示領域202の中から選択されたファイル内に保存されているファシリティロゴの画像を表示する。
The
ロゴ位置設定部204は、入力部11の操作によって、レポート内に入れるファシリティロゴの位置のドロップダウンリストを表示し、このドロップリストの中から所望の位置を設定する。かかるロゴ位置設定部204のドロップダウンリストには、例えば、レポート内の上部の左、上部の右、上部の中央、下部の左、下部の右、および下部の中央等が含まれる。レポート作成部16cは、かかる入力部11のクリック操作によってドロップダウンリストの中から選択された所望の位置をレポート内におけるファシリティロゴの挿入位置として選択する。
The logo
レポート作成部16cは、OKアイコン206に対応する指示情報が入力部11によって入力された場合、かかるロゴ位置設定部204によって設定されたレポート内の位置に、上述したロゴ表示領域203に表示されたファシリティロゴ、すなわち、ファイル表示領域202の中から選択されたファイル内のファシリティロゴを挿入する。このようにして、レポート作成部16cは、被検体1を検査した施設のファシリティロゴを被検体1に関するレポート内に入れることができる。なお、レポート作成部16cは、上述したロゴ位置設定部204によってファシリティロゴの挿入位置が変更された場合、かかる設定変更に対応して、レポート内におけるファシリティロゴの挿入位置を変更する。
When the instruction information corresponding to the OK icon 206 is input by the
つぎに、被検体1のレポートに対するメーカロゴの挿入設定について説明する。レポート作成部16cは、デフォルト設定において被検体1のレポート内の所定位置(例えばフッター)にメーカロゴを入れるが、かかるメーカロゴの挿入設定を変更することによって、メーカロゴを入れずにレポートを作成することができる。図9は、レポート内に対するメーカロゴの挿入設定を変更するための設定GUIを表示するウィンドウの一具体例を示す模式図である。
Next, the insertion setting of the manufacturer logo for the report of the subject 1 will be described. The
図9に示すように、このウィンドウW3には、メーカロゴ(マニュファクチュアロゴ)をレポート内の所定位置に挿入するか否かを設定するためのチェックボックス210と、OKアイコン211と、Cancelアイコン212とが形成される。ユーザは、レポート内へのメーカロゴの挿入を希望する場合、入力部11を操作して、チェックボックス210をチェック有り状態(レ印が表示された状態)にし、OKアイコン211をクリックする。この場合、レポート作成部16cは、レポート内に対するメーカロゴの挿入有りを設定する設定情報が入力部11によって入力され、かかる設定情報に基づいて、レポート内の所定位置(例えばフッター)にメーカロゴを挿入する。
As shown in FIG. 9, the window W3 includes a
一方、ユーザは、レポート内へのメーカロゴの挿入を希望しない場合、入力部11を操作して、チェックボックス210をチェック無し状態(レ印が表示されていない状態)にし、OKアイコン211をクリックする。この場合、レポート作成部16cは、レポート内に対するメーカロゴの挿入無しを設定する設定情報が入力部11によって入力され、かかる設定情報に基づいて、メーカロゴを入れずにレポートを作成する。なお、このようなメーカロゴの有無の設定は、サービス権限でログインした場合のみに切り替えることができるようにしてもよい。
On the other hand, when the user does not wish to insert the manufacturer logo in the report, the user operates the
つぎに、被検体1に関するレポートの作成について説明する。図10は、レポートに記載する所定のデータを設定するための設定GUIを表示するウィンドウの一具体例を示す模式図である。図10に示すように、このウィンドウW4には、レポートに記載する医師名を設定する医師名テキストボックス220と、レポートに記載する施設名を設定する施設名テキストボックス221と、レポートに記載する住所を設定する住所テキストボックス222と、レポートに記載する電話番号を設定する電話番号テキストボックス223と、レポートに記載する電子メールアドレスを設定するメールアドレステキストボックス224と、OKアイコン225と、Cancelアイコン226とが形成される。
Next, creation of a report related to the subject 1 will be described. FIG. 10 is a schematic diagram illustrating a specific example of a window that displays a setting GUI for setting predetermined data described in a report. As shown in FIG. 10, in this window W4, a doctor
医師名テキストボックス220には、入力部11の操作によって、例えば被検体1を診断した医師の名前が入力される。施設名テキストボックス221には、入力部11の操作によって、例えば被検体1を診断した病院等の施設名が入力される。住所テキストボックス222には、入力部11の操作によって、例えば被検体1を診断した施設の住所が入力される。電話番号テキストボックス223には、入力部11の操作によって、例えば被検体1を診断した施設の電話番号が入力される。メールアドレステキストボックス224には、入力部11の操作によって、例えば被検体1を診断した医師宛または施設宛の電子メールアドレスが入力される。
In the doctor
入力部11は、OKアイコン225のクリック操作を行った場合、医師名テキストボックス220、施設名テキストボックス221、住所テキストボックス222、電話番号テキストボックス223、およびメールアドレステキストボックス224のそれぞれに入力された文字または数字等のテキストデータを制御部16に入力する。この場合、レポート作成部16cは、このように入力部によって入力されたテキストデータに基づいて、レポートに記載する医師名、施設名、住所、電話番号、および電子メールアドレスを把握する。このようにして、レポートに記載する医師名、施設名、住所、電話番号、および電子メールアドレスが設定される。レポート作成部16cは、被検体1のレポートを作成する場合、このように設定した医師名、施設名、住所、電話番号、および電子メールアドレスをこのレポート内の所定位置にそれぞれ自動的に挿入する。
When the
図11は、被検体1のレポートを作成するためのGUIを表示するウィンドウの一具体例を示す模式図である。図11に示すように、このウィンドウW5には、作成対象の被検体1のレポートのフォーマットRが形成され、かかるレポートのフォーマットR内に、レポート内の所定位置に記載する医師名を設定する医師名設定部230と、レポート内の所定位置に記載する施設名を設定する施設名設定部231と、レポート内の所定位置に記載する住所を設定する住所設定部232と、レポート内の所定位置に記載する電話番号を設定する電話番号設定部233と、レポート内の所定位置に記載する電子メールアドレスを設定するメールアドレス設定部234とが形成される。また、ウィンドウW5には、かかるレポートのフォーマットR内に、被検体1の診断結果に関する所見および要約等の診断情報を入力するための診断情報テキストボックス235が形成され、かかるレポートのフォーマットRの近傍に、Saveアイコン236と、Exportアイコン237とが形成される。
FIG. 11 is a schematic diagram illustrating a specific example of a window that displays a GUI for creating a report of the
なお、レポート作成部16cは、かかるレポートのフォーマットR内に、記憶部15の検査フォルダ15a内に保存された被検体1の患者情報A1と、被検体1内の画像A2,A3と、かかる画像A2,A3の部位をそれぞれ推定するためのアンテナ配置図A4,A5とを挿入する。
The
医師名設定部230は、レポート新規作成時に医師名テキストボックス220に入力された医師名が自動的に挿入される。医師名設定部230は、入力部11の操作によって、医師名のドロップダウンリストを表示し、かかる医師名のドロップリストの中から所望の医師名を設定する。この場合、医師名設定部230は、上述した医師名テキストボックス220に最初に入力された医師名と再入力された医師名とを含むドロップダウンリストを表示する。レポート作成部16cは、かかる医師名のドロップダウンリストの中から選択された所望の医師名をレポートに挿入することができる。
The doctor
施設名設定部231は、レポート新規作成時に施設名テキストボックス221に入力された施設名が自動的に挿入される。施設名設定部231は、入力部11の操作によって、施設名のドロップダウンリストを表示し、かかる施設名のドロップリストの中から所望の施設名を設定する。この場合、施設名設定部231は、上述した施設名テキストボックス221に最初に入力された施設名と再入力された施設名とを含むドロップダウンリストを表示する。レポート作成部16cは、かかる施設名のドロップダウンリストの中から選択された所望の施設名をレポートに挿入することができる。
The facility
住所設定部232は、レポート新規作成時に住所テキストボックス222に入力された住所が自動的に挿入される。住所設定部232は、入力部11の操作によって、住所のドロップダウンリストを表示し、かかる住所のドロップリストの中から所望の住所を設定する。この場合、住所設定部232は、上述した住所テキストボックス222に最初に入力された住所と再入力された住所とを含むドロップダウンリストを表示する。レポート作成部16cは、かかる住所のドロップダウンリストの中から選択された所望の住所をレポートに挿入することができる。
The
電話番号設定部233は、レポート新規作成時に電話番号テキストボックス223に入力された電話番号が自動的に挿入される。電話番号設定部233は、入力部11の操作によって、電話番号のドロップダウンリストを表示し、かかる電話番号のドロップリストの中から所望の電話番号を設定する。この場合、電話番号設定部233は、上述した電話番号テキストボックス223に最初に入力された電話番号と再入力された電話番号とを含むドロップダウンリストを表示する。レポート作成部16cは、かかる電話番号のドロップダウンリストの中から選択された所望の電話番号をレポートに挿入することができる。
The telephone
メールアドレス設定部234は、レポート新規作成時にメールアドレステキストボックス224に入力された電子メールアドレスが自動的に挿入される。メールアドレス設定部234は、入力部11の操作によって、電子メールアドレスのドロップダウンリストを表示し、かかる電子メールアドレスのドロップリストの中から所望の電子メールアドレスを設定する。この場合、メールアドレス設定部234は、上述したメールアドレステキストボックス224に最初に入力された電子メールアドレスと再入力された電子メールアドレスとを含むドロップダウンリストを表示する。レポート作成部16cは、かかる電子メールアドレスのドロップダウンリストの中から選択された所望の電子メールアドレスをレポートに挿入することができる。
The email
レポート作成部16cは、上述したように設定された医師名、施設名、住所、電話番号、および電子メールアドレスと、被検体1の患者情報A1と、診断情報テキストボックス235に入力された被検体1の診断情報と、被検体1内の画像A2,A3と、アンテナ配置図A4,A5とをそれぞれの所定位置に挿入したレポートを作成する。
The
かかるレポート作成部16cによって作成された被検体1のレポートファイル(レポートデータ)は、入力部11を用いたSaveアイコン236のクリック操作が行われた場合、制御部16の制御に基づいて記憶部15の管理フォルダ15b内に保存される。また、かかる被検体1のレポートファイルは、入力部11を用いたExportアイコン237のクリック操作が行われた場合、制御部16の制御に基づいて入出力I/F14のドライブ内に挿着された可搬な記録媒体(FD、CD、DVD等)に出力(記録)される。
The report file (report data) of the subject 1 created by the
つぎに、制御部16が有する画像ファイル作成部16dについて説明する。画像ファイル作成部16dは、上述したように、検査フォルダ15a内に保存された検査ファイルに含まれる画像群(例えば第1画像群PG1、第2画像群PG2)をもとに、所望の静止画像または動画像の画像ファイルを作成する。
Next, the image
具体的には、画像ファイル作成部16dは、入力部11によって入力された指示情報に基づいて、例えば被検体1の第1画像群PG1または第2画像群PG2の中から所望の画像を1以上抽出し、抽出した1以上の画像をもとに静止画像ファイルまたは動画像ファイルを作成する。この場合、制御部16は、かかる画像ファイル生成部16dによって作成された静止画像ファイルまたは動画像ファイルを記憶部15の管理フォルダ15b内に保存する。
Specifically, the image
なお、かかる画像ファイル作成部16dによって作成された静止画像ファイルは、例えばGIF、JPEG、またはTIF等の汎用の静止画像データ形式によって出力可能な画像ファイルである。また、かかる画像ファイル作成部16dによって作成された動画像ファイルは、例えばWMVまたはMPEG等の汎用の動画像データ形式によって出力可能な画像ファイルである。
The still image file created by the image
図12は、画像ファイル作成部16dによって作成された被検体1の静止画像ファイルまたは動画像ファイルを所望のドライブに出力するためのGUIを表示するウィンドウの一具体例を示す模式図である。図12に示すように、このウィンドウW6には、静止画像ファイルを一覧表示する静止画像ファイル表示領域240と、動画像ファイルを一覧表示する動画像ファイル表示領域241と、出力対象の静止画像ファイルおよび動画像ファイルを表示する出力ファイル表示領域242と、出力対象の静止画像ファイルまたは動画像ファイルを出力ファイル表示領域242に追加するための追加アイコン243とが形成される。また、ウィンドウW6には、出力対象の静止画像ファイルおよび動画像ファイルの出力先のドライブを設定するドライブ設定部244と、ドライブ設定部244によって設定されたドライブに対する画像ファイルの出力を実行するためのExportアイコン245とが形成される。さらに、ウィンドウW6には、静止画像ファイル表示領域240の中から選択された静止画像ファイルまたは動画像ファイル表示領域241の中から選択された動画像ファイルを表示する画像表示領域246と、画像表示領域246に表示する静止画像または動画像の表示操作を行うための表示操作アイコン群247とが形成される。
FIG. 12 is a schematic diagram showing a specific example of a window displaying a GUI for outputting a still image file or a moving image file of the subject 1 created by the image
静止画像ファイル表示領域240は、画像ファイル作成部16dによって作成された静止画像ファイルを一覧表示する。かかる静止画像ファイル表示領域240に一覧表示された静止画像ファイルのうちの所望の静止画像ファイルが、入力部11のクリック操作によって選択される。その後、追加アイコン243が入力部11によってクリックされた場合に、かかる所望の静止画像ファイルは、出力ファイル表示領域242に追加される。出力ファイル表示領域242は、このように追加された所望の静止画像ファイルを出力対象のものとして表示する。
The still image
動画像ファイル表示領域241は、画像ファイル作成部16dによって作成された動画像ファイルを一覧表示する。かかる動画像ファイル表示領域241に一覧表示された動画像ファイルのうちの所望の動画像ファイルが、入力部11のクリック操作によって選択される。その後、追加アイコン243が入力部11によってクリックされた場合に、かかる所望の動画像ファイルは、出力ファイル表示領域242に追加される。出力ファイル表示領域242は、このように追加された所望の動画像ファイルを出力対象のものとして表示する。
The moving image
ドライブ設定部244は、入力部11の操作によって、入出力I/F14および記憶部15の各ドライブのドロップダウンリストを表示し、このドロップリストの中から所望のドライブ、すなわち、出力ファイル表示領域242に表示された出力対象の静止画像ファイルおよび動画像ファイルの出力先のドライブを設定する。この場合、ドライブ設定部244は、このように出力先のドライブを設定することによって、出力ファイル表示領域242に表示された出力対象の静止画像ファイルおよび動画像ファイルを保存する記録媒体を設定する。なお、かかる出力対象の静止画像ファイルおよび動画像ファイルを保存する記録媒体としては、記憶部15を構成するハードディスク、入出力I/F14に挿着された可搬な記録媒体(例えばFD、CD、DVD等)が挙げられる。
The
かかる出力対象の静止画像ファイルおよび動画像ファイルは、Exportアイコン245が入力部11によってクリックされた場合、ドライブ設定部244によって設定されたドライブに出力され、このドライブの記録媒体に保存される。
When the
画像表示領域246は、表示操作アイコン群247を用いた表示操作に基づいて、静止画像ファイル表示領域240の中から選択された静止画像ファイルまたは動画像ファイル表示領域241の中から選択された動画像ファイルを再生または逆再生する。
The
なお、上述したレポート作成部16cによって作成されたレポートファイルは、かかる静止画像ファイルまたは動画像ファイルとほぼ同様に、設定した所望のドライブに出力され、このドライブの記録媒体に保存される。図13は、レポート作成部16cによって作成された被検体1のレポートファイルを所望のドライブに出力するためのGUIを表示するウィンドウの一具体例を示す模式図である。
Note that the report file created by the above-described
図13に示すように、このウィンドウW7には、出力対象のレポートファイルの出力先のドライブを設定するドライブ設定部250と、ドライブ設定部250によって設定されたドライブの空き容量を示す容量表示領域251と、OKアイコン252と、Cancelアイコン253とが形成される。なお、かかるウィンドウW7は、図11に例示したレポート作成のためのウィンドウW5に形成されたExportアイコン237が入力部11によってクリックされた場合に表示される。
As shown in FIG. 13, in this window W7, a
ドライブ設定部250は、入力部11の操作によって、入出力I/F14および記憶部15の各ドライブのドロップダウンリストを表示し、このドロップリストの中から所望のドライブ、すなわち、レポート作成部16cによって作成されたレポートファイルの出力先のドライブを設定する。この場合、ドライブ設定部250は、このように出力先のドライブを設定することによって、レポート作成部16cによって作成されたレポートファイルを保存する記録媒体(例えば、記憶部15を構成するハードディスク、入出力I/F14に挿着されたFD、CD、DVD等)を設定する。
The
かかる出力対象のレポートファイルは、OKアイコン252が入力部11によってクリックされた場合、ドライブ設定部250によって設定されたドライブに出力され、このドライブの記録媒体に保存される。
When the
つぎに、画像表示装置4のユーザ権限の設定について説明する。ユーザ(医師または看護師等)が行う被検体1の検査の方法によっては、画像表示装置4にデフォルト設定されたユーザ権限によって使用許可されたソフトウェア処理の種類が実際の運用に適合しない可能性がある。この場合、かかる画像表示装置4のユーザ権限によって使用許可されるソフトウェア処理の種類を変更できるようにしてもよい。
Next, setting of user authority of the
図14は、画像表示装置4のユーザ権限の設定を変更するための設定GUIを表示するウィンドウの一具体例を示す模式図である。図14に示すように、このウィンドウW8には、画像表示装置4のユーザ権限に依存するソフトウェア処理を一覧表示するユーザ権限表示領域261と、ユーザ権限表示領域261に一覧表示されたソフトウェア処理の使用許可または使用禁止を設定するためのチェックボックス群262と、OKアイコン263と、Cancelアイコン264とが形成される。
FIG. 14 is a schematic diagram illustrating a specific example of a window that displays a setting GUI for changing the setting of the user authority of the
ユーザ権限表示領域261は、画像表示装置4のソフトウェアにログインしたユーザの種類(例えば管理者または一般ユーザ等)に対応して、ユーザ権限の設定変更が可能なソフトウェア処理の一覧を変えて表示する。この場合、かかるユーザ権限表示領域261に一覧表示されたソフトウェア処理名毎に、チェックボックス群262の各チェックボックスが形成される。
The user
具体的には、画像表示装置4のソフトウェアにログインしたユーザ(例えば管理者)は、入力部11を操作して、ユーザ権限表示領域261に一覧表示されたソフトウェア処理の中から、一般ユーザ(例えば医師または看護師等)に使用許可するソフトウェア処理に対応するチェックボックスをチェック有り状態(レ印が表示された状態)にし、使用禁止するソフトウェア処理に対応するチェックボックスをチェック無し状態(レ印が表示されていない状態)にし、OKアイコン263をクリックする。
Specifically, a user (for example, an administrator) who has logged into the software of the
このようにチェックボックス群262の各チェックボックスを必要に応じてチェック有り状態またはチェック無し状態にすることによって、一般ユーザに対するユーザ権限を再設定することができ、かかるユーザ権限によって使用許可されるソフトウェア処理の種類を一般ユーザの運用に適合したものに設定できる。
Thus, by setting each check box of the
以上、説明したように、本発明の実施の形態1では、多眼のカプセル型内視鏡に搭載した撮像素子群によって撮像された被検体内の複数の画像群のうちの第1および第2の画像群にそれぞれ含まれる第1および第2の画像の各撮像時刻の時間差ΔTをGUIによって設定し、かかる時間差ΔTを有する第1の画像と第2の画像とを表示部の各表示領域に順次同期表示するようにし、かかる第1の画像と該第1の画像に共通する被写体が撮像された第2の画像とを各表示領域に順次同期表示するように構成した。このため、かかる第1および第2の画像に共通する同一被写体を複数の撮像方向から撮像して得られる画像同士を表示部の各表示領域に順次同期表示することができる。この結果、多眼のカプセル型内視鏡に搭載した撮像素子群によって撮像された被検体内の多方向の画像群にそれぞれ含まれる各画像を観察し易い態様で順次表示できる画像表示装置を実現することができる。 As described above, in the first embodiment of the present invention, the first and second of the plurality of image groups in the subject imaged by the imaging element group mounted on the multi-lens capsule endoscope. A time difference ΔT between the imaging times of the first and second images included in each of the image groups is set by the GUI, and the first image and the second image having the time difference ΔT are displayed in each display area of the display unit. The first image and the second image in which the subject common to the first image is captured are sequentially displayed in synchronization in each display area. For this reason, images obtained by imaging the same subject common to the first and second images from a plurality of imaging directions can be sequentially and synchronously displayed in the display areas of the display unit. As a result, an image display device capable of sequentially displaying each image included in the multidirectional image group in the subject imaged by the imaging element group mounted on the multi-lens capsule endoscope in an easily observable manner is realized. can do.
本発明の実施の形態1にかかる画像表示装置を用いて被検体内の多方向の画像群を同期表示することによって、医師または看護師等のユーザは、被検体内の画像を容易に観察できるとともに、例えば病変部等の特徴的な部位および一方向からでは観察し難い消化管の内壁(例えばひだ状の部位)等を複数の方向から容易に観察することができる。 By using the image display apparatus according to the first embodiment of the present invention and displaying a multidirectional image group in a subject synchronously, a user such as a doctor or a nurse can easily observe the image in the subject. In addition, for example, a characteristic site such as a lesion and an inner wall of the digestive tract (for example, a pleat-like site) that is difficult to observe from one direction can be easily observed from a plurality of directions.
(実施の形態2)
つぎに、本発明の実施の形態2について説明する。上述した実施の形態1にかかる画像表示装置では、表示部12の各表示領域101,102に同期表示する画像Pn,Qmの時間差ΔTをGUIを用いて設定していたが、この実施の形態2にかかる画像表示装置では、被検体内の部位毎に予め設定した時間差ΔTのデフォルトデータを記憶部15に保存し、かかるデフォルトデータをもとに画像Pn,Qmの時間差ΔTを設定するようにしている。
(Embodiment 2)
Next, a second embodiment of the present invention will be described. In the image display apparatus according to the first embodiment described above, the time difference ΔT between the images P n and Q m to be displayed synchronously in the
図15は、本発明の実施の形態2にかかる画像表示装置の一構成例を模式的に示すブロック図である。図15に示すように、この画像表示装置24は、上述した実施の形態1にかかる画像表示装置4の制御部16に代えて制御部26を有する。この制御部26は、上述した画像表示装置4の制御部16の表示制御部16aに代えて表示制御部26aを有し、画像処理部16bに代えて画像処理部26bを有する。また、この実施の形態2にかかる画像表示装置4の記憶部15には、同期表示モードにおける画像Pn,Qmの時間差ΔTのデフォルトデータ15cが予め保存されている。その他の構成は実施の形態1と同じであり、同一構成部分には同一符号を付している。
FIG. 15 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the second embodiment of the present invention. As illustrated in FIG. 15, the
なお、本発明の実施の形態2にかかる画像表示装置24を用いた被検体内情報取得システムは、図1に例示した実施の形態1にかかる被検体内情報取得システムの画像表示装置4に代えて画像表示装置24を有することによって実現される。
The in-subject information acquisition system using the
制御部26は、上述した実施の形態1にかかる画像表示装置4の制御部16とほぼ同様の機能を有する。この場合、制御部26は、同期表示モードにおいて各表示領域101,102に同期表示する画像Pn,Qmの時間差ΔTを被検体1の部位(例えば食道、胃、小腸、大腸等)毎に予め設定したデータとして、記憶部15に保存した時間差ΔTのデフォルトデータ15cを保持管理する。制御部26は、かかるデフォルトデータ15cによって予め設定された部位毎の時間差データを必要に応じて読み出し、読み出した時間差データをもとに画像Pn,Qmの時間差ΔTを被検体1の部位毎に設定する。
The
表示制御部26aは、上述した実施の形態1にかかる画像表示装置4の表示制御部16aとほぼ同様の機能を有する。この場合、表示制御部26aは、デフォルトデータ15cによって予め設定された被検体1の部位毎の時間差データをもとに、同期表示モードにおける画像Pn,Qmの時間差ΔTを被検体1の部位毎に設定する。表示制御部26aは、同期表示モードにおいて、かかるデフォルトデータ15cに基づいて設定した時間差ΔTを有する画像像Pn,Qmを各表示領域101,102に順次同期表示する制御を行う。
The
なお、かかる表示制御部26aによって被検体1の部位毎に設定された時間差ΔTは、上述したデータ設定領域131に表示される。また、タイムスライダ132,133は、かかる部位毎の時間差ΔTに対応する時間的な位置の間隔をなすように移動する。
The time difference ΔT set for each part of the subject 1 by the
画像処理部26bは、上述した実施の形態1にかかる画像表示装置4の画像処理部16bとほぼ同様の機能を有する。この場合、画像処理部26bは、第1画像群PG1および第2画像群PG2にそれぞれ含まれる各画像の色情報(例えば平均色)を検出し、検出した各画像の色情報をもとに、かかる各画像に撮像された被検体1の各部位(例えば食道、胃、小腸、大腸等)をそれぞれ判別する。すなわち、画像処理部26bは、フレーム番号n(n=0,1,2,3,…)の画像Pnの色情報を検出し、検出した色情報をもとに画像Pnの撮像部位を判別する。また、画像処理部26bは、フレーム番号m(m=0,1,2,3,…)の画像Qmの色情報を検出し、検出した色情報をもとに画像Qmの撮像部位を判別する。
The
つぎに、記憶部15に保存される時間差ΔTのデフォルトデータ15cについて説明する。図16は、被検体1の部位毎に設定された時間差ΔTのデフォルトデータ15cの一具体例を示す模式図である。図16に示すように、デフォルトデータ15cは、予め設定された各時間差ΔTと被検体1の各部位とを対応付けたテーブル形式のデータ群である。具体的には、デフォルトデータ15cに含まれる時間差ΔTとして、例えば、被検体1の食道に対応付けた時間差ΔT1と、被検体1の胃に対応付けた時間差ΔT2と、被検体1の小腸に対応付けた時間差ΔT3と、被検体1の大腸に対応付けた時間差ΔT4とが挙げられる。
Next, the
このような時間差ΔT1,ΔT2,ΔT3,ΔT4は、被検体1の部位毎のカプセル型内視鏡2の平均通過時間と各部位(臓器)の平均長さとをもとに設定される。具体的には、時間差ΔT1は、被検体1の食道におけるカプセル型内視鏡2の平均通過時間と食道の平均長さとをもとに設定され、時間差ΔT2は、被検体1の胃におけるカプセル型内視鏡2の平均通過時間と胃の平均長さとをもとに設定される。また、時間差ΔT3は、被検体1の小腸におけるカプセル型内視鏡2の平均通過時間と小腸の平均長さとをもとに設定され、時間差ΔT4は、被検体1の大腸におけるカプセル型内視鏡2の平均通過時間と大腸の平均長さとをもとに設定される。この場合、時間差ΔT1,ΔT2,ΔT3,ΔT4の大小関係は、通常、ΔT1<ΔT2≦ΔT3<ΔT4である。
Such time differences ΔT1, ΔT2, ΔT3, and ΔT4 are set based on the average passage time of the
つぎに、同期表示モードにおいて各表示領域101,102に画像Pn,Qmを同期表示する制御を行う制御部26の動作について説明する。図17は、デフォルトデータ15cに基づいた時間差ΔTを有する画像Pn,Qmを各表示領域101,102に同期表示させる制御部26の処理手順を説明するフローチャートである。
Next, the operation of the
図17において、まず、制御部26は、上述したステップS101と同様に、同期アイコン130によって設定された同期表示モードを画像表示モードとして選択する(ステップS201)。この場合、表示制御部26aは、同期アイコン130のクリック操作によって入力部11から入力される設定情報に基づいて、複数の画像表示モードの中から同期表示モードを選択する。
In FIG. 17, first, similarly to step S101 described above, the
つぎに、制御部26は、上述したステップS103と同様に、第1画像群PG1のフレーム番号を初期化する(ステップS202)。この場合、表示制御部26aは、第1画像群PG1のうちの表示処理対象の画像のフレーム番号nを初期化する(例えばn=0にする)。
Next, the
その後、制御部26は、デフォルトデータ15cによって予め設定された時間差データを記憶部15から読み出す(ステップS203)。この場合、画像処理部26bは、ステップS202において初期化されたフレーム番号n=0の画像P0の色情報(例えば平均色)を検出し、検出した色情報をもとに画像P0の撮像部位を判別する。表示制御部26aは、かかる画像処理部26bによって判別された撮像部位(すなわち画像P0に撮像された被検体1の部位)の時間差データをデフォルトデータ15cの中から選択し、選択した時間差データをもとに、かかる撮像部位の画像Pn,Qmの時間差ΔTを設定する。
Thereafter, the
つぎに、制御部26は、ステップS203においてデフォルトデータ15cの中から選択した時間差データをもとに、第2画像群PG2のうちの表示処理対象の画像のフレーム番号mを算出する(ステップS204)。この場合、表示制御部26aは、上述したステップS203においてデフォルトデータ15cの中から選択した時間差データをもとに、画像Pn(例えばn=0)対して時間差ΔTを有する画像Qmのフレーム番号mを算出する。
Next, the
その後、制御部26は、上述したステップS105と同様に、かかる画像Pn,Qmの画像表示指示があったか否かを判断する(ステップS205)。具体的には、制御部26は、上述した表示操作アイコン群110のいずれかに対応した表示指示情報が入力部11から入力されない場合、画像Pn,Qmの画像表示指示なしと判断し(ステップS205,No)、このステップS205を繰り返す。すなわち、制御部26は、かかる表示指示情報が入力部11によって入力されるまで、このステップS205を繰り返す。
Thereafter, similarly to step S105 described above, the
一方、制御部26は、かかる表示指示情報が入力部11から入力された場合、この入力された表示指示情報に基づいて画像Pn,Qmの画像表示指示ありと判断し(ステップS205,Yes)、上述したステップS106と同様に現在のフレーム番号n,mの各画像Pn,Qmを各表示領域101,102に同期表示させる(ステップS206)。この場合、表示制御部26aは、記憶部15に保存された第1画像群PG1の中から現在のフレーム番号n(n=0,1,2,3,…)の画像Pnを読み出し、得られた画像Pnを表示領域101に表示する制御を行う。かかる画像Pnの表示に同期して、表示制御部26aは、記憶部15に保存された第2画像群PG2の中から現在のフレーム番号mの画像Qmを読み出し、得られた画像Qmを表示領域102に表示する制御を行う。このようにして、表示制御部16aは、撮像部位に合わせた時間差ΔTを有する画像Pn,Qm(m=n+α)を各表示領域101,102に同期表示させる。
On the other hand, when the display instruction information is input from the
なお、かかるステップS206における現在のフレーム番号nは、上述したステップS202において初期化したフレーム番号n(=0)または後述するステップS207において更新したフレーム番号nである。 The current frame number n in step S206 is the frame number n (= 0) initialized in step S202 described above or the frame number n updated in step S207 described later.
その後、制御部26は、上述したステップS107と同様に、第1画像群PG1のフレーム番号nを更新する(ステップS207)。この場合、表示制御部26aは、つぎのステップS206において表示領域101に表示する画像Pnを記憶部15から読み出すために第1画像群PG1のフレーム番号nを更新(例えば+1加算)する。
Thereafter, the
つぎに、制御部26は、つぎに表示領域101に表示する画像Pnの撮像部位(被検体1の部位)が後段の部位(例えば食道に対する胃)に移行するか否かを判断する(ステップS208)。この場合、画像処理部26bは、現在表示中の画像Pnの色情報をもとに該画像Pnの撮像部位を判別し、且つ、ステップS207において更新後のフレーム番号の画像Pn+1の色情報をもとに該画像Pn+1の撮像部位を判別する。制御部26は、かかる画像処理部26bによって判別された画像Pn,Pn+1の各撮像部位が同じである場合、かかる画像Pnの撮像部位(すなわち被検体1の部位)の移行無しと判断し(ステップS208,No)、上述したステップS109と同様に第2画像群PG2のフレーム番号mを更新する(ステップS209)。この場合、表示制御部26aは、つぎのステップS206において画像Pnに同期して表示領域102に表示する画像Qmを記憶部15から読み出すために第2画像群PG2のフレーム番号m(m=n+α)をフレーム番号nに合わせて更新(例えば+1加算)する。
Next, the
一方、制御部26は、かかる画像処理部26bによって判別された画像Pn,Pn+1の各撮像部位が異なる場合、かかる画像Pnの撮像部位(すなわち被検体1の部位)の移行有りと判断し(ステップS208,Yes)、かかる移行後の撮像部位の時間差データをデフォルトデータ15cの中から選択するとともに、現在の時間差ΔTを移行後の撮像部位の時間差ΔTに更新する。その後、制御部26は、かかる移行後の撮像部位の時間差データをもとに第2画像群PG2のフレーム番号mを算出する(ステップS210)。この場合、表示制御部26aは、かかる移行後の撮像部位の時間差データをもとに、つぎのステップS206において表示領域101に同期表示する画像Pnに対して移行後の撮像部位の時間差ΔTを有する画像Qmのフレーム番号m(m=n+β)を算出する。
On the other hand, when the imaging parts of the images P n and P n + 1 determined by the
その後、制御部26は、上述したステップS111と同様に、各表示領域101,102に画像Pn,Qmを表示する制御に対して一時停止指示があったか否かを判断し(ステップS211)、一時停止指示ありと判断した場合(ステップS211,Yes)、上述したステップS205に戻り、このステップS205以降の処理手順を繰り返す。
Thereafter, similarly to step S111 described above, the
一方、制御部26は、一時停止指示なしと判断した場合(ステップS211,No)、上述したステップS112と同様に、かかる同期表示モードにおける画像Pn,Qmの同期表示処理が終了したか否かを判断する(ステップS212)。制御部26は、かかる同期表示モードにおける画像Pn,Qmの同期表示処理が終了したと判断した場合(ステップS212,Yes)、かかる同期表示モードの同期表示処理を完了する。一方、制御部26は、かかる同期表示モードにおける画像Pn,Qmの同期表示処理が終了していないと判断した場合(ステップS212,No)、上述したステップS206に戻り、このステップS206以降の処理手順を繰り返す。
On the other hand, when the
つぎに、デフォルトデータ15cの部位毎の時間差ΔTとして、図16に示したように食道の時間差ΔT1、胃の時間差ΔT2、小腸の時間差ΔT3、大腸の時間差ΔT4を設定した場合を例示して、かかるデフォルトデータ15cに基づいた部位毎の時間差ΔTを有する画像Pn,Qmを各表示領域101,102に同期表示する制御を行う制御部26の動作を具体的に説明する。図18は、デフォルトデータ15cに基づいた部位毎の時間差ΔTを有する画像Pn,Qmを各表示領域101,102に順次同期表示させる制御部26の動作の一具体例を説明するための模式図である。
Next, as the time difference ΔT for each part of the
図18において、画像群B1,B2,B3,B4は、第1画像群PG1に含まれる部位毎の画像群であって、被検体1の食道、胃、小腸、大腸がそれぞれ撮像された画像群である。画像群C1,C2,C3,C4は、第2画像群PG2に含まれる部位毎の画像群であって、被検体1の食道、胃、小腸、大腸がそれぞれ撮像された画像群である。この場合、画像Pn(n=0,1,2,3,…)は、かかる画像群B1,B2,B3,B4のいずれかに含まれ、画像Qm(m=0,1,2,3,…)は、かかる画像群C1,C2,C3,C4のいずれかに含まれる。 In FIG. 18, image groups B1, B2, B3, and B4 are image groups for each part included in the first image group PG1, and are image groups obtained by imaging the esophagus, stomach, small intestine, and large intestine of the subject 1, respectively. It is. The image groups C1, C2, C3, and C4 are image groups for each part included in the second image group PG2, and are image groups obtained by imaging the esophagus, stomach, small intestine, and large intestine of the subject 1, respectively. In this case, the image P n (n = 0, 1, 2, 3,...) Is included in any one of the image groups B1, B2, B3, B4, and the image Q m (m = 0, 1, 2, 2, 4). 3,...) Is included in one of the image groups C1, C2, C3, C4.
制御部26は、被検体1の食道が撮像された画像群B1,C1の各画像を同期表示する場合、デフォルトデータ15cのうちの時間差ΔT1を設定し、被検体1の胃が撮像された画像群B2,C2の各画像を同期表示する場合、デフォルトデータ15cのうちの時間差ΔT2を設定する。また、制御部26は、被検体1の小腸が撮像された画像群B3,C3の各画像を同期表示する場合、デフォルトデータ15cのうちの時間差ΔT3を設定し、被検体1の大腸が撮像された画像群B4,C4の各画像を同期表示する場合、デフォルトデータ15cのうちの時間差ΔT4を設定する。
When the
具体的には、画像処理部26bは、画像群B1の先頭画像(すなわち画像P0)の色情報をもとに、この先頭画像の撮像部位(食道)を判別する。この場合、表示制御部26aは、デフォルトデータ15cのうちの食道に対応する時間差ΔT1を設定し、かかる画像群B1の先頭画像に対して時間差ΔT1を有する食道の画像群C1のフレーム番号mを算出する。かかるフレーム番号mの画像は、画像群C1に含まれる食道の画像であって、画像群B1の先頭画像に共通する被写体が撮像された画像である。
Specifically, the
表示制御部26aは、表示領域101に表示する画像Pnの撮像部位が例えば食道から胃に移行するまで、この時間差ΔT1の設定を維持するとともに、かかる時間差ΔT1を有する食道の画像Pn,Qm(すなわち画像群B1,C1の各画像)を各表示領域101,102に同期表示させる。このように同期表示された食道の画像Pn,Qmは、互いに共通する被写体が撮像された画像同士である。
The
その後、食道の画像群B1の終端画像が表示領域101に表示された場合、画像処理部26bは、かかる画像群B1の終端画像の色情報と画像群B2の先頭画像の色情報とをもとに、画像Pnの撮像部位が食道から胃に移行する旨を判断する。この場合、表示制御部26aは、上述した時間差ΔT1に代えて、デフォルトデータ15cのうちの胃に対応する時間差ΔT2を設定し、胃の画像群B2の先頭画像に対して時間差ΔT2を有する胃の画像群C2のフレーム番号mを算出する。かかるフレーム番号mの画像は、画像群C2に含まれる胃の画像であって、画像群B2の先頭画像に共通する被写体が撮像された画像である。
Thereafter, when the terminal image of the image group B1 of the esophagus is displayed in the
表示制御部26aは、表示領域101に表示する画像Pnの撮像部位が例えば胃から小腸に移行するまで、この時間差ΔT2の設定を維持するとともに、かかる時間差ΔT2を有する胃の画像Pn,Qm(すなわち画像群B2,C2の各画像)を各表示領域101,102に同期表示させる。このように同期表示された胃の画像Pn,Qmは、互いに共通する被写体が撮像された画像同士である。
The
その後、胃の画像群B2の終端画像が表示領域101に表示された場合、画像処理部26bは、かかる画像群B2の終端画像の色情報と画像群B3の先頭画像の色情報とをもとに、画像Pnの撮像部位が胃から小腸に移行する旨を判断する。この場合、表示制御部26aは、上述した時間差ΔT2に代えて、デフォルトデータ15cのうちの小腸に対応する時間差ΔT3を設定し、小腸の画像群B3の先頭画像に対して時間差ΔT3を有する小腸の画像群C3のフレーム番号mを算出する。かかるフレーム番号mの画像は、画像群C3に含まれる小腸の画像であって、画像群B3の先頭画像に共通する被写体が撮像された画像である。
Thereafter, when the terminal image of the stomach image group B2 is displayed in the
表示制御部26aは、表示領域101に表示する画像Pnの撮像部位が例えば小腸から大腸に移行するまで、この時間差ΔT3の設定を維持するとともに、かかる時間差ΔT3を有する小腸の画像Pn,Qm(すなわち画像群B3,C3の各画像)を各表示領域101,102に同期表示させる。このように同期表示された小腸の画像Pn,Qmは、互いに共通する被写体が撮像された画像同士である。
The
その後、小腸の画像群B3の終端画像が表示領域101に表示された場合、画像処理部26bは、かかる画像群B3の終端画像の色情報と画像群B4の先頭画像の色情報とをもとに、画像Pnの撮像部位が小腸から大腸に移行する旨を判断する。この場合、表示制御部26aは、上述した時間差ΔT3に代えて、デフォルトデータ15cのうちの大腸に対応する時間差ΔT4を設定し、大腸の画像群B4の先頭画像に対して時間差ΔT4を有する大腸の画像群C4のフレーム番号mを算出する。かかるフレーム番号mの画像は、画像群C4に含まれる大腸の画像であって、画像群B4の先頭画像に共通する被写体が撮像された画像である。
Thereafter, when the terminal image of the small intestine image group B3 is displayed in the
表示制御部26aは、表示領域101に表示する画像Pnの撮像部位が大腸である限り、この時間差ΔT4の設定を維持するとともに、かかる時間差ΔT4を有する大腸の画像Pn,Qm(すなわち画像群B4,C4の各画像)を各表示領域101,102に同期表示させる。このように同期表示された大腸の画像Pn,Qmは、互いに共通する被写体が撮像された画像同士である。
The
以上、説明したように、本発明の実施の形態2では、多眼のカプセル型内視鏡に搭載した撮像素子群によって撮像された被検体内の複数の画像群のうちの第1および第2の画像群にそれぞれ含まれる第1および第2の画像の各撮像時刻の時間差ΔTを被検体の部位毎に予め設定したデフォルトデータを記憶部に保存し、かかるデフォルトデータに基づいて被検体の部位毎に設定した時間差ΔTを有する第1の画像と第2の画像とを表示部の各表示領域に順次同期表示するようにし、かかる第1の画像と該第1の画像に共通する被写体が撮像された第2の画像とを各表示領域に順次同期表示するように構成した。このため、画像に撮像された被検体の部位が順次移行する場合であっても、かかる第1および第2の画像に共通する同一被写体を複数の撮像方向から撮像して得られる画像同士を表示部の各表示領域に順次同期表示することができる。この結果、上述した実施の形態1とほぼ同様の作用効果を享受するとともに、多眼のカプセル型内視鏡に搭載した撮像素子群によって撮像された被検体内の多方向の画像群にそれぞれ含まれる各画像を被検体の部位毎に観察し易い態様で順次表示できる画像表示装置を実現することができる。 As described above, in the second embodiment of the present invention, the first and second of the plurality of image groups in the subject imaged by the imaging element group mounted on the multi-lens capsule endoscope. Default data in which the time difference ΔT between the imaging times of the first and second images included in each image group is preset for each part of the subject is stored in the storage unit, and the part of the subject is based on the default data The first image having the time difference ΔT set for each time and the second image are sequentially displayed in synchronization with each display area of the display unit, and a subject common to the first image and the first image is captured. The second image thus formed is sequentially displayed in synchronization with each display area. For this reason, even when the part of the subject imaged in the image sequentially shifts, images obtained by imaging the same subject common to the first and second images from a plurality of imaging directions are displayed. The display can be sequentially synchronized with each display area. As a result, while enjoying substantially the same effect as the first embodiment described above, each is included in the multidirectional image group in the subject imaged by the imaging element group mounted on the multi-lens capsule endoscope. Therefore, it is possible to realize an image display apparatus that can sequentially display each image to be observed for each part of the subject in an easy-to-view manner.
本発明の実施の形態2にかかる画像表示装置を用いて被検体内の多方向の画像群を同期表示することによって、医師または看護師等のユーザは、同一被写体を複数の撮像方向から撮像して得られる画像同士を簡易な操作で順次同期表示することができ、これによって、例えば食道から大腸までの被検体内の一連の画像を容易に観察できるとともに、例えば病変部等の特徴的な部位および一方向からでは観察し難い消化管の内壁(例えばひだ状の部位)等を複数の方向から容易に観察することができる。 By using the image display apparatus according to the second embodiment of the present invention to display a multidirectional image group in a subject synchronously, a user such as a doctor or a nurse images the same subject from a plurality of imaging directions. The images obtained in this way can be displayed sequentially and synchronously with a simple operation, which makes it possible to easily observe a series of images in the subject from the esophagus to the large intestine, for example, and for example, a characteristic site such as a lesion In addition, it is possible to easily observe the inner wall of the digestive tract (for example, a pleat-like portion) that is difficult to observe from one direction from a plurality of directions.
(実施の形態3)
つぎに、本発明の実施の形態3について説明する。上述した実施の形態2にかかる画像表示装置では、被検体内の部位毎に予め設定した時間差ΔTのデフォルトデータに基づいて画像Pn,Qmの時間差ΔTを被検体の部位毎に設定していたが、この実施の形態3にかかる画像表示装置では、さらにGUIによって時間差ΔTのデフォルトデータを更新できるようにしている。
(Embodiment 3)
Next, a third embodiment of the present invention will be described. In the image display device according to the second embodiment described above, the time difference ΔT between the images P n and Q m is set for each part of the subject based on the default data of the time difference ΔT preset for each part in the subject. However, in the image display device according to the third embodiment, the default data of the time difference ΔT can be updated by the GUI.
図19は、本発明の実施の形態3にかかる画像表示装置の一構成例を模式的に示すブロック図である。図20は、この実施の形態3にかかる画像表示装置の表示部に表示される各種GUIの一具体例を模式的に示す模式図である。図19に示すように、この画像表示装置34は、上述した実施の形態2にかかる画像表示装置24の制御部26に代えて制御部36を有する。この制御部36は、上述した画像表示装置24の制御部26の表示制御部26aに代えて表示制御部36aを有する。また、図20に示すように、表示部12に表示されるウィンドウW1には、デフォルトデータ15cをフレーム単位で更新するためのGUIである保存アイコン134がさらに形成される。その他の構成は実施の形態2と同じであり、同一構成部分には同一符号を付している。
FIG. 19 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the third embodiment of the present invention. FIG. 20 is a schematic diagram schematically illustrating one specific example of various GUIs displayed on the display unit of the image display apparatus according to the third embodiment. As illustrated in FIG. 19, the
なお、本発明の実施の形態3にかかる画像表示装置34を用いた被検体内情報取得システムは、図1に例示した実施の形態1にかかる被検体内情報取得システムの画像表示装置4に代えて画像表示装置34を有することによって実現される。
The in-subject information acquisition system using the
制御部36は、上述した実施の形態2にかかる画像表示装置24の制御部26とほぼ同様の機能を有する。この場合、制御部36は、データ設定領域131またはタイムスライダ132,133によってフレーム単位で再設定された時間差データをデフォルトデータ15cに部分的に上書きし、かかるデフォルトデータ15cをフレーム単位で更新する。制御部36は、保存アイコン134のクリック操作によって入力部11から更新指示情報が入力された場合、その都度、かかるデフォルトデータ15cの更新処理を行う。このような制御部36は、更新後のデフォルトデータ15cによって再設定された部位毎の時間差データを必要に応じて読み出し、読み出した再設定後の時間差データをもとに画像Pn,Qmの時間差ΔTを被検体1の部位毎に設定する。
The
表示制御部36aは、上述した実施の形態2にかかる画像表示装置24の表示制御部26aとほぼ同様の機能を有する。この場合、表示制御部36aは、フレーム単位で部分的に再設定(更新)した更新後のデフォルトデータ15cをもとに、同期表示モードにおける画像Pn,Qmの時間差ΔTを被検体1の部位毎またはフレーム毎に設定する。表示制御部36aは、同期表示モードにおいて、かかる更新後のデフォルトデータ15cに基づいて部位毎またはフレーム毎に設定した時間差ΔTを有する画像像Pn,Qmを各表示領域101,102に順次同期表示する制御を行う。
The
つぎに、小腸の時間差ΔT3を部分的に時間差ΔT5に更新する場合を例示して、デフォルトデータ15cを部分的に更新する制御部36の動作を説明する。図21は、デフォルトデータ15cを部分的に更新する制御部36の動作を説明するための模式図である。図21において、まず、タイムスライダ132,133は、現在の各表示領域101,102に表示されている小腸の画像Pn,Qmの各時間的な位置をそれぞれ指し示す。この場合、かかるタイムスライダ132,133の間隔は、更新前のデフォルトデータ15cに基づく小腸の時間差ΔT3に対応する。この状態において、表示制御部36aは、かかる時間差ΔT3を設定する。
Next, the operation of the
ここで、現在の表示領域101に表示されている画像Pnに対する画像Qmの時間差ΔT3を時間差ΔT5に変更(再設定)する場合、タイムスライダ133は、入力部11を用いたドラッグ操作によって移動し、タイムスライダ132との間で時間差ΔT5に対応する間隔をなす。さらに、入力部11は、保存アイコン134のクリック操作を行った場合に更新指示情報を制御部36に入力する。制御部36は、かかる更新指示情報に基づいて、現在のタイムスライダ132,133の間隔に対応する時間差ΔT5をデフォルトデータ15cにおける小腸の時間差データとして部分的に上書きする。この場合、現在の各表示領域101,102に表示されている画像Pn,Qmの時間差ΔT3は、かかる時間差ΔT5に置き換えられる。この結果、デフォルトデータ15cは、図21に示すように、小腸の画像群のうちの所望のフレーム番号の画像Pn,Qmの時間差をΔT3からΔT5に部分的に再設定したものに更新される。
Here, when changing the time difference ΔT3 image Q m on the time difference ΔT5 for the image P n which is currently displayed on the display area 101 (resetting), the
このようなデフォルトデータ15cの更新処理を繰り返し行うことによって、制御部36は、第1画像群PG1または第2画像群PG2の1以上の所望フレームについてデフォルトデータ15cを部分的に更新することができる。この場合、表示制御部36aは、かかる更新後のデフォルトデータ15cに基づいて、被検体1の部位毎に設定した時間差ΔT(例えば時間差ΔT1,ΔT2,ΔT3,ΔT4)をフレーム単位で部分的に再設定する。
By repeatedly performing such update processing of the
なお、かかる時間差ΔTの再設定は、入力部11を用いてデータ設定領域131に直接数値入力しても行うことができる。この場合、タイムスライダ132,133は、データ設定領域131に入力された時間差ΔTに対応する間隔をなすように移動する。
The time difference ΔT can be reset by directly inputting a numerical value into the
つぎに、図16に示したデフォルトデータ15cのうちの小腸の時間差ΔT3を部分的に時間差ΔT5に再設定し、大腸の時間差ΔT4を部分的に時間差ΔT6に再設定した場合を例示して、かかる更新後のデフォルトデータ15cに基づいた時間差ΔTを有する画像Pn,Qmを各表示領域101,102に同期表示する制御を行う制御部36の動作を具体的に説明する。図22は、更新後のデフォルトデータ15cに基づいた時間差ΔTを有する画像Pn,Qmを各表示領域101,102に順次同期表示させる制御部36の動作の一具体例を説明するための模式図である。
Next, the small intestine time difference ΔT3 in the
図22において、小腸の画像群B3,C3の各画像の時間差ΔT3は、被検体1の小腸の蠕動運動に合わせて部分的に時間差ΔT5(>ΔT3)に更新される。具体的には、かかる時間差ΔT3は、小腸の画像群B3,C3においてカプセル型内視鏡2が小腸内に停滞しているフレーム期間に対応する部分を時間差ΔT5に更新される。また、大腸の画像群B4,C4の各画像の時間差ΔT4は、被検体1の大腸の蠕動運動に合わせて部分的に時間差ΔT6(>ΔT4)に再設定される。具体的には、かかる時間差ΔT4は、大腸の画像群B4,C4においてカプセル型内視鏡2が大腸内に停滞しているフレーム期間に対応する部分を時間差ΔT6に更新される。
In FIG. 22, the time difference ΔT3 between the images of the small intestine image groups B3 and C3 is partially updated to the time difference ΔT5 (> ΔT3) in accordance with the peristaltic movement of the subject 1 in the small intestine. Specifically, the time difference ΔT3 is updated to a time difference ΔT5 in a portion corresponding to a frame period in which the
制御部36は、上述したステップS201〜S212とほぼ同様の処理手順を行う。この場合、制御部36は、ステップS209において、更新後のデフォルトデータ15cに基づいて、時間差ΔTの変更があるか否かを判断する。制御部36が時間差ΔTの変更有りと判断した場合、表示制御部36aは、変更後の時間差ΔT(例えばフレーム単位で再設定した時間差ΔT)の時間差データをもとにフレーム番号mを算出する。一方、制御部36が時間差ΔTの変更無しと判断した場合、表示制御部36aは、フレーム番号mを上述したように更新(例えば+1加算)する。
The
具体的には、制御部36は、被検体1の小腸が撮像された画像群B3,C3の各画像を同期表示する場合、更新後のフレーム番号nの画像が時間差ΔT3または時間差ΔT5に設定維持されたものであれば、時間差ΔTの変更なしと判断する。この場合、表示制御部36aは、上述したステップS209と同様にフレーム番号mを更新する。一方、制御部36は、更新後のフレーム番号nの画像が時間差ΔT3から時間差ΔT5に再設定されたものである場合、時間差ΔTの変更有りと判断する。この場合、表示制御部36aは、更新後のデフォルトデータ15cに基づいて、かかる時間差ΔT5の時間差データをもとにフレーム番号mを算出する。これと同様に、制御部36は、更新後のフレーム番号nの画像が時間差ΔT5から時間差ΔT3に設定を戻したものである場合、時間差ΔTの変更有りと判断する。この場合、表示制御部36aは、更新後のデフォルトデータ15cに基づいて、かかる時間差ΔT3の時間差データをもとにフレーム番号mを算出する。
Specifically, when the images of the image groups B3 and C3 obtained by imaging the small intestine of the subject 1 are synchronously displayed, the
このような表示制御部36aは、画像群B3,C3のうちのカプセル型内視鏡2が小腸内で移動しつつ撮像した画像群において、元の時間差ΔT3を有する画像Pn,Qmを各表示領域101,102に同期表示する制御を行い、画像群B3,C3のうちのカプセル型内視鏡2が小腸内で停滞しつつ撮像した画像群において、再設定した時間差ΔT5を有する画像Pn,Qmを各表示領域101,102に同期表示する制御を行う。
Such a
また、制御部36は、被検体1の大腸が撮像された画像群B4,C4の各画像を同期表示する場合、更新後のフレーム番号nの画像が時間差ΔT4または時間差ΔT6に設定維持されたものであれば、時間差ΔTの変更なしと判断する。この場合、表示制御部36aは、上述したステップS209と同様にフレーム番号mを更新する。一方、制御部36は、更新後のフレーム番号nの画像が時間差ΔT4から時間差ΔT6に再設定されたものである場合、時間差ΔTの変更有りと判断する。この場合、表示制御部36aは、更新後のデフォルトデータ15cに基づいて、かかる時間差ΔT6の時間差データをもとにフレーム番号mを算出する。これと同様に、制御部36は、更新後のフレーム番号nの画像が時間差ΔT6から時間差ΔT4に設定を戻したものである場合、時間差ΔTの変更有りと判断する。この場合、表示制御部36aは、更新後のデフォルトデータ15cに基づいて、かかる時間差ΔT4の時間差データをもとにフレーム番号mを算出する。
When the
このような表示制御部36aは、画像群B4,C4のうちのカプセル型内視鏡2が大腸内で移動しつつ撮像した画像群において、元の時間差ΔT4を有する画像Pn,Qmを各表示領域101,102に同期表示する制御を行い、画像群B4,C4のうちのカプセル型内視鏡2が大腸内で停滞しつつ撮像した画像群において、再設定した時間差ΔT6を有する画像Pn,Qmを各表示領域101,102に同期表示する制御を行う。
Such a
上述したような制御部36を有する画像表示装置34は、被検体1の蠕動運動に合わせて部分的に時間差ΔTの設定を切り替えることができ、カプセル型内視鏡2が消化管内において停滞状態と移動状態とを繰り返す臓器(例えば胃、小腸、大腸等)の画像群であっても、互いに共通する被写体が撮像された画像同士を各表示領域101,102に確実に同期表示することができる。
The
以上、説明したように、本発明の実施の形態3では、上述した実施の形態2と同様の構成を有し、さらに、GUIを用いて時間差ΔTのデフォルトデータを更新(再設定)し、かかる更新後のデフォルトデータに基づいて設定した時間差ΔTを有する第1の画像と第2の画像とを表示部の各表示領域に順次同期表示するようにし、かかる第1の画像と該第1の画像に共通する被写体が撮像された第2の画像とを各表示領域に順次同期表示するように構成した。このため、多眼のカプセル型内視鏡が消化管内で移動しつつ撮像した画像群または消化管内で停滞しつつ撮像した画像群に対応して時間差ΔTの設定を切り替えることがさらにできる。この結果、上述した実施の形態2の作用効果を享受するとともに、多眼のカプセル型内視鏡が消化管内において停滞状態と移動状態とを繰り返す臓器(例えば胃、小腸、大腸等)の画像群であっても、互いに共通する被写体が撮像された画像同士を表示部の各表示領域に確実に同期表示できる画像表示装置を実現することができる。 As described above, the third embodiment of the present invention has the same configuration as that of the second embodiment described above, and further updates (resets) the default data of the time difference ΔT using the GUI. The first image having the time difference ΔT set based on the updated default data and the second image are sequentially displayed in synchronization with each display area of the display unit, and the first image and the first image are displayed. And a second image obtained by capturing an image of a subject common to the display area are sequentially displayed in synchronization with each display area. Therefore, it is possible to further switch the setting of the time difference ΔT corresponding to an image group captured while the multi-lens capsule endoscope moves in the digestive tract or an image group captured while stagnating in the digestive tract. As a result, an image group of organs (for example, stomach, small intestine, large intestine, etc.) that enjoys the operational effects of the above-described second embodiment and in which the multi-eye capsule endoscope repeats a stagnant state and a moving state in the digestive tract. Even so, it is possible to realize an image display device that can reliably and synchronously display images obtained by capturing subjects that are common to each other in each display area of the display unit.
(実施の形態4)
つぎに、本発明の実施の形態4について説明する。この実施の形態4にかかる画像表示装置では、さらに、副画像表示領域140に追加表示した複数のサムネイル画像を所望の組み合わせで関連付けるようにしている。
(Embodiment 4)
Next, a fourth embodiment of the present invention will be described. In the image display device according to the fourth embodiment, a plurality of thumbnail images additionally displayed in the
図23は、本発明の実施の形態4にかかる画像表示装置の一構成例を模式的に示すブロック図である。図24は、この実施の形態4にかかる画像表示装置の表示部に表示される各種GUIの一具体例を模式的に示す模式図である。図23に示すように、この画像表示装置44は、上述した実施の形態3にかかる画像表示装置34の制御部36に代えて制御部46を有する。この制御部46は、上述した画像表示装置34の制御部36に関連付け処理部46eを追加した構成を有する。また、図24に示すように、表示部12に表示されるウィンドウW1には、副画像表示領域140に表示した複数のサムネイル画像を所望の組み合わせで関連付けるためのGUIである関連付けアイコン121がさらに形成される。その他の構成は実施の形態3と同じであり、同一構成部分には同一符号を付している。
FIG. 23 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the fourth embodiment of the present invention. FIG. 24 is a schematic diagram schematically illustrating a specific example of various GUIs displayed on the display unit of the image display apparatus according to the fourth embodiment. As shown in FIG. 23, the image display device 44 includes a
なお、本発明の実施の形態4にかかる画像表示装置44を用いた被検体内情報取得システムは、図1に例示した実施の形態1にかかる被検体内情報取得システムの画像表示装置4に代えて画像表示装置44を有することによって実現される。
The in-subject information acquisition system using the image display device 44 according to the fourth embodiment of the present invention is replaced with the
制御部46は、上述した実施の形態3にかかる画像表示装置34の制御部36と同様の機能を有し、さらに、複数のサムネイル画像を所望の組み合わせで関連付ける関連付け機能を有する。このような制御部46は、上述したように、関連付け処理部46eをさらに有する。
The
関連付け処理部46eは、副画像表示領域140に表示された複数のサムネイル画像を所望の組み合わせで関連付ける関連付け処理を行う。具体的には、関連付け処理部46eは、入力部11によって入力された指示情報に基づいて、副画像表示領域140に表示された複数のサムネイル画像の中から選択された所望のサムネイル画像群を関連付ける。この場合、制御部46は、かかる関連付け処理部46eによって関連付けられたサムネイル画像群を示す指標、例えば、関連付けられたサムネイル画像同士を結ぶ線L(図24を参照)をウィンドウW1内に表示する制御を行う。
The
つぎに、所望の組み合わせで複数のサムネイル画像を関連付ける際の制御部46の動作について説明する。図25は、所望の組み合わせで複数のサムネイル画像を関連付ける際の制御部46の処理手順を説明するフローチャートである。
Next, the operation of the
図25において、まず、制御部46は、副画像表示領域140に表示された複数のサムネイル画像の中から所望のサムネイル画像が指定されたか否かを判断する(ステップS301)。具体的には、入力部11は、副画像表示領域140に表示された複数のサムネイル画像の中から所望のサムネイル画像をクリックした場合に、この所望のサムネイル画像を所望の組み合わせの一つとして指定する指示情報を制御部46に入力する。制御部46は、このような指示情報が入力部11によって入力されなければ、所望のサムネイル画像が指定されていないと判断し(ステップS301,No)、このステップS301を繰り返す。すなわち、制御部46は、副画像表示領域140の中から所望のサムネイル画像が指定されるまで、このステップS301を繰り返す。
In FIG. 25, first, the
一方、制御部46は、このような指示情報が入力部11によって入力された場合、所望のサムネイル画像が指定されたと判断し(ステップS301,Yes)、入力された指示情報に基づいて、副画像表示領域140の中から指定された所望のサムネイル画像を選択する(ステップS302)。
On the other hand, when such instruction information is input by the
つぎに、制御部46は、副画像表示領域140に表示された複数のサムネイル画像の中から別のサムネイル画像が指定されたか否かを判断する(ステップS303)。具体的には、入力部11は、副画像表示領域140に表示された複数のサムネイル画像の中から別のサムネイル画像をさらにクリックした場合に、この別のサムネイル画像を所望の組み合わせの更なる一つとして追加指定する指示情報を制御部46に入力する。制御部46は、このような追加の指示情報が入力部11によって入力されなければ、別のサムネイル画像が指定されていないと判断し(ステップS303,No)、このステップS303を繰り返す。すなわち、制御部46は、副画像表示領域140の中から別のサムネイル画像が追加指定されるまで、このステップS303を繰り返す。
Next, the
一方、制御部46は、このような追加の指示情報が入力部11によって入力された場合、別のサムネイル画像が追加指定されたと判断し(ステップS303,Yes)、入力された追加の指示情報に基づいて、副画像表示領域140の中から追加指定された所望のサムネイル画像(すなわち上述したステップS302において選択した所望のサムネイル画像と異なる別のサムネイル画像)を追加選択する(ステップS304)。
On the other hand, when such additional instruction information is input by the
つぎに、制御部46は、上述したように選択した2つのサムネイル画像を関連付ける(ステップS305)。この場合、関連付け処理部46eは、ステップS302において選択したサムネイル画像とステップ304において追加選択した別のサムネイル画像とを関連付ける。このようにして、関連付け処理部46eは、副画像表示領域140に表示された複数のサムネイル画像を所望の組み合わせで関連付ける。なお、制御部46は、かかる関連付け処理部46eによって関連付けられた所望のサムネイル画像の組み合わせを記憶部15に保存し、保存した所望の組み合わせをサムネイル画像の組み合わせの一つとして保持管理する。
Next, the
その後、制御部46は、このような所望のサムネイル画像同士の関連付けを示す指標を表示部12に表示させる(ステップS306)。具体的には、制御部46は、かかる関連付け処理部46eによって関連付けられた所望のサムネイル画像同士を結ぶ線を関連付けの指標として表示する制御を行う。
Thereafter, the
ここで、図24を参照しつつ、かかるサムネイル画像の関連付けを具体的に説明する。図24に示したように、副画像表示領域140には、複数のサムネイル画像SP1〜SP6が表示されている。なお、かかる複数のサムネイル画像のうち、サムネイル画像SP1,SP2,SP3,SP5は、表示領域101に表示した画像群の中から選択した画像を縮小したものであり、サムネイル画像SP4,SP6は、表示領域102に表示した画像群の中から選択した画像を縮小したものである。
Here, the association of the thumbnail images will be specifically described with reference to FIG. As shown in FIG. 24, a plurality of thumbnail images SP1 to SP6 are displayed in the
入力部11は、まず、サムネイル画像SP5のクリック操作によってサムネイル画像SP5を指定する指示情報を制御部46に入力する。この場合、制御部46は、かかる指定のサムネイル画像SP5を所望の組み合わせを形成する一つめのサムネイル画像として選択する。つぎに、入力部11は、サムネイル画像SP6のクリック操作によってサムネイル画像SP6を追加指定する指示情報を制御部46に入力する。この場合、制御部46は、かかる追加指定のサムネイル画像SP6を所望の組み合わせを形成する残りのサムネイル画像として追加選択する。
First, the
このように制御部46が複数のサムネイル画像SP1〜SP6の中から所望のサムネイル画像SP5,SP6の組み合わせを選択した場合、関連付け処理部46eは、かかる2つのサムネイル画像SP5,SP6を関連付ける。また、制御部46は、かかる関連付け処理部46eによって関連付けられたサムネイル画像SP5とサムネイル画像SP6とを結ぶ線Lを関連付けの指標として表示部12に表示させる。
As described above, when the
ユーザは、このような線Lを視認することによって、サムネイル画像SP5,SP6が関連付けられたものである旨を容易に把握することができる。この場合、関連付けられたサムネイル画像SP5,SP6は、例えば、互いに共通する被写体が撮像されたサムネイル画像同士、または、病変部や出血部等の特徴的な部分が撮像されたサムネイル画像同士である。 By visually recognizing such a line L, the user can easily grasp that the thumbnail images SP5 and SP6 are associated with each other. In this case, the associated thumbnail images SP5 and SP6 are, for example, thumbnail images in which subjects that are common to each other are captured, or thumbnail images in which characteristic portions such as a lesioned part and a bleeding part are captured.
また、制御部46は、このように関連付けたサムネイル画像SP5,SP6のいずれかをクリックすることによって入力部11から指示情報が入力された場合、かかる指示情報に基づいて、このサムネイル画像SP5に対応する画像Pnを表示領域101に表示させるとともに、このサムネイル画像SP6に対応する画像Qmを表示領域102に表示させる。このような制御部46を有する画像表示装置44は、関連付けたサムネイル画像のいずれかを指定する(具体的にはクリックする)ことによって、例えば病変部または出血部等の特徴的な部分が複数の方向から撮像された画像同士を各表示領域101,102に容易に表示することができる。
Further, when the instruction information is input from the
以上、説明したように、本発明に実施の形態4では、上述した実施の形態3の構成を有し、さらに、副画像表示領域に表示された複数のサムネイル画像を所望の組み合わせで関連付けるようにし、かかる所望のサムネイル画像の関連付けを示す指標を表示するように構成した。このため、上述した実施の形態3の作用効果を享受するとともに、複数のサムネイル画像の中から互いに関連するサムネイル画像の組み合わせを容易に把握することができる画像表示装置を実現することができる。 As described above, the fourth embodiment of the present invention has the configuration of the third embodiment described above, and further associates a plurality of thumbnail images displayed in the sub-image display area in a desired combination. The index indicating the association of the desired thumbnail image is displayed. Therefore, it is possible to realize an image display device that can enjoy the above-described effects of Embodiment 3 and that can easily grasp the combination of thumbnail images that are related to each other from among a plurality of thumbnail images.
本発明の実施の形態4にかかる画像表示装置を用いることによって、被検体の多方向の画像群の中から例えば病変部または出血部等の特徴的な部分が撮像された画像同士を容易に探し出すことができ、かかる特徴的な部位が複数の方向から撮像された画像同士を表示部の各表示領域に容易に同期表示することができる。 By using the image display apparatus according to the fourth embodiment of the present invention, images in which characteristic portions such as a lesioned part or a bleeding part are imaged can be easily searched from among multidirectional image groups of the subject. It is possible to easily and synchronously display images obtained by capturing such characteristic parts from a plurality of directions in the display areas of the display unit.
(実施の形態5)
つぎに、本発明の実施の形態5について説明する。この実施の形態5にかかる画像表示装置では、上述した画像Pn,Qmの同期表示機能に加え、さらに、通常表示モードにおいて画像Pn,Qmの表示操作を別々に行えるようにしている。
(Embodiment 5)
Next, a fifth embodiment of the present invention will be described. In the image display apparatus according to the fifth embodiment, the image P n as described above, in addition to the synchronous display function of Q m, further, the image P n, the display operation of Q m are so as to perform differently in the normal display mode .
図26は、本発明の実施の形態5にかかる画像表示装置の一構成例を模式的に示すブロック図である。図27は、この実施の形態5にかかる画像表示装置の表示部に表示される各種GUIの一具体例を模式的に示す模式図である。図26に示すように、この画像表示装置54は、上述した実施の形態4にかかる画像表示装置44の制御部46に代えて制御部56を有する。この制御部56は、上述した画像表示装置44の制御部46の表示制御部36aに代えて表示制御部56aを有する。また、図27に示すように、表示部12に表示されるウィンドウW1には、表示領域101に表示した画像Pnの特徴づけを行うためのGUIであるランドマークアイコン122と、表示領域102に表示した画像Qmの特徴づけを行うためのGUIであるランドマークアイコン123とがさらに形成される。また、この実施の形態5では、通常表示モードにおいて、表示領域101のクリック操作によって表示領域101の選択状態を切替可能にし、選択状態である場合に表示領域101の画像表示操作を有効にしている。さらに、表示領域102のクリック操作によって表示領域102の選択状態を切替可能にし、選択状態である場合に表示領域102の画像表示操作を有効にしている。その他の構成は実施の形態4と同じであり、同一構成部分には同一符号を付している。
FIG. 26 is a block diagram schematically illustrating a configuration example of an image display apparatus according to the fifth embodiment of the present invention. FIG. 27 is a schematic diagram schematically illustrating a specific example of various GUIs displayed on the display unit of the image display apparatus according to the fifth embodiment. As shown in FIG. 26, the image display device 54 includes a
なお、本発明の実施の形態5にかかる画像表示装置54を用いた被検体内情報取得システムは、図1に例示した実施の形態1にかかる被検体内情報取得システムの画像表示装置4に代えて画像表示装置54を有することによって実現される。
The in-subject information acquisition system using the image display device 54 according to the fifth embodiment of the present invention is replaced with the
制御部56は、上述した実施の形態4にかかる画像表示装置44の制御部46とほぼ同様の機能を有する。この場合、制御部56は、通常表示モードにおいて、画像Pnを表示するための表示領域101について画像表示操作の有効および無効のいずれかを選択し、且つ、画像Qmを表示するための表示領域102について画像表示操作の有効および無効のいずれかを選択する。
The
表示制御部56aは、上述した実施の形態4にかかる画像表示装置44の表示制御部36aとほぼ同様の機能を有する。この場合、表示制御部56aは、主画像表示領域100の表示領域101,102の画像表示制御を別々に行うことができる。具体的には、表示制御部56aは、通常表示モードにおいて、入力部11を用いた表示領域101のクリック操作によって表示領域101が選択状態に設定された場合に、かかる選択状態の表示領域101の画像表示操作を有効にし、入力部11を用いた表示領域101の再度のクリック操作によって表示領域101が非選択状態に設定された場合に、かかる非選択状態の表示領域101の画像表示操作を無効にする。この場合、表示領域101は、かかる入力部11を用いたクリック操作によって選択状態または非選択状態を設定する設定GUIとして機能する。
The
これと同様に、表示制御部56aは、通常表示モードにおいて、入力部11を用いた表示領域102のクリック操作によって表示領域102が選択状態に設定された場合に、かかる選択状態の表示領域102の画像表示操作を有効にし、入力部11を用いた表示領域102の再度のクリック操作によって表示領域102が非選択状態に設定された場合に、かかる非選択状態の表示領域102の画像表示操作を無効にする。この場合、表示領域102は、かかる入力部11を用いたクリック操作によって選択状態または非選択状態を設定する設定GUIとして機能する。
Similarly, when the
また、表示制御部56aは、ランドマークアイコン122のクリック操作によって入力部11から入力された指示情報に基づいて、表示領域101に表示している所望の画像Pnを特徴付けるランドマークM1を例えば表示領域101の周囲に表示する制御を行う。この場合、ランドマークアイコン122は、所望の画像Pnを特徴付けるためのランドマークM1を設定する設定GUIとして機能する。このようなランドマークアイコン122は、表示領域101が選択状態(すなわち画像表示操作が有効な状態)に設定された場合に有効であり、表示領域101が非選択状態(すなわち画像表示操作が無効な状態)に設定された場合に無効である。
Further, the
さらに、表示制御部56aは、ランドマークアイコン123のクリック操作によって入力部11から入力された指示情報に基づいて、表示領域102に表示している所望の画像Qmを特徴付けるランドマークM2を例えば表示領域102の周囲に表示する制御を行う。この場合、ランドマークアイコン123は、所望の画像Qmを特徴付けるためのランドマークM2を設定する設定GUIとして機能する。このようなランドマークアイコン123は、表示領域102が選択状態(すなわち画像表示操作が有効な状態)に設定された場合に有効であり、表示領域102が非選択状態(すなわち画像表示操作が無効な状態)に設定された場合に無効である。
Further, the
なお、かかるランドマークM1,M2によって特徴付けられる画像Pn,Qmは、例えば、胃または十二指腸等の画像であってもよいし、病変部や出血部等の特徴的な部位が撮像された画像であってもよい。 The images P n and Q m characterized by the landmarks M1 and M2 may be, for example, images of the stomach or the duodenum, or a characteristic part such as a lesioned part or a bleeding part is imaged. It may be an image.
つぎに、通常表示モードにおいて選択状態の表示領域101,102に画像Pn,Qmをそれぞれ表示する制御を行う制御部56の動作について説明する。図28は、通常表示モードにおいて選択状態の表示領域101,102に画像Pn,Qmをそれぞれ表示させる制御部56の処理手順を説明するフローチャートである。
Next, the operation of the
図28において、まず、制御部56は、上述した同期アイコン130に対する再度のクリック操作によって設定された通常表示モードを画像表示モードとして選択する(ステップS401)。この場合、表示制御部56aは、同期アイコン130に対する再度のクリック操作によって入力部11から入力される設定情報に基づいて、複数の画像表示モードの中から通常表示モードを選択する。
In FIG. 28, first, the
つぎに、制御部56は、第1画像群PG1のフレーム番号nと第2画像群PG2のフレーム番号mとをともに初期化する(ステップS402)。この場合、表示制御部56aは、第1画像群PG1のうちの表示処理対象の画像のフレーム番号nを初期化する(例えばn=0にする)。また、表示制御部56aは、第2画像群PG2のうちの表示処理対象の画像のフレーム番号mを初期化する(例えばm=0にする)。
Next, the
その後、制御部56は、上述したステップS205とほぼ同様に、表示操作アイコン群110のいずれかに対応した画像表示指示があったか否かを判断する(ステップS403)。具体的には、制御部56は、表示操作アイコン群110のいずれかに対応した表示指示情報が入力部11から入力されない場合、画像Pn,Qmの画像表示指示なしと判断し(ステップS403,No)、このステップS403を繰り返す。すなわち、制御部56は、かかる表示指示情報が入力部11によって入力されるまで、このステップS403を繰り返す。
Thereafter, the
一方、制御部56は、かかる表示指示情報が入力部11から入力された場合、この入力された表示指示情報に基づいて画像Pn,Qmの画像表示指示ありと判断し(ステップS403,Yes)、画像Pnを表示するための表示領域101(第1表示領域)が選択状態に設定されたか否かを判断する(ステップS404)。具体的には、表示領域101は、入力部11によってクリック操作が行われた場合に選択状態を設定し、入力部11によって再度のクリック操作が行われた場合に非選択状態を設定する。すなわち、制御部56は、表示領域101に対する1度のクリック操作によって入力部11から選択状態の設定情報が入力された場合、表示領域101が選択状態であると判断し、表示領域101に対する再度のクリック操作によって入力部11から非選択状態の設定情報が入力された場合、表示領域101が選択状態ではない(すなわち非選択状態である)と判断する。
On the other hand, the
表示制御部56aは、表示領域101が選択状態であると判断した場合(ステップS404,Yes)、表示領域101に対する画像表示操作を有効にするとともに、入力部11によって入力された表示指示情報に基づいて現在のフレーム番号nの画像Pnを表示領域101に表示させる(ステップS405)。この場合、表示制御部56aは、記憶部15に保存された第1画像群PG1の中から現在のフレーム番号n(n=0,1,2,3,…)の画像Pnを読み出し、得られた画像Pnを表示領域101に表示する制御を行う。
If the
なお、かかるステップS405における現在のフレーム番号nは、上述したステップS402において初期化したフレーム番号n(=0)または後述するステップS406において更新したフレーム番号nである。 The current frame number n in step S405 is the frame number n (= 0) initialized in step S402 described above or the frame number n updated in step S406 described later.
その後、制御部56aは、上述したステップS207と同様に、第1画像群PG1のフレーム番号nを更新する(ステップS406)。この場合、表示制御部56aは、つぎのステップS405において表示領域101に表示する画像Pnを記憶部15から読み出すために第1画像群PG1のフレーム番号nを更新(例えば+1加算)する。
Thereafter, the
つぎに、制御部56は、画像Qmを表示するための表示領域102(第2表示領域)が選択状態に設定されたか否かを判断する(ステップS407)。具体的には、表示領域102は、入力部11によってクリック操作が行われた場合に選択状態を設定し、入力部11によって再度のクリック操作が行われた場合に非選択状態を設定する。すなわち、制御部56は、表示領域102に対する1度のクリック操作によって入力部11から選択状態の設定情報が入力された場合、表示領域102が選択状態であると判断し、表示領域102に対する再度のクリック操作によって入力部11から非選択状態の設定情報が入力された場合、表示領域102が選択状態ではない(すなわち非選択状態である)と判断する。
Next, the
表示制御部56aは、表示領域102が選択状態であると判断した場合(ステップS407,Yes)、表示領域102に対する画像表示操作を有効にするとともに、入力部11によって入力された表示指示情報に基づいて現在のフレーム番号mの画像Qmを表示領域102に表示させる(ステップS408)。この場合、表示制御部56aは、記憶部15に保存された第2画像群PG2の中から現在のフレーム番号m(m=0,1,2,3,…)の画像Qmを読み出し、得られた画像Qmを表示領域102に表示する制御を行う。
If the
なお、かかるステップS408における現在のフレーム番号mは、上述したステップS402において初期化したフレーム番号m(=0)または後述するステップS409において更新したフレーム番号mである。 The current frame number m in step S408 is the frame number m (= 0) initialized in step S402 described above or the frame number m updated in step S409 described later.
その後、制御部56aは、上述したステップS209と同様に、第2画像群PG2のフレーム番号mを更新する(ステップS409)。この場合、表示制御部56aは、つぎのステップS408において表示領域102に表示する画像Qmを記憶部15から読み出すために第2画像群PG2のフレーム番号mを更新(例えば+1加算)する。
Thereafter, the
つぎに、制御部56は、選択状態の表示領域101,102に画像Pn,Qmを表示する制御に対して一時停止指示があったか否かを判断する(ステップS410)。具体的には、制御部56は、上述したステップS403においてコマ再生アイコン112、頭出しアイコン113、逆コマ再生アイコン115、および逆頭出しアイコン116のいずれかに対応する表示指示情報が入力部11から入力された場合に一時停止指示ありと判断する(ステップS410,Yes)。この場合、制御部56は、上述したステップS403に戻り、このステップS403以降の処理手順を繰り返す。
Next, the
一方、制御部56は、上述したステップS403において再生アイコン111または逆再生アイコン114に対応する表示指示情報が入力部11から入力された場合に一時停止指示なしと判断する(ステップS410,No)。この場合、制御部56は、かかる通常表示モードにおける選択状態の表示領域101,102の画像表示処理が終了したか否かを判断する(ステップS411)。
On the other hand, when the display instruction information corresponding to the
具体的には、制御部56は、上述したステップS406において更新したフレーム番号nが第1画像群PG1のフレーム数以上である場合、選択状態の表示領域101の画像表示処理が終了したと判断し(ステップS411,Yes)、かかる表示領域101の画像表示処理を完了する。また、制御部56は、上述したステップS409において更新したフレーム番号mが第2画像群PG2のフレーム数以上である場合、選択状態の表示領域102の画像表示処理が終了したと判断し(ステップS411,Yes)、かかる表示領域102の画像表示処理を完了する。
Specifically, when the frame number n updated in step S406 described above is equal to or greater than the number of frames of the first image group PG1, the
一方、制御部56は、上述したステップS406において更新したフレーム番号nが第1画像群PG1のフレーム数未満である場合、選択状態の表示領域101の画像表示処理が終了していないと判断し(ステップS411,No)、上述したステップS404に戻る。また、制御部56は、上述したステップS409において更新したフレーム番号mが第2画像群PG2のフレーム数未満である場合、選択状態の表示領域102の画像表示処理が終了していないと判断し(ステップS411,No)、上述したステップS404に戻る。その後、制御部56は、上述したステップS404以降の処理手順を繰り返す。
On the other hand, when the frame number n updated in step S406 described above is less than the number of frames of the first image group PG1, the
なお、上述したステップS404において、表示制御部56aは、表示領域101が選択状態ではないと判断した場合(ステップS404,No)、上述したステップS405,S406の処理手順をスキップしてステップS407に進む。その後、制御部56は、このステップS407以降の処理手順を繰り返す。また、上述したステップS407において、表示制御部56aは、表示領域102が選択状態ではないと判断した場合(ステップS407,No)、上述したステップS408,S409の処理手順をスキップしてステップS410に進む。その後、制御部56は、このステップS410以降の処理手順を繰り返す。
In step S404 described above, if the
つぎに、通常表示モードにおいて選択状態の表示領域101,102に画像Pn,Qmをそれぞれ表示する制御を行う制御部56の動作について具体的に説明する。図29は、通常表示モードにおいて表示領域101,102がともに選択状態に設定された場合の画像表示処理を制御する制御部56の動作を説明する模式図である。図30は、通常表示モードにおいて表示領域101のみが選択状態に設定された場合の個別の画像表示処理を制御する制御部56の動作を説明する模式図である。図31は、通常表示モードにおいて表示領域102のみが選択状態に設定された場合の個別の画像表示処理を制御する制御部56の動作を説明する模式図である。
Next, the operation of the
図29に示すように、制御部56は、表示領域101,102がともに選択状態に設定された場合、かかる選択状態の両表示領域101,102に対する画像表示操作を有効にし、表示操作アイコン群110のいずれかに対応する表示指示情報に基づいて画像Pn,Qmの表示処理を制御する。具体的には、表示制御部56aは、選択状態の表示領域101(第1表示領域)を強調表示して選択状態である旨を示すとともに、かかる選択状態の表示領域101に第1画像群PG1の画像Pn(n=0,1,2,3,…)を順次表示させる。この場合、かかる表示制御部56aの制御によって、例えば画像P0,P1,P2,P3が、選択状態の表示領域101に順次表示される。
As shown in FIG. 29, when both the
また、表示制御部56aは、選択状態の表示領域102(第2表示領域)を強調表示して選択状態である旨を示すとともに、かかる選択状態の表示領域102に第2画像群PG2の画像Qm(m=0,1,2,3,…)を順次表示させる。この場合、かかる表示制御部56aの制御によって、例えば画像Q0,Q1,Q2,Q3が、上述した画像P0,P1,P2,P3にそれぞれ同期して選択状態の表示領域102に順次表示される。
Further, the
その後、表示領域101のみが選択状態に設定された場合、制御部56は、図30に示すように、かかる選択状態の表示領域101に対する画像表示操作のみを有効にし、表示操作アイコン群110のいずれかに対応する表示指示情報に基づいて画像Pnの表示処理を個別に制御する。具体的には、表示制御部56aは、選択状態の表示領域101のみを強調表示して選択状態である旨を示すとともに、かかる選択状態の表示領域101に第1画像群PG1の画像Pnのみを順次表示させる。この場合、かかる表示制御部56aの制御によって、例えば画像P4,P5,P6,P7,P8が、選択状態の表示領域101に順次表示される。
Thereafter, when only the
ここで、制御部56は、非選択状態に設定された表示領域102に対する画像表示操作を無効にし、かかる非選択状態の表示領域102を画像表示処理の一時停止状態または画像非表示状態にする。この場合、表示制御部56aは、非選択状態に設定される直前に表示領域102表示された画像(例えば画像Q3)を一時停止状態で表示する制御を行う。あるいは、表示制御部56aは、非選択状態の表示領域102の画像を消去処理する制御を行い、かかる非選択状態の表示領域102を画像非表示状態にしてもよい。
Here, the
その後、表示領域102のみが選択状態に設定された場合、制御部56は、図31に示すように、かかる選択状態の表示領域102に対する画像表示操作のみを有効にし、表示操作アイコン群110のいずれかに対応する表示指示情報に基づいて画像Qmの表示処理を個別に制御する。具体的には、表示制御部56aは、選択状態の表示領域102のみを強調表示して選択状態である旨を示すとともに、かかる選択状態の表示領域102に第2画像群PG2の画像Qmのみを順次表示させる。この場合、かかる表示制御部56aの制御によって、例えば画像Q4,Q5,Q6,Q7,Q8が、選択状態の表示領域102に順次表示される。
Thereafter, when only the
ここで、制御部56は、非選択状態に設定された表示領域101に対する画像表示操作を無効にし、かかる非選択状態の表示領域101を画像表示処理の一時停止状態または画像非表示状態にする。この場合、表示制御部56aは、非選択状態に設定される直前に表示領域101表示された画像(例えば画像Q8)を一時停止状態で表示する制御を行う。あるいは、表示制御部56aは、非選択状態の表示領域101の画像を消去処理する制御を行い、かかる非選択状態の表示領域101を画像非表示状態にしてもよい。
Here, the
なお、この実施の形態5にかかる画像表示装置54では、入力部11によってキャプチャーアイコン120のクリック操作が行われた場合、主画像表示領域100の表示領域101,102のうちの選択状態に設定された表示領域に表示された画像のサムネイル画像が作成され、作成されたサムネイル画像が副画像表示領域140に追加表示される。この場合、画像処理部26bは、キャプチャーアイコン120のクリック操作によって入力部11から入力された指示情報に基づいて、表示領域101,102のうちの選択状態の表示領域に表示された画像のサムネイル画像を作成する。すなわち、画像処理部26bは、表示領域101が選択状態に設定されていれば、この選択状態の表示領域101に表示された画像Pnのサムネイル画像を作成し、表示領域102が選択状態に設定されていれば、この選択状態の表示領域102に表示された画像Qmのサムネイル画像を作成し、表示領域101,102がともに選択状態に設定されていれば、かかる選択状態の表示領域101,102にそれぞれ表示された画像Pn,Qmの各サムネイル画像を作成する。
In the image display device 54 according to the fifth embodiment, when the
以上、説明したように、本発明の実施の形態5では、上述した実施の形態4の構成を有し、さらに、表示部に形成した複数の表示領域に対して画像表示操作の有効または無効を個別に設定し、多眼のカプセル型内視鏡に搭載した撮像素子群によって撮像された被検体内の複数の画像群のうちの所望の画像群に含まれる画像を有効な表示領域に順次表示するように構成した。このため、上述した実施の形態4の作用効果を享受するとともに、不要な画像群の表示処理を停止しつつ所望の画像群に含まれる各画像を表示領域に順次表示できる画像表示装置を実現することができる。 As described above, the fifth embodiment of the present invention has the configuration of the fourth embodiment described above, and further enables or disables the image display operation for a plurality of display areas formed in the display unit. Individually set and sequentially display images included in a desired image group among a plurality of image groups in a subject imaged by an image sensor group mounted on a multi-lens capsule endoscope in an effective display area Configured to do. For this reason, an image display device that can enjoy the effects of the fourth embodiment described above and can sequentially display each image included in the desired image group in the display area while stopping the display processing of the unnecessary image group is realized. be able to.
本発明の実施の形態5にかかる画像表示装置を用いることによって、ユーザは、多眼のカプセル型内視鏡の撮像素子群によって撮像された複数の画像群のうちの不要な画像群に惑わされずに所望の画像群に意識を集中することができ、この結果、被検体内の画像を容易に観察することができる。 By using the image display device according to the fifth exemplary embodiment of the present invention, the user is not confused by an unnecessary image group among a plurality of image groups captured by the imaging element group of the multi-lens capsule endoscope. In addition, it is possible to concentrate the consciousness on the desired image group, and as a result, it is possible to easily observe the image in the subject.
なお、本発明の実施の形態1〜5では、タイムスライダ132,133を共通のタイムスケールTSに沿って移動させていたが、これに限らず、第1画像群PG1および第2画像群PG2の各時間的な長さをそれぞれ示す2つのタイムスケールを互いに近傍な位置に形成し、かかる2つのタイムスケール上をタイムスライダ132,133がそれぞれ移動するようにしてもよい。具体的には、例えば図32に示すように、副画像表示領域140の近傍に、第1画像群PG1の時間的な長さを示すタイムスケールTS1と第2画像群PG2の時間的な長さを示すタイムスケールTS2とを上下に並べて形成し、このタイムスケールTS1上をタイムスライダ132が移動し、このタイムスケールTS2上をタイムスライダ133が移動するようにしてもよい。
In the first to fifth embodiments of the present invention, the
また、本発明の実施の形態1〜5では、入力部11を操作してデータ設定領域131に時間差データを直接入力していたが、これに限らず、例えば図32に示すように、データ設定領域131内の時間差データ(数値データ)を増減する数値増減アイコン135を形成し、かかる数値増減アイコン135を用いてデータ設定領域131内の時間差データを調整してもよい。また、入力部11がジョグダイヤルを有するようにし、かかる入力部11のジョグダイヤルを操作することによってデータ設定領域131内の時間差データを増減してもよい。
In the first to fifth embodiments of the present invention, the time difference data is directly input to the
さらに、本発明の実施の形態1〜5では、タイムスライダ132,133はタイムスケールTSに沿った同一径路上を移動していたが、これに限らず、タイムスライダ132,133は、タイムスケールTSに沿った互いに異なる径路上を移動するようにしてもよい。具体的には、例えば図33に示すように、タイムスケールTSの上側経路上をタイムスライダ132が移動し、タイムスケールTSの下側経路上をタイムスライダ133が移動してもよい。
Further, in the first to fifth embodiments of the present invention, the
また、本発明の実施の形態1〜5では、各表示領域101,102にそれぞれ表示した画像Pn,Qmの各サムネイル画像を共通の副画像表示領域140に追加表示していたが、これに限らず、複数の副画像表示領域を形成し、かかる複数の副画像表示領域のそれぞれに、画像Pnのサムネイル画像と画像Qmのサムネイル画像とを分類して追加表示してもよい。具体的には、例えば図34に示すように、複数の副画像表示領域140a,140bを形成し、画像Pnのサムネイル画像を副画像表示領域140aに追加表示し、画像Qmのサムネイル画像を副画像表示領域140bに追加表示してもよい。この場合、画像Pnのサムネイル画像と画像Qmのサムネイル画像との関連付けを示す線Lは、かかる関連付けられたサムネイル画像同士を結ぶように形成される。
In the first to fifth embodiments of the present invention, the thumbnail images of the images P n and Q m displayed in the
さらに、本発明の実施の形態1〜5では、タイムスケールTSを表示操作アイコン群110と副画像表示領域140との間の領域に形成していたが、これに限らず、第1画像群PG1および第2画像群PG2の各時間的な長さをそれぞれ示す2つのタイムスケールを各表示領域101,102の近傍にそれぞれ形成し、かかる2つのタイムスケール上をタイムスライダ132,133がそれぞれ移動するようにしてもよい。具体的には、例えば図35に示すように、表示領域101の下側近傍にタイムスケールTS1を形成して、このタイムスケールTS1上をタイムスライダ132が移動するようにし、且つ、表示領域102の下側近傍にタイムスケールTS2を形成して、このタイムスケールTS2上をタイムスライダ133が移動するようにしてもよい。
Furthermore, in
また、本発明の実施の形態1〜5では、同期表示モードにおいて各表示領域101,102に同期表示する画像Pn,Qmの各撮像時刻の時間差ΔTを設定するようにしていたが、これに限らず、かかる時間差ΔTに代えて画像Pn,Qmのフレーム番号差をGUIによって設定してもよい。具体的には、例えば図36に示すように、データ設定領域131とタイムスライダ132,133とを画像Pn,Qmのフレーム番号差の設定GUIとして形成し、かかるデータ設定領域131に入力されたフレーム番号差を同期表示モードにおいて各表示領域101,102に同期表示する画像Pn,Qmのフレーム番号差として設定してもよい。また、かかるタイムスライダ132,133を上述した時間差ΔTの設定の場合と同様に用いて、同期表示モードにおいて各表示領域101,102に同期表示する画像Pn,Qmのフレーム番号差を設定してもよい。
In the first to fifth embodiments of the present invention, the time difference ΔT between the imaging times of the images P n and Q m displayed synchronously in the
さらに、図36に示すように、数値増減アイコン135を用いてデータ設定領域131内のフレーム番号差を増減してもよい。あるいは、入力部11がジョグダイヤルを有するようにし、かかる入力部11のジョグダイヤルを操作することによってデータ設定領域131内のフレーム番号差を増減してもよい。
Furthermore, as shown in FIG. 36, the frame number difference in the
また、かかるデータ設定領域131またはタイムスライダ132,133等の設定GUIに限らず、画像Pn,Qmのフレーム番号差を被検体1の部位毎に予め設定したデフォルトデータを上述したデフォルトデータ15cに代えて記憶部15に保存し、かかるフレーム番号差のデフォルトデータに基づいて被検体1の部位毎に画像Pn,Qmのフレーム番号差を設定してもよい。この場合、データ設定領域131またはタイムスライダ132,133等の設定GUIを用いて、かかるフレーム番号差のデフォルトデータをフレーム単位で部分的に更新するようにしてもよい。
In addition to the setting GUI for the
なお、このように同期表示モードにおける画像Pn,Qmのフレーム番号差を設定した場合、本発明にかかる画像表示装置の制御部は、同期表示モードにおいて、かかるフレーム番号差を有する画像Pn,Qmを各表示領域101,102に同期表示する制御を行う。この場合も、上述した時間差ΔTの場合と同様に、互いに共通する同一被写体を複数の方向から撮像した画像同士を各表示領域101,102に同期表示できる。
When the frame number difference between the images P n and Q m in the synchronous display mode is set as described above, the control unit of the image display device according to the present invention has the image P n having the frame number difference in the synchronous display mode. , Q m are controlled to be displayed synchronously in the
また、本発明の実施の形態1〜5では、多眼のカプセル型内視鏡2に搭載した2つの撮像素子2a,2bによって撮像された第1画像群PG1の各画像と第2画像群PG2の各画像とを各表示領域101,102に表示していたが、これに限らず、多眼のカプセル型内視鏡に搭載した3以上の撮像素子によって撮像された3以上の画像群を取得し、かかる3以上の画像群のうちの2つにそれぞれ含まれる各画像を各表示領域101,102に表示してもよい。また、被検体内の画像を表示する表示領域を3以上形成し、多眼のカプセル型内視鏡に搭載した3以上の撮像素子によって撮像された3以上の画像群にそれぞれ含まれる各画像を3以上の表示領域にそれぞれ表示してもよい。
In the first to fifth embodiments of the present invention, each image of the first image group PG1 and the second image group PG2 captured by the two
さらに、本発明の実施の形態1〜5では、単一のキャプチャーアイコンのクリック操作が行われた場合、画像表示操作が有効な状態である表示領域に表示された画像のサムネイル画像を副画像表示領域に追加表示していたが、これに限らず、表示領域毎にキャプチャーアイコンを形成し、かかるキャプチャーアイコンのクリック操作が行われた場合、このクリックされたキャプチャーアイコンに対応する表示領域に表示された画像のサムネイル画像を副画像表示領域に追加表示するようにしてもよい。
Furthermore, in
また、本発明の実施の形態4,5では、副画像表示領域に表示した複数のサムネイル画像のうちの所望の2つを互いに関連付けていたが、これに限らず、副画像表示領域に表示した複数のサムネイル画像のうちの3以上のサムネイル画像を互いに関連付けてもよい。この場合、かかるサムネイル画像の関連付けを示す指標(例えば線L)は、このように関連付けた3以上のサムネイル画像を互いに結ぶように形成される。 In the fourth and fifth embodiments of the present invention, two desired thumbnail images displayed in the sub-image display area are associated with each other. However, the present invention is not limited to this and is displayed in the sub-image display area. Three or more thumbnail images among a plurality of thumbnail images may be associated with each other. In this case, the index (for example, line L) indicating the association of the thumbnail images is formed so as to connect the three or more thumbnail images thus associated with each other.
さらに、本発明の実施の形態4,5では、所望のサムネイル画像の関連付けを示す指標として、かかる関連付けたサムネイル画像同士を結ぶ線を形成していたが、これに限らず、所望のサムネイル画像の関連付けを示す指標は、記号、文字、数字、または図形等の所望のマークであってもよい。この場合、関連付けた複数のサムネイル画像のそれぞれに同種のマークを付ければよい。 Furthermore, in the fourth and fifth embodiments of the present invention, a line connecting the associated thumbnail images is formed as an index indicating the association between the desired thumbnail images. The index indicating the association may be a desired mark such as a symbol, a letter, a number, or a figure. In this case, the same kind of mark may be attached to each of the plurality of associated thumbnail images.
1 被検体
2 カプセル型内視鏡
2a,2b 撮像素子
3 受信装置
3a〜3h 受信アンテナ
4,24,34,44,54 画像表示装置
5 携帯型記録媒体
11 入力部
12 表示部
13 カードI/F
14 入出力I/F
15 記憶部
15a 検査フォルダ
15b 管理フォルダ
15c デフォルトデータ
16,26,36,46,56 制御部
16a,26a,36a,56a 表示制御部
16b,26b 画像処理部
16c レポート作成部
16d 画像ファイル作成部
46e 関連付け処理部
100 主画像表示領域
101,102 表示領域
110,247 表示操作アイコン群
111 再生アイコン
112 コマ再生アイコン
113 頭出しアイコン
114 逆再生アイコン
115 逆コマ再生アイコン
116 逆頭出しアイコン
120 キャプチャーアイコン
121 関連付けアイコン
122,123 ランドマークアイコン
130 同期アイコン
131 データ設定領域
132,133 タイムスライダ
134 保存アイコン
135 数値増減アイコン
140 副画像表示領域
141 スクロールバー
150 Closeアイコン
201,244,250 ドライブ設定部
202 ファイル表示領域
203 ロゴ表示領域
204 ロゴ位置設定部
205 Clearアイコン
206,211,225,252,263 OKアイコン
207,212,226,253,264 Cancelアイコン
210 チェックボックス
220 医師名テキストボックス
221 施設名テキストボックス
222 住所テキストボックス
223 電話番号テキストボックス
224 メールアドレステキストボックス
230 医師名設定部
231 施設名設定部
232 住所設定部
233 電話番号設定部
234メールアドレス設定部
235 診断情報テキストボックス
236 Saveアイコン
237,245 Exportアイコン
240 静止画像ファイル表示領域
241 動画像ファイル表示領域
242 出力ファイル表示領域
243 追加アイコン
246 画像表示領域
251 容量表示領域
261 ユーザ権限表示領域
262 チェックボックス群
A1 患者情報
A2,A3 画像
A4,A5 アンテナ配置図
B1〜B4,C1〜C4 画像群
E 病変部
K カーソル
L 線
M1,M2 ランドマーク
PG1 第1画像群
PG2 第2画像群
Pn,Qm,P0〜P8,Q0〜Q8 画像
R フォーマット
TS,TS1,TS2 タイムスケール
SP1〜SP6 サムネイル画像
W1〜W8 ウィンドウ
DESCRIPTION OF
14 Input / output I / F
15 storage unit 15a examination folder 15b management folder 15c default data 16, 26, 36, 46, 56 control unit 16a, 26a, 36a, 56a display control unit 16b, 26b image processing unit 16c report creation unit 16d image file creation unit 46e association Processing unit 100 Main image display area 101, 102 Display area 110, 247 Display operation icon group 111 Playback icon 112 Frame playback icon 113 Cue icon 114 Reverse playback icon 115 Reverse frame playback icon 116 Reverse frame search icon 120 Capture icon 121 Association icon 122, 123 Landmark icon 130 Synchronization icon 131 Data setting area 132, 133 Time slider 134 Save icon 135 Numerical value increase / decrease icon 140 Sub-image Display area 141 Scroll bar 150 Close icon 201, 244, 250 Drive setting section 202 File display area 203 Logo display area 204 Logo position setting section 205 Clear icon 206, 211, 225, 252, 263 OK icon 207, 212, 226, 253 , 264 Cancel icon 210 Check box 220 Doctor name text box 221 Facility name text box 222 Address text box 223 Telephone number text box 224 Email address text box 230 Doctor name setting unit 231 Facility name setting unit 232 Address setting unit 233 Phone number setting unit 234 Mail address setting section 235 Diagnostic information text box 236 Save icon 237, 245 Export icon 2 40 Still image file display area 241 Moving image file display area 242 Output file display area 243 Additional icon 246 Image display area 251 Capacity display area 261 User authority display area 262 Check box group A1 Patient information A2, A3 images A4, A5 Antenna layout B1 to B4, C1 -C4 image group E lesion K cursor L lines M1, M2 landmark PG1 first image group PG2 second image group P n, Q m, P 0 ~P 8, Q 0 ~Q 8 image R Format TS, TS1, TS2 Time scale SP1-SP6 Thumbnail image W1-W8 Window
Claims (12)
前記第1の画像群に含まれる第1の画像と前記第2の画像群に含まれる画像であって前記第1の画像に共通する被写体が撮像された第2の画像とを前記表示手段の各表示領域に同期表示する同期表示モードを設定する設定手段と、
前記設定手段によって前記同期表示モードが設定された場合、前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行う制御手段と、
を備えたことを特徴とする画像表示装置。 Display means for displaying each image included in each of the first and second image groups of the plurality of image groups in the subject imaged by the imaging element group mounted on the multi-lens capsule endoscope;
A first image included in the first image group and a second image that is an image included in the second image group and captured by a subject common to the first image are displayed on the display unit. Setting means for setting a synchronous display mode for synchronous display in each display area;
Control means for performing control to synchronously display the first image and the second image in each display area of the display means when the synchronous display mode is set by the setting means;
An image display device comprising:
前記制御手段は、前記時間差を有する前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行うことを特徴とする請求項1に記載の画像表示装置。 The setting means sets a time difference between the imaging time of the first image and the imaging time of the second image;
The image display apparatus according to claim 1, wherein the control unit performs control to synchronously display the first image and the second image having the time difference in each display area of the display unit. .
前記制御手段は、前記デフォルトデータをもとに前記時間差を前記被検体内の部位毎に切り替えるとともに、前記被検体内の部位毎に設定された前記時間差を有する前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行うことを特徴とする請求項1に記載の画像表示装置。 Storage means for storing default data in which a time difference between the imaging time of the first image and the imaging time of the second image is set for each part in the subject;
The control means switches the time difference for each part in the subject based on the default data, and the first image and the second image having the time difference set for each part in the subject. The image display apparatus according to claim 1, wherein the image display device is controlled to display the image in a synchronized manner in each display area of the display unit.
前記制御手段は、前記フレーム番号の差を有する前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行うことを特徴とする請求項1に記載の画像表示装置。 The setting means sets a difference in frame number between the first image and the second image;
2. The control unit according to claim 1, wherein the control unit performs control to display the first image having the frame number difference and the second image in synchronization with each display area of the display unit. Image display device.
前記制御手段は、前記デフォルトデータをもとに前記フレーム番号の差を前記被検体内の部位毎に切り替えるとともに、前記被検体内の部位毎に設定された前記フレーム番号の差を有する前記第1の画像と前記第2の画像とを前記表示手段の各表示領域に同期表示する制御を行うことを特徴とする請求項1に記載の画像表示装置。 Storage means for storing default data in which a difference in frame number between the first image and the second image is set for each part in the subject;
The control means switches the frame number difference for each part in the subject based on the default data, and has the first frame number difference set for each part in the subject. The image display apparatus according to claim 1, wherein control for synchronously displaying the second image and the second image in each display area of the display unit is performed.
前記設定手段は、前記第1の縮小画像と前記2の縮小画像との関連付けを設定することを特徴とする請求項1〜7のいずれか一つに記載の画像表示装置。 The display means further displays a first reduced image corresponding to the first image and a second reduced image corresponding to the second image;
The image display device according to claim 1, wherein the setting unit sets an association between the first reduced image and the second reduced image.
前記第1のタイムスライダおよび前記第2のタイムスライダは、前記第1の画像と前記第2の画像との前記時間差または前記フレーム番号の差を設定する前記設定手段の一つであることを特徴とする請求項2〜9のいずれか一つに記載の画像表示装置。 The display means includes a first time slider indicating a temporal position of an image included in the first image group and a second time slider indicating a temporal position of an image included in the second image group. And
The first time slider and the second time slider are one of the setting means for setting the time difference or the frame number difference between the first image and the second image. The image display device according to any one of claims 2 to 9.
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006112367A JP4891646B2 (en) | 2006-04-14 | 2006-04-14 | Image display device |
CN200780013447.0A CN101420900B (en) | 2006-04-14 | 2007-04-12 | Image display apparatus |
EP07741502A EP2008574B1 (en) | 2006-04-14 | 2007-04-12 | Image display apparatus |
AU2007239598A AU2007239598B2 (en) | 2006-04-14 | 2007-04-12 | Image display apparatus |
PCT/JP2007/058066 WO2007119784A1 (en) | 2006-04-14 | 2007-04-12 | Image display apparatus |
KR1020087024980A KR101047253B1 (en) | 2006-04-14 | 2007-04-12 | Image display |
US12/249,552 US8194096B2 (en) | 2006-04-14 | 2008-10-10 | Image display apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006112367A JP4891646B2 (en) | 2006-04-14 | 2006-04-14 | Image display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007282794A true JP2007282794A (en) | 2007-11-01 |
JP4891646B2 JP4891646B2 (en) | 2012-03-07 |
Family
ID=38755102
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006112367A Expired - Fee Related JP4891646B2 (en) | 2006-04-14 | 2006-04-14 | Image display device |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP4891646B2 (en) |
CN (1) | CN101420900B (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010109726A1 (en) * | 2009-03-23 | 2010-09-30 | オリンパスメディカルシステムズ株式会社 | Image processing system, external apparatus and image processing method therefor |
WO2013015104A1 (en) | 2011-07-22 | 2013-01-31 | オリンパスメディカルシステムズ株式会社 | Capsule-type endoscope system, image display method, and image display program |
JP2014147543A (en) * | 2013-02-01 | 2014-08-21 | Konica Minolta Inc | Ultrasonic image diagnostic apparatus |
WO2017038321A1 (en) * | 2015-09-03 | 2017-03-09 | オリンパス株式会社 | Endoscope device and method for controlling display change in endoscope device |
JP2017170009A (en) * | 2016-03-25 | 2017-09-28 | フクダ電子株式会社 | Biological information measurement device and control method thereof |
JP2019030502A (en) * | 2017-08-08 | 2019-02-28 | オリンパス株式会社 | Endoscopic image observation support system |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103513413B (en) * | 2012-06-18 | 2017-05-24 | 奥林巴斯株式会社 | Endoscope device and endoscope image recording destination folder change method |
WO2017017996A1 (en) | 2015-07-28 | 2017-02-02 | オリンパス株式会社 | Image processing device, image processing method, and image processing program |
CN105852778A (en) * | 2016-04-05 | 2016-08-17 | 苏州佳像视讯科技有限公司 | Multi-shell capsule endoscopy |
JP7039179B2 (en) * | 2017-04-13 | 2022-03-22 | キヤノン株式会社 | Information processing equipment, information processing system, information processing method and program |
WO2018211755A1 (en) * | 2017-05-19 | 2018-11-22 | オリンパス株式会社 | Imaging device |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004312188A (en) * | 2003-04-03 | 2004-11-04 | Sharp Corp | Planar display apparatus |
JP2006061469A (en) * | 2004-08-27 | 2006-03-09 | Olympus Corp | Image displaying device and image displaying program |
JP2006068534A (en) * | 2005-09-13 | 2006-03-16 | Olympus Corp | Capsule-type endoscope and extracorporeal device |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004000335A (en) * | 2002-05-31 | 2004-01-08 | Olympus Corp | Electronic endoscope apparatus |
JP4025621B2 (en) * | 2002-10-29 | 2007-12-26 | オリンパス株式会社 | Image processing apparatus and endoscopic image processing apparatus |
-
2006
- 2006-04-14 JP JP2006112367A patent/JP4891646B2/en not_active Expired - Fee Related
-
2007
- 2007-04-12 CN CN200780013447.0A patent/CN101420900B/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004312188A (en) * | 2003-04-03 | 2004-11-04 | Sharp Corp | Planar display apparatus |
JP2006061469A (en) * | 2004-08-27 | 2006-03-09 | Olympus Corp | Image displaying device and image displaying program |
JP2006068534A (en) * | 2005-09-13 | 2006-03-16 | Olympus Corp | Capsule-type endoscope and extracorporeal device |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010109726A1 (en) * | 2009-03-23 | 2010-09-30 | オリンパスメディカルシステムズ株式会社 | Image processing system, external apparatus and image processing method therefor |
US8328712B2 (en) | 2009-03-23 | 2012-12-11 | Olympus Medical Systems Corp. | Image processing system, external device and image processing method |
WO2013015104A1 (en) | 2011-07-22 | 2013-01-31 | オリンパスメディカルシステムズ株式会社 | Capsule-type endoscope system, image display method, and image display program |
JP2014000421A (en) * | 2011-07-22 | 2014-01-09 | Olympus Medical Systems Corp | Capsule type endoscope system, operation method for image display device and image display program |
US9661995B2 (en) | 2011-07-22 | 2017-05-30 | Olympus Corporation | Capsule endoscope system, operating method of image display, and computer-readable recording medium |
JP2014147543A (en) * | 2013-02-01 | 2014-08-21 | Konica Minolta Inc | Ultrasonic image diagnostic apparatus |
US10342512B2 (en) | 2013-02-01 | 2019-07-09 | Konica Minolta, Inc. | Ultrasound diagnostic imaging apparatus |
WO2017038321A1 (en) * | 2015-09-03 | 2017-03-09 | オリンパス株式会社 | Endoscope device and method for controlling display change in endoscope device |
US10419704B2 (en) | 2015-09-03 | 2019-09-17 | Olympus Corporation | Endoscope device and method for controlling display change in endoscope device |
JP2017170009A (en) * | 2016-03-25 | 2017-09-28 | フクダ電子株式会社 | Biological information measurement device and control method thereof |
JP2019030502A (en) * | 2017-08-08 | 2019-02-28 | オリンパス株式会社 | Endoscopic image observation support system |
Also Published As
Publication number | Publication date |
---|---|
CN101420900B (en) | 2013-03-27 |
CN101420900A (en) | 2009-04-29 |
JP4891646B2 (en) | 2012-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4891646B2 (en) | Image display device | |
US8194096B2 (en) | Image display apparatus | |
JP5005981B2 (en) | Image display device | |
US9042664B2 (en) | Image display apparatus | |
US8900124B2 (en) | Image display device | |
EP1922984B1 (en) | Image display apparatus | |
EP1920709A1 (en) | Image display method and image display apparatus | |
JP2006288612A (en) | Picture display device | |
EP1952751B1 (en) | Device for displaying in vivo image, receiving device, and image display system and method using them | |
JP2009039449A (en) | Image processor | |
JP2008295490A (en) | Capsule endoscope image display device | |
JP4885432B2 (en) | Image display device, image display method, and image display program | |
US20080232702A1 (en) | Image display apparatus | |
JP4716794B2 (en) | Image display device | |
JP4868965B2 (en) | Image display device | |
JP4789961B2 (en) | Image display device | |
JP4598458B2 (en) | Image display device, image display method, and image display program | |
JP4663698B2 (en) | Image display device, image display method, and image display program | |
JP4590444B2 (en) | Image display device, image display method, and image display program | |
JP4575216B2 (en) | Medical image display device | |
JP2006345929A (en) | Image display device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111018 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111124 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111213 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111216 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4891646 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141222 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |