WO2014129436A1 - 被検体挿入システム - Google Patents
被検体挿入システム Download PDFInfo
- Publication number
- WO2014129436A1 WO2014129436A1 PCT/JP2014/053705 JP2014053705W WO2014129436A1 WO 2014129436 A1 WO2014129436 A1 WO 2014129436A1 JP 2014053705 W JP2014053705 W JP 2014053705W WO 2014129436 A1 WO2014129436 A1 WO 2014129436A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- unit
- subject
- bending
- work
- Prior art date
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/005—Flexible endoscopes
- A61B1/009—Flexible endoscopes with bending or curvature detection of the insertion part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000096—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope using artificial intelligence
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00011—Operational features of endoscopes characterised by signal transmission
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/0002—Operational features of endoscopes provided with data storages
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/005—Flexible endoscopes
- A61B1/0051—Flexible endoscopes with controlled bending of insertion part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/005—Flexible endoscopes
- A61B1/0051—Flexible endoscopes with controlled bending of insertion part
- A61B1/0052—Constructional details of control elements, e.g. handles
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0669—Endoscope light sources at proximal end of an endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/07—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements using light-conductive means, e.g. optical fibres
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/042—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by a proximal camera, e.g. a CCD camera
Definitions
- the present invention relates to a subject insertion system for inserting into a subject and performing various treatments such as observation, repair, treatment, and collection.
- the endoscope is designed so that an operation such as insertion can be performed easily and safely, that is, the shape of the insertion portion of the endoscope inserted into the subject can be grasped.
- Various techniques have been proposed in which sensors for shape detection, position detection, force detection, and the like are incorporated in the insertion portion.
- Patent Document 1 discloses an endoscope insertion portion shape grasping system for grasping the shape of a flexible endoscope insertion portion. Specifically, Patent Document 1 detects a position detection unit that detects positions of both ends of the bending portion in the insertion portion and a position of at least one point in the bending portion, and detects a bending state at a plurality of positions of the bending portion. And a bending portion shape reproducing means for reproducing the shape of the bending portion from the positions of both ends, the positions of the points in the bending portion, and the bending states at the plurality of positions. .
- endoscope operators such as doctors have other items to consider and consider besides items related to the insertion part of the endoscope.
- This matter includes, for example, the condition of the patient, the estimated position of the affected part, and the diagnosis / treatment method, and the like. It is difficult for an operator unfamiliar with the endoscope system itself to understand information related to the insertion portion of the endoscope. Therefore, even if the sensor information related to the insertion portion of the endoscope is provided, if the sensor information is not easily understood by the operator, the degree of importance is not easily grasped, and is not easy to use, the operator is based on the sensor information. It is not possible to make an immediate decision and take appropriate action.
- the present invention has been made in view of the above circumstances, and an object thereof is to provide a subject insertion system that can provide not only sensor information as information related to an insertion unit but also useful information that supports an operation of an operator. To do.
- a subject insertion system includes an insertion portion that is inserted into a body cavity (lumen) of a subject and performs a predetermined operation, and an insertion state of the insertion portion in the body cavity (lumen) And at least one of the first information generation unit that generates first information that is information indicating at least one of the operation states, the third information related to the subject, or the fourth information related to the work. Based on at least one of the storage unit that stores one piece of information, the first information, the third information, and the fourth information, the insertion unit is inserted to perform the predetermined operation.
- a second information calculation unit that calculates second information that is operation support information to perform; and an output unit that outputs the second information.
- a subject insertion system that can provide not only sensor information as information related to the insertion unit but also useful information that supports the operation of the operator.
- FIG. 1 is a diagram showing a configuration example of a subject insertion system according to the first embodiment of the present invention.
- FIG. 2 is a schematic configuration diagram showing a bending operation amount detection calculation mechanism.
- FIG. 3 is a schematic configuration diagram illustrating a curved shape detection calculation mechanism.
- FIG. 4 is a diagram illustrating a configuration example of the fiber sensor.
- FIG. 5 is a diagram illustrating a configuration example of the fiber sensor.
- FIG. 6 is a diagram illustrating a configuration example of the fiber sensor.
- FIG. 7 is a diagram illustrating an example in which an insertion unit sensor is arranged at the entrance (oral cavity) of a body cavity (lumen) of a subject (patient).
- FIG. 8 is a diagram illustrating the concept of detecting the shape of the bending portion.
- FIG. 1 is a diagram showing a configuration example of a subject insertion system according to the first embodiment of the present invention.
- FIG. 2 is a schematic configuration diagram showing a bending operation amount detection calculation
- FIG. 9 is a block diagram showing a flow of information related to the support information presentation processing of the subject insertion system according to the first embodiment of the present invention.
- FIG. 10 is a diagram illustrating an endoscope inserted into a body cavity and a part related to work.
- FIG. 11 is a diagram illustrating a flow of generating the second information.
- FIG. 12 is a diagram showing an endoscope inserted into a body cavity and a state of arrival at a workable range.
- FIG. 13 is a diagram illustrating a flow of generating the second information.
- FIG. 14 is a diagram illustrating an endoscope inserted into a body cavity and a state of reaching a workable range.
- FIG. 15 is a diagram illustrating a flow of generating the second information.
- FIG. 10 is a diagram illustrating an endoscope inserted into a body cavity and a part related to work.
- FIG. 11 is a diagram illustrating a flow of generating the second information.
- FIG. 12
- FIG. 16 is a diagram illustrating a specific operation example of the endoscope.
- FIG. 17 is a diagram illustrating a flow of generating the second information.
- FIG. 18 is a diagram illustrating a flow of generating the second information.
- FIG. 19 is a diagram illustrating a flow of generating the second information.
- FIG. 20 is a diagram illustrating a flow of generating the second information.
- FIG. 21 is a diagram illustrating a flow of generating the second information.
- FIG. 22 is a diagram illustrating a flowchart of a series of processes related to the output of the second information by the control device (second information calculation unit) of the subject insertion system according to the first embodiment of the present invention.
- FIG. 22 is a diagram illustrating a flowchart of a series of processes related to the output of the second information by the control device (second information calculation unit) of the subject insertion system according to the first embodiment of the present invention.
- FIG. 22 is a diagram illustrating a flowchart of
- FIG. 23 is a diagram showing a configuration example of the subject insertion system according to the second embodiment of the present invention.
- FIG. 24 is a diagram showing a configuration example of the subject insertion system according to the third embodiment of the present invention.
- FIG. 25 is a diagram illustrating a concept of switching control according to the second information by the control unit.
- FIG. 26 is a diagram illustrating an example of setting information in which the second information, a combination of input information necessary for generating the second information, and a use scene of the second information are associated with each other.
- FIG. 27 is a diagram illustrating a concept of switching control according to the second information by the control unit.
- FIG. 28 is a diagram illustrating an example of grade classification related to selection / switching of the second information.
- FIG. 29 is a diagram illustrating a concept of switching control according to the second information by the control unit.
- FIG. 30 is a diagram illustrating an example of setting information relating to output switching in which second information, an output unit, and an output method are associated with
- a medical endoscope system to which the subject insertion system 10 is applied will be described as an example.
- the subject insertion system 10 can be applied to a general purpose other than the medical endoscope system as long as the insertion portion 20 is operated, inserted into the subject, and treated inside the subject.
- the subject insertion system 10 can also be applied to rigid endoscopes, catheters, medical manipulators, and the like.
- FIG. 1 shows a configuration example of a subject insertion system 10 according to the present embodiment.
- FIG. 2 is a schematic configuration diagram of the bending operation amount detection calculation mechanism.
- the subject insertion system 10 includes an endoscope 12, an image processing device 14, an output unit 16, a storage unit 17, a light source device 18, a light emission detection device 18a, and a control device 19.
- the image processing device 14, the light source device 18, the light emission detection device 18a, and the control device 19 are connected to each other.
- the image processing device 14, the light source device 18, and the light emission detection device 18 a are detachable from the endoscope 12 via connectors 42.
- the endoscope 12 includes a tubular insertion portion 20.
- the endoscope 12 inserts the insertion portion 20 into the body cavity (lumen) of the subject.
- the endoscope 12 images a desired observation object, for example, an affected part or a lesion part in a body cavity (lumen) of a subject.
- the image processing device 14 performs predetermined image processing on the image data acquired by the imaging of the endoscope 12.
- the image processing device 14 is, for example, a video processor.
- the output unit 16 outputs the second information Q2, which is information for supporting the operation of the endoscope 12, and presents it to the operator.
- the output unit 16 is a display unit such as a monitor, and displays the image data and the like output from the image processing device 14 on the monitor.
- the output unit 16 is not limited to the display unit, and may be any unit that outputs the second information Q2 by voice or the like.
- the storage unit 17 stores various information, for example, at least one of the third information Q3 including information related to the subject and the fourth information Q4 including information related to the work.
- the storage unit 17 stores the second information Q2 calculated by the second information calculation unit 102 in association with at least one of the first information Q1, the third information Q3, and the fifth information Q5.
- the light source device 18 emits illumination light.
- the illumination light emitted from the light source device 18 is transmitted to the endoscope 12.
- the light emission detection device 18a emits, for example, light having a wavelength different from that of the illumination light emitted from the light source device 18, and detects the emitted light.
- the control device 19 comprehensively controls the entire subject insertion system 10.
- the endoscope 12 includes an insertion unit 20 and an operation unit 30.
- the insertion part 20 is formed in a hollow thin and long shape and is inserted into a body cavity (lumen) of a patient.
- the insertion part 20 includes a distal end hard part 21, a bending part 23, and a flexible tube part 25.
- the distal end hard portion 21, the bending portion 23, and the flexible tube portion 25 are disposed from the distal end side of the insertion portion 20 toward the proximal end side.
- the proximal end portion of the distal end hard portion 21 is connected to the distal end portion of the bending portion 23.
- the proximal end portion of the bending portion 23 is connected to the proximal end portion of the flexible tube portion 25.
- the distal end hard portion 21 is formed at the distal end portion of the insertion portion 20, that is, the distal end portion of the endoscope 12.
- the distal end hard portion 21 has hardness.
- a node ring is rotatably connected to the bending portion 23 along the longitudinal axis direction of the insertion portion 20.
- the bending portion 23 bends in response to an operator operation on the bending operation portion 37.
- the operator operates the bending operation unit 37 so that the observation object in the subject is captured in the observation field of view of the endoscope 12 and the illumination light is illuminated on the observation object.
- the bending portion 23 is bent in a desired direction, for example, up, down, left, and right by the operator's operation on the bending operation portion 37.
- the position and direction of the distal end hard portion 21 of the insertion portion 20 change due to the bending.
- the flexible tube portion 25 is formed in a tubular member and extends from the main body portion 31.
- the flexible tube portion 25 has a predetermined flexibility and bends when an external force is applied.
- the operation unit 30 includes a gripping unit 33, a universal cord 41, and a bending operation amount detection calculation mechanism 61.
- the grip portion 33 is connected to the base end portion of the main body portion 31.
- the grip portion 33 is gripped by a hand portion of an operator who operates the endoscope 12.
- One end of the universal cord 41 is connected to the grip portion 33.
- a bending operation portion 37 is disposed in the grip portion 33.
- the bending operation unit 37 drives the operation wires 38LR and 38UD for bending the bending unit 23.
- the bending operation section 37 includes a left / right bending operation knob 37LR for bending the bending section 23 left and right, an up / down bending operation knob 37UD for bending the bending section 23 up and down, and a fixed knob for fixing the position of the curved bending section 23. 37C.
- the left / right bending operation knob 37LR bends the bending portion 23 in the left / right direction via the left / right bending operation driving portion and the operation wire 38LR as shown in FIG.
- the left / right bending operation knob 37LR is connected to a left / right bending operation driving unit that is driven by an operation of the operator with respect to the left / right bending operation knob 37LR.
- the bending operation drive unit in the left-right direction is disposed in the grip portion 33, for example.
- the bending operation drive unit in the left-right direction is connected to an operation wire 38LR inserted through the operation unit 30, the flexible tube unit 25, and the bending unit 23.
- the operation wire 38LR is connected to the distal end portion of the bending portion 23.
- the up / down bending operation knob 37UD bends the bending portion 23 in the up / down direction via the up / down bending operation driving unit and the operation wire 38UD as shown in FIG.
- Connected to the up / down bending operation knob 37UD is an up / down bending operation drive unit driven by an operator's operation on the up / down bending operation knob 37UD.
- the bending operation driving unit in the vertical direction is disposed, for example, in the holding unit 33.
- the bending operation driving unit in the vertical direction is connected to an operation wire 38UD inserted through the operation unit 30, the flexible tube unit 25, and the bending unit 23.
- the operation wire 38UD and the operation wire 38LR are wires that move independently of each other.
- the operation wire 38UD and the operation wire 38LR are connected to the distal end portion of the bending portion 23, respectively.
- the bending operation mechanism 39 bends the bending portion 23.
- the operation amount (bending operation amount) for bending the bending portion 23 by the bending operation mechanism 39 is an amount for operating the operation wires 38LR and 38UD and the bending operation portion 37.
- the bending operation mechanism 39 includes a bending operation section (left / right bending operation knob 37LR, up / down bending operation knob 37UD) 37, a left / right bending operation driving section, an operation wire 38LR, an up / down bending operation driving section, and an operation wire. 38UD.
- the universal cord 41 extends from the side surface of the grip portion 33.
- a connector 42 that can be attached to and detached from the image processing device 14, the light source device 18, and the light emission detection device 18 a is provided at the other end of the universal cord 41.
- the bending operation amount detection calculation mechanism 61 includes two bending operation amount detection units (operation amount sensors) 63a and 63b that detect the bending operation amount of the bending operation mechanism 39, and each bending operation amount detection unit 63a. , 63b, a bending operation amount calculation unit 65 (FIG. 1) that calculates bending operation amount information indicating an operation amount, and two read portions 67a that face the bending operation amount detection units 63a and 63b, respectively. 67b.
- the bending operation amount calculation unit 65 is disposed in the control device 19, for example.
- the two bending operation amount detectors 63a and 63b detect the bending operation amounts by the bending operation mechanism 39 shown in FIG.
- Each of the bending operation amount detection units 63 a and 63 b is, for example, a linear encoder, and is disposed inside the operation unit 30.
- One read portion 67a is disposed, for example, at the base end of the operation wire 38LR.
- the other read portion 67b is disposed at the proximal end portion of the operation wire 38UD.
- the read portion 67a moves with the movement of the operation wire 38LR.
- the read section 67b moves with the movement of the operation wire 38UD.
- Each of the read portions 67a and 67b is, for example, a linear scale.
- One bending operation amount detection unit 63a is provided so as to face one read unit 67a.
- the bending operation amount detector 63a reads the read portion 67a that moves together with the operation wire 38LR, detects the movement position of the read portion 67a, and detects the movement of the operation wire 38LR from the movement position of the read portion 67a.
- the other bending operation amount detector 63b is provided so as to face the other read portion 67b.
- the bending operation amount detector 63b reads the read portion 67b that moves together with the operation wire 38UD, detects the movement position of the read portion 67b, and detects the movement of the operation wire 38UD from the movement position of the read portion 67b.
- the bending operation amount calculation unit 65 is based on the movement positions of the read units 67a and 67b detected by the bending operation amount detection units 63a and 63b, that is, the movement amounts of the read units 67 and 67b, that is, operation wires. The amount of movement of each of the 38LR and the operation wire 38UD is detected.
- the bending operation amount calculation unit 65 is configured to bend the bending operation amount of the bending portion 23 by the bending operation mechanism 39 based on the movement amounts of the operation wire 38LR and the operation wire 38UD, that is, the bending operation amounts of the operation wire 38LR and the operation wire 38UD. Compute information.
- One read portion 67a may be disposed on the left / right bending operation knob 37LR, and the other read portion 67b may be disposed on the up / down bending operation knob 37UD.
- one read portion 67a is disposed on the outer peripheral surface of the cylindrical left / right bending operation knob 37LR, for example, and the other read portion 67b is disposed on the outer peripheral surface of the cylindrical up / down bending operation knob 37UD, for example.
- One read portion 67a may be disposed on the surface of the left / right bending operation knob 37LR, and the other read portion 67b may be disposed on the surface of the up / down bending operation knob 37UD.
- the bending operation amount detection unit 63a reads the read portion 67a that rotates together with the left and right bending operation knob 37LR, and detects the rotation position of the read portion 67a.
- the bending operation amount detection unit 63b reads the read portion 67b that rotates together with the vertical bending operation knob 37UD, and detects the rotation position of the read portion 67b.
- the bending operation amount calculation unit 65 is based on the rotational positions of the read units 67a and 67b, which are detection results of the bending operation amount detection units 63a and 63b.
- the rotation amount of the operation knob 37LR and the rotation amount of the up / down bending operation knob 37UD are calculated and obtained.
- the bending operation amount calculation unit 65 calculates and obtains information about each bending operation amount of the left and right bending operation knob 37LR and the upper and lower bending operation knob 37UD based on the rotation amounts of the left and right bending operation knob 37LR and the upper and lower bending operation knob 37UD.
- the bending operation amount calculation unit 65 calculates the bending operation amount information of the bending operation mechanism 39 by calculating the bending operation amount information of the left and right bending operation knobs 37LR and the upper and lower bending operation knobs 37UD, and acquires the bending operation amount information. To do.
- the bending operation amount detection calculation mechanism 61 calculates the bending operation amount of the bending operation mechanism 39 based on the rotation amounts of the left and right bending operation knobs 37LR and the upper and lower bending operation knobs 37UD in the bending operation mechanism 39, and calculates the bending operation. Ask for quantity information.
- the bending portion 23 is not necessarily bendable up and down and left and right, and may be bent only up and down or only left and right, for example.
- the bending operation amount detection / calculation mechanism 61 detects the bending operation amount in the vertical direction or the bending operation amount in the left / right direction of the bending operation mechanism 39, and calculates the respective bending operation amount information.
- FIG. 3 shows a schematic configuration diagram of the curved shape detection calculation mechanism 71.
- the curved shape detection calculation mechanism 71 includes a light emission detection device 18 a, a control device 19, an optical fiber 83 a, a detection region (light detection unit) 87, and a reflection unit 95.
- the bending shape detection calculation mechanism 71 detects the bending shape (bending amount) of the bending portion 23 that is actually bent, and calculates and obtains bending shape information indicating the bending shape.
- the light emission detection device 18a includes a light source 79, a light projecting lens 91, an isolator 93, a reflection mirror 97, a condensing lens 81a, a condensing lens 81b, and a curved shape detection unit 73.
- the light source 79 is, for example, an LED and emits light.
- a light projecting lens 91, an isolator 93, a reflection mirror 97, and a condenser lens 81a are arranged.
- On the reflection optical path of the reflection mirror 97, a condenser lens 81b and a curved shape detection unit 73 are arranged.
- the light projecting lens 91 projects the light emitted from the light source 79.
- the isolator 93 transmits light from one direction and blocks light from the other direction.
- the isolator 93 transmits light emitted from the light source 79 and blocks light from the reverse direction. Thereby, the light transmitted through the isolator 93 is collected by the condenser lens 81a and enters the optical fiber 83a.
- the condenser lens 81a is disposed between the light source 79 and the optical fiber 83a.
- the condensing lens 81a condenses the light on the optical fiber 83a so that the light emitted from the light source 79 enters the optical fiber 83a.
- the condensing lens 81b is reflected by the distal end hard portion 21 provided at the distal end of the optical fiber 83a, returns to the optical fiber 83a, passes through the condensing lens 81a, and is reflected by the reflecting mirror 97 to the curved shape detection unit 73. Condensate.
- the reflection unit 95 reflects the light emitted from the optical fiber 83a and re-enters the optical fiber 83a.
- the reflection mirror 97 transmits light from one direction and reflects light from the other direction. That is, the reflecting mirror 97 is emitted from the light source 79, transmits light that has passed through the light projecting lens 91 and the isolator 93 to the condenser lens 81a side, and is emitted from the optical fiber 83a and returned through the condenser lens 81a. Reflects light.
- the curved shape detection unit 73 includes a light receiving unit such as a light receiving element.
- the curved shape detection unit 73 receives incident light and outputs a light reception signal corresponding to the received light amount.
- the curved shape detection unit 73 outputs a light receiving signal corresponding to the curved shape of the bending portion 23, for example, the direction of bending and the magnitude (bending amount) of the bending based on the light reception signal.
- the control device 19 controls each part of the subject insertion system 10 in an integrated manner, and includes a curved shape calculation part 75 as shown in FIG.
- the bending shape calculation unit 75 calculates and calculates the bending amount, the bending direction, and the bending shape of the bending portion 23 that is actually bent based on the light reception signal output from the bending shape detection unit 73.
- the bending amount, the bending direction, and the bending shape of the bending portion 23 are obtained based on a change in optical characteristics of light guided into the optical fiber 83a by the detection region 87 provided in the optical fiber 83a, for example, a change in light amount. .
- the optical fiber 83a guides the light emitted from the light source 79 and collected by the condenser lens 81 to the distal end hard portion 21 of the insertion portion 20 via the operation portion 30 as shown in FIG.
- the optical fiber 83a is formed of a linear member.
- the optical fiber 83a is provided with at least one detection region 87.
- the detection area 87 forms a fiber sensor 88 as a shape sensor for detecting a curved shape as shown in FIG.
- the fiber sensor 88 is also referred to as a bending sensor.
- the fiber sensor 88 is a sensor for detecting a change in light amount.
- the detection region 87 emits light guided into the optical fiber 83a toward the outside of the optical fiber 83a according to the bending state of the optical fiber 83a.
- the amount of light emitted toward the outside of the optical fiber 83a corresponds to the amount of bending of the optical fiber 83a.
- the detection region 87 is processed so as to leak a light amount corresponding to the bending amount of the optical fiber 83a to the outside of the optical fiber 83a.
- the detection region 87 changes the optical characteristic of the light guided by the optical fiber 83a, for example, the amount of light according to the bending state of the insertion part 20 (optical characteristic changing part).
- the detection region 87 is disposed at least at a location where the bending of the insertion portion 20 is to be detected or in the vicinity of the location, for example, the bending portion 23.
- FIG. 4 to 6 show an example of the configuration of the fiber sensor 88.
- the fiber sensor 88 detects the bending shape (bending amount) of the insertion portion 20 including the bending portion 23.
- the fiber sensor 88 includes an optical fiber 83 a along the bending portion 23 of the insertion portion 20, and a detection region 87 at a specific location in the bending portion 23.
- the fiber sensor 88 is for obtaining the amount of bending from the curvature of the optical fiber 83a.
- FIG. 5 shows a second state in which the optical fiber 83a is curved with the side on which the detection region 87 is provided as the inside of the curve.
- FIG. 6 shows a third state in which the optical fiber 83a is bent with the side where the detection region 87 is provided as the outside of the curve. Comparing the first to third states, the second state shown in FIG. 5 has the largest light transmission amount through the optical fiber 83a, and the third state shown in FIG. 6 has the smallest light transmission amount through the optical fiber 83a.
- the bending shape calculation unit 75 bends the bending portion 23 that is actually bent based on a light reception signal output from the bending shape detection unit 73, that is, a change in the amount of light incident on the detection region 87.
- the amount, the bending direction and the bending shape, and the curvature of the optical fiber 83a are calculated.
- the fiber sensor 88 is a sensor for detecting a change in the amount of light, and receives light corresponding to the amount of light that changes according to the bending of the bending portion 23 (bending of the optical fiber 83a), that is, the amount of light that passes through the optical fiber 83a. Since a signal is output, a sensor for detecting the curved shape (bending amount) of the optical fiber 83a can be configured at low cost, which is suitable for mass production products.
- the fiber sensor 88 is not limited to the light amount change detection method, and may use a method in which a grating is formed on an optical fiber called an FBG method.
- the fiber sensor 88 of this method has a complicated and expensive detection unit, but can provide a plurality of detection points on one optical fiber or detect bending with high accuracy.
- one or more fiber sensors 88 may be used. If it is the said sensor, the curved shape of the desired range in the insertion part 20 of the endoscope 12, especially the curved part 23 is detectable. Furthermore, if it is the said sensor, it can make it easy to incorporate in the bending part 23 with a small diameter, and can make it difficult to receive the influence from another structural member.
- FIG. 7 shows an example in which the insertion portion sensor 113 is arranged at the entrance (oral cavity 111) of the lumen of the subject (patient).
- the insertion portion sensor 113 is disposed in the mouth portion 111 by the operation of the operator OP, and the insertion portion 20 of the endoscope 12 is placed in the body cavity (lumen) of the subject (patient) (gastrointestinal portion). ) Is inserted.
- the insertion part sensor 113 detects the amount of insertion and rotation of the insertion part 20 with respect to the body cavity (lumen).
- the bending operation amount detection units 63a and 63b that are operation amount sensors
- the fiber sensor 88 that is a shape sensor
- the insertion unit sensor 113 are provided as sensors.
- the bending shape calculation unit 75 has a bending shape (bending amount) of the insertion unit 20 detected by the fiber sensor 88, and an insertion amount and rotation of the insertion unit 20 into the body cavity (lumen) detected by the insertion unit sensor 113. Based on the amount, the insertion length and rotation amount of the insertion portion 20 starting from the entrance of the body cavity (lumen) and the curved shape of the insertion portion 20 are obtained. As a result, the curved shape calculation unit 75 obtains the shape / arrangement / tip position / orientation of the insertion unit 20 in the body cavity (lumen) based on the insertion length and rotation amount of the insertion unit 20 and the curved shape of the insertion unit 20. .
- the bending shape calculation unit 75 is based on the bending operation amount of the bending operation mechanism 39 detected by the bending operation amount detection units 63 a and 63 b and the bending shape (bending amount) of the insertion unit 20 detected by the fiber sensor 88. Thus, the shape of the bending portion 23 is estimated.
- FIG. 8 shows a concept of detecting the shape of the bending portion 23 in the insertion portion 20.
- the difference between the bending operation amount of the bending operation mechanism 39 detected by the bending operation amount detection unit 63 and the bending shape (bending amount) of the insertion unit 20 detected by the fiber sensor 88 is applied to the bending portion 23.
- the value depends on the force F.
- the control device 19 of the subject insertion system 10 includes a first information generation unit 101, a second information calculation unit 102, and a storage unit 17, as shown in FIG.
- the second information calculation unit 102 includes the bending operation amount of the bending operation mechanism 39 (dotted line 88a indicating the fiber sensor 88) detected by the bending operation amount detection unit 63, and the bending shape of the bending unit 23 detected by the fiber sensor 88.
- the force F is calculated based on the difference from (bending amount: solid line 88b of the fiber sensor 88).
- the second information calculation unit 102 calculates the difference between the actual bending amount of the bending unit 23 that is the detection result of the fiber sensor 88 and the bending operation amount detected by the bending operation amount detection unit 63 as an operation amount sensor. Based on the difference, a force F applied to the inner wall 500 of the body cavity (lumen) by the insertion unit 20 is calculated.
- the detection method of force F is an example.
- the bending operation amount detection unit 63, the fiber sensor 88, and the insertion unit sensor 113 are not limited, and the combination of these sensors is not limited.
- the detection method is not limited to the method using the bending operation amount detection unit 63, the fiber sensor 88, and the insertion unit sensor 113 described above.
- the bending operation amount of the bending operation mechanism 39 detected by each bending operation amount detection unit 63a, 63b, the bending shape (bending amount) of the insertion unit 20 detected by the fiber sensor 88, and the insertion unit sensor 113 are detected.
- the insertion amount and the rotation amount of the insertion unit 20 are collectively referred to as a sensor value SV.
- Information acquired by processing (processing) the sensor value SV is referred to as first information Q1.
- the first information Q1 includes information indicating the shape of the insertion unit 20 or information indicating the relative position between the insertion unit 20 and the subject.
- the information indicating the relative position between the insertion unit 20 and the subject includes information indicating at least one of the insertion amount and the rotation amount of the insertion unit 20 with respect to the subject, or the contact state between the insertion unit 20 and the subject. Contains information to indicate.
- the first information Q1 include the following. That is, (Example 1) “First curved shape” indicating the shape of the insertion portion 20, “insertion portion insertion amount indicating the insertion amount of the insertion portion 20 into the body cavity (lumen) (gastrointestinal portion) of the subject (patient) ” (Example 2) “Rotation amount of insertion portion” indicating the amount of rotation (torsion) of the insertion portion 20 (Example 3) “Bending operation amount” indicating the operation amount related to the bending of the bending portion 23 of the insertion portion 20 (Example 4) “Second curved shape” indicating the curved shape of the insertion portion 20 with respect to a tubular body cavity (Example 5) “Insertion portion application force” indicating the force F applied to the distal end of the insertion portion 20 Etc.
- the “insertion portion insertion amount”, “insertion portion rotation amount”, and “bending operation amount” are determined by the insertion amount and rotation amount of the insertion portion 20 detected by the insertion portion sensor 113 and the bending operation amount detection units 63a and 63b. This is information obtained directly from the detected bending operation amount of the bending operation mechanism 39.
- first bending shape”, “second bending shape”, and “insertion portion application force” are processed into “insertion portion insertion amount”, “insertion portion rotation amount”, and “bending operation amount”.
- Information The “first curved shape” is calculated as a curved shape in a predetermined range in the insertion unit 20 based on the curved shape (bending amount) of the insertion unit 20 detected by the fiber sensor 88.
- the “second curved shape” is calculated based on the “first curved shape”, the “insertion portion insertion amount”, and the “insertion portion rotation amount”.
- the “insertion portion application force” is calculated based on the “first bending shape” and the “bending operation amount”.
- a plurality of sensors for obtaining the first information Q1 may be provided. The sensor for obtaining the first information Q1 does not necessarily have to be incorporated in the insertion portion 20.
- FIG. 9 is a block diagram showing a flow of information related to the support information presentation process of the subject insertion system 10 according to the first embodiment.
- the subject insertion system 10 includes a first information generation unit 101, a second information calculation unit 102, and a storage unit 17.
- the first information generation unit 101 calculates first information Q1, and includes each sensor 101a and a sensor information processing unit 101b.
- Each sensor 101a includes a sensor related to acquisition of the first information Q1.
- each sensor 101 a includes a bending operation amount detection unit 63, a fiber sensor 88, and an insertion unit sensor 13.
- the sensor information processing unit 101b processes (processes) the sensor value SV acquired by the sensor 101a to calculate the first information Q1.
- the first information generation unit 101 generates the first information Q1 indicating at least one of the insertion state and the operation state of the insertion unit 20 into the body cavity (lumen).
- the first information generation unit 101 includes a fiber sensor 88 provided in the optical fiber 83a.
- the fiber sensor 88 detects the bending amount of one or more parts in the insertion portion 20.
- the sensor 101a included in the first information generation unit 101 and the sensor information processing unit 101b that processes information collected by the sensor 101a may be integrated or provided separately.
- the second information calculation unit 102 uses at least one of the first information Q1 calculated by the first information generation unit 101 and the third information Q3 or the fourth information Q4 stored in the storage unit 17. Based on this, the second information Q2 is calculated.
- the second information Q2 is operation support information of the subject insertion system 10.
- the insertion portion sensor 113 is disposed at the entrance (oral cavity 111) of the lumen of the subject (patient) as shown in FIG.
- the insertion part 20 of the endoscope 12 is inserted into the body cavity (lumen) (gastrointestinal part) of the subject (patient), and the body (lumen) of the subject (patient) by the insertion part 20 ( Sensing is performed on the gastrointestinal tract.
- Each sensor 101a of the first information generation unit 101 includes an insertion unit sensor 113, a fiber sensor 88, and a bending operation amount detection unit 63.
- the insertion part sensor 113 detects the amount of insertion and rotation of the insertion part 20 with respect to the body cavity (lumen).
- the fiber sensor 88 detects the bending shape (bending amount) of the insertion portion 20.
- Each of the bending operation amount detectors 63 a and 63 b detects the bending operation amount of the bending operation mechanism 39.
- the sensor information processing unit 101b of the first information generation unit 101 processes (processes) the sensor value SV acquired by each sensor (insertion unit sensor 113, fiber sensor 88, bending operation amount detection unit 63) 101a.
- Information Q1 is calculated.
- the first information generation unit 101 outputs the first information Q1 to the second information calculation unit 102.
- the first information generation unit 101 processes (processes) the information related to the insertion unit 20, that is, the sensor value SV, and then converts the first information Q1 into the second information Q1.
- the information is sent to the information calculation unit 102.
- the first information Q1 related to the insertion unit 20 can be directly acquired, and an external component such as a device connected from the outside of the subject insertion system 10 becomes unnecessary, and the burden on the control device 19 side is reduced. It's light.
- the size of the insertion unit 20 can be reduced. Since the sensor information processing unit 101b of the first information generation unit 101 is configured in the same processing system as that of the second information calculation unit 102, a large amount of information processing can be realized at a high speed with a single component. The part 101b can be reduced in size.
- Second information Q2 which is information for supporting the operation of the mirror 12, is generated, and the second information Q2 is displayed and output on an output unit 16 such as a monitor.
- the second information Q2 includes, for example, information indicating an instruction related to insertion of the insertion unit 20 into the subject or an operation instruction related to work using the insertion unit 20.
- the second information Q2 includes information indicating an operation instruction related to torsion and / or insertion / removal of the insertion unit 20 required to position the distal end portion of the insertion unit 20 at a specific position in the subject.
- the second information Q2 includes information indicating an operation instruction related to the bending of the insertion unit 20 required to position the distal end portion of the insertion unit 20 at a specific position in the subject.
- the input information necessary for the content of the second information Q2 and the calculation content for generating the second information Q2 are determined in advance.
- the first information Q1 is always used.
- at least one of the third information Q3 and the fourth information Q4 may be used.
- the second information calculation unit 102 reads the insufficient information from the storage unit 17, inputs it in response to the operation of the operator OP, and other external devices. You may input from (for example, a database etc.).
- the second information Q2 generated by the second information calculation unit 102 is not limited to one, and a plurality of second information Q2 may be generated sequentially or simultaneously, and the plurality of second information Q2 may be output simultaneously. .
- the output unit 16 that provides the second information Q2 to the operator OP includes various means such as voice, vibration, or electrical stimulation in addition to a monitor that displays an image.
- various means such as voice, vibration, or electrical stimulation in addition to a monitor that displays an image.
- a voice guide or a warning sound by a speaker may be used in addition to characters, figures, and images.
- the operator OP holds the operation section 30 of the endoscope 12 or the extremities of the operator OP.
- a vibration device, an electrical stimulation device, or the like may be disposed to directly stimulate the operator OP's body. You may use together the device which gives a direct stimulus to operator OP, and the other output part 16.
- the second information Q2 is not limited to being output from the output unit 16, but may be stored in the storage unit 17, or may be stored in an external device such as a database, or output from the output unit 16 and stored therein. It may be stored in the unit 17 or stored in an external device such as a database. Accordingly, the second information Q2 can be read from the storage unit 17 or the external device and displayed on the output unit 16 again. Thereby, confirmation of the 2nd information Q2 by operator OP becomes easy.
- Examples of the second information Q2 include the following. That is, (Example 1) “Information indicating specific operation contents” such as insertion / extraction / twisting of the insertion portion 20 and bending operation of the bending portion 23 (Example 2) “Operation-related situation” indicating the direction of insertion of the insertion unit 20 and whether or not the target insertion location G such as an affected part (lesioned part) has reached a position where an operation such as observation or treatment can be performed.
- Example 3 “Guidelines for operation and work” such as instructions for the next work (observation, treatment, etc.)
- “Achievable work area reach status” that is relative position information of the distal end portion of the insertion portion 20 with respect to a workable range that is a workable range for the distal end portion of the insertion portion 20 It is.
- the third information Q3 and the fourth information Q4 are recorded in the storage unit 17.
- the third information Q3 is information unique to the subject.
- the third information Q3 includes, for example, information indicating the medical history of the subject and information indicating past diagnosis results of the subject.
- the third information Q3 includes, for example, “patient history of diagnosis”, “observation / diagnosis / treatment information”, “position of affected area (lesion)”, “disease name / symptom name”, “size of affected area” Information indicating “degree”, “degree of symptom / degree of progress”, “race of patient”, “type, constitution, health check result”, and the like.
- the information on the position of the affected part (lesioned part) may be an X-ray image or a CT image in which the position can be confirmed.
- the fourth information Q4 includes various prior information that does not correspond to the third information Q3.
- 4th information Q4 contains the information which shows the policy concerning work, the information which shows the procedure concerning work, the information which shows the specification of the equipment concerning work, the information which shows the performance of the equipment concerning work, or the prior information concerning work .
- the fourth information Q4 is, for example, “information on policy / procedure of work such as diagnosis and treatment”, “information indicating the specifications of the endoscope system”, “insertion into the affected part (lesioned part)” “Route”, “Observation / Treatment Target”, “Information to be Acquired”, “Things to be Diagnosed”, “Treatment Details / Procedures”, and “Caution Points for Insertion and Observation / Treatment (Easy to Damage, Information indicating “allowable time for treatment, etc.)” and the like.
- FIG. 10 shows the endoscope 12 inserted into the body cavity (lumen) M and the part related to the work.
- FIG. 11 shows a flow of generating the second information Q2.
- K represents a treatable range.
- the first information Q1 includes information indicating the distal end position 20a of the insertion portion 20 in the body cavity (lumen) M.
- the third information Q3 includes work target position information that is position information of the affected part or lesioned part 501.
- the fourth information Q4 includes information indicating the insertion / observation of the affected part or the lesioned part 501 and the content / procedure of the treatment.
- the second information calculation unit 102 is second information Q2 that is relative position information between the distal end position 20a of the insertion unit 20 and the work target position where the affected part is present based on the first information Q1, the third information Q3, and the fourth information Q4. Or intermediate information that can be processed into the second information Q2.
- the second information calculation unit 102 When the endoscope 12 is inserted, the second information calculation unit 102 generates the second information Q2 based on the first information Q1 and the third information Q3, as shown in FIGS.
- the second information Q2 includes, for example, the distance from the distal end position 20a of the insertion portion 20 to the work target position, the road (length along the path), the direction, the path, and the like.
- the first information generation unit 101 sets a first coordinate system in the body cavity (lumen) M, performs an operation on the sensor value SV, and inserts the first coordinate system in the first coordinate system.
- the coordinates of the tip position 20a of the part 20 are obtained, and the coordinates of the tip position 20a are calculated as the first information Q1.
- the third information Q3 is generated as information including the work target position, which is the position information of the affected part or lesioned part 501, from the information K such as a medical record, for example.
- the work target position of the affected part or lesioned part 501 indicates the coordinates of the place G where the distal end part of the insertion part 20 is inserted.
- the third information Q3 sets a second coordinate system on, for example, a CT image including the affected part or lesioned part 501, and the position information on the affected part or affected part 501 is set as the work target position on the second coordinate system.
- Generate as The third information Q3 is stored in the storage unit 17 in advance.
- the second information calculation unit 102 calculates the second information Q2 based on the coordinates of the distal end position 20a of the insertion unit 20 that is the first information Q1 and the coordinates of the work target position that is the third information Q3. . If the first coordinate system of the first information Q1 and the second coordinate system of the third information Q3 do not coincide with each other, the second information calculation unit 102 either one of the first or second coordinate system or Both coordinate systems are converted to represent the first information Q1 and the third information Q3 on the same coordinate system.
- the second information Q2 includes, for example, information indicating the distance, distance (length along the route), direction, route, and the like from the distal end position 20a of the insertion unit 20 to the work target position (position information of the affected part or lesioned part 501). Including.
- Example 1 Distance The distance is obtained from two coordinates. That is, the length of the vector obtained from the coordinate difference is the distance.
- Road length along the route
- the road is calculated as a length along the route designated in advance when the route is designated in advance and the tip position 20a of the insertion unit 20 and the work target position are on the route.
- Example 3 Direction The direction is obtained from two coordinates. The direction is calculated as the vector direction from the coordinates of the distal end position of the insertion unit 20 to the coordinates of the work target position.
- (Example 4) Path The path is obtained by reading the shape of the body cavity (lumen) M from the CT image as the third information Q3 and connecting the two coordinates so that the inner wall of the body cavity (lumen) M does not contact on the CT image. Is calculated by Since there can be various paths connecting the two coordinates, the calculation for calculating the path is simple and requires the shortest calculation time, and contact with the inner wall (lumen) of the body cavity (lumen) It is calculated by appropriately adding conditions such as a small amount.
- Examples of the operation using the endoscope 12 include treatment such as observation and diagnosis of a subject using an image or the like, biopsy or treatment using a treatment tool, and the like.
- information generated using the first information Q1, the third information Q3, and the fourth information Q4 (a state of reaching a predetermined workable range for each operation) is generated.
- FIG. 12 shows the endoscope 12 inserted into the body cavity and the state of reaching the workable range.
- An observation / diagnosis workable range 503 is set for the affected area or lesioned area 501.
- the second information Q2 indicates the arrival status of the distal end positions A to C of the endoscope 12 with respect to the workable range 503. That is, the tip position A represents a “deviation” state with respect to the workable range 503 set for the affected part or the lesioned part 501.
- the tip position B represents a “proximity” situation.
- the tip position C represents the “arrival” situation.
- the changes from the tip position A to the tip position B and the tip position B to the tip position C represent a situation in which they are approaching.
- the change from the tip position C to the tip position B and the tip position B to the tip position A represents a situation that is deviating.
- the third information Q3 calculated based on the first information Q1 calculated based on the sensor value SV shown in FIG. 11 "the coordinates of the tip positions A, B, and C of the insertion portion 20" and the information K such as the medical record.
- the method and procedure for generating the “work target position” are as described above.
- FIG. 13 shows a flow of generating the second information Q2 using the fourth information Q4.
- the same parts as those in FIG. 11 are denoted by the same reference numerals, and detailed description thereof is omitted.
- the fourth information Q4 is extracted from “work policy / procedure H such as observation and treatment”.
- the fourth information Q4 includes the work content and a workable range 503 by the insertion unit 20 of the endoscope 12.
- the information indicating the workable range 503 is input by manual operation of the operator OP, read from the storage unit 17, or other external devices (for example, Input from database etc.)
- Specific examples of the arrival status include the following examples.
- Example 1 “Distance and road (route length)” until reaching the workable range 503 (Example 2)
- FIG. 14 shows the endoscope 12 inserted into the body cavity M and the reachable state to the workable range 503.
- the relationship between the distal end positions D to F of the endoscope 12 and the observation / diagnosis workable range 503 is as follows.
- the tip position D represents “deviation”.
- the tip position E represents “proximity”.
- the tip position F represents the “arrival” situation.
- Changes from the tip position D to the tip position E and the tip position E to the tip position F represent a “situation approaching”. Changes from the tip position F to the tip position E and from the tip position E to the tip position D represent a “departing situation”.
- the situation is divided into three categories: departure / approach / arrival, but the number of divisions may be set to a preferable number depending on the situation.
- FIG. 15 shows a flow of generating the second information Q2.
- the second information Q2 may include “temporal change in distance and route (route length)” until reaching the workable range 503 and “information on change in arrival / proximity / deviation state”. .
- the second information Q2 indicates the target position where the insertion unit 20 is inserted and positioned in the subject E, or the arrival status to the via position that reaches the target position and the change in the second information Q2. May be presented to the operator OP.
- the second information Q2 includes work target position information indicating a target position where the insertion unit 20 is inserted and positioned in the subject, or a passing position through which the target part reaches the target position.
- the second information calculation unit 102 calculates information related to the proximity state, the arrival of the predetermined range, or the separation state of the insertion unit 20 with respect to the target position or the via position as the second information Q2.
- the second information calculation unit 102 calculates information indicating the change in the position of the distal end portion of the insertion unit 20 with respect to the target position or the via position as the second information Q2.
- FIG. 16 shows a specific operation example of the endoscope 12.
- the specific operation of the endoscope 12 is as follows.
- An arrow A1 indicates the direction of the insertion / extraction operation of the insertion unit 20.
- Arrow A2 indicates the direction of the twisting operation.
- An arrow A3 indicates the direction of the bending operation or the like of the bending portion 23.
- the insertion / extraction operation is an operation of inserting / removing the insertion portion 20 with respect to the body cavity (lumen) M.
- the twisting operation is an operation related to rotation around the major axis of the insertion portion 20.
- the insertion / extraction operation and the twisting operation are performed mainly by manual operation of the operator OP itself at the insertion portion 20.
- the bending operation of the bending portion 23 is an operation performed by bending the distal end side of the insertion portion 20 with the operation knobs 37LR and 38UD, for example.
- the second information Q2 includes an operation instruction.
- the operation instructions include, for example, an operation instruction for insertion / extraction operation / twisting operation of the insertion unit 20 and an operation instruction for bending operation of the bending unit 23.
- the operation instruction for the bending operation of the bending portion 23 is a case where the bending operation of the bending portion 23 is possible.
- the operation instruction as the second information Q2 includes, for example, the following information.
- Example 1 Information indicating a direction and an operation amount in bending of the distal end of the insertion portion 20 (bending operation of the bending portion 23), torsion operation, and insertion / extraction operation
- Example 2 Information indicating the restriction of the force applied at the time of bending the distal end of the insertion portion 20 (bending operation of the bending portion 23), twisting operation, and insertion / extraction operation
- Example 3 Information indicating the limitation of the operation speed in bending the distal end of the insertion portion 20 (bending operation of the bending portion 23), twisting operation, and insertion / extraction operation It is.
- 17 and 18 show a flow of generating the second information Q2.
- a method for generating information indicating the direction and operation amount of the tip bending operation, torsion operation, and insertion / extraction operation when the insertion unit 20 is inserted into the subject will be described as an example.
- the operation amount for each operation is uniquely determined in accordance with the absolute value in the coordinate system.
- the first information generating unit 101 In generating the second information Q2, the first information generating unit 101 reads the sensor value SV as shown in FIG. Based on the sensor value SV, the first information generation unit 101 uses the operation amount of the insertion unit 20 in the current insertion state and the insertion / extraction / torsion / curving operations at the distal end position 20a of the insertion unit 20 as the first information Q1. Calculate the amount.
- the second information generation unit 102 reads information K such as a medical record from the storage unit 17 as the third information Q3.
- the third information Q3 is generated as a work target position that is position information of the affected part or lesioned part 501 from information K such as a medical record, for example.
- the second information generation unit 102 calculates coordinates for the insertion unit 20 to reach the affected area or lesion 501 that is the target position, and reaches the insertion unit 20 to the affected area or lesion 501.
- the operation amount for making the The operation amount of the insertion unit 20 is each operation amount of insertion / extraction, twisting, and bending at the distal end position 20 a of the insertion unit 20.
- the second information generation unit 102 inserts / removes / twistes at the distal end position 20a of the insertion unit 20 based on information K such as a chart and the operation amounts of insertion / extraction / torsion / bending at the distal end position 20a of the insertion unit 20 based on the sensor value SV -The difference with each operation amount of bending is calculated. Based on the difference, the second information generation unit 102 calculates second information Q2 indicating what kind of operation is performed to achieve an operation state at the target position. In the generation of the second information Q2, the operation direction and the operation amount of the insertion unit 20 are calculated.
- the second information Q2 includes an insertion / extraction / torsion / bending operation that is an operation direction, and an insertion / extraction / torsion / bending operation of an amount to be operated.
- the difference is an amount to be manipulated, and the sign of the difference indicates the operation direction.
- the generation of the second information Q2 is effective when there is no obstacle to the operation of the insertion unit 20 (for example, the wall of the lumen) before reaching the target position.
- Generation method example 2 In the generation method example 2, a difference from the generation of the second information Q2 in the generation method example 1 will be described with reference to FIG.
- the second information generation unit 102 moves from the current insertion position of the insertion unit 20 to the target position (target work target position) based on information K such as a medical record as the third information Q3.
- the coordinates at the position slightly moved in the direction are calculated.
- the second information generation unit 102 calculates the operation amount at a position slightly moved in the direction from the current insertion position of the insertion unit 20 to the target position (target work target position).
- the operation amount of the insertion unit 20 is each operation amount of insertion / extraction, twisting, and bending at the distal end position 20 a of the insertion unit 20.
- the second information generation unit 102 uses the operation amounts (first information Q1) of insertion / extraction, twisting, and bending at the distal end position 20a of the insertion unit 20 based on the sensor value SV, and information K such as a medical record as the third information Q3.
- the difference with each operation amount of insertion / extraction / torsion / bending at the distal end position 20a of the insertion portion 20 is calculated.
- the difference is an amount to be manipulated to perform a minute movement.
- the second information generation unit 102 calculates second information Q2 indicating what kind of operation is performed to achieve an operation state at the target position.
- the second information Q2 includes an insertion / extraction / torsion / bending operation which is an operation direction. In the generation of the second information Q2, the operation direction is obtained from the sign of the difference.
- FIG. 19 shows a flow of generating the second information Q2.
- a method for generating information indicating a restriction on the force applied at the time of bending, twisting, and inserting / removing the distal end of the insertion portion 20 when the insertion portion 20 is inserted will be described as an example.
- a force applied to the insertion portion 20 is calculated based on the sensor value SV.
- the force F (FIG. 8) applied by bending the distal end position 20a of the insertion portion 20 is calculated by the method described above. To do.
- the second information calculation unit 102 calculates a difference between the actual bending amount of the bending unit 23 detected by the fiber sensor 88 and the bending operation amount detected by the bending operation amount detection unit 63, and sets the difference as the difference. Based on this, the force F applied to the inner wall 500 of the body cavity (lumen) by the insertion unit 20 is calculated.
- a force (applied force) F applied to the inner wall of the body cavity (lumen) M by twisting operation or insertion / extraction operation is calculated.
- the force (applied force) F it may be necessary to estimate the place where friction occurs in the body cavity (lumen) M and the resistance of the friction.
- the amount of change in torsional operation and insertion / extraction operation with respect to the actually applied force F and torque is calculated based on the sensor value SV. That is, the first information generation unit 101 calculates each operation amount (first information Q1) of insertion / extraction / torsion / bending at the distal end position 20a of the insertion unit 20 based on the sensor value SV.
- the frictional resistance and the frictional force are calculated based on the first information Q1.
- the value (upper limit value) of the applied force F is acquired with respect to the force F applied to the wall of the body cavity (lumen) M.
- the value (upper limit value) of the applied force F is a value that may cause a temporary load (pain or the like) or damage.
- the value (upper limit value) of the applied force is obtained by extracting or calculating from the fourth information Q4.
- the fourth information Q4 is set from the viewpoint of the burden on the subject, and includes information indicating the upper limit value of the force F applied to the subject by the insertion unit 20.
- the second information calculation unit 102 applies the value (upper limit value) of the applied force F and the force (applied force) F applied to the inner wall of the body cavity (lumen) M. And compare. As a result of this comparison, the second information calculation unit 102 determines whether or not the force (applied force) F is within a predetermined ratio with respect to the value (upper limit) of the applied force F, or is within a predetermined reference. The situation of whether or not is calculated as the second information Q2.
- the second information Q2 includes information indicating the relationship between the upper limit value of the applied force F and the force F that the insertion unit 20 is actually applying to the subject.
- FIG. 20 shows a flow of generating the second information Q2.
- the first information calculation unit 101 calculates the speed of the insertion unit 20, for example, the speed of the distal end of the insertion unit 20 based on the sensor value SV.
- the speed of the insertion portion 20 is calculated by performing time differentiation on the position of the distal end portion of the insertion portion 20 after calculating the position of the distal end portion of the insertion portion 20.
- the control device 19 sets an upper limit value for the speed of the insertion unit 20 as the fourth information Q4.
- the fourth information Q4 is a temporary load (pain or the like) on the subject such as when a problem occurs in performing an operation such as observation or treatment, or when the insertion unit 20 collides with the inner wall of the body cavity (lumen) M. ) And the upper limit of speed that would cause damage.
- the second information calculation unit 102 compares the speed of the insertion unit 20 as the first information Q1 with the upper limit value of the speed of the insertion unit 20 as the fourth information Q4, and limits the speed of the insertion unit 20 ( The ratio to the upper limit value) or the situation whether or not the speed of the insertion portion 20 is within a predetermined standard is calculated as the second information Q2.
- FIG. 21 shows a flow of generating the second information Q2.
- the flow of the generation of the second information Q2 is an example in which the method of generating the second information Q2 shown in FIG. 20 is applied to the operation amount, the speed, and the applied force.
- the upper limit values of the operation amount, speed, and applied force are set so as not to damage the subject temporarily or permanently, or to allow the desired work to be performed stably and reliably.
- the upper limit value of the operation amount, speed, and applied force is set in order to eliminate work uncertainty.
- the upper limit is set for the operation amount, speed, and applied force.
- the lower limit value is further set, and the upper limit value is set from the lower limit value. It may be determined whether or not it is between.
- set only the lower limit value to determine that the lower limit value is exceeded, or set the lower limit value and upper limit value to set the lower limit value. It may be determined whether the current value is between the upper limit value and the upper limit value.
- the second information Q2 it is further determined whether the ratio to the limit (upper limit value, lower limit value) or whether it is within a predetermined standard, and the warning information is appropriately generated based on the determination result. Also good.
- the target for generating the warning information include an operation amount and speed for any one of the bending operation, the twisting operation, and the insertion / extraction operation, and the force applied by the insertion unit 20 to the body cavity. As a method for calculating these values, the method described above may be used.
- the control device 19 activates the endoscope 12 and activates a program (application) for generating and outputting the second information Q2, and each sensor 101a (curving operation).
- the amount detection unit 63, the fiber sensor 88, and the insertion unit sensor 13) are activated to perform initial setting for acquiring the first information Q1 (step S1).
- the control device 19 activates a program for obtaining the second information Q2, performs initial setting of the endoscope 12, and reads information necessary for generating the second information Q2.
- the control device 19 activates the first information generation unit 101 and activates the output unit 16 for displaying and outputting the second information Q2.
- the second information calculation unit 102 causes the first information generation unit 101 to generate the first information Q1, and reads out the first information Q1 (step S2).
- the second information calculation unit 102 determines whether or not the third information Q3 is necessary for generating the second information Q2 (step S3). If the third information Q3 is necessary as a result of the determination (YES), the second information calculation unit 102 reads the third information Q3 from the storage unit 17 (step S4). If the 3rd information Q3 is not required (NO), the 2nd information operation part 102 will transfer to Step S7.
- the second information calculation unit 102 determines whether or not the fourth information Q4 is necessary for generating the second information Q2 (step S5). As a result of this determination, if the fourth information Q4 is necessary (YES), the second information calculation unit 102 reads the fourth information Q4 from the storage unit 17 (step S6). If the 4th information Q4 is not required (NO), the 2nd information operation part 102 will transfer to Step S7.
- Step S7 the second information calculation unit 102 generates the second information Q2 (Step S7).
- a specific method for generating the second information Q2 is as described above.
- the second information calculation unit 102 When the second information calculation unit 102 generates the second information Q2, the second information Q2 is output to the output unit 16 (step S8).
- the second information calculation unit 102 determines whether or not to end the generation of the second information Q2 (step S9). As a result of the determination, if the generation of the second information Q2 is not completed, the second information calculation unit 102 branches to steps S3, S5, and S10. If the generation of the second information Q2 ends, the second information calculation unit 102 ends the process of the flowchart.
- step S10 the second information calculation unit 102 determines whether or not new first information Q1 is necessary to generate the second information Q2. If new first information Q1 is necessary as a result of this determination, the second information calculation unit 102 proceeds to step S2. If the new first information Q1 is not necessary, the second information calculation unit 102 proceeds to step S7.
- the second information calculation unit 102 always reads at least one of the third information Q3 and the fourth information Q4 when generating the second information Q2.
- the second information calculation unit 102 may perform step S2 and step S3 in parallel.
- the second information calculation unit 102 may perform step S4 and steps S5 and S6 in parallel.
- the generation of the first information Q1 by the first information generation unit 101 may be separately repeated independently of the reading of the first information Q1 in step S2.
- the subject insertion system 10 applied to an endoscope system or the like, not only sensor information but also an operator OP is useful as information related to the insertion unit 20.
- Support information can be provided at an appropriate timing.
- Specific examples of the calculation process of the second information Q2 by the second information calculation unit 102 include the following processes.
- the second information calculation unit 102 calculates work target relative position information indicating the relative positional relationship between the distal end portion of the insertion unit 20 and the work target position as the second information Q2 based on the position information and the work target position information. To do.
- the first information Q1 uses position information indicating a relative position between the subject and the distal end portion of the insertion unit 20.
- the third information Q3 work target position information indicating the work target position in the subject is used.
- the second information calculation unit 102 calculates work target relative position information indicating a relative positional relationship between the distal end portion of the insertion unit 20 and the work target position based on the position information and the work target position information.
- the second information calculation unit 102 selects the third information Q3 and the fourth information Q4 used for the calculation of the second information Q2 based on the work target relative position information and calculates the second information Q2 Set.
- FIG. 23 shows a configuration example of the subject insertion system 10 according to the second embodiment of the present invention.
- the subject insertion system 10 includes an information input unit 105 in addition to the subject insertion system 10 according to the first embodiment.
- the subject insertion system 10 can appropriately update the third information Q3 and the fourth information Q4 stored in the storage unit 17 based on the fifth information Q5 and the sixth information Q6 input from the information input unit 105. is there.
- the information input unit 105 includes the fifth information Q5 based on the newly obtained diagnosis / treatment result during the operation by the operator OP (for example, the insertion operation), and the policy of the added / modified operation (diagnosis / treatment) Sixth information Q5 indicating the procedure is sequentially input.
- the information input unit 105 receives new fifth information Q5 related to the subject (fifth information input unit).
- the information input unit 105 receives sixth information Q6 that is new information related to the work (sixth information input unit).
- Input of the fifth information Q5 or the sixth information Q6 to the information input unit 105 may be directly input by the operator OP or automatically from an internal / external device or database having the fifth information / sixth information. It may be taken in or may be taken in based on an information input trigger from the operator OP.
- the fifth information Q5 input to the information input unit 105 is sent to the storage unit 17 and added to the third information Q3 indicating the diagnosis / treatment result stored in the storage unit 17 in advance.
- the second information calculation unit 102 generates the second information Q2 using the third information Q3 updated based on the fifth information Q5 during the operation. As a result, the second information Q2 reflecting new information based on the observation / treatment obtained during the work can be provided.
- the sixth information Q6 input to the information input unit 105 is sent to the storage unit 17 and added to the fourth information Q4 indicating the policy / procedure of work (diagnosis / treatment) stored in the storage unit 17 in advance.
- the second information calculation unit 102 uses the fourth information Q4 updated based on the sixth information Q6 during the operation to generate the second information Q2. As a result, it is possible to provide the second information Q2 reflecting information on a new policy / procedure determined during the work.
- the subject insertion system 10 stores the second information Q2 in the storage unit 17 in association with the first information Q1, the third information Q3, and the fourth information Q4.
- “second information + other information link data” is written in the storage unit 17 to indicate the association of the second information Q2 with the first information Q1, the third information Q3, and the fourth information Q4.
- other information corresponding to the individual second information Q2 may be combined and stored in the storage unit 17 in the storage unit 17.
- the storage unit 17 classifies and stores each piece of information from the first information Q1 to the fourth information Q4, and stores the link destination of each piece of information paired with each piece of the second information Q2 in a manageable manner. May be.
- the second information Q2 is stored in association with each information from the first information Q1 to the fourth information Q4 as appropriate, it is possible to track how the second information Q2 was generated. As a result, it is possible to reproduce or analyze the situation at the time of insertion / working and what kind of second information Q2 is provided at what timing.
- Information in which the second information Q2 is associated with each information can be provided to another database or the like.
- the storage unit 17 stores the second information Q2 calculated by the second information calculation unit 102 in association with the third information Q3 and / or the fifth information Q5, and the fourth information Q4 and / or the sixth information Q6. May be.
- the same effect as the subject insertion system 10 according to the first embodiment can be obtained, and the third information Q3 and the fourth information Q4 can be updated as needed. Therefore, the diagnosis / treatment result and the policy / procedure of the work (diagnosis / treatment) can be updated, and as a result, a basic function as an electronic medical record can be provided.
- a switching function related to the second information Q2 is added.
- FIG. 24 shows a configuration example of the subject insertion system according to the third embodiment of the present invention.
- the subject insertion system 10 includes a setting switching information input unit 106 and a control unit 112 that performs control related to switching related to the second information Q2. Since the second information calculation unit 102 and the control unit 112 are related to the processing content, the second information calculation unit 102 and the control unit 112 may be provided integrally for high-speed processing and compactness.
- Setting information indicating settings related to the calculation of the second information Q2 by the second information calculation unit 102 is input to the setting switching information input unit 106.
- the control unit 112 performs control related to selection and / or switching of information combinations required for the calculation of the second information Q2 by the second information calculation unit 102 based on the input setting information.
- FIG. 25 shows the concept of switching control related to the second information Q2 by the control unit 112.
- the control unit 112 selects / switches the second information Q2 generated according to the setting information input from the setting switching information input unit 106, selects / switches the input information necessary for generating the second information Q2, and the output unit 16
- the selection / switching of the output method according to the above and the selection / switching of the optimum arithmetic algorithm for generating the second information Q2 are performed.
- control unit 112 determines the output timing of the second information Q2 based on the first information Q1.
- the control unit 112 performs setting based on information relating to the initial setting stored in the storage unit 17 and setting information input from the setting switching information input unit 106.
- the second information Q2 is selected / switched, necessary input information is also selected / switched at the same time.
- the importance of the second information Q2 may vary greatly depending on the operator OP.
- the operator OP may desire only the second information Q2 that enhances the insertability, or may desire only the second information Q2 related to work such as observation and treatment.
- provision of information other than warning information may be considered unnecessary. If the content of the second information Q2 required for each work target is greatly different, or the body cavity (lumen) M or the type of work target is changed, the change may be further increased.
- the selection / switching described above is automatically performed by the control unit 112 based on, for example, the subject, the third information (for example, information indicating the working target lumen) Q3, or the fourth information (for example, information indicating the work content) Q4. May be.
- the selection / switching may be performed by receiving an operation of the operator OP by the setting switching information input unit 106 and performing a desired selection / switching.
- the required second information Q2 may be different for each user. In this case, only the information necessary for the user may be provided by enabling the user to select desired second information Q2. Specifically, for example, combinations of information as shown in FIG. The figure shows an example of setting information formed by associating the second information Q2, a combination of input information necessary for generating the second information Q2, and a use scene of the second information Q2.
- Example 1 as “second information Q2”, “simultaneous display of the tip position and target position of the insertion portion 20” and “first information Q1 related to a combination of input information necessary for generating second information” “Target position” as “third position related to combination of input information necessary for generating second information” and “during insertion” as “use scene” Yes.
- the “tip position of the insertion portion 20” is (1) a sensor provided at the tip position of the insertion portion 20; (2) Shape sensor (fiber sensor 88) and hand position sensor (insertion sensor 13) (3) Each operation amount (insertion amount, rotation amount, bending operation amount) Obtained by.
- the “target position” is acquired by the “position on the CT image”.
- the second information is “arrival status of workable range” and “the first information relating to the combination of input information necessary for generating the second information” is “the tip position of the insertion portion 20” ""
- the tip position of the insertion portion 20 As “third information related to combination of input information necessary for generating second information” as “target position” and “fourth information related to combination of input information necessary for generation of second information” “Workable range information” and “when inserted” are listed as “use scenes”.
- Example 3 as “second information”, “operation direction / amount to be operated to reach the target position” and “first information relating to a combination of input information necessary to generate the second information” “Target position” is listed as “current operation amount”, “third information related to a combination of input information necessary for generating second information”, and “when inserted” as “use scene”.
- second information as “judgment of force tolerance applied to subject” and “first information relating to a combination of input information necessary for generating second information” as “second information” Force ",” fourth information Q4 related to the combination of input information necessary for generating the second information "as” allowable upper limit value of force applied to the subject ", and” use scene “during insertion and work "Time”.
- the operator OP who is familiar with the operation selects to output “simultaneous display of the tip position and the target position” as the second information Q2 as in “Example 1”.
- the operator OP who is familiar with the operation does not need (not select) the output of “operation direction / amount to be operated to reach the target position” as the second information Q2 of “Example 3”.
- “simultaneous display of the tip position and the target position” is output to the output unit 16.
- the operator OP can perform an insertion operation while judging the operation method and the operation amount with reference to the output.
- the operator OP can select the output of “simultaneous display of the tip position and the target position” of “Example 1” and “judgment force tolerance determination” of “Example 4” as the second information Q2. .
- “simultaneous display of the tip position and the target position” can be output as the second information Q2.
- “determination of acceptability of applied force” can be output as the second information Q2.
- the “arrival status to workable range” of “Example 2” can be used.
- the “arrival status to the workable range” in “Example 2” is not used as the second information Q2 to be output to the outside, and output is not necessarily required.
- the second information Q2 presented at the timing when the operation purpose is switched is switched from the information for insertion to the information for work as in the third embodiment, Only the second information Q2 suitable for each use scene can be provided to the operator OP. In this way, the “arrival status to the workable range” that is the second information Q2 (generated by the second information calculation unit 10) generated from the first information Q1, the third information Q3, and the fourth information Q4 is used. Therefore, it is not necessary to separately perform a calculation for grasping an appropriate switching timing.
- FIG. 27 shows a concept of switching control related to the second information Q2 by the control unit 112.
- “grade” is set for selection / switching of the second information Q2.
- the control unit 112 performs selection / switching control of the second information Q2 based on the grade.
- FIG. 28 shows an example of grade classification related to selection / switching of the second information Q2.
- the grade is information for switching the second information Q2 output (provided to the operator OP) by the output unit 16 in the selection / switching of the second information Q2.
- the figure shows six grades “1” to “6” corresponding to the information provision level desired by the operator OP.
- the grade “1” is a grade in which the second information Q2 is not output (provided to the operator OP).
- the grade “6” is the grade with the most complete output of the second information Q2 (provided to the operator OP).
- the grade is set for each operator OP based on the degree of necessity of the second information Q2 of the operator OP, for example, based on the proficiency level of the operator OP.
- the operator OP selects a desired grade.
- the control unit 112 controls the second information calculation unit 102 to output (provide) the second information Q2 based on the grade selected by the operator OP.
- “Grade 6” means “warning, display of the insertion status of the insertion portion 20 with respect to the lumen, timely display of work policy / procedure, operation amount for insertion and work (insertion / extraction / twisting / curving operation), And “Display of relationship with set upper limit value”.
- the grade is set so that the presentation content of the second information Q2 is enhanced step by step as the step increases from “1” to “6”.
- the grade selection method there are a method in which the operator OP directly selects a grade from a menu screen such as a monitor, and a method in which the operator OP selects an index indicating experience and ability and selects it indirectly. For example, a part of information such as the skill level of the operator OP, past work experience, the number of training times, the number of procedures, the level at which the skill / diagnosis / treatment of a specific skill as an index is matured, and each grade “1” "To" 6 "are associated in advance. The operator OP can select grades “1” to “6” associated with the information by inputting or selecting the information.
- the operator OP can enjoy the convenience by selecting and switching the second information Q2 using the grade without knowing what each grade means, and it can be used easily. be able to.
- the grade may be set so that the output (providing) level of the second information Q2 is changed for each operation such as insertion or treatment. When erroneous operations or warnings occur frequently, the grade may be switched automatically.
- a training mode is set.
- voice guidance that encourages learning that is not normally performed in front of the patient who is the subject is performed, the quality of the insertion / work results, and the level determination result May be output.
- the output (providing) timing of the second information Q2 may be set based on the position of the insertion unit 20 of the endoscope 12. For example, when the insertion unit 20 of the endoscope 12 is at a specific position or range, the control unit 112 outputs the second information Q2 that is important or effective at the specific position or range at the timing. In this manner, the second information calculation unit 102 is controlled.
- control unit 112 provides, for example, the second information Q2 related to insertion until the target work target position or workable range is reached, and when the work target position or workable range is reached.
- the output of the second information Q2 is terminated.
- the control unit 112 is an entrance of a specific organ and serves as a reference for work, for example, “information that has been reached” when reaching an entrance of a stomach, a bladder or the like, a target work target position, and a workable range.
- the “precautionary information / target past work target information” and the “work contents / work guidelines to be performed on the work target” associated with the position as the first information Q1 are output as the second information Q2 (
- the second information calculation unit 102 may be controlled so as to be provided.
- Information indicating a specific position or range related to the timing setting is stored in the storage unit 17 as the fourth information Q4.
- the second information calculation unit 102 generates timing by combining the fourth information Q4 with the first information Q1.
- Information indicating a specific position or range related to timing setting may be given to the setting switching information input unit 106 as additional information instead of the fourth information Q4.
- a trigger may be given to the setting switching information input unit 106 at the determined timing.
- the setting switching information input unit 106 inputs a trigger, selects / switches the second information Q2 generated according to the setting information, selects / switches input information necessary for generating the second information Q2, and outputs by the output unit 16
- the selection / switching of the method and the selection / switching of the optimal calculation algorithm for generating the second information Q2 are performed. Since the second information Q2 that is valid in a timely manner is output (provided to the operator OP) in a timely manner, work efficiency, certainty, safety, and the like can be improved.
- FIG. 29 shows the concept of switching control related to the second information Q2 by the control unit 112.
- a plurality of output members are provided as the output unit 16. Which output member of the plurality of output members is used as the output unit 16 or what output method is employed is selected and switched by the control unit 112.
- the output member constituting the output unit 16 includes, for example, an information providing monitor, an endoscope monitor, a speaker, and a vibration / electric stimulation generator.
- the warning display is switched from the display on the information providing monitor to the vibration stimulus generation device (vibration device) provided in the operation unit of the endoscope 12.
- the vibration stimulus generation device vibration stimulus generation device
- the optimum output unit 16 can be selected according to the second information Q2. Information that seems important to the user can be highlighted.
- FIG. 30 shows an example of setting information relating to output switching in which the second information Q2, the output means, and the output method are associated with each other.
- the information providing monitor or the endoscope monitor is used as the output unit 16 for the simultaneous display of the tip position (tip position of the insertion unit 20) and the target position as the second information Q2.
- the target image is displayed on the whole image of the subject (a: specific 2D image / plural 2D images, b: 3D image from a specific direction), and the target position is displayed on the endoscope image.
- the output method can be selected / switched.
- the “information providing monitor” can switch between 2D (2D) image display and 3D (3D) image display.
- the target position is displayed on the subject lumen image which is an endoscopic image.
- Example 2 either “information providing monitor” or “speaker” can be selected / switched as the output unit 16 with respect to the “arrival status of workable range” as the second information. .
- display area on monitor a; display distance / route to reach, b: display status in stages
- the output method can be selected / switched.
- Example 2 even when the “information providing monitor” is used as the second information Q2, the “distance / distance display”, “stage” There are a plurality of display methods such as “display divided status” and “display on monitor only when arrival / departure”.
- the situation can be communicated by voice or electronic sound when the work range or target position is reached or deviated.
- the second information can be output (provided) while ensuring the preference of the operator OP and the certainty of information transmission.
- the “information providing monitor” and the “endoscope monitor” are used as the output unit 16 with respect to “operation direction / amount to be operated to reach the target position” as the second information. Any one of them can be selected and switched. Depending on the selection / switching, either the output method of “display area on the monitor” or “display the operation direction (curvature, insertion, torsion, etc.) on the endoscopic image” is selected / Switched.
- Example 3 for the second information Q2 “operation direction to reach the target position / amount to be operated”, “output providing monitor” and “endoscope monitor” as the output unit 16 “Can be selected and switched.
- the “information provision monitor” an area is taken and display is performed for each operation.
- the operation direction is displayed on the subject lumen image which is an endoscopic image.
- the “information providing monitor” can display an operation direction and a specific operation amount for each operation, and is particularly effective when it is important how many operations are necessary.
- the operator OP can confirm the operation direction without moving the line of sight because the display is superimposed on the lumen image that the operator OP mainly stares at.
- the operator OP himself selects and sets from various options, so that it is easy for the operator OP to confirm and it is possible to perform output switching suitable for the work content.
- the “information providing monitor”, the “speaker”, and the “vibration / electric stimulation generator” are used as the output unit 16 in response to “the determination of the admissibility of the force applied to the subject” as the second information Q2. Any one of them can be selected and switched. Depending on the selection / switching, one of “display on the whole image of the subject”, “transmit caution or warning by voice”, and “transmit caution or warning from the device installed on the operation unit or body” The output method can be selected / switched.
- Example 4 “information providing monitor”, “speaker”, “vibration / electric stimulation generator” as the output unit 16 with respect to the “judgment force force determination” that is the second information Q2. Can be selected / switched.
- the magnitude and direction of the force and the place where the force is applied are displayed.
- the “information providing monitor” is used as the output unit 16 for the operator OP watching the “information providing monitor”.
- the “speaker” is used to warn Deliver sounds and warnings by voice.
- the “vibration / electric stimulation generator” is attached to the operation unit 30 or the operator OP, for example, and directly transmits the stimulus to the body of the operator OP at the time of warning or the like.
- the operator OP has the highest priority. It is possible to understand the warning, stop the work immediately, and deal with the warning.
- a flag indicating the degree of urgency or importance can be attached to the second information Q2.
- the control unit 112 controls the calculation process of the second information Q2 by the second information calculation unit 102 and the switching process of the output member and the output method for outputting the second information Q according to the flag.
- the same effect as that of the subject insertion system according to the first embodiment can be obtained, and the operation support information required at the optimum timing for each operator OP can be obtained by the operator.
- An object insertion system that can be provided to the OP can be provided.
- the above-described embodiments include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some constituent requirements are deleted from all the constituent requirements shown in the embodiment, the problem described in the column of the problem to be solved by the invention can be solved, and the effect described in the column of the effect of the invention Can be extracted as an invention.
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Public Health (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Signal Processing (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Abstract
被検体挿入システム(10)は、挿入部(20)と、第1情報生成部(101)と、記憶部(17)と、第2情報演算部(102)と、出力部(16)とを含む。前記第1情報生成部(101)は、体腔(管腔)内における前記挿入部(20)の挿入状態及び操作状態のうち少なくとも何れか一方を示す情報である第1情報を生成する。前記第2情報演算部(102)は、前記第1情報生成部(101)により生成された前記第1情報と、前記記憶部(17)に記憶されている前記第3情報及び前記第4情報とのうち少なくとも何れか一方の情報とに基づいて前記挿入部20を挿入して前記所定の作業を行うための操作支援情報である第2情報を算出する。前記出力部(16)は、前記第2情報を出力する。
Description
本発明は、被検体内に挿入して観察、修理、治療、及び採取等の各種処置を行う為の被検体挿入システムに関する。
内視鏡のように体腔(管腔)内に挿入部を挿入して用いる機器がある。このような機器では、挿入部を被検体に挿入した後、術者の目視によって直接的に挿入部の状態(例えば形状等)を確認することができず、例えば内視鏡を利用して取得した画像と実際の観察箇所との対応関係が不明確となる。このため、術者は、挿入部の挿入方向や湾曲方向を誤ってしまう可能性がある。
このような事情から、容易且つ安全に挿入等の操作を行うことができるように、すなわち被検体内に挿入された内視鏡の挿入部の形状を把握することができるように、内視鏡の挿入部に、形状検出、位置検出、及び力覚検出等の為のセンサを組み込む技術が種々提案されている。
例えば特許文献1は、可撓性を有する内視鏡の挿入部の形状を把握するための内視鏡挿入部形状把握システムを開示する。具体的に特許文献1は、挿入部における湾曲部の両端の位置と前記湾曲部内の少なくとも1つの点の位置とを検出する位置検出手段と、前記湾曲部の複数の位置における湾曲状態を各々検出する湾曲状態検出手段と、前記両端の位置と前記湾曲部内の点の位置と前記複数の位置における湾曲状態とから前記湾曲部の形状を再現する湾曲部形状再現手段とを具備することを開示する。
例えば医師等の内視鏡のオペレータは、内視鏡の挿入部に係る事項以外にも配慮・検討すべき事項がある。この事項は、例えば患者の容態、推定される患部の位置、及び診断・処置方法等であり、多岐に渡る。内視鏡システム自体に不慣れのオペレータでは、内視鏡の挿入部に係る情報についての理解が難しい。従って、内視鏡の挿入部に係るセンサ情報が提供されたとしても、このセンサ情報がオペレータにとって理解し易く、重要度の把握をし易く、活用し易くなければ、オペレータは、センサ情報に基づいて瞬時に判断して適切な対応をすることができない。
例えば、一般的に有用だろうと推測されるセンサ情報が提供されても、このセンサ情報が実際の患者の容態にそぐわなかったり、不要な情報であったりすると、当該センサ情報に対する判読が煩雑になったり、必要な情報が不足してしまう可能性がある。
従って、現在、内視鏡の挿入や各種操作を支援するための有益な情報を適切なタイミングでオペレータに提供するための被検体挿入システムが望まれている。同システムには、内視鏡の挿入や各種操作時に得られた情報を適宜追加、更新できることが望ましい。
本発明は、上記事情に鑑みてなされたもので、挿入部に係る情報としてのセンサ情報のみならず、オペレータの操作を支援する有益な情報を提供できる被検体挿入システムを提供することを目的とする。
従って、現在、内視鏡の挿入や各種操作を支援するための有益な情報を適切なタイミングでオペレータに提供するための被検体挿入システムが望まれている。同システムには、内視鏡の挿入や各種操作時に得られた情報を適宜追加、更新できることが望ましい。
本発明は、上記事情に鑑みてなされたもので、挿入部に係る情報としてのセンサ情報のみならず、オペレータの操作を支援する有益な情報を提供できる被検体挿入システムを提供することを目的とする。
本発明の主要な局面に係る被検体挿入システムは、被検体の体腔(管腔)内に挿入して所定の作業を行う挿入部と、前記体腔(管腔)内における前記挿入部の挿入状態及び操作状態のうち少なくとも何れか一方を示す情報である第1情報を生成する第1情報生成部と、前記被検体に係る第3情報、又は前記作業に関連する第4情報のうち少なくとも何れか一方の情報を記憶する記憶部と、前記第1情報と、前記第3情報及び前記第4情報とのうち少なくとも何れか一方の情報とに基づいて前記挿入部を挿入して前記所定の作業を行うための操作支援情報である第2情報を算出する第2情報演算部と、前記第2情報を出力する出力部と、を具備する。
本発明によれば、挿入部に係る情報としてのセンサ情報のみならず、オペレータの操作を支援する有益な情報を提供できる被検体挿入システムを提供できる。
以下、図面を参照して本発明の実施形態について説明する。
[第1実施形態]
第1実施形態は、被検体挿入システム10を適用した医療用内視鏡システムを例にして説明する。被検体挿入システム10は、挿入部20を操作し、被検体内に挿入し、被検体内を処置するものであれば、医療用内視鏡システム以外にも汎用的に適用できる。被検体挿入システム10は、例えば硬性鏡、カテーテル及び医療用マニピュレータ等にも適用できる。
[第1実施形態]
第1実施形態は、被検体挿入システム10を適用した医療用内視鏡システムを例にして説明する。被検体挿入システム10は、挿入部20を操作し、被検体内に挿入し、被検体内を処置するものであれば、医療用内視鏡システム以外にも汎用的に適用できる。被検体挿入システム10は、例えば硬性鏡、カテーテル及び医療用マニピュレータ等にも適用できる。
図1は本実施形態に係る被検体挿入システム10の一構成例を示す。図2は湾曲操作量検出演算機構の概略構成図を示す。被検体挿入システム10は、内視鏡12と、画像処理装置14と、出力部16と、記憶部17と、光源装置18と、光出射検出装置18aと、制御装置19とを含む。画像処理装置14と光源装置18と光出射検出装置18aと制御装置19とは、互いに接続されている。画像処理装置14と光源装置18と光出射検出装置18aとは、それぞれコネクタ42を介して内視鏡12に対して着脱自在である。
内視鏡12は、管状の挿入部20を含む。内視鏡12は、挿入部20を被検体の体腔(管腔)内に挿入する。この内視鏡12は、所望の観察対象物、例えば被検体の体腔(管腔)内における患部や病変部等を撮像等する。
画像処理装置14は、内視鏡12の撮像により取得された画像データに対して所定の画像処理を施す。画像処理装置14は、例えばビデオプロセッサ等である。
出力部16は、内視鏡12の操作を支援する情報である第2情報Q2を出力してオペレータに提示する。出力部16は、モニタ等の表示手段であり、画像処理装置14から出力された画像データ等をモニタ表示する。出力部16は、表示手段に限るものでなく、第2情報Q2を例えば音声等により出力するものであればよい。
出力部16は、内視鏡12の操作を支援する情報である第2情報Q2を出力してオペレータに提示する。出力部16は、モニタ等の表示手段であり、画像処理装置14から出力された画像データ等をモニタ表示する。出力部16は、表示手段に限るものでなく、第2情報Q2を例えば音声等により出力するものであればよい。
記憶部17は、各種情報、例えば、被検体に係る情報を含む第3情報Q3と、作業に関連する情報を含む第4情報Q4とのうち少なくとも何れか一方の情報を記憶する。記憶部17は、第2情報演算部102によって算出された第2情報Q2を、第1情報Q1、第3情報Q3又は第5情報Q5のうち少なくとも一つの情報に関連付けて記憶する。
光源装置18は、照明光を出射する。光源装置18から出射された照明光は、内視鏡12に伝送される。
光出射検出装置18aは、光源装置18から出射された照明光とは例えば波長の異なる光を出射し、かつ出射した光を検出する。
制御装置19は、当該被検体挿入システム10の全体を統括的に制御する。
光出射検出装置18aは、光源装置18から出射された照明光とは例えば波長の異なる光を出射し、かつ出射した光を検出する。
制御装置19は、当該被検体挿入システム10の全体を統括的に制御する。
内視鏡12は、挿入部20と、操作部30とを含む。
挿入部20は、中空の細径長尺に形成され、患者の体腔(管腔)内に挿入される。挿入部20は、先端硬質部21と、湾曲部23と、可撓管部25とを含む。先端硬質部21と湾曲部23と可撓管部25とは、挿入部20の先端部側から基端部側に向かって配設されている。先端硬質部21の基端部は、湾曲部23の先端部に対して連結されている。湾曲部23の基端部は、可撓管部25の基端部に対して連結されている。
挿入部20は、中空の細径長尺に形成され、患者の体腔(管腔)内に挿入される。挿入部20は、先端硬質部21と、湾曲部23と、可撓管部25とを含む。先端硬質部21と湾曲部23と可撓管部25とは、挿入部20の先端部側から基端部側に向かって配設されている。先端硬質部21の基端部は、湾曲部23の先端部に対して連結されている。湾曲部23の基端部は、可撓管部25の基端部に対して連結されている。
先端硬質部21は、挿入部20の先端部、すなわち内視鏡12の先端部に形成されている。先端硬質部21は、硬性を有する。
湾曲部23には、挿入部20の長手軸方向に沿って節輪を回動可能に連結して成る。湾曲部23は、湾曲操作部37に対するオペレータの操作に応じて湾曲する。オペレータは、湾曲操作部37を操作することにより、被検体における観察対象物が内視鏡12の観察視野内に捉えられ、かつ照明光が観察対象物に照明されるようにする。オペレータの湾曲操作部37に対する操作によって湾曲部23は、所望の方向、例えば上下左右に湾曲する。当該湾曲により挿入部20の先端硬質部21は、位置と向きとが変わる。
湾曲部23には、挿入部20の長手軸方向に沿って節輪を回動可能に連結して成る。湾曲部23は、湾曲操作部37に対するオペレータの操作に応じて湾曲する。オペレータは、湾曲操作部37を操作することにより、被検体における観察対象物が内視鏡12の観察視野内に捉えられ、かつ照明光が観察対象物に照明されるようにする。オペレータの湾曲操作部37に対する操作によって湾曲部23は、所望の方向、例えば上下左右に湾曲する。当該湾曲により挿入部20の先端硬質部21は、位置と向きとが変わる。
可撓管部25は、管状部材に形成され、本体部31から延出されている。可撓管部25は、所定の可撓性を有し、外力の加わりによって曲がる。
操作部30は、図1及び図2に示すように、把持部33と、ユニバーサルコード41と、湾曲操作量検出演算機構61とを含む。
操作部30は、図1及び図2に示すように、把持部33と、ユニバーサルコード41と、湾曲操作量検出演算機構61とを含む。
把持部33は、本体部31の基端部に対して連結されている。把持部33は、内視鏡12を操作するオペレータの手部等によって把持される。ユニバーサルコード41の一方の端部は、把持部33に接続されている。
具体的に把持部33には、図1及び図2に示すように、湾曲操作部37が配設されている。湾曲操作部37は、湾曲部23を湾曲させるための各操作ワイヤ38LR、38UDを駆動する。湾曲操作部37は、湾曲部23を左右に湾曲操作させる左右湾曲操作ノブ37LRと、湾曲部23を上下に湾曲操作させる上下湾曲操作ノブ37UDと、湾曲した湾曲部23の位置を固定する固定ノブ37Cとを含む。
左右湾曲操作ノブ37LRは、図2に示すように左右方向の湾曲操作駆動部と操作ワイヤ38LRとを介して湾曲部23を左右方向に湾曲させる。左右湾曲操作ノブ37LRには、当該左右湾曲操作ノブ37LRに対するオペレータの操作によって駆動する左右方向の湾曲操作駆動部が接続されている。左右方向の湾曲操作駆動部は、例えば把持部33内に配設されている。左右方向の湾曲操作駆動部は、操作部30と可撓管部25と湾曲部23とに挿通されている操作ワイヤ38LRに接続されている。操作ワイヤ38LRは、湾曲部23の先端部に接続されている。
上下湾曲操作ノブ37UDは、図2に示すように上下方向の湾曲操作駆動部と操作ワイヤ38UDとを介して湾曲部23を上下方向に湾曲させる。上下湾曲操作ノブ37UDには、当該上下湾曲操作ノブ37UDに対するオペレータの操作によって駆動する上下方向の湾曲操作駆動部が接続されている。上下方向の湾曲操作駆動部は、例えば把持部33内に配設されている。当該上下方向の湾曲操作駆動部は、操作部30と可撓管部25と湾曲部23とに挿通されている操作ワイヤ38UDに接続されている。
操作ワイヤ38UDと操作ワイヤ38LRとは、それぞれ独立して移動するワイヤである。操作ワイヤ38UDと操作ワイヤ38LRとは、それぞれ湾曲部23の先端部に接続されている。
湾曲操作機構39は、湾曲部23を湾曲させる。湾曲操作機構39による湾曲部23を湾曲させるための操作量(湾曲操作量)は、各操作ワイヤ38LR,38UD、湾曲操作部37を操作する量となる。湾曲操作機構39は、湾曲操作部(左右湾曲操作ノブ37LR、上下湾曲操作ノブ37UD)37と、左右方向の湾曲操作駆動部と、操作ワイヤ38LRと、上下方向の湾曲操作駆動部と、操作ワイヤ38UDとを含む。
湾曲操作機構39は、湾曲部23を湾曲させる。湾曲操作機構39による湾曲部23を湾曲させるための操作量(湾曲操作量)は、各操作ワイヤ38LR,38UD、湾曲操作部37を操作する量となる。湾曲操作機構39は、湾曲操作部(左右湾曲操作ノブ37LR、上下湾曲操作ノブ37UD)37と、左右方向の湾曲操作駆動部と、操作ワイヤ38LRと、上下方向の湾曲操作駆動部と、操作ワイヤ38UDとを含む。
ユニバーサルコード41は、把持部33の側面から延出している。ユニバーサルコード41の他方の端部には、画像処理装置14、光源装置18及び光出射検出装置18aに対して着脱可能なコネクタ42が設けられている。
湾曲操作量検出演算機構61は、図2に示すように湾曲操作機構39の湾曲操作量を検出する2つの湾曲操作量検出部(操作量センサ)63a、63bと、各湾曲操作量検出部63a、63bの検出結果を基に操作量を示す湾曲操作量情報を演算する湾曲操作量演算部65(図1)と、各湾曲操作量検出部63a、63bにそれぞれ対峙する2つの被読取部67a、67bとを含む。湾曲操作量演算部65は、例えば制御装置19に配設されている。
2つの湾曲操作量検出部63a、63bは、それぞれ図2に示す湾曲操作機構39による湾曲操作量を検出する。各湾曲操作量検出部63a、63bは、それぞれ例えばリニアエンコーダであり、操作部30内部に配設されている。
一方の被読取部67aは、例えば操作ワイヤ38LRの基端部に配設されている。他方の被読取部67bは、操作ワイヤ38UDの基端部に配設されている。被読取部67aは、操作ワイヤ38LRの移動と共に移動する。被読取部67bは、操作ワイヤ38UDの移動と共に移動する。各被読取部67a、67bは、例えばリニアスケールである。
一方の湾曲操作量検出部63aは、一方の被読取部67aに対して対向するように設けられている。湾曲操作量検出部63aは、操作ワイヤ38LRと共に移動する被読取部67aを読み取って当該被読取部67aの移動位置を検出し、被読取部67aの移動位置から操作ワイヤ38LRの移動を検出する。
一方の被読取部67aは、例えば操作ワイヤ38LRの基端部に配設されている。他方の被読取部67bは、操作ワイヤ38UDの基端部に配設されている。被読取部67aは、操作ワイヤ38LRの移動と共に移動する。被読取部67bは、操作ワイヤ38UDの移動と共に移動する。各被読取部67a、67bは、例えばリニアスケールである。
一方の湾曲操作量検出部63aは、一方の被読取部67aに対して対向するように設けられている。湾曲操作量検出部63aは、操作ワイヤ38LRと共に移動する被読取部67aを読み取って当該被読取部67aの移動位置を検出し、被読取部67aの移動位置から操作ワイヤ38LRの移動を検出する。
他方の湾曲操作量検出部63bは、他方の被読取部67bに対して対向するように設けられている。湾曲操作量検出部63bは、操作ワイヤ38UDと共に移動する被読取部67bを読み取って当該被読取部67bの移動位置を検出し、被読取部67bの移動位置から操作ワイヤ38UDの移動を検出する。
湾曲操作量演算部65は、各湾曲操作量検出部63a、63bによりそれぞれ検出された各被読取部67a、67bの各移動位置に基づいて各被読取部67、67bの移動量、すなわち操作ワイヤ38LRと操作ワイヤ38UDとの各移動量をそれぞれ検出する。湾曲操作量演算部65は、操作ワイヤ38LRと操作ワイヤ38UDとの各移動量に基づいて湾曲操作機構39による湾曲部23の湾曲操作量、すなわち操作ワイヤ38LRと操作ワイヤ38UDとの各湾曲操作量情報を演算する。
一方の被読取部67aは、左右湾曲操作ノブ37LRに配設し、他方の被読取部67bは、上下湾曲操作ノブ37UDに配設してもよい。この場合、一方の被読取部67aは、例えば、円筒の左右湾曲操作ノブ37LRの外周面に配設し、他方の被読取部67bは、例えば、円筒の上下湾曲操作ノブ37UDの外周面に配設される。
なお、一方の被読取部67aは、左右湾曲操作ノブ37LRの表面に配設し、他方の被読取部67bは、上下湾曲操作ノブ37UDの表面に配設してもよい。
湾曲操作量検出部63aは、左右湾曲操作ノブ37LRと共に回動する被読取部67aを読み取り、被読取部67aの回動位置を検出する。
湾曲操作量検出部63bは、上下湾曲操作ノブ37UDと共に回動する被読取部67bを読み取り、被読取部67bの回動位置を検出する。
湾曲操作量検出部63aは、左右湾曲操作ノブ37LRと共に回動する被読取部67aを読み取り、被読取部67aの回動位置を検出する。
湾曲操作量検出部63bは、上下湾曲操作ノブ37UDと共に回動する被読取部67bを読み取り、被読取部67bの回動位置を検出する。
湾曲操作量演算部65は、各湾曲操作量検出部63a、63bの検出結果である各被読取部67a、67bの各回動位置を基に各被読取部67a、67bの移動量、つまり左右湾曲操作ノブ37LRの回動量と、上下湾曲操作ノブ37UDの回動量とを演算して求める。
湾曲操作量演算部65は、左右湾曲操作ノブ37LRと上下湾曲操作ノブ37UDとの各回動量を基に当該左右湾曲操作ノブ37LRと上下湾曲操作ノブ37UDとの各湾曲操作量情報を演算し求める。
湾曲操作量演算部65は、左右湾曲操作ノブ37LR及び上下湾曲操作ノブ37UDの各湾曲操作量情報を演算することにより、湾曲操作機構39の湾曲操作量を演算してその湾曲操作量情報を取得する。
湾曲操作量演算部65は、左右湾曲操作ノブ37LR及び上下湾曲操作ノブ37UDの各湾曲操作量情報を演算することにより、湾曲操作機構39の湾曲操作量を演算してその湾曲操作量情報を取得する。
従って、湾曲操作量検出演算機構61は、湾曲操作機構39における左右湾曲操作ノブ37LRと上下湾曲操作ノブ37UDとの各回動量を基に、湾曲操作機構39の湾曲操作量を演算してその湾曲操作量情報を求める。
湾曲部23は、必ずしも上下左右に湾曲可能である必要はなく、例えば上下のみ又は左右のみに湾曲可能にしてもよい。この場合、湾曲操作量検出演算機構61は、湾曲操作機構39の上下方向の湾曲操作量又は左右方向の湾曲操作量を検出し、それぞれの湾曲操作量情報を演算する。
図3は湾曲形状検出演算機構71の概略構成図を示す。湾曲形状検出演算機構71は、光出射検出装置18aと、制御装置19と、光ファイバ83aと、検出領域(光検出部)87と、反射部95とを含む。湾曲形状検出演算機構71は、実際に湾曲している湾曲部23の湾曲形状(湾曲量)を検出し、湾曲形状を示す湾曲形状情報を演算し求める。
光出射検出装置18aは、光源79と、投光レンズ91と、アイソレータ93と、反射ミラー97と、集光レンズ81aと、集光レンズ81bと、湾曲形状検出部73とを含む。
光源79は、例えばLED等であり、光を出射する。光源79から出射される光の光路上には、投光レンズ91と、アイソレータ93と、反射ミラー97と、集光レンズ81aとが配置されている。反射ミラー97の反射光路上には、集光レンズ81bと、湾曲形状検出部73とが配置されている。
光源79は、例えばLED等であり、光を出射する。光源79から出射される光の光路上には、投光レンズ91と、アイソレータ93と、反射ミラー97と、集光レンズ81aとが配置されている。反射ミラー97の反射光路上には、集光レンズ81bと、湾曲形状検出部73とが配置されている。
投光レンズ91は、光源79から出射された光を投光する。
アイソレータ93は、一方向からの光を透過し、他方向からの光を遮光する。アイソレータ93は、光源79から出射された光を透過し、逆方向からの光を遮光する。これにより、アイソレータ93を透過した光は、集光レンズ81aによって集光されて光ファイバ83aに入射する。
アイソレータ93は、一方向からの光を透過し、他方向からの光を遮光する。アイソレータ93は、光源79から出射された光を透過し、逆方向からの光を遮光する。これにより、アイソレータ93を透過した光は、集光レンズ81aによって集光されて光ファイバ83aに入射する。
集光レンズ81aは、光源79と光ファイバ83aとの間に配設されている。集光レンズ81aは、光源79から出射された光を光ファイバ83aに入射させるように、当該光を光ファイバ83aに集光する。
集光レンズ81bは、光ファイバ83aの先端に設けられた先端硬質部21で反射して光ファイバ83aを戻り、集光レンズ81aを通り、反射ミラー97により反射した光を湾曲形状検出部73に集光する。
集光レンズ81bは、光ファイバ83aの先端に設けられた先端硬質部21で反射して光ファイバ83aを戻り、集光レンズ81aを通り、反射ミラー97により反射した光を湾曲形状検出部73に集光する。
反射部95は、光ファイバ83aから出射した光を反射し、光ファイバ83aに再入射させる。
反射ミラー97は、一方向からの光を透過し、他方向からの光を反射する。すなわち、反射ミラー97は、光源79から出射され、投光レンズ91、アイソレータ93を通った光を集光レンズ81a側に透過し、かつ光ファイバ83aから出射され、集光レンズ81aを通った戻り光を反射する。
反射ミラー97は、一方向からの光を透過し、他方向からの光を反射する。すなわち、反射ミラー97は、光源79から出射され、投光レンズ91、アイソレータ93を通った光を集光レンズ81a側に透過し、かつ光ファイバ83aから出射され、集光レンズ81aを通った戻り光を反射する。
湾曲形状検出部73は、例えば受光素子等の受光部を含む。湾曲形状検出部73は、入射した光を受光し、受光した光量等に応じた受光信号を出力する。湾曲形状検出部73は、受光信号に基づいて湾曲部23の湾曲形状、例えば湾曲の方向及び湾曲の大きさ(湾曲量)に応じた受光信号を出力する。
制御装置19は、被検体挿入システム10の各部を統括的に制御するもので、図3に示すように湾曲形状演算部75を含む。湾曲形状演算部75は、湾曲形状検出部73から出力される受光信号に基づいて実際に湾曲している湾曲部23の湾曲量、湾曲方向及び湾曲形状を演算して求める。湾曲部23の湾曲量、湾曲方向及び湾曲形状は、光ファイバ83aに設けられた検出領域87によって光ファイバ83a内に導光される光の光学特性の変化、例えば光量の変化に基づいて求められる。
光ファイバ83aは、光源79から出射され、集光レンズ81によって集光された光を、図1に示すように操作部30を介して挿入部20の先端硬質部21に導光する。光ファイバ83aは、線状部材により形成されている。
光ファイバ83aには、上記検出領域87が少なくとも1つ設けられている。検出領域87は、図3に示すように湾曲形状を検出する形状センサとしてファイバセンサ88を形成する。ファイバセンサ88は、曲げセンサとも称する。ファイバセンサ88は、光量変化検出方式のセンサである。
検出領域87は、光ファイバ83aの湾曲部23が湾曲すると、光ファイバ83a内に導光する光を、当該光ファイバ83aの湾曲状態に応じて当該光ファイバ83aの外部に向けて出射させる。光ファイバ83aの外部に向けて出射する光量は、当該光ファイバ83aの湾曲量に対応する。検出領域87は、光ファイバ83aの湾曲量に対応した光量の光を光ファイバ83aの外部に漏らすような加工が施されている。換言すれば、検出領域87は、光ファイバ83aによって導光される光の光学特性、例えば光量を挿入部20の湾曲状態に応じて変化させるものとなる(光学特性変化部)。検出領域87は、少なくとも挿入部20の湾曲を検出すべき箇所又は当該箇所の近傍、例えば湾曲部23等に配設される。
図4乃至図6はファイバセンサ88の一構成例を示す。ファイバセンサ88は、湾曲部23を含む挿入部20の湾曲形状(湾曲量)を検出する。ファイバセンサ88は、挿入部20の湾曲部23に沿って光ファイバ83aを設け、かつ湾曲部23における特定箇所に検出領域87を設けて成る。ファイバセンサ88は、光ファイバ83aの曲率から湾曲量を求めるためのものである。
光ファイバ83aが図4に示すように湾曲していない第1状態(真っ直ぐな状態)から例えば図5又は図6に示すように湾曲した状態に変化すると、光ファイバ83aに設けられた検出領域87に入射する光量が変化する。図5は光ファイバ83aが検出領域87を設けた側を湾曲の内側として湾曲した第2状態を示す。図6は光ファイバ83aが検出領域87を設けた側を湾曲の外側として湾曲した第3状態を示す。第1乃至第3状態を比較すると、図5に示す第2状態が光ファイバ83aによる光の伝達量が最も大きく、図6に示す第3状態が光ファイバ83aによる光の伝達量が最も小さい。
ファイバセンサ88を用いれば、湾曲形状演算部75は、湾曲形状検出部73から出力される受光信号、すなわち検出領域87に入射する光量の変化に基づいて実際に湾曲している湾曲部23の湾曲量、湾曲方向及び湾曲形状、さらに光ファイバ83aの曲率を算出する。
ファイバセンサ88は、上記述べた通り光量変化検出方式のセンサであって、湾曲部23の湾曲(光ファイバ83aの曲げ)に応じて変化する光量、すなわち光ファイバ83a内を通る光量に対応する受光信号を出力するので、光ファイバ83aの湾曲形状(湾曲量)を検出するためのセンサを安価に構成することができ、量産製品に向いている。
ファイバセンサ88は、光量変化検出方式に限らず、FBG方式と称される光ファイバにグレーティングを形成した方式を用いてもよい。当該方式のファイバセンサ88は、上記検出部が複雑で高価であるが、1本の光ファイバに検出点を複数設けたり、高精度に曲げを検出したりすることができる。
ファイバセンサ88は、光量変化検出方式に限らず、FBG方式と称される光ファイバにグレーティングを形成した方式を用いてもよい。当該方式のファイバセンサ88は、上記検出部が複雑で高価であるが、1本の光ファイバに検出点を複数設けたり、高精度に曲げを検出したりすることができる。
湾曲形状を検出する為のセンサとしては、ファイバセンサ88を1つ以上用いてもよい。当該センサであれば、内視鏡12の挿入部20、特に湾曲部23における所望の範囲の湾曲形状を検出することができる。さらに、当該センサであれば、細径で湾曲部23に組み込み易くすることができ、かつ他の構成部材からの影響を受けにくいものとすることができる。
図7は被検体(患者)の管腔の入口(口腔部111)に挿入部センサ113を配置する例を示す。第1実施形態では、オペレータOPの操作によって挿入部センサ113が口部111に配置された上で、内視鏡12の挿入部20が被検体(患者)の体腔(管腔)内(胃腸部)に挿入される。挿入部センサ113は、体腔(管腔)に対する挿入部20の挿入量及び回転量を検出する。
第1実施形態においては、センサとして、操作量センサである各湾曲操作量検出部63a、63bと、形状センサであるファイバセンサ88と、挿入部センサ113とが設けられている。
第1実施形態においては、センサとして、操作量センサである各湾曲操作量検出部63a、63bと、形状センサであるファイバセンサ88と、挿入部センサ113とが設けられている。
湾曲形状演算部75は、ファイバセンサ88により検出される挿入部20の湾曲形状(湾曲量)と、挿入部センサ113により検出される体腔(管腔)内への挿入部20の挿入量及び回転量とに基づいて体腔(管腔)の入口を起点とする挿入部20の挿入長、回転量及び挿入部20の湾曲形状を求める。この結果、湾曲形状演算部75は、挿入部20の挿入長、回転量及び挿入部20の湾曲形状に基づいて体腔(管腔)内における挿入部20の形状・配置・先端位置・向きを求める。
湾曲形状演算部75は、各湾曲操作量検出部63a、63bにより検出される湾曲操作機構39の湾曲操作量と、ファイバセンサ88により検出される挿入部20の湾曲形状(湾曲量)とに基づいて湾曲部23の形状を推定する。
図8は挿入部20における湾曲部23の形状を検出する概念を示す。湾曲部23の先端部位が体腔(管腔)の内壁500に衝突すると、湾曲部23に力Fが加わる。この場合、湾曲操作量検出部63によって検出される湾曲操作機構39の湾曲操作量と、ファイバセンサ88によって検出される挿入部20の湾曲形状(湾曲量)との差分は、湾曲部23に掛かる力Fに応じた値となる。
図8は挿入部20における湾曲部23の形状を検出する概念を示す。湾曲部23の先端部位が体腔(管腔)の内壁500に衝突すると、湾曲部23に力Fが加わる。この場合、湾曲操作量検出部63によって検出される湾曲操作機構39の湾曲操作量と、ファイバセンサ88によって検出される挿入部20の湾曲形状(湾曲量)との差分は、湾曲部23に掛かる力Fに応じた値となる。
被検体挿入システム10の制御装置19は、図9に示すように第1情報生成部101と、第2情報演算部102と、記憶部17とを含む。第2情報演算部102は、湾曲操作量検出部63によって検出される湾曲操作機構39の湾曲操作量(ファイバセンサ88を示す点線88a)と、ファイバセンサ88によって検出される湾曲部23の湾曲形状(湾曲量:ファイバセンサ88の実線88b)との差分に基づいて力Fを算出する。
第2情報演算部102は、ファイバセンサ88の検出結果である湾曲部23の実際の湾曲量と、操作量センサとしての湾曲操作量検出部63によって検出された湾曲操作量との差分を算出し、当該差分に基づいて挿入部20が体腔(管腔)の内壁500に加わる力Fを算出する。
力Fの検出方法は一例である。検出対象の力によっては、湾曲操作量検出部63、ファイバセンサ88及び挿入部センサ113に限定されるものでなく、これらセンサの組み合わせも限定されるものでない。検出方法においても、上述した湾曲操作量検出部63と、ファイバセンサ88と、挿入部センサ113とを用いて方法に限定されるものでない。
各湾曲操作量検出部63a、63bにより検出される湾曲操作機構39の湾曲操作量と、ファイバセンサ88により検出される挿入部20の湾曲形状(湾曲量)と、挿入部センサ113により検出される挿入部20の挿入量及び回転量とは、これ以降、センサ値SVと総称する。
センサ値SVを加工(処理)して取得した情報は、第1情報Q1と称する。第1の情報Q1は、挿入部20の形状を示す情報、又は挿入部20と被検体との相対位置を示す情報を含む。
センサ値SVを加工(処理)して取得した情報は、第1情報Q1と称する。第1の情報Q1は、挿入部20の形状を示す情報、又は挿入部20と被検体との相対位置を示す情報を含む。
詳細に、挿入部20と被検体との相対位置を示す情報は、被検体に対する挿入部20の挿入量及び回転量のうち少なくとも一方を示す情報、又は挿入部20と被検体との接触状態を示す情報を含む。
具体的に第1情報Q1は、例えば以下のものが挙げられる。
すなわち、
(例1)挿入部20の形状を示す“第1の湾曲形状”、被検体(患者)の体腔(管腔)内(胃腸部)への挿入部20の挿入量を示す“挿入部挿入量”
(例2)挿入部20の回転(ねじり)量を示す“挿入部回転量”
(例3)挿入部20の湾曲部23の湾曲に係る操作量を示す“湾曲操作量”
(例4)管腔状の体腔に対する挿入部20の湾曲形状を示す“第2の湾曲形状”
(例5)挿入部20先端に掛かっている力Fを示す“挿入部印加力”
等である。
すなわち、
(例1)挿入部20の形状を示す“第1の湾曲形状”、被検体(患者)の体腔(管腔)内(胃腸部)への挿入部20の挿入量を示す“挿入部挿入量”
(例2)挿入部20の回転(ねじり)量を示す“挿入部回転量”
(例3)挿入部20の湾曲部23の湾曲に係る操作量を示す“湾曲操作量”
(例4)管腔状の体腔に対する挿入部20の湾曲形状を示す“第2の湾曲形状”
(例5)挿入部20先端に掛かっている力Fを示す“挿入部印加力”
等である。
“挿入部挿入量”、“挿入部回転量”及び“湾曲操作量”は、挿入部センサ113により検出される挿入部20の挿入量及び回転量と、各湾曲操作量検出部63a、63bにより検出される湾曲操作機構39の湾曲操作量とから直接的に得られる情報である。
一方、“第1の湾曲形状”、“第2の湾曲形状”及び“挿入部印加力”は、“挿入部挿入量”、“挿入部回転量”及び“湾曲操作量”を加工(処理)して得られる情報である。
“第1の湾曲形状”は、ファイバセンサ88により検出される挿入部20の湾曲形状(湾曲量)に基づいて挿入部20における所定の範囲の湾曲形状として算出される。
“第2の湾曲形状”は、“第1の湾曲形状”、“挿入部挿入量”及び“挿入部回転量”に基づいて算出される。
“挿入部印加力”は、“第1の湾曲形状”及び“湾曲操作量”に基づいて算出される。
なお、上述の第1情報Q1を得る為のセンサは、複数備えてもよい。第1の情報Q1を得る為のセンサは、必ずしも挿入部20に組み込まれている必要がない。
“第1の湾曲形状”は、ファイバセンサ88により検出される挿入部20の湾曲形状(湾曲量)に基づいて挿入部20における所定の範囲の湾曲形状として算出される。
“第2の湾曲形状”は、“第1の湾曲形状”、“挿入部挿入量”及び“挿入部回転量”に基づいて算出される。
“挿入部印加力”は、“第1の湾曲形状”及び“湾曲操作量”に基づいて算出される。
なお、上述の第1情報Q1を得る為のセンサは、複数備えてもよい。第1の情報Q1を得る為のセンサは、必ずしも挿入部20に組み込まれている必要がない。
図9は本第1実施形態に係る被検体挿入システム10の支援情報呈示処理に係る情報の流れを示すブロック図である。同図において例えば情報要求等の各種指示情報や各種初期設定データ等の流れは省略する。
被検体挿入システム10は、第1情報生成部101と、第2情報演算部102と、記憶部17とを含む。
第1情報生成部101は、第1情報Q1を算出するもので、各センサ101aと、センサ情報処理部101bとを含む。各センサ101aは、第1情報Q1の取得に係るセンサを含む。第1実施形態において各センサ101aは、湾曲操作量検出部63と、ファイバセンサ88と、挿入部センサ13とを含む。センサ情報処理部101bは、センサ101aによって取得したセンサ値SVを加工(処理)して第1情報Q1を算出する。
被検体挿入システム10は、第1情報生成部101と、第2情報演算部102と、記憶部17とを含む。
第1情報生成部101は、第1情報Q1を算出するもので、各センサ101aと、センサ情報処理部101bとを含む。各センサ101aは、第1情報Q1の取得に係るセンサを含む。第1実施形態において各センサ101aは、湾曲操作量検出部63と、ファイバセンサ88と、挿入部センサ13とを含む。センサ情報処理部101bは、センサ101aによって取得したセンサ値SVを加工(処理)して第1情報Q1を算出する。
換言すれば、第1情報生成部101は、体腔(管腔)内への挿入部20の挿入状態及び操作状態のうち少なくとも一方を示す第1情報Q1を生成する。第1情報生成部101は、光ファイバ83aに設けられたファイバセンサ88を含む。ファイバセンサ88は、挿入部20における一つ以上の部位の湾曲量を検出する。
第1情報生成部101に含まれるセンサ101aと、当該センサ101aにより収集された情報を処理するセンサ情報処理部101bとは、一体化してもよいし、別体に設けてもよい。
第1情報生成部101に含まれるセンサ101aと、当該センサ101aにより収集された情報を処理するセンサ情報処理部101bとは、一体化してもよいし、別体に設けてもよい。
第2情報演算部102は、第1情報生成部101により算出された第1情報Q1と、記憶部17に記憶されている第3情報Q3又は第4情報Q4とのうち少なくとも一方の情報とに基づいて第2情報Q2を算出する。第2情報Q2は、当該被検体挿入システム10の操作支援情報である。
次に、被検体挿入システム10による支援情報呈示処理について説明する。
挿入部センサ113が上記図7に示すように被検体(患者)の管腔の入口(口腔部111)に配置される。この状態で、内視鏡12の挿入部20が被検体(患者)の体腔(管腔)内(胃腸部)に挿入され、挿入部20による被検体(患者)の体腔(管腔)内(胃腸部)に対するセンシングが行われる。
挿入部センサ113が上記図7に示すように被検体(患者)の管腔の入口(口腔部111)に配置される。この状態で、内視鏡12の挿入部20が被検体(患者)の体腔(管腔)内(胃腸部)に挿入され、挿入部20による被検体(患者)の体腔(管腔)内(胃腸部)に対するセンシングが行われる。
第1情報生成部101の各センサ101aは、挿入部センサ113と、ファイバセンサ88と、湾曲操作量検出部63とを含む。挿入部センサ113は、体腔(管腔)に対する挿入部20の挿入量及び回転量を検出する。ファイバセンサ88は、挿入部20の湾曲形状(湾曲量)を検出する。各湾曲操作量検出部63a、63bは、湾曲操作機構39の湾曲操作量を検出する。
第1情報生成部101のセンサ情報処理部101bは、各センサ(挿入部センサ113、ファイバセンサ88、湾曲操作量検出部63)101aによって取得したセンサ値SVを加工(処理)して成る第1情報Q1を算出する。第1情報生成部101は、第1情報Q1を第2情報演算部102に出力する。
第1情報生成部101のセンサ情報処理部101bは、各センサ(挿入部センサ113、ファイバセンサ88、湾曲操作量検出部63)101aによって取得したセンサ値SVを加工(処理)して成る第1情報Q1を算出する。第1情報生成部101は、第1情報Q1を第2情報演算部102に出力する。
第1情報生成部101を全て挿入部20側に設ける場合、第1情報生成部101は、挿入部20に係る情報すなわちセンサ値SVを加工(処理)した上で、第1情報Q1を第2情報演算部102に送る。これにより、挿入部20に係る第1情報Q1を直接取得することができる上に、被検体挿入システム10の外部から接続する装置等の外部構成要素が不要になり、制御装置19側の負担が軽く済む。
第1情報生成部101のセンサ101aを挿入部20の外部に設ける場合は、挿入部20のサイズを小型化できるメリットがある。第1情報生成部101のセンサ情報処理部101bは、第2情報演算部102と同一の処理系に纏めて構成するので、高速で大量の情報処理を1つの構成要素で実現でき、センサ情報処理部101bを小型化できる。
第2情報演算部102は、第1情報生成部101から出力された第1情報Q1と、記憶部17から出力された第3情報Q3及び第4情報Q4とに基づいて、オペレータOPによる内視鏡12の操作を支援する情報である第2情報Q2を生成し、当該第2情報Q2を例えばモニタ等の出力部16に表示出力する。
第2情報Q2は、例えば、被検体に対する挿入部20の挿入に係る指示、又は挿入部20を用いた作業に係る操作指示を示す情報を含む。第2情報Q2は、挿入部20の先端部位を、被検体内の特定位置に位置させるために要する挿入部20のねじり及び/又は挿抜に係る操作指示を示す情報を含む。第2情報Q2は、挿入部20の先端部位を、被検体内の特定位置に位置させるために要する挿入部20の湾曲に係る操作指示を示す情報を含む。
第2情報Q2の内容に対して必要な入力情報と、当該第2情報Q2を生成するための演算内容とは、予め決められている。第2情報Q2の生成では、第1情報Q1を必ず用いる。一方、第2情報Q2の生成では、第3情報Q3と第4情報Q4との少なくとも一方を用いればよい。
第2情報演算部102は、第2情報Q2の生成において不足する情報が存在する場合、当該不足の情報を記憶部17から読み込んだり、オペレータOPの操作を受けて入力したり、他の外部機器(例えばデータベース等)から入力してもよい。
第2情報演算部102は、第2情報Q2の生成において不足する情報が存在する場合、当該不足の情報を記憶部17から読み込んだり、オペレータOPの操作を受けて入力したり、他の外部機器(例えばデータベース等)から入力してもよい。
第2情報演算部102によって生成される第2情報Q2は、1つとは限らず、複数の第2情報Q2を逐次又は同時に生成し、複数の第2情報Q2を同時に出力するようにしてもよい。
第2情報Q2をオペレータOPに提供する出力部16は、画像を表示するモニタ以外に、例えば音声、振動又は電気刺激等の様々な手段が挙げられる。第2情報Q2をオペレータOPに提示するためには、文字・図形・映像の他、例えばスピーカによる音声ガイドや警告音等を用いても良い。オペレータOPが作業に没頭していて第2情報Q2に気付きにくかったり、気付くまでに時間が掛かったりする場合には、オペレータOPが把持する内視鏡12の操作部30やオペレータOPの四肢等に振動デバイスや電気刺激デバイス等を配置し、オペレータOPの体に直接刺激を与えるようにしてもよい。直接刺激をオペレータOPに与えるデバイスと他の出力部16とを併用してもよい。
第2情報Q2は、出力部16から出力するのに限らず、記憶部17に保存したり、又は例えばデータベース等の外部機器に記憶するようにしてもよく、又は出力部16から出力すると共に記憶部17に保存したり、又は例えばデータベース等の外部機器に記憶するようにしてもよい。これにより、第2情報Q2を記憶部17又は外部機器から読み出して再度出力部16に表示することができる。これにより、オペレータOPによる第2情報Q2の確認が容易になる。
第2情報Q2としては、例えば以下のものが挙げられる。すなわち、
(例1)挿入部20の挿抜・ねじり、湾曲部23の湾曲操作等の“具体的な操作内容を示す情報”
(例2)挿入部20の挿入の向き、患部(病変部)等の目的の挿入場所Gでの観察・処置等の作業が可能な位置まで到達しているか否か等を示す“操作関連状況情報”
(例3)次に行う作業(観察や処置等)の指示等の“操作や作業の指針情報”
(例4)挿入部20の先端部位にとって作業を行うことが可能な範囲である作業可能範囲に対する挿入部20の先端部位の相対位置情報である“作業可能範囲到達状況”
である。
(例1)挿入部20の挿抜・ねじり、湾曲部23の湾曲操作等の“具体的な操作内容を示す情報”
(例2)挿入部20の挿入の向き、患部(病変部)等の目的の挿入場所Gでの観察・処置等の作業が可能な位置まで到達しているか否か等を示す“操作関連状況情報”
(例3)次に行う作業(観察や処置等)の指示等の“操作や作業の指針情報”
(例4)挿入部20の先端部位にとって作業を行うことが可能な範囲である作業可能範囲に対する挿入部20の先端部位の相対位置情報である“作業可能範囲到達状況”
である。
以下、第3情報Q3及び第4情報Q4について説明する。
第3情報Q3及び第4情報Q4は、記憶部17に記録されている。
第3情報Q3は、被検体の固有の情報である。第3情報Q3は、例えば、被検体の病歴を示す情報及び被検体の過去の診断結果を示す情報を含む。具体的に、第3情報Q3は、例えば、“患者過去の診察歴”、“観察・診断・治療情報”、“患部(病変部)の位置”、“病名/症状名”、“患部の大きさ”、“症状の程度/進行度”、“患者の人種”及び“体型・体質・健康診断結果”等を示す情報を含む。患部(病変部)の位置の情報は、当該位置を確認できるX線画像やCT画像であってもよい。
第3情報Q3及び第4情報Q4は、記憶部17に記録されている。
第3情報Q3は、被検体の固有の情報である。第3情報Q3は、例えば、被検体の病歴を示す情報及び被検体の過去の診断結果を示す情報を含む。具体的に、第3情報Q3は、例えば、“患者過去の診察歴”、“観察・診断・治療情報”、“患部(病変部)の位置”、“病名/症状名”、“患部の大きさ”、“症状の程度/進行度”、“患者の人種”及び“体型・体質・健康診断結果”等を示す情報を含む。患部(病変部)の位置の情報は、当該位置を確認できるX線画像やCT画像であってもよい。
第4情報Q4は、第3情報Q3に該当しない種々の事前情報を含む。第4情報Q4は、作業に係る方針を示す情報、作業に係る手順を示す情報、作業に係る器具の仕様を示す情報、作業に係る器具の性能を示す情報、又は作業に係る事前情報を含む。
具体的に、第4情報Q4は、例えば、“診断や治療などの作業の方針・手順の情報”や、“内視鏡システムの仕様等を示す情報”、“患部(病変部)への挿入ルート”、“観察/処置対象”、“取得すべき情報”、“診断すべきこと”、“処置内容・手順”、及び“挿入や観察/処置における注意点(傷つきやすい箇所、挿入/観察/処置に係る許容時間等)”等を示す情報を含む。
具体的に、第4情報Q4は、例えば、“診断や治療などの作業の方針・手順の情報”や、“内視鏡システムの仕様等を示す情報”、“患部(病変部)への挿入ルート”、“観察/処置対象”、“取得すべき情報”、“診断すべきこと”、“処置内容・手順”、及び“挿入や観察/処置における注意点(傷つきやすい箇所、挿入/観察/処置に係る許容時間等)”等を示す情報を含む。
次に、内視鏡12を用いた一連の作業における第2情報の内容例を具体的に説明する。
ここでは、内視鏡12を体腔(管腔)に挿入して患部又は病変部で観察・処置を行うことを目的とする一連の作業を例に説明する。
図10は体腔(管腔)Mに挿入した内視鏡12及び作業に係る部位を示す。図11は第2情報Q2の生成の流れを示す。Kは治療可能範囲を示す。
ここでは、内視鏡12を体腔(管腔)に挿入して患部又は病変部で観察・処置を行うことを目的とする一連の作業を例に説明する。
図10は体腔(管腔)Mに挿入した内視鏡12及び作業に係る部位を示す。図11は第2情報Q2の生成の流れを示す。Kは治療可能範囲を示す。
第1情報Q1は、体腔(管腔)M内における挿入部20の先端位置20aを示す情報を含む。
第3情報Q3は、患部又は病変部501の位置情報である作業対象位置情報を含む。
第4情報Q4は、患部又は病変部501に対する挿入や観察、処置の内容・手順等を示す情報を含む。
第3情報Q3は、患部又は病変部501の位置情報である作業対象位置情報を含む。
第4情報Q4は、患部又は病変部501に対する挿入や観察、処置の内容・手順等を示す情報を含む。
第2情報演算部102は、第1情報Q1、第3情報Q3及び第4情報Q4に基づいて挿入部20の先端位置20aと患部のある作業対象位置との相対位置情報である第2情報Q2、又は第2情報Q2に加工可能な中間情報を生成する。
内視鏡12を挿入するとき、第2情報演算部102は、図10及び図11に示すように、第1情報Q1と第3情報Q3とに基づいて第2情報Q2を生成する。第2情報Q2は、例えば挿入部20の先端位置20aから作業対象位置までの距離・道のり(経路に沿った長さ)・方向・経路等を含む。
内視鏡12を挿入するとき、第2情報演算部102は、図10及び図11に示すように、第1情報Q1と第3情報Q3とに基づいて第2情報Q2を生成する。第2情報Q2は、例えば挿入部20の先端位置20aから作業対象位置までの距離・道のり(経路に沿った長さ)・方向・経路等を含む。
具体的に図11に示すように、第1情報生成部101は、体腔(管腔)M内に第1の座標系を設定し、センサ値SVに対する演算を行って第1の座標系における挿入部20の先端位置20aの座標を求め、当該先端位置20aの座標を第1情報Q1として算出する。
第3情報Q3は、例えばカルテ等の情報Kから患部又は病変部501の位置情報である作業対象位置を含む情報として生成される。患部又は病変部501の作業対象位置は、挿入部20の先端部を挿入する場所Gの座標を示す。又、第3情報Q3は、患部又は病変部501を含む例えばCT画像上に第2の座標系を設定し、当該第2の座標系上において、患部又は病変部501の位置情報を作業対象位置として生成する。当該第3情報Q3は、記憶部17に予め格納される。
第3情報Q3は、例えばカルテ等の情報Kから患部又は病変部501の位置情報である作業対象位置を含む情報として生成される。患部又は病変部501の作業対象位置は、挿入部20の先端部を挿入する場所Gの座標を示す。又、第3情報Q3は、患部又は病変部501を含む例えばCT画像上に第2の座標系を設定し、当該第2の座標系上において、患部又は病変部501の位置情報を作業対象位置として生成する。当該第3情報Q3は、記憶部17に予め格納される。
次に、第2情報演算部102は、第1情報Q1である挿入部20の先端位置20aの座標と、第3情報Q3である作業対象位置の座標とに基づいて第2情報Q2を算出する。第1情報Q1の第1の座標系と第3情報Q3の第2の座標系とが一致していなければ、第2情報演算部102は、第1又は第2の座標系のいずれか一方又は両方の座標系の変換を行い、同一座標系上で第1情報Q1と第3情報Q3とを表す。
次に、挿入部20の挿入に係る第2情報Q2の算出方法の一例について説明する。
第2情報Q2は、例えば挿入部20の先端位置20aから作業対象位置(患部又は病変部501の位置情報)までの距離・道のり(経路に沿った長さ)・方向・経路等を示す情報を含む。
(例1)距離
距離は、2つの座標から求める。すなわち、座標の差分から求まるベクトルの長さが距離である。
(例2)道のり(経路に沿った長さ)
道のりは、予め経路が指定され、かつ挿入部20の先端位置20aと作業対象位置とが経路上にある場合、予め指定された経路に沿っての長さとして算出される。
第2情報Q2は、例えば挿入部20の先端位置20aから作業対象位置(患部又は病変部501の位置情報)までの距離・道のり(経路に沿った長さ)・方向・経路等を示す情報を含む。
(例1)距離
距離は、2つの座標から求める。すなわち、座標の差分から求まるベクトルの長さが距離である。
(例2)道のり(経路に沿った長さ)
道のりは、予め経路が指定され、かつ挿入部20の先端位置20aと作業対象位置とが経路上にある場合、予め指定された経路に沿っての長さとして算出される。
(例3)方向
方向は、2つの座標から求められる。方向は、挿入部20の先端位置の座標から作業対象位置の座標へのベクトルの向きとして算出する。
方向は、2つの座標から求められる。方向は、挿入部20の先端位置の座標から作業対象位置の座標へのベクトルの向きとして算出する。
(例4)経路
経路は、体腔(管腔)Mの形状が第3情報Q3としてCT画像から読み取られ、CT画像上において体腔(管腔)M内壁の接触しないように2つの座標間を結ぶことによって算出される。2つの座標間を結ぶ経路は、様々取り得るので、経路を求める演算では、計算が簡便であること、計算の時間が最短であること、体腔(管腔)の内壁(管腔)への接触が少ないこと等の条件を適宜加えて算出される。
経路は、体腔(管腔)Mの形状が第3情報Q3としてCT画像から読み取られ、CT画像上において体腔(管腔)M内壁の接触しないように2つの座標間を結ぶことによって算出される。2つの座標間を結ぶ経路は、様々取り得るので、経路を求める演算では、計算が簡便であること、計算の時間が最短であること、体腔(管腔)の内壁(管腔)への接触が少ないこと等の条件を適宜加えて算出される。
内視鏡12を用いた作業としては、例えば、映像等による被検体の観察や診断、処置具による生検や治療などの処置が挙げられる。このような内視鏡12を用いた作業では、第1情報Q1と第3情報Q3と第4情報Q4とを用いて生成される情報(作業ごとの所定の作業可能範囲への到達状況)が第2情報Q2となる。
図12は体腔に挿入した内視鏡12及び作業可能範囲への到達状況を示す。観察・診断の作業可能範囲503は、患部又は病変部501に対して設定される。第2情報Q2は、内視鏡12の各先端位置A~Cの作業可能範囲503に対する到達状況を示す。すなわち、患部又は病変部501に対して設定された作業可能範囲503に対して先端位置Aは、“逸脱”の状況を表す。先端位置Bは、“近接”の状況を表す。先端位置Cは、“到達”の状況を表す。
先端位置A→先端位置B、先端位置B→先端位置Cへの変化は、接近しつつある状況を表す。
先端位置C→先端位置B、先端位置B→先端位置Aへの変化は、逸脱しつつある状況を表す。
図11に示すセンサ値SVに基づいて算出する第1情報Q1である“挿入部20の各先端位置A、B、Cの座標”、及びカルテ等の情報Kに基づいて算出する第3情報Q3である“作業対象位置”を生成する方法や手順は、上述した通りである。
先端位置C→先端位置B、先端位置B→先端位置Aへの変化は、逸脱しつつある状況を表す。
図11に示すセンサ値SVに基づいて算出する第1情報Q1である“挿入部20の各先端位置A、B、Cの座標”、及びカルテ等の情報Kに基づいて算出する第3情報Q3である“作業対象位置”を生成する方法や手順は、上述した通りである。
図13は第4情報Q4を用いて第2情報Q2を生成する流れを示す。なお、図11と同一部分には同一符号を付してその詳しい説明は省略する。
“観察や処置等の作業方針・手順H”から第4情報Q4が抽出される。第4情報Q4は、作業内容と内視鏡12の挿入部20による作業可能範囲503とを含む。作業可能範囲503を示す情報が第4情報Q4から抽出されない場合、当該作業可能範囲503を示す情報は、オペレータOPのマニュアル操作によって入力したり、記憶部17から読み出したり、他の外部機器(例えばデータベース等)から入力して取得する。
“観察や処置等の作業方針・手順H”から第4情報Q4が抽出される。第4情報Q4は、作業内容と内視鏡12の挿入部20による作業可能範囲503とを含む。作業可能範囲503を示す情報が第4情報Q4から抽出されない場合、当該作業可能範囲503を示す情報は、オペレータOPのマニュアル操作によって入力したり、記憶部17から読み出したり、他の外部機器(例えばデータベース等)から入力して取得する。
第3情報Q3である“作業対象位置”と、第4情報Q4である“内視鏡12の挿入部20による作業可能範囲503”とから体腔M内に設けた座標系での作業可能範囲503が求められる。当該作業可能範囲503と挿入部20の先端位置20aの座標との関係から第2情報Q2である“作業可能範囲503への到達状況”が確認できる。
具体的な到達状況としては、例えば以下の例が挙げられる。
(例1)作業可能範囲503に到達するまでの“距離や道のり(経路の長さ)”
(例2)“作業可能範囲503への到達”と“作業可能範囲503外”との2つの情報
(例3)“作業可能範囲503への到達”、及び作業可能範囲503外を程度に応じて分類した“作業可能範囲503の近傍”、作業可能範囲503の外遠方等の情報(距離や道のりに基づいてレベル分けした情報)
である。
(例1)作業可能範囲503に到達するまでの“距離や道のり(経路の長さ)”
(例2)“作業可能範囲503への到達”と“作業可能範囲503外”との2つの情報
(例3)“作業可能範囲503への到達”、及び作業可能範囲503外を程度に応じて分類した“作業可能範囲503の近傍”、作業可能範囲503の外遠方等の情報(距離や道のりに基づいてレベル分けした情報)
である。
特定の作業可能範囲が不明又は想定していない場合には、患部や病変部501などの挿入部20の挿入の目的となる挿入場所Gと内視鏡12の先端位置20aとの位置関係を確認し、挿入部20の逸脱・接近・到達などの判断を行っても良い。
図14は体腔Mに挿入した内視鏡12及び作業可能範囲503への到達状況を示す。内視鏡12の各先端位置D~Fと、観察・診断の作業可能範囲503との関係は次の通りである。
先端位置Dは、“逸脱”を表す。先端位置Eは、“近接”を表す。先端位置Fは、“到達”の状況を表す。
先端位置D→先端位置E、先端位置E→先端位置Fへの変化は、“接近しつつある状況”を表す。
先端位置F→先端位置E、先端位置E→先端位置Dへの変化は、“逸脱しつつある状況”を表す。
上述の例では、状況の区分として、逸脱・接近・到達と3つに区分しているが、区分数は状況に応じて適宜好ましい数に設定してもよい。
図14は体腔Mに挿入した内視鏡12及び作業可能範囲503への到達状況を示す。内視鏡12の各先端位置D~Fと、観察・診断の作業可能範囲503との関係は次の通りである。
先端位置Dは、“逸脱”を表す。先端位置Eは、“近接”を表す。先端位置Fは、“到達”の状況を表す。
先端位置D→先端位置E、先端位置E→先端位置Fへの変化は、“接近しつつある状況”を表す。
先端位置F→先端位置E、先端位置E→先端位置Dへの変化は、“逸脱しつつある状況”を表す。
上述の例では、状況の区分として、逸脱・接近・到達と3つに区分しているが、区分数は状況に応じて適宜好ましい数に設定してもよい。
図15は第2情報Q2の生成の流れを示す。同図では、上記図11と同一部分には同一符号を付してその詳しい説明は省略する。第2情報Q2は、作業可能範囲503への到達までの“距離や道のり(経路の長さ)の時間的な変化”と、“到達・近接・逸脱状態の変化の情報”とを含んでもよい。
以上説明したように、作業毎に作業可能範囲503への到達状況やその状況変化を第2情報Q2としてオペレータOPに提示するので、作業の効率や確実性を増すことができる。なお、作業可能範囲503に代えて挿入部20を被検体E内に挿入して位置させる目的位置、又は目的位置に至るまでに経由する経由位置への到達状況やその状況変化を第2情報Q2としてオペレータOPに提示してもよい。
すなわち、第2情報Q2は、挿入部20を被検体内に挿入して位置させる目的位置、又は目的位置に至るまでに経由する経由位置を示す作業対象位置情報を含む。
第2情報演算部102は、作業対象位置情報と位置情報とに基づいて目的位置又は経由位置に対する挿入部20の近接状態、所定範囲到達、又は離脱状態に関する情報を第2情報Q2として算出する。具体的に第2情報演算部102は、目的位置又は経由位置に対する挿入部20の先端部位の位置の変化を示す情報を第2情報Q2として算出する。
第2情報演算部102は、作業対象位置情報と位置情報とに基づいて目的位置又は経由位置に対する挿入部20の近接状態、所定範囲到達、又は離脱状態に関する情報を第2情報Q2として算出する。具体的に第2情報演算部102は、目的位置又は経由位置に対する挿入部20の先端部位の位置の変化を示す情報を第2情報Q2として算出する。
図16は内視鏡12の具体的な操作例を示す。内視鏡12の具体的な操作は、次の通りである。矢印A1は、挿入部20の挿抜操作の方向を示す。矢印A2は、ねじり操作の方向を示す。矢印A3は、湾曲部23の湾曲操作等の方向を示す。
挿抜操作は、体腔(管腔)Mに対して挿入部20を挿脱する操作である。ねじり操作は、挿入部20の長軸周りの回転に係る操作である。挿抜操作及びねじり操作は、挿入部20を主にオペレータOP自身のマニュアル操作により行う。湾曲部23の湾曲操作は、例えば操作ノブ37LR,38UD等によって挿入部20の先端側を曲げることで行う操作である。
挿抜操作は、体腔(管腔)Mに対して挿入部20を挿脱する操作である。ねじり操作は、挿入部20の長軸周りの回転に係る操作である。挿抜操作及びねじり操作は、挿入部20を主にオペレータOP自身のマニュアル操作により行う。湾曲部23の湾曲操作は、例えば操作ノブ37LR,38UD等によって挿入部20の先端側を曲げることで行う操作である。
第2情報Q2には操作指示が含まれる。操作指示は、例えば挿入部20の挿抜操作・ねじり操作の操作指示、及び湾曲部23の湾曲操作の操作指示等を含む。湾曲部23の湾曲操作の操作指示は、湾曲部23の湾曲操作が可能な場合である。
具体的に第2情報Q2としての操作指示は、例えば以下の情報を含む。
(例1)挿入部20の先端曲げ(湾曲部23の湾曲操作)・ねじり操作・挿抜操作における方向及び操作量を示す情報
(例2)挿入部20の先端曲げ(湾曲部23の湾曲操作)・ねじり操作・挿抜操作の際に加える力の制限を示す情報
(例3)挿入部20の先端曲げ(湾曲部23の湾曲操作)・ねじり操作・挿抜操作における操作スピードの制限を示す情報
である。
具体的に第2情報Q2としての操作指示は、例えば以下の情報を含む。
(例1)挿入部20の先端曲げ(湾曲部23の湾曲操作)・ねじり操作・挿抜操作における方向及び操作量を示す情報
(例2)挿入部20の先端曲げ(湾曲部23の湾曲操作)・ねじり操作・挿抜操作の際に加える力の制限を示す情報
(例3)挿入部20の先端曲げ(湾曲部23の湾曲操作)・ねじり操作・挿抜操作における操作スピードの制限を示す情報
である。
次に、第2情報Q2を得るための一連の処理について説明する。なお、ここで説明する生成方法はあくまで例示であり、全ての生成方法を示しているわけではない。
図17及び図18は第2情報Q2の生成の流れを示す。第2情報Q2の生成では、挿入部20を被検体に挿入したときの先端曲げ操作・ねじり操作・挿抜操作の方向及び操作量を示す情報の生成方法を例として説明する。各操作に係る操作量は、座標系における絶対値に対応して一意的に操作状況が決定される。
図17及び図18は第2情報Q2の生成の流れを示す。第2情報Q2の生成では、挿入部20を被検体に挿入したときの先端曲げ操作・ねじり操作・挿抜操作の方向及び操作量を示す情報の生成方法を例として説明する。各操作に係る操作量は、座標系における絶対値に対応して一意的に操作状況が決定される。
(生成方法例1)
第2情報Q2の生成に当たり、第1情報生成部101は、図17に示すように、センサ値SVを読み込む。第1情報生成部101は、センサ値SVに基づき、第1情報Q1として、挿入部20の現在の挿入状態での操作量と、挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量とを算出する。
一方、第2情報生成部102は、第3情報Q3としてカルテ等の情報Kを記憶部17から読み込む。第3情報Q3は、例えばカルテ等の情報Kから患部又は病変部501の位置情報である作業対象位置として生成される。第2情報生成部102は、第3情報Q3に基づいて挿入部20を目標位置である患部又は病変部501に到達するための座標を算出し、かつ挿入部20を患部又は病変部501に到達させるための操作量を算出する。挿入部20の操作量は、挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量である。
第2情報Q2の生成に当たり、第1情報生成部101は、図17に示すように、センサ値SVを読み込む。第1情報生成部101は、センサ値SVに基づき、第1情報Q1として、挿入部20の現在の挿入状態での操作量と、挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量とを算出する。
一方、第2情報生成部102は、第3情報Q3としてカルテ等の情報Kを記憶部17から読み込む。第3情報Q3は、例えばカルテ等の情報Kから患部又は病変部501の位置情報である作業対象位置として生成される。第2情報生成部102は、第3情報Q3に基づいて挿入部20を目標位置である患部又は病変部501に到達するための座標を算出し、かつ挿入部20を患部又は病変部501に到達させるための操作量を算出する。挿入部20の操作量は、挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量である。
第2情報生成部102は、センサ値SVに基づく挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量と、カルテ等の情報Kに基づく挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量との差分を算出する。
第2情報生成部102は、当該差分に基づいてどういう操作を行えば狙いとする目標位置での操作状態になるのか示す第2情報Q2を算出する。
第2情報Q2の生成では、挿入部20の操作方向と操作量とが算出される。第2情報Q2は、操作方向である挿抜・ねじり・湾曲操作と、操作すべき量の挿抜・ねじり・湾曲操作とを含む。第2情報Q2の生成では、差分が操作すべき量であり、差分の符号が操作方向を示す。当該第2情報Q2の生成は、目標位置に至るまでの間に挿入部20の動作の障害(例えば管腔の壁等)が無い場合に有効である。
第2情報生成部102は、当該差分に基づいてどういう操作を行えば狙いとする目標位置での操作状態になるのか示す第2情報Q2を算出する。
第2情報Q2の生成では、挿入部20の操作方向と操作量とが算出される。第2情報Q2は、操作方向である挿抜・ねじり・湾曲操作と、操作すべき量の挿抜・ねじり・湾曲操作とを含む。第2情報Q2の生成では、差分が操作すべき量であり、差分の符号が操作方向を示す。当該第2情報Q2の生成は、目標位置に至るまでの間に挿入部20の動作の障害(例えば管腔の壁等)が無い場合に有効である。
(生成方法例2)
生成方法例2では、上記生成方法例1の第2情報Q2の生成と相違するところについて図18を参照して説明する。
第2情報Q2の生成に当たり、第2情報生成部102は、第3情報Q3としてのカルテ等の情報Kに基づき、挿入部20の現在の挿入位置から目標位置(狙いとする作業対象位置)への方向へ僅かに移動した位置での座標を算出する。
第2情報生成部102は、挿入部20の現在の挿入位置から目標位置(狙いとする作業対象位置)への方向へ僅かに移動した位置での操作量を算出する。挿入部20の操作量は、挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量である。
生成方法例2では、上記生成方法例1の第2情報Q2の生成と相違するところについて図18を参照して説明する。
第2情報Q2の生成に当たり、第2情報生成部102は、第3情報Q3としてのカルテ等の情報Kに基づき、挿入部20の現在の挿入位置から目標位置(狙いとする作業対象位置)への方向へ僅かに移動した位置での座標を算出する。
第2情報生成部102は、挿入部20の現在の挿入位置から目標位置(狙いとする作業対象位置)への方向へ僅かに移動した位置での操作量を算出する。挿入部20の操作量は、挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量である。
第2情報生成部102は、センサ値SVに基づく挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量(第1情報Q1)と、第3情報Q3としてのカルテ等の情報Kに基づく挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量との差分を算出する。当該差分は、微小な移動を行うために操作すべき量である。
第2情報生成部102は、当該差分に基づいてどういう操作を行えば狙いとする目標位置での操作状態になるのか示す第2情報Q2を算出する。第2情報Q2は、操作方向である挿抜・ねじり・湾曲操作を含む。第2情報Q2の生成では、差分の符号から操作方向が求められる。
第2情報生成部102は、当該差分に基づいてどういう操作を行えば狙いとする目標位置での操作状態になるのか示す第2情報Q2を算出する。第2情報Q2は、操作方向である挿抜・ねじり・湾曲操作を含む。第2情報Q2の生成では、差分の符号から操作方向が求められる。
(生成方法例3)
第2情報Q2の生成では、図19に示すように、目標位置(狙いとする作業対象位置)までの経路が分かっている場合、当該経路上において現在位置よりも目標位置に僅かに近い位置での操作状態を算出し、当該操作状態と現在の操作状態との差分を求め、現時点において、当該差分に基づいて先ずどういう操作を行えばよいかを算出する。第2情報Q2の生成において、差分は微小な移動を行うための操作量である。第2情報Q2の生成では、差分の符号から操作方向が求められる。
以上説明した3つの生成方法例1乃至3では、目標位置へ挿入部20の先端位置を移動させることを想定したが、第2情報Q2の生成としては、他にも、特定の作業が可能となる作業可能範囲を目標として操作量及び操作方向を算出してもよい。
第2情報Q2の生成では、図19に示すように、目標位置(狙いとする作業対象位置)までの経路が分かっている場合、当該経路上において現在位置よりも目標位置に僅かに近い位置での操作状態を算出し、当該操作状態と現在の操作状態との差分を求め、現時点において、当該差分に基づいて先ずどういう操作を行えばよいかを算出する。第2情報Q2の生成において、差分は微小な移動を行うための操作量である。第2情報Q2の生成では、差分の符号から操作方向が求められる。
以上説明した3つの生成方法例1乃至3では、目標位置へ挿入部20の先端位置を移動させることを想定したが、第2情報Q2の生成としては、他にも、特定の作業が可能となる作業可能範囲を目標として操作量及び操作方向を算出してもよい。
図19は第2情報Q2の生成の流れを示す。第2情報Q2の生成の流れでは、挿入部20の挿入時における当該挿入部20の先端曲げ・ねじり・挿抜の際に加える力の制限を示す情報の生成方法を例に説明する。
センサ値SVに基づいて挿入部20に加わる力が算出される。本実施形態では、上述した方法によって挿入部20の先端位置20aの曲げによって加わる力F(図8)が算出される。する。すなわち、第2情報演算部102は、ファイバセンサ88により検出される湾曲部23の実際の湾曲量と、湾曲操作量検出部63によって検出される湾曲操作量との差分を算出し、当該差分に基づいて挿入部20が体腔(管腔)の内壁500に加わる力Fを算出する。
センサ値SVに基づいて挿入部20に加わる力が算出される。本実施形態では、上述した方法によって挿入部20の先端位置20aの曲げによって加わる力F(図8)が算出される。する。すなわち、第2情報演算部102は、ファイバセンサ88により検出される湾曲部23の実際の湾曲量と、湾曲操作量検出部63によって検出される湾曲操作量との差分を算出し、当該差分に基づいて挿入部20が体腔(管腔)の内壁500に加わる力Fを算出する。
ねじり操作や挿抜操作によって体腔(管腔)Mの内壁に加わる力(印加力)Fが算出される。当該力(印加力)Fの算出では、体腔(管腔)M内において摩擦が発生する場所及び当該摩擦の抵抗を推定する必要が生じる場合ある。実際に加わる力Fやトルクに対するねじり操作や挿抜操作の変化量がセンサ値SVに基づいて算出される。すなわち、第1情報生成部101は、センサ値SVに基づく挿入部20の先端位置20aにおける挿抜・ねじり・湾曲の各操作量(第1情報Q1)を算出する。当該第1情報Q1が算出されると、当該第1情報Q1に基づいて摩擦抵抗と摩擦力とが算出される。
一方、体腔(管腔)Mの壁に加わる力Fに対して印加力Fの値(上限値)が取得される。印加力Fの値(上限値)は、一時的な負荷(痛み等)やダメージが生じうる値である。印加力の値(上限値)は、第4情報Q4から抽出又は演算して取得される。第4情報Q4は、被検体の負担の観点から設定されたもので、挿入部20が被検体に印加する力Fの上限値を示す情報を含む。
印加力Fの値(上限値)が取得されると、第2情報演算部102は、当該印加力Fの値(上限値)と体腔(管腔)Mの内壁に加わる力(印加力)Fとを比較する。この比較の結果、第2情報演算部102は、力(印加力)Fが印加力Fの値(上限値)に対する所定の割合内に収まっているか否か、又は所定の基準内に収まっているか否かという状況を第2情報Q2として算出する。第2情報Q2は、印加力Fの上限値と、挿入部20が実際に被検体に印加している力Fとの関係を示す情報を含む。
図20は第2情報Q2の生成の流れを示す。挿入部20の挿入時における先端部の曲げ・ねじり・挿抜のスピードの制限を示す情報の生成方法を例に説明する。
第1情報演算部101は、センサ値SVに基づいて挿入部20の速度、例えば挿入部20の先端部の速度を算出する。具体的に、挿入部20の速度は、挿入部20の先端部の位置の算出を行った後、当該挿入部20の先端部の位置について時間微分を行うことにより算出される。
第1情報演算部101は、センサ値SVに基づいて挿入部20の速度、例えば挿入部20の先端部の速度を算出する。具体的に、挿入部20の速度は、挿入部20の先端部の位置の算出を行った後、当該挿入部20の先端部の位置について時間微分を行うことにより算出される。
制御装置19は、挿入部20の速度に対する上限値を第4情報Q4として設定する。第4情報Q4は、観察や処置などの作業の遂行に問題が生じるとき、挿入部20が体腔(管腔)Mの内壁に衝突したとき等の被検体に対して一時的な負荷(痛み等)やダメージを与えてしまうような速度の上限値である。
第2情報演算部102は、第1情報Q1である挿入部20の速度の大きさと、第4情報Q4である挿入部20の速度の上限値とを比較し、挿入部20の速度について限界(上限値)に対する割合、又は挿入部20の速度が所定の基準内に収まっているか否かの状況を第2情報Q2として算出する。
図21は第2情報Q2の生成の流れを示す。第2情報Q2の生成の流れは、上記図20に示す第2情報Q2の生成方法を操作量、速度、印加力の3つについて適用した例である。
本例において操作量、速度、印加力の上限値は、被検体に対して一時的又は恒久的にダメージを与えないように、又は所望の作業が安定・確実にできるようにするために設定される。換言すれば、操作量、速度、印加力の上限値は、作業の不確実性を無くすために設定される。
本例において操作量、速度、印加力の上限値は、被検体に対して一時的又は恒久的にダメージを与えないように、又は所望の作業が安定・確実にできるようにするために設定される。換言すれば、操作量、速度、印加力の上限値は、作業の不確実性を無くすために設定される。
本例では操作量・速度・印加力について上限値を設定しているが、例えば操作、動き、又は印加力の向きを指定する場合には、下限値を更に設定して、下限値から上限値までの間にあるか否かを判断するなどしてもよい。
特定の作業において一定以上の操作、動き又は印加力が要求される場合には、下限値のみを設定して下限値以上であることを判断したり、下限値及び上限値を設定して下限値から上限値までの間にあるか否かを判断するようにしてもよい。
特定の作業において一定以上の操作、動き又は印加力が要求される場合には、下限値のみを設定して下限値以上であることを判断したり、下限値及び上限値を設定して下限値から上限値までの間にあるか否かを判断するようにしてもよい。
なお、第2情報Q2として、更に、限界(上限値、下限値)に対する割合や所定基準内であるか否かを判断し、当該判断結果に基づいて、適宜、警告情報を生成するようにしてもよい。警告情報を生成する対象としては、湾曲操作、ねじり操作、又は挿抜操作のいずれかについての操作量、速度、並びに挿入部20が体腔に印加する力などを挙げることができる。これらの値の算出方法については、上述した方法を用いればよい。
次に、本システム10による第2情報Q2の出力に係る一連の処理について図22に示すフローチャートを参照して説明する。
本システム10が起動操作されると、制御装置19は、内視鏡12を起動し、第2情報Q2の生成及び出力を行うためのプログラム(アプリケーション)を起動すると共に、各センサ101a(湾曲操作量検出部63、ファイバセンサ88、挿入部センサ13)を起動して第1情報Q1を取得するための初期設定を行う(ステップS1)。換言すれば、ステップS1において、制御装置19は、第2情報Q2を得るためのプログラムを起動し、内視鏡12の初期設定を行い、第2情報Q2の生成に必要な情報を読み込む。同ステップS1において、制御装置19は、第1情報生成部101の起動と、第2情報Q2を表示出力するための出力部16の起動を行う。
本システム10が起動操作されると、制御装置19は、内視鏡12を起動し、第2情報Q2の生成及び出力を行うためのプログラム(アプリケーション)を起動すると共に、各センサ101a(湾曲操作量検出部63、ファイバセンサ88、挿入部センサ13)を起動して第1情報Q1を取得するための初期設定を行う(ステップS1)。換言すれば、ステップS1において、制御装置19は、第2情報Q2を得るためのプログラムを起動し、内視鏡12の初期設定を行い、第2情報Q2の生成に必要な情報を読み込む。同ステップS1において、制御装置19は、第1情報生成部101の起動と、第2情報Q2を表示出力するための出力部16の起動を行う。
第2情報演算部102は、第1情報生成部101に第1情報Q1を生成させ、当該第1情報Q1を読み出す(ステップS2)。
第2情報演算部102は、第2情報Q2の生成に第3情報Q3が必要であるか否かを判断する(ステップS3)。この判断の結果、第3情報Q3が必要であれば(YES)、第2情報演算部102は、第3情報Q3を記憶部17から読み出す(ステップS4)。第3情報Q3が必要でなければ(NO)、第2情報演算部102は、ステップS7へ移行する。
第2情報演算部102は、第2情報Q2の生成に第3情報Q3が必要であるか否かを判断する(ステップS3)。この判断の結果、第3情報Q3が必要であれば(YES)、第2情報演算部102は、第3情報Q3を記憶部17から読み出す(ステップS4)。第3情報Q3が必要でなければ(NO)、第2情報演算部102は、ステップS7へ移行する。
さらに、第2情報演算部102は、第2情報Q2の生成に第4情報Q4が必要であるか否かを判断する(ステップS5)。この判断の結果、第4情報Q4が必要であれば(YES)、第2情報演算部102は、第4情報Q4を記憶部17から読み出す(ステップS6)。第4情報Q4が必要でなければ(NO)、第2情報演算部102は、ステップS7へ移行する。
ステップS2乃至ステップS6のうち必要な処理が終了すると、第2情報演算部102は、第2情報Q2の生成を行う(ステップS7)。具体的な第2情報Q2の生成方法は、上述した通りである。
第2情報演算部102は、第2情報Q2を生成すると、当該第2情報Q2を出力部16に出力する(ステップS8)。
第2情報演算部102は、第2情報Q2の生成を終了するか否かを判断する(ステップS9)。この判断の結果、第2情報Q2の生成を終了しなければ、第2情報演算部102は、ステップS3,S5,S10に分岐する。第2情報Q2の生成を終了するのであれば、第2情報演算部102は、当該フローチャートの処理を終了する。
第2情報演算部102は、第2情報Q2の生成を終了するか否かを判断する(ステップS9)。この判断の結果、第2情報Q2の生成を終了しなければ、第2情報演算部102は、ステップS3,S5,S10に分岐する。第2情報Q2の生成を終了するのであれば、第2情報演算部102は、当該フローチャートの処理を終了する。
上記ステップS10において、第2情報演算部102は、第2情報Q2を生成するのに新たな第1情報Q1が必要であるか否かを判断する。この判断の結果、新たな第1情報Q1が必要であれば、第2情報演算部102は、上記ステップS2に移行する。新たな第1情報Q1が必要でなければ、第2情報演算部102は、上記ステップS7に移行する。
第2情報演算部102は、第2情報Q2の生成において、第3情報Q3及び第4情報Q4のうち少なくとも一方の情報を必ず読み込む。
第2情報演算部102は、ステップS2とステップS3とを並行処理してもよい。第2情報演算部102は、ステップS4と各ステップS5,S6とを並行処理してもよい。
第1情報生成部101による第1情報Q1の生成は、ステップS2における第1情報Q1の読み出しとは独立し、別途繰り返し行うようにしてもよい。
第2情報演算部102は、ステップS2とステップS3とを並行処理してもよい。第2情報演算部102は、ステップS4と各ステップS5,S6とを並行処理してもよい。
第1情報生成部101による第1情報Q1の生成は、ステップS2における第1情報Q1の読み出しとは独立し、別途繰り返し行うようにしてもよい。
以上説明したように、本第1実施形態によれば、例えば内視鏡システム等に適用した被検体挿入システム10において、挿入部20に係る情報として、センサ情報のみならず、オペレータOPにとって有益な支援情報を適切なタイミングで提供することが可能である。
第2情報演算部102による第2情報Q2の算出処理としては、具体的に、例えば下記の処理を挙げることができる。
第1情報Q1としては、被検体と挿入部20の先端部位との相対位置を示す位置情報を用いる。第3情報Q3としては、被検体内における作業の対象位置を示す作業対象位置情報を用いる。
第2情報演算部102は、位置情報と作業対象位置情報とに基づいて挿入部20の先端部位と作業対象位置との相対的な位置関係を示す作業対象相対位置情報を第2情報Q2として算出する。
第1情報Q1としては、被検体と挿入部20の先端部位との相対位置を示す位置情報を用いる。第3情報Q3としては、被検体内における作業の対象位置を示す作業対象位置情報を用いる。
第2情報演算部102は、位置情報と作業対象位置情報とに基づいて挿入部20の先端部位と作業対象位置との相対的な位置関係を示す作業対象相対位置情報を第2情報Q2として算出する。
別の例として、第1情報Q1は、被検体と挿入部20の先端部位との相対位置を示す位置情報を用いる。第3情報Q3としては、被検体内における作業の対象位置を示す作業対象位置情報を用いる。
第2情報演算部102は、位置情報と作業対象位置情報とに基づいて挿入部20の先端部位と作業対象位置との相対的な位置関係を示す作業対象相対位置情報を算出する。第2情報演算部102は、当該作業対象相対位置情報に基いて第2情報Q2の演算に利用する第3情報Q3及び第4情報Q4を選択し、かつ第2情報Q2の算出に利用する演算を設定する。
第2情報演算部102は、位置情報と作業対象位置情報とに基づいて挿入部20の先端部位と作業対象位置との相対的な位置関係を示す作業対象相対位置情報を算出する。第2情報演算部102は、当該作業対象相対位置情報に基いて第2情報Q2の演算に利用する第3情報Q3及び第4情報Q4を選択し、かつ第2情報Q2の算出に利用する演算を設定する。
以上、第1実施形態に基づいて本発明を説明したが、本発明は上述した第1実施形態に限定されるものではなく、本発明の要旨の範囲内で、例えば次のように種々の変形及び応用が可能なことは勿論である。
[第2実施形態]
次に、本発明の第2実施形態に係る被検体挿入システムについて説明する。本第2実施形態では、説明の重複を避ける為、上記第1実施形態に係る被検体挿入システム10との相違点を説明し、重複の説明を省略する。同一の部材には同一の符号を付し、その説明は省略する。
次に、本発明の第2実施形態に係る被検体挿入システムについて説明する。本第2実施形態では、説明の重複を避ける為、上記第1実施形態に係る被検体挿入システム10との相違点を説明し、重複の説明を省略する。同一の部材には同一の符号を付し、その説明は省略する。
図23は本発明の第2実施形態に係る被検体挿入システム10の一構成例を示す。本被検体挿入システム10は、上記第1実施形態に係る被検体挿入システム10に加えて情報入力部105を含む。
本被検体挿入システム10は、情報入力部105から入力された第5情報Q5及び第6情報Q6に基いて記憶部17に格納されている第3情報Q3及び第4情報Q4を適宜更新可能である。
本被検体挿入システム10は、情報入力部105から入力された第5情報Q5及び第6情報Q6に基いて記憶部17に格納されている第3情報Q3及び第4情報Q4を適宜更新可能である。
情報入力部105は、オペレータOPによる作業(例えば挿入操作等)中に、新たに得られた診断・治療結果に基づく第5情報Q5、及び追加・修正された作業(診断・治療)の方針・手順を示す第6情報Q5を逐次入力する。
換言すれば、情報入力部105は、作業が開始された後に、被検体に係る新たな第5情報Q5が入力される(第5情報入力部)。情報入力部105は、作業が開始された後に、作業に係る新たな情報である第6情報Q6が入力される(第6情報入力部)。
情報入力部105への第5情報Q5又は第6情報Q6の入力は、オペレータOPが直接入力するとしても良いし、第5情報/第6情報を有する内部/外部の機器やデータベース等から自動で取り込んでもよいし、オペレータOPからの情報入力トリガに基づいて取り込んでもよい。
情報入力部105への第5情報Q5又は第6情報Q6の入力は、オペレータOPが直接入力するとしても良いし、第5情報/第6情報を有する内部/外部の機器やデータベース等から自動で取り込んでもよいし、オペレータOPからの情報入力トリガに基づいて取り込んでもよい。
情報入力部105に入力された第5情報Q5は、記憶部17に送られ、予め記憶部17に記憶されている診断・治療結果を示す第3情報Q3に追記される。
第2情報演算部102は、作業中に第5情報Q5に基づいて更新された第3情報Q3を演算に用いて第2情報Q2を生成する。その結果、作業中に得られた観察・処置に基づく新しい情報を反映した第2情報Q2が提供できる。
第2情報演算部102は、作業中に第5情報Q5に基づいて更新された第3情報Q3を演算に用いて第2情報Q2を生成する。その結果、作業中に得られた観察・処置に基づく新しい情報を反映した第2情報Q2が提供できる。
情報入力部105に入力された第6情報Q6は、記憶部17に送られ、予め記憶部17に記憶されている作業(診断・治療)の方針・手順を示す第4情報Q4に追記される。
第2情報演算部102は、作業中に第6情報Q6に基づいて更新された第4情報Q4を演算に用いて第2情報Q2を生成する。その結果、作業中に定めた新しい方針・手順の情報を反映した第2情報Q2が提供できる。
第2情報演算部102は、作業中に第6情報Q6に基づいて更新された第4情報Q4を演算に用いて第2情報Q2を生成する。その結果、作業中に定めた新しい方針・手順の情報を反映した第2情報Q2が提供できる。
被検体挿入システム10は、第2情報Q2を、第1情報Q1、第3情報Q3及び第4情報Q4に関連付けて記憶部17に記憶する。図23では記憶部17中に“第2情報+他情報リンクデータ”と記載して、第2情報Q2の第1情報Q1、第3情報Q3及び第4情報Q4に対する関連付けを示す。
具体的に、記憶部17には、例えば、個々の第2情報Q2に対応する他の情報を組み合わせて記憶部17に保存すればよい。記憶部17には、第1情報Q1から第4情報Q4までの各情報を分類して保存し、個々の第2情報Q2毎にそれらと組みになる各情報のリンク先を管理可能に保存してもよい。
具体的に、記憶部17には、例えば、個々の第2情報Q2に対応する他の情報を組み合わせて記憶部17に保存すればよい。記憶部17には、第1情報Q1から第4情報Q4までの各情報を分類して保存し、個々の第2情報Q2毎にそれらと組みになる各情報のリンク先を管理可能に保存してもよい。
このように第2情報Q2を第1情報Q1から第4情報Q4までの各情報と適宜関連付けて保存するので、どのような経緯で第2情報Q2が生成されたのかを追跡することができる。これにより、挿入・作業時の状況やどのような第2情報Q2をどのようなタイミングで提供したのかを出力部16等を介して再現したり、分析したりすることが可能になる。第2情報Q2と各情報とを関連付けた情報を、他のデータベースなどへ提供することも可能である。
記憶部17には、第2情報演算部102によって算出された第2情報Q2を、第3情報Q3及び/又は第5情報Q5、並びに第4情報Q4及び/又は第6情報Q6と関連付けて記憶してもよい。
記憶部17には、第2情報演算部102によって算出された第2情報Q2を、第3情報Q3及び/又は第5情報Q5、並びに第4情報Q4及び/又は第6情報Q6と関連付けて記憶してもよい。
以上説明したように、本第2実施形態によれば、上記第1実施形態に係る被検体挿入システム10と同様の効果を奏する上に、第3情報Q3及び第4情報Q4を随時更新していくので、診断・治療結果や作業(診断・治療等)の方針・手順を更新することができ、結果として、電子カルテとしての基本機能を持たせることができる。
[第3実施形態]
次に、本発明の第3実施形態に係る被検体挿入システムについて説明する。説明の重複を避ける為、上記第1実施形態に係る被検体挿入システム10との相違点を説明し、重複の説明を省略する。また、同一の部材には同一の符号を付し、その説明を省略する。
次に、本発明の第3実施形態に係る被検体挿入システムについて説明する。説明の重複を避ける為、上記第1実施形態に係る被検体挿入システム10との相違点を説明し、重複の説明を省略する。また、同一の部材には同一の符号を付し、その説明を省略する。
本第3実施形態に係る被検体挿入システム10には、第2情報Q2に関連した切替機能が付加されている。
図24は本発明の第3実施形態に係る被検体挿入システムの一構成例を示す。被検体挿入システム10は、上記第1実施形態に係る被検体挿入システム10に加えて設定切替情報入力部106と、第2情報Q2に関連した切替に係る制御を行う制御部112とを含む。第2情報演算部102と制御部112とは、その処理内容に関連性があるので、処理の高速化やコンパクト化のために一体化して設けてもよい。
設定切替情報入力部106には、第2情報演算部102による第2情報Q2の算出に係る設定を示す設定情報が入力される。
制御部112は、入力された設定情報に基づいて第2情報演算部102による第2情報Q2の算出に要する情報の組合せの選択及び/又は切替に係る制御を行う。
図25は制御部112による第2情報Q2に係る切替制御の概念を示す。
制御部112は、設定切替情報入力部106から入力される設定情報に従って生成する第2情報Q2の選択・切替と、第2情報Q2の生成に必要な入力情報の選択・切替と、出力部16による出力方法の選択・切替と、第2情報Q2の生成のための最適な演算アルゴリズムの選択・切替とを行う。
制御部112は、入力された設定情報に基づいて第2情報演算部102による第2情報Q2の算出に要する情報の組合せの選択及び/又は切替に係る制御を行う。
図25は制御部112による第2情報Q2に係る切替制御の概念を示す。
制御部112は、設定切替情報入力部106から入力される設定情報に従って生成する第2情報Q2の選択・切替と、第2情報Q2の生成に必要な入力情報の選択・切替と、出力部16による出力方法の選択・切替と、第2情報Q2の生成のための最適な演算アルゴリズムの選択・切替とを行う。
さらに、制御部112は、第1情報Q1に基づいて第2情報Q2の出力タイミングを決定する。制御部112は、記憶部17に記憶されている初期設定に係る情報や設定切替情報入力部106から入力される設定情報に基づいて設定を行う。第2情報Q2の選択・切替を行う際には、必要な入力情報の選択・切替も同時に行われる。
第2情報Q2の重要性は、オペレータOPによって大きく異なることがある。オペレータOPは、特に挿入性を高める第2情報Q2のみを希望することもあれば、観察や処置などの作業に関わる第2情報Q2のみを希望することもある。ベテランのオペレータOPにとっては、警告情報以外の情報提供が不要と考えられる場合もある。作業対象毎に求められる第2情報Q2の内容が大きく異なったり、体腔(管腔)Mや作業対象の種類が変われば、さらに変化が大きくなったりする可能性がある。
上述の選択・切替は、例えば被検体や第3情報(例えば作業対象の管腔を示す情報)Q3や第4情報(例えば作業内容を示す情報)Q4に基づいて制御部112により自動的に行っても良い。当該選択・切替は、オペレータOPの操作を設定切替情報入力部106により受けて所望の選択・切替を行ってもよい。
ユーザ毎に必要な第2情報Q2が異なる場合がある。この場合には、ユーザが所望の第2情報Q2を選択可能にすることで、ユーザにとって必要な情報のみが提供できるようにしてもよい。
具体的には、例えば図26に示すような情報の組合せが挙げられる。同図は、第2情報Q2と、当該第2情報Q2の生成に必要な入力情報の組み合わせと、当該第2情報Q2の利用場面とが関連付けられて成る設定情報の例を示す。
具体的には、例えば図26に示すような情報の組合せが挙げられる。同図は、第2情報Q2と、当該第2情報Q2の生成に必要な入力情報の組み合わせと、当該第2情報Q2の利用場面とが関連付けられて成る設定情報の例を示す。
“例1”では、“第2情報Q2”として“挿入部20の先端位置と目標位置の同時表示”と、“第2情報の生成に必要な入力情報の組み合わせに係る第1情報Q1”として“挿入部20の先端位置”と、“第2情報の生成に必要な入力情報の組み合わせに係る第3情報”として“目標位置”と、“利用場面”として“挿入時”とが挙げられている。
“挿入部20の先端位置”は、
(1)挿入部20の先端位置に設けられたセンサ、
(2)形状センサ(ファイバセンサ88)及び手元位置センサ(挿入部センサ13)
(3)各操作量(挿入量・回転量・湾曲操作量)
によって取得される。“目標位置”は、“CT画像上の位置”によって取得される。
(1)挿入部20の先端位置に設けられたセンサ、
(2)形状センサ(ファイバセンサ88)及び手元位置センサ(挿入部センサ13)
(3)各操作量(挿入量・回転量・湾曲操作量)
によって取得される。“目標位置”は、“CT画像上の位置”によって取得される。
“例2”では、”第2情報”として”作業可能範囲への到達状況”と、”第2情報の生成に必要な入力情報の組み合わせに係る第1情報”として”挿入部20の先端位置”と、”第2情報の生成に必要な入力情報の組み合わせに係る第3情報”として”目標位置”と、”第2情報の生成に必要な入力情報の組み合わせに係る第4情報”として”作業可能範囲情報”と、”利用場面”として”挿入時”とが挙げられている。
“例3”では、“第2情報”として“目標位置に到達するための操作方向/操作すべき量”と、“第2情報の生成に必要な入力情報の組み合わせに係る第1情報”として“現在の操作量”と、“第2情報の生成に必要な入力情報の組み合わせに係る第3情報”として“目標位置”と、“利用場面”として“挿入時”とが挙げられている。
“例4”では、“第2情報”として“被検体に掛かる力の許容性判断”と、“第2情報の生成に必要な入力情報の組み合わせに係る第1情報”として”被検体に掛かっている力”と、“第2情報の生成に必要な入力情報の組み合わせに係る第4情報Q4”として“被検体に掛かる力の許容上限値”と、“利用場面”として”挿入時及び作業時”とが挙げられている。
例えば、操作に習熟したオペレータOPは、“例1”のように第2情報Q2として“先端位置と目標位置の同時表示”を出力させる選択をする。換言すれば、操作に習熟したオペレータOPは、“例3”の第2情報Q2として“目標位置に到達するための、操作方向/操作すべき量”の出力を必要としない(選択しない)。
このような選択を行うことで、出力部16には、“先端位置と目標位置の同時表示”が出力される。オペレータOPは、当該出力を参照して操作方法・操作量を判断しながら挿入操作を行うことができる。
このような選択を行うことで、出力部16には、“先端位置と目標位置の同時表示”が出力される。オペレータOPは、当該出力を参照して操作方法・操作量を判断しながら挿入操作を行うことができる。
このように操作に習熟したオペレータOPにとって、具体的な操作方向や操作量についての補助は不要である。このため、“例3”の“目標位置に到達するための、操作方向/操作すべき量”は、邪魔な情報となる。このように有益で無い情報を出力(表示)しないので、オペレータOPを注意散漫にさせることがなく、オペレータOPに対して挿入操作に集中させることができる。
例えば、オペレータOPは、第2情報Q2として“例1”の“先端位置と目標位置の同時表示”と、“例4”の“掛かる力の許容性判断”との出力を選択することができる。目標位置までの挿入時に“先端位置と目標位置の同時表示”を第2情報Q2として出力させることができる。作業中には“掛かる力の許容性判断”を第2情報Q2として出力させることができる。
挿入から作業への切替の際には、“例2”の“作業可能範囲への到達状況”を用いることができる。“例2”の“作業可能範囲への到達状況”は、外部へ出力するための第2情報Q2として利用しているわけではなく、出力は必ずしも必要ではない。
挿入から作業への切替の際には、“例2”の“作業可能範囲への到達状況”を用いることができる。“例2”の“作業可能範囲への到達状況”は、外部へ出力するための第2情報Q2として利用しているわけではなく、出力は必ずしも必要ではない。
本第3実施形態のように“挿入時”と“作業時”とを切り分け、操作目的が切り替わるタイミングで提示する第2情報Q2を、挿入のための情報から作業のための情報へ切り替えるので、それぞれの使用場面にあった第2情報Q2のみをオペレータOPに提供することができる。
このように第1情報Q1、第3情報Q3及び第4情報Q4から生成された(第2情報演算部10によって生成された)第2情報Q2である“作業可能範囲への到達状況”を用いるので、適切な切替タイミングを把握する為の演算を別途行う必要がなくなる。
このように第1情報Q1、第3情報Q3及び第4情報Q4から生成された(第2情報演算部10によって生成された)第2情報Q2である“作業可能範囲への到達状況”を用いるので、適切な切替タイミングを把握する為の演算を別途行う必要がなくなる。
図27は制御部112による第2情報Q2に係る切替制御の概念を示す。同図に示す例では、第2情報Q2の選択・切替に関して“グレード”が設定されている。制御部112は、グレードに基いて第2情報Q2の選択・切替制御を行う。
図28は第2情報Q2の選択・切替に係るグレード分類の一例を示す。グレードは、第2情報Q2の選択・切替において、特に、出力部16によって出力(オペレータOPに提供)される第2情報Q2を切り替えるための情報である。同図はオペレータOPが所望する情報提供レベルに対応する6段階のグレード“1”乃至“6”を示す。グレード“1”は、第2情報Q2の出力(オペレータOPへの提供)をしないグレードである。グレード“6”は、第2情報Q2の出力(オペレータOPへの提供)が最も充実しているグレードである。
当該グレードは、オペレータOP毎に、当該オペレータOPの第2情報Q2の必要度合いに基づいて、例えばオペレータOPの術式に対する習熟度に基づいて設定されている。オペレータOPは、所望のグレードを選択する。制御部112は、第2情報演算部102を制御し、オペレータOPによって選択されたグレードに基づいて第2情報Q2の出力(提供)を行うようする。
“グレード1”は、“情報無し(第2情報の出力を行わない)”を示す。
“グレード2”は、“警告(第2情報のうち警告に係る情報のみを出力する)のみ”を示す。
“グレード3”は、“警告及び管腔に対する挿入部20の挿入状況(位置のみ)の表示”を示す。
“グレード4”は、”警告及び管腔に対する挿入部20の挿入状況(位置と掛かる力)の表示”を示す。
“グレード5”は、”警告、管腔に対する挿入部20の挿入状況の表示、及び作業方針・手順のタイムリーな表示”を示す。
“グレード6”は、”警告、管腔に対する挿入部20の挿入状況の表示、作業方針・手順のタイムリーな表示、挿入や作業のための操作(挿抜・ねじり・湾曲操作)の操作量、及び設定上限値との関係の表示”を示す。
グレードは、段階が“1”から“6”に上がるにつれて段階的に第2情報Q2の提示内容が充実するように設定されている。6つの段階のグレード“1”乃至“6”を設けることで、全く支援情報は要らないというオペレータOPからフルスペックで提供しうる支援情報を必要とするオペレータOPまで、幅広いオペレータOPに対応可能となる。オペレータOPは自分自身にとって必要と思われる情報が含まれるグレードを選択すればよく(選択も容易であり)、適切な支援情報の提供を用意に受けることができる。
グレードの選択方法としては、オペレータOPが直接的にグレードをモニタ等のメニュー画面から選択する方法と、オペレータOPが経験や能力を示す指標を選択して間接的に選択する方法等がある。例えば、オペレータOPの手技の習熟度・過去の作業経験、及びトレーニング回数・手技回数・指標となる特定の技量の手技/診断/治療が熟せるレベル等の情報の一部と、各グレード“1”乃至“6”とが予め関連付けられる。オペレータOPは、それら情報を入力又は選択することで、当該情報に関連付けられたグレード“1”乃至“6”を選択することができる。
このようなグレードの選択方法であれば、オペレータOPが各グレードの意味するところを知らなくとも、グレードを利用した第2情報Q2の選択・切替による利便性を享受することができ、簡便に使いこなすことができる。
なお、挿入や処置等の作業毎に第2情報Q2の出力(提供)レベルが変更されるようにグレードの設定が行われてもよい。誤操作や警告が多発する場合などには、グレードを自動で切り替えるようにしてもよい。
トレーニング用のモードを設定し、当該トレーニング用のモードでは、例えば被検体である患者の前において、通常行わないような学習を促す音声ガイドを行ったり、挿入・作業の結果の良否やレベル判定結果を出力するようにしてもよい。
ユーザの経験や技量等に応じて第2情報Q2の生成及び出力を最適化するので、当該作業の効率性、確実性、及び安全性の向上を図ることができる。
第2情報Q2の出力(提供)タイミングは、内視鏡12の挿入部20の位置に基づいて設定してもよい。例えば、制御部112は、内視鏡12の挿入部20が特定の位置又は範囲にあるとき、当該タイミングで特定の位置又は範囲において重要であったり有効であったりする第2情報Q2を出力するように第2情報演算部102を制御する。
具体的に、制御部112は、例えば挿入に関わる第2情報Q2を基本的に目的となる作業対象位置や作業可能範囲に至るまで提供し、当該作業対象位置や作業可能範囲に至った時点で第2情報Q2の出力を終了させる。
制御部112は、特定の臓器の入口であって作業の基準になる部分、例えば胃・膀胱等の入口や目的となる作業対象位置や作業可能範囲に到達したときに”到達したという情報”や第1情報Q1である位置に関連付けられた”注意事項・狙いとする作業対象の過去の情報”、”これから作業対象に対して行う作業内容・作業指針”などを、第2情報Q2として出力(提供)するように第2情報演算部102を制御すればよい。
制御部112は、特定の臓器の入口であって作業の基準になる部分、例えば胃・膀胱等の入口や目的となる作業対象位置や作業可能範囲に到達したときに”到達したという情報”や第1情報Q1である位置に関連付けられた”注意事項・狙いとする作業対象の過去の情報”、”これから作業対象に対して行う作業内容・作業指針”などを、第2情報Q2として出力(提供)するように第2情報演算部102を制御すればよい。
タイミングの設定に係る特定の位置や範囲を示す情報は、第4情報Q4として記憶部17に記憶される。
第2情報演算部102は、第4情報Q4を第1情報Q1と組み合わせてタイミングを生成する。第4情報Q4ではなく追加情報としてタイミングの設定に係る特定の位置や範囲を示す情報を設定切替情報入力部106へ与えるようにしても良い。又、オペレータOPによって第2情報Q2を出力するタイミングに係る特定の位置や範囲が判断されると、当該判断したタイミングでトリガを設定切替情報入力部106に与えてもよい。
第2情報演算部102は、第4情報Q4を第1情報Q1と組み合わせてタイミングを生成する。第4情報Q4ではなく追加情報としてタイミングの設定に係る特定の位置や範囲を示す情報を設定切替情報入力部106へ与えるようにしても良い。又、オペレータOPによって第2情報Q2を出力するタイミングに係る特定の位置や範囲が判断されると、当該判断したタイミングでトリガを設定切替情報入力部106に与えてもよい。
設定切替情報入力部106は、トリガを入力し、設定情報に従って生成する第2情報Q2の選択・切替と、第2情報Q2の生成に必要な入力情報の選択・切替と、出力部16による出力方法の選択・切替と、第2情報Q2の生成のための最適な演算アルゴリズムの選択・切替とを行う。
特定のタイミングでタイムリーに有効な第2情報Q2を出力(オペレータOPに提供)するので、作業の効率性・確実性・安全性などを向上させることができる。
特定のタイミングでタイムリーに有効な第2情報Q2を出力(オペレータOPに提供)するので、作業の効率性・確実性・安全性などを向上させることができる。
出力部16による出力について切替を行ってもよい。図29は制御部112による第2情報Q2に係る切替制御の概念を示す。本例では、出力部16として複数の出力部材を設けている。複数の出力部材のうち何れの出力部材を出力部16として用いるか、又はどのような出力方法を採用するかは、制御部112によって選択・切替制御される。
出力部16を構成する出力部材としては、具体的に、例えば情報提供モニタ、内視鏡用モニタ、スピーカ、及び、振動/電気刺激発生装置等を含む。
出力部16を構成する出力部材としては、具体的に、例えば情報提供モニタ、内視鏡用モニタ、スピーカ、及び、振動/電気刺激発生装置等を含む。
本例における制御部112による選択・切替制御においては、例えば警告表示を、情報提供モニタにおける表示から、内視鏡12の操作部に設けた振動刺激発生装置(振動デバイス)に切り替えるようにしてもよい。
出力方法としては、情報提供モニタを例に取ると、例えば文字と図形との切替、表示サイズ、表示場所の切替、及び色切替などを挙げることができる。さらに、出力方法としては、出力の繰り返し頻度や出力の有無の切替も挙げることができる。
出力方法としては、情報提供モニタを例に取ると、例えば文字と図形との切替、表示サイズ、表示場所の切替、及び色切替などを挙げることができる。さらに、出力方法としては、出力の繰り返し頻度や出力の有無の切替も挙げることができる。
このような出力切替によってオペレータOPにとって被検体挿入システム10全体が使い易くなる。各第2情報Q2に応じた最適の出力部16を選択できる。ユーザにとって重要と思われる情報を目立たせることができる。
次に、出力切替の具体例について図30を参照して説明する。
図30は第2情報Q2と、出力手段と、出力方法とを関連付けられて成る出力切替に係る設定情報の例を示す。“例1”では、第2情報Q2である先端位置(挿入部20の先端位置)と目標位置の同時表示に対し、出力部16として情報提供モニタと内視鏡用モニタとのうち何れかを選択・切替できる。
当該選択・切替に応じて被検体の全体像上に表示(a;特定の2D像/複数の2D像、b;特定方向からの3D像)と、内視鏡画像上に目標位置を表示とのうち何れかの出力方法を選択・切替することができる。
図30は第2情報Q2と、出力手段と、出力方法とを関連付けられて成る出力切替に係る設定情報の例を示す。“例1”では、第2情報Q2である先端位置(挿入部20の先端位置)と目標位置の同時表示に対し、出力部16として情報提供モニタと内視鏡用モニタとのうち何れかを選択・切替できる。
当該選択・切替に応じて被検体の全体像上に表示(a;特定の2D像/複数の2D像、b;特定方向からの3D像)と、内視鏡画像上に目標位置を表示とのうち何れかの出力方法を選択・切替することができる。
“例1”によれば、”情報提供モニタ”では2D(2次元)画像表示と3D(3次元)画像表示とを切り換えることができる。”内視鏡用モニタ”では、内視鏡画像である被検体管腔画像上に目標位置を表示する。このように出力手段及び出力方法を選択可能とすることで、オペレータOPにとって好みの画像媒体と表示方法とを選択でき、挿入や作業の効率・質の向上に繋がる。挿入や作業の内容ごとに切り換えることで操作内容に合った最適の表示ができる。
“例2”では、第2情報である”作業可能範囲への到達状況”に対して、出力部16として”情報提供モニタ”と”スピーカ”とのうち何れかを選択・切替することができる。当該選択・切替に応じて”モニタ上にエリアをとって表示(a;到達までの距離/道のりの表示、b;段階分けした状況を表示)”と、“到達時/逸脱時に音声で伝達”とのうち何れかの出力方法を選択・切替することができる。
“例2”によれば、第2情報Q2として”作業可能範囲への到達状況”を出力する際に”情報提供モニタ”を用いる場合でも、”到達までの距離/道のりの表示”、”段階分けした状況を表示”、及び”到達時/逸脱時のみモニタに表示”といったように複数の表示方法がある。
“スピーカ”を用いる場合、作業範囲や目標位置到達時や逸脱時に音声や電子音などで状況を伝えることができる。これらの選択肢の中から、オペレータOPが自ら選択し設定することで、オペレータOPの好みや情報伝達の確実性を担保した第2情報の出力(提供)が可能となる。
“スピーカ”を用いる場合、作業範囲や目標位置到達時や逸脱時に音声や電子音などで状況を伝えることができる。これらの選択肢の中から、オペレータOPが自ら選択し設定することで、オペレータOPの好みや情報伝達の確実性を担保した第2情報の出力(提供)が可能となる。
“例3”では、第2情報である”目標位置に到達するための、操作方向/操作すべき量“に対し、出力部16として”情報提供モニタ”と”内視鏡用モニタ”とのうち何れかを選択・切替することができる。当該選択・切替に応じて”モニタ上にエリアをとって表示”と、”内視鏡画像上に操作方向(湾曲、挿入、ねじりなど)を表示”とのうち何れかの出力方法が選択・切替される。
“例3”によれば、”目標位置に到達するための操作方向/操作すべき量”との第2情報Q2に対し、出力部16として”情報提供モニタ”と、”内視鏡用モニタ”とを選択・切替することができる。”情報提供モニタ”においてはエリアを取って各操作毎の表示を行う。
”内視鏡用モニタ”においては、内視鏡画像である被検体管腔画像上に操作方向を表示する。”情報提供モニタ”においては、各操作毎に操作方向や具体的な操作量を表示することができ、どれだけの操作が必要であるかが重要な場合に特に有効である。
”内視鏡用モニタ”においては、内視鏡画像である被検体管腔画像上に操作方向を表示する。”情報提供モニタ”においては、各操作毎に操作方向や具体的な操作量を表示することができ、どれだけの操作が必要であるかが重要な場合に特に有効である。
また、被検体管腔画像上に操作方向を表示させる場合、オペレータOPが主に凝視する管腔画像に重ねた表示となるので、オペレータOPは目線を動かさずに操作方向を確認できる。
このように種々の選択肢の中からオペレータOP自らが選択し設定することで、オペレータOPにとって確認しやすく作業内容に適合した出力切替を行うことが可能となる。
このように種々の選択肢の中からオペレータOP自らが選択し設定することで、オペレータOPにとって確認しやすく作業内容に適合した出力切替を行うことが可能となる。
“例4”では、第2情報Q2である”被検体に掛かる力の許容性判断”に対し、出力部16として”情報提供モニタ”と”スピーカ”と”振動/電気刺激発生装置”とのうち何れかを選択・切替することができる。当該選択・切替に応じて”被検体の全体像上に表示”と”注意又は警告を音声で伝達”と、”注意又は警告を操作部や体に設置したデバイスから伝達”とのうち何れかの出力方法を選択・切替することができる。
“例4”によれば、第2情報Q2である”掛かる力の許容性判断”に対し、出力部16として”情報提供モニタ”と、”スピーカ”と、”振動/電気刺激発生装置”とのうち何れかを選択・切替できる。”情報提供モニタ”での表示においては、力の大きさと向きと力が加わる場所とを表示する。”スピーカ”を用いる場合には、警告音を出したり、音声警告する。
例えば、”情報提供モニタ”を見ているオペレータOPに対しては、“情報提供モニタ”を出力部16として利用する。”情報提供モニタ”を見ていないオペレータOPや当該モニタに目を向けていない瞬間がある場合や、当該モニタを見ていない他のオペレータOPがいる場合には、“スピーカ”を利用して警告音や警告内容を音声で伝達する。
また、”振動/電気刺激発生装置”は、例えば操作部30やオペレータOPに装着され、警告時等にオペレータOPの体に直接刺激を伝える。これにより、例えばオペレータOPが作業に没頭するなど警告への注意が散漫になりやすい場合や、警告が発せられてから瞬時に対応しなければならない場合等であっても、オペレータOPに最優先で警告を理解させたり、早急に作業を止めさせたり、警告に対処させたりすることが可能となる。
例えば、第2情報Q2には、緊急度又は重要度を示すフラグを付帯させておくことが可能である。制御部112は、フラグに応じて第2情報演算部102による第2情報Q2の算出処理、並びに第2情報Qを出力する出力部材及び出力方法の切替処理を制御する。
以上説明したように、本第3実施形態によれば、第1実施形態に係る被検体挿入システムと同様の効果を奏する上に、各オペレータOPにとって最適なタイミングで必要としている操作支援情報をオペレータOPに提供することができる被検体挿入システムを提供することができる。
さらに、上述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。
Claims (32)
- 被検体の体腔内に挿入して所定の作業を行う挿入部と、
前記体腔内における前記挿入部の挿入状態及び操作状態のうち少なくとも何れか一方を示す情報である第1情報を生成する第1情報生成部と、
前記被検体に係る第3情報、又は前記作業に関連する第4情報のうち少なくとも何れか一方の情報を記憶する記憶部と、
前記第1情報と、前記第3情報及び前記第4情報とのうち少なくとも何れか一方の情報とに基づいて前記挿入部を挿入して前記所定の作業を行うための操作支援情報である第2情報を算出する第2情報演算部と、
前記第2情報を出力する出力部と、
を具備することを特徴とする被検体挿入システム。 - 前記第1の情報は、前記挿入部の形状を示す情報、又は前記挿入部と前記被検体との相対位置を示す情報を含むことを特徴とする請求項1に記載の被検体挿入システム。
- 前記挿入部と前記被検体との相対位置を示す情報は、前記被検体に対する前記挿入部の挿入量及び回転量のうち少なくとも一方を示す情報、又は前記挿入部と前記被検体との接触状態を示す情報を含むことを特徴とする請求項2に記載の被検体挿入システム。
- 前記第3情報は、前記被検体に固有の情報を含むことを特徴とする請求項1に記載の被検体挿入システム。
- 前記被検体に固有の情報は、前記被検体の病歴を示す情報、又は前記被検体の過去の診断結果を示す情報を含むことを特徴とする請求項4に記載の被検体挿入システム。
- 前記第4情報は、前記作業に係る方針を示す情報、前記作業に係る手順を示す情報、前記作業に係る器具の仕様を示す情報、前記作業に係る器具の性能を示す情報、又は前記作業に係る事前情報を含むことを特徴とする請求項1に記載の被検体挿入システム。
- 前記第1情報は、前記被検体と前記挿入部の先端部位との相対位置を示す位置情報を含み、
前記第3情報は、前記被検体内における前記作業の対象位置を示す作業対象位置情報を含み、
前記第2情報演算部は、前記位置情報と前記作業対象位置情報とに基づいて前記挿入部の先端部位と前記作業の対象位置との相対的な位置関係を示す作業対象相対位置情報を前記第2情報として算出する、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記第1情報は、前記被検体と前記挿入部の先端部位との相対位置を示す位置情報を含み、
前記第3情報は、前記被検体内における前記作業の対象位置を示す作業対象位置情報を含み、
前記第2情報演算部は、前記位置情報と前記作業対象位置情報とに基づいて前記挿入部の先端部位と前記作業の対象位置との相対的な位置関係を示す作業対象相対位置情報を算出し、当該作業対象相対位置情報に基づいて前記第2情報の演算に利用する前記第3情報及び前記第4情報を選択し、かつ前記第2情報の算出に利用する演算を設定する、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記挿入部の先端部位にとって前記作業を行うことが可能な作業可能範囲が設定され、
前記第2情報は、前記挿入部の先端部位の前記作業可能範囲に対する相対な位置関係を示す作業可能範囲到達状況の情報を含むことを特徴とする請求項1に記載の被検体挿入システム。 - 前記作業が開始された後に、前記被検体に係る新たな情報である第5情報が入力される第5情報入力部を含み、
前記記憶部は、前記第3情報を前記第5情報によって更新し、
前記第2情報演算部は、前記更新された前記第3情報を用いて前記第2情報を算出する、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記作業が開始された後に、前記作業に係る新たな情報である第6情報が入力される第6情報入力部を含み、
前記記憶部は、前記第4情報を前記第6情報によって更新し、
前記第2情報演算部は、前記更新された前記第4情報を用いて前記第2情報を算出する、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記第2情報は、前記被検体に対する前記挿入部の挿入に係る指示、又は前記挿入部を用いた前記作業に係る操作指示を示す情報を含む、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記第2情報は、前記挿入部の先端部位を、前記被検体内の特定位置に位置させる為に要する前記挿入部のねじり及び/又は挿抜に係る操作指示を示す情報を含むことを特徴とする請求項12に記載の被検体挿入システム。
- 前記挿入部は、少なくとも一部が湾曲可能な可撓性を有し、
前記第2情報は、前記挿入部の先端部位を、前記被検体内の特定位置に位置させるために要する前記挿入部の湾曲に係る操作指示を示す情報を含む、
ことを特徴とする請求項12に記載の被検体挿入システム。 - 前記第4情報は、前記被検体の負担の観点から設定され、前記挿入部が前記被検体に印加する力の上限値を示す情報を含み、
前記第2情報は、前記上限値と、前記挿入部が実際に前記被検体に印加している力との関係を示す情報を含む、
ことを特徴とする請求項12に記載の被検体挿入システム。 - 前記挿入部を挿抜操作及びねじり操作する操作部を含み、
前記第4情報は、前記被検体の負担及び/又は前記作業の確実性の観点から設定され、前記挿入部の前記挿抜操作及び前記ねじり操作に係る操作速度の上限値を示す情報を含み、
前記第2情報は、前記上限値と、前記挿入部の実際の前記操作速度との関係を示す情報を含む、
ことを特徴とする請求項12に記載の被検体挿入システム。 - 前記挿入部を湾曲操作する操作部を含み、
前記挿入部は、少なくとも一部が湾曲可能な可撓性を有し、
前記第4情報は、前記被検体の負担及び/又は前記作業の確実性の観点から設定され、前記挿入部の湾曲操作に係る操作速度の上限値を示す情報を含み、
前記第2情報は、前記上限値と、前記挿入部の実際の操作速度との関係を示す情報を含む、
ことを特徴とする請求項12に記載の被検体挿入システム。 - 前記第4情報は、前記挿入部を前記被検体内に挿入して位置させる目的位置、又は前記目的位置に至るまでに経由する経由位置を示す作業対象位置情報を含み、
前記第2情報演算部は、前記作業対象位置情報と前記位置情報とに基づいて前記目的位置又は前記経由位置に対する前記挿入部の近接状態、所定範囲到達、又は離脱状態に関する情報を、前記第2情報として算出する、
ことを特徴とする請求項7又は8に記載の被検体挿入システム。 - 前記第2情報演算部は、前記目的位置又は前記経由位置に対する前記挿入部の先端部位の位置の変化を示す情報を、前記第2情報として算出することを特徴とする請求項18に記載の被検体挿入システム。
- 前記第1情報生成部は、光ファイバを用いた曲げセンサを含み、
前記曲げセンサは、前記挿入部における一つ以上に部位における湾曲の量を検出する、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記挿入部を湾曲操作する操作部を含み、
前記挿入部は、少なくとも一部が湾曲可能な可撓性を有し、
前記第1情報生成部は、前記挿入部の湾曲量を検出する湾曲センサと、前記操作部の湾曲操作量を検出する操作量センサとを含み、
前記第2情報演算部は、前記湾曲センサの検出結果である実際の湾曲量と、前記操作量センサによって検出された湾曲操作量との差分を算出し、当該差分に基づいて前記挿入部が前記被検体に加えている力を、前記第2情報として算出する、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記第2情報演算部による前記第2情報の算出に係る設定を示す設定情報が入力される設定切替情報入力部と、
前記設定情報に基づいて前記第2情報演算部による前記第2情報の算出に要する情報の組合せの選択及び/又は切替に係る制御を行う制御部と、
を含むことを特徴とする請求項1に記載の被検体挿入システム。 - 前記設定情報は、前記出力部による前記第2情報の出力の内容、方法、頻度、又は有無のうち少なくとも何れか1つについて段階を設定するグレード設定情報を含み、
前記制御部は、前記グレード設定情報に基づいて前記第2情報の算出について選択及び/又は切替する制御を行う、
ことを特徴とする請求項22に記載の被検体挿入システム。 - 前記第2情報演算部による前記第2情報の算出に係る設定を示す設定情報が入力される設定切替情報入力部と、
前記設定情報に基づいて前記第2情報演算部における最適な演算アルゴリズムを選択して前記第2情報演算部を制御する制御部と、
を含むことを特徴とする請求項1に記載の被検体挿入システム。 - 前記第2の情報と、前記第2情報の生成に要する前記第1情報及び前記第4情報と、前記第2情報の利用場面とを関連付けた設定情報を入力する設定切替情報入力部と、
前記設定情報に基づいて前記利用場面に至ったタイミングで、前記第2情報を前記出力部に出力するように前記第2情報演算部を制御する制御部と、
を含むことを特徴とする請求項1に記載の被検体挿入システム。 - 前記第2の情報と、前記第2情報の生成に要する前記第1情報及び前記第3情報と、前記第2情報の利用場面とを関連付けた設定情報を入力する設定切替情報入力部と、
前記設定情報に基づいて前記利用場面に至ったタイミングで、前記第2情報を前記出力部に出力するように前記第2情報演算部を制御する制御部と、
を含むことを特徴とする請求項1に記載の被検体挿入システム。 - 前記第1情報は、前記被検体に対する前記挿入部先端の相対位置を示す情報を含み、
前記第3情報は、前記作業に係る位置を示す情報を含み、
前記第2情報演算部は、前記挿入部先端の位置と、前記作業の位置との相対的な位置関係を示す作業対象相対位置情報とを算出し、前記作業対象相対位置情報に基づいて前記タイミングを決定する、
ことを特徴とする請求項26に記載の被検体挿入システム。 - 前記出力部は、一つ以上の種類の出力部材を含み、
前記出力部材は、前記第2情報を出力し、
前記第2情報の内容に基づいて前記第2情報演算部による前記第2情報の算出処理、並びに前記出力部材及び出力方法の切替処理を制御する制御部を含む、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記出力部は、一つ以上の種類の出力部材を含み、
前記出力部材は、前記第2情報を出力し、
前記第2情報には、緊急度又は重要度を示すフラグが付帯され、
前記フラグに応じて、前記第2情報演算部による前記第2情報の算出処理、並びに前記出力部材及び出力方法の切替処理を制御する制御部を含む、
ことを特徴とする請求項1に記載の被検体挿入システム。 - 前記制御部は、前記作業の開始前及び開始後において、前記算出処理及び前記切替処理を制御することを特徴とする請求項28又は29に記載の被検体挿入システム。
- 前記記憶部は、前記第2情報演算部によって算出された第2情報を、前記第1情報、前記第3情報、又は前記第5情報のうち少なくとも何れか一つと関連付けて記憶する、
ことを特徴とする請求項10の被検体挿入システム。 - 前記作業が開始された後に、前記被検体に係る新たな情報である第5情報が入力される第5情報入力部と、
前記作業が開始された後に、前記作業に係る新たな情報である第6情報が入力される第6情報入力部と、
を含み、
前記記憶部は、前記第2情報演算部によって算出された第2情報を、前記第3情報及び/又は前記第5情報、並びに前記第4情報及び/又は前記第6情報と関連付けて記憶する、
ことを特徴とする請求項11に記載の被検体挿入システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP14753899.5A EP2959820A4 (en) | 2013-02-21 | 2014-02-18 | SUBJECT INTRODUCTION SYSTEM |
CN201480009812.0A CN105025773B (zh) | 2013-02-21 | 2014-02-18 | 被检体插入系统 |
US14/832,258 US20150359419A1 (en) | 2013-02-21 | 2015-08-21 | Object insertion system |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013032311A JP6132585B2 (ja) | 2013-02-21 | 2013-02-21 | 被検体挿入システム |
JP2013-032311 | 2013-02-21 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US14/832,258 Continuation US20150359419A1 (en) | 2013-02-21 | 2015-08-21 | Object insertion system |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2014129436A1 true WO2014129436A1 (ja) | 2014-08-28 |
Family
ID=51391226
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2014/053705 WO2014129436A1 (ja) | 2013-02-21 | 2014-02-18 | 被検体挿入システム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20150359419A1 (ja) |
EP (1) | EP2959820A4 (ja) |
JP (1) | JP6132585B2 (ja) |
CN (1) | CN105025773B (ja) |
WO (1) | WO2014129436A1 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107249423A (zh) * | 2015-02-27 | 2017-10-13 | 奥林巴斯株式会社 | 操作辅助装置、插入体系统以及操作辅助方法 |
WO2017221298A1 (ja) * | 2016-06-20 | 2017-12-28 | オリンパス株式会社 | 可撓管挿入装置 |
WO2019008726A1 (ja) * | 2017-07-06 | 2019-01-10 | オリンパス株式会社 | 管状挿入装置 |
WO2019130390A1 (ja) * | 2017-12-25 | 2019-07-04 | オリンパス株式会社 | 推奨操作呈示システム、推奨操作呈示制御装置及び推奨操作呈示制御方法 |
JPWO2018096680A1 (ja) * | 2016-11-28 | 2019-10-17 | オリンパス株式会社 | 情報呈示システム |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6188564B2 (ja) * | 2013-12-19 | 2017-08-30 | オリンパス株式会社 | 挿入装置 |
JPWO2017104080A1 (ja) | 2015-12-18 | 2018-11-08 | オリンパス株式会社 | 挿入システム |
JP2018075218A (ja) * | 2016-11-10 | 2018-05-17 | ソニー株式会社 | 医療用支持アーム及び医療用システム |
WO2018134898A1 (ja) * | 2017-01-17 | 2018-07-26 | オリンパス株式会社 | 可撓性管状システム及び力覚情報算出方法 |
CN110167417B (zh) * | 2017-01-26 | 2022-01-07 | 奥林巴斯株式会社 | 图像处理装置、动作方法和存储介质 |
KR102116164B1 (ko) * | 2017-02-03 | 2020-05-27 | 재단법인 아산사회복지재단 | 카테터의 센싱 정보를 이용한 심장의 3차원 매핑 시스템 및 방법 |
WO2019187025A1 (ja) * | 2018-03-30 | 2019-10-03 | オリンパス株式会社 | 応力推定システム、応力推定装置及び内視鏡システム |
JP2019191257A (ja) * | 2018-04-19 | 2019-10-31 | オリンパス株式会社 | 内視鏡装置 |
WO2020055972A1 (en) * | 2018-09-11 | 2020-03-19 | Intuitive Surgical Operations, Inc. | Generation of graphical representation of force |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002345725A (ja) * | 2001-05-22 | 2002-12-03 | Olympus Optical Co Ltd | 内視鏡システム |
JP2004105725A (ja) * | 2002-08-30 | 2004-04-08 | Olympus Corp | 内視鏡装置及び内視鏡挿入動作プログラム |
JP2007130175A (ja) | 2005-11-09 | 2007-05-31 | Pentax Corp | 内視鏡挿入部形状把握システム |
JP2007330348A (ja) * | 2006-06-12 | 2007-12-27 | Olympus Medical Systems Corp | 内視鏡挿入形状検出装置 |
JP2012070937A (ja) * | 2010-09-28 | 2012-04-12 | Fujifilm Corp | 内視鏡システム |
JP2012115521A (ja) * | 2010-12-01 | 2012-06-21 | Olympus Medical Systems Corp | 管状挿入システム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6569084B1 (en) * | 1999-03-31 | 2003-05-27 | Olympus Optical Co., Ltd. | Endoscope holder and endoscope device |
US20020110263A1 (en) * | 2000-09-11 | 2002-08-15 | Thompson Robert Lee | System and method for obtaining and utilizing maintenance information |
JP2003126045A (ja) * | 2001-10-22 | 2003-05-07 | Olympus Optical Co Ltd | 診断支援装置 |
WO2004023986A1 (ja) * | 2002-08-30 | 2004-03-25 | Olympus Corporation | 医療処置システム、内視鏡システム、内視鏡挿入動作プログラム及び内視鏡装置 |
JP2004181229A (ja) * | 2002-11-20 | 2004-07-02 | Olympus Corp | 遠隔手術支援システム及び支援方法 |
US7538761B2 (en) * | 2002-12-12 | 2009-05-26 | Olympus Corporation | Information processor |
JP2004267461A (ja) * | 2003-03-07 | 2004-09-30 | Olympus Corp | 内視鏡手術システム |
JP2005021354A (ja) * | 2003-07-01 | 2005-01-27 | Olympus Corp | 遠隔手術支援装置 |
EP1800594A1 (en) * | 2003-08-22 | 2007-06-27 | Olympus Corporation | Device for detecting shape of endoscope |
JP4464641B2 (ja) * | 2003-09-01 | 2010-05-19 | オリンパス株式会社 | 工業用内視鏡システム |
DE102004017834B4 (de) * | 2004-04-13 | 2011-01-27 | Siemens Ag | Kathetereinrichtung |
US8945095B2 (en) * | 2005-03-30 | 2015-02-03 | Intuitive Surgical Operations, Inc. | Force and torque sensing for surgical instruments |
JP5295555B2 (ja) * | 2007-12-10 | 2013-09-18 | オリンパスメディカルシステムズ株式会社 | 内視鏡システム |
CN102449666B (zh) * | 2009-03-26 | 2016-01-20 | 直观外科手术操作公司 | 用于为操纵内窥镜设备的末端朝向一个或更多个界标转向提供视觉引导和在内窥镜导航中辅助操作者的系统 |
JP5559996B2 (ja) * | 2009-07-13 | 2014-07-23 | 富士フイルム株式会社 | 内視鏡装置及び内視鏡システム並びに内視鏡装置の作動方法 |
WO2011072055A2 (en) * | 2009-12-08 | 2011-06-16 | The General Hospital Corporation | Methods and arrangements for analysis, diagnosis, and treatment monitoring of vocal folds by optical coherence tomography |
JP5435746B2 (ja) * | 2011-01-24 | 2014-03-05 | 富士フイルム株式会社 | 内視鏡装置 |
CN103079451B (zh) * | 2011-03-29 | 2015-07-15 | 奥林巴斯医疗株式会社 | 内窥镜 |
-
2013
- 2013-02-21 JP JP2013032311A patent/JP6132585B2/ja active Active
-
2014
- 2014-02-18 EP EP14753899.5A patent/EP2959820A4/en not_active Withdrawn
- 2014-02-18 WO PCT/JP2014/053705 patent/WO2014129436A1/ja active Application Filing
- 2014-02-18 CN CN201480009812.0A patent/CN105025773B/zh active Active
-
2015
- 2015-08-21 US US14/832,258 patent/US20150359419A1/en not_active Abandoned
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002345725A (ja) * | 2001-05-22 | 2002-12-03 | Olympus Optical Co Ltd | 内視鏡システム |
JP2004105725A (ja) * | 2002-08-30 | 2004-04-08 | Olympus Corp | 内視鏡装置及び内視鏡挿入動作プログラム |
JP2007130175A (ja) | 2005-11-09 | 2007-05-31 | Pentax Corp | 内視鏡挿入部形状把握システム |
JP2007330348A (ja) * | 2006-06-12 | 2007-12-27 | Olympus Medical Systems Corp | 内視鏡挿入形状検出装置 |
JP2012070937A (ja) * | 2010-09-28 | 2012-04-12 | Fujifilm Corp | 内視鏡システム |
JP2012115521A (ja) * | 2010-12-01 | 2012-06-21 | Olympus Medical Systems Corp | 管状挿入システム |
Non-Patent Citations (1)
Title |
---|
See also references of EP2959820A4 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107249423A (zh) * | 2015-02-27 | 2017-10-13 | 奥林巴斯株式会社 | 操作辅助装置、插入体系统以及操作辅助方法 |
WO2017221298A1 (ja) * | 2016-06-20 | 2017-12-28 | オリンパス株式会社 | 可撓管挿入装置 |
JPWO2017221298A1 (ja) * | 2016-06-20 | 2019-03-28 | オリンパス株式会社 | 可撓管挿入装置 |
US11246474B2 (en) | 2016-06-20 | 2022-02-15 | Olympus Corporation | Flexible tube insertion apparatus |
JPWO2018096680A1 (ja) * | 2016-11-28 | 2019-10-17 | オリンパス株式会社 | 情報呈示システム |
US11375878B2 (en) | 2016-11-28 | 2022-07-05 | Olympus Corporation | Information presentation system including a flexible tubular insertion portion |
WO2019008726A1 (ja) * | 2017-07-06 | 2019-01-10 | オリンパス株式会社 | 管状挿入装置 |
JPWO2019008726A1 (ja) * | 2017-07-06 | 2020-03-19 | オリンパス株式会社 | 管状挿入装置 |
WO2019130390A1 (ja) * | 2017-12-25 | 2019-07-04 | オリンパス株式会社 | 推奨操作呈示システム、推奨操作呈示制御装置及び推奨操作呈示制御方法 |
JPWO2019130390A1 (ja) * | 2017-12-25 | 2020-12-17 | オリンパス株式会社 | 推奨操作呈示システム、推奨操作呈示制御装置及び推奨操作呈示制御方法 |
Also Published As
Publication number | Publication date |
---|---|
US20150359419A1 (en) | 2015-12-17 |
JP6132585B2 (ja) | 2017-05-24 |
EP2959820A1 (en) | 2015-12-30 |
CN105025773B (zh) | 2017-06-20 |
EP2959820A4 (en) | 2016-11-02 |
JP2014161374A (ja) | 2014-09-08 |
CN105025773A (zh) | 2015-11-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2014129436A1 (ja) | 被検体挿入システム | |
JP5766940B2 (ja) | 管状挿入システム | |
AU2018378810B2 (en) | System and method for medical instrument navigation and targeting | |
JP5159995B2 (ja) | 内視鏡システム | |
KR102356881B1 (ko) | 카테터 위치설정 및 삽입을 위한 그래픽 사용자 인터페이스 | |
CN106794050B (zh) | 用于医疗器械力感测的系统和方法 | |
JP5301867B2 (ja) | 医療用マニピュレータシステム | |
WO2004023986A1 (ja) | 医療処置システム、内視鏡システム、内視鏡挿入動作プログラム及び内視鏡装置 | |
JP6600690B2 (ja) | 挿入体支援システム | |
JP5932172B2 (ja) | 内視鏡システム | |
US20160175057A1 (en) | Assistance device for imaging support of a surgeon during a surgical operation | |
JP6749020B2 (ja) | 内視鏡ナビゲーション装置 | |
JP4436638B2 (ja) | 内視鏡装置及び内視鏡挿入動作プログラム | |
WO2020194472A1 (ja) | 移動支援システム、移動支援方法、および移動支援プログラム | |
CN112292062A (zh) | 具有一体式导航传感器的内窥镜 | |
WO2017212474A1 (en) | Endoscope -like devices comprising sensors that provide positional information | |
JP3290153B2 (ja) | 内視鏡挿入形状検出装置 | |
JP5841366B2 (ja) | 医療装置 | |
JP5932174B1 (ja) | 内視鏡システム | |
JP3458060B2 (ja) | 内視鏡形状検出装置及び内視鏡形状表示制御方法 | |
US12042121B2 (en) | Medical system with medical device overlay display | |
WO2018096680A1 (ja) | 情報呈示システム | |
JP2013172905A (ja) | 管状挿入システム | |
WO2017163653A1 (ja) | 内視鏡先端位置特定システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WWE | Wipo information: entry into national phase |
Ref document number: 201480009812.0 Country of ref document: CN |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 14753899 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
WWE | Wipo information: entry into national phase |
Ref document number: 2014753899 Country of ref document: EP |