Nothing Special   »   [go: up one dir, main page]

JP7059377B2 - 管腔ネットワーク内の器具の追跡およびナビゲーションの方法およびシステム - Google Patents

管腔ネットワーク内の器具の追跡およびナビゲーションの方法およびシステム Download PDF

Info

Publication number
JP7059377B2
JP7059377B2 JP2020533562A JP2020533562A JP7059377B2 JP 7059377 B2 JP7059377 B2 JP 7059377B2 JP 2020533562 A JP2020533562 A JP 2020533562A JP 2020533562 A JP2020533562 A JP 2020533562A JP 7059377 B2 JP7059377 B2 JP 7059377B2
Authority
JP
Japan
Prior art keywords
instrument
estimated state
data
position sensor
estimated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020533562A
Other languages
English (en)
Other versions
JP2021506439A (ja
Inventor
ラフィ-タリ,ヘディエ
ジーヴァン,プラサンス
Original Assignee
オーリス ヘルス インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オーリス ヘルス インコーポレイテッド filed Critical オーリス ヘルス インコーポレイテッド
Publication of JP2021506439A publication Critical patent/JP2021506439A/ja
Application granted granted Critical
Publication of JP7059377B2 publication Critical patent/JP7059377B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods
    • A61B2017/00477Coupling
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods
    • A61B2017/00743Type of operation; Specification of treatment sites
    • A61B2017/00809Lung operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/105Modelling of the patient, e.g. for ligaments or bones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2048Tracking techniques using an accelerometer or inertia sensor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2051Electromagnetic tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2059Mechanical position encoders
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2061Tracking techniques using shape-sensors, e.g. fiber shape sensors with Bragg gratings
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2063Acoustic tracking systems, e.g. using ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2072Reference field transducer attached to an instrument or patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/301Surgical robots for introducing or steering flexible instruments inserted into the body, e.g. catheters or endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/303Surgical robots specifically adapted for manipulations within body lumens, e.g. within lumen of gut, spine, or blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/306Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using optical fibres
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/309Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using white LEDs
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • A61B2090/3614Image-producing devices, e.g. surgical cameras using optical fibre

Landscapes

  • Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Robotics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Endoscopes (AREA)

Description

本開示は、医療器具の追跡およびナビゲーションの方法およびシステムに関し、より具体的には、管腔ネットワーク内におけるロボット対応医療器具の追跡およびナビゲーションの方法およびシステムに関する。
内視鏡検査(例えば、気管支鏡検査)などの医療手技には、診断目的または治療目的で患者の管腔ネットワーク(例えば、気道)内にアクセスおよび視覚化することが含まれる。
気管支鏡検査は、医師が気管支や細気管支などの患者の肺気道の内部状態を検査できる医療手技である。医療手技中に、気管支鏡として知られる薄くて柔軟な管状の道具を患者の口に挿入し、患者の喉から肺気道を経由して、後続の診断と治療のために識別された組織部位に向けて通すことができる。
特定の医療手技では、手術具の挿入および/または操作を制御するためにロボット対応医療システムが使用される。ロボット対応医療システムは、1つのロボットアームや、手技中に手術具の位置決め制御に使用するマニピュレータアセンブリなどのその他の器具位置決め装置を有することができる。
ロボット対応利用システムは、医療手技や手術手技において器具の追跡およびナビゲーション用に構成することができる。また、ロボット対応医療システムは、腹腔鏡手技などの低侵襲手技や内視鏡手技などの非侵襲手技を含む種々の医療手技を行うために使用することができる。内視鏡手技においては、気管支鏡検査、尿管鏡検査、消化器検査などを実行するためにロボット対応医療システムを使用することができる。これらの手技においては、施術者は、患者の管腔ネットワークを通って医療器具をナビゲートすることができる。管腔ネットワークには、複数の分岐を有する管腔(気管支ネットワークや腎臓部のネットワークなど)や単一の管腔(胃腸管など)が含まれる。
ロボット対応医療システムは、管腔ネットワーク内における医療器具の位置特定および/ガイドを行う位置特定システム(ナビゲーションシステムとも称する)を有することができる。いくつかの実施形態では、位置特定システムは、器具の位置を特定または推定することができる。位置特定システムは、種々の種類の位置データを受信および処理し、器具の位置を特定することができる。例えば、位置特定システムは、位置センサデータ、ロボット挿入データ、および/または視覚データを処理して、器具の位置を特定することができる。位置特定システムは、これらのデータ入力のいずれかまたは組み合わせたものから、器具の位置を導出または推定することができる。
いくつかの例では、位置特定システムは、器具が管腔ネットワーク内を移動する際に、器具の位置を特定するために使用するデータ入力の組み合わせを変更することもできる。例えば、位置特定システムは、あるデータ入力またはデータ入力の組み合わせの使用から、異なるデータ入力、データ入力の組み合わせのサブセット、または異なる組み合わせのデータ入力の使用に切り替えることもできる。この場合、位置特定システムが使用する変更後のデータ入力によって、特定される器具の位置が変化する可能性がある。特定された位置が施術者に表示される場合は、施術者には、位置特定システムが器具の位置を特定す
るために使用するデータ入力を変更した際に、位置が突然変わったりジャンプしたりする可能性がある。このようなことは、施術者の手技に支障をきたしたり施術者が方向を見失ったりすることになり、望ましくないことがある。
位置特定システムがデータ入力を変更して器具の位置を特定する1つの状況の例は、器具が術前モデルによって表現される管腔ネットワークのある位置から、術前モデルでは表現されない管腔ネットワークの別の位置に移動する場合である。いくつかの状況では、位置特定システムは、管腔ネットワークの術前モデルに少なくとも部分的に基づいて、器具の位置を特定することができる。いくつかの例では、器具が術前モデルによって表現される管腔ネットワークの位置にある場合に、特定のデータ入力を使用して器具の位置を特定することができる。そして、器具が術前モデルによって表現されない管腔ネットワーク内の位置に移動した場合は、データ入力のサブセットや異なるデータ入力を使用して、器具の位置を特定することができる。器具の位置を特定するために使用するデータ入力が異なると、特定された位置が突然変化したりジャンプしたりする結果となる場合がある。この場合でも、特定された位置が施術者に表示される場合は、そのような位置の突然の変化やジャンプによって、施術者の手技に支障をきたしたり施術者が方向を見失ったりすることになる可能性がある。
本件開示の追跡およびナビゲーションの方法およびシステムを用いることで、例えば、このような突然の変化やジャンプの可能性を低減したり防止したりすることができる。これは、例えば、位置特定システムが位置を特定するために使用するデータ入力を変更する変換点における位置の変動を特定することで実現できる。また、位置の変動を用いて、今後の特定される位置を調整して、位置の突然の変化やジャンプを低減または排除することもできる。位置の変動を基に調整された特定された位置は、ユーザに表示されてもよい。これにより、施術者のユーザエクスペリエンスが向上し、ロボット対応医療システムの制御を向上させることができる。以下では、追跡およびナビゲーションの方法およびシステムの特定の側面および特徴についてまとめるが、本件開示のシステム、方法、装置には、それぞれいくつかの革新的な側面があり、いずれも本明細書に開示する所望の特徴を単独で担うものではない。
第1の側面では、命令が記憶された非一時的なコンピュータ可読記憶媒体について説明する。前記命令は、実行されると、装置のプロセッサに少なくとも、管腔ネットワーク内に位置する器具を追跡する少なくとも1つの位置センサから位置センサデータを受信することと、前記センサデータから導出される位置センサに基づく推定状態を特定することと、前記位置センサデータおよび少なくとも1つの他の種類の位置データに基づいて、前記器具の組み合わせられた推定状態を特定することと、前記組み合わせられた推定状態および前記位置センサに基づく推定状態に基づいて、位置変換を特定することと、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の推定位置を出力することと、を実行させる。
また、非一時的なコンピュータ可読記憶媒体は、以下の1つまたは複数の特徴を任意に組み合わせてもよい。(a)前記命令は、実行されると、前記プロセッサに、前記管腔ネットワークの第1の部分と前記管腔ネットワークの第2の部分との間の変換点における前記位置変換を特定することと、前記器具が前記管腔ネットワークの前記第2の部分内に位置する場合に、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の前記推定状態を出力することと、を実行させる。(b)前記命令は、実行されると、前記プロセッサに、前記管腔ネットワークの第1の部分と前記管腔ネットワークの第2の部分との間の変換点よりも前の部分の範囲にわたる前記位置変換を特定することと、前記器具が前記管腔ネットワークの前記第2の部分内に位置する場合に、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の前記
推定状態を出力することと、を実行させる。(c)前記命令は、実行されると、前記プロセッサに、前記器具が前記管腔ネットワークの前記第1の部分内に位置する場合に、前記組み合わされた推定状態を出力すること、を実行させる。(d)前記命令は、実行されると、前記プロセッサに、前記管腔ネットワークのマッピングされた部分に対応する術前モデルデータを取得することと、前記術前モデルデータに基づいて前記変換点を特定することと、を実行させる。(e)前記変換点は、前記術前モデルの最後のセグメントの閾値長さにおける位置に決まる。(f)前記変換点は、前記術前モデルの最後のセグメントの遠位端における位置に決まる。(g)前記位置変換はオフセットを有する。(h)前記オフセットはベクトルを有する。(i)前記ベクトルは、前記変換点における前記組み合わされた推定状態および前記センサベースの推定状態との間の相違を示す。(j)前記位置変換は関数を有する。(k)前記組み合わされた推定状態は、前記器具に関する、セグメントの識別子、前記セグメント内の深さ、および回転情報と、3自由度の位置と、6自由度の位置と、の1つまたは複数を有する。(l)前記位置センサに基づく推定状態は、3自由度の位置と、6自由度の位置と、の1つまたは複数を有する。(m)前記命令は、実行されると、前記プロセッサに、前記調整された位置センサに基づく推定状態に基づいて、前記器具の前記推定状態とターゲットの結節との相違を特定することを実行させる。(n)前記命令は、実行されると、前記プロセッサに、ディスプレイに、前記調整された位置センサに基づく推定状態の視覚的な指標を表示すること、を実行させる。(o)前記命令は、実行されると、前記プロセッサに、前記調整された位置センサに基づく推定状態に基づいて、前記器具の先端の向きを特定することと、ディスプレイに、前記先端の向きを表示することと、を実行させる。(p)前記命令は、実行されると、前記プロセッサに、前記器具が前記第2の部分内に位置している間、前記特定された位置変換を固定すること、を実行させる。
別の側面では、ロボットシステムについて説明する。ロボットシステムは、細長い本体と、前記細長い本体上に配置された少なくとも1つの位置センサとを有する器具と、前記器具に取り付けられ、前記器具を移動させる器具位置決め装置と、実行可能な命令を記憶する少なくとも1つのコンピュータ可読メモリと、前記少なくとも1つのコンピュータ可読メモリと通信する1つまたは複数のプロセッサを有する。前記命令は、実行されると、前記システムに少なくとも、前記少なくとも1つの位置センサから位置センサデータを受信することと、前記位置センサデータから導出される位置センサに基づく推定状態を特定することと、前記位置センサデータおよび少なくとも1つの他の種類の位置データに基づいて、前記器具の組み合わせられた推定状態を特定することと、前記組み合わせられた推定状態および前記位置センサに基づく推定状態に基づいて、位置変換を特定することと、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の推定位置を出力することと、を実行させる。
また、システムは、以下の1つまたは複数の特徴を任意に組み合わせてもよい。(a)前記器具位置決め装置は、ロボットアームを含む。(b)前記少なくとも1つの位置センサは、電磁センサを含む。(c)前記少なくとも1つの位置センサは、形状感知ファイバ、加速度計、ジャイロスコープ、または超音波センサを含む。(d)前記命令は、実行されると、前記1つまたは複数のプロセッサに、前記管腔ネットワークの第1の部分と前記管腔ネットワークの第2の部分との間の変換点における前記位置変換を特定することと、前記器具が前記管腔ネットワークの前記第2の部分内に位置する場合に、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の前記推定状態を出力することと、を実行させる。(e)前記命令は、実行されると、前記1つまたは複数のプロセッサに、前記管腔ネットワークの第1の部分と前記管腔ネットワークの第2の部分との間の変換点よりも前の部分の範囲にわたる前記位置変換を特定することと、前記器具が前記管腔ネットワークの前記第2の部分内に位置する場合に、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の前記推定状態を出
力することと、を実行させる。(f)前記命令は、実行されると、前記1つまたは複数のプロセッサに、前記器具が前記管腔ネットワークの前記第1の部分内に位置する場合に、前記組み合わされた推定状態を出力すること、を実行させる。(g)前記命令は、実行されると、前記1つまたは複数のプロセッサに、前記管腔ネットワークのマッピングされた部分に対応する術前モデルデータを取得することと、前記術前モデルデータに基づいて前記変換点を特定することと、を実行させる。(h)前記変換点は、前記術前モデルの最後のセグメントの閾値長さにおける位置に決まる。(i)前記変換点は、前記術前モデルの最後のセグメントの遠位端における位置に決まる。(j)前記位置変換はオフセットを有する。(k)前記オフセットはベクトルを有する。(l)前記ベクトルは、前記変換点における前記組み合わされた推定状態および前記センサベースの推定状態との間の相違を示す。(m)前記位置変換は関数を有する。(n)前記組み合わされた推定状態は、前記器具に関する、セグメントの識別子、前記セグメント内の深さ、および回転情報と、3自由度の位置と、6自由度の位置と、の1つまたは複数を有する。(o)前記位置センサに基づく推定状態は、3自由度の位置と、6自由度の位置と、の1つまたは複数を有する。(p)前記命令は、実行されると、前記1つまたは複数のプロセッサに、前記調整された位置センサに基づく推定状態に基づいて、前記器具の前記推定状態とターゲットの結節との相違を特定すること、を実行させる。(q)前記命令は、実行されると、前記1つまたは複数のプロセッサに、ディスプレイに、前記調整された位置センサに基づく推定状態の視覚的な指標を表示すること、を実行させる。(r)前記命令は、実行されると、前記1つまたは複数のプロセッサに、前記調整された位置センサに基づく推定状態に基づいて、前記器具の先端の向きを特定することと、ディスプレイに、前記先端の向きを表示することと、を実行させる。(s)前記命令は、実行されると、前記1つまたは複数のプロセッサに、前記器具が前記第2の部分内に位置している間、前記特定された位置変換を固定すること、を実行させる。
別の側面では、身体の管腔ネットワーク内で器具をナビゲートする方法について説明する。この方法は、管腔ネットワーク内に位置する器具を追跡する少なくとも1つの位置センサから位置センサデータを受信することと、前記センサデータから導出される位置センサに基づく推定状態を特定することと、前記位置センサデータおよび少なくとも1つの他の種類の位置データに基づいて、前記器具の組み合わせられた推定状態を特定することと、前記組み合わせられた推定状態および前記位置センサに基づく推定状態に基づいて、位置変換を特定することと、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の推定位置を出力することと、を含む。
また、方法は、以下の1つまたは複数の特徴を任意に組み合わせてもよい。(a)前記管腔ネットワークの第1の部分と前記管腔ネットワークの第2の部分との間の変換点における前記位置変換を特定することと、前記器具が前記管腔ネットワークの前記第2の部分内に位置する場合に、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の前記推定状態を出力することと、をさらに含む。(b)前記管腔ネットワークの第1の部分と前記管腔ネットワークの第2の部分との間の変換点よりも前の部分の範囲にわたる前記位置変換を特定することと、前記器具が前記管腔ネットワークの前記第2の部分内に位置する場合に、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の前記推定状態を出力することと、をさらに含む。(c)前記器具が前記管腔ネットワークの前記第1の部分内に位置する場合に、前記組み合わされた推定状態を出力すること、をさらに含む。(d)前記管腔ネットワークのマッピングされた部分に対応する術前モデルデータを取得することと、前記術前モデルデータに基づいて前記変換点を特定することと、を実行させる。(e)前記変換点は、前記術前モデルの最後のセグメントの閾値長さにおける位置に決まる。(f)前記変換点は、前記術前モデルの最後のセグメントの遠位端における位置に決まる。(g)前記位置変換はオフセットを有する。(h)前記オフセットはベクトルを有する。(i)前記ベクトルは
、前記変換点における前記組み合わされた推定状態および前記位置センサに基づく推定状態との間の相違を示す。(j)前記位置変換は関数を有する。(k)前記組み合わされた推定状態は、前記器具に関する、セグメントの識別子、前記セグメント内の深さ、および回転情報と、3自由度の位置と、6自由度の位置と、の1つまたは複数を有する。(l)前記位置センサに基づく推定状態は、3自由度の位置と、6自由度の位置と、の1つまたは複数を有する。(m)前記調整された位置センサに基づく推定状態に基づいて、前記器具の前記推定状態とターゲットの結節との相違を特定すること、をさらに含む。(n)ディスプレイに、前記調整された位置センサに基づく推定状態の視覚的な指標を表示すること、をさらに含む。(o)前記調整された位置センサに基づく推定状態に基づいて、前記器具の先端の向きを特定することと、ディスプレイに、前記先端の向きを表示することと、をさらに含む。(p)前記器具が前記第2の部分内に位置している間、前記特定された位置変換を固定すること、をさらに含む。
別の側面では、身体の管腔ネットワーク内で器具をナビゲートする方法について説明する。この方法は、管腔ネットワーク内に位置する器具を追跡する少なくとも1つの位置センサから位置センサデータを受信することと、前記位置センサデータから導出される位置センサに基づく推定状態を特定することと、少なくとも1つの他の種類の位置データに基づいて、前記器具の追加の推定状態を特定することと、前記追加の推定状態および前記位置センサに基づく推定状態に基づいて、位置変換を特定することと、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の推定位置を出力することと、を含む。
また、方法は、以下の1つまたは複数の特徴を任意に組み合わせてもよい。(a)前記管腔ネットワークの第1の部分と前記管腔ネットワークの第2の部分との間の変換点における前記位置変換を特定することと、前記器具が前記管腔ネットワークの前記第2の部分内に位置する場合に、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の前記推定状態を出力することと、をさらに含む。(b)前記管腔ネットワークの第1の部分と前記管腔ネットワークの第2の部分との間の変換点よりも前の部分の範囲にわたる前記位置変換を特定することと、前記器具が前記管腔ネットワークの前記第2の部分内に位置する場合に、前記位置変換によって調整された前記位置センサに基づく推定状態に基づいて、前記器具の前記推定状態を出力することと、をさらに含む。(c)前記器具が前記管腔ネットワークの前記第1の部分内に位置する場合に、前記追加の推定状態を出力すること、をさらに含む。(d)前記管腔ネットワークのマッピングされた部分に対応する術前モデルを表現する術前モデルデータを取得することと、前記術前モデルデータに基づいて前記変換点を特定することと、をさらに含む。(e)前記変換点は、前記術前モデルの最後のセグメントの閾値長さにおける位置に決まる。(f)前記変換点は、前記術前モデルの最後のセグメントの遠位端における位置に決まる。(g)前記位置変換はオフセットを有する。(h)前記オフセットはベクトルを有する。(i)前記ベクトルは、前記変換点における前記追加の推定状態および前記センサベースの推定状態との間の相違を示す。(j)前記位置変換は関数を有する。
本件開示の側面について、添付の図面および表と共に以下に説明するが、例示であって開示の側面を限定するものではなく、同様の構成要素には同様の名称を付す。
気管支鏡検査手技の診断および/または治療用に構成されたカートベースのロボットシステムの一実施形態を示す図である。 図1のロボットシステムの別の側面を示す図である。 尿管鏡検査用に構成された図1のロボットシステムの一実施形態を示す図である。 血管手技用に構成された図1のロボットシステムの一実施形態を示す図である。 気管支鏡検査手技用に構成されたテーブルベースのロボットシステムの一実施形態を示す図である。 図5のロボットシステムの代替の図である。 ロボットアームを収容するように構成されたシステムの一例を示す図である。 尿管鏡検査用に構成されたテーブルベースのロボットシステムの一実施形態を示す図である。 腹腔鏡検査用に構成されたテーブルベースのロボットシステムの一実施形態を示す図である。 ピッチ調整または傾き調整された図5~9のテーブルベースのロボットシステムの一実施形態を示す図である。 図5~10のテーブルベースのロボットシステムのテーブルとカラムとの間のインタフェースの詳細図である。 例示的な器具駆動部を示す図である。 組になった器具駆動部を有する例示的な医療器具を示す図である。 駆動ユニットの軸が器具の細長いシャフトの軸と平行である、器具駆動部および器具の代替の設計を示す図である。 実施形態の一例における、図13や14の器具の位置など、図1~10のロボットシステム1つまたは複数の要素の位置を推定する位置決めシステムを示すブロック図である。 管腔ネットワーク内をナビゲートされる医療器具の一例を示す図である。 医療器具の一例の遠位端の詳細図を示す図である。 一実施形態における、医療ロボットシステムの一例のディスプレイを有するコマンドコンソールの一例を示す図である。 ロボット制御される医療器具のナビゲートを行うことができる管腔ネットワークの一例を示す図である。 図19Aの管腔ネットワークの術前モデルの一例を示す図である。 図19Aの管腔ネットワークに重畳される図19Bの術前モデルのビューを示し、術前モデルが管腔ネットワークのマッピングされた部分に対応することを示す図である。 図20A~図20Fは、位置変換を用いたナビゲーションおよび追跡の一例を示す図であり、図20Aは、術前モデルによって表現される管腔ネットワークの一部における組み合わせられた位置の推定状態を示す図である。 変換点における位置変換の一例の特定を示す図である。 位置変換によって調整された推定状態を示す図である。 後続の推定状態が位置変換によって調整可能であることを示す図である。 調整された推定状態を用いて、術前モデルによって表現される部分を超える部分の管腔ネットワークの表現を提供することができることを示す図である。 特定のロボットシステムに実装可能なナビゲーションおよび追跡方法の一例を示すフローチャートである。 特定のロボットシステムに実行可能なナビゲーションおよび追跡方法の別の例を示すフローチャートである。 特定のロボットシステムに実行可能なナビゲーションおよび追跡方法の別の例を示すフローチャートである。 本件開示のナビゲーションおよび追跡方法を実装するロボットシステムの一例を示すブロック図である。
(1.はじめに)
本件開示の側面は、腹腔鏡検査などの低侵襲の手技や内視鏡検査などの非侵襲の手技を含む種々の医療手技を実行可能なロボット対応医療システムに組み込むことができる。内視鏡検査の手技においては、本システムは、気管支鏡検査、尿管鏡検査、消化器病検査などを実行することができる。
本システムは、さまざまな手技を実行できることに加えて、術者を支援する強化された画像取得や誘導など、追加の利点を提供することができる。また、本システムは、扱いにくいアームの動きや位置などに対応する必要なく、人工工学による位置から手技を行うことが可能な機能を術者に提供することができる。さらに、本システムは、システムの1つまたは複数の器具を1人のユーザで制御可能な使いやすさが向上した手技を行うことが可能な機能を術者に提供することができる。
以下に、例示目的の図面とともに種々の実施形態について説明する。開示の技術的思想のその他多数の実装が可能であり、さまざまな利点が開示の実装と共に得られる。また、ここには、参照用および多数の節の位置がわかるように見出しが含まれている。これらの見出しは、見出しが示す技術思想の範囲を制限するものではない。それぞれの技術思想は本明細書全体にわたって適用されてよい。
(A.ロボットシステム-カート)
ロボット対応医療システムは、特定手技に応じてさまざまに構成することができる。図1は、気管支鏡検査の診断手技および/または治療樹技用に配置されたカートベースのロボット対応システム10の一実施形態を示す。気管支検査時に、システム10は、気管支鏡検査用の手技に特化した気管支鏡を自然開口のアクセスポイント(この例ではテーブルに配置された患者の口など)に操作可能な内視鏡13などの医療器具を搬送して診断用の道具および/または治療用の道具を搬送するための、1つまたは複数のロボットアーム12を有するカート11を備える。図に示すように、カート11は、当該アクセスポイントにアクセスするために、患者の上半身に近い位置に配置されている。同様に、ロボットアーム12は、当該アクセスポイントに対して気管支鏡を配置するように作動可能である。図1に示す配置は、胃腸に関する(GI;gastro-intestinal)手技用の特別な内視鏡で
ある胃鏡を用いた胃腸に関する手技を行うときにも使用できる。図2は、カートの一例である実施形態をより詳細に示す。
引き続き図1を参照すると、カート11が適切に位置決めされると、ロボットアーム12は操縦可能な内視鏡13を患者に、ロボットにより、手動により、またはそれらの組み合わせにより挿入することができる。図示のように、操縦可能な内視鏡13は内側リーダ部分および外部シース部分などの少なくとも2つの入れ子式部分を備えることができ、各部分は器具ドライバ28のセットから別個の器具ドライバに結合され、各器具ドライバは個々のロボットアームの遠位端に結合される。リーダ部分をシース部分と同軸に位置合わせすることを容易にする、器具ドライバ28のこの線形配置は、1つ以上のロボットアーム12を異なる角度および/または位置に操作することによって、空間内で再配置され得る「仮想レール」29を作成する。本明細書で説明する仮想レールは破線を使用して図示され、したがって、破線はシステムのいかなる物理的構造も示さない。仮想レール29に沿った器具ドライバ28の移動は外部シース部分に対して内側リーダ部分を入れ子式にし、または内視鏡13を患者から前進または後退させる。仮想レール29の角度は、臨床用途または医師の好みに基づいて、調整、移動、および旋回されてもよい。例えば、気管支鏡検査では、図示のような仮想レール29の角度および位置が内視鏡13を患者の口内に曲げることに起因する摩擦を最小限に抑えながら、内視鏡13への医師のアクセスを提供することの折衷案を表す。
内視鏡13は、挿入後、ロボットシステムからの正確なコマンドを使用して、目標位置または手術部位に到達するまで、患者の気管および肺に向けられ得る。患者の肺ネットワークを通るナビゲーションを強化し、かつ/または所望の標的に到達するために、内視鏡13を操作して、外部シース部分から内側リーダ部分を入れ子式に延ばして、関節動作を強化し、曲げ半径を大きくすることができる。別個の器具ドライバ28の使用はまた、リーダ部分およびシース部分が、互いに独立して駆動されることを可能にする。
例えば、内視鏡13は例えば、患者の肺内の病変または結節などの標的に生検針を送達するように指示されてもよい。針は病理学者によって解析されるべき組織サンプルを得るために、内視鏡の長さにわたるワーキングチャネルに沿って展開され得る。病理学的結果に応じて、追加のツールが追加の生検のために、内視鏡のワーキングチャネルの下方に配置されてもよい。悪性である結節を同定した後、内視鏡13は、潜在的に癌性の組織を切除するためのツールを内視鏡的に送達し得る。いくつかの例において、診断および治療手技は、別々の手技で送達される必要があり得る。これらの状況では、内視鏡13はまた、基準を送達して、対象結節の位置を「マーキング」するために使用され得る。他の例において、診断および治療手技は、同じ手順の間に送達され得る。
システム10はまた、可動タワー30を含むことができ、このタワー30は、支持ケーブルを介してカート11に接続されて、カート11に対する制御、電子機器、流体工学、光学系、センサ、および/または電力のためのサポートを提供することができる。このような機能をタワー30内に配置することにより、より小さなフォームファクタのカート11が可能になり、これは、手術医師およびそのスタッフによって、より容易に調整および/または再配置され得る。さらに、カート/テーブルと支持タワー30との間の機能の分割は手術室の混乱を低減し、臨床作業の流れを改善することを容易にする。カート11を患者の近くに配置することができるが、タワー30は手技中に邪魔にならないように離れた場所に収容することができる。
上述のロボットシステムのサポートにおいて、タワー30はコンピュータプログラム命令を、例えば、永続的磁気記憶ドライブ、ソリッドステートドライブなどの非一時的コンピュータ可読記憶媒体内に記憶するコンピュータベースの制御システムの構成要素を含むことができる。これらの命令の実行は、実行がタワー30またはカート11内で行われるかどうかにかかわらず、システム全体またはそのサブシステムを制御することができる。例えば、コンピュータシステムのプロセッサによって実行される場合、命令はロボットシステムの構成要素に、関連するキャリッジおよびアームマウントを作動させ、ロボットアームを作動させ、医療器具を制御させることができる。例えば、制御信号の受信に応じて、ロボットアームのジョイント内のモータは、アームを特定の姿勢に位置決めすることができる。
タワー30はまた、内視鏡13を通して展開され得るシステムに制御された潅注および吸引能力を提供するために、ポンプ、流量計、弁制御、および/または流体アクセスを含む。これらの構成要素は、タワー30のコンピュータシステムを使用して制御することもできる。いくつかの実施形態では、洗浄および吸引能力が別個のケーブルを介して内視鏡13に直接送達されてもよい。
タワー30はカート11にフィルタされ保護された電力を供給するように設計された電圧およびサージプロテクタを含むことができ、それによって、カート11内に電力変圧器および他の補助電力部品を配置することが回避され、その結果、より小さく、より可動性の高いカート11が得られる。
タワー30はまた、ロボットシステム10全体に展開されるセンサのための支持装置を含むことができる。例えば、タワー30はロボットシステム10全体にわたって光学センサまたはカメラから受信したデータを検出し、受信し、処理するための光電子機器を含むことができる。制御システムと組み合わせて、このような光電子機器を使用して、タワー30を含むシステム全体に配置された任意の数のコンソールに表示するためのリアルタイム画像を生成することができる。同様に、タワー30は配置された電磁(EM;Electromagnetic)センサから受信された信号を受信し、処理するための電子サブシステムも含む
ことができる。タワー30はまた、医療器具内または医療器具上の電磁センサによる検出のために電磁場発生器を収容し、位置決めするために使用されてもよい。
タワー30は、システムの残りの部分で利用可能な他のコンソール、例えばカートの頂部に取り付けられたコンソールに加えて、コンソール31を含むこともできる。コンソール31は、ユーザインタフェースと、医師の操作者のためのタッチスクリーンなどの表示画面とを含むことができる。システム10内のコンソールは一般に、ロボット制御と、内視鏡13のナビゲーションおよび位置決め情報などの手術前およびリアルタイム情報との両方を提供するように設計される。コンソール31が医師が利用できる唯一のコンソールではない場合、看護師のような第二の操作者によって、患者の健康状態や活動状態とシステムの動作を監視し、ナビゲーションおよび位置決め情報などの手技固有のデータを提供するために使用することができる。他の実施形態では、コンソール30は、タワー30とは別の筐体内に格納されている。
タワー30は、1つまたは複数のケーブルまたは接続部(図示せず)を介してカート11および内視鏡13に結合することができる。いくつかの実施形態では、タワー30からのサポート機能が単一のケーブルを介してカート11に提供されてもよく、手術室を単純化し、混乱を解消する。他の実施形態では、特定の機能が別個のケーブル配線および接続で結合されてもよい。例えば、単一の電力ケーブルを介してカートに電力を供給することができるが、制御、光学、流体、および/またはナビゲーションのための支持体は別個のケーブルを介して提供することができる。
図2は、図1に示されたカートベースのロボット使用可能システムからのカートの実施形態の詳細図を提供する。カート11は全体として、細長い支持構造14(しばしば「カラム」と呼ばれる)、カート基部15、およびカラム14の上端部にコンソール16を含む。カラム14は、1つまたは複数のロボットアーム12(図2には3つが示されている)の展開を支持するためのキャリッジ17(あるいは「アーム支持体」)などの1つまたは複数のキャリッジを含むことができる。キャリッジ17は、患者に対してより良好に位置決めするためにロボットアーム12の基部を調整するために垂直軸に沿って回転する個別に構成可能なアームマウントを含むことができる。キャリッジ17はまた、キャリッジ17がカラム14に沿って垂直に移動することを可能にするキャリッジインタフェース19を含む。
キャリッジインタフェース19は、キャリッジ17の垂直方向の移動を案内するためにカラム14の両側に配置されたスロット20のようなスロットを介してカラム14に接続されている。スロット20はキャリッジをカート基部15に対して種々の垂直高さに位置決めし、保持するための垂直移動インタフェースを含む。キャリッジ17の垂直移動は、カート11が様々なテーブル高さ、患者サイズ、および医師の好みに合うようにロボットアーム12の到達範囲を調整することを可能にする。同様に、キャリッジ17上の個々に構成可能なアームマウントは、ロボットアーム12のロボットアームベース21が様々な構成で角度付けされることを可能にする。
いくつかの実施形態では、スロット20がキャリッジ17が垂直に移動するときに、カ
ラム14の内部チャンバおよび垂直移動インタフェース内への汚れおよび流体の進入を防止するために、スロット表面と面一であり、かつ平行であるスロットカバーで補足されてもよい。スロットカバーは、スロット20の縦上端部および底部の近くに配置されたバネスプールの対を通して展開されてもよい。カバーはキャリッジ17が垂直に上下に平行移動するときに、展開されてそれらのコイル状態から伸縮するまで、スプール内でコイル状に巻かれる。スプールのばね荷重はキャリッジ17がスプールに向かって移動するときにカバーをスプール内に引っ込める力を提供し、一方、キャリッジ17がスプールから離れるように移動するときにも緊密な捺印を維持する。カバーは例えば、キャリッジ17が移動するときにカバーの適切な伸縮を確実にするために、キャリッジインタフェース19内のブラケットを使用して、キャリッジ17に接続されてもよい。
カラム14はユーザ入力、例えばコンソール16からの入力に応答して生成される制御信号に応答して機械的な方法でキャリッジ17を移動させるために、垂直に位置合わせされた親ねじを使用するように設計された、歯車およびモータなどの機構を内部に備えることができる。
ロボットアーム12は一般に、一連のジョイント24によって接続された一連のリンク機構23によって分離されたロボットアーム基部21およびエンドエフェクタ22を備えることができ、各ジョイントは独立したアクチュエータを備え、各アクチュエータは独立して制御可能なモータを備える。各独立して制御可能なジョイントは、ロボットアームに利用可能な独立した自由度を表す。アーム12のそれぞれは7つのジョイントを有し、したがって、7つの自由度を提供する。多数のジョイントは多数の自由度をもたらし、「冗長である」自由度を可能にする。冗長な自由度は、ロボットアーム12が異なる結合位置および関節角を使用して、空間内の特定の位置、向き、および軌道にそれぞれのエンドエフェクタ22を位置決めすることを可能にする。これにより、システムは医師が腕の関節を患者から離れた臨床的に有利な位置に移動させて、腕の衝突を回避して、より広いアクセス範囲を実現しながら、空間内の所望の位置から医療器具を位置決めしたり方向付けたりすることが可能になる。
カート基部15は、床上のカラム14、キャリッジ17、およびアーム12の重量を釣り合わせる。したがって、カート基部15は、電子機器、モータ、電源などのより重い構成要素、ならびにカートの移動および/または固定のいずれかを可能にする構成要素を収容する。例えば、カート基部15は、手技の前にカートが部屋の周りを容易に移動することを可能にする、回転可能なホイール形状のキャスタ25を含む。適切な位置に到達した後、キャスタ25は、手技中にカート11を所定の位置に保持するためにホイールロックを使用して固定されてもよい。
コンソール16はカラム14の垂直端部に配置されているので、ユーザ入力を受け取るためのユーザインタフェースと、医師ユーザに手術前および手術中の両方のデータを提供するための表示画面(または、例えば、タッチスクリーン26などの二目的用装置)との両方を可能にする。タッチスクリーン26上の潜在的な術前データは、術前計画、術前コンピュータ断層撮影(CT)スキャンから導出されたナビゲーションおよびマッピングデータ、および/または術前患者インタビューからの注を含むことができる。ディスプレイ上の手術中データは、器具から提供される光学情報、センサおよびセンサからの座標情報、ならびに呼吸、心拍数、および/または脈拍などの患者の活動統計を含むことができる。コンソール16は医師がキャリッジ17の反対側のカラム14の側からコンソールにアクセスすることができるように、配置され、傾斜されてもよい。この位置から、医師はカート11の背後からコンソール16を操作しながら、コンソール16、ロボットアーム12、および患者を見ることができる。図示のように、コンソール16はまた、カート11の操縦および安定化を補助するためのハンドル27を含む。
図3は、尿管鏡検査のために配置されたロボット使用可能システム10の実施形態を示す。尿管鏡手技では、カート11が患者の尿道および尿管を横切るように設計された手技特有の内視鏡である尿管鏡32を患者の下腹部領域に送達するように配置されてもよい。尿管鏡検査では、尿管鏡32を患者の尿道と直接位置合わせして、領域内の繊細な解剖学的構造に対する摩擦および力を低減することが望ましい場合がある。図に示されるように、カート11はロボットアーム12が患者の尿道への直接的な線形アクセスのために尿管鏡32を位置決めすることを可能にするために、テーブルの足に位置合わせすることができる。テーブルの足から、ロボットアーム12は、尿管鏡32を仮想レール33に沿って尿道を通して患者の下腹部に直接挿入することができる。
尿道への挿入後、気管支鏡検査におけるのと同様の制御手法を使用して、尿管鏡32は診断および/または治療用途のために、膀胱、尿管、および/または腎臓内にナビゲートされ得る。例えば、尿管鏡32は、尿管鏡32のワーキングチャネルの下に配置されたレーザまたは超音波砕石装置を用いて、尿管および腎臓に向けられて、腎結石の蓄積を破壊することができる。砕石術が完了した後、得られた結石断片は、尿管鏡32の下方に配置されたバスケットを用いて除去され得る。
図4は、血管手技のために同様に配置されたロボット使用可能システムの実施形態を示す。血管手技では、システム10がカート11が操縦可能なカテーテルなどの医療器具34を患者の脚の大腿動脈内のアクセスポイントに送ることができるように構成することができる。大腿動脈はナビゲーションのためのより大きな直径と、患者の心臓への比較的遠回りで曲がりくねった経路との両方の特徴があり、このためナビゲーションを単純化できる。尿管鏡手技におけるように、カート11は、ロボットアーム12が患者の大腿/股関節領域における大腿動脈アクセスポイントへの直接的な線形アクセスを有する仮想レール35を提供することを可能にするように、患者の脚および下腹部に向かって配置され得る。動脈内への挿入後、医療器具34は、器具ドライバ28を移動させることによって方向付けられ、挿入されてもよい。あるいは、カートが例えば、肩および手首の近くの頸動脈および上腕動脈などの代替の血管アクセスポイントに到達するために、患者の上腹部の周りに配置されてもよい。
(B.ロボットシステム-テーブル)
ロボット対応医療システムの実施形態はまた、患者のテーブルを組み込んでもよい。テーブルを組み込むことにより、カートを取り外すことによって手術室内の資本設備の量が減少し、患者へのアクセスがより大きくなる。図5は、気管支鏡検査手順のために配置されたそのようなロボット使用可能システムの実施形態を示す。システム36は、床の上にプラットフォーム38(「テーブル」または「ベッド」として示される)を支持するための支持構造または支柱37を含む。カートベースのシステムと同様に、システム36のロボットアーム39のエンドエフェクタは、図5の気管支鏡40などの細長い医療器具を、器具ドライバ42の直線的な位置合わせから形成された仮想レール41を通して、またはそれに沿って操作するように設計された器具ドライバ42を備える。実際には、X線透視画像を提供するためのCアームがテーブル38の周りにエミッタおよび検出器を配置することによって、患者の上腹部領域の上に配置され得る。
図6は、説明のため患者および医療器具を除いたシステム36の代替図を示す。図示されているように、カラム37はシステム36内にリング形状として示されている1つ以上のキャリッジ43を含むことができ、このキャリッジを基に1つ以上のロボットアーム39を構成することができる。キャリッジ43はロボットアーム39が患者に到達するように配置され得る異なる視点を提供するために、カラム37の長さに沿って延びる垂直カラムインタフェース44に沿って移動してもよい。キャリッジ43は、カラム37内に配置
された機械的モータを使用してカラム37の周りを回転して、ロボットアーム39がテーブル38の複数の側、例えば患者の両側にアクセスできるようにすることができる。複数のキャリッジを有する実施形態では、キャリッジがカラム上に個別に配置されてもよく、他のキャリッジとは独立して移動および/または回転してもよい。キャリッジ43はカラム37を取り囲む必要はなく、または円形である必要もないが、図示されるようなリング形状は構造的バランスを維持しながら、カラム37の周りのキャリッジ43の回転を容易にする。キャリッジ43の回転および移動により、システムは、内視鏡および腹腔鏡のような医療器具を患者の異なるアクセスポイントに位置合わせすることができる。他の実施形態(図示せず)では、システム36は、調節可能なアーム支持部を有する患者テーブルまたはベッドを備えてもよく、アーム支持部はテーブルまたはベッドに沿って延伸するバーやレールの形態として設けることができる。1つまたは複数のロボットアーム39(肘関節を有する肩部を介するなどによる)は、上記の調節可能なアーム支持部を垂直方向に調整して取り付けることができる。垂直方向の調整ができることで、ロボットアーム39は、患者テーブルまたは別途の下にコンパクトに収容でき、後で手技時に引き上げることができる。
アーム39は、ロボットアーム39に追加の構成要素を提供するために個別に回転および/または入れ子式に延在することができる一連のジョイントを備える一組のアームマウント45を介してキャリッジに取り付けることができる。さらに、アームマウント45は、キャリッジ43が適切に回転されたときに、アームマウント45がテーブル38の同じ側(図6に示す)、テーブル38の反対側(図9に示す)、またはテーブル38の隣接する側(図示せず)のいずれかに配置されるように、キャリッジ43上に配置されてもよい。
カラム37は構造的に、テーブル38を支持し、キャリッジを垂直方向に移動させるための経路を提供する。内部においては、カラム37がキャリッジの垂直移動を案内するためのリードスクリューと、リードスクリューに基づいて前記キャリッジの移動を機械化するためのモータとを備えることができる。カラム37はまた、キャリッジ43およびその上に取り付けられたロボットアーム39に電力および制御信号を伝達することができる。
テーブル基部46は図2に示すカート11のカート基部15と同様の機能を果たし、テーブル/ベッド38、カラム37、キャリッジ43、およびロボットアーム39をバランスさせるためのより重い構成要素を収容する。テーブル基部46はまた、手技中の安定性を提供するために、硬性キャスタを組み込んでもよい。キャスタはテーブル基部46の下端から展開されて、基部46の両側で反対方向に延在し、システム36を移動させる必要があるときに後退することができる。
引き続き図6を参照すると、システム36は、テーブルとタワーとの間でシステム36の機能を分割してテーブルのフォームファクタおよびバルクを低減するタワー(図示せず)を含むこともできる。上記の実施形態と同様に、タワーは、処理、計算、および制御能力、電力、流体工学、ならびに/または光学およびセンサ処理などの様々なサポート機能をテーブルに提供することができる。タワーはまた、医師のアクセスを改善し、手術室を煩雑にしないようにするために、患者から離れて配置されるように移動可能であってもよい。さらに、タワー内に部品を配置することにより、ロボットアームの潜在的な収納のためのテーブル基部内のより大きい収納スペースが実現する。タワーはまた、キーボードおよび/またはペンダントなどのユーザ入力のためのユーザインタフェースと、リアルタイム画像、ナビゲーション、および追跡情報などの術前および術中情報のための表示画面(またはタッチスクリーン)との両方を提供するコンソールを含むことができる。
いくつかの実施形態では、テーブル基部が使用されていないときにロボットアームを収
納し、格納することができる。図7は、テーブルベースのシステムの一実施形態においてロボットアームを収容するシステム47を示す。システム47では、キャリッジ48がロボットアーム50、アームマウント51、およびキャリッジ48を基部49内に収容するために、基部49内に垂直に移動させることができる。基地カバー52は、キャリッジ48、アームマウント51、およびアーム50を列53の近辺に展開するために移動されて開閉され、使用されていないときにそれらを保護するために閉じられてもよい。基部カバー52は、その開口の縁部に沿って膜54で封止されて、閉鎖時の汚れおよび流体の進入を防止することができる。
図8は、尿管鏡検査手順のために構成されたロボット使用可能なテーブルベースのシステムの実施形態を示す。尿管鏡検査では、テーブル38が患者をカラム37およびテーブル基部46から外れた角度に位置決めするための旋回部分55を含むことができる。旋回部分55は旋回部分55の下端を支柱37から離して位置決めするために、旋回点(例えば、患者の頭部の下に位置する)の周りで回転または旋回してもよい。例えば、旋回部分55の旋回は、Cアーム(図示せず)がテーブル38の下のカラム(図示せず)と空間を競合することなく、患者の下腹部の上に配置されることを可能にする。キャリッジ35(図示せず)を支柱37の周りに回転させることによって、ロボットアーム39は、尿管鏡56を仮想レール57に沿って患者の鼠径部に直接挿入して尿道に到達させることができる。尿管鏡検査では、手技中に患者の脚の位置を支持し、患者の鼠径部への明確なアクセスを可能にするために、スターラップ58をテーブル38の旋回部分55に固定することもできる。
腹腔鏡手技では、患者の腹壁の小さな切開を通して、最小侵襲性器具(1つ以上の切開のサイズに適応するように細長い形状)が患者の解剖学的構造に挿入され得る。患者の腹腔を膨張させた後、しばしば腹腔鏡と呼ばれる器具は把持、切断、切除、縫合などの手術タスクや医療タスクを実行するように指示されてもよく、図9は腹腔鏡手技のために構成されたロボット使用可能なテーブルベースのシステムの実施形態を示す。図9に示されるように、システム36のキャリッジ43はテーブル38の両側にロボットアーム39の対を位置決めするように回転され、垂直に調整され、その結果、腹腔鏡59は患者の腹腔に到達するために患者の両側の最小切開部を通過するようにアームマウント45を使用して位置決めされ得る。
腹腔鏡手技に適応するために、ロボット使用可能テーブルシステムは、プラットフォームを所望の角度に傾斜させることもできる。図10は、ピッチまたはチルト調整を有するロボット使用可能医療システムの実施形態を示す。図10に示すように、システム36は、テーブル38の傾斜に適応して、テーブルの一部分を床から他の部分よりも大きな距離に位置決めすることができる。さらに、アームマウント45はアーム39がテーブル38と同じ平面関係を維持するように、傾きに合わせて回転することができる。より急勾配の角度に適応するために、カラム37は、カラム37の垂直延長部がテーブル38が床に触れたり基部46と衝突したりしないようにする入れ子式部分60を含むこともできる。
図11は、テーブル38とカラム37との間のインタフェースの詳細を示す。ピッチ回転機構61は、欄37に対するテーブル38のピッチ角を複数の自由度で変更するように構成されてもよい。ピッチ回転機構61はカラム・テーブル・インタフェースにおける直交軸1、2の位置決めによって可能にすることができ、各軸は、電気的なピッチ角コマンドに応答して各軸が別個のモータ3、4によって作動される。一方のねじ5に沿った回転は一方の軸1における傾斜調整を可能にし、他方のねじ6に沿った回転は、他方の軸2に沿った傾斜調整を可能にする。いくつかの実施形態では、ボールジョイントを用いて、複数の自由度でカラム37に対する相対的なテーブル38のピッチ角を変更することができる。
例えば、ピッチ調整は下腹部手術のために、テーブルをトレンデレンブルグ位置に位置決めしようとするとき、すなわち、患者の下腹部を患者の下腹部よりも床から高い位置に位置決めしようとするとき、特に有用である。トレンデレンブルグ位置は患者の内部器官を重力によって患者の上腹部に向かってスライドさせ、腹腔鏡前立腺切除術などの下腹部の手術手技や医療手技を開始して実行するための最小侵襲性ツール(minimally invasive
tool)のために腹腔の空間を空ける。
(C.器具ドライバとインタフェース)
システムのロボットアームのエンドエフェクタは、(1)医療器具を作動させるための電気機械的手段を組み込む器具ドライバ(あるいは「器具駆動機構」または「器具装置マニピュレータ(IDM;instrument device manipulator)」と呼ばれる)と、(2)モ
ータなどの任意の電気機械的構成要素を削除できる取り外し可能または取り外し可能な医療器具とを備える。この二分法は、医療手技に使用される医療器具を滅菌する必要性、およびそれらの複雑な機械的アセンブリおよび繊細な電子機器のために高価な資本設備を適切に滅菌することができないことが起因となりうる。したがって、医療器具は医師または医師のスタッフによる個々の滅菌または廃棄のために、器具ドライバ(したがってシステム)から取り外し、取り外し、および交換されるように設計されてもよい。対照的に、器具ドライバは、交換または滅菌される必要はなく、保護のためにドレープで覆われてもよい。
図12は、例示的な器具ドライバを示す。ロボットアームの遠位端に配置された器具ドライバ62は駆動シャフト64を介して医療器具に制御されたトルクを提供するために、平行軸に配置された1つ以上の駆動ユニット63を備える。各駆動ユニット63は器具と相互作用するための個々の駆動シャフト64と、モータシャフトの回転を所望のトルクに変換するためのギアヘッド65と、駆動トルクを生成するためのモータ66と、モータシャフトの速度を測定し、制御回路にフィードバックを提供するためのエンコーダ67と、制御信号を受信し、駆動ユニットを作動させるための制御回路68とを備える。各駆動ユニット63は独立して制御され、電動化されており、器具ドライバ62は、医療器具に複数(図12に示すように4つ)の独立した駆動出力を提供することができる。動作中、制御回路68は制御信号を受信し、モータ信号をモータ66に送信し、エンコーダ67によって測定された結果のモータ速度を所望の速度と比較し、モータ信号を変調して所望のトルクを生成する。
無菌環境を必要とする手技では、ロボットシステムが器具ドライバと医療器具との間に位置する、無菌ドレープに接続された無菌アダプタなどの駆動インタフェースを組み込むことができる。無菌アダプタの主な目的は駆動シャフトと駆動入力との間の物理的分離、したがって無菌性を維持しながら、器具ドライバの駆動シャフトから器具の駆動入力に角運動を伝達することである。したがって、例示的な無菌アダプタは、器具ドライバの駆動シャフトおよび器具上の駆動入力と嵌合されることが意図される一連の回転入力および出力を備えてもよい。滅菌アダプタに接続された滅菌ドレープは透明または半透明プラスチックなどの薄い軟性材料からなり、器具ドライバ、ロボットアーム、およびカート(カートベースのシステム内)またはテーブル(テーブルベースのシステム内)などの資本設備を覆うように設計される。ドレープの使用は滅菌を必要としない領域(すなわち、非滅菌領域)に依然として配置されている間に、患者の近くに資本設備を配置することを可能にする。滅菌ドレープの反対側では、医療器具が滅菌を必要とする領域(すなわち、滅菌野)において患者と接触することができる。
(D.医療器具)
図13は、組になった器具ドライバを有する例示的な医療器具を示す。ロボットシステ
ムと共に使用するように設計された他の器具と同様に、医療器具70は、細長いシャフト71(または細長い本体)および器具基部72を備える。医師による手動操作向けの設計として「器具ハンドル」とも呼ばれる器具基部72は、全体として、ロボットアーム76の遠位端で器具ドライバ75上の駆動インタフェースを通って延びる駆動出力74と嵌合するように設計された、回転可能な駆動入力73、例えば、レセプタクル、プーリ、またはスプールを備えてもよい。物理的に接続され、ラッチされ、および/または結合されると、器具基部72の嵌合された駆動入力73は器具ドライバ75内の駆動出力74と回転軸を共有し、駆動出力74から駆動入力73へのトルクの伝達が可能になる。いくつかの実施形態では、駆動出力74が駆動入力73上のレセプタクルと嵌合するように設計されたスプラインを備えてもよい。
細長いシャフト71は例えば、内視鏡検査におけるように、解剖学的な開口またはルーメン、または、例えば、腹腔鏡検査におけるように、最小侵襲性切開のいずれかを介して送られるように設計される。細長いシャフト66は軟性(例えば、内視鏡と同様の特性を有する)または硬性(例えば、腹腔鏡と同様の特性を有する)のいずれかであり得るか、または軟性部分および硬性部分の両方のカスタマイズされた組み合わせを含む。腹腔鏡検査用に設計される場合、硬性の細長いシャフトの遠位端は回転軸を有するUリンクと、器具ドライバ75の駆動出力74から受け取ったトルクに応じて駆動入力が回転するときにテンドンからの力に基づいて作動され得る、例えば、1つまたは複数の把持器などの手術用ツールや医療器具とから形成される接合手首を備えるエンドエフェクタに接続されてもよい。内視鏡検査用に設計される場合、可撓性の細長いシャフトの遠位端は、器具ドライバ75の駆動出力74から受け取られるトルクに基づいて関節動作および屈曲され得る、操縦可能または制御可能な屈曲部を含む。
器具ドライバ75からのトルクは、シャフト71内のテンドンを使用して細長いシャフト71に伝達される。プルワイヤなどのこれらの個々のテンドンは、器具ハンドル72内の個々の駆動入力73に個々に固定することができる。ハンドル72から、テンドンは、細長いシャフト71内の1つ以上のプルルーメンに向けられ、細長いシャフト71の遠位部分に固定される。腹腔鏡検査では、これらのテンドンが手首、把持器、またはさみなどの遠位に取り付けられたエンドエフェクタに結合されてもよい。このような構成の下では、駆動入力73に及ぼされるトルクがテンドンに表面張力を伝達し、それによってエンドエフェクタを何らかの方法で作動させる。腹腔鏡検査では、テンドンは関節を軸の周りに回転させ、それによってエンドエフェクタを一指示または別の指示に移動させることができる。あるいはテンドンは細長いシャフト71の遠位端において、把持器の1つ以上の顎に接続され得、ここで、テンドンからの張力によって把持器が閉じる。
内視鏡検査では、テンドンは接着剤、制御リング、または他の機械的固定を介して、細長いシャフト71に沿って(例えば、遠位端で)配置された屈曲または関節動作部に結合されてもよい。屈曲部の遠位端に固定して取り付けられると、駆動入力73に及ぼされるトルクがテンドンに伝達され、より柔軟性のある屈曲部(関節部または関節動作領域と呼ばれることもある)を屈曲または関節動作させる。非屈曲部に沿って、個々のテンドンを内視鏡シャフトの壁に沿って(または内側に)向ける個々のプルルーメンを螺旋状または螺旋状にして、プルワイヤの表面張力から生じる半径方向の力を釣り合わせることが効果的であり得る。スパイラルの角度および/またはそれらの間の間隔は特定の目的のために変更または設計されてもよく、スパイラルを緊密にすると荷重力下でのシャフト圧縮が小さくなり、一方、スパイラルを少なくすると荷重力下でのシャフト圧縮が大きくなるが限界曲げとなる。スペクトルの他端では、プルルーメンが細長いシャフト71の長手方向軸に平行に向けられて、所望の屈曲または関節動作可能な部分における制御された関節動作が可能となる。
内視鏡検査では、細長いシャフト71がロボットシステム手技を補助するために、いくつかの構成要素を収容する。シャフトは、シャフト71の遠位端における手術領域に手術用ツール(または医療器具)、潅注、および/または吸引を展開するためのワーキングチャネルを備えてもよい。シャフト71はまた、ワイヤおよび/または光ファイバを収容して、光学カメラを含む遠位先端の光学アセンブリへ/から信号を伝達し得る。シャフト71はまた、光ファイバを収容して、発光ダイオードなどの近位に位置する光源からシャフトの遠位端に光を運ぶことができる。
器具70の遠位端において、遠位先端はまた、診断および/または治療、潅注、および吸引のためのツールを手術部位に送達するためのワーキングチャネルの開口を備え得る。遠位先端はまた、内部解剖学的空間の画像を取得するために、ファイバースコープまたはデジタルカメラなどのカメラのためのポートを含んでもよい。関連して、遠位先端はまた、カメラを使用するときに解剖学的空間を照明するための光源のためのポートを含む。
図13の例では駆動シャフト軸、したがって駆動入力軸は細長いシャフトの軸に直交する。しかしながら、この配置では、細長いシャフト71の回転機能が複雑になる。駆動入力73を静止状態に保ちながら、細長いシャフト71をその軸に沿って回転させると、テンドンが駆動入力73から延出して細長いシャフト71内のプルルーメンに入るときに、テンドンの望ましくない絡み合いが生じる。そのようなテンドンによって生じる絡み合いは、内視鏡手技時に可撓性の細長いシャフトの移動を予測することを目的とする任意の制御アルゴリズムの障害となり得る。
図14は器具ドライバおよび器具の代替設計を示し、駆動ユニットの軸が器具の細長いシャフトの軸に平行である。図示のように、円形の器具ドライバ80は、ロボットアーム82の端部に平行に位置合わせされた駆動出力81を有する4つの駆動ユニットを備える。駆動ユニットおよびそれぞれの駆動出力81は、アセンブリ83内の駆動ユニットのうちの1つによって駆動される器具ドライバ80の回転アセンブリ83内に収容される。回転駆動ユニットによって提供されるトルクに応じて、回転アセンブリ83は、回転アセンブリ83を器具ドライバの非回転部分84に接続する円形ベアリングに沿って回転する。電気接点を介して器具ドライバ80の非回転部分84から回転アセンブリ83に電力および制御信号を伝達することができ、この信号は、ブラシ付きスリップリング接続(図示せず)による回転によって維持することができる。他の実施形態では、回転アセンブリ83が非回転部分84に一体化され、したがって他の駆動ユニットと平行ではない別個の駆動ユニットに応答することができる。回転機構83は、器具ドライバ80が器具ドライバ軸85の周りに単一のユニットとして、駆動ユニットおよびそれぞれの駆動出力81を回転させることができる。
上記に開示した実施形態と同様に、器具86は、細長いシャフト部分88と、器具ドライバ80内の駆動出力81を受けるように構成された複数の駆動入力89(レセプタクル、プーリ、およびスプールなど)を備える器具基部87(説明のために透明な外皮と共に示されている)とを備えることができる。先に開示された実施形態とは異なり、器具シャフト88は、図13の設計におけるように直交するのではなく、駆動入力89の軸に実質的に平行な軸を有する器具基部87の中心から延伸する。
器具ドライバ80の回転アセンブリ83に結合されると、器具基部87および器具シャフト88を備える医療器具86は、器具ドライバ軸85の周りで回転アセンブリ83と組み合わせて回転する。器具シャフト88は器具基部87の中心に配置されているので、器具シャフト88は取り付けられたとき、器具ドライバ軸85と同軸である。したがって、回転アセンブリ83の回転は、器具シャフト88をそれ自体の前後軸の周りに回転させる。さらに、器具基部87が器具シャフト88と共に回転するとき、器具基部87の駆動入
力89に接続されたテンドンは、回転中に絡み合わない。したがって、駆動出力81、駆動入力89、および器具シャフト88の軸の平行性は、任意の制御テンドンの絡み合いを発生させることなく、シャフトを回転させることができる。
(E.ナビゲーションと制御)
従来の内視鏡検査には、X線透視法(例えば、Cアームを介して送達され得るよう)および他の形態の放射線ベースの画像化モダリティの使用が含まれ、操作者の医師に管腔内ガイダンスが提供される。一方、本件開示によって実現されるロボットシステムは、放射線に対する医師の曝露を低減し、手術室内の器具の数を減らすために、非放射線ベースのナビゲーションおよび位置決め手段を提供する。本明細書で使用されるように、用語「位置決め」は、基準座標系における物体の位置を特定および/または監視することを指すことができる。術前マッピング、コンピュータ視覚、リアルタイム電磁追跡、およびロボットコマンドデータなどの技術は放射線を用いない運用環境を達成するために、個別に、または組み合わせて使用されてもよい。放射線ベースの画像モダリティが依然として使用される他の場合には、術前マッピング、コンピュータ視覚、リアルタイム電磁追跡、およびロボットコマンドデータは放射線ベースの画像モダリティによってのみ得られる情報を改善するために、個別に、または組み合わせて使用されてもよい。
図15は、例示的な実施形態による、器具の位置など、ロボットシステムの1つまたは複数の要素の位置を推定する位置決めシステム90を示すブロック図である。位置決めシステム90は、1つまたは複数の命令を実行するように構成された1つまたは複数の計算装置のセットとすることができる。計算装置は、上述の1つまたは複数の構成要素内のプロセッサ(または複数のプロセッサ)およびコンピュータ可読メモリによって具現化され得る。限定ではなく例示として、計算装置は、図1に示すタワー30内や、図1~4に示すカート内や、図5~10に示すベッド内などに配置されてよい。
図15に示すように、位置決めシステム90は、入力データ91~94を処理して医療器具の遠位先端の位置データ96を生成する位置決めモジュール95を含むことができる。位置データ96は、基準系に対する器具の遠位端の位置および/または向きを表すデータまたはロジックであってもよい。基準系は、患者の解剖学的構造、または電磁場発生器(電磁場発生器については以下の説明を参照)などの既知の物体に対する基準系とすることができる。
ここで、さまざまな入力データ91~94についてより詳細に説明する。術前マッピングは、低線量CTスキャンの収集を使用することによって達成することができる。術前CTスキャンは2次元画像を生成し、各画像は、患者の内部解剖学的構造の破断図の「スライス」を表す。集合体で解析される場合、患者の肺ネットワークなどの患者の解剖学的構造の解剖学的空洞、空間、および構造のための画像ベースのモデルが生成され得る。中心線ジオメトリのような手法は、CT画像から決定され、近似されて、モデルデータ91と呼ばれる(術前CTスキャンにのみ用いられる場合は「術前モデルデータ」とも呼ばれる)患者の解剖学的構造の3次元ボリュームを展開することができる。中心線ジオメトリの使用については、米国特許第14/523,760号に記載されており、その内容の全体を本願に援用する。また、ネットワークトポロジーモデルは、CT画像から導出されてもよく、気管支鏡検査に特に適している。
いくつかの実施形態では、器具が視覚データ92を提供するためにカメラを装備することができる。位置決めモジュール95は1つまたは複数の視覚ベースの位置追跡を可能にするために、視覚データを処理することができる。例えば、手術前モデルデータは医療器具(例えば、内視鏡または内視鏡のワーキングチャネルを通る器具の前進)のコンピュータ視覚ベースの追跡を可能にするために、視覚データ92と共に使用されてもよい。例え
ば、手術前モデルデータ91を使用して、ロボットシステムは内視鏡の予想される移動経路に基づいてモデルから予想される内視鏡画像のライブラリを生成することができ、各画像はモデル内の位置にリンクされる。手術中に、このライブラリはカメラ(例えば、内視鏡の遠位端にあるカメラ)で取得されたリアルタイム画像を画像ライブラリ内の画像と比較して位置決めを補助するために、ロボットシステムによって参照されてもよい。
他のコンピュータ視覚ベースの追跡技術は、カメラ、したがって内視鏡の動きを特定するために特徴追跡を使用する。位置決めモジュール95のいくつかの特徴は解剖学的な管腔に対応する手術前モデルデータ91内の円形の幾何学的形状を識別し、それらの幾何学的形状の変化を追跡して、どの解剖学的な管腔が選択されたかや、カメラの相対的な回転および/または移動運動を特定することができる。トポロジーマップの使用によって、視覚ベースのアルゴリズムまたは方法をさらに強化することができる。
別のコンピュータ視覚ベースの技術であるオプティカルフローはカメラの動きを推測するために、視覚データ92のビデオシーケンス内の画像画素の変位および移動を解析することができる。複数の反復にわたる複数のフレームの比較によって、カメラ(したがって、内視鏡)の移動および位置を特定することができる。
位置決めモジュール95は、リアルタイム電磁追跡を使用して、手術前モデルによって表される患者の解剖学的構造に位置合わせすることができるグローバル座標系における内視鏡のリアルタイム位置を生成し得る。電磁追跡では医療器具(例えば、内視鏡ツール)の1つ以上の位置および向きに埋め込まれた1つ以上のセンサコイルを備える電磁センサ(トラッカ)は既知の位置に配置された1つ以上の静的電磁場発生器によって生成された電磁場の変動を測定する。電磁センサによって検出された位置情報は、電磁データ記憶される。電磁場発生器(または送信機)は埋め込まれたセンサが検出し得る低強度磁場を生成するために、患者の近くに配置され得る。磁界は電磁センサコイルに小さな電流をガイドし、この電流は、電磁センサと電磁界発生器との間の距離および角度を特定するために解析され得る。これらの距離および向きは、座標系内の単一の位置を患者の解剖学的構造の手術前モデル内の位置と位置合わせさせる幾何学的変換を特定するために、患者の解剖学的構造(例えば、手術前モデル)に対して手術中に「位置合わせ」されてもよい。一旦位置合わせされると、医療器具の1つ以上の位置(例えば、内視鏡の遠位先端)に埋め込まれた電磁追跡装置は、患者の解剖学的構造を通る医療器具の進歩のリアルタイムの指示を提供し得る。
ロボットコマンドおよび運動学データ94はまた、ロボットシステムのための位置決めデータ96を提供するために、位置決めモジュール95によって使用されてもよい、関節動作コマンドから生じる装置ピッチおよびヨーは、手術前較正中に特定され得る。手術中に、これらの較正計量値は器具の位置を推定するために、既知の挿入デプス情報と組み合わせて使用されてもよい。あるいは、これらの計算がネットワーク内の医療器具の位置を推定するために、電磁、視覚、および/またはトポロジーモデリングと組み合わせて解析されてもよい。
図15に示すように、多数の他の入力データを位置決めモジュール95によって使用することができる。例えば、図15には示されていないが、形状感知ファイバを用いる器具は、位置決めモジュール95が器具の位置および形状を特定するために使用する形状データを提供することができる。
位置決めモジュール95は、入力データ91~94を組み合わせて使用することができる。場合によっては、このような組み合わせは位置決めモジュール95が入力データ91~94のそれぞれから特定された位置に信頼性重みを割り当てる確率的アプローチを使用
することができる。したがって、電磁データが信頼できない場合(電磁干渉がある場合のように)、電磁データによって特定される位置の信頼性は低下する可能性があり、位置決めモジュール95は、視覚データ92および/またはロボットコマンドおよび運動学データ94により依存する可能性がある。
上記の通り、本明細書で説明するロボットシステムは、上記の技術のうちの1つまたは複数の組み合わせを組み込むように設計することができる。タワー、ベッドおよび/またはカートに基づくロボットシステムのコンピュータベースの制御システムはコンピュータプログラム命令を、例えば、永続的磁気記憶ドライブ、ソリッドステートドライブなどの非一時的コンピュータ可読記憶媒体内に記憶することができ、これは、実行時に、システムにセンサデータおよびユーザコマンドを受信および解析させ、システム全体の制御信号を生成させ、グローバル座標系内の器具の位置、解剖学的マップなどのナビゲーションおよび位置決めデータを表示させる。
(2.器具の追跡およびナビゲーション)
図1~15を参照して説明したロボット対応医療システムは、医療手技または手術手技において、器具の追跡およびナビゲーション用に構成することができる。この手技は、例えば、内視鏡的手技または腹腔鏡的手技である。手技時に、医師は、患者の管腔ネットワークを介して器具をガイドまたは移動することができる。医師を支援することを目的として、例えば、患者の解剖学的構造に対する器具の位置を特定し、ユーザに表示することができる。
ロボットに対応医療システムは、図15の位置決めシステム90を有することができる。位置決めシステム90は、種々の入力データを受信および処理して、器具の位置を特定することができる。例えば、位置決めシステム90は、位置センサデータ(例えば、電磁データ、ロボット挿入データ(例えば、ロボットコマンドおよび運動学データ94)、視覚データ(例えば、視覚データ92)、および/または術前モデルデータ91を処理して、器具の位置を特定することができる。位置決めシステム90は、位置決めデータ96を出力することができる。
位置決めデータ96は、器具の「状態」を含むことができ、本明細書で使用する場合、器具の「状態」は、(とりわけ)器具の位置および/または向きに関する種々の情報を含む。例えば、器具の状態は、基準座標系に対してx,y,zの位置を含む。別の例として、器具の状態は、術前モデルに対する器具の位置を示す情報、例えば、器具が位置決めされている現在のセグメントおよびそのセグメント内の器具の深さを示す情報を含む。別の例として、器具の状態は、器具のピッチ、ヨー、ロールに関する情報など、器具の向きに関する情報を含む。
本開示において、器具の状態は、「推定」状態として説明される場合がある。これは、位置決めシステム90が、少なくとも部分的に1つ以上の入力データ(例えば、入力データ91~94)に基づいて、器具の位置または状態を推定するためである。器具の推定状態は、位置決めシステム90によって出力され、器具の実際の位置とは異なることがある。しかしながら、ここで説明するさまざまな追跡方法およびナビゲーション方法およびシステムの目標は、推定状態と器具の実際の位置との間の差を最小化または排除することでもある。
以下でより詳細に説明するように、場合によっては、位置決めシステム90は、手技時に器具が管腔ネットワークを通って移動するときに、器具の推定状態を特定するために使用される入力データの組み合わせを変更することができる。例えば、位置決めシステム90は、入力データ91~94のいずれかあるいは組み合わせたデータの使用から、異なる
1つのデータの使用や、入力データ91~94の組み合わせのサブセットのデータの使用や、入力データ91~94の異なる組み合わせのデータの使用に切り替えて、器具の推定状態を特定することもできる。この場合、器具の推定状態は、推定状態を導出するために位置決めシステム90によって使用される入力データの変更に起因して変動する場合がある。例えば、入力データ91~94のある1つの組み合わせによって特定される器具の状態が、入力データ91~94の別の組み合わせによって特定される推定状態から若干変化することがある。推定状態が医師に表示される場合、医師には、表示された器具の位置が突然変化したりジャンプしたりするように見える場合がある。これは、医師に支障をきたしたり、医師が方向感覚を失ったりする可能性があるため、望ましくないといえる。
位置決めシステム90は、器具の推定状態を特定するために使用される入力データの組み合わせを変更する場合の一例として、器具が術前モデルによって表現される管腔ネットワークの一部から術前モデルでは表現されない管腔ネットワークの別の部分に移動する場合が挙げられる。
以下により詳細に説明するように、位置決めシステム90は、器具が術前モデルによって表現される管腔ネットワークの部分内にある場合、入力データの特定の種類または組み合わせ、および器具が術前モデルによって表現されない管腔ネットワークの部分内に位置する場合、入力データまたは異なる種類の入力データの組み合わせのサブセットのデータを使用することができる。いくつかの例では、位置決めシステム90は、入力データ91~94の組み合わせを使用して、器具が術前モデルによって表現される管腔ネットワークの一部内にある場合に推定状態を導出し、電磁データを使用して、器具が術前モデルによって表現されない管腔ネットワークの一部内に位置する場合の推定状態を特定することができる。位置決めシステム90によって使用される入力データの変更の結果、器具の推定状態が、突然変化したりジャンプしたりする可能性がある。この場合も、特定された位置が医師に表示される場合は、医師に支障をきたしたり、医師が方向感覚を失ったりする可能性がある。
本明細書で説明するナビゲーションおよび追跡方法およびシステムは、この突然の変化やジャンプを低減または排除するために使用することができる。これは、ナビゲーションシステムが推定状態を特定するために使用するデータ入力を変更する変換点における位置変換を特定することによって達成できる。位置変換は、突然の変化やジャンプを低減または排除するために、未来の推定状態を調整するために使用することができる。位置変換によって調整された推定状態が、ユーザに表示されてもよい。これにより、医師の追跡およびナビゲーションのユーザエクスペリエンスが向上し、制御を改善することができる。追跡およびナビゲーションのシステムおよび方法の上記の特徴および利点や他の特徴および利点については、図16~24を参照しながら非限定的な例について以下に説明する。
(A.医療器具を用いた管腔ネットワークのナビゲーションの例)
図16は、一例としての管腔ネットワーク130内をナビゲートされる医療器具100(例えば、内視鏡)の一例を示す。図に示す実施形態では、管腔ネットワーク130は、患者の肺内の気道の気管支ネットワークである。図に示すように、管腔ネットワーク130は、分岐構造に配置された複数の管腔132を含む。他の例では、管腔ネットワーク130は、単一の管腔132(すなわち、分枝のない構造)のみを含んでもよい。説明を容易にするために、図16は、2次元構造としての管腔ネットワーク130を示すが、これは、本開示を2次元の管腔ネットワークに限定するものと解釈すべきではない。管腔ネットワーク130は、概して3次元構造を含み得る。
図16に示される管腔ネットワーク130は肺であるが、本明細書で説明する器具の追跡およびナビゲーションの方法およびシステムは、他の種類の管腔ネットワークにおいて
も実施することができる。そのような管腔ネットワーク130としては、例えば、気管支ネットワーク、腎臓ネットワーク、循環器ネットワーク(例えば、動脈および静脈)、胃腸管、尿路等が挙げられる。
図に示す例では、医療器具100は、シース115およびリーダ145を含む。シース115はワーキングチャネルを含み、リーダ145はシース115のワーキングチャネルを介して挿入される。器具100(シース115および/またはリーダ145)は、上記の通り操縦可能であってもよい。図に示すように、器具100は、診断および/または治療のために、管腔ネットワーク130を通って関心領域(例えば、結節155)に向かってナビゲーションすることができる(例えば、向き変更、ガイド、移動など)。この例では、結節155は、管腔ネットワーク130の周辺に位置している。
いくつかの実施態様において、器具100のシース115は、その全体が結節155内に進むには大きい第1の直径を有する場合がある。例えば、シース115の遠位端が、結節155の周りにある直径が小さい気道を通過できない場合がある。この場合、リーダ145は、シース115の第1の直径よりも小さい第2の直径を有するため、シース115のワーキングチャネルから、結節155に至る残りの距離を伸長することができる。
リーダ145は、生検針、細胞診ブラシ、組織サンプリング鉗子等の器具を結節155のターゲットの組織部位に通すことができるワーキングチャネルを有する。
図17は、医療器具100の実施形態の遠位端の詳細図を示す。図17の器具100は、図16のシース115またはリーダ145、または図1の内視鏡13、図3の尿管鏡32、図9の腹腔鏡59など、本開示全体において記載される他の医療器具のいずれかを代表するものである。図17に示すように、器具100の遠位端は、画像処理装置102、1つ以上の位置センサ(電磁位置センサを形成する電磁センサコイル104として図示)、および器具の遠位端付近の領域へのアクセスを可能にするために、生検針、細胞診ブラシ、鉗子、カテーテル、リーダ等の手術(または医療)器具を挿入できるワーキングチャネル106の開口を有してもよい。
電磁コイル104(電磁センサ104または位置センサとも呼ぶ)は、器具100の位置および向きを検出するために、電磁追跡システムとともに使用されてもよい。いくつかの実施形態では、電磁コイル104は、異なる軸に沿った電磁場に感応性を与えるように角度付けることができ、本件開示のナビゲーションシステムに、3つの位置自由度(DoF)(例えば、x,y,z位置)および3つの角度DoF(例えば、ピッチ、ロール、ヨー)の完全な6DoFを計測する能力を与える。他の実施形態では、単一の電磁コイル104が遠位端上または遠位端内に配置され、その軸が器具シャフトに沿った方向を向くように構成することができる。このようなシステムには回転対称性があるため、当該軸の周りの回転に対する感応性がなく、この実装においては5自由度のみが検出される。電磁コイル104は、電磁データ93(図15を参照)を提供するように構成することができ、位置確認システム90は、電磁データから器具100の推定状態を特定できる。いくつかの実施形態では、電磁コイル104は、位置決めシステム90に入力データを提供するため、および/または器具100の位置を検出するため、および/または器具100の推定状態を特定するために、他の種類の位置センサ(例えば、形状感知ファイバ、加速度計、ジャイロスコープ、超音波センサなど)と置き換えることができ、あるいはこれに加えて使用することができる。
電磁追跡システムは、電磁場発生器を有してもよい。電磁追跡システムは、電磁センサコイル、例えば、電磁コイル104に埋め込まれるか、または電磁センサコイルを備える電磁場内の物体の位置を決定することができる。電磁場は、電磁場発生器の座標系に対し
て定義されてもよい。術前モデル(例えば、後述する図19Bの術前モデル150)の座標系は、電磁場の座標系にマッピング(または位置合わせ)することができる。したがって、電磁場内の電磁センサの位置によって特定される器具100の位置は、術前モデルの座標系において特定することができる。
器具100は、解剖学的空間の一部を照明する光を提供する照明源103(例えば、発光ダイオード)を含むことができる。器具100の撮像デバイス102は、受光を表すエネルギーを電気信号に変換するように構成された任意の感光性基板または構造、例えば、電荷結合素子または相補型金属酸化膜半導体撮像素子を含むことができる。いくつかの例では、撮像素子102は、1つ以上の光ファイバを含むことができる。例えば、撮像装置102は、器具100の遠位端からの画像を表す光を、アイピースおよび/またはイメージセンサーに、またはモニタ上での使用に表示するためのシステムに透過させるように構成された光ファイバーバンドルであってもよい(図18のディスプレイ202のようである)。次いで、撮像装置102によって捕捉された画像は、個々のフレームまたは一連の連続フレーム(例えば、ビデオ)として、記憶または表示のためのコンピュータシステムに送信され得る。撮像装置102によって撮像された画像は、位置確認システム90によって視覚データ92として使用され、器具推定状態を決定することができる。
図18は、本明細書に記載されるロボットシステムのいくつかの実装と共に使用することができる例示的なコマンドコンソール200を示す。図示のように、コマンドコンソール200は、ディスプレイ202(例えば、モニタ)、および1つ以上の制御モジュールまたは入力203(例えば、コントローラ、キーボード、ジョイスティック等)を含むことができる。ユーザ201(例えば、医師)は、コマンドコンソール200を使用してロボット対応医療システムを遠隔操作することができる。例えば、ユーザ201は、図16に示すように、管腔ネットワーク130内で器具100をナビゲートするためにコマンドコンソール200を使用することができる。コマンドコンソール200は、手技中にユーザ201に種々の情報を表示することができる。
ディスプレイ202は、電子モニタ(例えば、液晶ディスプレイ、LEDディスプレイ、タッチセンシティブディスプレイ)、仮想現実(VR)表示装置(例えば、ゴーグルまたはメガネ)、および/または他の表示装置を含む。いくつかの実施形態では、1つまたは複数のディスプレイ202は、管腔ネットワーク130の術前モデルを表示してもよい。管腔ネットワーク130内の器具100の位置または推定状態も、ユーザ201に表示することができる。また、ディスプレイ202は、画像処理装置102から受信した画像情報を表示することができる(図17)。いくつかの実施形態では、器具100のモデルまたは表現もディスプレイ202に描画される。
(B.管腔ネットワークおよび術前モデルの例)
上記の通り、管腔ネットワーク130(またはその一部)は、管腔ネットワーク130のナビゲーション中に医師および/または位置決めシステム90によって使用可能な術前モデルによって表現することができる。
図19Aは、例示的な管腔ネットワーク130の一部を示す。上記の通り、管腔ネットワーク130は、複数の管腔132を有する。図19Bは、図16の管腔ネットワーク130の例示的な術前モデル150を示す。術前モデル150は、上記の種々の術前画像化およびマッピング技術の1つ以上を使用して、管腔ネットワーク130のナビゲーションの前に生成されてもよい。一例として、術前マッピングは、低線量CTスキャンの集合を用いて実現できる。
図に示す実施形態では、術前モデル150は、複数の分岐152を有する。分岐152
は、管腔ネットワーク130の管腔132の少なくとも一部分に対応する。したがって、管腔ネットワーク130が分岐された管腔132の配置を含む場合、術前モデル150は、対応する分岐152の配置を含む。管腔ネットワーク130が単一の管腔132を含む場合、術前モデル150は、対応する単一の分岐152を含む。一般に、術前モデル150は、管腔ネットワーク130の少なくとも一部に対応する3次元形状を含む。図19Bでは、説明の都合上、2次元形状としての術前モデル150を示す。場合によっては、3次元術前モデル150の断面を2次元ディスプレイ(例えば、ディスプレイ202)に表示することができる。
図19Bに示すように、術前モデル150は、1つ以上のセグメント154を含むスケルトン153を含むか、またはそれを導出するために使用することができる。図では、スケルトン153およびセグメント154は破線で示されている。セグメント154のそれぞれは、分岐152のうちの1つと対応し、その中心線を表す。各セグメント152は、セグメントを識別する対応付けられたセグメントID、ならびに対応付けられた長さおよび/または向きを有してもよい。また、セグメント152は、スケルトン154を形成することができ、スケルトン154は、管腔ネットワーク130の一部を線構造(例えば、3次元線構造)として表すことができる。
図19Aの管腔ネットワーク130と図19Bの術前モデル150とを比較すると、いくつかの例において、術前モデル150は管腔ネットワーク130の一部のみを表すか、または一部のみに対応する場合がある。これは、図19Cにさらに示すように、管腔ネットワーク130上に術前モデル150が重畳されている。いくつかの例では、術前モデル150を生成するために使用される術前画像およびマッピング技術に伴う制限が、管腔ネットワーク130全体に対応するモデルの生成を妨げる場合がある。例えば、管腔ネットワーク130の一定の管腔132は、一般的な術前画像化およびマッピング技術では明確に描写および分析できないほど小さい場合がある。したがって、術前モデル150は、管腔ネットワーク130の完全な表現を提供することができない。図に示すように、管腔ネットワーク130の種々の部分が、マッピングされていない、および/または術前モデル150によって表現されていない場合がある。したがって、術前モデル150は、管腔ネットワーク130のマッピングされた部分153に対応する。また、管腔ネットワーク130のマッピングされていない部分133は、術前モデル150によって表現されていないが、マッピングされた部分153を越えて延在する。
場合によっては、医師は、器具100を管腔ネットワーク130の1つ以上のマッピングされていない部分133にナビゲートすることを希望する場合がある。例えば、図16に示す例では、結節155は、管腔ネットワーク130の周辺に位置している。結節155は、管腔ネットワーク130のマッピングされていない部分133内にあることもある。以下に説明するように、本明細書で説明するナビゲーションおよび追跡の方法およびシステムによれば、マッピングされた部分153からマッピングされていない部分133へナビゲーションされる際に、器具100の追跡を可能にし、容易にし、または改善することができる。
(C.器具の推定状態の特定)
上記の通り、位置決めシステム90(図15)は、出力として位置決めデータ96を提供するために、1つ以上の入力データ91~94を処理することができる。位置決めデータ96は、器具の推定状態を含むことができる。
位置決めシステム90は、器具100が管腔ネットワーク130のマッピングされた部分153内にあるときに、特定の種類あるいは組み合わせの入力データ91~94を使用することができる。例えば、器具100が管腔ネットワーク130のマッピングされた部
分153内にある場合、位置決めシステム90は、術前モデルデータ91、視覚データ92、電磁データ93、ロボットコマンドおよび運動学データ94から器具の推定状態を導出することができる。いくつかの実施形態では、器具100が管腔ネットワーク130のマッピングされた部分153内にあるとき、器具100の推定状態を特定するために、これらの入力データの集合の一部のみを使用してもよい。また、いくつかの実施形態では、追加または他の種類の入力データを使用してもよい。
いくつかの実施形態において、入力データ91~94のいずれかは、器具100が管腔ネットワークのマッピングされた部分153内に位置する場合にのみ使用可能としてもよい。例えば、術前モデルデータ91は、器具100がマッピングされた部分153内に位置するときの推定状態を特定するための入力としてのみ使用することができる。
別の例として、いくつかの実施形態では、視覚データ92を、器具100がマッピングされた部分153内に位置決めされたときにのみ、器具100の推定状態を特定するための入力として使用することができる。これは、いくつかの実施形態では、視力データ92に基づいて推定状態を特定することが、術前モデルデータ91に部分的に依存するためである。一例として、視力データ92を術前モデルデータ91と比較して位置の推定状態を特定することができる。
一方、いくつかの実施形態では、器具100が、管腔ネットワーク130のマッピングされた部分153またはマッピングされていない部分133内に配置されているかどうかにかかわらず、器具100の推定状態を特定するために、ある一定のデータ入力が利用可能である。例えば、器具100がマッピングされた部分153とマッピングされていない部分133のどちらに位置するかに関係なく、電磁データ93を器具100の推定状態を特定するための入力として使用することができる。これは、術前モデル150の座標系に位置合わせされることとは別に、電磁データ93に基づく位置特定を、他の種類の入力データとは独立して行うことができるためである。すなわち、器具100の推定状態を導出するために、電磁データ93を他の種類の入力データと組み合わせる必要がないといえる。電磁データ93は、術前モデルデータ91に依存することなく、器具100についての推定状態を生成することができるので、器具100がマッピングされた部分153とマッピングされていない部分133のいずれに位置するかに関係なく、電磁データ93を位置決めシステム90の入力として使用することができる。位置センサに基づく他の種類の入力データ(例えば、形状感知ファイバ、加速度計、ジャイロスコープ、超音波センサなどからのデータ)も、器具100がマッピングされた部分153とマッピングされていない部分133のいずれに位置するかに関係なく、使用することができる。
いくつかの実施形態では、器具100がマッピングされた部分153とマッピングされていない部分133のいずれに位置するかに関係なく、器具100の推定状態を特定するための入力として、視覚データ92、ロボットコマンドおよび運動学データ94を使用することができる。例えば、視覚アルゴリズムまたは視覚モジュールは、器具100上の画像処理装置102から受信した画像を分析して、管腔の開口を検出することができる。ロボットコマンドおよび運動学アルゴリズムまたはモジュールは、器具の移動距離を推定するために、器具100の管腔内における移動を分析することができる。したがって、これらのモダリティを組み合わせて、術前モデル150に基づかない器具100の推定状態を提供することができる。
データ入力の組み合わせから導出された推定状態は、組み合わせられた推定状態と呼ぶことができる。一例として、電磁データ93と少なくとも1つの追加データ入力(例えば、術前モデルデータ91、視覚データ92、ロボットコマンドおよび運動学データ94など)とから、組み合わせられた推定状態を導出することができる。別の例として、組み合
わせられた推定状態は、術前モデルデータ91と少なくとも1つの追加データ入力(例えば、視覚データ92、電磁データ、ロボットコマンドおよび運動学データ94など)とから導出することができる。
いくつかの実施形態では、位置決めシステム90は、器具100が管腔ネットワーク130のマッピングされた部分153に位置するときに、組み合わせられた推定状態を出力する。これは、例えば、術前モデルデータ91を別の種類の入力データと組み合わせて、器具100がマッピングされた部分153に位置するときの推定状態を特定することができるためである。
位置センサデータ入力のみから導出された推定状態は、位置センサに基づく推定状態と呼ぶことができる。いくつかの実施形態では、位置決めシステム90は、器具100が管腔ネットワーク130のマッピングされていない部分133に位置するときに、位置センサに基づく推定状態を出力する。これは、例えば、器具100が上記のようにマッピングされていない部分133に位置するときに、電磁データ93(または他の位置センサデータ)のみが使用可能であるためである。
位置決めシステム90の出力が、組み合わせられた推定状態から位置センサに基づく推定状態に変更される場合(例えば、器具100が、マッピングされた部分153から管腔ネットワーク103のマッピングされていない部分133に移動する場合)、推定状態の位置が、突然変更されたりジャンプしたりすることがある。これは、組み合わされた推定状態と位置センサに基づく推定状態が若干異なることによるものである。上記の通り、推定状態が表示される場合は、医師にはジャンプや突然の変化を見ることで、管腔ネットワーク100内の器具100の追跡またはナビゲーションに支障をきたす可能性がある。
(D.位置変換を使用したナビゲーションとトラッキングの概要と例)
以下でより詳細に説明するように、位置変換を用いて、医療器具の追跡およびナビゲーションを可能にし、容易にし、または改善することができる。位置変換は、位置決めシステムが推定状態を出力するために使用する入力データの数または種類の変化によって生じる器具100の推定状態の突然の変化を低減または除去するために使用することができる。例えば、位置変換は、器具100がマッピングされた部分153から管腔ネットワーク130のマッピングされていない部分133に移動するときに、組み合わせられた推定状態から位置センサに基づく推定状態への変更によって生じる推定状態の突然の変化を最小化または排除するために使用することができる。
図20A~図20Fは、位置変換を使用する器具100のナビゲーションおよび追跡の例を示す。図20Aは、管腔ネットワーク130(図19A)の術前モデル150(図19B)の一部を示す。図に示すように、術前モデル150は、3つの分岐152a、152b、152cを含む。術前モデル150はまた、3つのセグメント154a、154b、154cを有するスケルトン153を含む。3つのセグメント154a、154b、154cのそれぞれは、対応する分岐152a、152b、152cの中心線を表す。セグメントIDは、長さと同様に、セグメントを識別するが、セグメント154a、154b、154cのそれぞれに対応付けられる。
図示の例では、器具100の推定位置を表す組み合わせられた推定状態192が灰色の円で示されている。上記の通り、組み合わせられた推定状態192は、例えば、入力データ91~94の組み合わせに基づいて、位置決めシステム90によって特定されてもよい。組み合わせられた推定状態192は、器具が管腔ネットワークの分岐152aによって表される管腔ネットワーク130の管腔132に位置することを示す。図に示すように、組み合わせられた推定状態192は、セグメント154aに沿った長さのほぼ半分の位置
に位置するように示される。
また、図20Aは、変換点180を示す。変換点180は図中のXで示されている。以下に説明するように、変換点180は、位置変換が特定される点を表す。図に示す例では、変換点180は、セグメント154bの端部付近に示されている。変換点180の図示された位置は、例示的な例としてのみ提供され、以下に説明するように、変換点180は、術前モデル150内の種々の位置として特定される。さらに、図20Aには単一の変換点180のみが示されているが、いくつかの実施形態では、複数の変換点180が含まれてもよい。例えば、変換点180は、術前モデル150の各終端セグメントに含まれてもよい。
いくつかの実施形態において、図20Aの特定の特徴が、器具100の追跡およびナビゲーションを容易にするために、医師に(例えば、図18のディスプレイ202に)表示されてもよい。例えば、術前モデル150および/またはスケルトン154は、組み合わせられた推定状態192と同様に表示されてもよい。いくつかの実施形態では、器具100も表示することができる(図20Aには図示されていない)。いくつかの実施態様において、変換点180は表示されなくてもよい。
図20Bにおいて、器具100は、分岐152b内をナビゲーションされている。図に示すように、組み合わされた推定状態192は、器具100が変換点180に位置していることを示す。また、図20Bは、位置センサに基づく推定状態194(黒丸で示す)を示す。位置センサに基づく推定状態194は、例えば、上述したように、電磁データ93(または他の位置センサからのデータ)から特定できる。図に示すように、位置センサに基づく推定状態194は、組み合わせられた推定状態192とは異なる。すなわち、位置センサに基づく推定状態194と推定状態192との組み合わせは、器具100の異なる位置を示す。
図20Bに示すように、器具100は、術前モデル150の端部に近づいている。管腔ネットワーク130のマッピングされていない部分133は、管腔ネットワークのマッピングされた部分153を越えて延びており、医師は、マッピングされていない部分133にナビゲートすることを希望する場合がある。上記の通り、器具100が術前モデル150の外部にナビゲートされる場合、位置決めシステム90ではある種のデータ入力が利用できなくなる場合がある。これは、いくつかの場合において、組み合わせられた推定状態192(利用できなくなる可能性のある1つ以上のデータ入力に基づいて決定される)も利用できなくなる可能性がある。術前モデル150の外部では、器具100の位置が、組み合わされた推定状態192の代わりに位置センサに基づく推定状態194によって特定されてもよい。これは、上記の通り、位置センサに基づく推定状態194と、図20Bにおける組み合わされた推定状態192との間の相違による、上記で図を参照しながら説明した、突然の変化やジャンプを引き起こし得る。
この突然の変化を低減または除去するために(以下でより詳細に説明するように)、器具100が変換点180に位置するときに、位置変換195(破線で示す)を特定することができる。位置変換195は、位置センサに基づく推定状態194と組み合わせられた推定状態192との間の相違を示す。この相違は、位置センサに基づく推定状態194と推定状態192との間の相違を表す。位置変換195のいくつかの実施例の詳細について、以下に説明する。
図20Bでは、いくつかの実施形態において、位置センサに基づく推定状態194および位置変換195は、医者に表示されない。図20Bでは、これらの特徴は、単に概念の理解を助けるために説明する。
図20Cは、変換点180において、位置変換195が特定された後、推定状態196(白丸で示す)を表す。いくつかの実施態様において、推定状態196の視覚的な指標が表示される。推定状態196は、位置変換195によって調整された位置センサに基づく推定状態194を含む。図に示すように、いくつかの実施形態では、位置センサに基づく推定状態194が位置変換195によって調整されると、組み合わされた推定状態192とほぼあるいは全く同じ位置を示す推定状態196が生成される。しかしながら、推定状態196は、組み合わせられた推定状態192とは異なる方法で特定されてもよいことが理解されるべきである(たとえ、これら2つの推定状態が変換点180における実質的に同じ位置を示していても)。例えば、上記の通り、組み合わせられた推定状態192は、入力データ91~94の組み合わせから特定することができる。一方で、推定状態196は、位置変換195によって位置センサに基づく推定状態194を調整することで特定することができる。
図20Dは、器具100が変換点180を越えて移動するときに、追加の推定状態196が特定および表示されることを示す。いくつかの実施形態では、推定状態196がプロットされて、器具100が移動する経路を可視化することができる。図20Dに示すように、後続の推定状態196のそれぞれは、変換点180で特定された位置変換195によって位置センサに基づく推定状態194を調整することで特定される。
図20Dは、推定状態196により、いくつかの実施形態において、術前モデル150に対して実質的に平滑な経路を形成することができることを示す。一方で、位置センサに基づく推定状態194では、術前モデル150に対して実質的に平滑な経路を形成できない可能性がある。図に示すように、位置センサに基づく推定状態194によって形成された経路は、変換点180の後に術前モデルの上方に突然ジャンプする。位置センサに基づく推定状態194が表示される場合、医師には一が突然変化したように見える可能性がある。このことは、器具100の追跡およびナビゲーションに支障をきたす可能性がある。推定状態196(位置変換によって調整された位置センサに基づく推定状態194)を表示することで、突然の位置の変化またはジャンプを低減または排除することができ、これにより追跡およびナビゲーションが支援される。
いくつかの実施形態では、位置センサに基づく推定状態194および位置変換195は表示されなくてもよい。位置センサに基づく推定状態194および位置変換195は、本明細書で説明する技術的思想を示す補助として図20Dに示されるものである。
図20Eは、推定状態196がプロットされて表示されることを示す。図に示す例では、推定状態196をグループ化して術前モデル150を伸長することができる。例えば、システムは、管腔に対応する推定状態196のストリングを識別し、管状構造198を推定状態196のストリングに適合させて、術前モデル150を伸長することができる。管状構造198の直径は、管腔内の視覚データまたは他の方法を用いて特定できる。したがって、管状構造198は、術前モデル150を、術前モデル150によってマッピングされていない管腔ネットワーク130の一部に伸長することができる。伸長された術前モデルは、例えば、現在または将来の手技で使用するために、コンピュータ可読メモリに記憶することができる。
図20Fは、推定状態196が器具100の向き情報を含むことができることを示す。推定状態196は、位置変換195によって調整された位置センサに基づく推定194に基づいて特定される。位置センサに基づく推定194は、向き情報(例えば、ピッチ、ロール、ヨー等)を含み、この向き情報を推定状態196に適用することができる。図に示す例では、向き情報は、器具100の先端の向き199を特定するために使用される。先
端の向き199は、ユーザに表示することもできる。
(E.ナビゲーションおよび追跡の方法およびシステムの例)
図21~図23は、それぞれ、例示的なナビゲーションおよび追跡の方法400、420、440を示すフローチャートである。方法400、420、440は、図1~図15などに示すロボットシステムなどの、特定のロボットシステムに実装することができる。方法400、420、440は、図15の位置決めシステム90においてまたは位置決めシステム90によって実装することができる。いくつかの実施形態において、1つ以上の計算装置は、方法400、420、440を実行するように構成することができる。計算装置は、上記の1つ以上の構成要素内のプロセッサ(または複数のプロセッサ)およびコンピュータ可読メモリによって実装されてもよい。コンピュータ可読メモリは、方法400、420、440を実行するためにプロセッサによって実行可能な命令を記憶してもよい。命令は、1つ以上のソフトウェアモジュールを含むことができる。限定ではなく例示として、計算装置は、図1に示すタワー30内、図1~図4に示すカート内、図5~図10に示すベッド、図18に示すコマンドコンソール200内などに設けることができる。
方法400、420、440は、例えば、医療器具100が、図16に示すように、管腔ネットワーク130内をナビゲートされる際に実行されてもよい。方法400、420、440は、いくつかの実施形態において、医療器具100が管腔ネットワーク130に導入されるときに開始されてもよい。いくつかの実施形態では、方法400、420、440は自動的に開始されてもよい。いくつかの実施形態では、方法400、420、440は、例えば、ユーザ入力またはコマンドが受信されたときに、手動で開始されてもよい。上記の通り、方法400、420、440は、分岐のある管腔ネットワーク(気管支ネットワーク、腎臓ネットワーク、循環器ネットワーク(例えば、動脈および静脈)など)および分岐のない管腔ネットワーク(例えば、胃腸管、尿管など)を含む、種々の管腔ネットワークにおける器具100のナビゲーションおよび追跡用に実装することができる。
図21は、特定のロボットシステムに実装可能な例示的なナビゲーションおよび追跡の方法400を示すフローチャートである。方法400は、ブロック401から開始する。ブロック401では、位置センサデータが受信される。位置センサデータ(例えば、電磁データ93)は、少なくとも1つの位置センサから受信することができる。位置センサは、電磁位置センサであってもよい。一実施形態では、形状感知ファイバ、加速度計、ジャイロスコープ、超音波センサなどの他の種類の位置センサを使用することができる。1つまたは複数の位置センサは、器具上に配置されてもよい。1つ以上の位置センサが、器具の遠位先端に配置されてもよい。いくつかの実施形態では、位置センサは、器具の近位端またはロボットアームのモータパック上のトルクセンサのように、器具の遠位端に配置されていなくてもよい。位置センサの他の例は、医療ロボットによって命令される移動データを含み、これは、医療器具の推定姿勢をモデル化するために使用することができる。
ブロック403において、方法400は、位置センサデータから導出された位置センサに基づく推定状態を特定する。位置センサは、器具を追跡するために使用されてもよい。器具は、管腔ネットワーク内に配置されていてもよい。位置センサデータは、位置センサに基づく推定状態を(例えば、位置決めシステム90によって)提供するように、または処理されてもよい。位置センサに基づく推定状態は、位置の指標を含んでもよい。位置の指標は、基準座標系に対して提供されてもよい。基準座標系は、位置センサに基づく推定状態が術前モデルの座標系内の位置の指標を提供するように、上記の術前モデルの座標系に位置合わせすることができる。位置センサに基づく推定状態は、例えば、x、y、z座標を含んでもよい。いくつかの実施形態では、他の座標系を使用することができる。また、位置センサに基づく推定状態は、センサの向きに関する情報を提供してもよい。例えば、向き情報は、ピッチ、ロール、ヨー情報を含む。いくつかの実施形態では、位置センサ
に基づく推定状態は、3自由度位置または6自由度位置である。
ブロック405において、方法400は、位置センサデータ(ブロック401で受信)および少なくとも1つの他の種類の位置データに基づいて、組み合わせられた推定状態を特定するステップを含む。少なくとも1つの他の種類の位置データは、例えば、術前モデルデータ91、視覚データ92、および/または上記のロボットコマンドおよび運動学データ94を含む。したがって、いくつかの例では、組み合わせられた推定状態は、位置センサデータ(例えば、電磁データ93)と、術前モデルデータ91、視覚データ92、ロボットコマンドおよび運動学データ94、追加の種類の位置データのうちの1つ以上のデータとに基づいて特定される。
いくつかの実施形態では、ブロック405は、器具が術前モデル(例えば、管腔ネットワークのマッピングされた部分)によって表現される管腔ネットワークの一部に配置されているときに実行される。これは、上記の通り、器具が管腔ネットワークのマッピングされた部分の外部に位置するときに、少なくとも1つの他の種類の位置データのうちの1つ以上のデータが利用できないためである可能性がある。
組み合わせられた推定状態は、位置決めシステム90の出力とすることができる。組み合わせられた推定状態によって、位置の指標を提供することができる。いくつかの実施形態において、位置の指標は、術前モデルについて(例えば、術前モデルのスケルトンについて)提供される。組み合わせられた推定状態は、x、y、z座標を含み得る。いくつかの実施形態では、他の座標系を使用することができる。また、組み合わされた推定状態は、センサの向きに関する情報を提供してもよい。例えば、向き情報は、ピッチ、ロール、ヨー情報を含む。いくつかの例では、組み合わせられた推定状態は、セグメントの識別子、セグメント内の深さ、および器具の回転情報のいずれかや、3自由度位置や、6自由度位置を含む。
いくつかの実施態様において、ブロック401、403、405の順番は変更することができる。いくつかの実施態様において、ブロック401、403、405の2つ以上は、実質的に同時に実行してもよい。
ブロック407において、方法400は、位置変換を特定することを含む。位置変換は、組み合わされた推定状態(ブロック405)および位置センサに基づく推定状態(ブロック403)に基づいて特定されてもよい。ある実装においては、位置変換は変換点として特定される。例えば、変換点は、術前モデルの、1つ以上の端部の(例えば、最後の)セグメントの長さに沿った先端、終端、または任意の位置であってもよく、最後から2番目のセグメントの長さに沿った1つ以上の位置、最後から3番目のセグメントの長さに沿った1つ以上の位置、最後から4番目のセグメントの長さに沿った1つ以上の位置、などであってもよい。この長さに沿った位置は、例えば、セグメントの終端から測ったセグメントの長さの所定の割合(例えば、約5%、約10%、約25%、約33%、約50%)や、セグメントの終端からの所定の距離(例えば、約1mm、約2.5mm、約5m、約10mm、約25mm等)などの閾値であってもよい。他の例では、セグメントの先端に対して位置を特定することができる。いくつかの実施形態では、変換点は、マッピングされた部分と管腔ネットワーク130のマッピングされていない部分との間の境界に位置する。いくつかの実施形態では、変換点は、管腔ネットワーク130内の器具の経路(例えば、あらかじめ計画された経路)に基づいて特定される。例えば、変換点は、経路全体の閾値に、または経路内の所定のセグメントに基づく位置とすることができる。いくつかの実施形態では、変換点は、あらかじめ計画された経路(例えば、管腔ネットワークを通ってターゲットの結節までのあらかじめ計画された経路)に基づいて特定することができる。このような場合、変換点は、経路上の最後のセグメントの長さに沿った最初の位置、終
端の位置、または任意の位置、または(上記の実施例と同様に)経路上の最後から2番目のセグメントに沿った位置とすることもできる。
変換点は、術前モデル内の任意の位置とすることができる。また、変換点は、管腔ネットワークを第1の部分と第2の部分に分割することができる。いくつかの実施形態において、第1の部分は、概して、管腔ネットワークのマッピングされた部分(すなわち、術前モデルによって表現される部分)に対応することができ、第2の部分は、概して、管腔ネットワークのマッピングされていない部分に対応することができる。より一般的には、第1の部分は、器具の位置が組み合わされた推定状態によって特定される管腔ネットワークの一部を表し、第2の部分は、器具の位置が組み合わされた推定状態によって特定されない管腔ネットワークの一部を表すことができる。
上記の通り、位置センサに基づく推定状態と組み合わせられた推定状態は、それらを特定するために使用される異なる入力データと、そのようなデータを解釈するために使用されるアルゴリズムとによって異なる場合がある。位置変換は、位置センサに基づく推定状態と組み合わせられた推定状態との間の相違であり得る(または相違を表し得る)。
いくつかの実施形態では、位置変換は、位置センサに基づく推定状態と変換点における組み合わされた推定状態との間の相違であり得る(または相違を表し得る)。例えば、位置変換は、位置センサに基づく推定状態と変換点での組み合わされた推定状態に基づいて特定することができる。別の例では、位置変換は、センサに基づく推定状態および変換点に先行する位置の組み合わせられた推定状態の所定の範囲において特定することができる。所定の範囲において特定される場合は、位置変換は、これら推定状態の相違の特徴(例えば、位置センサに基づく推定状態と組み合わされた推定状態との相違の中央値、平均、または加重平均)に基づいて特定することができる。
一例として、位置変換はオフセットを含みうる。例えば、位置変換は、位置センサに基づく推定状態と組み合わせられた推定状態との間の相違を示す単一の値であってもよい。
別の例として、位置変換は、多次元の値(3次元の値など)またはベクトルを含みうる。例えば、ベクトルは、位置センサに基づく推定状態と組み合わせられた推定状態との間の距離と向きを表すことができる。
別の例として、位置変換は関数を含みうる。例えば、組み合わせられた推定状態と位置センサベース推定状態との相違を経時的に追跡することに基づいて、関数を構築あるいはモデル化することができる。追跡された相違を用いることで、システムは、医療器具がスケルトンベースの位置のナビゲーションを終了するときに、組み合わされた推定状態と位置センサに基づく推定状態との間の相違を予測するために使用することができる関数に偏差を適合させることができる。このような手法は、組み合わされた推定状態と位置センサに基づく推定状態との間の相違が、距離または時間の関数として表され、そのような関数が距離または時間の関数の表現をモデル化することができるか、または任意の他の適切なパラメータとしてモデル化することができる場合に有用であり得る。位置センサに基づく推定状態と組み合わされた推定状態との間の経時的な相違を用いる関数について説明したが、いくつかの実施形態では、他の種類の関数を用いてもよいことが理解されるべきである。この場合は、異なる位置の状態の相違のモデルが先験的に得られていてよい。
別の例として、位置変換は変換行列であり得る。例えば、変換行列は、蓄積された位置センサに基づく推定状態の経時的な行列と、器具の最後の数セグメントまたは全体にわたって蓄積された組み合わせられた推定状態の経時的な行列とに基づいて計算することができる。これら2つの経時的な行列の間で変換行列を計算することができる。いくつかの実
装では、3自由度の値(すなわち、位置)を返すことができる上記のオフセットに対して、変換行列は6自由度の値(すなわち、位置および向き)を返すことができる。
いくつかの実装では、位置変換は、器具が変換点を通過するときに固定または設定される。すなわち、位置変換は変換点で特定され、器具が変換点を越えてナビゲートされるときには、特定されるそれぞれの位置センサに基づく推定状態に連続的に適用できる。いくつかの実装では、器具が変換点を越えるか通過するたびに、位置変換が再度特定される。
ブロック409において、方法400は、位置変換によって調整された位置センサに基づく推定状態に基づいて、器具の推定状態を出力するステップを含む。いくつかの実装では、推定状態を出力することは、推定状態を表示すること、または推定状態を記憶することを含む。いくつかの実装では、推定状態の視覚的な指標を医師に表示できる。推定状態は、(例えば、図20A~図20Fを参照して説明したように)位置変換によって調整される位置センサに基づく推定状態とすることができる。これは位置変換で位置センサに基づく推定状態を修正することを含む。例えば、位置変換がベクトルである場合、位置センサに基づく推定状態からベクトルを加算または減算することができる。
位置変換によって位置センサに基づく推定状態を調整することによって、組み合わされた推定状態と実質的にあるいは正確に一致する推定状態を生成することができる。これは、器具を追跡またはナビゲートするユーザに対して表示される推定状態が突然変化することを低減または排除することができる。
いくつかの実施形態では、ブロック409は、装置が変換点を越えて位置決めされるときに生じる。例えば、ブロック409は、器具が管腔ネットワークの第2の部分または管腔ネットワークのマッピングされていない部分に配置されるときに発生することができる。方法400はまた、器具が管腔ネットワークの第1の部分内に位置決めされたときに、組み合わされた推定状態を出力する(例えば、表示または記憶する)ことを含むことができる。
また、方法400は、器具の推定状態(ブロック409での出力)と、調整された位置センサに基づく推定状態に基づくターゲットの結節との間の距離を決定することを含んでもよい。また、方法400は、調整された位置センサに基づく推定状態(図20F)に基づいて、器具の先端の向きを特定するステップを含んでもよい。先端の向きがユーザに表示されてもよい。
図22は、特定のロボットシステムに実装可能な別の例のナビゲーションおよび追跡の方法420を示すフローチャートである。方法420は、ブロック421から開始する。ブロック421において、方法420は、管腔ネットワークの第1の部分と管腔ネットワークの第2の部分との間の変換点を特定する。変換点の位置は、上記の通り、種々の位置で特定することができる。
ブロック423において、方法420は、管腔ネットワーク内に配置された器具をナビゲートすることを含む。ブロック425において、器具が変換点にあるとき、方法425は位置変換を特定する。上記の通り、位置変換は、組み合わせられた推定状態と位置センサに基づく推定状態との間の相違を表すことができる。位置変換が特定されると、方法420はブロック427に移動し、再び器具が管腔ネットワーク内で移動される。
方法420は、特定ブロック429に進み、そこで、器具が管腔ネットワークの第1または第2の部分内に位置するか否かが特定される。器具が管腔ネットワークの第1の部分内にあると特定されると、方法420はブロック431に進む。ブロック431は、組み
合わせられた推定状態を出力することを含む。器具が管腔ネットワークの第2の部分内にあると特定されると、方法420はブロック433に進む。ブロック433は、位置変換によって調整された位置センサに基づく推定状態を出力するステップを含む。
方法420は、位置変換によって位置センサに基づく推定状態を調整して、組み合わせられた推定状態と位置センサに基づく推定状態との間の相違を最小化または排除することによって、出力される推定状態の突然の変化を低減することができる。このことから、推定状態の視覚的な指標によって、円滑で連続的な追跡とナビゲーションを提供することができる。
図23は、特定のロボットシステムに実装可能な別の例のナビゲーションおよび追跡の方法440を示すフローチャートである。いくつかの点において、方法440は、上記の方法400と類似しており、方法400の特徴に類似する方法440の特徴の説明は、説明を簡潔にするために省略する。位置センサに基づく推定状態と組み合わされた推定状態(部分的に位置センサに基づく推定状態に基づく)とを用いて位置変換を特定する方法400とは対照的に、方法440は、位置センサに基づく推定状態と追加の推定状態(後述するように、位置センサに基づく推定状態から独立した状態であってもよい)に基づいて位置変換を特定する。
方法440は、ブロック441で開始し、位置センサデータが受信される。ブロック443において、方法440は、例えば、位置センサデータから位置センサに基づく推定状態を特定することを含む。
ブロック445において、方法440は、少なくとも別の種類の位置データに基づいて追加の推定状態を特定することを含む。このブロックは、位置センサデータに基づいて追加の推定状態が特定されない点以外は、方法400のブロック405と同様である。方法440では、位置センサデータを使用せずに、追加の推定状態が特定される。例えば、ブロック445は、器具上に配置された画像処理装置から受信した視覚データ、器具の物理的な移動および操作に関するロボットシステムコマンドおよび運動学データ、術前モデルデータ、またはこれらの任意の組み合わせに基づいて、追加の推定状態を特定することを含むことができる。推定状態を特定するためのこれらの追加のモダリティのいずれも、いくつかの実装においては、ブロック443で使用される位置センサに基づくモダリティとは独立したものとすることができる。
ブロック447において、方法440は、追加の推定状態および位置センサに基づく推定状態に基づいて、位置変換を特定するステップを含む。方法400のブロック407と同様に、位置変換は、2つの推定状態の間の相違を表すことができる。最後に、ブロック449において、方法440は、位置変換によって調整された位置センサに基づく推定状態に基づいて、推定状態を出力する。
図24は、本明細書で説明するナビゲーションおよび追跡の方法を実装するように構成される、例示的なロボットシステム500を示すブロック図である。システム500は、プロセッサ510およびメモリ512を有する。メモリ512は、例えば、上記の方法400、420、および/または440を実行するようにプロセッサ510を構成または指示する命令を記憶することができる。
また、システム500は、器具502を有する。器具502は、管腔ネットワークをナビゲートするように構成することができる。器具502は、とりわけ、位置センサ504および画像処理装置506を有してもよい。器具502は、器具502を操作し、移動させるように構成された器具位置決め装置508に取り付けることができる。器具位置決め
装置508は、いくつかの実施形態においては、プロセッサ510によって制御することができる。
図示のように、データストレージ514は、位置センサデータ516、視覚データ518、ロボットコマンドおよび運動学データ520、および術前モデルデータ522を記憶することができる。位置センサデータ516は、位置センサ504から受信することができる。視覚データ518は、画像処理装置506から受信することができる。ロボットコマンドおよび運動学データ520は、器具位置決め装置508から受信ことができる。
位置センサデータ516、視覚データ518、ロボットコマンド、運動学データ520、および/または術前モデルデータ522は、プロセッサ510へのデータ入力として提供することができる。プロセッサ510は、器具502の推定状態526に関する情報を特定して出力するために、本明細書で説明する方法を実行することができる。図に示す実施形態では、推定状態526に関する情報は、ディスプレイ524に出力される。いくつかの実施形態では、推定状態526も記憶されてもよい。
(3.システムの実装および用語)
本明細書に開示される実施形態は、医療器具のナビゲーションおよび追跡のためのシステム、方法、および装置を提供する。ここで説明する種々の実装により、管腔ネットワークのナビゲーションおよび追跡の向上が実現する。
本明細書で使用される用語「結合する」、「結合する」、「結合される」、または単語対の他の変更は間接接続または直接接続のいずれかを示すことができ、例えば、第1の構成要素が第2の構成要素に「結合される」場合、第1の構成要素は、別の構成要素を介して第2の構成要素に間接的に接続されるか、または第2の構成要素に直接接続されることができることに留意されたい。
本明細書で説明する特徴類似度計算、位置推定、およびロボット動作作動機能は、プロセッサ可読媒体またはコンピュータ可読媒体上に1つまたは複数の命令として格納することができる。用語「コンピュータ可読媒体」は、コンピュータまたはプロセッサによってアクセスされ得る任意の利用可能な媒体を指す。限定ではなく例として、そのような媒体は、RAM(ランダムアクセスメモリ)、ROM(リードオンリメモリ)、EEPROM(電気的消去可能プログラマブルリードオンリメモリ)、フラッシュメモリ、CD-ROM(コンパクトディスクリードオンリ)または他の光ディスクストレージ、磁気ディスクストレージまたは他の磁気ストレージデバイス、あるいは命令またはデータ構造の様式で所望のプログラムコードを格納するために使用され得、コンピュータによってアクセスされ得る任意の他の媒体を備えることができる。コンピュータ可読媒体は、有形かつ非一時的であり得ることに留意されたい。本明細書で使用されるように、用語「コード」は、計算装置またはプロセッサによって実行可能なソフトウェア、命令、コード、またはデータを指すことができる。
本明細書で開示される方法は、説明される方法を達成するための1つまたは複数のステップまたはアクションを備える。方法のステップおよび/またはアクションは、代替形態の範囲から逸脱することなく、互いに交換することができる。言い換えれば、ステップまたはアクションの特定の命令が説明されている方法の適切な動作のために必要とされない限り、特定のステップおよび/またはアクションの命令および/または使用は、代替の範囲から逸脱することなく修正され得る。
本明細書で使用される場合、用語「複数」は2つ以上を意味する。例えば、複数の構成要素は2つ以上の構成要素を示す。用語「特定すること」が多種多様なアクションを包含
し、したがって、「特定すること」は計算すること、計算すること、処理すること、導出すること、調査すること、参照すること(例えば、テーブル、データベース、または別のデータ構造を参照すること)、確認することなどを含むことができ、「特定すること」は受信すること(例えば、情報を受信すること)、アクセスすること(例えば、メモリ内のデータにアクセスすること)などを含むことができる。また、「特定すること」は、解決すること、選択すること、選ぶこと、確立することなどを含むことができる。
「に基づく」という語句は特に断らない限り、「のみに基づく」という意味ではない。言い換えれば、「に基づく」という語句は、「のみに基づく」および「少なくともに基づく」の両方を表す。
本明細書で使用される場合、用語「約」は長さ、厚さ、数量、時間、その他の計測値の計測範囲を意味する。この計測範囲には、指定された値に対する+10%~-10%あるいはそれ以下の変動、好ましくは+5%~-5%あるいはそれ以下の変動、より好ましくは+1%~-1%あるいはそれ以下の変動、さらに好ましくは+0.1%~-0.1%あるいはそれ以下の変動を含み、本明細書に記載する装置、システム、手法が機能する適切な程度においてこれらの変動が許容される。
開示された実施形態の上記の説明は、当業者が本件開示を実現または使用することを可能にするために提供される。これらの実装に対する様々な修正は当業者には容易に明らかであり、本明細書で定義される一般的な原理は、本件開示の範囲から逸脱することなく、他の実装に適用することができる。例えば、当業者は、工具構成要素を固定、取り付け、結合、または係合する等価な方法、特定の作動運動を生成するための等価な機構、および電気エネルギーを送達するための等価な機構などの、いくつかの対応する代替的および等価な構造的詳細を採用することができることが理解されるのであろう。したがって、本件開示は、本明細書に示される実装に限定されることを意図するものではなく、本明細書に開示される原理および新規な特徴と一致する最も広い範囲を与えられるべきである。

Claims (10)

  1. ロボットシステムであって、
    細長い本体と、前記細長い本体上に配置された少なくとも1つの電磁(EM)位置センサとを有する器具と、
    前記器具に取り付けられ、前記器具を移動させるように構成されたロボットアームと、
    実行可能な命令と、患者の解剖学的構造の管腔ネットワークの第1の部分の術前モデルとを記憶する少なくとも1つのコンピュータ可読メモリと、
    前記少なくとも1つのコンピュータ可読メモリと通信する1つまたは複数のプロセッサであって、前記命令を実行して前記システムに少なくとも、
    前記少なくとも1つのEM位置センサからのEMセンサデータを前記患者の解剖学的構造の座標系に位置合わせすることと、
    前記術前モデルによって表現された前記管腔ネットワークの前記第1の部分内に前記器具を移動させるように前記ロボットアームに命令することと、
    前記器具が前記第1の部分内に位置する間に、前記少なくとも1つのEM位置センサからの第1の位置合わせされたEMセンサデータに基づき、かつ前記術前モデルに基づかずに前記器具の第1の推定位置を特定することと、
    前記器具が前記第1の部分内に位置する間に、前記第1の位置合わせされたEMセンサデータおよび前記管腔ネットワークの前記第1の部分の前記術前モデルに基づいて、前記器具の第2の推定位置を特定することと、
    前記器具が前記第1の部分内に位置する間に、前記器具の前記第2の推定位置を出力することと、
    前記器具が変換点に位置する状態で、前記第1の推定位置と前記第2の推定位置との間の差に基づいて位置変換を特定することと、
    前記管腔ネットワークの第2の部分内に前記器具を移動させるように前記ロボットアームに命令することであって、前記管腔ネットワークの前記第2の部分は、前記管腔ネットワークの前記第1の部分の外部にあり、前記術前モデルによって表現されていない、ことと、
    前記器具が前記第2の部分内に位置する間に、前記位置変換によって調整された前記少なくとも1つのEM位置センサからの第2の位置合わせされたEMセンサデータに基づいて、前記器具の第3の推定位置を出力することと、
    前記管腔ネットワークの前記第2の部分内の第2の位置に前記器具を移動させるように前記ロボットアームに命令することと、
    前記器具が前記第2の部分の前記第2の位置に位置する間に、前記位置変換によって調整された前記少なくとも1つのEM位置センサからの第3の位置合わせされたEMセンサデータに基づいて、前記器具の第4の推定位置を出力することと、
    を実行させるように構成されている、1つまたは複数のプロセッサと、
    を有することを特徴とするロボットシステム。
  2. 前記器具は、内視鏡を含むことを特徴とする請求項に記載のシステム。
  3. 前記命令は、実行されると、前記1つまたは複数のプロセッサに、
    記変換点よりも前の位置の範囲にわたる前記位置変換を特定すること、
    を実行させることを特徴とする請求項に記載のシステム。
  4. 前記命令は、実行されると、前記1つまたは複数のプロセッサに、
    前記術前モデルにアクセスすることと、
    前記術前モデルに基づいて前記変換点を特定すること
    を実行させることを特徴とする請求項に記載のシステム。
  5. 前記位置変換はベクトルまたは関数を有することを特徴とする請求項に記載のシステム。
  6. 前記器具の前記第2の推定位置は、
    前記術前モデルのセグメントの識別子、前記セグメント内の深さ、および前記器具に関する回転情報と、
    3自由度の位置と、
    6自由度の位置と、
    の1つまたは複数を有することを特徴とする請求項に記載のシステム。
  7. 前記器具の前記第3の推定位置は、
    3自由度の位置と、
    6自由度の位置と、
    の1つまたは複数を有することを特徴とする請求項に記載のシステム。
  8. ディスプレイをさらに有し、
    前記命令は、実行されると、前記1つまたは複数のプロセッサに、
    前記ディスプレイに、前記第3の推定位置の視覚的な指標を表示すること、
    を実行させることを特徴とする請求項に記載のシステム。
  9. 前記命令は、実行されると、前記1つまたは複数のプロセッサに、
    前記第3の推定位置に基づいて、前記器具の先端の向きを特定することと、
    ディスプレイに、前記先端の向きを表示することと、
    を実行させることを特徴とする請求項に記載のシステム。
  10. 前記命令は、実行されると、前記1つまたは複数のプロセッサに、
    前記管腔ネットワークの前記第2の部分内の前記器具を複数の位置に移動させるように前記ロボットアームに命令することと、
    前記第2の部分内の前記複数の位置のそれぞれについて、前記変換点において特定された前記位置変換によって調整された前記位置において特定された位置合わせされたEMセンサデータに基づいて、前記器具の推定位置を出力することと、
    を実行させることを特徴とする請求項に記載のシステム。
JP2020533562A 2017-12-18 2018-12-14 管腔ネットワーク内の器具の追跡およびナビゲーションの方法およびシステム Active JP7059377B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762607246P 2017-12-18 2017-12-18
US62/607,246 2017-12-18
PCT/US2018/065837 WO2019125964A1 (en) 2017-12-18 2018-12-14 Methods and systems for instrument tracking and navigation within luminal networks

Publications (2)

Publication Number Publication Date
JP2021506439A JP2021506439A (ja) 2021-02-22
JP7059377B2 true JP7059377B2 (ja) 2022-04-25

Family

ID=66815420

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020533562A Active JP7059377B2 (ja) 2017-12-18 2018-12-14 管腔ネットワーク内の器具の追跡およびナビゲーションの方法およびシステム

Country Status (7)

Country Link
US (3) US11160615B2 (ja)
EP (1) EP3684283A4 (ja)
JP (1) JP7059377B2 (ja)
KR (1) KR102743997B1 (ja)
CN (1) CN110809453B (ja)
AU (1) AU2018390476B2 (ja)
WO (1) WO2019125964A1 (ja)

Families Citing this family (198)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8414505B1 (en) 2001-02-15 2013-04-09 Hansen Medical, Inc. Catheter driver system
EP1720480A1 (en) 2004-03-05 2006-11-15 Hansen Medical, Inc. Robotic catheter system
US9232959B2 (en) 2007-01-02 2016-01-12 Aquabeam, Llc Multi fluid tissue resection methods and devices
US20220096112A1 (en) 2007-01-02 2022-03-31 Aquabeam, Llc Tissue resection with pressure sensing
EP3622910B1 (en) 2008-03-06 2024-07-10 AquaBeam LLC Tissue ablation and cautery with optical energy carried in fluid stream
US8218847B2 (en) 2008-06-06 2012-07-10 Superdimension, Ltd. Hybrid registration method
US9254123B2 (en) 2009-04-29 2016-02-09 Hansen Medical, Inc. Flexible and steerable elongate instruments with shape control and support elements
US8672837B2 (en) 2010-06-24 2014-03-18 Hansen Medical, Inc. Methods and devices for controlling a shapeable medical device
US9314306B2 (en) 2010-09-17 2016-04-19 Hansen Medical, Inc. Systems and methods for manipulating an elongate member
US9138166B2 (en) 2011-07-29 2015-09-22 Hansen Medical, Inc. Apparatus and methods for fiber integration and registration
JP6080872B2 (ja) 2012-02-29 2017-02-15 プロセプト バイオロボティクス コーポレイション 自動化された画像誘導組織切除および治療
US10383765B2 (en) 2012-04-24 2019-08-20 Auris Health, Inc. Apparatus and method for a global coordinate system for use in robotic surgery
US20130317519A1 (en) 2012-05-25 2013-11-28 Hansen Medical, Inc. Low friction instrument driver interface for robotic systems
US20140148673A1 (en) 2012-11-28 2014-05-29 Hansen Medical, Inc. Method of anchoring pullwire directly articulatable region in catheter
US10231867B2 (en) 2013-01-18 2019-03-19 Auris Health, Inc. Method, apparatus and system for a water jet
US10149720B2 (en) 2013-03-08 2018-12-11 Auris Health, Inc. Method, apparatus, and a system for facilitating bending of an instrument in a surgical or medical robotic environment
US9566414B2 (en) 2013-03-13 2017-02-14 Hansen Medical, Inc. Integrated catheter and guide wire controller
US9057600B2 (en) 2013-03-13 2015-06-16 Hansen Medical, Inc. Reducing incremental measurement sensor error
US9326822B2 (en) 2013-03-14 2016-05-03 Hansen Medical, Inc. Active drives for robotic catheter manipulators
US20140277334A1 (en) 2013-03-14 2014-09-18 Hansen Medical, Inc. Active drives for robotic catheter manipulators
US9173713B2 (en) 2013-03-14 2015-11-03 Hansen Medical, Inc. Torque-based catheter articulation
US11213363B2 (en) 2013-03-14 2022-01-04 Auris Health, Inc. Catheter tension sensing
US9452018B2 (en) 2013-03-15 2016-09-27 Hansen Medical, Inc. Rotational support for an elongate member
US9629595B2 (en) 2013-03-15 2017-04-25 Hansen Medical, Inc. Systems and methods for localizing, tracking and/or controlling medical instruments
US20140276936A1 (en) 2013-03-15 2014-09-18 Hansen Medical, Inc. Active drive mechanism for simultaneous rotation and translation
US9271663B2 (en) 2013-03-15 2016-03-01 Hansen Medical, Inc. Flexible instrument localization from both remote and elongation sensors
US10849702B2 (en) 2013-03-15 2020-12-01 Auris Health, Inc. User input devices for controlling manipulation of guidewires and catheters
US9283046B2 (en) 2013-03-15 2016-03-15 Hansen Medical, Inc. User interface for active drive apparatus with finite range of motion
US9014851B2 (en) 2013-03-15 2015-04-21 Hansen Medical, Inc. Systems and methods for tracking robotically controlled medical instruments
US9408669B2 (en) 2013-03-15 2016-08-09 Hansen Medical, Inc. Active drive mechanism with finite range of motion
US10376672B2 (en) 2013-03-15 2019-08-13 Auris Health, Inc. Catheter insertion system and method of fabrication
US20140276647A1 (en) 2013-03-15 2014-09-18 Hansen Medical, Inc. Vascular remote catheter manipulator
US11020016B2 (en) 2013-05-30 2021-06-01 Auris Health, Inc. System and method for displaying anatomy and devices on a movable display
WO2014201165A1 (en) 2013-06-11 2014-12-18 Auris Surgical Robotics, Inc. System for robotic assisted cataract surgery
US10426661B2 (en) 2013-08-13 2019-10-01 Auris Health, Inc. Method and apparatus for laser assisted cataract surgery
EP2923669B1 (en) 2014-03-24 2017-06-28 Hansen Medical, Inc. Systems and devices for catheter driving instinctiveness
US10046140B2 (en) 2014-04-21 2018-08-14 Hansen Medical, Inc. Devices, systems, and methods for controlling active drive systems
US10569052B2 (en) 2014-05-15 2020-02-25 Auris Health, Inc. Anti-buckling mechanisms for catheters
US10792464B2 (en) 2014-07-01 2020-10-06 Auris Health, Inc. Tool and method for using surgical endoscope with spiral lumens
US9561083B2 (en) 2014-07-01 2017-02-07 Auris Surgical Robotics, Inc. Articulating flexible endoscopic tool with roll capabilities
US9744335B2 (en) 2014-07-01 2017-08-29 Auris Surgical Robotics, Inc. Apparatuses and methods for monitoring tendons of steerable catheters
US9603668B2 (en) 2014-07-02 2017-03-28 Covidien Lp Dynamic 3D lung map view for tool navigation inside the lung
US9633431B2 (en) 2014-07-02 2017-04-25 Covidien Lp Fluoroscopic pose estimation
EP3200718A4 (en) 2014-09-30 2018-04-25 Auris Surgical Robotics, Inc Configurable robotic surgical system with virtual rail and flexible endoscope
US10499999B2 (en) 2014-10-09 2019-12-10 Auris Health, Inc. Systems and methods for aligning an elongate member with an access site
US10314463B2 (en) 2014-10-24 2019-06-11 Auris Health, Inc. Automated endoscope calibration
US9974525B2 (en) 2014-10-31 2018-05-22 Covidien Lp Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same
US11819636B2 (en) 2015-03-30 2023-11-21 Auris Health, Inc. Endoscope pull wire electrical circuit
US20160287279A1 (en) 2015-04-01 2016-10-06 Auris Surgical Robotics, Inc. Microsurgical tool for robotic applications
WO2016164824A1 (en) 2015-04-09 2016-10-13 Auris Surgical Robotics, Inc. Surgical system with configurable rail-mounted mechanical arms
WO2016187054A1 (en) 2015-05-15 2016-11-24 Auris Surgical Robotics, Inc. Surgical robotics system
US10702226B2 (en) 2015-08-06 2020-07-07 Covidien Lp System and method for local three dimensional volume reconstruction using a standard fluoroscope
US10716525B2 (en) 2015-08-06 2020-07-21 Covidien Lp System and method for navigating to target and performing procedure on target utilizing fluoroscopic-based local three dimensional volume reconstruction
US10674982B2 (en) 2015-08-06 2020-06-09 Covidien Lp System and method for local three dimensional volume reconstruction using a standard fluoroscope
WO2017044884A1 (en) 2015-09-09 2017-03-16 Auris Surgical Robotics, Inc. Instrument device manipulator for a surgical robotics system
EP3349649B1 (en) 2015-09-18 2022-03-09 Auris Health, Inc. Navigation of tubular networks
US10639108B2 (en) 2015-10-30 2020-05-05 Auris Health, Inc. Process for percutaneous operations
US9949749B2 (en) 2015-10-30 2018-04-24 Auris Surgical Robotics, Inc. Object capture with a basket
US9955986B2 (en) 2015-10-30 2018-05-01 Auris Surgical Robotics, Inc. Basket apparatus
US10143526B2 (en) 2015-11-30 2018-12-04 Auris Health, Inc. Robot-assisted driving systems and methods
US10932861B2 (en) 2016-01-14 2021-03-02 Auris Health, Inc. Electromagnetic tracking surgical system and method of controlling the same
US10932691B2 (en) 2016-01-26 2021-03-02 Auris Health, Inc. Surgical tools having electromagnetic tracking components
US11324554B2 (en) 2016-04-08 2022-05-10 Auris Health, Inc. Floating electromagnetic field generator system and method of controlling the same
US10454347B2 (en) 2016-04-29 2019-10-22 Auris Health, Inc. Compact height torque sensing articulation axis assembly
US11037464B2 (en) 2016-07-21 2021-06-15 Auris Health, Inc. System with emulator movement tracking for controlling medical devices
US10463439B2 (en) 2016-08-26 2019-11-05 Auris Health, Inc. Steerable catheter with shaft load distributions
US11241559B2 (en) 2016-08-29 2022-02-08 Auris Health, Inc. Active drive for guidewire manipulation
KR102555546B1 (ko) 2016-08-31 2023-07-19 아우리스 헬스, 인코포레이티드 길이 보존 수술용 기구
US9931025B1 (en) * 2016-09-30 2018-04-03 Auris Surgical Robotics, Inc. Automated calibration of endoscopes with pull wires
US10543048B2 (en) 2016-12-28 2020-01-28 Auris Health, Inc. Flexible instrument insertion using an adaptive insertion force threshold
US10136959B2 (en) 2016-12-28 2018-11-27 Auris Health, Inc. Endolumenal object sizing
US10244926B2 (en) 2016-12-28 2019-04-02 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
US11793579B2 (en) 2017-02-22 2023-10-24 Covidien Lp Integration of multiple data sources for localization and navigation
EP3599979A4 (en) 2017-03-28 2021-01-06 Auris Health, Inc. SHAFT DRIVE HANDLE
EP3600031A4 (en) 2017-03-31 2021-01-20 Auris Health, Inc. ROBOTIC NAVIGATION SYSTEMS IN LUMINAL NETWORKS COMPENSATION FOR PHYSIOLOGICAL NOISE
US10285574B2 (en) 2017-04-07 2019-05-14 Auris Health, Inc. Superelastic medical instrument
KR102550962B1 (ko) 2017-04-07 2023-07-06 아우리스 헬스, 인코포레이티드 환자 삽입기(Introducer) 정렬
JP2020520691A (ja) 2017-05-12 2020-07-16 オーリス ヘルス インコーポレイテッド 生検装置およびシステム
EP3624668A4 (en) 2017-05-17 2021-05-26 Auris Health, Inc. Exchangeable working channel
US10022192B1 (en) 2017-06-23 2018-07-17 Auris Health, Inc. Automatically-initialized robotic systems for navigation of luminal networks
EP3644886A4 (en) 2017-06-28 2021-03-24 Auris Health, Inc. ELECTROMAGNETIC DISTORTION DETECTION
KR102558063B1 (ko) 2017-06-28 2023-07-25 아우리스 헬스, 인코포레이티드 전자기장 생성기 정렬
KR102341451B1 (ko) 2017-06-28 2021-12-23 아우리스 헬스, 인코포레이티드 기기의 삽입 보상을 위한 로봇 시스템, 방법 및 비일시적 컴퓨터 가독 저장 매체
US11026758B2 (en) 2017-06-28 2021-06-08 Auris Health, Inc. Medical robotics systems implementing axis constraints during actuation of one or more motorized joints
US10699448B2 (en) 2017-06-29 2020-06-30 Covidien Lp System and method for identifying, marking and navigating to a target using real time two dimensional fluoroscopic data
US10426559B2 (en) 2017-06-30 2019-10-01 Auris Health, Inc. Systems and methods for medical instrument compression compensation
US10464209B2 (en) 2017-10-05 2019-11-05 Auris Health, Inc. Robotic system with indication of boundary for robotic arm
CN111163697B (zh) 2017-10-10 2023-10-03 柯惠有限合伙公司 用于在荧光三维重构中识别和标记目标的系统和方法
US10016900B1 (en) 2017-10-10 2018-07-10 Auris Health, Inc. Surgical robotic arm admittance control
US10145747B1 (en) 2017-10-10 2018-12-04 Auris Health, Inc. Detection of undesirable forces on a surgical robotic arm
US11058493B2 (en) 2017-10-13 2021-07-13 Auris Health, Inc. Robotic system configured for navigation path tracing
US10555778B2 (en) 2017-10-13 2020-02-11 Auris Health, Inc. Image-based branch detection and mapping for navigation
EP3684282B1 (en) 2017-12-06 2024-02-21 Auris Health, Inc. Systems to correct for uncommanded instrument roll
WO2019113391A1 (en) 2017-12-08 2019-06-13 Auris Health, Inc. System and method for medical instrument navigation and targeting
CN116059454A (zh) 2017-12-08 2023-05-05 奥瑞斯健康公司 用于执行医疗手术的系统和用以移除肾结石的医疗装置
BR112020011444A2 (pt) 2017-12-11 2021-02-02 Auris Health, Inc. sistemas e métodos para arquiteturas de inserção baseadas em instrumentos
AU2018384820B2 (en) 2017-12-14 2024-07-04 Auris Health, Inc. System and method for estimating instrument location
USD873878S1 (en) 2018-01-17 2020-01-28 Auris Health, Inc. Robotic arm
USD901694S1 (en) 2018-01-17 2020-11-10 Auris Health, Inc. Instrument handle
JP7463277B2 (ja) 2018-01-17 2024-04-08 オーリス ヘルス インコーポレイテッド 改善されたロボットアームを有する外科用ロボットシステム
USD924410S1 (en) 2018-01-17 2021-07-06 Auris Health, Inc. Instrument tower
USD901018S1 (en) 2018-01-17 2020-11-03 Auris Health, Inc. Controller
WO2019143459A1 (en) 2018-01-17 2019-07-25 Auris Health, Inc. Surgical platform with adjustable arm supports
USD932628S1 (en) 2018-01-17 2021-10-05 Auris Health, Inc. Instrument cart
US10905498B2 (en) 2018-02-08 2021-02-02 Covidien Lp System and method for catheter detection in fluoroscopic images and updating displayed position of catheter
US10930064B2 (en) 2018-02-08 2021-02-23 Covidien Lp Imaging reconstruction system and method
US11364004B2 (en) 2018-02-08 2022-06-21 Covidien Lp System and method for pose estimation of an imaging device and for determining the location of a medical device with respect to a target
KR102690164B1 (ko) 2018-02-13 2024-08-02 아우리스 헬스, 인코포레이티드 의료 기구를 구동시키기 위한 시스템 및 방법
US20190298451A1 (en) * 2018-03-27 2019-10-03 Intuitive Surgical Operations, Inc. Systems and methods for delivering targeted therapy
KR102489198B1 (ko) 2018-03-28 2023-01-18 아우리스 헬스, 인코포레이티드 위치 센서의 정합을 위한 시스템 및 방법
KR102746051B1 (ko) 2018-03-28 2024-12-27 아우리스 헬스, 인코포레이티드 가변 굽힘 강성 프로파일을 갖는 의료 기구
KR102500422B1 (ko) 2018-03-28 2023-02-20 아우리스 헬스, 인코포레이티드 기구의 추정된 위치를 디스플레이하기 위한 시스템 및 방법
WO2019222495A1 (en) 2018-05-18 2019-11-21 Auris Health, Inc. Controllers for robotically-enabled teleoperated systems
WO2019231895A1 (en) 2018-05-30 2019-12-05 Auris Health, Inc. Systems and methods for location sensor-based branch prediction
US11503986B2 (en) 2018-05-31 2022-11-22 Auris Health, Inc. Robotic systems and methods for navigation of luminal network that detect physiological noise
EP4454591A3 (en) 2018-05-31 2025-01-15 Auris Health, Inc. Path-based navigation of tubular networks
WO2019232236A1 (en) 2018-05-31 2019-12-05 Auris Health, Inc. Image-based airway analysis and mapping
US10751140B2 (en) 2018-06-07 2020-08-25 Auris Health, Inc. Robotic medical systems with high force instruments
CN118902621A (zh) 2018-06-27 2024-11-08 奥瑞斯健康公司 用于医疗器械的对准系统和附接系统
US10667875B2 (en) 2018-06-27 2020-06-02 Auris Health, Inc. Systems and techniques for providing multiple perspectives during medical procedures
EP3813682A4 (en) 2018-06-28 2022-03-30 Auris Health, Inc. MEDICAL SYSTEMS INCORPORATING PULLEY SHARING
US11071591B2 (en) 2018-07-26 2021-07-27 Covidien Lp Modeling a collapsed lung using CT data
US11705238B2 (en) 2018-07-26 2023-07-18 Covidien Lp Systems and methods for providing assistance during surgery
WO2020028216A1 (en) * 2018-08-01 2020-02-06 Intuitive Surgical Operations, Inc. Systems and methods for controlling a robotic manipulator or associated tool
WO2020033318A1 (en) 2018-08-07 2020-02-13 Auris Health, Inc. Combining strain-based shape sensing with catheter control
US10828118B2 (en) 2018-08-15 2020-11-10 Auris Health, Inc. Medical instruments for tissue cauterization
WO2020036686A1 (en) 2018-08-17 2020-02-20 Auris Health, Inc. Bipolar medical instrument
WO2020041619A2 (en) 2018-08-24 2020-02-27 Auris Health, Inc. Manually and robotically controllable medical instruments
KR20210062043A (ko) 2018-09-17 2021-05-28 아우리스 헬스, 인코포레이티드 동시 의료 절차를 위한 시스템 및 방법
US11864849B2 (en) 2018-09-26 2024-01-09 Auris Health, Inc. Systems and instruments for suction and irrigation
US11179212B2 (en) 2018-09-26 2021-11-23 Auris Health, Inc. Articulating medical instruments
US10820947B2 (en) 2018-09-28 2020-11-03 Auris Health, Inc. Devices, systems, and methods for manually and robotically driving medical instruments
US10765487B2 (en) 2018-09-28 2020-09-08 Auris Health, Inc. Systems and methods for docking medical instruments
US11944388B2 (en) 2018-09-28 2024-04-02 Covidien Lp Systems and methods for magnetic interference correction
WO2020069404A1 (en) 2018-09-28 2020-04-02 Auris Health, Inc. Robotic systems and methods for concomitant endoscopic and percutaneous medical procedures
WO2020076447A1 (en) 2018-10-08 2020-04-16 Auris Health, Inc. Systems and instruments for tissue sealing
US11877806B2 (en) 2018-12-06 2024-01-23 Covidien Lp Deformable registration of computer-generated airway models to airway trees
US11045075B2 (en) 2018-12-10 2021-06-29 Covidien Lp System and method for generating a three-dimensional model of a surgical site
US11801113B2 (en) 2018-12-13 2023-10-31 Covidien Lp Thoracic imaging, distance measuring, and notification system and method
US11617493B2 (en) 2018-12-13 2023-04-04 Covidien Lp Thoracic imaging, distance measuring, surgical awareness, and notification system and method
EP3870075A4 (en) 2018-12-20 2022-08-03 Auris Health, Inc. Shielding for wristed instruments
US11254009B2 (en) 2018-12-20 2022-02-22 Auris Health, Inc. Systems and methods for robotic arm alignment and docking
WO2020139973A1 (en) 2018-12-28 2020-07-02 Auris Health, Inc. Medical instrument with articulable segment
WO2020140072A1 (en) 2018-12-28 2020-07-02 Auris Health, Inc. Percutaneous sheath for robotic medical systems and methods
US11357593B2 (en) 2019-01-10 2022-06-14 Covidien Lp Endoscopic imaging with augmented parallax
WO2020154100A1 (en) 2019-01-25 2020-07-30 Auris Health, Inc. Vessel sealer with heating and cooling capabilities
US11625825B2 (en) 2019-01-30 2023-04-11 Covidien Lp Method for displaying tumor location within endoscopic images
US11564751B2 (en) 2019-02-01 2023-01-31 Covidien Lp Systems and methods for visualizing navigation of medical devices relative to targets
US11925333B2 (en) 2019-02-01 2024-03-12 Covidien Lp System for fluoroscopic tracking of a catheter to update the relative position of a target and the catheter in a 3D model of a luminal network
US11744643B2 (en) 2019-02-04 2023-09-05 Covidien Lp Systems and methods facilitating pre-operative prediction of post-operative tissue function
US11857277B2 (en) 2019-02-08 2024-01-02 Auris Health, Inc. Robotically controlled clot manipulation and removal
US11202683B2 (en) 2019-02-22 2021-12-21 Auris Health, Inc. Surgical platform with motorized arms for adjustable arm supports
EP3965710A4 (en) 2019-03-08 2023-04-05 Auris Health, Inc. TILT MECHANISMS FOR MEDICAL SYSTEMS AND APPLICATIONS
EP3908224A4 (en) 2019-03-22 2022-10-19 Auris Health, Inc. SYSTEMS AND METHODS FOR INLET ALIGNMENTS ON MEDICAL DEVICES
CN113613566B (zh) 2019-03-25 2024-10-11 奥瑞斯健康公司 用于医疗缝合的系统和方法
US11617627B2 (en) 2019-03-29 2023-04-04 Auris Health, Inc. Systems and methods for optical strain sensing in medical instruments
US11819285B2 (en) 2019-04-05 2023-11-21 Covidien Lp Magnetic interference detection systems and methods
JP2022527834A (ja) 2019-04-08 2022-06-06 オーリス ヘルス インコーポレイテッド 付随する処置のためのシステム、方法、及びワークフロー
US12138003B2 (en) 2019-06-25 2024-11-12 Auris Health, Inc. Medical instruments including wrists with hybrid redirect surfaces
US12023119B2 (en) 2019-06-26 2024-07-02 Auris Health, Inc. Systems and methods for robotic arm alignment and docking
US11369386B2 (en) 2019-06-27 2022-06-28 Auris Health, Inc. Systems and methods for a medical clip applier
WO2020264418A1 (en) 2019-06-28 2020-12-30 Auris Health, Inc. Console overlay and methods of using same
WO2020263949A1 (en) 2019-06-28 2020-12-30 Auris Health, Inc. Medical instruments including wrists with hybrid redirect surfaces
US12089902B2 (en) 2019-07-30 2024-09-17 Coviden Lp Cone beam and 3D fluoroscope lung navigation
WO2021028883A1 (en) 2019-08-15 2021-02-18 Auris Health, Inc. Medical device having multiple bending sections
USD978348S1 (en) 2019-08-15 2023-02-14 Auris Health, Inc. Drive device for a medical instrument
USD975275S1 (en) 2019-08-15 2023-01-10 Auris Health, Inc. Handle for a medical instrument
US11896330B2 (en) 2019-08-15 2024-02-13 Auris Health, Inc. Robotic medical system having multiple medical instruments
US12059281B2 (en) 2019-08-19 2024-08-13 Covidien Lp Systems and methods of fluoro-CT imaging for initial registration
US11269173B2 (en) 2019-08-19 2022-03-08 Covidien Lp Systems and methods for displaying medical video images and/or medical 3D models
JP7451686B2 (ja) 2019-08-30 2024-03-18 オーリス ヘルス インコーポレイテッド 器具画像信頼性システム及び方法
KR20220058569A (ko) 2019-08-30 2022-05-09 아우리스 헬스, 인코포레이티드 위치 센서의 가중치-기반 정합을 위한 시스템 및 방법
CN114641252B (zh) 2019-09-03 2023-09-01 奥瑞斯健康公司 电磁畸变检测和补偿
US11864935B2 (en) 2019-09-09 2024-01-09 Covidien Lp Systems and methods for pose estimation of a fluoroscopic imaging device and for three-dimensional imaging of body structures
US11931111B2 (en) 2019-09-09 2024-03-19 Covidien Lp Systems and methods for providing surgical guidance
WO2021048707A1 (en) 2019-09-10 2021-03-18 Auris Health, Inc. Systems and methods for kinematic optimization with shared robotic degrees-of-freedom
US11627924B2 (en) 2019-09-24 2023-04-18 Covidien Lp Systems and methods for image-guided navigation of percutaneously-inserted devices
US10959792B1 (en) 2019-09-26 2021-03-30 Auris Health, Inc. Systems and methods for collision detection and avoidance
WO2021064536A1 (en) 2019-09-30 2021-04-08 Auris Health, Inc. Medical instrument with capstan
US11737835B2 (en) 2019-10-29 2023-08-29 Auris Health, Inc. Braid-reinforced insulation sheath
US12102298B2 (en) 2019-12-10 2024-10-01 Covidien Lp Lymphatic system tracking
KR20220123269A (ko) 2019-12-31 2022-09-06 아우리스 헬스, 인코포레이티드 고급 바스켓 구동 모드
JP2023508521A (ja) 2019-12-31 2023-03-02 オーリス ヘルス インコーポレイテッド 解剖学的特徴の識別及び標的化
KR20220123087A (ko) 2019-12-31 2022-09-05 아우리스 헬스, 인코포레이티드 경피 접근을 위한 정렬 인터페이스
US11950872B2 (en) 2019-12-31 2024-04-09 Auris Health, Inc. Dynamic pulley system
KR20220123076A (ko) 2019-12-31 2022-09-05 아우리스 헬스, 인코포레이티드 경피 접근을 위한 정렬 기법
US11847730B2 (en) 2020-01-24 2023-12-19 Covidien Lp Orientation detection in fluoroscopic images
US11380060B2 (en) 2020-01-24 2022-07-05 Covidien Lp System and method for linking a segmentation graph to volumetric data
US11737663B2 (en) 2020-03-30 2023-08-29 Auris Health, Inc. Target anatomical feature localization
US12064191B2 (en) 2020-06-03 2024-08-20 Covidien Lp Surgical tool navigation using sensor fusion
WO2022003485A1 (en) 2020-06-29 2022-01-06 Auris Health, Inc. Systems and methods for detecting contact between a link and an external object
US11357586B2 (en) 2020-06-30 2022-06-14 Auris Health, Inc. Systems and methods for saturated robotic movement
US11931901B2 (en) 2020-06-30 2024-03-19 Auris Health, Inc. Robotic medical system with collision proximity indicators
US11950950B2 (en) 2020-07-24 2024-04-09 Covidien Lp Zoom detection and fluoroscope movement detection for target overlay
WO2022035584A1 (en) * 2020-08-13 2022-02-17 Intuitive Surgical Operations, Inc. Alerting and mitigating divergence of anatomical feature locations from prior images to real-time interrogation
US12161309B2 (en) 2020-09-24 2024-12-10 Covidien Lp Articulating mechanism for the laparoscopic ablation device for blunt dissection
US12144602B2 (en) 2021-02-26 2024-11-19 Covidien Lp Six degrees of freedom from a single inductive pickup coil sensor
WO2022182770A1 (en) * 2021-02-26 2022-09-01 Covidien Lp Six degrees of freedom from a single inductive pickup coil sensor

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8298135B2 (en) 2008-05-23 2012-10-30 Olympus Medical Systems Corp. Medical device with endoscope and insertable instrument
US20140350391A1 (en) 2009-03-26 2014-11-27 Intuitive Surgical Operations, Inc. Method And System For Providing Visual Guidance To An Operator For Steering A Tip Of An Endoscopic Device Towards One Or More Landmarks In A Patient
US20170084027A1 (en) 2015-09-18 2017-03-23 Auris Surgical Robotics, Inc. Navigation of tubular networks

Family Cites Families (392)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4745908A (en) 1987-05-08 1988-05-24 Circon Corporation Inspection instrument fexible shaft having deflection compensation means
US4863441A (en) 1987-07-17 1989-09-05 Minnesota Mining And Manufacturing Company Venous return catheter
JP2750201B2 (ja) 1990-04-13 1998-05-13 オリンパス光学工業株式会社 内視鏡の挿入状態検出装置
US5550953A (en) 1994-04-20 1996-08-27 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration On-line method and apparatus for coordinated mobility and manipulation of mobile robots
US5603318A (en) 1992-04-21 1997-02-18 University Of Utah Research Foundation Apparatus and method for photogrammetric surgical localization
US6236875B1 (en) 1994-10-07 2001-05-22 Surgical Navigation Technologies Surgical navigation systems including reference and localization frames
US5526812A (en) 1993-06-21 1996-06-18 General Electric Company Display system for enhancing visualization of body structures during medical procedures
US6059718A (en) 1993-10-18 2000-05-09 Olympus Optical Co., Ltd. Endoscope form detecting apparatus in which coil is fixedly mounted by insulating member so that form is not deformed within endoscope
US6690963B2 (en) 1995-01-24 2004-02-10 Biosense, Inc. System for determining the location and orientation of an invasive medical instrument
US6246898B1 (en) 1995-03-28 2001-06-12 Sonometrics Corporation Method for carrying out a medical procedure using a three-dimensional tracking and imaging system
CA2231425A1 (en) 1995-09-20 1997-03-27 Texas Heart Institute Detecting thermal discrepancies in vessel walls
IL125757A (en) 1996-02-15 2003-09-17 Biosense Inc Medical procedures and apparatus using intrabody probes
CA2246341C (en) 1996-02-15 2007-05-01 Biosense, Inc. Precise position determination of endoscopes
US6063095A (en) 1996-02-20 2000-05-16 Computer Motion, Inc. Method and apparatus for performing minimally invasive surgical procedures
US6047080A (en) 1996-06-19 2000-04-04 Arch Development Corporation Method and apparatus for three-dimensional reconstruction of coronary vessels from angiographic images
US5831614A (en) 1996-07-01 1998-11-03 Sun Microsystems, Inc. X-Y viewport scroll using location of display with respect to a point
JP2000509626A (ja) 1997-01-24 2000-08-02 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 画像表示システム
US6246784B1 (en) 1997-08-19 2001-06-12 The United States Of America As Represented By The Department Of Health And Human Services Method for segmenting medical images and detecting surface anomalies in anatomical structures
US6810281B2 (en) 2000-12-21 2004-10-26 Endovia Medical, Inc. Medical mapping system
FR2779339B1 (fr) 1998-06-09 2000-10-13 Integrated Surgical Systems Sa Procede et appareil de mise en correspondance pour la chirurgie robotisee, et dispositif de mise en correspondance en comportant application
US6425865B1 (en) 1998-06-12 2002-07-30 The University Of British Columbia Robotically assisted medical ultrasound
US6665554B1 (en) 1998-11-18 2003-12-16 Steve T. Charles Medical manipulator for use with an imaging device
US6493608B1 (en) 1999-04-07 2002-12-10 Intuitive Surgical, Inc. Aspects of a control system of a minimally invasive surgical apparatus
US6501981B1 (en) 1999-03-16 2002-12-31 Accuray, Inc. Apparatus and method for compensating for respiratory and patient motions during treatment
US6594552B1 (en) 1999-04-07 2003-07-15 Intuitive Surgical, Inc. Grip strength with tactile feedback for robotic surgery
US7386339B2 (en) 1999-05-18 2008-06-10 Mediguide Ltd. Medical imaging and navigation system
US9272416B2 (en) 1999-09-17 2016-03-01 Intuitive Surgical Operations, Inc. Phantom degrees of freedom for manipulating the movement of mechanical bodies
US6466198B1 (en) 1999-11-05 2002-10-15 Innoventions, Inc. View navigation and magnification of a hand-held device with a display
FI114282B (fi) 1999-11-05 2004-09-30 Polar Electro Oy Menetelmä, järjestely ja sykemittari sydämen lyönnin tunnistamiseksi
US6755797B1 (en) 1999-11-29 2004-06-29 Bowles Fluidics Corporation Method and apparatus for producing oscillation of a bladder
US7747312B2 (en) 2000-01-04 2010-06-29 George Mason Intellectual Properties, Inc. System and method for automatic shape registration and instrument tracking
DE10011790B4 (de) 2000-03-13 2005-07-14 Siemens Ag Medizinisches Instrument zum Einführen in ein Untersuchungsobjekt, sowie medizinisches Untersuchungs- oder Behandlungsgerät
US7181289B2 (en) 2000-03-20 2007-02-20 Pflueger D Russell Epidural nerve root access catheter and treatment methods
DE10025285A1 (de) 2000-05-22 2001-12-06 Siemens Ag Vollautomatische, robotergestützte Kameraführung unter Verwendung von Positionssensoren für laparoskopische Eingriffe
DE10033723C1 (de) 2000-07-12 2002-02-21 Siemens Ag Visualisierung von Positionen und Orientierung von intrakorporal geführten Instrumenten während eines chirurgischen Eingriffs
US6865498B2 (en) 2001-11-30 2005-03-08 Thermwood Corporation System for calibrating the axes on a computer numeric controlled machining system and method thereof
US6812842B2 (en) 2001-12-20 2004-11-02 Calypso Medical Technologies, Inc. System for excitation of a leadless miniature marker
WO2003077101A2 (en) 2002-03-06 2003-09-18 Z-Kat, Inc. System and method for using a haptic device in combination with a computer-assisted surgery system
DE10210646A1 (de) 2002-03-11 2003-10-09 Siemens Ag Verfahren zur Bilddarstellung eines in einen Untersuchungsbereich eines Patienten eingebrachten medizinischen Instruments
US20050256398A1 (en) 2004-05-12 2005-11-17 Hastings Roger N Systems and methods for interventional medicine
EP2380487B1 (en) 2002-04-17 2021-03-31 Covidien LP Endoscope structures for navigating to a target in branched structure
US7998062B2 (en) 2004-03-29 2011-08-16 Superdimension, Ltd. Endoscope structures and techniques for navigating to a target in branched structure
US7822466B2 (en) 2002-04-25 2010-10-26 The Johns Hopkins University Robot for computed tomography interventions
CN100443050C (zh) 2002-06-04 2008-12-17 皇家飞利浦电子股份有限公司 基于旋转血管造影术的冠状动脉结构混合3d重建
JP4439393B2 (ja) 2002-06-17 2010-03-24 メイザー サージカル テクノロジーズ リミテッド 整形外科的インサートと併用するロボット
US20040047044A1 (en) 2002-06-25 2004-03-11 Dalton Michael Nicholas Apparatus and method for combining three-dimensional spaces
KR100449765B1 (ko) 2002-10-12 2004-09-22 삼성에스디아이 주식회사 리튬전지용 리튬메탈 애노드
US6899672B2 (en) 2002-11-08 2005-05-31 Scimed Life Systems, Inc. Endoscopic imaging system including removable deflection device
US7991453B2 (en) 2002-11-13 2011-08-02 Koninklijke Philips Electronics N.V Medical viewing system and method for detecting boundary structures
US7599730B2 (en) 2002-11-19 2009-10-06 Medtronic Navigation, Inc. Navigation system for cardiac therapies
US20040186349A1 (en) 2002-12-24 2004-09-23 Usgi Medical Corp. Apparatus and methods for achieving endoluminal access
FR2852226B1 (fr) 2003-03-10 2005-07-15 Univ Grenoble 1 Instrument medical localise a ecran orientable
US7203277B2 (en) 2003-04-25 2007-04-10 Brainlab Ag Visualization device and method for combined patient and object image data
US7822461B2 (en) 2003-07-11 2010-10-26 Siemens Medical Solutions Usa, Inc. System and method for endoscopic path planning
EP2316328B1 (en) 2003-09-15 2012-05-09 Super Dimension Ltd. Wrap-around holding device for use with bronchoscopes
US7835778B2 (en) 2003-10-16 2010-11-16 Medtronic Navigation, Inc. Method and apparatus for surgical navigation of a multiple piece construct for implantation
WO2005058137A2 (en) * 2003-12-12 2005-06-30 University Of Washington Catheterscope 3d guidance and interface system
US8021301B2 (en) 2003-12-26 2011-09-20 Fujifilm Corporation Ultrasonic image processing apparatus, ultrasonic image processing method and ultrasonic image processing program
JP2005192632A (ja) 2003-12-26 2005-07-21 Olympus Corp 被検体内移動状態検出システム
US20050193451A1 (en) 2003-12-30 2005-09-01 Liposonix, Inc. Articulating arm for medical procedures
WO2005079492A2 (en) 2004-02-17 2005-09-01 Traxtal Technologies Inc. Method and apparatus for registration, verification, and referencing of internal organs
EP1720480A1 (en) 2004-03-05 2006-11-15 Hansen Medical, Inc. Robotic catheter system
US7850642B2 (en) 2004-03-05 2010-12-14 Hansen Medical, Inc. Methods using a robotic catheter system
US7811294B2 (en) 2004-03-08 2010-10-12 Mediguide Ltd. Automatic guidewire maneuvering system and method
ES2409160T3 (es) 2004-03-23 2013-06-25 Boston Scientific Limited Sistema de visualización in vivo
WO2005092188A1 (ja) * 2004-03-29 2005-10-06 Olympus Corporation 被検体内位置検出システム
US7720521B2 (en) 2004-04-21 2010-05-18 Acclarent, Inc. Methods and devices for performing procedures within the ear, nose, throat and paranasal sinuses
US20070208252A1 (en) 2004-04-21 2007-09-06 Acclarent, Inc. Systems and methods for performing image guided procedures within the ear, nose, throat and paranasal sinuses
US7462175B2 (en) 2004-04-21 2008-12-09 Acclarent, Inc. Devices, systems and methods for treating disorders of the ear, nose and throat
US8155403B2 (en) 2004-05-05 2012-04-10 University Of Iowa Research Foundation Methods and devices for airway tree labeling and/or matching
US7632265B2 (en) 2004-05-28 2009-12-15 St. Jude Medical, Atrial Fibrillation Division, Inc. Radio frequency ablation servo catheter and method
US20060209019A1 (en) 2004-06-01 2006-09-21 Energid Technologies Corporation Magnetic haptic feedback systems and methods for virtual reality environments
US7772541B2 (en) 2004-07-16 2010-08-10 Luna Innnovations Incorporated Fiber optic position and/or shape sensing based on rayleigh scatter
US20060025668A1 (en) 2004-08-02 2006-02-02 Peterson Thomas H Operating table with embedded tracking technology
US7536216B2 (en) 2004-10-18 2009-05-19 Siemens Medical Solutions Usa, Inc. Method and system for virtual endoscopy with guidance for biopsy
US9049954B2 (en) 2004-11-03 2015-06-09 Cambridge International, Inc. Hanger bar assembly for architectural mesh and the like
EP1816945B1 (en) 2004-11-23 2019-08-21 PneumRx, Inc. Steerable device for accessing a target site
EP1838378B1 (en) 2005-01-18 2017-03-22 Philips Electronics LTD Apparatus for guiding an instrument to a target in the lung
US8335357B2 (en) 2005-03-04 2012-12-18 Kabushiki Kaisha Toshiba Image processing apparatus
US20060258935A1 (en) 2005-05-12 2006-11-16 John Pile-Spellman System for autonomous robotic navigation
US10555775B2 (en) 2005-05-16 2020-02-11 Intuitive Surgical Operations, Inc. Methods and system for performing 3-D tool tracking by fusion of sensor and/or camera derived data during minimally invasive robotic surgery
US7756563B2 (en) 2005-05-23 2010-07-13 The Penn State Research Foundation Guidance method based on 3D-2D pose estimation and 3D-CT registration with application to live bronchoscopy
US7889905B2 (en) 2005-05-23 2011-02-15 The Penn State Research Foundation Fast 3D-2D image registration method with application to continuously guided endoscopy
JP4813190B2 (ja) 2005-05-26 2011-11-09 オリンパスメディカルシステムズ株式会社 カプセル型医療装置
GB2428110A (en) 2005-07-06 2007-01-17 Armstrong Healthcare Ltd A robot and method of registering a robot.
EP1945123A1 (en) 2005-07-14 2008-07-23 Enhanced Medical System LLC Robot for minimally invasive interventions
US8583220B2 (en) 2005-08-02 2013-11-12 Biosense Webster, Inc. Standardization of catheter-based treatment for atrial fibrillation
CN101282760A (zh) 2005-08-11 2008-10-08 纳沃特克医药有限公司 利用基于放射性的位置传感器的医疗系统和方法
US8657814B2 (en) 2005-08-22 2014-02-25 Medtronic Ablation Frontiers Llc User interface for tissue ablation system
EP1924197B1 (en) 2005-08-24 2017-10-11 Philips Electronics LTD System for navigated flexible endoscopy
US20070073136A1 (en) 2005-09-15 2007-03-29 Robert Metzger Bone milling with image guided surgery
US20070161857A1 (en) 2005-11-22 2007-07-12 Neoguide Systems, Inc. Method of determining the shape of a bendable instrument
US8303505B2 (en) 2005-12-02 2012-11-06 Abbott Cardiovascular Systems Inc. Methods and apparatuses for image guided medical procedures
US8190238B2 (en) 2005-12-09 2012-05-29 Hansen Medical, Inc. Robotic catheter system and methods
DE102005059271B4 (de) 2005-12-12 2019-02-21 Siemens Healthcare Gmbh Kathetervorrichtung
US8672922B2 (en) 2005-12-20 2014-03-18 Intuitive Surgical Operations, Inc. Wireless communication in a robotic surgical system
US9266239B2 (en) 2005-12-27 2016-02-23 Intuitive Surgical Operations, Inc. Constraint based control in a minimally invasive surgical apparatus
US7930065B2 (en) 2005-12-30 2011-04-19 Intuitive Surgical Operations, Inc. Robotic surgery system including position sensors using fiber bragg gratings
US9962066B2 (en) 2005-12-30 2018-05-08 Intuitive Surgical Operations, Inc. Methods and apparatus to shape flexible entry guides for minimally invasive surgery
US8191359B2 (en) 2006-04-13 2012-06-05 The Regents Of The University Of California Motion estimation using hidden markov model processing in MRI and other applications
WO2007129616A1 (ja) 2006-05-02 2007-11-15 National University Corporation Nagoya University 内視鏡挿入支援システム及び内視鏡挿入支援方法
DE102006021373A1 (de) 2006-05-08 2007-11-15 Siemens Ag Röntgendiagnostikeinrichtung
CN101522134B (zh) 2006-06-05 2012-06-27 泰克尼恩研究和发展基金有限公司 挠性针的受控导向
CN101500470B (zh) 2006-06-13 2015-03-25 直观外科手术操作公司 微创手术系统
US7505810B2 (en) 2006-06-13 2009-03-17 Rhythmia Medical, Inc. Non-contact cardiac mapping, including preprocessing
US8040127B2 (en) 2006-08-15 2011-10-18 General Electric Company Multi-sensor distortion mapping method and system
US8150498B2 (en) 2006-09-08 2012-04-03 Medtronic, Inc. System for identification of anatomical landmarks
US7824328B2 (en) 2006-09-18 2010-11-02 Stryker Corporation Method and apparatus for tracking a surgical instrument during surgery
CN100546540C (zh) 2006-09-19 2009-10-07 上海宏桐实业有限公司 心内膜三维导航系统
US7940977B2 (en) 2006-10-25 2011-05-10 Rcadia Medical Imaging Ltd. Method and system for automatic analysis of blood vessel structures to identify calcium or soft plaque pathologies
EP2086399B1 (en) * 2006-11-10 2017-08-09 Covidien LP Adaptive navigation technique for navigating a catheter through a body channel or cavity
US7936922B2 (en) 2006-11-22 2011-05-03 Adobe Systems Incorporated Method and apparatus for segmenting images
US20100054536A1 (en) 2006-12-01 2010-03-04 Thomson Licensing Estimating a location of an object in an image
US9220439B2 (en) 2006-12-29 2015-12-29 St. Jude Medical, Atrial Fibrillation Division, Inc. Navigational reference dislodgement detection method and system
US20080183188A1 (en) 2007-01-25 2008-07-31 Warsaw Orthopedic, Inc. Integrated Surgical Navigational and Neuromonitoring System
US20080183068A1 (en) 2007-01-25 2008-07-31 Warsaw Orthopedic, Inc. Integrated Visualization of Surgical Navigational and Neural Monitoring Information
US20080183064A1 (en) 2007-01-30 2008-07-31 General Electric Company Multi-sensor distortion detection method and system
US9037215B2 (en) 2007-01-31 2015-05-19 The Penn State Research Foundation Methods and apparatus for 3D route planning through hollow organs
US8672836B2 (en) 2007-01-31 2014-03-18 The Penn State Research Foundation Method and apparatus for continuous guidance of endoscopy
US20090036900A1 (en) 2007-02-02 2009-02-05 Hansen Medical, Inc. Surgery methods using a robotic instrument system
JP4914735B2 (ja) 2007-02-14 2012-04-11 オリンパスメディカルシステムズ株式会社 処置具の位置制御を行う内視鏡システム
EP2143038A4 (en) 2007-02-20 2011-01-26 Philip L Gildenberg VIDEOSTEREREOTAXY- AND AUDIOSTEREOTAXY-ASSISTED SURGICAL PROCEDURES AND METHODS
US8781193B2 (en) 2007-03-08 2014-07-15 Sync-Rx, Ltd. Automatic quantitative vessel analysis
EP2117436A4 (en) 2007-03-12 2011-03-02 David Tolkowsky DEVICES AND METHODS FOR PERFORMING MEDICAL OPERATIONS IN ARBORESCENT LUMINUM STRUCTURES
WO2008135985A1 (en) 2007-05-02 2008-11-13 Earlysense Ltd Monitoring, predicting and treating clinical episodes
US8934961B2 (en) 2007-05-18 2015-01-13 Biomet Manufacturing, Llc Trackable diagnostic scope apparatus and methods of use
US20090030307A1 (en) 2007-06-04 2009-01-29 Assaf Govari Intracorporeal location system with movement compensation
US9084623B2 (en) 2009-08-15 2015-07-21 Intuitive Surgical Operations, Inc. Controller assisted reconfiguration of an articulated instrument during movement into and out of an entry guide
US9138129B2 (en) 2007-06-13 2015-09-22 Intuitive Surgical Operations, Inc. Method and system for moving a plurality of articulated instruments in tandem back towards an entry guide
US9089256B2 (en) 2008-06-27 2015-07-28 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view including range of motion limitations for articulatable instruments extending out of a distal end of an entry guide
US20080319491A1 (en) 2007-06-19 2008-12-25 Ryan Schoenefeld Patient-matched surgical component and methods of use
US20130165945A9 (en) 2007-08-14 2013-06-27 Hansen Medical, Inc. Methods and devices for controlling a shapeable instrument
EP2626029B1 (en) 2007-08-14 2021-04-28 Koninklijke Philips N.V. Robotic instrument systems utilizing optical fiber sensors
US20090076476A1 (en) 2007-08-15 2009-03-19 Hansen Medical, Inc. Systems and methods employing force sensing for mapping intra-body tissue
WO2009097461A1 (en) 2008-01-29 2009-08-06 Neoguide Systems Inc. Apparatus and methods for automatically controlling an endoscope
EP2633810B1 (en) 2008-02-12 2017-08-30 Covidien LP Controlled perspective guidance method
KR100927096B1 (ko) 2008-02-27 2009-11-13 아주대학교산학협력단 기준 좌표상의 시각적 이미지를 이용한 객체 위치 측정방법
US8219179B2 (en) * 2008-03-06 2012-07-10 Vida Diagnostics, Inc. Systems and methods for navigation within a branched structure of a body
US20090228020A1 (en) 2008-03-06 2009-09-10 Hansen Medical, Inc. In-situ graft fenestration
US8808164B2 (en) 2008-03-28 2014-08-19 Intuitive Surgical Operations, Inc. Controlling a robotic surgical tool with a display monitor
US9002076B2 (en) 2008-04-15 2015-04-07 Medtronic, Inc. Method and apparatus for optimal trajectory planning
US8532734B2 (en) 2008-04-18 2013-09-10 Regents Of The University Of Minnesota Method and apparatus for mapping a structure
US8218846B2 (en) * 2008-05-15 2012-07-10 Superdimension, Ltd. Automatic pathway and waypoint generation and navigation method
US20100030061A1 (en) 2008-07-31 2010-02-04 Canfield Monte R Navigation system for cardiac therapies using gating
US8290571B2 (en) 2008-08-01 2012-10-16 Koninklijke Philips Electronics N.V. Auxiliary cavity localization
EP2153794B1 (en) 2008-08-15 2016-11-09 Stryker European Holdings I, LLC System for and method of visualizing an interior of a body
US8781630B2 (en) 2008-10-14 2014-07-15 University Of Florida Research Foundation, Inc. Imaging platform to provide integrated navigation capabilities for surgical guidance
BRPI0921731B1 (pt) 2008-10-31 2018-01-02 Chevron Phillips Chemical Company Lp “sistema catalisador, processo de oligomerização e processo para a preparação de um sistema catalisador”
US20100121139A1 (en) 2008-11-12 2010-05-13 Ouyang Xiaolong Minimally Invasive Imaging Systems
US8317746B2 (en) 2008-11-20 2012-11-27 Hansen Medical, Inc. Automated alignment
WO2010068783A1 (en) 2008-12-12 2010-06-17 Corindus Inc. Remote catheter procedure system
US8335590B2 (en) 2008-12-23 2012-12-18 Intuitive Surgical Operations, Inc. System and method for adjusting an image capturing device attribute using an unused degree-of-freedom of a master control device
EP2301411B1 (en) 2009-01-15 2012-12-12 Olympus Medical Systems Corp. Endoscope system
KR100961661B1 (ko) 2009-02-12 2010-06-09 주식회사 래보 수술용 항법 장치 및 그 방법
US8120301B2 (en) 2009-03-09 2012-02-21 Intuitive Surgical Operations, Inc. Ergonomic surgeon control console in robotic surgical systems
US9002427B2 (en) 2009-03-30 2015-04-07 Lifewave Biomedical, Inc. Apparatus and method for continuous noninvasive measurement of respiratory function and events
JP2012525190A (ja) 2009-04-29 2012-10-22 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 単眼の内視鏡画像からのリアルタイム深度推定
US20120062714A1 (en) 2009-05-08 2012-03-15 Koninklijke Philips Electronics N.V. Real-time scope tracking and branch labeling without electro-magnetic tracking and pre-operative scan roadmaps
US8675736B2 (en) 2009-05-14 2014-03-18 Qualcomm Incorporated Motion vector processing
WO2010131500A1 (ja) 2009-05-15 2010-11-18 シャープ株式会社 画像処理装置および画像処理方法
JP5836267B2 (ja) 2009-05-18 2015-12-24 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 電磁追跡内視鏡システムのためのマーカーなし追跡の位置合わせおよび較正のための方法およびシステム
US20100292565A1 (en) 2009-05-18 2010-11-18 Andreas Meyer Medical imaging medical device navigation from at least two 2d projections from different angles
ES2388029B1 (es) 2009-05-22 2013-08-13 Universitat Politècnica De Catalunya Sistema robótico para cirugia laparoscópica.
GB0915200D0 (en) 2009-09-01 2009-10-07 Ucl Business Plc Method for re-localising sites in images
US20110092808A1 (en) 2009-10-20 2011-04-21 Magnetecs, Inc. Method for acquiring high density mapping data with a catheter guidance system
WO2011055245A1 (en) 2009-11-04 2011-05-12 Koninklijke Philips Electronics N.V. Collision avoidance and detection using distance sensors
JP4781492B2 (ja) 2009-11-10 2011-09-28 オリンパスメディカルシステムズ株式会社 多関節マニピュレータ装置及びそれを有する内視鏡システム
JP2013517909A (ja) 2010-01-28 2013-05-20 ザ ペン ステイト リサーチ ファンデーション 気管支鏡検査法ガイダンスに適用される画像ベースのグローバル登録
WO2011102012A1 (ja) 2010-02-22 2011-08-25 オリンパスメディカルシステムズ株式会社 医療機器
DE102010012621A1 (de) 2010-03-24 2011-09-29 Siemens Aktiengesellschaft Verfahren und Vorrichtung zur automatischen Adaption eines Referenzbildes
US8425455B2 (en) 2010-03-30 2013-04-23 Angiodynamics, Inc. Bronchial catheter and method of use
IT1401669B1 (it) 2010-04-07 2013-08-02 Sofar Spa Sistema di chirurgia robotizzata con controllo perfezionato.
US8581905B2 (en) 2010-04-08 2013-11-12 Disney Enterprises, Inc. Interactive three dimensional displays on handheld devices
CA2797302C (en) 2010-04-28 2019-01-15 Ryerson University System and methods for intraoperative guidance feedback
US8845631B2 (en) 2010-04-28 2014-09-30 Medtronic Ablation Frontiers Llc Systems and methods of performing medical procedures
US20120101369A1 (en) 2010-06-13 2012-04-26 Angiometrix Corporation Methods and systems for determining vascular bodily lumen information and guiding medical devices
US8460236B2 (en) 2010-06-24 2013-06-11 Hansen Medical, Inc. Fiber optic instrument sensing system
US8672837B2 (en) 2010-06-24 2014-03-18 Hansen Medical, Inc. Methods and devices for controlling a shapeable medical device
EP3659490A1 (en) * 2010-08-20 2020-06-03 Veran Medical Technologies, Inc. Apparatus and method for four dimensional soft tissue navigation
US9314306B2 (en) * 2010-09-17 2016-04-19 Hansen Medical, Inc. Systems and methods for manipulating an elongate member
JP5669529B2 (ja) 2010-11-17 2015-02-12 オリンパス株式会社 撮像装置、プログラム及びフォーカス制御方法
DE112010006052T5 (de) 2010-12-08 2013-10-10 Industrial Technology Research Institute Verfahren zum Erzeugen stereoskopischer Ansichten von monoskopischen Endoskopbildern und Systeme, die diese verwenden
US8812079B2 (en) 2010-12-22 2014-08-19 Biosense Webster (Israel), Ltd. Compensation for magnetic disturbance due to fluoroscope
WO2012100211A2 (en) 2011-01-20 2012-07-26 Hansen Medical, Inc. System and method for endoluminal and transluminal therapy
US9554812B2 (en) 2011-02-18 2017-01-31 DePuy Synthes Products, Inc. Tool with integrated navigation and guidance system and related apparatus and methods
US10391277B2 (en) 2011-02-18 2019-08-27 Voxel Rad, Ltd. Systems and methods for 3D stereoscopic angiovision, angionavigation and angiotherapeutics
US10362963B2 (en) 2011-04-14 2019-07-30 St. Jude Medical, Atrial Fibrillation Division, Inc. Correction of shift and drift in impedance-based medical device navigation using magnetic field information
US10918307B2 (en) 2011-09-13 2021-02-16 St. Jude Medical, Atrial Fibrillation Division, Inc. Catheter navigation using impedance and magnetic field measurements
US8900131B2 (en) * 2011-05-13 2014-12-02 Intuitive Surgical Operations, Inc. Medical system providing dynamic registration of a model of an anatomical structure for image-guided surgery
US9572481B2 (en) 2011-05-13 2017-02-21 Intuitive Surgical Operations, Inc. Medical system with multiple operating modes for steering a medical instrument through linked body passages
EP2723240B1 (en) 2011-06-27 2018-08-08 Koninklijke Philips N.V. Live 3d angiogram using registration of a surgical tool curve to an x-ray image
US9173683B2 (en) 2011-08-31 2015-11-03 DePuy Synthes Products, Inc. Revisable orthopedic anchor and methods of use
CN102973317A (zh) 2011-09-05 2013-03-20 周宁新 微创手术机器人机械臂布置结构
AU2012304408B2 (en) 2011-09-08 2017-03-30 Apn Health, Llc Automatically determining 3D catheter location and orientation using 2D fluoroscopy only
US9918681B2 (en) 2011-09-16 2018-03-20 Auris Surgical Robotics, Inc. System and method for virtually tracking a surgical tool on a movable display
US9504604B2 (en) 2011-12-16 2016-11-29 Auris Surgical Robotics, Inc. Lithotripsy eye treatment
US8700561B2 (en) 2011-12-27 2014-04-15 Mcafee, Inc. System and method for providing data protection workflows in a network environment
EP3488803B1 (en) 2012-02-03 2023-09-27 Intuitive Surgical Operations, Inc. Steerable flexible needle with embedded shape sensing
CN104114121B (zh) 2012-02-09 2017-03-22 皇家飞利浦有限公司 用于实时导航跟踪的杆跟踪器
EP2816966B1 (en) * 2012-02-22 2023-10-25 Veran Medical Technologies, Inc. Steerable surgical catheter comprising a biopsy device at the distal end portion thereof
US20140142591A1 (en) 2012-04-24 2014-05-22 Auris Surgical Robotics, Inc. Method, apparatus and a system for robotic assisted surgery
US10383765B2 (en) 2012-04-24 2019-08-20 Auris Health, Inc. Apparatus and method for a global coordinate system for use in robotic surgery
US10039473B2 (en) 2012-05-14 2018-08-07 Intuitive Surgical Operations, Inc. Systems and methods for navigation based on ordered sensor records
JP2015528713A (ja) 2012-06-21 2015-10-01 グローバス メディカル インコーポレイティッド 手術ロボットプラットフォーム
EP2866642B1 (en) 2012-06-28 2017-09-13 Koninklijke Philips N.V. Fiber optic sensor guided navigation for vascular visualization and monitoring
DE102012220116A1 (de) 2012-06-29 2014-01-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Mobil handhabbare Vorrichtung, insbesondere zur Bearbeitung oder Beobachtung eines Körpers, und Verfahren zur Handhabung, insbesondere Kalibrierung, einer Vorrichtung
US9183354B2 (en) 2012-08-15 2015-11-10 Musc Foundation For Research Development Systems and methods for image guided surgery
AU2013305559A1 (en) 2012-08-24 2015-04-09 University Of Houston Robotic device and systems for image-guided and robot-assisted surgery
US20140107390A1 (en) 2012-10-12 2014-04-17 Elekta Ab (Publ) Implementation and experimental results of real-time 4d tumor tracking using multi-leaf collimator (mlc), and/or mlc-carriage (mlc-bank), and/or treatment table (couch)
WO2014058838A1 (en) 2012-10-12 2014-04-17 Intuitive Surgical Operations, Inc. Determining position of medical device in branched anatomical structure
US9121455B2 (en) 2012-11-07 2015-09-01 Dana Automotive Systems Group, Llc Clutch management system
WO2014081725A2 (en) 2012-11-20 2014-05-30 University Of Washington Through Its Center For Commercialization Electromagnetic sensor integration with ultrathin scanning fiber endoscope
LU92104B1 (en) 2012-11-28 2014-05-30 Iee Sarl Method and system for determining a ventilatory threshold
JP6045417B2 (ja) 2012-12-20 2016-12-14 オリンパス株式会社 画像処理装置、電子機器、内視鏡装置、プログラム及び画像処理装置の作動方法
US10231867B2 (en) 2013-01-18 2019-03-19 Auris Health, Inc. Method, apparatus and system for a water jet
US11172809B2 (en) 2013-02-15 2021-11-16 Intuitive Surgical Operations, Inc. Vision probe with access port
EA033708B1 (ru) 2013-02-26 2019-11-19 Ahmet Sinan Kabakci Роботизированная манипуляционная система
US9459087B2 (en) 2013-03-05 2016-10-04 Ezono Ag Magnetic position detection system
WO2014136576A1 (ja) 2013-03-06 2014-09-12 オリンパスメディカルシステムズ株式会社 内視鏡システム
US9867635B2 (en) 2013-03-08 2018-01-16 Auris Surgical Robotics, Inc. Method, apparatus and system for a water jet
US10080576B2 (en) 2013-03-08 2018-09-25 Auris Health, Inc. Method, apparatus, and a system for facilitating bending of an instrument in a surgical or medical robotic environment
US10149720B2 (en) 2013-03-08 2018-12-11 Auris Health, Inc. Method, apparatus, and a system for facilitating bending of an instrument in a surgical or medical robotic environment
US20140296655A1 (en) 2013-03-11 2014-10-02 ROPAMedics LLC Real-time tracking of cerebral hemodynamic response (rtchr) of a subject based on hemodynamic parameters
EP2904958A4 (en) 2013-03-12 2016-08-24 Olympus Corp ENDOSCOPE SYSTEM
US9057600B2 (en) 2013-03-13 2015-06-16 Hansen Medical, Inc. Reducing incremental measurement sensor error
US20170303941A1 (en) 2013-03-14 2017-10-26 The General Hospital Corporation System and method for guided removal from an in vivo subject
US9014851B2 (en) 2013-03-15 2015-04-21 Hansen Medical, Inc. Systems and methods for tracking robotically controlled medical instruments
US20170238807A9 (en) 2013-03-15 2017-08-24 LX Medical, Inc. Tissue imaging and image guidance in luminal anatomic structures and body cavities
US9271663B2 (en) 2013-03-15 2016-03-01 Hansen Medical, Inc. Flexible instrument localization from both remote and elongation sensors
US9301723B2 (en) 2013-03-15 2016-04-05 Covidien Lp Microwave energy-delivery device and system
US10271810B2 (en) 2013-04-02 2019-04-30 St. Jude Medical International Holding S.à r. l. Enhanced compensation of motion in a moving organ using processed reference sensor data
EP2983579A2 (en) 2013-04-12 2016-02-17 NinePoint Medical, Inc. Multiple aperture, multiple modal optical systems and methods
US9592095B2 (en) 2013-05-16 2017-03-14 Intuitive Surgical Operations, Inc. Systems and methods for robotic medical system integration with external imaging
US11020016B2 (en) 2013-05-30 2021-06-01 Auris Health, Inc. System and method for displaying anatomy and devices on a movable display
US20140364739A1 (en) 2013-06-06 2014-12-11 General Electric Company Systems and methods for analyzing a vascular structure
WO2014201165A1 (en) 2013-06-11 2014-12-18 Auris Surgical Robotics, Inc. System for robotic assisted cataract surgery
JP6037964B2 (ja) 2013-07-26 2016-12-07 オリンパス株式会社 マニピュレータシステム
US10426661B2 (en) 2013-08-13 2019-10-01 Auris Health, Inc. Method and apparatus for laser assisted cataract surgery
JP6785656B2 (ja) 2013-08-15 2020-11-18 インテュイティブ サージカル オペレーションズ, インコーポレイテッド カテーテルの位置付け及び挿入のためのグラフィカル・ユーザインターフェイス
US10098566B2 (en) 2013-09-06 2018-10-16 Covidien Lp System and method for lung visualization using ultrasound
WO2015049612A2 (en) 2013-10-02 2015-04-09 Koninklijke Philips N.V. Hub design and methods for optical shape sensing registration
US9737373B2 (en) 2013-10-24 2017-08-22 Auris Surgical Robotics, Inc. Instrument device manipulator and surgical drape
JP6656148B2 (ja) 2013-10-24 2020-03-04 オーリス ヘルス インコーポレイテッド ロボット支援管腔内手術のためのシステムおよび関連する方法
US9314191B2 (en) 2013-11-19 2016-04-19 Pacesetter, Inc. Method and system to measure cardiac motion using a cardiovascular navigation system
EP3079625B1 (en) 2013-12-09 2023-09-13 Intuitive Surgical Operations, Inc. Systems and non-surgical methods for device-aware flexible tool registration
CN103705307B (zh) 2013-12-10 2017-02-22 中国科学院深圳先进技术研究院 手术导航系统及医疗机器人
CN103735313B (zh) 2013-12-11 2016-08-17 中国科学院深圳先进技术研究院 一种手术机器人及其状态监测方法
CN105828738B (zh) 2013-12-20 2018-10-09 奥林巴斯株式会社 柔性机械手用引导部件和柔性机械手
WO2015095715A1 (en) 2013-12-20 2015-06-25 Intuitive Surgical Operations, Inc. Simulator system for medical procedure training
EP3096692B1 (en) 2014-01-24 2023-06-14 Koninklijke Philips N.V. Virtual image with optical shape sensing device perspective
EP3979210A1 (en) 2014-02-04 2022-04-06 Intuitive Surgical Operations, Inc. Systems and methods for non-rigid deformation of tissue for virtual navigation of interventional tools
EP3102087A4 (en) 2014-02-05 2017-10-25 National University of Singapore Systems and methods for tracking and displaying endoscope shape and distal end orientation
US20150223902A1 (en) 2014-02-07 2015-08-13 Hansen Medical, Inc. Navigation with 3d localization using 2d images
EP3104803B1 (en) 2014-02-11 2021-09-15 KB Medical SA Sterile handle for controlling a robotic surgical system from a sterile field
JP6270537B2 (ja) 2014-02-27 2018-01-31 オリンパス株式会社 医療用システム
KR20150103938A (ko) 2014-03-04 2015-09-14 현대자동차주식회사 리튬황 배터리 분리막
US10952751B2 (en) 2014-03-17 2021-03-23 Marksman Targeting, Inc. Surgical targeting systems and methods
CN104931059B (zh) 2014-03-21 2018-09-11 比亚迪股份有限公司 车载救援导航系统和方法
US10912523B2 (en) 2014-03-24 2021-02-09 Intuitive Surgical Operations, Inc. Systems and methods for anatomic motion compensation
US10046140B2 (en) 2014-04-21 2018-08-14 Hansen Medical, Inc. Devices, systems, and methods for controlling active drive systems
US20150305650A1 (en) 2014-04-23 2015-10-29 Mark Hunter Apparatuses and methods for endobronchial navigation to and confirmation of the location of a target tissue and percutaneous interception of the target tissue
CN104055520B (zh) 2014-06-11 2016-02-24 清华大学 人体器官运动监测方法和手术导航系统
US9788910B2 (en) 2014-07-01 2017-10-17 Auris Surgical Robotics, Inc. Instrument-mounted tension sensing mechanism for robotically-driven medical instruments
US20170007337A1 (en) 2014-07-01 2017-01-12 Auris Surgical Robotics, Inc. Driver-mounted torque sensing mechanism
US9561083B2 (en) 2014-07-01 2017-02-07 Auris Surgical Robotics, Inc. Articulating flexible endoscopic tool with roll capabilities
US10159533B2 (en) 2014-07-01 2018-12-25 Auris Health, Inc. Surgical system with configurable rail-mounted mechanical arms
US20160270865A1 (en) 2014-07-01 2016-09-22 Auris Surgical Robotics, Inc. Reusable catheter with disposable balloon attachment and tapered tip
US9744335B2 (en) 2014-07-01 2017-08-29 Auris Surgical Robotics, Inc. Apparatuses and methods for monitoring tendons of steerable catheters
US10792464B2 (en) 2014-07-01 2020-10-06 Auris Health, Inc. Tool and method for using surgical endoscope with spiral lumens
US9603668B2 (en) 2014-07-02 2017-03-28 Covidien Lp Dynamic 3D lung map view for tool navigation inside the lung
CA2953133A1 (en) 2014-07-02 2016-01-07 Covidien Lp System and method of providing distance and orientation feedback while navigating in 3d
US11188285B2 (en) * 2014-07-02 2021-11-30 Covidien Lp Intelligent display
US9770216B2 (en) * 2014-07-02 2017-09-26 Covidien Lp System and method for navigating within the lung
US20160000414A1 (en) 2014-07-02 2016-01-07 Covidien Lp Methods for marking biopsy location
KR20220065894A (ko) * 2014-07-28 2022-05-20 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 수술중 세그먼트화를 위한 시스템 및 방법
EP3200718A4 (en) 2014-09-30 2018-04-25 Auris Surgical Robotics, Inc Configurable robotic surgical system with virtual rail and flexible endoscope
WO2016061418A1 (en) 2014-10-15 2016-04-21 Vincent Suzara Magnetic field structures, field generators, navigation and imaging for untethered robotic device enabled medical procedure
US10314463B2 (en) 2014-10-24 2019-06-11 Auris Health, Inc. Automated endoscope calibration
DE102014222293A1 (de) 2014-10-31 2016-05-19 Siemens Aktiengesellschaft Verfahren zur automatischen Überwachung des Eindringverhaltens eines von einem Roboterarm gehaltenen Trokars und Überwachungssystem
SG11201704750SA (en) 2014-11-11 2017-07-28 Univ Vanderbilt Methods for limiting acute kidney injury
US20170325896A1 (en) 2014-11-13 2017-11-16 Intuitive Surgical Operations, Inc. Systems and methods for filtering localization data
US9931168B2 (en) 2015-01-12 2018-04-03 Biomet Manufacuturing. LLC Plan implementation
WO2016128839A1 (en) * 2015-02-13 2016-08-18 St. Jude Medical International Holding S.A.R.L. Tracking-based 3d model enhancement
EP3258839B1 (en) 2015-02-20 2019-09-04 Teleflex Medical Devices S.à.r.l. Medical device position location systems, devices and methods
JP6348078B2 (ja) 2015-03-06 2018-06-27 富士フイルム株式会社 分岐構造判定装置、分岐構造判定装置の作動方法および分岐構造判定プログラム
JP6371729B2 (ja) 2015-03-25 2018-08-08 富士フイルム株式会社 内視鏡検査支援装置、内視鏡検査支援装置の作動方法および内視鏡支援プログラム
US20160287279A1 (en) 2015-04-01 2016-10-06 Auris Surgical Robotics, Inc. Microsurgical tool for robotic applications
WO2016164824A1 (en) 2015-04-09 2016-10-13 Auris Surgical Robotics, Inc. Surgical system with configurable rail-mounted mechanical arms
CN104758066B (zh) 2015-05-06 2017-05-10 中国科学院深圳先进技术研究院 用于手术导航的设备及手术机器人
WO2016187054A1 (en) 2015-05-15 2016-11-24 Auris Surgical Robotics, Inc. Surgical robotics system
CN107660134B (zh) * 2015-05-22 2021-06-29 直观外科手术操作公司 图像引导手术记录的系统和方法
CN107613839B (zh) 2015-06-11 2019-10-01 奥林巴斯株式会社 内窥镜装置和内窥镜装置的工作方法
US10347904B2 (en) 2015-06-19 2019-07-09 Solidenergy Systems, Llc Multi-layer polymer coated Li anode for high density Li metal battery
GB2540757B (en) 2015-07-22 2021-03-31 Cmr Surgical Ltd Torque sensors
CN108024698B (zh) 2015-08-14 2020-09-15 直观外科手术操作公司 用于图像引导外科手术的配准系统和方法
EP3340918B1 (en) 2015-08-28 2021-01-06 Koninklijke Philips N.V. Apparatus for determining a motion relation
CN108348162B (zh) 2015-08-31 2021-07-23 梅西莫股份有限公司 无线式病人监护系统和方法
WO2017044884A1 (en) 2015-09-09 2017-03-16 Auris Surgical Robotics, Inc. Instrument device manipulator for a surgical robotics system
ES2884356T3 (es) 2015-09-17 2021-12-10 Endomaster Pte Ltd Sistema de endoscopia robótico flexible mejorado
AU2016339822B9 (en) 2015-10-13 2021-07-08 Lightlab Imaging, Inc. Intravascular imaging system and methods to determine cut plane view angle of side branch
US9949749B2 (en) 2015-10-30 2018-04-24 Auris Surgical Robotics, Inc. Object capture with a basket
US10639108B2 (en) 2015-10-30 2020-05-05 Auris Health, Inc. Process for percutaneous operations
US9955986B2 (en) 2015-10-30 2018-05-01 Auris Surgical Robotics, Inc. Basket apparatus
US10143526B2 (en) 2015-11-30 2018-12-04 Auris Health, Inc. Robot-assisted driving systems and methods
US11172895B2 (en) 2015-12-07 2021-11-16 Covidien Lp Visualization, navigation, and planning with electromagnetic navigation bronchoscopy and cone beam computed tomography integrated
CN105559850B (zh) 2015-12-17 2017-08-25 天津工业大学 一种用于机器人辅助外科具有力传感功能的手术钻器械
US10244963B2 (en) * 2015-12-22 2019-04-02 Biosense Webster (Israel) Ltd. Ascertaining a position and orientation for visualizing a tool
US10932861B2 (en) 2016-01-14 2021-03-02 Auris Health, Inc. Electromagnetic tracking surgical system and method of controlling the same
US10932691B2 (en) 2016-01-26 2021-03-02 Auris Health, Inc. Surgical tools having electromagnetic tracking components
US10470719B2 (en) 2016-02-01 2019-11-12 Verily Life Sciences Llc Machine learnt model to detect REM sleep periods using a spectral analysis of heart rate and motion
CN113384348B (zh) 2016-02-26 2024-08-30 直观外科手术操作公司 使用虚拟边界避免碰撞的系统和方法
CN108883301B (zh) 2016-03-24 2020-11-10 皇家飞利浦有限公司 处置评估设备
JP7232051B2 (ja) 2016-03-31 2023-03-02 コーニンクレッカ フィリップス エヌ ヴェ カテーテル配置のための画像誘導ロボット
US11324554B2 (en) 2016-04-08 2022-05-10 Auris Health, Inc. Floating electromagnetic field generator system and method of controlling the same
US10470839B2 (en) 2016-06-02 2019-11-12 Covidien Lp Assessment of suture or staple line integrity and localization of potential tissue defects along the suture or staple line
US10806516B2 (en) 2016-06-20 2020-10-20 General Electric Company Virtual 4D stent implantation path assessment
EP4374768A3 (en) 2016-06-30 2024-08-07 Intuitive Surgical Operations, Inc. Graphical user interface for displaying guidance information in a plurality of modes during an image-guided procedure
US11037464B2 (en) 2016-07-21 2021-06-15 Auris Health, Inc. System with emulator movement tracking for controlling medical devices
US10238455B2 (en) 2016-08-31 2019-03-26 Covidien Lp Pathway planning for use with a navigation planning and procedure system
KR102555546B1 (ko) 2016-08-31 2023-07-19 아우리스 헬스, 인코포레이티드 길이 보존 수술용 기구
US20180055576A1 (en) 2016-09-01 2018-03-01 Covidien Lp Respiration motion stabilization for lung magnetic navigation system
US9931025B1 (en) 2016-09-30 2018-04-03 Auris Surgical Robotics, Inc. Automated calibration of endoscopes with pull wires
US10278778B2 (en) 2016-10-27 2019-05-07 Inneroptic Technology, Inc. Medical device navigation using a virtual 3D space
CN109922753B (zh) * 2016-12-08 2023-04-14 直观外科手术操作公司 用于图像引导医疗程序中导航的系统和方法
US10244926B2 (en) 2016-12-28 2019-04-02 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
US10543048B2 (en) 2016-12-28 2020-01-28 Auris Health, Inc. Flexible instrument insertion using an adaptive insertion force threshold
US10136959B2 (en) 2016-12-28 2018-11-27 Auris Health, Inc. Endolumenal object sizing
US11842030B2 (en) 2017-01-31 2023-12-12 Medtronic Navigation, Inc. Method and apparatus for image-based navigation
US11882990B2 (en) * 2017-02-01 2024-01-30 Intuitive Surgical Operations, Inc Systems and methods for data filtering of passageway sensor data
EP3599979A4 (en) 2017-03-28 2021-01-06 Auris Health, Inc. SHAFT DRIVE HANDLE
US10475235B2 (en) 2017-03-29 2019-11-12 Fujifilm Corporation Three-dimensional image processing apparatus, three-dimensional image processing method, and three-dimensional image processing program
EP3600031A4 (en) 2017-03-31 2021-01-20 Auris Health, Inc. ROBOTIC NAVIGATION SYSTEMS IN LUMINAL NETWORKS COMPENSATION FOR PHYSIOLOGICAL NOISE
KR102550962B1 (ko) 2017-04-07 2023-07-06 아우리스 헬스, 인코포레이티드 환자 삽입기(Introducer) 정렬
US10285574B2 (en) 2017-04-07 2019-05-14 Auris Health, Inc. Superelastic medical instrument
US20180308247A1 (en) 2017-04-25 2018-10-25 Best Medical International, Inc. Tissue imaging system and method for tissue imaging
JP2020520691A (ja) 2017-05-12 2020-07-16 オーリス ヘルス インコーポレイテッド 生検装置およびシステム
EP3624668A4 (en) 2017-05-17 2021-05-26 Auris Health, Inc. Exchangeable working channel
US10022192B1 (en) 2017-06-23 2018-07-17 Auris Health, Inc. Automatically-initialized robotic systems for navigation of luminal networks
KR102558063B1 (ko) 2017-06-28 2023-07-25 아우리스 헬스, 인코포레이티드 전자기장 생성기 정렬
US11026758B2 (en) 2017-06-28 2021-06-08 Auris Health, Inc. Medical robotics systems implementing axis constraints during actuation of one or more motorized joints
KR102341451B1 (ko) 2017-06-28 2021-12-23 아우리스 헬스, 인코포레이티드 기기의 삽입 보상을 위한 로봇 시스템, 방법 및 비일시적 컴퓨터 가독 저장 매체
EP3644886A4 (en) 2017-06-28 2021-03-24 Auris Health, Inc. ELECTROMAGNETIC DISTORTION DETECTION
US10426559B2 (en) 2017-06-30 2019-10-01 Auris Health, Inc. Systems and methods for medical instrument compression compensation
US10593052B2 (en) 2017-08-23 2020-03-17 Synaptive Medical (Barbados) Inc. Methods and systems for updating an existing landmark registration
US10464209B2 (en) 2017-10-05 2019-11-05 Auris Health, Inc. Robotic system with indication of boundary for robotic arm
US10145747B1 (en) 2017-10-10 2018-12-04 Auris Health, Inc. Detection of undesirable forces on a surgical robotic arm
US10016900B1 (en) 2017-10-10 2018-07-10 Auris Health, Inc. Surgical robotic arm admittance control
US10555778B2 (en) 2017-10-13 2020-02-11 Auris Health, Inc. Image-based branch detection and mapping for navigation
US11058493B2 (en) 2017-10-13 2021-07-13 Auris Health, Inc. Robotic system configured for navigation path tracing
EP3684282B1 (en) 2017-12-06 2024-02-21 Auris Health, Inc. Systems to correct for uncommanded instrument roll
WO2019113391A1 (en) 2017-12-08 2019-06-13 Auris Health, Inc. System and method for medical instrument navigation and targeting
CN116059454A (zh) 2017-12-08 2023-05-05 奥瑞斯健康公司 用于执行医疗手术的系统和用以移除肾结石的医疗装置
BR112020011444A2 (pt) 2017-12-11 2021-02-02 Auris Health, Inc. sistemas e métodos para arquiteturas de inserção baseadas em instrumentos
AU2018384820B2 (en) 2017-12-14 2024-07-04 Auris Health, Inc. System and method for estimating instrument location
JP7463277B2 (ja) 2018-01-17 2024-04-08 オーリス ヘルス インコーポレイテッド 改善されたロボットアームを有する外科用ロボットシステム
WO2019143459A1 (en) 2018-01-17 2019-07-25 Auris Health, Inc. Surgical platform with adjustable arm supports
KR102690164B1 (ko) 2018-02-13 2024-08-02 아우리스 헬스, 인코포레이티드 의료 기구를 구동시키기 위한 시스템 및 방법
US20190269468A1 (en) 2018-03-01 2019-09-05 Auris Health, Inc. Methods and systems for mapping and navigation
JP2019154816A (ja) 2018-03-13 2019-09-19 ソニー・オリンパスメディカルソリューションズ株式会社 医療用画像処理装置、医療用観察装置、及び医療用観察装置の作動方法
KR102500422B1 (ko) 2018-03-28 2023-02-20 아우리스 헬스, 인코포레이티드 기구의 추정된 위치를 디스플레이하기 위한 시스템 및 방법
KR102489198B1 (ko) 2018-03-28 2023-01-18 아우리스 헬스, 인코포레이티드 위치 센서의 정합을 위한 시스템 및 방법
KR102746051B1 (ko) 2018-03-28 2024-12-27 아우리스 헬스, 인코포레이티드 가변 굽힘 강성 프로파일을 갖는 의료 기구
CN111954497A (zh) 2018-03-29 2020-11-17 奥瑞斯健康公司 带有具有旋转偏移的多功能端部执行器的机器人启用式医疗系统
WO2019231895A1 (en) 2018-05-30 2019-12-05 Auris Health, Inc. Systems and methods for location sensor-based branch prediction
WO2019232236A1 (en) 2018-05-31 2019-12-05 Auris Health, Inc. Image-based airway analysis and mapping
EP4454591A3 (en) 2018-05-31 2025-01-15 Auris Health, Inc. Path-based navigation of tubular networks
US11503986B2 (en) 2018-05-31 2022-11-22 Auris Health, Inc. Robotic systems and methods for navigation of luminal network that detect physiological noise
US10744981B2 (en) 2018-06-06 2020-08-18 Sensata Technologies, Inc. Electromechanical braking connector
US10751140B2 (en) 2018-06-07 2020-08-25 Auris Health, Inc. Robotic medical systems with high force instruments
CN118902621A (zh) 2018-06-27 2024-11-08 奥瑞斯健康公司 用于医疗器械的对准系统和附接系统
US10667875B2 (en) 2018-06-27 2020-06-02 Auris Health, Inc. Systems and techniques for providing multiple perspectives during medical procedures
EP3813682A4 (en) 2018-06-28 2022-03-30 Auris Health, Inc. MEDICAL SYSTEMS INCORPORATING PULLEY SHARING
WO2020033318A1 (en) 2018-08-07 2020-02-13 Auris Health, Inc. Combining strain-based shape sensing with catheter control
US10828118B2 (en) 2018-08-15 2020-11-10 Auris Health, Inc. Medical instruments for tissue cauterization
WO2020036686A1 (en) 2018-08-17 2020-02-20 Auris Health, Inc. Bipolar medical instrument
WO2020041619A2 (en) 2018-08-24 2020-02-27 Auris Health, Inc. Manually and robotically controllable medical instruments
KR20210062043A (ko) 2018-09-17 2021-05-28 아우리스 헬스, 인코포레이티드 동시 의료 절차를 위한 시스템 및 방법
US11179212B2 (en) 2018-09-26 2021-11-23 Auris Health, Inc. Articulating medical instruments
US11864849B2 (en) 2018-09-26 2024-01-09 Auris Health, Inc. Systems and instruments for suction and irrigation
US10820947B2 (en) 2018-09-28 2020-11-03 Auris Health, Inc. Devices, systems, and methods for manually and robotically driving medical instruments
WO2020069404A1 (en) 2018-09-28 2020-04-02 Auris Health, Inc. Robotic systems and methods for concomitant endoscopic and percutaneous medical procedures
US10765487B2 (en) 2018-09-28 2020-09-08 Auris Health, Inc. Systems and methods for docking medical instruments
WO2020076447A1 (en) 2018-10-08 2020-04-16 Auris Health, Inc. Systems and instruments for tissue sealing
EP3870075A4 (en) 2018-12-20 2022-08-03 Auris Health, Inc. Shielding for wristed instruments
WO2020140072A1 (en) 2018-12-28 2020-07-02 Auris Health, Inc. Percutaneous sheath for robotic medical systems and methods
US11202683B2 (en) 2019-02-22 2021-12-21 Auris Health, Inc. Surgical platform with motorized arms for adjustable arm supports
EP3965710A4 (en) 2019-03-08 2023-04-05 Auris Health, Inc. TILT MECHANISMS FOR MEDICAL SYSTEMS AND APPLICATIONS
US20200297444A1 (en) 2019-03-21 2020-09-24 The Board Of Trustees Of The Leland Stanford Junior University Systems and methods for localization based on machine learning
EP3908224A4 (en) 2019-03-22 2022-10-19 Auris Health, Inc. SYSTEMS AND METHODS FOR INLET ALIGNMENTS ON MEDICAL DEVICES
CN113613566B (zh) 2019-03-25 2024-10-11 奥瑞斯健康公司 用于医疗缝合的系统和方法
US11617627B2 (en) 2019-03-29 2023-04-04 Auris Health, Inc. Systems and methods for optical strain sensing in medical instruments
JP2022527834A (ja) 2019-04-08 2022-06-06 オーリス ヘルス インコーポレイテッド 付随する処置のためのシステム、方法、及びワークフロー

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8298135B2 (en) 2008-05-23 2012-10-30 Olympus Medical Systems Corp. Medical device with endoscope and insertable instrument
US20140350391A1 (en) 2009-03-26 2014-11-27 Intuitive Surgical Operations, Inc. Method And System For Providing Visual Guidance To An Operator For Steering A Tip Of An Endoscopic Device Towards One Or More Landmarks In A Patient
US20170084027A1 (en) 2015-09-18 2017-03-23 Auris Surgical Robotics, Inc. Navigation of tubular networks

Also Published As

Publication number Publication date
US20190183587A1 (en) 2019-06-20
US20250025241A1 (en) 2025-01-23
US11160615B2 (en) 2021-11-02
AU2018390476B2 (en) 2024-03-28
AU2018390476A1 (en) 2020-05-21
EP3684283A1 (en) 2020-07-29
US20210322110A1 (en) 2021-10-21
WO2019125964A1 (en) 2019-06-27
EP3684283A4 (en) 2021-07-14
KR20200101334A (ko) 2020-08-27
JP2021506439A (ja) 2021-02-22
CN110809453A (zh) 2020-02-18
CN110809453B (zh) 2023-06-06
KR102743997B1 (ko) 2024-12-20

Similar Documents

Publication Publication Date Title
JP7059377B2 (ja) 管腔ネットワーク内の器具の追跡およびナビゲーションの方法およびシステム
JP7098723B2 (ja) ナビゲーション経路追跡用に構成されたロボットシステム
US20220125527A1 (en) Methods and systems for mapping and navigation
AU2018384820B2 (en) System and method for estimating instrument location
JP7350726B2 (ja) 画像ベースの分岐検出およびナビゲーション用マッピング
JP7146949B2 (ja) 画像ベースの気道分析及びマッピング
JP2021505285A (ja) 医療器具のナビゲーションおよびターゲット用のシステムおよび方法
JP2021505270A (ja) コマンド指示されていない器具の回動を修正するシステムおよび方法
JP2020535883A (ja) ロボットアームの境界を示すロボットシステム
CN112367928A (zh) 结合滑轮共享的医疗系统
JP2020536754A (ja) 手術ロボットアームに対する不適切な力の検出
JP2020526252A (ja) 医療器具の圧縮の補償のためのシステムおよび方法
JP2020524579A (ja) 管腔ネットワーク内の医療装置の姿勢を特定するロボットシステム
CN113286543A (zh) 具有可关节运动区段的医疗器械

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20210428

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210428

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20210511

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211214

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211214

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20211214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220315

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220413

R150 Certificate of patent or registration of utility model

Ref document number: 7059377

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150