Nothing Special   »   [go: up one dir, main page]

RU2689767C2 - Улучшенная визуализация кровеносных сосудов с использованием управляемого роботом эндоскопа - Google Patents

Улучшенная визуализация кровеносных сосудов с использованием управляемого роботом эндоскопа Download PDF

Info

Publication number
RU2689767C2
RU2689767C2 RU2015102605A RU2015102605A RU2689767C2 RU 2689767 C2 RU2689767 C2 RU 2689767C2 RU 2015102605 A RU2015102605 A RU 2015102605A RU 2015102605 A RU2015102605 A RU 2015102605A RU 2689767 C2 RU2689767 C2 RU 2689767C2
Authority
RU
Russia
Prior art keywords
endoscope
image
anatomical object
target anatomical
composite image
Prior art date
Application number
RU2015102605A
Other languages
English (en)
Other versions
RU2015102605A (ru
Inventor
Александра ПОПОВИЧ
Хайтам ЭЛАВАРИ
Original Assignee
Конинклейке Филипс Н.В.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Конинклейке Филипс Н.В. filed Critical Конинклейке Филипс Н.В.
Publication of RU2015102605A publication Critical patent/RU2015102605A/ru
Application granted granted Critical
Publication of RU2689767C2 publication Critical patent/RU2689767C2/ru

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147—Holding or positioning arrangements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147—Holding or positioning arrangements
    • A61B1/00149—Holding or positioning arrangements using articulated arms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163—Optical arrangements
    • A61B1/00172—Optical arrangements with means for scanning
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/005—Flexible endoscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/313—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for introducing through surgical openings, e.g. laparoscopes
    • A61B1/3132—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for introducing through surgical openings, e.g. laparoscopes for laparoscopy
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4887—Locating particular structures in or on the body
    • A61B5/489—Blood vessels
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F2/00—Filters implantable into blood vessels; Prostheses, i.e. artificial substitutes or replacements for parts of the body; Appliances for connecting them with the body; Devices providing patency to, or preventing collapsing of, tubular structures of the body, e.g. stents
    • A61F2/02—Prostheses implantable into the body
    • A61F2/04—Hollow or tubular parts of organs, e.g. bladders, tracheae, bronchi or bile ducts
    • A61F2/06—Blood vessels
    • A61F2/062—Apparatus for the production of blood vessels made from natural tissue or with layers of living cells
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A61B2034/302—Surgical robots specifically adapted for manipulations within body cavities, e.g. within abdominal or thoracic cavities
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365—Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/41—Medical

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Optics & Photonics (AREA)
  • Signal Processing (AREA)
  • Vascular Medicine (AREA)
  • Gastroenterology & Hepatology (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Pulmonology (AREA)
  • Cardiology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Transplantation (AREA)
  • Robotics (AREA)
  • Endoscopes (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)

Abstract

Группа изобретений относится к медицине, а именно к медицинским инструментам, и может быть использована для визуализации целевого анатомического объекта. Предложена система, содержащая: эндоскоп для формирования изображений внутренних органов, имеющий зону обзора меньшую, чем область, которую нужно отобразить; планировочный модуль, выполненный с возможностью приема видео от эндоскопа таким образом, чтобы изображения зоны обзора эндоскопа сшивались вместе для того, чтобы сформировать составное изображение области, которую нужно отобразить; и модуль наведения на изображение, выполненный с возможностью перемещения эндоскопа вдоль целевого анатомического объекта в ходе процедуры таким образом, что изображение, сформированное в зоне обзора эндоскопа, отображается как видео в реальном времени, накладываемое поверх соответствующего участка составного изображения. Также предложена система для визуализации целевого анатомического объекта, содержащая: процессор и память, соединенную с процессором, причем память включает в себя: планировочный модуль, выполненный с возможностью сшивать вместе изображения зоны обзора целевого анатомического объекта, полученные от эндоскопа, для создания составного изображения целевого анатомического объекта, и модуль наведения на изображение, выполненный с возможностью перемещения эндоскопа вдоль целевого анатомического объекта, используя составное изображение таким образом, что изображение, сформированное в зоне обзора устройства для наблюдения, отображается как видео в реальном времени, накладываемое поверх соответствующего участка составного изображения. Группа изобретений обеспечивает улучшение визуализации анатомии внутренних органов в медицинских целях. 2 н. и 13 з.п. ф-лы, 8 ил.

Description

Это раскрытие относится к медицинским инструментам и способам и, более конкретно, к системам и способам для улучшения визуализации анатомии внутренних органов в медицинских целях.
Аортокоронарное шунтирование (АКШ) является хирургической процедурой для реваскуляризации закупоренных коронарных артерий. В традиционной хирургии грудину пациента открывают, и сердце полностью обнажается. Однако, малоинвазивное (МИ) шунтирование осуществляется через небольшие отверстия. Важной частью процедуры АКШ является удаление сосуда из тела пациента, который затем используется для того, чтобы шунтировать одно или несколько атеросклеротических сужений в коронарных артериях. Чаще всего удаляемым и используемым сосудом является внутренняя грудная артерия (ВГА), которая может включать в себя левую ВГА (ЛВГА) или правую ВГА (ПВГА), которые расположены в грудной полости.
В течение МИ коронарного шунтирования сердца прямой доступ к этим сосудам с невозможен, и они удаляются с помощью длинных инструментов, вставляемых в отверстия через межреберные мышцы в промежутки между ребрами. Во время МИ хирургической операции, ассистент хирурга может удерживать эндоскоп или он может удерживаться с использованием роботизированного управления. В случае роботизированного управления можно использовать визуальное сервоуправление по изображению для перемещения робота в определенное место. Визуальное сервоуправление по изображению состоит в выборе точки на эндоскопическом изображении, вместе с движением робота таким образом, что указатель устанавливается в центре изображения.
Изъятие ВГА обычно является наиболее длительной частью процедуры АКШ. Изъятие ВГА обычно занимает от 45 до 60 минут, и успех процедуры шунтирования обычно зависит от качества взятого сосуда.
Основные задачи на этом этапе процедуры включают в себя следующее. Эндоскопические изображения являются единственным способом визуализации для этой процедуры, но эндоскоп обеспечивает лишь ограниченное изображение небольшого сегмента кровеносного сосуда. При МИ хирург работает с удлиненными инструментами, вставленными между ребрами, идущими ниже области грудины. Это делает работу трудной, так как артерию, которую забирают, необходимо тщательно выделить от окружающих тканей и боковые ветви должны быть каутеризированы.
Длина, например, артерии ЛВГА должна быть достаточной, чтобы охватить место шунтирования на коронарной артерии. Очень трудно оценить длину забранного сосуда артерии во время процедуры МИ (в отличие от открытого оперативного вмешательства, где длина может быть оценена, так как все области являются видимыми и доступными). Так как ЛВГА удаляется из среднего и нижнего отдела грудной клетки, она имеет тенденцию быть более встроенной в ткань, замедляя выделение и делая визуализацию артерии и боковых ветвей еще более сложной задачей.
Сочетание технических трудностей при выделении артерии и неизвестная длина, необходимая для шунтирования приводит к увеличению времени процедуры, так как хирург либо выделяет гораздо более длинный артериальный сегмент, чем необходимо в более сложной дистальной области, либо выделяет слишком короткий сегмент, который требует потом возвращения для дальнейшего выделения артерии.
В соответствии с примерным вариантом осуществления настоящего изобретения, данное изобретение представляет собой систему для визуализации целевого анатомического объекта, которая включает в себя устройство для наблюдения для формирования изображений внутренних органов, имеющее зону обзора меньшую, чем область, которую нужно отобразить. Планировочный модуль выполнен с возможностью приема видео от устройства для наблюдения таким образом, чтобы изображения зоны обзора сшивались вместе для того, чтобы сформировать составное изображение области, которую нужно отобразить. Модуль наведения на изображение выполнен с возможностью перемещения устройства для наблюдения вдоль целевого анатомического объекта в ходе процедуры таким образом, что изображение, сформированное в зоне обзора устройства для наблюдения, отображается как видео в реальном времени, накладываемое на поле составного изображения.
Например, планировочный модуль может быть выполнен с возможностью выбора точек, представляющих интерес, в составном изображении, относящемся к целевому анатомическому объекту. Система может дополнительно включать в себя робота, выполненного с возможностью направлять устройство для наблюдения и модуль наведения на изображение, выполненный с возможностью использования точек, представляющих интерес, для направления устройства для наблюдения. Планировочный модуль может быть выполнен с возможностью совмещения и наложения оперативных изображений на составное изображение для предоставления улучшенной карты целевого анатомического объекта. Система может дополнительно включать в себя индикатор состояния, отображаемый вместе с составным изображением для того, чтобы указать продвижение устройства для наблюдения, например, по отношению к общей протяженности. Целевой анатомический объект может включать в себя кровеносный сосуд, который предстоит выделить, и индикатор состояния может включать в себя продвижение в процентах и/или график продвижения, для того, чтобы указать выделенную часть относительно общей длины кровеносного сосуда. Также возможно, чтобы планировочный модуль использовал дооперационное изображение кровеносного сосуда для того, чтобы оценить общую длину. Целевой анатомический объект может включать в себя, например, внутреннюю грудную артерию (ВГА) для использования в операции шунтирования. Кроме того, устройство для наблюдения может включать в себя гибкий эндоскоп.
В соответствии с другим примерным вариантом осуществления настоящего изобретения, данное изобретение представляет собой систему для визуализации целевого анатомического объекта и включает в себя процессор и память, соединенную с процессором. Память включает в себя планировочный модуль, выполненный с возможностью сшивать вместе изображения зоны обзора целевого анатомического объекта, полученные от устройства для наблюдения, для создания составного изображения целевого анатомического объекта. Модуль наведения на изображение выполнен с возможностью перемещения устройства для наблюдения вдоль целевого анатомического объекта, используя составное изображение таким образом, что изображение, сформированное в зоне обзора устройства для наблюдения, отображается как видео в реальном времени, накладываемое на поле составного изображения.
Например, планировочный модуль может быть выполнен с возможностью выбора точек, представляющих интерес, в составном изображении, относящемся к целевому анатомическому объекту. Система может дополнительно включать в себя робота, выполненного с возможностью направлять устройство для наблюдения и модуль наведения на изображение, выполненный с возможностью использования точек, представляющих интерес, для направления устройства для наблюдения. Планировочный модуль может быть выполнен с возможностью совмещения и наложения оперативных изображений на составное изображение для предоставления улучшенной карты целевого анатомического объекта. Система может дополнительно включать в себя индикатор состояния, формируемый модулем наведения на изображение, и отображаемый вместе с составным изображением для того, чтобы указать продвижение устройства для наблюдения, например, по отношению к общей протяженности. Целевой анатомический объект может включать в себя кровеносный сосуд, который предстоит выделить, и индикатор состояния может включать в себя продвижение в процентах и/или график продвижения, для того, чтобы указать выделенную часть относительно общей длины кровеносного сосуда. Планировочный модуль может использовать предоперационное изображение кровеносного сосуда, чтобы оценить общую длину. Целевой анатомический объект может включать в себя, например, внутреннюю грудную артерию (ВГА) для использования в операции шунтирования. Кроме того, устройство для наблюдения может включать в себя гибкий эндоскоп.
В соответствии с еще одним примерным вариантом осуществления настоящего изобретения, данное изобретение представляет собой способ визуализации целевого анатомического объекта, в том числе: формирования изображений частей целевого анатомического объекта с использованием зоны обзора устройства для наблюдения; формирования составного изображения целевого анатомического объекта, используя части; выбора точек, представляющих интерес, в составном изображении; и от начальной точки, двигаясь вдоль целевого анатомического объекта так, что изображение, сформированное в зоне обзора устройства для наблюдения, отображается как видео в реальном времени, накладываемое на поле составного изображения.
Например, способ может дополнительно включать в себя совмещение и наложение оперативного или предоперационного изображения на составное изображение для предоставления улучшенной карты целевого анатомического объекта. Кроме того, способ может дополнительно формировать индикатор состояния, чтобы указать продвижение устройства для наблюдения относительно общей протяженности. Целевой анатомический объект может включать в себя кровеносный сосуд, который предстоит выделить, и формирование индикатора состояния может включать в себя указание на продвижение в процентах и/или график продвижения, для того, чтобы указать выделенную часть относительно, например, общей длины кровеносного сосуда. Формирование изображений частей целевого анатомического объекта с использованием зоны обзора устройства для наблюдения может включать в себя управляемое роботом перемещение устройства для наблюдения с использованием для навигации точек, представляющих интерес. Способ может дополнительно включать в себя перемещение устройства для наблюдения с использованием визуального сервоуправления по изображению. Возможно также, что целевой анатомический объект включает в себя внутреннюю грудную артерию (ВГА) и этап перемещения вдоль целевого анатомического объекта включает в себя выделение ВГА для использования в операции шунтирования. Способ может дополнительно включать в себя измерение длины целевой анатомии из составного изображения.
Эти и другие цели, признаки и преимущества настоящего раскрытия станут очевидны из нижеследующего подробного описания их иллюстративных вариантов осуществления, которые следует рассматривать вместе с прилагаемыми чертежами.
Это раскрытие представит подробно нижеследующее описание предпочтительных вариантов осуществления со ссылкой на следующие чертежи, где:
На ФИГ. 1 представлена функциональная/структурная схема, показывающая систему для визуализации целевого анатомического объекта в соответствии с одним из вариантов осуществления;
На ФИГ. 2 представлена функциональная/структурная схема, показывающая систему для визуализации целевого анатомического объекта в соответствии с одним из вариантов осуществления;
На ФИГ. 3 представлена диаграмма, показывающая установку системы для проведения изъятия кровеносного сосуда и/или коронарное шунтирование в соответствии с одним иллюстративным вариантом осуществления;
На ФИГ. 4 представлена диаграмма, показывающая установку системы, показанную на ФИГ. 3, имеющая эндоскоп с зоной обзора меньшей, чем для всего кровеносного сосуда, который должен быть изъят в соответствии с одним иллюстративным вариантом осуществления;
На ФИГ. 5 представлено изображение, показывающее составное изображение сшитых вместе зон обзора из эндоскопического видео внутренней грудной артерии в соответствии с одним из вариантов осуществления;
На ФИГ. 6 представлено изображение, показывающее составное изображение с точками, представляющими интерес, определенными в соответствии с одним из вариантов осуществления;
На ФИГ. 7 представлено изображение, показывающее составное изображение с совмещенными и наложенными оперативными изображениями (предоперационными и/или интраоперационными) внутренней грудной артерии в соответствии с одним из вариантов осуществления; и
На ФИГ. 8 представлено изображение, показывающее составное изображение с наложенной на составное изображение вставкой с видео в реальном времени зоны обзора, и показывающее продвижение (%) и длину внутренней грудной артерии в соответствии с одним из вариантов осуществления.
В соответствии с принципами настоящего изобретения, для решения проблемы выделения сосуда предоставляется планирование выделения кровеносного сосуда и система исполнения, как описано выше. Принципы настоящего изобретения обеспечивают значительно увеличенную зону обзора, показывающую большую часть кровеносного сосуда (например, ЛВГА) в отличие от только небольшого сегмента и предоставляют дополнительную информацию о кровеносном сосуде. Эта дополнительная информация включает в себя, например, длину кровеносного сосуда, который выделяется для забора, продвижение в выделении кровеносного сосуда относительно требуемой длины шунта и расположение боковых ветвей, которые должны быть каутеризированы.
Следует понимать, что настоящее изобретение будет описано в терминах медицинских инструментов для использования при проведении процедуры коронарного шунтирования; однако, идеи настоящего изобретения гораздо более широкие и применимы к любому инструменту или процедуре, где необходима или желаема улучшенная визуализация целевой анатомии. В некоторых вариантах осуществления принципы настоящего изобретения используются для отслеживания или анализа сложных биологических или механических систем. В частности, настоящие принципы применимы к внутренним процедурам отслеживания биологических систем, процедурам во всех областях тела, таких как легкие, желудочно-кишечный тракт, органы выделения, кровеносные сосуды и т.д. Элементы, изображенные на фигурах, могут быть реализованы в различных комбинациях аппаратного и программного обеспечения и предоставляют функции, которые могут быть объединены в один элемент или несколько элементов.
Функции различных элементов, показанных на Фигурах, могут быть обеспечены за счет использования специальных аппаратных средств, а также аппаратных средств, способных выполнять компьютерные программы, в сочетании с соответствующим программным обеспечением. В случаях когда, они предоставляются процессором, функции могут быть обеспечены одним выделенным процессором, одним общим процессором или с помощью множества отдельных процессоров, некоторые из которых могут быть общими. Кроме того, явное использование термина «процессор» или «контроллер» не следует рассматривать как относящиеся исключительно к аппаратным средствам, способным выполнять компьютерные программы, и может неявно включать в себя, без ограничения, аппаратное средство процессора для цифровой обработки сигналов («DSP»), постоянную память («ПЗУ») для хранения программного обеспечения, оперативное запоминающее устройство («ОЗУ»), энергонезависимое запоминающее устройство и т.д.
Кроме того, все утверждения настоящего документа, излагающие принципы, аспекты и варианты осуществления изобретения, а также их конкретные примеры, которые предназначены для того, чтобы охватить как структурные, так и функциональные их эквиваленты. Кроме того, предполагается, что такие эквиваленты включают как известные сегодня эквиваленты, так и эквиваленты, которые будут разработаны в будущем (т.е., любые разработанные элементы, которые выполняют ту же функцию, независимо от структуры). Таким образом, например, специалистам в данной области следует иметь в виду, что блок-схемы, представленные в настоящем документе, представляют концептуальные взгляды иллюстративного компонент системы и/или схемы, реализующих принципы изобретения. Кроме того, следует иметь в виду, что любые блок-схемы, схемы последовательности операций и т.п. представляют различные процессы, которые могут быть, по существу, представлены в машиночитаемых носителях хранения и таким исполняться компьютером или процессором, независимо от того, показан ли явно такой компьютер или процессор.
Кроме того, варианты осуществления настоящего изобретения могут иметь форму компьютерного программного продукта, доступного на компьютере, который может использоваться, или машиночитаемом носителе хранения, предоставляющим программный код для использования, или связанным с компьютером, или любой системой исполнения инструкций. Для целей настоящего описания, компьютер, который может использоваться, или машиночитаемый носитель хранения, может быть любым устройством, которое может включать в себя, хранить, взаимодействовать, распространять или передавать программу для использования системой, аппаратом или устройством выполнения инструкций, или связываться с ними. Носитель может быть электронной, магнитной, оптической, электромагнитной, инфракрасной или полупроводниковой системой (или аппарат или устройство) или средой распространения. Примеры машиночитаемых носителей включают в себя полупроводниковую или твердотельную память, магнитную ленту, съемную компьютерную дискету, оперативное запоминающее устройство (ОЗУ), постоянную память (ПЗУ), жесткий магнитный диск и оптический диск. Современные примеры оптических дисков включают в себя компакт-диск ПЗУ (CD-ROM), перезаписываемый компакт-диск (CD-R/W), Blu-Ray™ и DVD.
Обратимся теперь к чертежам, на которых одинаковые цифры обозначают одни и те же или подобные элементы, и начнем с ФИГ. 1, в качестве иллюстрации показана система 100 для минимально инвазивной хирургии в соответствии с одним из вариантов осуществления. Система 100 может включать в себя рабочую станцию или консоль 112, с которой процедура контролируется и/или управляется. Рабочая станция 112 предпочтительно включает в себя один или несколько процессоров 114 и память 116 для хранения программ и приложений. Память 116 может хранить планировочный модуль 104 и модуль 106 наведения на изображение, используемый для работы в сочетании с медицинским устройством 102. Медицинское устройство 102 может включать в себя устройство 105 формирования изображений (например, камеру, оптическое волокно с линзой и т.д.), которое может быть развернуто с одним или несколькими из устройств: катетера, проволочного направителя катетера, зонда, эндоскопа, гибкого эндоскопа, робота, электрода, фильтрующего устройства, устройства баллона или другого медицинского компонента и т.д. Устройство 102 может быть вставлено в организм 160 пациента. В одном из вариантов осуществления процедура, которая должны быть выполнена, включает в себя минимально инвазивную коронарную хирургию, и устройство 102 вставляется в грудную полость 162 организма 160 для наблюдения и выделения целевого анатомического объекта 131, такого как кровеносный сосуд (например, ВГА).
Планировочный модуль 104 включает в себя следующие элементы и признаки. Во время, например, изъятия сосуда для процедуры коронарного шунтирования, планировочный модуль 104 составляет схему для управления визуализацией целевого сосуда, который забирают, например, ВГА, разрешая хирургу манипулировать другими инструментами. Планировочный модуль 104 управляет изображением, сшивая вдоль ВГА, для того, чтобы обеспечить всеобъемлющую зону обзора, и дополнительно обеспечивает совмещение изображений, предоставляя возможность наложения предоперационного (или интраоперационного) изображений на, например, эндоскопическое видео, используя способы, известные в данной области. Планировочный модуль 104 предусматривает выбор целевых точек, представляющих интерес, к которым можно обращаться или индексировать для использования с модулем 106 наведения на изображение. Планировочный модуль 104 также предусматривает вычисление длин кровеносного сосуда или другой анатомической особенности (например, используя сшитое/составное изображение).
Планировочный модуль 104 можно использовать для совмещения и наложения оперативных изображений 135, таких как предоперационные или интраоперационные изображения, сделанные с помощью устройства 110 формирования изображений. Устройство 110 формирования изображений можно использовать одновременно или в другое время и в другом месте для того, чтобы собирать изображения. Оперативные изображения 135 могут включать в себя трехмерные изображения предоперационной компьютерной томографии (КТ) или магнитно-резонансные изображения (МРТ) и т.д. или интраоперационные рентгеновские или ультразвуковые. Также предполагаются другие методы формирования изображений. Оперативные изображения 135 можно использовать в изображении 107 наложения для того, чтобы исключить из рассмотрения признаки целевого анатомического объекта 131, потому что в противном случае было бы трудно смотреть на эндоскопические изображения.
Модуль 106 наведения на изображение обеспечивает управление на основе изображения устройством 102, например, эндоскопом, предпочтительно посредством управления роботизированной системой 108, которая поддерживает устройство 102. Наложение 107 может быть сформировано с помощью модуля 148 обработки изображений и планировочного модуля 104. Наложение 107 может включать в себя эндоскопическое изображение 134 на текущий момент времени, отображенное на составном изображении 124. Составное изображение 124 является сшитым вместе изображением множества зон обзора изображений, сделанных с помощью устройства 102. Модуль наведения 106 на изображение обеспечивает определение количественного значения для продвижения, каковое может сопоставлять длину выделенного сосуда с требуемой длиной для того, чтобы определить, когда достаточное продвижение будет достигнуто.
Модуль 106 наведения на изображение направляет роботизированную систему 108 вдоль длины целевой анатомии 131. В одном из вариантов осуществления устройство 102 направляется с использованием точек, представляющих интерес, определенными на этапе планирования.
Рабочая станция 112 включает в себя дисплей 118 для просмотра изображений внутренних органов субъекта (пациента) или объема и может включать в себя изображения с наложением или другое воспроизведение, формируемое по изображениям, полученным от устройства 102. Дисплей 118 может также позволить пользователю взаимодействовать с рабочей станцией 112 и ее компонентами и функциями, или любым другим элементом в системе 100. Этому также способствует интерфейс 120, который может включать в себя клавиатуру, мышь, джойстик, тактильное устройство или какую-либо другую периферию или управление для того, чтобы обеспечить обратную связь с пользователем и взаимодействие с рабочей станции 112.
Обратимся к ФИГ. 2, способ выполнения процедуры в соответствии с принципами настоящего изобретения включает в себя две части. Первая часть процедуры осуществляется планировочным модулем 104 и вторая часть осуществляется модулем 106 наведения на изображение для облегчения выделения сосуда. Планировочный модуль 104 выполняет этапы с 202 по 212. Модуль 106 наведения на изображение выполняет этапы с 214 по 220. Во время процедуры используется интраоперационная установка, показанная на ФИГ. 3. В других вариантах осуществления некоторые или все задачи на ФИГ. 2 могут быть распределены или выполнены другим модулем (104 и/или 106).
Обратимся к ФИГ. 3, продолжая обращаться к ФИГ. 2, эндоскоп 302 удерживается роботизированной системой 304, в то время как два инструмента 306 и 308 используются для выделения ВГА 310 и проводятся хирургом. Эндоскоп 302 вставляется в грудную полость через отверстие (не показано), которое обеспечивает доступ между ребрами 312. Это отличается от обычной установки, когда ассистент удерживает эндоскоп. Роботизированная система 304 (держатель эндоскопа) обеспечивает полный контроль хирурга через посредство визуализации с помощью выдачи команд, основываясь на предоставляемых изображениях.
В блоке 202 получаются предоперационные или интраоперационные изображения целевой области. Предоперационное изображение может включать в себя объемные изображения, снятые с пациента заранее. Это может включать в себя формирование изображения с помощью компьютерной томографии (КТ), формирование изображения с помощью магнитно-резонансной томографии (МРТ) или любой другой метод формирования изображения. Интраоперационные изображения могут включать в себя формирование рентгеновских изображений, прямую фотосъемку (например, через камеру эндоскопа) и т.д. В блоке 204, эндоскоп 302 вставляется в грудную клетку. В блоке 206, эндоскоп перемещается в положение для обеспечения важной зоны обзора. В одном из вариантов осуществления эндоскоп маневрирует, используя способ, называемый визуальным сервоуправлением по изображению, который включает в себя центрирование эндоскопического видимого изображения на исследуемой области во время процедуры. Могут быть использованы другие способы перемещения эндоскопа.
В блоке 208, собирается составное изображение целевого кровеносного сосуда. Так как зона обзора эндоскоп ограничена, изображения вдоль целевого кровеносного сосуда могут быть собраны и сшиты вместе для того, чтобы сгенерировать составное изображение всей целевой области, например, ВГА. На ФИГ. 4 иллюстративно изображен конус 402 зоны обзора (FOV) конус для эндоскопа 302, делающий снимки для составного изображения.
В блоке 210, на составном изображении выбираются анатомические точки, представляющие интерес. Эти точки могут включать в себя области, где от ВГА отходят ветви, или области здоровой или нездорового ткани, травмированной ткани и т.д. Точки, представляющие интерес, могут быть использованы в качестве адресных местоположений для фокусировки или перемещения эндоскопа, управляемого роботом, в разное время в течение процедуры. В блоке 212, производится совмещение предоперационных или интраоперационных изображений и составного изображения, которое выводится от эндоскопа.
В блоке 214, эндоскоп (или, по меньшей мере, зона обзора эндоскопа) перемещается в исходное положение. Это положение выбирается в качестве положения начального сканирования и предпочтительно устанавливается на конце исследуемой области. В блоке 216, текущая зона обзора эндоскопа накладывается поверх соответствующего участка составного изображения. Текущая зона обзора показана на ФИГ. 3 в поле 320. На составное изображение 322 накладывается изображение 320 в реальном времени. В блоке 218, индикатор выполнения реализован через показ длины продвижения относительно общей длины по мере того как части кровеносного сосуда выделяются. Например, по мере того как проходится составное изображение, часть общей длины, которая выделяется, указывается или вычисляется в процентах или количестве загерметизированных ветвей. На ФИГ. 3, показывается общая длина 326 и указывается длина 324 продвижения. В блоке 220, продвижение продолжается до завершения.
Обратимся к ФИГ. 5-8, иллюстративные изображения ВГА показаны для более полного описания настоящих вариантов осуществления. Настоящие примеры являются иллюстративными, и следует понимать, что принципы настоящего изобретения могут быть применены к любой хирургической процедуре или любой системе/способу для рассмотрения или анализа внутренних структур (например, в обучающих системах, для древних артефактов, механических систем, таких как блок двигателя, и т.д.)
Обратимся к ФИГ. 5, в качестве иллюстрации показано изображение, сшиваемое для изображения полной зоны обзора. С эндоскопом, готовым к использованию и расположенном в направлении начала сосуда ЛВГА, хирург может начать сбор полной зоны обзора. Чтобы сделать это, хирург или робот перемещает эндоскоп, используя некалиброванное роботизированное визуальное сервоуправление по изображению или другой метод, вдоль видимого участка ЛВГА. Таким образом, хирург выбирает точки вдоль ЛВГА, и эндоскоп движется соответственно. Хирург может также использовать хирургический инструмент в качестве направителя, так как инструмент перемещается и, значит, эндоскоп может отслеживать кончик инструмента. Этот шаг аналогичен клинической практике, где эндоскоп перемещается либо ассистентом, либо хирургом для наблюдения артерии по всей длине.
Для того чтобы сшить изображения, собранные движущимся эндоскопом, можно модифицировать известные методы, используемые для выполнения сшивания изображений. Изображения могут использовать подходящие алгоритмы или другие методы обработки изображений. Одна из модификаций относится к эндоскопическому типу. В этом варианте осуществления, эндоскоп может иметь как боковой, так и прямой обзор. Вторая модификация относится к движению эндоскопа. Движение эндоскопа может быть запрограммировано заранее и регулироваться с помощью модуля 148 (ФИГ. 1) для обработки изображений. В этом вариант осуществления движение создается и регулируется командами хирурга. Другая модификация может включать в себя использование гибкого эндоскопа.
Хотя движение определяется пользователем, проверка изображений, используемых для сшивания, может быть выполнена путем оптимизации записанных изображений на основании количества совпадений и невязки в значениях RGB перекрывающихся пикселей. Изображения выравниваются для того, чтобы сгенерировать составное изображение 500. Составное изображение 500 включает в себя всю длину кровеносного сосуда (например, ВГА). Общая длина кровеносного сосуда может быть вычислена из изображения (используя масштаб или образец) или может быть вычислена на основании расстояния, пройденного эндоскопом или другим инструментом в изображениях. Окончательный результат является составным изображением 500, которое включает в себя серию изображений (изображений 504 зон обзора) вдоль длины ВГА 502, которые были сшиты вместе из отдельных изображений, собранных с помощью эндоскопа в течение периода времени.
Обратимся к ФИГ. 6, составное изображение 500 показано с выбранными и указанными точками 602, представляющими интерес. После того, как составное изображение 500 соответствующей части ВГА 502 было сформировано, несколько анатомических точек 602, представляющих интерес, на составном изображении 500 могут быть выбраны для планирования выделения сосуда. Эти точки 602 могут быть сохранены (путем их наложения на изображение) и затем указаны во время процедуры. С другой стороны, по мере того как точки 602 выбираются, роботизированный держатель эндоскопа перемещает эндоскоп в это местоположение, и положения сочленений робота сохраняются, так что на них можно ссылаться в течение процедуры выделения под визуальным контролем.
В примере, показанном на ФИГ. 6, выбор точек на анатомических точках 602, представляющих интерес, включают в себя, например, начальную точку выделения с пометкой «А», конечную точку выделения с пометкой «B» и большой бифуркации с пометкой «С».
Обратимся к ФИГ. 7, дополнительно (или альтернативно) к выбору точек на составном изображении 500, составное изображение 500 можно использовать для совмещения 2D эндоскопического изображения и предоперационного или интраоперационного 3D изображения. Наложение 702 сосудистого русла из 3D предоперационного изображения помещается на составное изображение 500. Сравнение с ВГА 502 может указать местоположение бифуркаций, которые прямо не видны на эндоскопических изображениях, так как они могут быть расположены под фасцией и другой тканью.
Обратимся к ФИГ. 8, модуль 106 наведения на изображение используется для направления эндоскопа. Хирург перемещает эндоскоп обратно к проксимальному положению, например, близко к аорте, и начинает выполнение выделения артерии из окружающей ткани для того, чтобы отделить артерию (ВГА) от грудной стенки. Хирург может автоматически расположить эндоскоп в этом месте, используя визуальное сервоуправление по изображению и/или обращаясь к ранее выбранным точкам 602 (выбранным в ходе планирования). По мере того как хирург продвигается вдоль артерии, как текущее эндоскопическое изображение, которое накладывается в поле 802, так и ранее вычисленное составное изображение 500 отображаются для хирурга (с необязательным наложением (702) артерии, например, из предоперационных изображений).
Вид «картинка на картинке» позволяет хирургу наблюдать гораздо более широкую зону обзора, чем та, что доступна в данный момент. Кроме того, так как движение эндоскопа известно, из датчиков положения робота, в сочетании с информацией о совмещении, может быть найден размер, показывающий длину участка артерии, который уже выделен. Индикатор состояния 804, который может быть числовым или графическим, показывает степень изъятия артерии, как части требуемой или общей длины 806. Индикатор состояния 804 может быть показан на изображении на дисплее. В другом варианте осуществления вместо процентов может быть показан индикатор текущего состояния, так что, когда поле 802 изображения в реальном времени накладывается на составное изображение 500, по мере того как хирург продвигается через ветвь ВГА, показываемый как часть общей длины удаляемого сосуда, по сравнению с требуемой или общей длиной. Планировочный модуль (104, ФИГ. 1) может использовать предоперационные изображения, чтобы обеспечить оценку общей длины сосуда, которую можно использовать для формирования индикатора выполнения во время вмешательства с устройством для наблюдения.
При интерпретации прилагаемой формулы изобретения, следует понимать, что:
a) слово «содержит» не исключает наличия других элементов или действий, чем те, которые перечислены в данном пункте формулы изобретения;
b) использование единственного числа элемента не исключает присутствия множества таких элементов;
c) любые ссылочные позиции в формуле изобретения никак не ограничивают их объем;
d) несколько «средств» может быть представлено посредством одного и того же элемента или аппаратного обеспечения или программного обеспечения, реализующего структуру или функцию; и
e) никакая конкретная последовательность действий не предназначена быть необходимой, если это специально не указано.
Описав предпочтительные варианты осуществления для улучшенной визуализации кровеносных сосудов с использованием управляемого роботом эндоскопа (которые предназначены для иллюстрации и не являются ограничивающими), следует отметить, что модификации и изменения могут быть сделаны специалистами в данной области в свете вышеизложенных идей. Поэтому следует понимать, что могут быть сделаны изменения в конкретных вариантах осуществления описанного раскрытия, которые находятся в пределах объема вариантов осуществления, раскрытых в настоящем документе, как изложено в прилагаемой формуле изобретения. Таким образом, описав подробности и специфику, требуемую патентными законами, формула изобретения, защищаемая патентом на изобретение, излагается в прилагаемой формуле изобретения.

Claims (22)

1. Система для визуализации целевого анатомического объекта, содержащая:
эндоскоп (102) для формирования изображений внутренних органов, имеющий зону обзора меньшую, чем область, которую нужно отобразить;
планировочный модуль (104), выполненный с возможностью приема видео от эндоскопа таким образом, чтобы изображения зоны обзора эндоскопа сшивались вместе для того, чтобы сформировать составное изображение области, которую нужно отобразить; и
модуль (106) наведения на изображение, выполненный с возможностью перемещения эндоскопа вдоль целевого анатомического объекта в ходе процедуры таким образом, что изображение, сформированное в зоне обзора эндоскопа, отображается как видео в реальном времени, накладываемое поверх соответствующего участка составного изображения.
2. Система по п. 1, в которой планировочный модуль (104) выполнен с возможностью выбора точек, представляющих интерес, в составном изображении, относящемся к целевому анатомическому объекту.
3. Система по п. 2, дополнительно содержащая держатель (108) эндоскопа, выполненного с возможностью направлять эндоскоп, в которой модуль наведения на изображение (106) выполнен с возможностью использования точек, представляющих интерес, для направления эндоскопа.
4. Система по п. 1, в которой планировочный модуль (106) выполнен с возможностью совмещения и наложения предоперационных и/или интраоперационных изображений на составное изображение для предоставления улучшенной карты целевого анатомического объекта.
5. Система по п. 1, дополнительно содержащая индикатор состояния (804), отображаемый вместе с составным изображением для того, чтобы указать продвижение эндоскопа по отношению к общей протяженности.
6. Система по п. 5, в которой целевой анатомический объект включает в себя кровеносный сосуд, который предстоит выделить, и индикатор состояния включает в себя, по меньшей мере, одно из: продвижения в процентах или графика продвижения, для того, чтобы указать выделенную часть относительно общей длины кровеносного сосуда.
7. Система по п. 6, в которой планировочный модуль (104) использует дооперационное изображение кровеносного сосуда для того, чтобы оценить общую длину.
8. Система по п. 1, в которой целевой анатомический объект включает в себя внутреннюю грудную артерию (ВГА) для использования в операции шунтирования.
9. Система по п. 1, в которой эндоскоп (102) содержит гибкий эндоскоп.
10. Система для визуализации целевого анатомического объекта, содержащая:
процессор (114); и
память (116), соединенную с процессором, причем память включает в себя:
планировочный модуль (104), выполненный с возможностью сшивать вместе изображения зоны обзора целевого анатомического объекта, полученные от эндоскопа, для создания составного изображения целевого анатомического объекта; и
модуль (106) наведения на изображение, выполненный с возможностью перемещения эндоскопа вдоль целевого анатомического объекта, используя составное изображение таким образом, что изображение, сформированное в зоне обзора устройства для наблюдения, отображается как видео в реальном времени, накладываемое поверх соответствующего участка составного изображения.
11. Система по п. 10, в которой планировочный модуль (104) выполнен с возможностью, по меньшей мере, одного из (i) выбора точек, представляющих интерес, в составном изображении, относящемся к целевому анатомическому объекту, или (ii) совмещения и наложения предоперационных и/или интраоперационных изображений на составное изображение для предоставления улучшенной карты целевого анатомического объекта.
12. Система по п. 10, дополнительно содержащая держатель (108) эндоскопа, выполненный с возможностью направлять эндоскоп, в которой модуль наведения на изображение выполнен с возможностью использования точек, представляющих интерес, для направления эндоскопа.
13. Система по п. 10, дополнительно содержащая индикатор состояния (804), формируемый модулем наведения на изображение, и отображаемый вместе с составным изображением для того, чтобы указать продвижение эндоскопа по отношению к общей протяженности, причем целевой анатомический объект включает в себя кровеносный сосуд, который предстоит выделить, и индикатор состояния включает в себя одно из: продвижения в процентах или графика продвижения, для того, чтобы указать выделенную часть относительно общей длины кровеносного сосуда, и причем планировочный модуль (104) использует дооперационное изображение кровеносного сосуда для того, чтобы оценить общую длину.
14. Система по п. 10, в которой целевой анатомический объект включает в себя внутреннюю грудную артерию (ВГА) для использования в операции шунтирования.
15. Система по п. 10, в которой эндоскоп (102) содержит гибкий эндоскоп.
RU2015102605A 2012-06-28 2013-06-20 Улучшенная визуализация кровеносных сосудов с использованием управляемого роботом эндоскопа RU2689767C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261665375P 2012-06-28 2012-06-28
US61/665,375 2012-06-28
PCT/IB2013/055070 WO2014001980A1 (en) 2012-06-28 2013-06-20 Enhanced visualization of blood vessels using a robotically steered endoscope

Publications (2)

Publication Number Publication Date
RU2015102605A RU2015102605A (ru) 2016-08-20
RU2689767C2 true RU2689767C2 (ru) 2019-05-28

Family

ID=49151257

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2015102605A RU2689767C2 (ru) 2012-06-28 2013-06-20 Улучшенная визуализация кровеносных сосудов с использованием управляемого роботом эндоскопа

Country Status (7)

Country Link
US (1) US11278182B2 (ru)
EP (1) EP2866638B1 (ru)
JP (1) JP6382802B2 (ru)
CN (1) CN104411226B (ru)
BR (1) BR112014031993A2 (ru)
RU (1) RU2689767C2 (ru)
WO (1) WO2014001980A1 (ru)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150045619A1 (en) * 2013-08-09 2015-02-12 Chang Bing Show Chwan Memorial Hospital System and method for mosaicing endoscope images using wide angle view endoscope
CN106030656B (zh) * 2014-02-11 2020-06-30 皇家飞利浦有限公司 一种用于对解剖目标进行可视化的系统和方法
CN106061402B (zh) * 2014-02-26 2019-10-25 皇家飞利浦有限公司 用于执行管腔外冠状动脉旁路手术的系统及其操作方法
US20150320325A1 (en) 2014-05-06 2015-11-12 Koninklijke Philips N.V. Devices, Systems, and Methods for Vessel Assessment
EP3169264A1 (en) * 2014-07-15 2017-05-24 Koninklijke Philips N.V. Image integration and robotic endoscope control in x-ray suite
JP6243364B2 (ja) * 2015-01-26 2017-12-06 富士フイルム株式会社 内視鏡用のプロセッサ装置、及び作動方法、並びに制御プログラム
US10013808B2 (en) 2015-02-03 2018-07-03 Globus Medical, Inc. Surgeon head-mounted display apparatuses
WO2017079387A1 (en) * 2015-11-05 2017-05-11 Covidien Lp System and method for detecting subsurface blood
RU2664179C1 (ru) * 2017-08-07 2018-08-15 федеральное государственное бюджетное образовательное учреждение высшего образования "Омский государственный медицинский университет" Министерства здравоохранения Российской Федерации (ФГБОУ ВО ОмГМУ Минздрава России) Способ измерения размеров объектов пищеварительного тракта по эндоскопической фотографии
US20210030510A1 (en) * 2018-02-09 2021-02-04 Sony Corporation Surgery system, image processor, and image processing method
US20190254753A1 (en) 2018-02-19 2019-08-22 Globus Medical, Inc. Augmented reality navigation systems for use with robotic surgical systems and methods of their use
US11857151B2 (en) * 2018-09-12 2024-01-02 Steris Instrument Management Services, Inc. Systems and methods for standalone endoscopic objective image analysis
GB2577714B (en) * 2018-10-03 2023-03-22 Cmr Surgical Ltd Automatic endoscope video augmentation
US10955657B2 (en) * 2018-12-20 2021-03-23 Acclarent, Inc. Endoscope with dual image sensors
DE102019200803A1 (de) * 2019-01-23 2020-07-23 Siemens Healthcare Gmbh Medizintechnischer Roboter, medizinisches System, Verfahren zu deren Betrieb, Computerprogramm und Speichermedium
KR20240125989A (ko) 2019-02-21 2024-08-20 시어터 인코포레이티드 수술 비디오의 분석을 위한 시스템 및 방법
US20200272660A1 (en) 2019-02-21 2020-08-27 Theator inc. Indexing characterized intraoperative surgical events
US11992373B2 (en) 2019-12-10 2024-05-28 Globus Medical, Inc Augmented reality headset with varied opacity for navigated robotic surgery
US11464581B2 (en) 2020-01-28 2022-10-11 Globus Medical, Inc. Pose measurement chaining for extended reality surgical navigation in visible and near infrared spectrums
US11382699B2 (en) 2020-02-10 2022-07-12 Globus Medical Inc. Extended reality visualization of optical tool tracking volume for computer assisted navigation in surgery
US11207150B2 (en) 2020-02-19 2021-12-28 Globus Medical, Inc. Displaying a virtual model of a planned instrument attachment to ensure correct selection of physical instrument attachment
US20210312949A1 (en) 2020-04-05 2021-10-07 Theator inc. Systems and methods for intraoperative video review
US11607277B2 (en) 2020-04-29 2023-03-21 Globus Medical, Inc. Registration of surgical tool with reference array tracked by cameras of an extended reality headset for assisted navigation during surgery
US11510750B2 (en) 2020-05-08 2022-11-29 Globus Medical, Inc. Leveraging two-dimensional digital imaging and communication in medicine imagery in three-dimensional extended reality applications
US11382700B2 (en) 2020-05-08 2022-07-12 Globus Medical Inc. Extended reality headset tool tracking and control
US11153555B1 (en) 2020-05-08 2021-10-19 Globus Medical Inc. Extended reality headset camera system for computer assisted navigation in surgery
US11737831B2 (en) 2020-09-02 2023-08-29 Globus Medical Inc. Surgical object tracking template generation for computer assisted navigation during surgical procedure
USD1022197S1 (en) 2020-11-19 2024-04-09 Auris Health, Inc. Endoscope
US20230053189A1 (en) * 2021-08-11 2023-02-16 Terumo Cardiovascular Systems Corporation Augmented-reality endoscopic vessel harvesting

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6006127A (en) * 1997-02-28 1999-12-21 U.S. Philips Corporation Image-guided surgery system
WO2012001549A1 (en) * 2010-06-30 2012-01-05 Koninklijke Philips Electronics N.V. Robotic control of an oblique endoscope for fov images

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5417210A (en) 1992-05-27 1995-05-23 International Business Machines Corporation System and method for augmentation of endoscopic surgery
US5452733A (en) 1993-02-22 1995-09-26 Stanford Surgical Technologies, Inc. Methods for performing thoracoscopic coronary artery bypass
JPH08275958A (ja) * 1995-04-07 1996-10-22 Olympus Optical Co Ltd 手術用マニピュレータ装置
JP4113591B2 (ja) * 1997-06-23 2008-07-09 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 画像誘導手術システム
US7381183B2 (en) 2003-04-21 2008-06-03 Karl Storz Development Corp. Method for capturing and displaying endoscopic maps
DE102004008164B3 (de) * 2004-02-11 2005-10-13 Karl Storz Gmbh & Co. Kg Verfahren und Vorrichtung zum Erstellen zumindest eines Ausschnitts eines virtuellen 3D-Modells eines Körperinnenraums
JP4364070B2 (ja) * 2004-06-18 2009-11-11 オリンパス株式会社 生体組織切断用器具
US7889905B2 (en) 2005-05-23 2011-02-15 The Penn State Research Foundation Fast 3D-2D image registration method with application to continuously guided endoscopy
EP2289591A3 (en) 2005-06-14 2012-01-04 Olympus Medical Systems Corp. Endoscope treatment instrument and treatment instrument apparatus for endoscope
CN103142309B (zh) * 2005-10-20 2015-06-17 直观外科手术操作公司 医用机器人系统中的计算机显示屏上的辅助图像显示和操纵
US8303505B2 (en) * 2005-12-02 2012-11-06 Abbott Cardiovascular Systems Inc. Methods and apparatuses for image guided medical procedures
JP5308615B2 (ja) * 2005-12-09 2013-10-09 株式会社アールエフ 医療システム
GB0613576D0 (en) * 2006-07-10 2006-08-16 Leuven K U Res & Dev Endoscopic vision system
CN101568942A (zh) * 2006-12-29 2009-10-28 皇家飞利浦电子股份有限公司 图像引导介入过程中改进的用于补偿手术中发生的运动的图像配准和方法
US8200042B2 (en) * 2007-01-31 2012-06-12 Olympus Corporation Endoscope apparatus and program
WO2008103383A1 (en) * 2007-02-20 2008-08-28 Gildenberg Philip L Videotactic and audiotactic assisted surgical methods and procedures
DE102007029884A1 (de) * 2007-06-28 2009-01-15 Siemens Ag Verfahren und Einrichtung zum Erzeugen eines aus einer Mehrzahl von endoskopischen Einzelbildern zusammengesetztes Gesamtbildes von einer Innenoberfläche eines Körperhohlraums
US20090208143A1 (en) * 2008-02-19 2009-08-20 University Of Washington Efficient automated urothelial imaging using an endoscope with tip bending
JP2012505695A (ja) * 2008-10-20 2012-03-08 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 画像に基づくローカライゼーション方法及びシステム
US10004387B2 (en) 2009-03-26 2018-06-26 Intuitive Surgical Operations, Inc. Method and system for assisting an operator in endoscopic navigation
US8337397B2 (en) * 2009-03-26 2012-12-25 Intuitive Surgical Operations, Inc. Method and system for providing visual guidance to an operator for steering a tip of an endoscopic device toward one or more landmarks in a patient
DE102009040430B4 (de) * 2009-09-07 2013-03-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung, Verfahren und Computerprogramm zur Überlagerung eines intraoperativen Livebildes eines Operationsgebiets oder des Operationsgebiets mit einem präoperativen Bild des Operationsgebiets
EP2523621B1 (en) * 2010-01-13 2016-09-28 Koninklijke Philips N.V. Image integration based registration and navigation for endoscopic surgery
US9615886B2 (en) 2010-09-15 2017-04-11 Koninklijke Philips N.V. Robotic control of an endoscope from blood vessel tree images
CN102063714A (zh) * 2010-12-23 2011-05-18 南方医科大学 基于胶囊内窥镜图片生成人体腔道全视影像的方法
EP3712857A1 (en) * 2011-02-22 2020-09-23 Midmark Corporation Hybrid stitching for 3d reconstruction
US9123155B2 (en) * 2011-08-09 2015-09-01 Covidien Lp Apparatus and method for using augmented reality vision system in surgical procedures
US20130046137A1 (en) * 2011-08-15 2013-02-21 Intuitive Surgical Operations, Inc. Surgical instrument and method with multiple image capture sensors

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6006127A (en) * 1997-02-28 1999-12-21 U.S. Philips Corporation Image-guided surgery system
WO2012001549A1 (en) * 2010-06-30 2012-01-05 Koninklijke Philips Electronics N.V. Robotic control of an oblique endoscope for fov images

Also Published As

Publication number Publication date
WO2014001980A1 (en) 2014-01-03
CN104411226A (zh) 2015-03-11
US11278182B2 (en) 2022-03-22
JP6382802B2 (ja) 2018-08-29
EP2866638A1 (en) 2015-05-06
JP2015526133A (ja) 2015-09-10
BR112014031993A2 (pt) 2017-06-27
RU2015102605A (ru) 2016-08-20
EP2866638B1 (en) 2019-12-04
US20150112126A1 (en) 2015-04-23
CN104411226B (zh) 2017-01-18

Similar Documents

Publication Publication Date Title
RU2689767C2 (ru) Улучшенная визуализация кровеносных сосудов с использованием управляемого роботом эндоскопа
EP3104801B1 (en) System for spatial visualization of internal mammary artery during minimally invasive bypass surgery
US11980505B2 (en) Visualization of depth and position of blood vessels and robot guided visualization of blood vessel cross section
EP3164050B1 (en) Dynamic 3d lung map view for tool navigation inside the lung
JP6559956B2 (ja) 内視鏡手術における超音波プローブのロボット誘導
JP6404713B2 (ja) 内視鏡手術におけるガイド下注入のためのシステム及び方法
RU2667326C2 (ru) Планирование траектории рамы с-типа для оптимального получения изображений в эндоскопической хирургии
CN108451639B (zh) 用于定位与导航的多数据源集成
EP3463032A1 (en) Image-based fusion of endoscopic image and ultrasound images