KR20120000722A

KR20120000722A - 이종 의료용 이미지간의 비강체 융합 방법

Info

Publication number: KR20120000722A
Application number: KR1020100061140A
Authority: KR
Inventors: 김철영; 곽효승
Original assignee: 주식회사 사이버메드
Priority date: 2010-06-28
Filing date: 2010-06-28
Publication date: 2012-01-04

Abstract

본 발명은 이종 의료용 이미지간의 비강체 융합 방법에 있어서, X-ray 이미지를 준비하는 단계; 비강체 융합 전 CT 이미지를 준비하는 단계; 그리고, X-ray 이미지와 비강체 융합 전 CT 이미지를 융합하는 단계;를 포함하는 것을 특징으로 하는 이종 의료용 이미지간의 비강체 융합 방법에 관한 것이다.

Description

이종 의료용 이미지간의 비강체 융합 방법{Non rigid fusion method for multi medicla modality}

본 개시(Disclosure)는 전체적으로 이종 의료용 이미지간의 비강체 융합 방법에 관한 것이다.

여기서는, 본 개시에 관한 배경기술이 제공되며, 이들이 반드시 공지기술을 의미하는 것은 아니다(This section provides background information related to the present disclosure which is not necessarily prior art).

초음파 진단 시스템은 초음파를 이용하여 비파괴, 비침습 방식으로 대상체의 내부 구조를 실시간으로 보이며, CT(computerized tomography) 또는 MR(magnetic resonance)와 달리 방사선을 이용하지 않기 때문에 인체에 거의 무해하다. 그러나, 초음파 영상은 신호대 잡음비가 낮기 때문에, 이를 보완하기 위해 CT 영상과 초음파 영상의 정합(registration)을 수행한다.

다양한 의학적 응용분야에서 비강체 영상정합(non-rigid image registration)은 핵심적인 과정이다. 영상 가이드 중재(image guided intervention)는 시술전 영상과 시술중 영상 사이의 정합을 필요로 하는 응용 분야의 하나이다. 간의 경우, 3차원 초음파 영상이 영상 가이드 중재술을 위해 자주 이용된다. 화질이 불량한 초음파 영상의 단점을 극복하기 위해, 시술중 3차원 초음파 영상에 대응하는 고화질의 시술전 CT 또는 MR 영상을 디스플레이한다. 이러한 목적으로, 간의 초음파 영상과 CT 영상의 정렬(alignment)이 필요하다. 초음파 영상과 CT 영상은 다른 호흡 단계에서 촬상되기 때문에 국부적 변형(local deformation)이 나타나 비강체 영상 정합이 수행되어야 한다.

서로 다른 특성 때문에 CT 영상과 초음파 영상을 정합하는 것은 어려운 작업이다. 간의 3차원 초음파 영상과 CT(또는 MR) 영상을 비강체 영상정합하기 위한 몇 가지 알고리즘(algorithm)이 제안되었다. 3차원 초음파 영상과 MR의 정합에서, 초음파 영상과 MR 영상이 혈관 확률 영상(vessel probability image)으로 각각 변환되고, 두 혈관 확률 영상 사이의 정규화된 교차 상관(cross correlation)을 최대화시켜 정합한다. 혈관들의 중심선들을 추출하고 정합하여 3차원 초음파 영상과 CT 영상 간의 정합을 수행하는 방법도 제안되었다. 그러나, 이들 방법에서 정합 정밀도는 초음파 영상과 CT 영상의 혈관 분류(segmentation) 정확도에 의한 영향을 받는다.

이에 대하여 '발명의 실시를 위한 구체적인 내용'의 후단에 기술한다.

여기서는, 본 개시의 전체적인 요약(Summary)이 제공되며, 이것이 본 개시의 외연을 제한하는 것으로 이해되어서는 아니된다(This section provides a general summary of the disclosure and is not a comprehensive disclosure of its full scope or all of its features).

본 개시에 따른 일 태양에 의하면(According to one aspect of the present disclosure), 이종 의료용 이미지간의 비강체 융합 방법에 있어서, X-ray 이미지를 준비하는 단계; 비강체 융합 전 CT 이미지를 준비하는 단계; 그리고, X-ray 이미지와 비강체 융합 전 CT 이미지를 융합하는 단계;를 포함하는 것을 특징으로 하는 이종 의료용 이미지간의 비강체 융합 방법이 제공된다.

도 1은 본 발명의 실시예에 따른 초음파 영상과 CT 영상의 비강체 영상정합 시스템을 보이는 블록도.
도 2는 본 발명의 실시예에 따른 정합부(130)에서 초음파 영상과 CT 영상의 비강체 영상정합을 수행하는 방법을 보이는 순서도.
도 3은 초음파 영상(A), 비강체 영상정합전 CT 영상(B) 및 초음파-CT 정합영상(C)을 슬라이스별로 보이는 예시도.
도 4는 본 발명에 따른 비강체 영상정합 방법의 정확성을 보이는 예시도.
도 5는 본 발명에 따른 이종 의료용 이미지간의 비강체 융합 방법의 일 예를 나타내는 도면.

이하, 본 개시를 첨부된 도면을 참고로 하여 자세하게 설명한다(The present disclosure will now be described in detail with reference to the accompanying drawing(s)).

도 1은 본 발명의 실시예에 따른 초음파 영상과 CT 영상의 비강체 영상정합 시스템을 보이는 블록도이다. 도 1을 참조하면, 정합 시스템(100)은 대상체(예를 들어, 간)에 초음파 신호를 송수신하여 초음파 영상을 형성하는 초음파 영상 형성부(110)를 포함한다. 본 발명의 실시예에서, 초음파 영상은 B-모드로 얻은 3차원 초음파 영상일 수 있다.

정합 시스템(100)은 CT 영상을 형성하는 CT 영상 형성부(120)을 더 포함한다. 본 발명의 실시예에서 CT 영상은 3차원 CT 영상일 수 있다. 초음파 영상과 CT 영상은 서로 다른 호흡에서 형성될 수 있다.

정합 시스템(100)은 초음파 영상과 CT 영상에 대해서 비강체 영상정합을 수행하기 위한 정합부(130)를 더 포함할 수 있다. 이하, 정합부(130)의 동작을 도 2를 참조하여 자세히 설명한다.

도 2는 본 발명의 실시예에 따른 정합부(130)에서 초음파 영상과 CT 영상의 비강체 영상정합을 수행하는 방법을 보이는 순서도이다. 도 2를 참조하면, 초음파 영상 형성부(110) 및 CT 영상 형성부(120)가 동일한 환자로부터 임의의 호흡에서 간의 3D B-모드 초음파 영상과 3D CT 영상을 형성하면, 초음파 영상과 CT 영상에 대해 ICP(Iterative Closest Point) 기반 아핀 정합(affine registration)을 수행한다(210).

본 발명의 실시예에서, 초음파 영상과 CT 영상에서 간의 국부적 변형을 모델링하기 위한 변환식으로서 B-스플라인(B-spline) FFD(free form deformation)를 이용할 수 있다. 이 FED 변환식은 균일한 간격을 갖는 제어점들의 변위(displacement of control points)로써 정의된다. 변위는 변형 변수 Φ로 표현될 수 있다. 간 영상의 전체에 걸쳐 국부 변형은 고를(smooth) 것으로 기대되기 때문에, 고른 변형(smooth transformation)으로 추정한다. 따라서, 금속 박판(thin-plate of metal)의 2D 구부림 에너지에 대응하는 3D 구속 C_smooth를 정의하여 사용한다.

혈관과 횡격막의 밝기값 관계는 초음파 영상과 CT 영상에서 각기 다르다. 초음파 영상에서, 초음파 신호의 강한 반사에 의해 횡격막은 밝기값이 큰 값을 나타낸다. 이러한 밝기값 특성은 CT 영상에서 횡격막이 큰 그레디언트 크기로 표현되는 것과 관련시킬 수 있다. 반면에, 혈관 영역에서는 비록 명암은 반전되지만 초음파 영상의 밝기값은 CT 영상의 밝기값과 관련될 수 있다. 횡격막 영역의 제1 목적함수 C_diaphragm는 초음파 영상에서의 밝기값과 CT 영상에서의 그레디언트 크기에 의해서 구해지는데 반하여, 혈관 영역의 제2 목적함수 C_vessel는 초음파 영상과 CT 영상의 밝기값을 이용하여 구해진다.

횡격막과 혈관 영역에서 목적함수를 구하기 위해, CT 영상에서 복수의 ROI 영역을 정의한다(220). 즉, 영역-성장 방법(region-growing scheme)을 이용하여 혈관 및 간을 분할하고, 분할된 영역의 에지(edge) 영역을 확장하여 각 ROI 영역을 정의한다. 정합시 CT 영상과 초음파 영상이 서로 겹쳐지는 부분에 대해서만 정합에 필요한 계산이 수행되므로, CT 영상과 초음파 영상 중 한 영상에서만 ROI 영역이 정의되면 충분하다. 본 발명의 실시예에서는 상대적으로 혈관이나 간 경계 구분이 확실한 CT 영상에서 ROI 영역을 정의한다. 한편, ROI 영역을 정의하기 위한 ROI 마스킹을 혈관 영역과 횡격막 영역에 대해 각각 실시한다. 이에 따라, ROI 마스킹에 의해 두 영역, 혈관 영역과 횡격막 영역이 나누어진다. 이후, ROI 영역에서 횡격막 영역의 목적 함수 C_diaphragm와 혈관 영역의 목적함수 C_vessel를 형성한다(230). 정확한 정합을 위해 본 발명의 실시예에서는, 초음파 영상과 CT 영상의 밝기값과 그레디언트 크기 및 에지 방향 각도(edge orientation angle)에 기초하여 목적 함수를 계산한다.

그레디언트 크기 및 에지 방향 각도는 다음과 같이 구한다. 먼저, 각 복셀(voxel)에서 구조 매트릭스(structure matrix)를 계산한다. 구조 매트릭스의 고유값 분석(eigen-analysis)을 통하여 고유 벡터(eigen-vector)와 고유값(eigen-value)을 추출한다. 여기서 가장 큰 고유값을 가지는 고유 벡터를 영상의 에지 방향으로 정의하고, 그레디언트 크기는 고유값으로써 정의한다. 만일, 두 영상이 완벽하게 정합되면, 대응하는 에지 방향 각도가 동일할 것이다. 이러한 관계를 고려하여 두 에지 방향 벡터의 내적의 제곱으로 에지 방향 일치 정도를 정의할 수 있다.

두 목적함수 C_vessel과 C_diaphragm은 다음과 같이 구해진다.

혈관 영역에서는 초음파 영상과 CT 영상이 서로 밝기값의 상관관계가 존재한다. 따라서 초음파 영상 밝기값, CT 영상 밝기값, 에지 방향 일치 정도를 이용하여 통계적인 엔트로피를 측정하여 C_vessel로 정의한다.

횡격막 영역에서는 초음파 영상의 밝기값과 CT 영상의 그레디언트 크기가 서로 상관관계가 있다. 따라서 초음파 영상 밝기값, CT 영상 그레디언트 크기, 에지 방향 일치 정도를 이용하여 통계적인 엔트로피를 측정하여 C_diaphragm로 정의한다.

이어서, 두 목적 함수 C_diaphragm, C_vessel로써 다음의 수학식 1과 같은 비용 함수를 형성한다(240).

여기서, λ는 두 영상의 정렬과 변환의 평탄(smoothness) C_smooth 사이의 교환조건(trade-off)을 나타낸다. 그레디언트 하강 방법(gradient descent scheme)에 따라 다음의 수학식 2와 같이 비용함수의 그레디언트를 이용하여 변형 변수 Φ를 갱신하는 최적화 과정을 수행한다(250).

수학식 2에서 μ는 스텝 크기를 나타내며, k는 자연수로서 그레디언트 하강의 반복 상태를 나타낸다. 구현을 위해 는 차분으로 근사화할 수 있다. 작은 양의 값 ε에 대해 수학식 3과 같은 조건을 만족하면 최적화 과정을 종료한다.

최종적으로, 최적화된 변수들을 CT 영상에 반영하여 변형된 CT 영상을 형성함으로써 초음파 영상에 정합된 CT 영상을 생성한다(260).

본 발명에 따른 정합 시스템(100)은 초음파 영상, CT 영상, 정합된 초음파-CT 영상을 디스플레이하는 디스플레이부(140)를 포함할 수 있다.

도 3은 초음파 영상(A), 비강체 영상정합전 CT 영상(B) 및 초음파-CT 정합영상(C)을 슬라이스별로 보인다.

도 4는 본 발명에 따른 비강체 정합 방법의 정확성을 보이는 초음파 사진으로서, 초음파 영상(A)과 비강체 영상정합전 CT 영상(B)에 각각 표시된 마커(M1, M2)가 모든 슬라이스 영상에서 혈관 영역뿐만 아니라 횡격막 영상에서도 정확하게 일치됨을 보인다.

도 5는 본 발명에 따른 이종 의료용 이미지간의 비강체 융합 방법의 일 예를 나타내는 도면으로서, X-ray 이미지를 준비하는 단계; 비강체 융합 전 CT 이미지를 준비하는 단계; 그리고, X-ray 이미지와 비강체 융합 전 CT 이미지를 융합하는 단계;를 포함하는 이종 의료용 이미지간의 비강체 융합 방법이 제시되어 있다.

본 발명은 효과적인 이종 의료용 이미지간의 비강체 융합 방법을 제공한다.

110: 초음파 영상 형성부 120: CT 영상 형성부

Claims

이종 의료용 이미지간의 비강체 융합 방법에 있어서,
X-ray 이미지를 준비하는 단계;
비강체 융합 전 CT 이미지를 준비하는 단계; 그리고,
X-ray 이미지와 비강체 융합 전 CT 이미지를 융합하는 단계;를 포함하는 것을 특징으로 하는 이종 의료용 이미지간의 비강체 융합 방법.