earticle

영어

In this paper, we propose a markerless AR surgical framework for breast lesion removal using depth sensor and 3D breast CT. In order to acquire a mesh to be used for registration, a patient mesh on the real coordinate system is acquired through a patient 3D scan using a depth sensor. The patient mesh on the virtual coordinate system is obtained by performing contrast-based skin segmentation in 3D breast CT and generating a 3D mesh. Based on the gradient in the segmented skin area, detect the nipple, set the ROI based on this, and select the vertices on the virtual coordinate system to be used for matching. The mesh on the real and virtual coordinate systems align the primary positions through the matching of the center of mass, and applies the ICP method for registration. As a result of experiments using data from 10 patients, the skin segmentation accuracy was DSC 98.34%, the nipple detection error was 2.99 mm, and the registration error was 5.01 mm. In addition, the registration error using 10 phantom data was 3.42 mm, showing high accuracy of AR visualization.

한국어

본 논문에서는 깊이 센서와 3차원 breast CT를 이용하여 유방 병변 제거술을 위한 비마커 기반 AR 수술 프레임워 크를 제안한다. 정합에 활용될 mesh의 획득을 위해 깊이 센서를 이용하여 환자 3차원 스캔을 통한 현실 좌표계 상 의 환자 mesh를 획득한다. 가상 좌표계 상의 환자 mesh는 3차원 breast CT에서 명암도 기반 피부 분할을 수행하 고 3차원 mesh를 생성하여 획득한다. 분할된 피부 영역에서 기울기에 기반하여 유두를 탐색하고, 이를 기준으로 ROI를 설정하여 정합에 활용될 가상 좌표계 상의 정점을 선별한다. 현실과 가상 좌표계 상의 mesh는 무게중심 일 치를 통해 일차적 위치 정렬을 수행하고, ICP 기법을 적용하여 정밀 정합을 수행한다. 10명의 환자 데이터를 이용 하여 실험한 결과 피부 분할 정확도는 DSC 98.34%, 유두 탐색 오차는 2.99mm, 정합 오차는 5.01mm로 나타났 다. 또한, 10개의 팬텀 데이터를 이용한 정합 오차는 3.42mm로 높은 정확도의 AR 가시화를 보였다.