수술 동작부터 전체 단계까지 계층적으로 인식
간 절제술 영상 인식 정확도 58%

수술 도구와 의료진의 동작을 인식하는 수준을 넘어 수술이 어떤 단계에 있고 어떤 상황이 진행 중인지 파악하는 인공지능(AI) 기술이 개발됐다. 수술 과정의 맥락까지 이해하는 기술로, 향후 의료진과 협력하는 지능형 수술보조로봇 개발에 활용될 것으로 기대된다.


삼성서울병원, 수술 상황 이해하는 AI 개발…휴머노이드 로봇 구현
AD
원본보기 아이콘

삼성서울병원은 지능형의료로봇연구센터 정규환 센터장·전용준 연구원과 이식외과 오남기 교수 연구팀이 수술 영상의 공간적 정보와 시간적 맥락을 함께 분석해 세부 동작부터 전체 수술 단계까지 계층적으로 이해하는 AI 'CurConMix+(커콘믹스플러스)'를 개발했다고 17일 밝혔다.

기존 수술영상 AI는 개별 장면에서 수술 도구나 의료진의 동작을 식별하는 데 주력했다. 반면 커콘믹스플러스는 영상 속 공간적 특징과 시간에 따른 수술 흐름을 통합적으로 분석한다. 특정 순간에 어떤 동작이 이뤄지는지뿐 아니라 그 동작이 전체 수술 과정에서 어떤 의미를 갖는지까지 파악하도록 설계됐다.


이는 수술보조로봇이 의료진과 협력하기 위한 핵심 기술로 꼽힌다. 로봇이 수술 상황에 맞춰 능동적으로 보조하려면 현재 수술이 어느 단계에 있고 의료진이 무엇을 하고 있는지 실시간으로 이해해야 하기 때문이다.

성능 평가에서도 기존 모델을 앞섰다. 전 세계 연구자가 같은 기준으로 겨루는 공개 수술영상 벤치마크(CholecT45)를 토대로 시험한 결과, 커콘믹스플러스의 평균 정밀도(AP_IVT)는 42.2%로 기존 최고 성능 모델(41.5%)보다 높았다. 간 절제술 영상에서는 58.4%를 기록해 기존 모델보다 10%포인트 이상 향상됐다. 평균 정밀도가 높을수록 수술 영상에서 도구와 동작, 대상 등을 정확하게 인식한다는 의미다.


특히 학습 데이터에서 상대적으로 적게 등장하는 희귀 수술 동작의 인식 성능도 개선됐다. 담낭 절제 전 담즙 누출을 막기 위해 클립을 적용하는 과정 등 드물게 나타나는 동작의 평균 정밀도는 담낭 수술 영상에서 33%에서 39%로, 간 수술 영상에서는 43%에서 56%로 각각 상승했다.


연구팀은 간 절제술 영상 데이터셋 'LLS48'도 새롭게 구축했다. 2020년 2월부터 2022년 3월까지 삼성서울병원에서 시행된 복강경 간 절제술 48건, 약 52시간 분량의 영상을 국제 수술영상 표준 분류에 따라 5개 수술 단계와 18개 세부 과업, 195개 동작으로 세분화했다. 간담췌외과 전문의 2명과 경력 10년 이상의 전문인력 3명이 영상 장면별 분류와 검증 작업에 참여했다.


세부 동작을 학습한 AI가 상위 단계의 수술 흐름까지 파악할 수 있다는 가능성도 확인했다. 담낭 절제술의 수술 단계 예측에서 93% 이상의 정확도를 기록했다. 이는 개별 동작 인식을 넘어 수술 과정의 계층적 구조를 학습할 수 있는 가능성을 보여준다는 게 연구팀의 설명이다.


정규환 센터장은 "수술로봇이 의료진과 자연스럽게 협력하려면 수술 도구나 장기를 식별하는 것을 넘어 현재 어떤 수술이 진행되고 있고 의료진이 무엇을 하는지 이해할 수 있어야 한다"며 "이번 연구는 개별 수술 동작부터 전체 수술 흐름까지 통합적으로 인식하는 AI 기술을 제시했다는 데 의미가 있다"고 말했다.


오남기 교수는 "손끝 동작을 배운 AI가 수술 전체의 흐름까지 읽어낸 셈"이라며 "수술 과정 자동 기록과 수술 복기, 전공의 교육을 거쳐 궁극적으로는 수술 중 상황을 실시간으로 인지하는 휴머노이드 수술보조로봇에도 활용할 수 있을 것"이라고 전했다.

AD

이번 연구는 보건복지부 산하 한국보건산업진흥원의 한국형 ARPA-H 프로젝트와 과학기술정보통신부 한국연구재단 지원 사업, 삼성서울병원 '미래의학 2030 프로젝트' 및 병원 연구비 지원을 받아 수행됐다. 연구 결과는 의료영상 분야 국제학술지 'IEEE Transactions on Medical Imaging'에 게재됐다.


조인경 기자 ikjo@asiae.co.kr

<ⓒ투자가를 위한 경제콘텐츠 플랫폼, 아시아경제. 무단전재 배포금지, AI 학습 및 활용 금지>

함께 보면 좋은 기사

새로보기

내 안의 인사이트 깨우기

취향저격 맞춤뉴스

많이 본 뉴스

당신을 위한 추천 콘텐츠

놓칠 수 없는 이슈