3차원 의료 영상 분석을 위한 멀티모달 거대 언어 모델

한줄 요약

3D 의료 영상 분석을 위한 멀티모달 거대 언어 모델(M3D-LaMed)과 대규모 데이터셋(M3D-Data), 벤치마크(M3D-Bench)를 제안한다.

풀어야 하는 문제

기존 의료 영상 분석 연구는 주로 2D 이미지에 집중되어 왔으며, 3D 의료 영상의 풍부한 공간 정보를 활용하는 멀티모달 거대 언어 모델 연구는 부족하다. 또한 3D 의료 영상에 특화된 대규모 데이터셋과 평가 벤치마크가 부재하다.

접근 방법

결과·기여

제안한 방법은 기존 솔루션보다 우수한 성능을 보였으며, 모든 코드, 데이터, 모델을 공개하여 후속 연구를 촉진한다. 3D 의료 영상 분석 분야에 멀티모달 거대 언어 모델을 적용한 선도적 연구로, 임상 진단 및 치료에 기여할 수 있다.