A medical 3D image processing apparatus according to an embodiment of the present invention includes: a storage unit for storing a 3D image of a body to which a previously photographed beacon is attached a receiving unit for receiving signals transmitted from the beacon attached to a head-mounted display and the body from a plurality of external receiving units, respectively and an image control unit for estimating the position and direction of the beacon based on the signal and controlling the image of the body which is stored according to the position and direction of the beacon which are estimated. Accordingly, the present invention can more accurately and conveniently perform an operation or surgery by projecting the 3D image onto a real environment.COPYRIGHT KIPO 2018본 발명의 실시예에 따른 의료용 3차원 영상 처리 장치는 미리 촬영된 비콘이 부착된 신체의 3 차원 영상을 저장하는 저장부 복수의 외부 수신부로부터 상기 신체 및 헤드 마운트 디스플레이(head mounted display)에 부착된 비콘으로부터 송출되는 신호를 각각 수신하는 수신부 및 상기 신호를 기초로 상기 비콘의 위치 및 방향을 추정하고, 추정된 상기 비콘의 위치 및 방향에 따라 저장된 상기 신체의 영상을 조정하는 영상 조정부를 포함한다.