The present invention relates to a surgical image analysis and recognition system, method and program. A method for analyzing surgery by a computer according to an embodiment of the present invention includes the steps of: obtaining a surgical image by a computer; Inputting, by a computer, the surgical image into one or more surgical element recognition models; A computer obtains a combination of surgical recognition results calculated from each surgical element recognition model, wherein at least one surgical element recognition model is included in the surgery element recognition layer, which is the lowest level in the surgery analysis system; And a computer inputs the combination of the surgical recognition results into one or more surgical analysis models to obtain one or more analysis results, wherein the one or more surgical analysis models are included in the surgical analysis layer above the surgical element recognition layer, and requested by the user. It is selected according to the operation analysis result acquisition step; includes.본 발명은 수술영상 분석 및 인식 시스템, 방법 및 프로그램에 관한 것이다.본 발명의 일실시예에 따른 컴퓨터에 의한 수술 분석 방법은, 컴퓨터가 수술영상을 획득하는 단계; 컴퓨터가 하나 이상의 수술요소 인식모델에 상기 수술영상을 입력하는 단계; 컴퓨터가 각각의 수술요소 인식모델에서 산출된 수술인식결과 조합을 획득하되, 하나 이상의 수술요소 인식모델은 수술분석시스템 내의 최하위 레벨인 수술요소 인식층에 포함되는 것인, 수술인식결과 조합 획득단계; 및 컴퓨터가 상기 수술인식결과 조합을 하나 이상의 수술 분석 모델에 입력하여 하나 이상의 분석결과를 획득하되, 상기 하나 이상의 수술 분석 모델은 상기 수술요소 인식층 위의 수술 분석층에 포함되는 것으로서, 사용자의 요청에 따라 선택되는 것인, 수술 분석결과 획득단계;를 포함한다.