Provided is a surgery assistance system with which an optimal field of view corresponding to a person participating in surgery such as a surgeon or staff can be obtained. This surgery assistance system is provided with: a plurality of cameras (32) disposed inside the body of a patient a generation unit (41) that generates a free-viewpoint image from the image of the cameras (32) a display unit (12A) that projects the free-viewpoint image and a display control unit that displays, on the display unit (12A), the free-viewpoint image corresponding to the position and orientation of the display unit (12A).La présente invention se rapporte à un système dassistance chirurgicale avec lequel un champ de vision optimal correspondant à une personne participant à une intervention chirurgicale, telle quun chirurgien ou le personnel, peut être obtenu. Ce système dassistance chirurgicale est pourvu : dune pluralité de caméras (32) disposée à lintérieur du corps dun patient dune unité de génération (41) qui génère une image de point de vue libre à partir de limage des caméras (32) dune unité daffichage (12A) qui projette limage de point de vue libre et dune unité de commande daffichage qui affiche, sur lunité daffichage (12A), limage de point de vue libre correspondant à la position et lorientation de lunité daffichage (12A).術者やスタッフなどの手術に参加する人に応じた最適な視野を得ることができる手術支援システムを提供する。手術支援システムは、患者の体内に配置される複数のカメラ32と、カメラ32の映像から自由視点映像を生成する生成部41と、自由視点映像を映し出す表示部12Aと、表示部12Aの位置及び姿勢に応じた自由視点映像を当該表示部12Aに表示させる表示制御部42と、を備える。