The invention in this indirect effect simulation on the three-dimensional computer graphics is a simulation regarding the state change of the subject in the real space caused by the change of state of the synthesized fixed display a three-dimensional state and the imaging area of computer graphics to the subject to provide a system which is represented by, determined by from the surface polygon model three-dimensional measurement of the object image (2) existing in the same space, surface polygon model and form shaped surfaces Four rigon model (1) the shape pattern recognition resembling in the detection, and a tracking computer graphics, according to the relative position change of the subject and the imaging device, which is caused by a real three-dimensional space, by displaying the same computer graphics image and the actual relative position change on the captured image, the field of view imaging apparatus It provides a composite video location tracking system that complements the subject of a three-dimensional computer graphics and virtual images appear as if they are integrated.본 발명은 실공간에서의 피사체의 상태변화에 관한 시뮬레이션이 피사체에 합성고정표시한 3차원 컴퓨터그래픽스의 상태와 촬상공간의 상태의 변화로 인해 야기되는 3차원 컴퓨터그래픽스에 대한 간접적인 영향이 시뮬레이션에 의해 표시되는 시스템을 제공하기 위해, 동일 공간 내에 존재하는 피사체 영상을 입체계측한 서페이스 폴리곤 모델(2) 중에서, 서페이스 폴리곤 모델과 닮은꼴 형상인 서페이스 포리곤 모델(1)을 형상패턴인식에 의해 판별검출하고, 컴퓨터그래픽스를 트랙킹하여, 실제의 3차원 공간으로 야기되는 상기 피사체와 촬상장치의 상대적 위치변화에 따라, 실제의 상대적 위치변화와 동일한 컴퓨터그래픽스 영상을 촬상영상 위에 표시함으로써, 촬상장치 시야 내의 피사체와 가상의 3차원 컴퓨터그래픽스 영상이 일체화된 것처럼 표시하는 합성영상 위치보완 트랙킹시스템을 제공한다.