A system is provided that includes a Q3D endoscope arranged to image a field of view and a processor that generates a Q3D model of a scene and identifies a target instrument and structure. The processor is configured to display the scene from the virtual view of the instrument, determine a no-fly zone around the target, determine a predicted path for the instrument, or provide 3D tracking of the instrument.視野を撮像するよう配置されるQ3D内視鏡と、シーンのQ3Dモデルを生成し且つ標的器具及び構造を特定するプロセッサとを含む、システムが提供される。プロセッサは、器具の仮想視野からシーンを表示し、標的の周りの飛行禁止ゾーンを決定し、器具のための予測経路を決定し、或いは器具の3Dトラッキングをもたらすように、構成される。