A system for permitting a medical practitioner to interact with medical information, the system comprising: a sensing unit for detecting a position of a reference object used to interact with the sensing unit; at least one control unit for: determining a gesture performed by the medical practitioner; identifying a command relative to the medical information that corresponds to the gesture and executing the command in order to display the medical information; generating a graphical user interface comprising a virtual representation of the reference object and at least one virtual icon and/or a virtual representation of the sensing unit, each of the at least one virtual icon corresponding to one of a respective mode of operation, a respective user notification and a respective system setting option; and displaying the GUI along with the medical informationLa présente invention concerne un système permettant à un médecin d'interagir avec de l'information médicale, le système comprenant : une unité de détection pour détecter une position d'un objet de référence utilisé pour interagir avec une unité de détection ; au moins une unité de commande pour : déterminer un geste exécuté par le médecin ; identifier une commande par rapport à l'information médicale qui correspond au geste et exécuter la commande afin d'afficher l'information médicale ; générer une interface utilisateur graphique comprenant une représentation virtuelle de l'objet de référence et au moins une icône virtuelle et/ou une représentation virtuelle de l'unité de détection, chacune de ladite icône virtuelle correspondant à l'un d'un mode de fonctionnement respectif, d'une notification d'utilisateur respective et d'une option respective de paramétrage de système et l'affichage de la GUI avec l'information médicale.