PROBLEM TO BE SOLVED: To provide a medical observation control device and a medical observation system capable of accurately comparing the relative brightness of images acquired at different times. A medical observation control device captures a second medical image and a storage unit that stores parameters related to a first imaging condition including the position of the imaging unit at the time of capturing a first medical image. As the second imaging condition, a restoration setting unit that restores parameters related to the first imaging condition and a control unit that controls the imaging unit and the holding unit that holds the imaging unit so as to image the observation target under the second imaging condition. And / or a correction unit that compares the first medical image and the second medical image and corrects the brightness of the first and / or the second medical image according to the comparison result. [Selection diagram] Fig. 1【課題】異なる時刻に取得した画像の相対的な明るさを正確に比較することができる医療用観察制御装置及び医療用観察システムを提供すること。【解決手段】医療用観察制御装置は、第1の医療用画像撮像時の撮像部の位置を含む第1の撮像条件に関するパラメータを記憶する記憶部と、第2の医療用画像を撮像する第2の撮像条件として、第1の撮像条件に関するパラメータを復元する復元設定部と、第2の撮像条件で観察対象を撮像するよう、撮像部と撮像部を保持する保持部とを制御する制御部と、第1の医療用画像と第2の医療用画像とを比較し、比較結果に応じて第1及び/又は第2の医療用画像の明るさを補正する補正部と、を備える。【選択図】図1