The present invention relates to a smart health care mirror using a camera, capable of performing health care by analyzing changes in the body of a user. According to the present invention, the smart health care mirror using a camera comprises: face recognition using image data of a camera and Tensorflow of deep learning open source computer vision (OpenCV)； behavior recognition using image data of the camera and an SVM-based joint estimation algorithm for behavior recognition； image capture using image data of the camera； voice recognition； a touch screen； image photographing； voice service； and a conversation DB.본 발명은 카메라를 이용한 스마트 건강관리 거울에 관한 것으로서 자동으로 행동인식을 통해 실시간 사용자 행동에 따른 맞춤형 건강관리 및 얼굴인식을 통해 사용자의 외관적 변화를 분석하여 기록에 따른 건강관리를 할 수 있으며 신체 변화를 알기 용이하도록 함으로써 기존의 얼굴인식을 통해 사용자의 외관적 변화를 분석하여 기록에 따른 건강관리 및 행동인식을 통해 실시간 사용자 행동에 따른 맞춤형 건강관리 서비스 부재에 따른 문제점을 해소 하도록 한 것이다.즉 본 발명은, Smart mirror에 있어서 눈, 치아 및 목안쪽 , 피부, 열굴윤곽 등의 신체 변화를 분석하여 건강관리를 할 수 있게 카메라의 영상 데이터와 딥러닝 OpenCV(Open Source Computer Vision)의 Tensorflow를 이용한 얼굴인식, 사용자가 면도, 양치질, 세안 등의 실시간 행동에 따른 맞춤형 건강검진질문을 통한 건강관리를 할 수 있게 카메라의 영상 데이터와 행동인식을 위한 SVM 기반의 관절 추정 알고리즘을 이용한 행동인식, 거울로 확인하기 힘든 사용자의 뒷모습을 사진으로 캡쳐하여 편리하게 확인할 수 있게 카메라의 이미지 데이터를 이용한 사진캡쳐, 음성인식을 통해 입력을 제어할 수 있게 마이크모듈을 구성한 음성인식, 손으로 터치를 통해 입력을 제어할 수 있게 터치스크린 디스플레이로 구성한 터치스크린, 사용자의 행동 및 얼굴인식을 할 수 있게 카메라모듈로 구성한 영상촬영, 사용자가 필요로 하는 정보 및 음악등을 재생할 수 있는 스피커모듈을 구성한 음성서비스, 사용자의 음성에 맞춘 알맞은 응답 Data 마이크모듈과 심심이API를 구성한 대화DB으로 구성한 것이다.따라서, 본 발명은 자동으로 행동인식을 통해 실시간 사용자 행동에 따른 맞춤형 건강관리 및 얼굴인식을 통해 사용자의 외관적 변화를 분석하여 기록에 따른 건강관리를 할 수 있으며 신체 변화를 알기 용이하도록 함으로써 기존의 얼굴인식을 통해 사용자의 외관적 변화를 분석하여 기록에 따른 건강관리 및 행동인식을 통해 실시간 사용자 행동에 따른 맞춤형 건강관리 서비스 부재에 따른 문제점을 해소하도록 한 효과를 갖는 것이다.
