According to an embodiment, an emotion analyzing system for analyzing a users emotion using a user terminal includes a face image obtaining unit for obtaining a plurality of face images of a users face including eyes, nose, and mouth at the user terminal A face image correcting unit for correcting the plurality of face images based on a front face of the user face to obtain at least one front face image And an emotion analyzing section for analyzing the emotion of the user based on a change in size or at least one of sizes of at least one of the eye, the nose, and the mouth included in the users face on the at least one front face image do.일 실시예에 따르면, 사용자 단말을 이용하여 사용자의 감정을 분석하는 감정 분석 시스템은, 상기 사용자 단말에서 눈, 코 및 입을 포함하는 사용자 얼굴을 촬영한 복수의 얼굴 이미지들을 획득하는 얼굴 이미지 획득부 상기 복수의 얼굴 이미지들을 상기 사용자 얼굴의 정면을 기준으로 보정하여 적어도 하나의 정면 얼굴 이미지를 획득하는 얼굴 이미지 보정부 및 상기 적어도 하나의 정면 얼굴 이미지 상에서 상기 사용자 얼굴에 포함되는 상기 눈, 상기 코 또는 상기 입 중 적어도 어느 하나의 크기 또는 적어도 어느 하나의 형태 변화에 기초하여 상기 사용자의 감정을 분석하는 감정 분석부를 포함한다.