An information processing system capable of constructing an avatar reflecting a user's state more realistically is provided. The information processing system acquires vital data including the heart rate variation rate of the user, and transmits the acquired vital data in real time through the communication network, and an information processing server for processing the vital data transmitted from the terminal device. Equipped. The information processing server stores the vital data, estimates the user's state based on the heart rate variation rate, creates display data for displaying the avatar reflecting the estimated result, and transmits the display data transmission request via the communication network. When receiving, the display data is sent to the requesting source.유저의 상태를 보다 리얼하게 반영한 아바타를 구성하는 것이 가능한 정보 처리 시스템을 제공한다. 정보 처리 시스템은 유저의 심박 변동율을 포함하는 바이탈 데이터를 취득하고, 취득된 바이탈 데이터를, 통신 네트워크를 통해서 리얼타임으로 송신하는 단말 장치와, 단말 장치로부터 송신된 바이탈 데이터를 처리하는 정보 처리 서버를 구비한다. 정보 처리 서버는 바이탈 데이터를 기억하고, 심박 변동율에 기초하여, 유저의 상태를 추정하고, 추정된 결과가 반영된 아바타를 표시하기 위한 표시용 데이터를 작성하고, 통신 네트워크를 통해서 표시용 데이터의 송신 요구를 수신했을 경우에, 표시용 데이터를 해당 요구원으로 송신한다.