PROBLEM TO BE SOLVED: To provide a visual line detection device and visual line detection method that can correctly detect visual line directions of users.SOLUTION: An HUD (Visual line direction detection) device 3 comprises: an IR light source 27 that applies IR light 29 using an IR light source 27; a projection unit that reflects the IR light upon wind shield 9 or combiner, and includes a cold mirror 21 projecting the IR light toward a direction having an eye 15 of a user 13; an image acquisition unit that acquires an IR camera image of a range containing the eye from an IR camera 5 photographing the eye from a direction different from a direction where the IR light is incident into the eye; a recognition unit that recognizes a pupil and Purkinje image in the IR camera image acquired by the image acquisition unit; and a visual line direction detection unit that detects a visual line direction of the user from a position relation between the pupil and the Purkinje image recognized by the recognition unit.SELECTED DRAWING: Figure 1【課題】ユーザの視線方向を正確に検出できる視線方向検出装置、及び視線方向検出システムを提供する。【解決手段】HUD(視線方向検出)装置3は、赤外光源27を用いて赤外光29を照射する赤外光源27と、赤外光を、ウインドシールド9又はコンバイナで反射し、ユーザ13の目15に向う方向に投射するコールドミラー21を含む投射ユニットと、赤外光が目に入射する方向とは異なる方向から目を撮影する赤外カメラ5から、目を含む範囲の赤外カメラ画像を取得する画像取得ユニットと、画像取得ユニットが取得した赤外カメラ画像において、瞳孔及びプルキニエ像を認識する認識ユニットと、認識ユニットで認識した瞳孔及びプルキニエ像の位置関係から、ユーザの視線方向を検出する視線方向検出ユニットと、を備える。【選択図】図1