PROBLEM TO BE SOLVED: To provide an image signal processing device and an electronic endoscope system capable of improving coloring of a saturation part of an image.SOLUTION: An image signal processing device includes: an image pick-up device for picking up a subject irradiated with predetermined narrow band light and outputting an image signal a color conversion part for converting the image signal into a primary color signal of R, G, and B a saturation determination part for determining whether or not the image signal is saturated and an image generation part for generating an image of the subject based on the primary color signal. The color conversion part has a first color matrix coefficient set so that a specific structure of the subject is emphasized by the narrow band light and a second color matrix coefficient set so that the strength of each primary color signal increases as a luminance value of a pixel of the image pick-up device increases. When it is determined that the image signal is not saturated, the color conversion is performed using the first color matrix coefficient. When it is determined that the image signal is saturated, the color conversion is performed using the second color matrix coefficient.COPYRIGHT: (C)2014,JPO&INPIT【課題】画像の飽和部の色づきを改善することが可能な画像信号処理装置及び電子内視鏡システムを提供すること。【解決手段】画像信号処理装置が、所定の狭帯域光を照射された被写体を撮像し画像信号を出力する撮像素子と、画像信号をR、G、Bの原色信号に色変換する色変換部と、画像信号が飽和しているか否かを判断する飽和判断部と、原色信号に基づいて被写体の画像を生成する画像生成部とを備え、色変換部は、狭帯域光によって被写体の特定構造が強調されるように設定された第1のカラーマトリクス係数と、各原色信号の強度が撮像素子の画素の輝度値の増加に伴って増加するように設定された第2のカラーマトリクス係数とを備え、画像信号が飽和していないと判断されたとき、第1のカラーマトリクス係数を用いて色変換し、画像信号が飽和していると判断されたとき、第2のカラーマトリクス係数を用いて色変換するよう構成する。【選択図】図5