Disclosed herein is method and system for evaluating semen quality. Plurality of images of stained semen sample are captured and analyzed for eliminating unusable images. Further, visible objects in the images are extracted and classified into sperm objects and non-sperm objects. The sperm objects are further classified into normal/abnormal sperm objects based on morphological characteristics of sperm objects, and a differential count of normal/abnormal sperm objects is determined. Subsequently, an aggregate count of the non-sperm objects is determined. Finally, a sperm quality index, indicative of quality of the semen sample, is computed based on morphological characteristics of sperm objects, differential count of normal/abnormal sperm objects, aggregate count of non-sperm objects and total motility estimate of semen sample. The method of present disclosure helps in accurate estimation of the semen quality, since the aggregate count of the non-sperm objects is considered as a crucial parameter for computing the semen quality index.L'invention concerne un procédé et un système d'évaluation de la qualité d'un sperme. Une pluralité d'images d'un échantillon de sperme coloré est capturée et analysée pour éliminer les images inutilisables. En outre, des objets visibles dans les images sont extraits et classés en objets spermatiques et objets non spermatiques. Les objets spermatiques sont ensuite classés en objets spermatiques normaux/anormaux sur la base de caractéristiques morphologiques d'objets spermatiques, et un comptage différentiel d'objets spermatiques normaux/anormaux est déterminé. Ensuite, un comptage global des objets non spermatiques est déterminé. Enfin, un indice de qualité de sperme, indiquant la qualité de l'échantillon de sperme, est calculé sur la base de caractéristiques morphologiques d'objets spermatiques, d'un comptage différentiel d'objets spermatiques normaux/anormaux, d'un comptage global d'objets non spermatiques et d'une estimation de la mot
