PROBLEM TO BE SOLVED: To provide an image tagging device and method on the basis of multi modality.SOLUTION: An image tagging device includes score generation means for generating a plurality of groups of first scores for all tags in a tag dictionary to an inquiry image with a training image and a plurality of types of modality of the image, later stage integration means for integrating the obtained plurality of groups of scores to acquire the final scores for all the tags, and tag selection means for selecting one or more tags having relatively large scores as the tags of the inquiry image on the basis of the final scores of all the tags. According to an embodiment of the present invention, a plurality of types of modality can be effectively integrated, and a result of image tagging with accuracy and good robustness can be acquired.COPYRIGHT: (C)2015,JPO&INPIT【課題】マルチモダリティに基づく画像タグ付け装置及び方法を提供する。【解決手段】画像タグ付け装置は、トレーニング画像及び画像の複数のモダリティにより、照会画像に対し、タグ辞書における全てのタグについての複数組の第1の得点を生成する得点生成手段と、得られた複数組の得点を融合し、全てのタグについての最終得点を取得する後期融合手段と、全てのタグの最終得点に基づいて、比較的大きい得点を有する1つ又は複数のタグを照会画像のタグとして選択するタグ選択手段と、を含む。本発明の実施例によれば、複数のモダリティを効果的に融合でき、ロバスト性のよく、且つ正確な画像タグ付けの結果を取得できる。【選択図】図1
