Contribution of colour in guiding visual attention and in a computational model of visual saliency

Contribution de la couleur dans l'attention visuelle et un modèle de saillance visuelle

Shahrbanoo Talebzadeh Shahrbabaki (1)

1 GIPSA-lab - Grenoble Images Parole Signal Automatique

The studies conducted in this thesis focus on the role of colour in visual attention. We tried to understand the influence of colour information on the eye movements while observing videos, to incorporate colour information into a model of visual saliency. For this, we analysed different characteristics of eye movements of observers while freely watching videos in two conditions: colour and grayscale videos. We also have compared the main regions of regard of colour videos with those of grayscale. We observed that colour information influences only moderately, the eye movement characteristics such as the position of gaze and duration of fixations. However, we found that colour increases the number of the regions of interest in video stimuli. Moreover, this varies across time. Based on these observations, we proposed a method to compute colour saliency maps for videos. We have incorporated colour saliency maps in an existing model of saliency.

Les études menées dans cette thèse portent sur le rôle de la couleur dans l'attention visuelle. Nous avons tenté de comprendre l'influence de l'information couleur dans les vidéos sur les mouvements oculaire, afin d'intégrer les attributs couleur dans un modèle de saillance visuelle. Pour cela, nous avons analysé différentes caractéristiques des mouvements oculaires d'observateurs regardant librement des vidéos en deux conditions: couleur et niveaux de gris. Nous avons également comparé les régions principales de regard sur des vidéos en couleur avec celles en niveaux de gris. Il est apparu que les informations de couleur modifient légèrement les caractéristiques de mouvement oculaire comme la position de l'œil et la durée des fixations. Cependant, nous avons constaté que la couleur augmente le nombre de régions de regard. De plus, cet influence de la couleur s'accroît au cours du temps. En nous appuyant sur ces résultats, nous avons proposé une méthode de calcul des cartes de saillance couleur. Nous avons intégré ces cartes dans un modèle de saillance existant.

Mots clés: Visual attention; Spatio-temporal saliency; Model of vision; Color saliency; Classification; Parallel computing

Mots clés: Attention visuelle; Saillance spatio-temporel; Modèle de vision; Saillance de couleur; Classification; Calcul paralèlle

Domaines: Traitement du signal et de l'image [eess.SP]

Shahrbanoo Talebzadeh Shahrbabaki. Contribution of colour in guiding visual attention and in a computational model of visual saliency. Signal and Image processing. Université Grenoble Alpes, 2015. English. ⟨NNT : 2015GREAT093⟩. ⟨tel-01241487⟩