Direction de recherche : Bernadette BOUCHON-MEUNIER

Co-encadrement : DETYNIECKI Marcin

Recherche d'Images par similarité de contenus régionaux

Le domaine de la recherche d'images par le contenu (ou CBIR pour Content-Based Image Retrieval) s'est ouvert depuis une vingtaine d'années dans l'espoir de pouvoir interroger des collections de documents visuels par l'extraction et la comparaison automatiques de vecteurs caractéristiques. A partir des seules données numériques d'une image - c'est-à-dire ses pixels - on extrait un certain nombre de signatures visuelles (couleur, texture, forme). Ces signatures servent de base à la comparaison entre d'une part une requête visuelle et d'autre part les images d'une base de données.
 Notre approche consiste à utiliser un algorithme de segmentation comme traitement préalable à l'extraction de descripteurs visuels. Des régions définies comme des zones visuellement homogènes et correspondant à des objets sont découpées automatiquement dans l'image. Des descripteurs servent ensuite à représenter chaque région. Ces objets peuvent alors servir de requête, et permettent à l'utilisateur de spécifier son intérêt, et d'obtenir des résultats plus pertinents qu'une comparaison globale.
 Pour comparer les descripteurs régionaux et ainsi mesurer la similarité entre régions, nous proposons d'étudier l'utilisabilité des mesures de comparaison définies par Tversky. Ces mesures ont été étendues aux ensembles graduels de caractéristiques tels qu'ils sont constitués par les descripteurs visuels du CBIR. Elles permettent de modéliser des comportements comparatifs plus variés que les mesures de distance. Elles s'adaptent aussi à des descripteurs différents et permettent d'obtenir une mesure générique et intuitive de la similarité. De plus, nous proposons une méthodologie adaptée à la recherche par le contenu segmenté. Cette méthodologie fournit les mesures et les opérateurs nécessaires à la construction de requêtes basées sur de multiples exemples régionaux. Nous proposons aussi d'utiliser ces mesures dans le cadre étendu d'une mesure de similarité entre configurations spatiales de régions.
Enfin, nous montrons l'applicabilité de ces mesures dans le cadre d'une plateforme de recherche d'images. Cette plateforme met en oeuvre la méthodologie proposée, et permet la mise en compétition de plusieurs mesures. Elle est aussi ouverte à la communication avec d'autres systèmes. Nous avons exploité cette dernière propriété dans le cadre d'une collaboration avec un moteur de recherche par le texte.

Publications 2004-2010

• 2010
  • M.‑J. Lesot, C. Bouchard, M. Detyniecki, J.‑F. Omhover : “Product shape and emotional design: an application to perfume bottles”, Proceedings of the International Conference on Kansei Engineering and Emotion Research (KEER'2010), Paris, France (2010)
• 2006
  • J.‑F. Omhover, M. Detyniecki : “Fast gradual matching measure for image retrieval based on visual similarity and spatial relations”, International Journal of Intelligent Systems, vol. 21 (7), pp. 711-723, (Wiley) (2006)
  • J.‑F. Omhover, M. Rifqi, M. Detyniecki : “Ranking Invariance Based on Similarity Measures in Document Retrieval”, Adaptive Multimedia Retrieval: User, Context, and Feedback, AMR'05, vol. 3877, Lecture Notes in Computer Science, Glasgow, United Kingdom, pp. 55-64 (2006)
  • J.‑F. Omhover, M. Detyniecki : “Image retrieval by composition of regions”, chapter in Modern Information Processing: From Theory to Applications, pp. 429-440, (Elsevier), (ISBN: 978-0444520753) (2006)
• 2005
  • J.‑F. Omhover, B. Bouchon‑Meunier : “Equivalence entre mesures de similarité floues: application à la recherche d’images par le contenu”, Actes du VI° Congrès Européen de Systémique, vol. 5, Revue Française de Systémique (Res-Systematica), Paris, France (2005)
  • J.‑F. Omhover, N. Labroche, B. Bouchon‑Meunier : “Sensorial Approaches To Multimedia Information Retrieval”, 17^th IMACS World Congress on Scientific Computation, Applied Mathematics and Simulation, Paris, France (2005)
• 2004
  • J.‑F. Omhover : “Recherche d’Images par similarité de contenus régionaux”, soutenance de thèse, soutenance 06/12/2004, direction de recherche Bouchon-meunier, Bernadette, co-encadrement : Detyniecki, Marcin (2004)
  • J.‑F. Omhover, M. Detyniecki : “Combining Text and Image Retrieval”, EUROFUSE Workshop on Data and Knowledge Engineering, Warsaw, Poland, pp. 388-398 (2004)
  • J.‑F. Omhover, M. Detyniecki : “Image retrieval by Regional content using Matrix Composition of Fuzzy Relations”, International Workshop on Adaptive Multimedia Retrieval - AMR'2004 (part of ECAI'2004), Valencia, Spain, pp. 103-113 (2004)
  • J.‑F. Omhover, M. Detyniecki, B. Bouchon‑Meunier : “A Region-Similarity-Based Image Retrieval System”, IPMU 2004 - 10^th International Conference on Information Processing and Management of Uncertainty in Knowledge-based Systems, Perugia, Italy, pp. 1461-1468 (2004)
  • J.‑F. Omhover, M. Detyniecki : “STRICT: an Image Retrieval Platform for Queries Based on Regional Content”, CIVR 2004 - 3^rd International Conference on Image and Video Retrieval, vol. 3115, Lecture Notes in Computer Science, Dublin, Ireland, pp. 473-482, (Springer) (2004)
  • J.‑F. Omhover, M. Detyniecki : “Queries by visual content using fuzzy similarity measures on regional descriptions”, European Symposium on Intelligent Technologies, Hybrid Systems and their implementation on Smart Adaptive Systems - EUNITE'2004, Jena, Germany, pp. 43-44 (2004)
  • J.‑F. Omhover, M. Detyniecki, M. Rifqi, B. Bouchon‑Meunier : “Ranking invariance between fuzzy similarity measures applied to image retrieval”, IEEE International Conference on Fuzzy Systems, FUZZ-IEEE 2004, Budapest, Hungary, pp. 1367-1372 (2004)