Direkt zum Inhalt

Image Similarity Search

Beschreibung

Die Bildähnlichkeitssuche unterstützt die User des europäischen Kultur und Wissenschaftsportals “Europeana” bei der Suche nach Bildern mit verwandten Bildinhalten. Das Tool basiert auf Open Source Technologien. Die MPEG-7 Deskriptoren werden mittels LIRE Feature Extrahierung berechnet und der Algorithmus für die Ähnlichkeitssuche greift auf die Bibliothek Melampo zurück. Kern des Retrieval-Prozesses ist die Berechnung von Ähnlichkeiten zwischen den eingegebenen und gefundenen Bildern. Eingesetzt wird dafür die Kosinus-Ähnlichkeit, die auf der Basis von Farb- und Formfeatures der Originalbilder (MPEG-7 Deskriptoren Scalable Color, Color Layout und Edge Histogram) berechnet wird.

AIT Beitrag

Die hier vorgestellte Bildähnlichkeitssuche wurde im Rahmen des Projekts ASSETS von ISTI-CNR entwickelt, um die User-Experience bei der Suche in Europeana zu verbessern. Im Projekt Europeana Creative wird dieses Service erweitert, um das punktgenaue Finden von geeignetem Content und damit die Kreativität professioneller Designer zu unterstützen.
Im Zusammenhang mit dem Projekt Europeana Creative konzentrieren sich die laufenden Forschungsaktivitäten auf die Wiederverwendung von Inhalten des kulturellen Erbes durch europäische VertreterInnen der Creative Industries. Verschiedene Kategorien von Objekten des kulturellen Erbes wurden zur Nutzung in diesem Zusammenhang ausgewählt. Die aktuelle Version des Suchalgorithmus bietet eine gute Treffgenauigkeit beim derzeit verwendeten Datensatz, bei einzelnen Bildtypen ist die Suchleistung für professionelle UserInnen allerdings noch nicht ausreichend.
Unser Ziel ist es, das Service in die Programmierschnittstellen (APIs) von Europeana zu integrieren und so für den Aufbau Domain-spezifischer Anwendungen nutzbar zu machen.

Demonstrator

Beim Öffnen der Demo wird ein Satz von zufällig ausgewählten Bildern angezeigt:

  • Klicken Sie auf "Refresh" am Ende der Seite, um einen neuen Satz Bilder anzuzeigen.
  • Der Link "similar" über dem Bild führt zu Bildern, die dem angezeigten Bild ähneln.
  • Nach erfolgter Suche kann der User mit den Links- und Rechtspfeilen durch die Ergebnisseiten navigieren.
  • Ein Klick auf das "Europeana Creative” Logo führt zurück zur ersten Seite.