SINIR: Simulating INteractive Information Retrieval

Das Hauptvorhaben des Projekts besteht im Entwurf und der Entwicklung eines Open-Source-Simulationsframeworks zur Evaluation der Suchfunktion digitaler Bibliotheken unter Verwendung von Kosten-Nutzen-Abschätzungen für das verhalten simulierter Benutzermodelle. Die Anwendung des Frameworks soll im Einsatz in einer realen digitalen Bibliothek demonstriert werden. SINIR wird gefördert im Rahmen des DFG-Programms für Wissenschaftliche Literaturversorgungs- und Informationssysteme (LIS).

Der Zugriff auf digitale Bibliotheken erfolgt i.d.R. über interaktive Benutzeroberflächen mit Suchfunktionen. Die Suchmaschinen selbst sowie die hinterlegten Inhalte werden ständig aktualisiert, um bessere Ergebnisse liefern zu können. Während Webdienste mit großer Nutzerbasis A/B-Tests zur Evaluation der Veränderungen heranziehen können, ist dieses Verfahren für digitale Bibliotheken mit ihren speziellen Inhalten und geringerer Nutzerzahl nicht realisierbar.

Um A/B-Tests auch im Kontext digitaler Bibliotheken realisieren zu können, sollen Nutzerinteraktionen wie Anfragen, Klicks und sonstige Aktivitäten mittels eines Simulationsframeworks generiert werden. Auf diese Weise können beliebige Änderungen am Front- und Backend des Systems mit Hilfe verschiedener Nutzermodelle evaluiert werden. Das Training der Modelle kann auf Basis echter Nutzerinteraktionen aus Logs erfolgen und zusätzlich durch künstlich erzeugte Verhaltensmuster ergänzt werden.

SINIR wird in Kooperation mit dem Data Science-Lehrstuhl der Universität Passau sowie dem Leibniz-Informationszentrum Wirtschaft (ZBW) durchgeführt.