In einer Zeit, in der sich die Technologie stetig weiterentwickelt und den Zugang zu Informationen verändert, passen sich die Bibliotheken an das sich wandelnde digitale Zeitalter an, in dem künstliche Intelligenz (KI) eine zentrale Rolle spielt. KI-Tools revolutionieren die Rechercheplattformen der Bibliotheken, verbessern die Suchmöglichkeiten und führen die Nutzer:innen schnell zu den richtigen Informationen. Allerdings ist es wichtig, ein Gleichgewicht zwischen innovativen KI-Funktionalitäten und einem durchdachten Ansatz zu finden.
EBSCO nutzt die Möglichkeiten der generativen KI in Rechercheplattformen, um die Recherche zu verändern und ihre Effektivität zu verbessern. Wir bei EBSCO haben außerdem Grundsätze aufgestellt, die uns dabei helfen, einen verantwortungsvollen, ethischen und sicheren Umgang mit KI sicherzustellen.
Wir haben damit begonnen, Optionen für den Einsatz von KI in den Nutzeroberflächen unserer Bibliotheksrechercheplattformen EBSCO Discovery Service (EDS) und EBSCOhost zu testen und zu entwickeln. Eines dieser Projekte dreht sich um eine neue Funktionalität namens „AI Insights“.
Was ist „AI Insights“?
EBSCOs „AI Insights“ ist eine generative KI-Funktionalität, die die drei bis fünf wichtigsten Punkte eines Artikels zusammenfasst, so dass Nutzer:innen dessen Relevanz für ihre Recherche schnell einschätzen können. Das Feature ist über einen Button in den neuen EBSCO-Oberflächen von EBSCO Discovery Service und der EBSCOhost-Rechercheplattform zugänglich und stellt eine wertvolle Ergänzung zu Abstracts sowie Themengebieten und Klassifizierungen dar. Die „AI Insights“ sind als KI-generierte Inhalte gekennzeichnet und mit einem Hinweis (Disclaimer) versehen, der die Nutzer:innen auffordert, die Präzision und Richtigkeit der Inhalte vor der Nutzung zu überprüfen.
Der Beta-Test von „AI Insights“
Zwischen April und Mai 2024 wurde von EBSCO eine Beta-Testversion von „AI Insights“ für eine Gruppe von 50 Bibliotheken freigegeben. Außerdem wurde eine Nutzerumfrage mit 20 Endnutzer:innen durchgeführt. Im Juni 2024 fanden Fokusgruppendiskussionen mit kleinen Gruppen teilnehmender Kund:innen statt, die die Beta-Version testeten.
Welches Feedback hat EBSCO erhalten?
Den Gesamteindruck des „AI Insights“-Features bewerteten die Befragten wie folgt:
- 20 % sehr positiv
- 41 % eher positiv
- 15 % neutral
- 20 % eher negativ
- 4 % sehr negativ
Die Umfrage unter den Endnutzer:innen ergab Folgendes:
- 96% der Nutzer:innen, die sich selbst als „effizient Suchende“ („efficiently Seekers“) einstuften, fanden „AI Insights“ sehr nützlich.
- 85% der Nutzer:innen, die sich selbst als „Recherche-Enthusiast:innen“ („Research Enthusiasts“) einstuften, fanden „AI Insights“ nützlich.
- 20% der Nutzer:innen, die sich als sehr erfahrene Forschende („Power Researchers“) einstuften, bewerteten „AI Insights“ als neutral.
Zusätzlich waren 85% der Endnutzer:innen der Meinung, dass „AI Insights“ einen signifikant positiven Einfluss auf die Arbeitsabläufe von Nutzer:innen haben würde.
In den positiven Rückmeldungen wurde angegeben, dass „AI Insights“ eine nützliche Ergänzung zu den Abstracts sind, die Effizienz der Recherche erhöhen und leichter zu lesen sind als die meisten Zusammenfassungen. Dies sei eine großartige Möglichkeit, um neuen Studierenden, Forschenden und anderen Nutzer:innen das Verständnis komplexer wissenschaftlicher Werke zu erleichtern. Einige Teilnehmende des Beta-Tests schätzten die Möglichkeit, „AI Insights“ für Artikel, die in anderen Sprachen verfasst wurden, auf Englisch lesen zu können. Andere wiederum sahen es als eine Möglichkeit an, sie zur Vermittlung von Informationskompetenz für Nutzer:innen zu nutzen.
„I see an application for various early stages of the research process such as determining keywords, subtopics, narrowing and broadening topics, creating outlines, etc.” – Bibliothekar:in; Beta-Tester:in
Die Befragten betonten, dass „AI Insights“ dazu beitragen kann, den Rechercheprozess zu beschleunigen, da das Feature eine schnelle Bewertungsmöglichkeit für Artikel bereitstellt. Dieser Vorteil wurde sowohl von Studierenden als auch fortgeschrittenen Forschenden sehr geschätzt, die die Zeitersparnis durch das Herausfiltern von Artikeln, die für ihre Untersuchung irrelevant sind, zu schätzen wussten.
„I would perform more research. I can quickly find which texts I need; I'm not wasting time reading texts I can't use ... it's making my research more productive and efficient. Instead of taking hours to find the perfect source, here it takes me minutes.” – Erfahrene:r Forschende:r
Einige unerfahrene Forschende waren eher dazu geneigt, „AI Insights“ direkt auf ihre Untersuchung anzuwenden, ohne vorher die Quelle zu konsultieren. Einige Dozent:innen waren unsicher über die Vorteile von „AI Insights“ gegenüber verfügbarer Zusammenfassungen.
„It's a nice overview, I just don't know that it's more helpful than the summary that's typically included with the article. I'd need to click into the article to get more information on the size of the study, how many students it included, was it secondary or undergraduate, etc.“ – Dozent:in/Fakultätsmitarbeitende:r
Dies wird durch wissenschaftlichen Erkenntnisse gestützt, die darauf hindeuten, dass KI ein höheres Level an Informationskompetenz erfordert. Bibliothekar:innen aus Schulen und wissenschaftlichen Bibliotheken, die am Beta-Test teilnahmen, sahen dieses Risiko voraus, aber es zeigt auch einen Vorteil auf, der in den Rückmeldungen häufig genannt wurde: dass die „AI Insights“-Funktionalität einen „lehrbaren Moment“ für die Anfänge der KI bietet und bei der Vermittlung von Informationskompetenz unterstützen kann.
Die Beta-Tester:innen zeigten eine unterschiedliche Toleranz gegenüber Ungenauigkeiten der generativen KI. Einige Fokusgruppenteilnehmende aus Forschungsbibliotheken gaben an, dass generative KI nicht den Bedürfnissen ihrer Nutzer:innen entspräche, solange sie nicht immer genau und präzise sei, und andere gaben an, dass sie die „AI Insights“-Funktionalität nicht aktivieren könnten, solange die Resultate nicht zitierfähig oder reproduzierbar seien. Wir stellten fest, dass die Resultate von „AI Insights“ mit Genauigkeitsproblemen hauptsächlich solche waren, die andere Referenzen als Haupttext zitierten, wie z. B. Buch- und Literaturrezensionen. Die meisten Befragten und Teilnehmenden der Fokusgruppen waren nicht so besorgt, da sie das Risiko negativer Auswirkungen für ihre Bibliotheksnutzer:innen als eher gering einschätzten. Viele Teilnehmende der Fokusgruppen wiesen auf den bereits erwähnten Vorteil hin, dass „AI Insights“ den Lehrkräften ermöglicht, KI-Kenntnisse und Informationskompetenz in ihren Unterricht einzubeziehen. Sie können die Studierenden über die gelegentlichen Unzulänglichkeiten der generativen KI-Technologien aufklären – ein entscheidender Punkt, den viele von ihnen erst noch lernen müssen.
Welche Verbesserungen empfahlen die Beta-Tester:innen für „AI Insights“?
Abgesehen von der verbesserten Genauigkeit für Referenzmaterialien (wie z. B. Rezensionen) schlugen einige Beta-Tester:innen vor, dass „AI Insights“ aus Gründen der Konsistenz stets die gleiche Anzahl von Erkenntnissen generieren sollte. Andere schätzten es wiederum, dass die Anzahl je nach Ausgangstext variierte. Einige wünschten sich reproduzierbare Erkenntnisse zur leichteren Verifizierung in wissenschaftlichen Arbeiten, während andere die Flexibilität schätzten, die jeweiligen Erkenntnisse zur besseren Formulierung neu zu generieren. Transparenz bei der Implementierung von „AI Insights“ war ebenfalls sehr wichtig. Auch die Transparenz der Funktionsweise des Tools war wichtig. Die Bibliothekar:innen wünschten sich Klarheit darüber, warum die Funktionalität für einige Artikel verfügbar war und für andere nicht. Dieses Verständnis würden ihnen helfen, „AI Insights“ effektiver zu lehren und zu nutzen.
Was hat EBSCO aus diesem Feedback gelernt und wie werden diese Rückmeldungen die Roadmap für „AI Insights“ beeinflussen?
Die Produktmanager von EBSCO haben aus dem Feedback des Beta-Tests wertvolle Erkenntnisse gewonnen, die zeigen, dass die Bibliotheken unterschiedlich mit KI-Tools umgehen. Wenn „AI Insights“ künftig für die Nutzung in EDS- und EBSCOhost-Rechercheplattformen veröffentlicht wird, können die Kund:innen daher selbst entscheiden, ob sie dieses Feature aktivieren möchten oder nicht (standardmäßig wird es deaktiviert sein). Eine wichtige Erkenntnis ist, dass Bibliothekar:innen dabei unterstützt werden sollten, KI-Kenntnisse an ihre Nutzer:innen zu vermitteln. Wir werden dies durch einen Artikel auf EBSCO Connect mit häufig gestellten Fragen und Materialien zu KI bei EBSCO unterstützen.
EBSCO wird das Feature „AI Insights“ kontinuierlich weiterentwickeln und dabei Rückmeldungen und Verbesserungswünsche einbeziehen. „AI Insights“ wird voraussichtlich Ende 2024 verfügbar sein. Weitere Details werden folgen.
Möchten Sie mehr erfahren?
EBSCO hat im Juni 2024 das „EBSCO KI-Beta-Programm“ ins Leben gerufen. Wir werden in naher Zukunft weitere Zusammenfassungen wie diese über die Ergebnisse veröffentlichen. Im Jahr 2025 werden wir außerdem einen wissenschaftlichen Forschungsartikel darüber veröffentlichen, wie sich unsere Arbeit und unsere Ergebnisse in die breitere Wissenschaft der KI im wissenschaftlich-akademischen Bereich einfügen.
