HOAD: Data Analytics für mehr Transparenz bei Open-Access-Transformationsverträgen

3.1 Bestandsaufnahme und Anforderungsanalyse

Zu Beginn des Projekts wurden zehn Handlungsempfehlungen und Richtlinien sowie die beiden öffentlich zugänglichen DEAL-Verträge systematisiert. Insgesamt wurden 72 verschiedene Merkmale identifiziert. Am häufigsten genannt wurden die Lizenzierung von Open-Access-Artikeln unter der Creative-Commons-Variante CC BY sowie die öffentliche Einsehbarkeit der Verträge. Ein besonderes Augenmerk soll hier auf die Kostenstruktur mit ihrem Preismodell und die allgemeinen Vertragskonditionen gelegt werden. Darüber hinaus bestätigte sich die Forderung nach umfangreichen Metadaten, die der Verlag über Crossref bereitstellen soll, sowie die Verlinkung zwischen Artikeln und der ORCID.

Die Inhaltsanalyse haben wir ergänzt durch semi-strukturierte Interviews mit Konsortialführungspersonen aus der Arbeitsgemeinschaft Deutscher, Österreichischer und Schweizer Konsortien (GASCO). Ihnen wurde zu diesem Zwecke ein voll funktionaler Pilot eines interaktiven Dashboards präsentiert, welches das Aufkommen und die Entwicklung des hybriden Open Access für rund 5 000 Journale datenanalytisch aufbereitet (HOAD-Prototyp).^[15] Es hat sich gezeigt, dass die Konsortialführungskräfte vor dem Verhandlungstermin mit den Verlagen das Dashboard für eine Übersicht des Publikationsaufkommens und der verschiedenen Lizenztypen eines Verlages nutzen würden. Hierbei ist die Intensität ihrer Nutzung von der Qualität der Informationen abhängig, die sie bereits von den Verlagen erhalten und auf anderen Plattformen wie Web of Science und dem Open Access Monitor eingesehen haben. Die Konsortialführungskräfte sind besonders an einer Darstellung der prozentualen Steigerung des hybriden Publizierens interessiert. Weitere Kennzahlen, die der Analysedienst nach Meinung der Interviewpartnerinnen und -partner darstellen sollte, sind der Transformationsgrad, das Publikationsaufkommen und das Umsatzvolumen. Schlussendlich waren sich die Konsortialführungskräfte darin einig, dass für die Gestaltung der Dashboard-Oberfläche eine transparente und einfache Sprache eingesetzt werden soll, um die Nutzung des Dashboards möglichst niedrigschwellig und attraktiv zu gestalten.

Im Sinne einer partizipativen Entwicklungsstrategie wurde während der virtuellen Open Access Tage 2020 ein Hands-On-Lab zur Unterstützung der Anforderungsanalyse durchgeführt. Hierbei wurde deutlich, dass die Überprüfung von Verlagsmetadaten durch Bibliotheken und Konsortien ein aufwendiger manueller Prozess ist und die Empfehlungen zum Verlagsreporting im Rahmen von Transformationsverträgen hingegen nur generisch gehalten sind. In der Konsequenz überprüfen nur wenige Einrichtungen die verlagsseitigen Metadaten der von ihnen geförderten Open-Access-Artikel.^[16] Als Ergebnis des Hands-On-Lab entstand die Anforderung an ein Werkzeug, mit dem sich die Vollständigkeit und Qualität von Metadaten automatisch überprüfen lassen. Weil belastbare Metadaten über institutionell geförderte Open-Access-Artikel wesentlich sind, haben wir diese Anforderung im Projektverlauf aufgegriffen. Damit arbeitet das Projekt an zwei komplementären Datenanalysediensten, deren Entwicklungsstand wir nachfolgend beschreiben:

• Open-Access-Metadatenschnelltest

• Zeitschriftenportfolio-spezifische Dashboards über den Transformationsgrad hybrider Journale

3.2 Open-Access-Metadatenschnelltest

Abb. 1:

Screenshot E-Mail-Bericht Open-Access-Metadatenschnelltest

Beim Open-Access-Metadatenschnelltest^[17] handelt es sich um einen datenanalytischen Webdienst, mit dem Bibliotheken und Konsortien automatisch die Metadatenabdeckung und -qualität überprüfen können. Der Open-Access-Metadatenschnelltest erlaubt die Überprüfung von bis zu 1 000 DOIs pro Session, welche über ein Webformular eingereicht werden. Das Werkzeug liefert ein Untersuchungsergebnis innerhalb von 30 Minuten per E-Mail (siehe Abbildung 1). Im Anhang der Ergebnis-E-Mail befindet sich zudem eine umfassende Datenanalyse als Exceltabelle, die je Artikel die ausgewerteten Metadaten beinhaltet.

Konkret ausgewertet werden die Metadaten der DOI-Registrierungsagentur Crossref, und zwar bezüglich

• Creative-Commons-Lizenzierung bezogen auf die Verlagsversion,

• Verweis auf verlagsseitige Angebote für das Text und Data Mining,

• Förderinformationen,

• ORCID,

• offener Zitationsdaten und Abstracts.

Eine umfassende Vorabprüfung untersucht Aspekte bezogen auf die Registrierung der DOI und Metadaten sowie mögliche Duplikate bei der Einreichung.

Im Kontext von Antragstellungen im Rahmen des DFG-Förderprogramms „Open-Access-Publikationskosten“ wurden deutsche Bibliotheken und Informationseinrichtungen über Webinare eingeladen, den Open-Access-Metadatenschnelltest zu testen und in ihre Workflowüberlegungen einzubeziehen. Insgesamt haben bis Mai 2021 über 150 Bibliotheken und Informationseinrichtungen aus Deutschland, der Schweiz und Österreich den Schnelltest mindestens einmal verwendet. Aus der Testphase haben sich technische und funktionale Anforderungen ergeben, welche im Zuge der Vorbereitung eines internationalen Releases im November 2021 aufgegriffen wurden. Implementiert als quelloffenes R-Paket wird der Open-Access-Metadatenschnelltest über Clouddienste automatisch bereitgestellt. Als Datenquelle wird die REST-API von Crossref genutzt. Ein Rahmenvertrag als Teil des kostenpflichtigen Angebots Crossref Metadata Plus^[18] sichert einen hochperformanten Zugang zur Webschnittstelle. Der E-Mail-Bericht wird aus einem parametrisierten R Markdown Notebook heraus generiert.

3.3 Zeitschriftenportfolio-spezifische Dashboards

Ziel des Projekts ist es, das prototypische Dashboard zugunsten spezifischer Dashboards für konsortiale Open-Access-Transformationsverträge in Deutschland weiterzuentwickeln. Seit Beantragung des Projekts 2018 hat sich die diesbezügliche Datenbasis verbessert, was zu einem umfassenden Re-Design des Prototypen hinsichtlich im folgenden ausgeführten Aspekte geführt hat.

3.3.2 Publikationsdaten

Zur Ermittlung des Publikationsaufkommens nutzte bereits der HOAD-Prototyp Crossref-Metadaten. Aus Sicht des Datenmanagements hat sich allerdings das Retrieval über die Crossref API als wenig zielführend erwiesen. Gründe sind zum einen die wechselhafte Performance, zum anderen fehlende Abfrageparameter. Um diese Hindernisse zu umgehen, hat die SUB Göttingen den Crossref Metadata Plus Service abonniert. Es besteht dadurch Zugriff auf monatlich aktualisierte Dumps, die wir in ein cloud-basiertes Data Warehouse auf Grundlage von Google BigQuery überführt haben. Diese hochperformante Analyseumgebung wurde an der SUB Göttingen bereits für die Datenanalyse von Unpaywall-Daten genutzt,^[21] welche damit ebenso als Datengrundlage zur Bemessung des Publikationsaufkommens in hybriden Journalen zur Verfügung stehen.

Abb. 2:

Designstudie HOAD Dashboard. Dargestellt wird das Publikationsaufkommen bundesweiter Open-Access-Transformationsverträge

3.4 Transformationsverträge

Mittlerweile liegt eine Designstudie auf Grundlage der Daten über Zeitschriftenportfolios des Open-Access-Monitors vor. Abbildung 2 zeigt eine Gesamtsicht auf 18 Portfolios nationaler Open-Access-Transformationverträge in Deutschland mit hybriden Journalen. Die Gesamtsicht illustriert neben der Anzahl der Journale je Portfolio auch die Anzahl der Artikel, die die Journale insgesamt veröffentlicht haben. Im Drei-Jahreszeitraum 2018–2020 publizierten die Journale rund 1,9 Millionen Artikel, wobei rund 10 % der Artikel im hybriden Open Access verfügbar gemacht wurden. Rund 11 % der Artikel sind ausschließlich über Open-Access-Repositorien (Green OA) frei zugänglich. Eine solche zeitschriftenbezogene Sicht auf das Open-Access-Publikationsaufkommen ergänzt damit institutionell angelegte Monitoringansätze, welche auf den Open Access-Anteil einer Einrichtung abzielen.