| Veröffentlichte Version Download ( PDF | 1MB) |
A Living Lab Architecture for Reproducible Shared Task Experimentation
Breuer, Timo und Schaer, Philipp (2021) A Living Lab Architecture for Reproducible Shared Task Experimentation. In: Information between Data and Knowledge. Schriften zur Informationswissenschaft, 74. Werner Hülsbusch, Glückstadt, S. 348-362. ISBN 978-3-86488-172-5.Veröffentlichungsdatum dieses Volltextes: 18 Apr 2021 12:40
Buchkapitel
DOI zum Zitieren dieses Dokuments: 10.5283/epub.44953
Zusammenfassung
No existing evaluation infrastructure for shared tasks currently supports both reproducible on- and offline experiments. In this work, we present an architecture that ties together both types of experiments with a focus on reproducibility. The readers are provided with a technical description of the infrastructure and details of how to contribute their own experiments to upcoming evaluation tasks.
Beteiligte Einrichtungen
Details
| Dokumentenart | Buchkapitel |
| ISBN | 978-3-86488-172-5 |
| Buchtitel: | Information between Data and Knowledge |
|---|---|
| Verlag: | Werner Hülsbusch |
| Ort der Veröffentlichung: | Glückstadt |
| Sonstige Reihe: | Schriften zur Informationswissenschaft |
| Band: | 74 |
| Seitenbereich: | S. 348-362 |
| Datum | 2021 |
| Zusätzliche Informationen (Öffentlich) | Session 6: Emerging Technologies |
| Institutionen | Sprach- und Literatur- und Kulturwissenschaften > Institut für Information und Medien, Sprache und Kultur (I:IMSK) > Lehrstuhl für Medieninformatik (Prof. Dr. Christian Wolff) Informatik und Data Science > Fachbereich Menschzentrierte Informatik > Lehrstuhl für Medieninformatik (Prof. Dr. Christian Wolff) |
| Stichwörter / Keywords | reproducibility; evaluation infrastructure; shared tasks |
| Dewey-Dezimal-Klassifikation | 000 Informatik, Informationswissenschaft, allgemeine Werke > 020 Bibliotheks- und Informationswissenschaft |
| Status | Veröffentlicht |
| Begutachtet | Ja, diese Version wurde begutachtet |
| An der Universität Regensburg entstanden | Nein |
| URN der UB Regensburg | urn:nbn:de:bvb:355-epub-449533 |
| Dokumenten-ID | 44953 |
Bibliographische Daten exportieren
Nur für Besitzer und Autoren: Kontrollseite des Eintrags
Downloadstatistik
Downloadstatistik