Symposium: „Film rechnen – Computergestützte Methoden in der Filmanalyse“

Das Thema Bild- und Bewegtbildanalyse gewinnt auch in der – bis dato stark auf Text fokussierten – Digital Humanities Community immer mehr an Bedeutung. So wurde etwa Anfang des Jahres eine dedizierte Arbeitsgruppe beim deutschsprachigen DH-Verband (DHd) gegründet.

Mit dem Symposium in Regensburg, am 3. Juli 2017, soll eine Bestandsaufnahme bestehender Ansätze zur computerbasierten Filmanalyse erfolgen und dabei Grenzen und Möglichkeiten solch digitaler Analyseverfahren diskutiert werden.

Programm

Eröffnung durch den Prodekan (Prof. Dr. Christian Wolff)

MANUEL BURGHARDT
Medieninformatik, Universität Regensburg
“Digitale Methoden für die Filmanalyse – Zwischen Berechnung und Exploration” Vortrag Manuel Burghardt Computerbasierte Filmanalyse

ADELHEID HEFTBERGER
Brandenburgisches Zentrum für Medienwissenschaften, Potsdam
“Computergestützte Analyse für die Filmgeschichte – Erfahrungen und Potentiale”

NIELS-OLIVER WALKOWSKI
Berlin-Brandenburgische Akademie der Wissenschaften
“Perspektiven der filmwissenschaftlichen Interpretierbarkeit von Ergebnissen computergestützter Farbanalyse”

MATTHIAS ZEPPELZAUER
Fachhochschule St. Pölten, Österreich
“Automated Analysis, Retrieval and Annotation of Video and Film”

Slides Matthias Zeppelzauer

Ressourcen und Projekte

Literatur

  1. Burghardt, M., Hafner, K., Edel, L., Kenaan, S., & Wolff, C. (2017). An Information System for the Analysis of Color Distributions in MovieBarcodes. In Proceedings of the 15th International Symposium of Information Science (ISI 2017).
  2. Burghardt, M., Kao, M., & Wolff, C. (2016). Beyond Shot Lengths – Using Language Data and Color Information as Additional Parameters for Quantitative Movie Analysis. In Book of Abstracts of the International Digital Humanities Conference (DH).
  3. Burghardt, M., & Wolff, C. (2016). Digital Humanities in Bewegung: Ansätze für die computergestützte Filmanalyse. In Book of Abstracts of the 3rd DHd Conference.
  4. Heftberger, A. (2012). Ask Not What Your Web Can Do For You – Ask What You Can Do For Your Web! Some Speculations about Film Studies in the Age of the Digital Humanities. In Frames Cinema Journal.
  5. Heftberger, A. (2014). Film archives and digital humanities – An impossible match? New job descriptions and the challenges of the digital era. In MedieKultur: Journal of media and communication research 30(57).
  6. Heftberger, A. (2012). Do Computers Dream of Cinema? Film Data for Computer Analysis and Visualisation. In Berry, D. M. (ed.): Understanding Digital Humanities, p. 210-223.
  7. Walkowski, N. & Pause, J. (2017). The Colorized Dead: Computerunterstützte Analysen der Farblichkeit von Filmen in den Digital Humanities am Beispiel von Zombiefilmen. Book of Abstracts DHd 2017 (Bern), S. 200-204.
  8. Zeppelzauer, M., Mitrovic, D., and Breiteneder, C., (2011). Cross-Modal Analysis of Audio Visual Film Montage. Proceedings of 20th International Conference on Computer Communications and Networks, Maui, USA.
  9. Mitrovic, D., Zeppelzauer, M., Zaharieva, M., and Breiteneder, C. (2011). Retrieval of VisualComposition in Film. Proceedings of the 12th International Workshop on Image Analysis for Multimedia Interactive Services, April 13-15, Delft, The Netherlands.
  10. Seidl, M., Zeppelzauer, M., and Breiteneder, C. (2010). A Study Of Gradual Transition Detection in Historic Film Material. In Proceedings of the ACM Multimedia 2010, Workshop – Electronic Heritage and Digital Art Preservation (eHeritage), pp. 13-18. Firenze, Italy.
  11. Zeppelzauer, M., Mitrovic, D. and Breiteneder, C. (2008). Analysis of Historical Artistic Documentaries. In Proceedings of the 9th International Workshop on Image Analysis for Multimedia Interactive Services, pages 201-206, Klagenfurt, Austria.
  12. Zaharieva, M., Zeppelzauer, M., Breiteneder, C., and Mitrovic, D. (2010). Camera Take Reconstruction. In Proceedings of IEEE Multimedia Modeling Conference, Jan 6-8, 2010, Chongqing, China, pp. 379-388.
  13. Zeppelzauer, M., Zaharieva, M., Mitrovic, D., and Breiteneder, C. (2010). A Novel Trajectory Clustering Approach for Motion Segmentation. In Proceedings of Multimedia Modeling Conference, pp. 433-443. Jan 6-8, (2010), Chongqing, China.
  14. Mitrovic D., Hartlieb, S., Zeppelzauer, M., and Zaharieva, M. (2010). Scene Segmentation in Artistic Archive Documentaries. HCI in Work and Learning, Life and Leisure, LNCS, vol. 6389, pp 400-410. Springer, Berlin/Heidelberg.
  15. Zaharieva, M., Zeppelzauer, M., Mitrovic, D. and Breiteneder, C. (2009). Finding the Missing Piece: Content-Based Video Comparison. In Proceedings of the 11th IEEE International Symposium on Multimedia (ISM 2009), pages 330-335, San Diego, USA.
  16. Seidl, M., Zeppelzauer, M., Mitrovic, D., and Breiteneder, C. (2011). Gradual Transition Detection in Historic Film Material – A Systematic Study. ACM Journal on Computing and Cultural Heritage, 4(3).
  17. Zeppelzauer, M., Zaharieva, M., Mitrovic, D., and Breiteneder, C. (2011). Retrieval of Motion Composition in Film. Digital Creativity, 22(4):219-234.
  18. Zaharieva, M., Zeppelzauer, M., Mitrovic, D. and Breiteneder, C. (2010). Archive lm comparison. International Journal of Multimedia Data Engineering and Management, 1(3):41-56.
  19. Zaharieva, M., Mitrovic, D., Zeppelzauer, M., and Breiteneder, C. (2010). Film Analysis of Archive Documentaries. IEEE Multimedia, 18(2):38-47, February, 2011.
  20. Zeppelzauer, M., Mitrovic, D., and Breiteneder C. (2012). Archive Film Material – A novel Challenge for Automated Film Analysis. In: Frames Cinema Journal, Issue 1, ed. Catherine Grant.

 

DATeCH 2017: Crowdsourced Transcription of Handwritten Music Scores

Author: Manuel Burghardt

I am currently attending the DATeCH 2017 conference in Göttingen, which is fully packed with interesting talks on „Digital Access to Textual Cultural Heritage“. The venue is right in the heart of the „Niedersächsische Staats- und Universitätsbibliothek Göttingen“, which is quite a decent place for a conference 🙂

Talk: Crowdsourced Transcription of Handwritten Music Scores

I will be presenting a research project that was created together with Sebastian Spanner.

Allegro: User-centered Design of a Tool for the Crowdsourced Transcription of Handwritten Music Scores

In this paper, we describe the challenge of transcribing a large corpus of handwritten music scores. We conducted an evaluation study of three existing optical music recognition (OMR) tools. The evaluation results indicate that OMR approaches do not work well for our corpus of highly heterogeneous, handwritten music scores. For this reason, we designed Allegro, a web-based crowdsourcing tool that can be used to transcribe scores. We relied on a user-centered design process throughout the development cycle of the application, to ensure a high level of usability. The interface was designed in a way it can be used intuitively, even by novices of musical notation. We describe the core features of Allegro and the basic transcription workflow. A first public beta test with 18 users shows that a crowdsourced transcription approach via the Allegro tool is a viable option for the encoding of our corpus of folk songs.

Related research from our group

Interesting tools mentioned in other DATeCH talks

*Gotta love those names 🙂

15th International Symposium of Information Science

The 15th International Symposium of Information Science (ISI) is taking place from March 13-15 at Humbold University in Berlin.

We are presenting a poster for „An Information System for the Analysis of
Color Distributions in MovieBarcodes“.

An Information System for the Analysis of Color Distributions in MovieBarcodes

Downloads:


Right after the official program of the ISI 2017 we will organize a „Satellite Workshop on the Relationship of Information Science and the Digital Humanities“. For more information please check out the workshop website: https://is-dh.tumblr.com/

Projektvorstellung auf der Journée créole 2017

Zusammen mit Dr. Evelyn Wiesinger und Dr. habil. Alexander M. Teixeira Kalkhoff aus der Romanistik, werde ich am 3. März 2017 in Regensburg auf der Journée créole ein aktuelles Projektvorhaben im Bereich der digitalen Aufbereitung und der quantitativen Analyse von Kreolsprachen – insbesondere des Créole guyanais – vorstellen.

Arbeitstitel des Vortrags/Projekts:

Digitale Aufbereitung eines Kreolkorpus: state of the art, Desiderata und technische Machbarkeit

Journée créole 2017

Ziele des Projekts

1. Überführung der MS Word-Korpusdatein in XML

Ausgangslage: Transkriptionen von Interviews mit Sprechern des Créole Guyanais wurden von Evelyn Wiesinger erstellt und liegen aktuell als MS Word-Dokumente vor.

creol corpus

Ziel: Informationsextraktion mithilfe regulärer Ausdrücke und Überführung in eine XML-Struktur

creol xml

2. Semi-automatische Glossierung der Korpusdaten

Mithilfe maschineller Lernansätze sollen anhand manuell generierter Trainingsdaten weitere Transkripte automatisiert mit Glossierungsinformationen (vgl. Leipzig Glossing Rules) annotiert werden.

creol glossing

3. Quantitative Analysen der textuellen Korpusdaten

Hier sollen Standardverfahren aus der Korpuslinguistik (Frequenzen, Konkordanzen, Kollokationen, etc.) zum Einsatz kommen.

4. Alignierung von Kreol-Audioaufnahmen und textueller Transkription

Die Alignierung von Audio und Text erfolgt zunächst mit den MAUS-Tools.

Audio Text Alignment

Im nächsten Schritt sollen in einem Web-Interface Audiospur und Transkription parallel dargestellt werden. Ein erster JavaScript-Prototyp für HTML/JS-Audio-Text-Alignierung wurde bereits vom Kollegen Alexander Bazo entwickelt: TranscriptPlayer.js

5. Web-Korpus-Interface zur Suche nach Schlüsselwörtern / Metadaten

Alle so erschlossenen Daten sollen am Ende in einem webbasierten Informationssystem mit integriertem Analyse-Dashboard und einer umfangreichen Suchfunktion verfügbar sein. Beispielhafte Suchanfragen, die mit dem System umgesetzt werden können:

  • Finde alle Sätze die aus mehr als 5 Wörtern bestehen und in denen ein frz. Wort vorkommt.
  • Finde alle Sätze von weiblichen Kreolsprecherinnen, in denen das Wort „mo“ vorkommt.

Das Ergebnis der Suchanfragen soll jeweils eine quantitative Analyse der Ergebnismenge sowie eine interaktive Darstellung der entsprechenden Text- und Audiodaten sein.

Verwandte Projekte und Literatur:

DHd 2017 in Bern

Auch in diesem Jahr ist die Regensburger Arbeitsgruppe Digital Humanities mit zwei Beiträgen auf der DHd vertreten, die erstmalig in der Schweiz stattfindet. Die DHd ist die größte Digital Humanities-Konferenz im deutschsprachigen Raum (ca. 300 Teilnehmer), und wird seit 2014 jährlich an unterschiedlichen Standorten abgehalten (2014: Passau, 2015: Graz, 2016: Leipzig, 2017: Bern).

Wir präsentieren zwei Posterbeiträge zu laufenden Digital Humanities-Projekten an der Universität Regensburg.

Den vollständigen Abstractband der Konferenz finden Sie hier als PDF-Download (33 MB).

1. Digitale Erschließung einer Sammlung von Volksliedern aus dem deutschsprachigen Raum

Dieser Beitrag beschreibt ein laufendes Projekt zur digitalen Erschließung einer großen Sammlung von Volksliedern aus dem deutschsprachigen Raum, mit dem Ziel diese später über ein öffentliches Informationssystem verfügbar zu machen. Im Poster werden Herausforderungen bei der digitalen Erschließung dieser Sammlung diskutiert. Konkret stellen wir die Ergebnisse einer OCR-Studie für die automatische Erkennung von Liedtexten sowie auch eine OMR-Studie für die Erfassung der monophonen, handschriftlichen Melodien vor. Es zeigt sich, dass OMR-Tools hier keine zufriedenstellenden Ergebnisse liefern können. Als alternativer Erschließungsansatz wurde deshalb ein webbasiertes Transkriptionstool für einen Crowdsourcing-Ansatz umgesetzt.

Allegro-Transkriptionstool: http://138.68.106.29/

liedblatt-poster_thumbnail

Downloads

  • Poster-Download über ResearchGate (PDF)
  • Paper-Download über ResearchGate (PDF)

2. PaLaFra: Entwicklung einer Annotationsumgebung für ein diachrones Korpus spätlateinischer und altfranzösischer Texte

Weiterhin stellen wir das DFG/ANR-geförderte Kooperationsprojekt PaLaFra (Vom Latein zum Französischen: Aufbau und Analyse eines digitalen Korpus spätlateinischer und altfranzösischer Texte) vor.

palafra-poster_thumbnail

Quelle Kartenausschnitt: Karte: MacKay, Angus. & Ditchburn, David. (1997). Atlas of medieval Europe. London ; New York: Routledge.

Downloads

  • Poster-Download über ResearchGate (PDF)
  • Paper-Download über ResearchGate (PDF)

 

 

Masterstudiengang Digital Humanities in Regensburg

Ab sofort ist die Webseite zum im WS 2017/18 beginnenden Masterstudiengang Digital Humanities online. Interessierte Studierende können sich bis spätestens 1. Juli 2017 bewerben.

Master Digital Humanities Regensburg

Für wen ist der Masterstudiengang interessant?

Ziel des Masterstudiengangs ist es, Studierende, die bereits einen geistes- oder kulturwissenschaftlichen Abschluss haben, methodisch weiter zu bilden. Hierzu gehört die Vermittlung anwendungsorientierter Kenntnisse in Programmierung, Datenerhebung und -auswertung sowie Sprach- und Texttechnologie. Als weiterführender Studiengang werden Studierende aufbauend auf diesen Kenntnissen dazu befähigt, selbstständig Projekte durchzuführen. Ein Schwerpunkt ist dabei die Fähigkeit, mit geeigneten digitalen Werkzeugen Textkorpora (z. B. digital vorliegende historische Quellen, Sprachkorpora oder Texte aus den sozialen Medien) zu analysieren und die Ergebnisse der Analysen in geeigneter Form zu interpretieren, aufzubereiten und diese zu kommunizieren.

 

Information Science and the Digital Humanities

ISI 2017 Workshop on the Relationship of Information Science and the Digital Humanities

Photo credits: The header image is kindly provided by Grégoire Jeanneau via Unsplash.com.

Date: March 15, 2017, 2 – 6 pm
Venue: Berlin School of Library and Information Science
Deadline for position papers: February 16, 2017
Workshop website: https://is-dh.tumblr.com/

Workshop organizers:

  • Manuel Burghardt (University of Regensburg, Media Informatics Group)
  • Markus Kattenbeck (University of Regensburg, Information Science Group)
  • Vivien Petras (Humboldt-Universität zu Berlin, Berlin School of Library and Information Science)

INFORMATION SCIENCE AND THE DIGITAL HUMANITIES

Digital technology is fundamentally changing the way how we do research (Berry, 2011). For the humanities, digital tools and resources are particularly challenging, as they study complex, highly ambiguous cultural artifacts (e.g. poems, paintings, symphonies) and therefore have a long tradition of using hermeneutic, qualitative methods. However, we are at a tipping point, where many of these cultural artifacts are available in digital form, and thus force the humanities to ask new questions and to apply new, quantitative methods (Jockers, 2013, p. 4). This development has been coined the digital humanities, and has been thriving over the last couple of years. While the digital humanities themselves are discussing about how to define and demarcate this new, interdisciplinary field of study (Berry, 2012; Gold, 2012; Terras, Nyhan, & Vanhoutte, 2013), information science is currently also discussing its relationship to the digital humanities (Balck et al., 2015; Balck, 2016; Burghardt, et al., 2015; Frank, 2016; Gladney, 2012; Hobohm, 2015; Robinson et al., 2015; Sula, 2013; White & Gilbert, 2016).

The goal of the ISI 2017 satellite workshop is to contribute to this ongoing discussion and to negotiate the relation of information science and the digital humanities by bringing together people from both fields. Workshop participants are asked to present concrete examples that highlight similarities and differences, synergies and rivalries between the two fields. On the basis of these examples, which may include personal experiences from research projects, curricula in academia, funding strategies, etc., we will systematically investigate the relation of information science and the digital humanities.

CALL FOR PARTICIPATION

The satellite workshop will be held at the Berlin School of Library and Information Science and will begin after the official closing ceremony of the International Symposium of Information Science (ISI, http://isi2017.ib.hu-berlin.de/) 2017, on March 15, from 2 – 6 pm.

The workshop may be attended by (1) participants who want to present a specific example for the relation of information science and the digital humanities, and by (2) general participants, who want to join the discussion. This workshop is free of charge (workshop registration via email is required). If you are planning to participate in the workshop, please send an email to Manuel Burghardt (manuel.burghardt@ur.de) or Markus Kattenbeck (markus.kattenbeck@ur.de) until February 16, 2017. The goal of the workshop presentations is to share different examples of projects / case studies / curricula / etc. that are stimulating discussions about the relation of the two fields. Potential topics for short workshop presentations include the following:

  • Relationship of curricula in DH and IS
  • Teaching information literacy for the humanities
  • Digital libraries and research data management for the humanities
  • Information infrastructures and virtual research environments for the humanities
  • Information behavior in the humanities
  • Humanist-computer interaction: Tool science and user interface design

If you are going to present an example in the workshop, please attach a short position paper that summarizes your personal opinion on the relation of information science and the digital humanities (1-2 pages) based on any of the these topics. Participants who have had their position paper accepted by the workshop organizers will have approx. 15 minutes of time to present their topic and position to the other participants. All presentations will be discussed in the workshop to investigate the relationship of information science and the digital humanities. There will also be final discussion to wrap up the overall workshop topic.

REFERENCES

  • Balck, S., Büttner, S., Ducks, D., Lehfeld, A.-S., Schneider, E., & Vietze, E. (2015). Mit den Informationswissenschaften von Daten zu Erkenntnissen. In DHd 2015, Graz.
  • Balck, S. (2016). (X)Disziplinarität der Informationswissenschaft. LIBREAS. Library Ideas, 30. http://libreas.eu/ausgabe30/balck/
  • Berry, D. M. (2011). The Computational Turn. Thinking About the Digital Humanities.
  • Berry, D. M. (2012). Understanding Digital Humanities. Palgrave Macmillan.
  • Burghardt, M., Wolff, C., & Womser-Hacker, C. (2015). Informationswissenschaft und Digital Humanities. Information – Wissenschaft & Praxis, 66(5–6), 287–294.
  • Frank, I. (2016). Fortschritt durch Rückschritt — vom Bibliothekskatalog zum Denkwerkzeug. Eine Idee. LIBREAS. Library Ideas, 30. http://libreas.eu/ausgabe30/frank/
  • Gladney, H. M. (2012). Long-term digital preservation: A digital humanities topic? Historical Social Research, 37(3), 201–217.
  • Gold, M. K. (2012). Debates in the Digital Humanities. Minneapolis: University of Minnesota Press.
  • Jockers, M. L. (2013). Macroanalysis. Digital Methods & Literary History. University of Illinois Press.
  • Hobohm, H.-C. (2015). Transdisziplinäre Aspekte der Informationswissenschaften als Kernaufgaben der Informationsberufe. In Informationswissenschaft: Theorie, Methode und Praxis / Sciences de l’information: théorie, méthode et pratique, 4(1). https://bop.unibe.ch/iw/article/view/2682/3987
  • Robinson, L., Priego, E., & Bawden, D. (2015). Library and Information Science and Digital Humanities: Two Disciplines , Joint Future? In C. Pehar, F.; Schlögl, C. & Wolff (Ed.), Re:inventing Information Science in the Networked Society. Proceedings of the 14th International Symposium on Information Science, ISI 2015 (pp. 44–54). Glückstadt: Verlag Werner Hülsbusch.
  • Sula, C. A. (2013). Digital Humanities and Libraries: A Conceptual Model. Journal of Library Administration, 53(1), 10–26. http://doi.org/10.1080/01930826.2013.756680
  • Terras, M., Nyhan, J., & Vanhoutte, E. (2013). Defining Digital Humanities – A Reader. Farnham (UK): Ashgate Publishing.
  • White, J. W. & Gilbert, H. (2016). Laying the Foundation. Digital Humanities in Academic Libraries. Purdue University Press.

*Photo credits: The header image is kindly provided by Grégoire Jeanneau via Unsplash.com.