Semantische Annotation von Bildkorpora

Dr. Jens-Martin Loebel, Dr. Heinz-Günter Kuper

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

• Maßgeschneiderte Software-Lösungen und Infrastruktur in den Bereichen Forschung, Bildung und Kultur

• Verstetigung von Forschungsprojekten

• Digital Humanities

• Open Source

2

„Aus der Forschung für die Forschung“

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

Text als Link Region als Link

vs.Check out our Website for more information.

Virtuelle Forschungs- und Publikationsumgebung für den Bilddiskurs

3

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

HyperImage: Features (Auswahl)• visuelle und textuelle Annotationen des Korpus

• Kombination von Bild-, Text- und Mixed-Media-Elementen

• mehrsprachig Oberfläche und Metadaten

• flexible, erweiterbare Metadatenschemata, mehrere Schemata pro Element möglich

• u.a. Dublin Core, VRAcore 4, CDWA und domainspezifische Vokabulare

• Rich Text, TEI, Markup-Formate erweiterbar und offen

• Lucene-gestützte Volltextsuche und Indizierung

• Lichttische, Navigation, Visualisierung des Netzwerks von Links und Rückverweisen

• Auszeichnung komplexe Regionen, mehrere Layer (Ebenen)

• 1:1, 1:n links und n:n links

4

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

HyperImage: Features (Auswahl)• visuelle und textuelle Annotationen des Korpus

• Kombination von Bild-, Text- und Mixed-Media-Elementen

• mehrsprachig Oberfläche und Metadaten

• flexible, erweiterbare Metadatenschemata, mehrere Schemata pro Element möglich

• u.a. Dublin Core, VRAcore 4, CDWA und domainspezifische Vokabulare

• Rich Text, TEI, Markup-Formate erweiterbar und offen

• Lucene-gestützte Volltextsuche und Indizierung

• Lichttische, Navigation, Visualisierung des Netzwerks von Links und Rückverweisen

• Auszeichnung komplexe Regionen, mehrere Layer (Ebenen)

• 1:1, 1:n links und n:n links

4

abstraction refraction

speculation

illumination

network

insight

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

HyperImage Editor

• Body Level One

• Body Level Two

• Body Level Three

• Body Level Four

• Body Level Five

5

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

HyperImage Editor

• Body Level One

• Body Level Two

• Body Level Three

• Body Level Four

• Body Level Five

6

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

7

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

HyperImage Light Table

• Body Level One

• Body Level Two

• Body Level Three

• Body Level Four

• Body Level Five

8

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

9

–Christian Bauer

consists of

which contain

with zero or more

with zero or more

may contain

Groups

HyperImage Project

Objects

Views

Layers

Links

–Christian Bauer

Metadata

have

consists of

which contain

with zero or more

with zero or more

may contain

Groups

HyperImage Project

Objects

Views

Layers

Links

–Christian Bauer

Metadata

have

Light!Tables

can be elements on

consists of

which contain

with zero or more

with zero or more

may contain

Groups

HyperImage Project

Objects

Views

Layers

Links

–Christian Bauer

Metadata

have

Light!Tables

can be elements on

consists of

which contain

with zero or more

with zero or more

may contain

Groups

HyperImage Project

Objects

Views

Layers

Links WWW

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

HyperExcursion Museum of Natural History Berlin

A new Mirror of Kāśī University Heidelberg

HyperMedia Ludwig-Maximilians-University Munich

HyperGlas Berlin-Brandenb. Academy of Sciences

HyperGiotto Humboldt University Berlin

HyperTaxon Museum of Natural History Berlin

HyperColumn Zurich University of the Arts

HyperSculpture Art History, HU Berlin

[...]HyperPalast

Humboldt University BerlinDigital Horae

Free University BerlinEbstorf World Map

Leuphana University Lüneburg

11

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

Hachiman Digital Handscrolls

• japanische Querrollen des 14. – 19. Jahrhunderts, welche die Hachiman-Legende wiedergeben

• Annotation, Translation und digitale Aufbereitung

• Verbundprojekt

• Materialität stellt neue Anforderungen an digitale Publikation

12

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

13

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

13

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

13

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

DEMO

14

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

• Open-Source Plattform (Toolsuite)

• HyperImage-Funktionalität für die Bildannotation

• Semantische Annotation (Linked Open Data)

• Im- und Export

• ReST-APIs

15

Anfang 2016 http://yenda.tools/

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

Open Annotation Data Model

16

“The primary aim of the Open Annotation Data Model is to provide a standard description mechanism for sharing

Annotations between systems. This interoperability may be either for sharing with others, or the migration of private

Annotations between devices. The shared Annotations must be able to be integrated into existing collections and reused

without loss of significant information. […]”

– http://www.openannotation.org/spec/core/!

Community Draft, 08 February 2013

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

• Body Level One

• Body Level Two

• Body Level Three

• Body Level Four

• Body Level Five

17

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

18

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

International Image Interoperability Framework

• IIIF Image API

• IIIF Presentation API

19

Image Annotation Workshop Exzellenzcluster Bild-Wissen-Gestaltung

Berlin, 2015-09-10

bitGilde IT Solutions UG (haftungsbeschränkt) Dr. Heinz-Günter Kuper Dr. Jens-Martin Loebel hyperimage.ws

!!

http://bitgilde.de !

hyperimage.ws !

http://yenda.tools/ !

@bitgilde @hyperimage

!

Vielen Dank für die Aufmerksamkeit!

20