Digitaal Archief Vlaanderen · 2016. 2. 29. · Inleiding generieke blauwdruk PwC niveau van...

Post on 18-Jan-2021

0 views 0 download

Transcript of Digitaal Archief Vlaanderen · 2016. 2. 29. · Inleiding generieke blauwdruk PwC niveau van...

Digitaal ArchiefVlaanderen

6 augustus 2013

www.pwc.com

Klankbordgroep 2Generieke blauwdruk

DRAFT

Agenda

• Doelstelling van deze klankbordgroep

• Inleiding generieke blauwdruk

• Blauwdruk

1. Dienstenmodel

2. Data architectuur

PwC

2. Data architectuur

3. Applicatie architectuur

4. Technologische architectuur

Slide 2Aug 2013Digitaal Archief Vlaanderen

DRAFT

Doel van deze klankbordgroep is het evalueren van degenerieke blauwdruk en aftasten van de behoeften

1ste deel

Voorstelling generieke blauwdruk

Focus op

• Betrokken partijen

• Dienstenarchitectuur

• Wie doet wat? (archiefbeheerder vs. archiefvormer)

Doelstelling van deze klankbordgroep

PwC

• Wie doet wat? (archiefbeheerder vs. archiefvormer)

• Data architectuur

2de deel

Evaluatie van de voorgestelde blauwdruk en behoefteanalyse

Aanpak

• Oefeningen met behulp van vooraf gedefinieerde vragen

• Discussie in kleine gemengde groepjes(variërende expertise per groep)

Slide 3Aug 2013Digitaal Archief Vlaanderen

DRAFT

Behoeften worden duidelijk wanneer we peilen naar deAS IS situatie en TO BE verwachtingen

AS IS situatie

• Wat is bestuurlijke informatie?

• Hoe gebeurt archivering vandaag?

• Op welk moment wordt gearchiveerd?(dynamisch vs. (semi-)statisch)

• Welke kosten zijn vandaag verbonden

Behoefteanalyse

• Behoeftes in het landschap

• Producent

• Consument

• Mede manager

• Toegevoegde waarde van elk van

Doelstelling van deze klankbordgroep

PwC

• Welke kosten zijn vandaag verbondenaan archivering?

• Toegevoegde waarde van elk vande services in de generiekeblauwdruk

• Bereidheid van besturen omservices betalend af te nemen

• Minimale vereisten voorwelslagen van het project

• Haalbaarheid van generiekeblauwdruk in termen vancomplexiteit, processen,politieke en organisatorischeimpact

TO BE verwachting

• Welke diensten zijn nuttig / ontbrekenin de generieke blauwdruk?

• Liggen de verantwoordelijkheden op dejuiste plaatsen? (archiefbeheerder vs.archiefvormer)

• Wat is voor u een minimale vereistevoor u instapt in het geheel?

Slide 4Aug 2013Digitaal Archief Vlaanderen

DRAFT

De input van de behoefteanalyse vormt samen met degenerieke blauwdruk de basis voor het stappenplan

MobilisatieGeneriekeblauwdruk

Behoefteanalyse Stappenplan

Hoe verloopt deworkflow vanarchivering en welkezijn de generieke

Welke noden inzakeinterne en externeontsluiting zijn er?

1 2Welkearchiefbestandenkunnen in beheerworden gegeven bij het

3

Doelstelling van deze klankbordgroep

PwC

Welke behoeften enfunctionaliteiten zijnnuttig / ontbreken inde generiekeblauwdruk?

zijn de generiekeelementen?

worden gegeven bij hetVIAA +?

Welke diensten kunnenworden voorzien bij departners?

Hoe past het eDepot ineen groter strategischgeheel? Welke anderestappen zijn belangrijkom dit project te doenslagen?

Slide 5Aug 2013Digitaal Archief Vlaanderen

DRAFT

Landschap voor archivering

Inleiding generieke blauwdruk

Regelgeving

• Decreet van 9 juli 2010 betreffende debestuurlijk-administratievearchiefwerking(Archiefdecreet van 9 juli 2010);

Het Archiefdecreet bevat vijf strategische doelstellingen:

• Verhogen van de kwaliteit van het archiefbeheer;• Beter ontsluiten van archiefdocumenten voor de recht- en

informatiezoekende burger;• Openbaar maken van de meeste archiefdocumenten na 30 jaar;• Stimuleren van efficiënte waardering en selectie van

archiefdocumenten;• Toelaten van wetenschappelijk onderzoek.

PwC

Normen en standaarden

• OAIS (ISO 14721)• Audit and Certification of Trustworthy Digital

Repositories (ISO 16363)• ISAD(G) (General International Standard Archival

Description)• ISAAR (International Standard Archival Authority

Record)• …

eDepot

Slide 6Aug 2013Digitaal Archief Vlaanderen

DRAFT

Landschap voor archivering

Kadering in het grotere geheel van actoren en diensten:

Inleiding generieke blauwdruk

PwCAug 2013

Slide 7

DRAFT

Insteek voor de generieke blauwdruk

• OAIS als een geheel van diensten

• Open Architectuur

­ Standaarden

­ Duurzaamheid

­ Schaalbaarheid

Inleiding generieke blauwdruk

PwC

­ Schaalbaarheid

­ Virtuele integratiemogelijkheden

• Betrouwbaarheid

­ Authenticiteit

­ Integriteit

­ Risico beheersing

Slide 8Aug 2013Digitaal Archief Vlaanderen

DRAFT

Informatiemodel – Hoofdproces voor archiveringA

rchiv

ering Verw

erk

ing

maak SIP maak AIP ok Archivering

Stuur mail naar deaanvrager

Valide

Not ok

Einde

PreservationdescriptionInformation

Inleiding generieke blauwdruk

PwC

Pro

du

cers

Inte

rfac

eP

rod

cu

ers

Maak aanvraag

Ontvang aanvraag Validatie

Ontvangarchiverings-bevestigingingang

Einde

Contentinformation

Slide 9Aug 2013Digitaal Archief Vlaanderen

DRAFT

Samenstelling van de generieke blauwdruk

• Business architectuur: diensten die beschikbaar zijn voor de producersen de consumers

• Gegevensarchitectuur: beheren van metadata, mogelijkheden omarchiefstukken op te vragen op basis van metadata, gegevens uitwisselingtussen diensten en actoren

• Applicatie architectuur: bepalen van de samenhang van de software,

Inleiding generieke blauwdruk

PwC

• Applicatie architectuur: bepalen van de samenhang van de software,niveau van automatisatie binnen het archief

• Technologische architectuur: technische eigenschappen van deoplossing zoals lager-niveau implementatievereisten en ondersteuning voorinfrastructuur.

Slide 10Aug 2013Digitaal Archief Vlaanderen

DRAFT

Laag 1: dienstenmodel (business architectuur)

1. Dienstenmodel

PwC Slide 11Aug 2013Digitaal Archief Vlaanderen

DRAFT

Preservation PlanningDiensten model

Workflow

Ingest

Archive

Producer interfaces

Web Portal Application

Requests

Temporarystorage

Storage

Systeembeheer

Instap

Opvolging

1. Dienstenmodel

PwC

Archive

Access

Search Dissemination

Consumer interfaces

Web Portal Application

Audit

storageStorage

CatalogBCP DRPRisk man

Proces enpolicybeheer

Slide 12Aug 2013Digitaal Archief Vlaanderen

DRAFT

Instap & opvolgingVoorafgaand aan operationeel proces voor archivering

Wat?

• Afspraken maken en begeleiding van verschillende types organisaties

­ Type 1: bewustwording voorzien voor besturen die nog niet metarchivering bezig zijn

­ Type 2: instap faciliteren voor nieuwe klanten en begeleiden bij verdere

1. Dienstenmodel

PwC

­ Type 2: instap faciliteren voor nieuwe klanten en begeleiden bij verdereevolutie

­ Type 3: instap faciliteren en verder bouwen op expertise

­ Samenwerking met alle gebruikers gericht op standaardisatie, integratieen optimalisatie

Slide 13Aug 2013Digitaal Archief Vlaanderen

DRAFT

Instap & opvolgingDuale benadering: begeleiding bieden / expertise samenbrengen

Concreet afspraken maken en opvolging omtrent verschillende thema’s

• Pre-Ingest afspraken (hoe een archiefwaardig maken van data) zoals dubbelsverwijderen, naamgeving en structuur bepalen, …

• Afbakening dynamisch, semi-statisch en statisch archief en de consequentiesnaar digitale archief oplossingen

• Beheren van de levenscyclus (van selectie naar ontsluiting en vernietiging)

• Metadata

1. Dienstenmodel

PwC

• Metadata

• Formaten

­ Aanvaarde formaten

­ Strategie: mee archiveren of transformatie bij oproepen

­ Preservation planning

• Thesaurus: gemeenschappelijke vocabulaire

• Kwaliteitscontrole

• Gebruikte tools en technologie via trend/technology watch

• Security maatregelen (toegangsrechten, privacy regulering)

• Opleidingen

Slide 14Aug 2013Digitaal Archief Vlaanderen

DRAFT

Proces – Opladen dataDienst: Interfaces voor producer

Arc

hiv

ering Verw

erk

ing

maak SIP maak AIP ok Archivering

Stuur mail naar deaanvrager

Valide

Not ok

Einde

PreservationdescriptionInformation

1. Dienstenmodel

PwC

Pro

du

cers

Inte

rfac

eP

rod

cu

ers

Maak aanvraag

Ontvang aanvraag Validatie

Ontvangarchiverings-bevestigingingang

Einde

Contentinformation

Slide 15Aug 2013Digitaal Archief Vlaanderen

DRAFT

Interfaces voor producerVerschillende opties voor interactie met gebruikers*

1. Dienstenmodel

Web interface FTP upload / download Applicaties

Formulier om metadatagegevens toe te voegen

Opladen van document metmetadata gegevens op eenlocatie

Gebruikmaken van eenWebservice of API

Manueel laden van data Databestanden in Ritme bepaald door de

PwC

Impact voor behoefte analyse:

• Welke bestuurlijke informatie komt in aanmerking voor digitalearchivering?

batchvorm applicatie en infrastructuur

Generieke oplossing voorproducers die geenarchiverings-functionaliteiten hebben

• Oplossing voor producersmet reeds bestaandeapplicaties

• Kan gebruikt worden alsinitiële import

Oplossing voor producersmet reeds bestaandeapplicaties

*Zie ook applicatie architectuur

Slide 16Aug 2013Digitaal Archief Vlaanderen

DRAFT

Proces - Vervolmaken SIPDienst: Ingest

Arc

hiv

ering Verw

erk

ing

maak SIP maak AIP ok Archivering

Stuur mail naar deaanvrager

Valide

Not ok

Einde

PreservationdescriptionInformation

1. Dienstenmodel

PwC

Pro

du

cers

Inte

rfac

eP

rod

cu

ers

Maak aanvraag

Ontvang aanvraag Validatie

Ontvangarchiverings-bevestigingingang

Einde

Contentinformation

Slide 17Aug 2013Digitaal Archief Vlaanderen

DRAFT

Ingest

1. Dienstenmodel

Wat?

• SIP wordt ontvangen

• Tijdelijk opslaan SIP en controle van de kwaliteit

• Vervolledigen van de PDI (Preservation Description Information) metadequate informatie om de inhoud op lange termijn op te slaan

PwC

adequate informatie om de inhoud op lange termijn op te slaan

Impact voor behoefteanalyse:

• 2 opties:

­ Samenvoegen van het object met de PDI tot een SIP

­ Direct SIP doorsturen indien PDI reeds aangemaakt is door producer

• Met consequenties obv overeenkomsten gemaakt tijdens de instapdienst

• Zie data architectuur

Slide 18Aug 2013Digitaal Archief Vlaanderen

DRAFT

Proces – Vervolmaken AIPDienst: Archive

Arc

hiv

ering Verw

erk

ing

maak SIP maak AIP ok Archivering

Stuur mail naar deaanvrager

Valide

Not ok

Einde

PreservationdescriptionInformation

1. Dienstenmodel

PwC

Pro

du

cers

Inte

rfac

eP

rod

cu

ers

Maak aanvraag

Ontvang aanvraag Validatie

Ontvangarchiverings-bevestigingingang

Einde

Contentinformation

Slide 19Aug 2013Digitaal Archief Vlaanderen

DRAFT

Archive

1. Dienstenmodel

Wat?

• Rendition: verhogen van de duur van de leesbaarheid door transformatie vandocumenten naar een beperkt set van formaten

• Opslaan op lange termijn van de AIP door toevoegen van systeeminformatie

• Bevestiging naar aanvrager en communicatie van referentie

PwC

• Bevestiging naar aanvrager en communicatie van referentie

• Opbouw catalogus:

- Stockeren meta data voor opzoekingen

- Selectie overeengekomen tijdens de instapdienst

Slide 20Aug 2013Digitaal Archief Vlaanderen

DRAFT

Archive

1. Dienstenmodel

Impact voor behoefteanalyse:

• Algemene afspraken gemaakt bij instap en opvolging

• Eigen catalogus of instappen in centrale catalogus?

• Specifieke vereisten mbt:

Toevoegen Aanpassen Verwijderen

PwC

Toevoegen Aanpassen Verwijderen

Aanvraag tot archivering • Op basis van een SIP deAIP aanpassen.

• Context van deaanpassing wordtmeegegeven

• Communicatie mbtverwijderen na verloopbewaartermijn naareigenaar OF aanvraag totverwijdering viawebservice

• Context van deverwijdering bewaren

• Communicatie metrijksarchief

Slide 21Aug 2013Digitaal Archief Vlaanderen

DRAFT

Proces – Opzoeken van dataDienst: Search

1. Dienstenmodel

Verwerking queryrequest

Rapporterenresulaten

Opvragen AIP Genereren DIP Leveren DIP

PwC

Maak aanvraag Ingang

Ontvang aanvraag

Order agreement

Zoek sessie:Zoeken opmetadata ofreferentie

Ontvang queryrequest

Weergaveresultaten

Ontvangen DIP

Digitale leeszaal

Lezen digitaaldocument

Slide 22Aug 2013Digitaal Archief Vlaanderen

DRAFT

Search

1. Dienstenmodel

Wat?

• Indexatie op metadata

• Query mogelijkheden op de geselecteerde metadata en indien mogelijkfulltext

• Resultaten weergaven naar browser of via Web service (voor eigen

PwC

• Resultaten weergaven naar browser of via Web service (voor eigenontsluitingsplatform of integratie met bestaande applicaties)

• Zoekresultaten onderhevig aan de beveiliging (cfr. afspraken instapdienst)

Impact voor behoefteanalyse:

• Afspraken rond bij instap en opvolging

• Enkel eigen gegevens opzoeken of inclusief andere zorgdragers?Geïntegreerd virtueel archief (ultieme doel: ontsluiting van alle juridischtoegankelijke archiefinformatie op maat van de burger)?

Slide 23Aug 2013Digitaal Archief Vlaanderen

DRAFT

Federated search

1. Dienstenmodel

Impact voor behoefteanalyse:

• Oplossing voormeerdere systemen:

PwC Slide 24Aug 2013Digitaal Archief Vlaanderen

DRAFT

Proces – Weergeven van dataDienst: Dissemination

1. Dienstenmodel

Verwerking queryrequest

Rapporterenresulaten

Opvragen AIP Genereren DIP Leveren DIP

PwC

Maak aanvraag Ingang

Ontvang aanvraag

Order agreement

Zoek sessie:Zoeken opmetadata ofreferentie

Ontvang queryrequest

Weergaveresultaten

Ontvangen DIP

Digitale leeszaal

Lezen digitaaldocument

Slide 25Aug 2013Digitaal Archief Vlaanderen

DRAFT

Dissemination

1. Dienstenmodel

Wat?

• Opmaken van de DIP op basis van AIP

• Data weergeven op overeengekomen manier

PwC

Impact voor behoefteanalyse:

• Welke meta data toon ik?

• Hoe toon ik het digitaal object?

• Aan wie toon ik wat?

• Ontsluiting naar burgers toe?

Slide 26Aug 2013Digitaal Archief Vlaanderen

DRAFT

Proces – Presenteren van dataDienst: Interfaces voor consumer

1. Dienstenmodel

Verwerking queryrequest

Rapporterenresulaten

Opvragen AIP Genereren DIP Leveren DIP

PwC

Maak aanvraag Ingang

Ontvang aanvraag

Order agreement

Zoek sessie:Zoeken opmetadata ofreferentie

Ontvang queryrequest

Weergaveresultaten

Ontvangen DIP

Digitale leeszaal

Lezen digitaaldocument

Slide 27Aug 2013Digitaal Archief Vlaanderen

DRAFT

Interfaces voor consumerVerschillende opties voor interactie met gebruikers*

1. Dienstenmodel

Web interface FTP upload / download Applicaties

Formulier om documentenuit catalogus op te zoeken

Downloaden vanopgezochte bestanden

Gebruikmaken van eenWebservice of API

Manueel downloaden vandata

Databestanden inbatchvorm

Ritme bepaald door deapplicatie en de

PwC

data batchvorm applicatie en deinfrastructuur

Generieke oplossing voorconsumenten

• Oplossing voorconsumers met reedsbestaande applicaties

• Kan gebruikt worden voorexport van grote datasets

Oplossing voor consumersmet reeds bestaandeapplicaties

Impact voor behoefte analyse:

• Integratie met ‘actuele applicaties’ met mogelijkheid tot ontsluiting burger?

• Aanbieden van digitale leeszaal?

*Zie ook applicatie architectuur

Slide 28Aug 2013Digitaal Archief Vlaanderen

DRAFT

Additioneel: Beheer van het depot

Workflow

Ingest

Archive

Producer interfaces

Web Portal Application

Temp

Systeembeheer

Instap

Opvolging

1. Dienstenmodel

• Beveiliging

• Volgen van privacy wetgeving

PwC

Archive

Access

Search Dissemination

Consumer interfaces

Web Portal Application

BCP DRPRisk man

Proces enpolicybeheer

• Toegangsrechten

• Garanderen van continuïteit en risico beheersing

• Documenteren van procedures

Slide 29Aug 2013Digitaal Archief Vlaanderen

DRAFT

Laag 2: data architectuur

2. Data architectuur

PwC Slide 30Aug 2013Digitaal Archief Vlaanderen

DRAFT

Packaging Information

Representation

Overzicht AIP

Information Object

Data Object

Ori

gin

al

PDI

Descriptive

Reference

Provenance

2. Data architectuur

PwC

Representation InformationO

rig

ina

lM

igra

tio

n(s

) Information Object

Data Object

Representation Information

DescriptiveInformation

Provenance

Context

Fixity

AccessRights

Slide 31Aug 2013Digitaal Archief Vlaanderen

DRAFT

B. Enkel eenarchiveringsfunctie

A. Overeenkomen over deinhoud

DatamodelBehoefte aan twee types

AIPAIP

2. Data architectuur

PwC

SIP=AIPproducer

SIP

Impact voor behoefte analyse:

• Wie verkiest welk type?

Slide 32Aug 2013Digitaal Archief Vlaanderen

DRAFT

Packaging Information

Representation

Type A: ondersteuning bij de SIP creatie

Information Object

Data Object

RepresentationOri

gin

al

PDI

Reference

Provenance

SIP AIP

Descriptive

2. Data architectuur

PwC

RepresentationInformation

Ori

gin

al

Mig

ratio

n(s

)Provenance

Context

FixityInformation Object

Data Object

RepresentationInformation

DescriptiveInformation

AccessRights

Slide 33Aug 2013Digitaal Archief Vlaanderen

DRAFT

Packaging Information

Representation

Type B: de SIP wordt afgewerkt aangeleverd

Information Object

Data Object

RepresentationOri

gin

al

PDI

Reference

Descriptive Provenance

SIP AIP

2. Data architectuur

PwC

RepresentationInformation

Ori

gin

al

Mig

ratio

n(s

)

Context

FixityInformation Object

Data Object

RepresentationInformation

DescriptiveInformation

Provenance

AccessRights

Slide 34Aug 2013Digitaal Archief Vlaanderen

DRAFT

METS

METS

Voorbeeld invulling standaarden voor het datamodel

Information Object

.docx, RAW, …

Ori

gin

al

PDI

EAD

EAD, OSLO

2. Data architectuur

PwC

PREMIS, CEDARS, MIX, …O

rig

ina

lM

igra

tio

n(s

)EAD, OSLO

EAD, OSLO

PREMISInformation Object

XML, PDF/A, TIFF, …

PREMIS, CEDARS, MIX, …

TBD: To Be Defined –afhankelijk van de databasedie wordt gekozen

TBD*

PREMIS

Slide 35Aug 2013Digitaal Archief Vlaanderen

DRAFT

Laag 3: applicatie architectuur

3. Applicatie architectuur

PwC Slide 36Aug 2013Digitaal Archief Vlaanderen

DRAFT

Applicatie landschap

Client side Server side Server side

Browser

ApplicationWeb

Service of

Portal Rendition

Archive

3. Applicatie architectuur

PwC

Application Service ofAPI

sFTPservice

sFTP client

Archive

Search

Access Temporarystorage

Slide 37Aug 2013Digitaal Archief Vlaanderen

DRAFT

A. Browser

Als producer

• Formulier voor metadata

• Mogelijk om het bestand op te ladenvia formulier

3. Applicatie architectuur

PwC

Als consumer:

• Ophalen DIP

• Zoekfuncties

Zie ‘Search’ en ‘Dessimination’

Slide 38Aug 2013Digitaal Archief Vlaanderen

DRAFT

B. Web service implementatieEén web service voor zowel browser als externe applicaties

Browser Portaal

Web

3. Applicatie architectuur

PwC

Webservice

Applicatie

Slide 39Aug 2013Digitaal Archief Vlaanderen

DRAFT

B. Web service implementatie

• WSDL bestand voor de beschrijving van de functionaliteiten

• Getters & setters om toe te voegen, aangepast aan het OAIS model en deovereengekomen regels

• Het opstellen van een DIP aan de hand van een “consumer” kan enkel alshet e-Depot controle heeft over de SIP. In het andere geval wordt het

3. Applicatie architectuur

PwC

het e-Depot controle heeft over de SIP. In het andere geval wordt hetvolledig object geleverd.

• Aanduiden welke metadata gebruikt wordt voor de search (instapdienst)

- sFTP: leveren van een extra bestand (XML)

- Web Service: voorzien in de functie

- Portaal : aanduiden via web formulier

AIP

SearchMeta-data

Slide 40Aug 2013Digitaal Archief Vlaanderen

DRAFT

C. Zoekomgeving

3. Applicatie architectuur

AIP

SearchMeta-data Indien

leverbaar

referentie

PwC

Meta-data

Fulltext

SearchArchivering

Slide 41Aug 2013Digitaal Archief Vlaanderen

DRAFT

D. Archivering

Wat?

Applicatie ter ondersteuning van

• Ingest: Beheerssysteem voor bestuurlijke informatie met bijbehorendeworkflow

• Archiving: Beheerssysteem voor opslag management

3. Applicatie architectuur

PwC

• Archiving: Beheerssysteem voor opslag management

• Perifere diensten:

- Kwaliteitsbeheer

- Rapportering

- …

Slide 42Aug 2013Digitaal Archief Vlaanderen

DRAFT

Laag 4: technologische architectuur

4. Technologische architectuur

PwC Slide 43Aug 2013Digitaal Archief Vlaanderen

DRAFT

Portal

Workflow

Producer

Van diensten tot infrastructuur

4. Technologische architectuur

PwC

Reporting

Portal

RKMS

Search

Meta data

Reporting

DM

ZLA

NTemporary storage

Consumer

Rendition

AIP

SIP

Slide 44Aug 2013Digitaal Archief Vlaanderen

DRAFT

Bedankt voor uw inbreng!

© 2013 PricewaterhouseCoopers. All rights reserved. “PricewaterhouseCoopers” refers to thenetwork of member firms of PricewaterhouseCoopers International Limited, each of which is aseparate and independent legal entity.

DRAFT

Appendix

PwC Slide 46Aug 2013Digitaal Archief Vlaanderen

DRAFT

Lijst van acroniemen

AIP Archival Information Package

DIP Dissemination Information Package

ISO International Organization for Standardization

OAIS Open Archival Information System

PDI Preservation Description Information

Appendix

PwC

PDI Preservation Description Information

SIP Submission Information Package

XML Extensible Markup Language

Slide 47Aug 2013Digitaal Archief Vlaanderen