DDMA / EDSN: Datakwaliteit
description
Transcript of DDMA / EDSN: Datakwaliteit
Event: DDMA DQ Dag
Thema: Dag van de Datakwaliteit
Spreker: Erwin de Jager - EDSN
Datum: 3 november 2009, BIM Huis
www.ddma.nl
EDSNDrs. Erwin de JagerProjectmanager
Agenda
Introductie- Wat doet EDSN- EDSN en de Nederlandse energiemarkt
Project Centraal Aansluitingenregister (C-AR)- Visie- Context- Aanpak
Datakwaliteit en registers- Welke werkwijze?- Wat zijn de issues?
Energie Data Services Nederland 3
Missie en doelstelling Energie Data Services Nederland (EDSN)
EDSN is dé innovatieve en hoogwaardige dienstverlener op het gebied van het ontwerpen, vastleggen en verbeteren van de bedrijfsoverstijgende administratieve processen en het daarvoor ondersteunende berichtenverkeer en/of centrale registers t.b.v. geliberaliseerde Nederlandse energiemarkt.
Doel van de dienstverlening is gericht op -Verhogen van de kwaliteit in de marktprocessen-Verhogen van de transparantie in de marktprocessen-Verlagen van de kosten voor de markt-Verlagen van de druk op de marktpartijen
EDSN werkt in opdracht van de NEDU (Nederlandse Vereniging voor Data Uitwisseling)
Energie Data Services Nederland 4
Dienstverlening van EDSN
De dienstverlening van EDSN is gebaseerd op het centraal:
• routeren en controleren van uit te wisselen berichten;
• vastleggen en/of toegankelijk maken van de gegevens;
• afhandelen van en communiceren omtrent mutaties in de gegevens;
• bijdragen aan de kwaliteit van de gegevens;
• upgraden van de gegevens tot informatie en het op basis daarvan inzicht geven in de kwaliteit van de marktprocessen en de daarop geënte gegevensverwerking.
Energie Data Services Nederland 5
EDSN informatieplanning: huidige dienstverlening
Typen EDSN diensten
Energie Data Services Nederland 6
1
2
Marktpartij A
Hub-oriëntatie-Stroomlijning Informatie-
uitwisseling tussen partijen-Inclusief proceslogica
-Dossiervorming-Processtandaardisatie
Register-oriëntatie-Centraal beschikbaar stellen van informatie
-Centrale data-Toegankelijk-Datakwaliteit-Proceslogica
-Dossiervorming
EDSN informatieplanning: huidige dienstverlening
Marktpartij B
Marktpartij C
EDSN Switchsysteem (E en G):- Leverancierswitch;-Verhuizingen (in-, uit- en klantverhuizing);- PV/Shipperswitch;-Einde levering;-Uitwisselen Stamgegevens;-Uitwisselen Meetdata;-Uitwisselen Factuurregels;
-Raadplegen voortgang, einde dag rapportages;-Historie raadplegen;-Rapportages:
-Per partij specifiek;-Voor de hele markt.
Via kanalen: -Gui;-Batch, E-Batch, Epack, XMLcalls;-Edine.
Energie Data Services Nederland 7
Ondersteunde processen door EDSN Switchsysteem
EDSN informatieplanning: huidige dienstverlening
EDSNSwitchsysteem
B
A
EDSN, NEDU en de energiemarkt• Bijna alle Marktpartijen zijn lid van de NEDU en daarmee
opdrachtgever van EDSN.• EDSN verwerkt momenteel bijna 10 miljoen berichten per
maand op het switch systeem. • De Beschikbaarheid van het systeem is meer dan 99.5%; dit
leidt tot•Hoge transparantie in de markt (processen en data)•Level playing field (toezichthouder);•Lagere kosten (cost to serve);•Gedeelde kosten (investeringen);•Hoge performance en beschikbaarheid (voor pocessen);•Invulling van een onafhankelijke rol door EDSN •“Enabler” voor verdere ontwikkelingen
• In 2009 zal er in Nederland naar verwachting meer dan 1,8 miljoen keer worden geswitcht, tegen 1,3 miljoen vorig jaar.
• Nederland kent bijna 10% overstappers per jaar en staat daarmee in top 3 van Europa.
Energie Data Services Nederland 8
Marktrollen in de Nederlandse Energiemarkt
Netbeheerders (12):
Leveranciers (60).
Balanceringsverantwoordelijken (15) - Programmaverantwoordelijken (Elektriciteit) - Shippers (Gas)
Meetverantwoordelijken (15).
System Operatar (2) - TenneT - GTS
Energie Data Services Nederland 9
Energie Data Services Nederland 10
AansluitingenregisterAansluitingenregister
ContractenregisterContractenregister
Leverancier MeetverantwoordelijkeNetbeheerder PV/SH
Meetdataregister(bron GV)
Meetdataregister(bron GV)
Balancering-register
Balancering-register
Meetdataregister(bron KV)
Meetdataregister(bron KV)
Meterregister(bron KV)
Meterregister(bron KV)
Meterregister(bron GV)
Meterregister(bron GV)
Bronregisters en marktrollen (in het nieuwe marktmodel)
Meetdataregister(afgeleid)
Meetdataregister(afgeleid)
Meetdataregister(allocatie & reconciliatie)
(afgeleid)
Meetdataregister(allocatie & reconciliatie)
(afgeleid)
Administratief ankerpunt waarin de fysieke kenmerken van de
aansluiting en de verantwoordelijke marktpartijen zijn geregistreerd.
Regionale netbeheerders
AardgasElektriciteit
Energie Data Services Nederland 12
Netbeheerders hebben marktfaciliterende rol• In 2008 besloten de Regionale Netbeheerders om één centraal
aansluitingen register (C-AR) te ontwikkelen en om “Live” te gaan
bij introductie van het nieuwe marktmodel in 2010.
• EDSN kreeg de opdracht om register dit te realiseren.
• Het C-AR is niet bedoeld voor marketing doeleinden maar om de
administratieve klantgerichte marktprocessen in de Nederlandse
energiesector op een effectieve en efficiënte wijze te ondersteunen.
Agenda
Introductie- Wat doet EDSN- EDSN en de Nederlandse energiemarkt
Project Centraal Aansluitingenregister (C-AR)- Visie- Context- Aanpak
Datakwaliteit en registers- Welke werkwijze? - Wat zijn de issues?
Energie Data Services Nederland 13
Centaal Aansluitingenregister (C-AR)
Netbeheerder
Leverancier
Het C-AR staat voor:
• Ontkoppeling
• Standaardisatie en eenvoud
• Transparantie
• Real time
• Flexibiliteit
Marktfacilitering
14
VisieEen gemeenschappelijk Register waarin alle netbeheerders hun
aansluitingen registreren t.b.v. de Marktfacilitering
C-AR: de gemeenplaats
Elke marktrol doet update ‘eigen’ velden en
kan alles altijd direct inzien
update
create
update
EAN code
Adres
EAN-NB
EAN-LV
EAN-PV
EAN-MV
Verblijfsfunctie….
GV/KV indicatie
Aansluitstatus (fysiek)
Profiel
Fysieke capaciteit
Contract capaciteit
Capaciteitstariefcode
….
Markt
gegevens
Centrale bron
en
enige waarheid
Netbeheerder Leverancier
Asset beheer,GIS, etc.
Facturatie, marketing,
contract, etc.
Uittreksel fysieke
toestand
Uittreksel fysieke
toestand
Toekomstige situatie met C-AR
Energie Data Services Nederland 16
Lokale omgeving RNB
A&R
Meter- &Meetdata
Facturatie
Workflowmanagement
Infra
Berichten-verkeer
Centrale omgeving
Definitie Centraal Aansluitingenregister*:Het geheel van het register met de gegevensverzameling van het (wettelijke) aansluitingenregister, de verwerking van de mutatietransacties van de marktpartijen en de mutatietransacties vanuit de lokale omgeving van de RNB op dit centrale register alsmede de informatie verstrekking aan alle betrokken marktpartijen (inclusief de verantwoordelijke netbeheerder) over de mutaties.
* Ontleend aan eindrapport ontwerpfase C-AR
C-AR
Fysiekekenmerken
MarktrollenLV
PV/SH
MV
Energie Data Services Nederland 17
Project Aanpak C-AR
DataExperts
Logica
Project Stuur Groep
Net-beheerders
Project managerC-AR EDSN
EDSNSystem Integrator
Board (S.I.B.)
Project managerC-AR Logica
Project managersC-AR Grid Op.
Design
Build
Test
Aa
nstu
ren
9x 1x 1x
Implement
Besturen
Proces Experts
Uitvoeren
QA
QA
P MMeetings
Design
Build
Test
Implement
Design
Build
Test
Implement
QA
Energie Data Services Nederland 18
Project Planning C-AR2009 2010
Jan Feb Mrt Apr Mei Jun Jul Aug Sep Okt Nov Dec Jan Feb Mrt Apr Mei Jun Jul Aug Sep Okt Nov Dec
EDSN
Release 1Release 2
All Market Roles
Grid O
peratorsAll Com
panies
Transitiion Go-live
Sector Testing Webservice Qualification
UAT
Transition Go-live
Market Proces Testing
Data Migration Preperations
Energie Data Services Nederland
Market Webservices
UAT
SAT
Build C-AR FACT
SAT
FACT Build C-AR
Sector Testing and Bug FixingService Management
Transistion Go-live Data Migration Support
Grid Operators’ Web services
Grid Operators’ Test Data
UAT Service Management
Service Management
Agenda
Introductie- Wat doet EDSN- EDSN en de Nederlandse energiemarkt
Project Centraal Aansluitingenregister (C-AR)- Visie- Context- Aanpak
Datakwaliteit en registers- Welke werkwijze?- Wat zijn de issues?
Energie Data Services Nederland 19
Energie Data Services Nederland: C-AR attributenlijst v2.0 (vastgesteld)d.d. 18/05/2009 20
[A.01] Aansluiting EAN [A.02] Netbeheerder [A.03] Leverancier [A.04] Meetverantwoordelijke [A.05] Progr.verantw./Shipper [A.06] Netgebied/GOS [A.07] Postcode [A.08] Huisnummer [A.09] Huisnummertoevoeging [A.10] Straatnaam [A.11] Woonplaats [A.12] TNT perceelnummer [A.13] BAG nummeridentificatie [A.14] GPS/N-coördinaten [A.15] GPS/O-coördinaten [A.16] Locatieomschrijving [A.17] Productsoort [A.18] Verbruiksegment [A.19] Leveringsrichting [A.20] Leveringstatus [A.21] Fysieke status [A.22] Reden uit bedrijf [A.23] Wijze uit bedrijf [A.24] Wijze van bemeting [A.25] Type aansluiting [A.26] Soort aansluiting [A.27] Gebruik aansluiting
Attributenlijst C-ARAansluiting I Historie
[A.49] Mutatiedatumtijd [A.50] Mutatienummer [A.51] Begindatum [A.52] Einddatum [A.53] Organisatie [A.54] Gebruiker [A.55] Referentie [A.56] Mutatiereden
[A.28] Contractcapaciteit [A.29] Fysieke capaciteit [A.30] Capaciteitstariefcode [A.31] Bepaling CapTarCode [A.32] Profielcategorie [A.33] SJV normaal tarief [A.34] SJV laag tarief [A.35] Switchbaarheid [A.36] SDE-regeling [A.37] Duurzame energie [A.38] Verblijfsfunctie [A.39] Meerdere shippers [A.40] Allocatiemethode [A.41a] Naam contractant [A.41b] Initialen contractant [A.41c] Tussenvoegsel contractant [A.57] Afrekenmaand [A.58] Facturatiemodel [A.59] Artikel 1 lid 2 of lid 3 kenmerk
[A.42] Groep ID [A.43] Groepnaam [A.44] Groeptype [A.45] Groephoofd [A.46] Groeplid [A.47] Aansluitinghoofd [A.48] Aansluitinglid
Aansluiting II
Groepering
[M.101] Meternummer [M.102] Type meter [M.104] NTA versie [M.107] Aantal telwerken
Per telwerk [M.111] Telwerkidentificatie [M.112] Meetrichting [M.113] Meeteenheid [M.114] Tariefzone [M.115] Aantal telwielen [M.118] Vermenigvuldigingsfactor [M.119] Status [M.120] Schakeldatumtijd
Meterinformatie
Voorbeeld beschrijving van een attribuut
Werkwijze opstellen datadefinities
• Alle Netbeheerders werkten mee in de projectwerkgroepen bij EDSN met zowel Proces experts als Data experts.
• Het Project C-AR stimuleerde de Netbeheerders tot het doen van hun eigen dataschoningsprojecten.
• EDSN vervulde een onafhankelijke rol en verwerkte de informatie in vaste formats (zie voorbeeld slide).
• De attributenlijst bleef zo dicht mogelijk bij het wettelijk aansluitingenregister en slechts een klein aantal attributen is toegevoegd (o.a. meterinformatie).
• Op enkele punten werd al naar de werking van toekomstige processen gekeken (BAG, GPS coördinaten).
Energie Data Services Nederland 22
Issues rond datakwaliteitNieuwe processen:• Het C-AR is ontwikkeld voor nieuwe processen en van daaruit
geredeneerd moest telkens voor elke definitie, domeinwaarde en validatie regel de “goede keuze” worden gemaakt.
Systeem integriteit:• Data uit verschillende registers onderbrengen in één register
betekent samenwerken en compromissen sluiten. Uitgangspunt is het laten functioneren van het centrale register zoals het ook ontworpen is.
Migratie inspanning:• Datadefinities voor het nieuwe C-AR staan soms op gespannen voet
met de in de huidige registers gehanteerde definities. Uitdaging is vasthouden aan gemaakte afspraken.
oDatakwaliteit binnen het project C-AR is een goede afweging tussen Systeem integriteit en de Migratie inspanning!Energie Data Services Nederland 23
Energie Data Services Nederland 24
Datakwaliteit binnen het project C-AR
Datakwaliteit
Systeemintegriteit
Migratieinspanning