DDMA / EDSN: Datakwaliteit

25
Event: DDMA DQ Dag Thema: Dag van de Datakwaliteit Spreker: Erwin de Jager - EDSN Datum: 3 november 2009, BIM Huis www.ddma.nl
  • Upload

    ddma
  • Category

    Travel

  • view

    1.471
  • download

    0

description

Erwin de Jager gaf een presentatie op de Dag van de Datakwaliteit 2009

Transcript of DDMA / EDSN: Datakwaliteit

Page 1: DDMA / EDSN: Datakwaliteit

Event: DDMA DQ Dag

Thema: Dag van de Datakwaliteit

Spreker: Erwin de Jager - EDSN

Datum: 3 november 2009, BIM Huis

www.ddma.nl

Page 2: DDMA / EDSN: Datakwaliteit

EDSNDrs. Erwin de JagerProjectmanager

Page 3: DDMA / EDSN: Datakwaliteit

Agenda

Introductie- Wat doet EDSN- EDSN en de Nederlandse energiemarkt

Project Centraal Aansluitingenregister (C-AR)- Visie- Context- Aanpak

Datakwaliteit en registers- Welke werkwijze?- Wat zijn de issues?

Energie Data Services Nederland 3

Page 4: DDMA / EDSN: Datakwaliteit

Missie en doelstelling Energie Data Services Nederland (EDSN)

EDSN is dé innovatieve en hoogwaardige dienstverlener op het gebied van het ontwerpen, vastleggen en verbeteren van de bedrijfsoverstijgende administratieve processen en het daarvoor ondersteunende berichtenverkeer en/of centrale registers t.b.v. geliberaliseerde Nederlandse energiemarkt.

Doel van de dienstverlening is gericht op -Verhogen van de kwaliteit in de marktprocessen-Verhogen van de transparantie in de marktprocessen-Verlagen van de kosten voor de markt-Verlagen van de druk op de marktpartijen

EDSN werkt in opdracht van de NEDU (Nederlandse Vereniging voor Data Uitwisseling)

Energie Data Services Nederland 4

Page 5: DDMA / EDSN: Datakwaliteit

Dienstverlening van EDSN

De dienstverlening van EDSN is gebaseerd op het centraal:

• routeren en controleren van uit te wisselen berichten;

• vastleggen en/of toegankelijk maken van de gegevens;

• afhandelen van en communiceren omtrent mutaties in de gegevens;

• bijdragen aan de kwaliteit van de gegevens;

• upgraden van de gegevens tot informatie en het op basis daarvan inzicht geven in de kwaliteit van de marktprocessen en de daarop geënte gegevensverwerking.

Energie Data Services Nederland 5

EDSN informatieplanning: huidige dienstverlening

Page 6: DDMA / EDSN: Datakwaliteit

Typen EDSN diensten

Energie Data Services Nederland 6

1

2

Marktpartij A

Hub-oriëntatie-Stroomlijning Informatie-

uitwisseling tussen partijen-Inclusief proceslogica

-Dossiervorming-Processtandaardisatie

Register-oriëntatie-Centraal beschikbaar stellen van informatie

-Centrale data-Toegankelijk-Datakwaliteit-Proceslogica

-Dossiervorming

EDSN informatieplanning: huidige dienstverlening

Marktpartij B

Marktpartij C

Page 7: DDMA / EDSN: Datakwaliteit

EDSN Switchsysteem (E en G):- Leverancierswitch;-Verhuizingen (in-, uit- en klantverhuizing);- PV/Shipperswitch;-Einde levering;-Uitwisselen Stamgegevens;-Uitwisselen Meetdata;-Uitwisselen Factuurregels;

-Raadplegen voortgang, einde dag rapportages;-Historie raadplegen;-Rapportages:

-Per partij specifiek;-Voor de hele markt.

Via kanalen: -Gui;-Batch, E-Batch, Epack, XMLcalls;-Edine.

Energie Data Services Nederland 7

Ondersteunde processen door EDSN Switchsysteem

EDSN informatieplanning: huidige dienstverlening

EDSNSwitchsysteem

B

A

Page 8: DDMA / EDSN: Datakwaliteit

EDSN, NEDU en de energiemarkt• Bijna alle Marktpartijen zijn lid van de NEDU en daarmee

opdrachtgever van EDSN.• EDSN verwerkt momenteel bijna 10 miljoen berichten per

maand op het switch systeem. • De Beschikbaarheid van het systeem is meer dan 99.5%; dit

leidt tot•Hoge transparantie in de markt (processen en data)•Level playing field (toezichthouder);•Lagere kosten (cost to serve);•Gedeelde kosten (investeringen);•Hoge performance en beschikbaarheid (voor pocessen);•Invulling van een onafhankelijke rol door EDSN •“Enabler” voor verdere ontwikkelingen

• In 2009 zal er in Nederland naar verwachting meer dan 1,8 miljoen keer worden geswitcht, tegen 1,3 miljoen vorig jaar.

• Nederland kent bijna 10% overstappers per jaar en staat daarmee in top 3 van Europa.

Energie Data Services Nederland 8

Page 9: DDMA / EDSN: Datakwaliteit

Marktrollen in de Nederlandse Energiemarkt

Netbeheerders (12):

Leveranciers (60).

Balanceringsverantwoordelijken (15) - Programmaverantwoordelijken (Elektriciteit) - Shippers (Gas)

Meetverantwoordelijken (15).

System Operatar (2) - TenneT - GTS

Energie Data Services Nederland 9

Page 10: DDMA / EDSN: Datakwaliteit

Energie Data Services Nederland 10

AansluitingenregisterAansluitingenregister

ContractenregisterContractenregister

Leverancier MeetverantwoordelijkeNetbeheerder PV/SH

Meetdataregister(bron GV)

Meetdataregister(bron GV)

Balancering-register

Balancering-register

Meetdataregister(bron KV)

Meetdataregister(bron KV)

Meterregister(bron KV)

Meterregister(bron KV)

Meterregister(bron GV)

Meterregister(bron GV)

Bronregisters en marktrollen (in het nieuwe marktmodel)

Meetdataregister(afgeleid)

Meetdataregister(afgeleid)

Meetdataregister(allocatie & reconciliatie)

(afgeleid)

Meetdataregister(allocatie & reconciliatie)

(afgeleid)

Administratief ankerpunt waarin de fysieke kenmerken van de

aansluiting en de verantwoordelijke marktpartijen zijn geregistreerd.

Page 11: DDMA / EDSN: Datakwaliteit

Regionale netbeheerders

AardgasElektriciteit

Page 12: DDMA / EDSN: Datakwaliteit

Energie Data Services Nederland 12

Netbeheerders hebben marktfaciliterende rol• In 2008 besloten de Regionale Netbeheerders om één centraal

aansluitingen register (C-AR) te ontwikkelen en om “Live” te gaan

bij introductie van het nieuwe marktmodel in 2010.

• EDSN kreeg de opdracht om register dit te realiseren.

• Het C-AR is niet bedoeld voor marketing doeleinden maar om de

administratieve klantgerichte marktprocessen in de Nederlandse

energiesector op een effectieve en efficiënte wijze te ondersteunen.

Page 13: DDMA / EDSN: Datakwaliteit

Agenda

Introductie- Wat doet EDSN- EDSN en de Nederlandse energiemarkt

Project Centraal Aansluitingenregister (C-AR)- Visie- Context- Aanpak

Datakwaliteit en registers- Welke werkwijze? - Wat zijn de issues?

Energie Data Services Nederland 13

Page 14: DDMA / EDSN: Datakwaliteit

Centaal Aansluitingenregister (C-AR)

Netbeheerder

Leverancier

Het C-AR staat voor:

• Ontkoppeling

• Standaardisatie en eenvoud

• Transparantie

• Real time

• Flexibiliteit

Marktfacilitering

14

VisieEen gemeenschappelijk Register waarin alle netbeheerders hun

aansluitingen registreren t.b.v. de Marktfacilitering

Page 15: DDMA / EDSN: Datakwaliteit

C-AR: de gemeenplaats

Elke marktrol doet update ‘eigen’ velden en

kan alles altijd direct inzien

update

create

update

EAN code

Adres

EAN-NB

EAN-LV

EAN-PV

EAN-MV

Verblijfsfunctie….

GV/KV indicatie

Aansluitstatus (fysiek)

Profiel

Fysieke capaciteit

Contract capaciteit

Capaciteitstariefcode

….

Markt

gegevens

Centrale bron

en

enige waarheid

Netbeheerder Leverancier

Asset beheer,GIS, etc.

Facturatie, marketing,

contract, etc.

Uittreksel fysieke

toestand

Uittreksel fysieke

toestand

Page 16: DDMA / EDSN: Datakwaliteit

Toekomstige situatie met C-AR

Energie Data Services Nederland 16

Lokale omgeving RNB

A&R

Meter- &Meetdata

Facturatie

Workflowmanagement

Infra

Berichten-verkeer

Centrale omgeving

Definitie Centraal Aansluitingenregister*:Het geheel van het register met de gegevensverzameling van het (wettelijke) aansluitingenregister, de verwerking van de mutatietransacties van de marktpartijen en de mutatietransacties vanuit de lokale omgeving van de RNB op dit centrale register alsmede de informatie verstrekking aan alle betrokken marktpartijen (inclusief de verantwoordelijke netbeheerder) over de mutaties.

* Ontleend aan eindrapport ontwerpfase C-AR

C-AR

Fysiekekenmerken

MarktrollenLV

PV/SH

MV

Page 17: DDMA / EDSN: Datakwaliteit

Energie Data Services Nederland 17

Project Aanpak C-AR

DataExperts

Logica

Project Stuur Groep

Net-beheerders

Project managerC-AR EDSN

EDSNSystem Integrator

Board (S.I.B.)

Project managerC-AR Logica

Project managersC-AR Grid Op.

Design

Build

Test

Aa

nstu

ren

9x 1x 1x

Implement

Besturen

Proces Experts

Uitvoeren

QA

QA

P MMeetings

Design

Build

Test

Implement

Design

Build

Test

Implement

QA

Page 18: DDMA / EDSN: Datakwaliteit

Energie Data Services Nederland 18

Project Planning C-AR2009 2010

Jan Feb Mrt Apr Mei Jun Jul Aug Sep Okt Nov Dec Jan Feb Mrt Apr Mei Jun Jul Aug Sep Okt Nov Dec

EDSN

Release 1Release 2

All Market Roles

Grid O

peratorsAll Com

panies

Transitiion Go-live

Sector Testing Webservice Qualification

UAT

Transition Go-live

Market Proces Testing

Data Migration Preperations

Energie Data Services Nederland

Market Webservices

UAT

SAT

Build C-AR FACT

SAT

FACT Build C-AR

Sector Testing and Bug FixingService Management

Transistion Go-live Data Migration Support

Grid Operators’ Web services

Grid Operators’ Test Data

UAT Service Management

Service Management

Page 19: DDMA / EDSN: Datakwaliteit

Agenda

Introductie- Wat doet EDSN- EDSN en de Nederlandse energiemarkt

Project Centraal Aansluitingenregister (C-AR)- Visie- Context- Aanpak

Datakwaliteit en registers- Welke werkwijze?- Wat zijn de issues?

Energie Data Services Nederland 19

Page 20: DDMA / EDSN: Datakwaliteit

Energie Data Services Nederland: C-AR attributenlijst v2.0 (vastgesteld)d.d. 18/05/2009 20

[A.01] Aansluiting EAN [A.02] Netbeheerder [A.03] Leverancier [A.04] Meetverantwoordelijke [A.05] Progr.verantw./Shipper [A.06] Netgebied/GOS [A.07] Postcode [A.08] Huisnummer [A.09] Huisnummertoevoeging [A.10] Straatnaam [A.11] Woonplaats [A.12] TNT perceelnummer [A.13] BAG nummeridentificatie [A.14] GPS/N-coördinaten [A.15] GPS/O-coördinaten [A.16] Locatieomschrijving [A.17] Productsoort [A.18] Verbruiksegment [A.19] Leveringsrichting [A.20] Leveringstatus [A.21] Fysieke status [A.22] Reden uit bedrijf [A.23] Wijze uit bedrijf [A.24] Wijze van bemeting [A.25] Type aansluiting [A.26] Soort aansluiting [A.27] Gebruik aansluiting

Attributenlijst C-ARAansluiting I Historie

[A.49] Mutatiedatumtijd [A.50] Mutatienummer [A.51] Begindatum [A.52] Einddatum [A.53] Organisatie [A.54] Gebruiker [A.55] Referentie [A.56] Mutatiereden

[A.28] Contractcapaciteit [A.29] Fysieke capaciteit [A.30] Capaciteitstariefcode [A.31] Bepaling CapTarCode [A.32] Profielcategorie [A.33] SJV normaal tarief [A.34] SJV laag tarief [A.35] Switchbaarheid [A.36] SDE-regeling [A.37] Duurzame energie [A.38] Verblijfsfunctie [A.39] Meerdere shippers [A.40] Allocatiemethode [A.41a] Naam contractant [A.41b] Initialen contractant [A.41c] Tussenvoegsel contractant [A.57] Afrekenmaand [A.58] Facturatiemodel [A.59] Artikel 1 lid 2 of lid 3 kenmerk

[A.42] Groep ID [A.43] Groepnaam [A.44] Groeptype [A.45] Groephoofd [A.46] Groeplid [A.47] Aansluitinghoofd [A.48] Aansluitinglid

Aansluiting II

Groepering

[M.101] Meternummer [M.102] Type meter [M.104] NTA versie [M.107] Aantal telwerken

Per telwerk [M.111] Telwerkidentificatie [M.112] Meetrichting [M.113] Meeteenheid [M.114] Tariefzone [M.115] Aantal telwielen [M.118] Vermenigvuldigingsfactor [M.119] Status [M.120] Schakeldatumtijd

Meterinformatie

Page 21: DDMA / EDSN: Datakwaliteit

Voorbeeld beschrijving van een attribuut

Page 22: DDMA / EDSN: Datakwaliteit

Werkwijze opstellen datadefinities

• Alle Netbeheerders werkten mee in de projectwerkgroepen bij EDSN met zowel Proces experts als Data experts.

• Het Project C-AR stimuleerde de Netbeheerders tot het doen van hun eigen dataschoningsprojecten.

• EDSN vervulde een onafhankelijke rol en verwerkte de informatie in vaste formats (zie voorbeeld slide).

• De attributenlijst bleef zo dicht mogelijk bij het wettelijk aansluitingenregister en slechts een klein aantal attributen is toegevoegd (o.a. meterinformatie).

• Op enkele punten werd al naar de werking van toekomstige processen gekeken (BAG, GPS coördinaten).

Energie Data Services Nederland 22

Page 23: DDMA / EDSN: Datakwaliteit

Issues rond datakwaliteitNieuwe processen:• Het C-AR is ontwikkeld voor nieuwe processen en van daaruit

geredeneerd moest telkens voor elke definitie, domeinwaarde en validatie regel de “goede keuze” worden gemaakt.

Systeem integriteit:• Data uit verschillende registers onderbrengen in één register

betekent samenwerken en compromissen sluiten. Uitgangspunt is het laten functioneren van het centrale register zoals het ook ontworpen is.

Migratie inspanning:• Datadefinities voor het nieuwe C-AR staan soms op gespannen voet

met de in de huidige registers gehanteerde definities. Uitdaging is vasthouden aan gemaakte afspraken.

oDatakwaliteit binnen het project C-AR is een goede afweging tussen Systeem integriteit en de Migratie inspanning!Energie Data Services Nederland 23

Page 24: DDMA / EDSN: Datakwaliteit

Energie Data Services Nederland 24

Datakwaliteit binnen het project C-AR

Datakwaliteit

Systeemintegriteit

Migratieinspanning

Page 25: DDMA / EDSN: Datakwaliteit

Energie Data Services Nederland 25

Bedankt voor de aandacht

Energie Data Services [email protected]