Ortwin Verreck (Arvix) bespreekt welke datakwaliteit managementsystemen er zijn en nog belangrijker: hoe ze ingezet moeten worden, want – zo stelt hij- “A fool with a tool is still a fool.” Datakwaliteit omvat zowel de betrouwbaarheid als de bruikbaarheid van gegevens. Door het beoordelen van de kwaliteit en de mogelijkheden tot verbetering, ontstaat inzicht in de manieren waarop prestaties omhoog kunnen. Het managen begint met een inventarisatie van de huidige stand van zaken en het benoemen van de knelpunten. Van groot belang zijn de gebruiksdoeleinden. Gaat het om een tijdelijke oplossing of structurele veranderingen; een waarneming, referentie of intrinsieke meting? Selecteer op grond van deze doelstellingen maatregelen en implementeer deze. Door gegevenskwaliteitsmanagement ontstaat een goed instrument om de datakwaliteit en de prestaties van de organisatie te meten en te verbeteren.

1. vent: DDMA DQ Dag
hema: Datakwaliteit
preker: Ortwin Verreck - Arvix
Datum: 12 september 2006 – Fortis NV, Utrecht

2. DDMA
Ondersteun je gegevenskwaliteitsaanpak met tools
12 september 2006
Ortwin Verreck
Technisch directeur ARVIX

3. Vooraf
“Bij gegevenskwaliteit gaat het primair om de
bruikbaarheid van de gegevens. Dit is al verbeterd als je
de gegevenskwaliteit kent”
“De kwaliteit van de gegevens is pas verbeterd als de
bruikbaarheid van de gegevens toeneemt”
In deze presentatie om de juiste aanpak ondersteunt met
tooling om de bruikbaarheid te vergroten.
Ondersteun je gegevenskwaliteitsaanpak met tools

4. Agenda
Wat is gegevenskwaliteit
Wat is gegevenskwaliteitmanagement
Doel van gegevenskwaliteit
Selecteren van middelen: tools
Geen doel maar middel om bruikbaarheid van gegevens te verhogen
Geen doel maar middel om bedrijfsprestaties te verbeteren
Ondersteun je gegevenskwaliteitsaanpak met tools

5. Belang van gegevens neemt toe – Voorbeeld
Gegevenskwaliteit
Gegevenskwaliteit-
management
Doel
Consumentenbond helpt
klant Essent(ANP)
Middelen
DEN HAAG, 1 MAART. De
Consumentenbond gaat
bemiddelen tussen Essent en
klanten die vinden dat zij een te
Keuzevrijheid hoge of onjuiste rekening hebben
Nuon verliest 200.000 klanten gekregen. Volgens de bond
regende het afgelopen jaar
De vrijheid van klanten om voortaan zelf hun
energieleverancier te kiezen, heeft voor Nuon slecht honderden klachten van...
uitgepakt. Het energiebedrijf, dat van oudsher veel klanten
in Gelderland heeft, verloor sinds de liberalisering van de
energiemarkt vorig jaar juli ongeveer 200.000 klanten;
75.000 kozen voor een andere stroomleverancier, 125.000
voor een andere gasleverancier. Op 1 juli vorig jaar had
het bedrijf 2,5 miljoen klanten. Mensen keerden Nuon niet
alleen de rug toe omdat ze bij andere leveranciers
goedkoper uit zouden zijn, ook de inmiddels aangepakte
administratieve chaos en het……
ECONOMIE
Ondersteun je gegevenskwaliteitsaanpak met tools

6. Wat is gegevenskwaliteit?
Gegevenskwaliteit
Kwaliteit ≠ “juiste”, “ware”
Gegevenskwaliteit-
management
Kwaliteit = duurzaam bruikbaar
Doel bepalen
Type uitdagingen
Middelen selecteren
Technisch (kan niet) “Mijn dochter is geboren op 15 januari 2097”
Functioneel (mag niet ) “Onze medewerker Johan de Vries van 95 jaar”
Inhoudelijk (niet juist) “Deze Ipod bestelling is toch gratis”
Ondersteun je gegevenskwaliteitsaanpak met tools

7. Belang van gegevenskwaliteit neemt toe
Gegevenskwaliteit
Steeds meer gegevens nodig
Gegevenskwaliteit-
management
Steeds strengere eisen aan actualiteit en
Doel bepalen volledigheid
Middelen selecteren
Informatieverstrekking als dienst
Internet: straight through processing
…
Ondersteun je gegevenskwaliteitsaanpak met tools

8. Kwaliteit ontstaat niet vanzelf!
Gegevenskwaliteit
Gegevenskwaliteit-
management
Doel
Middelen
Ondersteun je gegevenskwaliteitsaanpak met tools

9. Kwaliteitsmanagement
Gegevenskwaliteit
Kwaliteit volgens Demming
Bepaal de stand van zaken
Gegevenskwaliteit-
management Analyseer de onvolkomenheden
Doel bepalen
Bepaal wat je wilt bereiken
Bedenk maatregelen
Middelen selecteren
Implementeer maatregelen
Check
Operationaliseren
voor gegevens
Do Act
Plan
Ondersteun je gegevenskwaliteitsaanpak met tools

10. Meten, weten, verbeteren
Gegevenskwaliteit
Gegevenskwaliteit-
management
1) waarneming 2) referentie
Doel
Middelen
Administratie Extern
3) intrinsiek
De kunst van de goede mix
Ondersteun je gegevenskwaliteitsaanpak met tools

11. Technisch meten
Gegevenskwaliteit Dubbele
Het ontbreken
attributen Ontbrekende attributen
Gegevenskwaliteit- van referentiele integriteit
management
Doel bepalen Ongeldige Ongeldige Dummy
waarden berekeningen Waarden
Middelen selecteren Dubbele
sleutelwaarden
Ontbrekende
datum Ongeldige Inconsistenties
afhankelijkheden reeksen normalisatie
Onwaarschijnlijke Niet standaard
relaties opmaak
Ondersteun je gegevenskwaliteitsaanpak met tools

12. Inhoudelijk meten
Beeld: stijging verkoop
via internet maakt reguliere
Gegevenskwaliteit
verkoopkanaal overbodig
Gegevenskwaliteit-
management
Doel bepalen
Middelen selecteren
Met domeinexperts:
Bijstellen model
Opstellen businessrules
Meten
Analyseren en bruteren
Nemen van maatregelen
Implementeren van de maatregelen
Ondersteun je gegevenskwaliteitsaanpak met tools

13. Managen van gegevenskwaliteit
Norm
Gegevenskwaliteit
Gegevenskwaliteit-
management Ontdekken Bepalen
kritische Verbeter-
Doel bepalen
gegevens potentieel
Middelen selecteren
Meting Analyseren
Implementatie en
Verbetering Bruteren
Maatregelen
Geen
Weging
(Prioriteren
Quickfix Verbeter-
(gegevens) mog.)
Ontwerp
Business
Solution
Ondersteun je gegevenskwaliteitsaanpak met tools

14. Scope te beperkt
Gegevenskwaliteit
Meting met bedrijfsregels levert een
Gegevenskwaliteit-
röntgenfoto van
management De administratie
Doel bepalen De organisatie
Middelen selecteren
Röntgenfoto zet aan tot actie als
De objectiviteit buiten kijf staat
De meetresultaten begrijpelijk zijn
Mogelijke opbrengsten de business overtuigen
Ondersteun je gegevenskwaliteitsaanpak met tools

15. De scope
Gegevenskwaliteit
Cyclus uitbreiden tot de bedrijfsprocessen
Gegevenskwaliteit-
waarvan de gegevens afkomstig zijn en die de
management
gegevens gebruiken.
Doel bepalen
Middelen selecteren
Ondersteun je gegevenskwaliteitsaanpak met tools

16. Kwaliteitscirkel grote Q of kleine q:
Gegevenskwaliteit
Gegevenskwaliteit- Wet- en
management regelgeving,
CAO
Doel bepalen
Middelen selecteren
Applicatie
Processen Processen
(voegen gegevens toe) (gebruiken gegevens)
Gegevens
Q
q
Ondersteun je gegevenskwaliteitsaanpak met tools

17. Metingen en verbeterdoelen in termen van
Klachten van klanten
Gegevenskwaliteit
Gegevenskwaliteit-
Work-around kosten
management
Doel bepalen
Rework en foutherstel
Middelen selecteren Compliancy met wetten en (externe) regels
Responsesnelheid
Inspelen op specifieke klantvragen
Risicomanagement: resultaatgericht controleren
Trendbreuken voorzien
...
Tevredener klanten tegen minder kosten en meer omzet
Ondersteun je gegevenskwaliteitsaanpak met tools

18. Resume : Selectiecriteria op basis van doel
Ondersteuning kwaliteitsmanagement (PDCA)
Gegevenskwaliteit
Gegevenskwaliteit-
Quick fix of structurele verbetering (grote Q of kleine q)
management
Doel bepalen
Waarneming, referentie of intrinsieke meting
Middelen selecteren Technische rules en/of business rules
Gegevenskwaliteitgericht of business case gericht
Ondersteun je gegevenskwaliteitsaanpak met tools

19. Selectiecriteria op basis van functionaliteit
Gegevenskwaliteit
Automatische schoning
Gegevenskwaliteit-
management
Referentietabel met adressen (internationaal)
Doel bepalen
Integreerbaarheid (ETL,CRM, ERP)
Middelen selecteren
Dataprofiling
Cliëntgegevens, maar ook business
gegevens!
Ondersteun je gegevenskwaliteitsaanpak met tools

20. Selectie criteria op basis van ontdubbeltechniek:
deterministisch of problablistisch
Client_nr Naam Postcode Geb.datum Gesl. Roepnaam
814856 S. MUTLU 5331GR 7 14.3.1992 M SEYHUN
814871 C. MUTLU 5331GR 7 14.3.1992 M CEYHUN
Client_nr Naam Postcode Geb.datum Gesl. Roepnaam
923091 R. WILLEMSE 1213AR 39 11.10.2002 V RACHEL
923112 V. WILLEMSE 1213AR 39 11.10.2002 V VALERY
Potentiële
aliassen
unieke dubbele
cliënten registraties
Ondersteun je gegevenskwaliteitsaanpak met tools

21. Selectiecriteria marktanalyse 1: (visionair of marktleider)
Gegevenskwaliteit
Nederlandse situatie
Gegevenskwaliteit-
management
Koplopers:
Doel bepalen • Human Inference (met stip)
• Trillium Software
Middelen selecteren
Weinig/geen marktaandeel:
• Dataflux (alleen onderdeel SAS)
• Firstlogic (geen europese adressen)
Let op:
• Geschiktheid europese adressen/
referentiedata
Bron: Gartner april 2006
Ondersteun je gegevenskwaliteitsaanpak met tools

22. Selectiecriteria marktanalyse 2 (ook aanbodgedreven)
Gegevenskwaliteit
Gegevenskwaliteit-
management
Doel bepalen
Middelen selecteren
Bron: Forrester april 2006
Ondersteun je gegevenskwaliteitsaanpak met tools

23. Prijskwaliteitverhouding
Er zijn ook deeloplossingen mogelijk;
Gegevenskwaliteit
Gegevenskwaliteit-
Ook ‘eigen’ oplossingen kunnen;
management
Doel bepalen
Middelen selecteren
100%
gegevens
kwaliteit
Trillium
QAS
Human Inference
(Cendris)
‘eigen’
oplossing
Kosten
Ondersteun je gegevenskwaliteitsaanpak met tools

24. Tot slot
“A fool with a tool is still a fool”..
Gegevenskwaliteit
Gegevenskwaliteit-
management
Bepaal eerst je doelstellingen
Doel bepalen
Oriënteer: voer een objectieve meting uit
Middelen selecteren
Selecteer op basis van je scope een aantal
hulpmiddelen/tools
Voer een proof-of-concept uit (onder
begeleiding)
Kijk naar de toepasbaarheid en…
… kijk ook naar de licentieovereenkomst ☺
Ondersteun je gegevenskwaliteitsaanpak met tools

25. Vragen
Ondersteun je gegevenskwaliteitsaanpak met tools