Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste...

34
Inzicht in kansen en effecten van re-integratie

Transcript of Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste...

Page 1: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Inzicht in kansen en effecten van

re-integratie

Page 2: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Project ‘datagedreven sturing re-integratie’ bij

gemeente ’s-Hertogenbosch:

• Aanleiding en doel

• Analyses en uitkomsten

• Conclusies en vervolgstappen

Agenda

Page 3: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

• Marion Schepers – Onderzoeker bij

gemeente ’s-Hertogenbosch

• Ruben Peters – Data scientist bij Ynformed

Voorstellen

Page 4: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

• Re-integratie-activiteiten kosten veel geld

• Keuze interventie(s) door consulent

• Maar: voor welke mensen is welke interventie meest kansrijk

(differentiatie)?

• Doel: met data meer inzicht bieden in effectiviteit van

interventies en bepalende kenmerken voor succes.

• Gebruik van data science-technieken (machine learning)

Aanleiding en doel project

Ruim 7.000 uitkeringsgerechtigden

60 kenmerken per cliënt

Page 5: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Gewenst resultaat: betere inzet van re-integratie-instrumenten:

• Inzicht in opvallende patronen en voorspellende kenmerken

• Concrete risico- en voorspellingsmodellen om op individueel

niveau betere keuzes te kunnen maken (wie moet welk traject

krijgen?)

• Inzicht in beschikbaarheid en kwaliteit van data voor dit type

analyses

• Verkennen mogelijkheden data science

Aanleiding en doel project

Page 6: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Analyses en uitkomsten

Page 7: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Cliënten

• Kenmerk A

• Kenmerk B

• Kenmerk C

Interventies

• Interventie A

• Interventie B

• Interventie C

Uitkomsten

• UitstroomJa/Nee

• Snelheid uitstroom

• Structureleuitstroom

• Type uitstroom

1

2

3 2

Page 8: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

• 8300 uitkeringen (actief na 2011)

– 4100 hebben een uitkering

– 4200 geen uitkering meer

• 7400 unieke cliënten (hoofdaanvragers en

partners)

• 60 kenmerken van cliënten (deels beschikbaar)

• 25.000 geleverde voorzieningen

• 150 verschillende voorzieningen, gegroepeerd

tot 5 groepen

Gebruikte data WeenerXL

Page 9: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

• Data uit verschillende systemen:

– Koppelen van bestanden

– Niet alle systemen even goed gevuld

• Uitdagingen:

– Opschonen data kost veel tijd (fouten in registratie, cellen

niet gevuld, etc)

– Historische data nodig: maar wat is er inmiddels veranderd

(systemen, beleid, andere interventies, etc)? -> vervuiling?

– Data verzamelen kost tijd, maar we willen liefst zo snel

mogelijk weten of interventies werken

– Voldoende data voor uitspraken over verschillende

groepen?

Datakwaliteit

Page 10: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Datakwaliteit

Page 11: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Clusteranalyse

Page 12: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

• Doel: groepen cliënten vinden die sterk op

elkaar lijken

• Toepassing: doelgroepen bepalen voor

communicatie en productontwikkeling

Clusteranalyse kenmerken cliënten

Page 13: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Clusteranalyse minimaal half jaar in uitkering

0,00

0,10

0,20

0,30

0,40

0,50

0,60

0,70

0,80

0,90

1,00LEEFTIJD

loonwaarde

opleiding

lichamelijke_gezondheid

maatschappelijke_participatie

dagbesteding

Paars: scoren overal slecht

op

Oranje: Jonge mensen die

overal hoog op scoren

Groen: Oude mensen die

overal hoog op scoren

Page 14: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Clusteranalyse minimaal half jaar in uitkering (2)

0,00

0,10

0,20

0,30

0,40

0,50

0,60

0,70

0,80

0,90

LEEFTIJD

loonwaarde

opleiding

lichamelijke_gezondheid

maatschappelijke_participatie

dagbesteding

C1

C2

C5

C7

Overige groepen: Duidelijke verdeling op gebied van loonwaarde en opleiding

Page 15: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Classification Trees

Page 16: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Is het een man?

Heeft hij een Snor?

Heeft hij rood haar?

Is hij kaal?

JA

Nee

JA

JA

Nee

MODEL

Kenmerken

Page 17: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

9 December 2016 www.ynformed.nl 17

Uitstroom naar Werk, Scholing of Inkomsten: 5500 uitkeringen, 33% uitstroom

Page 18: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

9 December 2016 www.ynformed.nl 18

Uitstroom binnen 1 jaar naar W/S/I: 5500 uitkeringen, 22% uitstroom

• Aan ‘negatieve’ kant weinig onderscheid mogelijk

Page 19: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

9 December 2016 www.ynformed.nl 19

Uitstroom na minimaal 1 jaar naar W/S/I: 3900 uitkeringen, 16% uitstroom

Page 20: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

9 December 2016 www.ynformed.nl 20

Uitstroom voorziening: 700 uitkeringen

• Boom opvallend anders dan ‘totaal’• `Nederlandse nationaliteit’

• Leeftijd: < 40 jaar

• ‘druk = geen belemmering of sterk punt’

• Effectief bij groene groep?

Page 21: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Survival-analyse

Page 22: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

• Techniek oorspronkelijk uit de medische

wereld om tijd tot overlijden te analyseren bij

verschillende groepen mensen

• In dit geval; tijd tot uitstroom bij verschillende

doelgroepen of voorzieningen

Survival-analyse

Page 23: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Survival-analyse

Page 24: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Survival-analyse op voorzieningen

Zonder matching Met matching

Page 25: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Voorbeeld succesvolle voorziening

Page 26: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Tool

Page 27: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

‘Oneindige’ keuze in:• Uitstroomredenen

• Te analyseren kenmerken

• Doelgroepen (leeftijd, loonwaarde, etc)

• Uitstroom binnen X maanden of juist minimale duur uitkering

• Complexiteit (aantal lagen) beslisboom

• Etc.

Ontwikkelde tool

Page 28: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Voorspellingsmodellen

Page 29: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

• Doel: voorspellingen doen voor nieuwe

cliënten aan hand van historische data

• Mogelijk beslissingsondersteuning consulent

• Eerste model gemaakt, verdere optimalisatie

nodig

• Uitstroom naar werk/scholing/inkomsten:

71% voorspellingen goed

• Toepassing vraagt automatische koppeling

van databronnen

Voorspellingsmodellen

Page 30: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Conclusies en vervolgstappen

Page 31: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Conclusies:

• Project heeft eerste inhoudelijke inzichten opgeleverd, maar

nog vrij algemeen

• Toepassing in beleid en uitvoering vraagt nadere

analyses/uitwerking

• Naar toekomst aandacht nodig voor datakwaliteit en snel

beschikbaar krijgen van actuele data

Conclusies en vervolgstappen

Page 32: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

Vervolgstappen:

• Bepalen interessante vervolgvragen (vanuit beleid en

uitvoering)

• Onderzoek & Statistiek aan de slag met vervolganalyses via

tool

• Afspraken over databeheer (andere definities, nieuwe

voorzieningen, registratie, etc)

• Nieuwe (actuele) data analyseren

• Voorspellingsmodellen gaan gebruiken in uitvoering?

• Datawarehouse ontwikkelen en tool hierop aansluiten?

Conclusies en vervolgstappen

Page 33: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering

• Presentaties beschikbaar op maandag 12

december

• Houd www.samenvoordeklant.nl in de gaten

voor data Praktijkdagen in 2017

• SVP evaluatieformulier invullen

• Een inspirerende dag gewenst!

Meer informatie

Page 34: Inzicht in kansen en effecten van re-integratie. Datakwaliteit ... • Project heeft eerste inhoudelijke inzichten opgeleverd, maar nog vrij algemeen • Toepassing in beleid en uitvoering