Post on 20-Feb-2021
IMPACT EN DOORONTWIKKELING COE’S:VERDIEPINGSSESSIE 1 OKTOBER 2019
Inhoud
› Blik op onszelf: impactmeting 2019
› Methodiek voor zelfevaluatie: pilots peer review
› Methodiek
› Ervaringen
› Een voorbeeld: CoE TechForFuture
› Storytelling: wordt vervolgd
› Sneak preview: Commissie CoE en Zwaartepuntvorming
IMPACTMETING 2019
• ENKELE CIJFERS
• WAT WILLEN WE?
• WAT DOEN WE?
• WAT DOORONTWIKKELEN?
39 Centres of Expertise
Werkveld partners:- 65,5 binnenkring- 2555 buitenkring
Studenten p.j.: • 600 direct• 12000 indirect
Respons: 24 (62%)
Docenten p.j.: - 52 direct
- 157 indirect
Wat willen we? > inhoudelijke focus
6
0% 20% 40% 60% 80% 100%
Bedrijven en organisaties helpen innoveren
Nieuwe kennis ontwikkelen
Innovatieve professionals ondersteunen
Leven lang ontwikkelen bevorderen
Aansluiting onderwijs, onderzoek en (beroeps)praktijk
Onderwijsinstelling zelf innoveren
Onderwijs verbeteren/innoveren
Doelstellingen Publiek Private Samenwerking(boven mbo; onder hbo)
in zeer hoge mate in hoge mate in redelijke mate nauwelijks helemaal niet
mbohbo
Wat willen we? > motieven werkveld
7
Spreiding
8
25%
21% 21%
13% 13%
8%
0%
5%
10%
15%
20%
25%
30%
Zuidwest Oost Landelijk Zuidoost Noord Noordwest
Waar is uw CoE gevestigd?
Geografische focus
9
69%
27%
3% 1%
46%
33%
17%
4%0%
10%
20%
30%
40%
50%
60%
70%
80%
Regionale focus Regionale focus metlandelijke effecten
Landelijke focus Landelijke focus metinternationale effecten
Wat is de geografische focus van uw PPS
mbo hbo
Bereik studenten
10
81% -100%14%
41% - 60%4%
21% - 40%23%
0% - 20%59%
Hoeveel studenten bereikt de PPS direct?92% 88% 83% 83%
46%
25% 21%
0%10%20%30%40%50%60%70%80%90%
100%
Hoe worden deze studenten bereikt?
Bereik docenten/ docentonderzoekers
11
81% -100%14%
61% - 80%18%
41% - 60%4%
21% - 40%41%
0% - 20%23%
Hoeveel docenten/docent-onderzoekersbereikt de PPS jaarlijks? 96% 88%
67% 63%
25% 21%13%
0%10%20%30%40%50%60%70%80%90%
100%
Hoe worden docenten/docent-onderzoekersbetrokken?
parttime (>16 uur)
23%
parttime (16 uur)9%
parttime (12 uur)9%
parttime (8 uur)41%
parttime (4 uur)
18%
Hoeveel uren per week besteden de deelnemende docenten/docent-onderzoekers
gemiddeld aan activiteiten van de PPS?
Bereik professionals & motieven voor deelname werkveld
12
96%
83% 79% 79%
29%17% 17%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Hoe worden deze professionals uit de beroepspraktijkbetrokken?
Wat doen we? > onderwijsvernieuwing
13
83%75% 71% 67% 63%
54%
38% 33% 29% 25% 25% 25%17% 17% 13% 13% 13% 8%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
Op welke wijze draagt de PPS bij aan innovaties van/voor het onderwijs?
Wat doen we? > innovatie van de beroepspraktijk
14
92%83%
75% 75%63%
50% 50% 46% 42%29% 25% 21% 21%
4% 4%0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Op welke wijze draagt de PPS bij aan innovaties van/voor de beroepspraktijk?
Wat doen we? > (praktijkgericht) onderzoek
15
96% 96% 96%88%
63%
46%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Op welke wijze draagt de PPS bij aan (praktijkgericht) onderzoek?
Wat doen we? > Leven Lang Ontwikkelen
16
63%58%
54%
42%
25%21%
17%13% 13%
8%
0%
10%
20%
30%
40%
50%
60%
70%
Op welke wijze levert de PPS een bijdrage aan LLO?
Wat doen we? > aansluiting onderwijs - arbeidsmarkt
17
83%
63%
33%
21% 21% 17% 17% 17%8%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
Welke bijdragen op het gebied van aansluiting onderwijs-arbeidsmarkt worden met de PPS gerealiseerd?
Wat doen we? > netwerkvorming
18
88%
71% 67% 63%
4%0%
20%
40%
60%
80%
100%
Welke bijdragen op het gebied van netwerkvorming worden met de PPS gerealiseerd?
Wat doen we? > Faciliteiten
19
79%
67%58% 58%
25%
4%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
Welke faciliteiten & labs zijn voor/ via de PPS beschikbaar en onderdeel van de propositie van de PPS?
Gerichtheid op opleidingen
20
opleidingen in een domein
54%zeer divers
42%
specifiek een opleiding
4%
Hoe specifiek of generiek is uw PPS?
Aansluiting bij onderzoeks- en innovatiebeleid (1)
21
33%
29%
25% 25% 25% 25%
17% 17% 17%
13% 13% 13%
8%
4%
0%
5%
10%
15%
20%
25%
30%
35%
Op welke (top)sector(en) richt uw PPS zich actief?
Aansluiting bij onderzoeks- en innovatiebeleid (2)
22
46%
33% 33% 33%29% 29% 29% 29%
25%21%
17%13%
8%4% 4%
0%
5%
10%
15%
20%
25%
30%
35%
40%
45%
50%
Met welke (top)sector(en) heeft uw PPS raakvlakken?
Aansluiting bij onderzoeks- en innovatiebeleid (3)
23
38%33% 33%
29%
17% 17% 17% 17% 17%
8%4%
0%
5%
10%
15%
20%
25%
30%
35%
40%
Op welke VH onderzoeksthema's richt uw PPS zich actief?
Aansluiting bij onderzoeks- en innovatiebeleid (4)
24
42%38% 38% 38% 38%
33%29% 29%
25%
17%
4%
0%
5%
10%
15%
20%
25%
30%
35%
40%
45%
Met welke VH onderzoeksthema's heeft uw PPS raakvlakken?
Aansluiting bij onderzoeks- en innovatiebeleid (5)
254%4%4%
8%8%8%8%8%
13%13%13%13%13%
17%17%17%17%17%
21%33%
38%
0% 5% 10% 15% 20% 25% 30% 35% 40%
Regeneratieve Geneeskunde: game changer op weg naar brede…
NeuroLabNL: werkplaats voor hersen-, cognitie- en gedragsonderzoek
Bouwstenen van materie en fundamenten van ruimte en tijd
Kunst: onderzoek en innovatie in de 21e eeuw
Sport en Bewegen
Jeugd in ontwikkeling, opvoeding en onderwijs
Kwaliteit van de omgeving
Personalised medicine: uitgaan van het individu
Waardecreatie door verantwoorde toegang tot en gebruik van big data
Meten en detecteren: altijd, alles en overal
Gezondheidszorgonderzoek, preventie en behandeling
Logistiek en Transport in een energieke, innovatieve en duurzame…
Op weg naar veerkrachtige samenlevingen
Smart industry
Sustainable Development Goals voor inclusieve mondiale ontwikkeling
De Blauwe route: water als weg naar innovatieve en duurzame groei
Duurzame productie van gezond en veilig voedsel
Materialen Made in Holland
Smart, liveable cities
Circulaire economie en grondstoffenefficiëntie: Duurzame circulaire…
Energietransitie
Op welke NWA-thema's richt uw PPS zich actief?
Aansluiting bij onderzoeks- en innovatiebeleid (6)
26
4%4%4%4%
8%8%8%
13%13%
17%17%17%17%17%
21%21%21%
25%25%25%
29%33%
0% 5% 10% 15% 20% 25% 30% 35%
Duurzame productie van gezond en veilig voedsel
Bouwstenen van materie en fundamenten van ruimte en tijd
NeuroLabNL: werkplaats voor hersen-, cognitie- en gedragsonderzoek
Regeneratieve Geneeskunde: game changer op weg naar brede toepassing
Logistiek en Transport in een energieke, innovatieve en duurzame…
Op weg naar veerkrachtige samenlevingen
Jeugd in ontwikkeling, opvoeding en onderwijs
Smart industry
Meten en detecteren: altijd, alles en overal
Smart, liveable cities
Waardecreatie door verantwoorde toegang tot en gebruik van big data
Met welke NWA-thema's heeft uw PPS raakvlakken?
Beeld financiën uit 2017
27
1) Tabel 1: gemiddelde omzet van 16 door OCW gesubsidieerde CoE’s was in 2017 3 miljoen euro; in 2018 kwam de prognose uit op 4 miljoen euro2) Tabel 2: Praktijkgericht onderzoek besloeg in 2017 gemiddeld 60% van de activiteiten) en was daarmee een van de belangrijkste activiteiten
Perspectief op doorontwikkeling: onderwijsvernieuwing
28
0
2
4
6
8
10
12
helemaal mee eens mee eens neutraal niet mee eens
De rol van mijn PPS op het gebied van onderwijsinnovatie moet worden versterkt
Perspectief op doorontwikkeling: praktijkgericht onderzoek
29
0
1
2
3
4
5
6
7
8
9
10
helemaal mee eens mee eens neutraal niet mee eens
De rol van mijn PPS op het gebied van onderzoek moet worden versterkt
Perspectief op doorontwikkeling: innovatie beroepspraktijk
30
0
1
2
3
4
5
6
7
8
helemaal mee eens mee eens neutraal niet mee eens
De rol van mijn PPS op het gebied van innovatie van/met de beroepspraktijk moet worden versterkt
Perspectief op doorontwikkeling: strategische agenda
31
0
1
2
3
4
5
6
7
8
9
10
helemaal mee eens mee eens neutraal niet mee eens
Mijn PPS speelt een strategische 'agendasettende' rol in de relevante thematiek/ sector(en)
Perspectief op doorontwikkeling: organisatie en financiering
32
0
2
4
6
8
10
12
14
helemaal meeeens
mee eens neutraal niet mee eens helemaal nietmee eens
Door ontwikkeling van mijn PPS in de komende jaren is organisatorisch en financieel geborgd
Perspectief op doorontwikkeling: samen werken (in opdrachten)
33
0
2
4
6
8
10
12
helemaal mee eens mee eens neutraal helemaal niet meeeens
Samenwerking binnen de PPS wordt gecontinueerd / er komen vervolgopdrachten
PILOTS PEER REVIEW
Peer review – aanpak en methodiek
© The Innovation Family 35
Aanpak
› Voorbereiding:
› 4 ‘peers’ bestuderen beschikbare documenten (businessplan, jaarverslagen etc.)› Voorbespreking en kalibratie
› Interviews op locatie: Spreken een hele dag met een dwarsdoorsnede van een CoE:
› Studenten› Docenten› Onderzoekers› Klanten en partners uit het werkveld› Medewerkers van het organisatiebureau
› Analyse en verslag:
› Observaties en suggesties voor versterking en doorontwikkeling
› Gebruikmakend van het door de Centres en Katapult gezamenlijk ontwikkelde “framework peer review”
› Gemiddelde doorlooptijd (van inlezen tot rapporteren): 4 weken
36© The Innovation Family
Processtappen
• Inplannen van de interviews
• Doornemen van de documentatie en voorbereiden van de interviews door peer reviewers
• Bezoek aan het PPS en het houden van de interviews
• Terugkoppeling van de eerste indrukken aan einde van het bezoek
• Opstellen van het peer review rapport met aanbevelingen
• Afstemmen met de directeur van het PPS
• Terugkoppel-bijeenkomst met de PPS
• Evalueren van de peer review
• PPS gaat aan de slag met de uitkomsten van de peer review
• Aanvragen van peer review en definiëren van hulpvragen door PPS
• Formeren van peer review team en overall planning
• Opsturen van achtergrond informatie
Intake
Voorbereiding
Bezoek PPS
Terugkoppeling
Evaluatie & Follow-up
© The Innovation Family
Peer review model
38
Why
What
Who
How
Peer review is een methode om de kwaliteit van werk te verbeteren, verifiëren of controleren door het werk te onderwerpen aan de kritische blik van een aantal gelijken, meestal vakgenoten of collega’s
Centra kunnen zo zichzelf en elkaar scherp houden en erop toezien dat PPS activiteiten aan gedeelde kwaliteitsstandaarden voldoen
Bouwsteen in storytelling
© The Innovation Family
Wat is het niet
© The Innovation Family
Framework/ groeimodel
40
› De peer review is ontwikkelingsgericht en is geen audit.
› Het is een advies van vakgenoten (directeuren van CoE’s) aan hun collega over de verdere mogelijkheden voor optimaliseren en uitbreiden van de PPS.
© The Innovation Family
41
Analysekader
Scope = PPS
42© The Innovation Family
PILOT:COE TECHFORFUTURE
Peer review team
Joost Degenaar - Voormalig programmadirecteur Centre of Expertise Healthy Ageing
Kees Adriaanse - Programmamanager Centre of Expertise HTSM
Wim Bens - Landelijk Programma Manager Centre of Expertise Logistiek
Corina Kuiper - Expert Katapult
Sander van der Ham - Katapult
44
Review programma
45
Thema Team 1 Team 2
Voorgesprek met directeur/projectleider CoE
Gespreksronde 1 Onderwijs Lector Mechatronica Docent/Onderzoeker Kunststoftechnologie
Gesprekronde 2 Onderzoek Docent/Onderzoeker Mechatronica
Lector Kunststoftechnologie
Gespreksronde 3 Ondernemen Directeur RIWO Product Manager FPI
Lunch + rondleiding (incl. gesprekken met studenten)
Gespreksronde 4 Organisatie Strategisch adviseur Bestuur Hs
Directeur Techniek/Stuurgroep
Directeur academie LED / vz.Stuurgroep
Directeur TechForFuture
Eerste terugkoppeling peer/expertteam (op hoofdlijnen)
Review scope
› The scope van peer review was de gehele PPS (alle activiteiten, capaciteit en faciliteiten binnen het netwerk) en niet alleen het Centre of Expertise als ‘bureau’
› De focus van deze PPS is praktijkgericht onderzoek, waarbij wel meegenomen wordt:
– De doorwerking naar het onderwijs– De doorwerking naar de beroepspraktijk– De doorwerking naar de kennisontwikkelingen
› De belangrijkste actoren zijn– De bedrijven en hun medewerkers– Het onderwijs (hbo, maar ook zal gekeken worden
naar de doorlopende onderzoeks-/onderwijslijn)
– De studenten– De docenten– De lectoraten
46
Ervaringen en opbrengsten: halen enbrengen!
47
Reflectie vanuit het peer-/expertteam
› Intensieve aanpak die loont:
› Goed inlezen en inleven vooraf
› Goede vraagarticulatie vooraf
› Andere succesfactoren:
› Onderling vertrouwen
› Goede afvaardiging van stakeholders
› Wat nemen we mee?
› Brengen en halen: je leert veel van een kijkje in de keuken van een ander CoE
48
Wat heb je er als CoE aan?
Aanpak Katapult: bundeling van impact, kracht van PPS
• 1 Webpage voor individuele en gezamenlijke benchmarking
• 2 Peerreviews
• 3 Storytelling
49
Hoe verder? Vragen en discussie• Wie wil meedoen met een peer review tussen nu en zomer 2020, wie daarna?
• Wie wil als peer mee gaan doen (en daar een korte training voor volgen?)
• …….
51