Onderwijsevaluaties UHasselt

2013-2014

Agenda

Context

Methodologie & instrumenten

Vragenlijst opleidingsonderdelen

Tijdspad

Rapportage

Volgende stappen

2

Nood aan optimalisatie van onderwijsevaluatie

Vaststellingen Nood aan verbetering

• Kwantitatieve instrumenten (enquêtes) • veelheid aan vragen en templates • analyses en conclusies op

instellingsniveau niet mogelijk • geen opvolging van evoluties in de

tijd • geen vergelijking van percepties

van de verschillende stakeholders • geen overzichtelijke rapporten met

alarmfuncties • Kwalitatieve instrumenten

• Vooral (enkel) op OPO niveau

• Coherent enquêteringssysteem om kwaliteit van onderwijs op verschillende niveaus op te volgen: • Instelling • Opleiding • Opleidingsonderdeel • Lesgever

• Mening bij de verschillende stakeholders • Studenten • Personeel • Afgestudeerden/alumni • Werkveld (o.m. stage bedrijven)

Uitbreiden van instrumenten, o.a. ontwikkelen van generieke vragenlijsten met signaalfunctie naar verschillende actoren

Nakende instellingsreview → analyse bestaande instrumenten

3

Methodologie

Uitbreiden van vragenlijsten &

ontwikkelen van generieke vragen

met signaalfunctie naar verschillende

actoren

Vaste antwoordcategorieën

Gestandaardiseerde vragenlijsten

Koppeling met databank en studiegids

Matrix rubrieken / soorten ! Gepaste rapportering naar actoren

Onderwijs- en internationaliseringsbeleid

als kader

• 6-puntenschaal & geen mening/nvt • grenswaarden gedefinieerd met stat →uniforme vergelijking tussen verschillende rubrieken en vragenlijsten

Speerpunten beleidsplannnen (academische, professionele & internationale gerichtheid) → Signaalfunctie: opvolgen van evolutie in de loop van modeltraject → Negatieve antwoorden ≠ neg. betekenis

• Koppeling met: • de te bereiken eindcompetenties • de vooropleiding van de student • de begrote studietijd van OPO • …

→ Mogelijkheid tot verdere analyses

• Geen beoordeling van lesgevers in vragenlijst OPO

• aparte systeem voor doceergedrag vormt een luik van de beoordeling van de docenten

Aparte systeem voor doceergedrag

4

Aanmerkingen

Ontsluiten van resultaten naar bevraagde doelgroep

Signaalfunctie

Algemene opstelling vragenlijsten

Verder kwalitatief of kwantitatief onderzoek

Opleidings-(onderdeel)specifieke vragen

5

6

RUBRIEK

TRIAL 2 3 4 5 Nog te bepalen

OP

O

STU

DEN

T

OP

LEID

ING

STU

DEN

T

OP

LEID

ING

DO

CEN

T

OP

LEID

ING

ALU

MN

I

OP

LEID

ING

WER

KV

ELD

OP

O

DO

CEN

T

DO

CEE

R-

GED

RA

G

A. Doelstellingen & voorkennis x x x x x x

B. Studeerbaarheid x x x x x

C. Digitale leeromgeving x x x x x

D. Studiemateriaal x x x x x

E. Werkvormen x x x x x x

F. Evaluatie x x x x x x

G. Samenhang x x x

H. Academische gerichtheid x x x x x x

I. Professionele gerichtheid x x x x x x

J. Internationale gerichtheid x x x x x x

K. Studie- en trajectbegeleiding x x

L. Kwaliteitszorg x x x

M. Onderwijsorganisatie x x x x

N. Infrastructuur x x x x

O. Doceergedrag x

P. Alumniwerking x

Q. Keuze opleiding/instelling x

R. Aanwerving / Tewerkstelling x x

S. Betrokkenheid werkveld x

Y. Algemene tevredenheid x x x x x x

Y. Open invulvak x x x x x x x

Z. Opleidingsspecifieke vragen x x x x x x

Vragenlijst: OPO – studenten RUBRIEK VRAAG

A. Doelstellingen &

voorkennis

A1 In de loop van de onderwijsperiode werd me duidelijk welke eindcompetenties (d.i. kennis, inzicht, vaardigheden en attitudes) ik in dit opleidingsonderdeel moest verwerven.

A2 Ik had voldoende voorkennis om dit opleidingsonderdeel te kunnen verwerken.

B. Studeerbaarheid B1 De feitelijke studietijd (d.i. contacturen, zelfstudie…) was in verhouding met

de begrote studietijd (zie info bovenaan).

C. Digitale

leeromgeving

C1 Het gebruik van de digitale leeromgeving verhoogde de mate van interactie

(discussieforum, feedback…) tussen studenten en docenten.

D. Studiemateriaal D1 Het studiemateriaal (d.i. studieleidraad, blokboek, handboek, reader,

cursustekst, syllabus, oefeningenbundel, info op digitaal leerplatform… )

bood voldoende ondersteuning bij het studeren.

E. Werkvormen E1 Er was voldoende variatie in werkvormen (hoorcolleges, werkzittingen,

responsiecolleges, practica, begeleide zelfstudie alleen of in groep,

projecten…).

E2 De gebruikte werkvormen hebben mij geholpen om de beoogde

eindcompetenties te verwerken.

E3 Er werden voldoende werkvormen gebruikt die aanleiding gaven tot interactie.

F. Evaluatie F1 Bij dit opleidingsonderdeel was duidelijk hoe de evaluatie zou gebeuren.

F2 De beoordelingscriteria van het examen toetsten de beoogde competenties

(d.i. kennis, inzicht, attitudes en vaardigheden) opgedaan tijdens dit

opleidingsonderdeel.

7

RUBRIEK VRAAG F. Evaluatie

F3 Er werd mij tijdens dit opleidingsonderdeel de mogelijkheid aangeboden om

mijn vorderingen na te gaan (via vraagstelling aan de docent, oefeningen,

discussiefora, tussentijdse (zelf)toetsen...). F4 Tijdens de onderwijsperiode kreeg ik voldoende feedback over mijn

vorderingen.

H. Academische

gerichtheid

H1

In dit opleidingsonderdeel heb ik kunnen kennismaken met recente

ontwikkelingen in het vakdomein. H2 In dit opleidingsonderdeel heb ik kunnen kennismaken met

onderzoeksmethoden. H3 In dit opleidingsonderdeel kreeg ik de gelegenheid om

onderzoeksmethoden toe te passen.

I. Professionele

gerichtheid

I1 Dit opleidingsonderdeel besteedde aandacht aan vaardigheden relevant

voor het functioneren op de arbeidsmarkt of de uitoefening van het beroep.

J. Internationale

gerichtheid

J1 In dit opleidingsonderdeel werd ik gestimuleerd tot het opdoen van

buitenlandse ervaringen. J2 In dit opleidingsonderdeel werd ik gestimuleerd om in contact te komen met

buitenlandse studenten.

M. Onderwijsorganisatie M1 Dit opleidingsonderdeel was goed georganiseerd.

N. Infrastructuur N1 De kwaliteit van de infrastructuur (leslokalen, ICT, labo’s…) was goed.

Y. Algemene tevredenheid Y1 Globaal genomen ben ik tevreden over dit opleidingsonderdeel.

Y. Open invulvak Y2 Heb je nog bemerkingen bij dit opleidingsonderdeel?

Z. Opleidingsspecifieke

vragen

Z1 Maximum 5 vragen toe te voegen door onderwijsteam Z2

Z3

Z4

Z5

Eindcompetenties Vragen: eindcompetenties Opleiding 8

Doelgroep Onderwerp Bevragingscyclus Moment

Student Opleidings-

onderdeel

Tweejaarlijkse cyclus Aan het einde van de

onderwijsperiode

Student Opleiding Jaarlijks bij diplomastudenten Mei/juni

Docent Opleiding Minimum om de 3 jaar:

Midreview - ZER

Mei/juni

Alumni Opleiding Afstuderen + 3 jaar / + 6 jaar Door de opleiding te bepalen

Werkveld Opleiding Om de 6 jaar Door de opleiding te bepalen

Docent Opleidings-

onderdeel

Tweejaarlijkse cyclus Parallel met studentenbevraging

opleidingsonderdeel

Student Doceergedrag Jaarlijks over alle docenten van

betreffende opleidingsonderdelen

Januari + juni

Overzicht bevragingscyclus en –momenten

9

Voorlopige Rapporten

3 verschillende rapporten:

1. Detailrapport: weergave van proporties, gemiddelde, mediaan, standaarddeviatie, responsgraad en aanduiding kritische waarde in staafdiagram

2. Profiellijnrapport: weergave van proporties, gemiddelde, mediaan, standaarddeviatie, responsgraad en aanduiding kritische waarde per rubriek d.m.v. profiellijnen

3. Dashboard: highlevel weergave van proporties per rubriek per vragenlijst in taartdiagram

10

Voorb

eeld

: deta

il r

apport

(1)

11

Voorbeeld: profiellijn rapport (2)

12

Voorbeeld: dashboard rapport (3)

13

Naam opleidingsonderdeel

1 2 3 4 5 Nog te bepalen

OP

O

STU

DEN

T

OP

LEID

ING

STU

DEN

T

OP

LEID

ING

DO

CEN

T

OP

LEID

ING

ALU

MN

I

OP

LEID

ING

WER

KV

ELD

OP

O

DO

CEN

T

DO

CEE

R-

GED

RA

G

Voor wie is de

vragenlijst bestemd?

Studenten Studenten Docenten Alumni Werkveld

Docenten Studenten

Wie krijgt de resultaten van de bevraging?

Studenten x x

Docenten van opo/opl. x x x x x

Co-titularis x x x

Coördinerend

verantwoordelijke x x x

OMT leden x x x x x x

OMT- voorzitter x x x x x x x

Docentenevaluatie-

commissie x

Decaan faculteit x x x x x x

Werkveld x

Alumni x

Instelling x x x x x x x

Matrix: rapportage van resultaten aan actoren

Ondersteuning bij implementatie

Toelichting van nieuwe onderwijsevaluatiesysteem in faculteiten

Handleiding voor SLB: opzetten onderwijsevaluatie

Handleiding voor OMT/Coördinerend verantwoordelijke: onderwijsevaluatie opleidingsonderdeel voor studenten

15

IMPLEMENTATIE VRAGENLIJSTEN

2013 2014

Q4 Q1 Q2 Q3 Q4

Student

OPO

Alumni

Opleiding

Werkveld

Opleiding

Student

Opleiding

Docent

Opleiding

Docent

OPO

Student

Doceergedrag

Validatie Trial Implementatie Volgende stappen

16

I V T

I V T

I V T

I V T

I V T