Ken uw klanten: van Groene Kaart naar Learning Analytics - Hans Janssen - HO-link 2014

Ken uw klantenVan ‘Groene Kaart’ tot ‘Learning Analytics’

HO-link 2014

Hans Janssen, SaNS Expertisecentrum

Remco van Dam, Oracle Business Analytics

Agenda

• Ken uw Klanten! Waarom?

• Klantgegevens

• Kennis van de klant

• Kennis van de klantgroepen

• Dashboard en lijsten in het SIS

• Managementoverzichten met DWH

• Toekomst voorspellen?

• Combinatie: Oracle’s Student Information Analytics

HO-link 2014 - Ken uw Klanten 2

SaNS: Samenwerking Nieuw SIS

SaNS: Samenwerking Nieuw SIS

• 4 HO-instellingen: TiU, HvA, UvA, Leiden

• 120.000 studenten

• 10.000 docenten en studiebegeleiders

• 1200 administratieve medewerkers

• Oracle’s PeopleSoft Campus Solutions

• Zowel Inschrijf als Volg

• Live sinds 2009/2011

• Instellingen gebruiken ‘Vanilla SaNS-CS’

• Gezamenlijk beheer en onderhoud

• Beheer ondergebracht bij SaNS-Expertisecentrum


Stamkaart


Ken uw Klanten! Waarom?

• Identificatie

• Formele vastleggingen: betaling, inschrijving, resultaten, diploma’s

• Studievoortgang

• Risico-inschatting

• Opsporen van ‘drenkelingen’ en ‘talenten’

• Gerichtere begeleiding en advies

• Verbeteren van onderwijs/curriculum


Ken uw klantgroepen! Waarom?

• Voor analyses kijk je naar groepen

• Gemiddeldes van groepen:

– Studievoortgang, uitvalpercentages

– Om onderling te vergelijken, benchmarks

– Vaak terugkijkend op een studiejaar of een studie

– Helpt dan om het onderwijs te verbeteren

– Managemenrapportages, 1cHO

• Rangorde binnen groepen

– Om binnen een groep verschillen op te sporen

– Helpt om ‘achterblijvers’ op te sporen

• Groepen naar kenmerk

– Alle VWO-ers, alle meisjes, iedereen met minder dan een 7 voor wiskunde

– Helpt om risico’s in te kunnen schatten

– Learning Analytics


Beschikbare gegevens

In het SIS: detailgegevens

• Toetsresultaten (Ook de deelresultaten? En op tijd?)

• Vooropleidingen (Allemaal?)

• Examencijfers

• Correspondentie

• Studieadviezen

• Notities begeleiders

1cHO (Een Cijfer HO): cohortgegevens (en eigen studenten)

• Studieduur

• Inschrijvingsjaren

• Diploma’s


Klanten en klantgroepen op basis SIS

• Overzicht met gegevens per ‘klant’

– Vooropleidingen

– Toetsresultaten

– Aanwezigheid

– Studieadviezen

• Overzichten per ‘cohort’ of andere groep

– Gemiddelde voortgang

– Slaag- en uitvalpercentages

– Studieduur

• Overzicht per lid van een groep

– ‘Voorlopers’ en ‘achterblijvers’ opsporen


Situatie in PeopleSoft Campus Solutions

• Informatie zit in losse componenten

• Geen compleet plaatje


Stamkaart Leiden


Policy van Oracle


• Oracle levert niet meer alle specifieke functionaliteit …

• … maar wel de ‘tools’ om dat zelf te realiseren:

– Workcenter

– Related Content

– Notification Framework

– Activity Guides

– Rules Engine

– Common Attribute Framework

• Vergt eigen creativiteit

– Specifieke eigen wensen koppelen aan CS-mogelijkheden (‘maatwerk’)

• Meestal door functioneel beheerder in te richten (geen ‘Maatwerk’)

• Maar vaak betere functionaliteit met kleine (maatwerk)aanpassingen

Related Content en Workcenters

• Informatie over studenten en hun inschrijvingen zit verspreid

• Met ‘Related Content’ kun je gegevens combineren:

– Combinatie maken van bestaande pagina’s met informatie

– Kan een functioneel beheerder zelf maken

– Elke groep gebruikers z’n eigen combinatie

• Met ‘Work Centers’ makkelijk toegang tot je ‘werklijst’

– Work Center opent met een lijst/grafiek met ‘onderhanden werk’

– Aanklikken opent de juiste pagina voor mutaties

Basisstructuur en indeling Campus Solutions blijft overeind …

… maar per gebruiker kunnen handige combinaties worden gemaakt.


Workcenter voorbeeld 1


Workcenter voorbeeld 2


Workcenter HvA Verzoekschriften


Dashboard Student


Managementrapportages: UvAdata

• Datawarehouse-oplossing

• Brongegevens: SIS en 1cHO

• Cohortanalyses

• Ook inzoomen op individuele studenten

• Inclusief recente gegevens uit het SIS

• Geen ‘studentendashboard’

• Eerste aanzet voor analyse risicofactoren


Managementrapportages: UvA-Data (SIS)


diploma binnen nominale tijd

had genoeg punten om binnen

nominale tijd te kunnen afstuderen

studeren op een tempo waar ze

binnen 4 jaar kunnen afstuderen

Managementrapportages: UvA-Data (1cHO)


Managementrapportages: UvA-Data (individu)


UvA-Data (Learning Analytics)


Learning Analytics

• Andere doelgroep

– Gericht op studenten en hun leerproces, ipv logistiek/financien

– In kaart brengen welke factoren studiesucces bevorderen

• Breder gegevensgebruik

– Gegevens uit SIS

– Gegevens uit ELO, DLWO, portfolio (klikgedrag)

– Gegevens uit testen en enquetes

– Gegevens uit Social Media

• Kern is ‘modelvorming’

– Relatie tussen kenmerken en studiesucces

– Effect van interventie

– What-If analysee

– Veel energie in verifiëren van modellen en hypotheses


Learning Analytics (SIS-link 2013, Theo Bakker)


Segmentatie:

Student Attitude Data

(SATs, current GPA, etc.)

Student Demographic

Data (Age, gender, etc.)

Sakai Event Log Data

Sakai Gradebook Data

SIS

Data

LM

S D

ata

Learning Analytics proces

Predictive ModelScoring

Identifies students “at risk” to not complete

course

Intervention Deployed“Awareness” or Online

Academic Support Environment (OASE)

Academic Alert Report (AAR)

Model DevelopedUsing Historical Data

Vergelijking Tools


Aspect SIS Rapp DWH LA

Dashboard individuele studenten +(+) ++ + +

Dashboard voor groepen (+) ++ ++ ++

Real-time gegevens ++ ++ ? ?

Opsporen ‘drenkelingen’ en ‘talenten’ +(+) ++ + +

Benchmarking intern + ++

Benchmarking landelijk - - ++

Risico-analyse (+) + ++

What-if scenario’s +

Communicatie met studenten ++ - - -

Individuele adviezen ++ + - +

Activiteit binnen studie - - - +

Oracle Student Information Analytics

• Onderdeel van Oracle Business Intelligence

• Datawarehouse met gegevens uit Campus Solutions

• Kan ook gegevens uit andere systemen ontsluiten

• Rapportagetool met kennis van Campus Solutions

• Groot aantal standaard rapportages

• Dashboard voor studenten zelf

• Autorisatie wordt overgenomen uit CS

• Doorklikken naar detailgegevens

• Doorklikken naar het SIS zelf

• Eindgebruikers kunnen zelf rapportages aanpassen


SIA: gelaagdheid


Metrics in Physical

Warehouse

Metrics in Logical

Layer

Metrics in Subject

Areas

Metrics used in

Reports and

Dashboards

Measures from physical columns in

data warehouse

Aggregations, time series calculations and derived calculated measures extend physical measures

Subset of logical measures are exposed in presentation layer

Not all measures in presentation layer used in

reports & dashboards

Typical Effort & Customization balance

• Typical Effort & Customization balance

Extension of DW Schema for

extension columns, additional tables,

aggregates, indices, etc.

Extension of ETL for extension

columns, descriptive flexfields,

additional tables, etc.

Additional derived metrics, custom drill

paths, exposing extensions in physical,

logical and presentation layer, etc.

Additional dashboards and reports, guided

and conditional navigations, iBots, etc.

Level of

Effort

Degree of

Customization

Easy

Moderate

Intermediate

Involved

Dashboards & Reports

OBIEE Metadata

DW Schema

ETL

Inhoud Oracle Student Information Analytics

Admissions &

Recruiting

Admission Application

Admissions Funnel

Application Evaluation

Application Status

External Academic

Summary

External Test Scores

Student Recruiting

Student Response

Transfer Credit Snapshot

Student Records

Academic Class

Academic Plan Summary

Academic Program Details

Class Enrollment

Class Instructor

Class Meeting Pattern

Enrollment Requests

Institution Summary

Student Degrees

Term Enrollments

Student Financials

Credit History

Payment Details

Payments and Charges

Cross Reference

Transaction Details

Financial Aid - Award

Disbursement

Financial Aid - Award

Summary Snapshot

Dashboards Dashboard Pages Reports Metrics

4 18 150+ 387

Dashboards


Admission voorbeeld


Student Selfservice: behaalde resultaten


Ken uw klanten: van Groene Kaart naar Learning Analytics - Hans Janssen - HO-link 2014

Education

Transcript of Ken uw klanten: van Groene Kaart naar Learning Analytics - Hans Janssen - HO-link 2014