PASTEL - Home | LUMC200704-200706 Rapportage PASTEL.doc Last saved: 8/20/2007 4:06 PM - 3 -...

Voortgangsrapportage April t/m juni 2007

PASTEL

Professionele Accreditatie en Schaalvergroting van Toepassing van Elektronische Leerobjecten

Penvoerende instelling: Universiteit Leiden, LUMC Participerende instellingen: Universiteit Leiden, Boerhaave Commissie Rijksuniversiteit Groningen, Wenckebach Instituut Radbouduniversiteit, Heyendael Commissie

Datum: 20 augustus 2007 Kenmerk: 200704-200706 Rapportage PASTEL.doc

200704-200706 Rapportage PASTEL.doc Last saved: 8/20/2007 4:06 PM

- 2 -

Inhoudsopgave Inhoudsopgave ........................................................................................................................................... 2 Samenvatting .............................................................................................................................................. 3 Doelstelling ................................................................................................................................................. 3 Standlijnen overzicht ................................................................................................................................. 4 Voortgang per fase..................................................................................................................................... 4

Fase 1 Opstellen accreditatie procedure .................................................................................................. 4 Fase 2 Selectie lessen.............................................................................................................................. 5 Fase 3 Koppeling MedischOnderwijs.nl aan ELO’s.................................................................................. 7 Fase 4 Lessen accrediteren...................................................................................................................... 7 Fase 5 Integratie accreditatie in MedischOnderwijs.nl ............................................................................. 7 Fase 6 Inzet en evaluatie.......................................................................................................................... 7

Continuering ............................................................................................................................................... 8 Stuurgroep ................................................................................................................................................ 8

Kennis disseminatie................................................................................................................................... 8 Knelpunten.................................................................................................................................................. 9 Kostenoverzicht........................................................................................................................................ 10

Declaratie ................................................................................................................................................ 12 Bijlagen...................................................................................................................................................... 13

Bijlage evaluatie pilot selectie e-modules ............................................................................................... 13 Bijlage plug-ins in MedischOnderwijs.nl ................................................................................................. 20 Bijlage netwerk-poorten MedischOnderwijs.nl........................................................................................ 20 Bijlage documentatie ELO koppeling...................................................................................................... 21 Bijlage beoordelingen ............................................................................................................................. 23 Bijlage abstract NVMO congres.............................................................................................................. 50


- 3 -

Samenvatting In dit tweede kwartaal van het PASTEL project is een pilot van tien e-learning modules beoordeeld en geëvalueerd door de drie participerende PAOG’s. De beoordelingsformulieren zijn aangepast. De beoordelings- en selectieprocedure is vastgesteld. Allerlei mogelijke koppelingen met de e-modules in MedischOnderwijs.nl zijn onderzocht en sommige daarvan reeds uitgetest. De netwerkpoorten die open moeten staan voor gebruik van MedischOnderwijs.nl alsook de plug-ins die geïnstalleerd moeten worden leveren in dit stadium nog ongemakken op. Er wordt volop gewerkt aan oplossingen. Ook voor het vertrek van twee projectmedewerkers is reeds een oplossing gevonden. De stuurgroep stelde gemeenschappelijke doelen vast omtrent hoe ze de e-modules willen aanbieden en de PR daaromtrent.

Doelstelling Het merendeel van de medische faculteiten van Nederland gebruikt voor de distributie en registratie van Computer Ondersteund Onderwijs (COO) momenteel MedischOnderwijs.nl voorheen het Registratie Systeem, LRS.Net). Dit wordt tijdens de basisopleiding tot arts aangeboden via Internet op http://medischonderwijs.nl. De basisopleiding is echter slechts het begin. Het beroep van arts evolueert zo snel dat hierop de uitdrukking “een leven lang leren” van toepassing is(1). Medische specialisten behouden slechts hun licentie wanneer zij door middel van bij- en nascholing voldoende accreditatiepunten halen. Voor deze doelgroep is het volgen van cursorisch onderwijs, zoals cursussen en symposia lastig met het werk te combineren. Daarnaast bestaat een grote behoefte aan self-directed leren, waarbij de arts zelfstandig de lacunes in kennis en vaardigheden die hij bij de uitoefening van het beroep constateert kan opvullen. De medische nascholingsinstituten hebben deze behoefte onderkend en willen het onderwijsaanbod uitbreiden met individueel, plaatsen tijd onafhankelijk e-learning modules (e-modules). Het ligt voor de hand om naast de ontwikkeling van eigen onderwijsmateriaal, de service van MedischOnderwijs.nl hiertoe uit te breiden, zodat ook artsen hiervan gebruik kunnen maken in het nascholingstraject. Het aanbod van COO dat via MedischOnderwijs.nl voor handen is moet echter wel voldoen aan de standaarden van de specialistenverenigingen, wil het volgen hiervan accreditatie punten opleveren. Het onderwijsmateriaal moet hiertoe eerst door de nascholingsinstituten zelf beoordeeld worden. Een positief neveneffect van deze beoordeling is dat het medisch inhoudelijke niveau van het bestaande COO hierdoor beter wordt vastgelegd en de status van beoordeelde lessen toeneemt. Het ter beschikking stellen van MedischOnderwijs.nl met het daarin aanwezige COO ter beoordeling en gebruik door de nascholingsinstituten in ruil voor een toegenomen status van dit materiaal lijkt dan ook een eerlijke. Het gezamenlijke gebruik van e-modules binnen de medische basis- en vervolgopleidingen verhoogt de inzet en kwaliteit van de bestaande COO middelen en heeft tevens een aanzuigende werking op de rest van het medische opleidingscontinuüm, zoals de verpleegkunde en paramedische opleidingen. Door het opschalen van MedischOnderwijs.nl van de basisopleiding naar de vervolgopleidingen wordt de doelgroep direct verviervoudigd. Tevens wordt de weg gebaand voor aansluiting met andere medisch georiënteerde opleidingen.

http://medischonderwijs.nl/


- 4 -

Standlijnen overzicht Het oorspronkelijke standlijnen overzicht uit het Controlling Document is uitgebreid met een weergave van het aantal lessen dat binnen een bepaalde fase gerapporteerd wordt. Fase 1 Fase 2 Fase 3 Fase 4 Fase 5 Fase 6 Accreditatie

procedure Selectie lessen

Koppeling MedischOnderwijs.nl-ELO

Lessen accrediteren

Integratie accreditatie-MedischOnderwijs.nl

Inzet en evaluatie

Jan 2007 Feb 2007 Mrt 2007 Apr 2007 10 Mei 2007 3

Juni 2007 3 Juli 2007 20 4 Aug 2007 4 Sept 2007 6 Okt 2007 20 6 Nov 2007 6 Dec 2007 4 Jan 2008 20 6 Feb 2008 8 Mrt 2008 8 Apr 2008 20 8 Mei 2008 8

Juni 2008 10 8 Juli 2008 4 Aug 2008 6 Sept 2008 8 Okt 2008 Nov 2008 Dec 2008

Geen activeit

Geplande activiteit

Geplande deliverable

Voortgang activiteit

Legenda

20

Voortgang per fase

Fase 1 Opstellen accreditatie procedure In de eerste maand van dit kwartaal zijn de accreditatieprocedure en de inhoudelijke beoordelingscriteria vastgesteld. De nieuwste versie van het accreditatieformulier werd rondgestuurd. De onderwijskundige beoordelingscriteria zijn aangepast en het aangepaste formulier verstuurd. De huidige versies staan gepubliceerd in het projectlogboek (http://www.lumc.nl/pastel/logboek/logboek.html). Binnen het project spreken we over het beoordelen van een e-module oftewel de vooraccreditatie. Pas als de drie beoordelingen hebben plaastgevonden is de e-module voorgeaccrediteerd en kan je ze eventueel laten accrediteren bij een beroepsvereniging. De beoordeelde e-module kent dan al het kwaliteitskeurmerk zoals dat is opgesteld door de nascholingsinstituten.

Beoordelingen pilot selectie (10 e-modules) Om praktische redenen zijn er veranderingen opgetreden in de pilot-selectielijst. Vanwege de problemen met het RDP-protocol en het uittesten van benodigde plug-ins op thuis-PC (waarbij het een aanname is, wat er op de standaard thuis-PC staat), richt het Wenkebach Instituut zich in eerste instantie op modules die zonder plug-ins werken. Dit zijn er zo’n 45.

http://www.lumc.nl/pastel/logboek/logboek.html


- 5 -

Boerhaave had tijdproblemen want bij de geselecteerde e-modules was het moeilijk om artsen voor de beoordeling te vinden. De volgende eerste tien e-modules zijn in de afgelopen periode beoordeeld: ID Naam Instituut 30 TRC Pharmacology Database LUMC 93 DPS:Dermatologie 01 De nasleep van een kraambeen LUMC 447 Functieonderzoek van de gewrichten LUMC 391 Injury: Dat doet ie anders nooit UMCG 406 Injury: Uitglijder UMCG 415 CASK: Aneurysma Aorta Abdominalis UMCG 404 Injury: Scheiding UMCG + LUMC 494 DPS: KRUL Casus 23N Door de rug gegaan : Lage rugpijn UMCN 851 Wachtkamer : Genetisch syndromen UMCN 873 Schotwond : Patient met een schotwond in de thorax UMCN

Evaluatie beoordelingen pilot selectie Op de vergadering van 19 juni 2007 zijn de eerste beoordelingen van alle drie de PAOG’s over pilot e-modules besproken (zie bijlage). Hieruit blijkt onder andere dat het lastig kan zijn om het medisch inhoudelijke en de onderwijskundige beoordeling samen te voegen. Het eindoordeel van de artsen blijkt erg verschillend. Wellicht moet er een sleutel komen voor dit eindoordeel. Het ontbreken van de setting waarin het onderwijs in principe wordt gevolgd blijkt een probleem; hierdoor wordt vaak negatief beoordeeld op bijvoorbeeld het leerdoel en de diepgang van de e-module. Waarschijnlijk biedt het de beoordelaar nuttige extra informatie, wanneer het oorspronkelijke leerdoel en de setting meegegeven wordt in een beschrijving, zodat beoordelaars zich een indruk kunnen vormen van de leeromgeving en het leerdoel waarvoor de e-module is gemaakt. Op grond van de eerste ervaringen is een nieuwe versie ontwikkeld van het medisch-inhoudelijk beoordelingsformulier. Aan het begin is het leerdoel en de setting/leeromgeving van het huidige gebruik vermeld als achtergrondinformatie. Aan het eind van het formulier zijn twee vragen toegevoegd: Voor welk leerdoel ten behoeve van de nascholing vind men de e-learning module geschikt ?, In welke setting / leeromgeving ziet men mogelijkheden voor deze e-learning module (eventueel in combinatie met andere e-learning modules) ? De projectmedewerkers zullen in de komende periode telefonisch contact opnemen met de beoordelaars van de eerste 10 modules. Dit om het nieuwe formulier te laten beoordelen en om de beoordelaars te vragen of zij op basis van deze extra informatie hun beoordeling zouden willen herzien. Er zijn e-modules waarbij de leerdoelen bewust niet in de e-module zelf worden geplaatst. Die moeten dan op een andere manier beschikbaar worden gesteld.

Fase 2 Selectie lessen De selectieprocedure en selectiecriteria zijn definitief vastgesteld. De huidige versies zijn terug te vinden in het projectlogboek (http://www.lumc.nl/pastel/logboek/logboek.html) Na de selectie van de eerste 10 e-modules, zullen er zo’n 100 cursussen voorgeaccrediteerd worden als target voor de projectperiode. Een planning van deze selectie is te vinden in het standlijnenoverzicht. Wanneer medischonderwijs.nl niet genoeg materiaal biedt dat inhoudelijk overeenkomt met de wensen van de instellingen dan gaan we eerst na of er nog eigen materiaal beschikbaar gesteld kan worden aan medischonderwijs.nl en gaan dan dat beoordelen.

Selectie 20 nieuwe e-learning modules Voor dit kwartaal heeft elke PAOG nieuwe e-modules geselecteerd. De volgende lijst van 20 e-modules zal in de komende periode te beoordeeld worden:

http://www.lumc.nl/pastel/logboek/logboek.html


- 6 -

ID Naam Instituut 50 DPS: Dermatologie 02 Een ongewenste souvenir LUMC 67 Kind & Jongere: Kinderdermatologie LUMC 81 DPS: Dermatologie 03 Een vlekje op het hart LUMC 94 DPS: Dermatologie 04 Het glinsterend pantser LUMC 209 DPS: KRUL Casus 05L Een uitgeperste citroen LUMC 795 DPS: Bevlekte Lakens LUMC 105 De oudere (huidcarcinomen) UMCG 416 CASK biomechanica UMCG 418 CASK anatomie linguinal area anterior UMCG 419 CASK anatomie linguinal area posterior UMCG 795 DPS gynaecologie 1: bevlekte lakens UMCG 847 DPS gynaecologie 2: ik kan niet meer zitten UMCG 1004 DPS gynaecologie 4: "Die periode heb ik nu wel gehad" UMCG 637 Hart en bloedvaten UMCN 655 Longen en Luchtwegen; Longlucht UMCN 774 Anatomie in vivo; Anatomie van het bewegingsapparaat UMCN 787 Dokter, ik heb een plekje; Huidafwijkingen UMCN 800 Echos beoordelen; Echocardiografie UMCN 815 Fracturen en Luxaties; Casussen op de spoedeisende hulp UMCN 855 Spreekuur; Klachten van het bewegingsapparaat UMCN

Factoren selectie Wenckebach Medewerkers van het Wenckebach Instituut hebben op thuis-PC’s uitgetest of plug-ins geïnstalleerd moeten worden bij een aantal e-learning modules. Het blijkt dat dit het geval is en in sommige gevallen levert dit echt problemen op met bijvoorbeeld een firewall op de thuis PC. Het blijkt dat daar ook niet een gemakkelijke oplossing voor geboden kan worden. Omdat het Wenckebach Instituut verwacht dat dit ook problemen gaat opleveren bij de PAOG doelgroep, wil het Wenckebach Instituut zich in eerste instantie focussen op e-modules die geen plug-ins gebruiken. Daarnaast zal het Wenckebach Instituut vooral ook zoeken naar e-modules die passen binnen de speerpunten en cursussen die in de komende periode gegeven worden. Heyendael PAOG-Heyendael wilde in eerste instantie de selectie van de e-modules afstemmen op de planning van de cursussen in 2008 (zodat een beoordeelde e-module meteen zou kunnen worden ingezet). Uiteindelijk heeft men er echter voor gekozen voor e-modules met een onderwerp op basisniveau, een onderwerp dat zeer aanspreekt bij de doelgroep en voor modules waarbij beeldmateriaal veel toegevoegde waarde heeft. Een té specifiek of te actueel onderwerp lijkt op dit moment minder geschikt voor e-learning omdat het snel kan verouderen (en dus update moet worden gehouden. Plug-ins De meest gebruikte plug-ins in Medischonderwijs.nl zijn in een lijst opgenomen (zie bijlage). Aan de help funtie voor administrators in MedischOnderwijs.nl is een toevoeging gemaakt waarin per plug-in wordt aangegeven hoeveel e-modules hiervan gebruik maken. Dit wordt actief afgestemd op het instituut dat deze toevoeging opent. Netwerkpoorten Behalve het installeren van plug-ins moet er ook rekening worden gehouden met het openstellen van de betreffende poorten om deze plug-ins ook daadwerkelijk te kunnen runnen. Problemen die optraden bij e-modules die werkten met het zogenaamde RDP-protocol, kunnen worden opgelost door een netwerkpoort (3389) open te zetten .

http://medischonderwijs.nl/LRS.NET/Student/Session.aspx?URL=http://coo.lumc.nl/div1/dps?Case=Dermato%2003&AccountID=@C&AccountName=@N&sessionid=@i@D&LESSONID=81

http://medischonderwijs.nl/LRS.NET/Student/Session.aspx?URL=http://coo.lumc.nl/div1/dps?Case=Dermato%2004&AccountID=@C&AccountName=@N&sessionid=@i@D&LESSONID=94


- 7 -

Een lijstje van netwerk-poorten die (minstens) tussen de deelnemers van MedischOnderwijsnl moet openstaan is opgesteld (zie bijlage). Het feitelijk openstellen is echter niet altijd eenvoudig omdat de betreffende automatiseringsafdelingen bang zijn voor eventuele problemen die uit het openstellen kunnen voortkomen.

Fase 3 Koppeling MedischOnderwijs.nl aan ELO’s De technische informatie die nodig is om bij Heyendael en bij het Wenckebach Instituut de door hen gebruikte webomgevingen te koppelen met MedischOnderwijs.nl is bekend. De mogelijke koppeling van website PAOG-Heyendael aan MedischOnderwijs.nl is vastgelegd: De PAOG-Heyendael website wordt getrust op de “Heyendael-URL”. De bijlage documentatie ELO koppeling is gebruikt als basisdocument bij het maken van een koppeling tussen MedischOnderwijs.nl en de website van PAOG-Heyendael. De Heyendael website kan de benodigde parameters doorgeven aan MedischOnderwijs.nl. Dit zal in een testomgeving verder worden getoetst. In het stuurgroep overleg van PASTEL is ingebracht de vraag hoe moet worden omgegaan met de persoonsgegevens (aanvraag registratiekamer in het kader van wet bescherming persoonsgegevens). Met de RichURL kan je een Blackboard koppeling met MedischOnderwijs.nl tot stand brengen. In de test-omgeving van Nestor, de leeromgeving die binnen de Rijks Universiteit Groningen en het Wenckebach Instituut gebruikt wordt, is de RichURL klaargezet. De test-Nestor heeft een koppeling met MedischOnderwijs.nl. Als deze voldoende is getest staat de weg open om het op de ‘echte’ Nestor te installeren. Er zal mogelijk ook een koppeling gemaakt worden tussen de website van het Wenckebach Instituut en medischonderwijs.nl. Hoe dit precies gerealiseerd gaat worden is nog onderwerp van discussie binnen het Wenckebach Instituut.

Fase 4 Lessen accrediteren Vanuit de beoordelingen van de eerste e-modules zijn ervaringen met inhoudsdeskundigen opgedaan. PAOG Boerhaave heeft een lijst opgesteld van inhoudsdeskundigen (namen verzameld vanuit respons op brief aan afdelingshoofden), die bereid zijn om mee te werken aan beoordelingen. PAOG Heyendael kiest ervoor het netwerk inhoudsdeskundigen aan te spreken en ziet dit als pragmatischer dan een database van mogelijke inhoudsdeskundigen. Als een instantie geen tweede beoordelaar kan werven wordt een beroep gedaan op de andere instantie. In principe gebeurt dit met gesloten beurzen. Het contact verloopt via de locale projectmedewerker voor PASTEL Bij de E-Learning modules gemaakt in de Dynamische Patient Simulator (DPS) hebben inhoudsdeskundigen soms wat problemen met de bediening van het programma, alhoewel een gebruikershandleiding in het programma beschikbaar is. Er is een korte demo (een screencast) gemaakt door Leiden, waarin bedieningsinstructie van de DPS wordt gegeven. Het heet DPS instructie video, is een Windows Media Video bestand en staat op MedischOnderwijs.nl en is ook via de PASTEL projectsite beschikbaar (http://www.lumc.nl/5034/downloads/Documenten/DPS%20Instructie.wmv) Een overzicht van de formulieren van de beoordeelde lessen is te zien in de bijlage.

Fase 5 Integratie accreditatie in MedischOnderwijs.nl In juni 2007 zijn we begonnen met ons te oriënteren op wat er zichtbaar moet worden in MedischOnderwijs.nl van de accreditaties. Wat willen we presenteren in MedischOnderwijs.nl van deze beoordelingen en aan de commissie die accreditatiepunten hiervoor verleent ? Beperken we ons tot een ja-kenmerk bij de e-module en vermelden we dat het geaccrediteerd is en voor hoeveel punten of laten we de beoordeling zien en hoe dan ? De evaluatie van de pilot beoordelingen betekende een aanpassing in de beoordelingsformulieren. De ervaringen met beoordelen zullen in deze fase doorwerken.

Fase 6 Inzet en evaluatie Fase 6 is volgens het standlijnen overzicht nog niet begonnen.

http://www.lumc.nl/5034/downloads/Documenten/DPS Instructie.wmv


- 8 -

Continuering

Stuurgroep Met het vaststellen van de vergaderfrequentie is er een verandering doorgevoerd in de aanpak van aanwezigheid van de stuurgroepleden bij vergaderingen. Er is een aantal stuurgroep vergaderingen afgesproken waarbij in de vergadering een bepaald moment met een aantal specifieke discussiepunten voor de stuurgroep staat gepland. De stuurgroep zal bij dat agendapunt aanwezig zijn. In de stuurgroep vergadering van 19 juni 2007 zijn de volgende discussiepunten aan de orde gesteld: 1. Hoe willen de PAOG’s de E-learning modules aanbieden 2. Hoe worden beoordeelde lessen aangeboden aan de beroepsverenigingen. (dit is niet opgenomen in

het PASTEL project) 3. Hoe willen PAOG’s meer bekendheid geven aan het PASTEL project Ad 1. Hoe willen PAOG’s e-learning aan gaan bieden ? Samengevat zijn de manieren om e-learning in te zetten: 1. ter voorbereiding op een cursus, dwz de e-module wordt ingezet als theoretische basis voorafgaand

aan een cursus 2. via een website beschikbaar als losse onderdelen waar je punten voor kunt krijgen 3. e-modules als onderdeel van een cursus, puttend uit een arsenaal van beoordeelde modules uit

MedischOnderwijs.nl. De cursus commissies van de toekomstige cursussen worden erop gewezen dat http://medischonderwijs.nl e-learning bevat wat ze kunnen inzetten. Bestaande cursussen kunnen ook op bepaalde voorwaarden in zijn geheel uitgewisseld worden, inclusief e-learning gedeelte (voorbeeld hiervoor is vanuit Boerhaave het 3 Speerpunten Vaardigheidsonderwijs snijdend specialisme, M&I Modernisering en innovatie, nascholing NVVA). De geaccrediteerde e-modules kunnen eventueel afgeschermd in paog.net aangeboden worden. Ad 2. E-modules aanbieden ter beoordeling aan beroepsverenigingen ? Zo ja, wanneer ? De algemene mening hierover is dat men liever wil wachten tot in het project voldoende ervaring met de vooraccreditatie is opgedaan. Dan wordt het gesprek met de verenigingen zinvoller. Eerder in het PASTEL project is ervoor gekozen zo dicht mogelijk te blijven bij de accreditatie methoden die door beroepsverenigingen worden gevolgd voor het accrediteren van cursussen. De voor de eerste selectie van 10 e-modules gebruikte beoordelingsprocedure en de beoordelingsformulieren voor de inhoudsdeskundige en onderwijskundige, zijn na de evaluatie van deze pilot bijgesteld. We hebben daarbij onder meer gekeken naar de criteria voor e-learning op de KNMG-website (http://knmg.artsennet.nl/content/resources//AMGATE_6059_100_TICH_R1350411351187212// ). Ad 3. Hoe willen PAOG’s meer bekendheid geven aan het PASTEL project ? Deze vraag staat verder beschreven onder de rubriek kennisdisseminatie.

Kennis disseminatie Tijdens deze rapportage periode zijn er veel plannen rondom PR besproken voor het project PASTEL, dat e-learning modules voor PAOG voorziet van een kwaliteitskeurmerk. De PAOG’s willen een eigen identiteit maken die de samenwerking tussen de PAOG’s betreffende e-learning weergeeft. Hierin worden de eigen logo’s van de afzonderlijke PAOG’s opgenomen. De gemeenschappelijke website, 3www.paog.net , kan hier de hoofdmoot in vormen. De stuurgroep overlegt met de vormgever van paog.net. Reclame zal dan vooral gericht moeten zijn op de eindgebruikers. Congressen kunnen gebruikt worden om andere nascholingsinstituten (nationale en internationale) te informeren en eventueel samen te werken. Onderwerpen voor congresbijdragen kunnen zijn: - Wijze van beoordeling van e-learning modules - Hoe wil je met e-learning omgaan in nascholingscursussen

http://medischonderwijs.nl/

http://knmg.artsennet.nl/content/resources//AMGATE_6059_100_TICH_R1350411351187212//


- 9 -

- Beschikbare beoordeelde e-learning modules Op het NVMO congres zal een lezing over het PASTEL worden gegeven met als titel “naar een beoordelingsstandaard voor medische E-learning modules” (zie bijlage). Binnen het Wenckebach Instituut wordt op verschillende manieren geprobeerd bekendheid te geven aan medischonderwijs.nl Zo is er een tweetal keren een informatiebijeenkomst georganiseerd, de eerste heeft plaatsgevonden, de tweede nog niet. Verder worden artsen op individuele basis benaderd, wanneer door de projectmedewerkers aantrekkelijk materiaal wordt gevonden in medischonderwijs.nl PAOG-Wenckebach heeft een informatie bijeenkomst georganiseerd op het UMCG om bekendheid te geven aan medischonderwijs.nl. Bij elke fysieke Boerhaave cursus wordt gewezen via een URL naar MedischOnderwijs.nl

Knelpunten De netwerkpoorten die open moeten staan voor gebruik van MedischOnderwijs.nl alsook de plug-ins die geïnstalleerd moeten worden leveren in dit stadium nog ongemakken op. Er wordt volop gewerkt aan oplossingen. Voor e-modules gemaakt in DPS en Objector is per 1 januari 2008 geen plug-in meer nodig. Dan zullen deze e-modules webbased gemaakt zijn. Halverwege juni is het vertrek van de projectmedewerkster van PAOG Heyendael gemeld. In Nijmegen is een opvolger reeds gevonden, die begint per 15 juli a.s. De projectmedewerker van PAOG Boerhaave zal 1 september beginnen met een nieuwe baan. Ook hier is reeds een opvolger bekend. Nieuwe projectmedewerkers kunnen zich inlezen in de doelstellingen en voortgang van het project op de projectwebsite, waar via het logboek alle vergadernotulen en andere documenten beschikbaar zijn.


- 10 -

Kostenoverzicht

April 2007 200704

Begroting Gerealiseerde kosten

In rapportage periode

t/m rapportage periode

Restant op begroting

Totaal Materiële kosten 42,600.00 € 0.00 € 2,344.88 € 2,344.88 € 40,255.12 € Gefaseerd personeel Fase 1 en 2 50,166.00 € 45,961.53 € 841.22 € 46,802.76 € 3,363.24 €

Fase 3 en 4 146,278.00 € 0.00 € 15,756.37 € 15,756.37 € 130,521.63 € Fase 5 73,640.00 € 0.00 € 0.00 € 0.00 € 73,640.00 € Fase 6 89,612.00 € 0.00 € 0.00 € 0.00 € 89,612.00 €

Projectoverstijgend personeel Projectleiding/Accountantscontrole 33,552.00 € 4,122.60 € 1,660.69 € 5,783.29 € 27,768.71 € Kennisdisseminatie/Financieel beheer 25,292.00 € 3,269.15 € 382.02 € 3,651.17 € 21,640.83 € Personeel inc.overhead 418,540.00 € 53,353.28 € 18,640.30 € 71,993.58 € 346,546.42 € Subsidie Maximaal 247,345.00 € Restant tot rapportage periode 218,607.06 € Opgevraagd -t/m voorgaande periode 28,737.94 € -in rapportage periode 11,322.93 € -t/m rapportage periode 40,060.88 €

Restant op te vragen 207,284.12 €


- 11 -

Mei 2007 200705




Restant op begroting

Totaal Materiële kosten 42,600.00 € 2,344.88 € 1,886.65 € 4,231.53 € 38,368.47 € Gefaseerd personeel Fase 1 en 2 50,166.00 € 46,802.76 € 742.75 € 47,545.51 € 2,620.49 €

Fase 3 en 4 146,278.00 € 15,756.37 € 14,549.01 € 30,305.38 € 115,972.62 € Fase 5 73,640.00 € 0.00 € 0.00 € 0.00 € 73,640.00 € Fase 6 89,612.00 € 0.00 € 0.00 € 0.00 € 89,612.00 €




- 12 -

Juni 2007 200706




Totaal Materiële kosten 42,600.00 € 4,231.53 € 45.00 € 4,276.53 € 38,323.47 € Gefaseerd personeel Fase 1 en 2 50,166.00 € 47,545.51 € 662.80 € 48,208.30 € 1,957.70 €

Fase 3 en 4 146,278.00 € 30,305.38 € 16,260.65 € 46,566.03 € 99,711.97 € Fase 5 73,640.00 € 0.00 € 0.00 € 0.00 € 73,640.00 € Fase 6 89,612.00 € 0.00 € 0.00 € 0.00 € 89,612.00 €



Declaratie De totale baten voor PASTEL voor deze projectperiode bedragen €32,023.34 Euro en kunnen worden overgemaakt op rekeningnummer 46.41.56.629 t.n.v. Academisch Ziekenhuis Leiden/LUMC te Leiden onder vermelding van Projectnummer 40265/8204


- 13 -

Bijlagen

Bijlage evaluatie pilot selectie e-modules

PASTEL Verslag ‘Beoordeling eerste 10 lessen’

Martijn Molenaar

BOERHAAVE COMMISSIE 12 juni 2007

Inleiding In de periode van 9 mei t/m 13 juni was het de ambitie om voor het PASTEL project tien e-learninglessen te beoordelen. Elke van de drie PAOG’s heeft drie of vier lessen geselecteerd en is verantwoordelijk voor de beoordeling daarvan. Dit document vat de resultaten van deze eerste periode samen, laat de individuele les overstijgende inzichten zien en benoemt de knelpunten. Geselecteerde lessen Boerhaave heeft vier lessen geselecteerd dat zijn: http://medischonderwijs.nl?lessonid=404 Injury: Scheiding (Samen met Groningen) http://medischonderwijs.nl?lessonid=447 Functieonderzoek van de gewrichten http://medischonderwijs.nl?lessonid=93 DPS:Dermatologie 01 De nasleep van een

kraambeen http://medischonderwijs.nl?lessonid=30 TRC Pharmacology Database Ook zal Boerhaave één medisch inhoudelijke beoordeling doen voor de volgende casus van Nijmegen: http://medischonderwijs.nl?lessonid=494 DPS: KRUL Casus 23N Door de rug gegaan:

Lage rugpijn Beoordeling van de lessen De resultaten van de individuele lessen zullen hier, stuk voor stuk, worden weergegeven: Injury: Scheiding Voor deze les heeft Groningen twee medisch inhoudelijke beoordelaars (MIB) en één onderwijskundige (OK) geleverd. Leiden heeft ook een onderwijskundige gevraagd om naar de les te kijken, zodat we nu ook de oordelen van verschillende onderwijskundigen kunnen beoordelen. Een volledige analyse heeft Jetse Gorris gemaakt. Functieonderzoek van de gewrichten (+/-) De MIBs waren erg enthousiast over de video’s, omdat deze een goede recapitulatie zijn van de behandelingen. De OK was minder enthousiast, omdat het meer een instructie is, dan een e-learningprogramma. Er zitten geen opdrachten in, wat het een weinig uitdagende casus maakt. Wel kan dit programma als naslagwerk kunnen worden ingezet. Inhoudelijk was er zeer weinig aan te merken op het programma. DPS:Dermatologie 01 De nasleep van een kraambeen (++) Alle drie de beoordelaars (2 MIBs en 1 OK) geven aan dat het programma geschikt is voor nascholing. Opvallend is wel dat beide MIBs vinden dat het niveau van het programma te laag is voor specialisten.


- 14 -

Gemiddeld doen de MIBs 25 minuten over het programma. De beoordelaars zijn het erover eens dat het programma goed bestuurbaar is. Hierbij moet worden aangetekend dat allen al eerder met DPSen hebben gezien. Qua medische inhoud vinden de MIBs dat het zogenaamde Duplex onderzoek moet worden toegevoegd of dat dit het Doppler onderzoek dient te vervangen. Allen gaven aan dat dit een goede of leuke casus was. Alleen kwam het kraambeen uit de titel verder niet meer ter sprake. De belangrijkste kritiek is dat het voor diegenen die onbekend zijn met DPSen wel eens lastig te maken zou kunnen zijn. TRC Pharmacology Database (+) Vanwege deze omvang is er gekozen om per specialisme twee MIBs te vragen en voor de gehele database een OK. Inmiddels hebben twee MIBs (van verschillende specialismen) een deel van de database beoordeeld. De beoordelaars zien deze database voornamelijk als naslagwerk, meer dan als een zelfstandig e-learningprogramma. De redenen zijn dat deze database wel uitgebreid is, maar dat deze weinig diepte biedt en dat door de omvang deze te groot is om als e-learning aan te bieden. De structuur wordt niet direct als helder ervaren en pas na een paar keer klikken, snappen de beoordelaars de bedoeling. Toch zou deze module prima als naslagwerk voor Co-assistenten en AIOS kunnen fungeren. Voor specialisten voegt de specialistische informatie niets toe, maar de informatie uit andere vakgebieden weer wel. DPS: KRUL Casus 23N Door de rug gegaan: Lage rugpijn (-) Deze DPS is door één LUMC MIB beoordeeld. Deze specialist vond allereerst dat de diagnose te specialistisch is voor een huisarts. Het is volgens hem onrealistisch dat een huisarts weet heeft van bepaalde onderdelen, waar je wel veel punten voor krijgt. Hier sluit zijn commentaar bij aan dat hij zich “soms in de maling genomen voelde, omdat de logica achter sommige handelingen is ver te zoeken.” Goed om op te merken is dat deze arts nooit eerder een DPS heeft gezien. Het lijkt hem logischer om of alleen de diagnose of alleen de behandeling als casus aan te bieden. Nu vindt hij het pad nog te onduidelijk. Beoordeling van de methode Alle artsen gaven aan het commentaar dat ze wilden geven kwijt te kunnen op het beoordelingsformulier. Ook de onderwijskundigen kunnen uit de voeten met het formulier. Het enige commentaar op het onderwijskundig formulier is dat er geen hokje is waar de naam van de beoordelaar en de naam van het programma kan worden geschreven. Wat opviel is dat de laatste vraag: “Is deze module geschikt voor nascholing” niet duidelijk was. Deze zin moeten we heroverwegen. Wat bedoelen we precies? Het is vooral verwarrend, omdat er eerder naar het niveau van het programma wordt gevraagd. Inzichten − DPSen blijken ook goed te kunnen worden ontvangen. De hypothese dat artsen die

vaker met DPSen gewerkt hebben blijken enthousiast te zijn over de structuur. Wel geven ze aan dat er ruimte is voor verbeteringen.

− De oordelen van MIBs en OKen blijken niet altijd in lijn met elkaar. − Het lijkt mij een goed idee als voor enkele casussen de drie betrokken beoordelaars om

de tafel gaan zitten om tot een gezamenlijk oordeel te komen. − Niet alle modules uit medischonderwijs.nl zijn e-learning. Sommige programma’s

hebben meer het karakter van naslagwerk. Knelpunten


- 15 -

− Artsen hebben dit beoordelen niet bovenaan hun prioriteitenlijst staan. Dat betekent dat afspraken m.b.t. het inleveren van de beoordelingen soms niet na wordt gekomen. Hierdoor is het managen van het tijdspad lastig.

− Het lezen van artsenhandschriften is soms lastig. Daarom en omdat het veel tijd bespaart, is het wellicht een idee om ook een digitaal beoordelingsformulier te maken

− Het wegen van de verschillende beoordelingen is nu vrij lastig. Zeker als het om twee verschillende formulieren gaat (OK en MIB)

− De plug inns voor programma’s blijven een probleem in ziekenhuizen. Op elke pc dient gecontroleerd te worden of het programma werkt. Dat vergt veel tijd en soms ook ergernis bij de beoordelaar.

PASTEL

Verslag ‘Beoordeling eerste 10 lessen’

Jetse Goris Wenckebach Instituut

14 juni 2007 Inleiding In de periode van 9 mei t/m 13 juni was het de ambitie om voor het PASTEL project tien e-learninglessen te beoordelen. Elke van de drie PAOG’s heeft drie of vier lessen geselecteerd en is verantwoordelijk voor de beoordeling daarvan. Dit document vat de resultaten van deze eerste periode samen, laat de individuele les overstijgende inzichten zien en benoemt de knelpunten. Geselecteerde lessen Het Wenckebach instituut heeft vier lessen geselecteerd dat zijn: http://medischonderwijs.nl?lessonid=404 Injury: Scheiding http://medischonderwijs.nl?lessonid=415 http://medischonderwijs.nl?lessonid=391 http://medischonderwijs.nl?lessonid=406

CASK: Aneurysma Aorta Abdominalis Injury: Dat doet ie anders nooit Injury: Uitglijder

Het Wenckebach Instituut zal de twee medisch inhoudelijke en één onderwijskundige beoordeling doen voor zichzelf en voor Boerhaave voor de E-learning module Injury: scheiding (ID=404) Beoordeling van de lessen De resultaten van de individuele lessen zullen hier, stuk voor stuk, worden weergegeven: Injury: Scheiding ( - ) Inhoudelijke beoordeling: Injury is gebruiksvriendelijk, maar inhoudelijk te mager. De inhoud is objectief, maar niet conform de huidige stand van wetenschap en/ of richtlijnen en niet conform de algemeen aanvaarde inzichten m.b.t. een adequate beroepsuitoefening binnen het UMCG. De E-learning module kan door een specialist in vijf minuten worden doorlopen. Doelen worden niet gesteld. De beoordelaars vinden de module erg tekstgebaseerd. Er had meer gebruik gemaakt kunnen worden van illustraties en multimedia. Eindoordeel: deze module is niet geschikt voor nascholing. Onderwijskundige beoordeling De gebruiker wordt actief betrokken bij het doorlopen van de module, doordat hij/ zij vragen moet beantwoorden die veel inhoudelijke feedback opleveren voor zowel de goede als de foute antwoorden. Door het ontbreken van een leerdoel, het ontbreken van gebruiksinstructie vooraf, de formatieve toetsing die eerder toetsslimheid meet dan inhoudelijke kennis, de korte doorlooptijd, de grote lappen tekst en weinig motiverende

http://medischonderwijs.nl/?lessonid=404





- 16 -

vorm is deze E-learning module, onderwijskundig gezien, niet geschikt voor nascholing van medische specialisten. CASK: Aneurysma Aorta Abdominalis (CAAA)(Inh. +/-, ond. +/-) Inhoudelijke beoordeling CAAA is een gebruiksvriendelijke tutorial die de gebruiker aan de hand van heldere leerdoelen stap voor stap door de leerstof leidt over symptomen en lichamelijk onderzoeksmethoden van Aneurysma’s Aorta Abdominalis. De inhoud is conform de huidige stand van de wetenschap, conform de algemeen aanvaarde inzichten m.b.t. een adequate beroepsuitoefening en is inhoudelijk objectief. Het programma is volgens de inhoudelijk beoordelaars niet geschikt voor nascholing van medische specialisten, maar zou eventueel wel ingezet worden voor onderwijs aan studenten en AIOS. Onderwijskundige beoordeling Leerdoelen worden helder vermeld. Per onderdeel worden zelfs subdoelen vermeld. Erg positief is dat de E-learning module bedieningshulp geeft wanneer zich nieuwe bedieningsopties aandienen. Het programma maakt veel gebruik van illustraties en geeft in de vorm van pictogrammen aan welke onderdelen reeds zijn doorlopen. Er moet echter nog wel veel tekst worden doorgelezen (zie bijvoorbeeld chapter 1 page 3/10). Er wordt gevarieerd met formatieve toetsvormen, zoals multiple choice, “fill in the blanks” en drag and drop (puzzel). Er is geen toets die meet of je de leerdoelen nu daadwerkelijk hebt behaald. Ook is er aan het einde van de module geen overzicht van je behaalde resultaten. De gebruiker heeft weinig sturing en vrijheid om zijn eigen leerpad te kiezen. Voor iemand die inhoudelijk nog geen expert is op het gebied van AAA, is deze module geschikt. Ik vermoed dat een specialist zich te veel “bij het handje genomen” voelt bij het maken van deze E-learning module. De E-learning module bepaalt het tempo en de volgorde, niet de specialist. Eindoordeel: De E-learning module Cask: Aneurysma Aorta Abdominalis is geschikt voor Aios, maar door de tutorial opzet niet geschikt voor medische specialisten. Injury: Dat doet ie anders nooit ( - ) Inhoudelijke beoordeling: De inhoud is niet relevant voor nascholing van huisartsen. In de lijst met geschikte E-learning modules staat echter wel dat de module ook geschikt is voor huisartsen. De inhoud zou relevant kunnen zijn voor eerstejaars AIOS spoedarts en eerstejaars AIOS chirurgie. De medische inhoud kon niet worden beoordeeld op conformiteit met wetenschap en adequate beroepsuitoefening. Het programma is niet objectief aangezien er een merknaam wordt gebruikt (Augmentin) De leerdoelen staan niet vermeld, de doorlooptijd is met 10 minuten te kort, de beoordelaars vonden het programma matig te bedienen. Eindoordeel: De E-learning module is niet geschikt voor nascholing van huisartsen. Onderwijskundige beoordeling De gebruiker wordt actief betrokken bij het doorlopen van de module, doordat hij/ zij vragen moet beantwoorden die veel inhoudelijke feedback opleveren voor zowel de goede als de foute antwoorden. Door het ontbreken van een leerdoel, het ontbreken van gebruiksinstructie vooraf, de formatieve toetsing die eerder toetsslimheid meet dan inhoudelijke kennis, de korte doorlooptijd, de grote lappen tekst en weinig motiverende vorm is deze E-learning module, onderwijskundig gezien, niet geschikt voor nascholing van medische specialisten. Injury: Uitglijder ( - ) Inhoudelijke beoordeling De leerdoelen worden niet vermeld. De E-learning module heeft geen bedieningshandleiding. Het is moeilijk om uitspraken te doen over de medische inhoud, omdat de casus onvoldoende informatie biedt (bijvoorbeeld leeftijd en precieze aard van het letsel) om je oordeel en behandelplan op te baseren. Eindoordeel: de module is niet geschikt voor bij en nascholing van huisartsen.


- 17 -

Onderwijskundige beoordeling De gebruiker wordt actief betrokken bij het doorlopen van de module, doordat hij/ zij vragen moet beantwoorden die veel inhoudelijke feedback opleveren voor zowel de goede als de foute antwoorden. Door het ontbreken van een leerdoel, het ontbreken van gebruiksinstructie vooraf, de formatieve toetsing die eerder toetsslimheid meet dan inhoudelijke kennis, de korte doorlooptijd, de grote lappen tekst en weinig motiverende vorm is deze E-learning module, onderwijskundig gezien, niet geschikt voor nascholing van medische specialisten. Beoordeling van de beoordelingsmethode Bij de beoordeling van de beoordelingsmethode sluiten we ons aan bij de conclusie van Martijn Molenaar. “Alle artsen gaven aan het commentaar dat ze wilden geven kwijt te kunnen op het beoordelingsformulier. Ook de onderwijskundigen kunnen uit de voeten met het formulier. Het enige commentaar op het onderwijskundig formulier is dat er geen hokje is waar de naam van de beoordelaar en de naam van het programma kan worden geschreven.” Onduidelijkheid over de laatste vraag: “Is deze module geschikt voor nascholing” was er niet bij de beoordelingen binnen het UMCG. Inzichten − Op dit moment zijn we niet optimistisch over de geschiktheid van het e-learning

materiaal in medischonderwijs.nl voor de bij- en nascholing van medisch specialisten. Doordat veel e-learning programma’s uit een soort template gemaakt zijn, vallen er direct een heel aantal af als deze opzet negatief wordt beoordeeld.

Knelpunten − Artsen hebben het beoordelen van E-learning modules niet bovenaan hun prioriteitenlijst

staan. Dat betekent dat afspraken m.b.t. het inleveren van de beoordelingen soms niet na wordt gekomen. Hierdoor is het managen van het tijdspad lastig.

− Het lezen van artsenhandschriften is soms lastig. Daarom en omdat het veel tijd bespaart, is het wellicht een idee om ook een digitaal beoordelingsformulier te maken

− Het wegen van de verschillende beoordelingen is nu vrij lastig. Zeker als het om twee verschillende formulieren gaat (OK en MIB)

− De plug-ins voor programma’s blijven een groot probleem in ziekenhuizen. Wanneer materiaal niet webbased is, dan is het niet geschikt om aan te bieden voor bij- en nascholing voor medisch specialisten. Een medisch specialist moet overal het E-learning materiaal kunnen opstarten met Internet Explorer. thuis, op congres of op het werk. Installeren van plug-ins moet in geen geval nodig zijn. “Het moet gewoon werken” in Internet Explorer.

PASTEL

Verslag ‘Beoordeling eerste 10 lessen’

Margret Alers PAOG-Heyendael

14 juni 2007 De eerste drie e-learning modules die beoordeeld zijn vanuit PAOG-Heyendael, zijn e-modules gemaakt door het UMC St Radboud en gekozen op geleide van de speerpuntenlijst PAOG-Heyendael. De resultaten van de medisch inhoudelijke- en onderwijskundige boordelingen, de ervaringen rondom het beoordelen en feedback op procedure en beoordelingsformulieren gaan hierbij. Resultaten medische- en onderwijskundige beoordelingen Over binnengekomen resultaten van de beoordeling van de e-modules het volgende:


- 18 -

Schotwond: Patient met een schotwond in de thorax (lessonid 873) Medisch inhoudelijke beoordeling:

Leerdoel: De leerdoelen zijn onduidelijk en moeten scherper omschreven worden met meerdere deeldoelstellingen. Ze zijn veel te omvattend gesteld om met 1 e-learning module te halen. Tijdschatting is 30 tot 90 minuten. Gebruikersvriendelijk: Nee, - binnen omgeving UMCN niet te openen - niet eenduidig in volgende pagina - herkent sommige synoniemen niet - bediening van de video onlogisch: start = begin na pauze! - hoe weet je of je hele video fragment gezien hebt? - overgang pagina 4 naar 5 verloopt niet goed. - duidelijk Amerikaans, met name Scoop en Run versus Stay en play Medische inhoud: Ja behalve een Nee t.a.v. het conform zijn met de huidige stand van de wetenschap en/of richtlijnen. Hierover opgemerkt dat er geen bescherming personeel op ER is en dat DPL echo is. Niveau programma: Te laag/ geschikt voor specialist, geschikt voor AIOS, huisartsen (is er niet op van toepassing) en specialisten, te hoog voor studenten en co-assistenten en verpleegkundigen (i.o.) Algemene indruk en opmerkingen: - de open vragen zijn onduidelijk, zoals bijvoorbeeld Wat is het belang van hematurie? Of wat valt u op aan deze thorax foto? - sommige antwoorden worden weggegeven in gesproken tekst bijv. shock - herkent synonieme of anderssoortige omschrijvingen niet. Omgekeerd herkent zeer foute omschrijvingen als goed - duurt lang voordat videopassage geladen zijn en verstoord worden - op pagina 3. staat tweede overweging, maar is niet duidelijk waarnaar dit verwijst - is amerikaans, niet volledig conform Europees of Nederlands Pagina 12: X-Thorax: resolutie slecht Eindoordeel: Nee, onderwerp moet worden aangepast. Suggestie onderwerp: stomp letsel, bijvoorbeeld bekkenfractuur .

Onderwijskundige beoordeling: Nog niet ontvangen Ervaring beoordelen: De e-module werd geaccrediteerd via laptop/PC en account projectmedewerker PASTEL. De arts noemde de auteur van deze module voordat hij de module gezien had. Toen de module vastliep bij pagina 4. hebben we samen gekeken naar de oplossing: hoe je bij pagina 5. door kon gaan. Wachtkamer : Genetisch syndromen (lessonid 851) Medisch inhoudelijke beoordeling:

Leerdoel: Nee, er zijn geen leerdoelen geformuleerd. Tijdschatting is 60 minuten. Gebruikersvriendelijk: Ja Medische inhoud: Ja behalve Nee t.a.v. het conform zijn met de huidige stand van de wetenschap en/of richtlijnen; een update is noodzakelijk. Niveau programma: Geschikt voor studenten, co-assistenten, AIOS en specialisten, te hoog voor huisartsen en verpleegkundigen (i.o.) Algemene indruk en opmerkingen: Deze module is onderdeel van een blok en staat in die zin niet op zichzelf. Voor een op zich-zelfstaande module dient het aangepast te worden. Eindoordeel: Nee, nog niet.


- 19 -

De tweede medische beoordeling is nog niet ontvangen (wel toegezegd). Onderwijskundige beoordeling:

Introductie: Geen leerdoelen, geen link met voorkennis, geen instructie programma. De onderwijskundige gaf zeer veel gedetailleerde aanwijzingen over de e-module (desgevraag digitaal aan te leveren) Stimulerende opzet: Redelijk interessant, doelgroep onbekend, geen actief leren E-learning biedt meerwaarde: Ja, wel betere feedback. Mate van controle: Je kunt op eigen initieatief door leerstof. Je kunt niet zelf de weg van de leerstof bepalen. Relevante opdrachten: Geen doelen gezien Opdrachten zijn uitvoerbaar en haalbaar: Ja Feedback op opdrachten Ja, maar geen feedback bij foute invoer en er wordt niet verteld waarom het goed of fout is. Zelftoetsing Soms Help functie Nee Multimedia n.v.t. Tekst Is duidelijk en van nivieau doelgroep en kleur is meestal functioneel. Algemene indruk en opmerkingen Doordat student net zolang kan klikken tot hij juiste antwoord vindt en wordt niet uitgedaagd goed na te denken en info op te slaan. Je weet uiteindelijk niet zoveel over je eigen kennisniveau. Eindoordeel Ja, maar wel verbeteren. Met name feedback en instructie programma. Titel geeft wat weinig info over inhoud.

Ervaring beoordelen: De module werd geaccrediteerd via laptop en account projectmedewerker PASTEL. De docent had zelf de module op zijn eigen PC staan (we wisten niet of het dezelfde versie betrof als die in MedischOnderwijs.nl). De interface van de module pastte niet helemaal op de laptop: de onderste regel vanwaaruit de module wordt aangestuurd kwam er maar half op (was wel leesbaar). DPS: KRUL Casus 23N Door de rug gegaan : Lage rugpijn (lessonid 494) Medisch inhoudelijke beoordeling: Kan de e-module wel lezen. Het probleem is duidelijk. Maar de instructie.wordt gemist en het is onduidelijk hoe verder te gaan in deze e-module. Meer info over methode/casus is noodzakelijk. Voor de andere beoordeling wordt verwezen naar de evaluatie van Boerhaave (beoordelingsformulier is niet ingekomen). Onderwijskundige beoordeling: Nog niet ontvangen Ervaring beoordelen: De arts kon de logica van in DPS gemaakte e-module niet navolgen. Een herkansingsafspraak werd gemaakt waarbij de screencast voor DPS kon worden bekeken, maar de beoordeling ging niet door wegens drukte. Ervaringen rondom het beoordelen De planning van de beoordelingen verliep heel voorspoedig. Alle geplande beoordelaars gaven aan de intentie te hebben om te beoordelen voor de gestelde "dead-line". Het daadwerkelijk concretiseren van de beoordeling verliep boven verwachting slecht wegens: prioritering werkzaamheden door drukte, het niet kunnen inloggen in MedischOnderwijs.nl, het niet kunnen openen van de e-module, het niet begrijpen van de werking van de e-module, de inhoudsdeskundige werkte zelf mee aan de e-module (heel laat gemeld) en het niet krijgen resultaten beoordeling collega project.


- 20 -

De medisch inhoudelijke beoordelingen zijn merendeel aangeboden via een laptop en PC, die mogelijk maakte dat de e-module meteen kon worden gemaakt. Daar waar artsen het in eerste instantie zelf probeerde, verliep het inloggen in MedischOnderwijs.nl en het draaien van e-modules niet als vanzelfsprekend. Sommige artsen hadden moeite met het inloggen in MedischOnderwijs.nl (een arts probeerde het vanuit Zuid-Afrika). Een maal ingelogd in MedischOnderwijs.nl, startte de e-module niet als vanzelfsprekend als in de ziekenhuisomgeving werd gewerkt. Die kent managed workplace PC’s waarbij voor het installeren van een plug-in toestemming moet worden gevraagd aan de it-beheerder. Werkend vanuit een omgeving waar wel plug-ins geinstalleerd konden worden, werkte de e-module niet meteen omdat de popup blokkering van de internet explorer moest worden uitgezet voor de website en omdat de versie van de authorware plug-in relevant bleek; voor de e-module in authorware 6 gemaakt moest de plug-in rechtstreeks van de website worden geinstalleerd. De arts die wel, thuis, een e-module opende voor beoordeling, kon de logica van in DPS gemaakte e-module niet navolgen. Een herkansingsafspraak werd gemaakt waarbij de screencast voor DPS kon worden bekeken, maar de beoordeling ging niet door wegens drukte. Feedback op procedure en formulieren Op de beoordelingsformulieren is door de beoordelaars commentaar gegeven. Dit is verwerkt in een nieuw formulier dat gebruikt kan worden als basis voor verdere beoordelingen. Over de procedure geen opmerkingen vooralsnog.

Bijlage plug-ins in MedischOnderwijs.nl Geïnstalleerd op LUMC

Plug-in name Download/ opmerkingen

SVG http://www.adobe.com/svg/viewer/install/ (nog niet in opengestelde lessen gebruikt)

+ Flash >=8 http://www.macromedia.com/go/getflashplayer/ + * Authorware Web Player 7 FULL http://coo.lumc.nl/Div5/checks/Authorware/install/awswaxf

.cab Shockwave/Director http://www.macromedia.com/go/getshockwaveplayer/

+ QuickTime >= 7 http://www.apple.com/quicktime/download/ Real Player >= 7 http://netherlands.real.com/realmusic/ (install via ActiveX)

http://proforma.real.com/real/player/blackjack.html (download)

+ Windows Media Player >=9 http://windowsmedia.com/download + Java (meestal al aanwezig, maar moet “aan” staan) + Adobe Acrobat (meest recente) http://www.adobe.com/products/acrobat/readstep2.html + Microsoft RDP Client http://medischonderwijs.nl/rdp/msrdp.cab (werkt alleen

met Internet Explorer) Office Animation Runtime (i.v.m.

Microsoft Producer) http://www.microsoft.com/downloads/details.aspx?familyid=4033a84a-24c7-40b2-8783-d80ada33cff8&displaylang=en

Bijlage netwerk-poorten MedischOnderwijs.nl Netwerk-poorten die (minstens) tussen de deelnemers van MedischOnderwijs.nl open moeten staan: poort 80 HTTP (TCP) poort 3389 Microsoft RDP [WBT] (TCP) poort 1755 Microsoft Media Services [streaming] (TCP,UDP) poort 554 Real Time Streaming Protocol (TCP,UDP)

http://www.adobe.com/svg/viewer/install/

http://www.macromedia.com/go/getflashplayer/

http://coo.lumc.nl/Div5/checks/Authorware/install/awswaxf.cab

http://coo.lumc.nl/Div5/checks/Authorware/install/awswaxf.cab

http://www.macromedia.com/go/getshockwaveplayer/

http://www.apple.com/quicktime/download/

http://netherlands.real.com/realmusic/

http://proforma.real.com/real/player/blackjack.html

http://windowsmedia.com/download

http://www.adobe.com/products/acrobat/readstep2.html

http://medischonderwijs.nl/rdp/msrdp.cab

http://www.microsoft.com/downloads/details.aspx?familyid=4033a84a-24c7-40b2-8783-d80ada33cff8&displaylang=en




- 21 -

poort 1935 Macromedia Flash Communications Server MX (TCP) -> software nog niet gebruikt in MedischOnderwijs.nl

Vooral in de biomedische hoek worden nogal eens JAVA-applets aangeboden die specifieke poorten gebruiken -> software nog niet gebruikt in MedischOnderwijs.nl

Bijlage documentatie ELO koppeling

Doelstelling Direct opstarten van een les in MedischOnderwijs.nl vanuit een electronische leeromgeving (ELO), zoals bijvoorbeeld Blackboard, zonder hierbij in MedischOnderwijs.nl handmatig te hoeven inloggen.

Gegevensstroom 1. MedischOnderwijs.nl herkent bij een http POST-request of een http GET-request de volgende

parameters op de URL om de student mee te identificeren Naam Beschrijving Verplicht MAIL e-mail adres, uniek om

account mee te herkennen Ja

FIRSTNAME Voornaam of voorletters Ja PREFIX Tussenvoegsel(s) Nee LASTNAME Achternaam Ja BIRTHDATE Geboortedatum in Nederlands

formaat: dd/mm/yyyy. Het scheidingsteken maakt niet uit, de positie wel.

Nee

GENDER MALE, FEMALE of UNKNOWN, één van de drie strings, case insensitive.

Nee

COURSEID Identificatie van de course van de ELO waar vanuit wordt opgestart.

Nee

De niet-verplichte parameters mogen leeg op de URL voorkomen, of afwezig zijn.

2. MedischOnderwijs.nl controleert of het verzoek afkomstig is van de referrer van de betreffende ELO. Hiervoor wordt de http-header van het verzoek vergeleken met de URL die van de ELO bekend is. Als deze niet met elkaar overeenstemmen wordt de gebruiker naar de loginpagina van MedischOnderwijs.nl verwezen (de parameters uit punt 3 worden hierbij wel onthouden).

3. Er wordt gekeken of één van de parameters op de URL zijn meegegeven die een bepaald

gedeelte van MedischOnderwijs.nl opstarten. Zijn deze er niet, dan krijgt de student een keuzelijst met alle lessen te zien, geordend naar vakgebied. Is één van de parameters wel meegegeven, dan start het betreffende gedeelte van MedischOnderwijs.nl.

Naam Voorbeeld Werking LESSONID

?lessonid=250 Start les met ID 250. De student ziet MedischOnderwijs.nl niet, de gegevens worden wel geregistreerd.

LESSONGROUPID ?Lessongroupid=4 Toont de lijst met lessen in groep 4 in MedischOnderwijs.nl. De student kan op een les klikken om deze op te starten. Bestaat de lesgroep niet, dan wordt een lege groep getoond.

LESSONGROUPTYPE Toont een lesgroep met 10 lessen die automatisch wordt samengesteld, afhankelijk van de gebruiker. en de waarde van de parameter.

?lessongrouptype=-1 Waarde -1: de lessen worden geselecteerd die medisch inhoudelijk het meest lijken op de lessen die de laatste 2 weken door deze student zijn gespeeld. De lessen die

http://coo.lumc.nl/?lessongrouptype=-1


- 22 -

de laatste 30 dagen zijn opgestart worden eruit gefilterd. ?lessongroupid=4&le

ssongrouptype=-2 Waarde -2: de combinatie met lessongroupid toont 10 lessen die lijken op de lessen in deze lesgroep en die de laatste 30 dagen niet door de gebruiker zijn opgestart.

SEARCH ?search=heart Toont het resultaat van de zoekopdracht ‘heart’ in MedischOnderwijs.nl. Het aantal lessen in het resultaat is variabel. De student kan op de les klikken om deze op te starten.

RESULTLANG ?search=heart&resultlang=English

Toont het resultaat van de zoekopdracht ‘heart’, waarbij de lessen Engels talig zijn. Talen die worden herkend zijn: Deutsch, English, Español, Français, Nederlands en Português.

SEARCHLANG ?search=hart&searchlang=Nederlands

Toont het resultaat van de zoekopdracht ‘hart’, waarbij de opdracht in de Nederlandse taal wordt geinterpreteerd. Dezelfde talen als in Resultlang worden herkend.

4. MedischOnderwijs.nl controleert of het email adres van de gebruiker al bekend is. Zo ja, dan

wordt de gebruiker onder deze account automatisch ingelogd (vervolg bij punt 8). 5. Is het email adres nog niet bekend, dan wordt een account aangemaakt met de volgende

invulling van de velden. Veld Genereren Waarde ID Automatisch Uniek cijfer Password Automatisch Unieke string van letter en

cijfers* eMail Waarde van parameter op

URL Email adres

aternateEmail Automatisch <NULL> creationDate Automatisch Huidige dag en tijd LastName Waarde van parameter op

URL Achternaam

Prefix Waarde van parameter op URL of automatisch

Voorvoegsel of <NULL>

Firstname Waarde van parameter op de URL

Voornaam/voorletters

Sex Waarde van parameter op de URL of automatisch

Geslacht of anders <NULL>

Birthdate Waarde van parameter op de URL of automatisch

Geboortedatum of 1/1/2001

Lang Automatisch All languages InISIS Automatisch 0 blnEnabled Automatisch 1 educationLevel Automatisch High School diploma Profession Automatisch Medical blnShowInSession Automatisch 1 Level Automatisch <NULL>

* Deze account kan later ook worden gebruikt door direct in MedischOnderwijs.nl in te loggen (niet via de ELO. De student moet dan wel het password dat automatisch is aangemaakt naar zichzelf laten opsturen om zich te kunnen identificeren. 6. De nieuwe account wordt automatisch toegevoegd aan de gebruikersgroep die bij de betreffende

ELO hoort en ook aan de Internet gebruikersgroep. 7. De student wordt onder de nieuwe account gegevens ingelogd.

http://coo.lumc.nl/?lessongroupid=4&lessongrouptype=-2

http://coo.lumc.nl/?lessongroupid=4&lessongrouptype=-2

http://coo.lumc.nl/?search=heart

http://coo.lumc.nl.nl/?search=heart&resultlang=English

http://coo.lumc.nl.nl/?search=heart&resultlang=English

http://coo.lumc.nl.nl/?search=hart&searchlang=Nederlands

http://coo.lumc.nl.nl/?search=hart&searchlang=Nederlands


- 23 -

8. In MedischOnderwijs.nl worden alleen de lessen getoond waar de gebruiker recht op heeft, afhankelijk van de gebruikersgroep waar hij deel van uitmaakt. Heeft de gebruiker op geen van de geselecteerde objecten rechten, dan wordt een lege lijst met lessen getoond.

Bijlage beoordelingen De volgende beoordelingen staan hier weergegeven ID Naam Instituut 30 TRC Pharmacology Database LUMC 93 DPS:Dermatologie 01 De nasleep van een kraambeen LUMC 447 Functieonderzoek van de gewrichten LUMC 391 Injury: Dat doet ie anders nooit UMCG 406 Injury: Uitglijder UMCG 415 CASK: Aneurysma Aorta Abdominalis UMCG 404 Injury: Scheiding UMCG + LUMC 851 Wachtkamer : Genetisch syndromen UMCN 873 Schotwond : Patient met een schotwond in de thorax UMCN

LUMC: TRC Pharmacology Database (30) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module TRC LessonID in MedischOnderwijs.nl 030 Immunology and Infectious Diseases

Voornaam René Achternaam De Vries Specialisme Interne Geneeskunde Instelling LUMC

Beoordelaar

Email adres [email protected] Datum beoordeling 17-6-07 1. Leerdoel

1A De leerdoelen zijn duidelijk geformuleerd Ja O

Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Niet gevonden

1B De leerdoelen worden middels het volgen van de module bereikt

Ja O

Nee O

Niet beoordeeld X

Motivatie indien Nee is ingevuld: Zie 1a

1C De module is een efficiënt middel om de leerdoelen te bereiken

Ja O

Nee O

Niet beoordeeld x

Motivatie indien Nee is ingevuld: Zie 1a

1D Hoeveel studieminuten worden naar uw schatting besteed bij het doorlopen van de module t.b.v. nascholing?

30-60 Minuten

2. Gebruiksvriendelijkheid

2 Het programma is (eventueel na raadplegen van de beschikbare handleiding) goed te bedienen

Ja x

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Maar: onhandig dat het leesvenster pas met meerdere keren schuiven de volledige tekst laat zien 3. Medische Inhoud

3A Inhoud van de module is conform de huidige stand van de wetenschap en/of richtlijnen

Ja x

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld:

3B Inhoud van de module is conform de algemeen aanvaarde inzichten m.b.t. een adequate

Ja x

Nee O

Niet beoordeeld O


- 24 -

beroepsuitoefening Motivatie indien Nee is ingevuld:

3C

Inhoud van de module is objectief, wordt niet beïnvloed door eigen gevoel of vooroordelen en waar mogelijk zijn relaties met sponsors vermeden of worden duidelijk vermeld

Ja x

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 4. Niveau van het programma Beoordeling van het niveau van het programma voor de verschillende doelgroepen Te laag Geschikt Te hoog Niet

beoordeeld Studenten O x O O Co-assistenten O x O O Arts-assistenten (AIOS) O x O O Huisartsen O x O O Specialisten x O O O Verpleegkundigen in opleiding O O x O Verpleegkundigen O x O O 5. Algemene indruk en opmerkingen Ik heb het niet geheel doorlopen, maar krijg de indruk dat het geheel mooi systematisch is opgezet Onhandig dat je het leesvenster 2x moet schuiven om de gehele tekst te zien

6. Eindoordeel

6 Deze module is geschikt voor nascholing Ja x

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Maar zie 1a tm 1c Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Oncology LessonID in MedischOnderwijs.nl 298233 / 30

Voornaam Karen Achternaam Neelis Specialisme Radiotherapie Instelling LUMC

Beoordelaar



Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Er is een inleiding, maar geen leerdoel beschreven Titel is m.i. iets als: Systemic treatment of tumors Algemene behandelprincipes in de oncologie + voorbeelden


Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Er is geen leerdoel


Ja O

Nee O

Niet beoordeeld O



30-45 Minuten


mailto:[email protected]


- 25 -


Ja x

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 3. Medische Inhoud


Ja x

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Maar de indicaties zijn heel globaal benoemd en niet uitgesplitst naar adjuvant/ gemetastaseerd etc.

3B Inhoud van de module is conform de algemeen aanvaarde inzichten m.b.t. een adequate beroepsuitoefening

Ja O

Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nvt eigenlijk, meer algemene achtergrond en die klopt wel

3C


Ja x

Nee O

Niet beoordeeld O


beoordeeld Studenten O O x O Co-assistenten O x O O Arts-assistenten (AIOS) O x O O Huisartsen O x O O Specialisten x O O O Verpleegkundigen in opleiding O O x O Verpleegkundigen O O x O 5. Algemene indruk en opmerkingen Onlogisch dat tekst in het engels is en alle links op geneesmiddelen naar het farmacoth. Kompas Ik vind vooral de illustraties een toevoeging tav het kompas, illustratief. Verder erg algemeen De vraag over late effecten van bestraling onder “treatment of tumors”moet uit deze module, past er niet in qua onderwerp 6. Eindoordeel

6 Deze module is geschikt voor nascholing Ja O

Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Niet voor specialisten

LUMC: DPS:Dermatologie 01 De nasleep van een kraambeen (93) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module De nasleep van een kraambed LessonID in MedischOnderwijs.nl 93

Voornaam A.P.M. Achternaam Lavrijsen Specialisme Dermatologie Instelling LUMC

Beoordelaar


1A De leerdoelen zijn duidelijk geformuleerd Ja x

Nee O

Niet beoordeeld O




- 26 -


Ja x

Nee O

Niet beoordeeld O



Ja x

Nee O

Niet beoordeeld O



30 Minuten



Ja x

Nee O

Niet beoordeeld O



Ja O

Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Niet geheel. Als aanvullend onderzoek behoort duplex toegevoegd


Ja x

Nee O

Niet beoordeeld O


3C


Ja x

Nee O

Niet beoordeeld O


beoordeeld Studenten O x O O Co-assistenten O x O O Arts-assistenten (AIOS) x O O O Huisartsen O x O O Specialisten x O O O Verpleegkundigen in opleiding O O x O Verpleegkundigen O x O O 5. Algemene indruk en opmerkingen Goede casus Aanvullingen: Als aanvullend onderzoek Duplex toevoegen Het kraambed been in de titel komt niet meer terug in de casus/ anamnese Bij onderdeel commentaar op palpatie: ook aandacht besteden aan dermatosclerose en …. In casus niets terug te vinden over keuze wond product ……

6. Eindoordeel


Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Na toevoegen Duplex aan het aanvullend onderzoek


- 27 -

Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module DPS Nasleep kraambeen LessonID in MedischOnderwijs.nl 093

Voornaam Marjolein Achternaam Wintzen Specialisme Dermatoloog Instelling VUmc

Beoordelaar

Email adres [email protected] Datum beoordeling 12 juni 07 1. Leerdoel


Nee O

Niet beoordeeld O



Ja O

Nee O

Niet beoordeeld x

Motivatie indien Nee is ingevuld: 1. en 3. wel 2 niet, omdat de de details ontbreken


Ja O

Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 1. en 3. wel 2 niet, omdat de de details ontbreken


20-25 Minuten



Ja x

Nee O

Niet beoordeeld O



Ja x

Nee O

Niet beoordeeld O



Ja O

Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Doppler inmiddels veelal vervangen door Duplex

3C


Ja x

Nee O

Niet beoordeeld O


beoordeeld Studenten van welk jaar??? O x x O Co-assistenten O x O O Arts-assistenten (AIOS) O x O O Huisartsen O x O O Specialisten x O O O Verpleegkundigen in opleiding O O x O Verpleegkundigen O x x O 5. Algemene indruk en opmerkingen


- 28 -

- leuke casus, waarin belangrijkste aspecten aan bod komen. - ratio achter locale therapie (emollientia) was me niet helemaal helder, en ik denk om die reden al voor verbetering vatbaar.

6. Eindoordeel


Nee O

Niet beoordeeld O


LUMC: Functieonderzoek van de gewrichten (447) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Oncology LessonID in MedischOnderwijs.nl 298233 / 30

Voornaam Karen Achternaam Neelis Specialisme Radiotherapie Instelling LUMC

Beoordelaar



Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Er is een inleiding, maar geen leerdoel beschreven Titel is m.i. iets als: Systemic treatment of tumors Algemene behandelprincipes in de oncologie + voorbeelden


Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Er is geen leerdoel


Ja O

Nee O

Niet beoordeeld O



30-45 Minuten



Ja x

Nee O

Niet beoordeeld O



Ja x

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Maar de indicaties zijn heel globaal benoemd en niet uitgesplitst naar adjuvant/ gemetastaseerd etc.


Ja O

Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nvt eigenlijk, meer algemene achtergrond en die klopt wel 3C Inhoud van de module is objectief, wordt niet Ja Nee Niet beoordeeld



- 29 -

beïnvloed door eigen gevoel of vooroordelen en waar mogelijk zijn relaties met sponsors vermeden of worden duidelijk vermeld

x O O


beoordeeld Studenten O O x O Co-assistenten O x O O Arts-assistenten (AIOS) O x O O Huisartsen O x O O Specialisten x O O O Verpleegkundigen in opleiding O O x O Verpleegkundigen O O x O 5. Algemene indruk en opmerkingen Onlogisch dat tekst in het engels is en alle links op geneesmiddelen naar het farmacoth. Kompas Ik vind vooral de illustraties een toevoeging tav het kompas, illustratief. Verder erg algemeen De vraag over late effecten van bestraling onder “treatment of tumors”moet uit deze module, past er niet in qua onderwerp

6. Eindoordeel

6 Deze module is geschikt voor nascholing Ja O

Nee x

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Niet voor specialisten Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Functieonderzoek Gewrichten LessonID in MedischOnderwijs.nl 447

Voornaam Enrike Achternaam Van der Linden- Van der Zwaag Specialisme Orthopaedie Instelling LUMC

Beoordelaar

Email adres [email protected] Datum beoordeling 8/6/07 1. Leerdoel


Nee O

Niet beoordeeld O



Ja x

Nee O

Niet beoordeeld O



Ja x

Nee O

Niet beoordeeld O



30 Minuten



Ja x

Nee O

Niet beoordeeld O




- 30 -


Ja x

Nee O

Niet beoordeeld O



Ja O

Nee O

Niet beoordeeld x


3C


Ja O

Nee O

Niet beoordeeld x


beoordeeld Studenten O x O O Co-assistenten O x O O Arts-assistenten (AIOS) O x O O Huisartsen O x O O Specialisten x O O O Verpleegkundigen in opleiding O O O x Verpleegkundigen O O O x 5. Algemene indruk en opmerkingen

6. Eindoordeel


Nee O

Niet beoordeeld O


UMCG: Injury: Dat doet ie anders nooit (391) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Dat doe tie anders nooit LessonID in MedischOnderwijs.nl 391

Voornaam Peter Achternaam Boendermaker Specialisme Huisarts/ onderwijskundige Instelling UMCG

Beoordelaar

Email adres [email protected] Datum beoordeling 13-06-2007 1. Leerdoel 1A De leerdoelen zijn duidelijk geformuleerd Ja

O Nee

X Niet beoordeeld

O Motivatie indien Nee is ingevuld:

1B De leerdoelen worden middels het volgen van de

module bereikt Ja O

Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 1C De module is een efficiënt middel om de

leerdoelen te bereiken Ja O

Nee O

Niet beoordeeld X



- 31 -

Motivatie indien Nee is ingevuld: 1D Hoeveel studieminuten worden naar uw schatting

besteed bij het doorlopen van de module t.b.v. nascholing?

5 Minuten

2. Gebruiksvriendelijkheid 2 Het programma is (eventueel na raadplegen van

de beschikbare handleiding) goed te bedienen Ja X

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 3. Medische Inhoud 3A Inhoud van de module is conform de huidige

stand van de wetenschap en/of richtlijnen Ja X

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 3B Inhoud van de module is conform de algemeen

aanvaarde inzichten m.b.t. een adequate beroepsuitoefening

Ja X

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 3C Inhoud van de module is objectief, wordt niet

beïnvloed door eigen gevoel of vooroordelen en waar mogelijk zijn relaties met sponsors vermeden of worden duidelijk vermeld

Ja X

Nee O

Niet beoordeeld O


beoordeeld Studenten O X O O Co-assistenten O X O O Arts-assistenten (AIOS) O X O O Huisartsen O X O O Specialisten O X O O Verpleegkundigen in opleiding O X O O Verpleegkundigen O X O O 5. Algemene indruk en opmerkingen De context van de casus is niet duidelijk (huisartsenpraktijk?/ Spoed eisende hulp??) als huisarts zou ik deze patient direct verwijzen naar de plastische chirurg!

6. Eindoordeel 6 Deze module is geschikt voor nascholing Ja

O Nee

X Niet beoordeeld


In deze vorm niet geschikt voor huisartsen Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Dat doet ie anders nooit LessonID in MedischOnderwijs.nl 391

Voornaam Bert Achternaam Tent Specialisme Huisarts (accrediteur nascholing huisartsen) Instelling UMCG

Beoordelaar




- 32 -


Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ik heb ze niet ontdekt 1B De leerdoelen worden middels het volgen van de

module bereikt Ja O

Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Leerdoelen onbekend 1C De module is een efficiënt middel om de


Nee X

Niet beoordeeld O



10 Minuten



Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Geen handleiding gezien. Het is matig te bedienen. 3. Medische Inhoud 3A Inhoud van de module is conform de huidige

stand van de wetenschap en/of richtlijnen Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Voor huisartsen is alleen het verwijzen naar een huisarts relevant. Deze module is voor spoedartsen 1.0 en chirurgen 1.0 3B Inhoud van de module is conform de algemeen


Ja X

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Voor bij 3A genoemde doelgroepen wel 3C


Ja O

Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Er wordt een merknaam genoemd: Augmentin 4. Niveau van het programma Beoordeling van het niveau van het programma voor de verschillende doelgroepen Te laag Geschikt Te hoog Niet

beoordeeld Studenten O O O O Co-assistenten O O O O Arts-assistenten (AIOS) O O O O Huisartsen O O X O Specialisten O X O O Verpleegkundigen in opleiding O O O O Verpleegkundigen O O O O 5. Algemene indruk en opmerkingen


O Nee

X Niet beoordeeld


Bedoeld voor nascholing CSO 1.0 en chirurgie 1.0


- 33 -

UMCG: Injury: Uitglijder (406) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Injury: uitglijder LessonID in MedischOnderwijs.nl 406

Voornaam Peter Achternaam Boendermaker Specialisme Huisarts/ onderwijskundige Instelling UMCG

Beoordelaar


O Nee

X Niet beoordeeld



module bereikt Ja O

Nee O

Niet beoordeeld X



Nee O

Niet beoordeeld X



5 Minuten



Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Maar je moet wel steeds naar de top van de pagina om verder te kunnen, dit is onhandig. 3. Medische Inhoud 3A Inhoud van de module is conform de huidige


Nee O

Niet beoordeeld O



Ja X

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 3C


Ja X

Nee O

Niet beoordeeld O


beoordeeld Studenten O X O O Co-assistenten X O O O Arts-assistenten (AIOS) X O O O Huisartsen X O O O Specialisten X O O O Verpleegkundigen in opleiding O X O O Verpleegkundigen X O O O



- 34 -

5. Algemene indruk en opmerkingen Simpele casus, niet uitdagend. De score op het einde vind ik niet interessant. Foto is te klein en te onduidelijk om te kunnen beoordelen. (“is dit wel een gezicht”) Tetanusprik is een verhaal apart, die zou ik eruit halen.


O Nee

x Niet beoordeeld


Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Uitglijder LessonID in MedischOnderwijs.nl 406

Voornaam Bert Achternaam Tent Specialisme Huisarts (accrediteur) Instelling UMCG

Beoordelaar


O Nee

X Niet beoordeeld


Nee, niet geformuleerd 1B De leerdoelen worden middels het volgen van de

module bereikt Ja O

Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Onbekend 1C De module is een efficiënt middel om de


Nee X

Niet beoordeeld O



10 Minuten


de beschikbare handleiding) goed te bedienen Ja O

Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Geen handleiding. Toetsslimheid wordt beloond. 3. Medische Inhoud 3A Inhoud van de module is conform de huidige


Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Bij complicaties retour huisarts. 3B Inhoud van de module is conform de algemeen


Ja O

Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Leeftijd onbekend. Aard letsel onbekend 3C

Inhoud van de module is objectief, wordt niet beïnvloed door eigen gevoel of vooroordelen en waar mogelijk zijn relaties met sponsors

Ja O

Nee X

Niet beoordeeld O



- 35 -

vermeden of worden duidelijk vermeld Motivatie indien Nee is ingevuld:

Matige kwaliteit 4. Niveau van het programma Beoordeling van het niveau van het programma voor de verschillende doelgroepen Te laag Geschikt Te hoog Niet

beoordeeld Studenten X O O O Co-assistenten X O O O Arts-assistenten (AIOS) X O O O Huisartsen X O O O Specialisten X O O O Verpleegkundigen in opleiding O O O O Verpleegkundigen O O O O 5. Algemene indruk en opmerkingen


O Nee

X Niet beoordeeld


UMCG: CASK: Aneurysma Aorta Abdominalis (415) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module CASK: Abdominal Aneurysm Aorta LessonID in MedischOnderwijs.nl 415

Voornaam Schelto Achternaam Kruijff Specialisme AIOS Chirurgie Instelling UMCG

Beoordelaar


X Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 1B De leerdoelen worden middels het volgen van de

module bereikt Ja X

Nee O

Niet beoordeeld O


leerdoelen te bereiken Ja X

Nee O

Niet beoordeeld O



40 Minuten



Nee O

Niet beoordeeld O



Nee O

Niet beoordeeld O



- 36 -



Ja X

Nee O

Niet beoordeeld O



Ja X

Nee O

Niet beoordeeld O


beoordeeld Studenten O X O O Co-assistenten O X O O Arts-assistenten (AIOS) O X O O Huisartsen X O O O Specialisten O O O O Verpleegkundigen in opleiding O O X O Verpleegkundigen O O X O 5. Algemene indruk en opmerkingen Mooi programma Visueel mooi Duidelijke stappen Terugklikken?? Open vraag Engels: geschikt


X Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module CASK: Aeurysma Aorta Abdominalis LessonID in MedischOnderwijs.nl 415

Voornaam Henk Achternaam Ten Cate Hoedemaker Specialisme Algemene Chirurgie/ vaatchirurgie Instelling UMCG


X Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: 1B De leerdoelen worden middels het volgen van de

module bereikt Ja X

Nee O

Niet beoordeeld O



Nee O

Niet beoordeeld O




- 37 -


30 Minuten



Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Paar bugs bij o.z. de puzzle. 1 mm verkeerd en hij pakt het niet. 3. Medische Inhoud 3A Inhoud van de module is conform de huidige


Nee O

Niet beoordeeld O



Ja X

Nee O

Niet beoordeeld O



Ja X

Nee O

Niet beoordeeld O


beoordeeld Studenten O X O O Co-assistenten O X O O Arts-assistenten (AIOS) X O O O Huisartsen O X O O Specialisten X O O O Verpleegkundigen in opleiding O X O O Verpleegkundigen O X O O 5. Algemene indruk en opmerkingen Inhoud goed Veel schermen Is redelijk qua multimedia Niet altijd intuïtief waar je moet klikken


O Nee

X Niet beoordeeld


UMCG+LUMC: Injury: Scheiding (404) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Injury: Scheiding LessonID in MedischOnderwijs.nl 404

Voornaam Schelto Achternaam Kruijff Specialisme AIOS Chiriurgie Instelling UMCG

Beoordelaar

Email adres [email protected] Datum beoordeling 14-06-2007



- 38 -

1. Leerdoel 1A De leerdoelen zijn duidelijk geformuleerd Ja

O Nee

X Niet beoordeeld


Het is onduidelijk welke kant het op gaat en dat de verschillende hoofdstukken moet doen. 1B De leerdoelen worden middels het volgen van de

module bereikt Ja X

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Uiteindelijk wel 1C De module is een efficiënt middel om de


Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Mits je bekend bent met het systeem 1D Hoeveel studieminuten worden naar uw schatting


10 Minuten


de beschikbare handleiding) goed te bedienen Ja x

Nee O

Niet beoordeeld O


stand van de wetenschap en/of richtlijnen Ja x

Nee O

Niet beoordeeld O



Ja x

Nee O

Niet beoordeeld O



Ja x

Nee O

Niet beoordeeld O


beoordeeld Studenten O X O O Co-assistenten O X O O Arts-assistenten (AIOS) O X O O Huisartsen O X O O Specialisten X O O O Verpleegkundigen in opleiding O O O X Verpleegkundigen O O O x 5. Algemene indruk en opmerkingen Ik vind het format weinig inzichtelijk. Ik dacht eerst dat er maar één goed antwoord zou zijn. Uiteindelijk kom je er wel achter.


O Nee

X Niet beoordeeld


Inhoudelijk aardig, inzichtelijk matig. Medisch-Inhoudelijk Beoordelingsformulier E-Learning


- 39 -

Naam E-Learning module Injury Scheiding LessonID in MedischOnderwijs.nl 404

Voornaam Henk Achternaam Ten Cate Hoedemaker Specialisme Algemene Chirurgie/ Vaatchirurgie Instelling UMCG


O Nee

X Niet beoordeeld



module bereikt Ja O

Nee O

Niet beoordeeld X

Motivatie indien Nee is ingevuld: Er was geen leerdoel 1C De module is een efficiënt middel om de


Nee O

Niet beoordeeld X

Motivatie indien Nee is ingevuld: Idem, als er al een leerdoel was, dan heeft deze cursus amper geholpen


5 Minuten



Nee O

Niet beoordeeld O



Nee X

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Zeer arbitrair. Bijvoorbeeld Hospitalisatie was in Groningen slechts een optie geweest. 3B Inhoud van de module is conform de algemeen


Ja O

Nee X

Niet beoordeeld O



Ja X

Nee O

Niet beoordeeld O


beoordeeld Studenten O x O O Co-assistenten O x O O Arts-assistenten (AIOS) x O O O Huisartsen O x O O Specialisten x O O O Verpleegkundigen in opleiding O x O O Verpleegkundigen O x O O 5. Algemene indruk en opmerkingen Zo dood als een pier, wat een teksten.



- 40 -


O Nee

X Niet beoordeeld


Eerst aanpassen. Is dit nu multimedia?

UMCN: Wachtkamer : Genetisch syndromen (851) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module De wachtkamer LessonID in MedischOnderwijs.nl 851

Voornaam Ben Achternaam Hamel Specialisme Klinische genetica Instelling UMC St Radboud

Beoordelaar


O Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, er zijn geen leerdoelen geformuleerd 1B De leerdoelen worden middels het volgen van de

module bereikt Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Niet te beantwoorden 1C De module is een efficiënt middel om de


Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Niet te beantwoorden 1D Hoeveel studieminuten worden naar uw schatting


60……….. Minuten



Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja 3. Medische Inhoud 3A Inhoud van de module is conform de huidige


Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, een update is noodzakelijk 3B Inhoud van de module is conform de algemeen


Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja 3C


Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja 4. Niveau van het programma Beoordeling van het niveau van het programma voor de verschillende doelgroepen Te laag Geschikt Te hoog Niet


- 41 -

beoordeeld Studenten O X O O Co-assistenten O X O O Arts-assistenten (AIOS)

O

X, *afhankelijk

van het vakgebied

ook “te laag” of “te hoog”

O O

Huisartsen O O X O Specialisten O X,* O O Verpleegkundigen in opleiding O O X O Verpleegkundigen O O X O 5. Algemene indruk en opmerkingen Deze module is onderdeel van een blok en staat in die zin niet op zichzelf. Voor een op zich-zelfstaande module dient het aangepast te worden.


O Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, nog niet. Zie boven. Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module De wachtkamer LessonID in MedischOnderwijs.nl 851

Voornaam Liesbeth Achternaam Spruijt Specialisme Klinische genetica Instelling UMC St Radboud

Beoordelaar


O Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja 1B De leerdoelen worden middels het volgen van de

module bereikt Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja 1C De module is een efficiënt middel om de


Nee O

Niet beoordeeld O






Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja 3. Medische Inhoud 3A Inhoud van de module is conform de huidige


Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja


- 42 -


Ja O

Nee O

Niet beoordeeld O



Ja O

Nee O

Niet beoordeeld O


beoordeeld Studenten O O x O Co-assistenten O O x O Arts-assistenten (AIOS) O x O O Huisartsen O O x O Specialisten x x O O Verpleegkundigen in opleiding O O x O Verpleegkundigen O O x O 5. Algemene indruk en opmerkingen


O Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja Lijst onderwijskundige beoordeling PASTEL 05-04-2007 Naam E-Learning module De wachtkamer LessonID in MedischOnderwijs.nl 851

Voornaam Marit Achternaam Rensink Specialisme Stafmedewerker PAOG Heyendael,

onderwijskundige Instelling UMC St Radboud

Beoordelaar

Email adres [email protected] Datum beoordeling 03-05-2007 Heldere introductie Ja/ nee/ n.v.t. A. De leerdoelen van de les worden vermeld. Nee B. De leerdoelen zijn helder gesteld. Nee C. Er wordt een link gelegd met de voorkennis van de gebruiker. Nee D. Er wordt instructie gegeven over de bediening van het programma. Nee Aanvullingen D:’Progr. Bestaat uit 3 onderdelen’-> alleen 1 en 2 wordt uitgelegd. ‘Tenslotte …t/m te plaatsen’= waarop? Hoezo? Achter óp’moet een streepje: open/of aanmerkingen. Muisbutton= 1 woord. - In volgende scherm 3 blokken Welke moet eerst? - Mij was niet duidelijk dat syndromen alleen uitleg geeft. Moeten deze onthouden worden voor de casus? 1. vraag 1. Als ik op het juiste antwoord klik, gebeurt er niks. Je kunt alleen op de letter klikken. Uitleggen? Casus1, vraag 2 = antwoord e is te makkelijk 2. Terugkoppeling vraag 1; Ik mis hier de kenmerken van het Edwards syndroom:’’Goed, want we zien hier de volgende kenmerken van Edwards…’ Ook bij 2e vraag: ‘Goed, chromosomenonderzoek is cruciaal vanwege…’\ 3. Casus 3, vraag 2. Bij een fout antwoord is de respons: ‘dit doe je wel’. Beter lijkt me: ‘dit dient u wel te doen vanwege…’ vraag 3: U zit er helemaal naast; helemaal weglaten. Toevoegen: ‘leest u de kenmerken van dit syndroom (nogmaals) na’-> en dan een link 4. 2. De vraag stelt al dat er meerdere onderzoeken gedaan moeten worden. Antwoord a t/m d vallen dan al af. Beter is: alle onderzoeken noemen en er ‘ja/nee’achter zetten.


- 43 -

3. Goede respons op foute antwoorden 5. 1 Goede respons op foute antwoorden 2. Er zijn 2 goede antwoorden -> onlogisch. Beter is ‘Welke van de volgende onderzoeken is zinvol ? a chrom. Diag. Ja/nee b. … ja/nee c. … ja/nee Casus 6. 2: Hoe kunnen a t/m d nu fout zijn, terwijl e (alle antwoorden samen) nu wel goed is? Vraag anders stellen: “Welke onderstaande beschrijving past het best..?” want alle symptomen passen er bij. 3: stel dat je heel goed weet wat je moet doen (echo eerst, dan chromo-onderzoek) en je bent een zeer goede student en je vult dus antwoord ‘a ‘ in , dan zit je in dit geval fout! Vraag dus anders stellen Casus 7 = 1: feedback op goede antwoord ontbreekt Casus 8 = 1: feedback op foute + goede antwoord ontbreekt 2 a tm d zijn goed -> verwarrend. Beter is ja/nee Casus 9 = 1 a en d zijn gedeeltelijk goed -> verwarrend. 10 = 1 = goede feedback Stimulerende opzet Ja/ nee/ n.v.t. A. De opzet van de module zorgt ervoor dat je geïnteresseerd en nieuwsgierig blijft. Redelijk B. De module is uitdagend voor de doelgroep. ? C. De module is relevant voor de doelgroep. ? D. De module geeft je het gevoel dat je vooruitgang boekt en doelen haalt. Soms E. Het programma daagt deelnemers uit tot actief leren. Het vraagt om eigen inbreng. Nee, je kunt

bijven klikken tot goede antwoord.

Aanvullingen a: praktijkgerichtheid is goed. Alleen door uitleg van 11 syndromen wordt het meer puzzelen “welke van de 11” Idee: eerst teots laten maken. Dan aan de hand van feedback doorverwijzen naar juiste theorie: “U had de vragen over syndroom x voor 80% fout. Leest u deze theorie nogmaals” E-learning biedt meerwaarde Ja/ nee/ n.v.t. Het behalen van de doelen kan via e-learning minstens even goed als via andere leerwegen. Ja Aanvullingen -> Het kan beter dan andere leerwegen, maar dan moet de feedback worden uitgebreid. Meer reactie op score student. “U heeft slechts 4 van de 11 casus behaald, tevens deed u er x minuten over … leest u de theorie nogmaals door en blabalba..” Mate van controle Ja/ nee/ n.v.t. A. De module biedt de mogelijkheid om op eigen initiatief stukken over te slaan. Ja B. De module leidt je op logische wijze stap voor stap door de stof. Ja C. Je kunt zelf je weg door de lesstof bepalen. Niet geheel D. De module onthoudt waar je was gebleven wanneer je voortijdig het programma stopt. ? Aanvullingen Je kunt in een casus niet terug naar de vorige vraag (wel naar vorige caus). Goto (2 losse woorden) = wordt nergens uitgelegd. Relevante opdrachten Ja/ nee/ n.v.t. De opdrachten zijn relevant voor het behalen van de doelen van het programma Aanvullingen Geen doelen gezien Opdrachten zijn uitvoerbaar en haalbaar Ja/ nee/ n.v.t. A. Uitvoering van de activiteiten waar deelnemers toe worden uitgenodigd is haalbaar met de beschikbare bronnen.

Ja

B. Uitvoering van de activiteiten waar deelnemers toe worden uitgenodigd is haalbaar binnen de vaak beperkte tijd waar deelnemers over beschikken.

Ja

Aanvullingen Feedback op opdrachten Ja/ nee/ n.v.t. A. De deelnemer krijgt een vorm van feedback Ja B. De feedback bestaat uit goed of fout. Ja C. De feedback is inhoudelijk en vertelt waarom iets goed of fout is. Soms D. De deelnemer krijgt feedback bij foute invoer (bijvoorbeeld:”vul een numeriek in in plaats van het woord, dus 9 in plaats van “negen”)

Nee


- 44 -

Aanvullingen Soms is er geen feedback (behalve “fout”) Zelftoetsing Ja/ nee/ n.v.t. Het programma biedt mogelijkheden om te toetsen of de doelen behaald zijn of geeft suggesties hoe dit zelf te organiseren.

Soms

Aanvullingen Help functie Ja/ nee/ n.v.t. A. De module heeft een hulp functie. Nee B .De hulpfunctie bestaat uit bedieningshulp. (Hulp wanneer je niet meer weet hoe je het programma moet bedienen)

Nee

C. De hulpfunctie bestaat uit Inhoudelijke hulp (bijvoorbeeld een verklarende woordenlijst.) Nee D. De hulp is context sensitief. Nee E. De hulp is overal in de e-learning module op te roepen. Nee Aanvullingen Current page = gebeurt niks Het is technisch niet moeilijk, maar enige uitleg is beter. Toevoegen ‘casus 2 van 11’(bijv.) zo weet je hoe ver je bent en hoeveel je dus nog moet. Multimedia Ja/ nee/ n.v.t. A. Je hebt controle over audio, video/animatie als die worden gebruikt? (pauzeren, doorgaan, opnieuw spelen overslaan etc.)

-

B .Bij lange video is er een hoofdstukindeling die vooruit of achteruit “spoelen” mogelijk maakt.

-

C. De module vermijdt overbelasting van één “kanaal” (tekst als enige verheldering bij video of animatie is een voorbeeld van overbelasting van één kanaal)

-

D. De gebruikte geluiden ondersteunen het leren. (Er zijn geen onverwachte of storende geluiden of muziek te horen)

-

Aanvullingen Tekst Ja/ nee/ n.v.t. A. De tekst is duidelijk en simpel. Ja B .Het niveau van de tekst is geschikt voor de doelgroep. Ja C. Eventueel kleurgebruik in de tekst is functioneel en leidt niet af . Ja / Soms Aanvullingen Niet altijd sympathiek gestel ‘Fout’ Kleur van ‘gebruiksvriendelijk’beetje donker. Algemene indruk en opmerkingen Doordat student net zolang kan klikken tot hij juiste antwoord vindt, wordt hij niet uitgedaagd goed na te denken en info op te slaan. Beter is: eerst gehele casus laten maken en dan geedback geven + de te bestuderen info. Ook na alle casus feedback geven + een norm: ‘als u minder dan x fout behaald, scoort u voldoende’. Nu klik je er doorheen en weet je uiteindelijk nog niet zoveel over je eigen kennisniveau. Eindoordeel Deze module is geschikt voor nascholing Ja

X Nee O

Niet beoordeeld O

Motivatie indien nee is ingevuld: Ja, maar nog wel verbeteren. Let met name op feedback + technische uitleg. Titel geeft wat weinig info over inhoud.

UMCN: Schotwond : Patient met een schotwond in de thorax (873) Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Schotwond LessonID in MedischOnderwijs.nl 873

Voornaam Harry Achternaam Van Goor

Beoordelaar

Specialisme Abdominaal Chirurg


- 45 -

Instelling UMC St Radboud Email adres [email protected]

Datum beoordeling 26-04-2007 1. Leerdoel 1A De leerdoelen zijn duidelijk geformuleerd Ja

O Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, moet scherper omschreven worden met meerdere deeldoelstellingen. Te vaag. Tevens te uitgebreid. 1B De leerdoelen worden middels het volgen van de

module bereikt Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, de leerdoelen zijn veel te omvattend gesteld om met 1 E-learning module te halen. 1C De module is een efficiënt middel om de


Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, zie boven 1D Hoeveel studieminuten worden naar uw schatting





Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee: - loopt vast op pagina 4. - niet eenduidig in volgende pagina - niet altijd: ik weet niet mogelijkheid - herkent sommige synoniemen niet 3. Medische Inhoud 3A Inhoud van de module is conform de huidige


Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, duidelijk Amerikaans, met name Scoop en Run versus Stay en play 3B Inhoud van de module is conform de algemeen


Ja O

Nee O

Niet beoordeeld O



Ja O

Nee O

Niet beoordeeld O


beoordeeld Studenten O O X O Co-assistenten O O X O Arts-assistenten (AIOS) O X O O Huisartsen

O O O

X, onderwijs niet van

toepassing op huisartsen

Specialisten X O O O Verpleegkundigen in opleiding O O X; *liever O


- 46 -

kolom niet geschikt

Verpleegkundigen O O X; * O 5. Algemene indruk en opmerkingen

- sommige antwoorden worden weggegeven in gesproken tekst bijv. shock - herkent synonieme of anderssoortige omschrijvingen niet. Omgekeerd herkent zeer foute

omschrijvingen als goed - duurt lang voordat videopassage geladen zijn en verstoord worden - op pagina 3. staat tweede overweging, maar is niet duidelijk waarnaar dit verwijst - is amerikaans, niet volledig conform Europees of Nederlands - Pagina 12: X-Thorax: resolutie slecht


O Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, onderwerp wel, echter moet aangepast, eventueel stomp letsel (komt vaker voor), gebruiksvriendelijker Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module Schotwond LessonID in MedischOnderwijs.nl 873

Voornaam Taco Achternaam Blokhuis Specialisme Chirurg Instelling UMC St Radboud

Beoordelaar


O Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, Welke leerdoelen? 1B De leerdoelen worden middels het volgen van de

module bereikt Ja O

Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee, zie 1A 1C De module is een efficiënt middel om de


Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Niet ingevuld 1D Hoeveel studieminuten worden naar uw schatting


60-90 Minuten



Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Nee:

1. Binnen omgeving UMCN niet te openen 2. Bediening van de video onlogisch: start = begin na pauze! 3. Hoe weet ik of ik het hele fragment gezien heb? 4. 4. Overgang pagina 4-> 5 ?

3. Medische Inhoud 3A Inhoud van de module is conform de huidige


Nee O

Niet beoordeeld O



- 47 -

Ja, geen bescherming personeel op ER. DPL is tegenwoordig echo. 3B Inhoud van de module is conform de algemeen


Ja O

Nee O

Niet beoordeeld O



Ja O

Nee O

Niet beoordeeld O


beoordeeld Studenten O O X O Co-assistenten O O X O Arts-assistenten (AIOS) O X O O Huisartsen O X O O Specialisten O X O O Verpleegkundigen in opleiding O O X O Verpleegkundigen O O X O 5. Algemene indruk en opmerkingen Open vragen zijn onduidelijk, zoals bijvoorbeeld Wat is het belang van hematurie? Of wat valt u op aan deze thorax foto?


O Nee O

Niet beoordeeld O

Motivatie indien Nee is ingevuld: Ja en Nee, Schotwond komt niet veel voor. Enkele opmerkingen zie boven. Stomp letsel, bijvoorbeeld bekkenfractuur ? Lijst onderwijskundige beoordeling PASTEL 05-04-2007 Beoordelaar: Eline Noorbergen, RUG E-learning module: Schotwond linker thorax (LRS id 873) Heldere introductie Ja/ nee/ n.v.t. A. De leerdoelen van de les worden vermeld. Ja B. De leerdoelen zijn helder gesteld. Ja C. Er wordt een link gelegd met de voorkennis van de gebruiker. Nee D. Er wordt instructie gegeven over de bediening van het programma. soms Aanvullingen In het begin wordt geen instructie gegeven. Daardoor ontstaat even verwarring over de taal waarin je geacht wordt antwoord te geven. Ik begin met antwoorden in het Engels, omdat er in het Engels wordt gepraat. Maar het blijkt dat je antwoorden in het Nederlands moet geven.

Stimulerende opzet Ja/ nee/ n.v.t. A. De opzet van de module zorgt ervoor dat je geïnteresseerd en nieuwsgierig blijft. Ja B. De module is uitdagend voor de doelgroep. Ja C. De module is relevant voor de doelgroep. Beetje D. De module geeft je het gevoel dat je vooruitgang boekt en doelen haalt. Ja E. Het programma daagt deelnemers uit tot actief leren. Het vraagt om eigen inbreng. Ja


- 48 -

Aanvullingen De doelgroep die in LRS.net wordt genoemd zijn pre-klinische studenten. Het is even de vraag voor welke doelgroep in de nascholing dit geschikt is. Verder is het thema (schotwonden) in de VS veel relevanter dan in Nederland. Op zich maakt dat het middel e-learning voor dit thema misschien juist interessanter, omdat je dan dit soort filmpjes met vragen erbij echt in eigen tijd kunt doen, wanneer het relevant voor je is.

E-learning biedt meerwaarde Ja/ nee/ n.v.t. Het behalen van de doelen kan via e-learning minstens even goed als via andere leerwegen. ja Aanvullingen Ja, ik vind de e-learning hier relevant. Met name de video is een goed middel om dit soort casussen te laten zien. De manier waarop vervolgens de video wordt opgeknipt en er instructie en interactie omheen wordt gebouwd is leuk en motiverend.

Mate van controle Ja/ nee/ n.v.t. A. De module biedt de mogelijkheid om op eigen initiatief stukken over te slaan. Ja, meestal B. De module leidt je op logische wijze stap voor stap door de stof. Ja C. Je kunt zelf je weg door de lesstof bepalen. Nee D. De module onthoudt waar je was gebleven wanneer je voortijdig het programma stopt. Nee Aanvullingen

Relevante opdrachten Ja/ nee/ n.v.t. De opdrachten zijn relevant voor het behalen van de doelen van het programma Ja Aanvullingen

Opdrachten zijn uitvoerbaar en haalbaar Ja/ nee/ n.v.t. A. Uitvoering van de activiteiten waar deelnemers toe worden uitgenodigd is haalbaar met de beschikbare bronnen.

Ja

B. Uitvoering van de activiteiten waar deelnemers toe worden uitgenodigd is haalbaar binnen de vaak beperkte tijd waar deelnemers over beschikken.

Twijfel

Aanvullingen o Goed uitvoeren van activiteiten is lastig, omdat je tekst moet intypen. Je vraagt je steeds af hoe je dit het

beste kunt doen, hoe veel tekst, alleen steekwoorden, zinnen. Het zou helpen als bij de inleiding een voorbeeld wordt gegeven van wat er van je wordt verwacht bij het intypen van antwoorden.

o Het programma duurde voor mij in het geheel circa 1 uur. De vraag is of “nascholers” die tijd nemen.

Feedback op opdrachten Ja/ nee/ n.v.t. A. De deelnemer krijgt een vorm van feedback Ja B. De feedback bestaat uit goed of fout. Ja C. De feedback is inhoudelijk en vertelt waarom iets goed of fout is. Ja D. De deelnemer krijgt feedback bij foute invoer (bijvoorbeeld:”vul een numeriek in in plaats van het woord, dus 9 in plaats van “negen”)

Ja

Aanvullingen Het is onduidelijk hoe specifiek je tekst moet intypen om goede feedback te krijgen.

Zelftoetsing Ja/ nee/ n.v.t. Het programma biedt mogelijkheden om te toetsen of de doelen behaald zijn of geeft suggesties hoe dit zelf te organiseren.

Nee

Aanvullingen

Help functie Ja/ nee/ n.v.t. A. De module heeft een hulp functie. Nee


- 49 -

B .De hulpfunctie bestaat uit bedieningshulp. (Hulp wanneer je niet meer weet hoe je het programma moet bedienen)

Nee

C. De hulpfunctie bestaat uit Inhoudelijke hulp (bijvoorbeeld een verklarende woordenlijst.) Nee D. De hulp is context sensitief. Nee E. De hulp is overal in de e-learning module op te roepen. Nee Aanvullingen Multimedia Ja/ nee/ n.v.t. A. Je hebt controle over audio, video/animatie als die worden gebruikt? (pauzeren, doorgaan, opnieuw spelen overslaan etc.)

Ja, het meeste wel

B .Bij lange video is er een hoofdstukindeling die vooruit of achteruit “spoelen” mogelijk maakt.

Nee

C. De module vermijdt overbelasting van één “kanaal” (tekst als enige verheldering bij video of animatie is een voorbeeld van overbelasting van één kanaal)

Ja

D. De gebruikte geluiden ondersteunen het leren. (Er zijn geen onverwachte of storende geluiden of muziek te horen)

Ja

Aanvullingen o Er is geen controle in het programma om audio aan/uit of harder / zachter te zetten. Dit is jammer. Ik moest

hierdoor eerst weer het hele programma verlaten, op de computer de audio harder zetten en vervolgens weer opnieuw inloggen en opstarten.

o Het duurt erg lang (1-2 minuten) voordat de video daadwerkelijk start. Zo lang dat je je serieus begint af te vragen of er iets aan de hand is.

o Het blijft lastig dat er plug-ins nodig zijn. o Ik kreeg op de computer op m’n werk een foutmelding bij het opstarten van de video (zie screendump). Op

“Continue” drukken had alleen als effect dat de foutmelding verdween, verder gebeurde er niets. Op m’n PC thuis heb ik het programma dus kunnen doen, maar op m’n werk niet. Ik neem nu niet de tijd om uit te zoeken waarom ik deze foutmelding krijg en of ik het programma toch zou kunnen opstarten. Dit zou me teveel tijd kosten en een echte nascholer zou hier net zo mee omgaan volgens mij.


- 50 -

Tekst Ja/ nee/ n.v.t. A. De tekst is duidelijk en simpel. Ja B .Het niveau van de tekst is geschikt voor de doelgroep. Ja C. Eventueel kleurgebruik in de tekst is functioneel en leidt niet af . n.v.t. Aanvullingen Algemene indruk en opmerkingen o Interessante opzet van het instructiemateriaal. o Eventueel ook bruikbaar om tijdens een bijeenkomst te laten zien en te bespreken met een groep. Het

moeten intypen van antwoorden (door een docent bijvoorbeeld) is dan wel lastig voor de snelheid van de bespreking.

o Een opzet met tweetallen aan 1 PC tijdens een bijeenkomst zou ook kunnen. Eindoordeel Deze module is geschikt voor nascholing Ja

O Nee O

Niet beoordeeld O

Motivatie indien nee is ingevuld: Ik kan onvoldoende beoordelen voor welke doelgroep in de nascholing dit geschikt is.

Bijlage abstract NVMO congres 131 PASTEL: Naar een beoordelingsstandaard voor medische E-learning modules. J Goris, P.M. Bloemendaal, P. De Vries Robbé, S. Eggermont UMCG, LUMC, UMCN Probleemstelling Voordat bestaande E-learning modules succesvol ingezet kunnen worden in het Post Academisch Onderwijs Geneeskunde (PAOG), dient hun geschiktheid hiervoor te worden vastgesteld. Momenteel is hiervoor nog geen algemeen aanvaarde procedure beschikbaar. Door het project Postacademische Accreditatie en Schaalvergroting van Toepassing van Elektronische Leerobjecten (PASTEL)1 is een methode ontwikkeld om de kwaliteit van E-learning modules te beoordelen. Methode Een eerste stap was het ontwikkelen van beoordelingscriteria. Hierbij werden twee onderdelen onderscheiden, namelijk de medische inhoudelijke beoordeling en de onderwijskundige beoordeling. De inhoudelijke beoordelingscriteria zijn afgeleid van de criteria die door de landelijke accreditatie-organen zijn gesteld voor het beoordelen van medisch-inhoudelijk onderwijsmateriaal. Deze criteria zijn verwerkt in een beoordelingformulier. Naast vragen over de medische inhoud worden tevens vragen gesteld over het bereiken van de leerdoelen met behulp van het programma, het niveau van het programma voor de verschillende doelgroepen, de ingeschatte studietijd en de gebruikersvriendelijkheid. De onderwijskundige beoordelingslijst is gemaakt aan de hand van literatuur op het gebied van het ontwikkelen van effectieve E-learning modules. De vragen hebben ondermeer betrekking op onderwijskundige opzet en vormgeving van de E-learning module. Deze lijst wordt als leidraad gebruikt bij het beoordelen van de onderwijskundige aspecten van E-learning modules.

1 PASTEL project Participerende instellingen: Boerhaave Commissie, L.U.M.C. Wenckebach Instituut, U.M.C.G. Heyendael Commissie, St. Radboud

Het project wordt gesubsidieerd door SURF.


- 51 -

Per E-learning module wordt het medisch inhoudelijke formulier ingevuld door twee inhoudsdeskundigen. Het onderwijskundige formulier wordt ingevuld door één onderwijskundige. De combinatie van deze beoordelingen leidt tot een onderbouwd geschiktheidoordeel. Resultaten De resultaten van het project tot nu toe bestaan uit:

- een formulier voor de inhoudelijke beoordeling, - een formulier voor de onderwijskundige beoordeling, - per formulier een toelichting hoe het moet worden gebruikt, - een beschrijving van de beoordelingsprocedure, - Een beschrijving van de selectieprocedure van E-Learning modules uit

http://www.medischonderwijs.nl.

Discussie Verder onderzoek naar de validiteit en betrouwbaarheid van de methode is nodig maar niet voldoende. Het introduceren van E-learning modules binnen de nascholing van medische specialisten is nieuw. Overleg zal moeten worden gestart met de landelijke accreditatie organen over het accrediteren van nascholing waarbij E-learning een geïntegreerd onderdeel is. Trefwoord: Wijze van presentatie: Paper 'uit de onderwijspraktijk' Correspondentie-adres: Drs. J Goris U.M.C.G. Wenckebach Instituut Hanzeplein 1 9700 CC GRONINGEN

http://www.medischonderwijs.nl/

PASTEL - Home | LUMC200704-200706 Rapportage PASTEL.doc Last saved: 8/20/2007 4:06 PM - 3 -...

Documents

Transcript of PASTEL - Home | LUMC200704-200706 Rapportage PASTEL.doc Last saved: 8/20/2007 4:06 PM - 3 -...