Evaluatie van onderzoek in de rechtswetenschappen VLIR Subwerkgroep Onderzoek Rechten Alain Verbeke...

Evaluatie van onderzoek in Evaluatie van onderzoek in de rechtswetenschappende rechtswetenschappen

VLIR Subwerkgroep VLIR Subwerkgroep

Onderzoek RechtenOnderzoek Rechten

Alain Verbeke - VoorzitterAlain Verbeke - Voorzitter Ronde van de Vlaamse rechtsfaculteiten Ronde van de Vlaamse rechtsfaculteiten

Oktober 2005Oktober 2005

Alain Verbeke Alain Verbeke Ronde Vl. Rechtsfaculteiten Ronde Vl. Rechtsfaculteiten Oktober 2005 Oktober 2005

22

AgendaAgenda

1. Model voor integrale 1. Model voor integrale kwaliteitsevaluatie: snelle opfrissingkwaliteitsevaluatie: snelle opfrissing

2. Ranking van tijdschriften: werkwijze2. Ranking van tijdschriften: werkwijze 3. Ranking van boeken: werkwijze3. Ranking van boeken: werkwijze


33

1. Model - Opfrissing1. Model - Opfrissing

Integraal profielIntegraal profiel CV FormatCV Format Nationaal en internationaal/buitenlandsNationaal en internationaal/buitenlands TweetrapsraketTweetrapsraket


44

Integraal profielIntegraal profiel

Een onderzoeker in de rechten moet een Een onderzoeker in de rechten moet een voldoende compleet profiel hebben, niet voldoende compleet profiel hebben, niet beperkt tot enkel publicaties noch tot beperkt tot enkel publicaties noch tot alleen maar projecten. alleen maar projecten.

Hij of zij kan en moet eigen accenten Hij of zij kan en moet eigen accenten (kunnen) leggen.(kunnen) leggen.


55

Integraal profielIntegraal profiel

1.1. Integrale evaluatie van onderzoekIntegrale evaluatie van onderzoek

2.2. Met een kwantitatief en kwalitatief Met een kwantitatief en kwalitatief minimum voor drie categorieën minimum voor drie categorieën (publicaties/ projecten en doctoraat (publicaties/ projecten en doctoraat /lezingen) /lezingen)

3.3. Voor alle onderzoeksoutput, ook buiten dit Voor alle onderzoeksoutput, ook buiten dit minimum, een kwaliteitsreliëf met ABC minimum, een kwaliteitsreliëf met ABC criteria, zonder kwantitatieve richtlijnencriteria, zonder kwantitatieve richtlijnen


66

CV Format CV Format OnderzoeksoutputOnderzoeksoutput

Rubriek I van CV FormatRubriek I van CV Format Zes onderzoeksparameters:Zes onderzoeksparameters:

1. publicaties1. publicaties 2. projecten2. projecten 3. doctoraatsbegeleiding3. doctoraatsbegeleiding 4. lezingen4. lezingen 5. adviesverlening5. adviesverlening 6. wetenschappelijke adviesraden6. wetenschappelijke adviesraden

Indicatie van ABC en Indicatie van ABC en nationaal/internationaalnationaal/internationaal


77

CV FormatCV FormatWetenschapsondersteuningWetenschapsondersteuning

Rubriek II van CV FormatRubriek II van CV Format Client seminars, professional seminarsClient seminars, professional seminars Organisatie van congressenOrganisatie van congressen Codex (ook geännoteerd)Codex (ook geännoteerd) Rechtspraakbundels Rechtspraakbundels Artikelen in tijdschriften of boeken zonder Artikelen in tijdschriften of boeken zonder

onderzoeksfinaliteitonderzoeksfinaliteit

Rubriek III = Varia Rubriek III = Varia

(prijzen, beurzen, onderzoeksverblijven, etc.)(prijzen, beurzen, onderzoeksverblijven, etc.)


88

Nationaal en Nationaal en internationaalinternationaal

Internationaal = dimensieInternationaal = dimensie Geen waardeoordeelGeen waardeoordeel Niet noodzakelijk beter dan nationaalNiet noodzakelijk beter dan nationaal Volgt de ABC criteriaVolgt de ABC criteria

Nationale A publicatie – internationale C Nationale A publicatie – internationale C publicatiepublicatie

Internationale A lezing – nationale C lezingInternationale A lezing – nationale C lezing


99

Nationaal en Nationaal en internationaalinternationaal

Internationaal tijdschriftInternationaal tijdschrift Meer dan ½ actieve redactie is niet BelgMeer dan ½ actieve redactie is niet Belg

Internationaal boekInternationaal boek BoekencommissieBoekencommissie

Internationale lezingInternationale lezing In het buitenland gehoudenIn het buitenland gehouden In België: niet in het Nederlands en In België: niet in het Nederlands en

bijgewoond door een overwegend bijgewoond door een overwegend internationaal publiekinternationaal publiek


1010

TweetrapsraketTweetrapsraket

In principe reliëf in CV door de diverse In principe reliëf in CV door de diverse rubrieken en indicatie van ABC en rubrieken en indicatie van ABC en nationaal/internationaalnationaal/internationaal

In principe enkel kwaliteitscriteria, geen In principe enkel kwaliteitscriteria, geen kwantiteitkwantiteit

Integraal profiel vereist evenwel een minimum aan Integraal profiel vereist evenwel een minimum aan kwantitatieve vereisten: dit is het minimum niveau kwantitatieve vereisten: dit is het minimum niveau waaraan elke onderzoeker minstens moet voldoenwaaraan elke onderzoeker minstens moet voldoen


1111

TweetrapsraketTweetrapsraket

Minimum niveauMinimum niveau Referentieperiode = 5 jaar (post doc: 3 jaar)Referentieperiode = 5 jaar (post doc: 3 jaar) Drie categorieën: publicaties/projecten en Drie categorieën: publicaties/projecten en

doctoraatsbegeleiding/lezingendoctoraatsbegeleiding/lezingen Differentiatie volgens academische graadDifferentiatie volgens academische graad

6 9 12 en 1 2 3 regel6 9 12 en 1 2 3 regel Meeteenheid = B (alleen voor kwantitatief minimum)Meeteenheid = B (alleen voor kwantitatief minimum)

1 A art = 2 B = 4 C11 A art = 2 B = 4 C1 1 hst in A boek = 1 A art1 hst in A boek = 1 A art 1 A boek = 5 A art = 10 B art 1 B boek = 5 B art1 A boek = 5 A art = 10 B art 1 B boek = 5 B art 1 A lezing = 3 B = 6 C1 A lezing = 3 B = 6 C


1212

2. Ranking van 2. Ranking van tijdschriften: werkwijzetijdschriften: werkwijze

Samenstelling van de commissieSamenstelling van de commissie OnafhankelijkheidsverklaringOnafhankelijkheidsverklaring Intern effect van de rankingIntern effect van de ranking Tijdens de procedure hebben Tijdens de procedure hebben

commissieleden die een band hebben commissieleden die een band hebben met een tijdschrift altijd de vergadering met een tijdschrift altijd de vergadering verlaten.verlaten.


1313

2. Tijdschriften2. Tijdschriften

Vlaamse en tweetalig Belgische tijdschriftenVlaamse en tweetalig Belgische tijdschriften 126 tijdschriften aangeschreven126 tijdschriften aangeschreven 71 inzendingen71 inzendingen Vraag tot selectie van 1/3 jaargang in periode Vraag tot selectie van 1/3 jaargang in periode

2002-2004 en minstens 5 nrs. per jaargang2002-2004 en minstens 5 nrs. per jaargang Rankingcriteria op voorhand medegedeeldRankingcriteria op voorhand medegedeeld


1414

2. Tijdschriften2. Tijdschriften

Rankingcriteria model: wetenschappelijke Rankingcriteria model: wetenschappelijke originaliteit, grondigheid, overschrijdend originaliteit, grondigheid, overschrijdend karakterkarakter

70% norm: ten minste 70% van artikelen 70% norm: ten minste 70% van artikelen bepalen niveau van het tijdschriftbepalen niveau van het tijdschrift

Enkel juridische artikelen in juridische Enkel juridische artikelen in juridische tijdschriften (> 20% juridische artikelen tijdschriften (> 20% juridische artikelen (ook multi- en interdisciplinair))(ook multi- en interdisciplinair))


1515

2. Tijdschriften2. TijdschriftenEerste fase – Belgische Eerste fase – Belgische ledenleden

Eerste rondeEerste ronde 3 subgroepen van 2, telkens met de 3 subgroepen van 2, telkens met de

VoorzitterVoorzitter Nummers doornemen zonder tijdslimietNummers doornemen zonder tijdslimiet Tijdschrift per tijdschrift dialoog om te komen Tijdschrift per tijdschrift dialoog om te komen

tot voorstel van scoretot voorstel van score


1616

2. Tijdschriften2. TijdschriftenEerste fase – Belgische Eerste fase – Belgische ledenleden

Tweede rondeTweede ronde Plenair met alle Belgische ledenPlenair met alle Belgische leden Vergelijking van resultaten van elke groepVergelijking van resultaten van elke groep Opnieuw tijdschriften doornemenOpnieuw tijdschriften doornemen Dialoog om te komen tot consensus voorstelDialoog om te komen tot consensus voorstel Consensus = unaniem of bij ruime Consensus = unaniem of bij ruime

meerderheidmeerderheid


1717

2. Tijdschriften2. TijdschriftenTweede fase – buitenlandse Tweede fase – buitenlandse ledenleden

Ruim op voorhand model en criteria Ruim op voorhand model en criteria overgemaaktovergemaakt

Geen kennis van resultaten Belgische Geen kennis van resultaten Belgische ledenleden


1818


Eerste rondeEerste ronde Alle buitenlandse leden samen met Alle buitenlandse leden samen met

VoorzitterVoorzitter Doornemen van alle nrs. van alle Doornemen van alle nrs. van alle

tijdschriften zonder tijdslimiettijdschriften zonder tijdslimiet Via dialoog consensus voorstel van score Via dialoog consensus voorstel van score

voor elk tijdschriftvoor elk tijdschrift


1919


Tweede rondeTweede ronde Testen van de resultaten op interne Testen van de resultaten op interne

consistentieconsistentie Opsporen van anomalieënOpsporen van anomalieën Tijdschriften vergelijken met elkaar, op alle Tijdschriften vergelijken met elkaar, op alle

niveausniveaus


2020


Derde rondeDerde ronde Vergelijken van de resultaten buitenlandse leden Vergelijken van de resultaten buitenlandse leden

met de resultaten van de Belgische leden (plenair)met de resultaten van de Belgische leden (plenair) Indien uitkomst gelijk: geen actieIndien uitkomst gelijk: geen actie Indien verschil: vergelijking met resultaten van de Indien verschil: vergelijking met resultaten van de

drie Belgische subgroependrie Belgische subgroepen Bij gelijkenis met 2 subgroepen: behoud van voorstelBij gelijkenis met 2 subgroepen: behoud van voorstel Bij grotere verschillen en twijfelgevallen: opengelatenBij grotere verschillen en twijfelgevallen: opengelaten

Finale discussie over benchmarks A B C en Finale discussie over benchmarks A B C en aftoetsen van alle voorstellen daaraanaftoetsen van alle voorstellen daaraan


2121

2. Tijdschriften2. TijdschriftenDerde fase – Plenair Derde fase – Plenair Belgische en buitenlandse Belgische en buitenlandse ledenleden

Eerste rondeEerste ronde Vergelijken van de resultaten buitenlandse Vergelijken van de resultaten buitenlandse

leden met de resultaten van de Belgische leden met de resultaten van de Belgische leden (plenair)leden (plenair)

Indien uitkomst gelijk: behoud van voorstelIndien uitkomst gelijk: behoud van voorstel Indien verschil: Indien verschil:

detailonderzoek van het betrokken tijdschriftdetailonderzoek van het betrokken tijdschrift Via dialoog komen tot consensus voorstel Via dialoog komen tot consensus voorstel


2222

2. Tijdschriften2. TijdschriftenDerde fase – Plenair Derde fase – Plenair Belgische en buitenlandse Belgische en buitenlandse ledenleden

Tweede rondeTweede ronde Grondige discussie over de benchmarks van Grondige discussie over de benchmarks van

de rankingde ranking Onderzoek op interne consistentie door Onderzoek op interne consistentie door

nieuwe analyse van alle tijdschriften op de nieuwe analyse van alle tijdschriften op de grensgebieden van de rankinggrensgebieden van de ranking

Finale goedkeuring van de ranking Finale goedkeuring van de ranking


2323

2. Tijdschriften2. TijdschriftenResultaten en beslissingenResultaten en beslissingen Niet gerankte tijdschriftenNiet gerankte tijdschriften

Niet juridisch (< 20% juridische artikelen)Niet juridisch (< 20% juridische artikelen) Wetenschappelijk: vermelden bij I/1.8Wetenschappelijk: vermelden bij I/1.8 Niet wetenschappelijk: vermelden bij II/3.4Niet wetenschappelijk: vermelden bij II/3.4

Onvoldoende onderzoeksfinaliteit: vermelden bij Onvoldoende onderzoeksfinaliteit: vermelden bij II/3.4II/3.4

Niet ingezonden: vermelden bij I/1.8 met vermelding Niet ingezonden: vermelden bij I/1.8 met vermelding “niet gerankt”“niet gerankt” Inzendingen kunnen nog (worden behandeld door Inzendingen kunnen nog (worden behandeld door

boekencommissie): dan vermelden bij I/1.8 met vermelding boekencommissie): dan vermelden bij I/1.8 met vermelding “ranking procedure hangende”“ranking procedure hangende”


2424

2. Tijdschriften2. TijdschriftenResultaten en beslissingenResultaten en beslissingen Artikelen: 5 categorieënArtikelen: 5 categorieën

A: wetenschappelijk tijdschrift op A: wetenschappelijk tijdschrift op internationaal niveauinternationaal niveau

B1/B2: tijdschriften met duidelijke B1/B2: tijdschriften met duidelijke onderzoeksfinaliteitonderzoeksfinaliteit B1 wetenschappelijk iets sterkerB1 wetenschappelijk iets sterker

C1: degelijke vakgerichte tijdschriften met C1: degelijke vakgerichte tijdschriften met een zekere onderzoeksfinaliteiteen zekere onderzoeksfinaliteit

C2: onderzoeksmatig zeer beperktC2: onderzoeksmatig zeer beperkt


2525

2. Tijdschriften2. TijdschriftenResultaten en beslissingenResultaten en beslissingen Artikelen: piramideArtikelen: piramide

AA 33 B1B1 99 B2B2 1010 C1C1 1515 C2C2 1919

Sommige tijdschriften niet gerankt, soms alleen Sommige tijdschriften niet gerankt, soms alleen voor notenvoor noten

In kwantitatief minimum model worden C1 In kwantitatief minimum model worden C1 artikelen ook meegenomenartikelen ook meegenomen


2626

2. Tijdschriften2. TijdschriftenResultaten en beslissingenResultaten en beslissingen Noten: 3 categorieën: A B CNoten: 3 categorieën: A B C Geen A rankings, 10 B rankings, 3 C Geen A rankings, 10 B rankings, 3 C

rankings en een aantal niet gerankt als rankings en een aantal niet gerankt als wetenschapsondersteunendwetenschapsondersteunend


2727

3. Boeken 3. Boeken

Samenstelling van de commissieSamenstelling van de commissie OnafhankelijkheidsverklaringOnafhankelijkheidsverklaring Intern effect van de rankingIntern effect van de ranking Tijdens de procedure zullen Tijdens de procedure zullen

commissieleden die een band hebben commissieleden die een band hebben met een boek de vergadering verlaten.met een boek de vergadering verlaten.

Timing: januari-februari 2006Timing: januari-februari 2006


2828

3. Boeken3. Boeken

Rankingcriteria model: wetenschappelijke Rankingcriteria model: wetenschappelijke originaliteit, grondigheid, overschrijdend originaliteit, grondigheid, overschrijdend karakterkarakter

70% norm: ten minste 70% van artikelen in het 70% norm: ten minste 70% van artikelen in het boek bepalen het niveau van het boekboek bepalen het niveau van het boek

Enkel juridische artikelen in een boek worden Enkel juridische artikelen in een boek worden beoordeeldbeoordeeld Wellicht geen ranking indien boek <20% juridische Wellicht geen ranking indien boek <20% juridische

artikelen: cf. tijdschriftenartikelen: cf. tijdschriften Boekencommissie geeft ABC ranking en ook Boekencommissie geeft ABC ranking en ook

label nationaal of buitenlands/internationaallabel nationaal of buitenlands/internationaal


2929

3. Boeken – Wat?3. Boeken – Wat?

BoekenBoeken Bijdragen in boekenBijdragen in boeken Losbladige werken (indien nog updates sinds 1 Losbladige werken (indien nog updates sinds 1

januari 2004)januari 2004) SyllabiSyllabi Proceedings van congressenProceedings van congressen OnderzoeksrapportenOnderzoeksrapporten Niet: codex, rechtspraakbundel, etc. (CV II/3.4: Niet: codex, rechtspraakbundel, etc. (CV II/3.4:

wetenschapsondersteunend)wetenschapsondersteunend)


3030

3. Boeken – Wat?3. Boeken – Wat?

Verschenen vanaf 1 januari 2004Verschenen vanaf 1 januari 2004 Boeken van voor die datum: vermelding Boeken van voor die datum: vermelding

“geen ranking beschikbaar”“geen ranking beschikbaar” Boeken van na die datum die niet Boeken van na die datum die niet

ingediend zijn: vermelding “niet gerankt” ingediend zijn: vermelding “niet gerankt” in rubriek I/1.8in rubriek I/1.8


3131

3. Boeken – Praktisch3. Boeken – Praktisch

Bij voorkeur minstens 2 exemplaren (mag ook Bij voorkeur minstens 2 exemplaren (mag ook digitaal: digitaal: [email protected]@vlir.be)) Indien het echt niet anders kan, slechts één Indien het echt niet anders kan, slechts één

exemplaar bezorgenexemplaar bezorgen Ook kopies of PDF mogelijk – de VLIR verbindt zich Ook kopies of PDF mogelijk – de VLIR verbindt zich

ertoe de auteursrechten te respecterenertoe de auteursrechten te respecteren

Voor 30 november 2005Voor 30 november 2005 Eventueel centralisatie per faculteit en dan Eventueel centralisatie per faculteit en dan

vanuit de faculteit aan de VLIR bezorgenvanuit de faculteit aan de VLIR bezorgen


3232


Elke inzending via email bevestigen bij Elke inzending via email bevestigen bij Jetje DegroofJetje Degroof

Lijst van voor ranking ingezonden Lijst van voor ranking ingezonden boeken op VLIR website zodat auteurs boeken op VLIR website zodat auteurs van bijdragen in die boeken geen extra van bijdragen in die boeken geen extra exemplaren moeten inzendenexemplaren moeten inzenden


3333


Na de ranking worden alle exemplaren Na de ranking worden alle exemplaren terugbezorgd door de VLIR aan terugbezorgd door de VLIR aan faculteitssecretariaatfaculteitssecretariaat

Steeds goed op het boek de Universiteit Steeds goed op het boek de Universiteit en naam inzender vermeldenen naam inzender vermelden


3434

Verdere informatie:Verdere informatie:

[email protected]@law.kuleuven.be [email protected]@vlir.be

VLIR – Egmontstraat 5 – 1000 BrusselVLIR – Egmontstraat 5 – 1000 Brussel 02 550 15 7802 550 15 78

Evaluatie van onderzoek in de rechtswetenschappen VLIR Subwerkgroep Onderzoek Rechten Alain Verbeke...

Documents

Transcript of Evaluatie van onderzoek in de rechtswetenschappen VLIR Subwerkgroep Onderzoek Rechten Alain Verbeke...