Het filteren van feedback

De studenten geven anoniem antwoord op de HJGGV-vragen. Op de derde vraag Wat kunnen we doen om het cijfer omhoog te krijgen? kunnen ze daarom alles tikken wat ze willen en dat mag ook. Dat is te zeggen, ze mogen bijna alles tikken. Een belangrijke spelregel voor de studenten is dat de feedback niet over individuele docenten mag gaan. De HJGGV-cyclus is daar niet voor bedoeld. Dat geldt ook voor feedback die als compliment bedoeld is. Als het toch gebeurt, wordt de feedback gewist. Trouwens, ook feedback waarin studenten JA aanvinken als antwoord op de eerste vraag en vervolgens een 1 geven als antwoord op de tweede vraag wordt verwijderd.

In het filmpje laat ik zien hoe het filteren van feedback in zijn werk gaat en dat die gedelete feedback toch nog heel zinvol blijkt te zijn:

Labelen

De meeste evaluatievragenlijsten bestaan voor het grootste deel uit gesloten vragen. Gesloten evaluatievragen bepalen feitelijk waar de studenten wat van mogen vinden. Dat is juist bij het verzamelen van feedback niet wat je zou willen. Het gaat tenslotte niet om wat de docenten willen vragen maar om wat de studenten willen zeggen. En ze daar op voorhand m.b.v. gesloten vragen in beperken, is zonde, je weet niet wat je misloopt!

Bij HJGGV draait het allemaal om de antwoorden die de studenten geven op de derde open vraag. De eerste twee vragen - Heb je genoeg geleerd vandaag? en Wat voor cijfer geef je voor hoeveel je geleerd hebt vandaag? - leiden de derde vraag in:  Wat kunnen we doen om het cijfer omhoog te krijgen?

In het filmpje zie je hoe de veelheid aan antwoorden op de derde vraag te ordenen is met behulp van labels en hoe het team vervolgens kan analyseren welke teamacties nodig zijn. De discussies in het team over de feedback en de conclusies die vervolgens getrokken worden, daar gaat het om in de HJGGV-cyclus.

Week 7

Ook de uitkomsten van de Check-vragen worden met de studenten besproken. Het gesprek bevestigt nog een keer welk belang de docenten hechten aan de feedback van de studenten. De uitkomsten maken duidelijk of reparaties nodig zijn, bijvoorbeeld omdat de studenten onvoldoende herkennen dat de docenten aan de slag zijn met de teamacties. 

Sla het gesprek nooit over, ook niet als de uitkomsten goed zijn.


Week 3

Het bespreken van de uitkomsten en de teamacties met de studenten is een wezenlijke stap in de cyclus. In de teamacties moeten de studenten de feedback herkennen. Dat zijn lang niet altijd de tips die ze zelf hebben ingetikt. 
Studenten moeten vanuit een breder perspectief naar de acties van de docenten kunnen kijken. Docenten moeten goed kunnen uitleggen hoe elke teamactie voortkomt uit de feedback, waarom die belangrijk is en hoe ze de teamactie - herkenbaar voor studenten - oppakken. 
Als het niet lukt om de teamacties te koppelen aan de feedback of als de teamacties niet herkenbaar zijn voor studenten, is dat te zien aan de uitkomsten van de Checkweek.

Week 2: Drie soorten uitkomsten als input voor de teamacties

Er worden in de HJGGV-cyclus maar drie gesloten vragen gesteld en maar één open vraag. De combinatie van de antwoorden en de wijze waarop die antwoorden verkregen worden, levert heel veel meer statistische informatie op dan je op grond van het aantal vragen zou verwachten. Het levert natuurlijk informatie op over het al dan niet groter worden van het percentage studenten dat JA zegt op de vraag Heb je genoeg geleerd vandaag?. Maar het levert ook informatie op over het commitment waarmee de docenten de methodiek omarmen; over het commitment van de studenten om serieus mee te doen; over het verband tussen die twee zaken; over nog veel meer. De statistische informatie is omgezet in lijngrafieken en cijferverdelingen

De lijngrafieken staan net als de cijferverdelingen in je Dashboard. Je kunt zelf kiezen welke combinatie van lijngrafieken je in het overzicht wilt weergeven. Elke combinatie is mogelijk. Langs de x-as vind je de afnameweek: Sw16173 staat voor Startweek van ronde 3 in schooljaar 16/17, Cw staat voor Checkweek. Op de linker y-as staan procenten en aantallen, bij de rechter y-as staan de cijfers 1 t/m 10.
De cijferverdelingen laten zien welke cijfers JA en NEE-zeggers geven en hoe vaak ze dat doen. Ze geven meer inzicht dan alleen het gemiddelde, vooral als je ze over een langere periode met elkaar vergelijkt. De cijferverdelingen worden ook gebruikt bij het analyseren van de tips. (zie filmpje verderop)
Hieronder een filmpje (zonder geluid) over hoe de lijngrafieken en cijferverdelingen weergegeven worden.

De tips - en suggesties en klachten en ideeën en observaties en suggesties en reflecties enz. - van de studenten, daar gaat het natuurlijk om. Ze geven het team inzicht in wat de studenten vinden van school. Aan het eind van de Startweek worden de tips gepubliceerd op het portaal, alleen zichtbaar voor de docenten van het team. In de light-versie van HJGGV kan het team de tips downloaden als Excel-bestand om ze vervolgens zelf te ordenen. In de standaard- en de pro-versie is het verwerken van de tips tot teamacties een echte teamactiviteit. Het filmpje laat dat zien. 
Het is niet de bedoeling dat de tips achteraf met de leerlingen gedeeld worden. We willen vermijden dat leerlingen zich ter verantwoording geroepen voelen. Een aantal tips staat wel online, mét toestemming van de studenten. Je vindt ze hier.

De teamacties zijn het resultaat van de analyse die het onderwijsteam gemaakt heeft van de uitkomsten. Aan het eind van de teambijeenkomst legt de regisseur de teamacties vast. Ze komen meteen in je dashboard op portal.hjggv.nl te staan.

De teamacties kunnen gericht zijn op het verbeteren van de onderwijspraktijk en op het verbeteren van de uitvoering van de cyclus. (De teamacties hieronder staan los van de feedback en de labels in het filmpje.)

door naar Week 3           terug naar het schema

 

De Startweek & de Checkweek: Het afnemen van de vragen

In een afnameweek worden de HJGGV-vragen aan het eind van elke lesdag voorgelegd aan de studenten/leerlingen. Bij de start van de laatste les projecteert, of schrijft, de docent de afnamecode op het bord.
De studenten openen op hun telefoon de HJGGV-app, vullen de code in en beantwoorden de vragen. (De app is te vinden in de Apple App Store en in de Google Play Store.)
De leerlingen kunnen de vragen ook beantwoorden op de website http://app.hjggv.nl (zonder www dus).
Het grote voordeel van de app is dat je niet per ongeluk op een verkeerde website kunt terechtkomen en het afnemen van de vragen gaat via de app simpelweg sneller. Maar ook via de website duurt het beantwoorden van de vragen niet langer dan een paar minuten. 

De docent kan op twee manieren aan de afnamecodes komen: via de mail of via het dashboard. 

Via de mail
De docent krijgt voorafgaand aan de afnameweek een mailtje met een lijst van de lessen waar hij de vragen afneemt. Voor elke les is een aparte code aangemaakt die de studenten/leerlingen nodig hebben om de vragen te kunnen beantwoorden. De docent ontvangt op de dagen zelf nog een herinneringsmailtje. Hieronder een voorbeeld van zo'n mailtje. 
Via het Dashboard
De docent kan de afnamecodes ook vinden in zijn tijdlijn op het Dashboard. Je komt op je Dashboard via de link die je vindt in de HJGGV-mailtjes. In het plaatje hierboven zie je zo'n link staan. 
Hieronder zie je een deel van een tijdlijn met een Checkweek en één onderwijsactiviteit incl. afnamecode.


Afnemen via de beamer
Je kunt de code beameren vanuit je Dashboard. Op de dag van de afname verschijnt er een link achter de betreffende les. Als je op die link klikt, dan gaat de rest vanzelf. Hieronder vind je een filmpje waarin gedemonstreerd wordt hoe het werkt.

Spelregels
Bij het beantwoorden van de vragen horen een paar spelregels voor de studenten en docenten:
  • Denk bij het beantwoorden van de vragen terug aan de hele lesdag.
  • Als je tips wilt intikken - dat kan alleen tijdens een Startweek - leg dan duidelijk uit wat je vindt dat er anders zou moeten. Je kunt natuurlijk ook aangeven wat je vindt dat er juist goed gaat! Allebei mag natuurlijk ook. 
  • Bij het intikken van tips mag je geen namen noemen. Het is niet de bedoeling dat je tips aan een specifieke docent geeft. We deleten je feedback als er toch een naam in voor komt, ook als het een compliment is. 
  • De tips die jullie geven zijn alleen voor jullie docenten bestemd. De tips worden achteraf niet in de klas besproken.
  • Alle antwoorden worden aan het eind van de week samengevoegd. Er is niet te zien uit welke klas bepaalde reacties gekomen zijn en daardoor is niet te achterhalen wie de feedback gegeven heeft. 
Na het beantwoorden van de laatste vraag krijgt het scherm van de telefoon een bepaalde kleur. Die kleur is voor alle telefoons in de klas hetzelfde. Daarmee kan de docent checken of het beantwoorden van de vragen goed is gegaan.