Quayn | at random toetsen

Het is mogelijk om binnen Quayn ‘at random’ te toetsen. Dat wil zeggen dat een leerling een selectie van items krijgt uit een itembank met meerdere items. Zo kan elke leerling een andere toets maken. In dit artikel laat ik zien hoe u dit doet.
Door: Jolien Vennink

De docent maakt eerst een voorselectie van items en vervolgens krijgt de leerling een deel daarvan te zien. Welk deel dat is, is afhankelijk van de instellingen die de docent maakt. Dat wordt pas bij de start van de toets bepaald. Zo is het mogelijk om een geheel willekeurige selectie te laten maken. Maar soms is het ook wenselijk om wel bepaalde richtlijnen aan de selectie mee te geven. In dat geval geeft u per metadataveld aan hoeveel vragen daarbinnen moeten worden geselecteerd.

De verschillende mogelijkheden die er zijn, worden hieronder besproken.

Instellingen
Wanneer een itembank gevuld is met items, kan er een project gemaakt worden.
Dat gaat via Itembanken | Selecteren en Arrangeren. Er wordt dan een keuze gemaakt uit één of verschillende itembanken. Items worden geselecteerd en in het arrangement gestopt. Een arrangement is de laatste fase voor het afronden van een project.
Na het selecteren van items wordt er gekeken naar de instellingen, bij de knop ‘Instellingen’ op het tabblad ‘Arrangeren’. Deze instellingen gaan over het gehele verloop van het project; begin, tijdens en de afsluiting. Welke instellingen van toepassing zijn op het project zal per soort toets wisselen.

De instellingen voor ‘at random’ toetsen zijn op het tabblad ‘Aan het begin‘ te vinden.
Het tweede kopje is ‘Selectie tonen’ . Daar worden de instellingen gedaan voor het ‘at random’ toetsen. Standaard staat er aangevinkt ‘Alle vragen uit project tonen’. Dit wil zeggen dat alle items die geselecteerd zijn, ook in het project komen.

Figuur 1. Alle vragen uit het project tonen.

Een willekeurige selectie tonen
Het kan soms handig zijn om een willekeurige selectie van de items te laten maken door de leerlingen. Door het aanvinken van: ‘Random selectie van .. vragen geven’, krijgen de leerlingen het aantal aangegeven items. Hierbij is het een willekeurige selectie uit het arrangement. Zo krijgen alle leerlingen een andere selectie van items voor zich.

Er is bijvoorbeeld door de docent een selectie gemaakt van 60 items. Daarbij is gekozen voor een ‘Random selectie van 20 vragen geven’. Elke leerling krijgt nu een toets van 20 items, welke allemaal ‘at random’ zijn gekozen door de computer uit die bak van 60 items.

Figuur 2. Een selectie van de vragen tonen.

Belangrijke items
Vaak zijn er items binnen een toets die extra belangrijk zijn. Hiervan is het belangrijk dat elke leerling ze krijgt. Zo krijgt een leerling toch een iets minder willekeurige selectie voor zich. Dit is een instelling die je kunt doen bij het maken van de items. Kies dan bij het maken van het item in het tabblad ‘Instellingen‘, voor de optie ‘Dit item altijd opnemen in ‘At Random’ toetsen’.

Wanneer er dus inderdaad gekozen is voor een toets van 20 items uit een bak van 60; dan zal elke leerling dit belangrijke item(s) in ieder geval krijgen.

Figuur 3. Dit item altijd opnemen in ‘At Random’ toetsen.

Een selectie tonen op basis van metadata
Een selectie kan ook minder willekeurig uitgevoerd worden. Dit kan op basis van metadata. Maar wat is metadata ook alweer? Dit is de informatie over een item. Zoals bij welk hoofdstuk hoort het item of bij welk onderwerp. Deze informatie wordt ingevuld bij het maken van de items. Hoe meer informatie er daar wordt neergezet, hoe meer ermee gedaan kan worden.

Het is bijvoorbeeld te gebruiken bij het filteren van items om een toets te kunnen samenstellen. Of juist achteraf bij het analyseren van een toets.

selectie_01

Figuur 4: kies het aantal random te kiezen vragen per onderwerp

In dit geval wordt de metadata gebruikt bij het At Random toetsen. Er wordt een metadata veld gekozen om daar vervolgens een selectie van te laten maken.

In het voorbeeld, figuur 4 hierboven, is het metadata veld ‘Onderwerp’ gekozen. Binnen de gekozen items is het metadata veld ‘Onderwerp’ ingevuld met ‘Grammatica ontleden en woordsoorten’. Van het onderwerp ‘Grammatica: ontleden’ bevinden zich 25 items in deze toets en van ‘Grammatica: woordsoorten’ 42. Nu kan er een selectie gemaakt worden.

Bijvoorbeeld 10 items van ‘Grammatica: ontleden’. Dat wil zeggen dat elke leerling 10 willekeurige items van die betreffende 25 items voorgeschoteld krijgt.’

Als de andere instellingen ook ingevuld zijn, kan er op ‘Opslaan’ gekozen worden. Daarna nog ‘Project maken‘ het project is klaar. Klaar om in te plannen, af te nemen en te analyseren.

Leer nog meer mogelijkheden van Quayn kennen:
>> Vraag een training aan

Afbeeldingen inzetten als bron

Bij een online toets afname is het belangrijk dat de maker van de items in gedachten houdt, dat elk item met alle bronnen gedownload moet worden door de afnemer van de toets. Dit kan voor één cursist een kleine opgave zijn, maar bij een groep/klas van 30 cursisten moet elke cursist die toets downloaden naar zijn device.
Door: Nick Hollegien

Bronnen zijn zeer belangrijk voor online toetsen, maar een met een telefoon zelf gemaakte foto is tegenwoordig al enkele MB’s groot. Dat is te groot voor digitaal toetsen. Belangrijk is daarbij dat bronnen zo klein mogelijk gehouden worden. Een zeer handig programma hiervoor van Windows is het Knipprogramma.

We hebben een handleiding gemaakt voor het zo klein mogelijk maken van afbeeldingen. Stelregel: zorg dat een afbeelding die u u wilt weergeven op een beeldscherm NOOIT groter is dan 100 kB. U kunt vanuit de Windows Verkenner zien hoe groot elke afbeelding is. Bestaande afbeeldingen kunt u ook verkleinen met een beeldbewerkingsprogramma.

Komt u er niet uit? Stuur dan een zip van uw toets met bronnen naar onze helpdesk.

> Klik hier voor de PDF hierbij 

quayn_bron_optimalisatie

Rapportage marktonderzoek ‘Formatief evalueren’

Het onderzoeksbureau Oberon en de Universiteit Twente/RCEC hebben, in opdracht van het ministerie van Onderwijs, Cultuur en Wetenschap een marktonderzoek uitgevoerd naar instrumenten en interventies gericht op formatief evalueren. DRP heeft aan dit onderzoek deelgenomen, waarbij ons pakket Quayn uitgebreid is bekeken en we zijn bevraagd via een vragenlijst en een interview.
Door: Allard Bijlsma

Uit het onderzoek blijkt dat formatief evalueren een onderwerp is, dat erg leeft onder docenten. Over het algemeen geven docenten aan dat zij over (ruim) voldoende kennis en vaardigheden beschikken om formatief evalueren te kunnen toepassen in hun onderwijs. Wel geven ze aan behoefte te hebben aan handreikingen om:

feedup (vooraf: waar sta je),
feedback (waar sta je nu) en
feedforward (welke stappen zijn nog te nemen)

goed te kunnen implementeren in hun lessen. Behalve methoden spelen extern aangeboden instrumenten nog geen grote rol bij de manier waarop docenten invulling geven aan formatief evalueren. Docenten geven aan dat voor een succesvolle implementatie van formatief evalueren in het onderwijs, binnen de school een cultuuromslag en een gedeelde visie op formatief evalueren nodig is.

Dit onderzoek biedt enerzijds een overzicht van toetsen, leermiddelen en overige interventies gericht op formatief evalueren die er op dit moment zijn en in de nabije toekomst ontwikkeld gaan worden. Anderzijds is onderzocht waar docenten behoefte aan hebben bij formatief evalueren. Daarmee kan dit onderzoek ondersteunend zijn voor scholen die een keuze willen maken welke instrumenten of interventies zij mogelijk willen gaan benutten. Ook levert dit onderzoek informatie op voor marktpartijen over de verbinding tussen vraag en aanbod.

Bent u zich aan het oriënteren op het gebruik van ons pakket Quayn en u wilt het (ook) gaan inzetten voor formatief toetsen, lees dan zeker dit rapport door. Borrelen er naar aanleiding daarvan vragen op en/of u wilt met uw bestuur of (directie)team praktisch zien hoe u dit middels Quayn in de praktijk kunt invoeren, maak dan een afspraak met ons via dit [ formulier ]. 

Naar verdere informatie bij dit rapport: [ klik hier ]

oberon_rapport

Een taxonomie voor leerniveau gebruiken in Quayn

Steeds meer scholen werken met een taxonomie voor het cognitieve leerniveau, zoals Bloom, OBIT of RTTI. Steeds meer scholen doen dit in Quayn en WinToets. Reden hiervoor is vooral dat handmatig analyses maken, ondoenlijk is. Onze programma’s leveren na afloop direct de uitgesplitste analyses op. In dit artikel laten we zien hoe dit werkt vanuit Quayn.
Door: Marijke Römer 

Als voorbeeld: RTTI
RTTI is een middel om scherp en transparant de vier cognitieve niveaus van leren in kaart te brengen. [ Zie: DocentPlus | www.rtti.nl ]

R = Reproductie, het stampwerk
T1 = Toepassingsgericht niveau 1, basistoepassingen in oefensituaties
T2 = Toepassingsgericht niveau 2, transfer naar andere contexten
I = Inzicht, kritische reflectie, verbanden aanbrengen en creatief leren

RTTI en toetsvragen
Bij het RTTI-model gaat het om het koppelen van een cognitief vaardigheidsniveau zoals hierboven, aan elke vraag. Quayn staat metadata per vraag toe voor 26 velden, waarvan de velden Vaardigheid en Subvaardigheid meestal gebruikt worden om iets als RTTI in te verwerken. U kunt hier ook andere velden voor inzetten. Wij raden sterk aan ook altijd minimaal ook altijd het algemene vraagniveau aan te vinken.

rtti
[ Hier zijn de velden Vaardigheid en Subvaardigheid gebruikt]

Een taxonomie-letter toevoegen
Wanneer u in Quayn een bestaande vraag wilt voorzien van de juiste letters of een nieuwe vraag wilt maken inclusief taxonomie, dan gaat u in beide gevallen naar de Quayn Editor, waar de vraag bewerkt kan worden. Hier kan op het tabblad Metadata, per vraag, de juiste taxonomie-naam en -letter toegevoegd worden.

  • Open een bestaande itembank of maak een nieuwe itembank aan.
  • Vink een bestaand item aan en klik op de knop Wijzigen of maak een nieuw item aan via Nieuw.
  • Klik in de Quayn Editor op het tabblad Metadata om de gegevens over het leerniveau toe te kunnen voegen.

rtti_03
[ Een vraag wijzigen of een nieuw item
maken met de juiste vaardigheid kan via de Quayn Editor ]

Tips bij het invoeren van het vaardigheidsniveau

  • Vaak wordt er bij Vaardigheid de taxonomie-naam volledig ingevuld om het voor de leerlingen en eventueel andere gebruikers duidelijk te maken om welke vaardigheid het gaat. Als er alleen een losse R staat weet de gebruiker naast uzelf, niet altijd waar het over gaat.
  • Bij Subvaardigheid zet u de desbetreffende letter neer. Aangezien de letters van RTTI niet op alfabetische volgorde staan, kunt u het beste een cijfer voor de letters zetten, zo worden ze altijd op volgorde getoond bij de analyses na afloop.
    U krijgt dan voor Reproductie 1 R, Voor Toepassen in bestaande situaties 2 T1, Toepassen in nieuwe situaties 3 T2 en voor Inzicht 4 I. U kunt de woorden ook voluit schrijven.

    quayn_vaardigheidensubvaardigheid
    [ de juiste gegevens zijn ingevoerd in de velden Vaardigheid en Subvaardigheid ]

Analyse met RTTI
Bij het afnemen van een toets wordt naast een eindscore ook een score per afgenomen vraagniveau opgeslagen. Per cursist of groep zijn hiervan analyses terug te zien in het onderdeel Analyse in Quayn. De analyses kunnen via WinToets worden ingelezen in RTTI-online, waar u kunt door-analyseren. We werken aan een koppeling van Quayn aan RTTI-online.

Analyse per cursist
In Quayn kunt u de totale score op de verschillende onderdelen van RTTI zien per cursist.
Dit ziet u op het tabblad Cursist analyse en u kiest dan voor Subvaardigheid als metadataveld.

rtti_02[ RTTI uitslag per cursist]

Analyse per groep
Scores per klas (of van alle klassen) kunt u opvragen door het tabblad Groepsscores te openen bij ‘Score per’: voor Subvaardigheid te kiezen.

rttianalysegroep[ RTTI uitslagen per klas ]

Koppeling aan RTTI-online
Ons programma WinToets biedt als extra mogelijkheid, een koppeling met RTTI online. U kunt onder QuaynSupport of de complete WinToets-licentie gebruik maken van het programma WTAnalyse. Die kent een exportmogelijkheid naar RTTI-online. Een Quayn-analyse kunt u exporteren vanuit Analyse | Rapportages | Genereer WTAnalyseXML. Die XML kunt u openen in WTAnalyse en daar exporteren naar RTTI-online. Deze file kunt u daar uploaden, waarna RTTI-online de aanvullende analyses geeft.

Meer informatie

Nieuw: alle examens in de NVON-itembank voor biologie

Vele tientallen scholen hebben een doorlopende licentie op de NVON-toetsenbank voor het vak biologie. In deze itembank zitten tienduizenden eind- en oefenvragen bij alle thema’s en onderwerpen binnen het vmbo-t, havo en vwo. U kunt al deze toetsen afnemen in Quayn en WinToets of afdrukken naar een Word-document.
Door: Wilma van Rijswijk

In de biologie-toetsitembank zitten inmiddels ruim 24.000 vragen. Het afgelopen jaar hebben de leden van de itembankwerkgroep van de NVON hard gewerkt aan een update. Deze keer zijn, door Jan Willem Noordenbos van de NVON, alle examens van beide tijdvakken voor vmbo-t, havo en vwo vanaf 2012 t/m 2016 integraal omgezet en als los examen te downloaden voor gebruik in WinToets of direct in Quayn te gebruiken. Deze examens kunt u gebruiken voor examentraining, maar ook ter oefening aanbieden aan uw leerlingen. Door bij de open vragen de optie ‘cursist mag vraag zelf nakijken’ aan te zetten, kunnen leerlingen de open vragen zelf nakijken en beoordelen en na afloop direct een uitslag zien.

nvon_07
[  In WTAfname kan een leerling zelf de open vragen nakijken en beoordelen ]

Deze week is het resultaat voor vmbo-t als WinToets-download beschikbaar gekomen op [ dit adres ]. Ze zijn direct in Quayn te gebruiken vanuit de map aa_Examentraining, als uw school daar een licentie op heeft. De komende weken worden hier ook de havo- en de vwo-examens van 2012-2016 geplaatst.  Met uw bestaande inloggegevens, kunt u hier naartoe gaan en vervolgens de diverse itembanken downloaden (WinToets) of direct gebruiken (Quayn). Alleen instellingen met een doorlopende licentie, kunnen jaarlijks over alle nieuwe toetsvragen beschikken.

Heeft uw school eerder wel een licentie gehad, maar die na een jaar opgezegd? Meld uw hernieuwde interesse dan via info@drp.nl en we doen u een aanbod.

nvon_06
[  vraag uit het vmbo-t examen van 2016 | tijdvak 1 ]

Meer weten over de opzet van deze itembank? [ ga naar de site ]
Geen licentie, maar u wilt die wel aanvragen? [ klik hier ]
Kosten hiervoor: 1e jaar Euro 400 en daarna jaarlijks Euro 149 [excl. btw/ per BRIN-locatie]

nvon_05
[  vraag uit het havo-examen van 2016 | tijdvak 2 ]

Nieuw: voorlezen met ReadSpeaker via de Quayn HTML5-Player

In het verleden hadden we al de mogelijkheid ReadSpeaker te gebruiken in onze oudere Flash-player in Quayn, maar nu is het ook mogelijk dit in de huidige HTML5-webplayer te doen. Elke toets kan hiermee worden voorgelezen. U hebt een aanvullend abonnement nodig op ReadSpeaker, maar mag het eerst een paar maanden gratis uitproberen.
Door: Allard Bijlsma

Scholen die ReadSpeaker willen uitproberen kunnen bij ons ReadSpeaker laten aanzetten in hun Quayn-account en het gratis uitproberen t/m 31 december 2016. We hebben hierover afspraken gemaakt met het bedrijf ReadSpeaker te Bosch en Duin.

Voorwaarden hiervoor:

  • U hebt een Quayn-licentie bij ons lopen
  • U werkt niet via de Magister-koppeling, want dan is RS moeilijk te gebruiken
  • U heeft de HTML5-player aan staan en niet de Flash-player
  • We willen na afloop graag horen waar het bij is gebruikt, hoe het is bevallen en of er nog aanvullende wensen zijn.

Op dit moment kunt u in een project het voorlezen alleen aanzetten en starten. We gaan voor 1 januari 2017 ook inbouwen dat je stemmen en talen kunt kiezen en dat je een taalswitch kunt aanzetten. Zo’n switch maakt het mogelijk binnen taal 1 een aangewezen stuk tekst in een andere taal te laten voorlezen. Dit aanwijzen kan straks in de Quayn Editor. Ook gaan we ReadSpeaker inbouwen in WTAfname binnen WinToets 5 SUITE, voor offline afname, met toch online voorleesondersteuning.

Wilt u meer weten hierover of ReadSpeaker laten aanzetten? Stuur dan een e-mail naar info@drp.nl met uw huidige accountgegevens en met de mededeling een pilot te willen draaien met ReadSpeaker. Geef daarbij dan even aan waar u het mee wilt gaan testen en met hoeveel cursisten en wij zetten de optie voor u aan. Zolang wij die optie niet hebben geactiveerd, werkt het niet binnen uw account, ook ziet u hem al wel standaard binnen Quayn

Kosten voor het gebruik van ReadSpeaker bedragen na 1 januari 2017: Euro 0,50 extra per Quayn-gebruiker. We gaan ReadSpeaker ook standaard meenemen in uitgebreidere licentievormen, waar we per 1 januari mee gaan komen.

readspeaker01
[ vinkje bij project plaatsen is genoeg om het voorlezen te starten ]

readspeaker02
[ nu nog 1 stem en 1 taal, maar straks is er wat te kiezen ]

readspeaker03
[ tijdens de afname wordt gehightlight wat wordt voorgelezen ]

>> Meer over ReadSpeaker

 

Veelgestelde vraag: toets nabespreken

Een van de meest gestelde gebruikersvragen gaat over het nabespreken van toetsen. `Wat is een handige manier om Quayn toetsen na te bespreken?` Hieronder worden verschillende opties met de voor- en nadelen uitgelegd.
Door: Marijke Römer en Nick Hollegien

Nabespreken via het digibord met het tabblad Analyse | Projectitems 
Via deze methode laat u als docent de toets alleen zien in uw analyse-omgeving. Via het tabblad Projectitems worden geen individuele cursistitems getoond, maar alleen van de hele klas. Zo kunt u anoniem nabespreken.
(Zie pagina 147 van het cursusboek Quayn.)

+ Leerlingen hebben geen apparaat nodig.
– Eventuele afbeeldingen worden niet getoond.
– Individuele leerlingen zien niet wat ze hebben geantwoord.

projectitems.png
[ nabespreken via Projectitems is ideaal tijdens de les ]

Nabespreken via het onderdeel ‘Resultaten’
Alle cursisten kunnen met deze methode zelf de toets met de vragen, het juiste antwoord en hun gegeven antwoord terugkijken op elk gewenst moment. (Zie pagina 121 van het Cursusboek Quayn om een planning aan te maken met daarin een vinkje bij Cijfer en antwoorden.)

+ Alle leerlingen kunnen thuis al zien waar hun knelpunten zitten en zo eventueel vragen voor de les voorbereiden.
– Leerlingen kunnen vragen en goede antwoorden vrij makkelijk verspreiden. (onze oplossing hiervoor: filter elke keer een andere toets uit de itembank).

restultatenterugzien
[ leerlingen kunnen via het onderdeel zelf hun toets inzien ]

Nabespreken via een Excel-sheet
U kunt per leerling een deel van een Excel-bestand uitdelen met de juiste antwoorden en hun antwoord. Deze methode werkt goed als leerlingen tegelijk een preview van de toets kunnen bekijken, want de vraag zelf wordt niet mee afgedrukt.
(Zie pagina 159 van het cursusboek Quayn.)

+ Moeilijk te verspreiden omdat de vraag zelf er niet bij staat.
– De toets zelf is nodig omdat de vraag niet in het overzicht staat.

nabesprekenexcel.png
[ per klas kan een Excel-bestand aangemaakt worden waar voor elke leerling een aantal rijen gevuld worden die uitgedeeld kunnen worden ]

Wilt u graag hulp met het toepassen van deze methodes?
Vraag dan een training aan via [ dit formulier ].