Sta JavaScript toe om deze pagina te bekijken.

TestVision Help

Als een toets open vragen bevat, moeten de door de kandidaten ingevoerde antwoorden beoordeeld worden, waarna de resultaten vastgelegd kunnen worden. In het scherm van de afname wordt het tabblad Beoordelen actief. Als je rechten hebt als coördinator word je direct als coördinator aan de nieuwe afname toegewezen. De coördinator wijst onder andere kandidaten toe aan beoordelaars en stelt de rechten en rollen in voor beoordelaars. Je kunt zelf bepalen wie coördinator wordt van deze afname. Beoordelaars moet je aan de afname toevoegen. Je kunt hiervoor een selectie maken uit alle ontwikkelaars met rechten om vragen te beoordelen. Het beoordelen van de vragen en het vastleggen van de resultaten kun je bij dezelfde ontwikkelaar(s) beleggen, maar deze rechten kunnen ook gescheiden worden. Meer informatie over het instellen van het beoordelen vind je in het instructiefilmpje Beoordelingsinstellingen en in de implementatiehandleiding.

 

Let op Het achteraf (na afloop van een toets) aanpassen van de beoordelingsinstellingen, zoals voor herbeoordeling of het aanpassen van werklast, heeft alleen effect op nog te beoordelen vragen of nog toe te wijzen beoordelaars. Als de beoordelingen al zijn afgerond, moeten ze eerst teruggedraaid worden. Vastgelegde beoordelingen kunnen vanuit de afnameresultaten teruggedraaid worden (met de juiste rechten en als de afname niet is afgesloten). Instellingen die invloed hebben op de automatische toewijzing (werklast of veranderen naar automatische toewijzing) moeten gebeuren voordat de kandidaten de toets hebben afgerond. Op dat moment gaat TestVision namelijk toewijzen. Eventueel kan de coördinator die automatische toewijzingen handmatig aanpassen.

 

1.Klik op de knop Wijzigen in het tabblad Beoordelen.

 

Het venster Beoordelen verschijnt, met in de titelbalk de naam van de afname. In dit venster kun je een coördinator selecteren, een toewijzingsmethode kiezen, het type beoordeling instellen, beoordelaars toevoegen en herbeoordelingsinstellingen bepalen. Tevens kun je hier, wanneer jouw organisatie een licentie heeft, de plagiaatcontrole van Ouriginal/Urkund of Turnitin/SimCheck voor de afname aanvinken. Dit zorgt ervoor dat ingeleverde antwoorden en/of documenten bij open vragen gecontroleerd worden op plagiaat. Zie Open vragen beoordelen voor meer informatie over het resultaat. Bij Eisen plagiaatcontrole vind je meer informatie over de eisen aan ingeleverde teksten/bestanden.

Op het moment dat een kandidaat voor de eerste keer een toets start waarbij op plagiaat gecontroleerd wordt, moet de kandidaat in het geval van Turnitin/SimCheck eenmalig akkoord gaan met de plagiaatcontrole om de toets te kunnen starten. Een kandidaat wordt hier bij het instructiescherm naar gevraagd. Bij volgende toetsen krijgt de kandidaat alleen een melding te zien in het instructiescherm dat plagiaatcontrole actief is voor de toets die dan gestart wordt. Voor Ouriginal/Urkund is deze eenmalige toestemming een instelling bij de externe koppeling (Beheer Ouriginal/Urkund-koppeling). Meer informatie over de koppeling met Turnitin/SimCheck vind je bij Beheer Turnitin/SimCheck-koppeling.

Wij adviseren om plagiaatcontrole voorafgaand aan de afname te activeren. Bij Ouriginal/Urkund bestaat de mogelijkheid om achteraf de plagiaatcheck uit te voeren. Zie hiervoor Het tabblad Coördinator.

 

Met de knop help_on1achter de coördinator kun je het beoordelen voor een afname aan- en uitzetten. Als het beoordelen uitgezet is, kunnen beoordelaars (tijdelijk) geen open vragen meer beoordelen.

 

Een coördinator selecteren

Als je een (andere) coördinator wilt selecteren, ga je als volgt te werk:

1.Klik op de knop Acties achter het veld Coördinator.

2.Klik in het venster Coördinator selecteren in het vak Niet geselecteerd op de knop help_naarlinks achter de naam van de ontwikkelaar die je als coördinator van de afname wilt selecteren.
Als er een coördinator staat in het vak Geselecteerd, wordt deze automatisch vervangen door de door jou geselecteerde ontwikkelaar.

3.Klik in het venster Coördinator selecteren op de knop [Klaar].

 

De manier van toewijzing selecteren

In het keuzemenu achter Toewijzing kun je de gewenste manier voor het toewijzen van kandidaatafnames aan beoordelaars selecteren. De volgende manieren zijn beschikbaar:

 

Vrij (per kandidaat)

Elke beoordelaar die aan de afname is gekoppeld kan open vragen beoordelen en/of resultaten vastleggen van alle kandidaatafnames (vastleggen is alleen mogelijk door beoordelaars met vastleg-rechten binnen de afname). De coördinator kan geen specifieke kandidaten aan beoordelaars toewijzen.

Automatisch (per kandidaat)

TestVision wijst automatisch kandidaten toe aan beoordelaars op basis van de ingestelde rechten (wel/niet vastleggen) en rollen (eerste, tweede of herbeoordelaar). De coördinator kan deze toewijzingen wijzigen. Zodra een kandidaat de toets heeft afgerond, wordt deze aan een beoordelaar toegewezen. Hierbij wordt de werklast gebruikt als kans om aan een kandidaat toegewezen te worden. Het is dus niet zo dat de kandidaten exact verdeeld worden volgens de ingestelde werklast.

Handmatig (per kandidaat)

De coördinator moet kandidaten handmatig aan beoordelaars toewijzen, anders kunnen open vragen niet beoordeeld worden. De coördinator heeft in het toewijzingenscherm wel de mogelijkheid om alle toewijzingen in één keer te vullen en daarna aan te passen. Ook kan een hele groep toegewezen worden aan een beoordelaar.

Vrij (per vraag)

De coördinator stelt in welke beoordelaars welke vragen mogen beoordelen (of andersom: welke vragen door welke beoordelaars beoordeeld mogen worden). Vervolgens kan elke beoordelaar die aan een vraag gekoppeld is, deze vraag beoordelen. De coördinator kan geen vragen per kandidaat aan specifieke beoordelaars toewijzen, elke beoordelaar kan binnen de aan hem gekoppelde vragen alles beoordelen.

Automatisch (per vraag)

TestVision wijst automatisch vragen toe aan beoordelaars op basis van de ingestelde rechten (wel/niet vastleggen) en rollen (eerste, tweede of herbeoordelaar). De coördinator stelt vooraf in welke beoordelaars welke vragen mogen beoordelen (of andersom: welke vragen door welke beoordelaars beoordeeld mogen worden). Zodra een kandidaat de toets heeft afgerond, worden de vragen aan beoordelaars toegewezen. Hierbij wordt de werklast gebruik als kans om aan een vraag per kandidaat toegewezen te worden. Het is dus niet zo dat de vragen exact verdeeld worden volgens de ingestelde werklast.

Handmatig (per vraag)

De coördinator moet de vragen per kandidaat handmatig aan beoordelaars toewijzen, anders kunnen de open vragen niet beoordeeld worden. De coördinator heeft in het toewijzingenscherm wel de mogelijkheid om alle toewijzingen in één keer te vullen en daarna aan te passen. Ook kan een hele groep toegewezen worden aan een beoordelaar.

Anders

Toewijzingen worden op een andere manier geregeld, meestal via een (API-)koppeling.

Buiten TestVision

Het beoordelen vindt buiten TestVision plaats. Je kunt in dat geval niets instellen. De resultaten worden niet in TestVision getoond.

Niet beoordelen

De open vragen hoeven niet beoordeeld te worden. Wanneer er meerdere pogingen beschikbaar zijn, kunnen kandidaten direct de volgende poging starten na het afronden van een poging. Deze instelling kan achteraf aangepast worden, zodat alleen een laatste poging beoordeeld wordt.
Let op Als deze optie gekozen wordt, zullen de ingeleverde bestanden niet bewaard worden en kan er ook achteraf, als een andere optie gekozen wordt, niet alsnog beoordeeld worden wat tijdens het 'niet beoordelen' is ingeleverd. Voorafgaand aan een poging die wel beoordeeld moet worden, moet deze optie dus aangepast zijn.

 

1.Selecteer de gewenste manier van toewijzen.

 

Meer informatie over het toewijzen vind je in de implementatiehandleiding.

 

Het type beoordeling selecteren

Bij een vrije beoordeling kun je geen type beoordeling selecteren. Een open vraag wordt eenmalig beoordeeld door de eerste beoordelaar die daarvoor kiest.

 

Wanneer er meerdere beoordelaars betrokken zijn, wordt automatisch een eindbeoordelaar actief die de uiteindelijke beoordeling bepaalt (standaard wordt het gemiddelde van de gegeven beoordelingen als eindbeoordeling getoond, maar de eindbeoordelaar kan dit aanpassen).

 

Wanneer je geen vrije beoordeling hebt gekozen, kun je kiezen uit de volgende typen beoordelingen:

 

Eén beoordelaar

Een kandidaat wordt aan één beoordelaar toegewezen.

Twee beoordelaars tegelijk

Een kandidaat wordt aan twee beoordelaars toegewezen die tegelijk de open vragen van die kandidaat kunnen beoordelen. De rollen 1e en 2e beoordelaar zijn dan niet relevant, maar worden wel toegewezen.

Twee beoordelaars na elkaar

Een kandidaat wordt aan twee beoordelaars toegewezen, waarbij de tweede beoordelaar open vragen pas kan beoordelen als de eerste beoordelaar daarmee klaar is.

 

Let op Wanneer je deze instelling tijdens het beoordelen aanpast van 2 naar 1 beoordelaar, wordt de input van de 2e beoordelaar verwijderd.

 

Afhankelijk van het aantal beoordelaars, wordt de optie Andere beoordeling zichtbaar (is de beoordeling van de ene beoordelaar zichtbaar voor de andere?) actief.
 

1.Selecteer het gewenste type beoordeling.

2.Zet indien gewenst de optie Andere beoordeling zichtbaar uit.

3.Zet indien gewenst de optie Anoniem beoordelen aan. De naam van de kandidaat wordt dan niet getoond aan de beoordelaar, maar is vervangen door een getal.

4.Zet indien gewenst de optie Kandidaten in willekeurige volgorde bij beoordelen per vraag aan. Dit zorgt ervoor dat kandidaten bij het beoordelen per vraag in een andere volgorde getoond worden. Een eenmaal getoonde volgorde blijft wel gehandhaafd per vraag.
 
Je kunt instellen dat bij er automatisch een mail wordt gestuurd naar de betreffende beoordelaar als een (handmatig of automatisch) toegewezen kandidaat de toets heeft afgerond:

5.Zet indien gewenst de optie Automatische e-mail zodra te beoordelen kandidaat klaar staat aan.

 
Let op Houd er rekening mee dat de beoordelaar bij elke toegewezen toets die wordt afgerond, een mail krijgt. Als er heel veel kandidaten moeten worden beoordeeld, kun je deze optie beter niet gebruiken.

 
Let opAls de beoordelaars elkaars beoordeling niet mogen zien, of als ze tegelijk beoordelen, is het feedbackvak niet beschikbaar. Nadat beide beoordelaars hun beoordeling hebben afgerond, komt bij het aanpassen van de eindbeoordeling dit feedbackvak alsnog beschikbaar.
 

Beoordelaars toevoegen

In het vak Beoordelaars kun je beoordelaars toevoegen aan de afname.

1.Klik op de knop Acties van het vak Beoordelaars.

2.Klik in het venster Beoordelaars selecteren in het vak Niet geselecteerd op de knop help_naarlinks achter de namen van de beoordelaars die je aan de afname wilt toevoegen.

3.Klik indien nodig in het vak Geselecteerd op de knop help_naarrechts achter de naam van een beoordelaar die je uit de afname wilt verwijderen.

4.Klik in het venster Beoordelaars selecteren op de knop [Klaar] als je klaar bent met het selecteren van beoordelaars.

 

Als een beoordelaarsnaam is gemarkeerd, betekent dit dat er geen e-mailadres van hem of haar beschikbaar is terwijl er wel mails verstuurd worden.

 

Bij de toewijzingsmethode Vrij kun je per beoordelaar aangeven of deze het recht heeft om resultaten vast te leggen. Als je gekozen hebt voor één of twee beoordelaars, kun je ook de werklast en de rol van elke beoordelaar instellen. De werklast bepaalt welk deel van de te beoordelen kandidaten aan een beoordelaar wordt toegewezen. De rol bepaalt of een beoordelaar wordt toegewezen als eerste beoordelaar, tweede beoordelaar of herbeoordelaar. Je kunt ook instellen dat een beoordelaar alle rollen mag vervullen.

1.Geef voor elke beoordelaar aan of deze het recht heeft om resultaten vast te leggen.

2.Bepaal voor elke beoordelaar de werklast met de pijltjes help_updown of typ deze in het veld.
Standaard staat de werklast voor iedereen op 1. Een werklast van bijvoorbeeld 2 geeft de beoordelaar ongeveer twee keer zoveel beoordeelwerk als iemand met een werklast van 1.

3.Selecteer de gewenste rol van elke beoordelaar via de keuzelijst.

 

Als de door jou ingestelde werklast en rollen niet passen bij bijvoorbeeld het aantal beoordelaars, krijg je hierover een melding.

 

Bij twee beoordelaars is het eindresultaat het gemiddelde van beide beoordelingen.

 

Je kunt een mail versturen aan de groep met beoordelaars, als dat door de applicatiebeheerder is ingesteld. Deze mail wordt gevuld met een standaardtekst die je nog kunt aanpassen.

1.Klik op de knop Mail om een mail te versturen.

2.Voeg indien gewenst e-mailadressen toe of verwijder e-mailadressen.

3.Pas indien gewenst het onderwerpveld of de inhoud van de mail aan.

4.Druk op [Verzenden] om de mail te verzenden.

 

Bovenstaande beschrijving geldt voor alle soorten toewijzingen (vrij per kandidaat, vrij per vraag, automatisch per kandidaat, automatisch per vraag, handmatig per kandidaat en handmatig per vraag). Maar voor het toewijzen per vraag zijn wat extra stappen nodig. Deze staan beschreven in Beoordelen per vraag instellen.

 

Herbeoordelen instellen

Herbeoordelen is niet beschikbaar bij een vrije toewijzing.

 

Je kunt instellen onder welke voorwaarden voor een kandidaat een herbeoordeling moet plaatsvinden. Als je hier geen enkele optie selecteert, vindt geen herbeoordeling plaats.

De opties hebben de volgende betekenis:

 

Verschil geslaagd/gezakt

(alleen bij twee beoordelaars)

Een kandidaat wordt herbeoordeeld als hij bij de ene beoordelaar geslaagd is en bij de andere gezakt.

Verschil met cesuur < x%

(alleen bij één beoordelaar)

Een kandidaat wordt herbeoordeeld als zijn resultaat met een bepaald percentage of minder afwijkt van de cesuur. De standaardwaarde is 10%. Je kunt deze waarde wijzigen met de pijltjes help_updown of een percentage intypen.

Verschil onderling > x%

(alleen bij twee beoordelaars)

Een kandidaat wordt herbeoordeeld als het verschil in beoordeling tussen de beoordelaars groter is dan een bepaald percentage. Hierbij wordt naar het toetsresultaat gekeken (het verschil tussen het toetsresultaat bij B1 en B2). De standaard waarde is 10%. Je kunt deze waarde wijzigen met de pijltjes help_updown of een percentage intypen.

Alleen gezakt

Een kandidaat wordt herbeoordeeld als hij gezakt is.

 

Let opDe combinatie Verschil geslaagd/gezakt en Verschil onderling is een of-relatie, een combinatie van een optie met de optie Alleen gezakt is altijd een en-relatie. Bijvoorbeeld: een kandidaat die 10% boven de cesuur scoort (bij één beoordelaar) wordt niet herbeoordeeld als de optie Alleen gezakt ook aanstaat. En een kandidaat die door de twee beoordelaars verschillend wordt beoordeeld, wordt alleen herbeoordeeld als het eindresultaat gezakt is.

 

Let opAls er geen cesuur is vastgesteld, kan TestVision niet bepalen of een kandidaat gezakt of geslaagd is.

 

Tip Bekijk ook onze externe notitie over de getoonde scorepercentages en het herbeoordelen.

 

1.Selecteer de gewenste toewijzingsmethode voor het herbeoordelen.

2.Bepaal of reeds bestaande beoordelingen zichtbaar zijn voor voor de herbeoordelaar.

3.Selecteer de gewenste opties voor het herbeoordelen.

4.Stel indien nodig bij de optie Verschil met cesuur het gewenste percentage in.

 

Bij een herbeoordeling van één beoordelaar, is het eindresultaat het gemiddelde van beide beoordelingen. Bij een herbeoordeling van twee beoordelaars, is het eindresultaat het gemiddelde van de twee beoordelingen die het dichtst bij elkaar liggen.