Het gebeurt dat docenten de self-assessment (zelfbeoordeling) opties bij een test (toets) ten onrechte aanzetten, omdat ze de optie verkeerd interpreteren:
Hide the score of this test from the Gradebook (De score van deze toets verbergen in de cijferlijst)
If this item is checked, then grade will not be displayed in the Gradebook (Wanneer dit item is ingeschakeld, wordt het cijfer niet weergegeven in de cijferlijst)
Dit kan niet ongedaan gemaakt worden via de user interface, enkel via de database. Neem contact op met de helpdesk en vermeld de exacte course-id en naam van de test (toets).
Meer informatie in Toledo2know.
Indien men bij een vragenpool iets aan de creation settings (instellingen voor maken) verandert, of zelfs indien men niets verandert maar gewoon de pagina met de creation settings (instellingen voor maken) onveranderd doorstuurt via Submit (Verzenden), dan verdwijnt daarna bij het aanmaken van vragen in de pool de optie ‘partial credit’ (deelpunten toestaan). De creation settings (instellingen voor maken) opnieuw aanpassen helft niet, de optie blijft onbeschikbaar.
Hierover werd een call gelogd bij Blackboard (558618). Het blijkt gerelateerd te zijn met een bekend probleem AS-103710. Er is nog geen zicht op een fix. Eventueel kan er vak per vak voo een oplossing gezorgd worden, indien nodig. Neem hiervoor contact op met de Toledo helpdesk.
Afhankelijk van welke taal een cursus of community heeft als instelling, zijn er verschillen in het gebruik van punten en komma’s als decimal tekens:
Cursus/community met Engels als cursustaal (default op GDLO):
- Wanneer men rechtstreeks in het gradebook de score op een test, assignment, … wil aanpassen (door in het tabeloverzicht te klikken op dat cijfer), dan dient men een punt te gebruiken; gebruikt men toch een komma, dan zal de komma worden weggelaten (een score van 2,5 wordt 25).
- Wanneer men in een toets met open vragen (bv. essayvragen) de score op een individuele vraag wil aanpassen, door te klikken op het uitroepteken in het tableoverzicht, daarna te klikken op ‘View’ en vervolgens de score rechts naast de vraag in te vullen), dan dient men een punt te gebruiken. Gebruikt men een komma, dan zal de score na het doorsturen vervangen worden door een 0.
Cursus/community met Nederlands als cursustaal (default op eloV):
- Wanneer men rechtstreeks in het puntenboek de score op een toets, taak, … wil aanpassen (door in het tabeloverzicht te klikken op dat cijfer), dan dient men een komma te gebruiken; gebruikt men toch een punt, dan zal de punt worden weggelaten (een score van 2.5 wordt 25).
- Wanneer men in een toets met open vragen (bv. essayvragen) de score op een individuele vraag wil aanpassen, door te klikken op het uitroepteken in het tableoverzicht, daarna te klikken op ‘Weergeven’ en vervolgens de score rechts naast de vraag in te vullen), dan dient men een punt te gebruiken! Gebruikt men een komma, dan zal de score na het doorsturen vervangen worden door een 0. Let wel, in een Nederlandstalige cursus zal Blackboard altijd na het versturen de score weer veranderen in een komma-getal. Wanneer men daarna voor een tweede keer op ‘Weergeven’ klikt, dan staan er nu komma-getallen, maar men dient de komma’s weer te vervangen door punten als men een aangepaste versie wil opslaan, anders gaan de komma-getallen weer vervangen worden door 0.
Er werd bij Blackboard een call geopend met de vraag om dit inconsistente gedrag in een toekomstige versie aan te passen, en ofwel beide decimale tekens toe te laten, ofwel consequent altijd een komma te gebruiken bij een Nederlandstalige cursus en een punt bij een Engelstalige cursus (cal 557116).
Op de mailinglijsten zijn er meldingen van andere instellingen die problemen ondervinden met Blackboard toetsen en surveys, vooral (maar niet alleen) wanneer een Blackboard toets/survey veel vragen bevat, en er bovendien een tijdslimiet werd ingesteld. Gebruikers die zulke testen opstarten met Internet Explorer 7 als browser, ondervinden heel wat problemen (vertragingen bij het scrollen en zelfs browser lockups). Vermits het hier gaat om testen met tijdslimiet, zulke de studenten die problemen ondervinden vaak ook de tijdslimiet overschrijden.
Volgens de meldingen treden de problemen meestal, maar niet alleen, op onder volgende omstandigheden:
- in Blackboard 7.2 en hoger (dus mogelijk ook in onze produktie-omgeving);
- in Internet Explorer 7;
- indien er een tijdslimiet werd ingesteld
- blijkbaar enkel met essayvragen / short-answer vragen en andere teksttypes waarbij de wysiwyg editor wordt opgestart;
- elke klik of drag operatie veroorzaakt een vertraging;
- des te meer vragen met de editor, des te groter de vertraging.
Mogelijke oplossingen/workarounds:
- geen tijdslimiet gebruiken;
- vraagtypes met de wysiwyg-editor vermijden;
- studenten vragen een andere browser te gebruiken (bv. Firefox of IE6);
- studenten vragen de wysiwyg-editor te disablen.
Meer technische info van Blackboard:
‘Internet Explorer does not by itself properly redraw the floating DIV element used for the timer when scrolling, and requires a workaround implemented in JavaScript (fixed.js) to correctly redraw all screen elements after scrolling. This method incorporates a delay to give the application time for a full redraw before calling the redraw function again. Now the screen redrawing behavior and CSS support of IE have changed between versions 6 and 7, and one of the settings in fixed.js is causing IE7 to choke.’
(Interne referentie Behind the blackboard: ‘Slow scrolling in timed tests’)
Indien men via het vraagtype ‘calculated score’ (’berekende waarde’) waarden ingeeft die hoger zijn dan 999, dan berekent het programma de uitkomsten verkeerd. Er is echter een workaround voor dit probleem.
Dit gebeurt in alle taalpakketten, dus ook wanneer de cursustaal op English staat ingesteld. Op het moment dat men de software de reeksen oefeningen laat bereken, loopt het fout. Op die pagina toont het programma dan de reeks van getallen, met een verkeerde uitkomst. Dit komt omdat het programma automatisch een punt/komma plaatst tussen de duizendtallen, maar die wordt als decimaal teken genterpreteerd tijdens de berekening, waardoor de uitkomst verkeerd is.
Men kan via volgende workaround toch ervoor zorgen dan waarden groter dan 1000, correct worden berekend. Maak de vraag aan zoals anders, tot men op het derde scherm komt, waarop de gevraagde reeksen worden getoond, met de foute uitkomsten. Wis op deze pagina alle komma’s op punten die in de beginwaarden staan en druk dan op ‘Submit’ of ‘Verzenden’ (druk NIET op ‘berekenen’). Wanneer men nu vanuit een content area een link naar de toets legt, en deze uitttest, zal men zien dat het programma nu wel de juiste uitkomsten heeft berekend.
Aanvulling 16 juni 2008:
Opgelet:
- bij decimale getallen boven 1000 is er niet enkel dit ‘+999′ probleem, maar ook eventueel een bijkomend probleem dat optreedt in Nederlandstalige cursussen/communities (zie link onderaan dit artikel); deze workaround gaat dus geen volledige oplossing geven voor zulke getallen.
- men mag na het weghalen van de punten NIET op ‘Calculate’ of ‘Berekenen’ klikken, want dan komen de punten terug (via een javascript dat telkens wordt uitgevoerd wanneer men op die knop klikt). Gewoon de punten verwijderen en onderaan op submit klikken (en de toets eens uittesten als je twijfelt of het wel allemaal klopt)!
Meer info over andere mogelijke problemen met dit vraagtype
Aan de RUNijmegen hebben ze hun ervaringen i.v.m. examens via Blackboard assessments beschreven in hun blog. Ook via berichten op mailinglijsten horen we regelmatig goede en slechte ervaringen met online examens via Blackboard toetsen. Enkele tips die het onthouden waard zijn:
- Verwittig best altijd het Toledoteam als er summatieve toetsen en examens met grotere groepen worden georganiseerd, zodat de servers extra in het oog kunnen gehouden worden en er tijdens de toetsen/examens geen servers herstart worden;
- Hou het aantal studenten dat tegelijk een toets aflegt zo veel mogelijk beperkt; verdeel ze best over de tijd en laat ze in kleine groepjes de toets openen en doorsturen;
- Indien men met meerdere groepen werkt, kan men de toegang tot een toets beperken via adaptive release;
- Vermijd lange tests; Creer online toetsen die max. 20 30 minuten in beslag nemen; Deel lange toetsen op in kleinere assessments, om te vermijden dat wanneer studenten technische problemen ondervinden, ze een groot deel van de antwoorden kwijtspelen en opnieuw moeten beginnen;
- Zorg steeds voor een back-up (extra pc’s voor als er n problemen heeft, papieren reservekopie);
- Vermijd essayvragen in toetsen; Er zijn meldingen van problemen bij toetsen met essayvragen, omwille van de code van de wysiwyg-editor; Gebruik bij voorkeur de ‘assignment’-tool voor het doorsturen van antwoorden op essayvragen;
- Let op met de optie ‘Force Completion’: indien een student om technische redenen vastloopt in een toets, kan hij/zij niet herbeginnen, tenzij de docent de poging wist;
- Vermijd toetsen met een tijdslimiet; De tijdslimiet zorgt er niet voor dat studenten moeten indienen na het verstrijken van de limiet; men kan verderwerken aan de toets, zelfs na het verstrijken van de tijdslimiet, en dit om studenten met een functiebeperking (bv. dyslexie) extra tijd te geven; Indien een student de tijdslimiet overschrijdt, dan verschijnen in het puntenboek niet de behaalde score, maar een uitroepteken; De docent dient bij elk van deze studenten op het uitroepteken te klikken, de antwoord te controleren en zelf een score in te vullen; Sommige browserversies hebben problemen met het verwerken van het script dat gebruikt wordt om de tijdslimiet in te stellen; studenten kunnen hierdoor vastlopen in de toets, of zware vertragingen ondervinden (zie Mogelijke problemen met timed tests)
- Download best na elke groep de resultaten.
Extra informatie over mogelijke problemen bij toetsen
Wanneer men met Toledo/eloV werkt onder IE7 en Windows Vista, verschijnt er geen invulveld indien de visual text box editor (wysiwyg-editor) aanstaat. Microsoft heeft immers de DHTML editing control weggelaten uit Vista om veiligheidsredenen en Blackboard maakt gebruik van die control voor de wyswiwyg-editor.
Dit probleem werd aan Blackboard gemeld. Op dit moment is er echter geen andere oplossing dan de visual text box editor uit te schakelen, via My Toledo / Welkom tabblad > Tools > Personal Information (Persoonlijke gegevens) > Set Visual Text Box Editor Options (Opties visuele tekstvakeditor instellen) > Unavailable (Niet beschikbaar). Vergeet niet na het aanpassen van deze instelling uit te loggen, de browser te sluiten en weer in te loggen, anders zal de nieuwe instelling nog niet zichtbaar zijn.
Af en toe gebeurt het dat studenten tijdens het afleggen van een Blackboardtoets vastlopen. Indien deze toets kadert binnen een examen, kan dit voor de nodige paniek zorgen.
Via volgende aandachtspunten kunnen de meeste problemen voorkomen worden:
- Breng het Toledo-team steeds op voorhand op de hoogte indien men Toledo wil gebruiken voor het afnemen van examens;
- Let bij de instellingen van de toets erop dat men studenten niet vastzet. Indien men bv. ‘Force Completion’ (’Voltooiing afdwingen’) aanzet, zullen studenten die problemen ondervinden (netwerkprobleem, pc blijft hangen en moet herstart worden, …) geen tweede poging meer krijgen, tenzij de docent hun vorige poging wist. Indien men geen ‘Force Completion’ (’Voltooiing afdwingen’) opzet, en de studenten aanraadt om geregeld hun antwoorden te saven, dan kunnen studenten die problemen ondervinden en de toets vroegtijdig moeten verlaten, toch zonder problemen de toets opnieuw opstarten en verder werken;
- Indien men werkt met een timer (tijdslimiet), kunnen de studenten onderaan de verstreken tijd opvolgen. Ze krijgen bovendien een boodschap als de tijd bijna om is. Ze kunnen echter verderwerken. In het gradebook (cijferlijst) verschijnt in dat geval niet hun score, maar wel een uitroepteken, om aan te geven dat ze de maximum tijd overschreden hebben. Dit is zo om studenten met leerproblemen en handicaps toe te laten langer te werken. Dit kan ook handig zijn voor studenten die technische problemen hebben ondervonden, en die de toets opnieuw hebben moeten opstarten. De timer gaat immers door, maar omwille van de technische problemen hebben ze enkele minuten verloren. Deze studenten kan men dan toch wat langer laten werken. Indien men op het uitroepteken in het gradebook (cijferlijst) klikt, en men kiest de optie ‘View’ (’Weergeven’), dan kan men zien hoelang de student precies gewerkt heeft en de score aanpassen of bevestigen via ‘Submit’ (’Verzenden’);
- Indien een student vastloopt en Force Completion (’Voltooiing afdwingen’) toch aanstaat, zal er in het gradebook een slotje verschijnen. Indien men hierop klikt, en dan kiest voor ‘View’ (’Weergeven’), dan kan men de huidige poging wissen (Poging wissen), en de student een nieuwe kans geven;
- Indien men problemen ondervindt tijdens het afleggen van de toets, en het blijkt geen lokaal probleem te zijn, verwittig dan zo snel mogelijk het Toledo-team.
Het gebeurt dat vragen in pools en tests slechts minimaal van elkaar afwijken, bv. verschillende wiskundige vraagstukken waarbij de opgave gelijk blijft maar de waarden veranderen. In plaats van al deze varianten manueel aan te maken, kan men ook vragen kopiren en deze vervolgens aanpassen waar nodig.
Dat kan door in plaats van een vraagtype te kiezen uit de keuzelijst, onderaan te kiezen voor de optie ‘From a Question Pool or Assessment’ (voorlaatste optie). Vervolgens duidt men aan uit welke test of pool de vragen moeten gekopieerd worden en van welk type deze moeten zijn. Klik vervolgens op ‘Search’. Men krijgt nu een overzicht van de vragen die aan de voorwaarden voldoen. Men vinkt de benodigde vragen aan (eventueel allemaal via de optie ’select all’ bovenaan) en men klikt op ‘Submit’. De aangeduide vragen werden nu gekopieerd naar de vragenpool of test van waaruit men vertrok. Men kan dus op deze manier vragen kopiren binnen een pool of test, maar ook over pools en testen heen.
Standaard heeft een multiple choice vraag 4 antwoordmogelijkheden. Wil men er meer, dan kan men naast ‘Number of Answers’ in het dropdownmenu een hoger aantal selecteren. Wil men minder dan 4 opties (answers), dan kan men n of meerdere voorgedefinieerde invulvelden van een answer wissen via de ‘remove’ knop rechts naast het invulveld.