Wat is het Assessment Quality Dashboard in Insights?
Het Assessment Quality Dashboard biedt docenten, instructieontwerpers en anderen die geïnteresseerd zijn in het begrijpen van de effectiviteit van Quiz, een hulpmiddel om slecht presterende beoordelingen te identificeren en weloverwogen actie te ondernemen om die beoordelingen iteratief te verbeteren. Het verzamelt de antwoorden van studenten en biedt statistieken die ondermaats presterende quizzen en quizitems markeren.
Het dashboard is bedoeld om de volgende vragen te beantwoorden:
- Welke quizzen of vragen moeten worden beoordeeld?
- Welke aanvullende informatie is nodig om interventies of iteraties van assessments te ondersteunen?
Het doel is dat instructeurs en instructional designers de kwaliteit van hun beoordelingen verbeteren om het toekomstige gebruik van hun activiteiten te ondersteunen.
Waarom hebben we het Assessment Quality Dashboard geüpdatet?
Het Assessment Quality Dashboard, dat voor het eerst in 2019 werd uitgebracht, heeft veel feedback gekregen over wat wel en niet werkt. De feedback concentreerde zich op vijf belangrijke gebieden, en dat werden de doelen van het project:
- Verbetering van de prestaties
- Verhoogde toegankelijkheid
- Uitgebreide browserondersteuning
- Identificatie van risicovolle artikelen
- Verbeterde filters
Wat kun je verwachten in de release van december?
Met de release van december (20.21.12) is de bijgewerkte ervaring voor het dashboard beschikbaar om in te schakelen via een configuratievariabele. De standaardwaarde is UIT, hoewel beheerders deze kunnen inschakelen zodra ze klaar zijn. Houd er rekening mee dat deze ervaring geen opt-in-ervaring heeft, deze is AAN of UIT.
Bij de eerste keer laden worden op het dashboard interactieve kaarten weergegeven, met het aantal quizzen dat in het dashboard is opgenomen, quizzen met lage gemiddelde scores en de verdeling van de betrouwbaarheid van quizzen. Dit alles wordt gevolgd door een tabel met alle beschikbare quizzen en berekeningen. Het filter Organisatie-eenheid werkt bij welke cursussen wel of niet zijn opgenomen in alle berekeningen en gegevens die worden weergegeven. Door interactie met de kaarten wordt de gegevenstabel gefilterd, waardoor quizzen die mogelijk moeten worden beoordeeld, direct worden gemarkeerd.
Figuur: Een voorbeeld van de Dashboard voor beoordelingskwaliteit.
De dashboardinstellingen bieden een gebied om drempels voor slechte prestaties te definiëren en om te bepalen welke kolommen in de tabel moeten worden opgenomen, zodat elke gebruiker zijn weergave kan aanpassen aan zijn eigen voorkeuren.
Analyse van quizitems is beschikbaar zodra een afzonderlijke quiz is geselecteerd uit de gegevenstabel. De nieuwe statistieken bieden details over de quizvragen voor de geselecteerde quiz. Nogmaals, de kaarten bovenaan het dashboard zijn interactief en filteren de onderstaande gegevenstabel om de geselecteerde kaart weer te geven. Drempels voor elke indicator kunnen per gebruiker worden aangepast in het instellingengebied van het dashboard, net als op de hoofdpagina. Quizvragen die onder de ingestelde drempels presteren, worden gemarkeerd, waarbij de slecht presterende statistiek in de tabel wordt gemarkeerd.
Cijfer: Analyse van quizitems In het Dashboard voor beoordelingskwaliteit.
Als u het item Quiz selecteert, wordt de prompt voor een item weergegeven, evenals antwoordopties, feedback en hints. Voor het bewerken van de quiz of quizvragen moet u naar de quiztool navigeren.
Afbeelding: Een voorbeeld van het voorbeeld van de quizvraag.
Wat is de volgende stap?
Voortdurende updates van deze ervaring, met name de mogelijkheid om gemarkeerde items op het dashboard samen te voegen en weer te geven voor onmiddellijke beoordeling. Houd de 90-dagen preview en release notes in de gaten voor updates over wanneer deze functies in het product worden uitgebracht.