De maker van de plugin heeft de volgende disclaimer: gebruik dit vraagtype niet om summatief te toetsen. AI kan hallucineren of gewoon onjuiste feedback geven. Dit zorgt ervoor dat de reactie van AI niet altijd integer is. Gebruik het vraagtype vooral om formatief te toetsen. Maak het ook duidelijk voor de deelnemer dat AI de vraag nakijkt. Het doel is natuurlijk de deelnemer tot nadenken aan te zetten.

Je kunt de plugin gebruiken via het AI subsysteem van Moodle. Heb je een AI provider gekoppeld dan kun je AI Text ook gebruiken. Via sitebeheer kom je de algemene instellingen. Ook kun je de de standaard prompt instellen.

Het maken van een AI vraag

Om het vraag type toe te pasen, maak je een Test aan. Als vraagtype kies je AI Text:

In de instellingen van de vraag, stel je eerst de vraag, vervolgens voer je de prompt in en hoe de vraag de score moet berekenen:

Wees concreet. Is er een onduidelijkheid in een van deze velden dan geeft AI niet de juiste feedback. Net zoals bij elke AI tool is het belangrijk om je prompt duidelijk te formuleren.

Na het invullen van de vraag, de prompt en de scoreberekening, kun je dit gelijk testen in de Response Tester. Dit is heel handig, want je kunt gelijk iets aanpassen als dat nodig is:

Tot slot kun je nog instellen of een student een voorbeeld ziet van wat er ingevuld moet worden.

De vraag toepassen

Als de vraag af is verschijnt de vraag als een open vraag in de test. De AI reactie reageert hetzelfde als feedback op de andere vragen. De standaardinstelling is “Uitgestelde feedback”. Je krijgt de feedback dan als je de toets hebt afgerond. De student ziet dit op de volgende manier:

Wil je ook met hulp van AI open vragen nakijken? Installeer de plugin het probeer het uit.

Het bericht Met AI open vragen nakijken verscheen eerst op Avetica.

Moodle kent de mogelijkheid om toegang te geven aan ‘gasten’. Een gast hoeft niet in te loggen en is volledig anoniem. Een gast kan echter alleen activiteiten bekijken. Zodra er resultaten moeten worden opgeslagen wordt gevraagd een account aan te maken. Een gast kan dus geen toets, opdracht, forum of iets dergelijks gebruiken.

Gast toets

De Moodle ‘GuestQuiz‘ plugin biedt een oplossing om gasten toch een kleine toets te laten maken. Wanneer je bijvoorbeeld een volledig open cursus aanbiedt kun je nu ook een simpele toets aanbieden. De cursist kan direct na het invullen op controleren klikken en zien wat de resultaten zijn. Ook kan de cursist leren van de feedback die je bij de antwoorden geeft. Er wordt helemaal niets opgeslagen in Moodle want alles werkt in de browser van de gast zelf.

Hoe werkt het?

De ‘GuestQuiz’ is een activiteit en kan worden toegevoegd aan een cursus. Je kunt de quiz ook los toevoegen aan de startpagina. Regel je gast toegang goed in en geef gasten de link naar de cursus of direct naar de quiz activiteit.

Vragen invoeren

Het invoeren van vragen werkt met het GIFT vragen format. Je voert de verschillende vraagsoorten in met een bepaalde code en na het opslaan ziet het eruit als een normale vraag. In de plugin vind je een link naar een editor die je helpt met het maken van je eerste vragen.

In het voorbeeld hieronder zie de volgende vraagtypes en de manier waarop je die invoert:
– Waar/Niet waar
– Multiple Choice
– Kort antwoord

Zelf proberen?

Wij hebben een voorbeeld op onze Moodle site gezet waar je direct kunt kijken hoe het werkt. De ontwikkelaar geeft ook nog wat tips hoe het uiterlijk kunt aanpassen maar daar hebben wij nog even niets mee gedaan.

Het bericht Een Moodle quiz voor gasten? Kan dat? verscheen eerst op Avetica.

In deze serie blogs over SCORM alternatieven zien we SCORM vaak als tool voor het overdragen van informatie en kennis. Of het geleerde ook beklijft wordt netjes achteraf getoetst, want je baas wil natuurlijk wel weten of de e-learningmodule effect heeft gehad.

Met elk auteursprogramma kan je toetsen ontwikkelen. Multiple choice, sleepoefeningen, waar/niet waar, etc zijn vraagtypes die (te) vaak worden gebruikt. In Moodle zit ook een uitgebreide quiz module en ook H5P heeft content types waarmee je kan toetsen.

Overzicht

De vraag rijst in welke tool je toetsen gaat ontwikkelen. Ik heb in een tabel een aantal factoren neergezet en hieraan een waarde gehangen. Ik ben me bewust dat ik hiermee de auteursprogramma’s allemaal over één kam scheer, maar ik wilde het schema leesbaar houden.

Doel van je toets

Bedenk vooraf het doel van je toets, welke feedback je wilt teruggeven en welke rapportage en analyse je wilt hebben. Deze mix bepaalt welke tool je het beste kunt inzetten voor je toets.

Het bericht Alternatieven voor SCORM (6): Toetsen in SCORM, H5P of Moodle quiz? verscheen eerst op Avetica.

Moodle toetsmodule

Wanneer je formatief of summatief wilt toetsen kun je daar het beste de standaard Moodle toetsmodule voor gebruiken. In de toetsmodule kun je een vragenpool maken met vragen in verschillende categorieën. Het scala aan vraagtypes is groot en biedt voldoende optie voor een afwisselende toets. Een toets kan vervolgens worden samengesteld door Moodle willekeurig vragen te laten aanbieden uit de vragenpool. Ook zijn allerlei instellingen te doen op het gebied van het aantal pogingen en de vorm waarin de toets wordt aangeboden variërend van een zelftest tot aan een examen met een tijdslimiet. Wanneer er vervolgens toetspogingen zijn gedaan door gebruikers heeft Moodle een heel krachtige analysetool waarmee je allerlei statistieken over je toets kunt opvragen.

H5P contenttypes

H5P kent ook een redelijk aantal vraagtypes en andere contenttypes waarin je vragen kunt gebruiken. De kern bij H5P ligt naar mijn idee bij het verrijken en interactiever maken van je content. Door de inzet van H5P kun je een stuk, soms droge, theorie verrijken met een interactieve oefening zodat de gebruiker de gelegenheid heeft om het geleerde te verwerken. Doordat je H5P oefeningen overal in je content kunt inbedden maakt dit de inzet heel flexibel.

Overzicht

Stuart Mealor van elearningworld.org heeft een overzicht gemaakt hoe de Moodle toestmodule en H5P vraagtypes zich verhouden. Je kunt ook zien welke H5P vraagtypes bruikbaar zijn in andere H5P contenttypes zoals bijvoorbeeld in de ‘Question set’ wat een eenvoudige variant is van de Moodle toetsmodule. Hij heeft alle items gelinkt naar documentatie. Al met al een bijzonder nuttig overzicht waar je naartoe mag linken of wat je kunt inbedden op je eigen site zoals hieronder.

Het bericht Overzicht Moodle en H5P toetsvragen verscheen eerst op Avetica.

Het ‘Online Examinations & Tests System’ van de Verenigde Naties heeft de ‘Secretary General’s Award’ voor Innovatie ontvangen. Het systeem is gebouwd in Moodle en kenners zien dat al direct aan de inlogpagina. Mensen betrokken bij het project bedanken Moodle voor het  gratis ter beschikking stellen van Moodle als platform voor de hele wereld.

Om al haar taken uit te kunnen voeren heeft de Verenigde Naties wereldwijd goed gekwalificeerd en opgeleid personeel nodig. De selectie van al dit personeel vind mede plaats op basis van de resultaten van online testen en examens. Tot voor kort werden deze altijd op locatie met pen en papier afgenomen met in totaal 2 ton papier per jaar. Ook werd er veel gereisd naar testlocaties die ook allemaal bemenst moesten worden.

Met de introductie van Moodle bespaart de Verenigde Naties jaarlijks nu tussen de 120 en 320.000 dollar. Ook is er een grote positieve impact op de ‘carbon footprint’ van de VN. Moodle is beschikbaar in alle talen en ook wordt de ‘accessibility’ genoemd.

Al met al een mooi voorbeeld van de inzet van Moodle en de schaalbaarheid.

Het bericht Moodle platform wint United Nations Award verscheen eerst op Avetica.

Moodle heeft standaard hele goede overzichten voor het doen van analyses. Je kunt daar als beheerder allerlei informatie terug vinden waarmee je je toets of onderliggende vragen kunt analyseren en verbeteren.

Met de extra plugin ‘Quiz Analytics‘ komen er ook analyse mogelijkheden bij voor je cursisten. De plugin analyseert elke toetspoging en verstrekt een heldere grafische weergave. Na installatie komt er een extra link beschikbaar voor cursisten onder ‘Cijfers’. Wat kan een cursist zoal zien?

• Attempt summary: statistiek van de laatste poging
• My Progress and Prediction: overzicht hoe de cursist het heeft gedaan in de tijd en de ‘moeilijkste’ vraag die voorbij is gekomen. Wanneer meerdere pogingen zijn toegestaan is er ook een overzicht met een voorspelling voor volgende pogingen.
• Question Category analysis: toont de verdeling van vragen uit subcategorieën en geeft een idee over hoe uitdagend die vragen waren
• Scores and Question Stats: deze pagina toont het aantal cursisten in een reeks van scores en een uitgebreide analyse van alle vragen in de test

Als beheerder heb je een uitgebreid scherm om configuratie van de plugin te doen. De plugin is beschikbaar vanaf Moodle 2.7 en ook al bijgewerkt voor versie 3.4.

Het bericht Moodle plugin Test analyse voor cursisten verscheen eerst op Avetica.

In de afgelopen periode heb ik meegewerkt aan een project van de Vereniging van Waterbouwers om digitaal te examineren middels Moodle. De kandidaten werken bij de aangesloten leden en de vereniging gaat naar de leden toe om het examen af te nemen.

Zo staat de examenbus vandaag bij Boskalis. De examenbus is uitgerust met 20 werkplekken en voorzien van eigen internet en toezicht op elke werkplek met een camera. De toezichthouder kan vanaf een eigen werkplek alle andere plekken in de gaten houden.

In Moodle zijn allerlei restricties ingebouwd om te zorgen dat de kandidaten alleen vanuit de bus en op gezette tijden de examens kunnen afleggen. Zo werken we bijvoorbeeld met de Safe Exam Browser die de laptop ‘vergrendeld’ waardoor alleen de toets gemaakt kan worden en geen andere sites bezocht kunnen worden. Toetsvragen en examens zijn ontwikkeld vanuit een toetsmatrijs waarna gekeken is welk vraagtype van Moodle het beste past. Daarbij is veel ervaring opgedaan met het zogenaamde Embedded Cloze vraagtype van Moodle.

Mocht je meer willen weten over de aanpak of de examenbus kun je contact met ons opnemen.

Het bericht Moodle examen in de bus! verscheen eerst op Avetica.

CodeRunner heeft een eigen Moodle site waar je alle uitleg en documentatie kunt vinden. Zo kun je lezen dat er voor de verwerking van de vragen een ‘Sandbox‘ server nodig is. Het is dus niet alleen een kwestie van installatie van de plugins. Wil je ermee aan de slag neem dan contact met ons op.

Vraag en antwoord in Moodle

Vraag en antwoord op papier

Het bericht CodeRunner programmeer vraagtype voor Moodle verscheen eerst op Avetica.