Eerste examen IW in het 6e jaar via Dodona 🥳

[DieterPi]

Gisteren hebben we hier het eerste examen IW voor het 6e jaar via Dodona afgenomen. Alles verliep vlot, maar enkele bedenking/vragen/opmerkingen die ik wil delen.

• We hebben gewerkt met een aparte Dodona cursus (waar ook al toetsen in werden afgenomen tijdens het schooljaar)
  Ik ben wel niet zeker wat de meerwaarde hiervan is. Ik had dit eens gevraagd en op die manier worden oefeningen uit het schooljaar wat afgeschermd, maar 100% waterdicht is dit niet. Via "Profiel" > "Mijn oplossingen" kunnen leerlingen toch steeds aan hun vorige oefeningen? (Ook al staan deze in een andere cursus)
  Is het niet beter om de evaluatie gewoon in de oefeningenreeks af te nemen, maar de vorige 'oefenreeksen' op "verborgen" te plaatsen? Dan kan men totaal niet aan de oefening en oplossing dacht ik?
• Evaluatie werd afgenomen met de Safe Exam Browser. Dit is over het algemeen zeer vlot gegaan. ❤️ Slechts één leerling had wat technische problemen, maar die werden snel opgelost.
  We deelden de geheime link van de reeks via een .seb bestand (met afsluitcode)
• Geëvalueerd met de "anonieme" modus aan. Gewoon top!
• Evaluatiecriteria vind ik moeilijk om vast te leggen. Er zijn vaak verschillende oplossingsmethoden voor de problemen die we hebben bevraagd. (problemen oplossen mbv datastructuren, lijsten, tuples en dictionaries)
  Ik denk dat het Dodona Team of beter nog UGent meer ervaring heeft met een soort van 'rubric' systeem vermoed ik. Kunnen jullie ergens delen wat goed werkt als evaluatiecriteria?

[jorg-vr]

Een apparte cursus heeft inderdaad hetzelfde effect als een verborgen reeks binnen de cursus als je die via geheime link gebruikt. Het is dus vooral aan jou als gebruiker om te kiezen hoe je dit liefst structureert.

Ik heb een vraag over Safe Exam Browser: Heb ik het correct voor dat deze jou enkel toelaat om links te volgen die beschikbaar zijn op de originele URL?
In dat geval zouden wij relatief eenvoudig gesloten boek evaluaties moeten kunnen ondersteunen, door op de geheime link van een reeks alle links naar bijvoorbeeld dodona home of het profiel te verwijderen. Want zoals je correct aangeeft, monteel is dit zeker nog niet 100% waterdicht.

De vraag over hoe je een goed rubric opstelt laat ik aan @pdawyndt of andere mensen met meer ervaring hierin.

In elk geval bedankt voor de feedback!

[DieterPi]

Ik heb ook een vermoeden dat er gespiekt is of op de een of andere manier is samengewerkt. Als ik controleer op plagiaat, heb ik 15 leerlingen die 100% match hebben. Het vreemde is dat zij een manier van programmeren gebruiken die we in de les niet hebben gebruikt. Vandaar dat ik vermoed dat ze op de een of andere manier hebben samengewerkt, of de oplossingen hebben gekregen van iemand uit een vorige toets en vanbuiten hebben geleerd. het zou daarom handig zijn mochten we alle SB's onder 1 reeks kunnen stoppen en voor verschillende gebruikers op verschillende momenten inplannen in dodona.

Als je een reeks gebruikt waarbij je de 'geheime link' met de leerlingen deelt (via SEB bvb), dan kunnen leerlingen die de eerste toets gemaakt hebben nadien de opgaven herbekijken. Ze kunnen via hun profiel immers de laatst ingediende oplossingen opvragen. Indien je in de andere klassen dezelfde toetsvragen gesteld hebt, dan waren die toetsvragen inderdaad al beschikbaar...

Dusja, misschien hebben ze thuis de vraag door ChatGPT gehaald en de oplossing uit het hoofd geleerd. Ik maak steeds verschillende oefenreeksen per klas. (zeker als er een dag tussenzit)

[heremansgeert]

Wij hebben vorig jaar leerlingen betrapt op spieken ondanks het gebruik van de SEB. De leerlingen hadden een virtuele machine geïnstalleerd waarop ze de SEB startte. De toezichthoudende leerkracht kan dat niet eenvoudig zien dat dit in een VM gebeurde.

SEB heeft een beveiliging tegen het draaien op VM's maar deze is erg eenvoudig uit te schakelen.

Verder zijn er ook gekraakte SEB versies in omloop. Wij gebruiken schermmonotoring software om dit tegen te gaan.

[heremansgeert]

Verder wil ik ook nog graag aangeven dat wij in onze vakgroep ook worstelen met het opstellen van goede en objectieve evaluatiecriteria voor programmeeroefeningen. Ik heb het gevoel dat eenzelfde oefening door 2 verschillende leerkrachten wel eens heel anders beoordeeld zou kunnen worden.

Mochten de mensen van UGent of anderen evaringen daarover kunnen en willen delen dan verneem ik dat ook graag :-)

[IngeVerbeek]

Ik zie dat je vraag ook al uitgebreid beantwoord is hier: https://github.com/orgs/dodona-edu/discussions/6030 (Ter referentie voor mensen die hier in de toekomst op botsen)

Bij de start van het nieuwe schooljaar bots ik hier (weer) op. Vorig jaar hadden we een aparte cursus voor toetsen en examens, maar ik begrijp dat dat niet zinvol is omdat dit hetzelfde effect is als een verborgen link. Ik wou doorklikken naar die discussie, maar dat geeft een error.

Staat "gesloten boek evaluaties" op jullie (kortetermijn)planning?

[bmesuere]

@IngeVerbeek een examenmodus staat met prioriteit op onze planning eenmaal de drukte van de start van het schooljaar achter de rug is.