Evaluatie van de resultaten van het project “Using Euros”

Een uitgebreide analyse

Samenvatting

Deze studie evalueert de effectiviteit en bruikbaarheid van de resultaten van het project “Using Euros” aan de hand van een uitgebreide analyse van gebruikersfeedback. In totaal beoordeelden 79 deelnemers het platform op 24 dimensies op het gebied van technische werking, pedagogische waarde en leerervaring. Met een 5-puntsschaal van Likert beoordeelden de respondenten onder meer de gebruiksvriendelijkheid van de interface, de technische betrouwbaarheid, de pedagogische inbedding en de leerresultaten. Uit de statistische analyse bleken sterk gecorreleerde kenmerken en afzonderlijke factorclusters die de gebruikerservaring typeren. De resultaten wijzen op een overweldigend positieve ontvangst (gemiddelde scores >4,6 op alle dimensies), met de grootste eensgezindheid over de ontwikkeling van levensvaardigheden, de betrokkenheid van de leerlingen en de aansluiting bij de leerdoelen. Technische prestaties en gebruikerservaring vormden het sterkste factorcluster, terwijl het instellen van parameters en het beoordelen van de voortgang zich als afzonderlijke aandachtspunten aandienden. Dit onderzoek biedt waardevolle inzichten voor ontwikkelaars van educatieve technologie en voor professionals die effectieve digitale leerplatforms willen invoeren waarin technische betrouwbaarheid en pedagogische waarde in balans zijn.

BESCHRIJVENDE STATISTIEK

  aantal gemiddelde std min 25% 50% 75% max Vraag
0 79.0 4.670886075949370 0.7462988847080340 1.0 5.0 5.0 5.0 5.0 De website werkt zonder technische storingen (1-5)
1 79.0 4.7594936708860800 0.5596516744853900 3.0 5.0 5.0 5.0 5.0 De gegeven instructies zijn duidelijk (1-5)
2 79.0 4.746835443037980 0.5654214318990420 3.0 5.0 5.0 5.0 5.0 De interface is gebruiksvriendelijk (1-5)
3 79.0 4.772151898734180 0.505086108135003 3.0 5.0 5.0 5.0 5.0 Kwaliteit van de afbeeldingen (1-5)
4 76.0 4.776315789473680 0.505929750341588 3.0 5.0 5.0 5.0 5.0 De applicaties werken in minstens drie browsers (1-5)
5 76.0 4.723684210526320 0.531631055288692 3.0 5.0 5.0 5.0 5.0 Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5)
6 78.0 4.743589743589740 0.6729639313369270 2.0 5.0 5.0 5.0 5.0 Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5)
7 79.0 4.658227848101270 0.5748149300687360 3.0 4.0 5.0 5.0 5.0 Het instellen van de parameters is eenvoudig (1-5)
8 79.0 4.69620253164557 0.6066813969699470 3.0 5.0 5.0 5.0 5.0 Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5)
9 79.0 4.8354430379746800 0.46493395579608000 3.0 5.0 5.0 5.0 5.0 Scannen werkt zoals vereist (1-5)
10 79.0 4.784810126582280 0.5230797869215380 3.0 5.0 5.0 5.0 5.0 Afdrukken zijn van goede kwaliteit (1-5)
11 79.0 4.7974683544303800 0.490414446273684 3.0 5.0 5.0 5.0 5.0 Universal Design for Learning wordt toegepast (1-5)
12 79.0 4.886075949367090 0.31974917141296800 4.0 5.0 5.0 5.0 5.0 De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5)
13 79.0 4.848101265822790 0.4554121152779830 3.0 5.0 5.0 5.0 5.0 Feedback helpt leerkrachten de voortgang van leerlingen te volgen (1-5)
14 79.0 4.822784810126580 0.4163176077654420 3.0 5.0 5.0 5.0 5.0 Applicaties kunnen in het curriculum worden geïntegreerd (1-5)
15 79.0 4.6835443037974700 0.5671409131068760 3.0 4.0 5.0 5.0 5.0 Voorbeeldlesplannen zijn nuttig (1-5)
16 79.0 4.860759493670890 0.34840947082971600 4.0 5.0 5.0 5.0 5.0 Gebruikers zijn actief betrokken bij het leerproces (1-5)
17 79.0 4.7594936708860800 0.45896175678393700 3.0 5.0 5.0 5.0 5.0 De notities over methodologieën zijn nuttig (1-5)
18 79.0 4.772151898734180 0.5298613047505830 3.0 5.0 5.0 5.0 5.0 Zelfevaluatie motiveert leerlingen (1-5)
19 79.0 4.8734177215189900 0.4346259401911600 3.0 5.0 5.0 5.0 5.0 Leerlingen kunnen in hun eigen tempo werken (1-5)
20 78.0 4.846153846153850 0.36313651960128100 4.0 5.0 5.0 5.0 5.0 De verstrekte informatie sluit aan bij de leerdoelen (1-5)
21 79.0 4.8734177215189900 0.3709685385649280 3.0 5.0 5.0 5.0 5.0 Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker (1-5)
22 79.0 4.772151898734180 0.4790312630611270 3.0 5.0 5.0 5.0 5.0 Leerkrachten kunnen de voortgang van leerlingen eenvoudig beoordelen (1-5)
23 79.0 4.69620253164557 0.627457841667814 3.0 5.0 5.0 5.0 5.0 Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt (1-5)

Vragen met grote variatie

Label Vraag std
A1 De website werkt zonder technische storingen (1-5) 0.7462988847080340
A7 Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5) 0.6729639313369270
C12 Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt (1-5) 0.627457841667814
A9 Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) 0.6066813969699470
A8 Het instellen van de parameters is eenvoudig (1-5) 0.5748149300687360

Vragen met geringe variatie

Label Vraag std
B1 De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5) 0.31974917141296800
C5 Gebruikers zijn actief betrokken bij het leerproces (1-5) 0.34840947082971600
C9 De verstrekte informatie sluit aan bij de leerdoelen (1-5) 0.36313651960128100
C10 Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker (1-5) 0.3709685385649280
B3 Applicaties kunnen in het curriculum worden geïntegreerd (1-5) 0.4163176077654420

Variatie in de antwoorden begrijpen (standaarddeviatie)

De standaarddeviatie (std) in de tweede grafiek geeft aan hoeveel de antwoorden op elke vraag van het gemiddelde afwijken. Dit vertelt ons het volgende:

Lage standaarddeviatie (dicht bij 0) → grote overeenstemming

Als de standaarddeviatie dicht bij 0 ligt, betekent dit dat de meeste respondenten zeer vergelijkbare scores gaven (bijvoorbeeld: iedereen gaf een vraag een 5). Dit wijst op een sterke consensus over de beoordeling.

Voorbeeld: als een vraag over de “duidelijkheid van de instructies” een std = 0 heeft, betekent dit dat iedereen dezelfde score gaf (iedereen een 5 of iedereen een 4, enzovoort).

Hoge standaarddeviatie (boven 0,5) → meer uiteenlopende meningen

Een hogere standaarddeviatie betekent dat de antwoorden sterk uiteenliepen. Dit wijst op gemengde meningen: sommigen gaven een hoge score, anderen een lage.

Voorbeeld: als een vraag over de “gebruiksvriendelijkheid van de interface” een std = 0,8 heeft, vonden sommige mensen de interface zeer gebruiksvriendelijk (5), terwijl anderen een lagere score gaven (3-4). Er is dus sprake van verschil van mening.

Waarom is variatie belangrijk?

  • Lage variatie → wijst op sterke consensus (het kenmerk is echt goed of echt slecht).
  • Hoge variatie → wijst op verbeterpunten (sommige gebruikers zijn tevreden, anderen niet, wat op gebruiksproblemen kan wijzen).

Vragen met een hoge standaarddeviatie moeten mogelijk nader worden onderzocht om te begrijpen waarom de meningen verdeeld zijn.

Categorie en vraag

Categorie Vraag
A1 De website werkt zonder technische storingen (1-5)
A2 De gegeven instructies zijn duidelijk (1-5)
A3 De interface is gebruiksvriendelijk (1-5)
A4 Kwaliteit van de afbeeldingen (1-5)
A5 De applicaties werken in minstens drie browsers (1-5)
A6 Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5)
A7 Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5)
A8 Het instellen van de parameters is eenvoudig (1-5)
A9 Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5)
A10 Scannen werkt zoals vereist (1-5)
A11 Afdrukken zijn van goede kwaliteit (1-5)
A12 Universal Design for Learning wordt toegepast (1-5)
B1 De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5)
B2 Feedback helpt leerkrachten de voortgang van leerlingen te volgen (1-5)
B3 Applicaties kunnen in het curriculum worden geïntegreerd (1-5)
B4 Voorbeeldlesplannen zijn nuttig (1-5)
C5 Gebruikers zijn actief betrokken bij het leerproces (1-5)
C6 De notities over methodologieën zijn nuttig (1-5)
C7 Zelfevaluatie motiveert leerlingen (1-5)
C8 Leerlingen kunnen in hun eigen tempo werken (1-5)
C9 De verstrekte informatie sluit aan bij de leerdoelen (1-5)
C10 Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker (1-5)
C11 Leerkrachten kunnen de voortgang van leerlingen eenvoudig beoordelen (1-5)
C12 Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt (1-5)

CORRELATIES TUSSEN VRAGEN

Sterkste correlaties tussen vragen (correlatie boven 0,7), wat aangeeft dat de antwoorden op deze vragen sterk met elkaar samenhangen.

Label 1 Vraag 1 Tekst vraag 1 Label 2 Vraag 2 Tekst vraag 2 Correlatie
A1 0 De website werkt zonder technische storingen (1-5) C5 16 Gebruikers zijn actief betrokken bij het leerproces (1-5) 0.7090125015101340
A2 1 De gegeven instructies zijn duidelijk (1-5) A9 8 Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) 0.7260350618403750
A3 2 De interface is gebruiksvriendelijk (1-5) A6 5 Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5) 0.781614675979465
A4 3 Kwaliteit van de afbeeldingen (1-5) A11 10 Afdrukken zijn van goede kwaliteit (1-5) 0.734028376223487
A4 3 Kwaliteit van de afbeeldingen (1-5) B1 12 De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5) 0.7104325775692570
A6 5 Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5) B3 14 Applicaties kunnen in het curriculum worden geïntegreerd (1-5) 0.7192552903761100
A7 6 Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5) A9 8 Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) 0.7548860451594470
A9 8 Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) A11 10 Afdrukken zijn van goede kwaliteit (1-5) 0.7609438667598360
A10 9 Scannen werkt zoals vereist (1-5) A11 10 Afdrukken zijn van goede kwaliteit (1-5) 0.7487071134303000
A10 9 Scannen werkt zoals vereist (1-5) A12 11 Universal Design for Learning wordt toegepast (1-5) 0.7516016138604400
C6 17 De notities over methodologieën zijn nuttig (1-5) C9 20 De verstrekte informatie sluit aan bij de leerdoelen (1-5) 0.7040041483986320

CLUSTERANALYSE

Geïdentificeerde clusters van vragen op basis van de exploratieve factoranalyse (EFA):

Clusters & de bijbehorende vragen:

Factor 1 (grootste cluster):

  • Richt zich op gebruiksvriendelijkheid, gebruikerservaring en leerbetrokkenheid.
  • Omvat vragen over de gebruiksvriendelijkheid van de interface, de duidelijkheid van de instructies, het gebruiksgemak, feedback en leren in eigen tempo.

Factor 2:

  • Heeft betrekking op technische prestaties & toegankelijkheid.
  • Omvat vragen over de kwaliteit van de afbeeldingen, de compatibiliteit met browsers, nuttige waarschuwingen, de afdrukkwaliteit en lesplannen.

Factor 3:

Bevat slechts één vraag, over het beoordelen van de voortgang van leerlingen door leerkrachten.

Factor 4:

Bevat ook slechts één vraag, over het gemak van het instellen van parameters.

Dominante factor Vragen in het cluster
Factor 1 [[‘A1’, ‘De website werkt zonder technische storingen (1-5)’], [‘A2’, ‘De gegeven instructies zijn duidelijk (1-5)’], [‘A3’, ‘De interface is gebruiksvriendelijk (1-5)’], [‘A7’, ‘Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5)’], [‘A9’, ‘Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5)’], [‘A10’, ‘Scannen werkt zoals vereist (1-5)’], [‘A12’, ‘Universal Design for Learning wordt toegepast (1-5)’], [‘B1’, ‘De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5)’], [‘B2’, “Feedback helpt leerkrachten de voortgang van leerlingen te volgen (1-5)”], [‘B3’, ‘Applicaties kunnen in het curriculum worden geïntegreerd (1-5)’], [‘C5’, ‘Gebruikers zijn actief betrokken bij het leerproces (1-5)’], [‘C7’, ‘Zelfevaluatie motiveert leerlingen (1-5)’], [‘C8’, ‘Leerlingen kunnen in hun eigen tempo werken (1-5)’], [‘C9’, ‘De verstrekte informatie sluit aan bij de leerdoelen (1-5)’], [‘C10’, “Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker (1-5)”]]
Factor 2 [[‘A4’, ‘Kwaliteit van de afbeeldingen (1-5)’], [‘A5’, ‘De applicaties werken in minstens drie browsers (1-5)’], [‘A6’, ‘Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5)’], [‘A11’, ‘Afdrukken zijn van goede kwaliteit (1-5)’], [‘B4’, ‘Voorbeeldlesplannen zijn nuttig (1-5)’], [‘C6’, ‘De notities over methodologieën zijn nuttig (1-5)’], [‘C12’, ‘Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt (1-5)’]]
Factor 3 [[‘C11′, “Leerkrachten kunnen de voortgang van leerlingen eenvoudig beoordelen (1-5)”]]
Factor 4 [[‘A8’, ‘Het instellen van de parameters is eenvoudig (1-5)’]]

 

Wat betekent dit?

Factor 1 wijst op een sterk verband tussen gebruiksvriendelijkheid, leereffectiviteit en gebruikersbetrokkenheid.

Factor 2 geeft aan dat de kwaliteit van de afbeeldingen, de compatibiliteit met browsers en gestructureerde lesplannen met elkaar samenhangen.

Factoren 3 & 4 zijn uitschieters: zij wijzen op op zichzelf staande aandachtspunten die niet sterk met andere onderdelen samenhangen.

Resultaten

De beoordeling van het educatieve technologieplatform leverde op alle 24 gemeten dimensies consistent positieve evaluaties op (N=79). De beschrijvende statistiek toonde hoge gemiddelde scores, variërend van 4,67 tot 4,89 op een 5-puntsschaal van Likert, wat wijst op grote tevredenheid van de gebruikers over zowel de technische als de pedagogische aspecten van het platform.

Beschrijvende analyse

De hoogst gewaardeerde kenmerken waren “De te verwerven vaardigheden zijn belangrijke levensvaardigheden” (M=4,89, SD=0,32), “Leerlingen kunnen in hun eigen tempo werken” (M=4,87, SD=0,43) en “Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker” (M=4,87, SD=0,37). Dit toont een bijzondere waardering voor de pedagogische flexibiliteit en relevantie van het platform. Ook de technische aspecten werden goed ontvangen: “Scannen werkt zoals vereist” (M=4,84, SD=0,46) en “Afdrukken zijn van goede kwaliteit” (M=4,78, SD=0,52) kregen sterk positieve beoordelingen.

De analyse van de variatie in de antwoorden gaf belangrijke inzichten in de mate van consensus onder de gebruikers. De sterkste overeenstemming tussen de respondenten (blijkend uit de laagste standaarddeviaties) lag bij de kern van de pedagogische kenmerken: “De te verwerven vaardigheden zijn belangrijke levensvaardigheden” (SD=0,32), “Gebruikers zijn actief betrokken bij het leerproces” (SD=0,35) en “De verstrekte informatie sluit aan bij de leerdoelen” (SD=0,36). Daartegenover was er meer variatie in de antwoorden (en dus minder consensus) bij technische kenmerken zoals “De website werkt zonder technische storingen” (SD=0,75), “Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld” (SD=0,67) en “Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt” (SD=0,63).

Correlatieanalyse

De correlatieanalyse bracht 11 sterke verbanden (r > 0,70) tussen verschillende beoordelingsdimensies aan het licht. De sterkste correlaties werden gevonden tussen “De interface is gebruiksvriendelijk” en “Pop-ups en waarschuwingsmeldingen zijn nuttig” (r=0,78), tussen “Gebruikers kunnen de applicaties gemakkelijk uitvoeren” en “Afdrukken zijn van goede kwaliteit” (r=0,76), en tussen “Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld” en “Gebruikers kunnen de applicaties gemakkelijk uitvoeren” (r=0,75). Deze correlaties suggereren dat de perceptie van de kwaliteit van de interface nauw samenhangt met hoe nuttig de feedback van het systeem is, en dat bedieningsgemak sterk samengaat met de kwaliteit van de resultaten.

Opvallende correlaties tussen categorieën waren “Kwaliteit van de afbeeldingen” met “De te verwerven vaardigheden zijn belangrijke levensvaardigheden” (r=0,71) en “De website werkt zonder technische storingen” met “Gebruikers zijn actief betrokken bij het leerproces” (r=0,71). Dit wijst erop dat technische prestaties de perceptie van pedagogische waarde positief beïnvloeden.

Factoranalyse

De exploratieve factoranalyse bracht vier afzonderlijke clusters van platformkenmerken aan het licht:

Factor 1 (gebruikservaring en leerbetrokkenheid): Het grootste cluster, met 15 items, waaronder gebruiksvriendelijkheid van de interface, technische betrouwbaarheid, relevantie voor het leren en autonomie van de gebruiker. Deze dominante factor wijst op een sterke samenhang tussen technische functionaliteit en pedagogische effectiviteit: gebruiksgemak ondersteunt rechtstreeks de betrokkenheid bij het leren.

Factor 2 (technische prestaties en toegankelijkheid): Bestaat uit 7 items over visuele kwaliteit, compatibiliteit tussen browsers, feedback van het systeem en instructiemateriaal. Dit cluster laat zien dat de kwaliteit van de output en gestructureerde begeleiding samen een samenhangend onderdeel van de platformervaring vormen.

Factor 3 (beoordelingsmogelijkheden): Deze factor bevat alleen het item "Leraren kunnen de vorderingen van leerlingen gemakkelijk beoordelen" en kwam naar voren als een apart aandachtspunt, los van de andere pedagogische kenmerken. Dit benadrukt het unieke belang van de beoordelingsfunctie.

Factor 4 (instellen van parameters): Ook deze factor bevat slechts één item, "Het instellen van de parameters is eenvoudig". Dat deze factor los staat, wijst erop dat het configureren van parameters een specifiek onderdeel van de platformervaring is dat aparte aandacht verdient.

Samenvattend laten de resultaten een hoge algemene tevredenheid zien over het educatieve technologieplatform, met name een sterke consensus over de pedagogische waarde ervan. De factoranalyse laat zien dat gebruikservaring en leerbetrokkenheid samen de kern van de ervaring vormen, terwijl specifieke functies zoals beoordeling en het instellen van parameters aparte aspecten zijn die bij de ontwikkeling en implementatie van het platform specifieke aandacht verdienen.

Onderzoeksbestand downloadenGoogle DriveBij een klik kan Google cookies opslaanCookiebeleid


Klik hier om de artikelen in het Grieks te bekijken
Klik hier om de artikelen in het Grieks te bekijken
Klik hier om de artikelen in het Portugees te bekijken
Klik hier om de artikelen in het Spaans te bekijken
Klik hier om de artikelen in het Engels te bekijken

0 Comments

Plaats een reactie

Je e-mailadres wordt niet gepubliceerd. Verplichte velden zijn gemarkeerd *


Help ons dit project bekend te maken door dit bericht te delen op sociale media via een van de onderstaande links!