Evaluatie van de resultaten van het project “Using Euros”
Een uitgebreide analyse
Samenvatting
Deze studie evalueert de effectiviteit en bruikbaarheid van de resultaten van het project “Using Euros” aan de hand van een uitgebreide analyse van gebruikersfeedback. In totaal beoordeelden 79 deelnemers het platform op 24 dimensies op het gebied van technische werking, pedagogische waarde en leerervaring. Met een 5-puntsschaal van Likert beoordeelden de respondenten onder meer de gebruiksvriendelijkheid van de interface, de technische betrouwbaarheid, de pedagogische inbedding en de leerresultaten. Uit de statistische analyse bleken sterk gecorreleerde kenmerken en afzonderlijke factorclusters die de gebruikerservaring typeren. De resultaten wijzen op een overweldigend positieve ontvangst (gemiddelde scores >4,6 op alle dimensies), met de grootste eensgezindheid over de ontwikkeling van levensvaardigheden, de betrokkenheid van de leerlingen en de aansluiting bij de leerdoelen. Technische prestaties en gebruikerservaring vormden het sterkste factorcluster, terwijl het instellen van parameters en het beoordelen van de voortgang zich als afzonderlijke aandachtspunten aandienden. Dit onderzoek biedt waardevolle inzichten voor ontwikkelaars van educatieve technologie en voor professionals die effectieve digitale leerplatforms willen invoeren waarin technische betrouwbaarheid en pedagogische waarde in balans zijn.
BESCHRIJVENDE STATISTIEK
| aantal | gemiddelde | std | min | 25% | 50% | 75% | max | Vraag | |
|---|---|---|---|---|---|---|---|---|---|
| 0 | 79.0 | 4.670886075949370 | 0.7462988847080340 | 1.0 | 5.0 | 5.0 | 5.0 | 5.0 | De website werkt zonder technische storingen (1-5) |
| 1 | 79.0 | 4.7594936708860800 | 0.5596516744853900 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | De gegeven instructies zijn duidelijk (1-5) |
| 2 | 79.0 | 4.746835443037980 | 0.5654214318990420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | De interface is gebruiksvriendelijk (1-5) |
| 3 | 79.0 | 4.772151898734180 | 0.505086108135003 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Kwaliteit van de afbeeldingen (1-5) |
| 4 | 76.0 | 4.776315789473680 | 0.505929750341588 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | De applicaties werken in minstens drie browsers (1-5) |
| 5 | 76.0 | 4.723684210526320 | 0.531631055288692 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5) |
| 6 | 78.0 | 4.743589743589740 | 0.6729639313369270 | 2.0 | 5.0 | 5.0 | 5.0 | 5.0 | Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5) |
| 7 | 79.0 | 4.658227848101270 | 0.5748149300687360 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Het instellen van de parameters is eenvoudig (1-5) |
| 8 | 79.0 | 4.69620253164557 | 0.6066813969699470 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) |
| 9 | 79.0 | 4.8354430379746800 | 0.46493395579608000 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Scannen werkt zoals vereist (1-5) |
| 10 | 79.0 | 4.784810126582280 | 0.5230797869215380 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Afdrukken zijn van goede kwaliteit (1-5) |
| 11 | 79.0 | 4.7974683544303800 | 0.490414446273684 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Universal Design for Learning wordt toegepast (1-5) |
| 12 | 79.0 | 4.886075949367090 | 0.31974917141296800 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5) |
| 13 | 79.0 | 4.848101265822790 | 0.4554121152779830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Feedback helpt leerkrachten de voortgang van leerlingen te volgen (1-5) |
| 14 | 79.0 | 4.822784810126580 | 0.4163176077654420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Applicaties kunnen in het curriculum worden geïntegreerd (1-5) |
| 15 | 79.0 | 4.6835443037974700 | 0.5671409131068760 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Voorbeeldlesplannen zijn nuttig (1-5) |
| 16 | 79.0 | 4.860759493670890 | 0.34840947082971600 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Gebruikers zijn actief betrokken bij het leerproces (1-5) |
| 17 | 79.0 | 4.7594936708860800 | 0.45896175678393700 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | De notities over methodologieën zijn nuttig (1-5) |
| 18 | 79.0 | 4.772151898734180 | 0.5298613047505830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Zelfevaluatie motiveert leerlingen (1-5) |
| 19 | 79.0 | 4.8734177215189900 | 0.4346259401911600 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Leerlingen kunnen in hun eigen tempo werken (1-5) |
| 20 | 78.0 | 4.846153846153850 | 0.36313651960128100 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | De verstrekte informatie sluit aan bij de leerdoelen (1-5) |
| 21 | 79.0 | 4.8734177215189900 | 0.3709685385649280 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker (1-5) |
| 22 | 79.0 | 4.772151898734180 | 0.4790312630611270 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Leerkrachten kunnen de voortgang van leerlingen eenvoudig beoordelen (1-5) |
| 23 | 79.0 | 4.69620253164557 | 0.627457841667814 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt (1-5) |
Vragen met grote variatie
| Label | Vraag | std |
|---|---|---|
| A1 | De website werkt zonder technische storingen (1-5) | 0.7462988847080340 |
| A7 | Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5) | 0.6729639313369270 |
| C12 | Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt (1-5) | 0.627457841667814 |
| A9 | Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) | 0.6066813969699470 |
| A8 | Het instellen van de parameters is eenvoudig (1-5) | 0.5748149300687360 |
Vragen met geringe variatie
| Label | Vraag | std |
|---|---|---|
| B1 | De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5) | 0.31974917141296800 |
| C5 | Gebruikers zijn actief betrokken bij het leerproces (1-5) | 0.34840947082971600 |
| C9 | De verstrekte informatie sluit aan bij de leerdoelen (1-5) | 0.36313651960128100 |
| C10 | Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker (1-5) | 0.3709685385649280 |
| B3 | Applicaties kunnen in het curriculum worden geïntegreerd (1-5) | 0.4163176077654420 |
Variatie in de antwoorden begrijpen (standaarddeviatie)
De standaarddeviatie (std) in de tweede grafiek geeft aan hoeveel de antwoorden op elke vraag van het gemiddelde afwijken. Dit vertelt ons het volgende:
Lage standaarddeviatie (dicht bij 0) → grote overeenstemming
Als de standaarddeviatie dicht bij 0 ligt, betekent dit dat de meeste respondenten zeer vergelijkbare scores gaven (bijvoorbeeld: iedereen gaf een vraag een 5). Dit wijst op een sterke consensus over de beoordeling.
Voorbeeld: als een vraag over de “duidelijkheid van de instructies” een std = 0 heeft, betekent dit dat iedereen dezelfde score gaf (iedereen een 5 of iedereen een 4, enzovoort).
Hoge standaarddeviatie (boven 0,5) → meer uiteenlopende meningen
Een hogere standaarddeviatie betekent dat de antwoorden sterk uiteenliepen. Dit wijst op gemengde meningen: sommigen gaven een hoge score, anderen een lage.
Voorbeeld: als een vraag over de “gebruiksvriendelijkheid van de interface” een std = 0,8 heeft, vonden sommige mensen de interface zeer gebruiksvriendelijk (5), terwijl anderen een lagere score gaven (3-4). Er is dus sprake van verschil van mening.
Waarom is variatie belangrijk?
- Lage variatie → wijst op sterke consensus (het kenmerk is echt goed of echt slecht).
- Hoge variatie → wijst op verbeterpunten (sommige gebruikers zijn tevreden, anderen niet, wat op gebruiksproblemen kan wijzen).
Vragen met een hoge standaarddeviatie moeten mogelijk nader worden onderzocht om te begrijpen waarom de meningen verdeeld zijn.
Categorie en vraag
| Categorie | Vraag |
|---|---|
| A1 | De website werkt zonder technische storingen (1-5) |
| A2 | De gegeven instructies zijn duidelijk (1-5) |
| A3 | De interface is gebruiksvriendelijk (1-5) |
| A4 | Kwaliteit van de afbeeldingen (1-5) |
| A5 | De applicaties werken in minstens drie browsers (1-5) |
| A6 | Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5) |
| A7 | Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5) |
| A8 | Het instellen van de parameters is eenvoudig (1-5) |
| A9 | Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) |
| A10 | Scannen werkt zoals vereist (1-5) |
| A11 | Afdrukken zijn van goede kwaliteit (1-5) |
| A12 | Universal Design for Learning wordt toegepast (1-5) |
| B1 | De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5) |
| B2 | Feedback helpt leerkrachten de voortgang van leerlingen te volgen (1-5) |
| B3 | Applicaties kunnen in het curriculum worden geïntegreerd (1-5) |
| B4 | Voorbeeldlesplannen zijn nuttig (1-5) |
| C5 | Gebruikers zijn actief betrokken bij het leerproces (1-5) |
| C6 | De notities over methodologieën zijn nuttig (1-5) |
| C7 | Zelfevaluatie motiveert leerlingen (1-5) |
| C8 | Leerlingen kunnen in hun eigen tempo werken (1-5) |
| C9 | De verstrekte informatie sluit aan bij de leerdoelen (1-5) |
| C10 | Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker (1-5) |
| C11 | Leerkrachten kunnen de voortgang van leerlingen eenvoudig beoordelen (1-5) |
| C12 | Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt (1-5) |
CORRELATIES TUSSEN VRAGEN
Sterkste correlaties tussen vragen (correlatie boven 0,7), wat aangeeft dat de antwoorden op deze vragen sterk met elkaar samenhangen.
| Label 1 | Vraag 1 | Tekst vraag 1 | Label 2 | Vraag 2 | Tekst vraag 2 | Correlatie |
|---|---|---|---|---|---|---|
| A1 | 0 | De website werkt zonder technische storingen (1-5) | C5 | 16 | Gebruikers zijn actief betrokken bij het leerproces (1-5) | 0.7090125015101340 |
| A2 | 1 | De gegeven instructies zijn duidelijk (1-5) | A9 | 8 | Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) | 0.7260350618403750 |
| A3 | 2 | De interface is gebruiksvriendelijk (1-5) | A6 | 5 | Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5) | 0.781614675979465 |
| A4 | 3 | Kwaliteit van de afbeeldingen (1-5) | A11 | 10 | Afdrukken zijn van goede kwaliteit (1-5) | 0.734028376223487 |
| A4 | 3 | Kwaliteit van de afbeeldingen (1-5) | B1 | 12 | De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5) | 0.7104325775692570 |
| A6 | 5 | Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5) | B3 | 14 | Applicaties kunnen in het curriculum worden geïntegreerd (1-5) | 0.7192552903761100 |
| A7 | 6 | Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5) | A9 | 8 | Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) | 0.7548860451594470 |
| A9 | 8 | Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5) | A11 | 10 | Afdrukken zijn van goede kwaliteit (1-5) | 0.7609438667598360 |
| A10 | 9 | Scannen werkt zoals vereist (1-5) | A11 | 10 | Afdrukken zijn van goede kwaliteit (1-5) | 0.7487071134303000 |
| A10 | 9 | Scannen werkt zoals vereist (1-5) | A12 | 11 | Universal Design for Learning wordt toegepast (1-5) | 0.7516016138604400 |
| C6 | 17 | De notities over methodologieën zijn nuttig (1-5) | C9 | 20 | De verstrekte informatie sluit aan bij de leerdoelen (1-5) | 0.7040041483986320 |
CLUSTERANALYSE
Geïdentificeerde clusters van vragen op basis van de exploratieve factoranalyse (EFA):
Clusters & de bijbehorende vragen:
Factor 1 (grootste cluster):
- Richt zich op gebruiksvriendelijkheid, gebruikerservaring en leerbetrokkenheid.
- Omvat vragen over de gebruiksvriendelijkheid van de interface, de duidelijkheid van de instructies, het gebruiksgemak, feedback en leren in eigen tempo.
Factor 2:
- Heeft betrekking op technische prestaties & toegankelijkheid.
- Omvat vragen over de kwaliteit van de afbeeldingen, de compatibiliteit met browsers, nuttige waarschuwingen, de afdrukkwaliteit en lesplannen.
Factor 3:
Bevat slechts één vraag, over het beoordelen van de voortgang van leerlingen door leerkrachten.
Factor 4:
Bevat ook slechts één vraag, over het gemak van het instellen van parameters.
| Dominante factor | Vragen in het cluster |
|---|---|
| Factor 1 | [[‘A1’, ‘De website werkt zonder technische storingen (1-5)’], [‘A2’, ‘De gegeven instructies zijn duidelijk (1-5)’], [‘A3’, ‘De interface is gebruiksvriendelijk (1-5)’], [‘A7’, ‘Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld (1-5)’], [‘A9’, ‘Gebruikers kunnen de applicaties gemakkelijk uitvoeren (1-5)’], [‘A10’, ‘Scannen werkt zoals vereist (1-5)’], [‘A12’, ‘Universal Design for Learning wordt toegepast (1-5)’], [‘B1’, ‘De te verwerven vaardigheden zijn belangrijke levensvaardigheden (1-5)’], [‘B2’, “Feedback helpt leerkrachten de voortgang van leerlingen te volgen (1-5)”], [‘B3’, ‘Applicaties kunnen in het curriculum worden geïntegreerd (1-5)’], [‘C5’, ‘Gebruikers zijn actief betrokken bij het leerproces (1-5)’], [‘C7’, ‘Zelfevaluatie motiveert leerlingen (1-5)’], [‘C8’, ‘Leerlingen kunnen in hun eigen tempo werken (1-5)’], [‘C9’, ‘De verstrekte informatie sluit aan bij de leerdoelen (1-5)’], [‘C10’, “Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker (1-5)”]] |
| Factor 2 | [[‘A4’, ‘Kwaliteit van de afbeeldingen (1-5)’], [‘A5’, ‘De applicaties werken in minstens drie browsers (1-5)’], [‘A6’, ‘Pop-ups en waarschuwingsmeldingen zijn nuttig (1-5)’], [‘A11’, ‘Afdrukken zijn van goede kwaliteit (1-5)’], [‘B4’, ‘Voorbeeldlesplannen zijn nuttig (1-5)’], [‘C6’, ‘De notities over methodologieën zijn nuttig (1-5)’], [‘C12’, ‘Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt (1-5)’]] |
| Factor 3 | [[‘C11′, “Leerkrachten kunnen de voortgang van leerlingen eenvoudig beoordelen (1-5)”]] |
| Factor 4 | [[‘A8’, ‘Het instellen van de parameters is eenvoudig (1-5)’]] |
Wat betekent dit?
Factor 1 wijst op een sterk verband tussen gebruiksvriendelijkheid, leereffectiviteit en gebruikersbetrokkenheid.
Factor 2 geeft aan dat de kwaliteit van de afbeeldingen, de compatibiliteit met browsers en gestructureerde lesplannen met elkaar samenhangen.
Factoren 3 & 4 zijn uitschieters: zij wijzen op op zichzelf staande aandachtspunten die niet sterk met andere onderdelen samenhangen.
Resultaten
De beoordeling van het educatieve technologieplatform leverde op alle 24 gemeten dimensies consistent positieve evaluaties op (N=79). De beschrijvende statistiek toonde hoge gemiddelde scores, variërend van 4,67 tot 4,89 op een 5-puntsschaal van Likert, wat wijst op grote tevredenheid van de gebruikers over zowel de technische als de pedagogische aspecten van het platform.
Beschrijvende analyse
De hoogst gewaardeerde kenmerken waren “De te verwerven vaardigheden zijn belangrijke levensvaardigheden” (M=4,89, SD=0,32), “Leerlingen kunnen in hun eigen tempo werken” (M=4,87, SD=0,43) en “Leerkrachten/ouders kunnen activiteiten eenvoudig aanpassen aan de behoeften van de gebruiker” (M=4,87, SD=0,37). Dit toont een bijzondere waardering voor de pedagogische flexibiliteit en relevantie van het platform. Ook de technische aspecten werden goed ontvangen: “Scannen werkt zoals vereist” (M=4,84, SD=0,46) en “Afdrukken zijn van goede kwaliteit” (M=4,78, SD=0,52) kregen sterk positieve beoordelingen.
De analyse van de variatie in de antwoorden gaf belangrijke inzichten in de mate van consensus onder de gebruikers. De sterkste overeenstemming tussen de respondenten (blijkend uit de laagste standaarddeviaties) lag bij de kern van de pedagogische kenmerken: “De te verwerven vaardigheden zijn belangrijke levensvaardigheden” (SD=0,32), “Gebruikers zijn actief betrokken bij het leerproces” (SD=0,35) en “De verstrekte informatie sluit aan bij de leerdoelen” (SD=0,36). Daartegenover was er meer variatie in de antwoorden (en dus minder consensus) bij technische kenmerken zoals “De website werkt zonder technische storingen” (SD=0,75), “Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld” (SD=0,67) en “Activiteiten kunnen zowel voor groepswerk als voor individueel werk worden gebruikt” (SD=0,63).
Correlatieanalyse
De correlatieanalyse bracht 11 sterke verbanden (r > 0,70) tussen verschillende beoordelingsdimensies aan het licht. De sterkste correlaties werden gevonden tussen “De interface is gebruiksvriendelijk” en “Pop-ups en waarschuwingsmeldingen zijn nuttig” (r=0,78), tussen “Gebruikers kunnen de applicaties gemakkelijk uitvoeren” en “Afdrukken zijn van goede kwaliteit” (r=0,76), en tussen “Activiteiten kunnen eenvoudig met andere gebruikers worden gedeeld” en “Gebruikers kunnen de applicaties gemakkelijk uitvoeren” (r=0,75). Deze correlaties suggereren dat de perceptie van de kwaliteit van de interface nauw samenhangt met hoe nuttig de feedback van het systeem is, en dat bedieningsgemak sterk samengaat met de kwaliteit van de resultaten.
Opvallende correlaties tussen categorieën waren “Kwaliteit van de afbeeldingen” met “De te verwerven vaardigheden zijn belangrijke levensvaardigheden” (r=0,71) en “De website werkt zonder technische storingen” met “Gebruikers zijn actief betrokken bij het leerproces” (r=0,71). Dit wijst erop dat technische prestaties de perceptie van pedagogische waarde positief beïnvloeden.
Factoranalyse
De exploratieve factoranalyse bracht vier afzonderlijke clusters van platformkenmerken aan het licht:
Factor 1 (gebruikservaring en leerbetrokkenheid): Het grootste cluster, met 15 items, waaronder gebruiksvriendelijkheid van de interface, technische betrouwbaarheid, relevantie voor het leren en autonomie van de gebruiker. Deze dominante factor wijst op een sterke samenhang tussen technische functionaliteit en pedagogische effectiviteit: gebruiksgemak ondersteunt rechtstreeks de betrokkenheid bij het leren.
Factor 2 (technische prestaties en toegankelijkheid): Bestaat uit 7 items over visuele kwaliteit, compatibiliteit tussen browsers, feedback van het systeem en instructiemateriaal. Dit cluster laat zien dat de kwaliteit van de output en gestructureerde begeleiding samen een samenhangend onderdeel van de platformervaring vormen.
Factor 3 (beoordelingsmogelijkheden): Deze factor bevat alleen het item "Leraren kunnen de vorderingen van leerlingen gemakkelijk beoordelen" en kwam naar voren als een apart aandachtspunt, los van de andere pedagogische kenmerken. Dit benadrukt het unieke belang van de beoordelingsfunctie.
Factor 4 (instellen van parameters): Ook deze factor bevat slechts één item, "Het instellen van de parameters is eenvoudig". Dat deze factor los staat, wijst erop dat het configureren van parameters een specifiek onderdeel van de platformervaring is dat aparte aandacht verdient.
Samenvattend laten de resultaten een hoge algemene tevredenheid zien over het educatieve technologieplatform, met name een sterke consensus over de pedagogische waarde ervan. De factoranalyse laat zien dat gebruikservaring en leerbetrokkenheid samen de kern van de ervaring vormen, terwijl specifieke functies zoals beoordeling en het instellen van parameters aparte aspecten zijn die bij de ontwikkeling en implementatie van het platform specifieke aandacht verdienen.
Onderzoeksbestand downloadenGoogle DriveBij een klik kan Google cookies opslaanCookiebeleid





0 Comments