Hodnotenie výsledkov projektu „Using Euros“
Komplexná analýza
Abstrakt
Táto štúdia hodnotí účinnosť a použiteľnosť výstupov projektu „Using Euros“ prostredníctvom komplexnej analýzy spätnej väzby od používateľov. Celkovo 79 účastníkov hodnotilo platformu v 24 oblastiach zahŕňajúcich technickú funkčnosť, pedagogickú hodnotu a zážitok z učenia. Respondenti hodnotili pomocou 5-bodovej Likertovej škály aspekty ako použiteľnosť rozhrania, technická spoľahlivosť, pedagogická integrácia a výsledky učenia. Štatistická analýza identifikovala silno korelované vlastnosti a samostatné zhluky faktorov, ktoré charakterizujú používateľskú skúsenosť. Výsledky ukazujú mimoriadne pozitívne prijatie (priemerné skóre >4,6 vo všetkých oblastiach) s najsilnejšou zhodou v oblasti rozvoja životných zručností, zapojenia žiakov a súladu s cieľmi učenia. Technický výkon a prvky používateľskej skúsenosti vytvorili najpevnejší zhluk faktorov, zatiaľ čo nastavenie parametrov a hodnotenie pokroku sa ukázali ako samostatné otázky. Tento výskum poskytuje dôležité poznatky pre vývojárov vzdelávacích technológií a odborníkov z praxe, ktorí chcú zavádzať účinné digitálne vzdelávacie platformy vyvažujúce technickú spoľahlivosť s pedagogickou hodnotou.
OPISNÁ ŠTATISTIKA
| počet | priemer | smer. odch. | min | 25% | 50% | 75% | max | Otázka | |
|---|---|---|---|---|---|---|---|---|---|
| 0 | 79.0 | 4.670886075949370 | 0.7462988847080340 | 1.0 | 5.0 | 5.0 | 5.0 | 5.0 | Webová stránka funguje bez technických problémov (1 – 5) |
| 1 | 79.0 | 4.7594936708860800 | 0.5596516744853900 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Poskytnuté pokyny sú jasné (1 – 5) |
| 2 | 79.0 | 4.746835443037980 | 0.5654214318990420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Rozhranie je používateľsky prívetivé (1 – 5) |
| 3 | 79.0 | 4.772151898734180 | 0.505086108135003 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Kvalita grafiky (1 – 5) |
| 4 | 76.0 | 4.776315789473680 | 0.505929750341588 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aplikácie fungujú aspoň v troch prehliadačoch (1 – 5) |
| 5 | 76.0 | 4.723684210526320 | 0.531631055288692 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5) |
| 6 | 78.0 | 4.743589743589740 | 0.6729639313369270 | 2.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5) |
| 7 | 79.0 | 4.658227848101270 | 0.5748149300687360 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Nastavenie parametrov je jednoduché (1 – 5) |
| 8 | 79.0 | 4.69620253164557 | 0.6066813969699470 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Používatelia aplikácie spúšťajú bez problémov (1 – 5) |
| 9 | 79.0 | 4.8354430379746800 | 0.46493395579608000 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Skenovanie funguje podľa potreby (1 – 5) |
| 10 | 79.0 | 4.784810126582280 | 0.5230797869215380 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Výtlačky majú dobrú kvalitu (1 – 5) |
| 11 | 79.0 | 4.7974683544303800 | 0.490414446273684 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Uplatňuje sa univerzálny dizajn vzdelávania (1 – 5) |
| 12 | 79.0 | 4.886075949367090 | 0.31974917141296800 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5) |
| 13 | 79.0 | 4.848101265822790 | 0.4554121152779830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Spätná väzba pomáha učiteľom sledovať pokrok žiaka (1 – 5) |
| 14 | 79.0 | 4.822784810126580 | 0.4163176077654420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aplikácie možno začleniť do učebných osnov (1 – 5) |
| 15 | 79.0 | 4.6835443037974700 | 0.5671409131068760 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Vzorové plány hodín sú užitočné (1 – 5) |
| 16 | 79.0 | 4.860759493670890 | 0.34840947082971600 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Používatelia sa aktívne zapájajú do procesu učenia (1 – 5) |
| 17 | 79.0 | 4.7594936708860800 | 0.45896175678393700 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Poznámky k metodikám sú užitočné (1 – 5) |
| 18 | 79.0 | 4.772151898734180 | 0.5298613047505830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Sebahodnotenie žiakov motivuje (1 – 5) |
| 19 | 79.0 | 4.8734177215189900 | 0.4346259401911600 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Žiaci môžu pracovať vlastným tempom (1 – 5) |
| 20 | 78.0 | 4.846153846153850 | 0.36313651960128100 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Poskytnuté informácie súvisia s cieľmi učenia (1 – 5) |
| 21 | 79.0 | 4.8734177215189900 | 0.3709685385649280 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa (1 – 5) |
| 22 | 79.0 | 4.772151898734180 | 0.4790312630611270 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Učitelia môžu ľahko posúdiť pokrok žiakov (1 – 5) |
| 23 | 79.0 | 4.69620253164557 | 0.627457841667814 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aktivity možno využiť na skupinovú aj individuálnu prácu (1 – 5) |
Otázky s vysokou variabilitou
| Označenie | Otázka | smer. odch. |
|---|---|---|
| A1 | Webová stránka funguje bez technických problémov (1 – 5) | 0.7462988847080340 |
| A7 | Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5) | 0.6729639313369270 |
| C12 | Aktivity možno využiť na skupinovú aj individuálnu prácu (1 – 5) | 0.627457841667814 |
| A9 | Používatelia aplikácie spúšťajú bez problémov (1 – 5) | 0.6066813969699470 |
| A8 | Nastavenie parametrov je jednoduché (1 – 5) | 0.5748149300687360 |
Otázky s nízkou variabilitou
| Označenie | Otázka | smer. odch. |
|---|---|---|
| B1 | Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5) | 0.31974917141296800 |
| C5 | Používatelia sa aktívne zapájajú do procesu učenia (1 – 5) | 0.34840947082971600 |
| C9 | Poskytnuté informácie súvisia s cieľmi učenia (1 – 5) | 0.36313651960128100 |
| C10 | Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa (1 – 5) | 0.3709685385649280 |
| B3 | Aplikácie možno začleniť do učebných osnov (1 – 5) | 0.4163176077654420 |
Pochopenie variability odpovedí (smerodajná odchýlka)
Smerodajná odchýlka (smer. odch.) v druhom grafe vyjadruje, ako veľmi sa odpovede na jednotlivé otázky odchyľujú od priemeru. Čo nám hovorí:
Nízka smerodajná odchýlka (blízko 0) → vysoká zhoda
Ak je smerodajná odchýlka blízko 0, znamená to, že väčšina respondentov dala veľmi podobné hodnotenie (napr. všetci ohodnotili otázku známkou 5). To naznačuje silnú zhodu v hodnotení.
Príklad: Ak je pri otázke o „jasnosti pokynov“ smer. odch. = 0, znamená to, že všetci sa zhodli na jednom skóre (všetci dali 5 alebo všetci 4 atď.).
Vysoká smerodajná odchýlka (nad 0,5) → rozmanitejšie názory
Vyššia smerodajná odchýlka znamená, že odpovede respondentov sa výrazne líšili. To naznačuje rôznorodé názory – niektorí dali vysoké hodnotenie, iní nízke.
Príklad: Ak je pri otázke o „používateľskej prívetivosti rozhrania“ smer. odch. = 0,8, znamená to, že niektorí ho považovali za veľmi prívetivé (5), iní ho ohodnotili nižšie (3 – 4), čo ukazuje nezhodu.
Prečo je variabilita dôležitá?
- Nízka variabilita → naznačuje silnú zhodu (funkcia je buď naozaj dobrá, alebo naozaj zlá).
- Vysoká variabilita → odhaľuje oblasti na zlepšenie (niektorí používatelia sú spokojní, iní nie, čo ukazuje problémy s použiteľnosťou).
Otázky s vysokou smerodajnou odchýlkou si môžu vyžadovať ďalšie preskúmanie, aby sme pochopili, prečo sa názory rozchádzajú.
Kategória otázky
| Kategória | Otázka |
|---|---|
| A1 | Webová stránka funguje bez technických problémov (1 – 5) |
| A2 | Poskytnuté pokyny sú jasné (1 – 5) |
| A3 | Rozhranie je používateľsky prívetivé (1 – 5) |
| A4 | Kvalita grafiky (1 – 5) |
| A5 | Aplikácie fungujú aspoň v troch prehliadačoch (1 – 5) |
| A6 | Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5) |
| A7 | Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5) |
| A8 | Nastavenie parametrov je jednoduché (1 – 5) |
| A9 | Používatelia aplikácie spúšťajú bez problémov (1 – 5) |
| A10 | Skenovanie funguje podľa potreby (1 – 5) |
| A11 | Výtlačky majú dobrú kvalitu (1 – 5) |
| A12 | Uplatňuje sa univerzálny dizajn vzdelávania (1 – 5) |
| B1 | Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5) |
| B2 | Spätná väzba pomáha učiteľom sledovať pokrok žiaka (1 – 5) |
| B3 | Aplikácie možno začleniť do učebných osnov (1 – 5) |
| B4 | Vzorové plány hodín sú užitočné (1 – 5) |
| C5 | Používatelia sa aktívne zapájajú do procesu učenia (1 – 5) |
| C6 | Poznámky k metodikám sú užitočné (1 – 5) |
| C7 | Sebahodnotenie žiakov motivuje (1 – 5) |
| C8 | Žiaci môžu pracovať vlastným tempom (1 – 5) |
| C9 | Poskytnuté informácie súvisia s cieľmi učenia (1 – 5) |
| C10 | Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa (1 – 5) |
| C11 | Učitelia môžu ľahko posúdiť pokrok žiakov (1 – 5) |
| C12 | Aktivity možno využiť na skupinovú aj individuálnu prácu (1 – 5) |
KORELÁCIE MEDZI OTÁZKAMI
Najsilnejšie korelácie medzi otázkami (korelácia nad 0,7), ktoré naznačujú, že odpovede na tieto otázky spolu úzko súvisia.
| Označenie 1 | Otázka 1 | Text otázky 1 | Označenie 2 | Otázka 2 | Text otázky 2 | Korelácia |
|---|---|---|---|---|---|---|
| A1 | 0 | Webová stránka funguje bez technických problémov (1 – 5) | C5 | 16 | Používatelia sa aktívne zapájajú do procesu učenia (1 – 5) | 0.7090125015101340 |
| A2 | 1 | Poskytnuté pokyny sú jasné (1 – 5) | A9 | 8 | Používatelia aplikácie spúšťajú bez problémov (1 – 5) | 0.7260350618403750 |
| A3 | 2 | Rozhranie je používateľsky prívetivé (1 – 5) | A6 | 5 | Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5) | 0.781614675979465 |
| A4 | 3 | Kvalita grafiky (1 – 5) | A11 | 10 | Výtlačky majú dobrú kvalitu (1 – 5) | 0.734028376223487 |
| A4 | 3 | Kvalita grafiky (1 – 5) | B1 | 12 | Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5) | 0.7104325775692570 |
| A6 | 5 | Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5) | B3 | 14 | Aplikácie možno začleniť do učebných osnov (1 – 5) | 0.7192552903761100 |
| A7 | 6 | Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5) | A9 | 8 | Používatelia aplikácie spúšťajú bez problémov (1 – 5) | 0.7548860451594470 |
| A9 | 8 | Používatelia aplikácie spúšťajú bez problémov (1 – 5) | A11 | 10 | Výtlačky majú dobrú kvalitu (1 – 5) | 0.7609438667598360 |
| A10 | 9 | Skenovanie funguje podľa potreby (1 – 5) | A11 | 10 | Výtlačky majú dobrú kvalitu (1 – 5) | 0.7487071134303000 |
| A10 | 9 | Skenovanie funguje podľa potreby (1 – 5) | A12 | 11 | Uplatňuje sa univerzálny dizajn vzdelávania (1 – 5) | 0.7516016138604400 |
| C6 | 17 | Poznámky k metodikám sú užitočné (1 – 5) | C9 | 20 | Poskytnuté informácie súvisia s cieľmi učenia (1 – 5) | 0.7040041483986320 |
ZHLUKOVÁ ANALÝZA
Zhluky otázok identifikované na základe exploratórnej faktorovej analýzy (EFA):
Zhluky a ich zoskupené otázky:
Faktor 1 (najväčší zhluk):
- Zameriava sa na použiteľnosť, používateľskú skúsenosť a zapojenie do učenia.
- Zahŕňa otázky o prívetivosti rozhrania, jasnosti pokynov, jednoduchosti používania, spätnej väzbe a učení vlastným tempom.
Faktor 2:
- Týka sa technického výkonu a prístupnosti.
- Zahŕňa otázky o kvalite grafiky, kompatibilite s prehliadačmi, užitočných upozorneniach, kvalite tlače a plánoch hodín.
Faktor 3:
Obsahuje iba jednu otázku týkajúcu sa posudzovania pokroku žiakov učiteľmi.
Faktor 4:
Obsahuje tiež iba jednu otázku, zameranú na jednoduchosť nastavenia parametrov.
| Dominantný faktor | Otázky v zhluku |
|---|---|
| Faktor 1 | [[‘A1’, ‘Webová stránka funguje bez technických problémov (1 – 5)’], [‘A2’, ‘Poskytnuté pokyny sú jasné (1 – 5)’], [‘A3’, ‘Rozhranie je používateľsky prívetivé (1 – 5)’], [‘A7’, ‘Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5)’], [‘A9’, ‘Používatelia aplikácie spúšťajú bez problémov (1 – 5)’], [‘A10’, ‘Skenovanie funguje podľa potreby (1 – 5)’], [‘A12’, ‘Uplatňuje sa univerzálny dizajn vzdelávania (1 – 5)’], [‘B1’, ‘Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5)’], [‘B2’, “Spätná väzba pomáha učiteľom sledovať pokrok žiaka (1 – 5)”], [‘B3’, ‘Aplikácie možno začleniť do učebných osnov (1 – 5)’], [‘C5’, ‘Používatelia sa aktívne zapájajú do procesu učenia (1 – 5)’], [‘C7’, ‘Sebahodnotenie žiakov motivuje (1 – 5)’], [‘C8’, ‘Žiaci môžu pracovať vlastným tempom (1 – 5)’], [‘C9’, ‘Poskytnuté informácie súvisia s cieľmi učenia (1 – 5)’], [‘C10’, “Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa (1 – 5)”]] |
| Faktor 2 | [[‘A4’, ‘Kvalita grafiky (1 – 5)’], [‘A5’, ‘Aplikácie fungujú aspoň v troch prehliadačoch (1 – 5)’], [‘A6’, ‘Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5)’], [‘A11’, ‘Výtlačky majú dobrú kvalitu (1 – 5)’], [‘B4’, ‘Vzorové plány hodín sú užitočné (1 – 5)’], [‘C6’, ‘Poznámky k metodikám sú užitočné (1 – 5)’], [‘C12’, ‘Aktivity možno využiť na skupinovú aj individuálnu prácu (1 – 5)’]] |
| Faktor 3 | [[‘C11′, “Učitelia môžu ľahko posúdiť pokrok žiakov (1 – 5)”]] |
| Faktor 4 | [[‘A8’, ‘Nastavenie parametrov je jednoduché (1 – 5)’]] |
Čo to znamená?
Faktor 1 naznačuje silný vzťah medzi použiteľnosťou, účinnosťou učenia a zapojením používateľov.
Faktor 2 naznačuje, že kvalita grafiky, kompatibilita s prehliadačmi a štruktúrované plány hodín spolu súvisia.
Faktory 3 a 4 sú odľahlé, čo naznačuje samostatné otázky, ktoré sa silno nezoskupujú s ostatnými.
Výsledky
Hodnotenie vzdelávacej technologickej platformy prinieslo konzistentne pozitívne výsledky vo všetkých 24 meraných oblastiach (N=79). Opisná štatistika ukázala vysoké priemerné skóre v rozsahu od 4,67 do 4,89 na 5-bodovej Likertovej škále, čo naznačuje vysokú spokojnosť používateľov s technickými aj pedagogickými stránkami platformy.
Opisná analýza
Najvyššie hodnotené vlastnosti boli „Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti“ (M=4,89, SD=0,32), „Žiaci môžu pracovať vlastným tempom“ (M=4,87, SD=0,43) a „Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa“ (M=4,87, SD=0,37), čo ukazuje osobitné ocenenie pedagogickej flexibility a relevantnosti platformy. Dobre boli prijaté aj technické aspekty – „Skenovanie funguje podľa potreby“ (M=4,84, SD=0,46) a „Výtlačky majú dobrú kvalitu“ (M=4,78, SD=0,52) získali veľmi pozitívne hodnotenie.
Analýza variability odpovedí priniesla dôležité poznatky o zhode medzi používateľmi. Najsilnejšia zhoda medzi respondentmi (vyjadrená najnižšími smerodajnými odchýlkami) sa sústredila na základné pedagogické vlastnosti: „Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti“ (SD=0,32), „Používatelia sa aktívne zapájajú do procesu učenia“ (SD=0,35) a „Poskytnuté informácie súvisia s cieľmi učenia“ (SD=0,36). Naopak, väčšia variabilita odpovedí (čo naznačuje menšiu zhodu) sa pozorovala pri technických vlastnostiach, ako sú „Webová stránka funguje bez technických problémov“ (SD=0,75), „Aktivity možno jednoducho zdieľať s inými používateľmi“ (SD=0,67) a „Aktivity možno využiť na skupinovú aj individuálnu prácu“ (SD=0,63).
Korelačná analýza
Korelačná analýza identifikovala 11 silných vzťahov (r > 0,70) medzi rôznymi oblasťami hodnotenia. Najsilnejšie korelácie sa pozorovali medzi „Rozhranie je používateľsky prívetivé“ a „Vyskakovacie a upozorňujúce správy sú užitočné“ (r=0,78), „Používatelia aplikácie spúšťajú bez problémov“ a „Výtlačky majú dobrú kvalitu“ (r=0,76) a „Aktivity možno jednoducho zdieľať s inými používateľmi“ a „Používatelia aplikácie spúšťajú bez problémov“ (r=0,75). Tieto korelácie naznačujú, že vnímanie kvality rozhrania úzko súvisí s užitočnosťou spätnej väzby systému a že jednoduchosť ovládania silno koreluje s kvalitou výstupov.
Pozoruhodné korelácie medzi kategóriami zahŕňali „Kvalita grafiky“ so „Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti“ (r=0,71) a „Webová stránka funguje bez technických problémov“ s „Používatelia sa aktívne zapájajú do procesu učenia“ (r=0,71), čo naznačuje, že technické aspekty výkonu pozitívne ovplyvňujú vnímanie pedagogickej hodnoty.
Faktorová analýza
Exploratórna faktorová analýza odhalila štyri samostatné zhluky charakteristík platformy:
Faktor 1 (používateľská skúsenosť a zapojenie do učenia): Najväčší zhluk, ktorý zahŕňa 15 položiek vrátane použiteľnosti rozhrania, technickej spoľahlivosti, relevantnosti učenia a autonómie používateľa. Tento dominantný faktor poukazuje na silné prepojenie technickej funkčnosti a pedagogickej účinnosti, pričom jednoduché ovládanie priamo podporuje zapojenie do učenia.
Faktor 2 (technický výkon a prístupnosť): Skladá sa zo 7 položiek týkajúcich sa vizuálnej kvality, kompatibility s rôznymi prehliadačmi, spätnej väzby systému a výučbových zdrojov. Tento zhluk naznačuje, že kvalita výstupov a štruktúrované usmernenie tvoria súdržnú súčasť skúsenosti s platformou.
Faktor 3 (možnosť hodnotenia): Tento faktor obsahuje jedinú položku „Učitelia môžu jednoducho posúdiť pokrok žiakov“ a ukázal sa ako samostatná oblasť oddelená od ostatných pedagogických funkcií, čo zdôrazňuje jedinečný význam funkcie hodnotenia.
Faktor 4 (nastavenie parametrov): Aj tento faktor obsahuje jedinú položku, „Nastavenie parametrov je jednoduchý proces“, a jeho izolovanosť naznačuje, že nastavenie parametrov predstavuje špecifickú súčasť skúsenosti s platformou, ktorá si zaslúži osobitnú pozornosť.
Stručne povedané, výsledky ukazujú vysokú celkovú spokojnosť so vzdelávacou technologickou platformou, pričom obzvlášť silná zhoda panuje v otázke jej pedagogickej hodnoty. Faktorová analýza ukazuje, že hoci používateľská skúsenosť a zapojenie do učenia tvoria súdržné jadro celkovej skúsenosti, konkrétne funkcie, ako je hodnotenie a nastavenie parametrov, predstavujú samostatné oblasti, ktoré si pri vývoji a zavádzaní platformy zaslúžia osobitnú pozornosť.
Stiahnuť výskumný súborGoogle DrivePo kliknutí môže Google uložiť súbory cookieZásady používania cookies





0 Comments