Hodnotenie výsledkov projektu „Using Euros“

Komplexná analýza

Abstrakt

Táto štúdia hodnotí účinnosť a použiteľnosť výstupov projektu „Using Euros“ prostredníctvom komplexnej analýzy spätnej väzby od používateľov. Celkovo 79 účastníkov hodnotilo platformu v 24 oblastiach zahŕňajúcich technickú funkčnosť, pedagogickú hodnotu a zážitok z učenia. Respondenti hodnotili pomocou 5-bodovej Likertovej škály aspekty ako použiteľnosť rozhrania, technická spoľahlivosť, pedagogická integrácia a výsledky učenia. Štatistická analýza identifikovala silno korelované vlastnosti a samostatné zhluky faktorov, ktoré charakterizujú používateľskú skúsenosť. Výsledky ukazujú mimoriadne pozitívne prijatie (priemerné skóre >4,6 vo všetkých oblastiach) s najsilnejšou zhodou v oblasti rozvoja životných zručností, zapojenia žiakov a súladu s cieľmi učenia. Technický výkon a prvky používateľskej skúsenosti vytvorili najpevnejší zhluk faktorov, zatiaľ čo nastavenie parametrov a hodnotenie pokroku sa ukázali ako samostatné otázky. Tento výskum poskytuje dôležité poznatky pre vývojárov vzdelávacích technológií a odborníkov z praxe, ktorí chcú zavádzať účinné digitálne vzdelávacie platformy vyvažujúce technickú spoľahlivosť s pedagogickou hodnotou.

OPISNÁ ŠTATISTIKA

  počet priemer smer. odch. min 25% 50% 75% max Otázka
0 79.0 4.670886075949370 0.7462988847080340 1.0 5.0 5.0 5.0 5.0 Webová stránka funguje bez technických problémov (1 – 5)
1 79.0 4.7594936708860800 0.5596516744853900 3.0 5.0 5.0 5.0 5.0 Poskytnuté pokyny sú jasné (1 – 5)
2 79.0 4.746835443037980 0.5654214318990420 3.0 5.0 5.0 5.0 5.0 Rozhranie je používateľsky prívetivé (1 – 5)
3 79.0 4.772151898734180 0.505086108135003 3.0 5.0 5.0 5.0 5.0 Kvalita grafiky (1 – 5)
4 76.0 4.776315789473680 0.505929750341588 3.0 5.0 5.0 5.0 5.0 Aplikácie fungujú aspoň v troch prehliadačoch (1 – 5)
5 76.0 4.723684210526320 0.531631055288692 3.0 5.0 5.0 5.0 5.0 Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5)
6 78.0 4.743589743589740 0.6729639313369270 2.0 5.0 5.0 5.0 5.0 Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5)
7 79.0 4.658227848101270 0.5748149300687360 3.0 4.0 5.0 5.0 5.0 Nastavenie parametrov je jednoduché (1 – 5)
8 79.0 4.69620253164557 0.6066813969699470 3.0 5.0 5.0 5.0 5.0 Používatelia aplikácie spúšťajú bez problémov (1 – 5)
9 79.0 4.8354430379746800 0.46493395579608000 3.0 5.0 5.0 5.0 5.0 Skenovanie funguje podľa potreby (1 – 5)
10 79.0 4.784810126582280 0.5230797869215380 3.0 5.0 5.0 5.0 5.0 Výtlačky majú dobrú kvalitu (1 – 5)
11 79.0 4.7974683544303800 0.490414446273684 3.0 5.0 5.0 5.0 5.0 Uplatňuje sa univerzálny dizajn vzdelávania (1 – 5)
12 79.0 4.886075949367090 0.31974917141296800 4.0 5.0 5.0 5.0 5.0 Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5)
13 79.0 4.848101265822790 0.4554121152779830 3.0 5.0 5.0 5.0 5.0 Spätná väzba pomáha učiteľom sledovať pokrok žiaka (1 – 5)
14 79.0 4.822784810126580 0.4163176077654420 3.0 5.0 5.0 5.0 5.0 Aplikácie možno začleniť do učebných osnov (1 – 5)
15 79.0 4.6835443037974700 0.5671409131068760 3.0 4.0 5.0 5.0 5.0 Vzorové plány hodín sú užitočné (1 – 5)
16 79.0 4.860759493670890 0.34840947082971600 4.0 5.0 5.0 5.0 5.0 Používatelia sa aktívne zapájajú do procesu učenia (1 – 5)
17 79.0 4.7594936708860800 0.45896175678393700 3.0 5.0 5.0 5.0 5.0 Poznámky k metodikám sú užitočné (1 – 5)
18 79.0 4.772151898734180 0.5298613047505830 3.0 5.0 5.0 5.0 5.0 Sebahodnotenie žiakov motivuje (1 – 5)
19 79.0 4.8734177215189900 0.4346259401911600 3.0 5.0 5.0 5.0 5.0 Žiaci môžu pracovať vlastným tempom (1 – 5)
20 78.0 4.846153846153850 0.36313651960128100 4.0 5.0 5.0 5.0 5.0 Poskytnuté informácie súvisia s cieľmi učenia (1 – 5)
21 79.0 4.8734177215189900 0.3709685385649280 3.0 5.0 5.0 5.0 5.0 Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa (1 – 5)
22 79.0 4.772151898734180 0.4790312630611270 3.0 5.0 5.0 5.0 5.0 Učitelia môžu ľahko posúdiť pokrok žiakov (1 – 5)
23 79.0 4.69620253164557 0.627457841667814 3.0 5.0 5.0 5.0 5.0 Aktivity možno využiť na skupinovú aj individuálnu prácu (1 – 5)

Otázky s vysokou variabilitou

Označenie Otázka smer. odch.
A1 Webová stránka funguje bez technických problémov (1 – 5) 0.7462988847080340
A7 Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5) 0.6729639313369270
C12 Aktivity možno využiť na skupinovú aj individuálnu prácu (1 – 5) 0.627457841667814
A9 Používatelia aplikácie spúšťajú bez problémov (1 – 5) 0.6066813969699470
A8 Nastavenie parametrov je jednoduché (1 – 5) 0.5748149300687360

Otázky s nízkou variabilitou

Označenie Otázka smer. odch.
B1 Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5) 0.31974917141296800
C5 Používatelia sa aktívne zapájajú do procesu učenia (1 – 5) 0.34840947082971600
C9 Poskytnuté informácie súvisia s cieľmi učenia (1 – 5) 0.36313651960128100
C10 Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa (1 – 5) 0.3709685385649280
B3 Aplikácie možno začleniť do učebných osnov (1 – 5) 0.4163176077654420

Pochopenie variability odpovedí (smerodajná odchýlka)

Smerodajná odchýlka (smer. odch.) v druhom grafe vyjadruje, ako veľmi sa odpovede na jednotlivé otázky odchyľujú od priemeru. Čo nám hovorí:

Nízka smerodajná odchýlka (blízko 0) → vysoká zhoda

Ak je smerodajná odchýlka blízko 0, znamená to, že väčšina respondentov dala veľmi podobné hodnotenie (napr. všetci ohodnotili otázku známkou 5). To naznačuje silnú zhodu v hodnotení.

Príklad: Ak je pri otázke o „jasnosti pokynov“ smer. odch. = 0, znamená to, že všetci sa zhodli na jednom skóre (všetci dali 5 alebo všetci 4 atď.).

Vysoká smerodajná odchýlka (nad 0,5) → rozmanitejšie názory

Vyššia smerodajná odchýlka znamená, že odpovede respondentov sa výrazne líšili. To naznačuje rôznorodé názory – niektorí dali vysoké hodnotenie, iní nízke.

Príklad: Ak je pri otázke o „používateľskej prívetivosti rozhrania“ smer. odch. = 0,8, znamená to, že niektorí ho považovali za veľmi prívetivé (5), iní ho ohodnotili nižšie (3 – 4), čo ukazuje nezhodu.

Prečo je variabilita dôležitá?

  • Nízka variabilita → naznačuje silnú zhodu (funkcia je buď naozaj dobrá, alebo naozaj zlá).
  • Vysoká variabilita → odhaľuje oblasti na zlepšenie (niektorí používatelia sú spokojní, iní nie, čo ukazuje problémy s použiteľnosťou).

Otázky s vysokou smerodajnou odchýlkou si môžu vyžadovať ďalšie preskúmanie, aby sme pochopili, prečo sa názory rozchádzajú.

Kategória otázky

Kategória Otázka
A1 Webová stránka funguje bez technických problémov (1 – 5)
A2 Poskytnuté pokyny sú jasné (1 – 5)
A3 Rozhranie je používateľsky prívetivé (1 – 5)
A4 Kvalita grafiky (1 – 5)
A5 Aplikácie fungujú aspoň v troch prehliadačoch (1 – 5)
A6 Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5)
A7 Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5)
A8 Nastavenie parametrov je jednoduché (1 – 5)
A9 Používatelia aplikácie spúšťajú bez problémov (1 – 5)
A10 Skenovanie funguje podľa potreby (1 – 5)
A11 Výtlačky majú dobrú kvalitu (1 – 5)
A12 Uplatňuje sa univerzálny dizajn vzdelávania (1 – 5)
B1 Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5)
B2 Spätná väzba pomáha učiteľom sledovať pokrok žiaka (1 – 5)
B3 Aplikácie možno začleniť do učebných osnov (1 – 5)
B4 Vzorové plány hodín sú užitočné (1 – 5)
C5 Používatelia sa aktívne zapájajú do procesu učenia (1 – 5)
C6 Poznámky k metodikám sú užitočné (1 – 5)
C7 Sebahodnotenie žiakov motivuje (1 – 5)
C8 Žiaci môžu pracovať vlastným tempom (1 – 5)
C9 Poskytnuté informácie súvisia s cieľmi učenia (1 – 5)
C10 Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa (1 – 5)
C11 Učitelia môžu ľahko posúdiť pokrok žiakov (1 – 5)
C12 Aktivity možno využiť na skupinovú aj individuálnu prácu (1 – 5)

KORELÁCIE MEDZI OTÁZKAMI

Najsilnejšie korelácie medzi otázkami (korelácia nad 0,7), ktoré naznačujú, že odpovede na tieto otázky spolu úzko súvisia.

Označenie 1 Otázka 1 Text otázky 1 Označenie 2 Otázka 2 Text otázky 2 Korelácia
A1 0 Webová stránka funguje bez technických problémov (1 – 5) C5 16 Používatelia sa aktívne zapájajú do procesu učenia (1 – 5) 0.7090125015101340
A2 1 Poskytnuté pokyny sú jasné (1 – 5) A9 8 Používatelia aplikácie spúšťajú bez problémov (1 – 5) 0.7260350618403750
A3 2 Rozhranie je používateľsky prívetivé (1 – 5) A6 5 Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5) 0.781614675979465
A4 3 Kvalita grafiky (1 – 5) A11 10 Výtlačky majú dobrú kvalitu (1 – 5) 0.734028376223487
A4 3 Kvalita grafiky (1 – 5) B1 12 Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5) 0.7104325775692570
A6 5 Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5) B3 14 Aplikácie možno začleniť do učebných osnov (1 – 5) 0.7192552903761100
A7 6 Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5) A9 8 Používatelia aplikácie spúšťajú bez problémov (1 – 5) 0.7548860451594470
A9 8 Používatelia aplikácie spúšťajú bez problémov (1 – 5) A11 10 Výtlačky majú dobrú kvalitu (1 – 5) 0.7609438667598360
A10 9 Skenovanie funguje podľa potreby (1 – 5) A11 10 Výtlačky majú dobrú kvalitu (1 – 5) 0.7487071134303000
A10 9 Skenovanie funguje podľa potreby (1 – 5) A12 11 Uplatňuje sa univerzálny dizajn vzdelávania (1 – 5) 0.7516016138604400
C6 17 Poznámky k metodikám sú užitočné (1 – 5) C9 20 Poskytnuté informácie súvisia s cieľmi učenia (1 – 5) 0.7040041483986320

ZHLUKOVÁ ANALÝZA

Zhluky otázok identifikované na základe exploratórnej faktorovej analýzy (EFA):

Zhluky a ich zoskupené otázky:

Faktor 1 (najväčší zhluk):

  • Zameriava sa na použiteľnosť, používateľskú skúsenosť a zapojenie do učenia.
  • Zahŕňa otázky o prívetivosti rozhrania, jasnosti pokynov, jednoduchosti používania, spätnej väzbe a učení vlastným tempom.

Faktor 2:

  • Týka sa technického výkonu a prístupnosti.
  • Zahŕňa otázky o kvalite grafiky, kompatibilite s prehliadačmi, užitočných upozorneniach, kvalite tlače a plánoch hodín.

Faktor 3:

Obsahuje iba jednu otázku týkajúcu sa posudzovania pokroku žiakov učiteľmi.

Faktor 4:

Obsahuje tiež iba jednu otázku, zameranú na jednoduchosť nastavenia parametrov.

Dominantný faktor Otázky v zhluku
Faktor 1 [[‘A1’, ‘Webová stránka funguje bez technických problémov (1 – 5)’], [‘A2’, ‘Poskytnuté pokyny sú jasné (1 – 5)’], [‘A3’, ‘Rozhranie je používateľsky prívetivé (1 – 5)’], [‘A7’, ‘Aktivity možno jednoducho zdieľať s inými používateľmi (1 – 5)’], [‘A9’, ‘Používatelia aplikácie spúšťajú bez problémov (1 – 5)’], [‘A10’, ‘Skenovanie funguje podľa potreby (1 – 5)’], [‘A12’, ‘Uplatňuje sa univerzálny dizajn vzdelávania (1 – 5)’], [‘B1’, ‘Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti (1 – 5)’], [‘B2’, “Spätná väzba pomáha učiteľom sledovať pokrok žiaka (1 – 5)”], [‘B3’, ‘Aplikácie možno začleniť do učebných osnov (1 – 5)’], [‘C5’, ‘Používatelia sa aktívne zapájajú do procesu učenia (1 – 5)’], [‘C7’, ‘Sebahodnotenie žiakov motivuje (1 – 5)’], [‘C8’, ‘Žiaci môžu pracovať vlastným tempom (1 – 5)’], [‘C9’, ‘Poskytnuté informácie súvisia s cieľmi učenia (1 – 5)’], [‘C10’, “Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa (1 – 5)”]]
Faktor 2 [[‘A4’, ‘Kvalita grafiky (1 – 5)’], [‘A5’, ‘Aplikácie fungujú aspoň v troch prehliadačoch (1 – 5)’], [‘A6’, ‘Vyskakovacie a upozorňujúce správy sú užitočné (1 – 5)’], [‘A11’, ‘Výtlačky majú dobrú kvalitu (1 – 5)’], [‘B4’, ‘Vzorové plány hodín sú užitočné (1 – 5)’], [‘C6’, ‘Poznámky k metodikám sú užitočné (1 – 5)’], [‘C12’, ‘Aktivity možno využiť na skupinovú aj individuálnu prácu (1 – 5)’]]
Faktor 3 [[‘C11′, “Učitelia môžu ľahko posúdiť pokrok žiakov (1 – 5)”]]
Faktor 4 [[‘A8’, ‘Nastavenie parametrov je jednoduché (1 – 5)’]]

 

Čo to znamená?

Faktor 1 naznačuje silný vzťah medzi použiteľnosťou, účinnosťou učenia a zapojením používateľov.

Faktor 2 naznačuje, že kvalita grafiky, kompatibilita s prehliadačmi a štruktúrované plány hodín spolu súvisia.

Faktory 3 a 4 sú odľahlé, čo naznačuje samostatné otázky, ktoré sa silno nezoskupujú s ostatnými.

Výsledky

Hodnotenie vzdelávacej technologickej platformy prinieslo konzistentne pozitívne výsledky vo všetkých 24 meraných oblastiach (N=79). Opisná štatistika ukázala vysoké priemerné skóre v rozsahu od 4,67 do 4,89 na 5-bodovej Likertovej škále, čo naznačuje vysokú spokojnosť používateľov s technickými aj pedagogickými stránkami platformy.

Opisná analýza

Najvyššie hodnotené vlastnosti boli „Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti“ (M=4,89, SD=0,32), „Žiaci môžu pracovať vlastným tempom“ (M=4,87, SD=0,43) a „Učitelia/rodičia môžu aktivity ľahko prispôsobiť potrebám používateľa“ (M=4,87, SD=0,37), čo ukazuje osobitné ocenenie pedagogickej flexibility a relevantnosti platformy. Dobre boli prijaté aj technické aspekty – „Skenovanie funguje podľa potreby“ (M=4,84, SD=0,46) a „Výtlačky majú dobrú kvalitu“ (M=4,78, SD=0,52) získali veľmi pozitívne hodnotenie.

Analýza variability odpovedí priniesla dôležité poznatky o zhode medzi používateľmi. Najsilnejšia zhoda medzi respondentmi (vyjadrená najnižšími smerodajnými odchýlkami) sa sústredila na základné pedagogické vlastnosti: „Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti“ (SD=0,32), „Používatelia sa aktívne zapájajú do procesu učenia“ (SD=0,35) a „Poskytnuté informácie súvisia s cieľmi učenia“ (SD=0,36). Naopak, väčšia variabilita odpovedí (čo naznačuje menšiu zhodu) sa pozorovala pri technických vlastnostiach, ako sú „Webová stránka funguje bez technických problémov“ (SD=0,75), „Aktivity možno jednoducho zdieľať s inými používateľmi“ (SD=0,67) a „Aktivity možno využiť na skupinovú aj individuálnu prácu“ (SD=0,63).

Korelačná analýza

Korelačná analýza identifikovala 11 silných vzťahov (r > 0,70) medzi rôznymi oblasťami hodnotenia. Najsilnejšie korelácie sa pozorovali medzi „Rozhranie je používateľsky prívetivé“ a „Vyskakovacie a upozorňujúce správy sú užitočné“ (r=0,78), „Používatelia aplikácie spúšťajú bez problémov“ a „Výtlačky majú dobrú kvalitu“ (r=0,76) a „Aktivity možno jednoducho zdieľať s inými používateľmi“ a „Používatelia aplikácie spúšťajú bez problémov“ (r=0,75). Tieto korelácie naznačujú, že vnímanie kvality rozhrania úzko súvisí s užitočnosťou spätnej väzby systému a že jednoduchosť ovládania silno koreluje s kvalitou výstupov.

Pozoruhodné korelácie medzi kategóriami zahŕňali „Kvalita grafiky“ so „Zručnosti, ktoré sa majú získať, sú dôležité životné zručnosti“ (r=0,71) a „Webová stránka funguje bez technických problémov“ s „Používatelia sa aktívne zapájajú do procesu učenia“ (r=0,71), čo naznačuje, že technické aspekty výkonu pozitívne ovplyvňujú vnímanie pedagogickej hodnoty.

Faktorová analýza

Exploratórna faktorová analýza odhalila štyri samostatné zhluky charakteristík platformy:

Faktor 1 (používateľská skúsenosť a zapojenie do učenia): Najväčší zhluk, ktorý zahŕňa 15 položiek vrátane použiteľnosti rozhrania, technickej spoľahlivosti, relevantnosti učenia a autonómie používateľa. Tento dominantný faktor poukazuje na silné prepojenie technickej funkčnosti a pedagogickej účinnosti, pričom jednoduché ovládanie priamo podporuje zapojenie do učenia.

Faktor 2 (technický výkon a prístupnosť): Skladá sa zo 7 položiek týkajúcich sa vizuálnej kvality, kompatibility s rôznymi prehliadačmi, spätnej väzby systému a výučbových zdrojov. Tento zhluk naznačuje, že kvalita výstupov a štruktúrované usmernenie tvoria súdržnú súčasť skúsenosti s platformou.

Faktor 3 (možnosť hodnotenia): Tento faktor obsahuje jedinú položku „Učitelia môžu jednoducho posúdiť pokrok žiakov“ a ukázal sa ako samostatná oblasť oddelená od ostatných pedagogických funkcií, čo zdôrazňuje jedinečný význam funkcie hodnotenia.

Faktor 4 (nastavenie parametrov): Aj tento faktor obsahuje jedinú položku, „Nastavenie parametrov je jednoduchý proces“, a jeho izolovanosť naznačuje, že nastavenie parametrov predstavuje špecifickú súčasť skúsenosti s platformou, ktorá si zaslúži osobitnú pozornosť.

Stručne povedané, výsledky ukazujú vysokú celkovú spokojnosť so vzdelávacou technologickou platformou, pričom obzvlášť silná zhoda panuje v otázke jej pedagogickej hodnoty. Faktorová analýza ukazuje, že hoci používateľská skúsenosť a zapojenie do učenia tvoria súdržné jadro celkovej skúsenosti, konkrétne funkcie, ako je hodnotenie a nastavenie parametrov, predstavujú samostatné oblasti, ktoré si pri vývoji a zavádzaní platformy zaslúžia osobitnú pozornosť.

Stiahnuť výskumný súborGoogle DrivePo kliknutí môže Google uložiť súbory cookieZásady používania cookies


Kliknite sem a zobrazte články v gréčtine
Kliknite sem a zobrazte články v gréčtine
Kliknite sem a zobrazte články v portugalčine
Kliknite sem a zobrazte články v španielčine
Kliknite sem a zobrazte články v angličtine

0 Comments

Pridať komentár

Vaša e-mailová adresa nebude zverejnená. Povinné polia sú označené *


Pomôžte nám šíriť informácie o tomto projekte a zdieľajte tento príspevok na sociálnych sieťach pomocou jedného z odkazov nižšie!