Hodnocení výsledků projektu „Using Euros“

Komplexní analýza

Abstrakt

Tato studie hodnotí účinnost a použitelnost výstupů projektu „Using Euros“ na základě komplexní analýzy zpětné vazby uživatelů. Celkem 79 účastníků posuzovalo platformu v 24 oblastech zahrnujících technickou funkčnost, pedagogickou hodnotu a zkušenost s učením. Respondenti hodnotili na 5bodové Likertově škále mimo jiné použitelnost rozhraní, technickou spolehlivost, pedagogické začlenění a výsledky učení. Statistická analýza odhalila silně korelované prvky a odlišné shluky faktorů, které charakterizují uživatelskou zkušenost. Výsledky ukazují mimořádně pozitivní přijetí (průměrné skóre >4,6 ve všech oblastech), přičemž největší shoda panovala v rozvoji životních dovedností, zapojení žáků a souladu s cíli učení. Technický výkon a prvky uživatelské zkušenosti tvořily nejpevnější shluk faktorů, zatímco nastavení parametrů a hodnocení pokroku se ukázaly jako samostatné otázky. Výzkum přináší důležité poznatky pro vývojáře vzdělávacích technologií i pro praxi, které usilují o zavedení účinných digitálních vzdělávacích platforem vyvažujících technickou spolehlivost s pedagogickou hodnotou.

POPISNÁ STATISTIKA

  počet průměr std min 25% 50% 75% max Otázka
0 79.0 4.670886075949370 0.7462988847080340 1.0 5.0 5.0 5.0 5.0 Web funguje bez technických problémů (1-5)
1 79.0 4.7594936708860800 0.5596516744853900 3.0 5.0 5.0 5.0 5.0 Poskytnuté pokyny jsou srozumitelné (1-5)
2 79.0 4.746835443037980 0.5654214318990420 3.0 5.0 5.0 5.0 5.0 Rozhraní je uživatelsky přívětivé (1-5)
3 79.0 4.772151898734180 0.505086108135003 3.0 5.0 5.0 5.0 5.0 Kvalita grafiky (1-5)
4 76.0 4.776315789473680 0.505929750341588 3.0 5.0 5.0 5.0 5.0 Aplikace fungují alespoň ve třech prohlížečích (1-5)
5 76.0 4.723684210526320 0.531631055288692 3.0 5.0 5.0 5.0 5.0 Vyskakovací a varovné zprávy jsou užitečné (1-5)
6 78.0 4.743589743589740 0.6729639313369270 2.0 5.0 5.0 5.0 5.0 Aktivity lze snadno sdílet mezi uživateli (1-5)
7 79.0 4.658227848101270 0.5748149300687360 3.0 4.0 5.0 5.0 5.0 Nastavení parametrů je snadné (1-5)
8 79.0 4.69620253164557 0.6066813969699470 3.0 5.0 5.0 5.0 5.0 Uživatelé aplikace snadno spouštějí (1-5)
9 79.0 4.8354430379746800 0.46493395579608000 3.0 5.0 5.0 5.0 5.0 Skenování funguje, jak má (1-5)
10 79.0 4.784810126582280 0.5230797869215380 3.0 5.0 5.0 5.0 5.0 Výtisky mají dobrou kvalitu (1-5)
11 79.0 4.7974683544303800 0.490414446273684 3.0 5.0 5.0 5.0 5.0 Uplatňuje se univerzální design učení (1-5)
12 79.0 4.886075949367090 0.31974917141296800 4.0 5.0 5.0 5.0 5.0 Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5)
13 79.0 4.848101265822790 0.4554121152779830 3.0 5.0 5.0 5.0 5.0 Zpětná vazba pomáhá učitelům sledovat pokrok žáka (1-5)
14 79.0 4.822784810126580 0.4163176077654420 3.0 5.0 5.0 5.0 5.0 Aplikace lze začlenit do kurikula (1-5)
15 79.0 4.6835443037974700 0.5671409131068760 3.0 4.0 5.0 5.0 5.0 Ukázkové přípravy hodin jsou užitečné (1-5)
16 79.0 4.860759493670890 0.34840947082971600 4.0 5.0 5.0 5.0 5.0 Uživatelé jsou aktivně zapojeni do procesu učení (1-5)
17 79.0 4.7594936708860800 0.45896175678393700 3.0 5.0 5.0 5.0 5.0 Poznámky k metodikám jsou užitečné (1-5)
18 79.0 4.772151898734180 0.5298613047505830 3.0 5.0 5.0 5.0 5.0 Sebehodnocení žáky motivuje (1-5)
19 79.0 4.8734177215189900 0.4346259401911600 3.0 5.0 5.0 5.0 5.0 Žáci mohou pracovat vlastním tempem (1-5)
20 78.0 4.846153846153850 0.36313651960128100 4.0 5.0 5.0 5.0 5.0 Poskytnuté informace odpovídají cílům učení (1-5)
21 79.0 4.8734177215189900 0.3709685385649280 3.0 5.0 5.0 5.0 5.0 Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele (1-5)
22 79.0 4.772151898734180 0.4790312630611270 3.0 5.0 5.0 5.0 5.0 Učitelé mohou snadno hodnotit pokrok žáků (1-5)
23 79.0 4.69620253164557 0.627457841667814 3.0 5.0 5.0 5.0 5.0 Aktivity lze využít pro skupinovou i individuální práci (1-5)

Otázky s velkým rozptylem odpovědí

Kód Otázka std
A1 Web funguje bez technických problémů (1-5) 0.7462988847080340
A7 Aktivity lze snadno sdílet mezi uživateli (1-5) 0.6729639313369270
C12 Aktivity lze využít pro skupinovou i individuální práci (1-5) 0.627457841667814
A9 Uživatelé aplikace snadno spouštějí (1-5) 0.6066813969699470
A8 Nastavení parametrů je snadné (1-5) 0.5748149300687360

Otázky s malým rozptylem odpovědí

Kód Otázka std
B1 Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5) 0.31974917141296800
C5 Uživatelé jsou aktivně zapojeni do procesu učení (1-5) 0.34840947082971600
C9 Poskytnuté informace odpovídají cílům učení (1-5) 0.36313651960128100
C10 Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele (1-5) 0.3709685385649280
B3 Aplikace lze začlenit do kurikula (1-5) 0.4163176077654420

Jak chápat rozptyl odpovědí (směrodatná odchylka)

Směrodatná odchylka (std) v druhém grafu ukazuje, nakolik se odpovědi na jednotlivé otázky odchylují od průměru. Co nám říká:

Nízká směrodatná odchylka (blízko 0) → vysoká shoda

Pokud je směrodatná odchylka blízko 0, většina respondentů dala velmi podobné hodnocení (např. všichni ohodnotili otázku známkou 5). To naznačuje silnou shodu v hodnocení.

Příklad: Pokud je u otázky o „srozumitelnosti pokynů“ std = 0, znamená to, že se všichni shodli na určitém skóre (všichni dali 5 nebo všichni 4 atd.).

Vysoká směrodatná odchylka (nad 0,5) → rozmanitější názory

Vyšší směrodatná odchylka znamená, že se odpovědi respondentů výrazně lišily. To naznačuje smíšené názory – někteří hodnotili vysoko, jiní nízko.

Příklad: Pokud je u otázky o „přívětivosti rozhraní“ std = 0,8, znamená to, že někteří lidé považovali rozhraní za velmi přívětivé (5), zatímco jiní je ohodnotili hůře (3–4), což ukazuje na nesoulad.

Proč je rozptyl důležitý?

  • Nízký rozptyl → ukazuje na silnou shodu (daný prvek je buď opravdu dobrý, nebo opravdu špatný).
  • Vysoký rozptyl → upozorňuje na oblasti ke zlepšení (někteří uživatelé jsou spokojeni, jiní ne, což naznačuje problémy s použitelností).

Otázky s vysokou směrodatnou odchylkou by si mohly zasloužit další zkoumání, abychom pochopili, proč se názory různí.

Otázky podle kategorií

Kategorie Otázka
A1 Web funguje bez technických problémů (1-5)
A2 Poskytnuté pokyny jsou srozumitelné (1-5)
A3 Rozhraní je uživatelsky přívětivé (1-5)
A4 Kvalita grafiky (1-5)
A5 Aplikace fungují alespoň ve třech prohlížečích (1-5)
A6 Vyskakovací a varovné zprávy jsou užitečné (1-5)
A7 Aktivity lze snadno sdílet mezi uživateli (1-5)
A8 Nastavení parametrů je snadné (1-5)
A9 Uživatelé aplikace snadno spouštějí (1-5)
A10 Skenování funguje, jak má (1-5)
A11 Výtisky mají dobrou kvalitu (1-5)
A12 Uplatňuje se univerzální design učení (1-5)
B1 Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5)
B2 Zpětná vazba pomáhá učitelům sledovat pokrok žáka (1-5)
B3 Aplikace lze začlenit do kurikula (1-5)
B4 Ukázkové přípravy hodin jsou užitečné (1-5)
C5 Uživatelé jsou aktivně zapojeni do procesu učení (1-5)
C6 Poznámky k metodikám jsou užitečné (1-5)
C7 Sebehodnocení žáky motivuje (1-5)
C8 Žáci mohou pracovat vlastním tempem (1-5)
C9 Poskytnuté informace odpovídají cílům učení (1-5)
C10 Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele (1-5)
C11 Učitelé mohou snadno hodnotit pokrok žáků (1-5)
C12 Aktivity lze využít pro skupinovou i individuální práci (1-5)

KORELACE MEZI OTÁZKAMI

Nejsilnější korelace mezi otázkami (korelace nad 0,7), které ukazují, že odpovědi na tyto otázky spolu úzce souvisejí.

Kód 1 Otázka 1 Text otázky 1 Kód 2 Otázka 2 Text otázky 2 Korelace
A1 0 Web funguje bez technických problémů (1-5) C5 16 Uživatelé jsou aktivně zapojeni do procesu učení (1-5) 0.7090125015101340
A2 1 Poskytnuté pokyny jsou srozumitelné (1-5) A9 8 Uživatelé aplikace snadno spouštějí (1-5) 0.7260350618403750
A3 2 Rozhraní je uživatelsky přívětivé (1-5) A6 5 Vyskakovací a varovné zprávy jsou užitečné (1-5) 0.781614675979465
A4 3 Kvalita grafiky (1-5) A11 10 Výtisky mají dobrou kvalitu (1-5) 0.734028376223487
A4 3 Kvalita grafiky (1-5) B1 12 Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5) 0.7104325775692570
A6 5 Vyskakovací a varovné zprávy jsou užitečné (1-5) B3 14 Aplikace lze začlenit do kurikula (1-5) 0.7192552903761100
A7 6 Aktivity lze snadno sdílet mezi uživateli (1-5) A9 8 Uživatelé aplikace snadno spouštějí (1-5) 0.7548860451594470
A9 8 Uživatelé aplikace snadno spouštějí (1-5) A11 10 Výtisky mají dobrou kvalitu (1-5) 0.7609438667598360
A10 9 Skenování funguje, jak má (1-5) A11 10 Výtisky mají dobrou kvalitu (1-5) 0.7487071134303000
A10 9 Skenování funguje, jak má (1-5) A12 11 Uplatňuje se univerzální design učení (1-5) 0.7516016138604400
C6 17 Poznámky k metodikám jsou užitečné (1-5) C9 20 Poskytnuté informace odpovídají cílům učení (1-5) 0.7040041483986320

SHLUKOVÁ ANALÝZA

Shluky otázek určené na základě explorační faktorové analýzy (EFA):

Shluky & jejich seskupené otázky:

Faktor 1 (největší shluk):

  • Zaměřuje se na použitelnost, uživatelskou zkušenost a zapojení do učení.
  • Zahrnuje otázky o přívětivosti rozhraní, srozumitelnosti pokynů, snadnosti používání, zpětné vazbě a učení vlastním tempem.

Faktor 2:

  • Týká se technického výkonu & přístupnosti.
  • Zahrnuje otázky o kvalitě grafiky, kompatibilitě s prohlížeči, užitečných upozorněních, kvalitě tisku a přípravách hodin.

Faktor 3:

Obsahuje pouze jednu otázku týkající se hodnocení pokroku žáků učiteli.

Faktor 4:

Rovněž obsahuje pouze jednu otázku, zaměřenou na snadnost nastavení parametrů.

Dominantní faktor Otázky ve shluku
Faktor 1 [[‘A1’, ‘Web funguje bez technických problémů (1-5)’], [‘A2’, ‘Poskytnuté pokyny jsou srozumitelné (1-5)’], [‘A3’, ‘Rozhraní je uživatelsky přívětivé (1-5)’], [‘A7’, ‘Aktivity lze snadno sdílet mezi uživateli (1-5)’], [‘A9’, ‘Uživatelé aplikace snadno spouštějí (1-5)’], [‘A10’, ‘Skenování funguje, jak má (1-5)’], [‘A12’, ‘Uplatňuje se univerzální design učení (1-5)’], [‘B1’, ‘Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5)’], [‘B2’, “Zpětná vazba pomáhá učitelům sledovat pokrok žáka (1-5)”], [‘B3’, ‘Aplikace lze začlenit do kurikula (1-5)’], [‘C5’, ‘Uživatelé jsou aktivně zapojeni do procesu učení (1-5)’], [‘C7’, ‘Sebehodnocení žáky motivuje (1-5)’], [‘C8’, ‘Žáci mohou pracovat vlastním tempem (1-5)’], [‘C9’, ‘Poskytnuté informace odpovídají cílům učení (1-5)’], [‘C10’, “Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele (1-5)”]]
Faktor 2 [[‘A4’, ‘Kvalita grafiky (1-5)’], [‘A5’, ‘Aplikace fungují alespoň ve třech prohlížečích (1-5)’], [‘A6’, ‘Vyskakovací a varovné zprávy jsou užitečné (1-5)’], [‘A11’, ‘Výtisky mají dobrou kvalitu (1-5)’], [‘B4’, ‘Ukázkové přípravy hodin jsou užitečné (1-5)’], [‘C6’, ‘Poznámky k metodikám jsou užitečné (1-5)’], [‘C12’, ‘Aktivity lze využít pro skupinovou i individuální práci (1-5)’]]
Faktor 3 [[‘C11′, “Učitelé mohou snadno hodnotit pokrok žáků (1-5)”]]
Faktor 4 [[‘A8’, ‘Nastavení parametrů je snadné (1-5)’]]

 

Co to znamená?

Faktor 1 naznačuje silný vztah mezi použitelností, účinností učení a zapojením uživatelů.

Faktor 2 ukazuje, že kvalita grafiky, kompatibilita s prohlížeči a strukturované přípravy hodin spolu souvisejí.

Faktory 3 & 4 jsou odlehlé, což značí samostatné otázky, které se silněji neseskupují s ostatními.

Výsledky

Hodnocení vzdělávací technologické platformy přineslo důsledně pozitivní výsledky ve všech 24 měřených oblastech (N=79). Popisná statistika odhalila vysoké průměrné hodnoty v rozmezí od 4,67 do 4,89 na 5bodové Likertově škále, což ukazuje na silnou spokojenost uživatelů jak s technickými, tak s pedagogickými stránkami platformy.

Popisná analýza

Nejlépe hodnocenými prvky byly „Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti“ (M=4,89, SD=0,32), „Žáci mohou pracovat vlastním tempem“ (M=4,87, SD=0,43) a „Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele“ (M=4,87, SD=0,37), což dokládá zvláštní ocenění pedagogické flexibility a relevance platformy. Dobře byly přijaty i technické aspekty: „Skenování funguje, jak má“ (M=4,84, SD=0,46) a „Výtisky mají dobrou kvalitu“ (M=4,78, SD=0,52) získaly výrazně pozitivní hodnocení.

Analýza rozptylu odpovědí přinesla důležité poznatky o shodě mezi uživateli. Nejsilnější shoda mezi respondenty (vyjádřená nejnižší směrodatnou odchylkou) se týkala základních pedagogických prvků: „Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti“ (SD=0,32), „Uživatelé jsou aktivně zapojeni do procesu učení“ (SD=0,35) a „Poskytnuté informace odpovídají cílům učení“ (SD=0,36). Naopak větší rozptyl odpovědí (tedy menší shoda) byl pozorován u technických prvků, jako jsou „Web funguje bez technických problémů“ (SD=0,75), „Aktivity lze snadno sdílet mezi uživateli“ (SD=0,67) a „Aktivity lze využít pro skupinovou i individuální práci“ (SD=0,63).

Korelační analýza

Korelační analýza odhalila 11 silných vztahů (r > 0,70) mezi různými oblastmi hodnocení. Nejsilnější korelace byly zjištěny mezi položkami „Rozhraní je uživatelsky přívětivé“ a „Vyskakovací a varovné zprávy jsou užitečné“ (r=0,78), „Uživatelé aplikace snadno spouštějí“ a „Výtisky mají dobrou kvalitu“ (r=0,76) a „Aktivity lze snadno sdílet mezi uživateli“ a „Uživatelé aplikace snadno spouštějí“ (r=0,75). Tyto korelace naznačují, že vnímání kvality rozhraní úzce souvisí s užitečností zpětné vazby systému a že snadné ovládání silně souvisí s kvalitou výstupů.

Za pozornost stojí i korelace mezi kategoriemi, například „Kvalita grafiky“ s „Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti“ (r=0,71) a „Web funguje bez technických problémů“ s „Uživatelé jsou aktivně zapojeni do procesu učení“ (r=0,71), což naznačuje, že technický výkon pozitivně ovlivňuje vnímání pedagogické hodnoty.

Faktorová analýza

Explorační faktorová analýza odhalila čtyři odlišné shluky vlastností platformy:

Faktor 1 (uživatelský zážitek a zapojení do učení): Největší shluk, který zahrnuje 15 položek, mimo jiné použitelnost rozhraní, technickou spolehlivost, relevanci pro učení a autonomii uživatele. Tento dominantní faktor naznačuje silné propojení technické funkčnosti a pedagogické účinnosti, kdy snadné ovládání přímo podporuje zapojení do učení.

Faktor 2 (technický výkon a přístupnost): Zahrnuje 7 položek týkajících se vizuální kvality, kompatibility mezi prohlížeči, zpětné vazby systému a výukových materiálů. Tento shluk naznačuje, že kvalita výstupů a strukturované vedení tvoří ucelenou součást zkušenosti s platformou.

Faktor 3 (možnost hodnocení): Tento faktor obsahuje jedinou položku „Učitelé mohou snadno hodnotit pokrok žáků“ a vyčlenil se jako samostatný aspekt, oddělený od ostatních pedagogických funkcí, což zdůrazňuje mimořádný význam funkce hodnocení.

Faktor 4 (nastavení parametrů): Také tento faktor obsahuje jedinou položku, „Nastavení parametrů je snadné“, a jeho osamocení naznačuje, že nastavení parametrů představuje specifickou součást zkušenosti s platformou, která si zaslouží zvláštní pozornost.

Výsledky celkově ukazují vysokou spokojenost se vzdělávací technologickou platformou, zejména velmi silnou shodu v názoru na její pedagogickou hodnotu. Faktorová analýza odhaluje, že zatímco uživatelský zážitek a zapojení do učení tvoří souvislé jádro celé zkušenosti, konkrétní funkce, jako je hodnocení a nastavení parametrů, představují samostatné aspekty, které si při vývoji a zavádění platformy zaslouží zvláštní pozornost.

Stáhnout výzkumný souborGoogle DrivePo kliknutí může Google uložit soubory cookieZásady používání cookies


Kliknutím sem zobrazíte články v řečtině
Kliknutím sem zobrazíte články v řečtině
Kliknutím sem zobrazíte články v portugalštině
Kliknutím sem zobrazíte články ve španělštině
Kliknutím sem zobrazíte články v angličtině

0 Comments

Přidat komentář

Vaše e-mailová adresa nebude zveřejněna. Povinná pole jsou označena *


Pomozte nám šířit informace o tomto projektu a sdílejte tento příspěvek na sociálních sítích pomocí některého z odkazů níže!