Hodnocení výsledků projektu „Using Euros“
Komplexní analýza
Abstrakt
Tato studie hodnotí účinnost a použitelnost výstupů projektu „Using Euros“ na základě komplexní analýzy zpětné vazby uživatelů. Celkem 79 účastníků posuzovalo platformu v 24 oblastech zahrnujících technickou funkčnost, pedagogickou hodnotu a zkušenost s učením. Respondenti hodnotili na 5bodové Likertově škále mimo jiné použitelnost rozhraní, technickou spolehlivost, pedagogické začlenění a výsledky učení. Statistická analýza odhalila silně korelované prvky a odlišné shluky faktorů, které charakterizují uživatelskou zkušenost. Výsledky ukazují mimořádně pozitivní přijetí (průměrné skóre >4,6 ve všech oblastech), přičemž největší shoda panovala v rozvoji životních dovedností, zapojení žáků a souladu s cíli učení. Technický výkon a prvky uživatelské zkušenosti tvořily nejpevnější shluk faktorů, zatímco nastavení parametrů a hodnocení pokroku se ukázaly jako samostatné otázky. Výzkum přináší důležité poznatky pro vývojáře vzdělávacích technologií i pro praxi, které usilují o zavedení účinných digitálních vzdělávacích platforem vyvažujících technickou spolehlivost s pedagogickou hodnotou.
POPISNÁ STATISTIKA
| počet | průměr | std | min | 25% | 50% | 75% | max | Otázka | |
|---|---|---|---|---|---|---|---|---|---|
| 0 | 79.0 | 4.670886075949370 | 0.7462988847080340 | 1.0 | 5.0 | 5.0 | 5.0 | 5.0 | Web funguje bez technických problémů (1-5) |
| 1 | 79.0 | 4.7594936708860800 | 0.5596516744853900 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Poskytnuté pokyny jsou srozumitelné (1-5) |
| 2 | 79.0 | 4.746835443037980 | 0.5654214318990420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Rozhraní je uživatelsky přívětivé (1-5) |
| 3 | 79.0 | 4.772151898734180 | 0.505086108135003 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Kvalita grafiky (1-5) |
| 4 | 76.0 | 4.776315789473680 | 0.505929750341588 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aplikace fungují alespoň ve třech prohlížečích (1-5) |
| 5 | 76.0 | 4.723684210526320 | 0.531631055288692 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Vyskakovací a varovné zprávy jsou užitečné (1-5) |
| 6 | 78.0 | 4.743589743589740 | 0.6729639313369270 | 2.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aktivity lze snadno sdílet mezi uživateli (1-5) |
| 7 | 79.0 | 4.658227848101270 | 0.5748149300687360 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Nastavení parametrů je snadné (1-5) |
| 8 | 79.0 | 4.69620253164557 | 0.6066813969699470 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Uživatelé aplikace snadno spouštějí (1-5) |
| 9 | 79.0 | 4.8354430379746800 | 0.46493395579608000 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Skenování funguje, jak má (1-5) |
| 10 | 79.0 | 4.784810126582280 | 0.5230797869215380 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Výtisky mají dobrou kvalitu (1-5) |
| 11 | 79.0 | 4.7974683544303800 | 0.490414446273684 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Uplatňuje se univerzální design učení (1-5) |
| 12 | 79.0 | 4.886075949367090 | 0.31974917141296800 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5) |
| 13 | 79.0 | 4.848101265822790 | 0.4554121152779830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Zpětná vazba pomáhá učitelům sledovat pokrok žáka (1-5) |
| 14 | 79.0 | 4.822784810126580 | 0.4163176077654420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aplikace lze začlenit do kurikula (1-5) |
| 15 | 79.0 | 4.6835443037974700 | 0.5671409131068760 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Ukázkové přípravy hodin jsou užitečné (1-5) |
| 16 | 79.0 | 4.860759493670890 | 0.34840947082971600 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Uživatelé jsou aktivně zapojeni do procesu učení (1-5) |
| 17 | 79.0 | 4.7594936708860800 | 0.45896175678393700 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Poznámky k metodikám jsou užitečné (1-5) |
| 18 | 79.0 | 4.772151898734180 | 0.5298613047505830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Sebehodnocení žáky motivuje (1-5) |
| 19 | 79.0 | 4.8734177215189900 | 0.4346259401911600 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Žáci mohou pracovat vlastním tempem (1-5) |
| 20 | 78.0 | 4.846153846153850 | 0.36313651960128100 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Poskytnuté informace odpovídají cílům učení (1-5) |
| 21 | 79.0 | 4.8734177215189900 | 0.3709685385649280 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele (1-5) |
| 22 | 79.0 | 4.772151898734180 | 0.4790312630611270 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Učitelé mohou snadno hodnotit pokrok žáků (1-5) |
| 23 | 79.0 | 4.69620253164557 | 0.627457841667814 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aktivity lze využít pro skupinovou i individuální práci (1-5) |
Otázky s velkým rozptylem odpovědí
| Kód | Otázka | std |
|---|---|---|
| A1 | Web funguje bez technických problémů (1-5) | 0.7462988847080340 |
| A7 | Aktivity lze snadno sdílet mezi uživateli (1-5) | 0.6729639313369270 |
| C12 | Aktivity lze využít pro skupinovou i individuální práci (1-5) | 0.627457841667814 |
| A9 | Uživatelé aplikace snadno spouštějí (1-5) | 0.6066813969699470 |
| A8 | Nastavení parametrů je snadné (1-5) | 0.5748149300687360 |
Otázky s malým rozptylem odpovědí
| Kód | Otázka | std |
|---|---|---|
| B1 | Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5) | 0.31974917141296800 |
| C5 | Uživatelé jsou aktivně zapojeni do procesu učení (1-5) | 0.34840947082971600 |
| C9 | Poskytnuté informace odpovídají cílům učení (1-5) | 0.36313651960128100 |
| C10 | Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele (1-5) | 0.3709685385649280 |
| B3 | Aplikace lze začlenit do kurikula (1-5) | 0.4163176077654420 |
Jak chápat rozptyl odpovědí (směrodatná odchylka)
Směrodatná odchylka (std) v druhém grafu ukazuje, nakolik se odpovědi na jednotlivé otázky odchylují od průměru. Co nám říká:
Nízká směrodatná odchylka (blízko 0) → vysoká shoda
Pokud je směrodatná odchylka blízko 0, většina respondentů dala velmi podobné hodnocení (např. všichni ohodnotili otázku známkou 5). To naznačuje silnou shodu v hodnocení.
Příklad: Pokud je u otázky o „srozumitelnosti pokynů“ std = 0, znamená to, že se všichni shodli na určitém skóre (všichni dali 5 nebo všichni 4 atd.).
Vysoká směrodatná odchylka (nad 0,5) → rozmanitější názory
Vyšší směrodatná odchylka znamená, že se odpovědi respondentů výrazně lišily. To naznačuje smíšené názory – někteří hodnotili vysoko, jiní nízko.
Příklad: Pokud je u otázky o „přívětivosti rozhraní“ std = 0,8, znamená to, že někteří lidé považovali rozhraní za velmi přívětivé (5), zatímco jiní je ohodnotili hůře (3–4), což ukazuje na nesoulad.
Proč je rozptyl důležitý?
- Nízký rozptyl → ukazuje na silnou shodu (daný prvek je buď opravdu dobrý, nebo opravdu špatný).
- Vysoký rozptyl → upozorňuje na oblasti ke zlepšení (někteří uživatelé jsou spokojeni, jiní ne, což naznačuje problémy s použitelností).
Otázky s vysokou směrodatnou odchylkou by si mohly zasloužit další zkoumání, abychom pochopili, proč se názory různí.
Otázky podle kategorií
| Kategorie | Otázka |
|---|---|
| A1 | Web funguje bez technických problémů (1-5) |
| A2 | Poskytnuté pokyny jsou srozumitelné (1-5) |
| A3 | Rozhraní je uživatelsky přívětivé (1-5) |
| A4 | Kvalita grafiky (1-5) |
| A5 | Aplikace fungují alespoň ve třech prohlížečích (1-5) |
| A6 | Vyskakovací a varovné zprávy jsou užitečné (1-5) |
| A7 | Aktivity lze snadno sdílet mezi uživateli (1-5) |
| A8 | Nastavení parametrů je snadné (1-5) |
| A9 | Uživatelé aplikace snadno spouštějí (1-5) |
| A10 | Skenování funguje, jak má (1-5) |
| A11 | Výtisky mají dobrou kvalitu (1-5) |
| A12 | Uplatňuje se univerzální design učení (1-5) |
| B1 | Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5) |
| B2 | Zpětná vazba pomáhá učitelům sledovat pokrok žáka (1-5) |
| B3 | Aplikace lze začlenit do kurikula (1-5) |
| B4 | Ukázkové přípravy hodin jsou užitečné (1-5) |
| C5 | Uživatelé jsou aktivně zapojeni do procesu učení (1-5) |
| C6 | Poznámky k metodikám jsou užitečné (1-5) |
| C7 | Sebehodnocení žáky motivuje (1-5) |
| C8 | Žáci mohou pracovat vlastním tempem (1-5) |
| C9 | Poskytnuté informace odpovídají cílům učení (1-5) |
| C10 | Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele (1-5) |
| C11 | Učitelé mohou snadno hodnotit pokrok žáků (1-5) |
| C12 | Aktivity lze využít pro skupinovou i individuální práci (1-5) |
KORELACE MEZI OTÁZKAMI
Nejsilnější korelace mezi otázkami (korelace nad 0,7), které ukazují, že odpovědi na tyto otázky spolu úzce souvisejí.
| Kód 1 | Otázka 1 | Text otázky 1 | Kód 2 | Otázka 2 | Text otázky 2 | Korelace |
|---|---|---|---|---|---|---|
| A1 | 0 | Web funguje bez technických problémů (1-5) | C5 | 16 | Uživatelé jsou aktivně zapojeni do procesu učení (1-5) | 0.7090125015101340 |
| A2 | 1 | Poskytnuté pokyny jsou srozumitelné (1-5) | A9 | 8 | Uživatelé aplikace snadno spouštějí (1-5) | 0.7260350618403750 |
| A3 | 2 | Rozhraní je uživatelsky přívětivé (1-5) | A6 | 5 | Vyskakovací a varovné zprávy jsou užitečné (1-5) | 0.781614675979465 |
| A4 | 3 | Kvalita grafiky (1-5) | A11 | 10 | Výtisky mají dobrou kvalitu (1-5) | 0.734028376223487 |
| A4 | 3 | Kvalita grafiky (1-5) | B1 | 12 | Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5) | 0.7104325775692570 |
| A6 | 5 | Vyskakovací a varovné zprávy jsou užitečné (1-5) | B3 | 14 | Aplikace lze začlenit do kurikula (1-5) | 0.7192552903761100 |
| A7 | 6 | Aktivity lze snadno sdílet mezi uživateli (1-5) | A9 | 8 | Uživatelé aplikace snadno spouštějí (1-5) | 0.7548860451594470 |
| A9 | 8 | Uživatelé aplikace snadno spouštějí (1-5) | A11 | 10 | Výtisky mají dobrou kvalitu (1-5) | 0.7609438667598360 |
| A10 | 9 | Skenování funguje, jak má (1-5) | A11 | 10 | Výtisky mají dobrou kvalitu (1-5) | 0.7487071134303000 |
| A10 | 9 | Skenování funguje, jak má (1-5) | A12 | 11 | Uplatňuje se univerzální design učení (1-5) | 0.7516016138604400 |
| C6 | 17 | Poznámky k metodikám jsou užitečné (1-5) | C9 | 20 | Poskytnuté informace odpovídají cílům učení (1-5) | 0.7040041483986320 |
SHLUKOVÁ ANALÝZA
Shluky otázek určené na základě explorační faktorové analýzy (EFA):
Shluky & jejich seskupené otázky:
Faktor 1 (největší shluk):
- Zaměřuje se na použitelnost, uživatelskou zkušenost a zapojení do učení.
- Zahrnuje otázky o přívětivosti rozhraní, srozumitelnosti pokynů, snadnosti používání, zpětné vazbě a učení vlastním tempem.
Faktor 2:
- Týká se technického výkonu & přístupnosti.
- Zahrnuje otázky o kvalitě grafiky, kompatibilitě s prohlížeči, užitečných upozorněních, kvalitě tisku a přípravách hodin.
Faktor 3:
Obsahuje pouze jednu otázku týkající se hodnocení pokroku žáků učiteli.
Faktor 4:
Rovněž obsahuje pouze jednu otázku, zaměřenou na snadnost nastavení parametrů.
| Dominantní faktor | Otázky ve shluku |
|---|---|
| Faktor 1 | [[‘A1’, ‘Web funguje bez technických problémů (1-5)’], [‘A2’, ‘Poskytnuté pokyny jsou srozumitelné (1-5)’], [‘A3’, ‘Rozhraní je uživatelsky přívětivé (1-5)’], [‘A7’, ‘Aktivity lze snadno sdílet mezi uživateli (1-5)’], [‘A9’, ‘Uživatelé aplikace snadno spouštějí (1-5)’], [‘A10’, ‘Skenování funguje, jak má (1-5)’], [‘A12’, ‘Uplatňuje se univerzální design učení (1-5)’], [‘B1’, ‘Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti (1-5)’], [‘B2’, “Zpětná vazba pomáhá učitelům sledovat pokrok žáka (1-5)”], [‘B3’, ‘Aplikace lze začlenit do kurikula (1-5)’], [‘C5’, ‘Uživatelé jsou aktivně zapojeni do procesu učení (1-5)’], [‘C7’, ‘Sebehodnocení žáky motivuje (1-5)’], [‘C8’, ‘Žáci mohou pracovat vlastním tempem (1-5)’], [‘C9’, ‘Poskytnuté informace odpovídají cílům učení (1-5)’], [‘C10’, “Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele (1-5)”]] |
| Faktor 2 | [[‘A4’, ‘Kvalita grafiky (1-5)’], [‘A5’, ‘Aplikace fungují alespoň ve třech prohlížečích (1-5)’], [‘A6’, ‘Vyskakovací a varovné zprávy jsou užitečné (1-5)’], [‘A11’, ‘Výtisky mají dobrou kvalitu (1-5)’], [‘B4’, ‘Ukázkové přípravy hodin jsou užitečné (1-5)’], [‘C6’, ‘Poznámky k metodikám jsou užitečné (1-5)’], [‘C12’, ‘Aktivity lze využít pro skupinovou i individuální práci (1-5)’]] |
| Faktor 3 | [[‘C11′, “Učitelé mohou snadno hodnotit pokrok žáků (1-5)”]] |
| Faktor 4 | [[‘A8’, ‘Nastavení parametrů je snadné (1-5)’]] |
Co to znamená?
Faktor 1 naznačuje silný vztah mezi použitelností, účinností učení a zapojením uživatelů.
Faktor 2 ukazuje, že kvalita grafiky, kompatibilita s prohlížeči a strukturované přípravy hodin spolu souvisejí.
Faktory 3 & 4 jsou odlehlé, což značí samostatné otázky, které se silněji neseskupují s ostatními.
Výsledky
Hodnocení vzdělávací technologické platformy přineslo důsledně pozitivní výsledky ve všech 24 měřených oblastech (N=79). Popisná statistika odhalila vysoké průměrné hodnoty v rozmezí od 4,67 do 4,89 na 5bodové Likertově škále, což ukazuje na silnou spokojenost uživatelů jak s technickými, tak s pedagogickými stránkami platformy.
Popisná analýza
Nejlépe hodnocenými prvky byly „Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti“ (M=4,89, SD=0,32), „Žáci mohou pracovat vlastním tempem“ (M=4,87, SD=0,43) a „Učitelé/rodiče mohou aktivity snadno přizpůsobit potřebám uživatele“ (M=4,87, SD=0,37), což dokládá zvláštní ocenění pedagogické flexibility a relevance platformy. Dobře byly přijaty i technické aspekty: „Skenování funguje, jak má“ (M=4,84, SD=0,46) a „Výtisky mají dobrou kvalitu“ (M=4,78, SD=0,52) získaly výrazně pozitivní hodnocení.
Analýza rozptylu odpovědí přinesla důležité poznatky o shodě mezi uživateli. Nejsilnější shoda mezi respondenty (vyjádřená nejnižší směrodatnou odchylkou) se týkala základních pedagogických prvků: „Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti“ (SD=0,32), „Uživatelé jsou aktivně zapojeni do procesu učení“ (SD=0,35) a „Poskytnuté informace odpovídají cílům učení“ (SD=0,36). Naopak větší rozptyl odpovědí (tedy menší shoda) byl pozorován u technických prvků, jako jsou „Web funguje bez technických problémů“ (SD=0,75), „Aktivity lze snadno sdílet mezi uživateli“ (SD=0,67) a „Aktivity lze využít pro skupinovou i individuální práci“ (SD=0,63).
Korelační analýza
Korelační analýza odhalila 11 silných vztahů (r > 0,70) mezi různými oblastmi hodnocení. Nejsilnější korelace byly zjištěny mezi položkami „Rozhraní je uživatelsky přívětivé“ a „Vyskakovací a varovné zprávy jsou užitečné“ (r=0,78), „Uživatelé aplikace snadno spouštějí“ a „Výtisky mají dobrou kvalitu“ (r=0,76) a „Aktivity lze snadno sdílet mezi uživateli“ a „Uživatelé aplikace snadno spouštějí“ (r=0,75). Tyto korelace naznačují, že vnímání kvality rozhraní úzce souvisí s užitečností zpětné vazby systému a že snadné ovládání silně souvisí s kvalitou výstupů.
Za pozornost stojí i korelace mezi kategoriemi, například „Kvalita grafiky“ s „Dovednosti, které si žáci osvojují, jsou důležité životní dovednosti“ (r=0,71) a „Web funguje bez technických problémů“ s „Uživatelé jsou aktivně zapojeni do procesu učení“ (r=0,71), což naznačuje, že technický výkon pozitivně ovlivňuje vnímání pedagogické hodnoty.
Faktorová analýza
Explorační faktorová analýza odhalila čtyři odlišné shluky vlastností platformy:
Faktor 1 (uživatelský zážitek a zapojení do učení): Největší shluk, který zahrnuje 15 položek, mimo jiné použitelnost rozhraní, technickou spolehlivost, relevanci pro učení a autonomii uživatele. Tento dominantní faktor naznačuje silné propojení technické funkčnosti a pedagogické účinnosti, kdy snadné ovládání přímo podporuje zapojení do učení.
Faktor 2 (technický výkon a přístupnost): Zahrnuje 7 položek týkajících se vizuální kvality, kompatibility mezi prohlížeči, zpětné vazby systému a výukových materiálů. Tento shluk naznačuje, že kvalita výstupů a strukturované vedení tvoří ucelenou součást zkušenosti s platformou.
Faktor 3 (možnost hodnocení): Tento faktor obsahuje jedinou položku „Učitelé mohou snadno hodnotit pokrok žáků“ a vyčlenil se jako samostatný aspekt, oddělený od ostatních pedagogických funkcí, což zdůrazňuje mimořádný význam funkce hodnocení.
Faktor 4 (nastavení parametrů): Také tento faktor obsahuje jedinou položku, „Nastavení parametrů je snadné“, a jeho osamocení naznačuje, že nastavení parametrů představuje specifickou součást zkušenosti s platformou, která si zaslouží zvláštní pozornost.
Výsledky celkově ukazují vysokou spokojenost se vzdělávací technologickou platformou, zejména velmi silnou shodu v názoru na její pedagogickou hodnotu. Faktorová analýza odhaluje, že zatímco uživatelský zážitek a zapojení do učení tvoří souvislé jádro celé zkušenosti, konkrétní funkce, jako je hodnocení a nastavení parametrů, představují samostatné aspekty, které si při vývoji a zavádění platformy zaslouží zvláštní pozornost.
Stáhnout výzkumný souborGoogle DrivePo kliknutí může Google uložit soubory cookieZásady používání cookies





0 Comments