Ocena wyników projektu „Using Euros”
Kompleksowa analiza
Streszczenie
W badaniu oceniono skuteczność i użyteczność wyników projektu „Using Euros” na podstawie szczegółowej analizy opinii użytkowników. Łącznie 79 uczestników oceniło platformę w 24 wymiarach obejmujących funkcjonalność techniczną, wartość pedagogiczną i doświadczenie uczenia się. Respondenci posługiwali się 5-stopniową skalą Likerta i oceniali m.in. użyteczność interfejsu, niezawodność techniczną, włączenie platformy w pracę pedagogiczną oraz efekty uczenia się. Analiza statystyczna wskazała silnie skorelowane cechy oraz odrębne skupienia czynników, które charakteryzują doświadczenie użytkowników. Wyniki pokazują wyjątkowo pozytywny odbiór (średnie wyniki >4,6 we wszystkich wymiarach), a najwyższą zgodność opinii odnotowano w odniesieniu do rozwijania umiejętności życiowych, zaangażowania uczących się i zgodności z celami uczenia się. Wydajność techniczna i elementy doświadczenia użytkownika utworzyły najsilniejsze skupienie czynników, natomiast konfiguracja parametrów i ocena postępów okazały się odrębnymi kwestiami. Badanie dostarcza istotnych wniosków twórcom technologii edukacyjnych i praktykom, którzy chcą wdrażać skuteczne cyfrowe platformy do nauki, łączące niezawodność techniczną z wartością pedagogiczną.
STATYSTYKI OPISOWE
| liczba | średnia | odch. std. | min | 25% | 50% | 75% | max | Pytanie | |
|---|---|---|---|---|---|---|---|---|---|
| 0 | 79.0 | 4.670886075949370 | 0.7462988847080340 | 1.0 | 5.0 | 5.0 | 5.0 | 5.0 | Strona internetowa działa bez usterek technicznych (1-5) |
| 1 | 79.0 | 4.7594936708860800 | 0.5596516744853900 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Podane instrukcje są jasne (1-5) |
| 2 | 79.0 | 4.746835443037980 | 0.5654214318990420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Interfejs jest przyjazny dla użytkownika (1-5) |
| 3 | 79.0 | 4.772151898734180 | 0.505086108135003 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Jakość grafiki (1-5) |
| 4 | 76.0 | 4.776315789473680 | 0.505929750341588 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aplikacje działają w co najmniej trzech przeglądarkach (1-5) |
| 5 | 76.0 | 4.723684210526320 | 0.531631055288692 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Komunikaty wyskakujące i ostrzeżenia są pomocne (1-5) |
| 6 | 78.0 | 4.743589743589740 | 0.6729639313369270 | 2.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aktywności można łatwo udostępniać innym użytkownikom (1-5) |
| 7 | 79.0 | 4.658227848101270 | 0.5748149300687360 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Ustawianie parametrów jest łatwe (1-5) |
| 8 | 79.0 | 4.69620253164557 | 0.6066813969699470 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Użytkownicy łatwo uruchamiają aplikacje (1-5) |
| 9 | 79.0 | 4.8354430379746800 | 0.46493395579608000 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Skanowanie działa zgodnie z oczekiwaniami (1-5) |
| 10 | 79.0 | 4.784810126582280 | 0.5230797869215380 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Wydruki są dobrej jakości (1-5) |
| 11 | 79.0 | 4.7974683544303800 | 0.490414446273684 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Stosowane jest uniwersalne projektowanie uczenia się (1-5) |
| 12 | 79.0 | 4.886075949367090 | 0.31974917141296800 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Umiejętności do zdobycia są ważnymi umiejętnościami życiowymi (1-5) |
| 13 | 79.0 | 4.848101265822790 | 0.4554121152779830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Informacja zwrotna pomaga nauczycielom monitorować postępy ucznia (1-5) |
| 14 | 79.0 | 4.822784810126580 | 0.4163176077654420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aplikacje można włączyć do programu nauczania (1-5) |
| 15 | 79.0 | 4.6835443037974700 | 0.5671409131068760 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Przykładowe scenariusze lekcji są przydatne (1-5) |
| 16 | 79.0 | 4.860759493670890 | 0.34840947082971600 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Użytkownicy są aktywnie zaangażowani w proces uczenia się (1-5) |
| 17 | 79.0 | 4.7594936708860800 | 0.45896175678393700 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Uwagi o metodyce pracy są pomocne (1-5) |
| 18 | 79.0 | 4.772151898734180 | 0.5298613047505830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Samoocena motywuje uczniów (1-5) |
| 19 | 79.0 | 4.8734177215189900 | 0.4346259401911600 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Uczniowie mogą pracować we własnym tempie (1-5) |
| 20 | 78.0 | 4.846153846153850 | 0.36313651960128100 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Podane informacje odpowiadają celom uczenia się (1-5) |
| 21 | 79.0 | 4.8734177215189900 | 0.3709685385649280 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Nauczyciele/rodzice mogą łatwo dostosować aktywności do potrzeb użytkownika (1-5) |
| 22 | 79.0 | 4.772151898734180 | 0.4790312630611270 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Nauczyciele mogą łatwo oceniać postępy uczniów (1-5) |
| 23 | 79.0 | 4.69620253164557 | 0.627457841667814 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aktywności można wykorzystywać zarówno w pracy grupowej, jak i indywidualnej (1-5) |
Pytania o dużej zmienności odpowiedzi
| Etykieta | Pytanie | odch. std. |
|---|---|---|
| A1 | Strona internetowa działa bez usterek technicznych (1-5) | 0.7462988847080340 |
| A7 | Aktywności można łatwo udostępniać innym użytkownikom (1-5) | 0.6729639313369270 |
| C12 | Aktywności można wykorzystywać zarówno w pracy grupowej, jak i indywidualnej (1-5) | 0.627457841667814 |
| A9 | Użytkownicy łatwo uruchamiają aplikacje (1-5) | 0.6066813969699470 |
| A8 | Ustawianie parametrów jest łatwe (1-5) | 0.5748149300687360 |
Pytania o małej zmienności odpowiedzi
| Etykieta | Pytanie | odch. std. |
|---|---|---|
| B1 | Umiejętności do zdobycia są ważnymi umiejętnościami życiowymi (1-5) | 0.31974917141296800 |
| C5 | Użytkownicy są aktywnie zaangażowani w proces uczenia się (1-5) | 0.34840947082971600 |
| C9 | Podane informacje odpowiadają celom uczenia się (1-5) | 0.36313651960128100 |
| C10 | Nauczyciele/rodzice mogą łatwo dostosować aktywności do potrzeb użytkownika (1-5) | 0.3709685385649280 |
| B3 | Aplikacje można włączyć do programu nauczania (1-5) | 0.4163176077654420 |
Zrozumienie zróżnicowania odpowiedzi (odchylenie standardowe)
Odchylenie standardowe (odch. std.) na drugim wykresie pokazuje, jak bardzo odpowiedzi na dane pytanie odbiegają od średniej. Oto, co z niego wynika:
Niskie odchylenie standardowe (bliskie 0) → wysoka zgodność
Jeśli odchylenie standardowe jest bliskie 0, oznacza to, że większość respondentów wystawiła bardzo podobne oceny (np. wszyscy ocenili pytanie na 5). Wskazuje to na silną zgodność opinii.
Przykład: jeśli pytanie o „jasność instrukcji” ma odch. std. = 0, oznacza to, że wszyscy wybrali tę samą ocenę (wszyscy 5 lub wszyscy 4 itd.).
Wysokie odchylenie standardowe (powyżej 0,5) → bardziej zróżnicowane opinie
Wyższe odchylenie standardowe oznacza, że odpowiedzi respondentów znacznie się różniły. Wskazuje to na podzielone opinie – jedni ocenili dany element wysoko, inni nisko.
Przykład: jeśli pytanie o „przyjazność interfejsu” ma odch. std. = 0,8, oznacza to, że część osób uznała interfejs za bardzo przyjazny (5), a inne oceniły go niżej (3–4), co pokazuje brak zgodności.
Dlaczego zróżnicowanie odpowiedzi jest ważne?
- Niskie zróżnicowanie → wskazuje na silną zgodność opinii (dana cecha jest naprawdę bardzo dobra albo bardzo zła).
- Wysokie zróżnicowanie → wskazuje obszary do poprawy (jedni użytkownicy są zadowoleni, a inni nie, co może świadczyć o problemach z użytecznością).
Pytania o wysokim odchyleniu standardowym mogą wymagać dalszych badań, aby zrozumieć, dlaczego opinie są podzielone.
Pytanie według kategorii
| Kategoria | Pytanie |
|---|---|
| A1 | Strona internetowa działa bez usterek technicznych (1-5) |
| A2 | Podane instrukcje są jasne (1-5) |
| A3 | Interfejs jest przyjazny dla użytkownika (1-5) |
| A4 | Jakość grafiki (1-5) |
| A5 | Aplikacje działają w co najmniej trzech przeglądarkach (1-5) |
| A6 | Komunikaty wyskakujące i ostrzeżenia są pomocne (1-5) |
| A7 | Aktywności można łatwo udostępniać innym użytkownikom (1-5) |
| A8 | Ustawianie parametrów jest łatwe (1-5) |
| A9 | Użytkownicy łatwo uruchamiają aplikacje (1-5) |
| A10 | Skanowanie działa zgodnie z oczekiwaniami (1-5) |
| A11 | Wydruki są dobrej jakości (1-5) |
| A12 | Stosowane jest uniwersalne projektowanie uczenia się (1-5) |
| B1 | Umiejętności do zdobycia są ważnymi umiejętnościami życiowymi (1-5) |
| B2 | Informacja zwrotna pomaga nauczycielom monitorować postępy ucznia (1-5) |
| B3 | Aplikacje można włączyć do programu nauczania (1-5) |
| B4 | Przykładowe scenariusze lekcji są przydatne (1-5) |
| C5 | Użytkownicy są aktywnie zaangażowani w proces uczenia się (1-5) |
| C6 | Uwagi o metodyce pracy są pomocne (1-5) |
| C7 | Samoocena motywuje uczniów (1-5) |
| C8 | Uczniowie mogą pracować we własnym tempie (1-5) |
| C9 | Podane informacje odpowiadają celom uczenia się (1-5) |
| C10 | Nauczyciele/rodzice mogą łatwo dostosować aktywności do potrzeb użytkownika (1-5) |
| C11 | Nauczyciele mogą łatwo oceniać postępy uczniów (1-5) |
| C12 | Aktywności można wykorzystywać zarówno w pracy grupowej, jak i indywidualnej (1-5) |
KORELACJE MIĘDZY PYTANIAMI
Najsilniejsze korelacje między pytaniami (korelacja powyżej 0,7), wskazujące, że odpowiedzi na te pytania są ze sobą silnie powiązane.
| Etykieta 1 | Pytanie 1 | Treść pytania 1 | Etykieta 2 | Pytanie 2 | Treść pytania 2 | Korelacja |
|---|---|---|---|---|---|---|
| A1 | 0 | Strona internetowa działa bez usterek technicznych (1-5) | C5 | 16 | Użytkownicy są aktywnie zaangażowani w proces uczenia się (1-5) | 0.7090125015101340 |
| A2 | 1 | Podane instrukcje są jasne (1-5) | A9 | 8 | Użytkownicy łatwo uruchamiają aplikacje (1-5) | 0.7260350618403750 |
| A3 | 2 | Interfejs jest przyjazny dla użytkownika (1-5) | A6 | 5 | Komunikaty wyskakujące i ostrzeżenia są pomocne (1-5) | 0.781614675979465 |
| A4 | 3 | Jakość grafiki (1-5) | A11 | 10 | Wydruki są dobrej jakości (1-5) | 0.734028376223487 |
| A4 | 3 | Jakość grafiki (1-5) | B1 | 12 | Umiejętności do zdobycia są ważnymi umiejętnościami życiowymi (1-5) | 0.7104325775692570 |
| A6 | 5 | Komunikaty wyskakujące i ostrzeżenia są pomocne (1-5) | B3 | 14 | Aplikacje można włączyć do programu nauczania (1-5) | 0.7192552903761100 |
| A7 | 6 | Aktywności można łatwo udostępniać innym użytkownikom (1-5) | A9 | 8 | Użytkownicy łatwo uruchamiają aplikacje (1-5) | 0.7548860451594470 |
| A9 | 8 | Użytkownicy łatwo uruchamiają aplikacje (1-5) | A11 | 10 | Wydruki są dobrej jakości (1-5) | 0.7609438667598360 |
| A10 | 9 | Skanowanie działa zgodnie z oczekiwaniami (1-5) | A11 | 10 | Wydruki są dobrej jakości (1-5) | 0.7487071134303000 |
| A10 | 9 | Skanowanie działa zgodnie z oczekiwaniami (1-5) | A12 | 11 | Stosowane jest uniwersalne projektowanie uczenia się (1-5) | 0.7516016138604400 |
| C6 | 17 | Uwagi o metodyce pracy są pomocne (1-5) | C9 | 20 | Podane informacje odpowiadają celom uczenia się (1-5) | 0.7040041483986320 |
ANALIZA SKUPIEŃ
Skupienia pytań wyodrębnione na podstawie eksploracyjnej analizy czynnikowej (EFA):
Skupienia i przypisane do nich pytania:
Czynnik 1 (największe skupienie):
- Dotyczy użyteczności, doświadczenia użytkownika i zaangażowania w naukę.
- Obejmuje pytania o przyjazność interfejsu, jasność instrukcji, łatwość obsługi, informację zwrotną i uczenie się we własnym tempie.
Czynnik 2:
- Dotyczy wydajności technicznej i dostępności.
- Obejmuje pytania o jakość grafiki, zgodność z przeglądarkami, pomocne ostrzeżenia, jakość wydruku i scenariusze lekcji.
Czynnik 3:
Zawiera tylko jedno pytanie, dotyczące oceniania postępów uczniów przez nauczycieli.
Czynnik 4:
Również zawiera tylko jedno pytanie, dotyczące łatwości ustawiania parametrów.
| Dominujący czynnik | Pytania w skupieniu |
|---|---|
| Czynnik 1 | [[‘A1’, ‘Strona internetowa działa bez usterek technicznych (1-5)’], [‘A2’, ‘Podane instrukcje są jasne (1-5)’], [‘A3’, ‘Interfejs jest przyjazny dla użytkownika (1-5)’], [‘A7’, ‘Aktywności można łatwo udostępniać innym użytkownikom (1-5)’], [‘A9’, ‘Użytkownicy łatwo uruchamiają aplikacje (1-5)’], [‘A10’, ‘Skanowanie działa zgodnie z oczekiwaniami (1-5)’], [‘A12’, ‘Stosowane jest uniwersalne projektowanie uczenia się (1-5)’], [‘B1’, ‘Umiejętności do zdobycia są ważnymi umiejętnościami życiowymi (1-5)’], [‘B2’, “Informacja zwrotna pomaga nauczycielom monitorować postępy ucznia (1-5)”], [‘B3’, ‘Aplikacje można włączyć do programu nauczania (1-5)’], [‘C5’, ‘Użytkownicy są aktywnie zaangażowani w proces uczenia się (1-5)’], [‘C7’, ‘Samoocena motywuje uczniów (1-5)’], [‘C8’, ‘Uczniowie mogą pracować we własnym tempie (1-5)’], [‘C9’, ‘Podane informacje odpowiadają celom uczenia się (1-5)’], [‘C10’, “Nauczyciele/rodzice mogą łatwo dostosować aktywności do potrzeb użytkownika (1-5)”]] |
| Czynnik 2 | [[‘A4’, ‘Jakość grafiki (1-5)’], [‘A5’, ‘Aplikacje działają w co najmniej trzech przeglądarkach (1-5)’], [‘A6’, ‘Komunikaty wyskakujące i ostrzeżenia są pomocne (1-5)’], [‘A11’, ‘Wydruki są dobrej jakości (1-5)’], [‘B4’, ‘Przykładowe scenariusze lekcji są przydatne (1-5)’], [‘C6’, ‘Uwagi o metodyce pracy są pomocne (1-5)’], [‘C12’, ‘Aktywności można wykorzystywać zarówno w pracy grupowej, jak i indywidualnej (1-5)’]] |
| Czynnik 3 | [[‘C11′, “Nauczyciele mogą łatwo oceniać postępy uczniów (1-5)”]] |
| Czynnik 4 | [[‘A8’, ‘Ustawianie parametrów jest łatwe (1-5)’]] |
Co to oznacza?
Czynnik 1 wskazuje na silny związek między użytecznością, skutecznością uczenia się i zaangażowaniem użytkowników.
Czynnik 2 wskazuje, że jakość grafiki, zgodność z przeglądarkami i uporządkowane scenariusze lekcji są ze sobą powiązane.
Czynniki 3 i 4 to przypadki odstające, czyli odrębne kwestie, które nie łączą się wyraźnie z pozostałymi.
Wyniki
Ocena platformy edukacyjnej była konsekwentnie pozytywna we wszystkich 24 mierzonych wymiarach (N=79). Statystyki opisowe pokazały wysokie średnie wyniki, od 4,67 do 4,89 na 5-stopniowej skali Likerta, co świadczy o dużym zadowoleniu użytkowników zarówno z technicznych, jak i pedagogicznych aspektów platformy.
Analiza opisowa
Najwyżej oceniono następujące cechy: „Umiejętności do zdobycia są ważnymi umiejętnościami życiowymi” (M=4,89, SD=0,32), „Uczniowie mogą pracować we własnym tempie” (M=4,87, SD=0,43) oraz „Nauczyciele/rodzice mogą łatwo dostosować aktywności do potrzeb użytkownika” (M=4,87, SD=0,37), co świadczy o szczególnym docenieniu elastyczności pedagogicznej platformy i jej przydatności. Aspekty techniczne również zostały dobrze przyjęte: „Skanowanie działa zgodnie z oczekiwaniami” (M=4,84, SD=0,46) i „Wydruki są dobrej jakości” (M=4,78, SD=0,52) otrzymały bardzo pozytywne oceny.
Analiza zróżnicowania odpowiedzi dostarczyła ważnych wniosków na temat zgodności opinii użytkowników. Największa zgodność respondentów (wskazywana przez najniższe odchylenia standardowe) dotyczyła podstawowych cech pedagogicznych: „Umiejętności do zdobycia są ważnymi umiejętnościami życiowymi” (SD=0,32), „Użytkownicy są aktywnie zaangażowani w proces uczenia się” (SD=0,35) oraz „Podane informacje odpowiadają celom uczenia się” (SD=0,36). Natomiast większe zróżnicowanie odpowiedzi (świadczące o mniejszej zgodności) zaobserwowano w przypadku cech technicznych, takich jak „Strona internetowa działa bez usterek technicznych” (SD=0,75), „Aktywności można łatwo udostępniać innym użytkownikom” (SD=0,67) i „Aktywności można wykorzystywać zarówno w pracy grupowej, jak i indywidualnej” (SD=0,63).
Analiza korelacji
Analiza korelacji wskazała 11 silnych zależności (r > 0,70) między różnymi wymiarami oceny. Najsilniejsze korelacje zaobserwowano między „Interfejs jest przyjazny dla użytkownika” a „Komunikaty wyskakujące i ostrzeżenia są pomocne” (r=0,78), między „Użytkownicy łatwo uruchamiają aplikacje” a „Wydruki są dobrej jakości” (r=0,76) oraz między „Aktywności można łatwo udostępniać innym użytkownikom” a „Użytkownicy łatwo uruchamiają aplikacje” (r=0,75). Korelacje te sugerują, że postrzeganie jakości interfejsu jest ściśle związane z użytecznością komunikatów systemu, a łatwość obsługi silnie koreluje z jakością efektów pracy.
Do istotnych korelacji między kategoriami należały: „Jakość grafiki” z „Umiejętności do zdobycia są ważnymi umiejętnościami życiowymi” (r=0,71) oraz „Strona internetowa działa bez usterek technicznych” z „Użytkownicy są aktywnie zaangażowani w proces uczenia się” (r=0,71), co wskazuje, że aspekty wydajności technicznej pozytywnie wpływają na postrzeganą wartość pedagogiczną.
Analiza czynnikowa
Eksploracyjna analiza czynnikowa wyodrębniła cztery odrębne skupienia cech platformy:
Czynnik 1 (doświadczenie użytkownika i zaangażowanie w naukę): Największa grupa, obejmująca 15 pozycji, m.in. użyteczność interfejsu, niezawodność techniczną, adekwatność do celów nauki i autonomię użytkownika. Ten dominujący czynnik wskazuje na silne powiązanie funkcjonalności technicznej ze skutecznością pedagogiczną: łatwość obsługi bezpośrednio wspiera zaangażowanie w naukę.
Czynnik 2 (wydajność techniczna i dostępność): Obejmuje 7 pozycji dotyczących jakości wizualnej, zgodności z różnymi przeglądarkami, informacji zwrotnej systemu oraz materiałów dydaktycznych. Ta grupa wskazuje, że jakość wyników i uporządkowane wskazówki tworzą spójny element doświadczenia z korzystania z platformy.
Czynnik 3 (możliwość oceniania): Zawiera jedną pozycję: „Nauczyciele mogą łatwo oceniać postępy uczniów”. Czynnik ten wyłonił się jako odrębna kwestia, oddzielona od pozostałych funkcji pedagogicznych, co podkreśla wyjątkowe znaczenie funkcji oceniania.
Czynnik 4 (konfiguracja parametrów): Również zawiera jedną pozycję: „Ustawianie parametrów jest łatwe”. Jego wyodrębnienie sugeruje, że konfiguracja parametrów to specyficzny element doświadczenia z korzystania z platformy, który wymaga szczególnej uwagi.
Podsumowując, wyniki wskazują na wysoki ogólny poziom zadowolenia z platformy edukacyjnej, ze szczególnie silną zgodnością opinii co do jej wartości pedagogicznej. Analiza czynnikowa pokazuje, że choć doświadczenie użytkownika i zaangażowanie w naukę tworzą spójny trzon doświadczenia, to konkretne funkcje, takie jak ocenianie i konfiguracja parametrów, stanowią odrębne obszary, które zasługują na szczególną uwagę przy rozwoju i wdrażaniu platformy.
Pobierz plik z badaniemGoogle DrivePo kliknięciu Google może zapisać pliki cookiePolityka plików cookie





0 Comments