Evaluacija rezultata projekta „Using Euros“
Sveobuhvatna analiza
Sažetak
Ovo istraživanje ocjenjuje učinkovitost i upotrebljivost rezultata projekta „Using Euros“ putem sveobuhvatne analize povratnih informacija korisnika. Ukupno 79 sudionika ocijenilo je platformu kroz 24 dimenzije koje obuhvaćaju tehničku funkcionalnost, pedagošku vrijednost i iskustvo učenja. Primjenom Likertove ljestvice od 5 stupnjeva ispitanici su procjenjivali aspekte kao što su upotrebljivost sučelja, tehnička pouzdanost, pedagoška integracija i ishodi učenja. Statistička analiza izdvojila je visoko korelirane značajke i zasebne klastere faktora koji obilježavaju korisničko iskustvo. Rezultati pokazuju iznimno pozitivan prijem (prosječne ocjene >4.6 u svim dimenzijama), uz najveću suglasnost u pogledu razvoja životnih vještina, angažiranosti učenika i usklađenosti s ciljevima učenja. Elementi tehničke izvedbe i korisničkog iskustva činili su najsnažniji klaster faktora, dok su se postavljanje parametara i procjena napretka izdvojili kao zasebna pitanja. Ovo istraživanje donosi važne uvide za razvojne timove obrazovne tehnologije i praktičare koji žele uvesti učinkovite digitalne platforme za učenje koje povezuju tehničku pouzdanost s pedagoškom vrijednošću.
DESKRIPTIVNA STATISTIKA
| broj | aritmetička sredina | std | min | 25% | 50% | 75% | max | Pitanje | |
|---|---|---|---|---|---|---|---|---|---|
| 0 | 79.0 | 4.670886075949370 | 0.7462988847080340 | 1.0 | 5.0 | 5.0 | 5.0 | 5.0 | Web-stranica radi bez tehničkih problema (1-5) |
| 1 | 79.0 | 4.7594936708860800 | 0.5596516744853900 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Upute su jasne (1-5) |
| 2 | 79.0 | 4.746835443037980 | 0.5654214318990420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Sučelje je prilagođeno korisnicima (1-5) |
| 3 | 79.0 | 4.772151898734180 | 0.505086108135003 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Kvaliteta grafike (1-5) |
| 4 | 76.0 | 4.776315789473680 | 0.505929750341588 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aplikacije rade u najmanje tri preglednika (1-5) |
| 5 | 76.0 | 4.723684210526320 | 0.531631055288692 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Skočne poruke i upozorenja su korisni (1-5) |
| 6 | 78.0 | 4.743589743589740 | 0.6729639313369270 | 2.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5) |
| 7 | 79.0 | 4.658227848101270 | 0.5748149300687360 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Postavljanje parametara je jednostavno (1-5) |
| 8 | 79.0 | 4.69620253164557 | 0.6066813969699470 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Korisnici lako pokreću aplikacije (1-5) |
| 9 | 79.0 | 4.8354430379746800 | 0.46493395579608000 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Skeniranje radi kako treba (1-5) |
| 10 | 79.0 | 4.784810126582280 | 0.5230797869215380 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Ispisi su dobre kvalitete (1-5) |
| 11 | 79.0 | 4.7974683544303800 | 0.490414446273684 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Primijenjen je univerzalni dizajn za učenje (1-5) |
| 12 | 79.0 | 4.886075949367090 | 0.31974917141296800 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Vještine koje se stječu važne su životne vještine (1-5) |
| 13 | 79.0 | 4.848101265822790 | 0.4554121152779830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Povratna informacija pomaže učiteljima u praćenju napretka učenika (1-5) |
| 14 | 79.0 | 4.822784810126580 | 0.4163176077654420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aplikacije se mogu integrirati u kurikulum (1-5) |
| 15 | 79.0 | 4.6835443037974700 | 0.5671409131068760 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Primjeri planova sata su korisni (1-5) |
| 16 | 79.0 | 4.860759493670890 | 0.34840947082971600 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Korisnici su aktivno uključeni u proces učenja (1-5) |
| 17 | 79.0 | 4.7594936708860800 | 0.45896175678393700 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Bilješke o metodologijama su korisne (1-5) |
| 18 | 79.0 | 4.772151898734180 | 0.5298613047505830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Samovrednovanje motivira učenike (1-5) |
| 19 | 79.0 | 4.8734177215189900 | 0.4346259401911600 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Učenici mogu raditi vlastitim tempom (1-5) |
| 20 | 78.0 | 4.846153846153850 | 0.36313651960128100 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Pružene informacije odnose se na ciljeve učenja (1-5) |
| 21 | 79.0 | 4.8734177215189900 | 0.3709685385649280 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika (1-5) |
| 22 | 79.0 | 4.772151898734180 | 0.4790312630611270 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Učitelji mogu lako procijeniti napredak učenika (1-5) |
| 23 | 79.0 | 4.69620253164557 | 0.627457841667814 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Aktivnosti se mogu koristiti za grupni rad, ali i za individualni rad (1-5) |
Pitanja s velikom varijacijom
| Oznaka | Pitanje | std |
|---|---|---|
| A1 | Web-stranica radi bez tehničkih problema (1-5) | 0.7462988847080340 |
| A7 | Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5) | 0.6729639313369270 |
| C12 | Aktivnosti se mogu koristiti za grupni rad, ali i za individualni rad (1-5) | 0.627457841667814 |
| A9 | Korisnici lako pokreću aplikacije (1-5) | 0.6066813969699470 |
| A8 | Postavljanje parametara je jednostavno (1-5) | 0.5748149300687360 |
Pitanja s malom varijacijom
| Oznaka | Pitanje | std |
|---|---|---|
| B1 | Vještine koje se stječu važne su životne vještine (1-5) | 0.31974917141296800 |
| C5 | Korisnici su aktivno uključeni u proces učenja (1-5) | 0.34840947082971600 |
| C9 | Pružene informacije odnose se na ciljeve učenja (1-5) | 0.36313651960128100 |
| C10 | Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika (1-5) | 0.3709685385649280 |
| B3 | Aplikacije se mogu integrirati u kurikulum (1-5) | 0.4163176077654420 |
Razumijevanje varijacije u odgovorima (standardna devijacija)
Standardna devijacija (std) u drugom grafikonu pokazuje koliko se odgovori na pojedino pitanje udaljavaju od prosjeka. Evo što nam ona govori:
Mala standardna devijacija (blizu 0) → visoka suglasnost
Ako je standardna devijacija blizu 0, većina ispitanika dala je vrlo slične ocjene (npr. svi su pitanje ocijenili s 5). To upućuje na snažan konsenzus o ocjeni.
Primjer: Ako pitanje o „jasnoći uputa“ ima std = 0, to znači da su se svi složili oko iste ocjene (svi su dali 5 ili svi 4 itd.).
Velika standardna devijacija (iznad 0.5) → raznolikija mišljenja
Veća standardna devijacija znači da su se odgovori među ispitanicima znatno razlikovali. To upućuje na podijeljena mišljenja – neki su dali visoku, a drugi nisku ocjenu.
Primjer: Ako pitanje o „prilagođenosti sučelja korisnicima“ ima std = 0.8, to znači da je nekima sučelje vrlo prilagođeno korisnicima (5), a drugi su ga ocijenili niže (3-4), što pokazuje neslaganje.
Zašto je varijacija važna?
- Mala varijacija → upućuje na snažan konsenzus (značajka je ili stvarno dobra ili stvarno loša).
- Velika varijacija → pokazuje područja za poboljšanje (neki su korisnici zadovoljni, a drugi nisu, što ukazuje na probleme s upotrebljivošću).
Pitanja s velikom standardnom devijacijom možda zahtijevaju daljnje istraživanje kako bi se razumjelo zašto su mišljenja podijeljena.
Kategorija pitanja
| Kategorija | Pitanje |
|---|---|
| A1 | Web-stranica radi bez tehničkih problema (1-5) |
| A2 | Upute su jasne (1-5) |
| A3 | Sučelje je prilagođeno korisnicima (1-5) |
| A4 | Kvaliteta grafike (1-5) |
| A5 | Aplikacije rade u najmanje tri preglednika (1-5) |
| A6 | Skočne poruke i upozorenja su korisni (1-5) |
| A7 | Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5) |
| A8 | Postavljanje parametara je jednostavno (1-5) |
| A9 | Korisnici lako pokreću aplikacije (1-5) |
| A10 | Skeniranje radi kako treba (1-5) |
| A11 | Ispisi su dobre kvalitete (1-5) |
| A12 | Primijenjen je univerzalni dizajn za učenje (1-5) |
| B1 | Vještine koje se stječu važne su životne vještine (1-5) |
| B2 | Povratna informacija pomaže učiteljima u praćenju napretka učenika (1-5) |
| B3 | Aplikacije se mogu integrirati u kurikulum (1-5) |
| B4 | Primjeri planova sata su korisni (1-5) |
| C5 | Korisnici su aktivno uključeni u proces učenja (1-5) |
| C6 | Bilješke o metodologijama su korisne (1-5) |
| C7 | Samovrednovanje motivira učenike (1-5) |
| C8 | Učenici mogu raditi vlastitim tempom (1-5) |
| C9 | Pružene informacije odnose se na ciljeve učenja (1-5) |
| C10 | Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika (1-5) |
| C11 | Učitelji mogu lako procijeniti napredak učenika (1-5) |
| C12 | Aktivnosti se mogu koristiti za grupni rad, ali i za individualni rad (1-5) |
KORELACIJE IZMEĐU PITANJA
Najjače korelacije između pitanja (korelacija iznad 0.7), što znači da su odgovori na ta pitanja visoko povezani.
| Oznaka 1 | Pitanje 1 | Tekst pitanja 1 | Oznaka 2 | Pitanje 2 | Tekst pitanja 2 | Korelacija |
|---|---|---|---|---|---|---|
| A1 | 0 | Web-stranica radi bez tehničkih problema (1-5) | C5 | 16 | Korisnici su aktivno uključeni u proces učenja (1-5) | 0.7090125015101340 |
| A2 | 1 | Upute su jasne (1-5) | A9 | 8 | Korisnici lako pokreću aplikacije (1-5) | 0.7260350618403750 |
| A3 | 2 | Sučelje je prilagođeno korisnicima (1-5) | A6 | 5 | Skočne poruke i upozorenja su korisni (1-5) | 0.781614675979465 |
| A4 | 3 | Kvaliteta grafike (1-5) | A11 | 10 | Ispisi su dobre kvalitete (1-5) | 0.734028376223487 |
| A4 | 3 | Kvaliteta grafike (1-5) | B1 | 12 | Vještine koje se stječu važne su životne vještine (1-5) | 0.7104325775692570 |
| A6 | 5 | Skočne poruke i upozorenja su korisni (1-5) | B3 | 14 | Aplikacije se mogu integrirati u kurikulum (1-5) | 0.7192552903761100 |
| A7 | 6 | Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5) | A9 | 8 | Korisnici lako pokreću aplikacije (1-5) | 0.7548860451594470 |
| A9 | 8 | Korisnici lako pokreću aplikacije (1-5) | A11 | 10 | Ispisi su dobre kvalitete (1-5) | 0.7609438667598360 |
| A10 | 9 | Skeniranje radi kako treba (1-5) | A11 | 10 | Ispisi su dobre kvalitete (1-5) | 0.7487071134303000 |
| A10 | 9 | Skeniranje radi kako treba (1-5) | A12 | 11 | Primijenjen je univerzalni dizajn za učenje (1-5) | 0.7516016138604400 |
| C6 | 17 | Bilješke o metodologijama su korisne (1-5) | C9 | 20 | Pružene informacije odnose se na ciljeve učenja (1-5) | 0.7040041483986320 |
KLASTERSKA ANALIZA
Klasteri pitanja utvrđeni na temelju eksploratorne faktorske analize (EFA):
Klasteri i njihova grupirana pitanja:
Faktor 1 (najveći klaster):
- Usmjeren je na upotrebljivost, korisničko iskustvo i angažiranost u učenju.
- Uključuje pitanja o prilagođenosti sučelja korisnicima, jasnoći uputa, jednostavnosti korištenja, povratnim informacijama i učenju vlastitim tempom.
Faktor 2:
- Odnosi se na tehničku izvedbu i pristupačnost.
- Uključuje pitanja o kvaliteti grafike, kompatibilnosti s preglednicima, korisnim upozorenjima, kvaliteti ispisa i planovima sata.
Faktor 3:
Sadrži samo jedno pitanje, o procjeni napretka učenika od strane učitelja.
Faktor 4:
Također sadrži samo jedno pitanje, usmjereno na jednostavnost postavljanja parametara.
| Dominantni faktor | Pitanja u klasteru |
|---|---|
| Faktor 1 | [[‘A1’, ‘Web-stranica radi bez tehničkih problema (1-5)’], [‘A2’, ‘Upute su jasne (1-5)’], [‘A3’, ‘Sučelje je prilagođeno korisnicima (1-5)’], [‘A7’, ‘Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5)’], [‘A9’, ‘Korisnici lako pokreću aplikacije (1-5)’], [‘A10’, ‘Skeniranje radi kako treba (1-5)’], [‘A12’, ‘Primijenjen je univerzalni dizajn za učenje (1-5)’], [‘B1’, ‘Vještine koje se stječu važne su životne vještine (1-5)’], [‘B2’, “Povratna informacija pomaže učiteljima u praćenju napretka učenika (1-5)”], [‘B3’, ‘Aplikacije se mogu integrirati u kurikulum (1-5)’], [‘C5’, ‘Korisnici su aktivno uključeni u proces učenja (1-5)’], [‘C7’, ‘Samovrednovanje motivira učenike (1-5)’], [‘C8’, ‘Učenici mogu raditi vlastitim tempom (1-5)’], [‘C9’, ‘Pružene informacije odnose se na ciljeve učenja (1-5)’], [‘C10’, “Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika (1-5)”]] |
| Faktor 2 | [[‘A4’, ‘Kvaliteta grafike (1-5)’], [‘A5’, ‘Aplikacije rade u najmanje tri preglednika (1-5)’], [‘A6’, ‘Skočne poruke i upozorenja su korisni (1-5)’], [‘A11’, ‘Ispisi su dobre kvalitete (1-5)’], [‘B4’, ‘Primjeri planova sata su korisni (1-5)’], [‘C6’, ‘Bilješke o metodologijama su korisne (1-5)’], [‘C12’, ‘Aktivnosti se mogu koristiti za grupni rad, ali i za individualni rad (1-5)’]] |
| Faktor 3 | [[‘C11′, “Učitelji mogu lako procijeniti napredak učenika (1-5)”]] |
| Faktor 4 | [[‘A8’, ‘Postavljanje parametara je jednostavno (1-5)’]] |
Što to znači?
Faktor 1 upućuje na snažnu povezanost između upotrebljivosti, učinkovitosti učenja i angažiranosti korisnika.
Faktor 2 pokazuje da su kvaliteta grafike, kompatibilnost s preglednicima i strukturirani planovi sata međusobno povezani.
Faktori 3 i 4 su odstupanja, odnosno zasebna pitanja koja se ne grupiraju snažno s ostalima.
Rezultati
Procjena obrazovne tehnološke platforme dala je dosljedno pozitivne ocjene u svih 24 mjerenih dimenzija (N=79). Deskriptivna statistika pokazala je visoke prosječne ocjene od 4.67 do 4.89 na Likertovoj ljestvici od 5 stupnjeva, što upućuje na veliko zadovoljstvo korisnika tehničkim i pedagoškim aspektima platforme.
Deskriptivna analiza
Najbolje ocijenjene značajke bile su „Vještine koje se stječu važne su životne vještine“ (M=4.89, SD=0.32), „Učenici mogu raditi vlastitim tempom“ (M=4.87, SD=0.43) i „Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika“ (M=4.87, SD=0.37), što pokazuje posebno priznanje pedagoškoj fleksibilnosti i relevantnosti platforme. Tehnički aspekti također su dobro prihvaćeni: „Skeniranje radi kako treba“ (M=4.84, SD=0.46) i „Ispisi su dobre kvalitete“ (M=4.78, SD=0.52) dobili su visoke pozitivne ocjene.
Analiza varijacije u odgovorima dala je važne uvide u suglasnost korisnika. Najveće slaganje među ispitanicima (na što upućuju najmanje standardne devijacije) odnosilo se na temeljne pedagoške značajke: „Vještine koje se stječu važne su životne vještine“ (SD=0.32), „Korisnici su aktivno uključeni u proces učenja“ (SD=0.35) i „Pružene informacije odnose se na ciljeve učenja“ (SD=0.36). Nasuprot tome, veća varijacija u odgovorima (što upućuje na manju suglasnost) uočena je kod tehničkih značajki kao što su „Web-stranica radi bez tehničkih problema“ (SD=0.75), „Aktivnosti se lako mogu dijeliti s drugim korisnicima“ (SD=0.67) i „Aktivnosti se mogu koristiti za grupni, ali i za individualni rad“ (SD=0.63).
Korelacijska analiza
Korelacijska analiza utvrdila je 11 snažnih povezanosti (r > 0.70) između različitih dimenzija evaluacije. Najsnažnije korelacije uočene su između tvrdnji „Sučelje je prilagođeno korisnicima“ i „Skočne poruke i upozorenja su korisni“ (r=0.78), „Korisnici lako pokreću aplikacije“ i „Ispisi su dobre kvalitete“ (r=0.76) te „Aktivnosti se lako mogu dijeliti s drugim korisnicima“ i „Korisnici lako pokreću aplikacije“ (r=0.75). Te korelacije upućuju na to da je korisnička percepcija kvalitete sučelja usko povezana s korisnošću povratnih informacija sustava te da je jednostavnost rada snažno povezana s kvalitetom izlaznih rezultata.
Značajne korelacije među kategorijama uključivale su „Kvaliteta grafike“ i „Vještine koje se stječu važne su životne vještine“ (r=0.71) te „Web-stranica radi bez tehničkih problema“ i „Korisnici su aktivno uključeni u proces učenja“ (r=0.71), što upućuje na to da aspekti tehničke izvedbe pozitivno utječu na percepciju pedagoške vrijednosti.
Faktorska analiza
Eksploratorna faktorska analiza otkrila je četiri zasebna klastera obilježja platforme:
Faktor 1 (korisničko iskustvo i angažiranost u učenju): Najveća skupina, koja obuhvaća 15 čestica, uključujući upotrebljivost sučelja, tehničku pouzdanost, relevantnost za učenje i autonomiju korisnika. Ovaj dominantni faktor upućuje na snažnu povezanost tehničke funkcionalnosti i pedagoške učinkovitosti, pri čemu jednostavnost korištenja izravno podupire angažiranost u učenju.
Faktor 2 (tehničke performanse i pristupačnost): Sastoji se od 7 čestica koje se odnose na vizualnu kvalitetu, kompatibilnost s različitim preglednicima, povratne informacije sustava i nastavne resurse. Ova skupina pokazuje da kvaliteta izlaznih rezultata i strukturirano vođenje čine koherentan dio iskustva korištenja platforme.
Faktor 3 (mogućnost procjenjivanja): Ovaj faktor sadrži jednu česticu, „Nastavnici lako mogu procijeniti napredak učenika”, i izdvojio se kao zasebno pitanje, odvojeno od ostalih pedagoških značajki, što ističe posebnu važnost funkcionalnosti procjenjivanja.
Faktor 4 (postavljanje parametara): I ovaj faktor sadrži samo jednu česticu, „Postavljanje parametara jednostavan je proces”. Njegova izdvojenost upućuje na to da postavljanje parametara predstavlja specifičan aspekt iskustva korištenja platforme koji zaslužuje posebnu pozornost.
Ukratko, rezultati pokazuju visoko opće zadovoljstvo platformom obrazovne tehnologije, uz posebno snažan konsenzus o njezinoj pedagoškoj vrijednosti. Faktorska analiza otkriva da, iako korisničko iskustvo i angažiranost u učenju čine povezanu jezgru iskustva, pojedine funkcionalnosti, poput procjenjivanja i postavljanja parametara, predstavljaju zasebne aspekte koji zaslužuju posebnu pozornost pri razvoju i primjeni platforme.
Preuzmite istraživačku datotekuGoogle DriveKlikom Google može spremiti kolačićePravila o kolačićima





0 Comments