Evaluacija rezultata projekta „Using Euros“

Sveobuhvatna analiza

Sažetak

Ovo istraživanje ocjenjuje učinkovitost i upotrebljivost rezultata projekta „Using Euros“ putem sveobuhvatne analize povratnih informacija korisnika. Ukupno 79 sudionika ocijenilo je platformu kroz 24 dimenzije koje obuhvaćaju tehničku funkcionalnost, pedagošku vrijednost i iskustvo učenja. Primjenom Likertove ljestvice od 5 stupnjeva ispitanici su procjenjivali aspekte kao što su upotrebljivost sučelja, tehnička pouzdanost, pedagoška integracija i ishodi učenja. Statistička analiza izdvojila je visoko korelirane značajke i zasebne klastere faktora koji obilježavaju korisničko iskustvo. Rezultati pokazuju iznimno pozitivan prijem (prosječne ocjene >4.6 u svim dimenzijama), uz najveću suglasnost u pogledu razvoja životnih vještina, angažiranosti učenika i usklađenosti s ciljevima učenja. Elementi tehničke izvedbe i korisničkog iskustva činili su najsnažniji klaster faktora, dok su se postavljanje parametara i procjena napretka izdvojili kao zasebna pitanja. Ovo istraživanje donosi važne uvide za razvojne timove obrazovne tehnologije i praktičare koji žele uvesti učinkovite digitalne platforme za učenje koje povezuju tehničku pouzdanost s pedagoškom vrijednošću.

DESKRIPTIVNA STATISTIKA

  broj aritmetička sredina std min 25% 50% 75% max Pitanje
0 79.0 4.670886075949370 0.7462988847080340 1.0 5.0 5.0 5.0 5.0 Web-stranica radi bez tehničkih problema (1-5)
1 79.0 4.7594936708860800 0.5596516744853900 3.0 5.0 5.0 5.0 5.0 Upute su jasne (1-5)
2 79.0 4.746835443037980 0.5654214318990420 3.0 5.0 5.0 5.0 5.0 Sučelje je prilagođeno korisnicima (1-5)
3 79.0 4.772151898734180 0.505086108135003 3.0 5.0 5.0 5.0 5.0 Kvaliteta grafike (1-5)
4 76.0 4.776315789473680 0.505929750341588 3.0 5.0 5.0 5.0 5.0 Aplikacije rade u najmanje tri preglednika (1-5)
5 76.0 4.723684210526320 0.531631055288692 3.0 5.0 5.0 5.0 5.0 Skočne poruke i upozorenja su korisni (1-5)
6 78.0 4.743589743589740 0.6729639313369270 2.0 5.0 5.0 5.0 5.0 Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5)
7 79.0 4.658227848101270 0.5748149300687360 3.0 4.0 5.0 5.0 5.0 Postavljanje parametara je jednostavno (1-5)
8 79.0 4.69620253164557 0.6066813969699470 3.0 5.0 5.0 5.0 5.0 Korisnici lako pokreću aplikacije (1-5)
9 79.0 4.8354430379746800 0.46493395579608000 3.0 5.0 5.0 5.0 5.0 Skeniranje radi kako treba (1-5)
10 79.0 4.784810126582280 0.5230797869215380 3.0 5.0 5.0 5.0 5.0 Ispisi su dobre kvalitete (1-5)
11 79.0 4.7974683544303800 0.490414446273684 3.0 5.0 5.0 5.0 5.0 Primijenjen je univerzalni dizajn za učenje (1-5)
12 79.0 4.886075949367090 0.31974917141296800 4.0 5.0 5.0 5.0 5.0 Vještine koje se stječu važne su životne vještine (1-5)
13 79.0 4.848101265822790 0.4554121152779830 3.0 5.0 5.0 5.0 5.0 Povratna informacija pomaže učiteljima u praćenju napretka učenika (1-5)
14 79.0 4.822784810126580 0.4163176077654420 3.0 5.0 5.0 5.0 5.0 Aplikacije se mogu integrirati u kurikulum (1-5)
15 79.0 4.6835443037974700 0.5671409131068760 3.0 4.0 5.0 5.0 5.0 Primjeri planova sata su korisni (1-5)
16 79.0 4.860759493670890 0.34840947082971600 4.0 5.0 5.0 5.0 5.0 Korisnici su aktivno uključeni u proces učenja (1-5)
17 79.0 4.7594936708860800 0.45896175678393700 3.0 5.0 5.0 5.0 5.0 Bilješke o metodologijama su korisne (1-5)
18 79.0 4.772151898734180 0.5298613047505830 3.0 5.0 5.0 5.0 5.0 Samovrednovanje motivira učenike (1-5)
19 79.0 4.8734177215189900 0.4346259401911600 3.0 5.0 5.0 5.0 5.0 Učenici mogu raditi vlastitim tempom (1-5)
20 78.0 4.846153846153850 0.36313651960128100 4.0 5.0 5.0 5.0 5.0 Pružene informacije odnose se na ciljeve učenja (1-5)
21 79.0 4.8734177215189900 0.3709685385649280 3.0 5.0 5.0 5.0 5.0 Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika (1-5)
22 79.0 4.772151898734180 0.4790312630611270 3.0 5.0 5.0 5.0 5.0 Učitelji mogu lako procijeniti napredak učenika (1-5)
23 79.0 4.69620253164557 0.627457841667814 3.0 5.0 5.0 5.0 5.0 Aktivnosti se mogu koristiti za grupni rad, ali i za individualni rad (1-5)

Pitanja s velikom varijacijom

Oznaka Pitanje std
A1 Web-stranica radi bez tehničkih problema (1-5) 0.7462988847080340
A7 Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5) 0.6729639313369270
C12 Aktivnosti se mogu koristiti za grupni rad, ali i za individualni rad (1-5) 0.627457841667814
A9 Korisnici lako pokreću aplikacije (1-5) 0.6066813969699470
A8 Postavljanje parametara je jednostavno (1-5) 0.5748149300687360

Pitanja s malom varijacijom

Oznaka Pitanje std
B1 Vještine koje se stječu važne su životne vještine (1-5) 0.31974917141296800
C5 Korisnici su aktivno uključeni u proces učenja (1-5) 0.34840947082971600
C9 Pružene informacije odnose se na ciljeve učenja (1-5) 0.36313651960128100
C10 Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika (1-5) 0.3709685385649280
B3 Aplikacije se mogu integrirati u kurikulum (1-5) 0.4163176077654420

Razumijevanje varijacije u odgovorima (standardna devijacija)

Standardna devijacija (std) u drugom grafikonu pokazuje koliko se odgovori na pojedino pitanje udaljavaju od prosjeka. Evo što nam ona govori:

Mala standardna devijacija (blizu 0) → visoka suglasnost

Ako je standardna devijacija blizu 0, većina ispitanika dala je vrlo slične ocjene (npr. svi su pitanje ocijenili s 5). To upućuje na snažan konsenzus o ocjeni.

Primjer: Ako pitanje o „jasnoći uputa“ ima std = 0, to znači da su se svi složili oko iste ocjene (svi su dali 5 ili svi 4 itd.).

Velika standardna devijacija (iznad 0.5) → raznolikija mišljenja

Veća standardna devijacija znači da su se odgovori među ispitanicima znatno razlikovali. To upućuje na podijeljena mišljenja – neki su dali visoku, a drugi nisku ocjenu.

Primjer: Ako pitanje o „prilagođenosti sučelja korisnicima“ ima std = 0.8, to znači da je nekima sučelje vrlo prilagođeno korisnicima (5), a drugi su ga ocijenili niže (3-4), što pokazuje neslaganje.

Zašto je varijacija važna?

  • Mala varijacija → upućuje na snažan konsenzus (značajka je ili stvarno dobra ili stvarno loša).
  • Velika varijacija → pokazuje područja za poboljšanje (neki su korisnici zadovoljni, a drugi nisu, što ukazuje na probleme s upotrebljivošću).

Pitanja s velikom standardnom devijacijom možda zahtijevaju daljnje istraživanje kako bi se razumjelo zašto su mišljenja podijeljena.

Kategorija pitanja

Kategorija Pitanje
A1 Web-stranica radi bez tehničkih problema (1-5)
A2 Upute su jasne (1-5)
A3 Sučelje je prilagođeno korisnicima (1-5)
A4 Kvaliteta grafike (1-5)
A5 Aplikacije rade u najmanje tri preglednika (1-5)
A6 Skočne poruke i upozorenja su korisni (1-5)
A7 Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5)
A8 Postavljanje parametara je jednostavno (1-5)
A9 Korisnici lako pokreću aplikacije (1-5)
A10 Skeniranje radi kako treba (1-5)
A11 Ispisi su dobre kvalitete (1-5)
A12 Primijenjen je univerzalni dizajn za učenje (1-5)
B1 Vještine koje se stječu važne su životne vještine (1-5)
B2 Povratna informacija pomaže učiteljima u praćenju napretka učenika (1-5)
B3 Aplikacije se mogu integrirati u kurikulum (1-5)
B4 Primjeri planova sata su korisni (1-5)
C5 Korisnici su aktivno uključeni u proces učenja (1-5)
C6 Bilješke o metodologijama su korisne (1-5)
C7 Samovrednovanje motivira učenike (1-5)
C8 Učenici mogu raditi vlastitim tempom (1-5)
C9 Pružene informacije odnose se na ciljeve učenja (1-5)
C10 Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika (1-5)
C11 Učitelji mogu lako procijeniti napredak učenika (1-5)
C12 Aktivnosti se mogu koristiti za grupni rad, ali i za individualni rad (1-5)

KORELACIJE IZMEĐU PITANJA

Najjače korelacije između pitanja (korelacija iznad 0.7), što znači da su odgovori na ta pitanja visoko povezani.

Oznaka 1 Pitanje 1 Tekst pitanja 1 Oznaka 2 Pitanje 2 Tekst pitanja 2 Korelacija
A1 0 Web-stranica radi bez tehničkih problema (1-5) C5 16 Korisnici su aktivno uključeni u proces učenja (1-5) 0.7090125015101340
A2 1 Upute su jasne (1-5) A9 8 Korisnici lako pokreću aplikacije (1-5) 0.7260350618403750
A3 2 Sučelje je prilagođeno korisnicima (1-5) A6 5 Skočne poruke i upozorenja su korisni (1-5) 0.781614675979465
A4 3 Kvaliteta grafike (1-5) A11 10 Ispisi su dobre kvalitete (1-5) 0.734028376223487
A4 3 Kvaliteta grafike (1-5) B1 12 Vještine koje se stječu važne su životne vještine (1-5) 0.7104325775692570
A6 5 Skočne poruke i upozorenja su korisni (1-5) B3 14 Aplikacije se mogu integrirati u kurikulum (1-5) 0.7192552903761100
A7 6 Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5) A9 8 Korisnici lako pokreću aplikacije (1-5) 0.7548860451594470
A9 8 Korisnici lako pokreću aplikacije (1-5) A11 10 Ispisi su dobre kvalitete (1-5) 0.7609438667598360
A10 9 Skeniranje radi kako treba (1-5) A11 10 Ispisi su dobre kvalitete (1-5) 0.7487071134303000
A10 9 Skeniranje radi kako treba (1-5) A12 11 Primijenjen je univerzalni dizajn za učenje (1-5) 0.7516016138604400
C6 17 Bilješke o metodologijama su korisne (1-5) C9 20 Pružene informacije odnose se na ciljeve učenja (1-5) 0.7040041483986320

KLASTERSKA ANALIZA

Klasteri pitanja utvrđeni na temelju eksploratorne faktorske analize (EFA):

Klasteri i njihova grupirana pitanja:

Faktor 1 (najveći klaster):

  • Usmjeren je na upotrebljivost, korisničko iskustvo i angažiranost u učenju.
  • Uključuje pitanja o prilagođenosti sučelja korisnicima, jasnoći uputa, jednostavnosti korištenja, povratnim informacijama i učenju vlastitim tempom.

Faktor 2:

  • Odnosi se na tehničku izvedbu i pristupačnost.
  • Uključuje pitanja o kvaliteti grafike, kompatibilnosti s preglednicima, korisnim upozorenjima, kvaliteti ispisa i planovima sata.

Faktor 3:

Sadrži samo jedno pitanje, o procjeni napretka učenika od strane učitelja.

Faktor 4:

Također sadrži samo jedno pitanje, usmjereno na jednostavnost postavljanja parametara.

Dominantni faktor Pitanja u klasteru
Faktor 1 [[‘A1’, ‘Web-stranica radi bez tehničkih problema (1-5)’], [‘A2’, ‘Upute su jasne (1-5)’], [‘A3’, ‘Sučelje je prilagođeno korisnicima (1-5)’], [‘A7’, ‘Aktivnosti se lako mogu dijeliti s drugim korisnicima (1-5)’], [‘A9’, ‘Korisnici lako pokreću aplikacije (1-5)’], [‘A10’, ‘Skeniranje radi kako treba (1-5)’], [‘A12’, ‘Primijenjen je univerzalni dizajn za učenje (1-5)’], [‘B1’, ‘Vještine koje se stječu važne su životne vještine (1-5)’], [‘B2’, “Povratna informacija pomaže učiteljima u praćenju napretka učenika (1-5)”], [‘B3’, ‘Aplikacije se mogu integrirati u kurikulum (1-5)’], [‘C5’, ‘Korisnici su aktivno uključeni u proces učenja (1-5)’], [‘C7’, ‘Samovrednovanje motivira učenike (1-5)’], [‘C8’, ‘Učenici mogu raditi vlastitim tempom (1-5)’], [‘C9’, ‘Pružene informacije odnose se na ciljeve učenja (1-5)’], [‘C10’, “Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika (1-5)”]]
Faktor 2 [[‘A4’, ‘Kvaliteta grafike (1-5)’], [‘A5’, ‘Aplikacije rade u najmanje tri preglednika (1-5)’], [‘A6’, ‘Skočne poruke i upozorenja su korisni (1-5)’], [‘A11’, ‘Ispisi su dobre kvalitete (1-5)’], [‘B4’, ‘Primjeri planova sata su korisni (1-5)’], [‘C6’, ‘Bilješke o metodologijama su korisne (1-5)’], [‘C12’, ‘Aktivnosti se mogu koristiti za grupni rad, ali i za individualni rad (1-5)’]]
Faktor 3 [[‘C11′, “Učitelji mogu lako procijeniti napredak učenika (1-5)”]]
Faktor 4 [[‘A8’, ‘Postavljanje parametara je jednostavno (1-5)’]]

 

Što to znači?

Faktor 1 upućuje na snažnu povezanost između upotrebljivosti, učinkovitosti učenja i angažiranosti korisnika.

Faktor 2 pokazuje da su kvaliteta grafike, kompatibilnost s preglednicima i strukturirani planovi sata međusobno povezani.

Faktori 3 i 4 su odstupanja, odnosno zasebna pitanja koja se ne grupiraju snažno s ostalima.

Rezultati

Procjena obrazovne tehnološke platforme dala je dosljedno pozitivne ocjene u svih 24 mjerenih dimenzija (N=79). Deskriptivna statistika pokazala je visoke prosječne ocjene od 4.67 do 4.89 na Likertovoj ljestvici od 5 stupnjeva, što upućuje na veliko zadovoljstvo korisnika tehničkim i pedagoškim aspektima platforme.

Deskriptivna analiza

Najbolje ocijenjene značajke bile su „Vještine koje se stječu važne su životne vještine“ (M=4.89, SD=0.32), „Učenici mogu raditi vlastitim tempom“ (M=4.87, SD=0.43) i „Učitelji/roditelji mogu lako prilagoditi aktivnosti potrebama korisnika“ (M=4.87, SD=0.37), što pokazuje posebno priznanje pedagoškoj fleksibilnosti i relevantnosti platforme. Tehnički aspekti također su dobro prihvaćeni: „Skeniranje radi kako treba“ (M=4.84, SD=0.46) i „Ispisi su dobre kvalitete“ (M=4.78, SD=0.52) dobili su visoke pozitivne ocjene.

Analiza varijacije u odgovorima dala je važne uvide u suglasnost korisnika. Najveće slaganje među ispitanicima (na što upućuju najmanje standardne devijacije) odnosilo se na temeljne pedagoške značajke: „Vještine koje se stječu važne su životne vještine“ (SD=0.32), „Korisnici su aktivno uključeni u proces učenja“ (SD=0.35) i „Pružene informacije odnose se na ciljeve učenja“ (SD=0.36). Nasuprot tome, veća varijacija u odgovorima (što upućuje na manju suglasnost) uočena je kod tehničkih značajki kao što su „Web-stranica radi bez tehničkih problema“ (SD=0.75), „Aktivnosti se lako mogu dijeliti s drugim korisnicima“ (SD=0.67) i „Aktivnosti se mogu koristiti za grupni, ali i za individualni rad“ (SD=0.63).

Korelacijska analiza

Korelacijska analiza utvrdila je 11 snažnih povezanosti (r > 0.70) između različitih dimenzija evaluacije. Najsnažnije korelacije uočene su između tvrdnji „Sučelje je prilagođeno korisnicima“ i „Skočne poruke i upozorenja su korisni“ (r=0.78), „Korisnici lako pokreću aplikacije“ i „Ispisi su dobre kvalitete“ (r=0.76) te „Aktivnosti se lako mogu dijeliti s drugim korisnicima“ i „Korisnici lako pokreću aplikacije“ (r=0.75). Te korelacije upućuju na to da je korisnička percepcija kvalitete sučelja usko povezana s korisnošću povratnih informacija sustava te da je jednostavnost rada snažno povezana s kvalitetom izlaznih rezultata.

Značajne korelacije među kategorijama uključivale su „Kvaliteta grafike“ i „Vještine koje se stječu važne su životne vještine“ (r=0.71) te „Web-stranica radi bez tehničkih problema“ i „Korisnici su aktivno uključeni u proces učenja“ (r=0.71), što upućuje na to da aspekti tehničke izvedbe pozitivno utječu na percepciju pedagoške vrijednosti.

Faktorska analiza

Eksploratorna faktorska analiza otkrila je četiri zasebna klastera obilježja platforme:

Faktor 1 (korisničko iskustvo i angažiranost u učenju): Najveća skupina, koja obuhvaća 15 čestica, uključujući upotrebljivost sučelja, tehničku pouzdanost, relevantnost za učenje i autonomiju korisnika. Ovaj dominantni faktor upućuje na snažnu povezanost tehničke funkcionalnosti i pedagoške učinkovitosti, pri čemu jednostavnost korištenja izravno podupire angažiranost u učenju.

Faktor 2 (tehničke performanse i pristupačnost): Sastoji se od 7 čestica koje se odnose na vizualnu kvalitetu, kompatibilnost s različitim preglednicima, povratne informacije sustava i nastavne resurse. Ova skupina pokazuje da kvaliteta izlaznih rezultata i strukturirano vođenje čine koherentan dio iskustva korištenja platforme.

Faktor 3 (mogućnost procjenjivanja): Ovaj faktor sadrži jednu česticu, „Nastavnici lako mogu procijeniti napredak učenika”, i izdvojio se kao zasebno pitanje, odvojeno od ostalih pedagoških značajki, što ističe posebnu važnost funkcionalnosti procjenjivanja.

Faktor 4 (postavljanje parametara): I ovaj faktor sadrži samo jednu česticu, „Postavljanje parametara jednostavan je proces”. Njegova izdvojenost upućuje na to da postavljanje parametara predstavlja specifičan aspekt iskustva korištenja platforme koji zaslužuje posebnu pozornost.

Ukratko, rezultati pokazuju visoko opće zadovoljstvo platformom obrazovne tehnologije, uz posebno snažan konsenzus o njezinoj pedagoškoj vrijednosti. Faktorska analiza otkriva da, iako korisničko iskustvo i angažiranost u učenju čine povezanu jezgru iskustva, pojedine funkcionalnosti, poput procjenjivanja i postavljanja parametara, predstavljaju zasebne aspekte koji zaslužuju posebnu pozornost pri razvoju i primjeni platforme.

Preuzmite istraživačku datotekuGoogle DriveKlikom Google može spremiti kolačićePravila o kolačićima


Kliknite ovdje za pregled članaka na grčkom
Kliknite ovdje za pregled članaka na grčkom
Kliknite ovdje za pregled članaka na portugalskom
Kliknite ovdje za pregled članaka na španjolskom
Kliknite ovdje za pregled članaka na engleskom

0 Comments

Pošaljite komentar

Vaša adresa e-pošte neće biti objavljena. Obavezna polja označena su *


Pomozite nam širiti vijest o ovom projektu i podijelite ovu objavu na društvenim mrežama putem jedne od donjih poveznica!