Valutazione dei risultati del progetto “Using Euros”

Un'analisi completa

Abstract

Questo studio valuta l'efficacia e l'usabilità dei risultati prodotti dal progetto “Using Euros” attraverso un'analisi completa dei feedback degli utenti. In totale 79 partecipanti hanno valutato la piattaforma su 24 dimensioni che riguardano la funzionalità tecnica, il valore pedagogico e l'esperienza di apprendimento. Utilizzando una scala Likert a 5 punti, i rispondenti hanno valutato aspetti quali l'usabilità dell'interfaccia, l'affidabilità tecnica, l'integrazione pedagogica e i risultati di apprendimento. L'analisi statistica ha individuato caratteristiche fortemente correlate e gruppi di fattori distinti che caratterizzano l'esperienza degli utenti. I risultati indicano un'accoglienza estremamente positiva (punteggi medi >4,6 in tutte le dimensioni), con il consenso più forte riguardo allo sviluppo delle competenze di vita, al coinvolgimento degli studenti e alla coerenza con gli obiettivi di apprendimento. Le prestazioni tecniche e gli elementi dell'esperienza d'uso hanno formato il gruppo di fattori più solido, mentre la configurazione dei parametri e la valutazione dei progressi sono emerse come aspetti distinti. Questa ricerca offre spunti fondamentali per gli sviluppatori di tecnologie educative e per i professionisti che desiderano adottare piattaforme di apprendimento digitale efficaci, capaci di coniugare affidabilità tecnica e valore pedagogico.

STATISTICA DESCRITTIVA

  conteggio media dev. std min 25% 50% 75% max Domanda
0 79.0 4.670886075949370 0.7462988847080340 1.0 5.0 5.0 5.0 5.0 Il sito web funziona senza problemi tecnici (1-5)
1 79.0 4.7594936708860800 0.5596516744853900 3.0 5.0 5.0 5.0 5.0 Le istruzioni fornite sono chiare (1-5)
2 79.0 4.746835443037980 0.5654214318990420 3.0 5.0 5.0 5.0 5.0 L'interfaccia è facile da usare (1-5)
3 79.0 4.772151898734180 0.505086108135003 3.0 5.0 5.0 5.0 5.0 Qualità della grafica (1-5)
4 76.0 4.776315789473680 0.505929750341588 3.0 5.0 5.0 5.0 5.0 Le applicazioni funzionano su almeno tre browser (1-5)
5 76.0 4.723684210526320 0.531631055288692 3.0 5.0 5.0 5.0 5.0 I messaggi popup e di avviso sono utili (1-5)
6 78.0 4.743589743589740 0.6729639313369270 2.0 5.0 5.0 5.0 5.0 Le attività possono essere condivise facilmente con altri utenti (1-5)
7 79.0 4.658227848101270 0.5748149300687360 3.0 4.0 5.0 5.0 5.0 Impostare i parametri è un processo semplice (1-5)
8 79.0 4.69620253164557 0.6066813969699470 3.0 5.0 5.0 5.0 5.0 Gli utenti avviano facilmente le applicazioni (1-5)
9 79.0 4.8354430379746800 0.46493395579608000 3.0 5.0 5.0 5.0 5.0 La scansione funziona come richiesto (1-5)
10 79.0 4.784810126582280 0.5230797869215380 3.0 5.0 5.0 5.0 5.0 Le stampe sono di buona qualità (1-5)
11 79.0 4.7974683544303800 0.490414446273684 3.0 5.0 5.0 5.0 5.0 Viene applicata la progettazione universale per l'apprendimento (1-5)
12 79.0 4.886075949367090 0.31974917141296800 4.0 5.0 5.0 5.0 5.0 Le competenze da acquisire sono importanti competenze di vita (1-5)
13 79.0 4.848101265822790 0.4554121152779830 3.0 5.0 5.0 5.0 5.0 Il feedback aiuta gli insegnanti a monitorare i progressi dello studente (1-5)
14 79.0 4.822784810126580 0.4163176077654420 3.0 5.0 5.0 5.0 5.0 Le applicazioni possono essere integrate nel curricolo (1-5)
15 79.0 4.6835443037974700 0.5671409131068760 3.0 4.0 5.0 5.0 5.0 I piani di lezione di esempio sono utili (1-5)
16 79.0 4.860759493670890 0.34840947082971600 4.0 5.0 5.0 5.0 5.0 Gli utenti sono coinvolti attivamente nel processo di apprendimento (1-5)
17 79.0 4.7594936708860800 0.45896175678393700 3.0 5.0 5.0 5.0 5.0 Le note sulle metodologie sono utili (1-5)
18 79.0 4.772151898734180 0.5298613047505830 3.0 5.0 5.0 5.0 5.0 L'autovalutazione motiva gli studenti (1-5)
19 79.0 4.8734177215189900 0.4346259401911600 3.0 5.0 5.0 5.0 5.0 Gli studenti possono lavorare con i propri tempi (1-5)
20 78.0 4.846153846153850 0.36313651960128100 4.0 5.0 5.0 5.0 5.0 Le informazioni fornite sono coerenti con gli obiettivi di apprendimento (1-5)
21 79.0 4.8734177215189900 0.3709685385649280 3.0 5.0 5.0 5.0 5.0 Insegnanti e genitori possono adattare facilmente le attività alle esigenze dell'utente (1-5)
22 79.0 4.772151898734180 0.4790312630611270 3.0 5.0 5.0 5.0 5.0 Gli insegnanti possono valutare facilmente i progressi degli studenti (1-5)
23 79.0 4.69620253164557 0.627457841667814 3.0 5.0 5.0 5.0 5.0 Le attività possono essere usate sia per il lavoro di gruppo sia per quello individuale (1-5)

Domande con alta variazione

Etichetta Domanda dev. std
A1 Il sito web funziona senza problemi tecnici (1-5) 0.7462988847080340
A7 Le attività possono essere condivise facilmente con altri utenti (1-5) 0.6729639313369270
C12 Le attività possono essere usate sia per il lavoro di gruppo sia per quello individuale (1-5) 0.627457841667814
A9 Gli utenti avviano facilmente le applicazioni (1-5) 0.6066813969699470
A8 Impostare i parametri è un processo semplice (1-5) 0.5748149300687360

Domande con bassa variazione

Etichetta Domanda dev. std
B1 Le competenze da acquisire sono importanti competenze di vita (1-5) 0.31974917141296800
C5 Gli utenti sono coinvolti attivamente nel processo di apprendimento (1-5) 0.34840947082971600
C9 Le informazioni fornite sono coerenti con gli obiettivi di apprendimento (1-5) 0.36313651960128100
C10 Insegnanti e genitori possono adattare facilmente le attività alle esigenze dell'utente (1-5) 0.3709685385649280
B3 Le applicazioni possono essere integrate nel curricolo (1-5) 0.4163176077654420

Capire la variazione nelle risposte (deviazione standard)

La deviazione standard (dev. std) nel secondo grafico indica quanto le risposte a ciascuna domanda si discostano dalla media. Ecco cosa ci dice:

Deviazione standard bassa (vicina a 0) → Alto accordo

Se la deviazione standard è vicina a 0, significa che la maggior parte dei rispondenti ha dato valutazioni molto simili (ad es. tutti hanno assegnato 5 a una domanda). Questo indica un forte consenso sulla valutazione.

Esempio: se per una domanda sulla “chiarezza delle istruzioni” la dev. std = 0, significa che tutti erano d'accordo su uno stesso punteggio (tutti 5 o tutti 4, ecc.).

Deviazione standard alta (superiore a 0,5) → Opinioni più diversificate

Una deviazione standard più alta significa che le risposte variano in modo significativo tra i rispondenti. Questo indica opinioni discordanti: alcuni hanno dato un punteggio alto, altri basso.

Esempio: se per una domanda sulla “facilità d'uso dell'interfaccia” la dev. std = 0,8, significa che alcune persone l'hanno trovata molto facile da usare (5), mentre altre hanno dato un punteggio più basso (3-4), segno di disaccordo.

Perché la variazione è importante?

  • Variazione bassa → Indica un forte consenso (la caratteristica è davvero buona oppure davvero scarsa).
  • Variazione alta → Individua aree di miglioramento (alcuni utenti sono soddisfatti, altri no, il che segnala problemi di usabilità).

Le domande con deviazione standard elevata potrebbero richiedere ulteriori approfondimenti per capire perché le opinioni siano divise.

Domande per categoria

Categoria Domanda
A1 Il sito web funziona senza problemi tecnici (1-5)
A2 Le istruzioni fornite sono chiare (1-5)
A3 L'interfaccia è facile da usare (1-5)
A4 Qualità della grafica (1-5)
A5 Le applicazioni funzionano su almeno tre browser (1-5)
A6 I messaggi popup e di avviso sono utili (1-5)
A7 Le attività possono essere condivise facilmente con altri utenti (1-5)
A8 Impostare i parametri è un processo semplice (1-5)
A9 Gli utenti avviano facilmente le applicazioni (1-5)
A10 La scansione funziona come richiesto (1-5)
A11 Le stampe sono di buona qualità (1-5)
A12 Viene applicata la progettazione universale per l'apprendimento (1-5)
B1 Le competenze da acquisire sono importanti competenze di vita (1-5)
B2 Il feedback aiuta gli insegnanti a monitorare i progressi dello studente (1-5)
B3 Le applicazioni possono essere integrate nel curricolo (1-5)
B4 I piani di lezione di esempio sono utili (1-5)
C5 Gli utenti sono coinvolti attivamente nel processo di apprendimento (1-5)
C6 Le note sulle metodologie sono utili (1-5)
C7 L'autovalutazione motiva gli studenti (1-5)
C8 Gli studenti possono lavorare con i propri tempi (1-5)
C9 Le informazioni fornite sono coerenti con gli obiettivi di apprendimento (1-5)
C10 Insegnanti e genitori possono adattare facilmente le attività alle esigenze dell'utente (1-5)
C11 Gli insegnanti possono valutare facilmente i progressi degli studenti (1-5)
C12 Le attività possono essere usate sia per il lavoro di gruppo sia per quello individuale (1-5)

CORRELAZIONI TRA LE DOMANDE

Le correlazioni più forti tra le domande (correlazione superiore a 0,7), che indicano che le risposte a queste domande sono fortemente collegate.

Etichetta 1 Domanda 1 Testo della domanda 1 Etichetta 2 Domanda 2 Testo della domanda 2 Correlazione
A1 0 Il sito web funziona senza problemi tecnici (1-5) C5 16 Gli utenti sono coinvolti attivamente nel processo di apprendimento (1-5) 0.7090125015101340
A2 1 Le istruzioni fornite sono chiare (1-5) A9 8 Gli utenti avviano facilmente le applicazioni (1-5) 0.7260350618403750
A3 2 L'interfaccia è facile da usare (1-5) A6 5 I messaggi popup e di avviso sono utili (1-5) 0.781614675979465
A4 3 Qualità della grafica (1-5) A11 10 Le stampe sono di buona qualità (1-5) 0.734028376223487
A4 3 Qualità della grafica (1-5) B1 12 Le competenze da acquisire sono importanti competenze di vita (1-5) 0.7104325775692570
A6 5 I messaggi popup e di avviso sono utili (1-5) B3 14 Le applicazioni possono essere integrate nel curricolo (1-5) 0.7192552903761100
A7 6 Le attività possono essere condivise facilmente con altri utenti (1-5) A9 8 Gli utenti avviano facilmente le applicazioni (1-5) 0.7548860451594470
A9 8 Gli utenti avviano facilmente le applicazioni (1-5) A11 10 Le stampe sono di buona qualità (1-5) 0.7609438667598360
A10 9 La scansione funziona come richiesto (1-5) A11 10 Le stampe sono di buona qualità (1-5) 0.7487071134303000
A10 9 La scansione funziona come richiesto (1-5) A12 11 Viene applicata la progettazione universale per l'apprendimento (1-5) 0.7516016138604400
C6 17 Le note sulle metodologie sono utili (1-5) C9 20 Le informazioni fornite sono coerenti con gli obiettivi di apprendimento (1-5) 0.7040041483986320

ANALISI DEI CLUSTER

Cluster di domande individuati sulla base dell'analisi fattoriale esplorativa (EFA):

Cluster e relative domande raggruppate:

Fattore 1 (cluster più grande):

  • Si concentra su usabilità, esperienza d'uso e coinvolgimento nell'apprendimento.
  • Comprende domande sulla facilità d'uso dell'interfaccia, la chiarezza delle istruzioni, la semplicità di utilizzo, il feedback e l'apprendimento secondo i propri tempi.

Fattore 2:

  • Riguarda le prestazioni tecniche e l'accessibilità.
  • Comprende domande sulla qualità della grafica, la compatibilità con i browser, l'utilità dei messaggi di avviso, la qualità di stampa e i piani di lezione.

Fattore 3:

Contiene una sola domanda, relativa alla valutazione dei progressi degli studenti da parte degli insegnanti.

Fattore 4:

Contiene anch'esso una sola domanda, incentrata sulla facilità di impostazione dei parametri.

Fattore dominante Domande nel cluster
Fattore 1 [[‘A1’, ‘Il sito web funziona senza problemi tecnici (1-5)’], [‘A2’, ‘Le istruzioni fornite sono chiare (1-5)’], [‘A3’, “L'interfaccia è facile da usare (1-5)”], [‘A7’, ‘Le attività possono essere condivise facilmente con altri utenti (1-5)’], [‘A9’, ‘Gli utenti avviano facilmente le applicazioni (1-5)’], [‘A10’, ‘La scansione funziona come richiesto (1-5)’], [‘A12’, “Viene applicata la progettazione universale per l'apprendimento (1-5)”], [‘B1’, ‘Le competenze da acquisire sono importanti competenze di vita (1-5)’], [‘B2’, ‘Il feedback aiuta gli insegnanti a monitorare i progressi dello studente (1-5)’], [‘B3’, ‘Le applicazioni possono essere integrate nel curricolo (1-5)’], [‘C5’, ‘Gli utenti sono coinvolti attivamente nel processo di apprendimento (1-5)’], [‘C7’, “L'autovalutazione motiva gli studenti (1-5)”], [‘C8’, ‘Gli studenti possono lavorare con i propri tempi (1-5)’], [‘C9’, ‘Le informazioni fornite sono coerenti con gli obiettivi di apprendimento (1-5)’], [‘C10’, “Insegnanti e genitori possono adattare facilmente le attività alle esigenze dell'utente (1-5)”]]
Fattore 2 [[‘A4’, ‘Qualità della grafica (1-5)’], [‘A5’, ‘Le applicazioni funzionano su almeno tre browser (1-5)’], [‘A6’, ‘I messaggi popup e di avviso sono utili (1-5)’], [‘A11’, ‘Le stampe sono di buona qualità (1-5)’], [‘B4’, ‘I piani di lezione di esempio sono utili (1-5)’], [‘C6’, ‘Le note sulle metodologie sono utili (1-5)’], [‘C12’, ‘Le attività possono essere usate sia per il lavoro di gruppo sia per quello individuale (1-5)’]]
Fattore 3 [[‘C11′, ‘Gli insegnanti possono valutare facilmente i progressi degli studenti (1-5)’]]
Fattore 4 [[‘A8’, ‘Impostare i parametri è un processo semplice (1-5)’]]

 

Cosa significa?

Il Fattore 1 indica un forte legame tra usabilità, efficacia dell'apprendimento e coinvolgimento degli utenti.

Il Fattore 2 indica che qualità della grafica, compatibilità con i browser e piani di lezione strutturati sono collegati tra loro.

I Fattori 3 e 4 sono valori anomali: rappresentano aspetti a sé stanti che non si raggruppano in modo marcato con gli altri.

Risultati

La valutazione della piattaforma di tecnologia educativa ha dato risultati costantemente positivi in tutte le 24 dimensioni misurate (N=79). Le statistiche descrittive hanno evidenziato punteggi medi elevati, compresi tra 4,67 e 4,89 su una scala Likert a 5 punti, a indicare una forte soddisfazione degli utenti sia per gli aspetti tecnici sia per quelli pedagogici della piattaforma.

Analisi descrittiva

Le caratteristiche con le valutazioni più alte sono state “Le competenze da acquisire sono importanti competenze di vita” (M=4,89, DS=0,32), “Gli studenti possono lavorare con i propri tempi” (M=4,87, DS=0,43) e “Insegnanti e genitori possono adattare facilmente le attività alle esigenze dell'utente” (M=4,87, DS=0,37), a dimostrazione di un apprezzamento particolare per la flessibilità pedagogica e la pertinenza della piattaforma. Anche gli aspetti tecnici sono stati accolti bene: “La scansione funziona come richiesto” (M=4,84, DS=0,46) e “Le stampe sono di buona qualità” (M=4,78, DS=0,52) hanno ricevuto valutazioni molto positive.

L'analisi della variazione nelle risposte ha fornito indicazioni importanti sul consenso degli utenti. L'accordo più forte tra i rispondenti (indicato dalle deviazioni standard più basse) ha riguardato le caratteristiche pedagogiche fondamentali: “Le competenze da acquisire sono importanti competenze di vita” (DS=0,32), “Gli utenti sono coinvolti attivamente nel processo di apprendimento” (DS=0,35) e “Le informazioni fornite sono coerenti con gli obiettivi di apprendimento” (DS=0,36). Al contrario, una maggiore variazione nelle risposte (che indica un consenso minore) è stata osservata per le caratteristiche tecniche, come “Il sito web funziona senza problemi tecnici” (DS=0,75), “Le attività possono essere condivise facilmente con altri utenti” (DS=0,67) e “Le attività possono essere usate sia per il lavoro di gruppo sia per quello individuale” (DS=0,63).

Analisi delle correlazioni

L'analisi delle correlazioni ha individuato 11 relazioni forti (r > 0,70) tra le diverse dimensioni di valutazione. Le correlazioni più forti sono state osservate tra “L'interfaccia è facile da usare” e “I messaggi popup e di avviso sono utili” (r=0,78), tra “Gli utenti avviano facilmente le applicazioni” e “Le stampe sono di buona qualità” (r=0,76) e tra “Le attività possono essere condivise facilmente con altri utenti” e “Gli utenti avviano facilmente le applicazioni” (r=0,75). Queste correlazioni suggeriscono che la percezione della qualità dell'interfaccia è strettamente legata all'utilità del feedback del sistema e che la facilità d'uso è fortemente correlata alla qualità dei risultati prodotti.

Tra le correlazioni più rilevanti tra categorie diverse figurano “Qualità della grafica” con “Le competenze da acquisire sono importanti competenze di vita” (r=0,71) e “Il sito web funziona senza problemi tecnici” con “Gli utenti sono coinvolti attivamente nel processo di apprendimento” (r=0,71), il che indica che gli aspetti legati alle prestazioni tecniche influiscono positivamente sulla percezione del valore pedagogico.

Analisi fattoriale

L'analisi fattoriale esplorativa ha rivelato quattro gruppi distinti di caratteristiche della piattaforma:

Fattore 1 (Esperienza d'uso e coinvolgimento nell'apprendimento): Il gruppo più ampio, composto da 15 item che comprendono usabilità dell'interfaccia, affidabilità tecnica, pertinenza didattica e autonomia dell'utente. Questo fattore dominante suggerisce una forte interconnessione tra funzionalità tecnica ed efficacia pedagogica, in cui la facilità d'uso favorisce direttamente il coinvolgimento nell'apprendimento.

Fattore 2 (Prestazioni tecniche e accessibilità): Composto da 7 item relativi alla qualità visiva, alla compatibilità tra browser, al feedback del sistema e alle risorse didattiche. Questo gruppo indica che la qualità dei risultati e una guida strutturata costituiscono un aspetto coerente dell'esperienza sulla piattaforma.

Fattore 3 (Capacità di valutazione): Contenente l'unico item «Gli insegnanti possono valutare facilmente i progressi degli studenti», questo fattore è emerso come un aspetto distinto, separato dalle altre caratteristiche pedagogiche, a sottolineare l'importanza specifica della funzione di valutazione.

Fattore 4 (Configurazione dei parametri): Anch'esso composto da un solo item, «Impostare i parametri è un processo semplice», questo fattore, rimasto isolato, suggerisce che la configurazione dei parametri rappresenti un aspetto specifico dell'esperienza sulla piattaforma, che merita un'attenzione dedicata.

In sintesi, i risultati mostrano un'elevata soddisfazione complessiva nei confronti della piattaforma di tecnologia educativa, con un consenso particolarmente forte sul suo valore pedagogico. L'analisi fattoriale rivela che, mentre l'esperienza d'uso e il coinvolgimento nell'apprendimento formano un nucleo coeso, funzionalità specifiche come la valutazione e la configurazione dei parametri rappresentano aspetti distinti, che meritano una considerazione specifica nello sviluppo e nell'implementazione della piattaforma.

Scarica il file della ricercaGoogle DriveCon il clic, Google può memorizzare cookieCookie Policy


Clicca qui per visualizzare gli articoli in greco
Clicca qui per visualizzare gli articoli in greco
Clicca qui per visualizzare gli articoli in portoghese
Clicca qui per visualizzare gli articoli in spagnolo
Clicca qui per visualizzare gli articoli in inglese

0 Comments

Invia un commento

Il tuo indirizzo email non sarà pubblicato. I campi obbligatori sono contrassegnati *


Aiutaci a far conoscere questo progetto: usa uno dei link qui sotto per condividere questo post sui social network!