Evaluación de los Resultados del Proyecto "Usando Euros"
Un Análisis Exhaustivo
Resumen
Este estudio evalúa la eficacia y usabilidad de los resultados producidos por el proyecto "Usando Euros" a través de un análisis exhaustivo de la retroalimentación de los usuarios. Un total de 79 participantes evaluaron la plataforma en 24 dimensiones que abarcan la funcionalidad técnica, el valor pedagógico y la experiencia de aprendizaje. Utilizando una escala Likert de 5 puntos, los encuestados evaluaron aspectos como la usabilidad de la interfaz, la fiabilidad técnica, la integración pedagógica y los resultados de aprendizaje. El análisis estadístico identificó características altamente correlacionadas y grupos de factores distintos que caracterizan la experiencia del usuario. Los resultados indican una recepción abrumadoramente positiva (puntuaciones medias >4,6 en todas las dimensiones) con el consenso más fuerte respecto al desarrollo de habilidades para la vida, la participación del estudiante y la alineación con los objetivos de aprendizaje. Los elementos de rendimiento técnico y experiencia del usuario formaron el grupo de factores más robusto, mientras que la configuración de parámetros y la evaluación del progreso surgieron como consideraciones distintas. Esta investigación proporciona información crítica para desarrolladores de tecnología educativa y profesionales que buscan implementar plataformas de aprendizaje digital efectivas que equilibren la fiabilidad técnica con el valor pedagógico.
ESTADÍSTICAS DESCRIPTIVAS
| count | mean | std | min | 25% | 50% | 75% | max | Pregunta | |
|---|---|---|---|---|---|---|---|---|---|
| 0 | 79.0 | 4.670886075949370 | 0.7462988847080340 | 1.0 | 5.0 | 5.0 | 5.0 | 5.0 | El sitio web funciona sin fallos técnicos (1-5) |
| 1 | 79.0 | 4.7594936708860800 | 0.5596516744853900 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Las instrucciones proporcionadas son claras (1-5) |
| 2 | 79.0 | 4.746835443037980 | 0.5654214318990420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | La interfaz es amigable (1-5) |
| 3 | 79.0 | 4.772151898734180 | 0.505086108135003 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Calidad de los gráficos (1-5) |
| 4 | 76.0 | 4.776315789473680 | 0.505929750341588 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Las aplicaciones funcionan en al menos tres navegadores (1-5) |
| 5 | 76.0 | 4.723684210526320 | 0.531631055288692 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Los mensajes emergentes y de advertencia son útiles (1-5) |
| 6 | 78.0 | 4.743589743589740 | 0.6729639313369270 | 2.0 | 5.0 | 5.0 | 5.0 | 5.0 | Las actividades pueden compartirse fácilmente entre otros usuarios (1-5) |
| 7 | 79.0 | 4.658227848101270 | 0.5748149300687360 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Configurar los parámetros es un proceso sencillo (1-5) |
| 8 | 79.0 | 4.69620253164557 | 0.6066813969699470 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Los usuarios ejecutan fácilmente las aplicaciones (1-5) |
| 9 | 79.0 | 4.8354430379746800 | 0.46493395579608000 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | El escaneo funciona según lo requerido (1-5) |
| 10 | 79.0 | 4.784810126582280 | 0.5230797869215380 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Las impresiones son de buena calidad (1-5) |
| 11 | 79.0 | 4.7974683544303800 | 0.490414446273684 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Se aplica el Diseño Universal de Aprendizaje (1-5) |
| 12 | 79.0 | 4.886075949367090 | 0.31974917141296800 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Las habilidades a adquirir son habilidades importantes para la vida (1-5) |
| 13 | 79.0 | 4.848101265822790 | 0.4554121152779830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | La retroalimentación ayuda a los profesores a monitorear el progreso de los estudiantes (1-5) |
| 14 | 79.0 | 4.822784810126580 | 0.4163176077654420 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Las aplicaciones pueden integrarse en el currículo (1-5) |
| 15 | 79.0 | 4.6835443037974700 | 0.5671409131068760 | 3.0 | 4.0 | 5.0 | 5.0 | 5.0 | Los planes de lección de muestra son útiles (1-5) |
| 16 | 79.0 | 4.860759493670890 | 0.34840947082971600 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | Los usuarios están activamente involucrados en el proceso de aprendizaje (1-5) |
| 17 | 79.0 | 4.7594936708860800 | 0.45896175678393700 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Las notas sobre Metodologías son útiles (1-5) |
| 18 | 79.0 | 4.772151898734180 | 0.5298613047505830 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | La autoevaluación motiva a los estudiantes (1-5) |
| 19 | 79.0 | 4.8734177215189900 | 0.4346259401911600 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Los estudiantes pueden trabajar a su propio ritmo (1-5) |
| 20 | 78.0 | 4.846153846153850 | 0.36313651960128100 | 4.0 | 5.0 | 5.0 | 5.0 | 5.0 | La información proporcionada se relaciona con los objetivos de aprendizaje (1-5) |
| 21 | 79.0 | 4.8734177215189900 | 0.3709685385649280 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Los profesores/padres pueden adaptar fácilmente las Actividades a las necesidades del usuario (1-5) |
| 22 | 79.0 | 4.772151898734180 | 0.4790312630611270 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Los profesores pueden evaluar fácilmente el progreso de los estudiantes (1-5) |
| 23 | 79.0 | 4.69620253164557 | 0.627457841667814 | 3.0 | 5.0 | 5.0 | 5.0 | 5.0 | Las Actividades pueden usarse tanto para trabajo en grupo como para trabajo individual (1-5) |
Preguntas con alta variación
| Etiqueta | Pregunta | std |
|---|---|---|
| A1 | El sitio web funciona sin fallos técnicos (1-5) | 0.7462988847080340 |
| A7 | Las actividades pueden compartirse fácilmente entre otros usuarios (1-5) | 0.6729639313369270 |
| C12 | Las Actividades pueden usarse tanto para trabajo en grupo como para trabajo individual (1-5) | 0.627457841667814 |
| A9 | Los usuarios ejecutan fácilmente las aplicaciones (1-5) | 0.6066813969699470 |
| A8 | Configurar los parámetros es un proceso sencillo (1-5) | 0.5748149300687360 |
Preguntas con baja variación
| Etiqueta | Pregunta | std |
|---|---|---|
| B1 | Las habilidades a adquirir son habilidades importantes para la vida (1-5) | 0.31974917141296800 |
| C5 | Los usuarios están activamente involucrados en el proceso de aprendizaje (1-5) | 0.34840947082971600 |
| C9 | La información proporcionada se relaciona con los objetivos de aprendizaje (1-5) | 0.36313651960128100 |
| C10 | Los profesores/padres pueden adaptar fácilmente las Actividades a las necesidades del usuario (1-5) | 0.3709685385649280 |
| B3 | Las aplicaciones pueden integrarse en el currículo (1-5) | 0.4163176077654420 |
Comprendiendo la Variación en las Respuestas (Desviación Estándar)
La desviación estándar (std) en el segundo gráfico representa cuánto se desvían las respuestas para cada pregunta de la media. Esto es lo que nos indica:
Desviación Estándar Baja (Cerca de 0) → Alta Concordancia
Si la desviación estándar está cerca de 0, significa que la mayoría de los encuestados dieron calificaciones muy similares (por ejemplo, todos calificaron una pregunta como 5). Esto sugiere un fuerte consenso en la calificación.
Ejemplo: Si una pregunta sobre "claridad de las instrucciones" tiene std = 0, significa que todos estuvieron de acuerdo en una puntuación particular (todos la calificaron como 5 o todos como 4, etc.).
Desviación Estándar Alta (Por encima de 0.5) → Opiniones Más Diversas
Una desviación estándar más alta significa que las respuestas variaron significativamente entre los encuestados. Esto sugiere opiniones mixtas—algunos la calificaron alta, mientras que otros la calificaron baja, mostrando desacuerdo.
Ejemplo: Si una pregunta sobre "amigabilidad de la interfaz" tiene std = 0.8, indica que algunas personas la encontraron muy amigable (5), mientras que otras la calificaron más bajo (3-4), mostrando desacuerdo.
¿Por qué es Importante la Variación?
- Baja variación → Indica fuerte consenso (ya sea que la característica es realmente buena o realmente mala).
- Alta variación → Identifica áreas de mejora (algunos usuarios están satisfechos, mientras que otros no, mostrando preocupaciones de usabilidad).
Las preguntas con desviaciones estándar altas podrían necesitar más investigación para entender por qué las opiniones están divididas.
Categoría Pregunta
| Categoría | Pregunta |
|---|---|
| A1 | El sitio web funciona sin fallos técnicos (1-5) |
| A2 | Las instrucciones proporcionadas son claras (1-5) |
| A3 | La interfaz es amigable (1-5) |
| A4 | Calidad de los gráficos (1-5) |
| A5 | Las aplicaciones funcionan en al menos tres navegadores (1-5) |
| A6 | Los mensajes emergentes y de advertencia son útiles (1-5) |
| A7 | Las actividades pueden compartirse fácilmente entre otros usuarios (1-5) |
| A8 | Configurar los parámetros es un proceso sencillo (1-5) |
| A9 | Los usuarios ejecutan fácilmente las aplicaciones (1-5) |
| A10 | El escaneo funciona según lo requerido (1-5) |
| A11 | Las impresiones son de buena calidad (1-5) |
| A12 | Se aplica el Diseño Universal de Aprendizaje (1-5) |
| B1 | Las habilidades a adquirir son habilidades importantes para la vida (1-5) |
| B2 | La retroalimentación ayuda a los profesores a monitorear el progreso de los estudiantes (1-5) |
| B3 | Las aplicaciones pueden integrarse en el currículo (1-5) |
| B4 | Los planes de lección de muestra son útiles (1-5) |
| C5 | Los usuarios están activamente involucrados en el proceso de aprendizaje (1-5) |
| C6 | Las notas sobre Metodologías son útiles (1-5) |
| C7 | La autoevaluación motiva a los estudiantes (1-5) |
| C8 | Los estudiantes pueden trabajar a su propio ritmo (1-5) |
| C9 | La información proporcionada se relaciona con los objetivos de aprendizaje (1-5) |
| C10 | Los profesores/padres pueden adaptar fácilmente las Actividades a las necesidades del usuario (1-5) |
| C11 | Los profesores pueden evaluar fácilmente el progreso de los estudiantes (1-5) |
| C12 | Las Actividades pueden usarse tanto para trabajo en grupo como para trabajo individual (1-5) |
CORRELACIONES ENTRE PREGUNTAS
Correlaciones más fuertes entre preguntas (correlación superior a 0.7), lo que indica que las respuestas a estas preguntas están altamente relacionadas.
| Etiqueta 1 | Pregunta 1 | Texto Pregunta 1 | Etiqueta 2 | Pregunta 2 | Texto Pregunta 2 | Correlación |
|---|---|---|---|---|---|---|
| A1 | 0 | El sitio web funciona sin fallos técnicos (1-5) | C5 | 16 | Los usuarios están activamente involucrados en el proceso de aprendizaje (1-5) | 0.7090125015101340 |
| A2 | 1 | Las instrucciones proporcionadas son claras (1-5) | A9 | 8 | Los usuarios ejecutan fácilmente las aplicaciones (1-5) | 0.7260350618403750 |
| A3 | 2 | La interfaz es amigable (1-5) | A6 | 5 | Los mensajes emergentes y de advertencia son útiles (1-5) | 0.781614675979465 |
| A4 | 3 | Calidad de los gráficos (1-5) | A11 | 10 | Las impresiones son de buena calidad (1-5) | 0.734028376223487 |
| A4 | 3 | Calidad de los gráficos (1-5) | B1 | 12 | Las habilidades a adquirir son habilidades importantes para la vida (1-5) | 0.7104325775692570 |
| A6 | 5 | Los mensajes emergentes y de advertencia son útiles (1-5) | B3 | 14 | Las aplicaciones pueden integrarse en el currículo (1-5) | 0.7192552903761100 |
| A7 | 6 | Las actividades pueden compartirse fácilmente entre otros usuarios (1-5) | A9 | 8 | Los usuarios ejecutan fácilmente las aplicaciones (1-5) | 0.7548860451594470 |
| A9 | 8 | Los usuarios ejecutan fácilmente las aplicaciones (1-5) | A11 | 10 | Las impresiones son de buena calidad (1-5) | 0.7609438667598360 |
| A10 | 9 | El escaneo funciona según lo requerido (1-5) | A11 | 10 | Las impresiones son de buena calidad (1-5) | 0.7487071134303000 |
| A10 | 9 | El escaneo funciona según lo requerido (1-5) | A12 | 11 | Se aplica el Diseño Universal de Aprendizaje (1-5) | 0.7516016138604400 |
| C6 | 17 | Las notas sobre Metodologías son útiles (1-5) | C9 | 20 | La información proporcionada se relaciona con los objetivos de aprendizaje (1-5) | 0.7040041483986320 |
ANÁLISIS DE CLÚSTERES
Clústeres identificados de preguntas basados en el Análisis Factorial Exploratorio (EFA):
Clústeres y Sus Preguntas Agrupadas:
Factor 1 (Clúster más grande):
- Se centra en la usabilidad, experiencia del usuario y participación en el aprendizaje.
- Incluye preguntas sobre la amigabilidad de la interfaz, claridad de las instrucciones, facilidad de uso, retroalimentación y aprendizaje a propio ritmo.
Factor 2:
- Se relaciona con el rendimiento técnico y la accesibilidad.
- Incluye preguntas sobre la calidad de los gráficos, compatibilidad con navegadores, advertencias útiles, calidad de impresión y planes de lección.
Factor 3:
Contiene solo una pregunta relacionada con la evaluación del progreso de los estudiantes por los profesores.
Factor 4:
También contiene solo una pregunta, centrada en la facilidad de configuración de parámetros.
| Factor Dominante | Preguntas en el Clúster |
|---|---|
| Factor 1 | [['A1', 'El sitio web funciona sin fallos técnicos (1-5)'], ['A2', 'Las instrucciones proporcionadas son claras (1-5)'], ['A3', 'La interfaz es amigable (1-5)'], ['A7', 'Las actividades pueden compartirse fácilmente entre otros usuarios (1-5)'], ['A9', 'Los usuarios ejecutan fácilmente las aplicaciones (1-5)'], ['A10', 'El escaneo funciona según lo requerido (1-5)'], ['A12', 'Se aplica el Diseño Universal de Aprendizaje (1-5)'], ['B1', 'Las habilidades a adquirir son habilidades importantes para la vida (1-5)'], ['B2', 'La retroalimentación ayuda a los profesores a monitorear el progreso de los estudiantes (1-5)'], ['B3', 'Las aplicaciones pueden integrarse en el currículo (1-5)'], ['C5', 'Los usuarios están activamente involucrados en el proceso de aprendizaje (1-5)'], ['C7', 'La autoevaluación motiva a los estudiantes (1-5)'], ['C8', 'Los estudiantes pueden trabajar a su propio ritmo (1-5)'], ['C9', 'La información proporcionada se relaciona con los objetivos de aprendizaje (1-5)'], ['C10', 'Los profesores/padres pueden adaptar fácilmente las Actividades a las necesidades del usuario (1-5)']] |
| Factor 2 | [['A4', 'Calidad de los gráficos (1-5)'], ['A5', 'Las aplicaciones funcionan en al menos tres navegadores (1-5)'], ['A6', 'Los mensajes emergentes y de advertencia son útiles (1-5)'], ['A11', 'Las impresiones son de buena calidad (1-5)'], ['B4', 'Los planes de lección de muestra son útiles (1-5)'], ['C6', 'Las notas sobre Metodologías son útiles (1-5)'], ['C12', 'Las Actividades pueden usarse tanto para trabajo en grupo como para trabajo individual (1-5)']] |
| Factor 3 | [['C11', 'Los profesores pueden evaluar fácilmente el progreso de los estudiantes (1-5)']] |
| Factor 4 | [['A8', 'Configurar los parámetros es un proceso sencillo (1-5)']] |
¿Qué Significa Esto?
El Factor 1 sugiere una fuerte relación entre usabilidad, efectividad del aprendizaje y participación del usuario.
El Factor 2 indica que la calidad de los gráficos, compatibilidad con navegadores y planes de lección estructurados están vinculados entre sí.
Los Factores 3 y 4 son valores atípicos, indicando preocupaciones independientes que no se agrupan fuertemente con otras.
Resultados
La evaluación de la plataforma de tecnología educativa produjo evaluaciones consistentemente positivas en todas las 24 dimensiones medidas (N=79). Las estadísticas descriptivas revelaron puntuaciones medias altas que oscilan entre 4,67 y 4,89 en una escala Likert de 5 puntos, lo que indica una fuerte satisfacción del usuario con los aspectos tanto técnicos como pedagógicos de la plataforma.
Análisis Descriptivo
Las características mejor valoradas fueron "Las habilidades a adquirir son habilidades importantes para la vida" (M=4,89, SD=0,32), "Los estudiantes pueden trabajar a su propio ritmo" (M=4,87, SD=0,43), y "Los profesores/padres pueden adaptar fácilmente las actividades a las necesidades del usuario" (M=4,87, SD=0,37), demostrando una particular apreciación por la flexibilidad pedagógica y relevancia de la plataforma. Los aspectos técnicos también fueron bien recibidos, con "El escaneo funciona según lo requerido" (M=4,84, SD=0,46) y "Las impresiones son de buena calidad" (M=4,78, SD=0,52) recibiendo evaluaciones fuertemente positivas.
El análisis de la variación en las respuestas reveló información importante sobre el consenso de los usuarios. El acuerdo más fuerte entre los encuestados (indicado por las desviaciones estándar más bajas) se centró en características pedagógicas fundamentales: "Las habilidades a adquirir son habilidades importantes para la vida" (SD=0,32), "Los usuarios están activamente involucrados en el proceso de aprendizaje" (SD=0,35), y "La información proporcionada se relaciona con los objetivos de aprendizaje" (SD=0,36). Por el contrario, se observó una mayor variación en las respuestas (indicando menos consenso) para características técnicas como "El sitio web funciona sin fallos técnicos" (SD=0,75), "Las actividades pueden compartirse fácilmente entre otros usuarios" (SD=0,67), y "Las Actividades pueden usarse tanto para trabajo en grupo como para trabajo individual" (SD=0,63).
Análisis de Correlación
El análisis de correlación identificó 11 relaciones fuertes (r > 0,70) entre diferentes dimensiones de evaluación. Las correlaciones más fuertes se observaron entre "La interfaz es amigable" y "Los mensajes emergentes y de advertencia son útiles" (r=0,78), "Los usuarios ejecutan fácilmente las aplicaciones" y "Las impresiones son de buena calidad" (r=0,76), y "Las actividades pueden compartirse fácilmente entre otros usuarios" y "Los usuarios ejecutan fácilmente las aplicaciones" (r=0,75). Estas correlaciones sugieren que la percepción del usuario sobre la calidad de la interfaz está estrechamente vinculada con la utilidad de la retroalimentación del sistema, y que la facilidad de operación se correlaciona fuertemente con la calidad de salida.
Correlaciones notables entre categorías incluyeron "Calidad de los gráficos" con "Las habilidades a adquirir son habilidades importantes para la vida" (r=0,71) y "El sitio web funciona sin fallos técnicos" con "Los usuarios están activamente involucrados en el proceso de aprendizaje" (r=0,71), indicando que los aspectos de rendimiento técnico influyen positivamente en las percepciones de valor pedagógico.
Análisis Factorial
El Análisis Factorial Exploratorio reveló cuatro clústeres distintos de características de la plataforma:
Factor 1 (Experiencia del Usuario y Participación en el Aprendizaje): El clúster más grande, comprendiendo 15 ítems incluyendo usabilidad de la interfaz, fiabilidad técnica, relevancia del aprendizaje y autonomía del usuario. Este factor dominante sugiere una fuerte interconexión entre funcionalidad técnica y efectividad pedagógica, donde la facilidad de uso apoya directamente la participación en el aprendizaje.
Factor 2 (Rendimiento Técnico y Accesibilidad): Consistente en 7 ítems relacionados con calidad visual, compatibilidad entre navegadores, retroalimentación del sistema y recursos instructivos. Este clúster indica que la calidad de salida y la orientación estructurada forman un aspecto coherente de la experiencia de la plataforma.
Factor 3 (Capacidad de Evaluación): Conteniendo el único ítem "Los profesores pueden evaluar fácilmente el progreso de los estudiantes", este factor emergió como una consideración distinta separada de otras características pedagógicas, destacando la importancia única de la funcionalidad de evaluación.
Factor 4 (Configuración de Parámetros): También conteniendo un único ítem, "Configurar los parámetros es un proceso sencillo", el aislamiento de este factor sugiere que la configuración de parámetros representa un aspecto especializado de la experiencia de la plataforma que merece atención dedicada.
En resumen, los resultados demuestran una alta satisfacción general con la plataforma de tecnología educativa, con un consenso particularmente fuerte respecto a su valor pedagógico. El análisis factorial revela que, mientras la experiencia del usuario y la participación en el aprendizaje forman una experiencia central cohesiva, funcionalidades específicas como la evaluación y la configuración de parámetros representan aspectos distintos que merecen consideración especializada en el desarrollo e implementación de la plataforma.
Please help us spread the word about this project by using one of the links below to share this post on social networks!
Haznos saber los que piensas de esta aplicacion escribiendo un comentario en la versión inglesa de este post. Ideas para el uso didáctico y sugerencias de mejora son siempre bienvenidas. En caso de que no hablar inglés puedes comentar también en griego, portugués o español.