Evaluación
Evaluación
Evaluación
5357
Recibido: 08/02/2022
Aceptado: 05/07/2022
1. Introducción
Desde que la competencia digital fuera catalogada por el Consejo de Europa
(2006) como una de las ocho competencias clave para el aprendizaje permanente,
se constata la necesidad creciente de su incorporación temprana en los sistemas
educativos. Desde entonces, las políticas públicas europeas y nacionales han im-
pulsado numerosas actuaciones para fomentar el desarrollo de una sociedad de la
información (Muñoz y Pérez, 2017). Con todo, la reciente crisis global provocada
por la COVID-19 ha puesto de relieve las dificultades para materializar con éxito una
educación online (Molina-Pérez y Pulido-Montes, 2021). Una de sus consecuencias
ha sido el acuerdo del Consejo Europeo (Unión Europea, 2021) de una partida eco-
nómica excepcional de recuperación conocida como “Next Generation EU” con el
compromiso de los Estados Miembro de elaborar proyectos que permitan afrontar la
situación económica y social actual. La respuesta de la economía española se llama
“Plan de Recuperación, Transformación y Resiliencia” (Gobierno de España, 2021)
que recoge como uno de sus ejes transversales la “transformación digital”. En este
punto, son las distintas Comunidades Autónomas quienes deben diseñar acciones
que permitan mejorar la competencia digital en los centros educativos que impartan
formación regulada en la Ley Orgánica 3/2006, de Educación, modificada por la Ley
Orgánica 3/2020.
2. Objetivos de la investigación
Las preguntas de investigación en las que se sustentan los objetivos son:
(P1) ¿Cómo perciben directivos, docentes y alumnado la capacidad digital de su
centro educativo como organización digitalmente competente?
(P2) ¿En qué áreas temáticas aparecen coincidencias y divergencias de percepción
en las dos fases temporales en las que se lleva a cabo el estudio?
(P3) ¿De qué modo los datos de la investigación pueden ser útiles para proponer
acciones orientadas a la digitalización eficiente de nuestro centro educativo?
Se concreta como objetivo general mejorar la capacidad digital de un centro de
Educación Secundaria Obligatoria de la Región de Murcia a partir de la evaluación
diagnóstica realizada con directivos, profesorado y estudiantes. Los objetivos especí-
ficos de investigación son:
1. Conocer la opinión de directivos, profesorado y alumnado sobre el proceso de
digitalización de su centro educativo.
2. Analizar desde una perspectiva comparativa temporal las valoraciones de los
tres grupos de actores sobre la capacitación digital de su institución educativa.
3. Dimensiones de la investigación
Esta investigación se centra en el análisis de la percepción que tiene la comunidad
educativa sobre la capacidad digital de su centro educativo a través de un proceso de
autorreflexión que permite realizar la herramienta SELFIE, diseñada por la Comisión
Europea a partir del Marco Europeo de Competencias Digitales para las Organizacio-
nes (DigCompOrg). De todas las áreas que contempla la herramienta, se seleccionan
cuatro: Liderazgo, Infraestructura y equipos, Prácticas de evaluación y Colaboración
y redes. Se justifica esta elección al ser las áreas que están relacionadas específica-
mente con el centro educativo como estructura organizacional. Se dejan al margen
las áreas de: Enseñanza y Aprendizaje, Desarrollo profesional continuo, Pedagogías y
Competencias digitales del alumnado, por ser las áreas que se centran más concreta-
mente en la competencia digital docente /discente.
4. Metodología
Se presenta una investigación evaluativa orientada al cambio en consonancia al
auge de evaluaciones de organizaciones e instituciones (Escudero, 2016). El método
es de tipo mixto (se combinan técnicas de tipo cuantitativo por medio del cuestiona-
rio y cualitativo por medio del grupo de discusión) y se concreta en un diseño de caso
único a partir de un enfoque fenomenológico de la investigación (Vázquez y Angulo,
2003). La elección del caso es por conveniencia, ya que este centro educativo se
adhiere al programa “Centros digitales” (Consejería de Educación y Universidades,
2017) desde el curso 2018 cuyo objetivo es incorporar las tecnologías digitales de
manera progresiva en su Proyecto Educativo de Centro (PEC).
4.1. Participantes
Para el subestudio cuantitativo, la selección de la muestra fue intencional no alea-
toria (López, 2004) con una muestra participante total de 526 participantes en el
curso 2018-2019 y de 461 en el curso 2020-2021 (Tabla 1).
Para el subestudio cualitativo, se establecieron tres grupos de discusión consti-
tuidos por informantes clave que previamente habían participado en el cuestionario
(ver Tabla 1). Los criterios de representatividad entre el alumnado fueron seleccionar
alumnos de diferentes cursos y niveles (de 1º a 4º de ESO) y de ambos sexos. Con
el profesorado y miembros directivos se procuró seleccionar docentes con edades y
especialidades diferentes promoviendo la heterogeneidad en cuanto a experiencia
laboral, especialidad docente y equilibrio de género. El número de participantes para
cada uno de los tres grupos fue de entre 5 a 10 miembros que se ofrecieron volun-
tarios, siguiendo las recomendaciones de Quintanal y García (2012) para establecer
una comunicación fluida, consistente y defendible.
Tabla 1. Muestra participante durante los cursos académico 2018-2019 y 2020-2021
Muestra
Muestra
Curso Grupos Muestra Participante
Participante
académico destinatarios invitada Grupo de
SELFIE
Discusión
Alumnado 450 440 9
2018-2019 Profesorado 75 61 7
Directivos 30 25 5
Alumnado 542 393 8
2020-2021 Profesorado 49 43 6
Directivos 27 25 4
categorizaron las citas verbatim clasificadas según las áreas temáticas y descriptores
contemplados en SELFIE cuya correspondencia se encuentra en Fernández-Miravete
y Prendes (2021b). Estas categorías se subdividieron en unidades de significado me-
nor para realizar un nuevo análisis de contenido a partir de descriptores. Una vez
recopilados los datos cuantitativos y cualitativos se realizó un análisis contrastivo. La
utilización de ambas técnicas permitió garantizar la validez de la información con-
trolada a partir de la triangulación de las respuestas de los tres grupos de discusión
intra-grupo (entre los participantes de un mismo grupo) e inter-grupo (entre los tres
grupos de participantes).
5. Resultados
Los resultados estadísticos descriptivos de los tres grupos (directivos, profesora-
do y alumnado) correspondientes a las áreas de SELFIE consideran las puntuaciones
medias totales de respuesta y el porcentaje de las respuestas positivas considerando
las opciones de 4 y 5 ya que representan las categorías más altas de la escala de
cinco puntos en SELFIE concedidas por los usuarios. Por otro lado, se confrontan se-
guidamente estos resultados con los obtenidos del análisis cualitativo a partir de los
datos recogidos en los grupos de discusión. La exposición primera de resultados y el
contraste de respuestas con ambas técnicas de análisis permite destacar similitudes y
discrepancias entre las distintas perspectivas de los tres grupos participantes.
Tabla 2. Estadísticas descriptivas SELFIE para el área de Liderazgo
Personal Todos los
Cuestiones relacionadas con SELFIE Profesorado Alumnado
directivo usuarios
El centro educativo cuenta con una es-
4.2 3.9 – 4
trategia digital
Equipo directivo y profesorado colabo-
ran en el desarrollo de una estrategia 3.9 4 – 4
digital
El equipo directivo apoya al profeso-
rado para que explore nuevas formas 3.6 4 – 3.8
de enseñanza con tecnologías digitales
En el centro el profesorado tiene tiem-
po para explorar nuevos métodos de 2.5 2.9 – 2.7
enseñanza con tecnologías digitales
En el centro se respetan los derechos
4 4.4 – 4.2
de autor y las licencias de uso
Puntuación media TOTAL 3.7 3.8 – 3.7
Porcentaje de respuestas positivas 62% 58% – 60%
en el centro hay una buena conectividad a Internet, si bien gran parte de los alumnos
desconocían que existen ordenadores para su préstamo, lo que pone de manifiesto
que el centro debe gestionar mejor la administración (y publicidad) de dispositivos
portátiles disponibles. La totalidad del profesorado y directivos echaban en falta repo-
sitorios de materiales de enseñanza y aprendizaje en línea (Tabla 5).
Tabla 5. Discurso de los participantes sobre el área de Infraestructura y equipos
Pregunta de
Extractos textuales
discusión
“Desde el curso pasado hemos establecido un protocolo de préstamo de or-
denadores y tarjetas de datos para alumnado con necesidades” (Directivo 1)
c.1.
“Sería útil tener materiales digitales de acceso libre para utilizar en nues-
tras clases (…)” (Profesora 3)
un 36% de respuestas positivas en esta área siendo una de las peores valoradas. En los
grupos de discusión, la mayoría de los participantes dijeron que las tecnologías les
ayudaban a evaluar sus progresos en materia de enseñanza y aprendizaje, aunque no
sabían precisar de qué modo. Todos los miembros del equipo directivo reconocieron
que apenas se colaboraba con otros centros u organizaciones para apoyar el uso de
las tecnologías digitales (Tabla 9).
Tabla 9. Discurso de los participantes sobre el área de Colaboración y redes
Pregunta de
Extractos textuales
discusión
“No colaboramos con otros Institutos (…) debería ser la Consejería la que
b.1. promoviera el trabajo entre centros para beneficiarnos de lo que están
haciendo otros…” (Directivo 1)
Al comparar las diferentes áreas temáticas que contempla SELFIE en sus dos ver-
siones observamos que la puntuación media obtenida en el curso académico 2019-
2020 es medio punto más alta con respecto a la media de 2018-2019, por lo que
mejora la opinión que tiene la comunidad educativa acerca del proceso de transfor-
mación digital que se está llevando a cabo en el centro educativo. Concretamente,
se obtiene una puntuación más alta en todas las áreas siendo el área de “Liderazgo”
la que más sube (0.7). Sin embargo, el área de “Prácticas de evaluación” junto con la
de “Colaboración y redes” son las peores valoradas por los usuarios en el curso 2019-
2020 con una media de 3.2 puntos, lo que indica que se deben revisar las acciones
de mejora que se propusieron para estas dimensiones. Por lo tanto, estos resultados
reflejan en la actualidad una mejora general de la percepción que tiene la comunidad
educativa sobre el uso que se hace de las tecnologías digitales en su centro educativo
con respecto a la primera fase de estudio.
6. Discusión y conclusiones
DigCompOrg apoya a las instituciones educativas proporcionando un enfo-
que sistemático a nivel europeo para evaluar y desarrollar su capacidad digital
(Kampylis et al., 2015). Uno de sus principales beneficios es que proporciona una
metodología conceptual común en toda Europa y, por tanto, promueve y fomenta
la transparencia, la comparabilidad y el intercambio de buenas prácticas (Oksa-
nen, 2020). Un instrumento concreto para este desarrollo de competencia es la
herramienta de autorreflexión SELFIE que permite evaluar el uso de tecnologías
digitales en la educación de manera holística y estructural (Castaño-Muñoz, et
al., 2021; Panesi et al., 2020). Las respuestas de reflexión colectivas recogidas a
través de esta herramienta nos han permitido identificar las fortalezas y las de-
bilidades sobre el proceso de digitalización que está teniendo lugar en el centro
educativo objeto de investigación, así como señalar acciones que encaminen a
una integración eficaz de las tecnologías digitales en sus aulas.
Los resultados que se exponen arriba muestran cómo los grupos encuestados
perciben las áreas temáticas de competencia digital que contempla SELFIE en
su contexto. Se aprecia una tendencia a la convergencia de opiniones entre los
directivos y los docentes manifestándose las mayores divergencias entre los pun-
tos de vista que provienen del alumnado, hecho que también ocurre en estudios
análogos al nuestro (Panesi et al., 2020). Especialmente se observa estas discre-
pancias de pareceres en las áreas de “Infraestructura y equipos” y “Prácticas de
evaluación”. El análisis de respuestas señala que todas las áreas han mejorado su
percepción con respecto a la valoración dada a estas mismas durante la primera
fase del estudio, si bien hay varias consideraciones a tener en cuenta, sobre todo,
en aquellos aspectos relativos a la evaluación, colaboración e implementación de
las tecnologías digitales en el aula.
El área temática que obtuvo una mejor puntuación en el cuestionario sumi-
nistrado en la segunda etapa de estudio 2020-2021 fue la de “Liderazgo” (3.7).
Es de destacar que esta área es la que más sube con respecto a la evaluación
primera (0.7). En esa línea, la mayoría de los encuestados valoró la existencia en
la actualidad de una estrategia digital de centro coordinada a través del liderazgo
del coordinador TIC y del equipo directivo. Esta conclusión es coherente con pu-
blicaciones donde se estudia la incidencia en la dinamización tecnológica en la
cultura escolar a través del desempeño ejercido por determinados líderes educa-
tivos (Area, 2008; González-Pérez, 2017; Levin y Schrum, 2016). En el otro lado,
pese a haber mejorado la opinión general de los grupos encuestados con respecto
a la manifestada en la fase de estudio anterior, las áreas peores consideradas son
“Prácticas de evaluación” y “Colaboración y redes” con un 3.2 de media en am-
bos casos. Estos datos ponen de manifiesto que se deben promover y/o revisar las
acciones dirigidas a la consolidación de prácticas evaluadoras con el uso innova-
dor de tecnologías digitales, especialmente para valorar las habilidades del alum-
nado, tal y como sugieren otros estudios análogos (Bocconi et al., 2016; 2020;
Muñoz et al., 2016). Al mismo tiempo, sería conveniente fomentar prácticas que
promuevan la interacción y la colaboración entre escuelas (inter-centros) para la
consecución de los objetivos que se haya marcado el centro al considerarlo como
organización estructural en términos de Azorín y Muijs (2018).
El análisis de la información cualitativa puso de manifiesto entre docentes y
directivos que entre las principales barreras que limitan el uso de las tecnologías
están la falta de tiempo o recursos educativos de baja calidad; testimonios seme-
jantes los encontramos en Cabero-Almenara et al. (2020) o Céspedes y Ballesta
(2018). En menor medida, también destacaron la falta de competencia digital en-
tre el profesorado, dispositivos digitales insuficientes para el alumnado o la falta
de actividades de aprendizaje que promuevan trabajo colaborativo, afirmaciones
que son coherentes con las puntuaciones obtenidas en el cuestionario. Sin embar-
go, encontramos notables discrepancias en el área de “Prácticas de evaluación”,
pues la mayoría de los docentes verbalizaron utilizar las tecnologías digitales para
evaluar, afirmaciones que contradicen la baja puntuación que ha obtenido esta
área en el cuestionario; conclusiones similares a propósito de la evaluación con
tecnologías digitales las encontramos en Muñoz et al. (2016) o en Fernández-
Miravete y Prendes (2021b).
La singularización de aquellas áreas temáticas en las que existe una mayor y
menor valoración por parte de los grupos participantes conducen a la propuesta
de diferentes acciones de mejora digital que se coligen de los resultados arriba
expuestos de acuerdo con la puntuación media alcanzada durante la segunda
fase de estudio (Tabla 11).
Tabla 11. Acciones de mejora digital 2020-2021 según las áreas competenciales
Área
Acciones de mejora Justificación / Dato SELFIE
competencial
Dedicar tiempo para mejorar Puntuación media de 2.7 en el
Liderazgo cómo explorar el método de ense- descriptor A4. “Tiempo para ex-
ñanza con tecnologías digitales plorar la enseñanza digital”
Crear repositorios o bibliotecas en Puntuación media de 2.9 en el
línea que contengan materiales de descriptor C16. “Bibliotecas/repo-
enseñanza y aprendizaje sitorios en línea”
Infraestructura y
Adquirir y administrar dispositivos
equipos Puntuación media de 3.4 en el
portátiles que pueda llevarse el
descriptor C10. “Dispositivos para
alumnado a casa en caso de que
el alumnado”
sea necesario
Área
Acciones de mejora Justificación / Dato SELFIE
competencial
Utilizar tecnologías digitales para
Puntuación media de 2.7 en el
que el alumnado pueda realizar
descriptor G7. “Comentarios a
observaciones sobre el trabajo de
Prácticas de otros/as alumnos/as”
sus compañeros
evaluación
Utilizar tecnologías digitales para Puntuación media de 3.1 en el
que el alumnado pueda reflexio- descriptor G5. “Autorreflexión so-
nar sobre su aprendizaje bre el aprendizaje”
Colaborar con otros centros y/u Puntuación media de 3 en el des-
Colaboración y
organizaciones para apoyar el uso criptor B4. “Sinergias para la ense-
redes
de las tecnologías digitales ñanza y aprendizaje”
7. Referencias bibliográficas
Azorín Abellán, C. y Muijs, D. (2018). Redes de colaboración en educación. Eviden-
cias recogidas en escuelas de Southampton. Profesorado, Revista de Curriculum
y Formación del Profesorado, 22(2), 7-27. https://doi.org/10.30827/profesorado.
v22i2.7845