Propiedades psicométricas de la evaluación del comportamiento social en la escuela primaria




POR CARINA WIKMAN1†*, WWW.FRONTIERSIN.ORGMARA WESTLING ALLODI1† Y WWW.FRONTIERSIN.ORGLAURA FERRER-WREDER2†

Fuente: Frontiers | 25/06/2021

Fotografía: Pixabay



Propiedades psicométricas de la evaluación del comportamiento social en la escuela primaria sueca: Un índice calificado por el profesor de las conductas escolares prosociales de los alumnos

www.frontiersin.orgCarina Wikman1†*, www.frontiersin.orgMara Westling Allodi1† y www.frontiersin.orgLaura Ferrer-Wreder2†



1. Departamento de Educación Especial, Universidad de Estocolmo, Estocolmo, Suecia

2. Departamento de Psicología, Universidad de Estocolmo, Estocolmo, Suecia



Este estudio examinó las propiedades psicométricas de una adaptación al idioma sueco de la Evaluación del Comportamiento Social Elemental (ESBA) calificada por el profesor, que proporciona un índice de los comportamientos escolares prosociales de los estudiantes. Los participantes fueron ocho profesores (dos profesores por escuela en cuatro escuelas) que calificaron a sus alumnos (N = 143 niños, edad M = 8 años). La estructura factorial de la ESBA se probó con el Análisis Factorial Confirmatorio en una serie de modelos. Los modelos de dos y tres factores mostraron un mejor ajuste. La ESBA mostró una alta consistencia interna en el nivel observado. Las propiedades psicométricas del ESBA muestran una promesa inicial como herramienta para ayudar a los profesores suecos a apoyar el desarrollo de las habilidades prosociales de los estudiantes.



Introducción


Los alumnos llegan a la escuela con comportamientos diferentes. Algunos estudiantes ya están bien equipados para escuchar, seguir instrucciones, hacer el trabajo en el asiento, llevarse bien con los compañeros y comportarse positivamente en la escuela. Otros estudiantes pueden tener un terreno considerable que cubrir para desarrollar plenamente estos comportamientos, lo que hace posible el rendimiento académico y la adaptación escolar. Nivelar este campo de juego es esencial porque, se necesita un apoyo menos intensivo si los problemas se identifican temprano (Lane et al., 2010). La Evaluación del Comportamiento Social Elemental (ESBA, Organización para la Cooperación y el Desarrollo Económico, 2015) se desarrolló en Estados Unidos como una herramienta para identificar los comportamientos escolares prosociales que los profesores valoran como importantes para el éxito social y académico de los estudiantes. Estos comportamientos escolares prosociales han sido considerados como facilitadores académicos (DiPerna y Elliott, 2002), permitiendo a los estudiantes participar con compromiso en su educación (Organización para la Cooperación y el Desarrollo Económico, 2015).



Comportamientos escolares prosociales en los niños suecos


En Suecia, hay poca tradición de utilizar sistemáticamente evaluaciones cuantitativas para promover el éxito social y académico de los niños pequeños (Allodi, 2007). Los profesores evalúan subjetivamente el comportamiento y el funcionamiento social de sus alumnos sin el beneficio de muchas descripciones sistemáticas o acordadas colectivamente (Allodi, 2007). En las evaluaciones nacionales (Inspección Escolar de Suecia, 2018) e internacionales (Organización para la Cooperación y el Desarrollo Económicos, 2016; PISA, 2018) se informa de que los indicadores del clima disciplinario en las escuelas suecas no son óptimos (Organización para la Cooperación y el Desarrollo Económicos, 2016) y la competencia social y el liderazgo del profesorado son áreas de preocupación. Una iniciativa gubernamental reciente tiene como objetivo abordar los desafíos que plantea la aparición de problemas de comportamiento en las escuelas; los niños con discapacidades, en particular, informaron de más acoso escolar; un tercio de los profesores de la escuela obligatoria informaron de que dedican un tiempo considerable a mantener el orden en el aula (Departamento de Educación de Suecia 2020). El sistema educativo sueco tiene la responsabilidad de todos los niños; los niños vulnerables deben ser protegidos en la escuela, y se considera que las relaciones positivas con los profesores y los compañeros apoyan el bienestar y el rendimiento de los estudiantes, mientras que las dificultades pueden ser señaladas a través de comportamientos de interiorización y exteriorización, pero también con síntomas psicosomáticos, rechazo escolar y absentismo escolar (SNEA, 2021). Una medida fiable de las conductas escolares prosociales de los estudiantes sería una herramienta útil, tanto para la investigación, como para la evaluación de las intervenciones, que protegen a los estudiantes que están en riesgo en la escuela primaria y previenen las dificultades posteriores que podrían intensificarse sin un seguimiento adecuado. Este tipo de instrumento de cribado basado en las valoraciones de los profesores aún no ha sido validado en Suecia. Si se valida satisfactoriamente, la ESBA podría cubrir la necesidad de un instrumento que apoye a los profesores en su labor de fomentar las conductas prosociales de los alumnos.



Evaluación de la conducta social en primaria


La ESBA (Organización para la Cooperación y el Desarrollo Económico, 2015) se desarrolló en los Estados Unidos como un índice de conductas escolares prosociales calificado por los profesores. Aproximadamente, 1.100 profesores de Estados Unidos calificaron 56 ítems. Los ítems que ahora componen el ESBA fueron los mejor valorados por los profesores (Walker et al., 2015). Las formulaciones de los ítems están basadas en fortalezas, es decir, redactadas con formulaciones positivas, expresando comportamientos escolares deseables. La medida consta de 12 ítems valorados en una escala Likert de 3 puntos. Los profesores responden a cada ítem: dominio 3) necesita mejorar 2) y causa de preocupación 1). Un ejemplo de ítem es: "Se lleva bien con los compañeros". La ESBA está diseñada para su uso con niños de 6 a 11 años.


Hasta la fecha, dos estudios de Estados Unidos investigaron las propiedades psicométricas de la ESBA (Organización para la Cooperación y el Desarrollo Económico, 2015). En el primer estudio, la muestra incluía a nueve profesores de jardín de infancia, primer y segundo grado, y a sus alumnos (N = 187). Un análisis factorial mediante un modelo de ecuaciones estructurales (SEM) indicó una estructura de un factor y una fiabilidad de la escala pretest de 0,95; se probaron otras estructuras factoriales y no se descartaron por completo. En el segundo estudio, los participantes fueron 70 profesores y sus alumnos (N = 1.616) desde el jardín de infancia hasta el tercer grado. Los autores probaron modelos de uno y dos factores y concluyeron que el modelo de un factor era el que mejor caracterizaba al ESBA; la fiabilidad previa al test fue de 0,95 (alfa de Cronbach). La fiabilidad test-retest de ocho semanas fue, r = 0,77 (Organización para la Cooperación y el Desarrollo Económico, 2015). También se probó la validez de criterio de la ESBA y se concluyó que el constructo medía adecuadamente el comportamiento escolar prosocial de los estudiantes, en comparación con otras escalas establecidas: concretamente, la BBRS (Gresham et al., 2010) y la WMS (Walker y McConnell, 1995).


La ESBA también ha sido probada en escuelas primarias noruegas. Los participantes fueron 151 profesores y sus alumnos (N = 793) de los grados primero a sexto. Las correlaciones intraclase (CCI) comprobaron el grado de agrupación por escuela y aula: se encontraron estimaciones bajas de CCI, a nivel de escuela (menos del 1% de la varianza contabilizada) y de aula (menos del 5%). Los resultados del SEM apoyaron una estructura de uno o dos factores; incluso se probó un modelo de tres factores. El alfa de Cronbach osciló entre 0,90 y 0,93. La fiabilidad test-retest de ocho semanas fue de r = 0,78 (Arnesen et al., 2018).




Objetivo


Este estudio evaluó las propiedades psicométricas, concretamente la estructura factorial, y la consistencia interna, de una edición sueca de la ESBA. Debido a que los estudios psicométricos anteriores de la ESBA han apoyado una estructura factorial de uno y dos modelos, postulamos que un modelo de uno o dos factores para la ESBA sería apoyado por los resultados, pero también consideramos un modelo de tres factores como una alternativa para probar, debido a los análisis anteriores.



Muestra


El estudio incluyó las valoraciones de los profesores de 143 alumnos de segundo grado (74 chicas; edad media = 8,33 años, DT = 0,34 años y 69 chicos; edad media = 8,31 años, DT = 0,35 años). Las calificaciones fueron proporcionadas por ocho profesores de segundo grado en cuatro escuelas municipales. Se utilizó un muestreo de conveniencia de las escuelas. Todos los profesores tenían certificados de enseñanza. Las escuelas estaban situadas en dos municipios de tránsito y en una gran ciudad1 (Tabla 1). Se proporciona un índice socioeconómico (SES) para cada escuela2. El índice SES muestra que los colegios tienen una composición de alumnos con un SES ligeramente superior al SES medio de los colegios de Suecia.



Tabla 1. Datos demográficos de la escuela, índice socioeconómico y género




Se invitó a los profesores y se organizó una primera reunión para explicar el estudio. Los padres de los alumnos y los estudiantes (formulario de consentimiento ajustado a su edad) debían dar su consentimiento por escrito (tasa de respuesta = 73%). La Autoridad de Revisión Ética de Suecia revisó el estudio, número del protocolo (#019-03058).



Instrumento


El ESBA es un índice de 12 ítems de comportamientos escolares prosociales calificados por el profesor en una escala de Likert de 3 puntos (ordinal) en la que tres son los mejores comportamientos y uno indica un comportamiento inferior al típico. En el estudio noruego, los ítems del ESBA se promediaron y oscilaron entre 2,6 y 2,8 (Arnesen et al., 2018).


El ESBA se tradujo del inglés al sueco y se sometió a una traducción inversa (Allodi, 2007). Uno de los desarrolladores de la ESBA, Smolkowski, aprobó este proceso de traducción y aconsejó que los ítems se formularan en sueco de una manera culturalmente adaptada en lugar de una traducción completamente literal de las palabras. No obstante, la traducción al sueco se mantuvo lo más parecida posible al original. El ítem 4 "Realiza las tareas del asiento según las instrucciones" se adaptó culturalmente a "Realiza las tareas según las instrucciones", porque en sueco "dirigido" podría percibirse como demasiado autoritario. El ítem 10 "Puede tener conversaciones "normales" sin volverse hostil" se tradujo en "Puede tener conversaciones normales sin volverse hostil" porque la palabra "normal" en sueco puede evocar una impresión normativa Durante la recogida de datos, los profesores recibieron material de instrucción sobre el ESBA, que proporcionaba ejemplos de comportamientos para cada ítem.



Diseño


El diseño fue transversal y representa la prueba previa de un ensayo controlado aleatorio que pone a prueba una intervención novedosa, destinada a mejorar el clima del aula. La aleatorización se realizó después del reclutamiento. Los datos se recogieron antes del inicio de la intervención e incluyen las escuelas de intervención y de control.



Análisis estadístico


Los análisis se realizaron con SPSS y Mplus versión 8.4 (Muthén y Muthén, 1998). A nivel observado, se examinó la normalidad (ítem y escala), las correlaciones ítem-total y la fiabilidad de la escala (alfa de Cronbach). Se realizaron modelos SEM en Mplus con un estimador MLR. No hubo datos perdidos. Dado que las pruebas anteriores apoyaban una estructura de uno y dos factores, se planificó una serie de análisis factoriales confirmatorios (AFC) que iban desde el modelo más parsimonioso (es decir, un factor) hasta un modelo de dos factores. Se probarían modelos adicionales si los resultados de los AFC de uno y dos factores indicaban la necesidad de hacerlo. Los cambios en todos los modelos probados se guiaron por la teoría y los índices de modificación (Brown, 2015). La determinación del ajuste del modelo se basó en los puntos de corte de varios índices de ajuste, el Índice de Ajuste Comparativo (CFI, valor >0,95), el Error Medio Cuadrático de Aproximación (RMSEA, valor estimado igual o inferior a 0,08) y el Residual Medio Cuadrático Estandarizado (SRMR valor igual o inferior a 0,08; Kline, 2016). Los valores de chi-cuadrado informados proporcionan información descriptiva sobre el ajuste exacto. Las estimaciones del ICC indicaron que menos del 1% de la varianza en las respuestas fue explicada por la escuela y el 5% de la varianza fue explicada por el aula. Las estimaciones del ICC de este estudio son consistentes con las encontradas en el estudio noruego ESBA (Arnesen et al., 2018).




Resultados


Las puntuaciones medias de la ESBA oscilaron entre 2,2 y 2,9 (Tabla 2), lo que indica que la mayoría de los profesores consideraron que los estudiantes dominaban las conductas escolares prosociales. Las correlaciones de los ítems demostraron que éstos estaban positiva y significativamente relacionados entre sí (r > 0,48) y la puntuación media total mostró una excelente fiabilidad interna (α de Cronbach = 0,92).



Tabla 2. Ítems de la Evaluación del Comportamiento Social de Primaria, medias de las muestras y desviaciones estándar.




Los resultados del AFC se describen en las tablas 3 y 4. Un modelo de un factor con los 12 ítems de la ESBA cargados en un solo factor tuvo un ajuste pobre en el CFI (por ejemplo, 0,94), pero un ajuste aceptable a bueno en el RMSEA y el SRMR. Las cargas factoriales estandarizadas para el modelo de factor único fueron de 0,53 a 0,84. Sobre la base de los análisis psicométricos previos de la ESBA realizados en Noruega (Arnesen et al., 2018), se planteó y probó un CFA de dos factores con el primer factor denominado Profesor (llamado Compromiso Académico en el estudio noruego, Arnesen et al., 2018) con siete ítems (ítems 1 - 7 ver Tabla 2 para los ítems) y el segundo factor titulado Compañero con cinco ítems (ítems 8 - 12, ver Tabla 2 para los ítems; Ver Figura 1 para el CFA). Este modelo mostró un ajuste aceptable en CFI, RMSEA y SRMR. Las cargas factoriales estandarizadas para el modelo de dos factores fueron de 0,553 a 0,874 para el factor Profesor con siete ítems y de 0,682 a 0,897 para el factor Compañero con cinco ítems. La correlación latente entre estos dos factores fue significativa y positiva en 0,803. Los alfas de Cronbach para los ítems del factor Profesor fueron de 0,855 y para el factor Compañero de 0,897.