Spanish (pdf)
Article in xml format
Article references
Automatic translation
Send this article by e-mail
Cited by SciELO 
Cited by Google 
Similars in
SciELO 
Similars in Google 
Permalink
La investigación psicológica ha planteado la necesidad de evaluar el grado de pertinencia y estabilidad de los constructos teóricos en distintas culturas (Ruiz, Bringas, Rodríguez-Díaz & García-Cueto, 2014). En este contexto y como se desarrollará a continuación, la evidencia empírica nacional e internacional muestra un exiguo avance en estudios psicométricos que analicen el efecto de la cultura sobre las medidas de clima social escolar.
El clima social escolar se define como la percepción que los miembros de la institución escolar tienen respecto del ambiente en el cual desarrollan sus actividades habituales (Aron, Milicic & Armijo, 2012; Fan, Williams & Corkin, 2011; Gálvez, Tereucán, Muñoz, Briceño & Mayorga, 2014; Gálvez-Nieto, Vera-Bachmann, Trizano & García, 2015b; Hombrados-Mendieta & Castro-Travé, 2013; Steffgen, Recchia & Viechtbauer, 2013; Thapa, Cohen, Guffey & Higgins-D’Alessandro, 2013; Trianes, Blanca, de la Morena, Infante & Raya, 2006), el cual está compuesto por todos aquellos factores físicos, elementos estructurales de la institución educativa (Cohen, McCabe, Michelli & Pickeral, 2009; Jia et al., 2009; López, Bilbao & Rodríguez, 2011) y por aspectos relacionales, y se destacan la importancia del vínculo entre iguales y la calidad de la relación entre el docente y el estudiante (Álvarez, Álvarez-García, González-Castro, Núñez & González-Pienda, 2006; García- Hierro & Cubo, 2009; Giovazolias, Kourkoutas, Mitsopoulou & Georgiadi, 2010; LaRusso & Selman, 2011).
El clima social escolar es una variable relevante dado su aporte al desarrollo cognitivo y social de los adolescentes (Hallinan, Kubitschek & Liu, 2009). Diversas investigaciones han demostrado el aporte del clima social escolar positivo, relacionándolo con un mayor rendimiento académico en contextos de establecimientos con dificultades sociales y económicas (Barboza et al., 2009; Elías & Haynes, 2008; Jia et al., 2009; Valdés et al., 2008) y como una de las variables con mayor poder explicativo en el rendimiento académico (Lee, 2009; Salvo, Moraga, Miranda, Ramírez & Vera-Bachmann, 2012; Treviño, Place & Gempp, 2012)
El clima social escolar se ha asociado con un menor consumo de drogas y un mayor sentido de pertenencia hacia la comunidad escolar (Gregory, Cornell & Fan, 2012; LaRusso, Romer & Selman, 2008), así también se han demostrado sus efectos positivos que favorecen el desarrollo de habilidades a nivel emocional y la adquisición de nuevos aprendizajes (Brown, Jones, LaRusso & Aber, 2010; García, 2009). Ahora bien, un clima social escolar negativo se asocia con mayor violencia escolar (Astor, Benbenisty & Estrada, 2009; Johnson, 2009; Lee & Song, 2012), acoso escolar (Agirdag, Demanet, van Houtte & van Avermaet, 2011; Birkett, Espelage & Koenig, 2009; Richard, Schneider & Mallet, 2012; Waasdorp, Pas, O’brennan & Bradshaw, 2011), mayores problemas de comportamiento y establecimiento de relaciones con pares que presentan conductas de riesgo (Wang, Selman, Dishion & Stormshak, 2010).
En cuanto al estudio del constructo en Colombia, se evidencia que ha existido interés por su evaluación. En este contexto se han realizado estudios de tipo descriptivo (Castro & Gaviria, 2006; Giraldo & Mera, 2000; López de Mesa-Melo, Carvajal-Castillo, Soto-Godoy &Urrea-Roa, 2013) y un estudio psicométrico que analizó uno de los cuestionarios clásicos para evaluar el clima escolar -CES- (Prado, Ramírez & Ortiz, 2010). Sin embargo, aún no se cuenta con estudios que utilicen la medida específica de clima social escolar (Cuestionario para Evaluar Clima Social del Centro Escolar [CECSCE]).
En Chile se han realizado estudios que asocian el clima escolar con violencia escolar (Tijmes, 2012; Vera-Bachmann & Gálvez, 2014) y con actitudes hacia la autoridad institucional (Gálvez-Nieto et al., 2015b), así como estudios descriptivos que analizan su influencia según dependencia administrativa del establecimiento (Guerra, Vargas, Castro, Plaza & Barrera, 2012). En este país se presentan algunas investigaciones psicométricas relacionadas con la medida específica de clima social del escolar -CECSCE- (Gálvez- Nieto, Vera-Bachmann & Trizano, 2015a; Gálvez et al., 2014; Guerra, Castro & Vargas, 2011).
El Cuestionario para Evaluar Clima Social del Centro Escolar como medida de clima social escolar: descripción y estructura teórica del constructo
La medida de clima social escolar (CECSCE) ha generado importantes aportes desde su creación en España; se presentó como un instrumento centrado en las relaciones interpersonales de estudiantes y profesores (Trianes et al., 2006). Es una medida útil para la evaluación e intervención psicoeducativa en áreas relacionadas con la salud, adaptación individual y prevención de violencia escolar (Trianes et al., 2006). Además, proporciona un constructo preciso que, sin comprometer capacidad explicativa, provee de una medida de corta extensión, ideal para su uso en el contexto aplicado y en estudios multivariantes.
Respecto de su estructura teórica (Trianes et al., 2006), inicialmente se presentó una medida de clima social escolar compuesta por dos dimensiones: clima referente al centro escolar y clima social referente al profesorado. Un estudio realizado en Chile (Guerra et al., 2011), presenta una estructura factorial diferenciada, propone que el CECSCE puede ser entendido como una medida unidimensional; sin embargo, esta solución presenta una escasa capacidad explicativa (un 35.65% de varianza explicada). Este mismo estudio presenta evidencia psicométrica que avala una solución factorial con dos dimensiones, tal cual fue propuesto inicialmente por el estudio español; esta solución mejora su capacidad explicativa (un 45.29% de varianza explicada). Otros estudios recientes (Gálvez et al., 2014; Gálvez-Nieto et al., 2015a), reportan adecuados índices de calidad psicométrica confirmando la estructura teórica original de dos dimensiones para medir el clima social escolar.
Ahora bien, el contexto colombiano y el chileno presentan variantes culturales sustantivas, y dichas diferencias generan una matriz identitaria que distingue a cada país. Sin embargo, Chile y Colombia comparten un elemento importante que es el idioma, el cual posee leves diferencias que han sido modeladas por cada cultura. Considerando estos antecedentes, es pertinente preguntarse si las variables culturales pueden modificar la percepción del clima social escolar, llevar a entender de manera distinta el cuestionario y hacer variar la estructura teórica de la escala. Por lo tanto, el objetivo de este estudio es analizar si la medida de clima social escolar (CECSCE) es un instrumento válido e invariante en ambos países.
Ambos planteamientos conducen a formular la hipótesis de que la versión chilena del CECSCE y la versión adaptada en Colombia serán equivalentes en cuanto a su estructura factorial, es decir, mismo número de ítems y mismo número de factores.
Método
Participantes
Participaron de la investigación 1233 estudiantes adolescentes, seleccionados a partir de un muestreo no probabilístico en 11 establecimientos públicos y particulares subvencionados de Chile y Colombia. Este tamaño muestral posibilitó alcanzar la variabilidad requerida por el análisis psicométrico multivariante, además de proporcionar mayor estabilidad en los resultados. Ambos grupos se describen a continuación:
Muestra chilena. Participaron 692 estudiantes chilenos de ambos sexos (el 49.9% hombres y el 50.1% mujeres) de edades comprendidas entre los 12 y 20 años (M = 14.82; DT = 1.83). Los estudiantes cursaban enseñanza secundaria en 6 centros educativos públicos y particulares subvencionados de la Región de la Araucanía, Chile. Muestra colombiana. Participaron 541 estudiantes colombianos de ambos sexos (el 47.6% hombres y el 52.4% mujeres) de edades comprendidas entre los 12 y 18 (M = 14.72; DT = 1.26). Los estudiantes cursaban enseñanza secundaria en 5 establecimientos públicos de Bogotá, Colombia.
Con el objetivo de evaluar la equivalencia de las muestras entre los países se analizaron asociaciones entre la variable sexo a través del test chi-cuadrado (χ [gl = 1] = .622 p = .43) y diferencia de medias para la edad mediante la prueba t de Student (t [gl = 1230] = 1.101; p = .271). No se presentaron diferencias estadísticamente significativas entre las muestras.
Instrumento
El CECSCE es una escala de autoinforme elaborada originalmente en España (Trianes et al., 2006). Evalúa el clima social escolar desde la perspectiva de los estudiantes a partir de 14 ítems a los que se responde en una escala ordinal de 5 puntos (1 = muy en desacuerdo, 5 = muy de acuerdo). En Chile (Gálvez et al., 2014; Gálvez-Nieto et al., 2015a; Guerra et al., 2011) los estudios evidencian que el CECSCE posee un adecuado ajuste psicométrico y 2 factores: clima social del centro escolar, que se refiere a las relaciones entre pares, capacidad de ayuda y sentimiento de bienestar; y clima social profesores, que evalúa exigencia académica, justicia y trato con los estudiantes (Trianes et al., 2006).
Procedimiento
Para la aplicación del instrumento se tomó contacto con los directores de los establecimientos y se solicitó autorización para aplicar los cuestionarios. Con el objetivo de obtener la autorización de los padres y apoderados, se realizaron reuniones informativas en donde se explicaron los objetivos y alcances del proyecto. Finalmente apoderados y estudiantes firmaron consentimientos informados, resguardando los principios éticos de la investigación. Los estudiantes que accedieron a participar, lo hicieron de manera voluntaria y anónima.
El ajuste conceptual de los ítems del CECSCE se realizó mediante juicio experto, al respecto se solicitó a tres jueces que revisaran los coloquialismos chilenos que posiblemente no serían comprendidos por los estudiantes colombianos. Los resultados indicaron que en general la escala sería bien comprendida; sin embargo, se debía sustituir la expresión los desordenados por los indisciplinados correspondientes al ítem 13.
Análisis de datos
En primer lugar, se realizaron análisis descriptivos (media y desviación típica) de los ítems del CECSCE para las muestras chilena y colombiana, también se evaluó la normalidad de cada ítem mediante la prueba Kolmogorov-Smirnov. Posteriormente, con el fin de obtener evidencias de validez de la estructura interna, se realizó análisis factoriales confirmatorio en ambas muestras considerando la estructura teórica propuesta. Estos modelos se llevaron a cabo utilizando el software MPLUS 7.11 (Muthén & Muthén, 2012). Para la estimación de los índices de bondad de ajuste se utilizó el método máxima verosimilitud robusta. Este procedimiento permite un análisis adecuado para datos que no cumplen con el supuesto de normalidad multivariante, como es el caso de los resultados obtenidos a través del test de Mardia estandarizado (Mardia, 1970) en la muestra chilena = 18.13 y en la muestra colombiana = 9.64. La estimación máxima verosimilitud robusta permite la obtención de índices robustos, así como estimaciones apropiadas de los parámetros y su nivel de error (Finney & DiStefano, 2006; Flora & Curran, 2004). Los análisis factoriales confirmatorios fueron analizados a través de los siguientes índices de bondad de ajuste; chi-cuadrado de Satorra Bentler -SB- 2- (Satorra & Bentler, 2001), índice de ajuste comparativo (CFI), índice de Tucker-Lewis (TLI) y error cuadrático medio de aproximación (RMSEA). Para los primeros índices, CFI y TLI, se considera un ajuste adecuado del modelo los valores superiores a .90 (Schumacher & Lomax, 1996), mientras que para el RMSEA se considera un ajuste razonable los valores inferiores a .08 (Browne & Cudeck, 1993).
Posteriormente se evaluó el grado de invarianza factorial del cuestionario entre ambas muestras, considerando los siguientes modelos (Vandenberg & Lance, 2000): M0- Invarianza de configuración, igual número de factores e ítems en ambos grupos; M1-Invarianza métrica, igualdad entre las saturaciones factoriales; M2-Invarianza escalar, igualdad entre las intersecciones (medias de ítems iguales); y M3-Invarianza de medias latentes, igualdad de las medias de los factores latentes. La comparación de los modelos se realizó tomando como criterio la diferencia de chi-cuadrado de Satorra Bentler _SB- 2 (Asparouhov & Muthén, 2013) y el criterio de cambio de _CFI (Cheung & Rensvold, 2002). Una vez confirmada la solución factorial se evaluó la fiabilidad de los factores utilizando el coeficiente alfa de Cronbach, el coeficiente de fiabilidad ordinal (Elosua & Zumbo, 2008) y el índice de homogeneidad ítem total.
Resultados
Análisis descriptivos y evaluación de la estructura factorial
En la tabla 1 se presentan la media y desviación típica de los ítems y la matriz de correlaciones para las 2 muestras. Al evaluar la normalidad univariada, mediante la prueba Kolmogorov-Smirnov, se rechazó la hipótesis nula (p < .001) para todos los ítems, por lo que se ratifica la elección de métodos de estimación robustos al incumplimiento de la normalidad.
Tabla 1 Matriz de correlaciones (diagonal superior, muestra chilena; inferior, muestra colombiana), media y desviaciön típica de los ítems para ambas muestras.
A continuación se evaluó la estructura interna del cuestionario ajustando el modelo de acuerdo con los antecedentes teóricos y empíricos. El modelo de 2 factores correlacionados para estudiantes chilenos proporcionó un ajuste satisfactorio SB- χ2 (76) = 175.664, p < .001; CFI = .956; TLI = .948; RMSEA = .044 (IC90% = .035-.052). Del mismo modo, para estudiantes colombianos el modelo reveló un ajuste satisfactorio SB- χ2 (76) = 131.508, p < .001; CFI = .942; TLI = .931; RMSEA = .037 (IC90% = .026-.047).
Los índices anteriormente seleccionados ratifican que el modelo de 2 factores correlacionados (Gálvez et al., 2014; Gálvez-Nieto et al., 2015a; Guerra et al., 2011; Trianes et al., 2006) ajusta de manera adecuada a los datos. Todas las saturaciones de los ítems fueron estadísticamente significativas con un valor p < .001; para Chile oscilaron entre .277 y .727, mientras que para Colombia las saturaciones variaron entre .314 y .639 (ver tabla 2); además se confirmó la correlación positiva entre ambos factores, tanto para Chile .839 (p < .001) como para Colombia .739 (p < .001).
Evaluación del grado de invarianza factorial
El análisis comenzó examinando la bondad de ajuste de la estructura de 2 factores de la escala CECSCE en la muestra chilena y colombiana simultáneamente; este modelo fue denominado M0. En la tabla 3 se evidencia que los índices de bondad de ajuste de M0 resultaron satisfactorios, cada uno de los parámetros de este modelo fueron estadísticamente significativos.
Lo anterior ratifica que la estructura de 2 factores, con los mismos ítems, de CECSCE, se mantiene estable en ambos países. Por lo tanto, se consideró este modelo como referencia para la siguiente anidación de restricciones.
A continuación se evaluó el modelo de invarianza métrica (M1), incorporando restricciones a las saturaciones de los ítems. Lo anterior indica que la matriz de saturaciones factoriales de la muestra chilena es equivalente a la matriz de saturaciones factoriales de la muestra colombiana. Los índices de ajuste para este modelo resultaron satisfactorios (ver tabla 3); sin embargo, al comparar este modelo con M0 se encuentran diferencias estadísticamente significativas, por lo que se rechaza la equivalencia entre ambos modelos (_SB-_2 = 35.583, _gl = 12, p < .001; _CFI = .007). Considerando este resultado, no es pertinente continuar con el siguiente nivel de anidación (M2), que impone igualdad de interceptos. Por lo tanto solo se acepta el nivel de invarianza en la configuración entre la muestra chilena y colombiana (tabla 3).
Evidencias de fiabilidad
Posteriormente se evaluó la fiabilidad de las puntuaciones de las escalas, para cada país, mediante el coeficiente alfa de Cronbach y el coeficiente de fiabilidad ordinal, dispuesto entre paréntesis a continuación (tabla 4). Para Chile la fiabilidad de clima social escolar fue de .81 (.83) y de clima social de profesores fue de .74 (.77), mientras que para Colombia la fiabilidad fue de .74 (.77) para el primer factor y .59 (.64) para el segundo, así, se encontraron valores aceptables aunque levemente menores a los hallados en la muestra chilena.
Discusión
El propósito de este artículo fue analizar si el CECSCE es un instrumento válido, fiable e invariante en estudiantes chilenos y colombianos. Los resultados permiten concluir que el CECSCE presenta evidencia de calidad psicométrica para su utilización en los contextos de Chile y Colombia, además el grado de invarianza factorial se presenta plausible a nivel de invarianza de configuración (M0).
La escala inicialmente fue desarrollada por Trianes et al. (2006) y se basa en una medida de clima social escolar compuesta por 14 ítems organizados en una estructura factorial de 2 dimensiones. El análisis empírico de la estructura teórica del CECSCE revela que se confirma la estructura bidimensional. Los 2 factores que componen el instrumento dan cuenta de dimensiones distintas, pero suficientemente relacionadas para medir el clima escolar. La propuesta teórica original se muestra consistente con estudios psicométricos recientes realizados en Chile (Gálvez et al., 2014, Gálvez- Nieto et al., 2015a; Guerra et al., 2011).
Los resultados del análisis factorial confirmatorio realizado de modo separado en la muestra chilena y colombiana ratifican la validez de la estructura teórica de 2 factores correlacionados. Los factores denominados clima social del centro escolar, referido a las relaciones entre pares, capacidad de ayuda y sentimiento de bienestar con su establecimiento, y el factor clima social profesores relativo a aspectos como exigencia académica, justicia y trato con los estudiantes, demostraron ser la estructura teórica que mejor ajustaba a los datos en ambos grupos en estudio.
Posteriormente, se analizó el nivel de invarianza factorial del CECSCE en ambas muestras de estudiantes. Este análisis consideró como primer paso examinar la consistencia teórica de la escala evaluando su invarianza de configuración. El primer modelo evidenció que el número de factores y los ítems que correspondían a cada factor eran los mismos en la muestra de estudiantes chilenos que en la de colombianos; por lo tanto, el cuestionario puede ser aplicado en ambos contextos siguiendo el modelo teórico original.
El segundo modelo puesto a prueba evidenció que las cargas factoriales de los ítems no eran invariantes en ambas muestras; por lo tanto, no se continuó con el siguiente nivel de análisis, que imponía restricciones a la configuración del constructo, las cargas factoriales y las intersecciones de los ítems de la escala (M2). Estas diferencias en las saturaciones factoriales pueden ser explicadas por las diferencias en ambos grupos culturales y de manera concreta en las leves variaciones de idioma en ambos países, las cuales afectan de manera directa en la capacidad de discriminación de los ítems.
Las evidencias de fiabilidad de la escala demuestran que los ítems y los factores poseen una consistencia interna adecuada, que facilita su aplicación en ambos contextos culturales. El análisis de homogeneidad estimado a partir del coeficiente de correlación ítem total demostró adecuados niveles en cuanto al aporte de cada sentencia a la medición del constructo, sin embargo llama la atención el comportamiento del ítem 3 en la muestra colombiana -trabajo en las tareas escolares- (coeficiente de correlación ítem total = .218), que evidenció un ajuste más bajo respecto del resto de los ítems. Al respecto es necesario señaalar que el punto de corte de .30 no es fijo y algunos autores sugieren que una correlación ítem total de .20 puede ser adecuada (Schmeiser & Welch, 2006).
Los resultados de esta investigación evidencian que el CECSCE en adolescentes chilenos y colombianos presenta la misma configuración y permite su utilización en estos contextos. Entre las limitaciones de este estudio se encuentra la muestra que, a pesar de ser amplia, debería ser probabilística y representativa de otras poblaciones que aporten evidencias para la generación de normas de baremación para facilitar la interpretación de las puntuaciones de la escala. Así también, sería relevante poder abarcar más estudios transculturales en Latinoamérica que permitan establecer la comparabilidad y estabilidad de los constructos teóricos entre los distintos países. Como futuras líneas de investigación se requieren estudios que consideren variables culturales y permitan explicar las diferencias en el grado de discriminación (saturaciones factoriales) de los ítems en ambos grupos culturales, de manera que permitan desarrollar modelos explicativos que consideren el rol de la cultura y su impacto en el grado de invarianza psicométrica de los instrumentos utilizados.
