RESUMEN
Student satisfaction is a crucial determinant of success in online education, but studies on satisfaction with virtual classes during the COVID-19 outbreak are still scarce. This research contributes empirical evidence regarding the determinants of overall satisfaction with online classes and academic performance through the domain satisfaction approach. Additionally, we introduce to the psychological literature the two-layer model, a well-known econometric methodology, to estimate the effect of domain satisfaction while controlling the impact of unobserved individual differences. Our analyses are based on a cross-sectional sample of n = 648 Chilean university students (53.4% female) surveyed at the end of the first academic semester of 2021, during the lockdown mandated by the Chilean government due to the COVID-19 pandemic. Results show that satisfaction with the support provided by the university, satisfaction with learning, and satisfaction with the perceived quality of the online classes significantly explain the 68% of the variance of satisfaction with the virtual classes experience. Furthermore, satisfaction with academic performance is significantly explained by satisfaction with grades, learning, and the perceived quality of the online classes (R2 = .65). We also explore heterogeneous effects, separating them by gender and geographic area, and find that domains that systematically impact students' satisfaction with online education are satisfaction with grades, learning, and the quality of classes.
RESUMEN
Cumulative evidence suggests that, for children and adolescents, peer relatedness is an essential component of their overall sense of belonging, and correlates with subjective well-being and school-based well-being. However, it remains unclear what the underlying mechanism explaining these relationships is. Therefore, this study examines whether there is a reciprocal effect between school satisfaction and overall life satisfaction (Hypothesis 1), and whether the effect of peer relatedness on life satisfaction is mediated by school satisfaction (Hypothesis 2). A non-recursive model with instrumental variables was tested with econometric and structural equation modeling methodologies, using a cross-sectional sample of n = 5,619 Chilean early adolescents (49.2% girls), aged 10, 11, and 12 (46.13, 44.99, and 8.88% respectively). Results were highly consistent across methods and supported the hypotheses. First, the findings confirmed a significant reciprocal influence between school satisfaction and overall life satisfaction, with a greater impact from school to life satisfaction. Second, the effect of peer relatedness on overall life satisfaction was fully mediated by school satisfaction. The study further suggests the importance of considering reciprocal effects among domain-specific satisfaction and overall life satisfaction and illustrates the application of non-recursive models for this purpose.
RESUMEN
La fiabilidad de los puntajes es una de las propiedades psicométricas más importantes de un test psicológico. Sin embargo, a menudo los test son utilizados para hacer clasificaciones dicotómicas de personas, como sucede en las pruebas de screening psicopatológico o en selección de personal. En esos casos, los coeficientes de fiabilidad convencionales no resultan apropiados para estimar la precisión de las clasificaciones. En este trabajo se presenta el coeficiente K² de Livingston (1972, 1973) y se demuestra su uso a través de dos ejemplos empíricos, para estimar la fiabilidad de una clasificación realizada a partir de un test psicológico.
The reliability of test scores is one of the most important psychometric properties of a psychological test. However, the tests are often used for dichotomous classifications of people, as in tests used for screening or recruitment purposes. In such cases, the conventional reliability coefficients are not suitable for estimating the accuracy of the classifications. This paper introduces the coefficient K² of Livingston (1972, 1973) and demonstrates its use through two empirical examples to estimate the reliability of a classification based on psychological tests.
Asunto(s)
Pruebas Psicológicas , Exactitud de los DatosRESUMEN
Este estudio compara el efecto de cuatro métodos de puntuación para la Escala de Depresión del Centro para Estudios Epidemiológicos (CES-D), sobre la fiabilidad, validez concurrente, puntos de corte, sensibilidad, especificidad y fiabilidad de clasificación de la escala. La CES-D fue puntuada utilizando el método "ordinal" convencional, dos métodos binarios ("presencia" y "persistencia" de los síntomas) y un nuevo sistema de puntuación "semanal". A partir de análisis psicométricos y de curvas ROC, realizados sobre una muestra normativa (n=1143) y clínica (n=44), se encontró que los métodos "ordinal" y "semanal" se desempeñan mejor en la detección de depresión. Por otro lado, el método por "persistencia" de los síntomas mostró el peor desempeño. En general, los resultados muestran que el método de puntuación tiene efecto en la fiabilidad y validez de la CES-D.
This study compare the effect of four scoring methods for the Center for Epidemiologic Studies Depression Scale (CES-D) on score reliability, concurrent validity, cut points, sensibility, specificity and classifica-tion reliability of the scale. The CES-D was scored using the conventional "ordinal" method, two binary methods ("presence" and "persistence" of symptoms) and a new "weekly" scoring system. On the basis of both psychometric analysis and receiver operating characteristic (ROC) analysis, performed on normative (n=1143) and clinical (n=44) samples, it was found that the "ordinal" and "weekly" methods performed best in detecting depression. On the other hand, the "persistence" of symptoms method resulted in worse performance. Overall, the results indícate that the scoring method has an effect on the reliability and validity of the CES-D.
Asunto(s)
Humanos , Masculino , Femenino , Depresión/diagnóstico , Depresión/psicología , Escalas de Valoración Psiquiátrica , Curva ROC , Psicometría , Reproducibilidad de los Resultados , Sensibilidad y EspecificidadRESUMEN
Este trabajo presenta la elaboración del Test de Alfabetización Económica para Adultos, versión 25 Items (TAE-A-25), derivado de un instrumento homónimo de mayor longitud construido previamente por los autores. El TAE-A-25 es una prueba compuesta por items de elección múltiple, de 4 alternativas, y está inspirado en el Test of Economic Literacy (TEL) para adolescentes (Soper & Walstad, 1987). Sus items abarcan cuatro áreas de conocimientos básicos sobre economía y evalúan conceptos y habililidades procedimentales. Se presentan análisis realizados a partir de la Teoría Clásica de los Tests sobre las respuestas dadas al instrumento por una muestra de 840 adultos chilenos de ambos géneros, entre 18 y 50 años. Los análisis permitieron obtener un instrumento de 25 items, con adecuados niveles de dificultad (.24 < p < .76), discriminación (.27 < p < .54), y confiabilidad (GLB=.87), además de óptimo comportamiento de los distractores. Se discuten los resultados y se comentan las limitaciones del instrumento.(AU)
This paper presents the development of the Test of Economic Literacy for Adults, version of 25 items (TAE-A-25), derived from a test previously constructed by the authors. The TAE-A-25 is composed for multiple-choice items, with 4 options, and it's inspired in the Test of Economic Literacy (TEL) for adolescents (Soper & Walstad, 1987). Their items include four areas of basic knowledge on economy and evaluate conceptual understanding and procedural skills. The analyses where realized in the Classical Test Theory framework, based on a sample of 840 male and female Chileans, aged between 18 and 50 years. The analyses allowed to obtain a test of 25 items, with appropriate levels of difficulty (24 < p < 76), discrimination (27 < p < 54), and reliability (GLB=.87), in addition to optimal performance of the item options. The results are discussed and the limitations of the test commented.(AU)
RESUMEN
Este trabajo presenta la elaboración del Test de Alfabetización Económica para Adultos, versión 25 Items (TAE-A-25), derivado de un instrumento homónimo de mayor longitud construido previamente por los autores. El TAE-A-25 es una prueba compuesta por items de elección múltiple, de 4 alternativas, y está inspirado en el Test of Economic Literacy (TEL) para adolescentes (Soper & Walstad, 1987). Sus items abarcan cuatro áreas de conocimientos básicos sobre economía y evalúan conceptos y habililidades procedimentales. Se presentan análisis realizados a partir de la Teoría Clásica de los Tests sobre las respuestas dadas al instrumento por una muestra de 840 adultos chilenos de ambos géneros, entre 18 y 50 años. Los análisis permitieron obtener un instrumento de 25 items, con adecuados niveles de dificultad (.24 < p < .76), discriminación (.27 < p < .54), y confiabilidad (GLB=.87), además de óptimo comportamiento de los distractores. Se discuten los resultados y se comentan las limitaciones del instrumento.
This paper presents the development of the Test of Economic Literacy for Adults, version of 25 items (TAE-A-25), derived from a test previously constructed by the authors. The TAE-A-25 is composed for multiple-choice items, with 4 options, and it's inspired in the Test of Economic Literacy (TEL) for adolescents (Soper & Walstad, 1987). Their items include four areas of basic knowledge on economy and evaluate conceptual understanding and procedural skills. The analyses where realized in the Classical Test Theory framework, based on a sample of 840 male and female Chileans, aged between 18 and 50 years. The analyses allowed to obtain a test of 25 items, with appropriate levels of difficulty (24 < p < 76), discrimination (27 < p < 54), and reliability (GLB=.87), in addition to optimal performance of the item options. The results are discussed and the limitations of the test commented.
RESUMEN
A partir de un modelo cognoscitivo-evolutivo, se abordó la construcción de representaciones sociales acerca de la pobreza y desigualdad social en una muestra de 200 estudiantes de ambos sexos, con edades entre 6 a 18 años, 11 meses, pertenecientes a establecimientos de educación formal de la novena región de Chile. La muestra fue balanceada según sexo, edad, nivel socioeconómico y lugar de residencia. Para acceder a alas representaciones sociales de los sujetos, se utilizó una entrevista clínica piagietana, que indagaba acerca de la existencia de grupos socioeconómicos diversos y las características de cada uno, el proceso de movilidad social y las soluciones a la pobreza. Los resultados indicaron la presencia de tres niveles de desarrollo de las representaciones elaboradas por los sujetos, observándose diferencias en el ritmo evolutivo relacionadas con el género de los sujetos encuestados y estrato socioeconómico de pertinencia. En los resultados aparecen desfavorecidos los niños, niñas y jóvenes que pertenecen al nivel socioeconómico bajo y que además residen en ciudades pequeñas (caracterizadas por tener un sistema financiero ilimitado). Se observan interesantes diferencias asociadas al sexo de los menores, especialmente en el aspecto cualitativo de los resultados, lo que hace discutir el efecto socializador y de entrega de información del medio de la formación de representaciones cognoscitivas, lo cual comienza a ser determinante luego de superada la primera infancia. De esta manera se enfatiza el rol de la educación en el desafío de crear una sociedad en igualdad de condiciones a inicio del 2000. En la discusión, se analiza la interacción entre el desarrollo de capacidades cognoscitivas y la influencia de ideas y acciones culturales dominantes, propias para cada sexo y de cada estrato económico en la construcción de representaciones sociales respecto a la economía en la infancia y la adolescencia.