Czy nauczyciele edukacji wczesnoszkolnej potrafią bezstronnie ocenić osiągnięcia dziewcząt i chłopców z języka polskiego?

• Authors: Skórska Paulina , Świst Karolina , Grygiel Paweł , Humenny Grzegorz , Modzelewski Michał , Dolata Roman

Title variants

EN

Can primary school teachers grade the literacy level of girls and boys objectively?

• Languages of publication: PL

Abstracts

PL

Dotychczasowe badania sugerują, że w okresie wczesnoszkolnym przy tym samym poziomie umiejętności z zakresu języka ojczystego nauczyciele wyżej oceniają osiągnięcia szkolne dziewczynek niż chłopców. Celem artykułu jest weryfikacja tej hipotezy. Wykorzystano (a) oceny osiągnięć uczniów wystawione przez nauczycieli poza procesem nauczania (dla celów badawczych) i (b) wyniki standaryzowanych testów osiągnięć z języka polskiego. Analizy uwzględniające potencjalną stronniczość pozycji testowych ze względu na płeć ucznia przeprowadzono metodą modelowania wielu wskaźników i wielu przyczyn (MIMIC). Wykorzystano dane pochodzące z ogólnopolskiego badania 4144 uczniów trzeciej klasy szkoły podstawowej. Zgodnie z przewidywaniami, nauczyciele wyżej oceniali osiągnięcia dziewczynek niż chłopców, ale ta różnica zanikła, gdy do modelu analizy włączono wyniki standaryzowanych testów. Okazuje się więc, że nauczyciele potrafią bezstronnie ocenić osiągnięcia szkolne z języka polskiego dziewczynek i chłopców.

EN

Research suggests that primary school teachers grade the reading and writing skills of girls higher than of boys, even when they have the same level of ability. In this article, we try to verify this hypothesis. We analysed (a) teachers’ grades (prepared particularly for the purpose of this research), and (b) achievement test results, which controlled for the differential item functioning due to gender. We used multiple indicators, the multiple causes (MIMIC) model on a representative sample of 4144 Polish third-grade students. Teachers graded girls’ ability levels higher. However, the difference disappeared when we controlled for the test-based ability level. Therefore, we conclude that teachers can grade literacy levels without gender bias.

Keywords

PL

język polski; model wielu wskaźników i wielu przyczyn; oceny szkolne; płeć; stronniczość; zróżnicowane funkcjonowanie pozycji testowej

EN

literacy; multiple indicators multiple causes; MIMIC model; grading; gender; bias; differential item functioning

• Publisher: Instytut Badań Edukacyjnych
• Journal: Edukacja
• Year: 2017
• Issue: 3(2017)
• Pages: 52–69

Contributors

author

Skórska Paulina

• Instytut Badań Edukacyjnych

author

Świst Karolina

• Instytut Badań Edukacyjnych

author

Grygiel Paweł

• Instytut Badań Edukacyjnych

author

Humenny Grzegorz

• Instytut Badań Edukacyjnych

author

Modzelewski Michał

• Wydział Pedagogiczny, Uniwersytet Warszawski

author

Dolata Roman

• Wydział Pedagogiczny, Uniwersytet Warszawski

References

• Allen, J. D. (2005). Grades as valid measures of academic achievement of classroom learning. The Clearing House: A Journal of Educational Strategies, Issues and Ideas, 78(5), 218–223. doi: 10.3200/TCHS.78.5.218-223
• Bacon, D. R. i Bean, B. (2006). GPA in research studies: an invaluable but neglected opportunity. Journal of Marketing Education, 28(1), 35–42. doi: 10.1177/0273475305284638
• Bovaird, J. A. i Koziol, N. A. (2012). Measurement models for ordered-categorical indicators. W: R. H. Hoyle (red.), Handbook of structural equation modeling (s. 495–531). New York: Guilford Press.
• Bowers, A. J. (2011). What’s in a grade? The multidimensional nature of what teacher-assigned grades assess in high school. Educational Research and Evaluation, 17(3), 141–159. doi: 10.1080/13803611.2011.597112
• Brennan, R. T., Kim, J. S., Wenz-Gross, M. i Siperstein, G. N. (2001). The relative equitability of high-stakes testing versus teacher-assigned grades: an analysis of the massachusetts comprehensive assessment system (MCAS). Harvard Educational Review, 71(2), 173–216.
• Brookhart, S. M. (1997). A theoretical framework for the role of classroom assessment in motivating student effort and achievement. Applied Measurement in Education, 10(2), 161–180. doi: 10.1207/s15324818ame1002_4
• Brown, T. A. (2006). Confirmatory factor analysis for applied research. New York: Guilford Press.
• Buchmann, C., DiPrete, T. A. i McDaniel, A. (2008). Gender inequalities in education. Annual Review of Sociology, 34(1), 319–337. doi: 10.1146/annurev.soc.34.040507.134719
• Burusic, J., Babarovic, T. i Seric, M. (2012). Differences in elementary school achievement between girls and boys: does the teacher gender play a role? European Journal of Psychology of Education, 27(4), 523–538. doi: 10.1007/s10212-011-0093-2
• Bye, B. V., Gallicchio, S. J. i Dykacz, J. M. (1985). Multiple-indicator, multiple-cause models for a single latent variable with ordinal indicators. Sociological Methods & Research, 13(4), 487–509. doi: 10.1177/0049124185013004003
• Byrnes, J. P. i Miller, D. C. (2007). The relative importance of predictors of math and science achievement: an opportunity–propensity analysis. Contemporary Educational Psychology, 32(4), 599–629. doi: 10.1016/j.cedpsych.2006.09.002
• Casillas, A., Robbins, S., Allen, J., Kuo, Y.-L., Hanson, M. A. i Schmeiser, C. (2012). Predicting early academic failure in high school from prior academic achievement, psychosocial characteristics, and behavior. Journal of Educational Psychology, 104(2), 407–420. doi: 10.1037/a0027180
• Centralna Komisja Edukacyjna (2012). Sprawozdanie z egzaminu gimnazjalnego. Warszawa: Centralna Komisja Edukacyjna.
• Centralna Komisja Edukacyjna (2016). Sprawozdanie z egzaminu gimnazjalnego. Warszawa: Centralna Komisja Edukacyjna.
• Conger, D. i Long, M. C. (2010). Why are men falling behind? Gender gaps in college performance and persistence. The ANNALS of the American Academy of Political and Social Science, 627(1), 184–214. doi: 10.1177/0002716209348751
• Cornwell, C., Mustard, D. B. i Parys, J. V. (2013). Noncognitive skills and the gender disparities in test scores and teacher assessments: evidence from primary school. Journal of Human Resources, 48(1), 236–264.
• Dalton, B., Ingels, S. J., Downing, J. i Bozick, R. (2007). Advanced mathematics and science coursetaking in the spring high school senior classes of 1982, 1992, and 2004. Statistical Analysis Report. NCES 2007-312. Washington: National Center for Education Statistics, Institute of Education Sciences, U.S. Department of Education.
• DiPrete, T. A. i Jennings, J. L. (2012). Social and behavioral skills and the gender gap in early educational achievement. Social Science Research, 41(1), 1–15. doi: 10.1016/j.ssresearch.2011.09.001
• Dolata, R. (red.). (2014). Czy szkoła ma znaczenie? Analiza zróżnicowania efektywności nauczania na pierwszym etapie edukacyjnym. (t. 1). Warszawa: Instytut Badań Edukacyjnych.
• Dolata, R., Grygiel, P., Jankowska, D. M., Jarnutowska, E., Jasińska-Maciążek, A., Karwowski, M., … Pisarek, J. (2015). Szkolne pytania. Wyniki badań nad efektywnością nauczania w klasach IV–VI. Warszawa: Instytut Badań Edukacyjnych.
• Dolata, R., Hawrot, A., Humenny, G., Jasińska-Maciążek, A., Koniewski, M., Majkut, P., … Otręba-Szklarczyk, A. (2015). (Ko)warianty efektywności nauczania. Wyniki badania w klasach IV–VI. Warszawa: Instytut Badań Edukacyjnych.
• Dolata, R. i Sitek, M. (2015). Raport o stanie edukacji 2014. Egzaminy zewnętrzne w polityce i praktyce edukacyjnej. Warszawa: Instytut Badań Edukacyjnych.
• Driessen, G. (2007). The feminization of primary education: effects of teachers’ sex on pupil achievement, attitudes and behaviour. International Review of Education, 53(2), 183–203. doi: 10.1007/s11159-007-9039-y
• Duckworth, A. L., Quinn, P. D. i Tsukayama, E. (2012). What No Child Left Behind leaves behind: the roles of IQ and self-control in predicting standardized achievement test scores and report card grades. Journal of Educational Psychology, 104(2), 439–451. doi: 10.1037/a0026280
• Duckworth, A. L. i Seligman, M. E. P. (2006). Self-discipline gives girls the edge: gender in self-discipline, grades, and achievement test scores. Journal of Educational Psychology, 98(1), 198–208. doi: 10.1037/0022-0663.98.1.198
• Ekstrom, R. B. (1994). Gender differences in high school grades: an exploratory study. College Board Report, 94(3), 1–30.
• Else-Quest, N. M., Hyde, J. S. i Linn, M. C. (2010). Cross-national patterns of gender differences in mathematics: a meta-analysis. Psychological Bulletin, 136(1), 103–127. doi: 10.1037/a0018053
• Fischer, F. T., Schult, J. i Hell, B. (2013). Sex-specific differential prediction of college admission tests: a meta-analysis. Journal of Educational Psychology, 105(2), 478–488. doi: 10.1037/a0031956
• Grygiel, P., Świtaj, P. i Humenny, G. (2015). Zróżnicowane funkcjonowanie pozycji testowych skali stygmatyzacji z Kwestionariusza piętna i dyskryminacji. W: A. Pokropek (red.), Modele cech ukrytych w badaniach edukacyjnych, psychologii i socjologii. Teoria i zastosowania (s. 351–366). Warszawa: Instytut Badań Edukacyjnych.
• Grygiel, P., Modzelewski, M. i Pisarek, J. (2016). Academic self-concept and achievement in Polish primary schools: cross-lagged modelling and gender-specific effects. European Journal of Psychology of Education. doi: 10.1007/s10212-016-0300-2
• Guskey, T. R. (2011). Stability and change in high school grades. NASSP Bulletin, 95(2), 85–98. doi: 10.1177/0192636511409924
• Hadjar, A., Krolak-Schwerdt, S., Priem, K. i Glock, S. (2014). Gender and educational achievement. Educational Research, 56(2), 117–125. doi: 10.1080/00131881.2014.898908
• Hauser, R. M. i Goldberger, A. S. (1971). The treatment of unobservable variables in path analysis. Sociological Methodology, 3, 81–117.
• Herbert, J. i Stipek, D. (2005). The emergence of gender differences in children’s perceptions of their academic competence. Journal of Applied Developmental Psychology, 26(3), 276–295. doi: 10.1016/j.appdev.2005.02.007
• Hicks, B. M., Johnson, W., Iacono, W. G. i McGue, M. (2008). Moderating effects of personality on the genetic and environmental influences of school grades helps to explain sex differences in scholastic achievement. European Journal of Personality, 22(3), 247–268. doi: 10.1002/per.671
• Humenny, G. i Grygiel, P. (2015). Wielowymiarowa struktura latentna w perspektywie analizy czynnikowej. W: A. Pokropek (red.), Modele cech ukrytych w badaniach edukacyjnych, psychologii i socjologii. Teoria i zastosowania (s. 130–165). Warszawa: Instytut Badań Edukacyjnych.
• Hyde, J. S., Fennema, E. i Lamon, S. J. (1990). Gender differences in mathematics performance: a meta-analysis. Psychological Bulletin, 107(2), 139–155. doi: 10.1037/0033-2909.107.2.139
• Hyde, J. S., Fennema, E., Ryan, M., Frost, L. A. i Hopp, C. (1990). Gender comparisons of mathematics attitudes and affect: a meta-analysis. Psychology of Women Quarterly, 14(3), 299–324. doi: 10.1111/j.1471-6402.1990.tb00022.x
• Jasińska-Maciążek, A. i Modzelewski, M. (2014). Testy osiągnięć szkolnych TOS3: przykład narzędzia skonstruowanego z wykorzystaniem modelu Rascha. Edukacja, 127(2), 85–107
• Jones, R. N. (2006). Identification of measurement differences between english and spanish language versions of the mini-mental state examination: detecting differential item functioning using MIMIC modeling. Medical Care, 44(Suppl. 3), S124–S133. doi: 10.1097/01.mlr.0000245250.50114.0f
• Kimball, M. M. (1989). A new perspective on women’s math achievement. Psychological Bulletin, 105(2), 198–214. doi: 10.1037/0033-2909.105.2.198
• Kling, K. C., Noftle, E. E. i Robins, R. W. (2013). Why do standardized tests underpredict women’s academic performance? The role of conscientiousnes. Social Psychological and Personality Science, 4(5), 600–606. doi: 10.1177/1948550612469038
• Konarski, R. (2009). Modele równań strukturalnych: teoria i praktyka. Warszawa: Wydawnictwo Naukowe PWN.
• Konarzewski, K. (1995). Problemy i schematy: pierwszy rok nauki szkolnej dziecka. Warszawa: Żak.
• Konarzewski, K. (2003). Reforma oświaty: podstawa programowa i warunki kształcenia. Warszawa: Instytut Spraw Publicznych.
• Konarzewski, K. (2012). TIMSS i PIRLS 2011: osiągnięcia szkolne polskich trzecioklasistów w perspektywie międzynarodowej. Warszawa: Centralna Komisja Egzaminacyjna.
• Konarzewski, K. i Bulkowski, K. (red). (2016). TIMSS 2015. Wyniki międzynarodowego badania osiągnięć czwartoklasistów w matematyce i przyrodzie. Warszawa: Instytut Badań Edukacyjnych.
• Kondratek, B., Skórska, P. i Świst, K. (2015). Wprowadzenie do zróżnicowanego funkcjonowania pozycji testowej. W: A. Pokropek (red.), Modele cech ukrytych w badaniach edukacyjnych, psychologii i socjologii. Teoria i zastosowania (s. 62–90). Warszawa: Instytut Badań Edukacyjnych.
• Kondratek, B. i Pokropek, A. (2015). Teoria odpowiedzi na pozycje testowe: jednowymiarowe modele dla cech ukrytych o charakterze ciągłym. W: A. Pokropek (red.), Modele cech ukrytych w badaniach edukacyjnych, psychologii i socjologii. Teoria i zastosowania (s. 15–32). Warszawa: Instytut Badań Edukacyjnych.
• Kulon, F. (2015). Wyjaśniające modele IRT. W: A. Pokropek (red.), Modele cech ukrytych w badaniach edukacyjnych, psychologii i socjologii. Teoria i zastosowania (s. 91–105). Warszawa: Instytut Badań Edukacyjnych.
• Laidra, K., Pullmann, H. i Allik, J. (2007). Personality and intelligence as predictors of academic achievement: a cross-sectional study from elementary to secondary school. Personality and Individual Differences, 42(3), 441–451. doi: 10.1016/j.paid.2006.08.001
• Lietz, P. (2006). A meta-analysis of gender differences in reading achievement at the secondary school level. Studies in Educational Evaluation, 32(4), 317–344. doi: 10.1016/j.stueduc.2006.10.002
• Lindberg, S. M., Hyde, J. S., Petersen, J. L. i Linn, M. C. (2010). New trends in gender and mathematics performance: a meta-analysis. Psychological Bulletin, 136(6), 1123–1135. doi: 10.1037/a0021276
• Logan, S. i Johnston, R. (2009). Gender differences in reading ability and attitudes: examining where these differences lie. Journal of Research in Reading, 32(2), 199–214. doi: 10.1111/j.1467-9817.2008.01389.x
• Martínez, J. F., Stecher, B. i Borko, H. (2009). Classroom assessment practices, teacher judgments, and student achievement in mathematics: evidence from the ECLS. Educational Assessment, 14(2), 78–102. doi: 10.1080/10627190903039429
• Mattern, K., Sanchez, E. i Ndum, E. (2017). Why do achievement measures underpredict female academic performance? Educational Measurement: Issues and Practice, 36(1), 47–57. doi: 10.1111/emip.12138
• McMillan, J. H. (2001). Secondary teachers’ classroom assessment and grading practices. Educational Measurement: Issues and Practice, 20(1), 20–32. doi: 10.1111/j.1745-3992.2001.tb00055.x
• McMillan, J. H. (2003). Understanding and improving teachers’ classroom assessment decision making: implications for theory and practice. Educational Measurement: Issues and Practice, 22(4), 34–43. doi: 10.1111/j.1745-3992.2003.tb00142.x
• Mullola, S., Ravaja, N., Lipsanen, J., Alatupa, S., Hintsanen, M., Jokela, M. i Keltikangas-Järvinen, L. (2012). Gender differences in teachers’ perceptions of students’ temperament, educational competence, and teachability. British Journal of Educational Psychology, 82(2), 185–206. doi: 10.1111/j.2044-8279.2010.02017.x
• Mullis, I. V. S., Martin, M. O., Kennedy, A. M. i Foy, P. (red.). (2007). PIRLS 2006 international report: IEA’s progress in International Reading Literacy Study in primary schools in 40 countries. Chestnut Hill: TIMSS & PIRLS International Study Center, Boston College.
• Muthén, L. K. i Muthén, B. O. (2012). Mplus user’s guide (wyd. 7). Los Angles: Muthén&Muthén.
• Niemierko, B. (1997). Między oceną szkolną a dydaktyką: bliżej dydaktyki. Warszawa: Wydawnictwa Szkolne i Pedagogiczne.
• Niemierko, B. (2009). Diagnostyka edukacyjna: podręcznik akademicki. Warszawa: Wydawnictwo Naukowe PWN.
• Noftle, E. E. i Robins, R. W. (2007). Personality predictors of academic outcomes: big five correlates of GPA and SAT scores. Journal of Personality and Social Psychology, 93(1), 116–130. doi: 10.1037/0022-3514.93.1.116
• Preckel, F., Holling, H. i Vock, M. (2006). Academic underachievement: relationship with cognitive motivation, achievement motivation, and conscientiousnes. Psychology in the Schools, 43(3), 401–411. doi: 10.1002/pits.20154
• Rakoczy, K., Klieme, E., Bürgermeister, A. i Harks, B. (2008). The interplay between student evaluation and instruction: grading and feedback in mathematics classrooms. Zeitschrift für Psychologie / Journal of Psychology, 216(2), 111–124. doi: 10.1027/0044-3409.216.2.111
• Randall, J. i Engelhard, G. (2010). Examining the grading practices of teachers. Teaching and Teacher Education, 26(7), 1372–1380. doi: 10.1016/j.tate.2010.03.008
• Reilly, D. (2012). Gender, culture, and sex-typed cognitive abilities. PLoS ONE, 7(7), e39904. doi: 10.1371/journal.pone.0039904
• Remesal, A. (2011). Primary and secondary teachers’ conceptions of assessment: a qualitative study. Teaching and Teacher Education, 27(2), 472–482. doi: 10.1016/j.tate.2010.09.017
• Richardson, M., Abraham, C. i Bond, R. (2012). Psychological correlates of university students’ academic performance: a systematic review and meta-analysis. Psychological Bulletin, 138(2), 353–387. doi: 10.1037/a0026838
• Robinson, J. P. i Lubienski, S. T. (2011). The development of gender achievement gaps in mathematics and reading during elementary and middle school: examining direct cognitive assessments and teacher ratings. American Educational Research Journal, 48(2), 268–302. doi: 10.3102/0002831210372249
• Ross, J. A. i Gray, P. (2008). Alignment of scores on large-scale assessments and report-card grades. The Alberta Journal of Educational Research, 54(3), 327–341.
• Ross, J. A. i Kostuch, L. (2011). Consistency of report card grades and external assessments in a Canadian province. Educational Assessment, Evaluation and Accountability, 23(2), 159–180. doi: 10.1007/s11092-011-9117-3
• Serbin, L. A., Stack, D. M. i Kingdon, D. (2013). Academic success across the transition from primary to secondary schooling among lower-income adolescents: understanding the effects of family resources and gender. Journal of Youth and Adolescence, 42(9), 1331–1347. doi: 10.1007/s10964-013-9987-4
• Shibley Hyde, J. i Kling, K. C. (2001). Women, motivation, and achievement. Psychology of Women Quarterly, 25(4), 364–378. doi: 10.1111/1471-6402.00035
• Skórska, P. i Świst, K. (2014). Wielkość efektu płci w wewnątrzszkolnych i zewnątrzszkolnych wskaźnikach osiągnięć ucznia. W: B. Niemierko i M. K. Szmigel (red.), Diagnozy edukacyjne. Dorobek i nowe zadania (s. 89–103). Kraków: Polskie Towarzystwo Diagnostyki Edukacyjnej.
• Spilt, J. L., Koomen, H. M. Y. i Jak, S. (2012). Are boys better off with male and girls with female teachers? A multilevel investigation of measurement invariance and gender match in teacher–student relationship quality. Journal of School Psychology, 50(3), 363–378. doi: 10.1016/j.jsp.2011.12.002
• Spinath, B., Eckert, C. i Steinmayr, R. (2014). Gender differences in school success: what are the roles of students’ intelligence, personality and motivation? Educational Research, 56(2), 230–243. doi: 10.1080/00131881.2014.898917
• Spinath, B., Harald Freudenthaler, H. i Neubauer, A. C. (2010). Domain-specific school achievement in boys and girls as predicted by intelligence, personality and motivation. Personality and Individual Differences, 48(4), 481–486. doi: 10.1016/j.paid.2009.11.028
• Steinmayr, R. i Spinath, B. (2008). Sex differences in school achievement: what are the roles of personality and achievement motivation? European Journal of Personality, 22(3), 185–209. doi: 10.1002/per.676
• Südkamp, A., Kaiser, J. i Möller, J. (2012). Accuracy of teachers’ judgments of students’ academic achievement: a meta-analysis. Journal of Educational Psychology, 104(3), 743–762. doi: 10.1037/a0027627
• Świst, K. i Skórska, P. (2016). Trafność prognostyczna wskaźników osiągnięć gimnazjalnych względem wyników maturalnych dziewcząt i chłopców. Edukacja, 139(4), 42–60.
• Trapmann, S., Hell, B., Weigand, S. i Schuler, H. (2007). The validity of school grades for academic achievement. A meta-analysis. Zeitschrift Fur Padagogische Psychologie, 21(1), 11–27. doi: 10.1024/1010-0652.21.1.11
• Trautwein, U., Lüdtke, O., Marsh, H. W., Köller, O. i Baumert, J. (2006). Tracking, grading, and student motivation: using group composition and status to predict self-concept and interest in ninth-grade mathematics. Journal of Educational Psychology, 98(4), 788–806. doi: 10.1037/0022-0663.98.4.788
• Vecchione, M., Alessandri, G. i Marsicano, G. (2014). Academic motivation predicts educational attainment: does gender make a difference? Learning and Individual Differences, 32, 124–131. doi: 10.1016/j.lindif.2014.01.003
• Voyer, D. i Voyer, S. D. (2014). Gender differences in scholastic achievement: a meta-analysis. Psychological Bulletin, 140(4), 1174–1204. doi: 10.1037/a0036620
• Weis, M., Heikamp, T. i Trommsdorff, G. (2013). Gender differences in school achievement: the role of self-regulation. Educational Psychology, 4, 442. doi: 10.3389/fpsyg.2013.00442
• Woods, C. M. (2008). Empirical selection of anchors for tests of differential item functioning. Applied Psychological Measurement, 33(1), 42–57. doi: 10.1177/0146621607314044
• Woods, C. M. (2009). Evaluation of MIMIC-model methods for DIF testing with comparison to two-group analysis. Multivariate Behavioral Research, 44(1), 1–27. doi: 10.1080/00273170802620121
• Zhu, M. i Urhahne, D. (2014). Teachers’ judgements of students’ foreign-language achievement. European Journal of Psychology of Education. doi: 10.1007/s10212-014-0225-6

Notes

http://www.edukacja.ibe.edu.pl/images/numery/2017/3-4-pomiarowcy-czy-nauczyciele-potrafia.pdf

Identifiers

DOI

10.24131/3724.170304