Wykorzystanie egzaminów o niskiej doniosłości do oceny efektywności nauczania – możliwości i ograniczenia
2015, 60, Numer 4
DOI
Data publikacji
Model publikowania
Rodzaj licencji
Dziedzina
Dyscyplina
Język publikacji
Pliki do pobrania
PDF 204 KB
Liczba wyświetleń:145
Liczba pobrań:13
Cytowania Crossref:0
Wynik Altmetric:0
Abstrakt
The article discusses the possibility of using low-stakes tests to assess teaching effectiveness measures (educational value-added, EVA) for primary schools in Poland. It was shown that EVA, calculated using the results of the OBUT test for diagnosis of skills of third grade pupils, which is voluntary for schools, and the Sprawdzian – external examination conducted in the sixth grade, can be a valuable tool for evaluation, provided that the third-grade test is conducted and assessed in accordance with the procedures. The authors identified problems in this field. Disturbing characteristics of the OBUT test may suggest that these procedures have not been complied with in every school. For this reason, the authors recommend changes in the implementation of such diagnoses of school achievements.
Słowa kluczowe:
Bibliografia
ACARA. 2014. NAPLAN Achievement in Reading, Persuasive Writing, Language Conventions and Numeracy: National Report for 2014, Australian Curriculum, Assessment and Reporting Authority, Sydney.
Adams R.J. 2005. Reliability as a measurement design effect, „Studies in Educational Evaluation”, nr 312–313, s. 162–172.
Balázsi I. 2006. National Assessment of Basic Competencies in Hungary, Center for Evaluation Studies, dostęp: http://www.iaea.info/documents/paper_1162a1d92d.pdf [08.10.2015].
Ballou D. 2009. Test Scaling and Value-Added Measurement, „Education Finance and Policy”, nr 4 (4), s. 351–383.
Bąbiak I., Matuszczak K., Zielonka P. 2013. Raport z ewaluacji wewnętrznej projektu EWD, Instytut Badań Edukacyjnych, Warszawa.
Chudowsky N., Koenig J.A., Braun H.I. 2010. Getting value out of value-added report of a workshop, National Academies Press, Washington.
Centralna Komisja Egzaminacyjna 2011. Ogólnopolskie badanie umiejętności trzecioklasistów OBUT 2011. Przewodnik przeprowadzającego badanie, CKE, Warszawa.
Corcoran S.P., Jennings J. i L., Beveridge A.A. 2011. Teacher Effectiveness on High- and Low-Stakes Tests, Society for Research on Educational Effectiveness, New York.
De Ayala R.J. 2009. The theory and practice of item response theory, Guilford Press, New York.
Dolata R., Hawrot A., Humenny G., Jasińska A., Koniewski M., Majkut P., Żółtak T. 2013. Trafność metody edukacyjnej wartości dodanej dla gimnazjów, Instytut Badań Edukacyjnych, New York.
Dolata R., Hawrot A., Humenny G., Jasińska-Maciążek A., Koniewski M., Majkut P. 2014. Kontekstowy model efektywności nauczania po pierwszym etapie edukacyjnym. Edukacyjna Wartość Dodana, Instytut Badań Edukacyjnych, Warszawa.
Dolata R., Pokropek A. 2010. Motywacja a wynik testu z nauk przyrodniczych. Studium na przykładzie PISA 2006, [w:] Teraźniejszość i przyszłość oceniania szkolnego: XVI Krajowa Konferencja Diagnostyki Edukacyjnej, red. B. Niemierko, M.K. Szmigel, Grupa Tomami, Kraków.
Dolata R., Szaleniec H. 2012. Funkcje krajowych egzaminów w systemie edukacji, „Polityka Społeczna”, nr tematyczny 1, s. 37–41.
Domański H., Pokropek A. 2011. Podziały terytorialne, globalizacja a nierówności społeczne: wprowadzenie do modeli wielopoziomowych, Wydawnictwo IFiS PAN, Warszawa.
EACEA. 2010. Ogólnokrajowe egzaminowanie uczniów w Europie: cele, organizacja i wykorzystanie wyników, tłum. M. Kowalczyk, Fundacja Rozwoju Systemu Edukacji, Warszawa.
Freeman C. 2009. First national literacy and numeracy tests introduced, „Research Developments”, nr 20 (20), s. 4.
Herczyński J., Borek A., Stożek E. 2012. Ocena potrzeb szkoły na podstawie osiągnięć uczniów oraz wyników ewaluacji zewnętrznej, [w:] Finansowanie oświaty, red. M. Herbst, t. 3, Biblioteczka Oświaty Samorządowej, Warszawa, s. 171–232.
Hungarian Eurydice Unit. 2009. National Testing of Pupils in Europe: Objectives, Organisation and Use of Results. Hungary, Hungarian Eurydice Unit, Bruksela.
Jacob B.A., Levitt S.D. 2003. Rotten Apples: An Investigation of the Prevalence and Predictors of Teacher Cheating, „The Quarterly Journal of Economics”, nr 118 (3), s. 843–877.
Jager D.J., Merki K.M., Oerke B., Holmeier M. 2012. Statewide Low-Stakes Tests and a Teaching to the Test Effect? An Analysis of Teacher Survey Data from Two German States, „Assessment in Education: Principles, Policy Practice”, nr 19 (4), s. 451–467.
Jasińska A., Modzelewski M. 2013. Międzyszkolne zróżnicowanie wyników nauczania po pierwszym etapie kształcenia, [w:] Polska edukacja w świetle diagnoz prowadzonych z różnych perspektyw badawczych: XIX Krajowa Konferencja Diagnostyki Edukacyjnej, red. B. Niemierko,M.K. Szmigel, Grupa Tomami, Kraków, s. 165–178.
Jasińska A., Modzelewski M. 2014. Testy osiągnięć szkolnych TOS3: przykład narzędzia skonstruowanego z wykorzystaniem modelu Rascha, „Edukacja”, nr 2 (127), s. 85–107.
Jasińska-Maciążek A., Modzelewski M. 2014. Modele analizy zróżnicowania wyników nauczania, [w:] R. Dolata, Czy szkoła ma znaczenie? Analiza zróżnicowania efektywności nauczania na pierwszym etapie edukacyjnym, Instytut Badań Edukacyjnych, Warszawa.
Karabatsos G. 2003. Comparing the aberrant response detection performance of thirty-six person-fit statistics, „Applied Measurement in Education”, nr 16 (4), s. 277–298.
Karwowski M. red. 2013. Ścieżki rozwoju edukacyjnego młodzieży – szkoły pogimnazjalne: trafność wskaźników edukacyjnej wartości dodanej dla szkół maturalnych, Wydawnictwo Instytutu Filozofii i Socjologii Polskiej Akademii Nauk, Warszawa.
Konarzewski K. 2012. TIMSS i PIRLS 2011. Osiągnięcia szkolne polskich trzecioklasistów w perspektywie międzynarodowej, CKE, Warszawa.
MacBeath J., Schratz M., Meuret D., Jakobsen L. 2005. Czy nasza szkoła jest dobra?, tłum. K. Kruszewski, Wydawnictwa Szkolne i Pedagogiczne, Warszawa.
Matuszczak K., Wasilewska O. 2015. Wyniki egzaminów zewnętrznych w pracy szkoły, [w:] Egzaminy zewnętrzne w polityce i praktyce edukacyjnej. Raport o stanie edukacji 2014, red. R. Dolata, M. Sitek, Instytut Badań Edukacyjnych, Warszawa.
McCaffrey D.F., Lockwood J.R., Koretz D.M., Hamilton L.S. 2003. Evaluating Value-Added Models for Teacher Accountability, RAND Corporation, Santa Monica, CA.
National Foundation for Educational Research. 2009. National Testing of Pupils in England, Wales and Northern Ireland, dostęp: https://www.nfer.ac.uk/shadomx/apps/fms/fmsdownload.cfm?file_uuid=67EAAF91-C29E-AD4D-07F1-A9373EA17105&siteName=nfer.
Nichols S.L., Berliner D. 2007. The pressure to cheat in a high-stakes testing environment, [w:] Psychology of academic cheating, red. E.M. Anderman, T.B. Murdock, Elsevier Academic Press, Amsterdam–Boston, s. 289–311.
Niemierko B. 2009. Diagnostyka edukacyjna: podręcznik akademicki, Wydawnictwo Naukowe PWN, Warszawa.
OECD. 2008. Measuring improvements in learning outcomes: Best practices to assess the value-added of schools, Organisation for Economic Co-operation and Development, Paris.
OECD. 2013. Synergies for better learning: an international perspective on evaluation and assessment, Organisation for Economic Co-operation and Development, Paris.
Papay J.P. 2011. Different Tests, Different Answers The Stability of Teacher Value-Added Estimates Across Outcome Measures, „American Educational Research Journal”, nr 481, s. 163–193.
Pfeiffer A. 2015. Raport zbiorczy z badania uczestniczącego w szkołach podstawowych, Instytut Badań Edukacyjnych, Warszawa.
Pregler A., Wiatrak E. red. 2011. Ogólnopolskie Badanie Umiejętności Trzecioklasistów Raport OBUT 2011, CKE, Warszawa.
Raudenbush S.W. 2004. What are value-added models estimating and what does this imply for statistical practice?, „Journal of Educational and Behavioral Statistics”, nr 291, s. 121–130.
Raudenbush S.W., Willms J.D. 1995. The Estimation of School Effects, „Journal of Educational and Behavioral Statistics”, nr 20 (4), s. 307–335.
Reardon S.F., Raudenbush S.W. 2009. Assumptions of value added models for estimating school effects, „Education Finance and Policy”, nr 4 (4), s. 492–519.
SEO. 2013. Wymagania państwa wobec szkół, dostęp: http://www.npseo.pl/action/requirements/wymagania_panstwa_wobec_szkol.
Sinka E. 2010. OECD Review on Evaluation and Assessment Frameworks for Improving School Outcomes. Hungary. Country Background Report, Hungary, dostęp: http://www.oecd.org/edu/school/50484774.pdf.
Skórska P., Świst K., Pokropek A. 2014. Indywidualne i grupowe efekty motywacji testowej uczniów, [w:] Diagnozy edukacyjne: dorobek i nowe zadania: XX Krajowa Konferencja Diagnostyki Edukacyjnej, red. B. Niemierko, M.K. Szmigel, Grupa Tomami, Kraków, s. 161–171.
Stożek E. 2012. Czy egzaminy mogą pomóc szkole w rozwoju?, „Polityka Społeczna”, nr tematyczny 1, s. 30–33.
Szaleniec H. 2004. Jak wykorzystywać wyniki egzaminów zewnętrznych, WSiP, Warszawa.
Szaleniec H. red. 2009. Teoria wyniku zadania IRT: zastosowania w polskim systemie egzaminów zewnętrznych: praca zbiorowa, CKE, Warszawa.
Vigneau E., Qannari E.M. 2003. Clustering of Variables Around Latent Components, „Communications in Statistics – Simulation and Computation”, nr 32 (4), s. 1131–1150.
Wasilewska O., Rybińska A., Muzyk A. 2014. Wykorzystanie ewaluacji zewnętrznej i wewnętrznej przez szkoły, Instytut Badań Edukacyjnych, Warszawa.
Wise S.L., DeMars C.E. 2005. Low Examinee Effort in Low-Stakes Assessment: Problems and Potential Solutions, „Educational Assessment”, nr 10 (1), s. 1–17.
Wolf L.F., Smith J.K. 1995. The Consequence of Consequence: Motivation, Anxiety, and Test Performance, „Applied Measurement in Education”, nr 8 (3), s. 227–242.
Żółtak T. 2013. Statystyczne modelowanie wskaźników edukacyjnej wartości dodanej – podsumowanie polskich doświadczeń (Raport tematyczny z badania), Instytut Badań Edukacyjnych, Warszawa.
Inne artykuły z tego numeru
- school achievementsstability and variabilitytraps in the measurement
O pułapkach pomiaru osiągnięć szkolnych: „przeciętny uczeń” nie istnieje
- surplus in educational diagnosticsstrategies of diagnosticians
Nadmiar jako problem diagnostyki edukacyjnej
- evaluation processsocial communicationinteractioninstitutional reflexivityintercultural evaluationparticipation
Ewaluacja jako komunikacja. Od animacji do alienacji
Podobne publikacje
- school achievementsstability and variabilitytraps in the measurement
O pułapkach pomiaru osiągnięć szkolnych: „przeciętny uczeń” nie istnieje
- surplus in educational diagnosticsstrategies of diagnosticians
Nadmiar jako problem diagnostyki edukacyjnej
- evaluation processsocial communicationinteractioninstitutional reflexivityintercultural evaluationparticipation
Ewaluacja jako komunikacja. Od animacji do alienacji