OECD PISA TÜRKİYE VERİSİ KULLANILARAK YAPILAN ARAŞTIRMALARIN METODOLOJİK TARAMASI
Bu makalede PISA Türkiye verisi kullanılarak yazılan akademik makalelerde PISA verisinin yöntembilimsel olarak ne kadar doğru kullanılabildiği sınanmaktadır. ISI Web of Knowledge, Scopus ve ULAKBİM dizinlerinde PISA Türkiye verileri/sonuçları üzerine yazılmış 97 makaleye ulaşılmıştır. Bu makalelerin sadece 46'sında PISA Türkiye verisi kullanılarak özgün bir analiz yapıldığı tespit edilmiştir. Yöntembilimsel olarak incelenen 46 makalenin büyük çoğunluğunda ise örneklem ağırlıkları, olası değerler ve analizler için kullanılan yazılım gibi özelliklerden bahsedilmediği görülmüştür. Sadece 5 makalede örneklem ağırlıklarının doğru kullanımı rapor edilirken, olası değerler de sadece 10 makalede istatistiksel olarak uygun şekillerde kullanılmıştır. Bu sonuçlar PISA Türkiye verilerinin akademik yazında kullanımının çok sınırlı olduğunu göstermektedir. Dahası, PISA Türkiye verisi ile özgün analizler yapan makalelerin de büyük çoğunluğunda yöntembilimsel gerekliliklere uyulmadığını ve yapılan analizlerin büyük çoğunluğunun bu haliyle güvenilir olmaktan uzak olduğunu söylemek mümkündür. Bu haliyle PISA Türkiye verilerinin Türkiye'de eğitim politikalarına yön verme potansiyelinden hayli uzakta olduğunu söylenebilir
A Methodological Review of Research Using OECD PISA Turkey Data
This article methodologically reviews the scientific articles based on PISA Turkey data. 97 articles were reached using ISI Web of Knowledge, Scopus and ULAKBIM indices. Among these articles, only 46 are found to have employed original analysis of PISA Turkey data. Moreover, most of the 46 reviewed articles are failed to report methodological issues such as sampling weights, the use of plausible values and the software employed in the analyses. Only 5 articles are found to use and report sampling weights properly, only 10 used plausible values in a methodologically acceptable way. These results show that the use of PISA Turkey data in scientific articles is very limited. Moreover, most of the articles that employ original analyses with PISA Turkey data fail to meet methodological necessities. Thus, their results are far from being reliable. In this manner, it is hard to claim that the potential of PISA Turkey data to guide education policies in Turkey can be realized.
___
- Goldstein H. (2004), "International Comparisons of Student Attainment: Some issues arising from the PISA study", Assessment in Education: Principles, Policy & Practice, 11(3):319-330.
- Gür B.S./Çelik Z./Özoğlu M. (2012), "Policy Options for Turkey: A critique of the interpretation and utilization of PISA results in Turkey", Journal of Education Policy, 27(1):1-21.
- Kreiner S. (2011), "Is The Foundation Under PISA Solid? A Critical Look at The Scaling Model Underlying International Comparisons of Student Attainment", http://ncm3.ncm.chalmers.se/media/ncm/dokument/pisa_ kreiner_.pdf, (5/3/2016).
- Kreiner S./Christiensen K.B. (2013), "Analyses of Model Fit and Robustness. A New Look at The PISA Scaling Model Underlying Ranking of Countries According to Reading Literacy", Psychometrika, 79(2):210-231.
- Liou P.Y./Hung Y.C. (2015), "Statistical Techniques Utilized in Analyzing PISA and TIMSS Data in Science Education From 1996 To 2013: A methodological review", International Journal of Science and Mathematics Education, 13(6): 1449-1468.
- Meyer H.D./Zahedi K. (2014), "Open Letter to Andreas Schleicher, OECD, Paris", Policy Futures in Education, 12(7):872-877.
- OECD (2004), "Learning for Tomorrow's World: First results from PISA 2003", (Paris: OECD Publishing).
- OECD (2007), "PISA 2006: Science competencies for tomorrow's World", (Paris: OECD Publishing).
- OECD (2009), (PISA Data Analysis Manual", (Paris: OECD Publishing).
- OECD (2010), "PISA 2009 Results: What students know and can do: Student performance in reading, mathematics and science", (Paris: OECD Publishing).
- OECD (2013), "PISA 2012 Results: What students know and can do: Student performance in mathematics, reading and science", (Paris: OECD Publishing).
- OECD (2014), "PISA 2012 Technical Report), http://www.oecd.org/pisa/ pisaproducts/pisa2012technicalreport.htm, (1/2/2016).
- OECD (t.y.), "PISA Products. Programme for International Student Assessment", http://www.oecd.org/pisa/pisaproducts/, (19/2/2016).
- Rutkowski L./ Gonzalez E./ Joncas M./von Davier, M. (2010), "International Large-Scale Assessment Data: Issues in secondary analysis and reporting", Educational Researcher, 39(2): 142-151.
- Sahlberg P./Hargreaves A. (2015), "The Tower of PISA is Badly Leaning. An Argument for Why It Should Be Saved", The Washington Post, https:// www.washingtonpost.com/news/answer-sheet/wp/2015/03/24/the-towerof-pisa-is-badly-leaning-an-argument-for-why-it-should-be-saved/, (5/3/2016).
- Schleicher A. (2015), "Attacks on PISA are Entirely Unjustified", tes Magazine, https://www.tes.com/article.aspx?storycode=6345213, (5/3/2016).
- Takayama K. (2015), "Has PISA Helped or Hindered ?" http://www. headfoundation.org/userfiles/publication_parpers/2015_1)_Has_PISA_ helped_or_hindered__Keita_Takayama.pdf, (1/2/2016).
- von Davier M./ Gonzalez E.J./ and Mislevy R.J. (2009), "What Are Plausible Values and Why Are They Useful?", von Davier M./Hastedt D. (Der.), IERI Monograph Series: Issues and methodologies in large-scale assessments, (Hamburg: IEA and ETS):9-36
- ISSN: 1303-9202
- Başlangıç: 2003
- Yayıncı: EĞİTİM VE BİLİM EMEKÇİLERİ SENDİKASI
Sayıdaki Diğer Makaleler
TÜRKİYE'DE HETEROPATRİARKAL SİSTEM BASKISI ALTINDA LGBTİ'LERİN SOSYAL HİZMET İHTİYAÇLARI
Pınar AKKUŞ, Seher Cesur KILIÇASLAN
TÜRKİYE VARLIK FONU'NUN KURULUŞ AMAÇLARI VE YAPISI ÜZERİNE BİR DEĞERLENDİRME
POLİTİK AKTÖRÜN FENOMENOLOJİSİ
OECD PISA TÜRKİYE VERİSİ KULLANILARAK YAPILAN ARAŞTIRMALARIN METODOLOJİK TARAMASI