Gülşah BAŞOL, Şeyma ERBAY, Bu çalışma ikinci YAZARIN

Portfolyo Kullanımının Akademik Başarıya Etkisi: Bir Meta Analiz Çalışması

Mevcut çalışmada öğretimde portfolyo uygulamasının akademik başarı üzerindeki etkisi meta analiz yoluyla incelenmiştir. Araştırma örneklemi detaylı bir tarama süreci sonucunda ulaşılan, yurt içi ve yurtdışı toplam 24 nicel çalışmayı kapsamaktadır. Veriler kodlama formu ile derlenerek, istatistiksel sonuçlar etki değerlerine dönüştürülmüştür. Tüm kodlamalar iki araştırmacı tarafından gerçekleştirilmiş ve kodlamalar arası uyumun.90 ile mükemmele yakın olduğu görülmüştür. Analizler çalışmalar üzerinden (24 çalışma) ve çalışmalardaki karşılaştırma grupları üzerinden (46 karşılaştırma) olmak üzere iki başlıkta ele alınmıştır. Çalışmalardaki değişkenler ve farklılaşmalar göz önünde bulundurularak Rastgele Etkiler Modeli kullanılmış; genel ve kümülatif verilere heterojenlik testi yapılmıştır. Analizlerde MetaWin2.1 ve SPSS 17.0 kullanılmıştır. Etki büyüklükleri için yayın yılı, uygulama yerleri, yayın türleri, uygulama türleri, öğrenim düzeyi ve ders alanı moderatör değişkenler olarak belirlenmiştir. Sonuçlar genel ve kümülatif olarak değerlendirilmiş, genel analiz için etki değerleri dağılımının heterojenlik gösterdiği, kümülatif analizler içinse homojenliğe işaret ettiği bulunmuştur. Ancak moderatör değişkenlerin heterojenliği açıklamadıkları görülmüştür. Sonuçlara göre portfolyo kullanımı, hem genel hem kümülatif analizlere göre akademik başarı üzerinde pozitif yönlü ve büyük ölçekli bir etkiye sahiptir. Rosenthal yaklaşımı mevcut çalışmanın sonuçlarının geçerliliğine kanıt oluşturmuş; bulguların geçersiz sayılabilmesi için literatüre genel veriler için en az 3524, kümülatif veriler için ise 5725 adet zıt bulguları olan çalışma eklenmesi gerektiği bulunmuştur

The Effect of Portfolio Use on Academic Achievement: A Meta-analysis

It is a meta-analysis study, searching the effectiveness of portfolio use in teaching. The sample, selected through an exhaustive search, consisted of 24 studies, including the studies conducted in overseas. The data complied through a coding form and statistical findings converted into the effect sizes. The codings were carried out by two researchers; the consistency was near perfect, as calculated by a Kappa statistics of .90. The analyses were classified into two headings as overall analysis (24 studies) and cumulative analysis (46 comparison groups). Considering the technological developments in time that was relevant in the current study, Random Effects Model was applied in the current analysis; effect sizes for general and cumulative data were calculated, heterogeneity was tested through Q statistics, and I² was calculated to determine the degree of heterogeneity. MetaWin 2.1 and SPSS 17.0 were used for analyses. Publication year, subject area, publication type, application type, education level and subject area were the moderator variables. The results were evaluated both in general and cumulatively and indicated heterogeneity for general analysis and homogeneity for cumulative analysis. However, none of the moderators explained heterogeneity in general analysis. According to the results, portfolio use has a large, positive impact on academic success. In addition, Rosenthal Approach indicated the validity of the results. Findings indicated that to declare the findings null there was a need for an additional 3524 and 5725 studies with reverse findings for general and cumulative analysis, respectively

PDF

___

Arter, J. A., & Spandel, V. (1992). Using portfolios of student work in instruction and assessment. Educational Measurement: Issues and Practices, 11(1), 26-30.
Bahçeci D. ve Kuru, M. (2008). Portfolyo değerlendirmenin üniversite öğrencilerinin öz-yeterlik algısı ve yaşam becerileri üzerine etkisi. Ahi Evran Üniversitesi Kırşehir Eğitim Fakültesi Dergisi (KEFAD), 9(1), 97-111.
Baki, A. ve Birgin, O. (2002). Matematik eğitiminde alternatif bir değerlendirme olarak bireysel gelişim dosyası uygulaması. V. Ulusal Fen Bilimleri ve Matematik Eğitimi Kongresi Bildiri Kitabı, 11, 913-920. Ankara: Devlet Kitapları Müdürlüğü Basımevi.
Baki, A. ve Birgin, O. (2004). Bireysel gelişim dosyasına dayalı değerlendirme uygulamasının yansımaları. XII. Eğitim bilimleri kongresi bildiriler kitabı, 1, 13-40. Gazi Üniversitesi Eğitim Bilimleri Enstitüsü, Ankara.
Başol-Göçmen, G. (2004). Meta analizin genel bir değerlendirmesi. Sakarya Üniversitesi Eğitim Fakültesi Dergisi, 7, 209-214.
Başol, G. (2015). Eğitimde ölçme ve değerlendirme (Genişletilmiş Üçüncü Baskı). Ankara: Pegem A Yayıncılık.
Başol, G., Doğuyurt, M. F. ve Demir, S. (2016). Türkiye örnekleminde meta analiz çalışmalarının içerik analizi ve metodolojik değerlendirilmesi. International Journal of Human Sciences, 13(1), 714-745.
Başol, G., Amaç, R., Erdoğdu, Y., Can, T. ve Suna, Y. (2016). Türk Silahlı Kuvvetleri Askeri Liseler ile Bando Astsubay Hazırlama Okulunda öğrenim görecek öğrencileri seçme sınavı ALS sorularının içerik analizi. INES I. Academic Research Congress. Akdeniz Üniversitesi, Antalya, TURKEY. November, 3-5, 2016.
Başol, G., Balgalmış, E., Karlı, M. G. ve Öz, F. B. (2016). TEOG sınavı matematik sorularının MEB kazanımlarına TIMSS seviyelerine ve yenilenen Bloom Taksonomisine göre incelenmesi. Uluslararası İnsan Bilimleri, 13(3), 5945-5965.
Basol, G. ve Saruhan, U. (2016). Bir içerik analizi çalışması: Kamu Personeli Seçme Sınavı (KPSS) eğitim bilimleri test maddelerinin derslerine, konularına, ve bilişsel alan düzeylerine göre incelenmesi. INES Academic Research Congress. Akdeniz Üniversitesi, Antalya, TURKEY. November, 3-5, 2016.
Başol, G. ve Türkoğlu, E. (2006). A content analysis study of KPSS Educational Sciences’ items according to the courses, topics and their place in the Bloom’s taxonomy [Tam Metin]. The III. International Symposium on Programme and Proceedings Abstracts, 21, The III. International Teacher Training Symposium, Çanakkale 18 Mart University, Çanakkale, Turkey.
Birgin, O. (2002). Alternatif bir değerlendirme yöntemi olarak portfolyo uygulamasına ilişkin öğrenci görüşleri. Gazi Üniversitesi Türk Eğitim Bilimleri Dergisi, 6(1), 1-24.
Borenstein, M., Hedges, L. V., Higgins, J. P. T., & Rothstein, H. R. (2009). Introduction to meta-analysis. West Sussex, UK: John Wiley.
Button, K.S., Ionnidis, J.P.A., Mokrysz, C., Nosek, B.A., Flint, J., Robinson, E.S.J., & Munafo, M.R. (2013). Power failure: Why small sample size undermines the reliability of neuroscience. Nature Reviews Neuroscience, 14, 365-376.
Cohen, J. (1988). Statistical power analysis for the behavioral sciences. New York: Erlbaum. Demir, S. ve Başol, G. (2014). Bilgisayar destekli matematik öğretiminin (BDMÖ) akademik başarıya etkisi: Bir meta analiz çalışması. Kuram ve Uygulamada Eğitim Bilimleri, 14(5), 2013-2035.
Field, A. P. (2001). Meta-analysis of correlation coefficients: A Monte Carlo comparison of fixed and randomeffects methods. Psychological Methods, 6(2), 161-180.
Hedges, L. V., & Olkin, I. (1985). Statistical methods for meta-analysis. New York: Academic Press Inc.
Hunter, J. E., & Schmidt, F. L. (1990). Methods of meta-analysis: Correcting error and bias in research findings. Beverly Hills, CA: Sage.
Kan, A. (2007). Portfolyo değerlendirme. Hacettepe Üniversitesi Eğitim Fakültesi Dergisi, 32, (133-144).
Karamanoğlu, S, S. (2006). İlköğretim öğrencilerinin fen başarılarının değerlendirilmesinde sorgulama programının kullanılması: Portfolyo. Yayımlanmamış yüksek lisans tezi, Marmara Üniversitesi, Eğitim Bilimleri Enstitüsü, İstanbul.
Korkmaz, H. (2004). Fen ve teknoloji eğitiminde alternatif değerlendirme yaklaşımları. Ankara: Yeryüzü Yayınevi.
Korkmaz, H. ve Kaptan, F. (2002). Fen eğitiminde öğrencilerin gelişimini değerlendirmek için portfolyo kullanımı üzerine bir inceleme. Hacettepe Üniversitesi Fakültesi Dergisi, 23,167-176.
Korkmaz, H. ve Kaptan, F. (2005). Fen eğitiminde öğrencilerin gelişimini değerlendirmek için elektronik portfolyo kullanımı üzerinde bir inceleme. The Turkish Online Journal of Educational Technology-TOJET, 4(1), 13.
MEB. (2005). İlköğretim 1-5. sınıf programları tanıtım el kitabı. Ankara: MEB, Talim Ve Terbiye Kurulu Başkanlığı, Devlet Kitapları Müdürlüğü Basım Evi.
Meisel, S., & Steel, D. (1991). The early childhood portfolio collection process an arbor. MI, University of Michigan, ABD.
Menevşe, E. B. (2012). Portfolyo uygulamasının öğretmen adaylarının akademik başarılarına etkisi. Yayımlanmamış yüksek lisans tezi, Necmettin Erbakan Üniversitesi, Konya.
Micklo, S. J. (l997). Math portfolio in the primary grades. Childhood Education, Summer, 97, 194-199.
Öncü, H. (2009). Ölçme ve değerlendirmede yeni bir yaklaşım: Portfolyo değerlendirme. Türkiye Sosyal Araştırmalar Dergisi, 13(1), 103-132
Rassin, M., Sinler, D. & Ehrenfeld, M. (2006). Departmental portfolio in nursing an advanced instrument. Nurse Education in Practice, 6, 55-60.
Rosenberg, M. S., Adams, D. C., & Gurevitch, J. (2000). MetaWin: Statistical software for meta-analysis version 2.0. Sunderland, MA: Sinauer Associates, Inc.
Rosenthal, R. (1991). Meta-analytic procedures for social research. Beverly Hills, CA: Sage.
Ryan, P. J. (l998). Teacher development and use of portfolio assessment strategies and the impact on instruction in mathematics. Doctoral dissertation, Stanford University School of Educational, Stanford, CA.
Schroll, J. B. Moustgaard, R., & Gotzsche, P. C. (2011). Dealing with substantial heterogeneity in Cochrane reviews. Cross-sectional study. BMC Medical Research Methodology, 11(22), http:77www.biomedcentral.com/1471- 2288/11/22
Shepard, L. A. (2000). The role of assessment in a learning culture. Educational Researcher, 29(7), 4-14.
SPSS Inc. Released 2008. SPSS for Windows, Version 17.0. Chicago, SPSS Inc.
Stiggins, R. J. (1994). Student centered classroom assessment. New York: Merrill Publishing Co.
Stiggins, R. J. (2001). The unfulfilled promise of classroom assessment. Education Measurement: Issue and Practice, Fall.
Tan, Ş. (2006). Öğretimi planlama ve değerlendirme (Geliştirilmiş 10. baskı). Ankara: Pegem A Yayıncılık.
Tiwari, A., & Tang, C. (2003). From process to outcome: The effect of portfolio assessment on student learning. Nurse Education Today, 23, 269-277.
Wolf, F. M. (1986). Meta-analysis: Quantitative methods for research synthesis. Beverly Hills.
Yıldız, N. (2002). Verilerin değerlendirilmesinde meta analizi. Yayımlanmış yüksek lisans tezi, Marmara Üniversitesi, Fen Bilimleri Enstitüsü, İstanbul.