The differential item functioning (dif) analysis of mathematics items in the international assessment programs
Uluslararası değerlendirme çalışmalarında kullanılan matematik sorularının madde yanlılığı yöntemleri kullanılarak incelenmesi
- Tez No: 180942
- Danışmanlar: PROF. DR. HALİL GİRAY BERBEROĞLU
- Tez Türü: Doktora
- Konular: Matematik, Eğitim ve Öğretim, Mathematics, Education and Training
- Anahtar Kelimeler: Madde Yanlılığı, Sınırlandırılmış Faktör Çözümlemeleri, Mantel-Haenszel Yöntemi, Madde Tepki Kuramı En Çok Olabilirlik OranAnalizi, Üçüncü Uluslararası Matematik ve Fen Bilgisi Çalışması (TIMSS), Uluslararası Öğrenci Başarısını Belirleme Programı (PISA), Differential Item Functioning, Restricted Factor Analysis, Mantel-Haenszel Method, Item Response Theory Likelihood Ratio Analysis, ThirdInternational Mathematics and Science Study (TIMSS), Programme forInternational Student Assessment (PISA)
- Yıl: 2006
- Dil: İngilizce
- Üniversite: Orta Doğu Teknik Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Ortaöğretim Fen ve Matematik Alanlar Eğitimi Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: Belirtilmemiş.
Özet
Ülkeler kendi matematik başarılarını, küreselleşen dünyadakirakipleriyle karşılaştırma ihtiyacı duymaktadırlar. Bu bağlamda, TIMSS vePISA 2003 gibi, 1960lı yıllardan beri yapılan kültürler-arası çalışmalar,ülkelerdeki matematik eğitimini değerlendirmek ve geliştirmek için genişbakış açıları sağlamaktadır. Ancak farklı ülkelerdeki farklı kültürel yapılar vebu ülkelerin çoğunlukla farklı dilleri konuşuyor olmaları, uluslararasısınavlarda kullanılan testlerle, bunların ilgili ülke dillerine uyarlanmışhallerinin farklı kültürler arasında aynı şekilde çalışıp çalışmadığının, veyabaşka bir deyişle denk olup olmadığının incelenmesini gerekli kılmıştır.Bu bağlamda, söz konusu çalışma TIMSS-1999 ve PISA 2003uluslararası sınavlarının matematik başarı testlerinin kültürler arasıdenkliğini, ve matematik başarısı kavramının altında kültürlere has özgülyapılar olup olmadığını araştırmıştır. Bu amaçla, TIMSS-1999 ve PISA 2003Türkçe ve İngilizce versiyonlarındaki matematik başarı testi maddeleri, (a)farklı dildeki test maddelerinin psikometrik özellikleri, ve (b) maddelerin farklıdil testler arasında yanlı çalışmasının muhtemel sebepleri açılarındandeğerlendirilmiştir. Yanlı çalışan maddelerin tespitinde, SınırlandırılmışFaktör Çözümlemeleri, Mantel-Haenszel Yöntemi, ve Madde Tepki KuramıEn Çok Olabilirlik Oran Analizi yöntemleri kullanılmıştır.Sonuçlar, hem TIMSS hem de PISA çalışmalarında kullanılan bazımaddelerde kültürel denklik açısından problemler olduğunu ortay koymuştur.Ancak her iki çalışmada kültürler arası karşılaştırmayı mümkün kılabilecekuygun madde alt grupları vardır.PISA çalışmasında, madde yanlılığı tespitinde kullanılan farklımetotların sonuçları arasında yüksek derecede uyum tespit edilmiştir. Ancak,TIMSS çalışmasında, yanlı çalışan madde sayısının fazla olması,maddelerin tahmin ve ayırt edicilik indislerindeki farklılıklar bu uyumu kaydadeğer ölçüde bozmuştur.Çalışma ayrıca, bilgi düzeyinde ve rutin işlem becerisi gerektirensoruların, aynı yetenekteki Türk öğrencilere kıyasla Amerikalı öğrencilerikayırma ihtimalinin daha az olduğunu, buna karşılık birden çok durumunkarşılaştırılıp bir karara varılmasını ve bu kararın ifade edilmesini gerektirengerçek yaşamla ilgili soruların ise Türk öğrencileri kayırma ihtimalinin dahaaz olduğunu ortaya koymuştur.
Özet (Çeviri)
Cross-cultural studies, like TIMSS and PISA 2003, are beingconducted since 1960s with an idea that these assessments can provide abroad perspective for evaluating and improving education. In additioncountries can assess their relative positions in mathematics achievementamong their competitors in the global world. However, because of thedifferent cultural and language settings of different countries, theseinternational tests may not be functioning as expected across all thecountries. Thus, tests may not be equivalent, or fair, linguistically andculturally across the participating countries. In this context, the presentstudy aimed at assessing the equivalence of mathematics items of TIMSS1999 and PISA 2003 across cultures and languages, to find out ifmathematics achievement possesses any culture specific aspects.For this purpose, the present study assessed Turkish and Englishversions of TIMSS 1999 and PISA 2003 mathematics items with respect to,(a) psychometric characteristics of items, and (b) possible sources ofDifferential Item Functioning (DIF) between these two versions. The studyused Restricted Factor Analysis, Mantel-Haenzsel Statistics and ItemResponse Theory Likelihood Ratio methodologies to determine DIF items.The results revealed that there were adaptation problems in bothTIMSS and PISA studies. However it was still possible to determine asubtest of items functioning fairly between cultures, to form a basis for across-cultural comparison.In PISA, there was a high rate of agreement among the DIFmethodologies used. However, in TIMSS, the agreement rate decreasedconsiderably possibly because the rate of differentially functioning itemswithin TIMSS was higher, and differential guessing and differentialdiscriminating were also issues in the test.The study also revealed that items requiring competencies ofreproduction of practiced knowledge, knowledge of facts, performance ofroutine procedures, application of technical skills were less likely to bebiased against Turkish students with respect to American students at thesame ability level. On the other hand, items requiring students tocommunicate mathematically, items where various results must becompared, and items that had real-world context were less likely to be infavor of Turkish students.
Benzer Tezler
- Differantial item functioning analysis of the quantitative ability section of the first stage of the university entrance examination in Turkey
Öğrenci Seçme Sınavı Sayısal Testi`nin madde yanlılığı analizi
EBRU YENAL
- A multivariate analysis in detecting differentially functioning items through the use of programme for international student assessment (PISA) 2003 mathematics literacy items
PISA 2003 matematik maddeleri kullanılarak yanlı çalışan maddelerin tespitinde çok boyutlu eşleştirme analizi
SELDA ÇET
Doktora
İngilizce
2006
Eğitim ve ÖğretimOrta Doğu Teknik ÜniversitesiOrtaöğretim Matematik Öğretmenliği Ana Bilim Dalı
PROF. DR. HALİL GİRAY BERBEROĞLU
- Differential item functioning (DIF) analysis of the verbal ability section of first stage of the university entrance examination in Turkey
Üniversite giriş sınavı birinci basamağının sözel yetenek bölümündeki maddelerin madde yanlılığı analizi
TUNCAY ÖĞRETMEN
Yüksek Lisans
İngilizce
1995
Eğitim ve ÖğretimOrta Doğu Teknik ÜniversitesiEğitim Bilimleri Ana Bilim Dalı
DOÇ.DR. GİRAY BERBEROĞLU
- Differential item functioning analysis of 4 th -granders science and Urdu (National language) achievement test items in Pakistan
Pakistan`daki 4. sınıf ve Urdu (Ulusal dil) başarı test sorularının madde yanlılığı açısından incelenmesi
MUHAMMAD BASHIR GONDAL
Doktora
İngilizce
2001
Eğitim ve ÖğretimOrta Doğu Teknik ÜniversitesiEğitim Bilimleri Ana Bilim Dalı
PROF. DR. HALİL GİRAY BERBEROĞLU
- Peabody resim kelime testinin madde yanlılığı açısından incelenmesi
Assessing item biased of peabody picture vocabulary test
FATMA BETÜL KURNAZ
Yüksek Lisans
Türkçe
2006
Eğitim ve ÖğretimHacettepe ÜniversitesiEğitim Bilimleri Ana Bilim Dalı
YRD. DOÇ. DR. HÜLYA KELECİOĞLU