A study on construct validity of science items in PISA 2006: The case of Turkey
PISA 2006 fen sorularının yapı geçerliliği üzerine bir araştırma: Türkiye örneği
- Tez No: 252586
- Danışmanlar: PROF. DR. ALİ BAYKAL
- Tez Türü: Yüksek Lisans
- Konular: Eğitim ve Öğretim, Education and Training
- Anahtar Kelimeler: Öğrenci başarısı, İçerik analizi, Student achievement, Content analysis
- Yıl: 2009
- Dil: İngilizce
- Üniversite: Boğaziçi Üniversitesi
- Enstitü: Fen Bilimleri Enstitüsü
- Ana Bilim Dalı: Ortaöğretim Fen ve Matematik Alanlar Eğitimi Ana Bilim Dalı
- Bilim Dalı: Belirtilmemiş.
- Sayfa Sayısı: Belirtilmemiş.
Özet
Bu çalışma üç temel amaç üzerine kurulmuştur. Birinci amaç PISA 2006 çalışmasının mevcut Türkçe fen sorularının yapısal geçerliliğini pozitif ve negatif birimler bağlamında incelemektir. İkinci amaç fen soru ünitelerinde tespit edilen negatif birimlerin bütün test üzerinde ve her bir soru için etkisini 15 yaşındaki öğrencilerin cevaplama başarıları bağlamında araştırmaktır. Üçüncü amaç ise mevcut çalışmanın bir uzantısı olarak 15 yaşındaki öğrencilerin tek ve özel öğrenme deneyimleri çerçevesinde PISA 2006 fen soru üniteleri ile aşinalıklarını araştırmaktır.Bu çalışma üç safhadan oluşmaktadır. İlk safha sekiz uyarıcı ve 25 sorudan oluşan sekiz adet fen soru ünitesini araştırmaktır. Fen soru ünitelerini analiz ederken, bütün soru ünitelerindeki uyarıcı ve sorular için içerik analizi tekniği kullanılmıştır. İstanbul ilinin değişik bölgelerinde çalışan öğretmenlerden (ortaöğretim kademesinden toplam 80 öğretmen) görüş almak için ve görüşlerin içerik analizinden kategoriler oluşturabilmek için bir Madde Dereceleme Formu (IRF) geliştirilmiş ve uygulanmıştır. İçerik analizi tekniği ile beş ana negatif kategori (dil, tipiklik, taslak, yapı ve içerik) ve dört ana pozitif kategori (bağlam, içerik, komposizyon ve fen süreçleri) oluşmuştur. Kavramsal analiz birim sayısı negatif birimde pozitif birimlerden daha fazla bulunmuştur.Çalışmanın ikinci safhasını PISA 2006 fen soru üniteleri içindeki uyarıcı ve soruların düzeltmeleri oluşturmaktadır. Bu iyileştirmeler içerik analizi sonucunda ortaya çıkan negatif birimlerin uzmanlar tarafından uygun görülenleri için yapılmıştır. Çalışmanın ikinci safhasında iki test kullanılıştır. Birinci test PISA-Orijinal Türkçe testi (PISA-OT test) adını almıştır ve 2006 PISA çalışmasında kullanılan fen sorularını içermektedir. Diğer test ise değiştirilen fen soru ünitelerini içeren PISA-İyileştirilmiş Türkçe testidir. İkinci safhanın sonucu olarak, negatif birimlerin testin bütününde öğrencilerinin başarı seviyeleri üzerinde istatistiksel olarak anlamlı bir fark oluşturduğu bulunmuştur. Bununla beraber, soru maddeleri ayrı ayrı incelendiğinde karşılaştırma gruplarının başarıları arasında 11 soru için anlamlı bir fark bulunurken kalan 11 soru için anlamlı bir fark bulunamamıştır. Son olarak, testlerde kullanılan 22 sorunun tamamı için PISA-RT testine cevap veren grubun bütün sorular için ortalama değerlerinin PISA-OT testine cevap veren grubunkinden daha yüksek olduğu bulunmuştur.Çalışmanın üçüncü safhası için öğrencilerin PISA fen soru ünitelerinin uyarıcılarına dair dil, taslak, okul bilgisi ve günlük tecrübe bakımlarından aşinalık dereceleri araştırılmıştır. Sonuç olarak, Türk öğrencilerin PISA sorularındaki uyarıcılara orta derecede aşina oldukları bulunmuştur.Çalışmanın her üç safhasının sonuçlarına dayanarak, fen okur yazarlığını ölçmeyi amaçlayan bir test için soruların oluşturulma ve seçilme süreçlerinin yapı geçerliği bakımından önemli olduğu sonucuna varılabilir.Bununla beraber, bu çalışmada Türkçe PISA soru ünitelerindeki uyarıcı ve soruların bu amacı kısmi olarak sağlayabildiği görülmüştür.
Özet (Çeviri)
This study was designed for three major goals. The first goal is to investigate construct validity in the Turkish version of the PISA 2006 science units including stimuli (e.g. text, graphs, and pictures) and items in terms of positive and negative entities embedded in them. The second goal is to understand the effect of the negative entities detected in the science units on total test and at item level by achievement scores of 15 year-old students. The third goal that emerged through the study aimed to explore the 15 year-old students? familiarity with PISA science units in terms of the students? unique learning experiences.The study consists of three phases. The first phase is the exploration of eight science units including eight stimuli and 25 items. In order to analyze these science units, content analysis was implemented for all of the stimuli and items in the science units. An Item Rating Form was developed and used in order to compose categories of the content analysis from the revisions of the teachers (80 secondary school science teachers in total) working at different regions in Istanbul. Content analysis results showed that there were five main categories defined for the negative entities (content, language, typicality, presentation and structure) and four main categories formed for the positive entities (context, content, science process and composition). The number of the thematic units of the negative entities was more than the thematic units of the positive entities.The second phase of the study based on the results of the content analysis from first phase. For the second phase the revisions on the science units were made for recovery of the negative entities described in the science units. Hence, two tests were present, one of them is PISA-Original Turkish test (PISA-OT test) which includes Turkish science units used in PISA 2006 study and the other is PISA-Revised Turkish (PISA-RT test) which contains revised versions of science units made at the second phase of the present study. At the second phase the effect of the negative entities on the achievement scores of the students examined by using two instruments (PISA-OT and PISA- RT). The results of the second phase showed that there was a statistically significant effect of the negative entities included in the revision process on the total achievement levels of the students. Although the results of analysis at the item level showed that there were significant differences between the two comparison groups for eleven of the items, there was no significant difference for the remaining eleven items. In addition, it is found that the mean scores for the group who answered the PISA- Revised Turkish test were higher than the means of the group who took the PISA-Original Turkish test on each of the 22 items.The third phase is the examination for the answer of the third research question related with the familiarity of students with the stimuli of PISA science units in terms of language, lay-out, school knowledge and daily life experiences. It is found that students tend to be moderately familiar with the PISA stimuli.Based on the results of the three phases, it can be concluded that the aim of selection and formation of the items for the science literacy test is important from the point of construct validity. However, released PISA stimuli and items in Turkish form achieved this aim partially.
Benzer Tezler
- An Investigation of the construct validity of standardized multiple-choice reading tests - a case study
Çoktan seçmeli standart okuma testlerinin geçerliliğinin araştırılması - örnek vaka çalışması
NAZLI HALENUR ŞEN DAŞIYICI
Yüksek Lisans
İngilizce
2002
İngiliz Dili ve EdebiyatıGaziantep Üniversitesiİngiliz Dili Eğitimi Ana Bilim Dalı
YRD. DOÇ. DR. BERRİN UÇKUN
- The Measurement of content words in vocabulary tests for preparatory English programs in high school using three assessment tasks: C-test, multiple-choice test and matching tast (a case study)
Orta öğrenimdeki İngilizce programları için geliştirilen kelime bilgisi sınavlarında, bilgi yüklü kelimelerin üç ayrı teknik ile ölçülmesi: C-test, çoktan seçmeli ve eşleştirmeli (vaka çalışması)
EYLEM KORKMAZ
Yüksek Lisans
İngilizce
2005
Eğitim ve ÖğretimGaziantep Üniversitesiİngiliz Dili Eğitimi Ana Bilim Dalı
YRD. DOÇ. DR. BERRİN UÇKUN
- Öğretmen adayları için STEM farkındalık ölçeği geçerlik ve güvenirlik çalışması
Validity and reliability study of STEM awareness scale for teacher candidates
BÜŞRA MERDER
Yüksek Lisans
Türkçe
2019
Eğitim ve ÖğretimÇanakkale Onsekiz Mart ÜniversitesiMatematik ve Fen Bilimleri Eğitimi Ana Bilim Dalı
DOÇ. DR. BETÜL TİMUR
- Fen bilgisi öğretmen adaylarının sözde-bilimsel inanışlarının cinsiyet, sınıf ve öğrenim türüne göre incelenmesi
The study of pseudoscientific beliefs among prospective science teachers according to gender, class and type of education
EZGİ KİRMAN ÇETİNKAYA
Yüksek Lisans
Türkçe
2013
Eğitim ve ÖğretimSakarya Üniversitesiİlköğretim Ana Bilim Dalı
YRD. DOÇ. DR. CANAN LAÇİN ŞİMŞEK
- Tutum ölçeklerinde yapı geçerliliğinin faktör analizi ile incelenmesi
Construct validity in attitude scales by factor analysis
ADİLE AŞKIM KURT
Yüksek Lisans
Türkçe
2001
İstatistikAnadolu Üniversitesiİstatistik Ana Bilim Dalı
PROF. DR. EMBİYA AĞAOĞLU