Geri Dön

Sabit ve anında bireyselleştirilmiş çok aşamalı testlerin karşılaştırılması

Comparison of fixed and on-the-fly computerized multistage testing

PDF İndir

  1. Tez No: 807131
  2. Yazar: MAHMUT SAMİ YİĞİTER
  3. Danışmanlar: PROF. DR. NURİ DOĞAN
  4. Tez Türü: Doktora
  5. Konular: Eğitim ve Öğretim, Education and Training
  6. Anahtar Kelimeler: Bilgisayar ortamında bireyselleştirilmiş test, Bireyselleştirilmiş testler, Madde güvenliği, Testler, Uygulanabilirlik, Çoktan seçmeli testler, Ölçme değişmezliği, Ölçme-değerlendirme, Computerized adaptive testing, Individual tests, Item security, Tests, Implementability, Multiple choice tests, Measurement invariance, Measurement and evaluation
  7. Yıl: 2023
  8. Dil: Türkçe
  9. Üniversite: Hacettepe Üniversitesi
  10. Enstitü: Eğitim Bilimleri Enstitüsü
  11. Ana Bilim Dalı: Eğitim Bilimleri Ana Bilim Dalı
  12. Bilim Dalı: Eğitimde Ölçme ve Değerlendirme Bilim Dalı
  13. Sayfa Sayısı: Belirtilmemiş.

Özet

Pek çok geniş ölçekli değerlendirmede Bireyselleştirilmiş Bilgisayarlı Testler (BBT) ve Bireyselleştirilmiş Çok Aşamalı Testler (BÇAT) gibi uyarlanabilir test yaklaşımları benimsenmiştir. BBT'nin yeteneği eksik ya da fazla kestirmesi, maddeler arası gezinmeye izin vermemesi, maddeyi atlamak için mutlaka cevap gerektirmesi ve senaryo tabanlı sorulardan oluşan ortak köklü maddelerin kullanılamaması gibi sorunlarını azaltabileceği düşüncesi ile BBT yerine BÇAT yaklaşımı tercih edilmeye başlandı. BÇAT, uygulama öncesinde birleştirilen panel ve modüller ile BBT'nin sorunlarını azaltsa da; daha az uyarlama noktası olması, tamamen bireyselleştirilmiş olmaması, aynı panel ve modül yapılarının sürekli uygulanması ile oluşan test ve madde güvenliği tehditi dezavantajları bulunmaktadır. Maddelerin katılımcının yetenek düzeyinde biraraya getirilerek modüllerin oluşturulduğu yeni bir yaklaşım olan A-BÇAT ise BBT ve S-BÇAT'ın güçlü yönlerinden faydalandığı ve zayıf yönlerini azalttığı için potansiyel taşımaktadır. Bu çalışmanın amacı farklı benzetim koşulları altında S-BÇAT ve A-BÇAT yaklaşımlarını ölçme kesinliği ve madde güvenliği açılarından karşılaştırmaktır. Araştırmada simülasyon çalışması yürütülmüştür. TIMSS uygulamasında kullanılan 3PL modele dayalı maddelerin parametre dağılımları ile 400 maddenin parametreleri üretilerek madde havuzu oluşturulmuştur. 72 simülasyon koşulu altında 100 replikasyon ile karşılaştırmalar yapılmıştır. Sonuçlar, A-BÇAT'ın hem ölçme kesinliği hem de madde güvenliği açılarından S-BÇAT'tan daha iyi sonuçlar ürettiğini göstermektedir. Kısa test uzunluklarında A-BÇAT'ın S-BÇAT'tan oldukça iyi ölçme kesinliğine sahip olduğu görülmektedir. Yetenek dağılımlarına göre, A-BÇAT'ın özellikle normal olmayan dağılımlarda S-BÇAT'tan daha iyi sonuçlar ürettiği sonucuna ulaşılmıştır. Modül/test uzunluğu oranına göre son modül uzunluğunun arttığı K-K-U oranında A-BÇAT'ın ölçme kesinliği farkının arttığı gözlemlenmiştir. A-BÇAT'ın sunduğu başarılı ölçme kesinliği ve madde güvenliği bulguları hem geniş ölçekli değerlendirmeler hem de literatür doğrultusunda tartışılmaktadır.

Özet (Çeviri)

Many large-scale assessments have used adaptive testing approaches such as Computerized Adaptive Testing (CAT) and Computerized Multistage Testing (MST). The MST approach has been preferred instead of the CAT with the idea that it can reduce the problems of the CAT such as under or over estimating ability, not allowing movement between items, requiring an answer to skip an item, the impossibility of using common-root items consisting of scenario-based questions, and the perception of inequality due to participants taking different tests. Although the MST reduces the problems of the CAT with panels and modules that are combined before implementation, it has the disadvantages of having fewer adaptation points, and the test and item security threats caused by the continuous application of the same panel and module structures. The On-the-fly MST, a new approach in which items are combined at the participant's ability level to form modules, has potential as it utilizes the advantages of the CAT and MST and reduces their weaknesses. The aim of this study is to compare F-MST and O-MST approaches in terms of measurement accuracy and item security under different simulation conditions. A simulation study was conducted in the research. An item pool was created by generating the parameters of 400 items with the parameter distributions of the items based on the 3PL model used in the TIMSS application. In the study, comparisons were made with 100 replications under 72 simulation conditions. The results show that the O-MST produces better results than the F-MST in terms of both measurement precision and item security. For short test lengths, the A-BCAT has considerably better measurement accuracy than the F-MST. According to ability distributions, it was concluded that the O-MST produced better results than the F-MST, especially in non-normal distributions. According to the module/test length ratio, it was observed that the difference in the measurement accuracy of O-MST increased in the K-K-U ratio where the last module length increased. The successful measurement accuracy and item security findings of the O-MST are discussed in the light of both large-scale evaluations and the literature.

Benzer Tezler

  1. Tez No

    877223

    An experimental study on the effects of automated feedback on writing achievement, writing motivation and anxiety

    Yabancı dil bağlamında otomatik geri bildirimin yazma başarısı, yazma motivasyonu ve anksiyetesi üzerine etkileri üzerine deneysel bir çalışma

    GÜLNİHAN ALTINAY

    Yüksek Lisans

    İngilizce

    İngilizce

    2024

    Eğitim ve Öğretimİstanbul Medeniyet Üniversitesi

    Yabancı Diller Eğitimi Ana Bilim Dalı

    PROF. DR. SELAMİ AYDIN

  2. Tez No

    238655

    SHA256 kriptografik özetleme algoritması ve anında SHA256 gerçeklenmesi

    SHA256 cryptographic hashing algorithm and an on-the-fly SHA256 implementation

    İNAN ERDEM

    Yüksek Lisans

    Türkçe

    Türkçe

    2009

    Bilim ve TeknolojiGebze Yüksek Teknoloji Enstitüsü

    Elektronik Mühendisliği Ana Bilim Dalı

    YRD. DOÇ. DR. SERDAR SÜER ERDEM

  3. Tez No

    372335

    Özel eğitim alanında çalışan öğretmenlere yönelik hazırlanan bir öğretim planının anında geri bildirim verilerek ve anında geri bildirim olmaksızın sunulmasının etkililik yönünden karşılaştırılması

    Comparison of presentation of a training programme for the teachers working in special education area with or without feed back in terms of effectivenes

    ŞERİFE GEZER DEMİRDAĞLI

    Yüksek Lisans

    Türkçe

    Türkçe

    2014

    Eğitim ve ÖğretimMarmara Üniversitesi

    Özel Eğitim Ana Bilim Dalı

    PROF. DR. DİLEK ERBAŞ

  4. Tez No

    788301

    İmplant destekli sabit protez ve geleneksel tip tam protez kullanan hastalarda masseter kas kalınlığının ultrason ile karşılaştırılması

    Comparison of masseter muscle thickness with ultrasound in patients using implant supported fixed prosthesis and conventinal complete denture

    BURÇE DOĞAN

    Diş Hekimliği Uzmanlık

    Türkçe

    Türkçe

    2023

    Diş HekimliğiUşak Üniversitesi

    Periodontoloji Ana Bilim Dalı

    DR. ÖĞR. ÜYESİ UMUT YİĞİT

  5. Tez No

    970145

    Bazı toprak işleme makinalarındaki yapısal değişikliklerin makina iş başarısına etkilerinin belirlenmesi üzerinde araştırma: Sabit ve döner kulaklı pulluk örneği

    Research on determination of effects of structural changes in some soil tillage machines on machine work success: Fixed and reversible mouldboard plough example

    ADEM COMART

    Doktora

    Türkçe

    Türkçe

    2025

    ZiraatAkdeniz Üniversitesi

    Tarım Makineleri ve Teknolojileri Mühendisliği Ana Bilim Dalı

    PROF. DR. İBRAHİM AKINCI

Geri Dön