Madde (soru istatistikleri)

Slides:



Advertisements
Benzer bir sunumlar
Uygun Hipotezin Kurulması, Tip I Hata ve Tip II Hata
Advertisements

MADDE ANALİZİ.
MADDE ANALİZİ.
EĞİTİMDE ÖLÇME & DEĞERLENDİRME -12-
ÖLÇME VE DEĞERLENDİRME DERSİ
Bu slayt ‘ten indirilmiştir.
Test Geliştirme ve Madde Analizi
Madde : Ölçme değerlendirme ve test tekniğinde her bir soru için kullanılan terimdir. Madde analizi temelde; belli niteliklere sahip olması gereken bir.
Çoktan Seçmeli Sınavlar
Bu slayt ‘ten indirilmiştir.
ÖLÇME ARACINDA BULUNMASI GEREKEN NİTELİKLER
Standart Normal Dağılım
Bağıl Değerlendirme Sistemi
Ölçme Düzeyleri Ölçeklerin Kullanılması
Bu slayt ‘ten indirilmiştir.
Alt Üst Gruplar Farkına Göre Madde Analizi (Basit Yöntem)
TEST HAZIRLAMA SÜRECİ VE
ÇOKTAN SEÇMELİ TESTLER
Normal Dağılım.
EĞİTİMDE ÖLÇME & DEĞERLENDİRME -6-
İstatistikte Bazı Temel Kavramlar
ÖLÇME VE DEĞERLENDİRME DERSİ
GEÇERLİLİK Kapsam Geçerliliği
EĞİTİMDE ÖLÇME VE DEĞERLENDİRME
Ölçme Aracının Özellikleri
EĞİTİMDE ÖLÇME VE DEĞERLENDİRME
Ölçme sonuçları üzerinde yapılan istatiksel işlemler
TEST SINAVLARININ DEĞERLENDİRİLMESİ Veli ÇAĞLAR Tıp Fak. Anatomi A.D.
Ölçemediğiniz bir şeyi geliştiremezsiniz…
Mevlana Üniversitesi Tıp Fakültesi
İki Ortalama Farkının Test Edilmesi
Madde Analizi Yrd. Doç. Dr. Cenk Akbıyık.
Bilimsel Araştırma Yöntemleri
ÖLÇME ARAÇLARININ NİTELİKLERİ
Z ve T puanları Yrd. Doç. Dr. Cenk Akbıyık.
2 - ÖLÇME ARAÇLARININ TAŞIMASI GEREKEN NİTELİKLER
Standart Puanlar Z puanı: T puanı: T=10*Z+50 = Bireyin puanı
MADDE ANALİZİ YÜKSEL YEŞİLBAĞ.
TEST VE MADDE ANALİZİ.
Çoktan seçmeli testler
KISIM II Matematiksel Kavram ve Prosedürlerin Gelişimi BÖLÜM 21 Veri Analizi Kavramlarının Gelişimi.
Merkezi Eğilim (Yığılma) Ölçüleri
Standart Puanlar Z puanı: T puanı: T=10*Z+50 = Bireyin puanı
SINAVMATİK Soru Bankası Raporlarının Yorumlanması Zekeriya AKTÜRK Prof. Dr. / 171.
Analitik olmayan ortalamalar Bu gruptaki ortalamalar serinin bütün değerlerini dikkate almayıp, sadece belli birkaç değerini, özellikle ortadaki değerleri.
Istatistik.
TEST PLANI MADDE ANALİZİ.
ÖLÇME VE DEĞERLENDİRME DERSİ
MATEMATİK ÖĞRENEBİLİR
ÖLÇME ve DEĞERLENDİRME
Ölçme ve Değerlendirme
Sınav Analizleri. Sınav Analizleri SINAV ANALİZLERİ 1- FREKANS 2- MADDE ANALİZLERİ FREKANS Dağılımdaki her puanın kaç kez tekrar etiğini gösteren sayı,
Ölçme Sonuçları Üzerinde İstatistiksel İşlemler
Merkezi Eğilim Ölçüleri
MERKEZİ EĞİLİM(YIĞILMA) ÖLÇÜLERİ
DEĞİŞİM ÖLÇÜLERİ.
Merkeze Yayılma Ölçüleri
STANDART PUANLAR * Z Puanı * T Puanı.
KGO KR-20 ve KR-21 Korelasyon Hesaplamaları.
ÖLÇME-DEĞERLENDİRME 8. SINIF
Ölçme Sonuçları Üzerinde İstatistiksel İşlemler
DEĞERLENDİRMENİN İŞLEVLERİ
Değişkenler Eğitimde Ölçme ve Değerlendirme ile İlgili Genel Kavramlar
ÖLÇME SONUÇLARI ÜZERİNE İSTATİSTİKSEL İŞLEMLER
TEST İSTATİSTİKLERİ.
EĞİTİMDE ÖLÇME VE DEĞERLENDİRME
STANDART SAPMA.
Sunum transkripti:

Madde (soru istatistikleri)

SUNU İÇERİĞİ 1- Madde Güçlük İndeksi ÖLÇMEDE İSTATİSTİKSEL İŞLEMLER B) MADDE İSTATİSTİKLERİ 1- Madde Güçlük İndeksi 2- Madde Ayırt Edicilik Gücü İndeksi C) MADDE İSTATİSTİKLERİNDEN HESPLANAN TEST İSTATİSTİKLERİ

MADDE AYIRT EDİCİLK İNDEKSİ MADDE İSTATİSTİKLERİ * Testte yer alan maddeler ile ilgili bir takım analizler yapılarak testte yer alan soruların zorluk derecesi ve bilenle bilmeyeni ayırma gücü yani; kalitesi belirlenmeye çalışılır. * Dolayısıyla grubun testi oluşturan maddelere vermiş olduğu yanıtların sayısal göstergelerinden maddelerin işe yarayıp yaramadığı anlaşılır; işe yaramıyorsa bunun nedenini araştırılarak ve ona göre gerekli düzeltmeler yapılabilir. 1 2 MADDE GÜÇLÜK İNDEKSİ MADDE AYIRT EDİCİLK İNDEKSİ

MADDE GÜÇLÜK İNDEKSİ (P, Pj) * Maddeyi doğru cevaplayanların tüm cevaplayıcı sayısına oranıdır. Oranlama yapıldığında sınıfın yüzde kaçının bu soruyu doğru yanıtladığı görülebilir. FORMÜLÜ; Na = Doğru cevaplayanların sayısı N = Tüm cevaplayıcıların sayısı * 0,00 ile +1,00 arasında değer alan madde güçlük indeksi, bir maddenin kolay ya da zor bir madde olup olmadığı hakkında bilgi verir. 1,00’e yaklaştıkça madde kolaylaşırken 0,00’a yaklaştıkça madde zorlaşır.

ÖRNEK; 20 öğrencinin katıldığı sınavda 6. maddeyi 15 kişi doğru yanıtlamıştır. Bu maddenin güçlük indeksi kaçtır? Pj = 15 / 20 = 0,75 Bu soruyu sınıfın %75’i doğru yanıtlamıştır. Dolayısıyla % 25’de doğru yanıtlayamamıştır. İstatistiksel formüllerde çok sık kullanılmamakla birlikte doğru yanıtlayamayan grup da (q) ile sembolize edilmektedir.

%27 ’lik Alt ve Üst Gruplar Yöntemi ile Madde Güçlük İndeksi Hesaplaması Öncelikli olarak puanlar sıraya dizilir ve en başarılı %27’lik grup üst grup; en başarısız %27’lik grup da alt grup olarak belirlenir. Maddeye verilen cevap doğru ise 1 yanlış veya boş ise 0 puan verilerek ham puan hesaplanır. Aşağıdaki şekliyle tabloya aktarılır.

Pj = (25 + 15 ) / 200 = 0,20 FORMÜLÜ; ÖRNEK; Pj = Maddenin güçlük indeksi n (dü) = Maddeyi üst grupta doğru cevaplayanlar n (da) = Maddeyi alt grupta doğru cevaplayanlar N = Üst ve alt gruptaki öğrenci sayısı ÖRNEK; Pj = (25 + 15 ) / 200 = 0,20

* Bir maddenin güçlük indeksinin 0,50 olmasını isteriz; fakat bir bir testteki tüm maddelerin güçlüklerinin 0,50 olmasını tercih edilmez. Bunun yerine testin bir bölümü zor, bir bölümü kolay, bir bölümü de orta güçlükte hazırlanır. Böylece testin ortalama güçlüğü 0,50 olur. Soruların güçlük dağılımının da normal dağılım olması istenir. Madde Güçlük İndeksi Maddenin Değerlendirilmesi 0,29 ve altında bulunan maddeler  ZOR 0,30 ve 0,49 arasında bulunan maddeler  ORTA GÜÇLÜKTE 0,50 ve 0,69 arasında bulunan maddeler  KOLAY 0,70 ve 1,00 arasında bulunan maddeler  ÇOK KOLAY

MADDE AYIRT EDİCİLİK GÜCÜ İNDEKSİ * Bir maddenin bilenle bilmeyeni ne derece ayırdığını gösterir. Bir maddenin kalitesi; yani ne kadar iyi işlediği, bilen (başarılı) öğrenci ile bilmeyen (başarısız) öğrenciyi birbirinden ayırmasıdır. Pozitif (+) olması; Ortalamanın (%50) altında kalan (başarısız) öğrenciler tarafından bilinmeyip, ortalamanın üstünde kalan (başarılı) öğrenciler tarafından bilinmesi. Negatif (-) olması; Ortalamanın (%50) üstünde kalan (başarılı) öğrenciler tarafından tarafından bilinmeyip, ortalamanın altında kalan (başarısız) öğrenciler tarafından bilinmesi.

%27 ’lik Alt ve Üst Gruplar Yöntemi ile Madde Ayırt Edicilik İndeksi Hesaplaması FORMÜLÜ; rjx = Maddenin ayırt edicilik gücü n (dü) = Maddeyi üst grupta doğru cevaplayanlar n (da) = Maddeyi alt grupta doğru cevaplayanlar n = Üst ya da alt gruptan herhangi birisinin eleman sayısı (Her iki grupta da eleman sayısı eşittir) ÖRNEK; rjx = (25 - 15 ) / 100 = 0,10

Ayırt ediciliği negatif olan maddeler testten hemen çıkarılmaz * Ayırt ediciliği negatif olan maddeler testten hemen çıkarılmaz. Çünkü çeşitli sebeplerle (örneğin; cevap anahtarı yanlışlığı) bilen öğrenciler soruyu yanlış cevaplamış olabilirler. İlgili yanlışlık düzeltilirse negatifken pozitife dönüşebilir. Fakat ister pozitif ister negatif olsun 0,00 – 0,20 aralığındaki tüm maddeler çıkarılmalı çünkü negatifi olanı düzeltseniz bile yine kalitesiz bir madde olarak kalacaktır. * Madde güçlüğü (Pj) 0,00 ve 1,00 değerlerini aldığında madde ayırt ediciliği (rjx) her zaman 0,00 olur. Madde Ayırt Etme İndeksi Maddenin Değerlendirilmesi 0,40 ve daha büyük  Çok iyi madde 0,30 ve 0,39  Oldukça iyi madde. Yine de geliştirilebilir 0,20 ve 0,29  Düzeltilmesi ve geliştirilmesi gerekir 0,19 ve daha küçük  Çok zayıf madde. Mutlaka testten atılmalıdır

İyi bir test maddesinde, uygulandıktan sonra aşağıdaki maddelerin bulunması beklenir. * Madde güçlük indeksinin orta güçlükte olması (0,50) Ayırıcılığın mümkün olduğunca yüksek (1’e yakın) olması, * Doğru cevabın üst grupta daha çok öğrenci tarafından cevaplandırılmış olması, * Seçeneklerdeki çeldiricilerin alt grupta daha çok öğrenci tarafından cevaplandırılmış olması, * Çeldiricilerin hepsinin de eşit yada birbirine yakın sayıda cevap çekmiş olması beklenir.

KPSS’DE ÇIKMIŞ SORULAR

2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Eğer düzeltilemiyorsa yukarıdaki sorulardan hangisi, testten mutlaka çıkarılmalıdır? A) 1 B) 2 C) 3 D) 4 E) 5

2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Eğer düzeltilemiyorsa yukarıdaki sorulardan hangisi, testten mutlaka çıkarılmalıdır? A) 1 B) 2 C) 3 D) 4 E) 5

2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Başvuran kişinin çok, seçilecek kişinin az olduğu bir sınavda kullanılacak soruların çoğu, güçlük ve ayırt edicilik bakımından yukarıdaki sorulardan hangisine benzer olmalıdır? A) 1 B) 2 C) 3 D) 4 E) 5

2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Başvuran kişinin çok, seçilecek kişinin az olduğu bir sınavda kullanılacak soruların çoğu, güçlük ve ayırt edicilik bakımından yukarıdaki sorulardan hangisine benzer olmalıdır? A) 1 B) 2 C) 3 D) 4 E) 5

2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Yukarıdaki sorulardan hangisi kolay ve ayırt edici bir sorudur? A) 1 B) 2 C) 3 D) 4 E) 5

2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Yukarıdaki sorulardan hangisi kolay ve ayırt edici bir sorudur? A) 1 B) 2 C) 3 D) 4 E) 5

2004 Tabloda soru sayıları ve Aritmetik ortalamaları verilmiş dersler bulunmaktadır. Dersler (Soru Sayısı) X Biyoloji (10) 5,2 Matematik (45) 38,1 Fizik (19) 13,4 Kimya (12) 6,9 Tarih (14) 11,7 Madde Güçlük indeksi en düşük olan ders aşağıdakilerden hangisidir? A) Biyoloji B) Matematik C) Tarih D) Fizik E) Kimya

2004 Tabloda soru sayıları ve Aritmetik ortalamaları verilmiş dersler bulunmaktadır. Dersler (Soru Sayısı) X Biyoloji (10) 5,2 Matematik (45) 38,1 Fizik (19) 13,4 Kimya (12) 6,9 Tarih (14) 11,7 Madde Güçlük indeksi en düşük olan ders aşağıdakilerden hangisidir? A) Biyoloji B) Matematik C) Tarih D) Fizik E) Kimya

2004 Aşağıdaki sorulardan hangisi madde analizi ile elde edilecek bilgilerden yararlanılarak cevaplanamaz? A) Testin zorluk derecesi amaca uygun mudur? B) Testteki sorularla yoklanan davranışlar, kazandırılması amaçlanan davranışlarla aynı mıdır? C) Testteki maddelerin çeldiricileri beklenene yakın biçimde çalışıyor mu? D) Test, ölçülmek istenen nitelikleri ne derece bir tutarlılıkla ölçmektedir? E) Test, çok öğrenmiş ve az öğrenmiş olan öğrencileri birbirinden ayırabiliyor mu?

2004 Aşağıdaki sorulardan hangisi madde analizi ile elde edilecek bilgilerden yararlanılarak cevaplanamaz? A) Testin zorluk derecesi amaca uygun mudur? B) Testteki sorularla yoklanan davranışlar, kazandırılması amaçlanan davranışlarla aynı mıdır? C) Testteki maddelerin çeldiricileri beklenene yakın biçimde çalışıyor mu? D) Test, ölçülmek istenen nitelikleri ne derece bir tutarlılıkla ölçmektedir? E) Test, çok öğrenmiş ve az öğrenmiş olan öğrencileri birbirinden ayırabiliyor mu?

2008 Tabloda verilen bilgilere göre hangi maddenin Bir testteki maddelere ilişkin aşağıdaki değerler elde edilmiştir. Tabloda verilen bilgilere göre hangi maddenin güvenirliğe katkısı en fazladır? A) 1 B) 2 C) 3 D) 4 E) 5

2008 Tabloda verilen bilgilere göre hangi maddenin Bir testteki maddelere ilişkin aşağıdaki değerler elde edilmiştir. Tabloda verilen bilgilere göre hangi maddenin güvenirliğe katkısı en fazladır? A) 1 B) 2 C) 3 D) 4 E) 5

2006 Yukarıda analizi verilen maddede doğru cevap hangi seçenekte olursa ayırt edicilik en yüksek olur? A) A B) B C) C D) D E) E

2006 Yukarıda analizi verilen maddede doğru cevap hangi seçenekte olursa ayırt edicilik en yüksek olur? A) A B) B C) C D) D E) E

2006 Yukarıda analizi verilen maddenin doğru cevabı E ise madde ayırıcılık gücü indeksi kaç olur? A) 0,00 B) 0,10 C) 0,16 D) 0,20 E) 1,00

2006 Yukarıda analizi verilen maddenin doğru cevabı E ise madde ayırıcılık gücü indeksi kaç olur? A) 0,00 B) 0,10 C) 0,16 D) 0,20 E) 1,00

Cevap B

ÖDEV Cevap anahtarı ile birlikte en az 20 maddeden oluşan bir ölçme aracı (tercihen çoktan seçmeli bir test) hazırlayacaksınız. Ölçme aracında bir testte bulunması gereken bütün kısımlar ve gerekli açıklamaların bulunması gerekmektedir. Testin cevap anahtarını da ödeve eklemelisiniz.

Ödev Ayrıca hazırlayacağınız testi uygulanmış gibi düşünüp test (mod, medyan, aritmetik ortalama, standart sapma) ve bir örnek madde için madde istatistiklerini (güçlük, ayırdedicilik) hesap etmelisiniz.