Madde (soru istatistikleri)

... konulu sunumlar: "Madde (soru istatistikleri)"— Sunum transkripti:

1 Madde (soru istatistikleri)

2 SUNU İÇERİĞİ 1- Madde Güçlük İndeksi ÖLÇMEDE İSTATİSTİKSEL İŞLEMLER
B) MADDE İSTATİSTİKLERİ 1- Madde Güçlük İndeksi 2- Madde Ayırt Edicilik Gücü İndeksi C) MADDE İSTATİSTİKLERİNDEN HESPLANAN TEST İSTATİSTİKLERİ

3 MADDE AYIRT EDİCİLK İNDEKSİ
MADDE İSTATİSTİKLERİ * Testte yer alan maddeler ile ilgili bir takım analizler yapılarak testte yer alan soruların zorluk derecesi ve bilenle bilmeyeni ayırma gücü yani; kalitesi belirlenmeye çalışılır. * Dolayısıyla grubun testi oluşturan maddelere vermiş olduğu yanıtların sayısal göstergelerinden maddelerin işe yarayıp yaramadığı anlaşılır; işe yaramıyorsa bunun nedenini araştırılarak ve ona göre gerekli düzeltmeler yapılabilir. 1 2 MADDE GÜÇLÜK İNDEKSİ MADDE AYIRT EDİCİLK İNDEKSİ

4 MADDE GÜÇLÜK İNDEKSİ (P, Pj)
* Maddeyi doğru cevaplayanların tüm cevaplayıcı sayısına oranıdır. Oranlama yapıldığında sınıfın yüzde kaçının bu soruyu doğru yanıtladığı görülebilir. FORMÜLÜ; Na = Doğru cevaplayanların sayısı N = Tüm cevaplayıcıların sayısı * 0,00 ile +1,00 arasında değer alan madde güçlük indeksi, bir maddenin kolay ya da zor bir madde olup olmadığı hakkında bilgi verir. 1,00’e yaklaştıkça madde kolaylaşırken 0,00’a yaklaştıkça madde zorlaşır.

5 ÖRNEK; 20 öğrencinin katıldığı sınavda 6. maddeyi 15 kişi doğru yanıtlamıştır. Bu maddenin güçlük indeksi kaçtır? Pj = 15 / 20 = 0,75 Bu soruyu sınıfın %75’i doğru yanıtlamıştır. Dolayısıyla % 25’de doğru yanıtlayamamıştır. İstatistiksel formüllerde çok sık kullanılmamakla birlikte doğru yanıtlayamayan grup da (q) ile sembolize edilmektedir.

6 %27 ’lik Alt ve Üst Gruplar Yöntemi ile Madde Güçlük İndeksi Hesaplaması
Öncelikli olarak puanlar sıraya dizilir ve en başarılı %27’lik grup üst grup; en başarısız %27’lik grup da alt grup olarak belirlenir. Maddeye verilen cevap doğru ise 1 yanlış veya boş ise 0 puan verilerek ham puan hesaplanır. Aşağıdaki şekliyle tabloya aktarılır.

7 Pj = (25 + 15 ) / 200 = 0,20 FORMÜLÜ; ÖRNEK;
Pj = Maddenin güçlük indeksi n (dü) = Maddeyi üst grupta doğru cevaplayanlar n (da) = Maddeyi alt grupta doğru cevaplayanlar N = Üst ve alt gruptaki öğrenci sayısı ÖRNEK; Pj = ( ) / 200 = 0,20

8 * Bir maddenin güçlük indeksinin 0,50 olmasını isteriz; fakat bir bir testteki tüm maddelerin güçlüklerinin 0,50 olmasını tercih edilmez. Bunun yerine testin bir bölümü zor, bir bölümü kolay, bir bölümü de orta güçlükte hazırlanır. Böylece testin ortalama güçlüğü 0,50 olur. Soruların güçlük dağılımının da normal dağılım olması istenir. Madde Güçlük İndeksi Maddenin Değerlendirilmesi 0,29 ve altında bulunan maddeler  ZOR 0,30 ve 0,49 arasında bulunan maddeler  ORTA GÜÇLÜKTE 0,50 ve 0,69 arasında bulunan maddeler  KOLAY 0,70 ve 1,00 arasında bulunan maddeler  ÇOK KOLAY

9 MADDE AYIRT EDİCİLİK GÜCÜ İNDEKSİ
* Bir maddenin bilenle bilmeyeni ne derece ayırdığını gösterir. Bir maddenin kalitesi; yani ne kadar iyi işlediği, bilen (başarılı) öğrenci ile bilmeyen (başarısız) öğrenciyi birbirinden ayırmasıdır. Pozitif (+) olması; Ortalamanın (%50) altında kalan (başarısız) öğrenciler tarafından bilinmeyip, ortalamanın üstünde kalan (başarılı) öğrenciler tarafından bilinmesi. Negatif (-) olması; Ortalamanın (%50) üstünde kalan (başarılı) öğrenciler tarafından tarafından bilinmeyip, ortalamanın altında kalan (başarısız) öğrenciler tarafından bilinmesi.

10 %27 ’lik Alt ve Üst Gruplar Yöntemi ile Madde Ayırt Edicilik İndeksi Hesaplaması
FORMÜLÜ; rjx = Maddenin ayırt edicilik gücü n (dü) = Maddeyi üst grupta doğru cevaplayanlar n (da) = Maddeyi alt grupta doğru cevaplayanlar n = Üst ya da alt gruptan herhangi birisinin eleman sayısı (Her iki grupta da eleman sayısı eşittir) ÖRNEK; rjx = ( ) / 100 = 0,10

11 Ayırt ediciliği negatif olan maddeler testten hemen çıkarılmaz
* Ayırt ediciliği negatif olan maddeler testten hemen çıkarılmaz. Çünkü çeşitli sebeplerle (örneğin; cevap anahtarı yanlışlığı) bilen öğrenciler soruyu yanlış cevaplamış olabilirler. İlgili yanlışlık düzeltilirse negatifken pozitife dönüşebilir. Fakat ister pozitif ister negatif olsun 0,00 – 0,20 aralığındaki tüm maddeler çıkarılmalı çünkü negatifi olanı düzeltseniz bile yine kalitesiz bir madde olarak kalacaktır. * Madde güçlüğü (Pj) 0,00 ve 1,00 değerlerini aldığında madde ayırt ediciliği (rjx) her zaman 0,00 olur. Madde Ayırt Etme İndeksi Maddenin Değerlendirilmesi 0,40 ve daha büyük  Çok iyi madde 0,30 ve 0,  Oldukça iyi madde. Yine de geliştirilebilir 0,20 ve 0,  Düzeltilmesi ve geliştirilmesi gerekir 0,19 ve daha küçük  Çok zayıf madde. Mutlaka testten atılmalıdır

12 İyi bir test maddesinde, uygulandıktan sonra
aşağıdaki maddelerin bulunması beklenir. * Madde güçlük indeksinin orta güçlükte olması (0,50) Ayırıcılığın mümkün olduğunca yüksek (1’e yakın) olması, * Doğru cevabın üst grupta daha çok öğrenci tarafından cevaplandırılmış olması, * Seçeneklerdeki çeldiricilerin alt grupta daha çok öğrenci tarafından cevaplandırılmış olması, * Çeldiricilerin hepsinin de eşit yada birbirine yakın sayıda cevap çekmiş olması beklenir.

13

14 KPSS’DE ÇIKMIŞ SORULAR

15 2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Eğer düzeltilemiyorsa yukarıdaki sorulardan hangisi, testten mutlaka çıkarılmalıdır? A) B) C) 3 D) E) 5

16 2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Eğer düzeltilemiyorsa yukarıdaki sorulardan hangisi, testten mutlaka çıkarılmalıdır? A) B) C) 3 D) E) 5

17 2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Başvuran kişinin çok, seçilecek kişinin az olduğu bir sınavda kullanılacak soruların çoğu, güçlük ve ayırt edicilik bakımından yukarıdaki sorulardan hangisine benzer olmalıdır? A) B) C) 3 D) E) 5

18 2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Başvuran kişinin çok, seçilecek kişinin az olduğu bir sınavda kullanılacak soruların çoğu, güçlük ve ayırt edicilik bakımından yukarıdaki sorulardan hangisine benzer olmalıdır? A) B) C) 3 D) E) 5

19 2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Yukarıdaki sorulardan hangisi kolay ve ayırt edici bir sorudur? A) B) C) 3 D) E) 5

20 2003 Aşağıdaki tabloda numaralamış beş sorunun doğru cevaplanma yüzdeleri (Pj) ile ayırt edicilik değerleri (rjx) verilmiştir. Soru Pj rjx 1 0,35 0,60 2 0,40 –0,35 3 0,80 0,10 4 0,25 0,15 5 0,85 0,50 Yukarıdaki sorulardan hangisi kolay ve ayırt edici bir sorudur? A) B) C) 3 D) E) 5

21 2004 Tabloda soru sayıları ve Aritmetik ortalamaları verilmiş dersler bulunmaktadır. Dersler (Soru Sayısı) X Biyoloji (10) 5,2 Matematik (45) 38,1 Fizik (19) 13,4 Kimya (12) 6,9 Tarih (14) 11,7 Madde Güçlük indeksi en düşük olan ders aşağıdakilerden hangisidir? A) Biyoloji B) Matematik C) Tarih D) Fizik E) Kimya

22 2004 Tabloda soru sayıları ve Aritmetik ortalamaları verilmiş dersler bulunmaktadır. Dersler (Soru Sayısı) X Biyoloji (10) 5,2 Matematik (45) 38,1 Fizik (19) 13,4 Kimya (12) 6,9 Tarih (14) 11,7 Madde Güçlük indeksi en düşük olan ders aşağıdakilerden hangisidir? A) Biyoloji B) Matematik C) Tarih D) Fizik E) Kimya

23 2004 Aşağıdaki sorulardan hangisi madde analizi ile elde
edilecek bilgilerden yararlanılarak cevaplanamaz? A) Testin zorluk derecesi amaca uygun mudur? B) Testteki sorularla yoklanan davranışlar, kazandırılması amaçlanan davranışlarla aynı mıdır? C) Testteki maddelerin çeldiricileri beklenene yakın biçimde çalışıyor mu? D) Test, ölçülmek istenen nitelikleri ne derece bir tutarlılıkla ölçmektedir? E) Test, çok öğrenmiş ve az öğrenmiş olan öğrencileri birbirinden ayırabiliyor mu?

24 2004 Aşağıdaki sorulardan hangisi madde analizi ile elde
edilecek bilgilerden yararlanılarak cevaplanamaz? A) Testin zorluk derecesi amaca uygun mudur? B) Testteki sorularla yoklanan davranışlar, kazandırılması amaçlanan davranışlarla aynı mıdır? C) Testteki maddelerin çeldiricileri beklenene yakın biçimde çalışıyor mu? D) Test, ölçülmek istenen nitelikleri ne derece bir tutarlılıkla ölçmektedir? E) Test, çok öğrenmiş ve az öğrenmiş olan öğrencileri birbirinden ayırabiliyor mu?

25 2008 Tabloda verilen bilgilere göre hangi maddenin
Bir testteki maddelere ilişkin aşağıdaki değerler elde edilmiştir. Tabloda verilen bilgilere göre hangi maddenin güvenirliğe katkısı en fazladır? A) B) C) D) E) 5

26 2008 Tabloda verilen bilgilere göre hangi maddenin
Bir testteki maddelere ilişkin aşağıdaki değerler elde edilmiştir. Tabloda verilen bilgilere göre hangi maddenin güvenirliğe katkısı en fazladır? A) B) C) D) E) 5

27 2006 Yukarıda analizi verilen maddede doğru cevap hangi seçenekte olursa ayırt edicilik en yüksek olur? A) A B) B C) C D) D E) E

28 2006 Yukarıda analizi verilen maddede doğru cevap hangi seçenekte olursa ayırt edicilik en yüksek olur? A) A B) B C) C D) D E) E

29 2006 Yukarıda analizi verilen maddenin doğru cevabı E ise madde ayırıcılık gücü indeksi kaç olur? A) 0,00 B) 0, C) 0, D) 0, E) 1,00

30 2006 Yukarıda analizi verilen maddenin doğru cevabı E ise madde ayırıcılık gücü indeksi kaç olur? A) 0,00 B) 0, C) 0, D) 0, E) 1,00

31

32 Cevap B

33 ÖDEV Cevap anahtarı ile birlikte en az 20 maddeden oluşan bir ölçme aracı (tercihen çoktan seçmeli bir test) hazırlayacaksınız. Ölçme aracında bir testte bulunması gereken bütün kısımlar ve gerekli açıklamaların bulunması gerekmektedir. Testin cevap anahtarını da ödeve eklemelisiniz.

34 Ödev Ayrıca hazırlayacağınız testi uygulanmış gibi düşünüp test (mod, medyan, aritmetik ortalama, standart sapma) ve bir örnek madde için madde istatistiklerini (güçlük, ayırdedicilik) hesap etmelisiniz.