ÖLÇME ARACININ YAPISAL NİTELİKLERİ

... konulu sunumlar: "ÖLÇME ARACININ YAPISAL NİTELİKLERİ"— Sunum transkripti:

1 ÖLÇME ARACININ YAPISAL NİTELİKLERİ
Hazırlayan: Yrd. Doç. Dr. Mustafa Akdağ

2 Yapısal Nitelikler Ölçme araçlarının nitelikleri değişik kaynaklarda farklı biçimlerde ele alınmasına rağmen, nitelikler başlıca üç başlık altında ele alınmaktadır. Geçerlilik, Güvenirlilik Kullanışlılık Yapısal Nitelikler

3 Geçerlilik Bir ölçme aracının her şeyden önce, ölçülecek özellik ya da özellikleri tam ve doğru olarak ölçmesi ve ölçülmesi söz konusu olmayan başka özelliklerle karıştırılmadan ölçülebilmesidir. İçerik ön plandadır. Geçerliliği kestirme, genellikle korelasyon tekniğine dayanır. “-1” ile “+1” arasında değerler alır. +1’e yaklaşması yükselmesi, +1’den uzaklaşması ise düşmesi anlamına gelir. Yapısal Nitelikler

4 Geçerlilik türleri 1) Kapsam geçerliliği: Bir ölçme aracının yoklanması gereken konu, ünite ya da tüm davranışları kapsayıp kapsamadığı ile ilgilidir. Bir testin hangi davranışları kapsayacağı; “belirtke tablosu” ile belirlenir. Bu tablo, davranışların konulara ne kadar ağırlıkta dağıldığını gösteren iki boyutlu bir çizelgedir. Yapısal Nitelikler

5 Geçerlilik türleri Kapsam geçerliliğini belirleme yolları:
Uzman kanısı alma. Aynı kapsamı ölçen başka bir testle korelasyon. Yapısal Nitelikler

6 Geçerlilik türleri 2) Bir ölçüte dayalı Geçerlilik: İki türü vardır:
Yordama Geçerliliği: Puanların ileri performanslara ilişkin tahminlerde dayanak olarak kullanıldığı durumlarda kullanılır. Yordayıcı puanlar, ölçüt puanlardan önce edilir. ÖSS korelasyon Akademik başarı (yordayıcı) (ölçüt) İşe giriş sınavı korelasyon İş yerindeki performans (yordayıcı) (ölçüt) Yapısal Nitelikler

7 Geçerlilik türleri Uygunluk (uyum) Geçerliliği: Ölçüt puanlar, yordayıcı puanlardan önce elde edilir. Deneme sınavı korelasyon ÖSS (ölçüt) (yordayıcı) Yapısal Nitelikler

8 Geçerlilik türleri 3) Yapı Geçerliliği: Bir testin yapı geçerliliği, testle ölçülmek istenen yapının ortaya konulması derecesidir. Bir ölçme aracının yapı geçerliliğine sahip olup olmadığının anlaşılması; maddelerin tamamıyla aynı yapıyı ölçmesine bağlıdır. Araca verilen cevapların birbirleriyle ilişkili olmasına bağlıdır. Faktör analizi ve hipotez testi yapı geçerliliğini sağlamada kullanılır Yapısal Nitelikler

9 Geçerlilik türleri 4) Görünüş geçerliği: Testin hangi davranışları ölçtüğünün görülmesi ile ilgilidir. Bu daha çok testlerin kapağında yazılır. Matematik testi, Tarih testi gibi. Testin içindeki sorular, kapağındaki başlık ile örtüşmesi gerekir. Yapısal Nitelikler

10 Geçerliliği Etkileyen Faktörler
Güvenilirlik, geçerlik için bir önkoşuldur. Güvenilirlik düşükse geçerlilikte düşüktür.Güvenilirliğin sağlanmış olması; geçerliliğin de sağlandığı anlamına gelmez. Soru sayısının artması, Sabit ve sistematik hatalar geçerliliği düşürür Maddelerin, ölçmek istenen değişkeni ölçmesi geçerliliği arttırır. Soruların, bilenle bilmeyeni ayırt etmesi geçerliliği attırır. Sınavın uygulanma koşulları (gürültülü, karanlık, soğuk ya da sıcak, verilen süre, soruların önceden edinilmesi) geçerliliği düşürür. Yapısal Nitelikler

11 Güvenilirlik Ölçümlerin hatasızlık derecesi ya da gerçeği yansıtma derecesi olarak algılayabiliriz. 0 ile 1 arasında değerler alan bir korelasyon katsayısıdır Belli bir özellik, bir ölçme aracı ile değişik zamanlarda ölçüldüğü zaman aynı ya da hiç olmazsa yaklaşık olarak aynı ölçümleri vermelidir. Yani güvenilirlik, aracın ölçtüğü şeyi tutarlı bir biçimde ölçmesidir. Yapısal Nitelikler

12 Güvenilirliğin üç özelliği:
Duyarlılık: Hatası az olan ölçmedir. Hata azaldıkça ölçme daha duyarlı (hassas) olur. Ör: 25 soruluk bir test; 10 soruluk bir testten daha duyarlı sonuçlar verir. Soru sayısı arttıkça duyarlık artar. Ör: Bir cetvelin en küçük birimi, cm. yerine mm. olursa; daha hassas bir ölçme yapılır. Duyarlık; birimlerin büyüklüğü ile ilgilidir. Birimleri küçük olan ölçme aracı, büyük olandan daha duyarlıdır. Yapısal Nitelikler

13 Güvenilirliğin üç özelliği:
Tutarlılık: Aynı özelliğin farklı araçlarla ya da farklı kişiler tarafından ölçülmesi durumunda ölçme sonuçlarının benzer olmasına denir. Örnek: Bir masanın boyunun iki farklı metre ile ölçülmesi durumunda, iki ölçme sonucunun birbirine yakın olması, metrelerin birbirleriyle tutarlı ölçmeler yaptığını gösterir. Ayrıca, Madde puanlarının (cevapların), testin bütününden elde edilen puan ile korelasyonunun bir göstergesidir. Korelasyonun yüksek olması, maddelerin ölçülmek istenen özellik bakımından homojen (tutarlı) olduğunu gösterir. Düşük olması, maddelerin birbirleriyle ve bütünle tutarlı olmadığını, testin heterojen bir yapıda olduğunu gösterir Yapısal Nitelikler

14 Güvenilirliğin üç özelliği:
Kararlılık: Bir nitelik aynı araçla birden fazla ölçüldüğünde, birbirinden farklı olmayan sonuçlar çıkarsa, ölçme aracı kararlıdır. Örnek:Bir metre ile bir masanın uzunluğunu birden çok ölçtüğümüzde ölçme sonuçlarının birbirine yakın çıkması metrenin kararlı ölçmeler yaptığını gösterir. Soru: Eğitim ve psikolojideki ölçmelerde hata kaynakları; fiziksel ölçmelerdekinden daha fazla olmaktadır neden? Yapısal Nitelikler

15 Korelasyon Katsayısı Korelasyon; İki değişken arasındaki ilişkinin miktarını ve yönünü tanımlayan istatistiksel bir tekniktir. “r” ile gösterilir ile arasında bir değer alır. İki değişken arasındaki ilişkinin gücü; katsayı değerinin, +1 ya da -1’e yaklaşması ölçüsünde artar. Katsayı değerinin (0) olması; değişkenler arasında ilişkinin olmadığını gösterir. Yapısal Nitelikler

16 Korelasyon Katsayısı Korelasyon katsayısının pozitif olması; iki değişkenin aynı yönde, birlikte attığını gösterir. Doğru orantıya benzer. Ör: Zeka ve başarı arasındaki ilişki için hesaplanan r =0.85 olsun. Bu katsayı, zeka arttıkça başarının da arttığını gösterir. Yapısal Nitelikler

17 Korelasyon Katsayısı Korelasyon katsayısının negatif olması; Değişkenlerden birinin artarken diğerinin azaldığını ya da birinin azalırken diğerinin attığını gösterir. Ters orantıya benzer. Ör: Sigara içme ile sağlık arasında arasındaki ilişkide r = bulunsun. Bu durum; sigara içme davranışı arttıkça sağlık düzeyinin düştüğünü göstermektedir. Yapısal Nitelikler

18 Korelasyon Katsayısı Korelasyon katsayısının sıfıra yakın olması; eksi ya da artı olsun r nin sıfıra yakın olması; ilişkinin olmadığını ya da çok zayıf olduğunu gösterir. Ör: Boy uzunluğu ile akademik başarı arasındaki ilişki katsayısı 0.05 olsun. Bu durum; boy ile akademik başarı arasında neredeyse hiç ilişki olmadığını gösterir. Yapısal Nitelikler

19 Güvenilirliği sağlama yöntemleri
Test-tekrar test yöntemi: Test aynı gruba belirli bir aralıkla iki kez uygulanır. Birinci uygulama ile ikinci uygulama puanları arasındaki ilişki/korelasyon hesaplanır. Bu yöntemde iki uygulama arasındaki tutarlılığa bakılır. Güvenirlik için katsayının +1.00’a yaklaşması gerekir. Testin tekrarı için üç haftalık süre yeterlidir. Elde edilen katsayı; “kararlılık katsayısı” olarak da bilinir. Yapısal Nitelikler

20 Güvenilirliği sağlama yöntemleri
Eşdeğer (Paralel) formlar yöntemi: Testin iki kez uygulanmasından kaynaklanan olumsuzlukları gidermek için eşdeğer formlar geliştirip uygulanır. Geliştirilen iki form aynı gruba aynı anda ya da kısa bir zaman aralığında uygulanır. İki testten elde edilen puanlar arasındaki korelasyon katsayısı hesaplanır. Elde edilen katsayı; “tutarlılık ve eşdeğerlik” olarak ifade edilir. Yapısal Nitelikler

21 Güvenilirliği sağlama yöntemleri
Testi yarılama (eşdeğer yarılar) yöntemi: Testin iki yarısı arasındaki tutarlılık araştırılır. Tek numaralı sorular bir yarı, çift numaralı sorular bir yarı oluşturur. Elde edilen iki yarı; iki ayrı testmiş gibi kabul edilip aralarındaki korelasyon hesaplanır. Bu yöntem, testin bir kez uygulanmasına dayandığından kullanışlıdır. Yapısal Nitelikler

22 Güvenilirliği sağlama yöntemleri
Kuder-Richardson yöntemi (KR-20, KR-21 formülleri: Her iki katsayı, testin iç tutarlılık katsayısıdır. Eşdeğer yarılar yönteminde testin iki yarısı arasındaki ilişki miktarı hesaplanırken, iç tutarlılık katsayılarında testin bütün sorularının birbirleri ile uyumu incelenir. Bu yöntemin kullanılması; testin homojen bir yapıya, yani aynı özelliği ölçüyor olması sayıltısına dayanır. Bu yöntem, cevapların “1” ve “0” olarak puanlanabildiği testlerde kullanılır. Yapısal Nitelikler

23 Güvenilirliği sağlama yöntemleri
KR-20: Her bir maddenin güçlük indekslerinin belirlenebildiği durumlarda kullanılır. Güçlük indekslerinin hesaplanamadığı durumlarda KR-21 kullanılır. KR-21 formülü, madde güçlük indekslerinin eşit olduğu varsayımına dayalıdır. Eğer maddeler güçlük indeksleri bakımından birbirinden farklı, yani heterojen bir dağılım gösteriyorsa KR-21 ile hesaplanan katsayı, KR-20 ile hesaplanandan daha düşük çıkar. Yapısal Nitelikler

24 Güvenilirliği sağlama yöntemleri
Cronbach Alpha (α) Katsayısı: Cevapların “1” ve “0” şeklinde puanlanamadığı araçlarda kullanılır. İç tutarlılık katsayısıdır. Duyuşsal özelliklerin ölçülmesinde kullanılır. Örneğin tutum ölçeklerinde doğru cevap yoktur ve cevaplar kategoriktir. Alpha değerinin +1.00’e yaklaşması testin kendi içinde tutarlılığının arttığını gösterir. Yapısal Nitelikler

25 Güvenilirliği sağlama yöntemleri
Puanlayıcı güvenilirliği: Yazılı, sözlü sınav gibi puanlaması subjektif olan araçlarda kullanılır. Cevap kağıtları birden çok puanlayıcı tarafından puanlanarak, arasındaki korelasyon hesaplanır. Yapısal Nitelikler

26 Güvenilirlik sağlama yöntemleri ve anlamları
Uygulama Sayısı Güvenirlik Test-tekrar test 2 Kararlılık Paralel (Eşdeğer) Formlar Tutarlılık Eşdeğer Yarılar 1 İç tutarlılık KR-20 ve KR-21 Cronbach Alpha Puanlayıcı Güvenirliği Yapısal Nitelikler

27 Güvenirliği Etkileyen Faktörler
Testin uzunluğu: Soru sayısı arttıkça güvenirlik artar Ölçülen niteliğin genişliği (Ranj): Gruptaki değişiklik ne kadar fazla ise güvenirlik o kadar yüksek olur. Bu nedenle birkaç sınıfta uygulanan testin güvenirliği bir sınıfta uygulanan testin güvenirliğinden daha yüksektir Test uygulama şartları: Sınav süresi, öğrencileri güdülenme düzeyleri, dikkatsizlik, gürültü, ölçmeyi yapan kişinin sınav anındaki davranışları Ranj: Bir veri grubunda en yüksek puan ile en düşük puan arasındaki farktır. Yapısal Nitelikler

28 GÜVENİLİRLİĞİ ARTTIRMAK İÇİN;
Bir testteki soru sayısını arttırmak, Açık anlaşılır ve kesin cevaplı sorular sormak, Öğrencilerin seviyelerine uygun sorular sormak. Sınav süresinin gereğinden kısa veya uzun olmamasına dikkat etmek. Öğrencilerin sınav öncesi motivasyonunu sağlamak. Ölçmenin hatalardan arındırılması. Puanlamanın objektifliği. Şans başarısının azaltılması Soru sayısı, süre, puanlamanın nasıl olacağı gibi özelliklerin yönerge ile belirtilmesi Yapısal Nitelikler

29 Güvenilirlik ve Geçerlilik arasındaki ilişki
Bir test eğer geçerliyse zaten güvenilirdir Test istenen özelliği ölçüyorsa, hatalardan arınık ölçüyor demektir. Güvenilir bir test geçerli olmayabilir Güvenilirliği yüksek bir matematik testi, fen bilgisini ölçmek için geçerli değildir. Testin güvenilirliği, geçerliliğini sınırlar Güvenilirliği 0.90 olan bir test, 0.10 kadar tesadüfi hata barındırır. Bu hatadan dolayı geçerlilik sınırlı olur. Güvenilirlik ve Geçerlilik bir derecedir, varlık ya da yokluk durumu değildir Bir testin güvenilirliği ve geçerliliği yok/var yerine, düşüktür/yüksektir denir. Yapısal Nitelikler

30 Kullanışlılık Ekonomiklik Hazırlama süresi Uygulama süresi
Hazırlayıcı ve uygulayıcının nitelikleri Cevaplayıcının nitelikleri Uygulama kolaylığı Puanlama kolaylığı Puanların yorumlama kolaylığı Yapısal Nitelikler

31 Ölçmede Hata Ölçme Hatası: Ölçülen özelliğin gerçek değeri ile, ölçme sonuçlarında elde edilen değer arasındaki farktır. Ör: Gerçek uzunluğu 94x52 cm. olan bir sehpanın uzun kenarı ölçüldüğünde 92 cm. bulunur ise, bu ölçümde 2 cm. ölçme hatası vardır. Yapısal Nitelikler

32 Ölçme Hatalarının Kaynakları
Ölçen kişiden gelen hatalar Ölçülen özellikten gelen hatalar Ölçme aracından gelen hatalar Yapısal Nitelikler

33 Ölçen Kişiden Gelen Hatalar
Yaş Öğrenme durumu Herhangi bir bedensel özür Ruh hali O anki durumu Yapısal Nitelikler

34 Ölçülen Özellikten Gelen Hatalar
Ölçülen özelliğin tam olarak tanımının yapılmamış olması ölçülecek özelliğin tümünün ölçülemeyişi gibi özellikler ölçmede hataya neden olabilir Yapısal Nitelikler

35 Ölçme Aracından Gelen Hatalar
Kullanılan aracının basımından doğabilecek hatalar da ölçme hatalarına neden olabilir. Örneğin 100 cm değil de 98 cm olan bir metre ile yapılan ölçüm haliyle bize hatalı sonuçlar verecektir. Yapısal Nitelikler

36 Hata Türleri Sabit hata Sistematik hata Tesadüfi hata
Yapısal Nitelikler

37 Hata Türleri Sabit Hatalar: Bir ölçmeden diğerine miktarı değişmeyen hatalara denir. Her ölçmede hata payı aynıdır. Kontrol edilebilir. Geçerliliği etkiler. Örnek: Bir sınavda herkese 10 puan fazla verilmesi, bir sorunun tüm sınıf tarafından cevapsız bırakılması, bir cetvelin 1 cm eksik ölçmesi Yapısal Nitelikler

38 Hata Türleri Sistematik Hatalar: Ölçülen büyüklüğe, ölçmeciye veya ölçme koşullarına bağlı olarak miktarı değişen hatalardır. Yanlılık adı da verilir. Kontrol edilebilir. Hatanın kaynağı bellidir. Geçerliliği etkiler. Örnek: Yazısı güzel olana fazla puan verilmesi, kızların fazla puan alması, ilk okunan kağıtlara az, daha sonra okunanlara gittikçe fazla puan verilmesi gibi. Yapısal Nitelikler

39 Hata Türleri Tesadüfi Hatalar: Bu tür hatalarda, hataların hangi yönde geleceği belli olmaz. Böyle hatalar genellikle kaynakları iyi bilinmeyen hatalar olup ölçme sonuçlarına gelişigüzel karışırlar. Kontrol edilemezler. Güvenilirliği etkiler Örnek: Dikkatsizce okunup puanlanan ya da doğru okunduğu halde yanlış kayıt edilen notlar. Öğrenci kayıtlarına rastgele puan verilmesi. Öğrencinin sınavda hastalanması, motivasyonun düşmesi. Yapısal Nitelikler