Etiket arşivi: Puanlama Güvenirliği

Klasik(Geleneksel) Ölçme Değerlendirme Araçları

2 Yanıt
Bilgi Düzeyi
(Bloom Taksonomisi)		Hazırlama
Uygulama
Puanlama		Puanlama GüvenirliğiŞans BaşarısıGüvenirlik ve Geçerlik
(Soru Sayısı, Kapsam Geçerliliği ve Duyarlılığı gösterir.
Puanlama Güvenirliğine bakacaksın.Puanlama Güvenirliği Objektifliği hakkında bilgi verir.)		Özellikler
Yazılı YoklamalarÜst Düzey
Sentez – Değerlendirme hedef alanları ölçülür.		H -> Kolay
U -> Kolay
P -> Zor ve zaman alıcı.		Düşüktür.
Subjektif testtir.
En büyük dezavantajı budur.		Yoktur.
Şişirme ve blöf yeteneği vardır.		Güvenirlik ve Geçerlilik düşüktür.
Soru sayısı düşüktür.Bu yüzden Kapsam Geçerliliği ve Duyarlılık düşüktür.
Puanlama Güvenirliği düşüktür.
  • Puanlama Güvenirliği düşüklüğünü önlemek için ayrıntılı cevap anahtarı olmak zorunda.
  • Seçimlik ve ön koşulluk soru kullanmayacaksın.Yoksa Kapsam Geçerliliği dahada düşer ve puanların kıyaslanabilirliğini engellersin.
Sözlü YoklamalarÜst Düzey
Sentez – Değerlendirme		H, U ve P -> Zor ve zaman alıcı.Çünkü herkese eş güçlükte soru hazırlanması gerekiyor.Düşüktür.
Subjektiftir.		Yoktur.
Sözlü iletişim becerisi vardır.		Düşüktür.
Soru sayısı azdır.Buda Kapsam Geçerliliğini ve Duyarlılığı düşürür.
Puanlama Güvenirliği düşüktür.
  • İlköğretimin ilk kademesinde not verme amacıyla yapılması yasaklanmıştır.
Kısa Cevaplı – Boşluk DoldurmaAlt Düzey
Bilgi – Kavrama		H, U ve P -> Kolaydır.Yüksektir.
Yarı objektiftir.
Nispeten nesneldir.		Yoktur.
Ezber ve hatırlama yeteneği iyi olanlar başarılı olur.
En büyük dezavantajıdır.		Yüksektir.
Soru sayısı fazla olması Kapsam Geçerliliğini ve Duyarlılığı arttırır.Puanlama Güvenirliği yüksektir.
  • Bir cümlede en fazla iki boşluk bırakılmalı.
  • Başta ve sonda boşluk bırakılmamalı.
Doğru | YanlışAlt Düzey
Bilgi – Kavrama		H, U ve P -> Kolaydır.Yüksektir.
Objektiftir.		En yüksek olandır.

  • Düzeltme formülü kullanacaksın.
  • Açıklama istersin.
Yüksektir.
Güvenirliği ve Geçerliliği yüksek, sınav hazırlamak zordur.
  • Olumsuz soru kökü kullanmayacaksın.
  • Öğrenme eksikliği belirlenen(Formatif) değerlendirmede kullanılması önerilmez.
  • Bir öğretmen konuyu anlattıktan sonra ilke ve genellemeleri yoklayacaksa, önerme ya da yargıları yoklayacaksa, neden ve sonuç ilişkilerini yoklayacaksa kullanılır.
Eşleştirme TestiAlt Düzey
Bilgi – Kavrama		H, U ve P -> KolayYüksektir.
Objektiftir.		Vardır.

  • Düzeltme formülü kullanacaksın.
  • Cevaplar sorulardan fazla olmalıdır.
  • Sorular ve cevaplar tek boyutlu olmalıdır.
Yüksektir.
  • 5N – 1K -> Olgusal bilgileri yoklarız.
Çoktan Seçmeli Testi
(Bilişsel alanların sentez dışındaki diğer alanlarında ölçme yapmaya yarayan araçtır.)		Bilme – Kavrama – Uygulama – Analiz – Sentez – Değerlendirme

Daha çok Uygulama ve Analiz bazlı kullanılır.

Zorlarsak değerlendirme bile yaptırabilirsin.

Lakin Sentez yaptırılamaz.

H -> Zor ve uzmanlık gerektirir.

U ve P -> Kolay

Yüksektir.
Objektiftir.		Vardır.

  • Düzeltme formülü kullanacaksın.
  • Seçenek sayısını arttıracaksın.

Seçeneksiz sınavlarda şans başarısından bahsedemezsin.

En yüksek olandır.
  • Kalabalık gruplarda uygulanabilir.
  • Madde analizi yapılabilir.
  • Kritik ve önemli karar verilecekse çoktan seçmeli test kullanılmalıdır.
  • Soru kökünde ipucu olmayacak.
  • Bir soru diğerine cevap olmayacaktır.
  • Bir hikayeye en fazla 3 soru bağlanır, bağlanmalıdır.

Güvenirliğin Temel Kavramları

1 Yanıt

Duyarlılık(Hassaslık)

Ölçme sonuçlarının hassaslığıdır.

Duyarlılığı arttırmak istiyorsak, birimler arası mesafeyi küçültürüz.Yani birimler arası mesafeyi küçültürüz.Yani birimleri yaklaştırırız.

  • Birim sayısını arttırırız.
  • Birimler arasının küçük olmasıdır.
  • Birim sayısının fazla olmasıdır.

Duyarlılığı arttırmak ne işe yarar?

Duyarlılık artıyorsa hata oranı azalır.Yani gerçeğe yakınlık artar.Gerçeği yansıtma oranı artacaktır.

Eğitimde duyarlılığı arttırmak için soru sayısını arttıracaksın.

Ama burada dikkat etmemiz gereken bir husus var.Soru sayısını arttırırken abartmamak gerekiyor.Belli bir limiti vardır.Soru sayısını gereğinden fazla arttırmak öğrencileri yoracaktır, bezdirecektir, uykularını getirecektir.Dolayısıyla Tesadüfi Hatayı arttırır.Buda güvenliği düşürür.

Objektiflik(Puanlama Güvenirliği)

Tarafsızlık demektir.

Farklı ya da aynı puanlayıcılar bir kağıda benzer puanlar veriyorsa bu puanlayıcların objektif davrandığı söylenir.

Birbirinden bağımsız puanlayıcılar, bir kağıdı puanlarsa ve puanlar benzer çıkıyorsa, objektif davranılmıştır.Puanlama güvenirliği yüksektir diyeceğiz.

Bir ölçme aracının objektifliğini yani puanlama güvenirliğini arttırmak istiyorsak ne yapacağız?

  1. Ayrıntılı cevap anahtarı hazırlanır.
  2. İsimler kapatılıp puanlama yapılır.
  3. Aynı kağıdı iki defa puanlarsın.Bu puanların ortalamasını alırsın.
  4. Aynı kağıdı zümredeki başka bir öğretmene puanlatır ve puanların ortalamasını alırsın.
  5. Kağıdın tümü yerine soru soru okuma yapılır.Yani tüm öğrencilerin önce 1. sorusu, ardından 2. sorusu …… böyle gider.

Tutarlılık

Tutarlılık iki durumda incelenir.

Bir testteki maddelerin birbiriyle uyumlu olduğunu gösteren İç TutarlılıkKısa zaman aralıklı ölçümler
Bir testteki maddelerin birbiriyle uyumlu olmasıdır ya da testin bütünüyle uyumlu olmasıdır.

  • Eğer bir öğretmen hazırladığı sınavda benzer konulardan benzer hedef davranışlardan soru sayısını fazlalaştırıyorsa, soru syısındaki benzerliği arttıracağı için yani uyumu arttırdığı için iç tutarlık yüksektir.
  • Fakat bu öğretmen farklı konulardan, farklı hedef davanışlardan soru sayısını arttırıyorsa, sorular arasındaki uyumu azaltacak, farklılığı arttıracaktır.Buda iç tutarlılığı azaltır.

İç tutarlılığı arttırmak için,

  • Benzer hedef davranışlardan soru soracaksın.
  • Benzer konulardan soru soracaksın.
  • Benzer kazanımlardan soru soracaksın.

Peki bir testin iç tutarlılığı yüksekse nasıl yorum yaparız?

  1. Sorular benzer hedef davranışlara yöneliktir.
  2. Sorular benzer kapsamdan geliyor.
  3. Sorular arasındaki uyum yüksektir dersin.Yani madde madde kolerasyonu yüksektir dersin.
  4. Eğer psikolojik test ise yapı geçerliliği yüksek olduğunu söyleyebilirsin.
  5. Eğer başarı testiyle kapsam geçerlliliğinin üdşük olduğunu söyleyebilirsin.
Yaptığın ölçme işlemini 1-3 hafta arasında yani kısa zaman aralığında tekrar ettiğinde benzer sonuçlar elde ediyorsan burada tutarlılık vardır denir.

Kararlılık

Tutarlılığın ikinci anlamının uzun süreli versiyonudur.

Eğer bir ölçme işlemini uzun zaman aralığında tekrar edersen yani ölçüm yaparsan (3-6 hafta arasında tekrar edersen) bu ölçme sonuçları benzerse, bu ölçme sonuçları zaman içinde değişmiyordur.Yani kararlık gösteriyordur.

Kararlılığın faydası nedir?

Eğer ölçtüğün özellik kararlılık gösteriyorsa, ölçülen özelliğin zaman içinde direncini gösterir.Ölçtüğün özelliğin zaman içinde değişmezliğini gösterir.