Bloom Sınıflandırması Modifiye Bloom Sınıflandırması

Özet

• Bloom Sınıflandırması

• Modifiye Bloom Sınıflandırması

• Miller’in ustalık piramidi

Modifiye Bloom Sınıflandırması

• Beceri

• Entelektüel
• İletişim
• Uygulama

Modifiye Bloom Sınıflandırması?

• Entelektüel beceriler

• Bilginin hatırlanması
• Verilerin kullanılması
• Problem çözme

Miller‘in Ustalık Piramidi

Özet

• Eğitimsel döngü

• Vizyon ve Misyon

• Amaç ve Hedefler

• Değerlendirme

• Yeni eğitim kavramları

Eğitim Döngüsü

• Toplumun gereksinimlerinin belirlenmesi

• Bir misyon ve bir vizyon ortaya çıkarılması

• Amaç ve hedeflerin belirlenmesi

• Bir değerlendirme sisteminin belirlenmesi

• Gelişim, ön sınav ve müfredatın uygulanması

• Müfredatın değerlendirilmesi

Eğitim Döngüsü

• Sağlık sorunlarındaki öncelikleri belirleyin

• Eğitimde öncelikle yapılacakları belirleyin

• Öğrencilerinizin toplum içerisinde geçirdikleri süreyi arttırın.

Eğitim Döngüsü

• Misyon fakültenin neyi, nasıl ve neden yaptığını ifade eder

• Amaç: başarmaya çalışılan
• İş: amaca ulaşmak için yapılan
• Değerler: Vizyona ulaşmadaki yol göstericiler

Eğitim Döngüsü

• Bir eğitim programı, özelleştirilmemiş bilgilerin biriktirilmesi tarzı yerine , ulaşılacak hedeflere uygun olarak seçilip şekillendirilmelidir.

• Hedefler, eğitim programıyla neye ulaşılmak istendiğini ve başarının kanıtı olarak neyin kabul edileceğini önceden belirler.

Eğitim Döngüsü

• Measurable (Ölçülebilir)

• Achievable (Ulaşılabilir)

• Relevant (Bağlantılı)

• Time-framed (Zamanı belirlenmiş)

Eğitim Döngüsü

• Değerlendirmeye rehberlik edecek cetveli temin eder

• Amaç ve hedeflerin tipleri:

• Davranışsal
• Performans
• İlerleme süreci ve işlem
• Ürün

Eğitim Döngüsü

• Standartları sağlamlaştırır

• Problemleri ortaya çıkarır

• Öğretmen ve dersin etkinliğini değerlendirir

• Müfredatı düzenleyenlerin ne derecede

• hedeflere ulaşıldığını
• yöntemlere uyulduğunu görmelerini sağlar

Eğitim Döngüsü

• İlerideki performansı önceden tahmin eder

• Eğitim sürecinde tam olarak ne yapıldığını saptayarak, eğitimdeki karar mekanizmalarına yol gösterecek bilgiyi temin eder

Eğitim Döngüsü

• Programı değerlendirme

• Öğretmeni değerlendirme

• Öğrenciyi değerlendirme

• Formatif (Diagnostik, gelişimsel) Değerlendirme
• Summatif (Belgelendirici, onay verici) Değerlendirme

Eğitim Döngüsü

• Gittikçe zorlaşan

• Ayrım yapabilen

• Güvenilir

• Geçerli

• Adil

• Şeffaf

• Eğitime yönelik güçlü etkisi olan

Eğitim Döngüsü

• Öğrenciye uygulanan uygun düzeyde standardize sınavlarla gerçek iş ve eğitim dünyasına yaklaşmak hedeflenir

Eğitim Döngüsü

• öğrenme işleminde önemli olup öğrenmeyi belirgin olarak arttırır, sonuçta:

• daha güçlü eğitim programlarına
• kaynakların daha iyi değerlendirilmesine yol açar

Eğitim Döngüsü

• belgelendirici(sertifikalandırıcı) değerlendirme olarak da bilinir

• Toplumun korunması —ustalık belgesi
• Öğrencilerin seçilmesi —kurslara katılım için
• Öğrenci motivasyonu —öğrenme güdüsü
• Programın değerlendirilmesi —Öğretmene geri bildirim

Özet

• Neyi biliyoruz?

• Bir testin özellikleri

• Geçerlilik

• Güvenilirlik

• Uzlaşma sanatı

• Sonuçlar

Genel Kavramların Gözden Geçirilmesi

• Değerlendirme Prensiplerini

• Kendi değerlendirme stratejinizin bir bölümü olarak ve yıllık ders eleştirileriniz için bir kontrol listesi olarak kullanıyor musunuz?

• Değerlendirme yöntemleriniz öğrenim sonuçlarınızı ve kıyaslama hesaplamalarınızı karşılıyor mu?

• Bu değerlendirme kriterlerinin

• öğrencilere verilmesini ve hepsi tarafından anlaşılmış olmasını sağlamak kimin sorumluluğudur?

• Yapılan eğitim aktivitelerinin herhangi bir kısmına ait geri bildirim

• gerek öğrencilere gerekse öğretim üyelerine verilmekte midir?

• Bilinen, anlaşılan ve kullanılan açık bir değerlendirme stratejiniz var mı?

Ne biliyoruz?

Ne biliyoruz?

Ne biliyoruz?

Bir Testin Nitelikleri

Geçerlilik konusu

Klinik uygulamayla en çok ilişkili görevleri seçin (ölçülen ustalık hakkında daha az kaygılanın)

• Klinik uygulamayla en çok ilişkili görevleri seçin (ölçülen ustalık hakkında daha az kaygılanın)

• Tek bir yönteme bağlı kalmayın (içeriğe göre bunun önemi daha azdır)

• İyi bir iş çıkarmak için çeşitli yöntemleri karıştırmanız gerekir

• Karmaşık olmaktan kaçının  KISS kuralı

Güvenilirlik Konusu

Geçerlilik—skor anlamlı

• Geçerlilik—skor anlamlı

• Testiniz ölçmek istediğinizi ölçüyor mu?

Eğitimi Etkileme Konusu

Alternatif Bir Bakış

Göz Önünde Bulundurulacak Diğer Noktalar...

Ortama, not vermeye ve değerlendirmeyle ilgili toplantılara katılmaya harcadığımız kadar zamanı öğrencilerimize geri bildirim vermek için de harcasaydık, çok daha iyi öğrenen öğrencilerimiz olurdu.

• Ortama, not vermeye ve değerlendirmeyle ilgili toplantılara katılmaya harcadığımız kadar zamanı öğrencilerimize geri bildirim vermek için de harcasaydık, çok daha iyi öğrenen öğrencilerimiz olurdu.

Özet

• Piramidi Tırmanma

• Piramidi Genişletme

• Kullanışlılık (yararlılık) fonksiyonu

• Değerlendirme yöntemlerine bakış

• Sonuçlar

Genel Kavramların Gözden Geçirilmesi

Miller‘in Ustalık Piramidi

Miller‘in Ustalık Piramidi

Sözlü Sınavlar

En eski sınav biçimlerinden birisi (en az ortaçağ üniversitelerine dek uzanır)

• En eski sınav biçimlerinden birisi (en az ortaçağ üniversitelerine dek uzanır)

Özellikle klinik branşlar olmak üzere mezuniyet öncesi tıp sınavlarında halen yaygın olarak kullanılmaktadır.

• Özellikle klinik branşlar olmak üzere mezuniyet öncesi tıp sınavlarında halen yaygın olarak kullanılmaktadır.

Önceden belirlenmiş klinik senaryolar kullanılır

• Önceden belirlenmiş klinik senaryolar kullanılır

• Her senaryonun, her birinin özel not verme şemaları olan 5-10 soruluk soru havuzları vardır.

• Öğrenciye senaryo verilir ve ilişkin sorular sorulur

• Cevaplar en az iki bağımsız değerlendirici tarafından değerlendirilir.

Karşılaştırmalı çalışmalar  SOE, MCQ ve OSCE arasında belirgin korelasyon var

• Karşılaştırmalı çalışmalar  SOE, MCQ ve OSCE arasında belirgin korelasyon var

• Sınavı yapanlar daha tatminkar buluyorlar.

Verilen zaman içerisinde rahatlıkla yanıtlanabilecek problemler seç

• Verilen zaman içerisinde rahatlıkla yanıtlanabilecek problemler seç

• Birkaç başlangıç sorusu hazırla

• Her başlangıç sorusu için, soruşturmayı genişletecek çeşitli sorular geliştir

• Her soru için cevapta ve skor skalasında görmeniz gereken skorlama elemanları.

Öncelikle  sınav yapanların hepsi skorlama işleminde anlaşmış olmalı

• Öncelikle  sınav yapanların hepsi skorlama işleminde anlaşmış olmalı

• Öncelikle  diğer sınav görevlileriyle değerlendirmeyi etkileyebilecek dış faktörleri tartışın

• Dış faktörlerle etkileşimden kaçının

• Not verilen soruların sayısını sabit tutun

• Öğrenciye planlanmamış ipuçları vermeyin

Yardımcı sorular sormaktan çekinmeyin

• Yardımcı sorular sormaktan çekinmeyin

• Tartışmayı odakta tutabilmek için
• Düşünme mekanizmasını anlayabilmek için
• Cevabı netleştirebilmek için

• Yardımcı sorulara puan vermeyin.

• Cevapta bulunması gereken belirlenmiş maddelere dayanan bir skorlama sistemi kullanın

• Tek bir cevaba dayanarak öğrenci hakkında karar vermeyin.

Skalanızda yer alan her türlü skoru kullanmaya hazırlıklı olun.

• Skalanızda yer alan her türlü skoru kullanmaya hazırlıklı olun.

• Notlarınız ortalama not civarında birikim yapmasın (uç puanları vermemeye yatkınlık)

• Skorlama yaparken bir önceki öğrencinin etkisinde kalmayın

Esnekliğe izin verir

• Esnekliğe izin verir

Çoktan seçmelilere göre planlamak daha kolaydır

• Çoktan seçmelilere göre planlamak daha kolaydır

Anında geribildirim fırsatı verir

• Anında geribildirim fırsatı verir

Sınav yapanlar arasında güvenilirlik az (“şahinler” ve “güvercinler” fenomeni)

• Sınav yapanlar arasında güvenilirlik az (“şahinler” ve “güvercinler” fenomeni)

Öğrencinin, değerlendiriciyi etkileyerek bilgisizliğini örtbas etmesi mümkün

• Öğrencinin, değerlendiriciyi etkileyerek bilgisizliğini örtbas etmesi mümkün

Kıvılcım...

Bilir

• MCQ tüm dünyayı fethetti

• 1975: MCQ’nun kısıtlılıklarına yönelik sorunlar

İkinci Dalga...

Nasıl yapıldığını bilir

• 1965: PMP’nin kullanıma girişi (Patient Management Problems)

• (Hasta Yönetim Problemleri)

Nasıl yapıldığını bilir

Üçüncü Dalga...

Bilir/Nasıl yapıldığını bilir

• Uyaran biçimi:

• Şartlara uygun/gerçek olmalı
• Karar gerektirmeli

İlk günde sınav, olguyu sunuma hazırlamak için 24 saat

• İlk günde sınav, olguyu sunuma hazırlamak için 24 saat

• Klinik ustalığı değerlendiren mekanizma simüle ortamlarda rastlanabilen kompleks davranışları değerlendirmelidir.

• Profesyonel bir işin doğrudan gözlenmesine dayanır

Klinik performansı doğru yansıtmadığı için staj performansının değerlendirilmesinden daha iyi.

• Klinik performansı doğru yansıtmadığı için staj performansının değerlendirilmesinden daha iyi.

• Olgu güçlüğü
• Skorerlerin odaklandığı nokta ve standartları farklı
• Kabul edilebilir performans üzerinde görüş birliğinin olmaması
• Kolektif hasta bakım sorumluluğu

• Genellikle üçlü sıçramada kaçınılır

Eğitime yönelik bir hedef beceriyi gözlemle değerlendirirken faaliyet alanını daralt

• Eğitime yönelik bir hedef beceriyi gözlemle değerlendirirken faaliyet alanını daralt

• Veri toplama
• Laboratuar uygulaması
• Klinik karar verme
• Profesyonel tutum ve davranışlar

Amaçlara ulaşılamadığını gösteren gözlenebilir davranış tiplerinin bir listesini yapın

• Amaçlara ulaşılamadığını gösteren gözlenebilir davranış tiplerinin bir listesini yapın

• Her iki listedeki temel davranış özelliklerini belirleyin

• Her iki listede yer alan maddelerin pozitif ve negatif ağırlıklarını belirleyin

• Kabul edilebilir performans skorunu kararlaştırın

• Gözleme dayalı bir değerlendirme skalası hazırlayın

Gözlemci olarak insanın limitlerini kabul edin.

• Gözlemci olarak insanın limitlerini kabul edin.

• Öncelikle  gözlemin amacı, değerlendirme skalası ve sistem üzerinde uzlaşmaya varın.

• Gözleme dayalı değerlendirmeleri periyodik olarak kontrol edin

• Bu değerlendirmelerin, sertifikalandırıcı amaca yönelik kısıtlılıklarını kabullenin

Polikliniklerde, hasta görüşme odalarında, hastane koğuşlarında, laboratuarlarda değerlendirme

• Polikliniklerde, hasta görüşme odalarında, hastane koğuşlarında, laboratuarlarda değerlendirme

• Belli bir süre içerisinde mesleki davranış ve aktiviteleri değerlendirebilme

• İletişim ve uygulama becerilerini değerlendirmek için kullanılabilir

• İstenmeyen ipuçları yok

• Simülasyon kurulumlarından daha ucuzdur

• Öğrenci ve öğretmen için ayrıntılı geribildirim

Zaman alıcı

• Zaman alıcı

Nasıl Yapıldığını Gösterir

Nasıl Yapıldığını Gösterir

• OSCE-oloji

• Klinik olarak mümkün olduğunca gerçeğe uygun istasyonlar yapın

• OSCE’lerde ayrıntılı ve toplam kararlar iyi verilir

• İçerik Özgünlüğü bir problemdir

Nasıl Yapıldığını Gösterir

Son Dalga...

Yapar

• Gelişen IT teknolojisi

• Çok araştırma gerek

Yapar

• Diğer önerilen yöntemler:

• Hasta raporları
• İnceleme raporları
• Klinik çalışma örnekleri
• Maskeli standardize hastalar
• Reçete kontrolü
• Kapalı devre video ile değerlendirme (doğrudan gözlem)

Önemli Mesajlar

• Tek bir ölçüm tüm piramidi değerlendiremez  yöntemler karışımına ihtiyaç var

• Değerlendirme öğrenmeyi yönlendirir  arzulanan öğrenme etkilerine ulaşabilmek için değerlendirmeyi stratejik olarak kullanın

Piramidin Genişletilmesi

Piramidin Genişletilmesi

• Ib En az bir randomize kontrollü çalışma

• IIa Randomizasyonu olmayan ama iyi düzenlenmiş en az bir kontrollü çalışma

• IIb En az bir diğer tip iyi düzenlenmiş deneysel çalışma

• III İyi düzenlenmiş deneysel olmayan tanımlayıcı çalışma, karşılaştırma, vaka-kontrol ve korelasyon çalışmaları gibi

• IV Uzman komite raporları veya görüşleri veya saygın otoritelerin klinik deneyimleri

Piramidin Genişletilmesi

• Yerleşmiş öğrenim

• Projeye dayalı öğrenim

• Probleme dayalı öğrenim

• Keşif öğrenim

• Öğrenci merkezli öğrenim

• Gerçekçi (otantik) öğrenim

• Hastaya dayalı öğrenim

• Topluma dayalı öğrenim

Piramidin Genişletilmesi

• Nasıl öğreneceğini öğrenme

• Kendi kendini değerlendirme

• Önderlik

• Takım becerileri

• Kavrama

• İfade etme becerileri (yazma, sunma)

• Düşünme/harekete geçme …

Piramidin Genişletilmesi

• Kendi kendine değerlendirme

• Emsallerle değerlendirme

• Yardımcı değerlendirme

• Kayıt defteri/günlük

• Öğrenme simülasyonları/değerlendirmeler

• Ürün değerlendirme

• Sonuca dayalı değerlendirme

Sonuca Dayalı Sınavlar

• Öğrencilerin bildiklerini ve bildikleri ile neler yapabildiklerini göstermesi gerekir.

• Sonuçların öğrenciler tarafından yorumu

• Kanıt sıkıntısı öğrenciye geri gelir

• Summatif ve formatif değerlendirme

• Proje dizaynı ve yürütme becerileri

• Belli bir zaman süreci

• Görevlere dayalı.

Sonuca Dayalı Sınavlar

• Belli bir süre içerisinde öğrencinin bir aktiviteyi gerçekleştirmesi ve bir sonuç elde etmesi gerekir

• En uygun

• Temel görev karmaşık bir uygulama becerisi ya da entelektüel beceri ise
• Öğrencinin çalışma şeklinden çok ürün önemli ise

Öğrencinin, bir ürün oluşturmak için bilgi ve becerilerini kullanma yeteneğini göstermesine izin verir

• Öğrencinin, bir ürün oluşturmak için bilgi ve becerilerini kullanma yeteneğini göstermesine izin verir

• Özel güçlü ve zayıf ustalık alanlarını belirler

• Verilen sürenin sonuna kadar öğrencinin görevini tamamlayabilme yeteneğini değerlendirir.

Zaman gerektirir

• Zaman gerektirir

Subjektifliği dengelemek için, bu ölçümlerden gelen bilgi:

• Subjektifliği dengelemek için, bu ölçümlerden gelen bilgi:

• Farklı kaynaklarca değerlendirilmeli(triangulasyon)
• Çok sayıda (longitudinal) ölçüme dayanmalı
• Dengeli total değerlendirme programının parçası olmalı

Bir Yöntemi Seçme...

Değerlendirme gereksinimi duyduğunuz öğrenime ve çalışma ortamının kısıtlılıklarına göre seçin

• Değerlendirme gereksinimi duyduğunuz öğrenime ve çalışma ortamının kısıtlılıklarına göre seçin

• İdari kolaylıklar nedeniyle geçerlilikten ödün vermeyin

• Bir ön taslak üzerinde değerlendirme oldukça yararlıdır

• Yararlılık fonksiyonu en iyi seçimlere götürür

Ön Taslak

• Ön Taslak

• değerlendirmenin müfredatı yansıtmasını sağlar (hem içerik & hem de öğrenme sahaları)
• planlamaya yardımcı olur
• değerlendirmede kaliteyi güvence altına alır
• şeffaflık sağlar

• ancak müfredattaki herşeyi değerlendirmek pek mümkün olmayabilir

Yararlılık Fonksiyonu

Yararlılık Fonksiyonu

• Geçerlilik (V)

• Güvenilirlik (R)

• Eğitime etki (E)

• Kabul edilebilirlik (A)

• Maliyet (C)

Yararlılık Fonksiyonu

Yararlılık Fonksiyonu

Yararlılık Fonksiyonu

Çoktan Seçmeli Soruların Yararlılığı

Doğru/Yanlış Tip Soruların Yararlılığı

CORE Yararlılığı

Üçlü Sıçrama’nın Yararlılığı

Sonuca Dayalı Test (Proje Yürütme Görevi) Yararlılığı

OSCE Yararlılığı

ICE (bütünsel klinik değerlendirme) yararlılığı

Sözlü Sınavlarda Yararlılık

Yapılandırılmış Sözlü Sınav Yararlılığı

Sonuçlar

• Uzlaşma tamamıyla değerlendirme şartlarına bağlıdır

• Değerlendirmenin kalitesi bireyselden çok genel değerlendirme programının önemli bir sorunudur

• İyi bir iş çıkarmak için, piramidin tamamını kapsayın (bir yöntemler karışımı)

Sonuçlar

• Arzu edilen öğrenim sonuçlarıyla ilişkili olması gerekir

• Değerlendirme, dikkatli planlama ve takip gerektirir

• Değerlendirme, sürekli eleştiri ve yargılama gerektirir

Özet

• Yaygın Hatalar

• Değerlendirmeyi Etkileyen Faktörler

• Uygun Biçimde Değerlendiriyor muyuz?

• Sonuçlar

Müfredat: 4 preklinik, 2 klinik yıl

• Müfredat: 4 preklinik, 2 klinik yıl

• Klinik yıllar: çeşitli sınav işlemleri

• Genellikle bilgiye yönelik sınavlar

• Sıklıkla güvenilirliği olmayan sınavlar (örn.sözlüler)

• Yüksek maliyet ve düzeltme için motivasyon yokluğu

• Stratejik hazırlanmak için

• Sınavı yapanın merakları
• Eski sınavları hatırlama
• Eski sınavlar üzerinde çalışma
• Kitap bilgisine odaklanma

Öğrenmenin algılanan sınav içeriği ile kısıtlanması

• Öğrenmenin algılanan sınav içeriği ile kısıtlanması

• Öz saygı kaybı, küçük düşme & kariyer güçlükleri

• Yanlış kararlar

• Öğrenmeden ziyade geçme 

Öğrenci bilgisini kaynaklarla aynı aktarmaya ve ezberlediğini göstermeye çalışıyor

• Öğrenci bilgisini kaynaklarla aynı aktarmaya ve ezberlediğini göstermeye çalışıyor
• İlaveten, öğrencinin o bilgiyi farklı koşullarda uygulama ve aktarma yeteneği değerlendirilebilir
• Eğitimcilerin, öğrenciyi düz düşünmeye sevk etmemek için bu tip sorulardan kaçınmaları gerekir

Değerli bir öğretim mekanizması olur

• Değerli bir öğretim mekanizması olur
• Öğrendiklerinin geçmişte bildikleri, deneyimleri ve değerleri ile ilişki kurmasına yardımcı olan sorularla öğrencinin ilgi ve motivasyonu arttırılır.
• Üst düzey sorular öğrencinin; öğrendiklerini yorumlayabilme, uygulayabilme, değerlendirebilme ve ifade edebilmede kullanacağı farklı yolların ortaya çıkarılmasını da sağlar

Etkin bir yol Bloom’un Düşünce Sınıflandırmasıdır

• Etkin bir yol Bloom’un Düşünce Sınıflandırmasıdır
• Yalın düşünce seviyesini temsil ettiği için bilgi ve kavrama gerektiren sorulardan kaçının
• Onun yerine uygulama, sentez, analiz ve/veya değerlendirme üzerinde yoğunlaşın

Konuyla ilgililik

• Konuyla ilgililik

• Kişisel ilgi & zevk

• Kişisel mücadele

• Birleşme

• Başarısızlık korkusu

Ne beklendiğini bilme

• Ne beklendiğini bilme

• Dersi anlatanın bilgisi ve şevki

• Değerlendirmenin ücretlendirilmesi

• Meslektaş baskısı/şöhret

• Yeterli zaman

• Geribildirim

• İşbirliği

Bütün değerlendirmeler dersin geri kalanıyla tam entegrasyon halinde planlanmış mı?

• Bütün değerlendirmeler dersin geri kalanıyla tam entegrasyon halinde planlanmış mı?

• Her değerlendirme öğrencinin öğrenmesine yönelik amaç, içerik, yöntem ve etkiler hakkında açıkça belirlenmiş hedefler içeriyor mu?

• Her değerlendirmenin güvenilirliği, geçerliliği ve uygulanabilirliği kanıtlanmış mı?

• Formatif ve sumatif değerlendirmeler arasındaki denge formatifden yana bozuluyor mu?

• Eleştirel mantık yürütme gerektiren yöntemler ezber gerektirenlere tercih ediliyor mu?

Öğrencilerin kitap ve diğer kaynakları sınavlara getirmesine izin veriliyor mu?

• Öğrencilerin kitap ve diğer kaynakları sınavlara getirmesine izin veriliyor mu?

• İletişim ve temel özelliklerin bilinmesi de dahil olmak üzere klinik çalışma tüm yönleriyle değerlendiriliyor mu?

• Orijinal araştırma gerektiren ayrıntılı olgu çalışmaları, literatür incelemeleri gibi değerlendirmeler gittikçe daha çok kullanılıyor mu?

• Öğrenciler, tatminkar ilerlemenin nasıl olması gerektiğini tanımlayan rehberler yardımıyla kendi değerlendirilme performanslarını takip edebiliyorlar mı?