I introducere motto: “Asigurarea calităţii este în primul rând responsabilitatea universităţii”

• I. INTRODUCERE

• Motto: “Asigurarea calităţii este în primul rând responsabilitatea universităţii”

• Procesul de evaluare externă în România:

• Toate instituţiile (de stat şi particulare)

• Instituţional/programe de studii/domenii

• Obligaţie legală: autorizare/acreditare/evaluare periodică

• Finalizare prin calificative/avize comunicate MECTS

• Etape: conform Metodologiei şi Ghidurilor

• Standarde şi condiţii obligatorii pentru Spaţiul European al Învăţământului Superior (cf. ESG)

• (http://www.enqa.eu/files/ESG_3edition%20%282%29.pdf

• http://www.enqa.eu/files/ESG%20in%20Romanian.pdf)

• NOTA: La Conferinta ministeriala de la Erevan (14-15 Mai 2015) au fost adoptate noile ESG – vezi site-ul ENQA

Elemente cheie (standarde şi proceduri cf. ESG):

• Elemente cheie (standarde şi proceduri cf. ESG):

• Raport de autoevaluare şi anexe: informaţii recente, validate şi asumate de instituţie

• Evaluare externă (“peer review”), cu accent pe dezvoltare şi îmbunătăţirea calităţii

• Deficienţele – dacă există – nu pot fi ignorate, cu consecinţele care decurg din reglementările în vigoare

Cum se defineşte calitatea – domeniile de calitate prevăzute de lege

• Cum se defineşte calitatea – domeniile de calitate prevăzute de lege

• Cum se apreciază nivelul de calitate ? standarde, criterii, indicatori de performanţă

• Cum se defineşte “excelenţa” ?

• Întrebări: “permanente”, “deschise”, “cu răspunsuri multiple”, “cu răspunsuri de etapă” etc.

• II. EVALUATORII: CONDIŢII

Evaluatorii (“peer reviwers”):

• Evaluatorii (“peer reviwers”):

• Cel puţin doi, deobicei mai mulţi

• Acoperă toate domeniile de evaluare

• Unul dintre evaluatori este “coordonator”

• (Un evaluator poate primi sarcina de a redacta raportul de evaluare)

• Evaluatorii pot fi insoţiţi de un membru al personalului agenţiei

Ce condiţii trebuie să îndeplinească evaluatorii:

• Ce condiţii trebuie să îndeplinească evaluatorii:

• Să fie “egali – (peers)!”: împărtăşesc valorile, limbajul, “cultura” instituţiei/programului de studii pe care îl evaluează

• Să nu aibă nicio legatură cu instituţia/programul de studii evaluat

• III. CUM ACŢIONEAZĂ ŞI CE SE ANGAJEAZĂ SĂ FACĂ EVALUATORII

Cum trebuie să acţioneze evaluatorii:

• Cum trebuie să acţioneze evaluatorii:

• Să fie “ochii şi urechile agenţiei”

• Să nu se transforme în “consultanţi” pentru instituţie/program

• Să nu avanseze niciun fel de indicaţie asupra unei eventuale decizii pe care o vor lua/propune

• Să nu uite că sunt EVALUATORI obiectivi

Ce trebuie să urmărească evaluatorii:

• Ce trebuie să urmărească evaluatorii:

• Raportul de autoevaluare: structură, dacă este complet, rezultatele prezentate, impactul asupra instituţiei/programului

• Dacă standardele/criteriile/indicatorii sunt îndepliniţi

• Relevanţa şi viabilitatea planului de îmbunătăţire a calităţii prezentat în Raportul de autoevaluare şi capacitatea instituţiei de a-şi rezolva problemele

Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (1) :

• Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (1) :

• Să cunoască în detaliu procedurile de evaluare externă şi standardele agenţiei

• Să studieze Raportul de autoevaluare şi anexele sale

• Să participe activ la activităţile pregătitoare ale evaluării

Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (2) :

• Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (2) :

• Să se manifeste ca membii activi ai echipei de evaluare, sub conducerea coordonatorului

• Să contribuie la adoptarea unui program de evaluare/vizită fezabil

• Să-şi programeze timpul astfel încât să participe la tot programul vizitei

Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (3) :

• Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (3) :

• Să-şi amintească permanent că activitatea de evaluare trebuie să reflecte obiectiv “starea calităţii” instituţiei/programului şi NU eventuale preferinţe personale sau idei preconcepute

• Să păstreze confidenţialitatea: constatările vizitei sunt ale evaluatorilor şi se vor reflecta numai în raportul acestora

Ce trebuie să facă evaluatorii în timpul vizitei (1):

• Ce trebuie să facă evaluatorii în timpul vizitei (1):

• Să se familiarizeze cu instituţia/programul: să înţeleagă natura instituţiei/programului, “cultura instituţională”

• Să păstreze permanent o atitudine respectuoasă faţă de reprezentanţii instituţiei

Ce trebuie să facă evaluatorii în timpul vizitei (2):

• Ce trebuie să facă evaluatorii în timpul vizitei (2):

• Să lucreze în echipă: să comunice cu toţi membrii echipei, inclusiv cu studenţii, care sunt membrii cu drepturi depline ai acesteia

• Să ia parte la toate activităţile

• Să facă bilanţul activităţii zilnice: în acest mod se pun bazele rapoartelor echipei de evaluare!

Cum trebuie să acţioneze evaluatorii în timpul vizitei (3):

• Cum trebuie să acţioneze evaluatorii în timpul vizitei (3):

• Să nu facă recomandări specifice

• Să-şi amintească permanent că activitatea de evaluare trebuie să reflecte obiectiv “starea calităţii” instituţiei/programului şi NU eventuale preferinţe personale sau idei preconcepute

• Să pastreze confidenţialitatea: constatările vizitei sunt ale evaluatorilor şi se vor reflecta numai în raportul acestora

Ce trebuie să facă evaluatorii după vizită (1):

• Ce trebuie să facă evaluatorii după vizită (1):

• Să analizeze constatările şi să ajungă la un consens

• Să structureze constatările, pe bază de dovezi şi argumente care susţin decizia luată prin consens

• Să contribuie la prioritizarea elementelor care au condus la decizie (calificativ propus)

Ce trebuie să facă evaluatorii după vizită (2):

• Ce trebuie să facă evaluatorii după vizită (2):

• Să contribuie la pregătirea prezentarii finale

• Să-şi amintească permanent că activitatea de evaluare trebuie să reflecte obiectiv “starea calităţii” instituţiei/programului şi NU eventuale preferinţe personale sau idei preconcepute

• Să pastreze confidenţialitatea: constatările vizitei sunt ale evaluatorilor şi se vor reflecta numai în raportul acestora

• IV. PREGĂTIREA EVALUĂRII/VIZITEI

Întâlnirea pregătitoare a membrilor echipei, condusă de coordonator:

• Întâlnirea pregătitoare a membrilor echipei, condusă de coordonator:

• Coordonatorul se asigură că toţi membrii echipei au studiat şi înţeles toate documentele, repartizează sarcinile şi definitivează agenda

• Fiecare membru al echipei îşi înţelege şi îşi asumă responsabilităţile individuale

Responsabilităţile individuale ale evaluatorilor:

• Responsabilităţile individuale ale evaluatorilor:

• Să înţeleagă standardele/criteriile/indicatorii de evaluare

• Să analizeze atent toate informaţiile din Raportul de autoevaluare şi din anexele acestuia

• V. CUM SĂ SE COMPORTE EVALUATORII ?

Relaţia cu “instituţia” (1)

• Relaţia cu “instituţia” (1)

• Să ţină seama că vizita se desfăşoară după o perioada intensă de pregătire la nivelul instituţiei/programului de studii

• Să ţină seama că instituţia doreşte să scoată în evidenţă progresele realizate în perioada de după evaluarea anterioară dar ... există însă şi situaţii mai puţin fericite ...

Relaţia cu “instituţia” (2)

• Relaţia cu “instituţia” (2)

• Să ţină seama de relaţia “delicată” (uneori “ambiguă”?) între instituţie şi evaluatori:

• Instituţia “îi recunoaşte a priori ca experţi”

• Instituţia apreciază activitatea şi contribuţia lor la îmbunătăţirea calităţii

• Dar ....

Relaţia cu “instituţia” (3)

• Relaţia cu “instituţia” (3)

• Instituţia este conştientă de “riscul competiţiei”

• Instituţia “se teme” să prezinte lucruri “neplăcute” + “defavorabile “

• Instituţia are aşteptări mari de la evaluare – şi-a propus şi doreşte calificative favorabile

Cum pot să răspundă evaluatorii aşteptărilor instituţiei (1) :

• Cum pot să răspundă evaluatorii aşteptărilor instituţiei (1) :

• Să explice că evaluarea este efectuată de persoane care înţeleg şi împărtăşesc valorile instituţiei vizitate

• Să sublinieze că baza evaluarii este Raportul de autoevaluare arătând astfel că părerea instituţiei despre ea însăşi este înţeleasă şi respectată

Cum pot să răspundă evaluatorii aşteptărilor instituţiei (2) :

• Cum pot să răspundă evaluatorii aşteptărilor instituţiei (2) :

• Să creeze o relaţie bazată pe încredere: să păstreze o parte din timp pentru întrebări (chiar dacă aceeaşi întrebare este pusă de mai multe ori!)

• Să insiste asupra necesităţii promovării calităţii

Cum pot să răspundă evaluatorii aşteptărilor instituţiei (3) :

• Cum pot să răspundă evaluatorii aşteptărilor instituţiei (3) :

• Să păstreze o atitudine respectuoasă

• Să-şi reamintească permanent că sunt reprezentanţii agenţiei

• Să păstreze confidenţialitatea (inclusiv despre alte evaluări la care au participat!)

• Un comportament adecvat al evaluatorilor stimulează interesul instituţiei pentru aplicarea măsurilor de asigurare a calităţii!!

CE NU TREBUIE SĂ FACĂ EVALUATORII (1):

• CE NU TREBUIE SĂ FACĂ EVALUATORII (1):

• Să prezinte ca model propria instituţie!

• Să facă recomandări specifice

• Să aibă alte întâlniri cu reprezentanţii instituţiei, în afara agendei oficiale

CE NU TREBUIE SĂ FACĂ EVALUATORII (2):

• CE NU TREBUIE SĂ FACĂ EVALUATORII (2):

• Să accepte “cadouri” – cu excepţia unor materiale cu caracter promoţional pentru instituţie

• Să-şi ofere serviciile pentru consultanţă ulterioară (cu caracter personal) sau să accepte invitaţii după terminarea vizitei

Ce înseamnă evaluarea pentru evaluatorul extern (1):

• Ce înseamnă evaluarea pentru evaluatorul extern (1):

• Proces de învăţare şi aprofundare a unor noi concepte, instrumente şi metodologii

• Expunerea propriei persoane la experienţe noi şi interesante

• Înţelegerea problemelor unor alte instituţii – colective - grupuri de “egali”

Ce înseamnă evaluarea pentru evaluatorul extern (2):

• Ce înseamnă evaluarea pentru evaluatorul extern (2):

• În fiecare instituţie sunt lucruri bune şi mai puţin bune: toate sunt importante!

• - Implicarea personală a evaluatorilor, obiectivitatea şi seriozitatea lor sunt esenţiale pentru calitatea procesului

Ce înseamnă evaluarea pentru evaluatorul extern (3):

• Ce înseamnă evaluarea pentru evaluatorul extern (3):

• Să înveţe să reziste presiunii unui proces extrem de complex dar totodată extrem de important şi interesant!

• Să înveţe să judece “cu sufletul” dar să-şi formuleze concluziile “cu mintea”!

• Să recunoască “excelenţa”, acolo unde există, fără a dispune însă de o “definiţie” universal valabilă a ei

• Bibliografie:

• Metodologia şi Ghidurile ARACIS

• Maria Jose Lemaitre - Prezentarea “Aseguramiento de la calidad de la education superior. Taller de Pares Evaluadores”. INQAAHE GA, Taipei, Aprilie 2013 (cu permisiunea personală a autoarei)

• Scuze pentru a vă fi prezentat ceeace dvs. desigur ştiaţi!

• Mulţumesc pentru atenţie