Manual d’avaluació de projectes i programes educatius Documents 35 URL: www.gen
Manual d’avaluació de projectes i programes educatius Documents 35 URL: www.gencat.cat/ensenyament Aquest llibre està publicat amb una llicència Creative Commons Reconeixement-No comercial Compartir igual 3.0 Espanya. Per veure’n una còpia, visiteu: <http://creativecommons.org/licenses/by-nc- sa/3.0/es/legalcode.ca> Els termes de la llicència impliquen que aquest material pot ser: • reproduït, distribuït i comunicat públicament sempre que se’n reconegui l’autoria; • reproduït, distribuït i comunicat públicament sempre que l’ús no sigui comercial, i • utilitzat per generar una obra derivada sempre que aquesta quedi subjecta a una llicència idèntica a aquesta. Manual d’avaluació de projectes i programes educatius © Francesc Ranchal Collado Consell Superior d’Avaluació del Sistema educatiu Departament d’Ensenyament Generalitat de Catalunya Barcelona, juny de 2016 Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 2 ÍNDEX Presentació.........................................................................................................3 1. Aspectes preliminars.....................................................................................4 1.1. Conceptes previs..........................................................................................4 1.2. Avaluabilitat del projecte...............................................................................9 2. Avaluació del disseny................................................................................11 2.1. Avaluació de necessitats............................................................................11 2.2. Avaluació del disseny.................................................................................14 3. Avaluació de la implementació...................................................................17 3.1. Avaluació del procés d’ensenyament i aprenentatge.................................17 3.2. Avaluació de resultats.................................................................................26 4. Avaluació dels efectes................................................................................34 4.1. Avaluació de les millores............................................................................34 4.2. Avaluació dels impactes.............................................................................44 5. Conclusions i recomanacions....................................................................48 6. Annexos...................................................................................................54 6.1. Exemplificació: El projecte Apadrinem el nostre patrimoni........................54 6.2. Repertori de competències.........................................................................63 6.3. Mètodes i tècniques de recopilació d’informació........................................90 7. Bibliografia consultada...............................................................................94 Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 3 PRESENTACIÓ Aquest manual està pensat per orientar el procés d’avaluació de projectes de millora que puguin desenvolupar els centres educatius. Quan s’implanta un projecte de millora en un centre educatiu, cal dissenyar i implementar un procés avaluatiu per tal de valorar les possibles millores assolides i l’aportació del projecte per aconseguir-les. El que es pretén amb aquest document és donar eines als centres de recursos pedagògics, a les direccions dels centres i al professorat en general perquè puguin emprar uns instruments que els permetin veure si el projecte en qüestió té raó de ser, està ben dissenyat i assoleix les millores previstes amb un nivell d’impacte favorable. S’ha intentat que els instruments siguin d’aplicació senzilla i útil per tal de garantir-ne l’aplicabilitat en qualsevol projecte que desenvolupi el centre, ja que es parteix de la premissa que tot projecte s’ha d’avaluar i que cal fer-ho buscant un equilibri entre la validesa i la fiabilitat d’aquest procés avaluatiu. Aquest document té la consideració d’esborrany, ja que un cop elaborat hauria de passar a l’aplicació pràctica en algun centre amb el suport del CRP corresponent. Per això cal tenir en compte que el document és un model i no pas el model, l’únic model possible. S’ha procurat donar procediments i eines per treballar l’avaluació per nivells, des dels més elementals (seguiment del procés aplicat amb indicis de l’aportació del projecte a la millora prevista) als més complexos (evidències mitjançant la metodologia de l’experiment social). El document també fa una reflexió sobre la importància de poder avaluar qualsevol projecte de millora que es dissenyi i implementi en un centre educatiu. No es tracta de generar més burocràcia, sinó que, al contrari, el que és important és generar instruments i procediments per treballar l’avaluació de projectes que facilitin arribar a tenir-ne informació vàlida i fiable. És per això que s’ha reduït al màxim la part teòrica i s’ha fet molt d’èmfasi en els instruments i procediments aplicables a l’avaluació. Per tal de proposar exemples concrets i entenedors, s’ha utilitzat l’avaluació del projecte Apadrinem el nostre patrimoni, aplicat el curs 2014-2015, les dades del qual es poden consultar a l’apartat 6.1 d’aquest document. Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 4 1. ASPECTES PRELIMINARS 1.1. Conceptes previs CONCEPTE D’AVALUACIÓ Consisteix en obtenir evidències (informació objectiva d'índole quantitativa i qualitativa) sobre el programa, de manera sistemàtica, per tal de prendre decisions o rendir comptes. DIFERENCIA ENTRE EL CONCEPTE DE PROGRAMA I EL DE PROJECTE Programa: És un pla de millora organitzat per l’Administració corresponent (educativa en aquest cas) i que es caracteritza per: a) Estar adreçat a disminuir la distància entre el que està passant i el que hauria de passar. b) Definir genèricament els resultats a llarg termini. c) Estar previst per a un període de temps llarg, de 2 a 4 anys com a màxim. Exemple: Apadrinem el nostre patrimoni Projecte: Quan aquest programa arriba a un centre formatiu, es materialitza mitjançant un projecte concretat en uns objectius operatius1, específics, mesurables i limitats en el temps. DIFERÈNCIA ENTRE PROJECTE I AVALUACIÓ DEL PROJECTE Convé distingir entre el projecte i la seva avaluació. Tot i que existeix una clara interrelació entre els dos conceptes, són dos processos diferents, com es pot veure a la figura de la pàgina següent. 1 Defineixen els resultats més immediats que s’espera obtenir de les activitats desenvolupades. Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 5 Desenvolupament del projecte i de l’avaluació del projecte DIFERÈNCIA ENTRE PROJECTE D’INNOVACIÓ I PROJECTE DE MILLORA Projecte d’innovació en el sistema educatiu: És aquell procés d’ensenyament i aprenentatge que es desenvolupa en temps i forma a partir d’una situació educativa que no funciona, mitjançant una prova pilot que pot incidir sobre els recursos emprats, les activitats desenvolupades, els objectius assolits i els efectes detectats sobre l’alumnat. L’avaluació de l’esmentada prova pot portar a: • L’eliminació del programa / projecte. • La modificació d’aspectes que no funcionen. • La consolidació del programa / projecte com un projecte de millora. Projecte de millora: És aquella estratègia metodològica i organitzativa implementada en un centre fruit de l’experiència prèvia d’una prova pilot. DESENVOLUPAMENT DEL PROJECTE DESENVOLUPAMENT DE L’AVALUACIÓ DEL PROJECTE NECESSITATS DE MILLORA DISSENY DEL PROJECTE IMPLEMENTACIÓ DEL PROJECTE RESULTATS DISSENY DE L’AVALUACIÓ IMPLEMENTACIÓ DE L’AVALUACIÓ EFECTES Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 6 DIFERÈNCIA ENTRE LES CARACTERÍSTIQUES PREVISTES I LES DESENVOLUPADES Implica conèixer en quines condicions s’ha desenvolupat el procés d’ensenyament i aprenentatge, tant pel que fa a les condicions d’accés al projecte, als requeriments curriculars, metodològics i organitzatius com als recursos humans i materials i als resultats assolits. Arribats aquí, cal fer una observació prèvia per distingir entre projecte dissenyat i projecte desenvolupat. En la taula següent es poden observar les diferències entre el projecte dissenyat i el seu desenvolupament. Aquest és un aspecte crític de l’avaluació, ja que diferencia què estem avaluant: si el que s’hauria de fer o el que ja s’ha fet. Característiques Components Previstes Desenvolupades Observacions Recursos Assignats Invertits Possibles diferències Activitats Elaborades Desenvolupades Possibles diferències Competències Previstes Assolides Possibles diferències Efectes Esperats Aconseguits Possibles diferències DESENVOLUPAMENT DE L’ESTRATÈGIA METODOLÒGICA En la figura i la taula de les pàgines següents es poden observar les diverses etapes i subetapes que configuren l’avaluació d’un projecte de millora. Aquestes etapes i subetapes, degudament procedimentades i amb els instruments adients, permetran disposar d’un determinat nivell d’evidències per tal d’ubicar el projecte al nivell de qualitat convingut. Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 7 Etapes i subetapes de l’avaluació d’un projecte de millora AVALUACIÓ PROJECTE AVALUACIÓ DISSENY AVALUACIÓ IMPLEMENTACIÓ AVALUACIÓ DELS EFECTES AVALUABILITAT NECESSITATS COHERÈNCIA PROCÉS MILLORES RESULTATS IMPACTES Procediment Instruments Procediment Instruments Procediment Instruments Procediment Instruments Procediment Instruments Procediment Instruments Procediment Instruments CONCLUSIONS I RECOMANACIONS Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 8 Procés Informació Avaluabilitat: Es pot avaluar el projecte? (1) INSTRUMENTS Necessitat: Quines son les mancances? (2) INSTRUMENTS Coherència: El disseny relaciona els diferents components? (3) INSTRUMENTS Procés: En quines condicions es duu a terme el projecte? (4) INSTRUMENTS Resultats: Quins objectius / competències s’han assolit? (5) INSTRUMRNTS Millores: Guanys que s’han produït (6) INSTRUMENTS Impacte: Aportació a la consecució d’objectius (7) INSTRUMENTS Obtenció Qüestionari 1 Qüestionari 2 Qüestionari 3 Qüestionari 4 Llistes de comprovació 5 Rúbrica 5 Qüestionari 6 Llistes de comprovació 6 Qüestionari 7 Tractament Procediment 1 Criteris de valoració 1 Procediment 2 Criteris de valoració 2 Procediment 3 Criteris de valoració 3 Procediment 4 Criteris de valoració 4 Procediment 5 Indicadors 5 Procediment 6 Indicadors 6 Registre 6 Procediment 7 Indicadors 7 Síntesi Conclusions i recomanacions del projecte de millora de centre: procediment 8 i instruments 8.1 i 8.2 Difusió Presentació de resultats Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 9 1.2. Avaluabilitat del projecte Es té en compte en primer lloc el supòsit que l’avaluació del projecte s’hagi o es vulgui dur a terme per persones externes (avaluació externa). La finalitat és la de determinar si el programa reuneix les condicions necessàries com perquè valgui la pena dedicar temps i recursos a avaluar-lo. Per tant, es tracta de conèixer de primera mà, en primer lloc i a nivell extern, si existeixen precedents similars que puguin facilitar i simplificar la feina avaluadora i, en segon lloc, aconseguir informació de com està dissenyat el projecte des dels diferents punts de vista, tant d’aspectes qualitatius com quantitatius. Procediment (1): Dictamen d’avaluació EXTERNA / INTERNA externa Passar qüestionari d’avaluabilitat Qüestionari d’avaluabilitat Valoració dels paràmetres d’avaluació Aplicació Avaluació del projecte Possibilitat de canvi Fi Fi No Sí Sí No Consell Superior d’Avaluació Manual d’avaluació de projectes i programes educatius 10 Instruments (1): - Qüestionari preliminar de l’avaluabilitat Aquest test podria contenir uploads/Geographie/avaluacio-de-projectes-i-programes-educatius.pdf
Documents similaires
-
15
-
0
-
0
Licence et utilisation
Gratuit pour un usage personnel Attribution requise- Détails
- Publié le Dec 16, 2021
- Catégorie Geography / Geogra...
- Langue French
- Taille du fichier 1.3952MB