Comprendre les pratiques évaluatives afin de les améliorer : la modélisation du processus spécifique à l’évaluation de programme (original) (raw)
Related papers
L’approche réaliste gagne en popularité auprès des chercheurs en sciences sociales, notamment auprès de ceux dont les objets de recherche sont complexes : programmes, projets ou politiques publiques qui visent à améliorer une situation sociale. En effet, l’approche réaliste a été récemment adaptée à la pratique de l’évaluation de programmes et à celle de la revue systématique. Ces pratiques de recherche ancrées dans le réalisme critique semblent mieux adaptées aux exigences du mouvement de la prise de décision ou de l’action fondée sur les preuves scientifiques. Pourtant, l’approche réaliste est encore peu utilisée et connue, particulièrement parmi les étudiants et les chercheurs francophones en évaluation. Le premier objectif de cet article est donc de présenter, de manière didactique, les fondements épistémologiques et les concepts clés de l’approche réaliste pour l’évaluation de programmes et la revue systématique. Le deuxième objectif est d’illustrer, par une étude de cas – celui d’une revue réaliste –, les apprentissages conceptuels et méthodologiques pour la pratique de l’évaluation réaliste. Cette démarche réflexive s’inscrit dans un mouvement de partage de connaissances et de pratiques sur l’approche réaliste.
L’étude d’évaluabilité : Une approche d’évaluation de programmes encore mal connue et peu utilisée
The Canadian Journal of Program Evaluation, 2016
L' étude d' évaluabilité (ÉÉ) a été conceptualisée vers la fi n des années 1970 à la suite du constat de la mauvaise qualité d'implantation des programmes et de l'incapacité des évaluations à répondre aux besoins des parties prenantes. L'ÉÉ est une démarche qui pourrait permettre d' apporter des améliorations à la fois au programme et à l' évaluation qui sera conduite ultérieurement. En eff et, l'ÉÉ permet, d'une part, de favoriser la clarifi cation de la théorie du programme qui sous-tend la mise en oeuvre des activités et, d' autre part, de faciliter l' élaboration du modèle logique qui aide à l'implantation. Lorsqu' elle est conduite par un évaluateur ou une équipe d' évaluateurs qui possède les compétences requises, elle permet également de disposer d'informations utiles à l' évaluation formative ou sommative qui sera entreprise. L'ÉÉ fait partie des évaluations de type exploratoire que l' on peut réaliser en quelques semaines ou sur une période de plusieurs mois en fonction de la complexité du programme et de son ampleur.
Une analyse engagée de la professionnalisation des pratiques d’évaluation
Canadian Journal of Program Evaluation, 2020
au monde, nombre de concepts associés ne sont pas clairement définis. Cette note fournit des défi nitions opération nelles des notions de profession, professionnalisme, professionnel et professionnali sation et elle offre une méthodologie pour réfléchir aux tenants et aux aboutissants d'un processus national de professionnalisation. En conclusion, l' auteur analyse les perspectives qui s' ouvrent pour la professionnalisation de la pratique de l' évaluation sur le plan international.
Nous proposons de distinguer, en nous inspirant des théorisations de l’évaluation, des éléments invariants qui seraient constitutifs de l’activité évaluative. Nous tentons ensuite de comparer la façon dont ils sont utilisés et nommés dans des pratiques d’évaluation de «programme/dispositif», en France et au Québec. Nous proposons enfin une modélisation de l’évaluation de «programme/dispositif», qui touche à la fois à l'objet et à l’activité d’évaluation sur la base de ses invariants (démarche théorique) et qui peut se décliner, dans la pratique, sous forme de pro- tocole méthodologique : la « référentialisation ».
L’approche Realist à l’épreuve du réel de l’évaluation des programmes
L’approche Realist propose une manière d’appréhender la complexité des interventions sociales en cherchant à comprendre ce qui fonctionne, pour qui, et dans quels contextes. À partir de l’étude des écrits scientifiques et d’une analyse réflexive de nos expériences, nous présentons quelques défis et réflexions liés à l’emploi de cette innovation évaluative. Si l’approche Realist apparaît intellectuellement séduisante, la construction des configurations « Contexte-Mécanisme-Effet » qu’elle suggère s’avère délicate à effectuer. Les difficultés de trouver les informations sur les contextes ou les effets, de distinguer les éléments du contexte de ceux du mécanisme, et d’adopter le niveau d’analyse adéquat constituent autant de défis dans l’utilisation de l’approche Realist.
Les différentes facettes de la pratique évaluative
2018
L'évaluation, dans le domaine de l'éducation-enseignement, constitue un des piliers fondamentaux dans toutes sortes d'ingénieries,qu'elles soient politiques, bureaucratiques ou pédagogiques. S'agissant d'une pratique de classe, elle inspirerait une certaine appréhension de la part des enseignants et des apprenants. Tout en respectant ses limites, cette contribution se veut comme objectif d'élucider quelques facettes, souvent reléguées en second plan sinon évitées, d'une pratique susceptible d'asseoir un enseignement d'équité et de mérite.
Canadian Journal of Program Evaluation / La Revue canadienne d évaluation de programme, 2016
La théorie du programme est une approche d' évaluation utilisée pour mieux défi nir l'intervention à évaluer, approfondir la compréhension des processus à l' oeuvre dans son implantation, identifi er ses eff ets et les mécanismes en jeu dans leur production, accroitre l'utilisation des résultats de l' évaluation et enfi n améliorer le programme. Malgré son importance, on note un manque d' écrits scientifi ques illustrant l'instrumentation de la production de la théorie du programme dans le cadre spécifi que d'une évaluation participative où tous les acteurs concernés par l'intervention sont activement impliqués dans toutes les étapes du processus d' évaluation. L' application de cette méthode à une étude de cas permet de décrire le processus de construction de la théorie du programme, ses fondements conceptuels, ses étapes, les techniques utilisées, les résultats obtenus et les principaux enjeux qui en émergent.
Propositions théoriques et pratiques pour l’évaluation de programmes en négligence
Canadian Journal of Program Evaluation
Aucun consensus clair n'a encore été établi quant à l'efficacité des programmes en négligence. Le présent article propose différents éléments à considérer dans l'évaluation de ces programmes. D'abord, l'évaluation doit documenter plusieurs changements intermédiaires, la négligence étant une problématique écosystémique bien plus que parentale. Ensuite, l'aspect personnalisé et multimodal des interventions commande une évaluation de la fidélité de l'implantation. De plus, l'évaluation doit renseigner sur les facteurs qui soutiennent l'implantation, le maintien, et la diffusion de l'intervention. Enfin, l'évaluation doit porter sur les retombées perçues par une variété d'acteurs afin d'établir un portrait des répercussions directes et indirectes de l'intervention.