[PDF] Les 50 mots de lévaluation





Previous PDF Next PDF



Annexe 2

Épreuve orale d'informatique et de sciences du numérique (ISN) Première partie : Évaluation d'un projet et soutenance orale (notée sur 8 points).



TOWARDS BETTER EVALUATION IN THE SDG ERA

Plus ou moins de temps et de ressources peuvent être consacrés à chaque critère. Page 14. PERTINENCE. L'intervention répond-elle au problème?



Ergonomic Criteria for the Evaluation of Human-Computer Interfaces

cadre de la conception de critères ergonomiques pour l'évaluation des interfaces ergonomic quality of an interface comes from the strategy adopted in ...



Élaboration de critères de qualité pour lévaluation et lamélioration

Clinical expertise in the era of evidence-based medicine and patient choice. ACP J Club. 2002; 136 : A11-4. 3. Campbell SM Brasapenning J



TOWARDS BETTER EVALUATION IN THE SDG ERA

appropriation. Inclusion de l'égalité homme- femme. Transformation et impacts. Limitations: les critères et l'evaluation de qualité.



Les 50 mots de lévaluation

Évaluations ex ante in itinere et ex post. établissement font de ce critère un objet décisif de l'évaluation. Si la réussite des élèves est un.



Ergonomic Criteria for the Evaluation of Human-Computer Interfaces

Des criteres ergonomiques pour l'évaluation et la conception d'interfaces utilisateurs [Ergonomic criteria for the evaluation and design of user interfaces]. In 



Broad consultation - OECD DAC Evaluation Criteria vQC

CONSULTATION SUR LES CRITERES D'EVALUATION CAD DE L'OCDE (JUILLET 2018) A reform of DAC criteria is an opportunity to the general improvement of.



Recommandations pour lévaluation de la sévérité des insuffisances

Méthodes Doppler pour l'évaluation des in- Les critères pour ces mesures maxi- ... de chaque lésion valvulaire et fournit les critères et ap-.



(Référentiel Evaluation fonctionnelle de l™AVC)

Critère 8 : une évaluation qualitative des fonctions du membre supérieur est A performance test for assessment of upper limb function in physical ...



IDENTIFYING EVALUATIVE CRITERIA - SAGE Publications Inc

The evaluative criteria are most relevant in five of the Key Evaluation Checklist (KEC) checkpoints: Consumers where we identify who might be affected by the evaluand; Values where we explain broadly how we define what is “good” (or what is “valuable”); Process Evaluation where we eval- uate the content and implementation of an evaluand;



Better Criteria for Better Evaluation - OECD

The criteria are used in evaluation to: Support accountability including the provision of information to the public; Support learning through generating and feeding back findings and lessons 13 The criteria are also used beyond evaluation – for monitoring and results management and for strategic planning and intervention design 14



Evaluation Models Approaches and Designs

Evaluation Models Approaches and Designs BACKGROUND This section includes activities that address • Understanding and selecting evaluation models and approaches • Understanding and selecting evaluation designs The following information is provided as a brief introduction to the topics covered in these activities EVALUATION MODELS AND



Searches related to critere evaluation isn PDF

Grille de compétence et évaluation en ISN Le BO Bulletin officiel de l’éducation nationale n°18 du 03/05 2012 définit une grille de compétences et d’évaluation pour l’ISN Les compétences au nombre de cinq sont les suivantes : C1 : Décrire et expliquer une situation un système ou un programme

How are criteria used in evaluation?

The criteria are used in evaluation to: Support accountability, including the provision of information to the public; Support learning, through generating and feeding back findings and lessons. 13. The criteria are also used beyond evaluation – for monitoring and results management, and for strategic planning and intervention design. 14.

What are the evaluation criteria for International Development Cooperation?

Applying Evaluation Criteria Thoughtfully Relevance, coherence, effectiveness, efficiency, impact, and sustainability are widely used evaluation criteria, particularly in international development co?operation. They help to determine the merit or worth of various interventions, such as strategies, policies, programmes or projects.

What is applying criteria thoughtfully?

Applying criteria thoughtfully Principle one stresses that the criteria should be used thoughtfully. In practice, this means thinking critically about which criteria are most useful to support high-quality, useful evaluation that will be valuable to the intended users.

Should impact evaluation be built into the evaluation design?

As a guiding rule, evaluating impact typically requires more resources and considerably more primary data than for the other criteria, and should only be built into an evaluation design when these resources are likely to be available or can be obtained for this purpose. On the other hand, because it focuses on if and

Les 5

0 mots de l'évaluation

et leur application à l'évaluation des établissements scolaires suivis de L'évaluation de politique publique en 4 schémas

L'évaluation des établissements est désormais une réalité depuis la rentrée 2020, une réalité

nouvelle parce que jusqu'à présent l'accent avait été mis sur l'évaluation des personnes plutôt

que sur celle des structures et parce que la définition des concepts clés de l'évaluation n'avait

pas forcément été partagée.

Le présent glossaire, établi à partir de définitions tirés de différents ouvrages (dont la liste figure

à la fin de ce document) et enrichi par l'expérience de l'évaluation des établissements, vise à

rendre pleinement accessibles ces concepts sur lesquels se fondent la démarche évaluative et les textes et ressources du Conseil d'évaluation de l'École. Pour chacun des 50 termes, nous proposons une définition technique et, le cas échéant, des précisions quant à l'application du concept à l'évaluation des établissements. En fin de glossaire, quatre schémas permettent de représenter visuellement les liens entre certains des concepts-clés.

Les 50 mots de l'évaluation 2

Conseil d'évaluation de l'École Février 2022

Les 50 mots de l'évaluation

1. Action............................................................................................................................................... 4

2. Audit ................................................................................................................................................ 4

3. Besoin .............................................................................................................................................. 4

4. Cadre de référence (référentiel) ..................................................................................................... 4

5. Cahier des charges (de l"évaluation externe) .................................................................................. 5

6. Charte de déontologie ..................................................................................................................... 5

7. Cohérence........................................................................................................................................ 5

8. Compétence .................................................................................................................................... 6

9. Conflit d"intérêts .............................................................................................................................. 6

10. Contexte ........................................................................................................................................ 6

11. Contrôle ......................................................................................................................................... 7

12. Crédibilité ...................................................................................................................................... 7

13. Critère ............................................................................................................................................ 7

14. Données ......................................................................................................................................... 8

15. Durabilité ....................................................................................................................................... 8

16. Effet ............................................................................................................................................... 8

17. Efficacité ........................................................................................................................................ 9

18. Efficience ....................................................................................................................................... 9

19. Enquête ......................................................................................................................................... 9

20. Entretien ........................................................................................................................................ 9

21. Évaluation .................................................................................................................................... 10

22. Évaluations

ex ante, in itinere et ex post ..................................................................................... 10

23. Év

aluation participative ............................................................................................................... 11

24. Fiabilité ........................................................................................................................................ 11

25. Finalité ......................................................................................................................................... 11

26. Impact .......................................................................................................................................... 11

27. Impartialité .................................................................................................................................. 12

28. Indicateur .................................................................................................................................... 12

29. Inspection .................................................................................................................................... 12

30. Jugement évaluatif (jugement sur la valeur) ............................................................................... 12

31. Labellisation ................................................................................................................................. 12

32. Légitimité ..................................................................................................................................... 13

Les 50 mots de l'évaluation 3

Conseil d'évaluation de l'École Février 2022

33. Méthode (ou méthodologie) ....................................................................................................... 13

34. Neutralité .................................................................................................................................... 13

35. Norme .......................................................................................................................................... 13

36. Objectif ........................................................................................................................................ 13

37. Parties prenantes ........................................................................................................................ 13

38. Performance ................................................................................................................................ 14

39. Pertinence ................................................................................................................................... 14

40. Pluralité ....................................................................................................................................... 14

41. Qualité / Démarche d"assurance qualité ..................................................................................... 15

42. Question évaluative ..................................................................................................................... 15

43. Réalisation ................................................................................................................................... 15

44. Reddition de compte / Redevabilité............................................................................................ 16

45. Respect ........................................................................................................................................ 16

46. Responsabilité ............................................................................................................................. 16

47. Résultat ........................................................................................................................................ 16

48. Supervision .................................................................................................................................. 17

49. Transparence ............................................................................................................................... 17

50. Triangulation ............................................................................................................................... 17

L"évaluation de politique publique en 4 schémas ................................................................................. 18

Schéma 1

- Chaîne et questions évaluatives ................................................................................ 18

Schéma 2

- Types d"évaluation ..................................................................................................... 18

Schéma 3

- Différences contrôle, pilotage, audit et évaluation ................................................... 19

Schéma 4

- Résultats, effets, impacts ........................................................................................... 19

Sources du glossaire .............................................................................................................................. 20

Les 50 mots de l'évaluation 4

Conseil d'évaluation de l'École Février 2022

1. Action

Instrument conçu et mis en place en vue de produire une évolution, par exemple contribuer à réaliser un projet ou un programme, donner un avis ou un conseil. Des actions coordonnées constituent un plan d'actions. L"action est à placer dans une chaîne évaluative qui comprend les besoins, les objectifs, les actions et les résultats, effets et impacts.

L'évaluation de l'établissement débouche

entre autres sur la formulation d'un plan d'actions,

c'est-à-dire d'un ensemble cohérent de réalisations programmées autour d'axes stratégiques

pour améliorer le service public d'éducation et la qualité de vie dans l'établissement. Pour une représentation de la chaîne évaluative, voir schéma 1 en fin de glossaire.

2. Audit

Dispositif au sein d'une organisation visant à assurer la maîtrise des risques liés à la gestion des

politiques dont elle a la charge. La maîtrise des risques est un processus visant à identifier,

évaluer, gérer et contrôler les événements ou les situations potentiels (risques) afin de fournir

une assurance raisonnable quant à la réalisation des objectifs de l'organisation. L'audit s'assure

que les dispositifs de contrôle interne de l'organisation sont effectifs, efficaces et permanents. Il peut être interne ou externe, s'il est confié à un organisme indépendant.

L'évaluation externe des établissements est précisément à distinguer de l'audit en ce qu'elle ne

constitue pas un contrôle.

Voir schéma 3 en fin de glossaire.

3. Besoin

Enjeu, manque ou difficulté qui affecte les bénéficiaires d'un service public et qu'une action

vise à résoudre ou à surmonter. Les critères de pertinence et d'utilité rapportent respectivement les objectifs et les résultats de l'action aux besoins pour émettre un jugement

évaluatif. Il s'agit de savoir si, à partir des besoins identifiés, les objectifs sont adéquats et les

résultats au rendez-vous.

Voir schéma 1 en fin de glossaire.

4. Cadre de référence (référentiel)

Cadre d'analyse des actions et des données recueillies aux fins de l'évaluation et à partir duquel

un jugement peut être formulé. C'est un système de référence qui permet de confronter les

indicateurs (éléments représentatifs d'une situation réelle) aux critères et aux normes ou valeurs de référence dans un contexte donné.

S'agissant de l'évaluation des établissements, le cadre de référence est le cadre de mission de

service public, constitué par la politique éducative nationale (textes législatifs, réglementaires,

circulaires, notes, etc.), le projet académique et le projet d'établissement.

Voir schéma 1 en fin de glossaire.

Les 50 mots de l'évaluation 5

Conseil d'évaluation de l'École Février 2022

5. Cahier des charges (de l'évaluation externe)

Instrument qui

définit le travail que devra réaliser l'équipe d'évaluation et son calendrier. Il rappelle le cadre et précise le champ de l 'évaluation. Il annonce les principales finalités de

l'évaluation et précise les questions posées. Il rappelle les connaissances disponibles et trace

les grandes lignes de la méthode d'évaluation. Il décrit la répartition du travail et des

responsabilités entre les personnes qui participent au processus d'évaluation. Il fixe le calendrier et les ressources allouées. Il précise les qualifications attendues des équipes candidates ainsi que les critères qui seront utilisés pour sélectionner l'équipe d'évaluation. Le cahier des charges de l'évaluation externe des établissements, qui est une annexe du cadre d'évaluation, fixe, pour garantir la crédibilité de l'opération, le protocole que les évaluateurs externes doivent suivre. Il est disponible sur la page du Conseil d'évaluation de l'École.

6. Charte de déontologie

Outil qui précise les principes régissant la pratique de l'évaluation des politiques et programmes

publics, laquelle s'exerce dans un cadre institutionnel explicite. La charte est un guide de

principes généraux reconnus dans le milieu professionnel de l'évaluation. Son respect constitue

une aide pour prévenir les difficultés qui pourraient survenir faute d'avoir clarifié au départ les

questions de principe et de déontologie. Elle contribue à assurer la légitimité des évaluateurs.

Ses principes fondateurs sont la

pluralité, l'impartialité, la compétence et le professionnalisme, le respect des personnes et de l'établissement, la transparence et la responsabilité.

Dans le

cadre de l'évaluation des établissements, une charte a été adoptée par le Conseil

d'évaluation de l'École. Elle est annexée au cadre de l'évaluation et disponible sur la page du

Conseil. Chaque évaluateur la signe et s'engage à la respecter.

7. Cohérence

Critère de jugement qui interroge les rapports entre les divers éléments constitutifs d'une action (adaptation des moyens aux objectifs) tant dans sa conception que dans sa mise en oeuvre.

On distingue la

cohérence interne, qui s'intéresse à la correspondance entre les différents

objectifs d'une même intervention, et la cohérence externe, qui s'intéresse à la correspondance

entre les objectifs de l'intervention et ceux des autres interventions publiques qui interagissent avec elle. L'absence de cohérence (qui produit des injonctions contradictoires) peut conduire à la neutralisation des effets attendus des actions entreprises. La diversité et la multiplicité des actions menées par les différents acteurs au sein d'un établissement font de ce critère un objet décisif de l'évaluation . Si la réussite des élèves est un

objectif commun a priori, elle doit être confortée par la mise en cohérence effective et explicite

des actions engagées.

Voir schéma 1 en fin de glossaire.

Les 50 mots de l'évaluation 6

Conseil d'évaluation de l'École Février 2022

8. Compétence

Aptitude spécifique mise en oeuvre par les personnes participant au processus d'évaluation à

titre professionnel. Elle porte sur la conception et la conduite de l'évaluation, la qualité de la

commande, les méthodes de collecte de données et d'interprétation des résultats. Ces personnes ont le souci d'améliorer et de mettre à jour leurs compétences.

Les évaluateurs

s'appuient sur des méthodes reconnues, notamment celles en usage dans la communauté internationale de l 'évaluation. Ils utilisent ces méthodes en explicitant leurs limites.

La compétence d'évaluateur se construit grâce à une formation aux niveaux national (avec le

CEE et

l'IH2EF, Institut des Hautes Études de l'Éducation et de la formation) et académique, formation suivie et mise en pratique selon les protocoles définis et en application des principes de déontologie fixés.

9. Conflit d'intérêts

Situation qui apparaît

lorsque l 'objectivité ou le jugement d'un évaluateur est compromis.

L'apparence de conflit d'intérêts est généralement considérée comme aussi grave que

l'existence avérée d'un conflit. On distingue le conflit d'intérêts objectif, lorsqu'il y a

effectivement conflit d'intérêts, et le conflit d'intérêts subjectif, lorsqu'il y a suspicion ou perception de conflit, non nécessairement corroboré par la réalité des faits.

Le cahier des charges de l'évaluation externe détaille les risques de conflit d'intérêts et préconise

les points à vérifier. Le risque de conflit d'intérêts est la raison pour laquelle la possibilité est

donnée à l'établissement de demander un changement de composition de l'équipe d'évaluateurs, à condition que cette demande soit justifiée. Cette possibilité, naturelle en valuation, protège l'équipe des évaluateurs. Dès lors que la composition de l'équipe est validée par l"établissement, sa légitimité est entière.

10. Contexte

Environnement dans lequel se trouve l'objet à évaluer. La caractérisation du contexte est une

des étapes de la description de l"objet, préalable nécessaire à la définition de questions

évaluatives

pertinentes car adaptées au contexte, en même temps qu'adossées à la norme ou cadre de référence. Dans le cadre de l'évaluation des établissements, le contexte est le point d'entrée incontournable de l'évaluation. C'est son examen minutieux qui permet de comprendre les établissements et de poser les questions évaluatives pertinentes recouvrant l'ensemble des

quatre domaines d'analyse définis par le cadre. On distingue le contexte externe à l'Éducation

nationale (données socio-économiques, géographiques et culturelles) et le contexte interne (fruit des décisions des tutelles de l'établissement quant au bâti, à l'équipement, aux services, l'affectation des personnels et des élèves).

Voir schéma 1 en fin de glossaire.

Les 50 mots de l'évaluation 7

Conseil d'évaluation de l'École Février 2022

11. Contrôle

Vérification de la légalité, de la régularité et de la conformité de la mise en oeuvre d'actions et

de ressources. Le contrôle juge en fonction de critères et de normes générales, connues et

clarifiées à l 'avance, applicables à l'ensemble d'un domaine. Le contrôleur a une connaissance approfondie des normes et recherche en priorité les erreurs et les dysfonctionnements. Le contrôle de gestion est un processus continu permettant d'assurer un suivi régulier de

l"activité. Il est effectué sur la base des données renseignées dans les systèmes d'information,

qui permettent d"élaborer des états synthétiques, des indicateurs d'activité, des analyses de

coût et des agrégats. Ces outils peuvent être rassemblés dans un tableau de bord pour faciliter

la prise de décision.

L'évaluation des établissements n'est en aucun cas un contrôle. Il ne s'agit pas de vérifier la

conformité de ce que fait l'établissement mais de l'observer, d'en comprendre la log ique

contextuelle et de dégager, avec l'établissement, des pistes de progrès sur la base d'une analyse

des actions entreprises et des effets produits.

Voir schéma 3 en fin de glossaire.

12. Crédibilité

Qualité d'une évaluation qui s'applique tant au processus d'évaluation lui-même (pluralité,

indépendance et légitimité des évaluateurs, pertinence des questions posées, qualité et transparence des protocoles) qu'aux conclusions produites, qui favorise leur acceptation et leur appropriation.

13. Critère

Caractère ou propriété de l'objet à évaluer sur la base de laquelle est formulé un jugement

évaluatif. Angle de vue adopté par des acteurs pour regarder et apprécier un objet. Un critère

d

'évaluation doit être explicite, c'est-à-dire qu'il doit faire clairement apparaître ce qui permet

de formuler le jugement sur l"objet. Il doit être accompagné d"une norme. Toutefois, pour

chaque évaluation, des critères plus spécifiques peuvent être construits et négociés avec les

acteurs concernés.

Un objet est généralement jugé sur plusieurs critères. Cohérence, pertinence, efficacité,

efficience et utilité (lorsque l'impact obtenu correspond aux besoins et aux problèmes à résoudre) sont les principaux critères qui orientent les questions d'évaluation.

Le cadre d'évaluation

, les guides d'auto-évaluation et les boîtes à outils élaborés par le Conseil

d"évaluation de l"École contiennent de nombreuses questions évaluatives générales ou plus

spécifiques qui mettent en oeuvre les critères mentionnés supra et dont peuvent s'inspirer les

établissements et les équipes d'évaluateurs externes. Pour une représentation des principales

questions rapportées à la chaîne évaluative, des besoins aux effets et impacts, voir schéma 1 en

fin de glossaire.

Les 50 mots de l'évaluation 8

Conseil d'évaluation de l'École Février 2022

14. Données

Éléments permettant de caractériser un objet. Les données peuvent être primaires ou secondaires, quantitatives ou qualitatives.

Les données primaires sont recueillies directement sur le terrain, grâce à une enquête réalisée

par l'équipe d'évaluation auprès des publics ou des acteurs concernés par l'intervention. Elles

jouent un rôle important dans l'apport cognitif de l'évaluation. Elles s'ajoutent aux données

secondaires, déjà disponibles au début de l'évaluation (recherches et évaluations passées,

données de suivi, statistiques) et sont utiles pour analyser les impacts et les besoins de façon approfondie.

Les données secondaires sont des informations préexistantes, rassemblées et interprétées par

l'équipe d'évaluation. Elles comprennent des informations issues du système de suivi, des informations produites par les offices statistiques et des informations provenant de recherches et d'évaluations antérieures.

Les données quantitatives sont chiffrées et sont de ce fait souvent perçues comme objectives.

Les données qualitatives sont d'essence verbale et traduisent un point de vue sur un objet. Elles sont souvent perçues comme subjectives. La distinction est cependant complexe, certaines

données chiffrées pouvant être fondées sur le comptage de réponses qualitatives aux questions

d'une enquête. De plus, l'interprétation des données quantitatives est, elle, de nature qualitative. L'état de l'établissement, les réponses aux enquêtes et aux entretiens, lors du recueil de points de vue, les comptes-rendus d'observation, etc. constituent les données sur lesquelles se fondent d'une part les établissements pour conduire l'auto-évaluation, d'autre part les évaluateurs externes dans leur analyse.

15. Durabilité

Probabilité de continuation des effets ou des réalisations résultant d'une action après la fin

d'une intervention, potentiellement sur le long terme. Situation par laquelle les avantages nets sont donc susceptibles de résister aux risques (effets négatifs, blocage, rejet). Les éléments suivants peuvent être examinés : viabilité opérationnelle des mécanismes, prise

en charge institutionnelle des activités, maintien de la coopération en fonction de l'évolution

du contexte local, possibilité de reproduire ou de généraliser l'opération. On parle également de pérennité ou de viabilité.

16. Effet

Changement directement observable, attendu ou non, positif ou négatif, attribuable directement ou indirectement à une action ou une intervention et identifiable à court ou moyen terme. Les effets comprennent les résultats et les impacts de l'intervention. L'analyse des indicateurs, lorsqu'ils sont disponibles, les observations et le recueil du point de vue des acteurs permettent à l'établissement et aux évaluateurs de qualifier et de quantifier les effets observés.

Voir schémas 1 et 4 en fin de glossaire.

Les 50 mots de l'évaluation 9

Conseil d'évaluation de l'École Février 2022

17. Efficacité

Appréciation du degré de réalisation des objectifs d'une action ainsi que ses éventuels effets

non attendus (effets positifs, négatifs ou d'aubaine). Le terme est également utilisé comme système de mesure globale (ou comme jugement) du mérite et de la valeur d'une activité : mesure selon laquelle une intervention a atteint, ou est en train d'atteindre, ses principaux objectifs pertinents, de façon durable et soutenable en termes de ressources, et avec un impact positif. Il s"agit de comparer les résultats (effets) obtenus aux résultats attendus, afin de déterminer ceux qui sont imputables à l'intervention et à elle seule (effet propre).

Un indicateur d'efficacité se calcule en rapportant un indicateur de réalisation, de résultat ou

d 'impact à un objectif quantifié.

Voir schéma 1 en fin de glossaire.

18. Efficience

Rapport entre les ressources mises en oeuvre et les effets d'une intervention. L'efficience suppose d"avoir fait la preuve de l"efficacité. Une intervention plus efficiente est une

intervention efficace (produisant des résultats) au moindre coût, c'est-à-dire économe en

ressources.

Un indicateur d'efficience se calcule par division entre les ressources mobilisées et la quantité

d 'effet obtenu.

Voir schéma 1 en fin de glossaire.

quotesdbs_dbs44.pdfusesText_44
[PDF] comment trouver le nord avec une montre

[PDF] isn competences

[PDF] ou est le nord par rapport a ma position

[PDF] comment trouver le nord avec le soleil

[PDF] indique-moi le nord

[PDF] fiche evaluation epi

[PDF] grille evaluation epi college

[PDF] evaluer les epi

[PDF] grille évaluation oral crpe

[PDF] comment évaluer les epi

[PDF] grille d evaluation de l oral

[PDF] comment argumenté

[PDF] programme maths cm2 2016

[PDF] programme maths cm2

[PDF] grille evaluation eoc anglais