[PDF] EVALUATION BILAN/SUIVI INDICATEURS - Oriv Grand Est

View - Download EVALUATION BILAN/SUIVI INDICATEURS - Oriv Grand Est

Previous PDF

Next PDF

ORIV Alsace - Novembre 2007 Note évaluation, bilans, indicateurs 1

EVALUATION, BILAN/SUIVI, INDICATEURS

N

OTION EVALUATION

L"évaluation, c"est la production d"un jugement de valeur concernant une politique publique. Elle vise à mesurer les effets de la politique évaluée.

"L"évaluation d"une politique publique (...) a pour objet de rechercher si les moyens juridiques,

administratifs ou financiers mis en oeuvre permettent de produire les effets attendus de cette

politique et d"atteindre les objectifs qui lui sont assignés". [ décret du 22 janvier 1990]

Evaluer une politique publique, c"est d"abord en mesurer l"efficacité à l"aide d"indicateurs de

performance pour, dans un second temps, en apprécier la pertinence. Donc l"évaluation des politiques publiques présente une double dimension : - quantitative : elle mesure les effets de l"action publique en comparant ses résultats aux objectifs assignés et aux moyens mis en oeuvre, notamment à l"aide d"indicateurs de performance ; - qualitative : elle porte un jugement sur la pertinence des objectifs et donc, éventuellement, peut conduire à en réviser le choix. Principaux critères d"évaluation d"une politique publique

Parmi les contributions essentielles du Conseil scientifique de l"évaluation au début des années 90,

il faut incontestablement citer la définition des critères d"évaluation des politiques publiques.

Six critères simples ont ainsi été définis pour aider le commanditaire et le chargé d"évaluation à

caractériser les principales "qualités" d"une "bonne" politique (voir le Petit guide de l"évaluation des

politiques publiques publié en 1996 à la Documentation française). Ainsi, la Charte française de l"évaluation des politiques publiques

1 précise, dans son préambule, que

" l"évaluation vise à produire des connaissances sur les actions publiques, notamment quant à leurs

effets, dans le double but de permettre aux citoyens d"en apprécier la valeur et d"aider les

décideurs à en améliorer la pertinence, l"efficacité, l"efficience, la cohérence et les impacts. »

Cohérence

(dans la conception et la mise en oeuvre) : les différents objectifs sont-ils cohérents entre eux ? Les moyens juridiques, humains et financiers mis en place sont-ils adaptés à ces objectifs ?

La cohérence entre les orientations stratégiques du CUCS et les finalités de la politique de cohésion sociale

Par exemple : Les actions du CUCS en matière d'habitat ont-elles été mises en place de façon complémentaire et

cohérente avec les autres dispositifs (PRU par exemple) ?

Pertinence : une politique se justifie très généralement par l"identification d"un "problème

de société" auquel les pouvoirs publics se sentent tenus de faire face. Une politique sera dite pertinente si ses objectifs explicites sont adaptés à la nature du (des) problème(s) qu"elle est censée résoudre ou prendre en charge.

La pertinence des objectifs et des actions par rapport aux besoins et aux enjeux territoriaux

révélés par le diagnostic initial.

Par exemple : La mise en place de nouvelles actions éducatives pour les adolescents a-t-elle permis de

rapprocher les jeunes des activités socio éducatives jugées jusqu'ici peu attractives?

Efficacité

: dans quelle mesure les effets propres de la politique sont-ils conformes à ces objectifs ?

L"efficacité des actions réalisées, qui vise à identifier si les résultats attendus sont ou non atteints.

Par exemple : Les actions d'accompagnement vers l'emploi ont-elles permis d'orienter un plus grand nombre de

bénéficiaires vers des situations d'emploi ou de formation qualifiante?

1 Cf. le site de la Société Française de l"Evaluation : www.sfe.asso.fr

ORIV Alsace - Novembre 2007 Note évaluation, bilans, indicateurs 2

Efficience

: les ressources financières mobilisées par la politique ont-elles été bien utilisées ? Les résultats de la politique sont-ils à la mesure des sommes dépensées ?

L"efficience cherche à établir puis à apprécier le rapport coût-efficacité, au regard des enjeux et des finalités

du CUCS.

Faisabilité : les conditions de mise en oeuvre

Par exemple : Quelles ont été les conditions de mise en oeuvre (moyens, compétences, information, participation,

...) qui ont permis l'amélioration des conditions de vie des habitants (tranquillité) ? Quelles sont celles qui ont

manqué ou se sont révélées défaillantes ?

Impact

(effectivité) : quelles sont les conséquences globales de la politique pour la société ? Ces conséquences sont-elles bénéfiques ?

L"identification des impacts, qui consiste à apprécier les changements structurels constatés sur le territoire,

ainsi que les changements induits dans les pratiques sociales ou institutionnelles

Par exemple : Les différentes actions relatives à la prévention de la délinquance, l'éducation et la gestion urbaine

de proximité ont-elles permis d'améliorer la tranquillité et la vie collective dans les quartiers ?

Diagnostic

=> enjeux

Objectifs

= résultats visés

Budget etmoyens

CUCS /

Projet

urbain

Résultats

constatés

Effets

constatés cohérence pertinence efficience impacts

Objectifs

opérationnelles

Programme

d'actions /

Résultats attendus

Source : guide méthodologique de l"évaluation des CUCS - DIV, août 2007 Conditions d"un processus évaluatif " optimum »

L"évaluation est donc un processus continu.

Il suppose de concevoir un dispositif d"évaluation précisant : - les modalités d"investigation et de recueil des données, - de formulation d"un avis collectif - et de prise en considération de ces éléments dans l"action.

Pour toutes ces raisons, l"évaluation (telle qu"elle est requise actuellement le plus souvent) doit

être un dispositif concomitant à l"action et non conclusif. effectivité + efficacité (réalisations) (résultats) ORIV Alsace - Novembre 2007 Note évaluation, bilans, indicateurs 3 L"évaluation suppose de recueillir des informations puis de les interpréter, de les analyser.

Par ailleurs, l"évaluation doit être conçue comme une démarche collective car elle repose sur la

mobilisation des acteurs tant au niveau du recueil de l"information, qu"au niveau de l"interprétation

et de la réappropriation des éléments issus de l"évolution. L"évaluation, démarche collective, est

portée par une instance d"évaluation.

QU"EST-CE QU"UN INDICATEUR ?

Un indicateur est une variable, une donnée dont certaines valeurs sont significatives par rapport à

la problématique traitée. La notion d"indicateur renvoie immédiatement à deux aspects

inséparables : celui du choix de l"indicateur et ensuite de son interprétation.

Un indicateur n"est qu"une représentation partielle et approximative d"un phénomène. Il dépend

beaucoup de la méthode de construction adoptée. Les indicateurs ne constituent pas une mesure des actions. Ils peuvent être considérés comme des éléments, des indices des effets.

Il faut faire attention de ne pas assimiler l"indicateur avec le phénomène qu"il est censé

représenter. D"autant qu"une grande partie des indicateurs relève de l"exploitation de fichiers de

gestion (exemple fichier de gestion de l"ANPE pour les Demandeurs d"Emploi en Fin de Mois). Si du

fait de leur actualisation périodique ils offrent l"avantage d"une information récente et d"une

approche temporelle, il faut également se rappeler qu"elles relèvent le plus souvent d"une

prestation. Ces indicateurs sont précieux mais il faut rester conscient de ce biais. Les types

d"information, les catégories retenues et le degré de précision sont déterminés par les impératifs de

gestion. D"autre part, la population prise en compte dans les fichiers varie en fonction du champ de

compétence de l"organisme. Ainsi les fichiers CAF permettent d"obtenir des éléments extrêmement

importants mais seulement pour les bénéficiaires d"allocations. Selon les organismes l"unité de base

ne sera pas la même (pour les impôts : le foyer fiscal, pour la CAF : le ménage allocataire). Enfin il

s"agit de données construites dans une logique administrative, de ce fait elles sont fortement

sensibles aux variations législatives et réglementaires (il faut tenir compte de ces éléments lors de

l"analyse). La dernière limite repose sur le fait que les fichiers permettent d"établir la photographie

de la population à un moment donné mais ne permettent généralement pas l"étude des trajectoires

individuelles qui reposent sur des approches qualitatives et rétrospectives.

Au delà de ces aspects, la réalité est multiple et relative. Ce qui signifie qu"un même événement,

une même évolution voire le plus banal des constats n"aura pas la même signification selon la

position que l"on occupe. " Toute action peut avoir des effets multiples, contradictoires dont le sens est différent pour chaque catégorie d"acteur »

2. " Toute action doit être saisie à travers un

ensemble de variables irréductibles les unes aux autres, chacune d"elles ayant elle-même des

significations multiples »

3. Or derrière la question de l"interprétation se profile celle de l"action.

Ainsi " l"ensemble des données produites contribuent à révéler certains problèmes ou à en prendre

la mesure, mais elles ne disent rien de l"objectif à atteindre »

4. Les auteurs soulignent par ailleurs

que " la statistique qui mesure des écarts ne suffit pas à justifier une action visant à les réduire ».

Donc pour éviter les abus de sens, chaque fois qu"un indicateur est observé dans le temps, il s"agit

de voir le sens à donner à l"évolution constatée, d"émettre des hypothèses.

Les indicateurs n"ont pas de sens en eux-mêmes. Il est nécessaire de le replacer dans son contexte.

quotesdbs_dbs7.pdfusesText_5

[PDF] Evaluation, certification

[PDF] Evaluation, certifications et le Cadre européen commun de référence

[PDF] Evaluation, financement et transmission d`entreprise

[PDF] Evaluation-Environnementale-Atlas - Gestion De Projet

[PDF] Evaluation.1 : Structure de l`atome CORRECTION - Asthme

[PDF] Evaluation.4 CORRECTION QCM : Bonne réponse - Asthme

[PDF] Evaluation.5 Durée : 45 min Nom : Prénom : Structure électronique d - Asthme

[PDF] EVALUATIONdes - Anciens Et Réunions

[PDF] Evaluations comprehension de texte ( PDF

[PDF] Evaluations de l`UICN des propositions d`inscription de biens

[PDF] Evaluations des mesures à prendre en urbanisme pour améliorer

[PDF] Evaluations génétiques laitières : changement de base et

[PDF] Evaluations of WebbIE, a web navigator for blind

[PDF] Evaluationsforschung und Programmevaluation im Gesundheitswesen

[PDF] EVALuENT (évaluation des usages des ENT)