Les indicateurs comme exemple de méthode … · Les indicateurs comme exemple de ... nombreux par...
Transcript of Les indicateurs comme exemple de méthode … · Les indicateurs comme exemple de ... nombreux par...
Les indicateurs comme exemple de méthode d'évaluation de la durabilité
Robert Joumard [email protected]
1. Définitions 2. Qualités 3. Indicateurs dans le champ du développement durable 4. Méthodes de prise en compte conjointe d'indicateurs
15e École d'été en évaluation environnementale, IEPF et SIFÉE, Douala, Cameroun, 5-9 septembre 2011
Développement durable : 6 dimensions, multiples sous-dimensions (environnement : 49), plusieurs paramètres / sous-dimension
Pour évaluer la durabilité de projets, d'actions ou de politiques données par mesure, enquête ou modélisation : innombrables par ex., sous-dimension effet de serre appréciable par le biais
des émissions de multiples gaz des températures des surfaces de couverture neigeuse des niveaux des mers des nombres d'espèces disparues ou en voie de l'être...
RJ 1
1
Problématique (1/2)
Pour évaluer la durabilité de projets, d'actions ou de politiques l'outils "indicateur" souvent utilisé pour rendre compte de telle
ou telle sous-dimension en synthétisant éventuellement de nombreux paramètres
Dans l'exemple de l'effet de serre, outil "indicateur d'effet de serre"
Distinguer critère et indicateur Critère : ce qui nous préoccupe, par exemple l'effet de serre Indicateur : ce qui est censé représenter le critère, par exemple
le "potentiel de réchauffement climatique"
RJ 1
1
Problématique (2/2)
Définition des indicateurs (1/3)
Un indicateur peut être un outil de mesure, indiquant des variations d'un phénomène
mesuré selon certaines dimensions un marqueur ou une sentinelle, indiquant la présence ou
l'absence de quelque chose un outil d'aide à la décision permettant l'action une combinaison de ces trois derniers
Finalement, un indicateur est une variable, basée sur des mesures, représentant aussi précisément que possible et que nécessaire un phénomène
RJ 1
1
Un indicateur indique ou représente quelque chose, un phénomène
Le phénomène représenté doit toujours être défini précisément Le PIB est un indicateur de l'activité économique marchande,
et non un indicateur de bien-être économique, de richesse ou de développement
C'est un modèle, mais un modèle très simple calculable simplement : opérateurs mathématiques basiques utilisable par un non spécialiste du phénomène interprétable intuitivement
RJ 1
1
Définition des indicateurs (2/3)
Un indicateur n'est pas la réalité, mais seulement une représentation de celle-ci s'insère ainsi dans une analyse plus large, une structuration de
la réalité, par ex. une définition du développement durable Les indicateurs expriment des valeurs ou des préférences Lorsqu’ils sont puissants, institutionnalisés
structurent pour une part les cadres cognitifs influent sur les comportements cas du PIB aujourd'hui
RJ 1
1
Définition des indicateurs (3/3)
Un indicateur peut être formulé de manière simple ou complexe
Variable simple : par ex. moyenne spatio-temporelle de la concentration de particules de moins de 10 mm de diamètre – PM10 – comme indicateur de pollution de l'air
Combinaison de variables diverses et notamment d'indicateurs (ex. : indice de développement humain IDH qui combine indicateurs de richesse économique, d'éducation et de santé) = indicateur composite ou agrégé
RJ 1
1
Indicateur simple ou composite (1/4)
Indicateur composite souvent compris comme agrégeant des indicateurs sans
dimension commune (IDH...) Indicateur agrégé
agrège plutôt des indicateurs de même dimension (coût externe, potentiel de réchauffement climatique...)
Pas de consensus -> indicateur "composite ou agrégé" La dimension commune peut être fallacieuse
MIPS (Material Input per Service-unit) somme les ressources (abiotiques, biotiques, déplacements de terre, eau, air) utilisées pour produire une unité de produit ou de service
eau = 96% du total -> indicateur de consommation de ressources (en fait d'eau) et non d'impact environnemental RJ
11
Indicateur simple ou composite (2/4)
Avantages Peut synthétiser des problèmes
complexes ou multidimensionnels pour la décision
Plus facile à interpréter Comparaisons plus faciles Réduit la taille des données Facilite la prise en compte du
développement durable en politique
Facilite la communication grand public
Indicateur simple ou composite (3/4) Avantages et inconvénients des indicateurs composites
RJ1
1
Avantages Peut synthétiser des problèmes
complexes ou multidimensionnels pour la décision
Plus facile à interpréter Comparaisons plus faciles Réduit la taille des données Facilite la prise en compte du
développement durable en politique
Facilite la communication grand public
Indicateur simple ou composite (3/4) Avantages et inconvénients des indicateurs composites
RJ1
1
Inconvénients Peut conduire à une décision
erronée si mal construit Peut amener à des conclusions
simplistes Instrumentalisation si mode de
construction obscur et données de mauvaise qualité
La sélection et la pondération des indicateurs peut être l'objet d'un jeu politique
Cacher des faiblesses sur certaines dimensions
Agrégation = étape de simplification de variables multiples en une variable plus synthétique représentative de son objet
La mécanique d'agrégation doit combiner 3 exigences représentativité du phénomène représenté légitimité de la mécanique d'agrégation simplicité, gage de facilité d'utilisation et d'appropriation par
l'utilisateur Agrégation = mode particulier d'analyse multicritère
caractérisé par sa simplicité / autres modes autres modes AMC : méthodes de hiérarchisation (ELECTRE...),
approches basées sur les fonctions d'utilité, méthodes de programmation continue... RJ
11
Indicateur simple ou composite (4/4)
Représentation Validité
Reproductibilité Sensibilité
Opérationnalité Simplicité
Disponibilité des données Éthique
Aide à la décision Transparence
Interprétabilité Liable à un objectif Lié à une décision
Qualités d'un indicateur (1/2)
RJ 1
1
Critères de mesure : indicateurs évalués quant à leur représentativité de ce qu'ils sont censés mesurer (aussi précis que possible et nécessaire)
Critères d'opérationnalité : indicateurs évalués quant à leur facilité d'utilisation, de monitorage pratique et continu
Critères d'applicabilité : indicateurs évalués quant à leur pertinence et leur utilité dans l'aide à la décision
3 critères de représentativité validité : doit réellement mesurer ce qu'il est censé mesurer reproductibilité: un recalcul doit donner la même valeur sensibilité : capacité à traduire les variations importantes
3 critères d'opérationnalité simplicité : simple et utilisable avec des moyens limités disponibilité des données d'entrée (coût, délai) éthique : compatible avec les droits humains et les valeurs
4 critères d'aide à la décision transparence : facile à comprendre et critiquable par l'utilisateur interprétabilité : interprétation intuitive et sans ambiguïté potentiellement lié à un objectif : performance d'une mesure par rapport à un objectif lié à une décision : mesure des facteurs modifiables par une décision
RJ1
1
Qualités d'un indicateur (2/2)
3 à 6 familles de critères économie élargie, justice sociale, environnement, modes de
décision (?), besoins et droits (?), long terme (?) doivent être soigneusement distingués, exhaustifs, non
redondants pour assurer la transparence de l’évaluation À chaque critère, un ou plusieurs indicateurs quantitatifs
ou qualitatifs Indicateurs composites agrégeant plusieurs dimensions
RJ 1
1
Indicateurs dans le champ du développement durable (1/14)
Indicateurs de la dimension économique élargie produit intérieur brut ou PIB
oublie les activités hors échange monétarisé (activités domestiques, économie informelle, troc)
strictement économique revenu national brut ou RNB indice de développement technologique indice de développement humain IDH indice de développement humain hybride, proche de l'IDH
RJ 1
1
Indicateurs dans le champ du développement durable (2/14)
Indice de développement humain, indicateur composite de la dimension économique élargie pour un pays, mis au point par le PNUD en 1990 et amélioré depuis
Combine pour un pays l'espérance de vie à la naissance l'accès à l'instruction combinant durées moyenne et attendue
de scolarisation le logarithme du revenu national brut par habitant à parité de
pouvoir d'achat Chacune des 3 composantes normalisée par une plage de
variation (généralement 0 – maximum constaté) Agrégation par la moyenne géométrique
RJ 1
1
Indicateurs dans le champ du développement durable (3/14)
Indicateurs de justice sociale nombreux, élémentaires et agrégés indice de Gini, indice de pauvreté humaine, ou de pauvreté
multidimensionnelle, indice de santé sociale (2), BIP 40, indice de sécurité personnelle…
un peu arbitraires et imprécis (données, disponibilité des statistiques), utiles pour mettre en évidence les écarts importants
Indicateurs d'environnement nombreux par impact, mais de faible qualité, hors effet de serre composites : coûts externes, MIPS, ecological scarcity, ReCiPe,
empreinte écologique
RJ 1
1
Indicateurs dans le champ du développement durable (4/14)
Indicateurs dans le champ du développement durable (5/14) Définition de l'empreinte écologique
Surface terrestre et aquatique biologiquement productive nécessaire à la production des ressources consommées et à l'assimilation des déchets produits par une population, indépendamment de la localisation de cette surface basée sur les consommations d'une population et non les
productions d'un territoire Exprimée en hectares globaux, comparable à la surface
réelle d'un territoire 6 types d'usage : cultures agricoles, forêts, pâturages,
pêche, infrastructures, séquestration du carbone RJ1
0
Empreinte écologique des Canadiens par type de consommation ���selon le décile de revenu (hag/pers) (Mackenzie et coll., 2008) RJ
11
Indicateurs dans le champ du développement durable (6/14) Empreinte écologique par type de consommation
(WWF et coll., 2006) RJ 1
1
Indicateurs dans le champ du développement durable (7/14) Empreinte écologique et IDH par pays en 2003
Indicateurs de long terme
Indicateurs des modes de décision / démocratie éventuellement pouvoirs élus
Indicateurs des besoins et droits pratiquement inexistants
RJ 1
1
Indicateurs dans le champ du développement durable (8/14)
€
ILT = min biocapacité moy. mondialeempr. écol.
, 1⎛
⎝ ⎜
⎞
⎠ ⎟
Indicateurs des dimensions économique élargie et justice sociale Indice de développement humain ajusté aux inégalités IDHI
mis au point en 2010 par le PNUD réduit l'IDH selon les inégalités de répartition de ses différentes
dimensions au sein de la population inégalité de répartition mesurée par le rapport moyenne géométrique /
moyenne arithmétique au sein de la population
RJ 1
1
Indicateurs dans le champ du développement durable (9/14)
RJ 1
1
Indicateurs dans le champ du développement durable (10/14)
Les populations de l’Afrique subsaharienne présentent le plus d’inégalités dans le développement humain
Déficits dus à l'inégalité touchant l'IDH et ses composantes, par région (Klugman, 2010)
Indicateurs des dim. économique élargie et justice sociale IDHI indicateur sexospécifique de développement humain, qui
diminue l'IDH selon les inégalités sociologiques entre femmes et hommes
indice de revenu ajusté aux inégalités Indicateur des dim. justice sociale et environnement
Happy Planet Index, combinant satisfaction de vie, espérance de vie à la naissance, empreinte écologique
Indicateur des dimensions justice sociale et démocratie indicateur de la participation des femmes
RJ 1
1
Indicateurs dans le champ du développement durable (11/14)
Indicateurs intégrant les dimensions économie, justice sociale et environnement épargne nette ajustée = épargne nationale nette + dépenses
courantes d’éducation - rente tirée des ressources naturelles - dommages résultant de la pollution mondiale par le CO2
indicateur (monétaire) de progrès véritable (Genuine Progress Indicator) : agrège des indicateurs de consommation, de travail domestique, d'inégalité, et des coûts externes
indice de bien-être économique : agrège flux de consommation courante, stocks de ressources productives, coûts externes environnementaux monétarisés, répartitions de revenus, pauvreté et inégalité, et variables de sécurité
RJ 1
1
Indicateurs dans le champ du développement durable (12/14)
Indicateurs dans le champ du développement durable (13/14) Indicateur de développement durable IDD4
indicateur à 4 dimensions IDD4 =
moyenne géométrique
(Indicateur de Long Terme f(EÉ),
(8,5 - Empreinte Écologique),
ind. d'égalité IDH Inégalité / IDH,
Indice de Développement Humain)
RJ 1
1
+ les relations entre dimensions
(non substituabilité…) Composantes normées par leur plages de variation
RJ 1
1
Indicateurs dans le champ du développement durable (14/14) IDH et Indicateur de dévt durable IDD4 / PIB
RJ 1
1
Indicateurs dans le champ du développement durable (14/14) IDH et Indicateur de dévt durable IDD4 / PIB
Le choix des composantes est primordial à priori selon le cadre conceptuel choisi (par ex. développement
durable à 6 dimensions, environnement à 49 chaînes de causalités) en fonction de l'importance de chacun dans le cas considéré en fonction de l'existence d'un indicateur ad hoc et de données
d'entrée Le choix, l'élimination de composantes doit être transparent
La pondération des indicateurs a une grande influence sur le résultat
pondérations explicites et transparentes toute pondération demande une normalisation préalable selon une
unité claire et propre au paramètre à évaluer
RJ1
0
Méthodes de prise en compte conjointe d'indicateurs (1/6)
Transformation des variables pour représenter l'objet indicateur économique au sein de l'IDH : logarithme du PIB
par habitant à parité de pouvoir d'achat du pays Méthodes de normalisation des indicateurs
nécessaire pour tenir compte des indicateurs les plus faibles par essence (contre-exemple du MIPS)
par des facteurs d'équivalence (cas de l'empreinte écologique) en normalisant par une plage de variation, réelle ou artificielle
(cas de l'IDH)
RJ 1
1
Méthodes de prise en compte conjointe d'indicateurs (2/6)
Représentation graphique d'indicateurs multiples ���sous forme de radar (2 jeux de 8 indicateurs)
RJ 1
1
Méthodes de prise en compte conjointe d'indicateurs (3/6)
Quel cas (I ou II) a les indicateurs les plus élevés ?
Représentation graphique d'indicateurs multiples ���sous forme d'histogramme
RJ 1
1
Méthodes de prise en compte conjointe d'indicateurs (4/6)
Cas I, II, III et IV identiques Radar sensible à l'ordre de présentation Histogramme préférable
la méthode d'agrégation implique des propriétés de ce qu'on agrège
Sommation (éventuellement pondérée) des indicateurs de base implique la substituabilité entre indicateurs de base peu admissible pour un indicateur de DD multidimensionnel (DD faible) admissible éventuellement pour représenter une dimension du DD facile à comprendre
Moyenne géométrique (éventt pondérée) des indicateurs de base utilisé dans l'indicateur de développement humain (IDH) 2010 favorise la convergence des indicateurs de base admet une certaine substituabilité particulièrement sensible aux faibles valeurs des indicateurs difficile à comprendre
RJ 1
1
Méthodes de prise en compte conjointe d'indicateurs (5/6)
Méthodes de prise en compte conjointe d'indicateurs (6/6) Moyenne géométrique / arithmétique
RJ 1
1
IDH 2010 ancienne méthode (moyenne arithmétique)
IDH
201
0 no
uvel
le m
étho
de
(moy
enne
géo
mét
rique
) Indice de développement humain IDH par pays (Klugman, 2010)
La méthode d'agrégation a une forte influence sur le niveau et le classement des objets mesurés par l'indicateur
Un indicateur est un outil de mesure simple et accessible à tous
1ère exigence : définir précisément ce que représente un indicateur définir les caractéristiques de l'objet représenté
Construire un indicateur demande de multiples compétences (interdisciplinarité) dans le domaine considéré (connaître le processus de l'impact
sur l'environnement par ex.) en aide à la décision en mathématiques (simples)
RJ 1
1
Les indicateurs comme exemple de méthode d'évaluation de la durabilité Conclusion (1/3)
Indicateurs monodimension Quelques indicateurs économiques, généralement
surinterprétés Nombreux indicateurs de justice sociale Peu d'indicateurs d'impact environnemental de qualité très peu d'indicateurs des autres dimensions du développement
durable Indicateurs pluridimensionnels
Quelques indicateurs agrégeant 2 ou 3 dimensions du développement durable
Peu d'indicateurs de développement durable
RJ 1
1
Les indicateurs comme exemple de méthode d'évaluation de la durabilité Conclusion (2/3)
La méthode d'agrégation n'est pas neutre Il est difficile de parler d'un secteur (de production)
durable (car non autonomie) indicateurs de développement durable liés à un territoire,
plutôt macroscopiques (nationaux) ou propres aux consommations d'une population, quelque soit
sa taille (cas de l'empreinte écologique)
RJ 1
1
Les indicateurs comme exemple de méthode d'évaluation de la durabilité Conclusion (3/3)
Indicateurs : pour en savoir plus… Rapport COST 356 :
Joumard R. and Gudmundsson H. (eds), 2010. Indicators of environmental sustainability in transport: an interdisciplinary approach to methods. INRETS ed., Recherches R282, Bron, France, 422 p. http://cost356.inrets.fr/pub/reference/reports/Indicators_EST_May_2010.pdf ou http://hal.archives-ouvertes.fr/hal-00492823/fr/
Joumard R., 2011. Évaluer la durabilité. In Durable ? Éd. Ifsttar, R284, Bron, France, § 4.3, p. 175-213.
RJ 1
1
Merci pour votre attention
RJ1
1