Cadre d'évaluation en Europe

Plusieurs projets européens ont été consacrés à l’évaluation : DRIVE EVA (1992), CORD (1994) qui abordait les impacts sur la sécurité, le confort et l’environnement, et puis CONVERGE (4ème PCRD ou Programme Cadre de Recherche et Développement) donnant une série de

recommandations en vue de bâtir un plan de validation rigoureux. Ces programmes sont décrits succinctement dans ce qui suit :

II.4.1. Guide EVA

Dans le cadre du programme européen de recherche et développement DRIVE, le projet 'EVA' vise à définir une méthode d'évaluation applicable à tous les projets de télématique routière et permettant de les comparer aux projets de création d'infrastructures routières.

Les catégories d’évaluation identifiées dans le cadre du projet EVA sont résumées dans le tableau suivant :

Catégories opérationnelle stratégique Socio-économique Type d’évaluation évaluation technique de

l’efficacité intrinsèque

évaluation des stratégies à long terme à un niveau

politique

Evaluation économique des impacts sociétaux

Objectif détermination de la meilleure solution

technique

estimation du potentiel et des risques à long terme

indication de la valeur sociétale

Variantes à évaluer options techniques individuelles

toutes les technologies projets impliquant des investissements publics Perspectives Contrôle et optimisation

d’une solution technique

Bâtir les bases d’un développement cohérent

Allocation optimale de ressources limitées Résultat Enseignements sur la

performance technique du système

Appréciation des retombées à long terme

Identification des gains et des pertes pour la société

Tableau n° II.3 – Catégories d’évaluation (source : document EVA, 1991)

Ainsi, le guide méthodologique 'EVA Manual' (EVA, 1991) aborde l'aspect socio-économique de l'évaluation des applications télématiques. Il préconise l'utilisation d'une analyse coût-avantages lorsque tous les gains de l'action ou du système évalué, peuvent être 'monétarisables'. Dans le cas contraire, une analyse multicritères de type coût-efficacité est recommandée.

Le guide 'EVA Manual' est considéré comme un outil d'aide à la décision en matière de choix d'investissements entre, par exemple, modifier les caractéristiques géométriques d'une route et déployer des actions d'exploitation capables d'optimiser le fonctionnement du réseau existant. Les objectifs généraux définis dans le guide 'EVA' sont : l'amélioration de l'efficacité, de la sécurité et de l'environnement. Ceux-ci ont été déclinés selon plusieurs critères d'évaluation classiques puisque déjà utilisés dans le domaine de l'investissement routier. On peut citer : les coûts d'utilisation du véhicule, le temps de parcours, le confort, la sécurité, la pollution de l'air et le bruit.

La méthode 'EVA' associe à chaque critère, des indicateurs caractéristiques en vue d'effectuer une évaluation socio-économique du projet considéré. Elle propose une liste de valeurs monétaires (en ECU 1991 sur la base de 1 ECU = 1 Euro = 6.55957 F).

Le temps passé et les équivalents monétaires sont définis d’une manière plus fine que la méthode française. Les tableaux suivants montrent les valeurs retenues.

Type de temps Motif travail Motif autre

Préparation du voyage 8.5 2.1

Attente ou recherche 21.8 8.5

Voyage 17 4.3

Tableau n° II.4 - Valeurs pour les personnes en € / personne ×××× heure (source : EVA, 1991)

Type du véhicule commercial Valeur

Taxi 5.25

Autobus 51.82

Véhicule lourd 1ère catégorie 20.33

Véhicule lourd 2ème catégorie 32.14

Tableau n°II.5 – Valeurs pour les véhicules commerciaux en € / véhicule ×××× heure (source : EVA,1991) Les coûts d'exploitation des véhicules sont estimés en fonction de la distance parcourue. Les valeurs sont exprimées en € par véhicule × km

Type de véhicule Valeurs

Taxi 0.09

Autobus 0.45

Véhicule lourd 1ère catégorie 0.14

Véhicule lourd 2ème catégorie 0.27

• Consommation de carburant : 0.36 € / litre

Les valeurs de la vie humaine sont données dans le tableau ci-dessous :

Tué 744 128 € / personne

Blessé grave 105 586 € / personne

Blessé léger 7079 € / personne

Tableau n°II.7 – Coûts de l’insécurité en € (source : EVA, 1991)

Monoxyde de carbone 3 Oxydes d’azote 442.97 Hydrocarbures 347.98 Dioxyde de soufre 239.98 Plomb 16900.89 Particules 226.98

Tableau n°II.8 – Coûts de la pollution atmosphérique en € / tonne émise (source : EVA, 1991)

II.4.2. Guide CONVERGE

Le projet CONVERGE définit les grandes lignes du plan d’évaluation auxquels doivent satisfaire les consortiums en charge de projets. Des travaux similaires ont été menés à une échelle nationale : c’est le cas de la France par le SETRA et du Royaume Uni par le TRL (Transport Research Laboratory).

Le document 'CONVERGE', plus général que le manuel 'EVA', présente un cadre méthodologique pour l'évaluation et la validation de diverses applications télématiques relatives à tous les modes de transport (route, rail, air, voie d'eau, transport multimodal, ..).

Ce projet a été développé afin que les projets de recherche et démonstration adoptent une approche commune dans les méthodes d'évaluation et de validation et en particulier pour permettre une 'transférabilité' des résultats d'applications similaires. Ceci signifie, pour divers projets comparables, que les impacts d'un système puissent être généralisés de façon cohérente et efficace sans tenir compte d'aucune spécificité.

Le guide 'CONVERGE' donne des recommandations détaillées sur l'identification des besoins des utilisateurs ; la définition des objectifs d'évaluation et de validation ; l'estimation qualitative des impacts potentiels ; la sélection et la définition de méthodes d'évaluation et de validation ; la description de la procédure détaillée de validation qui est appelée approche à douze étapes : définition des indicateurs, définition de la situation de référence, description de la méthode de recueil de données, spécification des conditions de mesure, considérations statistiques, définition du

plan de mesure et considération de l'intégrité de la mesure et / ou de la simulation et enfin l'analyse des données et la présentation des résultats.

II.4.3. Méthode des 12 étapes

Cette approche expérimentale vise principalement à mesurer les critères d’efficacité de la manière la plus précise possible. Pour ce faire, le passage par les étapes suivantes est fortement recommandé :

1. Définition du système devant être testé (quel type d'action d'exploitation ?) 2. Définition du type de comparaison (quelle situation de référence ?)

3. Définition des indicateurs et des critères de réponse correspondants

4. Définition du contexte dans lequel le système doit être testé et identification des attributs du contexte (heure, jour de la semaine, mois conditions météorologiques,...)

5. Définition des interactions entre le système et les attributs du contexte 6. Définition des moyens de mesure des critères de réponse

7. Traitement de la réponse 8. Définition d’un site de test 9. Considérations statistiques

10.Elaboration du planning de l'expérience

11.Analyse préalable de la robustesse des tests (certains effets externes ou biais peuvent induire des irrégularités dans le processus d’évaluation)

12.Organisation pratique stipulant la spécification de l’équipement et d’autres moyens pour mesurer la réponse du système.

Néanmoins, cet ordre d’étapes peut être revu selon le système testé et le type d’évaluation que l’on veut réaliser : technique, impact, a priori, a posteriori,..