Monographies

Audyssées

Située en Haute Vallée de l’Aude, la CTE Audyssées est une SCIC conventionnée depuis 2020. Elle est un centre de réflexion et d’incubation de projets éthiques et écologiques.

Son objet et son modèle économique sont entièrement dévoués à l'expérimentation du RTE, et liés à la mise en place d'un Territoire zéro Chômeur de Longue Durée (TZCLD).

Le dispositif a pour spécificité de reposer sur une convention avec le département qui permet à la CTE de compléter la rémunération des bénéficiaires du RSA avec le RTE.

La coopérative propose des cycles d’ingénierie de projet, qui comprennent plusieurs étapes distinctes : des Audyssées thématiques, des ateliers d'émergence de projets, et la mise en place de comités de pilotage pour aboutir au déploiement de projets de RTE. Le cycle ne contient pas de phase d’évaluation formalisée, mais il est question d’introduire un cadre qui le permette.

Entretiens réalisés avec Joëlle Chalavoux, Co-présidente, et Raphaël Soulier, coordinateur d’Audyssées.

Version actualisée le 31 mai 2024

1. VISION ET OBJECTIFS DE L'EVALUATION

Chez Audyssées, l’évaluation englobe un domaine vaste qui sert à mieux appréhender et à mesurer les effets d’une action. Dans la pratique, elle prend la forme d’un ensemble de critères regroupés dans des tableaux d’indicateurs permettant d’atteindre des objectifs.

L’impact est un terme qui est utilisé au sein de la CTE. Il renvoie à ce qui est “source de changement”. L’impact doit être visible, donc chiffrable ou établi sur la base de critères d’évaluation et doit se questionner à plusieurs moments afin d’observer une évolution, par exemple dans les relations interpersonnelles.

“On a collectivement à répondre à des enjeux avant même de parler de transition, et pour qu'on puisse tous parler de la même chose,  il faut des évaluations crédibles et communicables”

La démarche d’évaluation est considérée comme importante, notamment au moment de la phase de développement, pour prendre du recul et montrer aux partenaires l’utilité du projet. Elle est également utile pour l’amélioration continue du dispositif, afin de rester dans une approche d'expérimentation scientifique s'appuyant sur des données mesurables et comparables adaptées aux objectifs. Cette phase reste compliquée à appréhender, car l’évaluation d’impact se base sur les enjeux qui touchent les financeurs qui établissent eux-mêmes leurs critères. Il est d’ailleurs important de préciser qu’à la différence des financeurs, chez Audyssées : “Nous revendiquons un droit à l'échec, inhérent aux projets de transition. C’est une caractéristique que l’on omet trop souvent”.

En termes d’indicateurs d’impact, ce qui importe chez Audyssées est de démontrer la dynamique écologique territoriale, notamment l’attractivité du territoire, sa “capacité d’hospitalité”. Selon eux, il est possible de l’estimer en s’attachant, par exemple, à analyser le nombre de jeunes qui trouvent un travail qui fait sens pour eux. “L’indicateur de plaisir, la notion de réseau, le sentiment d’appartenance, ce sont ces évolutions que l’on tente de qualifier” : Au-delà de l’impact économique, l’impact social est intéressant à observer, et cela à deux niveaux : D’une part pour les RTE, et d’autre part, pour les équipes permanentes .

Un autre indicateur important concerne le fait de parvenir à faciliter la coopération, à dynamiser la filière d'acteurs économiques autour de la transition écologique. C’est la notion d’animation territoriale qui est  importante ici, dans laquelle la CTE a un rôle à jouer.

“Pour l’instant les évaluations sont “subies”. Mais, en prenant nos critères d'évaluation de projet, nous pourrions être dans l’analyse de l'opérationnel plus que dans des résultats”.

L’enjeu de l’évaluation est de parvenir à toucher la commande publique avec des demandes de prestation justifiées par la valeur apportée au territoire : Inverser la tendance en formulant une demande plutôt que répondre à un appel à projets. Des échanges ont débuté avec la communauté de communes sur ce qu'ils peuvent aller chercher en financement pour qu’Audyssées intervienne en prestation. Le Directeur Général des Services semble dans une démarche de coconstruction et une vision à long terme. On observe ici qu’une autre façon de gérer peut être acceptée. La vision de “citoyens experts” est entendue, et représente une option pour les collectivités qui sont confrontées à des difficultés auxquelles elles ne savent pas répondre. Aujourd’hui, on observe qu’elles commencent à s’engager dans d’autres réflexions : “C’est exactement ce que nous recherchons et qui nous permet d'intégrer les sphères de l'impact territorial, qui est notre objectif de départ”.

Depuis peu, Audyssées se relie au dispositif TZCLD sur le volet d’insertion professionnelle : l’impact du territoire pourra être évalué conjointement ou en parallèle, en combinant les effets observés dans le déploiement conjoint des deux dispositifs et leur imbrication.

2. PRATIQUES, OUTILS, DISPOSITIFS D'ACTEURS

Outils :

• Lors du montage du projet : Des fiches métiers avaient été rédigées et il pourrait être intéressant de les comparer avec ce qui est observé aujourd’hui pour identifier les écarts dans les estimations et les définitions. Cela pourrait être un indicateur intéressant pour réaliser en quoi ce qui avait été projeté s’est concrétisé dans la pratique ou non, et pourquoi.

• Au quotidien : Pour la gestion de la coopérative, ce sont les retours d’expériences qui sont favorisés, sans qu’il n’y ait de réels indicateurs ou quelconque formalisation. Des outils d'évaluation sont établis avec différents critères sociaux, économiques et environnementaux. Il font l'objet d'un travail de recadrage du processus de RTE. Cela se fait toujours de manière informelle.

• Au cours des ateliers d’émergence de projets : Un diagramme de Kiviat a été élaboré pour sélectionner les projets de RTE, sur la base de huit critères, pour visualiser les aspects positifs des projets et écarter les domaines non concernés, et questionner l’apport à l’économie locale et à la personne. Dans les faits il n’est pas utilisé, c’est par l’intelligence collective, sans cadre méthodologique que les décisions se prennent “selon les appétences de chacun”. Avançant sans méthodologie partagée, l’équipe est néanmoins parvenue à identifier que son besoin s’oriente vers une évaluation de la démarche plutôt que du résultat, ce qui importe est de comprendre par quel processus le dispositif peut se déployer et les conséquences générées.

Ce qui fonctionne :

• Les Audyssées mensuelles, et de manière générale les rencontres, les participations aux foires, et l’axe communication autour ces évènements qui est à soigner pour les rendre visibles. L’embauche d’un chargé de communication s’est avérée concluante, voire indispensable.

Ce qui peut être amélioré :

• Les cycles d'ingénierie de projets  doivent être réorganisés, notamment le format d’ateliers d’émergence, indépendant des audyssées thématiques avec des embryons de projets et des candidats au RTE et à la participation aux comités de pilotage indépendants.

“On est en recherche d’évaluation plus cadrée, il faut doubler, garder ce format et ajouter quelque chose qui nous dépasse, même si c’est de l’autoévaluation, pour se décentrer, nous permettre de sortir de nos œillères. Et pour nous évaluer nous-mêmes”.

Illustration des principales dynamiques partenariales à l’œuvre  dans la démarche

3. CONCLUSION

Chez Audyssées, l’équipe a démontré une capacité à proposer un système d’ingénierie et une mobilisation du territoire adaptés pour démontrer la plus-value du projet. Les pratiques évaluatives existent pour réfléchir aux pratiques et se réajuster si besoin, mais elles sont en cours de formalisation. La question du cadre posé par les personnes qui pilotent la coopérative est un enjeu important, car si l’aspect informel de certaines pratiques est revendiqué, l’expérience à démontré qu’il était nécessaire d’introduire un regard extérieur notamment par la mobilisation d’un conseil scientifique pour assurer une neutralité et introduire une certaine rigueur dans les cadres relationnels au sein du collectif, et ainsi éviter les difficultés dans la coordination interne de la coopérative.

Un lien entre le dispositif d’accompagnement et le dispositif de suivi et d’évaluation peut permettre, de l’identification des porteurs de projets à la qualification du projet, d’analyser les impacts et de les démontrer avec plus de cohérence.  C’est pourquoi l’introduction de l’axe évaluatif dans le cycle d’accompagnement des porteurs de projets fait partie des réflexions.

Besoins pour cheminer vers un référentiel commun :

• Déterminer une ligne directrice avec les mêmes questionnaires pour avoir un outil commun afin de favoriser la cohésion entre les différentes CTE
• Elaborer un budget contributif pour les gens qui participent à la démarche d’évaluation, pour créer des interactions sans verticalité

• Proposer une vraie expertise sur l’animation de la démarche et l’analyse des données, avec indépendance et neutralité, pour optimiser la compréhension des réponses et leur mise en application

• Impulser ce travail dès que possible, en 2025 au plus tard
• Faire valider par Sophie Swaton une définition commune du RTE. Notamment en réfléchissant à la façon dont le RTE peut être adaptable à des structures qui ne sont pas des CTE
• Réfléchir à l’institutionnalisation du RTE, pour le faire entrer dans le domaine public. Avoir des ambassadeurs régionaux, un véhicule régional qui anime différentes CTE par exemple, c'est-à-dire penser au format essaimage. L’évaluation peut aussi servir à considérer l’approche globale.
• Créer de la proximité, être dans la co-construction, sans lourdeur ou bureaucratie.