Organiser la possibilité d'avoir tort📋

Septième chapitre de La démocratie à l'épreuve

Une mauvaise note ne réfute pas une philosophie📋

Le chapitre 7 du traité demandait que les garanties proposées puissent échouer à leur propre examen. L'exigence est nécessaire, mais elle doit être précisée. Un score médiocre dans une consultation ne réfute pas l'idée que les personnes affectées doivent pouvoir demander des comptes. Il peut contredire une prédiction sur le fonctionnement d'un mécanisme ou révéler que l'indicateur ne mesure pas ce qu'il prétend.

Il existe donc trois échecs possibles. L'instrument échoue si deux lecteurs compétents ne peuvent appliquer ses catégories de manière suffisamment stable. Le mécanisme échoue si la garantie annoncée existe mais ne produit pas le passage attendu. La proposition politique doit être révisée si les effets recherchés sont obtenus au prix de coûts ou d'atteintes qui détruisent d'autres garanties nécessaires.

Ces échecs ne sont pas interchangeables. Changer de définition après un mauvais résultat peut être légitime si l'on corrige une erreur démontrée ; cela devient une protection de la thèse si l'on réécrit les critères pour exclure les contre-exemples. Le registre des versions rendra ce déplacement visible.

Deux codeurs doivent pouvoir diverger📋

La première étape consiste à figer un paquet de pièces et un manuel numéroté. Pour une enquête complète, deux codeurs extraient indépendamment les demandes et documentent leurs désaccords de segmentation. Le pilote Fessenheim est plus circonscrit : il prend les 22 numéros finaux du compte rendu comme unités déjà constituées, sans prétendre valider leur extraction depuis les contributions brutes. Leur liste et leur empreinte sont fixées avant les lectures indépendantes de la réponse.

La seconde étape applique indépendamment les critères de présence, délai, motivation, statut et suite aux mêmes unités. L'absence de concertation avant la remise des codes est essentielle. Deux lectures harmonisées au fil de l'eau ne mesurent pas la reproductibilité du classement ; elles produisent une décision collective différente, éventuellement utile, mais qu'il faut nommer autrement.

Le pilote portera sur les trois configurations du chapitre 4 : un dossier récent de réponse, une initiative associative et une initiative mêlant association et collectivité. Ces cas étant déjà commentés, ils servent à éprouver le manuel, pas à constituer un test aveugle de ses prédictions. Les critères révisés seront ensuite appliqués de nouveau à toutes les unités concernées.

Le pilote utilise deux agents automatisés distincts, avec sessions séparées, mêmes pièces et même manuel, sans accès aux codes de l'autre. Cette organisation produit deux lectures automatisées ; elle ne constitue ni un accord entre humains ni une indépendance de familles de modèles. Les cas déjà commentés ne sont pas des cas de validation aveugle. Les dossiers C06 et C08 restent réservés pour une lecture ultérieure, après stabilisation du manuel.

Publier l'accord avant de le fabriquer📋

L'accord brut est accompagné de l'alpha de Krippendorff ordinal pour M0 à M4 ; U est une valeur manquante, jamais un sixième échelon. La distance ordinale est fondée sur les fréquences marginales cumulées. Une analyse secondaire fusionne M3/M4 en « suffisant » et M0/M1/M2 en « insuffisant », avec alpha nominal et matrice des désaccords. Les effectifs et la couverture des paires connues sont publiés. Krippendorff, méthode et seuils de fidélité↗ (ouvre dans une nouvelle fenêtre).

Le seuil de 0,80, avec au moins 80 % d'unités conjointement codables, est fixé dans le protocole avant les deux codages. Il n'est pas abaissé après observation du résultat. S'il n'est pas atteint, on publie les deux lectures et leurs divergences, sans score arbitré présenté comme stabilisé ; le manuel doit être révisé et un nouveau tour indépendant mené avant un usage confirmatoire. C06 et C08 ne sont pas ouverts pour ajuster les critères aux résultats souhaités. Un alpha indéfini faute de variation reste indéfini : un accord brut de 100 % n'autorise pas à lui attribuer la valeur 1. Avec 22 unités, l'accord obtenu reste celui d'un petit pilote.

L'accord sur la segmentation précède celui sur les notes : deux codeurs peuvent sembler parfaitement d'accord parce qu'ils ont évalué des demandes différentes. On conservera donc le nombre de demandes appariées, les regroupements et les objets repérés par un seul lecteur. Les métriques de notes seront calculées sur les unités communes explicitement définies.

Après cette mesure, une discussion documentée peut expliquer les divergences. Un éventuel arbitrage constitue une troisième lecture, sans modifier les fichiers initiaux. Il ne relève pas l'alpha calculé sur ces fichiers. En cas d'échec du seuil, une synthèse qualitative peut rester utile, mais elle ne remplace pas une fidélité insuffisante par un chiffre unique.

Préparer les observations qui dérangent📋

Les attentes suivantes sont proposées pour guider la recherche de cas adverses. Elles ne sont pas des effets déjà établis.

Une observation adverse ne suffit pas toujours à conclure ; elle suffit à interdire de présenter l'attente comme universelle. Il faut également rechercher l'observation favorable que la critique aurait intérêt à ignorer : une institution existante qui motive un refus solide, donne accès aux pièces et corrige une erreur sans nouvelle architecture constitutionnelle.

Le problème causal demeure📋

Si un projet change après un débat, le débat peut avoir contribué à ce changement. Il peut aussi y avoir une évolution des prix, une autorisation refusée, un changement politique ou une contrainte technique nouvelle. La succession des dates est une condition de certaines attributions ; elle n'en est pas la preuve suffisante.

Pour chaque transformation revendiquée, l'enquête reconstruira une chaîne : demande antérieure, réponse explicite, acte, mise en œuvre et autres facteurs connus. Une attribution par le responsable sera conservée comme une déclaration ; une concordance de sources renforcera le dossier sans faire disparaître les explications concurrentes.

Les comparaisons entre familles proches pourront éprouver des mécanismes, pas isoler mécaniquement un effet moyen. Douze cas sélectionnés, dont deux anciens, n'autorisent ni estimation représentative ni conclusion nationale sur « l'efficacité de la participation ». Des résultats identiques peuvent d'ailleurs provenir de processus différents : pression publique, obligation juridique, intérêt du porteur ou action d'une autre autorité.

Ne pas laisser la moyenne choisir les citoyens📋

Un bon R peut concerner surtout des organisations professionnelles, des collectivités ou des associations bien équipées. On décrira donc les catégories d'initiateurs et les ressources connues sans inventer la composition sociale des participants à partir de leurs noms ou de leur manière d'écrire. Les individus qui ne laissent aucune trace publique demeurent une limite explicite.

Il faudra aussi examiner la distribution des effets. Une correction peut satisfaire des participants présents et déplacer les dommages vers d'autres territoires ou d'autres générations. Le contrôle des droits et des effets différés accompagne les taux ; il ne se déduit pas d'eux. Un R élevé et un E élevé peuvent coexister avec une frontière injustifiée.

L'enquête réussira d'abord si elle permet de dire précisément ce qui manque, ce qui fonctionne et ce qu'il faut abandonner. Son résultat ne sera pas jugé à la ressemblance entre ses tableaux et l'intuition initiale.

Chapitre précédent — La plateforme devant un tiers · Chapitre suivant — Ce que la mesure rouvre