Qu'est-ce qu'un audit limitant les risques, et pourquoi est-ce important ?
Dans une course décidée par 369 voix, les autorités n'avaient rien d'indépendant à recompter — parce que les machines n'avaient pas de trace papier. Cette lacune existe toujours dans les élections près de chez vous.
Il est 2 h du matin le soir des élections dans le comté de Sarasota, en Floride, et le décompte pour le 13e district du Congrès de la Floride termine son défilement à l'écran. La course se termine avec une marge de 369 voix. Mais enfoui dans les mêmes chiffres se trouve quelque chose de plus étrange : environ 18 000 bulletins dans le comté n'ont enregistré aucun choix du tout dans cette course. Pas une protestation. Pas un accident démographique. Un électeur sur huit, apparemment, a sauté le concours le plus contesté sur son bulletin.
Personne ne pouvait l'expliquer. Et personne ne pouvait le vérifier.
Les machines à écran tactile du comté — l'ES&S iVotronic — n'ont laissé aucune trace papier indépendante. Lorsque le Bureau de la responsabilité gouvernementale des États-Unis a testé ultérieurement les systèmes, il n'a pas pu identifier une défaillance de la machine qui aurait causé le sous-vote. Il a également noté, avec la litote caractéristique d'un audit fédéral, qu'une trace papier vérifiée par l'électeur « aurait pu fournir une confirmation indépendante que les écrans tactiles avaient enregistré les votes correctement ». Il n'existait pas de telle trace. Le rapport complet du GAO se trouve ici.
Dans une course décidée par 369 voix, la méthode d'audit disponible était : faire confiance à la machine.
C'était en 2006. La question pour aujourd'hui est de savoir si l'infrastructure que nous avons maintenant — bulletins papier, audits post-électoraux, les outils statistiques pour les utiliser — est réellement suffisamment robuste pour remplacer ce genre de confiance aveugle par quelque chose qu'un citoyen septique peut vérifier indépendamment. La réponse est : parfois. Dans certains endroits. Sous certaines conditions. Et l'écart entre « parfois » et « toujours » est tout le problème.
Pourquoi les audits existent du tout — et pourquoi la plupart d'entre eux sont faibles
Chaque élection produit un nombre. Ce nombre provient d'une machine, d'un décompte manuel, ou des deux. La question qu'un audit essaie de répondre est : le gagnant rapporté a-t-il réellement gagné ?
Cela semble évident. Mais les mécanismes importent énormément, car la plupart des audits post-électoraux du monde ne sont pas réellement conçus pour répondre à cette question avec une confiance statistique. Ils sont conçus pour en avoir l'air.
Le type le plus courant est l'audit à pourcentage fixe : après l'élection, les autorités extraient un pourcentage défini de bulletins — disons, 1 % ou 5 % — les examinent à la main, et comparent le résultat au décompte machine. S'ils correspondent suffisamment, tout le monde rentre à la maison. Cette approche est intuitive. Elle semble rigoureuse. Elle ne l'est pas.
Voici le problème. Un échantillon de 1 % dans une course électorale décisive et un échantillon de 1 % dans une course décidée par 0,1 % des voix accomplissent un travail statistique complètement différent. Dans la course électorale décisive, même un décompte modérément défectueux serait si évident qu'un petit échantillon le détecterait. Dans la course très serrée — celle où attraper une erreur compte réellement — ce même échantillon de 1 % pourrait avoir presque aucune chance de détecter un problème. Plus la course est serrée, plus vous avez besoin de vérifier. Un pourcentage fixe inverse la logique.
Et pourtant, les audits à pourcentage fixe restent la pratique standard dans la majorité des démocraties. L'écart entre la rigueur apparente de l'audit et son puissance statistique réelle est précisément l'endroit où une élection mal comptabilisée peut disparaître sans être remarquée.
Ce qu'un audit limitant les risques fait réellement différemment
Un audit limitant les risques, ou ALR, part de la direction opposée.
Au lieu de demander « quel pourcentage devrions-nous vérifier ? », il demande : « quelle est la probabilité maximale que nous sommes disposés à accepter qu'un mauvais résultat glisse à travers ? » Cette probabilité — la limite de risque — est fixée avant que l'audit ne commence. Le Colorado, qui a été le pionnier de cette approche, a commencé avec 9 % et l'a ensuite resserré à 3 %. Une limite de risque de 5 % signifie : si le gagnant rapporté a réellement perdu, il n'y a au maximum qu'une chance sur 20 que cet audit ne le détecte.
Les mathématiques fonctionnent ensuite à rebours à partir de cette garantie pour déterminer combien de bulletins doivent être examinés à la main. Et le résultat est contre-intuitif de la meilleure manière possible : plus la course est serrée, plus l'ALR demande un échantillon plus grand. Une course électorale décisive pourrait ne nécessiter que quelques centaines de bulletins vérifiés à la main. Une course décidée par une fraction d'un pour cent pourrait exiger un recompte manuel complet de chaque bulletin dans la juridiction — exactement ce que la Géorgie a dû faire en 2020.
L'autre ingrédient critique est un dossier papier fiable. Un ALR ne peut pas auditer un registre numérique contre lui-même. Il a besoin de bulletins physiques marqués par l'électeur — du type qu'un électeur a réellement touché — pour servir de vérité fondamentale. Le comté de Sarasota en 2006 n'avait rien de tel. Un ALR mené là aurait été mathématiquement sain et physiquement impossible en même temps.
Colorado, 2017 : le premier État à l'avoir réellement fait
Le 22 novembre 2017, le secrétaire d'État du Colorado a annoncé que l'État avait complété le premier audit limitant les risques à l'échelle de l'État de l'histoire américaine.
Ce n'est pas une affirmation banale. Beaucoup d'États ont mené des audits. Le Colorado a été le premier à en mener un qui s'accompagnait d'un niveau de confiance défini mathématiquement — un que n'importe qui, en principe, pouvait vérifier en vérifiant le travail statistique. La procédure est publique. La FAQ que le secrétaire d'État a publiée explique la méthodologie en langage clair. Les tailles d'échantillon, la limite de risque, les bulletins sélectionnés — tout documenté.
La raison pour laquelle cela importe n'est pas que l'élection de 2017 au Colorado était controversée. Elle ne l'était pas. La raison est que une méthode éprouvée dans une élection non controversée est la méthode que vous voulez avoir en attente quand celle qui est controversée arrive. Vous ne voulez pas inventer votre infrastructure d'audit la semaine suivant un résultat contesté. Le Colorado l'a construite avant d'en avoir besoin.
Les ingrédients clés que le Colorado a rassemblés : bulletins papier obligatoires (la vérité fondamentale physique), une limite de risque publique fixée avant l'élection, et un échantillon aléatoire prélevé de manière transparente et documentée. Enlevez l'un de ces éléments et la garantie statistique s'effondre.
Géorgie, 2020 : quand les mathématiques exigent un recompte manuel complet
L'ALR du Colorado en 2017 était, par chance statistique, efficace. Les marges étaient suffisamment larges qu'un nombre relativement petit d'échantillons fournissait la confiance requise.
La Géorgie en novembre 2020 n'avait pas cette chance.
La marge présidentielle en Géorgie était suffisamment serrée que lorsque les autorités ont appliqué le cadre d'audit limitant les risques, les mathématiques ne leur ont laissé aucun raccourci : pour atteindre le niveau de confiance requis, elles ont dû examiner manuellement chaque bulletin. Tous les environ cinq millions. À travers 159 comtés. En examinant 41 881 lots. En moins de six jours.
Elles l'ont fait. Georgia Public Broadcasting a rapporté que le recompte manuel a confirmé le résultat tabulé par machine, la variation entre le décompte original et le recompte manuel se situant à environ un dixième d'un pour cent. Le reportage de NPR a confirmé le résultat.
Voici ce que le cas de la Géorgie a réellement prouvé : les bulletins papier plus une méthode d'audit solide permettent à quiconque de vérifier un résultat serré, au lieu d'accepter la parole de la machine. Cinq millions de bulletins. Un processus observable et documenté. Un résultat que tout observateur au niveau du comté pouvait recouper par rapport aux totaux de sa propre juridiction.
Ce n'est pas rien. C'est énormément plus que ce que le comté de Sarasota avait en 2006 avec ses écrans tactiles sans trace papier et sa marge de 369 voix et ses 18 000 choix manquants.
Mais le cas de la Géorgie contient aussi une leçon plus subtile. La variation d'environ un dixième d'un pour cent semble petite. Elle est petite. Et dans une course de cinq millions de bulletins, elle n'a pas affecté le résultat. Mais un dixième d'un pour cent de cinq millions égale cinq mille voix. Dans une course différente — une course législative d'État, un siège de commission de comté, une course décidée par des centaines plutôt que des milliers — un taux similaire de variation du recompte manuel pourrait importer. Même l'étalon-or du recompte manuel comporte une erreur humaine irréductible. Des compteurs fatigués mal interprètent les bulletins. Les marques parasites sont interprétées différemment par différentes personnes. Les appels d'adjudication — ce qui compte comme une marque valide ? — varient d'une table à l'autre.
Ce n'est pas une critique du processus de la Géorgie. C'est un énoncé sur les limites de tout système exploité par des humains.
Michigan, 2020 : ce qui se passe quand il n'y a pas de sauvegarde avant la publication
Le comté d'Antrim, au Michigan, est un comté fidèlement républicain. Lorsque les premiers résultats non officiels la nuit du 4 novembre 2020 ont montré Joe Biden en tête d'environ 3 000 voix avec la plupart des bulletins comptabilisés, le chiffre a attiré un examen immédiat — non pas à cause de tout système d'alarme interne, mais parce que quiconque connaissait la politique du comté savait que le résultat était invraisemblable.
La cause s'est avérée être une erreur humaine. La greffière du comté Sheryl Guy avait reprogrammé certaines mais pas toutes les cartes utilisées dans les tabulateurs après un changement de dernière minute à une course locale, de sorte que certaines données de district se sont combinées incorrectement lorsque les totaux non officiels ont été compilés. Guy a dit que l'erreur était la sienne. Le compte rendu détaillé de FactCheck.org rend clair que c'était une erreur administrative, pas une conspiration logicielle. Le comté a corrigé les totaux le 5 novembre. Le résultat certifié n'a pas été affecté.
Le 17 décembre, pour régler la question définitivement, les autorités ont mené un audit manuel de chaque bulletin présidentiel du comté. Le Michigan Department of State a annoncé que le recompte manuel — 9 759 pour Trump, 5 959 pour Biden — confirmait l'exactitude des résultats électoraux.
Arrêtez-vous là. Relisez ces deux nombres. Le recompte manuel et la tabulatique machine différaient de environ une douzaine de voix sur environ 15 700 exprimées. Le Michigan Department of State a présenté ceci comme une confirmation. Le secrétaire d'État l'a appelé une affirmation de l'exactitude.
Mais que signifie réellement un écart de 12 voix ?
Dans la course présidentielle du comté d'Antrim, avec sa large marge, 12 voix est du bruit. Cela ne change pas le résultat, et cela reflète probablement exactement ce que les experts prédiraient : un mélange de mécomptes humains pendant le recompte manuel, de marques de bulletin ambiguës, et d'appels d'adjudication qui ont été jugés légèrement différemment par différents compteurs à différents moments. Le recompte manuel n'est pas un oracle parfait. C'est un processus humain très fiable mais imparfait, et son taux d'erreur — aussi petit soit-il — devient la conversation dans toute course décidée par un nombre similaire.
Le problème plus profond qu'illustre le comté d'Antrim n'est pas les 12 voix. C'est le moment avant la correction. Rien dans le compte rendu publié du comté d'Antrim ne crédite une sauvegarde interne d'avoir détecté les mauvais chiffres avant qu'ils ne soient publiés. L'erreur a surgi parce que le résultat était criant d'invraisemblance — un profil politique à l'échelle du comté que quiconque pouvait observer rendait les chiffres publiés absurdes. Une erreur plus subtile, dans une course électorale serrée à l'échelle de l'État, décalant quelques centaines de voix sans basculer l'inclinaison partisane évidente d'un comté, aurait pu passer complètement le test de vraisemblance. Vous ne pouvez pas auditer ce que vous ne pouvez pas voir.
C'est l'argument en faveur de la vérifiabilité qui ne dépend pas de l'invraisemblance comme alarme.
L'écart entre « nous avons mené un audit » et « vous pouvez vérifier l'audit »
Un ALR semble une solution complète. À bien des égards, c'est le meilleur outil de vérification post-électorale disponible à grande échelle. Mais il vaut la peine d'être précis sur ce qu'il fournit et ce qu'il ne fournit pas.
Ce qu'un ALR bien mené fournit :
- Un niveau de confiance défini et quantifié que le gagnant rapporté a réellement gagné
- Un échantillon prélevé par un processus transparent et reproductible
- Une comparaison par rapport à des bulletins physiques que les électeurs ont réellement marqués
Ce qu'un ALR bien mené nécessite toujours de vous faire confiance :
- Que les bulletins papier audités n'ont pas été altérés depuis qu'ils ont été exprimés
- Que la chaîne de contrôle de ces bulletins — les sacs scellés, les pièces verrouillées, les journaux de transfert — s'est maintenue à chaque étape
- Que la juridiction menant l'audit n'a pas commis d'erreurs dans son propre processus d'audit
Le dernier n'est pas hypothétique. Le comté d'Antrim a mené un audit manuel et a obtenu un nombre qui différait de 12 du décompte machine. La Géorgie a mené un ALR et a obtenu une variation d'environ un dixième d'un pour cent. Ce sont de bons résultats. Ce ne sont pas zéro. Et les entités vérifiant les résultats d'audit étaient, dans les deux cas, les mêmes organismes gouvernementaux dont le travail était examiné.
« L'audit a confirmé » et « le secrétaire d'État dit que c'est bon » sont des assurances, pas des preuves. Elles peuvent bien être vraies. Mais l'assurance n'est pas la vérifiabilité. La vérifiabilité signifie qu'un tiers indépendant — un chercheur, un journaliste, un citoyen septique avec une feuille de calcul — peut vérifier le travail en utilisant les mêmes données et obtenir la même réponse.
L'écart entre « nous avons mené un audit » et « vous pouvez vérifier l'audit indépendamment » est exactement l'écart que les approches basées sur le logiciel et la cryptographie existent pour combler. Des techniques comme les systèmes de vote vérifiables de bout en bout permettent aux électeurs de confirmer que leur bulletin a été comptabilisé sans révéler comment ils ont voté, et permettent à tout observateur de vérifier le résultat agrégé sans faire confiance à une seule autorité. Ce ne sont pas des théories : elles existent, et certaines juridictions utilisent déjà des versions d'entre elles.
La question n'est pas si les audits importent. Ils le font. La question est de savoir si « nous l'avons audité » est le point final, ou le début d'une norme plus élevée.
Quoi chercher dans votre propre juridiction
Avant les prochaines élections dans votre juridiction, trois questions valent la peine de connaître les réponses :
Premièrement : votre juridiction utilise-t-elle des bulletins papier vérifiés par l'électeur ? Sinon, un ALR est mathématiquement impossible. Il n'y a rien à auditer contre. C'est la situation de Sarasota. Si votre juridiction utilise toujours des écrans tactiles sans trace papier ou le vote par Internet sans dossier papier indépendant, la conversation d'audit ne peut même pas commencer.
Deuxièmement : votre juridiction mène-t-elle un audit limitant les risques, ou un audit à pourcentage fixe ? La différence importe le plus dans les courses les plus serrées — précisément celles qui génèrent le plus de préoccupations publiques. Un audit à pourcentage fixe qui inspecte 2 % des bulletins dans une course décidée par 0,1 % peut avoir presque aucune puissance statistique pour attraper un mauvais résultat. Un ALR dans la même course contiendrait soit le problème, soit augmenterait explicitement l'échantillon jusqu'à ce qu'il le fasse.
Troisièmement : les résultats de l'audit — les identifiants de bulletins échantillonnés, les totaux de recompte manuel, la comparaison par rapport aux décomptes machine — sont-ils publiés intégralement, sous une forme qu'un observateur indépendant peut vérifier ? C'est là que la plupart des juridictions, même celles qui exécutent de bons audits, restent à la traîne. Publier un communiqué de presse récapitulatif n'est pas la même chose que publier les données d'audit.
Les réponses à ces trois questions vous en disent plus sur l'intégrité réelle de votre élection locale que n'importe quelle déclaration officielle ne le fera jamais.
Lisez la version de 2 minutes des lacunes d'intégrité électorale →
Explorez les lacunes spécifiques dans votre région →
La vérité partageale : une élection qui ne peut être que de confiance — mais non vérifiée indépendamment — n'est pas une élection sécurisée. C'est une élection bien intentionnée. Ce ne sont pas la même chose, et dans une course serrée, la différence est toute l'histoire.
Sources
- Michigan Department of State — Final numbers from Antrim County audit affirm accuracy of election results
- FactCheck.org — Audit in Michigan County Refutes Dominion Conspiracy Theory
- Georgia Public Broadcasting — Risk-Limiting Audit Confirms Biden Won Georgia
- NPR — Georgia Releases Hand Recount Results, Affirming Biden's Lead
- Colorado Secretary of State — A new kind of election audit: Colorado is first to complete it
- Colorado Secretary of State — Risk-Limiting Audit (RLA) FAQs
- U.S. GAO (GAO-08-97T) via GovInfo — Testing of Voting Systems in Florida's 13th Congressional District