Embed Size (px)
Citation preview
Page 1 sur 26
ELECTIONS DES CONSEILLERS DES FRANÇAIS DE L’ETRANGER ET DES DELEGUES CONSULAIRES
VOTE ELECTRONIQUE – COMPTE-RENDU DU SECOND TEST GRANDEUR NATURE
20 - 26 novembre 2019
1. Introduction ..........................................................................................................2
a. Objectif du second test grandeur nature ................................................................................................... 2
b. Périmètre du second test grandeur nature ............................................................................................... 2
c. Dates clés ................................................................................................................................................... 2
d. Constat général .......................................................................................................................................... 3
2. Parcours électeur ................................................................................................3
a. Communication auprès des électeurs........................................................................................................ 3
b. Identification de l’électeur ......................................................................................................................... 3
c. Code de confirmation ................................................................................................................................ 3
d. Assistance aux électeurs ............................................................................................................................ 4
e. Statistiques ................................................................................................................................................. 5
3. Cérémonies ...........................................................................................................5
a. Organisation ............................................................................................................................................... 5
b. Contrôles exercés par les membres du bureau du vote électronique ....................................................... 6
c. Exercice de gestion d’une crise .................................................................................................................. 6
4. L’après vote ...........................................................................................................6
a. Téléchargement des listes d’émargement ................................................................................................. 6
5. Annexes ..................................................................................................................8
a. Annexe 1 : Statistiques de l’envoi de sms .................................................................................................. 8
b. Annexe 2 : Statistiques de l’assistance .................................................................................................... 16
c. Annexe 3 : Résultats du scrutin test ........................................................................................................ 17
d. Annexe 4 : Statistiques de l’enquête de satisfaction ............................................................................... 23
Page 2 sur 26
1. Introduction
a. Objectif du second test grandeur nature
Le test grandeur nature de novembre 2019 a eu pour objectif de simuler de bout en bout l’élection
dans des conditions proches de l’élection consulaire qui aura lieu en mai 2020 (volumétrie réelle de
1,3 millions d’électeurs inscrits, répétition des cérémonies, application des procédures).
Ce test a également permis de vérifier la robustesse technique de l’application. Des tests de
vulnérabilités et d’intrusions ont été effectués avant et pendant le vote. Les tests d’intrusion
permettent de découvrir des vulnérabilités sur le système d’information audité et de vérifier leur
exploitabilité et leur impact dans les conditions réelles d’une attaque sur le système d’information.
b. Périmètre du second test grandeur nature
Le périmètre du second test grandeur nature est le suivant :
- 1 257 767 électeurs inscrits sur le fichier des électeurs
- 12 943 électeurs testeurs
- 12 640 électeurs disposant d’une adresse électronique
- 12 222 électeurs disposant d’un numéro de téléphone
- 130 circonscriptions électorales dont 107 circonscriptions de liste, 22 circonscriptions uninominales
et 1 circonscription sans candidature
- 207 circonscriptions consulaires
- 213 bureaux de vote
c. Dates clés
- Lundi 16 septembre : Envoi des instructions aux postes consulaires pour constituer un nouveau panel
d’électeurs volontaires
- Jeudi 3 octobre : Réunion du bureau du vote électronique – présentation du TGN
- Lundi 4 novembre : Début des tests logistiques
- Vendredi 15 novembre : Démarrage des opérations techniques en présence des auditeurs
- Mardi 19 novembre : Envoi aux électeurs des identifiants par courriel et des mots de passe par sms
- Mercredi 20 novembre : Présentation de l’état d’avancement du projet vote par internet aux
membres du BVE et déroulement de la cérémonie des clés
- Vendredi 22 novembre : Ouverture du portail de vote et démarrage de l’assistance en ligne
- Mardi 26 novembre : Fermeture du portail de vote, génération des listes d’émargement et
dépouillement de l’urne électronique en présence des membres du BVE
- Mercredi 27 novembre : Téléchargement des listes d’émargements par les postes consulaires
- Jeudi 28 novembre : Envoi par courriel de l’enquête de satisfaction aux électeurs testeurs
Page 3 sur 26
d. Constat général
Les opérations techniques ont été enchainées sans difficulté du 4 novembre au 26 novembre 2019
selon le calendrier prévu. Le portail de vote a été ouvert le vendredi 22 novembre 2019 à 10h00 et
fermé le mardi 26 novembre 2019 à 10h00. Aucun incident de sécurité n’a été détecté sur les
serveurs centraux durant les opérations.
2. Parcours électeur
a. Communication auprès des électeurs
Durant toute la période du TGN, les courriels d’information suivants ont été envoyés aux électeurs testeurs :
- Vendredi 15 novembre : courriel d’information concernant le TGN 2 - Mardi 19 novembre : Envoi des identifiants par courriel et des mots de passe par sms aux
électeurs testeurs - Vendredi 22 novembre : courriel de l’url du portail de vote - Samedi 23 novembre : Rappel aux électeurs testeurs de la date et heure de fermeture du
portail de vote - Dimanche 24 novembre : Rappel aux électeurs de la date et heure de fermeture du portail
de vote - Jeudi 28 novembre : courriel sur l’enquête de satisfaction aux électeurs testeurs
b. Identification de l’électeur
Pour se connecter, l’électeur doit saisir les deux codes qu’il reçoit par deux modes d’acheminements
différents : le premier, l’identifiant, est transmis via un lien à usage unique par courriel à son adresse
électronique, le second, le mot de passe, est envoyé par sms sur son numéro de portable. Ces deux
codes présentent les mêmes caractéristiques ; Ils sont générés aléatoirement par le système de vote
et sont composés de 12 chiffres, lettres et caractères spéciaux qui s’avèrent complexes à saisir pour
de nombreux électeurs.
Les adresses mails et les numéros de téléphones sont ceux renseignés par l’électeur sur le registre
des Français de l’étranger, sur le site Service-public.fr ou auprès de son consulat. Un électeur ne peut
donc voter que si ses coordonnées sont à jour dans le registre.
c. Code de confirmation
La réglementation (art R. 176.3.9) impose une validation du vote par la saisie d’un code de
confirmation. L’électeur se connecte au portail de vote avec son identifiant et son mot de passe. Il a
la possibilité de choisir une candidature ou de voter blanc. Une fois son choix confirmé, l’électeur
Page 4 sur 26
doit saisir son code de confirmation afin de valider son vote. Ce code est envoyé par mail, vecteur
plus rapide et fiable à l’international que le sms
d. Assistance aux électeurs
Une rubrique « Aide » est disponible sur la page de connexion au portail de vote et sur la page de
renouvellement des codes de vote. L’électeur peut ainsi compléter le formulaire et contacter
l’assistance vote par internet. Cette assistance a été mise en place pendant toute la période du vote
par internet du vendredi 22 novembre au mardi 26 novembre. Dans le cadre de ce TGN, l’assistance a
été assurée par l’équipe projet et a été disponible par courriel de 8h à 20h (heure de Paris). Elle sera
étoffée et disponible 24/24 à l’occasion des scrutins réels.
Un guide animé et des modes d’emplois ont été réalisés et mis à disposition des électeurs sur le site
France Diplomatie. Ces supports ont permis d’accompagner les électeurs lors de la réalisation de leur
vote et/ou de la récupération d’un nouveau code de vote.
241 électeurs ont eu recours à l’assistance soit près de 6 % des votants. Les motifs de contacts de
l’assistance sont dans la quasi-totalité liés à des problèmes de connexion, soit parce que l’électeur
n’a pas reçu un des deux codes d’identification, soit en raison de difficultés liées à la saisie des codes.
Les statistiques détaillées de l’assistance sont en annexe 2.
Page 5 sur 26
e. Statistiques TGN de
Novembre 2019 Rappel TGN de
Juillet 2019
Nombre d’électeurs Nombre d’inscrits 1 257 767 12 546
Nombre d’électeurs testeurs
12 943 12 546
Envoi de courriels Nombre d’identifiants envoyés
12 640 12 483
Nombre d’identifiants reçus
12 395 10 001
% échecs de réception 1,94 % 19,88 %
Envoi de sms Nombre de mots de passe envoyés
12 222 12 097
Nombre de mots de passe reçus
10 404 10 244
% échecs de réception 14,87 % 15,32 %
Connexion Nombre de connexions au portail de vote
5 134 3 973
Participation Nombre de votants 4 302 3 408
Taux de participation (votants /nombre d’électeurs testeurs)
33 %
27 %
Nombre de suffrages exprimés
3 595 2 969
Nombre de votes blancs 707 439
Assistance Nombre de cas traités 241 267
Enquête de satisfaction Nombre de réponses 2511 2 536
Les résultats du scrutin test par circonscription sont en annexe 3.
3. Cérémonies
a. Organisation
Les opérations ont été maitrisées par une préparation en amont des supports (disques durs, DVD) et
par une répartition des rôles au sein de la maîtrise d’œuvre (DSI) entre le maître de cérémonie, le
régisseur qui s’occupe des manipulations des DVD et l’opérateur de saisie.
Les experts indépendants ont assisté et supervisé l’ensemble des opérations techniques.
Un modèle de procès-verbal (PV) pré-imprimé, à l’instar des PV utilisés lors des modes de scrutins à
l’urne, a été adopté par le BVE. Ce PV est accompagné des comptes rendus détaillés des opérations
qui sont projetés et complétés en direct sous le contrôle des membres du BVE.
Ce TGN a permis de valider le protocole et l’organisation générale des cérémonies qui se dérouleront
lors de l’élection consulaire de mai 2020.
Page 6 sur 26
b. Contrôles exercés par les membres du bureau du vote électronique
Le bureau du vote électronique (BVE) présidé par un membre du Conseil d’Etat et composé d’élus et
de représentants de l’administration est garant du bon déroulement des opérations électorales. Il a
contrôlé les différentes opérations techniques à chaque étape clé du processus.
Les membres du BVE ont participé aux cérémonies permettant l’ouverture du portail de vote. Ils ont
constaté la vacuité de l’urne sur la plateforme avant son scellement et sa mise en ligne. Cette vacuité
a de nouveau été vérifiée avant l’ouverture du portail de vote à l’aide d’un outil de supervision.
Le BVE a également participé à la génération des listes d’émargement, à la clôture du vote par
internet et au dépouillement de l’urne électronique. Le contrôle exercé par le BVE a par ailleurs été
renforcé par une prise d’empreinte de l’urne électronique.
Enfin, les membres du BVE ont eu accès pendant tout le vote à un tableau de bord présentant les
statistiques de connexions et de participation en temps réel.
c. Exercice de gestion d’une crise
Une simulation de gestion de crise a été menée le lundi 25 novembre 2019. Basée sur un scénario
fictif, elle a permis de tester la procédure de crise, la mobilisation des acteurs dans des délais
contraints, le processus de décision et la communication à mettre en œuvre auprès des électeurs.
4. L’après vote
a. Téléchargement des listes d’émargement
A l’issue du scrutin test, le mardi 26 novembre, les correspondants élections des postes ont reçu par
courriel un lien leur permettant de créer leur mot de passe et de se connecter à l’espace
administration. Via cet espace, les agents ont téléchargé sans difficulté les listes d’émargement de
leur circonscription consulaire.
b. Enquête de satisfaction
Un questionnaire de satisfaction identique à celui de juillet 2019 a été envoyé à tous les électeurs
testeurs. Comme lors du TGN de juillet, environ 20 % des électeurs ont répondu à ce questionnaire.
Cette enquête montre une amélioration du taux de satisfaction des électeurs et une diminution du
Page 7 sur 26
nombre d’électeurs qui ont contacté l’assistance. Les détails des résultats de l’enquête de
satisfaction sont en annexe 4.
Synthèse des enquêtes de satisfaction
NOVEMBRE 2019 JUILLET 2019
NOMBRES DE REPONSES 2 511 2 536
OUI NON OUI NON
Question 1- Avez-vous rencontré des difficultés de réception de l’identifiant ou du mot de passe ?
17 % 83 % 29 % 71 %
426 2 077 743 1 789
Question 2- Avez-vous rencontré des difficultés pour vous connecter au portail de vote ?
9 % 91 % 15 % 85 %
228 2 275 383 2 147
Question 3- Avez-vous rencontré des difficultés pour voter ?
16 % 84 % 26 % 74 %
388 2 114 649 1 881
Question 4- Avez-vous contacté l’assistance? 7 % 93 % 8 % 92 %
166 2 339 196 2 336
Si oui, avez-vous été satisfait de la réponse apportée ?
45 % 55 % 31 % 69 %
75 91 61 135
Page 8 sur 26
5. Annexes
a. Annexe 1 : Statistiques de l’envoi de sms Pays avec un taux d’échec de 100%
Pays Nombre de sms
envoyés
Nombre de sms
reçus
Taux de sms en
erreur
opérateur*
Taux de sms en
erreur
utilisateur**
Taux de sms non
reçus
Vietnam 70 0 56% 44% 100%
Gabon 41 0 12% 88% 100%
Pakistan 36 0 100% 0% 100%
Papouasie-
Nouvelle-Guinée 2 0 100% 0% 100%
Kirghizistan 1 0 100% 0% 100%
Palestine 1 0 100% 0% 100%
Macao 1 0 100% 0% 100%
* Erreur opérateur : câble coupé, réseau de l’opérateur relai en maintenance, opérateur relai non joignable, etc…
**Erreur utilisateur : téléphone éteint, numéro inconnu, portabilité en cours, etc…
Pays avec un taux d’échec compris entre 50% et 99%
Pays Nombre de sms
envoyés
Nombre de sms
reçus
Taux de sms en
erreur
opérateur
Taux de sms en
erreur
utilisateur
Taux de sms non
reçus
Indonésie 53 4 92% 0% 92%
Iran 23 3 17% 70% 87%
Estonie 13 2 77% 8% 85%
Burkina Faso 39 8 72% 8% 79%
Colombie 36 9 75% 0% 75%
Bolivie 55 15 69% 4% 73%
Monaco 3 1 67% 0% 67%
Page 9 sur 26
Pays avec un taux d’échec compris entre 11% et 49%
Pays Nombre de sms
envoyés
Nombre de sms
reçus
Taux de sms en
erreur
opérateur
Taux de sms en
erreur
utilisateur
Taux de sms non
reçus
Nigeria 74 41 43% 1% 45%
Tanzanie et Zanzibar
275 153 25% 19% 44%
Antigua 5 3 40% 0% 40%
Bangladesh 5 3 40% 0% 40%
Tchad 13 8 15% 23% 38%
Côte d'Ivoire 33 21 36% 0% 36%
Macédoine 17 11 24% 12% 35%
Lituanie 9 6 33% 0% 33%
Paraguay 9 6 33% 0% 33%
République centrafricaine
6 4 0% 33% 33%
Serbie et Monténégro
3 2 0% 33% 33%
Saint-Kitts-et-Nevis 3 2 33% 0% 33%
Malaisie 29 20 28% 3% 31%
Soudan 17 12 29% 0% 29%
Irak 17 12 24% 6% 29%
Sri Lanka 14 10 0% 29% 29%
Inde 104 75 25% 3% 28%
Guinée équatoriale 26 19 19% 8% 27%
République tchèque
19 14 16% 11% 26%
Page 10 sur 26
Maroc 436 327 19% 6% 25%
Guatemala 24 18 25% 0% 25%
Ouganda 8 6 0% 25% 25%
Moldavie 8 6 13% 13% 25%
Kuwait 33 25 24% 0% 24%
Arabie saoudite 164 126 15% 8% 23%
Vanuatu (Condominium des
Nouvelles-Hébrides)
13 10 0% 23% 23%
Maurice 35 27 0% 23% 23%
Comores et Mayotte
63 49 8% 14% 22%
Mozambique 9 7 22% 0% 22%
Togo 23 18 22% 0% 22%
Djibouti 33 26 0% 21% 21%
Thaïlande 84 67 11% 10% 20%
Venezuela 5 4 0% 20% 20%
Afrique du Sud 83 67 16% 4% 19%
Corée du Sud 16 13 19% 0% 19%
Brésil 107 87 19% 0% 19%
Romanie 86 70 10% 8% 19%
Hong Kong 43 35 9% 9% 19%
Algérie 70 57 9% 10% 19%
Russie 206 168 9% 9% 18%
Page 11 sur 26
Philippines 28 23 14% 4% 18%
Azerbaïdjan 6 5 17% 0% 17%
Pays-Bas 79 66 16% 0% 16%
Tunisie 194 164 13% 2% 15%
Niger 13 11 0% 15% 15%
Malte 13 11 15% 0% 15%
Egypte 60 51 15% 0% 15%
Israël 357 306 12% 3% 14%
Kenya 21 18 14% 0% 14%
Chypre 7 6 14% 0% 14%
Allemagne 640 552 8% 6% 14%
Finlande 51 44 6% 8% 14%
Madagascar 22 19 14% 0% 14%
Bahreïn 8 7 13% 0% 13%
Chili 57 50 11% 2% 12%
Yougoslavie 17 15 6% 6% 12%
Andorre 17 15 0% 12% 12%
Costa Rica 27 24 11% 0% 11%
Autriche 109 97 7% 4% 11%
Page 12 sur 26
Pays avec un taux d’échec compris entre 1% et 10%
Pays Nombre de sms
envoyés
Nombre de sms
reçus
Taux de sms en
erreur
opérateur
Taux de sms en
erreur
utilisateur
Taux de sms
non reçus
France 503 451 5% 5% 10%
Turquie 68 61 6% 4% 10%
Singapour 88 79 5% 6% 10%
Croatie 49 44 8% 2% 10%
Emirats arabes unis 80 72 8% 3% 10%
Guinée 20 18 10% 0% 10%
Sénégal 163 147 9% 1% 10%
Cameroun 51 46 8% 2% 10%
Belgique 980 885 2% 8% 10%
Congo 21 19 5% 5% 10%
Ethiopie 21 19 10% 0% 10%
Slovaquie 21 19 10% 0% 10%
Suède 96 87 4% 5% 9%
Bosnie-Herzégovine 11 10 9% 0% 9%
Japon 94 86 7% 1% 9%
Zimbabwe 13 12 8% 0% 8%
Royaume-Uni 550 510 1% 6% 7%
Mauritanie 14 13 0% 7% 7%
Oman 14 13 0% 7% 7%
Page 13 sur 26
Myanmar (Birmanie) 14 13 7% 0% 7%
Taïwan 14 13 7% 0% 7%
Bénin 57 53 5% 2% 7%
Portugal (et Açores) 72 67 7% 0% 7%
Chine 173 161 7% 0% 7%
Australie 101 94 3% 4% 7%
Italie 117 109 3% 4% 7%
Espagne 792 738 4% 2% 7%
Suisse 525 491 6% 0% 6%
Norvège 63 59 3% 3% 6%
Liban 383 359 6% 0% 6%
Afghanistan 16 15 6% 0% 6%
Mexique 511 480 4% 2% 6%
Luxembourg 188 177 2% 4% 6%
Grèce 115 109 5% 0% 5%
Pologne 104 99 1% 4% 5%
Mali 46 44 0% 4% 4%
Etats-Unis/ Canada 1097 1050 2% 2% 4%
Uruguay 56 54 2% 2% 4%
Jordanie 36 35 3% 0% 3%
Irlande 85 83 1% 1% 2%
Page 14 sur 26
Pays avec un taux d’échec de 0%
Pays Nombre de sms
envoyés
Nombre de sms
reçus
Taux de sms en
erreur
opérateur
Taux de sms en
erreur
utilisateur
Taux de sms non
reçus
République Démocratique du
Congo 22 22 0% 0% 0%
Slovénie 20 20 0% 0% 0%
Cuba 18 18 0% 0% 0%
Pérou 15 15 0% 0% 0%
Danemark 15 15 0% 0% 0%
Cambodge 14 14 0% 0% 0%
Bulgarie 14 14 0% 0% 0%
Trinité-et-Tobago 13 13 0% 0% 0%
Suriname 9 9 0% 0% 0%
Le Salvador 8 8 0% 0% 0%
Ghana 8 8 0% 0% 0%
Angola 8 8 0% 0% 0%
Ukraine 7 7 0% 0% 0%
Lettonie 7 7 0% 0% 0%
Biélorussie 6 6 0% 0% 0%
Qatar 5 5 0% 0% 0%
Népal 4 4 0% 0% 0%
Mongolie 4 4 0% 0% 0%
Page 15 sur 26
Porto Rico 4 4 0% 0% 0%
Fidji 4 4 0% 0% 0%
Rwanda 4 4 0% 0% 0%
Honduras 4 4 0% 0% 0%
Bahamas 3 3 0% 0% 0%
Géorgie 3 3 0% 0% 0%
Islande 3 3 0% 0% 0%
Bermudes 2 2 0% 0% 0%
Iles Vierges 2 2 0% 0% 0%
Burundi 2 2 0% 0% 0%
Liechtenstein 1 1 0% 0% 0%
Nicaragua 1 1 0% 0% 0%
Botswana 1 1 0% 0% 0%
Turkménistan 1 1 0% 0% 0%
Anguilla 1 1 0% 0% 0%
Guyana 1 1 0% 0% 0%
Panama 1 1 0% 0% 0%
Brunei Darussalam 1 1 0% 0% 0%
Page 16 sur 26
b. Annexe 2 : Statistiques de l’assistance
Problèmes rencontrés par les électeurs Nombre de cas
1. Non réception d'éléments indispensables pour voter 122
Non réception de l'url d'accès au portail de vote 6
Non réception du mail contenant l'identifiant 16
Non réception du sms contenant le mot de passe 60
Non réception du mail contenant le code de confirmation 10
Coordonnées des électeurs non mises à jour 9
Electeur non inscrit comme participant au test grandeur nature 21
3. Lecture de l'identifiant 16
Impossibilité d'obtenir l'identifiant car l'électeur a déjà cliqué sur le lien à usage unique
13
Changement des caractères de l'identifiant lors de l'impression 3
4. Connexion impossible au portail de vote 81
Erreur de l'électeur (saisie incorrecte, confusion entre les codes,..) 22
Identifiant et mot de passe tronqués/ incomplets non reconnus par le portail
19
Mot de passe contenant des caractères spéciaux non autorisés 5
Codes de vote du TGN 1 non reconnus par le portail de vote 3
Identifiants et mots de passe non reconnus (en cours d'analyse) 32
5. Impossibilité de renouveler les codes de vote 22
Identifiant ou mot de passe non reconnus par le portail de renouvellement
6
Non réception du mail contenant le lien à usage unique permettant l'accès au portail de renouvellement
16
Page 17 sur 26
c. Annexe 3 : Résultats du scrutin test
Page 18 sur 26
Page 19 sur 26
Page 20 sur 26
Page 21 sur 26
Page 22 sur 26
Page 23 sur 26
d. Annexe 4 : Statistiques de l’enquête de satisfaction
Nombre de réponses par question
Page 24 sur 26
Nombre de réponses par zone géographique
Page 25 sur 26
Page 26 sur 26
