SECRETS DE SONDAGES DENIS PINGAUD - ÉDITIONS DU SEUIL

La page est créée Jonathan Julien
 
CONTINUER À LIRE
DENIS PINGAUD

                             SECRETS
                           DE SONDAGES

                                  ÉDITIONS DU SEUIL
                              25, bd Romain-Rolland, Paris XIVe

Secrets de sondages [BaT-BR].indd 5                               26/07/11 14:51
À mon père, qui commença sa carrière professionnelle
                                 à l’Ifop après la guerre

Secrets de sondages [BaT-BR].indd 7                                      26/07/11 14:51
Préambule

                  L’idée de ce livre est née lors d’une énième polé-
               mique, en France, consécutive à la publication d’un
               sondage. En l’occurrence, il s’agissait d’une enquête
               préélectorale sur la présidentielle de 2012, parue
               dans Le Parisien/Aujourd’hui en France daté du 5 mars
               2011, donnant Marine Le Pen en tête à l’issue du
               premier tour 1. La controverse était avivée par le
               vote à l’unanimité au Sénat, quelques semaines
               plus tôt, le 14 février, d’une proposition de loi sur
               les études d’opinion « visant à mieux garantir la
               sincérité du débat politique et électoral » 2.
                  La France est sans doute le pays qui consomme

                  1. Harris Interactive pour Le Parisien/Aujourd’hui en France,
               mars 2011.
                  2. Adoptée en première lecture, cette proposition était
               toujours en instance de discussion à l’Assemblée nationale
               au moment de la publication de l’ouvrage.

                                              9

Secrets de sondages [BaT-BR].indd 9                                               26/07/11 14:51
secrets de sondages

                    le plus de sondages politiques et… qui en discute le
                    plus. Chacun a son idée sur le sujet, qui se résume
                    souvent à des présupposés peu flatteurs, quand
                    ce ne sont pas à des fantasmes fort offensants sur
                    le rôle des producteurs de données dans le débat
                    public. L’objet de ce travail est de rappeler – et de
                    révéler – quelques vérités simples sur le métier de
                    sondeur et sur le ménage à trois qui unit instituts,
                    médias et politiques dans la fabrique de la démo-
                    cratie dite d’opinion.
                        Ce faisant, il n’est question que d’une toute
                    petite partie du secteur des études. Les enquêtes
                    d’opinion, et plus particulièrement les sondages pré-
                    électoraux, représentent moins de 10 % du chiffre
                    d’affaires des sociétés qui en font commerce. Ils ne
                    contribuent guère, voire pas du tout, à leurs résultats
                    financiers, mais ils constituent des objets symbo-
                    liques dont l’impact est souvent inversement pro-
                    portionnel à la profondeur du débat démocratique.
                    Pour ne pas se tromper sur leur mode de lecture,
                    il peut être utile de bien comprendre leur mode
                    de production.

Secrets de sondages [BaT-BR].indd 10                                          26/07/11 14:51
1

                                  Le nœud de l’affaire

                  Le mardi 14 juin 2011 au matin, à partir d’une
               adresse électronique de simple citoyen, je me suis
               rendu sur le site Internet de la Commission des
               sondages pour savoir comment consulter la notice
               méthodologique relative à un sondage d’intentions
               de vote. Je souhaitais vérifier le niveau effectif de
               transparence auquel pouvait avoir droit toute per-
               sonne qui en faisait la demande. J’ai donc adressé
               un courriel à la Commission qui veille à l’appli-
               cation de la loi relative à la publication et à la dif-
               fusion des enquêtes d’opinion 1. Celle-ci stipule
               notamment dans son article 3 qu’avant publication
               de tout sondage ayant un rapport direct ou indirect
               avec une élection, « l’organisme qui l’a réalisé doit
               procéder au dépôt auprès de la Commission des

                    1. Loi du 19 juillet 1977, modifiée le 19 février 2002.

                                             11

Secrets de sondages [BaT-BR].indd 11                                          26/07/11 14:51
secrets de sondages

                    sondages […] d’une notice précisant notamment :
                    l’objet du sondage ; la méthode selon laquelle les
                    personnes interrogées ont été choisies, le choix
                    et la composition de l’échantillon ; les conditions
                    dans lesquelles il a été procédé aux interrogations ;
                    le texte intégral des questions posées ; la proportion
                    des personnes n’ayant pas répondu à chacune des
                    questions ; les limites d’interprétation des résultats
                    publiés ; s’il y a lieu, la méthode utilisée pour en
                    déduire les résultats de caractère indirect qui seraient
                    publiés. […] Toute personne a le droit de consulter
                    auprès de la Commission des sondages la notice
                    prévue par le présent article ».
                        24 heures plus tard, j’ai reçu une réponse signée
                    du secrétaire permanent de la Commission des
                    sondages : « Monsieur, il vous suffit de me dire
                    par cette voie de quel sondage vous souhaitez
                    la notice. » J’ai alors précisé : « Il s’agit du sondage
                    Harris Interactive publié dans Le Parisien/
                    Aujourd’hui en France du 5 mars 2011. Je souhai-
                    terais avoir connaissance de la notice méthodo­
                    logique, et, plus particulièrement, s’agissant d’une
                    enquête d’intentions de vote, des tableaux de
                    redressement 1. » Quelques minutes plus tard, un

                         1. Méthode utilisée par les instituts pour passer des chiffres

                                                    12

Secrets de sondages [BaT-BR].indd 12                                                      26/07/11 14:51
le nœud de l’affaire

               nouveau courriel m’est parvenu : « Voici la partie
               consultable de la notice du sondage Harris Inte-
               ractive publié le 5 mars dernier dans Le Parisien.
               Les tableaux de redressement ne font pas partie des
               données consultables. » De facto, le fichier joint ne
               comportait que les éléments suivants : une notice
               méthodologique telle que généralement publiée
               dans les médias (mode d’interrogation, échantillon,
               date de terrain) et des « détails relatifs au redres-
               sement ». Ces derniers se limitaient à un tableau à
               deux colonnes, respec­tivement nommées « bruts »
               et « redressés ». Les chiffres étaient visibles s’agissant
               du sexe, de l’âge, de la catégorie socioprofession-
               nelle ou de la zone d’habitation (Paris ou pro-
               vince), mais manifestement effacés s’agissant de la
               proximité politique ou du vote à la présidentielle
               de 2007 des répondants. Pourtant, ces données
               devaient certainement avoir constitué une base
               essentielle de travail pour l’institut.
                   Je m’en suis ému : « Le document que vous m’avez
               transmis ne comporte pas les données suivantes,
               conformément à la loi : 1) limites d’interprétation
               des résultats publiés ; 2) s’il y a lieu, méthode utilisée

               « bruts » résultant du terrain d’enquête aux chiffres publiés.
               Cf. chap. 3, « Les faux débats ».

                                               13

Secrets de sondages [BaT-BR].indd 13                                            26/07/11 14:51
secrets de sondages

                    pour en déduire les résultats de caractère indirect
                    qui seraient publiés. Les données des tableaux
                    “proximité politique” et “vote au 1er tour de la prési-
                    dentielle de 2007”, qui ont certainement fait partie
                    de ladite “méthode”, ont été apparemment effacées.
                    Pourriez-vous me communiquer ces données ? »
                    La réponse, énigmatique mais non sans humour,
                    ne s’est pas fait attendre : « Monsieur, me refusant
                    aux généralités, je ne peux pas vous répondre sur
                    le premier point sauf à vous dire que ce sondage a
                    été réalisé très en amont de la campagne électorale.
                    Sur le second point, vous avez raison de remarquer
                    que mes coups de couteau pour confectionner
                    la notice “consultable” ont fait sauter la phrase
                    suivante : “il a été procédé à un redressement poli-
                    tique sur la base de souvenirs de vote” ».
                       Les échanges en sont restés là. Il n’est donc pas
                    possible d’avoir accès à des données permettant de
                    comprendre pourquoi et comment une enquête
                    d’intentions de vote, qui avait suscité tant d’invec-
                    tives et de polémiques et qui ne devait d’ailleurs être
                    confirmée par aucune autre étude dans les semaines
                    suivantes, pouvait conduire au surprenant résultat
                    publié. En l’occurrence, la Commission des son-
                    dages donne le sentiment d’avoir une interprétation
                    très restrictive de la loi, qui évoque bien le droit de

                                               14

Secrets de sondages [BaT-BR].indd 14                                          26/07/11 14:51
le nœud de l’affaire

               connaître « la méthode utilisée pour en déduire les
               résultats de caractère indirect qui seraient publiés ».
               S’il ne s’agit que d’en transmettre le principe en une
               ligne laconique, alors, évidemment, la démarche
               de transparence perd singulièrement de son intérêt.
               Le mystère des chiffres reste entier, aiguisant forcé­
               ­ment la curiosité et la confusion dans la dispute
                publique sur les sondages.

               L’arme redoutable
               de la transparence démocratique

                   C’est une posture très française. La Commission
               des sondages, qui effectue un remarquable travail
               de contrôle a priori des enquêtes électorales publiées
               et dont les moyens restent pourtant limités malgré
               la profusion de ces études, conserve de manière
               exclusive les données transmises par les instituts.
               Il y a une bonne raison à cela. Les neuf magistrats 1
               et les deux personnalités qualifiées qui la composent
               veulent protéger, d’une certaine façon, le travail
               de chacun d’entre eux en gardant confidentielles

                   1. Trois issus du Conseil d’État, trois de la Cour des comptes
               et trois de la Cour de cassation.

                                               15

Secrets de sondages [BaT-BR].indd 15                                                26/07/11 14:51
secrets de sondages

                    des données susceptibles d’intéresser l’ensemble
                    de ses concurrents. Il y a aussi une moins bonne
                    raison. Comme toujours, dans un pays très élitiste,
                    la haute fonction publique peine à ouvrir ses portes
                    à la curiosité légitime – et reconnue par le légis-
                    lateur – de citoyens intéressés par le débat électoral.
                        Curiosité légitime ? Le nœud de la controverse
                    qui agite régulièrement le petit monde des poli-
                    tiques, des médias et des sondeurs est bien là. Les
                    deux initiateurs 1 de la proposition de loi « visant à
                    mieux garantir la sincérité du débat politique et élec-
                    toral » défendent ainsi une vision très volontariste
                    de la transparence. Au motif que le métier des ins-
                    tituts s’apparenterait à une discipline scientifique,
                    rien ne devrait s’opposer à ce que les hypothèses
                    comme les conclusions de leurs travaux puissent
                    être discutées sur la place publique. Les suggestions
                    de ces deux sénateurs ne vont pas jusqu’à l’étalage
                    médiatique obligatoire des méthodes d’enquête
                    et de production des résultats, mais elles rendraient
                    possible un droit de regard aujourd’hui interdit.
                    Ce faisant, ils jouent une partition à la mode qui
                    consiste à épouser l’humeur souvent hostile d’une

                        1. Hugues Portelli, sénateur UMP du Val-d’Oise, et Jean-
                    Pierre Sueur, sénateur PS du Loiret.

                                                16

Secrets de sondages [BaT-BR].indd 16                                               26/07/11 14:51
le nœud de l’affaire

               partie des élites à l’égard des sondages. Le rapport
               de la Cour des comptes de 2009 1 sur les dépenses de
               la présidence de la République en la matière avait
               fait couler beaucoup d’encre et entretenu le soupçon
               récurrent de manipulation du pouvoir à l’égard de
               l’opinion.
                   À l’inverse, il n’est pas interdit de s’étonner
               d’une telle curiosité à l’égard d’une profession qui
               ne revendique pas le fait de pratiquer une science
               exacte, mais plutôt d’utiliser des techniques faisant
               appel à la fois aux statistiques et à la sociologie élec-
               torale. Son savoir-faire ne se limite pas à l’appli­­­
               cation – fussent-elles complexes – de règles de
               cal­­cul, mais emprunte beaucoup à la culture de
               la formation des opinions. Comment, et surtout
               pourquoi exiger tant de transparence de ce métier ?
               Un article de la proposition de loi votée au Sénat
               précise notamment qu’un « décret détermine, en
               particulier, les règles méthodologiques que les orga-
               nismes réalisant des sondages doivent respecter afin
               de garantir leur objectivité et leur sincérité ». Ce
               qui fait naturellement réagir violemment la corpo-
               ration des sondeurs. « Aucun pays au monde, même
               dans des démocraties “musclées”, n’a encore osé

                    1. Cf. chap. 5, « L’enjeu de la régulation ».

                                               17

Secrets de sondages [BaT-BR].indd 17                                       26/07/11 14:51
secrets de sondages

                    proposer un tel système, où le gouvernement fixerait
                    les règles professionnelles des instituts d’études
                    d’opinion 1. »
                        Le combat est cependant inégal. La défense
                    corporatiste de la profession a sa raison d’être face
                    à l’imagination intarissable du législateur. Mais
                    c’est un combat perdu d’avance pour les instituts
                    s’ils ne prennent pas la mesure, et la responsabilité
                    qui va avec, des charges symboliques qu’ils manient
                    dans une démocratie d’opinion. Le sondage a beau
                    être le fruit d’un travail sérieux et contrôlé, dont
                    la valeur ajoutée tient beaucoup à la qualité et à
                    la probité intellectuelle de ceux qui le produisent,
                    il est devenu partie prenante de la nouvelle confi-
                    guration démocratique qui unit, dans une relation
                    parfois douteuse, les politiques, les médias et les
                    sondeurs. L’arme redoutable de la transparence
                    continuera d’être menaçante aussi longtemps que,
                    dans l’exercice quotidien de leur métier, ceux-ci
                    privilégieront parfois, avec ceux-là, le silence à la
                    discorde, le compromis à la rigueur, l’intérêt à
                    l’indépendance. Ce n’est pas tant le risque de régu-
                    lation législative qui est inquiétant. C’est plutôt

                       1. Roland Cayrol, ancien dirigeant de l’institut CSA, in
                    Le Monde du 9 mars 2011.

                                                18

Secrets de sondages [BaT-BR].indd 18                                              26/07/11 14:51
le nœud de l’affaire

               l’absence d’autorégulation professionnelle qui est
               fâcheuse. Et qui explique, sans doute, que l’acte
               d’accusation soit aussi épais.

Secrets de sondages [BaT-BR].indd 19                                26/07/11 14:51
Table

               Préambule  . . . . . . . . . . . . . . . . . . . . . . . . . . . . .         9

               1. Le nœud de l’affaire . . . . . . . . . . . . . . . . . . .               11
                  L’arme redoutable de la transparence démo-
               cratique . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .    15

               2. L’acte d’accusation . . . . . . . . . . . . . . . . . . . .              21
                  L’ardeur anti-sondages . . . . . . . . . . . . . . . . . .               26
                  Démocratie d’opinion ou dictature de l’opi-
                  nion ? . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .     29
                  Les sondeurs sont retors  . . . . . . . . . . . . . . . .                35

               3. Les faux débats . . . . . . . . . . . . . . . . . . . . . . .            41
                  La boîte noire des instituts  . . . . . . . . . . . . . .                47
                  Les redressements par reconstitution de vote                             52
                  Enquêtes en ligne : question légitime, réponse
                  absurde . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .      58
                  Les frontières infranchissables . . . . . . . . . . . .                  64
                  Les sondés grassement rémunérés ? . . . . . . . .                        67

               4. Les vraies questions . . . . . . . . . . . . . . . . . . .               73
                  Le contre-exemple de 2002 . . . . . . . . . . . . . .                    78

Secrets de sondages [BaT-BR].indd 135                                                           26/07/11 14:51
De l’influence des questions sur les réponses                 82
                         Démocratie arabe et risque islamiste ou
                         comment obtenir la réponse attendue  . . . . .                87
                         Le pacte ambigu du sondage . . . . . . . . . . . . .          91
                         L’opinion publique existe-t-elle ? . . . . . . . . . .        95

                    5. Le ménage à trois . . . . . . . . . . . . . . . . . . . . .    103
                       Les écueils de l’interprétation . . . . . . . . . . . .        106
                       Le pouvoir symbolique du politologue . . . . .                 111
                       La Cour des comptes s’en mêle . . . . . . . . . . .            116
                    	Un modèle économique fragile  . . . . . . . . . .                122

                    6. L’enjeu de l’autorégulation . . . . . . . . . . . . .          127
                       Mieux comprendre l’opinion  . . . . . . . . . . . .            131

Secrets de sondages [BaT-BR].indd 136                                                       26/07/11 14:51
Vous pouvez aussi lire