Médias et sondages politiques : le cas de la campagne électorale
Contents
1. al Enfin nous avons aussi retenu le Super Hebdo distribu gratuitement alors dans la r gion m tropolitaine et The Toronto Star qui comme Le Soleil est en vente chez plusieurs marchands de journaux de Montr al Une derni re pr cision s impose nous pensons n avoir oubli aucun article important consacr aux r sultats des sondages mais nous ne pouvons affirmer que toutes les pr sentations de ces r sultats ont t retenues Nous n avons pas relev par exemple toutes les mentions apparaissant dans des articles chroniques ditoriaux etc non consacr s explicitement enti rement ou prioritairement ces r sultats il est fort probable aussi que des nouvelles br ves ne figurant pas dans les premi res pages ont chapp notre vigilance De m me si on peut dire que les r sultats concernant les cas de commandite sont relativement s rs on ne peut tre aussi affirmatifs pour les cas de repiquage Pour ces 4 Pour ce quotidien la collecte a sans doute t moins syst matique que pour les autres journaux puisque nous n avons identifi que trois articles reproduisant les r sultats des sondages Gallup Le Toronto Star annon ait pourtant au d but de la campagne qu il pr senterait principalement les r sultats des sondages Gallup Or ces derniers furent au nombre de huit Beaud M DIAS ET SONDAGES 135 derniers les pourcentages sont sans doute sup rieurs ceux que l on aurait obtenus si nou2. compr hensible et si elle fournissait aux lecteurs potentiels les moyens d en faire une lecture critique et intelligente Au terme de cette tude de cas on peut formuler un certain nombre de conclusions On constate tout d abord une assez grande h t rog n it dans le contenu m thodologique des pr sentations de r sultats de sondages et ce m me lorsqu il s agit de com mandites Certaines maisons de sondages et certains journaux prennent soin d informer largement le lecteur sur la validit des donn es de sondages D autres m dias et firmes se contentent de fournir les informations jug es sans doute les moins techniques les plus importantes la p riode d inter view par exemple ou allant de soi l identit de la firme de sondage par exemple ils ont peut tre de bonnes raisons pour limiter ainsi la transmission de renseignements m thodo logiques li est fort probable que ces renseignements ne sont lus et surtout compris que par un petit nombre de lecteurs de journaux Mais n est ce pas aussi le cas de bien d autres informations boursi res par exemple que les quotidiens n omettent pourtant pas Selon les partisans d une pr senta tion de la m thode de sondage en plus des r sultats il y a cet gard un travail de pression effectuer aupr s de certains m dias et firmes de sondages de m me qu un mouvement d ducation lancer aupr s des citoyens On peut se demander galement si la concur
3. rudi wWww erudit org Article M dias et sondages politiques le cas de la campagne lecorale f d rale de 1988 Jean Pierre Beaud Politique n 20 1991 p 131 151 Pour citer la version num rique de cet article utiliser l adresse suivante http id erudit org iderudit 040701ar Note les r gles d criture des r f rences bibliographiques peuvent varier selon les diff rents domaines du savoir Ce document est prot g par la loi sur le droit d auteur L utilisation des services d rudit y compris la reproduction est assujettie sa politique d utilisation que vous pouvez consulter l URI http www erudit org documentation eruditPolitiqueUtilisation pdf rudit est un consortium interuniversitaire sans but lucratif compos de l Universit de Montr al l Universit Laval et l Universit du Qu bec Montr al Il a pour mission la promotion et la valorisation de la recherche rudit offre des services d dition num rique de documents scientifiques depuis 1998 Pour communiquer avec les responsables d rudit erudit umontreal ca Document t l charg le 15 avril 2010 M DIAS ET SONDAGES POLITIQUES le cas de la campagne lectorale f d rale de 1988 Jean Pierre Beaud Universit du Qu bec Montr al il est de plus en plus difficile d imaginer l exercice de la d mocratie dans les soci t s occidentales sans la production surtout dans ces temps forts que sont les p riodes l
4. 56 7 39 6 48 1 7 7 14 SEGMA LAVALIN 67 3 E 67 3 2 2 ENVIRONICS 80 6 54 8 66 3 4 5 9 CANADIAN FACTS L 50 50 7 7 CROP 76 2 3 76 2 3 3 INSIGHT CANADA RE 47 3 47 3 SEARCH 6 6 SOR COM 73 2 46 2 64 2 4 2 6 IQOP 87 65 9 72 9 2 4 6 Ou sernbie tre le commanditaire Qu plus exactement lorsque je journal n est pas le commanditaire Beaud M DIAS ET SONDAGES 149 TABLEAU II Moyenne des meilleurs scores obtenus par les maisons productrices pour chaque sondage Moyenne des Moyenne des meilleurs meilleurs scores scores lorsqu il s agit de Firme de lorsque ie journal est repiquages nombre sondages aussi le commandi de pr sentations taire nombre de pr sentations GALLUP 44 4 52 3 8 ANGUS REID 62 5 46 2 4 3 SEGMA LAVALIN 67 3 PIPES 2 ENVIRONICS 80 6 61 5 4 2 CANADIAN FACTS SEEN 57 2 2 CROP 76 2 ns 3 INSIGHT CANADA RESEARCH 46 9 4 SOR COM 82 46 2 3 2 IQOP 89 3 74 1 1 2 On sembie tre le commanditaire e Ou plus exactement lorsque le journal n est pas le commanditaire 150 POLITIQUE n 20 TABLEAU Ill valuation des pr sentations de r sultats de sondages selon les m dias Journal reprodui journal est aussi s agit de repi l ensembie sant les r sultats le commandi quages nombre de taire nombre de nombre de pr sentations pr sentations pr sentations TORONTO 44 4 44 4 STAR 3 3 LE
5. DEVOIR E 42 8 42 8 16 16 LA PRESSE 76 2 43 7 49 4 3 14 17 THE GAZETTE 50 2 49 49 5 5 9 14 LE SOLEIL 78 58 4 67 5 7 8 15 MONTREAL 66 7 50 2 53 5 DAILY NEWS 1 4 5 LE JOURNAL 84 6 51 9 62 8 DE MONTR AL 1 2 3 SUPER HEBDO 50 Ps 50 1 1 GLOBE AND 80 6 _ 80 6 MAIL 4 4 Ou semble tre le commanditaire Moyenne des scores lorsque le Moyenne des scores lorsqu il Ou plus exactement lorsque le journal n est pas le commanditaire Moyenne des scores pour Besud M DIAS ET SONDAGES 151 TABLEAU IV Les informations m thodologiques fournies par les m dias lors de la pr sentation des r sultats de sondages Oui Oui Non Non identit de la firme de sondages 76 0 2 Signature de l article 71 0 7 P riode d interview 70 1 7 Manchettes pertinentes 65 4 7 Identit du commanditaire 51 2 25 Nombre de questionnaires remplis 49 20 9 Marge d erreur 47 17 14 M thode de collecte 36 3 39 Libell des questions 17 1 60 Taux de r ponse 13 0 65 Description de la popula tion 11 22 45 M thode d chantillonnage 7 1 70 Nombre et m thode de r partition des discrets 2 59 15 Nombre de r pondants pour chaque colonne 2 1 59 M thode projection O 10 15 Seul le quatri me crit re la pertinence des manchettes n est pas proprement parlar d ordre m thodologique Le tableau se lit comme suit dans 76 des 78 pr sentations de r sultats de sondages nous trouvons l informat
6. lecteurs discrets par exemple ne conduisent pas aux m mes r sultats Constatation qui devrait justifier l expos des r sultats avant la r partition de ces discrets Or il appara t que cette proc dure n a t utilis e que tr s rarement sauf lors de la pr sentation des r sultats des sondages Segma Lavalin Terminons en signalant que les m dias indiquent fr quem ment le nombre ou le pourcentage des personnes qui ne savent pas ou qui ne r pondent pas huit fois sur dix mais qu ils sp cifient rarement le nombre de r pondants pour chaque colonne d un tableau pr sentant les r sultats les 59 non de l avant derni re ligne du tableau IV 9 Mais a les lecteurs ne le savent pas 10 Voir ce sujet Jean Paul Gr my Les exp riences fran aises sur la formulation des questions d enqu te R sultats d un premier inventaire Revue fran aise de sociologie vol XXVIII n 4 octobre d cembre 1987 p 567 599 Howard Schuman et Stanley Presser Questions and Answers in Attitude Surveys Experiments on Question Form Wording and Context New York Academic Press 1981 Wil Dijkstra et Johannes Van der Zouwen Response Behaviour in the Survey interview London Academic Press 1982 146 POLITIQUE N 20 Conclusion Revenons notre interrogation de d part Nous nous tions demand si la presse crite transmettait dans la pr sentation des r sultats de sondages pr lectoraux un message coh rent
7. les entrevues ont el les t faites 4 La description de la population quelle tait la population vis e 5 Sondages politiques et politique des sondages au Qu bec Montr al Soci t canadienne de science politique et Association canadienne des sociologues et anthropologues de langue fran aise 1979 p 12 136 POLITIQUE N 20 5 La m thode d chantillonnage comment furent choisis les individus appartenant l chantillon 6 Le taux de r ponse quel est le rapport entre le nombre de personnes ayant accept de collaborer l enqu te et l effectif de l chantillon apr s exclusion des personnes dont les caract ristiques ne correspon dent pas celles de la population vis e 7 Le nombre de questionnaires remplis 8 La m thode utilis e pour la collecte des informa tions a t on proc d par t l phone par entrevue domicile 9 Le libell des questions 10 Le nombre de r pondants pour chaque colonne quel est le nombre d informateurs partir duquel sont calcul s les pourcentages pour chaque colonne ou chaque cat gorie 11 Le nombre et la m thode de r partition des discrets fait on l hypoth se qu ils se comporteront de la m me fa on que les lecteurs non discrets 12 La m thode de projection lorsqu on se hasarde pr dire le r sultat en termes de si ges nous dit on comment on proc de 13 La pertinence des manchettes correspondent elles ce
8. les m dias des r sultats des sondages pr lectoraux Le comit avait publi des articles dans Le Devoir et avait constitu un inventaire des sondages dont les r sultats avaient paru dans la presse qu b coise C est partir de cette banque qu a t constitu le corpus de la pr sente tude dont voici les param tres La campagne lectorale pour les lections f d rales a d but le 1 octobre 1988 et a dur plus de sept semaines On a donc d cid de ne retenir que les enqu tes men es pendant cette p riode se terminant le jour de l lection soit le 21 novembre M me si des sondages politiques sont effectu s en tout temps et m me si leurs r sultats sont pr sent s et analys s dans la presse il reste que d s que s amorce une campagne lectorale le nombre de ces enqu tes augmente et que les organes de presse sont beaucoup plus attentifs leurs r sultats et y consacrent plus d articles Pour sa part le march des sondages politiques prend alors un tour beaucoup plus comp titif Il est donc pertinent de consid rer part toutes les enqu tes men es durant les quelques semaines de campagne lectorale et de les soumet tre une analyse commune L objectif vis tait d valuer le message transmis par les m dias Nous avons donc exclu tout sondage dont les r sultats n avaient pas t rendus publics ou dont la diffusion n avait pas emprunt le canal des m dias Plus exactement nous avon
9. que nous apprend le sondage 14 La signature de l article 15 La marge d erreur chaque article de journal reproduisant les r sultats d un sondage nous avons appliqu une s rie de quinze questions correspondant aux quinze crit res donne t on au lecteur le nom du commanditaire lui fournit on la marge d erreur etc Notons cependant que les questions n taient pas n cessaire ment toutes pertinentes Ainsi la question relative la m thode de projection n avait de sens que lorsqu il y avait bien projection De m me celle concernant la m thode de r partition des discrets n avait de pertinence que si l article faisait la r partition entre ceux qui ne savent pas et ceux qui ne r pondent pas les NSP et les NRP Beeud M DIAS ET SONDAGES 137 Le travail d valuation r alis s apparente en fait une analyse du contenu de chaque pr sentation des r sultats d un sondage Comme dans toute analyse de contenu il a fallu veiller l objectivit de la proc dure et en particulier la non ambigu t des questions appliqu es aux diff rents textes Dans la quasi totalit des cas compte tenu de la simplicit des crit res cette objectivit semblait pouvoir tre atteinte de fa on presque automatique toutes les questions l excep tion de celle concernant la pertinence des manchettes ne semblent en effet laisser que peu de place au jugement subjectif Ou bien les informations sont pr sentes
10. agne lectorale Apparemment la concurrence entre maisons de sondages ou entre m dias ne se traduit pas au moins sur un laps de temps aussi court un mois et demi par une plus grande attention port e aux informations m thodologiques Si l on d coupe le corpus de 32 sondages en quatre groupes de huit sondages et que l on calcule la moyenne des scores pour chacun des groupes on constate que les variations sont de faible ampli tude et sont plut t d sordonn es pour le premier groupe 3 octobre 22 octobre elle est de 51 9 pour le second 25 octobre 31 octobre de 49 4 pour le troisi me 1 novembre 12 novembre de 58 et pour le quatri me 14 novembre 19 novembre de 52 8 ll ressort galement que conform ment au bon sens les performances sont meilleures lorsque le journal est le com manditaire du sondage dont il pr sente les r sultats Ainsi la moyenne des scores est de 67 3 dans le cas des pr senta Besud M DIAS ET SONDAGES 139 tions faites par le commanditaire Elle est de 47 3 dans le cas des pr sentations de type repiquage c est dire lorsque le journal reproduit une nouvelle publi e ailleurs ou provenant d une agence de presse Ajoutons cependant que ce qui est vrai de fa on g n rale ne l est pas n cessairement pour chacun des sondages Dans le cas du sondage Sor com dont les r sultats ont t publi s le 18 novembre The Gazette qui titre de membre du groupe Sou
11. and Mail qui ne reproduit que les r sultats des sonda ges Environics et dans celui du Toronto Star qui d s le d but de la campagne affirme qu il s en tiendra aux r sultats des sondages Gallup a highly respected and independent polling agency on pourrait ajouter qu ils sont aussi plus s lectifs Comme pour les maisons de sondages nous avons calcul des scores moyens relativement la pr sentation des r sultats de sondages Nous avons distingu les cas de repiquage des cas de commandite L analyse du tableau lil nous permet de faire un certain nombre de commentaires Dans les cas de commandite nous excluons pour l instant les journaux qui n ont commandit qu un seul sondage deux groupes peuvent nettement tre distin gu s H y a d abord celui constitu du Globe and Mail du Soleil et de La Presse qui se distingue par d excellents scores Tr s clairement ces journaux au moins lorsqu ils agissent titre de commanditaires fournissent de nombreuses informations m thodologiques leurs lecteurs En donneraient ils encore plus s ils en recevaient davantage des firmes de sondages Pratiquent ils malgr tout des coupures sur ce plan Il nous est difficile ce stade de le dire II y a ensuite le groupe compos de la Gazette et du Toronto Star qui se caract rise par ses performances m diocres On a vu pr c demment que le Toronto Star pouvait au moins partiellement tre tenu responsable pour les faible
12. core attribu aux diff rents commanditaires et aux diff rents repiqueurs Le tableau II nous permet d affiner certaines des conclusions pr c dentes 6 Voir ce sujet ce qui sera dit plus loin ainsi que la section Les r sultats de l valuation les m dias 7 Ces pourcentages s appliquent toutefois comme il a t pr cis ant rieurement aux cas les plus apparents de repiquage Il est clair que si nous avions tenu compte de toutes les allusions des r sultats de sondage les pourcentages auraient t plus faibles Beaud M DIAS ET SONDAGES 141 On constate d abord que dans les r sultats diffus s par le commanditaire du sondage les performances sont excellentes pour quatre firmes IQOP Sor com Enviro nics et CROP puisque plus de trois informations m tho dologiques sur quatre sont alors fournies par les comman ditaires On peut tr s certainement attribuer un si bon score la fois aux firmes de sondages et aux commanditaires Les premi res ont peut tre fourni encore plus d informa tions que celles reproduites par les commanditaires Les seconds Le Soleil dans le cas des sondages IQOP et Sor com le Globe and Mail dans celui des sondages Environics et La Presse pour ce qui concerne les enqu tes CROP ont peut tre reproduit toutes les informations fournies par la maison de sondages Toujours dans le cas de r sultats diffus s par le commanditaire on pourra consid rer comme
13. ectorales de sondages politiques Mais pour que ces derniers jouent le r le de clarification des enjeux de d voilement de l tat des forces politiques qu on leur attribue souvent encore faut il que leurs r sultats soient accompagn s des informations m thodologiques permettant d en appr cier la validit Dans ce texte nous tentons pr cis ment de voir dans quelle mesure lors de la campagne lectorale f d rale de 1988 les m dias crits ont transmis le mode d emploi des sondages dont ils rappor taient les r sultats Les sondages d opinion c est un fait font partie int grante des campagnes lectorales modernes et leur publica tion en ponctue m me le d roulement Plusieurs y voyant un signe du caract re de plus en plus commercial des affaires publiques le d plorent Certains pour qui les sondages politiques aident le citoyen former et clairer son choix lec toral s en r jouissent Mais la plupart sont partag s quant aux bienfaits et aux m faits de ce ph nom ne social et politique En fait comme le mentionne Vincent Lemieux le d bat sur les sondages politiques touche souvent leur contri bution la d mocratie il s agit l d un d bat difficile dont 1 Vincent Lemieux Les sondages et la d mocratie Qu bec Institut qu b cois de recherche sur la culture 1988 p 11 Pour saisir les termes de ce d bat on se reportera entre autres Jean Stoetzel et Alain Girard Les sonda
14. er n a jamais t commanditaire et dans une moindre mesure La Presse la Gazette et le Super Hebdo sont plut t avares d informations permettant aux lecteurs d valuer la qualit des r sultats des sondages On notera enfin les performances plut t honorables du Montreal Daily News et surtout du Journal de Montr al mais dans ce dernier cas l chantillon d articles est mince Un premier bilan Comme on l a vu il est plus facile d accorder des bons points que des mauvais points On sait ainsi maintenant que le Globe and Mail et Le Soleil ont accompli un travail tr s s rieux au plan de la pr sentation des r sultats de sondages On sait aussi que les producteurs IQOP Environics Sor com et CROP ont fourni au moins leurs commanditaires un nombre important de renseignements m thodologiques Nous avons galement appris qu aux couples Toronto Star Galiup et The Gazette Angus Reid taient g n ralement associ es 144 POLITIQUE N 20 de m diocres performances Notons cependant que nous ne portons pas de jugement sur la qualit du travail de sondage effectu par les firmes ou du travail journalistique global des quotidiens mentionn s Non seulement notre valuation se limite la pr sentation des informations m thodologiques mais encore nous ne nous pronon ons pas sur la qualit m me de ces informations Ainsi nous ne disons pas que la marge d erreur indiqu e dans telle pr sentation de r sultats est
15. es en tant peut tre les commanditaires Toronto Star dans le cas de Gallup Dans le cas de repiquages c est encore IQOP qui domine moyenne de 65 9 suivi toujours d Environics 54 8 puis de Canadian Facts 50 d insight Canada Research 47 3 de Sor com 46 2 de Gal lup 44 et enfin d Angus Reid 39 6 On notera que si lon excepte d une part IQOP qui fait mieux dans le cas de repiquages que plusieurs maisons dans le cas d une commandite et d autre part Angus Reid les firmes obtiennent toutes peu pr s les m mes r sultats dans les cas de repiquages En fait on doit s attendre ne recevoir en moyenne que la moiti des informations m thodologiques jug es essentielles Si l on prend en compte maintenant l ensemble des pr sentations sans consid rer les firmes pour lesquelles il n y a que des commandites ou des repiquages on constate que c est toujours IQOP qui obtient le meilleur r sultat 72 9 Suivent Environics 66 3 Sor com 64 2 et tr s loin derri re Angus Reid 48 1 et Gallup 44 1 Cette comparaison cependant pose un probl me puisque la structure des performances part des repiquages dans l ensemble des pr sentations n est pas la m me dans chacun des cas Pour aller plus loin dans l analyse on peut essayer de limiter sans esp rer l annuler la part de variation attribuable aux m dias en prenant pour chaque sondage le meilleur s
16. forma tions qui lui auraient permis d valuer le message transmis pire il a m me parfois re u un message incoh rent o manchettes et donn es ne concordaient pas Devant les r sultats de cette tude on est un peu comme devant une bouteille que l on pourrait voir moiti pleine ou moiti vide On peut en effet se r jouir des excellents scores de certaines firmes et de certains m dias tout comme on peut d plorer les trop faibles notes obtenues par d autres m dias et d autres firmes On peut penser aussi mais cela rel ve d un autre d bat que le nombre lev de sondages ax s avant tout sur l intention de vote et l image des candi dats d tourne le citoyen de questions plus fondamentales On peut enfin juger que l absence d informations m thodologi ques n est pas aussi inqui tante que l excessive polarisation qui se fait autour d une technique le sondage de ses utilisateurs les firmes de sondages les sp cialistes de l opinion et de ses commentateurs 148 POLITIQUE N 20 TABLEAU valuation des pr sentations de r sultats de sondages selon les maisons productrices Moyenne des Moyenne des Moyenne des scores scores scores pour lorsque le lorsqu il s agit l ensemble l journal est de repi des pr senta rime g sondages aussi le com quages tions nombre manditaire nombre de de pr senta nombre de pr sentations tions pr sentations GALLUP 44 4 44 44 1 3 22 25 ANGUS REID
17. ges d opinion publique Paris PUF 1973 Pierre Bourdieu L opinion publique n existe pas Les Temps Modernes n 318 janvier 1973 p 1292 1309 Jean Beaufays dir Sondage et opinion politique Li ge D partement 132 POLITIQUE r 20 les termes d pendent largement de la conception de la d mocratie laquelle ils se rattachent Il y a moyen toutefois de participer au d bat sans avoir prendre position sur la nature m me de ia d mocratie Plusieurs admettront au del de leurs divergences que l information apport e par les sondages politiques doit tout le moins parvenir sans distor sion l lecteur potentiel que le message re u doit tre coh rent et que le r cepteur surtout doit disposer des moyens de l valuer D une part cela demande de comparer le message re u ou du moins le message transmis au message original c est dire au rapport de sondage produit par la maison responsable de l enqu te D autre part cela suppose une analyse de l information re ue par l lecteur potentiel ou d faut de celle transmise par les m dias Cette analyse permet de v rifier si l information est coh rente et si elle contient des outils marge d erreur etc qui permet tent de la comprendre et de l valuer autrement dit si elle comporte une m tainformation C est la deuxi me voie d analyse que nous avons choisie Comme il semble difficile d appr cier l information qui parvient r ellement aux lecteur
18. ion concernant l identit de la firme de sondages etc Notons que le total de chaque ligne n est pas n cessairement gal 78 dans le cas de la m thode de projection par exemple le crit re n a pas de pertinence dans 53 des 78 pr sentations
19. la bonne nous disons simplement que ce renseignement est donn Pr cis ment quels renseignements les journaux reprodui sent ils le plus fr quemment Lesquels tendent ils omettre Comme l indique le tableau IV l identit de la firme de sondage cela semble aller de soi la signature de l article et la p riode d interview sont fournies dans la plupart des cas La derni re information en particulier est n cessaire lors qu on tente de saisir les mouvements d opinion Il est heureux qu elle nous soit si souvent donn e sept fois sur huit onze reprises les manchettes des articles reproduisant les r sultats d un sondage nous ont paru peu quatre fois ou non sept fois pertinentes Cette non correspondance entre les r sultats des sondages et la manchette coiffant l article qui les reproduisait est inqui tante puisqu on sait que bien des lecteurs se contentent de lire les titres des articles L identit du commanditaire le nombre de questionnaires remplis et la marge d erreur sont mentionn s presque deux fois sur trois Les deux derniers renseignements en fait sont troitement reli s l un permettant de v rifier ou de calculer l autre Nous avons d couvert trois faits tonnants dans six cas ni l une ni l autre des informations n ont t fournies lorsqu on nous donne la marge d erreur on le fait souvent dix sept reprises de fa on incompl te et une fois sur quatre il n est pas possible de sa
20. moyennes les performances de Segma Lavalin et d Angus Reid et comme m diocres celles de Gallup Dans le cas de Gallup compte tenu du score plus lev lorsqu il y a repiquage 52 on peut penser que le commanditaire The Toronto Star est au moins en partie responsable de la pi tre performance Dans le cas d Angus Reid l inverse compte tenu du score habituellement plus lev obtenu par le journal Le Soleil quand il agit comme commanditaire on peut mettre l hypoth se que cette maison de sondages semble plut t avare d informations m thodologiques Pour ce qui est des repiquages le score est presque excellent dans le cas d IQOP 74 1 et plut t bon dans celui d Environics 61 5 et de Canadian Facts 57 2 Dans tous les autres cas le taux est voisin de 50 On notera toutefois que Gallup fait mieux qu in sight Canada Research Sor com et Angus Reid Les r sultats de l valuation les m dias Les r sultats des 32 sondages retenus ont t pr sent s par neuf journaux diff rents La Presse 17 mentions Le 142 POLITIQUE N 20 Devoir 16 mentions Le Soleil 15 mentions et The Gazette 14 mentions sont les plus gros consommateurs de r sultats de sondages En revanche le Montreal Daily News 5 mentions le G obe and Mail 4 mentions Le Journal de Montr al 3 mentions et Super Hebdo une seule mention sont de ce point de vue les plus sobres Dans le cas du Globe
21. n du nombre de questionnaires remplis Les r sultats de l analyse pr sent s et discut s ci des sous doivent donc tre pris un peu comme ceux des sonda ges c est dire avec prudence Tout d abord on constatera 138 POLITIQUE N 20 que tous les crit res ont t pond r s de la m me fa on comme si toutes ces informations m thodologiques avaient la m me importance Il n est pas dit qu avec un autre syst me de pond ration les r sultats auraient t tout fait les m mes n est pas dit non plus qu avec d autres crit res la dur e de l entrevue par exemple nous serions arriv s aux m mes conclusions Enfin comme il a t mentionn ci dessus l valuation elle m me a impliqu des d cisions des choix personnels et il n est pas s r que d autres juges auraient fait les m mes choix que nous Une premi re synth se En tout 78 pr sentations de r sultats concernant 32 sondages diff rents ont t retenues Pour chaque pr senta tion de sondage nous avons calcul un score qui correspond au rapport entre le nombre de r ponses positives et le nombre total de questions pos es ou de crit res utilis s Un premier examen de ces donn es tr s h t rog nes puisque les scores s chelonnent de 21 4 90 permet de tirer quelques conclusions g n rales Tout d abord on constate que les performances ne semblent ni s am liorer ni se d t riorer tout au long de la camp
22. on nous donne le nom du commanditaire et alors on accorde un point pour chaque information ou bien elles ne le sont pas il n est pas fait mention du nombre de questionnaires remplis et alors on n accorde pas de point Dans la pratique toutefois certains des quinze crit res n ont pu malgr leur simplicit tre appliqu s de fa on aussi m canique que pr vu Par exemple plusieurs reprises l information concernant la marge d erreur tait donn e mais de fa on incompl te on parlait d une marge de X mais on oubliait de sp cifier 19 fois sur 20 Dans ce cas nous avons d cid d accorder un demi point De m me nous nous sommes aper us que l on mentionnait rarement dans les articles la m thode de r partition des discrets en revanche le nombre des NSP et des NRP tait fr quemment d voil Dans ce cas encore une fois nous avons d cid d accorder des demi points Pour trois autres crit res la description de la population le nombre de questionnaires remplis la m thode de projection il nous a fallu porter un jugement plus subjectif que pr vu Aussi avons nous allou des demi points lorsque l information bien qu utilisable nous paraissait incompl te par exemple quand pour faire une projection l article disait s appuyer sur les r sultats des lections pr c dentes ou qu elle nous semblait confuse par exemple quand on parlait d un chantilion de X personnes sans pr ciser qu il s agissait bie
23. rence entre m dias ou entre maisons de sondages conduit une plus 11 Un livre comme celui de Vincent Lemieux Les sondages et la d mocratie devrait contribuer informer au moins le public universitaire 12 Si du moins ce qui ne devrait pas tre trop contestable les r sultats de l tude de cas sont un bon indicateur de la pratique habituelle lors des campagnes lectorales Besud M DIAS ET SONDAGES 147 grande densit pour ne pas dire qualit du message m tho dologique ce sujet la performance plut t moyenne de producteurs et de m dias pr sents depuis fort longtemps sur le march des sondages laisse croire que la comp tition n est pas suffisante en elle m me pour imposer des normes lev es ou qu elle ne joue tout simplement pas sur ce plan Bien s r on pourra objecter que nous avons mis la barre un peu haut et que certaines informations m thodologiques que nous avons jug es essentielles ne l taient peut tre pas ll reste que des renseignements aussi cruciaux que le libell des questions et le taux de r ponse ne sont que rarement fournis dans les pr sentations de r sultats de sondages et que la marge d erreur qui est l information peut tre la plus facilement utilisable par le lecteur et la plus ais ment trans missible n est donn e de fa on compl te qu peine deux fois sur trois Trop souvent donc avant l lection de 1988 le lecteur des journaux analys s n a pas dispos des in
24. s il faudrait un sondage aupr s des destinataires des r sultats de sondagesl nous nous contenterons d tudier celle qui leur est transmise par les m dias et plus pr cis ment par la presse crite L analyse s appuie sur une tude de cas ses conclusions en ont par cons quent les limites On ne peut assurer en particulier qu elles s appliquent d autres cas autres campagnes lectorales autres m dias autres syst mes lectoraux On peut toutefois penser qu elles indiquent une piste int ressante pour une tude comparative des messages portant sur les r sultats de sondages lectoraux de science politique de l Universit de Li ge 1975 Actes de la II Rencontre interuniversitaire des politistes francophones Alfred Max La r publique des sondages Paris Gallimard 1981 Les sondages Pouvoirs n 33 1985 2 Beno t Gauthier a d ailleurs d j r alis une tude comparable sur certains points la n tre Les sondages politiques au Qu bec leur m thodologie et leur traitement journalistique 1979 1981 Ottawa Universit d Ottawa D partement de science politique 1982 Beaud M DIAS ET SONDAGES 133 Le corpus Le cas retenu pour notre analyse est celui de la campagne lectorale f d rale de 1988 En octobre et novembre de cette ann e l le Comit des sondages du Regroupement qu b cois des sciences sociales s tait r uni plusieurs reprises pour analyser la diffusion par
25. s avions tenu compte de toutes les allusions mais o aurait il fallu s arr ter des r sultats d enqu tes pr lectorales Les crit res et proc dures d valuation Dans un petit ouvrage publi il y a un peu plus de dix ans le Comit des sondages de la Soci t canadienne de science politique et de l Association canadienne des sociologues et anthropologues de langue fran aise pr sentait une s rie de crit res permettant d appr cier les divers sondages et la qualit de leur diffusion C est dans une large mesure ces m mes crit res que le Comit des sondages du Regroupement qu b cois des sciences sociales a appliqu s aux premiers sondages Gallup lors de la campagne lectorale de 1988 Ce sont ceux l aussi que nous avons utilis s pour porter un jugement sur un corpus beaucoup plus large deux diff ren ces pr s toutefois certains des crit res ont t simplifi s quelques autres ont t ajout s Ainsi nous n avons pas tenu compte des informations concernant la dur e de l entrevue avec les r pondants ou les contraintes impos es par le commanditaire au sondeur En revanche nous avons recher ch celles qui concernent la m thode de projection ou la marge d erreur Les quinze crit res retenus sont donc les suivants 1 L identit du commanditaire pour qui le sondage a t il t r alis 2 L identit de la firme de sondage qui a effectu le sondage 3 La p riode d interview quand
26. s restreint le corpus aux textes puisque ce sont eux et non les sondages qui constituent les l ments de 3 Les sondages et la campagne lectorale un premier bilan Le Devoir lundi 24 octobre 1988 p 9 La presse qu b coise et les sondages Gallup Le Devoir vendredi 4 novembre 1988 p 9 Les sondages diffusent une image d form e de l opinion Le Devoir samedi 12 novembre 1988 p A 13 134 POLITIQUE N 20 notre tude diffus s dans les journaux en vente Montr al et pr sentant les r sultats de sondages pr lectoraux effec tu s l chelle du Canada du Qu bec de la r gion de Montr al ou de celle de Qu bec Plus pr cis ment nous n avons retenu que les articles faisant tat soit des intentions de vote pour les lections du 21 novembre 1988 soit des r actions des lecteurs aux d bats des chefs ayant eu lieu les 24 et 25 octobre Ce que nous avons voulu mesurer en fait c est la qualit des messages qu un lecteur montr alais pouvait recevoir par l interm diaire des journaux Nous avons ainsi d pouill Le Devoir La Presse The Gazette le Montreal Daily News aujourd hui disparu et Le Journal de Montr al soit les cinq quotidiens de la m tropole Ont galement t analys s Le Soleil de Qu bec que l on peut trouver dans de nombreux kiosques montr alais ainsi que The Globe and Mail journal anglophone diffusion pancanadienne et en vente peu pr s partout Montr
27. s scores obtenus par Gallup Mais qu en est il de la Gazette Tout comme Le Soleil 8 Comme cela a d j t pr cis notre collecte dans le cas du Toronto Star a t moins syst matique Aussi malgr le nombre relativement r duit d articles tir s du quotidien torontois ne pouvons nous parler son sujet de sobri t Beaud M DIAS ET SONDAGES 143 la Gazette a t commanditaire titre de membre du r seau Southam des sondages Angus Reid Les deux quotidiens ont galement commandit le sondage Sor com dont les r sultats ont paru le 18 novembre 1988 Pour soupeser les m rites de chacun des journaux on peut comparer leurs performances L o Le Soleil obtient en moyenne 70 7 la Gazette ne r colte que 48 5 incontestablement Le Soleil est plus attentif aux informations m thodologiques que la Gazette Dans les cas de repiquage les moyennes encore une fois s approchent de 50 Toutefois trois journaux se distinguent Le Soleil par son score particuli rement lev cela est relatif videmment La Presse et Le Devoir par leurs scores plut t m diocres Si l on consid re maintenant les moyennes globales on constate avec toutes les limites qu impose une telle comparaison que Le Soleil et le Globe and Mail se d tachent des autres par l excellence de leur travail de reproduction des informations m thodologiques l inverse le Toronto Star Le Devoir qui il faut le men tionn
28. tham News tait le comman ditaire du sondage a obtenu un moins bon score que Le Devoir qui lui reprenait une nouvelle de la Presse canadienne Les r sultats de l valuation les maisons de sondages Les 32 sondages qui constituent le corpus d analyse ont t effectu s par neuf firmes diff rentes Gallup vient en t te avec huit enqu tes suivent Angus Reid Environics et Insight Canada Research avec quatre sondages puis Sor com et CROP avec trois enfin Canadian Facts Segma Lavalin et IQOP avec deux Compte tenu de la grande diversit des scores il nous a sembl pertinent malgr les limites d une telle proc dure nous n analysons pas les rapports de sonda ges mais la fa on dont les m dias les utilisent ou les commu niqu s de presse qui en manent de faire un croisement entre ces performances et les maisons productrices des sondages voir tableau Ce croisement permet de faire un certain nombre de constatations Dans le cas de r sultats diffus s par le commanditaire du sondage il est clair que les meilleurs scores sont obtenus pour les sondages 1QOP moyenne de 87 Environics 80 6 CROP 176 2 et Sor com 73 2 Viennent ensuite Segma Lavalin 67 3 et loin derri re Angus Reid 56 7 et surtout Gallup 44 4 On ne saurait toutefois imputer n cessairement les mauvais r sultats d Angus Reid et de Gallup aux firmes 140 POLITIQUE N 20 productrices les responsabl
29. voir si on parle du nombre de questionnaires remplis ou de l effectif de l chantillon initial Les m dias une fois sur deux ne parlent pas de la m thode de collecte utilis e Si l on peut pr sumer que dans bien des cas la collecte a t effectu e par t l phone on ne pourrait cependant le certifier Gallup par exemple a Beaud M DIAS ET SONDAGES 145 l habitude de proc der par entrevues domicile ou comme ce fut le cas pour son dernier sondage avant les lections par entrevues personnelles et par t l phone On dit souvent on poss de beaucoup de donn es sur ce probl me que le libell des questions peut avoir une influence sur la r partition des r ponses On s attendrait donc ce que l information concernant ce libell soit fournie en priorit par les m dias Or en fait il est tr s rare qu on donne au lecteur au moins la formulation de la question sur l intention de vote ce qui priori est tr s inqui tant Les probl mes d chantillonnage peuvent para tre plut t techniques et sembler comme ceux qui touchent la r parti tion des discrets ou aux m thodes de projection appartenir la cuisine des firmes de sondages Cela explique peut tre pourquoi on n apporte peu pr s jamais d informations sur ces sujets Et pourtant ils sont d importance Comme le montrent les analystes de Sor com voir Le Soleil ou Le Devoir du 18 novembre 1988 les divers sc narios de r partition des
Download Pdf Manuals
Related Search