Accueil » Sondages » Méthodologie » L’expérience est une lanterne que l’on porte dans le dos et qui n’éclaire que le chemin parcouru

L’expérience est une lanterne que l’on porte dans le dos et qui n’éclaire que le chemin parcouru

Vendredi, 8 juin 2007 à 22:06 · Catégories: Méthodologie, Sondages

C’est maintenant un classique: après chaque élection générale, les sondeurs se lancent en pleine introspection afin de trouver pourquoi le scrutin ne se déroule pas comme ils l’avaient prévu. Ce matin dans La Presse (pas de lien disponible), Claire Durand, professeure au département de sociologie à l’Université de Montréal, dévoile les résultats d’une étude réalisée en collaboration avec CROP afin de tenter d’expliquer les raisons pour lesquelles le vote de l’ADQ avait été sous-estimé par les sondeurs à la veille de l’élection générale du 26 mars dernier.

Mais d’abord, une petite mise en contexte s’impose: le texte de Mme Durand porte spécifiquement sur le sondage CROP paru deux jours avant le scrutin, soit le 24 mars. Or, trois autres sondages étaient parus le même jour.

Sondage	LIB	ADQ	PQ	VRT	QS	Aut.	Écart total*	Écart total**
Résultats du scrutin (arrondi à l’unité près)	33	31	28	4	4	0
Angus Reid Strategies (sondage par Internet, réalisé du 22 au 23 mars, N=838, ME=3,5%)	30	31	27	7	5	0	4	6
CROP (sondage téléphonique, réalisé du 15 au 22 mars, N=1053, ME 3,1%)	34	25	28	8	5	0	7	10
Léger Marketing (sondage téléphonique, réalisé du 19 au 23 mars, N=1000, ME=3,1%)	35	26	29	5	4	1	8	10
The Strategic Counsel (sondage téléphonique, réalisé du 21 au 22 mars, N=1000, ME=3,1%)	30	28	31	6	5	0	9	10

* Écart total pour les trois principaux partis.
** Écart total pour tous les partis.

Les nombres en caractères gras indiquent les scores « prédits » par les sondeurs dont l’écart par rapport au score « réel » est supérieur à la marge d’erreur. On peut voir qu’Angus Reid Strategies a les résultats qui sont les plus près du vote réel (lui seul met le PQ en troisième place) tandis que CROP et Léger sous-estiment le vote adéquiste selon un écart supérieur à la marge d’erreur. Quand à Strategic Counsel, il n’a aucun écart individuel qui dépasse la marge d’erreur (pour les trois principaux partis, il est « flush » à chaque fois), mais lorsque l’on cumule les écarts, c’est le sondage qui s’avère le moins exact (il allait jusqu’à prédire une première place au PQ).

(Petite parenthèse sur Angus Reid Strategies: c’est une firme basée principalement à Vancouver, fondée par un vieux routier des sondages d’opinion au Canada anglais, Angus Reid, et qui occupe un créneau encore peu occupé au Canada: les panels sur Internet (pour ceux qui sont à l’aise en anglais et qui veulent en savoir plus sur les panels en ligne, il y a un document explicatif (format pdf) ici). Le sondage que cette firme a publié le 24 mars est passé complètement inaperçu au Québec (quand nous disons complètement inaperçu, nous nous incluons là dedans; nous n’en avons pris connaissance que quelques jours après le jour J). Pourtant, ils se vantent d’avoir réalisé le sondage le plus précis lors des dernières élections générales au Québec et au Manitoba (c’était en mai). Fin de la parenthèse)

Selon l’étude postélectorale de Claire Durand, 16% des répondants qui avaient révélé leur choix lors du sondage ont changé d’avis au moment de voter (on parle d’une personne sur six, quand même!). De plus, les « indécis » et les « discrets » se répartissent de la même manière que les autres répondants, ce qui semble confirmer que la répartition « proportionnelle » des indécis lors des sondages serait, dans le contexte actuel, la plus susceptible de donner des bons résultats. Or, en tenant compte des mouvements de dernière minute (rappelons que le sondage CROP a débuté le 15 mars), on revient à l’intérieur de la marge d’erreur. Donc, la principale erreur de CROP est vraisemblablement d’avoir échelonné le sondage sur huit jours. Quand on y pense, c’est énorme sur une campagne électorale de 33 jours.

La grosse conclusion de Mme Durand, c’est que le Québec est divisé en trois et que si les sondeurs se sont trompés, c’est parce que l’électorat est très volatile.

Cela nous rappelle une controverse similaire en 1998 alors que les sondeurs avaient sous-évalué le vote libéral et mis le PQ largement en avance avant l’élection générale du 30 novembre 1998. Après coup, on a découvert que les indécis avaient des caractéristiques proches de l’électorat libéral, que la répartition proportionnelle des indécis n’était pas valide et qu’il fallait plutôt transférer la très grande majorité des indécis au Parti libéral (la fameuse méthode 60-30-10). En 2003, ça a marché mais maintenant, ça ne marche plus et la répartition proportionnelle semble redevenir valide.

Bref, comme le disait si bien Confucius (pour vrai!): « L’expérience est une lanterne que l’on porte dans le dos et qui n’éclaire que le chemin parcouru. »

Vendredi, 08 juin 2007

Que s’est-il passé?

Claire Durand
La Presse

L’auteur est professeur titulaire au département de sociologie de l’Université de Montréal

Au moment où tant de politiciens, de militants, de journalistes invoquent les sondages, il est important de se pencher sur les raisons qui pourraient expliquer pourquoi les sondages n’avaient pas bien estimé le vote pour l’Action démocratique du Québec (ADQ) lors des dernières élections, l’écart entre l’intention de vote déclarée et le vote ayant été de 5%.

Deux raisons sont habituellement invoquées lorsque les sondages « se trompent » : Soit les électeurs ont changé d’avis entre le moment où ils ont été interrogés et le jour du scrutin, soit les non-répondants – à la question sur l’intention de vote ou au sondage lui-même – n’avaient pas la même intention de vote que les répondants.

Notre équipe de recherche (John Goyder, de l’Université de Waterloo, et moi-même) a collaboré avec CROP et La Presse au cours des dernières élections pour mener une recherche permettant entre autres de répondre à ces questions.

Dans la semaine qui a suivi l’élection, nous avons effectué un sondage auprès des répondants aux sondages préélectoraux faits par CROP durant la campagne. Plus de 80% des répondants au dernier sondage CROP effectué du 15 au 22 mars, soit de deux à dix jours avant les élections du 26 mars 2007, ont été joints après les élections.

Parmi les 602 personnes qui ont révélé leur vote, un peu plus de 16% n’ont pas voté comme elles avaient dit vouloir le faire. Ces répondants «volatiles» se répartissent comme suit: 4,1% sont passés à I’ADQ, 3,3% au PLQ; 6,9% au PQ et 2,2% à Québec solidaire ou au Parti vert. Qui a perdu dans ces mouvements? Les pertes touchent l’ADQ pour 4,1%, le PLQ pour 3,2% le PQ pour 2,9% et Québec solidaire ou le Parti vert pour 6,0% (ces derniers changements se faisant proportionnellement plus vers le Parti québécois).

Il y a donc eu des mouvements entre les partis durant les derniers jours avant le scrutin mais ceux-ci ont été plus favorables au Parti québécois qu’à l’ADQ et ont nui plus aux deux petits partis qu’aux trois principaux.

Par ailleurs, 7,0% de ceux qui ont révélé leur vote s’étaient dits indécis ou n’avaient pas révélé leur intention de vote au sondage préélectoral. Ils se répartissent sensiblement de la même manière que les autres répondants. Au total, les mouvements provenant des autres partis ou des indécis vers l’ADQ ont donc atteint 6,7% alors qu’ils atteignaient 5% vers le PLQ, 8,9% vers le PQ et 2,7% vers Québec solidaire ou le Parti vert.

Après l’ensemble de ces mouvements, le vote déclaré lors du sondage postélectoral se situe à l’intérieur de la marge d’erreur si on le compare aux résultats du scrutin. L’ADQ se situe à 27,6%, soit à 3,2% de moins que le vote obtenu, et le PLQ à 31,3% (1,8% de moins que le vote). Toutefois, le Parti québécois est maintenant surévalué à 32% (à la limite de la marge d’erreur étant donné le vote de 28,3%). La prise en compte des mouvements déclarés permet donc d’obtenir une estimation du vote à l’intérieur de la marge d’erreur mais, étant donné le peu d’écart entre les partis, elle ne permet toujours pas de bien estimer l’ordre d’arrivée, mettant même le Parti québécois au premier rang.

Il faut donc conclure que c’est en premier lieu la volatilité de l’électorat qui explique l’écart entre le dernier sondage CROP et le vote. Il faut également conclure qu’il n’y a pas eu, du moins en fin de campagne, un mouvement vers l’ADQ nettement. plus fort que vers les autres partis.

Pourquoi changer?

Tous les répondants qui n’indiquaient pas avoir voté comme ils en avaient exprimé l’intention ou qui étaient indécis au départ ont été interrogés sur les raisons de leur choix. La moitié des répondants qui sont passés à l’ADQ justifient leur choix par une simple volonté de changement. Suivent le chef et le programme comme principales explications. Pour ce qui est des mouvements vers le PLQ, ils sont davantage justifiés par le candidat dans la circonscription et par l’importance accordée à l’expérience et à la continuité.

Enfin, les répondants qui sont allés vers le Parti québécois sont les plus nombreux (près de 40%) à ne pas donner de justification à leur changement. Suivent trois raisons qui arrivent à égalité : le fait de se définir comme souverainiste, le candidat dans le comté et le fait d’être contre un ou l’autre des deux autres partis.

Pouvons-nous tirer de ces informations des enseignements pour une éventuelle campagne? Il ressort des éléments présentés – et les derniers sondages publiés semblent le confirmer – que le Québec est en ce moment divisé en trois parties relativement égales et que les mouvements entre les partis politiques sont relativement courants. Ces mouvements ne sont pas nécessairement motivés par des changements fondamentaux dans les opinions et relèvent plutôt d’éléments conjoncturels. Dans une telle situation, l’estimation du transfert des intentions de vote en nombre de circonscriptions relève de la haute voltige.

Partagez cet article:

(Aucun vote jusqu'à présent)

Loading ...

Mots-clés: ADQ, Angus Reid, campagne électorale, Claire Durand, Confucius, CROP, élection générale 2007, intentions de vote, La Presse, Léger Marketing, méthodes quantitatives, PLQ, PQ, sondage, Strategic Counsel

Commentaires

2 commentaires sur “L’expérience est une lanterne que l’on porte dans le dos et qui n’éclaire que le chemin parcouru”

À propos du «manque» de sondages… | QuébecPolitique.com dit :

4 décembre 2008 à 12 h 10 min

[...] Angus Reid Strategies, 24 mars 2007 (ce sondage était passé sous le radar lors de sa publication, mais on en parle ici) [...]
Sondage Angus Reid Strategies de décembre 2008 | QuébecPolitique.com dit :

6 décembre 2008 à 21 h 32 min

[...] ils ont, nous soulignons que ce sont eux qui, parmi l’ensemble des firmes de sondage, avaient été les plus proches des résultats réels du scrutin lors de la dernière élection [...]