Translate

vendredi 31 août 2012

Un sondage par jour...

Bonjour,

Un CROP aujourd'hui, que j'intègre et qui confirme mes analyses d'hier, soit qu'il y aurait eu hausse significative de la CAQ d'environ 3 points depuis le 7 août dans l'ensemble de la population et une baisse significative du PQ, du même ordre, seulement chez les francophones toutefois. Pour le PLQ, calme plat chez les francophones, une baisse encore non significative de près de 3 points au total mais qui est en partie due au sondage Forum dont la répartition selon la langue est fautive.

Dans mes analyses, j'ai intégré les sondages de Forum puisque, après moult vérifications, je n'ai pas de raison scientifique d'exclure ces sondages. Ils donnent la plupart du temps des résultats similaires à ceux de CROP chez les francophones. Ils doivent toutefois être corrigés pour la proportion de francophones, ce que j'ai fait dans ma dernière estimation.Comme vous le verrez plus loin, j'ai intégré un "exercice de style", inspiré des pratiques de Michel Lepage, dont beaucoup se rappellent comme "le sondeur du PQ" (jusqu'en 2003 environ).

Pour l'ensemble de la population


D'abord, l'évolution pour l'ensemble, après répartition non proportionnelle des discrets. J'ai encore vérifié dernièrement et il semble évident que les discrets ont un profil qui se rapproche plus du PLQ, d'où attribution de 50% des discrets au PLQ, 25% au PQ et 25% à la CAQ. Vous remarquerez que je n'attribue pas de discrets aux petits partis puisque, traditionnellement, le vote pour ces partis est surestimé. Les PQ et le PLQ sont à égalité et la CAQ s'approche des deux autres, ce qui rappelle 2007, à l'exception du fait qu'à l'époque le PLQ était un peu en avance sur le PQ dans les sondages.


 Et les francophones?

 Chez les francophones, seule la baisse du PQ est significative. Les deux autres partis seraient pratiquement à égalité. Différence avec 2007, à cette époque, le PQ et l'ADQ étaient plus proches l'un de l'autre; le PLQ était à peu près au même niveau.



Exercice de style plausible...

Comme je l'ai montré dans mon billet sur le vote des non francophones, il existe des différences entre les firmes tant en ce qui a trait à la proportion de non francophones (non corrigée dans le cas de Forum Research) que des intentions de vote estimées. J'ai donc fait l'exercice suivant: J'ai maintenu l'attribution non proportionnelle des discrets chez les francophones mais, pour les non francophones,d'une part j'ai corrigé pour qu'il y ait toujours 20% de non francophones dans l'échantillon et d'autre part, j'ai attribué les intentions de vote suivantes: pour le PLQ 70%, tel que justifié dans mon billet précédent (Le paradoxe de l'anglo péquiste). Pour le PQ et la CAQ, j'ai attribué la médiane des estimations des firmes depuis le 7 août, ce qui donne 7% au PQ et 14% à la CAQ. Voici l'estimation que j'obtiens. Elle produit un seul résultat significatif, soit une baisse du PQ de 0,11 points par jour.  




Ma première prédiction...


Si l'estimation avec répartition proportionnelle des discrets pratiquée par les firmes donne de bons résultats,   les sondeurs seront soulagés. Et tout le monde va vouloir me crucifier!

Si l'estimation des sondeurs est infirmée, on se questionnera sans doute et on reviendra peut-être à une répartition non proportionnelle des discrets OU, plus vraisemblablement, on dira que les électeurs ont changé d'idée au cours des derniers jours (sourire!). Ceci dit, les mouvements de dernière minute dans cette élection sont plausibles. Dans mes recherches antérieures, j'ai pu constater que de 10% à 15% des répondants aux sondages pré-électoraux affirment après l'élection avoir voté pour un parti différent de celui pour lequel ils avaient dit vouloir voter.

jeudi 30 août 2012

Si la tendance se maintient..revisitée

Bonjour,

Mise à jour: Le sondage Forum était là mais personne n'avait tweeté l'information, j'ai donc refait les analyses en intégrant le dernier sondage Forum.

Si la tendance se maintient,... y en aura pas de tendance... ou si peu! Toutes mes analyses montrent que c'est le calme plat, sauf pour une montée faible mais significative de la CAQ au total et une baisse équivalente mais significative du PQ chez les francophones. Et donc, calme plat seulement pour le PLQ.

Voici le portrait de l'évolution des intentions de vote pour l'ensemble de la population. Ces estimations sont faites à partir de tous les sondages effectués par les trois firmes à partir du 7 août 2012. Les sondages de Forum research n'ont pas été corrigés pour qu'ils reflètent la bonne proportion de francophones. Si tel était le cas, cela aurait pour effet d'augmenter l'intention de vote pour le PLQ et de faire baisser celle des deux autres partis. Notons que, comme il n'y a que 12,6% de non francophones dans le dernier sondage de Forum et que la firme ne pondère toujours pas en fonction de la langue, ceci explique la différence entre leur dernier sondage et le précédent. Si la firme tenait compte de la langue, l'estimation de l'intention de vote pour le PLQ serait à 34,8 comme pour trois des 4 derniers sondages (le dernier aurait donné 36,4).

Le graphique montre que les intentions de vote pour le PLQ et le PQ sont à égalité, après répartition non proportionnelle des discrets. Il montre aussi une tendance à la hausse pour la CAQ (+0,14 par jour), qui serait passée de 24,1% à 26,9% en trois semaines. Le PLQ serait à 28,6 et le PQ à 32,7%, une différence presque significative mais qui est influencée par le dernier Forum qui est, comme on l'a vu, biaisé par un pourcentage trop faible de non francophones. Avant l'entrée du Forum, on a le PLQ à 29,6 et le PQ à 31,3.




 

Et les francophones?

Comme beaucoup rappellent l'importance du vote chez les francophones, j'ai estimé les intentions de vote chez les francophones en faisant une répartition non proportionnelle des discrets, soit 50% au PLQ, 25% au PQ et 25% à la CAQ en présumant que la proportion de discrets était la même que pour l'ensemble de la population. Selon les informations qui m'ont été fournies, cela surestime un petit peu la proportion de discrets puisqu'il y a un peu plus de discrets chez les non-francophones mais l'impact est minime au total.

Les estimations des firmes diffèrent. Après répartition non proportionnelle des discrets,  Léger donne 4 points de moins au PLQ que Crop et 6 points de moins que Forum dans son dernier sondage. Léger donne également 3 points de plus au PQ que les deux autres firmes. Ces différences peuvent provenir des méthodologies. Je fais des analyses en ce moment pour voir ce qui distingue les firmes à un niveau plus fin. Je devrais revenir sur cette question dans un prochain message.

Il y a une baisse significative du PQ chez les francophones (-0,14 par jour), à peu près équivalente à la hausse de la CAQ au total. Il n'y a pas d'évolution significative des intentions de vote pour le PLQ et la CAQ. L'estimation actuelle serait que le PQ est à environ 35%, la CAQ à environ 28% et le PLQ à 27%.


Commentaire:

Si les élections qui se suivent se ressemblaient, cette élection pourrait ressembler à celle de l'Alberta en 2012 ou à celle du Québec en 1998, des élections où les sondages ne montraient pas une forte évolution  des intentions de vote pendant la campagne et où, au final, les résultats ont fait mentir les sondeurs. Elle pourrait toutefois ressembler aussi à celle de 2007, où l'ADQ avait fini par rattraper le PQ permettant l'élection d'un gouvernement libéral minoritaire mais il semble qu'il manque de temps pour ce faire. Elle pourrait tout autant sinon plus mener à un gouvernement péquiste minoritaire.

Une chose est certaine, cette campagne ne ressemble pas à celles de 2003 au Québec où les intentions de vote pour le PLQ s'étaient "envolées" à partir de la mi-campagne ni aux élections fédérales de 2011 au Québec où la même chose s'était produite pour le NPD.

Au plaisir!


mardi 28 août 2012

Dernier droit

Bonjour,

Avec le nouveau Crop, on peut refaire une comparaison et une estimation de l'évolution. A noter que le dernier Forum date d'une semaine, le dernier Léger de samedi et le CROP d'aujourd'hui. Les sondages de la "dernière semaine" ne se comparent donc pas vraiment dans le temps.

Voici plus bas le tableau de l'évolution des intentions de vote après répartition proportionnelle des indécis telle que publiée et après répartition non proportionnelle (50 PLQ, 25 PQ, 25 CAQ) des discrets. Ce type de répartition non proportionnelle a longtemps été utilisée par les firmes elles-même et est utilisée presque uniquement -- sinon uniquement -- au Québec à ma connaissance. L'idée avait été proposée à l'époque par le sociologue Pierre Drouilly.

On note une estimation presque identique entre les deux firmes québécoises.  Après répartition non proportionnelle des indécis, le PLQ est à 29,5 pour les deux firmes, le PQ à 31,7 pour Léger, 31,2 pour CROP. Enfin, Léger met la CAQ à 27,7 et Crop à 27,2. C'est remarquable! La différence entre le PQ et le PLQ serait de 2,2 points en faveur du PQ pour Léger, de 1,7 point pour CROP.

Passons maintenant à Forum.  Les estimations de Forum ont varié plus que celles des deux autres firmes entre les deux derniers sondages. J'ai montré dans un autre message que ceci était dû à la proportion de non francophones dans les échantillons, proportion qui n'est pas redressée par la firme. Il demeure que Forum donnait dans son sondage -- publié mercredi dernier -- 6 points de plus au PLQ que les autres firmes, entre 2,3 et 2,8 points de moins au PQ et entre 3,2 et 3,7 points de moins à la CAQ. Étant donné la taille des échantillons, ces différences sont significatives. Elles n'existaient pas dans les sondages précédents toutefois et ceci pour une seule raison, soit la non pondération des francophones, sur représentés dans les échantillons précédents de la firme.

Pour ce qui est de l'évolution des intentions de vote, il y aurait une légère progression de la CAQ et une légère diminution du  PLQ au cours des deux dernières semaines selon les deux firmes québécoises. Le PQ est relativement stable. Le sondage Forum d'il y a une semaine montrait une progression de Québec solidaire au détriment du PQ, une étincelle? Cette progression n'a pas été confirmée par les sondages Léger et Crop subséquents.

Pour ce qui est de l'écart entre le PQ et le PLQ, il est de 6 ou 7 points en faveur du PQ selon Léger et Crop mais de 6 points en faveur du PLQ selon Forum. Toutefois, après répartition non proportionnelle des indécis, il est en faveur du PQ -- 2,2 points pour Léger, de 1,7 points pour Crop. Pour Forum, elle est de 6,7 points en faveur du PLQ. Comme pour d'autres dossiers, les élections départageront!

Les discrets

Le dernier CROP confirme la relation forte entre la proportion de discrets et le vote estimé pour le PLQ (r= -0,79, p=.01) alors que pour les deux autres partis, cette relation est faible et non significative (PQ: 0,29, CAQ: 0,17). Noter que, traditionnellement, tous les répondants qui ne révèlent pas leur intention de vote  -- y compris ceux qui disent qu'ils n'iront pas voter ou qu'ils annuleront -- sont inclus dans les discrets. J'ai donc préféré maintenir cette pratique par cohérence avec le passé. Toutefois, il faut noter que les proportions varient selon les firmes, 5-6% pour Forum (excluant possiblement ceux qui disent ne pas vouloir aller vote), 11% pour Léger, 17% pour CROP. Ceci peut être liée aux méthodologies différentes employées.


Au plaisir






lundi 27 août 2012

Le vote des francos 2007-2012

Bonjour,

Comme les sondages de cette élection me semblent ressembler à ceux de 2007, je me suis demandé quelle avait été la répartition des intentions de vote et du vote pour les divers partis en 2007 chez les francophones. Le tableau présentent les intentions de vote chez les francophones pour les derniers sondages de la campagne de 2007 pour Léger et Crop de même que le vote déclaré dans le sondage Crop post-campagne. On peut comparer ces données à celles des derniers sondages publiés.



Le vote des francophones

Intention de vote 2007 Vote 2007 Intention de vote 2012

CROP  Léger CROP Crop (16-08) Forum (21-08) Léger (25-08)
PLQ 25 26 23 21 28 18
PQ 33 33 33 39 34 38
ADQ/CAQ 29 30 35 26 26 31
Autres 13 11 8 15 13 12

Quelques constatations:

1) La principale différence entre 2007 et maintenant est que, en 2007, la CAQ et le PQ étaient à égalité chez les francophones alors qu'en ce moment, du moins dans les derniers sondages, le PQ fait mieux chez les francophones que la CAQ. Pour arriver au même résultat qu'en 2007, en supposant que les forces des partis sont réparties aux mêmes endroits, il faudrait que la CAQ fasse des gains au détriment du PQ et que le PLQ demeure stable.

2) Les trois sondages de 2012 se différencient sur plusieurs plans.
- La CAQ est au même niveau chez Forum et Crop, deux sondages téléphoniques, plus élevée chez Léger. Ce n'est pas parce que le sondage Léger est plus récent: Les sondages des trois firmes montrent la CAQ stationnaire chez les francophones.
- Le PQ est au même niveau et stable chez CROP et Léger, les deux firmes québécoises. Forum avait la même estimation que Léger et CROP jusqu'à son dernier sondage où il a estimé qu'il y avait eu une baisse des intentions de vote pour le PQ aux dépens de Québec solidaire après le débat. Feu de paille ou courant de fond?
- Forum estime les intentions de vote pour le PLQ nettement plus élevées que les deux autres. Encore là, il s'agit d'une différence entre les firmes. Aucune ne voit un mouvement significatif pour le PLQ.
- Qui a raison? Si les trois avaient raison et que les différences étaient surtout dues au hasard des échantillons et des méthodes, on aurait en moyenne 37% pour le PQ, 28% pour la CAQ et 22% pour le PLQ. Toutefois, notons que les sondages commencent à dater et qu'il reste encore une semaine de campagne et d'autres sondages à venir.





dimanche 26 août 2012

Le paradoxe de l'anglo péquiste/caquiste

En attendant la sortie du prochain CROP qui me permettra de faire des analyses plus détaillées, je vais expliquer un phénomène important que mes collègues français ont baptisé le "paradoxe de la mémé communiste". En version québécoise, on parlerait du paradoxe de la mémé péquiste... ou de l'anglo péquiste. L'idée ici est que, lorsqu'un groupe a tendance à collaborer moins aux sondages, les membres du groupe qui collaborent ont un profil différent de l'ensemble du groupe

Concrètement, si les personnes âgées de 65 ans et plus collaborent moins aux sondages, celles qui collaborent auront tendance à avoir un profil atypique de leur groupe d'âge. Et puisque ce groupe de personnes est sous-représenté, la pondération va gonfler les effectifs de ces personnes... atypiques et ainsi contribuer à un biais de l'échantillon.

Avons-nous un tel phénomène au Québec? En tenir compte permettrait-il de réconcilier les estimations des sondeurs. C'est ce que j'ai tenté de vérifier par une illustration (d'autres à venir), que l'on appellera le paradoxe de l'"anglo-péquiste".

Illustration: Le paradoxe de l'anglo péquiste.


J'avais remarqué que la proportion de non francophones dans les échantillons variait et était rarement au niveau où elle aurait dû être, soit 20% de l'échantillon, chiffre validée tant dans les tableaux détaillés de Léger que de Crop, que je remercie de leur collaboration. Pour que le paradoxe se produise, il faut qu'il y ait une relation entre la proportion brute de membres du groupe considéré dans l'échantillon et l'intention de vote. Vérification faite, une analyse de corrélation montre que plus la proportion de non francophones dans les échantillons est grande, plus l'intention de vote pour le PLQ est élevée chez ces non francophones (r=0,79, p=,02 pour les matheux) et plus l'intention de vote pour le PQ (r=-0,72, p=,04) est faible. Pour la CAQ (r=-0,30), c'est non significatif. Bien sûr, comme il n'y a que 8 sondages, il faut être prudent. Ce n'est pas une relation qui se produit de façon totalement systématique mais on voit par exemple que, pour le Léger où il y a 26% de non francophones, la proportion de vote PLQ cehz ces derniers est de 81%.

Le tableau suivant montre les proportions pour les divers sondages effectués depuis le 7 août de même que les intentions de vote pour le PLQ, le PQ et la CAQ chez les non francophones dans chacun des sondages. On voit que les intentions de vote pour les divers partis varient selon les firmes: CROP estime l'intention de vote pour le PLQ à 58% en moyenne, Forum à 70% en moyenne et Léger entre 62% et 81%.
J'ai refait les calculs pour voir ce qui arriverait si on attribuait 70% de l'intention de vote au PLQ chez les non-francophones et ceci pour tous les échantillons. C'est l'estimation de la dernière colonne que l'on peut comparer à l'estimation de la firme.

Estimation des intentions de vote en "corrigeant" le vote non francophone

firme date de publication N proportion nonfranco PLQnf PQnf CAQnf PLQ après répartition (firme) PLQ nouvelle estimation
Crop 16.08.2012 815 12,02 57 12 20 27 31,20
Crop 09.08.2012 943 11,13 59 7 8 29 32,00
Forum 21.08.2012 1540 17,40 70 7 13 35 36,80
Forum 14.08.2012 1563 12,48 69 10 10 31 35,20
Forum 07.08.2012 1542 14,66 71 6 10 32 35,20
Léger 25.08.2012 1773 9,59 67 9 15 27 28,80
Léger 17.08.2012 3019 14,51 62 5 20 28 29,60
Léger 09.08.2012 1431 26,35 81 3 9 31 28,80










Ceci permet de faire plusieurs constatations:

1) Quel que soit le sondeur, après avoir appliqué cette correction, on constate une stabilité presque totale de l'intention de vote pour le PLQ, sauf pour une hausse d'environ 1,5%, non significative, pour le dernier Forum par rapport au Forum de la semaine précédente. Cette estimation change aussi la donne pour Léger: on ne perçoit plus de baisse du PLQ entre la deuxième et la troisième semaine, mais une stabilité.

2) L'estimation de l'intention de vote pour le PLQ est différente selon les sondeurs: en moyenne 29% pour Léger, 31% pour Crop, 35% pour Forum.

3) On constate que les sondages de Forum ne sont habituellement pas pondérés par la langue maternelle puisque, si c'était le cas, mon estimation serait très similaire aux chiffres publiés (étant donné que ces sondages estiment le vote non francophone pour le PLQ de façon très stable aux alentours de 70%). Toutefois, dans le dernier sondage Forum, la proportion de non francophones dans l'échantillon (17,4%) se rapproche de la proportion dans la population, ce qui fait que mon estimation fait peu de différences. Les sondages non pondérés par la langue maternelle sous estiment généralement l'intention de vote pour le PLQ et surestiment celle des autres partis, particulièrement le PQ.

En conclusion, cet exercice permet de mieux comprendre "les chiffres derrière les chiffres". A 20% de la population, un écart de 5 points dans l'estimation du vote pour un parti, quel qu'il soit, chez les non francophones, amène une différence de un point dans l'estimation totale du vote pour ce parti. Il faudrait sans doute atténuer l'importance de cet impact pour tenir compte du fait que les non francophones votent moins que les francophones mais l'impact existe néanmoins.

Au plaisir

vendredi 24 août 2012

En attendant, un mot sur l'Alberta... et sur Forum

Bonjour,

En attendant les nouveaux sondages et l'infirmation ou la confirmation des estimations de Forum research, j'aimerais revenir sur les sondages de la campagne de l'Alberta, d'autant plus que le Journal de Montréal d'hier laissait penser que Forum Research s'était trompée fortement lors de cette élection, plus que les autres firmes, en tout cas. J'ai voulu vérifier les chiffres,... pour me rendre compte d'une grave erreur dans l'article du Journal de Montréal.

En effet, le dernier Forum Research de la campagne albertaine donnait les Conservateurs à 36% et le Wild Rose à 38% (et non pas 48%). Les élections du lendemain ont donné 44% pour le PC et 34,3% pour le Wild Rose. Forum s'est donc avéré le moins mauvais, si on peut dire, ceci pouvant être dû au fait qu'il était le dernier sur le terrain, comme en témoigne le tableau plus bas tiré de Wikipedia qui l'a tiré des médias albertains (je met seulement les quatre principaux partis).

On y voit bien que tous les sondages se sont trompés lors de la dernière élection en Alberta et ceci en surestimant la droite, ce qui est plutôt rare.

Pour ce qui est de Forum Research, j'ai comparé leurs chiffres pour plusieurs sous-groupes, par langue, par région, par groupe d'âge. Je n'y trouve pas pour le moment de différences flagrantes avec les autres firmes sauf pour ce qui est du sondage de 1er août où Forum mettait les deux principaux partis à égalité comme les autres mais nettement plus haut. Ceci pour dire qu'il demeure tout à fait possible que le sondage Forum soit hors normes mais qu'il n'y a aucune indication, ni pour l'élection albertaine, ni pour la dernière élection fédérale, que cette firme soit systématiquement plus mauvaise que les autres. Bref, s'ils sont hors normes, on pourra peut-être conclure qu'on est tombé sur le 1 sur 20.

Au plaisir

Sondages et élections Alberta - 23 avril 2012

Polling Firm Date of Polling PC Wildrose Liberal NDP
Election 2012 April 23, 2012 44.0 34.3 9.9 9.8
Forum Research April 22, 2012 36 38 10 12
Forum Research April 21, 2012 32 41 10 13
Angus Reid April 20–21, 2012 32 41 13 11
Campaign Research April 19, 2012 34 41 11 11
Abacus Data April 18–19, 2012 31 41 12 13
ThinkHQ Public Affairs April 17–18, 2012 33 41 11 11
Forum Research April 16, 2012 33 40 10 12
Leger Marketing April 13–16, 2012 36 42 9 10
Return on Insight April 13–14, 2012 36 43 11 9
Campaign Research April 11, 2012 34.4 42.8 9.6 9.7
Abacus Data April 9–11, 2012 29 46 10 12
Think HQ Public Affairs April 9–10, 2012 29 43 12 13
Forum Research April 9, 2012 31 43 10 11
Leger Marketing April 5–8, 2012 34.2 35.5 12.5 13.2

vendredi 17 août 2012

Les sondages sont-ils fiables?

Question complexe que celle-là. Voici une tentative d'expliquer simplement des notions dont on parle beaucoup soit les sondages probabiliste et les biais possibles des sondages.

1. Qu'est-ce qu'un sondage probabiliste?


Il s'agit d'un sondage où, à toutes les étapes, le choix de la personne qui aura à répondre au sondage a été fait au hasard. Ainsi, si j'ai la liste de tous les numéros de téléphone des ménages du Québec et que je prends, au hasard, un ménage sur 1000 et, dans chaque ménage, une personne au hasard, j'aurai un échantillon probabiliste de l'ensemble de la population rejoignable par téléphone. De même, si je pouvais constituer la liste des adresses courriel de toutes les personnes qui ont accès à Internet, je pourrais tirer un échantillon probabiliste qui représenterait l'ensemble de la population des internautes.

On dit que les échantillons probabilistes sont meilleurs parce qu'il s'agit de la méthode la plus fiable et la seule théoriquement valable pour représenter une population sans biais. Il s'agit toutefois d'un idéal puisque cela postule que toutes les personnes contactées vont accepter de répondre à l'enquête. Comme ce  n'est pas le cas, il y a des biais possibles.

2. Quels sont les biais possibles des sondages?


On parle habituellement de trois types de biais, relatifs à la couverture, à la non-réponse générale et à la non-réponse à une question en particulier. Les biais existent lorsque les personnes que l'on ne peut pas rejoindre ou qui ne veulent pas coopérer ont des caractéristiques socio-politiques différentes de celles que l'on peut rejoindre et qui coopèrent. Ces biais peuvent exister pour toutes les méthodologies de sondage. L'idée est de tenter d'estimer leur présence et leur ampleur.

Biais de couverture: 

Le biais de couverture fait référence au fait que l'on ne peut pas avoir une liste des coordonnées de l'ensemble de la population. Par exemple, les listes de numéros de téléphone ne comprennent pas nécessairement les numéros de téléphone confidentiels ou les numéros de ceux qui ont uniquement un cellulaire (10% de la population, surtout de jeunes urbains) et évidemment, ne comprennent pas ceux qui n'ont pas le téléphone. Les listes pour les sondages internet ne comprennent pas les personnes qui n'ont pas accès à internet (15-20% de la population). Dans la présente élection, on pourrait penser que les personnes qui n'ont pas Internet auraient un profil qui les rapprocheraient de celui des électeurs libéraux. Toutefois, lors de la dernière élection fédérale, les sondages internet sous-estimaient plus les Conservateurs que les autres sondages dans l'ensemble du Canada mais pas au Québec et les sondages téléphoniques interactifs avaient sous estimé le Bloc au Québec.

Biais de non-réponse:

Le biais de non réponse fait référence au fait que ce ne sont pas toutes les personnes sollicitées qui peuvent être rejointes au moment où on les sollicite et qui acceptent de répondre. Pour réduire ce biais au maximum, on tente normalement de joindre les gens à différentes heures et à différents jours de la semaine et du week-end et on tente de les convaincre de coopérer. On préfère habituellement un sondage qui se déroule sur plusieurs jours et comprend au moins une journée de fin de semaine. Les sondages internet peuvent avoir un avantage sur ce plan dû au fait que le répondant peut répondre au moment qui lui convient mais pour cela, il faut évidemment lui en laisser le temps. Traditionnellement au Québec, on a constaté que les Libéraux -- et peut-être plus récemment l'ADQ -- étaient surreprésentés dans le groupe de non-répondants. Boutade: "Les gens de gauche sont plus gentils" et donc, ils coopèrent plus aux sondages.

Biais de non-réponse aux questions:

Ce biais fait référence au fait que les répondants n'acceptent pas tous de révéler leurs opinions, et particulièrement leur intention de vote. Ces personnes ont traditionnellement été associées en plus grande proportion au PLQ et, au cours des dernières élections, à l'ADQ. En gros, on estime que plus un parti est impopulaire publiquement, en particulier tel que cela se reflète dans les médias, plus les partisans de ce parti auront tendance à taire leur intention de vote.

La synthèse:

Pour ce qui est des élections de 1998, 2003 et 2007, la tendance était à répartir les discrets de façon non proportionnelle pour tenir compte du fait que l'ensemble des biais semblaient pointer plus vers une sous-représentation des Libéraux ou, plus récemment de l'ADQ, que du PQ. Le PQ, tout comme les petits partis, n'a jamais vraiment été sous-représenté dans les sondages. Mais évidemment, les élections se suivent mais ne se ressemblent pas nécessairement. Les sondages sont-ils fiables? En général oui, surtout si on prend en compte leur biais possible. Ayant commencé à étudier les sondages durant la campagne de 1998 alors que les sondages avaient induit la population en erreur sur l'état des forces en présence, j'ai tendance à être très prudente, surtout que la possibilité existe que les sondages influencent le vote. Par ailleurs, il est plus fiable d'avoir plusieurs sondages, de surcroît utilisant des méthodologies différentes.

Au plaisir

Que se passe-t-il donc?


Bonjour,

Première analyse de la campagne. J'essaie de répondre à quelques questions suscitées par les résultats des sondages des deux dernières semaines, soit 2 sondages pour CROP, Forum, et Léger.

Y a-t-il une évolution significative entre les deux semaines?

Le tableau présenté plus loin donne les informations détaillées.
Si on prend chacun des sondages séparément, que ce soit avant ou après répartition des discrets de façon proportionnelle, il n'y a pas d'évolution significative des intentions de vote. Si on prend en considération que les trois sondages donnent la même lecture, on peut penser qu'il y a peut-être eu une très légère montée du PQ (+1 en moyenne) et de la CAQ (+1 sauf CROP à +4). Concurremment, il y aurait une baisse du PLQ d'environ 2 points.

Y a-t-il une différence significative entre les intentions de vote pour le PLQ et pour le PQ?


Pour chaque sondage pris séparément, la réponse est oui mais parfois, c'est à la limite (ça dépend de la taille des échantillons). Que ce soit avant ou après répartition proportionnelle des discrets, il y a une avance moyenne d'environ 5 points pour le PQ. Cette avance était plutôt de 2 points la semaine dernière.

Et les discrets?
Qu'est-ce qu'un discret? La catégorie des personnes discrètes regroupe généralement les personnes qui disent ne pas savoir pour qui elles veulent voter, celles qui refusent de révéler leur intention de vote, celles qui disent qu'elles n'iront pas voter ou qu'elles annuleront leur vote. Contrairement à la croyance populaire et journalistique, la proportion de personnes discrètes ne varie habituellement pas au cours d'une campagne électorale. La forte hausse de la proportion d'indécis dans le dernier CROP est inhabituelle. Par ailleurs, on pense que les discrets sont surtout des personnes qui n'iront pas voter ou qui ne veulent pas révéler leur vote.
J'ai déjà abordé la question de la répartition proportionnelle des discrets. La Presse faisait hier une petite analyse qui montrait que 18% des discrets considéraient que l'équipe libérale était la meilleure, contre 13% pour la CAQ et 12% pour le PQ. Par ailleurs, 17% voient en Charest le meilleur PM comparativement à 12% pour Legault et 6% pour madame Marois. Enfin, il existe en ce moment une corrélation forte et significative entre la proportion de discrets dans les sondages et l'intention de vote pour le PLQ. J'ai donc fait une estimation des intentions de vote si on attribuait 50% des discrets au PLQ, 25% au PQ et 25% à la CAQ. Cette estimation avait donné  une légère sous-estimation de l'ADQ en 2003 et en 2007. Voici les résultats pour les deux premières semaines de cette campagne.:


Évolution semaine 3 vs semaine 2 - campagne août-septembre 2012












PLQ
PQ
CAQ
Différence PQ - PLQ

sem. 13-08
Sem. 6-08
 sem. 13-08
Sem. 6-08
 sem. 13-08
Sem. 6-08
 sem. 13-08
Sem. 6-08
Avant répartition








Léger
25 (-2)
27
29 (+1)
28
24 (=)
24
4
1
Crop
22 (-4)
26
28 (=)
28
20 (+1)
19
6
2
Forum
29 (-1)
30
33 (+1)
32
24 (+1)
23
4
2









Après répartition prop.








Léger
28 (-3)
31
33 (+1)
32
27 (=)
27
5
1
Crop
27 (-2)
29
34 (+2)
32
25 (+4)
21
7
3
Forum
31 (-1)
32
35 (+1)
34
25 (+1)
24
4
2









Après répartition non-prop.








(50 PLQ, 25,PQ, 25 CAQ)








Léger
30,4 (-1,6)
32
31,7 (+1,2)
30,5
26,7 (+0,2)
26,5
1,3
-1,5
Crop
31,4 (-0,2)
31,6
32,7 (+1,9)
30,8
24,7 (+2,9)
21,8
1,3
-0,8
Forum
32,1 (-1)
33,1
34,4 (+0,9)
33,5
25 (+0,9)
24,1
2,3
0,4

 Avec cette estimation, on serait passé d'une très légère avance des Libéraux, non significative, la semaine dernière à une très légère avance du PQ, non-significative, cette semaine. Bref, on se garde une petite gêne, on prend son mal en patience,... et on attend une autre semaine.


Les sondages sont-ils fiables?

Je n'ai pas encore toute l'information nécessaire pour évaluer les biais possibles des sondages actuels et je m'aperçois qu'il y a beaucoup de confusion, entre autres sur la question des sondages probabilistes ou non, de la fiabilité et des biais. Voir mon prochain message de blog pour quelques précisions sur cette question.

Au plaisir