Les différences entre les sondages, une question de méthodes? Differing estimates, a question of methods?

Bonjour,

Voici le lien au texte publié aujourd'hui dans La Presse Plus aujourd'hui.

Les tableaux suivants montrent les données sur lesquelles je me suis appuyée pour ce texte. Il est intéressant de regarder les médianes qui donnent normalement une bonne image de la situation.

For English readers, 

The first two rows of the table show the impact of mode of administration on the estimates for the main parties. In short, there is no major difference for Canada as a whole but there are indeed differences according to methods for Ontario and Quebec, the two largest provinces. IVR in Quebec for example has significant differences with classic telephone polls for the four major parties. The analyses controlled for change over time and for other methodological features like proportion of non-disclosers, sample size and number of days in the field.

The two next rows show the minimum and maximum estimates as well as the median for each party over the last week (7 polls). It shows that these differences seem to be somewhat larger than expected, particularly for the Liberal Party of Canada in Ontario and for all the parties in Quebec -- a range between 8 and close to 14 points (BQ). The median normally gives a more reliable portrait of the situation than any individual poll.

Canada 2015 - portrait de campagne - a view of the campaign

Bonjour,

For English readers, a summary in English is available at the end of this message.

Pour la première fois, je limite mes analyses aux sondages réalisés depuis le début de la campagne, ce qui donne un portrait plus précis de l'impact de la campagne. La méthodologie est la même que celle utilisée depuis le dernier message. Les sondages sont positionnés à la date du milieu de la période où ils ont été conduits. Les analyses partent du 2 août et incluent les sondages publiés jusqu'à aujourd'hui, 18 septembre, (ce qui inclut les derniers sondages Environics, Forum, Ekos et Nanos). Je présente donc un portrait à l'aube de la "vraie campagne" puisqu'il reste un mois avant l'élection et que les débats dans les "media de masse" n'ont pas encore eu lieu.

Le Canada - du jamais vu

Comme le graphique l'illustre, les trois partis sont exactement au même niveau si l'on tient compte de tous les sondages réalisés par les diverses firmes. Je dois toutefois vous dire que, ma "longue expérience" m'a amenée à tirer la conclusion suivante. C'est particulièrement quand les partis apparaissent à égalité dans les sondages qu'ils ne le sont pas. Dans ces circonstances, il est d'autant plus probable que les partis plus à droite soient sous-estimés. Les élections récentes en Israel et en Grande Bretagne m'ont confortée dans cette conclusion. Donc, la possibilité d'une sous-estimation des Conservateurs est très présente. Toutefois, comme nous allons le voir, les répartitions selon les régions changent la donne en ce sens que la possible sous-estimation des conservateurs n'a pas nécessairement un impact possible sur le résultat des élections.  Le graphique illustre qu'au total, les intentions de vote auraient peu changé dans l'ensemble du Canada depuis le début de la campagne. Encore là, ceci cache des mouvements différenciés selon les régions.

Les régions clés: l'Ontario

L'Ontario s'était distinguée par une quasi égalité des intentions de vote à la mi-août, suite à une baisse des intentions de vote pour le PCC. Un mois plus tard, la situation a quelque peu changé. Les intentions de vote pour le PCC se sont stabilisées autour de 32,5 pour cent. Par contre, le PLC a remonté de près de trois points pour redescendre ensuite, du moins selon les sondages. Il se situerait autour de 35 pour cent en ce moment. Le NPD a baissé de près de cinq points entre la mi-août et la fin août mais les intentions de vote se sont stabilisées depuis le début septembre autour de 25 pour cent. Les trois partis se situent donc à l'intérieur d'un intervalle de 10 points. Toutefois, cela cache des différences régionales impossibles à estimer avec les sondages nationaux.

Les régions clés: la Colombie-Britannique

Il faut être très prudent avec les résultats de la Colombie-Britannique parce que, tel que souligné par Bryan Breguet (@2closetocall), les tailles d'échantillons sont souvent carrément faméliques. Quoique le NPD demeure en tête selon plusieurs sondages, l'écart entre ce parti et les autres est maintenant assez faible et les plus récents sondages montrent une possible course à trois. Le NPD aurait perdu sept points depuis le début de la campagne, pour se situer à environ 33 pour cent. Par contre le PLC et le PCC semblent s'échanger la deuxième place dans les sondages depuis le début de la campagne, ce qui signifie normalement qu'ils sont à peu près à égalité, entre 25 et 30 pour cent. Étant donné les petites tailles d'échantillon, les estimations des diverses firmes varient énormément et certaines firmes mettent le PCC à égalité avec le NPD ou avec le PLC. Il s'agit d'une course à surveiller de près mais il faut demeurer prudent dans l'interprétation de possibles changements.

 
Entre les deux: les Prairies

Si le Parti Conservateur règne toujours au Manitoba et en Saskatchewan, son règne n'est pas aussi clair qu'en Alberta. Il semble être légèrement en descente mais il situe toujours en tête mais à environ 36 pour cent. Toutefois, certains sondeurs le mettent en haut de 40 pour cent. Le PLC et le NPD s'échangent la deuxième place depuis le début de la campagne et on peut donc penser qu'ils sont à peu près à égalité, entre 25 et 30 pour cent. Cette bataille pour la deuxième place peut avoir une certaine importance pour ce qui est des résultats en sièges, d'autant plus si l'appui au PCC se maintient au niveau actuel ou continue de descendre.

Les bastions: l'Alberta

La victoire du NPD aux élections provinciales en Alberta n'aura pas eu d'effet sur les intentions de vote au niveau fédéral, du moins jusqu'à date. Les intentions de vote pour les Conservateurs se situent autour de 50 pour cent depuis la mi-août. Les intentions de vote pour le NPD sont stables autour de 25 pour cent depuis la mi-août et celles du PLC sont stables autour de 20 pour cent depuis le début de la campagne. L'ordre des intentions de vote ne s'est pas modifié.

 
Les bastions: Le Québec

Au Québec, les précédentes analyses montraient que le NPD avait atteint 45 pour cent des intentions de vote. Les analyses menées depuis le début de la campagne confirment cette estimation. Toutefois, elles permettent de constater que la situation s'est stabilisée à ce niveau depuis la mi-août. Les intentions de vote pour le PCC et pour le Parti Vert sont également d'une remarquable stabilité. Par contre, le Bloc Québécois semble avoir poursuivi sa descente et ne serait plus qu'à environ 12 pour cent selon les plus récents sondages. Enfin, cette descente s'est faite en faveur du PLC, maintenant à près de 25 pour cent, qui aurait effectué une remontée de près de cinq points depuis le début septembre.

Les bastions: Les Provinces Atlantiques

Le PLC semble consolider et même améliorer sa position de tête dans les Provinces Atlantiques. Les intentions de vote pour ce parti auraient progressé de près de cinq points depuis le début de la campagne. Pendant ce temps, le PCC se maintient à environ 20 pour cent depuis la mi-août. Le NPD aurait perdu en gros les points gagnés par le PLC et se retrouve autour de 28 pour cent, stable depuis les deux dernières semaines.
.

Conclusion 

Même si, à l'échelle canadienne, les sondages montrent une certaine stabilité et les trois partis à égalité, cela cache des mouvements et des batailles dans certaines régions et ces batailles ne mettent pas nécessairement en jeu les mêmes partis. Trois régions apparaissent maintenant à surveiller, soit l'Ontario, la Colombie-Britannique et les Prairies -- Manitoba et Saskatchewan. Dans ces régions, les intentions de vote ont varié et continuent de le faire. Même si pour les Prairies et la Colombie-Britannique les échantillons sont très petits, la somme de tous les sondages semble montrer qu'il y a une possible lutte à trois pour la première place. Dans des batailles ou les trois partis sont à égalité, la première place peut faire la différence. Il faut toutefois garder à l'esprit que le PCC a été sousestimé de quatre points en Ontario lors de la dernière élection fédérale. Il est aussi possible que le PLC soit sous-estimé dans certaines régions mais il serait surprenant que le NPD le soit. Par contre, et plusieurs sondages le montrent, au moment de voter, les partisans du parti Vert seront certainement plus tentés de voter pour le NPD ou le PLC que pour le PCC si la lutte est serrée, ce qui pourrait compenser pour la sous-estimation du PCC.

Note méthodologique: Les analyses sont faites en utilisant des régressions locales. Les analyses et les graphiques sont faits par Luis Pena Ibarra, auxiliaire de recherche.

English summary:
Although at the Canadian level, the polls show some stability, with a never seen equality between the three main parties, this overall portrait hides the fact that different battles are taking place in some but not all the regions of Canada. 

There are some strongholds: In Quebec, the NDP is way ahead at around 45 percent. The LPC, now at 25 percent, has been gaining grounds in the last two weeks at the expense of Bloc Québécois, now at around 12 percent, below the CPC, at 15 percent. In Alberta, the CPC is at 50 percent and the two other main parties are at around 20 percent. In the Atlantic Provinces, the LPC is gaining grounds; support for this party is close to 50 percent. Its gains were made at the expense of the NDP. However, this party is a good second at around 30 percent. The CPC is stable at 20 percent.

There are close battles: Given that it has about a third of all constituencies, Ontario is a very important place to check. It is a province where the three main parties were at par in mid-August. However, the LPC has gained grounds at the expense of the NDP. Right now, the three parties are within 10 points in voting intentions. The LPC is ahead at about 35, the CPC follows at 32 and the NDP trails at 20.

As for British Columbia, it looked like a stronghold for the NDP at the beginning of the campaign. However, the NDP has lost grounds, around seven points, and the two other main parties, exchange second place since the beginning of the campaign. Some recent polls put the three parties at par. However, very small sample sizes mean that we have to be very cautious in our interpretation of what is happening in BC.

In the middle: Manitoba and Saskatchewan -- the Prairies -- have been strongholds for the Conservative Party. However, as in BC, we see the two other main parties -- the NDP and the LPC this time -- exchanging second place and closing the gap with the CPC.

In conclusion, all these movements occurred even before any debate in the mass media. It will be interesting to see whether the debates have an impact but one thing is sure, some people may change their mind, since they have already done so since the beginning of the campaign. And again, we should not forget that the CPC may be underestimated, particularly in Ontario. In fact, I have a new "Law of Polls" which states that "When it looks equal, it is not". The last Israel and UK elections validate this law. In short, particularly when polls show a close race, the conservative side is likely to  be ahead.

About methods: the analyses are performed using local regression (Loess). Graphs and analyses are done by Luis Pena Ibarra, research assistant.

Canada: la campagne à mi-parcours/ mid-campaign

Bonjour,

For English readers, a summary in English is available at the end of this message.


Il y a eu des changements dans les intentions de vote au cours des deux dernières semaines. Il me reste encore à vérifier s'il y a des différences entre les sondeurs selon les méthodes utilisées - ce qui fera l'objet d'un prochain billet -- mais pour le moment, voici une mise à jour de la situation à mi-campagne.

Note méthodologique: J'ai fait un changement méthodologique dans la manière de produire les analyses. Je suis revenue à mes pratiques antérieures et j'ai utilisé la date de milieu de terrain plutôt que la date de fin de terrain des divers sondages. Pour un sondage réalisé entre le premier septembre et le 5 septembre, le sondage est donc placé au 3 septembre plutôt qu'au 5 septembre. Ceci permet de ne pas considérer de la même manière deux sondages se terminant le même jour alors qu'un s'est fait sur deux jours et l'autre sur cinq jours. Lorsque le milieu de terrain arrive entre deux dates, je prends la date la plus récente.

Pour la dernière fois, je fais les analyses à partir du 5 mai, date de l'élection du NPD en Alberta. À partir de la semaine prochaine, il y aura eu suffisamment de sondages pour faire les analyses uniquement pour les sondages de campagne. Je présente l'évolution pour l'ensemble du Canada, puis je montre d'où proviennent les tendances moyennes pour le Canada en présentant l'évolution dans chaque région.

Canada

Comme plusieurs l'ont noté, la tendance des deux dernières semaines est relativement claire. Remontée du PLC, passé en deuxième place. Sur l'ensemble du Canada toutefois, ce n'est pas une forte hausse. Le PLC serait passé de 27% à 30% depuis le début de la campagne, essentiellement aux dépens du PCC, passé à l'inverse de 30% à 27%. Le NPD est stable à environ 32,5%. Les trois partis se retrouvent donc à l'intérieur de six points de pourcentage.

Il faut toutefois souligner, à grands traits puisque ce n'est pas assez dit, qu'il est fort possible que les sondages sous-estiment les intentions de vote pour le PCC. Dans cette présentation portant entre autres sur la campagne électorale de 2011 http://www.mapageweb.umontreal.ca/durandc/Recherche/Publications/pollsgowrong/Whydopolls_Canada.pdf, j'ai montré que les sondages avaient sous-estimé le vote pour le PCC de 3,7 points pour l'ensemble du Canada et de 4,1 points pour l'Ontario. De plus, la performance variait selon les méthodes. Les sondages faits par IVR (-3,0) et par panel Web (-1.5) avaient plus tendance à sous-estimer le PCC pour l'ensemble du Canada. De plus, Nanos, qui utilise une méthodologie et une question différents des autres firmes, avait également des estimations différentes, plus élevées pour le PLC au Canada (+3,8) et en Ontario (+3,2), moins élevée pour le NPD au Canada (-1,7) et plus élevée pour le PCC en Ontario (+2,0).

Les régions: D'où viennent les changements?

Les résultats pour les régions sont présentés selon ce qui s'y passe. En premier, les résultats les plus serrés et ceux où il y a plus de mouvements. En premier donc, l'Ontario, la Colombie-Britannique et les Prairies, en dernier, le Québec, l'Alberta et les Maritimes .

La bataille de l'Ontario

L'Ontario est le seul endroit où les intentions de vote pour les trois principaux partis sont pratiquement à égalité. Toutefois, c'est ici que la remontée du PLC semble la plus évidente. Ce parti aurait gagné près de sept points depuis le début de la campagne aux dépens du NPD (-2 points) et surtout du PCC (-4 points). Il faut toutefois souligner des différences importantes entre les estimations des divers sondeurs, ce qui s'explique entre autres par de petits échantillons pour la plupart d'entre eux (autour de 300 répondants). Celles-ci varient entre 36 et 43 pour cent pour le PLC depuis le début septembre, entre 21 et 35 pourcent  pour le PCC et entre 18 et 32 pourcent pour le NPD. Ce sont donc des écarts très importants.

La Colombie Britannique, la deuxième bataille

En début de campagne, on avait l'impression que le NPD voguait en avant en Colombie-Britannique. Toutefois, la situation s'est corsée depuis. Le NPD aurait perdu près de six points, surtout aux dépens du PLC. Toutefois, tous les récents sondages sauf un mettent encore le NPD nettement en avance sur le PLC. Notons par contre (voir la présentation: http://www.mapageweb.umontreal.ca/durandc/Recherche/Publications/pollsgowrong/Whydopolls_Canada.pdf, page 12) qu'à l'élection provinciale de 2013, les sondages avaient sous-estimé le Parti Libéral de Colombie-Britannique de 7,5 points et sur-estimé le NPD de 2,9 points. Les sondages Web avaient surestimé le NPD de 4,3 points en moyenne.

 Les Prairies, ça bouge

Au Manitoba et en Saskatchewan, le PCC domine à environ 40 pour cent. Toutefois, les intentions de vote pour ce parti sont relativement stables alors que celles pour le PLC et pour le NPD "se croisent". Le PLC est passé d'environ 26 pour cent à 32 pour cent depuis le début de la campagne alors que le NPD a perdu environ quatre points et se retrouve à 25 pour cent. Toutefois, étant donné les petits échantillons, les estimations varient, de 27 à 46 pour cent pour le PCC, de 25 à 35 pour cent pour le PLC, de 21 à 34 pour cent pour le NPD.

Le Québec, terre du NPD

 La remontée du NPD au Québec se poursuit. Les estimations amènent ce parti à plus de 45 pourcent dans les intentions de vote et tous les derniers sondages "s'entendent" sur cette estimation. Il reste des miettes pour les autres partis qui sont tous en baisse. Le PLC serait légèrement en avance sur les trois autres, à 20 pourcent, le PCC et le Bloc se retrouvant à égalité autour de 15 pourcent. Il s'agit de la seule région où le PLC est en baisse.

L'Alberta, terre du PCC

Après le succès du NPD provincial lors de la dernière élection , le NPD fédéral avait aussi fait des gains en Alberta mais il est revenu au point de départ. En Alberta, le PCC règne à près de 50 pour cent des intentions de vote. Les estimations varient entre 45 et 55 pour cent. Le NPD est toutefois bon deuxième, à 26 pour cent, devant le PLC (19%).  Les estimations sont très variables étant donné les petits échantillons (70-150 pour les récents sondages)

Les Maritimes, terre du PLC

Les Maritimes étaient en début de campagne le seul endroit où le PLC était en avance sur les autres partis. Cette avance s'est maintenue et a même augmenté depuis le début de la campagne. Comme pour le PCC en Alberta, le PLC approche 50 pour cent d'intentions de vote dans les Maritimes. Le NPD est toutefois bon deuxième autour de 30 pourcent, toujours en progression par rapport à son score en mai et à peu près stationnaire depuis le début de la campagne. Le PCC, quant à lui, poursuit sa descente en pente douce et se retrouve en bas de 20 pour cent.

 

 En conclusion, les campagnes, ça change pas le monde, mais...

Les diverses évolutions des intentions de vote au Canada montrent qu'il y a du changement dans presque toutes les régions depuis le début de la campagne. Le PCC est soit stable, soit en baisse. Il ne se maintient que dans ses fiefs des Prairies. Le NPD, après une bonne remontée depuis mai, demeure en montée seulement au Québec. Ailleurs, il est soit stable -- il maintient ses gains pré-campagne -- soit en légère baisse. Le PLC est celui qui marque le plus de points depuis le début de la campagne. Toutefois, ceci l'amène à être en avance seulement dans les Maritimes et, récemment, en Ontario, mais de justesse. Il est bon deuxièmeailleurs. Les prochaines semaines montreront si la progression du PLC, qui se fait aux dépens du NPD dans certaines régions clé, se poursuivra.
Toutefois, étant donné la sous-estimation systématique du PCC dans les sondages de l'élection de 2011 au Canada et la sous-estimation encore plus importante pour les sondages Web et IVR, il faut même être prudent avant de conclure de le PCC est troisième au total.

English summary

First, a methodological information: I now use the date of the middle of the field work instead of the end date that I used before. It is more appropriate since it does not put at the same place polls that were realized during different periods but that were ending on the same date. A poll realized from Sept. 7 to 9 is now placed on Sept. 8 while one realized from Sept 5 to 9 is placed on Sept 7. When the middle is between two dates, I take the more recent date.

Polls show that some change took place since the beginning of the campaign. Le Liberal Party of Canada (LPC) gained at the expense of the Conservative Party (CPC) while the NDP (New Democratic Party) stayed at the same level, still somewhat ahead of the two others. Overall, it looks as if there is an exchange between the LPC and the CPC. However, this hides major differences between the different regions of the country. 

Though samples are sometimes quite small and therefore estimates are variable, it is possible to observe that the main region where the battle is taking place nowadays is Ontario. The LPC is now in first place and made gains at the expense of both the CPC and the NDP, now third. British Columbia is also a place where voting intentions for the three parties are close. The NDP is still ahead but the LPC is making gains as its expense. Voting intentions for the CPC are stable. In the Prairies -- Manitoba and Saskatchewan -- there is also an exchange of voting intentions between the LPC and the NDP although in that region, it is the CPC that is ahead. 

Each party has its strongholds. For the NDP, it is Quebec where voting intentions are still increasing and have reached 45 per cent. For the CPC, it is Alberta, where it is stable at close to 50 percent, and for the LPC, it is the Maritimes where it is at over 45 percent. However, the CPC is stable or declining everywhere while the LPC is progressing everywhere except in Quebec. The NDP is either still progressing (in Quebec) or generally maintaining most, but not all, its gains of the last months.

My analysis of the polls conducted in recent elections in Canada Why do polls go wrong sometimes? The Canadian Case shows that polls have tended to underestimate the vote for the Conservative Party (minus four points in the last Canadian election) and overestimate the vote for the other parties, particularly the NDP (in the BC election of 2013 for instance. In addition, Web and IVR polls in the Canadian election of 2011 have even fare worse than telephone polls in underestimating the vote for the CPC. Therefore, we have to be cautious before even concluding the the CPC is third in voting intentions.

Canada & régions: Que se passe-t-il? What is going on?

Bonjour,

For English readers, a summary in English is available at the end of this message.

Un nouveau sondage Forum a étonné cette semaine en mettant le NPD nettement en avance. Ce sondage se distinguait des sondages précédents des autres firmes. C'est pourquoi j'ai préféré attendre l'arrivée d'autres sondages avant de faire de nouvelles analyses. Prière de noter que je ferai bientôt un message au sujet des méthodologies utilisées et des différences d'estimation entre ces méthodologies. Toutefois, j'ai fait une première vérification hier pour tous les sondages publiés en 2015, pour le Canada, l'Ontario et le Québec. Il y a des différences dans certains cas mais pas toujours et rarement majeures. Le seul cas majeur est celui de Nanos qui utilise une méthodologie complètement différente -- les résultats publiés sont une moyenne des quatre dernières semaines -- des autres firmes. J'ai fait des tests pour voir si les estimations graphiques que je présente seraient vraiment différentes en enlevant les sondages Nanos. Ce n'est pas le cas et je les ai donc conservées. Il est clair toutefois que ces sondages ne peuvent détecter les changements récents dans l'électorat.

À mesure que les sondages seront publiés, je rapprocherai le début de la période d'analyse. Pour le moment, il n'y a pas assez de sondages publiés pour garder seulement les sondages publiés depuis le début de la campagne. Cela serait d'autant plus  "dangereux" de faire des analyses uniquement à partir de ces sondages que plusieurs d'entre eux ont été faits dans des périodes où beaucoup de Canadiens étaient en vacances. Je commence donc les analyses présentées dans ce message le 5 mai 2015. Pourquoi? C'est la date de l'élection d'un gouvernement NPD en Alberta et donc le dernier événement clé, celui qui semble avoir changé la donne pour le NPD.

Canada

Résumons d'abord les quatre derniers sondages. Le dernier Forum (23-24 août) a mis le NPD à 40 pour cent, le dernier Angus Reid (19-24 août) à 37 pour cent, le dernier Ekos (19-25 août) à 33,6 pour cent et le dernier Ipsos (24-26 août) à 33 pour cent. Ekos et Forum utilise le téléphone automatisé (IVR), Angus Reid, un panel internet et Ipsos, une combinaison de téléphonique et de web. Forum est donc le plus élevé mais il ne se distingue pas significativement du sondage Angus Reid. Il faudra attendre pour pouvoir valider s'il s'agit d'une évolution ou d'un effet du hasard.

Par contre, pour l'estimation du vote du PLC, les estimations sont respectivement de 30, 24, 27 et 30. Dans ce cas, c'est le sondage Angus Reid qui se distingue avec 24 pour cent. Quant au PCC, il est estimé à 23, 30, 28 et 29; l'estimation de Forum est clairement en-dessous de celle des autres.

Le graphique présente l'évolution des intentions de vote depuis le début mai 2005. Il  montre une légère avance pour le NPD sur les deux autres partis, à égalité. Il faut toutefois demeurer prudent étant donné la tendance des sondages à sous-estimer le vote conservateur. Il est intéressant maintenant de regarder si les mêmes mouvements ont lieu dans toutes les régions du Canada ou si les changements proviennent de certaines régions seulement.

Les régions

L'Ontario, tous ensemble

Je présente les données pour l'Ontario en premier parce que, comme je l'ai dit dans mon dernier message, il s'agit du seul endroit où les trois partis sont à égalité en tête. Sur les quatre derniers sondages, trois mettent encore les trois partis à égalité. Seul le Forum met le NPD à 36 et le PCC à 26. C'est entre autres cette différence qui explique les résultats différents de Forum à l'échelle nationale. Le graphique montre donc plus ou moins le "beau fixe", soit les trois partis à égalité. On semble constater une légère baisse du PCC. Encore là il est trop tôt pour se prononcer et il faut être prudent puisque le PCC avait été sous-estimé de 4 points en 2011 en Ontario.

Le Québec, le NPD loin devant

Quelles que soient les firmes, il est clair que le NPD est loin devant au Québec. J'en profite pour faire une correction. Le CROP qui mettait le NPD à 47 pour cent la semaine dernière n'était pas le seul (ce que j'ai affirmé dans mon dernier message). Un sondage de Abacus Data qui se terminait la même journée que le CROP mettait également le NPD à 47 pourcent. Depuis ce temps, nous avons eu un Forum qui le mettait à 54 pour cent et un Angus qui le mettait à 49 pour cent. Le Ipsos le met à 40 pour cent et le EKOS à 44. Dans tous les cas, le NPD est loin devant. Forum se distingue en estimant le Bloc plus bas que les autres, à 14 pour cent, Ipsos en donnant plus d'intentions de vote au PLC (25%) alors que Forum et Angus ont une évaluation nettement plus basse du PCC. Au total toutefois, on a trois partis relativement à égalité en deuxième position -- avec un léger avantage au PLC -- et le NPD semble poursuivre sa montée, ce qui joue dans l'estimation des intentions de vote pour le NPD au Canada.

La Colombie Britannique, le NPD pas trop loin devant

En Colombie Britannique, les intentions de vote pour le NPD semblent relativement stables, peut-être en légère descente en faveur du PLC. Toutefois, il y a des différences importantes entre les firmes. Par exemple, Ipsos met le NPD à 31 pour cent alors que EKOS le met à 38 pour cent. Il y a aussi des différences importantes dans l'estimation du vote des deux autres partis. Le PLC est à 32 pour cent pour Forum et à 21 pour cent pour Angus Reid et l'estimation est inversée  pour le PCC. Donc, étant donné les petits échantillons, il est vraiment trop tôt pour être certain qu'il y a du mouvement entre le NPD et le PLC. Le PCC toutefois apparaît d'une stabilité "exemplaire".

L'Alberta, encore royaume du PCC

Le NPD avait effectué une remontée en Alberta mais les derniers sondages le montrent plutôt revenu à son état du début mai. Il demeure que le PCC se tient un peu en bas de 50 pour cent dans les estimations de vote en Alberta et ceci, de façon stable depuis mai 2015, et le NPD (autour de 25%) est en avance sur le PLC (20%).

Les Prairies, le PCC pas trop loin devant

Même si le PCC apparaît en avance au Manitoba et en Saskatchewan dans l'ensemble, les estimations sont relativement variables selon les sondages. Certains mettent le NPD pas très loin du PCC (Ipsos Reid) ou même en avance (Forum). Ces écarts peuvent être dûs à la petite taille des échantillons. Il demeure que si l'on tient compte de l'ensemble des sondages réalisés, le PCC serait en avance mais non dominant comme en Alberta.

Les Maritimes, toujours aux mains du PLC

Au cours des dernières semaines, tant le PLC que le NPD ont augmenté leur part des intentions de vote dans les Maritimes, et ceci aux dépens du PCC et des Verts. En ce moment, le PLC tient toujours la tête autour de 45 pour cent des intentions de vote, suivi du NPD autour de 35 pour cent.

 Conclusion

Même s'il faut faire attention aux résultats pour les petits échantillons -- hors Ontario et Québec -- il demeure que le résultat d'ensemble pour le Canada apparaît comme la résultante de la consolidation d'appuis différenciés selon les régions. La légère remontée du PLC provient essentiellement des Maritimes et, peut-être, de la Colombie-Britannique.  La stabilité du NPD dans l'ensemble provient d'une hausse au Québec et dans les Maritimes et peut-être en Ontario, "compensée" par une possible baisse en Colombie-Britannique et en Alberta. Bref, on a un peu l'impression qu'en ce moment, les partis consolident leurs intentions de vote là où ils sont déjà forts. L'Ontario demeure donc le terrain à surveiller. Il faudra également voir si les mouvements apparents en Colombie-Britannique et dans les Maritimes se poursuivent et s'il y a éventuellement du mouvement dans les Prairies. Pour le moment, il peut s'agir de hasard dû à la taille des échantillons.

P.S. Luis Pena Ibarra est responsable de l'entrée des données et de la production des graphiques.

English Summary

A number of people were surprised by the last Forum polls. I did a few checks to see whether there were major differences between methodologies and between some pollsters (Forum and Nanos) and the others. I checked Forum because of questions regarding its last poll and Nanos because it publishes moving averages for the last four weeks. Although I found some differences for some estimates, they were generally not substantial and withdrawing Nanos from the analyses did not substantially change the estimates. Therefore, I kept all the polls. The analyses presented start on May 5, when the NDP won the Alberta election. I try to bring the period for my analyses as close as possible to the beginning of the campaign but I need to have enough polls to do the analyses.

The analyses show that, for Canada as a whole, the NDP is making gains and that these gains are mostly due to Quebec and the Maritimes. Voting intentions for the CPC are going down a little and this is due to Quebec, again, and to Ontario. Finally, the LPC seems to be making some gains at the expense of the CPC, mostly due to its good performance in the Maritimes and, possibly in BC. Overall, parties seem to be consolidating their strongholds. Therefore, Ontario is still THE place to check. However, movement may be under way in the Maritimes and in BC. These regions should be under "surveillance" for now.

Les sondages influencent-ils le vote? Article dans La Presse +

Voici le lien à l'article publié aujourd'hui dans La Presse Plus, section  Débats.

http://plus.lapresse.ca/screens/b4f0cb0d-3de6-410e-9a18-ae8b84f1c34d|_0.html

Au plaisir

Canada & regions: depuis janvier 2015/since January 2015

Bonjour,

Note to english readers: an english summary is presented at the end of this post.

Je poursuis l'analyse des sondages publiés, cette fois-ci en me concentrant sur ceux qui ont été réalisés depuis janvier 2015. Ces analyses permettent de "mettre la table" pour la suite des choses, soit l'évolution plus récente des sondages et celle qui se produira -- ou non -- durant le reste de la campagne. Je présente les analyses pour le Canada dans l'ensemble puis les analyses par région. Notez que les projections des analyses sont basées sur l'ensemble des sondages réalisés en 2015, ce qui peut "atténuer" les mouvements plus récents étant donné leur poids modeste sur l'ensemble des données recueillies.

Canada 2015

En janvier 2015, le PLC et le PCC étaient à égalité autour de 35 pourcent et le NPD à environ 20 pourcent -- 24 pourcent dans certains sondages. La remontée du NPD et la baisse des deux autres partis était déjà en cours lorsque le NPD a pris le pouvoir en Alberta début mai 2015. La remontée du NPD s'est poursuivie tout comme la baisse des intentions de vote pour les deux autres partis majeurs. Toutefois, la situation semble pratiquement stable depuis le début de l'été. Les analyses montrent que les trois partis seraient presque à égalité en ce moment, avec peut-être un léger avantage au NPD. Il faut souligner que les sondages ont eu tendance à sous-estimer l'appui au Parti Conservateur, du moins en 2011. Si cette même tendance persiste, il est prématuré de conclure que le NPD a pris de l'avance. La suite des choses nous dira si c'est vraiment le cas.

Seuls deux sondages récents donnent des lectures différentes, un Forum (IVR) du 2 août qui donne le NPD à 39 pourcent et un Mainstreet (IVR) du 20-21 juillet qui donne le PCC à 38 pourcent. Ces deux sondages donnent des résultats différents des autres sondages faits au même moment. Et ce sont vraiment des sondages "d'été", c'est-à-dire réalisés en période concentrée de vacances annuelles.

Canada -  les régions -- 2015

Le Québec


L'année 2015 avait commencé au Québec aussi avec deux partis à égalité mais il s'agissait du PLC et du NPD. Comme on a pu le voir pour l'ensemble du Canada, le NPD a effectué également au Québec une remontée qui le situe maintenant autour de 40 pourcent, près de son score de 2011 (43%). Cette remontée s'est effectuée presque uniquement aux dépens du PLC. Les intentions de vote pour le PCC et pour le Bloc ont été estimées de façon assez variable au cours des derniers mois, ce qui s'explique en partie par la faible taille des échantillons pour le Québec dans la plupart des sondages pan-canadiens. En ce moment, les trois "autres" partis -- PCC, BQ et PLC -- apparaissent pratiquement à égalité, avec un léger avantage au PLC. Tous les sondages depuis juin placent le NPD en avance et en remontée au Québec. Le CROP publié le 20 août apparaît toutefois exceptionnel -- NPD à 47 pourcent -- par rapport aux autres sondages. L'avenir dira s'il s'agit d'un sondage hors normes ou s'il s'agit de la mesure d'une tendance en cours.

L'Ontario

Les résultats montrent les trois principaux partis pratiquement à égalité en Ontario. On note toutefois de la variabilité dans l'estimation des intentions de vote pour le NPD et pour le PCC. Certains sondages ont mis le PCC en haut de 40 pourcent. Il s'agit du sondage de Mainstreet réalisé les 20 et 21 juilllet par IVR et d'un sondage Nanos dont l'échantillon a été collecté sur quatre semaines. Si ce n'était de ces deux sondages, les analyses montreraient les trois partis à égalité. À noter toutefois que le Parti conservateur avait été sous-estimé de quatre points en 2011 en Ontario.

Les Maritimes

La tendance notée pour l'ensemble du Canada est aussi présente dans les Maritimes où le NPD a effectué une remontée importante qui l'amène à sept ou huit points du PLC. Dans cette région, la remontée du NPD s'est d'abord faite uniquement aux dépens du PLC puis, plus récemment, presqu'uniquement aux dépens du PCC et du Parti Vert. Les intentions de vote pour le PLC semblent s'être stabilisées un peu en haut de 40 pourcent mais la tendance à la remontée du NPD s'est accélérée un peu depuis le printemps. Étant donné que les échantillons pour les Maritimes sont parfois très petits, il faut demeurer prudent dans les interprétations de la situation.

Les Prairies - Manitoba et Saskatchewan

Même s'il y a eu une remontée du NPD également dans les Prairies, cette remontée semble s'être arrêtée depuis la mi-juillet. De fait, les intentions de vote pour les trois principaux partis apparaissent stables avec une certaine avance au PCC à environ 40 pourcent, le NPD et le PLC se situant à égalité un peu sous la barre des 30 pourcent. On note un sondage hors norme, le Forum du 21 juillet qui met le PLC à 53 pourcent mais avec un échantillon minuscule de 49 répondants. Plusieurs sondages ont toutefois mis le NPD à égalité ou même en avance sur le PCC au cours des dernières semaines. Il s'agit d'une évolution "à suivre". Pour le moment, les estimations des sondages sont assez variables étant donné les petits échantillons.

L'Alberta

Malgré la victoire du NPD aux élections provinciales en Alberta, concurrente à une forte hausse des intentions de vote pour le NPD fédéral (passé de 10 pourcent des intentions de vote en janvier à 30 pourcent en ce moment), le PCC continue à dominer avec des intentions de vote autour de 50 pourcent. Les gains du NPD se sont d'abord faits aux dépens du PCC mais, depuis le printemps, c'est essentiellement le PLC qui en a fait les frais. À noter que tous les sondages donnent sensiblement la même lecture, soit le PCC loin devant.

La Colombie-Britannique

De janvier à avril, les sondages montraient les trois principaux partis entre 20 pourcent et 40 pourcent sans qu'un parti se détache sérieusement. Depuis l'élection du NPD en Alberta, le NPD s'est clairement détaché et a pris la tête. Tous les sondages donnent une lecture similaire, avec le NPD autour de 40 pourcent alors que le PLC et le PCC sont à égalité autour de 25 pourcent et le parti Vert autour de 10 pourcent. Un seul sondage met le NPD à 54 pourcent, soit le Forum du 23 juin avec un échantillon de 150 répondants.

Conclusion

En résumé, dans l'ensemble du Canada, les trois partis sont pratiquement à égalité en début de campagne et les intentions de vote presque stables à l'ouest du Québec. Par contre, dans les Maritimes et au Québec, la remontée du NPD semble se poursuivre. L'évolution des intentions de vote depuis janvier montre

1. Que le NPD a fait des gains dans toutes les régions. 
2. Que même si ces gains se sont surtout faits aux dépens du PLC, ils se sont également faits aux dépens des conservateurs dans plusieurs régions. Ceci ne signifie pas nécessairement que des électeurs seraient passés du PCC au NPD. Certains électeurs peuvent être passés du PCC au PLC et d'autres du PLC au NPD, ce qui fait que le mouvement total montre une baisse du PCC et une hausse du NPD.
3. Que le NPD est en tête au Québec et en Colombie- Britannique et à égalité en Ontario.
4. Alors que le PCC est en tête dans les trois provinces des Praires...et à égalité en Ontario
5. Et le PLC est en tête dans les Maritimes... et à égalité en Ontario.

S'il  n'y a pas beaucoup de variation dans les intentions de vote, l'Ontario sera le centre de l'attention!

English summary

The analyses performed for the different regions and for Canada as a whole show that the portrait given by the different pollsters is quite the same in the different regions. When they do differ, there is a tendency for some IVR polls to be among outliers, particularly when they were conducted in the period where many Canadians are on Holidays. We need to analyze the polls in the light of what happened in previous electoral campaigns and particularly the 2011 federal campaign. In that election, there has been a tendency of polls to underestimate the vote for the CPC in general by three to four points, and, particularly in Ontario.

In Canada as a whole, voting intentions for the three main parties are almost at par. West of Quebec, voting intentions are rather stable while, in the Maritimes and in Quebec, the progression of the NDP goes on. Changes that occurred since January show that:

1. Voting intentions for the NDP increased in all the regions of Canada.
2. That NDP's gains were mostly detrimental to the LPC at the beginning but that they were also made at the expense of the CPC in many regions. It does not mean that some voters went directly from the CPC to the NDP. It may mean that some go from  the CPC to the LPC and others from the LPC to the NDP.
3. That the NDP is ahead in Quebec and in BC and at par in Ontario.
4. While the CPC is ahead in the Prairies... and at par in Ontario
5. And the LPC is ahead in the Atlantic Provinces... and at par in Ontario.

If there is not much variation in voting intentions, Ontario will certainly be the focus of attention.

Note: L'agent de recherche qui entre les données et produit les analyses est Luis Pena Ibarra.

Canada 2011-2015, que s'est-il passé? What happened?

Bonjour,

Note to english readers: an english summary is presented at the end of this post.

Voici mon premier message de cette campagne. Il porte sur l'évolution des intentions de vote entre 2011 et 2015, ceci pour le Canada dans l'ensemble et pour chacune des régions à l'exception des Prairies. Les analyses subséquentes (à partir de 2015 porteront sur toutes les régions). Je note au départ que plusieurs chercheurs académiques et extra-académiques s'intéressent à l'évolution des intentions de vote mais tous n'ont pas les mêmes préoccupations. Dans mon cas, je ne m'intéresse pas à la "transcription" des intentions de vote en sièges et je ne fais pas de prospective à moyen ou long terme. Ma préoccupation tout au long de la campagne sera 1) d'estimer l'évolution des intentions de vote et 2) d'estimer jusqu'à quel point on peut se fier aux sondages et jusqu'à quel point ils peuvent être biaisés en faveur ou en défaveur d'un parti en me basant sur des analyses statistiques des sondages et sur les résultats des sondages des campagnes antérieures.

Les données utilisées pour la période 2011-juin 2015 m'ont été transmises par Eric Grenier du site 308dot.com. J'en profite pour le remercier de sa collaboration.

Canada 2011-2015

Comme on peut le voir dans le graphique suivant, l'évolution tracée par l'ensemble des sondages depuis l'élection de 2011 à l'échelle du Canada est celles d'une progression du PLC au détriment tant des conservateurs que du NPD entre 2011 et 2014 suivie d'une descente qui a profité surtout au NPD. Les tendances à long terme permettent difficilement de voir l'effet des événements à court terme. Toutefois, si on fait le focus autour des deux premières lignes verticales, représentant respectivement l'élection de Thomas Mulcair à la tête du NPD et celle de Justin Trudeau à  la tête du PLC, on note dans les deux cas une concentration de points (estimés de sondages) plus bas avant l'élection et plus élevée après. Dans les deux cas, l'élection a provoqué une hausse -- momentanée -- des intentions de vote pour le parti du nouveau chef. Le prochain message de blogue permettra de se concentrer plus précisément sur ce qui s'est passé au cours de la dernière année mais il est clair que seul le NPD a vu ses intentions de vote progresser au cours des derniers mois pour ce qui est de l'ensemble du Canada.

Canada 2011-2015: les régions

La question qui se pose est de savoir si l'évolution constatée pour le Canada dans son ensemble cache des évolutions différenciées dans les diverses régions ou si l'évolution est la même dans toutes les régions.

Le premier graphique montre l'évolution des intentions de vote au Québec. La force relative des partis est assez différente du reste du Canada mais comme on peut le constater, l'évolution est sensiblement la même. Le PLC avait effectué une remontée importante, au détriment de tous les autres partis jusqu'en 2014 environ. Cette remontée est antérieure à l'élection de Justin Trudeau à la tête du parti. C'est au même moment que les attentats terroristes de l'automne 2014 que l'on voit les appuis à ce parti s'effriter au Québec. C'est surtout le NPD qui en profite, et dans une moindre mesure le PCC. L'analyse des sondages de 2015 permettra d'analyser la situation de façon plus détaillée. Pour ce qui est du Bloc Québécois, comme l'évolution possible des intentions de vote pour ce parti serait récente, j'y reviendrai dans mon message traitant des intentions de vote depuis janvier 2015.

Le deuxième graphique porte sur l'évolution des intentions de vote en Ontario. La force relative des partis est très différente de celle constatée au Québec. Le PLC y a effectué une remontée tant aux dépens du NPD que du PCC jusqu'à tout récemment. On y constate une remontée très importante du NPD au cours des dernier mois, qui amènent les trois partis pratiquement à égalité.

Il est difficile d'estimer l'évolution des intentions de vote dans les provinces atlantiques en utilisant les sondages publiés un à un étant donné la très faible taille des échantillons pour cette région. Par contre, en utilisant l'ensemble des sondages, on obtient un portrait plus fiable même si on peut constater la grande variabilité des estimations des sondages. Même si on constate dans les Maritimes une évolution très similaire à celle des autres régions, il s'agit de la seule région où le PLC a été en avance pendant presque toute la période et l'est demeuré jusqu'à maintenant. On constate toutefois comme ailleurs une remontée récente -- et importante -- du NPD mais il demeure que le NPD et le PCC sont demeurés à égalité jusqu'à tout récemment.

Finalement, la Colombie Britannique constitue la dernière région pour laquelle nous avons des données pour l'ensemble de la période. La baisse des intentions de vote pour le NPD et pour le PCC jusqu'en 2014 couplée à la hausse des intentions de vote pour le PLC ont amené les trois partis à égalité en 2014. On note toutefois une remontée importante du NPD récemment, remontée dont je reparlerai dans le prochain blogue portant sur la période récente.

Conclusion
La période qui s'est écoulée depuis la dernière élection est caractérisée par la remontée du PLC jusqu'en 2014 aux dépens des autres partis. Toutefois, cette remontée s'est essoufflée au cours des derniers mois et c'est plutôt à une remontée du NPD que l'on assiste en ce moment. Il est intéressant de constater que malgré des niveaux d'appui aux différents partis variables selon les régions, les graphiques montrent que les mêmes évolutions se sont produites dans toutes les régions de manière très similaire.

Au plaisir

English summary: The graphs show change in voting intentions since the Canada 2011 election. The tendency is the same in all regions of Canada, although the level of support for the different parties is not similar. It is characterized by an increase in voting intentions for the Liberal Party of Canada (LPC) until almost the end of 2014 and a concurrent decrease in voting intentions for the other parties. However, since the beginning of 2015, the situation has changed. My next post will focus on this period.

P.S. L'information sur les méthodes utilisées pour estimer l'évolution de l'intention de vote est disponible sur demande.