vendredi 29 avril 2011

Et la tendance se maintient...

Les derniers sondages confirment les tendances déjà observées et ceci, quelles que soient les méthodologies utilisées.  On s'étonne toutefois du fait que deux firmes n'ont pas publié de sondages cette semaine, soit Léger Marketing (ni la semaine dernière dans ce cas) et Ipsos-Reid. Pourquoi? Publication demain?

Tel que mentionné dans mon dernier message, les analyses permettent de "projeter" les résultats le jour du vote avec une marge d'erreur plus ou moins grande selon la stabilité des intentions de vote. Ce sont ces résultats qui sont présentés ici.

Au Canada,...


Comme on peut le voir, tous les partis sont en descente sauf le NPD.  Il faut toutefois être prudent parce que l'évolution de l'intention de vote pour le NPD a été difficile à modéliser et que l'on a dû choisir entre plusieurs modèles, celui qui apparaissait le plus plausible. Certains modèles, acceptables statistiquement, donnait le NPD en baisse mais avec une marge d'erreur de la prédiction très élevée (intervalle de 15 points).
 - Pour le PC, peu de changements depuis mardi. La tendance se confirme: Les intentions de vote pour le PC avaient augmenté. Elles sont maintenant en diminution. Le PC est prédit à 33,9% avec un intervalle de 31,6% à 36,2%.
- Pour le PLC, le meilleur modèle est maintenant celui d'une hausse suivie d'une baisse MAIS à laquelle s'ajoute une baisse de 0,78 points par jour depuis le débat. Ces tendances le mènent à 21,2% avec un intervalle de 19,7% à 22,6%.
- Pour le NPD, le modèle retenu est celui d'une accélération à la hausse, commencée un peu avant le débat. Ce modèle amène à prédire le NPD à 31,1% avec un intervalle important toutefois de 27,4% à 34,8%.

Ces résultats -- les intervalles des prédictions -- signifient qu'il n'y a pas de différence significative entre le PC et le NPD dans les prédictions. Ils pourraient être à égalité.Toutefois, il y a une différence significative entre le NPD et le PLC. Le NPD est significativement au-dessus du PLC.

- Nous reviendrons au Bloc en parlant des intentions de vote pour le Québec.



Pour le Québec:


Honte sur moi. Lors d'une entrevue à Patrice Roy, j'ai dit que je croyais impossible la situation qui vous est présentée en ce moment. Ça m'apprendra! Il ne faut parler que de données, c'est plus prudent. "When I do not have data, I have an opinion".

- Le modèle pour le Bloc a peu changé depuis les dernières analyses: une baisse de 0,19 points en moyenne  par jour depuis le 16 mars, à laquelle s'ajoute un baisse additionnelle de ,6 points par jour depuis le débat. Ceci l'amène autour de 21,2%, soit entre 17,9% et 24,4%.
- Le modèle pour le NPD non plus n'a pas beaucoup changé: Une accélération commencée un peu avant le débat le mènerait autour de 46,5% (si la tendance se maintient) avec un intervalle entre 40,7% et 52,3%.
- Le PC serait en baisse de ,14 points en moyenne par jour depuis le 16 mars, ce qui l'amène à 14,8% avec un intervalle de 11,7% à 17,8%.
- Le PLC a une évolution un peu différente, avec une accélération de la baisse plus récemment. Ceci l'amène à 12,8% soit entre 11,1% et 14,5%.

Statistiquement, il n'y a pas de différence dans les intentions de vote entre le PC et le PLC. Le NPD est clairement et statistiquement en haut du Bloc.  Prudence toutefois, l'intervalle de confiance est élevé et fortement dépendant des évolutions récentes. Dans ce cas, le chiffre le plus bas (40,7%) est plus plausible. Nous ferons probablement d'autres analyses dimanche pour préciser la prédiction. 

Pendant ce temps en Ontario,




Que ce soit pour le PLC ou pour le PC, les analyses montrent une évolution en forme de cloche soit une hausse suivie d'une diminution récente.

- Ces modèles amènent le PC à  36,3% avec un intervalle entre 33,9% et 38,8% et le PLC à 30% avec un intervalle de 27,9% et 32,2%, statistiquement en bas du PC.
- Le modèle pour le NPD est complexe. L'évolution serait en forme de "poisson" mais cette évolution serait atténuée par un effet débat négatif. Ce modèle prédit le NPD à 28,5% (25,9-31,2).  Toutefois, un autre modèle acceptable également prédirait le NPD à 25,4%, soit entre 22,5% et 28,2%. Il faut donc être très prudent pour ce qui est de l'évolution de l'intention de vote pour le NPD.  Les deux modèles permettent toutefois de conclure que le NPD et le PLC pourraient être à égalité.


En conclusion, pour une fois, si les sondages prédisent mal le vote, particulièrement pour le NPD, et que les sondeurs disent que c'est dû à la volatilité du vote, j'aurai tendance à penser que c'est une hypothèse plausible!.




Notice méthodologique:

1) Un point sur la marge d'erreur (encore). Dans La Presse de ce matin, on parle d'une marge d'erreur de 2,2 % pour les sondages de la région de Québec et de 2,8% pour ceux du Saguenay. Cette information serait pertinente si on présentait le total des intentions de vote pour chacune des régions. Or, on présente les intentions de vote par circonscription. Les marges d'erreur sont alors aux environs de 5%. L'information sur la marge d'erreur prêtait à ce point à confusion que le journaliste de Radio-Canada a parlé de marges d'erreur de 2% à 3% selon les circonscriptions à "C'est bien meilleur le matin". Les marges d'erreur réelles signifient que les intentions de vote sont à égalité "statistique" dans la plupart des circonscriptions. C'est le problème des sondages dans les comtés où les luttes sont serrées. En général, ils confirment que les luttes sont serrées. 

2) Je vous réfère à une critique méthodologique très intéressante des modèles de prédiction de sièges sur le site du "Pundits guide":  http://www.punditsguide.ca/.  Cette analyse permet de mieux comprendre pourquoi la plupart des modèles ne prédisent que peu de modifications dans le nombre de sièges malgré des évolutions très fortes dans les intentions de vote.


Un peu d'histoire: Voici de quoi a eu l'air l'évolution pour le Québec en 2008 telle que mesurée par les sondages.


On peut conclure que le PC qui était en bonne position en début de campagne a perdu son avantage durant la campagne et ceci au bénéfice du Bloc surtout et du PLC ensuite.

mardi 26 avril 2011

ET ca continue...

Bonjour,

Voici où on en est dans l'analyse de l'évolution des sondages réalisés depuis le 16 mars.

 Il y a quatre nouveaux sondages entrés dans la base de données depuis les analyses de jeudi dernier, un de Nanos (téléphonique roulant), un de Ipsos-Reid (téléphonique), un de Ekos et un de Forum research, ces deux derniers utilisant le téléphonique automatisé. Le sondage de Forum et celui d'Ekos ont toutefois été fait avant jeudi dernier mais n'étaient pas publiés au moment des dernières analyses.

Voici les résultats pour le Canada:



Les tendances observées lors des dernières analyses se poursuivent.
- L'évolution pour le PC est en forme de cloche (composante quadratique pour les spécialistes), comme on peut le voir sur le graphique, ce qui amène à estimer l'intention de vote pour le PC maintenant  à 35,8%
- L'évolution pour le PLC est toujours en forme de poisson (cubique pour les spécialistes), soit une baisse compensée d'abord puis une nouvelle baisse, récente. Ceci amène à estimer le PLC à 23,7%
- L'évolution pour le NPD est aussi en forme de poisson mais à l'inverse de celle du PLC. Le NPD est clairement en hausse et se situerait à 27,3%
- Enfin, le Bloc est en baisse constante. Nous reviendrons à ses intentions de vote en parlant du  Québec.
- A noter que les analyses ne montrent aucun effet des débats, une fois modélisé l'effet du temps. Il est toutefois difficile de différencier ce qui relève de l'évolution "normale" de ce qui relève d'un possible impact du débat lorsque les évolutions se situent à la même période. Toutefois, nous avons toujours vérifié la possibilité d'un effet débat indépendamment du temps. Les modèles présentés sont les "meilleurs" modèles pour expliquer les données.



Et pour le Québec:


Évidemment, ces résultats sont influencés par le denier sondage Ekos. Toutefois, Forum Research mettait aussi le NPD en avance sur le Bloc mercredi dernier et Ipsos-Reid les mettait à égalité. Les sondages ne montrent donc pas encore une stabilisation des intentions de vote au Québec.
- Les modèles ne montrent aucun effet du temps significatif pour le PLC. C'est la ligne droite. Le PLC serait à 16,6%.
- Pour ce qui est du PC, l'effet du temps donne une évolution en forme de poisson soit une baisse compensée suivie d'une nouvelle baisse. Le PC serait à 14,5%.
- Le Bloc perdrait ,2 point par jour depuis le 16 mars et se pertes se seraient accélérées depuis le débat (effet débat significatif avec composante quadratique du temps pour les spécialistes). Il se situerait à 25,8%.
- Enfin, le NPD a une évolution positive qui s'est accélérée dernièrement (composante quadratique positive significative).  Il se situerait à 35,1%.
- Ces analyses ne laissent pas encore entrevoir un arrêt de la chute du Bloc ou de la montée du NPD.
- - Par rapport à jeudi dernier, Les estimations donnent le Bloc à environ 5 points de moins et le NPD à trois points de plus.
- Notons toutefois qu'il y a des différences significatives entre les firmes pour ce qui est de l'estimation de l'intention de vote pour le NPD. Par contre, pour le Bloc, les estimations se situent à l'intérieur de la marge d'erreur.



Et maintenant, l'Ontario: 

 

- Le graphique illustre bien l'absence d'évolution avec le temps pour ce qui est du PC. Il serait à 41%
- L'évolution pour le PLC est en forme de cloche. Après une remontée significative, le PLC a entamé une descente récemment. Il serait à 31,7%.
- L'évolution pour le NPD peut être modélisée de deux manières, soit avec un effet du temps s'accélérant récemment soit avec un effet du temps positif mais seulement depuis le débat. Nous avons choisi ce dernier modèle qui est le meilleur et le même que celui présenté jeudi dernier.  Le NPD serait à 20,1%, quelle que soit la modélisation choisie.
- Par rapport à jeudi dernier, le PLC se situe à environ 3 points de moins et le NPD à trois points de plus.


En conclusion:
Bien sûr, avec de telles évolutions, on doit être prudent. Toutefois, l'ajout de quatre nouveaux sondages n'a pas beaucoup changé les estimations pour l'ensemble du Canada sinon pour une hausse de près de quatre points du NPD aux dépens du PLC surtout. Une telle évolution rappelle celle de 2005-2006 qui avait "propulsé" les Conservateurs devant les Libéraux et fait perdre au Bloc près de 9 points en fin de campagne (voir référence plus loin).
Les sondages se trompent-ils?  Lorsque les sondages se trompent, habituellement c'est en faveur de la gauche et en défaveur de la droite, ce qui signifie que les partis les plus susceptibles d'être surévalués en ce moment sont le NPD et le Bloc et ceux qui sont les plus susceptibles d'être sous évalués sont les Libéraux et les Conservateurs. 

Un peu d'histoire
Pour la petite histoire, cette campagne ressemble énormément, côté sondages, à celle de 2005-2006 mais "à l'inverse". En 2006, c'était le calme plat au Québec jusqu'à ce que ca se mette à bouger sérieusement en Ontario. Après, ca a été la "dégringolade". Les Conservateurs, cette fois-là, se sont mis à monter, le PLC s'est retrouvé en chute libre et le Bloc a perdu des appuis (9% entre le deuxième débat en français et l'élection. Le PLC avait commencé sa descente bien avant le débat. 

Au Québec, les sondages avaient surévalué l'appui au Bloc et sous-évalué significativement l'appui au PLC.
En Ontario, les évaluations étaient généralement à l'intérieur de la marge d'erreur. Voici l'analyse des sondages ce cette campagne:
http://www.mapageweb.umontreal.ca/durandc/Recherche/Publications/La_campagne_de_2005-06_racontee_par_les_sondages.pdf

Note méthodologique:
Quelle différence entre les analyses présentées sur ce blogue et celles de "308", par exemple.  Les analyses faites par 308 sont des moyennes pondérées selon divers facteurs relatifs à la taille des échantillons, au temps, à la performance passée des sondeurs.  Les analyses faites pour ce blogue sont des estimations statistiques (modèle ARIMA, pour les spécialistes) de l'évolution des intentions de vote, basées sur les moyennes quotidiennes des estimations des sondages qui sont réalisés à chaque jour. Ces estimations permettront de faire une "prédiction de jour de vote" à la fin de la semaine. Ces prédictions "toutes choses égales par ailleurs" sont toutefois d'autant plus fiables que l'évolution du vote est stable (désarroi de l'analyste...). La marge d'erreur des séries augmente avec l'instabilité des intentions de vote.

Au plaisir

vendredi 22 avril 2011

Les panels web sont-ils fiables?

Suite à la publication du sondage Crop hier mettant le NPD en avance sur le Bloc au Québec, plusieurs se sont demandé si les sondages de type Panel Web étaient fiables, ceci parce que Crop a écrit ce qu'il faudrait toujours écrire pour ce type de sondage soit, que la marge d'erreur ne s'applique pas. Qu'est-ce que cela signifie?  En gros, comme les panels web n'utilisent pas d'échantillons probabilistes, on ne peut pas en estimer la fiabilité par les moyens statistiques habituels puisque ceux-ci sont basés sur le fait que l'échantillon est probabiliste. On doit donc se fier à d'autres moyens.

Un premier moyen consiste à vérifier si d'autres informations de type socio-politique données par le sondage sont conformes à ce à quoi on s'attend. Crop informe que l'intention de vote référendaire de son sondage est à 42% après répartition. Si cette intention de vote avait été particulièrement basse, on aurait pu se poser des questions. Ce n'est pas le cas. Ils serait pertinent de savoir quels moyens les sondeurs utilisent pour valider que leur échantillon n'est probablement pas biaisé (comme le vote déclaré à l'élection précédente, par exemple).

Un deuxième moyen est évidemment de vérifier si les informations données par d'autres sondages utilisant des méthodologies différentes donnent des résultats similaires. Hier, un sondage Ekos utilisant la méthode SVI (téléphonique automatisée) et un sondage Ipsos-Reid (téléphonique) donnaient un portrait similaire soit le NPD à égalité avec le Bloc au Québec (à l'intérieur de la marge d'erreur).

Il demeure que les méthodologies sont variées et peuvent toutes présenter certains biais. Les échantillons téléphoniques SVI ne font pas de sélection à l'intérieur des ménages, ce qui va à l'encontre de ce que veut la théorie probabiliste. Par contre, Ekos a ajouté des numéros de téléphone portable. La plupart des sondages téléphoniques traditionnels font une sélection par quotas, ce qui va aussi à l'encontre de la théorie probabiliste.  Certains sondeurs ont des taux de discrets qui dépassent l'entendement. La formulation de la question d'intention de vote varie. Tous ces éléments peuvent entraîner des biais. 

Pour le moment, on postule que les biais s'annulent. Ce n'est pas nécessairement le cas mais c'est la seule hypothèse que l'on peut faire en pratique. Dans les premières analyses faites à partir du début janvier, les sondages Web avaient tendance à surévaluer le NPD et à sous évaluer le PLC par rapport aux autres sondages. Ce n'est pas le cas si on se restreint aux sondages publiés depuis le début mars, au contraire. Tant les sondages Internet que SVI auraient tendance à surévaluer le PLC aux dépens du PC.

Bref, de quoi réfléchir.

Bon week-end de Pâques!

Au plaisir

jeudi 21 avril 2011

Oh là là, ça bouge - bis

Bonjour

Branle-bas de combat ce matin avec la parution des sondages Crop et Ekos mettant le NPD en avance sur le Bloc au Québec. Voyons voir ce qu'il en est si nous prenons tous les sondages et que nous faisons un nouveau type d'analyse, de type série chronologique, plus "raffinée" que les analyses précédentes. Nous pouvons maintenant faire ces analyses parce qu'il y a suffisamment de sondages et de jours.

Pour le Canada, d'abord:


Le graphique montre que le NPD serait en train de rejoindre le PLC pour l'ensemble du Canada. Le NPD monte aux dépens de tous les partis. Il n'y a pas d'effet de débat significatif pour aucun des partis, une fois l'évolution avec le temps prise en compte.

- Ces analyses confirment les analyses précédentes pour ce qui est de l'évolution en forme de poisson pour le PLC, soit une baisse suivie d'une hausse et de nouveau d'une baisse.
- L'évolution de l'intention de vote pour le PC est quant à elle en forme de cloche, soit une hausse suivie d'une baisse.
- Enfin, l'évolution pour le NPD est également en forme de poisson mais à l'inverse de ce qui s'est passé pour le PLC. Le NPD est clairement en remontée depuis avant le débat.

- Statistiquement, le Bloc aurait une évolution très complexe mais il est préférable d'y revenir dans l'analyse pour le Québec.

Ces estimations mettent le PC à 36,1%, le PLC à 25,4, le NPD à 23,6% à égalité avec le PLC, le Bloc à 6,7.



Pour le Québec, ensuite:


Les nouvelles analyses confirment les anciennes. Le Bloc serait en descente tout comme le PC et le PLC au bénéfice du NPD.

- Sur le plan statistique, le BQ perdrait près de un quart de point par jour en moyenne depuis le 16 mars.

- On constate une montée "fulgurante", soit près de ,14 points par jour depuis le 16 mars accompagnée d'une hausse de 1,8 points qui semble due au débat. Il faut évidemment être prudent puisque de tels mouvements sont assez rares et ne se maintiennent pas toujours jusqu'à la fin des campagnes électorales. D'une part, il est clair que cette tendance ne peut pas se maintenir sinon le NPD remporterait tous les sièges! D'autre part, les deux sondages qui sont en partie responsables de cette "tendance" sont d'une part un panel Web, d'autre part un sondage téléphonique automatisé (dit SVI). Ces résultats demandent à être confirmés par d'autres sondages.

- Il demeure qu'en ce moment, on aurait le BLOC à 30,4 et le NPD à égalité à 32,9% (à l'intérieur de la marge d'erreur) d'une part et le PLC et le PC, également à égalité à environ 16,4% et 16,8% respectivement, d'autre part.


Pour ce qui est de l'Ontario:


En Ontario, la situation est différente.
- D'une part, le PC se maintient. Aucune évolution depuis de 16 mars. Il se retrouverait à 41,3% en ce moment.
- D'autre part, le PLC a vu sa hausse récente a augmenté de ,14 points par jour depuis le 16 mars mais il aurait perdu ,37 point suite au débat. Il se situerait à 34,7 en ce moment.
- Enfin, le NPD n'évolue pas plus que le PC mais il aurait gagné ,32 points suite au débat.  Il se situerait à 17,1%

Comme on le voit, en Ontario, ca ne bouge pas beaucoup en ce moment, ce qui signifie que les mouvements constatés pour l'ensemble du Canada se produiraient hors Ontario.



Note méthodologique:

Les séries chronologiques sont bâties à partir de la moyenne des intentions de vote mesurées à chaque jour par tous les sondages qui étaient en cours à chaque jour. Cette manière de faire postule : 1) que tous les sondages sont équivalents 2) donne un poids plus important aux sondages qui sont réalisés sur plus de jours 3) ne tient pas compte de la taille des échantillons. Il s'agit de décisions réfléchies. Entre autres, si on tenait compte de la taille des échantillons, on accorderait beaucoup plus d'importance aux sondages de type Panel Web ou SVI. Toutefois, ces choix méthodologiques ont évidemment des conséquences.  Nous pensons que nous avons choisi les moins pires conséquences!


Remerciements:
Les analyses et les graphiques sont le fruit du travail de l'agente de recherche Christine Doucet. Merci!

mercredi 20 avril 2011

Demande spéciale - question ouverte ou fermée?

Bonjour,

Un collègue m'a demandé si les sondages Nanos donnaient des résultats différents puisqu'ils sont les seuls à utiliser une question qui ne mentionne pas les partis. Nanos demande "For those parties you would consider voting for federally, could you please rank your top two current local preferences"? Les données publiées sont celle du parti nommé comme premier parti préféré localement. Il faut noter que Nanos utilise également un sondage roulant sur 3 jours, ce qui est une autre source de différences potentielles. Nous inscrivons les résultats des sondages Nanos une fois tous les trois jours dans la base de données.

Résultat:
Après contrôle pour l'évolution avec le temps et pour l'impact des méthodes (sondages Internet ou IVR), les sondages Nanos...
- donnent en moyenne 3,4 points de plus au PLC, 1,8 points de moins au NPD et 2,8 points de moins aux Verts sur l'ensemble du Canada;
- donnent en moyenne 6,1 points de plus au PLC en Ontario; cette surévaluation n'est pas compensée par des différences négatives qui soient significatives ce qui s'explique normalement par le fait que la répartition est à peu près égale pour les autres partis (et donc plus faible pour chaque parti et non significative).
- donnent en moyenne 6,1 points de plus au PLC au Québec, 3,3 points de moins au NPD et 1,8 points de moins aux Verts.

Au plaisir







Pour le Canada:

mardi 19 avril 2011

Oh là là, ca bouge.

Bonjour,

Nous avons fait de nouvelles analyses de l'évolution des intentions de vote à partir de tous les sondages publiés jusqu'à ce matin. Nous avons donc intégré les sondages réalisés après le débat. Par ailleurs, ayant de plus en plus de sondages, nous nous sommes restreints maintenant à l’évolution depuis le 1er mars.

1) Canada total:

-  Les intentions de vote pour le PC sont toujours au beau fixe (à 38%) depuis le 1er mars. 

- Le PLC a maintenant une évolution en forme de poisson, c'est à dire qu'après être descendu puis remonté, il plafonne. Il serait à 26,4%. 

- La meilleure manière de modéliser la hausse des intentions de vote pour le NPD depuis le débat est également de parler d'une évolution en forme de poisson mais à l'inverse de celles des Libéraux. Après avoir plafonné un certain temps, le NPD est maintenant en hausse, ce qui le mettrait à 20,9%. 

- Les intentions de vote pour les Verts baissent de ,07 points par jour depuis le 1er mars, ce qui les mettrait à 6,1%.

- Nous aborderons  l'évolution des intentions de vote pour Le Bloc quand nous parlerons du Québec.  
- Les dernières estimations mettaient le PC à 38,2%, le PLC à 27,7%, le NPD à 18,0%, le BQ à 7,8% et les Verts à 6,2%. La différence la plus importante entre celles-ci et les nouvelles analyses se situent au niveau du NPD qui aurait augmenté de 2,4 points. 
- Il y a toujours une différence significative entre les sondages Internet et les autres mais un peu moins prononcée: au total, les sondages Internet ont évalué le PLC en moyenne 1,4 points plus bas que les autres sondages et le PC également plus bas, de 2,4 points dans ce cas. Par contre, pour le NPD, il n'y aplus la différence significative qu'il y avait auparavant.
- Il y a aussi une différence significative entre les sondages de type SVI (appels téléphoniques automatisés) et les autres : 3,6 points de moins pour le PC, 1,5 point de moins pour le NPD et 2 points de plus pour les Verts.
Notez que les effets des méthodes ne sont pas intégrés dans les graphiques.



2) Ontario: tout bouge
- Le PC est toujours stationnaire à 41,2%

- Par contre, pour ce qui est des Libéraux, la même tendance non linéaire constatée antérieurement s'est transformée. Le PLC a repris en gros le terrain perdu en début de période mais il plafonne maintenant et serait même en légère redescente. Ils seraient à 34,5%.

- Le  NPD a également une évolution en "poisson". Il serait clairement en remontée toutefois depuis le débat et se situerait actuellement à 19,8%.


 - Les Verts sont en toujours en baisse et se situeraient maintenant à 6,7%. 

- Par rapport aux dernières analyses, le PLC aurait perdu 2,9 points et le NPD en aurait gagné 3,3.


- Par ailleurs, il existe une corrélation négative (-,354) entre les intentions de vote pour le NPD et pour le PLC. Ces corrélations ne sont pas significatives pour le PC. C'est donc surtout entre NPD et Libéraux que les intentions de vote semblent s'échanger.

- En Ontario, il existe toujours une différence significative entre les sondages Internet et les autres. Depuis mars, ces sondages ont tendance à accorder 2,6 points de plus au PLC et 2,5 de moins au PC.   Par ailleurs, les sondages IVR donnent en moyenne 3,5 points de plus au PLC, 2,8 de moins au PC et 1,3 points de plus aux Verts.


Notez que les effets des méthodes ne sont pas intégrés dans les graphiques.



Il faut souligner la forte dispersion dans l'estimation de l'intention de vote, particulièrement pour le NPD au cours des derniers jours. 



3) Québec: que se passe-t-il?
- Depuis le 1er mars, évolution en forme de cloche pour le PC au Québec, ce qui signifie que la hausse est arrêté et qu'il plafonne. Ces analyses le mettent environ à 19,3%.

-  Pour ce qui est du PLC, on voit une évolution en forme de poisson mais beaucoup de variation d'un sondage à l'autre et donc, prudence est de mise.  Le PLC serait à égalité avec le PC à 19,2%.

- Bien des choses se passent du côté du Bloc et du NPD. Le Bloc apparaît clairement en baisse et se situerait à 33,4%.

- Le NPD aurait vraiment pris du mieux depuis le débat mais il est très difficile de modéliser son évolution.  Les analyses montrent un effet débat de 3 points environ mais un examen attentif montre une forte dispersion des estimations des divers sondeurs. Et donc, encore là prudence. Le NPD selon ces analyses serait à 24,2 mais il faut noter (2ème graphique) que certains sondeurs le mettent nettement plus bas. Il est clair toutefois que ce sont le Bloc et le NPD qui s'échangent des intentions de vote, du moins sur le plan global (corrélation de - ,527).
 
- Il faut faire très attention puisque les sondages Internet mettent depuis le début mars le PC près de 4 points plus haut que les autres sondages alors que les sondages IVR se distinguent pour 3 partis : 4,4 points de plus pour le PC, 3 points de moins pour le Bloc et 2,3 points de plus pour le NPD.

 Notez que les effets des méthodes ne sont pas intégrés dans les graphiques.



 


Commentaire: Il existe des écarts importants entre les estimations de diverses firmes y compris dans l'estimation de la proportion d'indécis. La prochaine mise à jour devrait se faire d'ici la fin de semaine et permettra de faire des analyses de séries temporelles étant donné l'accumulation des sondages. Ces analyses donneront des estimations plus précises et permettront de valider (ou d'invalider) les analyses actuelles.

Au plaisir
Claire Durand

jeudi 14 avril 2011

Qui a raison? Les indécis, peut-être

Bonjour,

On a attiré mon attention sur le fait que deux sondages publiés hier donnent deux portraits très différents des intentions de vote. Ekos soutient que les Conservateurs et les Libéraux s’approchent au point d’être maintenant à seulement 7 points l’un de l’autre alors que Compas les met à 21 points. Comment départager? L’avenir le dira bien sûr mais y a-t-il des différences dans la méthodologie des deux sondages qui peuvent expliquer ces différences dans les résultats?

La lecture des rapports des firmes est très intéressante. Ekos donne toutes les informations pertinentes pour évaluer son sondage : Nombre total de répondants, proportion d’indécis, nombre effectif de personnes ayant indiqué une intention de vote, marge d’erreur et ceci pour l’ensemble du Canada et pour chaque région. Elle utilise la méthode IVR (SVI en français) soit l’entrevue téléphonique informatisée.  Elle a interrogé 1238 répondants dont 1108 ont donné leur intention de vote. Les proportions de discrets sont de 10,6% au national, de 8,7% en Ontario et de 11,8% au Québec. Noter que l'échantillon inclut des numéros de cellulaire.

Pour ce qui est de Compas, la seule information que nous avons sur la méthodologie est la suivante :
« A carefully stratified, representative sample of n=2151 voters was interviewed by professional interviews over the telephone during the period April 6-11, 2011. By convention, surveys of this size are deemed accurate to within 2.1 percentage points 19 times out of 20. The principal investigator on this study was Dr. Conrad Winn. »

D’où il ressort que l’échantillon a été stratifié. Selon quel paramètre? La région? Combien y en a-t-il par région? On ne le sait pas. Il y a 2151 voteurs interviewés (les a-t-on sélectionnés en fonction du fait qu’ils ont dit vouloir aller voter?). Surtout, quelle est la proportion de discrets? Quelque part dans le titre d’un graphique, on trouve l’information suivante :
Overwhelming Conservative Strength Nationally (after 35% Undecided Removed from Calculations)
Ce qui signifie que le nombre de répondants effectif est de 1463, à peine plus que le nombre de répondants du sondage Ekos.
Voici les graphiques comparatifs des résultats obtenus par les deux firmes.





Les différences sont généralement tout à fait en dehors de l’intervalle de confiance déterminé par la marge d’erreur plausible (on ne peut pas la calculer pour Compas lorsqu’il s’agit de l’Ontario et du Québec puisqu'on ne connaît pas le nombre de répondants ni la proportion d'indécis).

Pour ce qui est de la proportion d’indécis :
- pour Ekos, elle est similaire à ses autres sondages et en général inférieure à celle d’autres firmes telles Nanos ou Léger.
- Pour Compas, dont c'est le premier sondage électoral publié dans cette campagne à notre connaissance, la proportion d’indécis est près de deux fois supérieure à celle de Nanos (18). A ma connaissance, 35% d'"indécis" malgré la présence d'une question de relance, c’est du jamais vu en période électorale.
- Pour Angus Reid et Harris Decima, la proportion d’indécis n’est pas indiquée dans les rapports, ce qui devrait être corrigé. Peut-être une demande d'accès à l'information?

Au plaisir




Etat de situation depuis février


Bonjour,

Nous avons fait de nouvelles analyses de l'évolution des intentions de vote à partir de tous les sondages publiés jusqu'à ce matin et ayant donc été réalisés en gros avant les débats ou avant que ceux-ci aient pu avoir un impact. Par ailleurs, ayant de plus en plus de sondages, nous nous sommes restreints maintenant à l’évolution depuis le 1er février. Des analyses ont été faites également en débutant au premier janvier et au premier mars. Les résultats sont similaires pour ce qui est de la prédiction de l’intention de vote actuelle.

1) Canada total:

-  Les intentions de vote pour le PC n’apparaissent plus en hausse depuis le 1er février. Très légère hausse pour le PLC (,032 point par jour) et pour le NPD (,034 point par jour) associée à une légère tendance à la baisse pour les Verts (-,04 point par jour). Par contre, le Bloc serait en baisse après avoir monté un peu en janvier
- Ces estimations mettent le PC à 38,2%, le PLC à 27,7%, le NPD à 18,0%, le BQ à 7,8% et les Verts à 6,2% et donc, très peu de différences entre ces analyses et celles de la semaine dernière sinon des confirmations : stabilisation des intentions de vote pour le PC, hausse du PLC et du NPD, baisse concurrente des Verts et du Bloc, mais des effets encore faibles.
- Il y a toujours une différence significative entre les sondages Internet et les autres: au total, les sondages Internet ont évalué le PLC en moyenne 2,5 points plus bas que les autres sondages et le NPD, 2,1 points plus haut.
- Il y a aussi une différence significative entre les sondages de type SVI (appels téléphoniques automatisés) et les autres : 3 points de moins pour le PC et 1,4 point de moins pour le NPD.
Notez que les effets des méthodes ne sont pas intégrés dans les graphiques.



2) Ontario: rien n’a bougé depuis le début février ou presque
- La légère hausse de l'intention de vote pour le PC constatée dans les précédentes analyses a disparu. Les Verts sont toujours en baisse à ,037 points par jour. Aucune évolution significative pour le NPD.
- Par contre, pour ce qui est des Libéraux, la même tendance non linéaire constatée antérieurement se maintient. Le PLC a repris en gros le terrain perdu en début de période.
- Ces estimations mettent le PC à 41,3%,  le PLC à 37,4%, le NPD à 16,5% et les Verts à 6,2%.
- En Ontario, il existe toujours une différence significative entre les sondages Internet et les autres mais elle a maintenant trait aux Verts qui obtiennent en moyenne 4,3 points de plus dans ces sondages. Par ailleurs, les sondages IVR donnent en moyenne 2,3 points de moins au NPD et 4,7 points de plus aux Verts.
Notez que les effets des méthodes ne sont pas intégrés dans les graphiques
.


Il faut souligner la forte dispersion dans l'estimation de l'intention de vote, particulièrement pour le PC en Ontario au cours des dernières semaines.



3) Québec:
- La légère hausse de l'intention de vote pour le PC augmente un peu à ,054 points par jour depuis le 1er février. L'évolution des intentions de vote pour le Bloc ont une forme de butte, c’est-à-dire qu’elles ont monté mais sont maintenant significativement en descente. Enfin, le NPD serait en remontée à ,07 points par jour. 
- Il faut toutefois faire attention puisque les sondages Internet mettent le NPD 2,8 points plus haut que les autres alors que les sondages IVR se distinguent pour 3 partis : 2 points de moins pour le PC et pour le NPD, 3,7 points de plus pour les Verts.
- Ces estimations mettent le Bloc à 32,5%, le PC, le PLC et le NPD pratiquement à égalité (respectivement 21,3%, 19,4% et 18,2%) et les Verts à 5,1%. 
Notez que les effets des méthodes ne sont pas intégrés dans les graphiques.

 


Commentaire: Il existe des écarts importants entre les estimations de diverses firmes y compris dans l'estimation de la proportion d'indécis (lorsque disponible!). Étant donné les débats, la prochaine mise à jour devrait se faire plus tôt la semaine prochaine, ne serait-ce que pour valider ou invalider les analyses actuelles et possiblement les raffiner.

Au plaisir
Claire Durand