Plus ça change...

 Bonjour,

Deux sondages post-débat sont parus aujourd'hui, un de la firme Léger et le sondage roulant de Mainstreet. Les deux mêmes questions soulevées dans le message de dimanche reviennent nous hanter. Y a-t-il une différence entre les firmes? Y a-t-il une évolution des intentions de vote?

Des différences?

Les différences entre les deux firmes les plus présentes depuis août, soit Léger -- quatre sondages -- et Mainstreet -- neuf sondages indépendants (voir note 1) -- se maintiennent. Quatre points de plus pour Québec Solidaire (QS) et trois points de plus pour le Parti Québécois (PQ), en moyenne, chez Léger. Près de quatre points de plus pour le Parti Conservateur (PC) chez Mainstreet. Ces différences montent toutefois à plus de cinq points pour QS et le PC chez les francophones et dans la région de Québec. J'ai abordé les possibles raisons des différences dans mon message de blogue précédent. 

J'ajouterais qu'il y a une différence entre les firmes quant à la proportion de jeunes de 18 à 34 ans et d'allophones non-pondérés dans les échantillons, soit les proportions brutes de personnes rejointes. Évidemment, ces proportions sont ajustées par pondération et sont normalement les mêmes dans les estimations publiées. Léger a des proportions plus près de la réalité pour les jeunes (27,8% comparé à 11,2% pour Mainstreet) et pour les non-Francophones (16,8% comparé à 13,6%). L'impact possible est qu'habituellement, plus les membres d'un sous-groupe sont difficiles à joindre, moins ceux qui sont rejoints sont représentatifs de leur groupe. Ceci pourrait expliquer les différences entre les deux firmes pour ce qui est de l'appui aux partis qui sont plus populaires dans certains sous-groupes.

Est-ce que les intentions de vote changent?

Nous avons maintenant suffisamment de sondages pour estimer avec plus de fiabilité la possibilité d'un changement post débat(s). Comme l'illustre ce graphique, le seul parti qui semble avoir augmenté ses appuis est le Parti Québecois (PQ). Les appuis au PQ seraient passés de 8% en août à près de 12% au cours des derniers jours. Pendant ce temps, les appuis à la Coalition Avenir Québec (CAQ - 40%), au Parti Libéral du Québec (PLQ - 16%) et au PC (16,5%) sont stables. Les appuis à QS apparaissent fluctuants mais se retrouvent au même point qu'au début de la campagne, un peu en bas de 15%.

En conclusion

Si la vérité se situe dans la moyenne entre les différentes firmes, nous devons conclure à une relative stabilité des intentions de vote, sauf pour le PQ. Par contre, il n'y a pas suffisamment de sondages pour savoir de façon fiable que les deux firmes voient également les mêmes tendances.

Note 1: Les sondages Mainstreet sont des sondages roulants (tracking) où on collecte des données à chaque jour et on publie quotidiennement la moyenne cumulative des derniers jours (on retire les données de la journée la plus éloignée et on ajoute celles de la journée la plus récente). Les analyses statistiques doivent tenir compte de cette situation: il faut éviter un chevauchement des informations puisque les informations entrées ne seraient pas indépendantes et cela donnerait un poids trop élevé aux sondages faits par la firme. Pour éviter un chevauchement des informations, je rentre les sondages Mainstreet une seule fois par période. Au début de la campagne, la période était de quatre jours. Elle est passée récemment à trois jours.

Un sondage ne fait pas le printemps

 Bonjour,

 

Mise à jour: Je n'avais pas vu un sondage Research Co. effectué cette semaine. J'ai refait les analyses en intégrant ce sondage et j'ai refait les graphiques en intégrant ce sondage et le sondage de Segma Recherche. Cela n'entraîne pas de changement notable dans le graphique. Les changements sont mentionnés dans le texte. 

Ce premier message de blog de la campagne arrive un peu tard pour une raison simple: Pour analyser les sondages, il faut des sondages! Or, depuis le sondage Léger du 22 au 26 août, la semaine avant le déclenchement de la campagne le 28 août, seuls 13 sondages nationaux indépendants (voir note 1) -- incluant Research Co.-- ont été publiés. Cette situation est similaire à celle de la campagne québécoise de 2008 où le PLQ était donné gagnant. Bref, plus le gagnant est connu avec certitude, moins il y a de sondages.  

Des différences entre les firmes?

Ce message fait suite à mon article publié dans La Presse Plus mercredi: Sondages, méthodologie et intentions de vote - La Presse+ où je m'attardais à deux questions, soit l'existence de différences entre les firmes de sondage et la présence possible de mouvement. Je complète les analyses pour la période commençant fin août et en intégrant le sondage Segma publié mercredi 21 septembre et deux périodes de sondage Mainstreet (18-20 et 21-23 septembre).

Les conclusions que j'avais tirées dans cet article sur les différences entre Léger360 et Mainstreet sont confirmées avec l'ajout des nouveaux sondages. Il y a une différence systématique de quatre points pour les estimations de l'appui au Parti Conservateur du Québec (PCQ) et à Québec Solidaire (QS). Léger estime l'appui à QS à 16% en moyenne (12,1% pour Mainstreet) et le PCQ à 15% (19% pour Mainstreet). La différence d'estimation pour le PQ est toujours marginale: 11% pour Léger, 8,7% pour Mainstreet. Les différences sont particulièrement importantes dans la région de Québec, là où les tailles d'échantillons sont petites. On parle de plus de cinq points de différence pour le PC et QS.

Qu'en est-il des estimations de Segma Recherche? Cette firme utilise une méthodologie différente de celle des deux autres firmes, soit un "classique" sondage téléphonique avec interviewer. Ses estimations se distinguent par une évaluation nettement plus élevée pour le Parti Québecois (PQ) -- 2,8 points de plus que Léger et 4,9 de plus que Mainstreet -- et le PLQ -- trois points de moins que Léger et 3,3 points de moins que Mainstreet.

 Research Co. a publié un sondage du 19 au 21 septembre, donc elle aussi avant le débat. Il s'agit d'une firme de Vancouver, déjà présente en 2018, qui fait des sondages Web mais en utilisant une source d'échantillons différente de ce que fait Léger, avec des visées probabilistes. Ses estimations se rapprochent plus de celles de Mainstreet que de celles de Léger.

De nombreuses raisons peuvent expliquer ces différences. Certains se rappelleront qu'à l'époque où tous les sondages étaient fait par téléphone avec interviewer, la surestimation du PQ et la sous-estimation du PLQ étaient presque la norme. Par ailleurs, les sondages de type téléphonique automatisé ont eu tendance dans les élections américaines et australiennes à mieux estimer les appuis plus à droite mais il faut garder à l'esprit que les situations politiques sont différentes. De la même manière, particulièrement dans les premières années de leur utilisation, les sondages web ont eu tendance à surestimer l'appui à gauche mais entretemps, les firmes ont eu le temps de raffiner leurs méthodes. Il demeure que la majorité des sondages Web américains ont fortement sous estimé l'appui à Donald Trump lors de l'élection présidentielle de 2020. Par contre, les estimations de Léger dans cette élection étaient à l'intérieur de l'intervalle de crédibilité.

Qu'en est-il de l'évolution des intentions de vote?

Étant donné la différence marquée entre le sondage Segma et les sondages des deux autres firmes, j'ai décidé d'exclure ce sondage des analyses. Les analyses sont donc basées sur 13 sondages, huit de Mainstreet, trois de Léger, un de Segma et un de Research Co.

Le graphique montre que les appuis à la CAQ semblent relativement stables depuis le début de la campagne, autour de 40% (39,5% en moyenne). Les appuis au PLQ (17% en moyenne) et au PQ (9,7%) sont également relativement stables. Il y a eu possiblement une baisse de un demi-point pour le PLQ et une hausse de un point pour le PQ depuis le début de la campagne mais il faut attendre d'autres sondages pour en être certain d'autant plus que les firmes se contredisent sur ces estimations. De plus, il ne faut pas oublier que les sondages ne mesurent pas un possible effet du débat de Radio Canada tenu le jeudi 22 septembre.

Québec solidaire semble également ne pas avoir fait de gains au total mais ses appuis auraient fluctué -- en baisse puis en remontée. Par contre, les appuis au PC auraient possiblement augmenté d'un point et demi depuis le début de la campagne. Il faut toutefois tenir compte encore plus pour ces deux partis de la différence entre les firmes de sondage. La présence plus importante des sondages d'une firme à certaines périodes influencent les courbes. En moyenne, les appuis à QS se situent à 13,5% et ceux du PCQ à 17,7% mais en fin de parcours, ils approchent 15% pour QS et 19% pour le PCQ.

En conclusion

La prudence demande de conclure qu'il y a eu peu de mouvement dans les intentions de vote depuis le début de la campagne. L'avenir dira si le dernier débat a eu un impact substantiel sur les intentions de vote. Toutefois, dans les circonstances actuelles, il sera très important de suivre l'évolution des appuis jusqu'à la toute fin.

Note 1: Les sondages Mainstreet sont des sondages roulants (tracking) où on collecte des données à chaque jour et on publie quotidiennement la moyenne cumulative des derniers jours (on retire les données de la journée la plus éloignée et on ajoute celles de la journée la plus récente). Les analyses statistiques doivent tenir compte de cette situation: il faut éviter un chevauchement des informations puisque les informations entrées ne seraient pas indépendantes et cela donnerait un poids trop élevé aux sondages faits par la firme. Pour éviter un chevauchement des informations, je rentre les sondages Mainstreet une seule fois par période. Au début de la campagne, la période était de quatre jours. Elle est passée récemment à trois jours.