Archive pour le sujet ‘représentativité’

Publié par Julie Fortin le 19 septembre 2012

Fracture numérique et sondages web

CrackLa notion de fracture numérique, initialement utilisée pour décrire le fossé entre les individus qui avaient accès aux technologies et les autres, s’est élargie pour inclure plusieurs disparités, notamment en ce qui concerne les infrastructures de connexion, les habiletés à utiliser les technologies, la sophistication des activités réalisées en ligne et la fréquence d’utilisation.

Dans un récent article de la revue Quality & Quantity*, des chercheuses portugaises s’intéressent aux différences qui caractérisent la fréquence d’utilisation d’internet et, surtout, à leurs impacts sur les sondages web.

Lire la suite »

Poisson-migration-sondageBeaucoup de clients mènent des études de suivi, que ce soit pour analyser l’évolution d’une marque (tracking), pour comparer des taux de satisfaction ou encore pour mesurer l’impact d’une intervention. Par «étude de suivi», j’entends une étude récurrente qui pose les mêmes questions à une même population dans une perspective de comparaison des résultats.

Ces études, traditionnellement effectuées par sondage téléphonique, migrent de plus en plus vers les sondages en ligne. Comme les sondages par internet offrent des résultats souvent plus rapides et à moindre coût, la tentation est forte de changer le mode de collecte.

Or, beaucoup de clients s’interrogent : quels sont les facteurs à considérer pour migrer une étude et, surtout, quelles seront les implications sur les résultats? Lire la suite »

Publié par Julie Fortin le 30 août 2012

Débat sur le recensement obligatoire aux États-Unis

Recensement3Il y a deux ans déjà, la fin annoncée du recensement obligatoire (version longue) avait fait couler beaucoup d’encre au pays.

Depuis le printemps dernier, le même débat fait rage aux États-Unis : le American Community Survey (ACS), l’équivalent de notre formulaire long, est en danger.

Lire la suite »

Publié par Vincent Bouchard le 8 août 2011

Déterminer la taille optimale d’un échantillon

Échantillon-Spaghetti2Plusieurs clients nous demandent quelle est la taille optimale pour que leur échantillon de répondants soit représentatif de la population. Au risque d’en choquer certains, je leur réponds invariablement « 30 », pourvu qu’il s’agisse d’un échantillon probabiliste.

En effet, la statistique nous apprend qu’un échantillon de moins de 30 répondants ne vaut rien… Mais qu’à partir de 30, tout baigne. Alors d’où vient cette obsession de toujours vouloir interroger 400, 500 voire 1 000 répondants?

Lire la suite »

Publié par Julie Fortin le 15 mars 2011

Sondages en ligne : quelle durée pour la période de collecte?

Sablier-durée-sondages-webEn d’autres mots, combien de temps les sondages en ligne doivent-ils demeurer… en ligne? Quelques heures? Quelques jours? Quelques semaines? Évidemment, il n’y a pas de réponse unique à cette question.

Dans les sondages par interception sur un site web, par exemple, où les taux de réponse sont relativement bas, ça peut prendre quelques semaines avant d’obtenir le nombre de répondants visés par l’étude. Lorsqu’on sonde les membres d’une association ou les représentants d’une entreprise au moyen d’un sondage en ligne, on peut aussi vouloir laisser un délai suffisant pour que tous aient la chance de répondre (1 ou 2 semaines par exemple).

En fait, il faut ajuster la période de collecte au type de répondants ciblés. Une période de collecte longue n’est pas un problème en soi, si l’échéancier le permet. C’est plutôt des sondages très rapides dont il faut se méfier.

Lire la suite »

Publié par Julie Fortin le 11 février 2011

Sondage et téléphonie cellulaire : la problématique

Cell-phonesLes sondages téléphoniques sont aujourd’hui confrontés à un problème grandissant : de plus en plus de ménages n’utilisent maintenant plus de ligne fixe ou «terrestre», mais optent plutôt pour le téléphone cellulaire exclusivement.

Aux États-Unis, plus de 25 % des ménages utiliseraient uniquement le cellulaire (source). Selon l’enquête sur le service téléphonique résidentiel de Statistique Canada, cette proportion était estimée à 8 % au Canada et à 6,7 % au Québec en 2008. Si on examine la distribution selon l’âge, on observe que 24,6 % des ménages québécois constitués uniquement de personnes âgées de 18 à 34 ans utiliseraient exclusivement le téléphone cellulaire. Comme ces données datent de 2008, on peut penser que ces proportions se sont légèrement accrues.

Les sondages téléphoniques traditionnels souffrent donc d’un problème de couverture et sont moins représentatifs qu’avant, particulièrement en ce qui concerne les ménages des 18-34 ans.

Lire la suite »

Publié par Julie Fortin le 10 janvier 2011

Retour sur la journée Infopresse – vigie et recherche marketing

ConferenceLe 8 décembre dernier, j’assistais à la  journée Infopresse dédiée aux nouvelles tendances de la recherche marketing. Je n’ai malheureusement pas eu le temps de vous en parler avant, mais vaut mieux tard que jamais!

Dans l’ensemble, je retire des bénéfices de cette journée dans la mesure où plusieurs conférences ont stimulé ma réflexion. Voici quelques-unes de mes impressions à la suite de ce que j’y ai vu et entendu. Je vous parle brièvement des cinq conférences de la journée.

Lire la suite »

Publié par Julie Fortin le 6 janvier 2011

Que nous réserve 2011 en matière de recherche et sondage?

boule-de-cristal2D’abord, j’aimerais souhaiter à tous les lecteurs de ce blogue une bonne et heureuse année 2011! Mes billets se sont faits un peu plus rares ces derniers temps, mais je prends la ferme résolution de revenir à un rythme plus régulier dès aujourd’hui…!

L’industrie de la recherche et du sondage est en profonde mutation depuis quelques années. Plusieurs nouvelles tendances ont vu le jour et se poursuivront sans aucun doute. Voici donc quelques «prédictions» pour le développement de la recherche en 2011…

Lire la suite »

Publié par Julie Fortin le 30 septembre 2010

Les sondés volontaires

SourisSondageWeb3Dans son édition «papier» de mercredi (29 septembre 2010), le quotidien Le Soleil publiait la lettre d’un lecteur inquiet de la validité des sondages effectués à l’aide de panels de volontaires (par opposition aux panels avec recrutement aléatoire de répondants).

Comme c’est la première fois que je lis un tel commentaire dans les journaux, je me permets d’en reproduire ici quelques extraits, que je commente. Je ne sais pas qui est M. Robert Pelley, mais je le remercie de son intervention… et lui emprunte le titre de sa missive!

Lire la suite »

Recensement3La nouvelle, publiée en pleine effervescence de l’après-G20, n’a pas fait beaucoup de bruit. Le 29 juin dernier, on apprenait ainsi que la version longue du questionnaire de recensement, habituellement envoyé à 1 ménage sur 5, ne comportera plus de participation obligatoire (voir l’article de Cyberpresse).

Il sera plutôt remplacé par une enquête à participation volontaire, soit l’enquête nationale auprès des ménages, qui ciblera le tiers des ménages canadiens. En revanche, la version courte du recensement demeurera obligatoire.

Les conséquences de cette décision seront dommageables pour toute l’industrie du sondage. Voici pourquoi.

Lire la suite »

Publié par Julie Fortin le 14 juillet 2010

La pondération des données

Balance-pondérationLorsqu’on lit la méthodologie d’un sondage, on remarque souvent la phrase suivante (ou son équivalent) : «Les données ont été pondérées pour refléter les caractéristiques de la population à l’étude…». Et si on s’arrêtait un instant à cette fameuse pondération? Évidemment, je simplifie grandement le concept à des fins de compréhension.

Qu’est-ce que la pondération? Pourquoi pondérer les données?

La pondération des données consiste à accorder un coefficient de pondération (un poids) à chacun des individus d’un échantillon. L’objectif premier de l’exercice est de corriger la représentativité de l’échantillon en fonction de certaines variables clés afin d’être en mesure d’extrapoler les résultats du sondage à la population.

Lire la suite »

Address-based-samplingDepuis environ 25 ans au Québec, on utilise la génération aléatoire de numéros de téléphone (GANT) (en anglais Random Digit Dialing – RDD) pour constituer des échantillons probabilistes. SOM a d’ailleurs utilisé cette méthode dès sa fondation en 1986.

Comme solution de rechange au RDD, une nouvelle tendance se dessine (surtout aux États-Unis pour le moment) : il s’agit de l’échantillonnage basé sur les adresses de résidence pour sélectionner les ménages qui répondront à un sondage (en anglais Address Based Sampling – ABS).

Lire la suite »

logotwitterTwitter remplacera-t-il les sondages d’opinion? est le titre d’un article publié par Branchez-vous la semaine dernière. On y fait référence à une étude de l’Université Carnegie Mellon (PDF) qui, après l’examen d’un milliard de «tweets», conclut que les données publiées sur Twitter expriment les mêmes tendances que les résultats des sondages d’opinion sur certains thèmes sélectionnés.

La nouvelle a rapidement fait le tour du web. Et comme toujours lorsque des études montrent les avantages et les possibilités des réseaux sociaux, plusieurs ont sauté sur l’occasion pour annoncer la mort des sondages d’opinion. Une chose est sûre, ce n’est pas pour demain!

Lire la suite »

sondageweb-bleu2Dans un rapport* publié en mars 2010 (c’est tout frais!), l’American Association for Public Opinion Research (AAPOR) publie les conclusions d’un groupe de travail sur les panels d’internautes (online panels).

Je vous parle aujourd’hui de la première recommandation des experts :

Les chercheurs devraient éviter d’utiliser des panels non probabilistes lorsque leur objectif est de généraliser des résultats à l’ensemble d’une population.

Lire la suite »

Publié par Julie Fortin le 29 mars 2010

Internet supplante la télévision chez les Canadiens? Pas sûr!

Television-internet-sondageLa semaine dernière, un intéressant sondage d’Ipsos mentionnait que, pour la première fois, le nombre d’heures consacrées à internet en une semaine dépassait le nombre d’heures passées à regarder la télé. Plusieurs médias et blogues ont relayé la nouvelle en faisant tous la même erreur d’interprétation. Pouvez-vous trouver de quelle erreur il s’agit?

Voici ce que dit l’étude originale :

Ipsos reports that for the first time ever in their tracking research, the weekly Internet usage of online Canadians has moved ahead of the number of hours spent watching television. [...] Overall, online Canadians are now spending more than 18 hours a week online, compared to 16.9 hours watching television.

Lire la suite »

Publié par Julie Fortin le 8 juillet 2009

Vrai ou faux? Mythes et réalités des sondages en ligne (#1)

Le 12 juin dernier, lors du colloque annuel de l’Association des statisticiennes et des statisticiens du Québec (ASSQ), M. Michel Saulnier, président du chapitre québécois de l’ARIM, faisait une présentation sur les «mythes et réalités» des sondages en ligne. Au cours de l’été, je reprendrai individuellement ces huit énoncés, que j’expliquerai à ma façon.

Vrai ou faux?
Les panels Internet livrent des résultats représentatifs de la population.

Lire la suite »

Combien d’individus devrais-je interroger, lors d’un sondage, pour obtenir des résultats représentatifs de la population à l’étude? En d’autres mots, quelle devrait être la taille de l’échantillon?

Ici, je vous épargne les équations mathématiques… Je voulais simplement vous faire découvrir quelques outils sur le Web qui peuvent calculer pour vous la taille requise d’un échantillon.

Attention cependant! Ces outils sont utiles pour des échantillons aléatoires simples où chacun des individus de la population a une chance égale d’être sélectionné. Dès que le plan d’échantillonnage se complexifie, ne serait-ce qu’un peu, ils ne sont plus appropriés : c’est d’un expert dont vous aurez alors besoin!

Lire la suite »

Publié par Julie Fortin le 29 juillet 2008

Méthodes d’échantillonnage probabilistes et sondages Web

L’échantillonnage probabiliste pose de réels défis lorsqu’il est question de sondages Web, notamment :

  • La non-disponibilité des bases de sondage, c’est-à-dire de listes valables à partir desquelles sélectionner un échantillon aléatoire.
  • S’il est aujourd’hui facile de générer des numéros de téléphone aléatoires pour effectuer des sondages téléphoniques représentatifs, il en va autrement des adresses de courriels. Un tel système ne peut que générer un nombre important d’adresses inexistantes ou inutilisées.
  • La difficulté d’établir avec certitude l’identité du répondant. Il est fort possible, par exemple, qu’une adresse de courriel soit utilisée par plusieurs personnes. Aussi, la personne qui répond au sondage n’est pas nécessairement celle qui a été invitée à le faire.
  • L’impossibilité de joindre les personnes qui n’ont pas accès à Internet.

Bien qu’imparfaites, il existe des méthodes d’échantillonnage probabilistes pour le Web, par exemple :

Publié par Julie Fortin le 24 juillet 2008

L’ABC des méthodes d’échantillonnage (partie 2)

La semaine dernière, je mentionnais qu’il existe deux grandes familles d’échantillons : les échantillons probabilistes et les échantillons non probabilistes.

Les échantillons non probabilistes
Les méthodes d’échantillonnage non probabilistes, contrairement aux précédentes, ne s’appuient pas sur le hasard pour sélectionner les individus d’une population. Les échantillons ainsi constitués ne sont donc pas probabilistes et, de ce fait, on ne peut leur appliquer la notion de marge d’erreur statistique. Autrement dit, on ne connaît pas le niveau de précision des estimations ainsi produites. Ils présentent toutefois d’autres avantages, comme ceux d’être peu coûteux, rapides et faciles à utiliser.

Il faut bien voir également que ce ne sont pas tous les projets qui exigent des échantillons probabilistes; cela dépend des objectifs poursuivis. Ces méthodes sont fréquemment utilisées en recherche qualitative. Voici quelques exemples d’échantillons non probabilistes :

Lire la suite »

Publié par Julie Fortin le 17 juillet 2008

L’ABC des méthodes d’échantillonnage (partie 1)

ÉchantillonnageÀ moins d’interroger tous les membres d’une population donnée, il faut déterminer, avant de commencer un sondage, la manière dont les individus qui constitueront l’échantillon seront sélectionnés. Il ne s’agit pas d’une décision facile pour le néophyte des statistiques et les conseils d’un expert sont requis pour assurer la rigueur scientifique des résultats. Cela étant, rien n’empêche le néophyte d’en saisir les principaux fondements. Je vais donc essayer d’exposer la base des méthodes d’échantillonnage.

D’abord, il faut savoir qu’il existe deux grandes familles d’échantillons : les échantillons probabilistes et les échantillons non-probabilistes. Ce billet sera consacré aux premiers.

Les échantillons probabilistes
Les méthodes d’échantillonnage probabilistes ou aléatoires s’appuient sur le hasard pour sélectionner les individus à sonder.

Lire la suite »