Tag: méthode

Je suis victime d’un raccourci méthodologique dans La Presse Affaires

Je suis victime d’un raccourci méthodologique dans La Presse Affaires

pt-exclamation2Éric-Pierre Gibeault, dans un article de La Presse Affaires, fait référence au plus récent sondage SOM/BRANCHEZ-VOUS.COM portant sur l’utilisation personnelle d’Internet au travail. Voilà qui est très bien! J’aurais toutefois aimé qu’il ne tombe pas dans le piège de ce que je dénonce souvent sur ce blogue : une méthodologie non pas floue dans ce cas-ci, mais carrément amputée des détails les plus importants. Voyez par vous-même…

La méthodologie que j’ai communiquée (sur ce blogue, sur bénéfice.net, dans le communiqué de presse) :

Ce sondage Web a été mené du 11 au 17 août 2009 auprès de 1297 internautes québécois qui travaillent en entreprise ou dans une organisation (et non à la maison). Cet échantillon est tiré du panel Or de SOM, lequel est constitué de répondants recrutés de façon aléatoire. La marge d’erreur maximale pour l’ensemble est de 4,8 %, 19 fois sur 20.

La méthodologie communiquée par le journaliste de La Presse Affaires hier :

Le sondage SOM, réalisé pour Branchez-Vous, a été effectué du 11 au 17 août dernier auprès de 1297 travailleurs. La marge d’erreur maximale est de 4,8%, 19 fois sur 20.

Lire la suiteLire la suite

Entretenir le flou méthodologique

Entretenir le flou méthodologique

Je sais, je ne devrais pas dénigrer nos concurrents. Ce n’est pas bien. Mais si je tais le nom dudit concurrent, me permettez-vous une toute petite pointe?

À moins que vous ne soyez nouveau ou nouvelle ici, vous savez toute l’importance que j’accorde à la méthodologie rigoureuse et à la transparence, notamment lorsqu’il est question d’expliquer la méthodologie utilisée pour un sondage. Ce sont là deux valeurs extrêmement importantes pour SOM.

Quand j’ai vu ceci dans un journal récemment, j’ai d’abord été intriguée. Après vérification, je suis tout simplement choquée… Lisez d’abord l’extrait, je vous expliquerai pourquoi ensuite.

Lire la suiteLire la suite

Les yeux ne sont-ils pas le miroir de l’âme? Utilisation de l’oculométrie dans les sondages Web

Les yeux ne sont-ils pas le miroir de l’âme? Utilisation de l’oculométrie dans les sondages Web

L’oculométrie (eye-tracking) regroupe un ensemble de techniques permettant d’enregistrer les mouvements oculaires. Plus précisément, des images de l’oeil sont capturées par une caméra infrarouge, lesquelles permettent de déterminer le «point du regard», c’est-à-dire là où l’œil se pose (source : wikipédia).

L’oculométrie est utilisée dans plusieurs domaines, notamment dans les tests publicitaires et les études d’utilisabilité des sites Web. Entre «sites Web» et «sondages Web» il n’y a qu’un pas… qu’ont franchi UX Research, MBA Recherche et Element 54. En partenariat, ces trois entreprises ont réalisé une étude qui compare le comportement des répondants dans deux versions d’un même sondage. L’étude, judicieusement nommée Eyes don’t lie, a été présentée au dernier colloque de l’ARIM en mai à Montréal.

Lire la suiteLire la suite

Combien de blondes pour faire un sondage?

Combien de blondes pour faire un sondage?

Mais non, il ne s’agit pas d’une blague de blondes… ce n’était que pour attirer votre attention! Je suis de retour de vacances et dangereusement en forme! Mais sérieusement, savez-vous combien de personnes travailleront ensemble pour faire en sorte que votre sondage respecte toutes les normes de qualité de SOM? Vous pourriez être surpris!

Les dangers de tout faire soi-même…
Dans un billet du blogue de Vovici, Jeffrey Henning fait une mise en garde sur les dangers de tout faire soi-même en recherche. C’est ce qui m’a donné l’idée de vous parler un peu de notre organisation du travail. Son argumentation, à laquelle j’adhère entièrement, est la suivante : il existe de plus en plus de logiciels et d’applications Web gratuites vous permettant de faire vous-même des sondages Web. Soit! Mais il ne s’agit là que d’outils.

Lire la suiteLire la suite

Sondages en ligne et marges d’erreur : ne vous laissez pas berner!

Sondages en ligne et marges d’erreur : ne vous laissez pas berner!

Un sondage dont les répondants n’ont pas été sélectionnés de façon aléatoire NE DOIT PAS afficher de marge d’erreur. C’est là l’une des normes fondamentales de l’Association de la recherche et de l’intelligence marketing (ARIM). Or, certaines firmes n’ont malheureusement aucun scrupule à berner le public ou, à tout le moins, à laisser planer le doute… exemples à l’appui!

La norme
L’ARIM est en quelque sorte le «chien de garde» de l’industrie du sondage au Canada. Entre autres activités, elle élabore et fait la promotion de normes professionnelles pour garantir des travaux de qualité et ainsi protéger les clients et le public. Selon le code de déontologie de l’ARIM :

Lire la suiteLire la suite

Les sondages n’ont pas besoin de vacances!

Les sondages n’ont pas besoin de vacances!

Il est fréquent d’entendre, de la part d’un client désespéré, «On ne peut pas faire un sondage, c’est la période des vacances!» Et alors? À moins que vos répondants soient en vacances tout l’été, il n’y a pas de raison de se priver parce que c’est l’été… au contraire, c’est même souvent moins cher!

Sondage téléphonique
Il est possible d’adapter la collecte téléphonique pour tenir compte de la période des vacances. Par exemple :

Lire la suiteLire la suite

Déterminer la taille d’un échantillon… sans y perdre son latin!

Déterminer la taille d’un échantillon… sans y perdre son latin!

Combien d’individus devrais-je interroger, lors d’un sondage, pour obtenir des résultats représentatifs de la population à l’étude? En d’autres mots, quelle devrait être la taille de l’échantillon?

Ici, je vous épargne les équations mathématiques… Je voulais simplement vous faire découvrir quelques outils sur le Web qui peuvent calculer pour vous la taille requise d’un échantillon.

Attention cependant! Ces outils sont utiles pour des échantillons aléatoires simples où chacun des individus de la population a une chance égale d’être sélectionné. Dès que le plan d’échantillonnage se complexifie, ne serait-ce qu’un peu, ils ne sont plus appropriés : c’est d’un expert dont vous aurez alors besoin!

Lire la suiteLire la suite

Dites-moi qui est votre répondant… et je vous parlerai du taux de réponse!

Dites-moi qui est votre répondant… et je vous parlerai du taux de réponse!

Il y a évidemment plusieurs facteurs qui peuvent influencer le taux de réponse d’un sondage Web : longueur du questionnaire, intérêt du sujet, rémunération des répondants, formulation des questions, qualité du courriel d’invitation, rappels auprès des non-répondants, etc. Mais la relation entre l’organisation cliente du sondage (celle qui «commande» le sondage) et la population cible peut aussi être déterminante.

Dans un document dont je vous ai déjà parlé, intitulé Survey Software Success et produit par la firme Vovici, on présente une fourchette approximative des taux de réponse à un sondage en ligne en fonction de la relation qui unit le répondant et l’organisation qui commande le sondage. C’est fort intéressant! Je n’ai pas fait de calcul, mais à vue de nez, ça rejoint plutôt bien les taux de réponse que SOM obtient dans ces différents contextes de sondage Web. Notez toutefois qu’il y a des exceptions…

Lire la suiteLire la suite

Sondages en ligne : (encore) quelques bonnes pratiques

Sondages en ligne : (encore) quelques bonnes pratiques

La firme américaine Vovici a publié un livre blanc* intitulé Survey Software Success qui présente, sans égard au type de logiciel utilisé, ce que l’auteur considère comme les bonnes pratiques à adopter dans la conduite de sondages Web. J’ai déjà traité de plusieurs d’entre elles sur ce blogue. Je retiens toutefois un certain nombre d’éléments intéressants ou qui suscitent la réflexion :

Lire la suiteLire la suite

Les nuages font-ils une percée en recherche?

Les nuages font-ils une percée en recherche?

Je ne parle pas ici du cumulonimbus, mais bien du nuage de mots-clés (tag cloud). À l’origine conçus pour le Web, les nuages de mots-clés sont une représentation visuelle des mots-clés (ou tags) les plus utilisés sur un site ou un blogue. La taille des mots varie généralement selon leur occurrence (source : Wikipédia). Vous n’avez d’ailleurs qu’à regarder à la gauche de votre écran pour en voir un exemple : les sujets du blogue de SOM sont présentés ainsi.

Depuis quelque temps toutefois, on voit apparaître de nouveaux usages du nuage de mots-clés. C’est le cas notamment en recherche qualitative : on utilise des applications comme Wordle ou TagCrowd pour créer des nuages de mots à partir de données textuelles (ex. : transcription d’entrevues ou de groupes de discussion). On a qu’à «coller» le texte visé dans l’espace prévu à cet effet. Voilà à quoi ça peut ressembler :

Lire la suiteLire la suite