Analyse des résultats d’évaluation utilisateur en ligne

L’interprétation des résultats d’une évaluation impliquant l’utilisateur est une chose qui peut s’avérer complexe surtout lorsque l’on s’adresse à une cible large. En effet, de nombreuses mesures sont récoltées lors de ces séances. Faire parler ces mesures nécessite une approche scientifique.

La question que vous vous posez

Comment analyser les données issues d’une évaluation impliquant l’utilisateur ?

Notre proposition

Etape 1 : Préparation des données récoltées

Les données enregistrées lors d’une évaluation impliquant l’utilisateur sont nombreuses et récoltées sous une forme brute peu exploitable. Plusieurs utilisateurs peuvent exprimer une même réponse de manières différentes, des actions supplémentaires peuvent être enregistrées au cours d’une séance, etc. Afin de permettre leur analyse, une étape préparatoire est indispensable. Elle consiste à  :

  • Sélectionner les métriques souhaitées (nombre d’actions réalisées pour atteindre un objectif, taux de réussite…),
  • Encoder les données enregistrées pour chaque participant dans un système d’analyse (un tableur par exemple)
  • Consolider les données de tous les utilisateurs

La consolidation des données permettra d’effectuer des analyses statistiques.

Etape 2 : Analyse quantitative des données (métriques objectives)

L’analyse quantitative se base uniquement sur les données chiffrées ou objectives issues des évaluations. Elle permet d’extraire rapidement les éléments qui posent des problèmes et les éléments qui peuvent être validés. Ce type d’analyse est valable quelque soit l’évaluation menée (qu’il s’agisse d’un test utilisateur, d’une évaluation experte, d’un tri de cartes…).

L’analyse quantitative permet notamment de déterminer :

  • Le taux de reussite des objecifs fixés
  • Les temps minimum, maximum et moyen pour atteindre un objectif
  • Les tendances de regroupement lors de tris de cartes

La présentation des résultats issus d’analyse quantitative se présentent sous la forme « X %  des participants ont atteint l’objectif » ou « Dans telle situation, l’objectif est atteint en X minutes en moyenne ».

 Etape 3 : Analyse qualitative ou exploratoire

L’analyse qualitative permet de poser des hypothèses sur des comportements ou d’identifier les raisons d’un échec ou d’une réussite.

L’analyse exploratoire vient compléter l’analyse quantitative et permet d’identifier les causes des résultats de cette dernière.

On décide généralement d’utiliser l’analyse exploratoire sur des données pour lesquelles aucune tendance claire ne peut être conclue. Pour cela on décortique toutes les actions menées lors de la séance d’évaluation, on récolte les commentaires enregistrées lors des séances, on analyse la verbalisation des actions faites par le participant, etc.

Dès lors que les données sont récoltées pour chaque participant, elle sont consolidées pour identifier une tendance globale ou dans le cas contraire identifier une nouvelle hypothèse qui devra être validée lors de tests utilisateurs.

Etape 4 : Présenter les résultats

Les résultats d’une évaluation impliquant l’utilisateur doivent présenter les éléments suivants :

  • l’objectif de l’évaluation,
  • les profils des utilisateurs impliqués,
  • les conditions de l’évaluation.
Ensuite pour chaque scénario :
  • la consigne exacte de chaque scénario,
  • le résultat attendu,
  • le taux d’accomplissement de la tâche par profil,
  • les difficultés rencontrées par profil
  • le parcours réalisé pour atteindre l’objectif ainsi que des vidéos illustrant le parcours type.

Enfin en guise de synthèse :

  • les points d’amélioration identifiés
  • les hypothèses à vérifier.