flupa 2010 - tri de cartes: mise en pratique - gautier barrère, marie baudy

Tri de cartes : retours d’expérience

Marie Baudy - Gautier Barrère

Petit déj’ FLUPA 20101

2

Introduction

• Qui sommes-nous ?• Marie Baudy - Ergonome - Unité « Présence Internet »

• Gautier Barrère - Ergonome - Coordination Unité « Présence Internet »

• Objectifs de la présentation :• Présenter le déroulement d’un tri de carte

• Décrire chaque étape :

• Trucs et astuces

• Questions à se poser

• Retours d’expérience concrets

3

Plan de la présentation

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

4

Plan de la présentation

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

5

1. Contexte initial

• Analysez le quoi et pas le comment !

• Vos objectifs, votre cœur de cible ?

• « On veut un test utilisateur ! »– « Euh il vous faut un tri de cartes »

GO ! OK va pour un tri de pâtes…

Euh de cartes… (avec des utilisateurs)

6

Mettre en place un protocole de tri de cartes

• Démarche scientifique

• Hypothèses

• Métriques ? / Analyse visée ? / Quantitatif ou qualitatif ?

• Tri de carte ouvert / fermé / à distance / in situ / nombre d’étapes ?

7

Les bases pour l’évaluation

• Représentativité : – Utilisateurs

– Tâches

– Contexte (validité écologique)

• Evaluateur : pas impliqué dans la conception

8

9

Plan de la présentation

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

2. Choisir les utilisateurs

• Découle des besoins

• Personas ?

• Nombre d’utilisateurs ?

10

2. Choisir les utilisateurs

• Collègue : « Oui moi je suis aussi un utilisateur du web, en plus j’ai de l’expérience en XHTML »… (sic)

Ergonome au bord de la dépression

11

2. Choisir les utilisateurs

• Grand chef : « Mais voyons, je connais du monde, prenez ma mère tiens ! »… (double sic)

« Go on Ryu, one more kick to win the fight »

12

Exemple projet – www.gouvernement.lu

• Grand public

• « Cible avertie » :– Fonctionnaires

– Ambassadeurs

– Journalistes (Presse)

On ne remet pas en cause les profils utilisateurs sur base du coût de recrutement…On ne remet pas en cause les profils utilisateurs sur base du coût de recrutement… 13

14

Plan de la présentation

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

3. Le contenu / les cartes

• Que faire quand on a trop de cartes ?– Prioritisation du niveau « n » si possible

– Fonction « random » au niveau « n-1 » et « n-2 »

15

• En moyenne 50 – 60 cartes

• Sur beaucoup de nos projets, arbo de 5 niveaux :– On considère les niveaux « n », « n-1 »

et « n-2 »

Accueil

......

Page 2

... ... ... ...

......

Page 2

... ... ... ...

... ... ...... ... ... ... ...

Ne guidez pas l’utilisateur dans les intitulésNe guidez pas l’utilisateur dans les intitulés

3. Le contenu / les cartes

• Contenu adapté :– Objectifs du site

– Tâches utilisateurs

• Compréhensibles

• Même niveau dans l’arborescence

• Testables : – Organigramme ?

– Une fonctionnalité ?

16

Accueil

......

Page 2

... ... ... ...

......

Page 2

... ... ... ...

... ... ...... ... ... ... ...

Dans ReNo : « Thématiques » vs « Transversales »

17

Granularité des contenus sur les cartes

Les gouvernements de 1848 à nos jours

Dir Dammen an Dir Hären, Den Nationalfeierdag ass all Joer anescht. Kuerz virum Krich an an deene schlëmme Joren am Krich hu mer en a gedréckter Stëmmung gefeiert

18Adoptez une même granularité pour les contenus !Adoptez une même granularité pour les contenus !

Plan de la présentation

19

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

4. Organiser la séance

• Nombre d’utilisateurs : – In situ : entre 5 et 8 par séances

– A distance : pas de limite

• Durée des séances : – Prévoir 1h30 par séance dont un temps d’accueil, exposé des

consignes et 45 minutes de tri

• Respectez le protocole à chaque séance

• Recrutement : introduire l’évaluateur

In situ : Prévoir 2 personnes lors des séances (l’animateur se consacre intégralement aux participants)In situ : Prévoir 2 personnes lors des séances (l’animateur se consacre intégralement aux participants) 20

Plan de la présentation

21

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

5. Préparer le matériel – Vive le Green IT

• Consignes

• Matériel (in situ) :– Cartes :

• Recyclez votre matériel de bureau

– Post-it

– Élastiques

– Stylos

– Table assez grande (sans rire…)

Prévoir des cartes vierges (pour laisser la possibilité d’ajouter des contenus)Prévoir des cartes vierges (pour laisser la possibilité d’ajouter des contenus) 22

Exemple projet – Refonte portail de l’innovation

23

Matériel à distance

• Quelques références :– Optimalsort

– Websort

– Opensort

24

Plan de la présentation

25

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

6. Déroulement du tri

• Phase 1 : Accueil et consignes

• Phase 2 : Regrouper

• Phase 3 : Nommer

• Phase 4 : Debriefing

26

Phase 1 : Accueil et consignes

Méfiez-vous de vous-même !Méfiez-vous de vous-même !

• Mettez les gens en condition

• Expliquez l’objectif pour obtenir ce que vous souhaitez, mais sans en dire trop pour ne pas biaiser les résultats :– Objectif global du site

– Contenus des cartes

• « Faites des regroupements qui ont du sens pour VOUS »

27

Phase 2 : Regrouper

Tout faire trier avant de nommerTout faire trier avant de nommer28

Phase 3 : Nommer

29

Phase 4 : Debriefing

• A la fin du tri, expliquez la finalité du tri aux participants

• Minimisez le travail de saisie par après :– Une personne pour diriger, une personne pour noter

– Intégrez les résultats directement dans le soft pour gagner du temps

30

Mise en pratique – On joue aux cartes ?

31

Démo Websort

• Deux profils visés

• Tri ouvert

• 1 étape

• C’est juste un mini test…

32

Plan de la présentation

33

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

7. Résultats et analyse - Données brutes

• Données brutes = illisibles

• Analyse experte indispensable

• Consolidez les données

34

Analyse

• Deux alternatives : – Analyse statistique

– Analyse exploratoire

• « On fait quoi chef ? »– « On combine »

• « Dans quel ordre ? »– « Ca suffit ces questions oui ? »

Analysez sans le client !Analysez sans le client !35

Matrices de co-occurrences

36

Dendrogrammes

• Newbie : « Les quoi ? »

• Christian : « Les dindongrammes » (accent québecois)

37

Analyse stats, je comprends… mais exploratoire ?

• Qualitatif pur

• Démarche / Approche / Logique de classement

• Cela permet d’émettre des hypothèses quand les résultats ne sont pas statistiquement significatifs

• In situ :– Lors du debriefing (gros avantage de l’in situ)

• A distance :– Check personne par personne

– Regarder les personnes qui se détachent de la tendance

38

Analyse des titres de regroupements (tri ouvert)

News

Actualités / News

Dernières nouvelles

Articles /Infos

Champagne

PétillantsChampagnes

Champagne, Crémant

Bulles

Vins effervescents blancs

Fonctionnent / Structure ministère

A propos du ministèreInfos ministère

Fonctions et missions

Point de départ

Premières démarches

Pour commencer

39

Retour sur le tri du vin

• Deux modes de tri distincts

• Novices : – Très généraliste :

• Par couleurs• Plus grossier (« bulles », « sucré »)• Moins de rubriques (une 20aine au total)

• Experts : – Tri précis et plus détaillé :

• Par région (alors qu’elles n’étaient pas indiquées)• Par cépage• Par domaine• Par plat culinaire• Plus de rubriques (une 40aine au total)

40

Plan de la présentation

41

1. Contexte initial

2. Choisir les utilisateurs

3. Le contenu / les cartes

4. Organiser la séance

5. Préparer le matériel

6. Déroulement du tri

7. Résultats et analyse

8. Solutions proposées

8. Solutions proposées

• On décèle : – Catégorie ou contenu mal intitulés – Contenu pas à la bonne place – Besoin d’une nouvelle catégorie – Besoin de liens réciproques – Différences selon les profils … ou pas

• Le tri permet parfois de déceler :– Un contenu inutile– Un contenu manquant

Mais ce n’est pas son objectif premier !

Le client est nécessaire ! (besoins orga, marketing etc.)Le client est nécessaire ! (besoins orga, marketing etc.)42

N’oubliez pas les fondamentaux

• Approche thématique :– Pas organisationnelle

• Largeur – profondeur

• Arborescence régulière

• Une page est présente à un seul endroit :– Faites ensuite des liens transversaux

• Etc.

43

Utilisez des visuels (p.ex. cartographie) pour communiquerUtilisez des visuels (p.ex. cartographie) pour communiquer44

Livrable final : l’arborescence

• Fichier excel

• Task architect

45

On est jamais sûr de rien…

• Sans impliquer les utilisateurs !

46

Merci de votre attention !Merci de votre attention !

Des questions ?Des questions ?

En savoir plus sur nos travaux :http://www.eluxembourg.public.lu/actualites/2008/02/presentation-reno/index.html

47