Histoire du dialogue homme-machine

Anne Nicolle

GREYC CNRS-UMR 6072 & MRSH

Université de Caen

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

CV Anne Nicolle PR en Informatique

Etudes de maths à l’Université de Caen DEA, Thèse et Thèse d’État en IA à Paris 6 sous la

direction de Jacques Pitrat Génération de programmes, vérification et correction de

programmes Langages à objets et SMA

Réorientation en sciences cognitives grâce aux écoles d’été de l’ARCo Etude interdisciplinaire du dialogue Formation en linguistique générale Dimension sociale et organisationnelle des SMA

CV Anne Nicolle Objectifs actuels : modèle de l’interaction

Processus interactifs de durée indéfinie• Sortir de la résolution de problèmes • Conception, contrôle, simulation

Machines interactives de P. Wegner• Machines de Turing = domaines RE• Machines interactives = domaines + complexes

Modèle algébrique et « rationnel » des processus interactifs

Plan 1 Introduction 2 La première période du DHM

2.1 Mots clés et phrases à trous 2.2 Les automates (transducteurs) 2.3 Winograd et le monde des blocs

3 La deuxième période du DHM 3.1 Recherches sur la conversation 3.2 La naissance du langage 4.3 Les dialogues opératifs 3.4 Dialogue oral et multimodal

5 Mais qu’est-ce que le dialogue ?

1. Les rapports entre l’informatique et le dialogue sont multiples

DHM en LN IHM : interaction gestuelle, image, langue Instrumentation du dialogue Étude expérimentale du dialogue

1.1. Histoire des activités langagières De l’action conjointe à la parole

Construction d’un monde partagé De l’oral à l’écrit puis à l’imprimé

Monde présent ou distant Synchrone/asynchrone

De l’écrit statique à l’écrit dynamique Quel monde est partagé en IHM ? Le monde de la

machine Comment se construit le langage ? Par normalisation La parole de la machine est préméditée (≠

spontanée)

2. Le DHM : première période

Deux points de vue : Le test de Turing : simuler l’intelligence Les objectifs d’ingénierie

Trois expériences fondatrices : Eliza : mots clés et phrases à trous Lunar : les automates (transducteurs) Shrdlu : le monde des blocs

2.1. Eliza (Weizenbaum 1966) Reconnaître une suite de mots clés dans un

énoncé Lui associer une réponse construite avec des

éléments repris dans l’énoncé Laisser libre cours à l’interprétation de

l’interlocuteur Aucune compréhension Aucune mémoire Un jeu d’interaction pure

2.2. Lunar (Woods, 1978) Dialoguer à propos d’un monde

représenté (échantillons du sol lunaire) Interroger une base de données avec un

langage pseudo-naturel Définir un langage d’interaction

récursivement énumérable et analyser les énoncés en parcourant un graphe

Produire des énoncés à partir de phrases à trous

ATN syntaxico-sémantiques

2.3 Shrdlu (Winograd, 1972)

Le monde des blocs : comprendre des ordres et des questions et y répondre

Un modèle linguistique Un modèle de raisonnement et de

planification Une mémoire des états et des

interactions passés

Shrdlu : L’interface originale

QuickTime™ et undécompresseur TIFF (non compressé)

sont requis pour visionner cette image.

Shrdlu : La représentation interne

((SUR TABLE BLOC1) (SUR BLOC1 BLOC2) (SUR TABLE BLOC3) (ROBOT TIENS BLOC4))

Énoncés logiques décrivant un monde où rien d’imprévu ne peut arriver

L’interface est une visualisation de ce monde

2.4. Critiques sur cette période Incapacité à gérer les non attendus Incapacité à gérer les erreurs Tours de parole stricts Pas d’apprentissage donc pas d’évolutionLa plupart des systèmes de DHM

actuel restent dans ce paradigme et ils ne sont pas utilisés

Comment passer du récursivement énumérable au complexe ?

3. La deuxième période du DHM

Diversification des objectifs, des paradigmes et des modalités d’interaction

4.1 Recherches sur la conversation 4.2 Recherches sur la naissance du langage 4.3 Les dialogues opératifs 4.4 Le dialogue oral

3.1 Recherches sur la conversation

Le contexte interdisciplinaire change : Modèles de dialogue (Roulet, Moeschler,

Luzzati) Logique illocutoire (Searle, Vanderveken,

Vernant) Analyse des conversations (Dessalles,

Trognon, Goffman)

3.2. Recherches sur la naissance du langage

Le dialogue est un état premier de l’usage de la parole

Il prend naissance à partir des interactions primitives non verbales

Il s’amorce par le redoublement de l’action par la verbalisation

La synchronisation d’actes (applaudir, marcher au pas, chanter en chœur),

L’attention conjointe sur un tiers (pointage, reconnaissance du chef…),

Les cadences alternées (jeux de mains, jeu d’échecs, joutes oratoires).

Les formes primitives d’interaction entre les humains (Boris Cyrulnik)

Steels et Kaplan (Sony-CSL Paris) Comment les robots peuvent créer un

lexique pour se comprendre Expériences avec des « talking heads »

en face d’objets « monde des blocs » Simulations avec des populations très

importantes se renouvelant Etudes actuelles sur l’émergence d’une

syntaxe

3.3. Les dialogues opératifs

Créer des environnements de travail ou de divertissement où l’interaction soit naturelle.

Pourquoi ? Les machines ne s’ennuient pas de tâches répétitives,. Elles calculent plus sûrement et ont une meilleure mémoire. Elles font moins d’erreurs.

Les grands projets vers 1990 Trains, Vermobil… mobilisent des équipes

importantes sur le DHM en vue d’applications : guichets, renseignements téléphoniques…

Utilisation de la théorie des actes de langage Recueil et étude de corpus (Magicien d’Oz) Le « monde » de la machine est une base de

données que les usagers interrogent Enchaînement d’actions langagières et non

langagières (délivrer un billet)

3.4. Le dialogue oral et multimodal

L’oral est une modalité de la parole plus première que l’écrit

Les technologies de la reconnaissance de la parole ne sont pas suffisantes

La synthèse de la parole donne des résultats acceptables (Rungis, bourse…)

Tentatives à FT

3.5. Evaluation de cette période Qu’est ce qui a été utilisé dans la pratique ?

La synthèse vocale pour les informations par téléphone Le presse bouton en entrée, ou la prononciation de mots

isolés dans une liste fermée Mais l’instrumentation des dialogues est partie

dans d’autres voies : mail, SMS, chats, forums Interactions inter-humaines à travers la machine =>

mémorisation Assistance à l’interprétation et à l’organisation

Et la connaissance du dialogue a beaucoup progressé

5. Mais qu’est-ce que le dialogue ?

Un état premier de l’activité langagière La matrice de nos langues, de notre

pensée, de notre mémoire et du dialogue lui-même

La matrice de nos institutions et de nos sociétés

Ce qui nous constitue en tant qu’humains.

5.1. Le modèle du transfert dans le dialogue

A B

MM M

5.2. D’où vient le dialogue ?

Il prolonge nos interactions primitives, qui sont des cris, des pleurs, des gestes, des actions conjointes, des jeux

Il accompagne les actions conjointes Il permet d’être reconnu socialement, de

raconter des histoires, de faire des projets C’est le lieu de la parole spontanée

5.3. Dialogue et interaction Les interactions humaines sont multimodales : gestes,

mimiques, postures, cris, paroles, traces graphiques. Elles mettent en jeu des objets intermédiaires comme

ressources, comme enjeux ou comme manifestation d’un accord.

Les dialogues intéressants pour le DHM ne sont ni des dialogues de bistrot, ni des dialogues de théâtre, ce sont des dialogues finalisés. Le langage est une modalité particulière d’interaction qui prend

place dans une suite d’actes langagiers et non langagiers. Il prend part à l’accomplissement d’une tâche dont le résultat

peut être physique ou social.

5.4. Où va le DHM ?

Agents conversationnels Dialogue entre agents d’un SMA Dialogue humain à travers les machines IHM conversationnels

Les machines sont dans la langue, pourquoi chercher à mettre la

langue dans la machine ?