université de perpignan faculté des lettres et sciences humaines 1 approche sémiotique des...

Université de PerpignanFaculté des lettres et sciences humaines

1 Approche sémiotique des processus cognitifs du multimédia éducatif : évaluation et préconisationsApproche sémiotique des processus cognitifs du multimédia éducatif : évaluation et préconisations

Approche sémiotique des processus cognitifs Approche sémiotique des processus cognitifs du multimédia éducatif :du multimédia éducatif :

évaluation et préconisationsévaluation et préconisations

Soutenance de thèse24 septembre 2004

« Les objets qui concernent ce dont la pensée s’occupe sont des signes. Essayer de déchiffrer les signes et de descendre jusqu’au sens même, c’est comme essayer de peler un oignon ou de descendre jusqu’à l’oignon même. »

Charles Sanders Peirce

Sous la Direction du Pr. Robert MARTY

ProblématiqueProblématique :

Comment donner une dimension cognitive à l’évaluation des ressources multimédias éducatives à partir du fondement scientifique de la sémiotique triadique?

Un objectif affiché : dégager un cadre théorique de la sémiotique peircienne en vue de préconisations opératoires

PréalablePréalable :

Informatique Sciencescognitives

SciencesInfo-com

Sciences de L’éducation

Multimédiaéducatif sémiotique

PlanPlan

Evaluation du multimédia : état de l’artNotions fondamentales de signeChoix d’un cadre épistémologique Signe et multimédia éducatif L’analyse sémio-cognitive Sémiotique et évaluation

Evaluation du multimédia : Evaluation du multimédia :

état de l’artétat de l’art

Evaluation du multimédia : état de l’artEvaluation du multimédia : état de l’art

Une préoccupation mondiale…

de très nombreuses démarches d’évaluation des ressources multimédias ont été recensées à travers le monde,

l’approche est dans la plupart des cas tournée vers l’observation du comportement de l’apprenant,

la démarche est très souvent empirique,

l’architecture des ressources multimédias est rarement analysée,

on fait assez souvent référence à des normes « d’utilisabilité des logiciels ».

Un double constat :

il n’existe pas de démarche d’évaluation prenant en compte les processus cognitifs par une modélisationsémiotique a priori de la ressource multimédia

les rares modèles utilisés sont exclusivement issus des normes ergonomiques

Un enseignement :

Nous engageons une démarche innovante avec tous les risques que cela suppose

dans un champ scientifique où la sémiotique n’est pas spécialement référencée

Notions fondamentalesNotions fondamentales

de signede signe

Notions fondamentales de signeNotions fondamentales de signe

Le signe transmet une forme de la chose à signifier jusqu’à l’esprit d’un interprète

Chose à signifier Esprit del’interprète

Chose quireprésente

Notions fondamentales de signeNotions fondamentales de signe

Le signe est mis pour la chose à signifier qui elle, est absente de la situation en cours

La preuve : il n’y a pas de grenouille sur cet écran

Chose à signifier

Choix d’un cadre Choix d’un cadre épistémologiqueépistémologique

Choix d’un cadre épistémologiqueChoix d’un cadre épistémologique

Le cadre théorique de la sémiotique peircienne• La phénoménologie

• Le signe peircien

• La sémiosis

Justification du choix du signe triadique Le treillis des classes de signes triadiques : un outil d’analyse élaboré

Le cadre théorique de la sémiotique peircienneLe cadre théorique de la sémiotique peircienne

La phénoménologie(ou phanéroscopie)

La phénoménologie (ou phanéroscopie)

• Le fondement de la théorie réside dans la nature des relations logiques que les éléments de tout phénomène entretiennent entre eux

• Trois catégories sont à la base de cette théorie qui constituent le cadre d’appréhension du phénomène sémiotique

La priméité

• Regroupe tous les éléments qui ne sont en relation logique qu’avec eux-mêmes (ce sont des monades)

• C’est le domaine de la qualité sui généri, du sentiment

• Les éléments de la priméité sont des primans

La secondéité

• Regroupe tous les éléments qui résultent d’une relation dyadique (ce sont des dyades)

• C’est le domaine des faits, des existants

• Les éléments de la secondéité sont des secondans

La tiercéité

• Regroupe tous les éléments qui résultent d’une relation triadique (ce sont des triades)

• C’est le domaine des lois, des concepts, des habitudes

• Les éléments de la tiercéité sont des tertians

Le cadre théorique de la sémiotique peircienneLe cadre théorique de la sémiotique peircienne• La hiérarchie catégorielle de la phénoménologie

Les lois

Les faits

Les qualités

sont régis par

se matérialisent dans

Le cadre théorique de la sémiotique peircienneLe cadre théorique de la sémiotique peircienne• La hiérarchie catégorielle de la phénoménologie

3 présuppose 2 qui présuppose 1

Le phanéron est la totalité de ce qui est présent à l’esprit ici

et maintenant

Le cadre théorique de la sémiotique peircienneLe cadre théorique de la sémiotique peircienne• Structuration phénoménologique de la totalité de ce qui est

présent à l’esprit : la phanéroscopie

Qualités

Tertians

Secondans

Primans

Caractéristiques du signe peircien

• Le signe est général

– Il englobe donc l’ensemble des systèmes de représentation sans exception

• Le signe est pragmatique

– Il produit des effets dont la nature varie selon l’interprète et la situation d’interprétation

pragmatisme

« Considérer quels sont les effets pratiquesque nous pensons pouvoir être produits par

l’objet de notre conception.La conception de tous ces effets

est la conception complète de l’objet. »

Maxime du pragmatisme

C.S. Peirce - 1879

• Le signe est triadique– Il repose sur la coopération de trois instances

Par extension de sa théorie triadique, Peirce a proposé une architecture du signe basée sur la coopération de six instances ….

Le cadre théorique de la sémiotique peircienneLe cadre théorique de la sémiotique peircienne• Le signe hexadique

La sémiosis

Le cadre théorique de la sémiotique peircienneLe cadre théorique de la sémiotique peircienne• La sémiosis

– Est le résultat produit par l’effet du signe sur l’interprète. Elle se reproduit à l’infini et enrichit l’interprétant à chaque expérience sémiotique

La sémiosis est un processus cognitif global

qui s’opère par inférence

Justification du choix du signe triadiqueJustification du choix du signe triadique

Le signe hexadique est une complexification du signe triadique, ce qui ne rend pas l’analyse sémiotique forcément plus aisée

Nous lui préférons le signe triadique car :

Nous disposons d’un modèle prédictif du signe triadique directement utilisable pour l’analyse sémio-cognitive : le treillis des classes de signes triadiques

Le treillis

des classes de signes triadiques

Le treillis des classes de signes triadiques : un outil Le treillis des classes de signes triadiques : un outil d’analyse élaboréd’analyse élaboré

Véritable théorème de la signification,il constitue la formalisation algébrique de la théorie de Peirce

produite par Robert Marty

Le treillis des classes de signes triadiques : un Le treillis des classes de signes triadiques : un outil d’analyse élaboréoutil d’analyse élaboré

• Une formalisation issue des relations logiques combinatoires

• Dont les classes de signes sont obtenues en application de la hiérarchie catégorielle

Le treillis des classes de signes triadiques : un outil d’analyse élaboréLe treillis des classes de signes triadiques : un outil d’analyse élaboré• 10 classes de signes :

» 3.3.3 argument» 3.3.2 symbole dicent» 3.3.1 symbole rhématique» 3.2.2 légisigne indexical dicent» 3.2.1 légisigne indexical rhématique» 3.1.1 légisigne iconique» 2.2.2 sinsigne indexical dicent» 2.2.1 sinsigne indexical rhématique» 2.1.1 sinsigne iconique» 1.1.1 qualisigne

10 classes de signes triadiques organisées selon les relations de présupposition représentées par les flèches

Le treillis des classes de signes triadiques : un outil Le treillis des classes de signes triadiques : un outil d’analyse élaboréd’analyse élaboré Notions de chemins cognitifs

• La sémiosis cognitive englobe l’ensemble du processus cognitif : de la perception du signe jusqu’à la présence à l’esprit de l’objet

• Les cinq approches inférentielles possibles ressortent logiquement du treillis des classes de signes triadiques

Le treillis Le treillis desdes classes de signes triadiques : un outil classes de signes triadiques : un outil d’analyse élaboréd’analyse élaboré

• Notions de chemins cognitifs

5 et seulement 5 parcours cognitifs sont possibles :

1 - Hypothético-déductif

2 - Hypothético-inductif

3 - Empirico-déductif

4 - Empirico-inductif

5 - Abductif

L’analyse sémio-cognitiveL’analyse sémio-cognitive

De la phanéroscopie …

…aux chemins cognitifs

L’analyse sémio-cognitiveL’analyse sémio-cognitive

Nous disposons de 3 outils :Nous disposons de 3 outils :

• La phanéroscopie permet de dégager les composantes et la structure de la forme

mentale produite (le phanéron)

• Le treillis des classes de signes procure l’architectonique du signe (classes et relations)

• Les chemins cognitifs indiquent les modes inférentiels qu’un interprète peut mettre en

œuvre (types de raisonnement)

Signe et multimédia éducatifSigne et multimédia éducatif

En quoi une ressource multimédia éducative est-elle un signe triadique?

2 principes fondamentaux du multimédia :• La multimodalité : un environnement syncrétique

• La volition : le processus fondamental de l’interactivité

Modélisation d’une situation d’interactivité multimédiatisée

En quoi une ressource multimédia éducative est-elle En quoi une ressource multimédia éducative est-elle un signe triadique?un signe triadique?

BC2 = AB2 + AC2

Théorèmede Pythagore

En quoi une ressource multimédia éducative est-elle En quoi une ressource multimédia éducative est-elle un signe triadique?un signe triadique?

Objet(objet de connaissance à signifier)

Signe(représentation multimédia)

Interprétant(habitus de l’apprenant)

En quoi une ressource multimédia éducative est-elle En quoi une ressource multimédia éducative est-elle un signe triadique ?un signe triadique ?

Objet(théorème)

Signe(représentation symbolique)

Interprétant(connaissance mathématique

instituée antérieurement)

La multimodalité : un environnement syncrétiqueLa multimodalité : un environnement syncrétique

Les sémiotiques syncrétiques sont des sémiotiques qui mélangent des phénomènes sémiotiques de nature différente

En l’état actuel de la technologie disponible les ressources multimédias éducatives utilisent 2 canaux sensoriels pour la représentation : sonore et visuel

Signessonores

Signesvisuels

Hypersigne bimodal

La volition : un processus fondamental dans La volition : un processus fondamental dans l’interactivitél’interactivité

• L’intervention de l’apprenant conditionne le parcours d’apprentissage dans la ressource multimédia

• Son action est de l’ordre de la volition :

» processus d'origine psychologique

dont le dernier instant est d'ordre musculaire

Volition Volition vsvs Volonté Volonté

Peirce distingue

• Volition active (aboutit à une action désirée)

• Volition passive (produit une action subie)

• Une situation triadique décrite par Peirce

Modélisation d’une situation d’interactivité Modélisation d’une situation d’interactivité multimédiatiséemultimédiatisée

• Coopération de 3 instances dont deux relèvent du système de représentation

• Une organisation en réseau

Coopérationmultimodale

Modélisation d’une situation d’interactivité Modélisation d’une situation d’interactivité multimédiatiséemultimédiatisée

• Le treillis syncrétique des classes de signes triadiques

Les classes de signes sont multimodales à l’exception de l’argument qui est purement logique

Sémiotique et évaluationSémiotique et évaluation

Ressource multimédia éducative considérée en tant

qu’hypersigneFondement théorique de l’analyse

sémio-cognitive

Préconisations pour une évaluation sémiotique

Nous proposons deux méthodologies d’évaluation :Nous proposons deux méthodologies d’évaluation :

• SémioDevSémioDev pour la conception de ressources multimédias

• SémioValSémioVal pour l’évaluation de ressources multimédias existantes

SémioDevSémioDev méthodologie pour la conception

de ressources multimédias éducatives

Sémiotique et évaluationSémiotique et évaluation SémioDev : une méthodologie pour les concepteursSémioDev : une méthodologie pour les concepteurs

SémioDev

Sémiotique et évaluationSémiotique et évaluation SémioDev : une méthodologie pour les concepteursSémioDev : une méthodologie pour les concepteurs

• Objectif : produire les éléments sémiotiques directement utilisables dans UML

SémioDev

Diagrammede classes d’objet

Diagrammede cas d’usage

Diagrammede collaboration

Sémiotique et évaluationSémiotique et évaluation SémioDev : cinq étapes pour concevoir une ressource multimédiaSémioDev : cinq étapes pour concevoir une ressource multimédia

• Etape 1 : Prise en compte des objectifs d'apprentissage

• Etape 2 : Dessin des parcours cognitifs à intégrer

• Etape 3 : Définition des structures sémiotiques

• Etape 4 : Elaboration de la charte des concepts de représentation

• Etape 5 : Architecture de l'interactivité et éléments de scénario

SémioValSémioVal méthodologie pour l’évaluation

de ressources multimédias éducatives

en préalable aux usages

Sémiotique et évaluationSémiotique et évaluation SémioVal : une méthodologie pour les évaluateursSémioVal : une méthodologie pour les évaluateurs

Ressource multimédiaéducative existante

Rapport d’évaluationsémio-cognitive

SémioVal

Sémiotique et évaluationSémiotique et évaluation SémioVal : six étapes pour évaluer une ressource SémioVal : six étapes pour évaluer une ressource

multimédia existantemultimédia existante

• Etape 1 : Qu’évalue-t-on ?

• Etape 2 : Qu’est ce qui est présent à l’esprit lorsqu’on est face au document multimédia ?

• Etape 3 : Quels sont les composants sémiotiques qui constituent la représentation multimédia ?

• Etape 4 : De quelles classes de signes relèvent les composantes du contexte ?

• Etape 5 : Quelle est la nature des relations multimodales ?

• Etape 6 : Accède-t-on à la connaissance et selon quels parcours cognitifs?

PerspectivesPerspectives

• Dans la recherche scientifique– Introduire les hypothèses produites au sein des références habituelles connues

* Dans le domaine des Interfaces Homme-Machine (IHM)* Dans le domaine des ontologies

» Colloques» Articles» Publications

• Dans l’ingénierie– Convaincre les équipes de projets de la nécessité de l’approche sémiotique

» Problème des résistances organiques

• Applicatives– Faire valider l’applicabilité des méthodologies proposées

» Initiation à l’analyse sémio-cognitive des acteurs» Développement d’assistants logiciels pour la mise en oeuvre

Fin de la présentationFin de la présentation

thèse disponible en ligne:

http://home.tele2.fr/patrickbenazet/

université de perpignan faculté des lettres et sciences humaines 1 approche sémiotique des...

Documents

denis bertrand -l'énonciation en sémiotique

sources évolutionnistes des biais cognitifs

le cercle sÉmiotique de greimas

rendez-vous perpignan

patrick benazet docteur en sémiotique et communication de...

troubles cognitifs vasculaires -...

troubles cognitifs et alcool

greimas - sémiotique figurative et sémiotique plastique

troubles cognitifs chapitre 7

locale de perpignan

la sémiotique du langage

festival - perpignan

lésion cérébrale et traumatisme crânien - l’evaluation...

les antipsychotiques (neuroleptiques)...symptômes négatifs...

les activitÉs - perpignan

troubles cognitifs des démences : dépistage et ... ·...

l'imprimerie a perpignan

dysfonctionnements cognitifs associés aux troubles

création site internet perpignan

hybridation et métissage sémiotique : l’adaptation