Sémiotique cognitive et technologies de l’informationPierre FASTREZGroupe de Recherche en Médiation des Savoirs - UCL
Plan de l’exposéLa sémiotique cognitiveFondements:  Sémantique cognitive et Théorie de la cognition distribuéeContexte:  Médiation des savoirs et TICConcepts:  Compréhension, Cohérence, Structure image-schématiqueIntégration conceptuelle, ancres matériellesL’étude de l’usage des TICLes technologies de l’intelligenceHypermédias et construction de connaissancesDécouverte d’un domaine de connaissancesAcquisition d’expertise2
La sémiotique cognitiveComment l’être humain construit du sens en manipulant des représentations…
La sémiotique cognitive: définitionRegain d'intérêt pour les aspects cognitifs des processus communicationnels depuis une vingtaine d'années.Au sein de cette tendance, naissance de la sémiotique cognitive.Discipline à la croisée de la sémiotique et des sciences cognitivesEtude des relations entre, d’une part, les systèmes sémiotiques articulés dans différents types de dispositifs (symbolique externe) et, d’autre part, les représentations mentales et les processus cognitifs présidant à leur élaboration (symbolique interne).Ancienne question de la relation entre pensée et langage, extrapolée à d'autres formes sémiotiques que le langage naturel.4
La sémiotique cognitive: fondementsSous le chapeau du paradigme de la cognition incarnée (embodied cognition) et de l'expérientialismeAlimentée par deux courants de recherche principauxSémantique et linguistique cognitiveThéorie de la cognition distribuée5
La sémiotique cognitive: fondementsSémantique (et linguistique) cognitive:De la sémantique à la sémantique cognitive:  "les représentations mentales ne sont pas des transcriptions symboliques, qui auraient à leur tour besoin d’être interprétées, mais sont elles-mêmes des interprétations : la construction d’une représentation, c’est la compréhension d’un énoncé." (Marconi)Recherches sur la métaphore (Lakoff & Johnson),  l’analogie (Gentner et.  al),  l’intégration conceptuelle (Fauconnier & Turner)Grammaire cognitive (Langacker)6
La sémiotique cognitive: fondementsThéorie de la cognition distribuéeChangement de l'unité d'analyse: la cognition n'est pas limitée à ce qui se passe dans la tête d'un individu.Un système cognitif se compose:d'individus et des relations sociales les unissantd'artefacts informationnelsDéfinition d'un système en termes fonctionnels: quelles sont les agents et les ressources qui y jouent un rôle pour mener à bien l'activité cognitive en coursSlogans:« La cognition est un phénomène culturel »« L'esprit n'est pas dans le cerveau, c'est le cerveau qui est dans l'esprit »7
La sémiotique cognitive: fondementsThéorie de la cognition distribuée:  phénomènes intéressants du point de vue de la sémiotique cognitive:Rôle des artéfacts informationnels dans la réalisation d'une tâche cognitive donnéeVa-et-vient de l'attention entre représentation et chose représentéeUtilisation des propriétés formelles de la représentation pour comprendre le référent / résoudre un problème le concernant8
La sémiotique cognitive: fondementsSémantique cognitive:Comment les êtres humains construisent du sens (en élaborant des représentations mentales).Cognition distribuéeComment utilisent leur corps et environnement matériel, social et culturel pour mener à bien des tâches cognitives, analysables en termes de manipulation de représentations.Sémiotique cognitiveComment les êtres humains construisent du sens en manipulant et transformant des représentations mentales et matérielles.9
Spécification contextuelleMédiation des savoirsEffets des dispositifs de communication des connaissances sur leurs processus de réceptionEffets des processus de production sur ces dispositifs Etude des TICQuestion centrale: Quel rôle jouent les spécificités techno-sémiotiques des TIC utilisées à des fins éducatives dans le processus d’acquisition de connaissances qu’elles sont censées soutenir?10
Compréhension, cohérence, structureCompréhension =	Construction de représentations cohérentesPerception d’une structure Structure = enchevêtrement d’image-schémasImage-schéma =“A schema consists of a small number of parts and relations, by virtue of which it can structure indefinitely many perceptions, images, and events. In sum, image schemata operate at a level of mental organization that falls between abstract propositional structures, on the one side, and particular concrete images, on the other. “The view I am proposing is this : in order for us to have meaningful, connected experiences that we can comprehend and reason about, there must be pattern and order to our actions, perceptions, and conceptions. “A schema is a recurrent pattern, shape, and regularity in, or of, these ongoing ordering activities. These patterns emerge as meaningful structures for us chiefly at the level of our bodily movements through space, our manipulation of objects, and our perceptual interactions.” (Johnson 1987, p. 29)11
Image-schéma: exemplesContenantChemin12dehorsdedanslimite
Théorie de l’intégration conceptuelleNotion de base: l'espace mental comme unité cognitiveIntégration conceptuelle: combinaison du contenu de plusieurs espaces mentaux en un espace mixte, ayant une structure émergente propre.Un réseau d'intégration conceptuelle se construit en trois étapes:CompositionCompletionElaboration13
Théorie de l’intégration conceptuelle14Exemple:L’énigme du moine bouddhiste
Théorie de l’intégration conceptuelleDimension intéressante du point de vue de la sémiotique cognitive:Offre un cadre d'analyse pour les situations où un individu comprend un objet en combinant des propriétés de celui-ci et de sa représentationExemple: navigation hypertextuelleExtension des thèses initiales de la théorie pour y inclure des espaces matériels / sémiotiques (« ancres matérielles »)15
Ancres matérielles pour intégration conceptuellePrincipe: association de structures conceptuelles à des structures matérielles.Ancrematérielle = espaced’entréedontune part de la structure matérielleestprojetéedans un blend.Satisfait une contrainte propre au raisonnement humain: le besoin de stabilité des modèles conceptuels qui le soutiennent.16
Ancres matérielles pour intégration conceptuelleExemples: la file comme moyen de se rappeler un ordre de passagela méthode des lociApplication dans le cadre de la sémiotique cognitive:  comment les propriétés matérielles et formelles d’une représentation peuvent soutenir un raisonnement sur le référent de celle-ci.17
L’étude des usages des TIC… ou de l’influence des propriétés formelles du support sémiotique sur le travail d’interprétation et de compréhension mis en œuvre par son utilisateur
Usages des TIC pour l’éducation (TICE)Intérêt pour les technologies de l'information et de la communication, conçues comme des technologies de l'intelligence (Levy)NB: La technologie n'amplifie pas les capacités cognitives, elle reformule la tâche comme un problème différent, requérant des capacités cognitives différentes ou organisées différemment.Comment les propriétés techno-sémiotiques d'un dispositif multimédia interactif modulent son activité d'utilisation et influent sur la façon dont leurs utilisateurs construisent des connaissances concernant les contenus qu'il présentent en le manipulant.Rôle que jouent les modèles du dispositif manipulé élaborés par les utilisateurs dans ce processus d'influence.19
Hypermédias et apprentissageUne technologie en particulier: les hypermédiasQuestion: influence de la structure formelle des hypermédia éducatifs sur l'organisation des connaissances acquisesHypothèse validée dans le cadre de ma thèse de doctoratInfluence de la hiérarchisation des informationsInfluence de la contextualisation des informationsOn s'attardera plutôt ici sur le modèle (sémio-cognitif) permettant d'expliquer cette influenceAnalyses en cours concernant l’évolution de cette influence avec le développement d’une expertise dans le domaine du contenu présenté.20
HyperDoc, support d’expérimentation21
Deux illustrationsRappel: compréhension = élaboration de représentations mentales structurées donc cohérentesDans le contexte étudié, l’élaboration de représentations propres au contenu de l’hypermédia se fondesur des facteurs sémantiquessur des facteurs rhétoriquessur des facteurs formels et interfaciauxPar défaut de structure pré-existante dans le domaine du contenu concerné permettant de cadrer les informations nouvelles, l’utilisateur se repose sur des indices propres au format de présentation.22
Extrait #1:Q: « Qu’est-ce que le protocole TCP? »R: « Heu… C’est technique. Ca s’occupait de la gestion de l’information, de la circulation, quoi. De l’envoi, de la gestion, et de la réception de l’information. Mais ça m’a l’air… plus technique. Tout ce qui était en vert, là… j’ai moins, moins bien lu… »23Espace générique Entités
 Oppositions catégorielles      / qualitativesInput 2Input 1 Ecran 1 (vert)
 Ecran 2 (rouge)
 Ecran 3 (bleu)

Sémiotique cognitive et technologies de l'information

  • 1.
    Sémiotique cognitive ettechnologies de l’informationPierre FASTREZGroupe de Recherche en Médiation des Savoirs - UCL
  • 2.
    Plan de l’exposéLasémiotique cognitiveFondements: Sémantique cognitive et Théorie de la cognition distribuéeContexte: Médiation des savoirs et TICConcepts: Compréhension, Cohérence, Structure image-schématiqueIntégration conceptuelle, ancres matériellesL’étude de l’usage des TICLes technologies de l’intelligenceHypermédias et construction de connaissancesDécouverte d’un domaine de connaissancesAcquisition d’expertise2
  • 3.
    La sémiotique cognitiveCommentl’être humain construit du sens en manipulant des représentations…
  • 4.
    La sémiotique cognitive:définitionRegain d'intérêt pour les aspects cognitifs des processus communicationnels depuis une vingtaine d'années.Au sein de cette tendance, naissance de la sémiotique cognitive.Discipline à la croisée de la sémiotique et des sciences cognitivesEtude des relations entre, d’une part, les systèmes sémiotiques articulés dans différents types de dispositifs (symbolique externe) et, d’autre part, les représentations mentales et les processus cognitifs présidant à leur élaboration (symbolique interne).Ancienne question de la relation entre pensée et langage, extrapolée à d'autres formes sémiotiques que le langage naturel.4
  • 5.
    La sémiotique cognitive:fondementsSous le chapeau du paradigme de la cognition incarnée (embodied cognition) et de l'expérientialismeAlimentée par deux courants de recherche principauxSémantique et linguistique cognitiveThéorie de la cognition distribuée5
  • 6.
    La sémiotique cognitive:fondementsSémantique (et linguistique) cognitive:De la sémantique à la sémantique cognitive: "les représentations mentales ne sont pas des transcriptions symboliques, qui auraient à leur tour besoin d’être interprétées, mais sont elles-mêmes des interprétations : la construction d’une représentation, c’est la compréhension d’un énoncé." (Marconi)Recherches sur la métaphore (Lakoff & Johnson), l’analogie (Gentner et. al), l’intégration conceptuelle (Fauconnier & Turner)Grammaire cognitive (Langacker)6
  • 7.
    La sémiotique cognitive:fondementsThéorie de la cognition distribuéeChangement de l'unité d'analyse: la cognition n'est pas limitée à ce qui se passe dans la tête d'un individu.Un système cognitif se compose:d'individus et des relations sociales les unissantd'artefacts informationnelsDéfinition d'un système en termes fonctionnels: quelles sont les agents et les ressources qui y jouent un rôle pour mener à bien l'activité cognitive en coursSlogans:« La cognition est un phénomène culturel »« L'esprit n'est pas dans le cerveau, c'est le cerveau qui est dans l'esprit »7
  • 8.
    La sémiotique cognitive:fondementsThéorie de la cognition distribuée: phénomènes intéressants du point de vue de la sémiotique cognitive:Rôle des artéfacts informationnels dans la réalisation d'une tâche cognitive donnéeVa-et-vient de l'attention entre représentation et chose représentéeUtilisation des propriétés formelles de la représentation pour comprendre le référent / résoudre un problème le concernant8
  • 9.
    La sémiotique cognitive:fondementsSémantique cognitive:Comment les êtres humains construisent du sens (en élaborant des représentations mentales).Cognition distribuéeComment utilisent leur corps et environnement matériel, social et culturel pour mener à bien des tâches cognitives, analysables en termes de manipulation de représentations.Sémiotique cognitiveComment les êtres humains construisent du sens en manipulant et transformant des représentations mentales et matérielles.9
  • 10.
    Spécification contextuelleMédiation dessavoirsEffets des dispositifs de communication des connaissances sur leurs processus de réceptionEffets des processus de production sur ces dispositifs Etude des TICQuestion centrale: Quel rôle jouent les spécificités techno-sémiotiques des TIC utilisées à des fins éducatives dans le processus d’acquisition de connaissances qu’elles sont censées soutenir?10
  • 11.
    Compréhension, cohérence, structureCompréhension= Construction de représentations cohérentesPerception d’une structure Structure = enchevêtrement d’image-schémasImage-schéma =“A schema consists of a small number of parts and relations, by virtue of which it can structure indefinitely many perceptions, images, and events. In sum, image schemata operate at a level of mental organization that falls between abstract propositional structures, on the one side, and particular concrete images, on the other. “The view I am proposing is this : in order for us to have meaningful, connected experiences that we can comprehend and reason about, there must be pattern and order to our actions, perceptions, and conceptions. “A schema is a recurrent pattern, shape, and regularity in, or of, these ongoing ordering activities. These patterns emerge as meaningful structures for us chiefly at the level of our bodily movements through space, our manipulation of objects, and our perceptual interactions.” (Johnson 1987, p. 29)11
  • 12.
  • 13.
    Théorie de l’intégrationconceptuelleNotion de base: l'espace mental comme unité cognitiveIntégration conceptuelle: combinaison du contenu de plusieurs espaces mentaux en un espace mixte, ayant une structure émergente propre.Un réseau d'intégration conceptuelle se construit en trois étapes:CompositionCompletionElaboration13
  • 14.
    Théorie de l’intégrationconceptuelle14Exemple:L’énigme du moine bouddhiste
  • 15.
    Théorie de l’intégrationconceptuelleDimension intéressante du point de vue de la sémiotique cognitive:Offre un cadre d'analyse pour les situations où un individu comprend un objet en combinant des propriétés de celui-ci et de sa représentationExemple: navigation hypertextuelleExtension des thèses initiales de la théorie pour y inclure des espaces matériels / sémiotiques (« ancres matérielles »)15
  • 16.
    Ancres matérielles pourintégration conceptuellePrincipe: association de structures conceptuelles à des structures matérielles.Ancrematérielle = espaced’entréedontune part de la structure matérielleestprojetéedans un blend.Satisfait une contrainte propre au raisonnement humain: le besoin de stabilité des modèles conceptuels qui le soutiennent.16
  • 17.
    Ancres matérielles pourintégration conceptuelleExemples: la file comme moyen de se rappeler un ordre de passagela méthode des lociApplication dans le cadre de la sémiotique cognitive: comment les propriétés matérielles et formelles d’une représentation peuvent soutenir un raisonnement sur le référent de celle-ci.17
  • 18.
    L’étude des usagesdes TIC… ou de l’influence des propriétés formelles du support sémiotique sur le travail d’interprétation et de compréhension mis en œuvre par son utilisateur
  • 19.
    Usages des TICpour l’éducation (TICE)Intérêt pour les technologies de l'information et de la communication, conçues comme des technologies de l'intelligence (Levy)NB: La technologie n'amplifie pas les capacités cognitives, elle reformule la tâche comme un problème différent, requérant des capacités cognitives différentes ou organisées différemment.Comment les propriétés techno-sémiotiques d'un dispositif multimédia interactif modulent son activité d'utilisation et influent sur la façon dont leurs utilisateurs construisent des connaissances concernant les contenus qu'il présentent en le manipulant.Rôle que jouent les modèles du dispositif manipulé élaborés par les utilisateurs dans ce processus d'influence.19
  • 20.
    Hypermédias et apprentissageUnetechnologie en particulier: les hypermédiasQuestion: influence de la structure formelle des hypermédia éducatifs sur l'organisation des connaissances acquisesHypothèse validée dans le cadre de ma thèse de doctoratInfluence de la hiérarchisation des informationsInfluence de la contextualisation des informationsOn s'attardera plutôt ici sur le modèle (sémio-cognitif) permettant d'expliquer cette influenceAnalyses en cours concernant l’évolution de cette influence avec le développement d’une expertise dans le domaine du contenu présenté.20
  • 21.
  • 22.
    Deux illustrationsRappel: compréhension= élaboration de représentations mentales structurées donc cohérentesDans le contexte étudié, l’élaboration de représentations propres au contenu de l’hypermédia se fondesur des facteurs sémantiquessur des facteurs rhétoriquessur des facteurs formels et interfaciauxPar défaut de structure pré-existante dans le domaine du contenu concerné permettant de cadrer les informations nouvelles, l’utilisateur se repose sur des indices propres au format de présentation.22
  • 23.
    Extrait #1:Q: « Qu’est-ceque le protocole TCP? »R: « Heu… C’est technique. Ca s’occupait de la gestion de l’information, de la circulation, quoi. De l’envoi, de la gestion, et de la réception de l’information. Mais ça m’a l’air… plus technique. Tout ce qui était en vert, là… j’ai moins, moins bien lu… »23Espace générique Entités
  • 24.
    Oppositions catégorielles / qualitativesInput 2Input 1 Ecran 1 (vert)
  • 25.
    Ecran 2(rouge)
  • 26.
    Ecran 3(bleu)