Prdiction lexicale pour les systmes de communication assiste

1
Prédiction lexicale pour les systèmes de
communication assistée

• Groupe Handicap

2
Le Groupe Handicap

• Linguistes LPL (Aix), Lattice (Paris)
• Informaticiens LIF (Marseille), LPL (Aix)
• Electroniciens LPL (Aix)
• Ergonomes LPC (Aix)
• Médecins CHU Timone
• Orthophonistes CHU, libérale
• Foyers associations Popineau, ALS,
  Saint-Thys,

3
La communication alternative

• But
• Aider la communication de personnes handicapées
• Permettre un contrôle ergonomique des logiciels
• Types de handicap
• Motricité réduite ou impossible
• Production de parole difficile ou impossible
• Moyens
• Clavier virtuel
• Capteurs
• Outils de prédiction, dédition, de contrôle
  domotique, etc.
• Synthèse de parole
• Ergonomie logicielle

4
Thèmes du séminaire

• Définition des besoins des utilisateurs
• Composition des messages
• Analyse lexicale et méthodes de prédiction

5
Analyse des besoins des utilisateurs

• Démarche ergonomique
• observations sur le terrain
• Entretiens

6
Situations de communication mises en évidence

• Communication stéréotypée. Ex Réveil, toilette,
  repas.
• Communication plus ou moins stéréotypée. Ex
  consultations médicales.
• Communication  libre . Ex Réunions, sorties,
  courses à lextérieur, vie courante au foyer
  (échanges avec le personnel ou dautres
  résidents), rédaction de courrier, de mails

7
Adéquation entre les différents moyens de
communication et les situations

• Les différents moyens de communication proposés
  par la PCA seront plus ou moins adaptés selon la
  situation.
• Il faut donc définir les différentes situations
  en
• Distinguant la communication orale et écrite.
• Prenant en compte le degré de stéréotypie de la
  situation.
• Prenant en compte le temps dont dispose
  lutilisateur pour sexprimer.

8
Exemple de solutions proposées

• Pour la rédaction dun courrier ou dun mail
  utilisation des claviers.
• Pour les situations de communication stéréotypée
  où les contraintes temporelles sont fortes
• icônes, tableau de communication, clavier
  phonétique, répertoire spécial, réduction du
  message.

9
Composition des messages

• Structure hiérarchique du message
• message phrase ou association de phrases
• phrase association de mots ou de groupes de
  mots (syntagmes)
• mot association de lettres ou de phonèmes

10

• Lutilisateur interagit avec la machine à laide
  de claviers virtuels
• clavier virtuel ensemble de touches virtuelles
  représentées à lécran par une image et/ou un
  texte
• Une touche virtuelle est associée à
• une action (ex. Correction, Descendre dans
  larborescence, )
• un constituant du message (lettre, mot, groupe de
  mot, phrase)
• Le message est composée progressivement en
  sélectionnant les touches associées à ses
  constituants

11
Objectif Réduire le temps de composition du
message
Le temps de composition du message, cest la
somme des temps individuels pour accéder à chacun
de ses constituants

• Améliorer laccessibilité aux différents
  constituants du message
• Réduire le nombre de constituants du message
• En fonction de lhistorique, proposer un choix de
  constituants probables

Remarque Plus le cardinal de la base de
constituants proposée est grand, plus le temps
daccès à un de ses éléments est élevé (recherche
de lélément dans une arborescence, pagination,
)
12
Améliorer laccessibilité aux constituants du
message

• Optimiser les interactions utilisateur-machine
• Multimodalité
• Défilement lignes-colonnes
• Favoriser laccès aux touches virtuelles les plus
  utilisées
• ex. Les lettres nont pas la même fréquence
  dutilisation
• Ergonomie des touches daction (Correction, )
• Ex. Les erreurs de frappe et leurs corrections
  augmentent le temps daccès aux constituants

13
Réduire le nombre de constituants du message

• Base de messages pré-enregistrées
• Peut convenir pour des situations de
  communication stéréotypées (ex. Le repas
   Passes-moi le sel! ,  Cest trop chaud! , )
• Limite considérablement la performance
  linguistique sinon
• Utilisation dun langage faiblement syntaxique
  (base dicônes)
• Le message nest complété quen cas dambiguïté
  (ex. Le repas  le sel  suivi de  trop )
• Méthode du dictionnaire (lentité sélectionnée
  est le mot)
• Charge cognitive importante lors du parcours de
  larborescence (temps de lecture et recherche
  alphabétique)
• Pour une base dicônes, la structure de
  larborescence est plus naturelle (ex. cerise ?
  fruits rouges ? fruits ? aliments)

14
Clavier virtuel dynamique de proposition de mots

• Proposer les mots les plus probables en fonction
  de lhistorique des constituants déjà
  sélectionnés (lettres et mots) ou de la position
  dans larborescence
• Analyse statistique de corpus pour déterminer la
  fréquence dutilisation des mots
• Adaptabilité et apprentissage calcul des
  fréquences propres à lutilisateur sur la base de
  sa production

15
Méthodes de prédiction

• Prédiction de mots à partir
• De mots
• Dune grammaire
• De phrases
• De mots en alphabet phonétique
• Prédiction d icônes à partir
• Dicônes
• De phrases dicônes

16
Prédiction de mots à partir de mots

• Différents claviers pour chacune des méthodes
• Lettre
• Consonne \ voyelle
• Pendu
• Paramètres de la prédiction
• Taille du mot
• Un groupe de lettres
• Position du groupe de lettres dans le mot

17
Algorithme de prédiction

• Pré Découpage du dictionnaire selon la méthode
  utilisée
• Construction dun sous dictionnaire

18
Amélioration de la prédiction de mots (1)

• Donner la taille du mot

19
Amélioration de la prédiction de mots (2)

• Prédire un mot en fonction dun dictionnaire de
  phrase

20
Lettre précédente, mauvaise méthode ?

• Possibilité de prédire une lettre en fonction de
  la lettre saisie précédemment
• Cela impose davoir
• un clavier de saisie dynamique
• Difficulté pour lutilisateur avec un clavier
  changeant
• ou
• Une fenêtre de proposition de lettres
• Clavier de saisie inutile
• Deux fenêtres de propositions lettres et mots

21
Utilisation des icônes

• Clavier dicônes permettant de parcourir toutes
  les icônes

• Ces icônes étant hiérarchisées pour un accès plus
  rapide

22
Prédiction dicônes (1)

• A partir de la fréquence dutilisation de chaque
  icône

23
Prédiction dicônes (2)

• A partir dun dictionnaire de phrases dicônes