AAC4All

LIFAT

Jean-Yves Antoine

Professeur des universités
Anaïs Halftermeyer
Matresse de Conférences (LIFO)
Frédéric Rayar
Maitre de Conférences
Cherifa Ben Khelil
Ingénieure de recherche

Le LIFAT est le laboratoire de recherche en informatique de l’Université de Tours. Il est structuré autour de trois grands thèmes applicatifs fédérateurs, parmi lesquels Santé et Handicap qui concerne le développement d’aides techniques pour personnes souffrant de handicaps physiques ou cognitifs, mais aussi des techniques d’analyse d’image pour l’aide au diagnostic médical ou la fouille visuelle de données médicales. L’équipe BdTln du LIFAT a une longue expérience en matière d’application du Traitement Automatique des Langues (TAL) à l’aide à la communication pour personnes présentant des capacités motrices voire cognitives réduites. Initiés avec le système HandiAS, ces recherches se poursuivent désormais depuis 20 ans dans le cadre d’une collaboration avec le centre de rééducation de Kerpape et la Plate-Forme Nouvelles Technologies de l’hôpital de Garches. Elles ont donné à la proposition successive de deux systèmes d’aide à la communication hautement adaptatif : le système Sibylle puis le système LifeCompanion développé à Kerpape. Parallélement à ces travaux, l’équipe RFAI s’intéresse également à la réalisation d’aides techniques, principalement pour des personnes présentant des déficiences visuelles.

Rôles :

  • Jean-Yves Antoine : responsable du projet AAC4All, participe aux WP0, 2, 3 et 5
  • Anaïs Halftermeyer : WP 1, 2, 3 et 5
  • Frédéric Rayar : WP 2, 3 et 4
  • Cherifa Ben Khelil : WP 3  et 5

CMRRF Kerpape

Logo VYV
Logo centre mutualiste de Kerpape
Mathieu THEBAUD
Ingénieur, Référent CAA & Concepteur LifeCompanion
Willy ALLEGRE
Ingénieur PhD, Coordinateur Laboratoire d’Assistance Technologique
Mael CHEVANCHE
Ingénieur & Référent Domotique

Situé à Lorient, le Centre de Rééducation de Kerpape fait partie des grands centres de rééducation en France avec plus de 400 patients chaque jour et plus de 600 professionnels sur site. Il appartient à l’union mutualiste VYV 3 Bretagne.

Depuis les années 80, le Centre possède un laboratoire dans lesquels des ingénieurs sont dédiés aux assistances technologiques (dont la CAA) et intégrés dans les prises en charge ou sur des missions de recherche, développement et innovation. Ce double positionnement – activités cliniques pour les patients du centre et démarche d’Open Innovation – a permis au laboratoire et plus largement au CMRRF de Kerpape d’être positionné comme un leader au niveau national sur la thématique des assistances technologiques.

Le laboratoire collabore depuis les années 2000 avec la Plate-Forme Nouvelles Technologies de l’hôpital de Garches et le LIFAT sur des outils et des projets de recherche autour des aides à la communication, notamment Sibylle et Predict4All. Depuis 2015, le laboratoire développe LifeCompanion, logiciel gratuit et open-source d’aide à la communication et d’accès au numérique. LifeCompanion est aujourd’hui diffusé grâce au support du CoWork’HIT.

 

Rôles

Le CMRRF de Kerpape est responsable de la réalisation de deux éléments du projet à travers le « WP1 : AAC Plateform ». Ces deux éléments sont :

  • La réalisation d’une plateforme logicielle de CAA ouverte dans laquelle les expérimentations pourront être conduites (basée sur LifeCompanion)
  • La réalisation d’une plateforme web de recommandation dans laquelle les acteurs de l’écosystème autour de la CAA pourront être guidés

Le CMRRF de Kerpape sera également impliqué dans toutes les composantes du projet, en particulier sur les focus group permettant d’impliquer les professionnels et les évaluations cliniques (WP6).

 

CHU Garches

Logo PFNT de Garches
Samuel POUPLIN
Ergothérapeute PhD
Olivia ZELLER
Ergothérapeute DE
Célia GUIMBERTEAU
Ergothérapeute MSc
Soizic RIEGEL
Ergothérapeute DE

La Plate-Forme Nouvelles Technologies (PFNT) de l’hôpital Raymond Poincaré est une unité de conseil, de démonstration, de formation et de recherche dans le domaine des Nouvelles Technologies appliquées aux personnes en situation de handicap. Initialement uniquement tournée vers la robotique d’assistance (en 1995), elle s’est peu à peu ouverte à d’autres technologies de l’information et de la communication, comme l’informatique, la Communication Améliorée et Alternative (CAA) et la domotique. De par son environnement hospitalier, son mode de fonctionnement et ses missions, la PFNT est une structure unique en France et reconnue sur tout le territoire.

La PFNT a une activité transversale sur la structure hospitalière car l’équipe intervient sur tous les services présents au sein de l’hôpital. Elle accueille également des personnes extérieures venant de toute la France, en hospitalisation de jour.

 

 

Rôles :

Garches coordonne l’évaluation écologique auprès d’un large panel d’usager. Les objectifs sont de: 

  • Conception et évaluation des composants de la plate-forme en intégrant les concepts et les exigences en termes de fonctionnalité et d’utilisabilité
  • Evaluation de la plateforme complète – Une étude clinique portera sur 20 personnes en situation de handicap par site (Garches, Kerpape), accompagnées par des professionnels de santé (ergothérapeute et orthophoniste) dans le cadre de leur pratique actuelle
  • Samuel Pouplin : WP 0 à 6
  • Olivia Zeller : WP 6
  • Celia Guimberteau : WP 6
  • Soizic Riegel : WP 6
 

MoDyCo

Logo Modyco
Caroline Bogliotti
Enseignant-Chercheur
Aude Julien Da Cruz Lima
Ingénieure d’Etudes
Iris Eshkol-Taravella
Enseignant-Chercheur
Karin Heidlmayr

Enseignant-Chercheur

Frédéric Isel

Enseignant-Chercheur

L’objectif général du laboratoire MoDyCo est d’étudier le fonctionnement linguistique et l’impact que peuvent avoir les variations langagières sur la grammaire et sur le fonctionnement des mécanismes langagiers.

Les membres du WP4 sont issus des équipes Psycholinguistique, Neurocognition, Acquisitions et Variation et du pôle Modélisation et linguistique fondée sur les corpus.

L’équipe Psycholinguistique, Neurocognition, Acquisitions et Variation s’intéresse au fonctionnement et dysfonctionnement langagier dans différentes langues vocales et en Langue des Signes Française (LSF), chez des locuteurs natifs ou non-natifs en intégrant les approches chronométrique, oculométrique, et neurophysiologique. Au-delà de proposer des preuves empiriques sur les mécanismes de traitement et de production du langage, nous souhaitons et agissons pour que nos résultats scientifiques aient un impact sociétal, à la fois dans le développement d’outils diagnostic pour les cliniciens, d’évaluation ou d’aide à l’apprentissage des langues étrangères pour le milieu éducatif et social. Pour ces activités de diagnostic, d’évaluation et d’aide à l’apprentissage, les biomarqueurs testés dans nos études EEG et validés plus généralement par la communauté scientifique dans différents laboratoires seront exploités en guise d’outils. A la différence des marqueurs comportementaux, ces biomarqueurs sont des mesures objectivables, indépendantes des ressources attentionnelles des participants.

L’équipe Modélisation et linguistique fondée sur les corpus vise l’élaboration et la validation de modèles linguistiques dans une démarche bi-directionnelle : d’une part, en allant des faits attestés dans les corpus vers une modélisation par un traitement (semi-)automatique de données généralement annotées ; d’autre part, en d’intéressant à la démonstrabilité des hypothèses avancées et en testant les prédictions issues des modèles. Pour cela, trois méthodes sont utilisées : (1) validation sur corpus : une analyse qualitative ou quantitative des données et notamment une annotation fine des corpus qui permet aussi bien de tester les modèles que d’extraire les données pertinentes à l’élaboration des modèles ; (2) validation par simulation : l’élaboration d’un modèle informatique ou mathématique. Ce mode de validation rejoint le précédent quand il s’agit d’apprentissage supervisé sur des données annotées; (3) validation expérimentale, en collaboration avec l’équipe PNAV. Cette cette dernière qui sera exploitée dans le projet AAC.

Rôles : Dans ce Work Package (WP4), les membres du laboratoire MoDyCo proposeront la première investigation expérimentale des capacités de compréhension des enfants handicapés lors du traitement des pictogrammes. Cette étude nous permettra de comprendre dans quelle mesure ces enfants construisent le sens d’un message à partir de l’unification sémantique de différents pictogrammes. Nous prévoyons de collecter des données oculométriques et des données électroencéphalographiques (EEG). Nous sommes également investis dans le WP5 avec les chercheurs du LIG. L’objectif de ce WP est d’élaborer des jeux sérieux pour une appropriation efficace des outils AAC.

 

 

IRIT - équipe ELIPSE

Logo IRIT

Mathieu Raynal

Enseignant-chercheur

Nadine Vigouroux

Chercheuse

Frédéric Vella

Chercheur

Lisa Hoiry

Doctorante

L’Institut de Recherche en Informatique de Toulouse (IRIT) est un des plus gros laboratoire en Occitanie avec ses 600 membres, permanents et non-permanents, et une centaine de collaborateurs extérieurs. De par son caractère multi-tutelle (CNRS, Universités toulousaines), le laboratoire constitue une des forces structurantes du paysage de l’informatique et de ses applications dans le monde du numérique, tant au niveau régional que national. L’équipe Etude de L’Interaction Personne SystèmE (ELIPSE) s’inscrit dans le domaine de l’Interaction Homme Machine (IHM). Sa pluridisciplinarité (sciences cognitives, IHM, informatique) permet de traiter des Techniques d’Interaction Avancées (TIA) comme objets de recherche dans le but de développer des modèles, des nouvelles techniques d’interaction ou dispositifs, et comme outils de recherche pour explorer leur impact sur la perception et la cognition humaine. Les travaux sont menés sous les angles complémentaires de l’Humain (perception, cognition, comportement) et de ses Interactions (processus, modèles, technologies), points de vue que nous visons à combiner au sein de contributions théoriques, d’implémentations concrètes et d’expérimentations. L’équipe est en mesure d’aller jusqu’au déploiement et à l’évaluation de situations d’interactions complexes et variées (Espaces d’interaction spatialisée tels que la réalité augmentée, les interactions tangibles et multi-dispositifs, l’Informatique Ambiante; Technologies de suppléance pour le handicap, Systèmes interactifs mobiles). Une originalité de l’équipe, qui s’inscrit dans le courant des Sciences et Technologies Cognitives (STC), est que ces déploiements technologiques permettent de reboucler sur l’étude des fondements théoriques relatifs à l’Homme et ses Interactions.

Rôles :

Les membres de l’équipe ELIPSE sont plus particulièrement impliqués dans la conception, le développement et l’évaluation des systèmes de saisie de texte et dans l’intégration des systèmes de prédiction linguistique au sein de ces systèmes de saisie.

LIG

Logo LIG
Didier Schwab

Enseignant-chercheur
UGA, LIG, resp.

Jérôme Goulian

Enseignant-chercheur
UGA, LIG

Amélie Rochet-Capellan

Chercheuse
CNRS, GipsaLab

Marion Dohen

Enseignante-chercheuse
Grenoble INP, GipsaLab

Benjamin Lecouteux

Enseignant-chercheur
UGA, LIG

Jordan Arrigo

Ingénieur d’étude
UGA, LIG

Le Laboratoire d’Informatique de Grenoble rassemble près de 450 chercheurs, enseignants-chercheurs, doctorants et personnels en support à la recherche. Ses 22 équipes sont organisées en 5 axes résumés ici. Au sein de l’axe Systèmes Intelligents pour les Données, les Connaissances et les Humains, l’équipe GETALP est une équipe pluridisciplinaire (informaticiens, linguistes, phonéticiens, traducteurs, traiteurs de signaux…) dont l’objectif est d’aborder tous les aspects théoriques, méthodologiques et pratiques de la communication et du traitement de l’information multilingue (écrite et orale) . Parmi les axes de recherche majeurs de l’équipe citons la clarification automatique et interactive de textes et le dialogue assisté par la machine pour les personnes en situation de handicap. En particulier Didier Schwab est le concepteur et l’un des principaux développeurs de Gazeplay, un logiciel libre et gratuit qui rassemble plusieurs mini-jeux jouables grâce à un occulomètre (Eye-tracker). La dernière version compte une soixantaine de jeux. L’équipe Getalp dirige également la partie française du projet ANR Franco-Suisse PROPICTO (Projection du langage Oral vers des unités PICTOgraphiques) qui aborde plusieurs domaines du TAL (reconnaissance de parole, analyse syntaxique de l’oral, simplification de textes, génération automatique de pictogrammes). Les méthodes découlant de ce projet sont en lien avec AAC4All pour permettre à des personnes en situation de handicap, allophones, d’avoir la possibilité de développer leur communication, leur autonomie et leur accès à l’information. Enfin, l’équipe GETALP est partenaire du projet AAC4All à travers le groupe informel InterAACtion qui rassemble les recherches et les formations sur la Communication Alternative et Augmentée inter-disciplinaire de l’université Grenoble Alpes dont fait partie notamment le laboratoire GIPSA-Lab.

Rôles :

  • Les membres du LIG et de GIPSA-Lab interviennent dans les WP4 et WP5.

CoWork'HIT

Logo Co Work it
Willy ALLEGRE
Directeur Technique

Hébergé au CMRRF de Kerpape, le CoWork’HIT est un centre d’innovation, d’expertises et de moyens dont la mission principale est d’accompagner les entreprises, établissements de santé et médico-sociaux, associations et autres acteurs de l’innovation et du handicap.

Structuré sous forme de SCIC (Société Coopérative d’Intérêt Collectif), il porte des valeurs coopératives fondamentales telles que la co-conception avec les usagers, la prééminence de la personne humaine, un sociétariat multiple ayant pour finalité l’intérêt collectif. Il accompagne le développement d’innovations technologiques, d’usages et d’organisations sur des volets techniques, cliniques, usages, réglementaires et marchés, visant à la fois un impact sociétal en réponse aux besoins des usagers mais également économique en soutenant la filière handicap.

L’un des principaux co-investisseur est VYV3 Bretagne faisant lien avec le CMRRF Kerpape. Le CoWork’HIT porte une offre de service autour de LifeCompanion à destination d’établissements et professionnels de santé (formation, accompagnement) mais également à destination d’entreprises (startup, PME, grands groupes) et de chercheurs sur l’adaptation ou l’utilisation de celui-ci.

 

Rôles

Le CoWork’HIT sera impliqué dans la définition d’un modèle économique autour du projet et d’assurer sa diffusion afin d’assurer qu’AAC4ALL ait un impact clinique pratique dès le démarrage du projet mais aussi au-delà.