Automatic Cued Speech / LfPC automatisée

La réalité augmentée au service des personnes sourdes

Contributeurs

Equipe projet

Ce projet de recherche est conduit par une équipe du Laboratoire Parole et Langage (LPL – CNRS, Aix-Marseille Université). Une collègue de l’Université de Lorraine a rejoint le projet en cours pour répondre à des besoins spécifiques. L’équipe assure la conduite scientifique, le développement technique et la coordination globale du projet. Son implication constitue le cœur opérationnel du dispositif.

Responsable du projet : Laboratoire Parole et Langage

Le Laboratoire Parole et Langage (Aix-Marseille Université, CNRS UMR 7309) a pour objectif principal de mieux comprendre les processus mis en jeu dans la production, la perception, et la compréhension du langage oral et du langage écrit, en situation naturelle d'occurrence comme en laboratoire. Ces recherches sont prioritairement menées dans un cadre expérimental et font appel à une vaste panoplie d'instruments permettant le recueil et l’analyse de données cérébrales, physiologiques, articulatoires, acoustiques, visuelles, et perceptives, d'une grande variété. Ces investigations expérimentales sont combinées à des études quantitatives menées sur de vastes corpus de données textuelles ou de données orales multimodales. Le LPL s’est forgé une identité scientifique dont l'interdisciplinarité constitue un élément clé.

Membres

Brigitte BIGI - Responsable du projet www lpl

En résumé...

  • Diplômée d'une thèse de doctorat en informatique (sept. 1997 - sept. 2000), Université d’Avignon.
  • Chargée de recherche CNRS
  • Spécialité : Informatique (Intelligence Artificielle)
  • Thématique : Traitement automatique de la parole, des corpus multimodaux, et multilinguisme
Auteure du logiciel libre SPPAS.

En savoir plus :

Brigitte Bigi (porteur), chargée de recherche CNRS depuis 2002, est informaticienne, spécialisée à la fois en I.A. dans le sous-domaine de la linguistique computationnelle appliquée, et en linguistique de corpus. Depuis 2011, elle diffuse tous ses résultats de recherche via le logiciel SPPAS - the automatic annotation and analysis of speech. Ce logiciel répond à tous les critères de l’open science : il a reçu un Accessit du Prix Spécial du Jury au concours Science Ouverte du logiciel libre de la recherche (2022), organisé par le COSO - COmité pour la Science Ouverte (https://www.ouvrirlascience.fr) et décerné par le MESRI – Ministère de l’Enseignement Supérieur, de la Recherche et de l’Innovation.

Thématiques de recherche :

La réponse scientifique privilégiée des systèmes prédictifs qu’elle propose et qui sont mis en œuvre dans SPPAS se situe dans l’approche I.A. symbolique, dans l’approche I.A. connexionniste, ainsi que dans des solutions hybrides, selon la problématique qui est abordée. L’I.A. symbolique s’appuie sur l’exploitation de connaissances existantes pour résoudre des problèmes. Ces approches offrent l’avantage d’être documentables et prouvables. L’I.A. connexionniste utilise des méthodes basées sur l’observation et l’exploitation de gros volumes de données et sur des méthodes statistiques (machine learning). Les approches connexionnistes sont empiriques et pas forcément démontrables.

En linguistique de corpus, en particulier lorsqu'il s'agit de traiter des données orales, la démarche du chercheur consiste à collecter des données (dans le cas présent, des enregistrements audio et vidéo), à les annoter, c'est-à-dire à apporter des enrichissements tels que la transcription orthographique ou phonétique, puis à analyser ces annotations.

Dans ce projet, elle exerce un rôle de gestionnaire : budget, recrutement, organisation de réunions, etc. Elle est également responsable d’une grande partie des recherches liées au codeur automatique (WP1, WP2, WP3, WP5), chargée de l'intégration dans SPPAS et de la diffusion des résultats.

Núria Gala www lpl

Núria Gala est enseignante-chercheur en sciences du langage à l’Université d’Aix-Marseille (AMU) depuis 2004, habilitée à diriger des recherches en 2015. Elle a été directrice du Service universitaire de français langue étrangère d’Aix Marseille Université (AMU, 2016-2020) et actuellement elle est directrice du département des Sciences du Langage (2021 - 2023) et membre élue du Comité de la Recherche de la faculté Arts Lettres et SHS. Dans ses travaux de recherche, elle s’intéresse aux technologies du langage et aux apports des traitements automatiques dans des domaines liés au lexique (la lexicographie computationnelle, l’apprentissage du vocabulaire et l’aide à la lecture). Depuis 2012, elle étudie la lisibilité et la complexité linguistique et participe à l’élaboration d’outils et de ressources pour la simplification automatique de textes, dans le but de fournir des aides à la lecture et à l’apprentissage du vocabulaire à des enfants en difficulté.

Elle était porteur du projet ANR ALECTOR (ANR-16-CE28-0005).

Carine André Page pro

Carine André (Assistante Ingénieure, CNRS) est la référente du service audiovisuel au LPL (Centre Expérimentale sur la Parole, CEP). Elle soutient les chercheurs dans leurs besoins d’enregistrements de données dans des environnements expérimentaux et écologiques.

Mélanie Lancien Page pro

Mélanie Lancien est enseignante-chercheur en sciences du langage à l’Université de Lorraine.

Partenaires associés

Le projet a été conçu en partenariat avec plusieurs associations, membres du consortium. Leur rôle principal est d’apporter une expertise de terrain, de faciliter le lien avec les publics concernés et de contribuer à l’adéquation des résultats avec les besoins réels.

Association Datha

Datha est une association de parents d'enfants sourds et d'amis de personnes sourdes. Elle apporte une aide technologique en réalisant des outils, des supports adaptés aux enfants sourds, et collabore à des événements contribuant à l’accessibilité des enfants et des adultes sourds. Datha est partenaire de l’ALPC - Association nationale pour la promotion et le développement de la LfPC.

Collaborateur : Académie Internationale Soutenant les Adaptations du « Cued »

L’AISAC - Académie Internationale Soutenant les Adaptations du « Cued », supervise les adaptations du Cued Speech aux langues du monde, étudie et suit l’utilisation du Cued Speech dans le monde entier, etc.

Membres

Maryvonne Zimmermann

Présidente de Datha et administratrice de l'ALPC, parent de deux enfants sourds, ayant exercé la fonction de codeuse LfPC et à l'origine de plusieurs projets autour de la LfPC.

Philippe Gervais

Administrateur de Datha et de l’ALPC.

Daniel Wasilewski

Membre de Datha. Expert en conception/conceptualisation de systèmes.

Michel François

Enseignant d'anglais à l'Éducation nationale (retraité) et parents de deux jeunes sourds. Membre de l’AISAC, administrateur de l'ALPC, auteur de documents de référence sur l'acquisition de la langue anglaise par les jeunes sourds francophones, inventeur d'une méthode d'apprentissage du Cued Speech utilisée pour Happy Cues.

Thomas Shull

Président de l’AISAC, phonéticien, orthophoniste, enseignant.

Collaborations ponctuelles

Des personnes en appui ponctuel – stagiaires ou personnels contractuels – ont rejoint temporairement l’équipe pour mener à bien des tâches ciblées, sous la supervision des chercheuses et chercheurs du LPL.

Florian Lopitaux
  • Stagiaire de deuxième année B.U.T. Informatique, Aix-en-Provence, d'avril 2023 à juin 2023, WP5.
  • Stagiaire de troisième année B.U.T. Informatique, Aix-en-Provence, de février 2024 à juin 2026, WP5.
  • Création d'un module d'ajout d'une main codeuse dans une vidéo, intégré à SPPAS
  • Interface utilisateur
Audric Vachet

Stagiaire de deuxième année B.U.T. Informatique, Aix-en-Provence, d'avril 2023 à juin 2023, WP1. Embauché en CDD en juillet 2023.

  • Adaptation de l'outil de visualisation des annotations de SPPAS : extension des possibilités de visualisation des vidéos et de leur annotation,
  • Annotation des transitions de clés d'une locutrice du corpus CLeLfPC.
Mathias Cazals

Stagiaire de deuxième année B.U.T. Informatique, Aix-en-Provence, d'avril 2023 à juin 2023, WP6.

  • Création du site web du projet
  • Accessibilité du site web du projet, et de sppas.org
Marie Bauer

Stagiaire de licence 3 Sciences du Langage en juillet 2023, supervisée par N. Gala sur le sujet "Annotation et analyse de corpus phonétisés en syllabes en vue de la création de supports en langue française parlée complétée (LfPC)".

Alexandre Rizzante--Madonna

Stagiaire de deuxième année B.U.T. Informatique, Aix-en-Provence, d'avril 2025 à juin 2025, WP5.

Léa Bigi

Embauchée en CDD en août 2023, et en juillet/août 2024.

  • Annotations du corpus CLeLfPC : transcription orthographique (audio), alignement phonétique (audio), clés réalisées (vidéo), moments des changements de positions et moments des changements de formes des clés (vidéo).
  • Annotations des enregistrements destinés aux supports : transcription orthographique (audio)