Vous ne savez ni lire ni écrire, mais vous continuez à envoyer des e-mails et à discuter ? Le système Picto traduit le texte en pictogrammes et vice versa afin que les personnes handicapées mentales puissent participer activement à la société numérique.
Envoyez un e-mail à votre collègue, surfez sur le site de votre journal préféré, tweetez sur le voisin canari et envoyez rapidement une application à votre meilleur ami. Le texte et les médias numériques sont inextricablement liés. Pourtant, on estime qu'il y a entre deux et cinq millions de personnes en Europe pour qui la communication numérique serait plus facile si ce n'était pas par du texte, mais par des pictogrammes. Nous avons développé pour eux Picto, un système intelligent de traduction automatique de texte écrit en pictogrammes et inversement.
Pour de nombreuses personnes handicapées mentales, l'utilisation de tels pictogrammes est déjà un fait quotidien. Sclera et Beta sont deux exemples d'ensembles de pictogrammes qui sont activement utilisés dans les écoles flamandes, les centres de jour et les ateliers protégés pour améliorer la communication entre les personnes handicapées mentales et leur environnement. Grâce aux milliers de pictogrammes, ils peuvent facilement échanger des idées sur les sujets les plus divers, des besoins de base, des activités et des sentiments aux ustensiles de cuisine, aux personnages de contes de fées et aux animaux préférés.
De nombreuses personnes handicapées mentales se sont senties exclues de la société numérique, car le texte écrit est souvent trop difficile pour elles.
Scleras et Betas sont un outil indispensable pour la communication hors ligne, mais jusqu'à récemment, le manque d'icônes dans les environnements en ligne était encore un problème majeur. De nombreuses personnes handicapées mentales se sont senties exclues de la société numérique, car le texte écrit est souvent trop difficile pour elles. Avec des réactions telles que "Moi aussi je veux être sur Facebook", "Je veux pouvoir écrire quelque chose avec la photo de ma soeur", "Je veux savoir quand Sam Gooris se produira à nouveau" et "Je veux pouvoir potiner à propos de mon superviseur " a souligné. notre groupe cible le besoin d'un système de lecture et d'écriture utilisable pour les environnements numériques. Nous avons appelé ce système Picto, une technologie de traduction qui fonctionne dans deux directions :Text2Picto et Picto2Text.
« Aha ! Pourquoi Marc porte-t-il des vêtements fous ? ». Nous visitons un centre de jour et une de nos cobayes s'occupe de l'application Facebook sur sa tablette. Du doigt, elle sélectionne le titre de la photo et une série d'icônes apparaît sur son écran. « Oh, il est à une fête. Pour Halloween !", s'exclame-t-elle.
Text2Picto traduit le texte écrit en icônes Sclera ou Beta pour les personnes qui ne savent pas (bien) lire. Le texte est d'abord analysé en profondeur à l'aide d'un certain nombre de technologies de base, telles que la partie automatique de la reconnaissance vocale. Ceci est important, car le système fait une distinction, par exemple, entre le nom 'bij' et la préposition 'abeille'. Et lorsque l'utilisateur traduit une phrase comme "je suis à la boulangerie" en icônes, on préférera bien sûr ne pas que Text2Picto crache l'image d'un insecte bourdonnant.
Si aucune icône n'a été trouvée pour un terme spécifique peut être utilisé, le système recherchera un concept similaire. Un 'saumon' devient un 'poisson', un 'cappuccino' devient un 'café' et 'guéri' devient 'pas malade'.
Au cours des dernières années, nous avons travaillé sur de nombreuses améliorations pour Text2Picto. Notre correcteur orthographique, par exemple, tient compte du fait que de nombreuses personnes handicapées mentales utilisent une orthographe phonétique, comme le mot « wiekent » au lieu de « week-end ». Et notre module de détermination de la signification des termes ambigus, tels que "feuille" ("plante" ou "papier" ?), signifie que moins d'erreurs sont désormais commises dans le processus de traduction.
« Aimez-vous discuter ? » demandons-nous à l'un de nos cobayes. Elle hoche la tête. "Qu'est-ce que tu racontes? Parlez-vous de ce que vous avez fait aujourd'hui ? Elle hoche à nouveau la tête. « Sortez-vous parfois avec des gens ? Oui, ça aussi. « Parlez-vous parfois d'amour ? Elle rougit. Son superviseur intervient :« Je l'aide habituellement avec ses messages. Mais elle n'aime pas communiquer sur des sujets sensibles, par souci d'intimité. Elle préfère raconter ces choses elle-même. Elle peut le faire avec les icônes, par exemple. »
Picto2Text fonctionne dans l'autre sens. Avec Picto2Text, l'utilisateur construit un message sous forme d'icônes, après quoi le message est automatiquement traduit en texte. Par exemple, les personnes qui ne savent pas (bien) écrire peuvent toujours poster elles-mêmes des messages dans des environnements en ligne.
Pour le développement de Picto2Text, nous avons comparé différentes méthodes, y compris un certain nombre d'approches qui ressemblent fortement au techniques de traduction de Google Translate. De plus, nous avons été mis au défi de concevoir une interface d'icônes facile à utiliser et d'introduire le prédicteur d'icônes, un assistant d'écriture qui fournit des suggestions pour compléter le message - un peu comme la barre de recherche de Google Search, mais avec des icônes.
Aujourd'hui, la technologie Picto est activement utilisée dans WAI-NOT, un site Web accessible aux jeunes qui ont besoin d'un soutien supplémentaire, par exemple grâce à l'utilisation d'un langage simple, de la technologie de synthèse vocale, de jeux éducatifs et de boîtes de discussion modérées. Chaque jour, des dizaines à des centaines d'e-mails sont envoyés avec Picto. Nous avons également développé des versions anglaise et espagnole du système dans le cadre d'Able to Include, un projet européen sur l'inclusion sociale.
Nous ciblons désormais un deuxième groupe cible :les immigrés de la périphérie flamande autour de Bruxelles qui ne ne parle pas (encore) le néerlandais. Des livrets de pictogrammes papier étaient déjà en circulation pour ces utilisateurs, mais comme l'utilisation de ces livrets était souvent vécue comme « ostensible » et « gênante », le passage à une variante technologique s'est avéré nécessaire. Pictorand, une application pour ordinateurs et smartphones, est née.
Le développement de Picto ne va certainement pas s'arrêter dans les années à venir. Nous sommes toujours à la recherche de meilleures solutions, de différents groupes cibles et de nouvelles applications. Parce qu'il y a assez d'espace pour tout le monde sur Internet.
Photo ci-dessus : Des dizaines d'utilisateurs finaux à Dudley et à Madrid nous ont fourni des commentaires hebdomadaires détaillés sur leurs expériences avec les versions anglaise et espagnole de Picto.
