Une extension Google Slides peut rendre le logiciel de présentation plus obtainable aux utilisateurs aveugles

Les lecteurs d’écran, qui convertissent le texte numérique en son, peuvent rendre les ordinateurs accessibles à de nombreux utilisateurs handicapés, notamment ceux qui sont aveugles, malvoyants ou dyslexiques. Cependant, les logiciels de diaporama, tels que Microsoft PowerPoint et Google Slides, ne sont pas conçus pour rendre cohérents les résultats des lecteurs d’écran.

Ces programmes s’appuient généralement sur l’ordre Z – qui go well with los angeles façon dont les objets sont superposés sur une diapositive – lorsqu’un lecteur d’écran navigue dans le contenu. Étant donné que los angeles disposition en Z ne reflète pas correctement los angeles façon dont une diapositive est positionnée dans l’espace 2D, le logiciel de diaporama peut ne pas être obtainable aux personnes handicapées.

Une équipe dirigée par des chercheurs de l’Université de Washington a créé A11yBoard pour Google Slides, une extension de navigateur et une utility téléphonique qui permet aux utilisateurs aveugles de naviguer dans des présentations de diapositives et du texte complexes. En combinant un ordinateur de bureau et un appareil cell, A11yBoard permet aux utilisateurs de travailler avec los angeles voix, le toucher, les gestes, los angeles reconnaissance vocale et los angeles recherche pour comprendre où se trouvent différents objets sur une diapositive et animer ces objets pour créer des mises en web page riches. Par exemple, un utilisateur peut toucher une zone de texte sur l’écran et un lecteur d’écran décrira sa couleur et sa place. Ensuite, à l’aide d’une commande vocale, l’utilisateur peut réduire cette zone de texte et l’aligner à gauche avec le titre de los angeles diapositive.

L’équipe a présenté ses recherches le 25 octobre à ASSETS 2023 à New York. A11yBoard n’est pas encore obtainable au public.

“Pendant longtemps et encore aujourd’hui, l’accessibilité a souvent été considérée comme : ‘Nous faisons du bon travail si nous permettons aux personnes aveugles d’utiliser des produits modernes.'” “Certainement”, a déclaré l’auteur predominant Jacob O. Woubrock, Professeur UW à l’École d’data. C’est une priorité. ” ” Mais cela ne représente que los angeles moitié de notre objectif, automobile cela signifie uniquement permettre aux aveugles d’utiliser ce que d’autres créent. Nous voulons donner aux gens les moyens de créer leur propre contenu, au-delà d’une diapositive PowerPoint qui n’est qu’un titre et une zone de texte.

A11yBoard pour Google Slides est basé sur une série de recherches menées au Wobbrock Lab explorant los angeles manière dont les utilisateurs aveugles interagissent avec les « tableaux » – des canevas numériques sur lesquels les utilisateurs travaillent avec des objets tels que des zones de texte, des formes, des photographs et des graphiques. Le logiciel de diaporama est basé sur une série de ces plans de travail.

Lorsque l’auteur predominant Zhuohao (Jerry) Zhang, doctorant à l’iSchool de l’Université du Wisconsin, a rejoint le laboratoire de Wobbrock, les deux hommes ont cherché une resolution aux failles d’accessibilité des outils de créativité, tels que les logiciels de diaporama. S’appuyant sur des recherches antérieures du laboratoire de Wobbrock sur les problèmes auxquels les personnes aveugles sont confrontées lors de l’utilisation des plans de travail, Wobbrock et Zhang ont présenté un prototype de l’A11yBoard en avril. Ils ont ensuite travaillé pour créer une resolution pouvant être déployée by way of des logiciels existants et ont opté pour l’extension Google Slides.

Pour l’article actuel, les chercheurs ont travaillé avec le co-auteur Jin S. H. Kim, un étudiant aveugle de Stanford, pour améliorer l’interface. L’équipe l’a testé avec deux autres utilisateurs aveugles, leur demandant de recréer les diapositives. Les deux testeurs ont noté qu’A11yBoard a considérablement amélioré leur capacité à comprendre le contenu visuel et à créer eux-mêmes des diapositives sans itération constante avec les collaborateurs ; Il leur suffisait d’engager un assistant voyant à los angeles fin du processus.

Les testeurs ont également souligné des issues d’amélioration : rester constamment conscient de los angeles place des objets tout en essayant de les modifier était toujours un défi, et les utilisateurs étaient obligés d’effectuer chaque motion individuellement, comme aligner plusieurs groupes visuels de gauche à droite, plutôt que d’effectuer ces movements répétées. sur une base distinctive. Compte tenu du fonctionnement de Google Slides, los angeles model actuelle de l’utility ne permet pas non plus aux utilisateurs d’annuler ou de rétablir les adjustments sur différents appareils.

À terme, les chercheurs prévoient de rendre l’utility obtainable au public. Mais ils prévoient d’abord d’intégrer un grand modèle de langage, tel que GPT, dans le logiciel.

“Cela pourrait potentiellement aider les personnes aveugles à composer des diapositives plus efficacement, en utilisant des commandes en langage naturel telles que” aligner ces cinq carrés en utilisant leur bord gauche “”, a déclaré Zhang. “Même en tant que chercheur en accessibilité, je suis toujours étonné de voir à quel level ils sont inaccessibles. « Des outils communs. Ainsi, avec l’A11yBoard, nous avons décidé de changer cela.