Ce projet est essentiellement financé par le Secrétariat du Conseil du trésor de Québec via son Appui au passage à la société de l'information avec des financements additionnels via un prix "Google Faculty Research".
Vidéo
Présentation
SAIS est un système mobile indépendant de la vue conçu pour permettre aux utilisateurs non-voyants de mieux appréhender leur environnement. Alors que d'autres systèmes (par ex. le Trekker de Humanware et les outils GPS courants) mettent l'accent sur la navigation d'un endroit précis à un autre, typiquement accomplie par des instructions explicites énoncées au coup par coup, notre but est d'utiliser des sons d'ambiance pour présenter le genre d'informations que des signaux visuels, comme les néons, fournissent aux voyants. Quand un utilisateur relève un point d'intérêt, des détails supplémentaires sont disponibles à la demande. De plus, il peut ajouter ses propres indications audio géomarquées pour informer ceux qui arrivent au même endroit des dangers, des événements ou de toute autre information pertinente.
Notre modèle actuel comporte les modes d'opération suivants :
- Marche : l'utilisateur n'est pas concentré sur le système, mais pendant qu'il marche, il reçoit des signaux subtils sur ce qui l'entoure, notamment les points d'intérêt et de l'aide pour s'orienter.
- Arrêt et Écoute : s'il a entendu quelque chose qui attire son attention, ou cherche un élément spécifique, l'utilisateur peut interagir avec le dispositif pour en apprendre plus sur son environnement. Notre but est de permettre que toutes les opérations soient réalisées avec une seule main, de manière à ce que l'autre main reste libre pour tenir une canne ou un chien-guide.
- Balisage : l'utilisateur peut enregistrer lui-même de nouvelles indications liées à des objets situés à proximité immédiate, par exemple, "c'est un super restaurant" ou "il y a un nid-de-poule dangereux dans le trottoir ici".
- Exploration : une extension du mode Arrêt et Écoute. L'utilisateur peut interroger le système pour avoir des informations sur des zones plus éloignées de sa position actuelle.
L'expérience utilisateur avec SAIS est étroitement liée à l'audio spatialisé, en utilisant de préférence uniquement des écouteurs à conduction osseuse ou ouverts qui n'interfèrent pas avec les sons environnants. Les sons semblent provenir d'endroits autour de l'utilisateur, donnant ainsi une impression de directionnalité et de distance. Ceci permet d'obtenir une scène auditive peu dense et des signaux sonores moins intrusifs. Imaginez la différence entre une voix mécanique indiquant, "Restaurant, 50 mètres, 60 degrés sur votre gauche" et une très courte icone audio de bruits de couverts qui s'entrechoquent, venant de la bonne direction.
Notre prototype actuel utilise une boussole intégrée à l'iPhone, un accéléromètre, un gyroscope et un GPS pour déterminer l'emplacement et l'orientation de l'utilisateur. Les points d'intérêt à proximité sont automatiquement extraits de la base de données SAIS. La scène sonore appropriée est alors restituée en utilisant la bibliothèque logicielle libpd pour exécuter des patchs PureData (PD).
Nos expériences récentes ont porté sur l'évaluation de différentes stratégies de rendu audio, une onde de choc, qui joue de manière continue les sons du plus proche au plus lointain en fonction de l'emplacement de l'utilisateur, et une approche par radar, qui balaie circulairement la zone autour de l'utilisateur comme le ferait un radar, mais émet plus fréquemment les sons proches que les plus lointains.
Echantillons vidéo des deux modes de rendu. Notez que des écouteurs sont nécessaires pour entendre l'audio spatialisé correctement dans les videos de l'expérience.
Onde de choc
|
Expérience Onde de choc
|
Nous avons récemment évalué un ensemble d’icônes audio pour diverses catégories, telles que “restaurant”, “métro”, etc. avec des participants non-voyants. L'objectif est de s'assurer que celles-ci soient facilement reconnaissables mais aussi distinctement spatialisées. Sur la base des résultats de ce test, nous mettons à jour notre application pour la prochaine série d’expériences, qui auront pour but de comparer l’efficacité de la présentation de l’information à l’utilisateur par des icônes audio, des mots, et des niveaux croissants de détail.
Notre application SAIS fonctionne actuellement sur l'iPhone 4 et fournit:
- le mode Arrêt et Écoute, en utilisant un doigt sur l’écran pour explorer les points d’intérêts qui se situent devant la position actuelle de l’utilisateur
- le mode Radar (sans le triple-balayage, mais avec une variation continue de la vitesse de balayage en fonction de la densité de la scène)
- le mode Onde de choc
- un nouveau mode “Marcher droit”, pour aider les utilisateurs à marcher sur une ligne droite
- des gestes pour passer du mode Marcher au mode Arrêt et Écoute et inversement
- le téléchargement automatique de points d’intérêts géographiques pertinents du serveur SAIS alors que l’utilisateur marche vers différents emplacements
- la fusion du gyro/boussole afin d’améliorer la réactivité et la stabilité du maintien de direction quand la boussole est temporairement incapable d'obtenir un cap précis
- la spatialisation des icônes audio et des noms de catégories (par exemple, “bar”, “fast food”, etc.) dans tous les modes
English
Français