Comment Eye Tracking et Head Tracking aident les joueurs handicapés à monter de niveau

Les joueurs souffrant de divers handicaps ont concouru au plus haut niveau de l'esport. De joueurs aveugles comme AveugleGuerrierSven aux joueurs ayant des malformations de la main telles que Spear3FW, il existe de nombreux exemples brillants de guerriers numériques qui ont surmonté les barrières physiques et mentales pour percer sur la scène du jeu professionnel. 

Les joueurs handicapés constituent un large segment de joueurs. Cependant, ils ont dû le faire sans beaucoup de technologie d'assistance à leur disposition en s'adaptant à l'un de leurs plus grands ennemis : le manque de contrôleurs de jeux vidéo pour les joueurs handicapés. 

Limitations et nécessité de contrôleurs de jeu accessibles

Les développeurs de jeux créent des contrôleurs de jeux vidéo et des interfaces informatiques générales principalement pour les utilisateurs non handicapés. Nous avons tous vu à quoi ressemblent les contrôleurs de console typiques. Leurs boutons, coussinets et bâtons sont conçus pour s'adapter au doigt humain moyen. En plus de cela, leur position est optimisée pour la dextérité de la main de la personne moyenne. Malgré cela, les organisations caritatives de jeu et les organisations à but non lucratif comme Tout le monde peut, Vie supplémentaire, Joueurs capables, Effets spéciaux, Fondation de sensibilisation des joueurs, Charité de jeu d'enfant, et Jeux pour le changement fournir des ressources et défendre les joueurs handicapés. L'un de ces défenseurs, Steven Spohn d'Able Gamers, consulte sur les technologies d'assistance comme le Manette adaptative Xbox. Un autre est le studio de jeux indépendant, Soft Leaf Studios, qui a créé Stories of Blossom pour les enfants handicapés. 

A titre d'exemple, lecteur SFV décoré BrolyJambes a surmonté ces problèmes en utilisant sa bouche et son visage pour appuyer sur les boutons de sa manette de jeu Xbox standard. Lui et d'autres joueurs handicapés ont détruit de manière créative les murs qui les empêchaient de profiter des jeux vidéo par pure volonté. Ces joueurs, cependant, sont l'exception et non la règle.

En 2008, plus de 20,51 TP1T de joueurs occasionnels avaient un handicap. Nous pouvons seulement imaginer que leur nombre n'a fait que croître. En même temps, si l'on tient compte du fait qu'environ 60% de ménages ont au moins une partie et que près d'un quart de la population est confrontée à des défis physiques qui l'empêchent de jouer, nous ne pouvons qu'imaginer combien de futurs joueurs n'ont pas franchi le pas.

Il est clair qu'il y a un besoin croissant de méthodes de contrôle de jeu accessibles, comme nous le lisons sur le Subreddit pour les joueurs handicapés. Bien que nous soyons biaisés en tant que fournisseurs d'une solution de suivi de la tête et des yeux, nous pensons que la réponse réside dans le suivi des yeux et technologie de suivi de la tête. 

Applications de suivi des yeux et de suivi de la tête dans les jeux

En un mot, le suivi des yeux et le suivi de la tête impliquent l'utilisation de la technologie de la caméra pour traduire la position de vos yeux ou de votre tête en commandes numériques. En tant que tels, ces signaux de suivi peuvent également être mappés sur des schémas de contrôle de jeux vidéo.

Il n'y a rien de nouveau dans ce concept. Pour l'interfaçage général avec les machines et les ordinateurs, une multitude de technologies de suivi ont permis aux utilisateurs handicapés. L'exemple le plus célèbre était Stephen Hawking, dont le tracker de joue développé par Intel lui permettait de communiquer par synthèse vocale. Développements en eye-tracking améliorer davantage la vie des personnes atteintes de SLA, comme le professeur Hawking. 

Cependant, jouer n'est pas comme utiliser un PC pour les tâches quotidiennes. Le plus souvent, il faut une précision extrême et des réactions rapides pour jouer avec un certain degré de succès dans course sim, tireurs à la première personne et autres jeu PC genres.

Les développements récents grâce aux défenseurs des droits des personnes handicapées ont cependant rendu le suivi de la tête suffisamment rapide pour être utilisé dans les jeux. Grâce à une conception intelligente et à une meilleure technologie de caméra, comme TrueDepth de l'iPhone, utiliser votre tête pour exécuter des entrées de jeu est désormais une option viable avec des applications comme Eyeware Beam ou le matériel dédié de TrackIR et Tobii.

Pour les joueurs ayant des défis physiques moins graves, le suivi oculaire peut aider à se concentrer sur l'écran. Actuellement, les streamers et les créateurs de contenu utilisent des eye trackers pour améliorer l'expérience de visionnage pour leurs utilisateurs en leur montrant une bulle à l'écran. Ce même système peut permettre aux joueurs qui ont des difficultés de concentration ou qui ont des déficiences visuelles spécifiques de mieux comprendre où ils regardent.

Le suivi de la tête a déjà des applications d'interface de jeu dans le monde réel. Plus précisément, les joueurs qui aiment les expériences de simulation, comme Microsoft Flight Simulator, utilisent déjà trackers de tête comme contrôle de la caméra méthode.

Cela change la donne pour les joueurs handicapés qui manquent d'ambidextrie. Associez le suivi de la tête à certains développements récents avec des contrôleurs de jeu accessibles, et de nombreuses personnes handicapées pourront jouer à des jeux avec des commandes complexes.

Ce ne sont pas les seuls exemples de technologie d'assistance. Les assistants vocaux et les appareils IoT comme l'adaptateur de jeu à compatibilité croisée CronusMAX aident également les joueurs handicapés. Alors que l'épidémie de coronavirus change le nombre de personnes qui travaillent et à quoi ressemble la salle de jeux, l'avantage de cette épidémie est que des appareils et des logiciels de communication améliorée et alternative (AAC) sont développés plus rapidement et avec un plus grand sens de l'importance.

Enfin, une combinaison de suivi de la tête et des yeux peut ouvrir des genres spécifiques aux joueurs ayant une motricité réduite. Les jeux qui entrent dans les catégories stratégie globale, construction de ville et stratégie en temps réel sont d'excellents exemples de jeux qui nécessitent l'utilisation appropriée de dispositifs de pointage. Une solution logique, à première vue, est la souris trackball. 

Le problème, cependant, est qu'il est conçu avec les tâches quotidiennes à l'esprit. Essayer de se déplacer d'un côté d'une grande carte à l'autre avec précision devient fastidieux. Le suivi de la tête nous donne accès à nos mouvements de tête, ce qui rend nos actions plus rapides, naturelles et sans effort. Combiner le suivi de la tête pour le défilement avec le suivi des yeux pour la sélection et la précision semble être le pas en avant le plus logique.

Suivi de pointe moins les coûts

Vous pensez probablement qu'une telle technologie coûte une fortune car elle nécessite une caméra et du matériel propriétaires. Les trackers oculaires et crâniens existent à ce titre, mais ils ne sont pas la seule option. Comme mentionné précédemment, certains des derniers smartphones ont intégré une technologie dans leurs appareils photo pour analyser la profondeur avec plus de précision que jamais. De telles avancées ont ouvert des applications qui transforment votre téléphone en un dispositif de suivi des yeux et de la tête peu coûteux.

Bien que toutes les applications de la section précédente ne soient pas prêtes à l'emploi dans de telles applications, les développeurs peuvent accéder à un API de suivi de la tête et des yeux à construire leur logiciel de suivi de la tête et des yeux pour les jeux, les simulateurs et les dispositifs de communication augmentée et alternative (AAC) pour résoudre des problèmes qui n'ont pas encore de solution. 

Grâce à cette approche collaborative et ouverte, les studios et les développeurs peuvent aider à ouvrir les portes du jeu à de nombreux joueurs handicapés physiques et mentaux. Alors que les institutions et les équipes continuent de rechercher à la fois le suivi des yeux et le suivi de la tête dans divers contextes, les résultats de tels projets peuvent également fournir plus de renseignements sur la façon dont la technologie peut devenir plus viable pour les joueurs handicapés.

En plus de rendre les jeux plus accessibles en termes de contrôles, une application de suivi des yeux ou de la tête comme Eyeware Beam fait les deux, plaçant la technologie à la portée de plus de personnes. le application transforme votre iPhone ou iPad avec sa caméra TrueDepth intégrée en un outil de suivi de la tête et des yeux fiable, précis et polyvalent. le L'application fonctionne comme source d'entrée pour plus de 200 jeux PC, permettant une gamme complète de mouvements de la tête dans le jeu pour ajouter de la profondeur au jeu avec des commandes de mouvement de la tête réactives et intuitives qui profitent à de nombreux joueurs handicapés.

La technologie est tout un exploit car il faut la technologie TrueDepth d'Apple pour produire une carte de profondeur de votre visage en projetant 30 000 points infrarouges enregistrés et traités par le moteur neuronal de la puce du smartphone. Eyeware Beam utilise cette technologie pour générer une pose précise de la tête et un signal de suivi oculaire comparable aux appareils propriétaires coûteux de Tobii ou TrackIR.

Eye tracking rendu accessible

En plus du suivi de la tête, l'application fournit également un suivi oculaire précis afin que les joueurs puissent diffuser en direct leur arène en ligne, MOBA et tout autre contenu de jeu avec une précision. superposition de suivi des yeux sur Twitch, Youtube ou Facebook pour partager partout où le joueur regarde avec son public en temps réel. SL'installation de votre smartphone devenu tracker est un processus sans effort.

Sans aucun matériel encombrant ou supplémentaire, la seule préoccupation que vous avez est de soutenir votre téléphone. Après cela, un processus d'étalonnage fluide vous aidera à configurer votre tracker et vous serez prêt à commencer à jouer avec les meilleurs d'entre eux dans Star Citizen, Digital Combat Simulator (DCS World) et Star Wars : Squadrons.

Le jeu est la plus grande industrie du divertissement de la planète. Une conséquence naturelle de cette omniprésence est que des personnes de tous horizons font du jeu une culture et un mode de vie, quel que soit leur âge ou leur origine. 

L'essentiel est que les jeux vidéo sont un art et un passe-temps que tout le monde devrait apprécier. Mais c'est aussi un mode de vie croissant qui doit devenir plus inclusif pour tout le monde, des vétérans américains handicapés au joueur moyen. Les technologies avancées telles que le suivi des yeux et le suivi de la tête offrent des solutions robustes pour aider à combler l'écart pour les personnes handicapées qui doivent encore trouver des solutions de contournement complexes pour participer. Le jeu n'a pas besoin d'être autant un défi ou en dehors du domaine des possibilités pour les personnes handicapées.