Comment Eye Tracking et Head Tracking aident les joueurs handicapés à monter de niveau

Gamers with a variety of disabilities have been competing at the highest level of esports. From blind players like AveugleGuerrierSven aux joueurs ayant des malformations de la main telles que Spear3FW, il existe de nombreux exemples brillants de guerriers numériques qui ont surmonté les barrières physiques et mentales pour percer sur la scène du jeu professionnel. 

Disabled gamers make up a large segment of gamers. Cependant, ils ont dû le faire sans beaucoup de technologie d'assistance à leur disposition en s'adaptant à l'un de leurs plus grands ennemis : le manque de contrôleurs de jeux vidéo pour les joueurs handicapés. 

Limitations and the need for accessible game controllers

Les développeurs de jeux créent des contrôleurs de jeux vidéo et des interfaces informatiques générales principalement pour les utilisateurs non handicapés. Nous avons tous vu à quoi ressemblent les contrôleurs de console typiques. Leurs boutons, coussinets et bâtons sont conçus pour s'adapter au doigt humain moyen. En plus de cela, leur position est optimisée pour la dextérité de la main de la personne moyenne. Malgré cela, les organisations caritatives de jeu et les organisations à but non lucratif comme Tout le monde peut, Vie supplémentaire, Joueurs capables, Effets spéciaux, Fondation de sensibilisation des joueurs, Charité de jeu d'enfant, et Jeux pour le changement fournir des ressources et défendre les joueurs handicapés. L'un de ces défenseurs, Steven Spohn d'Able Gamers, consulte sur les technologies d'assistance comme le Manette adaptative Xbox. Un autre est le studio de jeux indépendant, Soft Leaf Studios, qui a créé Stories of Blossom pour les enfants handicapés. 

A titre d'exemple, lecteur SFV décoré BrolyJambes a surmonté ces problèmes en utilisant sa bouche et son visage pour appuyer sur les boutons de sa manette de jeu Xbox standard. Lui et d'autres joueurs handicapés ont détruit de manière créative les murs qui les empêchaient de profiter des jeux vidéo par pure volonté. Ces joueurs, cependant, sont l'exception et non la règle.

En 2008, plus de 20,51 TP1T de joueurs occasionnels avaient un handicap. Nous pouvons seulement imaginer que leur nombre n'a fait que croître. En même temps, si l'on tient compte du fait qu'environ 60% de ménages ont au moins une partie et que près d'un quart de la population est confrontée à des défis physiques qui l'empêchent de jouer, nous ne pouvons qu'imaginer combien de futurs joueurs n'ont pas franchi le pas.

Il est clair qu'il y a un besoin croissant de méthodes de contrôle de jeu accessibles, comme nous le lisons sur le Subreddit pour les joueurs handicapés. Though we are biased as providers of a head and eye-tracking solution, we believe the answer lies in eye tracking and head tracking technology. 

Eye tracking and head tracking applications in gaming

In a nutshell, eye tracking and head tracking involve using camera tech to translate the position of your eyes or head into digital commands. As such, these tracking signals can also be mapped to video game control schemes.

There’s nothing new about this concept. For general interfacing with machines and computers, a host of tracking technology has empowered disabled users. The most famous example was Stephen Hawking, whose Intel-developed cheek tracker allowed him to communicate using text-to-speech. Développements en eye-tracking améliorer davantage la vie des personnes atteintes de SLA, comme le professeur Hawking. 

Cependant, jouer n'est pas comme utiliser un PC pour les tâches quotidiennes. Le plus souvent, il faut une précision extrême et des réactions rapides pour jouer avec un certain degré de succès dans course sim, tireurs à la première personne et autres jeu PC genres.

Recent developments thanks to disabled rights advocates, though, have made head tracking fast enough for use in gaming. Grâce à une conception intelligente et à une meilleure technologie de caméra, comme TrueDepth de l'iPhone, utiliser votre tête pour exécuter des entrées de jeu est désormais une option viable avec des applications comme Eyeware Beam ou le matériel dédié de TrackIR et Tobii.

Pour les joueurs ayant des défis physiques moins graves, le suivi oculaire peut aider à se concentrer sur l'écran. Actuellement, les streamers et les créateurs de contenu utilisent des eye trackers pour améliorer l'expérience de visionnage pour leurs utilisateurs en leur montrant une bulle à l'écran. Ce même système peut permettre aux joueurs qui ont des difficultés de concentration ou qui ont des déficiences visuelles spécifiques de mieux comprendre où ils regardent.

Le suivi de la tête a déjà des applications d'interface de jeu dans le monde réel. Plus précisément, les joueurs qui aiment les expériences de simulation, comme Microsoft Flight Simulator, utilisent déjà trackers de tête comme contrôle de la caméra méthode.

This is a game-changer for disabled gamers who lack some ambidexterity. Couple head tracking with some recent developments with accessible game controllers, and many people with disabilities will be able to play games with complex controls.

These are not the only examples of assistive technology. Voice assistants and IoT devices like the CronusMAX cross-compatibility gaming adapter help disabled gamers too. As the coronavirus epidemic changes how many people work and what the gaming room looks like, the upside of this epidemic is more augmentative and alternative communication (AAC) devices and software being developed faster and with a greater sense of importance.

Enfin, une combinaison de suivi de la tête et des yeux peut ouvrir des genres spécifiques aux joueurs ayant une motricité réduite. Les jeux qui entrent dans les catégories stratégie globale, construction de ville et stratégie en temps réel sont d'excellents exemples de jeux qui nécessitent l'utilisation appropriée de dispositifs de pointage. Une solution logique, à première vue, est la souris trackball. 

Le problème, cependant, est qu'il est conçu avec les tâches quotidiennes à l'esprit. Essayer de se déplacer d'un côté d'une grande carte à l'autre avec précision devient fastidieux. Le suivi de la tête nous donne accès à nos mouvements de tête, ce qui rend nos actions plus rapides, naturelles et sans effort. Combiner le suivi de la tête pour le défilement avec le suivi des yeux pour la sélection et la précision semble être le pas en avant le plus logique.

Cutting edge tracking minus the costs

Vous pensez probablement qu'une telle technologie coûte une fortune car elle nécessite une caméra et du matériel propriétaires. Les trackers oculaires et crâniens existent à ce titre, mais ils ne sont pas la seule option. Comme mentionné précédemment, certains des derniers smartphones ont intégré une technologie dans leurs appareils photo pour analyser la profondeur avec plus de précision que jamais. De telles avancées ont ouvert des applications qui transforment votre téléphone en un dispositif de suivi des yeux et de la tête peu coûteux.

Bien que toutes les applications de la section précédente ne soient pas prêtes à l'emploi dans de telles applications, les développeurs peuvent accéder à un API de suivi de la tête et des yeux à construire leur logiciel de suivi de la tête et des yeux pour les jeux, les simulateurs et les dispositifs de communication augmentée et alternative (AAC) pour résoudre des problèmes qui n'ont pas encore de solution. 

Grâce à cette approche collaborative et ouverte, les studios et les développeurs peuvent aider à ouvrir les portes du jeu à de nombreux joueurs handicapés physiques et mentaux. Alors que les institutions et les équipes continuent de rechercher à la fois le suivi des yeux et le suivi de la tête dans divers contextes, les résultats de tels projets peuvent également fournir plus de renseignements sur la façon dont la technologie peut devenir plus viable pour les joueurs handicapés.

En plus de rendre les jeux plus accessibles en termes de contrôles, une application de suivi des yeux ou de la tête comme Eyeware Beam fait les deux, plaçant la technologie à la portée de plus de personnes. le app transforme votre iPhone ou iPad avec sa caméra TrueDepth intégrée en un outil de suivi de la tête et des yeux fiable, précis et polyvalent. le L'application fonctionne comme source d'entrée pour plus de 200 jeux PC, permettant une gamme complète de mouvements de la tête dans le jeu pour ajouter de la profondeur au jeu avec des commandes de mouvement de la tête réactives et intuitives qui profitent à de nombreux joueurs handicapés.

La technologie est tout un exploit car il faut la technologie TrueDepth d'Apple pour produire une carte de profondeur de votre visage en projetant 30 000 points infrarouges enregistrés et traités par le moteur neuronal de la puce du smartphone. Eyeware Beam utilise cette technologie pour générer une pose précise de la tête et un signal de suivi oculaire comparable aux appareils propriétaires coûteux de Tobii ou TrackIR.

Eye tracking made accessible

In addition to the head tracking, the app also provides accurate eye-tracking so that gamers can live stream their online arena, MOBA, and any other gaming content with a precise eye tracking overlay on Twitch, Youtube, or Facebook to share wherever the gamer is looking at with their audience in real-time. SL'installation de votre smartphone devenu tracker est un processus sans effort.

Sans aucun matériel encombrant ou supplémentaire, la seule préoccupation que vous avez est de soutenir votre téléphone. Après cela, un processus d'étalonnage fluide vous aidera à configurer votre tracker et vous serez prêt à commencer à jouer avec les meilleurs d'entre eux dans Star Citizen, Digital Combat Simulator (DCS World) et Star Wars : Squadrons.

Le jeu est la plus grande industrie du divertissement de la planète. Une conséquence naturelle de cette omniprésence est que des personnes de tous horizons font du jeu une culture et un mode de vie, quel que soit leur âge ou leur origine. 

The bottom line is that video games are an art and a hobby that everyone should enjoy. But it is also a growing lifestyle that needs to grow more inclusive of everyone from disabled American veterans to your average gamer. Advanced tech like eye tracking and head tracking offers robust solutions to help close the gap for people with disabilities who still have to find complex workarounds to participate. Gaming does not need to be as much of a challenge or outside the realm of possibility for the disabled.