Hur Eye Tracking och Head Tracking hjälper funktionshindrade spelare att komma upp i nivå

Spelare med olika funktionshinder har tävlat på den högsta nivån av e-sport. Från blinda spelare som BlindWarriorSven till spelare med handdeformiteter som t.ex Spear3FW, det finns många lysande exempel på digitala krigare som har övervunnit fysiska och mentala hinder för att ta sig ut i proffsspelscenen. 

Funktionshindrade spelare utgör ett stort segment av spelare. Men de har varit tvungna att göra det utan mycket hjälpmedel tillgänglig för dem genom att anpassa sig till en av sina största fiender: bristen på spelkontroller för funktionshindrade spelare. 

Begränsningar och behovet av tillgängliga spelkontroller

Spelutvecklare skapar videospelskontroller och allmänna datorgränssnitt främst för icke-handikappade användare. Vi har alla sett hur typiska konsolkontroller ser ut. Deras knappar, kuddar och pinnar är designade för att passa det genomsnittliga mänskliga fingret. Utöver det är deras position optimerad för den genomsnittliga personens handskicklighet. Trots detta gillar välgörenhetsorganisationer och ideella organisationer Alla kan, Extra liv, Kunniga spelare, Special effekt, Gamers Outreach Foundation, Barnlek Välgörenhet, och Spel för förändring tillhandahålla resurser och förespråka funktionshindrade spelare. En sådan förespråkare, Steven Spohn från Able Gamers, konsulterar om hjälpteknologi som Xbox Adaptive Controller. En annan är Indie-spelstudion, Soft Leaf Studios, som gjorde Stories of Blossom för barn med funktionshinder. 

Som exempel dekorerad SFV-spelare BrolyLegs har övervunnit dessa problem genom att använda munnen och ansiktet för att trycka på knapparna på sin vanliga Xbox-gamepad. Han och andra funktionshindrade spelare har på ett kreativt sätt rivit ner väggarna som hindrat dem från att njuta av tv-spel av ren vilja. Dessa spelare är dock undantaget och inte regeln.

Redan 2008 hade över 20,5% av casual gamers ett funktionshinder. Vi kan bara föreställa oss att deras antal bara har ökat. På samma gång, när man räknar med att runt 60% av hushållen har minst ett spel och att nästan en fjärdedel av befolkningen möter fysiska utmaningar som hindrar dem från att spela, vi kan bara föreställa oss hur många blivande spelare som inte har tagit steget.

Det är tydligt att det finns ett växande behov av tillgängliga spelkontrollmetoder, som vi läser om Funktionshindrade spelare subreddit. Även om vi är partiska som leverantörer av en head and eye-tracking-lösning, tror vi att svaret ligger i eye tracking och huvudspårningsteknik. 

Ögonspårning och huvudspårningsapplikationer inom spel

I ett nötskal innebär eyetracking och head tracking att använda kamerateknik för att översätta ögonens eller huvudets position till digitala kommandon. Som sådana kan dessa spårningssignaler också mappas till kontrollscheman för videospel.

Det är inget nytt med detta koncept. För allmänt gränssnitt med maskiner och datorer har en mängd spårningsteknik bemyndigat funktionshindrade användare. Det mest kända exemplet var Stephen Hawking, vars Intel-utvecklade kindspårare tillät honom att kommunicera med text-till-tal. Utveckling inom eyetracking ytterligare förbättra livet för individer med ALS, som professor Hawking. 

Spel är dock inte som att använda en dator för dagliga uppgifter. Oftare än inte kräver det precision och snabba reaktioner för att spela till någon grad av framgång sim racing, förstapersonsskjutare och annat PC-spel genrer.

Den senaste utvecklingen tack vare funktionshindrade rättighetsförespråkare har dock gjort head tracking snabb nog för användning i spel. Genom smart design och bättre kamerateknik, som iPhones TrueDepth, att använda huvudet för att utföra spelingångar är nu ett gångbart alternativ med appar som Eyeware Beam eller dedikerad hårdvara från TrackIR och Tobii.

För spelare med mindre svåra fysiska utmaningar kan eyetracking hjälpa till att stödja deras fokus på skärmen. För närvarande använder streamers och innehållsskapare eyetrackers för att förbättra tittarupplevelsen för sina användare genom att visa dem en bubbla på skärmen. Samma system kan tillåta spelare som kämpar med fokus eller har specifika synnedsättningar att bättre förstå var de letar.

Head tracking har redan verkliga spelgränssnittsapplikationer. Specifikt, spelare som gillar simuleringsupplevelser, som Microsoft Flight Simulator, använder redan head trackers som kamerakontroll metod.

Detta är en spelväxlare för funktionshindrade spelare som saknar en viss ambidexterity. Koppla huvudspårning med några senaste utvecklingar med tillgängliga spelkontroller, och många personer med funktionshinder kommer att kunna spela spel med komplexa kontroller.

Detta är inte de enda exemplen på hjälpmedel. Röstassistenter och IoT-enheter som CronusMAX-speladaptern för korskompatibilitet hjälper också funktionshindrade spelare. Eftersom coronaepidemin förändrar hur många människor som arbetar och hur spelrummet ser ut, är fördelen med denna epidemi mer förstärkande och alternativa kommunikationsenheter (AAC) och mjukvara som utvecklas snabbare och med en större känsla av betydelse.

Som en sista idé kan en kombination av huvud- och ögonspårning öppna upp specifika genrer för spelare med nedsatt motorik. Spel som faller inom kategorierna storslagen strategi, stadsbyggnad och realtidsstrategi är utmärkta exempel på spel som kräver korrekt användning av pekdon. En logisk lösning, vid första anblicken, är trackball-musen. 

Problemet är dock att det är utformat med dagliga uppgifter i åtanke. Att försöka flytta från ena sidan av en stor karta till den andra med precision blir besvärligt. Head tracking ger oss tillgång till våra huvudrörelser, vilket gör våra handlingar snabbare, naturliga och utan ansträngning. Att kombinera head tracking för rullning med eye tracking för val och noggrannhet känns som det mer logiska steget framåt.

Banbrytande spårning minus kostnaderna

Du tror förmodligen att sådan teknik kostar en förmögenhet eftersom den kräver en egen kamera och hårdvara. Ögon- och huvudspårare finns i denna egenskap, men de är inte det enda alternativet. Som nämnts tidigare har några av de senaste smartphonesna införlivat teknik i sina kameror för att analysera djup med mer precision än någonsin. Sådana framsteg har öppnat appar som förvandlar din telefon till en billig ögon- och huvudspårningsenhet.

Även om inte alla applikationer i föregående avsnitt är redo att användas i sådana appar direkt, kan utvecklare få tillgång till en head and eye-tracking API till bygga sin huvud- och ögonspårningsaktiverade programvara för spel, simulatorer och AAC-enheter (augmentative and alternative communication) för att lösa problem som ännu inte har några lösningar. 

Genom detta samarbete och öppna tillvägagångssätt kan studior och utvecklare hjälpa till att öppna upp dörrarna till spel för många fysiskt och mentalt utmanade spelare. Eftersom institutioner och team fortsätter att undersöka både eyetracking och head tracking i olika sammanhang, kan resultaten bakom sådana projekt också ge mer insikt i hur tekniken kan bli mer lönsam för funktionshindrade spelare.

Utöver att göra spel mer tillgängligt när det gäller kontroller, gör en eye-tracking- eller head tracking-app som Eyeware Beam båda och placerar tekniken inom räckhåll för fler människor. De app förvandlar din iPhone eller iPad med den inbyggda TrueDepth-kameran till ett pålitligt, exakt, multifunktionellt verktyg för huvud- och ögonspårning. De appen fungerar som ingångskälla för över 200 PC-spel, vilket möjliggör ett komplett utbud av huvudrörelser i spelet för att lägga till djup till spel med lyhörda, intuitiva huvudrörelsekontroller som gynnar många funktionshindrade spelare.

Tekniken är en bra prestation eftersom det krävs Apples TrueDepth-teknik för att producera en djupkarta över ditt ansikte genom att projicera 30 000 infraröda punkter inspelade och bearbetade av smarttelefonchippets neurala motor. Eyeware Beam använder denna teknik för att generera en exakt huvudställning och ögonspårningssignal som är jämförbar med dyra proprietära enheter från Tobii eller TrackIR.

Eye tracking gjort tillgänglig

Förutom head tracking, ger appen också exakt eyetracking så att spelare kan livestreama sin onlinearena, MOBA och allt annat spelinnehåll med en exakt eye tracking-överlägg på Twitch, Youtube eller Facebook för att dela var spelaren än tittar på med sin publik i realtid. SDet är en enkel process att installera din smarttelefon som har blivit spårningsenhet.

Utan någon skrymmande eller tillagd hårdvara är den enda oro du har att stötta upp din telefon. Efter det kommer en smidig kalibreringsprocess att hjälpa dig att ställa in din tracker, och du är redo att börja spela med de bästa av dem i Star Citizen, Digital Combat Simulator (DCS World) och Star Wars: Squadrons.

Spel är den största underhållningsindustrin på planeten. En naturlig konsekvens av denna utbredd är att människor från alla samhällsskikt förvandlar spel till en kultur och livsstil oavsett ålder eller bakgrund. 

Summan av kardemumman är att tv-spel är en konst och en hobby som alla borde njuta av. Men det är också en växande livsstil som måste växa mer inklusive alla från handikappade amerikanska veteraner till din genomsnittliga spelare. Avancerad teknik som eyetracking och head tracking erbjuder robusta lösningar för att minska klyftan för personer med funktionshinder som fortfarande måste hitta komplexa lösningar för att delta. Spel behöver inte vara lika mycket av en utmaning eller utanför möjligheterna för funktionshindrade.