Styr din smartphone med dina ögon

I ett försök att göra eyetracking billig, kompakt och tillräckligt noggrann för att inkluderas i smartphones, crowdsourcar en grupp forskare insamlingen av blickinformation och använder den för att lära mobilprogramvara hur man tar reda på var du letar i realtid .





Forskare vid MIT, University of Georgia och Tysklands Max Planck Institute for Informatics arbetar med projektet och de säger att de hittills har kunnat träna mjukvara för att identifiera var en person tittar med en noggrannhet på ungefär en centimeter på en mobiltelefon och 1,7 centimeter på en surfplatta.

Detta är inte så exakt, särskilt om du tar hänsyn till den totala storleken på din smartphoneskärm. Det är fortfarande inte exakt nog att använda för konsumenttillämpningar, säger Aditya Khosla, doktorand vid MIT och medförfattare till en papper på arbetet som presenterades vid en datorvision konferens Denna vecka.

För att hjälpa dem att göra ögonspårningsprogram som körs på din smartphone skapade forskare först en app som samlar in användarnas blickdata.



Men han tror att systemets noggrannhet kommer att förbättras med mer data. Om det gör det kan det göra eyetracking mycket mer utbrett och användbart; vanligtvis har det varit dyrt och har krävt hårdvara som har gjort det svårt att lägga till kapaciteten till prylar som telefoner och surfplattor. Och tekniken kan vara till hjälp som ett sätt att låta dig spela spel eller navigera i din smartphone utan att behöva trycka eller svepa.

Forskarna började med att bygga en iPhone-app som heter GazeCapture som samlade in data om hur människor ser på sina telefoner i olika miljöer utanför gränserna för ett labb. Användarnas blick registrerades med telefonens främre kamera när de visades pulserande prickar på en smartphoneskärm. För att vara säker på att de var uppmärksamma visades de sedan en prick med ett L eller R inuti, och de var tvungna att trycka på vänster eller åka sidan av skärmen som svar.

GazeCapture-information användes sedan för att träna programvara som heter iTracker, som även kan köras på en iPhone. Handenhetens kamera fångar ditt ansikte och programvaran tar hänsyn till faktorer som huvudets och ögonens position och riktning för att ta reda på var din blick är fokuserad på skärmen.



Omkring 1 500 personer har hittills använt GazeCapture-appen, säger Khosla, och han tror att om forskarna kan få data från 10 000 personer kommer de att kunna minska iTrackers felfrekvens till en halv centimeter, vilket borde vara tillräckligt bra för en räckvidd av eye-tracking-applikationer.

Khosla hoppas att det kan användas för medicinska diagnoser i synnerhet; vissa studier har övervägt hur ögonrörelser kan användas för att diagnostisera tillstånd inklusive hjärnskakning.

Andrew Duchowski , en professor vid Clemson University som studerar ögonspårning, tror att iTracker kan vara oerhört användbart om forskarna kan få det att fungera bra på mobila enheter, även om han varnar för att det också kommer att behöva fungera snabbt och inte förbruka för mycket batteritid.



Han tror inte att det är möjligt att få noggrannhet på pixelnivå från det, men han säger att det fortfarande kan vara ganska bra.

Dölj