211service.com
Denne appen lar deg kontrollere telefonen ved hjelp av ekkolodd
Mens jeg slår hånden min til venstre og høyre, beveger en rakett i Space Invaders-stil seg over skjermen på iPhonen min. Men fingrene mine er minst seks tommer fra håndsettet, fordi jeg faktisk kontrollerer spillet via ekkolodd, som genereres av telefonens originale maskinvare.
Dette er muliggjort av programvare bygget av Wei Wang og Alex X. Liu fra Institutt for informatikk og teknologi ved Nanjing University i Kina. Den bruker telefonens innebygde høyttalere til å sende ut lyd ved frekvenser mellom 17 og 23 kilohertz – mot den øvre enden av menneskelig hørsel, og så vidt hørbar for yngre ører. Ved å analysere de reflekterte signalene som oppdages av innebygde mikrofoner, er det mulig å måle nærheten til et objekt, for eksempel hånden din, innen fire millimeter.
Å kontrollere en enhet uten å måtte berøre den direkte er ikke en billig gimmick. Det er nyttig overalt hvor det er rot, fra et kjøkken til en operasjonsstue. Forsøk på å lage bevegelseskontroll med lave kostnader for datamaskiner har blitt foreslått tidligere (se Leaping into the Gesture-Control Era ). Men Wang og Liu tror funksjonen deres kan bygges inn billig i en hvilken som helst moderne smarttelefon uten behov for ekstra maskinvare.
Alt som trengs er å vinke med hånden.
Det er ikke første gang en smarttelefon har blitt brukt til å utføre ekkolokalisering. Shyam Gollakota fra University of Washington (an MIT Technology Review Innovator Under 35 i 2014) har for eksempel brukt en lignende tilnærming som en del av sin FingerIO-prosjektet , som undersøkte om det var mulig å lokalisere menneskehender ved å bruke høyfrekvent lyd og maskinvare om bord. Men Gollakota er imponert over arbeidet til Wang og Liu, fordi de kan bruke det til direkte kontroll over telefonen. Det er veldig kult, sier han, at teknikken er implementert for å fungere i sanntid.
Det er litt etterslep i responsen på menneskelige gester. Wang sier at telefonen bruker 15 millisekunder på å oppdage og behandle bevegelse. I praksis er det imidlertid knapt merkbart, og selve kontrollen er imponerende. Først føler du deg tvunget til å bevege hele hånden, men med litt øvelse blir det mulig å oppnå de samme resultatene ved å bevege en enkelt finger.
Appen er for øyeblikket en forskningsprosjekt og ikke tilgjengelig i noen appbutikk. Men paret planlegger å gjøre det om til et API som kan brukes av andre utviklere til å lage ekkolokaliseringssystemet til apper på iPhones og Android-enheter. De regner med at den kan ende opp med å bli brukt til å bla gjennom websider, for eksempel eller bla i en e-bok.
De ligner mye på funksjonene som blir foreslått som en del av Googles Project Soli . Men tilnærmingen som brukes av Google-forskere er å bygge en dedikert radarbrikke som kan legges til en enhet. Selv om det gir mer nøyaktighet enn ekkoloddteknikken, betyr det også å integrere enda en teknologi i en smarttelefon.
Wang påpeker at maskinvareprodusenter i stedet ganske enkelt kan optimalisere plasseringen av mikrofoner og høyttalere rundt eksisterende enheter. De kan til og med øke den øvre frekvensen som enheter sender og mottar lyd for å oppnå submillimeteroppløsninger - maskinvaren vil fortsatt sannsynligvis være billigere enn det som kreves for radar.
I mellomtiden fortsetter Wang og Liu å forbedre programvaren deres i laboratoriet. De håper å utvikle versjoner for smartklokker og VR-headset, der interaksjon med en skjerm er vanskelig eller umulig, samt bygge nye algoritmer for å oppdage individuelle fingre. De hevder allerede at de er i stand til å spore bevegelsen til en hånd nøyaktig nok til å identifisere tegn som skrives med mer enn 90 prosent nøyaktighet.