Facebooks Sci-Fi-plan for å skrive med tankene dine og høre med huden din

Regina Dugan





For et år siden Facebook startet opp et spesielt skunkworks team kalt Bygg 8 å fokusere på å lage futuristiske gadgets, og sa at de hemmelighetsfulle prosjektene ville presse frem selskapets mål om å forbinde verden.

Onsdag på den årlige F8-utviklerkonferansen avslørte selskapet to av de seks prosjektene som er i gang, og de høres mye ut som science fiction.

Facebook sier de håper å bygge en ny type ikke-invasiv hjerne-maskin-grensesnitt – for eksempel en hette eller pannebånd – som lar folk sende tekstmeldinger ved å tenke. En annen har som mål å bygge en bærbar enhet – kanskje et armbånd – som gjør det mulig å høre ord med huden din.



Building 8s leder, Regina Dugan, sier at begge prosjektene har pågått i seks måneder, og at Facebook vil bestemme seg om to år om de er verdt å fortsette. Dugan var tidligere leder av Googles lignende stil Advanced Technology and Projects Group og direktør for Pentagons DARPA-forskningsbyrå.

Tenke-til-tekst-prosjektet ledes av Mark Chevillet , tidligere adjunkt i nevrovitenskap ved Johns Hopkins University.

Chevillet sa at målet over to år er å bygge et ikke-invasivt system som fanger opp talesignaler inne i hjernen og lar folk stille om disse tankene til tekst med en hastighet på 100 ord per minutt.



Vi ønsker bare å kunne få disse signalene rett før du faktisk produserer lyden, slik at du ikke trenger å si det høyt lenger, sa han.

Facebook sier at de samarbeider med Johns Hopkins, University of California, Berkeley og University of California, San Francisco, om prosjektet, som Chevillet sier vil fokusere på å finne en måte å bruke lys, som lysdioder eller lasere, for å føle nevrale signaler som kommer fra hjernebarken.

Metoden vil fungere på en måte som er relatert til hvordan funksjonell nær-infrarød spektroskopi brukes i dag til å måle hjerneaktivitet.



En slik enhet – et pannebånd eller en slags hette – kan være nyttig for mennesker som er så alvorlig lammet at de ikke kan kommunisere. Over tid kan imidlertid hjernegrensesnitt være en måte å tenke en melding på i stedet for å skrive den, eller sende en tekst midt i en samtale, mener Facebook. De kan også være en måte å kommunisere med andre i virtuell eller utvidet virkelighet, som er teknologier som Facebook har presset tungt på.

Chevillet sa at det allerede er noen gode demonstrasjoner av hjerne-datamaskin-grensesnitt, som en nylig studie der tre personer med lammelse var i stand til å bruke sinnet til å velge bokstaver ved hjelp av en markør på skjermen, en av dem skrev på åtte ord i minuttet . I den studien registrerte et hjerneimplantat nevrale signaler. Andre har eksperimentert med å prøve å tolke hvilke lyder folk lager eller tenker på.

Slike taledekodingsprosjekter har involvert kirurgi for å installere et elektronisk implantat i hjernen eller på overflaten. Nå undersøker Facebook-forskerne om det er mulig å finne ut hva noen vil si ved å oppdage signaler utenfor hjernen, og deretter oversette dem til tekst. Å gjøre det nøyaktig, i sanntid, og til den hastigheten Facebook foreslår, ville representert et stort fremskritt i forhold til hva nevrovitenskap har vist er mulig så langt.



Nevrovitenskapsmenn som så på Dugans presentasjon i dag på Facebook-utviklerkonferansen satt igjen med flere spørsmål enn svar. Det var ganske vagt nøyaktig hvordan de skal få direkte nevral aktivitet fra disse optiske teknikkene, det er det store spørsmålet sier Marc Slutzky, en nevrolog og nevroingeniør ved Northwestern University. Hvis de kan vise det, åpner det opp for et helt nytt rike av muligheter, men toppmoderne er ikke i nærheten av det. Det gjenstår å se hvor realistisk det er å få denne svært detaljerte informasjonen ikke-invasivt.

Slutzky sier at hjerneimplantater under hodeskallen så langt kan dekode talelyder folk tenker på å produsere bare med omtrent 40 til 50 prosent nøyaktighet.

Det andre prosjektet, som fokuserer på å gjøre det mulig for folk å gjenkjenne ord med huden, henter inspirasjon fra blindeskrift og Tadoma – en kommunikasjonsmetode der mennesker som er både døve og blinde legger en hånd på ansiktet til en annen person for å føle. vibrasjonene og luften mens den personen snakker.

I et eksperiment bygde forskere en enhet med 16 aktuatorer på og festet den til en ingeniørs arm. En annen ingeniør hadde en nettbrett med ni ord på skjermen; mens han banket på de forskjellige ordene – som grep, svart og kjegle – kjente den første ingeniøren vibrasjoner på armen hennes som samsvarte med ordene og var i stand til å tolke riktig at hun trengte å plukke opp en svart kjegle på bordet foran seg .

For å gjøre dette tar forskerne et talt ord - som svart - og skiller det inn i frekvenskomponentene, og leverer deretter disse frekvensene til aktuatorene på armen, sa Dugan.

I stedet for fra cochlea til hjernen, tar hun [signalet] fra armen til hjernen, la hun til.

Forskerne tenker på dette som en måte å levere språk på huden, i håp om at folk til slutt vil kunne bruke metoden til å skille mellom rundt 100 ord. De kan også bruke nonverbale signaler som trykk og temperatur.

Dugan sa at ideen er å til slutt ha en wearable som sender meldinger du kan føle, uten å måtte ta telefonen ut og for eksempel avbryte en personlig samtale du har med noen.

Selv om ingen av disse prosjektene vil gi en gadget du kan kjøpe, sa Dugan at hun kan forestille seg at det skjer til slutt.

Jeg tror at vi etter to år burde ha en ganske god følelse av om det er mulig å bygge dem inn i forbruksvarer, sa hun.

gjemme seg