Maskinlæring åpner for nye måter å hjelpe mennesker med nedsatt funksjonsevne

Ariel Davis





FCC-reglene krever at TV-stasjoner gir lukkede bildetekster som formidler tale, lydeffekter og publikumsreaksjoner som latter til døve og tunghørte seere. YouTube er ikke underlagt disse reglene, men takket være Googles maskinlæringsteknologi tilbyr den nå lignende hjelp.

YouTube har brukt tale-til-tekst-programvare for automatisk å tekste tale i videoer siden 2009 (de brukes 15 millioner ganger om dagen). I dag rullet det ut algoritmer som indikerer applaus, latter og musikk i bildetekster. Flere lyder kan følge, siden den underliggende programvaren også kan identifisere lyder som sukk, bjeff og slag.

Selskapet sier at brukertester indikerer at funksjonen forbedrer opplevelsen for døve og tunghørte (og alle som trenger å holde volumet nede) betraktelig. Maskinlæring gir folk som meg som trenger tilrettelegging i noen situasjoner samme uavhengighet som andre, sier Liat Kaver, en produktsjef på YouTube som er døv.



YouTubes prosjekt er faktisk et av en rekke som skaper nye tilgjengelighetsverktøy ved å bygge på fremgang i kraften og gjennomførbarheten til maskinlæring. Databehandlingsindustrien har blitt drevet til å fremme programvare som kan tolke bilder, tekst eller lyd først og fremst ut fra utsiktene til fortjeneste på områder som annonser, søk eller cloud computing. Men programvare med en viss evne til å forstå verden har mange bruksområder.

YouTube beskriver nå automatisk enkelte lyder i tekstingen.

I fjor lanserte Facebook en funksjon som bruker selskapets forskning på bildegjenkjenning til for eksempel å lage tekstbeskrivelser av bilder fra en persons venner.



Forskere ved IBM bruker språkbehandlingsprogramvare utviklet under selskapets Watson-prosjekt for å lage et verktøy kalt Content Clarifier for å hjelpe mennesker med kognitive eller intellektuelle funksjonshemninger som autisme eller demens. Det kan erstatte talemåter som regnende katter og hunder med klarere uttrykk, og trimme eller bryte opp lange setninger med flere ledd og indirekte språk.

University of Massachusetts Medical School hjelper til med å teste hvordan systemet kan hjelpe mennesker med lese- eller kognitive funksjonshemninger. Will Scott, en IBM-forsker som jobbet med prosjektet, sier at selskapet snakker med en organisasjon som hjelper autistiske videregående elever med å gå over til universitetslivet om å teste systemet som en måte å hjelpe folk med å forstå administrative og pedagogiske dokumenter. Datakraften og algoritmene og skytjenester som Watson var ikke tidligere tilgjengelige for å utføre denne typen ting, sier han.

Ineke Schuurman , en forsker ved Universitetet i Leuven i Belgia, sier å finne opp nye typer tilgjengelighetsverktøy er viktig for å forhindre at noen mennesker blir etterlatt ettersom samfunnet stoler mer og mer på kommunikasjon gjennom datamaskiner og mobile enheter.



Hun er en av lederne for en jeg prosjekterer tester sin egen tekstforenklingsprogramvare for personer med utviklingshemming. Teknologien er bygget inn i apper som integreres med Gmail og sosiale nettverk som Facebook. Mennesker med intellektuelle funksjonshemninger, eller andre funksjonshemninger, ønsker å gjøre det vennene deres og søstrene og brødrene deres gjør – bruke smarttelefoner, nettbrett og sosiale nettverk, sier Schuurman.

Facebook opprettet en tjeneste som beskriver bilder ved hjelp av tekst for å hjelpe blinde eller svaksynte.

Austin Lubetkin, som har autismespekterforstyrrelse, har jobbet med Florida nonprofit Kunstnere med autisme å hjelpe andre på spekteret til å bli mer selvstendige. Han hilser forskning som IBMs velkommen, men sier det vil være en utfordring å sikre at slike verktøy fungerer pålitelig. En maskinlæringsalgoritme som anbefaler en film du ikke bryr deg om er én ting; en feil som får deg til å misforstå en venn er en annen.



Likevel er Lubetkin, som jobber ved en oppstart mens han tar en høyskolegrad, optimistisk på at maskinlæring vil åpne opp for mange nye muligheter for funksjonshemmede de neste årene. Han trakk nylig på bildegjenkjenningsteknologi fra oppstart Clarifai til prototype en navigasjonsapp som tilbyr veibeskrivelser i form av landemerker, inspirert av hans egne kamper med å tolke teksten og diagraminformasjonen fra konvensjonelle apper mens han kjører. Ærlig talt kan AI utjevne spillefeltet, sier Lubetkin.

gjemme seg