Inhoud
Een van de grote thema's van de Google Key I / O 2019 was inclusiviteit. Een nieuwe functie in Android Q is bedoeld om inclusiviteit te verbeteren voor personen die doof en slechthorend zijn door onmiddellijke ondertiteling aan te bieden voor vrijwel elke audio of video die op een telefoon wordt afgespeeld.
Deze functie wordt Live Caption genoemd en maakt gebruik van AI om spraak die wordt afgespeeld op een smartphone te vertalen naar snelle, nauwkeurige ondertitels. Het mooie hiervan is dat de functie met elke app werkt, ongeacht of deze audio of video afspeelt en ongeacht of de inhoud wordt gestreamd vanaf een server, wordt afgespeeld vanuit de lokale opslag of door mensen wordt gegenereerd.
Google Pixel 3a XL review: kom voor de camera, blijf voor de ervaring
Live Caption werkt met podcasts, video's, audio- en videochat-apps zoals Duo. De demo die we zagen op het podium van de Google I / O-keynote leek erg soepel en indrukwekkend, hoewel de resultaten in de echte wereld natuurlijk kunnen variëren.
Live Caption is toegankelijk met één tik - gebruikers kunnen het activeren door op een nieuw pictogram te klikken dat zichtbaar is bij het wijzigen van het systeemvolume. Alles wordt lokaal verwerkt, wat betekent dat u zich geen zorgen hoeft te maken over het luisteren van derden naar uw gesprekken.
Bijschriften worden weergegeven in een zwart venster bovenop de normale interface. De bijschriften worden niet opgeslagen voor later, dus u zult ze alleen zien wanneer de bijbehorende audio wordt afgespeeld.
Live Caption werkt met podcasts, video's, audio- en videochat-apps zoals Duo.
Hoewel dove mensen het meeste kunnen halen uit deze coole nieuwe functie, kan Live Caption nuttig zijn voor veel andere gebruikers, in verschillende situaties. Het werkt zelfs wanneer audio op nul wordt gezet, waardoor gebruikers inhoud kunnen consumeren zonder iemand te storen.
Live Caption is een nieuwe toegankelijkheidsfunctie ingebouwd in Android Q. Je moet het inschakelen vanuit de instellingen voordat je het gebruikt en het is vooralsnog niet duidelijk of de functie door alle OEM's wordt opgenomen in hun Android Q-apparaten.
Live estafette
Hoewel de mogelijkheid om video's op mute te bekijken best cool is, is het ook triviaal in vergelijking met het levensveranderende effect dat live ondertitelingstechnologie voor sommige mensen zou kunnen hebben. Google liet zien hoe Live Caption, in combinatie met de Smart Reply- en Smart Compose-functies die het vorig jaar voor het eerst introduceerde, mensen die niet kunnen praten, kan helpen om gesprekken te voeren. De technologie, genaamd Live Relay, kan spraak omzetten in geschreven tekst waarmee dove gebruikers gemakkelijk kunnen communiceren. Vervolgens wordt het antwoord omgezet in een gesynthetiseerde stem en doorgestuurd naar de persoon aan het einde van de regel.
Project Euphonia
De onderzoekers nemen een stap vooruit en zoeken ook naar manieren om spraakherkenningsmodellen te trainen om niet-standaard toespraken te begrijpen, zoals die van mensen die stotteren, beroertes hebben of andere beperkingen hebben. Het doel op lange termijn is om computers de miljoenen mensen te laten begrijpen die spraakstoornissen hebben of helemaal niet kunnen praten.
Google waarschuwde dat er nog veel werk te doen is in deze zoektocht om technologie voor letterlijk iedereen te laten werken. CEO Sundar Pichai nodigde mensen met spraakstoornissen uit om spraakvoorbeelden bij te dragen waarmee het bedrijf meer inclusieve herkenningstechnologieën kan bouwen.
Blijf op de hoogte voor meer van Google I / O.
