Keeawayt
- Navi käyttää SharePlayta ja Applen sisäänrakennettua puheen muuntamista tekstiksi tekstityksen ja käännöksen tarjoamiseen FaceTimessa.
- Se on kaukana täydellisestä, mutta jo tarpeeksi hyvä.
- Tekstitykset helpottavat käytettävyyttä.
Navi on sovellus, joka lisää reaaliaikaisia tekstityksiä ja reaaliaikaisia käännöksiä FaceTime-puheluihisi.
Sovellus käyttää SharePlayta ja sisäänrakennettua puheentunnistusta tekstityksen ja käännöksen lisäämiseen 20 kielellä FaceTime-puheluihisi. Se on uskomaton SharePlayn käyttö, jota useimmat meistä pitävät kikkana tapana katsella synkronoituja elokuvia ihmisten kanssa muissa paikoissa. Sinun ei ehkä tarvitse vielä käynnistää kääntäjääsi, mutta sovellus, joka tekee tämän hyvin, voi olla järjettömän hyödyllinen.
"En saa ääntä FaceTime-puhelusta", Navi-kehittäjä Jordi Bruin kirjoittaa Twitterissä, "mutta käytän SharePlayta sen jakamiseen puhelun osallistujien kesken."
SharePlay
SharePlay on iOS 15:n ja macOS 12.1:n uusi ominaisuus, jonka avulla voit jakaa ja synkronoida asioita FaceTime-puheluissa. Yllä olevan elokuvan katseluesimerkin avulla kuka tahansa osallistuja voi keskeyttää tai toistaa elokuvan esimerkiksi samalla, kun juttelet FaceTime-puhelun aikana. FaceTime-video pysyy auki pienessä, kelluvassa, kuva kuvassa -paneelissa, ja jokainen osallistuja käyttää sovellusta paikallisesti laitteellaan. SharePlayn temppu on synkronoida kaikki, mitä näissä paikallisissa sovelluksissa tapahtuu, joten kaikki jakavat kokemuksen, olipa kyse sitten elokuvasta, Fitness+ -treenistä tai laskentataulukosta.
Navi käyttää samaa tekniikkaa, vain puhelunaikainen sovellus ei ole elokuva - se on reaaliaikainen käännöskone. Voit käyttää sitä käynnistämällä sovelluksen FaceTime-puhelun aikana ja napauttamalla Ota tekstitykset käyttöön -painiketta. Sitten muut osallistujat voivat myös liittyä toimintaan ja nähdä nykyisen puhujan livetekstitykset. Jos joku puhuu monologia, hänen puhekuplansa kasvaa ja pysyy paikallaan vähän kauemmin.
Kuuroille tämä voi tarkoittaa eroa, soittaako ihmisiä vai ei. Ja kaikille se tarkoittaa, että voit käydä hyödyllisiä keskusteluja ihmisten välillä, jotka eivät käytä samaa kieltä.
Yleinen teksti
Internet on rakennettu tekstiin, ja se on hienoa. Se on pieni ja helppo luoda, lukea ja kääntää. Se on myös helppo muuttaa syntetisoiduksi puheeksi. Tuloksena on, että kuka tahansa mistä tahansa voi osallistua mihin tahansa keskusteluun. Kieli ei ole este, eikä myöskään kuurous tai minkäänlainen sokeus – kunhan käytät laitetta, jossa on hyvät esteettömyystyökalut näkö- tai kuulovammaisille.
Mutta puhuttua sanaa on paljon vaikeampi käsitellä. Puhe-teksti-sanelu on vaikuttavaa, mutta vasta suhteellisen hiljattain yleinen puheentunnistus on tullut tarpeeksi hyväksi yleiseen käyttöön - Applen Kääntäjä-sovellus on hyvä esimerkki. IOS 15:ssä esitelty se tarjoaa reaaliaikaisia äänikäännöksiä. Jos menisimme vielä ulkomaille lomalle, se olisi täydellinen.
Nyt käytämme videoita yhä enemmän töissä ja pitääksemme yhteyttä ystäviin ja perheeseen. Huolimatta siitä, miten toimimme tulevaisuudessa, videopuheluiden este on murrettu perusteellisesti. Se on nykyään yleinen työkalu, mutta siitä puuttuu paljon kirjallisten viestintätyökalujen hienoutta.
Jokin Navi, joka tarjoaa reaaliaikaiset tekstitykset ja käännökset, voi olla merkittävä. Saavutettavuus on yksi näkökohta, mutta kyky keskustella ihmisten kanssa, joiden kieltä et puhu, avaa kansainvälistä liiketoimintaa hämmästyttävän paljon.
Toiminnassa
Testasin Navia sovellusten kehittäjän, kirjoittajan ja kuulolaitteiden käyttäjän Graham Bowerin kanssa. Se on melko hyvä, mutta ei vielä valmis kriittisiin tehtäviin. Jotkut transkriptioista olivat koomisen huonoja ja liian mautonta samattaviksi. Keskustelumme jatkuessa hänen puheensa tunnistettiin kuitenkin paljon paremmin. Tämä on järkevää, koska iOS-sanelukone mukautuu ääneesi ajan myötä.
Käännös toimi myös, vaikka sen käännösten laatu riippuu syötteen tarkkuudesta.
Tällaista tekniikkaa on helppo projisoida tuleviin Apple Glasses -laseihin tai mihin tahansa huhuttuihin AR/VR-tuotteeseen, jota tällä viikolla kehitetään.
"Näen tämän toimivan AR-laseissa", Bower sanoi keskustelumme aikana. "Jotkut ihmiset, jopa normaalilla kuulolla, pitävät tekstityksistä elokuvissa. Tämä olisi kuin tosielämän tekstitystä."
Vaikka Navi on vaikuttava tekninen demo, se ei ole vielä siellä. Luotettavaa yrityskäyttöä varten Applen alkuperäisen puheentunnistuksen on oltava paljon tarkempi. Mutta nopeuden suhteen se on hyvä, ja käännökset ovat yhtä hyviä kuin muut.
Mutta olemme nyt tiellä, ja tällainen asia vain paranee.
