Key takeaways
- Live Text gjenkjenner ord i bilder og bilder, og gjør dem om til vanlig tekst.
- iOS 15 og macOS Monterey baker Live Text inn på det dypeste nivået.
- Det er nå ingen forskjell mellom tekst og bilder av tekst.
Livetekst gjør tekst i bilder, skjermbilder eller til og med fra kameraet ditt til søkbar, kopierbar og redigerbar tekst.
I iOS 15, iPadOS 15 og macOS Monterey er Live Text over alt: i skjermbilder, i fotobiblioteket ditt og til og med i tekstinndataområder. Det den gjør er å gjenkjenne ord i et hvilket som helst bilde, og deretter gjøre dem om til vanlig tekst. Derfra kan du velge det, kopiere det, dele det, slå det opp og til og med oversette det. Live Text bringer også Apples «datadetektorer» til festen, slik at du for eksempel kan trykke på et telefonnummer i et bilde av et butikkskilt, og deretter ringe det med telefonappen.
Hvis du noen gang har funnet deg selv å trykke på et ord i en pocketbok for å slå opp betydningen, trykke lenge på en lenke skrevet ut i et magasin for å se en forhåndsvisning på nettet, eller trykke på et steds navn for å se det på et kart, da kommer du til å elske Live Text. Det gjør den virkelige verden søkbar, redigerbar og mer brukbar.
Det bare fungerer
I de nye Mac-, iPad- og iPhone-operativsystemene er Live Text bare der. Det er ingen spesiell modus. Apple har lagt til direkte tekst hvor som helst det er fornuftig. Det er en ny knapp hver gang du tar et skjermbilde, som lar deg fremheve all tekst i bildet, og det er det mest komplekse det noen gang blir.
Det gjør den virkelige verden søkbar, redigerbar og mer brukbar.
I de fleste tilfeller er teksten i et bilde ganske enkelt tekst. La oss si at du tok et bilde av en produktetikett i en butikk for å huske å sjekke den senere. Hvis du ser på bildet i Bilder-appen, sveiper du bare fingeren over teksten for å velge den. Det er bare det at nå er alle bilder av tekst også tekst, automatisk. Derfra kan du dele det, kopiere det, bruke den nye innebygde oversettelsesfunksjonen, ringe nummeret, åpne en lenke, se en adresse på et kart og mer.
Search Anything
Første gang du installerer iOS 15, vil den skanne og behandle bildebiblioteket ditt, og gjenkjenne all tekst den finner. Dette har en veldig kraftig implikasjon: Hvis du søker etter noe i Spotlight (det systemomfattende søkeverktøyet), vil det inkludere resultater fra tekst i bildene dine.
Du kan for eksempel finne kvitteringer du fotograferte for mange år siden, bare ved å søke etter tekst som kan stå på kvitteringen. Prøver du å huske hvor du spiste den deilige risretten på ferie på Costa Brava? Hvis du fotograferte menyen, vil du enkelt kunne finne den.
Eller hva med å bygge en oppskriftsbok uten å prøve? Hver gang du ser en oppskrift i et blad eller i en oppskriftsbok, er det bare å ta et bilde, så finner du det når som helst.
Live Text endrer fundament alt hvordan du samhandler med verden. Plutselig blir hvert ord på et stykke papir, enhver butikkfront, skjermdump eller veiskilt like brukbart som tekst i en notatapp.
Det finnes allerede biter av dette i databehandling. Googles Translate-app har lenge vært i stand til å oversette tekst gjennom kameraet, og iOS har vært i stand til å skanne og OCR-dokumenter i Notes-appen en stund. Men nå som Apple har bakt Live Text inn i enhetene sine, er det ikke lenger noe skille mellom typer tekst. Det er det samme. Selv de skjermbildene av tekst folk legger ut på Twitter er nå like brukbare som om de hadde gjort det riktig.
AR Lite
Live Text er nok et eksempel på at Apple dykker inn i utvidet virkelighet. Vi har sett hvordan Apple er med på AR, fra de for lange demoene i de forskjellige hovednotene gjennom årene til de pene AR-modellene av nye produkter som lar deg se hvordan den nye iMac ville se ut på skrivebordet ditt. Apple har også lagt til mange AR-lydfunksjoner, leser opp meldinger og varsler, eller gir deg veibeskrivelse via AirPods.
Live Text endrer fundament alt hvordan du samhandler med verden.
Det er en åpen hemmelighet at dette er all praksis for Apples eventuelle AR-brilleprodukt, og Live Text vil sannsynligvis være en stor del av det. Ikke bare vil brillene dine kunne lese skilt rundt deg for å få bedre bevissthet, men de vil også kunne slå opp informasjon mens du leser den.
Men foreløpig drar vi alle nytte av Apples AR-eksperimenter. Live Text er bare fantastisk. Jeg har bare brukt det i et par dager, og det virker allerede naturlig. Jeg gleder meg til å se hva apputviklere gjør med den.
