Jak používat živé titulky k získání titulků pro absolutně cokoliv v iOS 16

Živé titulky, nová funkce přicházející v iOS 16, bude generovat titulky jakéhokoli zvuku přehrávaného v jakékoli aplikaci na vašem iPhone. Schopnost převádět slova z hudby a/nebo videa na text v reálném čase, který využívá Neural Engine ve vlastním křemíku společnosti Apple, bude přínosem pro mnoho uživatelů v mnoha různých situacích.

Pokud například špatně slyšíte, schopnost vidět okamžité titulky na obrazovce změní hru. Nebo pokud nemáte sluchátka, když sedíte pozdě večer v posteli a váš partner spí – nebo jste v situace, kdy nechcete dělat hluk, například v autobuse nebo v kanceláři – můžete zapnout živé přepisy a získat titulky.

Aplikace jsou nekonečné a vzrušující. Zde je návod, jak používat živé titulky v iOS 16.

Jak používat živé titulky v iOS 16

Živé titulky vyvolaly velký úspěch v květnu, když Apple tuto funkci oznámil spolu s dalšími novými funkcemi usnadnění přichází na iOS. Tyto funkce dostaly svůj vlastní den v centru pozornosti Globální den informovanosti o přístupnosti před WWDC22, kde Apple představil své plány pro iOS 16 a jeho další operační systémy. Všichni však letos v září přijedou

vše ostatní v iOS 16.

Každý, kdo se nebojí vyzkoušet beta verzi, však může vyzkoušet živé titulky a další nové funkce iOS 16 právě teď. Nejprve musíte nainstalovat iOS 16 beta (buď vývojářská verze nebo bezplatná veřejná beta), nejlépe na náhradním telefonu, protože software zůstává chybný.

iOS 16 je kompatibilní s každým iPhonem vydaným v roce 2017 a novějšími: modely iPhone 8, X, XS, 11, 12, 13 a iPhone SE (druhá i třetí generace).

Povolit živé přepisy

Jakmile budete mít vše nastaveno na beta verzi iOS 16 (a poté, co jste si pohráli s vytvoření vlastní zamykací obrazovky), jít do Nastavení > Usnadnění > Živý přepis (Beta) v dolní části seznamu.

Umožnit Živé titulky pro zapnutí funkce. Objeví se plovoucí widget, který čeká na něco k popisu. Jinde v Nastavení můžete tento widget nakonfigurovat tak, aby se zobrazoval a mizel z Ovládacího centra nebo trojitým kliknutím na boční tlačítko, ale nejprve se podívejme, jak to funguje (klikněte sem pro přeskočení vpřed).

Také povolit Živé titulky ve FaceTime když jste tady, abyste získali titulky, až budete příště na FaceTime hovoru.

Jak dobře fungují živé titulky?

Spravedlivé varování: Přes veškerou snahu se mi nedaří zobrazit widget Živé přepisy na mých snímcích obrazovky. Zkoušel jsem dokonce připojit telefon k počítači a nahrávat obrazovku v QuickTime, ale bez úspěchu.

Následují obrázky mého telefonu, které jsem pořídil (starým) iPadem. Omlouvám se.

Živé titulky ve videích na YouTube

Testoval jsem živé titulky, takže můžete přímo vidět, jak přesné jsou titulky. Vidíš, běhal jsem video experiment na YouTube za poslední dva roky, kdy vyprávím články na Wikipedii celé. To se hodí, protože můžete porovnat, jak dobře živé titulky přepisují mé vyprávění do původního textu na obrazovce.

Jak vidíte, výsledky… nejsou skvělé. To je trochu překvapivé. Hlasové diktování mi v iMessage funguje skvěle; Siri obvykle rozumí mému hlasu docela dobře. Můj hlas, pokud vím, zní ve videích stejně jako při typickém používání iPhonu. A přesto živé titulky přepisují moje videa na YouTube dost špatně.

podcasty

Rád si pročítám zprávy NetNewsWire a poslouchat komentáře prostřednictvím podcastů. Mohl bych to ještě více upevnit pomocí živých titulků k přeměně podcastů na psaná slova? Druh.

I tam, kde to funguje nejlépe, musíme vyřešit otázku implementace: Nemůžete spustit celou epizodu podcastu prostřednictvím živých titulků a procházet výsledný text a číst jako článek. Živé přepisy zpracovávají zvuk tak, jak jej slyší.

To znamená, že můžete číst několik řádků najednou, a to stejnou rychlostí, jakou se mluví dialog. Navíc, protože živé titulky slyší konec věty, mohou fungovat pozpátku a opravit začátek věta, přidávání interpunkce nebo nahrazování zvukově podobných slov, stejně jako při používání diktátu iPhone. Ve skutečnosti tři řádky textu skutečně poskytnou pouze jeden, který můžete přečíst.

Pokud klepnete na šipky na celé obrazovce, můžete si přečíst více najednou, ale to zakryje ovládací prvky aplikace pro pozastavení a přeskakování kapitol.

Je také jasné, že to nehraje dobře s mluví dva chlapi žánr podcastů. Nemůžete zjistit, kdo co říká, pouze přečtením textu.

Živé titulky pro texty hudby

Jsem naprosto hrozný v chápání textů písní. Jsou alba, která jsem slyšel doslova stokrát, u kterých si stále nedokážu zapamatovat texty, natož jim rozumět. Apple Music nabízí živé texty pro mnoho populární hudby, ale matoucí, ne pro celou diskografii Driftless Pony Club, největší indie rocková kapela na světě.

Takže můžete použít živé titulky k analýze textů za vás? Další smíšená taška. Když dokáže zachytit texty, jsou obecně docela přesné. Přicházejí a odcházejí však nepředvídatelně.

Na akustická píseň že jsem si myslel, že to bude snadný homerun, se Live Captions rozhodly přepsat singl kytaru lehce brnkající na pozadí jako „de de de de de de de“ místo mluveného textu. Po aktualizaci na vývojářskou beta 3, když jsem šel pořídit výše uvedený snímek obrazovky, živé titulky místo toho zachytily částečný text (na obrázku vlevo).

Vyzkoušel jsem také dvě notoricky náročné skladby, abych se pokusil vypnout funkci živých titulků. Úvod mluveného slova k „Mám potíže" z Muž hudby překvapivě dobře titulkovaný — to znamená, dokud se nespustila plná hudba (na obrázku vpravo). “Elementy“ bylo dalším příjemným překvapením, živé titulky správně identifikovaly asi polovinu prvků odvinutých v rychlopalné nahrávce.

Pokud chcete i nadále používat živé přepisy, nemusíte se pokaždé ponořit do Nastavení a povolit nebo zakázat plovoucí ovládací nabídku.

Chcete-li to mít po ruce, přejděte na Nastavení > Usnadnění > Zástupce usnadnění (úplně dole) a aktivujte Živé titulky. Nyní můžete povolit nebo zakázat živé titulky trojitým kliknutím na boční tlačítko iPhone.

Do Control Center můžete také přidat tlačítko. Jít zpět k Nastavení > Ovládací centrum a klepněte na zelenou + vedle Zkratky usnadnění. Po aktivaci přejeďte prstem dolů z pravého horního rohu displeje (nebo, pokud máte iPhone 8 nebo iPhone SE, ze spodního okraje), abyste vyvolali Ovládací centrum. Klepněte na Ikona usnadnění a vyberte Živé titulky pro zapnutí.

Jak by se živé titulky mohly zlepšit?

Apple se svým Neural Engine pokračuje v mílání a pokroku. Strojové učení je jednoznačně oblastí, kde společnost vyniká, a tempo zlepšování se jen zrychluje.

Samotné titulky by měly být časem přesnější. Současná funkce diktování společnosti Apple a její zpracování hlasu pro Siri fungují nejlépe, když mluvíte jasně a držíte telefon přímo u obličeje. Živé přepisy bude nějakou dobu trvat, než se naučí překládat hlasy v širokém prostředí, v němž lidé natáčejí videa na YouTube a FaceTime své rodiny.

Rád bych viděl vývojářské API pro tuto funkci. Problém je v tom, že živé titulky přepisují jakýkoli zvuk při přehrávání z reproduktorů; funkce nemá žádnou představu co je přehrávání, jak dlouhý je zvuk nebo co se chystá. Neumí zpracovávat zvuk předem a nelze jej připojit k rozhraní aplikace.

Představte si, že byste v aplikaci Podcasty mohli stisknout tlačítko, které by zpracovalo celou epizodu najednou. Text se při poslechu posouval s vámi, ale také jste mohli číst dopředu nebo zálohovat.

Možná v iOS 17. 🤞