Operační systémy nové generace společnosti Apple budou obsahovat Project Greymatter, který přinese řadu vylepšení souvisejících s AI. Máme nové podrobnosti o funkcích AI plánovaných pro Siri, poznámky a zprávy.
Po rozšířených tvrzeních a zprávách o vylepšeních souvisejících s umělou inteligencí v iOS 18, AppleInsider získala další informace o plánech Applu v oblasti AI.
Lidé obeznámení s touto záležitostí odhalili, že společnost před každoroční WWDC interně testuje řadu nových funkcí souvisejících s AI. Vylepšení AI společnosti, známé pod kódovým označením projektu „Greymatter“, se zaměří na praktické výhody pro koncového uživatele.
V předběžných verzích operačních systémů Apple společnost pracuje na funkci shrnutí oznámení známé jako „Greymatter Catch Up“. Funkce je svázána se Siri, což znamená, že uživatelé budou moci prostřednictvím virtuálního asistenta požadovat a dostávat přehled o svých posledních oznámeních.
Očekává se, že Siri obdrží výrazně aktualizované možnosti generování odezvy prostřednictvím nového rámce chytré odezvy a také on-device LLM společnosti Apple. Při generování odpovědí a shrnutí bude Siri schopna zohlednit entity, jako jsou lidé a společnosti, události kalendáře, místa, data a mnoho dalšího.
V našich dřívějších zprávách o Safari 18, Ajax LLM a aktualizované aplikaci Voice Memos AppleInsider odhalil, že Apple plánuje zavést sumarizaci a přepis textu s umělou inteligencí do svých vestavěných aplikací. Od té doby jsme se dozvěděli, že společnost hodlá tyto funkce přinést i do Siri.
To v konečném důsledku znamená, že Siri bude moci odpovídat na dotazy na zařízení, vytvářet souhrny dlouhých článků nebo přepisovat zvuk jako v aktualizovaných aplikacích Poznámky nebo Hlasové poznámky. To vše by bylo provedeno pomocí Ajax LLM nebo cloudového zpracování pro složitější úkoly.
Bylo nám také řečeno, že Apple testuje vylepšené a „přirozenější“ hlasy spolu s vylepšením převodu textu na řeč, což by mělo v konečném důsledku přinést výrazně lepší uživatelský zážitek.
Apple také pracuje na ovládání médií a TV mezi zařízeními pro Siri. Tato funkce by někomu umožnila například používat Siri na svých Apple Watch k přehrávání hudby na jiném zařízení, ačkoli se tato funkce očekává až později v roce 2024.
Společnost se rozhodla začlenit umělou inteligenci do několika svých základních systémových aplikací s ohledem na různé případy použití a úkoly. Jedna pozoruhodná oblast zlepšení souvisí s úpravou fotografií.
Apple vyvinul generativní software AI pro vylepšené úpravy obrázků
Očekává se, že iOS 18 a macOS 15 přinesou možnosti úpravy fotografií s umělou inteligencí do aplikací, jako jsou Fotky. Interně Apple vyvinul novou funkci Clean Up, která uživatelům umožní odstraňovat objekty z obrázků pomocí generativního softwaru AI.
Společnost také v souvislosti s Project Greymatter vytvořila aplikaci pro interní použití známou pod názvem „Generative Playground“. Lidé obeznámení s aplikací odhalili exkluzivně AppleInsider že může využívat generativní software AI společnosti Apple k vytváření a úpravě obrázků a že obsahuje integraci iMessage ve formě specializovaného rozšíření aplikace.
V testovacích prostředích Applu je možné vygenerovat obrázek pomocí umělé inteligence a poté jej odeslat přes iMessage. Existují náznaky, že společnost plánuje podobnou funkci pro koncové uživatele svých operačních systémů.
Tyto informace jsou v souladu s další zprávou, která tvrdí, že uživatelé budou moci používat AI k vytváření jedinečných emotikonů, ačkoli existují další možnosti pro funkce generování obrázků.
Podle lidí obeznámených s touto záležitostí obsahují předběžné verze aplikace Apple Notes také odkazy na Generation Tool, i když není jasné, zda tento nástroj bude generovat text nebo obrázky – jako je tomu v případě aplikace Generative Playground.
Notes obdrží přepis a sumarizaci pomocí AI spolu s Math Notes
Apple připravil významná vylepšení pro svou vestavěnou aplikaci Notes, která bude debutovat s iOS 18 a macOS 15. Aktualizované Notes získají podporu pro nahrávání zvuku v aplikaci, přepis zvuku a shrnutí na bázi LLM.
Zvukové nahrávky, přepisy a textová shrnutí budou k dispozici v rámci jedné poznámky spolu s jakýmkoli dalším materiálem, který se uživatelé rozhodnou přidat. To znamená, že jedna poznámka může například obsahovat záznam celé přednášky nebo jednání, doplněný obrázky a textem na tabuli.
Tyto funkce by proměnily Notes ve skutečnou elektrárnu, díky čemuž by se staly oblíbenou aplikací pro studenty i obchodní profesionály. Přidání funkcí zvukového přepisu a sumarizace také umožní aplikaci Notes společnosti Apple lépe se postavit proti konkurenčním nabídkám, jako je Microsoft OneNote nebo Otter.
I když podpora nahrávání zvuku na aplikační úrovni spolu s funkcemi přepisu a sumarizace zvuku poháněného umělou inteligencí výrazně vylepší aplikaci Poznámky – nejsou to jediné, na čem Apple pracuje.
Matematické poznámky – vytvářejte grafy a řešte rovnice pomocí umělé inteligence
Aplikace Poznámky obdrží zcela nový přírůstek v podobě matematických poznámek, které zahájí podporu správného matematického zápisu a umožní integraci s novou aplikací Apple GreyParrot Calculator. Nyní máme další podrobnosti o tom, co budou Math Notes obnášet.
Lidé obeznámení s novou funkcí odhalili, že Math Notes umožní aplikaci rozpoznávat text ve formě matematických rovnic a nabízet k nim řešení. Pracuje se také na podpoře grafických výrazů, což znamená, že bychom mohli vidět něco podobného jako aplikace Grapher na macOS, ale v rámci Notes.
Apple také pracuje na vylepšeních zaměřených na vstupy související s matematikou v podobě funkce známé jako „Keyboard Math Predictions“. AppleInsider bylo řečeno, že tato funkce umožní dokončování matematických výrazů, kdykoli budou rozpoznány jako zadávání dílčího textu.
To znamená, že v rámci Notes by uživatelé dostali možnost automaticky doplňovat své matematické rovnice podobným způsobem, jakým Apple v současné době nabízí prediktivní textové nebo vložené dokončování na iOS – které se také mají dostat do visionOS koncem tohoto roku.
Apple visionOS se také dočká vylepšené integrace s Apple Transformer LM – prediktivní textový model, který nabízí návrhy při psaní. Očekává se také, že operační systém obdrží přepracované uživatelské rozhraní Voice Commands, které slouží jako indikátor toho, jak moc si Apple cení vylepšení souvisejících se vstupem.
Společnost se také snaží zlepšit vstup uživatelů pomocí takzvaných „chytrých odpovědí“, které budou k dispozici v aplikacích Zprávy, Mail a Siri. To by uživatelům umožnilo odpovídat na zprávy nebo e-maily základními textovými odpověďmi, které okamžitě generuje Apple Ajax LLM na zařízení.
Umělá inteligence společnosti Apple versus Google Gemini a další produkty třetích stran
Umělá inteligence si našla cestu prakticky do každé aplikace a zařízení. Použití produktů zaměřených na umělou inteligenci, jako je ChatGPT od OpenAI a Google Gemini, také zaznamenalo výrazný nárůst celkové popularity.
Zatímco Apple vyvinul svůj vlastní software AI, aby se lépe postavil proti konkurenci, AI společnosti není zdaleka tak působivá jako něco jako Google Gemini Advanced, AppleInsider se naučil.
Během své výroční vývojářské konference Google I/O dne 14. května předvedl Google zajímavý případ použití umělé inteligence – kde uživatelé mohli položit otázku ve formě videa a obdržet odpověď nebo návrh vygenerovaný umělou inteligencí.
V rámci akce bylo AI Googlu ukázáno video s nefunkčním gramofonem a dotazováno, proč to nefunguje. Software identifikoval model gramofonu a navrhl, že gramofon nemusí být správně vyvážený a že kvůli tomu nefunguje.
Společnost také oznámila Google Veo – software, který dokáže generovat video pomocí umělé inteligence. OpenAI má také svůj vlastní model pro generování videa známý jako Sora.
Apple Project Greymatter a Ajax LLM nedokážou generovat ani zpracovávat video, což znamená, že software společnosti nemůže odpovídat na složité video otázky o spotřebitelských produktech. To je pravděpodobně důvod, proč se Apple snažil navázat partnerství se společnostmi jako Google a OpenAI, aby dosáhl licenční smlouvy a zpřístupnil více funkcí své uživatelské základně.
Ve srovnání s fyzickými produkty s tématem AI, jako je Humane AI Pin nebo Rabbit R1, mají projekty AI společnosti Apple významnou výhodu v tom, že běží na zařízeních, která uživatelé již vlastní. To znamená, že uživatelé nebudou muset kupovat speciální zařízení AI, aby mohli využívat výhod umělé inteligence.
Humane’s AI Pin a Rabbit R1 jsou také běžně považovány za nedokončené nebo částečně funkční produkty a bylo dokonce odhaleno, že jde o něco víc než vlastní aplikaci pro Android.
Očekává se, že projekty Apple související s umělou inteligencí budou mít svůj debut na výroční WWDC společnosti 10. června jako součást iOS 18 a macOS 15. Pracuje se také na aktualizacích aplikací Calendar, Freeform a System Settings.
Zdroj: appleinsider.com