Apple pracuje obecnie nad wieloma funkcjami sztucznej inteligencji dla iOS 18 i iPadOS 18, które zostaną ogłoszone na konferencji WWDC 2024. Apple będzie używać LLM na urządzeniu do obsługi tych funkcji, które zostaną wykorzystane do ulepszenia Siri, notatek, wiadomości, zdjęć, kalendarza i nie tylko.
Jak wynika z raportu autorstwaAppleInsiderApple pracuje nad projektem Greymatter, czyli zbiorem funkcji sztucznej inteligencji, które będą dostępne w iOS 18 i iPadOS 18. Oto pełny opis nowych funkcji oraz sposób, w jaki ulepszą one różne części systemów operacyjnych na iPhonie i iPadzie:
Powiadomienia
Nowa funkcja podsumowania powiadomień, znana wewnętrznie jako „Greymatter Catch Up”, ułatwi użytkownikom uzyskanie pełnego podsumowania ostatnich powiadomień. Apple ma już funkcję o nazwie „Zaplanowane podsumowanie”, która podsumowuje powiadomienia w systemach iOS i iPadOS i będzie to mądrzejsze uaktualnienie.
Polecana lektura:Apple ogłosi nowe produkty jeszcze w tym tygodniu
Siri
Oczekuje się, że Siri otrzyma inteligentniejszą strukturę reagowania dzięki nowemu Ajax LLM na urządzeniu, który będzie również obsługiwał wbudowane aplikacje Apple. Siri będzie mogła wykorzystywać dane użytkownika, takie jak kontakty, wydarzenia w kalendarzu, lokalizacje i inne, aby zapewnić mądrzejsze odpowiedzi.
Inteligentny asystent głosowy będzie także mógł tworzyć streszczenia długich artykułów, podobnie jak w Safari 18, a także transkrybować dźwięk w aplikacjach Notatki i Notatki głosowe. Chociaż całe to przetwarzanie będzie odbywać się lokalnie za pomocą Ajax LLM, w razie potrzeby przetwarzanie w chmurze będzie wykorzystywane do zadań skomplikowanych obliczeniowo, przy jednoczesnym zachowaniu prywatności. Zgodnie z oczekiwaniami, prywatność będzie głównym przedmiotem zainteresowania Apple podczas ogłaszania tych nowych funkcji.
Głos Siri również zostanie jeszcze bardziej ulepszony, aby brzmiał bardziej naturalnie, a także dodane zostaną ulepszenia w zakresie szybkości przesyłania tekstu.
Kolejnym dodatkiem do Siri będzie możliwość sterowania multimediami i telewizorem na różnych urządzeniach, a użytkownicy będą mogli używać jednego z urządzeń Apple do sterowania odtwarzaniem na innym. AppleInsider uważa, że ta funkcja zostanie udostępniona później w 2024 r.
Zdjęcia
iOS 18, iPadOS 18 i macOS 15 również otrzymają generatywne aktualizacje AI dla aplikacji Zdjęcia. Jedną z funkcji będzie funkcja Clean Up, która umożliwi usuwanie niechcianych obiektów ze zdjęć za pomocą sztucznej inteligencji – czegoś, co jest już dostępne w Zdjęciach Google.
Firma pracuje także nad aplikacją o nazwie „Generative Playground”, która będzie wykorzystywać LLM do tworzenia i edycji obrazów. Umożliwi to użytkownikom generowanie obrazów i wysyłanie ich za pośrednictwem iMessage, a także tworzenie unikalnych i niestandardowych emoji. Nie wiadomo jeszcze, jak te niestandardowe emoji będą działać na różnych platformach, takich jak systemy operacyjne Apple oraz Windows i Android.
Notatki
Aplikacja Notatki będzie potencjalnie obsługiwać także generowanie tekstu i obrazów, jednak nie zostało to jeszcze potwierdzone. Pewne jest, że Notes będzie obsługiwał nagrywanie i transkrypcję dźwięku w aplikacji, a także podsumowywanie.
Dzięki tym funkcjom Notes stanie się jeszcze bardziej przydatną aplikacją, zwłaszcza że są one dostępne na wszystkich platformach Apple, w tym iOS i macOS.
Dostępne będą również nowe notatki matematyczne, które umożliwią tworzenie złożonych zapisów matematycznych i integrację z nową, ulepszoną aplikacją Kalkulator. Math Notes nie tylko rozpoznaje tekst w złożonych zapisach matematycznych w dowolnym miejscu systemu operacyjnego, ale także oferuje automatyczną korektę i możliwość ich rozwiązania. W tej aktualizacji obsługiwane będą także wyrażenia graficzne.
Oczekuje się, że funkcje te zostaną również udostępnione w systemie VisionOS jeszcze w tym roku w formie ulepszonych poleceń głosowych, przewidywania tekstu, inteligentnych odpowiedzi i nie tylko.
W tym doniesieniu brakuje informacji o tym, czy Apple będzie dodawać funkcje generujące sztuczną inteligencję do swojej aplikacji aparatu, aby usprawnić wykrywanie świata rzeczywistego. Aplikacja Zdjęcia ma już możliwość rozpoznawania roślin i różnych obiektów, ale generatywna sztuczna inteligencja może naprawdę ulepszyć te funkcje.
Tym, co wyróżnia ofertę AI Apple na tle konkurentów, takich jak Google Gemini i ChatGPT, jest to, że gigant z Cupertino nie buduje chatbota. Koncentruje się bardziej na dostarczaniu ulepszeń opartych na sztucznej inteligencji w ramach swojego systemu operacyjnego i aplikacji, co powinno oferować konsumentom dużą wartość. Jeśli chodzi o funkcje chatbota, użytkownicy nadal będą musieli polegać na konkurentach, którzy są łatwo dostępni w App Store.
Apple w przeszłości włożył już wiele pracy w sztuczną inteligencję i uczenie maszynowe w systemach iOS i macOS, ale teraz najwyraźniej dogania konkurencję, jeśli chodzi o generatywną sztuczną inteligencję. Ciekawie będzie zobaczyć, jak działają nowe funkcje i jak dobrze zostały przyjęte przez użytkowników.
Przeczytaj więcej:
- Niektóre funkcje AI systemu iOS 18 mogą być dostępne wyłącznie w telefonie iPhone 15
- iMessage w iOS 18 oferujący animacje, RCS i sztuczną inteligencję
- 10 zmieniających zasady gry funkcji AI dostępnych w iOS 18
- Dlaczego iOS 18 nie wydaje się rewolucyjny pomimo ulepszeń AI
- iOS 18 będzie umożliwiał dostosowywanie ikon aplikacji i tworzenie niestandardowych emoji
- Apple ulepszy Siri, korzystając z modeli językowych w iOS 18
- Transkrypcja w czasie rzeczywistym dostępna jest w notatkach głosowych w systemie iOS 18