Architektura Foundation Models od Apple otwiera nowe możliwości w zakresie inteligentnych aplikacji
Dzięki premierze systemów iOS 26, iPadOS 26 i macOS 26 w tym miesiącu deweloperzy oprogramowania na całym świecie będą mogli wprowadzać do swoich aplikacji jeszcze bardziej inteligentne rozwiązania, wykorzystując wbudowany w urządzenie duży model językowy, stanowiący podstawę Apple Intelligence.
Architektura Foundation Models od Apple daje deweloperom możliwość tworzenia nowych, inteligentnych funkcji, które chronią prywatność użytkowników, są dostępne offline, a ponadto pozwalają na inferencję AI bez dodatkowych opłat. Twórcy aplikacji już korzystają z tej architektury, by na nowo zdefiniować możliwości swoich aplikacji i dostarczać użytkownikom nowe, fascynujące rozwiązania. A są wśród nich na przykład narzędzia do analizowania wskaźników treningowych czy do opracowywania własnych quizów, wpierających uczniów w powtórkach do egzaminów.
„Jesteśmy podekscytowani faktem, że twórcy aplikacji na całym świecie już teraz wprowadzają do swoich aplikacji funkcje wywiadowcze chroniące prywatność. „Tworzone przez nich doświadczenia w aplikacjach są rozbudowane i kreatywne, pokazując, jak ogromne możliwości otwiera framework Foundation Models” — powiedziała Susan Prescott, wiceprezes Apple ds. relacji ze światowymi deweloperami. „Od generowania podpowiedzi do prowadzenia dziennika, które pobudzą kreatywność w aplikacji Stoic, po konwersacyjne wyjaśnienia terminów naukowych w aplikacji CellWalk – niesamowite jest obserwowanie, jak potężne nowe możliwości już teraz wzbogacają aplikacje, z których ludzie korzystają na co dzień”.
Już teraz szereg aplikacji, w tym zdrowotnych, treningowych, edukacyjnych czy przeznaczonych do produktywnej pracy, korzysta z architektury Foundation Models. Oto kilka dostępnych już aplikacji oferujących inteligentne funkcje czerpiące z potencjału tej architektury.
Nowe rozwiązania zdrowotne i treningowe
SmartGym
Oferuje użytkownikom elegancki i łatwy sposób planowania i monitorowana swoich treningów. Aplikacja wykorzystuje architekturę Foundation Models, pozwalając użytkownikom na opisanie treningu i przekształcenie go w przemyślany plan treningowy, składający się z zestawów, powtórzeń czy przerw na odpoczynek, oraz sugerujący odpowiedni sprzęt. Oferowana w aplikacji funkcja Smart Trainer na bieżąco uczy się na podstawie treningów użytkownika i w razie potrzeby sugeruje zmianę liczby powtórzeń lub obciążenia, bądź tworzy nowe zestawy. Teraz każdej sugestii towarzyszy przejrzyste wyjaśnienie, tak by użytkownik zrozumiał powody wprowadzanych zmian.
Na tym jednak nie koniec. SmartGym generuje też szczegółowe podsumowania danych treningowych, w tym miesięczne przeglądy postępów oraz analizy ćwiczeń i sprawności fizycznej użytkownika, prezentowane w prostym i łatwym do zrozumienia formacie. Użytkownicy mogą również otrzymywać wskazówki trenerskie, dostosowane do wybranego przez nich stylu aktywności, a po skończonym treningu mogą dodać własne notatki lub wygenerować automatyczny raport na podstawie danych z treningu. Poza tym za każdym razem, gdy użytkownik otworzy aplikację, SmartGym powita go spersonalizowaną, dynamiczną i tworzoną w czasie rzeczywistym wiadomością opartą o bieżącą analizę jego sprawności fizycznej.
„Dzięki architekturze Foundation Models możemy wyposażać urządzenia w funkcje, które kiedyś były niemożliwe”, komentuje Matt Abras, dyrektor generalny SmartGym. „Wdrożenie tego rozwiązania jest niezwykle proste, a jego możliwości – ogromne”.
Stoic
To aplikacja do prowadzenia dziennika, ułatwiająca użytkownikom zrozumienie ich emocji, i dostarczająca im wskazówek, by stać się szczęśliwszym i wydajniejszym oraz łatwiej pokonywać przeszkody. Dzięki zastosowaniu architektury Foundation Models użytkownicy mogą otrzymywać wysoce spersonalizowane podpowiedzi dotyczące prowadzenia dziennika, tworzone na podstawie ich ostatnich wpisów. Na przykład, jeśli użytkownik zanotuje kiepski nastrój lub problemy ze snem, otrzyma wiadomość ze słowami otuchy lub wsparcia. Aplikacja Stoic prześle też użytkownikowi dostosowane do kontekstu powiadomienia, aby przypomnieć mu o ostatnich wpisach lub zanotowanych nastrojach. Tworzenie promptów nie wychodzi poza urządzenie, co oznacza, że wpisy użytkownika pozostają prywatne.
Co więcej, aplikacja sugeruje teraz dopasowane do kontekstu i zachęcające do refleksji podpowiedzi, a także odpowiednie sformułowanie ułatwiające rozpoczęcie wpisu. Korzystając z udoskonalonych widoków opartych na architekturze Foundation Models, użytkownicy mogą również przejrzeć swoje wcześniejsze wpisy, a także przeczytać podsumowania zapisków, uporządkować powiązane wpisy czy przeszukać dziennik przy użyciu dostępnej w aplikacji, ulepszonej funkcji wyszukiwania w języku naturalnym.
„Podpowiedzi i analizy odzwierciedlają stan umysłu użytkownika, dzięki czemu korzystanie z aplikacji ma osobisty charakter i ewoluuje z każdym dniem. A to wszystko zasługa architektury Foundation Models”, podsumowuje Maciej Lobodzinski, twórca Stoic. „Byłem zaskoczony, jak szybko udało nam się zrealizować nasze założenia. Funkcje, które kiedyś wymagały rozbudowanej infrastruktury, teraz działają natywnie na urządzeniu przy jedynie minimalnej konfiguracji. To właśnie dlatego nasz niewielki zespół mógł tak szybko dostarczyć wartościowe, dbające o prywatność użytkownika rozwiązanie, w którym wszystkie analizy i podpowiedzi generowane są wyłącznie w obrębie urządzenia użytkownika”.
Coraz więcej aplikacji zdrowotnych i treningowych korzysta z platformy Foundation Models, aby oferować użytkownikom zupełnie nowe funkcje i rozwiązania. SwingVision to aplikacja wspierająca użytkowników w doskonaleniu umiejętności gry w tenisa lub pickleballa poprzez oferowanie porad poprawiających jakość rozgrywki. W oparciu o architekturę Foundation Models aplikacja analizuje nagrania użytkownika podczas gry, udostępniane jako dane wyjściowe modeli Core ML, zapewniając w ten sposób konkretne i przydatne podpowiedzi. 7 Minute Workout daje możliwość tworzenia dynamicznych treningów przy użyciu języka naturalnego. Użytkownik może na przykład wskazać, że chce unikać ćwiczeń mogących pogłębić kontuzję, lub że przygotowuje się do konkretnego wydarzenia. Aplikacja to również źródło motywujących komunikatów przekazywanych przyjaznym i naturalnie brzmiącym głosem. Gratitude, aplikacja do prowadzenia dziennika, co tydzień tworzy szczegółowe podsumowania trudności, osiągnięć, zamiarów czy pozytywnych wzmocnień. Wykorzystując rozwiązania Foundation Models, narzędzie to dodatkowo przekształca wpisy w osobiste, dopasowane do kontekstu afirmacje.
Aplikacja Train Fitness również czerpie z potencjału Foundation Models firmy Apple i sugeruje użytkownikowi kolejne ćwiczenia, kiedy potrzebny mu sprzęt jest akurat niedostępny. Użytkownicy mogą tu również udoskonalać swoje treningi, wprowadzając szczegółowe instrukcje, na przykład preferowane ćwiczenia czy partie mięśni do pominięcia. Motivation przesyła motywujące przypomnienia i porządkuje ulubione treści użytkownika według emocji i tematów, a aplikacja Streaks sprytnie sugeruje i automatycznie klasyfikuje czynności na liście zadań do zrobienia. Dzięki aplikacji Wakeout! użytkownicy będą mogli zrobić sobie spersonalizowane przerwy na ruch, a wybrane przez użytkownika ćwiczenie zostanie dokładnie umotywowane. Bazując na możliwych do wygenerowania strukturach, model bazowy dokonuje selekcji spośród tysięcy dostępnych nagrań i opracowuje dopasowany dla każdego użytkownika schemat działania.
Nowe możliwości w aplikacjach edukacyjnych
CellWalk
Ta aplikacja biologiczna umożliwia użytkownikom szczegółowe badanie trójwymiarowej komórki aż do poziomu molekularnego lub wycieczkę po molekularnych maszynach życia. Aplikacja umożliwia studentom i badaczom wybieranie nieznanych pojęć w celu ich dokładniejszego wyjaśnienia. Bazując na architekturze Foundation Models, aplikacja opracowuje przystępne wyjaśnienie terminu, korzystając z narzędzia uzasadniającego odpowiedzi w oparciu o zawarte w aplikacji treści naukowe. Na podstawie profilu użytkownika CellWalk dostosowuje wyjaśnienia do poziomu wiedzy osoby uczącej się, jednocześnie rejestrując dotychczasowe terminy w celu wzmocnienia procesu dydaktycznego.
„Model działający na urządzeniu ma znakomitą wydajność”, komentuje Tim Davison, twórca CellWalk. „Użyte w aplikacji treści graficzne zawsze były interaktywne, jednak to dzięki platformie Foundation Models ożył również sam tekst. Dane naukowe, które zostały zaszyte w aplikacji, stają się dynamicznym systemem, który dostosowuje się do poszczególnych uczniów, a dzięki sprawdzonym i uporządkowanym danym wygenerowanym przez model integracja z naszą aplikacją przebiegła bezproblemowo”.
Również inne aplikacje edukacyjne opierają swoje rozwiązania na architekturze Foundation Models. Wykorzystujący AI korepetytor Grammo pomaga w nauce gramatyki języka angielskiego i przedstawia przystępne wyjaśnienia błędnych odpowiedzi użytkownika. Co więcej, Grammo zyskał teraz sekcję zawierającą ćwiczenia dla użytkowników, gdzie na bieżąco mogą tworzyć nowe pytania pogłębiające znajomość tematu. Lil Artist łączy potencjał architektury Foundation Models oraz interfejsu API ImageCreator, tak by personalizować dla dzieci ilustrowane opowiadania. Korzystając z interfejsu użytkownika zastępującego pole tekstowe, dzieci wybierają postaci i tematy, przez co opowiadania stają się bardziej przystępne i interesujące.
Gdy użytkownicy zapisują w aplikacji Vocabulary słowa do zapamiętania, działający na urządzeniu model korzysta z języka naturalnego do niestandardowej klasyfikacji, na przykład przy użyciu kategorii „Czasowniki”, „Anatomia” czy „Trudne”. Dzięki temu aplikacja zachowuje przejrzystość i wspiera użytkownika w dalszym powtarzaniu i ćwiczeniu słówek. W aplikacji Platzi, stanowiącej bogatą platformę edukacyjną dla osób hiszpańskojęzycznych, użytkownicy będą mogli zadawać szczegółowe pytania dotyczące aktualnie wyświetlanych w filmie treści i otrzymają na nie błyskawiczną odpowiedź. Dzięki zastosowaniu działającego na urządzeniu modelu dopasowanego do kontekstu lekcji, aplikacja potrafi w sposób swobodny odpowiadać na pytania użytkownika dotyczące konkretnej lekcji.
Inspirujące nowe funkcje wspierające kreatywność i wydajność
Stuff
Pomysłem stojącym za utworzeniem aplikacji było wsparcie użytkowników w monitorowaniu całego mnóstwa zadań, które przychodzą im do głowy w ciągu dnia, tak by łatwiej było im się zorganizować i osiągać cele. Dzięki potencjałowi Foundation Models aplikacja Stuff odczytuje teraz daty, znaczniki i listy w momencie wpisywania ich przez użytkownika. A więc, po zapisaniu „W piątek zadzwoń do Zosi” Stuff natychmiast uzupełni szczegóły w odpowiednich miejscach. W trybie Listen Mode użytkownik może podzielić się swoimi myślami i powiedzieć na przykład „Zrób pranie wieczorem” lub „Przygotuj się na wycieczkę w weekend”, a Stuff przekształci je w uporządkowane, edytowalne zadania. W trybie Scan Mode użytkownicy zarejestrują natomiast treści zapisane odręcznie, w formie fragmentów tekstu czy pisma odręcznego, i dodadzą je bezpośrednio do Stuff.
„Architektura Foundation Models w systemie iOS 26 zrewolucjonizowała procesy robocze w aplikacji Stuff”, podsumowuje Austin Blake, twórca aplikacji Stuff. Ten działający wyłącznie na urządzeniu model ma potężne możliwości, jest przewidywalny i niezwykle wydajny. Dzięki jego prostocie udało mi się wdrożyć w jednej aktualizacji zarówno tryb Listen Mode, jak i Scan Mode – inaczej trwałoby to o wiele dłużej”.
VLLO
Aplikacja oferuje intuicyjny interfejs, który sprawia, że edycja wideo przebiega naturalnie i przyjemnie, niezależnie od tego, czy użytkownik tworzy swój pierwszy vlog czy też treści do mediów społecznościowych. Montaż wideo osiąga w VLLO wyższy poziom dzięki płynnej integracji platformy Foundation Models z architekturą Vision od Apple. Aplikacja inteligentnie analizuje podgląd wideo i automatycznie podpowiada odpowiednią muzykę w tle oraz dopasowane do każdej sceny, dynamiczne naklejki.
„VLLO płynnie łączy architekturę Foundation Models z technologiami Vision, eliminując przeszkody, które często stają na drodze nowym twórcom”, stwierdził Kyunghyun Lee, dyrektor generalny Vimosoft i programista iOS. Zintegrowanie Foundation Models i technologii Vision firmy Apple otworzyło przed nami możliwość szybkiego i sprawnego opracowania zaawansowanych funkcji rekomendacji bez konieczności wdrażania skomplikowanych algorytmów, a korzystając jedynie z prostych podpowiedzi”.
Dodatkowe aplikacje zwiększające kreatywność i produktywność zyskują nowe funkcje oparte o architekturę Foundation Models. Signeasy umie teraz tworzyć podsumowania, wyróżniać kluczowe punkty i obsługiwać interfejs do rozmów, gdzie użytkownicy po zadaniu związanego z konkretnym dokumentem pytania, otrzymają błyskawiczną odpowiedź. W aplikacji Agenda pojawiła się funkcja Ask Agenda inteligentnie odpowiadająca na pytania użytkowników dotyczące zawartości biblioteki z notatkami. Ask Agenda wyszuka istotne informacje i udzieli łatwych do zrozumienia odpowiedzi, podając jednocześnie linki do najważniejszych notatek.
Również Detail: AI Video Editor robi świetny użytek z platformy Foundation Models i przekształca szkice lub konspekty w gotowy do nagrania skrypt promptera. A kiedy film jest już gotowy do udostępnienia, tytuł, opis, hasztagi i wiadomości zostaną wygenerowane automatycznie. Essayist czerpie z potencjału platformy Vison od Apple oraz architektury Foundation Models do wyodrębniania informacji z plików PDF i konwertowania je na uporządkowane odniesienia i cytaty. Wystarczy przeciągnąć i upuścić plik PDF, aby natychmiast wygenerować odniesienie przy zastosowaniu preferowanego sposobu cytowania. OmniFocus 4 to aplikacja ułatwiająca sprawne tworzenie zadań i porządkowanie ich za pomocą projektów, znaczników i dat. Teraz może ona tworzyć za użytkownika projekty i zadania do wykonania, podpowiadając na przykład, co spakować na nadchodzącą podróż. Aplikacja może na podstawie istniejących znaczników automatycznie podsuwać sugestie, a nawet proponować nowe znaczniki dla zarejestrowanych treści.
Tworzenie rozwiązań w oparciu o platformę Foundation Models
Platforma Foundation Models ściśle współpracuje z językiem Swift, przez co deweloperzy mogą łatwo wysyłać żądania do działającego na urządzeniu modelu zawierającego 3 miliardy parametrów przy użyciu istniejącego kodu. Stosowana architektura zapewnia prowadzone generowanie zawartości, dzięki czemu modele odpowiadają w spójnym, wiarygodnym dla deweloperów formacie. Mogą więc oni udostępniać w modelu narzędzia, które wywołują aplikację, gdy do przetworzeniach danych model potrzebować będzie dodatkowych informacji. W ten sposób model będzie dysponować wszystkimi odpowiednimi zasobami, aby udzielić odpowiedzi. Architektura Foundation Models jest dostępna w systemach iOS 26, iPadOS 26 i macOS 26 i działa na każdym urządzeniu obsługującym system Apple Intelligence (po jego włączeniu).
Źródło: Apple
