Apple arbejder i øjeblikket på en række AI-funktioner til iOS 18 og iPadOS 18, som de vil annoncere på WWDC 2024. Apple vil bruge LLM på enheden til at drive disse funktioner, der vil blive brugt til at forbedre Siri, Noter, Beskeder, Fotos, Kalender og meget mere.
Ifølge en rapport afAppleInsider, Apple arbejder på Project Greymatter, som er navnet på den flok af AI-funktioner, der vil være i iOS 18 og iPadOS 18. Her er en komplet oversigt over de nye funktioner, og hvordan de vil forbedre forskellige dele af operativsystemerne på iPhone og iPad:
Meddelelser
En ny funktion til sammenfatning af notifikationer internt kendt som "Greymatter Catch Up" vil gøre det nemt for brugere at få en komplet oversigt over deres seneste notifikationer. Apple har allerede en funktion kaldet "Scheduled Summary", som opsummerer notifikationer på iOS og iPadOS, og det vil være en smartere opgradering til det.
Siri
Siri forventes at få en smartere responsramme takket være en ny Ajax LLM på enheden, som også vil drive Apples indbyggede applikationer. Siri vil være i stand til at bruge brugerens data såsom kontakter, kalenderbegivenheder, lokationer og mere til at give smartere svar.
Den smarte stemmeassistent vil også være i stand til at oprette resuméer af lange artikler, der ligner Safari 18, samt transskribere lyd i Notes og Voice Memos apps. Mens al denne behandling vil blive udført lokalt med Ajax LLM, vil cloud-baseret behandling blive brugt til beregningsmæssigt komplekse opgaver, hvor det er nødvendigt, mens privatlivets fred bevares. Som forventet vil privatlivets fred være et stort fokus for Apple, når de annoncerer disse nye funktioner.
Siris stemme vil også blive forbedret yderligere for at få det til at lyde mere naturligt, ligesom tekst-til-hastighedsforbedringer også vil blive tilføjet.
En anden tilføjelse til Siri vil være medie- og tv-kontrol på tværs af enheder, samtidig med at det giver brugerne mulighed for at bruge en af deres Apple-enheder til at styre afspilning på en anden. AppleInsider mener, at denne funktion vil blive frigivet senere i 2024.
Fotos
iOS 18, iPadOS 18 og macOS 15 vil også få generative AI-opgraderinger til Photos-appen. En af funktionerne bliver Clean Up, som vil gøre det muligt at fjerne uønskede objekter i billeder ved brug af AI – noget som allerede er tilgængeligt i Google Fotos.
Virksomheden arbejder også på en applikation kaldet "Generative Playground", som vil bruge sin LLM til at give mulighed for oprettelse og redigering af billeder. Dette vil give brugerne mulighed for at generere billeder og sende dem via iMessage, samt skabe unikke og brugerdefinerede emojis. Hvordan disse brugerdefinerede emojis vil fungere mellem forskellige platforme som Apples operativsystemer og Windows og Android er endnu uvist.
Noter
Notes-appen vil potentielt også få understøttelse af tekst- og billedgenerering, men det er endnu ikke bekræftet. Hvad der er sikkert, er, at Notes vil indeholde understøttelse af lydoptagelse og transskription i appen samt opsummering.
Disse funktioner vil gøre Notes til en endnu mere nyttig app, især med tilgængeligheden af disse funktioner på alle Apple-platforme inklusive iOS og macOS.
Nye matematiknotater vil også være tilgængelige, som giver mulighed for komplekse matematiske notationer og integreres med den nye og forbedrede Calculator-app. Math Notes vil ikke kun genkende tekst i komplekse matematiske notationer hvor som helst i operativsystemet, men tilbyder også autokorrektur og er i stand til at løse dem. Grafiske udtryk vil også blive understøttet med denne opdatering.
Disse funktioner forventes også at blive gjort tilgængelige for visionOS senere i år i form af forbedrede stemmekommandoer, forudsigelig tekst, smarte svar og mere.
Hvad der mangler i denne nyhedsrapport er, om Apple vil tilføje genererende AI-funktioner til sin kamera-app for forbedret detektering af den virkelige verden. Fotos-appen har allerede evnen til at genkende planter og forskellige objekter, men generativ AI kunne virkelig booste disse funktioner.
Det, der adskiller Apples AI-tilbud sammenlignet med konkurrenter som Google Gemini og ChatGPT, er, at Cupertino-giganten ikke bygger en chatbot. Det er mere fokuseret på at levere disse AI-baserede forbedringer som en del af dets operativsystem og apps, som burde tilbyde en masse værdi for forbrugerne. For chatbot-funktioner skal brugerne stadig stole på konkurrenter, som er let tilgængelige i App Store.
Apple har allerede tidligere lagt en masse arbejde på AI og maskinlæring i iOS og macOS, men nu spiller det tilsyneladende indhentning for konkurrenterne, når det kommer til generativ AI. Det bliver interessant at se, hvordan de nye funktioner fungerer, og hvor godt de bliver modtaget af brugerne.
RELATERET:Hvad vil Apple annoncere den 7. maj? Superstørrelse iPad Air, OLED iPad Pro med M4 og mere
Læs mere:
- Nogle iOS 18 AI-funktioner kan være eksklusive for iPhone 15
- iMessage i iOS 18 for at tilbyde animationer, RCS og AI
- 10 spilskiftende AI-funktioner kommer til iOS 18
- Hvorfor iOS 18 ikke virker revolutionerende på trods af AI-forbedringer
- iOS 18 vil tilbyde tilpasning af appikoner og brugerdefineret emoji-oprettelse
- Apple gør Siri smartere ved at bruge sprogmodeller i iOS 18
- Realtidstransskription kommer til Voice Memoer i iOS 18