Apple arbetar för närvarande på ett antal AI-funktioner för iOS 18 och iPadOS 18 som de kommer att tillkännage vid WWDC 2024. Apple kommer att använda LLM på enheten för att driva dessa funktioner som kommer att användas för att förbättra Siri, Notes, Messages, Photos, Calendar och mycket mer.
Enligt en rapport avAppleInsider, arbetar Apple på Project Greymatter, som är namnet på gänget med AI-funktioner som kommer att finnas i iOS 18 och iPadOS 18. Här är en fullständig sammanfattning av de nya funktionerna och hur de kommer att förbättra olika delar av operativsystemen på iPhone och iPad:
Aviseringar
En ny funktion för sammanfattning av meddelanden internt känd som "Greymatter Catch Up" kommer att göra det enkelt för användare att få en fullständig sammanfattning av sina senaste meddelanden. Apple har redan en funktion som heter "Scheduled Summary" som sammanfattar aviseringar på iOS och iPadOS och det kommer att vara en smartare uppgradering av den.
Siri
Siri förväntas få ett smartare svarsramverk tack vare en ny Ajax LLM på enheten, som också kommer att driva Apples inbyggda applikationer. Siri kommer att kunna använda användarens data som kontakter, kalenderhändelser, platser och mer för att ge smartare svar.
Se även:Apple kommer att tillkännage nya iPad Pro och iPad Air-modeller den 7 maj eventet "Let Loose"
Den smarta röstassistenten kommer också att kunna skapa sammanfattningar av långa artiklar, liknande Safari 18, samt transkribera ljud i apparna Notes och Voice Memos. Medan all denna bearbetning kommer att göras lokalt med Ajax LLM, kommer molnbaserad bearbetning att användas för beräkningsmässigt komplexa uppgifter där det behövs, samtidigt som integriteten hålls intakt. Som väntat kommer integritet att vara ett stort fokus för Apple när de tillkännager dessa nya funktioner.
Siris röst kommer också att förbättras ytterligare för att få det att låta mer naturligt, liksom text-till-hastighetsförbättringar kommer också att läggas till.
Ett annat tillägg till Siri kommer att vara media- och TV-kontroller över flera enheter, samtidigt som användare kan använda en av sina Apple-enheter för att styra uppspelningen på en annan. AppleInsider tror att den här funktionen kommer att släppas senare under 2024.
Foton
iOS 18, iPadOS 18 och macOS 15 kommer också att få generativa AI-uppgraderingar för Photos-appen. En av funktionerna kommer att vara Clean Up, som gör det möjligt att ta bort oönskade objekt i bilder med hjälp av AI – något som redan är tillgängligt i Google Photos.
Företaget arbetar också med en applikation som heter "Generative Playground" som kommer att använda sin LLM för att möjliggöra skapande och redigering av bilder. Detta gör det möjligt för användare att skapa bilder och skicka dem via iMessage, samt skapa unika och anpassade emojis. Hur dessa anpassade emojis kommer att fungera mellan olika plattformar som Apples operativsystem och Windows och Android är ännu inte att se.
Anteckningar
Notes-appen kommer potentiellt att få stöd för text- och bildgenerering också, men det är ännu inte bekräftat. Vad som är säkert är att Notes kommer att ha stöd för ljudinspelning och transkription i appen, såväl som sammanfattningar.
Dessa funktioner kommer att göra Notes till en ännu mer användbar app, speciellt med tillgången till dessa funktioner på alla Apple-plattformar inklusive iOS och macOS.
Nya Math Notes kommer också att finnas tillgängliga som möjliggör komplexa matematiska notationer och integreras med den nya och förbättrade Calculator-appen. Math Notes kommer inte bara att känna igen text i komplexa matematiska notationer var som helst i operativsystemet, utan erbjuder också autokorrigering och kan lösa dem. Grafiska uttryck kommer också att stödjas med den här uppdateringen.
Dessa funktioner förväntas också göras tillgängliga för visionOS senare i år i form av förbättrade röstkommandon, prediktiv text, smarta svar och mer.
Vad som saknas i denna nyhetsrapport är om Apple kommer att lägga till genererande AI-funktioner till sin kameraapp för förbättrad upptäckt av den verkliga världen. Foto-appen har redan förmågan att känna igen växter och olika föremål, men generativ AI kan verkligen öka dessa funktioner.
Det som skiljer Apples AI-erbjudanden jämfört med konkurrenter som Google Gemini och ChatGPT är att Cupertino-jätten inte bygger en chatbot. Det är mer fokuserat på att tillhandahålla dessa AI-baserade förbättringar som en del av sitt operativsystem och appar, vilket borde erbjuda mycket värde för konsumenterna. För chatbot-funktioner måste användare fortfarande lita på konkurrenter som är lätt tillgängliga i App Store.
Apple har redan lagt ner mycket arbete på AI och maskininlärning i iOS och macOS tidigare, men nu verkar det ha kommit ikapp konkurrenterna när det kommer till generativ AI. Det ska bli intressant att se hur de nya funktionerna fungerar och hur väl de tas emot av användarna.
Läs mer:
- Vissa iOS 18 AI-funktioner kan vara exklusiva för iPhone 15
- iMessage i iOS 18 för att erbjuda animationer, RCS och AI
- 10 spelförändrande AI-funktioner kommer till iOS 18
- Varför iOS 18 inte verkar revolutionerande trots AI-förbättringar
- iOS 18 kommer att erbjuda anpassning av appikoner och skapande av anpassade emojis
- Apple gör Siri smartare med hjälp av språkmodeller i iOS 18
- Transkription i realtid kommer till röstmemon i iOS 18