Siri und Apple Intelligence den Weg ebnen: Entwickler erhalten Zugang zu neuer Schnittstelle

Bisher profitiert Apples Sprachassistenz Siri kaum von den Errungenschaften, die mit Apple Intelligence einhergehen. In der Entwicklerdokumentation tauchen jetzt erste Hinweise auf, wie sich Apples Softwareentwickler die zukünftige Interaktion zwischen der systemeigenen Assistenzfunktion und der hauseigenen KI vorstellen. Unter dem Titel „Bildschirminhalt für Siri und Apple Intelligence bereitstellen“ stellt Apple auf dem Entwicklerportal eine Programmierschnittstelle (API) vor, mit denen App-Programmierer Inhalte ihrer App für KI-Verarbeitung vorbereiten können.

Entsprechend markierte Inhalte sollen auf diese Weise an Siri und Apple Intelligence weitergereicht werden – und auf expliziten Wunsch des Anwenders auch an externe KI-Dienste. Als Beispiel nennt Apple eine aktuell angezeigte Webseite. Nutzer könnten mit der Frage „Hey Siri, wovon handelt dieses Dokument?“ eine Zusammenfassung anfordern. Die neue Programmierschnittstelle wird Teil von AppEntity – Entwickler bekommen in der NSUserActivity-Klasse eine Möglichkeit, ihre Inhalte passend aufzubereiten. Die Dokumentation offeriert exemplarische Inhalte, etwa Fotos, Tabellen oder Textdokumente, und beschreibt neben Anwendungsszenarien ein jeweiliges Swift-Makro, das in diesem Fall zur Anwendung kommen könnte.

ChatGPT macht in iOS 18.2 Bildschirmfotos
Um ungeduldige KI-Fans schnellstmöglich eine KI-Integration zu bieten, verwendet die optionale ChatGPT-Einbindung der Beta von iOS 18.2 in den meisten Fällen einen Workaround: Anstatt dediziert strukturierte Inhalte aus Apps entgegenzunehmen, wird ein Screenshot des Bildschirminhalts angefertigt und an die OpenAI-Server zur Analyse übermittelt. Stellen App-Entwickler ihre Inhalte über eine Programmierschnittstelle bereit, hätte dies große Vorteile gegenüber der Bildschirmfoto-Methode: Bilder würden in nativer Auflösung weitergegeben, Texte nicht mehr am Bildschirmrand abgeschnitten.

Apple Intelligence für Siri wohl nicht mehr in diesem Jahr
Die für die aktuell als Beta verfügbare Xcode-Version 16.2 vorgesehene Schnittstelle findet erstmals in iOS 18.2, macOS 15.2 und entsprechenden Versionen für tvOS und visionOS Anwendung. Es ist jedoch unwahrscheinlich, dass Anwender darin bereits auf entsprechend erweiterte Siri-Fähigkeiten zugreifen können: Erst zum Update mit der Nummer 4 hinter dem Punkt wird eine umfassende Erweiterung der Siri-Fähigkeiten prognostiziert; diese erscheint wahrscheinlich im Frühjahr 2025.

Kommentare

torsen putschnasz05.11.24 20:21

Noch bekomme ich das Gefühl nicht los, als würde Apple krampfhaft an Siri festhalten. Sinnbildlich für bislang alles, was uns das Unternehmen in Sachen KI zur Hand gibt. Ich werde dennoch den Teufel tun, hierbei (ver)urteilen zu wollen. Wir stehen damit erst am Anfang, wilder Westen reloaded. Bin gespannt, wie's weitergeht.

rkb0rg05.11.24 22:58

torsen putschnasz

Noch bekomme ich das Gefühl nicht los, als würde Apple krampfhaft an Siri festhalten. […]
Bin gespannt, wie's weitergeht.

Es hieß mal Siri sei so programmiert, dass es schwierig wäre den Unterbau beliebig zu erweitern, um so beispielsweise ein LLM hinzuzufügen. Ich könnte mir vorstellen, dass Siri in der jetzigen Funktion erstmal erhalten bleibt und stattdessen einen neuen Überbau bekommt, der dann entscheidet, welche Befehle an das alte Siri weitergegeben werden (bspw. schalte das Licht im Flur an). Ich bin auf jeden Fall auch gespannt wie es mit Siri weitergeht. Habe sie über die Jahre schon liebgewonnen, die doofe Nuss

Raziel106.11.24 10:17

Warum spekuliert ihr? Apple hat doch bei der WWDC klar dargestellt was geplant ist und in den passenden Papers auch viele technische Details genannt. Siri wird natürlich als Siri aus Kundensicht mehr oder minder bleiben. Dahinter wird sich aber viele ändern und erweitert werden. Technisch wird das alte Siri in vielen Bereich dann so nicht mehr existieren.

Kommentare

Kommentieren

Sie müssen sich einloggen, um die News kommentieren zu können.