iOS 27: Apple rüstet Siri zur KI-Plattform mit Screen Awareness um

Apple kündigt KI-gestützte Barrierefreiheits-Features an. Neue Funktionen für Sehbehinderte und Mobilitätseingeschränkte stehen im Fokus.

Kurz vor der Entwicklerkonferenz WWDC präsentiert Apple eine Reihe von KI-gestützten Neuerungen für Menschen mit Beeinträchtigungen. Die Updates setzen auf lokale Verarbeitung im Gerät und sollen die Privatsphäre der Nutzer schützen.

KI-gestützte Assistenz: VoiceOver und Bilderkennung im Fokus

Bereits Anfang der Woche wurden Details zu einer grundlegenden Überarbeitung von VoiceOver bekannt, Apples langjähriger Bildschirmauslese-Technologie. Das update nutzt den lokalen Neural Engine des Geräts, um natürliche Sprachbeschreibungen von Bildschirminhalten und realen Umgebungen zu generieren. Die neue Funktion „Image Explorer“ analysiert live erfasste visuelle Daten – etwa komplexe Diagramme, Grafiken oder Kamerabilder – und liefert beschreibende Kontextinformationen in Echtzeit.

Anzeige

Angesichts der vielen neuen Funktionen und Fachbegriffe wie „Neural Engine“ oder „VoiceOver“ verlieren viele Nutzer schnell den Überblick. Dieses kostenlose Lexikon erklärt die 53 wichtigsten iPhone-Begriffe in einfachen Worten – inklusive praktischer Aussprachehilfen. Apple-Fachchinesisch endlich verstehen

Für sehbehinderte Nutzer wurde zudem die Magnifier-App erweitert: Sie beschreibt nun die Umgebung per Sprachausgabe. Auch die Sprachsteuerung wurde verbessert. Statt technischer Koordinaten oder Labels genügen künftig natürliche Kommandos wie „Wähle den blauen Ordner aus“. Ein weiteres neues Werkzeug ist der „Accessibility Reader“, der komplexe Dokumente mit mehrspaltigem Text und Tabellen zusammenfasst und übersetzt.

Die lokale Verarbeitung erstreckt sich auch auf den Audiobereich. Apple führt Live-Untertitel in Echtzeit für Telefonate und Videoinhalte ein. Da die Transkription komplett auf dem Gerät stattfindet, bleiben vertrauliche Gespräche geschützt – ein entscheidender Vorteil für Unternehmen mit hohen Sicherheitsanforderungen.

Mobilitätshilfen und globale Gesundheits-Expansion

Auf der Vision Pro-Plattform kommt eine wegweisende Neuerung: In Zusammenarbeit mit den Partnern Tolt und LUCI integriert Apple Eye-Tracking-Technologie, die es Nutzern ermöglicht, kompatible Elektrorollstühle allein durch Blicksteuerung zu navigieren. Die Funktion startet zunächst in den USA und richtet sich an Menschen mit eingeschränkter körperlicher Mobilität.

Parallel dazu weitet Apple seine Gesundheitsfunktionen massiv aus. Seit dem 21. Mai 2026 rollt das Unternehmen die Schlafapnoe-Erkennung und Hörgesundheits-Features global aus – beginnend in Indien und mittlerweile in über 150 Ländern. Die Schlafapnoe-Funktion nutzt das Accelerometer der Apple Watch Series 9, 10, 11 sowie der Ultra-Modelle 2 und 3, um Atemstörungen während des Schlafs zu erkennen.

Die AirPods Pro 3 erhalten einen klinisch validierten Hörtest, dessen Daten automatisch in der Health-App gespeichert und mit Ärzten geteilt werden können. Diese Werkzeuge interpretieren Sensordaten mit Hilfe von maschinellem Lernen und geben Nutzern Frühwarnungen für Erkrankungen, die sonst unentdeckt blieben. Branchenbeobachter sehen in diesen Updates einen weiteren Schritt, Unterhaltungselektronik an die Funktionalität medizinischer Geräte heranzuführen – gestützt durch klinische Validierung und in einigen Regionen durch Zulassungen wie die der FDA für die Schlafapnoe-Erkennung.

iOS 27 und watchOS 27: Der Weg zur WWDC 2026

Die softwaretechnische Grundlage dieser Features wird voraussichtlich auf der WWDC 2026 am 8. Juni 2026 vorgestellt. Berichten zufolge werden iOS 27 und watchOS 27 die zentralen Plattformen für die Neuerungen sein. Eine auffällige Änderung in iOS 27 ist das erste große Redesign der AirPods-Einstellungen seit 2016.

Anzeige

Jedes große System-Update bringt neue Einstellungen mit sich, die für die Sicherheit Ihrer Daten entscheidend sind. Apple-Experte Detlef Meyer zeigt Ihnen in diesem kostenlosen Ratgeber, wie Sie iOS-Updates stressfrei installieren und wichtige Privatsphäre-Optionen richtig konfigurieren. Kostenlosen Guide für sichere iOS-Updates sichern

Erstmals sollen Nutzer zudem die Möglichkeit erhalten, fremde generative KI-Modelle wie Claude, Gemini oder ChatGPT für bestimmte visuelle und kreative Aufgaben in Funktionen wie „Image Playground“ und „Genmoji“ auszuwählen. Dieser modulare Ansatz folgt regulatorischem Druck in bestimmten Regionen: iOS 27 wird voraussichtlich systemweite Unterstützung für Google Cast innerhalb der EU enthalten, um den Anforderungen des Digital Markets Act (DMA) zu entsprechen.

Auch die Apple TV-Plattform profitiert von Barrierefreiheits-Verbesserungen mit dem kommenden tvOS 27. Zu den wichtigsten Neuerungen gehören anpassbare Textgrößen für Menüs und kompatible Apps sowie die geräteinterne Live-Untertitel-Generierung für englischsprachige Videoinhalte. Während einige große Streaming-Dienste weiterhin eigene Untertitel-Technologien nutzen dürften, schafft das systemweite Update eine grundlegende Zugänglichkeit für die gesamte tvOS-Umgebung.

Siri im Wandel: Vom Sprachassistenten zur KI-Plattform

Der Wandel hin zu einer „Siri-zentrierten“ KI-Erfahrung ist ein zentrales Element des Software-Zyklus 2026. Apple hat Berichten zufolge die Subdomain „genai.apple.com“ eingerichtet, was den massiven Vorstoß in generative KI signalisiert. Siri steht vor einer grundlegenden Überarbeitung: Der Assistent soll künftig als dedizierte App mit Text- und Sprachmodus daherkommen, eine Chronik vergangener Interaktionen führen und über „Screen Awareness“ verfügen – die Fähigkeit, in Echtzeit zu verstehen, was der Nutzer gerade auf dem Bildschirm sieht.

Diese Entwicklung verlief nicht ohne Hindernisse. Branchenquellen zufolge zahlte Apple kürzlich eine Vergleichssumme von rund 250 Millionen Euro im Zusammenhang mit früheren Verzögerungen in der KI-Entwicklung. Um den aktuellen Rollout zu beschleunigen, hat das Unternehmen offenbar Googles Gemini-Modelle lizenziert, um Siris Konversationsfähigkeiten zu stärken. Die neue Siri-Oberfläche soll ein dunkles Design und einen „glühenden“ Cursor im Dynamic Island erhalten – weg vom traditionellen Overlay hin zu einer integrierten, chat-ähnlichen Ästhetik.

Im Wearable-Bereich konzentriert sich watchOS 27 auf biometrische Präzision. Das Update verbessert die Herzfrequenz-Genauigkeit während hochintensiven Intervalltrainings (HIIT) und in Umgebungen mit starken Vibrationen. Ziel ist es, die Lücke zwischen Handgelenkssensoren und traditionellen Brustgurten zu schließen. Der erwartete KI-Gesundheitscoach mit dem Codenamen „Mulberry“ wurde Berichten zufolge jedoch verschoben und könnte erst im nächsten Frühjahr erscheinen.

Ausblick: Was Herbst 2026 bringt

Nach der ersten Beta-Phase ab dem 8. Juni 2026 werden die finalen Versionen von iOS 27, watchOS 27 und tvOS 27 voraussichtlich im September 2026 für alle Nutzer verfügbar sein. Dieser Rollout markiert einen Hardware-Übergang: Ältere Geräte wie das iPhone 11, XR, XS sowie die Apple Watch Series 5 werden voraussichtlich keine Unterstützung mehr für die neuen Betriebssysteme erhalten.

Die in den Vorjahren eingeführten Gestensteuerungen werden ebenfalls ausgebaut. Die „Double Tap“-Geste wird für Drittanbieter-Entwickler geöffnet, was eine noch freihändigere Interaktion im gesamten Ökosystem ermöglicht. Während Apple sich auf seine Juni-Keynote vorbereitet, bleibt die Strategie klar: Die neuesten Apple-Intelligence-Funktionen erfordern moderne Hardware mit leistungsstarken Neural Engines – grundlegende Verbesserungen der Barrierefreiheit wie Textskalierung und einfache Sprachbefehle bleiben jedoch einem breiteren Nutzerkreis zugänglich.