Mit der Veröffentlichung von macOS Monterey Macs haben die Fähigkeit erlangt, Text in Bildern zu erkennen und Benutzern die Möglichkeit zu geben, auf unterschiedliche Weise mit dem Text zu interagieren. Apple stellte Live Text erstmals während seiner WWDC-Entwicklerkonferenz im Juni 2021 vor. Damals wurde die Funktion für iOS 15 vorgeführt, aber die Vorschauseite für macOS Monterey enthüllte später, dass Live Text auch für Macs verfügbar sein würde.
Unter iOS 15 lässt Apple Benutzer Text über die Fotos-App oder in Bildern auswählen, die in Safari angezeigt werden, um schnell einen Anruf zu tätigen oder eine E-Mail zu senden. Apple zeigt in einigen Fällen sogar Optionen an, um einen FaceTime-Anruf zu tätigen oder die Nummer zu den Kontakten hinzuzufügen. iPhone-Benutzer können ihre Kamera auch auf ein Foto mit Bild oder Text richten und das Anzeigesymbol verwenden, um schnell damit zu interagieren. Apple hat die Funktion auf dem iPhone XR, iPhone XS und später mit iOS 15 aktiviert.
Auf Macs mit macOS Monterey wird Live-Text nur von ausgewählten Apple-Apps wie z FotosBildschirmfoto, Schnellansicht, Safari und Vorschau. App-Unterstützung von Drittanbietern ist leider nicht verfügbar. Um die Funktion zu verwenden, müssen Benutzer lediglich den Cursor auf Text in Bildern platzieren. Der Cursor ändert sich von einem Pfeil zu einem Textauswahlwerkzeug. Von hier aus können Benutzer den Cursor ziehen, um den gesamten oder einen Teil des Textes auszuwählen. Danach stehen den Benutzern mehrere interaktive Optionen zur Verfügung. Beispielsweise können Benutzer den Text in einem Bild kopieren und in eine andere App oder ein anderes Dokument einfügen. Benutzer können auch bei gedrückter Strg-Taste oder mit der rechten Maustaste auf den ausgewählten Text klicken, um seine Definition nachzuschlagen, genau wie bei Text auf einer Webseite oder in einem Dokument. Alternativ können sie im Internet nach dem Text suchen, indem sie denselben Strg-Klick-Befehl verwenden. Mit derselben Aktion können Benutzer auch Text übersetzen, aber diese Funktion ist nicht für alle Sprachen und in allen Regionen verfügbar.
Es gibt noch einige andere Funktionen, die Live Text bietet. Durch Strg+Klick und anschließendes Klicken auf den Abwärtspfeil können Benutzer eine Telefonnummer anrufen, eine Nachricht senden oder einen FaceTime-Audio- oder -Videoanruf tätigen. Sie können auch auf eine E-Mail-Adresse klicken, um sie zu Kontakten hinzuzufügen, eine E-Mail zu senden oder einen FaceTime-Anruf zu starten. Schließlich können sie auf eine Website-Adresse klicken, um sie in ihrem Browser zu öffnen, oder Quick Look verwenden, um einen Blick auf die Website-Informationen zu werfen. Auf Safari können Benutzer auch eine Adresse in Maps öffnen.
Derzeit unterstützt die Live-Text-Funktion auf iPhones und Macs nur eine Handvoll Sprachen, darunter Englisch, Französisch, Deutsch, Chinesisch, Kantonesisch, Italienisch, Portugiesisch und Spanisch. Die Mac und die iPhone-Funktion ist ebenfalls nur in ausgewählten Regionen verfügbar, darunter die USA, Großbritannien, China, Indien, Australien, Kanada und ausgewählte Länder in Europa, Südamerika und dem Nahen Osten.