Das visionOS-Betriebssystem des Apple Vision Pro-Headsets enthält eine Funktion namens „Visual Search“, die der visuellen Suchfunktion auf dem iPhone und iPad ähnelt.

Helm Vision Pro 1
Mit der visuellen Suche können Benutzer das Vision Pro-Headset verwenden, um Informationen über einen Artikel abzurufen, Text in der Welt um sie herum zu erkennen und mit ihm zu interagieren, realen gedruckten Text zu kopieren und in Apps einzufügen, Text zwischen 17 verschiedenen Sprachen zu übersetzen usw. .

In „visionOS“ können reale Texte verwendet werden, die Kontaktinformationen, Webseiten, Einheitenumrechnungen und ähnliche Informationen enthalten. Wenn beispielsweise ein gedrucktes Dokument einen Link zu einer Website enthält, können Sie den Link mit Vision Pro scannen und so ein Safari-Fenster öffnen, um die Website anzuzeigen. Oder wenn ein Rezept Gramm erfordert und Sie Unzen benötigen, können Sie dies mit dem Headset umrechnen.

Die Textübersetzung in Echtzeit ist auch auf Reisen und in anderen Fällen nützlich, in denen Sie möglicherweise schnell übersetzen möchten, was Sie in der realen Welt sehen. Das „Apple Vision Pro“-Headset wird in der Lage sein, Text und Dokumente automatisch zu erkennen, ähnlich wie das „iPhone“ Text in Fotos erkennen und eine Interaktion damit ermöglichen kann.

Die visuelle Suchfunktion wurde in ‌visionOS‌ gefunden von Steve Moser. Auf „visionOS“ kann derzeit über die neueste Xcode-Beta zugegriffen werden, da Apple heute die erste Version der Software veröffentlicht hat.