苹果Vision Pro头戴式显示器的visionOS操作系统包含一个名为”Visual Search”的功能,听起来与iPhoneiPad上的Visual Lookup功能类似。

苹果Vision Pro“视觉搜索”功能可识别物品、复制印刷文本、翻译等

通过Visual Search,用户可以使用Vision Pro头戴式显示器获取有关物品的信息,检测并与周围的文本进行交互,将现实世界中的印刷文本复制粘贴到应用程序中,将文本在17种不同语言之间翻译等。

现实世界中包含联系信息、网页和单位转换等类似信息的文本可以在visionOS上进行操作。例如,如果一个印刷传单中有一个网站链接,您可以使用Vision Pro扫描该链接,并打开一个Safari窗口查看网站。或者,如果一个食谱需要克而您需要盎司,您可以使用头戴式显示器进行转换。

实时文本翻译也在旅行和其他需要快速翻译所看到的现实世界的情况下非常有用。苹果Vision Pro头戴式显示器将能够自动检测文本和文件,类似于iPhone能够检测照片中的文本并允许与之交互。

Visual Search功能是由Steve Moser发现的。可以通过最新的Xcode beta访问visionOS,因为Apple今天发布了该软件的第一个版本。