用于与扩展现实系统一起使用的物理配套设备的制作方法

专利2023-04-07  8


用于与扩展现实系统一起使用的物理配套设备
1.相关申请的交叉引用
2.本技术要求2020年4月17日提交的名称为“physical companion devices for use with computer-generated reality systems”的美国临时专利申请号63/011,980的优先权权益,该申请的公开内容据此全文并入本文。
技术领域
3.本说明书整体涉及扩展现实环境。


背景技术:

4.增强现实技术旨在通过提供利用电子信息增强的增强物理环境来桥接虚拟环境和物理环境之间的间隙。因此,电子信息似乎是如用户在用户经由增强现实技术查看物理环境时感知的物理环境的一部分。然而,当用户未经由增强现实技术查看时,电子信息不会在物理环境中持续。
附图说明
5.本主题技术的一些特征在所附权利要求书中被示出。然而,出于解释的目的,在以下附图中阐述了本主题技术的若干实施方案。
6.图1示出了根据一个或多个实施方式的包括可实现本主题系统的各种电子设备的示例性系统架构。
7.图2示出了根据一个或多个实施方式的电子设备和配套设备的示例性特征的框图。
8.图3示出了根据本主题技术的实施方式的电子设备和一个或多个配套设备的物理环境的示例。
9.图4示出了根据本主题技术的一个或多个实施方式的与存储内容相关联的配套设备的各方面。
10.图5示出了根据本主题技术的一个或多个实施方式的已经与存储内容相关联的配套设备的各方面。
11.图6示出了根据本主题技术的一个或多个实施方式的进入扩展现实设备的视野的已经与存储内容相关联的配套设备的各方面。
12.图7示出了根据本主题技术的实施方式的具有便携式主体和唯一标识符的配套设备。
13.图8示出了根据本主题技术的实施方式的具有便携式主体和通信电路的配套设备。
14.图9示出了根据本主题技术的实施方式的具有便携式主体和处理电路的配套设备。
15.图10示出了根据本主题技术的实施方式的具有便携式主体和安装到便携式主体
的显示器的配套设备。
16.图11至图13示出了根据本主题技术的一个或多个实施方式的将配套设备与扩展现实系统的内容相关联的其他方式。
17.图14示出了根据本主题技术的一个或多个实施方式的提供另一个电子设备对内容的访问的配套设备。
18.图15示出了根据本主题技术的实施方式的用于将扩展现实系统的内容与配套设备相关联的示例性过程的流程图。
19.图16示出了可利用其来实现本主题技术的一个或多个实施方式的电子系统。
具体实施方式
20.下面示出的具体实施方式旨在作为本主题技术的各种配置的描述并且不旨在表示本主题技术可被实践的唯一配置。附图被并入本文并且构成具体实施方式的一部分。具体实施方式包括具体的细节旨在提供对本主题技术的透彻理解。然而,本主题技术不限于本文阐述的具体细节,而是可采用一个或多个其他实施方式来实践。在一个或多个实施方式中,以框图形式示出了结构和部件,以便避免使本主题技术的概念模糊。
21.物理环境是指人们在没有电子设备帮助的情况下能够对其感测和/或与其交互的物理世界。物理环境可包括物理特征,诸如物理表面或物理对象。例如,物理环境对应于包括物理树木、物理建筑物和物理人的物理公园。人们能够诸如通过视觉、触觉、听觉、味觉和嗅觉来直接感测物理环境和/或与物理环境交互。相反,扩展现实(xr)环境是指人们经由电子设备感测和/或交互的完全或部分模拟的环境。例如,xr环境可包括增强现实(ar)内容、混合现实(mr)内容、虚拟现实(vr)内容等。在xr系统的情况下,跟踪人的物理运动的一个子集或其表示,并且作为响应,以符合至少一个物理定律的方式调节在xr系统中模拟的一个或多个虚拟对象的一个或多个特征。例如,xr系统可以检测头部移动,并且作为响应,以与此类视图和声音在物理环境中变化的方式类似的方式调节呈现给人的图形内容和声场。又如,xr系统可以检测呈现xr环境的电子设备(例如,移动电话、平板电脑、膝上型电脑等)的移动,并且作为响应,以类似于此类视图和声音在物理环境中将如何改变的方式调节呈现给人的图形内容和声场。在一些情况下(例如,出于可达性原因),xr系统可响应于物理运动的表示(例如,声音命令)来调节xr环境中图形内容的特征。
22.有许多不同类型的电子系统使人能够感测和/或与各种xr环境交互。示例包括头戴式系统、基于投影的系统、平视显示器(hud)、集成有显示能力的车辆挡风玻璃、集成有显示能力的窗户、被形成为设计用于放置在人的眼睛上的透镜的显示器(例如,类似于隐形眼镜)、耳机/听筒、扬声器阵列、输入系统(例如,具有或不具有触觉反馈的可穿戴或手持式控制器)、智能电话、平板电脑、以及台式/膝上型计算机。头戴式系统可具有集成不透明显示器和一个或多个扬声器。另选地,头戴式系统可被配置为接受外部不透明显示器(例如,智能电话)。头戴式系统可结合用于捕获物理环境的图像或视频的一个或多个成像传感器、和/或用于捕获物理环境的音频的一个或多个麦克风。头戴式系统可具有透明或半透明显示器,而不是不透明显示器。透明或半透明显示器可以具有媒介,代表图像的光通过该媒介被引导到人的眼睛。显示器可以利用数字光投影、oled、led、uled、硅基液晶、激光扫描光源或这些技术的任意组合。媒介可以是光学波导、全息图媒介、光学组合器、光学反射器、或它
们的任意组合。在一些实施方式中,透明或半透明显示器可被配置为选择性地变得不透明。基于投影的系统可以采用将图形图像投影到人的视网膜上的视网膜投影技术。投影系统也可以被配置为将虚拟对象投影到物理环境中,例如作为全息图或在物理表面上。
23.本文所描述的本主题技术的实施方式提供了扩展现实系统以利用在xr环境内生成和/或存储的内容可与其相关联的一个或多个物理配套设备。本文公开的系统和方法将系统生成和/或存储的内容与物理配套设备相关联,使得即使当系统的xr部件空闲或断电时,关联也持续。以此方式,xr系统的用户可被提供便携式配套设备(在本文中有时被称为“stone”或“go stone”),用户可随身携带该便携式配套设备以从物理世界内的xr环境输送内容。相关联的内容可稍后由相同的xr系统在xr系统检测到配套设备时访问,并且/或者由其他设备和/或xr系统在那些设备和/或系统检测到配套设备时访问。以此方式,xr系统的用户可被提供在物理世界内携带内容(诸如数字照片堆叠、活动文档或应用的状态和/或数字货币(作为示例))以用于稍后由各种设备或系统访问的能力。
24.在各种实施方式中,配套设备可以是具有可由另一个设备的相机检测的唯一标识符的非有源设备、具有可使用来自另一个设备的无线电力来传输的存储的唯一标识符的无源设备、或具有用于处理标识符、内容等的存储和/或传输的处理电路和/或存储器的有源设备。
25.图1示出了根据一个或多个实施方式的包括可实现本主题系统的各种电子设备的示例性系统架构100。然而,并非所有所描绘的部件均可在所有实施方式中使用,并且一个或多个实施方式可包括与图中所示的那些相比附加的或不同的部件。可进行这些部件的布置和类型的变化,而不脱离本文所列出的权利要求的实质或范围。可提供附加的部件、不同的部件或更少的部件。
26.系统架构100包括电子设备105、手持式电子设备104、电子设备110、电子设备115、配套设备160和服务器120。出于解释的目的,系统架构100在图1中被示出为包括电子设备105、手持式电子设备104、电子设备110、电子设备115、配套设备160和服务器120;然而,系统架构100可包括任何数量的电子设备、配套设备和任何数量的服务器或包括多个服务器的数据中心。
27.电子设备105可为包括能够向用户呈现扩展现实环境的可视化的显示系统的智能电话、平板电脑或头戴式便携式系统(例如,可由用户穿戴的头戴式显示设备)。电子设备105可用电池和/或另一电源供电。在一个示例中,电子设备105的显示系统向用户提供扩展现实环境的立体呈现,使得能够提供特定场景渲染的三维视觉显示。在一个或多个实施方式中,代替利用电子设备105来访问扩展现实环境或除此之外,用户可使用手持式电子设备104,诸如平板电脑、手表、移动设备等。
28.电子设备105可包括一个或多个相机,诸如相机150(例如,可见光相机、红外相机等)。此外,电子设备105可包括各种传感器152,包括但不限于相机、图像传感器、触摸传感器、麦克风、惯性测量单元(imu)、心率传感器、温度传感器、激光雷达传感器、雷达传感器、声纳传感器、gps传感器、wi-fi传感器、近场通信传感器、无线电频率传感器等。此外,电子设备105可包括可接收用户输入的硬件元件,诸如硬件按钮或开关。由此类传感器和/或硬件元件检测到的用户输入对应于用于在给定扩展现实环境内发起生成补充虚拟内容的各种输入模态。例如,此类输入模态可包括但不限于面部跟踪、眼睛跟踪(例如,注视方向)、手
部跟踪、姿态跟踪、生物识别读数(例如,心率、脉搏、瞳孔扩张、呼吸、温度、脑电图、嗅觉)、识别语音或音频(例如,特定热字词)以及激活按钮或开关等。电子设备105还可检测场景中的人或对象的存在和/或事件的发生以发起在扩展现实环境内提供补充虚拟内容。
29.电子设备105可通信地耦接到基础设备,诸如电子设备110和/或电子设备115。一般来讲,与电子设备105相比,此类基础设备可包括更多计算资源和/或可用功率。在一个示例中,电子设备105可以各种模式操作。例如,电子设备105可独立于任何基础设备以独立模式操作。当电子设备105以独立模式操作时,输入模态的数量可受到电子设备105的功率和/或处理限制的约束,诸如设备的可用电池功率。响应于功率限制,电子设备105可停用设备自身内的某些传感器以保持电池功率和/或释放处理资源。
30.电子设备105还可以无线连线模式操作(例如,经由无线连接与基础设备连接),从而与给定基础设备结合工作。电子设备105还可以电子设备105物理地连接到基础设备(例如,经由电缆或一些其他物理连接器)的连接模式工作,并且可利用由基础设备提供的电力资源(例如,在基础设备在物理地连接时对电子设备105充电的情况下)。
31.当电子设备105以无线连线模式或连接模式操作时,可将处理用户输入和/或渲染扩展现实环境的至少一部分卸载到基础设备,从而减少电子设备105上的处理负担。例如,在一个实施方式中,电子设备105结合电子设备110或电子设备115工作以生成扩展现实环境,该扩展现实环境包括以实时方式在用户与所生成的扩展现实环境之间实现不同形式的交互(例如,视觉、听觉和/或物理或触觉交互)的物理对象和/或虚拟对象。在一个示例中,电子设备105提供对应于扩展现实环境的场景的渲染,该场景可被用户感知并以实时方式交互。另外,作为呈现渲染场景的一部分,电子设备105可向用户提供声音和/或触觉或触感反馈。给定渲染场景的内容可能取决于可用处理能力、网络可用性和容量、可用电池功率和当前系统工作负载。
32.在一个实施方式中,电子设备105在电子设备105的附近(例如,在一个或多个传感器152的范围内和/或在电子设备105的一个或多个相机诸如相机150的视野内)检测配套设备160。电子设备105可检测配套设备160的唯一标识符(例如,使用相机150、传感器152和/或电子设备105内部的通信电路)。电子设备105可确定(例如,经由与配套设备160、服务器120和/或电子设备105处的存储器通信)存储在配套设备160、服务器120、电子设备105和/或任何其他设备处的任何内容是否与配套设备160相关联。
33.例如,如果配套设备160是无源设备,则电子设备105可获得配套设备160的标识符并且获得先前与配套设备160相关联的内容,该内容存储在电子设备105、服务器120和/或使用该标识符的另一个设备。在其他示例中,可从配套设备160获得用于访问内容的密钥(例如,解密密钥),并且/或者可基于配套设备160的标识符获得和/或导出该密钥。在另一个示例中,电子设备105可获得存储在配套设备160处的内容。在其他示例中,电子设备105可向配套设备160分配和/或转移尚未与配套设备相关联的内容。
34.网络106可将例如电子设备105、电子设备110、配套设备160和/或电子设备115与每个其他设备和/或服务器120通信地(直接或间接)耦接。在一个或多个实施方式中,网络106可以是可包括互联网或可通信地耦接到互联网的设备的互连网络。
35.电子设备110可包括触摸屏并且可以是例如包括触摸屏的智能电话、便携式计算设备,诸如包括触摸屏的膝上型计算机、包括触摸屏的配套设备(例如数字相机、耳机)、包
括触摸屏的平板设备、包括触摸屏的可穿戴设备(诸如手表、腕带等)、包括例如触摸屏的任何其他适当设备或者具有触控板的任何电子设备。在一个或多个实施方式中,电子设备110可不包括触摸屏,但可支持触摸屏类似的手势,诸如在扩展现实环境中。在一个或多个实施方式中,电子设备110可包括触控板。在图1中,通过举例的方式,电子设备110被描绘为具有触摸屏的移动智能电话设备。在一个或多个实施方式中,电子设备110、手持式电子设备104和/或电子设备105可以是和/或可以包括下文相对于电子系统所述的电子设备的全部或部分,该电子系统在下文相对于图16所述。在一个或多个实施方式中,电子设备110可为另一个设备,诸如互联网协议(ip)相机、平板电脑或配套设备诸如电子触笔等。
36.电子设备115可为例如台式计算机、便携式计算设备诸如膝上型计算机、智能电话、配套设备(例如,数字相机、耳机)、平板设备、可穿戴设备诸如手表、腕带等。在图1中,通过举例的方式,电子设备115被描绘为台式计算机。电子设备115可以是和/或可以包括下文相对于图16讨论的电子系统的全部或部分。
37.服务器120可形成计算机网络或服务器组130的全部或部分,诸如在云计算或数据中心实施中。例如,服务器120存储数据和软件,并且包括用于渲染和生成扩展现实环境的内容诸如图形、图像、视频、音频和多媒体文件的特定硬件(例如,处理器、图形处理器和其他专用或定制处理器)。在一个实施方式中,服务器120可用作云存储服务器,该云存储服务器存储由上述设备和/或服务器120生成的任何前述扩展现实内容。
38.图2示出了根据本公开的各方面的可包括在电子设备105和配套设备160中的各种部件的框图。如图2所示,电子设备105可包括捕获电子设备周围的物理环境的图像的一个或多个相机诸如相机150、获得与电子设备105周围的物理环境相关联的环境信息的一个或多个传感器152。传感器152可包括深度传感器(例如,飞行时间传感器、红外传感器、雷达、声纳、激光器等)、一个或多个麦克风和/或用于感测物理环境的其他类型的传感器。在一些实施方式中,电子设备105还包括用于与配套设备160、电子设备110、电子设备115、服务器120和/或其他设备和/或系统通信的通信电路208。通信电路208可包括用于检测射频识别(rfid)标签的射频(rf)通信电路(rf)通信电路、蓝牙低功耗(ble)通信电路、其他近场通信(nfc)电路、wifi通信电路、蜂窝通信电路和/或其他有线和/或无线通信电路。
39.如图所示,电子设备105包括处理电路204(例如,一个或多个处理器和/或集成电路)和存储器206。存储器206可存储用于由处理电路204执行的指令或代码。存储器206可存储(例如,临时或永久地)由电子设备105生成和/或以其他方式获得的内容。在一些操作场景中,存储器206可存储与存储在存储器206中的内容的部分相关联的一个或多个配套设备(诸如图2的配套设备160)的标识符。
40.处理电路204可生成显示内容以用于由显示器200显示。显示内容可包括物理环境的部分的图像和/或计算机生成的内容,诸如虚拟现实内容、增强现实内容、混合现实内容等。显示内容可包括存储在存储器206中的内容的一个或多个指示器。例如,当用户通过电子设备105打开存储在存储器206中的数字照片时,显示器200可显示图像的副本、图像的缩略图等。如本文所述,电子设备105的显示器200可以是向显示器200提供电子设备105周围的物理环境的透通视频视图(例如,使用来自相机150的图像)的不透明显示器,或可包括允许电子设备105的用户通过显示器直接查看物理环境的部分的透明或半透明显示器。显示器200可在用户经由或通过显示器的对物理环境部分的视图上覆盖计算机生成(cg)内容。
41.为了允许电子设备105和/或另一个设备将内容与配套设备160相关联,配套设备160包括对于该配套设备是唯一的并且可由电子设备105和/或另一个设备访问的标识符210。作为一个示例,标识符210可以是印刷或附接到配套设备的物理主体的代码。代码(诸如字母数字代码、基于图像的代码、快速响应(qr)代码或通常任何代码)可在由电子设备105和/或另一个设备的相机150捕获的图像中获得和/或从其导出以识别配套设备160。在一个或多个实施方式中,代码可使用特定图像传感器(诸如红外(ir)传感器)来检测和/或获得。
42.在一些实施方式中,配套设备160是包括非有源标识符210的没有任何内部电路的非有源设备。在此示例中,标识符210可通过基于光的传感器来识别,该传感器诸如相机、光学传感器、ir传感器、或能够使用在配套设备的表面处或附近的标识符210所反射或发射的光来识别识别符210的另一个传感器。然而,在其他示例中,配套设备160可以是具有由另一个设备(诸如由电子设备105的通信电路208)激活的通信电路212的无源设备,或者可以是具有其自身的处理电路216、存储器214、电池220和/或容纳在配套设备的主体中的显示器218(例如,电子墨水显示器或其他显示器)的有源设备。在配套设备160包括显示器218的实施方式中,显示器218可以是电子墨水(电子墨水)显示器,使得配套设备160可以很小的功率操作。在配套设备160包括处理电路216和/或通信电路212的实施方式中,标识符210可存储在存储器214中,而不是在设备主体的外部上可见。存储在存储器214中的信息可以是加密的和/或密码保护的。
43.图3示出了其中设置有电子设备105和多个配套设备160的物理环境的示例。在图3的示例中,用户101在物理环境300中穿戴电子设备105。在图3的示例中,物理环境300包括物理对象306,该物理对象的一部分可由用户101经由显示器200查看(例如,基于来自一个或多个相机诸如相机150的图像,这些图像被提供给显示器200的不透明实施方式或直接通过显示器200的透明或半透明实施方式),并且该物理对象的部分可由用户直接查看而不使用任何技术(如果本来不从视图阻挡)。在图3的示例中,计算机生成的内容由显示器200显示(例如,覆盖在物理环境300的部分上或前面)。在此示例中,显示器200显示应用窗口304(例如,文件管理器应用窗口、浏览器窗口、社交媒体应用窗口、内容编辑器应用窗口、或任何其他应用用户界面)。在此示例中,用户还已经创建了照片堆叠308(例如,通过从电子设备105可访问的照片库将数字图像拉入虚拟堆叠中)。
44.如图3所指示,每个配套设备160可以是被设置用于与xr系统一起使用的小型(例如,硬币大小)物理对象,该xr系统包括允许穿戴者或用户101与内容诸如存储数据(例如,照片、视频、音频文件、文本文件)的虚拟表示和/或应用交互的xr设备(诸如电子设备105)。
45.如图3的示例中所示,应用窗口304和照片堆叠308各自设置有由显示器200显示的位置指示器310,该位置指示器具有配套设备160中的一者的近似大小和形状。在一个示例中,位置指示器310设置有在视觉上将位置指示器与照片堆叠308(例如,数字图像)链接的插图图标312。然而,图3还示出了其中在没有插图图标的情况下提供位置指示器310的另一个示例,对应用窗口304的接近指示位置指示器310与应用窗口304之间的关联。位置指示器310指示配套设备160可被放置在以便将该配套设备与显示器200上显示的对应内容相关联的位置。
46.图4示出了其中配套设备160中的一者已经物理地移动(例如,由用户101)到物理
环境300中的物理位置的场景,该物理位置对应于由显示器200在其上显示照片堆叠308的位置指示器310的位置。在这种场景中,当电子设备105检测到(例如,使用相机150和/或传感器152)配套设备160处于对应于位置指示器310的位置时,电子设备105将配套设备160与照片堆叠308相关联。
47.当配套设备160与特定内容(例如,在此示例中为照片堆叠308)相关联时,配套设备160可存储该内容(例如,在存储器214中),配套设备160可存储对于另一个设备上存储的内容的链路或密钥(例如,在服务器120处的云中),或者(例如,如果配套设备160是非有源或无源设备)可将关联存储在电子设备105处和/或云中(例如,通过结合存储内容存储stone的唯一标识符)。
48.配套设备160和照片堆叠308之间的电子设备105所生成的关联可持续地存储在电子设备105处、云中(例如,在服务器120中的一者或多者处)和/或在配套设备160处。以此方式,即使当配套设备160不再处于相机150的视野中和/或处于电子设备105的传感器152和/或通信电路208的接近范围内时,照片堆叠308也可与配套设备160一起运输。
49.在图3和图4的示例中,被配置为显示覆盖在物理环境300的视图上的计算机生成的内容的设备诸如电子设备105设置在扩展现实系统中,该扩展显示系统还包括配套设备,该配套设备包括便携式主体和可由设备获得的唯一标识符。如图所示,设备可显示覆盖在物理环境的视图上的存储内容(例如,照片堆叠308或对应于应用窗口304的应用的状态)的指示器。设备可检测物理环境300中的配套设备160,并且响应于对应于已显示指示器的用户请求(例如,在此示例中为将配套设备移动到位置指示器310),将配套设备的唯一标识符与和存储内容相关联的信息相关联。
50.图5示出了其中已经与照片堆叠308相关联的配套设备160已经移出通过或经由显示器200可见的物理环境300的部分的场景。在此示例中,照片堆叠308不再显示在显示器200上,但仍然持续地存储在配套设备160处。
51.图6示出了在稍后时间,当电子设备105在对应于显示器200的区域的视野中的任何位置处再次检测到配套设备160时,如何可在该位置处显示照片集308的指示器(或照片集308本身)。例如,电子设备105的相机或另一个传感器可在配套设备160进入对应于显示器200的区域的视野时(或之前)获得配套设备160的标识符,基于配套设备160的身份来获得照片堆叠、照片列表、照片堆叠的缩略图(例如,从配套设备105处的本地存储装置、从配套设备160、或从服务器诸如服务器120处的远程存储装置),并且显示在配套设备160进入对应于显示器200的区域的视野的位置处或附近的照片堆叠308的指示器和/或照片堆叠308本身。
52.此外,并且如下文结合图14更详细地讨论,如果稍后使配套设备160与另一个设备(例如,用户的膝上型计算机或电子设备105或注册到用户或另一个用户的其他设备)接近,则配套设备160可提供另一个设备对照片集308(例如,和/或已经与该配套设备160相关联的任何其他内容)的访问。
53.应当理解结合图3至图6描述的其中与配套设备160相关联的内容是照片堆叠的示例,此示例仅是说明性的,并且配套设备160可与xr环境中的任何其他内容相关联。作为另一个示例,如果电子设备105的用户正在操作与应用窗口304相关联的应用(诸如社交媒体应用),则电子设备105可显示与该应用相关联的位置指示器310,配套设备160或另一个配
套设备160可在该位置指示器处放置以将该配套设备160与该社交媒体应用(例如,与该应用的开放用户界面、与应用的当前状态、或应用的任何其他方面)相关联。
54.来自可与配套设备160相关联的电子设备105的内容的其他示例包括但不限于用于将应用系留到配套设备160的信息、用于将数字助理动作与配套设备160相关联的信息和/或用于将功能与配套设备160相关联的信息。在一个示例中,电子设备105可将特定应用或网站的特定功能与配套设备160相关联。例如,配套设备160可与电子商务应用的订购功能或购买功能相关联。以此方式,电子设备105的用户可轻击其物理环境中的物理对象(即,与该功能相关联的配套设备160)以便下订单或进行购买。因此,在一些实施方式中,配套设备160可提供触觉对象,用户可在处于xr环境时与该触觉对象物理地交互,并且可为该触觉对象分配各种不同功能。与其中触觉刺激在与xr环境中的cg内容进行交互时不可用(例如,在仅提供手势或语音控制的vr、mr或ar系统中)或者其中控制器必须不断地由用户保持以控制xr环境的系统相比,这可为用户提供与xr环境进行交互的更直观方式。
55.在又一个示例中,一组配套设备160可用于物理分选和/或布置数字内容,诸如使用电子设备105来获得的搜索结果。在此示例中,当搜索(例如,本地存储搜索、远程存储搜索、或网络搜索诸如互联网搜索)由电子设备105执行并且同时多个配套设备160接近电子设备105时,每个配套设备160可与多个配套设备160中的一者相关联以允许用户物理地移动和/或选择配套设备160以分选和/或选择搜索结果。
56.图7至图10示出了根据本公开的各方面的配套设备160的各种实施方式。在图7的示例中,配套设备160被实现为具有物理主体400(例如,由塑料、橡胶、金属、玻璃和/或这些和/或其他材料的组合形成的主体)的无源设备,该物理主体在物理主体400的外表面上具有标识符210。在此示例中,标识符210被实现为物理主体400的外表面上的快速响应(qr)代码,该快速响应代码可由例如另一个设备的相机(诸如电子设备105的相机或另一个电子设备的相机)识别。qr码可被印刷、蚀刻或附接到物理主体400的外表面(作为示例)。
57.图8示出了配套设备160的另一个示例性实施方式,其中通信电路212设置在物理主体400内。例如,物理主体400可形成配套设备160的外壳,该外壳具有其中设置有通信电路212的内腔。在此示例中,通信电路212可以是使用来自另一个设备的感应电力来传输配套设备160的标识符的无源通信电路(诸如nfc标签或rfid标签),或者可以是可被激活以传输标识符的有源(例如,本地供电)通信电路212。
58.图9示出了一个实施方式中的配套设备160的另一个示例,其中配套设备是具有附加电路(诸如设置在物理主体400内的处理电路216和/或存储器214以及通信电路212)的有源设备。在此示例中,存储器214可用于存储配套设备160的标识符、存储在另一个设备或服务器处并且与配套设备160相关联的内容的标识符、用于访问存储在另一个设备或服务器处的内容并且与配套设备160相关联的加密信息,和/或用于存储配套设备160处的内容。加密信息可以是例如密钥和/或可从其导出和/或获得密钥的信息,并且/或者加密信息可以是授权接近设备访问由软件许可证提供的一个或多个应用、特征和/或功能的授权信息(诸如对应于软件许可证)。
59.如图10所示,配套设备160也可被实现有显示器218,该显示器可被操作(例如,由物理主体400内的处理电路216和/或由另一个设备诸如电子设备105的处理电路)以显示与配套设备160相关联(例如,并且存储在该配套设备160处、电子设备105处和/或远程服务器
诸如服务器120处)的内容的指示器1000。在图10的示例中,显示器218显示文本“我的照片”以指示用户的数字照片已经与配套设备160相关联。在其他示例中,显示器218可显示一个或多个照片的缩略图,或者可显示已经与配套设备相关联的其他内容的其他指示器。
60.如在图10的示例中,提供具有显示器218的配套设备160可促进多个配套设备160的使用。例如,用户可以能够在其口袋中携带若干配套设备160,他们稍后可轻松地对该配套设备进行分选以便访问照片、应用、进行中的编辑项目(例如,字处理文档或演示)、货币和/或已经与配套设备160相关联的其他内容。在一些实施方式中,显示器218可提供配套设备160的有限功能用户界面(例如,以允许用户删除内容或与内容的关联(例如,通过按下和保持显示器或设置在物理主体400上的按钮),或输入密码以访问相关联内容)。在本文讨论的各种实施方式中的任一者中,可提供配套设备160而没有任何用户输入部件诸如按钮、触摸界面等或任何物理连接器(例如,使得与配套设备相关联的内容仅可由另一个设备访问并且不物理地耦接或连接到其他设备)。在一些实施方式中,包括其中配套设备160包括处理电路和存储器的实施方式,配套设备160可具有有限功能(例如,用于存储相关联内容或存储用于访问相关联内容的信息的功能,而不具有用于用户交互、处理数据、执行应用等的功能)。
61.在本文所述的各种示例中,配套设备160的物理主体400可具有足够小的尺寸以使得配套设备160例如在用户手部的手掌中携带,或者使得若干配套设备160在用户的手部分或用户的口袋中携带。例如,物理主体可具有小于两英寸、小于一英寸或小于半英寸的最大尺寸。物理主体可具有如图7至图10的示例中的圆形形状(例如,球形形状或椭圆形形状)或可具有另一个形状诸如直线形状。物理主体400的大小和形状可小于智能电话或智能手表的大小,并且模拟硬币(例如,二十五分硬币、五分硬币、十分硬币等)的大小和/或形状。
62.在结合图3至图6讨论的示例中,通过将配套设备160放置在对应于位置指示器310的明显显示位置的物理空间中的位置处,电子设备105可访问的内容与配套设备160相关联。然而,应当理解,内容可以其他方式与配套设备160相关联。
63.图11示出了其中与任何内容不相关联的配套设备160在对应于显示器200的区域的视野内可见,并且其中照片堆叠308和应用窗口304具有相关联的位置指示器310(应当理解,其也是可选的)的示例。
64.图12示出了其中通过将配套设备160放置在物理环境300中的对应于显示器200上的照片堆叠308的显示表示的位置处以将照片堆叠308与配套设备160相关联的一个附加示例。在此示例中,视觉指示器1200(例如,围绕照片堆叠的虚线框或任何其他视觉突出显示或指示器)由显示器200显示以向用户指示照片堆叠308与配套设备160相关联。在一些实施方式中,可向用户呈现用于批准或拒绝关联的选项。
65.图13示出了其中内容本身(例如,在此示例中为所显示的照片堆叠308)的表示移动到配套设备160的位置或朝向该位置移动(如箭头1300所示)以将内容与配套设备相关联的又一个示例。例如,用户101可通过虚拟地抓取或挤压所显示的照片堆叠并将所显示的堆叠拖曳到配套设备160的位置或将照片堆叠投掷或轻扫到配套设备160来向电子设备105提供手势输入。
66.如本文所讨论的,提供可与来自扩展现实系统的内容相关联的配套设备160可促进将内容转移到另一个设备和/或另一个设备对内容的访问。
67.图14示出了被实现为膝上型计算机的另一个电子设备1400的示例,该膝上型计算机可与配套设备160进行交互以访问与配套设备160相关联的内容。如图14所示,电子设备1400可获得配套设备160的标识符(例如,使用相机1404来捕获配套设备160的物理主体400的外表面上的代码的图像,如图7的示例中,或者使用与配套设备160的通信电路的nfc通信以从配套设备的通信电路获得标识符)。然后,电子设备1400可使用配套设备160的标识符从配套设备本身或从另一个源(例如,从电子设备105或从服务器120)获得相关联内容。在一些操作场景中,电子设备1400还可使用配套设备160的身份直接从配套设备160或从另一个源获得与配套设备160相关联的内容的密钥。在另一个示例中,电子设备1400可直接从配套设备160本身获得与配套设备160相关联的内容(例如,如果相关联内容存储在配套设备的存储器214中)。
68.在图14的示例中,电子设备1400已经使用配套设备160来获得照片堆叠308和用于显示应用窗口304的内容,因为它们先前由电子设备105显示,并且在显示器1402上显示相同内容。如图14所示,电子设备1400还可显示由电子设备1400独立于配套设备160生成和/或获得的内容1406。在一些实施方式中,内容1406还可稍后与配套设备160相关联(例如,以用于稍后与电子设备105一起使用或用于转移到另一个用户或另一个设备)。
69.图15示出了根据本主题技术的实施方式的用于将内容与配套设备相关联的示例性过程1500的流程图。出于解释的目的,本文主要参考图1、图2和图7至图10的电子设备105和配套设备160来描述过程1500。然而,过程1500不限于图1、图2和图7至图10的电子设备105和配套设备160,并且过程1500的一个或多个框(或操作)可由其他合适设备(包括电子设备110、电子设备115和/或服务器120)的一个或多个其他部件来执行。进一步出于解释的目的,过程1500的一些框在本文中被描述为顺序地或线性地发生。然而,过程1500的多个框可并行地发生。此外,过程1500的框不必按所示顺序执行,和/或过程1500的一个或多个框不必执行和/或可由其他操作替代。
70.如图15所示,在框1502处,设备(诸如电子设备105)显示覆盖在物理环境的视图上的内容(例如,照片堆叠308、应用窗口304、其他计算机生成的内容等)的指示器。在各种示例中,内容可存储在该设备处或存储在远程设备(诸如另一个设备或服务器诸如服务器120)处。
71.在框1504处,设备获得标识符,诸如物理环境中的配套设备(诸如配套设备160)的标识符210。设备可通过捕获配套设备的便携式主体的图像(例如,使用相机150)或通过从配套设备接收无线通信(例如,从图2的通信电路212到通信电路208)来获得标识符。
72.在框1506处,响应于用户请求,设备可将配套设备的标识符与和内容相关联的信息相关联。设备还可确定(例如,使用相机150和/或传感器152)配套设备160在物理环境中的位置。在框1502处显示覆盖在物理环境的视图上的内容的指示器可包括显示覆盖在物理环境中的另一个位置上的内容的指示器,并且用户请求可包括由用户改变配套设备的位置或指示器的其他位置(例如,通过将配套设备放置在与存储内容的已显示指示器相关联的位置处,或者将存储内容的已显示指示器移动到配套设备的位置或朝向该位置移动,如上文结合例如图3至图6和图11至图13所描述)。
73.将配套设备160的标识符与和内容相关联的信息相关联可包括将配套设备的标识符和与内容相关联的信息存储在与配套设备和该设备分离的远程服务器(诸如服务器120)
处,将内容存储在配套设备处,和/或将配套设备的标识符结合内容存储在电子设备105处。在一个示例中,将配套设备与内容相关联可包括将配套设备的标识符与存储内容相关联地存储在设备处。在一些示例中,内容可被传输到配套设备,并且配套设备可将存储内容存储在配套设备处。在一些示例中,设备可向配套设备提供存储内容的密钥和/或可从其导出密钥的信息。密钥可以是解密密钥、授权密钥,或有助于对存储在配套设备、设备或远程服务器(诸如服务器120)处的加密内容和/或未加密内容进行访问和/或授权的其他密钥。即使在从设备的视野移除配套设备之后,内容也可与配套设备的标识符持续地相关联。
74.在其中配套设备包括显示器(诸如安装到配套设备的便携式主体的电子墨水显示器)的实施方式中,配套设备还可包括操作电子油墨显示器的处理器(诸如图2的处理电路204的处理器)。在内容已经与配套设备相关联之后,处理电路可操作电子墨水显示器以显示与唯一标识符相关联的存储内容的另一个指示器(例如,如图10所示)。
75.如上文结合例如图5和图6所描述,设备可在物理环境中的新位置处检测配套设备,并且显示覆盖在新位置处的物理环境的视图上的存储内容的指示器(例如,响应于使用设备的传感器和/或相机来检测到配套设备并且基于所检测的配套设备的新位置)。
76.如上文结合例如图14所述,当配套设备接近与配套设备和设备分离的附加设备时,配套设备可提供该附加设备(诸如电子设备1400)对内容的访问。
77.如上所述,本技术的一个方面是采集和使用能够从特定且合法的来源获得的数据以用于将内容与便携式配套设备相关联。本公开设想,在一些实例中,该所采集的数据可包括唯一地识别或可用于识别具体人员的个人信息数据。此类个人信息数据可包括视频数据、三维几何数据、人口统计数据、基于位置的数据、在线标识符、电话号码、电子邮件地址、家庭地址、与用户的健康或健身级别相关的生物计量数据或记录(例如,生命特征测量、药物信息、锻炼信息)、出生日期或任何其他个人信息。
78.本公开认识到在本发明技术中使用此类个人信息数据可用于使用户受益。例如,个人信息数据可用于将内容(诸如cg内容)与便携式物理设备相关联。
79.本公开设想负责收集、分析、公开、传输、存储或其他使用此类个人信息数据的实体将遵守既定的隐私政策和/或隐私实践。具体地,将期望此类实体实现和一贯地应用一般公认为满足或超过维护用户隐私的行业或政府所要求的隐私实践。关于使用个人数据的此类信息应当被突出地并能够被用户方便地访问,并应当随数据的收集和/或使用变化而被更新。用户的个人信息应被收集仅用于合法使用。另外,此类收集/共享应仅发生在接收到用户同意或在适用法律中所规定的其他合法根据之后。此外,此类实体应考虑采取任何必要步骤,保卫和保障对此类个人信息数据的访问,并确保有权访问个人信息数据的其他人遵守其隐私政策和流程。另外,这种实体可使其本身经受第三方评估以证明其遵守广泛接受的隐私政策和实践。此外,应针对被收集和/或访问的特定类型的个人信息数据调整政策和实践,并使其适用于适用法律和标准,包括可用于施加较高标准的辖区专有的具体考虑因素。例如,在美国,对某些健康数据的收集或获取可能受联邦和/或州法律的管辖,诸如健康保险流通和责任法案(hipaa);而其他国家的健康数据可能受到其他法规和政策的约束并应相应处理。
80.不管前述情况如何,本公开还预期用户选择性地阻止使用或访问个人信息数据的实施方案。即本公开预期可提供硬件元件和/或软件元件,以防止或阻止对此类个人信息数
据的访问。例如,在将所显示的内容与物理配套设备相关联的情况下,本主题技术可被配置为在注册服务期间或随后的任何时间允许用户选择“选择加入”或“选择退出”参与对个人信息数据的收集和/或共享。除了提供“选择加入”和“选择退出”选项外,本公开设想提供与访问或使用个人信息相关的通知。例如,可在下载应用时向用户通知其个人信息数据将被访问,然后就在个人信息数据被应用访问之前再次提醒用户。
81.此外,本公开的目的是应管理和处理个人信息数据以最小化无意或未经授权访问或使用的风险。一旦不再需要数据,通过限制数据收集和删除数据可最小化风险。此外,并且当适用时,包括在某些健康相关应用中,数据去标识可用于保护用户的隐私。可在适当时通过移除标识符、控制所存储数据的量或特异性(例如,在城市级别而不是在地址级别或在对于面部识别而言不充分的级别收集位置数据)、控制数据如何被存储(例如,在用户间汇集数据)和/或其他方法诸如差异化隐私来促进去标识。
82.因此,虽然本公开广泛地覆盖了使用个人信息数据来实现一个或多个各种所公开的实施方案,但本公开还预期各种实施方案也可在无需访问此类个人信息数据的情况下被实现。即,本发明技术的各种实施方案不会由于缺少此类个人信息数据的全部或一部分而无法正常进行。
83.图16示出了可利用其来实现主题技术的一个或多个实施方式的电子系统1600。电子系统1600可以是图1所示的电子设备105、手持式电子设备104、电子设备110、电子设备115和/或服务器120并且/或者可以是其一部分。电子系统1600可包括各种类型的计算机可读介质以及用于各种其他类型的计算机可读介质的接口。电子系统1600包括总线1608、一个或多个处理单元1612、系统存储器1604(和/或缓存)、rom 1610、永久性存储设备1602、输入设备接口1614、输出设备接口1606以及一个或多个网络接口1616,或者其子集及变型形式。
84.总线1608总体表示在通信上连接电子系统1600的许多内部设备的所有系统、外围设备以及芯片组总线。在一个或多个实施方式中,总线1608将该一个或多个处理单元1612与rom 1610、系统存储器1604和永久性存储设备1602通信地连接。该一个或多个处理单元1612从这些各种存储器单元检索要执行的指令和要处理的数据,以便执行主题公开的过程。在不同的实施方式中,该一个或多个处理单元1612可以是单个处理器或者多核处理器。
85.rom 1610存储该一个或多个处理单元1612以及电子系统1600的其他模块需要的静态数据和指令。另一方面,永久性存储设备1602可以是读写存储器设备。永久性存储设备1602可以是即使在电子系统1600关闭时也存储指令和数据的非易失性存储器单元。在一个或多个实施方式中,海量存储设备(诸如,磁盘或光盘及其相应盘驱动器)可被用作永久性存储设备1602。
86.在一个或多个实施方式中,可移除存储设备(诸如,软盘、闪存驱动器、及其相应盘驱动器)可被用作永久性存储设备1602。与永久性存储设备1602一样,系统存储器1604可以是读写存储器设备。然而,与永久性存储设备1602不同,系统存储器1604可以是易失性读写存储器,诸如随机存取存储器。系统存储器1604可存储一个或多个处理单元1612在运行时可能需要的指令和数据中的任何指令和数据。在一个或多个实施方式中,本主题公开的过程存储在系统存储器1604、永久性存储设备1602和/或rom 1610(它们各自被实现为非暂态计算机可读介质)中。该一个或多个处理单元1612从这些各种存储器单元检索要执行的指
令和要处理的数据,以便执行一个或多个实施方式的过程。
87.总线1608还连接到输入设备接口1614和输出设备接口1606。输入设备接口1614使得用户能够向电子系统1600传送信息以及选择命令。可与输入设备接口1614一起使用的输入设备可包括例如字母数字混合键盘和指向设备(也称为“光标控制设备”)。输出设备接口1606可使得例如能够显示电子系统1600所生成的图像。可与输出设备接口1606一起使用的输出设备可包括例如打印机和显示设备,诸如液晶显示器(lcd)、发光二极管(led)显示器、有机发光二极管(oled)显示器、柔性显示器、平板显示器、固态显示器、投影仪或用于输出信息的任何其他设备。一个或多个实施方式可包括既充当输入设备又充当输出设备的设备,诸如触摸屏。在这些实施方式中,提供给用户的反馈可以是任何形式的感官反馈,诸如视觉反馈、听觉反馈或触觉反馈;并且可以任何形式接收来自用户的输入,包括声学、语音或触觉输入。
88.最后,如图16所示,总线1608还通过一个或多个网络接口1616将电子系统1600耦接到一个或多个网络以及/或者耦接到一个或多个网络节点,诸如图1中所示的电子设备110。这样,电子系统1600可为计算机网络(诸如lan、广域网(“wan”)或内联网)的一部分,或者可为网络的网络(诸如互联网)的一部分。电子系统1600的任何或所有部件可与本主题公开一起使用。
89.上述这些功能可在计算机软件、固件或硬件中实现。该技术可使用一个或多个计算机程序产品实现。可编程处理器和计算机可包括在移动设备中或封装为移动设备。该过程和逻辑流程可由一个或多个可编程处理器和一个或多个可编程逻辑电路执行。通用和专用计算设备以及存储设备可通过通信网络互连。
90.一些实施方式包括将计算机程序指令存储在机器可读或计算机可读介质(也称为计算机可读存储介质、机器可读介质或机器可读存储介质)中的电子部件,诸如微处理器、存储装置以及存储器。此类计算机可读介质的一些示例包括ram、rom、只读光盘(cd-rom)、可刻录光盘(cd-r)、可重写光盘(cd-rw)、只读数字通用光盘(例如,dvd-rom、双层dvd-rom)、各种可刻录/可重写dvd(例如,dvd-ram、dvd-rw、dvd+rw等)、闪存存储器(例如,sd卡,mini-sd卡、micro-sd卡等)、磁性和/或固态硬盘驱动器、只读和可刻录盘、超密度光盘、任何其他光学或磁性介质以及软盘。计算机可读介质可存储计算机程序,该计算机程序可由至少一个处理单元执行并且包括用于执行各种操作的指令集。计算机程序或者计算机代码的示例包括机器代码,诸如由编译器所产生的机器代码,以及包括可由计算机、电子部件或微处理器使用解译器来执行的更高级别代码的文件。
91.虽然上述论述主要涉及执行软件的微处理器或多核处理器,但一些实施方式由一个或多个集成电路诸如专用集成电路(asic)或现场可编程门阵列(fpga)执行。在一些实施方式中,此类集成电路执行存储在电路自身上的指令。
92.如本说明书以及本技术的任何权利要求所用,术语“计算机”、“服务器”、“处理器”及“存储器”均是指电子或其它技术设备。这些术语排除人或者人的群组。出于本说明书的目的,术语显示或正在显示意指在电子设备上显示。如本说明书以及本技术的任何权利要求所使用的,术语“计算机可读介质”以及“计算机可读媒介”完全限于以可由计算机读取的形式存储信息的可触摸的有形物体。这些术语不包括任何无线信号、有线下载信号以及任何其他短暂信号。
93.为了提供与用户的交互,本说明书中所述的主题的实施方式可在具有用于向用户显示信息的显示设备以及用户可用来向计算机提供输入的键盘和指向设备的计算机上实现,显示设备为例如crt(阴极射线管)或lcd(液晶显示器)监视器,指向设备为例如鼠标或轨迹球。其他种类的设备也可用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的感官反馈,例如视觉反馈、听觉反馈或触觉反馈;并且可以任何形式接收来自用户的输入,包括声学、语音或触觉输入。此外,计算机可通过向用户所使用的设备发送文档以及从其接收文档来与用户进行交互;例如,通过响应于从用户客户端设备上的web浏览器接收的请求而将网页发送到该web浏览器。
94.本说明书中所述的主题的实施方案可在计算系统中实现,该计算系统包括后端部件,例如作为数据服务器,或者包括中间件部件,例如应用服务器,或者包括前端部件,例如具有图形用户界面或web浏览器的客户端计算机,用户可通过该图形用户界面或web浏览器与本说明书中所述的主题的实施方式进行交互,或者包括一个或多个此类后端部件、中间件部件或前端部件的任何组合。系统的部件可通过任何形式或介质的数字数据通信例如通信网络来互连。通信网络的示例包括局域网(“lan”)和广域网(“wan”)、互联网络(例如,互联网)和对等网络(例如,自组织对等网络)。
95.计算系统可包括客户端和服务器。客户端和服务器一般是相互远离的,并且可通过通信网络进行交互。客户端和服务器的关系借助于在相应计算机上运行并且彼此具有客户端-服务器关系的计算机程序而产生。在某些实施方式中,服务器将数据(例如,html页面)传输到客户端设备(例如,为了向与该客户端设备交互的用户显示数据以及从与该客户端设备交互的用户接收用户输入)。在服务器处可以从客户端设备接收客户端设备处生成的数据(例如,用户交互的结果)。
96.根据本公开的各方面,提供了一种系统,所述系统包括:设备,所述设备被配置为显示覆盖在物理环境的视图上的计算机生成的内容;和配套设备。所述配套设备包括:便携式主体;和唯一标识符,所述唯一标识符可由所述设备获得。所述设备被配置为显示覆盖在所述物理环境的所述视图上的存储内容的指示器;检测所述物理环境中的所述配套设备;以及响应于对应于所述已显示指示器的用户请求,将所述配套设备的所述唯一标识符与和所述存储内容相关联的信息相关联。
97.根据本公开的各方面,提供了一种方法,所述方法包括:通过设备显示覆盖在物理环境的视图上的内容的指示器;通过所述设备获得所述物理环境中的配套设备的标识符;以及响应于用户请求,将所述配套设备的所述标识符与和所述内容相关联的信息相关联。
98.根据本公开的各方面,提供了一种用于扩展现实系统的配套设备,所述配套设备包括:便携式主体;通信电路,所述通信电路设置在所述便携式主体内;和处理电路,所述处理电路被配置为将所述配套设备与显示在所述扩展现实系统的另一个设备处的内容相关联,这是响应于经由所述通信电路从所述另一个设备接收的信息并至少部分地基于所述配套设备在所述配套设备和所述另一个设备的物理环境中的位置。
99.本领域的技术人员将会认识到,本文所述的各种例示性的框、模块、元件、部件、方法和算法可被实现为电子硬件、计算机软件或两者的组合。为了说明硬件和软件的这种可互换性,上文已经一般性地按照功能性对各种例示性的框、模块、元件、部件、方法和算法进行了描述。此类功能性是被实现为硬件还是软件取决于具体应用以及对整个系统施加的设
计约束。所述功能可针对每个特定应用以不同方式实现。各种部件和框可被不同地布置(例如,以不同的顺序排列,或以不同的方式划分),而不脱离本主题技术的范围。
100.应当理解,本发明所公开的过程中的步骤的特定顺序或分级结构为示例性方法的例示。基于设计优选要求,应当理解,过程中的步骤的特定顺序或者分级结构可被重新布置。该步骤中的一些步骤可被同时执行。所附方法权利要求呈现样本次序中的各种步骤的元素,并且不意味着限于所呈现的特定顺序或分级结构。
101.先前的描述被提供以使得本领域的技术人员能够实践本文所述的各个方面。先前描述提供了本主题技术的各种示例,并且本主题技术不限于这些示例。这些方面的各种修改对本领域的技术人员而言是显而易见的,并且本文所限定的通用原则可应用于其他方面。因此,本权利要求书并非旨在受限于本文所示的各个方面,而是旨在使得全部范围与语言权利要求书一致,其中提及单数形式的要素并非旨在意味着“仅仅一个”,而是指“一个或多个”,除非被具体指出。除非另外特别说明,否则术语“一些”是指一个或多个。男性的代名词(例如,他的)包括女性和中性(例如,她的和它的),并且反之亦然。标题和副标题(如果有的话)仅用于方便,并不限制本文所述的本发明。
102.如本文所用,术语网站可包括网站的任何方面,包括一个或多个网页、用于托管或存储网络相关内容的一个或多个服务器等。因此,术语网站可与术语网页和服务器互换使用。谓词字词“被配置为”、“能够操作以”以及“被编程以”并不意味着对某一主题进行任何特定的有形或无形的修改而是旨在可互换使用。例如,部件或被配置为监视和控制操作的处理器也可能意味着处理器被编程以监视和控制操作或者处理器能够操作以监视和控制操作。同样,被配置为执行代码的处理器可解释为被编程以执行代码或能够操作以执行代码的处理器。
103.如本文所用,术语自动可包括由计算机或机器的执行而无需用户干预;例如,通过响应于计算机或机器或其他启动机构的谓词动作的指令。字词“示例”在本文用于意指“用作示例或者例示”。本文作为“示例”所述的任何方面或者设计不一定被理解为比其他方面或者设计优选或者有利。
104.短语诸如“方面”不意味此方面对本主题技术是必需的或者此方面应用于本主题技术的所有配置。与一个方面相关的公开可应用于所有配置,或者一个或多个配置。一个方面可提供一个或多个示例。短语诸如方面可指一个或多个方面,反之亦然。短语诸如“实施方案”不意味此实施方案对本主题技术是必需的或者此实施方案应用于本主题技术的所有配置。与一个实施方案相关的公开可应用于所有实施方案,或者一个或多个实施方案。一个实施方案可提供一个或多个示例。短语诸如“实施方案”可指一个或多个实施方案,反之亦然。短语诸如“配置”不意味此配置是本主题技术必需的或者此配置应用于本主题技术的所有配置。与配置相关的公开可应用于所有配置或者一个或多个配置。配置可提供一个或多个示例。短语诸如“配置”可指一个或多个配置,反之亦然。

技术特征:
1.一种系统,所述系统包括:设备,所述设备被配置为显示覆盖在物理环境的视图上的计算机生成的内容;和配套设备,所述配套设备包括:便携式主体;和唯一标识符,所述唯一标识符能够由所述设备获得,其中所述设备被配置为:显示覆盖在所述物理环境的所述视图上的存储内容的指示器;检测所述物理环境中的所述配套设备;以及响应于对应于所述已显示指示器的用户请求,将所述配套设备的所述唯一标识符与和所述存储内容相关联的信息相关联。2.根据权利要求1所述的系统,其中所述用户请求包括将所述配套设备放置在与所述存储内容的所述已显示指示器相关联的位置处,或者将所述存储内容的所述已显示指示器移动到所述配套设备的位置或朝向所述位置移动。3.根据权利要求1所述的系统,其中所述配套设备还包括安装到所述便携式主体的电子墨水显示器。4.根据权利要求3所述的系统,其中所述配套设备还包括处理器,所述处理器被配置为操作所述电子墨水显示器以显示与所述唯一标识符相关联的所述存储内容的另一个指示器。5.根据权利要求1所述的系统,其中所述设备被配置为通过捕获所述配套设备的所述便携式主体的图像或通过从所述配套设备接收无线通信来获得所述唯一标识符。6.根据权利要求1所述的系统,其中所述设备被配置为通过将所述配套设备的所述唯一标识符与所述存储内容相关联地存储在所述设备处来将所述配套设备与所述存储内容相关联。7.根据权利要求1所述的系统,其中所述存储内容存储在所述设备处或远程设备处。8.根据权利要求7所述的系统,其中所述设备被进一步配置为致使所述存储内容被传输到所述配套设备,并且其中所述配套设备被配置为将所述存储内容存储在所述配套设备处。9.根据权利要求7所述的系统,其中所述设备被进一步配置为向所述配套设备提供所述存储内容的密钥。10.根据权利要求1所述的系统,其中所述设备被配置为在从所述设备的视野移除所述配套设备之后将所述存储内容与所述配套设备的所述唯一标识符持续地相关联。11.根据权利要求10所述的系统,其中所述设备被进一步配置为在所述物理环境中的新位置处检测所述配套设备,并且显示覆盖在所述新位置处的所述物理环境的所述视图上的所述存储内容的所述指示器。12.根据权利要求1所述的系统,其中当所述配套设备接近与所述配套设备和所述设备分离的附加设备时,所述配套设备被进一步配置为提供所述附加设备对所述存储内容的访问。13.一种方法,包括:通过设备显示覆盖在物理环境的视图上的内容的指示器;
通过所述设备获得所述物理环境中的配套设备的标识符;以及响应于用户请求,将所述配套设备的所述标识符与和所述内容相关联的信息相关联。14.根据权利要求13所述的方法,还包括通过所述设备确定所述配套设备在所述物理环境中的位置,其中显示覆盖在所述物理环境的所述视图上的所述内容的所述指示器包括显示覆盖在所述物理环境中的另一个位置上的所述内容的所述指示器,并且其中所述用户请求包括由用户改变所述配套设备的所述位置或所述指示器的所述其他位置。15.根据权利要求13所述的方法,其中将所述配套设备的所述标识符与和所述内容相关联的所述信息相关联包括将所述配套设备的所述标识符和与所述内容相关联的所述信息存储在与所述配套设备和所述设备分离的远程服务器处。16.一种用于扩展现实系统的配套设备,所述配套设备包括:便携式主体;通信电路,所述通信电路设置在所述便携式主体内;和处理电路,所述处理电路被配置为将所述配套设备与显示在所述扩展现实系统的另一个设备处的内容相关联,这响应于经由所述通信电路从所述另一个设备接收的信息并至少部分地基于所述配套设备在所述配套设备和所述另一个设备的物理环境中的位置。17.根据权利要求16所述的配套设备,还包括被配置为存储所述配套设备的标识符的存储器,其中所述处理电路被配置为通过以下方式将所述配套设备与所述内容相关联:经由所述通信电路接收被配置为提供对所述内容的访问的密钥;以及将所述密钥存储在所述存储器中。18.根据权利要求16所述的配套设备,其中所述内容包括存储在所述另一个设备处的文件、所述另一个设备处的应用的状态、或用于执行所述另一个设备的功能的信息中的至少一者。19.根据权利要求16所述的配套设备,还包括安装到所述配套设备的显示器,所述显示器被配置为在所述内容与所述配套设备相关联之后显示与所述配套设备相关联的所述内容的指示器。20.根据权利要求19所述的配套设备,其中所述显示器包括电子墨水显示器。

技术总结
本主题技术的实施方式提供了一种用于在扩展现实系统中使用的小型便携式物理对象。该系统可包括允许用户/穿戴者与内容的虚拟表示进行交互的设备,该虚拟表示诸如覆盖在该用户的物理环境上的存储数据和/或应用。该对象具有可由该设备或另一个设备获得的唯一标识符。该对象可以是无任何内部电路的非有源设备、具有由另一个设备激活的电路的无源设备、或具有其自身处理电路和/或容纳在该对象的该主体中的显示器的有源设备。该对象可与由该设备显示的内容相关联以向用户提供物理对象,该物理对象可被移动或操纵以移动、修改、运输或存储在扩展现实环境中生成、存储和/或显示的该内容。存储和/或显示的该内容。存储和/或显示的该内容。


技术研发人员:S
受保护的技术使用者:苹果公司
技术研发日:2021.03.24
技术公布日:2022/12/2
转载请注明原文地址: https://bbs.8miu.com/read-332578.html

最新回复(0)