CN102682733A

CN102682733A - 经由装配在头部的显示器的广告的经扩充的视图

Info

Publication number: CN102682733A
Application number: CN2012100563962A
Authority: CN
Inventors: J·克拉维; M·L·泰德斯克; D·J·维戈多尔
Original assignee: Microsoft Corp
Current assignee: Microsoft Technology Licensing LLC
Priority date: 2011-03-07
Filing date: 2012-03-06
Publication date: 2012-09-19
Anticipated expiration: 2032-03-06
Also published as: HK1173833A1; US8670183B2; CN102682733B; US20120229909A1; US9880386B2; US20140126066A1

Abstract

本发明涉及经由装配在头部的显示器的广告的经扩充的视图。装配在头部的显示器(HMD)向HMD佩戴者提供广告的经扩充的视图。在一些实施例中，当广告处于HMD佩戴者的视图区内时，HMD可扩充HMD配戴者的该广告的视图，以提供附加的信息和/或针对HMD佩戴者来个性化该广告。在其他实施例中，当广告处于HMD佩戴者的视图区内时，HMD可扩充HMD佩戴者的该广告的视图，以将该广告从HMD佩戴者的视图中移除或用非广告内容来替换该广告的内容。

Description

经由装配在头部的显示器的广告的经扩充的视图

技术领域

本发明涉及经由装配在头部的显示器来确定要向用户显示的内容的技术。

背景技术

广告已变成了我们社会的普遍性部分，这可导致人们有时感觉被淹没在广告中。另外，人们可常常感觉他们对所广告的产品或服务没有兴趣。多个因素可造成这个问题。例如，广告一般提供静态广告消息，该消息通常不与许多人有关或者以其他方式与他们相关。虽然一些电子告示牌或其他显示广告可改变所显示的广告消息，但是它们仍受限于示出了什么广告。结果，人们可能最多只是调出了广告或在最坏的情况下实际上变得厌烦这些广告，并转而广告商可能较为不可能从他们的广告中看到转变。此外，当人们实际上想要得到有关一产品或服务的广告信息时，他们可能无法访问该信息。例如，人们可查看他们感兴趣的在他们日常生活中的产品，但是却无法确定谁销售这些产品，或在他们看见这些产品时无法得到有关它们的信息。这些情形对于不幸被错过的广告而言存在很好的机会。

发明内容

提供本发明内容以便以简化的形式介绍将在以下的具体实施例中进一步描述的一些概念。本发明内容并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于帮助确定所要求保护的主题的范围。

本发明的各实施例涉及利用装配在头部的显示器(HMD)来瞄准(target)给HMD佩戴者的广告或其他信息。在一些实施例中，真实世界中的广告可被标识在HMD佩戴者的视图区内。DMD佩戴者的该广告的视图可由HMD来扩充，以向HMD佩戴者提供附加信息和/或以个性化广告消息。在其他实施例中，可向HMD佩戴者提供从HMD佩戴者的视图中移除或替换真实世界中的广告的服务。这可以是例如向HMD佩戴者提供的基于费用或其他基于会员资格的服务。在这种实施例中，当广告被标识为在HMD佩戴者的视图区内时，可由HMD提供经扩充的视图，以将广告从HMD佩戴者的视图处移除或用非广告内容来替换广告的内容。

附图说明

下面参考附图详细描述本发明，其中：

图1是适用于实现本发明的各实施例的示例性计算环境的框图；

图2是根据本发明的一实施例的经由HMD基于HMD佩戴者的焦点所查看到的物体来提供广告的方法的流程图；

图3是示出了根据本发明的一实施例的利用HMD来显示与HMD佩戴者正查看的人有关的信息的方法的流程图；

图4是示出了根据本发明的一实施例的基于其他HMD佩戴者正查看特定物体或人来向HMD佩戴者提供信息的方法的流程图；

图5是示出了根据本发明的一实施例的利用HMD来扩充HMD佩戴者的广告的视图以个性化该广告的方法的流程图；

图6是示出了根据本发明的一实施例的利用HMD来扩充HMD佩戴者的广告的视图以移除或替换该广告的方法的流程图。

具体实施方式

此处用细节来描述本发明的主题以满足法定要求。然而，该描述本身并非旨在限制本专利的范围。相反，发明人设想所要求保护的主题还可结合其他当前或未来技术按照其他方式来具体化，以包括不同的步骤或类似于本文中所描述的步骤的步骤组合。此外，尽管术语“步骤”和/或“框”可在此处用于指示所采用的方法的不同元素，但除非而且仅当明确描述了各个步骤的顺序时，该术语不应被解释为意味着此处公开的各个步骤之中或之间的任何特定顺序。

本发明的各实施例涉及经由装配在头部的显示器(HMD)来提供已瞄准的广告和其他信息。根据一些实施例，HMD的广告系统可基于指示HMD佩戴者的当前兴趣或来自HMD佩戴者的当前环境的其他因素的参数来瞄准信息。该系统可尝试确定HMD佩戴者当前可能正在思考什么以及对什么感兴趣，以便瞄准广告。可跟踪HMD佩戴者的注视以确定HMD佩戴者的关注。环境数据可被减弱，并且关注被放置在HMD佩戴者的焦点，以为广告选择收集数据点。也可跟踪HMD佩戴者的注视时间长度。HMD佩戴者注视特定主题(人、场所、事物)的时间越长，则该数据点变得越强。由于HMD佩戴者持续看着主题，越来越多关于主题的信息被引入以供广告选择，并且越来越多信息被提供给HMD佩戴者。在一些实施例中，HMD佩戴者可能正在看着特定的人。系统可标识这个人并引入关于这个人的信息，这在一些实施例中可用于广告选择。在其他实施例中，系统可使用与多个其他HMD佩戴者的关注有关的信息来进行广告选择。具体而言，如果HMD佩戴者邻近的多个人正看着特定主题，则出于某种理由而言该主题可能是有趣或重要的。

在一些实施例中，HMD佩戴者的现有广告的视图(例如，告示牌)可由HMD来扩充。在一些示例中，可使用HMD来个性化广告，以扩充HMD佩戴者的视图。该广告可能具有没有佩戴HMD的人的通用消息。对于佩戴了HMD的人而言，可改变该广告的视图以个性化该广告。这可包括扩充该广告的部分，或者用于经个性化的消息来对整个广告进行重新换肤(re-skinning)。可对广告进行个性化的一种方式可以是将用户、用户的家庭、和/或用户的朋友的图像放置在该广告的上下文中。

在本发明的其他实施例中，可向HMD佩戴者提供将广告从HMD佩戴者的视图中移除还是用其他内容来替换广告的选项。在一些实施例中，广告可仅被移除。在其他实施例中，可用HMD佩戴者自己的内容或其他非广告内容来替换广告。例如，可用HMD佩戴者的家庭的图片来替换告示牌上的广告。

因此，在一个方面中，本发明的一实施例涉及存储计算机可使用指令的一个或多个计算机存储介质，当该指令被一个或多个计算设备使用时使得该一个或多个计算设备执行使HMD设备扩充HMD佩戴者的广告的视图的方法。该方法包括标识广告在HMD佩戴者的视图区内。该方法还包括使HMD设备提供该广告的经扩充的视图，该广告被基于广告的内容和HMD佩戴者的用户简档而针对该HMD佩戴者进行了个性化。

在另一实施例中，本发明的一方面涉及存储有计算机可使用指令的一个或多个计算机存储介质，当这些指令被一个或多个计算设备使用时使得该一个或多个计算设备执行使HMD设备用非广告内容来替换HMD佩戴者的广告的视图的方法。该方法包括标识广告在HMD佩戴者的视图区内。该方法还包括在HMD佩戴者视图区内显示计算机生成的虚拟图像，以用非广告内容来替换广告。

本发明的其他实施例涉及由HMD设备执行来将广告从HMD佩戴者的真实世界的视图中移除的方法。该方法包括标识广告在HMD佩戴者的视图区内。该方法还包括使得HMD设备显示计算机生成的虚拟图像，以将广告从HMD佩戴者的真实世界的视图中移除。

在简要描述了本发明各实施方式的概览之后，以下描述其中可实现本发明的各实施方式的示例性操作环境，以便为本发明各方面提供通用上下文。首先具体参考图1，示出了用于实现本发明的各实施方式的示例性操作环境，并将其概括地指定为计算设备100。计算设备100只是合适的计算环境的一个示例，并且不旨在对本发明的使用范围或功能提出任何限制。也不应该将计算设备100解释为对所示出的任一组件或其组合有任何依赖性或要求。

本发明可以在由计算机或诸如个人数据助理或其他手持式设备之类的其他机器执行的计算机代码或机器可使用指令(包括诸如程序模块之类的计算机可执行指令)的一般上下文中描述。一般而言，包括例程、程序、物体、组件、数据结构等的程序模块指的是执行特定任务或实现特定抽象数据类型的代码。本发明可以在各种系统配置中实施，这些系统配置包括手持式设备、消费电子产品、通用计算机、专用计算设备等等。本发明也可以在其中任务由通过通信网络链接的远程处理设备执行的分布式计算环境中实施。

参考图1，计算设备100包括直接或间接耦合以下设备的总线110：存储器112、一个或多个处理器114、一个或多个呈现组件116、输入/输出(I/O)端口118、输入/输出组件120、和说明性电源122。总线110可以是一条或多条总线(诸如地址总线、数据总线、或其组合)。虽然为了清楚起见利用线条示出了图1的各框，但是实际上，各组件的轮廓并不是那样清楚，并且比喻性地来说，线条更精确地将是灰色的和模糊的。例如，可以将诸如显示设备等呈现组件认为是I/O组件。而且，处理器具有存储器。发明人认识到这是本领域的特性，并重申，图1的图示只是例示可以结合本发明的一个或多个实施方式来使用的示例性计算设备。诸如“工作站”、“服务器”、“膝上型计算机”、“手持式设备”等分类之间没有区别，它们全部都被认为是在图1的范围之内的并且被称为“计算设备”。

计算设备100通常包括各种计算机可读介质。计算机可读介质可以是可由计算设备100访问的任何可用介质，而且包含易失性和非易失性介质、可移动和不可移动介质。作为示例而非限制，计算机可读介质可包括计算机存储介质和通信介质。计算机存储介质包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据的信息的任何方法和技术实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括但不限于，RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光学存储、磁带盒、磁带、磁盘存储或其他磁存储设备、或能用于存储所需信息且可以由计算设备100访问的任何其他介质。通信介质通常以诸如载波或其他传输机制之类的已调制数据信号来具体化计算机可读指令、数据结构、程序模块或其他数据，并且包括任何信息传送介质。术语“已调制数据信号”是指具有以在信号中编码信息的方式被设定或改变其一个或多个特征的信号。作为示例而非限制，通信介质包括诸如有线网络或直接线连接之类的有线介质，以及诸如声学、RF、红外及其他无线介质之类的无线介质。上述的任意组合也应包含在计算机可读介质的范围内。

存储器112包括易失性和/或非易失性存储器形式的计算机存储介质。存储器可以是可移动的，不可移动的，或两者的组合。示例性硬件设备包括固态存储器、硬盘驱动器、光盘驱动器等。计算设备100包括从诸如存储器112或I/O组件120等各种实体读取数据的一个或多个处理器。呈现组件116向用户或其他设备呈现数据指示。示例性呈现组件包括显示设备、扬声器、打印组件、振动组件等等。

I/O端口118允许计算设备100逻辑上耦合至包括I/O组件120的其他设备，其中某些设备可以是内置的。说明性组件包括话筒、操纵杆、游戏手柄、圆盘式卫星天线、扫描仪、打印机、无线设备等等。

如之前所提到的，本发明的各实施例可至少部分地由HMD来实现。HMD可包括通用计算设备100的诸如以上参考图1所描述的组件，包括例如存储器、处理器、计算机可读介质、输入/输出组件和电源。可以以多个不同形式因素中的任何一个来提供HMD，包括例如眼镜、护目镜或头盔。

HMD可一般通过用计算机生成的虚拟图像来扩充佩戴者的真实世界的视图来向佩戴者提供该真实世界的经扩充的视图。为了向佩戴者提供经扩充的视图，HMD可包括显示计算机生成的虚拟图像同时仍允许佩戴者查看真实世界的显示技术。在一些实施例中，这可包括平视显示器(HUD)技术，该技术可利用例如任何类型的投影或微显示技术来提供虚拟图像。还可利用其他技术，诸如视网膜显示器，在这种显示器中在佩戴者正在查看真实世界的同时图像被直接投影在佩戴者的视网膜上。

在一些实施例中，HMD可在HMD佩戴者的真实世界的视图改变时将计算机生成的虚拟图像与该佩戴者的真实世界的视图对齐。为了帮助将虚拟图像定位在佩戴者的真实世界的视图中，HMD可包括可监视位置和/或提供头、眼和/或注视跟踪的设备。这些设备可包括而非限制于GPS或其他位置跟踪组件、相机或其他光学传感器、陀螺仪和加速计等等。

HMD还可包括允许HMD与伴随设备(例如，智能电话)、服务器设备、或其他网络组件进行通信的无线通信能力。例如，本发明的一些实施例可通过以下方式来实现：令基于云的服务帮助HMD选择虚拟图像以提供该真实世界的经扩充的视图。在一些实施例中，HMD可被配置成直接与服务器设备进行通信；而在其他实施例中HMD可经由在HMD佩戴者本地的伴随设备(例如，智能电话或其他设备)来与服务器设备进行通信。

基于HMD佩戴者焦点来作广告

本发明的一些实施例涉及通过使用HMD跟踪人的注视以确定该人的关注来基于该人的当前兴趣和想法提供广告。取代使用与在HMD佩戴者的整个视图区内的各物体有关的数据，确定在HMD佩戴者的实际焦点内的物体，并基于该物体来提供广告信息。如本领域所公知的，视图区包括人在给定时刻所看见的内容的所有范围。这与人的焦点形成对比，人的焦点是视图区内焦点所对准的小区域。例如，假设HMD佩戴者位于具有多家餐厅和商店的街道上，所有这些都在HMD佩戴者的视图区内。然而，HMD佩戴者可能正看着特定商店的招牌，使得HMD佩戴者的焦点在该招牌上。本发明的各实施例可确定HMD佩戴者的焦点在该招牌上、基于标识该招牌在该HMD佩戴者的焦点内而获取广告信息、以及经由HMD来呈现该广告信息。

还可跟踪HMD佩戴者的注视的时间长度，并利用该时间长度来进行广告选择和显示。HMD佩戴者的焦点停留在特定物体上的时间量指示对正被查看的物体的不同兴趣等级。人注视特定物体的时间越长，则HMD佩戴者对该物体可能具有更多的兴趣，并且该数据点变得更坚定地用于广告发布。

在一些实施例中，在基于给定物体提供广告信息之前可能需要满足最小阈值时间段。例如，HMD佩戴者可扫视特定区域，且HMD佩戴者的焦点快速从一个物体移动到另一物体。在这种情形下，显示这些物体中的每一个的广告信息可能并非是合意的，因为这可出现混乱。另外，由于HMD佩戴者没有关注任何特定物体而只是快速的扫视，因此HMD佩戴者可能对这些物体不是特别感兴趣，使得基于这些物体的广告信息不会被特别地瞄准。然而，一旦HMD佩戴者的焦点在特定物体上停留最小时间阈值，则可基于该物体来选择广告信息，并将该广告信息呈现给HMD佩戴者。

还可基于HMD佩戴者注视特定物体的时间长度来呈现不同数量的广告信息。例如，在一些实施例中，可建立多个阈值时间段。随着每一个阈值被相继达到，附加的广告信息被呈现给HMD佩戴者。在其他实施例中，取代建立提供在此附加信息的各个阈值，当HMD佩戴者的焦点停留在给定物体上时向HMD佩戴者的视图连续添加更多的广告信息。在一些实例中，HMD佩戴者可瞥一眼一物体，然后有返回到该物体。系统可能能够识别到HMD佩戴者的兴趣已经主要停留在该物体上，因此系统可忽略该匆匆一瞥并像HMD佩戴者持续查看该物体那样对待这种情形。

在一些实施例中，可将一时间段内在HMD佩戴者的焦点内被查看到的多个物体用作聚集数据以供广告选择。例如，HMD佩戴者可看一个餐厅的招牌，然后查看另一个餐厅的招牌。这个信息可指示HMD佩戴者正在寻找吃饭的场所。基于这个聚集数据，系统可选择与HMD佩戴者邻近的其他餐厅有关的广告信息，并向HMD佩戴者显示该信息。

附加数据信号结合在HMD佩戴者焦点内的物体可用于广告选择。仅作为示例而非限制，可使用的附加数据信号可包括HMD佩戴者的生物测定或HMD佩戴者的用户简档。例如，在一些实施例中，可为HMD佩戴者维护用户简档，并且该用户简档与正被查看的物体结合可用于选择要向HMD佩戴者显示的广告信息。用户简档可包括与HMD佩戴者有关的各种信息，诸如HMD佩戴者的人口统计信息、偏好和兴趣。例如，假设HMD佩戴者正看着餐厅的招牌并且该HMD佩戴者的用户简档包括该HMD佩戴者所偏好的餐厅的列表。基于这些数据点，系统可确定该用户简档中的一偏好的餐厅在HMD佩戴者的附近。由此，系统可向HMD佩戴者发布该偏好的餐厅的广告信息，包括该餐厅的位置。

在本发明的各个实施例中，正被查看的物体可以要么是非广告物体，要么是广告。广告可包括具有提供广告消息的主要目的的任何东西。例如，广告可包括告示牌、印刷广告(例如，在杂志、报纸等中的)以及商店中的广告等等。相反，非广告物体可以是不以作广告为其主要目的的任何其他东西。例如，该物体可以是可以被购买的任何东西，诸如衣服、电子设备等。另外，该物体可以是条形码或其他机器可读代码。作为另一个示例，该物体可以是由HMD佩戴者读取的文本。诸如建筑物和纪念碑之类的其他物体也可以是非广告物体，当通过HMD佩戴者的焦点来查看这类非广告物体时可触发经由用户的HMD的对广告信息的显示。

在其中物体是广告的实例中，系统可检索并显示与所广告的消息有关的附加信息。例如，如果广告是正对某品牌的鞋作广告的告示牌时，系统可检索这些鞋在各个零售商处的定价信息。除了检索和显示附加信息以外，系统还可跟踪用户与该广告间的交互。该信息可包括例如HMD佩戴者看了该广告多长时间、HMD佩戴者的焦点停留于该广告上的哪里，以及是否用经由HMD提供的附加信息中的任何一个与HMD佩戴者进行了交互。该广告信息可由HMD来收集并且可被传递给任何广告系统进行分析及出于作广告的目的使用该数据。例如，该信息可用于分析广告的有效性并且该信息可被提供给广告商。

转至图2，提供了示出根据本发明的一实施例的经由HMD基于HMD佩戴者的焦点所查看到的物体来提供广告的方法200的流程图。首先，如框202所示，确定HMD佩戴者的焦点。可使用用于眼睛和注视跟踪的各种技术中的任何一种来确定HMD佩戴者的焦点。例如，在一个实施例中，HMD可配备有面向外(outward-facing)的相机和面向内(inward-facing)的相机。面向外的相机可被配置成捕捉HMD佩戴者周围的外部世界。面向内的相机可被配制成跟踪HMD佩戴者的眼睛以确定HMD佩戴者的注视线。使用来自这些相机的图像/视频，HMD可确定HMD佩戴者的焦点位于外部世界中的何处。作为另一个示例，在另一个实施例中，可通过捕捉HMD佩戴者的视网膜上的图像来确定HMD佩戴者的焦点。应该理解这些只是示例，在本发明的实施例中可利用用于确定HMD佩戴者的焦点的其他技术。

在框204处，确定正通过HMD佩戴者的焦点来查看的物体。另外，如框206处所示，确定通过HMD佩戴者的焦点查看该物体的时间长度。在框208处，确定通过HMD佩戴者查看物体的时间量是否满足最小阈值。如果是，则在框210处执行物体识别以标识该物体。例如，如果HMD佩戴者正在查看特定厂商和型号的轿车，则物体识别可确定该物体是该厂商和型号的轿车。应该理解，可在框204在最初确定物体时执行物体识别。另外，应该理解，可使用各种已知的物体识别技术中的任何一种来标识物体。此外，可由HMD、服务器设备或组合来执行物体识别。例如，在一个实施例中，HMD可将图像数据传送给执行物体识别的云服务。

在标识了正通过HMD佩戴者的焦点来查看的物体之后，如框212处所示基于所标识的物体来检索广告信息。在一些实施例中，如果HMD具有在本地高速缓存广告的能力，则可由HMD自身来执行广告选择。在其他实施例中，HMD可与在HMD佩戴者本地的另一设备进行通信(例如，智能电话或专用辅助设备)以选择广告。在其他实施例中，HMD可要么直接地要么经由在HMD佩戴者本地的另一设备与广告发布系统(例如，基于云的服务)进行通信以检索广告信息。例如，HMD可提供标识正被查看的物体的信息(或者只是该物体的图像)，并且广告发布系统可选择广告信息并将该广告信息提供给HMD。在其他实施例中，可基于其他参数(诸如HMD佩戴者的生物测定、HMD佩戴者的用户简档信息、和/或向HMD佩戴者发布的过去的广告)来选择广告信息。所选择的广告信息还可基于HMD佩戴者查看该物体的时间长度。

如框214所示，经由HMD来呈现广告信息。典型地，经由HMD来显示广告信息。例如，HMD可将HUD技术或视网膜显示技术包括在内，以允许HMD佩戴者查看该信息。在其中HMD包括扬声器的实施例中，广告信息可包括通过该扬声器来播放的音频。任何及所有这样的组合都被构想为落在本发明的各实施例的范围内。

如之前所讨论的，在一些实施例中，如果HMD佩戴者继续查看特定物体，则可向HMD佩戴者呈现附加的广告信息。因此，方法200可通过以下方式来继续：确定HMD佩戴者的焦点是否停留在该物体上，并且如果是这样，则经由HMD来检索并呈现附加的广告信息。

应该理解，方法200可由HMD独自执行或者由HMD结合在HMD佩戴者本地的一个或多个伴随设备(例如，智能电话或专用辅助设备)和/或网络服务(例如，基于云的服务)来执行。以上描述的方法200的任何部分可由这些设备和服务的任何组合来执行。

虽然所讨论的方法200只在HMD佩戴者查看物体一阈值时间段之后才检索广告信息，但是在一些实施例中，HMD可在物体处于HMD佩戴者的视图区内或者以其他方式得知物体在HMD佩戴者附近的背景下检索广告信息。这可改进系统等待时间。具体而言，广告信息可被很容易的获取，并可在HMD佩戴者的焦点停留在物体上达一阈值时间段时被显示。

基于正被查看的人的HMD信息

尽管以上讨论的实施例基于正被查看的物体来提供广告信息，但是其他实施例经由HMD基于正被HMD佩戴者查看的人来选择和显示信息。一般而言，当HMD佩戴者查看人时，经由HMD来检索并向用户呈现信息。在一些实施例中，可在与正被查看的人分开的那一方上静止地显示该信息，使得该信息停留在所显示的位置处，而与HMD佩戴者的移动无关。在其他实施例中，可结合正被查看的人来显示信息，使得该信息可以与这个人一起移动。在其他实施例中，可以经由HMD上的扬声器来可听地呈现信息。

可基于正被查看的人来检索和呈现的信息可包括广告信息和/或与正被查看的人有关的个人信息。对于前者，可基于正被查看的人来呈现各种不同的广告信息中的任何一个。仅作为示例而非限制，可提供与人正穿戴的衣服和饰品有关的广告信息。作为另一示例，可提供与人做他/她的头发或指甲的地方有关的广告信息。

在一些实施例中，人可指定与他/她所拥有的产品或该人接收来便于在该人被HMD佩戴者查看到时发布广告信息的服务有关的信息。这可被看作是传播与产品和服务有关的信息的“口述(word of mouth)”方法，因为HMD佩戴者可在查看人时发现产品或服务。在一些实施例中，如果某人将广告商的产品或服务包括在该人愿意与其他人共享的产品和服务的列表中，则广告商可向该人提供激励。例如，广告商可因为某人简单地将广告商的产品或服务包括在该人的、在HMD佩戴者在查看该人时可查看到的产品和服务的列表中而提供折扣或其他激励。在其他实例中，折扣或其他激励的量可基于在查看到该人时向其呈现了与广告商的产品或服务有关的信息的HMD佩戴者的数目。在一些情况下，折扣或其他激励的量可基于在查看到广告信息之后采取了进一步动作(诸如购买广告商的产品或服务)的HMD佩戴者的数目。任何及所有这样的变型都被构想为落在本发明的各实施例的范围内。

如以上所述，还可经由HMD来显示与正被查看的人有关的个人信息。个人信息一般包括与该人有关的、可能被其他人感兴趣的任何个人信息。在一些实施例中，所提供的信息可基于HMD佩戴者与正被查看的人之间的交互的上下文。例如，不同类型的信息可能适合于社交交互，而其他类型信息可能适合于商业交互。

在一些实施例中，人被给予还能控制HMD查看者对与该人相关联的信息的访问权限的能力。这可包括控制哪些HMD佩戴者能够访问该人的信息。此外，人可能能够控制不同的HMD佩戴者能够访问并查看该人的什么信息。该访问权限可基于例如该人所专门标识出的个人、包括在该人的联系人列表中的个人、和/或与该人具有某种关系的个人，诸如附属于一社交网络的个人(例如，朋友)。

尽管人们可能能够控制HMD佩戴者在查看他们时将看见什么信息，但HMD佩戴者也可能能够限制显示什么信息。例如，与某人有关的大量信息可为HMD佩戴者所用。然而，HMD佩戴者可能只希望看见某几条信息。因此，HMD佩戴者可建立与HMD佩戴者愿意看见的信息的类型有关的偏好。这些偏好可用于过滤在HMD佩戴者查看人时向其呈现的信息。

还可跟踪HMD佩戴者注视人的时间长度，并可利用该时间长度来控制对信息的显示。HMD佩戴者查看特定人的时间量指示对正被查看的人的不同兴趣等级。某人注视特定人的时间越长，则HMD佩戴者可能对该人具有更多的感兴趣。

在一些实施例中，在基于给定人来提供任何信息之前可能需要满足最小阈值时间段。例如，HMD佩戴者可扫视特定区域，并且HMD佩戴者快速查看一个又一个人。在这种情形下，显示每一个人的信息可能并非是合意的，因为这可出现混乱。另外，由于HMD佩戴者没有关注任何特定的人而只是快速的扫视，因此HMD佩戴者可能对这个人不是特别感兴趣。然而，一旦HMD佩戴者查看了特定人最小时间阈值后，就可基于该人来选择信息，并将该信息呈现给HMD佩戴者。

还可基于HMD佩戴者注视给定人的时间长度来呈现不同量的信息。例如，在一些实施例中，可建立多个阈值时间段。随着每一个阈值被相继达到，附加的信息被呈现给HMD佩戴者。在其他实施例中，取代建立提供附加信息的各个阈值，当HMD佩戴者持续查看该人时向HMD佩戴者的视图连续添加更多的信息。在一些实例中，HMD佩戴者可瞥一眼一人，然后返回到该人。系统可能能够识别到HMD佩戴者的兴趣已经主要停留在该人上，因此系统可忽略该匆匆一瞥并如同HMD佩戴者持续查看该人那样对待这种情形。

现参考图3，提供了示出根据本发明的一实施例的利用HMD来显示与HMD佩戴者正查看的人有关的信息的方法300的流程图。首先，如框302所示，标识HMD佩戴者正查看的人。可使用各种不同的技术来标识人。例如，在一些实施例中，可利用面部识别来标识正被查看的人。在这些实施例中，HMD可包括捕捉该人的图像/视频的面向外部的相机。HMD可执行面部识别或者可将所捕捉的信息传递给服务器来执行面部识别。在其他实施例中，正被查看的人可具有广播标识该人的信息的HMD或其他设备(例如，智能电话)。HMD可检测经广播的信息并使用该信息来检测该人。

在本发明的一些实施例中，可仅提供被HMD佩戴者的焦点查看达阈值时间段的人的信息。如果存在大量人处于HMD佩戴者的视图区内，则这可减少混乱。在这些实施例中，可利用诸如以上参考方法200所描述的眼睛和注视跟踪或其他技术来确定HMD佩戴者的焦点是否在特定人上。另外，如框304所示，确定人被HMD佩戴者查看的时间长度。在框306，确定该时间长度是否满足最小阈值。如果如此，则如框308所示，基于所标识的人检索信息。如果该信息可在HMD本地得到，则可检索所存储的信息。另外地或另选地，HMD可与服务器进行通信以访问信息。此外，HMD可与被查看的人的设备(例如，智能电话、HMD等)进行通信以获取信息。如之前所讨论的，可提供的人的信息可包括广告信息和/或与该人有关的个人信息。另外，可根据由正被查看的人所设定的特权和/或HMD佩戴者的查看偏好来检索信息。通过选择信息可考虑诸如HMD佩戴者和正被查看的人之间的交互的上下文等其他因素。

如框310处所示，经由HMD来呈现该信息。该信息可经由HMD例如使用HUD技术或视网膜显示技术来显示，以允许HMD佩戴者查看该信息。另外地或另选地，该信息可包括HMD上的扬声器所播放的音频。任何及所有这样的组合都被构想为落在本发明的各实施例的范围内。

如之前所讨论的，在一些实施例中，如果HMD佩戴者继续查看特定人，则可向HMD佩戴者呈现附加信息。因此，方法300可通过以下方式继续：确定是否HMD佩戴者继续查看该人，并且如果是这样，则经由HMD来检索并呈现附加信息。

应该理解，方法300可由HMD独自执行或者可由HMD结合一个或多个伴随设备(例如，智能电话或专用辅助设备)和/或网络服务(例如，基于云的服务)来执行。以上描述的方法300的任何部分可由这些设备和服务的任何组合来执行。

虽然所讨论的方法300只在HMD佩戴者查看某人达一时间阈值段之后才检索信息，但是在一些实施例中，HMD可在某人处于HMD佩戴者的视图区中或以其他方式得知该人在HMD佩戴者附近的背景下检索信息。这可改进系统等待时间。具体而言，该信息可被容易地获取，以在HMD佩戴者的焦点停留在某人上达该阈值时间段时被显示。

基于其他人正在查看的内容的HMD信息

如果佩戴HMD的多个人正看着同一物体或人，则这可指示正被查看的物体或人是有趣的。基于此，信息可被提供给邻近的其他HMD佩戴者，例如以引起其他HMD佩戴者对该物体或人的注意或提供与该物体或人有关的附加信息。

在各实施例中，可跟踪与HMD佩戴者所查看的物体和人有关的信息。在一些实施例中，如果HMD佩戴者的焦点停留在一物体或人上达最小阈值时间段，则可认为该物体或人已被HMD佩戴者查看过了。此外，可建立HMD佩戴者查看物体或人的阈值，如果对某物体或人而言该阈值被满足，则认为该物体或人是重要的。这个阈值可基于正查看该物体或人的HMD佩戴者的总数，或者可基于该物体或人的区域内查看该物体或人的HMD佩戴者的百分比。在一些实施例中，该阈值可要求各HMD佩戴者在共同时间段内查看物体或人。例如，各HMD佩戴者可能在同一时刻全都在纽约市的时代广场上看着显示器。在其他实施例中，阈值可允许HMD佩戴者在不同的时刻查看物体或人。例如，系统可跟踪艺术博物馆的参观者随时间查看了什么，以标识被参观者较频繁查看的艺术品。

在本发明的各个实施例中可以以多种不同的方式利用对被成千上万的HMD查看者查看的物体或人的标识。在一些实施例中，可向附近不在查看物体或人的HMD佩戴者提供信息，以引起该HMD佩戴者对该物体或人的注意。这可包括如果该物体或人在HMD佩戴者的视图区之内，则动画化该物体或人以吸引HMD佩戴者的注意。这还可包括提供与该物体或人有关的信息，而不管该物体或人是或否在HMD佩戴者的视图区之内。该信息可仅指示多个其他HMD佩戴者正在查看(或查看了)该物体或人，或者可提供与该物体或人有关的更多信息。在其他实施例中，可基于被成千上万的HMD佩戴者查看的物体或人来选择广告，并可将该广告传递给HMD佩戴者。这可包括将广告传递给正在查看物体或人的HMD佩戴者和/或传递给附近不查看该物体或人的HMD佩戴者。

在一些实例中，正被成千上万的HMD佩戴者查看的物体可以是广告。根据一些实施例，基于标识出成千上万的HMD佩戴者正在查看一广告，该广告可被配置成执行某个动作。例如，如果该广告是电子告示牌，则该告示牌的显示器可响应于确定该告示牌正被成千上万的HMD佩戴者查看而改变。在其他实施例中，HMD佩戴者的广告的视图可由HMD响应于确定该告示牌正被成千上万的HMD佩戴者查看而得到扩充。

转至图4，提供了示出根据本发明的一实施例的用于基于正在查看特定物体或人的其他HMD佩戴者来向HMD佩戴者提供信息的方法400的流程图。首先，如框402所示，标识出HMD佩戴者正在查看的物体或人。如上所述，在一些实施例中，如果HMD佩戴者的焦点停留在物体或人上达阈值时间段，则可认为该物体或人已被HMD佩戴者查看过了。

在框404处确定是否有阈值数量的HMD佩戴者已查看了该物体或人。该阈值可基于已查看了该物体或人的HMD佩戴者的总数，或者可基于已经在该物体或人邻近并且已查看了该物体或人的HMD佩戴者的百分比。该阈值还可以基于各HMD佩戴者查看附近的其他物体和/或人的次数的比较，使得被HMD佩戴者较频繁查看的物体和/或人被标识出。此外，该阈值可要求HMD佩戴者在相同时刻(例如，重叠的时间段)或在基本上相同的时刻(例如，在彼此的几秒钟或几分钟之内)查看物体或人，或者该阈值可允许HMD佩戴者在不同的时刻查看物体或人。

在框404处，如果对该物体或人而言该阈值被满足，则如框406处所述基于确定该物体或人已被成千上万的HMD佩戴者查看而将与该物体或人有关的信息传递给另一HMD佩戴者。例如，在一些实施例中，可基于HMD佩戴者的视图来将信息提供给HMD佩戴者以指示该物体或人是有趣的。在其他实施例中，可至少部分地基于物体或人来选择广告，并可将广告传递给HMD佩戴者。

广告的经扩充的视图

本发明的其他实施例涉及扩充HMD佩戴者的广告的视图。广告可以是真实世界中显示的任何种类的广告。仅作为示例而非限制，这可包括告示牌、印刷广告(例如，在杂志、报纸等中的)、商店中的广告和电子广告等等。该广告可能具有没有佩戴HMD的人的通用消息。然而，对于佩戴了HMD的用户而言，广告的视图可通过HMD来扩充，以提供更丰富的体验。

可以以在本发明的各实施例的范围内的任何数量的不同方式来扩充广告的视图。例如，在一些实施例中，广告可被扩充以引起HMD佩戴者对该广告的注意。例如，可在广告周围提供动画，或者广告中的图像可变为动画的，以便吸引HMD佩戴者的注意。在这些实施例中，HMD可确定广告处于HMD佩戴者的视图区之内，虽然HMD佩戴者的焦点不在该广告上。由此，扩充被添加到广告上，以吸引HMD佩戴者的注意。在一些实施例中，在HMD佩戴者的焦点放置在广告上之后，可停止该扩充或者可提供不同的扩充(例如，如以下所讨论的广告的经个性化的视图)。

在一些实施例中，可基于位置来扩充广告。例如，假设堪萨斯州市中的告示牌显示NFL橄榄球的通用广告。在HMD佩戴者查看告示牌时，可通过示出堪萨斯州市酋长橄榄球队(Cheifs football team)的信息和/或其他图像来扩充广告的视图。

在其他实施例中，正由HMD佩戴者所查看的广告的视图可被扩充，以针对该HMD佩戴者个性化广告。例如，信息的用户简档可被维护，该信息可被利用来提供广告的经个性化的、经扩充的视图。用户简档信息可包括与HMD佩戴者有关的各种信息，诸如人口统计信息、偏好和兴趣。例如，假设HMD佩戴者正在查看具有有关NFL橄榄球的通用消息的告示牌。还假设用户简档指示HMD佩戴者是费城老鹰橄榄球队的球迷。当HMD佩戴者查看广告时，该广告的视图可被扩充，使得它显示与老鹰队有关的信息和/或其他图像。

还可通过用经个性化的图像扩充广告的视图来个性化该广告。例如，可通过将HMD佩戴者、HMD佩戴者的家庭和/或HMD佩戴者的朋友的图像放置在广告的上下文中来对该广告进行个性化。作为示例，假设告示牌对游乐园进行广告并示出了正坐过山车的人的图像。当HMD佩戴者查看该告示牌时，可提供经扩充的视图，其中HMD佩戴者及HMD佩戴者的家庭成员的图像被示出正在坐过山车。

在本发明的各个实施例中，扩充HMD佩戴者的广告的视图可包括扩充该广告的部分或对整个广告进行重新换肤。此外，经扩充的视图可包括例如二维图像、三维图像、静态图像或动态图像的任何组合。

转至图5，提供了示出根据本发明的一实施例的用于利用HMD来扩充的HMD佩戴者的广告的视图以个性化该广告的方法500的流程图。首先，如框502处所示，标识出HMD佩戴者正在查看的广告。例如，HMD可包括捕捉真实世界中在HMD佩戴者周围的图像/视频的面向外部的相机。可利用物体识别来从HMD所捕捉到的图像/视频中标识广告。在一些实施例中，将只在HMD佩戴者的焦点停留在该广告上达最小时间段的情况下标识广告。在其他实施例中，可标识处于HMD佩戴者的视图区内或以其他方式在HMD佩戴者邻近的任何广告。例如，GPS或其他位置信息可用于确定位于HMD佩戴者附近的特定广告。

在框504处，访问HMD佩戴者的用户简档。用户简档可包括HMD佩戴者的各种信息，包括例如人口统计信息、偏好和兴趣。基于在框502处标识出的广告和在框504处访问的用户简档信息，在框506处确定如何扩充HMD佩戴者的该广告的视图。如之前所述，可利用对HMD佩戴者的通用广告进行个性化的任何扩充。如框508所示，生成扩充该广告的图形，并由HMD显示该图形。因此，向HMD佩戴者提供了该广告的经个性化的、经扩充的视图。

应该理解，方法500可完全由HMD来执行或者由HMD连同一个或多个伴随设备(例如，智能电话或专用辅助设备)和/或一个或多个服务器设备(例如，基于云的服务)一起来执行。例如，用户简档要么可被本地地维护在HMD、伴随设备，要么可被服务器设备存储起来。此外，对如何扩充广告的确定和/或图形的生成可由HMD本身、伴随设备或者由服务器设备(其可将图形信息传送给HMD或以其他方式指令HMD如何扩充广告的视图)来执行。

移除或替换广告

给定当今世界中所作的广告的量，某些人可能会感觉被淹没在广告中。为了解决这个问题，在一些实施例中，HMD可扩充广告的视图以便要么将广告移除，要么用其他非广告内容来替换广告。由此，尽管以上所讨论的其他实施例涉及扩充广告的HMD佩戴者的视图以增加广告消息，但是当前讨论的实施例却涉及将广告消息一起从HMD佩戴者的视图中移除。

如上所述，在一些实施例中，可将广告从HMD佩戴者的视图中移除。例如，HMD可扩充告示牌的视图以使告示牌表现为空白的。然而，HMD查看者仍将看见空白的告示牌。替换的，HMD可通过使告示牌的视图表现为该告示牌根本不在那里来扩充该告示牌的视图。HMD(或与HMD通信的服务器设备)可确定应该生成并显示哪些计算机生成的虚拟图像以向HMD佩戴者呈现什么在该广告后面，以使得它表现为该广告并不在那里。作为特定示例，如果广告是在建筑物一侧的告示牌，则虚拟图像可代表该建筑物的这一侧，以使该建筑物表现为没有告示牌。

另外的，取代移除广告，该广告上的广告内容可用非广告内容来被替换。在一些实例中，非广告内容可以是HMD佩戴者自己的内容。例如，可用来自HMD佩戴者的照片库的图像来替换告示牌上的内容。由此，在HMD佩戴者在真实世界中到处移动时不是看见告示牌和其他广告，而是HMD佩戴者将看见其中显示广告的他们自己的图像。在其他实例中，非广告内容可以是并非为HMD佩戴者所拥有的内容。例如，可用HMD佩戴者不曾到过的场所的图像来替换告示牌。当用其他内容来替换广告时，所示出的内容可以是静态内容，诸如图像，或者所示出的内容可以是动态内容，诸如视频。例如，如果HMD佩戴者是橄榄球迷，则可以用橄榄球队的视频来替换广告。此外，替换内容可以是二维内容或三维内容。

可向HMD佩戴者提供用于控制将哪些广告移除或用其他内容替换的能力。在一些实施例中，HMD佩戴者可具有基于广告内容的、指定要移除或替换哪些广告的偏好。例如，用户偏好可指定涉及服装的广告要被移除或替换，而涉及体育事件的广告可被显示。在一些实施例中，HMD佩戴者可具有关于要移除或替换的类型的广告的偏好。例如，用户偏好可指定告示牌被移除或替换，而其他类型的广告(例如，印刷广告)将被显示。此外，偏好可指定是否将各种广告移除或用其他内容替换。在用非广告内容替换广告的情况下，偏好可指定要在替换广告时使用的非广告内容。以上的任何及所有这样的组合都被构想为落在本发明的各实施例的范围内。

移除广告或用其他内容来替换广告的能力可以是向用户提供的基于费用的服务或者可以是向为某一服务或分组的成员的用户提供的选项。例如，可以将移除或替换广告的能力作为选项提供给为Xbox Live成员的用户。此外，可基于所支付的费用或用户的成员等级(例如，Xbox Live白银成员或者Xbox Live黄金成员)来给予用户各种等级的控制。这可包括例如移除广告的能力、用其他内容来替换广告的能力、控制用什么内容来替换广告的能力、以及控制被移除或替换的广告的内容或类型的能力。一般而言，越高的费用或成员等级将向用户提供越大的控制。

转至图6，提供了示出根据本发明的一实施例的用于利用HMD来扩充HMD佩戴者的广告的视图以移除或替换该广告的方法600的流程图。首先，如框602处所示，标识出HMD佩戴者正在查看的广告。例如，HMD可包括捕捉HMD佩戴者周围的世界的图像/视频的面向外部的相机。可利用物体识别来从HMD所捕捉到的图像/视频中标识广告。在一些实施例中，将只在HMD佩戴者的焦点停留在该广告上达最小时间段的情况下标识广告。在其他实施例中，可标识处于HMD佩戴者的视图区内或以其他方式在HMD佩戴者邻近的任何广告。例如，GPS或其他位置可用于确定位于HMD佩戴者附近的特定广告。

在框604处，访问HMD佩戴者的用户简档。用户简档可包括与广告的移除和/或替换有关的偏好。基于在框602处标识出的广告和在框604处访问的用户简档信息，如框606处所示确定是将该广告从HMD佩戴者的视图中移除还是用其他内容来替换HMD佩戴者的该广告的视图。如框608处所示，由HMD生成并显示移除广告或替换广告内容的图形。因此，要么将广告从HMD佩戴者的视图中移除，要么用其他内容替换广告内容。

方法600可完全由HMD来执行或者由HMD连同一个或多个伴随设备(例如，智能电话或专用辅助设备)和/或一个或多个服务器设备(例如，基于云的服务)一起来执行。例如，用户简档要么可被本地地维护在HMD、伴随设备，要么可被服务器设备存储起来。此外，对移除还是替换广告的确定和/或图形的生成可由HMD本身、伴随设备来执行或者由服务器设备(其可将图形信息传送给HMD)来执行。

虽然在此已分开地描述了各个实施例，但应该理解，可利用这些的组合。例如，在一些实施例中，通过扩充HMD佩戴者的视图以动画化正被多个HMD佩戴者查看的广告，可引起未直接查看该广告的HMD佩戴者对该广告的注意。一旦HMD佩戴者查看了该广告(例如，HMD佩戴者的焦点在该广告上)，则可针对HMD佩戴者个性化该广告的视图。作为另一个实例，HMD佩戴的用户简档可使得某些广告被从HMD佩戴者的视图中移除，而其他广告则被扩充以针对HMD佩戴者个性化这些广告。任何及所有这样的组合都被构想为落在本发明的各实施例的范围内。

应该理解，本发明的各实施例提供了用于瞄准给HMD佩戴者的广告和其他信息的多种方法。参考各具体实施例描述了本发明，各具体实施例在所有方面都旨在是说明性的而非限制性的。不偏离本发明范围的情况下，各替换实施例对于本发明所属领域的技术人员将变得显而易见。

从前面的描述可以看出，本发明很好地适用于实现上文所阐述的所有目的和目标，并且具有对于该系统和方法是显而易见且固有的其他优点。可理解的是，某些特征和子组合是有用的，并且可以加以利用而无需参考其它特征和子组合。这由权利要求所构想的，并在权利要求的范围内。

Claims

1.存储计算机可使用指令的一个或多个计算机存储介质，所述指令在被一个或多个计算设备使用时使得所述一个或多个计算设备执行一种使装配在头部的显示器(HMD)设备扩充HMD佩戴者的广告的视图的方法，所述方法包括：

标识所述广告在所述HMD佩戴者的视图区内(502)；以及

使得所述HMD设备提供所述广告的经扩充的视图(508)，该经扩充的视图被基于所述广告的内容和所述HMD佩戴者的用户简档针对所述HMD佩戴者进行了个性化。

2.如权利要求1所述的一个或多个计算机存储介质，其特征在于，所述广告的经扩充的视图在所述HMD佩戴者的焦点在所述广告上时被提供。

3.如权利要求2所述的一个或多个计算机存储介质，其特征在于，所述方法还包括：

首先确定所述HMD佩戴者的焦点不再所述广告上；以及

使得所述HMD提供所述广告的第一经扩充的视图，以引起所述HMD佩戴者对所述广告的注意。

4.如权利要求1所述的一个或多个计算机存储介质，其特征在于，所述广告的经扩充的视图包括在所述广告内呈现图像，所述图像包括选自以下各项的至少一项：所述HMD佩戴者的图像、所述HMD佩戴者的家庭成员的图像、以及所述HMD佩戴者的朋友的图像。

5.存储计算机可使用指令的一个或多个计算机存储介质，所述指令在被一个或多个计算设备使用时使得所述一个或多个计算设备执行一种使装配在头部的显示器(HMD)设备用非广告内容来替换HMD佩戴者的广告的视图的方法，所述方法包括：

标识所述广告在所述HMD佩戴者的视图区内(602)；以及

在所述HMD佩戴者的视图区内显示计算机生成的虚拟图像，以用非广告内容来替换所述广告(608)。

6.如权利要求5所述的一个或多个计算机存储介质，其特征在于，所述非广告内容包括所述HMD佩戴者的内容。

7.如权利要求5所述的一个或多个计算机存储介质，其特征在于，所述计算机生成的虚拟图像被显示在所述HMD佩戴者的视图区内以基于将包含特定广告内容的广告替换掉的用户偏好及所述广告包含所述特定广告内容的确定来用所述非广告内容替换所述广告。

8.如权利要求5所述的一个或多个计算机存储介质，其特征在于，所述计算机生成的虚拟图像被显示在所述HMD佩戴者的视图区内以基于向所述HMD佩戴者提供的基于费用或基于会员资格的服务来用所述非广告内容替换所述广告。

9.一种由装配在头部的显示器(HMD)设备执行的将广告从HMD佩戴者的真实世界的视图中移除的方法，所述方法包括：

标识所述广告在所述HMD佩戴者的视图区内(602)；以及

使得所述HMD设备显示计算机生成的虚拟图像以将所述广告从所述HMD佩戴者的所述真实世界的视图中移除(608)。

10.如权利要求9所述的方法，其特征在于，使得所述HMD设备显示所述计算机生成的虚拟图像以将所述广告从所述HMD佩戴者的所述真实世界的视图中移除包括选自以下各项中的一项：使所述广告表现为空白或将所述广告完全地从所述HMD佩戴者的所述真实世界的视图中移除。