CN102540463B - 用于透视头戴式显示器的不透明度滤光器 - Google Patents

用于透视头戴式显示器的不透明度滤光器 Download PDF

Info

Publication number
CN102540463B
CN102540463B CN201110291177.8A CN201110291177A CN102540463B CN 102540463 B CN102540463 B CN 102540463B CN 201110291177 A CN201110291177 A CN 201110291177A CN 102540463 B CN102540463 B CN 102540463B
Authority
CN
China
Prior art keywords
augmented reality
opacity
reality image
light filter
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110291177.8A
Other languages
English (en)
Other versions
CN102540463A (zh
Inventor
A·巴-泽埃夫
B·克罗科
A·A-A·基普曼
J·刘易斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Telefonaktiebolaget LM Ericsson AB
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN102540463A publication Critical patent/CN102540463A/zh
Application granted granted Critical
Publication of CN102540463B publication Critical patent/CN102540463B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02—Viewing or reading apparatus
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/02—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the intensity of light
    • G02B26/026—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the intensity of light based on the rotation of particles under the influence of an external field, e.g. gyricons, twisting ball displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2003—Display of colours
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0118—Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B2027/0178—Eyeglass type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00—Aspects of the constitution of display devices
    • G09G2300/02—Composition of display devices
    • G09G2300/023—Display panel composed of stacked panels

Abstract

公开了用于透视头戴式显示器的不透明度滤光器。一种光学透视头戴式显示设备，包括透视透镜，所述透视透镜将增强现实图像与来自真实世界场景的光结合，同时使用不透明度滤光器选择性阻挡该真实世界场景的部分以便该增强现实图像看上去更清晰。该不透明度滤光器可以是透视LCD面板，例如，基于该增强现实图像的大小、形状和位置，该LCD面板的每个像素能被选择性地控制为透射的或不透明的。眼睛跟踪可用于调整该增强现实图像和不透明像素的位置。不在该增强现实图像后面的该不透明度滤光器的外围区域可被激活以提供外围提示或该增强现实图像的表示。在另一方面，在不存在增强现实图像的时刻，提供不透明像素。

Description

用于透视头戴式显示器的不透明度滤光器
技术领域
本发明涉及透视头戴式显示器，尤其涉及用于透视头戴式显示器的不透明度滤光器。
背景技术
头戴式显示器(head-mounteddisplay)可用于各种应用中，包括军事、航空、医学、视频游戏、娱乐、体育等等。透视(see-through)头戴式显示器允许用户观察他或她周围的物理世界，而光学元件将来自一个或两个小型微显示器的光增加到用户的视觉路径中，以提供增强现实图像(augmentedrealityimage)。增强现实图像可以与表示用户所处的环境的现实世界场景有关。然而，在提供逼真的、能够表示全范围的色彩和亮度的增强现实图像中存在各种挑战。
发明内容
提供一种光学透视头戴式显示设备。该头戴式显示设备使用不透明度滤光器选择性地去除来自现实世界场景的抵达用户眼睛的光。例如，该滤光器可以基于增强现实图像的形状而阻挡光以避免该增强现实图像透明。此外，眼睛跟踪组件可用于调整该增强现实图像和该不透明度滤光器的不透明度增加的像素的位置。
在一个实施例中，光学透视头戴式显示(HMD)设备包括当该显示设备由用户佩戴时在该用户的眼睛和现实世界场景之间延伸的透视透镜。该透视透镜具有带有像素网格的不透明度滤光器，所述像素可被控制以调整它们的不透明度，从允许大量光穿过的最小不透明度水平到几乎不允许或不允许光穿过的最大不透明度水平。该透视透镜还具有显示组件。该设备进一步包括至少一个增强现实发射器(比如微显示器)，该增强现实发射器使用该显示组件向该用户的眼睛发射光，其中该光表示具有形状的增强现实图像。该设备进一步包括至少一个控制，该至少一个控制控制该不透明度滤光器以为从该用户的眼睛的视角看在该增强现实图像后面的像素提供增加的不透明度。不透明度增加的像素是根据该增强现实图像的形状提供的。
可提供眼睛跟踪组件以跟踪该用户的眼睛相对于框架的位置，以便在载着HMD设备的框架有移动时可以调整该不透明度增加的像素和/或该增强现实图像的位置。用这种方式，所标识的像素和该增强现实图像可基于该框架的移动而移位，同时保持它们彼此间的对准(registration)。
提供本发明内容以便以简化形式介绍将在以下的具体实施方式中进一步描述的一些概念。本发明内容并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于限定所要求保护的主题的范围。
附图说明
在附图中，相同编号的元件彼此对应。
图1示出具有增强现实能力的光学透视HMD设备的一示例实施例。
图2示出图1的HMD设备的系统图。
图3A示出用于在图1的HMD设备中提供增强现实图像的过程。
图3B示出图3A的步骤306的细节。
图4A示出基于图1或图4C的增强现实图像的形状的不透明度滤光器的示例配置。
图4B示出图1的示例性现实世界场景120。
图4C示出图1的示例性增强现实图像104。
图4D示出用户看到的图1的示例性图像132。
图5示出具有不透明度增加的区域的不透明度滤光器，以提供图4A的不透明度滤光器的配置。
图6示出在没有不透明度滤光器时会得到的、图1的示例性图像的变型。
图7A示出戴在用户头部上的图1的显示设备的一示例实现。
图7B示出图7A的HMD设备的进一步的细节。
图7C示出戴在用户头部上的图1的显示设备的一替代实现，其中眼睛跟踪组件直接在前部眼镜框架上。
图8A1示出当用户的眼睛相对于HMD设备的框架在第一位置时，现实世界图像和不透明度滤光器的不透明度增加的区域的对准。
图8A2示出图8A1的现实世界场景元素800的前向视图。
图8A3示出图8A1的不透明度滤光器区域804的前向视图。
图8A4示出图8A1的增强现实图像区域805的前向视图。
图8B1示出当用户的眼睛相对于HMD设备的框架在第二位置时，现实世界图像和不透明度滤光器的不透明度增加的区域的对准。
图8B2示出图8B1的现实世界场景元素800的前向视图。
图8B3示出图8B1的不透明度滤光器区域806的前向视图。
图8B4示出图8B1的增强现实图像区域807的前向视图。
图9A1示出在用户的眼睛的视野的增强现实显示区域的中心处，增强现实图像和不透明度滤光器的不透明度增加的区域的对准。
图9A2示出图9A1的不透明度滤光器区域902的前向视图。
图9A3示出图9A1的增强现实图像区域900的前向视图。
图9B1示出在图9A1的增强现实显示区域的外围边界处，增强现实图像和不透明度滤光器的不透明度增加的区域的对准。
图9B2示出图9B1的不透明度滤光器区域920的前向视图。
图9B3示出图9B1的增强现实图像区域922的前向视图。
图9C1示出不透明度按照与离用户眼睛的视野的外围边界的距离逐渐变化。
图9C2示出具有未淡化(non-faded)部分931、连续淡化部分932、933和934的不透明度滤光器区域，其中淡化(fading)在图9C1中的0和d1之间。
图9C3示出具有未淡化部分941、连续淡化部分942、943和944的不透明度滤光器区域，其中淡化在图9C1中的0和d3之间。
图9C4示出具有未淡化部分951、连续淡化部分952、953和954的不透明度滤光器区域，其中淡化在图9C1中的d4和d5之间。
图9D1示出在图9A1的增强现实显示区域的外围边界处，增强现实图像和不透明度滤光器的不透明度增加的区域的对准，其中在视野的第二、外围区域中提供额外的不透明度增加的区域。
图9D2示出图9D1的不透明度滤光器区域920和924的前向视图。
图9D3示出图9D1的增强现实图像区域900的前向视图。
图9E1示出在图9A1的增强现实显示区域的外围边界处，增强现实图像的第一部分和不透明度滤光器的不透明度增加的区域的对准，其中在视野的第二、外围区域中提供额外的不透明度增加的区域以代表该增强现实图像的第二、截止部分。
图9E2示出图9E1的不透明度滤光器区域926和928的前向视图。
图9E3示出图9E1的增强现实图像区域922和923的前向视图。
图9F1示出在不提供增强现实图像的时刻，视野的第二、外围区域中不透明度滤光器的不透明度增加的区域。
图9F2示出图9F1的不透明度滤光器区域960的前向视图。
图9F3示出图9F1的增强现实图像的前向视图。
具体实施方式
透视头戴式显示器(HMD)最常使用诸如反射镜(mirror)、棱柱和全息透镜等光学元件将来自一个或两个小型微显示器的光增加到用户的视觉路径中。本质上，这些元件只能增加光，而不能除去光。这意味着虚拟显示器不能显示更深的色彩(它们在纯黑的情况下趋向于透明)，而诸如增强现实图像等虚拟物品看上去半透明(translucent)或有重影(ghosted)。对于强烈的增强现实或其他混合现实情形，期望具有从视图中选择性地除去自然光的能力，从而虚拟彩色影像可以表示全范围的色彩和亮度，同时使得影像看上去更实在或真实。为了实现这个目标，HMD设备的透镜可配备有不透明度滤光器，该不透明度滤光器能够被控制而在每像素的基础上选择性地透过或阻挡光。可以使用控制算法以基于增强现实图像来驱动不透明度滤光器的亮度和/或色彩。不透明度滤光器可物理上放置于光学显示组件后面，光学显示组件将该增强现实图像引入用户的眼睛。通过使不透明度滤光器扩展到该增强现实图像的视野之外以向用户提供外围提示(cue)，可以获得额外的优点。而且，即便在没有增强现实图像的情况下，该不透明度滤光器也可提供外围提示，或该增强现实图像的表示。
图1示出具有增强现实能力的光学透视HMD设备的一示例实施例。该显示设备可包括透视透镜108，透视透镜108放置于用户眼睛的前方，类似于眼镜透镜。通常，提供一对透视透镜，每只眼睛一个。所述透镜包括不透明度滤光器106和光学显示组件112，比如分光器，例如，一半镀银(half-silvered)的反光镜或其他透光的反光镜。来自现实世界场景120的光，比如光线114，到达所述透镜并被不透明度滤光器106选择性地传递或阻挡。穿过该不透明度滤光器的、来自现实世界场景的光也穿过所述显示组件。
该不透明度滤光器在不透明度滤光器控制电路100的控制之下。同时，增强现实发射器102发射代表增强现实图像104并由光线110例示的2-D光阵列。通常使用额外的光学器件来重聚焦该增强现实图像从而它看上去像是从离眼睛几英尺远的地方发出的而不是从约一英寸远的地方(该显示组件实际所在的地方)发出的。
显示组件112将该增强现实图像反射向用户的眼睛118，如光线116例示，从而该用户看到图像132。在图像132中，可以看到场景120的一部分，比如一个小树林，以及整个增强现实图像104，比如飞跃的海豚。在这个面向娱乐的示例中，用户因此看到一幅奇特的图像，其中海豚飞跃了树木。在面向广告的示例中，该增强现实图像可以显现为用户桌面上的一罐汽水。许多其他应用是可能的。一般而言，用户能够在任何地方佩戴HMD设备，包括在户内和户外。可以得到各种信息片断以确定什么类型的增强现实图像是恰当的以及它应当被提供在显示组件上的什么地方。例如，用户的位置、用户在看的方向、以及地板、墙壁、或许还有家具(当用户在室内时)的位置可用于决定将该增强现实图像放在现实世界场景中的恰当位置的何处。
通过使用运动跟踪技术和依附于用户头部的惯性测量单元(比如经由增强现实眼镜)的结合来跟踪用户的头部的位置，可以确定用户在看的方向。运动跟踪技术使用深度传感相机来获得用户的3D模型。类似地，可以使用深度传感相机来获得地板、墙壁和用户环境的其他方面的位置。例如，参见2010年8月5日公开的名称为“视觉目标跟踪(VisualTargetTracking)”的US2010/0197399、2010年8月5日公开的名称为“身体扫描(BodyScan)”的US2010/0194872、以及2009年4月7日授权的名称为“头部姿态跟踪系统(HeadPoseTrackingSystem)”的US7,515,173，其中每一个均通过援引纳入于此。
从用户眼睛的角度看在该增强现实图像后面的现实世界场景的一部分被不透明度滤光器阻挡而不能到达用户的眼睛，从而该增强现实图像对用户来说看上去很清楚。该增强现实图像可被认为提供主显示器，而该不透明度滤光器提供次显示器。可将次显示器的亮度和/或色彩驱动为近似匹配主显示器上的影像，从而提升主显示器效仿自然光的能力。
可以使用跟踪相机122标识用户的眼睛相对于安装HMD设备的框架的位置。在一种方案中，该框架可类似于传统眼镜框架。框架的示例参见例如图7A和7B。通常，这种框架在被佩戴时能够在用户头部上轻微移动，例如，由于用户的运动、框架的鼻梁架在用户鼻子上的滑动等等。进一步细节参见图8A1-8B4。通过提供有关眼睛相对于框架的位置的实时信息，控制器能够控制该不透明度滤光器，而该增强现实发射器能够相应地调整其图像。例如，可以使得该增强现实图像看上去更稳定，同时该不透明度滤光器的不透光度增加的像素和该增强现实图像的对准或对齐被保持。在一种示例方案中，跟踪相机122包括红外(IR)发射器124和IR传感器126，该IR发射器124向眼睛118发射红外光128，该IR传感器126感测被反射的IR光130。通过已知的成像技术，比如检测角膜的反射，可以标识瞳孔的位置。例如，参见2008年7月22日授权给Ophir等人的、名称为“头戴式眼睛跟踪和显示系统(Headmountedeyetrackinganddisplaysystem)”的美国专利7,401,920，该专利通过援引被纳入于此。这些技术可以定位眼睛的中心相对于跟踪相机的位置。一般而言，眼睛跟踪涉及获得眼睛的图像以及使用计算机视觉技术来确定瞳孔在眼眶内的位置。其他眼睛跟踪技术可以使用光电检测器和LED的阵列。使用跟踪相机在框架上的已知安装位置，可以确定眼睛相对于相对框架固定的任何其他位置(比如不透光滤光器106和光学组件112)的位置。通常，跟踪用户双眼之一的位置就足够了，因为双眼一致地移动。然而，分开跟踪每个眼睛并且针对相关联的透视透镜使用每个眼睛的位置来确定该增强现实图像的位置也是可能的。
在图示示例中，跟踪相机从独立于该不透明度滤光器和光学组件112的框架上的侧面位置对眼睛成像。然而，其它方案是可能的。例如，跟踪相机所使用的灯可以经由光学组件112携带，或以其他方式集成入透镜中。
该不透明度滤光器可以是透视LCD面板、电致变色膜(electrochromicfilm)或能够充当不透明度滤光器的其他设备。通过从传统LCD中除去基板、背光和漫射器的各层，可以得到这种透视LCD面板。LCD面板可包括一个或更多个透光LCD芯片，透光LCD芯片允许光穿过液晶。例如，在LCD投影仪中使用了这种芯片。
该不透明度滤光器可被放置在透镜上方或内部。该透镜还可包括玻璃、塑料或其他透光材料。该不透明度滤光器可包括致密的像素网格，其中每个像素的透光率能够在最小和最大透光率之间被单独控制。尽管0-100％的透光率范围是理想的，然而更有限的范围也是可以接受的。作为示例，具有不超过两个偏振滤光器的单色LCD面板足以提供每像素约50％到80％或90％的不透光度范围，最高为该LCD的分辨率。在50％的最小值处，透镜将具有稍带色彩的外观，这是可以容忍的。100％的透光率代表理想的透明透镜。我们可以从0-100％中限定一个“alpha”尺度，其中0％是最高透光率(最不不透明)而100％是最低透光率(最不透明)。通过不透明度滤光器控制电路可以针对每个像素设定该值“alpha”。
在针对现实世界物体用代理进行z-缓冲(z-buffering)之后，可以使用来自渲染流水线的alpha值的掩模(mask)。当我们为增强现实显示而渲染场景时，我们想要注意哪些现实世界物体在哪些增强现实物体前面。如果增强现实物体在现实世界物体前面，那么对于该增强现实物体的覆盖区域不透明应当是开启的。如果增强现实物体(虚拟地)在现实世界物体后面，那么不透明应当是关闭的，那个像素的任何色彩也应当是关闭的，从而对于真实灯光的该相应区域(大小为一个像素或更多)用户将会只看到现实世界物体。覆盖将是以每个像素为基础的，所以我们可处理增强现实物体的一部分在现实世界物体之前、增强现实物体的一部分在现实世界物体后面以及增强现实物体的一部分与现实世界物体相重合的情况。
附加的增强以重新用作不透明度滤光器的新的显示器类型的形式出现。能够以低成本、电力和重量实现不透明度从0％到100％的显示器对这种用途来说是最需要的。而且，不透明度滤光器可以进行彩色着色，比如用彩色LCD或用诸如有机LED等其他显示器，以提供围绕提供了增强现实图像的光学组件112的宽视野。
不透明度滤光器控制电路100可以例如是微处理器。不透明度滤光器控制电路100和增强现实发射器102可以与跟踪相机122通信。在一种选项中，中央控制(未示出)与跟踪相机122通信，并用于监督不透明度滤光器控制电路100和增强现实发射器102。可在组件100、102和122之间提供适当的有线或无线通信路径并可将该通信路径集成入HMD设备的框架中。
与诸如用于主动式立体3D观看的传统LCD快门式眼镜(其通常需要复杂的光学器件)等设备相比，所得到的HMD设备是相对新型的。这些眼镜与显示屏幕结合使用以产生3D图像的幻觉。在眼镜透镜中，当施加电压时液晶层可以从透明的切换为不透明的，从而有效提供每只眼睛一个像素。眼镜可以由与屏幕的刷新率同步的无线信号控制。屏幕交替地为每只眼睛显示不同的透视图，这实现了每只眼睛只看到为其准备的图像的期望效果。通过将不透明度滤光器的所有像素一起控制为透明的或不透明的，此处提供的HMD设备具有用作快门式眼镜的能力。
在另一替代中，HMD设备可以提供被动立体视觉。因为LCD面板中使用的滤光器是偏振的，我们将右侧和左侧透镜的LCD面板定向为偏振相差90度。这改变了旋转的LCD的行为，从而透明和不透明被翻转了。所施加的电压导致透明，而没有施加电压导致不透明。对于非旋转的LCD，所施加的电压导致不透明而没有施加电压导致透明。
在如此处描述的透视透镜中通常不使用不透明度滤光器(比如LCD)，因为在眼睛的如此近距离处，它几乎完全失焦。然而，对于我们的目的来说，这种结果是实际上是期望的。经由使用相加色(additivecolor)的普通HMD显示器(其被设计为是聚焦的)，用户看到具有清晰彩色图形的增强现实图像。该LCD面板被放置在此显示器“后面”从而模糊的黑色边界围绕任何虚拟内容，使其根据需要而不透明。我们扭转了自然模糊的缺陷而方便地获得了抗混叠且带宽减少的特征。这些是使用低分辨率且失焦图像的自然结果。存在对数字采样图像的有效平滑化。任何数字图像都经受混叠，其中在光的波长附近，采样的离散性对自然模拟和连续信号导致误差。平滑化意味着在视觉上更靠近理想的模拟信号。尽管对低分辨率丢失的信息没有被恢复，然而得到的误差更不值得注意了。
我们优化图形渲染，以便彩色显示器和不透明度滤光器被同时渲染并被校准到空间中用户的精确位置以补偿角度偏移问题。眼睛跟踪可用于计算视野极端处的正确的图像偏移。可以进一步增大不透明度滤光器或掩模以覆盖HMD设备的整个透镜，延伸到中心视野中的增强现实图像的显示组件之外。也可以用彩色LCD或诸如有机LED(OLED)等其他显示器对不透明度掩模进行彩色着色，以提供围绕中心视野中的高分辨率聚焦区域的宽视野。
图2示出图1的HMD设备的系统图。该系统包括眼睛跟踪相机122、增强现实发射器102和不透明度滤光器控制电路100，它们能经由总线202或其他通信路径彼此通信。眼睛跟踪相机122包括处理器212、存储器214、IR发射器216、IR传感器218和接口220。存储器214可以含有指令，所述指令由处理器212执行以使眼睛跟踪相机能够执行其如本文所述的功能。该接口允许眼睛跟踪相机向增强现实发射器和不透明度滤光器控制电路传递数据，所述数据指示用户的眼睛相对于框架的相对位置。不透明度滤光器控制电路能够使用所述数据来向不透明度滤光器中的具有增加的不透明度的像素提供相应的偏移。类似地，增强现实发射器能够使用所述数据来向用于发射增强现实图像的像素提供相应的偏移。
在另一种方案中，眼睛跟踪相机向增强现实发射器传递眼睛位置数据就足够了，在这种情况下增强现实发射器向不透明度滤光器控制电路提供数据以指示不透明度滤光器的哪些像素应当具有增加的不透明度。或者，眼睛跟踪相机能够向不透明度滤光器控制电路传递眼睛位置数据，不透明度滤光器控制电路将所述数据中继到增强现实发射器。在另一种可能中，是不透明度滤光器控制电路而非增强现实发射器使用眼睛位置数据，因为由于不透明度滤光器对眼睛的接近程度，不透明度滤光器的像素中的变化比增强现实图像中的变化更令人注意。
在任一情况下，增强现实发射器可以向不透明度滤光器控制电路提供数据，所述数据指示增强现实图像的形状。该形状由周界和所包含的点限定。此数据还可被不透明度滤光器控制电路用于决定应当向不透明度滤光器的哪些像素提供增加的不透明度，通常是依照增强现实图像的大小和形状。
增强现实发射器包括处理器222、存储器224、发射可见光的光发射器和接口228。存储器224可以含有指令，所述指令由处理器222执行以使增强现实发射器能够执行其如本文所述的功能。光发射器可以是微显示器，比如发射如四分之一平方英寸之类的小面积的2D彩色图像的LCD。该接口可用于与眼睛跟踪相机和/或不透明度滤光器控制电路通信。
不透明度滤光器控制电路100包括处理器232、存储器234、不透明度滤光器驱动器236和接口238。存储器234可以含有指令，所述指令由处理器232执行以使不透明度滤光器控制电路能够执行其如本文所述的功能。不透明度滤光器驱动器能够驱动不透明度滤光器106中的像素，比如通过按行和列地址来寻址每个像素，以及通过指示期望的不透明度的水平的电压，从作为最透光水平的最小水平到最不透明或最不透光的最大水平。在某些情况下，设定每个像素的色彩。该接口可用于与眼睛跟踪相机和/或增强现实发射器通信。不透明度滤光器控制电路与不透明度滤光器106通信以驱动其像素。
处理器212、222和232中的一个或更多个可被认为是控制电路。此外，存储器214、224和234中的一个或更多个可被认为是有形计算机可读存储，所述存储包含计算机可读软件以对至少一个处理器或控制电路进行编程以执行在如此处所述的光学透视HMD设备中使用的方法。
该系统可进一步包含前面讨论的组件，比如用于确定用户正在看的方向，地板、墙壁和用户环境的其他方面的位置。
图3A示出用于在图1的HMD设备中提供增强现实图像的过程。在步骤300，眼睛跟踪组件提供有关眼睛的相对位置的数据。一般而言，这可以每秒执行若干次。该数据可指示眼睛从默认位置(比如在眼睛向前直看时)的偏移。在步骤302，增强现实发射器向不透明度滤光器控制电路提供有关增强现实图像的大小、形状和位置(以及可选地，色彩)的数据。位置数据可以基于有关眼睛的相对位置的数据。增强现实图像是基于使用它的应用的需要而设定的图像。例如，针对娱乐应用，提供先前的飞跃的海豚的示例。在步骤304，增强现实发射器发射增强现实图像，以便该图像经由一个或更多个光学组件到达用户的眼睛。同时，在步骤306，不透明度滤光器控制电路驱动不透明度滤光器的像素，以在增强现实图像后面提供增加的不透明度。在决定步骤310，如果有下一个增强现实图像，则重复开始于步骤300的该过程。如果没有下一个增强现实图像，该过程在步骤312结束。
下一个增强现实图像可以是指如之前提供的同一增强现实图像，但是在用户看来在不同的位置，比如当将之前的增强现实图像移动到稍微不同的位置以描绘增强现实图像的移动时。下一个增强现实图像也可以是指新的类型的图像，比如从海豚切换到另一种类型的物体。下一个增强现实图像也可以是指在继续显示之前显示的物体的同时增加新的物体。在一种方案中，增强现实发射器以固定的帧率发射视频图像。在另一方案中，静态图像被发射并保持一段时间，该段时间比典型的视频帧时段要长。
步骤314可选地在增强现实图像中提供逐渐淡化，比如当其靠近视野的增强现实显示区域的边界时。增强现实显示区域可由用户视野中的最大角度范围(垂直地和水平地)限定，该增强现实图像被约束于该最大角度范围中，该最大角度范围是由增强现实发射器和/或光学组件112的限制造成的。因此，增强现实图像可以出现于增强现实显示区域的任何部分中，但是不能在增强现实显示区域之外。
一般而言，在不透明度滤光器中可以使用不透明度的量在时间和空间上的淡化。类似地，在增强现实图像中可以使用在时间和空间上的淡化。在一个方案中，不透明度滤光器的不透明度的量在时间上的淡化对应于增强现实图像中在时间上的淡化。在另一方案中，不透明度滤光器的不透明度的量在空间上的淡化对应于增强现实图像中在空间上的淡化。边界可以是增强现实显示区域的边界。边界可以是例如在水平或垂直方向延伸的外围。例如，结合图9C进一步讨论淡化。
图3B示出图3A的步骤306的细节。在步骤320中，不透明度滤光器控制电路标识在增强现实图像后面的不透明度滤光器的像素，例如，基于增强现实图像的大小、形状和位置。各种方案是可能的。在一个方案中，在步骤322，为从用户眼睛的标识位置的视角看在增强现实图像后面的不透明度滤光器的像素提供增加的不透明度。以这种方式，增强现实图像后面的像素被暗化，从而来自真实世界场景的相应部分的光被阻挡而无法到达用户的眼睛。这允许增强现实图像逼真且表示全范围的色彩和亮度。而且，因为可以以更低的亮度提供增强现实图像，所以减少了增强现实发射器的功耗。在没有不透明度滤光器的情况下，会需要以比真实世界场景的相应部分更亮的足够高的亮度提供增强现实图像，以使得增强现实图像能被区分并且不是透明的。在暗化不透明度滤光器的像素时，一般而言，沿着增强现实图像的闭合周界的像素与周界内的像素一起被暗化。参见例如图4D和图5。可能期望提供一定的重叠，从而在周界外并围绕周界的某些像素也被暗化。参见图4D中的区域404。这些重叠的像素可以提供围绕周界具有一致厚度的暗化区域。在另一方案中，例如，通过暗化增强现实图像的周界外的不透明度滤光器的所有或大部分像素，同时允许增强现实图像的周界内的像素保持透光，可以实现有趣的效果。
步骤324为在视野的增强现实显示区域之外的不透明度滤光器的像素提供增加的不透明度。一般而言，用户的视野是在任何给定时刻看见的可观察世界的角度范围(垂直地和水平地)。人类有接近180度的前向视野。然而，感知色彩的能力在视野中心更强，而感知形状和运动的能力在视野外围更强。进而，如所提到过的，增强现实图像被约束成在用户视野的子集区域中提供。在一示例实现中，在视野的中心、约20度的角度范围(其与眼睛的视网膜的中央凹(fovea)排齐)上提供增强现实图像。这是视野的增强现实显示区域。关于进一步的细节参见例如图9A1和图9B1(α1限定的区域)。增强现实图像被诸如用于将增强现实图像路由到用户眼睛的光学组件的大小等因素约束。
另一方面，由于它被并入透镜中，不透明度滤光器可以在视野的更大范围中延伸，比如约60度，以及包括第一视野。关于进一步的细节参见例如图9A1和图9B1(α2限定的区域)。例如，可为在外围方向中第一视野之外的不透明度滤光器的像素提供与在第一视野内的不透明度滤光器的像素的增加的不透明度一致的增加的不透明度。关于进一步的细节，参见例如图9D1-D3。例如，这在提供外围提示时可能有用，其中该外围提示例如强调增强现实图像的移动。例如，该外围提示可以表现为增强现实图像的阴影。该外围提示可以在或者不在用户的外围视觉的区域中。该外围提示可以增强对移动的感测或者以其他方式捕捉用户的注意力。
进一步，当增强现实图像靠近视野的增强现实显示区域的边界时，在视野之外的相应的不透明度滤光器的像素可被均匀地或在空间上淡化地提供增加的不透明度。例如，不透明度增加的像素可毗邻边界处的增强现实图像。增强现实图像可以是图像的第一部分，其中图像的第二部分在边界处被截止，从而它没有被显示，在这种情况下不透明度增加的像素可代表该图像的第二部分，具有与该图像的第二部分类似的大小和形状。关于进一步的细节，参见例如图9E1-9E3。在一些情况下，不透明度增加的像素可具有与该图像的第二部分类似的色彩。
即使增强现实图像没有在边界被截止，也可以提供不透明度增加的像素以代表从增强现实图像到真实世界场景的过渡。在一个方案中，不透明度增加的像素被淡化以便更靠近边界处的增强现实图像的不透明度滤光器的像素更不透明，而更远离边界处的增强现实图像的不透明度滤光器的像素更透光。
另一选项涉及在不存在增强现实图像的时刻为不透明度滤光器的像素提供增加的不透明度，比如以提供外围或非外围提示。这种提示例如在真实世界场景中有运动的应用中可能是有用的。或者，不透明度滤光器的不透明度增加的像素可在视野的外围区域中提供增强现实图像的表示。关于进一步的细节，参见例如图9F1-9F3。
步骤326当增强现实图像靠近视野的增强现实显示区域的边界时提供不透明度的逐渐过渡，例如，空间淡化。为了避免增强现实图像中的突然过渡，可以发生如在步骤314中描述的增强现实图像的空间淡化。在不透明度滤光器的像素中可以发生相应的淡化。例如，更靠近边界的增强现实图像的部分与更远离边界的增强现实图像的部分相比，增强现实图像可以变得更淡化，而不透明度滤光器的像素可以变得更不不透明。即便增强现实图像不靠近视野的增强现实显示区域的边界，也可类似地提供不透明度的逐渐过渡
图4A示出基于图4C的增强现实图像的形状的不透明度滤光器400的示例配置。不透明度滤光器提供不透明度增加的区域402。增加的不透明度通常是指像素的暗化，其可以包括在单色方案中暗化到不同的灰阶，或在彩色方案中暗化到不同的色阶。
图4B示出图1的示例性真实世界场景120。当来自真实世界场景120的光穿过不透明度滤光器时，所述光被不透明度滤光器400倍增，从而不透明度增加的区域将真实世界场景的相应区域乘以“0”从而真实世界场景的相应区域不穿透不透明度滤光器，而未暗化区域将真实世界场景的相应区域乘以“1”，从而真实世界场景的相应区域穿透不透明度滤光器。
图4C示出图1的示例性增强现实图像104。可以用色彩和纹理渲染增强现实图像104，在本示例中未示出所述色彩和纹理。
图4D示出用户看到的图1的示例性图像132。图像132是通过将图像104增加到通过将图像402和120相乘形成的图像而形成的。暗化后的区域404围绕海豚的增强现实图像。
图5示出具有不透明度增加的区域的不透明度滤光器500，以提供图4A的不透明度滤光器的配置。每个小圆代表不透明度滤光器的一像素。对应于增强现实图像的大小、形状和位置的选中像素被控制为具有增加的不透明度。该增强现实图像的轮廓被叠加以供参考。
图6示出在没有不透明度滤光器时会得到的、图1的示例性图像的变型。在此图像600中，增强现实图像看上去是透明的或者有重影的，从而增强现实图像后面的真实世界场景是可见的。这种结果较不逼真。
图7A示出戴在用户头部700上的图1的显示设备的一示例实现。在本示例中，框架类似于传统的眼镜框架且能以类似的舒适程度佩戴。然而，其他实现也是可能的，比如通过头盔、带子或其他手段装载到用户头部的面罩。该框架包括框架前部702和边撑704和705。框架前部保持用于用户左眼的透视透镜701和用于用户右眼的透视透镜703。左和右的定向是从用户的视角看的。左侧透视透镜701包括透光的不透明度滤光器723和透光的光学组件722，光学组件722比如是将增强现实图像与来自真实世界场景的光混合以供左眼706观看的分光器。可在不透明度滤光器中提供开口724以允许眼睛跟踪组件726对左眼706(包括瞳孔707)成像。该开口可以是例如透镜701上的洞，或透镜701中没有提供不透明度滤光器的区域。如所提及的，不透明度滤光器可以是在另一透光透镜材料(比如玻璃或塑料)中或在另一透光透镜材料上提供的。眼睛跟踪组件726使用的红外光能穿透这样的透光透镜材料。
眼睛跟踪组件726包括IR发射器728和IR传感器734，IR发射器728发射IR光730，IR传感器734感测被反射的IR光732。在一种可能方案中，眼睛跟踪组件726可经由臂736被安装到框架。
右侧透视透镜703包括透光的不透明度滤光器721以及光学组件720，光学组件720比如是将增强现实图像与来自真实世界场景的光混合以供右眼718观看的分光器。右侧增强现实发射器716经由臂714被安装到框架上，而左侧增强现实发射器708经由臂710被安装到框架上。不透明度滤光器控制电路712能被安装到框架的鼻梁架，并由左侧和右侧的不透明度滤光器共享。例如，在框架中通过导电路径可实现合适的电气连接。
图7B示出图7A的HMD设备的进一步的细节。显示设备是从向前看的用户的视角示出的，从而示出右侧透镜703和左侧透镜701。右侧增强现实发射器716包括光发射部分762(比如像素网格)和可包括用于控制光发射部分762的电路的部分760。类似地，左侧增强现实发射器708包括光发射部分742和具有用于控制光发射部分742的电路的部分740。在一个方案中，光学组件720和722中的每一个可具有相同的尺寸，包括宽度w1和高度h1。右侧光学组件720包括顶部表面764、光学组件720内的有角度的半镜面表面766、和正表面768，光穿过该顶部表面764从右侧增强现实发射器716进入。没有被不透明度滤光器770阻挡的、来自右侧增强现实发射器716和来自真实世界场景的各部分的光(由光线780表示)穿透正表面768并进入用户的右侧眼睛。类似地，左侧光学组件722包括顶部表面744、光学组件722内的有角度的半镜面表面746、和正表面748，光穿过该顶部表面744从左侧增强现实发射器708进入。没有被不透明度滤光器750阻挡的、来自左侧增强现实发射器708和来自真实世界场景的部分的光(由光线771表示)穿透正表面748并进入用户的左侧眼睛。在一个方案中，不透明度滤光器750和770中的每一个具有相同的尺寸，包括宽度w2＞w1和高度h2＞h1。
通常，向双眼提供同一增强现实图像，尽管对每只眼睛提供独立的图像也是可能的(比如为了实现立体图像的效果)。在一替代实现中，只有一个增强现实发射器被合适的光学组件路由到双眼。
图7C示出戴在用户头部上的图1的显示设备的一替代实现，其中眼睛跟踪组件790直接在前部眼镜框架702上且在内侧。在本实现中，眼睛跟踪组件不需要投射穿过透镜701。眼睛跟踪组件790包括IR发射器791和IR传感器794，IR发射器791发射IR光792，IR传感器794感测被反射的IR光793。
至于眼睛跟踪，在大多数情况下，知道在运动过程中眼镜弹跳时增强现实眼镜相对于眼睛的移位就足够了。眼睛的转动(例如，瞳孔在眼眶内的移动)通常影响较小。尽管不透明度区域和增强现实图像的对齐也是根据眼睛位置，然而实践中，通过拉伸不透明度图像以使两个标准都满足，我们能如同用户正向左看一样对齐不透明度显示器的左侧，且同时如同用户正向右看一样对齐不透明度显示器的右侧。如果我们这样做的话，那么眼睛的角度可以被忽略。这种方案的一个缺点在于：当用户向右看时左侧将是错误的，而当用户向左看时右侧将是错误的，但是用户不会注意到，因为用户只能在视觉上测量落入用户视野中心的部分。
图8A1示出当用户的眼睛相对于HMD设备的框架在第一位置时，真实世界图像和不透明度滤光器的不透明度增加的区域的对准。示出了俯视图。如同提到过的，眼睛跟踪组件可用于标识眼睛相对于框架的位置。在本示例中，考虑框架相对于眼睛706及其瞳孔707的水平位置。不透明度滤光器750和光学组件722被安装到框架并因此与框架一起移动。此处，眼睛706正直视前面真实世界场景的元素800，如由视线802表示的。元素800具有宽度xrw。不透明度滤光器750包括具有增加的不透明度的区域804，而光学组件722包括相应的区域805，在区域805中提供增强现实图像。假定区域804和805具有宽度x3。在实践中，不透明度滤光器区域804的宽度可以比增强现实图像部分805的宽度略大。进一步，不透明度滤光器区域804离不透明度滤光器的左侧的距离为x1，而离不透明度滤光器的右侧的距离为x2。因此，x1+x2+x3＝w2。增强现实图像部分805离光学组件722的左侧的距离为x4，离光学组件722的右侧的距离为x5。因此，x4+x5+x3＝w1。真实世界场景的元素800具有宽度xrw＞x3并因此被不透明度滤光器的区域804阻挡而不能到达眼睛706。
图8A2示出图8A1的真实世界场景元素800的前向视图。
图8A2示出图8A1的不透明度滤光器区域804的前向视图。
图8A4示出图8A1的增强现实图像区域805的前向视图。
图8B1示出当用户的眼睛相对于HMD设备的框架在第二位置时，真实世界图像和不透明度滤光器的不透明度增加的区域的对准。示出了俯视图。在本示例中，框架被相对于眼睛706向左移位。不透明度滤光器750包括具有增加的不透明度的区域806，而光学组件722包括相应的区域807，在区域807中提供增强现实图像。假定区域806和807具有宽度x3。进一步，不透明度滤光器区域806离不透明度滤光器的左侧的距离为x1’＞x1，而离不透明度滤光器的右侧的距离为x2’＜x2。因此，x1’+x2’+x3＝w2。增强现实图像部分807离光学组件722的左侧的距离为x4’，离光学组件722的右侧的距离为x5’。因此，x4’+x5’+x3＝w1。而且，由于移位，在本示例中x4’＞x4且x5’＜x5。
真实世界场景的元素800具有宽度xrw＞x3并因此被不透明度滤光器的区域806阻挡而不能到达眼睛706。通过检测框架的移动，可相应调整不透明度区域和/或增强现实图像的位置，比如通过将其水平和/或垂直移位，而同时用户保持对真实世界场景的固定视线。这确保了增强现实图像出现在真实世界场景的相同位置。不透明度区域和增强现实图像彼此持续被对齐或对准并与真实世界场景对齐或对准。
在实践中，因为不透明度滤光器的不透明度增加的区域看上去比远端聚焦的增强现实图像更靠近眼睛，所以不透明度滤光器的不透明度增加的区域的位置的任何变化比增强现实图像的位置的类似变化更引人注意。这是由于对不透明度滤光器的不透明度增加的区域的更大的视差效应。相应地，基于眼睛跟踪，通过调整不透明度滤光器的不透明度增加的区域的位置而不调整增强现实图像的位置，在许多情况下可以获得可接受的结果。不透明度滤光器的不透明度增加的区域的位置的移位可以与眼睛相对于框架的位置的移位相同或类似。增强现实图像的位置的移位可以是不透明度滤光器的不透明度增加的区域的位置的移位的一小部分。
另一点是，当用户正向右看时，左侧透视透镜和增强现实图像不被聚焦，从而只对右侧不透明度滤光器而不对左侧不透明度滤光器基于眼睛跟踪而调整不透明度滤光器的不透明度增加的区域的位置可能就足够了。类似地，当用户正向左看时，右侧透视透镜和增强现实图像不被聚焦，从而只对左侧不透明度滤光器而不对右侧不透明度滤光器基于眼睛跟踪而调整不透明度滤光器的不透明度增加的区域的位置可能就足够了。
图8B2示出图8B1的真实世界场景元素800的另一视图。
图8B3示出图8B1的不透明度滤光器区域804的另一视图。
图8B4示出图8B1的增强现实图像区域805的另一视图。
图9A1示出在用户眼睛的视野的增强现实显示区域的中心处，增强现实图像和不透明度滤光器的不透明度增加的区域的对准。示出了俯视图。通过将不透明度滤光器750和光学组件722放置得离眼睛更远，修改图9A1、9B1、9D1、9E1和9F1的比例尺以使其不同于图8A1和图8B1的比例尺，以示出进一步的细节。如同讨论过的，眼睛具有相对宽的视野。不透明度滤光器750在由线条904和912界定的角度范围为α2(比如约60度)的视野内，而提供增强现实图像的光学组件722在由线条906和910界定的角度范围为α1(比如约20度)的视野内。角度范围为α1的视野代表增强现实显示区域的角度范围。线条908代表眼睛的向前直视线，其穿过增强现实图像900和不透明度增加的区域902的中心。进一步，不透明度滤光器的一部分902具有增加的不透明度而光学组件900的相应部分提供增强现实图像。不透明度滤光器的不透明度增加的部分902在增强现实图像后面。本示例示出在增强现实显示区域中心而不是在增强现实显示区域(由边界线906和910表示)的边界的增强现实图像和不透明度滤光器的不透明度增加的区域。
在一个方案中，不透明度滤光器具有提供色彩的能力，以便在视野的中心20度(向左和向右+/-10度)内提供高分辨率彩色图像，而外围区域(向左和向右+/-10到30度之间)使用不透明度滤光器来提供增加的不透明度和色彩，但是分辨率更低且失焦。例如，当用户将其头部从一侧移动到另一侧时，我们能调整增强现实图像(比如飞跃的海豚)的位置，以便该海豚能从中心20度视野移动到外围区域，其中不透明度滤光器代表增强现实图像。这避免了如果在海豚移动到中心20度视野外时海豚消失所带来的不连续性。
在本图及以下各图中，为了简明，假定增强现实图像和不透明度增加的区域具有相应的方形或矩形形状。
图9A2示出图9A1的不透明度滤光器区域902的前向视图。
图9A3示出图9A1的增强现实图像区域900的前向视图。
图9B1示出在图9A1的增强现实显示区域的外围边界处，增强现实图像和不透明度滤光器的不透明度增加的区域的对准。此处，增强现实图像922和不透明度滤光器的不透明度增加的区域920(假定两者都具有约d2的宽度)在增强现实显示区域(由边界线906和910表示)的边界906。线条907表示穿过增强现实图像922和透明度增加的区域902的中心的视线。α3是线条906和907之间的角度范围。
如同关于图3A和图3B提到的，比如在增强现实图像在增强现实显示区域的边界时(如图9B1的情况)，提供不透明度的逐渐过渡是可能的。有关这种过渡的进一步细节，参见下文。
图9B2示出图9B1的不透明度滤光器区域920的前向视图。
图9B3示出图9B1的增强现实图像区域922的前向视图。
图9C1示出根据离用户眼睛的视野的外围边界的距离的不透明度的逐渐变化。x轴表示离边界线906的水平距离而y轴表示不透明度滤光器的相应区域的不透明度。在一种选项中，由线条915表示，不透明度在离边界的距离为d1到d2时处于最大水平，并逐渐减小到边界处(x＝0)的最小水平。参见图9C2。对于x＜0(增强现实显示区域外)，不透明度在最小水平。在另一选项中，由线条916表示，不透明度在离边界从x＝0到x＝d2在最大水平，并在增强现实显示区域外在离边界的距离|d3|上逐渐减小到最小水平。参见图9C3。对于x＜d3(增强现实显示区域外)，不透明度在最小水平。在又一选项中，由线条917表示，不透明度在离边界从x＝d4到x＝d2在最大水平，并在增强现实显示区域外在离边界的距离|d5|-|d4|上逐渐减小到最小水平。参见图9C4。对于x＜d5(增强现实显示区域外)，不透明度在最小水平。
图9C2示出具有未淡化部分931、连续淡化部分932、933和934的不透明度滤光器区域，其中在图9C2中淡化在0和d1之间。
图9C3示出具有未淡化部分941、连续淡化部分942、943和944的不透明度滤光器区域，其中在图9C3中淡化在0和d3之间。
图9C4示出具有未淡化部分951、连续淡化部分952、952和953的不透明度滤光器区域，其中在图9C4中淡化在d4和d5之间。
图9D1示出在图9A1的增强现实显示区域的外围边界处，增强现实图像和不透明度滤光器的不透明度增加的区域的对准，其中在视野的第二、外围区域中提供额外的不透明度增加的区域。示出了俯视图。与图9B1相比，图9D1增加了不透明度滤光器750的额外的不透明度增加的区域924。在增强现实显示区域外的额外的不透明度增加的区域924可提供外围提示，比如针对增强现实图像922的阴影。该阴影可具有与增强现实图像922类似的大小和形状。额外的不透明度增加的区域924可以与增强现实图像922和/或不透明度增加的区域920在水平方向上在相同水平和/或高于或低于增强现实图像922和/或不透明度增加的区域920。在本示例中，不透明度增加的区域924与不透明度增加的区域920被不透明度滤光器750的透光区域分开。
在光学组件722的左侧外围侧，视野的第二、外围区域具有在光学组件722的左侧外围侧的线条904和906之间的(α2-α1)/2(例如，10-30度)的角度范围。相应的额外外围区域具有在光学组件722的右侧外围侧的线条910和912之间的(α2-α1)/2的角度范围。
图9D2示出图9D1的不透明度滤光器区域920和924的前向视图。
图9D3示出图9D1的增强现实图像区域900的前向视图。
图9E1示出在图9A1的增强现实显示区域的外围边界处，增强现实图像的第一部分和不透明度滤光器的不透明度增加的区域的对准，其中在视野的第二、外围区域中提供额外的不透明度增加的区域以代表该增强现实图像的第二、截止部分。示出了俯视图。此处，宽度为d2的增强现实图像部分922表示增强现实图像的第一部分，而不透明度滤光器750的不透明度增加的区域926在增强现实图像部分922后面。宽度为d2’的增强现实图像部分923(其实际上不存在)表示基于增强现实图像922的位置增强现实图像的第二、截止部分将位于的位置。在此情况下，在增强现实图像部分923之后提供不透明度滤光器750的额外的不透明度增加的区域928(其可以是不透明度增加的区域926的延续)以避免增强现实图像中的突然截止。额外的、不透明度增加的区域928可以终止于直到最小不透明度的阶梯式变化，或可被提供有不透明度的逐渐变化，使用类似于图9C1的讨论的方案。
在一个方案中，额外的不透明度增加的区域928具有与增强现实图像部分923类似的大小、形状位置和/或色彩，从而它基本上代表实际上不存在的增强现实图像部分923。
图9E2示出图9E1的不透明度滤光器区域926和928的前向视图。
图9E3示出图9E1的增强现实图像区域922和923的前向视图。
图9F1示出在光学组件722不提供增强现实图像的时刻，视野的第二、外围区域中不透明度滤光器950的不透明度增加的区域960。示出了俯视图。在右侧或左侧上的外围区域中可提供一个或更多个不透明度增加的区域。
如同讨论过的，不透明度增加的区域960可表示分辨率更低且失焦版本的增强现实图像。例如当用户向侧面移动头部从而增强现实图像移动到中心20度视野之外到了视野的外围区域时这可能是有用的。此移动可以由图9A1、然后是图9B1、然后是图9F1的序列表示，在图9A1中增强现实图像900在中心视野，在图9B1中增强现实图像920在中心视野的边界，在图9F1中不透明区域960(表示增强现实图像)在中心视野的外围区域。当用户将其头部移回起始位置时，该序列可被反转。
外围区域中的不透明度滤光器的不透明度增加的像素具有与增强现实图像相应的形状，和/或当不透明度滤光器具有色彩能力时具有相应的色彩。不透明度滤光器的不透明度增加的像素的定位和时序可被设定为基于增强现实图像的移动而提供平滑过渡。例如，当增强现实图像到达中心视野的边界时，不透明度滤光器可被相应激活以在外围区域中提供相应的形状和移动作为增强现实图像的表示。然后，当增强现实图像的表示朝中心视野的边界移动时，不透明度滤光器可被停用(deactivate)且增强现实图像可被相应激活以在中心视野中提供相应的形状和移动。
图9F2示出图9F1的不透明度滤光器区域960的前向视图。
图9F3示出图9F1的增强现实图像的前向视图。
可以看出，提供了许多优点。例如，提供了相对流水线化的HMD设备。而且，使用眼睛跟踪和心理感知技术提供眼睛、主彩色显示器和不透明度滤光器之间的校准。即使在没有提供虚拟影像的主显示器时，不透明度滤光器仍可用于提供外围视觉提示。对于基于色彩的不透明度滤光器，我们能将外围彩色区域与中心聚焦区域无缝融合以得到更好的整体体验，以及到聚焦区域内只有不透明度滤光(opacity-only-filtering)的过渡。
前面的对本技术的详细描述只是为了说明和描述。它不是为了详尽的解释或将本技术限制在所公开的准确的形式。鉴于上述教导，许多修改和变型都是可能的。所描述的实施例只是为了最好地说明本技术的原理以及其实际应用，从而使精通本技术的其他人在各种实施例中最佳地利用本技术，适合于特定用途的各种修改也是可以的。本技术的范围由所附的权利要求进行定义。

Claims (11)

1.一种光学透视头戴式显示设备，包括：
当所述显示设备由用户佩戴时在所述用户的眼睛(118)和真实世界场景(120)之间延伸的透视透镜(108)，所述透视透镜包括具有多个像素的不透明度滤光器(106)，每个像素能被控制以调整所述像素的不透明度，所述透视透镜还包括显示组件(112)；
增强现实发射器(102)，所述增强现实发射器使用所述显示组件向所述用户的眼睛发射光，所述光代表具有形状的增强现实图像；以及
至少一个控制(100)，所述至少一个控制控制所述不透明度滤光器，以为所述不透明度滤光器的从所述用户的眼睛的视角看在所述增强现实图像后面的像素提供增加的不透明度，所述不透明度滤光器的在所述增强现实图像后面的像素包括沿着所述形状的周界的像素以及在所述形状的所述周界之内的像素，并且所述至少一个控制还为所述不透明度滤光器的、在所述周界周围具有一致厚度的区域内的围绕所述周界的像素提供增加的不透明度。
2.根据权利要求1所述的光学透视头戴式显示设备，其特征在于：
所述透视透镜被安装于佩戴在所述用户的头部(700)上的框架(702，704)；
所述光学透视头戴式显示设备进一步包括跟踪组件(122)，所述跟踪组件跟踪所述用户的眼睛相对于所述框架的位置；以及
所述至少一个控制能对所述用户的眼睛相对于所述框架的所述位置作出响应。
3.根据权利要求2所述的光学透视头戴式显示设备，其特征在于：
所述至少一个控制根据所述用户的眼睛相对于所述框架的所述位置而保持在所述增强现实图像后面的所述像素与所述增强现实图像的对准。
4.根据权利要求2所述的光学透视头戴式显示设备，其特征在于：
所述至少一个增强现实发射器根据所述用户的眼睛相对于所述框架的所述位置而保持所述增强现实图像与在所述增强现实图像后面的像素的对准。
5.根据权利要求1所述的光学透视头戴式显示设备，其特征在于：
所述至少一个控制为所述不透明度滤光器的、在所述周界周围具有一致厚度的区域内的围绕所述周界的像素提供增加的不透明度导致提供围绕所述增强现实图像的暗化区域。
6.根据权利要求1所述的光学透视头戴式显示设备，其特征在于：
所述增强现实图像被限制于所述用户的眼睛的视野的第一角度范围(α1)；以及
所述不透明度滤光器在第二角度范围(α2)内延伸，所述第二角度范围包括所述第一角度范围和所述视野的更外围的角度范围。
7.根据权利要求6所述的光学透视头戴式显示设备，其特征在于：
所述至少一个控制为在所述更外围的角度范围内的所述不透明度滤光器的像素提供增加的不透明度，以描绘所述增强现实图像的外围提示。
8.根据权利要求6所述的光学透视头戴式显示设备，其特征在于：
所述至少一个控制为在所述更外围的角度范围内的所述不透明度滤光器的像素提供增加的不透明度，以描绘所述增强现实图像的表示。
9.根据权利要求1所述的光学透视头戴式显示设备，其特征在于：
所述至少一个控制控制所述不透明度滤光器以提供不透明度的逐渐过渡。
10.根据权利要求9所述的光学透视头戴式显示设备，其特征在于：
所述增强现实图像在所述用户的眼睛的视野的增强现实显示区域中延伸，所述视野的所述增强现实显示区域具有边界；
所述增强现实图像的第一部分比所述增强现实图像的第二部分更远离所述边界；以及
为了提供所述逐渐过渡，所述至少一个控制控制所述不透明度滤光器以为在所述增强现实图像后面以及较靠近所述边界的像素(934)提供比在所述增强现实图像后面且更远离所述边界的像素(931)更低的不透明度。
11.根据权利要求10所述的光学透视头戴式显示设备，其特征在于：
当所述增强现实图像的部分(923)在所述边界被截止时，所述至少一个控制控制所述不透明度滤光器以为在所述视野的所述增强现实显示区域之外、且表示所述增强现实图像在所述边界外的延续的像素(928)提供更高的不透明度。
CN201110291177.8A 2010-09-21 2011-09-19 用于透视头戴式显示器的不透明度滤光器 Active CN102540463B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/887,426 US8941559B2 (en) 2010-09-21 2010-09-21 Opacity filter for display device
US12/887,426 2010-09-21

Publications (2)

Publication Number Publication Date
CN102540463A CN102540463A (zh) 2012-07-04
CN102540463B true CN102540463B (zh) 2016-01-06

Family

ID=45817271

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110291177.8A Active CN102540463B (zh) 2010-09-21 2011-09-19 用于透视头戴式显示器的不透明度滤光器

Country Status (13)

Country Link
US (6) US8941559B2 (zh)
EP (4) EP3499293B1 (zh)
JP (1) JP5801401B2 (zh)
KR (1) KR101895085B1 (zh)
CN (1) CN102540463B (zh)
CA (1) CA2810859C (zh)
DK (1) DK2619622T3 (zh)
ES (3) ES2809231T3 (zh)
IL (1) IL225025A (zh)
PL (2) PL3499292T3 (zh)
PT (1) PT2619622T (zh)
TR (1) TR201903562T4 (zh)
WO (1) WO2012039877A1 (zh)

Families Citing this family (396)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070081123A1 (en) 2005-10-07 2007-04-12 Lewis Scott W Digital eyewear
US8696113B2 (en) 2005-10-07 2014-04-15 Percept Technologies Inc. Enhanced optical and perceptual digital eyewear
US9658473B2 (en) 2005-10-07 2017-05-23 Percept Technologies Inc Enhanced optical and perceptual digital eyewear
US11428937B2 (en) 2005-10-07 2022-08-30 Percept Technologies Enhanced optical and perceptual digital eyewear
US20150205111A1 (en) 2014-01-21 2015-07-23 Osterhout Group, Inc. Optical configurations for head worn computing
US9366867B2 (en) 2014-07-08 2016-06-14 Osterhout Group, Inc. Optical systems for see-through displays
US9400390B2 (en) 2014-01-24 2016-07-26 Osterhout Group, Inc. Peripheral lighting for head worn computing
US9952664B2 (en) 2014-01-21 2018-04-24 Osterhout Group, Inc. Eye imaging in head worn computing
US9715112B2 (en) 2014-01-21 2017-07-25 Osterhout Group, Inc. Suppression of stray light in head worn computing
US9298007B2 (en) 2014-01-21 2016-03-29 Osterhout Group, Inc. Eye imaging in head worn computing
US9229233B2 (en) 2014-02-11 2016-01-05 Osterhout Group, Inc. Micro Doppler presentations in head worn computing
US9965681B2 (en) 2008-12-16 2018-05-08 Osterhout Group, Inc. Eye imaging in head worn computing
US8941559B2 (en) 2010-09-21 2015-01-27 Microsoft Corporation Opacity filter for display device
EP2619749A4 (en) * 2010-09-21 2017-11-15 4IIII Innovations Inc. Head-mounted peripheral vision display systems and methods
US10359545B2 (en) 2010-10-21 2019-07-23 Lockheed Martin Corporation Fresnel lens with reduced draft facet visibility
US9632315B2 (en) 2010-10-21 2017-04-25 Lockheed Martin Corporation Head-mounted display apparatus employing one or more fresnel lenses
US9292973B2 (en) * 2010-11-08 2016-03-22 Microsoft Technology Licensing, Llc Automatic variable virtual focus for augmented reality displays
US9304319B2 (en) 2010-11-18 2016-04-05 Microsoft Technology Licensing, Llc Automatic focus improvement for augmented reality displays
US8678282B1 (en) * 2010-11-29 2014-03-25 Lockheed Martin Corporation Aim assist head-mounted display apparatus
KR20120057799A (ko) * 2010-11-29 2012-06-07 삼성전자주식회사 휴대단말에서 사전 기능 제공 방법 및 장치
US8941603B2 (en) * 2010-12-10 2015-01-27 Sony Corporation Touch sensitive display
US9720228B2 (en) 2010-12-16 2017-08-01 Lockheed Martin Corporation Collimating display with pixel lenses
KR101719264B1 (ko) * 2010-12-23 2017-03-23 한국전자통신연구원 방송 기반 증강 현실 콘텐츠 제공 시스템 및 그 제공 방법
US8670183B2 (en) * 2011-03-07 2014-03-11 Microsoft Corporation Augmented view of advertisements
US8885877B2 (en) 2011-05-20 2014-11-11 Eyefluence, Inc. Systems and methods for identifying gaze tracking scene reference locations
US8911087B2 (en) 2011-05-20 2014-12-16 Eyefluence, Inc. Systems and methods for measuring reactions of head, eyes, eyelids and pupils
US20120326948A1 (en) * 2011-06-22 2012-12-27 Microsoft Corporation Environmental-light filter for see-through head-mounted display device
US9323325B2 (en) 2011-08-30 2016-04-26 Microsoft Technology Licensing, Llc Enhancing an object of interest in a see-through, mixed reality display device
CN115167675A (zh) 2011-09-19 2022-10-11 视力移动技术有限公司 增强现实设备
US9606992B2 (en) * 2011-09-30 2017-03-28 Microsoft Technology Licensing, Llc Personal audio/visual apparatus providing resource management
US8990682B1 (en) 2011-10-05 2015-03-24 Google Inc. Methods and devices for rendering interactions between virtual and physical objects on a substantially transparent display
KR101917630B1 (ko) 2011-10-28 2018-11-13 매직 립, 인코포레이티드 증강 및 가상 현실을 위한 시스템 및 방법
US9547406B1 (en) 2011-10-31 2017-01-17 Google Inc. Velocity-based triggering
US8929589B2 (en) 2011-11-07 2015-01-06 Eyefluence, Inc. Systems and methods for high-resolution gaze tracking
US9213185B1 (en) * 2012-01-06 2015-12-15 Google Inc. Display scaling based on movement of a head-mounted display
CN104094197B (zh) * 2012-02-06 2018-05-11 索尼爱立信移动通讯股份有限公司 利用投影仪的注视追踪
US9147111B2 (en) * 2012-02-10 2015-09-29 Microsoft Technology Licensing, Llc Display with blocking image generation
US9117303B2 (en) 2012-03-25 2015-08-25 Membit Inc. System and method for defining an augmented reality view in a specific location
JP6060512B2 (ja) * 2012-04-02 2017-01-18 セイコーエプソン株式会社 頭部装着型表示装置
CN108391033B (zh) 2012-04-05 2020-10-30 奇跃公司 具有主动中央凹能力的宽视场（fov）成像设备
KR20130117302A (ko) * 2012-04-18 2013-10-25 삼성전자주식회사 안경형 디스플레이
US9335919B2 (en) * 2012-06-25 2016-05-10 Google Inc. Virtual shade
JP5351311B1 (ja) * 2012-06-29 2013-11-27 株式会社ソニー・コンピュータエンタテインメント 立体映像観察デバイスおよび透過率制御方法
USRE47984E1 (en) 2012-07-02 2020-05-12 Nvidia Corporation Near-eye optical deconvolution displays
US9494797B2 (en) 2012-07-02 2016-11-15 Nvidia Corporation Near-eye parallax barrier displays
JP6248931B2 (ja) * 2012-07-24 2017-12-20 ソニー株式会社 画像表示装置および画像表示方法
KR20140025930A (ko) * 2012-08-23 2014-03-05 삼성전자주식회사 헤드마운트형 디스플레이장치 및 그 제어방법
TWI528823B (zh) * 2012-08-28 2016-04-01 緯創資通股份有限公司 影像資訊顯示裝置與應用於其上之影像資訊顯示與調整方法
US10147232B2 (en) * 2012-08-30 2018-12-04 Atheer, Inc. Method and apparatus for selectively presenting content
US9823745B1 (en) 2012-08-30 2017-11-21 Atheer, Inc. Method and apparatus for selectively presenting content
US9998687B2 (en) * 2012-09-12 2018-06-12 Bae Systems Information And Electronic Systems Integration Inc. Face mounted extreme environment thermal sensor system
US10073201B2 (en) 2012-10-26 2018-09-11 Qualcomm Incorporated See through near-eye display
US20140168261A1 (en) 2012-12-13 2014-06-19 Jeffrey N. Margolis Direct interaction system mixed reality environments
US9759932B1 (en) 2013-01-08 2017-09-12 Regener-Eyes, LLC Eyewear, eyewear systems and associated methods for enhancing vision
WO2014113455A1 (en) * 2013-01-15 2014-07-24 The University Of North Carolina At Chapel Hill Methods, systems, and computer readable media for generating an augmented scene display
WO2014141918A1 (ja) * 2013-03-11 2014-09-18 コニカミノルタ株式会社 ウェアラブルコンピューター
EP2967322A4 (en) * 2013-03-11 2017-02-08 Magic Leap, Inc. System and method for augmented and virtual reality
US20140267228A1 (en) * 2013-03-14 2014-09-18 Microsoft Corporation Mapping augmented reality experience to various environments
CN108427504B (zh) 2013-03-15 2021-06-11 奇跃公司 显示系统和方法
ES2900423T3 (es) * 2013-03-15 2022-03-16 Percept Tech Inc Gafas digitales ópticas y perceptivas mejoradas
US9873233B2 (en) * 2013-03-15 2018-01-23 Johnson & Johnson Vision Care, Inc. Ophthalmic lens viewing sets for three-dimensional perception of stereoscopic media
KR20140130321A (ko) * 2013-04-30 2014-11-10 (주)세이엔 착용형 전자 장치 및 그의 제어 방법
JP6341355B2 (ja) * 2013-05-20 2018-06-13 コニカミノルタ株式会社 拡張現実空間表示装置
US9908048B2 (en) * 2013-06-08 2018-03-06 Sony Interactive Entertainment Inc. Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display
CN103383491B (zh) * 2013-07-03 2015-08-26 成都理想境界科技有限公司 一种视透率可调的头戴显示装置
JP2015015563A (ja) * 2013-07-04 2015-01-22 セイコーエプソン株式会社 画像表示装置
US9817626B2 (en) * 2013-07-25 2017-11-14 Empire Technology Development Llc Composite display with multiple imaging properties
US9880325B2 (en) 2013-08-14 2018-01-30 Nvidia Corporation Hybrid optics for near-eye displays
JP6610258B2 (ja) * 2013-11-05 2019-11-27 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
US9491365B2 (en) * 2013-11-18 2016-11-08 Intel Corporation Viewfinder wearable, at least in part, by human operator
KR102153599B1 (ko) 2013-11-18 2020-09-08 삼성전자주식회사 머리 착용형 디스플레이 장치 및 머리 착용형 디스플레이 장치의 광 투과율 변경 방법
US20160252758A1 (en) * 2013-11-21 2016-09-01 Empire Technology Development Llc Secure transparent display
US10254920B2 (en) * 2013-12-01 2019-04-09 Upskill, Inc. Systems and methods for accessing a nested menu
EP2887123A1 (en) * 2013-12-18 2015-06-24 Thomson Licensing Optical see-through glass type display device and corresponding optical element
US10274731B2 (en) 2013-12-19 2019-04-30 The University Of North Carolina At Chapel Hill Optical see-through near-eye display using point light source backlight
EP2887124A1 (en) * 2013-12-20 2015-06-24 Thomson Licensing Optical see-through glass type display device and corresponding optical unit
WO2015097169A1 (en) * 2013-12-23 2015-07-02 Essilor International (Compagnie Generale D'optique) Head-mounted display with filter function
US9459451B2 (en) 2013-12-26 2016-10-04 Microsoft Technology Licensing, Llc Eye tracking apparatus, method and system
CN104750234B (zh) * 2013-12-27 2018-12-21 中芯国际集成电路制造(北京)有限公司 可穿戴智能设备及可穿戴智能设备的互动方法
GB2521831A (en) * 2014-01-02 2015-07-08 Nokia Technologies Oy An apparatus or method for projecting light internally towards and away from an eye of a user
KR102180528B1 (ko) 2014-01-06 2020-11-18 삼성전자주식회사 색맹 교정을 위한 전자 장치 및 운영 방법
US9760898B2 (en) * 2014-01-06 2017-09-12 The Nielsen Company (Us), Llc Methods and apparatus to detect engagement with media presented on wearable media devices
US11103122B2 (en) 2014-07-15 2021-08-31 Mentor Acquisition One, Llc Content presentation in head worn computing
US9746686B2 (en) 2014-05-19 2017-08-29 Osterhout Group, Inc. Content position calibration in head worn computing
US9594246B2 (en) * 2014-01-21 2017-03-14 Osterhout Group, Inc. See-through computer display systems
US10649220B2 (en) 2014-06-09 2020-05-12 Mentor Acquisition One, Llc Content presentation in head worn computing
US11227294B2 (en) 2014-04-03 2022-01-18 Mentor Acquisition One, Llc Sight information collection in head worn computing
US20160019715A1 (en) 2014-07-15 2016-01-21 Osterhout Group, Inc. Content presentation in head worn computing
US9939934B2 (en) 2014-01-17 2018-04-10 Osterhout Group, Inc. External user interface for head worn computing
US9529195B2 (en) 2014-01-21 2016-12-27 Osterhout Group, Inc. See-through computer display systems
US9448409B2 (en) 2014-11-26 2016-09-20 Osterhout Group, Inc. See-through computer display systems
US9841599B2 (en) 2014-06-05 2017-12-12 Osterhout Group, Inc. Optical configurations for head-worn see-through displays
US9575321B2 (en) 2014-06-09 2017-02-21 Osterhout Group, Inc. Content presentation in head worn computing
US20150277118A1 (en) 2014-03-28 2015-10-01 Osterhout Group, Inc. Sensor dependent content position in head worn computing
US9366868B2 (en) 2014-09-26 2016-06-14 Osterhout Group, Inc. See-through computer display systems
US9671613B2 (en) 2014-09-26 2017-06-06 Osterhout Group, Inc. See-through computer display systems
US10191279B2 (en) 2014-03-17 2019-01-29 Osterhout Group, Inc. Eye imaging in head worn computing
US9810906B2 (en) 2014-06-17 2017-11-07 Osterhout Group, Inc. External user interface for head worn computing
US9829707B2 (en) 2014-08-12 2017-11-28 Osterhout Group, Inc. Measuring content brightness in head worn computing
US9299194B2 (en) 2014-02-14 2016-03-29 Osterhout Group, Inc. Secure sharing in head worn computing
US10254856B2 (en) 2014-01-17 2019-04-09 Osterhout Group, Inc. External user interface for head worn computing
US10684687B2 (en) 2014-12-03 2020-06-16 Mentor Acquisition One, Llc See-through computer display systems
US9766463B2 (en) 2014-01-21 2017-09-19 Osterhout Group, Inc. See-through computer display systems
US11737666B2 (en) 2014-01-21 2023-08-29 Mentor Acquisition One, Llc Eye imaging in head worn computing
US11487110B2 (en) 2014-01-21 2022-11-01 Mentor Acquisition One, Llc Eye imaging in head worn computing
US11892644B2 (en) 2014-01-21 2024-02-06 Mentor Acquisition One, Llc See-through computer display systems
US9740280B2 (en) 2014-01-21 2017-08-22 Osterhout Group, Inc. Eye imaging in head worn computing
US9836122B2 (en) 2014-01-21 2017-12-05 Osterhout Group, Inc. Eye glint imaging in see-through computer display systems
US9651788B2 (en) 2014-01-21 2017-05-16 Osterhout Group, Inc. See-through computer display systems
US9651784B2 (en) 2014-01-21 2017-05-16 Osterhout Group, Inc. See-through computer display systems
US20150205135A1 (en) 2014-01-21 2015-07-23 Osterhout Group, Inc. See-through computer display systems
US9532715B2 (en) 2014-01-21 2017-01-03 Osterhout Group, Inc. Eye imaging in head worn computing
US9494800B2 (en) 2014-01-21 2016-11-15 Osterhout Group, Inc. See-through computer display systems
US11669163B2 (en) 2014-01-21 2023-06-06 Mentor Acquisition One, Llc Eye glint imaging in see-through computer display systems
US9753288B2 (en) 2014-01-21 2017-09-05 Osterhout Group, Inc. See-through computer display systems
US9846308B2 (en) 2014-01-24 2017-12-19 Osterhout Group, Inc. Haptic systems for head-worn computers
US20150241964A1 (en) 2014-02-11 2015-08-27 Osterhout Group, Inc. Eye imaging in head worn computing
US9401540B2 (en) 2014-02-11 2016-07-26 Osterhout Group, Inc. Spatial location presentation in head worn computing
US9529200B2 (en) * 2014-03-10 2016-12-27 Ion Virtual Technology Corporation Method and system for reducing motion blur when experiencing virtual or augmented reality environments
US20160187651A1 (en) 2014-03-28 2016-06-30 Osterhout Group, Inc. Safety for a vehicle operator with an hmd
US9672210B2 (en) 2014-04-25 2017-06-06 Osterhout Group, Inc. Language translation with head-worn computing
US9651787B2 (en) 2014-04-25 2017-05-16 Osterhout Group, Inc. Speaker assembly for headworn computer
US9423842B2 (en) 2014-09-18 2016-08-23 Osterhout Group, Inc. Thermal management for head-worn computer
US10853589B2 (en) 2014-04-25 2020-12-01 Mentor Acquisition One, Llc Language translation with head-worn computing
US9442293B2 (en) * 2014-05-06 2016-09-13 Microsoft Technology Licensing, Llc Composite variable light attenuator
DE102014208981A1 (de) 2014-05-13 2015-11-19 Bayerische Motoren Werke Aktiengesellschaft Kontextabhängige Tönung einer Brille und eines HMD
JP6355978B2 (ja) * 2014-06-09 2018-07-11 株式会社バンダイナムコエンターテインメント プログラムおよび画像生成装置
US10663740B2 (en) 2014-06-09 2020-05-26 Mentor Acquisition One, Llc Content presentation in head worn computing
EP2958074A1 (en) 2014-06-17 2015-12-23 Thomson Licensing A method and a display device with pixel repartition optimization
US20150379770A1 (en) 2014-06-27 2015-12-31 David C. Haley, JR. Digital action in response to object interaction
US9865089B2 (en) 2014-07-25 2018-01-09 Microsoft Technology Licensing, Llc Virtual reality environment with real world objects
US10451875B2 (en) 2014-07-25 2019-10-22 Microsoft Technology Licensing, Llc Smart transparency for virtual objects
US10416760B2 (en) 2014-07-25 2019-09-17 Microsoft Technology Licensing, Llc Gaze-based object placement within a virtual reality environment
US9904055B2 (en) 2014-07-25 2018-02-27 Microsoft Technology Licensing, Llc Smart placement of virtual objects to stay in the field of view of a head mounted display
US9766460B2 (en) 2014-07-25 2017-09-19 Microsoft Technology Licensing, Llc Ground plane adjustment in a virtual reality environment
US10311638B2 (en) 2014-07-25 2019-06-04 Microsoft Technology Licensing, Llc Anti-trip when immersed in a virtual reality environment
US9858720B2 (en) 2014-07-25 2018-01-02 Microsoft Technology Licensing, Llc Three-dimensional mixed-reality viewport
US9811095B2 (en) * 2014-08-06 2017-11-07 Lenovo (Singapore) Pte. Ltd. Glasses with fluid-fillable membrane for adjusting focal length of one or more lenses of the glasses
DE202014103729U1 (de) * 2014-08-08 2014-09-09 Leap Motion, Inc. Augmented-Reality mit Bewegungserfassung
TWI571655B (zh) * 2014-08-22 2017-02-21 財團法人資訊工業策進會 顯示方法及顯示裝置
US10067561B2 (en) * 2014-09-22 2018-09-04 Facebook, Inc. Display visibility based on eye convergence
EP3207542A1 (en) * 2014-10-15 2017-08-23 Seiko Epson Corporation Head-mounted display device, method of controlling head-mounted display device, and computer program
WO2016061447A1 (en) 2014-10-17 2016-04-21 Lockheed Martin Corporation Head-wearable ultra-wide field of view display device
US9804669B2 (en) * 2014-11-07 2017-10-31 Eye Labs, Inc. High resolution perception of content in a wide field of view of a head-mounted display
GB2532954A (en) * 2014-12-02 2016-06-08 Ibm Display control system for an augmented reality display system
US9684172B2 (en) 2014-12-03 2017-06-20 Osterhout Group, Inc. Head worn computer display systems
DE102014224955A1 (de) * 2014-12-05 2016-06-09 Bayerische Motoren Werke Aktiengesellschaft Bestimmung der Position eines HMD relativ zum Kopf des Trägers
DE102014225222A1 (de) * 2014-12-09 2016-06-09 Bayerische Motoren Werke Aktiengesellschaft Bestimmung der Position eines HMD relativ zum Kopf des Trägers
US20160170206A1 (en) * 2014-12-12 2016-06-16 Lenovo (Singapore) Pte. Ltd. Glass opacity shift based on determined characteristics
USD751552S1 (en) 2014-12-31 2016-03-15 Osterhout Group, Inc. Computer glasses
WO2016107921A1 (en) * 2014-12-31 2016-07-07 Essilor International (Compagnie Generale D'optique) Binocular device comprising a monocular display device
WO2016112017A2 (en) * 2015-01-05 2016-07-14 Worcester Polytechnic Institute System and method for controlling immersiveness of head-worn displays
USD753114S1 (en) 2015-01-05 2016-04-05 Osterhout Group, Inc. Air mouse
KR102320737B1 (ko) 2015-01-14 2021-11-03 삼성디스플레이 주식회사 헤드-장착 전자장치
US9846968B2 (en) 2015-01-20 2017-12-19 Microsoft Technology Licensing, Llc Holographic bird's eye view camera
US20160210780A1 (en) 2015-01-20 2016-07-21 Jonathan Paulovich Applying real world scale to virtual content
GB201500891D0 (en) * 2015-01-20 2015-03-04 The Technology Partnership Plc Dual display immersive screen technology
CN105988562A (zh) * 2015-02-06 2016-10-05 刘小洋 智能穿戴设备及基于智能穿戴设备实现手势输入的方法
DE112016000728T5 (de) 2015-02-12 2017-10-26 Google Inc. Kombinieren eines Displays mit engem Blickfeld und hoher Auflösung und eines Weitwinkeldisplays mit mittlerer Auflösung
US20160239985A1 (en) 2015-02-17 2016-08-18 Osterhout Group, Inc. See-through computer display systems
US11468639B2 (en) * 2015-02-20 2022-10-11 Microsoft Technology Licensing, Llc Selective occlusion system for augmented reality devices
US9652047B2 (en) 2015-02-25 2017-05-16 Daqri, Llc Visual gestures for a head mounted device
WO2016141054A1 (en) 2015-03-02 2016-09-09 Lockheed Martin Corporation Wearable display system
US10156721B2 (en) * 2015-03-09 2018-12-18 Microsoft Technology Licensing, Llc User-based context sensitive hologram reaction
US11819273B2 (en) 2015-03-17 2023-11-21 Raytrx, Llc Augmented and extended reality glasses for use in surgery visualization and telesurgery
US11461936B2 (en) 2015-03-17 2022-10-04 Raytrx, Llc Wearable image manipulation and control system with micro-displays and augmentation of vision and sensing in augmented reality glasses
US11016302B2 (en) * 2015-03-17 2021-05-25 Raytrx, Llc Wearable image manipulation and control system with high resolution micro-displays and dynamic opacity augmentation in augmented reality glasses
GB2536650A (en) * 2015-03-24 2016-09-28 Augmedics Ltd Method and system for combining video-based and optic-based augmented reality in a near eye display
US20220155592A1 (en) * 2015-03-31 2022-05-19 Timothy A. Cummings System for virtual display and method of use
US9779554B2 (en) 2015-04-10 2017-10-03 Sony Interactive Entertainment Inc. Filtering and parental control methods for restricting visual activity on a head mounted display
CN104777622B (zh) * 2015-04-17 2017-12-22 浙江大学 基于视觉系统特性的多层液晶近眼显示权重优化方法和装置
US10152906B2 (en) * 2015-04-26 2018-12-11 Mems Start, Llc Near-eye display system and method
US9690374B2 (en) * 2015-04-27 2017-06-27 Google Inc. Virtual/augmented reality transition system and method
JP6892213B2 (ja) * 2015-04-30 2021-06-23 ソニーグループ株式会社 表示装置及び表示装置の初期設定方法
CN108027519B (zh) 2015-04-30 2021-08-31 索尼公司 显示装置
CN106293557B (zh) 2015-05-04 2019-12-03 北京智谷睿拓技术服务有限公司 显示控制方法和装置
US10114127B2 (en) * 2015-05-11 2018-10-30 The United States Of America, As Represented By The Secretary Of The Navy Augmented reality visualization system
IL244255A (en) 2016-02-23 2017-04-30 Vertical Optics Llc Wearable devices for deflecting vision
US20160349509A1 (en) * 2015-05-26 2016-12-01 Microsoft Technology Licensing, Llc Mixed-reality headset
KR20160139461A (ko) * 2015-05-27 2016-12-07 엘지전자 주식회사 헤드 마운티드 디스플레이 및 그 제어 방법
US9746675B2 (en) * 2015-05-28 2017-08-29 Microsoft Technology Licensing, Llc Alignment based view matrix tuning
US11252399B2 (en) * 2015-05-28 2022-02-15 Microsoft Technology Licensing, Llc Determining inter-pupillary distance
DE102015007245A1 (de) 2015-06-05 2016-12-08 Audi Ag Verfahren zum Betreiben einer Datenbrilleneinrichtung und Datenbrilleneinrichtung
EP3112922A1 (en) * 2015-06-30 2017-01-04 Thomson Licensing A gaze tracking device and a head mounted device embedding said gaze tracking device
US10222619B2 (en) * 2015-07-12 2019-03-05 Steven Sounyoung Yu Head-worn image display apparatus for stereoscopic microsurgery
EP3326048B1 (en) * 2015-07-17 2022-03-23 Magic Leap, Inc. Virtual/augmented reality system having dynamic region resolution
US10139966B2 (en) 2015-07-22 2018-11-27 Osterhout Group, Inc. External user interface for head worn computing
US11003246B2 (en) 2015-07-22 2021-05-11 Mentor Acquisition One, Llc External user interface for head worn computing
US10552676B2 (en) 2015-08-03 2020-02-04 Facebook Technologies, Llc Methods and devices for eye tracking based on depth sensing
US10534173B2 (en) * 2015-08-03 2020-01-14 Facebook Technologies, Llc Display with a tunable mask for augmented reality
CA2901477C (en) 2015-08-25 2023-07-18 Evolution Optiks Limited Vision correction system, method and graphical user interface for implementation on electronic devices having a graphical display
US9857871B2 (en) 2015-09-04 2018-01-02 Sony Interactive Entertainment Inc. Apparatus and method for dynamic graphics rendering based on saccade detection
US11609427B2 (en) 2015-10-16 2023-03-21 Ostendo Technologies, Inc. Dual-mode augmented/virtual reality (AR/VR) near-eye wearable displays
US10754156B2 (en) 2015-10-20 2020-08-25 Lockheed Martin Corporation Multiple-eye, single-display, ultrawide-field-of-view optical see-through augmented reality system
US9754526B2 (en) * 2015-10-30 2017-09-05 Essential Products, Inc. Mobile device with display overlaid with at least a light sensor
US9864400B2 (en) 2015-10-30 2018-01-09 Essential Products, Inc. Camera integrated into a display
US11106273B2 (en) 2015-10-30 2021-08-31 Ostendo Technologies, Inc. System and methods for on-body gestural interfaces and projection displays
US10331260B2 (en) 2015-10-30 2019-06-25 Essential Products, Inc. Variable transparency layers for electronic devices
US10444972B2 (en) 2015-11-28 2019-10-15 International Business Machines Corporation Assisting a user with efficient navigation between a selection of entries with elements of interest to the user within a stream of entries
IL242895B (en) * 2015-12-03 2021-04-29 Eyeway Vision Ltd Image projection system
EP3179334A1 (en) * 2015-12-09 2017-06-14 Airbus Defence and Space GmbH Device and method for testing function or use of a head worn see through augmented reality device
US10345594B2 (en) 2015-12-18 2019-07-09 Ostendo Technologies, Inc. Systems and methods for augmented near-eye wearable displays
US10203566B2 (en) 2015-12-21 2019-02-12 Facebook Technologies, Llc Enhanced spatial resolution using a segmented electrode array
US10578882B2 (en) 2015-12-28 2020-03-03 Ostendo Technologies, Inc. Non-telecentric emissive micro-pixel array light modulators and methods of fabrication thereof
JP6832061B2 (ja) * 2015-12-29 2021-02-24 株式会社バンダイナムコエンターテインメント ゲーム装置及びプログラム
CN108474929B (zh) 2015-12-30 2022-06-21 艾伦神火公司 光学窄播
US10218882B2 (en) 2015-12-31 2019-02-26 Microsoft Technology Licensing, Llc Feedback for object pose tracker
KR102610120B1 (ko) * 2016-01-20 2023-12-06 삼성전자주식회사 Hmd 디바이스 및 그 제어 방법
KR20180104056A (ko) 2016-01-22 2018-09-19 코닝 인코포레이티드 와이드 필드 개인 디스플레이
WO2017145154A1 (en) 2016-02-22 2017-08-31 Real View Imaging Ltd. Wide field of view hybrid holographic display
US11663937B2 (en) 2016-02-22 2023-05-30 Real View Imaging Ltd. Pupil tracking in an image display system
US10788791B2 (en) 2016-02-22 2020-09-29 Real View Imaging Ltd. Method and system for displaying holographic images within a real object
EP3420414A2 (en) * 2016-02-22 2019-01-02 Real View Imaging Ltd. Holographic display
CA3016337A1 (en) * 2016-03-15 2017-09-21 Magic Leap, Inc. Wide baseline stereo for low-latency rendering
US10401952B2 (en) 2016-03-31 2019-09-03 Sony Interactive Entertainment Inc. Reducing rendering computation and power consumption by detecting saccades and blinks
US10372205B2 (en) 2016-03-31 2019-08-06 Sony Interactive Entertainment Inc. Reducing rendering computation and power consumption by detecting saccades and blinks
GB2548860A (en) 2016-03-31 2017-10-04 Nokia Technologies Oy Multi-camera image coding
US10192528B2 (en) 2016-03-31 2019-01-29 Sony Interactive Entertainment Inc. Real-time user adaptive foveated rendering
US10169846B2 (en) * 2016-03-31 2019-01-01 Sony Interactive Entertainment Inc. Selective peripheral vision filtering in a foveated rendering system
US10353203B2 (en) 2016-04-05 2019-07-16 Ostendo Technologies, Inc. Augmented/virtual reality near-eye displays with edge imaging lens comprising a plurality of display devices
US10684478B2 (en) 2016-05-09 2020-06-16 Mentor Acquisition One, Llc User interface systems for head-worn computers
US9910284B1 (en) 2016-09-08 2018-03-06 Osterhout Group, Inc. Optical systems for head-worn computers
US10466491B2 (en) 2016-06-01 2019-11-05 Mentor Acquisition One, Llc Modular systems for head-worn computers
US10824253B2 (en) 2016-05-09 2020-11-03 Mentor Acquisition One, Llc User interface systems for head-worn computers
US10134198B2 (en) 2016-04-19 2018-11-20 Adobe Systems Incorporated Image compensation for an occluding direct-view augmented reality system
IL245339A (en) * 2016-04-21 2017-10-31 Rani Ben Yishai Method and system for verification of registration
US9726896B2 (en) * 2016-04-21 2017-08-08 Maximilian Ralph Peter von und zu Liechtenstein Virtual monitor display technique for augmented reality environments
US9851792B2 (en) * 2016-04-27 2017-12-26 Rovi Guides, Inc. Methods and systems for displaying additional content on a heads up display displaying a virtual reality environment
US10025376B2 (en) 2016-04-27 2018-07-17 Rovi Guides, Inc. Methods and systems for displaying additional content on a heads up display displaying a virtual reality environment
US10453431B2 (en) 2016-04-28 2019-10-22 Ostendo Technologies, Inc. Integrated near-far light field display systems
US9995936B1 (en) 2016-04-29 2018-06-12 Lockheed Martin Corporation Augmented reality systems having a virtual image overlaying an infrared portion of a live scene
US10522106B2 (en) * 2016-05-05 2019-12-31 Ostendo Technologies, Inc. Methods and apparatus for active transparency modulation
US10057511B2 (en) 2016-05-11 2018-08-21 International Business Machines Corporation Framing enhanced reality overlays using invisible light emitters
CN105938249A (zh) * 2016-05-12 2016-09-14 深圳增强现实技术有限公司 一体式双目增强现实智能眼镜
CN105938250A (zh) * 2016-05-12 2016-09-14 深圳增强现实技术有限公司 多层式增强现实智能眼镜
US10387719B2 (en) * 2016-05-20 2019-08-20 Daqri, Llc Biometric based false input detection for a wearable computing device
US10471353B2 (en) * 2016-06-30 2019-11-12 Sony Interactive Entertainment America Llc Using HMD camera touch button to render images of a user captured during game play
CN111308714B (zh) * 2016-07-22 2023-02-03 蔡清来 统合实境智慧眼镜护眼遮光器
KR20230133940A (ko) 2016-07-25 2023-09-19 매직 립, 인코포레이티드 증강 현실 및 가상 현실 안경류를 사용한 이미징 수정, 디스플레이 및 시각화
US10146067B2 (en) 2016-09-09 2018-12-04 Ching-Lai Tsai Eye-protective shade for augmented reality smart glasses
WO2018057050A1 (en) * 2016-09-23 2018-03-29 Bao Sheng Selectably opaque displays
US10852936B2 (en) * 2016-09-23 2020-12-01 Apple Inc. Devices, methods, and graphical user interfaces for a unified annotation layer for annotating content displayed on a device
KR20180034116A (ko) 2016-09-27 2018-04-04 삼성전자주식회사 증강 현실 영상을 제공하는 방법, 디바이스 및 기록매체
EP3528034A4 (en) * 2016-10-11 2019-08-21 Sony Corporation DISPLAY DEVICE
JP7009057B2 (ja) 2016-11-15 2022-01-25 株式会社リコー 表示装置、表示システム、及びプログラム
IL301297B1 (en) 2016-11-16 2024-04-01 Magic Leap Inc A multi-resolution display assembly for head-mounted display systems
US20180144554A1 (en) 2016-11-18 2018-05-24 Eyedaptic, LLC Systems for augmented reality visual aids and tools
US11768376B1 (en) * 2016-11-21 2023-09-26 Apple Inc. Head-mounted display system with display and adjustable optical components
CN110192390A (zh) * 2016-11-24 2019-08-30 华盛顿大学 头戴式显示器的光场捕获和渲染
US10775880B2 (en) * 2016-11-30 2020-09-15 Universal City Studios Llc Animated character head systems and methods
US9711114B1 (en) * 2016-12-01 2017-07-18 Varjo Technologies Oy Display apparatus and method of displaying using projectors
US10122990B2 (en) * 2016-12-01 2018-11-06 Varjo Technologies Oy Imaging system and method of producing context and focus images
KR20240033136A (ko) 2016-12-05 2024-03-12 케이스 웨스턴 리저브 유니버시티 상호작용적 증강 현실 프리젠테이션들을 표시하기 위한 시스템들, 방법들 및 매체들
CN114325903A (zh) * 2016-12-08 2022-04-12 北京耐德佳显示技术有限公司 一种自由曲面棱镜组及使用其的近眼显示装置
CN106773042B (zh) * 2016-12-16 2022-03-25 联想(北京)有限公司 复合显示器、显示控制方法及穿戴式设备
JP6679807B1 (ja) * 2016-12-23 2020-04-15 ニュートノイド テクノロジーズ エルエルシーＮｅｗｔｏｎｏｉｄ Ｔｅｃｈｎｏｌｏｇｉｅｓ， Ｌｌｃ 多層インテリジェントガラス表示システムおよび表示システム
US20180180882A1 (en) * 2016-12-23 2018-06-28 Raja Singh Tuli Augmented Reality Eyewear
CN106842570A (zh) * 2017-01-18 2017-06-13 上海乐蜗信息科技有限公司 一种头戴式混合现实装置及控制方法
JP7036828B2 (ja) * 2017-01-30 2022-03-15 アルコン インコーポレイティド 拡張現実眼科手術用顕微鏡の投射のためのシステムと方法
US9983412B1 (en) 2017-02-02 2018-05-29 The University Of North Carolina At Chapel Hill Wide field of view augmented reality see through head mountable display with distance accommodation
US10545347B2 (en) * 2017-02-23 2020-01-28 Google Llc Compact eye tracking using folded display optics
JP2018142168A (ja) * 2017-02-28 2018-09-13 セイコーエプソン株式会社 頭部装着型表示装置、プログラム、及び頭部装着型表示装置の制御方法
US20180255285A1 (en) 2017-03-06 2018-09-06 Universal City Studios Llc Systems and methods for layered virtual features in an amusement park environment
US10290120B2 (en) * 2017-03-20 2019-05-14 SK Commercial Construction, Inc. Color analysis and control using an electronic mobile device transparent display screen
US10803988B2 (en) * 2017-03-20 2020-10-13 SK Commercial Construction, Inc. Color analysis and control using a transparent display screen on a mobile device with non-transparent, bendable display screen or multiple display screen with 3D sensor for telemedicine diagnosis and treatment
US10216260B2 (en) * 2017-03-27 2019-02-26 Microsoft Technology Licensing, Llc Selective rendering of sparse peripheral displays based on element saliency
US10277943B2 (en) 2017-03-27 2019-04-30 Microsoft Technology Licensing, Llc Selective rendering of sparse peripheral displays based on user movements
CN107065185A (zh) * 2017-03-30 2017-08-18 联想(北京)有限公司 一种控制方法及电子设备
WO2018190826A1 (en) * 2017-04-12 2018-10-18 Hewlett-Packard Development Company, L.P. Transfer to head mounted display
US10628995B2 (en) 2017-04-17 2020-04-21 Microsoft Technology Licensing, Llc Anti-aliasing of graphical elements defined based on functions
US10620779B2 (en) 2017-04-24 2020-04-14 Microsoft Technology Licensing, Llc Navigating a holographic image
KR101894846B1 (ko) 2017-05-19 2018-09-04 주식회사 맥스트 증강현실 객체의 정합을 위한 캘리브레이션 방법 및 이를 수행하기 위한 헤드 마운트 디스플레이
US10747386B2 (en) 2017-06-01 2020-08-18 Samsung Electronics Co., Ltd. Systems and methods for window control in virtual reality environment
US9917652B1 (en) 2017-06-06 2018-03-13 Surefire Llc Adaptive communications focal plane array
EP3413116A1 (en) * 2017-06-07 2018-12-12 Ching-Lai Tsai Eye-protective shade for augmented reality smart glasses
US11071650B2 (en) 2017-06-13 2021-07-27 Mario Iobbi Visibility enhancing eyewear
CN109085711A (zh) * 2017-06-13 2018-12-25 深圳市光场视觉有限公司 一种可调整透光度的视觉转换装置
KR102314789B1 (ko) * 2017-06-29 2021-10-20 에스케이텔레콤 주식회사 증강현실용 디스플레이 장치
US10338400B2 (en) 2017-07-03 2019-07-02 Holovisions LLC Augmented reality eyewear with VAPE or wear technology
US10859834B2 (en) 2017-07-03 2020-12-08 Holovisions Space-efficient optical structures for wide field-of-view augmented reality (AR) eyewear
US20190012841A1 (en) 2017-07-09 2019-01-10 Eyedaptic, Inc. Artificial intelligence enhanced system for adaptive control driven ar/vr visual aids
WO2019013821A1 (en) 2017-07-14 2019-01-17 Hewlett-Packard Development Company, L.P. PANEL FOR ATTENUATING LIGHT FOR AN ELECTRONIC EYEWEAR PRODUCT
JP2019022084A (ja) * 2017-07-18 2019-02-07 オリンパス株式会社 ウェアラブルデバイス及びウェアラブルデバイスの制御方法
US11022804B2 (en) 2017-07-20 2021-06-01 Lg Electronics Inc. Head-mounted display and method of controlling the same
US10422995B2 (en) 2017-07-24 2019-09-24 Mentor Acquisition One, Llc See-through computer display systems with stray light management
US11409105B2 (en) 2017-07-24 2022-08-09 Mentor Acquisition One, Llc See-through computer display systems
US10578869B2 (en) 2017-07-24 2020-03-03 Mentor Acquisition One, Llc See-through computer display systems with adjustable zoom cameras
US10274320B2 (en) 2017-08-04 2019-04-30 Motorola Solutions, Inc. Method and device for providing safe zone information for incident area
US10969584B2 (en) 2017-08-04 2021-04-06 Mentor Acquisition One, Llc Image expansion optic for head-worn computer
WO2019031015A1 (ja) 2017-08-09 2019-02-14 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US10403045B2 (en) 2017-08-11 2019-09-03 Adobe Inc. Photorealistic augmented reality system
US10152141B1 (en) 2017-08-18 2018-12-11 Osterhout Group, Inc. Controller movement tracking with light emitters
US10976551B2 (en) 2017-08-30 2021-04-13 Corning Incorporated Wide field personal display device
US10742944B1 (en) 2017-09-27 2020-08-11 University Of Miami Vision defect determination for facilitating modifications for vision defects related to double vision or dynamic aberrations
KR20200063173A (ko) * 2017-09-27 2020-06-04 유니버시티 오브 마이애미 디지털 치료적 보정 안경
US10409071B2 (en) 2017-09-27 2019-09-10 University Of Miami Visual enhancement for dynamic vision defects
US10389989B2 (en) 2017-09-27 2019-08-20 University Of Miami Vision defect determination and enhancement using a prediction model
US10531795B1 (en) 2017-09-27 2020-01-14 University Of Miami Vision defect determination via a dynamic eye-characteristic-based fixation point
US10984508B2 (en) 2017-10-31 2021-04-20 Eyedaptic, Inc. Demonstration devices and methods for enhancement for low vision users and systems improvements
US11138301B1 (en) * 2017-11-20 2021-10-05 Snap Inc. Eye scanner for user identification and security in an eyewear device
US10835296B2 (en) 2017-12-07 2020-11-17 Augmedics Ltd. Spinous process clamp
US10236986B1 (en) 2018-01-05 2019-03-19 Aron Surefire, Llc Systems and methods for tiling free space optical transmissions
US10250948B1 (en) 2018-01-05 2019-04-02 Aron Surefire, Llc Social media with optical narrowcasting
US10473439B2 (en) 2018-01-05 2019-11-12 Aron Surefire, Llc Gaming systems and methods using optical narrowcasting
US11435583B1 (en) 2018-01-17 2022-09-06 Apple Inc. Electronic device with back-to-back displays
IL311004A (en) 2018-01-17 2024-04-01 Magic Leap Inc Display systems and methods for determining registration between a display and a user's eyes
WO2019143844A1 (en) 2018-01-17 2019-07-25 Magic Leap, Inc. Eye center of rotation determination, depth plane selection, and render camera positioning in display systems
US10678056B2 (en) * 2018-02-26 2020-06-09 Google Llc Augmented reality light field head-mounted displays
US11563885B2 (en) 2018-03-06 2023-01-24 Eyedaptic, Inc. Adaptive system for autonomous machine learning and control in wearable augmented reality and virtual reality visual aids
US11145096B2 (en) 2018-03-07 2021-10-12 Samsung Electronics Co., Ltd. System and method for augmented reality interaction
JP7223242B2 (ja) * 2018-03-19 2023-02-16 株式会社リコー エレクトロクロミックデバイス、及び、それを用いた電子機器
CN108398787B (zh) * 2018-03-20 2023-05-16 京东方科技集团股份有限公司 增强现实显示设备、方法和增强现实眼镜
AT521076B1 (de) * 2018-03-26 2020-11-15 Bhs Tech Gmbh Stereomikroskop zur Verwendung bei mikrochirurgischen Eingriffen am Patienten und Verfahren zur Steuerung des Stereomikroskops
US10845600B2 (en) 2018-04-24 2020-11-24 Samsung Electronics Co., Ltd. Controllable modifiable shader layer for head mountable display
US11029521B2 (en) 2018-04-24 2021-06-08 Apple Inc. Head-mounted device with an adjustable opacity system
US10642049B2 (en) * 2018-04-25 2020-05-05 Apple Inc. Head-mounted device with active optical foveation
CN110488489B (zh) * 2018-05-15 2022-10-11 苹果公司 用于头戴式壳体的眼睛登记
US10859831B1 (en) * 2018-05-16 2020-12-08 Facebook Technologies, Llc Systems and methods for safely operating a mobile virtual reality system
US10942564B2 (en) 2018-05-17 2021-03-09 Sony Interactive Entertainment Inc. Dynamic graphics rendering based on predicted saccade landing point
US11262839B2 (en) 2018-05-17 2022-03-01 Sony Interactive Entertainment Inc. Eye tracking with prediction and late update to GPU for fast foveated rendering in an HMD environment
TWI672525B (zh) * 2018-05-22 2019-09-21 宏達國際電子股份有限公司 頭戴式顯示裝置及其影像產生方法
CN117631307A (zh) 2018-05-29 2024-03-01 爱达扩视眼镜公司 用于低视力用户的混合式透视增强现实系统和方法
US20190385372A1 (en) * 2018-06-15 2019-12-19 Microsoft Technology Licensing, Llc Positioning a virtual reality passthrough region at a known distance
US10540824B1 (en) 2018-07-09 2020-01-21 Microsoft Technology Licensing, Llc 3-D transitions
US10520739B1 (en) 2018-07-11 2019-12-31 Valve Corporation Dynamic panel masking
EP3830630A4 (en) * 2018-07-13 2023-01-11 Raytrx, LLC WEARABLE IMAGE MANIPULATION AND CONTROL SYSTEM FEATURING HIGH-RESOLUTION MICRO DISPLAY DEVICES AND DYNAMIC OPACITY ENHANCEMENT IN AUGMENTED REALITY GLASSES
WO2020014707A1 (en) 2018-07-13 2020-01-16 Raytrx, Llc Wearable image manipulation and control system with high resolution micro-displays and dynamic opacity augmentation in augmented reality glasses
US11567336B2 (en) 2018-07-24 2023-01-31 Magic Leap, Inc. Display systems and methods for determining registration between display and eyes of user
US10565961B1 (en) 2018-07-25 2020-02-18 Honeywell International Inc. Dynamic contrast equalization for see through displays in varying light conditions
JP7100523B2 (ja) * 2018-07-27 2022-07-13 京セラ株式会社 表示装置、表示システムおよび移動体
EP4276520A3 (en) 2018-08-31 2024-01-24 Magic Leap, Inc. Spatially-resolved dynamic dimming for augmented reality device
US10991283B2 (en) * 2018-09-04 2021-04-27 Apple Inc. Decimated burn-in compensation with pixel shifting
EP3627194A1 (en) * 2018-09-20 2020-03-25 Essilor International An optical device with reduced reflection in deep red, near infrared and visible ranges
WO2020068819A1 (en) 2018-09-24 2020-04-02 Eyedaptic, Inc. Enhanced autonomous hands-free control in electronic visual aids
TWI672526B (zh) 2018-09-26 2019-09-21 仁寶電腦工業股份有限公司 近眼顯示系統及其顯示方法
EP3864644A1 (en) 2018-10-08 2021-08-18 Telefonaktiebolaget Lm Ericsson (Publ) Improved viewing device and method for providing virtual content overlapping visual objects
US10810825B2 (en) * 2018-10-11 2020-10-20 Igt Systems and methods for providing safety and security features for users of immersive video devices
US11327563B2 (en) 2018-10-22 2022-05-10 Evolution Optiks Limited Light field vision-based testing device, adjusted pixel rendering method therefor, and online vision-based testing management system and method using same
US11500460B2 (en) 2018-10-22 2022-11-15 Evolution Optiks Limited Light field device, optical aberration compensation or simulation rendering
US11287883B2 (en) 2018-10-22 2022-03-29 Evolution Optiks Limited Light field device, pixel rendering method therefor, and adjusted vision perception system and method using same
US11550160B1 (en) * 2018-11-09 2023-01-10 Meta Platforms Technologies, Llc Off-axis parabolic combiner
US10939977B2 (en) 2018-11-26 2021-03-09 Augmedics Ltd. Positioning marker
US11766296B2 (en) 2018-11-26 2023-09-26 Augmedics Ltd. Tracking system for image-guided surgery
CN109637418B (zh) * 2019-01-09 2022-08-30 京东方科技集团股份有限公司 一种显示面板及其驱动方法、显示装置
US11210772B2 (en) 2019-01-11 2021-12-28 Universal City Studios Llc Wearable visualization device systems and methods
US11789531B2 (en) 2019-01-28 2023-10-17 Evolution Optiks Limited Light field vision-based testing device, system and method
US11500461B2 (en) 2019-11-01 2022-11-15 Evolution Optiks Limited Light field vision-based testing device, system and method
US11199735B2 (en) * 2019-03-28 2021-12-14 Lumcolor Smart optical filter for pixel-selectively adjusting light intensity
CA3134744A1 (en) 2019-04-23 2020-10-29 Evolution Optiks Limited Digital display device comprising a complementary light field display or display portion, and vision correction system and method using same
US11435593B1 (en) * 2019-05-06 2022-09-06 Meta Platforms Technologies, Llc Systems and methods for selectively augmenting artificial-reality experiences with views of real-world environments
US11749018B1 (en) 2019-05-28 2023-09-05 Apple Inc. Eye enrollment for head-mounted enclosure
US11579425B1 (en) 2019-08-05 2023-02-14 Meta Platforms Technologies, Llc Narrow-band peripheral see-through pancake lens assembly and display device with same
US11586024B1 (en) 2019-08-05 2023-02-21 Meta Platforms Technologies, Llc Peripheral see-through pancake lens assembly and display device with same
EP4014468A4 (en) 2019-08-12 2022-10-19 Magic Leap, Inc. SYSTEMS AND PROCESSES FOR VIRTUAL AND AUGMENTED REALITY
US11902498B2 (en) 2019-08-26 2024-02-13 Evolution Optiks Limited Binocular light field display, adjusted pixel rendering method therefor, and vision correction system and method using same
CN110619683B (zh) * 2019-09-04 2023-07-14 广东虚拟现实科技有限公司 三维模型调整方法、装置、终端设备及存储介质
US11592608B2 (en) 2019-09-10 2023-02-28 Meta Platforms Technologies, Llc Switchable polarization retarder array for active zonal illumination of display
US11726336B2 (en) 2019-09-10 2023-08-15 Meta Platforms Technologies, Llc Active zonal display illumination using a chopped lightguide
US11391948B2 (en) 2019-09-10 2022-07-19 Facebook Technologies, Llc Display illumination using a grating
US11372247B2 (en) 2019-09-17 2022-06-28 Facebook Technologies, Llc Display device with diffusive display and see-through lens assembly
US11087529B2 (en) * 2019-09-27 2021-08-10 Disney Enterprises, Inc. Introducing real-time lighting effects to illuminate real-world physical objects in see-through augmented reality displays
WO2021062375A1 (en) * 2019-09-27 2021-04-01 Raytrx, Llc Augmented and extended reality glasses for use in surgery visualization and telesurgery
CN110727109A (zh) * 2019-10-18 2020-01-24 蒂姆维澳(上海)网络技术有限公司 Ar眼镜及其控制方法
US11823598B2 (en) 2019-11-01 2023-11-21 Evolution Optiks Limited Light field device, variable perception pixel rendering method therefor, and variable perception system and method using same
US11487361B1 (en) 2019-11-01 2022-11-01 Evolution Optiks Limited Light field device and vision testing system using same
WO2021089111A1 (en) * 2019-11-04 2021-05-14 Telefonaktiebolaget Lm Ericsson (Publ) See-through display, method for operating a see-through display and computer program
KR20210069491A (ko) * 2019-12-03 2021-06-11 삼성전자주식회사 전자 장치 및 이의 제어 방법
US20210169578A1 (en) * 2019-12-10 2021-06-10 Globus Medical, Inc. Augmented reality headset with varied opacity for navigated robotic surgery
US11127380B2 (en) * 2019-12-13 2021-09-21 Qualcomm Incorporated Content stabilization for head-mounted displays
US11382712B2 (en) 2019-12-22 2022-07-12 Augmedics Ltd. Mirroring in image guided surgery
US11373342B2 (en) * 2020-01-14 2022-06-28 Sony Interactive Entertainment Inc. Social and scene target awareness and adaptation of an occlusion system for increased social and scene interaction in an optical see-through augmented reality head mounted display
US11360308B2 (en) 2020-01-22 2022-06-14 Facebook Technologies, Llc Optical assembly with holographic optics for folded optical path
CN111077679A (zh) * 2020-01-23 2020-04-28 福州贝园网络科技有限公司 一种智能眼镜显示器及其成像方法
US20210251717A1 (en) * 2020-02-19 2021-08-19 Globus Medical, Inc. Extended reality headset opacity filter for navigated surgery
WO2021168449A1 (en) * 2020-02-21 2021-08-26 Raytrx, Llc All-digital multi-option 3d surgery visualization system and control
CN115398311A (zh) 2020-03-02 2022-11-25 卡尔蔡司医疗技术股份公司 头戴式可视化系统
AT523558B1 (de) 2020-03-05 2023-07-15 Nekonata Xr Tech Gmbh Verfahren zur Darstellung einer Umgebung mittels einer an einer Person angeordneten und für die Person sichtbaren Anzeigeeinheit
WO2021183736A1 (en) * 2020-03-13 2021-09-16 Harmonix Music Systems, Inc. Techniques for virtual reality boundaries and related systems and methods
CN113448089B (zh) * 2020-03-28 2023-05-09 华为技术有限公司 增强现实设备及其显示方法
CN113448088A (zh) * 2020-03-28 2021-09-28 华为技术有限公司 增强现实设备
KR102377397B1 (ko) * 2020-03-31 2022-03-22 경북대학교 산학협력단 미세렌즈를 이용한 증강현실 디바이스
US11750795B2 (en) * 2020-05-12 2023-09-05 Apple Inc. Displays with viewer tracking
US11389252B2 (en) 2020-06-15 2022-07-19 Augmedics Ltd. Rotating marker for image guided surgery
CN114253389B (zh) * 2020-09-25 2023-05-23 宏碁股份有限公司 整合动作感测器的增强现实系统与增强现实显示方法
US11514616B2 (en) 2020-11-24 2022-11-29 Strathspey Crown, LLC Augmented reality using intra-ocular devices
US11353960B1 (en) 2020-11-24 2022-06-07 Strathspey Crown, LLC Intraocular brain interface
KR20220118170A (ko) * 2021-02-18 2022-08-25 삼성전자주식회사 웨어러블 전자 장치
US20220276696A1 (en) * 2021-02-26 2022-09-01 BigBox VR, Inc. Asynchronous multi-engine virtual reality system with reduced vestibular-ocular conflict
US11927756B2 (en) 2021-04-01 2024-03-12 Samsung Electronics Co., Ltd. Method for providing augmented reality image and head mounted display device supporting the same
WO2022241136A1 (en) * 2021-05-14 2022-11-17 Universal City Studios Llc Front and peripheral view lens areas for virtual reality headsets
US11896445B2 (en) 2021-07-07 2024-02-13 Augmedics Ltd. Iliac pin and adapter
US11887267B2 (en) * 2021-07-07 2024-01-30 Meta Platforms Technologies, Llc Generating and modifying representations of hands in an artificial reality environment
US11887260B2 (en) * 2021-12-30 2024-01-30 Snap Inc. AR position indicator
US11928783B2 (en) 2021-12-30 2024-03-12 Snap Inc. AR position and orientation along a plane
US11954762B2 (en) 2022-01-19 2024-04-09 Snap Inc. Object replacement system
CN117631282A (zh) * 2022-08-18 2024-03-01 北京字跳网络技术有限公司 Ar头戴式显示设备、控制方法及控制装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5572343A (en) * 1992-05-26 1996-11-05 Olympus Optical Co., Ltd. Visual display having see-through function and stacked liquid crystal shutters of opposite viewing angle directions
CN101124508A (zh) * 2004-02-10 2008-02-13 黑德普莱有限公司 用于管理立体观看的系统和方法

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS631717A (ja) 1986-06-20 1988-01-06 Mazda Motor Corp エンジンの燃焼室構造
US4757714A (en) 1986-09-25 1988-07-19 Insight, Inc. Speed sensor and head-mounted data display
US4855934A (en) * 1986-10-03 1989-08-08 Evans & Sutherland Computer Corporation System for texturing computer graphics images
JP2840692B2 (ja) 1990-04-19 1998-12-24 ソニー株式会社 光学装置
JPH05328260A (ja) * 1992-05-26 1993-12-10 Olympus Optical Co Ltd 頭部装着式ディスプレイ装置
DE69328371D1 (de) * 1992-09-09 2000-05-18 Jesse B Eichenlaub Stroboskopisches beleuchtungssystem für videoanzeigen
US6008781A (en) 1992-10-22 1999-12-28 Board Of Regents Of The University Of Washington Virtual retinal display
JP3336687B2 (ja) * 1993-07-21 2002-10-21 セイコーエプソン株式会社 眼鏡型表示装置
JP3630746B2 (ja) * 1994-12-05 2005-03-23 キヤノン株式会社 画像観察装置
US5671035A (en) * 1995-06-07 1997-09-23 Barnes; Elwood E. Light intensity reduction apparatus and method
KR0141004B1 (ko) 1995-07-11 1998-07-15 구자홍 초전도 양자 간섭소자를 이용한 초고주파 하모닉 믹서회로
US5808802A (en) 1996-11-15 1998-09-15 Daewoo Electronics Co. Ltd. Head-mounted display apparatus with a single image display device
US6215532B1 (en) * 1998-07-27 2001-04-10 Mixed Reality Systems Laboratory Inc. Image observing apparatus for observing outside information superposed with a display image
DE69908550T2 (de) 1998-10-29 2004-05-06 Koninklijke Philips Electronics N.V. Wasserzeichenerkennung
JP2000276613A (ja) * 1999-03-29 2000-10-06 Sony Corp 情報処理装置および情報処理方法
US20030132944A1 (en) * 2001-10-03 2003-07-17 Sun Microsystems, Inc. User control of generalized semantic zooming
US7515173B2 (en) 2002-05-23 2009-04-07 Microsoft Corporation Head pose tracking system
US7401920B1 (en) 2003-05-20 2008-07-22 Elbit Systems Ltd. Head mounted eye tracking and display system
CN100380923C (zh) 2003-12-01 2008-04-09 皇家飞利浦电子股份有限公司 用于运动模糊降低的带通滤波器的运动补偿逆滤波
JP4373286B2 (ja) 2004-05-06 2009-11-25 オリンパス株式会社 頭部装着型表示装置
US7639208B1 (en) 2004-05-21 2009-12-29 University Of Central Florida Research Foundation, Inc. Compact optical see-through head-mounted display with occlusion support
US20060019802A1 (en) 2004-07-26 2006-01-26 Robert Caird Removable crank arm for exercise cycle
US7545571B2 (en) 2004-09-08 2009-06-09 Concurrent Technologies Corporation Wearable display system
US7369317B2 (en) 2005-03-07 2008-05-06 Himax Technologies, Inc. Head-mounted display utilizing an LCOS panel with a color filter attached thereon
JP5080728B2 (ja) * 2005-07-04 2012-11-21 孝仁 徳山 米を除く穀類又は豆類を原料とする、細胞増殖促進剤及び細胞修復剤
JP2008046562A (ja) 2006-08-21 2008-02-28 Nikon Corp 頭部装着型ディスプレイ
JP4775205B2 (ja) * 2006-09-20 2011-09-21 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
US7826683B2 (en) * 2006-10-13 2010-11-02 Adobe Systems Incorporated Directional feathering of image objects
US7936361B2 (en) * 2007-04-30 2011-05-03 Hewlett-Packard Development Company, L.P. System and method for masking and overlaying images in multiple projector system
US20110091084A1 (en) 2008-05-20 2011-04-21 Huiqi Li automatic opacity detection system for cortical cataract diagnosis
US8520309B2 (en) * 2008-09-04 2013-08-27 Innovega Inc. Method and apparatus to process display and non-display information
US8441731B2 (en) 2008-09-04 2013-05-14 Innovega, Inc. System and apparatus for pixel matrix see-through display panels
JP5136442B2 (ja) * 2009-01-27 2013-02-06 ブラザー工業株式会社 ヘッドマウントディスプレイ
US8267781B2 (en) 2009-01-30 2012-09-18 Microsoft Corporation Visual target tracking
US8294767B2 (en) 2009-01-30 2012-10-23 Microsoft Corporation Body scan
JP5402293B2 (ja) * 2009-06-22 2014-01-29 ソニー株式会社 頭部装着型ディスプレイ、及び、頭部装着型ディスプレイにおける画像表示方法
US8941559B2 (en) 2010-09-21 2015-01-27 Microsoft Corporation Opacity filter for display device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5572343A (en) * 1992-05-26 1996-11-05 Olympus Optical Co., Ltd. Visual display having see-through function and stacked liquid crystal shutters of opposite viewing angle directions
CN101124508A (zh) * 2004-02-10 2008-02-13 黑德普莱有限公司 用于管理立体观看的系统和方法

Also Published As

Publication number Publication date
US10388076B2 (en) 2019-08-20
EP3499294B1 (en) 2020-04-29
US20190228586A1 (en) 2019-07-25
EP2619622B1 (en) 2019-02-27
ES2728233T3 (es) 2019-10-23
PT2619622T (pt) 2019-03-27
US20150193984A1 (en) 2015-07-09
JP5801401B2 (ja) 2015-10-28
ES2809231T3 (es) 2021-03-03
IL225025A (en) 2016-11-30
US9286730B2 (en) 2016-03-15
KR20130139878A (ko) 2013-12-23
PL3499292T3 (pl) 2020-09-21
US20190378338A1 (en) 2019-12-12
WO2012039877A1 (en) 2012-03-29
DK2619622T3 (en) 2019-04-15
EP2619622A4 (en) 2017-08-23
EP3499292A1 (en) 2019-06-19
US10573086B2 (en) 2020-02-25
US20180211448A1 (en) 2018-07-26
US8941559B2 (en) 2015-01-27
EP3499292B1 (en) 2020-04-29
EP3499293B1 (en) 2020-06-03
EP2619622A1 (en) 2013-07-31
CA2810859A1 (en) 2012-03-29
TR201903562T4 (tr) 2019-03-21
PL2619622T3 (pl) 2019-08-30
JP2013542462A (ja) 2013-11-21
US20160171779A1 (en) 2016-06-16
EP3499294A1 (en) 2019-06-19
US10665033B2 (en) 2020-05-26
EP3499293A1 (en) 2019-06-19
US20120068913A1 (en) 2012-03-22
CN102540463A (zh) 2012-07-04
CA2810859C (en) 2018-06-05
US9911236B2 (en) 2018-03-06
ES2802536T3 (es) 2021-01-20
KR101895085B1 (ko) 2018-10-04

Similar Documents

Publication Publication Date Title
CN102540463B (zh) 用于透视头戴式显示器的不透明度滤光器
EP3330771B1 (en) Display apparatus and method of displaying using focus and context displays
US8537075B2 (en) Environmental-light filter for see-through head-mounted display device
CN107153270B (zh) 小孔投射式近眼显示器
US8780014B2 (en) Switchable head-mounted display
US20180018943A1 (en) Dual display immersive screen technology
JP6741643B2 (ja) 表示装置、およびコンテキストディスプレイとプロジェクタを用いた表示方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150728

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150728

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20171228

Address after: Stockholm

Patentee after: Telefon AB L.M. Ericsson [SE]

Address before: Washington State

Patentee before: Micro soft technique license Co., Ltd

TR01 Transfer of patent right