本公开总体上涉及摄像头曝光和向用户呈现图像。
背景技术：
1、人工现实是一种在呈现给用户之前已经以某种方式进行了调整的现实形式，其可以包括例如虚拟现实(virtual reality，vr)、增强现实(augmented reality，ar)、混合现实(mixed reality，mr)、混合现实(hybrid reality)、或它们的某种组合和/或衍生物。人工现实内容可以包括完全生成的内容或与所捕获的内容(例如，真实世界照片)相结合的生成的内容。人工现实内容可以包括视频、音频、触觉反馈、或它们的某种组合，并且以上中的任何均可以在单个通道或多个通道中呈现(例如，为观看者带来三维效果的立体视频)。人工现实可以与应用、产品、附件、服务、或它们的某种组合相关联，这些应用、产品、附件、服务、或它们的某种组合例如用于在人工现实中创建内容，和/或在人工现实中使用(例如，在人工现实中执行活动)。提供人工现实内容的人工现实系统可以在各种平台上实现，这些平台包括连接到主计算机系统的头戴式显示器(head-mounted display，hmd)、独立hmd、移动设备或计算系统、或能够向一位或多位观看者提供人工现实内容的任何其它硬件平台。
技术实现思路
1、本文描述的实施例覆盖用于自动调整捕获人工现实设备的环境的传感器(例如，一个或多个摄像头)上的曝光的系统、方法和介质。本文公开的实施例通过动态评估环境的图像数据，来将摄像头曝光自动调整为针对周围环境中的参考点的最佳亮度。所公开的实施例对于多种应用(例如，混合现实环境可视化)是有用的。
2、在一个实施例中，计算系统可以接收包括环境视角的图像数据(例如，视频的图像帧)，并使用本文描述的一种或多种技术来自动调整图像或视频捕获传感器(例如，一个或多个摄像头)上的曝光。在特定实施例中，计算系统还可以使用例如但不限于用户眼动追踪技术来识别图像帧内的用户感兴趣的区域(例如，空间区域)，以便用作自动曝光控制算法的参考点。本文所描述的技术通过提供这样的自动传感器曝光控制来改进现有技术：该自动传感器曝光控制考虑了用户注视信息并提高了用户视野在周围环境中的可见性，这可以向用户提供更沉浸式的体验。
3、在识别用户感兴趣的视场的最佳图像亮度方面存在某些技术挑战。一个技术挑战可能包括，人眼观看整个场景细节的最佳亮度可能不同于观看人工现实系统周围环境的一部分的最佳亮度。另一技术挑战可能是避免整个图像过度曝光，使得用户优选的感兴趣区域(region of interest，roi)模糊不清，并因此对用户不是最佳可见的。本文公开的实施例为解决这一挑战而提供的方案可以是：确定图像帧的哪个区域(例如，空间区域)是用户的当前优选感兴趣区域(roi)，并基于图像帧的这些区域中的信息来优化曝光决策。
4、本发明的实施例可以包括人工现实系统，或可以结合人工现实系统来实现。人工现实是在呈现给用户之前已经以某种方式进行了调整的现实形式，其可以包括例如虚拟现实(vr)、增强现实(ar)、混合现实(mr)、混合现实(hybrid reality)、或它们的某种组合和/或衍生物。人工现实内容可以包括完全生成的内容或与所捕获的内容(例如，真实世界照片)相结合的生成的内容。人工现实内容可以包括视频、音频、触觉反馈、或它们的某种组合，并且以上中的任何均可以在单个通道或多个通道中呈现(例如，为观看者带来三维效果的立体视频)。另外，在特定实施例中，人工现实可以与应用、产品、附件、服务、或它们的某种组合相关联，这些应用、产品、附件、服务、或它们的某种组合例如用于在人工现实中创建内容和/或用于人工现实中(例如，在人工现实中执行活动)。提供人工现实内容的人工现实系统可以在各种平台上实现，这些平台包括连接到主计算机系统的头戴式显示器(hmd)、独立hmd、移动设备或计算系统、或能够向一位或多位观看者提供人工现实内容的任何其它硬件平台。
5、本文中所公开的实施例仅为示例，且本公开的范围不限于此。特定实施例可以包括本文所公开的各实施例中的部件、元件、特征、功能、操作或步骤中的全部、一些，或者可以不包括本文所公开的各实施例中的部件、元件、特征、功能、操作或步骤。根据本发明的各实施例在所附的针对方法、存储介质、系统和计算机程序产品的权利要求中特别公开，其中，在一个权利要求类别(例如，方法)中所提到的任何特征也可以在另一个权利要求类别(例如，系统)中主张。所附权利要求书中的从属关系或回引仅出于形式原因而选择。然而，因故意回引任何在先权利要求(特别是多项引用)而产生的任何主题也可以被要求保护，使得权利要求及其特征的任何组合被公开并且可以被要求保护，而不管所附权利要求中所选择的从属关系如何。可以被要求保护的主题不仅包括所附权利要求中阐述的特征的组合，还包括权利要求中的特征的任何其它组合，其中，权利要求中提及的每个特征可以与权利要求中的任何其它特征或其它特征的组合相结合。此外，本文中所描述或所描绘的实施例和特征中的任何实施例和特征可以在单独的权利要求中被要求保护，以及/或者以与本文中所描述或描绘的任何实施例或特征的任何组合方式或以与所附权利要求中的任何特征的任何组合方式被要求保护。
1.一种方法，包括：
2.根据权利要求1所述的方法，其中，确定所述当前感兴趣区域包括：
3.根据权利要求1所述的方法，其中，确定所述当前感兴趣区域包括：
4.根据权利要求1所述的方法，其中，确定所述预测眼睛注视的时间稳定性包括：
5.根据权利要求1所述的方法，其中，所述时间稳定性通过滞后检测算法来确定。
6.根据权利要求1所述的方法，其中，计算所述曝光控制参数还基于所述图像平面的与所述当前感兴趣区域的权重相称的一个或多个其它区域。
7.根据权利要求1所述的方法，还包括：
8.根据权利要求1所述的方法，还包括：
9.根据权利要求1所述的方法，其中，所述图像平面包括佩戴着所述人工现实头戴式设备的用户周围环境的视觉表示。
10.一种或多种计算机可读非暂态存储介质，所述一种或多种计算机可读非暂态存储介质包含软件，所述软件在被执行时能够操作以：
11.根据权利要求10所述的介质，其中，所述软件在被执行时还能够操作以：
12.根据权利要求10所述的介质，其中，所述软件在被执行时还能够操作以：
13.根据权利要求10所述的介质，其中，所述软件在被执行时还能够操作以：
14.根据权利要求10所述的介质，其中，所述时间稳定性通过滞后检测算法来确定。
15.根据权利要求10所述的介质，其中，计算所述曝光控制参数还基于所述图像平面的与所述当前感兴趣区域的权重相称的一个或多个其它区域。
16.根据权利要求10所述的介质，其中，所述软件在被执行时还能够操作以：
17.根据权利要求10所述的介质，其中，所述软件在被执行时还能够操作以：
18.根据权利要求10所述的介质，其中，所述图像平面包括佩戴着所述人工现实头戴式设备的用户周围环境的视觉表示。
19.一种系统，包括：
20.根据权利要求19所述的系统，其中，计算所述曝光控制参数还基于所述图像平面的与所述当前感兴趣区域的权重相称的一个或多个其它区域。
