CN116601542A - 图像捕获和可见光透射的同步 - Google Patents

图像捕获和可见光透射的同步 Download PDF

Info

Publication number
CN116601542A
CN116601542A CN202180078263.2A CN202180078263A CN116601542A CN 116601542 A CN116601542 A CN 116601542A CN 202180078263 A CN202180078263 A CN 202180078263A CN 116601542 A CN116601542 A CN 116601542A
Authority
CN
China
Prior art keywords
state
image capture
capture event
image
visible light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180078263.2A
Other languages
English (en)
Inventor
R·莫尔霍姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of CN116601542A publication Critical patent/CN116601542A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/75Circuitry for compensating brightness variation in the scene by influencing optical camera components
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00Non-optical adjuncts; Attachment thereof
    • G02C11/10Electronic devices other than hearing aids
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C7/00Optical parts
    • G02C7/10Filters, e.g. for facilitating adaptation of the eyes to the dark; Sunglasses
    • G02C7/101Filters, e.g. for facilitating adaptation of the eyes to the dark; Sunglasses having an electro-optical light valve
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/665Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
    • GPHYSICS
    • G02OPTICS
    • G02FOPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
    • G02F1/00Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
    • G02F1/01Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour 
    • G02F1/15Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour  based on an electrochromic effect
    • G02F1/163Operation of electrochromic cells, e.g. electrodeposition cells; Circuit arrangements therefor

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Ophthalmology & Optometry (AREA)
  • General Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Otolaryngology (AREA)
  • Studio Devices (AREA)

Abstract

所公开的各种实施方式包括在图像捕获事件期间控制第一设备的观察部分(例如,玻璃)的可见光透射属性的设备、系统和方法,其中该第一设备的图像被第二设备捕获。在一个实施方式中,该第一设备的该部分快速地从第一状态转换为第二状态(例如,变得更浅或更深)以用于相机曝光。在室外时,该第一设备的该部分的深色外观可在捕获照片或视频时转换为浅色外观。在第二实施方式中,该第一设备的该部分在捕获照片或视频时维持处于第一状态。例如,在室内时,可在使用闪光捕获照片或视频时维持该第一设备的该部分的透明外观。

Description

图像捕获和可见光透射的同步
技术领域
本公开整体涉及电子设备,并且具体地涉及调整电子设备的可至少部分透明的部分的可见光透射的设备和方法。
背景技术
各种产品具有至少部分透明(例如,透明、着色浅、着色深等)的部分。此类部分在照片和视频中可能没有期望的外观。例如,如果此类部分是渐变的,则在照片中可能无法透过该部分看见该部分远侧的对象,即使可能期望在照片中透过该部分看见该对象。
发明内容
本文所公开的各种实施方式包括在图像捕获事件期间控制第一设备的观察部分(例如,玻璃)的可见光透射属性的设备、系统和方法,其中该第一设备的图像被第二设备捕获。在一个实施方式中,该第一设备的该部分快速地从第一状态转换为第二状态(例如,变得更浅或更深)以用于相机曝光。在室外时,该第一设备的该部分的深色外观可在捕获照片或视频时转换为浅色外观。在第二实施方式中,该第一设备的该部分在捕获照片或视频时维持处于第一状态。例如,在室内时,即使闪光原本会触发转换为更深的第二状态,但可在使用该闪光捕获照片或视频时维持该第一设备的该部分的透明外观。
一个示例性方法涉及确定图像捕获事件将发生,其中第一设备(例如,手持式设备或头戴式设备(HMD))的一部分的图像将被与该第一设备分开的第二设备(例如,包括相机的移动设备)在图像中捕获。在一个示例中,当按下第二设备的拍照按钮时,该第二设备向该第一设备发送消息,以触发该部分在拍照期间保持透明或变得透明。该第二设备可在发起该图像捕获或曝光之前等待确认或等待预先确定的阈值时间量。在一些实施方式中,经由RF信号或光信号/编码闪光在这些设备之间发送消息。在一些实施方式中,通过使用一个或两个这些设备上的传感器来确定这些设备的相对定位和/或取向,从而确定该第一设备是否将在该图像中。
该示例性方法还涉及根据确定该图像捕获事件将发生,在该图像捕获事件期间控制该第一设备的该部分的可见光透射属性。这可能涉及控制电致变色材料(例如,玻璃)的着色,使该电致变色材料的着色变为透明、深色或预定义百分比的着色程度。在一个示例中,第二设备触发该第一设备将该部分转换为更具透射性/更浅(例如,透明),使得该部分在图像曝光期间保持透明,并且随后转换回更深(例如,不太透明)状态。在一些实施方式中,如果在超时时间段内没有图像捕获发生,则该第一设备自动地将该部分转换回其先前状态。又如,该第二设备触发该第一设备在伴随图像曝光的闪光期间保持更浅(例如,透明)。
在一些实施方式中(例如,这些设备未配对的情况下),控制还基于用户输入或用户操作(诸如,用户手势、可听命令、注视方向、与UI控件的手动交互等)。需要此类附加输入或操作可帮助确保另一人的相机(例如,狗仔队的相机)不会不期然地控制第一设备(例如,由不希望狗仔队能够更改其设备的名人使用的设备)。
在一些实施方式中,在图像捕获事件期间控制第一设备的一部分的可见光透射有助于捕获更适于修改的图像。例如,此类图像可包括比原本更多的对应于用户或物理环境的内容,因此可表示或包括关于该用户或环境的更多信息。此类附加信息可有助于各种计算机视觉过程,包括但不限于幻构、图像修复或用于调整该图像以移除/擦除该第一电子设备的其他技术和/或用于解释和提供关于该用户和/或环境的信息以改善第二设备的用户体验的机器学习模型。
根据一些实施方式,一种设备包括一个或多个处理器、非暂态存储器以及一个或多个程序;该一个或多个程序被存储在非暂态存储器中并且被配置为由一个或多个处理器执行,并且该一个或多个程序包括用于执行或使得执行本文所述方法中的任一种的指令。根据一些实施方式,一种非暂态计算机可读存储介质中存储有指令,这些指令在由设备的一个或多个处理器执行时使该设备执行或使执行本文所述方法中的任一种。根据一些实施方式,一种设备包括:一个或多个处理器、非暂态存储器以及用于执行或使执行本文所述方法中的任一种的装置。
附图说明
因此,本公开可被本领域的普通技术人员理解,更详细的描述可参考一些例示性实施方式的方面,其中一些实施方式在附图中示出。
图1A示出了根据一些实施方式的环境,其中第一设备控制可见光透射,同时该第一设备被捕获到由第二设备所捕获的图像中。
图1B示出了根据一些实施方式的另一环境,其中第一设备控制可见光透射,同时该第一设备被捕获到由第二设备所捕获的图像中。
图2是用于在图像捕获事件期间控制可见光透射的方法的流程图表示。
图3示出了在图像捕获事件期间控制可见光透射的示例。
图4示出了在图像捕获事件期间控制可见光透射的另一示例。
图5示出了在图像捕获事件期间控制可见光透射并且调整在该图像捕获事件期间所捕获的图像的示例。
图6是根据一些实施方式的示例性设备的框图。
根据通常的做法,附图中示出的各种特征部可能未按比例绘制。因此,为了清楚起见,可以任意地扩展或减小各种特征部的尺寸。另外,一些附图可能未描绘给定的系统、方法或设备的所有部件。最后,在整个说明书和附图中,类似的附图标号可用于表示类似的特征部。
具体实施方式
描述了许多细节以便提供对附图中所示的示例实施方式的透彻理解。然而,附图仅示出了本公开的一些示例方面,因此不应被视为限制。本领域的普通技术人员将会知道,其他有效方面或变体不包括本文所述的所有具体细节。此外,没有详尽地描述众所周知的系统、方法、部件、设备和电路,以免模糊本文所述的示例性实施方式的更多相关方面。
图1A示出了包括第一设备10和第二设备20的物理环境5。在该示例中,用户25持有第一设备10,同时第二设备20捕获图像。在一些实施方式中,在第二设备20捕获图像期间控制第一设备10的一部分的可见光透射属性。例如,可以控制第一设备10的该部分的可见光透射属性,以使在由第二设备20所捕获的图像中能够捕获(或改善)用户10的眼睛45的外观(例如,通过使用户的眼睛45中的更多光线能够穿过第一设备10的该部分,并在图像捕获事件期间被第二设备20的图像传感器所捕获)。
虽然设备10被示出为手持式设备,但是其它实施方式涉及用户与之交互但无需手持的设备和由用户佩戴的设备。在一些实施方式中,如图1A所示,设备10是手持电子设备(例如,智能手机或平板电脑)。在一些实施方式中,设备10是膝上型计算机或台式计算机。在一些实施方式中,如图1B所示,设备10为可佩戴设备(诸如,头戴式设备(HMD))。
此外,尽管本文讨论的这些示例和其他示例示出了物理环境5中的单个设备10,但是本文公开的技术适用于多个设备以及多个现实世界环境。例如,设备10的功能可由多个设备执行。
在一些实施方式中,设备10具有图形用户界面(GUI)、一个或多个处理器、存储器以及存储在存储器中的用于执行多个功能的一个或多个模块、程序或指令集。在一些实施方式中,用户25与第一设备10和第二设备20中的一者或两者交互,例如,在持有或佩戴第一设备10的同时使用第二设备20拍摄自拍照片。在其他实施方式中,一个或多个其他用户使用设备20。
图2是根据一些实施方式的用于在图像捕获事件期间控制可见光透射的方法的流程图表示。在一些实施方式中,方法200由诸如移动设备、HMD、台式计算机、膝上型电脑或服务器设备的设备执行。在一些实施方式中,方法200由处理逻辑部件(包括硬件、固件、软件或其组合)执行。在一些实施方式中,方法200由执行存储在非暂态计算机可读介质中的代码的处理器执行。
在框202处,方法200确定图像捕获事件将发生,其中第一设备的一部分的图像将被与该第一设备分开的第二设备在图像中捕获。这可能涉及确定该第二设备将基于识别出图像捕获事件的意图(例如,如聚焦或其他捕获前设备活动所证明的)或检测到在该第二设备处接收到图像捕获输入而执行图像捕获事件。
在一个示例中,当按下第二设备的拍照按钮时,该第二设备向该第一设备发送消息,以触发该部分在拍照期间保持透明或变得透明。该第二设备可在发起该图像捕获或曝光之前等待确认或等待预先确定的阈值时间量。在一些实施方式中,经由RF信号或光信号/编码闪光在这些设备之间发送消息。在一些实施方式中,通过使用一个或两个这些设备上的传感器来确定这些设备的相对定位和/或取向,从而确定该第一设备是否将在该图像中。
在框204处,方法200根据确定该图像捕获事件将发生,在该图像捕获事件期间控制该第一设备的该部分的可见光透射属性。这可能涉及控制电致变色材料(例如,玻璃)的着色,使该电致变色材料的着色变为透明、深色或预定义百分比的着色程度。
在一些实施方式中(例如,这些设备未配对的情况下),控制还基于用户输入或用户操作(诸如,用户手势、可听命令、注视方向、与UI控件的手动交互等)。需要此类附加输入或操作可帮助确保另一人的相机(例如,狗仔队的相机)不会不期然地控制第一设备(例如,由不希望狗仔队能够更改其设备的名人使用的设备)。
在一个示例中,第二设备触发该第一设备将该部分转换为更具透射性/更浅(例如,透明),使得该部分在图像曝光期间保持透明,并且随后转换回更深(例如,不太透明)状态。图3示出了在图像捕获事件期间控制可见光透射的示例。在该示例中,在第一时间段310期间,用户25在明亮的环境中佩戴第一设备10,并且部分15a至部分15b(例如,电致变色材料)处于相对着色的第一状态(例如,深色)。例如,第一设备10的部分15a至部分15b可以是镜片或其他观察部分(例如,作为太阳镜),这些部分被着色以减少经由用户眼睛45a至眼睛45b可见的光量。在第二时间段320期间,在第二设备20上发起图像捕获事件,并且第二设备20向第一设备10发送消息以触发部分15a至部分15b在图像捕获事件期间保持透明或变得透明。第一设备10将部分15a至部分15b转换为第二状态(例如,透明),使得在图像捕获事件期间第二设备20透过部分15a至部分15b可以更清楚地看见眼睛45a至眼睛45b。在时间330处,在图像捕获事件之后,第一设备10将部分15a至部分15b转换回第一状态(例如,深色)。
在一些实施方式中,如果在超时时间段内没有图像捕获发生,则该第一设备自动地将该部分转换回其先前状态。又如,该第二设备触发该第一设备在伴随图像曝光的闪光期间保持更浅(例如,透明)。图4示出了在图像捕获事件期间控制可见光透射的另一示例。在该示例中,在第一时间段410期间,用户25佩戴第一设备10,并且部分15a至部分15b处于相对未着色的第一状态(例如,透明)。例如,第一设备10的部分15a至部分15b可以是镜片或其他观察部分,这些部分在用户所处的当前室内环境中是透明的。在第二时间段420期间,在第二设备20上发起图像捕获事件,并且第二设备20向第一设备10发送消息以触发部分15a至部分15b在图像捕获事件期间保持透明或变得透明。第一设备10控制部分15a至部分15b保持在第一状态(例如,透明),使得在图像捕获事件期间第二设备20透过部分15a至部分15b仍然可以看见眼睛45a至眼睛45b。在时间430处,在图像捕获事件之后,部分15a至部分15b保持处于第一状态(例如,透明)。
图5示出了在图像捕获事件期间控制可见光透射并且调整在该图像捕获事件期间所捕获的图像的示例。在该示例中,在第一时间段310期间,用户25佩戴第一设备10,并且部分15a至部分15b处于相对着色的第一状态(例如,深色)。在第二时间段320期间,在第二设备20上发起图像捕获事件,并且第二设备20向第一设备10发送消息以触发部分15a至部分15b在图像捕获事件期间保持透明或变得透明。第一设备10将部分15a至部分15b转换为第二状态(例如,透明),使得在图像捕获事件期间第二设备20透过部分15a至部分15b可以更清楚地看见眼睛45a至眼睛45b。在时间330处,在图像捕获事件之后,第一设备10将部分15a至部分15b转换回第一状态(例如,深色)。
在图像捕获事件期间所捕获的图像500包括用户25的描绘525和设备510的描绘。设备510的描绘的部分515a至部分515b是透明的,因此用户的眼睛45a至眼睛45b的描绘545a至描绘545b被包括在图像500内。如果图像事件发生时部分15a至部分15b在第二时间段320期间处于第二状态,则此类描绘545a至描绘545b在图像500中将不可见或不太可见。
在一些实施方式中,如图5所示,在图像捕获事件期间控制第一设备10的一个或多个部分15a至部分15b的可见光透射有助于捕获更适于修改的图像。在该示例中,图像500包括可包括比原本更多的内容(例如,用户的眼睛45a至眼睛45b的描绘545a至描绘545b),因此可表示或包括关于用户和/或环境的更多信息。此类附加信息可有助于各种计算机视觉过程,包括但不限于幻构、图像修复或用于调整该图像以移除/擦除第一设备10的描绘510的其他技术和/或用于解释和提供关于用户和/或环境的信息以改善第二设备的用户体验的机器学习模型。
在图5的示例中,机器学习过程接收图像500作为输入并且执行设备移除/擦除任务,以移除第一设备10的描绘510以便产生图像530,该图像包括用户25的描绘525,但没有第一设备10的描绘510。例如,这可能涉及在图像像素位置处生成/幻构图像内容,这些图像像素位置在图像500中先前被第一设备10的描述510占据。图像530包括用户眼睛45a至眼睛45b的描绘545a至描绘545b。如果描绘545a至描绘545b在图像500中不可见或不太可见,则将需要对此类描绘545a至描绘545b进行幻构或者可能以其他方式进行不同地显示。此外,由于图像内容的幻构/生成具有移动或更好的信息以供使用,因此图像530的其他内容可能更准确或更好。因此,在图像捕获事件期间控制部分15a至部分15b的可见光透射属性可有助于创建具有用户25的描绘525但没有第一设备10的描绘510的比原本可能的图像更好的图像530。
在一些实施方式中,在图像捕获事件期间控制可见光透射是基于用户参数和/或用户输入。用户可基于用户的特定使用情况和期望来更改第一设备显示的方式(例如,其部分的透明度)。在一些实施方式中,例如,用户可有意选择让一部分在图像中显示为深色。在其他实施方式中,用户可针对设备的一部分选择颜色(例如,蓝色色调)。在其他实施方式中,用户可选择使第一设备不对图像捕获事件作出反应。例如,基于用户偏好,第一设备可不基于确定图像捕获事件将发生来控制可见光透射,即这些部分将不改变。另外,用户可选择让第一设备只针对已知和可信的第二设备作出反应(例如,属于用户联系人的设备),或者可让第一设备只在接收到用户的确认后作出反应。例如,基于检测到图像捕获事件,可向用户提供选项,使用户可基于检测到该图像捕获事件和/或将来的图像捕获事件(例如,在有限的时间段内,诸如,接下来的5分钟)来控制/更改可见光透射。
在一些实施方式中,在图像捕获事件期间控制第一设备的部分的可见光透射属性根据转换特性(例如,更浅、更深等)而发生,其中该转换特性基于用户设置。例如,用户可指定转换期间显示器变得更浅或更深的程度。
在一些实施方式中,第一设备具有显示器(例如,光学透视显示器),该显示器提供正在捕获第一设备的图像的指示。该指示可指示捕获此类图像的方向和/或距离。
图6是根据一些实施方式的设备600的示例的框图。尽管示出了一些具体特征,但本领域的技术人员将从本公开中认识到,为简洁起见并且为了不模糊本文所公开的实施方式的更多相关方面,未示出各种其他特征。为此,作为非限制性示例,在一些实施方式中,设备600包括一个或多个处理单元602(例如,微处理器、ASIC、FPGA、GPU、CPU、处理核心等)、一个或多个输入/输出(I/O)设备和传感器606、一个或多个通信接口608(例如,USB、FIREWIRE、THUNDERBOLT、IEEE 802.3x、IEEE 802.11x、IEEE 802.16x、GSM、CDMA、TDMA、GPS、IR、BLUETOOTH、ZIGBEE、SPI、I2C和/或相似类型的接口)、一个或多个编程(例如,I/O)接口610、一个或多个显示器612、一个或多个面向内部和/或面向外部的图像传感器系统614、存储器620以及用于互连这些部件和各种其他部件的一条或多条通信总线604。
在一些实施方式中,一条或多条通信总线604包括互连并控制系统部件之间的通信的电路。在一些实施方式中,该一个或多个I/O设备及传感器606包括以下各项中的至少一者:惯性测量单元(IMU)、加速度计、磁力计、陀螺仪、温度计、一个或多个生理传感器(例如,血压监测仪、心率监测仪、血氧传感器、血糖传感器等)、一个或多个麦克风、一个或多个扬声器、触觉引擎或者一个或多个深度传感器(例如,结构光、飞行时间等),等等。
在一些实施方式中,一个或多个显示器612被配置为向用户呈现用户体验。在一些实施方式中,一个或多个显示器612对应于全息、数字光处理(DLP)、液晶显示器(LCD)、硅上液晶(LCoS)、有机发光场效应晶体管(OLET)、有机发光二极管(OLED)、表面传导电子发射器显示器(SED)、场发射显示器(FED)、量子点发光二极管(QD-LED)、微机电系统(MEMS)、视网膜投影系统和/或类似显示器类型。在一些实施方式中,一个或多个显示器612对应于衍射、反射、偏振、全息等波导显示器。例如,设备10包括单个显示器。又如,设备60包括针对用户25的每只眼睛的显示器,例如,HMD。
存储器620包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备。在一些实施方式中,存储器620包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器620任选地包括与一个或多个处理单元602远程定位的一个或多个存储设备。存储器620包括非暂态计算机可读存储介质。在一些实施方式中,存储器620或存储器620的非暂态计算机可读存储介质存储下述程序、模块和数据结构或者它们的子集,其中包括任选的操作系统620和CGR内容模块640。
操作系统630包括用于处理各种基础系统服务和用于执行硬件相关任务的过程。在一些实施方式中,模块640被配置为在图像捕获事件期间控制可见光透射。为此,在各种实施方式中,模块640包括图像捕获事件单元642、可见光透射属性单元644和图像更改单元646。
在一些实施方式中,图像捕获事件单元642被配置为确定图像捕获事件将发生。例如,确定图像捕获事件将发生,其中第一设备10的一部分的图像将被与该第一设备10分开的第二设备20在图像中捕获。基于已按下第二设备的拍照按钮,第一设备10接收到来自第二设备20的消息。出于这些目的,在各种实施方式中,该单元包括指令和/或用于该指令的逻辑以及启发法和用于该启发法的元数据。
在一些实施方式中,可见光透射属性单元644被配置为根据图像捕获事件单元642确定图像捕获事件将发生,从而在图像捕获事件期间控制可见光透射属性。这可能涉及控制一个或多个显示器612或设备600的其他部分的电致变色材料的着色,使该电致变色材料的着色变为透明、深色或预定义百分比的着色程度。出于这些目的,在各种实施方式中,该单元包括指令和/或用于该指令的逻辑以及启发法和用于该启发法的元数据。
在一些实施方式中,图像更改单元646被配置为调整在图像捕获事件期间所捕获的图像,例如,移除图像中电子设备的描绘的可见部分。出于这些目的,在各种实施方式中,该单元包括指令和/或用于该指令的逻辑以及启发法和用于该启发法的元数据。
尽管图6的单元和模块被示出为驻留在单个设备(例如,设备600)上,但应当理解,在其他实施方式中,这些单元的任何组合可位于单独的计算设备中。
此外,图6更多地用作存在于特定实施方式中的各种特征部的功能描述,该各种特征部与本文所述的实施方式的结构示意图不同。如本领域的普通技术人员将认识到的,单独显示的项目可以组合,并且一些项目可以分开。例如,图6中单独示出的一些功能模块可以在单个模块中实现,并且单个功能块的各种功能可在各种实施方式中通过一个或多个功能块来实现。模块的实际数量和特定功能的划分以及如何在其中分配特征将根据实施方式而变化,并且在一些实施方式中,部分地取决于为特定实施方案选择的硬件、软件和/或固件的特定组合。
应当理解,上文所描述的实施方式以示例的方式引用,并且本公开不限于上文已特别示出和描述的内容。相反地,范围包括上文所描述的各种特征的组合和子组合两者,以及本领域的技术人员在阅读前述描述时将想到的并且在现有技术中未公开的所述各种特征的变型和修改。
本文阐述了许多具体细节以提供对要求保护的主题的全面理解。然而,本领域的技术人员将理解,可以在没有这些具体细节的情况下实践要求保护的主题。在其他实例中,没有详细地介绍普通技术人员已知的方法、装置或系统,以便不使要求保护的主题晦涩难懂。
除非另外特别说明,否则应当理解,在整个说明书中,利用诸如“处理”、“计算”、“计算出”、“确定”和“标识”等术语的论述是指计算设备的动作或过程,诸如一个或多个计算机或类似的电子计算设备,其操纵或转换表示为计算平台的存储器、寄存器或其他信息存储设备、传输设备或显示设备内的物理电子量或磁量的数据。
本文论述的一个或多个系统不限于任何特定的硬件架构或配置。计算设备可以包括部件的提供以一个或多个输入为条件的结果的任何合适的布置。合适的计算设备包括基于多用途微处理器的计算机系统,其访问存储的软件,该软件将计算系统从通用计算设备编程或配置为实现本发明主题的一种或多种实施方式的专用计算设备。可以使用任何合适的编程、脚本或其他类型的语言或语言的组合来在用于编程或配置计算设备的软件中实现本文包含的教导内容。
本文所公开的方法的实施方式可以在这样的计算设备的操作中执行。上述示例中呈现的框的顺序可以变化,例如,可以将框重新排序、组合或者分成子框。某些框或过程可以并行执行。
本文中“适用于”或“被配置为”的使用意味着开放和包容性的语言,其不排除适用于或被配置为执行额外任务或步骤的设备。另外,“基于”的使用意味着开放和包容性,因为“基于”一个或多个所述条件或值的过程、步骤、计算或其他动作在实践中可以基于额外条件或超出所述的值。本文包括的标题、列表和编号仅是为了便于解释而并非旨在为限制性的。
还将理解的是,虽然术语“第一”、“第二”等可能在本文中用于描述各种元素,但是这些元素不应当被这些术语限定。这些术语只是用于将一个元件与另一元件区分开。例如,第一节点可以被称为第二节点,并且类似地,第二节点可以被称为第一节点,其改变描述的含义,只要所有出现的“第一节点”被一致地重命名并且所有出现的“第二节点”被一致地重命名。第一节点和第二节点都是节点,但它们不是同一个节点。
本文中所使用的术语仅仅是为了描述特定实施方式并非旨在对权利要求进行限制。如在本实施方式的描述和所附权利要求中所使用的那样,单数形式的“一个”和“该”旨在也涵盖复数形式,除非上下文清楚地另有指示。还将理解的是,本文中所使用的术语“或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件或其分组。
如本文所使用的,术语“如果”可以被解释为表示“当所述先决条件为真时”或“在所述先决条件为真时”或“响应于确定”或“根据确定”或“响应于检测到”所述先决条件为真,具体取决于上下文。类似地,短语“如果确定[所述先决条件为真]”或“如果[所述先决条件为真]”或“当[所述先决条件为真]时”被解释为表示“在确定所述先决条件为真时”或“响应于确定”或“根据确定”所述先决条件为真或“当检测到所述先决条件为真时”或“响应于检测到”所述先决条件为真,具体取决于上下文。
本发明的前述描述和概述应被理解为在每个方面都是例示性和示例性的,而非限制性的,并且本文所公开的本发明的范围不仅由例示性实施方式的详细描述来确定,而是根据专利法允许的全部广度。应当理解,本文所示和所述的实施方式仅是对本发明原理的说明,并且本领域的技术人员可以在不脱离本发明的范围和实质的情况下实现各种修改。

Claims (23)

1.一种方法,包括:
确定第二设备将执行图像捕获事件,其中第一设备的一部分的图像将被所述第二设备捕获,其中所述第二设备与所述第一设备分开;以及
根据确定所述图像捕获事件将发生,在所述图像捕获事件期间控制所述第一设备的所述部分的可见光透射属性。
2.根据权利要求1所述的方法,其中所述第一设备的所述部分包括电致变色材料。
3.根据权利要求1至2中任一项所述的方法,其中控制所述可见光透射属性包括将所述第一设备的所述部分从第一状态转换为第二状态,其中所述第二状态比所述第一状态更具透射性。
4.根据权利要求3所述的方法,其中所述第二状态为透明状态。
5.根据权利要求1至2中任一项所述的方法,其中:
所述第一设备的部分被配置为响应于相机闪光而从第二状态转换为第一状态,其中所述第二状态比所述第一状态更具透射性;并且
控制所述可见光透射属性包括防止所述第一设备的所述部分在与所述图像捕获事件相关联的相机闪光期间从所述第二状态转换为所述第一状态。
6.根据权利要求1至5中任一项所述的方法,其中确定所述第二设备将执行图像捕获事件包括:
识别出所述图像捕获事件的意图;或者
检测到在所述第二设备处接收到图像捕获输入。
7.根据权利要求1至6中任一项所述的方法,其中确定所述第二设备将执行图像捕获事件包括接收到来自所述第二设备的射频(RF)或编码闪光信号。
8.根据权利要求7所述的方法,其中所述第二设备在发起所述图像捕获事件之前等待来自所述第一设备的确认。
9.根据权利要求1至8中任一项所述的方法,其中确定所述图像捕获事件将发生包括基于使用所述第一设备或所述第二设备上的一个或多个传感器来确定所述第一设备和所述第二设备的相对定位或取向从而确定所述第一设备将在所述图像中。
10.根据权利要求1至9中任一项所述的方法,其中在所述图像捕获事件期间控制所述第一设备的所述部分的所述可见光透射属性根据转换特性而发生,其中所述转换特性基于用户设置。
11.根据权利要求1至10中任一项所述的方法,其中所述第一设备包括显示器,其中所述显示器提供正在捕获所述第一设备的图像的指示。
12.根据权利要求1至11中任一项所述的方法,其中所述第一设备是头戴式设备,并且所述第一设备的所述部分被配置为定位在用户的眼睛前方。
13.一种第一设备,包括:
主体部分,所述主体部分被配置为由用户的头部支撑;
观察部分,所述观察部分附接到所述主体部分,并且被配置为定位在所述用户的眼睛前方,所述观察部分包括电致变色材料;
非暂态计算机可读存储介质;和
一个或多个处理器,所述一个或多个处理器耦接到所述非暂态计算机可读存储介质,其中所述非暂态计算机可读存储介质包括程序指令,所述程序指令在所述一个或多个处理器上执行时,使所述系统执行包括以下操作的操作:
确定图像捕获事件将发生,其中所述观察部分的图像将被与所述第一设备分开的第二设备捕获;以及
根据确定所述图像捕获事件将发生,在所述图像捕获事件期间控制所述观察部分的可见光透射属性。
14.根据权利要求13所述的设备,其中控制所述可见光透射属性包括将所述电致变色材料从第一状态转换为第二状态,其中所述第二状态比所述第一状态更具透射性。
15.根据权利要求14所述的设备,其中所述第二状态为透明状态。
16.根据权利要求15所述的设备,其中:
所述电致变色材料被配置为响应于相机闪光而从第二状态转换为第一状态,其中所述第二状态比所述第一状态更具透射性;并且
控制所述可见光透射属性包括防止所述电致变色材料在与所述图像捕获事件相关联的相机闪光期间从所述第二状态转换为所述第一状态。
17.根据权利要求13至16中任一项所述的设备,其中确定所述图像捕获事件将发生包括检测到在所述第二设备处接收到图像捕获输入。
18.根据权利要求13至17中任一项所述的设备,其中确定所述图像捕获事件将发生包括接收到来自所述第二设备的射频或编码闪光信号。
19.根据权利要求13至18中任一项所述的设备,其中确定所述图像捕获事件将发生包括基于使用所述第一设备或所述第二设备上的一个或多个传感器来确定所述第一设备和所述第二设备的相对定位或取向从而确定所述观察部分将在所述图像中。
20.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储程序指令,所述程序指令能够由一个或多个处理器执行以执行操作,所述操作包括:
确定图像捕获事件将发生,其中第一设备的一部分的图像将被与所述第一设备分开的第二设备在图像中捕获;以及
根据确定所述图像捕获事件将发生,在所述图像捕获事件期间控制所述第一设备的所述部分的可见光透射属性。
21.根据权利要求20所述的非暂态计算机可读存储介质,其中所述第一设备的所述部分包括电致变色材料。
22.根据权利要求17至18中任一项所述的非暂态计算机可读存储介质,其中控制所述可见光透射属性包括将所述第一设备的所述部分从第一状态转换为第二状态,其中所述第二状态比所述第一状态更具透射性。
23.根据权利要求20至22中任一项所述的非暂态计算机可读存储介质,其中控制所述可见光透射属性包括防止所述第一设备的所述部分在与所述图像捕获事件相关联的相机闪光期间从所述第二状态转换为所述第一状态。
CN202180078263.2A 2020-09-21 2021-09-07 图像捕获和可见光透射的同步 Pending CN116601542A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202063080920P 2020-09-21 2020-09-21
US63/080,920 2020-09-21
PCT/US2021/049196 WO2022060589A1 (en) 2020-09-21 2021-09-07 Synchronization of image capture and visual light transmission

Publications (1)

Publication Number Publication Date
CN116601542A true CN116601542A (zh) 2023-08-15

Family

ID=78135092

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180078263.2A Pending CN116601542A (zh) 2020-09-21 2021-09-07 图像捕获和可见光透射的同步

Country Status (4)

Country Link
US (1) US20230370728A1 (zh)
EP (1) EP4214570A1 (zh)
CN (1) CN116601542A (zh)
WO (1) WO2022060589A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1606944B1 (en) * 2003-03-14 2006-11-22 Koninklijke Philips Electronics N.V. 3d video conferencing
US8960898B1 (en) * 2012-09-24 2015-02-24 Google Inc. Contact lens that restricts incoming light to the eye
US10598927B2 (en) * 2017-06-08 2020-03-24 Visteon Global Technologies, Inc. Detecting polarization of a viewer's eyewear
EP3521910A1 (en) * 2018-02-06 2019-08-07 Essilor International Variable optical transmission device and associated control method

Also Published As

Publication number Publication date
EP4214570A1 (en) 2023-07-26
US20230370728A1 (en) 2023-11-16
WO2022060589A1 (en) 2022-03-24

Similar Documents

Publication Publication Date Title
US11985175B2 (en) Virtual interaction session to facilitate time limited augmented reality based communication between multiple users
CN110633008B (zh) 用户交互解释器
CN109791346B (zh) 眼镜装置模式指示
US10140015B2 (en) Mobile device camera viewfinder punch through effect
US20210306386A1 (en) Virtual interaction session to facilitate augmented reality based communication between multiple users
US20210304450A1 (en) Augmented reality based communication between multiple users
US11710310B2 (en) Virtual content positioned based on detected object
US11500510B2 (en) Information processing apparatus and non-transitory computer readable medium
US20220157083A1 (en) Gesture tracking system
CN111684496A (zh) 用于在头戴式显示系统中跟踪焦点的设备和方法
CN114174957A (zh) 使用事件相机的像素传感器进行跟踪
US11699412B2 (en) Application programming interface for setting the prominence of user interface elements
US20230298267A1 (en) Event routing in 3d graphical environments
CN116601542A (zh) 图像捕获和可见光透射的同步
US11288873B1 (en) Blur prediction for head mounted devices
CN104156138B (zh) 拍摄控制方法及拍摄控制装置
CN116547719A (zh) 传感器仿真
WO2022010659A1 (en) Display calibration
WO2021061551A1 (en) Method and device for processing camera images
US20240195848A1 (en) Virtual interaction session to facilitate real-time communication between multiple users
US20240036330A1 (en) Control device, glasses-type information display device, control method, and control program
KR20220099827A (ko) 전자 장치 및 그 제어 방법
WO2023224875A1 (en) Methods, systems and apparatuses for simultaneous eye characteristic tracking and eye model updating

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination