CN117788758A - 取色方法、装置、电子设备、存储介质及计算机程序产品 - Google Patents
取色方法、装置、电子设备、存储介质及计算机程序产品 Download PDFInfo
- Publication number
- CN117788758A CN117788758A CN202211154142.4A CN202211154142A CN117788758A CN 117788758 A CN117788758 A CN 117788758A CN 202211154142 A CN202211154142 A CN 202211154142A CN 117788758 A CN117788758 A CN 117788758A
- Authority
- CN
- China
- Prior art keywords
- color
- environment
- expression information
- user
- augmented reality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000605 extraction Methods 0.000 title claims abstract description 38
- 238000004590 computer program Methods 0.000 title claims abstract description 21
- 230000003190 augmentative effect Effects 0.000 claims abstract description 92
- 238000000034 method Methods 0.000 claims abstract description 45
- 230000004044 response Effects 0.000 claims abstract description 23
- 238000001914 filtration Methods 0.000 claims description 13
- 239000003086 colorant Substances 0.000 abstract description 6
- 230000006870 function Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 15
- 238000004458 analytical method Methods 0.000 description 12
- 230000007613 environmental effect Effects 0.000 description 12
- 230000004438 eyesight Effects 0.000 description 12
- 230000003287 optical effect Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 230000009471 action Effects 0.000 description 4
- 238000005259 measurement Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 239000003973 paint Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000008713 feedback mechanism Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000016776 visual perception Effects 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本公开涉及一种取色方法、装置、电子设备、存储介质及计算机程序产品,方法包括:利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;响应于用户在扩展现实空间中对取色范围的选择操作,在所述环境图像中确定与所述取色范围对应的目标区域;确定与所述目标区域所呈现颜色对应的颜色表达信息;展示所述颜色表达信息。其可以实现辅助用户从真实环境提取自己喜欢的颜色的目的。
Description
技术领域
本公开涉及扩展现实技术领域,尤其涉及一种取色方法、装置、电子设备、存储介质及计算机程序产品。
背景技术
See-Through,是指在用户佩戴扩展现实设备时,可以通过扩展现实设备直接或间接观察到用户所处真实环境中的事物的功能,通常也称为“透视功能”。See-Through不仅能方便用户在不摘除扩展现实设备的同时,了解自己与扩展现实设备边界的相对位置,更轻松的回到中心原点,又能感知真实环境(如寻找手机、签收快递等)。其可以加大扩展现实设备体验的可持续性。
用户在使用扩展现实设备的See-Through功能时,当从真实环境中看到自己喜欢的颜色时,经常希望将其所看到的真实环境中的颜色进行提取,以应用于其后续对扩展现实设备的使用过程中。但是,目前缺乏能够实现此方面功能的方法。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种取色方法、装置、电子设备、存储介质及计算机程序产品。
第一方面,本公开提供了一种取色方法,包括:
利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;
响应于用户在扩展现实空间中对取色范围的选择操作,在所述环境图像中确定与所述取色范围对应的目标区域;
确定与所述目标区域所呈现颜色对应的颜色表达信息;
展示所述颜色表达信息。
第二方面,本公开还提供了一种取色装置,包括:
第一采集模块,用于利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;
第一确定模块,用于响应于用户在扩展现实空间中对取色范围的选择操作,在所述环境图像中确定与所述取色范围对应的目标区域;
第二确定模块,用于确定与所述目标区域所呈现颜色对应的颜色表达信息;
第一展示模块,用于展示所述颜色表达信息。
第三方面,本公开还提供了一种电子设备,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如上所述的取色方法。
第四方面,本公开还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上所述的取色方法。
第五方面,本公开还提供了一种计算机程序产品,包括计算机程序或指令,所述计算机程序或指令被处理器执行时实现如上所述的取色方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点:
本公开实施例提供的技术方案通过利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;响应于用户在扩展现实空间中对取色范围的选择操作,在环境图像中确定与取色范围对应的目标区域;确定与目标区域所呈现颜色对应的颜色表达信息;展示颜色表达信息。其可以达到辅助用户从真实环境提取自己喜欢的颜色的目的,弥补了此方面的空白。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种扩展现实设备的结构框图;
图2为本公开实施例提供的一种扩展现实设备的应用场景的示意图;
图3为本公开实施例提供的另一种扩展现实设备的示意图;
图4为本公开实施例提供的一种取色方法的流程图;
图5为本公开实施例提供的另一种取色方法的流程图;
图6为本公开实施例中的一种取色装置的结构示意图;
图7为本公开实施例中的一种电子设备的结构示意图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点,下面将对本公开的方案进行进一步描述。需要说明的是,在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本公开,但本公开还可以采用其他不同于在此描述的方式来实施;显然,说明书中的实施例只是本公开的一部分实施例,而不是全部的实施例。
扩展现实设备,是可以实现扩展现实效果的终端,通常可以提供为眼镜、头盔式显示器(Head Mount Display,HMD)、隐形眼镜的形态,以用于实现视觉感知和其他形式的感知,当然扩展现实设备实现的形态不限于此,根据需要可以进一步小型化或大型化。
扩展现实设备可以营造虚拟场景。虚拟场景,是应用程序在电子设备上运行时显示(或提供)的虚拟场景。该虚拟场景可以是对真实世界的仿真环境,也可以是半仿真半虚构的虚拟场景,还可以是纯虚构的虚拟场景。虚拟场景可以是二维虚拟场景、2.5维虚拟场景或者三维虚拟场景中的任意一种,本申请实施例对虚拟场景的维度不加以限定。
图1为本公开实施例提供的一种扩展现实设备的结构框图。参见图1,示例性地,扩展现实设备主要功能模块可以包括但不限于以下的构成:1)检测(模块):使用各种传感器检测用户的操作命令,并作用于虚拟环境,如跟随用户的视线而不断更新在显示屏上显示的影像,实现用户与虚拟场景的交互,例如基于检测到的用户头部的转动方向来不断更新显示内容;2)反馈(模块):接收来自传感器的数据,为用户提供实时反馈;3)传感器:一方面接受来自用户的操作命令,并将其作用于虚拟场景;另一方面将操作后产生的结果以各种反馈的形式提供给用户;4)控制模块:对传感器和各种输入/输出装置进行控制,包括获得用户的数据(如动作、语音)和输出感知数据,如图像、振动、温度和声音等,对用户、虚拟环境和现实世界产生作用;5)建模模块:构造虚拟环境的三维模型,还可以包括三维模型中的声音、触感等各种反馈机制。
在扩展现实场景中,用户对虚拟场景中的对象(即虚拟物体、虚拟控件等)或区域进行选择可以通过控制器实现,该控制器可以为手柄,用户通过对手柄的按键的操作来选择对象或区域。当然,在另外的实施例中,也可以不使用控制器而使用手势或者语音对扩展现实设备中的对象或区域进行选择。
图2为本公开实施例提供的一种扩展现实设备的应用场景的示意图。在图2中,扩展现实设备为头盔式显示器。参见图2,扩展现实设备中设置有姿态检测的传感器(如九轴传感器),用于实时检测扩展现实设备的姿态变化,如果用户佩戴了扩展现实设备,那么当用户头部姿态发生变化时,会将头部的实时姿态传给处理器,以此计算用户的视线在虚拟环境中的注视点,根据注视点计算虚拟环境的三维模型中处于用户注视范围(即虚拟视场)的图像,并在显示屏上显示,使人仿佛在置身于真实环境中观看一样的沉浸式体验。
图3为本公开实施例提供的另一种扩展现实设备的示意图。参见图3,该扩展现实设备1集成有若干图像传感器11(例如深度相机、RGB相机等)。这里,设置图像传感器的目的不仅仅限于提供待显示的图像。图像传感器11采集的图像和集成在扩展现实设备1中的惯性测量单元(IMU)采集的测量数据可通过计算机视觉分析方法转化为辅助扩展现实设备理解环境的数据。还有,扩展现实设备被设计成不仅支持无源计算机视觉分析方法,而且还支持有源计算机视觉分析方法。无源计算机视觉分析方法从环境中捕获图像信息。这些方法可为单视场的(来自单个图像传感器的图像)或体视的(来自两个或两个以上图像传感器的图像)。基于计算机视觉分析方法可以进行包括但不限于特征跟踪、对象识别和深度估计。有源计算机视觉分析方法通过投影对于图像传感器可见但不一定对人视觉系统可见的图案来将信息添加到环境。此类技术包括飞行时间(ToF)相机、激光扫描或结构光,以简化立体匹配问题。有源计算机视觉分析方法用于实现场景深度重构。红外(IR)投影仪被用于将随机IR斑纹图案投影到环境上,从而添加纹理信息,以便在不明确的地方(例如,均匀纹理或表面)更容易地进行立体匹配。在一些实施方案中也可包括ToF相机。对于低光条件或无光条件,有源计算机视觉分析方法用于支持利用IR泛光灯来进行跟踪。
计算机视觉分析方法使用来自传感器的数据来自动跟踪头部位置、用户身体和环境。在实践中,计算机视觉分析方法和图形呈现可主要在外部计算机上完成,当然也可由自身集成的GPU来进行处理,但是扩展现实设备必须最低限度地执行相机图像信号处理(ISP)功能,诸如同步、组合、拜耳解码、对图像失真的校正,以用于进行显示以及呈现图形和相机图像的MR合成。扩展现实设备被设计成包括应用无源或有源立体视觉分析方法以实现位置跟踪、用户身体跟踪和环境跟踪的必要部件。扩展现实设备也可与将视觉信息添加到环境上的一些第三方外部发射器兼容。例如,纹理图案到环境上的任何投影可帮助进行立体匹配。实际的跟踪算法通常涉及立体匹配、IMU数据集成、特征检测/跟踪、对象识别和表面拟合。
扩展现实设备所具有的See-Through功能,具体是指,在用户佩戴扩展现实设备时,可以通过扩展现实设备直接或间接观察到用户所处真实环境中的事物的功能,通常也称为“透视功能”。See-Through功能通常包括两种类型,一种为光学透视,一种为视频透视。光学透视是指用户可以直接透过光学元件(例如全息波导和其他可在现实世界中进行图形叠加的系统)观察真实环境。视频透视是指由扩展现实设备上安装的一个或多个图像传感器首先捕获的真实环境的环境图像,然后将这些图像传感器捕捉的环境图像进行计算机视觉分析,得到左眼图像和右眼图像,并利用扩展现实设备左眼显示屏显示左眼图像,利用扩展现实设备右眼显示屏显示右眼图像,最终使得用户通过观看左右眼显示屏显示的图像,了解其所处的真实环境。
用户在使用扩展现实设备的See-Through功能时,当从真实环境中看到自己喜欢的颜色时,经常希望将其所看到的真实环境中的颜色进行提取,以应用于其后续对扩展现实设备的使用过程中。
有鉴于此,图4为本公开实施例提供的一种取色方法的流程图,本实施例可适用于用户在使用See-Through功能时,希望对环境进行取色的情况,该方法可以由扩展现实设备执行。扩展现实设备包括但不限于虚拟现实设备、增强现实设备、混合现实设备以及增强虚拟设备等。
在本申请中,用户是指扩展现实设备的佩戴者。
如图4所示,该方法具体可以包括:
S110、利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像。
此处,图像传感器包括但不限于RGB摄像头。
S120、响应于用户在扩展现实空间中对取色范围的选择操作,在环境图像中确定与取色范围对应的目标区域。
在See-Through功能下,扩展现实空间中包括与用户所处真实环境对应的事物。具体地,对于光学透视的情况,扩展现实空间包括真实环境空间。若扩展现实空间包括虚拟对象,虚拟对象是叠加在真实环境空间中的。对于视频透视的情况,扩展现实空间不包括真实环境空间,但包括基于真实环境构建的虚拟空间,即扩展现实空间包括对真实环境进行仿真、映射得到的映射空间。若扩展现实空间包括虚拟对象,虚拟对象是叠加在虚拟空间中的。
取色范围具体可以为点或者区域。本申请对取色范围具体指代的范围的尺寸、形状不作限制。并且,取色范围为区域时,取色范围可以是一个区域,也可以是多个不连通的区域。
选择操作是向扩展现实设备传达将其所处真实环境中哪些点、或者哪些区域作为取色范围的操作。用户在扩展现实空间中对取色范围的选择操作,是指用户在佩戴扩展现实设备的情况下,对取色范围的选择操作。对取色范围的选择操作具体包括触摸取色范围的操作、指向取色范围的操作、完成预设手势的操作,绘制图案的操作、说出取色范围名称、或说出取色范围位置的操作等。可选地,用户可以通过控制器、手势或者语音对取色范围进行选择操作。
在扩展现实世界中,用户可以用手指触摸其中意的点或区域,扩展现实设备将被触摸的点或区域的作为取色范围。例如,用户所处真实环境为花园中,用户可以通过扩展现实设备看到整个花园。用户在佩戴扩展现实设备的情况下,可以用手指触摸其喜欢的花朵。扩展现实设备将被触摸的花朵作为取色范围。
用户在佩戴扩展现实设备的情况下,可以用手指绘制一个或多个封闭图形,以将用户中意的区域圈出,扩展现实设备将被圈出的区域作为取色范围。
或者,用户在佩戴扩展现实设备的情况下,可以用手指指向中意的区域,扩展现实设备根据预设算法基于用户手指所指向的方向,确定用户中意的区域,并将所确定的用户中意的区域确定为取色范围,示例性地,用户所处真实环境为房间,房间中包括多面墙壁,用户在佩戴扩展现实设备的情况下,可以用手指指向其中一面墙壁,扩展现实设备将用户所指向的墙壁作为取色范围。
在环境图像中确定与取色范围对应的目标区域的具体实现方法有多种,本申请对此不作限制。示例性地,在环境图像中确定与取色范围对应的目标区域,包括:确定取色范围与用户的第一相对位置关系;确定环境图像中各区域与用户的第二相对位置关系;将第一相对位置关系与各第二相对位置关系进行比对;将与第一相对位置关系一致的第二相对位置关系对应的区域,作为与取色范围对应的目标区域。
其中,确定取色范围与用户的第一相对位置关系,可基于双目测距方法得到,或基于控制器内置传感器(如惯性测量单元等)采集的数据进行处理得到,或者基于红外测距、TOF测距等方法得到。
由于真实环境中不同位置在环境图像中的显示位置不同,因此基于环境图像,可以得到环境图像各区域与用户的第二相对位置关系。这种方式本质是,利用视觉定位技术确定环境图像各区域与用户的第二相对位置关系。
S130、确定与目标区域所呈现颜色对应的颜色表达信息。
颜色表达信息是指能够描述目标区域所呈现的颜色的信息。基于颜色表达信息,可以将目标区域所呈现颜色与其他颜色相区别,或者,将目标区域所呈现的颜色的配色方案与其他配色方案相区别。
可选地,颜色表达信息为颜色名称,或颜色表达信息为颜色表达数值,颜色表达数值具体可以为RGB、HSV、CMYK、CIE或16进制代码等。
如何确定与目标区域所呈现颜色对应的颜色表达信息为本领域的现有技术,此处不再赘述。
S140、展示颜色表达信息。
可选地,利用扩展现实设备显示颜色表达信息。
在实际中,在已知颜色表达信息的情况下,扩展现实设备可以得到与已知颜色表达信息对应的颜色。但是用户并不知道所有颜色与颜色表达信息的对应关系。当用户从真实环境中看到自己喜欢的颜色时,由于不知道与其喜欢的颜色对应的颜色表达信息,也无法基于已知的颜色混合出其喜欢的颜色,也就无法“告知”扩展现实设备自己喜欢哪个颜色,因此无法将其喜欢的颜色应用于其后续对扩展现实设备的使用过程中。
上述技术方案通过利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;响应于用户在扩展现实空间中对取色范围的选择操作,在环境图像中确定与取色范围对应的目标区域;确定与目标区域所呈现颜色对应的颜色表达信息;展示颜色表达信息。其可以辅助用户“告知”扩展显示设备自己喜欢的颜色,实现辅助用户从真实环境提取自己喜欢的颜色的目标,弥补了此方面的空白。
在上述技术方案的基础上,可选地,可以对取色的功能(或称为取色类型)进行进一步划分。如根据最终颜色表达信息的表示方式进行划分,划分为RGB、HSV、CMYK、CIE或16进制代码等。或者,根据取色的计算方式进行划分,划分为单一点取色、指定范围平均值取色以及环境配色方案提取等。其中,单一点取色是指,限定取色范围为一点,将取色范围所呈现颜色以具体的颜色值予以表示,如表示为#FF8C00。指定范围平均值取色是指,限定取色范围为一个区域,对取色范围中各位置的颜色值求平均值,将所得到的平均值作为最终确定的颜色表达信息。环境配色方案是指,限定取色范围为一个区域,对取色范围中的配色方案进行提取。
基于此,可选地,该取色方法还包括:在扩展现实空间,展示至少两个待选择对象,一个待选择对象与一个取色类型对应,不同待选择对象对应不同的取色类型;S130包括:响应于对一待选择对象的选择操作,确定与目标区域所呈现颜色对应的颜色表达信息,颜色表达信息与被选择的待选择对象对应的取色类型一致。在一些实施例中,待选择对象可以被提供为虚拟按键形式(如虚拟控件等),选择框形式(如单选框、复选框或下拉式选择框等)或集成菜单的菜单项形式。这样设置可以进一步丰富取色功能,满足用户多样化的取色需求。
进一步地,取色类型包括下述中的一种或多种:单一点取色、指定范围平均值取色以及环境配色方案提取。
在上述各技术方案的基础上,可选地,对于视频透视的情况,该方法还包括:对环境图像进行去畸变处理以及拼接处理,得到第二图像;利用扩展现实设备的显示屏显示第二图像。这样设置的目的是,用户通过观察第二图像感知真实环境,即直接借助第二图像实现“透视”工作。这种情况下,S110中所采集的环境图像有两个作用,一是实现透视,二是作为取色的基础。
在上述各技术方案的基础上,可选地,该方法还包括:响应于对颜色表达信息的保存指令,保存颜色表达信息;或者,响应于对颜色表达信息的编辑指令,修改颜色表达信息;或者,响应于对颜色表达信息的复制指令,将颜色表达信息复制到剪贴板中。
示例性地,用户所处真实环境中包括点I,点I的颜色为颜色b,用户对点I的颜色进行取色后,得到颜色b的颜色表达信息M,将颜色表达信息M进行保存。后续用户在玩房间装饰类游戏时,可基于该颜色表达信息M,得到颜色b,用户可以使用颜色b粉刷房间装饰游戏中的墙壁。或者,将颜色b与颜色c混合,得到颜色e,用户可以使用颜色e粉刷房间装饰游戏中的墙壁。
图5为本公开实施例提供的另一种取色方法的流程图。图5为图4中的一个具体示例。参见图5,该方法包括:
S210、利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像。
S220、响应于用户在扩展现实空间中对取色范围的选择操作,在环境图像中确定与取色范围对应的目标区域。
S230、对环境图像中目标区域所呈现颜色进行滤波处理,以去除环境光造成的干扰。
受到环境光的影响,真实环境中的物体所呈现的颜色会发生改变,使得物体最终所呈现的颜色与物体原本的颜色不一致。
本步骤的实质是对环境图像进行处理,以去除环境光对环境图像的影响,还原物体原本的颜色。
本步骤的实现方法有多种,本申请对此不做限制。可选地,本步骤的实现方法包括:利用扩展现实设备中的光感传感器采集用户所处环境的环境光信息;基于环境光信息,确定环境光特征信息,环境光特征信息包括下述中的至少一种:环境光的亮度、环境光的色温以及环境光的传播方向;基于环境光特征信息,对环境图像中目标区域所呈现颜色进行滤波处理。其中,光感传感器包括但不限于图像传感器或环境光传感器等。
若光感传感器为图像传感器,在一些实施例中,将S210中提及的图像传感器作为用于采集用户所处环境的环境光信息的图像传感器。图像传感器所采集的用户所处真实环境的环境图像包括光源的图像,基于光源的图像确定环境光特征信息。
基于环境光特征信息,对环境图像中目标区域所呈现颜色进行滤波处理,为现有技术,此处不再赘述。
S240、确定与滤波后目标区域所呈现颜色对应的颜色表达信息。
S250、展示颜色表达信息。
上述技术方案通过对环境图像中目标区域所呈现颜色进行滤波处理,以去除环境光造成的干扰,可以还原目标区域的原本颜色,可以使得后续所得的颜色表达信息与目标区域的原本颜色一致,满足用户多样化的取色需求。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
图6为本公开实施例中的一种取色装置的结构示意图。本公开实施例所提供的取色装置可以配置于扩展现实设备中。参见图6,该取色装置具体包括:
第一采集模块310,用于利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;
第一确定模块320,用于响应于用户在扩展现实空间中对取色范围的选择操作,在所述环境图像中确定与所述取色范围对应的目标区域;
第二确定模块330,用于确定与所述目标区域所呈现颜色对应的颜色表达信息;
第一展示模块340,用于展示所述颜色表达信息。
可选地,该装置还包括第二展示模块,第二展示模块,用于在所述扩展现实空间,展示至少两个待选择对象,一个所述待选择对象与一个取色类型对应,不同所述待选择对象对应不同的所述取色类型;
所述第二确定模块,用于:
响应于对一所述待选择对象的选择操作,确定与所述目标区域所呈现颜色对应的颜色表达信息,所述颜色表达信息与被选择的所述待选择对象对应的取色类型一致。
进一步地,述取色类型包括下述中的一种或多种:单一点取色、指定范围平均值取色以及环境配色方案提取。
进一步地,所述装置还包括滤波模块,滤波模块用于:
对所述环境图像中所述目标区域所呈现颜色进行滤波处理,以去除环境光造成的干扰;
所述第二确定模块,用于:确定与滤波后所述目标区域所呈现颜色对应的颜色表达信息。
进一步地,所述滤波模块用于:
利用扩展现实设备中的光感传感器采集用户所处环境的环境光信息;
基于所述环境光信息,确定环境光特征信息,所述环境光特征信息包括下述中的至少一种:环境光的亮度、环境光的色温以及环境光的传播方向;
基于所述环境光特征信息,对所述环境图像中所述目标区域所呈现颜色进行滤波处理。
进一步地,所述装置还包括第三展示模块,所述第三展示模块用于:
对所述环境图像进行去畸变处理以及拼接处理,得到第二图像;
利用所述扩展现实设备的显示屏显示所述第二图像。
进一步地,所述装置还包括后处理模块,所述后处理模块用于:
响应于对所述颜色表达信息的保存指令,保存所述颜色表达信息;或者,
响应于对所述颜色表达信息的编辑指令,修改所述颜色表达信息;或者,
响应于对所述颜色表达信息的复制指令,将所述颜色表达信息复制到剪贴板中。
本公开实施例提供的取色装置,可执行本公开方法实施例所提供的取色方法中扩展现实设备所执行的步骤,具备执行步骤和有益效果,此处不再赘述。
图7为本公开实施例中的一种电子设备的结构示意图。下面具体参考图7,其示出了适于用来实现本公开实施例中的电子设备1000的结构示意图。本公开实施例中的电子设备1000可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)、可穿戴电子设备等等的移动终端以及诸如数字TV、台式计算机、智能家居设备等等的固定终端。图7示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图7所示,电子设备1000可以包括处理装置(例如中央处理器、图形处理器等)1001,其可以根据存储在只读存储器(ROM)1002中的程序或者从存储装置1008加载到随机访问存储器(RAM)1003中的程序而执行各种适当的动作和处理以实现如本公开所述的实施例的取色方法。在RAM 1003中,还存储有电子设备1000操作所需的各种程序和信息。处理装置1001、ROM 1002以及RAM 1003通过总线1004彼此相连。输入/输出(I/O)接口1005也连接至总线1004。
通常,以下装置可以连接至I/O接口1005:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置1006;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置1007;包括例如磁带、硬盘等的存储装置1008;以及通信装置1009。通信装置1009可以允许电子设备1000与其他设备进行无线或有线通信以交换信息。虽然图7示出了具有各种装置的电子设备1000,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码,从而实现如上所述的取色方法。在这样的实施例中,该计算机程序可以通过通信装置1009从网络上被下载和安装,或者从存储装置1008被安装,或者从ROM 1002被安装。在该计算机程序被处理装置1001执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的信息信号,其中承载了计算机可读的程序代码。这种传播的信息信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字信息通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:
利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;
响应于用户在扩展现实空间中对取色范围的选择操作,在所述环境图像中确定与所述取色范围对应的目标区域;
确定与所述目标区域所呈现颜色对应的颜色表达信息;
展示所述颜色表达信息。
可选的,当上述一个或者多个程序被该电子设备执行时,该电子设备还可以执行上述实施例所述的其他步骤。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的一个或多个实施例,本公开提供了一种电子设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本公开提供的任一所述的取色方法。
根据本公开的一个或多个实施例,本公开提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本公开提供的任一所述的取色方法。
本公开实施例还提供了一种计算机程序产品,该计算机程序产品包括计算机程序或指令,该计算机程序或指令被处理器执行时实现如上所述的取色方法。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本公开的具体实施方式,使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下,在其它实施例中实现。因此,本公开将不会被限制于本文所述的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (11)
1.一种取色方法,其特征在于,包括:
利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;
响应于用户在扩展现实空间中对取色范围的选择操作,在所述环境图像中确定与所述取色范围对应的目标区域;
确定与所述目标区域所呈现颜色对应的颜色表达信息;
展示所述颜色表达信息。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述扩展现实空间,展示至少两个待选择对象,一个所述待选择对象与一个取色类型对应,不同所述待选择对象对应不同的所述取色类型;
所述确定与所述目标区域所呈现颜色对应的颜色表达信息,包括:
响应于对一所述待选择对象的选择操作,确定与所述目标区域所呈现颜色对应的颜色表达信息,所述颜色表达信息与被选择的所述待选择对象对应的取色类型一致。
3.根据权利要求2所述的方法,其特征在于,所述取色类型包括下述中的一种或多种:单一点取色、指定范围平均值取色以及环境配色方案提取。
4.根据权利要求1所述的方法,其特征在于,还包括:
对所述环境图像中所述目标区域所呈现颜色进行滤波处理,以去除环境光造成的干扰;
所述确定与所述目标区域所呈现颜色对应的颜色表达信息,包括:确定与滤波后所述目标区域所呈现颜色对应的颜色表达信息。
5.根据权利要求4所述的方法,其特征在于,所述对所述环境图像中所述目标区域所呈现颜色进行滤波处理,包括:
利用所述扩展现实设备中的光感传感器采集用户所处环境的环境光信息;
基于所述环境光信息,确定环境光特征信息,所述环境光特征信息包括下述中的至少一种:环境光的亮度、环境光的色温以及环境光的传播方向;
基于所述环境光特征信息,对所述环境图像中所述目标区域所呈现颜色进行滤波处理。
6.根据权利要求1所述的方法,其特征在于,还包括:
对所述环境图像进行去畸变处理以及拼接处理,得到第二图像;
利用所述扩展现实设备的显示屏显示所述第二图像。
7.根据权利要求1所述的方法,其特征在于,还包括:
响应于对所述颜色表达信息的保存指令,保存所述颜色表达信息;或者,
响应于对所述颜色表达信息的编辑指令,修改所述颜色表达信息;或者,
响应于对所述颜色表达信息的复制指令,将所述颜色表达信息复制到剪贴板中。
8.一种取色装置,其特征在于,包括:
第一采集模块,用于利用扩展现实设备中的图像传感器采集用户所处真实环境的环境图像;
第一确定模块,用于响应于用户在扩展现实空间中对取色范围的选择操作,在所述环境图像中确定与所述取色范围对应的目标区域;
第二确定模块,用于确定与所述目标区域所呈现颜色对应的颜色表达信息;
第一展示模块,用于展示所述颜色表达信息。
9.一种电子设备,其特征在于,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一项所述的方法。
11.一种计算机程序产品,包括计算机程序或指令,其特征在于,所述计算机程序或指令被处理器执行时实现如权利要求1-7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211154142.4A CN117788758A (zh) | 2022-09-21 | 2022-09-21 | 取色方法、装置、电子设备、存储介质及计算机程序产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211154142.4A CN117788758A (zh) | 2022-09-21 | 2022-09-21 | 取色方法、装置、电子设备、存储介质及计算机程序产品 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117788758A true CN117788758A (zh) | 2024-03-29 |
Family
ID=90378640
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211154142.4A Pending CN117788758A (zh) | 2022-09-21 | 2022-09-21 | 取色方法、装置、电子设备、存储介质及计算机程序产品 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117788758A (zh) |
-
2022
- 2022-09-21 CN CN202211154142.4A patent/CN117788758A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110954083B (zh) | 移动设备的定位 | |
EP3608756A1 (en) | Detection and display of mixed 2d/3d content | |
CN106846497B (zh) | 应用于终端的呈现三维地图的方法和装置 | |
US11563886B2 (en) | Automated eyewear device sharing system | |
US11302086B1 (en) | Providing features of an electronic product in an augmented reality environment | |
KR102499354B1 (ko) | 디스플레이를 통해 표시된 제 1 콘텐트에 대해 제 2 콘텐트를 외부 객체의 움직임에 따라 제공하기 위한 전자 장치 및 그의 동작 방법 | |
EP3286601B1 (en) | A method and apparatus for displaying a virtual object in three-dimensional (3d) space | |
US11308686B1 (en) | Captured image data in a computer-generated reality environment | |
US11709370B2 (en) | Presentation of an enriched view of a physical setting | |
KR102637901B1 (ko) | 전자 장치에 의한 돌리 줌 효과 제공 방법 및 상기 방법에서 사용되는 전자 장치 | |
CN110969658B (zh) | 利用来自多个设备的图像进行定位和标测 | |
KR20240072170A (ko) | 원격 디바이스들과의 사용자 상호작용들 | |
KR20190083464A (ko) | 스크롤 입력에 기반하여 이미지 표시를 제어하는 전자 장치 및 방법 | |
CN116563740A (zh) | 基于扩展现实的控制方法、装置、电子设备和存储介质 | |
CN117788758A (zh) | 取色方法、装置、电子设备、存储介质及计算机程序产品 | |
US11315278B1 (en) | Object detection and orientation estimation | |
US20240078734A1 (en) | Information interaction method and apparatus, electronic device and storage medium | |
CN117834843A (zh) | 记事方法、装置、电子设备、存储介质及计算机程序产品 | |
JP7214926B1 (ja) | 画像処理方法、装置、電子機器及びコンピュータ読み取り可能な記憶媒体 | |
US11361473B1 (en) | Including a physical object based on context | |
WO2024016880A1 (zh) | 信息交互方法、装置、电子设备和存储介质 | |
US20240169673A1 (en) | Mesh transformation with efficient depth reconstruction and filtering in passthrough augmented reality (ar) systems | |
US20230419595A1 (en) | Methods and devices for video rendering for video see-through (vst) augmented reality (ar) | |
CN117289454A (zh) | 虚拟现实设备的显示方法、装置、电子设备以及存储介质 | |
CN117991889A (zh) | 信息交互方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |