CN109725717A - 应用于ar设备的图像处理方法及ar设备 - Google Patents

应用于ar设备的图像处理方法及ar设备 Download PDF

Info

Publication number
CN109725717A
CN109725717A CN201811458728.3A CN201811458728A CN109725717A CN 109725717 A CN109725717 A CN 109725717A CN 201811458728 A CN201811458728 A CN 201811458728A CN 109725717 A CN109725717 A CN 109725717A
Authority
CN
China
Prior art keywords
equipment
user
image
actual environment
scaling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811458728.3A
Other languages
English (en)
Inventor
徐瑞林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Idealsee Technology Co Ltd
Original Assignee
Chengdu Idealsee Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Idealsee Technology Co Ltd filed Critical Chengdu Idealsee Technology Co Ltd
Priority to CN201811458728.3A priority Critical patent/CN109725717A/zh
Publication of CN109725717A publication Critical patent/CN109725717A/zh
Pending legal-status Critical Current

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了应用于AR设备的图像处理方法及AR设备。AR设备可获取相应的现实环境图像,同时接收用户发出的图像缩放调节操作,AR设备便可根据用户的发出的图像缩放调节操作,对获取的现实环境图像进行缩放调节,并以虚拟图像的方式展示给用户,由此,用户便可看清远处的现实事物或相应的细节。采用AR设备的方式可让用户避免长时间持握手机等移动终端,交互方式更为轻松便捷。

Description

应用于AR设备的图像处理方法及AR设备
技术领域
本申请涉及扫描显示技术领域,具体涉及应用于增强现实(Augmented Reality,AR)设备的图像处理方法及AR设备。
背景技术
在日常生活中,人们经常遇到需要看清楚远处事物细节的场景,例如,在现场观看比赛时想看清某个运动员的动作,又例如,在剧场看演出时想看清楚某个演员的面貌等。由于人眼的生理结构限制,对于距离较远的事物难以看清细节。
虽然目前诸如手机等移动终端能够对拍摄对象进行图像放大,使用户看清远处事物的细节,但需要用户长时间持握手机对准拍摄对象,该方式较为不便。
发明内容
本申请的目的在于提供一种应用于AR设备的图像处理方法及AR设备,用来解决用户观看现实环境中事物的问题。
本申请实施例提供一种应用于AR设备的图像处理方法,包括:
AR设备在用户所处的现实环境中获取现实环境图像;
接收用户发出的图像缩放调节操作;
根据所述图像缩放调节操作,对获取的所述现实环境图像进行缩放调节,并通过所述AR设备以虚拟图像的方式在指定的显示区域中显示调节后的现实环境图像。
进一步地,所述AR设备具有拍摄功能;AR设备在用户所处的现实环境中获取现实环境图像,包括:
所述AR设备在用户所处的现实环境中进行拍摄,获得所述现实环境图像。
进一步地,在所述用户所处的现实环境中设置有拍摄设备;AR设备在用户所处的现实环境中获取现实环境图像,包括:
所述AR设备通过与所述拍摄设备之间建立的通信连接,获取由所述拍摄设备拍摄的现实环境图像。
进一步地,所述拍摄设备包括:无人机、车载摄像头、设置于会场中的高清摄像机中的至少一种。
进一步地,AR设备在用户所处的现实环境中获取现实环境图像,包括:
第一用户所使用的AR设备获取由第二用户所使用的AR设备拍摄的现实环境图像;
其中,所述第一用户和第二用户处于同一现实环境中。
进一步地,所述AR设备向所述用户显示可视化的缩放中心,且所述缩放中心的位置可调节;
其中,所述可视化的缩放中心包括:可视化的定位锚点、取景框中的至少一种。
进一步地,所述AR设备上设有操控部件;接收用户发出的图像缩放调节操作,包括:
接收所述用户通过操作设于所述AR设备上的操控部件发出的对所述缩放中心的位置调节操作,并接收所述用户通过操作所述操控部件发出的对所述缩放中心当前位置下的图像缩放调节操作;
其中,设于所述AR设备上的操控部件包括:设于所述AR设备上的滚轮、多向按键、触摸板中的至少一种。
进一步地,接收用户发出的图像缩放调节操作,包括:
接收所述用户通过与所述AR设备无线/有线连接的佩戴式操控部件发出的对所述缩放中心的位置调节操作,并接收所述用户通过操作所述操控部件发出的对所述缩放中心当前位置下的图像缩放调节操作;
其中,所述佩戴式操控部件包括:手柄、指环、手环、手套、挂脖附件中的至少一种。
进一步地,所述图像缩放操作包括:针对所述操控部件发出单指或多指的按压操作、滑动操作、点击操作、手势操作或者语音指令中的至少一种。
进一步地,所述显示区域的尺寸小于用户佩戴所述AR设备时的视野范围;
所述显示区域的显示尺寸和/或显示位置可调。
本申请实施例还提供一种AR设备,所述AR设备被配置执行:
在用户所处的现实环境中获取现实环境图像;
接收用户发出的图像缩放调节操作;
根据所述图像缩放调节操作,对获取的所述现实环境图像进行缩放调节,并通过所述AR设备以虚拟图像的方式在指定的显示区域中显示调节后的现实环境图像。
采用本申请实施例中的技术方案可以实现以下技术效果:
当用户需要观看/查看现实环境中的事物但仅凭人眼难以看清时,便可佩戴使用本申请实施例中的AR设备,AR设备可获取相应的现实环境图像,同时接收用户发出的图像缩放调节操作,AR设备便可根据用户的发出的图像缩放调节操作,对获取的现实环境图像进行缩放调节,并以AR图像的方式展示给用户,由此,用户便可看清远处的现实事物或相应的细节。采用AR设备的方式可让用户避免长时间持握手机等移动终端,交互方式更为轻松便捷。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1是本申请实施例提供的一种AR设备的模块结构示意图;
图2是本申请实施例提供的一种AR眼镜的示意图;
图3是本申请实施例提供的人眼所看到的AR图像所在像面的示意图;
图4a是本申请实施例提供的一种操控部件的结构的示意图;
图4b是本申请实施例提供的另一种操控部件的结构示意图;
图5是本申请实施例提供的应用于AR设备上的图像处理方法的流程图;
图6a是本申请实施例提供的缩放中心的示意图;
图6b是本申请实施例提供的进行放大调节后的现实环境图像的显示效果示意图;
图7是本申请实施例提供的一种场景下AR设备获取现实环境图像的示意图;
图8是本申请实施例提供的另一种场景下AR设备获取现实环境图像的示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
在本申请实施例中,可采用AR设备实现对现实环境图像进行缩放显示,以便于用户观看到事物细节。容易理解,所述的现实环境图像,可认为是针对现实世界中的事物经相应的图像采集处理过程所得到的图像,诸如:拍摄得到的现场画面、实况影像、实物照片等。
本申请实施例提供一种AR设备,以实现本申请的目的。参考图1,为本申请中AR设备的模块化结构示意图,其中,AR设备可包括:佩戴部件101、光学模组102、显示处理单元103、图像获取单元104,操控部件105。图1中各模块间可能具有连接关系,也可能不具有连接关系,具体将视实际应用的需要而定。这里所述的连接关系可包括诸如有线连接、无线连接、封装固定等等,至于采用何种连接关系并不应理解为对本申请的限定。
为了避免用户长时间持握手机等移动终端拍摄现实环境图像并进行缩放控制,本申请实施例中,AR设备可以是具有AR功能的头戴式显示器(Head Mount Display,HMD),参考图2,具体可以是AR眼镜。在图2所示的情况下,佩戴部件101便于使用者佩戴AR设备,具体可包括镜架、镜框、鼻托等进行佩戴所需的物理结构部件,用于将AR设备佩戴于使用者头部。在某些实施例中,AR眼镜还可能包括用于提供电能、图像信号的挂脖附件(在图2中并未示出),也应理解为涵盖在本申请实施例所述的佩戴部件101之内。
光学模组102可包括显示AR图像所需的光源(如:激光器或发光二极管)、空间光调制器(如:光纤扫描器、数字光处理器(Digital Light Processer,DLP)、LCD、OLED或者硅基液晶(Liquid Crystal On Silicon,LCOS)等)、光学镜组、波导等光学元件,用于生成并显示AR图像,一般性地,光学模组102中的部分或全部的光学元件采用封装的方式设置于佩戴部件101中,具体将根据实际应用为准。
这里需要说明的是,由光学模组102所显示的AR图像作用在人眼后,人眼所能看到的AR图像并非聚焦于镜片200上,实际上,如图3所示,人眼观看到的AR图像可能是聚焦于镜片200之外的虚像100,一般来说,虚像100位于AR设备和真实事物之间或位于真实事物上,具体可通过景深调节实现,AR图像的大小视实际应用的需要而定,也可由用户自定义,这里便不过多赘述。
显示处理单元103可认为是显示AR图像所需的图像处理器,同样可设置于佩戴部件101中。一方面,显示处理单元103可接收图像获取单元104所获得的现实环境图像,并接收操控部件105发送的图像调节信号,从而生成相应的待显示AR图像;另一方面,显示处理单元103可基于待显示AR图像控制光学模组102生成并输出相应的AR图像光束。
图像获取单元104可以为摄像头,在此方式下,图像获取单元104可以设置于佩戴部件101外表面上,用于采集现实环境的图像,一般性地,摄像头镜头的朝向与使用者眼部朝向相同,从而便可拍摄人眼所观看到的现实环境图像。
在本申请的另一种实施例中,图像获取单元104自身并不进行图像采集,而是获取相关联的拍摄设备发送的现实环境图像,在此实施例中,图像获取单元104可以不是摄像头,而是具有数据接收功能的元件。具体地,图像获取单元104可采用无线保真网络(Wireless-Fidelity,Wi-Fi)、蓝牙、近场通信(Near Field Communication,NFC)等连接方式与相应的拍摄设备建立通信连接,并获取现实环境图像。
操控部件105可根据用户的操作生成相应的图像调节信号,并发送至显示处理单元103中,以针对现实环境图像进行缩放显示,应理解,操控部件105可由用户进行操控。
在本申请的一种实施例中,操控部件105可设置于佩戴部件101上,具体可参考图4a,操控部件105采用双向按键的结构设置于镜架外侧,分别提供图像的放大及缩小功能,应理解,图4a中的操控部件105仅是一种可能采用的结构,在实际应用中,还可能采用诸如四向按键、触摸条、滚轮等结构,具体视实际应用需要而定,这里并不进行限制。
在本申请的另一种实施例中,具体可参考图4b,操控部件105可作为独立的穿戴装置(如:手柄、感应指环、感应手环、感应手套、挂脖附件等)由使用者穿戴,图4b中示出了操控部件105为感应指环的情况,此实施例中,操控部件105可设置按键、触摸条、滚轮等操控结构,以便使用者进行操控。当然,为了支持手势操作,当操控部件105为指环时,可以采用两个或多个指环同时佩戴于用户的两根或多跟手指(同一只手)的方式(在图4b中并未示出多个指环的情况),对于用户所发出的具体手势这里便不再过多赘述。应理解,当操控部件105为手柄、感应手环、感应手套或挂脖附件等情况时,同样可设置相应的按键、触摸条/板/部、滚轮等操控结构,这里不进行过多赘述。
在本申请的还一种实施例中,操控部件105采用非接触式的操控机制,具体地,作为本实施例的一种方式,操控部件105可接收并识别使用者发出的语音指令(如:使用者说出“放大”、“缩小”等语音指令)从而生成相应的图像调节信号,此方式下,操控部件105可包括麦克风和相应的语音识别单元;作为本实施例的另一种方式,操控部件105可监测用户的手势(不同于前述实施例,此时用户的手部无需佩戴任何操控装置)生成相应的图像调节信号,此方式下,操控部件105可包括专用于拍摄用户手势的摄像头和相应的手势识别单元。
基于上述内容,在用户观看远处事物或事物细节的场景下,本申请实施例中的AR设备可通过自身的镜头或从拍摄设备中获取现实环境图像,并受使用者控制,可对获取到的现实环境图像进行缩放,经过缩放的现实环境图像将显示在AR设备上,从而解决了用户看不清远处事物或看不清事物细节的问题,同时,本申请实施例中的AR设备可采用AR眼镜,使用者佩戴AR眼镜后无需进行手持,便于用户使用。
针对前述的AR设备,在本申请实施例中提供一种AR场景下的交互方法,如图5所示,所述方法具体包括以下步骤:
步骤S501:AR设备在用户所处的现实环境中获取现实环境图像。
实际应用中,用户可能想要看清现实环境中事物的细节,一些情况下,用户所要查看的事物距离较远,如在演唱会、赛事现场、大型会场等现实环境中,用户距离舞台/赛场/嘉宾席位的距离较远,导致用户难以看清相应的细节;另一些情况下,用户所要查看的事物较为微小,如植物叶片/商品包装上的小号字体等,同样导致用户难以看清相应的细节。
使用本申请实施例中前述的AR设备,可对现实事物的图像进行缩放调节显示,对于本步骤而言,当用户佩戴AR设备时,便可由AR设备获取用户所处现实环境中相应的现实环境图像,值得注意的是,AR设备所获取的现实环境图像应是用户所处的现实环境中现实事物所对应的图像,当然,用户所处的现实环境通常有一定的范围,例如:用户观看演唱会,则用户所处的现实环境可认为是演唱会会场;又例如:用户在赛事现场观看比赛,则用户所处的现实环境则可认为是包含赛场及观众席的显示现场。具体还要根据实际应用时的情况而定,这里并不具体限定。
步骤S503:接收用户发出的缩放调节操作。
在实际应用中,用户可通过前述AR设备中的操控部件105发出相应的缩放调节操作,以实现对现实环境图像的缩放显示。用户发出的图像调节操作可包括但不限于:单指或多指的按压操作、滑动操作、点击操作、手势操作或者语音指令中的至少一种。
步骤S505:根据所述图像缩放调节操作,对获取的所述现实环境图像进行缩放调节,并通过所述AR设备以虚拟图像的方式在指定的显示区域中显示调节后的现实环境图像。
用户针对操控部件105发出图像调节操作后,操控部件105可进一步生成相应的调节信号发送至显示处理单元103,从而实现对现实环境图像进行缩放调节,进一步,便可通过AR设备将经过缩放调节后的图像进行显示。当然,考虑到AR设备在进行图像显示的过程中,需要实时保证外界的自然光线进入人眼,所以,经过缩放调节后的图像并不应干扰人眼对现实环境的观看,故在本申请实施例中可在指定的显示区域中显示经过调节后的图像。由此,用户便可较为清晰地观看/查看到现实事物的细节。
通过上述方法,当用户需要观看/查看现实环境中的事物但仅凭人眼难以看清时,便可佩戴使用本申请实施例中的AR设备,AR设备可获取相应的现实环境图像,同时接收用户发出的图像缩放调节操作,AR设备便可根据用户的发出的图像缩放调节操作,对获取的现实环境图像进行缩放调节,并以虚拟图像的方式展示给用户,由此,用户便可看清远处的现实事物或相应的细节。采用AR设备的方式可让用户避免长时间持握手机等移动终端,交互方式更为轻松便捷。
需要说明的是,对于前述的交互方法而言,其执行主体可认为是本申请实施例中的AR设备,当然,具体的各步骤可由AR设备中相应的部件/单元执行,具体可参考前述内容。
当然,在实际执行前述步骤S501时,具体的获取方式将根据前述AR设备中图像获取单元104的功能所决定。换言之,如果图像获取单元104自身具有图像拍摄功能,则获取现实环境图像具体为:对现实环境进行拍摄,得到现实环境图像;而如果图像获取单元104并不进行拍摄仅是进行数据获取,则获取现实环境图像具体为:获取关联设备传输的现实环境图像数据。
相类似地,如前述内容所记载,操控部件105可采用不同的形式,既可以设置于AR设备的佩戴部件101上,也可作为独立的穿戴装置,故对于本步骤而言,用户发出的图像调节操作的类型与操控部件105的具体形式相关。
例如:当操控部件105为佩戴在用户手指上的感应指环时,用户便可发出相应的手势完成图像缩放调节操作,具体地,用户逐渐将两个指头分开,则表示需要放大该目标画面,分开的程度对应画面放大的倍数,用户逐渐合并两个指头,则表示需要缩小该目标画面,合并的程度对应画面缩小的倍数。
又例如:当操控部件105为设置于佩戴部件101上或者设置于感应手环上的触控结构时,用户双击操控部件105,则表示对画面进行放大,用户再次双击操控部件105,则表示将画面缩小为未放大之前的比例。
当然,上述两个示例仅两种可能的操作类型,具体还需视实际应用的情况而定。
操控部件105可根据用户的操作生成相应的调节信号,进一步实现对现实环境图像的缩放调节。
这里需要说明的是,在对现实环境图像进行缩放的过程中,作为一种可行的方式,AR设备可将人眼瞳孔所聚焦的位置作为缩放中心进行缩放,如果用户想要针对图像中的某一位置进行缩放显示,则可转动眼部,以将瞳孔朝向所需缩放显示的位置,则AR设备便以该位置作为缩放中心进行缩放显示。当然,在此方式下AR设备需要具备眼动追踪功能,具体追踪处理过程这里不过多赘述。
作为另一种可行的方式,现实环境图像的缩放中心可通过操控部件105进行调节,具体地,缩放中心采用可视化的方式展示给用户,其展示的具体形式可以是定位锚点、取景窗口等,参考图6a,用户透过AR眼镜镜片观察实际环境,在用户的视野中,以AR图像的方式显示定位锚点300,该定位锚点300就是缩放中心,也即,可以对定位锚点300中的图像进行缩放。用户可通过操控部件105,调节缩放中心的位置,当缩放中心移至用户想要的位置,用户可进一步通过操控部件105进行缩放控制。例如,在图6a所示的示例中,用户可通过操控部件105控制定位锚点300移动至任一位置,进一步通过操控部件105对定位锚点300所框选的图像进行缩放显示。
在本申请实施例中,经过缩放后的现实环境图像的呈现方式,可以是采用AR图像全屏呈现(既可以进行双眼显示,也可以进行单眼显示),还可如图6b所示,经过缩放后的现实环境图像以虚拟图像的方式显示在指定的显示区域A1中。当然,该显示区域A1的显示位置和/或显示尺寸可采用默认设置,也可以由用户自行调节。
上述的交互方法可以应用在不同的场景中,现结合不同的场景进行说明。
场景一
在该场景下,用户使用具备图像拍摄功能的AR设备(也即,AR设备上的图像获取单元104为摄像头)观看/查看远处事物或事物细节,AR设备可通过其中的图像获取单元104实时拍摄现实环境得到现实环境图像,进一步地,用户可通过操控部件105发出针对现实环境图像的缩放调节操作,也即,用户可通过操控部件105调节缩放中心(如图6a所示的定位锚点300)的位置,以便确定需要进行缩放的对象/位置,进一步可再通过操控部件105进行缩放调节,使得用户可清楚地观看/查看远处事物或事物细节。具体操控方式可参考前述内容,这里便不再过多赘述。
场景二
在诸如演唱会、体育赛事现场、大型会议等场合,可设置相应的高清摄像设备。参考图7,该场景下,现场设置的高清摄像设备700可通过Wi-Fi等无线局域网络向佩戴前述AR设备的各用户传输实时拍摄的现场画面,那么,对于任一AR设备而言,便可获取现场高清摄像设备700拍摄的现场画面,并将获取到的现场画面以虚拟图像的方式显示于指定的显示区域中。容易理解,用户未进行缩放调节时,由AR设备显示的AR图像的缩放比例,与高清摄像设备700所拍摄到的现场画面的显示比例一致。用户可进一步针对显示于显示区域中的虚拟图像进行缩放调节,以观看画面细节,具体进行操控的过程以及缩放后的画面呈现方式可参考前述内容,这里便不再过多赘述。
场景三
在该场景中,不同用户之间可分享彼此AR设备中所显示的AR图像。如图8所示,在同一场合(如前述的演唱会会场、体育赛事现场等)中,距离舞台/赛场等区域较近的用户(这里称为第一用户),使用具备图像拍摄功能的AR设备D1拍摄现场画面,并通过网络传输的方式将拍摄到的现场画面发送给其他用户(这里称为第二用户)所使用的AR设备D2、D3,当然,AR设备D2和D3可以不具备图像拍摄功能。显然,在此场景下,可让距离前述区域较远但使用AR设备D2、D3的第二用户观看到相应的现场画面,并且,使用AR设备D2、D3的第二用户可进一步针对所显示的现场画面进行缩放调节。容易理解,第一用户使用的AR设备D1所拍摄的现场画面将以默认的显示比例传输给第二用户所使用的AR设备D2和D3,在第二用户未进行缩放调节时,AR设备D2和D3的指定显示区域所显示的现场画面的缩放比例,与AR设备D1所拍摄到的现场画面的显示比例一致。
场景四
在该场景中,用户通过所佩戴的AR设备,可接收由无人机或车载摄像头所传输的现实环境图像。具体地,以AR设备接收车载摄像头的情况为例,当车辆上承载多名乘客时,佩戴了AR设备的乘客便可通过车内网络接收车载摄像头拍摄的实时行车画面(也即,现实环境图像),特别对于坐在后排或坐在的乘客而言,由于前排座位的遮挡,后排乘客朝向行驶方向的视野受限,从而,后排乘客不仅可通过AR设备观看到汽车的实时行车画面,还可针对实时行车画面进行放大,以观察路况细节。同理,对于AR设备接收无人机所传输的现实环境图像与前述内容相类似,故不再赘述。
应理解,该场景四中的方式可适用于警务人员出警的情况,有利于警务人员实时查看现场环境或目标。
对于前述的不同场景而言,用户还可使用AR设备对经过缩放调节后的图像进行存储,既可存储为视频格式的文件,也可进行截屏操作形成截图保存。
本申请中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、设备和介质类实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可,这里就不再一一赘述。
至此,已经对本主题的特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作可以按照不同的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序,以实现期望的结果。在某些实施方式中,多任务处理和并行处理可以是有利的。
在本公开的各种实施方式中所使用的表述“第一”、“第二”、“所述第一”或“所述第二”可修饰各种部件而与顺序和/或重要性无关,但是这些表述不限制相应部件。以上表述仅配置为将元件与其它元件区分开的目的。例如,第一用户设备和第二用户设备表示不同的用户设备,虽然两者均是用户设备。例如,在不背离本公开的范围的前提下,第一元件可称作第二元件,类似地,第二元件可称作第一元件。
当一个元件(例如,第一元件)称为与另一元件(例如,第二元件)“(可操作地或可通信地)联接”或“(可操作地或可通信地)联接至”另一元件(例如,第二元件)或“连接至”另一元件(例如,第二元件)时,应理解为该一个元件直接连接至该另一元件或者该一个元件经由又一个元件(例如,第三元件)间接连接至该另一个元件。相反,可理解,当元件(例如,第一元件)称为“直接连接”或“直接联接”至另一元件(第二元件)时,则没有元件(例如,第三元件)插入在这两者之间。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (11)

1.一种应用于AR设备的图像处理方法,其特征在于,所述方法包括:
AR设备在用户所处的现实环境中获取现实环境图像;
接收用户发出的图像缩放调节操作;
根据所述图像缩放调节操作,对获取的所述现实环境图像进行缩放调节,并通过所述AR设备以虚拟图像的方式在指定的显示区域中显示调节后的现实环境图像。
2.如权利要求1所述的方法,其特征在于,所述AR设备具有拍摄功能;AR设备在用户所处的现实环境中获取现实环境图像,包括:
所述AR设备在用户所处的现实环境中进行拍摄,获得所述现实环境图像。
3.如权利要求1所述的方法,其特征在于,在所述用户所处的现实环境中设置有拍摄设备;AR设备在用户所处的现实环境中获取现实环境图像,包括:
所述AR设备通过与所述拍摄设备之间建立的通信连接,获取由所述拍摄设备拍摄的现实环境图像。
4.如权利要求3所述的方法,其特征在于,所述拍摄设备包括:无人机、车载摄像头、设置于会场中的高清摄像机中的至少一种。
5.如权利要求1所述的方法,其特征在于,AR设备在用户所处的现实环境中获取现实环境图像,包括:
第一用户所使用的AR设备获取由第二用户所使用的AR设备拍摄的现实环境图像;其中,所述第一用户和第二用户处于同一现实环境中。
6.如权利要求1所述的方法,其特征在于,所述AR设备向所述用户显示可视化的缩放中心,且所述缩放中心的位置可调节;
其中,所述可视化的缩放中心包括:可视化的定位锚点、取景框中的至少一种。
7.如权利要求6所述的方法,其特征在于,所述AR设备上设有操控部件;接收用户发出的图像缩放调节操作,包括:
接收所述用户通过操作设于所述AR设备上的操控部件发出的对所述缩放中心的位置调节操作,并接收所述用户通过操作所述操控部件发出的对所述缩放中心当前位置下的图像缩放调节操作;
其中,设于所述AR设备上的操控部件包括:设于所述AR设备上的滚轮、多向按键、触摸板中的至少一种。
8.如权利要求6所述的方法,其特征在于,接收用户发出的图像缩放调节操作,包括:
接收所述用户通过与所述AR设备无线/有线连接的佩戴式操控部件发出的对所述缩放中心的位置调节操作,并接收所述用户通过操作所述操控部件发出的对所述缩放中心当前位置下的图像缩放调节操作;
其中,所述佩戴式操控部件包括:手柄、指环、手环、手套、挂脖附件中的至少一种。
9.如权利要求7或8中所述的方法,其特征在于,所述图像缩放操作包括:针对所述操控部件发出单指或多指的按压操作、滑动操作、点击操作、手势操作或者语音指令中的至少一种。
10.如权利要求1所述的方法,其特征在于,所述显示区域的尺寸小于用户佩戴所述AR设备时的视野范围;
所述显示区域的显示尺寸和/或显示位置可调。
11.一种AR设备,其特征在于,所述AR设备被配置执行:
在用户所处的现实环境中获取现实环境图像;
接收用户发出的图像缩放调节操作;
根据所述图像缩放调节操作,对获取的所述现实环境图像进行缩放调节,并通过所述AR设备以虚拟图像的方式在指定的显示区域中显示调节后的现实环境图像。
CN201811458728.3A 2018-11-30 2018-11-30 应用于ar设备的图像处理方法及ar设备 Pending CN109725717A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811458728.3A CN109725717A (zh) 2018-11-30 2018-11-30 应用于ar设备的图像处理方法及ar设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811458728.3A CN109725717A (zh) 2018-11-30 2018-11-30 应用于ar设备的图像处理方法及ar设备

Publications (1)

Publication Number Publication Date
CN109725717A true CN109725717A (zh) 2019-05-07

Family

ID=66295540

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811458728.3A Pending CN109725717A (zh) 2018-11-30 2018-11-30 应用于ar设备的图像处理方法及ar设备

Country Status (1)

Country Link
CN (1) CN109725717A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111061372A (zh) * 2019-12-18 2020-04-24 Oppo广东移动通信有限公司 设备控制方法及相关设备
WO2021057420A1 (zh) * 2019-09-25 2021-04-01 华为技术有限公司 控制界面显示的方法及头戴式显示器
CN113313346A (zh) * 2021-04-19 2021-08-27 贵州电网有限责任公司 一种基于ar眼镜的人工智能调度操作的可视化实现方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2302322A2 (en) * 2009-09-24 2011-03-30 Samsung Electronics Co., Ltd. Method and apparatus for providing location-based services using a sensor and image recognition in a portable terminal
CN104063039A (zh) * 2013-03-18 2014-09-24 朱慧灵 一种穿戴式计算机智能终端的人机交互方法
CN104079748A (zh) * 2013-03-29 2014-10-01 柯尼卡美能达株式会社 作业信息显示装置
CN104714302A (zh) * 2013-12-17 2015-06-17 精工爱普生株式会社 头部佩戴型显示装置
CN104834091A (zh) * 2014-02-11 2015-08-12 绿色光学株式会社 手术用头戴式显示器
CN105843390A (zh) * 2016-02-24 2016-08-10 上海理湃光晶技术有限公司 一种图像缩放的方法与基于该方法的ar眼镜
CN105979035A (zh) * 2016-06-28 2016-09-28 广东欧珀移动通信有限公司 一种增强现实ar图像处理方法、装置及智能终端
CN108519676A (zh) * 2018-04-09 2018-09-11 杭州瑞杰珑科技有限公司 一种头戴式助视装置
WO2018165041A1 (en) * 2017-03-06 2018-09-13 Universal City Studios Llc Mixed reality viewer system and method

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2302322A2 (en) * 2009-09-24 2011-03-30 Samsung Electronics Co., Ltd. Method and apparatus for providing location-based services using a sensor and image recognition in a portable terminal
CN104063039A (zh) * 2013-03-18 2014-09-24 朱慧灵 一种穿戴式计算机智能终端的人机交互方法
CN104079748A (zh) * 2013-03-29 2014-10-01 柯尼卡美能达株式会社 作业信息显示装置
CN104714302A (zh) * 2013-12-17 2015-06-17 精工爱普生株式会社 头部佩戴型显示装置
CN104834091A (zh) * 2014-02-11 2015-08-12 绿色光学株式会社 手术用头戴式显示器
CN105843390A (zh) * 2016-02-24 2016-08-10 上海理湃光晶技术有限公司 一种图像缩放的方法与基于该方法的ar眼镜
CN105979035A (zh) * 2016-06-28 2016-09-28 广东欧珀移动通信有限公司 一种增强现实ar图像处理方法、装置及智能终端
WO2018165041A1 (en) * 2017-03-06 2018-09-13 Universal City Studios Llc Mixed reality viewer system and method
CN108519676A (zh) * 2018-04-09 2018-09-11 杭州瑞杰珑科技有限公司 一种头戴式助视装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021057420A1 (zh) * 2019-09-25 2021-04-01 华为技术有限公司 控制界面显示的方法及头戴式显示器
CN111061372A (zh) * 2019-12-18 2020-04-24 Oppo广东移动通信有限公司 设备控制方法及相关设备
CN113313346A (zh) * 2021-04-19 2021-08-27 贵州电网有限责任公司 一种基于ar眼镜的人工智能调度操作的可视化实现方法

Similar Documents

Publication Publication Date Title
JP6693060B2 (ja) 表示システム、表示装置、表示装置の制御方法、及び、プログラム
US10666856B1 (en) Gaze-directed photography via augmented reality feedback
CN105589199B (zh) 显示装置、显示装置的控制方法以及程序
US11320655B2 (en) Graphic interface for real-time vision enhancement
US9245389B2 (en) Information processing apparatus and recording medium
US10146057B2 (en) Display control device, display control method, and computer program
US9143693B1 (en) Systems and methods for push-button slow motion
US11546527B2 (en) Methods and apparatuses for compensating for retinitis pigmentosa
CN109725717A (zh) 应用于ar设备的图像处理方法及ar设备
CN113709410A (zh) 基于mr眼镜的人眼视觉能力增强的方法、系统及设备
US8823740B1 (en) Display system
KR20130034125A (ko) 증강현실 기능을 구비한 안경형 모니터
KR20160125674A (ko) 이동 단말기 및 그 제어 방법
JP2016224086A (ja) 表示装置、表示装置の制御方法、及び、プログラム
JP2018182570A (ja) 視線情報共有方法および視線情報共有システム
CN109587471A (zh) 图像显示系统、图像显示方法及图像显示程序
JP6135162B2 (ja) 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、画像表示システム
JP2016161611A (ja) 表示システム、及び表示制御方法
CN209044219U (zh) 一种基于眼球追踪技术的放大式眼镜
JP2015087523A (ja) 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、画像表示システム
US11303790B1 (en) Electronic binocular modules adapted for attachment to smartphones and cases therefor
US12088781B2 (en) Hyper-connected and synchronized AR glasses
JP2017062650A (ja) 表示システム、表示装置、情報表示方法、及び、プログラム
JP2016090853A (ja) 表示装置、表示装置の制御方法、及び、プログラム
US11854444B2 (en) Display device and display method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190507

RJ01 Rejection of invention patent application after publication