CN104062758A - 图像显示的方法和显示设备 - Google Patents

图像显示的方法和显示设备 Download PDF

Info

Publication number
CN104062758A
CN104062758A CN201310088419.2A CN201310088419A CN104062758A CN 104062758 A CN104062758 A CN 104062758A CN 201310088419 A CN201310088419 A CN 201310088419A CN 104062758 A CN104062758 A CN 104062758A
Authority
CN
China
Prior art keywords
image
destination object
user
scene
setting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310088419.2A
Other languages
English (en)
Other versions
CN104062758B (zh
Inventor
侯欣如
彭世峰
杨振奕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201310088419.2A priority Critical patent/CN104062758B/zh
Publication of CN104062758A publication Critical patent/CN104062758A/zh
Application granted granted Critical
Publication of CN104062758B publication Critical patent/CN104062758B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例提供了一种图像显示的方法和显示设备。根据本发明实施例的图像显示的方法,应用于显示设备,其中显示设备包括镜片部件以及与镜片部件对应设置的采集单元和显示单元。所述方法包括:当镜片部件位于用户的可视区域中时,通过采集单元对用户透过镜片部件观看的第一场景进行图像采集,并获得实时采集图像;根据实时采集图像,确定第一场景中是否存在对其进行了图像设置的目标对象;当确定第一场景中存在对其进行了图像设置的目标对象时,根据图像设置,生成关于目标对象的第一图像;以及通过显示单元显示第一图像,使得用户在透过镜片部件观看目标对象的同时通过显示单元观看到叠加在目标对象上的第一图像。

Description

图像显示的方法和显示设备
技术领域
本发明涉及图像显示的方法和相应的显示设备。
背景技术
随着科技的发展,例如笔记本计算机、平板式计算机、智能手机、相机、和便携式多媒体播放器之类的具有显示单元的电子设备被广泛应用。通过这些电子设备用户可以方便地进行浏览网页、观看或编辑图像之类的操作。例如,很多现有的电子设备向用户提供不同的图像处理模式,通过选择特定的图像处理模式,图像经过电子设备图像处理的后,可以怀旧效果、柔光效果等向用户呈现、或者显示用户在图像上添加的例如文字、或图画等。此外,为了改善用户的使用体验,很多社交网站向用户提供个性化服务,使得用户能够为自己或其好友购买虚拟衣服、饰品、宠物等,并且当登录该社交网站时,用户可以看到这些相应的用户图像穿戴虚拟的衣服、饰品,或者携带宠物等的图像。然而,这些编辑和设置都是对图像进行的,而对不是用户通过眼睛观看的真实环境中的对象直接进行的,因此用户常常不能直观地看到其编辑和设置给真实环境中的对象带来的改变。
发明内容
本发明实施例的目的在于提供一种图像显示的方法和显示设备,以解决上述问题。
本发明实施例提供了一种图像显示的方法,应用于显示设备,其中显示设备包括镜片部件以及与镜片部件对应设置的采集单元和显示单元。所述方法包括:当镜片部件位于用户的可视区域中时,通过采集单元对用户透过镜片部件观看的第一场景进行图像采集,并获得实时采集图像;根据实时采集图像,确定第一场景中是否存在对其进行了图像设置的目标对象;当确定第一场景中存在对其进行了图像设置的目标对象时,根据图像设置,生成关于目标对象的第一图像;以及通过显示单元显示第一图像,使得用户在透过镜片部件观看目标对象的同时通过显示单元观看到叠加在目标对象上的第一图像。
本发明另一实施例提供了一种显示设备,包括:镜片部件;采集单元,与镜片部件对应设置,配置来当镜片部件位于用户的可视区域中时,对用户透过镜片部件观看的第一场景进行图像采集,并获得实时采集图像;对象确定单元,配置来根据实时采集图像,确定第一场景中是否存在对其进行了图像设置的目标对象;图像生成单元,配置来当确定第一场景中存在对其进行了图像设置的目标对象时,根据图像设置,生成关于目标对象的第一图像;以及显示单元,与镜片部件对应设置,配置来显示第一图像,使得用户在透过镜片部件观看目标对象的同时通过显示单元观看到叠加在目标对象上的第一图像。
在上述本发明实施例提供的方案中,将真实的环境中的对象与显示设备产生的图像相结合,使得用户能够直观地看到其编辑和设置给真实环境中的对象带来的改变。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例的描述中所需要使用的附图作简单地介绍。下面描述中的附图仅仅是本发明的示例性实施例。
图1是描述了根据本发明实施例的图像显示的方法的流程图。
图2是示出根据本发明实施例的显示设备的示范性结构框图。
图3是示出了图2中所示的显示设备为眼镜式显示设备的一个示例情形的说明图。
图4是示出了根据显示设备中的显示单元的示例性框图。
图5是示出了图4所示的显示单元的一个示意情形的说明图。
图6是在显示设备的显示单元显示第一图像的情况下,用户所看到的内容的一个示例情形的说明图。
具体实施方式
在下文中,将参考附图详细描述本发明的优选实施例。注意,在本说明书和附图中,具有基本上相同步骤和元素用相同的附图标记来表示,且对这些步骤和元素的重复解释将被省略。
在本发明的以下实施例中,显示设备的具体形式包括但不限于智能移动电话、个人计算机、个人数字助手、便携式计算机、平板式计算机、多媒体播放器等。根据本发明的一个示例,显示设备可以是手持电子设备。此外,优选地,根据本发明的另一示例,显示设备可以是头戴电子设备。显示设备可包括镜片部件以及与所述镜片部件对应设置的采集单元和显示单元。
图1是描述了根据本发明实施例的图像显示的方法100的流程图。下面,将参照图1来描述根据本发明实施例的图像显示的方法。图像显示的方法100可用于上述显示设备。
如图1所示,在步骤S101中,当镜片部件位于用户的可视区域中时,通过采集单元对用户透过镜片部件观看的第一场景进行图像采集,并获得实时采集图像。如上所述,在根据本发明的实施例的显示设备中,镜片部件与采集单元对应设置。例如,镜片部件可设置在采集单元的上方或下方。因此,当镜片部件位于用户的可视区域中时,采集单元可沿与用户观看方向类似的方向进行图像采集,从而获得用户透过镜片部件观看的实时采集图像。
在步骤S102中,根据实时采集图像,确定第一场景中是否存在对其进行了图像设置的目标对象。当确定第一场景中存在对其进行了图像设置的目标对象时,在S103中,根据图像设置,生成关于目标对象的第一图像。
根据本发明的一个示例,在步骤S102中,可首先根据实时采集图像,识别第一场景中的至少一个第一对象。具体地,可获得第一场景中的每个第一对象的标识信息,然后通过标识信息识别第一场景中包括的至少一个第一对象。标识信息可以是地理位置信息或者代码信息等。例如,显示设备可包括诸如GPS之类的用于获得显示设备的位置的位置获取单元和诸如陀螺仪之类的用于获得显示设备的朝向的朝向获取单元。可通过显示设备的当前位置和朝向,获得用户当前观看的第一场景以及第一场景中的诸如建筑物之类的第一对象的地理位置信息,并且确定与地理位置信息对应的第一对象。又例如,标识信息可以是预先对每个对象设置的二维码。从而根据所拍摄的实时采集图像中的二维码,可容易地识别第一场景中的第一对象。在识别了第一场景中的至少一个第一对象之后,可接收来自用户的第一图像设置指令,并且根据第一图像设置指令在至少一个第一对象中确定目标对象。当确定实时采集图像中存在对其进行了图像设置的目标对象时,在步骤S103中,可根据第一图像设置指令,生成关于目标对象的第一图像。例如,当识别第一场景中包括多个第一对象,即,建筑物A、建筑物B和建筑物C,并且用户指示显示建筑物B在50年前的样貌时,可根据来自用户的第一图像设置指令,确定建筑物B为目标对象,并且获取建筑物B在50年前的图像(例如通过互联网)作为第一图像。又例如,当识别第一场景中包括多个第一对象,即,建筑物A、建筑物B和建筑物C,并且用户指示显示第一场景在与当前时间段不同的另一时间的样貌时,可根据来自用户的第一图像设置指令,确定建筑物A、建筑物B和建筑物C均为目标对象,并且获取建筑物A、建筑物B和建筑物C在另一时间的图像(例如通过互联网)作为第一图像。
根据本发明的另一示例,显示设备可与特定服务器相连接。在步骤S102中,可首先根据实时采集图像,识别第一场景中的至少一个第一对象。具体地,如上所述,可获得第一场景中的每个第一对象的标识信息,然后通过标识信息识别第一场景中包括的至少一个第一对象。标识信息可以是地理位置信息或者代码信息等。例如,显示设备可包括诸如GPS之类的用于获得显示设备的位置的位置获取单元和诸如陀螺仪之类的用于获得显示设备的朝向的朝向获取单元。可通过显示设备的当前位置和朝向,获得用户当前观看的第一场景以及第一场景中的诸如建筑物之类的第一对象的地理位置信息,并且确定与地理位置信息对应的第一对象。又例如,标识信息可以是预先对每个对象设置的二维码。从而根据所拍摄的实时采集图像中的二维码,可容易地识别第一场景中的第一对象。在识别了第一场景中的至少一个第一对象之后,生成每个第一对象的对象描述信息(例如第一对象的名称和/或标识信息等),并且向服务器发送至少一个第一对象的对象描述信息。然后,从服务器接收在服务器中存储的、至少一个第一对象的对象设置信息,并且根据对象设置信息,将在服务器中存储了对其进行的第二图像设置的第一对象作为目标对象。
根据本发明的一个示例,第二图像设置是由终端设备预先向服务器发送的、对于所有用户公开的图像设置。例如,电子游戏的开发者可预先向游戏服务器发送对于登录该游戏服务器所有用户公开的对于特定地区中景物的图像设置,使得登录该游戏服务器的用户位于该特定地区时,都能够收到服务器发送的、关于其观看的位于该特定地区的第一场景中景物的第二图像设置。此外,根据本发明的另一示例,在步骤S102中,可向服务器发送使用显示设备的用户的用户标识。服务器可根据显示设备发送的用户标识和至少一个第一对象的对象描述信息,确定由终端设备预先向服务器发送的、对于用户标识公开的针对第一对象中的一个或多个的图像设置作为第二图像设置。
例如,社交网络的用户可向服务器发送、对于其某个好友公开的图像设置。比如社交网络的用户在其终端设备上对于某个建筑进行涂鸦设置,将该涂鸦设置发送到社交网络服务器并设定只有好友可见其进行的涂鸦。在此情况下,当服务器根据来自显示设备的至少一个第一对象的对象描述信息确定在第一对象中存在预先对其进行了图像设置的对象,并且服务器进一步确定该图像设置对于来自显示设备的用户标识公开时,向显示设备发送该对象的图像设置作为第二图像设置,使得显示设备根据第二图像设置显示虚拟涂鸦。
又比如社交网络的用户在其终端设备上为其个在社交网络中的好友D购买了虚拟宠物,将该虚拟宠物设置发送到社交网络服务器并设定只有好友E和F可见。在此情况下,当服务器根据来自显示设备的至少一个第一对象的对象描述信息确定在第一对象中存在好友D,并且服务器进一步确定显示设备发送的用户标识为好友E或F的用户标识时,向显示设备发送该对象的图像设置作为第二图像设置,使得显示设备根据第二图像设置显示虚拟宠物。
根据本发明的一个示例,向服务器发送的至少一个第一对象的对象描述信息还可包括指示每个第一对象在第一场景中的位置的信息。服务器可根据第一对象在第一场景中的位置确定所述生成的第一图像,以及所生成的第一图像在显示设备上的显示位置。
例如在如上所述,社交网络的用户在其终端设备上为其个在社交网络中的好友D购买了虚拟宠物的情况下,服务器可根据实时采集图像所指示的好友D在第一场景中的位置确定虚拟宠物的第一图像的生成位置。例如,可生成虚拟宠物的第一图像,使得虚拟宠物的第一图像显示在好友D在第一场景中的位置的预定距离处。
此外,服务器还可根据第一对象在第一场景中的位置确定根据第二图像设置生成的图像在显示设备上显示的大小、角度、以及完整性。例如,在如上所述,社交网络的用户在其终端设备上为其个在社交网络中的好友D购买了虚拟宠物的情况下,当实时采集图像指示好友D靠近用户能观看到的第一场景的第一边缘时可只生成根据第二图像设置的虚拟宠物的图像的一部分的图像,并指示在对应于第一场景的第一边缘的位置,显示虚拟宠物的该部分图像。虽然在以上示例中,以服务器根据第一对象在第一场景中的位置确定根据第二图像设置生成的图像的显示位置、大小、角度、以及完整性为例进行了描述,但是本发明不限于此。根据本发明的另一示例,为了节省数据流量并且减少服务器的操作,可在显示设备上执行根据第一对象在第一场景中的位置确定根据第二图像设置生成的图像的显示位置、大小、角度、以及完整性。当确定实时采集图像中存在对其进行了图像设置的目标对象时,在步骤S103中,可根据第二对象设置信息,生成关于目标对象的第一图像。根据本发明的一个示例,可根据目标对象在第一场景的位置,生成关于目标对象的第一图像。此外,根据本发明的另一示例,第二图像设置可包括第一图像的图像内容信息和第一图像在相对于目标对象的位置信息。当确定实时采集图像中存在对其进行了图像设置的目标对象时,在步骤S103中可根据位置信息确定第一图像的显示位置,并且根据图像内容信息在显示位置上生成关于目标对象的第一图像。例如,当目标对象为五层建筑时,位置信息可指示第一图像应位于目标对象的第四层,图像内容信息可指示第一图像的内容为字母“Lenovo”。从而在步骤S103中,可根据目标对象的第四层的位置,确定第一图像的显示位置,并且在显示位置上生成字母“Lenovo”的图像。
根据本发明的一个示例,在步骤S102中还可向服务器发送指示显示设备的地理位置的设备位置信息。服务器还可根据设备位置信息,确定所述生成的第一图像、所生成的第一图像在显示设备上的显示位置、大小、角度、和/或完整性等。
例如,预先设置了在天安门城墙西侧下方的区域中的涂鸦内容的情况下,服务器可根据显示设备的用户相对于天安门的距离和相对于天安门的角度确定要显示的涂鸦内容的图像。例如,当用户位于天安门的东侧时,服务器不生成显示涂鸦内容的图像;当用户位于天安门的西北侧时,服务器生成显示涂鸦内容的一部分的图像;而当用户位于天安门的西侧时,服务器生成显示完整的涂鸦内容的图像。
此外,根据本发明的另一示例,显示设备还可识别第一对象的空间状态。并且向服务器发送的至少一个第一对象的对象描述信息还可包括指示每个第一对象的空间状态的空间状态信息。服务器可根据第一对象的空间状态生成的第一图像。
例如,在目标对象为特定水杯,并且第二图像设置指示在水杯杯底标记花朵图案的情况下,当实时采集图像指示第一场景中包括该特定水杯时,显示设备还可识别该水杯的哪个表面出现在实时采集图像中,并且向服务器发送的至少一个第一对象的对象描述信息还可包括生成每个第一对象的空间状态信息。服务器可以根据空间状态信息确定水杯朝向显示设备的表面,并根据水杯朝向显示设备的表面生成的第一图像。例如,在状态信息指示水杯的侧面朝向显示设备的情况下,服务器可不生成第一图像;在状态信息指示水杯的底面的一部分朝向显示设备的情况下,服务器可生成包含与该部分对应的花朵图案的部分的第一图像;而在状态信息指示水杯的底面完全朝向显示设备的情况下,服务器可生成包含完整的花朵图案的部分的第一图像。
虽然在以上示例中,以服务器根据第第一对象的空间状态生成的第一图像为例进行了描述,但是本发明不限于此。根据本发明的另一示例,为了节省数据流量并且减少服务器的操作,可在显示设备上执行第一对象的空间状态生成的第一图像。
最后,在步骤S104中,通过显示单元显示第一图像,使得用户在透过镜片部件观看目标对象的同时通过显示单元观看到叠加在目标对象上的第一图像。如上所述,显示单元与镜片部件对应设置。例如,显示单元为透明显示单元,并且镜片部件覆盖在显示单元上。从而用户在透过镜片看到第一场景中的目标对象的同时,可看到显示单元所显示的叠加在该目标对象上的第一图像。
通过上述本实施例提供的图像显示的方法,将真实的环境中的对象与显示设备产生的图像相结合,使得用户能够直观地看到其编辑和设置给真实环境中的对象带来的改变。
下面,参照图2说明本发明的实施例的显示设备。图2是示出根据本发明实施例的显示设备200的示范性结构框图。如图2中所示,本实施例的显示设备200包括镜片部件210、采集单元220、对象确定单元230、图像生成单元240和显示单元250。显示设备200的各个模块执行上述图1中的匹配设备的方法100的各个步骤/功能,因此,为了描述简洁,不再具体描述。
例如,用户可透过镜片部件210观看的第一场景。采集单元220与镜片部件对应设置。例如,镜片部件可设置在采集单元的上方或下方。当镜片部件210位于用户的可视区域中时,采集单元220可采可沿与用户观看方向类似的方向对用户透过镜片部件观看的第一场景进行图像采集,并获得实时采集图像。
对象确定单元230可根据采集单元220采集的实时采集图像,确定第一场景中是否存在对其进行了图像设置的目标对象。当确定第一场景中存在对其进行了图像设置的目标对象时,图像生成单元240根据图像设置,生成关于目标对象的第一图像。
根据本发明的一个示例,对象确定单元230可包括识别模块、接收模块和确定模块。具体地,识别模块可首先根据实时采集图像,识别第一场景中的至少一个第一对象。具体地,可获得第一场景中的每个第一对象的标识信息,然后通过标识信息识别第一场景中包括的至少一个第一对象。标识信息可以是地理位置信息或者代码信息等。例如,识别模块可包括诸如GPS之类的用于获得显示设备的位置的位置获取部件和诸如陀螺仪之类的用于获得显示设备的朝向的朝向获取部件。识别模块可通过显示设备的当前位置和朝向,获得用户当前观看的第一场景以及第一场景中的诸如建筑物之类的第一对象的地理位置信息,并且确定与地理位置信息对应的第一对象。又例如,标识信息可以是预先对每个对象设置的二维码。从而识别模块可根据所拍摄的实时采集图像中的二维码,容易地识别第一场景中的第一对象。在识别了第一场景中的至少一个第一对象之后,接收模块可接收来自用户的第一图像设置指令,并且确定模块可根据第一图像设置指令在至少一个第一对象中确定目标对象。当确定实时采集图像中存在对其进行了图像设置的目标对象时,图像生成单元240可根据第一图像设置指令,生成关于目标对象的第一图像。例如,当识别模块识别出第一场景中包括多个第一对象,即,建筑物A、建筑物B和建筑物C,并且接收模块接收到用户指示显示建筑物B在50年前的样貌的第一图像设置指令时,确定模块可根据来自用户的第一图像设置指令,确定建筑物B为目标对象,并且图像生成单元240可获取建筑物B在50年前的图像(例如通过互联网)作为第一图像。又例如,当识别模块识别出第一场景中包括多个第一对象,即,建筑物A、建筑物B和建筑物C,并且接收模块接收到用户指示显示第一场景在与当前时间段不同的另一时间的样貌时,确定模块可根据来自用户的第一图像设置指令,确定建筑物A、建筑物B和建筑物C均为目标对象,并且确定模块240可获取建筑物A、建筑物B和建筑物C在另一时间的图像(例如通过互联网)作为第一图像。
根据本发明的另一示例,显示设备可与特定服务器相连接。对象确定单元230可包括识别模块、描述信息获取模块、发送模块、设置信息获取的模块和确定模块。首先识别模块可根据实时采集图像,识别第一场景中的至少一个第一对象。具体地,如上所述,识别模块可获得第一场景中的每个第一对象的标识信息,然后通过标识信息识别第一场景中包括的至少一个第一对象。标识信息可以是地理位置信息或者代码信息等。例如,识别模块可包括诸如GPS之类的用于获得显示设备的位置的位置获取部件和诸如陀螺仪之类的用于获得显示设备的朝向的朝向获取部件。识别模块可通过显示设备的当前位置和朝向,获得用户当前观看的第一场景以及第一场景中的诸如建筑物之类的第一对象的地理位置信息,并且确定与地理位置信息对应的第一对象。又例如,标识信息可以是预先对每个对象设置的二维码。从而识别模块可根据所拍摄的实时采集图像中的二维码,容易地识别第一场景中的第一对象。在识别了第一场景中的至少一个第一对象之后,描述信息获取模块可生成每个第一对象的对象描述信息(例如第一对象的名称和/或标识信息等),并且发送模块向服务器发送至少一个第一对象的对象描述信息。然后,设置信息获取的模块可从服务器接收在服务器中存储的、至少一个第一对象的对象设置信息,并且确定模块根据对象设置信息,将在服务器中存储了对其进行的第二图像设置的第一对象作为目标对象。
根据本发明的一个示例,第二图像设置是由终端设备预先向服务器发送的、对于所有用户公开的图像设置。例如,电子游戏的开发者可预先向游戏服务器发送对于登录该游戏服务器所有用户公开的对于特定地区中景物的图像设置,使得登录该游戏服务器的用户位于该特定地区时,都能够收到服务器发送的、关于其观看的位于该特定地区的第一场景中景物的第二图像设置。
此外,根据本发明的另一示例,发送模块还向所述服务器发送使用所述显示设备的用户的用户标识。服务器可根据显示设备发送的用户标识和至少一个第一对象的对象描述信息,确定由终端设备预先向服务器发送的、对于用户标识公开的针对第一对象中的一个或多个的图像设置作为第二图像设置。
例如,社交网络的用户可向服务器发送、对于其某个好友公开的图像设置。比如社交网络的用户在其终端设备上对于某个建筑进行涂鸦设置,将该涂鸦设置发送到社交网络服务器并设定只有好友可见其进行的涂鸦。在此情况下,当服务器根据来自显示设备的至少一个第一对象的对象描述信息确定在第一对象中存在预先对其进行了图像设置的对象,并且服务器进一步确定该图像设置对于来自显示设备的用户标识公开时,向显示设备发送该对象的图像设置作为第二图像设置,使得显示设备根据第二图像设置显示虚拟涂鸦。又比如社交网络的用户在其终端设备上为其个在社交网络中的好友D购买了虚拟宠物,将该虚拟宠物设置发送到社交网络服务器并设定只有好友E和F可见。在此情况下,当服务器根据来自显示设备的至少一个第一对象的对象描述信息确定在第一对象中存在好友D,并且服务器进一步确定显示设备发送的用户标识为好友E或F的用户标识时,向显示设备发送该对象的图像设置作为第二图像设置,使得显示设备根据第二图像设置显示虚拟宠物。
当确定实时采集图像中存在对其进行了图像设置的目标对象时,图像生成单元240可根据第二对象设置信息,生成关于目标对象的第一图像。根据本发明的一个示例,可根据目标对象在第一场景的位置,生成关于目标对象的第一图像。此外,根据本发明的另一示例,第二图像设置可包括第一图像的图像内容信息和第一图像在相对于目标对象的位置信息。当确定实时采集图像中存在对其进行了图像设置的目标对象时,图像生成单元240可根据位置信息确定第一图像的显示位置,并且根据图像内容信息在显示位置上生成关于目标对象的第一图像。例如,当目标对象为五层建筑时,位置信息可指示第一图像应位于目标对象的第四层,图像内容信息可指示第一图像的内容为字母“Lenovo”。从而图像生成单元240可根据目标对象的第四层的位置,确定第一图像的显示位置,并且在显示位置上生成字母“Lenovo”的图像。
最后,显示单元250可通过显示单元显示第一图像,使得用户在透过镜片部件观看目标对象的同时通过显示单元观看到叠加在目标对象上的第一图像。显示单元250与镜片部件210对应设置。例如,显示单元250为透明显示单元,并且镜片部件覆盖在显示单元上。从而用户在透过镜片看到第一场景中的目标对象的同时,可看到显示单元所显示的叠加在该目标对象上的第一图像。
通过上述本实施例提供的显示设备,将真实的环境中的对象与显示设备产生的图像相结合,使得用户能够直观地看到其编辑和设置给真实环境中的对象带来的改变。
此外,如上所述,优选地,根据本发明的一个示例,显示设备可以是头戴电子设备。例如,显示设备为眼镜式显示设备。图3是示出了图2中所示的显示设备200为眼镜式显示设备的一个示例情形的说明图。为了简洁,不再结合图3描述眼镜式显示设备300与显示设备200类似的部分。
如图3所示,显示设备300还可包括镜框模块310以及固定单元。镜片部件320设置在镜框模块310中。显示设备300的固定单元包括第一支撑臂331和第二支撑臂332。如图3所示,第一支撑臂包含第一连接部分331(如图3中的阴影部分所示)和第一保持部分332。第一连接部分331连接镜框模块310和第一保持部分332。第二支撑臂包含第二连接部分341(如图3中的阴影部分所示)和第二保持部分342。第二连接部分341连接镜框模块310和第二保持部分342。此外,可在镜框模块310上设置第三保持部分(未示出)。具体地,第三保持部分可设置在镜框模块310位于两个镜片之间的位置上。通过第一保持部分、第二保持部分和第三保持部分,头戴式电子设备被保持在用户的头部。具体地,第一保持部分和第二保持部分可用于将第一支撑臂和第二支撑臂支撑在用户的耳部,而第三保持部分可用于将镜框模块310支撑在用户的鼻梁处。
在本实施例中,显示设备300的采集单元(未示出)可与镜片部件320对应地设置,以确定采集单元所采集的图像与用户看到的景象基本一致。例如,采集单元可设置在两个镜片部件之间的镜框模块310上。可替换地,显示设备300的采集单元也可与镜片部件中的一个对应地设置在镜框模块310上。此外,显示设备300的采集单元也可包括两个采集模块,并且与两个镜片分别对应地设置在镜框模块310上,采集单元可对两个采集模块所采集的图像进行处理,以结合两个采集模块所采集的图像,使得处理后的图像更接近用户真实看到的景象。
图4是示出了根据显示设备300中的显示单元400的示例性框图。如图4所示,显示单元400可包括第一显示模块410、第一光学系统420、第一光导部件430和第二光导部件440。图5是示出了图4所示的显示单元400的一个示意情形的说明图。
第一显示模块410可设置在镜框模块310中,并且与第一数据传输线相连接。第一显示模块410可根据显示设备300的第一数据传输线传送的第一视频信号显示第一图像。第一数据传输线可设置在固定单元和镜框模块中。第一数据传输线可将显示信号传送到显示单元。显示单元可根据显示信号向用户进行显示。此外,在本实施例中虽然以数据传输线为例进行了描述,但是本发明不限于此,例如,根据本发明的另一示例,还可通过无线传输方式,将显示信号传送到显示单元。此外,根据本发明的一个示例,第一显示模块410可以是尺寸较小的微型显示屏的显示模块。
第一光学系统420也可设置在镜框模块310中。第一光学系统420可接收从第一显示模块发出的光线,并对从第一显示模块发出的光线进行光路转换,以形成第一放大虚像。也就是说,第一光学系统420具有正屈光力。从而用户可清楚观看第一图像,并且用户所观看的图像的尺寸不受显示单元的尺寸的限制。
例如,光学系统可包括以凸透镜。可替换地,为了减少像差、避免色散等对成像造成的干扰,带给用户更好的视觉体验,光学系统也可由包含凸透镜和凹透镜的多个透镜形成透镜组件。此外,根据本发明的一个示例,可沿4光学系统的光轴对应地设置第一显示模块410和第一光学系统420。可替换地,根据本发明的另一示例,显示单元还可包括第五光导部件,以将从第一显示模块410发射的光线传送到第一光学系统420。
如图5所示,在第一光学系统420收从第一显示模块410发出的光线,并对从第一显示模块410发出的光线进行光路转换后,第一光导部件430可将经过第一光学系统的光线传送到第二光导部件440。第二光导部件440可设置在镜片部件320中。并且第二光导部件可接收通过第一光导部件430传送的光线,并将第一光导部件430传送的光线向佩戴头戴式电子设备的用户的眼睛进行反射。
返回图3,镜片部件320在从内侧到外侧的方向上满足第一预定透光率,使得用户能够在观看第一放大虚像的同时能够观看周围环境。例如,图像生成单元根据所述图像设置,生成关于所述目标对象的第一图像的情况下,显示单元显示所生成的第一图像,使得用户在透过镜片看到第一场景中的目标对象的同时,看到显示单元所显示的叠加在目标对象上的第一图像。
图6是在显示设备300的显示单元显示第一图像的情况下,用户所看到的内容的一个示例情形的说明图。如图6所示,用户既可以透过镜片部件看到第一场景中的目标对象610,又可以看到显示单元所显示的叠加在目标对象610上的第一图像620。从而将真实的环境中的对象与显示设备产生的图像相结合,使得用户能够直观地看到其编辑和设置给真实环境中的对象带来的改变。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现。并且软件模块可以置于任意形式的计算机存储介质中。为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
本领域技术人员应该理解,可依赖于设计需求和其它因素对本发明进行各种修改、组合、部分组合和替换,只要它们在所附权利要求书及其等价物的范围内。

Claims (17)

1.一种图像显示的方法,应用于显示设备,其中所述显示设备包括镜片部件以及与所述镜片部件对应设置的采集单元和显示单元,所述方法包括:
当所述镜片部件位于用户的可视区域中时,通过所述采集单元对所述用户透过所述镜片部件观看的第一场景进行图像采集,并获得实时采集图像;
根据所述实时采集图像,确定所述第一场景中是否存在对其进行了图像设置的目标对象;
当确定所述第一场景中存在对其进行了图像设置的目标对象时,根据所述图像设置,生成关于所述目标对象的第一图像;以及
通过所述显示单元显示所述第一图像,使得用户在透过所述镜片部件观看所述目标对象的同时通过所述显示单元观看到叠加在所述目标对象上的所述第一图像。
2.如权利要求1所述的方法,其中
所述根据所述实时采集图像,确定所述第一场景中是否存在对其进行了图像设置的目标对象包括:
根据所述实时采集图像,识别所述第一场景中的至少一个第一对象;
接收来自用户的第一图像设置指令;
根据所述第一图像设置指令在所述至少一个第一对象中确定所述目标对象,
所述当确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述图像设置,生成关于所述目标对象的第一图像包括:
当确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述第一图像设置指令,生成关于所述目标对象的第一图像。
3.如权利要求1所述的方法,其中
所述显示设备与服务器相连接;
所述根据所述实时采集图像,确定所述第一场景中是否存在对其进行了图像设置的目标对象包括:
根据所述实时采集图像,识别所述第一场景中的至少一个第一对象;
生成每个所述第一对象的对象描述信息;
向所述服务器发送所述至少一个第一对象的对象描述信息;
从所述服务器接收在所述服务器中存储的、所述至少一个第一对象的对象设置信息;
根据所述对象设置信息,将在所述服务器中存储了对其进行的第二图像设置的第一对象作为所述目标对象,
所述当确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述图像设置,生成关于所述目标对象的第一图像包括:
当确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述第二对象设置信息,生成关于所述目标对象的第一图像。
4.如权利要求2或3所述的方法,其中所述根据所述实时采集图像,识别所述第一场景中的至少一个第一对象包括:
获得每个所述第一对象的标识信息;
通过所述标识信息识别所述第一场景中包括的至少一个第一对象。
5.如权利要求4所述的方法,其中
所述标识信息为地理位置信息。
6.如权利要求4所述的方法,其中
所述标识信息为代码信息。
7.如权利要求3所述的方法,其中
所述第二图像设置是由终端设备预先向所述服务器发送的、对于所有用户公开的图像设置。
8.如权利要求3所述的方法,还包括:
向所述服务器发送使用所述显示设备的用户的用户标识,
其中所述第二图像设置是由终端设备预先向所述服务器发送的、对于所述用户标识公开的图像设置。
9.如权利要求3所述的方法,其中
所述第二图像设置包括所述第一图像的图像内容信息和所述第一图像在相对于所述目标对象的位置信息;
所述当确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述第二对象设置信息,生成关于所述目标对象的第一图像包括:
当确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述位置信息确定所述第一图像的显示位置,并且根据所述图像内容信息在所述显示位置上生成所述关于所述目标对象的第一图像。
10.一种显示设备,包括:
镜片部件;
采集单元,与所述镜片部件对应设置,配置来当所述镜片部件位于用户的可视区域中时,对所述用户透过所述镜片部件观看的第一场景进行图像采集,并获得实时采集图像;
对象确定单元,配置来根据所述实时采集图像,确定所述第一场景中是否存在对其进行了图像设置的目标对象;
图像生成单元,配置来当确定所述第一场景中存在对其进行了图像设置的目标对象时,根据所述图像设置,生成关于所述目标对象的第一图像;以及
显示单元,与所述镜片部件对应设置,配置来显示所述第一图像,使得用户在透过所述镜片部件观看所述目标对象的同时通过所述显示单元观看到叠加在所述目标对象上的所述第一图像。
11.如权利要求10所述的显示设备,其中
所述对象确定单元包括:
识别模块,配置来根据所述实时采集图像,识别所述第一场景中的至少一个第一对象;
接收模块,配置来接收来自用户的第一图像设置指令;
确定模块,配置来根据所述第一图像设置指令在所述至少一个第一对象中确定所述目标对象,
所述图像生成单元当所述确定单元确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述第一图像设置指令,生成关于所述目标对象的第一图像。
12.如权利要求10所述的显示设备,其中
所述显示设备与服务器相连接;
所述对象确定单元包括:
识别模块,配置来根据所述实时采集图像,识别所述第一场景中的至少一个第一对象;
描述信息获取模块,配置来生成每个所述第一对象的对象描述信息;
发送模块,配置来向所述服务器发送所述至少一个第一对象的对象描述信息;
设置信息获取的模块,配置来从所述服务器接收在所述服务器中存储的、所述至少一个第一对象的对象设置信息;
确定模块,配置来根据所述对象设置信息,将在所述服务器中存储了对其进行的第二图像设置的第一对象作为所述目标对象,
所述图像生成单元当所述确定单元确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述第二对象设置信息,生成关于所述目标对象的第一图像。
13.如权利要求11或12所述的显示设备,其中
所述识别模块获取每个所述第一对象的标识信息,并且通过所述标识信息识别所述第一场景中包括的至少一个第一对象。
14.如权利要求12所述的显示设备,其中
所述第二图像设置是由终端设备预先向所述服务器发送的、对于所有用户公开的图像设置。
15.如权利要求12所述的显示设备,其中
所述发送模块还配置来向所述服务器发送使用所述显示设备的用户的用户标识,
其中所述第二图像设置是由终端设备预先向所述服务器发送的、对于所述用户标识公开的图像设置。
16.如权利要求3所述的方法,其中
所述第二图像设置包括所述第一图像的图像内容信息和所述第一图像在相对于所述目标对象的位置信息;
所述图像生成单元当所述确定单元确定所述实时采集图像中存在对其进行了图像设置的目标对象时,根据所述位置信息确定所述第一图像的显示位置,并且根据所述图像内容信息在所述显示位置上生成所述关于所述目标对象的第一图像。
17.如权利要求10所述的显示设备,其中所述显示设备为眼镜式显示设备,所述显示设备还包括:
镜框部件,其中所述镜片部件设置在所述镜框部件中;
固定单元包括:
第一支撑臂,包含第一连接部分和第一保持部分,其中所述第一连接部分配置来连接所述镜框部件和所述第一保持部分;
第二支撑臂,包含第二连接部分和第二保持部分,其中所述第二连接部分配置来连接所述镜框部件和所述第二保持部分,
其中,所述镜框部件包括第三保持部分,
所述第一保持部分、所述第二保持部分和所述第三保持部分配置来将所述显示设备保持在用户的头部,
所述显示单元,包含:
第一显示模块,设置在所述镜框部件中;
第一光学系统,设置在所述镜框部件中,配置来接收从所述第一显示模块发出的光线,并对从所述第一显示模块发出的光线进行光路转换,以形成第一放大虚像;
第一光导部件,配置来将经过所述第一光学系统的光线传送到第二光导部件;
所述第二光导部件,设置在所述镜片部件中,配置来将所述第一光导部件传送的光线向佩戴所述显示设备的用户的眼睛进行反射。
CN201310088419.2A 2013-03-19 2013-03-19 图像显示的方法和显示设备 Active CN104062758B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310088419.2A CN104062758B (zh) 2013-03-19 2013-03-19 图像显示的方法和显示设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310088419.2A CN104062758B (zh) 2013-03-19 2013-03-19 图像显示的方法和显示设备

Publications (2)

Publication Number Publication Date
CN104062758A true CN104062758A (zh) 2014-09-24
CN104062758B CN104062758B (zh) 2017-02-08

Family

ID=51550547

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310088419.2A Active CN104062758B (zh) 2013-03-19 2013-03-19 图像显示的方法和显示设备

Country Status (1)

Country Link
CN (1) CN104062758B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104484039A (zh) * 2014-12-22 2015-04-01 联想(北京)有限公司 信息处理方法和电子设备
CN104571515A (zh) * 2014-12-29 2015-04-29 联想(北京)有限公司 一种信息处理方法及电子设备
CN105676656A (zh) * 2015-12-31 2016-06-15 联想(北京)有限公司 处理方法及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101101505A (zh) * 2006-07-07 2008-01-09 华为技术有限公司 一种实现三维增强现实的方法及系统
US20110213664A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
CN102395036A (zh) * 2010-06-30 2012-03-28 株式会社泛泰 用于提供3d增强现实图像的设备和方法
CN102419631A (zh) * 2010-10-15 2012-04-18 微软公司 虚拟内容到现实内容中的融合
US20120206452A1 (en) * 2010-10-15 2012-08-16 Geisner Kevin A Realistic occlusion for a head mounted augmented reality display
CN102937745A (zh) * 2012-11-13 2013-02-20 京东方科技集团股份有限公司 开放式头戴显示装置及其显示方法
US20130050070A1 (en) * 2011-08-29 2013-02-28 John R. Lewis Gaze detection in a see-through, near-eye, mixed reality display

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101101505A (zh) * 2006-07-07 2008-01-09 华为技术有限公司 一种实现三维增强现实的方法及系统
US20110213664A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
CN102395036A (zh) * 2010-06-30 2012-03-28 株式会社泛泰 用于提供3d增强现实图像的设备和方法
CN102419631A (zh) * 2010-10-15 2012-04-18 微软公司 虚拟内容到现实内容中的融合
US20120206452A1 (en) * 2010-10-15 2012-08-16 Geisner Kevin A Realistic occlusion for a head mounted augmented reality display
US20130050070A1 (en) * 2011-08-29 2013-02-28 John R. Lewis Gaze detection in a see-through, near-eye, mixed reality display
CN102937745A (zh) * 2012-11-13 2013-02-20 京东方科技集团股份有限公司 开放式头戴显示装置及其显示方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104484039A (zh) * 2014-12-22 2015-04-01 联想(北京)有限公司 信息处理方法和电子设备
CN104484039B (zh) * 2014-12-22 2017-11-24 联想(北京)有限公司 信息处理方法和电子设备
CN104571515A (zh) * 2014-12-29 2015-04-29 联想(北京)有限公司 一种信息处理方法及电子设备
CN104571515B (zh) * 2014-12-29 2019-03-29 联想(北京)有限公司 一种信息处理方法及电子设备
CN105676656A (zh) * 2015-12-31 2016-06-15 联想(北京)有限公司 处理方法及电子设备

Also Published As

Publication number Publication date
CN104062758B (zh) 2017-02-08

Similar Documents

Publication Publication Date Title
RU2670784C9 (ru) Ориентация и визуализация виртуального объекта
EP3079134B1 (en) Mobile terminal and method for controlling the same
US11024083B2 (en) Server, user terminal device, and control method therefor
EP3200552B1 (en) Mobile terminal and method for controlling same
JP6428268B2 (ja) 画像表示装置及び画像表示方法、並びに画像表示システム
US10104208B2 (en) Mobile terminal and controlling method thereof
US10354404B2 (en) Electronic device and control method therefor
EP3112989A2 (en) Mobile terminal
US20130044130A1 (en) Providing contextual personal information by a mixed reality device
EP3404576B1 (en) Detection of the loss of a mobile terminal
US20170142339A1 (en) Mobile terminal and method for controlling the same
EP3139590A1 (en) Mobile device and method of controlling therefor
EP3264760B1 (en) Glasses-type mobile terminal and method of operating the same
EP3490234A1 (en) Mobile terminal
US20180048823A1 (en) Mobile terminal and method of operating the same
CN108351689B (zh) 用于显示处于预定义区域中的对象的全息图像的方法和系统
CN104062758A (zh) 图像显示的方法和显示设备
US20160189341A1 (en) Systems and methods for magnifying the appearance of an image on a mobile device screen using eyewear
KR102309297B1 (ko) 단말기 및 그 제어 방법
US20230068730A1 (en) Social connection through distributed and connected real-world objects
CN104239877B (zh) 图像处理的方法和图像采集设备
CN204166478U (zh) 头戴式智能设备
US20180365650A1 (en) Mobile terminal and control method thereof
KR102369559B1 (ko) 단말기
US20230298247A1 (en) Sharing received objects with co-located users

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant