CN102402390A - 透明显示设备和使用透明显示设备提供信息的方法 - Google Patents

透明显示设备和使用透明显示设备提供信息的方法 Download PDF

Info

Publication number
CN102402390A
CN102402390A CN2011102761412A CN201110276141A CN102402390A CN 102402390 A CN102402390 A CN 102402390A CN 2011102761412 A CN2011102761412 A CN 2011102761412A CN 201110276141 A CN201110276141 A CN 201110276141A CN 102402390 A CN102402390 A CN 102402390A
Authority
CN
China
Prior art keywords
information
transparent display
display device
zone
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011102761412A
Other languages
English (en)
Other versions
CN102402390B (zh
Inventor
朴喜涓
朱延珠
朴宣奏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020100091195A external-priority patent/KR101737839B1/ko
Priority claimed from KR1020100091194A external-priority patent/KR101663619B1/ko
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN102402390A publication Critical patent/CN102402390A/zh
Application granted granted Critical
Publication of CN102402390B publication Critical patent/CN102402390B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/434Query formulation using image data, e.g. images, photos, pictures taken by a user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • G06F16/436Filtering based on additional data, e.g. user or group profiles using biological or physiological data of a human being, e.g. blood pressure, facial expression, gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/487Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location

Abstract

本发明涉及透明显示设备和使用透明显示设备提供信息的方法。根据本发明的实施方式,一种用于检测对象的方法包括以下步骤:在透明显示器上接收对象选择信息;确定与所接收的对象选择信息相关的眼睛方向;基于确定的眼睛方向选择在透明显示器的由所接收的对象选择信息限定的透区域内显示的至少一个对象;获取关于所选择的对象的信息;以及在透明显示器上显示所获取的信息。

Description

透明显示设备和使用透明显示设备提供信息的方法
发明领域
本发明涉及透明显示设备和提供信息的方法,更具体地,涉及透明显示设备以及可以经由透明显示器提供信息的方法。
背景技术
包括广播接收器、个人计算机、笔记本、移动电话等在内的电子装置可以被配置成执行多种功能。这些功能可以是广播接收功能、数据和音频通信功能、利用照相机的运动图片拍摄功能、音频存储功能、经由扬声器系统的音乐文件播放功能、图像或视频显示功能等。一些终端还可以具有附加的游戏实现功能。
而且,随着近来图像技术和透明电子装置技术的不断发展,已经积极地研究了同时使能看到后面的物体和显示的图像的透明显示板,并且电子装置使用透明显示板作为显示板来显示图像和数据。这种透明显示器可以是使用自发光的有机发光面板或等离子体面板。
发明内容
因此,本发明涉及透明显示设备和使用透明显示设备提供信息的方法。
本发明的目的是提供一种透明显示设备和一种提供信息的方法,它们能够提供关于用户从经由透明显示器看到的对象中选择的对象的信息。
本发明的另一目的是提供一种透明显示设备和一种提供信息的方法,当经由透明显示器看到与特定条件相对应的对象时,该透明显示设备和方法能够提供关于相应对象的信息。
本发明的另一目的是提供一种透明显示设备和一种提供信息的方法,它们能够提供关于经由透明显示器看到的背景的信息。
本发明的又一目的是提供一种透明显示设备和一种提供信息的方法,它们能够获取关于与经由透明显示器看到的背景区域相对应的地区的信息且能够基于获取的信息提供通信服务。
本公开的附加优点、目的和特征将在下面的描述中部分描述且将对于本领域普通技术人员在研究下文后变得明显,或可以通过本发明的实践来了解。通过书面的说明书及其权利要求以及附图中特别指出的结构可以实现和获得本发明的目的和其他优点。
为了实现这些和其他优点,并且依照本发明的目的,作为具体和广义的描述,一种用于检测对象的方法包括以下步骤:接收对象选择信息;检测经由透明显示器看到的背景中由所接收的对象选择信息指示的对象;获取关于检测到的对象的信息;以及在所述透明显示器上显示所获取的信息。此处,所述对象可以包括人、动物、物品、车辆、建筑或自然物中的至少一个。关于所述对象的信息可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息或对象的详细说明中的至少一个。所显示的信息可以根据信息被显示的位置和识别的手势而移动。
所述接收对象选择信息的步骤可以包括以下步骤:检测所述透明显示器上的第一位置处的按下事件;以及检测所述透明显示器上的第二位置处的抬起事件,其中,所述对象选择信息指示的对象是经由所述透明显示器上的包括所述第一位置和所述第二位置的区域看到的对象。
所述对象选择信息可以包括图像、对象名称或对象属性中的至少一个。即,在所述检测对象的步骤中,可以检测到与所述对象选择信息的图像具有相同图像的对象,可以检测到具有所述对象选择信息的对象名称的对象,并且可以检测到与所述对象选择信息的对象属性相对应的对象。
可以显示用于突出在所述透明显示器上看到的检测到的对象的形状的标记。即,该形状的轮廓可以以特定颜色显示,或者该形状的轮廓或该形状的区域可以间歇地显示。
所述获取步骤包括以下步骤:请求服务器检索关于对象的信息;以及从所述服务器接收检索结果。在所述检索请求步骤中,可以发送检测到的对象的图像或位置信息中的至少一个。
所述获取步骤可以包括在存储器中存储的数据库中检索关于所述对象的信息的步骤。
所述获取步骤可以包括以下步骤:检测存储器中存储的数据中关于所述对象的信息;如果所述检索步骤中的检索失败,则请求服务器检索关于所述对象的信息;以及从所述服务器接收检索结果。
在本发明的另一方面中,一种透明显示设备包括:透明显示器,其被配置成能够透射对象的形状;以及控制器,其被配置成接收对象选择信息,检测经由所述透明显示器看到的背景中由接收到的对象选择信息指示的对象,获取关于检测到的对象的信息以及控制在所述透明显示器上显示所获取的信息。此处,所述对象可以包括人、动物、物品、车辆、建筑或自然物中的至少一个。关于所述对象的信息可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息或对象的详细说明中的至少一个。所显示的信息可以根据所述信息被显示的位置和识别的手势而移动。
所述控制器可以检测所述透明显示器上的第一位置处的按下事件和所述透明显示器上的第二位置处的抬起事件,并且输入的对象选择信息指示的对象可以是经由所述透明显示器上的包括所述第一位置和所述第二位置的区域看到的对象。
所述对象选择信息可以包括图像、对象名称或对象属性中的至少一个。即,所述控制器可以检测具有所述对象选择信息的图像的对象、具有所述对象名称的对象以及与所述对象属性相对应的对象。
所述控制器可以进行控制以显示标记,所述标记被配置成突出在所述透明显示器上看到的检测到的对象的形状。此处,所述标记可以以所述形状的轮廓的方式显示、以特定颜色或粗线形式显示。所述控制器可以间歇地显示所述形状的轮廓或所述形状占用的区域。
所述控制器可以向服务器发送检索请求信号以请求所述服务器检索关于所述对象的信息,并且所述控制器进行控制以从所述服务器接收检索结果。所述检索请求信息可以包括检测到的对象的图像或位置信息中的至少一个。
所述控制器可以在存储器中存储的数据中检索关于所述对象的信息。如果在所述存储器中对所述对象的信息的检索失败,则所述控制器可以请求服务器检索关于所述对象的信息。
在本发明的又一方面中,一种提供地区信息的方法包括以下步骤:选择经由透明显示器看到的背景的区域;在所述透明显示器上显示拍摄的所选择的区域的图像和至少一个菜单;以及当选择了所述至少一个菜单中的一个时,显示与所选择的菜单相关的画面,其中,显示的画面包含所选择的区域的地图。此处,显示的至少一个菜单可以是地区详情显示菜单或联系人显示菜单。所选择的区域可以根据识别的手势而变化。
显示的画面还可以包括至少一个信息显示对象以显示点信息。所述至少一个信息显示对象可以处于与要显示的点信息相关的点处。
而且,显示的画面还可以包括至少一个联系人对象以指示特定的人,并且所述至少一个联系人对象可以显示在被指示的人所处的点处。此处,当选择所述联系人对象中的一个时,可以基于所选择的联系人对象指示的人的联系信息来发送信号。
所述选择区域的步骤包括以下步骤:检测所述透明显示器上的第一位置处的按下事件;检测所述透明显示器上的第二位置处的抬起事件;以及选择经由包括所述第一位置和所述第二位置的区域看到的背景作为选择区域。
所述选择区域的步骤可以包括以下步骤:接收地区选择信息;确定眼睛方向;选择在根据输入的地区选择信息而选择的透明显示区域内在眼睛方向上经由所述透明显示器看到的背景为所述区域。
所述确定眼睛方向的步骤可以包括以下步骤:从使用拍摄装置拍摄的图像中检测面部区域;以及通过使用检测到的面部区域来确定所述眼睛方向。而且,所述眼睛方向可以被确定为垂直于所述透明显示器的方向。
在本发明的又一实施方式中,一种透明显示设备包括:透明显示器,其被配置成能够透视背景;以及控制器,其被配置成选择经由所述透明显示器看到的背景的区域,控制在所述透明显示器上显示拍摄的所选择的区域的图像和至少一个菜单,当选择至少一个菜单中的一个时,控制显示与所选择的菜单相关的画面,其中,显示的画面可以包括所选择的区域的地图。此处,显示的至少一个菜单可以是地区详情显示菜单和联系人显示菜单中的一个。所选择的区域可以根据识别的手势而变化。
显示的画面还可以包括至少一个信息显示对象以显示点信息,并且所述至少一个信息显示对象可以处于与要显示的点信息相关的点处。
而且,显示的画面还可以包括至少一个联系人对象以指示特定的人,并且所述至少一个联系人对象可以显示在被指示的人所处的点处。此处,当选择所述联系人对象中的一个时,可以基于所选择的联系人对象指示的人的联系信息来发送信号。
所述控制器可以检测所述透明显示器上的第一位置处的按下事件和所述透明显示器上的第二位置处的抬起事件,并且输入的对象选择信息指示的对象可以是经由所述透明显示器上包括所述第一位置和所述第二位置的区域看到的对象。
所述透明显示装置还可以包括输入装置以接收地区选择信息。所述控制器确定眼睛方向,并且可以选择在根据接收的地区选择信息而选择的透明显示区域内在所确定的眼睛方向上经由所述透明显示器看到的背景作为所选择的区域。
所述控制器从利用拍摄装置拍摄的图像中检测面部区域并且利用检测到的面部区域来确定眼睛方向。所述控制器可以将垂直于所述透明显示器的方向确定为眼睛方向。
根据本发明的透明显示器和用于提供对象信息的方法,提供关于用户从经由所述透明显示器看到的对象中选择的对象的信息。因此,用户可以不执行针对关于后面对象的信息的辅助检索过程。当在所述透明显示器上看到与特定条件相对应的对象时,提供关于该相应对象的信息。因此,用户不需要连续观察特定对象的外观,并且用户可以没有任何困难地获得关于所需对象的信息。
而且,根据本发明的透明显示器和用于提供地区信息的方法,提供与经由所述透明显示器看到的背景的所选择的区域相对应的地区信息以及与该地区信息相关的服务。因此,用户可以自动地得到关于背景的信息而无需辅助检索。
根据本发明的一个实施方式,一种用于检测对象的方法包括以下步骤:在透明显示器上接收对象选择信息;确定与所接收的对象选择信息相关联的眼睛方向;基于所确定的眼睛方向选择在所述透明显示器的由接收到的对象选择信息限定的区域内显示的至少一个对象;获取关于检测到的对象的信息;以及在所述透明显示器上显示所获取的信息。
根据本发明的一个实施方式,一种透明显示设备包括:透明显示器;以及控制器,其被配置成接收对象选择信息,确定与接收到的对象选择信息相关联的眼睛方向;基于确定的眼睛方向选择在所述透明显示器的由接收到的对象选择信息限定的区域内显示的至少一个对象,获取关于检测到的对象的信息;以及控制所述透明显示器显示所获取的信息。
根据本发明的一个实施方式,一种提供地区信息的方法包括以下步骤:选择经由透明显示器看到的背景的区域;在所述透明显示器上显示拍摄的所选择的区域的图像和至少一个菜单;从显示的至少一个菜单中选择菜单;在所述透明显示器上显示与所选择的菜单相关的画面,其中,所显示的画面包括所选择的区域的地图。
应当理解,本发明的上述一般描述和下述详细描述是示例性和说明性的,并且旨在提供所要求保护的本发明的进一步解释。
附图说明
附图被包括在本说明书中以提供对本公开的进一步理解,并结合到本说明书中且构成本说明书的一部分,附图示出了本公开的(多个)实施方式,且与说明书一起用于解释本公开的原理。
附图中:
图1是例示根据本发明的示例性实施方式的对象信息提供系统的配置的图;
图2是例示了显示由对象选择信息指示的对象的信息的情形的图;
图3a至图3c是例示根据本发明的示例性实施方式的用于输入对象选择信息的方法的图;
图4是例示根据另一实施方式的用于输入对象选择信息的方法的图;
图5是例示根据另一实施方式的显示由对象选择信息指示的对象的信息的情形的图;
图6a至图6d是例示显示用于突出由对象选择信息指示的对象的形状的标记的画面的图;
图7是例示显示被检测到的对象的信息的画面的图;
图8是例示根据本发明的示例性实施方式的透明显示设备的配置的框图;
图9是例示在根据本发明的示例性实施方式的透明显示设备中设置的控制器的配置的框图;
图10是例示根据本发明的示例性实施方式的用于检测对象的方法的过程的流程图;
图11a至图11e是例示显示检测到的对象和识别的手势的信息的画面的图;
图12是例示显示被配置成请求显示检测到的对象的信息的手势的画面的图;
图13是例示根据示例性实施方式的用于检测对象的方法的过程的流程图;
图14是例示根据本发明的示例性实施方式的用于获取对象信息的方法的过程的流程图;
图15是例示根据另一实施方式的用于获取对象信息的方法的过程的流程图;
图16是例示根据本发明的示例性实施方式的用于检测对象的方法的过程的流程图;
图17是例示根据本发明的另一实施方式的透明显示设备的配置的框图;
图18是例示根据本发明的示例性实施方式的地区信息提供系统的配置的图;
图19是例示经由透明显示器看到的背景的图;
图20a至图20c是例示根据实施方式的用于输入地区选择信息的方法的图;
图21是例示根据实施方式的显示拍摄的背景的区域的图像的画面的图;
图22是例示根据一个实施方式的显示用于背景的区域的地图的画面的图;
图23是例示根据一个实施方式的显示靠着地图的背景显示点信息的画面的图;
图24是例示根据另一实施方式的显示用于背景的区域的地图的画面的图;
图25是例示根据本发明的示例性实施方式的用于提供地区信息的方法的过程的流程图;
图26a至图26d是例示显示所选择的背景的区域和所识别的手势的画面的图;
图27是例示根据示例性实施方式的用于识别眼睛方向的方法的过程的流程图;以及
图28是例示根据本发明的另一实施方式的用于提供地区信息的方法的过程的流程图。
具体实施方式
下面将详细描述本发明的优选实施方式,在附图中例示出了其示例。在可能的情况下,相同的标号在整个附图中代表相同或类似部件。
图1是例示根据本发明的示例性实施方式的对象信息提供系统的配置的图。
参考图1,根据本发明的实施方式的对象信息提供系统1包括对象信息提供服务器10、位置应用服务器20、网络50和60以及透明显示设备100。
对象信息服务器10存储对象图像、位置信息、关于对象的信息、对象图像、对象图像和关于对象的信息的关联信息以及位置信息和关于对象的信息的关联信息。此处,对象可以包括人、动物、物品、车辆、建筑或自然物中的至少一个。关于对象的信息可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息或对象的详细说明中的至少一个。此处,关于对象的信息将被表示为“对象信息”,并且被拍摄的对象的图像将被表示为“对象图像”。
关联信息是被配置成将信息映射到信息的信息。例如,关联信息可以是关系型数据库系统中的单个表的名称。对象信息提供服务器10可以经由关联信息来检索被映射到特定对象图像的对象信息,并且对象信息提供服务器10可以经由关联信息来检索映射到位置信息的对象信息。
对象信息提供服务器10从透明显示设备100接收检索请求信号。此处,检索请求信号可以包括检测对象的图像或检测对象的位置信息中的至少一个。检测对象的图像可以是透明显示设备100拍摄的图片或从拍摄的图片中提取出的对象图像。
当从透明显示设备100接收到包括检测对象的图像的检索请求信号时,对象信息提供服务器10可以从所接收的图像中识别相应的对象,并且可以检索关于识别出的对象的信息。对象信息提供服务器10可以向透明显示设备10发送检索到的关于对象的信息。此处,对象信息提供服务器10将接收的图像与存储的对象图像进行比较,以识别对象。换句话说,对象信息提供服务器10寻找与包括在接收到的图像中的对象图像相同或十分相似的对象图像,并且基于发现的对象图像和存储的关联信息来检索关于被识别的对象的信息。
当从透明显示设备接收到包括关于检测到的对象的位置信息的检索请求信号时,对象信息提供服务器10识别被映射到所接收的位置信息的对象,并且检索关于被识别的对象的信息。对象信息提供服务器10可以向透明显示设备100发送关于检测到的对象的检索的信息。此处,对象信息提供服务器10可以基于接收的位置信息和存储的关联信息来检索关于被识别的对象的信息。
当从透明显示设备100接收包括检测到的对象的图像及关于检测到的对象的位置信息的检索请求信号时,对象信息提供服务器10基于所接收的对象的图像和位置信息来识别相应的对象,并且检索关于所识别的对象的信息。对象信息提供服务器10可以向透明显示设备100发送检索的信息。此处,对象信息提供服务器10可以从关于被映射到接收的图像中包括的对象图像的对象的信息中检测与关于被映射到接收的位置信息的对象的信息的对象信息作为关于所识别的对象的信息。
位置应用服务器20可以向透明显示设备100提供基于位置的服务(LBS)。位置应用服务器20可以向透明显示设备100提供关于某个对象的位置信息以及某个位置的地图和地理信息。
对象信息提供服务器10、位置应用服务器20和透明显示设备可以通过网络连接起来。此处,网络可以是因特网或内联网以及宽带融合网(BCN)或超宽带融合网(uBCN)。
网络可以由骨干网60和用户网50构成。骨干网60可以是X.25网络、帧中继网络、ATM网络、多协议标签交换网络(MPLS)和通用多协议标签交换网络(GMPLS)中的一个或两个的组合。用户网50可以是光纤到户(FTTH)、非对称式数字用户线(ADSL)、有线电视网络、无线LAN(IEEE 802.11B、IEEE 802.11A、IEEE 802.11G和IEEE 802.11N)、无线宽带(WIBro)、Wimax和高速下行链路分组接入(HSDPA)中的一个。透明显示设备100可以与用户网50相连接。
透明显示设备100接收对象选择信息,并且从经由透明显示器看到的背景中检测由所接收的对象选择信息指示的对象。透明显示设备显示关于检测到的对象的信息。
图2是例示根据实施方式的显示由对象选择信息指示的对象的信息的情形的图。
参考图2,如果一个人230输入对象选择信息以选择经由透明显示器看到的对象210,则透明显示设备100可以检测由输入的对象选择信息指示的对象210。透明显示设备100可以在透明显示器上显示关于检测到的对象210的信息。此处,输入的对象选择信息可以是被配置成选择透明显示设备100的画面上的某个点251的信号。而且,由对象选择信息指示的对象210可以是相对于看到点251的人230的眼睛方向在所选择的点251上具有可见形状的对象。
图3a至图3c是例示根据本发明的示例性实施方式的用于输入对象选择信息的方法的图。
参考图3a至图3c,对象选择信息可以经由手势输入。
可以使用多种不同的手势。例如,手势可以是单点或多点手势、静态或动态手势、连续或分段手势等。单点手势是根据单触摸点执行的手势。例如,这种手势根据诸如人的一根手指、手掌或笔尖的单个触摸而执行。多点手势是根据多点执行的手势。例如,这种手势根据诸如人的多根手指、人的手指和手掌、人的手指和笔尖、多个笔尖和/或它们的组合的多触摸而执行。静态手势是不具有移动的手势,而动态手势是具有移动的手势。连续手势是根据单个笔画而执行的手势,而分段手势是根据单独的步骤顺序或笔画顺序执行的手势。
人的手指和触摸屏的触摸通常具有多种不同的模式。例如,触摸屏上的单点手势包括按下事件和随后在与对象按下事件的位置完全相同或几乎相同的位置执行的抬起事件。触摸屏上的动态手势包括按下事件和对象按下事件之后的至少一个拖拽事件以及该至少一个拖拽事件之后的抬起事件。
根据一些实施方式,使用参数来描述人的手指接近触摸屏显示器以触摸触摸屏显示器并且从触摸屏显示器收回的过程。该参数可以至少是人的手指与触摸屏显示器之间的距离、人的手指施加到触摸屏显示器的压力、人的手指与触摸屏之间的触摸面积、人的手指与触摸屏之间的电压、人的手指与触摸屏显示器之间的电容以及物理参数的一个函数。
根据一些实施方式,当人的手指与触摸屏之间的参数(例如,电容)的大小高于预定阈值水平时,执行按下事件。当参数是预定阈值水平或更高时,在与人的手指相对应的光标位置从位置“A”移动到位置“B”的情况下,执行拖拽。当参数低于阈值水平时,执行抬起事件。
透明显示设备100检测第一位置处的按下事件。人的手指301从第一位置310移动到第二位置320。此时,在人的手指301与触摸屏显示器300之间的参数高于预定阈值的状态中,人的手指301可以与透明显示设备100的触摸屏显示器300相接触地移动。当透明显示设备100在第二位置320处检测到拖拽事件时,透明显示设备100可以在触摸屏显示器300上显示标记305,该标记305指示包括第一位置310和第二位置320的区域。
人的手指301移动到第三位置330。当人的手指301与触摸屏显示器300分开或者当参数变得小于预定阈值时,透明显示设备100检测到第三位置330处的抬起事件。当检测到抬起事件时,透明显示设备100可以显示指示包括第一位置310和第三位置330的区域的标记307,并且可以检测到区域307中经由触摸屏显示器300看到的对象350。此处,第一位置310处的按下事件和第三位置330处的抬起事件可以被识别为单个对象选择信息,并且由输入的对象选择信息指示的对象可以是在区域307中具有可见形状的对象350。
图4是例示根据另一实施方式的用于输入对象选择信息的方法的图。
参考图4,对象选择信息可以经由图形用户界面(GUI)输入。对象选择信息可以包括图像、对象名称或对象属性中的至少一个,并且GUI可以提供界面以接收输入的图像、对象名称和对象属性。
GUI 400是输入指示特定车辆的对象选择信息的示例。用户可以向输入框410输入车辆的名称‘AAAAAA’(型号名称),并且该用户可以输入该车辆的颜色‘黑色’(属性)。‘AAAAAA’是需要检测的对象的名称,而‘黑色’是需要检测的对象的属性。
当经由GUI接收输入的对象选择信息时,透明显示设备100在存储器中存储输入的对象选择信息并且可以检测所存储的对象选择信息所指示的对象是否经由透明显示器可见。此时看到的眼睛方向可以是与透明显示设备100的显示器垂直的方向、用户预设的方向或在输入对象选择信息时从用户眼睛的位置朝向透明显示设备100的方向。
图5是例示根据另一实施方式的显示关于由对象选择信息指示的对象的信息的情形的图。
参考图5,透明显示设备100检测经由透明显示器是否可以看到型号名称为‘AAAAAA’且颜色为‘黑色’颜色的车辆510。当检测到车辆510时,透明显示设备100显示关于车辆510的信息511。
图6a至图6d是例示了显示用于突出对象选择信息所指示的对象的形状的标记的画面的图。
参考图6a至图6d,当检测到对象610时,透明显示设备100可以在透明显示器600上显示指示检测到的对象610的位置的标记。
根据实施方式,透明显示设备100可以在透明显示器600上显示用于突出一区域的轮廓601,检测到的对象610的形状处于该区域中。
根据另一实施方式,透明显示设备100可以在一区域中显示标记602,被检测对象610的形状处于该区域中。此处,标记602可以是斜线、特定颜色,或者标记602可以间歇地显示。
根据另一实施方式,透明显示设备100可以沿着被检测到的对象610的形状的轮廓显示虚线。此处,虚线603可以被间歇地显示。
根据又一实施方式,透明显示设备100可以沿着被检测到的对象610的形状的轮廓显示单线604。此处,线604可以被显示为粗线条、特定颜色或被间歇地显示。
图7是例示显示关于被检测到的对象的信息的画面的图。
参考图7,如果检测到动物710,则透明显示设备100可以显示关于被检测到的动物710的信息715。透明显示设备100显示“约克郡犬”为对象种类信息,显示英国作为对象历史信息,显示最大值23cm作为对象外观信息,显示3.5kg作为对象重量信息以及显示介绍信息,显示外观信息和特性信息作为对象的详细说明。
透明显示设备100可以直接从存储器中检索并获取关于被检测到的对象的信息,或者可以请求检索对象信息提供服务器10以获取关于被检测到的对象的信息。
透明显示设备100可以向对象信息提供服务器10发送检索请求信号以请求对被检测到的对象进行检索。发送的检索请求信号可以包括被检测到的对象的图像和被检测到的对象的位置信息。被检测到的对象的图像可以是通过拍摄图像而拍摄到的原始图像或由透明显示设备100在从原始图像中提取出对象占用的区域之后生成的图像。
透明显示设备100可以从位置应用服务器20获取被检测到的对象的位置信息,并且可以根据由此拥有的位置信息来计算被检测到的对象的位置信息。
透明显示设备100可以根据基于网络的技术(例如,小区ID、AOA和TDOA系统等)经由从基站40接收的无线电波来确定其位置。另外,透明显示设备100可以根据基于手持机的定位技术(例如,到达时间(TOA)、全球定位系统(GPS)和混合定位系统等)经由从卫星30接收的信号确定其位置。
通过使用基于图像识别的技术,可以确定被检测对象相对于透明显示设备100的位置。透明显示设备100可以基于监督式学习算法从利用多个拍摄装置拍摄的具有该对象的图片来确定该对象的位置。另选地,透明显示设备100可以利用基于虚拟视觉的技术来确定对象的位置。如果使用基于图像识别的技术来确定对象的位置,则透明显示设备100可以以小于几厘米的精度检测到对象的位置,并且可以更精确地检测对象的位置。
被检测对象相对于透明显示设备100的位置可以利用基于超声波的技术来确定。透明显示设备100朝向识别出的眼睛方向发射超声波,并且可以基于发射的超声波来计算被检测对象的距离。而且,透明显示设备100可以基于超声波的发射方向来确定对象的方位角。透明显示设备100可以基于计算出的距离和确定的方位角来确定被检测对象的位置。
图8是例示根据本发明的示例性实施方式的透明显示设备的配置的框图。
参考图8,透明显示设备100包括调谐器110、解调制器120、网络接口130、信号处理器140、透明显示器150、音频输出单元160、输入装置170、存储器180、控制器190以及外部信号接收器135。透明显示设备100可以是台式、膝上型、平板和手持式计算机等的个人计算机系统。另选地,透明显示设备100可以是移动终端,例如,移动手机、智能手机、数字广播用终端、PDA(个人数字助理)、PMP(便携式多媒体播放器)、导航仪等,或者可以是固定型的电器,例如,数字电视机等。
调谐器110选择与用户从经由天线接收的RF(射频)广播信号中选出的频道相对应的广播信号,并且将所选择的RF广播信号转换成中频信号或基带视频或音频信号。例如,当所选择的RF广播信号是数字广播信号时,调谐器110将所选择的RF广播信号转换成数字IF信号(DIF)。当所选择的RF广播信号是模拟广播信号时,调谐器110将所选择的RF广播信号转换成模拟基带视频或音频信号(CVBS SIF)。即,调谐器110可以处理数字广播信号或模拟广播信号。从调谐器110输出的模拟基带视频或音频信号(CVBS SIF)可以直接输入到信号处理器140。
另外,调谐器110可以根据ATSC(先进电视制式委员会)使用单载波接收RF广播,或根据DVB(数字视频广播)使用多载波接收RF广播信号。
根据本发明的另一实施方式的透明显示设备可以包括至少两个调谐器。当提供至少两个调谐器时,与第一调谐器一样,第二调谐器选择经由天线接收的RF广播信号中与用户选择的频道相对应的一个信号,并且该第二调谐器将所选择的RF广播信号转换成中频信号或基带视频或音频信号。
另外,第二调谐器经由频道记忆功能顺序地选择与所有存储的广播频道相对应的接收到的RF信号的RF广播信号,并且将它们转换成中频信号或基带视频/音频信号。第二调谐器可以周期性地执行所有广播频道的转换。因此,透明显示设备100可以提供由第一调谐器转换的广播信号的图像并且可以同时提供由第二调谐器转换的缩略图类型的图像。在这种情况下,第一调谐器将用户选择的主要RF广播信号转换成中频或基带视频/音频信号,并且第二调谐器顺序地且周期性地选择除主要RF广播信号之外的其他RF广播信号,并且第二调谐器将它们转换成中频信号或基带视频/音频信号。
解调制器120接收由调谐器110转换的数字IF信号(DIF)并且执行DIF的解调制。例如,当从调谐器110输出的数字IF信号是ATSC制式时,解调制器120执行8-VBS(8-残留边带)解调制。另选地,当从调谐器110输出的数字IF信号是DVB制式时,解调制器120执行COFDMA(编码正交频分复用调制)解调制。
解调制器120可以执行频道解码。为此,解调制器120可以包括栅格解码器、解交织器和里得-索罗门解码器以执行栅格解码、解交织和里得-索罗门解码。
在执行解调制和频道解码之后,解调制器120可以输出流信号(TS)。此时,流信号可以是视频、音频和数字信号复用的信号。例如,流信号可以是MPEG-2格式的视频信号、杜比AC-3格式的音频信号复用的MPEG-2TS(传输流)。具体而言,MPEG-2TS可以包括4字节的报头和184字节的有效载荷。
从解调制器120输出的流信号可以输入到信号处理器140。在执行解复用和信号处理之后,信号处理器140向透明显示器150输出图像并且向音频输出单元160输出声音。
在数字广播接收器具有至少两个调谐器的情况中,可以向该至少两个调谐器提供相应数目的解调制器。这些解调制器可以基于ATSC制式和DVB制式独立地提供。
网络接口130接收来自网络的包并且向网络发送接收的包。经由网络,网络接口130可以发送IP包以向对象信息提供服务器10传送检索请求信号,并且可以发送IP包以传送来自对象信息提供服务器10的检索结果。另外,经由网络,网络接口130可以发送IP包以向位置应用服务器20传送位置信息请求信号,并且可以发送IP包以传送来自位置应用服务器20的位置信息。
并且,网络接口130经由网络从服务提供服务器接收用于传送广播数据的IP包。此处,广播数据包含内容、被配置成告知内容更新的更新消息、元数据、服务信息、软件代码和A/V数据。服务信息可以包括关于实时广播服务的服务信息和关于因特网服务的服务信息。此处,因特网服务是指经由因特网提供的服务,例如,Cod(按需点播)服务、YouTube服务、用于天气、新闻、社区信息和搜索的信息服务、用于游戏和卡拉OK的娱乐服务以及用于TV邮件和TV SMS(短消息服务)的通信服务。因此,根据本发明的数字广播接收器可以包括网络电视机、万维网电视机和宽带电视机。而且,广播服务可以包括因特网服务以及经由地面、卫星和电缆提供的广播服务。
控制器190执行命令并且执行与透明显示设备100相关的操作。例如,使用在存储器180中检索到的命令,控制器190可以控制输入和输出以及透明显示设备100的组件之间的数据的接收和处理。控制器190可以是单个芯片、多个芯片或多个电子部件。例如,针对控制器190,可以使用包括外部(exclusive)处理器或嵌入处理器、单用途处理器、控制器、ASIC等各种架构。
控制器190与操作系统一起执行计算机代码并且进行数据的生成和使用。操作系统在本发明所属的领域中公知并将略去对操作系统的描述。例如,操作系统可以是视窗系列的操作OS、Unix、Linux、Palm OS、DOS、Android和Macintosh等。操作系统、其他计算机代码和数据可以存在于与控制器190相连的存储器中。
典型地,存储器180提供透明显示设备100使用的程序代码和数据的存储。例如,存储器180可以表现为ROM(只读存储器)、RAM(随机存取存储器)、硬盘。程序代码和数据可以存在于可分离的存储介质中或者可以被装载或安装在透明显示设备100中。此处,可分离的存储介质包括CD-ROM、PC-CARD、存储卡、软盘、磁带和网络组件。
透明显示器150可以与控制器190相连地进行工作。透明显示器150可以表现为有机发光面板或等离子体面板。
透明显示器150可以显示图形用户界面(GUI)153,该GUI 153被配置成在透明显示设备的用户与操作系统或在操作系统上执行的预定应用之间提供可用的简单界面。GUI 153将程序、文件和操作选项表示为图形图像。这些图形图像可以包括窗口、字段、对话框、菜单、图标、按钮、光标和滚动条。这种图像可以按照预先限定的布局对准或者可以动态地产生以帮助用户进行特定处理。在操作中,用户可以选择图像并使该图像能够启动与多种图形图像相关的功能和任务。例如,用户可以选择按钮来执行窗口的开启、关闭、最小化或最大化,或者可以选择图标来启动特定程序。
输入装置170可以是布置在透明显示器150上或其前面的触摸屏。触摸屏可以与透明显示器150成为一体或者可以是独立的部件。如果触摸屏与透明显示器150一体地形成,则触摸屏可以称作触摸屏显示器。当触摸屏布置在透明显示器150的前面时,用户可以直接操作GUI 153。例如,用户可以仅将他或她的手指放置在将要控制的对象上,而不存在触摸板的一对一的关系。
触摸板被放置在与透明显示器150不同的另一平面上。例如,透明显示器150通常处于垂直面上,并且触摸板处于水平面中。这使得与触摸屏相比,触摸板的使用较不直观并且相当困难。除了触摸屏,输入装置170可以是多点输入装置。
控制器190可以识别施加于输入装置170的手势171,并且可以基于该手势171来控制透明显示设备100。此处,手势可以被限定为与输入装置170的预定交互,其被映射到至少一个特定计算操作。手势171可以通过人的多种手指(具体地,人的手指的移动)产生。另选地,手势可以通过笔尖产生。
输入装置接收手势171并且控制器190实施被配置成执行与手势171相关的操作的命令。此外,存储器180可以包括手势操作程序181,该手势操作程序181可以是操作系统的一部分或是补充应用。手势操作程序181包括用于识别手势171的产生和/或向至少一个软件代理指示响应于手势171必须采取哪个步骤的一系列命令。
当用户产生一个或更多个手势时,输入装置170将手势信息传送到控制器190。使用从存储器180(具体地,手势操作程序181)传送的命令,控制器190解释手势并且控制透明显示设备的各个部件,诸如存储器180、透明显示器150、音频输出单元160、信号处理器140、网络接口130和输入装置。手势171可以被检测为用于执行存储在存储器180中的应用的操作的命令、用于修改显示在透明显示器150上的GUI对象的命令,用于修改存储在存储器180中的数据的命令以及用于执行网络接口130和信号处理器的操作的命令。例如,这种命令可以涉及缩放、平移、滚动、翻页、旋转、大小调节、图像通道变换、内容接收和因特网接入。另外,这种命令可以涉及特定程序的启动、文件或文档的打开、菜单查看、选择、命令执行、登陆因特网站点系统、允许识别的人对计算机系统的限制区域的访问、载入涉及用户对壁纸等的偏好布置的用户配置等。
控制器190可以基于从输入装置170接收的对象选择信息来检测对象。如果对象选择信息是按下事件或抬起事件,则控制器可以检测在产生按下事件的第一位置处和产生抬起事件的第二位置处具有形状的对象。此处,控制器190可以根据从拍摄装置90接收的照片识别出朝向透明显示器的人的眼睛方向。此后,控制器可以检测在包括第一位置和第二位置的区域上看到的对象。而且,控制器190可以控制关于被检测对象的对象信息的获取并且可以控制透明显示器150显示获取的对象信息。
控制器190可以从输入装置170接收对象选择信息,并且可以识别是否经由透明显示器150看到由接收的对象选择信息指示的对象。此处,控制器190可以将拍摄装置90的当前图像帧与前一个图像帧进行比较以识别是否拍摄到新的特定对象。当拍摄到新的特定对象时,控制器190可以提取被拍摄对象的图像并且可以识别被拍摄对象是否是对象选择信息指示的对象。控制器190可以使用拍摄的对象图像来控制对象信息的获取。而且,控制器190可以将拍摄的对象的图像或所获取的对象信息与对象选择信息进行比较以识别拍摄的对象是否是对象选择信息指示的对象。
如果看到由对象选择信息指示的对象,则控制器190可以显示标记,该标记指示具有处于透明显示器150上的对象的形状的区域。而且,控制器190可以控制关于对象的对象信息的获取,并且可以控制透明显示器150显示所获取的对象信息。
外部信号接收器135可以提供能够将外部装置与透明显示设备100连接起来的接口。此处,外部装置可以是指DVD(多功能数字光盘)、蓝光、游戏单元、便携式摄像机、计算机(笔记本式)和各种类型的视频或音频输出单元。透明显示设备100可以控制显示从外部信号接收器135接收的视频信号和音频信号,并且可以存储或使用数据信号。
外部装置可以是拍摄装置90。拍摄装置90可以包括多个照相机并且可以拍摄人的照片。拍摄装置90识别人的脸部区域并且聚焦于脸部区域以进行放大并对脸部区域进行拍摄。此处,拍摄装置100拍摄的人手的形状可以被识别为手势。即,控制器190可以实施被配置成执行与所识别的手部形状相关的操作的命令。
拍摄装置90可以拍摄透明显示器150后面的对象。即,拍摄装置90可以根据透明显示设备100的控制信号拍摄在人的眼睛方向上经由透明显示器150看到的对象。拍摄装置可以识别并聚焦于对象区域,并且进行放大以拍摄对象。拍摄装置90可以在很多不同位置拍摄对象。
图9是例示根据本发明的示例性实施方式的控制器的配置的框图,该控制器构成了透明显示设备。
参考图9,控制器190可以包括眼睛方向识别器910、中央处理器920和对象检测器930。
眼睛方向识别器910可以从拍摄装置92拍摄的图像帧中检测脸部区域。眼睛检测识别器910从检测到的脸部区域中检测眼睛图像并且可以使用检测到的眼睛图像确定眼睛方向。
根据确定眼睛方向的实施方式,眼睛方向识别器910计算各个存储的眼睛图像与检测到的眼睛图像之间的差异,并且可以选择与检测到的眼睛图像具有最小差异的眼睛图像。眼睛方向识别器910可以把由映射到所选择的眼睛图像的眼睛方向信息指示的眼睛方向确定为检测到的眼睛图像的眼睛方向。
中央处理器920可以从拍摄装置92拍摄的图像帧中检测手部区域。中央控制器920将各个存储的手部形状中与检测到的手部区域进行比较,并且可以选择这些存储的手部形状中与在检测到的手部区域中显示的手部形状相同的手部形状。中央处理器920可以实施指示执行与所选择的手部形状相关的操作的命令。
对象检测器930控制拍摄装置94的焦点朝向对象选择信息所指示的对象移动,并且控制拍摄装置94进行拍摄。
图10是例示根据本发明的示例性实施方式的用于检测对象的方法的过程的流程图。
参考图10,中央处理器920检测透明显示器150上的第一位置处的按下事件(S1000)。
中央处理器920检测透明显示器150上的第二位置处的抬起事件(S1010)。
眼睛方向识别器910确定眼睛方向(S1020)。此处,眼睛方向识别器910可以将在人所处的空间中朝向包括第一位置和第二位置的区域的方向确定为眼睛方向。
对象检测器930检测在由眼睛方向识别器910确定的眼睛方向上经由包括透明显示器150上的第一位置和第二位置的区域看到的对象(S1030)。此处,对象可以包括人、动物、物品、车辆、建筑或自然物中的至少一个。根据另一实施方式,对象可以是在垂直于透明显示器150的方向上经由包括透明显示器150上的第一位置和第二位置的区域看到的对象。
中央处理器920控制关于被检测对象的信息的获取(S1040)。此处,作为关于对象的信息的对象信息可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象位置信息或对象的详细说明中的至少一个。
在获取关于对象的信息之前,中央控制器920可以计算被检测对象的位置信息。然后,中央处理器可以控制显示计算出的位置信息并且可以使用所计算的位置信息来获取关于被检测对象的信息。此处,中央处理器920可以从位置应用服务器20或从其位置信息获取被检测对象的位置信息。通过使用诸如小区ID、AOA、TDOA等基于网络的技术,中央处理器920可以经由从基站40接收的电磁波来确定透明显示设备100的位置。通过使用诸如到达时间(TOA)、全球定位系统(GPS)和混合定位系统等基于手持机的定位技术,中央控制器920可以经由从卫星30接收的信号确定其位置。另选地,通过使用图像识别技术或基于超声波的技术,中央处理器920可以被检测对象相对于显示设备100的位置。
透明显示器150显示所获取的对象信息(S1050)。此处,对象信息可以与图2和图7中示出的画面一同显示。
中央处理器920识别是否接收到信息移动命令(S1060)。此处,信息移动命令可以是通过由拍摄装置92拍摄的图像帧中包括的手部形状识别的手势产生的命令,或者可以是通过按下事件、拖拽事件和抬起事件识别的动态手势产生的命令。
当接收信息移动命令时,中央处理器920基于接收的信息移动命令进行控制以移动在透明显示器150上显示的信息的位置(S1070)。
图11a至图11e是例示显示关于被检测对象的信息和所识别的手势的画面的图。图12是例示显示请求显示关于被检测对象的信息的手势的画面的图。
参考图11a至图11e,关于在画面1110上检测到的对象1111的对象信息1113位于被检测对象1111的图像所在的区域中。当在显示画面1110上识别了手势1115时,画面1110转变为画面1120。当执行与手势115相关的命令时,所识别的手势1115可以显示在画面上或者可以从画面消失。根据实施方式,所识别的手势1115可以不显示在画面上。
画面1120上的对象信息1113根据手势1115的人的手指指示的方向移动以显示在区域1123中。当在显示的画面1130上识别了手势1125时,画面1120转变为画面1130。
画面1130上的对象信息1123根据手势1125的人的手指指示的方向移动以显示在区域1133中。当在显示画面1130上识别了手势1135时,画面1130转变为画面1140。
画面1140上的对象信息1133根据手势1135的人的手指指示的方向移动以显示在区域1143中。当在显示画面1140上识别了手势1145时,画面1140转变为画面1150。
画面1150上的对象信息1143根据手势1145的人的手指指示的方向移动以显示在区域1153中。当在显示画面1150上识别了手势1155时,画面1150转变为画面1210。
根据显示停止命令(与手势1155相关的命令),对象信息1153不显示在画面1210上。当在显示画面1210上识别了手势1215时,对象信息1153可以显示在画面1210上。此时,对象信息可以显示在前一个画面1150的区域1153上,或者显示在指定为缺省的区域中。
图13是例示根据示例性实施方式的用于检测对象的方法的过程的流程图。
参考图13,对象检测器930控制拍摄装置的焦点的移动,使得拍摄装置可以拍摄对象(S1300)。此处,拍摄装置94可以由多个照相机构成,并且对象检测器930可以控制各个照相机的移动。
对象检测器930控制拍摄装置94以在移动到的焦点执行拍摄(S1310)。
对象检测器930控制对象以接收拍摄装置94拍摄的图像(S1320)。对象检测器930可以从拍摄装置94输出的图像帧中提取对象图像。另外,对象检测器930可以根据拍摄装置94拍摄的图像帧计算对象的位置。
图14是例示根据本发明的示例性实施方式的用于获取对象信息的方法的过程的流程图。
参考图14,中央处理器920读取存储在存储器180中的图像(S1400)。此处,存储的图像可以是靠近透明显示设备100的对象的图像。这些对象的图像可以提前拍摄。
中央处理器920将读取的图像与拍摄的图像进行比较(S1410)。此处,如果包括在读取的图像中的对象的轮廓与包括在拍摄的图像中的对象的轮廓具有相同的图案,则包括在读取的图像中的对象和包括在拍摄的图像中的对象可以被认为相同。换句话说,如果将轮廓的图案控制为具有相同的大小时这些对象匹配,则包括在读取的图像中的对象可以认为与包括在拍摄的图像中的对象相同。
中央处理器920识别是否发现相同的对象(S1420)。
当发现相同的对象时,中央处理器920读取与在存储器180中发现的图像相关的信息(S1430)。此处,读取的信息可以用作关于被包括在拍摄的图像中的对象的信息,并且读取的信息可以是透明显示设备100附近的对象的被预先存储的对象信息。
图15是例示根据另一实施方式的用于获取对象信息的方法的过程的流程图。
参考图15,中央处理器920请求服务器检索关于对象的信息(S1500)。此处,服务器可以是对象信息提供服务器10。另外,中央处理器920可以向对象信息提供服务器10发送检索请求信号。检索请求信号可以包括对象图像,并且可以包括对象的位置信息。
中央处理器920进行控制以接收来自服务器的检索结果(S1510)。
图16是例示根据本发明的示例性实施方式的用于检测对象的方法的过程的流程图。
参考图16,输入装置170接收对象选择信息(S1600)。此处,对象选择信息可以包括图像、对象名称或对象属性中的至少一个,并且可以经由图4中示出的GUI 400输入。
中央处理器920进行控制以将接收的对象选择信息存储在存储器180中(S1610)。
中央处理器920识别是否检测到由存储的对象选择信息指示的对象(S1620)。此处,中央处理器920可以识别是否经由透明显示器150看到由存储的对象选择信息指示的对象。中央处理器920可以识别是否在从对象检测器930输出的对象图像中看到对象。对象检测器930可以将当前图像帧与拍摄装置90的前一个图像帧进行比较,并且可以识别是否拍摄到新的特定对象。如果拍摄到新的特定对象,则对象检测器930可以控制拍摄装置90的焦点移动到该对象,从拍摄装置90获取具有被拍摄到的对象的图像帧,并且可以从获取的图像帧中提取出该对象的对象图像。
控制器190可以利用对象检测器903提取出的对象图像来控制对象信息的获取。此后,控制器190可以将所拍摄的对象的图像或所获取的对象信息与对象选择信息进行比较,以识别新拍摄的对象是否是对象选择信息指示的对象。
当检测到对象选择信息所指示的对象时,中央处理器920进行控制以获取被检测对象的信息(S1630)。此处,对象信息(关于对象的信息)可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息以及对象的详细说明中的至少一个。步骤S1630的具体过程可以根据如图14或图15所示的获取对象信息的过程来执行。
在获取关于对象的信息之前,中央控制器920可以计算被检测对象的位置信息。然后,中央处理器920可以进行控制以显示计算出的位置信息,并且可以使用计算出的位置信息来获取关于被检测对象的信息。此处,中央处理器920可以从位置应用服务器20或从其位置信息获取被检测对象的位置信息。通过使用诸如小区ID、AOA、TDOA等基于网络的技术,中央处理器920可以经由从基站40接收的电磁波来确定透明显示设备100的位置。通过使用诸如到达时间(TOA)、全球定位系统(GPS)和混合定位系统等基于手持机的定位技术,中央控制器920可以经由从卫星30接收的信号来确定其位置。另选地,通过使用图像识别技术或基于超声波的技术,中央处理器920可以确定被检测对象的相对于透明显示设备100的位置。
透明显示器150显示获取的对象信息(S1640)。此处,对象信息可以与图5和7中示出的画面一同显示。而且,中央处理器920可以进行控制以显示被配置成指示透明显示器上具有被检测对象的形状所处的区域的标记。
尽管没有示出,图16的用于检测对象的方法还可以包括图10的用于检测对象的方法中的步骤S1060和S1070。
图17是例示根据本发明的另一实施方式的透明显示设备的配置的框图。
图17的透明显示设备100包括调谐器110、解调制器120、网络接口130、信号处理器140、透明显示器150、音频输出单元160、输入装置170、存储器180、控制器190、外部信号接收器1735以及拍摄装置1790。控制器190控制拍摄装置1790的移动、焦点、放大和缩小以及拍摄。拍摄装置1790根据控制器的控制对经由透明显示器150看到的后面对象和位于透明显示器150附近的人进行拍摄。拍摄装置1790可以包括多个照相机。
图17的透明显示设备100包括与图8的透明显示设备100不同的拍摄装置1790。图17的透明显示设备100的其他部件分别对应于图8的透明显示设备100的其他部件,将略去对这些其他部件的详细描述。
图18是例示根据本发明的另一示例性实施方式的地区信息提供系统的配置的图。
参考图18,根据本发明的实施方式的地区信息提供系统1800包括地区信息提供服务器1810、位置应用服务器1820、网络1850和1860以及透明显示设备100。此处,地区信息提供服务器1810也可以执行对象信息提供服务器10的功能。而且,图1中示出的对象信息提供服务器10也可以执行地区信息系统服务器1810的功能。
地区信息提供服务器1810可以存储地区图像、位置信息、关于地区的信息、将地区图像与关于地区的信息关联起来的关联信息以及将位置信息与关于地区的信息关联起来的关联信息。而且,关于地区的信息可以包括地区名称、关于包括在该地区中的各个点的点信息、该地区的地图或地区介绍中的至少一个。关于地区的信息可以被称为‘地区信息’,并且地区图像可以是地区的图像。
关联信息可以是将信息映射到信息的信息,例如,关系型数据库系统中的表的名称。地区信息提供服务器1810可以检索经由关联信息而映射到特定地区图像的地区信息,并且可以检索经由关联信息而映射到位置信息的地区信息。
地区信息提供服务器1810可以从透明显示设备100接收检索请求信号。此处,检索请求信号可以包括被检测地区的图像和位置信息。被检测地区的图像可以是由透明显示设备100拍摄的照片或从拍摄的照片中提取出的地区图像。
当从透明显示设备100接收包括被检测地区的图像的检索请求信号时,地区信息提供服务器1810可以从接收的图像中识别出相应的地区,并且可以检索关于所识别的地区的信息。此后,地区信息提供服务器1810可以向透明显示器100发送检索到的关于地区的信息。此处,地区信息提供服务器1810可以通过在接收的图像与存储的地区图像之间进行的比较来识别地区。换句话说,地区信息提供服务器1810从存储的图像中找出与所接收的图像相同或最相似的图像,并且利用找出的地区图像和存储的关联信息来检索关于所识别的地区的信息。
当从透明显示设备100接收到包括关于被检测地区的位置信息的检索请求信号时,地区信息提供服务器1810可以确定被映射到所接收的位置信息的地区,并且可以检索关于所确定的地区的信息。此后,地区信息提供服务器1810可以向透明显示设备100发送关于该地区的检索信息。此处,地区信息提供服务器1810可以利用接收的位置信息和存储的关联信息来检索关于所确定的地区的信息。
当从透明显示设备100接收包括被检测地区的图像和位置信息的检索请求信号时,地区信息提供服务器1810可以基于接收的地区图像和位置信息来识别相应的地区,并且可以检索关于所识别的地区的信息。此后,地区信息提供服务器1810可以向透明显示设备100发送关于该地区的检索信息。此处,地区信息提供服务器1810可以检测被映射到区域图像的多个地区信息中与被映射到所接收的位置信息的地区信息相对应的检测的地区信息作为关于所识别的地区的信息。
位置应用服务器1820可以向透明显示设备100提供基于位置的服务(LBS)。位置应用服务器1820可以向透明显示设备100提供关于特定地区的位置信息以及特定位置的地图和地理信息。而且,位置应用服务器1820可以向透明显示设备100提供关于位于特定地区中的熟人的信息。此处。位置应用服务器1820可以对应于图1中示出的位置应用服务器20,并且可以执行图1中示出的位置应用服务器20的功能。反之,图1中示出的位置应用服务器20可以执行图18中示出的位置应用服务器1820的功能。
地区信息提供服务器1810、位置应用服务器1820以及透明显示设备100可以通过网络彼此相连。网络可以是因特网或内联网、BCN(宽带融合网络)和UBCN(超宽带融合网络)。
网络可以由骨干网1860和用户网1850构成。骨干网1860可以是X.25网络、帧中继网络、ATM网络、多协议标签交换网络(MPLS)和通用多协议标签交换网络(GMPLS)中的一个或两个的组合。用户网1850可以是光纤到户(FTTH)、非对称数字用户线(ADSL)、有线电视网络、无线LAN(IEEE 802.11B、IEEE 802.11A、IEEE802.11G和IEEE 802.11N)、无线宽带(WIBro)、Wimax和高速下行链路分组接入(HSDPA)中的一个。透明显示设备100可以与用户网1850相连接。
透明显示设备100基于输入的地区选择信息来选择经由透明显示器看到的背景的区域,并且可以在透明显示器上显示所选择的区域的图像和至少一个菜单。另外,当选择了被显示菜单中的一个时,透明显示设备100可以显示与所选择的菜单相关的画面。此处,透明显示设备100对应于图1中的透明显示设备100,并且透明显示设备100可以执行图1中示出的透明显示设备100的功能。反之,图1中的透明显示设备100可以执行图18的透明显示设备的功能。即,透明显示设备100可以组合地执行参考图1至17描述的功能以及参考图18至图28描述的功能。
图19是例示经由透明显示器看到的背景的图。
参考图19,当用户选择区域1910时,透明显示设备100可以选择经由区域1910看到的背景,并且可以对所选择的背景进行拍摄以显示拍摄的地区图像。此处,所选择的背景可以是在垂直于透明显示器的方向上经由区域1910看到的背景,或者可以是在用户位置的方向上在区域1910中看到的背景。
图20a至图20c是例示根据实施方式的用于输入地区选择信息的方法的图。
参考图20a图至20c,透明显示设备100检测触摸屏显示器2000上的第一位置2010处的按下事件。人的手指2001从第一位置2010移动到第二位置2020。此时,人的手指2001可以与透明显示设备100的触摸屏显示器2000相接触地移动,人的手指2001和触摸屏显示器2000之间的参数变得比预定阈值高。当在第二位置2020处检测到拖拽事件时,透明显示设备100可以在触摸屏显示器2000上显示指示包括第一位置2010和第二位置2020的区域的标记2021。
人的手指2001移动到第三位置2030。当人的手指与触摸屏显示器2000分开或者参数变得低于预定阈值时,透明显示设备100检测到第三位置2030处的抬起事件。当检测到抬起事件时,透明显示设备100可以显示指示包括第一位置2010和第三位置2030的区域的标记2031,并且可以通过触摸屏显示器2000选择在标记的区域中看到的背景。此处,第一位置2010处的按下事件和第三位置2030处的抬起事件可以被识别为一个地区选择信息。输入的地区选择信息所指示的区域可以是包括第一位置2010和第三位置2030的区域。另外,被选择为地区选择信息的区域2031可以被称为‘剪修(crop)区域’,并且透明显示设备100可以选择经由剪修区域看到的背景的区域。
图21是例示根据一个实施方式的显示拍摄的背景的区域的图像的画面的图。
参考图21,透明显示设备100可以显示包括背景的部分区域的拍摄图像2100。而且,透明显示设备100还可以在画面2100上显示拍摄的背景的位置信息2110。
透明显示设备100可以从位置应用服务器1820获取所拍摄的区域的位置信息,或者可以从其位置信息计算位置信息。
透明显示设备100可以根据基于网络的技术(例如,小区ID、AOA和TDOA系统等)经由从基站40接收的无线电波确定其位置。另外,透明显示设备100可以根据基于手持机的定位技术(例如,到达时间(TOA)、全球定位系统(GPS)和混合定位系统等)从卫星30接收的信号确定其位置。
通过使用基于图像识别的技术,可以确定拍摄的地区相对于透明显示设备100的位置。基于监督学习算法,透明显示设备100可以从通过多个拍摄装置拍摄的包括该地区的照片来确定该地区的位置。另选地,透明显示设备100可以通过使用基于虚拟视觉的技术来确定地区的位置。如果使用基于图像识别的技术来确定地区的位置,则透明显示设备100可以以小于几厘米的精度来检测地区的位置,并且可以更精确地检测地区的位置。
拍摄的地区相对于透明显示设备100的位置可以使用基于超声波的技术来确定。透明显示设备100朝向地区拍摄方向发射超声波,并且可以基于发射的超声波来计算被检测地区的距离。而且,透明显示设备100可以基于超声波的发射方向来确定地区的方位角。透明显示设备100可以基于计算出的距离和确定的方位角来确定拍摄的地区的位置。
透明显示设备100还可以在画面2100上显示地区详情显示菜单2120和联系显示菜单2130中的至少一个。
图22是例示显示背景的区域的地图的画面的图。
参考图22,当用户在画面2100上选择地区详情显示菜单2120时,透明显示设备100可以显示所拍摄的地区的地图2200。而且,透明显示设备100还可以在画面2200上显示信息显示对象2210、2220、2230和2240,以显示地区信息。
信息显示对象可以位于与要显示的关于点的信息相关的点处。信息显示对象2210被配置成显示与DDD市场相关的地区信息,并且可以位于地图上具有DDD市场的点处。信息显示对象2220被配置成显示与AAA餐馆相关的地区信息,并且可以位于地图上具有AAA餐馆的点处。信息显示对象2230被配置成显示与BBB汽车修理厂相关的地区信息,并且可以位于地图使具有BBB汽车修理厂的点处。信息显示对象2240被配置成显示与CCC理发店相关的地区信息,并且可以位于地图使具有CCC理发店的点处。
图23是例示靠着图5中示出的地图的背景显示地区信息的画面的图。
参考图23,当按下事件区域产生在具有信息显示对象2200、2220、2230和2240的区域中时,透明显示设备100可以在画面上显示与位于产生按下事件的点处的信息显示对象相关的地区信息。此处,地区信息可以包括联系人号码、地区的类型或介绍中的至少一个。
当按下事件产生在画面2220上具有信息显示对象2220的区域中时,透明显示设备100可以在画面2300上显示与信息显示对象2220相关的地区信息2310。
图24是例示根据另一实施方式显示背景的部分区域的地图的画面的图。
参考图24,当用户在画面2100上选择联系人显示菜单2130时,透明显示设备100可以显示所拍摄的区域的地图2400。而且,透明显示设备100还可以显示联系人对象2410、2420和2430以显示地区信息。此处,联系人对象2410、2420和2430分别指示特定的人,并且可以包括用于与指示的人进行电话联系的按钮2411、2421和2431以及用于发送文本消息的按钮2412、2422和2432。而且,联系人对象2410、2420和2430还可以分别包括由联系人对象2410、2430和2430指示的人的照片2413、2423和2433。
当用户点击按钮2411、2432和2431中的一个时,透明显示设备100可以发送信号以请求电话呼叫由包括被点击按钮的联系人对象指示的人的电话号码。当用户点击按钮2141、2422和2432中的一个时,透明显示设备100可以向由包括被点击按钮的联系人对象指示的人的电话号码发送包括文本消息的信号。
联系人对象2410、2420和2430可以位于被如此指示的人所在的点处。由‘So-Yul’指示的联系人对象2410可以位于地图上So-Yul所在的点处,并且由‘Vakkil’指示的联系人对象2420可以位于地图2400上Vakki所在的点处。由‘JooJoo’指示的联系人对象2430可以位于地图2400上JooJoo所在的点处。此处,可以从位置应用服务器1820接收某个人所在的地区的位置信息。
图25是例示根据本发明的示例性实施方式的用于提供地区信息的方法的过程的流程图。
参考图25,中央处理器920检测透明显示器150上的第一位置处的按下事件(S2500)。
中央处理器920检测透明显示器150上的第二位置处的抬起事件(S2510)。
眼睛方向识别器910确定眼睛方向(S2520)。此处,眼睛方向识别器910可以将一个人所在的预定空间中包括第一位置和第二位置的方向确定为眼睛方向。包括第一位置和第二位置的区域可以被称为“剪修区域”。
地区检测器930选择在由眼睛方向识别器910确定的眼睛方向上经由透明显示器150上的包括第一位置和第二位置的区域看到的区域,并且进行控制以拍摄所选择的区域(S2530)。此处,根据另一实施方式,区域检测器930可以选择在垂直于透明显示器150的方向上经由包括第一位置和第二位置的区域看到的区域。对象检测器930可以称为地区检测器930。
中央处理器920进行控制以显示的所选择的地区的拍摄图像和至少一个菜单(S2540)。此处,显示的画面可以是图21中示出的画面2100。另外,中央处理器920可以计算被检测对象的位置信息。中央处理器920可以进行控制以在步骤S2540中显示计算出的位置信息,并且可以使用计算出的位置信息来获取关于被检测对象的信息。
中央处理器920可以从位置应用服务器1820获取关于被检测对象的位置信息或从其位置信息计算关于被检测对象的位置信息。通过使用诸如小区ID、AOA、TDOA等基于网络的技术,中央处理器920可以经由从基站40接收的电磁波来确定透明显示设备100的位置。通过使用诸如到达时间(TOA)、全球定位系统(GPS)和混合定位系统等基于手持机的定位技术,中央控制器920可以经由从卫星30接收的信号来确定其位置。另选地,通过使用基于图像识别的技术或基于超声波的技术,中央处理器920可以确定被检测对象相对于显示设备100的位置。
中央处理器920识别是否选择了至少一个显示的菜单中的一个(S2250)。
如果选择了所显示的菜单中的一个,则中央处理器920可以进行控制以显示的所选菜单相关的画面(S2560)。此处,相关画面可以包括拍摄的地区的地图和关于拍摄的地区的信息。相关画面可以是图22中示出的画面2200或图24中示出的画面2400。作为关于地区的信息,地区信息可以包括地区名称、关于包括在地区中的点的点信息、地区地图、地区地址或地区介绍中的至少一个。地区信息可以是从存储在存储器180中的信息中检索出的信息或从地区信息提供服务器10接收的信息。
中央控制器920识别是否接收到区域移动命令(S2570)。此处,信息移动命令可以是由根据拍摄装置92拍摄的图像帧中的手部形状识别的手势产生的命令,或者可以是通过按下事件、拖拽事件和抬起事件识别的动态手势产生的命令。
当接收到区域移动命令时,地区检测器930根据该区域移动命令移动剪修区域,并且选择经由移动的剪修区域看到的背景。此后,区域检测器930拍摄与所选择的背景相对应的地区(S2580)。
中央处理器920进行控制以显示的地区的拍摄图像和至少一个菜单(S2590)。
图26a至图26d是例示显示所选择的背景的区域和所识别的手势的画面的图。
参考图26a至图26d,当在显示在透明显示器上的剪修区域中看到的地区的地区图像的画面2610上识别了手势2611时,剪修区域根据手势2611向上移动,画面2610转变为显示在向上移动后的剪修区域中看到的地区的地区图像的画面2620。当执行与手势2611相关的命令时,所识别的手势2611可以显示在画面上或从画面消失。根据实施方式,所识别的手势2611可以不显示在画面上。
当在显示在剪修区域中看到的地区的地区图像的画面2620上识别了手势2621时,剪修区域沿着所识别的手势2621向右移动,并且画面2620转变为显示在向右移动后的剪修区域中看到的地区的地区图像的画面2630。
当在显示在剪修区域中看到的地区的地区图像的画面2630上识别了手势2631时,剪修区域根据手势2631向左移动,并且画面2630转变为显示在向左移动后的剪修区域中看到的地区的地区图像的画面2640。
当在显示在剪修区域中看到的地区的地区图像的画面2640上识别了手势2641时,剪修区域根据手势2641向下移动,并且画面2640转变为显示在向下移动后的剪修区域中看到的地区的地区图像的画面。
图27是例示根据示例性实施方式的用于识别眼睛方向的方法的过程的流程图。
参考图27,眼睛方向识别器910从拍摄装置92拍摄的运动图片中检测脸部区域(S2700)。
眼睛方向识别器910从检测的脸部区域中检测眼睛图像(S2710)。
眼睛方向识别器910将检测的眼睛图像与存储的眼睛图像进行比较(S2720)。此处,眼睛方向识别器910可以基于比较的结果来计算各个存储的眼睛图像与检测的眼睛图像之间的差异。
眼睛方向识别器910基于比较结果从存储的眼睛图像中选出与检测的眼睛图像最相似的眼睛图像(S2730)。此处,眼睛方向识别器910可以从存储的眼睛图像中选出与检测的眼睛图像具有最小差异的眼睛图像。
眼睛方向识别器910根据选择的眼睛图像来确定眼睛方向(S2740)。此处,眼睛方向识别器910可以读取与选择的眼睛图像一致的眼睛方向信息,并且可以将检测的眼睛图像的眼睛方向确定为读取的眼睛方向信息所指示的眼睛方向。
图28是例示根据本发明的另一实施方式的用于提供地区信息的方法的过程的流程图。
参考图28,输入装置170可以接收输入的地区选择信息(S2800)。此处,地区选择信息可以是按下事件。
地区检测器930可以相对于产生下降事件的位置将特定区域确定为剪修区域(S2810)。此处,特定区域的大小被缺省地设置或由用户设置。
眼睛方识别器910可以确定眼睛方向(S2820)。此处,眼睛方向识别器910可以将用户的眼睛位置处朝向被区域检测器930确定的剪修区域的方向确定为眼睛方向。另选地,眼睛方向识别器910可以将基于用户的眼睛图像确定的方向确定为眼睛方向。
地区检测器930选择在由眼睛方向识别器910确定的眼睛方向上经由剪修区域看到的地区,并且进行控制以拍摄所选的区域(S2830)。此处,根据另一实施方式,地区检测器930可以选择在垂直于透明显示器150的方向上经由剪修区域看到的区域。
中央处理器920进行控制以显示的所选择的区域的拍摄图像和至少一个菜单(S2840)。此处,显示的画面可以是图21中示出的画面(S2100)。
在图28中没有示出,图29中示出的用于提供地区信息的方法还可以包括与图25中示出的步骤S2550至S2580相同的步骤。
本发明可以实施为计算机可读记录介质中计算机可读的代码。记录介质包括能够存储计算机装置可读的数据的所有类型的记录装置。例如,计算机可读记录介质可以是ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置,并且可以实施为载波类型(例如,经由因特网传输)。计算机可读记录介质可以分布在经由网络连接的计算机单元中,并且分布式计算机可读的代码可以存储在记录介质中以被实施。
对于本领域技术人员而言很明显,在不偏离本发明的精神或范围的条件下,可以在本发明的实施方式中做出各种修改和变型。因而,旨在表明,本发明涵盖落入所附权利要求及其等同物的范围内的本发明的修改和变型。

Claims (15)

1.一种用于检测对象的方法,该方法包括以下步骤:
在透明显示器上接收对象选择信息;
确定与所接收的对象选择信息相关联的眼睛方向;
基于所确定的眼睛方向选择在所述透明显示器的由所接收的对象选择信息限定的区域内显示的至少一个对象;
获取关于所选择的对象的信息;以及
在所述透明显示器上显示所获取的信息。
2.根据权利要求1所述的方法,其中,所述接收对象选择信息的步骤包括以下步骤:
检测所述透明显示器上的第一位置处的按下事件;以及
检测所述透明显示器上的第二位置处的抬起事件,
其中,所述区域包括所述透明显示器上的所述第一位置和所述第二位置。
3.根据权利要求1所述的方法,其中,所述对象选择信息包括图像、对象名称或对象属性中的至少一个。
4.根据权利要求1所述的方法,其中,显示用于突出所选择的对象的形状的标记。
5.根据权利要求1所述的方法,其中,所述获取关于所选择的对象的信息的步骤包括以下步骤:
向服务器发送检索关于所选择的对象的信息的请求;以及
从所述服务器接收检索结果,
其中,关于所选择的对象的信息包括被检测到的对象的图像或位置信息中的至少一个。
6.根据权利要求5所述的方法,其中,所述获取关于所选择的对象的信息的步骤包括以下步骤:
从存储器检索与所选择的对象相关联的对象;
将所选择的对象与检索到的对象进行比较;以及
当检测到的对象与检索到的对象相同时,获取检索到的对象的信息,检索到的对象的信息对应于关于所选择的对象的信息。
7.根据权利要求1所述的方法,其中,所选择的对象包括人、动物、物品、车辆、建筑或自然物中的至少一个。
8.根据权利要求1所述的方法,其中,关于所选择的对象的信息包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象位置信息或对象的详细说明中的至少一个。
9.根据权利要求1所述的方法,其中,所显示的信息根据识别的手势而移动。
10.一种透明显示设备,该透明显示设备包括:
透明显示器;以及
控制器,其被配置成接收对象选择信息,确定与接收的对象选择信息相关联的眼睛方向,基于所确定的眼睛方向选择在所述透明显示器的由接收的对象选择信息限定的区域内显示的至少一个对象,获取关于所选择的对象的信息,并且控制所述透明显示器显示所获取的信息。
11.根据权利要求10所述的透明显示设备,其中,所述控制器检测所述透明显示器上的第一位置处的按下事件和所述透明显示器上的第二位置处的抬起事件,其中,所述区域包括所述透明显示器上的所述第一位置和所述第二位置。
12.根据权利要求10所述的透明显示设备,其中,所述对象选择信息包括图像、对象名称或对象属性中的至少一个。
13.根据权利要求10所述的透明显示设备,其中,所述控制器控制所述透明显示器显示用于突出所选择的对象的形状的标记。
14.根据权利要求10所述的透明显示设备,其中,所述控制器向服务器发送请求检索关于所选择的对象的信息的检索请求信号,并且进行控制以从所述服务器接收检索结果,关于所选择的对象的信息包括检测到的对象的图像或位置信息中的至少一个。
15.根据权利要求10所述的透明显示设备,其中,所述控制器从存储器中检索与所选择的对象相关的对象,将所选择的对象与检索到的对象进行比较,并且在检测到的对象与检索到的对象相同时读出并获得检索到的对象的信息,检索到的对象的信息对应于关于所选择的对象的信息。
CN201110276141.2A 2010-09-16 2011-09-16 透明显示设备和使用透明显示设备提供信息的方法 Active CN102402390B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR1020100091195A KR101737839B1 (ko) 2010-09-16 2010-09-16 투명 디스플레이 장치 및 객체 탐지 방법
KR10-2010-0091195 2010-09-16
KR10-2010-0091194 2010-09-16
KR1020100091194A KR101663619B1 (ko) 2010-09-16 2010-09-16 투명 디스플레이 장치 및 지역 정보 제공 방법

Publications (2)

Publication Number Publication Date
CN102402390A true CN102402390A (zh) 2012-04-04
CN102402390B CN102402390B (zh) 2016-04-20

Family

ID=44763862

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110276141.2A Active CN102402390B (zh) 2010-09-16 2011-09-16 透明显示设备和使用透明显示设备提供信息的方法

Country Status (3)

Country Link
US (1) US20120069050A1 (zh)
EP (1) EP2431895B1 (zh)
CN (1) CN102402390B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102801962A (zh) * 2012-08-22 2012-11-28 华南师范大学 用于物联网的在线物体图像信息获取装置及获取方法
CN103873760A (zh) * 2012-12-17 2014-06-18 联想(北京)有限公司 一种对焦点调整方法及电子设备
CN104063116A (zh) * 2013-03-19 2014-09-24 联想(北京)有限公司 一种信息处理的方法及电子设备
CN104204994A (zh) * 2012-04-26 2014-12-10 英特尔公司 增强现实计算装置、设备和系统
CN104375778A (zh) * 2014-11-25 2015-02-25 湖南大学 智能交互式水族箱展示系统
CN104641328A (zh) * 2012-09-19 2015-05-20 三星电子株式会社 用于在透明显示装置上显示信息的系统和方法
CN104731840A (zh) * 2013-12-23 2015-06-24 岳造宇 电子装置及其显示的动态影像的对象信息查询方法
US9965137B2 (en) 2012-09-10 2018-05-08 Samsung Electronics Co., Ltd. Transparent display apparatus and object selection method using the same
CN111142672A (zh) * 2019-12-30 2020-05-12 星络智能科技有限公司 屏幕显示内容操控方法、智能家居交互设备及存储介质

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101868352B1 (ko) * 2012-05-14 2018-06-19 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
JP5964190B2 (ja) * 2012-09-27 2016-08-03 京セラ株式会社 端末装置
US10127724B2 (en) * 2013-01-04 2018-11-13 Vuezr, Inc. System and method for providing augmented reality on mobile devices
KR102051656B1 (ko) * 2013-01-22 2019-12-03 삼성전자주식회사 투명 디스플레이 장치 및 그 디스플레이 방법
CN104035706B (zh) * 2013-03-08 2017-07-28 宏达国际电子股份有限公司 显示方法以及电子装置
US9715282B2 (en) * 2013-03-29 2017-07-25 Microsoft Technology Licensing, Llc Closing, starting, and restarting applications
US9426358B2 (en) * 2014-03-11 2016-08-23 Nokia Technologies Oy Display of video information
US9910518B2 (en) * 2014-10-01 2018-03-06 Rockwell Automation Technologies, Inc. Transparency augmented industrial automation display
JP6684559B2 (ja) * 2015-09-16 2020-04-22 株式会社バンダイナムコエンターテインメント プログラムおよび画像生成装置
US9864925B2 (en) 2016-02-15 2018-01-09 Ebay Inc. Digital image presentation
KR20180056174A (ko) * 2016-11-18 2018-05-28 삼성전자주식회사 콘텐츠 처리 방법 및 이를 지원하는 전자 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1694043A (zh) * 2004-04-29 2005-11-09 国际商业机器公司 用眼睛凝视和按键按压组合选择和激活对象的系统和方法
US20100085384A1 (en) * 2008-10-06 2010-04-08 Kim Jeong-Tae Mobile terminal and user interface of mobile terminal
CN101782832A (zh) * 2009-01-19 2010-07-21 三星电子株式会社 显示信息控制设备和方法
CN101815087A (zh) * 2010-02-10 2010-08-25 北京播思软件技术有限公司 一种移动通信终端的信息缓存方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6847336B1 (en) * 1996-10-02 2005-01-25 Jerome H. Lemelson Selectively controllable heads-up display system
US20060262140A1 (en) * 2005-05-18 2006-11-23 Kujawa Gregory A Method and apparatus to facilitate visual augmentation of perceived reality
DE102006007283B4 (de) * 2006-02-16 2018-05-03 Airbus Operations Gmbh Landmarken-Informationssystem in einem Flugzeug
US8091103B2 (en) * 2007-07-22 2012-01-03 Overlay.Tv Inc. Server providing content directories of video signals and linkage to content information sources
US8487881B2 (en) * 2007-10-17 2013-07-16 Smart Technologies Ulc Interactive input system, controller therefor and method of controlling an appliance
US20090109173A1 (en) * 2007-10-28 2009-04-30 Liang Fu Multi-function computer pointing device
US8555207B2 (en) * 2008-02-27 2013-10-08 Qualcomm Incorporated Enhanced input using recognized gestures
KR100947990B1 (ko) * 2008-05-15 2010-03-18 성균관대학교산학협력단 차영상 엔트로피를 이용한 시선 추적 장치 및 그 방법
KR101503835B1 (ko) * 2008-10-13 2015-03-18 삼성전자주식회사 멀티터치를 이용한 오브젝트 관리 방법 및 장치
US8494215B2 (en) * 2009-03-05 2013-07-23 Microsoft Corporation Augmenting a field of view in connection with vision-tracking
US20100238161A1 (en) * 2009-03-19 2010-09-23 Kenneth Varga Computer-aided system for 360º heads up display of safety/mission critical data
US20100257252A1 (en) * 2009-04-01 2010-10-07 Microsoft Corporation Augmented Reality Cloud Computing
US8994513B2 (en) * 2009-12-30 2015-03-31 Psion Inc. Adaptive multi-sensor handheld computing device
US9507418B2 (en) * 2010-01-21 2016-11-29 Tobii Ab Eye tracker based contextual action
US9727128B2 (en) * 2010-09-02 2017-08-08 Nokia Technologies Oy Methods, apparatuses, and computer program products for enhancing activation of an augmented reality mode
US20120062471A1 (en) * 2010-09-13 2012-03-15 Philip Poulidis Handheld device with gesture-based video interaction and methods for use therewith

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1694043A (zh) * 2004-04-29 2005-11-09 国际商业机器公司 用眼睛凝视和按键按压组合选择和激活对象的系统和方法
US20100085384A1 (en) * 2008-10-06 2010-04-08 Kim Jeong-Tae Mobile terminal and user interface of mobile terminal
CN101782832A (zh) * 2009-01-19 2010-07-21 三星电子株式会社 显示信息控制设备和方法
CN101815087A (zh) * 2010-02-10 2010-08-25 北京播思软件技术有限公司 一种移动通信终端的信息缓存方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
RONALD AZUMA: "Recent Advances in Augmented Reality", 《IEEE COMPUTER GRAPHICS AND APPLICATIONS》 *
RONALD T. AZUMA: "A Survey of Augmented Reality", 《PRESENCE: TELEOPERATORS AND VIRTUAL ENVIRONMENTS》 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104204994A (zh) * 2012-04-26 2014-12-10 英特尔公司 增强现实计算装置、设备和系统
CN104204994B (zh) * 2012-04-26 2018-06-05 英特尔公司 增强现实计算装置、设备和系统
CN102801962A (zh) * 2012-08-22 2012-11-28 华南师范大学 用于物联网的在线物体图像信息获取装置及获取方法
US9965137B2 (en) 2012-09-10 2018-05-08 Samsung Electronics Co., Ltd. Transparent display apparatus and object selection method using the same
CN104620197B (zh) * 2012-09-10 2018-08-28 三星电子株式会社 透明显示设备及其对象选择方法
CN104641328A (zh) * 2012-09-19 2015-05-20 三星电子株式会社 用于在透明显示装置上显示信息的系统和方法
US10007417B2 (en) 2012-09-19 2018-06-26 Samsung Electronics Co., Ltd. System and method for displaying information on transparent display device
US10788977B2 (en) 2012-09-19 2020-09-29 Samsung Electronics Co., Ltd. System and method for displaying information on transparent display device
CN103873760B (zh) * 2012-12-17 2017-12-26 联想(北京)有限公司 一种对焦点调整方法及电子设备
CN103873760A (zh) * 2012-12-17 2014-06-18 联想(北京)有限公司 一种对焦点调整方法及电子设备
CN104063116A (zh) * 2013-03-19 2014-09-24 联想(北京)有限公司 一种信息处理的方法及电子设备
CN104731840A (zh) * 2013-12-23 2015-06-24 岳造宇 电子装置及其显示的动态影像的对象信息查询方法
CN104375778A (zh) * 2014-11-25 2015-02-25 湖南大学 智能交互式水族箱展示系统
CN104375778B (zh) * 2014-11-25 2017-11-07 湖南大学 智能交互式水族箱展示系统
CN111142672A (zh) * 2019-12-30 2020-05-12 星络智能科技有限公司 屏幕显示内容操控方法、智能家居交互设备及存储介质

Also Published As

Publication number Publication date
EP2431895A1 (en) 2012-03-21
CN102402390B (zh) 2016-04-20
US20120069050A1 (en) 2012-03-22
EP2431895B1 (en) 2017-07-26

Similar Documents

Publication Publication Date Title
CN102402390B (zh) 透明显示设备和使用透明显示设备提供信息的方法
EP2431916A2 (en) Transparent display device and method for providing object information
KR101753031B1 (ko) 이동 단말기 및 이것의 메타데이터 설정 방법
US11409817B2 (en) Display apparatus and method of controlling the same
KR102471230B1 (ko) 이동 단말기 및 그의 동작 방법
US20130300546A1 (en) Remote control method and apparatus for terminals
US20100103241A1 (en) Remote object recognition
KR20150008996A (ko) 이동 단말기 및 그것의 제어 방법
AU2014282096A1 (en) An electronic device and method executing object in the electronic device
KR101737839B1 (ko) 투명 디스플레이 장치 및 객체 탐지 방법
KR20120093744A (ko) 데이터 송수신 방법, 그를 이용한 디스플레이 장치 및 휴대용 단말기
CN109684277B (zh) 一种图像显示方法及终端
US20120094626A1 (en) Electronic device and method for transmitting data
KR20170111000A (ko) 디스플레이 장치 및 그의 동작 방법
CN110366027A (zh) 一种视频管理方法及终端设备
JP7332762B2 (ja) データ処理方法およびコンピュータデバイス
CN111079030A (zh) 一种群组搜索方法及电子设备
CN108510267A (zh) 一种账户信息获取方法、移动终端
KR20180055497A (ko) 디스플레이 장치 및 그의 동작 방법
CN112052355B (zh) 视频的展示方法、装置、终端、服务器、系统及存储介质
KR101663619B1 (ko) 투명 디스플레이 장치 및 지역 정보 제공 방법
CN112148899A (zh) 多媒体推荐方法、装置、设备及存储介质
CN110891122A (zh) 一种壁纸推送方法及电子设备
CN108632470A (zh) 一种无线网络信号的显示方法及移动终端
CN111008297B (zh) 寻址方法及服务器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant