CN104641328B - 用于在透明显示装置上显示信息的系统和方法 - Google Patents

用于在透明显示装置上显示信息的系统和方法 Download PDF

Info

Publication number
CN104641328B
CN104641328B CN201380048814.6A CN201380048814A CN104641328B CN 104641328 B CN104641328 B CN 104641328B CN 201380048814 A CN201380048814 A CN 201380048814A CN 104641328 B CN104641328 B CN 104641328B
Authority
CN
China
Prior art keywords
transparent display
information
external device
display
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380048814.6A
Other languages
English (en)
Other versions
CN104641328A (zh
Inventor
李昌秀
姜京我
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020130106227A external-priority patent/KR102255832B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN104641328A publication Critical patent/CN104641328A/zh
Application granted granted Critical
Publication of CN104641328B publication Critical patent/CN104641328B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0383Remote input, i.e. interface arrangements in which the signals generated by a pointing device are transmitted to a PC at a remote location, e.g. to a PC in a LAN
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

一种用于在透明显示装置上显示信息的方法和系统包括:接收用于选择透过透明显示装置的屏幕可见的、在外部装置的屏幕上所显示的对象的触摸输入;向外部装置请求与所述对象相关的信息;从外部装置接收与所述对象相关的信息;在透明显示装置的屏幕上显示接收的信息。

Description

用于在透明显示装置上显示信息的系统和方法
技术领域
与示例性实施例一致的方法和设备涉及显示信息,更具体地讲,涉及一种用于在透明显示装置上显示与外部对象或外部装置相关的信息的系统和方法。
背景技术
透明显示装置被认为是下一代显示装置。透明显示装置具有使用户能够透过透明显示装置看见外部对象或外部装置的透明度。
发明内容
技术问题
然而,透明显示装置不显示与外部对象或外部装置相关的信息。
解决方案
示例性实施例提供一种用于在透明显示装置的屏幕上显示与透过透明显示装置的屏幕看到的外部装置相关的信息的系统、方法和设备及其记录介质。
示例性实施例还提供一种用于在透明显示装置的屏幕上显示与透过透明显示装置的屏幕看到的在外部装置的屏幕上所显示的对象相关的信息的系统、方法和设备及其记录介质。
示例性实施例还提供一种用于在透明显示装置的屏幕上显示与透过透明显示装置的屏幕看到的外部对象相关的信息的系统、方法和设备及其记录介质。
有益效果
根据以上实施例,能够在透明显示装置的屏幕上显示与透过透明显示装置的屏幕看到的外部装置相关的信息。
根据以上实施例,能够在透明显示装置的屏幕上显示与透过透明显示装置的屏幕看到的在外部装置的屏幕上所显示的对象相关的信息。
根据以上实施例,能够在透明显示装置的屏幕上显示与透过透明显示装置的屏幕看到的外部对象相关的信息。
附图说明
通过参照附图详细地描述示例性实施例,以上和其它方面将变得更明显,其中:
图1A至图1C是根据示例性实施例的信息显示系统的框图;
图2是示出根据示例性实施例的在透明显示装置中显示信息的方法的流程图;
图3A至图3H是示出根据示例性实施例的第一触摸输入的示例的示图;
图4A至图4E是示出根据示例性实施例的第一触摸输入的其它示例的示图;
图5A至图5E是示出根据示例性实施例的第一触摸输入的其它示例的示图;
图6A至图6C是示出根据示例性实施例的第一触摸输入、第二触摸输入和根据第一触摸输入和第二触摸输入显示在透明显示装置上的屏幕的示图;
图7A至图7D是示出根据示例性实施例的用于示出第一触摸输入、第二触摸输入以及编辑处理的屏幕的示图;
图8A至图8G是示出根据示例性实施例的用于示出第一触摸输入和第二触摸输入的屏幕的示图;
图9A至图9C是示出在透明显示装置和外部装置具有相等尺寸的情况下的根据示例性实施例的用于示出第一触摸输入和第二触摸输入的屏幕的示图;
图10A至图10D是示出根据示例性实施例的第一触摸输入和第二触摸输入的示例的示图;
图11是示出根据另一示例性实施例的将由透明显示装置执行的显示信息的方法的流程图;
图12是示出根据另一示例性实施例的将由透明显示装置执行的显示信息的方法的流程图;
图13A和图13B是图12中所示的透明显示装置和外部装置的侧视图;
图14是示出根据另一示例性实施例的将由透明显示装置执行的显示信息的方法的流程图;
图15是示出根据另一示例性实施例的将由透明显示装置执行的显示信息的方法的流程图;
图16是根据示例性实施例的透明显示装置的功能框图;
图17是示出图16中所示的透明显示单元的示例的示图;
图18是示出根据示例性实施例的存储在透明显示装置的存储单元中的软件层的示图;
图19是根据另一示例性实施例的透明显示装置的功能框图;
图20是示出根据示例性实施例的将由外部装置执行的显示信息的方法的流程图;
图21是示出根据另一示例性实施例的将由透明显示装置执行的显示信息的方法的流程图。
最佳实施方式
根据示例性实施例的一方面,提供一种在透明显示装置上显示信息的方法,所述方法包括:接收透明显示装置上的用于选择外部装置上所显示的对象的触摸输入,其中,透过透明显示装置的屏幕可见所述对象;向外部装置请求与所述对象相关的信息;从外部装置接收与所述对象相关的信息;以及在透明显示装置的屏幕上显示接收的信息。
所述触摸输入可指示透过所述屏幕可见的所述对象的轮廓线,所述触摸输入可以是指示所述屏幕上的下述位置的基于轻击的触摸:在所述位置,透过所述屏幕可见所述对象,或者所述触摸输入可指示所述屏幕上的下述闭合区域:在所述闭合区域,透过所述屏幕可见所述对象。
与所述对象相关的信息指示具有与所述对象的类型相同类型的至少一个其它对象,所述至少一个其它对象在外部装置的屏幕上的显示位置不同于所述对象在外部装置的屏幕上的显示位置。
与所述对象相关的信息指示未被显示在外部装置的屏幕上的信息。
显示步骤包括:在透明显示装置的屏幕上与所述对象在外部装置的屏幕上的显示位置相应的显示位置处显示接收的信息。
所述方法还可包括:基于透明显示装置和外部装置之间的交互来对透明显示装置的屏幕上所显示的信息进行编辑。
所述方法还可还包括:在透明显示装置的屏幕上显示与外部装置相关的基于增强现实服务的信息。
请求和接收与所述对象相关的信息的步骤基于以下通信之一被执行:装置之间的直接通信、经由服务器的通信以及经由中继器的通信。
根据示例性实施例的另一方面,提供一种透明显示装置,包括:透明显示器,被配置为接收用于选择透过透明显示器可见的、在外部装置上所显示的对象的触摸输入;通信单元,被配置为与透过透明显示器可见的外部装置进行通信;以及处理器,被配置为经由通信单元基于所述触摸输入向外部装置请求与所述对象相关的信息,经由通信单元从外部装置接收响应于所述请求的与所述对象相关的信息,并控制透明显示器显示接收的信息。
根据示例性实施例的另一方面,提供一种在透明显示装置上显示信息的方法,所述方法包括:接收透明显示装置的屏幕上的第一触摸输入,并接收透明显示装置的屏幕上的第二触摸输入,其中,第一触摸输入指示透过透明显示装置的屏幕可见的外部装置的第一位置信息,第二触摸输入指示透过透明显示装置的屏幕可见的在外部装置的屏幕上所显示的对象的第二位置信息;基于第一位置信息和第二位置信息向外部装置请求与所述对象相关的信息;从外部装置接收响应于所述请求的与所述对象相关的信息;在透明显示装置的屏幕上显示接收的信息。
第一位置信息指示透过透明显示装置的屏幕可见的外部装置的轮廓线。
第一触摸输入可以是对透明显示装置的屏幕上的第一点和第二点的独立触摸操作,其中,所述独立触摸操作指示透过透明显示装置的屏幕可见的外部装置的轮廓线。
第一触摸输入可以是用于连接透明显示装置的屏幕上的第一点和第二点的触摸并拖动操作,其中,所述触摸并拖动操作指示透过透明显示装置的屏幕可见的外部装置的轮廓线。
第一触摸输入可指示针对透明显示装置的屏幕上所显示的引导信息的基于触摸的区域调整操作,并且与针对引导信息的基于触摸的区域调整操作相关的范围可基于透过透明显示装置的屏幕可见的外部装置的轮廓线。
第一触摸输入可以是用于选择外部装置的屏幕信息的触摸操作,其中,屏幕信息可被包括在关于外部装置的可选屏幕信息菜单项中,并且屏幕信息可包括屏幕尺寸信息和屏幕类型信息中的至少一个,其中,所述可选屏幕信息菜单项被显示在透明显示装置的屏幕上。
第二位置信息可指示透过透明显示装置上的屏幕可见的对象的轮廓线。
第二触摸输入可以是指示透明显示装置的屏幕上的下述位置的基于轻击的触摸:在所述位置,透过透明显示装置的屏幕可见所述对象。
第二触摸输入可指示透明显示装置的屏幕上的下述闭合区域:透过所述闭合区域,在透明显示装置的屏幕上可见所述对象。
与所述对象相关的信息可指示具有与所述对象的类型相同类型的至少一个其它对象,并且所述至少一个其它对象在外部装置的屏幕上的显示位置可不同于所述对象在外部装置的屏幕上的显示位置。
所述方法还可包括:基于透明显示装置和外部装置之间的交互来对透明显示装置的屏幕上所显示的信息进行编辑。
根据示例性实施例的另一方面,提供一种透明显示装置,包括:透明显示器,被配置为接收指示透过透明显示器可见的外部装置的第一位置信息的触摸输入,并接收指示透过透明显示器可见的在外部装置的屏幕上所显示的对象的第二位置信息的第二触摸输入;通信单元,被配置为与外部装置进行通信;处理器,被配置为经由通信单元基于第一位置信息和第二位置信息向外部装置请求与所述对象相关的信息,经由通信单元从外部装置接收响应于所述请求的与所述对象相关的信息,并在透明显示器上显示接收的信息。
根据示例性实施例的另一方面,提供一种在透明显示装置的屏幕上显示信息的方法,所述方法包括:从透明显示装置接收对与外部装置的屏幕上所显示的至少一个对象相关的信息的请求,其中,透过透明显示装置的屏幕可见所述至少一个对象;响应于所述请求,选择所述至少一个对象;将与选择的对象相关的信息发送给透明显示装置,其中,对与所述对象相关的信息的请求包括:由透明显示装置上的第一触摸输入指示的外部装置的第一位置信息、以及由透明显示装置上的第二触摸输入指示的在外部装置的屏幕上所显示的所述对象的第二位置信息。
根据示例性实施例的另一方面,提供一种包含有程序的非暂时性计算机可读记录介质,其中,所述程序用于实施所讨论的在透明显示装置上显示信息的方法。
具体实施方式
由于示例性实施例允许各种改变和多个实施例,因此特定示例性实施例将在附图中被示出并在书面说明中被详细描述。然而,并不意图将示例性实施例限定为特定的实践模式,将理解的是,未脱离本公开的精神和技术范围的所有改变、等同形式和替代形式被包含。在描述中,省略对公知的现有技术的某些解释。
当诸如“第一”、“第二”等的术语被用于描述各种组件时,这些组件不应限于以上术语。以上术语仅用于将一个组件与另一组件区分开。
在本说明书中使用的术语仅用于描述特定示例性实施例,并不意图作为限制。包括在此使用的描述性术语或技术术语的所有术语应被解释为具有本领域普通技术人员所理解的含义。然而,术语可根据本领域普通技术人员的意图、判例或新技术的出现而具有不同的含义。此外,一些术语可由申请人任意选择,在此情况下,所选择的术语的含义将在此具体实施方式中被详细描述。因此,在此使用的术语基于术语的含义以及贯穿整个说明书的描述被定义。在本申请中提出的屏幕仅用于描述性目的,并不意图作为限制。
除非在上下文中有明确的不同含义,否则以单数形式使用的表述涵盖复数的表述。在本说明书中,将理解,诸如“包括”或“具有”等的术语意图指示在说明书中公开的特征、数量、步骤、动作、组件、部件或它们的组合的存在,而并不意图排除可能存在或可添加一个或更多个其它特征、数量、步骤、动作、组件、部件或它们的组合的可能性。
如这里所使用的,术语“和/或”包括相关所列项中的一个或更多个项的任意组合和全部组合。当诸如“…中的至少一个”的表述在一列元件之后时,所述表述修饰整列元件,而不修饰所述列中的单个元件。
对象表示显示在透明显示装置的外部装置上的或显示在透明显示装置的外部装置的屏幕上的组件或信息。例如,对象可包括图像、另一图像中所包括的图像、图标、文件夹图标、文件夹图标中所包括的图标、文本、弹出窗口、应用执行窗口、应用执行窗口中所包括的内容、列表、项、内容、和列表中所包括的文件;然而,本发明不限于此。将在稍后将被描述的屏幕的各种示例中详细描述对象的示例。对象可被称为透明显示装置的外部对象。
贯穿整个说明书,触摸输入表示使用用户的手指或触摸工具通过基于触摸的手势而输入的用户的输入信息。触摸工具可被称为外部输入装置、铁笔或触控笔。
基于触摸的手势可被不同地定义。换句话说,基于触摸的手势的示例可包括触摸屏上的基于触摸的动作,诸如轻击、触摸并保持、双击、拖动、触摸并拖动、摇动(panning)、轻弹、拖放、轻拂和轻扫(swipe),但基于触摸的手势不限于此。
根据期望基于触摸而呈现的输入,触摸输入可被基于由相机捕捉的图像的手势替代。例如,如果触摸输入是用于选择显示在外部装置上的对象的输入,则触摸输入可被根据由相机捕捉的手的移动方向或手语的手势或操作替代。所述相机可基于图像传感器或光学传感器来配置。
根据期望基于触摸而呈现的输入,触摸输入可被基于自然语言的用户语音信号替代。例如,如果触摸输入是用于选择显示在外部装置上的包括特定字母或名称的对象的输入,则触摸输入可被基于表示对象的所述特定字母或名称的自然语言的用户语音信号替代。
在下文中,将参照附图详细描述示例性实施例,其中,相同的参考标号表示相同的元件,进而不提供重复的描述。
图1A是根据示例性实施例的信息显示系统的框图。
参照图1A,信息显示系统包括透明显示装置100和外部装置110。然而,信息显示系统不限于图1A中所示的示例。也就是说,信息显示系统还可包括除了图1A中所示的组件之外的其它组件。
例如,如图1B中所示,信息显示系统还可包括服务器120。在此情况下,透明显示装置100和外部装置110可经由服务器120发送和/或接收信息,并且透明显示装置100可从服务器120接收关于外部装置110的基于增强现实服务的信息。经由服务器120的通信可以是有线互联网或无线互联网,但不限于此。服务器120可包括云服务器、信息供应服务器和服务服务器中的至少一个。服务器120可基于增强现实服务来管理并提供信息。
如图1C中所示,信息显示系统还可包括接入点130。在此情况下,透明显示装置100和外部装置110可经由接入点130发送和/或接收信息。经由接入点130的通信方法可以是例如基础架构模式(或WiFi)的无线LAN通信方法,但不限于此。
当信息显示系统被配置为如图1A中所示时,透明显示装置100和外部装置110可通过装置对装置直接通信来发送和/或接收信息。装置对装置直接通信方法可使用例如局域无线通信方法,诸如Ad-hoc模式的无线LAN通信(诸如WiFi直连、蓝牙通信、超宽带(UWB)通信和Zigbee通信),但不限于此。
也就是说,透明显示装置100和外部装置110可经由线缆彼此连接。例如,透明显示装置100和外部装置110可经由通用串行总线(USB)或通用异步接收器/发送器(UART)彼此连接以发送/接收数据。装置对装置直接通信方法可被称为机器对机器(M2M)通信方法、装置对装置(D2D)通信方法或对等(P2P)通信方法。
因此,根据信息显示系统的元件,可基于装置之间的直接通信、经由接入点130的通信方法和经由服务器120的通信方法中的一种来执行透明显示装置100和外部装置110之间的通信,但不限于此。
透明显示装置100和外部装置110可通过诸如近场通信(NFC)的短距离通信方法发送和/或接收以下信息中的至少一个信息:其尺寸信息、其拥有者信息以及可与其它装置共享的信息。
装置的尺寸信息可被表示为例如(宽度?长度?厚度)mm,但不限于此。屏幕信息可包括屏幕尺寸信息和屏幕类型信息,且不限于此。屏幕尺寸信息可被表示为例如A4、B5、7英寸或5.5英寸,且不限于此。屏幕类型信息可表示屏幕是触摸屏还是非触摸屏,且不限于此。例如,屏幕类型信息可表示屏幕是液晶显示(LCD)面板还是有源矩阵有机发光二极管(AMOLED)面板。
透明显示装置100可将经由短距离通信方法(诸如NFC)从外部装置110发送的关于外部装置110的信息显示为关于外部装置110的基于增强现实服务的信息。例如,透明显示装置100可在与透过透明显示装置100看到的外部装置110邻近的显示区域上显示关于外部装置110的信息。所述显示区域是透明显示装置100的屏幕的一部分。透过透明显示装置100看到的外部装置100可被称为经由透明显示装置100的屏幕看到的外部装置100。
透明显示装置100是具有透明显示器的装置。例如,透明显示装置100可以是具有透明显示器的移动电话、具有透明显示器的智能电话、具有透明显示器的笔记本计算机、具有透明显示器的平板PC、具有透明显示器的手持PC、具有透明显示器的电子书终端、具有透明显示器的数字广播终端、具有透明显示器的个人数字助理(PDA)、具有透明显示器的便携式多媒体播放器(PMP)、具有透明显示器的导航装置、具有透明显示器的智能TV、具有透明显示器的消费电子(CE)装置(例如,具有透明显示器的冰箱、具有透明显示器的空调、具有透明显示器的洗碗机等)以及具有透明显示器的iOS可转换(convertible)装置,但不限于此。透明显示器可被应用于各种领域,诸如高附加值的玻璃、作为功能汽车元件的玻璃、汽车仪表盘、导航仪、安全电子装置、太阳能电池、用于军事的电子装置、游戏机、玩具和橱窗以及智能窗。透明显示装置100的屏幕可被称为透明显示器上的屏幕。
透明显示装置100可提供应用执行功能、通信功能、媒体播放器功能、网页浏览器功能、文字处理功能、电子邮件发送功能、即时通讯功能和/或数据存储功能,但不限于此。
透明显示装置100基于触摸输入来请求与显示在外部装置110上并透过透明显示装置100看到的至少一个对象相关的信息。当从外部装置110接收到与对象相关的信息时,透明显示装置100显示接收的信息。
外部装置110是这样的装置:该装置透过透明显示装置100被看到、透过透明显示装置100的屏幕被看到或透过透明显示装置100的透明显示器被看到。外部装置110可被称为另一装置。外部装置110可不包括透明显示器。例如,外部装置110可以是移动电话、智能电话、笔记本计算机、平板PC、手持PC、电子书终端、数字广播终端、PDA、PMP、导航仪、智能TV、CE装置(例如,具有显示面板的冰箱、空调、洗碗机等)和iOS可转换装置,但不限于此。也就是说,外部装置110可包括透明显示器。
外部装置110可提供应用执行功能、通信功能、媒体播放器功能、网页浏览功能、文字处理功能、电子邮件发送功能、即时通讯功能和/或数据存储功能,但不限于此。
当透明显示装置100请求与被显示的至少一个对象相关的信息时,外部装置110选择被请求的对象,并将与被请求的对象相关的信息发送给透明显示装置100。
图2是示出根据示例性实施例的将由透明显示装置100执行的显示信息的方法的流程图。
在操作S201,透明显示装置100接收第一触摸输入和第二触摸输入。第一触摸输入表示透过透明显示装置100看到的外部装置110的参考信息。参考信息被用于检测对象在外部装置110上的显示位置,其中,通过透明显示装置100中的第二触摸输入来选择所述对象。参考信息可被称为外部装置110的第一位置信息。
图3A至图3H是示出第一触摸输入的示例的示图。在图3A至图3H中,透明显示装置100的尺寸大于外部装置110的尺寸,并且如图3A中所示,外部装置110透过透明显示装置100被看到。在图3A至图3H中所示的示例中,感测第一触摸输入的结果可被显示在透明显示装置100上,或者可不被显示在透明显示装置100上。
图3B示出了以下示例:沿着透过透明显示装置100看到的外部装置110的轮廓线绘制第一触摸输入。外部装置110的轮廓线可被称为外部装置110的屏幕的边界。第一触摸输入可被称为识别外部装置110的屏幕的边界的第一输入。图3B中示出的第一触摸输入基于沿着透过透明显示装置100看到的外部装置110的轮廓线从外部装置110上的点S到点E的绘制操作。点S表示沿着外部装置110的轮廓线的触摸操作(即,绘制操作)的起点。点E表示沿着外部装置110的轮廓线的触摸操作的终点。点S和点E可具有相同的显示位置(或xy坐标)。然而,点S和点E可彼此相邻,使得闭合区域可根据用于沿着外部装置110的轮廓线进行绘制的触摸操作而被设置。
在图3B中,点S是外部装置110的轮廓线中的最左上角,但不限于此。也就是说,点S可以是外部装置110的轮廓线上的任意点。点E依据点S被确定。
在图3C和图3D中,第一触摸输入基于透明显示装置100上的第一点和第二点处的独立的触摸操作。在图3C和图3D中,第一点和第二点在透过透明显示装置100看到的外部装置110的轮廓线上处于对角线关系。
参照图3C,第一点是外部装置110的轮廓线上的最左上方的点P1,第二点是外部装置110的轮廓线上的最右下方的点P2。因为点P1和点P2被独立地触摸,因此透明显示装置100可基于关于点P1和点P2在透明显示装置100上的xy坐标的信息,描绘透过透明显示装置100看到的外部装置110的轮廓线。也就是说,基于点P1和点P2的(x,y)坐标信息来检测轮廓线的未被触摸的最右上方的点和最左下方的点的(x,y)坐标信息,并且检测到的点被彼此连接以描绘外部装置110的轮廓线。
参照图3D,第一点是外部装置110的轮廓线上的最左下方的点P3,第二点是外部装置110的轮廓线上的最右上方的点P4。当点P3和点P4被触摸时,透明显示装置100可基于点P3和点P4在透明显示装置100上的xy坐标信息,描绘透过透明显示装置100看到的外部装置110的轮廓线。可按照与参照图3C描述的方式相同的方式来执行轮廓线的描绘。
图3E至图3H示出了以下示例:第一触摸输入基于在透明显示装置100上将第一点和第二点彼此连接的触摸并拖动的操作。在图3E至图3H中,第一点和第二点基于透过透明显示装置100看到的外部装置110的轮廓线彼此处于对角线关系。在图3E至图3H中所示的示例中,第一点可表示起点S,第二点可表示终点E。
参照图3E,点S是外部装置110的轮廓线上的最左上方的点,点E是外部装置110的轮廓线上的最右下方的点。由于在触摸点S之后朝着点E执行触摸并拖动操作,因此透明显示装置100可描绘外部装置110的轮廓线。也就是说,如图3E中所示,当根据触摸并拖动操作的触摸点是t1时,基于点S的(x,y)坐标信息和点t1的(x,y)坐标信息来检测轮廓线上的点t2和点t3的(x,y)坐标信息(其中,点t2和t3未被触摸),然后,可通过基于点S、点t1、t2和t3的(x,y)信息连接点S、点t1、t2和t3来描绘外部装置110的轮廓线。
透明显示装置100可基于当前触摸位置显示图3E中示出的箭头或块布置,以示出触摸位置根据拖动的变化。当触摸并拖动操作在点E结束时,透明显示装置100可使箭头或块布置显示结束,并可显示外部装置110的轮廓线。否则,可维持箭头或块显示状态。
图3F示出触摸并拖动操作的起点S是外部装置110的轮廓线上的最右上方的点并且终点E是外部装置110的轮廓线上的最左下方的点的情况。图3G示出触摸并拖动操作的起点S是外部装置110的轮廓线上的最左下方的点并且终点E是外部装置110的轮廓线上的最右上方的点的情况。图3H示出触摸并拖动操作的起点S是外部装置110的轮廓线上的最右下方的点并且终点E是外部装置110的轮廓线上的最左上方的点的情况。
图4A至图4E是示出第一触摸输入的其它示例的示图。在图4A至图4E中,透明显示装置100大于外部装置110,如图4A中所示,外部装置110透过透明显示装置110被看到。在图4A至图4E中所示的示例中,感测第一触摸输入的结果可被显示在透明显示装置100上,或可不被显示在透明显示装置100上。
在图4A至图4E中,第一触摸输入基于用于针对透明显示装置100上所显示的引导信息来调整区域的基于触摸的操作,基于触摸操作的引导信息的可调整范围基于透过透明显示装置100看到的外部装置110的轮廓线。
引导信息可以是例如相机聚焦范围信息。引导信息可根据透明显示装置100的用户的请求而被显示。例如,用户的请求可包括对显示用于执行根据示例性实施例的信息显示方法的引导信息的请求,或对执行信息显示方法的请求。
如图4A中所示,当外部装置110透过透明显示装置100被看到时,透明显示装置100显示如图4B中所示的引导信息G1。引导信息G1可根据透明显示装置100的用户的命令而被显示在透明显示装置100上。当在接触四个点P5、P6、P7和P8的状态下,朝着外部装置的轮廓线的四个角执行引导信息G1的区域调整操作时,如图4C中所示,被调整区域的引导信息显示在透明显示装置100上。
因此,透明显示装置100可根据引导信息G1的四个点P5、P6、P7和P8的调整后的(x,y)坐标值来描绘外部装置110的轮廓线。可通过连接点P5、P6、P7和P8的改变后的(x,y)坐标值来执行对轮廓线的描绘,但不限于此。可通过将根据拖动操作的变化量与原始(x,y)坐标值相加来获取每个点的改变后的(x,y)坐标值,但不限于此。也就是说,根据双触摸操作(即,触摸引导信息G1的四个点P5、P6、P7和P8并触摸表示期望的区域的点),可将点的原始(x,y)坐标值更新为第二次触摸的点的(x,y)坐标值。
图4D和图4E是示出引导信息G1的区域调整操作的示例的示图。参照图4D,用户在触摸引导信息G1的最左上方的点P5之后将触摸的点从点P5移动到外部装置110的轮廓线的最左上方的点。外部装置110的轮廓线中的最左上方的点是与引导信息G1的点P5相应的外部装置110的角。
然后,在触摸引导信息G1的最右下方的点P8之后,将触摸的点拖动到外部装置110的轮廓线中的最右下方的点,引导信息G1的区域从除了最左上方的点P5之外的点P6、P7和P8移动,并且因此,引导信息G1的显示状态被改变为如图4C中所示。
根据图4D、4E和4C中所示的示例,在触摸引导信息G1的一个点之后,触摸的点被移动到外部装置110的相应角,然后引导信息G1的对角点被触摸并被拖动到外部装置110的相应角,以便改变引导信息G1的显示位置或调整引导信息G1的显示尺寸。
引导信息G1中的所述一个点和对角点不限于图4D和图4E中所示的示例。例如,引导信息G1的点P6被触摸并被拖动到外部装置110的轮廓线中的相应角,然后与P6具有对角关系的点P7被触摸并被拖动,使得引导信息G1的其它点P5、P7和P8可被移动至外部装置110的轮廓线中的相应角。
图5A至图5E是示出在透明显示装置100小于外部装置110的情况下的第一触摸输入的示例的示图。也就是说,如图5A中所示,当透明显示装置100小于外部装置110时,第一触摸输入可基于沿着与透明显示装置100重叠的外部装置110的轮廓线进行绘制的触摸操作。这里,触摸操作的方向(即,沿着轮廓线的绘制方向)可不限于一个方向。
如图5A中所示,透明显示装置100可小于外部装置110。因此,当将被选择的对象显示在与外部装置110的屏幕上的中心邻近的位置处而使得图5B至图5E中所示的第一触摸输入不被应用时,透明显示装置100可通过使用相机的缩小操作来减小外部装置110的尺寸以接收第一触摸输入和第二触摸输入。这里,透明显示装置100可根据缩小倍率来检测外部装置110的屏幕尺寸。
同时,如图6A中所示,当外部装置110透过透明显示装置100被看到时,可在进行触摸起点S并沿着透过透明显示装置100看到的外部装置110的轮廓线拖动至终点E的触摸操作时接收第一触摸输入。
此外,第一触摸输入可基于用于选择外部装置110的屏幕信息的触摸操作,其中,外部装置110的屏幕信息被包括在图9B中所示的菜单910中并将在稍后进行介绍。屏幕信息可包括如上所述的外部装置110的屏幕尺寸信息和外部装置110的屏幕类型信息中的至少一个。
屏幕尺寸信息可表示例如透明显示装置100的屏幕尺寸是否等于外部装置的屏幕尺寸,或表示特定尺寸信息,诸如A4、B5、7英寸、4英寸等,如图9B中所示,但不限于此。第一触摸输入可基于用于在多条屏幕尺寸信息之中选择相应屏幕尺寸的触摸操作。
如果透明显示装置100的屏幕尺寸与外部装置110的屏幕尺寸不同,则透明显示装置100可将透明显示装置100上的根据第一触摸输入的(x,y)坐标信息以及透明显示装置100上的根据第二触摸输入的(x,y)坐标信息改变成根据外部装置110的屏幕尺寸的信息。
例如,当透明显示装置100具有4英寸的屏幕尺寸(长度、宽度、面积等),而外部装置110具有7英寸的屏幕时,透明显示装置100可通过使用将4英寸的屏幕尺寸的坐标信息转换为7英寸的屏幕尺寸的坐标信息的函数,将透明显示装置100上的第一触摸输入的坐标信息以及透明显示装置上的第二触摸输入的坐标信息改变成关于7英寸的屏幕尺寸的坐标信息。这里,透明显示装置100可使用透明显示装置100上的根据第一触摸输入的(x,y)坐标信息与透明显示装置100上的根据第二触摸输入的(x,y)坐标信息之间的相关信息(例如,坐标信息之间的差信息)。
此外,如果透明显示装置100具有10英寸的屏幕尺寸,而外部装置110具有4英寸的屏幕尺寸,则透明显示装置100可通过使用将10英寸的屏幕尺寸的坐标信息转换为4英寸的屏幕尺寸的坐标信息的函数,将透明显示装置100上的第一触摸输入的坐标信息以及透明显示装置100上的第二触摸输入的坐标信息改变成关于4英寸的屏幕尺寸的坐标信息。
以上描述的根据屏幕尺寸转换坐标信息的函数可包括在外部装置110中。当外部装置110具有转换坐标信息的函数时,透明显示装置100可将透明显示装置100上的根据第一触摸输入的(x,y)坐标信息、透明显示装置100上的根据第二触摸输入的(x,y)坐标信息以及透明显示装置100的屏幕尺寸信息发送给外部装置110。
屏幕类型信息可包括表示外部装置110的屏幕类型是触摸类型还是非触摸类型的信息。如果外部装置110的屏幕是触摸类型的屏幕,则外部装置110可识别透明显示装置100和外部装置110重叠的区域。因此,第一触摸输入可不包括与外部装置110的轮廓线相关的信息,但可仅包括表示外部装置110的屏幕是触摸类型的屏幕的信息。
另外,在图2的操作S201,第二触摸输入是用于选择外部装置110上所显示的至少一个对象的输入。外部装置110上所显示的对象透过透明显示装置100被看到。用于选择外部装置110上所显示的至少一个对象的输入可被称为用于选择外部装置110的屏幕的至少一个位置的输入。
第二触摸输入可基于以下触摸操作中的至少一个:即,触摸透过透明显示装置100看到的对象的轮廓线上的任意点并沿着对象的轮廓线拖动触摸的位置的触摸操作、以及沿着透过透明显示装置100看到的对象(例如,文本)进行书写的触摸操作。第二触摸输入可被称为透明显示装置100的屏幕上的下述触摸输入:该触摸输入指示外部装置110的屏幕上所显示的对象的位置信息(或第二位置信息)。第二触摸输入可被称为选择透过透明显示装置100可见的外部装置110的屏幕的位置的输入。对象被显示在外部装置110的屏幕上的所述位置处。所述位置包括以下两者之一:透过透明显示装置100可见的外部装置110的屏幕的一坐标位置、以及透过透明显示装置100可见的外部装置110的屏幕的一区域。
图6A至图6C是示出根据示例性实施例的第二触摸输入的示例的示图。
图6A示出基于沿着对象的轮廓线进行绘制的触摸操作的第二触摸输入以及基于沿着外部装置110的轮廓线进行绘制的触摸操作的第一触摸输入。
也就是说,参照图6A,第一触摸输入根据以下触摸操作而被接收:触摸点S并沿着外部装置110的轮廓线绘制到点E的线的触摸操作,第二触摸输入根据沿着图标的轮廓线进行绘制的触摸操作而被接收。通过触摸点S1并沿着作为对象的图标的轮廓线来绘制到点E1的线以执行沿着图标的轮廓线绘制线的触摸操作,因此,第二触摸输入被接收。用于沿着图标的轮廓线进行绘制的触摸操作的起点和终点不限于图6A中所示的示例。也就是说,起点是图标的轮廓线中的任意点,终点如上所述根据起点而被确定。在图6A中,显示在外部装置110上的对象是图标,但显示在外部装置110上的对象可以是如以下讨论的另一种类型的对象。
此外,可连续或不连续地执行在用于沿着对象的轮廓线进行绘制的触摸操作的起点和终点之间的触摸操作。如果不连续地执行触摸操作,则用于沿着对象的轮廓线进行绘制的触摸操作的终点会被改变。
例如,图6A中的用于沿着对象的轮廓线进行绘制的触摸操作从起点S1开始并停止于对象的最左下方的点,然后,触摸操作再次从起点S1或终点E1开始到对象的最左下方的点。在此情况下,终点是对象的最左下方的点,终点E1可以是用于根据触摸操作连接轮廓线的连接点。触摸操作停止的点不限于以上示例。也就是说,触摸操作可停止在对象的轮廓线上的任意点或对象的轮廓线上的多个点。
图6B示出第二触摸输入基于沿着对象(文本)的书写触摸操作而被接收的示例。也就是说,图6B示出基于用于书写字母表字母P的触摸操作的第二触摸输入。因此,尽管图6A中的外部装置110上所显示的图标构成对象,但是在图6B中,字母表字母P是外部装置110上所显示的对象。可通过触摸文本中的任意点并随后沿着文本进行书写来执行基于对象书写触摸操作的第二触摸输入。例如,在触摸点601之后,可沿着由图6B的箭头表示的方向执行沿着对象(文本)的书写触摸操作。然而,对象书写触摸操作的起点不限于图6B中所示的示例,也就是说,对象的任意点可以是起点。另外,对象书写触摸操作可被连续或不连续地执行。当不连续地执行对象书写触摸操作时,如上所述的至少一个连接点可包括在起点和终点之间。
图7A和图7B是示出用于在透明显示装置100具有大于外部装置110的屏幕的屏幕的情况下描述第一触摸输入和第二触摸输入的屏幕的示例的示图。也就是说,如图7A中所示,当外部装置110透过透明显示装置100被看到时,第一触摸输入基于用于沿着外部装置110的轮廓线进行绘制的触摸操作,第二触摸输入基于用于沿着外部装置110上所显示的对象的轮廓线进行绘制的触摸操作。
图8A至图8G是示出用于在透明显示装置100小于外部装置110的情况下示出第一触摸输入和第二触摸输入的其它示例的示图。图8A至图8G示出通过调整透明显示装置100和外部装置110的重叠位置来排列外部装置110上所显示的对象的多个块的示例。因此,在图8A至图8G中所示的示例中,透明显示装置100显示感测透明显示装置100上的第二触摸输入的信息。
也就是说,当外部装置110上所显示的屏幕被示出为图8A时,如图8B中所示,透明显示装置100与外部装置110重叠。这里,第一触摸输入基于用于沿着外部装置110的轮廓线进行绘制的触摸操作(801),第二触摸输入基于用于沿着对象的轮廓线进行绘制的触摸操作(802)。这里,感测第二触摸输入(802)的信息被显示在透明显示装置100上。
透明显示装置100检测图8B中的透明显示装置100上的根据第一触摸输入的(x,y)坐标信息与透明显示装置100上的根据第二触摸输入的(x,y)坐标信息之间的相关信息,并存储检测到的信息。由透明显示装置100检测到的相关信息可包括透明显示装置100上的根据第一触摸输入的(x,y)坐标信息与透明显示装置100上的根据第二触摸输入的(x,y)坐标信息之间的差。外部装置110可基于根据第一触摸输入的(x,y)坐标信息、根据第二触摸输入的(x,y)坐标信息以及上面的相关信息来识别图8B中的通过透明显示装置100选择的对象。
例如,当根据第一触摸输入(801)的坐标信息包括从(x(1),y(1))到(x(1+m),y(1+m))的坐标,根据第二触摸输入(802)的坐标信息包括从(x(i),y(i))到(x(i+j),y(i+j))的坐标,并且通过第一触摸输入获取的坐标信息的条数与通过第二触摸输入获取的坐标信息的条数彼此相等时,透明显示装置100可获取从坐标(x(1)-x(i),y(1)-y(i))到(x(1+m)-x(i+j),y(1+m)-y(i+j))的相关信息。这里,m、i和j是等于或大于2的自然数。
然而,透明显示装置100上的根据第一触摸输入的坐标信息的条数和透明显示装置100上的根据第二触摸输入的坐标信息的条数可彼此不同。在此情况下,透明显示装置100可通过对经由第一触摸输入获取的坐标信息和经由第二触摸输入获取的坐标信息进行采样来检测上面的相关信息。将被采样的目标可根据其显示位置被确定。
接下来,如图8C中所示,当透明显示装置100与外部装置110重叠时,第一触摸输入基于用于沿着外部装置110的轮廓线进行绘制的触摸操作(803),第二触摸输入基于用于沿着对象的轮廓线进行绘制的触摸操作(804)。这里,感测第二触摸输入(804)的信息被显示在透明显示装置100上。
因此,如图8C中所示,透明显示装置100上所显示的对象的图像可包括感测图8B中的第二触摸输入(802)的信息。如参照图8B所描述的,透明显示装置100检测图8C中的根据第一触摸输入和第二触摸输入的坐标信息以及坐标信息之间的相关信息,并存储检测到的信息。这里,透明显示装置100将在图8B的处理中检测到的坐标信息和在图8B的处理中检测到的坐标信息之间的相关信息与在图8C的处理中检测到的坐标信息和在图8C的处理中检测到的坐标信息之间的相关信息存储为可辨别出从彼此的处理中检测到坐标信息和相关信息。
如图8D中所示,当透明显示装置100与外部装置110重叠时,第一触摸输入基于用于沿着外部装置110的轮廓线进行绘制的触摸操作(805),第二触摸输入基于用于沿着对象的轮廓线进行绘制的触摸操作(806)。这里,第二触摸输入还可包括用于在对象的轮廓线内部进行填充的触摸操作。感测第二触摸输入(806)的信息被显示在透明显示装置100上。因此,透明显示装置100上所显示的对象的图像可包括这样的图像:该图像包括图8B和图8C中所示的处理中的感测第二触摸输入的信息。
如参照图8B所描述的,透明显示装置100检测并存储图8D中所示的处理中的透明显示装置100上的根据第一触摸输入和第二触摸输入的坐标信息以及坐标信息之间的相关信息。当存储信息时,透明显示装置100将检测到的坐标信息和相关信息存储为与在图8B和图8C中所示的处理中获取的坐标信息和相关信息区分开。
如图8E中所示,当透明显示装置100与外部装置110重叠时,第一触摸输入基于用于沿着外部装置110的轮廓线进行绘制的触摸操作(807),第二触摸输入基于沿着对象的轮廓线进行绘制的触摸操作(808)。这里,第二触摸输入还可包括用于在对象的轮廓线内部进行填充的触摸操作。感测第二触摸输入(808)的信息被显示在透明显示装置100上。因此,透明显示装置100上所显示的对象的图像可以是包括图8B、图8C和图8D中所示的处理中的所有感测第二触摸输入的信息的图像。
透明显示装置100获取图8E中的透明显示装置100上的根据第一触摸输入(807)和第二触摸输入(808)的坐标信息以及坐标信息之间的相关信息,并存储检测到的信息。这里,透明显示装置100将在图8E的处理中所获取的检测的坐标信息和相关信息存储为与在图8B至图8D中所示的处理中所获取的坐标信息和相关信息区分开。
如图8F中所示,当透明显示装置100和外部装置110彼此重叠时,第一触摸输入基于用于沿着外部装置110的轮廓线进行绘制的触摸操作(809),第二触摸输入基于用于沿着文本“RABBIT”进行书写的触摸操作(810)。这里,感测第二触摸输入(810)的信息被显示在透明显示装置100上。因此,透明显示装置100上所显示的对象的图像是包括图8B至图8E中所示的处理中的所有感测第二触摸输入的信息的图像。透明显示装置100获取图8F中的透明显示装置100上的根据第一触摸输入和第二触摸输入的坐标信息以及坐标信息之间的相关信息,并存储如图8B至图8E中所示的检测到的信息。
根据在透明显示装置100上显示图8B至图8F中所示的处理中的感测第二触摸输入的信息的处理,如图8G中所示,感测第二触摸输入的信息被显示在透明显示装置100上。如上所述,通过在接收到第二触摸输入时在透明显示装置100上显示感测第二触摸输入的信息,可提前确定可从外部装置1100发送的关于对象的显示位置。
此外,图8B至图8F中所示的处理可在改变透明显示装置100的位置或移动透明显示装置100来排列显示在外部装置110上的对象的多个块之后被执行。因此,透明显示装置100可在每个屏幕中将第一触摸输入和第二触摸输入明确地彼此区分开。例如,在接收到图8B中的第一触摸输入和第二触摸输入之后,透明显示装置100改变自身位置或进行移动,并随后根据图8C的处理接收第一触摸输入和第二触摸输入以选择如图8C中所示的显示在外部装置110上的对象。因此,可经由感测透明显示装置100的位置变化或移动,将图8B的处理中的第一触摸输入和第二触摸输入与图8C的处理中的第一触摸输入和第二触摸输入彼此区分开。
图9A至图9C是示出用于描述第一触摸输入和第二触摸输入的屏幕的示例的示图。
参照图9A,透明显示装置100和外部装置110具有相同尺寸。参照图9B,第一触摸输入操作基于透明显示装置100上所显示的菜单910被执行,第二触摸输入基于用于针对太阳设置闭合区域的触摸操作、针对云的基于轻击的触摸操作以及用于绘制花的轮廓线的触摸操作。图9B中所示的闭合区域不限于此。例如,闭合区域可被设置为透明显示装置100中的各种类型的闭合环。
图10A至图10D是示出用于基于增强现实服务描述第一触摸输入和第二触摸输入的屏幕的示例的示图。
图10A示出关于外部装置110的基于增强现实服务的信息被显示为与透过透明显示装置100看到的外部装置110邻近的情况。可基于透明显示装置100和外部装置110之间的物理位置从外部装置110、另一外部装置或服务器来提供关于外部装置110的基于增强现实服务的信息。
可使用接入点来提供关于外部装置110的基于增强现实服务的信息。当透明显示装置100和外部装置110位于同一接入点的通信区域内时,可通过使用能够估计装置的物理位置的内部传感器(诸如安装在装置中的地磁传感器、加速度传感器、陀螺仪传感器和高度传感器),估计透明显示装置100和外部装置110的物理位置。因此,可根据估计的物理位置从以上所述的其它外部装置或服务器来提供关于外部装置110的基于增强现实服务的信息。
另外,透明显示装置100使用短距离通信(诸如NFC)从外部装置110接收或读取对于接收关于外部装置110的基于增强现实服务的信息所必需的信息(例如,用于识别外部装置110的标记信息),然后从服务器或以上所述的其它外部装置收集并显示关于外部装置110的基于增强现实服务的信息。
如图10A中所示,关于透过透明显示装置100看到的外部装置110的基于增强现实服务的信息可包括装置的名称、拥有者的姓名以及可与其它装置共享的外部装置的内容,但不限于此。
当显示如图10A中所示的关于外部装置110的基于增强现实服务的信息时,如图10B中所示,第一触摸输入可基于设置关于外部装置110的基于触摸的闭合区域的操作。基于触摸的闭合区域不限于图10B中所示的示例。
根据接收到第一触摸输入,如图10C中所示,关于共享文件夹的信息可被显示在透明显示装置100上。关于共享文件夹的信息可以是基于增强现实服务的信息,或是在第一触摸输入被发送给外部装置110时从外部装置110接收的信息。这里,外部装置110上所显示的屏幕可不显示关于共享文件夹的信息。
当如图10C中所示,基于透明显示装置100上所显示的关于共享文件夹的信息,接收到根据在期望的文件夹上的设置基于触摸的闭合区域的操作或基于轻击的触摸操作的第二触摸输入时,如图10D中所示,可显示可用图片。外部装置110的屏幕可不显示图10D中所示的可用图片。
透明显示装置100可通过在图10D中所示的可用图片之中的期望的图片上的设置基于触摸的闭合区域的操作来执行第二触摸输入操作。
同时,在图2的操作S202,透明显示装置100基于第一触摸输入和第二触摸输入向外部装置110请求关于至少一个选择的对象的信息。请求关于对象的信息的信号可包括透明显示装置100上的根据第一触摸输入和第二触摸输入的坐标信息和/或坐标信息之间的相关信息。
另外,请求与对象相关的信息的信号可包括外部装置110上的根据第一触摸输入和第二触摸输入的坐标信息和/或坐标信息之间的相关信息,其中,坐标信息通过使用透明显示装置100的坐标信息转换函数而被转换。外部装置110上的根据第二触摸输入的坐标信息可以是外部装置110上所显示的对象的坐标信息。
请求与对象相关的信息的信号还可包括请求与对象的关联信息的信号。当根据第二触摸输入选择的对象是文件夹时,请求与对象的关联信息的信号可包括例如用于请求文件夹和包括在文件夹中的对象的信息。包括在文件夹中的对象可被称为未显示在外部装置110上的对象。
请求与对象相关的信息的信号可包括透明显示装置100上的根据第一触摸输入和第二触摸输入的坐标信息以及透明显示装置100的屏幕尺寸信息。在此情况下,外部装置110可基于从透明显示装置100发送的信息以及外部装置110的屏幕信息来检测外部装置110上的根据第一输入和第二输入的坐标信息。可通过参照图8B至图8F描述的处理来检测外部装置110上的坐标信息,但不限于此。
请求与对象相关的信息的信号可包括可通过参照图3至图10D描述的第一触摸输入和第二触摸输入的示例而估计的各条信息。
在操作S203,透明显示装置100从外部装置110接收与选择的对象相关的信息,在操作S204,透明显示装置100在透明显示装置100上显示接收的与对象相关的信息。
与对象相关的信息可包括具有与通过第二触摸输入选择的对象的显示类型相同显示类型的至少一个其它对象。所述其它对象在外部装置110上具有与选择的对象的显示位置不同的显示位置。也就是说,如图6B中所示,当基于用于对文本P进行书写的触摸操作接收到第二触摸输入时,透明显示装置100可从外部装置110接收显示在外部装置110上的不同位置的所有文本P,并显示接收的文本。
这里,接收的信息在透明显示装置100上的显示位置可近似与外部装置110上的显示位置相应。如果存在多条接收的信息,则透明显示装置100接收关于外部装置110上的显示坐标的信息,通过使用透明显示装置100的屏幕尺寸信息以及从外部装置110发送的显示坐标信息来检测关于透明显示装置100上的显示坐标的信息,并通过使用检测到的坐标信息来显示多个对象。可通过以上描述的坐标信息转换操作来检测坐标信息。
然而,外部装置110可通过使用透明显示装置100的屏幕尺寸信息以及与外部装置110上的多条对象信息的显示坐标有关的信息来检测关于透明显示装置100上的坐标的信息,并且可将检测到的坐标信息和对象信息发送给透明显示装置100。然后,透明显示装置100可基于接收的坐标信息来显示对象。
在操作S203,从外部装置110发送的关于选择的对象的信息可包括与选择的对象相关的信息。与对象相关的信息可包括如上所述的未显示在外部装置110上的信息(例如,关于包括在文件夹中的对象的信息)。
在操作S204,在透明显示装置100上显示接收的信息的步骤可包括如图6C、图7C和图9C中所示的在与外部装置110的位置近似的位置处显示接收的信息。然而,当如图10D中所示,接收到第二触摸输入时,作为被选择的对象的图片Pic1、Pic5和Pic6被接收。因此,透明显示装置100可依次显示接收的图片Pic1、Pic5和Pic6,或可在基于图10D中所示的屏幕的位置上显示接收的图片Pic1、Pic5和Pic6。接收的信息可被存储在透明显示装置100中的剪贴板中,或者可在产生剪贴板之后被显示在剪贴板上。
图11是示出根据另一示例性实施例的在透明显示装置中显示信息的方法的流程图。图11中示出的方法包括编辑功能。
在操作S1101,透明显示装置100接收第一触摸输入和第二触摸输入。第一触摸输入和第二触摸输入与参照图2至图10描述的第一触摸输入和第二触摸输入相同。
在操作S1102,透明显示装置100基于第一触摸输入和第二触摸输入向外部装置110请求与对象相关的信息。对与对象相关的信息的请求与图2的操作S201中所描述的请求相同。
在操作S1103,透明显示装置100从外部装置110接收与所述请求相应的信息。所接收的与对象相关的信息与在操作S203中所描述的与对象相关的信息相同。
在操作S1104,透明显示装置100在透明显示装置100上显示接收的信息。
在操作S1105,透明显示装置100根据用户输入对所接收的显示在透明显示装置100上的信息进行编辑。
也就是说,当接收的对象显示在透明显示装置100上(如图7C中所示),并且接收到用于组合对象的基于触摸的用户输入(701和702)时,透明显示装置100显示下述屏幕:在该屏幕上对象如图7D中所示被组合。
可经由各种基于触摸的操作来接收用户输入701和702。例如,用户输入701和702可被执行为各种基于触摸的操作,例如,用于长触摸将被移动的对象并将该对象拖动到将被组合的对象的期望位置的基于触摸的操作、用于长触摸将被移动的对象并长触摸将被组合的对象的期望位置的基于触摸的操作、用于在将被移动的对象上设置基于触摸的闭合区域并长触摸将被组合的对象的期望位置的基于触摸的操作、或用于在将被移动的对象上设置基于触摸的闭合区域、在将被组合的对象的期望位置上设置基于触摸的闭合区域并连接闭合区域的基于触摸的操作。
操作S1105中的编辑操作不限于对如图7C和图7D中所示的对象的组合。编辑操作可包括对对象的各种编辑(诸如改变对象的形状或改变对象的内容)以及对包括对象的屏幕的编辑。
透明显示装置100可基于与外部装置110的交互来执行以上编辑操作。因此,外部装置110上所显示的信息可实时反映透明显示装置100中的编辑结果。编辑结果可根据透明显示装置100中的用户输入仅被存储在外部装置110中,仅被存储在透明显示装置100中,或被存储在装置100和装置110两者中。
图12是示出根据另一示例性实施例的在透明显示装置中显示信息的方法的流程图。在图12中,透明显示装置100是柔性的,并且透明显示装置100的正面部分和背面部分可根据基于触摸的输入被改变或变形。外部装置110具有触摸屏。
在操作S1201,接收用于选择外部装置110上所显示的对象的触摸输入,其中,所述对象透过透明显示装置100被看到。这里,接收的触摸输入可与参照图2至图10描述的第二触摸输入相应。
在操作S1202,接收到触摸输入的透明显示装置100的正面部分和背面部分被变形为朝向外部装置110突出。
图13A和图13B是示出透明显示装置100和外部装置110之间的关系的侧视图,其中,透明显示装置100是柔性的并具有根据基于触摸的输入而一起变形的正面部分1301和背面部分1302。
图13A是示出在触摸输入被接收之前彼此重叠的透明显示装置100和外部装置110的侧视图。
图13B示出以下情况:透明显示装置100的正面部分1301和背面部分1302根据对透明显示装置100的正面部分1301的基于触摸的用户输入而一起变形从而接触外部装置110的触摸屏1303。透明显示装置100的背面部分1302可被配置为稳压型,使得外部装置110的触摸屏可将透明显示装置100的背面部分1302的接触部分识别为基于触摸的输入;然而,本发明不限于此。也就是说,可根据外部装置110中的触摸屏1303的触摸感测类型来配置背面部分1302。
同时,在操作S1203,透明显示装置100基于由于透明显示装置100的背面部分1302和外部装置110之间的接触而引起的触摸输入,从外部装置110接收与选择的对象相关的信息。
在操作S1204,透明显示装置100显示接收的信息。
图14是示出根据另一示例性实施例的在透明显示装置100中显示信息的方法的流程图。图14示出与外部装置110上所显示的对象相关的信息以及屏幕尺寸信息基于透明显示装置100和外部装置110之间的局域无线通信而被发送的情况。
在操作S1401,透明显示装置100经由局域无线网络接收与外部装置110上所显示的对象相关的信息以及外部装置110的屏幕尺寸信息。局域无线通信可包括NFC、蓝牙通信、Wi-Fi直连通信和IR协会通信,但不限于此。
在操作S1402,透明显示装置100检查透明显示装置100是否与外部装置110重叠。操作S1402中的检查操作可包括检查用户的意图,以根据对透明显示装置100的触摸输入来显示透过透明显示装置100看到的在外部装置110上所显示的对象。用户的意图可被理解为选择将被显示在透明显示装置100上的对象的意图。
可通过将接触传感器布置在透明显示装置100的背面部分上来执行检查操作,或通过经由局域无线通信将由布置在外部装置110的正面部分上的接触传感器感测到的感测结果发送给透明显示装置100来执行检查操作,但不限于此。
此外,在操作S1402,透明显示装置100和外部装置110可重叠,使得如图3A中所示,当外部装置110较小时,外部装置110可被包括在透明显示装置100的屏幕内,但不限于此。如图4A的示例中所示,如果透明显示装置100小于外部装置110,则外部装置110的一部分可与透明显示装置100重叠,但不限于此。如图9A中所示,当透明显示装置100和外部装置110具有相等的尺寸时,透明显示装置100和外部装置110的重叠面可彼此相同。
在操作S1402,如果确定透明显示装置100和外部装置110彼此重叠,则在操作S1403,透明显示装置100根据用户输入,通过使用经由局域无线通信发送的信息来显示与外部装置110上所显示的对象相关的信息。操作S1403中的用户输入可包括对显示透过透明显示装置100看到的在外部装置110上所显示的对象的请求,但不限于此。
图15是示出根据另一示例性实施例的在透明显示装置中显示信息的方法的流程图。图15示出根据用户输入将通过使用透明显示装置100的相机功能拍摄外部装置110而获取的信息显示在透明显示装置100上的情况。
在操作S1501,透明显示装置100通过使用相机功能来拍摄外部装置110上所显示的对象。
在操作S1502,透明显示装置100确定透明显示装置100和外部装置110是否彼此重叠。可按照与以上描述的操作S1402的确定操作相同的方式来执行确定透明显示装置100和外部装置110是否彼此重叠的操作。
在操作S1503,如果确定透明显示装置100和外部装置110彼此重叠,则透明显示装置100根据用户输入来显示拍摄到的外部装置110上所显示的对象。用户输入可包括对输出被拍摄的外部装置110上所显示的对象的请求,但不限于此。
图16是根据示例性实施例的透明显示装置100的功能框图。
参照图16,透明显示装置100可包括透明显示器1610、存储器1620、通信接口1630、处理器1640和传感器1650。然而,透明显示装置100还可包括除了图16中所示的组件之外的另外的组件。例如,透明显示装置100可包括接口(诸如通用串行总线(USB))或相机模块。
透明显示器1610被配置为使得外部装置110的屏幕上所显示的对象透过可透明显示器1610被看到,并可被配置为接收基于触摸的输入。透明显示单元1610可以以各种类型来形成,例如,透明液晶显示器(LCD)型、透明薄膜电致发光面板(TFEL)型、透明OLED型或投影型。在下文中,将在下面描述透明显示器1610的结构的示例。
透明LCD型是通过从当前使用的LCD装置去除背光单元并使用一对偏振板、光学膜、透明薄膜晶体管(TFT)和透明电极而形成的透明显示装置。透明显示装置可被称为透明显示器。在透明LCD装置的情况下,透光率由于偏振板或光学膜而降低,并且光学效率由于使用周围光来代替背光单元而降低;然而,可实现大尺寸的透明显示器。
透明TFEL型是使用交流(AC)型无机薄膜EL显示器(AC-TFEL)的透明显示装置,其中,交流(AC)型无机薄膜EL显示器(AC-TFEL)包括透明电极、无机荧光体和绝缘膜。当加速的电子穿过无机荧光体以激发荧光体时,AC-TFEL发光。如果透明显示单元1610是透明TFEL型,则处理器1640可将电子调整为被投射到适当位置以确定显示信息的位置。由于无机荧光体和绝缘膜是透明的,因此可容易获得透明显示器。
另外,透明OLED型是使用自身发光的OLED的透明显示装置。由于有机发射层是透明的,因此如果两个电极被实现为透明电极,则OLED可充当透明显示装置。在OLED中,电子和空穴从有机发射层的两侧注入,以在有机发射层中结合并发光。透明OLED装置可通过将电子和空穴注入到期望的位置来显示信息。
图17是示出被形成为透明OLED型的透明显示器1610的详细结构的示图。然而,透明显示器1610不限于图17中所示的示例。
参照图17,透明显示器1610包括透明基板1702、透明晶体管层1703、第一透明电极1704、透明有机发射层1705、第二透明电极1706和连接电极1707。
透明基板1702可由透明的聚合物材料(诸如塑料)或玻璃材料形成。可根据使用透明显示装置100的环境来确定形成透明基板1702的材料。例如,聚合物材料轻并且是柔性的,因此可被应用于便携式显示装置。玻璃材料可被应用于橱窗或一般窗口。
透明晶体管层1703是包括通过用有机材料(诸如透明氧化锌或氧化钛)替换传统TFT中所使用的不透明硅而制造的晶体管的层。在透明晶体管层1703中,形成有源极、栅极、漏极和各种介电层1708和1709,并且可形成用于将漏极电连接到第一透明电极1704的连接电极1707。透明晶体管层1703包括分布于透明显示装置100的整个显示表面的多个透明晶体管。处理器1640将控制信号施加于透明晶体管层1703中的每个晶体管的栅极,以驱动相应的透明晶体管并显示信息。
第一透明电极1704和第二透明电极1706被布置在彼此相对的两侧上,而透明有机发射层1705被置于中间。第一透明电极1704、透明有机发射层1705和第二透明电极1706形成有机发光二极管(OLED)。
透明OLED可根据其驱动方法被分类为无源矩阵OLED(PMOLED)和有源矩阵OLED(AMOLED)。PMOLED具有以下结构:在第一透明电极1704和第二透明电极1706之间的交点形成像素。然而,在AMOLED中,TFT被布置用于驱动每个像素。
第一透明电极1704和第二透明电极1706中的每一个包括彼此垂直排列的多个线电极。例如,如果第一透明电极1704的线电极沿横向方向排列,则第二透明电极1706的线电极沿纵向方向排列。因此,存在形成在第一透明电极1704和第二透明电极1706之间的多个交叉区域。透明晶体管连接到每个交叉区域。
处理器1640通过使用透明晶体管在每个交叉区域中产生电势差。电子和空穴在产生电势差的交叉区域内从第一电极1704和第二电极1706被引导至透明有机发射层1705,然后彼此结合以发光。另一方面,未产生电势差的交叉区域不发光,因此背面的背景图像按原样被看到。
氧化铟锡(ITO)可被用作第一透明电极1704和第二透明电极1706。另外,可使用新开发的材料(诸如石墨烯)。石墨烯是一种具有碳原子彼此连接的蜂窝状平面结构并具有透明属性的材料。另外,透明有机发射层1705可由各种材料形成。
另外,如上所述,除了透明LCD型、透明TFEL型和透明OLED型之外,透明显示器1610还可被形成为投影型。投影型是一种通过将图像投影到透明屏幕(诸如平视显示器(head-up display))来显示图像的方法。
此外,透明显示器1610可以是可双触摸的触摸屏,或者可以是仅正面是可触摸的触摸屏。
透明显示器1610显示包括透明显示装置100中处理的对象的信息。所述信息可包括除对象之外的信息。除对象之外的信息可表示被显示但可能不是通过用户输入选择的信息。
透明显示器1610被形成为透明装置,透明显示器1610的透明度可通过调整透明装置的透光率或通过调整每个像素的RGB值而被调整。
此外,透明显示器1610可具有OLED和LCD相组合的结构。在透明显示器1610中,OLED可位于与正面输入部分邻近的位置,LCD可位于与背面输入部分邻近的位置。在透明显示器1610具有以上组合结构的情况下,透明显示器1610维持透明状态(诸如断电期间的玻璃状态),并且当通电时,LCD阻挡光,使得透明显示器1610变成不透明。
透明显示器1610通过正面输入单元接收用户的触摸输入。透明显示器1610上所显示的屏幕可包括用户界面(UI)或图形用户界面(GUI)。此外,透明显示器1610可根据用户对外部装置110上所显示的对象的触摸输入(第一触摸输入和第二触摸输入),从外部装置110接收并显示与对象相关的信息,其中,所述对象透过透明显示单元1610被看到。
存储器1620存储被配置为执行透明显示器1610中的信息显示方法的至少一个程序。存储单元1620可包括诸如高速随机存取存储器、磁盘存储装置或闪存的非易失性存储器,或其它非易失性半导体存储器。
图18是示出根据示例性实施例的存储在透明显示装置100的存储器1620中的软件层的示图。
参照图18,软件层可包括存储器模块1810、传感器和识别模块1820、通信模块1830、输入/输出模块1860和图例(legend)模块1870,但不限于此。
存储器模块1810包括系统数据库1811和触摸模式数据区域1812,其中,系统数据库1811是用于存储诸如地址簿和环境信息的一般数据的存储器,触摸模式数据区域1812存储针对将被显示在透明显示器1610上的对象的触摸模式的设置值。
传感器识别模块1820包括用于感测透明显示器1610上的触摸的模块1821以及用于对输入触摸进行分类的模块1822。用于对输入触摸进行分类的模块1822可将触摸输入分类为以下模式:用于将在正面输入接口上的输入传输到事件处理器X11的正面输入模式1823、用于将在背面输入接口上的输入传输到事件处理器X11的背面输入模式1824、以及用于将双触摸输入(正面输入接口和背面输入接口两者的触摸输入)传输到事件处理器X11的双模式1825。然而,可通过仅将透明显示器1610的正面上的输入传输到事件处理器X11的输入模式来配置传感器识别模块1820。
通信模块1830可包括电话模块1840和消息传送模块1850,但不限于此。
电话模块1840包括用于连接电话呼叫的信息收集模块1842以及用于基于互联网协议电话(VoIP)通过互联网发送语音的语音服务模块1841。
消息传送模块1850包括与用户之间通过互联网连接进行的会话相关的即时模块1842、与短消息服务(SMS)文本消息和多媒体消息相关的模块1852以及用于收发电子邮件的模块1853。
输入/输出模块1860包括UI和图形模块1861以及多媒体模块1865。
UI和图形模块1861包括用于通过窗口管理器接收触摸输入的X11模块1862、在屏幕上输出被用户看到的所有对象的模块1863、和与针对每个对象存储的模式设置值以及当前触摸输入相关的评估模块1864。
多媒体模块1865包括运动画面再现模块1866、运动画面和静止图像捕捉模块1867以及语音再现模块1868。
用于执行根据示例性实施例的信息显示方法的程序可被存储在存储器模块1871中。存储器模块1871可存储各种应用。
如上所述,存储器1620可存储各种配置的程序,并且不限于图18中所示的示例。
通信接口1630可与外部装置110、服务器120和AP 130中的至少一个进行通信。为了执行通信,通信接口1630可被配置为经由无线通信网络(诸如无线互联网、无线内联网、无线电话网络、无线局域网(LAN)、Wi-Fi网络、Wi-Fi直连(WFD)网络、3G网络、4G长期演进(LTE)网络、蓝牙网络、红外数据协会(IrDA)网络、射频识别(RFID)网络、超宽带(UWB)网络、Zigbee网络或近场通信(NFC)网络)发送/接收数据;然而,本发明不限于此。具体地,通信接口1630可包括全球定位系统(GPS)模块。
处理器1640可通过执行存储在存储器1620中的程序来执行根据以上描述的示例性实施例的操作。处理器1640接收表示针对透过透明显示器1610看到的外部装置110的参考信息的第一触摸输入、以及表示对外部装置110上所显示的对象的选择的第二触摸输入。处理器1640基于经由通信接口1630接收的第一触摸输入和第二触摸输入向外部装置110请求与对象相关的信息。当经由通信接口1630从外部装置110接收到与对象相关的信息时,处理器1640在透明显示器1610上显示接收的信息。
可如参照图2、图11、图12、图14、图15和图21中的流程图所描述的那样来执行处理器1640的关于根据示例性实施例的信息显示方法的操作,其中,图21中的流程图将在稍后被描述。
传感器1650感测透明显示装置100的当前状态(诸如透明显示装置100的位置、用户在透明显示装置100上的接触、透明显示装置100的朝向以及透明显示装置100的加速或减速),并产生用于控制透明显示装置100的操作的感测信号。具体地,传感器1650可产生关于透明显示装置100的位置的感测信号,以接收参考图10A至图10D所描述的基于增强现实服务的信息。
图19是根据示例性实施例的透明显示装置100的功能框图。
参照图19,透明显示装置100可包括透明显示器1901、用户输入接口1902、传感器1903、相机1904、存储器1905、通信接口1906、端口1907、音频输入接口1908、音频信号处理器1909、音频输出接口1910、电源1911和处理器1912,但不限于此。也就是说,透明显示装置100可包括比图19的组件更少的组件,或可包括除了图19的组件之外的另外的组件。
透明显示器1901可被称为触摸屏。透明显示器1901可显示对象并可接收基于触摸的用户输入。透明显示器1901可经由透明显示器1901的正面和背面中的至少一个来接收基于触摸的用户输入。为此,透明显示器1901包括至少一个触摸传感器。触摸传感器可基于(x,y)坐标来识别用户输入。触摸传感器可包括用于识别直接触摸的传感器或用于识别接近触摸的传感器。
可根据用户的基于用户手势的请求或用户的选择来产生用户输入。用户手势可根据触摸的数量、触摸方式、触摸区域和触摸强度的组合而被不同地定义。
如以上参照图16的透明显示器1610所描述的,透明显示器1901被形成为透明装置,透明显示器1901的透明度可通过调整透明装置的透光率或通过调整每个像素的RGB值而被调整。此外,透明显示器1901可具有OLED和LCD相组合的结构。在透明显示器1901中,OLED可位于与透明显示器1901的正面邻近的位置,LCD可位于与透明显示器1901的背面邻近的位置。
透明显示器1901可显示分别响应于以下用户输入的屏幕:通过其正面和背面中的至少一个的基于触摸的用户输入、基于传感器1903的用户输入、经由相机1904的用户输入以及经由音频输入接口1908的用户输入。透明显示器1901上所显示的屏幕可包括UI或GUI屏幕。
透明显示器1901可具有与参照图16所描述的透明显示器1610相似的物理结构。可根据透明显示装置100的类型来形成两个或更多个透明显示器1901。
用户输入接口1902产生用于控制透明显示装置100的操作的输入数据(或控制数据)以及用户输入。用户输入接口1902可包括键盘、圆顶开关、被使用以代替鼠标的触摸板、滚轮(jog wheel)、点动开关(jog switch)以及硬件(H/W)按钮。
与图16中所示的传感器1650相似的传感器1903感测透明显示装置100的当前状态(诸如透明显示装置100的位置、用户在透明显示装置100上的接触、透明显示装置100的朝向以及透明显示装置100的加速或减速)并产生用于控制透明显示装置100的操作的感测信号。
传感器1903还可包括除了用于感测关于透明显示器1901所描述的直接触摸或接近触摸的传感器之外的传感器。例如,传感器1903可包括接近传感器。接近传感器是用于在没有实际物理触摸的情况下通过使用电磁场的力或红外线来检测对象是否靠近预先设置的检测表面或外部对象是否在附近出现的传感器。接近传感器的示例包括透明光电传感器、直接反射光电传感器、镜面反射光电传感器、高频振荡光电传感器、电容光电传感器、磁光电传感器、红外光电传感器等。
相机1904处理图像帧,诸如在电话会议模式或拍摄模式下从图像传感器获取的静止图像或运动图像。经处理的图像帧可被显示在透明显示器1901上。由相机1904处理的图像帧可被存储在存储器1905中,或可通过通信接口1906或端口1907被发送给另一装置。接收发送的图像帧的装置可包括外部装置110、服务器120和AP 130中的至少一个,但不限于此。
相机1904还可被配置为接收对透明显示器1901的正面和背面的用户输入,或拍摄对象。相机1904的数量可根据透明显示装置100的结构而是两个或更多个。相机1904可被用作识别用户的空间手势的输入设备。
存储器1905存储资源以及被配置为将由将在稍后描述的处理器1912执行的至少一个程序。所述至少一个程序包括执行信息显示方法的程序、透明显示装置100的操作系统(OS)程序、在透明显示装置100中设置的应用以及用于执行透明显示装置100的各种功能(例如,通信功能和显示功能)所必需的程序。
资源包括用于执行以上所述的程序所必需的信息、用于执行在本发明的实施例中提及的信息显示方法的用户界面屏幕信息、以及通过第一触摸输入和第二触摸输入识别的用户输入信息。可基于参照图3至图10所描述的示例来设置按照第一触摸输入和第二触摸输入而被识别的用户输入信息,但不限于此。
存储器1905可被配置为独立地包括存储执行透明显示装置100的各种功能所必需的至少一个程序以及操作系统程序的存储器,以及存储一个或更多个程序、资源以及执行信息显示方法的各种应用的存储器。
存储器1905可包括闪存类型、硬盘类型、微型多媒体卡类型以及卡类型存储器(例如,SD存储器或XD存储器)之中的至少一种类型的存储介质、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)磁存储器以及光盘。
通信接口1906可被配置为经由无线通信网络(诸如无线互联网、无线内联网、无线电话网络、无线局域网(LAN)、Wi-Fi网络、Wi-Fi直连(WFD)网络、3G网络、4G长期演进(LTE)网络、蓝牙网络、红外数据协会(IrDA)网络、射频识别(RFID)网络、超宽带(UWB)网络、Zigbee网络或近场通信(NFC)网络,但不限于此)将数据发送给外部装置110、服务器(120)和AP(130)中的至少一个和从外部装置110、服务器(120)和AP(130)中的至少一个接收数据。
通信接口1906可包括广播接收模块、移动通信模块、无线互联网模块、有线互联网模块、短距离通信模块和位置信息模块中的至少一个,但不限于此。
广播接收模块通过广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信号可包括卫星信道和地面信道。移动通信模块通过移动通信网络将无线信号发送给基站、外部装置110和服务器120中的至少一个,和从基站、外部装置110和服务器120中的至少一个接收无线信号。无线信号可包括根据语音呼叫信号、电话会议呼叫或文本/多媒体消息的发送/接收的各种类型的数据。无线互联网模块是用于无线互联网连接的模块。有线互联网模块是用于有线互联网连接的模块。
短距离通信模块是用于短距离通信的模块。短距离通信技术可使用蓝牙、REID、IrDA、UWB、Zigbee、WFD、NFC等。与图14中所示的示例性实施例类似,关于显示在外部装置110上的对象的信息以及屏幕尺寸信息可经由短距离通信模块被接收。例如,当使用NFC通信方法并且外部装置110和透明显示装置100之间的距离在基于NFC的短距离通信的半径内时,透明显示装置100可从外部装置110读取或接收以上信息。
位置信息模块是用于识别或获取透明显示装置100的位置的模块。作为示例,可使用GPS模块。GPS模块从多个卫星接收位置信息。位置信息可包括用纬度和经度表示的坐标信息。
端口1907可通过使用即插即用接口(诸如USB端口)将数据发送给外部装置110和从外部装置110接收数据。即插即用接口是以下模块:该模块在外部装置110被插入到透明显示装置100中的情况下进行自动检测并使得能够使用(即,利用)。装置不限于外部装置110。
音频输入接口1908在呼叫模式、录音模式或语音识别模式等下接收外部声音信号的输入。音频输入接口1908可被配置为例如麦克风。音频输入接口1908可被配置为包括用于消除在接收外部声音信号的输入的处理期间发生的噪音的各种噪音消除算法。
通过使用音频输入接口1908输入的声音信号可以是以下用户输入:该用户输入表示对透过根据示例性实施例的透明显示单元1901看到的在外部装置110上所显示的对象的选择。通过使用音频输入接口1908输入的声音信号可被存储在存储器1905中,或可通过通信接口1906或端口1907被发送到外部。所述外部可包括外部装置110、其它外部装置(未示出)、服务器120和AP 130。
音频信号处理单元1909提供音频输入接口1908和处理器1912之间以及音频输出接口和处理器1912之间的接口。也就是说,音频信号处理单元1909将从音频输入接口1908接收的语音信号转换成可由处理器1912处理的音频数据,并将音频数据发送给处理器1912。音频信号处理单元1909将从处理器1912发送的音频数据转换成电声音信号,并将电声音信号发送给音频输出接口1910。
音频输出接口1910在呼叫模式或音频再现模式下输出从音频信号处理单元1909接收的声音信号或音频信号。音频信号输出接口1910可被配置为扬声器。音频输入接口1908和音频输出接口1910可被整体配置为类似于头戴式耳机。
透明显示器1901、用户输入接口1902、传感器1903、相机1904和音频输入接口1908可根据透明显示装置100和用户之间的用户接口的功能而被称为输入设备或输入/输出设备。例如,在透明显示装置100和用户之间的用户接口的功能包括触摸屏功能、语音识别功能和空间手势识别功能的情况下,用户输入接口1902、传感器1903、相机1904和音频输入接口1908可被称为输入设备,透明显示器1901可被称为输入/输出设备。
电源1911向透明显示装置100的各种元件供电。电源1911包括一个或更多个电源,诸如电池和交流(AC)电源。透明显示装置100可不包括电源1911,但可包括可连接到外部电源(未示出)的连接单元(未示出)。
处理器1912可被称为控制透明显示装置100的一般操作的一个或更多个处理器。虽然处理器1912被实现为图19中的单个芯片,但是处理器1912可根据透明显示装置100的功能而被划分成多个处理器。
处理器1912通常可控制透明显示器1901、用户输入接口1902、传感器1903、相机1904、存储器1905、通信接口1906、端口1907、音频输入接口1908、音频信号处理单元1909和音频输出接口1910。因此,处理器1912可被称为控制器、微处理器、数字信号处理器等。
处理器1912还可提供以下用户输入:所述用户输入通过与输入设备相应的透明显示器1901、用户输入接口1902、传感器1903、相机1904和音频输入接口1908以及基于透明显示器1901的用户界面被输入。
处理器1912可执行与根据示例性实施例的信息显示方法相关的至少一个程序。处理器1912可通过从存储器1905读取程序或通过通信接口1906从外部设备(诸如应用提供服务器(未示出)或市场服务器(未示出))下载程序来执行程序。
处理器1912可被理解为包括接口功能单元,其中,所述接口功能单元在透明显示装置100的各种功能模块和处理器1912之间进行接口连接。可如图2、图11、图12、图14、图15和图21的流程图中所示的那样来执行处理器1912的与根据示例性实施例的信息显示方法相关的操作,其中,图21中的流程图将在稍后被描述。
图20是示出根据示例性实施例的外部装置110的操作的流程图。
在操作S2001,外部装置110从透明显示装置100接收对外部装置110上所显示的至少一个对象相关的信息的请求。对信息的请求可经由以下通信中的至少一种被发送:装置之间的直接通信、经由服务器的通信以及经由中继器的通信。
对与对象相关的信息的请求可基于对透明显示装置100的第一触摸输入和第二触摸输入而被输入。第一触摸输入是用于表示关于透过透明显示装置100看到的外部装置110的参考信息的对透明显示装置100的用户输入。第二触摸输入是用于选择外部装置110上所显示的至少一个对象的对透明显示装置100的用户输入,其中,所述至少一个对象透过透明显示装置100被看到。
对与对象相关的信息的请求可包括以上示例性实施例中所描述的外部装置110上的被选择的对象的显示位置信息(坐标信息)、透明显示装置100的屏幕尺寸以及透明显示装置100上的第一触摸输入和第二输出输入的坐标信息,但不限于此。
然而,当透明显示装置100按图21中所示的流程图操作时,对与对象相关的信息的请求可基于与第二触摸输入相应的触摸输入。
在操作S2002,外部装置110响应于接收到的对与对象相关的信息的请求来选择对象。例如,如果请求的对象是图标,则外部装置110选择请求的对象的图标以及与图标关联的应用程序。如果请求的对象是文件夹,则外部装置110选择请求的文件夹以及位于所述文件夹的更下层的文件或数据。如果请求的对象是包括在一个屏幕中的对象,则外部装置110通过使用包括在接收的请求中的坐标信息来选择对象。如果请求的对象是包括在一个屏幕中的多个对象,则外部装置110通过使用包括在接收的请求中的对象的坐标信息来分别选择多个对象。
在操作S2003,外部装置110将与选择的对象相关的信息发送给透明显示装置100。与对象相关的信息按照与对所述信息的请求被接收的方式相同的方式被发送给透明显示装置100,但不限于此。例如,对所述信息的请求可经由装置之间的直接通信被接收,与响应于请求而被选择的对象相关的信息可经由中继器或服务器被发送给透明显示装置100。
图21是示出根据另一示例性实施例的在透明显示装置上显示信息的方法的流程图。图21示出参照图2提及的第二触摸输入被使用的情况。
在操作S2101,透明显示装置100接收用于选择透过透明显示装置100看到的在外部装置110上所显示的对象的触摸输入。这里,触摸输入与图2至图10中提及的第二触摸输入相应。关于透过透明显示装置100看到的外部装置110的信息可与在图1至图10中提及的关于外部装置110的信息相同。
在操作S2102,透明显示装置100向外部装置110请求与基于触摸输入而选择的对象相关的信息。发送给外部装置110的用于请求与基于触摸输入而选择的对象相关的信息的信号包括用于请求与基于图2至图10中所提及的第二触摸输入而选择的对象相关的信息的信号。
在操作S2103,透明显示装置100从外部装置110接收关于选择的对象的信息。接收的信息与操作S2102中的请求信号相应,并可与图2中所示的操作S203中接收的信息相同。
在操作S2104,透明显示装置100显示接收的信息。接收的信息可按照与图2中所示的操作S204的方式相同的方式被显示。
图21中所示的流程图可被修改为包括图11中所示的操作S1105,使得透明显示装置100上所显示的对象可基于透明显示装置100和外部装置110之间的交互而被编辑。
根据示例性实施例的信息显示方法也可被实现为计算机可读记录介质上的计算机可读代码。计算机可读介质可以是能够存储由计算机系统读取的数据的任何记录设备,例如,只读存储器(ROM)、随机存取存储器(RAM)、致密盘(CD)-ROM、磁带、软盘、光学数据存储装置等。计算机可读介质可分布在通过网络相互连接的计算机系统中,并且本发明可被存储并被实现为分布式系统中的计算机可读代码。
虽然已具体示出并描述了示例性实施例,但是本领域普通技术人员将理解,可在不脱离由权利要求限定的本发明的精神和范围的情况下,做出形式和细节上的各种改变。

Claims (15)

1.一种在透明显示装置上显示信息的方法,所述方法包括:
接收透明显示装置上的用于选择外部装置上所显示的对象的触摸输入,其中,透过透明显示装置的屏幕可见所述对象;
向外部装置请求与所述对象相关的信息,其中,所述请求包括所述触摸输入在透明显示装置上的位置信息;
从外部装置接收与所述对象相关的信息;以及
在透明显示装置的屏幕上显示接收的信息。
2.如权利要求1所述的方法,其中,所述触摸输入指示透过所述屏幕可见的所述对象的轮廓线。
3.如权利要求1或2所述的方法,其中,所述触摸输入是指示所述屏幕上的下述位置的基于轻击的触摸:在所述位置,透过所述屏幕可见所述对象。
4.如权利要求1或2所述的方法,其中,所述触摸输入指示所述屏幕上的下述闭合区域:在所述闭合区域,透过所述屏幕可见所述对象。
5.如权利要求1或2所述的方法,其中,与所述对象相关的信息指示具有与所述对象的类型相同类型的至少一个其它对象,所述至少一个其它对象在外部装置的屏幕上的显示位置不同于所述对象在外部装置的屏幕上的显示位置。
6.如权利要求1或2所述的方法,其中,与所述对象相关的信息指示未被显示在外部装置的屏幕上的信息。
7.如权利要求1或2所述的方法,其中,显示步骤包括:在透明显示装置的屏幕上与所述对象在外部装置的屏幕上的显示位置相应的显示位置处显示接收的信息。
8.如权利要求1或2所述的方法,还包括:基于透明显示装置和外部装置之间的交互来对透明显示装置的屏幕上所显示的信息进行编辑。
9.如权利要求1或2所述的方法,还包括:在透明显示装置的屏幕上显示与外部装置相关的基于增强现实服务的信息。
10.如权利要求1或2所述的方法,其中,请求和接收与所述对象相关的信息的步骤基于以下通信之一被执行:装置之间的直接通信、经由服务器的通信以及经由中继器的通信。
11.一种透明显示装置,包括:
透明显示器,被配置为接收用于选择透过透明显示器可见的、在外部装置上所显示的对象的触摸输入;
通信单元,被配置为与透过透明显示器可见的外部装置进行通信;以及
处理器,被配置为经由通信单元基于所述触摸输入向外部装置请求与所述对象相关的信息,经由通信单元从外部装置接收响应于所述请求的与所述对象相关的信息,并控制透明显示器显示接收的信息,其中,所述请求包括所述触摸输入在透明显示装置上的位置信息。
12.一种包含有程序的非暂时性计算机可读记录介质,其中,所述程序在被执行时实施将由透明显示装置执行的显示信息的方法,其中,所述方法包括:
接收透明显示装置上的用于选择外部装置上所显示的对象的触摸输入,其中,透过透明显示装置的屏幕可见所述对象;
向外部装置请求与所述对象相关的信息,其中,所述请求包括所述触摸输入在透明显示装置上的位置信息;
从外部装置接收与所述对象相关的信息;以及
在透明显示装置的屏幕上显示接收的信息。
13.一种在透明显示装置的屏幕上显示信息的方法,所述方法包括:
从透明显示装置接收对与外部装置的屏幕上所显示的至少一个对象相关的信息的请求,其中,透过透明显示装置的屏幕可见所述至少一个对象;
响应于所述请求,选择所述至少一个对象;以及
将与选择的对象相关的信息发送给透明显示装置,
其中,对与所述对象相关的信息的请求包括:由透明显示装置上的第一触摸输入指示的外部装置的第一位置信息、以及由透明显示装置上的第二触摸输入指示的在外部装置的屏幕上所显示的所述对象的第二位置信息。
14.一种显示装置,包括:
显示器,被配置为显示至少一个对象;
通信单元,被配置为从透明显示装置接收对与显示装置的显示器上所显示的所述至少一个对象相关的信息的请求,并将与所述至少一个对象相关的信息发送给透明显示装置,其中,透过透明显示装置的屏幕可见所述至少一个对象;
控制器,被配置为响应于所述请求来选择所述至少一个对象,其中,对与所述对象相关的信息的请求包括:由透明显示装置上的第一触摸输入指示的显示装置的第一位置信息、以及由透明显示装置上的第二触摸输入指示的在显示装置的显示器上所显示的所述对象的第二位置信息。
15.一种包含有程序的非暂时性计算机可读记录介质,其中,所述程序在被执行时实施在透明显示装置上显示信息的方法,其中,所述方法包括:
从透明显示装置接收对与外部装置的屏幕上所显示的至少一个对象相关的信息的请求,其中,透过透明显示装置的屏幕可见所述至少一个对象;
响应于所述请求,选择所述至少一个对象;以及
将与选择的对象相关的信息发送给透明显示装置,
其中,对与所述对象相关的信息的请求包括:由透明显示装置上的第一触摸输入指示的外部装置的第一位置信息、以及由透明显示装置上的第二触摸输入指示的在外部装置的屏幕上所显示的所述对象的第二位置信息。
CN201380048814.6A 2012-09-19 2013-09-17 用于在透明显示装置上显示信息的系统和方法 Expired - Fee Related CN104641328B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR10-2012-0104156 2012-09-19
KR20120104156 2012-09-19
KR10-2013-0106227 2013-09-04
KR1020130106227A KR102255832B1 (ko) 2012-09-19 2013-09-04 투명 디스플레이 기기상에 정보를 디스플레이 하는 시스템 및 방법
PCT/KR2013/008399 WO2014046456A1 (en) 2012-09-19 2013-09-17 System and method for displaying information on transparent display device

Publications (2)

Publication Number Publication Date
CN104641328A CN104641328A (zh) 2015-05-20
CN104641328B true CN104641328B (zh) 2017-12-22

Family

ID=49231289

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380048814.6A Expired - Fee Related CN104641328B (zh) 2012-09-19 2013-09-17 用于在透明显示装置上显示信息的系统和方法

Country Status (5)

Country Link
US (2) US10007417B2 (zh)
EP (1) EP2711826A1 (zh)
CN (1) CN104641328B (zh)
TW (1) TWI637312B (zh)
WO (1) WO2014046456A1 (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130092281A (ko) * 2012-02-10 2013-08-20 삼성전자주식회사 디바이스에서 최신의 서비스 카테고리 테이블로 업데이트하는 방법 및 이를 위한 디바이스
US9261989B2 (en) 2012-09-13 2016-02-16 Google Inc. Interacting with radial menus for touchscreens
US9195368B2 (en) * 2012-09-13 2015-11-24 Google Inc. Providing radial menus with touchscreens
EP2966560B1 (en) * 2014-07-08 2020-01-22 Nokia Technologies Oy Determination of an apparatus display region
KR20160015843A (ko) * 2014-07-31 2016-02-15 삼성전자주식회사 디스플레이 장치 및 그 디스플레이 장치를 제어하는 방법
CN105528023B (zh) * 2014-10-27 2019-06-25 联想(北京)有限公司 显示控制方法、显示装置和电子设备
US9665697B2 (en) * 2015-03-17 2017-05-30 International Business Machines Corporation Selectively blocking content on electronic displays
US9980304B2 (en) 2015-04-03 2018-05-22 Google Llc Adaptive on-demand tethering
CN104965241B (zh) * 2015-07-17 2017-10-24 樊强 一种变色投影镜片及具有该镜片的抬头显示器
CN105589653A (zh) * 2015-12-25 2016-05-18 广州视源电子科技股份有限公司 平视显示器的控制方法和控制系统
US11243735B2 (en) 2016-02-09 2022-02-08 Lim Industries LLC Electronic panel having multiple display devices and a multi-state device operable with a processor to control a see-through mode and a plurality of display modes
US10254577B2 (en) 2016-02-09 2019-04-09 Lim Industries LLC Electronic panel having a see-through mode
CN107728349B (zh) * 2016-08-12 2021-04-27 深圳市掌网科技股份有限公司 可切换展示内容的互动装置和方法
KR20180056174A (ko) 2016-11-18 2018-05-28 삼성전자주식회사 콘텐츠 처리 방법 및 이를 지원하는 전자 장치
TWI629675B (zh) 2017-08-18 2018-07-11 財團法人工業技術研究院 影像辨識系統及其資訊顯示方法
JP6959529B2 (ja) * 2018-02-20 2021-11-02 富士通株式会社 入力情報管理プログラム、入力情報管理方法、および情報処理装置
AU2019243683A1 (en) * 2018-03-27 2020-11-19 Vizetto Inc. Systems and methods for multi-screen display and interaction
TWI650581B (zh) * 2018-08-08 2019-02-11 國立中央大學 高對比雙層透明顯示器
KR20210014813A (ko) 2019-07-30 2021-02-10 삼성디스플레이 주식회사 표시장치
CN110989913A (zh) * 2019-11-22 2020-04-10 维沃移动通信有限公司 一种控制方法及电子设备
JPWO2021171915A1 (zh) * 2020-02-28 2021-09-02
TWI745955B (zh) * 2020-05-06 2021-11-11 宏碁股份有限公司 擴增實境系統與其錨定顯示方法
CN113703161B (zh) * 2020-05-22 2023-07-25 宏碁股份有限公司 扩增实境系统与其锚定显示方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102402287A (zh) * 2010-09-16 2012-04-04 Lg电子株式会社 透明显示设备和提供对象信息的方法

Family Cites Families (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5583946A (en) * 1993-09-30 1996-12-10 Apple Computer, Inc. Method and apparatus for recognizing gestures on a computer system
KR100474724B1 (ko) * 2001-08-04 2005-03-08 삼성전자주식회사 터치스크린을 가지는 장치 및 그 장치에 외부디스플레이기기를 연결하여 사용하는 방법
US6980202B2 (en) * 2001-12-21 2005-12-27 International Business Machines Corporation Method and system for creating and accessing hyperlinks from annotations relating to a physical document
US7743348B2 (en) * 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
WO2006013639A1 (ja) * 2004-08-04 2006-02-09 Hitachi, Ltd. 画像処理装置
JP4517827B2 (ja) 2004-11-22 2010-08-04 株式会社日立製作所 画面共有システム及び情報処理装置
US9030497B2 (en) * 2005-06-30 2015-05-12 Nec Display Solutions, Ltd. Display device and arrangement method of OSD switches
DE102005043310B4 (de) * 2005-09-12 2007-10-04 Siemens Ag Anzeigesystem insbesondere für eine industrielle Automatisierungseinrichtung
KR100765789B1 (ko) * 2006-06-27 2007-10-12 삼성전자주식회사 외부 기기에 대한 정보를 디스플레이하는 방법 및 장치와,그 방법을 수행하는 프로그램을 기록한 컴퓨터 판독 가능한기록 매체
US7796802B2 (en) * 2006-09-26 2010-09-14 The Boeing Company System for recording and displaying annotated images of object features
WO2009143294A2 (en) * 2008-05-20 2009-11-26 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
US8314859B2 (en) * 2008-05-29 2012-11-20 Lg Electronics Inc. Mobile terminal and image capturing method thereof
US20110102354A1 (en) * 2008-06-30 2011-05-05 Tetsuya Fuyuno Information processing device, display control method, and recording medium
JP5080401B2 (ja) * 2008-08-25 2012-11-21 株式会社Pfu 情報処理装置、透過表示要素制御方法およびプログラム
US8279174B2 (en) * 2008-08-27 2012-10-02 Lg Electronics Inc. Display device and method of controlling the display device
KR20100062158A (ko) * 2008-12-01 2010-06-10 삼성전자주식회사 디스플레이 장치 및 디스플레이 방법
US8565829B2 (en) 2009-03-02 2013-10-22 Lg Electronics Inc. Mobile terminal with detachably coupled sub-device
KR101587102B1 (ko) 2009-03-02 2016-01-20 엘지전자 주식회사 이동 단말기
JP5428436B2 (ja) * 2009-03-25 2014-02-26 ソニー株式会社 電子機器、表示制御方法およびプログラム
US9241062B2 (en) * 2009-05-20 2016-01-19 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
US8823743B2 (en) * 2009-10-02 2014-09-02 Sony Corporation Image processing device and method, and program
KR101694159B1 (ko) * 2010-04-21 2017-01-09 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
KR101657565B1 (ko) * 2010-04-21 2016-09-19 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
KR20110118421A (ko) * 2010-04-23 2011-10-31 엘지전자 주식회사 증강 원격제어장치, 증강 원격제어장치 제어방법 및 그 시스템
KR20110081040A (ko) * 2010-01-06 2011-07-13 삼성전자주식회사 투명 디스플레이를 구비한 휴대단말에서 컨텐츠 운용 방법 및 장치
KR101087479B1 (ko) 2010-01-29 2011-11-25 주식회사 팬택 멀티 디스플레이 장치 및 그 제어 방법
US8621365B2 (en) 2010-04-06 2013-12-31 Asustek Computer Inc. File sharing method and system
JP5849095B2 (ja) * 2010-06-28 2016-01-27 クリーンキーズ・インコーポレイテッド タッチ及び振動センシティブの平らな表面に対するキー押下イベントを検出し位置を特定する方法
IT1400746B1 (it) * 2010-06-30 2013-07-02 Damian S R L Macchina distributrice automatica di prodotti
US8362992B2 (en) * 2010-07-21 2013-01-29 Delphi Technologies, Inc. Dual view display system using a transparent display
KR101688942B1 (ko) 2010-09-03 2016-12-22 엘지전자 주식회사 다중 디스플레이에 기반한 사용자 인터페이스 제공 방법 및 이를 이용하는 이동 단말기
EP2431895B1 (en) * 2010-09-16 2017-07-26 LG Electronics Inc. Transparent display device and method for providing information using the same
US20120102438A1 (en) * 2010-10-22 2012-04-26 Robinson Ian N Display system and method of displaying based on device interactions
US20120102439A1 (en) * 2010-10-22 2012-04-26 April Slayden Mitchell System and method of modifying the display content based on sensor input
US9164581B2 (en) * 2010-10-22 2015-10-20 Hewlett-Packard Development Company, L.P. Augmented reality display system and method of display
US9007277B2 (en) * 2010-10-28 2015-04-14 Microsoft Technology Licensing, Llc Transparent display assembly
US20120105428A1 (en) * 2010-10-28 2012-05-03 Microsoft Corporation Transparent display configuration modes
US8941683B2 (en) * 2010-11-01 2015-01-27 Microsoft Corporation Transparent display interaction
US8605048B2 (en) * 2010-11-05 2013-12-10 Bluespace Corporation Method and apparatus for controlling multimedia contents in realtime fashion
DE102010052244A1 (de) * 2010-11-23 2012-05-24 Pierre-Alain Cotte Verfahren und Vorrichtung zur Darstellung einer grafischen Benutzeroberfläche einer tragbaren Recheneinheit auf einem externen Anzeigegerät
US8698771B2 (en) * 2011-03-13 2014-04-15 Lg Electronics Inc. Transparent display apparatus and method for operating the same
EP2500814B1 (en) * 2011-03-13 2019-05-08 LG Electronics Inc. Transparent display apparatus and method for operating the same
EP2500816B1 (en) * 2011-03-13 2018-05-16 LG Electronics Inc. Transparent display apparatus and method for operating the same
KR101226519B1 (ko) * 2011-04-14 2013-01-25 주식회사 제일기획 제품 광고 시스템 및 제품 광고 방법
JP5830987B2 (ja) * 2011-07-06 2015-12-09 ソニー株式会社 表示制御装置、表示制御方法およびコンピュータプログラム
US9465507B2 (en) * 2011-10-19 2016-10-11 Microsoft Technology Licensing, Llc Techniques to facilitate asynchronous communication
KR101952170B1 (ko) * 2011-10-24 2019-02-26 엘지전자 주식회사 검색 방법을 채용한 휴대 전자 기기
US9063566B2 (en) * 2011-11-30 2015-06-23 Microsoft Technology Licensing, Llc Shared collaboration using display device
TWI526888B (zh) * 2011-12-20 2016-03-21 友達光電股份有限公司 自動販賣機及其操作系統與操作方法
US9734633B2 (en) * 2012-01-27 2017-08-15 Microsoft Technology Licensing, Llc Virtual environment generating system
KR20130094095A (ko) * 2012-02-15 2013-08-23 삼성디스플레이 주식회사 투명 디스플레이 장치 및 그것의 동작 방법
JP5137150B1 (ja) * 2012-02-23 2013-02-06 株式会社ワコム 手書き情報入力装置及び手書き情報入力装置を備えた携帯電子機器
DE112012006269T5 (de) * 2012-04-26 2015-03-05 Intel Corporation Realitätsergänzender Rechner, Vorrichtung und System
US20130316767A1 (en) * 2012-05-23 2013-11-28 Hon Hai Precision Industry Co., Ltd. Electronic display structure
US9152226B2 (en) * 2012-06-15 2015-10-06 Qualcomm Incorporated Input method designed for augmented reality goggles
US20130342427A1 (en) * 2012-06-25 2013-12-26 Hon Hai Precision Industry Co., Ltd. Monitoring through a transparent display
US20130342696A1 (en) * 2012-06-25 2013-12-26 Hon Hai Precision Industry Co., Ltd. Monitoring through a transparent display of a portable device
US20140035877A1 (en) * 2012-08-01 2014-02-06 Hon Hai Precision Industry Co., Ltd. Using a display device with a transparent display to capture information concerning objectives in a screen of another display device
TW201407431A (zh) * 2012-08-03 2014-02-16 Novatek Microelectronics Corp 可攜式裝置
US9250783B2 (en) * 2012-08-21 2016-02-02 Apple Inc. Toggle gesture during drag gesture

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102402287A (zh) * 2010-09-16 2012-04-04 Lg电子株式会社 透明显示设备和提供对象信息的方法

Also Published As

Publication number Publication date
CN104641328A (zh) 2015-05-20
US10788977B2 (en) 2020-09-29
TW201419124A (zh) 2014-05-16
US20140078089A1 (en) 2014-03-20
WO2014046456A1 (en) 2014-03-27
TWI637312B (zh) 2018-10-01
EP2711826A1 (en) 2014-03-26
US10007417B2 (en) 2018-06-26
US20180292967A1 (en) 2018-10-11
US20180196581A9 (en) 2018-07-12
US20190278452A9 (en) 2019-09-12

Similar Documents

Publication Publication Date Title
CN104641328B (zh) 用于在透明显示装置上显示信息的系统和方法
US10691313B2 (en) User terminal device for displaying contents and methods thereof
CN104246683B (zh) 在包括透明显示器的装置中执行的对象控制方法、装置及其计算机可读记录介质
CN105452811B (zh) 用于显示地图的用户终端设备及其方法
US9335887B2 (en) Multi display device and method of providing tool therefor
US20160282964A9 (en) Multi display apparatus, input pen, multi display apparatus controlling method, and multi display system
CN105830351A (zh) 移动终端及其控制方法
US20150106706A1 (en) Electronic device and method for controlling object display
KR102255087B1 (ko) 객체를 디스플레이하는 전자 장치 및 방법
KR102255832B1 (ko) 투명 디스플레이 기기상에 정보를 디스플레이 하는 시스템 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20171222

CF01 Termination of patent right due to non-payment of annual fee