CN104407786A - 实现全息图像显示的交互式显示方法、控制方法及系统 - Google Patents

实现全息图像显示的交互式显示方法、控制方法及系统 Download PDF

Info

Publication number
CN104407786A
CN104407786A CN201410527699.7A CN201410527699A CN104407786A CN 104407786 A CN104407786 A CN 104407786A CN 201410527699 A CN201410527699 A CN 201410527699A CN 104407786 A CN104407786 A CN 104407786A
Authority
CN
China
Prior art keywords
signal
target object
signal receiver
gesture
projector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410527699.7A
Other languages
English (en)
Inventor
刘美鸿
陈易华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Estar Displaytech Co
Original Assignee
Shenzhen Estar Displaytech Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Estar Displaytech Co filed Critical Shenzhen Estar Displaytech Co
Priority to CN201410527699.7A priority Critical patent/CN104407786A/zh
Priority to JP2014256923A priority patent/JP2016071836A/ja
Priority to EP14200459.7A priority patent/EP3007441A1/en
Priority to US14/596,215 priority patent/US9753547B2/en
Publication of CN104407786A publication Critical patent/CN104407786A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/254—Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • G03H2001/0061—Adaptation of holography to specific applications in haptic applications when the observer interacts with the holobject
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108—Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Electromagnetism (AREA)
  • Holo Graphy (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明公开了一种实现全息图像显示的交互式显示方法、控制方法及装置，其解决了现有技术存在的只能在屏幕平面上进行操作的问题。该交互式显示方法包括：控制矩阵排列的信号发射器发出信号扫描三维空间；确定位于所述三维空间的目标物体；确定目标物体的第一位置以及在显示区域的第二位置显示对应于所述目标物体的可视图像。所述控制方法包括控制矩阵排列的信号发射器发出信号扫描三维空间；确定目标物体手势操作；确定所述手势；执行所述手势对应的控制操作。所述装置包括显示单元、信号检测单元、位置确定单元和显示控制单元。本发明能够依据使用者在显示屏幕前的三维空间中进行的手势操作，实现三维立体交互操作。

Description

实现全息图像显示的交互式显示方法、控制方法及系统
技术领域
本发明涉及用户交互应用技术领域，特别是涉及一种实现全息图像显示的交互式显示方法、控制方法及系统。
背景技术
用户交互界面(User Interface，UI)设计是指对软件的人机交互、操作逻辑、界面美观的整体设计。在人和机器互动获取信息、体验的过程中，有一个媒介，即可视化的人机交互界面，以及相应于该人机交互界面的交互设备及方法。举例来讲，触摸屏手机的出现把触摸交互方式带给了广大消费大众。与此同时，传统鼠标、键盘的交互界面迅速转向了适应于触摸交互方式的交互界面。用户可以通过触摸屏点击或拖动屏幕上显示的图标，以进行相应的交互操作。
然而，现有的触摸屏中，无论是电容式触摸屏或电阻式触摸屏，都会在液晶显示(liquid crystal display，LCD)面板前再增加一片触控玻璃或薄膜，因而会增加显示屏幕的厚度及重量。同时，当消费者通过手指触碰显示屏幕以控制电子装置时，容易造成装置本身的晃动，并且显示屏幕与消费者之间有一定的距离及角度。此外，以手指对显示屏幕直接进行触碰控制，容易导致指纹残留在显示屏幕的问题。进一步地，通过触摸操作的平面交互界面中内容的丰富程度受到较大限制，通过移动光标到某按键上并停留一段时间的方式进行确认选择，这种操作只能进行一种确认或进入的操作，交互的丰富性受到限制，此外用户感觉不够自然，交互操作时感受到拘束。
现在出现的全息(Holography)显示技术，全息可以理解为三维显示物体和画面，即展示一个物体全部视角的全部画面的图像。全息图像技术包括利用特殊的技术手段记录并再现一个物体全部视角的全部画面的图像，从而使人眼产生和实际环境完全感觉一样的视觉效果。因此，若能出现一种脱离触摸屏操作而利用(全息的)三维立体图像进行交互操作的方式将大大提升用户的操作感受。
发明内容
本发明主要解决的技术问题是提供一种实现全息图像显示的交互式显示方法、控制方法及装置，可依据使用者在显示屏幕前的三维空间中进行的手势操作，提供对应手势的全息图像，实现三维立体交互操作。
为解决上述技术问题，本发明采用的一个技术方案是：提供一种实现全息图像显示的交互式显示方法，该交互式显示方法包括:控制矩阵排列的信号发射器发出信号扫描一三维空间。根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体；其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L。根据所述位置S与所述距离L确定所述目标物体的第一位置。以及在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系
进一步地，所述信号发射器发出的信号为激光信号、红外信号或超声波信号。
进一步地，所述根据根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体的步骤包括：检测所述矩阵排列的信号接收器中是否有信号接收器接收到信号。以及若有信号接收器接收到信号，则判断接收到的所述信号携带的标识信息是否与所述信号接收器的标识信息相匹配；其中，所述信号携带的标识信息为所述信号发射器发出信号时携带，且所述标识信息与所述信号发射器对应的信号接收器的标识信息匹配。以及若接收到的所述信号携带的标识信息与所述信号接收器的标识信息相匹配时，则确定所述目标物体位于所述三维空间。
进一步地，所述根据所述位置S与所述距离L确定所述目标物体的第一位置的步骤具体为：根据所述位置S确定所述目标物体在X轴、Y轴的坐标，根据所述距离L确定所述目标物体在Z轴的坐标。
进一步地，所述根据所述位置S与所述距离L确定所述目标物体的第一位置的步骤之后，还包括：根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定。以及执行所述手势对应的控制操作。
进一步地，所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：根据所述手势在所述三维空间中的位置在所述显示区域中相对应的位置上显示一手势图标。
进一步地，所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：在所述显示区域的一个或多个子显示区域中显示物件，并定义各所述子显示区域中用以感应所述手势的感应区域。判断所述手势在所述显示区域中对应的手势区域是否在所述感应区域内，以确定是否依照所述手势操作控制所述显示区域中显示的物件。
进一步地，所述在一显示区域的第二位置显示对应于所述目标物体的可视图像的步骤具体为：在所述显示区域的第二位置显示对应于所述目标物体的全息图像。
为解决上述技术问题，本发明采用的另一个技术方案是：提供一种实现全息图像显示的交互式控制方法。该交互式控制方法包括：控制矩阵排列的信号发射器发出信号扫描一三维空间。根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间中进行操作的手势。其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被手反射而回的反射信号。确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与手之间的距离L。根据所述位置S与所述距离L确定所述手势。执行所述手势对应的控制操作。
为解决上述技术问题，本发明采用的另一个技术方案是：提供一种实现全息图像显示的交互式显示装置。该交互式显示装置包括：信号检测单元，由多对信号发射器和信号接收器按照矩阵排列形成，用于控制所述多个信号发射器发出信号扫描一三维空间，并根据所述多个信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体；其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。位置确定单元，用于确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L；还用于根据所述位置S与所述距离L确定所述目标物体的第一位置。显示控制单元，用于根据所述位置确定单元确定的所述目标物体的第一位置控制所述显示单元在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
本发明的有益效果是：区别于现有技术的情况，本发明可以依据使用者在显示屏幕前的三维空间中进行的手势操作，实现三维立体交互操作。由于是在屏幕前的三维空间内进行操作，不用触摸到显示屏幕，因而不会造成装置本身的晃动，同时能够避免指纹残留在显示屏幕上。此外，用户在进行交互操作时，移动，按压等的操作都可以在一个三维空间内进行，而不是仅停留在一个平面内，这样的方式能使用户感觉自然，交互丰富性得到提高。
附图说明
图1-1是本发明第一实施方式的一种实现全息图像显示的交互式显示方法的流程示意图；
图1-2是本发明第一实施方式的一种实现全息图像显示的交互式显示的原理示意图；
图1-3是本发明第一实施方式的一种实现全息图像显示的交互式显示方法中确定目标物体位置的原理示意图；
图2-1是本发明第二实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图；
图2-2是本发明第二实施方式的确定三维空间的目标物体的方法流程的示意图；
图3-1是本发明第三实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图；
图3-2是本发明第三实施方式的一种实现全息图像显示的交互式显示的原理示意图；
图4-1是本发明第四实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图；
图4-2是本发明第四实施方式的一种实现全息图像显示的交互式显示方法中按压状态的示意图；
图4-3是本发明第四实施方式的一种实现全息图像显示的交互式显示方法中下拉状态的示意图；
图5-1是本发明第五实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图；
图5-2是本发明第五实施方式的一种实现全息图像显示的交互式显示方法中按压前的状态示意图；
图5-3是本发明第五实施方式的一种实现全息图像显示的交互式显示方法中按压后的状态示意图；
图6-1是本发明第六实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图；
图6-2是本发明第六实施方式的一种实现全息图像显示的交互式显示方法中手指在感应区域状态示意图；
图6-3是本发明第六实施方式的一种实现全息图像显示的交互式显示方法中手指不在感应区域状态示意图；
图7是本发明实施方式中的一种实现全息图像显示的交互式控制方法的流程示意图；
图8是本发明实施方式中的一种实现全息图像显示的交互式显示装置结构的示意图。
其中，11、信号发射器；12、信号接收器；13、三维空间；14、手指；15、显示区域；16、可视图像；61、按键一；62、按键二；63、按键三；80、交互式显示装置；81、信号检测单元；82、位置确定单元；83、显示控制单元；84、显示单元。
具体实施方式
为详细说明本发明的技术内容、构造特征、所实现目的及效果，以下结合附图和实施例对本发明进行详细说明。
请参阅图1，为本发明第一实施方式的一种实现全息图像显示的交互式显示方法的流程示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S10，控制矩阵排列的信号发射器发出信号扫描一三维空间。
S11，根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体。
其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。
S12，确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L。
S13，根据所述位置S与所述距离L确定所述目标物体的第一位置。
S14，在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
如图1-2和图1-3所示，信号发射器11扫描三维空间13，当手指14进入该三维空间13之后，其中一个信号发射器11发出的信号遇到手指14之后，信号被反射回去，并被其对应的信号接收器12接收。对于手指14上的一个点，如点A，信号发射器A的信号被点A反射回去后，被相应的信号接收器A接收，从而能确定检测到手指14。该接收到反射回来的信号的信号接收器A在矩阵中的位置S和信号接收器与点A之间的距离L可以确定点A所在的第一位置。在显示区域15中的第二位置中，映射有该点对应的点A′。同样的方法确定手指14上若干个点的位置，从而可以确定出手指14的位置。在显示区域15中的第二位置中，映射有该手指14对应的可视图像16，可视图像16可以是一个箭头或者手的形状的图标等，本实施例中的可视图像是手指。该图像是通过手指的空间位置沿着Y轴映射到显示区域上的。
进一步地，在该显示区域的第二位置显示对应于该目标物体的可视图像可以为该目标物体对应的全息图像。
请参阅图2-1，为本发明第二实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S20，控制矩阵排列的信号发射器发出信号扫描一三维空间。
S21，根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体。
其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。
请同时参阅图2-2，根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体的步骤包括：
S211，检测所述矩阵排列的信号接收器中是否有信号接收器接收到信号。
S212，若有信号接收器接收到信号，则判断接收到的所述信号携带的标识信息是否与所述信号接收器的标识信息相匹配。
其中，所述信号携带的标识信息为所述信号发射器发出信号时携带，且所述标识信息与所述信号发射器对应的信号接收器的标识信息匹配。
若接收到的所述信号携带的标识信息与所述信号接收器的标识信息相匹配时，则确定所述目标物体位于所述三维空间。
S22，确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L。
S23，根据所述位置S与所述距离L确定所述目标物体的第一位置。
S24，在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
本实施例中，信号发射器扫描三维空间的同时检测信号接收器中是否有信号接收器接收到信号。当手指进入该三维空间之后，其中一个信号发射器发出的信号遇到手指之后，信号被反射回去，并被其对应的信号接收器接收。对于手指上的一个点，请再参阅图1-3，如点A，信号发射器A的信号被点A反射回去后，检测到相应的信号接收器A接收到信号。
本实施例中，信号发射器A发出的信号携带有标识信息，该标识信息与信号接收器的标识信息匹配。在信号接收器A接收到信号之后，判断该信号是否与信号接收器A的标识信息相匹配。如果信号所携带的标识信息与信号接收器A的标识信息匹配，则确定手指位于三维空间中。
如果没有检测到任何信号接收器有接收到信号，则确定该三维空间中没有目标物体。
该接收到反射回来的信号的信号接收器A在矩阵中的位置S和信号接收器与点A之间的距离L可以确定点A所在的第一位置。同样的方法确定手指上若干个点的位置，从而可以确定出手指的位置。在显示区域15中的第二位置中，映射有该手指对应的可视图像16，如图1-2。
请参阅图3-1，为本发明第三实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S30，控制矩阵排列的信号发射器发出信号扫描一三维空间。
S31，根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体。
其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。
S32，确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L。
S33，根据所述位置S与所述距离L确定所述目标物体的第一位置。位置S确定所述目标物体在X轴、Y轴的坐标，根据所述距离L确定所述目标物体在Z轴的坐标。
S34，在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
本实施例中，信号发射器扫描三维空间的同时检测信号接收器中是否有信号接收器接收到信号。当手指进入该三维空间之后，其中一个信号发射器发出的信号遇到手指之后，信号被反射回去，并被其对应的信号接收器接收。对于手指上的一个点，如图3-2所示，如点A，信号发射器A的信号被点A反射回去后，检测到相应的信号接收器A接收到信号。该接收到反射回来的信号的信号接收器A在矩阵中的位置S(x,y)即为该手指在X轴和Y轴所在平面的位置。由于信号接收器A与信号发射器A对应设置且在矩阵中的位置相同或邻近，因而可以近似认为信号接收器A与所述手指之间的距离L等于点A到X轴和Y轴所在平面的距离，即Z轴坐标z。由此可以确定点A的第一位置A(x,y,z)，同时，在显示区域的第二位置处显示手指的可视图像，本实施例中，该可视图像是手指。该第二位置与第一位置具有映射关系。
请参阅图4-1，为本发明第四实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S40，控制矩阵排列的信号发射器发出信号扫描一三维空间。
S41，根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体。
其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。
S42，确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L。
S43，根据所述位置S与所述距离L确定所述目标物体的第一位置。位置S确定所述目标物体在X轴、Y轴的坐标，根据所述距离L确定所述目标物体在Z轴的坐标。
S44，根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定。
在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
S45，执行所述手势对应的控制操作。
如图4-2所示，手指在三维空间内做按压的手势，其沿着Y轴向靠近显示区域的方向移动，其移动轨迹是平行于Y轴的直线，手指在移动过程中，其在三维空间中每个位置时，都会把该位置处的信号反射回去，相应的信号接收器都能接收到反射的信号，因而能检测出手指在该预定时间内移动时多个位置的坐标，如图4-1中的点A(x,ya,z)、点B(x,yb,z)和点C(x,yc,z)，再根据点A点B和点C来确定出手的移动轨迹。确定出的移动轨迹是平行于Y轴的直线，从而判断出手指在进行按压的手势，从而执行按压对应的控制操作。
请参阅图4-3，手指在进行下拉的手势，在预定时间内，手指沿着Z轴向下移动。同一个信号接收器接收在该预定时间内均接收到信号，手指所在n个位置的坐标分别是点A(x,y,z1),点B(x,y,z2),点C(x,y,z3),……,点N(x,y,zn)，由此可以确定手指移动的轨迹是平行于Z轴的直线，从而判断出手指的手势是下拉手势，在显示区域则进行下拉对应的控制操作。
请参阅图5-1，为本发明第五实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S50，控制矩阵排列的信号发射器发出信号扫描一三维空间。
S51，根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体。
其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。
S52，确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L。
S53，根据所述位置S与所述距离L确定所述目标物体的第一位置。位置S确定所述目标物体在X轴、Y轴的坐标，根据所述距离L确定所述目标物体在Z轴的坐标。
S54，根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定。
S55，手势在所述三维空间中的位置在所述显示区域中相对应的位置上显示一手势图标。
S56，执行所述手势对应的控制操作。
本实施例中，通过如同第四实施例的方法确定了手指的手势之后，显示区域中对应于手指的位置处会显示手势图标，如图5-2中的手指14的可视图像16，在按压前可视图像16的手指为伸直状态，当手指14的动作为按压手势的时候，显示区域15中可视图像16的手指的图标也相应做按压的动作，如图5-3中的可视图像16的手指为弯曲状态。手势图标的显示可以是多种，如本实施例中的图像状态的改变，或者颜色的改变、或者位置的改变等本领域中常用的显示方式。
请参阅图6-1，为本发明第六实施方式的一种实现全息图像显示的交互式显示方法的流程的示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S60，控制矩阵排列的信号发射器发出信号扫描一三维空间。
S61，根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体。
其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。
S62，确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L。
S63，根据所述位置S与所述距离L确定所述目标物体的第一位置。位置S确定所述目标物体在X轴、Y轴的坐标，根据所述距离L确定所述目标物体在Z轴的坐标。
S64，根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定。
S65，在所述显示区域的一个或多个子显示区域中显示物件，并定义各所述子显示区域中用以感应所述手势的感应区域。
S66，判断所述手势在所述显示区域中对应的手势区域是否在所述感应区域内，以确定是否依照所述手势操作控制所述显示区域中显示的物件。
S67，执行所述手势对应的控制操作。
请参阅图6-2，本实施例中，手指14的轨迹线为按压手势，确认了其手势之后，在所述显示区域15的一个或多个子显示区域中显示物件，定义显示区域中的按键一61、按键二62和按键三63作为该手势的感应区域，在做按压动作的时侯，手指14在显示区域15中对应的可视图像16落在该感应区域中时，如图6-2中，手指14在显示区域15中对应的可视图像16落在按键三63的区域中，按压手势完成后，会依照按压手势操作控制显示区域中显示物件。如果手指14在显示区域15中对应的可视图像16并没有在按键一61、按键二62和按键三63任何一个按键上，如图6-3所示，而是在其它非感应区域，则不会依照按压手势操作控制显示区域中显示物件。
本发明的交互式显示方法中的信号发射器发出的信号为激光信号、红外信号或超声波信号或者其他本领域常用信号发射器。
请参阅图7，为本发明实施方式中的一种实现全息图像显示的交互式控制方法的流程示意图。该实施方式示出的交互式控制方法的流程包括以下步骤：
S70，控制矩阵排列的信号发射器发出信号扫描一三维空间。
S71，根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间中进行操作的手势。
其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被手反射而回的反射信号。
请再参阅图5-2，控制矩阵排列的信号发射器发出信号在三维空间进行扫描，当手指在该三维空间内沿着Y轴方向移动时，信号接收器接收到到手指在三维空间中的多个位置反射回来的信号，从而确定手指的移动轨迹，进而确定了手指的手势。
S72，确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与手之间的距离L。
S73，根据所述位置S与所述距离L确定所述手势。
所述手势是通过手指的移动实现，确定手势需要先确定手指移动轨迹，手指的移动表现为在空间中的点的位置的变化。请再参阅图3-2，在一预定时间内，手指移动所经过的每个点的确定方法如下：
信号发射器A的信号被点A反射回去后，检测到相应的信号接收器A接收到信号。该接收到反射回来的信号的信号接收器A在矩阵中的位置S(x,y)即为该手指在X轴和Y轴所在平面的位置。由于信号接收器A与信号发射器A对应设置且在矩阵中的位置相同或邻近，因而可以近似认为信号接收器A与所述手指之间的距离L等于点A到X轴和Y轴所在平面的距离，即Z轴坐标z。由此可以确定点A的第一位置A(x,y,z)。
确定好每个点的位置之后即可确定手指移动的轨迹线，具体如下：
请再参阅图4-3，手指在进行下拉的手势，在预定时间内，手指沿着Z轴向下移动。信号接收器接收到手指在该预定时间内的n个位置的坐标分别是点A(x,y,z1),点B(x,y,z2),点C(x,y,z3),……,点N(x,y,zn)，由此可以确定手指移动的轨迹是平行于Z轴的直线，从而判断出手指的手势是下拉手势。
S74，执行所述手势对应的控制操作。判断出手势为下拉手势之后，开始执行下拉对应的控制操作。
请参阅图8，为本发明实施方式中的一种实现全息图像显示的交互式显示装置结构的示意图。该交互式显示装置包括显示单元84、信号检测单元81、位置确定单元82和显示控制单元83。
信号检测单元81由多对信号发射器和信号接收器按照矩阵排列形成，用于控制所述多个信号发射器发出信号扫描三维空间，并根据所述多个信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体。
其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号。
位置确定单元81用于确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L。其还用于根据所述位置S与所述距离L确定所述目标物体的第一位置。
显示控制单元83用于根据所述位置确定单元确定的所述目标物体的第一位置控制所述显示单元在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
信号检测单元81控制信号发射器扫描三维空间，当手指进入该三维空间之后，其中一个信号发射器发出的信号遇到手指之后，信号被反射回去，并被其对应的信号接收器接收。对于手指上的一个点，如点A，信号发射器A的信号被点A反射回去后，被相应的信号接收器A接收，信号检测单元确定检测到手指。
位置确定单元82确定该接收到反射回来的信号的信号接收器A在矩阵中的位置S和信号接收器与点A之间的距离L，再根据所述位置S与所述距离L确定点A的第一位置。同样的方法确定手指上若干个点的位置，从而可以确定出手指的位置。
位置确定单元82确定了手指的第一位置之后，显示控制单元83控制显示单元84在显示区域中的第二位置中显示该手指对应的可视图像，该第二位置与所述第一位置具有映射关系可视图像。其中，该显示控制单元83可以是全息投影设备，能够将手指对应的全息图像投影在显示单元84的显示区域中的第二位置上，从而显示该手指对应的全息图像。
本发明的交互式显示装置中的信号发射器发出的信号为激光信号、红外信号或超声波信号或者其他本领域常用信号发射器。
以上所述仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种实现全息图像显示的交互式显示方法，其特征在于，所述方法包括：
控制矩阵排列的信号发射器发出信号扫描一三维空间；
根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体；其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号；
确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L；
根据所述位置S与所述距离L确定所述目标物体的第一位置；以及
在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
2.根据权利要求1所述的实现全息图像显示的交互式显示方法，其特征在于，所述信号发射器发出的信号为激光信号、红外信号或超声波信号。
3.根据权利要求1所述的实现全息图像显示的交互式显示方法，其特征在于，所述根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体的步骤包括：
检测所述矩阵排列的信号接收器中是否有信号接收器接收到信号；以及
若有信号接收器接收到信号，则判断接收到的所述信号携带的标识信息是否与所述信号接收器的标识信息相匹配；其中，所述信号携带的标识信息为所述信号发射器发出信号时携带，且所述标识信息与所述信号发射器对应的信号接收器的标识信息匹配；以及
若接收到的所述信号携带的标识信息与所述信号接收器的标识信息相匹配时，则确定所述目标物体位于所述三维空间。
4.根据权利要求1所述的实现全息图像显示的交互式显示方法，其特征在于，所述根据所述位置S与所述距离L确定所述目标物体的第一位置的步骤具体为：根据所述位置S确定所述目标物体在X轴、Y轴的坐标，根据所述距离L确定所述目标物体在Z轴的坐标。
5.根据权利要求1所述的实现全息图像显示的交互式显示方法，其特征在于，所述根据所述位置S与所述距离L确定所述目标物体的第一位置的步骤之后，还包括：
根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定；以及
执行所述手势对应的控制操作。
6.根据权利要求5所述的实现全息图像显示的交互式显示方法，其特征在于，所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：
根据所述手势在所述三维空间中的位置在所述显示区域中相对应的位置上显示一手势图标。
7.根据权利要求5所述的实现全息图像显示的交互式显示方法，其特征在于，所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：
在所述显示区域的一个或多个子显示区域中显示物件，并定义各所述子显示区域中用以感应所述手势的感应区域；
判断所述手势在所述显示区域中对应的手势区域是否在所述感应区域内，以确定是否依照所述手势操作控制所述显示区域中显示的物件。
8.根据权利要求1所述的实现全息图像显示的交互式显示方法，其特征在于，所述在一显示区域的第二位置显示对应于所述目标物体的可视图像的步骤具体为：在所述显示区域的第二位置显示对应于所述目标物体的全息图像。
9.一种实现全息图像显示的交互式控制方法，其特征在于，所述方法包括：
控制矩阵排列的信号发射器发出信号扫描一三维空间；
根据矩阵排列的信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间中进行操作的手势；其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被手反射而回的反射信号；
确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与手之间的距离L；
根据所述位置S与所述距离L确定所述手势；以及
执行所述手势对应的控制操作。
10.一种实现全息图像显示的交互式显示装置，包括显示单元，其特征在于，所述装置包括：
信号检测单元，由多对信号发射器和信号接收器按照矩阵排列形成，用于控制所述多个信号发射器发出信号扫描一三维空间，并根据所述多个信号接收器接收到对应的信号发射器所发出的信号确定位于所述三维空间的目标物体；其中，每个所述信号接收器与一信号发射器对应设置且在所述矩阵中的位置相同或邻近，每个所述信号接收器只能接收与其对应的信号发射器所发出信号被目标物体反射而回的反射信号；
位置确定单元，用于确定所述矩阵排列的信号接收器中接收到对应的信号发射器所发出信号的信号接收器在矩阵中的位置S，以及所述确定的信号接收器与所述目标物体之间的距离L；还用于根据所述位置S与所述距离L确定所述目标物体的第一位置；
显示控制单元，用于根据所述位置确定单元确定的所述目标物体的第一位置控制所述显示单元在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
CN201410527699.7A 2014-09-30 2014-09-30 实现全息图像显示的交互式显示方法、控制方法及系统 Pending CN104407786A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201410527699.7A CN104407786A (zh) 2014-09-30 2014-09-30 实现全息图像显示的交互式显示方法、控制方法及系统
JP2014256923A JP2016071836A (ja) 2014-09-30 2014-12-19 ホログラム表示を実現する対話型表示方法、制御方法及びシステム
EP14200459.7A EP3007441A1 (en) 2014-09-30 2014-12-29 Interactive displaying method, control method and system for achieving displaying of a holographic image
US14/596,215 US9753547B2 (en) 2014-09-30 2015-01-13 Interactive displaying method, control method and system for achieving displaying of a holographic image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410527699.7A CN104407786A (zh) 2014-09-30 2014-09-30 实现全息图像显示的交互式显示方法、控制方法及系统

Publications (1)

Publication Number Publication Date
CN104407786A true CN104407786A (zh) 2015-03-11

Family

ID=52344997

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410527699.7A Pending CN104407786A (zh) 2014-09-30 2014-09-30 实现全息图像显示的交互式显示方法、控制方法及系统

Country Status (4)

Country Link
US (1) US9753547B2 (zh)
EP (1) EP3007441A1 (zh)
JP (1) JP2016071836A (zh)
CN (1) CN104407786A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105389003A (zh) * 2015-10-15 2016-03-09 广东欧珀移动通信有限公司 一种移动终端应用程序的控制方法和装置
CN107368189A (zh) * 2017-07-14 2017-11-21 信利光电股份有限公司 一种实现三维触控功能的触控显示装置及方法
CN107608570A (zh) * 2017-09-30 2018-01-19 上海理工大学 激光电离空气成像的可触控系统及触控探测方法
CN107908282A (zh) * 2017-11-07 2018-04-13 上海理工大学 全息投影可触控系统装置
CN108334248A (zh) * 2018-02-01 2018-07-27 上海理工大学 空间曲面可触控空气投影装置的触碰检测方法
CN109960070A (zh) * 2017-12-08 2019-07-02 三星显示有限公司 显示装置
CN112130659A (zh) * 2019-06-25 2020-12-25 幻景启动股份有限公司 互动式立体显示装置与互动感应方法

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9921661B2 (en) * 2012-10-14 2018-03-20 Neonode Inc. Optical proximity sensor and associated user interface
US10303118B2 (en) * 2017-01-16 2019-05-28 International Business Machines Corporation Holographic representations of digital object transfers
EP3528092A1 (en) * 2018-02-15 2019-08-21 Vestel Elektronik Sanayi ve Ticaret A.S. Three dimensional input device and input method
US10712990B2 (en) 2018-03-19 2020-07-14 At&T Intellectual Property I, L.P. Systems and methods for a customer assistance station
US11188154B2 (en) * 2018-05-30 2021-11-30 International Business Machines Corporation Context dependent projection of holographic objects
CN109284721A (zh) * 2018-09-28 2019-01-29 深圳阜时科技有限公司 一种设备
WO2020129772A1 (ja) * 2018-12-20 2020-06-25 株式会社アスカネット ディスプレイシート

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120013533A1 (en) * 2010-07-15 2012-01-19 Tpk Touch Solutions Inc Keyboard, electronic device using the same and input method
CN103488292A (zh) * 2013-09-10 2014-01-01 青岛海信电器股份有限公司 一种立体应用图标的控制方法及装置
CN103631470A (zh) * 2013-12-13 2014-03-12 中国人民解放军国防科学技术大学 基于红外反射式光电探测点阵的隔空输入系统与输入方法
CN103793060A (zh) * 2014-02-14 2014-05-14 杨智 一种用户交互系统和方法
US20140160145A1 (en) * 2011-09-22 2014-06-12 Lg Electronics Inc. Mobile terminal and controlling method thereof
CN104469338A (zh) * 2013-09-25 2015-03-25 联想(北京)有限公司 一种控制方法和装置

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU6451698A (en) * 1997-03-06 1998-09-22 Robert B. Howard Wrist-pendant wireless optical keyboard
US20020070921A1 (en) * 2000-12-13 2002-06-13 Feldman Stephen E. Holographic keyboard
CA2530987C (en) * 2003-07-03 2012-04-17 Holotouch, Inc. Holographic human-machine interfaces
EP1903299A1 (en) * 2006-09-20 2008-03-26 IEE INTERNATIONAL ELECTRONICS & ENGINEERING S.A. Method and system for acquiring a 3-D image of a scene
US20080297487A1 (en) * 2007-01-03 2008-12-04 Apple Inc. Display integrated photodiode matrix
JP2008210348A (ja) * 2007-02-28 2008-09-11 Univ Of Tokyo 画像表示装置
US7881901B2 (en) * 2007-09-18 2011-02-01 Gefemer Research Acquisitions, Llc Method and apparatus for holographic user interface communication
US20090102603A1 (en) * 2007-10-19 2009-04-23 Fein Gene S Method and apparatus for providing authentication with a user interface system
US20090109215A1 (en) * 2007-10-31 2009-04-30 Fein Gene S Method and apparatus for user interface communication with an image manipulator
JP2009116769A (ja) * 2007-11-09 2009-05-28 Sony Corp 入力装置、入力装置の制御方法、及びプログラム
US20090233714A1 (en) * 2008-03-14 2009-09-17 William Toro Three Dimensional Infrared Movement Sensing Matrix
JP2010146394A (ja) * 2008-12-19 2010-07-01 Sharp Corp 像検知装置、制御方法、制御プログラム、および該制御プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2012515966A (ja) * 2009-01-26 2012-07-12 ズッロ・テクノロジーズ・（２００９）・リミテッド 物体の挙動を監視するためのデバイスおよび方法
JP5545620B2 (ja) * 2009-08-21 2014-07-09 株式会社タイトー 赤外線ｌｅｄおよび単点光センサを使用したカーソル相対位置検出方法，該方法を用いたカーソル相対位置検出装置ならびにカーソル相対位置検出装置を備えたガンゲーム機
EP2491474B1 (en) * 2009-10-23 2018-05-16 Elliptic Laboratories AS Touchless interfaces
JP2011101184A (ja) * 2009-11-05 2011-05-19 Sony Corp 撮影装置、撮影制御方法及び撮影制御プログラム
US8847919B2 (en) * 2011-02-02 2014-09-30 Apple Inc. Interactive holographic display device
EP2823462B1 (en) * 2012-03-05 2019-10-16 Microsoft Technology Licensing, LLC Generation of depth images based upon light falloff
US9229580B2 (en) * 2012-08-03 2016-01-05 Technokey Company Limited System and method for detecting object in three-dimensional space using infrared sensors
WO2014043587A1 (en) * 2012-09-13 2014-03-20 California Institute Of Technology Coherent camera
US9164625B2 (en) * 2012-10-14 2015-10-20 Neonode Inc. Proximity sensor for determining two-dimensional coordinates of a proximal object
JP2014115733A (ja) * 2012-12-06 2014-06-26 Sharp Corp 情報処理装置、情報処理方法、プログラム、および記録媒体
US9367136B2 (en) * 2013-04-12 2016-06-14 Microsoft Technology Licensing, Llc Holographic object feedback
EP3116616B1 (en) * 2014-03-14 2019-01-30 Sony Interactive Entertainment Inc. Gaming device with volumetric sensing

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120013533A1 (en) * 2010-07-15 2012-01-19 Tpk Touch Solutions Inc Keyboard, electronic device using the same and input method
US20140160145A1 (en) * 2011-09-22 2014-06-12 Lg Electronics Inc. Mobile terminal and controlling method thereof
CN103488292A (zh) * 2013-09-10 2014-01-01 青岛海信电器股份有限公司 一种立体应用图标的控制方法及装置
CN104469338A (zh) * 2013-09-25 2015-03-25 联想(北京)有限公司 一种控制方法和装置
CN103631470A (zh) * 2013-12-13 2014-03-12 中国人民解放军国防科学技术大学 基于红外反射式光电探测点阵的隔空输入系统与输入方法
CN103793060A (zh) * 2014-02-14 2014-05-14 杨智 一种用户交互系统和方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105389003A (zh) * 2015-10-15 2016-03-09 广东欧珀移动通信有限公司 一种移动终端应用程序的控制方法和装置
CN107368189A (zh) * 2017-07-14 2017-11-21 信利光电股份有限公司 一种实现三维触控功能的触控显示装置及方法
CN107608570A (zh) * 2017-09-30 2018-01-19 上海理工大学 激光电离空气成像的可触控系统及触控探测方法
CN107908282A (zh) * 2017-11-07 2018-04-13 上海理工大学 全息投影可触控系统装置
CN107908282B (zh) * 2017-11-07 2021-03-02 上海理工大学 全息投影可触控系统装置
CN109960070A (zh) * 2017-12-08 2019-07-02 三星显示有限公司 显示装置
US11921946B2 (en) 2017-12-08 2024-03-05 Samsung Display Co., Ltd. Display device including a piezoelectric sensor layer
CN108334248A (zh) * 2018-02-01 2018-07-27 上海理工大学 空间曲面可触控空气投影装置的触碰检测方法
CN112130659A (zh) * 2019-06-25 2020-12-25 幻景启动股份有限公司 互动式立体显示装置与互动感应方法

Also Published As

Publication number Publication date
US9753547B2 (en) 2017-09-05
US20160091979A1 (en) 2016-03-31
EP3007441A1 (en) 2016-04-13
JP2016071836A (ja) 2016-05-09

Similar Documents

Publication Publication Date Title
CN104407786A (zh) 实现全息图像显示的交互式显示方法、控制方法及系统
US20200409529A1 (en) Touch-free gesture recognition system and method
TWI387914B (zh) 投影式電容觸控裝置、及識別不同接觸位置之方法
US8810509B2 (en) Interfacing with a computing application using a multi-digit sensor
US11443453B2 (en) Method and device for detecting planes and/or quadtrees for use as a virtual substrate
US9524097B2 (en) Touchscreen gestures for selecting a graphical object
US9189614B2 (en) Password entry for double sided multi-touch display
US20130082928A1 (en) Keyboard-based multi-touch input system using a displayed representation of a users hand
US20120249475A1 (en) 3d user interface control
KR101019254B1 (ko) 공간 투영 및 공간 터치 기능이 구비된 단말 장치 및 그 제어 방법
US20130257734A1 (en) Use of a sensor to enable touch and type modes for hands of a user via a keyboard
KR20150015655A (ko) 어플리케이션을 표시하는 방법 및 장치
CN103365410A (zh) 手势感测装置及具有手势输入功能的电子系统
CN101847057A (zh) 一种触摸板获取输入信息的方法
CN105474164B (zh) 间接输入的歧义消除
US10365736B2 (en) Morphing pad, system and method for implementing a morphing pad
CN104407692A (zh) 基于超声波的全息图像交互式显示方法、控制方法及系统
TW201545051A (zh) 電子裝置的控制方法
US10423314B2 (en) User interface with quantum curves and quantum arcs
EP4339745B1 (en) Touchless user-interface control method including fading
KR102263161B1 (ko) 어플리케이션을 표시하는 방법 및 장치
CN203376719U (zh) 一种超大屏幕ccd光学触摸屏
EP2829949B1 (en) System and method for manipulating an object in a three-dimensional desktop environment
CN103942000A (zh) —种触摸事件识别方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20150311

RJ01 Rejection of invention patent application after publication