CN107704180A - 一种投影装置操作的方法和投影装置 - Google Patents

一种投影装置操作的方法和投影装置 Download PDF

Info

Publication number
CN107704180A
CN107704180A CN201610645402.6A CN201610645402A CN107704180A CN 107704180 A CN107704180 A CN 107704180A CN 201610645402 A CN201610645402 A CN 201610645402A CN 107704180 A CN107704180 A CN 107704180A
Authority
CN
China
Prior art keywords
mrow
sound signal
msubsup
msub
virtual screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610645402.6A
Other languages
English (en)
Inventor
黄图斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201610645402.6A priority Critical patent/CN107704180A/zh
Publication of CN107704180A publication Critical patent/CN107704180A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/02—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using radio waves
    • G01S3/14—Systems for determining direction or deviation from predetermined direction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Remote Sensing (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

本发明提供一种投影装置操作的方法和投影装置，该方法包括：将虚拟屏幕投影到目标对象上；接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置；对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。本发明实施例降低了产品的成本，提高了便携性。

Description

一种投影装置操作的方法和投影装置
技术领域
本发明涉及通信技术领域，特别涉及一种投影装置操作的方法和投影装置。
背景技术
目前投影仪投影出来的虚拟屏幕只能显示图像，无法对虚拟屏幕上的触摸操作出反应。现有技术为在投影仪上安装一个摄像头，用来捕捉虚拟屏幕上的图像。当需要点击虚拟屏幕上的某个位置时，用激光笔射出激光并在虚拟屏幕上需要点击的位置形成光斑，摄像头自动拍摄到这个光斑，之后投影仪完成对虚拟屏幕上需要点击的位置的点击操作。现有技术需要在投影仪中增加一个摄像头，还要配备激光笔，因此存在成本高的问题。
发明内容
本发明实施例的目的在于提供一种投影装置操作的方法和投影装置，解决了现有技术存在的成本高的问题。
为了达到上述目的，本发明实施例提供一种投影装置操作的方法，包括：
将虚拟屏幕投影到目标对象上；
接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置；
对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。
本发明实施例还提供一种投影装置，包括：
投影模块，用于将虚拟屏幕投影到目标对象上；
第一接收模块，用于接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置；
操作模块，用于对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。
本发明实施例还提供一种计算机存储介质，所述计算机存储介质中存储有计算机可执行的一个或多个程序，所述一个或多个程序被所述计算机执行时使所述计算机执行如上述提供的一种投影装置操作的方法。
上述技术方案中的一个技术方案具有如下优点或有益效果：
本发明实施例，将虚拟屏幕投影到目标对象上；接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置；对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。从而降低了产品的成本，提高了便携性。
附图说明
图1为本发明实施例提供的一种投影装置操作的方法的流程示意图；
图2为本发明实施例提供的另一种投影装置操作的方法的流程示意图；
图3为本发明实施例提供的一种音源与麦克风阵列之间的夹角的示意图；
图4为本发明实施例提供的一种波束指向性分布图；
图5为本发明实施例提供的另一种投影装置操作的方法的流程示意图；
图6为本发明实施例提供的一种投影装置的结构图；
图7为本发明实施例提供的另一种投影装置的结构图；
图8为本发明实施例提供的另一种投影装置的结构图；
图9为本发明实施例提供的另一种投影装置的结构图。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。
如图1所示，本发明实施例提供一种投影装置操作的方法，包括以下步骤：
步骤S101、将虚拟屏幕投影到目标对象上。
步骤S102、接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置。
步骤S103、对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。
在步骤S101中，将虚拟屏幕投影到目标对象上，目标对象可以是白板，也可以是墙面，只要能达到投影虚拟屏幕的目的的装置都可以。另外，本发明中的投影装置配备有麦克风阵列，麦克风阵列纵横各三个或三个以上麦克风，用于采集声音。
步骤S102中，用户在白板上或其他装置上进行敲击并发出声音，将这种声音称为操作声音信号。调整麦克风阵列的指向性，使虚拟屏幕处于麦克风阵列采集声音的第一主瓣范围内。此时麦克风阵列主要采集虚拟屏幕范围内的声音，提高了信噪比，使对操作声音信号的俯仰角和方位角的估计更准确。
麦克风阵列采用波达方向估计(DOA，Direction Of Arrival)算法计算出采集到的操作声音信号的俯仰角和方位角，由操作声音信号的俯仰角和方位角及虚拟屏幕与投影仪之间的距离D计算出在虚拟屏幕上的敲击位置的坐标。
在步骤S103中，信息处理系统将在虚拟屏幕上进行敲击的位置的坐标反馈给投影仪的操作系统，投影仪的操作系统完成对敲击位置对应的显示对象的点击操作，其中点击操作可以是单击或者是双击的形式等。
本实施例，提出一种投影装置操作的方法，投影装置包含麦克风阵列，利用麦克风阵列采集敲击虚拟屏幕所发出的操作声音信号，根据操作声音信号确定敲击动作在虚拟屏幕上的具体位置，最终完成对敲击位置对应的显示对象的点击操作。从而降低了产品的成本，提高了便携性。
如图2所示，本发明实施例提供另一种投影装置操作的方法，包括以下步骤：
步骤S201、将虚拟屏幕投影到目标对象上。
在步骤S201中，将虚拟屏幕投影到目标对象上，目标对象可以是白板，也可以是墙面，只要能达到投影虚拟屏幕的目的的装置都可以。另外，本发明中的投影装置配备有麦克风阵列，麦克风阵列纵横各三个或三个以上麦克风，用于采集声音。
步骤S202、接收用户对所述目标对象进行敲击所发出的校准声音信号，识别所述校准声音信号的频率，设置频率与所述校准声音信号的频率相匹配的声音信号作为操作声音信号。
在步骤S202中，在虚拟屏幕上进行敲击并发出声音，麦克风阵列采集在虚拟屏幕上进行敲击所发出的声音，分析其频谱特征，包括频域范围、中心频率和谐振频率。根据在虚拟屏幕上进行敲击所发出的声音的频率将在虚拟屏幕上进行敲击所发出的声音设定为操作声音信号。当想对虚拟屏幕上的某个显示对象进行点击的时候，只要在这个显示对象对应的位置上进行敲击，麦克风阵列采集敲击虚拟屏幕所发出的声音，并分析采集到的声音的频率，若采集到的声音的频率与之前设定的操作声音信号的频率相匹配，则可断定采集到的声音为操作声音信号，再根据采集到的操作声音信号确定在虚拟屏幕上进行敲击的具体位置。
需要说明的是，设置操作声音信号这个步骤只需执行一次，即让投影装置记录什么样的声音为操作声音信号，当接收到频率与操作声音信号的频率相匹配的声音时，可以将它识别为操作声音信号即可。设置操作声音信号这个步骤不需要执行多次。并且，对虚拟屏幕进行敲击时可以使用指挥棒等工具。
步骤S203、调整麦克风阵列中相邻两麦克风间的相位差，使得所述虚拟屏幕位于所述麦克风阵列采集声音的第一主瓣范围内。
在步骤S203中，为了提高信噪比，要使虚拟屏幕位于麦克风阵列采集声音的第一主瓣范围内，因此要校准麦克风阵列的阵元的指向性，这通过调节相邻麦克风之间的相位差来实现。
引入相邻两个麦克风之间的相位差P，这样N个麦克风采集到的声音的混音S可由下列公式得到：
如图3所示，为音源与麦克风阵列之间的夹角的示意图。
其中，θ为音源与麦克风阵列的夹角，d为相邻两个麦克风之间的间距，λ为声音的波长，ω为声音的频率，A为声音的幅度，t代表时间，为中间变量。由上面的函数表达式可知，当相邻两个麦克风之间的间距d和相邻两个麦克风之间的相位差P一定时，混音S是与θ相关的函数。由此函数S可以得到波束指向性分布图。
如图4所示，为与混音S对应的波束指向性分布图。
由波束指向性分布图可知，指向3点钟方向的为第一主瓣，是采集声音的主要区域，此时第一主瓣的仰角为：
由于指向3点钟方向的为第一主瓣，因此令则由可知，第一主瓣的仰角为
为了使虚拟屏幕处于纵向排列的麦克风阵列采集声音的第一主瓣范围内，需要调节纵向排列的相邻两个麦克风之间的相位差Pv，使Pv满足：
此时纵向排列的相邻两个麦克风之间的相位差Pv改变，则纵向排列的麦克风阵列的采集声音的第一主瓣的仰角θv也会相应改变，但两者之间的函数关系仍然维持不变。为了使虚拟屏幕处于纵向排列的麦克风阵列采集声音的第一主瓣范围内，需要令θv与θsv相等。
同理，要调节横向排列的相邻两个麦克风之间的相位差Ph，使Ph满足：
此时横向排列的相邻两个麦克风之间的相位差Ph改变，则横向排列的麦克风阵列的采集声音的第一主瓣的仰角θh也会相应改变，但两者之间的函数关系仍然维持不变。为了使虚拟屏幕处于横向排列的麦克风阵列采集声音的第一主瓣范围内，需要令θh与θsh相等。
当满足以上两个条件时，虚拟屏幕就处于麦克风阵列采集声音的第一主瓣范围内，麦克风阵列就主要采集虚拟屏幕范围内的声音。
当虚拟屏幕处于麦克风阵列的采集声音的第一主瓣范围内时，麦克风阵列采集到的声音的混音S增强为：
由可知，
由此公式可知，当麦克风阵列的个数为N，且虚拟屏幕处于麦克风阵列采集声音的第一主瓣范围内时，麦克风阵列采集到的操作声音信号的混音S增强为原来的N倍。例如，若N＝4，且虚拟屏幕处于麦克风阵列采集声音的第一主瓣范围内时，则麦克风阵列采集到的操作声音信号的混音S增强为原来的4倍。假设噪音的幅值设为B，则
其中，为N＝4，且虚拟屏幕处于麦克风阵列采集声音的第一主瓣范围内时的信噪比，为N＝4，且虚拟屏幕没有处于麦克风阵列采集声音的第一主瓣范围内时的信噪比，因此信噪比增强了12dB，如果原来的信噪比为8dB，则现在的信噪比为20dB。信噪比提高了，对在虚拟屏幕上进行敲击的位置的估计就越准确。噪声的功率不会增强，比较稳定。
步骤S204、接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置。
在步骤S204中，用户在白板上或其他装置上进行敲击并发出声音，将这种声音称为操作声音信号。调整麦克风阵列的指向性，使虚拟屏幕处于麦克风阵列采集声音的第一主瓣范围内。此时麦克风阵列主要采集虚拟屏幕范围内的声音，提高了信噪比，使对操作声音信号的俯仰角和方位角的估计更准确。
麦克风阵列采用波达方向估计(DOA，Direction Of Arrival)算法计算出采集到的操作声音信号的俯仰角和方位角，由操作声音信号的俯仰角和方位角及虚拟屏幕与投影仪之间的距离D计算出在虚拟屏幕上的敲击位置的坐标。
可选的，所述根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置，包括：
获取所述操作声音信号的俯仰角和方位角；
获取所述虚拟屏幕与所述投影仪之间的距离；
通过如下公式计算所述敲击位置：
DV＝tan(θ′V)·D
Dh＝tan(θ′h)·D
其中，DV为所述敲击位置的横坐标，Dh为所述敲击位置的纵坐标，D为所述虚拟屏幕与所述投影仪之间的距离，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角。
投影仪将虚拟屏幕投影到白板上或其他装置上，信息处理系统从投影仪中获取虚拟屏幕与投影仪的距离D。DV和Dh为敲击位置的坐标，θ′V为操作声音信号的俯仰角，θ′h为操作声音信号的方位角。
需要说明的是，除了利用上述公式，还可以基于映射关系获取敲击位置的坐标。另外，由于在虚拟屏幕上想要进行操作的位置可能不止一个，因此麦克风阵列会持续采集声音。
可选的，所述获取所述操作声音信号的俯仰角和方位角，包括：
通过如下公式计算所述操作声音信号的俯仰角和方位角：
其中，N为所述麦克风阵列包含的麦克风总个数，fj为所述操作声音信号包含的频率分量，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角，maxJ为代价函数，a为导向矢量，H为共轭函数，为协方差矩阵估计，k为不大于N/2的整数。
上述公式为波达公式，利用波达公式对操作声音信号的俯仰角及方位角进行估计。当信噪比为20dB时，估计的精度可以达到5°，即5°范围内一个点。通常投影仪的广角约为90°，由于90°/5°＝16，则针对俯仰角θ′V，有16个操作点，针对方位角θ′h，也有16个操作点，这意味着虚拟屏幕上具有16×16＝256个操作点，可以满足在虚拟屏幕上的基本操作。
需要说明的是，除了利用上述公式，还可以基于映射关系获取操作声音信号的俯仰角和方位角。
步骤S205、对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。
在步骤S205中，信息处理系统将在虚拟屏幕上进行敲击的位置的坐标反馈给投影仪的操作系统，投影仪的操作系统完成对敲击位置对应的显示对象的点击操作，其中点击操作可以是单击或者是双击的形式等。
本实施例，提出一种投影装置操作的方法，投影装置包含麦克风阵列，利用麦克风阵列采集敲击虚拟屏幕所发出的操作声音信号，根据操作声音信号确定敲击动作在虚拟屏幕上的具体位置，最终完成对敲击位置对应的显示对象的点击操作。从而降低了产品的成本，提高了便携性。
如图5所示，本发明实施例提供一种投影装置操作的方法的流程，包括：
步骤S501、投影仪将虚拟屏幕投影到白板上。其中，虚拟屏幕不仅仅可以投影到白板上，还可以投影到墙面上，只要能达到投影虚拟屏幕的目的的装置都可以。
步骤S502、信息处理系统校准虚拟屏幕的位置、范围等信息。信息处理系统从投影仪中获取虚拟屏幕与投影仪的距离D以及虚拟屏幕的范围等信息。这些信息可以根据聚焦系统和成像系统的数据获得,另外,还可以获得投影仪屏幕的俯仰角和方位角(θsv,θsh)。
步骤S503、声音信息校准。在虚拟屏幕上敲击或是用其他设备敲击虚拟屏幕并发出声音，麦克风阵列采集在虚拟屏幕上进行敲击所发出的声音，分析其频谱特征，包括频域范围、中心频率和谐振频率。根据在虚拟屏幕上进行敲击所发出的声音的频率将在虚拟屏幕上进行敲击所发出的声音设定为操作声音信号。
需要说明的是，设置操作声音信号这个步骤只需执行一次，即让投影装置记录什么样的声音为操作声音信号，当接收到频率与操作声音信号的频率相匹配的声音时，可以将它识别为操作声音信号即可。设置操作声音信号这个步骤不需要执行多次。
步骤S504、麦克风阵列持续采集声音。由于在虚拟屏幕上想要进行操作的位置可能不止一个，因此麦克风阵列会持续采集声音。
步骤S505、信息处理系统甄别麦克风阵列采集到的声音是否为操作声音信号。当想对虚拟屏幕上的某个显示对象进行点击的时候，只要在这个显示对象对应的位置上进行敲击，麦克风阵列采集敲击虚拟屏幕所发出的声音，并分析采集到的声音的频率，若采集到的声音的频率与之前设定的操作声音信号的频率相匹配，则可断定采集到的声音为操作声音信号，再根据采集到的操作声音信号确定在虚拟屏幕上进行敲击的具体位置。
步骤S506、当麦克风阵列采集到的声音为操作声音信号时，识别发出该声音的位置，并与虚拟屏幕信息进行比对，得出需要操作的位置。为了使对位置的估计更准确，要提高信噪比。为了提高信噪比，要使虚拟屏幕位于麦克风阵列采集声音的第一主瓣范围内，因此要校准麦克风阵列的阵元的指向性，这通过调节相邻麦克风之间的相位差来实现。当满足纵向排列的麦克风阵列的采集声音的第一主瓣的仰角θv与投影仪屏幕的俯仰角θsv相等且横向排列的麦克风阵列的采集声音的第一主瓣的仰角θh与投影仪屏幕的方位角θsh相等这两个条件时，虚拟屏幕就位于麦克风阵列采集声音的第一主瓣范围内，此时麦克风阵列主要采集虚拟屏幕范围内的声音。此时麦克风阵列采集到的操作声音信号的混音S增强为原来的N倍，信噪比会提高，这样利用波达公式对操作声音信号的俯仰角θ′V和方位角θ′h进行估计时精确度会更高。当信噪比为20dB时，估计的精度可以达到5°，即5°范围内一个点。通常投影仪的广角约为90°，由于90°/5°＝16，则针对俯仰角θ′V，有16个操作点，针对方位角θ′′，也有16个操作点，这意味着虚拟屏幕上具有16×16＝256个操作点，可以满足在虚拟屏幕上的基本操作。获取了操作声音信号的俯仰角θ′V和方位角θ′h后，再根据虚拟屏幕与投影仪的距离D得到在虚拟屏幕上的敲击位置的坐标DV和Dh。
步骤S507、信息处理系统将在虚拟屏幕上进行敲击的位置的坐标反馈给投影仪的操作系统，投影仪的操作系统完成对敲击位置对应的显示对象的点击操作，其中点击操作可以是单击或者是双击的形式等。这样，只要在虚拟屏幕上想要操作的位置进行敲击并发出声音，麦克风阵列采集在虚拟屏幕上进行敲击所发出的操作声音信号，根据操作声音信号确定在虚拟屏幕上敲击的具体位置，最后就能完成对敲击位置对应的显示对象的点击操作。
本实施例，提出一种投影装置操作的方法的流程，投影装置包含麦克风阵列，利用麦克风阵列采集敲击虚拟屏幕所发出的操作声音信号，根据操作声音信号确定敲击动作在虚拟屏幕上的具体位置，最终完成对敲击位置对应的显示对象的点击操作。从而降低了产品的成本，提高了便携性。
如图6所示，本发明实施例提供一种投影装置的结构，包括以下模块：
投影模块601，用于将虚拟屏幕投影到目标对象上；
第一接收模块602，用于接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置；
操作模块603，用于对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。
可选的，如图7所示，所述投影装置还包括：
第二接收模块604，用于接收用户对所述目标对象进行敲击所发出的校准声音信号，识别所述校准声音信号的频率，设置频率与所述校准声音信号的频率相匹配的声音信号作为操作声音信号。
可选的，如图8所示，所述投影装置还包括：
调整模块605，用于调整麦克风阵列中相邻两麦克风间的相位差，使得所述虚拟屏幕位于所述麦克风阵列采集声音的第一主瓣范围内。
可选的，如图9所示，第一接收模块602包括：
第一获取模块6021，用于获取所述操作声音信号的俯仰角和方位角；
第二获取模块6022，用于获取所述虚拟屏幕与所述投影仪之间的距离；
计算模块6023，用于通过如下公式计算所述敲击位置：
DV＝tan(θ′V)·D
Dh＝tan(θ′′)·D
其中，DV为所述敲击位置的横坐标，Dh为所述敲击位置的纵坐标，D为所述虚拟屏幕与所述投影仪之间的距离，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角。
可选的，第一获取模块6021用于通过如下公式计算所述操作声音信号的俯仰角和方位角：
其中，N为所述麦克风阵列包含的麦克风总个数，fj为所述操作声音信号包含的频率分量，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角，maxJ为代价函数，a为导向矢量，H为共轭函数，为协方差矩阵估计，k为不大于N/2的整数。
本实施例中，上述投影装置可以是图1、图2和图5所示的实施例中的投影装置，且图1、图2和图5所示的实施例中投影装置的任何实施方式都可以被本实施例中的投影装置所实现，这里不再赘述。
本实施例，提出一种投影装置，投影装置包含麦克风阵列，利用麦克风阵列采集敲击虚拟屏幕所发出的操作声音信号，根据操作声音信号确定敲击动作在虚拟屏幕上的具体位置，最终完成对敲击位置对应的显示对象的点击操作。从而降低了产品的成本，提高了便携性。
本领域普通技术人员可以理解实现上述实施例方法的全部或者部分步骤是可以通过程序指令相关的硬件来完成，所述的程序可以存储于一计算机可读取介质中，该程序在执行时，包括以下步骤：
将虚拟屏幕投影到目标对象上；
接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置；
对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。
可选的，在所述将虚拟屏幕投影到目标对象上之后，在所述接收用户在所述目标对象上进行敲击所发出的操作声音信号之前，所述方法还包括：
接收用户对所述目标对象进行敲击所发出的校准声音信号，识别所述校准声音信号的频率，设置频率与所述校准声音信号的频率相匹配的声音信号作为操作声音信号。
可选的，所述投影装置包括麦克风阵列，在所述设置频率与所述校准声音信号的频率相匹配的声音信号作为操作声音信号之后，在所述接收用户在所述目标对象上进行敲击所发出的操作声音信号之前，所述方法还包括：
调整麦克风阵列中相邻两麦克风间的相位差，使得所述虚拟屏幕位于所述麦克风阵列采集声音的第一主瓣范围内。
可选的，所述根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置，包括：
获取所述操作声音信号的俯仰角和方位角；
获取所述虚拟屏幕与所述投影仪之间的距离；
通过如下公式计算所述敲击位置：
DV＝tan(θ′V)·D
Dh＝tan(θ′h)·D
其中，DV为所述敲击位置的横坐标，Dh为所述敲击位置的纵坐标，D为所述虚拟屏幕与所述投影仪之间的距离，θ′v为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角。
可选的，所述获取所述操作声音信号的俯仰角和方位角，包括：
通过如下公式计算所述操作声音信号的俯仰角和方位角：
其中，N为所述麦克风阵列包含的麦克风总个数，fj为所述操作声音信号包含的频率分量，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角，maxJ为代价函数，a为导向矢量，H为共轭函数，为协方差矩阵估计，k为不大于N/2的整数。
所述的存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种投影装置操作的方法，其特征在于，包括：
将虚拟屏幕投影到目标对象上；
接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置；
对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。
2.如权利要求1所述的方法，其特征在于，在所述将虚拟屏幕投影到目标对象上之后，在所述接收用户在所述目标对象上进行敲击所发出的操作声音信号之前，所述方法还包括：
接收用户对所述目标对象进行敲击所发出的校准声音信号，识别所述校准声音信号的频率，设置频率与所述校准声音信号的频率相匹配的声音信号作为操作声音信号。
3.如权利要求2所述的方法，其特征在于，所述投影装置包括麦克风阵列，在所述设置频率与所述校准声音信号的频率相匹配的声音信号作为操作声音信号之后，在所述接收用户在所述目标对象上进行敲击所发出的操作声音信号之前，所述方法还包括：
调整麦克风阵列中相邻两麦克风间的相位差，使得所述虚拟屏幕位于所述麦克风阵列采集声音的第一主瓣范围内。
4.如权利要求3所述的方法，其特征在于，所述根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置，包括：
获取所述操作声音信号的俯仰角和方位角；
获取所述虚拟屏幕与所述投影仪之间的距离；
通过如下公式计算所述敲击位置：
DV＝tan(θ′V)·D
Dh＝tan(θ′h)·D
其中，DV为所述敲击位置的横坐标，Dh为所述敲击位置的纵坐标，D为所述虚拟屏幕与所述投影仪之间的距离，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角。
5.如权利要求4所述的方法，其特征在于，所述获取所述操作声音信号的俯仰角和方位角，包括：
通过如下公式计算所述操作声音信号的俯仰角和方位角：
<mrow> <munder> <mi>max</mi> <mrow> <mo>(</mo> <msubsup> <mi>&amp;theta;</mi> <mi>v</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> </munder> <mi>J</mi> <mrow> <mo>(</mo> <msubsup> <mi>&amp;theta;</mi> <mi>V</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> <mo>=</mo> <msubsup> <mo>&amp;Sigma;</mo> <mrow> <mi>k</mi> <mo>=</mo> <mn>1</mn> </mrow> <mrow> <mi>N</mi> <mo>/</mo> <mn>2</mn> </mrow> </msubsup> <mi>a</mi> <msup> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>,</mo> <msubsup> <mi>&amp;theta;</mi> <mi>V</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> <mi>H</mi> </msup> <msub> <mover> <mi>R</mi> <mo>^</mo> </mover> <mi>X</mi> </msub> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mi>a</mi> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>,</mo> <msubsup> <mi>&amp;theta;</mi> <mi>V</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> </mrow>
<mrow> <munder> <mi>max</mi> <mrow> <mo>(</mo> <msubsup> <mi>&amp;theta;</mi> <mrow> <mi>h</mi> <mo>)</mo> </mrow> <mo>&amp;prime;</mo> </msubsup> </mrow> </munder> <mi>J</mi> <mrow> <mo>(</mo> <msubsup> <mi>&amp;theta;</mi> <mi>h</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> <mo>=</mo> <msubsup> <mo>&amp;Sigma;</mo> <mrow> <mi>k</mi> <mo>=</mo> <mn>1</mn> </mrow> <mrow> <mi>N</mi> <mo>/</mo> <mn>2</mn> </mrow> </msubsup> <mi>a</mi> <msup> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>,</mo> <msubsup> <mi>&amp;theta;</mi> <mi>h</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> <mi>H</mi> </msup> <msub> <mover> <mi>R</mi> <mo>^</mo> </mover> <mi>X</mi> </msub> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mi>a</mi> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>,</mo> <msubsup> <mi>&amp;theta;</mi> <mi>h</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> </mrow>
其中，N为所述麦克风阵列包含的麦克风总个数，fj为所述操作声音信号包含的频率分量，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角，maxJ为代价函数，a为导向矢量，H为共轭函数，为协方差矩阵估计，k为不大于N/2的整数。
6.一种投影装置，其特征在于，包括：
投影模块，用于将虚拟屏幕投影到目标对象上；
第一接收模块，用于接收用户在所述目标对象上进行敲击所发出的操作声音信号，根据所述操作声音信号确定所述用户在所述虚拟屏幕上的敲击位置；
操作模块，用于对所述虚拟屏幕中所述敲击位置对应的显示对象进行操作。
7.如权利要求6所述的投影装置，其特征在于，所述投影装置还包括：
第二接收模块，用于接收用户对所述目标对象进行敲击所发出的校准声音信号，识别所述校准声音信号的频率，设置频率与所述校准声音信号的频率相匹配的声音信号作为操作声音信号。
8.如权利要求7所述的投影装置，其特征在于，所述投影装置还包括：
调整模块，用于调整麦克风阵列中相邻两麦克风间的相位差，使得所述虚拟屏幕位于所述麦克风阵列采集声音的第一主瓣范围内。
9.如权利要求8所述的投影装置，其特征在于，所述第一接收模块包括：
第一获取模块，用于获取所述操作声音信号的俯仰角和方位角；
第二获取模块，用于获取所述虚拟屏幕与所述投影仪之间的距离；
计算模块，用于通过如下公式计算所述敲击位置：
DV＝tan(θ′V)·D
Dh＝tan(θ′h)·D
其中，DV为所述敲击位置的横坐标，Dh为所述敲击位置的纵坐标，D为所述虚拟屏幕与所述投影仪之间的距离，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角。
10.如权利要求9所述的投影装置，其特征在于，所述第一获取模块用于通过如下公式计算所述操作声音信号的俯仰角和方位角：
<mrow> <munder> <mi>max</mi> <mrow> <mo>(</mo> <msubsup> <mi>&amp;theta;</mi> <mi>v</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> </munder> <mi>J</mi> <mrow> <mo>(</mo> <msubsup> <mi>&amp;theta;</mi> <mi>V</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> <mo>=</mo> <msubsup> <mo>&amp;Sigma;</mo> <mrow> <mi>k</mi> <mo>=</mo> <mn>1</mn> </mrow> <mrow> <mi>N</mi> <mo>/</mo> <mn>2</mn> </mrow> </msubsup> <mi>a</mi> <msup> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>,</mo> <msubsup> <mi>&amp;theta;</mi> <mi>V</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> <mi>H</mi> </msup> <msub> <mover> <mi>R</mi> <mo>^</mo> </mover> <mi>X</mi> </msub> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mi>a</mi> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>,</mo> <msubsup> <mi>&amp;theta;</mi> <mi>V</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> </mrow>
<mrow> <munder> <mi>max</mi> <mrow> <mo>(</mo> <msubsup> <mi>&amp;theta;</mi> <mrow> <mi>h</mi> <mo>)</mo> </mrow> <mo>&amp;prime;</mo> </msubsup> </mrow> </munder> <mi>J</mi> <mrow> <mo>(</mo> <msubsup> <mi>&amp;theta;</mi> <mi>h</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> <mo>=</mo> <msubsup> <mo>&amp;Sigma;</mo> <mrow> <mi>k</mi> <mo>=</mo> <mn>1</mn> </mrow> <mrow> <mi>N</mi> <mo>/</mo> <mn>2</mn> </mrow> </msubsup> <mi>a</mi> <msup> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>,</mo> <msubsup> <mi>&amp;theta;</mi> <mi>h</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> <mi>H</mi> </msup> <msub> <mover> <mi>R</mi> <mo>^</mo> </mover> <mi>X</mi> </msub> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>)</mo> </mrow> <mi>a</mi> <mrow> <mo>(</mo> <msub> <mi>f</mi> <mi>j</mi> </msub> <mo>,</mo> <msubsup> <mi>&amp;theta;</mi> <mi>h</mi> <mo>&amp;prime;</mo> </msubsup> <mo>)</mo> </mrow> </mrow>
其中，N为所述麦克风阵列包含的麦克风总个数，fj为所述操作声音信号包含的频率分量，θ′V为所述操作声音信号的俯仰角，θ′h为所述操作声音信号的方位角，maxJ为代价函数，a为导向矢量，H为共轭函数，为协方差矩阵估计，k为不大于N/2的整数。
CN201610645402.6A 2016-08-08 2016-08-08 一种投影装置操作的方法和投影装置 Pending CN107704180A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610645402.6A CN107704180A (zh) 2016-08-08 2016-08-08 一种投影装置操作的方法和投影装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610645402.6A CN107704180A (zh) 2016-08-08 2016-08-08 一种投影装置操作的方法和投影装置

Publications (1)

Publication Number Publication Date
CN107704180A true CN107704180A (zh) 2018-02-16

Family

ID=61168882

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610645402.6A Pending CN107704180A (zh) 2016-08-08 2016-08-08 一种投影装置操作的方法和投影装置

Country Status (1)

Country Link
CN (1) CN107704180A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113867561A (zh) * 2021-08-17 2021-12-31 支付宝(杭州)信息技术有限公司 触控屏故障检测系统、方法以及触控屏设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101515197A (zh) * 2008-02-19 2009-08-26 株式会社日立制作所 音响指示设备、音源位置的指示方法和计算机系统
US7797261B2 (en) * 2005-04-13 2010-09-14 Yang George L Consultative system
CN102656809A (zh) * 2009-12-18 2012-09-05 三星电子株式会社 具有投影仪模块的移动装置和操作该移动装置的方法
CN103345409A (zh) * 2013-06-26 2013-10-09 华为终端有限公司 一种生成终端输入信号的方法、装置及终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7797261B2 (en) * 2005-04-13 2010-09-14 Yang George L Consultative system
CN101515197A (zh) * 2008-02-19 2009-08-26 株式会社日立制作所 音响指示设备、音源位置的指示方法和计算机系统
CN102656809A (zh) * 2009-12-18 2012-09-05 三星电子株式会社 具有投影仪模块的移动装置和操作该移动装置的方法
CN103345409A (zh) * 2013-06-26 2013-10-09 华为终端有限公司 一种生成终端输入信号的方法、装置及终端

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
邓方华等: "基于超声波测距的交互电子白板系统设计", 《仪表技术》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113867561A (zh) * 2021-08-17 2021-12-31 支付宝(杭州)信息技术有限公司 触控屏故障检测系统、方法以及触控屏设备
CN113867561B (zh) * 2021-08-17 2024-02-27 支付宝(杭州)信息技术有限公司 触控屏故障检测系统、方法以及触控屏设备

Similar Documents

Publication Publication Date Title
JP6042858B2 (ja) マルチセンサ音源定位
CN111856434B (zh) 激光雷达标定方法、装置、计算机设备和存储介质
US20050111674A1 (en) Sound pickup method and system with sound source tracking
CN106707255B (zh) 一种相控阵雷达仿真系统及方法
CN109975814B (zh) 超声成像方法、系统和设备
US9848181B2 (en) Hand-held electronic apparatus, image capturing apparatus and method for obtaining depth information
US20160182164A1 (en) Signal Strength Distribution Establishing Method and Wireless Positioning System
CN109035345A (zh) 基于高斯过程回归的tof相机距离校正方法
US20200137510A1 (en) Audio signal processing apparatus and audio signal processing method
JP2018518691A (ja) アンテナの分析及び確認のためのシステム及び方法
CN110956657A (zh) 深度图像获取方法及装置、电子设备及可读存储介质
CN106374224B (zh) 电磁波成像系统及天线阵列信号校正方法
JP2009002921A (ja) レーダ装置
CN109375163B (zh) 一种高精度的室内定位方法及终端
CN107704180A (zh) 一种投影装置操作的方法和投影装置
US10104489B2 (en) Method for using a mobile device equipped with at least two microphones for determining the direction of loudspeakers in a setup of a surround sound system
Kuc Echolocation with bat buzz emissions: Model and biomimetic sonar for elevation estimation
JP4266810B2 (ja) 風速ベクトル算出装置
WO2016197444A1 (zh) 一种实现拍摄的方法及终端
CN110109087A (zh) 一种声纳不规则探测范围显示方法及系统
Redondi et al. Geometric calibration of distributed microphone arrays
JP2005227205A (ja) 目標距離測定装置
JP2009002730A (ja) 目標角度測定装置
Arikan et al. An architecture for passive joint localization and structure learning in reverberant environments
US20200196990A1 (en) Ultrasonic imaging device and imaging method thereof

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180216

RJ01 Rejection of invention patent application after publication