CN106249983A - 显示设备、点选设备、点选系统以及它们的控制方法 - Google Patents

显示设备、点选设备、点选系统以及它们的控制方法 Download PDF

Info

Publication number
CN106249983A
CN106249983A CN201610357441.6A CN201610357441A CN106249983A CN 106249983 A CN106249983 A CN 106249983A CN 201610357441 A CN201610357441 A CN 201610357441A CN 106249983 A CN106249983 A CN 106249983A
Authority
CN
China
Prior art keywords
printing device
time
signal
acoustical signal
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610357441.6A
Other languages
English (en)
Inventor
尹胜
尹胜一
尹贤奎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN106249983A publication Critical patent/CN106249983A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback

Abstract

提供了显示设备。显示设备包括：配置为输出声音信号的至少一个扬声器；配置为显示点选对象的显示器；配置为与点选设备通信以用于控制点选对象的移动状态的通信电路，点选设备包括麦克风以感测声音信号；以及处理器，该处理器配置为在参考位置处显示点选对象，其中，参考位置基于点选设备的定向方向确定，点选设备的定向方向基于关于在触发信号从点选设备被接收之后点选设备感测到声音信号的时间的信息来确定，触发信号用于在显示器的屏幕上设定点选对象的参考位置。

Description

显示设备、点选设备、点选系统以及它们的控制方法
相关申请的交叉引用
本申请基于在2015年6月9日提交韩国知识产权局的第10-2015-0081476号韩国专利申请，并根据35U.S.C.§119要求该韩国专利申请的优先权，该韩国专利申请的公开通过引用以其全部并入本文。
技术领域
本文公开的设备和方法总体涉及显示设备、点选设备、点选系统以及它们的控制方法，并且例如，涉及显示设备、能够点选显示设备以控制显示设备的点选设备、点选系统以及它们的控制方法。
背景技术
根据通信和图像技术的近期发展，除了简单地将图像和声音提供给用户的功能之外，诸如计算机或电视的监视器的显示设备提供让用户选择多种内容的功能。例如，除了模拟或数字广播的广播接收功能之外，数字电视等提供诸如接收电子节目指南功能、双向通信功能、因特网访问功能等的多种功能。
同时，因为显示设备可执行上述许多功能，用户需要控制的项目也增加了并且变得复杂。因此，已经出现了复杂和多样的图形用户界面(GUI)、媒体以及功能不能被现有的按钮型遥控器有效控制的问题。
为了解决上述问题，一般的点选输入设备(例如，诸如鼠标的点选输入设备)在固定到桌上时不被使用，并且点选输入设备已经发展为能够在不用固定位置的情况下在三维空间中点选显示设备以控制显示设备的遥控器。
在三维空间中点选显示设备以控制显示设备的方案的示例包括绝对点选方案和相对点选方案。相对点选方案使用能够改变点选设备位置和光标位置之间关系的算法，以使得点选设备的移动和光标的移动之间的增益可被改变并且固定的点变成光标的初始起点，而不考虑定向的方向。
相反地，绝对点选方案通过利用高度学习的、点选设备和屏幕上的位置之间的直接映射来匹配点选设备的位置和光标的位置，其中不同的点根据定向的方向变为光标的初始起点。
因为相比于相对点选方案，绝对点选方案具有直观的优点，所以绝对点选方案被广泛使用。但是，因为显示设备和点选设备之间的初始定向角需要被感测以实现绝对点选方案，所以额外地需要地磁场传感器。然而，在使用地磁场传感器实现绝对点选方案的情况下，存在另外需要设定假设地磁场坐标的缺点，并且绝对点选方案易受到环境变化的影响。因此，存在需要周期性修正工作的问题。
因此，需要用于更方便地感测显示设备和点选设备之间的定向角同时不使用地磁场传感器来设定光标的初始起点的方法。
发明内容
本公开的示例性实施方式解决了上述缺点及上文没有描述的其它缺点。
本公开提供了能够更方便地以绝对点选方案设定光标的初始起点的显示设备、点选设备、点选系统及它们的控制方法。
根据本公开的示例，显示设备包括：配置为输出声音信号的至少一个扬声器；配置为显示点选对象的显示器；包括配置为与点选设备通信以用于控制点选对象的移动状态的通信电路的通信器，点选设备包括麦克风以感测声音信号；以及处理器，该处理器配置为控制显示设备以使得在参考位置处显示点选对象，其中，参考位置基于点选设备的定向方向确定，点选设备的定向方向基于关于在触发信号从点选设备被接收时点选设备感测到声音信号的时间的信息确定，触发信号用于在显示器的屏幕上设定点选对象的参考位置。
显示设备可包括配置为输出第一声音信号的第一扬声器和配置为以预置距离从第一扬声器间隔开并输出与第一声音信号不同的第二声音信号的第二扬声器，以及处理器可配置为接收关于点选设备的麦克风分别感测到第一声音信号的时间和感测到第二声音信号的时间的信息，以及配置为根据基于所接收的时间信息确定的第一声音信号和第二声音信号的感测时间之间的差异来确定点选设备的定向方向。
处理器可配置为基于感测时间的差异确定点选设备的水平位置、确定与所确定的点选设备的水平位置对应的水平定向方向、以及基于由包括在点选设备中的传感器感测的点选设备的运动信息来确定点选设备的竖直定向方向。
时间信息可以是第一声音信号和第二声音信号被分别记录于其中的记录文件，或可以是关于第一声音信号和第二声音信号分别被感测到的时间的信息。
点选设备可包括以预置距离彼此间隔开的第一麦克风和第二麦克风，以及处理器可配置为分别从点选设备接收关于第一麦克风感测到声音信号的时间和第二麦克风感测到声音信号的时间的信息，以及配置为根据基于时间的信息确定的第一麦克风和第二麦克风的感测时间的差异来确定点选设备的定向方向。
处理器可配置为基于感测时间的差异确定点选设备的水平角、确定与所确定的点选设备的水平角对应的水平定向方向、以及基于由包括在点选设备中的传感器感测的点选设备的运动信息来确定点选设备的竖直定向方向。
显示设备可包括配置为输出第一声音信号的第一扬声器和配置为以预置距离从第一扬声器间隔开并输出与第一声音信号不同的第二声音信号的第二扬声器，点选设备可包括以预置距离彼此间隔开的第一麦克风和第二麦克风，以及处理器可配置为从点选设备接收关于第一麦克风和第二麦克风中的任一个分别感测到第一声音信号和第二声音信号的时间的第一信息、接收关于第一麦克风和第二麦克风分别感测到第一声音信号和第二声音信号中的任一个的时间的信息、以及根据基于关于时间的第一信息和关于时间的第二信息确定的感测时间的差异来确定点选设备的定向方向。
处理器可配置为基于感测时间的差异确定点选设备的水平位置和水平角、确定与所确定的点选设备的水平位置和水平角对应的水平定向方向、以及基于由包括在点选设备中的传感器感测的点选设备的运动信息来确定点选设备的竖直定向方向。
当与点选设备的运动的量和方向对应的信号在点选对象显示在参考位置处后从点选设备接收时，处理器可配置为将点选对象移动至与运动的量和方向对应的位置。
根据本公开的另一示例，点选设备包括：具有通信电路的通信器，该通信器配置为与在屏幕上显示点选对象的显示设备通信，显示设备包括至少一个扬声器以输出声音信号；配置为感测声音信号的麦克风；以及处理器，该处理器配置为控制点选设备以使得定向方向基于关于声音信号被感测到的时间的信息被确定、配置为基于定向方向确定点选对象的参考位置、以及配置为提供和传输允许点选对象显示在参考位置处的控制信号。
显示设备可包括配置为输出第一声音信号的第一扬声器和配置为以预置距离从第一扬声器间隔开并输出与第一声音信号不同的第二声音信号的第二扬声器，以及处理器可配置为基于关于由麦克风分别感测到第一声音信号和第二声音信号的时间的信息来确定第一声音信号和第二声音信号的感测时间的差异，以及配置为基于感测时间的差异确定定向方向。
点选设备还可包括加速度传感器和陀螺仪传感器中的至少一个，并且处理器可配置为基于感测时间的差异确定水平位置、确定与所确定的水平位置对应的水平定向方向、以及基于由加速度传感器和陀螺仪传感器中的至少一个感测的运动信息确定竖直定向方向。
根据本公开的另一示例，显示设备的控制方法包括：从点选设备接收用于在屏幕上设定参考位置的触发信号，点选设备包括用于感测声音信号的麦克风；通过至少一个扬声器输出声音信号；从点选设备接收关于声音信号被感测到的时间的信息；基于时间的信息确定点选设备的定向方向；基于点选设备的定向方向确定参考位置；以及在参考位置处显示点选对象。
在输出声音信号的操作中，第一声音信号可通过第一扬声器输出并且与第一声音信号不同的第二声音信号可通过以预置距离从第一扬声器间隔开的第二扬声器输出，在接收时间的信息的操作中，关于麦克风分别感测到第一声音信号和第二声音信号的时间的信息可从点选设备接收，以及在确定定向方向的操作中，点选设备的定向方向可根据基于时间的信息确定的第一声音信号和第二声音信号的感测时间的差异来确定。
确定定向方向的操作可包括确定与基于感测时间的差异确定的点选设备的水平位置对应的水平定向方向；以及基于由包括在点选设备中的传感器感测的点选设备的运动信息来确定点选设备的竖直定向方向。
时间的信息可包括第一声音信号和第二声音信号分别记录与其中的记录文件，或关于第一声音信号和第二声音信号分别被感测到的时间的信息。
点选设备可包括以预置距离彼此间隔开的第一麦克风在第二麦克风，在接收时间的信息的操作中，关于第一麦克风和第二麦克风分别感测到声音信号的时间的信息可从点选设备接收，以及在确定定向方向的操作中，点选设备的定向方向可根据基于时间的信息确定的第一麦克风和第二麦克风的感测时间的差异来确定。
确定定向方向的操作可包括确定与基于感测时间的差异确定的点选设备的水平角对应的水平定向方向；以及基于由包括在点选设备中的传感器感测的点选设备的运动信息来确定点选设备的竖直定向方向。
根据本公开的另一示例，点选设备的控制方法包括感测从包括在显示设备中的至少一个扬声器输出的声音信号；基于关于声音信号被感测到的时间的信息确定定向方向；基于定向方向确定点选对象在显示设备的屏幕上显示的参考位置；以及传输允许点选对象显示在参考位置处的控制信号。
根据本公开的另一示例，包括显示设备和用于控制显示设备的点选设备的点选系统包括点选设备，该点选设备配置为传输用于设定点选对象在显示设备的屏幕上的参考位置的触发信号以及当声音信号通过包括在显示设备中的至少一个扬声器输出时将关于包括在点选设备中的麦克风感测到声音信号的时间的信息传输至显示设备；以及显示设备，显示设备配置为当触发信号从点选设备被接收时通过至少一个扬声器输出声音信号、基于时间的信息被接收时的关于时间的信息来确定点选设备的定向方向、以及在基于定向方向确定的参考位置处显示点选对象。
根据本公开的多种示例性实施方式，光标的初始起点可以更方便地以绝对点选方案设定。
附图说明
从通过参照附图所作的下列详细描述，本公开的上述和/或其它的方面将变得更加显而易见，在附图中，相同的附图标号指代相同的元件，并且其中：
图1是示出了根据点选设备移动的点选对象的示例性移动的示意图；
图2是示出了显示设备的示例性配置的框图；
图3是示出了点选设备的示例性配置的框图；
图4是示出了用于确定点选设备的水平位置的示例性方法的示意图；
图5是示出了用于根据点选设备的移动来确定水平定向方向的示例性方法的示意图；
图6是示出了用于确定点选设备的竖直定向方向的示例性方法的示意图；
图7是示出了根据点选设备的定向角变化的点选对象的示例性移动的示意图；
图8是示出了用于根据点选设备的定向角变化来确定水平定向方向的示例性方法的示意图；
图9是示出了用于根据点选设备的定向角变化来确定水平定向方向的示例性方法的示意图；
图10是示出了用于根据点选设备的移动和定向角变化来确定水平定向方向和竖直定向方向的示例性方法的示意图；
图11是示出了点选系统的示例性配置的框图；
图12是示出了点选系统中的确定定向方向的示例性过程的时序图；
图13是示出了显示设备的示例性配置的框图；
图14是示出了显示设备的示例性控制方法的流程图；以及
图15是示出了点选设备的示例性控制方法的流程图。
具体实施方式
本公开的示例性实施方式可被多样地修改。因此，在附图中示出了多种示例性实施方式，并在下文的详细描述中更加详细地描述该多种示例性实施方式。但是，应理解的是，本公开不限于具体的示例性实施方式，而是在不背离本公开的范围和精神的情况下包括全部修改、等同以及置换。同样，众所周知的功能或构造可不被详细描述，因为它们可能由于不必要的细节而使本公开不清楚。
图1是示出了示例性点选系统的示意图。如图1中所示，本公开可应用于包括点选设备200以及显示设备100的系统，其中，显示设备100从点选设备200接收信号，或向点选设备200传输信号和从点选设备200接收信号。
根据本公开示例性实施方式的显示设备100(其为由点选设备200控制的装置)包括，例如，TV，以及包括诸如多个种类的监视器、计算机、笔记本计算机、智能TV等的可遥控的多种装置。
点选设备200(其为用于遥控显示设备100的设备)可接收用户命令并将与所接收的用户命令对应的信号传输至显示设备100。
例如，点选设备200可实现为三维(3D)点选设备，其在例如XYZ的3D空间上感测点选设备200的运动并将与感测到的3D运动有关的信号传输至显示设备100。例如，3D运动(在下文中，称为运动)可与用于控制显示设备100的命令对应。例如，用户可在空间上移动点选设备200，从而将预定命令传输至显示设备100。例如，点选设备200可传输与感测到的运动对应的运动信息本身，但是如果需要，也可将与感测到的运动对应的运动信息转换为用于控制显示设备100的控制信号并传输控制信号。
显示设备100可根据点选设备200的运动来控制显示在通过显示设备100提供的用户界面屏幕(在下文中，称为UI屏幕)上的点选对象(例如，光标指针10等)的移动状态。
例如，显示设备100可根据仅基于点选设备200的运动的量来控制点选对象10的移动状态的相对点选方案来操作，并且根据基于距离参考位置的绝对坐标来控制点选对象10的移动状态的绝对点选方案来操作。例如，在绝对点选方案中，参考位置可指代点选对象10根据点选设备200的定向方向被最初显示的位置。根据绝对点选方案，因为点选对象10可显示为移动至与点选设备200的定向方向对应的位置，所以可实现显示设备100的直观控制。
根据本公开的显示设备100在设定参考位置的操作中可根据绝对点选方案操作，并且在控制点选对象10的从参考位置的移动状态的操作中可根据绝对点选方案或相对点选方案操作。
例如，显示设备100可使用例如包括在显示设备100中的第一扬声器120-1和第二扬声器120-2根据绝对点选方案来设定点选对象10的参考位置。在下文中，将参照附图在下文中更加详细地描述示例性实施方式。
图2是示出了显示设备的示例性配置的框图。
参照图2，根据本公开的示例性实施方式的显示设备100包括显示器(例如，包括显示面板和显示电路)110、扬声器120以及通信器(例如，包括通信电路)130。
显示器110可提供多种内容屏幕。例如，内容屏幕可包括多种内容，诸如图像、活动图像、文本、音乐等，包括多种内容的应用运行屏幕，图形用户界面(GUI)屏幕等。
显示器110例如可以以多种显示器形式实现，例如，液晶显示(LCD)面板、有机发光二极管(OLED)、液晶附硅(LCoS)、数字光处理等。此外，显示器110可包括驱动电路、背光单元等，它们可以以诸如非晶硅TFT、低温多晶硅(LTPS)TFT、有机TFT(OTFT)等的形式实现。
例如，扬声器120指代输出声音信号的部件。一个或多个扬声器120可根据示例性实施方式设置。在扬声器120配置为包括第一扬声器和第二扬声器的示例中，从各扬声器120输出的声音信号可以是具有不同频率的声音信号。例如，从第一扬声器输出的第一声音信号可具有10Hz的频率，并且从第二扬声器输出的第二声音信号可具有20Hz的频率。
通信器130包括执行与点选设备200的通信的通信电路。通信器130执行与包括用于感测声音信号的麦克风的点选设备200的通信。例如，当发生预置事件时，通信器130可根据预置通信方案执行与点选设备200的通信以处于联锁状态。例如，联锁例如可指代其中可执行通信的状态的全部，例如，初始化显示设备100和点选设备200之间的通信的操作、形成网络的操作、执行设备配对的操作等。例如，点选设备200的装置标识信息可被提供给显示设备100。因此，两个设备之间的配对处理可被执行。此外，当显示设备100或点选设备200中发生预置事件时，通信器130可通过例如数字生活网络联盟(DLNA)技术搜索外围设备并可执行与搜索到的设备的配对以处于联锁状态。
通信器130可通过多种通信方案和使用例如射频(RF)、红外线(IR)等的电路等来执行与点选设备200的通信，其中，射频(RF)例如蓝牙、Wi-Fi、ZigBee、近场通信(NFC)等。通信器130可包括ZigBee通信元件(未示出)、蓝牙通信元件(未示出)、Wi-Fi通信元件(未示出)等。
例如，通信器130可从点选设备200接收与点选设备200的移动对应的信号。
处理器140是包括配置为控制显示设备100的一般操作的处理电路的部件。
处理器140配置为基于预置事件在屏幕上显示点选对象，并配置为基于从点选设备200接收的信号来控制点选对象的移动状态。例如，点选设备200可实现为识别上述运动并将与所识别的运动对应的信号传输至显示设备100。
例如，当处理器140从点选设备200接收用于在显示器110的屏幕上设定点选对象的参考位置的触发信号时，处理器140可配置为通过包括在显示设备100中的多个扬声器120中的一个来输出声音信号。在本示例中，点选设备200可配置为感测声音信号，并且点选对象显示在基于点选设备200的定向方向确定的参考位置上，其中，点选设备200的定向方向基于关于声音信号被感测到的时间的信息来确定。
例如，用于在包括第一扬声器和第二扬声器的显示设备100中确定与点选设备200的位置对应的水平定向方向的方法将在下文中参照图4至图6来更详细地描述。
根据点选设备的水平位置确定定向方向的第一示例性实施方式
图4是示出了用于确定点选设备的水平位置的示例性方法的示意图。根据本示例性实施方式，显示设备100可包括输出第一声音信号的第一扬声器120-1和输出第二声音信号的第二扬声器120-2。
在本示例性实施方式中假设点选设备200的相对于显示设备100的水平定向角为0°。例如，在点选设备200未水平扭动并处于显示设备100的显示器110的水平宽度内的空间中的情况下，点选对象10可被移动。
第一声音信号和第二声音信号可以是具有不同频率的声音信号。因此，处理器140可配置为通过分析由包括在点选设备200中的麦克风感测的声音信号的分量来针对每个频率将第一声音信号和第二声音信号彼此区分开。因此，处理器140可配置为确定第一扬声器120-1和点选设备200之间以及第二扬声器120-2和点选设备200之间的各自的距离。
根据本示例性实施方式，处理器140可配置为从点选设备200接收关于麦克风220分别感测到第一声音信号和第二声音信号的时间的信息，并可根据基于时间的信息确定的第一声音信号和第二声音信号的感测时间的差异来确定点选设备200的定向方向。
例如，当处理器140从点选设备200接收触发信号时，处理器140可配置为接收关于麦克风220分别感测到第一声音信号和第二声音信号的时间的信息。例如，时间的信息可以是基于触发信号被接收的时间的第一声音信号和第二声音信号各自被感测到的时间的信息，或者可以是其中第一声音信号和第二声音信号各自被记录的记录文件。例如，在点选设备200位于显示设备100中心的左边或右边时，麦克风220和第一扬声器120-1之间的距离与麦克风220和第二扬声器120-2之间的距离不同。因为声音信号的速度总是相同的，例如，333m/s，所以可存在麦克风220感测到第一声音信号的时间和麦克风220感测到第二声音信号的时间之间的差异。处理器140可配置为接收时间的信息，该时间的信息包括关于来自点选设备200的感测时间的差异的信息，以确定点选设备200的定向方向。
参照图4，处理器140可配置为根据从点选设备200接收的时间的信息来确定从第一扬声器120-1到麦克风220的距离y1和从第二扬声器120-2到麦克风220的距离y2。例如，点选设备200可对于待区分为第一声音信号和第二声音信号的每个频带来区分感测到的声音信号，并可将关于最初感测到第一声音信号的时间的信息传输至显示设备100。在本示例中，处理器140可配置为从接收的信息、使用麦克风220最初感测到第一声音信号的时间和第一声音信号从第一扬声器120-1输出的时间之间的差异来确定距离y1。
当假设第一声音信号和第二声音信号被输出的时间为t1，第一声音信号被最初感测到的时间为t2，并且第二声音信号被最初感测到的时间为t3时，距离y1和y2可通过下列数学表达式来确定。
【数学表达式1】
在通过上述数学表达式确定y1和y2的示例中，点选设备200的水平位置可使用三角学来确定。例如，当假设显示设备100中的第一扬声器120-1和第二扬声器120-2之间的距离d1是已知信息时，如果由y1表示的在显示设备100前从第一扬声器120-1间隔开的距离和由y2表示的从第二扬声器120-2间隔开的距离被确定，则三角形的三个要素(三条边的长度)可被确定，并且例如如图4中所示，处理器140可使用三角学来确定点选设备200的水平位置。
处理器140可配置为基于包括在点选设备200中的麦克风220中对于第一声音信号和第二声音信号的感测时间的差异来确定点选设备200的水平位置。
图5是示出了根据点选设备的移动来确定水平定向方向的示例性方法的示意图。
如图5中所示，如果点选设备200的水平位置被确定，则处理器140可配置为确定与所确定的点选设备200的水平位置对应的水平定向方向，以确定待被显示在显示器110上的点选对象10的水平位置。
处理器140可配置为使用具有第一扬声器120-1、第二扬声器120-2以及麦克风220作为顶点的三角形的三条边的长度(d1、y1、y2)，使用所确定的点选设备200的水平位置来确定y1和d1之间的夹角θ1以及y2和d1之间的夹角θ2。θ1和θ2可通过下列第二余弦定律来确定。
【数学表达式2】
cosθ 1 = y 1 2 + d 1 2 - y 2 2 2 y 1 d 1 , cosθ 2 = y 2 2 + d 1 2 - y 1 2 2 y 2 d 1
如果得到cosθ1和cosθ2的值，则处理器140可配置为通过下列数学表达式来确定点选对象基于第一扬声器120-1被显示的位置x1，或确定点选对象基于第二扬声器120-2被显示的位置x2。
【数学表达式3】
x1＝y1cosθ1，x2＝y2cosθ2
因此，处理器140可配置为确定与所确定的点选设备200位置对应的水平定向方向，并可配置为基于所确定的水平定向方向来确定点选对象待被显示在屏幕上的水平位置。
处理器140可配置为基于由例如包括在点选设备200中的传感器感测的点选设备200的运动信息来确定点选设备200的竖直定向方向。其更加详细的描述将在下文中参照图6来描述。
图6是示出了用于确定点选设备的竖直定向方向的示例性方法的示意图。
点选设备200可包括例如用于确定竖直定向方向的六轴传感器，其中，六轴传感器包括例如加速度传感器和陀螺仪传感器。加速度传感器(例如，其可指代测量点选设备200的空间上的运动的传感器)执行感测在用户移动点选设备200时产生的加速度变化、角加速度变化等的功能。加速度传感器可感测x轴、y轴以及z轴的三轴方向上的加速度，并且点选设备200可使用加速度传感器获得关于点选设备200的倾斜的信息。
陀螺仪传感器(例如，其可指代能够测量点选设备200的高度、旋转、倾斜度等的传感器)可与加速度传感器一起包括在六轴传感器中。点选设备200可使用陀螺仪传感器测量点选设备200的转动角速度，并可使用旋转的对象的惯性力得知当前方向等。
处理器140可配置为通过接收诸如从点选设备200感测的点选设备200的高度、点选设备200的倾斜度等的与运动有关的信息来确定点选设备200的竖直定向方向，并可配置为在屏幕上与所确定的竖直定向方向对应的位置处显示点选对象。
例如，当如图6中所示用户在预定高度处保持点选设备200时，在点选设备200在从水平状态向上的方向上以角度θ3倾斜的情况下，点选设备200可将包括关于由陀螺仪传感器感测的点选设备200的高度的信息、关于由陀螺仪传感器或加速度传感器感测的倾斜度的信息等传输至显示设备100。
在本示例中，处理器140可配置为通过使用三角学确定的显示设备100和点选设备200之间的距离y和从点选设备200接收的运动信息，将在向上方向上从屏幕上与点选设备200的高度对应的竖直位置以z(其为与点选设备200的倾斜角度对应的距离)间隔开的位置设定为参考位置，并可将点选对象移动至设定的参考位置。
处理器140可配置为基于点选设备200的水平定向方向和点选设备200的竖直定向方向来确定点选设备200的定向方向，其中，点选设备200的水平定向方向基于关于点选设备200感测声音信号的时间的信息确定，点选设备200的竖直定向方向基于由点选设备200感测的运动信息来确定。处理器140可配置为将屏幕上与所确定的定向方向对应的位置确定为参考位置，并可配置为在所确定的参考位置处显示点选对象。
根据点选设备的水平角确定定向方向的第二示例性实施方式
图7是示出了根据点选设备的定向角变化的点选对象的示例性移动的示意图。
如图7中所示，在点选设备200在左方向或右方向上转动的示例中，根据示例性实施方式的显示设备100可在屏幕上与点选设备200的水平定向方向对应的水平位置处显示点选对象10，其中，点选设备200的水平定向方向基于点选设备200的水平定向角转动。
例如，根据前述示例性实施方式，将显示点选对象的参考位置在这样的状态中被确定，在该状态中，点选设备200相对于显示设备100的水平定向角不是0°并且在水平方向上倾斜。在本示例中，假设点选设备200在从显示设备100以预置距离间隔开的预置水平位置处被操作。例如，在用户当坐在从显示设备100以预定距离间隔开的椅子或沙发上时操作显示设备100的情况下，本示例性实施方式可被应用。
此外，在本示例性实施方式中假设点选设备200包括以预置距离彼此间隔开的第一麦克风和第二麦克风。此外，显示设备100可包括仅一个扬声器，或可包括输出具有相同频率的声音的第一扬声器和第二扬声器。
在本示例中，处理器140可配置为从点选设备200接收关于第一麦克风和第二麦克风分别感测到声音信号的时间的信息，并可配置为根据基于时间的信息确定的第一麦克风和第二麦克风的感测时间的差异来确定点选设备200的水平定向方向。
用于基于点选设备200的水平定向角确定点选对象的参考位置的方法将在下文中参照图8和图9更为详细的描述。
图8是示出了用于根据点选设备的定向角变化来确定水平定向方向的示例性方法的示意图。
如图8中所示，处理器140可配置为根据从点选设备200’接收的时间的信息，来确定从第一扬声器120-1到点选设备200’的第一麦克风220-1的距离y3以及从第一扬声器120-1到第二麦克风220-2的距离y4。
例如，点选设备200’可将触发信号传输至显示设备100，并可在传输触发信号后的预置时间之后感测第一扬声器120-1输出的声音信号。在本示例中，声音信号可由包括在点选设备200’中的第一麦克风220-1和第二麦克风220-2感测，并且点选设备200’可分别将由第一麦克风220-1和第二麦克风220-2感测的时间的信息传输至显示设备100。例如，时间的信息可指代声音信号分别由第一麦克风220-1和第二麦克风220-2感测到的时间的信息。
处理器140可配置为根据基于所接收的时间的信息确定的声音信号的感测时间的差异来确定点选设备200’的水平定向方向。
参照图8，因为包括在点选设备200’中的第一麦克风220-1和第二麦克风220-2以d2彼此间隔开，所以可存在第一麦克风220-1和第二麦克风220-2感测到从第一扬声器120-1输出的声音信号的时间上的差异。定义第一扬声器120-1和第一麦克风220-1之间的距离为y3，以及第一扬声器120-1和第二麦克风220-2之间的距离为y4。在本示例中，基于在点选设备200’的水平定向角为0°的情况下的从第一扬声器120-1输出的声音信号的感测时间的差异ta，在点选设备200’在左方向上以角度θ4转动的情况下，因为距离y3和y4由于转动角度而变化，所以第一麦克风220-1和第二麦克风220-2感测到声音信号的感测时间的差异tb可与ta不同。
例如，在点选设备200’在左方向上以角度θ4转动的情况下的感测时间的差异tb不同于在水平定向角为0°的情况下的ta，并且处理器140可配置为基于上述差异确定点选设备200’的水平定向角θ4。在本示例中，水平定向角θ4可与ta和tb之间的差异成比例。
处理器140可配置为通过使用y3、y4和d2的距离的三角学来确定点选设备200’的水平定向角。然而，处理器140也可配置为使用例如存储有关于与位于预定位置处的点选设备200’中的tb对应的转动角度的查找表格来确定水平定向角。查找表格可预存在包括在显示设备100中的存储器(未示出)中。
如果点选设备200’的水平角θ4被确定，则点选对象可显示于在左方向上以距离x3与显示设备100的中央部间隔开的位置处，其中，距离x3与所确定的水平角θ4对应。
图9是示出了用于根据点选设备的定向角变化来确定水平定向方向的示例性方法的示意图。
如图9中所示，在同时使用从显示设备100的第一扬声器120-1输出的第一声音信号和从显示设备100的第二扬声器120-2输出的第二声音信号的示例中，可进一步提高点选设备200’的水平定向角的确定精确度。在本示例中，第一声音信号的频率和第二声音信号的频率彼此不同，并且点选设备200’可基于频率分量来分类声音信号，以将关于第一麦克风220-1感测到第二声音信号的时间和第二麦克风220-2感测到第二声音信号的时间的信息传输至显示设备100。
显示设备100可配置为基于所接收的时间的信息来确定第一麦克风220-1和第二扬声器120-2之间的距离y5以及第二麦克风220-2和第二扬声器120-2之间的距离y6，以确定点选设备200’的水平角θ4，从而修正可能发生在图8中的示例性实施方式中的误差。
同时，在第二示例性实施方式中，因为用于确定点选设备200’的竖直定向方向的方法与第一示例性实施方式中的相同，所以将省略其描述。根据点选设备的水平位置和水平角确定定向方向的第三示例性实施方式
图10是示出了用于根据点选设备的移动和定向角变化来确定水平定向方向和竖直的定向方向的示例性方法的示意图。
根据第三示例性实施方式，显示设备100可包括输出第一声音信号的第一扬声器120-1和输出第二声音信号的第二扬声器120-2。此外，点选设备200’可包括第一麦克风220-1和第二麦克风220-2。第三示例性实施方式结合第一示例性实施方式和第二示例性实施方式的特征，是通过确定点选设备200’的水平位置和水平角中的全部来确定点选设备200’的定向方向并且点选对象10的最终参考位置根据所确定的定向方向被设定在屏幕上的示例性方法。
此外，根据第三示例性实施方式，第一声音信号和第二声音信号可以是具有不同频率的声音信号，并且显示设备100可在不考虑点选设备200’的水平定向角和位置的情况下确定点选设备200’的定向方向。
根据本示例性实施方式，当处理器140配置为从点选设备200’接收触发信号时，处理器140可配置为接收关于麦克风220-1分别感测到第一声音信号和第二声音信号的时间的信息。如图10中所示，处理器140可配置为通过从点选设备200’接收的时间的信息来确定从第一扬声器120-1到麦克风220-1的距离y3以及从第二扬声器120-2至麦克风220-1的距离y5。其数学表达式与上文数学表达式1中表述的相同。
在确定了y3和y5的情况下，点选设备200’的水平位置可使用三角学来确定。当假设显示设备100中的第一扬声器120-1和第二扬声器120-2之间的距离d1为已知信息时，如果在显示设备100前从第一扬声器120-1间隔开的由y3表示的距离和从第二扬声器120-2间隔开的由y5表示的距离被确定，则可确定三角形的三要素，并且处理器140可配置为使用三角学来确定点选设备200’的水平位置。因为其详细内容与上文示例性实施方式中描述的相同或类似，所以其描述将被省略。
点选设备200’的水平定向角为θ4，并且处理器140可配置为从点选设备200’接收关于第一麦克风220-1和第二麦克风220-2分别感测到从显示设备100的第一扬声器120-1输出的第一声音信号的时间的信息，并可配置为根据基于时间的信息确定的第一麦克风220-1和第二麦克风220-2的感测时间的差异来确定点选设备200’的水平定向方向。
例如，点选设备200’可在将触发信号传输至显示设备100后的预置时间之后感测从第一扬声器120-1输出的第一声音信号。在本示例中，第一声音信号可由包括在点选设备200’中的第一麦克风220-1和第二麦克风220-2感测，并且点选设备200’可将关于分别由第一麦克风220-1和第二麦克风220-2感测的时间的信息传输至显示设备100。在本示例中，处理器140可根据基于所接收的时间的信息确定的第一声音信号的感测时间的差异来确定点选设备200’的水平定向方向。
参照图10，基于在点选设备200’的水平定向角为0°的情况下的第一麦克风220-1和第二麦克风220-2的感测从第一扬声器120-1输出的第一声音信号的时间的差异ta，第一麦克风220-1和第二麦克风220-2感测到第一声音信号的感测时间的差异tb可以与点选设备200’在左方向上转动的角度θ4相对应。在这种情况下，水平定向角θ4可与ta和tb之间的差异成比例。因为关于根据水平定向角确定点选对象在屏幕上的水平位置的详细内容与上文示例性实施方式中描述的相同或相似，所以将省略其描述。
处理器140可配置为通过接收诸如从点选设备200’感测的点选设备200’的高度、点选设备200’的倾斜度等与运动有关的信息来确定点选设备200’的竖直定向方向。处理器140可配置为在屏幕上与所确定的竖直定向方向对应的位置处显示点选对象。
如图10中所示，在点选设备200’在从水平状态的向上方向上以角度θ3倾斜的示例中，点选设备200’可将运动信息传输至显示设备100，运动信息包括关于由陀螺仪传感器感测的点选设备200’的高度的信息、关于由陀螺仪传感器或加速度传感器感测的倾斜度的信息等。在本示例中，处理器140可配置为使用从点选设备200’接收的运动信息将在向上方向上从屏幕上与点选设备200’的高度对应的竖直位置以z(其为与点选设备200’的转动角度对应的距离)间隔开的位置设定为参考位置，并可配置为在所设定的参考位置处显示点选对象。
处理器140可配置为基于关于点选设备200’感测从显示设备100的第一扬声器120-1输出的第一声音信号和从显示设备100的第二扬声器120-2输出的第二声音信号的时间的信息来确定点选设备200’的水平位置。此外，处理器140可配置为根据点选设备200’的水平定向角基于关于点选设备200’的第一麦克风220-1和第二麦克风220-2分别感测到第一声音信号的时间的信息来确定点选设备200’的水平定向角。处理器140可配置为基于所确定的点选设备200’的水平位置和水平定向角确定点选设备200’的水平定向方向。
此外，处理器140可配置为基于由点选设备200’的加速度传感器和陀螺仪传感器感测的运动信息来确定点选设备200’的竖直定向方向。
处理器140可配置为根据所确定的水平定向方向和竖直定向方向将屏幕上分别与所确定的水平定向方向和竖直定向方向对应的位置设定为参考位置，并可在所确定的参考位置处显示点选对象。在后文中，屏幕上的点选对象的移动可通过绝对点选方案和相对点选方案中的任一个来实现。
图3是示出了点选设备的示例性配置的框图。
参照图3，根据本公开的示例性实施方式的点选设备200包括通信器(例如，包括通信电路)210、麦克风220以及处理器(例如，包括处理电路)230。
通信器210配置为执行与显示设备100的通信，并且因为其详细配置与显示设备100的通信器130类似，所以将省略通信器210的详细描述。
麦克风220是用于感测从显示设备100输出的声音信号的部件。麦克风220可感测频率不同的第一示例性实施方式中的第一声音信号和第二声音信号。此外，麦克风220可包括第二示例性实施方式中的第一麦克风220-1和第二麦克风220-2。
根据第一示例性实施方式，处理器230可配置为根据关于麦克风220分别感测到第一声音信号和第二声音信号的时间的信息来确定第一声音信号和第二声音信号的感测时间的差异，并可配置为基于感测时间的差异来确定点选设备200的水平位置。
例如，处理器230可配置为根据频带将所感测的声音信号的分量区分为第一声音信号和第二声音信号，可配置为根据关于被区分的第一声音信号和第二声音信号被感测到的时间的信息来确定第一声音信号和第二声音信号的感测时间的差异，并可配置为基于所确定的感测时间的差异来确定点选设备200相对于显示设备100的水平位置。在本示例中，处理器230可配置为根据与所确定的水平位置对应的定向方向在屏幕上确定点选对象的参考位置，并可配置为将允许点选对象显示在所确定的参考位置处的控制信号传输至显示设备100。
此外，处理器230可配置为将关于被区分的第一声音信号和第二声音信号被感测到的时间的信息传输至显示设备100。在本示例中，显示设备100的处理器140可配置为基于所接收的时间的信息确定水平位置。
此外，根据第二示例性实施方式，处理器230可配置为根据关于第一麦克风220-1和第二麦克风220-2分别感测到声音信号的时间的信息来确定第一麦克风220-1和第二麦克风220-2的感测时间的差异，并可配置为基于感测时间的差异来确定点选设备200的水平定向角。处理器230可配置为根据与所确定的水平定向角对应的定向方向在屏幕上确定点选对象的参考位置，并可配置为将允许点选对象显示在参考位置处的控制信号传输至显示设备100。
此外，处理器230可配置为将关于分别由第一麦克风220-1和第二麦克风220-2感测到的时间的信息传输至显示设备100。在本示例中，显示设备100的处理器140可配置为基于所接收的时间的信息来确定水平定向角。
点选设备200可包括例如加速度传感器和陀螺仪传感器中的至少一个。在本示例中，处理器230可配置为使得，竖直定向方向基于由加速度传感器和陀螺仪传感器中的至少一个感测的运动信息被确定，用于显示设备100的屏幕上的点选对象的参考位置根据所确定的竖直定向方向被确定，以及允许点选对象显示在所确定的参考位置处的控制信号被传输至显示设备100。
此外，处理器230可配置为将由加速度传感器和陀螺仪传感器中的至少一个感测到的运动信息传输至显示设备100。在本示例中，显示设备100的处理器140执行基于所接收的运动信息的竖直定向角的确定。
图11是示出了点选系统的示例性配置的框图。
如图11中所示，点选系统可包括显示设备A和用于控制显示设备A的点选设备B。显示设备A可包括显示器110、第一扬声器120-1、第二扬声器120-2、通信器(例如，包括通信电路)130、处理器(例如，包括处理电路)140、图像处理器(例如，包括图像处理电路)160以及声频处理器(例如，包括声频处理电路)170，并且如果需要，还可包括存储器(未示出)。
点选设备B可包括通信器(例如，包括通信电路)210、麦克风220、处理器(例如，包括处理电路)230、加速度传感器和陀螺仪传感器240、声频处理器(例如，包括声频处理电路)250以及按键260。与图2和图3中的描述重复的部分的描述将被省略。
如果用户命令通过按键260被输入，则点选设备B可将用于在显示设备A的屏幕上设定点选对象的参考位置的触发信号通过通信器210传输至显示设备A。在本示例中，触发信号可例如通过IR通信方案或BT通信方案传输。如果显示设备A的通信器130接收了触发信号，则显示设备A的处理器140可配置为使用声频处理器170将当前输出的声音信号转换为具有不同频率的第一声音信号和第二声音信号，并可配置为使用第一扬声器120-1和第二扬声器120-2输出第一声音信号和第二声音信号。在本示例中，如果点选设备B使用麦克风220感测声音信号，则声频处理器250可针对每个频带将声音信号区分为第一声音信号和第二声音信号。
点选设备B的处理器230可配置为将关于各声音信号被感测到的时间的信息通过通信器210传输至显示设备A。此外，处理器230可配置为分析通过加速度传感器和陀螺仪传感器240感测的点选设备B的高度、倾斜度、旋转、运动等，并可配置为将关于所分析的点选设备B的高度、倾斜度、旋转、运动等传输至显示设备A。
显示设备A的处理器140可配置为分析从点选设备B接收的时间的信息、运动的信息等以确定包括点选设备B的水平定向方向和竖直定向方向的定向方向，并且图像处理器160可配置为处理图像以使得点选对象显示在屏幕上的与所确定的定向方向对应的位置处。处理的图像使用显示器110显示，以使得点选对象可显示在屏幕上的与点选设备B的定向方向对应的位置处。
图12是示出了点选系统中的确定定向方向的示例性过程的时序图。
如图12中所示，在用户按下包括用于感测声音信号的麦克风的点选设备200’中的预置按钮以输入用户命令(S1210)的情况下，通知点选开始的触发信号可被传输至显示设备100(S1220)。
如果显示设备100接收触发信号，则具有例如不同频率的第一声音信号和第二声音信号可从包括在显示设备100中的第一扬声器和第二扬声器输出(S1240)。如果点选设备200’感测声音信号(S1250)，则点选设备200’可将感测到的声音信号分类为第一声音信号和第二声音信号。
在本示例中，点选设备200’可使用在第一声音信号从显示设备100输出后麦克风感测第一声音信号所用的时间和在第二声音信号被输出后麦克风感测第二声音信号所用的时间之间的差异，来确定点选设备200’的水平位置。
此外，点选设备200’可使用在第一声音信号从显示设备100输出后第一麦克风感测第一声音信号所用的时间与在第一声音信号输出后第二麦克风感测第二声音信号所用的时间之间的差异，来确定点选设备200’的水平定向角(S1260)。
点选设备200’可使用加速度传感器和陀螺仪传感器确定点选设备200’的竖直定向角(S1230)，并可结合所确定的水平定向角和竖直定向角来确定点选设备200’的定向角(S1270)。关于所确定的定向角的信息可被传输至显示设备100(S1280)，并且显示设备100可基于关于所接收的点选设备200’的定向角的信息、根据定向角在屏幕上设定点选对象的参考位置，并可在所设定的参考位置处显示点选对象(S1290)。
图13是示出了显示设备的示例性配置的框图。如图13中所示，根据另一示例性实施方式的显示设备100’包括显示器(例如，包括显示面板和显示电路)110、包括第一扬声器120-1、第二扬声器120-2的扬声器120、通信器(例如，包括通信电路)130、处理器(例如，包括处理电路)140、存储器150、图像处理器(例如，包括图像处理电路)160以及声频处理器(例如，包括声频处理电路)170。与图2中的描述重复的部分的描述将被省略。
处理器140是配置为控制显示设备100’的一般操作的部件。
例如，处理器140包括随机存取存储器(RAM)141、只读存储器(ROM)142、图形处理单元143、中央处理器(CPU)144、第一至第n接口145-1至145-n以及总线146。例如，RAM 141、ROM 142、图形处理单元143、主CPU 144、第一至第n接口145-1至145-n等可通过总线146彼此连接。
第一至第n接口145-1至145-n连接至上文描述的多种部件。接口中的一个也可以是通过网络连接至外部装置的网络接口。
主CPU 144访问存储器150并使用存储在存储器150中的操作系统(O/S)执行启动。此外，主CPU 144可使用存储在存储器150中的多种程序、内容、数据等执行多种操作。
RAM 141存储用于启动系统的指令的集合等。当打开指令被输入至电源时，主CPU144根据存储在ROM 142中的指令拷贝存储在RAM 141中的存储器150中的O/S并执行O/S以启动系统。当启动完成时，主CPU 144拷贝存储在RAM 141中的存储器150中的多种应用程序并执行在RAM 141中拷贝的应用程序以执行多种操作。
图形处理单元143使用计算装置(未示出)和渲染器(未示出)生成包括多种对象(例如，图标、图像、文本等)的屏幕，例如，包括点选对象的屏幕。计算装置(未示出)基于所接收的控制指令，根据屏幕的布局计算诸如各对象待被显示的坐标值、形状、尺寸、颜色等的属性值。渲染器(未示出)基于由计算装置(未示出)计算的属性值生成包括对象的多种布局的屏幕。由渲染器(未示出)生成的屏幕显示在显示器110的用户界面区域中。
同时，上述处理器140的操作可通过存储在存储器150中的程序执行。
存储器150存储诸如用于驱动显示设备100的操作系统(O/S)软件模块和多种多媒体内容的多种数据。
例如，存储器150可存储处理从包括在显示设备100’中的各硬件传输的信号的基础模块、管理数据库(DB)或寄存器的存储模块、用于生成布局屏幕的图形处理模块、安全模块等。例如，存储器150可存储实现根据本公开示例性实施方式的点选所需的程序，诸如通信模块、信号处理模块、位置计算模块等。
处理器140可配置为使用通信模块接收来自点选设备200的信号，并可配置为使用信号处理模块处理所接收的信号。
例如，处理器140可配置为从点选设备200接收与定向方向和运动对应的信号，处理器140可配置为使用例如信号处理算法将信号转换为显示设备100’的X坐标和Y坐标。处理器140可配置为使用位置确定模块，通过将转换的X坐标和Y坐标映射至显示设备100’的UI屏幕上的点选对象的X坐标和Y坐标来确定点选对象的坐标。
图像处理器160是对于内容执行诸如解码、缩放、噪声过滤、帧率转换、分辨率转换等的多种图像处理的部件。
声频处理器170是执行对于声频数据的处理的部件。
虽然上述示例性实施方式描述了由显示设备100’执行基于点选设备200的运动的信号处理的示例，但是这仅是一个示例。例如，信号处理也可由存储在点选设备200中的信号处理算法执行。
图14是示出了显示设备的示例性控制方法的流程图。
用于在屏幕上设定参考位置的触发信号从包括用于感测声音信号的麦克风的点选设备200接收(S1410)。
声音信号通过至少一个扬声器输出(S1420)。在本示例中，显示设备100可包括输出第一声音信号的第一扬声器120-1和从第一扬声器120-1以预置距离间隔开并输出与第一声音信号不同的第二声音信号的第二扬声器120-2。
关于声音信号被感测的时间的信息从点选设备200被接收(S1430)。在本示例中，关于麦克风分别感测到第一声音信号和第二声音信号的时间的信息可从点选设备200接收。
点选设备200的定向方向可基于所接收的时间的信息来确定(S1440)。例如，点选设备200的定向方向可基于根据时间的信息计算的第一声音信号和第二声音信号的感测时间的差异来确定。在本示例中，与基于感测时间的差异确定的点选设备200的位置对应的水平位置可被确定。点选设备200的竖直定向方向可基于由包括在点选设备200中的传感器感测的点选设备200的运动信息来确定。
参考位置可根据所确定的点选设备200的定向方向确定(S1450)，并且点选对象显示在所确定的参考位置处(S1460)。
图15是示出了点选设备的示例性控制方法的流程图。
从包括在显示设备100中的至少一个扬声器输出的声音信号被感测(S1510)。
定向方向可基于关于声音信号被感测到的时间的信息来确定(S1520)。在本示例中，显示设备100包括输出第一声音信号的第一扬声器120-1和从第一扬声器120-1以预置距离间隔开并输出与第一声音信号不同的第二声音信号的第二扬声器120-2。在本示例中，第一声音信号和第二声音信号的感测时间的差异可根据关于麦克风220感测到第一声音信号和第二声音信号的时间的信息来确定，并且定向方向可基于所计算的感测时间的差异来确定。在本示例中，点选设备200可包括加速度传感器和陀螺仪传感器中的至少一个。水平位置可基于感测时间的差异来确定，与所确定的水平位置对应的水平定向方向被确定，并且竖直定向方向可基于由加速度传感器和陀螺仪传感器中的至少一个感测的运动信息来确定。
待显示在显示设备100的屏幕上的点选对象的参考位置可根据所确定的定向方向来确定(S1530)，并且允许点选对象显示在所确定的参考位置处的控制信号被传输(S1540)。
根据本公开的多种示例性实施方式，在绝对点选方案中不需要地磁场传感器，并且可减少成本以及可更方便地设定光标的初始起点。
根据上述多种示例性实施方式的显示设备或点选设备的控制方法可以以程序实现以存储在各种记录介质中。例如，由多种处理器处理以执行上述各种控制方法的计算机程序也可在它们存储在记录介质中的状态下被使用。
作为示例，可提供其中存储程序的非瞬时计算机可读介质，程序执行从包括用于感测声音信号的麦克风的点选设备接收用于在屏幕上设定参考位置的触发信号的操作、通过至少一个扬声器输出声音信号的操作、从点选设备接收关于声音信号被感测到的时间的信息的操作、基于时间的信息确定点选设备的定向方向的操作、根据点选设备的定向方向确定参考位置的操作、以及在参考位置处显示点选对象的操作。
非瞬时计算机可读介质例如可指代半永久性地存储数据的机器可读介质。例如，上述多种应用或程序可存储和提供于非瞬时计算机可读介质中，其中，非瞬时计算机可读介质诸如光盘(CD)、数字通用盘(DVD)、硬盘、蓝光盘、通用串行总线(USB)、存储卡、只读存储器(ROM)等。
虽然已经示出和描述了本公开的示例性实施方式，但是应理解的是，本公开不限于公开的示例性实施方式，并且在不背离本公开的精神和范围的情况下，可进行各种改变。因此，本公开应被解释为包括本公开的精神和范围中包括的全部变化、等同以及置换。

Claims (15)

1.显示设备，包括：
至少一个扬声器，配置为输出声音信号；
显示器，配置为显示点选对象；
通信电路，配置为与点选设备通信以控制所述点选对象的移动状态，所述点选设备包括麦克风以感测所述声音信号；以及
处理器，配置为在参考位置处显示所述点选对象，其中，所述参考位置基于所述点选设备的定向方向确定，所述点选设备的定向方向基于关于时间的信息确定，关于时间的信息包括所述点选设备在触发信号从所述点选设备由所述显示设备接收之后感测到所述声音信号的时间，所述触发信号用于在所述显示器的屏幕上设定所述点选对象的所述参考位置。
2.根据权利要求1所述的显示设备，其中，所述显示设备包括配置为输出第一声音信号的第一扬声器和以预置距离从所述第一扬声器间隔开并配置为输出与所述第一声音信号不同的第二声音信号的第二扬声器，以及
所述处理器配置为从所述点选设备接收关于所述点选设备的麦克风分别感测到所述第一声音信号和所述第二声音信号的时间的信息，以及配置为根据基于所述时间的信息确定的所述第一声音信号和所述第二声音信号的感测时间的差异来确定所述点选设备的定向方向。
3.根据权利要求2所述的显示设备，其中，所述处理器配置为基于所述感测时间的差异确定所述点选设备的水平位置、确定与所确定的所述点选设备的水平位置对应的水平定向方向、以及基于由包括在所述点选设备中的传感器感测的所述点选设备的运动信息来确定所述点选设备的竖直定向方向。
4.根据权利要求2所述的显示设备，其中，所述时间的信息为所述第一声音信号和所述第二声音信号分别记录于其中的记录文件，或关于所述第一声音信号和所述第二声音信号分别被感测到的时间的信息。
5.根据权利要求1所述的显示设备，其中，所述点选设备包括第一麦克风和第二麦克风，所述第一麦克风和所述第二麦克风以预置距离彼此间隔开，以及
所述处理器配置为从所述点选设备接收关于所述第一麦克风和所述第二麦克风分别感测到所述声音信号的时间的信息，并配置为根据基于所述时间的信息确定的所述第一麦克风和所述第二麦克风的感测时间的差异来确定所述点选设备的定向方向。
6.根据权利要求5所述的显示设备，其中，所述处理器配置为基于所述感测时间的差异来确定所述点选设备的水平角、确定与所确定的所述点选设备的水平角对应的水平定向方向、以及基于由包括在所述点选设备中的传感器感测的所述点选设备的运动信息来确定所述点选设备的竖直定向方向。
7.根据权利要求1所述的显示设备，其中，所述显示设备包括配置为输出第一声音信号的第一扬声器和以预置距离从所述第一扬声器间隔开并配置为输出与所述第一声音信号不同的第二声音信号的第二扬声器，
所述点选设备包括以预置距离彼此间隔开的第一麦克风和第二麦克风，以及
所述处理器配置为从所述点选设备接收关于所述第一麦克风和所述第二麦克风中的任一个分别感测到所述第一声音信号和所述第二声音信号的时间的第一信息、接收关于所述第一麦克风和所述第二麦克风分别感测到所述第一声音信号和所述第二声音信号中的任一个的时间的第二信息、以及根据基于关于时间的第一信息和关于时间的第二信息确定的感测时间的差异来确定所述点选设备的定向方向。
8.根据权利要求7所述的显示设备，其中，所述处理器配置为基于所述感测时间的差异确定所述点选设备的水平位置和水平角、确定与所确定的所述点选设备的水平位置和水平角对应的水平定向方向、以及基于由包括在所述点选设备中的传感器感测的所述点选设备的运动信息确定所述点选设备的竖直定向方向。
9.根据权利要求1所述的显示设备，其中，当与所述点选设备的运动的量和方向对应的信号在所述点选对象显示在所述参考位置处之后从所述点选设备被接收时，所述处理器配置为将所述点选对象移动至与所述运动的量和方向对应的位置。
10.点选设备，包括：
通信电路，配置为与在屏幕上显示点选对象的显示设备通信，所述显示设备包括至少一个扬声器以输出声音信号；
麦克风，配置为感测来自所述显示设备的声音信号；以及
处理器，配置为基于关于来自所述显示设备的所述声音信号被感测到的时间的信息来确定定向方向、基于所述定向方向确定所述点选对象的参考位置、以及传输允许所述点选对象显示在所述参考位置处的控制信号。
11.根据权利要求10所述的点选设备，其中，所述显示设备包括配置为输出第一声音信号的第一扬声器和以预置距离从所述第一扬声器间隔开并配置为输出与所述第一声音信号不同的第二声音信号的第二扬声器，以及
所述处理器配置为基于关于所述麦克风分别感测到所述第一声音信号和所述第二声音信号的时间的信息来确定所述第一声音信号和所述第二声音信号的感测时间的差异。
12.根据权利要求11所述的点选设备，还包括加速度传感器和陀螺仪传感器中的至少一个，以及
所述处理器配置为基于所述感测时间的差异确定水平位置、确定与所确定的水平位置对应的水平定向方向、以及基于由所述加速度传感器和所述陀螺仪传感器中的至少一个感测的运动信息来确定竖直定向方向。
13.控制显示设备的方法，包括：
从用于在屏幕上设定参考位置的点选设备接收触发信号，所述点选设备包括用于感测声音信号的麦克风；
通过至少一个扬声器输出所述声音信号；
从所述点选设备接收关于所述点选设备感测到所述声音信号的时间的信息；
基于所述时间的信息确定所述点选设备的定向方向；
基于所述点选设备的定向方向确定所述参考位置；以及
在所述参考位置处显示点选对象。
14.根据权利要求13所述的方法，其中，在输出所述声音信号的操作中，第一声音信号通过第一扬声器被输出并且与所述第一声音信号不同的第二声音信号通过第二扬声器被输出，所述第二扬声器以预置距离从所述第一扬声器间隔开。
在接收所述时间的信息的操作中，关于由所述点选设备的麦克风分别感测到所述第一声音信号和所述第二声音信号的时间的信息从所述点选设备被接收，以及
在确定所述定向方向的操作中，所述点选设备的定向方向根据基于所述时间的信息确定的所述第一声音信号和所述第二声音信号的感测时间的差异被确定。
15.根据权利要求14所述的方法，其中，确定所述定向方向的操作包括：
确定与基于所述感测时间的差异确定的所述点选设备的水平位置对应的水平定向方向；以及
基于由包括在所述点选设备中的传感器感测的所述点选设备的运动信息确定所述点选设备的竖直定向方向。
CN201610357441.6A 2015-06-09 2016-05-26 显示设备、点选设备、点选系统以及它们的控制方法 Pending CN106249983A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150081476A KR20160144817A (ko) 2015-06-09 2015-06-09 디스플레이 장치, 포인팅 장치, 포인팅 시스템 및 그 제어 방법
KR10-2015-0081476 2015-06-09

Publications (1)

Publication Number Publication Date
CN106249983A true CN106249983A (zh) 2016-12-21

Family

ID=55587071

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610357441.6A Pending CN106249983A (zh) 2015-06-09 2016-05-26 显示设备、点选设备、点选系统以及它们的控制方法

Country Status (4)

Country Link
US (1) US20160364016A1 (zh)
EP (1) EP3104270A1 (zh)
KR (1) KR20160144817A (zh)
CN (1) CN106249983A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018227527A1 (zh) * 2017-06-16 2018-12-20 深圳市迈测科技股份有限公司 一种测量方法和系统
CN112639683A (zh) * 2018-09-04 2021-04-09 三星电子株式会社 显示装置及其控制方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10809870B2 (en) 2017-02-09 2020-10-20 Sony Corporation Information processing apparatus and information processing method
KR20200107687A (ko) * 2019-03-08 2020-09-16 엘지전자 주식회사 조리물 온도 추정 장치
CN109933197B (zh) * 2019-03-12 2022-04-12 上海龙旗科技股份有限公司 一种屏幕显示调节方法及设备
CN112256134B (zh) * 2020-10-28 2022-05-27 南京瑞巨数码科技有限公司 一种人工智能数字交互展示装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7158126B2 (en) * 2002-04-08 2007-01-02 Koninklijke Philips Electronics N.V. Acoustic based pointing device
US8947350B2 (en) * 2009-09-14 2015-02-03 Broadcom Corporation System and method for generating screen pointing information in a television control device
WO2012027605A2 (en) * 2010-08-27 2012-03-01 Intel Corporation Intelligent remote control system
KR101253451B1 (ko) * 2012-02-29 2013-04-11 주식회사 팬택 음원의 위치를 감지할 수 있는 모바일 디바이스 및 그 제어 방법
US9910507B2 (en) * 2013-10-02 2018-03-06 Samsung Electronics Co., Ltd. Image display apparatus and pointing method for same

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018227527A1 (zh) * 2017-06-16 2018-12-20 深圳市迈测科技股份有限公司 一种测量方法和系统
CN112639683A (zh) * 2018-09-04 2021-04-09 三星电子株式会社 显示装置及其控制方法

Also Published As

Publication number Publication date
KR20160144817A (ko) 2016-12-19
EP3104270A1 (en) 2016-12-14
US20160364016A1 (en) 2016-12-15

Similar Documents

Publication Publication Date Title
CN106249983A (zh) 显示设备、点选设备、点选系统以及它们的控制方法
US11327577B2 (en) Multi-function stylus with sensor controller
US9223416B2 (en) Display apparatus, remote controlling apparatus and control method thereof
CN102830795B (zh) 利用运动传感装置的远程控制
EP3647922A1 (en) User terminal device and method for controlling the user terminal device thereof
CN103513895A (zh) 远程控制装置及其控制方法
KR20140060818A (ko) 원격 제어 장치, 디스플레이 장치 및 그 제어 방법
WO2019179054A1 (zh) 房屋立体化虚拟带看方法、装置、移动终端和存储介质
US11287903B2 (en) User interaction method based on stylus, system for classifying tap events on stylus, and stylus product
CN111475069B (zh) 显示方法及电子设备
CN204945943U (zh) 用于为外部显示设备提供远程控制信号的远程控制设备
KR20140029741A (ko) 디아비스 및 그의 컨텐츠 검색 방법
TWI743748B (zh) 消費電子設備、用於消費電子裝置之方法及消費電子總成
US10719147B2 (en) Display apparatus and control method thereof
CN107037874A (zh) 重压和移动手势
KR20140117092A (ko) 디스플레이 장치 및 그 제어 방법
US20240004482A1 (en) Electronic device and control method of the same
US20220357805A1 (en) Electronic device and control method of the same
JP7115118B2 (ja) 表示装置、表示の設定方法
TWI556131B (zh) Input and output system job execution method and input and output system
KR101185594B1 (ko) 포인팅 디바이스의 더블클릭 수행방법
KR20150051766A (ko) 사운드를 출력하는 전자 장치 및 방법
JP2009193472A (ja) 情報処理システム、情報処理方法、プログラム及び記録媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20161221

WD01 Invention patent application deemed withdrawn after publication