CN103729121A - 图像显示设备及其操作方法 - Google Patents

图像显示设备及其操作方法 Download PDF

Info

Publication number
CN103729121A
CN103729121A CN201310481551.XA CN201310481551A CN103729121A CN 103729121 A CN103729121 A CN 103729121A CN 201310481551 A CN201310481551 A CN 201310481551A CN 103729121 A CN103729121 A CN 103729121A
Authority
CN
China
Prior art keywords
sound
frequency
input
touch
sound signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310481551.XA
Other languages
English (en)
Other versions
CN103729121B (zh
Inventor
崔宅盛
郭国渊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN103729121A publication Critical patent/CN103729121A/zh
Application granted granted Critical
Publication of CN103729121B publication Critical patent/CN103729121B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Stereophonic System (AREA)
  • Accessory Devices And Overall Control Thereof (AREA)
  • Facsimiles In General (AREA)

Abstract

本发明涉及图像显示设备及其操作方法。图像显示设备的操作方法包括以下步骤：接收第一方向上的触摸输入；输出与第一方向相对应的第一声音；接收第二方向上的触摸输入；以及输出与第二方向相对应的第二声音。因此，可以改善用户便利性。

Description

图像显示设备及其操作方法
技术领域
本发明涉及图像显示设备及其操作方法，更具体地，涉及一种可以改善用户便利性的图像显示设备及其操作方法。
背景技术
图像显示设备处理并输出图像信号。图像显示设备还处理并输出音频信号。另一方面，已经做出了各种不同努力以通过图像显示设备构建用户友好的用户界面。
发明内容
本发明的目的是提供一种可以改善用户便利性的图像显示设备及其操作方法。
根据本发明的一个方面，以上和其它目的可以通过提供一种操作图像显示设备的方法来实现，该方法包括以下步骤：接收第一方向上的触摸输入；输出与所述第一方向相对应的第一声音；接收第二方向上的触摸输入；以及输出与所述第二方向相对应的第二声音。
根据本发明的另一个方面，提供了一种图像显示设备，该图像显示设备包括：显示器；触摸传感器，其被配置为感测触摸输入；音频处理单元，其被配置为响应于由所述触摸传感器感测到的第一方向上的触摸输入而产生第一声音，并且响应于所述触摸传感器感测到的第二方向上的触摸输入而产生第二声音；以及音频输出单元，其被配置为输出所述第一声音或所述第二声音。
附图说明
通过以下结合附图的详细描述，本发明的以上和其它目的、特征和其它优点将变得清楚，在附图中：
图1是根据本发明一个实施方式的图像显示设备的示意图；
图2是图1中的图像显示设备的框图；
图3是根据本发明示例性实施方式的音频处理装置的框图；
图4是图3中的音频处理单元的框图；
图5是例示操作根据本发明一个实施方式的图像显示设备的方法的流程图；
图6至图14D是用于描述图5的操作方法的各种示例而参照的参照图；
图15是根据本发明另一实施方式的图像显示设备的示意图；
图16是图15的图像显示设备的框图；
图17是图16中的控制器的框图；
图18是例示操作根据本发明另一实施方式的图像显示设备的方法的流程图；以及
图19A至图19D是图18的操作方法的各种示例的描述的参照图。
具体实施方式
下面将详细描述本发明的优选实施方式，在附图中例示出了其示例。在可能的情况下，相同的标号在整个附图中代表相同或类似部件。
需要注意，在以下描述中使用的诸如“模块”和“单元”等的构成部件的后置用语是为了便于说明书的撰写而简单地使用的并且不具有任何特别的重要性或作用。因此，词语“模块”和“单元”可以互换地使用。
图1是根据本发明一个实施方式的图像显示设备的示意图。
参照图1，根据本发明的图像显示设备（以附图标记100表示）可以是能够进行触摸操作的移动终端。这里，移动终端100可以是蜂窝电话、智能电话、笔记本计算机、数字式相机、摄像机、平板式个人计算机（PC）等。
以下对图1至图14D的描述主要是基于图像显示设备100是可以进行触摸操作的移动终端的假设而进行的。
另一方面，根据本实施方式的图像显示设备100基于用户的手指50的有向触摸输入（换言之，拖拽输入）而输出有向声音70。因此，用户可以基于触摸输入直观地识别出方向，改善了用户便利性。
图2是图1的图像显示设备的框图。
参照图2，移动终端100可以包括无线通信单元110、音频/视频（A/V）输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180以及电源190。
无线通信单元110可以包括广播接收模块111、移动通信模块113、无线因特网模块115、近场通信（NFC）模块117以及全球定位系统（GPS）模块119。
广播接收模块111可以通过广播频道从外部广播管理服务器接收广播信号和广播相关信息中的至少一种。这里，广播频道可以包括卫星频道和地面频道。
通过广播接收模块111接收到的广播信号和/或广播相关信息可以存储在存储器160中。
移动通信模块113通过移动通信网络向/从基站、外部终端和服务器中的至少一个发送/接收无线电信号。这里，无线电信号包括语音呼叫信号、视频电话呼叫信号或与文本/多媒体消息的收发相关联的各种形式的数据。
无线因特网模块115是指用于无线因特网接人的模块。该模块115可以安装在移动终端100的内部或外部。例如，无线因特网模块115可以进行基于WiFi的无线通信或基于WiFi-Direct的无线通信。
NFC模块117执行近场通信（NFC）。当移动终端100接近预定距离内的配备有NFC标签或NFC模块的电子设备时，即，当移动终端100紧跟该电子设备时，NFC模块117可以从该电子设备接收数据或向该电子设备发送数据。
这种局部区域的通信技术可以包括蓝牙、射频识别（RFID）、红外数据联合（IrDA）、超宽带（UWB）和ZigBee。
GPS模块119可以从多个卫星接收位置信息。
A/V输入单元120被提供以输入音频信号或视频信号。A/V输入单元120可以包括相机121和麦克风123。
用户输入单元130产生键输入数据，所述键输入数据由用户输入以控制终端的操作。为此，用户输入单元130可以包括键区、薄膜开关和触摸板（静压/电容）。特别地，稍后将描述的触摸板和显示器151可以形成被称为触摸屏的层叠结构。
感测单元140可以感测移动终端100的当前状态，诸如移动终端100的打开/闭合状态、移动终端100的位置或用户对移动终端100的接触存在与否，并且感测单元140可以产生用于控制移动终端100的操作的感测信号作为感测结果。
感测单元140可以包括接近传感器141、压力传感器143以及运动传感器145。运动传感器145可以利用加速度传感器、陀螺仪传感器和重力传感器来感测移动终端100的运动或位置。具体地，陀螺仪传感器是一种测量角速度的传感器，并且可以感测移动终端相对于基准方向而转动的方向（角）。
输出单元150可以包括显示器151、音频输出模块153、告警单元155和触觉模块157。
显示器151显示并输出在移动终端100中处理的信息。
另一方面，在显示器151和触摸板形成了层叠结构以构成触摸屏的情况下，如上所述，显示器151可以用作可以通过用户触摸而输入信息的输入装置以及输出装置。
在这点上，显示器151除了显示模块以外可以包括单独的触摸传感器（图3中的210）。
音频输出模块153输出从无线通信单元110接收到或在存储器160中存储的音频数据。该音频输出模块153可以包括扬声器和蜂鸣器。移动终端100可以具有至少一个扬声器。
告警单元15输出信号以通知用户在移动终端100中发生的事件。例如，可以以振动形式输出这样的信号。
触觉模块157产生用户可以感觉到的多种触觉效果。触觉模块157产生的这些触觉效果的代表性示例可以是振动效果。
存储器160可以存储用于控制器180的处理和控制的程序，并且还可以用于临时地存储输入/输出数据（例如，电话簿、消息、静止图像和运动图像）。
接口单元170用于与连接到移动终端100的所有外部装置进行连接。接口单元170可以接收从这些外部装置发送来的数据或从这种外部装置提供的电力，并且将接收到的数据或电力传送至移动终端100的内部部件，或者将移动终端100的内部数据发送到外部装置。
控制器180一般控制移动终端100的上述部件中的每一个的操作，以控制移动终端100的整体操作。例如，控制器180可以执行与语音呼叫、数据通信和视频呼叫相关联的控制和处理。此外，控制器180可以包括用于多媒体回放的多媒体回放模块181。多媒体回放模块181可以由控制器180中的硬件构成，或者可以由于控制器180分立的软件构成。
另一方面，关于本发明，控制器180可以从触摸传感器（图3中的210）接收有向触摸输入并基于接收到的有向触摸输入而产生并输出有向声音，稍后将参照图3和后续附图对此进行详细描述。
电源190在控制器180的控制下接收外部电力或内部电力，并且提供移动终端100的每一个部件的操作所必需的电力。
另一方面，图2中示出的移动终端100的框图用于本发明的一个实施方式。可以根据实际实现的移动终端100的规格而组合、增加或省略该框图中的各个部件。换言之，如果需要，这些部件中的两个或更多个部件可以组合成为一个部件，或者这些部件中的一个部件可以再分为一个或更多个部件。此外，各个块所执行的功能为了本实施方式的描述而指定的，并且详细的操作和装置并不限制本发明的范围。
图3是根据本发明示例性实施方式的音频处理装置的框图。
参照图3，音频处理装置（以附图标记200表示）可以包括音频处理单元220和放大器230。
在图3中，触摸传感器210感测用户的触摸输入。例如，触摸传感器210可以基于电容触摸感测或静压触摸感测来感测用户的触摸输入。
触摸传感器210可以设置在图2中的感测单元140中，或者设置在图2中的显示器151中。另选地，触摸传感器210可以与显示器151一体地形成。
触摸传感器210感测用户的手指等的触摸输入，并且输出触摸感测信号。这里，触摸感测信号可以包括触摸位置信息、触摸方向信息、触摸力量信息和触摸速度信息中的至少一种。
触摸感测信号可以输入到音频处理单元220。
音频处理单元220可以基于来自触摸传感器210的触摸感测信号来执行音频信号处理。
具体地，音频处理单元220可以将所输入的音频信号解码，对输入的音频信号执行声道分离（channel separation），或者在频带的基础上来控制经过解码或声道分离的音频信号的系数或相位。此外，音频处理单元220可以调节低音、高音、音量等。
具体地，联系本发明，当存在有向触摸输入或拖拽输入时，音频处理单元220产生并输出与给定方向相对应的声音。
另一方面，如果在移动终端100中设置了一个扬声器，则音频处理单元220可以顺序地改变输出的音频信号的频率和振幅中的至少一项以提供有向输出。
例如，音频处理单元220可以基于有向触摸输入而顺序地提高或降低输出的音频信号的频率。结果，用户可以识别出输出的声音接近或后退，如同在多普勒效应中那样。由于该效应，用户可以识别方向。
又例如，音频处理单元220可以基于有向触摸输入而顺序地提高或降低输出的音频信号的振幅。结果，用户可以识别出输出的声音接近或后退。由于该效应，用户可以识别方向。
另选地，音频处理单元220可以在顺序地提高输出的音频信号的频率的同时顺序地提高该音频信号的振幅，或者在顺序地降低输出的音频信号的频率的同时顺序地降低该音频信号的振幅。
另一方面，如果在移动终端100中提供了两个扬声器，则音频处理单元220可以顺序地改变两个声道的输出的音频信号中的每一个信号的频率、振幅和相位中的至少一项以提供有向输出。
例如，音频处理单元220可以基于有向触摸输入而提高两个声道中的一个声道的音频信号的频率、振幅和相位中的至少一项或降低另一个声道的音频信号的频率、振幅和相位中的至少一项，从而输出有向声音。结果，用户可以识别方向。
另一方面，放大器230放大从音频处理单元220输出的音频信号。具体地，放大器230放大有向音频信号。
放大器230放大后的音频信号被输入到扬声器153a和153b，扬声器153a和153b中的每个输出与所输入的音频信号相对应的声音。
另一方面，尽管移动终端100在图中被示为具有两个扬声器153a和153b，但是移动终端100可以另选地仅具有一个扬声器。
图4是图3中的音频处理单元的框图。
参照图4，音频处理单元220可以包括声像定位（sound image localization）单元335、均衡化单元340、子带分析单元345、频率依赖相位/增益控制器350以及子带合成单元355。
声像定向单元335基于输入的音频信号来控制声像定位。
这里，输入的音频信号可以是外部输入的音频信号或者是预先存储在存储器160中的音频信号。
声像定位表示感觉上感知到的声像的定位。例如，针对具有左声道和右声道的立体声音频信号，当左声道的音频信号和右声道的音频信号相同时，声像可以定位在左扬声器和右扬声器之间的中央。
对声像进行定位可以使收听者能够感觉声场空间中的特定位置（特定方向）的声音源，例如基于到达收听者的耳朵的音频信号的相位差（时间差）和电平比（声压级比）。
为了控制声像定位，可以对输入的音频信号使用头部相关传递函数（HRTF：headrelated transfer function）滤波。
HRTF表示源自于特定位置处的声音源的声波与到达耳鼓的声波之间的传递函数。可以通过将麦克风插入真正的收听者的耳朵或人形模特的耳朵中、并接着测量特定角的音频信号的脉冲响应来获得HRTF。
HRTF具有随声音源的方位角和高度而改变的值。此外，HRTF的值可以根据收听者的诸如头部形状、头部大小或耳朵形状的物理特征而改变。
均衡化单元340基于关于与扬声器的距离的信息或关于扬声器的布置的信息来将经过声像定位控制的音频信号均衡化。例如，均衡化单元340可以对经过声像定位控制的音频信号应用与扬声器和收听者之间的距离或与扬声器的布置相对应的均衡器。为此，均衡化单元340可以单独地接收关于收听者与扬声器之间的距离的详细信息或扬声器布置信息。此外，均衡化单元340可以在进行均衡之后将以上信息一起输出。
尽管这种均衡化被示为在音频信号的频域中执行，但是本发明并不限于此。例如，均衡可以在音频信号的时域中执行。
子带分析单元345对来自均衡化单元340的音频信号进行子带分析滤波。也就是说，子带分析单元345将经过均衡化单元340均衡化的经过声像定位控制的音频信号转换成频率信号。为此，子带分析单元345包括子带分析滤波器组。被子带分析单元345滤波的音频信号的子带的数量可以是32或64。另选地，滤波的音频信号的子带可以是FFT子带。
各个频带的音频信号可以由稍后描述的频率依赖相位/增益控制器350在频带的基础上或频带组进行相位控制或增益控制。
频率依赖相位/增益控制器350在频带的基础上控制音频信号的相位和增益中的至少一项。
为此，频率依赖相位/增益控制器350可以通过计算与给定深度相对应的复值因数并将计算出的复值因数应用于子带分析信号而控制用于深度优化因数计算和再现的控制操作。
也就是说，频率依赖相位/增益控制器350可以分别在所有频带独立地进行声道间符号变化，可以将特定的频率范围划分为多个频带并且分别在划分出的频带进行声道间符号变化，可以将特定的频率范围划分为多个频带组并且分别在划分出的频带组进行声道间符号变化，可以分别在所有的频带独立地进行声道间复值调整，可以将特定的频率范围划分为多个频带并且分别在划分出的频带执行声道间复值调整，或者可以将特定的频率范围划分为多个频带组并且分别在划分出的频带组执行声道间复值调整。因此，频率依赖相位/增益控制器350可以通过计算与给定深度相对应的复值因数并将计算出的复值因数应用于子带分析信号而执行用于深度优化因数计算和再现的控制操作。
具体地，频率依赖相位/增益控制器350可以在频带的基础上来控制音频信号的相位。
可以以不同方式进行相位控制。例如，频率依赖相位/增益控制器350可以将特定频率范围划分为多个频带并且分别在划分出的频带执行声道间符号变化，可以将特定频率范围划分为多个频带组并且分别在划分出的频带组执行声道间符号变化，可以在所有频带独立地执行声道间相位调整，可以将特定频率范围划分为多个频带并且分别在划分出的频带执行声道间相位调整，或者可以将特定频率范围划分为多个频带组并且分别在划分出的频带组执行声道间相位调整。
另外，具体地，频率依赖相位/增益控制器350可以在频带的基础上来控制音频信号的增益。
可以以不同方式进行增益控制。例如，频率依赖相位/增益控制器350可以分别在所有频带独立地执行增益调整，可以将特定频率范围划分为多个频带并且分别在划分出的频带执行增益控制，或者可以将特定频率范围划分为多个频带组并且分别在划分出的频带组执行增益调整。
特别地，联系本实施方式，频率依赖相位/增益控制器350可以接收有向触摸输入St并且给予接收到的有向触摸输入信号St来进行信号处理，使得有向声音的音频信号被输出。
具体地，频率依赖相位/增益控制器350可以在频带的基础上对输出的音频信号的相位和增益中的至少一项进行控制。
如果在移动终端100中设置了一个扬声器，则频率依赖相位/增益控制器350可以顺序地改变音频信号的频率和振幅中的至少一项以提供有向输出。
例如，频率依赖相位/增益控制器350可以基于有向触摸输入信号St来顺序地提高或降低音频信号的频率。结果，用户可以识别出输出的声音接近或后退，如在多普勒效应中那样。由于这种效应，用户可以识别方向。
又例如，频率依赖相位/增益控制器350可以基于有向触摸输入信号St而顺序地提高或降低音频信号的振幅。结果，用户可以识别出输出的声音接近或后退，如在多普勒效应中那样。由于这种效应，用户可以识别方向。
另选地，频率依赖相位/增益控制器350可以在顺序地提高音频信号的频率的同时顺序地提高音频信号的振幅，或者可以在顺序地降低音频信号的频率的同时顺序地降低音频信号的振幅。
另一方面，如果在移动终端100中设置了两个扬声器，则频率依赖相位/增益控制器350可以顺序地改变两个声道的输出的音频信号中的每个音频信号的频率、振幅和相位中的至少一项以提供有向输出。
例如，频率依赖相位/增益控制器350可以基于有向触摸输入信号St来提高两个声道中的一个声道的音频信号的频率、振幅和相位中的至少一项，或者降低另一个声道的音频信号的频率、振幅和相位中的至少一项，从而输出表示方向的声音。结果，用户可以识别方向。
子带合成单元355在频带的基础上对经过相位控制或增益控制的音频信号进行子带合成滤波。
子带合成单元355对经过相位控制或增益控制的音频信号进行子带合成滤波。也就是说，子带合成单元355将音频信号的32个子带或64个子带合成。为此，子带合成单元355包括子带合成滤波器组。因此，经过根据给定深度的声像定位、相位控制、增益控制等的多声道音频信号被最终输出。
另一方面，可以仅在移动终端100具有两个扬声器的情况下执行声像定位单元335的操作。也就是说，在移动终端100具有一个扬声器的情况下，可以略去声像定位单元335的操作并且直接执行均衡化单元340的操作。
图5是例示操作根据本发明一个实施方式的图像显示设备的方法的流程图，并且图6至图14D是图5的操作方法的各种示例的描述的参照图。
首先，参照图5，根据本实施方式的图像显示设备100接收第一方向上的触摸输入（S510）。然后，图像显示设备100输出与第一方向相对应的第一声音（S520）。
参照图6的（a），图像显示设备100可以显示主画面610。当在此状态下存在用户的手指50的右方向触摸输入时，图像显示设备100可以执行画面改变以显示应用画面620，该应用画面620包括安装在图像显示设备100中的应用项。
例如，在图像显示设备100具有一个扬声器的情况下，可以通过该一个扬声器输出与右方向触摸输入相对应的右方向声音625。
具体地，当图像显示设备100的触摸传感器210感测到右方向触摸输入时，触摸传感器210将该右方向触摸输入传递至音频处理单元220。
音频处理单元220可以产生并输出与该右方向触摸输入相对应的右方向声音。
例如，音频处理单元220可以基于该右方向触摸输入而顺序地降低输出的音频信号的频率。也就是说，如多普勒效应中那样，出现了来自图形显示设备100的输出声音后退的效果。结果，用户可以直观地识别出从左到右的触摸输入。
图6的（b）例示了与右方向触摸输入相对应的音频信号630。从图6的（b）可以看出，音频信号630在第一频率f1处重复三次，然后在比第一频率f1低的第二频率f2处重复三次，并且接着在比第二频率f2低的第三频率f3处重复三次。尽管音频信号630被例示为具有固定的振幅L1，但是音频信号630可以具有可变的振幅或根据相应频率而不同的振幅。
另一方面，图像显示设备100可以响应于该右方向触摸输入而通过触觉模块157进行振动。
另一方面，图像显示设备100接收第二方向上的触摸输入（S530）。然后，图像显示设备100输出与该第二方向相对应的第二声音（S540）。
参照图7的（a），图像显示设备100可以显示应用画面620。当在此状态下存在用户的手指50的左方向触摸输入时，图像显示设备100可以执行画面改变以显示主画面610。
例如，在图像显示设备100具有一个扬声器的情况下，可以通过该一个扬声器输出与该左方向触摸输入相对应的左方向声音626。
具体地，当图像显示设备100的触摸传感器210感测到左方向触摸输入时，触摸传感器210将该左方向触摸输入信号传递至音频处理单元220。
音频处理单元220可以产生并输出与该左方向触摸输入相对应的左方向声音。
例如，音频处理单元220可以基于该左方向触摸输入而顺序地提高输出的音频信号的频率。也就是说，如多普勒效应中那样，出现了来自图形显示设备100的输出声音接近的效果。结果，用户可以直观地识别出从右到左的触摸输入。
图7的（b）例示了与左方向触摸输入相对应的音频信号631。从图7的（b）可以看出，音频信号631在第三频率f3处重复三次，接着在比第三频率f3高的第二频率f2处重复三次，并且接着在比第二频率f2高的第一频率f1处重复三次。尽管音频信号631被示为具有固定的振幅L1，但是音频信号631可以具有可变的振幅或者根据相应的频率而不同的振幅。
另一方面，图像显示设备100可以响应于该左方向触摸输入而通过触觉模块157进行振动。该振动可以与对应于右方向触摸输入的振动不同。例如，该振动的频率可以按照和音频信号的频率相似的方式顺序地提高。
另一方面，从图6和图7之间的比较可以看出，分别响应于右方向触摸输入和左方向触摸输入而产生和输出的音频信号630和631具有相似的波形，但是区别在于，音频信号630的频率随着时间而降低，而音频信号631的频率随着时间而提高。因此，用户可以直观地识别出当前的触摸输入是左方向触摸输入还是右方向触摸输入。
除了图6和图7的情况以外，响应于向下触摸输入和向上触摸输入，可以输出不同的声音。
图8的（a）例示了响应于向下触摸输入而在主画面610上显示快速设置画面640。在图像显示设备100具有一个扬声器的情况下，可以通过该一个扬声器输出与向下触摸输入相对应的向下声音627。
另一方面，快速设置画面640可以被称为帷幕（curtain）画面，这是因为该画面被显示为好像降下了帷幕那样。另选地，快速设置画面640可以被称为通知画面，这是因为该画面除了诸如WiFi项和振动/声音项以外还可以包括通知消息。
图8的（b）例示了与向下触摸输入相对应的音频信号632。从图8的（b）可以看出，音频信号632在第六频率f6处重复三次，接着在比第六频率f6低的第五频率处重复三次，并且接着在比第五频率f5低的第四频率f4处重复三次。尽管音频信号632被示为具有固定的振幅L2，但是音频信号632可以具有可变的振幅或根据相应的频率而不同的振幅。
另一方面，从图8的（b）与图6的（b）之间的比较可以看出，图8的（b）的音频信号632在振幅和频率方面与图6的（b）的音频信号630不同。关于这点，与向下触摸输入相对应的声音可以与对应于右方向触摸输入的声音区别开。与向下触摸输入相对应的声音也可以与对应于左方向触摸输入的声音区别开。
图9的（a）例示了响应于向上触摸输入而在快速设置画面640上显示主画面610。在图像显示设备100具有一个扬声器的情况下，可以通过该一个扬声器输出与该向上触摸输入相对应的向上声音628。
图9的（b）例示了与向上触摸输入相对应的音频信号633。从图9的（b）中可以看出，音频信号633在第四频率f4处重复三次，接着在比第四频率f4高的第五频率f5处重复三次，并且接着在比第五频率f5高的第六频率f6处重复三次。尽管音频信号633被示为具有固定振幅L2，音频信号633可以具有可变的振幅或根据相应的频率而不同的振幅。
另一方面，从图9的（b）与图7的（b）之间的比较可以看出，图9的（b）的音频信号633在振幅和频率方面与图7的（b）的音频信号631不同。关于这点，与向上触摸输入相对应的声音可以与对应于左方向触摸输入的声音区别开。与向上触摸输入相对应的声音也可以与对应于右方向触摸输入的声音区别开。
又例如，可以响应于右方向触摸输入而输出水滴声音，可以响应于左方向触摸输入而输出下雨声音，可以响应于向上触摸输入而输出鸟叫声音，并且可以响应于向下触摸输入而输出哨子声音。也就是说，根据相应的方向，可以输出不同来源的声音。
按照这种方式，根据本实施方式，分别响应于四个方向上的触摸输入而输出具有方向性的声音。
除了图6至图9中例示的示例以外，可能有各种示例。例如，音频信号的频率和振幅中的至少一项可以根据各个方向而改变。
又例如，输出的声音的输出时间、振幅和频率可以根据触摸输入的力量或速度而改变。
图10和图11例示了根据右方向触摸输入时间或右方向触摸输入速度而改变输出的声音的输出时间。
图10的（a）例示了在时段Ta期间响应于右方向触摸输入而输出右方向声音625。从图10的（b）可以看出，按照使音频信号630在第一频率f1处重复三次，接着在第二频率f2处重复三次斌接着在第三频率f3处重复三次的方式，在频率上顺序地降低与右方向声音625相对应的音频信号630。
图11的（a）例示了在比时段Ta短的时段Tb中响应于右方向触摸输入而输出右方向声音635。从图11的（b）可以看出，按照使音频信号641在第一频率f1处重复两次，接着在第二频率f2处重复两次斌接着在第三频率f3处重复两次的方式，在频率上顺序地降低与右方向声音635相对应的音频信号641。
从图11的（b）与图10的（b）之间的比较可以看出，图11的（b）的音频信号641在振幅L1、频率和频率变化方面与图10的（b）的音频信号630相同，但是不同之处在于音频信号641在输出时间上比音频信号630短。因此，用户可以直观地识别触摸输入速度和方向。
图12和图13例示了根据右方向触摸输入的力量改变输出的声音的音量，即，音频信号的振幅。
图12的（a）例示了响应于具有第一力量S1的右方向触摸输入而输出右方向声音625。从图12的（b）可以看出，与右方向声音625相对应的音频信号630具有第一振幅L1，并且按照使音频信号630在第一频率f1处重复三次，然后在第二频率f2处重复三次并接着在第三频率f3处重复三次的方式在频率上被顺序地降低。
图13的（a）例示了响应于具有比第一力量S1大的第二力量S2的右方向触摸输入而输出右方向声音636。从图13的（b）可以看出，与右方向声音636相对应的音频信号642具有第三振幅L3，并且按照使音频信号642在第一频率f1处重复三次，然后在第二频率f2处重复三次并接着在第三频率f3处重复三次的方式在频率上被顺序地降低。
从图13的（b）与图12的（b）之间的比较可以看出，图13的（b）的音频信号642在频率和频率变化方面与图12的（b）的音频信号630相同，但是不同之处在于音频信号642的振幅L3与音频信号630的振幅L1不同。因此，用户可以直观地识别触摸输入力量和方向。
另一方面，在图像显示设备100具有两个扬声器的情况下，除了如上所述地控制音频信号的频率和振幅以外，还可以控制音频信号的相位。
图14A例示了基于右方向触摸输入而通过作为左扬声器的第一扬声器153a输出第一声音1310并且通过作为右扬声器的第二扬声器153b输出第二声音1320，同时做出从主画面610到应用画面620的画面改变以显示应用画面620。
从图14A可以看出，更加强调了第二声音1320的分量。例如，与第一声音1310的音频信号相比，第二声音1320的音频信号的频率可以较高、振幅较大和/或相位较早。
为此，音频处理单元220的频率依赖相位/增益控制器350可以基于接收到的触摸输入信号St而在频带的基础上控制各个音频信号的相位/增益。
图14B例示了基于左方向触摸输入而通过作为左扬声器的第一扬声器153a输出第一声音1315并且通过作为右扬声器的第二扬声器153b输出第二声音1325，同时做出从应用画面620到主画面610的画面改变以显示主画面610。
从图14B可以看出，更加强调了第一声音1315的分量。例如，与第二声音1325的音频信号相比，第一声音1315的音频信号的频率可以较高、振幅较大和/或相位较早。
图14C例示了基于向下触摸输入而通过作为左扬声器的第一扬声器153a输出第一声音1330并且通过作为右扬声器的第二扬声器153b输出第二声音1345，同时做出从主画面610到快速设置画面640的画面改变以显示快速设置画面640。
从图14C可以看出，强调了第一声音1330和第二声音1345二者的向下成分。例如，可以在频率和/或振幅上顺序地降低第一声音1330和第二声音1345的音频信号。
图14D例示了基于向上触摸输入而通过作为左扬声器的第一扬声器153a输出第一声音1335并且通过作为右扬声器的第二扬声器153b输出第二声音1340，同时做出从快速设置画面640到主画面610的画面改变以显示主画面610。
从图14D可以看出，强调了第一声音1335和第二声音1340二者的向上成分。例如，可以在频率和/或振幅上顺序地提高第一声音1335和第二声音1340的音频信号。
另一方面，尽管图6至图14D例示了响应于触摸输入而将主画面610改变成应用画面620或快速设置画面640，但是各种变型是可能的。
例如，当在显示锁定画面的状况下存在右方向触摸输入时，响应于该右方向触摸输入，可以显示主画面610并且可以输出在图6的（b）中示出的音频信号630。
又例如，当在图像显示设备100上显示文件列表画面或网页画面的状况下存在右方向触摸输入时，在由于画面滚动而做出画面改变的同时，可以输出图6的（b）中示出的音频信号630。
另一方面，即使存在相同方向的多个触摸输入，根据所显示的画面的属性或在画面改变时要显示的画面的属性，输出的音频信号也可以不同。具体地，输出的音频信号可以在频率、振幅和相位中的至少一个方面不同。结果，用户可以很容易地识别画面属性。
也就是说，当在显示锁定画面的状况下存在右方向触摸输入时和在显示文件列表画面的状况下存在右方向触摸输入时，可以输出不同的音频信号。
另一方面，当在显示第一文件列表画面或第一网页画面的状况下存在右方向触摸输入时和当在显示最后的文件列表画面或最后的网页画面的状况下存在右方向触摸输入时，输出的音频信号可以在频率、振幅和相位中的至少一个方面不同。结果，用户可以直观地识别当前画面是第一画面还是最后的画面。
图15是根据本发明另一实施方式的图像显示设备的示意图。
参照图15，根据本实施方式的图像显示设备（以附图标记700表示）可以是能够进行手势输入的图像显示设备。这里，图像显示设备700可以是电视机（TV）、监视器、笔记本计算机等。
以下对图16至图19D的描述主要是基于图像显示设备700是可以进行手势输入的TV的假设而进行的。
另一方面，根据本实施方式的图像显示设备700基于用户1400的手60的移动而做出的有向手势输入而通过两个扬声器785a和785b输出表示方向的声音。因此，用户可以基于手势输入而直观地识别方向，提高了用户的便利性。
另一方面，为了感测手势输入，图像显示设备700可以包括相机790。
图16是图15的图像显示设备的框图。
参照图16，根据本实施方式的图像显示设备700可以包括广播接收单元705、外部装置接口单元730、存储器740、用户输入接口单元750、感测单元（未示出）、控制器770、显示器780、音频输出单元785以及相机790。
广播接收单元705可以包括调谐器710、解调制器720以及网络接口单元735。当然，如果需要，广播接收单元705可以被设计成包括调谐器710和解调制器720而不包括网络接口单元735，或者，相反，广播接收单元705可以被设计成包括网络接口单元735而不包括调谐器710和解调制器720。
调谐器710从通过天线接收到的射频（RF）广播信号中选择与用户选择的频道相对应的RF广播信号或与所有预存储的频道相对应的RF广播信号。调谐器710将所选择的RF广播信号转换成中频（IF）信号或基带视频或音频信号。
解调制器720接收并解调制经过调谐器710转换的数字IF（DIF）信号。
从解调制器720输出的流信号可以被输入到控制器770。控制器770执行解复用、视频/音频信号处理等，以通过显示器780输出图像并通过音频输出单元785输出声音。
外部装置接口单元730可以向/从连接至图像显示设备700的外部装置发送/接收数据。
网络接口单元735提供用于图像显示设备700与包括因特网在内的有线/无线网络的连接的接口。
存储器740可以存储用于各个信号处理和控制器770的控制的程序，或者可以存储要经受信号处理的视频、音频或数据信号。
另一方面，联系本实施方式，存储器740可以存储与有向手势输入相对应的音频信号。
尽管存储器740在图16中被示为与控制器770分立地设置，但是本发明的范围并不限于此。例如，存储器740可以被设置在控制器770中。
用户输入接口可以750将用户输入的信号传递至控制器770或从控制器向用户传递信号。
控制器770可以将通过调谐器710、解调制器720或外部装置接口单元730输入的流解复用，或者处理经解复用的信号以产生并输出用于输出图像或音频的信号。
经过控制器770处理的视频信号可以输入到显示器780以显示为对应的图像。经过控制器处理的视频信号也可以通过外部装置接口单元730输入到外部输出装置。
经过控制器770处理的音频信号可以通过音频输出单元785输出为声音。经过控制器处理的音频信号也可以通过外部装置接口单元730输入到外部输出装置。
另一方面，联系本实施方式，控制器770可以在接收到有向手势输入时产生并输出与该有向手势输入相对应的表示方向的声音。
例如，控制器770可以基于通过相机790捕捉到的图像输入而识别用户的手势。当用户的手势中存在有向的手势时，控制器770可以基于该有向手势来产生并输出表示方向的声音。此外，控制器770可以根据手势方向而产生并输出具有不同频率、振幅或相位的声音。
尽管图16中没有示出，但是控制器770可以包括解复用器、视频处理器、音频处理器等，稍后将参照图17进行描述。
音频输出单元785接收经过控制器770处理的音频信号，并且将接收到的音频信号输出为声音。音频输出单元785可以包括多个扬声器。例如，如上所述，音频输出单元785可以包括图15中的前部的左扬声器785a和右扬声器785b。此外，音频输出单元785可以包括左和右环绕扬声器（未示出），中央扬声器（未示出）以及低音扬声器（未示出）。
遥控装置800将用户输入传送至用户输入接口单元750。另外，遥控装置800可以接收从用户输入接口单元750输出的视频、音频或数据信号并在遥控装置800上显示接收到的信号或者将接收到的信号输出为声音。
另一方面，图16中示出的图像显示设备700的框图是用于本发明的一个实施方式。该框图中的各个部件可以根据实际实现的移动终端700的规格而组合、增加或省略。换言之，如果需要，则这些部件中的两个或更多个部件可以组合成为一个部件，或者这些部件中的一个部件可以再分为一个或更多个部件。此外，各个块所执行的功能是为了本实施方式的描述而指定的，并且详细的操作和其装置并不限制本发明的范围。
另一方面，按照与图16不同的方式，图像显示设备700可以不包括图16中示出的调谐器710和解调制器720，并且可以通过网络接口单元735或外部装置接口单元730来接收视频内容并回放接收到的视频内容。
图17是图16中的控制器的框图。
参照图17，根据本实施方式的控制器770可以包括解复用器810、音频处理器815、视频处理器820、处理器830、屏上显示（OSD）生成器840以及混合器845。控制器770还可以包括数据处理器（未示出）、帧速率转换器（未示出）以及格式化器（未示出）。
解复用器810解复用输入的流。例如，当输入了运动图像专家组-2（MPEG-2）传输流（TS）时，解复用器810可以解复用输入的MPEG-2TS以将其分解为视频、音频和数据信号。这里，输入到解复用器810的流信号可以是从调谐器710、解调制器720或外部装置接口单元730输出的流信号。
另一方面，音频处理器815可以对解复用出的音频信号进行音频处理。为此，音频处理器815可以包括多种音频解码器。
音频处理器815还可以调整低音、高音、音量等。
具体地，联系本实施方式，当存在有向的手势输入时，音频处理器815产生并输出与给定的方向相对应的声音。另一方面，如果在图像显示设备700中设置了两个扬声器，则音频处理器815可以顺序地改变分别与两个扬声器相对应的两个声道的音频信号中的每个音频信号的频率、振幅和相位中的至少一项，使得两个声道的音频信号被输出以提供表示方向的输出。
例如，音频处理器815可以基于有向的手势输入来提高两个声道中的一个声道的音频信号的频率、振幅和相位中的至少一项，或者可以降低另一个声道的音频信号的频率、振幅和相位中的至少一项，以输出表示方向的声音。结果，用户可以识别方向。
另一方面，视频处理器820可以针对解复用出的视频信号进行视频处理。为此，视频处理器820可以包括视频解码器825和缩放器835。
视频解码器825将解复用出的视频信号解码，而缩放器835缩放解码出的视频信号的分辨率，使得解码出的视频信号可以通过显示器780输出。
视频解码器825可以包括多种标准的解码器，并且通过这些解码器中的相应标准中的一种来对所输入的视频信号进行解码。
处理器830可以控制图像显示设备700或控制器770的整体操作。
OSD生成器840响应于用户输入或自发地生成OSD信号。
混合器845可以将经视频处理器820处理的视频信号与OSD生成器840生成的OSD信号混合。
帧频转换器（FRC）（未示出）可以转换所输入的视频信号的帧频。另选地，FRC（未示出）可以直接输出所输入的视频信号而不进行单独的帧频转换。
格式化器（未示出）可以转换所输入的视频信号的格式，或者使得输入的视频信号旁路而不进行单独的格式转换。例如，格式化器（未示出）可以将二维（2D）视频信号转换为三维（3D）视频信号，或者将3D视频信号转换为2D视频信号。另选地，格式化器（未示出）可以转换所输入的视频信号的格式，使得输入的视频信号显示在显示器780上。
另一方面，图17中示出的控制器770的框图用于本发明的一个实施方式。该框图中的各个部件可以根据实际实现的控制器770的规格而组合、增加或省略。
具体地，帧频转换器（未示出）和格式化器（未示出）可以不设置在控制器770中，而是可以分别单独地设置或者设置为一个模块。
图18是例示操作根据本发明另一实施方式的图像显示设备的方法的流程图，并且图19A至图19D是图18的操作方法的各种示例的描述的参照图。
首先，参照图18，根据本实施方式的图像显示设备700接收第一方向上的手势输入（S1710）。然后，图像显示设备700输出与第一方向相对应的第一声音（S1720）。
图19A例示了在观看某个广播图像的过程中基于右方向手势输入而通过作为左扬声器的第一扬声器785a输出第一声音1810并通过作为右扬声器的第二扬声器785b输出第二声音1820。
相机790捕捉用户的图像，该图像接着可以被输入到控制器770。
控制器770可以识别用户的面部、用户的手等以及与用户的手的移动相对应的手势。
如图19A所示，在用户1400使用她的手60执行右方向手势的情况下，控制器770中的音频处理器815可以产生并输出与该右方向手势输入相对应的第一声音1810和第二声音1820。
从图19A可以看出，更加强调第二声音1820的分量。例如，例如，与第一声音1810的音频信号相比，第二声音1820的音频信号的频率可以较高、振幅较大和/或相位较早。
为此，音频处理器815的频率依赖相位/增益控制器（未示出）可以基于接收到的手势输入信号而在频带的基础上控制各个音频信号的相位/增益。
另一方面，可以基于该右方向手势输入来提高整体音量。也就是说，在第一声音1810和第二声音1820被提高音量的同时，第二声音1820的分量被更加强调。
另一方面，图像显示设备700接收第二方向上的手势输入（S1730）。然后，图像显示设备700输出与该第二方向相对应的第二声音（S1740）。
图19B例示了在观看某个广播图像的过程中基于左方向手势输入而通过作为左扬声器的第一扬声器785a输出第一声音1815并且通过作为右扬声器的第二扬声器785b输出第二声音1825。
如图19B所示，在用户1400使用她的手60执行左方向手势的情况下，控制器770中的音频处理器815可以产生并输出与该左方向手势输入相对应的第一声音1815和第二声音1825。
从图19B可以看出，更加强调了第一声音1815的分量。例如，与第二声音1825的音频信号相比，第一声音1815的音频信号的频率可以较高、振幅较大和/或相位较早。
为此，音频处理器815的频率依赖相位/增益控制器（未示出）可以基于接收到的手势输入信号而在频带的基础上控制各个音频信号的相位/增益。
另一方面，可以基于该左方向手势输入来提高整体音量。也就是说，在提高第一声音1815和第二声音1825的音量的同时，第一声音1815的分量可以被更加强调。
图19C例示了在观看某个广播图像的过程中基于向下手势输入而通过作为左扬声器的第一扬声器785a输出第一声音1835并且通过作为右扬声器的第二扬声器785b输出第二声音1845。
从图19C可以看出，强调了第一声音1835和第二声音1845二者的向下分量。例如，可以在频率和/或振幅上顺序地降低第一声音1835和第二声音1845的音频信号。
为此，音频处理器815的频率依赖相位/增益控制器（未示出）可以基于接收到的手势输入信号而在频带的基础上控制各个音频信号的相位/增益。
另一方面，可以基于向下手势输入来减小正在观看的广播频道的号码。也就是说，正在观看的广播频道可以从CH9改变为CH8，并且可以在图像显示设备700上显示相应的广播图像。
图19D例示了在观看某个广播图像的过程中基于向上手势输入而通过作为左扬声器的第一扬声器785a输出第一声音1830并且通过作为右扬声器的第二扬声器785b输出第二声音1840，同时做出从快速设置画面640到主画面610的画面改变以显示主画面610。
从图19D可以看出，强调了第一声音1830和第二声音1840二者的向上分量。例如，可以在频率和/或振幅上顺序地提高第一声音1830和第二声音1840的音频信号。
另一方面，可以基于向上手势输入来增加正在观看的广播频道的号码。也就是说，正在观看的广播频道可以从CH9改变为CH10，并且可以在图像显示设备700上显示相应的广播图像。
另一方面，当在图像显示设备700上显示文件列表画面或网页画面的状况下存在右方向手势输入时，在由于画面滚动而做出画面改变的同时，可以输出图6的（b）中示出的音频信号630。
另一方面，即使存在相同方向的多个触摸输入，根据所显示的画面的属性或在画面改变时要显示的画面的属性，输出的音频信号也可以不同。具体地，输出的音频信号可以在频率、振幅和相位中的至少一个方面不同。结果，用户可以很容易地识别画面属性。
也就是说，当在显示广播图像的状况下存在右方向手势输入时和在显示文件列表画面的状况下存在右方向触摸输入时，可以输出不同的音频信号。
另一方面，当在显示第一文件列表画面或第一网页画面的状况下存在右方向手势输入时和当在显示最后的文件列表画面或最后的网页画面的状况下存在右方向手势输入时，输出的音频信号可以在频率、振幅和相位中的至少一个方面不同。结果，用户可以直观地识别当前画面是第一画面还是最后的画面。
根据本发明的图像显示设备及其操作方法并不限于上述实施方式的构造和方法，这些实施方式的全部或一部分可以选择性地组合，并且被构造成使得这些实施方式可以进行各种不同的变型。
另一方面，本发明的图像显示设备及其操作方法可以通过处理器可读代码实现在图像显示设备的处理器可读的记录介质中。该处理器可读记录介质可以包括可存储处理器可读数据的所有类型的记录单元。例如，处理器可读记录介质可以包括ROM、RAM、CD-ROM、磁带、软盘、光学数据存储器等。处理器可读记录介质还可以实现成诸如因特网上的传输的载波形式。另外，处理器可读记录介质可以分布到联网的计算机系统，并且处理器可读代码可以以分布式方式存储在这些计算机系统中并执行。
从以上描述可以清楚看出，根据本发明的实施方式，基于有向的触摸输入，可以输出对应的声音。因此，用户可以基于触摸输入来直观地识别方向，提高了用户便利性。
例如，与第一方向上的触摸输入相对应的声音和与第二方向上的触摸输入相对应的声音可以在频率、振幅和相位中的至少一个方面不同。因此，用户可以通过声音直观地识别方向。
另一方面，根据触摸输入的力量或速度，可以改变相应的声音的振幅和频率中的至少一项，提高了用户便利性。
另一方面，基于第一方向上的触摸输入，在做出画面改变的同时，可以输出表示方向的声音，提高了用户便利性。
另一方面，通过在频带的基础上控制声音的增益/相位，可以输出表示方向的声音，提高了用户便利性。
另一方面，当在显示锁定画面的状况下存在第一方向上的触摸输入时，可以在由于解锁而显示主画面的同时输出与第一方向相对应的声音。因此，用户可以直观地识别触摸方向，提高了用户便利性。
另一方面，在可以进行手势输入的图像显示设备中，可以基于有向的手势输入而输出对应的声音。因此，用户可以基于手势输入而直观地识别方向，提高了用户便利性。
尽管出于例示的目的而公开了本发明的优选实施方式，本领域技术人员将理解的是，在不脱离在所附权利要求中公开的本发明的范围和精神的情况下，各种修改、添加和替换都是可能的。
相关申请的交叉引用
本申请要求2012年10月15日在韩国知识产权局提交的韩国专利申请No.10-2012-0114337的优先权，此处以引证的方式并入其全部内容，就像在此进行了完整阐述一样。

Claims (15)

1.一种操作图像显示设备的方法，该方法包括以下步骤：
接收（S510）第一方向上的触摸输入；
输出（S520）与所述第一方向相对应的第一声音；
接收（S530）第二方向上的触摸输入；以及
输出（S540）与所述第二方向相对应的第二声音。
2.根据权利要求1所述的方法，其中，所述第一声音至少在频率、振幅和相位中的至少一个方面与所述第二声音不同。
3.根据权利要求1所述的方法，其中，根据所述第一方向上的触摸输入的力量或速度，在输出时间、振幅和频率中的至少一个方面改变所述第一声音。
4.根据权利要求1所述的方法，该方法还包括以下步骤：
显示第一画面；以及
基于所述第一方向上的触摸输入而显示第二画面。
5.根据权利要求1所述的方法，该方法还包括以下步骤：
显示第一画面；以及
基于所述第一方向上的触摸输入而显示第二画面，
其中，根据所述第一画面的属性，在频率、振幅和相位中的至少一个方面改变与所述第一方向相对应的所述第一声音。
6.根据权利要求1所述的方法，该方法还包括以下步骤：
显示锁定画面；以及
基于所述第一方向上的触摸输入而显示主画面。
7.根据权利要求1所述的方法，该方法还包括以下步骤：
接收第三方向上的触摸输入；
输出与所述第三方向相对应的第三声音；
接收第四方向上的触摸输入；以及
输出与所述第四方向相对应的第四声音。
8.根据权利要求1所述的方法，其中，输出所述第一声音的步骤和输出所述第二声音的步骤各包括以下步骤：
在频带的基础上控制输出的音频信号的增益和相位中的至少一项以输出所述第一声音和所述第二声音中的对应一方。
9.根据权利要求1所述的方法，其中，输出所述第一声音的步骤和输出所述第二声音的步骤各包括以下步骤：
基于输入的音频信号来控制声像定位；
将经过声像定位控制的音频信号均衡化；
针对经过均衡化的音频信号执行子带分析滤波；
在子带的基础上控制经受了子带分析滤波的所述音频信号的相位和增益中的至少一项；以及
针对经过了相位控制或增益控制的音频信号执行子带合成滤波。
10.一种图像显示设备，该图像显示设备包括：
显示器（151）；
触摸传感器（210），其被配置成感测触摸输入；
音频处理单元（220），其被配置成响应于所述触摸传感器感测到的第一方向上的触摸输入而产生第一声音，并且响应于所述触摸传感器感测到的第二方向上的触摸输入而产生第二声音；以及
音频输出单元（153），其被配置成输出所述第一声音或所述第二声音。
11.根据权利要求10所述的图像显示设备，其中，所述音频处理单元（220）设置所述第一声音和所述第二声音，使得所述第一声音和所述第二声音在频率、振幅和相位中的至少一个方面不同。
12.根据权利要求10所述的图像显示设备，其中，所述音频处理单元（220）根据所述第一方向上的触摸输入的力量或速度来改变所述第一声音的输出时间、振幅和频率中的至少一项。
13.根据权利要求10所述的图像显示设备，其中，所述显示器（151）显示第一画面，接着基于所述第一方向上的触摸输入来显示第二画面，
其中，所述音频处理单元（220）根据所述第一画面的属性来改变与所述第一方向相对应的所述第一声音的频率、振幅和相位中的至少一项。
14.根据权利要求10所述的图像显示设备，其中，所述音频处理单元（220）包括：
声像定位单元（335），其被配置成基于输入的音频信号来控制声像定位；
均衡化单元（340），其被配置成将经过声像定位控制的音频信号均衡化；
子带分析滤波单元（345），其被配置成针对经过均衡化的音频信号执行子带分析滤波；
频率依赖相位/增益控制器（350），其被配置成在子带的基础上控制经受了所述子带分析滤波的所述音频信号的相位和增益中的至少一项；以及
子带合成单元（355），其被配置成针对经受了相位控制或增益控制的音频信号执行子带合成滤波。
15.根据权利要求10所述的图像显示设备，其中，该图像显示设备还包括：
相机（121）；以及
控制器（180），其被配置成基于所述相机捕捉到的图像来感测用户的手势，并且
其中，所述音频输出单元（153）响应于所述控制器感测到所述第一方向上的手势输入而输出第一声音，并且响应于所述控制器感测到所述第二方向上的手势输入而输出第二声音。
CN201310481551.XA 2012-10-15 2013-10-15 图像显示设备及其操作方法 Expired - Fee Related CN103729121B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020120114337A KR20140047948A (ko) 2012-10-15 2012-10-15 영상표시장치, 및 그 동작방법
KR10-2012-0114337 2012-10-15

Publications (2)

Publication Number Publication Date
CN103729121A true CN103729121A (zh) 2014-04-16
CN103729121B CN103729121B (zh) 2017-07-28

Family

ID=49447901

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310481551.XA Expired - Fee Related CN103729121B (zh) 2012-10-15 2013-10-15 图像显示设备及其操作方法

Country Status (4)

Country Link
US (1) US20140108934A1 (zh)
EP (1) EP2720130A3 (zh)
KR (1) KR20140047948A (zh)
CN (1) CN103729121B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105045840A (zh) * 2015-06-30 2015-11-11 广东欧珀移动通信有限公司 一种图片展示方法及移动终端
CN106790940A (zh) * 2015-11-25 2017-05-31 华为技术有限公司 录音方法、录音播放方法、装置及终端

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10126823B2 (en) * 2014-01-03 2018-11-13 Harman International Industries, Incorporated In-vehicle gesture interactive spatial audio system
KR102318920B1 (ko) * 2015-02-28 2021-10-29 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
JP6897480B2 (ja) * 2017-10-12 2021-06-30 オムロン株式会社 操作スイッチユニット及び遊技機

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090292993A1 (en) * 1998-05-08 2009-11-26 Apple Inc Graphical User Interface Having Sound Effects For Operating Control Elements and Dragging Objects
CN101901096A (zh) * 2009-05-29 2010-12-01 艾格瑞系统有限公司 用于电子装置触摸屏的用户接口设备和方法
CN101943997A (zh) * 2010-09-13 2011-01-12 中兴通讯股份有限公司 一种实现触摸屏终端发出操作提示音的方法及终端
CN102221922A (zh) * 2011-03-25 2011-10-19 苏州瀚瑞微电子有限公司 一种支持语音提示的触控系统及其实现方法
WO2012070161A1 (ja) * 2010-11-24 2012-05-31 パナソニック株式会社 情報処理装置
US20120243689A1 (en) * 2011-03-21 2012-09-27 Sangoh Jeong Apparatus for controlling depth/distance of sound and method thereof

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI20010958A0 (fi) * 2001-05-08 2001-05-08 Nokia Corp Menetelmä ja järjestely laajennetun käyttöliittymän muodostamiseksi
KR100783552B1 (ko) * 2006-10-11 2007-12-07 삼성전자주식회사 휴대 단말기의 입력 제어 방법 및 장치
US20090121903A1 (en) * 2007-11-12 2009-05-14 Microsoft Corporation User interface with physics engine for natural gestural control
US8108791B2 (en) * 2009-02-27 2012-01-31 Microsoft Corporation Multi-screen user interface
US9009612B2 (en) * 2009-06-07 2015-04-14 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
US20110167350A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
US20120098639A1 (en) * 2010-10-26 2012-04-26 Nokia Corporation Method and apparatus for providing a device unlock mechanism
US9411507B2 (en) * 2012-10-02 2016-08-09 Toyota Motor Engineering & Manufacturing North America, Inc. Synchronized audio feedback for non-visual touch interface system and method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090292993A1 (en) * 1998-05-08 2009-11-26 Apple Inc Graphical User Interface Having Sound Effects For Operating Control Elements and Dragging Objects
CN101901096A (zh) * 2009-05-29 2010-12-01 艾格瑞系统有限公司 用于电子装置触摸屏的用户接口设备和方法
CN101943997A (zh) * 2010-09-13 2011-01-12 中兴通讯股份有限公司 一种实现触摸屏终端发出操作提示音的方法及终端
WO2012070161A1 (ja) * 2010-11-24 2012-05-31 パナソニック株式会社 情報処理装置
US20120243689A1 (en) * 2011-03-21 2012-09-27 Sangoh Jeong Apparatus for controlling depth/distance of sound and method thereof
CN102221922A (zh) * 2011-03-25 2011-10-19 苏州瀚瑞微电子有限公司 一种支持语音提示的触控系统及其实现方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105045840A (zh) * 2015-06-30 2015-11-11 广东欧珀移动通信有限公司 一种图片展示方法及移动终端
CN106790940A (zh) * 2015-11-25 2017-05-31 华为技术有限公司 录音方法、录音播放方法、装置及终端
CN106790940B (zh) * 2015-11-25 2020-02-14 华为技术有限公司 录音方法、录音播放方法、装置及终端
US10667048B2 (en) 2015-11-25 2020-05-26 Huawei Technologies Co., Ltd. Recording method, recording play method, apparatuses, and terminals
US10834503B2 (en) 2015-11-25 2020-11-10 Huawei Technologies Co., Ltd. Recording method, recording play method, apparatuses, and terminals

Also Published As

Publication number Publication date
EP2720130A3 (en) 2017-01-25
EP2720130A2 (en) 2014-04-16
CN103729121B (zh) 2017-07-28
US20140108934A1 (en) 2014-04-17
KR20140047948A (ko) 2014-04-23

Similar Documents

Publication Publication Date Title
CN107087242A (zh) 分布式无线扬声器系统
CN108156561B (zh) 音频信号的处理方法、装置及终端
CN108141696A (zh) 用于空间音频调节的系统和方法
US10051368B2 (en) Mobile apparatus and control method thereof
US20160088417A1 (en) Head mounted display and method for providing audio content by using same
US20130301392A1 (en) Methods and apparatuses for communication of audio tokens
JP6702451B2 (ja) 車載装置、車載装置の制御方法および制御プログラム
CN103729121A (zh) 图像显示设备及其操作方法
CN104021148B (zh) 调节音效的方法和装置
CN106921907A (zh) 对声音进行整形的回放设备及其方法
CN104205038A (zh) 信息处理设备，信息处理方法，信息处理程序和终端设备
CN103188541A (zh) 电子设备和控制电子设备的方法
CN103916692A (zh) 视频播放方法、装置及播放终端
CN110809226A (zh) 一种音频播放方法及电子设备
CN105721904B (zh) 显示装置和控制显示装置的内容输出的方法
CN108269460B (zh) 一种电子屏幕的阅读方法、系统及终端设备
CN104378728B (zh) 立体声音频处理方法和装置
CN108712706A (zh) 发声方法、装置、电子装置及存储介质
CN105407443B (zh) 录音方法及装置
CN103731710A (zh) 一种多媒体系统
US20230421981A1 (en) Reproducing device, reproducing method, information processing device, information processing method, and program
CN107211356A (zh) 电子装置和设置音频设备网络的方法
JP7131550B2 (ja) 情報処理装置および情報処理方法
CN106255004A (zh) 声音调整方法、耳机和音源设备
CN106601252A (zh) 一种语音标识装置和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170728

Termination date: 20211015