CN103493001A - 显示控制设备、显示控制方法以及程序 - Google Patents

显示控制设备、显示控制方法以及程序 Download PDF

Info

Publication number
CN103493001A
CN103493001A CN201280019275.9A CN201280019275A CN103493001A CN 103493001 A CN103493001 A CN 103493001A CN 201280019275 A CN201280019275 A CN 201280019275A CN 103493001 A CN103493001 A CN 103493001A
Authority
CN
China
Prior art keywords
gesture motion
guide
equipment
screen
show
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201280019275.9A
Other languages
English (en)
Inventor
赤坂公一
河村大辅
冈宏充
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN103493001A publication Critical patent/CN103493001A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/93Remote control using other portable devices, e.g. mobile phone, PDA, laptop

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本技术涉及一种能够容易地理解可能输入的手势运动的显示控制设备、显示控制方法以及程序。显示控制单元在显示单元上以第一状态显示手势运动向导。如果用于检测手势运动的检测单元检测到预定手势运动,则显示控制单元将与所检测的手势运动对应的向导变成第二状态,然后在显示单元上显示该向导。所公开的技术能够应用于例如包括显示单元的信息处理终端。

Description

显示控制设备、显示控制方法以及程序
技术领域
本技术涉及显示控制设备、显示控制方法以及程序,更具体地,涉及使可输入的手势运动易于察觉的显示控制设备、显示控制方法以及程序。
背景技术
对装置(诸如电视接收机或者记录/重放装置)进行遥控的遥控器一般具有用于频道数和音级调节的按钮,并且传输对应于所操作按钮的控制信号。同时,在某些情况下,触摸面板放置在遥控器的平坦上表面上,并且用户在触摸面板上做出手势运动。检测该手势运动,并且传输与所检测的手势运动对应的控制信息(例如,参见专利文献1)。
引用列表
专利文献
专利文献1:JP2010-193107A(第[0040]段,图2至图5)。
发明内容
本发明要解决的问题
然而,通过专利文献1中提出的方法,不易确定能够输入哪个手势运动以及是否已正确地识别并处理了所输入的手势运动。
已鉴于那些情况开发了本技术,并且本技术使可输入的手势运动易于察觉。
问题的解决方案
本技术的一个方面的显示控制设备包括:显示控制单元,其使显示单元以第一状态显示用于手势运动的向导;以及检测单元,其检测手势运动,当检测到手势运动时显示控制单元将向导变成第二状态并且使显示单元显示向导,向导对应于所检测的手势运动。
本技术的一个方面的显示控制方法包括以下步骤:使显示单元以第一状态显示用于手势运动的向导;检测手势运动;以及将向导变成第二状态并且使显示单元显示向导,向导对应于所检测的手势运动。
本技术的一个方面的程序是用于使计算机执行包括如下步骤的操作的程序:使显示单元以第一状态显示用于手势运动的向导;检测手势运动;以及将向导变成第二状态并且使显示单元显示向导,向导对应于所检测的手势运动。
在本技术的一个方面,在显示单元上以第一状态显示手势运动向导,并且检测手势运动。向导的与所检测的手势运动对应的部分变成第二状态,然后显示在显示单元上。
要提供的程序可经由传输介质传输或者可以记录在记录介质上。
显示控制设备可以是独立设备,或者可以是一个设备中的内部块。
发明的效果
根据本技术的一个方面,能够使可输入的手势运动易于察觉。
附图说明
图1是示出平板电脑终端的实施例的示例外形的俯视图,平板电脑终端中使用了根据本技术的显示控制设备。
图2是示出平板电脑终端的硬件的示例结构的框图。
图3是用于解释遥控应用操作的流程图。
图4是示出设备列表屏幕的示例屏幕的示图。
图5是用于解释设备登记操作的流程图。
图6是示出设备登记屏幕的示例的示图。
图7是示出设备登记屏幕的示例的示图。
图8是示出设备登记屏幕的示例的示图。
图9是示出设备登记屏幕的示例的示图。
图10是示出电视的手势屏幕的示例的示图。
图11是示出电视的全遥控屏幕的示例的示图。
图12是示出扩音器的手势屏幕的示例的示图。
图13是示出BD播放器的手势屏幕的示例的示图。
图14是用于解释通过手势运动的命令传输操作的示图。
图15是用于解释通过手势运动的命令传输操作的示图。
图16是用于解释与手势运动对应的操作的流程图。
具体实施方式
[平板电脑终端的示例外形]
图1是示出平板电脑终端的实施例的示例外形的俯视图,平板电脑终端中使用了本技术的显示控制设备。
图1中所示的平板电脑终端1是薄板状的信息处理终端,并且具有在近似矩形表面上形成的触摸屏11,所述矩形表面是在放置在桌子等上时的上表面。
在触摸屏11上显示各种图像。用户能够通过使手指接近或接触(触摸)触摸屏11来进行各种(操作)输入。
用于登记用户所使用的设备并且通过IR信号执行设备控制的应用(下文中称为遥控应用)安装在平板电脑终端1中。登记为控制目标的设备的示例包括电视接收机、DVD(数字化通用光盘)播放器、诸如BD(蓝光光盘(注册商标))刻录机等记录/重放装置、STB(机顶盒)以及扩音器。
在触摸屏11上显示,例如,遥控应用的至少一个图标图像21,并且通过用户轻击遥控应用的图标图像21能够启动该遥控应用。
用于接收和输出IR信号的IR(Infrared Radiation,红外线辐射)通信单元12设置在一个侧面中,该侧面用作具有近似矩形形状的平板电脑终端1的长边。由于图1是从上面看到的、平板电脑终端1的俯视图,所以设置IR通信单元12的部分通过虚线来指示。用户设置平板电脑终端1使得IR通信单元12面向要控制的设备。因此,在图1中例示的示例中,要控制的设备位于图的上部并且用户位于图的下侧。
在具有上述结构的平板电脑1中,当启动遥控应用时,检测到用户通过触摸屏11做出的手势运动,将与该手势运动对应的IR信号传输至预定的登记设备,使得设备控制能够被执行。
[平板电脑终端1的示例硬件结构]
图2是示出平板电脑终端1的示例硬件结构的框图。
平板电脑终端1包括CPU(中央处理器)41、ROM(只读存储器)42、RAM(随机存取存储器)43、闪存44以及输入/输出接口45,它们通过总线46彼此连接并且在需要时能够传输/接收数据。
触摸屏11、IR通信单元12、输出单元47、输入单元48、通信单元49以及驱动器50连接至输入/输出接口45。
触摸屏11包括显示单元61A和位置检测单元61B。如上面参考图1所描述的,能够显示各种图像,并且能够通过使手指接近或接触(触摸)屏幕来输入操作。
显示单元61A形成有用于显示图像的设备(显示设备,诸如液晶面板)并且根据经由输入/输出接口45提供的数据来显示图像。
位置检测单元61B是具有接收(感测)来自外部的输入(接近或接触)的功能的设备,诸如,一套静电型触摸面板,例如,发光的光源和接收从物体反射的光的传感器。
当使外部物体(诸如用户的手指或用户操纵的触摸笔等)接近或接触屏幕时,位置检测单元61B(向输入/输出接口45)输出指示接近或接触的位置的位置信号。位置检测单元61B用作检测用户在触摸屏11中执行的手势运动的检测单元。
触摸屏11集成有上述显示单元61A和位置检测单元61B。在显示单元61A上能够显示图像,并且位置检测单元61B能够接收来自外部的关于显示单元61A上所显示的图像的动作输入(诸如接触或接近)。
从位置检测单元61B输出的位置信号经由输入/输出接口45提供至CPU41,并且CPU41基于来自位置检测单元61B的位置信号识别已做出了哪种动作输入并且能够根据该动作输入执行各种操作。
位置检测单元61B能够检测的用户动作的示例包括:通过在预定的时间段内用手指触摸屏幕并且然后从屏幕移开手指所执行的轻击动作,通过在预定的较短时间段内两次用手指触摸屏幕所执行的双击动作,通过用手指在特定的方向上轻拂屏幕所执行的轻拂动作,以及通过在保持手指与屏幕接触的同时在特定的方向上滑动手指所执行的拖动动作。
IR通信单元12在CPU41的控制下传输与设备控制命令对应的IR信号。IR通信单元12还接收从外部输入的IR信号,并且将所接收的IR信号的控制命令经由输入/输出接口45提供至CPU41。
CPU41通过执行ROM42中所存储的程序或者从闪存44等读取并且存储(加载)进RAM43中的程序来执行各种操作。CPU41要执行的一个程序是遥控应用。
ROM42是(例如)EEPROM(电可擦除可编程ROM),并且存储即使在平板电脑终端1断电时仍需保留的数据和程序。
RAM43存储在CPU41的操作过程中所需的程序和数据。
要由CPU41执行的程序(诸如,远程应用)和其他数据(包括程序)记录在闪存44上。
输出单元47是例如扬声器或耳机终端并且输出声音。
输入单元48是例如麦克风、麦克风终端以及语音识别设备并且接收来自外部的音频(数据)输入。
通信单元49是通信接口(诸如,LAN(局域网))并且控制与外部设备的有线和无线通信。
作为光盘(诸如DVD(数字化通用光盘))或半导体存储器(作为USB存储器)的可移动记录介质51能够以可拆卸的方式安装在驱动器50上。
驱动器50驱动其上所安装的可移动记录介质51以将数据记录在可移动记录介质51上或者从可移动记录介质51读取数据。
[遥控应用操作的流程]
现在参考图3中所示的流程图,描述要通过启动遥控应用来执行的遥控应用操作。
首先,在步骤S1中,遥控应用确定是否至少一个设备作为控制目标被登记。在遥控应用甚至一次都没有启动的情况下,不存在作为控制目标登记的设备。
如果在步骤S1中确定出没有设备被登记,则操作移动至步骤S2,并且遥控应用执行设备登记操作以将设备登记为控制目标。此操作将在后面参考图5和其他图进行详细地描述。
另一方面,如果在步骤S1中确定出至少一个设备作为控制目标被登记,则操作进行至步骤S3,并且遥控应用在显示单元61A上显示示出所登记的控制目标设备的列表的设备列表屏幕。
图4示出了在显示单元61A上显示的设备列表屏幕的示例。
在设备列表屏幕上,针对各个登记的控制目标设备,电源按钮81、设备图像图标82以及设备名称83与作为应用的名称的标题“遥控应用”一起被显示。
在图4中所示的示例中,扩音器、电视接收机(下文中简称为电视)、BD播放器以及STB作为控制目标设备被登记。在图4中,仅在最左侧的扩音器的电源按钮81、设备图像图标82以及设备名称83通过附图标记来标注,而没有示出其他设备的附图标记。
例如,当用户希望操作电视时,应触摸电视的设备图像图标82。为了接通或断开至电视的电源,用户应触摸电视的电源按钮81。即,当要接通或断开至对应的登记设备的电源时操作(触摸)各个电源按钮81。当要控制对应的登记设备时操作各个设备图像按钮82。
设备列表屏幕能够在屏幕上显示预定数量的设备(在图4中所示的示例中为四个设备)的电源按钮81至设备名称83。如果所登记设备的数量超出能够在一个屏幕上显示的设备数量,则显示翻页图标84,使得未显示的设备的电源按钮81至设备名称83能够通过触摸翻页图标84或者在屏幕上执行向右或向左的拖动动作来进行显示。
设备列表屏幕还显示操作为登记新设备的设备添加按钮85以及菜单按钮86。步骤S2的设备登记操作能够通过用户操作(选择)设备添加按钮85来执行,之后能够添加设备。通过操作菜单按钮86,例如,能够重排所登记的设备,或者能够结束遥控应用。
在通过执行图3中所示的步骤S3的操作,将图4中所示的设备列表屏幕显示在显示单元61A上之后,在步骤S4中的遥控应用执行用户动作响应操作,该操作是对应于在设备列表屏幕中执行的用户动作的操作。
例如,在用户动作响应操作中,能够控制所登记的设备,能够登记或删除控制目标设备,能够重排所登记的设备,或者能够改变所登记的信息。
在删除所登记的设备的操作中,长按作为要从图4中所示的设备列表屏幕删除的目标的设备图像图标82,使诸如[删除]和[编辑设备]等项目出现,并且用户能够通过选择项目[删除]来删除所登记的设备。另外,通过选择项目[编辑设备],用户能够编辑(改变)所登记的设备的内容。删除或改变所登记的设备的方法不限于上面的方法,并且可通过菜单按钮86等来删除或编辑所登记的设备。
在执行了步骤S4的用户动作响应操作之后,选择菜单按钮86,最后从显示项目中选择[结束遥控应用]。则图3中所示的操作结束。
[设备登记操作的流程]
图5是如图3中所示的步骤S2所执行的设备登记操作的流程图。如上所述,当用户操作(选择)了设备列表屏幕中的设备添加按钮85时,也执行此操作。
首先,在步骤S11,遥控应用确定要添加的设备是否登记在闪存44中所存储的数据库(DB)中。
闪存44存储数据库,该数据库中,预示要登记的设备的制造商所授权的遥控器的操作按钮与当操作该操作按钮时要传输的IR信号(遥控代码)相关联。因此,用户能够容易地登记存储于数据库中的设备。
基于的遥控应用所接收的用户动作,即在显示单元61A上显示图6中所示的第一设备登记屏幕,来进行检查,以确定要登记的设备是否是数据库中现存的设备。
在图6中所示的第一设备登记屏幕中,通过按下单选按钮来选择(触摸)下列登记方法中的一种:用于通过指明设备的类别、制造商等来登记源自数据库的设备的“简单设备登记”;以及用于登记数据库中不存在的设备的“通过遥控指导”。
当用户选择了图6中所示的第一设备登记屏幕中的“简单设备登记”时,在步骤S11中的遥控应用确定要登记的设备是数据中现存的设备。另一方面,当用户选择了在第一设备登记屏幕中的“通过遥控指导”时,在步骤S11中的遥控应用确定在数据库中不存在要登记的设备。
如果在步骤S11中确定出要登记的设备是数据库中不存在的设备,则操作进行至步骤S12,并且执行无需数据库的设备登记操作。
在无需数据库的设备登记操作中,由登记目标的制造商所授权的遥控器放置在面向平板电脑终端1的IR通信单元12的位置。在指明用户期望在遥控应用的屏幕中登记的操作按钮之后,用户按下放置在面向位置中的制造商授权的遥控器的期望操作按钮。IR通信单元12接收从制造商授权的遥控器传输的IR信号,并且遥控应用存储(获知)通过IR通信单元12接收的IR信号,作为所指明的操作按钮的IR信号。关于用户希望登记的操作按钮重复地执行上述操作。
另一方面,如果在步骤S11确定出要登记的设备是数据库中现存的设备时,则操作移动至步骤S13,并且遥控应用提示用户选择设备的类别和制造商。
图7示出了在步骤S13的操作中由遥控应用在显示单元61A上显示的第二设备登记屏幕的示例。
在第二设备登记屏幕中,设置了用于指示要登记的设备的类别的下拉菜单91和用于指示制造商的下拉菜单92。从下拉菜单91和92中所显示的项目中指明期望设备的类别和制造商。能够指明的设备类别的示例包括电视(TV)、扩音器、DVD播放器、BD播放器以及BD刻录机。
在图5的步骤S13之后,在步骤S14中的遥控应用确定是否存在多于一个的遥控器类型。在某些情况下,关于所指明的制造商和设备类别,存在多于一个的遥控器类型。在存在多于一个的遥控器类型的情况下,由于要传输的IR信号因遥控器类型而不同,所以必须指定遥控器类型。
如果在步骤S14中确定出存在多于一个的遥控器类型,则操作进行至步骤S15,并且遥控器应用显示操作测试屏幕,并且针对可能的遥控器类型顺序地执行操作测试。在操作测试屏幕中,提示用户操作预定的操作按钮并且输入指示操作在控制目标设备中是否被执行的结果。以这种方式,进行检测,以确定哪种遥控器类型对应于授权的遥控器。
如果在步骤S14中确定出仅存在一种遥控器类型,则跳过步骤S15的操作并且进行至步骤S16。在步骤S12或步骤S15的操作之后也执行步骤S16的操作。
在步骤S16,遥控应用提示用户选择手势运动类型。
图8示出了在步骤S16中通过遥控器应用在显示单元61A上显示的第三设备登记屏幕的示例。第三设备登记屏幕是用于提示用户选择手势运动类型的屏幕。
第三设备登记屏幕显示用于选择手势运动类型的下拉菜单101。根据从下拉菜单101选择的手势运动类型,还在下拉菜单101下面显示手势运动向导图像102。
根据设备的类别准备了能够从下拉菜单101选择的多于一种的手势运动。在此实施例中,存在三种准备的类型:类型1,类型2以及类型3。类型1是能够用手势运动仅控制音量的类型,并且类型1的通常控制目标设备是扩音器。类型2是能够用手势运动控制音量和频道的类型,并且类型2的通常控制目标设备是电视。类型3是能够用手势运动控制音量和运行系统(诸如,重放、快进以及快退)的类型,并且类型3的通常控制目标是记录/重放设备(诸如,BD播放器或BD刻录机)。
在图8中所示的示例屏幕中,从下拉菜单101选择类型2的手势运动并且手势运动向导图像102显示2型向导。
在用户通过步骤S16的操作选择了手势运动类型之后,在步骤S17中的遥控应用在显示单元61A上显示图9中所示的第四设备登记屏幕,从而确认所登记的内容。当操作图9中所示的第四设备登记屏幕中的登记按钮111时,遥控应用以所设定内容来登记设备并且结束操作。
图9中所示的第四设备登记屏幕显示已在上述的步骤S11至步骤S16的操作中所设定的内容。
与所指明的设备的类别对应的默认名称设定在“名称”栏中。在此栏中设定的名称显示为设备列表屏幕中的设备名称83。遥控操作测试按钮112是当对登记的内容进行操作测试时要操作的按钮。
与所指明的设备的类别对应的默认图标设定在图标显示部分113。在这个部分中设定的图标显示为设备列表屏幕中的设备图像图标82。当改变默认图标时,触摸图标改变按钮114。当触摸了图标改变按钮114时,显示预先准备的图标,并且用户能够通过从所显示的图标中选择所期望的图标来将图标变成所期望的图标。
以上述方式,在遥控应用中登记控制目标设备。每个所登记的设备的设定内容存储进闪存44中。
[遥控应用中的执行设备控制的方法]
接下来,描述在IR信号被传输至所登记的设备并且执行了预定的控制的情况下在遥控应用中要实现的操作方法。
例如,在图4中所示的设备列表屏幕中,如果用户触摸电视的设备图像图标82,则选择电视作为控制目标设备。一旦确定了控制目标设备,遥控应用在显示单元61A上显示控制目标设备的全遥控屏幕或手势屏幕。
图10示出了在控制目标设备是电视的情况下的手势屏幕的示例,图11示出了在控制目标设备是电视的情况下的全遥控屏幕的示例。
手势屏幕和全遥控屏幕都能关于各个控制目标设备来选择性地显示。手势屏幕是以下屏幕:其中能够以简单的手势运动执行取决于设备类别的常用操作(设备控制),而全遥控屏幕是以下屏幕:其中设备的所有操作按钮被显示并且允许进行操作。
可预先确定首先优先显示手势屏幕和全遥控屏幕中的哪一个,并且,在此实施例中,当用户触摸设备图像图标82时显示手势屏幕。
图10中所示的手势屏幕和图11中所示的全遥控屏幕都显示电视的电源按钮81和设备名称83、设备切换按钮121A和121B、设备列表按钮122、手势屏幕切换按钮123以及全遥控屏幕切换按钮124。
当选择向右设备切换按钮121A时,控制目标切换至在图4中所示的设备列表屏幕中的电视机右边的BD播放器,并且显示将在后面描述的在图13中所示的BD播放器的手势屏幕。当选择向左设备切换按钮121B时,控制目标切换至在图4中所示的设备列表屏幕中的电视机左边的扩音器,并且显示将在后面描述的在图12中所示的扩音器的手势屏幕。
操作设备列表按钮122以返回图4中所示的设备列表屏幕。操作手势屏幕切换按钮123以将显示切换至手势屏幕,操作全遥控屏幕切换按钮124以将显示切换至全遥控屏幕。在图10中所示的手势屏幕中,全遥控屏幕切换按钮124作为阴影部分示出。在图11中所示的全遥控屏幕中,手势屏幕切换按钮123作为阴影部分示出。
图10中所示的手势屏幕与图11中所示的全遥控屏幕彼此不同之处在于,在手势屏幕中显示了手势运动向导131,而在全遥控屏幕中显示了操作键屏幕141。
图10中所示的手势运动向导131是在图8中所示的第三设备登记屏幕中的下拉菜单101中设定的2型向导。
2型向导131示意性地示出了将用于增加音量的命令[Vol+]分配给向上滑动动作,将用于减小音量的命令[Vol-]分配给向下滑动动作,将用于在加的方向上切换频道的命令[Ch+]分配给向右滑动动作以及将用于在减的方向上切换频道的命令[Ch-]分配给向左滑动动作。
这里,滑动动作可以是轻拂动作或拖动动作,并且遥控应用响应于轻拂动作和拖动操作输出不同的命令(IR信号)。当感测到用户手指的接触时间短于特定时间段(例如,0.7秒)的滑动动作时,遥控应用确定出已执行了轻拂动作。当感测到用户手指的接触时间等于或大于特定时间段(例如,0.7秒)的滑动动作时,遥控应用确定出已执行了拖动动作。
当确定出已执行了轻拂动作时,遥控应用使所分配的命令[Vol+]、[Vol-]、[Ch+]或[Ch-]传输一次。另一方面,当确定出已执行了拖动动作时,遥控应用持续地传输所分配的命令[Vol+]、[Vol-]、[Ch+]或[Ch-],直到感测到用户的手指从触摸屏11移开。
遥控应用使输出单元47在一次传输和连续传输之间输出不同的操作音(旋律),并且通知用户命令传输。在一次传输的情况下,当命令传输时输出操作音。在连续传输的情况下,当连续传输开始时输出操作音。
图11中所示的全遥控屏幕中的操作键屏幕141包括与通常设置在遥控器上的操作按钮相同的操作键。根据每个所登记的设备,遥控应用不显示未分配有IR信号的操作键或者以灰色显示那些操作键,使得能够进行检查以确定未分配有IR信号的操作键。在一个屏幕中存在太多要显示的操作键类型的情况下,能够使未显示的操作键通过翻页按钮142来显现。
当在图10中所示的手势屏幕中用户选择了向左设备切换按钮121B时,控制目标切换至图4中所示的设备列表屏幕中的电视左边的扩音器,并且显示图12中所示的扩音器的手势屏幕。
在图12中所示的扩音器的手势屏幕向导131是1型向导。
1型向导131示意性地示出了将用于增加音量的命令[Vol+]分配给向上滑动动作,将用于减小音量的命令[Vol-]分配给向下滑动动作。不存在分配给向右滑动动作和向左滑动动作的命令。在轻拂动作和拖动动作(一次传输和连续传输)之间的命令输出的差异以及在一次传输与连续传输之间的操作音的差异与上述的类型2中的那些差异相同,因此,此处不重复对它们的解释。
当在图10中所示的手势屏幕中用户选择了向右设备切换按钮121A时,控制目标切换至在图4中所示的设备列表屏幕中的电视右边的BD播放器,并且显示图13中所示的BD播放器的手势屏幕。
图13中所示的BD播放器的手势屏幕向导131是3型向导。
3型向导131示意性地示出了将用于增加音量的命令[Vol+]分配给向上滑动动作,将用于减小音量的命令[Vol-]分配给向下滑动动作。命令[Vol+]和[Vol-]与上述的类型2的那些命令相同,因此,此处不重复对它们的描述。
3型向导131还示意性地示出了将用于移动至下一标题/章/曲的开始的命令[下一个]分配给向右轻拂动作,以及将用于快进的命令[FF]分配给向右拖动动作。
3型向导131又示意性地示出了将用于返回至前一标题/章/曲的开始的命令[上一个]分配给向左轻拂操作,以及将用于快退的命令[FR]分配给向左拖动动作。
执行向右或向左轻拂动作以将命令[下一个]或[上一个]传输一次,执行向右或向左拖动动作以持续地传输命令[FF]或[FR]。在一次传输与连续传输之间的操作音差异与上述的类型2中的差异相同。
在类型3中,此外,将用于播放的命令[播放]分配给轻击动作,并且将用于暂停的命令[暂停]分配给双击动作。
[手势运动的示例]
接下来,描述当在2型向导131的情况下作出预定的手势运动时要执行的示例操作。
图14示出了在用户执行了作为手势运动的向右轻拂动作的情况下在触摸屏11上的示例显示。
遥控应用检测到由用户作出的手势运动(轻拂动作)并且使显示单元61A显示手指的检测位置的轨迹151。应注意,用户无需精确地在向导131上作出手势运动,遥控应用能够检测在触摸屏11上的任意位置作出的手势运动。例如,能够检测到在字符[Vol+]下面的区域中执行的向右轻拂动作。
然后遥控应用根据所检测的手势运动以闪烁的方式在手势运动向导131中显示要传输的命令部分(Ch+),使得用户能够看到要向设备传输哪个命令。
遥控应用还使IR通信单元12传输与所检测的手势运动对应的命令(IR信号),并且使指示正在传输命令的通信灯152显示预定时间段。通信灯152的显示(点亮)仅用于使用户注意该命令传输。因此,实际的命令传输时长不需要等于通信灯152的显示时长。
在遥控应用检测到拖动动作的情况下,在手指的检测位置的轨迹被显示之后,通过在手指与屏幕的持续接触期间围绕手指的位置中心示出波状图案来显示正在检测手指的指示。
现在参考图15,描述在作出了未分配有命令的手势运动的情况下要示出的示例显示。
图15示出了在加的方向上切换频道的命令没有分配给遥控应用的情况下当用户执行向右轻拂动作时要示出的示例显示。
当用户作出了未分配有命令的手势运动时,遥控应用检测用户作出的手势运动(轻拂动作),并且在面包状弹出窗口(toast pop-up window)中显示消息161,该消息指示没有命令被分配给所检测的手势运动。面包状弹出窗口显示预定的时间段,然后关闭。
遥控应用还以闪烁的方式在手势运动向导131中显示所识别的命令的部分(Ch+),使得用户能够看到已识别了哪个命令,即使该命令没有分配给该动作。由于该命令未传输,所以图13中的通信灯152未点亮。
[手势运动响应操作的流程]
图16是要通过遥控应用执行的、作为图3的用户动作响应操作的一部分的手势运动响应操作的流程图。
首先,在步骤S31中,遥控应用确定是否已检测到手势运动,并且重复步骤S31直到确定出已检测到手势运动。
如果在步骤S31中确定已检测到手势运动,则操作进行至步骤S32,并且遥控应用使显示单元61A显示所检测的手势运动的轨迹151(手指的位置)。
在步骤S33中,遥控应用确定命令是否被分配给所检测的手势运动。
如果在步骤S33中确定出命令被分配给所检测的手势运动,则操作进行至步骤S34,并且遥控应用以闪烁的方式在手势运动向导131中显示与要传输的命令对应的部分(图13中所示的示例中的Ch+)。
在步骤S35中,遥控应用将分配给所检测的手势运动的命令(IR信号)从IR通信单元12传输至控制目标设备。
在步骤S36中,遥控应用使指示正传输命令的通信灯152显示预定的时间段。
在实际中,步骤S34至步骤S36同时执行。在步骤S36之后,操作返回步骤S31。
另一方面,如果在步骤S33确定出没有命令被分配给所检测的手势运动,则操作进行至步骤S37,并且仅执行与上述的步骤S34相同的处理。具体地,遥控应用以闪烁的方式在手势运动向导131中显示与要传输的命令对应的部分(图13中所示的示例中为Ch+)。然后,操作返回至步骤S31。
如上所述,遥控应用使显示单元61A以第一状态显示手势运动向导131。当检测到预定手势运动时,遥控应用在与所检测的手势运动对应的向导131中将与要传输的命令对应的部分变成第二状态。在上述的示例中,第一状态是点亮状态,第二状态是闪烁状态。然而,第一状态和第二状态不限于上面的状态。例如,第一状态可以是低亮(或暗)手势运动向导131,而第二状态可以是高亮(或亮)手势运动向导131。手势运动向导131的第二状态可以是与第一状态相反的显示。
在本说明书中,根据所描述的顺序以时间顺序执行流程图中所示的步骤。然而,那些步骤可以不按时间顺序执行,而可以并行地执行或者可在需要时(诸如,当存在对这些步骤的调用时)执行。
应当注意的是,本技术的实施例不限于上述的实施例,在不背离本技术的范围的情况下可对这些实施例进行各种修改。
例如,尽管在上述实施例中显示设备列表屏幕等的显示单元61A和检测手势运动的位置检测单元61B彼此叠加以一体地形成触摸屏11,但是显示单元61A和位置检测单元61B可以形成为彼此独立的结构。例如,作为位置检测单元61B的触摸板和显示单元61A可设置在同一平面中的不同区域中,或者可在彼此独立的外罩中形成。
应当注意,本技术还能够是下列形式。
(1)一种显示控制设备,包括:
显示控制单元,所述显示控制单元使显示单元以第一状态显示用于手势运动的向导;以及
检测单元,所述检测单元检测所述手势运动,
当检测到所述手势运动时所述显示控制单元将所述向导变成第二状态并且使所述显示单元显示所述向导,所述向导对应于所检测的手势运动。
(2)根据(1)的显示控制设备,其中,
所述手势运动对应于用于控制预定设备的命令,以及
所述显示控制设备进一步包括,
通信单元,所述通信单元将对应于所检测的手势运动的命令传输至所述设备。
(3)根据(2)的显示控制设备,其中,
根据设备的类别存在多个用于所述手势运动的向导,
所述显示控制设备进一步包括,
选择单元,所述选择单元选择设备的类别和用于所述手势运动的向导,并且
所述显示控制单元使所述显示单元以第一状态显示由所述选择单元选择、用于所述手势运动的向导。
(4)根据(1)至(3)中任意一项的显示控制设备,进一步包括所述显示单元。
(5)一种显示控制方法,包括如下步骤:
使显示单元以第一状态显示用于手势运动的向导;
检测所述手势运动;以及
将所述向导变成第二状态并且使所述显示单元显示所述向导,所述向导对应于所检测的手势运动。
(6)一种用于使计算机执行包括如下步骤的操作的程序,所述步骤包括:
使显示单元以第一状态显示用于手势运动的向导;
检测所述手势运动;以及
将所述向导变成第二状态并且使所述显示单元显示所述向导,所述向导对应于所检测的手势运动。
附图标记列表
1平板电脑终端,11触摸屏,12IR通信单元,41CPU,61A显示单元,61B位置检测单元。

Claims (6)

1.一种显示控制设备,包括:
显示控制单元,所述显示控制单元配置成使显示单元以第一状态显示用于手势运动的向导;以及
检测单元,所述检测单元配置成检测所述手势运动,
当检测到所述手势运动时,所述显示控制单元将所述向导变成第二状态并且使所述显示单元显示所述向导,所述向导对应于所检测的手势运动。
2.根据权利要求1所述的显示控制设备,其中,
所述手势运动对应于用于控制预定的设备的命令,以及
所述显示控制设备进一步包括,
通信单元,所述通信单元配置成将对应于所检测的手势运动的命令传输至所述设备。
3.根据权利要求2所述的显示控制设备,其中,
根据所述设备的类别存在多个用于所述手势运动的向导,
所述显示控制设备进一步包括,
选择单元,所述选择单元配置成选择所述设备的类别和用于所述手势运动的向导,并且
所述显示控制单元使所述显示单元以第一状态显示由所述选择单元选择的、用于所述手势运动的向导。
4.根据权利要求1所述的显示控制设备,进一步包括所述显示单元。
5.一种显示控制方法,包括如下步骤:
使显示单元以第一状态显示用于手势运动的向导;
检测出所述手势运动;以及
将所述向导变成第二状态并且使所述显示单元显示所述向导,所述向导对应于所检测的手势运动。
6.一种用于使计算机执行包括如下步骤的操作的程序,所述步骤包括:
使显示单元以第一状态显示用于手势运动的向导;
检测出所述手势运动;以及
将所述向导变成第二状态并且使所述显示单元显示所述向导,所述向导对应于所检测的手势运动。
CN201280019275.9A 2011-04-25 2012-04-12 显示控制设备、显示控制方法以及程序 Pending CN103493001A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011097443A JP2012231249A (ja) 2011-04-25 2011-04-25 表示制御装置、表示制御方法、およびプログラム
JP2011-097443 2011-04-25
PCT/JP2012/059960 WO2012147520A1 (ja) 2011-04-25 2012-04-12 表示制御装置、表示制御方法、およびプログラム

Publications (1)

Publication Number Publication Date
CN103493001A true CN103493001A (zh) 2014-01-01

Family

ID=47072042

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280019275.9A Pending CN103493001A (zh) 2011-04-25 2012-04-12 显示控制设备、显示控制方法以及程序

Country Status (5)

Country Link
US (1) US9524095B2 (zh)
EP (1) EP2703972A1 (zh)
JP (1) JP2012231249A (zh)
CN (1) CN103493001A (zh)
WO (1) WO2012147520A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104731470A (zh) * 2013-12-20 2015-06-24 达索系统公司 用于使用屏幕上的至少一个指向元件来配置工具的计算机实现的方法
CN104778000A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 方向标记显示方法及方向标记显示系统
CN110851036A (zh) * 2019-11-18 2020-02-28 珠海格力电器股份有限公司 电器设备的参数调节方法、装置及存储介质
CN111124211A (zh) * 2018-10-31 2020-05-08 杭州海康威视系统技术有限公司 一种数据显示方法、装置及电子设备

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104350335B (zh) * 2013-02-20 2017-10-20 松下电器(美国)知识产权公司 便携信息终端、便携信息终端的控制方法以及记录介质
EP2961185B1 (en) * 2013-02-20 2020-03-04 Panasonic Intellectual Property Corporation of America Control method for information apparatus and program
CN104247445B (zh) 2013-02-20 2018-10-12 松下电器(美国)知识产权公司 便携信息终端的控制方法
JP5529358B1 (ja) 2013-02-20 2014-06-25 パナソニック株式会社 携帯情報端末の制御方法及びプログラム
MY181880A (en) 2013-02-20 2021-01-12 Panasonic Ip Corp America Method for controlling information apparatus and program
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
KR20170109077A (ko) * 2013-06-25 2017-09-27 후지쯔 가부시끼가이샤 정보 처리 장치 및 기록 매체
JPWO2015008409A1 (ja) * 2013-07-19 2017-03-02 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 情報端末の制御方法及びプログラム
JP6218839B2 (ja) * 2013-08-29 2017-10-25 三菱電機株式会社 電気機器、空気調和機、外部制御器、携帯端末及び空調システム
WO2015045409A1 (ja) * 2013-09-26 2015-04-02 京セラ株式会社 機器制御装置、機器制御方法および制御システム
AU2015279544B2 (en) 2014-06-27 2018-03-15 Apple Inc. Electronic device with rotatable input mechanism for navigating calendar application
US10135905B2 (en) * 2014-07-21 2018-11-20 Apple Inc. Remote user interface
KR20230042141A (ko) 2014-08-02 2023-03-27 애플 인크. 상황 특정 사용자 인터페이스
EP4050467A1 (en) 2014-09-02 2022-08-31 Apple Inc. Phone user interface
TWI600322B (zh) 2014-09-02 2017-09-21 蘋果公司 用於操作具有整合式相機之電子器件之方法及相關電子器件,以及非暫時性電腦可讀取儲存媒體
US9547419B2 (en) 2014-09-02 2017-01-17 Apple Inc. Reduced size configuration interface
JP6043334B2 (ja) * 2014-12-22 2016-12-14 京セラドキュメントソリューションズ株式会社 表示装置、画像形成装置、及び、表示方法
KR102310870B1 (ko) * 2015-01-12 2021-10-12 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US10254911B2 (en) 2015-03-08 2019-04-09 Apple Inc. Device configuration user interface
CN104866110A (zh) * 2015-06-10 2015-08-26 深圳市腾讯计算机系统有限公司 一种手势控制方法,移动终端及系统
CN105022398B (zh) * 2015-07-15 2018-07-06 珠海磐磊智能科技有限公司 触摸屏控制器及行驶装置的控制方法
AU2017100667A4 (en) 2016-06-11 2017-07-06 Apple Inc. Activity and workout updates
US11275446B2 (en) * 2016-07-07 2022-03-15 Capital One Services, Llc Gesture-based user interface
JP2019211826A (ja) * 2018-05-31 2019-12-12 キヤノン株式会社 制御装置、制御システム、制御方法およびプログラム
US10887193B2 (en) 2018-06-03 2021-01-05 Apple Inc. User interfaces for updating network connection settings of external devices
JP7292024B2 (ja) * 2018-10-22 2023-06-16 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、コンピュータプログラム
US11340778B2 (en) 2019-05-06 2022-05-24 Apple Inc. Restricted operation of an electronic device
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090153289A1 (en) * 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
US20090187824A1 (en) * 2008-01-21 2009-07-23 Microsoft Corporation Self-revelation aids for interfaces
CN101910981A (zh) * 2007-12-28 2010-12-08 松下电器产业株式会社 电子设备的输入设备、输入操作处理方法以及输入控制程序

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07168855A (ja) 1993-09-21 1995-07-04 Toshiba Corp 情報記録再生装置
JP2000285080A (ja) * 1999-03-30 2000-10-13 Pfu Ltd 携帯情報端末及びそのプログラム記憶媒体
KR20040111658A (ko) * 2002-05-20 2004-12-31 소니 가부시끼 가이샤 정보 처리 시스템, 정보 처리 장치 및 정보 처리 방법
JP2005317041A (ja) 2003-02-14 2005-11-10 Sony Corp 情報処理装置、情報処理方法、及びプログラム
JP2005223931A (ja) * 2005-02-14 2005-08-18 Sharp Corp ユーザ操作支援装置およびユーザ操作支援方法
JP2007208547A (ja) * 2006-01-31 2007-08-16 Ict Solutions:Kk インターネットテレビジョン装置、及びその簡単操作を実現するリモコン装置
JP2010193107A (ja) 2009-02-17 2010-09-02 Smk Corp リモートコントロール送信機
US8622742B2 (en) * 2009-11-16 2014-01-07 Microsoft Corporation Teaching gestures with offset contact silhouettes
US9747270B2 (en) * 2011-01-07 2017-08-29 Microsoft Technology Licensing, Llc Natural input for spreadsheet actions

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090153289A1 (en) * 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
CN101910981A (zh) * 2007-12-28 2010-12-08 松下电器产业株式会社 电子设备的输入设备、输入操作处理方法以及输入控制程序
US20090187824A1 (en) * 2008-01-21 2009-07-23 Microsoft Corporation Self-revelation aids for interfaces

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104731470A (zh) * 2013-12-20 2015-06-24 达索系统公司 用于使用屏幕上的至少一个指向元件来配置工具的计算机实现的方法
CN104731470B (zh) * 2013-12-20 2021-03-30 达索系统公司 用于使用指向元件来配置工具的方法、装置和介质
CN104778000A (zh) * 2015-03-20 2015-07-15 广东欧珀移动通信有限公司 方向标记显示方法及方向标记显示系统
CN111124211A (zh) * 2018-10-31 2020-05-08 杭州海康威视系统技术有限公司 一种数据显示方法、装置及电子设备
CN110851036A (zh) * 2019-11-18 2020-02-28 珠海格力电器股份有限公司 电器设备的参数调节方法、装置及存储介质

Also Published As

Publication number Publication date
EP2703972A1 (en) 2014-03-05
JP2012231249A (ja) 2012-11-22
WO2012147520A1 (ja) 2012-11-01
US9524095B2 (en) 2016-12-20
US20140040831A1 (en) 2014-02-06

Similar Documents

Publication Publication Date Title
CN103493001A (zh) 显示控制设备、显示控制方法以及程序
US10845986B2 (en) Remote control device and method of controlling other devices using the same
US9513802B2 (en) Methods for displaying a user interface on a remote control device and a remote control device applying the same
US20230393703A1 (en) Methods, systems, and media for navigating a user interface using directional controls
CN1941982B (zh) 具有多个显示器的移动通信终端及其数据处理方法
CN100489753C (zh) 控制至少一个媒体数据处理设备的装置及其方法
US8850356B2 (en) Information processing system and information processing apparatus
CN1846455B (zh) 控制装置和控制方法
CN108810603A (zh) 多个对象之间排序时的编辑方法及显示终端
EP1481542A1 (en) Adaptive audio-video program recommendation system
CN103294337A (zh) 电子装置及控制方法
EP2045789A2 (en) Remote control apparatus and method thereof
CN102271292A (zh) 控制设备、控制方法和程序
CN101782832A (zh) 显示信息控制设备和方法
US20230161453A1 (en) Methods, systems, and media for presenting related content in a user interface navigated using directional controls
US20160253087A1 (en) Apparatus and method for controlling content by using line interaction
CN103874977A (zh) 用户终端装置和控制该用户终端装置的渲染器的方法
US20100161744A1 (en) System and method for moving digital contents among heterogeneous devices
US20170180777A1 (en) Display apparatus, remote control apparatus, and control method thereof
EP1686808A2 (en) Device and Method for Selecting Contents and Reproducing/Recording Selected Contents
KR20090121069A (ko) 사용자 인터페이스 방법 및 사용자 인터페이스 장치
US20080028105A1 (en) Apparatus Operating Device and Apparatus Operating Method
CN100399254C (zh) 控制器和控制方法
CN102200883A (zh) 移动终端及其图标控制方法
JP2005340869A (ja) 画像処理装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140101