CN104011631B - 电子设备以及控制该电子设备的方法 - Google Patents

电子设备以及控制该电子设备的方法 Download PDF

Info

Publication number
CN104011631B
CN104011631B CN201280064754.2A CN201280064754A CN104011631B CN 104011631 B CN104011631 B CN 104011631B CN 201280064754 A CN201280064754 A CN 201280064754A CN 104011631 B CN104011631 B CN 104011631B
Authority
CN
China
Prior art keywords
gesture
electronic equipment
user
display unit
section
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201280064754.2A
Other languages
English (en)
Other versions
CN104011631A (zh
Inventor
李承桂
崔淳吉
许盛喆
孔龙泽
金贞吉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN104011631A publication Critical patent/CN104011631A/zh
Application granted granted Critical
Publication of CN104011631B publication Critical patent/CN104011631B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454Content or additional data filtering, e.g. blocking advertisements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4753End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for user identification, e.g. by entering a PIN or password

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

公开了一种控制电子设备的方法,所述方法包括:第一步骤,该第一步骤响应于预定输入,显示与至少一个候选授权用户中的每一个相对应的至少一个第一项;第二步骤,该第二步骤显示第二项,所述第二项的显示状态根据手势而改变;第三步骤,该第三步骤根据所述第二项的根据第一手势输入而改变的显示状态,选择所述至少一个第一项中的一个第一项;以及第四步骤,该第四步骤将手势的控制权限切换至与所选择的第一项相对应的候选授权用户。

Description

电子设备以及控制该电子设备的方法
技术领域
本发明涉及电子设备以及控制电子设备的方法,并且更具体地说,涉及基于手势输入进行操作的电子设备以及控制电子设备的方法。
背景技术
正在进行的研究已经深入开展以使用诸如摄像头的设备来分析用户的手势并且采用用户的手势作为用户接口,由此替代或者一起使用已经普遍使用的诸如触摸板或触摸屏的各种用户接口设备。
然而,当分析用户手势并且响应于用户手势进行操作时,多个用户做出了多个手势,需要确定哪个用户手势将要被分析并且用作针对电子设备的输入。
为了解决这个问题,创建了针对手势的概念“控制权限”,并且已经针对用户获得针对手势进入的控制权限的方法和/或从一个用户向另一个用户传递控制权限的方法进行了深入研究。
发明内容
技术问题
本发明的一个目的在于提供一种电子设备以及控制电子设备的方法,其可以容易地将控制权限从一个用户切换至另一个用户。本发明的另一个目的在于提供一种电子设备以及控制电子设备的方法,其可以容易地通知用户已经发生的预定事件,从而他可以执行与该事件有关的操作。
问题的解决方案
根据本发明的第一实施方式,提供了一种控制电子设备的方法,所述方法包括:第一步骤,该第一步骤响应于预定输入,显示与至少一个候选授权用户中的每一个相对应的至少一个第一项;第二步骤,该第二步骤显示第二项,所述第二项的显示状态根据手势而改变;第三步骤,该第三步骤根据所述第二项的根据第一手势输入而改变的显示状态,选择所述至少一个第一项中的一个第一项;以及第四步骤,该第四步骤将手势的控制权限切换至与所选择的第一项相对应的候选授权用户。
所述预定输入可以由所述至少一个候选授权用户输入。
所述第一手势输入可以由当前授权用户输入。所述第一项与所述第二项之间的显示位置关系可以反映所述当前授权用户与所述候选授权用户之间的位置关系。
所述第二项的所述显示状态可以包括该项的位置、大小、指向、颜色、亮度和透明度中的至少一个。
根据本发明的第二实施方式,提供了一种控制电子设备的方法,所述方法包括:第一步骤,其识别事件发生时所述事件的属性;第二步骤,其根据所述事件的属性确定显示所述事件的内容的对象的移动属性;以及第三步骤,其根据所确定的移动属性在移动所述对象的同时显示所述对象。
所述移动属性可以包括所述对象的起始显示点、终止显示点、移动速度和移动轨迹中的至少一个。
所述方法还可以包括第四步骤,其在显示所述对象的同时输入预定第一手势的情况下,执行与所述事件相对应的功能。
所述方法还包括第五步骤,其在显示所述对象的同时输入预定第二手势的情况下,停止显示所述对象。
本发明的有益效果
根据本发明,可以提供以下效果。
第一,在电子设备从用户接受到手势输入以执行必要操作的情况下,向多个用户当中要求控制权限的用户提供控制权限,从而增加用户便利性。
第二,手势的控制权限不是由来自目前不拥有手势的控制权限的用户的单方面请求切换的,是由拥有控制权限的授权用户的特定手势切换的,从而可以使由于当前授权用户的控制权限的丧失引起的任何不便最小化。
第三,手势的控制权限的切换通过电子设备的显示单元显示,因此进一步提供直观和易于使用的用户接口。
第四,通过根据预定的事件属性以不同的方式向用户显示反映已经发生的事件的内容的对象,电子设备可以更加直观地向用户提供事件的内容。
最后,电子设备可以响应于用户的简单手势输入,执行与事件相关联的预定操作。
附图说明
图1是例示根据本发明的实施方式的电子设备的框图。
图2是例示用户向图1所示的电子设备输入手势的示例的视图。
图3是描述控制根据本发明的第一实施方式的电子设备的方法的流程图。
图4是描述根据第一实施方式的候选授权用户做出用于获得控制权限的手势的示例的视图。
图5是描述根据本发明的第一实施方式显示第一项和第二项的视图,该第一项和第二项与授权用户手势相对应。
图6例示显示根据本发明的第一实施方式的第一项和第二项的各种示例。
图7至图10是用于描述根据本发明的第一实施方式依照当前授权用户手势来改变第二项的显示状态的方法的视图。
图11至图15是用于描述根据本发明的第一实施方式显示第二项的显示状态的各种示例的视图。
图16是例示根据本发明的第一实施方式已经将手势的控制权限切换至另一个用户的示例的视图。
图17是例示控制根据本发明的第二实施方式的电子设备的方法的流程图。
图18至图20是例示根据本发明的第二实施方式在移动对象的同时显示该对象的示例的视图。
图21至图23是用于描述根据本发明的第二实施方式执行与事件相对应的功能的示例的视图。
图24例示根据第二实施方式响应于第二手势的输入使对象的显示停止的示例。
具体实施方式
根据结合附图进行的详细描述,本发明的前述目的、特征和优点将变得更加明显。将参照附图更加详细地描述本发明的示例性实施方式。被确定为使本发明的要点不必要地不清楚的、针对与本发明相关联的已知功能或配置的描述被省略。
在下文中,将参照附图更加详细地描述与本发明相关的电子设备。在以下描述中,仅考虑描述的方便,针对移动终端的各个部件给出后缀“模块”和“单元”,而不具有彼此区分的含义或者功能。
图1是例示根据本发明的实施方式的电子设备的框图。
参照图1,电子设备100包括通信单元110、用户输入单元120、输出单元150、存储器160、接口单元170、控制器180和电源190。图1示出的各种部件可以是可共同包括在电子设备中的部件。因此,更多或更少的部件可以被包括在电子设备100中。
通信单元110可以包括使电子设备100与通信单元系统之间或者电子设备100与另一个设备之间的通信能够进行的一个或更多个模块。例如,通信单元110可以包括广播接收单元111、因特网模块113和近场通信模块114。
广播接收单元111通过广播频道从外部广播管理服务器接收广播信号和/或广播相关信息。
广播频道可以包括卫星频道和地面频道。广播管理服务器可以指代生成广播信号和/或广播相关信息并且广播所述信号和/或信息的服务器或者接收预先生成的广播信号和/或广播相关信息并且向终端广播所述信号和/或信息的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号以及TV广播信号或无线电广播信号与数据广播信号的组合。
广播相关信息可以指代与广播频道、广播节目或者广播服务提供商相关的信息。广播相关信息可以通过通信网络提供。
广播相关信息可以以各种信息存在,诸如例如DMB(数字多媒体广播)的EPG(电子节目指南)或者DVB-H(数字视频广播-手持)的ESG(电子服务指南)。
广播接收单元111可以使用各种广播系统接收广播信号。通过广播接收单元111接收到的广播信号和/或广播相关信息可以存储在存储器160中。
因特网模块113可以指代用于访问因特网的模块。因特网模块113可以被设置在电子设备100的内部或外部。
近场通信模块114可以指代用于近场通信的模块。近场通信模块可以包括蓝牙、RFID(射频识别)、IrDA(红外数据协会)、UWB(超宽带)和ZigBee技术。
用户输入单元120被设置用于音频信号或视频信号的用户进入并且可以包括摄像头121和麦克风122。
摄像头121对包括有由图像传感器在视频呼叫模式或图像捕捉模式中获得的静态图像或视频的图像帧进行处理。经处理的图像帧可以由显示单元151显示。摄像头121可以执行2D或3D图像捕捉或者可以被配置作为2D摄像头或3D摄像头的中一个或组合。
由摄像头121处理的图像帧可以存储在存储器160中或者可以通过通信单元110向外部设备发送。根据一实施方式,两个或更多个摄像头121可以被包括在电子设备100中。
麦克风122在呼叫模式、记录包括或语音识别模式中接收外部声音信号并且对接收到的信号进行处理作为电语音数据。麦克风122可以执行各种噪声消除算法以去除在接收外部声音信号时所创建的噪声。用户可以通过麦克风122向电子设备100输入各种语音以驱动电子设备100,并且执行电子设备100的功能。
输出单元150可以包括显示单元151和声音输出单元152。
显示单元151显示电子设备100所处理的信息。例如,显示单元151显示与电子设备100相关联的UI(用户界面)或GUI(图形用户界面)。显示单元151可以是液晶显示器、薄膜晶体管液晶显示器、有机发光二极管显示器、柔性显示器和3D显示器中的至少一种。显示单元151可以以透明型或透光型配置,其可以被称为“透明显示器”,该透明显示器的示例包括透明LCD。显示单元151可以具有透光的后部结构,其中用户可以通过被终端主体中的显示单元151占据的区域来观看位于终端主题的后面的对象。
根据一实施方式,两个或更多个显示单元151可以被包括在电子设备100中。例如,电子设备100可以包括多个显示单元151,其整体地或者单独地排列在电子设备100的表面上或者电子设备100的各自不同的表面上。
当感测触摸(在下文中被称为“触摸传感器”)的显示单元151和传感器分层(这种分层结构在下文中被称为“触摸传感器”)时,可以使用显示单元151作为输入设备以及输出设备。触摸传感器例如可以包括触摸膜、触摸片、触摸板。
触摸传感器可以被配置为将发生在显示单元151的特定区域上的压力或者电容的变化转换成电输入信号。触摸传感器可以被配置为检测在触摸期间被施加的压力以及触摸的位置或面积。
基于针对触摸传感器的触摸,向触摸控制器传递相应信号。触摸控制器处理信号以生成相应数据并且向控制单元180发送所述数据。通过这样做,控制单元180可以识别显示单元151的发生触摸的面积。
声音输出单元152可以输出从通信单元110接收到的或存储在存储器160中的音频数据。声音输出单元152可以输出与电子设备100所执行的功能(例如,呼叫信号接收声音、消息接收声音等)相关联的声音信号。声音输出单元152可以包括接收器、扬声器和蜂鸣器。
存储器160可以存储用于操作控制单元180的程序,并且可以初步存储输入/输出数据(例如,电话簿、消息、静态图像、视频等)。存储器160可以存储与振动相关的数据以及具有各种模式的声音,所述与振动相关的数据以及具有各种模式的声音在触摸屏被触摸时输出。
存储器160可以包括闪存型、硬盘型、多媒体卡微型、卡型存储器(例如,SD或DX存储器)、RAM(随机存取存储器)、SRAM(静态随机存取存储器)、ROM(只读存储器)、EEPROM(电可擦除可编程只读存储器)、PROM(可编程只读存储器)、磁存储器、磁盘和光盘中的至少一种存储介质。电子设备100可以相对于在因特网上执行存储器160的存储功能的网络存储设备进行操作。
接口单元170用作电子设备100与连接到该电子设备100的任何外设备之间的通路。接口单元170从外部设备接收数据或电力并且向电子设备100的每一个部件传递数据或电力,或者使得数据能够从电子设备100向外部设备传递。例如,接口单元170可以包括有线/无线的耳机端口、外部充电器端口、有线/无线数的据端口、存储卡端口、用于连接具有标识模块的设备的端口、音频I/O(输入/输出)端口、视频I/O端口和耳机端口。
控制单元180对电子设备100的整体操作进行控制。例如,控制单元180执行控制和与语音呼叫、数据通知和视频呼叫相关联的处理。控制单元180可以包括用于图像处理的图像处理单元182。下面在有关部分中更加详细地描述图像处理单元182。
电源单元190基于控制单元180的控制接收内部或外部电力,并且向每个部件提供电力以进行该部件的操作。
在本文中描述的实施方式可以以软件或硬件或其组合来实现,或者以计算机或者与计算机类似的设备可读的记录介质来实现。当以硬件实现时,所述实施方式可以使用ASIC(专用集成电路)、DSP(数字信号处理器)、DSPD(数字信号处理设备)、PLD(可编程逻辑器件)、FPGA(现场可编程门阵列)、处理器、控制器、微控制器、微处理器用于执行这些功能的电子单元。根据一实施方式,所述实施方式可以由控制单元180实现。
当以软件实现时,诸如过程或功能的一些实施方式可能需要用于驱动至少一个功能或操作的单独软件模块。软件代码可以由以适当的编程语言编写的软件应用来实现。软件代码可以存储在存储器160中并且可以由控制单元180执行。
图2是例示用户向图1所示的电子设备输入手势的示例的视图。
参照图2,电子设备100可以捕捉用户U的手势并且可以执行与该手势相对应的适当功能。
电子设备100可以是具有显示单元151的任何电子设备,该显示单元151可以显示图像。电子设备100可以是诸如图2所示的TV的固定终端,其体积很大并且因此被放置在固定位置中,或者可以是诸如蜂窝电话的移动终端。电子设备100可以包括摄像头121,摄像头121可以捕捉用户U的手势。
摄像头121可以是在电子设备100的前向上执行图像捕捉的光学电子设备。摄像头121可以是用户2D图像捕捉的2D摄像头和/或用于3D图像捕捉的3D摄像头。尽管出于容易描述的目的在图2将一个摄像头121设置在电子装置100的顶部中央部分,但是必要时摄像头121的数量、位置和类型可以变化。
当发现用户U时,控制单元180可以跟踪具有与控制权限的用户U。可以基于摄像头121所捕捉的图像来执行控制权限的问题和跟踪。例如,控制单元180可以分析捕捉的图像并且连续地确定是否存在特定用户U、特定用户U是否执行获得控制权限所需的手势以及特定用户U是否移动。
控制单元180可以基于捕捉的图像来分析具有控制权限的用户的手势。例如,当用户U做出了预定手势但是不拥有控制权限时,没有功能可以被进行。然而,当用户U具有控制权限时,可以进行与预定手势相对应的预定功能。
用户U的手势可以包括使用他/她的身体的各种操作。例如,手势可以包括用户坐下、站立、奔跑或者甚至移动的操作。此外,手势可以包括使用用户的头部、足部或者手H的操作。出于便于例示的目的,下面描述使用用户U的手H的手势作为示例。然而,本发明的实施方式不限于此。
在下文中将更加详细地描述本发明的第一实施方式。出于容易描述的目的,通过结合图1描述的电子设备100来实现第一实施方式。然而,根据第一实施方式的控制电子设备的方法不限于由电子设备100实现。
控制根据第一实施方式的电子设备的方法致力于基于命令或通过用户的手势到电子设备的进入,从针手势的当前授权用户(其在目前具有手势的控制权限)到多个用户当中手势的候选授权用户的手势的控制权限的有效切换。
图3是描述控制根据本发明的第一实施方式的电子设备的方法的流程图。参照图3,控制方法包括以下步骤中的至少一个或更多个:获得多个用户的图像的步骤(S100);获得用于获得控制权限的至少一个特定手势的步骤(S110);显示与候选授权用户相对应的第一项的步骤,该候选授权用户与获得手势的控制权限相对应(S120);获得当前授权用户的手势的步骤(S130);根据当前授权用户的手势在改变该第二项的显示状态的同时显示第二项的步骤(S140);根据第二项的改变的显示状态选择至少一个第一项中的一个第一项的步骤(S150);以及将手势的控制权限切换至与所选择的第一项相对应的候选授权用户(S160)。
在下文中更加详细地描述每个步骤。
电子设备100可以通过摄像头121获得针对多个用户的图像(S100)。步骤S100可以被设置为分析可由多个用户做出的各种手势。
在执行步骤S100的同时,电子装置100可以获得用于获得控制权限的至少一个特定手势(S110)。这参照图4描述。
图4是描述根据第一实施方式的候选授权用户做出用于获得控制权限的手势的示例的视图。参照图4,第一用户U1可以是手势的当前授权用户,其目前具有手势的控制权限。此时,如图4所示,不具有手势的控制权限的第二用户U2和第三用户U3可以做出预定手势G1和G2。特定手势G1和G2可以先前确定以获得手势。
如图4所示,电子设备100可以通过分析在步骤S100中获得的图像,监视第二用户U2和第三用户U3是否做出了预定手势(S100)。
在步骤S110中,电子设备100可以将第二用户U2和第三用户U3视为手势的候选授权用户。
另一方面,尽管图4中例示出两个用户U2和U3做出了用于获得控制权限的特定手势,但是做出用于获得控制权限的特定手势的用户的数量不限于此。无论如何,电子设备100可以将做出用于获得控制权限的特定手势的任何用户视为手势的候选授权用户。
如果在S110中确定了候选授权用户,则电子设备100可以显示与做出用于获得控制权限的特定手势的至少一个候选授权用户相对应的至少一个第一项(S120)。
所述至少一个第一项可以通过显示单元151显示。
所述至少一个第一项可以是候选授权用户U2和U3的实际图像,并且可以是与候选授权用户U2和U3相对应的虚拟图像(例如,虚拟化身图像)。
显示的至少一个第一项的数量可以与候选授权用户的数量相同。例如,在图4所示的候选授权用户的数量是两个的情况下,可以显示这两个第一项。
当显示至少一个第一项时,电子设备100还可以在显示单元151上显示第二项。
图5是描述根据本发明的第一实施方式的显示有第一项和第二项的视图,该第一项和第二项与授权用户手势相对应。参照图5,图5的(a)例示在获得候选授权用户在步骤S110中获得控制权限的手势之前,通过电子设备100的显示单元151显示的画面的示例,并且图5的(b)例示在候选授权用户在步骤S110中被确定之后,在显示单元151上显示数量等于候选授权用户U2和U3的数量的第一项I1和I2以及第二项CI。
另一方面,如图4所示、图5的(b)例示在位于当前授权用户U1两侧的两个用户U2和U3做出他们的用于获得控制权限的手势的情况下,在显示单元151上显示第一项和第二项的示例。在候选授权用户的数量是一个或三个的情况下,如下所述,可以在显示单元151上显示第一项和第二项。
图6例示显示根据本发明的第一实施方式的第一项和第二项的各种示例。
图6的(a)和(b)例示当用户做出用于获得控制权限的手势时,第一项I3或I4以及第二项CI的示例。也就是说,当有一个候选授权用户时,一个第一项I3或I4可以显示在显示单元151上。
另一方面,图6的(a)例示位于作为当前授权用户的第一用户U1左侧的第三用户U3被确定作为候选授权用户的示例,并且图6的(b)例示位于作为当前授权用户的第一用户U1右侧的第二用户U2被确定作为候选授权用户的示例。如图6的(a)和图6的(b)所示,显示第一项I3或I4的位置与显示第二项CI的位置之间的相对位置关系可以反映作为当前授权用户的第一用户U1与候选授权用户U2或U3之间的位置的相对关系。也就是说,如果候选授权用户U3位于当前授权用户U1的左侧,则与候选授权用户U3相对应的第一项I3可以位于第二项CI的左侧,反之亦然。
图6的(c)和(d)例示当用户做出用于获得控制权限的手势时,显示第一项I5、I6和I7或者I8、19和I10和第二项CI的示例。也就是说,当有三个候选授权用户时,三个第一项I5、I6和I7或者I8、19和I10可以显示在显示单元151上。
另一方面,图6的(c)例示两个候选授权用户和一个候选授权用户分别位于当前授权用户的左侧和右侧的示例,并且图6的(d)例示一个候选授权用户和两个候选授权用户分别位于当前授权用户的左侧和右侧的示例。如图6的(c)和(d)所示,第一项I5、I6和I7或者I8、19和I10所在的位置与第二项CI所在的位置之间的相对关系可以反映当前授权用户与候选授权用户之间的位置的相对关系。
尽管已描述在显示第一项的同时显示第二项CI,但是没有必要在执行S120步骤的同时显示第二项。即,显示第一项可以在执行下面将要描述的步骤S130或S140的同时完成。下面将更加详细地描述第二项的功能。
返回至图4,电子设备100可以获得当前授权用户的手势(S130)并且根据当前授权用户的手势在改变第二项的显示状态的同时显示第二项(S140)。
图7至图10是用于描述根据本发明的第一实施方式依照当前授权用户手势来改变第二项的显示状态的方法的视图。
如图7所示,电子设备100例如可以感测做出特定手势G3的当前授权用户U1(S130)。即,第一用户U1可以做出朝向第三用户U3移动他的手臂和/或手的手势G3,并且该手势可以被电子设备100感测到。作为另一个示例,如图9所示,当前授权用户U1可以做出朝向位于他的右侧的第二用户移动他的手臂和/或手的手势G4。
当输入如图7所示的手势G3时,第二项CI的显示状态可以改变成图8所示的显示状态(S140)。即,如图8所示,位于第一位置P1处的第二项CI可以响应于输入到电子设备100的特定手势G3,逐渐移动到位于第一位置P1的左侧的第二位置P2。因此,第二项CI可以朝向与第二用户U2相对应的第一项I2逐渐移动。
另一方面,当接收到如图9所示的手势G3时,第二项CI的显示状态可以改变成图10所示的显示状态(S140)。即,如图10所示,位于第一位置P1处的第二项CI可以响应于输入到电子设备100的特定手势G4,逐渐移动到位于第一位置P1的右侧的第三位置P3。因此,第二项CI可以朝向与第三用户U3相对应的第一项I3逐渐移动。
如结合图7至图10所描述的那样,可以通过反映当前授权用户所输入的特定手势G3或G4的移动特征,改变第二项CI的显示状态。即,可以基于特定手势G3或G4的移动方向来确定第二项CI的移动方向。
除了结合图7至图10所描述的方法之外,还可以提供根据第一实施方式依照当前授权用户的手势改变第二项的显示状态的各种方法。
图11至图15是用于描述根据本发明的第一实施方式显示第二项的显示状态的各种示例的视图。
参照图11,当输入图7所示的手势时,电子设备100可以在改变第二项CI的显示状态同时向左侧移动第二项CI的情况下,使第二项CI的大小逐渐减小。
参照图12,当输入图7所示的手势时,电子设备100可以在改变第二项CI的显示状态同时向左侧移动第二项CI的情况下,使第二项CI改变颜色、亮度和透明度。
参照图13,当输入图7所示的手势时,电子设备100可以在改变第二项CI的显示状态同时向左侧移动第二项CI的情况下,使第二项CI逐渐突出。另一方面,如上所述,没有必要响应于当前授权用户U1的手势G3或G4,改变第二项CI的位置同时改变第二项的显示状态。
例如,如图14所示,当第二项CI具有方向性时,第二项CI的显示状态可以通过使该第二项CI的指向变化而被改变。
即,如图14的(a)所示,在第二项CI与在第一方向D1上取向的箭头一起显示的情况下,当如图7所示输入手势时,电子设备100可以改变第二项CI的显示状态,使得第二项CI指向如图14的(b)所示的第二方向D2。因此,可以将第二项CI的指向改变成朝向与第三用户U3相对应的第一项U2取向。
在响应于当前授权用户U1的手势G3或G4改变第二项CI的显示状态时,当第二项CI移动时,第二项CI的移动速度和/或移动距离可以基于手势G3或G4的速度和/或距离确定。
例如,如图15的(a)所示,可以是如下示例:两个候选授权用户位于当前授权用户的左侧并且因此第二项I5和I6分别反映显示在第二项CI的左侧的候选授权用户。
此时,当当前授权用户在图7所示的方向上做出具有第一速度v1的手势时,第二项CI可以在向与第二项I6相对应的位置移动的同时改变该第二项CI大小,如图15的(b)所示。相反,当手势具有第二速度v2(v2>v1)时,第二项CI可以在向与第二项I5相对应的位置移动的同时改变该第二项CI大小,如图15的(c)所示。即,当手势具有大于第一速度的第二速度时,第二项CI的移动距离可以被确定为是不同的。另一方面,尽管在附图中没有示出,第二项CI的移动速度可以利用手势的速度变化。
此外,在沿着图7所示的方向做出手势的情况下,当手势移动了第一距离s1时,第二项CI可以在向与第二项I6相对应的位置移动的同时改变该第二项CI大小,如图15的(b)所示。相反,当手势移动了第二距离s2(s2>s1)时,第二项CI可以在向与第二项I5相对应的位置移动的同时改变该第二项CI大小,如图15的(c)所示。即,当只要手势移动了比第一距离更大的第二距离时,第二项CI的移动距离可以被确定为是不同的。另一方面,尽管在附图中没有示出,第二项CI的移动速度可以利用手势的速度变化。
随后,参照图4,电子设备100可以根据改变的第二项的显示状态,选择至少一个第一项中的一个第一项(S150)。可以应用各种方法以根据改变的第二项的显示状态选择至少一个第一项中的一个第一项。
例如,当在步骤S140中改变第二项的显示位置时,考虑第二项CI的最终显示位置,电子设备100可以选择至少一个第一项中的一个第一项。即,当响应于图8所示的当前授权用户的手势来改变第二项CI的显示位置时,电子设备100可以从两个第一项I1和I2当中选择接近第二项CI的所改变的位置的第一项I2。在图15所示的情况下,当第二项CI的位置由如图15的(b)所示的当前授权用户的手势确定时,可以从三个第一项I5、I6和I7当中确定第一项I6。相反,在图15的(c)所示的情况下,可以从三个第一项I5、I6和I7当中确定第一项I5。
作为另一个示例,当在步骤S140中改变第二项CI的大小时,考虑第二项CI的最终显示大小,电子设备100可以选择至少一个第一项中的一个第一项。即,当第二项CI(该第二项CI在响应于当前授权用户的手势而改变其大小的同时移动)的大小达到预定大小时,电子设备100可以选择至少一个第一项中的一个第一项作为与第二项CI的显示位置相对应的一个第一项。即,如图11所示,当朝向第一项I2途中的第二项CI缩小并且消失时(即,当预定大小是‘0’时),可以从第一项I1和I2当中选择第一项I2。
作为另一个示例,当在步骤S140中改变第二项CI的颜色、亮度和/或透明度时,考虑显示的第二项CI的最终颜色、亮度和/或透明度,电子设备100选择至少一个第一项中的一个。即,当在第二项CI根据当前授权用户的手势移动改变其颜色亮度和/或透明度的同时该第二项CI的大小与预定的颜色、亮度和/或透明度相对应的情况下,电子设备100可以选择至少一个第一项中的一个作为与显示的第二项CI的位置相对应的一个。即,如图12所示,在第二项CI朝向第一项I2移动的情况下,该第二项CI恰好具有接近第二项I2的预定颜色、亮度和/或透明度,可以从两项I1和I2当中选择第一项I2。
如果在步骤S150中选择第一项,则电子设备100可以将手势的控制权限切换至于所选择的第一项相对应的候选授权用户(S160)。
即,如图8所示,在第二项CI朝向位于左侧的第一项I2移动并且因此在步骤S150中选项第一项I2的情况下,可以将手势的控制权限切换至第三用户U3(参照图4或图7),该第三用户U3是与第一项I2相对应的候选授权用户。因此,在执行步骤S160之后,电子设备100可以接收第三用户的手势G5以执行如图16所示的必要操作。相反,在图10所示的情况下,可以将手势的控制权限切换至第二用户U2,该第二用户U2是与第一项I1相对应的候选授权用户。
如果将手势的控制权限切换至特定用户,则电子设备100分析接管手势的控制权限的特定用户的手势而不分析之前具有控制权限的手势的先前授权用户的手势并且执行与由特定用户输入的手势命令的相对应的操作。
因此,在电子设备100接收到用户的手势输入并且执行必要操作的情况下,通过将控制权限分配给多个用户当中要求控制权限的用户,可以增加用户便利性。另一方面,手势的控制权限不是由来自目前不拥有手势的控制权限的用户的单方面请求切换的,是由拥有控制权限的授权用户的特定手势切换的,从而可以使由于当前授权用户的控制权限的丧失引起的任何不便最小化。此外,手势的控制权限的切换通过电子设备100的显示单元151显示,因此提供直观和易于使用的用户接口。
同时,尽管在第一实施方式中描述了用户在步骤S100和S110中进入预定手势以获得控权限,但是用于获得控制权限的用户进入可以由除了手势之外的其它方法实现。例如,通过输入预定的语音命令,期望获得控制权限的用户可以是候选授权用户。此外,针对候选授权用户的输入还可以由其它输入方法完成。
现在将更加详细地描述本发明的第二实施方式。出于便于描述的目的,假设第二实施方式由结合图1描述的电子设备100实现。然而,控制根据第二实施方式的电子设备的方法不限于由结合图1描述的电子设备100实现。
根据第二实施方式的电子设备的控制方法针对一种提供用户接口的方法,其可以容易地向用户通知事件的发生并且允许用户容易地执行与该事件相关联的操作。
图17是例示控制根据本发明的第二实施方式的电子设备的方法的流程图。参照图17,根据第二实施方式的控制方法包括以下步骤中的至少一个:识别事件的发生的步骤(S200);识别事件的属性的步骤(S210);根据识别出的事件属性确定对象的移动属性的步骤(S220);根据确定的移动属性显示反映事件的内容的对象的步骤(S230);识别是否从用户输入了预定手势的步骤(S240);当输入手势时,识别输入手势是第一手势还是第二手势的步骤(S250);当输入手势是第一手势时,执行与已经发生的事件相对应的功能的步骤(S260);以及当输入手势是第二手势时,停止显示对象的步骤(S270)。
在下文中,具体地描述每个步骤。
电子设备100可以监视是否已经发生了预定事件(S200)。
预定事件可以是与显示设备100相关联的事件或者与除了显示设备100之外的另一个电子设备相关联的事件。
与显示设备100相关联的事件例如可以包括:针对电子设备100的呼叫接收、针对电子设备100的消息接收、根据针对电子设备100设置的TV观看预定的预定观看时间的到来、根据针对电子设备100设置的记录预定的预定记录时间的到来、根据针对电子设备100设置的用户日程表输入的日程表时间(例如,预约时间)以及在获得用户需要通过安装在电子设备100和/或负责电子设备100的操作的系统中的各种软件知道的信息时。
与除了显示设备100之外的另一个电子设备相关联的事件例如可以包括:针用户使用的对另一个电子设备100的呼叫接收(例如,移动电话)、针对另一个电子设备的消息接收、根据针对另一个电子设备设置的TV观看预定的预定观看时间的到来、根据针对另一个电子设备设置的记录预定的预定记录时间的到来、根据针对另一个电子设备设置的用户日程表输入的日程表时间(例如,预约时间)以及在获得用户需要通过安装在另一个电子设备和/或负责另一个电子设备的操作的系统中的各种软件知道的信息时。
如果预定事件是与另一个电子设备相关联的事件时,则电子设备100可以通过接收与预定事件已从另一个电子设备发生的事实有关的信息来识别预定事件的发生。
随后,电子设备100可以识别被识别出的事件的属性(S210)。
事件的属性可以包括与已经发生的事件相关联的电子设备的类型(例如,该电子设备是否是电子设备100,或者该电子设备是第一电子设备、第二电子设备还是第三电子设备)和事件的类型(例,呼叫接收、消息接收、观看预定、记录预定、日程表的到达等)。
在步骤S210之后,电子设备100可以基于被识别出的事件属性来确定移动属性(S220)。
下面具体描述的对象是显示是在反映已经发生的事件的内容的显示单元151上的对象。
另一方面,对象的移动属性可以包括显示对象的起点、显示对象的终点、对象的移动速度和对象的移动轨迹的模式中的至少一个。
电子设备100可以与针对对象的至少一个或更多个移动属性的属性(即,与事件相关联的电子设备的类型或事件的类型)对应。这种对应关系可以是在电子设备100中预设的值或者可以是被设置为与事件分离的值。
在对象的事件属性和移动属性被预设的情况下,这些属性可以是由电子设备100的制造商预设的值或者可以是电子设备100的用户定制的值。
可以在对象的事件属性与移动属性之间使用各种对应关系。
根据与事件相关联的电子设备的类型(其是事件属性),可以确定对象的移动属性中的一个。因此,根据作为另一个事件属性的事件的类型,可以确定对象的另一个移动属性。例如,根据与事件相关联的电子设备的类型,可以确定对象的起始显示点,并且根据事件的类型,可以确定对象的移动速度。或者根据与事件相关联的电子设备的类型,可以确定对象的起始显示点,并且根据事件的类型,可以确定对象的移动轨迹模式。
另一方面,对于一个对象移动属性而言没有必要由一个事件属性来确定,并且可以由一个事件属性来确定对象的两个或更多个移动属性。例如,根据与事件相关联的电子设备的类型,可以确定对象的起始显示点和终止显示点,并且根据事件的类型,可以确定对象的移动速度和/或移动轨迹模式。例如,根据与事件相关联的电子设备的类型,可以确定对象的起始显示点,并且根据事件的类型,可以确定对象的终止显示点、对象的移动速度和对象的移动轨迹模式中的至少两个或更多个。
如果在步骤S220中确定了对象的移动属性,则电子设备100可以根据所确定的移动属性,显示反映已经发生的事件的内容的对象(S230)。即,电子设备100可以在通过反映在步骤S220中确定的对象的起始显示点、对象的终止显示点、对象的移动速度和对象的移动轨迹模式来移动对象的同时,在显示单元151上显示对象。在下文中,参照图18至图20,描述在移动的同时显示对象的特定示例。
图18至图20是例示根据本发明的第二实施方式在移动对象的同时显示该对象的示例的视图。
图18例示已经发生的事件是针对电子设备100设置的‘观看预定’的示例。此外,参照图18,在与事件相关联的电子设备是电子设备100的情况下,对象OB1的起始显示点与画面的‘左下部分’相对应,并且当事件的类型是‘观看预定’时,对象OB1的终止显示点与画面的‘右下部分’相对应且对象的移动轨迹模式与‘直线’相对应。
图19例示已经发生的事件是‘移动电话A’的‘呼叫接收’的示例。此外,参照图19,在与事件相关联的电子设备是移动电话A的情况下,对象OB2的起始显示点与画面的‘左下部分’相对应,并且当事件的类型是‘呼叫接收’时,对象OB2的终止显示点与画面的‘右下部分’相对应且对象的移动轨迹模式与‘锯齿形线’相对应。
图20例示已经发生的事件是‘移动电话A’的‘文本接收’的示例。此外,参照图20,在与事件相关联的电子设备是移动电话A的情况下,对象OB3的起始显示点与画面的‘左下部分’相对应,并且当事件的类型是‘文本接收’时,对象OB3的终止显示点与画面的‘左下部分’相对应且对象的移动轨迹模式与‘直线’相对应。
很明显,除了结合图18至图20描述的示例之外的各种实施方式可以由本领域技术人员在本发明的范围内引入。
在执行步骤S230时,电子设备100可以识别预定手势是否是从用户输入的(S240)。即,根据在执行上述步骤时确定的对象的移动属性,电子设备100可以识别预定手势是否是从用户输入的。
如果没有手势被输入,则电子设备100可以执行步骤S230,从而当对象位于所确定的对象的终止显示点上方时,该对象不再在显示单元151上显示。
然而,如果手势是从用户输入的,则电子设备100可以确定该输入手势是第一手势还是第二手势(S250)。
如果第一手势被输入,则电子设备100可以执行与已经发生的事件相对应的功能(S260)。
例如,如果已经发生的事件是‘观看预定’,则电子设备100可以使显示单元151上的显示的内容停止,并且可以显示通过为观看预定的频道接收到的内容。例如,如果已经发生的事件是另一个电子设备的呼叫接收,则电子设备100可以连接通过另一个电子设备接收到的呼叫并因此可以请求向电子设备100发送通过另一个电子设备的显示的画面。通过这样做,如果与呼叫相关联的画面是由另一个电子设备输出的,则用户可以通过电子设备100执行针对被呼叫部分的呼叫,好像用户确实使用了另一个电子设备一样。
作为一个示例,如果已经发生的事件是另一个电子设备的‘文本接收’,则电子设备1可以请求发送与由另一个电子设备接收到的文本有关的信息。因此,通过在电子设备100的显示单元151上显示与由另一个电子设备接收到的文本有关的信息,用户可以通过电子设备100直接地识别文本而不需要通过另一个电子设备识别文本。
图21至图23是用于描述根据本发明的第二实施方式执行与事件相对应的功能的示例的视图。
图21例示了在电子设备100显示与移动对象的‘观看预定’事件相对应的对象的同时从用户输入第一手势的情况下,改变显示在电子设备100的显示单元151上的画面的示例。即,当接收到第一手势时,电子设备100可以将与‘观看预定’相对应的用户目前观看的频道改变成为观看预定的频道。因此,用户可以容易地移至为观看预定的频道,从而用户可以观看期望的内容。
图22例示在另一个电子设备(即,移动电话A)显示与移动对象的‘呼叫接收’事件相对应的对象的同时从用户输入第一手势的情况下,改变显示在电子设备100的显示单元151上的画面的示例。具体地说,图22的(a)例示了应当通过另一个电子设备显示的视频呼叫的画面显示在电子设备100的显示单元151的整个画面上的示例,并且图22的(b)例示了视频呼叫的画面显示在显示单元151的部分区域R1上的示例。
图23例示了在另一个电子设备(即移动电话A)显示与移动对象的‘文本接收’事件相对应的对象的同时从用户输入第一手势的情况下,改变显示在电子设备100的显示单元151上的画面的示例,如图20所示。
相反,当输入第二手势时,电子设备100可以在输入第二手势时停止显示对象(S270)。即,可以根据对象的预定移动属性,在该对象向上移动到该对象的预定终止显示点之前,使对象的显示停止。
图24例示根据第二实施方式响应于第二手势的输入使对象的显示停止的示例。
如结合图18所描述的那样,假设对象的移动属性被确定从而使对象OB1从画面的‘左下部分’向画面的‘右下部分’移动,如图24的(a)所示,当在对象向上移动到画面的‘中心下侧部分’时从用户输入第二手势时,如图24的(b)所示,可以使对象OB1的显示停止。
第一手势和第二手势可以是任何类型的手势,只要第一手势和第二手势可以彼此区分即可。
与已经发生的事件相对应的对象显示在显示单元151上的同时输入的手势既不是第一手势又不是第二手势的情况下,电子设备100可以不顾输入手势或者在识别出是否是与输入手势相对应的另一个功能之后,电子设备100可以执行相应功能。
通过根据预定的事件属性以不同的方式向用户显示反映已经发生的事件的内容的对象,电子设备100可以更加直观地向用户提供事件的内容。此外,电子设备100可以响应于用户的简单手势输入,执行与事件相关联的预定操作。
在根据实施方式的控制电子设备的方法中,被包括在每一个实施方式中的多个步骤中的每一个并非是不可避免的,相反每个实施方式都可以选择性地包括这些步骤。被包括在每个实施方式中的步骤不需要按照描述的次序执行,并且例如,后面的步骤可以在前面的步骤之前执行。
在根据实施方式的控制电子设备的方法中,可以单独或组合执行这些实施方式。此外,被包括在一个实施方式中的步骤可以与被包括在另一个实施方式中的步骤分离或组合执行。
此外,根据实施方式的控制电子设备的方法可以按照代码或程序的形式存储在计算机可读记录介质中。
已在上面参照示例性实施方式说明了本发明。对于本领域技术人员而言很明显的是,可以在不脱离本发明的更宽的精神和范围的情况下对其进行各种修改。此外,尽管已在其实现特别是环境和针对特定应用的上下文中描述了本发明,但是本领域技术人员将认识到的是,本发明的用途不限于此,并且本发明可以在任何数目的环境和实现中被有益地利用。前面的描述和附图因此,被认为是例示性的而非限制性的。

Claims (18)

1.一种控制电子设备的方法,所述方法包括以下步骤:
经由所述电子设备的摄像头获得观看所述电子设备的显示单元的多个用户的图像;
从用于获得所述电子设备的手势控制权限的多个用户当中识别由第一用户做出的手势,其中,识别由第一用户做出的手势的所述识别在所述第一用户不具有所述电子设备的当前手势控制权限时执行;
经由所述显示单元,显示与所述第一用户对应的图形项;
经由所述显示单元,显示指示所述电子设备的所述当前手势控制权限的控制图形项;以及
响应于识别出用于改变所述控制图形项的显示状态的传递控制权限手势,基于所改变的所述控制图形项的显示状态和所述传递控制权限手势来选择与所述第一用户对应的所述图形项,并且将所述手势控制权限切换至所述第一用户,
其中,所述控制图形项的显示状态在识别出所述传递控制权限手势时改变。
2.根据权利要求1所述的方法,其中,所述图形项包括所述第一用户的实际图像或虚拟图像中的一个。
3.根据权利要求1所述的方法,其中,所述传递控制权限手势是由具有所述电子设备的所述当前手势控制权限的第二用户输入的。
4.根据权利要求3所述的方法,该方法进一步包括以下步骤:
按照反映观看所述显示单元的所述第一用户和所述第二用户的物理关系的关系在所述显示单元上显示所述图形项和所述控制图形项。
5.根据权利要求1所述的方法,其中,所改变的所述控制图形项的显示状态包括该控制图形项的改变的位置、大小、指向、颜色、亮度和透明度中的至少一个。
6.一种电子设备,所述电子设备包括:
显示单元;以及
摄像头,所述摄像头被配置为获得包括观看所述显示单元的多个用户的图像;
控制单元,所述控制单元被配置为:
在第一用户不具有所述电子设备的当前手势控制权限时,从用于获得所述电子设备的手势控制权限的多个用户当中识别由所述第一用户做出的手势;
在所述显示单元上显示与第一用户对应的图形项;
在所述显示单元上显示指示所述电子设备的所述当前手势控制权限的控制图形项;以及
响应于识别出用于改变所述控制图形项的显示状态的传递控制权限手势,基于所改变的所述控制图形项的显示状态和所述传递控制权限手势来选择与所述第一用户对应的所述图形项,并且将所述手势控制权限切换至所述第一用户,
其中,所述控制图形项的显示状态在识别出所述传递控制权限手势时改变。
7.根据权利要求6所述的电子设备,其中,所述图形项包括所述第一用户的实际图像或虚拟图像中的一个。
8.根据权利要求6所述的电子设备,其中,所述传递控制权限手势是由具有所述电子设备的所述当前手势控制权限的第二用户输入的。
9.根据权利要求8所述的电子设备,其中,所述控制单元还被配置为:
按照反映观看所述显示单元的所述第一用户和所述第二用户的物理关系的关系在所述显示单元上显示所述图形项和所述控制图形项。
10.根据权利要求6所述的电子设备,其中,所改变的所述控制图形项的所述显示状态包括该控制图形项的改变的位置、大小、指向、颜色、亮度和透明度中的至少一个。
11.一种控制电子设备的方法,所述方法包括以下步骤:
经由所述电子设备的显示单元显示内容;
经由所述电子设备的摄像头获得观看所述显示单元的用户的图像;
基于在所述电子设备上发生的从第一位置移动到第二位置的事件的移动属性,在所述显示单元上显示指示所述事件的图形对象;
在所述图形对象正在从所述第一位置移动并且在该图形对象到达所述显示单元上的所述第二位置之前,提供用于从观看所述显示单元的所述用户识别第一手势或第二手势的识别机会;
响应于在所述图形对象到达所述第二位置之前识别出所述第一手势或所述第二手势,基于识别出的所述第一手势或所述第二手势来执行针对所述事件的功能;以及响应于所述图形对象到达所述显示单元上的所述第二位置而未识别出所述第一手势或所述第二手势,停止所述图形对象的显示,
其中,所述事件是获得将要经由所述显示单元显示的信息的事件。
12.根据权利要求11所述的方法,其中,所述移动属性包括所述图形对象的所述第一位置的起始显示点、所述第二位置的终止显示点、所述图形对象从所述第一位置移动到所述第二位置的移动速度和该图形对象的移动轨迹中的至少一个。
13.根据权利要求11所述的方法,其中,执行所述功能的步骤包括:
在所述图形对象在所述显示单元上从所述第一位置移动到所述第二位置的同时输入所述第一手势的情况下,执行与所述事件对应的第一功能。
14.根据权利要求11所述的方法,其中,执行所述功能的步骤包括:
在所述图形对象在所述显示单元上从所述第一位置移动到所述第二位置的同时输入所述第二手势的情况下,停止显示所述图形对象。
15.一种电子设备,所述电子设备包括:
显示单元,所述显示单元被配置为显示内容;
摄像头,所述摄像头被配置为获得观看所述显示单元的用户的图像;
控制单元,所述控制单元被配置为:
基于在所述电子设备上发生的从第一位置移动到第二位置的事件的移动属性,在所述显示单元上显示指示所述事件的图形对象;
在所述图形对象正在从所述第一位置移动并且在该图形对象到达所述显示单元上的所述第二位置之前,提供用于从观看所述显示单元的所述用户识别第一手势或第二手势的识别机会;
响应于在所述图形对象到达所述第二位置之前识别出所述第一手势或所述第二手势,基于识别出的所述第一手势或所述第二手势来执行针对所述事件的功能;以及
响应于所述图形对象到达所述显示单元上的所述第二位置而未识别出所述第一手势或所述第二手势,停止所述图形对象的显示,
其中,所述事件是获得将要经由所述显示单元显示的信息的事件。
16.根据权利要求15所述的电子设备,其中,所述移动属性包括:所述图形对象的所述第一位置的起始显示点、所述第二位置的终止显示点、所述图形对象从所述第一位置移动到所述第二位置的移动速度和该图形对象的移动轨迹中的至少一个。
17.根据权利要求15所述的电子设备,其中,在所述图形对象在所述显示单元上从所述第一位置移动到所述第二位置的同时输入所述第一手势的情况下,所述控制单元执行与所述事件对应的第一功能。
18.根据权利要求15所述的电子设备,其中,在所述图形对象在所述显示单元上从所述第一位置移动到所述第二位置的同时输入所述第二手势的情况下,所述控制单元停止显示所述图形对象。
CN201280064754.2A 2011-12-26 2012-02-02 电子设备以及控制该电子设备的方法 Expired - Fee Related CN104011631B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2011-0141887 2011-12-26
KR1020110141887A KR101885295B1 (ko) 2011-12-26 2011-12-26 전자기기 및 그 제어방법
PCT/KR2012/000801 WO2013100250A1 (en) 2011-12-26 2012-02-02 Electronic device and method of controlling the same

Publications (2)

Publication Number Publication Date
CN104011631A CN104011631A (zh) 2014-08-27
CN104011631B true CN104011631B (zh) 2017-03-01

Family

ID=48697698

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280064754.2A Expired - Fee Related CN104011631B (zh) 2011-12-26 2012-02-02 电子设备以及控制该电子设备的方法

Country Status (5)

Country Link
US (1) US9294819B2 (zh)
EP (1) EP2798445B1 (zh)
KR (1) KR101885295B1 (zh)
CN (1) CN104011631B (zh)
WO (1) WO2013100250A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9724597B2 (en) 2012-06-04 2017-08-08 Sony Interactive Entertainment Inc. Multi-image interactive gaming device
US10713389B2 (en) * 2014-02-07 2020-07-14 Lenovo (Singapore) Pte. Ltd. Control input filtering
KR20150112337A (ko) * 2014-03-27 2015-10-07 삼성전자주식회사 디스플레이 장치 및 그 사용자 인터랙션 방법
US10165322B2 (en) * 2014-09-30 2018-12-25 Rovi Guides, Inc. Methods and systems for controlling user devices
WO2016085368A1 (en) * 2014-11-27 2016-06-02 Erghis Technologies Ab Method and system for gesture based control of device
JP2016130925A (ja) * 2015-01-14 2016-07-21 レノボ・シンガポール・プライベート・リミテッド 複数の電子機器が連携動作をする方法、電子機器およびコンピュータ・プログラム
US10452337B1 (en) 2015-11-30 2019-10-22 Securus Technologies, Inc. Controlled-environment facility digital bulletin board
KR20170082349A (ko) 2016-01-06 2017-07-14 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
JP6711799B2 (ja) * 2017-09-25 2020-06-17 Kddi株式会社 機器制御装置、機器制御方法及び機器制御システム
JP6693495B2 (ja) * 2017-12-15 2020-05-13 ソニー株式会社 情報処理装置、情報処理方法及び記録媒体
US10843089B2 (en) * 2018-04-06 2020-11-24 Rovi Guides, Inc. Methods and systems for facilitating intra-game communications in a video game environment
EP3726344A1 (en) 2019-04-16 2020-10-21 InterDigital CE Patent Holdings Method and apparatus for user control of an application and corresponding device
US11283806B2 (en) * 2019-08-06 2022-03-22 International Business Machines Corporation Adaptive security system
US11106929B2 (en) * 2019-08-29 2021-08-31 Sony Interactive Entertainment Inc. Foveated optimization of TV streaming and rendering content assisted by personal devices
WO2021184356A1 (en) * 2020-03-20 2021-09-23 Huawei Technologies Co., Ltd. Methods and systems for hand gesture-based control of a device
WO2024085368A1 (ko) * 2022-10-18 2024-04-25 삼성전자 주식회사 전자 장치 및 그 동작 방법

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6937950B2 (en) * 2002-12-26 2005-08-30 International Business Machines Corporation Animated graphical object notification system
GB0306875D0 (en) * 2003-03-25 2003-04-30 British Telecomm Apparatus and method for generating behavior in an object
KR100672478B1 (ko) * 2005-04-26 2007-01-24 엘지전자 주식회사 이동통신 단말기와 메뉴 동작 제어 방법
US7761801B2 (en) 2005-04-26 2010-07-20 Lg Electronics Inc. Mobile terminal providing graphic user interface and method of providing graphic user interface using the same
TWI412392B (zh) 2005-08-12 2013-10-21 Koninkl Philips Electronics Nv 互動式娛樂系統及其操作方法
US7474889B2 (en) 2005-08-30 2009-01-06 International Business Machines Corporation Informing wireless device users of incoming calls or pages in environments inhospitable for notification
JP4162015B2 (ja) * 2006-05-18 2008-10-08 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US20100070987A1 (en) * 2008-09-12 2010-03-18 At&T Intellectual Property I, L.P. Mining viewer responses to multimedia content
KR101593727B1 (ko) 2008-12-29 2016-02-15 휴렛-팩커드 디벨롭먼트 컴퍼니, 엘.피. 제스처 검출 시스템, 방법 및 컴퓨터 판독가능 매체
KR101578428B1 (ko) 2009-07-06 2015-12-17 엘지전자 주식회사 이동단말기 및 그의 일상 로그 시각화 방법
US9244533B2 (en) * 2009-12-17 2016-01-26 Microsoft Technology Licensing, Llc Camera navigation for presentations
US20110239117A1 (en) * 2010-03-25 2011-09-29 Microsoft Corporation Natural User Interaction in Shared Resource Computing Environment
US20120182384A1 (en) 2011-01-17 2012-07-19 Anderson Eric C System and method for interactive video conferencing
US8909200B2 (en) * 2011-02-28 2014-12-09 Cisco Technology, Inc. Using face tracking for handling phone events

Also Published As

Publication number Publication date
EP2798445A1 (en) 2014-11-05
EP2798445B1 (en) 2020-08-19
KR101885295B1 (ko) 2018-09-11
CN104011631A (zh) 2014-08-27
EP2798445A4 (en) 2015-10-07
WO2013100250A1 (en) 2013-07-04
US20140359651A1 (en) 2014-12-04
KR20130074034A (ko) 2013-07-04
US9294819B2 (en) 2016-03-22

Similar Documents

Publication Publication Date Title
CN104011631B (zh) 电子设备以及控制该电子设备的方法
CN105190478B (zh) 检测注视位置的显示设备及其控制方法
CN104219376B (zh) 移动终端及其控制方法
CN103729055B (zh) 多显示设备、输入笔、多显示控制方法和多显示系统
KR101850034B1 (ko) 이동 단말기 및 그 제어방법
US9454288B2 (en) One-dimensional to two-dimensional list navigation
CN102479052B (zh) 移动终端及其操作控制方法
US9710136B2 (en) Mobile terminal having video playback and method for controlling of the same
CN106791893A (zh) 视频直播方法及装置
CN102088510B (zh) 显示广播数据的方法和针对该方法的移动终端
CN105683863A (zh) 通过触摸屏显示器来召开会议的用户体验
CN104469256A (zh) 沉浸式和交互式的视频会议房间环境
CN108108214A (zh) 一种操作引导方法、装置及移动终端
CN106412415A (zh) 移动终端及其控制方法
CN103389874B (zh) 移动终端及其控制方法
CN105765518A (zh) 用于共享内容的装置和方法
CN106406688A (zh) 移动终端及其控制方法
CN104219375B (zh) 移动终端和移动终端的控制方法
CN106664334A (zh) 移动终端及其控制方法
KR20180131908A (ko) 이동 단말기 및 그것의 동작방법
CN110460774A (zh) 一种视频录制的控制方法及终端
CN113938748A (zh) 视频播放方法、装置、终端、存储介质及程序产品
CN109660872A (zh) 一种多媒体播放进度的调整方法及终端
CN103430215A (zh) 显示装置及其控制方法
CN108804628A (zh) 一种图片显示方法及终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170301

Termination date: 20210202

CF01 Termination of patent right due to non-payment of annual fee