CN101482772A - 电子装置及其操作方法 - Google Patents

Abstract

本发明提供一种电子装置的操作方法，该电子装置具有一影像撷取单元。操作方法包括下列步骤。首先，由该影像撷取单元撷取一物的影像，该影像包括一第一子影像以及一第二子影像。接着，识别这些子影像，取得这些子影像的位置座标与外形信息。其次，依据该第一子影像以及该第二子影像的位置座标的相对关系以及外形信息，产生一对应的控制指令。接着，执行对应该控制指令的至少一操作。

Description

电子装置及其操作方法

技术领域

本发明有关一种电子装置及其相关操作方法，特别是有关一种具有影样撷取单元的电子装置及其操作方法。

背景技术

随着使用者的使用习惯以及使用需求的改变，愈来愈多的电子装置上，例如个人电脑、手持式(handheld)或可携式(portable)的电子装置例如智能型手机(smart phone)、个人数字助理(PDA)、平板电脑(Tablet PC)或超便携电脑(UMPC，Ultra Mobile PC)等，都配置有许多不同的辅助设备例如摄影机等以增加使用上的便利性。

一般而言，若使用者欲对电子装置下达指令，必须通过输入装置如键盘、鼠标或触控式屏幕来下达指令。有些装置可通过声控方式下达指令，然而，声控的识别能力取决于环境的噪音，因此识别度不高，容易下错指令或无法执行指令。摄影机是仅用于网络上的视讯通话或简单的拍照摄影功能。

发明内容

有鉴于此，本发明的目的是提供一种用于具有影像撷取装置的电子装置的简单控制方式，可以让许多繁杂或常用指令更快速直觉地执行，让使用者方便轻松地操作。

基于上述目的，本发明提供一种电子装置的操作方法，电子装置具有一影像撷取单元。操作方法包括下列步骤。首先，由该影像撷取单元撷取一影像，该影像包括一第一子影样以及一第二子影像。接着，识别该影像，得到该影像中该第一子影像以及该第二子影像的位置与外形。其次，依据该第一子影像以及该第二子影像的位置的相对关系以及外形，产生一对应的控制指令。接着，执行对应该控制指令的至少一操作。

本发明另提供一种电子装置，包括一影像撷取单元、一识别单元以及一处理单元。影像撷取单元用以撷取一影像，其中影像包括一第一子影样以及一第二子影像。识别单元用以识别影像以得到影像的第一子影像以及第二子影像的位置，依据第一子影像以及第二子影像的位置的相对关系，产生一对应的控制指令。处理单元执行对应控制指令的至少一操作。

本发明还提供一种电子装置的操作方法，电子装置具有一具有一影像撷取单元。电子装置的操作方法下列步骤，首先，由影像撷取单元撷取一第一影像以及一第二影像，其中第一影像是与第二影像不同。接着，识别第一影像以及第二影像，并依据第一影像以及第二影像的变化关系，产生一对应的控制指令。然后，执行对应控制指令的至少一操作。

附图说明

为使本发明的上述和其他目的、特征、和优点能更明显易懂，下面将配合附图对本发明的较佳实施例进行详细说明，其中：

图1是显示一依据本发明实施例的电子装置的区块示意图。

图2是显示一依据本发明实施例的操作方法的流程图。

图3A-3C是显示依据本发明实施例的输入影像。

图4是显示依据本发明实施例的操作方式的示意图。

图5是显示另一依据本发明实施例的操作方法的流程图。

图6是显示又一依据本发明实施例的操作方法的流程图。

图7A-7B是显示依据本发明实施例的二维空间示范影像。

图8A-8C是显示依据本发明实施例的三维空间示范影像。

具体实施方式

本发明提供一种适用于具有影像撷取单元(例如：摄影机)的电子装置的操作方法，例如智能型手机、个人数字助理、平板电脑、个人电脑或超便携电脑等，通过影像撷取单元可撷取一输入影像，再识别撷取的影像，并依据预先设计好的对应关系，将识别出的影像(静态或动态)转换成一对应的控制指令，致使电子装置执行对应控制指令的相关操作。

本发明实施例中提供了一种直觉式的操作方法，通过脸部以及手部的交互动作或手部的移动行为来对电子装置下达操作指令，通过电子装置上的影像撷取单元(例如摄影机)传达操作指令的影像至电子装置中，使得电子装置可识别撷取到的影像，再依据撷取到的影像所对应的指令，执行相关的操作，因此可以用以取代一些复杂或是常用的指令操作，简化操作的流程，也增加操作的乐趣。

图1显示一依据本发明实施例的电子装置的区块示意图。电子装置100中至少包括一影像撷取单元110、一识别单元120、一动作分析单元130、一处理单元140以及一数据库150。其中，电子装置100可为任何具有影像撷取单元的电子装置例如智能型手机、个人数字助理、个人电脑或笔记本电脑系统等。

影像撷取单元110用以撷取一输入影像，并将撷取到的影像传送至识别单元120进行影像识别。输入影像中至少可包括具有一第一子影像及一第二子影像的静态影像，以及可于二维平面或三维平面上执行特定动作的动态影像。识别单元120可识别出第一子影像及第二子影像的位置以及外形，并且可以得到第一子影像及第二子影像的位置的对应关系。关于识别单元120识别出第一子影像及第二子影像的位置以及外形方法将详细说明于下。请注意，本实施例中是以一影像撷取单元来得到第一子影像及第二子影像，然而，于部分实施例中，也可以一个以上的影像撷取单元来分别撷取不同子影像，再同时将撷取到的影像送至数据库150中进行比对。

处理单元140依据识别单元120所识别的结果，得到第一子影像以及第二子影像位置的相对关系，再查询数据库150以产生一对应的控制指令，并执行对应此控制指令的相关操作。于部分实施例中，得到第一子影像以及第二子影像位置的相对关系再查询数据库150以产生一对应的控制指令的动作也可由识别单元120完成，因此，处理单元140便依据识别单元120所识别出的控制指令，执行对应的相关操作。

其中，数据库150中具有多个包含第一子影像以及第二子影像于不同位置的相对关系的既定影像，每一既定影像对应至一指令，可由使用者事先输入。举例来说，可提供一输入界面，使得使用者可事先输入每个指令与所代表的影像，并储存于数据库150中。因此，当识别单元120接收到一个撷取到的影像后，便可比对数据库150中的这些影像，若找到具有相同位置对应关系以及外型特征的影像，便可输出其对应的指令至处理单元140。

举例来说，使用者可通过将食指放在嘴上的动作，下达执行静音功能的指令，当处理单元140得知其为执行静音功能的指令后，便可执行静音相关的操作，例如关掉喇叭的音量。

电子装置100可还包括一显示单元(未绘示)，用以提供各种功能的显示以供使用者进行操作。于本实施例中，显示单元将显示对应输入影像的指令的提示讯息提示使用者。使用者可依据提示讯息确认电子装置接收到的指令是否正确。

于本实施例中，使用者可通过一特定方式例如以硬件快捷键、自动启动、声控启动或软件按键方式启动可执行本发明的操作方法的输入界面。此输入界面启动的方式可以依照客户要求设计，或由使用者自订。硬件快捷键启动方式是按下一特定按钮以启动此项功能。自动启动是当撷取到特定手部动作后启动，手部动作消失时结束。声控启动是使用者以声音下达指令后启动，再下达指令后结束。软件按键是由软件控制此项功能的启动与结束。

图2显示一依据本发明实施例的操作方法的流程图200。首先，于步骤S210，由影像撷取单元撷取一包括第一以及第二子影像的影像。接着，于步骤S220，识别影像，得到影像中第一子影像以及第二子影像的位置与外形。于步骤S230，依据第一子影像以及第二子影像的位置的相对关系以及外形，产生一对应的控制指令。于步骤S240，执行对应控制指令的至少一操作。

请注意，为了便于说明，假设于以下实施例中的电子装置的是个人电脑，其影像撷取单元110是一摄影机，这些仅用以说明，并非用以限定本发明仅限于此。

图3A-3C是显示依据本发明实施例的输入影像。如图3A所示，脸部影像310以及手部影像320与330是分别被定位。如图3B所示，输入影像I中包括了手部影像I1以及脸部影像I2，通过判断手部影像I1以及脸部影像I2的相对位置，可用以下达不同的指令。如图3B所示，使用者通过将食指放在嘴上的动作，下达执行静音功能的指令。如图3C所示，使用者通过手放在眼睛前按快门的姿势表示启动拍照或网络摄影机功能的指令。

图4显示一依据本发明实施例的操作方式的示意图。首先，通过一特定方式如按下一既定功能键，启动摄影机撷取动作功能。接着，执行影像的定位程序。于本实施例中，定位程序是用以进行手部与脸部相对位置的定位，以得到手部与脸部影像的基准影像。手部定位方式依据撷取的部份分为手型与手势两种，差别在于摄影机抓取的轮廓精细度。于定位程序中，将手部张开，在摄影机感应范围内给予定位点抓测，手的正面背面均须确认定位且脸也需要定位。请注意，假设开机后已定位过则无须再重新定位，启动后则可跳到”动作”的步骤。

定位完毕后，可得到手部与脸部的基准影像。接着，依据所需的操作于摄影机前产生一对应动作。假设欲执行静音功能，而且静音功能对应的动作为将食指放在嘴巴前方不动。因此，使用者便于摄影机前将食指放在嘴巴前方不动，以输入执行静音功能的指令。电脑通过摄影机撷取影像，并将影像通过识别单元120识别出是食指放在嘴巴前方不动的影像，因此产生对应此影像的执行静音功能的控制指令。于是，电脑于显示单元中显示对应此控制指令的提示讯息”执行静音功能？”。此时，使用者可依据提示讯息得知控制命令是否正确下达。假设使用者欲取消静音功能的执行或者识别结果有误时，则按下[space]键通知电脑取消操作，并回到前一步骤，允许摄影机再次撷取影像。反之，若使用者确定执行静音功能时，便依据既定的规则输入确认指令。举例来说，于本实施例中，使用者通过于摄影机前停留三秒钟不做任何动作以表示确认执行静音功能。因此，电脑便依据静音功能控制指令执行相关指令以将电脑静音。

请注意，即便手部影像与脸部影像的位置相同，不同的手部影像的外形(例如手势)，也可能代表不同的指令，因此识别时，也需要针对手部影像的外形进行判断。举例来说，使用者可以将五指张开放在嘴巴前方不动以表示与开启静音功能指令相反的关闭静音指令。

此外，使用者也可以动态动作的方式来下达指令。此时，数据库150中亦将包含多个既定动态影像，每一既定动态影像对应至一指令，可由使用者事先输入。

当输入影像为二维平面或三维平面上执行特定动作的动态影像时，识别单元120先将识别结果送至处理单元140，处理单元140收到识别出的动态影像后，便将此动态影像送至动作分析单元130进行动作的判定。动作分析单元130将比对数据库150，找出与接收到的动态影像相同的一既定动态影像，并输出对应找到的既定动态影像的指令。

动作依据摄影机静态与动态范围(Dynamic Range)的不同，可区分为二维平面相关影像以及三维平面相关影像。二维平面相关影像动作即为单纯动作给予并启动指令，不牵涉到画面中的层级(layer)。三维平面相关影像动作则牵涉到画面中层迭的部份，以摄影机侦测手部的远近，划分为前后两种以上的阶段性距离，以呼应显示单元中不同文件或是文件夹的层迭关系。

图5显示另一依据本发明实施例的操作方法的流程图500。首先，于步骤S510，由影像撷取单元撷取至少第一影像以及第二影像。请注意，此撷取动作可设定于一段既定时间内撷取相关的多个影像，再利用这些多个撷取到的影像的特性，组成二维或三维动态影像。其次，于步骤S520，识别第一影像以及第二影像，并依据第一影像以及该第二影像的变化关系，产生一对应的控制指令。于部分实施例中，变化关系可包括第一影像以及第二影像的位置差异、第一影像以及第二影像所形成的一移动轨迹、第一影像以及第二影像的影像大小、第一影像以及第二影像组成的动态影像的动作以及第一影像以及第二影像于二维或三维平面上的变化等等。每一种变化关系皆对应至不同的控制指令，因此处理单元140可依据第一影像以及第二影像的变化关系，得到一对应的控制指令。

图7A-7B显示依据本发明实施例的二维空间示范影像，以预设的动态动作输入控制指令。图7A为下达关机指令的示意动作。图7B为下达翻页指令的示意动作。于图7A中，手掌面向摄影机左右挥动，如同再见手势，当摄影机撷取到固定反复的二维平面动作时即存档并关机。如图所示，摄影机可依据周期性的撷取到影像H1-H3而判定此为固定反复的二维平面动作。

于图7B中，手以侧面面对摄影机，以自然翻页动作扫过屏幕表示欲执行翻页的动作，可以左右不同方向的翻页动作表示翻下一页或是上一页。此动作需配合具有翻页动作的应用程序方可使用，例如网络浏览器或是文件编辑器(如word、PDF文件)。

于部分实施例中，当使用者的操作为三维动作时，摄影机定位后，可辨别物体(例如手)的远近距离，作为判定显示单元中的层级。摄影机会因为摄取到影像的大小不同，从而定义远近。于一些实施例中，远近动作加上固定的手势也可构成一组命令。

图8A-8C是显示依据本发明实施例的三维空间示范影像。如图8A所示，当摄影机抓取到手的动作为非定格动作且重复在距离轴(如沿着Z轴)上做约定的动作时，则表示欲进入画面中档案的抓取。此动作可应用在切换一堆放在一起的数据夹、照片或应用程序等同质性的文件上。

于部分实施例中，可利用摄影机撷取到的影像大小判断远近，进而输入指令。如图8B所示，是一两手前后翻找的动作。此动作运用的范围广泛，利用摄影机撷取到手的翻找动作的动态影像，以呼应画面中的层级顺序。往前翻找表示选择更内层的层级(如图8A中的D3)，往回翻找(往自己方向)则表示选择接近上层的层级(如图8A中的D1)。画面中被选择到的文件则会有视觉呼应提示。

于部分实施例中，可利用摄影机撷取到的影像大小判断远近，再加上手势的变化输入指令。如图8C所示，手伸进去(靠近屏幕)，则表示选择到放在后面的文件，触摸到欲选择的项目后，做出“抓”的动作，表示确定选取。

处理单元140得到控制指令后，接着，于步骤S530，便执行对应此控制指令的相关操作。

图6显示一依据本发明实施例的操作方法的流程图600。首先，于步骤S610，对准摄影机，以左右挥手下达关机命令。于步骤S620，识别第一影像以及第二影像，得到一挥手动作。于步骤S630，依据第一子影像以及第二子影像的位置的相对关系以及外形，产生一对应的控制指令。于步骤S640，查询数据库，找到对应挥手动作的控制指令为“关机”。接着，于步骤S650，显示是否执行“关机”。于步骤S660，检测[Space]键是否被按下。若是(步骤S660的是)，表示识别的结果有误或者使用者打算取消操作，于是便取消关机动作(步骤S670)。若[Space]键未被按下且使用者停留数秒不做任何动作时(步骤S660的否)，表示下达指令正确，便执行关机程序，将电脑关机(步骤S680)。

综上所述，依据本发明的操作方法，当使用者需要下达指令时，只需直觉地通过影像撷取单元以动作(例如：手部加上脸部或手部的动态移动)来对电子装置下达指令，使得使用上更加简单便利，让使用者更轻松方便地操作。

虽然本发明已以较佳实施例揭露如上，然而其并非用以限定本发明，任何熟悉本技术的人员，在不脱离本发明的精神和范围内，当可做出种种等同的改变或替换，因此本发明的保护范围当视后附的本申请权利要求范围所界定的为准。

Claims (23)

1.一种电子装置的操作方法，该电子装置设有一影像撷取单元，该方法包括下列步骤：

(a)由该影像撷取单元撷取一物的影像，该影像包括一第一子影像以及一第二子影像；

(b)识别这些子影像，取得这些子影像的位置座标与外形信息；

(c)依据该第一子影像以及该第二子影像的位置座标的相对关系以及外形信息，产生一对应的控制指令；以及

(d)执行对应该控制指令的至少一操作。

2.根据权利要求第1所述的方法，其特征在于还包括：

提供该第一子影像以及该第二子影像的一基准影像；以及

依据这些基准影像，识别出该第一子影像以及该第二子影像的位置座标与外形信息。

3.根据权利要求第1所述的方法，其特征在于该产生该对应的控制指令的步骤还包括：

提供一数据库，其中该数据库具有多个既定影像，每一这些既定影像对应至一指令；

找出与该影像中该第一子影像以及该第二子影像的位置与外形相同的一既定影像；以及

输出对应该既定影像的该指令。

4.根据权利要求1所述的方法，其特征在于还包括：

预先输入一指令以及对应该指令的一影像，其中该影像中包括该第一子影像以及该第二子影像；以及

储存该影像与该指令于该数据库中。

5.根据权利要求1所述的方法，其特征在于还包括：

以一特定方式启动该影像撷取功能，其中该特定方式包括以硬件快捷键、自动启动、声控启动以及软件按键启动。

6.根据权利要求1所述的方法，其特征在于该第一子影像是一手部影像，该第二子影像是一脸部影像。

7.根据权利要求6所述的方法，其特征在于还包括：

依据该手部影像与该脸部影像的位置关系以及该手部影像的外形，产生该指令。

8.根据权利要求1所述的方法，其特征在于还包括：

显示对应该指令的一提示讯息；以及

依据该提示讯息，判断该指令是否正确；以及

若否，按压一特定按键以取消该指令的执行。

9.根据权利要求1所述的方法，其特征在于该指令至少包括与该影像撷取单元相关的指令。

10.一种电子装置，包括：

一影像撷取单元，用以撷取一影像，该影像包括一第一子影像以及一第二子影像；

一识别单元，用以识别该影像以得到该影像的该第一子影像以及该第二子影像的位置，依据该第一子影像以及该第二子影像的位置的相对关系，产生一对应的控制指令；以及

一处理单元，执行对应该控制指令的至少一操作。

11.根据权利要求10所述的电子装置，其特征在于还包括一动作分析单元，当该影像是一动态影像时，该动作分析单元依据该动态影像的一动作，判别所对应的该指令。

12.根据权利要求10所述的电子装置，其特征在于还包括一数据库，储存多个既定影像，且每一这些既定影像对应至一指令。

13.根据权利要求10所述的电子装置，其特征在于还包括一显示单元，用以显示对应该指令的一提示讯息。

14.根据权利要求10所述的电子装置，其特征在于该第一子影像是一手部影像，该第二子影像是一脸部影像。

15.根据权利要求14所述的电子装置，其特征在于该处理单元还依据该手部影像与该脸部影像的位置关系以及该手部影像的外形，产生该指令。

16.根据权利要求10所述的电子装置，其特征在于该影像撷取单元是一照相机或摄影机。

17.一种电子装置的操作方法，该电子装置具有一影像撷取单元，包括下列步骤：

由该影像撷取单元撷取一第一影像以及一第二影像，其中该第一影像是与该第二影像不同；

识别该第一影像以及该第二影像，并依据该第一影像以及该第二影像的变化关系，产生一对应的控制指令；以及

执行对应该控制指令的至少一操作。

18.根据权利要求17所述的方法，其特征在于该依据该第一影像以及该第二影像的变化关系产生该对应的控制指令的步骤还包括：

依据该第一影像以及该第二影像的位置差异，产生该对应的控制指令。

19.根据权利要求17所述的方法，其特征在于该依据该第一影像以及该第二影像的变化关系产生该对应的控制指令的步骤还包括：

依据该第一影像以及该第二影像所形成的一移动轨迹，产生该对应的控制指令。

20.根据权利要求17所述的方法，其特征在于该依据该第一影像以及该第二影像的变化关系产生该对应的控制指令的步骤还包括：

依据该第一影像以及该第二影像的影像大小，产生该对应的控制指令。

21.根据权利要求17所述的方法，其特征在于该依据该第一影像以及该第二影像的变化关系产生该对应的控制指令的步骤还包括：

依据该第一影像以及该第二影像于一既定时间内的固定变化，产生该对应的控制指令。

22.根据权利要求17所述的方法，其特征在于该依据该第一影像以及该第二影像的变化关系产生该对应的控制指令的步骤还包括：

依据该第一影像以及该第二影像于二维平面上的变化，产生该对应的控制指令，其中该第一影像以及该第二影像形成一二维动态影像。。

23.根据权利要求17所述的方法，其特征在于该依据该第一影像以及该第二影像的变化关系产生该对应的控制指令的步骤还包括：

依据该第一影像以及该第二影像于三维平面上的变化，产生该对应的控制指令，其中该第一影像以及该第二影像形成一三维动态影像。

Images