CN106707805A - 交互板上的多物体的语音控制系统 - Google Patents

交互板上的多物体的语音控制系统 Download PDF

Info

Publication number
CN106707805A
CN106707805A CN201510799914.3A CN201510799914A CN106707805A CN 106707805 A CN106707805 A CN 106707805A CN 201510799914 A CN201510799914 A CN 201510799914A CN 106707805 A CN106707805 A CN 106707805A
Authority
CN
China
Prior art keywords
control system
objects
identity
plate
interactive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510799914.3A
Other languages
English (en)
Other versions
CN106707805B (zh
Inventor
施政
陶也了
王慧慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201510799914.3A priority Critical patent/CN106707805B/zh
Priority to PCT/CN2016/105504 priority patent/WO2017084537A1/en
Publication of CN106707805A publication Critical patent/CN106707805A/zh
Priority to US15/976,858 priority patent/US20180261221A1/en
Application granted granted Critical
Publication of CN106707805B publication Critical patent/CN106707805B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39441—Voice command, camera detects object, grasp, move
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01Q—ANTENNAS, i.e. RADIO AERIALS
    • H01Q21/00—Antenna arrays or systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明提供一种交互板上的多物体的语音控制系统，包括：多个物体，每个物体有一个身份标识、一个无线通讯模块以及一个执行模块；交互板，用于识别放置在交互板上的物体的身份标识和位置，包括一个处理器、一个存储器、一个无线通讯模块以及一个语音输入单元，存储器存储有物体的身份标识与物体名称之间的一一对应关系；其中，多个物体放置在交互板上，处理器根据语音输入单元接收到的用户的语音指令、物体的身份标识以及物体的在交互板上的位置来生成多个控制指令以分别控制每个物体。从而，提高用户操控多个物体的便利性，提升用户体验。

Description

交互板上的多物体的语音控制系统
技术领域
本发明涉及交互板上的多物体领域，尤其是涉及一种交互板上的多物体的语音控制系统。
背景技术
至今，苹果、微软和太阳微系统公司开发的商业系统都采用了图形用户界面，从而使用户可以与计算机自然而然地交互。然而，一些实际应用中，用户通过操作物体与计算机进行交互，有时能获得令人满意的效果。例如，在一些交互游戏中，人们通过触觉、物理感知等技术与物体交互，增加了游戏的乐趣。又例如，儿童学习语言时，与直接让儿童使用图形用户界面相比，让儿童通过操纵物体来与计算机进行交互，更容易让儿童投入在整个过程当中。
在智能终端中应用语音控制系统，可以增强用户体验。为了增强用户通过操作物体与计算机进行交互的体验，提供一种交互板上的多物体的语音控制系统实属必要。
发明内容
针对上述存在的问题，本发明提供一种交互板上的多物体的语音控制系统，提高用户操控多个物体的便利性，提升用户体验。
一种交互板上的多物体的语音控制系统，包括：
多个物体，每个所述物体有一个身份标识、一个无线通讯模块以及一个执行模块；
交互板，所述交互板用于识别放置在所述交互板上的所述物体的身份标识和位置，所述交互板包括一个处理器、一个存储器、一个无线通讯模块以及一个语音输入单元，所述存储器存储有所述物体的身份标识与所述物体的名称之间的一一对应关系；
其中，多个所述物体放置在所述交互板上，所述处理器根据所述语音输入单元接收到的用户的语音指令、所述物体的身份标识以及所述物体在所述交互板上的位置来生成多个控制指令以分别控制每个所述物体。
进一步地，所述语音输入单元包括麦克风、录音器和具有语音录入功能的电子器件。
进一步地，所述执行模块为一个运动模块。所述处理器解析出所述语音指令包含的动作内容以及所述物体的名称，到所述存储器中找到与所述物体的名称对应的所述物体的身份标识，并获知所述物体在所述交互板上的位置，所述处理器根据所述动作内容、所述物体的身份标识以及所述物体在所述交互板上的位置来生成多个控制指令以分别控制每个所述物体。 每个所述物体的运动路径由所述控制指令定义。
进一步地，所述执行模块为一个显示模块。所述处理器解析出所述语音指令包含的显示内容，根据所述语音指令包含的显示内容确定需要的所述物体的数量，并根据需要的所述物体的数量、所述物体的身份标识以及所述物体在所述交互板上的位置来生成多个控制指令以分别控制每个所述物体。每个所述物体的显示内容由所述控制指令定义。
本发明提供一种交互板上的多物体的语音控制系统，提高用户操控多个物体的便利性，提升用户体验。
附图说明
图1为本发明实施例提供的交互板上的多物体的语音控制系统的工作流程图。
图2为本发明实施例提供的物体为机器人的语音控制系统的示意图。
图3为本发明实施例提供的物体为卡片的语音控制系统的示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。
实施例一
图1是实施例一提供的交互板上的多物体的语音控制系统的工作流程图。本语音控制系统包括多个物体和交互板1。每个物体有一个身份标识（ID）、一个无线通讯模块以及一个执行模块。交互板1包括一个处理器、一个存储器、一个无线通讯模块以及一个语音输入单元，所述存储器存储有所述物体的身份标识与所述物体的名称之间的一一对应关系。语音输入单元包括麦克风、录音器和具有语音录入功能的电子器件。
交互板1用于识别放置在所述交互板1上的所述物体的身份标识和位置。交互板1包括一个传感器阵列，传感器阵列包括一个电极阵列和一个射频（RF）天线阵列，其中，电极阵列包括至少一个电极，射频天线阵列包括至少一个射频天线。在本实施例中，电极为诸如铁片、铜片等金属电极。物体由能与电极进行电容耦合的材料制成。通过交互板1探测到交互板1上的物体和交互板1的电极的电容耦合程度，交互板1推断出物体的位置。通过交互板1上的物体的射频识别标签和交互板1的射频天线的无线通信，交互板1能探测到物体的身份标识。
本发明实施例一提供的交互板1上的多物体的语音控制系统的工作流程:
步骤一，多个物体放置在交互板1上；
步骤二，交互板1识别多个物体的身份标识和位置；
步骤三，语音输入单元接收用户的语音指令；
步骤四，处理器根据用户的语音指令、物体的身份标识以及物体的在交互板上的位置来生成多个控制指令以分别控制每个物体。其中，处理器通过无线通讯方式给物体发送控制指令。
本发明实施例一提供一种交互板上的多物体的语音控制系统，提高用户操控多个物体的便利性，提升用户体验。
实施例二
实施例二提供了物体为机器人的语音控制系统，如图2所示。机器人207的执行模块为运动模块208。利用图2所示的物体是机器人的语音控制系统，两个用户可以进行竞赛游戏。每个用户操纵两个机器人207，用户随机捡起一个数字卡片209，决定机器人207沿着路径走几个方格，然后依据数字操纵机器人207。这样，两个用户进行回合制游戏，直到其中一个用户操纵的两个机器人207都到达“终点”方格，宣告了胜利者。
红色、黄色、蓝色、白色机器人207放置在交互板201上，红色机器人放置在印有标记“红”的第一排的起始位置，黄色机器人放置在印有标记“黄”的第二排的起始位置，蓝色机器人放置在印有标记“蓝”的第三排的起始位置，白色机器人放置在印有标记“白”的第四排的起始位置。交互板201识别机器人207的身份标识和位置。用户A操纵蓝色机器人207和白色机器人207。用户B操纵红色机器人207和黄色机器人207。按钮202从“off”状态转换成“on”状态，开启系统的语音控制功能。语音输入单元203接收用户A的语音指令“蓝色机器人前进3格，白色机器人前进3格”。处理器204解析出语音指令包含的动作内容以及机器人的名称，到存储器205中找到机器人的名称对应的机器人的身份标识，并获知机器人207在交互板201上的位置，处理器207根据动作内容、机器人的身份标识以及机器人在交互板201上的位置来生成多个控制指令以分别控制每个机器人207。交互板201包括一个无线通讯模块206，无线通讯模块206与处理器204相连。机器人207包括一个无线通讯模块，处理器304通过无线通讯方式给机器人207发送控制指令。机器人207的运动路径由控制指令定义。
实施例三
实施例三提供了物体为卡片的语音控制系统，如图3所示。卡片307的执行模块为显示模块。利用图3所示的物体是卡片的语音控制系统，用户可以进行语言学习。
多个卡片307放置在交互板301的功能区域，交互板301识别多个卡片307的身份标识和位置。按钮302从“off”状态转换成“on”状态，开启系统的语音控制功能。语音输入单元303接收用户的语音指令“显示apple”。处理器304解析出语音指令包含的显示内容“apple”，根据语音指令包含的显示内容确定需要的卡片307的数量是5个，并根据需要的卡片307的数量、卡片307的身份标识以及卡片307在交互板301上的位置来生成多个控制指令以分别控制每个卡片307。交互板301包括一个无线通讯模块306，无线通讯模块306和处理器304相连，卡片307包括一个无线通讯模块，处理器304通过无线通讯方式给卡片发送控制指令。每个卡片307的显示内容由所述控制指令定义。第二排5个相连的卡片307分别显示“A”，“P”，“P”，“L”，“E”。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (8)

1.一种交互板上的多物体的语音控制系统，其特征在于，包括：
多个物体，每个所述物体有一个身份标识、一个无线通讯模块以及一个执行模块；
交互板，所述交互板用于识别放置在所述交互板上的所述物体的身份标识和位置，所述交互板包括一个处理器、一个存储器、一个无线通讯模块以及一个语音输入单元，所述存储器存储有所述物体的身份标识与所述物体的名称之间的一一对应关系；
其中，多个所述物体放置在所述交互板上，所述处理器根据所述语音输入单元接收到的用户的语音指令、所述物体的身份标识以及所述物体在所述交互板上的位置来生成多个控制指令以分别控制每个所述物体。
2.根据权利要求1所述的语音控制系统，其特征在于，所述语音输入单元包括麦克风、录音器和具有语音录入功能的电子器件。
3.根据权利要求1所述的语音控制系统，其特征在于，所述执行模块为一个运动模块。
4.根据权利要求3所述的语音控制系统，其特征在于，所述处理器解析出所述语音指令包含的动作内容以及所述物体的名称，到所述存储器中找到与所述物体的名称对应的所述物体的身份标识，并获知所述物体在所述交互板上的位置，所述处理器根据所述动作内容、所述物体的身份标识以及所述物体在所述交互板上的位置来生成多个控制指令以分别控制每个所述物体。
5.根据权利要求4所述的语音控制系统，其特征在于，每个所述物体的运动路径由所述控制指令定义。
6.根据权利要求1所述的语音控制系统，其特征在于，所述执行模块为一个显示模块。
7.根据权利要求6所述的语音控制系统，其特征在于，所述处理器解析出所述语音指令包含的显示内容，根据所述语音指令包含的显示内容确定需要的所述物体的数量，并根据需要的所述物体的数量、所述物体的身份标识以及所述物体在所述交互板上的位置来生成多个控制指令以分别控制每个所述物体。
8.根据权利要求7所述的语音控制系统，其特征在于，每个所述物体的显示内容由所述控制指令定义。
CN201510799914.3A 2015-11-18 2015-11-18 交互板上的多物体的语音控制系统 Active CN106707805B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201510799914.3A CN106707805B (zh) 2015-11-18 2015-11-18 交互板上的多物体的语音控制系统
PCT/CN2016/105504 WO2017084537A1 (en) 2015-11-18 2016-11-11 System and method for controlling physical objects placed on an interactive board with voice commands
US15/976,858 US20180261221A1 (en) 2015-11-18 2018-05-10 System and method for controlling physical objects placed on an interactive board with voice commands

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510799914.3A CN106707805B (zh) 2015-11-18 2015-11-18 交互板上的多物体的语音控制系统

Publications (2)

Publication Number Publication Date
CN106707805A true CN106707805A (zh) 2017-05-24
CN106707805B CN106707805B (zh) 2019-02-05

Family

ID=58718017

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510799914.3A Active CN106707805B (zh) 2015-11-18 2015-11-18 交互板上的多物体的语音控制系统

Country Status (3)

Country Link
US (1) US20180261221A1 (zh)
CN (1) CN106707805B (zh)
WO (1) WO2017084537A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108972565A (zh) * 2018-09-27 2018-12-11 安徽昱康智能科技有限公司 机器人指令动作控制方法及其系统
CN109859752A (zh) * 2019-01-02 2019-06-07 珠海格力电器股份有限公司 一种语音控制方法、装置、存储介质及语音联控系统

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11687008B2 (en) 2018-02-22 2023-06-27 Applied Materials, Inc. Method for automated critical dimension measurement on a substrate for display manufacturing, method of inspecting a large area substrate for display manufacturing, apparatus for inspecting a large area substrate for display manufacturing and method of operating thereof
CN114343483B (zh) * 2020-10-12 2023-08-18 百度在线网络技术（北京）有限公司 可移动对象的控制方法、装置、设备以及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1416112A (zh) * 2001-11-02 2003-05-07 松下电器产业株式会社 利用语音识别的选台装置及其控制方法
CN101246687A (zh) * 2008-03-20 2008-08-20 北京航空航天大学 一种智能语音交互系统及交互方法
CN102902253A (zh) * 2012-10-09 2013-01-30 鸿富锦精密工业（深圳）有限公司 具有语音控制功能的智能开关及智能控制系统
CN104571516A (zh) * 2014-12-31 2015-04-29 武汉百景互动科技有限责任公司 互动广告系统
US20150302851A1 (en) * 2014-04-18 2015-10-22 General Motors Llc Gesture-based cues for an automatic speech recognition system

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI20001425A0 (fi) * 2000-06-15 2000-06-15 Nokia Corp Menetelmä ja järjestely viihteellisten sovellusten jakelemiseksi ja suorittamiseksi kannettavissa viestinlaitteissa ja niiden välillä
US20040068370A1 (en) * 2002-10-08 2004-04-08 Moody Peter A. Use of distributed speech recognition (DSR) for off-board application processing
TWI347853B (en) * 2007-03-29 2011-09-01 Ind Tech Res Inst Portable robotic board game playing system
US8602857B2 (en) * 2008-06-03 2013-12-10 Tweedletech, Llc Intelligent board game system with visual marker based game object tracking and identification
US8517383B2 (en) * 2008-06-20 2013-08-27 Pure Imagination, LLC Interactive game board system incorporating capacitive sensing and identification of game pieces
US8494695B2 (en) * 2009-09-02 2013-07-23 General Electric Company Communications system and method for a rail vehicle
CN202168152U (zh) * 2011-07-21 2012-03-14 德信互动科技（北京）有限公司 电视控制系统
CN103632669A (zh) * 2012-08-20 2014-03-12 上海闻通信息科技有限公司 一种语音控制遥控器的方法以及一种语音遥控器
US8833770B1 (en) * 2013-10-30 2014-09-16 Rodney J Benesh Board game method and apparatus for providing electronically variable game pieces
CN204480661U (zh) * 2015-03-17 2015-07-15 上海元趣信息技术有限公司 语音控制装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1416112A (zh) * 2001-11-02 2003-05-07 松下电器产业株式会社 利用语音识别的选台装置及其控制方法
CN101246687A (zh) * 2008-03-20 2008-08-20 北京航空航天大学 一种智能语音交互系统及交互方法
CN102902253A (zh) * 2012-10-09 2013-01-30 鸿富锦精密工业（深圳）有限公司 具有语音控制功能的智能开关及智能控制系统
US20150302851A1 (en) * 2014-04-18 2015-10-22 General Motors Llc Gesture-based cues for an automatic speech recognition system
CN104571516A (zh) * 2014-12-31 2015-04-29 武汉百景互动科技有限责任公司 互动广告系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108972565A (zh) * 2018-09-27 2018-12-11 安徽昱康智能科技有限公司 机器人指令动作控制方法及其系统
CN109859752A (zh) * 2019-01-02 2019-06-07 珠海格力电器股份有限公司 一种语音控制方法、装置、存储介质及语音联控系统

Also Published As

Publication number Publication date
WO2017084537A1 (en) 2017-05-26
CN106707805B (zh) 2019-02-05
US20180261221A1 (en) 2018-09-13

Similar Documents

Publication Publication Date Title
CN106707805A (zh) 交互板上的多物体的语音控制系统
CN110020010A (zh) 数据处理方法、装置及电子设备
CN202068693U (zh) 终端前壳的壳体及终端
CN108491707A (zh) 一种解锁控制方法及终端设备和介质产品
CN105912918A (zh) 一种指纹解锁方法及终端
CN109471742A (zh) 信息处理方法、装置、电子设备及可读存储介质
CN107885448A (zh) 应用触摸操作的控制方法、移动终端及可读存储介质
CN110781881A (zh) 一种视频中的赛事比分识别方法、装置、设备及存储介质
CN107967056A (zh) 柔性屏幕的控制方法、终端及计算机可读存储介质
CN103514780B (zh) 一种摆放笔画的练字方法和练字设备
JP2015535967A (ja) インタラクション処理方法、装置および電子機器
CN110187953A (zh) 一种应用程序的运行方法及装置
CN109039563A (zh) 载波聚合配置方法及相关产品
CN110796096B (zh) 一种手势识别模型的训练方法、装置、设备及介质
CN107277229A (zh) 一种信息输入方法、终端及计算机可读存储介质
CN107195220A (zh) 书写学习方法、书写学习装置及电子终端
CN105491183B (zh) 电子设备
CN102707835A (zh) 一种手持终端、交互系统及其交互方法
CN108667589A (zh) 载波聚合配置方法及相关产品
CN108471549A (zh) 一种遥控方法及终端
CN110503189B (zh) 一种数据处理方法以及装置
US11307717B2 (en) Information processing apparatus and information processing system
CN107357564A (zh) 一种定制应用程序按钮的方法和设备
CN113442134A (zh) 机器人编程控制系统
CN106650388A (zh) 交互板上的物理实体的密码管理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 100102 Chaoyang District, Beijing, Guangzhou, North 33 Avenue, 6 tower, Fu Tai Center 6, 603 rooms.

Applicant after: Shi Zheng

Address before: 100022 Chaoyang District, Beijing Jian Wai Street B 12, Gemini building, 1208 West Tower.

Applicant before: Shi Zheng

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant