CN108475504A - 通信装置 - Google Patents
通信装置 Download PDFInfo
- Publication number
- CN108475504A CN108475504A CN201680062048.2A CN201680062048A CN108475504A CN 108475504 A CN108475504 A CN 108475504A CN 201680062048 A CN201680062048 A CN 201680062048A CN 108475504 A CN108475504 A CN 108475504A
- Authority
- CN
- China
- Prior art keywords
- user
- communication device
- communication
- instruction
- equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000006854 communication Effects 0.000 title claims abstract description 214
- 238000004891 communication Methods 0.000 title claims abstract description 211
- 230000009471 action Effects 0.000 claims description 15
- 230000004069 differentiation Effects 0.000 claims description 8
- 238000005516 engineering process Methods 0.000 abstract description 9
- 238000004378 air conditioning Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 6
- 239000000203 mixture Substances 0.000 description 6
- 230000001755 vocal effect Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000005611 electricity Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000000280 densification Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/10—Speech classification or search using distance or distortion measures between unknown speech and reference templates
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
- G10L15/065—Adaptation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/083—Recognition networks
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Computer Security & Cryptography (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Artificial Intelligence (AREA)
- Telephonic Communication Services (AREA)
- Selective Calling Equipment (AREA)
Abstract
本发明提供一种在多个设备进行通信的系统中，使设备之间的协作的可靠性提升的技术。在信息家电系统中，多个信息家电(40)与智能手机等通信装置(10A)进行M2M通信。通信装置(10A)接收来自用户的声音输入，并基于声音信号和为识别用户而蓄积的样本声音数据认证用户。通信装置(10A)通过对声音信号进行声音识别处理来判别用户的指示内容。在用户被认证且用户的指示内容被判别的情况下，通信装置(10A)将与指示内容相关的指令发送到与判别了用户的指示内容相关联的信息家电(40)。
Description
技术领域
本发明公开涉及通过多个设备进行通信而使这些设备协作工作的系统，且涉及使这些设备之间协作的可靠性提升的技术。本申请基于2015年10月23日申请的日本专利申请第2015-208939号而主张优先权。该日本专利申请所记载的所有记载内容，通过参考而引用于本说明书。
背景技术
以往，例如在房间等设施中，应用多个设备进行通信的系统。例如，信息家电通过家庭内的网络而连接，且通过从用户的移动终端对这些信息家电发送指令，由此用户能控制信息家电。这样，由于用户的便利性得到提高，因此正在研究各种技术。例如，日本专利特开2012-37783号公报(专利文献1)记载了使操作性提升而不降低便利性的信息家电系统。根据专利文献1的技术，通过声音识别装置将声音识别的结果作为识别结果信息发送至信息家电。由此，在由通过网络连接的信息家电构成的系统中，通过用户对移动终端进行声音输入，能够经由声音识别服务器来控制信息家电。
现有技术文献
专利文献
专利文献1：特开2012-37783号公报
专利文献2：特开2006-17936号公报
发明内容
本发明所要解决的技术问题
从安全对策等观点来看，有时期望限定能够控制信息家电动作的用户。例如，有时期望将可以控制设施内所设置的电视机、空调或其他信息家电的动作的用户限定在居住于设施的用户，或管理设施的用户等其他用户中。但是，根据专利文献1的技术，不管是用户谁来通过声音向信息家电发出指令，都基于由声音识别指示的命令内容来控制各信息家电。此外，在通过用户将用于识别个人的信息进行声音输入，并将用于确定用户的信息发送到声音识别服务器的情况下，从安全性的观点来看，需要对用于识别这些个人的信息进行保密化等处理。
因此，在多个设备进行通信的系统中，需要能将与信息家电的控制相关的安全性发挥到一定水准以上，并且能容易地控制信息家电的动作的技术。本公开的目的在于，提供一种在这些多个设备进行通信的系统中，使设备之间的协作的可靠性提升的技术。
解决问题的手段
根据一个实施方式的通信装置，被配置为能与一个以上的通信设备通信。通信装置包括：声音处理部，其被配置为接收声音的输入，并基于接收到的声音输出声音信号；及控制部，其被配置为控制所述通信装置的动作。所述控制部包括：用户识别部，其基于所述声音信号和为识别用户而蓄积于存储部的声音数据，进行认证用户的处理；指示判别部，其通过对所述声音信号进行声音识别处理，来判别所述接收到的声音所示的用户的指示内容；及协作设备处理部，其在利用所述用户识别部对用户进行了认证，并利用所述指示判别部判别了所述用户的指示内容的情况下，将与所述指示内容相关的指令发送到与判别了所述用户的指示内容相关联的所述通信设备。
根据一个实施方式的通信装置为能与服务器装置通信的通信装置。服务器装置配置为存储用于识别用户的声音数据。通信装置被配置为能与一个以上的通信设备通信。通信装置包括：声音处理部，其被配置为接收声音的输入，并基于接收到的声音输出声音信号；及控制部，其被配置为控制所述通信装置的动作。控制部包括协作设备处理部，其通过向所述服务器装置发送所述声音信号，使在所述服务器装置中进行基于所述声音信号的认证用户的处理，以及判别所述声音信号所示的用户的指示内容的处理，并从所述服务器装置接收处理结果，在利用所述服务器装置认证了用户，且判别了所述用户的指示内容的情况下，将与所述指示内容相关的指令发送到与所述判别了所述用户的指示内容相关联的所述通信设备。
发明效果
根据一个实施方式，在用户被认证且通过声音识别处理判别了用户的指示内容的情况下，通信装置对通信设备发送指令，因此能够限定可以控制信息家电等通信设备的用户，并且能通过声音识别使用户容易地控制信息家电。因此，能够使设备之间的协作的可靠性提升。
根据以下结合附图理解的关于本发明的详细说明，本发明的上述及其他目的、特征、方面和优点将变得明白。
附图说明
图1是表示本实施方式的信息家电系统的概要的图。
图2是表示通信装置10的构成和服务器20的构成的框图。
图3是表示可穿戴通信设备30的构成的概略的图。
图4是表示通信装置10接收用户的声音输入，并基于接收到的声音进行认证用户的处理，以及判别用户的指示内容，根据处理结果向信息家电40发送指令的处理的流程图。
具体实施方式
以下，一边参照附图，一边对本发明的实施方式进行说明。在以下的说明中，对相同的部件标注相同的附图标记。它们的名称和功能也相同。因此，不重复对它们的详细的说明。
<实施方式>
本实施方式中，对由智能手机等通信装置和电视机、空调等信息家电(通信设备)构成的信息家电系统进行说明。
图1是表示本实施方式的信息家电系统的概要的图。如图1所示，信息家电系统被配置为使智能手机等的通信装置10A，与信息家电40A(电视机)、信息家电40B(空调)等的通信设备(以下，有时也将信息家电40A、信息家电40B等信息家电统称为“信息家电40”)能够通信。例如，通信装置10A经由安装在设施内的宽带路由器91与信息家电40进行通信。可穿戴通信设备30为用户穿戴的可穿戴设备。例如，可穿戴通信设备30按照蓝牙(注册商标)等短距离无线标准与通信设备10A进行通信。例如，可穿戴通信设备30包括接收用户的声音输入的麦克风，并将由麦克风接收的声音转换为声音信号并发送至通信设备10A。
通信装置10A经由宽带路由器91与网络90连接。通信装置10B经由无线基站92与网络90连接。通信装置10A和通信装置10B通过网络90与服务器20进行通信。通信装置10B可以经由网络90发送用于控制信息家电40的工作的指令。以下，有时也将通信装置10A和通信装置10B统称为“通信装置10”。
服务器20从通信装置10A等接收声音信号并进行声音识别处理。服务器20通过进行声音识别处理而确定进行了声音输入的用户的意图，并将声音识别处理的结果响应给通信装置10A等。
通信装置10A及通信装置10B例如为智能手机，但并不限定于此。通信装置10A及通信装置10B对应于3G、LTE(Long Term Evolution，长期演进)、高速无线LAN(Local AreaNetwork，局域网)标准、蓝牙(注册商标)等多个无线通信规格。如图1所示，通信装置10A的用户在家中。家中设置有各种信息家电40(例如，电视机40A及空调40B)。信息家电40具有通信功能，并且可以通过与宽带路由器91通信，而经由网络90与服务器20进行通信。包括在信息家电40中的各家电设备将工作状况依次发送到服务器20。服务器20经由网络90接收包括在信息家电40中的各家电设备的工作状况，并且蓄积所接收的工作状况的信息。
<构成>
参照图2，对与本实施方式相关的各装置进行详细地说明。
图2是表示通信装置10的构成和服务器20的构成的框图。通信装置10与可穿戴通信设备30之间相互可通信。
如图2所示，通信装置10包含：天线101、无线通信部111、物理操作键131、操作接收部(触摸面板)141、显示器142、电源控制部143、照相机145、声音处理部146、麦克风147、扬声器148、存储部150和控制部160。
天线101发射作为电波的通信装置10所发出的信号。此外，天线101从空间接收电波并将接收信号提供给无线通信部111。在本实施方式中，通信装置10与多个无线通信规格对应。
为使通信装置10与其他无线设备进行通信，无线通信部111经由天线101等进行用于接收发送信号的调制解调处理。无线通信部111为包含调谐器、RSSI(Received SignalStrength Indicator，接收信号强度指示符)计算电路、CRC(Cyclic Redundancy Check，循环冗余校验)计算电路和高频电路等的通信模块。无线通信部111进行由通信装置10接收发送的无线信号的调制解调和频率转换，并将接收信号提供给控制部160。
物理操作键131为物理输入装置，并接收用户的按压操作。物理操作键131根据用户的按压操作，将表示操作内容的信号输出到控制部160。
操作接收部141接收用户的输入操作。操作接收部141通过例如使用静电电容方式的触摸面板来检测用户的接触位置。操作接收部141将检测出的表示用户的接触位置的信号作为输入操作输出到控制部160。
显示器142根据控制部160的控制，显示图像、动画、文本等数据。显示器142通过例如LCD(Liquid Crystal Display，液晶显示器)、有机EL(Electro-Luminescence，电致发光)显示器来实现。
电源控制部143控制对通信装置10的各电路的电力的供给。电源控制部143例如为电源控制用IC(Integrated Circuit，集成电路)。电池144是供给用于使通信装置10的各电路动作的电力的供给源。充于电池144中的电力按照电源控制部143的控制被供给到各电路。
声音处理部146进行声音信号的调制解调。声音处理部146对从麦克风147提供的信号进行调制，并将调制后的信号提供到控制部160。此外，声音处理部146将声音信号提供到扬声器148。声音处理部146例如由声音处理用处理器来实现。麦克风147接收声音输入，并将与该声音输入对应的声音信号提供到声音处理部146。扬声器148将从声音处理部146提供的声音信号转换为声音，并将该声音输出到通信装置10的外部。
存储部150例如由闪存等构成，并存储通信装置10所使用的数据及程序。在某个方面中，存储部150存储用户声音信息151和设备管理信息152。此外，在用户为多个的情况下，存储部150针对多个用户中的每一个，管理并存储可发送指令的信息家电40以及可发送的指令内容的信息。
用户声音信息151是存储于存储部150的用户的样本声音数据，以通过声音来识别用户。例如，通信装置10每当用户进行通话等时，对用户的声音进行采样并存储为用户声音信息151。
设备管理信息152是用于管理与通信装置10通信的信息家电40的信息。用于管理信息家电40的信息是指例如用于通信装置10与信息家电40进行通信的地址(MAC(mediaaccess control，媒体访问控制)地址等)等。例如，通过送出信标信号等，通信装置10将与通信装置10通信中的信息家电40的列表作为设备管理信息152存储于存储部150中。
控制部160通过读取存储于存储部150中的程序并执行程序中所包括的命令，来控制通信装置10的动作。控制部160例如为应用处理器。通过按照程序进行操作，控制部160发挥作为声音输入接收部161、用户识别部162、指示判别部163和协作设备处理部164的功能。
声音输入接收部161利用麦克风147接收用户的声音输入，并生成声音信号。
用户识别部162基于通过声音输入接收部161所生成的声音信号，和为了识别用户而蓄积于存储部150的用户声音信息151，进行认证用户的处理。在用户为多个的情况下，用户识别部162认证多个用户中的哪个用户向通信装置10输入了声音。
指示判别部163通过对由声音输入接收部161生成的声音信号进行声音识别处理，来判别由声音所表示的用户的指示内容。
在利用用户识别部162认证了用户，并通过指示判别部163判别了用户的指示内容的情况下，协作设备处理部164向与判别了用户的指示内容相关联的信息家电40发送与指示内容相关的指令。在根据指示判别部163的用户的指示内容的判别结果为针对能与通信装置10通信的一个以上的信息家电40的指示的情况下，协作设备处理部164将该指令发送到成为指令的发送对象的信息家电40。在与用户的指示内容相关联的信息家电40为多个的情况下，协作设备处理部164从用户接收将指令发送至哪个信息家电40的选择操作，并基于选择结果，设定各信息家电的优先度，基于所设定的优先度向用户通知成为选择对象的信息家电的候选。在利用用户识别部162的用户的认证，和利用指示判别部163的用户的指示内容的判别中至少有一个失败了的情况下，协作设备处理部164停止对信息家电40发送指令。对于由用户识别部162认证了的用户，协作设备处理部164根据可发送指令的信息家电40以及可发送的指令内容的信息的管理内容，将指令发送至信息家电40。
参照图2，服务器20包括：通信部202、存储部206和控制部207。存储部206由闪存、HDD(Hard Disk Drive，硬盘驱动器)、RAM(Random Access Memory，随机存取存储器)等构成，并存储服务器20使用的程序，蓄积服务器20使用的各种数据。通信部202是进行用于服务器20与其他通信设备进行通信的调制解调处理的通信接口。
在某个方面中，存储部206存储用户声音信息261和设备管理信息262。用户声音信息261是用于通过声音来识别用户的用户的样本声音数据。通过比较预先存储于存储器的用户的样本声音和利用麦克风147等输入的声音的用户的认证处理由通信装置10进行，但除此以外，也可以通过以下来进行：服务器20从通信装置10接收利用麦克风147等输入的声音，并比较接收到的声音和用户声音信息261。
设备管理信息262是用于管理与通信装置10通信的信息家电40的信息。设备管理信息262例如包含设施内所配置的信息家电40的地址，信息家电40的消耗电力的信息及其他信息。
控制部207通过执行读取存储于存储部206的程序，来控制服务器20的动作。控制部207例如由多个处理器来实现。通过按照程序进行动作，控制部207作为通话处理部271、用户识别部272、指示判别部273和协作设备处理部274而发挥功能。
通话处理部271在通信装置10A和通信装置10B例如使用通话应用来进行通话处理时，进行这些通信装置之间的通信建立以及声音数据的接收发送。
用户识别部272接收由通信装置10的声音输入接收部161生成的声音信号，并基于接收的声音信号，和为了识别用户而蓄积于存储器206的用户声音信息261，进行认证用户的处理。在用户为多个的情况下，用户识别部272认证多个用户中的哪个用户向通信装置10输入了声音。
指示判别部273通过对由通信装置10的声音输入接收部161所生成的声音信号进行声音识别处理，来判别由声音所示的用户的指示内容。
在利用用户识别部162对用户进行了认证，并由指示判别部163判别了用户的指示内容的情况下，协作设备处理部274将与指示内容相关的指令发送到与判别了用户的指示内容相关联的信息家电40。
这样，基于用户的声音的样本数据，服务器20也可以在其他通信装置10进行如下处理：认证对通信装置10进行了声音输入的用户的处理、通过对声音信号进行声音识别处理而判别用户的指示内容的处理、和对与判别了用户的指示内容相关联的信息家电40发送指令的处理。
图3是表示可穿戴通信设备30的构成的概略的图。可穿戴通信设备30为人体上所穿戴的装置，例如通过手表型装置、眼镜型装置和手镯型装置等各种方式来实现。可穿戴通信设备30利用蓝牙(注册商标)等近距离无线通信规格与通信装置10连接，并与通信装置10协作来进行各种处理。例如，可穿戴通信设备30从通信装置10接收各种通知(消息应用的新消息等)，并通过声音等将通知向用户通知。
如图3所示，可穿戴通信设备30包括：天线301、无线通信部311、物理操作键331、操作接收部(触摸面板)341、显示器342、声音处理部346、麦克风347、扬声器348、存储部350和控制部360。
天线301发射作为电波的可穿戴通信设备30发出的信号。此外，天线301从空间接收电波并将接收信号提供给无线通信部311。在本实施方式中，可穿戴通信设备30与多个无线通信规格对应。
无线通信部311经由天线301等进行用于接收发送信号的调制解调处理。无线通信部311为包含调谐器、RSSI计算电路、CRC计算电路和高频电路等的通信模块。无线通信部311进行由可穿戴通信设备30接收发送的无线信号的调制解调和频率转换，并将接收信号提供给控制部360。
物理操作键331为物理输入装置，并接收用户的按压操作。物理操作键331根据用户的按压操作，将表示操作内容的信号输出到控制部360。例如，在可穿戴通信设备30为手表型的可穿戴设备的情况下，物理操作键331为手表所具备的表把等。
操作接收部341接收用户的输入操作。操作接收部341例如通过使用静电电容方式的触摸面板来检测用户的接触位置。操作接收部341将检测出的表示用户的接触位置的信号作为输入操作输出到控制部360。
显示器342根据控制部360的控制，显示图像、动画、文本及其他信息。显示器342通过例如LCD或有机EL显示器来实现。
声音处理部346进行声音信号的调制解调。声音处理部346对从麦克风347提供的信号进行调制，并将调制后的信号提供到控制部360。此外，声音处理部346将声音信号提供到扬声器348。声音处理部346例如由声音处理用处理器来实现。
麦克风347接收声音输入，并将与该声音输入对应的声音信号提供到声音处理部346。扬声器348将从声音处理部346提供的声音信号转换为声音，并将该声音输出到可穿戴通信设备30的外部。
存储部350例如由闪存等构成，并存储可穿戴通信设备30所使用的数据及程序。在某个方面中，存储部350存储用户声音数据352。用户声音数据352是表示声音信号的数据，该声音信号通过可穿戴通信设备30对经由麦克风347而接收到输入的声音进行数字转换处理而生成。
控制部360通过读取存储于存储部350中的程序并执行程序中包括的命令，来控制可穿戴通信设备30的动作。控制部360例如为应用处理器。通过按照程序进行操作，控制部360发挥作为通信处理部361和声音输入接收部362的功能。
通信处理部361建立可穿戴通信设备30与通信装置10等外部装置之间的通信连接，并进行与外部装置的数据的接收发送处理。例如，可穿戴通信设备30通过蓝牙(注册商标)、无线LAN规格等与通信装置10进行通信连接。
声音输入接收部362接收可穿戴通信设备30经由麦克风347输入的声音，并进行生成声音信号的处理，该声音信号已对接收到的声音进行了数字转换处理。
<动作>
参照图4，对构成本实施方式的信息家电系统的通信装置10的动作进行说明。
图4是表示通信装置10接收用户的声音输入，并基于接收到的声音进行认证用户的处理，以及判别用户的指示内容，根据处理结果向信息家电40发送指令的处理的流程图。
步骤S101中，通信装置10经由麦克风147接收用户的声音输入。用户将包含针对信息家电40的指令的声音输入到麦克风147。
步骤S102中，通信装置10通过比较在通话处理时等将用户的声音作为样本数据蓄积的用户声音信息151，和接收到步骤S101中输入的声音的声音信号，来进行声纹判别处理。由此，通信装置10进行用户的认证。通信装置10在通过声纹判别处理认证了用户的情况下(步骤S102中为“是”)，进行步骤S103的处理，在声纹判别处理的结果为认证用户失败了的情况下(步骤S102中为“否”)，进行步骤S104的处理。
步骤S103中，通信装置10通过对步骤S101中接收了输入的声音的声音信号进行声音识别处理，来解释用户的意图，该意图包含用户对信息家电40的指令。
步骤S104中，通信装置10通过在显示器142上显示，并通过扬声器148输出声音来向用户通知通过声音的用户认证失败了。
步骤S105中，通信装置10判别通过步骤S103的处理而解释用户的意图的结果是否是通过通信处理与通信装置10协作的信息家电40要处理的内容。例如，通信装置10在通过步骤S103的处理而解释用户的意图的结果中，提取识别信息家电40的信息(例如，用户的声音信号中，设备“空调”、设备“电视机”等)。通信装置10通过参照设备管理信息152来判定用户指定的信息家电40和通信装置10是否能够通信。此外，通信装置10在通过步骤S103的处理而解释用户的意图的结果中，判定用户对信息家电40进行指示的内容是否能够在用户指定的信息家电40中执行。例如，针对设备“空调”，如果指令内容为变更设定温度，则通信装置10判定为是设备“空调”能执行的处理。这样，通信装置10在解释用户的意图的结果中，判定用户指定的设备与通信装置10是否通过通信处理协作，或者针对用户指定的设备，判定用户的指令内容是否可执行。例如，在设备管理信息152中，通过通信而与通信装置10协作的设备的识别信息，与可发送到这些设备的指令相关联。在通过步骤S103的处理解释用户的意图的结果，是通过通信处理与通信装置10协作的信息家电40要处理的内容的情况下(步骤S105中为“是”)，通信装置10进行步骤S106的处理，如果不是(步骤S105中为“否”)，则通信装置进行步骤S107的处理。
步骤S106中，通信装置10根据通过步骤S103的处理解释用户的意图的结果，判定用户指定的信息家电40是否存在多个。通信装置10在解释用户的意图的结果中，提取识别信息家电40的信息，基于提取结果，判定是否包含针对多个设备的指令。例如，在用户的声音信号中包含识别如设备“空调”、设备“电视机”这样的设备的多个信息的情况下，通信装置10判定用户指定的信息家电40存在多个。通信装置10在解释用户的意图的结果中判定了包含针对多个设备的指令的情况下(步骤S106中为“是”)，进行步骤S108的处理，如果不包含(步骤S106中为“否”)，则进行步骤S110的处理。
步骤S107中，通信装置10通过在显示器142上显示，并通过扬声器148输出声音来向用户通知表示根据用户的声音应将指令发送到的信息家电40不存在的错误通知。
步骤S108中，为了使用户选择指定在多个信息家电40中应该对哪个设备发送用户的指令，通信装置10在显示器142上显示成为选择对象的设备的候选，或者，通过扬声器148来声音输出成为选择对象的设备的候选，并通过麦克风从用户接收通过声音输入的设备的指定等，接收用户对设备的选择。
步骤S109中，通信装置10存储步骤S108中从用户接收到的选择的设备。通过将用户选择的设备的信息作为历史信息存储，通信装置10在用户下一次对多个设备发出指令的情况下，在从用户接收对设备的选择时，按照用户选择的设备的历史信息，例如将用户选择次数较多的设备优先作为选择候选向用户通知。例如，在用户指定的信息家电40存在多个的情况下，通信装置10基于用户选择设备的次数的历史信息，将选择次数较多的设备优先显示于显示器142。
步骤S110中，通信装置10将按照在步骤S103中解释的用户的意图的指令通知给与用户的指令相关联的信息家电40(在解释用户的意图的结果中，用户指定的信息家电40存在多个的情况下，由用户选择的信息家电40)。例如，通信装置10通过对来自用户的输入声音进行声音识别处理，来向设备“空调”发送指令内容为“电源关闭”等的指令。
步骤S111中，从通信装置10接收了用户的指令的信息家电40根据从通信装置10接收的指令进行处理。
<总结>
以往，存在通过对由用户输入的声音进行声音识别处理，以对信息家电进行动作指示的通信装置。但是，不进行用户的认证就通过声音识别处理进行对信息家电的动作指示，有可能使第三方操作信息家电，从安全性的观点来看存在问题。因此，为了实施安全对策，需要另外采取用户声音输入用于识别用户的信息等，并将基于所输入的声音的声音信号发送到声音识别服务器等措施。特别是，在用户的认证中，对于声音输入期望隐藏的信息(ID信息等)或向声音识别服务器等发送期望隐藏的信息(ID信息等)，从安全性的观点来看需要另外的对策。
与此相对，根据本实施方式，使用了通过例如在通话处理时等使用户的声音作为样本数据保存，并蓄积于通信装置10中，而使用户的声音的识别准确度提升的通信装置10。基于存储于这样的通信装置10的用户的样本声音数据，由于与输入至通信装置10的声音相比较而进行用户的认证，从而能够容易地进行用户的认证。
进一步地，通过通信装置10对基于用户输入至通信装置10的声音的声音信号进行声音识别处理，与通信装置10协作的信息家电40可以通过机器对机器(Machine toMachine，M2M)技术共享用户声音的声音识别结果。
通信装置10能够通过声音识别处理来解释用户的意图，并根据解释结果，对合适的信息家电40指示基于声音识别处理结果的处理。由此，安全性高的声音识别处理，以及在合适的设备执行处理成为可能。进一步地，在通信装置10对应于多个用户的操作的情况下，可以基于对多个用户的每一个的用户认证以及声音识别处理，向信息家电40发出指令。例如，每个用户可以对通信装置10管理的信息家电40进行管理。
这样的信息家电系统例如可以通过基于用户声音的用户认证来解除通信装置10的锁定，并且可以针对信息家电进行各种处理。例如，通过使用根据本实施方式的家电系统，用户可以将针对通信装置10的声音输入作为用于启动家庭安全性相关联的功能的触发器而使用。此外，在能够声音识别的终端中，可以使用作为安全性对策的本实施方式的信息家电系统的技术。此外，通过用户使用信息家电系统，可以根据来自通信装置10的声音输入进行信息家电40的远程操作。
另外，在图4的说明中，说明了通信装置10基于输入至麦克风147的声音(步骤S101)进行声纹判别处理及声音识别处理(步骤S102、步骤S103)。通信装置10也可以不限于从麦克风147输入的声音，而通过可穿戴通信设备30等与通信装置10进行通信连接的设备接收声音输入，并通过从可穿戴通信设备30接收声音信号，进行声纹判别处理等。
构成本实施方式涉及的系统的各装置由处理器和在其上所执行的程序实现。实现本实施方式的程序通过应用经由通信接口的网络的接收和发送而被提供。
应认为此次公开的实施方式在全部方面为例示而非限制性内容。本发明的范围不是由上述说明而是由权利要求书表示，旨在包括与权利要求书等同的含义和范围内的所有变更。
符号说明
101天线、111无线通信部、131物理操作键、141操作接收部、142显示器、143电源控制部、145照相机、146声音处理部、147麦克风、148扬声器、150存储部、151用户声音信息、152设备管理信息、160控制部、161声音输入接收部、162用户识别部、163指示判别部、164协作设备处理部、202通信部、206存储部、207控制部、261用户声音信息、262设备管理信息、271通话处理部、272用户识别部、273指示判别部、274协作设备处理部、301天线、311无线通信部、341操作接收部、342显示器、346声音处理部、347麦克风、348扬声、350存储部、352用户声音数据、360控制部、361通信处理部、362声音输入接收部、10通信装置、20服务器、30可穿戴通信设备、40信息家电、90网络、91宽带路由器、92无线基站。
Claims (6)
1.一种通信装置，其特征在于：
被配置为能与一个以上的通信设备通信，
所述通信装置包括：
声音处理部，其被配置为接收声音的输入，并基于接收到的声音输出声音信号；及
控制部，其被配置为控制所述通信装置的动作，
所述控制部包括：
用户识别部，其基于所述声音信号和为识别用户而蓄积于存储部的声音数据，进行认证用户的处理；
指示判别部，其通过对所述声音信号进行声音识别处理，来判别所述接收到的声音所表示的用户的指示内容；及
协作设备处理部，其在利用所述用户识别部对用户进行了认证，并利用所述指示判别部判别了所述用户的指示内容的情况下，将与所述指示内容相关的指令发送到与判别了所述用户的指示内容相关联的所述通信设备。
2.根据权利要求1所述的通信装置，其特征在于，所述控制部的所述协作设备处理部发送所述指令包括：在所述用户的指示内容的判别结果是针对与所述通信装置可通信的一个以上的所述通信设备的指示的情况下，将所述指令发送到所述通信设备。
3.根据权利要求1或2所述的通信装置，其特征在于，所述控制部的所述协作设备处理部发送所述指令包括：在与所述用户的指示内容相关联的所述通信设备存在多个的情况下，从用户接收是否针对哪个通信设备发送指令的选择操作，并基于选择结果，设定各通信设备的优先度，基于设定的所述优先度向用户通知成为所述选择对象的通信设备的候选。
4.根据权利要求1至3任一项所述的通信装置，其特征在于，在利用所述用户识别部的所述用户的认证，和利用所述指示判别部的所述用户的指示内容的判别中至少有一个失败了的情况下，所述控制部的所述协作设备处理部发送所述指令包括：停止对所述通信设备发送所述指令。
5.根据权利要求1至4任一项所述的通信装置，其特征在于，所述控制部的所述用户识别部进行的处理包括：认证多个用户中的哪个用户向所述通信装置输入了所述声音，
所述通信装置对于所述多个用户的每一个，配置为存储可发送指令的所述通信设备以及可发送的指令内容的信息，
所述协作设备处理部发送所述指令包括：对于所述认证了的用户，按照可发送所述指令的所述通信设备以及可发送的指令内容的信息，将所述指令发送至所述通信设备。
6.一种通信装置，是能与服务器装置通信的通信装置，其特征在于：
所述服务器装置配置为存储用于识别用户的声音数据，
所述通信装置被配置为能与一个以上的通信设备通信，并包括：
声音处理部，其被配置为接收声音的输入，并基于接收到的声音输出声音信号；及
控制部，其被配置为控制所述通信装置的动作，
所述控制部：
包括协作设备处理部，其通过向所述服务器装置发送所述声音信号，使在所述服务器装置中进行基于所述声音信号的认证用户的处理，以及判别所述声音信号所表示的用户的指示内容的处理，并从所述服务器装置接收处理结果，在利用所述服务器装置认证了用户且判别了所述用户的指示内容的情况下，将与所述指示内容相关的指令发送到与所述判别了所述用户的指示内容相关联的所述通信设备。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015208939A JP6710037B2 (ja) | 2015-10-23 | 2015-10-23 | 通信装置 |
| PCT/IB2016/057805 WO2017068560A1 (ja) | 2015-10-23 | 2016-12-20 | 通信装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108475504A true CN108475504A (zh) | 2018-08-31 |
Family
ID=58558185
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201680062048.2A Pending CN108475504A (zh) | 2015-10-23 | 2016-12-20 | 通信装置 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US10650825B2 (zh) |
| JP (1) | JP6710037B2 (zh) |
| CN (1) | CN108475504A (zh) |
| WO (1) | WO2017068560A1 (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111771185A (zh) * | 2018-02-26 | 2020-10-13 | 三星电子株式会社 | 用于执行语音命令的方法及系统 |
| CN112242939A (zh) * | 2019-07-18 | 2021-01-19 | 东芝生活电器株式会社 | 家电设备以及信息处理系统 |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102428148B1 (ko) * | 2017-08-31 | 2022-08-02 | 삼성전자주식회사 | 가전 기기의 음성 인식을 위한 시스템과 서버, 방법 |
| CN107479400A (zh) * | 2017-09-28 | 2017-12-15 | 广东美的制冷设备有限公司 | 家电设备的控制方法、装置、家电设备及可读存储介质 |
| JP7245999B2 (ja) * | 2018-02-14 | 2023-03-27 | パナソニックＩｐマネジメント株式会社 | 制御情報取得システム、及び、制御情報取得方法 |
| CN108962244A (zh) * | 2018-06-29 | 2018-12-07 | 百度在线网络技术（北京）有限公司 | 用于发送信息的方法和装置 |
| JP7182969B2 (ja) * | 2018-09-20 | 2022-12-05 | ヤフー株式会社 | コミュニケーション支援装置、ユーザデバイス、コミュニケーション支援方法、およびプログラム |
| CN109065058B (zh) * | 2018-09-30 | 2024-03-15 | 合肥鑫晟光电科技有限公司 | 语音通信方法、装置及系统 |
| JP7364923B2 (ja) * | 2019-01-29 | 2023-10-19 | ダイキン工業株式会社 | 空気調和システム、サーバ、空気調和システムの制御方法、プログラム及び記録媒体 |
| WO2020175802A1 (en) * | 2019-02-27 | 2020-09-03 | Samsung Electronics Co., Ltd. | Electronic apparatus and control method thereof |
| JP7133512B2 (ja) * | 2019-06-11 | 2022-09-08 | 株式会社日立製作所 | 自動点検システム |
| JP7349659B2 (ja) * | 2019-08-08 | 2023-09-25 | パナソニックＩｐマネジメント株式会社 | 制御システム、及び、制御方法 |
| JP2022181437A (ja) * | 2021-05-26 | 2022-12-08 | シャープ株式会社 | 音声処理システム及び音声処理方法 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1700304A (zh) * | 2000-07-10 | 2005-11-23 | 松下电器产业株式会社 | 优先级决定装置和优先级决定方法 |
| JP2007188001A (ja) * | 2006-01-16 | 2007-07-26 | Konica Minolta Business Technologies Inc | 情報処理装置、音声コマンド実行プログラムおよび音声コマンド実行方法 |
| JP2009265567A (ja) * | 2008-04-30 | 2009-11-12 | Sony Corp | 音声認識装置と音声認識方法とコンピュータ・プログラムおよびコマンド認識装置 |
| US20120115503A1 (en) * | 2010-05-03 | 2012-05-10 | Interdigital Patent Holdings, Inc. | Addressing Wireless Nodes |
| US20140330560A1 (en) * | 2013-05-06 | 2014-11-06 | Honeywell International Inc. | User authentication of voice controlled devices |
| US20150235642A1 (en) * | 2013-09-03 | 2015-08-20 | Panasonic Intellectual Property Corporation Of America | Speech dialogue control method |
| US20150279356A1 (en) * | 2014-03-31 | 2015-10-01 | Samsung Electronics Co., Ltd. | Speech recognition system and method |
| US20150302857A1 (en) * | 2013-08-29 | 2015-10-22 | Panasonic Intellectual Property Corporation Of America | Device control method, display control method, and purchase settlement method |
Family Cites Families (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0911808B1 (en) * | 1997-10-23 | 2002-05-08 | Sony International (Europe) GmbH | Speech interface in a home network environment |
| US7831930B2 (en) * | 2001-11-20 | 2010-11-09 | Universal Electronics Inc. | System and method for displaying a user interface for a remote control application |
| JP2003502701A (ja) * | 1999-06-21 | 2003-01-21 | パルックス アクチエンゲゼルシャフト | 自動機械を制御する制御装置 |
| JP2006017936A (ja) | 2004-06-30 | 2006-01-19 | Sharp Corp | 通話装置，中継処理装置，通信認証システム，通話装置の制御方法，通話装置の制御プログラム，および通話装置の制御プログラムを記録した記録媒体 |
| JP4405370B2 (ja) * | 2004-11-15 | 2010-01-27 | 本田技研工業株式会社 | 車両用機器制御装置 |
| JP2009145755A (ja) * | 2007-12-17 | 2009-07-02 | Toyota Motor Corp | 音声認識装置 |
| JP4331233B2 (ja) * | 2007-12-26 | 2009-09-16 | 株式会社東芝 | 無線通信装置 |
| KR101678395B1 (ko) * | 2009-09-22 | 2016-11-22 | 삼성전자 주식회사 | 외부 디바이스를 이용한 전자기기 제어 방법 및 그의 시스템 |
| JP5351855B2 (ja) | 2010-08-10 | 2013-11-27 | ヤフー株式会社 | 情報家電システム、情報取得方法及びプログラム |
| CN103221985B (zh) * | 2010-09-24 | 2017-10-20 | Xped控股股份有限公司 | 遥控和遥控系统 |
| US8825020B2 (en) * | 2012-01-12 | 2014-09-02 | Sensory, Incorporated | Information access and device control using mobile phones and audio in the home environment |
| US9042867B2 (en) * | 2012-02-24 | 2015-05-26 | Agnitio S.L. | System and method for speaker recognition on mobile devices |
| KR20130133629A (ko) * | 2012-05-29 | 2013-12-09 | 삼성전자주식회사 | 전자장치에서 음성명령을 실행시키기 위한 장치 및 방법 |
| US9230560B2 (en) * | 2012-10-08 | 2016-01-05 | Nant Holdings Ip, Llc | Smart home automation systems and methods |
| US20140156281A1 (en) * | 2012-12-03 | 2014-06-05 | Qualcomm Incorporated | Voice-controlled configuration of an automation system |
| US9900177B2 (en) * | 2013-12-11 | 2018-02-20 | Echostar Technologies International Corporation | Maintaining up-to-date home automation models |
| US9946857B2 (en) * | 2015-05-12 | 2018-04-17 | Echostar Technologies International Corporation | Restricted access for home automation system |
-
2015
- 2015-10-23 JP JP2015208939A patent/JP6710037B2/ja active Active
-
2016
- 2016-12-20 WO PCT/IB2016/057805 patent/WO2017068560A1/ja active Application Filing
- 2016-12-20 US US15/766,791 patent/US10650825B2/en not_active Expired - Fee Related
- 2016-12-20 CN CN201680062048.2A patent/CN108475504A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1700304A (zh) * | 2000-07-10 | 2005-11-23 | 松下电器产业株式会社 | 优先级决定装置和优先级决定方法 |
| JP2007188001A (ja) * | 2006-01-16 | 2007-07-26 | Konica Minolta Business Technologies Inc | 情報処理装置、音声コマンド実行プログラムおよび音声コマンド実行方法 |
| JP2009265567A (ja) * | 2008-04-30 | 2009-11-12 | Sony Corp | 音声認識装置と音声認識方法とコンピュータ・プログラムおよびコマンド認識装置 |
| US20120115503A1 (en) * | 2010-05-03 | 2012-05-10 | Interdigital Patent Holdings, Inc. | Addressing Wireless Nodes |
| US20140330560A1 (en) * | 2013-05-06 | 2014-11-06 | Honeywell International Inc. | User authentication of voice controlled devices |
| US20150302857A1 (en) * | 2013-08-29 | 2015-10-22 | Panasonic Intellectual Property Corporation Of America | Device control method, display control method, and purchase settlement method |
| US20150235642A1 (en) * | 2013-09-03 | 2015-08-20 | Panasonic Intellectual Property Corporation Of America | Speech dialogue control method |
| US20150279356A1 (en) * | 2014-03-31 | 2015-10-01 | Samsung Electronics Co., Ltd. | Speech recognition system and method |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111771185A (zh) * | 2018-02-26 | 2020-10-13 | 三星电子株式会社 | 用于执行语音命令的方法及系统 |
| CN112242939A (zh) * | 2019-07-18 | 2021-01-19 | 东芝生活电器株式会社 | 家电设备以及信息处理系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2017083526A (ja) | 2017-05-18 |
| US10650825B2 (en) | 2020-05-12 |
| JP6710037B2 (ja) | 2020-06-17 |
| WO2017068560A1 (ja) | 2017-04-27 |
| US20180286407A1 (en) | 2018-10-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108475504A (zh) | 通信装置 | |
| EP3139648B1 (en) | Communication device, method and system for establishing communications using the subscriber identity data of another communication device | |
| CN104050742A (zh) | 一种智能门以及一种智能门控制方法和系统 | |
| CN103120017A (zh) | 基于近场通信建立无线通信链路的移动无线通信设备及相关方法 | |
| KR20080002329A (ko) | 분실 휴대단말기의 위치 확인 방법 및 시스템 | |
| CN103597805A (zh) | 用于促进附件与多个设备之间的交互操作的技术 | |
| WO2006062194A1 (ja) | 無線通信端末及び無線通信方法 | |
| CN106713418A (zh) | 重置结果确认方法、装置、服务器和移动终端 | |
| CN107690667A (zh) | 使用用户终端的用于用户不可否认性的支付系统及其方法 | |
| CN107703348A (zh) | 智能插座的检测方法及装置 | |
| CN105208529A (zh) | 一种移动终端的位置提示方法及位置提示模块 | |
| JP2013005243A (ja) | 無線通信装置、情報処理装置、通信システムおよび無線通信装置の制御方法 | |
| KR20120087310A (ko) | 휴대용 단말기에서 소셜 네트워크 서비스를 제공하기 위한 장치 및 방법 | |
| CN105025548B (zh) | 一种sim卡的连接控制方法和装置 | |
| CN105549836A (zh) | 在移动电子终端锁屏界面处理消息的方法及移动电子终端 | |
| CN104244240A (zh) | 一种在特殊区域内控制用户无线通信权限的方法及系统 | |
| CN103974377B (zh) | 无线网络连接方法及装置 | |
| CN107396319B (zh) | 一种无线网络认证的方法、设备、存储介质以及终端回收设备 | |
| EP3209091A1 (en) | Secure call connection method and apparatus | |
| KR20090044651A (ko) | 카 오디오 기기에서의 차량 원격 제어장치 및 방법 | |
| EP2611050A1 (en) | Method and system for pairing at least two devices | |
| CN107222633A (zh) | 一种销量统计测试方法、装置、终端 | |
| KR20190047559A (ko) | 블루투스 이어폰 장치를 이용한 오티피 제공 시스템 및 방법 | |
| CN106878560A (zh) | 基于双系统的通话信息处理方法及移动终端 | |
| CN107770384B (zh) | 一种好友添加方法、装置、系统及智能设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20180831 |