CN109558106A - 信息处理终端和方法、用于信息处理的系统及存储介质 - Google Patents

信息处理终端和方法、用于信息处理的系统及存储介质 Download PDF

Info

Publication number
CN109558106A
CN109558106A CN201811115106.0A CN201811115106A CN109558106A CN 109558106 A CN109558106 A CN 109558106A CN 201811115106 A CN201811115106 A CN 201811115106A CN 109558106 A CN109558106 A CN 109558106A
Authority
CN
China
Prior art keywords
service
input
voice messaging
information processing
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811115106.0A
Other languages
English (en)
Inventor
太田峻辅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN109558106A publication Critical patent/CN109558106A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/33—User authentication using certificates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/64—Protecting data integrity, e.g. using checksums, certificates or signatures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • G10L17/06—Decision making techniques; Pattern matching strategies
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/12—Applying verification of the received information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices

Abstract

一种信息处理终端和方法、用于信息处理的系统及存储介质。所述信息处理终端用于接收语音信息的输入并处理该输入，并且包括扬声器单元。该信息处理终端在判断为需要认证来执行与语音信息的输入相对应的服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息进行生物测量认证，并在生物测量认证成功的情况下，经由扬声器单元通知用户关于执行服务的消息，作为对语音信息的输入的响应。

Description

信息处理终端和方法、用于信息处理的系统及存储介质
技术领域
本公开涉及一种用于使用如下装置实现一种特殊服务的技术，该装置(语音助理)接收语音输入、自动执行处理、并经由扬声器单元发送消息。
背景技术
近年来，一种接收语音输入、自动执行处理并经由扬声器单元发送消息的装置(语音助理)正被越来越多地使用。语音助理是一种信息装置，该信息装置具有通过语音识别功能解释用户的发音并执行用户提供的各种指令的功能。由于可通过语音提供指令，语音助理具有如下优势：帮用户省去了在传统个人计算机或智能手机上进行按键操作或提供触摸输入的麻烦。语音助理还可以经由扬声器单元将处理结果或来自外部装置的通知(电子邮件)作为语音消息发送给用户。
作为使用语音助理的方法的示例，将语音助理安装在起居室或用户家庭的其他房间，以使得用户能够通过语音向语音助理提供指令、播放想要的音乐、或使用因特网上发布的购物服务订购产品。
即使用户经由语音助理使用购物服务订购了产品，用户也需要基于提前登记在购物服务中的用户信息进行认证。例如，订购产品时，用户针对语音助理提供用户身份(ID)或密码的语音输入，从而可以进行用户认证。或者，代替密码，可以在购物服务中提前登记用户的语音信息(声波纹)，从而购物服务的认证服务器可以进行生物测量认证以认证用户。在日本专利申请特开2017-44778的公布中，除了使用声波纹进行认证之外，还基于从用户嘴唇运动随时间的变化估计的语音是否与声波纹信息相匹配来进行认证，从而可以以更高的准确度进行认证。
在通过来自用户的语音输入来接收指令时，语音助理在必要时向对应的网络服务发出请求。在这种情况下，使用语音助理的服务提供系统除了需要认证的服务(例如购物服务)之外，还包括不需要认证的服务，诸如使用搜索服务的关键字搜索。也就是说，在请求不需要认证的服务的情况下，不需要使用语音助理提前进行认证处理。在从语音助理接收了请求的网络服务返回认证请求的情况下，需要促使用户在此时机再次进行认证。
在从给予语音助理语音指令开始使用网络服务的情况下，认证工作在可用性方面有许多需要详细制定的地方。
发明内容
根据本发明的一方面，提供一种信息处理终端，该信息处理终端包括扬声器单元，用于接收和处理语音信息的输入；通知单元，其被配置成在不需要认证来执行与语音信息的输入相对应的服务的情况下，经由扬声器单元通知用户与服务的执行有关的消息，作为对语音信息的输入的响应；以及控制单元，被配置成在判断为需要认证来执行与语音信息的输入相对应的服务时，进行控制以使用作为与输入的语音信息相对应的用户的生物测量信息所提取的信息进行生物测量认证，其中在生物测量认证成功的情况下，通知单元经由扬声器单元通知用户关于服务的执行的消息，作为对语音信息的输入的响应。
根据本发明的一方面，提供一种信息处理终端，用于接收和处理语音信息的输入，所述信息处理终端包括：扬声器；存储指令的存储器，以及至少一个处理器，用于执行所述指令以使所述信息处理终端进行以下操作：在不需要认证来执行与语音信息的输入相对应的第一服务的情况下，经由所述扬声器输出关于所述第一服务的执行的消息，作为对所述语音信息的输入的响应；在判断为需要认证来执行与所述语音信息的输入相对应的第二服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息来进行生物测量认证；以及在所述生物测量认证成功的情况下，经由所述扬声器输出关于所述第二服务的执行的消息，作为对所述语音信息的输入的响应。
根据本发明的一方面，提供一种信息处理终端中的方法，所述信息处理终端用于接收和处理语音信息的输入并包括扬声器，所述方法包括：在不需要认证来执行与语音信息的输入相对应的第一服务的情况下，经由所述扬声器输出关于所述第一服务的执行的消息，作为对所述语音信息的输入的响应；在判断为需要认证来执行与所述语音信息的输入相对应的第二服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息来进行生物测量认证；以及在所述生物测量认证成功的情况下，经由所述扬声器输出关于所述第二服务的执行的消息，作为对所述语音信息的输入的响应。
根据本发明的一方面，提供一种非瞬时性计算机可读存储介质，用于存储使计算机执行用于接收和处理语音信息的输入的方法的计算机程序，所述方法包括：在不需要认证来执行与语音信息的输入相对应的第一服务的情况下，经由所述计算机的扬声器输出关于所述第一服务的执行的消息，作为对所述语音信息的输入的响应；在判断为需要认证来执行与所述语音信息的输入相对应的第二服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息来进行生物测量认证；以及在所述生物测量认证成功的情况下，经由所述扬声器输出关于所述第二服务的执行的消息，作为对所述语音信息的输入的响应。
根据本发明的一方面，提供一种用于信息处理的系统，包括：信息处理终端，用于接收和处理语音信息的输入；以及服务服务器，用于执行与接收的请求相对应的处理，其中，所述信息处理终端包括：扬声器；存储器，用于存储指令，以及处理器，用于执行所述指令以使所述信息处理终端进行以下操作：接收语音信息的输入；基于所述语音信息的输入，向所述服务服务器发出基于所输入的语音信息的服务请求；以及在判断为需要认证来执行与所述语音信息的输入相对应的服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息来进行生物测量认证，其中，所述服务服务器包括：存储器，用于存储指令，以及处理器，用于执行该指令以使所述服务服务器进行以下操作：根据基于所述信息处理终端的控制的所述生物测量认证的成功，执行与发出的服务请求相对应的处理；以及向所述信息处理终端返回处理的结果，其中，存储在所述信息处理终端的存储器中的指令还使所述信息处理终端经由所述扬声器输出与从所述服务服务器返回的结果相对应的消息，作为对所述语音信息的输入的响应。
根据以下参照附图对示例实施方式的说明，其他特征将是明显的。
附图说明
图1是示出网络系统的配置示例的图。
图2A、2B和2C是示出网络系统中包括的设备的硬件配置示例的图。
图3A、3B和3C是示出网络系统中包括的设备的功能块示例的图。
图4A和4B是示出与生物信息相对应的证书的登记有关的处理序列的图。
图5是示出与根据第一示例实施方式基于语音指令执行的处理有关的序列的图。
图6A、6B和6C是示出在与生物信息有关的登记处理中使用的参数的图。
图7A和7B是示出在生物测量认证中使用的参数的图。
图8是示出与根据第二示例实施方式的处理的整体有关的序列的图。
图9是示出根据第二示例实施方式用于确认权利的确认处理的流程图。
图10示出与根据第二示例实施方式的确认处理的细节有关的序列的图。
图11A和11B是示出根据第二示例实施方式的图形用户接口(GUI)的示例的图。
图12是示出与根据第三示例实施方式的确认处理的细节有关的序列的图。
具体实施方式
下面参照附图描述用于实施本公开的示例实施方式。
在本公开中，使用采用了诸如被称作快速在线身份验证(FIDO)的技术等的生物测量认证的机制作为认证系统。与ID/密码认证中的密码不同，用在生物测量认证中的诸如指纹或静脉等的生物信息在被公开的情况下不能被改写。因此一般不可能从等的信息公开中进行恢复。作为响应，在FIDO中，认证处理不是经由网络在服务器上执行的，而是在用户可以访问的终端上进行的。因此生物信息不会被公开到网络上，这可以降低信息公开的风险。
在以下的说明中，为了从服务提供系统接收需要认证的服务，在用户可以访问的终端上、而不是在因特网上的认证系统中进行使用生物信息的认证处理。终端的例子包括用于识别语音信息的输入并自动进行必要的处理的信息处理终端(例如语音助理或机器人)、移动电话和智能电话。
图1是示出根据示例实施方式的系统的整体配置的图。
在图1中，语音助理102、服务服务器103、移动终端104经由网络101连接在一起。
网络101是通过例如以下中的任何一个或它们的任何组合来实现的通信网络：用于因特网的局域网(LAN)、广域网(WAN)、电话电路、专用数字电路、异步传输模式(ATM)或者帧中继电路、线缆电视电路和数据广播无线电路。网络101应当允许发送和接收数据。
语音助理102是信息处理终端的示例，包括用于识别人工语音信息的输入并自动进行必要的处理的人工智能(AI)。语音助理102至少包括麦克风并基于来自用户的语音指令执行各种操作。语音助理102可以经由扬声器装置发送消息。语音助理102可以包括照相机。语音助理102验证从来自麦克风或照相机的输入数据检测出的生物信息。在语音助理102上，还运行用于执行生物测量认证的程序，语音助理102可以各种形式来配置，并且可以实现为机器人、专用个人计算机、家用电器或远程控制器的一部分。
服务服务器103例如是用于提供诸如音乐分发服务和购物服务等的各种因特网服务的服务器。在服务服务器103上，还运行用于管理用户信息的服务。配置可以是使得针对相互协同工作的各个服务提供不同的服务器。
移动终端104是诸如普通移动电话、智能电话、平板电脑或可穿戴终端等的移动终端。移动终端104包括用于执行提供网络浏览器和电话功能的应用程序的环境。移动终端104还包括用于获取生物信息以认证个人的传感器和照相机。在移动终端104上，还运行用于执行生物测量认证的程序。在第一示例实施方式中，移动终端104不是必要的组成部分。
图2A、2B和2C是示出网络系统中包括的设备的硬件配置示例的图。
图2A是语音助理102的硬件配置图。
中央处理单元(CPU)211执行存储在只读存储器(RAM)213中的程序，或者诸如从存储装置214装载到随机存取存储器(RAM)212中的操作系统(OS)或应用程序等的程序。也就是说，CPU 211执行存储在CPU 211可读取的存储介质中的程序，从而用作执行以下描述的流程图的处理的处理单元。RAM212是用于CPU 211的主要存储器，并用作工作区域。
受信任的平台模块(TPM)215是与OS或其他硬件独立操作的具有反篡改功能的安全芯片，并且是用于处理和存储秘密信息的存储单元。在本公开中，用于生物测量认证的用户的生物信息以及用于认证处理的私密密钥存储在TPM 215中。作为TPM 215的替代，本公开还可以通过以下方法来实现，该方法用于在单个芯片上保留与其他部件分离操作的安全存储空间以实现反篡改，并且用于在该存储空间中提供用于管理用户的生物信息(或者生物信息的特征量)以及私密密钥的存储单元。用在生物测量认证中的用户的生物信息是从利用麦克风和照相机输入的数据中检测的声波纹、指纹、面部或虹膜的数据(或信号)或者这些数据的特征量。
网络接口(I/F)216经由有线或无线接口连接到网络101，并执行与网络101上的其他设备的通信控制处理。照相机217是用于捕获用户的面部的硬件。麦克风218是用于采集用户的语音的声音(sound of the voice)的硬件。扬声器单元219是用于通知用户处理结果的硬件装置。
图2B是服务服务器103的硬件配置图。服务服务器103可使用一般信息处理设备(服务器计算机)的硬件来配置。
CPU 231执行存储在ROM 233中的程序，或者诸如从(诸如硬盘(HD)等的)外部存储器235装载到RAM 232中的OS或者应用程序等的程序。也就是说，CPU 231执行存储在CPU231可读的存储介质中的程序，从而CPU 231用作执行下述序列或流程图的处理的处理单元。RAM 232是用于CPU 231的主存储器，并用作工作区域。盘控制器234控制对存储各种类型数据的诸如HD等的外部存储器235中的数据的访问。网络I/F 236连接到网络101，并执行与连接到网络101的其他装置的通信控制处理。
图2C是移动终端104的硬件配置图。
CPU 251、RAM 252、ROM 253、存储装置254、网络I/F 256以及TPM 255是与语音助理102中具有相同名称的部件相似的功能部件，因此在此不再描述。生物信息传感器257是用于读取用户的生物信息的传感器。生物信息传感器257读取诸如指纹、虹膜或用户的静脉等的活体并将活体转换成信号(生物信息)。触摸面板258具有两个功能，显示功能和输入功能。触摸面板258显示应用程序的画面以及键盘。用户使用用户的手指或专用笔对画面施压，从而触摸面板258在输出画面上的触摸位置的信息作为到外部的信息信号。应用程序使用输出的信息信号，从而用户可以经由触摸面板258操作应用程序。
图3A、3B和3C是示出网络系统中包括的设备的软件实现的功能块的配置示例的图。
图3A是通过CPU 211执行程序实现的语音助理102的功能块的配置示例。
语音接收单元311使用麦克风218接收来自语音助理102的用户的语音输入。语音发送单元312使用扬声器单元219将消息(机器语音)发送到语音助理102的用户。
语音处理单元313执行输入要输入到语音助理102的语音数据的处理或者输出要从语音助理102发送的语音数据的处理，并分析语音数据。语音处理单元313从语音数据提取声波纹作为生物信息(或者生物信息的特征量)。在分析语音数据时，并且如果检测出在输入的语音数据中包括与预定指令相对应的输入时，语音处理单元313生成与指令相对应的请求。在该处理中，语音处理单元313通过参考包括输入与指令(要调用的命令或应用程序接口(API)的类型)之间的关联的表(未示出)来生成请求。该表由存储装置214管理。在该表中，也管理作为请求的目标的服务提供源(语音助理102或服务服务器103)的信息。该表还被配置成在诸如云服务等的外部网络上进行管理，从而语音处理单元313和请求处理单元321可以参考该表。
面部检测单元315使用照相机217检测人的面部图像。面部检测单元315从照相机217捕获的图像数据中提取与面部图像特别对应的生物信息(或者生物信息的特征量)。面部检测单元315可以提取其他生物信息作为要从面部被检测的人提取的生物信息，其他生物信息诸如可以从照相机217捕获的图像数据中提取的指纹或者虹膜。除了检测人的面部之外，面部检测单元315还可以检测宠物或者机器人的面部，而且面部检测单元315还可以在必要时从捕获的图像数据中提取出与生物信息等同的个人独特的信息。
遗留(legacy)认证处理单元314经由网络I/F 216从连接到语音助理102的装置(诸如移动终端104)接收诸如用户登记等的请求，并处理信息以使得在登记用户信息时进行遗留认证。具体来说，遗留认证处理单元314接收用户账户的身份(ID)以及密码的登记，并且将ID和密码保存在存储装置214中。然后，根据ID和密码的输入，遗留认证处理单元314执行遗留认证。
生物信息处理单元316使用TPM 215管理生物信息。如果用户的遗留认证成功，并且要登记用户的生物信息时，语音处理单元313提取的生物信息与用户的ID相关联地登记在TPM 215中。表A示出了生物信息处理单元316保存的数据的示例。
表A
认证信息ID是分配给用于认证的生物信息(或生物信息的组合)的唯一ID。在“服务ID”一栏，设置了用于标识请求认证的服务的服务ID。服务ID表示服务的顶级域名和二级域名的信息。例如，如果购物服务的统一资源定位符(URL)是“http://www.shopping.com”，服务ID是“shopping.com”。在“声波纹信息”一栏和“面部信息”一栏，保存语音处理单元313和面部检测单元315提取的生物信息。
生物测量认证控制单元317核对语音处理单元313或面部检测单元315提取的生物信息与TPM 215中登记的信息，从而确定这些信息是否彼此匹配，以执行基于生物信息的认证处理。
密钥创建单元318创建与TPM 215中登记的生物信息相对应的一对私密密钥和公开密钥。所创建的私密密钥与对应的生物信息相关联地保存在TPM215中。在本示例实施方式中，私密密钥如表B所示保存。
表B
在“认证信息ID”一栏和“服务ID”一栏设置与表A中描述的ID相似的值。在“私密密钥”一栏保存密钥创建单元318创建的私密密钥的信息。
证书创建单元319创建要登记在外部服务中的证书。断言(assertion)创建单元320创建包括用于在外部服务中确认用户的验证数据的断言(以下详细描述)。
请求处理单元321经由网络I/F 216向服务服务器103发送与通过语音处理单元313指定的来自用户的指令相对应的请求。请求处理单元321经由网络I/F 216发送包括由网络I/F 216或断言创建单元320创建的数据的请求。请求处理单元321处理外部生成的请求。如果存在要发送给用户的数据，请求处理单元321将该数据发送到语音处理单元313和语音发送单元312。然后，请求处理单元321使用扬声器单元219将消息(机器语音)发送到语音助理102的用户。
执行确认单元322使语音发送单元312从扬声器单元219发送用于询问是否可执行处理的消息。语音接收单元311从用户接收响应，并基于语音处理单元313的分析结果，执行确认单元322确定是否可执行处理。
图3B是通过CPU 231执行程序实现的服务服务器103的功能块的配置示例。
请求处理单元331处理经由网络101接收的请求。遗留认证处理单元332使用ID和密码执行遗留认证。登记参数创建单元333创建登记参数。用户管理单元335使用外部存储器235保存并管理用于遗留认证的用户信息以及公开密钥的信息。
认证判断单元336判断请求的处理是否需要认证。验证单元337验证断言。具体来说，验证单元337使用公开密钥验证断言中包括的签名数据。服务执行单元338执行请求的处理，将处理结果发送到语音助理102，或提供与请求的处理相对应的服务。
权利判断单元339判断请求用户是否具有执行服务的权利以及权利的等级。在本示例实施方式中权利判断单元339不是必要的部件。确认请求单元341是用于请求确认是否允许执行服务的部件。
图3C是通过CPU 251执行程序实现的移动终端104的功能块配置示例。
发送/接收单元351经由网络I/F 256与移动终端104外部的装置通信。
生物信息处理单元352是与生物信息处理单元316等同的模块，并且使用TPM 255管理生物信息以及认证信息ID和服务ID。生物测量认证控制单元353是与生物测量认证控制单元317等同的模块，并且核对生物信息传感器257提取的生物信息与TPM 255中登记的信息以确定这些信息是否彼此匹配，从而执行基于生物信息的认证处理。
密钥创建单元354是与密钥创建单元318等同的模块，并且创建与TPM255中登记的生物信息相对应的一对私密密钥和公开密钥。所创建的私密密钥与对应的生物信息相关联地保存在TPM 255中。
证书创建单元355是与证书创建单元319等同的模块，并且创建要在外部服务中登记的(下述)证书。断言创建单元356是与断言创建单元320等同的模块，并且创建包括用于在外部服务中确认用户的验证数据的断言。
执行确认单元357是与执行确认单元322等同的模块，并且在触摸面板258上输出用于询问是否可执行处理的消息。执行确认单元357基于用户操作判断是否可执行处理。
根据本示例实施方式的功能被广泛地分类为两个处理，即“在语音助理中登记生物信息的处理”和“使用语音助理执行指令的处理”。
在本示例实施方式中，作为经由语音助理102的指令的例子，使用关于通过购物服务进行购物的指令。然而，经由语音助理102的指令不限于此。可以关于针对成员的音乐购买/分发服务，提供经由语音助理102的指令。要由语音助理102验证的生物信息的例子包括两种信息，即面部信息和声波纹信息。然而，要由语音助理102验证的生物信息不限于此。例如，在照相机217具有高准确度的情况下，可以使用诸如虹膜信息等的其他生物信息。
参照图4A示出的序列图，描述“在语音助理中登记生物信息的处理”。
在步骤S401，语音接收单元311接收来自语音助理102的用户的登记生物信息的指令。根据语音助理102的功能，指令例如可以是使用提前确定的关键字的指令，诸如“在购物服务A中生物信息的登记”，或者是口语指令，诸如“我想在购物服务A中登记生物信息”。语音处理单元313向生物信息处理单元316发送登记从语音输入检测的生物信息的指令。生物信息处理单元316向服务服务器103生成生物信息登记请求。在步骤S402，请求处理单元321将生物信息登记请求发送到服务服务器103。
在步骤S403，遗留认证处理单元332生成遗留认证请求，作为对经由请求处理单元331接收的生物信息登记请求的响应，并将遗留认证请求返回到语音助理102。
在步骤S404，遗留认证处理单元314获取保存的遗留认证信息，并将遗留认证信息发送到请求处理单元331。该处理使用在语音助理102的用户在语音助理102中登记用户时登记的用于遗留认证的ID和密码。在此时还可以使语音助理102的用户通过语音或经由移动终端104输入用于服务服务器103的ID和密码。
在步骤S405，遗留认证处理单元332使用请求处理单元331接收的ID和密码进行认证处理。如果认证成功，那么在步骤S406，登记参数创建单元333创建登记参数600。参考图6A描述登记参数600。
登记参数600包括账户信息601、加密参数602、证词挑战(challenge)603以及认证扩展区域604。账户信息601表示属性信息，诸如步骤S405的遗留认证中指定的用户ID。加密参数602表示关于要登记的认证信息的属性信息，诸如服务服务器103支持的加密算法。证词挑战603是用来执行挑战响应认证的参数。在认证扩展区域604中，存储用于每个服务的扩展参数。
在步骤S407，请求处理单元331向语音助理102返回证书创建请求，作为对步骤S404的响应。证书创建请求包括图6B中所示的数据620。
数据620包括图6A中所示的登记参数600、服务ID 621、以及网络源622。网络源622是服务服务器103所主有的服务的源，服务ID 621存储服务的顶级域名和二级域名的信息。例如，如果购物服务的URL是“http://www.shopping.com”，那么服务ID 621是“shopping.com”。
在步骤S408，语音发送单元312使用扬声器单元219发送与用户确认是否同意登记声波纹信息和面部信息的消息(机器语音)。该消息基于在步骤S407中由语音处理单元313接收的证书创建请求而生成。例如，语音发送单元312发送诸如“你要登记生物信息吗？”等的消息。
在步骤S409，语音接收单元311接收表示同意登记生物信息的意向的响应，作为来自用户的语音指令。例如，假定语音处理单元313接收诸如“是”等的语音指令。
在步骤S410，语音发送单元312使用扬声器单元219发送促使用户发出用于登记声波纹的关键字的消息(机器语音)。
在步骤S411，语音接收单元311使用麦克风218接收对用于登记的消息的响应，作为来自用户的语音指令，该响应包括用于登记生物信息(声波纹)的关键字。语音处理单元313从语音指令中提取声波纹信息。
在步骤S412，如表A中所示，生物信息处理单元316将步骤S411中提取的声波纹信息与认证信息ID和服务ID相关联地保存在TPM 215中。
在步骤S413中，面部检测单元315使用照相机217、基于用户嘴唇的运动或者面部的方向，获取在步骤S411中作出应答的用户的面部图像，并且获取用于进行面部识别的特征量。在步骤S414中，生物信息处理单元316还在TPM215中，与在步骤S412中使用的认证信息ID和服务ID相关联地保存在步骤S413中获取的特征量。
在步骤S415，密钥创建单元318基于在步骤S412至S414中的生物信息的登记，创建并保存公开密钥和私密密钥。如表B中所示，生物信息处理单元316在TPM215中，与在步骤S412至S414中使用的认证信息ID和服务ID相关联地保存创建的私密密钥。
在步骤S416中，证书创建单元319创建如图6C所示的证书640。证书640包括认证信息ID 641、算法642、公开密钥643、证词(attestation)644。认证信息ID 641和公开密钥643是在步骤S415的处理中创建的公开密钥以及与公开密钥相对应的ID。算法642对应于用来在步骤S415中创建公开密钥和私密密钥对的每个算法。此外，证词644通过使用在步骤S415中生成的私密密钥加密证词挑战630来获得。在步骤S417中，请求处理单元321将在步骤S416中创建的证书发送到服务服务器103。
在步骤S418，服务服务器103的用户管理单元335将经由请求处理单元331接收的证书(公开密钥)与在步骤S405中进行其遗留认证的用户的用户ID相关联地保存。在该处理中，用户管理单元335使用证书中包括的公开密钥对证词进行解密，并验证证词是否与在步骤S406中创建的证词挑战相匹配。仅当验证成功时，用户管理单元335才保存证书。
在步骤S419，请求处理单元331将处理结果(保存成功或失败)返回语音助理102。在步骤S420，语音发送单元312通知用户与在步骤S419中接收的结果相对应的语音。
图4B所示的序列图是“在语音助理中登记用户的生物信息的处理”的变体。在图4A中，在语音助理102中登记用户的生物信息。在该变体中描述了一种扩展，其中通过语音助理102和用户的移动终端104的合作，移动终端104进行生物测量认证。
步骤S401至S409的处理与图4A中的相似，因此在此不再描述。
在步骤S450中，语音助理102的请求处理单元321将在步骤S407中接收的证书创建请求发送到语音助理102的用户的移动终端104。在步骤S451中，语音发送单元312使用扬声器单元219发送促使用户在移动终端104中登记生物信息(指纹信息)的消息(机器语音)。
在步骤S452，移动终端104的生物测量认证控制单元353等待用户将生物信息输入到生物信息传感器257，并接收生物信息。在步骤S453，生物信息处理单元352将提供的生物信息(指纹)与认证信息ID和服务ID相关联地登记在TPM 255中。在步骤S454中，密钥创建单元354基于生物信息的登记，创建并保存公开密钥和私密密钥。生物信息处理单元352将所创建的私密密钥与认证信息ID和服务ID相关联地保存在TPM 255中。
在步骤455中证书创建单元355创建与图6C所示相似的证书。在该处理中，使用在步骤S453和S454中生成的信息作为认证信息ID和公开密钥。在步骤S456中，移动终端104将创建的证书发送到语音助理102。
在步骤S417至S420的处理中，使用在步骤S455中创建的证书进行与图4A中相似的处理，因此不再赘述。
根据图4B，语音助理102可以使用具有高认证准确度的外部认证装置。
接着参考图5所示的序列图，描述“使用语音助理执行指令的处理”的细节。
在步骤S501，语音接收单元311从用户接收语音指令。例如，指令的例子可以包括“我想通过购物服务A购买XX”以及“我想播放YY(曲名)”。在步骤S502，语音处理单元313临时保存在步骤S501中接收的语音信息。在步骤S503，与在步骤S413中相似，基于用户嘴唇的运动，面部检测单元315指定在步骤S501中发出语音的用户、获取用户的面部信息、并临时保存面部信息。
在步骤S504中，如果通过分析在步骤501中接收的语音数据而检测到指令，则语音处理单元313生成与指令相对应的请求。根据分析结果，确定请求的发送目的地。在本示例实施方式中描述了如下情况的例子，其中语音数据被分析为对服务服务器103进行请求的指令。请求处理单元321将生成的请求向服务服务器103发出。
在步骤S505，基于在步骤S504中发出且经由请求处理单元331获取的请求的内容，服务服务器103的认证判断单元336判断是否需要认证以进行基于请求的处理。根据是否需要认证的判断结果，处理切换。
在不需要认证的情况下，那么在步骤S506中，服务执行单元338基于在步骤S504中发出的请求的内容执行处理。在本示例实施方式中，假定针对为所有用户共同提供的服务引导执行广播服务或一般的搜索服务，针对广播服务和搜索服务中的每一个都不需要确认用户，并且假定获取并生成响应消息。在步骤S507中，服务执行单元338经由请求处理单元331向语音助理102返回针对在步骤S504中发出的请求的响应。该响应包括要从语音助理102发送到用户的消息。
在步骤S508中，语音处理单元313获取返回的响应中包括的消息，并且经由语音发送单元312通知用户该消息。在该处理中，删除在步骤S502和S503中临时保存在语音助理102中的信息。
接下来描述在步骤S505中判断出需要认证的情况下进行的处理。
在步骤S510中，认证判断单元336创建如图7A所示的生物测量认证参数，并且将生物测量认证参数经由请求处理单元331发送至语音助理102。
生物测量认证参数700包括断言挑战701和扩展区域702。断言挑战701是用来进行挑战响应认证的参数。在扩展区域702中，存储用于服务服务器103控制关于在语音助理102中的生物测量认证的处理的扩展参数。
在步骤S511中，语音处理单元313和面部检测单元315提取在步骤S502和S503中临时保存的信息的特征量。在步骤S512中，生物测量认证控制单元317核对在步骤S511中提取的特征量与在TPM 215中保存的生物信息，从而执行生物测量认证处理。在步骤S513中判断生物测量认证是否成功。根据认证成功还是失败，处理切换。
在生物测量认证失败的情况下，在步骤S514，语音发送单元312使用扬声器单元219通知用户生物测量认证失败。
接下来描述在步骤S513中判断出生物测量认证成功的情况下进行的处理。
在步骤S515中，断言创建单元320创建图7B所示的断言数据。断言720包括认证信息ID 721和签名722。认证信息ID是在表A中与在步骤S513中认证成功的生物信息以及与服务服务器103对应的服务ID相关联地管理的信息。使用在步骤S510中接收的认证请求中包括的断言挑战701、以及在表B中与步骤S513中认证成功的生物信息对应的认证信息ID相关联地管理的私密密钥，来生成签名722。在步骤S516中，请求处理单元321将步骤S512中创建的断言发送至服务服务器103。
在步骤S517中，服务服务器103的验证单元337执行用于验证所接收的断言的验证处理。在验证处理中，将通过使用由用户管理单元335与断言中包括的认证信息ID相关联地管理的公开密钥解密断言中包括的签名所获得的数据与由认证判断单元336在步骤S510中创建的生物测量认证参数中包括的断言挑战701进行比较。基于在步骤S518中验证是否成功的判断结果，处理切换。
在验证失败的情况下，在步骤S519中，验证单元337经由请求处理单元331向语音助理102返回表示验证失败的响应。在步骤S520中，语音发送单元312使用扬声器单元219通知用户生物测量认证失败。
接下来描述在步骤S518中判断出验证成功的情况下进行的处理。
在步骤S521中，服务执行单元338基于在步骤S504中发出的请求的内容执行处理。在本示例实施方式中，执行音乐分发服务、购物服务或针对会员用户的支付服务，针对这些服务中的每一个都需要确认用户，以及执行响应消息的获取和生成。在步骤S522中，服务执行单元338经由请求处理单元331向语音助理102返回对在步骤S504中发出的请求的响应。该响应包括作为步骤S521的处理结果生成的消息，且应从语音助理102发送至用户。
在步骤S523中，语音处理单元313获取返回的响应中包括的消息，并经由语音发送单元312通知用户该消息。
在执行图4B所示的处理的情况下，从语音助理102向移动终端104发送步骤S510中的认证请求。作为第一示例实施方式的应用例子，在这种情况下，用户向移动终端104呈现诸如指纹等的生物信息，并且移动终端104执行与步骤S512等同的生物测量认证处理。在认证成功的情况下，移动终端104的断言创建单元356创建图7B所示的断言数据。从语音助理102的请求处理单元321将该断言数据发送至服务服务器103。此后的处理与步骤S517至S523的处理相似。
第一实施方式基于如下假设：已经提供了关于需要认证的服务(诸如购物服务)的语音指令的用户具有购买的权利。例如，在购物服务中存在如下情况，包括家庭成员的用户组中仅可选用户(父母的用户账户)有权支付服务。在这种情况下，如果提供了与孩子的用户账户相对应的语音指令，则需要有权执行服务的另一用户执行包括认证的许可处理。在第二示例实施方式中，主要基于第一示例实施方式和第二示例实施方式之间的不同详细描述包括该许可处理的服务提供。
针对该示例实施方式，添加了有权支付服务的授权用户的移动终端。该移动终端包括与在第一示例实施方式中在图2C和图3C中描述的移动终端104相似的配置。
服务服务器103的用户管理单元335包括表C中所示的数据。该数据通过作为服务服务器103提供的服务的功能而准备的登记画面和登记服务来登记。
表C
“用户ID”一栏表示已经给出语音指令的用户的ID。“服务ID”一栏表示服务服务器103所主有的服务的服务ID 621。“是否允许执行”一栏表示是否允许各用户执行服务ID表示的服务。表C表示允许用户A执行服务(真)，然而禁止用户B执行服务(假)。关于每个服务，限定了用于确定是否允许执行服务的方法。例如，可以针对用户的年龄设置阈值来限制服务的执行。或者，可以单独提供用户接口(UI)，来使得能够选择不被允许执行服务的用户。“授权用户”一栏表示授权用户的用户ID，该授权用户有权允许提供与被禁止执行服务(假)的用户的请求相对应的服务。用户A被允许执行根据其自身的权利的服务。因此，针对用户A不设置授权用户(空)。“通知目的地”一栏表示在“用户ID”一栏指示的用户的通知目的地。例如，设置移动终端104的电话号码或电子邮件地址。在表C中，如果从用户B接收到关于“shopping.com”的请求，则对作为授权用户的用户A的通知目的地“userA＠xxx.ne.jp”通知确认请求。
图8示出了包括步骤S518的处理以及图5序列中此后的处理的扩展部分的序列图。
在断言的验证失败的情况下，步骤S519和S520与图5的步骤相似。
在断言的验证成功的情况下，则在步骤S801执行用于确认权利的确认处理。参考图9，描述步骤S801的处理的细节。
在步骤S901中，语音助理102的权利判断单元339从用户管理单元335管理的表C获取关于通过语音提供指令的用户的用户ID的信息。在步骤S902中，权利判断单元339参考步骤S901中获取的信息中包括的“是否允许执行”一栏，并确认用户是否具有执行服务的权利。
作为步骤S801的处理结果，在通过语音提供指令的用户有权执行服务的情况下，进行与图5中的步骤S521至S523相似的处理。作为步骤S801的处理结果，在通过语音提供了指令的用户没有权利执行服务的情况下，处理进行至步骤S802。
在步骤S802中，确认请求单元341与授权用户的移动终端相互协作来执行许可处理。下面将参照图10描述该处理的细节。作为步骤S802的结果，从授权用户的移动终端获得表示许可还是禁止执行语音指令所请求的指令的响应。
在禁止执行的情况下，在步骤S803，确认请求单元341向语音助理102返回表示授权用户禁止所请求的处理的响应。在步骤S804，语音处理单元313获取包括在返回的响应中的消息并经由语音发送单元312通知用户该消息。
作为步骤S802的结果，在允许执行的情况下，进行与步骤S521-S523相似的处理。
参考图10描述步骤S802的处理细节。在本示例实施方式中，已经通过如图4B所示的过程将授权用户的移动终端的证书登记在服务服务器103中。
在步骤S1001中，服务服务器103的确认请求单元341向授权用户的移动终端发出用于确认处理的请求。在该处理中，确认请求单元341还发送针对授权用户的如图7A所示的生物测量认证参数。
在步骤S1002，授权用户的移动终端的执行确认单元357在触摸面板258上显示如图11A所示的确认画面。授权用户可以提供有关是否允许语音助理102的用户提供的请求的指令的输入。接着，生物信息处理单元352在触摸面板258上显示如图11B所示的认证画面。在步骤S1003中，授权用户的移动终端接收用户的生物信息(指纹)的呈现。
在步骤S1004中，生物测量认证控制单元353使用在TPM 255中登记的生物信息执行生物测量认证处理。在生物测量认证成功的情况下，在步骤S1005，断言创建单元356创建与图7B所示相似的断言数据。
在步骤S1006中，发送/接收单元351发送经由确认画面从用户接收的确认结果(许可或禁止执行)，并将断言数据发送至服务服务器103。
在步骤S1007，验证单元337验证接收的断言。在验证成功的情况下，则基于确认结果(许可或禁止执行)，执行步骤S802的处理以及图8中随后的步骤。
在第二示例实施方式中，向授权用户的移动终端作出确认请求，从而实现许可处理。在第三示例实施方式中，描述了如下例子：该许可处理也通过授权用户和其他语音助理的协作来实现。具体来说，如图12所示，授权用户使用其他语音助理实现在第二示例实施方式中描述的步骤S802中的许可处理。在本示例实施方式中，详细描述本示例实施方式与第一和第二示例实施方式之间的不同。
在本示例实施方式中，授权用户使用的其他语音助理包括与图2A和图3A相似的配置。
在本示例实施方式中，服务服务器103的用户管理单元335包括表D所示的数据。该数据经由作为服务服务器103提供的服务的功能而准备的登记画面和登记服务来登记。在表D中，设置用于唯一标识语音助理的ID或网络地址作为通知目的地。由于还有可能特定用户拥有多个语音助理，多个语音助理的ID可被设置为通知目的地。
表D
在表D中，设置两个ID作为用户A的通知目的地。也就是说，用户A拥有这两个ID标识的语音助理。关于用户A，向任一个或向两个语音助理提供确认通知。
接下来，参考图12，描述根据本示例实施方式的许可处理的细节。
在步骤S1201，服务服务器103的确认请求单元341将确认请求发送给授权用户的语音助理。在该处理中，确认请求单元341还发送如图7A所示的授权用户的生物测量认证参数。
在步骤S1202，接收到确认请求的语音助理的面部检测单元315判断是否捕获到通知目的地处的人。具体来说，面部检测单元315通过从照相机217捕获的面部图像提取特征量并核对该特征量与TPM 215中保存的授权用户的面部特征量来进行该判断。可省略步骤S1202的处理。
在步骤S1203，执行确认单元322经由语音发送单元312通知用户诸如“从用户B接收到允许购买XX的请求。你许可还是禁止该购买？”等的消息(机器语音)。在步骤S1204，语音处理单元313和执行确认单元322在语音接收单元311经由麦克风218接收的语音数据中提取来自用户的诸如“是(许可)”或“否(禁止)”等的指令内容。
在步骤S1205，面部检测单元315基于用户嘴唇的运动，指定在步骤S1204提到许可的用户并获取该用户的面部信息。在步骤S1206，语音处理单元313和面部检测单元315从在步骤S1204和S1205中获取的信息中提取特征量。在步骤S1207中，生物测量认证控制单元317核对提取的特征量与TPM 215中保存的生物信息，从而执行生物测量认证处理。在步骤S1208，使用与生物测量认证成功时用于认证的生物信息相对应的认证信息ID相关联地管理的私密秘钥，断言创建单元320创建图7B所示的断言。
在步骤S1209，请求处理单元321将在步骤S1208中创建的断言和确认结果(许可或禁止)发送给服务服务器103。在步骤S1210，验证单元337使用与认证信息ID相关联地管理的公开秘钥验证接收的断言。在验证成功的情况下，基于确认结果(许可或禁止执行)，执行图8中的步骤S802和随后步骤的处理。
在图12中，授权用户使用声波纹和面部图像的特征量以语音助理执行生物测量认证。作为第三示例实施方式的应用例子，如果授权用户已经进行了与图4B等同的处理，还有可能将在步骤S1201中语音助理接收的确认请求发送至授权用户的移动终端，并使授权用户输入关于许可的指令并使用移动终端执行生物测量认证。
在该处理中，从语音助理接收到确认请求的授权用户的移动终端执行与图10所示的步骤S1002-S1005相似的处理。然后，发送/接收单元351将经由确认画面从用户接收的确认结果(许可或禁止执行)和断言数据发送至作为确认请求的发送源的语音助理。语音助理将确认结果(许可或禁止执行)和断言数据发送至服务服务器103。因此，执行与图12所示的步骤S1209相似的用于验证断言的验证处理。
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管描述了示例实施方式，应理解本公开不限于公开的示例实施方式。应对权利要求的范围赋予最宽的理解，从而包括所有这类修改以及等同结构和功能。

Claims (16)

1.一种信息处理终端，用于接收和处理语音信息的输入，所述信息处理终端包括：
扬声器；
存储指令的存储器，以及
至少一个处理器，用于执行所述指令以使所述信息处理终端进行以下操作：
在不需要认证来执行与语音信息的输入相对应的第一服务的情况下，经由所述扬声器输出关于所述第一服务的执行的消息，作为对所述语音信息的输入的响应；
在判断为需要认证来执行与所述语音信息的输入相对应的第二服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息来进行生物测量认证；以及
在所述生物测量认证成功的情况下，经由所述扬声器输出关于所述第二服务的执行的消息，作为对所述语音信息的输入的响应。
2.根据权利要求1所述的信息处理终端，其中，所述生物信息是从输入的语音信息中提取的。
3.根据权利要求1所述的信息处理终端，其中，基于所述用户的生物信息进行所述生物测量认证的请求被发送至所述用户的移动终端。
4.根据权利要求1所述的信息处理终端，其中，所述指令还使所述信息处理终端基于输入的语音信息向服务服务器发出服务请求，以及
其中，在从所述服务服务器接收到认证请求的情况下，进行用于所述生物测量认证的控制。
5.根据权利要求4所述的信息处理终端，其中，所述指令还使所述信息处理终端向所述服务服务器发送包括在所述认证请求中以及使用与所述生物测量认证成功时使用的生物信息相对应的私密秘钥创建的签名中的数据，以及
其中，在所述服务服务器中使用与所述私密秘钥对应的公开秘钥的签名验证成功的情况下，经由所述扬声器输出关于所述第二服务的执行的消息。
6.一种信息处理终端中的方法，所述信息处理终端用于接收和处理语音信息的输入并包括扬声器，所述方法包括：
在不需要认证来执行与语音信息的输入相对应的第一服务的情况下，经由所述扬声器输出关于所述第一服务的执行的消息，作为对所述语音信息的输入的响应；
在判断为需要认证来执行与所述语音信息的输入相对应的第二服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息来进行生物测量认证；以及
在所述生物测量认证成功的情况下，经由所述扬声器输出关于所述第二服务的执行的消息，作为对所述语音信息的输入的响应。
7.根据权利要求6所述的方法，其中，所述生物信息是从输入的语音信息中提取的。
8.根据权利要求6所述的方法，其中，基于所述用户的生物信息进行所述生物测量认证的请求被发送至所述用户的移动终端。
9.一种非瞬时性计算机可读存储介质，用于存储使计算机执行用于接收和处理语音信息的输入的方法的计算机程序，所述方法包括：
在不需要认证来执行与语音信息的输入相对应的第一服务的情况下，经由所述计算机的扬声器输出关于所述第一服务的执行的消息，作为对所述语音信息的输入的响应；
在判断为需要认证来执行与所述语音信息的输入相对应的第二服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息来进行生物测量认证；以及
在所述生物测量认证成功的情况下，经由所述扬声器输出关于所述第二服务的执行的消息，作为对所述语音信息的输入的响应。
10.一种用于信息处理的系统，包括：
信息处理终端，用于接收和处理语音信息的输入；以及
服务服务器，用于执行与接收的请求相对应的处理，
其中，所述信息处理终端包括：
扬声器；
存储器，用于存储指令，以及
处理器，用于执行所述指令以使所述信息处理终端进行以下操作：
接收语音信息的输入；
基于所述语音信息的输入，向所述服务服务器发出基于所输入的语音信息的服务请求；以及
在判断为需要认证来执行与所述语音信息的输入相对应的服务的情况下，进行控制以使用作为与输入的语音信息相对应的用户的生物信息所提取的信息来进行生物测量认证，
其中，所述服务服务器包括：
存储器，用于存储指令，以及
处理器，用于执行该指令以使所述服务服务器进行以下操作：
根据基于所述信息处理终端的控制的所述生物测量认证的成功，执行与发出的服务请求相对应的处理；以及
向所述信息处理终端返回处理的结果，
其中，存储在所述信息处理终端的存储器中的指令还使所述信息处理终端经由所述扬声器输出与从所述服务服务器返回的结果相对应的消息，作为对所述语音信息的输入的响应。
11.根据权利要求10所述的系统，其中，所述生物信息是从输入的语音信息中提取的。
12.根据权利要求10所述的系统，
其中，存储在所述服务服务器的存储器中的指令还使所述服务服务器针对与发出的服务请求相对应的处理向所述信息处理终端发送认证请求，以及
其中，在所述信息处理终端从所述服务服务器接收到所述认证请求的情况下，在所述信息处理终端中进行用于所述生物测量认证的控制。
13.根据权利要求12所述的系统，
其中，存储在所述信息处理终端的存储器中的指令还使所述信息处理终端向所述服务服务器发送包括在所述认证请求中以及使用与所述生物测量认证成功时使用的生物信息相对应的私密秘钥创建的签名中的数据，以及
其中，在使用与所述私密秘钥对应的公开秘钥的签名验证成功的情况下，在所述服务服务器中执行与发出的服务请求对应的处理。
14.根据权利要求10所述的系统，
其中，存储在所述服务服务器的存储器中的指令还使所述服务服务器在与输入的语音信息对应的用户没有权利执行与所述语音信息的输入相对应的服务时，执行向另一用户所使用的终端的、关于该服务的执行的确认请求，以及
其中，在接收到表示所述另一用户对所述确认请求的许可的响应的情况下，在所述服务服务器中执行与发出的服务请求相对应的处理。
15.根据权利要求14所述的系统，其中，根据所述确认请求，所述另一用户使用的终端进行对所述另一用户的生物测量认证。
16.根据权利要求14所述的系统，其中，所述另一用户使用的终端包括与所述信息处理终端的扬声器不同的另一扬声器，并且所述另一用户使用的终端接收及处理语音信息的输入。
CN201811115106.0A 2017-09-25 2018-09-25 信息处理终端和方法、用于信息处理的系统及存储介质 Pending CN109558106A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-183524 2017-09-25
JP2017183524A JP7123540B2 (ja) 2017-09-25 2017-09-25 音声情報による入力を受け付ける情報処理端末、方法、その情報処理端末を含むシステム

Publications (1)

Publication Number Publication Date
CN109558106A true CN109558106A (zh) 2019-04-02

Family

ID=63557271

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811115106.0A Pending CN109558106A (zh) 2017-09-25 2018-09-25 信息处理终端和方法、用于信息处理的系统及存储介质

Country Status (5)

Country Link
US (1) US11265315B2 (zh)
EP (1) EP3460698B1 (zh)
JP (1) JP7123540B2 (zh)
KR (1) KR102371997B1 (zh)
CN (1) CN109558106A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112181321A (zh) * 2019-07-03 2021-01-05 佳能株式会社 通信系统、控制方法和非暂时性计算机可读存储介质
CN112882664A (zh) * 2019-11-29 2021-06-01 佳能株式会社 服务器系统

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2578386B (en) 2017-06-27 2021-12-01 Cirrus Logic Int Semiconductor Ltd Detection of replay attack
GB201713697D0 (en) 2017-06-28 2017-10-11 Cirrus Logic Int Semiconductor Ltd Magnetic detection of replay attack
GB2563953A (en) 2017-06-28 2019-01-02 Cirrus Logic Int Semiconductor Ltd Detection of replay attack
GB201801526D0 (en) 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Methods, apparatus and systems for authentication
GB201801530D0 (en) 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Methods, apparatus and systems for authentication
GB201801528D0 (en) 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Method, apparatus and systems for biometric processes
GB201801527D0 (en) 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Method, apparatus and systems for biometric processes
GB201801532D0 (en) 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Methods, apparatus and systems for audio playback
GB201801874D0 (en) 2017-10-13 2018-03-21 Cirrus Logic Int Semiconductor Ltd Improving robustness of speech processing system against ultrasound and dolphin attacks
GB201804843D0 (en) 2017-11-14 2018-05-09 Cirrus Logic Int Semiconductor Ltd Detection of replay attack
GB2567503A (en) 2017-10-13 2019-04-17 Cirrus Logic Int Semiconductor Ltd Analysing speech signals
GB201803570D0 (en) 2017-10-13 2018-04-18 Cirrus Logic Int Semiconductor Ltd Detection of replay attack
GB201801664D0 (en) 2017-10-13 2018-03-21 Cirrus Logic Int Semiconductor Ltd Detection of liveness
GB201801663D0 (en) * 2017-10-13 2018-03-21 Cirrus Logic Int Semiconductor Ltd Detection of liveness
GB201801661D0 (en) * 2017-10-13 2018-03-21 Cirrus Logic International Uk Ltd Detection of liveness
GB201801659D0 (en) 2017-11-14 2018-03-21 Cirrus Logic Int Semiconductor Ltd Detection of loudspeaker playback
US10853463B2 (en) * 2018-01-17 2020-12-01 Futurewei Technologies, Inc. Echoprint user authentication
US11475899B2 (en) 2018-01-23 2022-10-18 Cirrus Logic, Inc. Speaker identification
US11264037B2 (en) 2018-01-23 2022-03-01 Cirrus Logic, Inc. Speaker identification
US11735189B2 (en) 2018-01-23 2023-08-22 Cirrus Logic, Inc. Speaker identification
US10733996B2 (en) * 2018-03-30 2020-08-04 Qualcomm Incorporated User authentication
US10720166B2 (en) * 2018-04-09 2020-07-21 Synaptics Incorporated Voice biometrics systems and methods
US10818296B2 (en) * 2018-06-21 2020-10-27 Intel Corporation Method and system of robust speaker recognition activation
US10692490B2 (en) 2018-07-31 2020-06-23 Cirrus Logic, Inc. Detection of replay attack
US10915614B2 (en) 2018-08-31 2021-02-09 Cirrus Logic, Inc. Biometric authentication
US11037574B2 (en) 2018-09-05 2021-06-15 Cirrus Logic, Inc. Speaker recognition and speaker change detection
CN110196914B (zh) * 2019-07-29 2019-12-27 上海肇观电子科技有限公司 一种将人脸信息录入数据库的方法和装置
KR102581000B1 (ko) * 2021-01-29 2023-09-21 네이버 주식회사 어시스턴트 서비스 제공 방법 및 시스템
CN114143622B (zh) * 2021-11-08 2023-07-25 深圳市锦昊安科技有限公司 一种智能故障监测的交换机及交换机系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1977522A (zh) * 2004-07-30 2007-06-06 Sbc知识有限责任公司 基于ip语音的生物测量认证
CN101578637A (zh) * 2007-01-17 2009-11-11 阿尔卡特朗讯公司 用于利用耳声发射来认证主叫方和被叫方的机制
US8543834B1 (en) * 2012-09-10 2013-09-24 Google Inc. Voice authentication and command
US20140259126A1 (en) * 2013-03-06 2014-09-11 Nuance Communications, Inc. Biometric authorization for real time access control
US20160253651A1 (en) * 2015-02-27 2016-09-01 Samsung Electronics Co., Ltd. Electronic device including electronic payment system and operating method thereof
DE202016008226U1 (de) * 2016-06-10 2017-05-04 Google Inc. Das sichere Ausführen von Sprachfunktionen unter der Verwendung kontextabhängiger Signale

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3943897B2 (ja) 2001-10-30 2007-07-11 株式会社東芝 本人確認システム及び装置
JP4087787B2 (ja) 2003-12-25 2008-05-21 トッパン・フォームズ株式会社 ユーザ情報登録システム
JP2007133515A (ja) 2005-11-08 2007-05-31 Klab Inc カードに対応付けられた端末装置でユーザ使用認証を行うカード認証方法およびカード認証システム
JPWO2007094165A1 (ja) 2006-02-15 2009-07-02 日本電気株式会社 本人確認システムおよびプログラム、並びに、本人確認方法
KR101198120B1 (ko) 2010-05-28 2012-11-12 남궁종 홍채정보를 이용한 양방향 상호 인증 전자금융거래시스템과 이에 따른 운영방법
EP2397972B1 (en) * 2010-06-08 2015-01-07 Vodafone Holding GmbH Smart card with microphone
JP5707311B2 (ja) 2011-12-12 2015-04-30 株式会社日立製作所 生体署名システム
KR101731404B1 (ko) 2013-03-14 2017-04-28 인텔 코포레이션 음성 및/또는 안면 인식 기반 서비스 제공
JP2017044778A (ja) 2015-08-25 2017-03-02 大阪瓦斯株式会社 認証装置
JP6354737B2 (ja) 2015-11-30 2018-07-11 コニカミノルタ株式会社 通信装置、プログラムおよび通信システム
GB2555661A (en) * 2016-11-07 2018-05-09 Cirrus Logic Int Semiconductor Ltd Methods and apparatus for biometric authentication in an electronic device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1977522A (zh) * 2004-07-30 2007-06-06 Sbc知识有限责任公司 基于ip语音的生物测量认证
CN101578637A (zh) * 2007-01-17 2009-11-11 阿尔卡特朗讯公司 用于利用耳声发射来认证主叫方和被叫方的机制
US8543834B1 (en) * 2012-09-10 2013-09-24 Google Inc. Voice authentication and command
US20140259126A1 (en) * 2013-03-06 2014-09-11 Nuance Communications, Inc. Biometric authorization for real time access control
US20160253651A1 (en) * 2015-02-27 2016-09-01 Samsung Electronics Co., Ltd. Electronic device including electronic payment system and operating method thereof
DE202016008226U1 (de) * 2016-06-10 2017-05-04 Google Inc. Das sichere Ausführen von Sprachfunktionen unter der Verwendung kontextabhängiger Signale

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112181321A (zh) * 2019-07-03 2021-01-05 佳能株式会社 通信系统、控制方法和非暂时性计算机可读存储介质
CN112181321B (zh) * 2019-07-03 2024-03-26 佳能株式会社 通信系统、控制方法和非暂时性计算机可读存储介质
CN112882664A (zh) * 2019-11-29 2021-06-01 佳能株式会社 服务器系统
US11853627B2 (en) 2019-11-29 2023-12-26 Canon Kabushiki Kaisha Server system for obtaining a token for accessing a service

Also Published As

Publication number Publication date
JP7123540B2 (ja) 2022-08-23
EP3460698A1 (en) 2019-03-27
KR102371997B1 (ko) 2022-03-08
KR20190035557A (ko) 2019-04-03
US11265315B2 (en) 2022-03-01
JP2019062281A (ja) 2019-04-18
US20190098003A1 (en) 2019-03-28
EP3460698B1 (en) 2021-06-23

Similar Documents

Publication Publication Date Title
CN109558106A (zh) 信息处理终端和方法、用于信息处理的系统及存储介质
US11310230B2 (en) System for electronic authentication with live user determination
US9531710B2 (en) Behavioral authentication system using a biometric fingerprint sensor and user behavior for authentication
CA2945703C (en) Systems, apparatus and methods for improved authentication
TWI728261B (zh) 判定認證能力之查詢系統、方法及非暫態機器可讀媒體
CN108985027B (zh) 图像处理装置、方法、系统和存储介质
CN108959876B (zh) 图像处理装置、与图像处理装置有关的系统和方法
US10387632B2 (en) System for provisioning and allowing secure access to a virtual credential
KR20200024870A (ko) 무선 주파수 식별 가능한 신분 서류 및 제스처 요청-응답 프로토콜에 기초한 사용자 인증
US20180343247A1 (en) Method, user terminal and authentication service server for authentication
CN108959878A (zh) 用户认证系统中采用的方法以及其中包括的信息处理装置
JP2022171928A (ja) 端末装置、認証サーバ、端末装置の制御方法、認証方法及びプログラム
CN109660505B (zh) 系统、语音操作设备、控制方法以及存储介质
WO2021244471A1 (zh) 一种实名认证方法及装置
KR101679183B1 (ko) 전자 서명 서버 및 방법
CN109428725A (zh) 信息处理设备、控制方法和存储介质
CN114844629A (zh) 区块链账户的验证方法、装置、计算机设备及存储介质
KR101546390B1 (ko) 행위자 인증 정보 처리 방법, 이를 수행하는 행위자 인증 정보 처리 장치 및 이를 기록한 기록매체
KR101988365B1 (ko) 얼굴 인식 시스템 및 그 방법
JP2019205187A (ja) 画像処理装置、方法、プログラム及びシステム
KR101559203B1 (ko) 생체 정보 인증 시스템 및 방법
WO2020017659A1 (ja) 本人認証を必要とするサービスの利用を支援するためのユーザ装置、そのユーザ装置において実行されるプログラム、本人認証を必要とするサービスの利用を支援するためのシステム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination