JP5257320B2 - Portable terminal device, control method thereof, and program - Google Patents

Portable terminal device, control method thereof, and program Download PDF

Info

Publication number
JP5257320B2
JP5257320B2 JP2009238225A JP2009238225A JP5257320B2 JP 5257320 B2 JP5257320 B2 JP 5257320B2 JP 2009238225 A JP2009238225 A JP 2009238225A JP 2009238225 A JP2009238225 A JP 2009238225A JP 5257320 B2 JP5257320 B2 JP 5257320B2
Authority
JP
Japan
Prior art keywords
voiceprint
voiceprint authentication
voice
hands
authentication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009238225A
Other languages
Japanese (ja)
Other versions
JP2011087110A (en
Inventor
達巳 樋口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2009238225A priority Critical patent/JP5257320B2/en
Publication of JP2011087110A publication Critical patent/JP2011087110A/en
Application granted granted Critical
Publication of JP5257320B2 publication Critical patent/JP5257320B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Description

本発明は、携帯端末装置、その制御方法、及び、プログラムに関し、更に詳しくは、ハンズフリー機能付き携帯端末装置、その制御方法、及び、プログラムに関する。   The present invention relates to a mobile terminal device, a control method thereof, and a program, and more particularly to a mobile terminal device with a hands-free function, a control method thereof, and a program.

昨今、携帯電話の急速な普及に伴い、人々の生活に対する携帯電話の役割は大きくなってきている。メールや発着信の履歴は、利用者の重大なプライバシ情報であり、第三者によるこれら履歴の閲覧を制限するセキュリティ機能も多数存在する。   In recent years, with the rapid spread of mobile phones, the role of mobile phones in people's lives has been increasing. Mail and outgoing / incoming histories are important privacy information for users, and there are many security functions that restrict viewing of these histories by third parties.

また、携帯電話の普及に伴ってその利用シーンも多岐に渡ってきている。ハンズフリー機能を用いて、料理をしながら電話で友人と会話をしたり、運転中に電話で知人に道を訊ねたりすることも可能となっている。   In addition, with the spread of mobile phones, the usage scenes are also diversified. Using hands-free functions, it is possible to talk with friends over the phone while cooking, or to ask an acquaintance over the phone while driving.

後者のように、運転中に携帯電話のハンズフリー機能を用いて各種携帯電話の機能を利用するシーンを考える。この場合、ハンズフリー機能によって音声による携帯電話の操作が可能となることにより、運転しながら以下のような操作が可能となる。
（１）行き先の住所が記載されたメールを読み上げること。
（２）目的地への道順を知っている知人の番号に電話をかけること。 As in the latter case, consider a scene in which the functions of various mobile phones are used by using the hands-free function of the mobile phone during driving. In this case, since the mobile phone can be operated by voice by the hands-free function, the following operations can be performed while driving.
(1) Read a mail with the address of the destination.
(2) Call the number of an acquaintance who knows the route to the destination.

上記のように、携帯電話の利便性は大きく向上する一方、車中に同乗している携帯電話の持ち主以外の声で携帯電話が操作されてしまう恐れがある。このように、ハンズフリーを利用することによって利便性は大きく向上するものの、携帯電話中には多数のプライバシ情報が含まれるため、他人に操作されることは避けたいという要望がある。   As described above, the convenience of the mobile phone is greatly improved, but the mobile phone may be operated by a voice other than the owner of the mobile phone riding in the vehicle. As described above, although the convenience is greatly improved by using hands-free, since a lot of privacy information is included in the mobile phone, there is a demand to avoid manipulation by others.

上記要望に応えるために、本発明者は、特許文献１において、ユーザの声紋を予め登録しておき、携帯電話の入力部から入力した声紋と、予め登録された声紋とを比較し、双方が一致するとハンズフリー機能への入力を有効にする発明を提案している。   In order to respond to the above request, the present inventor has previously registered a user's voiceprint in Patent Document 1, compares the voiceprint input from the input unit of the mobile phone with the previously registered voiceprint, It proposes an invention that enables input to the hands-free function when they match.

特開２００９−１７７４４０号公報JP 2009-177440 A

しかし、提案した特許文献１の発明では、ハンズフリー操作中にマイクに入力する音声に声紋認証をかけるため、省電力の観点から改善の余地があった。   However, the proposed invention of Patent Document 1 has room for improvement from the viewpoint of power saving because voiceprint authentication is performed on the voice input to the microphone during the hands-free operation.

本発明は、上記に鑑み、ハンズフリー機能の利便性を確保しつつ、プライバシ情報の秘匿性及び省電力性にも優れた携帯端末装置、その制御方法、及び、そのような携帯端末装置に使用するためのプログラムを提供することを目的とする。   In view of the above, the present invention is a portable terminal device that is excellent in privacy information concealment and power saving while ensuring the convenience of the hands-free function, its control method, and such a portable terminal device. The purpose is to provide a program to do this.

上記目的を達成するために、本発明は、発生した音声に従って所定の処理を実行するハンズフリー装置と、前記発生した音声の声紋と、予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行する声紋認証部と、前記声紋認証部の作動周期を規定するセキュリティレベルを指定するレベル指定部とを備え、前記ハンズフリー装置は、音声が発生すると前記声紋認証部による声紋認証に関わらずに所定の処理を開始し、前記声紋認証部は、音声が発生したのが最後に声紋認証を実行してから前記セキュリティレベルにより規定された作動周期が経過する前か後かを判定し、前と判定した場合は声紋認証を実行せず、後と判定した場合は、当該音声の声紋と前記予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行し、当該声紋認証において一致すると判定した場合はそのまま前記ハンズフリー装置に所定の処理を継続させ、一致しないと判定した場合は前記ハンズフリー装置に所定の処理を停止させる、ことを特徴とする携帯端末装置を提供する。 In order to achieve the above object, the present invention determines whether a hands-free device that executes a predetermined process in accordance with a generated voice and a voice print of the generated voice match a voice print registered in a storage device in advance. A voice print authentication unit that executes voice print authentication, and a level specification unit that specifies a security level that defines an operation cycle of the voice print authentication unit, and the hands-free device performs voice print authentication by the voice print authentication unit when voice is generated. Regardless of whether or not predetermined processing is started, the voiceprint authentication unit determines whether the voice has been generated before or after the operation cycle defined by the security level has elapsed since the voiceprint authentication was last performed. If it is determined to be before, voiceprint authentication is not executed, and if it is determined to be after, voiceprint authentication is performed to determine whether the voiceprint of the voice matches the voiceprint previously registered in the storage device. Run, the voiceprint is continued a predetermined processing as it is the hands-free device if it is determined that matches the authentication, if it is not a match to stop the predetermined process to the hands-free device, and wherein the A portable terminal device is provided.

また、本発明は、発生した音声に従って所定の処理を実行するハンズフリー機能提供ステップと、前記発生した音声の声紋と、予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行する声紋認証ステップと、前記声紋認証ステップの作動周期を規定するセキュリティレベルを指定するレベル指定ステップとを有し、前記ハンズフリー機能提供ステップでは、音声が発生すると前記声紋認証ステップによる声紋認証に関わらずに所定の処理を開始し、前記声紋認証ステップでは、音声が発生したのが最後に声紋認証を実行してから前記セキュリティレベルにより規定された作動周期が経過する前か後かを判定し、前と判定した場合は声紋認証を実行せず、後と判定した場合は、当該音声の声紋と前記予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行し、当該声紋認証において一致すると判定した場合はそのまま前記ハンズフリー機能提供ステップでの所定の処理を継続させ、一致しないと判定した場合は前記ハンズフリー機能提供ステップでの所定の処理を停止させる、ことを特徴とする、携帯端末装置の制御方法を提供する。 The present invention also provides a hands-free function providing step for executing predetermined processing in accordance with the generated voice, and voiceprint authentication for determining whether the generated voiceprint matches the voiceprint previously registered in the storage device. A voice print authentication step to be executed; and a level specifying step for specifying a security level that defines an operation cycle of the voice print authentication step. In the hands-free function providing step, when voice is generated, the voice print authentication by the voice print authentication step is performed. Regardless, a predetermined process is started, and in the voiceprint authentication step, it is determined whether the voice is generated before or after the operation cycle defined by the security level has elapsed since the voiceprint authentication was last executed. If it is determined to be before, voiceprint authentication is not executed. If it is determined to be after, the voiceprint of the voice is registered in the storage device in advance. Voice print authentication is performed to determine whether or not the voice print matches. If it is determined that the voice print authentication is matched, the predetermined processing in the hands-free function providing step is continued as it is. Provided is a method for controlling a portable terminal device, characterized in that predetermined processing in the free function providing step is stopped .

本発明は、更に、コンピュータを搭載する携帯端末装置のためのプログラムであって、前記コンピュータを、発生した音声に従って所定の処理を実行するハンズフリー機能提供手段と、前記発生した音声の声紋と、予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行する声紋認証手段と、前記声紋認証手段の作動周期を規定するセキュリティレベルを指定するレベル指定手段として作動させ、前記ハンズフリー機能提供手段は、音声が発生すると前記声紋認証手段による声紋認証に関わらずに所定の処理を開始し、前記声紋認証手段は、音声が発生したのが最後に声紋認証を実行してから前記セキュリティレベルにより規定された作動周期が経過する前か後かを判定し、前と判定した場合は声紋認証を実行せず、後と判定した場合は、当該音声の声紋と前記予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行し、当該声紋認証において一致すると判定した場合はそのまま前記ハンズフリー機能提供手段に所定の処理を継続させ、一致しないと判定した場合は前記ハンズフリー機能提供手段に所定の処理を停止させる、ことを特徴とするプログラムを提供する。 The present invention further relates to a program for a portable terminal device equipped with a computer, the hands-free function providing means for executing a predetermined process in accordance with the generated voice, and the voice print of the generated voice. a voiceprint authentication means and voiceprint registered in advance in the storage device to perform the determining voiceprint authentication or matches, is operated as a level specifying means for specifying a security level that defines the operation period of the voiceprint authentication means, the hands The free function providing means starts a predetermined process regardless of the voice print authentication by the voice print authentication means when the voice is generated, and the voice print authentication means executes the voice print authentication after the voice is finally generated. It is determined whether the operation cycle specified by the security level is before or after elapse, and if it is determined that it is before, voiceprint authentication is not executed and it is determined that it is after. If so, voiceprint authentication is performed to determine whether the voiceprint of the voice is coincident with the voiceprint registered in the storage device. If it is determined that the voiceprint is matched, the handsfree function providing means is directly used. A program is provided in which predetermined processing is continued, and when it is determined that they do not match, the hands-free function providing means stops the predetermined processing .

本発明は、ハンズフリー機能の利便性を確保しつつ、プライバシ情報の秘匿性及び省電力性にも優れたハンズフリー機能付き携帯端末装置、その制御方法、及び、プログラムを提供できる。   INDUSTRIAL APPLICABILITY The present invention can provide a portable terminal device with a hands-free function, a control method thereof, and a program that are excellent in privacy information concealment and power saving while ensuring convenience of the hands-free function.

本発明の一実施形態に係る携帯端末装置のブロック図。The block diagram of the portable terminal device which concerns on one Embodiment of this invention. 図１の携帯端末装置の処理を示すフローチャート。The flowchart which shows the process of the portable terminal device of FIG.

本発明の最小構成の携帯端末装置は、発生した音声に従って所定の処理を実行するハンズフリー装置と、前記発生した音声の声紋と、予め記憶装置に登録された声紋とを比較して、声紋認証を実行する声紋認証部と、前記声紋認証部の作動周期を規定するセキュリティレベルを指定するレベル指定部とを備え、前記規定された作動周期が経過すると、前記声紋認証部が作動し、前記ハンズフリー装置は、該声紋認証部による認証結果に依存して、前記所定の処理を実行又は停止し、前記規定された作動周期内では、前記ハンズフリー装置は、前記発生した音声に従って前記所定の処理を実行する。   The portable terminal device having the minimum configuration according to the present invention compares a voice print of a generated voice with a hands-free device that executes a predetermined process according to the generated voice, and a voice print that has been previously registered in a storage device. And a level designating unit that designates a security level that defines an operation cycle of the voiceprint authentication unit, and when the specified operation cycle elapses, the voiceprint authentication unit operates and the hands The free device executes or stops the predetermined processing depending on the authentication result by the voiceprint authentication unit, and within the specified operation cycle, the hands-free device performs the predetermined processing according to the generated voice. Execute.

また、本発明の最小構成の携帯端末装置の制御方法は、発生した音声に従って所定の処理を実行するハンズフリー機能提供ステップと、前記発生した音声の声紋と、予め記憶装置に登録された声紋とを比較して、声紋認証を実行する声紋認証ステップと、前記声紋認証部の作動周期を規定するセキュリティレベルを指定するレベル指定ステップとを有し、前記規定された作動周期が経過すると前記声紋認証ステップを実行し、前記ハンズフリー機能提供ステップは、該声紋認証ステップによる認証結果に依存して、前記所定の処理を実行又は停止し、前記規定された作動周期内では、前記ハンズフリー機能提供ステップは、前記発生した音声に従って前記所定の処理を実行する。   According to the present invention, there is provided a control method for a portable terminal device having a minimum configuration, a hands-free function providing step for executing a predetermined process according to a generated voice, a voiceprint of the generated voice, and a voiceprint previously registered in a storage device. The voiceprint authentication step for executing voiceprint authentication, and the level specifying step for specifying the security level for specifying the operation cycle of the voiceprint authentication unit, and when the specified operation cycle elapses, the voiceprint authentication The hands-free function providing step executes or stops the predetermined process depending on the authentication result of the voiceprint authentication step, and the hands-free function providing step within the specified operation cycle. Performs the predetermined processing in accordance with the generated voice.

更に、本発明の最小構成のプログラムは、コンピュータを搭載する携帯端末装置のためのプログラムであって、前記コンピュータを、発生した音声に従って所定の処理を実行するハンズフリー機能提供手段と、前記発生した音声の声紋と、予め記憶装置に登録された声紋とを比較して、声紋認証を実行する声紋認証手段と、前記声紋認証部の作動周期を規定するセキュリティレベルを指定するレベル指定手段として作動させ、前記規定された作動周期が経過すると前記声紋認証手段が作動し、前記ハンズフリー機能提供手段は、該声紋認証手段による認証結果に依存して、前記所定の処理を実行又は停止し、前記規定された作動周期内では、前記ハンズフリー機能提供手段は、前記発生した音声に従って前記所定の処理を実行する。   Furthermore, the program having the minimum configuration according to the present invention is a program for a portable terminal device equipped with a computer, and provides the hands-free function providing means for executing predetermined processing in accordance with the generated voice. Compared with a voice print and a voice print registered in the storage device in advance, it operates as a voice print authentication means for executing voice print authentication and a level specifying means for specifying a security level that defines the operation cycle of the voice print authentication section. The voiceprint authentication means is activated when the prescribed operation period has elapsed, and the hands-free function providing means executes or stops the predetermined processing depending on the authentication result by the voiceprint authentication means, Within the operation cycle, the hands-free function providing means executes the predetermined process according to the generated voice.

本発明の携帯端末装置、その制御方法、及び、プログラムは、セキュリティレベルに応じて、声紋認証を行い、その声紋認証の結果に従って、ハンズフリー機能実行させるか否かを制御することにより、ハンズフリー機能の利便性を確保しつつ、優れたプライバシ情報の秘匿性及び省電力性が得られる。   The portable terminal device, the control method thereof, and the program of the present invention perform voiceprint authentication according to the security level, and control whether to execute the handsfree function according to the result of the voiceprint authentication. While ensuring the convenience of the function, excellent privacy information secrecy and power saving can be obtained.

以下、図面を参照して本発明の一実施形態に係る携帯端末装置を説明する。図１は、本実施形態に係る携帯端末装置（携帯電話）のブロック図である。携帯電話１００は、入力部１０と、出力部１１と、ハンズフリー機能提供部１２と、制御部１３と、記憶部１４と、演算部１５と、音声認識部１６と、音声合成部１７と、声紋認証部１８と、電源供給状態監視部１９と、着信状態監視部２０とを有する。これら各部は、例えば、ＣＰＵのプログラムによって構成される。また、それらの一部をハードウエアで構成することも出来る。   Hereinafter, a mobile terminal device according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram of a mobile terminal device (mobile phone) according to the present embodiment. The mobile phone 100 includes an input unit 10, an output unit 11, a hands-free function providing unit 12, a control unit 13, a storage unit 14, a calculation unit 15, a voice recognition unit 16, a voice synthesis unit 17, The voiceprint authentication unit 18, the power supply state monitoring unit 19, and the incoming call state monitoring unit 20 are included. Each of these units is constituted by a CPU program, for example. Some of them can also be configured by hardware.

入力部１０は、携帯電話１００への各種入力を受け付ける。各種入力には、セキュリティレベルの設定入力が含まれる。また、声紋認証部１８が作動していないときに、強制的に声紋認証部１８を作動させる入力も含まれる。出力部１１は、携帯電話からの各種出力を行う。この出力には、例えば、音声合成部１７の出力も含まれる。ハンズフリー機能提供部１２は、ハンズフリー機能を提供する。なお、ハンズフリー機能提供部１２は、携帯電話とは別体のハンズフリー装置と携帯電話とを接続する接続部とすることも出来る。制御部１３は、例えば、プログラム実行の制御を行うと共に、各部の処理を補助するプログラムである。記憶部１４は、データの記憶を行う。データには、セキュリティレベルや、入力された音声、予め登録された音声の声紋も含まれる。演算部１５は、各種演算を行う。演算には、入力された声紋と予め登録された声紋との比較照合が含まれる。ハンズフリー機能提供部１２及び音声認識部１６は、本発明のハンズフリー装置を構成し、制御部１３及び記憶部１４は、本発明のセキュリティレベルを指定するレベル指定部を構成する。   The input unit 10 receives various inputs to the mobile phone 100. Various inputs include security level setting inputs. Also included is an input for forcibly operating the voiceprint authentication unit 18 when the voiceprint authentication unit 18 is not operating. The output unit 11 performs various outputs from the mobile phone. This output includes, for example, the output of the speech synthesizer 17. The hands-free function providing unit 12 provides a hands-free function. The hands-free function providing unit 12 may be a connection unit that connects a hands-free device separate from the mobile phone and the mobile phone. The control unit 13 is, for example, a program that controls program execution and assists the processing of each unit. The storage unit 14 stores data. The data includes a security level, an input voice, and a voice print of a previously registered voice. The calculation unit 15 performs various calculations. The calculation includes comparison and collation between the input voiceprint and a previously registered voiceprint. The hands-free function providing unit 12 and the voice recognition unit 16 constitute a hands-free device according to the present invention, and the control unit 13 and the storage unit 14 constitute a level designation unit that designates a security level according to the present invention.

音声認識部１６は、ハンズフリー機能提供部と連携して、外部から入力された音声の音声認識を行う。音声合成部１７は、ハンズフリー機能提供部と連携して、携帯電話の使用者が画面を見なくても済むように、音声ナビゲーションを行うための音声の作成を行う。例えば、音声合成部１７は、登録されている電話帳の名前を読み上げる音声、或いは、着信があった場合に、誰からの着信かを読み上げる音声などを合成し、出力部１１を経由して出力する。   The voice recognition unit 16 performs voice recognition of voice input from the outside in cooperation with the hands-free function providing unit. The voice synthesizer 17 creates a voice for voice navigation so that the user of the mobile phone does not need to look at the screen in cooperation with the hands-free function providing part. For example, the voice synthesizing unit 17 synthesizes a voice that reads the name of a registered phone book or a voice that reads who the incoming call is when there is an incoming call, and outputs it via the output unit 11 To do.

声紋認証部１８は、ハンズフリー機能提供部と連携して、入力部１０を介して外部から入力された音声の声紋認証を行う。電源供給状態監視部１９は、外部から携帯電話１００への電源供給の有無を監視する。また、携帯電話１００の電源電圧がしきい値以下であるか否かを監視する。着信状態監視部２０は、携帯電話１００への電話やメールの着信の有無を監視する。例えば、メール着信があると、その旨が携帯電話自体の機能により、音声やアラームなどで伝達される。   The voiceprint authentication unit 18 performs voiceprint authentication of voice input from the outside via the input unit 10 in cooperation with the hands-free function providing unit. The power supply state monitoring unit 19 monitors the presence or absence of power supply to the mobile phone 100 from the outside. It also monitors whether the power supply voltage of the mobile phone 100 is below a threshold value. The incoming state monitoring unit 20 monitors whether or not there is an incoming call or mail to the mobile phone 100. For example, when there is an incoming mail, the fact is transmitted by voice or an alarm by the function of the mobile phone itself.

声紋認証部１８のために、セキュリティレベルが設定されている。制御部１３は、そのセキュリティレベルに応じて、声紋認証を実施する周期を定めており、携帯電話１００における省電力性に配慮している。例えば、セキュリティレベルは、以下の４段階に設定可能であり、各セキュリティレベルでは、付記したモードに設定される。
［セキュリティレベル］
レベル４：常に声紋認証を行う
レベル３：５分毎に認証が必要なモードに切り替わる
レベル２：１０分毎に認証が必要なモードに切り替わる
レベル１：電源投入後の最初の入力にのみ声紋認証を行う
なお、レベル２及び３では、声紋認証が必要なモードで認証を一旦パスすれば、その後はそのレベルで設定された周期内は、声紋認証を不要とする。声紋認証にパスしない場合には、所定時間内は音声認識部１６にロックを掛ける。 A security level is set for the voiceprint authentication unit 18. The control unit 13 determines the period for performing voiceprint authentication according to the security level, and considers power saving in the mobile phone 100. For example, the security level can be set in the following four stages, and each security level is set to the mode described.
[Security level]
Level 4: Always perform voice print authentication Level 3: Switch to a mode that requires authentication every 5 minutes Level 2: Switch to a mode that requires authentication every 10 minutes Level 1: Voice print authentication only for the first input after power-on At levels 2 and 3, once authentication is passed in a mode that requires voiceprint authentication, then voiceprint authentication is not required within the period set at that level. If the voiceprint authentication is not passed, the voice recognition unit 16 is locked for a predetermined time.

図２は、上記ハンズフリー機能付き携帯電話１００の処理を示すフローチャートである。この例では、運転中にハンズフリー機能を用いて、携帯電話のメール確認を行う場合を例として説明する。携帯電話使用者（ユーザ）は、事前に本人の声の情報を記憶部１４に記憶させておく。また、セキュリティレベルに関しても事前に設定し、記憶部１４に記憶させておく。図２の例では、事前にユーザのレベル設定でレベル２に設定してあるものとする。   FIG. 2 is a flowchart showing the processing of the mobile phone 100 with the hands-free function. In this example, a case will be described as an example in which an e-mail confirmation of a mobile phone is performed using a hands-free function during driving. The mobile phone user (user) stores information on the voice of the user in the storage unit 14 in advance. The security level is also set in advance and stored in the storage unit 14. In the example of FIG. 2, it is assumed that level 2 is set in advance by the user's level setting.

本携帯電話１００をハンズフリーモードに設定すると、まず、制御部１３が、セキュリティレベルを読み出し（ステップＳ２００）、次いで、その呼び出したセキュリティレベルに従って、声紋認証の実施周期を設定する（ステップＳ２１０）。その設定周期は、声紋認証部１８に与えられる。その後、声紋認証部１８は、設定周期に従って音声の発生を監視する（ステップＳ２２０）。   When the mobile phone 100 is set to the hands-free mode, the control unit 13 first reads the security level (step S200), and then sets the voice print authentication execution period according to the called security level (step S210). The setting cycle is given to the voiceprint authentication unit 18. Thereafter, the voiceprint authentication unit 18 monitors the generation of voice according to the set cycle (step S220).

ユーザが、自動車の運転中にメールの読み上げを指示する場合には、例えば「Ａさんからのメール読み上げ」などの予め決められた言葉による音声を発生する。ステップＳ２２０で、声紋認証部１８は、この音声の発生を認識すると、その発生時点が声紋認証周期を超過しているか否かを判定する（ステップＳ２３０）。ステップＳ２３０で、現時点で声紋認証周期を超過していると判定されると、声紋認証部１８は、声紋認証処理を実行する（ステップＳ２４０）。   When the user instructs to read out an e-mail while driving a car, for example, a voice in a predetermined language such as “Read out an e-mail from Mr. A” is generated. In step S220, when recognizing the generation of this voice, the voiceprint authentication unit 18 determines whether or not the generation time point exceeds the voiceprint authentication cycle (step S230). If it is determined in step S230 that the voiceprint authentication period has been exceeded at this time, the voiceprint authentication unit 18 executes voiceprint authentication processing (step S240).

声紋認証部１８は、声紋認証処理において、発生した音声データの声紋と、予め記憶部１４に記憶してあった音声データの声紋とを照合し、声紋が一致しているか否かを判定する。発生した音声の声紋が登録された音声の声紋と一致していれば、声紋認証に成功し、一致していなければ声紋認証に失敗する。その結果が、ステップＳ２５０で判定される。声紋認証に成功したと判定されると、音声認識部１６は、音声認識処理を実行する。   In the voiceprint authentication process, the voiceprint authentication unit 18 collates the voiceprint of the generated voice data with the voiceprint of the voice data stored in the storage unit 14 in advance, and determines whether the voiceprints match. If the generated voiceprint matches the registered voiceprint, the voiceprint authentication succeeds. If not, the voiceprint authentication fails. The result is determined in step S250. If it is determined that the voiceprint authentication is successful, the voice recognition unit 16 executes a voice recognition process.

ステップＳ２３０で、現時点が声紋認証周期内であると判定されると、声紋認証実施を省略して直接にステップＳ２６０に移行し、音声認識部１６による音声認識が実行される。レベル２に設定されている場合には、先の声紋認証処理から１０分以内であれば声紋認証は省略され、１０分経過後であれば、声紋認証が実行される。つまり、先の声紋認証から１０分の間は、声紋認証は実施しない。このレベル設定により、セキュリティに配慮しつつも、そのレベルに応じて処理時間の短縮や省電力が可能になる。   If it is determined in step S230 that the current time is within the voiceprint authentication cycle, the voiceprint authentication is omitted and the process proceeds directly to step S260, where the voice recognition unit 16 performs voice recognition. When the level 2 is set, the voice print authentication is omitted if it is within 10 minutes from the previous voice print authentication process, and the voice print authentication is executed if 10 minutes have elapsed. That is, voiceprint authentication is not performed for 10 minutes after the previous voiceprint authentication. This level setting makes it possible to reduce processing time and save power according to the level while considering security.

ステップＳ２５０で声紋認証が成功したと判定されると、音声認識部１６は、発生した音声から認識される言葉が、予め登録された複数の言葉の１つと一致しているか否かを判定する（ステップＳ２６０）。音声認識の結果、予め決められた言葉との一致が判定されると（ステップＳ２７０）、その処理が実行される（ステップＳ２８０）。例えば、「メール読み上げ」という言葉が認識されると、音声合成部１７は、候補となるメールタイトルを読み上げる。この場合、「候補３番メール読み上げ」という言葉に応答して、３件目のメールを読み上げる。   If it is determined in step S250 that the voiceprint authentication is successful, the voice recognition unit 16 determines whether or not the word recognized from the generated voice matches one of a plurality of pre-registered words ( Step S260). As a result of the speech recognition, when a match with a predetermined word is determined (step S270), the process is executed (step S280). For example, when the word “read aloud” is recognized, the speech synthesizer 17 reads a candidate mail title. In this case, the third mail is read out in response to the word “candidate third mail read out”.

本実施形態の携帯電話１００では、ハンズフリー機能を利用する際のセキュリティを確保しつつ、携帯電話の省電力化を実現することが可能となる。設定されたセキュリティレベルに従って声紋認証処理を省略する結果として、省電力化が実現できる。例えば、周囲が騒がしい状況下でハンズフリーを利用する場合には、この効果が顕著である。   In the mobile phone 100 of the present embodiment, it is possible to realize power saving of the mobile phone while ensuring security when using the hands-free function. As a result of omitting the voice print authentication process according to the set security level, power saving can be realized. For example, this effect is remarkable when hands-free is used in a situation where the surroundings are noisy.

特許文献１では、常に周囲の音声に対して声紋認証を実施する。このため、周囲で音声が常に発生しているような場合には、声紋認証処理が動き続けてしまう結果、過度にＣＰＵ時間を消費してしまう恐れがある。例えば、常に周囲で音声が発生している状況下では、毎秒の声紋認証におけるＣＰＵ使用率が１０％であった場合には、５分毎に声紋認証を行う設定にすると、５分間でＣＰＵ使用量１０％分の節約が可能となり、省電力化に大きく貢献できる。   In Patent Document 1, voiceprint authentication is always performed on surrounding sounds. For this reason, when sound is always generated in the surroundings, the voiceprint authentication process may continue to move, resulting in excessive CPU time consumption. For example, in a situation where voice is always generated in the surroundings, if the CPU usage rate in voiceprint authentication per second is 10%, the CPU usage is 5 minutes when the voiceprint authentication is set to be performed every 5 minutes. The amount can be saved by 10%, which can greatly contribute to power saving.

上記実施形態のハンズフリー機能付き携帯電話１００では、例えば、ドライブモードの設定が可能とする。このドライブモードでは、携帯電話は、自動車の制御装置と連動し、例えば運転手以外に同乗者がいるか否かを判定する。運転手以外に同乗者がいない場合には、声紋認証の実施を省略し、処理の高速化、省電力化を可能とする。同乗者の人数によって、設定するレベルを変えてもよい。同乗者の有無や人数は、例えば、車両の制御装置が各座席の重量で判定可能である。   In the mobile phone 100 with the hands-free function of the embodiment, for example, the drive mode can be set. In this drive mode, the mobile phone determines whether there is a passenger other than the driver, for example, in conjunction with the control device of the automobile. When there is no passenger other than the driver, the voiceprint authentication is omitted, and the processing can be speeded up and the power can be saved. The set level may be changed depending on the number of passengers. The presence / absence of passengers and the number of passengers can be determined, for example, by the weight of each seat by the vehicle control device.

上記実施形態の携帯電話では、運転中以外の場合にも、周囲の音声を解析し、一定時間の解析の結果として、音声がユーザの音声以外には発生していないと判定すると、声紋認証を省略することが出来る。   In the mobile phone of the above embodiment, even when not driving, if the surrounding voice is analyzed and it is determined that the voice is not generated other than the user's voice as a result of the analysis for a certain period of time, voiceprint authentication is performed. It can be omitted.

電源状態監視部１９は、外部から携帯電話への電源供給状態を監視している。外部からの電源供給がない状態では、携帯電話のバッテリの電圧が低く、その残量がしきい値よりも小さいと判定されると、たとえ設定された周期が超過していても、声紋認証部１８による声紋認証を省略する。この省略によって、電池切れを回避する。   The power supply state monitoring unit 19 monitors the power supply state from the outside to the mobile phone. When it is determined that the battery voltage of the mobile phone is low and the remaining amount is smaller than the threshold value when there is no external power supply, the voiceprint authentication unit even if the set period is exceeded The voiceprint authentication by 18 is omitted. This omission avoids battery exhaustion.

声紋認証処理は、ＣＰＵにおける他の処理の遅延を伴うことがある。そのため、声紋認証よりも他の処理を優先する非同期モードに設定可能である。非同期モードを有する携帯電話では、声紋認証を行う専用のハードウエアを用意する。音声による操作要求があった場合には、まず声紋認証ハードウエアにて処理を実施する。また、その処理の完了を待たずに、ソフトウエアとして後続の処理を実施する。   The voiceprint authentication process may be accompanied by a delay in other processes in the CPU. Therefore, it is possible to set an asynchronous mode in which processing other than voiceprint authentication is prioritized. For mobile phones having an asynchronous mode, dedicated hardware for voiceprint authentication is prepared. When there is an operation request by voice, processing is first performed by voiceprint authentication hardware. Further, the subsequent process is executed as software without waiting for the completion of the process.

例えば、「メール読み出し」という要求があった場合には、声紋処理ハードウエアに声紋の照合処理を依頼し、その一致/不一致の結果を待つことなく、音声認識部１６はメールを読み出すための処理を引き続き行う。そして、あるタイミングで声紋認証の結果が不一致であった場合には、その後の処理をキャンセルする。一致していた場合には、何もせずに後続の処理を継続する。この場合、ハードウエア処理によりある程度高速であることが保証されれば、全体の応答性の改善が可能である。処理の高速化は、必然的に省電力につながる。   For example, when there is a request for “read mail”, the voice recognition processing unit 16 requests the voice print processing hardware to perform voice print collation processing, and the voice recognition unit 16 reads the mail without waiting for the match / mismatch result. Continue to do. If the result of voiceprint authentication does not match at a certain timing, the subsequent processing is canceled. If they match, the subsequent processing is continued without doing anything. In this case, if it is guaranteed that the processing speed is high to some extent by hardware processing, the overall response can be improved. The speeding up of processing inevitably leads to power saving.

ハンズフリー時に、ボタン操作などの端末操作を行った場合には、誰かが不正に操作を行った可能性がある。このため、声紋認証の周期をリセットして、直ちに認証を実施する設定も可能である。また、声紋認証を行わない周期内であっても、特定のボタン操作に従って、声紋認証を行ってもよい。   If a terminal operation such as a button operation is performed during hands-free operation, there is a possibility that someone has performed an unauthorized operation. For this reason, it is possible to reset the voiceprint authentication cycle and immediately perform authentication. Further, even within a period in which voiceprint authentication is not performed, voiceprint authentication may be performed according to a specific button operation.

音声認識部、音声合成部、声紋認証部は、それぞれ専用のハードウエアを設けることなく、ＣＰＵ処理のみでも実現可能である。   The voice recognition unit, the voice synthesis unit, and the voiceprint authentication unit can be realized only by CPU processing without providing dedicated hardware.

ハンズフリーを用いた携帯電話の応答性能では、声紋認証に要する時間、及び、特定キーフレーズの音声認識時間など、実処理にかかる時間以外に、通常のボタンを用いて携帯電話を操作するときには生じなかった余分な処理時間が費やされる。このような、処理時間の増大は、利用者の利便性に大きく関わる。従って、本発明に従って、声紋認証の稼働を、そのセキュリティレベルで制御し処理時間を短縮することは、製品としての大きなアピールポイントとなる。   The response performance of a mobile phone using hands-free occurs when the mobile phone is operated using a normal button other than the time required for actual processing such as the time required for voiceprint authentication and the voice recognition time for a specific key phrase. Extra processing time was not spent. Such an increase in processing time is greatly related to user convenience. Therefore, according to the present invention, controlling the operation of voiceprint authentication at its security level and reducing the processing time is a big appeal point as a product.

本発明を特別に示し且つ例示的な実施形態を参照して説明したが、本発明は、その実施形態及びその変形に限定されるものではない。当業者に明らかなように、本発明は、添付の特許請求の範囲に規定される本発明の精神及び範囲を逸脱することなく、種々の変更が可能である。   Although the invention has been particularly shown and described with reference to illustrative embodiments, the invention is not limited to these embodiments and variations thereof. It will be apparent to those skilled in the art that various modifications can be made to the present invention without departing from the spirit and scope of the invention as defined in the appended claims.

１００：携帯電話
１０：入力部
１１：出力部
１２：ハンズフリー提供部
１３：制御部
１４：記憶部
１５：演算部
１６：音声認識部
１７：音声合成部
１８：声紋認証部
１９：電源供給状態監視部
２０：着信状態監視部 100: mobile phone 10: input unit 11: output unit 12: hands-free providing unit 13: control unit 14: storage unit 15: calculation unit 16: speech recognition unit 17: speech synthesis unit 18: voice print authentication unit 19: power supply state Monitoring unit 20: Incoming call status monitoring unit

Claims (10)

発生した音声に従って所定の処理を実行するハンズフリー装置と、
前記発生した音声の声紋と、予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行する声紋認証部と、
前記声紋認証部の作動周期を規定するセキュリティレベルを指定するレベル指定部とを備え、
前記ハンズフリー装置は、音声が発生すると前記声紋認証部による声紋認証に関わらずに所定の処理を開始し、
前記声紋認証部は、音声が発生したのが最後に声紋認証を実行してから前記セキュリティレベルにより規定された作動周期が経過する前か後かを判定し、前と判定した場合は声紋認証を実行せず、後と判定した場合は、当該音声の声紋と前記予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行し、当該声紋認証において一致すると判定した場合はそのまま前記ハンズフリー装置に所定の処理を継続させ、一致しないと判定した場合は前記ハンズフリー装置に所定の処理を停止させる、
ことを特徴とする携帯端末装置。 A hands-free device that performs predetermined processing according to the generated voice;
A voiceprint authentication unit that performs voiceprint authentication to determine whether the voiceprint of the generated voice matches a voiceprint registered in the storage device;
A level designating unit that designates a security level that defines an operation cycle of the voiceprint authentication unit,
When the voice is generated, the hands-free device starts a predetermined process regardless of voiceprint authentication by the voiceprint authentication unit,
The voiceprint authentication unit determines whether the voice has been generated before or after the operation cycle defined by the security level has elapsed since the last execution of voiceprint authentication. If it is determined not to be executed but later, voiceprint authentication is performed to determine whether the voiceprint of the voice matches the voiceprint registered in the storage device in advance. If the hands-free device continues the predetermined processing and determines that they do not match, the hands-free device stops the predetermined processing,
The portable terminal device characterized by the above-mentioned. 携帯端末装置の電池の残量がしきい値以下であるか否かを判定する電源供給状態判定装置を備え、前記声紋認証部は、前記セキュリティレベルで指定された周期の経過後であっても、電池の残量がしきい値以下のときには声紋認証を停止する、請求項１に記載の携帯端末装置。   A power supply state determination device that determines whether or not the remaining battery level of the mobile terminal device is equal to or less than a threshold value, wherein the voiceprint authentication unit is configured even after a period specified by the security level has elapsed. The portable terminal device according to claim 1, wherein voiceprint authentication is stopped when a remaining battery level is equal to or less than a threshold value. 前記声紋認証部は、ユーザの入力に応答して、セキュリティレベルで指定された周期が経過する以前であっても認証を実行する、請求項１又は２に記載の携帯端末装置。   The mobile terminal device according to claim 1, wherein the voiceprint authentication unit performs authentication even before the period specified by the security level elapses in response to a user input. 前記声紋認証部がソフトウェアで構成される、請求項１〜３の何れか一に記載の携帯端末装置。 The voiceprint authentication unit is configured by software, the portable terminal device according to any one of claims 1-3. 前記声紋認証部がハードウエアで構成される、請求項１〜３の何れか一に記載の携帯端末装置。 The voiceprint authentication unit is configured by hardware, the portable terminal device according to any one of claims 1-3. 前記ハンズフリー装置の少なくとも一部がハードウエアで構成される、請求項１〜５の何れか一に記載の携帯端末装置。 At least partially composed of hardware, the portable terminal device according to any one of claims 1-5 of the hands-free device. 車両に搭載され、該車両の制御装置から情報を取得する、請求項１〜６の何れか一に記載の携帯端末装置。 The portable terminal device according to any one of claims 1 to 6 , which is mounted on a vehicle and acquires information from a control device of the vehicle. 前記車両の制御装置から、車両内に同乗者が存在するか否かの情報を取得し、車両内に同乗者が存在しないときには、前記声紋認証部の作動を停止する、請求項７に記載の携帯端末装置。 From the control device of the vehicle, and acquires the information about whether or not a passenger in a vehicle is present, when the passenger in the vehicle is not present, it stops the operation of the voiceprint authentication unit, according to claim 7 Mobile terminal device. 発生した音声に従って所定の処理を実行するハンズフリー機能提供ステップと、
前記発生した音声の声紋と、予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行する声紋認証ステップと、
前記声紋認証ステップの作動周期を規定するセキュリティレベルを指定するレベル指定ステップとを有し、
前記ハンズフリー機能提供ステップでは、音声が発生すると前記声紋認証ステップによる声紋認証に関わらずに所定の処理を開始し、
前記声紋認証ステップでは、音声が発生したのが最後に声紋認証を実行してから前記セキュリティレベルにより規定された作動周期が経過する前か後かを判定し、前と判定した場合は声紋認証を実行せず、後と判定した場合は、当該音声の声紋と前記予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行し、当該声紋認証において一致すると判定した場合はそのまま前記ハンズフリー機能提供ステップでの所定の処理を継続させ、一致しないと判定した場合は前記ハンズフリー機能提供ステップでの所定の処理を停止させる、
ことを特徴とする携帯端末装置の制御方法。 A hands-free function providing step for executing a predetermined process in accordance with the generated voice;
A voiceprint authentication step of performing voiceprint authentication to determine whether the voiceprint of the generated voice and a voiceprint registered in a storage device match ;
A level designating step for designating a security level that defines an operation cycle of the voiceprint authentication step ,
In the hands-free function providing step, when voice is generated, a predetermined process is started regardless of the voiceprint authentication in the voiceprint authentication step,
In the voiceprint authentication step, it is determined whether or not the voice has been generated before or after the operation cycle defined by the security level has elapsed since the voiceprint authentication was last performed. If it is determined not to be executed but later, voiceprint authentication is performed to determine whether the voiceprint of the voice matches the voiceprint registered in the storage device in advance. If the predetermined process in the hands-free function providing step is continued and it is determined that they do not match, the predetermined process in the hands-free function providing step is stopped.
A method for controlling a portable terminal device. コンピュータを搭載する携帯端末装置のためのプログラムであって、前記コンピュータを、
発生した音声に従って所定の処理を実行するハンズフリー機能提供手段と、
前記発生した音声の声紋と、予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行する声紋認証手段と、
前記声紋認証手段の作動周期を規定するセキュリティレベルを指定するレベル指定手段として作動させ、
前記ハンズフリー機能提供手段は、音声が発生すると前記声紋認証手段による声紋認証に関わらずに所定の処理を開始し、
前記声紋認証手段は、音声が発生したのが最後に声紋認証を実行してから前記セキュリティレベルにより規定された作動周期が経過する前か後かを判定し、前と判定した場合は声紋認証を実行せず、後と判定した場合は、当該音声の声紋と前記予め記憶装置に登録された声紋とが一致するかを判定する声紋認証を実行し、当該声紋認証において一致すると判定した場合はそのまま前記ハンズフリー機能提供手段に所定の処理を継続させ、一致しないと判定した場合は前記ハンズフリー機能提供手段に所定の処理を停止させる、
ことを特徴とするプログラム。 A program for a portable terminal device equipped with a computer, wherein the computer is
Hands-free function providing means for executing predetermined processing according to the generated voice;
Voiceprint authentication means for executing voiceprint authentication to determine whether the voiceprint of the generated voice matches a voiceprint registered in a storage device;
Act as a level designation means for designating a security level that defines the operation cycle of the voiceprint authentication means;
The hands-free function providing means starts a predetermined process regardless of voiceprint authentication by the voiceprint authentication means when sound is generated,
The voiceprint authentication means determines whether or not the voice has been generated before or after the operation cycle defined by the security level has elapsed since the voiceprint authentication was last performed. If it is determined not to be executed but later, voiceprint authentication is performed to determine whether the voiceprint of the voice matches the voiceprint registered in the storage device in advance. If the hands-free function providing means continues the predetermined processing and determines that they do not match, the hands-free function providing means stops the predetermined processing,
A program characterized by that.
JP2009238225A 2009-10-15 2009-10-15 Portable terminal device, control method thereof, and program Expired - Fee Related JP5257320B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009238225A JP5257320B2 (en) 2009-10-15 2009-10-15 Portable terminal device, control method thereof, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009238225A JP5257320B2 (en) 2009-10-15 2009-10-15 Portable terminal device, control method thereof, and program

Publications (2)

Publication Number Publication Date
JP2011087110A JP2011087110A (en) 2011-04-28
JP5257320B2 true JP5257320B2 (en) 2013-08-07

Family

ID=44079741

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009238225A Expired - Fee Related JP5257320B2 (en) 2009-10-15 2009-10-15 Portable terminal device, control method thereof, and program

Country Status (1)

Country Link
JP (1) JP5257320B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101971008B1 (en) 2012-06-29 2019-04-22 삼성전자주식회사 Control method for terminal using context-aware and terminal thereof
JP2014072701A (en) * 2012-09-28 2014-04-21 Softbank Mobile Corp Communication terminal
CN104937603B (en) 2013-01-10 2018-09-25 日本电气株式会社 terminal, unlocking method and program
CN103280219A (en) * 2013-05-16 2013-09-04 中山大学 Android platform-based voiceprint recognition method
CN106470106B (en) * 2015-08-18 2020-09-25 南京中兴软件有限责任公司 Terminal information display method and device
CN110473556B (en) * 2019-09-17 2022-06-21 深圳市万普拉斯科技有限公司 Voice recognition method and device and mobile terminal

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003188982A (en) * 2001-12-19 2003-07-04 Nec Corp Mobile communication system and mobile wireless terminal
JP2006100989A (en) * 2004-09-28 2006-04-13 Aruze Corp Cellular phone unit
JP2007333526A (en) * 2006-06-14 2007-12-27 Denso Corp In-vehicle equipment
JP2008022395A (en) * 2006-07-14 2008-01-31 Nec Corp Mobile terminal, control method and program of the same
JP2009111764A (en) * 2007-10-30 2009-05-21 Kyocera Corp Digital broadcast authentication system, digital broadcast receiving terminal and authentication server used therefor
JP2009177440A (en) * 2008-01-24 2009-08-06 Nec Corp Mobile phone unit and control method thereof
JP2011010070A (en) * 2009-06-26 2011-01-13 Panasonic Corp Hands-free communication device

Also Published As

Publication number Publication date
JP2011087110A (en) 2011-04-28

Similar Documents

Publication Publication Date Title
JP5257320B2 (en) Portable terminal device, control method thereof, and program
JP2009177440A (en) Mobile phone unit and control method thereof
JP5218391B2 (en) Information processing apparatus having lock function, information processing apparatus locking (unlocking) method, and program thereof
WO2016054890A1 (en) Fingerprint input information processing method, system and mobile terminal
WO2021052134A1 (en) Voice recognition method and device, and mobile terminal
JP2015153258A (en) Vehicle-purposed personal authentication system and vehicle-purposed personal authentication method
KR20040073937A (en) User programmable voice dialing for mobile handset
WO2016165245A1 (en) User interface control method and terminal
EP4059011A1 (en) Voice activation based on user recognition
CN113571053A (en) Voice wake-up method and device
JP4657097B2 (en) Electronic equipment and voice operation program
CN115472156A (en) Voice control method, device, storage medium and electronic equipment
JP2003114698A (en) Command acceptance device and program
JP2018116130A (en) In-vehicle voice processing unit and in-vehicle voice processing method
US10841412B2 (en) Method and apparatus for enabling context-based voice responses to always-on-display notifications
KR20230070523A (en) Automatic generation and/or use of text-dependent speaker verification features
CN110867182B (en) Control method of multi-voice assistant
CN110400568B (en) Awakening method of intelligent voice system, intelligent voice system and vehicle
KR20180074152A (en) Security enhanced speech recognition method and apparatus
US7620388B2 (en) Portable telephone set, conversation simulation method, and conversation simulation program
KR101450188B1 (en) Apparatus and method for voice control in portable communication system
US20220020374A1 (en) Method, device, and program for customizing and activating a personal virtual assistant system for motor vehicles
CN111557030B (en) Method, device and computer-readable storage medium with instructions for processing speech input, motor vehicle with speech processing and user terminal device
CN107423605A (en) A kind of input of finger venous information and processing method for mobile terminal
CN112486308A (en) Power consumption control method of wearable device, wearable device and storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120907

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121204

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130131

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130326

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130408

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160502

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees