JP2021061636A - Portable terminal and method - Google Patents

Portable terminal and method Download PDF

Info

Publication number
JP2021061636A
JP2021061636A JP2021001684A JP2021001684A JP2021061636A JP 2021061636 A JP2021061636 A JP 2021061636A JP 2021001684 A JP2021001684 A JP 2021001684A JP 2021001684 A JP2021001684 A JP 2021001684A JP 2021061636 A JP2021061636 A JP 2021061636A
Authority
JP
Japan
Prior art keywords
control unit
mobile terminal
user
charging stand
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021001684A
Other languages
Japanese (ja)
Inventor
岡本　浩
Hiroshi Okamoto
浩 岡本
譲二 吉川
Joji Yoshikawa
譲二 吉川
雄紀 山田
Yuki Yamada
雄紀 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Corp
Original Assignee
Kyocera Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Corp filed Critical Kyocera Corp
Priority to JP2021001684A priority Critical patent/JP2021061636A/en
Publication of JP2021061636A publication Critical patent/JP2021061636A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Telephone Function (AREA)

Abstract

To provide a charging stand with an improved function, a portable terminal, a communication system, a method, and a program.SOLUTION: In a communication system 10, a charging stand 12 has a human sensor 29, a placement sensor 30, a microphone 26, a speaker 27, and a camera 28, in addition to a control unit 32. Upon detecting placement of a portable terminal 11, the control unit 32 maintains a communication mode at least until it detects separation of the portable terminal, and outputs a message to a user registered in the portable terminal 11 from the speaker 27.SELECTED DRAWING: Figure 3

Description

本発明は、充電台、携帯端末、コミュニケーションシステム、方法、およびプログラムに関するものである。 The present invention relates to charging stands, mobile terminals, communication systems, methods, and programs.

スマートホン、タブレット、ノートパソコンなどの携帯端末が普及している。携帯端末は内蔵するバッテリに充電された電力を用いて駆動する。携帯端末のバッテリは、載置した携帯端末に給電を行う充電台により充電される。 Mobile terminals such as smart phones, tablets, and laptop computers are widespread. The mobile terminal is driven by the electric power charged in the built-in battery. The battery of the mobile terminal is charged by a charging stand that supplies power to the mounted mobile terminal.

充電台に関しては、充電に関する機能の改善（特許文献１参照）、小型化（特許文献２参照）、および構成の簡潔化（特許文献３参照）などが提案されている。 Regarding the charging stand, improvements in functions related to charging (see Patent Document 1), miniaturization (see Patent Document 2), and simplification of the configuration (see Patent Document 3) have been proposed.

特開２０１４−２１７１１６号公報Japanese Unexamined Patent Publication No. 2014-217116 特開２０１５−１０９７６４号公報Japanese Unexamined Patent Publication No. 2015-109764 特開２０１４−０７９０８８号公報Japanese Unexamined Patent Publication No. 2014-079088

しかし、互いに組合せられる携帯端末および充電台の機能には改善の余地があった。 However, there was room for improvement in the functions of mobile terminals and charging stands that were combined with each other.

本開示は、機能を改善した充電台、携帯端末、コミュニケーションシステム、方法、およびプログラムを提供する。 The present disclosure provides improved charging stands, mobile terminals, communication systems, methods, and programs.

本開示の第１の観点に係る充電台は、
携帯端末が載置される場合、前記携帯端末に登録されたユーザへの伝言を出力させる制御部を備える。 The charging stand according to the first aspect of the present disclosure is
When a mobile terminal is mounted, it includes a control unit that outputs a message to a user registered in the mobile terminal.

本開示の第２の観点に係る携帯端末は、
充電台に載置される場合、登録されたユーザへの伝言を出力させる制御部を備える。 The mobile terminal according to the second aspect of the present disclosure is
When mounted on the charging stand, it is provided with a control unit that outputs a message to the registered user.

本開示の第３の観点に係るコミュニケーションシステムは、
携帯端末と、
前記携帯端末を載置可能な充電台と、を備え、
前記携帯端末および前記充電台のいずれかにおいて、前記充電台に前記携帯端末が載置される場合、前記携帯端末に登録されたユーザへの伝言を出力する。 The communication system according to the third aspect of the present disclosure is
With mobile terminals
A charging stand on which the mobile terminal can be placed is provided.
When the mobile terminal is placed on the charging stand in either the mobile terminal or the charging stand, a message to a user registered in the mobile terminal is output.

上述したように本開示の解決手段を装置、及びシステムとして説明してきたが、本開示は、これらを含む態様としても実現し得るものであり、また、これらに実質的に相当する方法、プログラム、プログラムを記録した記憶媒体としても実現し得るものであり、本開示の範囲にはこれらも包含されるものと理解されたい。 As described above, the solutions of the present disclosure have been described as devices and systems, but the present disclosure can also be realized in aspects including these, and methods, programs, and substantially corresponding thereto. It can also be realized as a storage medium on which a program is recorded, and it should be understood that these are also included in the scope of the present disclosure.

本開示の第４の観点に係る方法は、
携帯端末に登録されたユーザへの伝言を取得するステップと、
前記携帯端末が充電台に設置される場合、前記携帯端末に登録されたユーザへの伝言を出力させるステップと、を備える。 The method according to the fourth aspect of the present disclosure is
Steps to get a message to the user registered on the mobile terminal,
When the mobile terminal is installed on a charging stand, it includes a step of outputting a message to a user registered in the mobile terminal.

本開示の第５の観点に係るプログラムは、
携帯端末が充電台に載置される場合、前記携帯端末に登録されたユーザへの伝言を出力するように前記充電台または前記携帯端末を機能させる。 The program according to the fifth aspect of the present disclosure is
When the mobile terminal is placed on the charging stand, the charging stand or the mobile terminal is made to function so as to output a message to the user registered in the mobile terminal.

本開示に係る充電台、携帯端末、コミュニケーションシステム、方法、およびプログラムによれば、互いに組合せられる充電台および携帯端末の機能が改善する。 According to the charging stand, mobile terminal, communication system, method, and program according to the present disclosure, the functions of the charging stand and the mobile terminal combined with each other are improved.

一実施形態に係る充電台を含むコミュニケーションシステムの外観を示す正面図である。It is a front view which shows the appearance of the communication system including the charging stand which concerns on one Embodiment. 図１のコミュニケーションシステムの側面図である。It is a side view of the communication system of FIG. 図１の携帯端末および充電台の内部構成を概略的に示す機能ブロック図である。It is a functional block diagram which shows schematic the internal structure of the mobile terminal and the charging stand of FIG. 図３における携帯端末の制御部が実行する初期設定処理を説明するためのフローチャートである。It is a flowchart for demonstrating the initial setting process executed by the control part of the mobile terminal in FIG. 図３における充電台の制御部が実行する設置場所判別処理を説明するためのフローチャートである。FIG. 3 is a flowchart for explaining an installation location determination process executed by the control unit of the charging stand in FIG. 図３における充電台の制御部が実行する発話等実行判別処理を説明するためのフローチャートである。It is a flowchart for demonstrating the execution determination processing such as an utterance executed by the control part of the charging stand in FIG. 図３における携帯端末の制御部が実行する場所判別処理を説明するためのフローチャートである。It is a flowchart for demonstrating the place determination process executed by the control part of the mobile terminal in FIG. 図３における携帯端末の制御部が実行する玄関対話のサブルーチンを説明するためのフローチャートである。It is a flowchart for demonstrating the subroutine of the entrance dialogue executed by the control part of the mobile terminal in FIG. 図３における携帯端末の制御部が実行する食卓対話のサブルーチンを説明するためのフローチャートである。It is a flowchart for demonstrating the subroutine of the dining table dialogue executed by the control part of the mobile terminal in FIG. 図３における携帯端末の制御部が実行する子供部屋対話のサブルーチンを説明するためのフローチャートである。It is a flowchart for demonstrating the subroutine of the child's room dialogue executed by the control part of the mobile terminal in FIG. 図３における携帯端末の制御部が実行する寝室対話のサブルーチンを説明するためのフローチャートである。It is a flowchart for demonstrating the subroutine of the bedroom dialogue executed by the control part of the mobile terminal in FIG. 図３における充電台の制御部が実行する伝言処理を説明するためのフローチャートである。It is a flowchart for demonstrating the message processing executed by the control part of the charging stand in FIG. 図３における充電台の制御部が実行するメッセージ処理を説明するためのフローチャートである。It is a flowchart for demonstrating the message processing executed by the control part of the charging stand in FIG.

以下、本開示の実施形態について、図面を参照して説明する。 Hereinafter, embodiments of the present disclosure will be described with reference to the drawings.

図１、２に示すように、本開示の携帯端末１１および充電台１２を含むコミュニケーションシステム１０は、携帯端末１１および充電台１２を含んでいる。充電台１２には携帯端末１１が載置され得る。携帯端末１１を充電台１２に載置している間、充電台１２は携帯端末１１の内臓のバッテリを充電する。また、携帯端末１１を充電台１２に載置する場合、コミュニケーションシステム１０はユーザと対話し得る。また、充電台１２は、伝言機能を有しており、指定したユーザに対する伝言を当該ユーザに報知する。 As shown in FIGS. 1 and 2, the communication system 10 including the mobile terminal 11 and the charging stand 12 of the present disclosure includes the mobile terminal 11 and the charging stand 12. A mobile terminal 11 may be placed on the charging stand 12. While the mobile terminal 11 is placed on the charging stand 12, the charging stand 12 charges the built-in battery of the mobile terminal 11. Further, when the mobile terminal 11 is placed on the charging stand 12, the communication system 10 can interact with the user. Further, the charging stand 12 has a message function, and notifies the user of a message to the designated user.

図３に示すように、携帯端末１１は、通信部１３、受電部１４、バッテリ１５、マイク１６、スピーカ１７、カメラ１８、ディスプレイ１９、入力部２０、記憶部２１、および制御部２２などを含んでいる。 As shown in FIG. 3, the mobile terminal 11 includes a communication unit 13, a power receiving unit 14, a battery 15, a microphone 16, a speaker 17, a camera 18, a display 19, an input unit 20, a storage unit 21, a control unit 22, and the like. I'm out.

通信部１３は、音声、文字、および画像などを通信可能な通信インタフェースを含む。本開示における「通信インタフェース」は、例えば物理コネクタ、および無線通信機を含んでよい。物理コネクタは、電気信号による伝送に対応した電気コネクタ、光信号による伝送に対応した光コネクタ、および電磁波による伝送に対応した電磁コネクタを含んでよい。電気コネクタは、ＩＥＣ６０６０３に準拠するコネクタ、ＵＳＢ規格に準拠するコネクタ、ＲＣＡ端子に対応するコネクタ、ＥＩＡＪ ＣＰ−１２１１Ａに規定されるＳ端子に対応するコネクタ、ＥＩＡＪ ＲＣ−５２３７に規定されるＤ端子に対応するコネクタ、ＨＤＭＩ（登録商標）規格に準拠するコネクタ、およびＢＮＣ（Ｂｒｉｔｉｓｈ Ｎａｖａｌ Ｃｏｎｎｅｃｔｏｒ、またはＢａｂｙ‐ｓｅｒｉｅｓ Ｎ Ｃｏｎｎｅｃｔｏｒなど）を含む同軸ケーブルに対応するコネクタを含んでよい。光コネクタは、ＩＥＣ ６１７５４に準拠する種々のコネクタを含んでよい。無線通信機は、Ｂｌｕｅｔｏｏｔｈ（登録商標）、およびＩＥＥＥ８０２．１１を含む各規格に準拠する無線通信機を含んでよい。無線通信機は、少なくとも１つのアンテナを含む。 The communication unit 13 includes a communication interface capable of communicating voice, characters, images, and the like. The "communication interface" in the present disclosure may include, for example, a physical connector and a wireless communication device. The physical connector may include an electric connector corresponding to transmission by an electric signal, an optical connector corresponding to transmission by an optical signal, and an electromagnetic connector corresponding to transmission by an electromagnetic wave. The electric connector includes a connector compliant with IEC60603, a connector compliant with the USB standard, a connector corresponding to the RCA terminal, a connector corresponding to the S terminal specified by EIAJ CP-1211A, and a D terminal specified by EIAJ RC-5237. It may include a corresponding connector, a connector conforming to the HDMI® standard, and a connector corresponding to a coaxial cable including a BNC (British Naval Connector, or Baby-series N Connector, etc.). Optical connectors may include various connectors according to IEC 61754. The wireless communication device may include a wireless communication device conforming to each standard including Bluetooth (registered trademark) and 802.11. The wireless communication device includes at least one antenna.

通信部１３は、自身の携帯端末１１の外部機器、例えば充電台１２と通信する。通信部１３は、有線通信または無線通信により、外部機器と通信する。なお、通信部１３は、充電台１２と有線通信をする構成においては、携帯端末１１を充電台１２の正規の位置及び姿勢で載置することにより、充電台１２の通信部２３に接続され、通信し得る。また、通信部１３は、無線通信により、直接的に、または、例えば、基地局、およびインターネット回線または電話回線を介して間接的に、外部機器と通信してよい。 The communication unit 13 communicates with an external device of its own mobile terminal 11, for example, a charging stand 12. The communication unit 13 communicates with an external device by wired communication or wireless communication. The communication unit 13 is connected to the communication unit 23 of the charging stand 12 by mounting the mobile terminal 11 in the regular position and posture of the charging stand 12 in the configuration of performing wired communication with the charging stand 12. Can communicate. In addition, the communication unit 13 may communicate with an external device directly or indirectly via, for example, a base station and an Internet line or a telephone line by wireless communication.

受電部１４は、充電台１２から供給する電力を受電する。受電部１４は、例えば、コネクタを有し、有線を介して充電台１２から電力を受電する。または、受電部１４は、例えば、コイルなどを有し、電磁誘導方式および磁界共振方式などの無線給電方法により充電台１２から電力を受電する。受電部１４は、受電した電力をバッテリ１５に蓄電する。 The power receiving unit 14 receives the electric power supplied from the charging stand 12. The power receiving unit 14 has, for example, a connector and receives power from the charging stand 12 via a wire. Alternatively, the power receiving unit 14 has, for example, a coil or the like, and receives power from the charging stand 12 by a wireless power feeding method such as an electromagnetic induction method or a magnetic field resonance method. The power receiving unit 14 stores the received power in the battery 15.

バッテリ１５は、受電部１４から供給される電力を蓄電する。バッテリ１５は、蓄電した電力を放電することにより、携帯端末１１の各構成要素に、当該構成要素を機能させるために必要な電力を供給する。 The battery 15 stores the electric power supplied from the power receiving unit 14. By discharging the stored electric power, the battery 15 supplies each component of the mobile terminal 11 with the electric power necessary for the component to function.

マイク１６は、携帯端末１１の周囲で発生する音声を検出して、電気信号に変換する。マイク１６は、検出した音声を制御部２２に出力する。 The microphone 16 detects the voice generated around the mobile terminal 11 and converts it into an electric signal. The microphone 16 outputs the detected voice to the control unit 22.

スピーカ１７は、制御部２２の制御に基づいて、音声を発する。スピーカ１７は、例えば、後述する発話機能を実行している場合、制御部２２が発話を決定した言葉を発する。また、スピーカ１７は、例えば、他の携帯端末との通話を実行している場合、当該携帯端末から取得する音声を発する。 The speaker 17 emits sound based on the control of the control unit 22. For example, when the speaker 17 is executing the utterance function described later, the control unit 22 emits a word for which the utterance is determined. Further, for example, when the speaker 17 is executing a call with another mobile terminal, the speaker 17 emits a voice acquired from the mobile terminal.

カメラ１８は、撮像範囲内の被写体を撮像する。カメラ１８は、静止画像および動画像のいずれも撮像可能である。カメラ１８は、動画像の撮像時に、例えば６０ｆｐｓで、被写体を連続的に撮像する。カメラ１８は、撮像した画像を制御部２２に出力する。 The camera 18 captures a subject within the imaging range. The camera 18 can capture both still images and moving images. The camera 18 continuously captures a subject at, for example, 60 fps when capturing a moving image. The camera 18 outputs the captured image to the control unit 22.

ディスプレイ１９は、例えば液晶ディスプレイ（ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ））、または、有機若しくは無機ＥＬディスプレイである。ディスプレイ１９は、制御部２２の制御に基づいて、画像を表示する。 The display 19 is, for example, a liquid crystal display (LCD (Liquid Crystal Display)) or an organic or inorganic EL display. The display 19 displays an image under the control of the control unit 22.

入力部２０は、例えば、ディスプレイ１９と一体化したタッチパネルである。入力部２０は、ユーザによる携帯端末１１に関する多様な要求または情報の入力を検出する。入力部２０は、検出した入力を制御部２２に出力する。 The input unit 20 is, for example, a touch panel integrated with the display 19. The input unit 20 detects input of various requests or information regarding the mobile terminal 11 by the user. The input unit 20 outputs the detected input to the control unit 22.

記憶部２１は、例えば、半導体メモリ、磁気メモリ、および光メモリなどを用いて構成されてよい。記憶部２１は、例えば、後述する、登録処理、発話処理、音声認識処理、見守り処理、データ通信処理、および通話処理などを実行するための多様な情報、ならびに上記の処理において制御部２２が取得する、ユーザの画像、ユーザ情報、充電台１２の設置場所、外部情報、会話内容、行動履歴、地域情報、見守り処理の特定の対象などを記憶する。 The storage unit 21 may be configured by using, for example, a semiconductor memory, a magnetic memory, an optical memory, or the like. The storage unit 21 acquires, for example, various information for executing registration processing, utterance processing, voice recognition processing, watching processing, data communication processing, call processing, etc., which will be described later, and the control unit 22 in the above processing. The user's image, user information, installation location of the charging stand 12, external information, conversation content, action history, area information, a specific target of the watching process, and the like are stored.

制御部２２は、１又は複数のプロセッサを含む。制御部２２は、種々の処理のためのプログラム及び演算中の情報を記憶する１又は複数のメモリを含んでよい。メモリは、揮発性メモリ及び不揮発性メモリが含まれる。メモリは、プロセッサから独立しているメモリ、及びプロセッサの内蔵メモリが含まれる。プロセッサには、特定のプログラムを読み込ませて特定の機能を実行する汎用のプロセッサ、特定の処理に特化した専用のプロセッサが含まれる。専用のプロセッサには、特定用途向けＩＣ（ＡＳＩＣ； Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）が含まれる。プロセッサには、プログラマブルロジックデバイス（ＰＬＤ； Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）が含まれる。ＰＬＤには、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）が含まれる。制御部２２は、一つ又は複数のプロセッサが協働するＳｏＣ（Ｓｙｓｔｅｍ ｏｎ ａ Ｃｈｉｐ）、及びＳｉＰ（Ｓｙｓｔｅｍ Ｉｎ ａ Ｐａｃｋａｇｅ）のいずれかであってよい。 The control unit 22 includes one or more processors. The control unit 22 may include one or more memories for storing programs for various processes and information during calculation. The memory includes a volatile memory and a non-volatile memory. The memory includes a memory independent of the processor and a built-in memory of the processor. Processors include general-purpose processors that load specific programs and perform specific functions, and dedicated processors that specialize in specific processing. Dedicated processors include application specific integrated circuits (ASICs). Processors include programmable logic devices (PLDs). The PLD includes an FPGA (Field-Programmable Gate Array). The control unit 22 may be either a SoC (System on a Chip) in which one or a plurality of processors cooperate, or a SiP (System In a Package).

制御部２２は、例えば、後述するように充電台１２からコミュニケーションモードへの移行指令を取得すると、コミュニケーションモードにおける多様な機能を実行するために、携帯端末１１の各構成要素を制御する。なお、コミュニケーションモードとは、携帯端末１１を充電台１２とともにコミュニケーションシステム１０として、特定のユーザとの対話、特定ユーザの観察、および当該ユーザへのメッセージ発信などを実行させるモードである。 For example, when the control unit 22 acquires a transition command from the charging stand 12 to the communication mode as described later, the control unit 22 controls each component of the mobile terminal 11 in order to execute various functions in the communication mode. The communication mode is a mode in which the mobile terminal 11 is used as a communication system 10 together with the charging stand 12 to perform dialogue with a specific user, observation of the specific user, transmission of a message to the user, and the like.

制御部２２は、コミュニケーションモードを実行するユーザの登録のための登録処理を実行する。制御部２２は、例えば、入力部２０へのユーザ登録を要求する入力の検出などにより、登録処理を開始する。 The control unit 22 executes a registration process for registering a user who executes the communication mode. The control unit 22 starts the registration process, for example, by detecting an input requesting user registration to the input unit 20.

例えば、制御部２２は、登録処理において、ユーザにカメラ１８のレンズを見るようにメッセージを発し、カメラ１８を駆動することによりユーザの顔を撮像する。さらに、制御部２２は、撮像した画像を、ユーザの名称および属性などのユーザ情報と関連付けて記憶する。属性とは、例えば、携帯端末１１の所有者および当該所有者に対する続柄、性別、年齢層、身長、体重などである。制御部２２は、ユーザ情報を、入力部２０へのユーザによる入力により取得する。 For example, in the registration process, the control unit 22 issues a message to the user to look at the lens of the camera 18, and drives the camera 18 to image the user's face. Further, the control unit 22 stores the captured image in association with user information such as a user's name and attributes. The attributes include, for example, the owner of the mobile terminal 11 and the relationship, gender, age group, height, weight, and the like with respect to the owner. The control unit 22 acquires the user information by inputting the user information to the input unit 20 by the user.

制御部２２は、登録処理において、さらに、登録された画像を関連付けたユーザ情報とともに充電台１２に転送する。充電台１２に付与するために、制御部２２は、携帯端末１１と通信可能であるかを判別する。 In the registration process, the control unit 22 further transfers the registered image to the charging stand 12 together with the associated user information. The control unit 22 determines whether or not it is possible to communicate with the mobile terminal 11 in order to apply it to the charging stand 12.

制御部２２は、充電台１２と通信できない場合に、通信可能とさせるメッセージをディスプレイ１９に表示させる。例えば、携帯端末１１が充電台１２と有線通信を行う構成において携帯端末１１と充電台１２とが接続されていない場合、制御部２２は接続を要求するメッセージをディスプレイ１９に表示させる。また、携帯端末１１が充電台１２と無線通信を行う構成において携帯端末１１と充電台１２とが通信できない程度に離れている場合、制御部２２は充電台１２に近付くことを要求するメッセージをディスプレイ１９に表示させる。 When the control unit 22 cannot communicate with the charging stand 12, the control unit 22 displays a message on the display 19 that enables communication. For example, in a configuration in which the mobile terminal 11 performs wired communication with the charging stand 12, when the mobile terminal 11 and the charging stand 12 are not connected, the control unit 22 displays a message requesting connection on the display 19. Further, in a configuration in which the mobile terminal 11 wirelessly communicates with the charging stand 12, when the mobile terminal 11 and the charging stand 12 are separated to such an extent that they cannot communicate with each other, the control unit 22 displays a message requesting that the mobile terminal 11 approaches the charging stand 12. Display on 19.

制御部２２は、携帯端末１１および充電台１２が通信可能である場合、登録された画像およびユーザ情報を充電台１２に向けて転送させ、転送中であることをディスプレイ１９に表示させる。さらに、制御部２２は、転送の完了の通知を充電台１２から取得する場合、初期設定完了のメッセージをディスプレイ１９に表示させる。 When the mobile terminal 11 and the charging stand 12 are communicable, the control unit 22 transfers the registered image and the user information toward the charging stand 12, and displays on the display 19 that the transfer is in progress. Further, when the control unit 22 obtains the notification of the completion of the transfer from the charging stand 12, the control unit 22 displays a message of the completion of the initial setting on the display 19.

制御部２２は、コミュニケーションモードに移行している間、発話処理および音声認識処理の少なくとも一方を実行することにより、コミュニケーションシステム１０を特定のユーザと対話させる。 The control unit 22 causes the communication system 10 to interact with a specific user by executing at least one of the utterance processing and the voice recognition processing while shifting to the communication mode.

制御部２２は、発話処理において、現在時刻、充電台１２の設置された場所、充電台１２への載置または離脱、対話対象のユーザの属性、対話対象のユーザ、通信部１３が取得した外部情報、対話対象のユーザの動作、携帯端末１１が受信したメールおよび電話、携帯端末１１に登録されたメモおよびスケジュール、当該ユーザの発した音声、ならびに当該ユーザの過去の会話内容に応じて、発話する内容を決定する。なお、充電台１２の設置された場所、充電台１２への載置または離脱、対話対象のユーザの属性、および外部情報については、後述する。制御部２２は、決定した内容の音声を発するように、スピーカ１７を駆動する。 In the speech processing, the control unit 22 sets the current time, the location where the charging stand 12 is installed, the placement or withdrawal from the charging stand 12, the attributes of the user to be talked about, the user to be talked to, and the external acquired by the communication unit 13. Utterance according to information, actions of the user to be interacted with, mail and telephone received by the mobile terminal 11, memos and schedules registered in the mobile terminal 11, voice uttered by the user, and past conversation contents of the user. Decide what to do. The location where the charging stand 12 is installed, the placement or withdrawal from the charging stand 12, the attributes of the user to be interacted with, and the external information will be described later. The control unit 22 drives the speaker 17 so as to emit the sound of the determined content.

制御部２２は、発話内容の決定のために、充電台１２の設置された場所を判別する。制御部２２は、通信部１３を介して充電台１２から取得する場所の通知に基づいて、充電台１２の設置された場所を判別する。または、制御部２２は、充電台１２に載置された場合、マイク１６およびカメラ１８の少なくとも一方がそれぞれ検出する音声および画像の少なくとも一方に基づいて、充電台１２の設置された場所を判別してよい。 The control unit 22 determines the location where the charging stand 12 is installed in order to determine the content of the utterance. The control unit 22 determines the location where the charging stand 12 is installed based on the notification of the location acquired from the charging stand 12 via the communication unit 13. Alternatively, the control unit 22 determines the location where the charging stand 12 is installed based on at least one of the sound and the image detected by at least one of the microphone 16 and the camera 18 when mounted on the charging stand 12. It's okay.

制御部２２は、充電台１２の設置場所が、例えば、玄関である場合、外出または帰宅に際して適した言葉を、発話する内容に決定する。また、制御部２２は、充電台１２の設置場所が、例えば、食卓である場合、食事および調理などの食卓で行われる行為に適した言葉を、発話する内容に決定する。また、制御部２２は、充電台１２の設置場所が、例えば子供部屋である場合、子供の話題および子供への注意の呼びかけなどに適した言葉を、発話する内容に決定する。また、制御部２２は、充電台１２の設置場所が、寝室である場合、就寝時または起床時に適した言葉を、発話する内容に決定する。 When the installation location of the charging stand 12 is, for example, a front door, the control unit 22 determines the content to be spoken in words suitable for going out or returning home. Further, when the installation location of the charging stand 12 is, for example, a dining table, the control unit 22 determines the content to be spoken of words suitable for actions performed at the dining table such as meals and cooking. Further, when the installation location of the charging stand 12 is, for example, a children's room, the control unit 22 determines the content to be spoken of words suitable for a topic of the child and a call for attention to the child. Further, when the place where the charging stand 12 is installed is a bedroom, the control unit 22 determines the content to be spoken in words suitable for bedtime or waking up.

制御部２２は、発話内容の決定のために、充電台１２に載置した場合および充電台１２から離脱させた場合のいずれであるかを判別する。制御部２２は、充電台１２から取得する載置の通知に基づいて、載置した場合か離脱した場合かを判別する。例えば、制御部２２は、載置されていることを示す通知を充電台１２から取得している間は充電台１２に載置されている場合であると判別し、当該通知を取得出来なくなる時に離脱されたと判別する。または、制御部２２は、受電部１４が充電台１２から電力を取得可能か否か、または通信部１３が充電台１２と通信可能であるか否かに基づいて携帯端末１１の充電台１２に対する載置関係を判別してよい。 The control unit 22 determines whether the utterance is placed on the charging stand 12 or detached from the charging stand 12 in order to determine the content of the utterance. The control unit 22 determines whether it is mounted or detached based on the mounting notification obtained from the charging stand 12. For example, when the control unit 22 determines that the vehicle is mounted on the charging stand 12 while the notification indicating that the vehicle is mounted is being obtained from the charging stand 12, and cannot obtain the notification. Determined to have been withdrawn. Alternatively, the control unit 22 refers to the charging base 12 of the mobile terminal 11 based on whether the power receiving unit 14 can acquire power from the charging base 12 or whether the communication unit 13 can communicate with the charging base 12. The mounting relationship may be determined.

制御部２２は、携帯端末１１が充電台１２に載置された場合、充電台１２の設置場所に入るユーザに適した言葉を、発話する内容に決定する。また、制御部２２は、携帯端末１１が充電台１２から離脱させた場合、充電台１２の設置場所から出て行くユーザに適した言葉を、発話する内容に決定する。 When the mobile terminal 11 is placed on the charging stand 12, the control unit 22 determines the content to be spoken of words suitable for the user who enters the installation location of the charging stand 12. Further, when the mobile terminal 11 is detached from the charging stand 12, the control unit 22 determines the content to be spoken, which is a word suitable for the user who goes out from the place where the charging stand 12 is installed.

制御部２２は、発話内容の決定のために、対話対象のユーザの動作を判別する。制御部２２は、例えば、充電台１２の玄関への設置を判別する場合、充電台１２から取得する画像またはカメラ１８から取得する画像に基づいて、対話対象のユーザが外出する動作か、帰宅する動作であるかを判別する。または、制御部２２は、カメラ１８が検出する画像などに基づいて、対話対象のユーザが外出する動作であるか、帰宅する動作であるかを判別してよい。制御部２２は、前述の携帯端末１１の充電台１２への載置状態に、外出および帰宅のいずれであるかを組合わせて、適切な言葉を、発話する内容に決定する。 The control unit 22 determines the action of the user to be interacted with in order to determine the content of the utterance. For example, when the control unit 22 determines that the charging stand 12 is installed at the entrance, the control unit 22 either goes out or returns home based on the image acquired from the charging stand 12 or the image acquired from the camera 18. Determine if it is an operation. Alternatively, the control unit 22 may determine whether the user to interact with the user is going out or returning home based on the image detected by the camera 18. The control unit 22 combines the state of mounting the mobile terminal 11 on the charging stand 12 with whether it is going out or returning home, and determines an appropriate word to be spoken.

制御部２２は、発話内容の決定のために、前述のように対話対象のユーザの属性を判別する。制御部２２は、充電台１２からの対話対象であるユーザ通知および記憶部２１に記憶したユーザ情報に基づいて、対話対象のユーザの属性を判別する。また、制御部２２は、マイク１６およびカメラ１８の少なくとも一方がそれぞれ検出する音声および画像の少なくとも一方に基づいて、対話対象のユーザまたはユーザの属性を判別してよい。制御部２２は、対話対象のユーザの例えば、性別および世代などの属性に適した言葉を、発話する内容に決定する。 The control unit 22 determines the attributes of the user to be interacted with as described above in order to determine the content of the utterance. The control unit 22 determines the attributes of the user to be interacted with based on the user notification from the charging stand 12 and the user information stored in the storage unit 21. Further, the control unit 22 may determine the user or the attribute of the user to be interacted with based on at least one of the voice and the image detected by at least one of the microphone 16 and the camera 18, respectively. The control unit 22 determines the content to be spoken of words suitable for attributes such as gender and generation of the user to be interacted with.

制御部２２は、発話内容の決定のために、通信部１３を駆動して、天気予報および交通状況などの外部情報を取得する。制御部２２は、取得した外部情報に応じて、例えば天候またはユーザの使用する交通機関の混雑状況に関する注意喚起する言葉を、発話する内容に決定する。 The control unit 22 drives the communication unit 13 to acquire external information such as a weather forecast and a traffic condition in order to determine the content of the utterance. The control unit 22 determines the content to be spoken, for example, a word that calls attention to the weather or the congestion status of the transportation system used by the user, according to the acquired external information.

また、制御部２２は、音声認識処理において、充電台１２の設置された場所に応じて、マイク１６が検出する音声の形態素解析を行い、ユーザの発話内容を認識する。制御部２２は、認識した発話内容に基づいて、所定の処理を実行する。所定の処理は、例えば、前述のように認識した発話内容に対する発話処理、ならびに所望の情報の探索、所望の画像の表示、および所望の相手への電話およびメールの発信を実行するための処理である。 Further, in the voice recognition process, the control unit 22 performs morphological analysis of the voice detected by the microphone 16 according to the location where the charging stand 12 is installed, and recognizes the content of the user's utterance. The control unit 22 executes a predetermined process based on the recognized utterance content. The predetermined process is, for example, a process for executing an utterance process for the utterance content recognized as described above, a search for desired information, a display of a desired image, and a telephone call and an e-mail transmission to a desired party. is there.

また、制御部２２は、コミュニケーションモードに移行している間、連続的に実行した、上述の発話処理および音声認識処理を記憶部２１に記憶させ、特定された対話対象のユーザに対する会話内容を学習する。制御部２２は、学習した会話内容に基づいて、以後の発話処理において発話する言葉の決定に活用する。また、制御部２２は、学習した会話内容を、充電台１２に転送してよい。 Further, the control unit 22 stores the above-mentioned utterance processing and voice recognition processing continuously executed in the storage unit 21 while shifting to the communication mode, and learns the conversation content for the specified conversation target user. To do. The control unit 22 is used to determine the words to be spoken in the subsequent utterance processing based on the learned conversation content. Further, the control unit 22 may transfer the learned conversation content to the charging stand 12.

また、制御部２２は、コミュニケーションモードに移行している間、特定された対話対象のユーザに対する会話内容および当該ユーザとの対話時にカメラ１８に撮像させる画像などから、当該ユーザの行動履歴などを学習する。制御部２２は、学習した行動履歴に基づいて、当該ユーザに対するアドバイスなどを報知する。アドバイスの報知は、スピーカ１７による音声の発話でも、ディスプレイ１９への画像の表示であってもよい。なお、アドバイスは、例えば、薬を飲むべき時の通知、当該ユーザの好みの食事の提案、当該ユーザの健康のための食事内容の提案、および当該ユーザが継続可能かつ効果的な運動の提案などである。また、制御部２２は、学習した行動履歴を当該ユーザと関連付けて、充電台１２に通知する。 Further, the control unit 22 learns the behavior history of the user from the conversation content with the specified user to be interacted with and the image captured by the camera 18 at the time of the dialogue with the user while shifting to the communication mode. To do. The control unit 22 notifies the user of advice or the like based on the learned behavior history. The notification of the advice may be a voice utterance by the speaker 17 or an image display on the display 19. The advice includes, for example, notification when the drug should be taken, suggestion of the user's favorite diet, suggestion of dietary content for the user's health, and suggestion of sustainable and effective exercise for the user. Is. Further, the control unit 22 associates the learned action history with the user and notifies the charging stand 12.

また、制御部２２は、コミュニケーションモードに移行している間、携帯端末１１の現在位置を検出する。現在位置の検出は、例えば、通信中の基地局の設置位置または携帯端末１１が備え得るＧＰＳに基づく。制御部２２は、検出した現在位置に関連付けられた地域情報をユーザに報知する。地域情報の報知は、スピーカ１７による音声の発話でも、ディスプレイ１９への画像の表示であってもよい。なお、地域情報は、例えば、近隣店舗の特売情報などである。 Further, the control unit 22 detects the current position of the mobile terminal 11 while shifting to the communication mode. The detection of the current position is based on, for example, the installation position of the base station during communication or the GPS that the mobile terminal 11 can provide. The control unit 22 notifies the user of the area information associated with the detected current position. The notification of the area information may be a voice utterance by the speaker 17 or an image display on the display 19. The regional information is, for example, special sale information of neighboring stores.

また、制御部２２は、コミュニケーションモードに移行している間に特定の対象に対する見守り処理の開始要求を入力部２０が検出する場合、当該開始要求を充電台１２に通知する。特定の対象とは、例えば、登録された特定のユーザ、および充電台１２が設置された部屋などである。 Further, when the input unit 20 detects a request to start the watching process for a specific target while shifting to the communication mode, the control unit 22 notifies the charging stand 12 of the start request. The specific target is, for example, a registered specific user, a room in which the charging stand 12 is installed, and the like.

見守り処理は携帯端末１１の載置の有無に関わらず、充電台１２により実行される。制御部２２は、見守り処理を実行させている充電台１２から特定の対象が異常状態である通知を取得する場合、その旨をユーザに報知する。ユーザへの報知は、スピーカ１７による音声の発信でも、ディスプレイ１９への警告画像の表示であってもよい。 The watching process is executed by the charging stand 12 regardless of whether or not the mobile terminal 11 is placed. When the control unit 22 acquires a notification that a specific target is in an abnormal state from the charging stand 12 that is executing the watching process, the control unit 22 notifies the user to that effect. The notification to the user may be the transmission of voice by the speaker 17 or the display of a warning image on the display 19.

また、制御部２２は、コミュニケーションモードへの移行の有無に関わらず、入力部２０への入力に基づいて、メールの送受信およびブラウザを用いた画像表示などのデータ通信処理、ならびに他の電話との通話処理を実行する。 Further, the control unit 22 performs data communication processing such as sending / receiving mail and displaying an image using a browser based on the input to the input unit 20, regardless of whether or not the mode is shifted to the communication mode, and with another telephone. Execute call processing.

充電台１２は、通信部２３、給電部２４、変動機構２５、マイク２６、スピーカ２７、カメラ２８、人感センサ２９、載置センサ３０、記憶部３１、および制御部３２などを含んでいる。 The charging stand 12 includes a communication unit 23, a power feeding unit 24, a variable mechanism 25, a microphone 26, a speaker 27, a camera 28, a motion sensor 29, a mounting sensor 30, a storage unit 31, a control unit 32, and the like.

通信部２３は、携帯端末１１の通信部１３と同様に、音声、文字、および画像などを通信可能な通信インタフェースを含む。通信部２３は、有線通信または無線通信により、携帯端末１１と通信する。通信部２３は、有線通信または無線通信により、外部機器と通信してもよい。 The communication unit 23 includes a communication interface capable of communicating voice, characters, images, and the like, similarly to the communication unit 13 of the mobile terminal 11. The communication unit 23 communicates with the mobile terminal 11 by wired communication or wireless communication. The communication unit 23 may communicate with an external device by wired communication or wireless communication.

給電部２４は、充電台１２に載置された携帯端末１１の受電部１４に電力を供給する。給電部２４は、上述のように、有線または無線により受電部１４に電力を供給する。 The power feeding unit 24 supplies electric power to the power receiving unit 14 of the mobile terminal 11 mounted on the charging stand 12. As described above, the power feeding unit 24 supplies electric power to the power receiving unit 14 by wire or wirelessly.

変動機構２５は、充電台１２に載置される携帯端末１１の向きを変動させる。変動機構２５は、充電台１２に対して定められる下底面ｂｓ（図１、２参照）に対して定められる上下方向および左右方向の少なくとも一方に沿って、携帯端末１１の向きを変動可能である。変動機構２５はモータを内蔵しており、モータの駆動により携帯端末１１の向きを変動させる。 The fluctuation mechanism 25 changes the orientation of the mobile terminal 11 mounted on the charging stand 12. The variable mechanism 25 can change the orientation of the mobile terminal 11 along at least one of the vertical direction and the horizontal direction defined with respect to the lower bottom surface bs (see FIGS. 1 and 2) defined for the charging stand 12. .. The fluctuation mechanism 25 has a built-in motor, and the orientation of the mobile terminal 11 is changed by driving the motor.

マイク２６は、充電台１２の周囲で発生する音声を検出して、電気信号に変換する。マイク２６は、検出した音声を制御部３２に出力する。 The microphone 26 detects the voice generated around the charging stand 12 and converts it into an electric signal. The microphone 26 outputs the detected voice to the control unit 32.

スピーカ２７は、制御部３２の制御に基づいて、音声を発する。 The speaker 27 emits sound based on the control of the control unit 32.

カメラ２８は、撮像範囲内の被写体を撮像する。カメラ２８は、静止画像および動画像のいずれも撮像可能である。カメラ２８は、動画像の撮像時に、例えば６０ｆｐｓで、被写体を連続的に撮像する。カメラ２８は、撮像した画像を制御部３２に出力する。 The camera 28 captures a subject within the imaging range. The camera 28 can capture both still images and moving images. The camera 28 continuously captures a subject at, for example, 60 fps when capturing a moving image. The camera 28 outputs the captured image to the control unit 32.

人感センサ２９は、例えば、赤外線センサであり、熱の変化を検出することにより、充電台１２の周囲における人の存在を検出する。人感センサ２９は、人の存在を検出する場合、その旨を制御部３２に通知する。なお、人感センサ２９は、赤外線センサ以外のセンサであってよく、例えば、超音波センサであってもよい。または、人感センサ２９は、連続的に撮像される画像の変化に基づいて人の存在を検出するようにカメラ２８を機能させる構成であってよい。 The motion sensor 29 is, for example, an infrared sensor, which detects the presence of a person around the charging stand 12 by detecting a change in heat. When the motion sensor 29 detects the presence of a person, the motion sensor 29 notifies the control unit 32 to that effect. The motion sensor 29 may be a sensor other than the infrared sensor, and may be, for example, an ultrasonic sensor. Alternatively, the motion sensor 29 may be configured to function the camera 28 so as to detect the presence of a person based on changes in images that are continuously captured.

載置センサ３０は、充電台１２において、例えば、携帯端末１１の載置面に設けられており、携帯端末１１の載置の有無を検出する。載置センサ３０は、例えば圧電素子などにより構成されている。載置センサ３０は、携帯端末１１が載置されるとき、その旨を制御部３２に通知する。 The mounting sensor 30 is provided on the mounting surface of the mobile terminal 11, for example, on the charging stand 12, and detects whether or not the mobile terminal 11 is mounted. The mounting sensor 30 is composed of, for example, a piezoelectric element or the like. When the mobile terminal 11 is mounted, the mounting sensor 30 notifies the control unit 32 to that effect.

記憶部３１は、例えば、半導体メモリ、磁気メモリ、および光メモリなどを用いて構成されてよい。記憶部３１は、例えば、充電台１２の設置場所を判別するめに、予め想定される各設置場所に特有な音声および画像の少なくとも一方を記憶する。また、記憶部３１は、例えば、制御部３２が判別した設置場所を記憶する。また、記憶部３１は、例えば、携帯端末１１から取得するユーザの登録に係る画像およびユーザ情報を、携帯端末１１毎および登録したユーザ毎に記憶する。また、記憶部３１は、例えば、携帯端末１１から取得する会話内容をユーザ毎に記憶する。また、記憶部３１は、例えば、後述するように、カメラ２８による撮像結果に基づく変動機構２５の駆動のための情報を記憶する。また、記憶部３１は、例えば、携帯端末１１から取得する行動履歴をユーザ毎に記憶する。 The storage unit 31 may be configured by using, for example, a semiconductor memory, a magnetic memory, an optical memory, or the like. The storage unit 31 stores, for example, at least one of a sound and an image peculiar to each installation location assumed in advance in order to determine the installation location of the charging stand 12. Further, the storage unit 31 stores, for example, the installation location determined by the control unit 32. Further, the storage unit 31 stores, for example, an image and user information related to user registration acquired from the mobile terminal 11 for each mobile terminal 11 and each registered user. Further, the storage unit 31 stores, for example, the conversation content acquired from the mobile terminal 11 for each user. Further, the storage unit 31 stores, for example, information for driving the fluctuation mechanism 25 based on the image pickup result by the camera 28, as will be described later. Further, the storage unit 31 stores, for example, the action history acquired from the mobile terminal 11 for each user.

制御部３２は、携帯端末１１の制御部２２と同様に、１又は複数のプロセッサを含む。制御部３２は、携帯端末１１の制御部２２と同様に、種々の処理のためのプログラム及び演算中の情報を記憶する１又は複数のメモリを含んでよい。 The control unit 32 includes one or a plurality of processors, similarly to the control unit 22 of the mobile terminal 11. The control unit 32 may include one or a plurality of memories for storing programs for various processes and information during calculation, similarly to the control unit 22 of the mobile terminal 11.

制御部３２は、充電台１２に、例えば商用系統などから電力を受電する場合、マイク２６およびカメラ２８の少なくとも一方がそれぞれ検出する音声および画像の少なくとも一方に基づいて、充電台１２の設置された場所を判別する。制御部３２は、例えば、設置が想定される複数の場所毎の特徴的な会話パターンまたは音を記憶部３１などから取得し、マイク２６が検出する複数のユーザの会話内容または音などと比較することにより、設置場所を判別する。また、制御部３２は、例えば、設置が想定される複数の場所毎の特徴的な物体の輪郭などを記憶部３１などから取得し、カメラ２８が検出する画像に含まれる輪郭などと比較することにより、設置場所を判別する。制御部３２は、設置された場所を、充電台１２に載置される携帯端末１１に通知する。 The control unit 32 is installed on the charging stand 12 based on at least one of the sound and the image detected by at least one of the microphone 26 and the camera 28, for example, when receiving power from a commercial system or the like. Determine the location. For example, the control unit 32 acquires characteristic conversation patterns or sounds for each of a plurality of places where installation is expected from a storage unit 31 or the like, and compares them with conversation contents or sounds of a plurality of users detected by the microphone 26. By doing so, the installation location is determined. Further, the control unit 32 acquires, for example, the contours of characteristic objects for each of a plurality of places where installation is expected from the storage unit 31 and the like, and compares them with the contours included in the image detected by the camera 28. To determine the installation location. The control unit 32 notifies the mobile terminal 11 mounted on the charging stand 12 of the installed location.

制御部３２は、少なくとも載置センサ３０が携帯端末１１の載置を検出してから離脱を検出するまでの間、さらには離脱を検出してから所定時間が経過するまでの間、コミュニケーションシステム１０をコミュニケーションモードに維持させる。したがって、制御部３２は、充電台１２に携帯端末１１が載置されている場合、携帯端末１１に発話処理および音声認識処理の少なくとも一方を実行させ得る。また、制御部３２は、充電台１２から携帯端末１１が離脱してからの所定時間が経過するまでの間、携帯端末１１に発話処理および音声認識処理の少なくとも一方を実行させ得る。 The control unit 32 is the communication system 10 at least from the time when the mounting sensor 30 detects the mounting of the mobile terminal 11 to the time when the detachment is detected, and further until a predetermined time elapses after the detection of the detachment. To keep in communication mode. Therefore, when the mobile terminal 11 is mounted on the charging stand 12, the control unit 32 may cause the mobile terminal 11 to execute at least one of the utterance processing and the voice recognition processing. Further, the control unit 32 may cause the mobile terminal 11 to execute at least one of the utterance processing and the voice recognition processing until a predetermined time elapses after the mobile terminal 11 is detached from the charging stand 12.

制御部３２は、充電台１２に携帯端末１１が載置されている間、カメラ２８を起動して、周囲の画像を撮像させる。制御部３２は、撮像した画像中の人の顔を検出する。制御部３２は、検出した人の顔の画像を、記憶部３１に記憶させた顔の画像と比較することにより、撮像されたユーザを特定する。制御部３２は、特定したユーザを携帯端末１１に通知する。 The control unit 32 activates the camera 28 while the mobile terminal 11 is mounted on the charging stand 12 to capture an image of the surroundings. The control unit 32 detects a human face in the captured image. The control unit 32 identifies the captured user by comparing the detected image of the human face with the image of the face stored in the storage unit 31. The control unit 32 notifies the mobile terminal 11 of the specified user.

制御部３２は、撮像されたユーザの認識後、カメラ２８による撮像を継続させ、当該ユーザの顔を画像毎に探索する。制御部３２は、画像の中で探索された顔の位置に基づいて、携帯端末１１のディスプレイ１９が当該ユーザの方向を向くように、変動機構２５を駆動する。 After recognizing the captured user, the control unit 32 continues imaging by the camera 28 and searches for the user's face for each image. The control unit 32 drives the fluctuation mechanism 25 so that the display 19 of the mobile terminal 11 faces the user based on the position of the face searched in the image.

制御部３２は、載置センサ３０が携帯端末１１の載置を検出する時、コミュニケーションシステム１０のコミュニケーションモードへの移行を開始させる。したがって、制御部３２は、充電台１２に携帯端末１１が載置される時、携帯端末１１に発話処理および音声認識処理の少なくとも一方の実行を開始させる。また、制御部３２は、載置センサ３０が携帯端末１１の載置を検出する場合、載置されていることを携帯端末１１に通知する。 When the mounting sensor 30 detects the mounting of the mobile terminal 11, the control unit 32 starts the transition of the communication system 10 to the communication mode. Therefore, when the mobile terminal 11 is placed on the charging stand 12, the control unit 32 causes the mobile terminal 11 to start executing at least one of the utterance processing and the voice recognition processing. Further, when the mounting sensor 30 detects the mounting of the mobile terminal 11, the control unit 32 notifies the mobile terminal 11 that the mobile terminal 11 is mounted.

制御部３２は、発話処理および音声認識処理の少なくとも一方の開始指示の条件に、人感センサ２９による人の検知を付加してよい。例えば、制御部３２は、携帯端末１１の載置の認識後に、人感センサ２９が人を検出する場合に、発話処理などを開始させてもよい。 The control unit 32 may add the detection of a person by the motion sensor 29 to the condition of at least one of the start instruction of the utterance processing and the voice recognition processing. For example, the control unit 32 may start the utterance process or the like when the motion sensor 29 detects a person after recognizing the placement of the mobile terminal 11.

また、制御部３２は、載置センサ３０が携帯端末１１の離脱を検出する時または検出後の所定時間の経過後に、コミュニケーションシステム１０におけるコミュニケーションモードを終了させる。したがって、制御部３２は、充電台１２から携帯端末１１が離脱する時または検出後の所定時間の経過後に、携帯端末１１に発話処理および音声認識処理の少なくとも一方の実行を終了させる。 Further, the control unit 32 terminates the communication mode in the communication system 10 when the mounting sensor 30 detects the detachment of the mobile terminal 11 or after a predetermined time has elapsed after the detection. Therefore, the control unit 32 causes the mobile terminal 11 to end at least one of the utterance processing and the voice recognition processing when the mobile terminal 11 is detached from the charging stand 12 or after a predetermined time has elapsed after the detection.

また、制御部３２は、携帯端末１１からユーザ毎の会話内容を取得する場合、当該会話内容を携帯端末１１毎に記憶部３１に記憶させる。制御部３２は、必要に応じて、充電台１２と直接または間接的に通信する異なる携帯端末１１間において記憶した会話内容を共有させる。なお、充電台１２と間接的に通信するとは、充電台１２が電話回線に繋がれており、当該電話回線を介して通信すること、および充電台１２に載置された携帯端末１１を介して通信することの少なくとも一方を含む。 Further, when the control unit 32 acquires the conversation content for each user from the mobile terminal 11, the control unit 32 stores the conversation content in the storage unit 31 for each mobile terminal 11. The control unit 32 shares the stored conversation content between different mobile terminals 11 that directly or indirectly communicate with the charging stand 12, as needed. Indirect communication with the charging stand 12 means that the charging stand 12 is connected to a telephone line and communicates via the telephone line, and via a mobile terminal 11 mounted on the charging stand 12. Includes at least one of communicating.

また、制御部３２は、携帯端末１１から見守り処理を実行する指令を取得する場合、見守り処理を実行する。制御部３２は、見守り処理において、カメラ２８を起動して、特定の対象の連続的な撮像を実行する。制御部３２は、カメラ２８が撮像した画像の中で特定の対象を抽出する。制御部３２は、抽出した特定の対象の状態を、画像認識などに基づいて、判断する。特定の対象の状態とは、例えば、特定のユーザが倒れたままなどの異常状態、留守中の部屋における動体の検出状態である。制御部３２は、特定の対象が異常状態であると判断する場合、見守り処理の実行を指令した携帯端末１１に、特定の対象が異常状態であることを通知する。 Further, when the control unit 32 acquires a command to execute the watching process from the mobile terminal 11, the control unit 32 executes the watching process. In the watching process, the control unit 32 activates the camera 28 to perform continuous imaging of a specific target. The control unit 32 extracts a specific target from the image captured by the camera 28. The control unit 32 determines the state of the extracted specific target based on image recognition or the like. The specific target state is, for example, an abnormal state such as a specific user lying down, or a state in which a moving object is detected in a room while the user is away. When the control unit 32 determines that the specific target is in the abnormal state, the control unit 32 notifies the mobile terminal 11 that has ordered the execution of the watching process that the specific target is in the abnormal state.

また、制御部３２は、携帯端末１１が離脱する場合、伝言の有無のユーザへの問合せをスピーカ２７に発せさせる。制御部３２は、マイク２６が検出した音声に対して、音声認識処理を行い、当該音声が伝言であるか否かを判別する。なお、制御部３２は、伝言の有無の問合せをすること無く、マイク２６が検出した音声が伝言であるか否かを判別可能である。制御部３２は、マイク２６が検出した音声が伝言である場合、当該伝言を記憶部３１に記憶させる。 Further, when the mobile terminal 11 leaves, the control unit 32 causes the speaker 27 to issue an inquiry to the user regarding the presence or absence of a message. The control unit 32 performs voice recognition processing on the voice detected by the microphone 26, and determines whether or not the voice is a message. The control unit 32 can determine whether or not the voice detected by the microphone 26 is a message without inquiring about the presence or absence of a message. When the voice detected by the microphone 26 is a message, the control unit 32 stores the message in the storage unit 31.

制御部３２は、伝言と判別した音声において、伝言するべきユーザの指定があるか否かを判別する。指定が無い場合、制御部３２は、ユーザの指定を促す要求を出力させる。要求の出力は、例えばスピーカ２７からの発話である。制御部３２は、音声認識処理を行い、伝言するべきユーザの指定を認識する。 The control unit 32 determines whether or not there is a user designation to be transmitted in the voice determined to be a message. If not specified, the control unit 32 outputs a request prompting the user to specify. The output of the request is, for example, an utterance from the speaker 27. The control unit 32 performs voice recognition processing and recognizes the user's designation to be transmitted.

制御部３２は、指定されたユーザの属性を記憶部３１から読出す。制御部３２は、記憶部３１から読出したユーザの属性において当該ユーザが記憶部３１に記憶された携帯端末１１の所有者である場合、載置センサ３０に携帯端末１１が載置されるまで待機する。制御部３２は、載置センサ３０が携帯端末１１の載置を検出する場合、通信部２３に当該携帯端末１１の所有者が指定されたユーザであるか否かを判別する。制御部３２は、載置された携帯端末１１の所有者が指定されたユーザである場合、記憶部３１に記憶させた伝言を出力させる。伝言の出力は、例えば、スピーカ２７による発話である。 The control unit 32 reads the attributes of the designated user from the storage unit 31. When the user is the owner of the mobile terminal 11 stored in the storage unit 31 in the attributes of the user read from the storage unit 31, the control unit 32 waits until the mobile terminal 11 is mounted on the mounting sensor 30. To do. When the mounting sensor 30 detects the mounting of the mobile terminal 11, the control unit 32 determines whether or not the owner of the mobile terminal 11 is a user designated by the communication unit 23. When the owner of the mounted mobile terminal 11 is a designated user, the control unit 32 causes the storage unit 31 to output a stored message. The output of the message is, for example, an utterance by the speaker 27.

また、制御部３２は、伝言の取得後の第１の時間の経過時までに携帯端末１１の載置を検出しなかった場合、通信部２３を介して、指定されたユーザが所有者である携帯端末１１に伝言を送信する。制御部３２は、伝言を音声形式のデータとして送信しても、文字形式のデータとして送信してもよい。第１の時間は、例えば、伝言の保持時間として考えられる時間であって、統計データなどに基づいて、製造時には定められている。 Further, if the control unit 32 does not detect the placement of the mobile terminal 11 by the time when the first time elapses after the acquisition of the message, the designated user is the owner via the communication unit 23. A message is transmitted to the mobile terminal 11. The control unit 32 may transmit the message as voice format data or character format data. The first time is, for example, a time that can be considered as a message holding time, and is determined at the time of manufacture based on statistical data or the like.

また、制御部３２は、記憶部３１から読出したユーザの属性において当該ユーザが携帯端末１１の所有者でない場合、カメラ２８を起動して、撮像する画像に指定されたユーザの顔が含まれるか否かの判別を開始する。制御部３２は、ユーザの顔が含まれる場合、記憶部３１に記憶させた伝言を出力させる。 Further, if the user is not the owner of the mobile terminal 11 in the attribute of the user read from the storage unit 31, the control unit 32 activates the camera 28 and does the image to be captured include the face of the specified user? Start determining whether or not. When the user's face is included, the control unit 32 causes the storage unit 31 to output a stored message.

さらに、制御部３２は、記憶した伝言の内容を解析する。制御部３２は、伝言の内容に関連したメッセージが記憶部３１に記憶されているか否か判別する。伝言の内容に関連したメッセージは、伝言に関する事柄が特定のユーザに対して特定の時期に発生または実行することが推定される伝言に対して予め想定され、記憶部３１に記憶されている。当該メッセージは、例えば、“行ってきます”、“薬飲んでね”、“手を洗ってね”、“早く寝なさい”、および“歯を磨きなさい”のそれぞれの伝言に対する、“そろそろ帰ってくるよ”、“もう、飲んだ？”、“ちゃんと洗った？”、“アラームはセットした？”、および“もう磨いた？”のメッセージである。 Further, the control unit 32 analyzes the contents of the stored message. The control unit 32 determines whether or not a message related to the content of the message is stored in the storage unit 31. The message related to the content of the message is presumed for a message in which it is estimated that a matter related to the message occurs or is executed for a specific user at a specific time, and is stored in the storage unit 31. The message is, for example, "Go home," "Take medicine," "Wash your hands," "Go to bed early," and "Brush your teeth." The messages are "I'm coming", "Have you drank?", "Did you wash it properly?", "Have you set the alarm?", And "Have you polished it yet?"

なお、伝言の内容に関連したメッセージの一部は、充電台１２の設置場所と関連付けられている。例えば、“早く寝なさい”に対する“アラームはセットした？”のように、寝室で知らせるべきメッセージは、充電台１２の設置場所が寝室である場合にのみ、選択される。 A part of the message related to the content of the message is associated with the installation location of the charging stand 12. For example, a message to be notified in the bedroom, such as "Have you set an alarm?" For "Go to bed early", is selected only when the charging stand 12 is installed in the bedroom.

制御部３２は、伝言の内容に関連したメッセージが記憶されている場合、当該伝言に関する事柄の発生または実行に関係する特定のユーザを判別する。制御部３２は、特定のユーザの行動履歴を分析し、当該伝言に関する事柄の発生または実行する時期を想定する。 When a message related to the content of the message is stored, the control unit 32 determines a specific user who is involved in the occurrence or execution of the matter related to the message. The control unit 32 analyzes the behavior history of a specific user and assumes a time when a matter related to the message is generated or executed.

制御部３２は、例えば、“行ってきます”の伝言に対して、当該伝言を入力したユーザの行動履歴に基づいて、伝言の入力後から帰宅までかかる時間を分析し、当該時間の経過時期を想定する。また、制御部３２は、例えば、“薬飲んでね”の伝言に対して、伝言をすべきユーザの行動履歴に基づいて、薬を飲むべき時期を想定する。また、制御部３２は、“手を洗ってね”の伝言に対して、伝言をすべきユーザの行動履歴に基づいて、次の食事の開始時期を想定する。また、制御部３２は、例えば、“早く寝なさい”の伝言に対して、伝言をすべきユーザの行動履歴に基づいて、就寝時期を想定する。また、制御部３２は、例えば、“歯を磨きなさい”の伝言に対して、伝言をすべきユーザの行動履歴に基づいて、次の食事の終了時期および就寝時期を想定する。 For example, the control unit 32 analyzes the time taken from the input of the message to returning home based on the action history of the user who input the message for the message of "I'm going", and determines the elapsed time of the time. Suppose. Further, the control unit 32 assumes, for example, the time when the medicine should be taken based on the behavior history of the user who should give the message to the message "Take the medicine". Further, the control unit 32 assumes the start time of the next meal based on the action history of the user who should give the message to the message "Wash your hands". Further, the control unit 32 assumes a bedtime based on the behavior history of the user who should give the message to the message "Go to bed early", for example. Further, the control unit 32 assumes, for example, the end time of the next meal and the bedtime based on the action history of the user who should give the message to the message "brush the teeth".

制御部３２は、想定した当該時期に、カメラ２８を起動して、撮像する画像に指定されたユーザの顔が含まれるか否かの判別を開始する。制御部３２は、ユーザの顔が含まれる場合、伝言の内容に関連したメッセージを出力させる。メッセージの出力は、例えば、スピーカ２７による発話である。 The control unit 32 activates the camera 28 at the assumed time, and starts determining whether or not the image to be captured includes the face of the specified user. When the user's face is included, the control unit 32 outputs a message related to the content of the message. The output of the message is, for example, an utterance by the speaker 27.

制御部３２は、伝言をすべきユーザが携帯端末１１の所有者であって、かつ想定した当該時期から第２の時間が経過した場合、当該携帯端末１１に、伝言の内容に関連したメッセージを送信する。制御部３２は、メッセージを音声形式のデータとして送信しても、文字形式のデータとして送信してもよい。第２の時間は、例えば、想定された時期から、伝言に関する事柄の発生または実行が確実に行われていると想定される時期までの間隔であって、統計データなどに基づいて、製造時には定められている。 When the user to whom the message should be sent is the owner of the mobile terminal 11 and the second time has elapsed from the assumed time, the control unit 32 sends a message related to the content of the message to the mobile terminal 11. Send. The control unit 32 may transmit the message as voice format data or character format data. The second time is, for example, the interval from the assumed time to the time when it is assumed that the occurrence or execution of the message-related matter is surely performed, and is set at the time of manufacture based on statistical data or the like. Has been done.

次に、本開示において携帯端末１１の制御部２２が実行する、初期設定処理について、図４のフローチャートを用いて説明する。初期設定処理は、ユーザによる初期設定を開始する入力を入力部２０が検出する場合に開始する。 Next, the initial setting process executed by the control unit 22 of the mobile terminal 11 in the present disclosure will be described with reference to the flowchart of FIG. The initial setting process is started when the input unit 20 detects an input for starting the initial setting by the user.

ステップＳ１００において、制御部２２は、携帯端末１１のカメラ１８に顔を合わせるように要求するメッセージをディスプレイ１９に表示させる。ディスプレイ１９への表示後に、プロセスはステップＳ１０１に進む。 In step S100, the control unit 22 causes the display 19 to display a message requesting the camera 18 of the mobile terminal 11 to meet. After displaying on the display 19, the process proceeds to step S101.

ステップＳ１０１では、制御部２２は、カメラ１８に撮像を実行させる。撮像後、プロセスはステップＳ１０２に進む。 In step S101, the control unit 22 causes the camera 18 to perform imaging. After imaging, the process proceeds to step S102.

ステップＳ１０２では、制御部２２は、ユーザの名称および属性を尋ねる質問をディスプレイ１９に表示させる。質問の表示後、プロセスはステップＳ１０３に進む。 In step S102, the control unit 22 causes the display 19 to display a question asking for the user's name and attributes. After displaying the question, the process proceeds to step S103.

ステップＳ１０３では、制御部２２は、ステップＳ１０２における質問に対する回答の有無を判別する。回答が無い時、プロセスはステップＳ１０３を繰返す。回答がある時、プロセスはステップＳ１０４に進む。 In step S103, the control unit 22 determines whether or not there is an answer to the question in step S102. If there is no answer, the process repeats step S103. When there is an answer, the process proceeds to step S104.

ステップＳ１０４では、制御部２２は、ステップＳ１０１において撮像した顔の画像を、ステップＳ１０３において検出された質問に対する回答をユーザ情報として関連付けて、記憶部２１に記憶させる。記憶後、プロセスはステップＳ１０５に進む。 In step S104, the control unit 22 stores the face image captured in step S101 in the storage unit 21 in association with the answer to the question detected in step S103 as user information. After storage, the process proceeds to step S105.

ステップＳ１０５では、制御部２２は、充電台１２と通信可能であるか否かを判別する。通信不可能である時、プロセスはステップＳ１０６に進む。通信可能である時、プロセスはステップＳ１０７に進む。 In step S105, the control unit 22 determines whether or not communication with the charging stand 12 is possible. When communication is not possible, the process proceeds to step S106. When communicable, the process proceeds to step S107.

ステップＳ１０６では、制御部２２は、ディスプレイ１９に充電台１２との通信を可能にさせる行動を要求するメッセージをディスプレイ１９に表示させる。通信を可能にさせる行動を要求するメッセージは、携帯端末１１が充電台１２と有線通信を行う構成において、例えば、“充電台に載置してください”である。また、通信を可能にさせる行動を要求するメッセージは、携帯端末１１が充電台１２と無線通信を行う構成において、例えば、“充電台１２に近付けてください”である。メッセージの表示後、プロセスはステップＳ１０５に戻る。 In step S106, the control unit 22 causes the display 19 to display a message requesting an action that enables the display 19 to communicate with the charging stand 12. The message requesting an action that enables communication is, for example, "Please place it on the charging stand" in the configuration in which the mobile terminal 11 performs wired communication with the charging stand 12. Further, the message requesting an action that enables communication is, for example, "Please approach the charging stand 12" in the configuration in which the mobile terminal 11 wirelessly communicates with the charging stand 12. After displaying the message, the process returns to step S105.

ステップＳ１０７では、制御部２２は、ステップＳ１０４において記憶した顔の画像、およびユーザ情報を充電台１２に転送する。また、制御部２２は、転送中であることを示すメッセージをディスプレイ１９に表示させる。転送の開始後にプロセスはステップＳ１０８に進む。 In step S107, the control unit 22 transfers the face image and user information stored in step S104 to the charging stand 12. In addition, the control unit 22 causes the display 19 to display a message indicating that the transfer is in progress. After starting the transfer, the process proceeds to step S108.

ステップＳ１０８では、制御部２２は、充電台１２から転送完了の通知を取得したか否かを判別する。取得していない時、プロセスはステップＳ１０８を繰返す。取得している時、プロセスはステップＳ１０９に進む。 In step S108, the control unit 22 determines whether or not the transfer completion notification has been obtained from the charging stand 12. If not, the process repeats step S108. When acquiring, the process proceeds to step S109.

ステップＳ１０９では、制御部２２は、初期設定の完了を示すメッセージをディスプレイ１９に表示させる。表示後、初期設定処理は終了する。 In step S109, the control unit 22 causes the display 19 to display a message indicating the completion of the initial setting. After the display, the initial setting process ends.

次に、本開示において充電台１２の制御部３２が実行する、設置場所判別処理について、図５のフローチャートを用いて説明する。設置場所判別処理は、例えば、充電台１２の電源がＯＮになった後の任意の時間の経過時に開始する。 Next, the installation location determination process executed by the control unit 32 of the charging stand 12 in the present disclosure will be described with reference to the flowchart of FIG. The installation location determination process starts, for example, when an arbitrary time elapses after the power of the charging stand 12 is turned on.

ステップＳ２００において、制御部３２は、マイク２６およびカメラ２８の少なくとも一方を駆動させる。駆動を開始させると、プロセスはステップＳ２０１に進む。 In step S200, the control unit 32 drives at least one of the microphone 26 and the camera 28. When the drive is started, the process proceeds to step S201.

ステップＳ２０１では、制御部３２は、記憶部３１から、設置場所を判別するための、想定される各設置場所に特有な音声および画像の少なくとも一方を読出す。読出し後、プロセスはステップＳ２０２に進む。 In step S201, the control unit 32 reads at least one of the audio and the image peculiar to each assumed installation location from the storage unit 31 for determining the installation location. After reading, the process proceeds to step S202.

ステップＳ２０２では、制御部３２は、ステップＳ２００において起動したマイク２６およびカメラ２８の少なくとも一方が検出する音声および画像の少なくとも一方を、ステップＳ２０１において記憶部３１から読出した音声および画像の少なくとも一方と比較する。制御部３２は、当該比較により、充電台１２の設置場所を判別する。判別後、プロセスはステップＳ２０３に進む。 In step S202, the control unit 32 compares at least one of the audio and image detected by at least one of the microphone 26 and the camera 28 activated in step S200 with at least one of the audio and image read from the storage unit 31 in step S201. To do. The control unit 32 determines the installation location of the charging stand 12 by the comparison. After the determination, the process proceeds to step S203.

ステップＳ２０３では、制御部３２は、ステップＳ２０３において判別した充電台１２の設置場所を記憶部３１に記憶させる。記憶後、設置場所判別処理は終了する。 In step S203, the control unit 32 stores the installation location of the charging stand 12 determined in step S203 in the storage unit 31. After storage, the installation location determination process ends.

次に、本開示において充電台１２の制御部３２が実行する、発話等実行判別処理について、図６のフローチャートを用いて説明する。発話等実行判別処理は、周期的に開始する。 Next, the execution determination process such as utterance executed by the control unit 32 of the charging stand 12 in the present disclosure will be described with reference to the flowchart of FIG. The execution determination process such as utterance starts periodically.

ステップＳ３００において、制御部３２は、携帯端末１１の載置を載置センサ３０が検出しているか否かを判別する。検出している時、プロセスはステップＳ３０１に進む。検出していない時、発話等実行判別処理は終了する。 In step S300, the control unit 32 determines whether or not the mounting sensor 30 has detected the mounting of the mobile terminal 11. When detecting, the process proceeds to step S301. When it is not detected, the execution determination process such as utterance ends.

ステップＳ３０１では、制御部３２は、充電台１２の設置場所を記憶部３１から読出して、携帯端末１１に通知する。通知後、プロセスはステップＳ３０２に進む。 In step S301, the control unit 32 reads the installation location of the charging stand 12 from the storage unit 31 and notifies the mobile terminal 11 of it. After notification, the process proceeds to step S302.

ステップＳ３０２では、制御部３２は、変動機構２５および人感センサ２９を駆動して、充電台１２の周囲に人がいるか否かの検出を行う。変動機構２５および人感センサ２９を駆動させた後、プロセスはステップＳ３０３に進む。 In step S302, the control unit 32 drives the fluctuation mechanism 25 and the motion sensor 29 to detect whether or not there is a person around the charging stand 12. After driving the variation mechanism 25 and the motion sensor 29, the process proceeds to step S303.

ステップＳ３０３では、制御部３２は、充電台１２の周囲の人を人感センサ２９が検出しているか否かを判別する。周囲の人を検出する時、プロセスはステップＳ３０４に進む。周囲の人を検出しない時、発話等実行判別処理は終了する。 In step S303, the control unit 32 determines whether or not the motion sensor 29 has detected a person around the charging stand 12. When detecting a person around, the process proceeds to step S304. When the surrounding people are not detected, the execution determination process such as utterance ends.

ステップＳ３０４では、制御部３２は、カメラ２８に周辺光景を撮像させる。撮像後、プロセスはステップＳ３０５に進む。 In step S304, the control unit 32 causes the camera 28 to image the peripheral scene. After imaging, the process proceeds to step S305.

ステップＳ３０５では、制御部３２は、ステップＳ３０４において撮像により取得した画像内に含まれる人の顔を探索する。また、制御部３２は、探索した顔の画像内の位置を検出する。顔の探索後、プロセスはステップＳ３０６に進む。 In step S305, the control unit 32 searches for a human face included in the image acquired by imaging in step S304. In addition, the control unit 32 detects the position of the searched face in the image. After searching for the face, the process proceeds to step S306.

ステップＳ３０６では、制御部３２は、ステップＳ３０５において探索した顔を、記憶部３１に記憶した登録済みの顔の画像と比較することにより、撮像されたユーザを特定する。特定後、プロセスはステップＳ３０７に進む。 In step S306, the control unit 32 identifies the captured user by comparing the face searched in step S305 with the registered face image stored in the storage unit 31. After identification, the process proceeds to step S307.

ステップＳ３０７では、制御部３２は、ステップＳ３０５において探索した顔の位置に基づいて、携帯端末１１のディスプレイ１９がステップＳ３０４において撮像されたユーザの顔の方向を向くように、変動機構２５を駆動させる。変動機構２５の駆動後、プロセスはステップＳ３０８に進む。 In step S307, the control unit 32 drives the fluctuation mechanism 25 so that the display 19 of the mobile terminal 11 faces the direction of the user's face imaged in step S304 based on the position of the face searched in step S305. .. After driving the variable mechanism 25, the process proceeds to step S308.

ステップＳ３０８では、制御部３２は、発話処理および音声認識処理の少なくとも一方を開始させる指令を携帯端末１１に通知する。携帯端末１１に通知後、プロセスはステップＳ３０９に進む。 In step S308, the control unit 32 notifies the mobile terminal 11 of a command to start at least one of the utterance processing and the voice recognition processing. After notifying the mobile terminal 11, the process proceeds to step S309.

ステップＳ３０９では、制御部３２は、ステップＳ３０６において特定したユーザを携帯端末１１に通知する。通知後、プロセスはステップＳ３１０に進む。 In step S309, the control unit 32 notifies the mobile terminal 11 of the user specified in step S306. After notification, the process proceeds to step S310.

ステップＳ３１０では、制御部３２は、携帯端末１１の離脱を載置センサ３０が検出しているか否かを判別する。検出していない時、プロセスはステップＳ３０４に戻る。検出している時、プロセスはステップＳ３１１に進む。 In step S310, the control unit 32 determines whether or not the mounting sensor 30 has detected the detachment of the mobile terminal 11. If not detected, the process returns to step S304. When detecting, the process proceeds to step S311.

ステップＳ３１１では、制御部３２は、離脱の検出後から所定時間が経過しているか否かを判別する。所定時間が経過していない場合、プロセスはステップＳ３１０に戻る。所定時間が経過している場合、プロセスはステップＳ３１２に進む。 In step S311, the control unit 32 determines whether or not a predetermined time has elapsed since the detection of withdrawal. If the predetermined time has not elapsed, the process returns to step S310. If the predetermined time has elapsed, the process proceeds to step S312.

ステップＳ３１３では、制御部３２は、発話処理および音声認識処理の少なくとも一方を終了させる指令を携帯端末１１に通知する。また、制御部３２は、伝言の有無の問合せをスピーカ２７に実行させる。携帯端末１１への通知後、発話等実行判別処理は終了する。 In step S313, the control unit 32 notifies the mobile terminal 11 of a command to end at least one of the utterance processing and the voice recognition processing. Further, the control unit 32 causes the speaker 27 to execute an inquiry as to whether or not there is a message. After the notification to the mobile terminal 11, the execution determination process such as utterance ends.

次に、本開示において携帯端末１１の制御部２２が実行する、場所判別処理について、図７のフローチャートを用いて説明する。場所判別処理は、充電台１２に携帯端末１１を載置する時に開始する。 Next, the location determination process executed by the control unit 22 of the mobile terminal 11 in the present disclosure will be described with reference to the flowchart of FIG. The location determination process starts when the mobile terminal 11 is placed on the charging stand 12.

ステップＳ４００において、制御部２２は、充電台１２から取得する設置場所を解析する。解析後、プロセスはステップＳ４０１に進む。 In step S400, the control unit 22 analyzes the installation location acquired from the charging stand 12. After analysis, the process proceeds to step S401.

ステップＳ４０１では、制御部２２は、ステップＳ４００において解析した充電台１２の設置場所が玄関であるか否かを判別する。玄関である場合、プロセスはステップＳ５００に進む。玄関でない場合、プロセスはステップＳ４０２に進む。 In step S401, the control unit 22 determines whether or not the installation location of the charging stand 12 analyzed in step S400 is the entrance. If it is a front door, the process proceeds to step S500. If not the front door, the process proceeds to step S402.

ステップＳ５００では、制御部２２は、後述する玄関対話のサブルーチンを実行する。玄関対話のサブルーチンの実行後、場所判別処理は終了する。 In step S500, the control unit 22 executes a subroutine of the entrance dialogue described later. After executing the subroutine of the entrance dialogue, the location determination process ends.

ステップＳ４０２では、制御部２２は、ステップＳ４００において解析した充電台１２の設置場所が食卓であるか否かを判別する。食卓である場合、プロセスはステップＳ６００に進む。食卓でない場合、プロセスはステップＳ４０３に進む。 In step S402, the control unit 22 determines whether or not the installation location of the charging stand 12 analyzed in step S400 is a dining table. If it is a table, the process proceeds to step S600. If not at the table, the process proceeds to step S403.

ステップＳ６００では、制御部２２は、後述する食卓対話のサブルーチンを実行する。食卓対話のサブルーチンの実行後、場所判別処理は終了する。 In step S600, the control unit 22 executes a subroutine of table dialogue, which will be described later. After executing the table conversation subroutine, the location determination process ends.

ステップＳ４０３では、制御部２２は、ステップＳ４００において解析した充電台１２の設置場所が子供部屋であるか否かを判別する。子供部屋である場合、プロセスはステップＳ７００に進む。子供部屋でない場合、プロセスはステップＳ４０４に進む。 In step S403, the control unit 22 determines whether or not the installation location of the charging stand 12 analyzed in step S400 is a child's room. If it is a children's room, the process proceeds to step S700. If it is not a children's room, the process proceeds to step S404.

ステップＳ７００では、制御部２２は、後述する子供部屋対話のサブルーチンを実行する。子供部屋対話のサブルーチンの実行後、場所判別処理は終了する。 In step S700, the control unit 22 executes a subroutine of the children's room dialogue described later. After executing the subroutine of the children's room dialogue, the location determination process ends.

ステップＳ４０４では、制御部２２は、ステップＳ４００において解析した充電台１２の設置場所が寝室であるか否かを判別する。寝室である場合、プロセスはステップＳ８００に進む。寝室でない場合、プロセスはステップＳ４０５に進む。 In step S404, the control unit 22 determines whether or not the installation location of the charging stand 12 analyzed in step S400 is a bedroom. If in the bedroom, the process proceeds to step S800. If not in the bedroom, the process proceeds to step S405.

ステップＳ８００では、制御部２２は、後述する寝室対話のサブルーチンを実行する。寝室対話のサブルーチンの実行後、部屋判別処理は終了する。 In step S800, the control unit 22 executes the bedroom dialogue subroutine described later. After executing the bedroom dialogue subroutine, the room determination process ends.

ステップＳ４０５では、制御部２２は、対話内容の決定に設置場所を用いない一般対話を行う発話処理および音声認識処理を実行する。一般対話の発話処理および音声認識処理を行うと、部屋判別処理は終了する。 In step S405, the control unit 22 executes an utterance process and a voice recognition process for performing a general dialogue that does not use the installation location for determining the dialogue content. When the utterance processing and the voice recognition processing of the general dialogue are performed, the room discrimination processing ends.

次に、本開示において携帯端末１１の制御部２２が実行する、玄関対話のサブルーチンＳ５００について、図８のフローチャートを用いて説明する。 Next, the subroutine S500 of the entrance dialogue executed by the control unit 22 of the mobile terminal 11 in the present disclosure will be described with reference to the flowchart of FIG.

ステップＳ５０１において、制御部２２は、対話対象である特定のユーザの属性を判別する。判別後、プロセスはステップＳ５０２に進む。 In step S501, the control unit 22 determines the attributes of a specific user to be interacted with. After the determination, the process proceeds to step S502.

ステップＳ５０２では、制御部２２は、外部情報を解析する。解析後、プロセスはステップ５０３に進む。 In step S502, the control unit 22 analyzes the external information. After analysis, the process proceeds to step 503.

ステップＳ５０３では、制御部２２は、対話対象のユーザの動作に基づいて、当該ユーザの行動が帰宅および外出のいずれであるかを判別する。帰宅である場合、プロセスはステップＳ５０４に進む。外出である場合、プロセスはステップＳ５０５に進む。 In step S503, the control unit 22 determines whether the user's action is to return home or go out based on the action of the user to be interacted with. If returning home, the process proceeds to step S504. If on the go, the process proceeds to step S505.

ステップＳ５０４では、制御部２２は、ステップＳ５０１において判別したユーザの属性およびステップＳ５０２において解析した外部情報に基づいて、帰宅用の対話を実行させる。制御部２２は、例えば、ユーザの属性および外部情報に関わらず、スピーカ１７に“お帰り”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの属性が子供である場合、スピーカ１７に“勉強、頑張った？”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの属性が大人である場合、スピーカ１７に“お疲れ様”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき雨であることを判別した場合、スピーカ１７に“雨に濡れなかった？”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき通勤電車の遅延を判別した場合、スピーカ１７に“電車、大変だったね”などの言葉を発せさせる。帰宅用の対話の実行後、プロセスはステップＳ５０６に進む。 In step S504, the control unit 22 causes the homecoming dialogue to be executed based on the user attributes determined in step S501 and the external information analyzed in step S502. The control unit 22 causes the speaker 17 to say a word such as "return" regardless of the user's attributes and external information, for example. Further, for example, when the user's attribute is a child, the control unit 22 causes the speaker 17 to say a word such as "study, did your best?". Further, the control unit 22 causes the speaker 17 to say "Thank you for your hard work" when the user's attribute is an adult, for example. Further, when the control unit 22 determines that it is raining based on external information, for example, the control unit 22 causes the speaker 17 to say a word such as "Did you get wet with rain?". Further, when the control unit 22 determines, for example, the delay of the commuter train based on external information, the control unit 22 causes the speaker 17 to say a word such as "Train, it was hard". After performing the homecoming dialogue, the process proceeds to step S506.

ステップＳ５０５では、制御部２２は、短期外出用の注意を喚起する対話を実行させる。制御部２２は、例えば、スピーカ１７に“携帯端末を忘れているよ”、“すぐに戻ってくるの？”、および“念のため、鍵をかけよう”などの言葉を発せさせる。短期外出用の注意を喚起する対話の実行後、プロセスはステップＳ５０６に進む。 In step S505, the control unit 22 executes a dialogue that calls attention for a short-term outing. The control unit 22 causes the speaker 17, for example, to say words such as "I forgot my mobile terminal", "Will you come back soon?", And "Let's lock it just in case." After performing the alert dialogue for short-term outings, the process proceeds to step S506.

ステップＳ５０６では、制御部２２は、携帯端末１１が充電台１２から離脱しているか否かを判別する。離脱していない場合、プロセスはステップＳ５０６を繰返す。離脱している場合、プロセスはステップＳ５０７に進む。 In step S506, the control unit 22 determines whether or not the mobile terminal 11 is detached from the charging stand 12. If not leaving, the process repeats step S506. If leaving, the process proceeds to step S507.

ステップＳ５０７では、制御部２２は、対話対象のユーザの動作に基づいて、当該ユーザの行動が帰宅および外出のいずれであるかを判別する。なお、携帯端末１１および充電台１２が有線通信により通信する構成においては、制御部２２は、カメラ１８が検出する画像に基づいて帰宅および外出のいずれであるかを判別する。帰宅である場合、プロセスはステップＳ５０８に進む。外出である場合、プロセスはステップＳ５０９に進む。 In step S507, the control unit 22 determines whether the user's action is to return home or go out based on the action of the user to be interacted with. In the configuration in which the mobile terminal 11 and the charging stand 12 communicate by wire communication, the control unit 22 determines whether to return home or go out based on the image detected by the camera 18. If returning home, the process proceeds to step S508. If on the go, the process proceeds to step S509.

ステップＳ５０８では、制御部２２は、ステップＳ５０１において判別したユーザの属性およびステップＳ５０２において解析した外部情報に基づいて、外出用の対話を実行させる。制御部２２は、例えば、ユーザの属性および外部情報に関わらず、スピーカ１７に“今日も頑張ろう”および“いってらっしゃい”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの属性が子供である場合、スピーカ１７に“知らない人について行かないでね”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの属性が大人である場合、スピーカ１７に“鍵かけた？”および“火の元、大丈夫？”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき雨であることを判別した場合、スピーカ１７に“傘を持った？”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの属性が大人であってかつ外部情報に基づき雨であることを判別した場合、スピーカ１７に“洗濯物は大丈夫？”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき当日の冷込みを判別した場合、スピーカ１７に“上着はあるの？”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき通学電車または通勤電車が遅延していた場合、スピーカ１７に“山手線は後れているよ”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの属性が大人であってかつ外部情報に基づき通勤経路が渋滞している場合、スピーカ１７に“家から駅まで渋滞しているよ”などの言葉を発せさせる。外出用の対話の実行後、玄関対話のサブルーチンＳ５００を終了して、図７に示す制御部２２が実行する部屋判別処理に戻る。 In step S508, the control unit 22 causes the outing dialogue to be executed based on the user attributes determined in step S501 and the external information analyzed in step S502. For example, the control unit 22 causes the speaker 17 to say words such as "Let's do our best today" and "Welcome" regardless of the user's attributes and external information. Further, for example, when the user's attribute is a child, the control unit 22 causes the speaker 17 to say a word such as "Don't follow a stranger". Further, for example, when the user's attribute is an adult, the control unit 22 causes the speaker 17 to say words such as "locked?" And "source of fire, are you okay?". Further, when the control unit 22 determines that it is raining based on external information, for example, the control unit 22 causes the speaker 17 to say a word such as "Hold an umbrella?". Further, the control unit 22 causes the speaker 17 to say a word such as "Is the laundry okay?" When, for example, the user's attribute is an adult and it is determined that it is rain based on external information. Further, the control unit 22 causes the speaker 17 to say a word such as "Do you have a jacket?" When, for example, the cooling of the day is determined based on external information. Further, the control unit 22 causes the speaker 17 to say a word such as "The Yamanote line is behind" when the commuter train or the commuter train is delayed based on external information, for example. Further, for example, when the user's attribute is an adult and the commuting route is congested based on external information, the control unit 22 issues a word such as "congested from the house to the station" to the speaker 17. Let me. After executing the dialogue for going out, the subroutine S500 of the entrance dialogue is terminated, and the process returns to the room determination process executed by the control unit 22 shown in FIG. 7.

ステップＳ５０９では、制御部２２は、長期外出用の注意を喚起する対話を実行させる。制御部２２は、例えば、スピーカ１７に“鍵、大丈夫だった？”および“火の元、大丈夫だった？”などの言葉を発せさせる。長期外出用の注意を喚起する対話の実行後、玄関対話のサブルーチンＳ５００を終了して、図７に示す制御部２２が実行する部屋判別処理に戻る。 In step S509, the control unit 22 executes a dialogue that calls attention for long-term outings. The control unit 22 causes the speaker 17, for example, to say words such as "key, was it okay?" And "source of fire, was it okay?". After executing the dialogue that calls attention for long-term outing, the subroutine S500 of the entrance dialogue is terminated, and the process returns to the room determination process executed by the control unit 22 shown in FIG. 7.

次に、本開示において携帯端末１１の制御部２２が実行する、食卓対話のサブルーチンＳ６００について、図９のフローチャートを用いて説明する。 Next, the subroutine S600 for table dialogue executed by the control unit 22 of the mobile terminal 11 in the present disclosure will be described with reference to the flowchart of FIG.

ステップＳ６０１において、制御部２２は、対話対象である特定のユーザの属性を判別する。判別後、プロセスはステップＳ６０２に進む。 In step S601, the control unit 22 determines the attributes of a specific user to be interacted with. After the determination, the process proceeds to step S602.

ステップＳ６０２では、制御部２２は、特定のユーザの行動の判別を開始する。判別開始後、プロセスはステップ６０３に進む。 In step S602, the control unit 22 starts determining the behavior of a specific user. After starting the determination, the process proceeds to step 603.

ステップＳ６０３では、制御部２２は、ステップＳ６０１において判別したユーザの属性およびステップＳ６０２において開始したユーザの行動に基づいて、食事用の対話を実行させる。制御部２２は、例えば、ユーザの属性が子供であってかつ過去の行動履歴における食事時刻の直前である場合、スピーカ１７に“お腹が空いてきたね”などの言葉を発せさせる。なお、過去の行動履歴は、例えば、制御部２２が過去に判別したユーザの動作、および学習した生活習慣などに基づく。また、制御部２２は、例えば、ユーザの行動が配膳である場合、スピーカ１７に“今日のご飯は何？などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの行動が食事開始直後である場合、スピーカ１７に“色々な物を食べようね”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの行動がユーザの属性に対して適量を超えた食事の摂取の開始である場合、スピーカ１７に“食べ過ぎ注意しよう”などの言葉を発せさせる。食事用の対話の実行後、プロセスはステップＳ６０４に進む。 In step S603, the control unit 22 causes the meal dialogue to be executed based on the user's attribute determined in step S601 and the user's action started in step S602. For example, when the user's attribute is a child and immediately before the meal time in the past behavior history, the control unit 22 causes the speaker 17 to say a word such as "I'm hungry". The past behavior history is based on, for example, the user's behavior determined in the past by the control unit 22, the learned lifestyle, and the like. Further, the control unit 22 causes the speaker 17 to say "What is today's meal?" When the user's behavior is serving, for example. The control unit 22 causes, for example, the user's behavior to start eating. Immediately after that, the speaker 17 is made to say a word such as "Let's eat various things". Further, the control unit 22 ingests a meal in which the user's behavior exceeds an appropriate amount for the user's attribute, for example. If it is the start of, the speaker 17 is made to say a word such as "Be careful not to overeat." After executing the dialogue for meals, the process proceeds to step S604.

ステップＳ６０４では、制御部２２は、携帯端末１１が充電台１２から離脱しているか否かを判別する。離脱していない場合、プロセスはステップＳ６０４を繰返す。離脱している場合、プロセスはステップＳ６０５に進む。 In step S604, the control unit 22 determines whether or not the mobile terminal 11 is detached from the charging stand 12. If not leaving, the process repeats step S604. If leaving, the process proceeds to step S605.

ステップＳ６０５では、制御部２２は、ステップＳ６０１において判別したユーザの属性に基づいて、買物用の対話を実行させる。制御部２２は、例えば、ユーザの属性が大人である場合、スピーカ１７に“今の旬は鰯だよ”および“何を買うかメモした？”などの言葉を発せさせる。買物用の対話の実行後、食卓対話のサブルーチンＳ６００を終了して、図７に示す制御部２２が実行する部屋判別処理に戻る。 In step S605, the control unit 22 causes the shopping dialogue to be executed based on the attributes of the user determined in step S601. For example, when the user's attribute is an adult, the control unit 22 causes the speaker 17 to say words such as "This season is sardines" and "Did you make a note of what to buy?". After executing the dialogue for shopping, the subroutine S600 of the dining table dialogue is terminated, and the process returns to the room determination process executed by the control unit 22 shown in FIG. 7.

次に、本開示において携帯端末１１の制御部２２が実行する、子供部屋対話のサブルーチンＳ７００について、図１０のフローチャートを用いて説明する。 Next, the subroutine S700 for the children's room dialogue executed by the control unit 22 of the mobile terminal 11 in the present disclosure will be described with reference to the flowchart of FIG.

ステップＳ７０１において、制御部２２は、対話対象である特定のユーザの属性を判別する。判別後、プロセスはステップＳ７０２に進む。 In step S701, the control unit 22 determines the attributes of a specific user to be interacted with. After the determination, the process proceeds to step S702.

ステップＳ７０２では、制御部２２は、特定のユーザの行動の判別を開始する。判別開始後、プロセスはステップ７０３に進む。 In step S702, the control unit 22 starts determining the behavior of a specific user. After starting the determination, the process proceeds to step 703.

ステップＳ７０３では、制御部２２は、ステップＳ７０１において判別したユーザの属性およびステップＳ７０２において開始したユーザの行動に基づいて、子供との対話を実行させる。制御部２２は、例えば、ユーザの属性が小学生または中学生であってかつ現在時刻が過去の行動履歴における帰宅時刻である場合、スピーカ１７に“学校楽しかった？”、“両親に連絡ある？”、および“両親宛のプリントはある？”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの行動が遊びである場合、スピーカ１７に“宿題は大丈夫なの？などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの行動が勉強開始直後である場合、スピーカ１７に“いつでも質問して”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの行動が勉強であると判別してから所定の時間経過した場合、スピーカ１７に“少し息抜きしたら”などの言葉を発せさせる。また、制御部２２は、例えば、ユーザの属性が幼児または小学校の低学年である場合、スピーカ１７に簡単な加算、減算、乗算などを問う質問を発せさせる。また、制御部２２は、例えば、ユーザの属性における性別および幼児、小学校低学年、中学年、および高学年、中学生、ならびに高校生毎に流行している話題を提示する言葉を発せさせる。子供との対話の実行後、プロセスはステップＳ７０４に進む。 In step S703, the control unit 22 causes the dialogue with the child to be executed based on the user's attribute determined in step S701 and the user's action started in step S702. For example, when the attribute of the user is an elementary school student or a junior high school student and the current time is the time to return home in the past behavior history, the control unit 22 asks the speaker 17 "Did you enjoy school?", "Have you contacted your parents?", And say something like "Do you have a print for your parents?" Further, the control unit 22 causes the speaker 17 to say a word such as "Is the homework okay?" When the user's behavior is play, for example. The control unit 22 causes the user's behavior to say, for example, immediately after the start of study. In this case, the speaker 17 is made to say a word such as "ask a question at any time". Further, the control unit 22 determines that the user's behavior is studying, and when a predetermined time elapses, the speaker 17 is used. The control unit 22 asks the speaker 17 a simple addition, subtraction, multiplication, etc. when the user's attribute is, for example, an infant or a lower grade of elementary school. In addition, the control unit 22 makes a word that presents a topic that is popular among the user's attributes such as gender and infant, elementary school lower grade, middle grade, and upper grade, junior high school student, and high school student. After performing the dialogue with, the process proceeds to step S704.

ステップＳ７０４では、制御部２２は、携帯端末１１が充電台１２から離脱しているか否かを判別する。離脱していない場合、プロセスはステップＳ７０４を繰返す。離脱している場合、プロセスはステップＳ７０５に進む。 In step S704, the control unit 22 determines whether or not the mobile terminal 11 is detached from the charging stand 12. If not leaving, the process repeats step S704. If leaving, the process proceeds to step S705.

ステップＳ７０５では、制御部２２は、ステップＳ７０１において判別したユーザの属性に基づいて、子供外出用の対話を実行させる。制御部２２は、例えば、現在時刻が過去の行動履歴における通学直前の時刻である場合、スピーカ１７に“忘れ物は無い？”および“宿題を持った？”などの言葉を発せさせる。また、制御部２２は、例えば、季節が夏季である場合、スピーカ１７に“帽子を被った？”などの言葉を発せさせる。また、制御部２２は、例えば、スピーカ１７に“ハンカチを持った？”などの言葉を発せさせる。子供外出用の対話の実行後、子供部屋対話のサブルーチンＳ７００を終了して、図７に示す制御部２２が実行する部屋判別処理に戻る。 In step S705, the control unit 22 causes the child outing dialogue to be executed based on the user's attribute determined in step S701. For example, when the current time is the time immediately before going to school in the past behavior history, the control unit 22 causes the speaker 17 to say words such as "Have you forgotten something?" And "Have you done your homework?". Further, for example, when the season is summer, the control unit 22 causes the speaker 17 to say a word such as "Have you put on a hat?". Further, the control unit 22 causes the speaker 17, for example, to say a word such as "Hold a handkerchief?". After executing the dialogue for going out of the child, the subroutine S700 of the dialogue in the children's room is terminated, and the process returns to the room determination process executed by the control unit 22 shown in FIG.

次に、本開示において携帯端末１１の制御部２２が実行する、寝室対話のサブルーチンＳ８００について、図１１のフローチャートを用いて説明する。 Next, the bedroom dialogue subroutine S800 executed by the control unit 22 of the mobile terminal 11 in the present disclosure will be described with reference to the flowchart of FIG.

ステップＳ８０１では、制御部２２は、外部情報を解析する。解析後、プロセスはステップ８０２に進む。 In step S801, the control unit 22 analyzes the external information. After analysis, the process proceeds to step 802.

ステップＳ８０２では、制御部２２は、ステップＳ８０１において解析した外部情報に基づいて、就寝用の対話を実行させる。制御部２２は、例えば、外部情報に関わらず、スピーカ１７に“おやすみなさい”、“鍵は大丈夫？”、および“火の元は確認した？”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき前日の気温より予想気温が低い場合、スピーカ１７に“今晩冷え込むよ”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき前日の気温より予想気温が高い場合、スピーカ１７に“今晩は暑くなるよ”などの言葉を発せさせる。就寝用の対話の実行後、プロセスはステップＳ８０３に進む。 In step S802, the control unit 22 causes the bedtime dialogue to be executed based on the external information analyzed in step S801. For example, the control unit 22 causes the speaker 17 to say words such as "Good night", "Is the key okay?", And "Did you confirm the source of the fire?" Regardless of the external information. Further, for example, when the expected temperature is lower than the temperature of the previous day based on external information, the control unit 22 causes the speaker 17 to say a word such as "it will cool down tonight". Further, for example, when the expected temperature is higher than the temperature of the previous day based on external information, the control unit 22 causes the speaker 17 to say a word such as "It will be hot tonight". After performing the bedtime dialogue, the process proceeds to step S803.

ステップＳ８０３では、制御部２２は、携帯端末１１が充電台１２から離脱しているか否かを判別する。離脱していない場合、プロセスはステップＳ８０３を繰返す。離脱している場合、プロセスはステップＳ８０４に進む。 In step S803, the control unit 22 determines whether or not the mobile terminal 11 is detached from the charging stand 12. If not leaving, the process repeats step S803. If leaving, the process proceeds to step S804.

ステップＳ８０４では、制御部２２は、ステップＳ８０１において解析したユーザの外部情報に基づいて、起床用の対話を実行させる。制御部２２は、例えば、外部情報に関わらず、スピーカ１７に“おはよう”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき前日の気温より予想気温が低いと判別する場合、スピーカ１７に“今日、寒くなるよ。セーターあるといいよ”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき前日の気温より予想気温が高いと判別する場合、スピーカ１７に“今日、暑くなるよ。薄着がいいよ”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき雨が降っていることを判別する場合、スピーカ１７に“今日は雨だよ。早く出かけなくちゃね”などの言葉を発せさせる。また、制御部２２は、例えば、外部情報に基づき通勤電車または通学電車の遅延を判別する場合、スピーカ１７に“電車遅れているよ。早く出かけなくちゃね”などの言葉を発せさせる。起床用の対話の実行後、寝室対話のサブルーチンＳ８００を終了して、図７に示す制御部２２が実行する部屋判別処理に戻る。 In step S804, the control unit 22 causes the wake-up dialogue to be executed based on the user's external information analyzed in step S801. For example, the control unit 22 causes the speaker 17 to say a word such as "good morning" regardless of external information. Further, when the control unit 22 determines, for example, that the expected temperature is lower than the temperature of the previous day based on external information, the speaker 17 causes the speaker 17 to say a word such as "It will be cold today. It is good to have a sweater." Further, when the control unit 22 determines, for example, that the expected temperature is higher than the temperature of the previous day based on external information, the speaker 17 causes the speaker 17 to say "It will be hot today. Light clothing is good". Further, when determining that it is raining based on external information, for example, the control unit 22 causes the speaker 17 to say a word such as "It's raining today. I have to go out early." Further, for example, when the control unit 22 determines the delay of the commuter train or the school train based on external information, the control unit 22 causes the speaker 17 to say a word such as "The train is late. You must go out early." After executing the dialogue for waking up, the subroutine S800 of the bedroom dialogue is terminated, and the process returns to the room determination process executed by the control unit 22 shown in FIG. 7.

次に、本開示において充電台１２の制御部３２が実行する、伝言処理について、図１２のフローチャートを用いて説明する。伝言処理は、例えば、マイク２６が検出する音声を制御部３２が伝言であると判別する時、開始する。 Next, the message processing executed by the control unit 32 of the charging stand 12 in the present disclosure will be described with reference to the flowchart of FIG. The message processing starts, for example, when the control unit 32 determines that the voice detected by the microphone 26 is a message.

ステップＳ９００において、制御部３２は、伝言にユーザの指定があるか否かを判別する。ユーザの指定がない場合、プロセスはステップＳ９０１に進む。ユーザの指定がある場合、プロセスはステップＳ９０２に進む。 In step S900, the control unit 32 determines whether or not the message is specified by the user. If not specified by the user, the process proceeds to step S901. If specified by the user, the process proceeds to step S902.

ステップＳ９０１では、制御部３２は、ユーザ指定の要求をスピーカ２７に出力させる。要求の出力後、プロセスはステップＳ９００に戻る。 In step S901, the control unit 32 causes the speaker 27 to output a request specified by the user. After outputting the request, the process returns to step S900.

ステップＳ９０２では、制御部３２は、指定されたユーザの属性を記憶部３１から読出す。属性の読出し後、プロセスはステップＳ９０３に進む。 In step S902, the control unit 32 reads the attributes of the designated user from the storage unit 31. After reading the attributes, the process proceeds to step S903.

ステップＳ９０３では、制御部３２は、ステップＳ９０２において読出したユーザの属性に基づいて、ユーザが充電台１２に把握されている携帯端末１１の所有者であるか否かを判別する。所有者である場合、プロセスはステップＳ９０４に進む。所有者でない場合、プロセスはステップＳ９０７に進む。 In step S903, the control unit 32 determines whether or not the user is the owner of the mobile terminal 11 grasped by the charging stand 12 based on the attributes of the user read in step S902. If you are the owner, the process proceeds to step S904. If not the owner, the process proceeds to step S907.

ステップＳ９０４では、制御部３２は、指定されたユーザの携帯端末１１が載置されているか否かを判別する。当該携帯端末１１が載置されている場合、プロセスはステップＳ９１０に進む。当該携帯端末１１が載置されていない場合、プロセスはステップＳ９０５に進む。 In step S904, the control unit 32 determines whether or not the mobile terminal 11 of the designated user is mounted. If the mobile terminal 11 is mounted, the process proceeds to step S910. If the mobile terminal 11 is not mounted, the process proceeds to step S905.

ステップＳ９０５では、制御部３２は、伝言の取得後から第１の時間が経過しているか否かを判別する。第１の時間が経過していない場合、プロセスはステップＳ９０４に戻る。第１の時間が経過している場合、プロセスはステップＳ９０６に進む。 In step S905, the control unit 32 determines whether or not the first time has elapsed since the message was acquired. If the first time has not elapsed, the process returns to step S904. If the first time has elapsed, the process proceeds to step S906.

ステップＳ９０６では、制御部３２は、通信部２３を介して、指定されたユーザの携帯端末１１に向けて伝言を送信する。伝言の送信後、伝言処理は終了する。 In step S906, the control unit 32 transmits a message to the mobile terminal 11 of the designated user via the communication unit 23. After sending the message, the message processing ends.

ステップＳ９０３におけるユーザが携帯端末１１の所有者でないと判別した時に進むステップＳ９０７では、制御部３２は、指定されたユーザの顔の画像を記憶部３１から読出す。顔の画像の読出し後、プロセスはステップＳ９０８に進む。 In step S907, which proceeds when it is determined that the user in step S903 is not the owner of the mobile terminal 11, the control unit 32 reads the image of the face of the designated user from the storage unit 31. After reading the face image, the process proceeds to step S908.

ステップＳ９０８では、制御部３２は、カメラ２８に周辺光景を撮像させる。撮像後、プロセスはステップＳ９０９に進む。 In step S908, the control unit 32 causes the camera 28 to image the peripheral scene. After imaging, the process proceeds to step S909.

ステップＳ９０９では、制御部３２は、ステップＳ９０８において撮像した画像内に、ステップＳ９０７で読出した顔の画像があるか否かを判別する。顔の画像がない場合、プロセスはステップＳ９０８に戻る。顔の画像がある場合、プロセスはステップＳ９１０に進む。 In step S909, the control unit 32 determines whether or not there is a face image read in step S907 in the image captured in step S908. If there is no face image, the process returns to step S908. If there is a face image, the process proceeds to step S910.

ステップＳ９１０では、制御部３２は、伝言をスピーカ２７に出力させる。伝言の出力後、伝言処理は終了する。 In step S910, the control unit 32 outputs a message to the speaker 27. After the message is output, the message processing ends.

次に、本開示において充電台１２の制御部３２が実行する、メッセージ処理について、図１３のフローチャートを用いて説明する。伝言処理は、例えば、マイク２６が検出する音声を制御部３２が伝言であると判別する時、開始する。 Next, the message processing executed by the control unit 32 of the charging stand 12 in the present disclosure will be described with reference to the flowchart of FIG. The message processing starts, for example, when the control unit 32 determines that the voice detected by the microphone 26 is a message.

ステップＳ１０００において、制御部３２は、伝言の内容を解析する。解析後、プロセスはステップＳ１００１に進む。 In step S1000, the control unit 32 analyzes the content of the message. After analysis, the process proceeds to step S1001.

ステップＳ１００１では、制御部３２は、ステップＳ１０００において解析した伝言に関連したメッセージが記憶部３１に記憶されているか否かを判別する。記憶されている場合、プロセスはステップＳ１００２に進む。記憶されていない場合、メッセージ処理は終了する。 In step S1001, the control unit 32 determines whether or not the message related to the message analyzed in step S1000 is stored in the storage unit 31. If stored, the process proceeds to step S1002. If it is not remembered, message processing ends.

ステップＳ１００２では、制御部３２は、ステップＳ１００１において記憶されていることが判別された関連メッセージが、充電台１２の現在の設置場所に対応しているか否か判別する。対応している場合、プロセスはステップＳ１００３に進む。対応していない場合、メッセージ処理は終了する。 In step S1002, the control unit 32 determines whether or not the related message determined to be stored in step S1001 corresponds to the current installation location of the charging stand 12. If so, the process proceeds to step S1003. If it is not supported, message processing ends.

ステップＳ１００３では、制御部３２は、ステップＳ１０００で解析した伝言に関する事項の発生または実行に関係する特定のユーザを判別する。さらに、制御部３２は、特定したユーザの顔画像を記憶部３１から読出す。また、制御部３２は、特定のユーザの行動履歴を分析することにより、伝言に関する事項の発生または実行する時期を想定する。時期の想定後、プロセスはステップＳ１００４に進む。 In step S1003, the control unit 32 determines a specific user involved in the generation or execution of the message-related matter analyzed in step S1000. Further, the control unit 32 reads the face image of the specified user from the storage unit 31. In addition, the control unit 32 analyzes the behavior history of a specific user to assume a time when a matter related to a message is generated or executed. After estimating the timing, the process proceeds to step S1004.

ステップＳ１００４では、制御部３２は、ステップＳ１００３において想定した時期に到達しているか否かを判別する。到達していない場合、プロセスはステップＳ１００４に戻る。到達している場合、プロセスはステップＳ１００５に進む。 In step S1004, the control unit 32 determines whether or not the time assumed in step S1003 has been reached. If not, the process returns to step S1004. If so, the process proceeds to step S1005.

ステップＳ１００５では、制御部３２は、カメラ２８に周辺光景を撮像させる。撮像後、プロセスはステップＳ１００６に進む。 In step S1005, the control unit 32 causes the camera 28 to image the peripheral scene. After imaging, the process proceeds to step S1006.

ステップＳ１００６では、制御部３２は、ステップＳ１００５において撮像した画像内に、ステップＳ１００３で読出した顔の画像があるか否かを判別する。顔の画像がある場合、プロセスはステップＳ１００７に進む。顔の画像がない場合、プロセスはステップＳ１００８に進む。 In step S1006, the control unit 32 determines whether or not the image of the face read in step S1003 is included in the image captured in step S1005. If there is a face image, the process proceeds to step S1007. If there is no face image, the process proceeds to step S1008.

ステップＳ１００７では、制御部３２は、ステップＳ１００１において記憶されていると判別されたメッセージをスピーカ２７に出力させる。出力後、メッセージ処理は終了する。 In step S1007, the control unit 32 causes the speaker 27 to output a message determined to be stored in step S1001. After output, message processing ends.

ステップＳ１００８では、制御部３２は、ステップＳ１００４において、想定した時期に到達したと判別した時から第２の時間が経過しているか否かを判別する。第２の時間が経過していない場合、プロセスはステップＳ１００５に戻る。第２の時間が経過している場合、プロセスはステップＳ１００９に進む。 In step S1008, the control unit 32 determines in step S1004 whether or not a second time has elapsed from the time when it is determined that the expected time has been reached. If the second time has not elapsed, the process returns to step S1005. If the second time has elapsed, the process proceeds to step S1009.

ステップＳ１００９では、制御部３２は、伝言をすべきユーザが充電台１２に把握されている携帯端末１１の所有者であるか否かを判別する。所有者である場合、プロセスはステップＳ１０１０に進む。所有者でない場合、メッセージ処理は終了する。 In step S1009, the control unit 32 determines whether or not the user to whom the message is to be transmitted is the owner of the mobile terminal 11 grasped by the charging stand 12. If you are the owner, the process proceeds to step S1010. If you are not the owner, message processing ends.

ステップＳ１０１０では、制御部３２は、通信部２３を介して、伝言をすべきユーザの携帯端末１１に向けてメッセージを送信する。メッセージの送信後、メッセージ処理は終了する。 In step S1010, the control unit 32 transmits a message to the mobile terminal 11 of the user to be messaged via the communication unit 23. After sending the message, message processing ends.

以上のような構成の本実施形態に係る充電台１２は、携帯端末１１が載置される場合、携帯端末１１に登録されたユーザへの伝言を出力させる。一般的に、外出中の携帯端末１１のユーザは、帰宅後早急に携帯端末１１の充電を開始することが多い。それゆえ、前述の構成の充電台１２によれば、ユーザの帰宅時に当該ユーザ宛の伝言をユーザに報知し得る。このように、充電台１２は、従来の充電台に比べて機能が改善される。 When the mobile terminal 11 is mounted, the charging stand 12 according to the present embodiment having the above configuration outputs a message to the user registered in the mobile terminal 11. In general, a user of a mobile terminal 11 who is out of the office often starts charging the mobile terminal 11 immediately after returning home. Therefore, according to the charging stand 12 having the above-described configuration, the message addressed to the user can be notified to the user when the user returns home. As described above, the function of the charging stand 12 is improved as compared with the conventional charging stand.

また、本実施形態に係る充電台１２は、カメラ２８が撮像する画像に指定されたユーザが含まれる場合、該ユーザへの伝言を出力させる。このような構成により、充電台１２は、携帯端末１１を所有しないユーザにも伝言を報知し得る。このように、充電台１２は、従来の充電台に比べて、より機能が改善される。 Further, when the image captured by the camera 28 includes a designated user, the charging stand 12 according to the present embodiment outputs a message to the user. With such a configuration, the charging stand 12 can notify the message to the user who does not own the mobile terminal 11. As described above, the function of the charging stand 12 is further improved as compared with the conventional charging stand.

また、本実施形態に係る充電台１２は、ユーザへの伝言に関連したメッセージを、ユーザの行動履歴に基づく時期に出力させる。このような構成により、充電台１２は、伝言に関連した事項を、思出させるべき時期にユーザに報知し得る。 Further, the charging stand 12 according to the present embodiment outputs a message related to a message to the user at a time based on the user's action history. With such a configuration, the charging stand 12 can notify the user of a matter related to the message at a time when it should be thought out.

また、本実施形態に係る携帯端末１１は、携帯端末１１に電力を供給する充電台１２の設置された場所に応じた内容で、発話処理および音声認識処理の少なくとも一方を実行する。通常の人間同士の対話では、場所に応じて話題が変わり得る。それゆえ、このような構成により、携帯端末１１は、コミュニケーションシステム１０に、対話における状況に対して、より適切な対話をさせ得る。このように、携帯端末１１では、従来の携帯端末に比べて、機能が改善される。 Further, the mobile terminal 11 according to the present embodiment executes at least one of the utterance processing and the voice recognition processing according to the location where the charging stand 12 for supplying electric power to the mobile terminal 11 is installed. In normal human-to-human dialogue, the topic can change depending on the location. Therefore, with such a configuration, the mobile terminal 11 can cause the communication system 10 to have a more appropriate dialogue with respect to the situation in the dialogue. As described above, the function of the mobile terminal 11 is improved as compared with the conventional mobile terminal.

また、本実施形態に係る携帯端末１１は、充電台１２に載置される場合および充電台１２から離脱する場合に応じた内容で、発話処理および音声認識処理の少なくとも一方を実行する。携帯端末１１の充電台１２への着脱は、ユーザの特定の行動に関連することがある。それゆえ、このような構成により、携帯端末１１は、コミュニケーションシステム１０に、ユーザの特定の行動に対して、より適切な対話をさせ得る。このように、携帯端末１１では、従来の携帯端末に比べて、より機能が改善される。 Further, the mobile terminal 11 according to the present embodiment executes at least one of the utterance processing and the voice recognition processing according to the contents depending on the case where the mobile terminal 11 is mounted on the charging stand 12 and the case where the mobile terminal 11 is detached from the charging stand 12. The attachment / detachment of the mobile terminal 11 to / from the charging stand 12 may be related to a specific behavior of the user. Therefore, with such a configuration, the mobile terminal 11 can cause the communication system 10 to have a more appropriate dialogue with respect to a specific action of the user. As described above, the function of the mobile terminal 11 is further improved as compared with the conventional mobile terminal.

また、本実施形態に係る携帯端末１１は、対話対象のユーザの属性に応じた内容で、発話処理および音声認識処理の少なくとも一方を実行する。通常の人間同士の対話では、性別および世代などの属性によって話題が変わり得る。それゆえ、このような構成により、携帯端末１１は、コミュニケーションシステム１０に、対話対象のユーザに対して、より適切な対話をさせ得る。 Further, the mobile terminal 11 according to the present embodiment executes at least one of the utterance processing and the voice recognition processing with the content according to the attribute of the user to be interacted with. In normal human-to-human dialogue, topics can change depending on attributes such as gender and generation. Therefore, with such a configuration, the mobile terminal 11 can cause the communication system 10 to have a more appropriate dialogue with the user to be interacted with.

また、本実施形態に係る携帯端末１１は、外部情報に応じた内容で、発話処理および音声認識処理の少なくとも一方を実行する。このような構成により、携帯端末１１は、コミュニケーションシステム１０の構成要素として、対話する場所における充電台１２から携帯端末１１の着脱する状況で望まれる外部情報に基づくアドバイスを提供し得る。 Further, the mobile terminal 11 according to the present embodiment executes at least one of the utterance processing and the voice recognition processing according to the contents according to the external information. With such a configuration, the mobile terminal 11 can provide advice based on external information desired in a situation where the mobile terminal 11 is attached / detached from the charging stand 12 at a place where the communication system 10 interacts as a component of the communication system 10.

また、本実施形態に係る充電台１２は、携帯端末１１が載置されている場合、携帯端末１１に発話処理および音声認識処理の少なくとも一方を実行させている。このような構成により、充電台１２は、単体で所定の機能を実行する携帯端末１１とともにユーザとの対話相手になり得る。したがって、充電台１２は、例えば、一人暮らしの高齢者の食事中の対話相手となり、高齢者の孤食を防ぎ得る。このように、充電台１２は、従来の充電台に比べて、機能が改善されている。 Further, the charging stand 12 according to the present embodiment causes the mobile terminal 11 to execute at least one of the utterance processing and the voice recognition processing when the mobile terminal 11 is mounted. With such a configuration, the charging stand 12 can be a dialogue partner with the user together with the mobile terminal 11 that performs a predetermined function by itself. Therefore, the charging stand 12 can be, for example, a dialogue partner during meals for the elderly living alone, and can prevent the elderly from eating alone. As described above, the charging stand 12 has improved functions as compared with the conventional charging stand.

また、本実施形態に係る充電台１２は、携帯端末１１が載置される時、携帯端末１１に発話処理および音声認識処理の少なくとも一方の実行を開始させている。したがって、充電台１２は、携帯端末１１の載置により、煩雑な入力などを必要とすること無く、ユーザとの対話などを開始させ得る。 Further, the charging stand 12 according to the present embodiment causes the mobile terminal 11 to start executing at least one of the utterance processing and the voice recognition processing when the mobile terminal 11 is mounted. Therefore, the charging stand 12 can start a dialogue with the user by mounting the mobile terminal 11 without requiring complicated input or the like.

また、本実施形態に係る充電台１２は、携帯端末１１が離脱する時、携帯端末１１に発話処理及び音声認識処理の少なくとも一方の実行を終了させている。したがって、充電台１２は、携帯端末１１の離脱のみにより、煩雑な入力などを必要とすること無く、ユーザとの対話などを終了させ得る。 Further, the charging stand 12 according to the present embodiment ends the execution of at least one of the utterance processing and the voice recognition processing on the mobile terminal 11 when the mobile terminal 11 leaves. Therefore, the charging stand 12 can end the dialogue with the user by simply leaving the mobile terminal 11 without requiring complicated input or the like.

また、本実施形態に係る充電台１２は、携帯端末１１のディスプレイ１９が発話処理および音声認識処理の少なくとも一方の実行対象のユーザの方向を向くように変動機構２５を駆動する。したがって、充電台１２は、ユーザとの対話時に、コミュニケーションシステム１０を、実際に会話をする人のように、当該ユーザに認識させ得る。 Further, the charging stand 12 according to the present embodiment drives the variable mechanism 25 so that the display 19 of the mobile terminal 11 faces the direction of the user to be executed at least one of the utterance processing and the voice recognition processing. Therefore, the charging stand 12 can make the user recognize the communication system 10 as if it were a person who actually has a conversation when interacting with the user.

また、本実施形態に係る充電台１２は、ユーザとの会話内容を、充電台１２と通信する異なる携帯端末１１間において共有させ得る。このような構成により、充電台１２は、特定のユーザの会話内容を他のユーザに把握させ得る。したがって、充電台１２は、会話内容を遠隔地にいる家族などと共有させ得、家族間のコミュニケーションを円滑化し得る。 Further, the charging stand 12 according to the present embodiment can share the content of the conversation with the user between different mobile terminals 11 communicating with the charging stand 12. With such a configuration, the charging stand 12 can make another user grasp the conversation content of a specific user. Therefore, the charging stand 12 can share the conversation content with a family member in a remote place and facilitate communication between the family members.

また、本実施形態に係る充電台１２は、特定の対象の状態を判断して異常状態である場合に携帯端末１１のユーザに報知する。したがって、充電台１２は、特定の対象を見守りし得る。 Further, the charging stand 12 according to the present embodiment determines the state of a specific target and notifies the user of the mobile terminal 11 when it is in an abnormal state. Therefore, the charging stand 12 can watch over a specific target.

また、本実施形態に係るコミュニケーションシステム１０は、対話対象のユーザに対して、過去の会話内容、発した音声、および充電台１２の設置された場所などに基づいて、発する言葉を決める。このような構成により、コミュニケーションシステム１０は、対話中のユーザの現在の会話内容および過去の会話内容ならびに設置場所に合わせた会話を行い得る。 Further, the communication system 10 according to the present embodiment determines the words to be spoken to the user to be talked about based on the past conversation contents, the voices emitted, the place where the charging stand 12 is installed, and the like. With such a configuration, the communication system 10 can have a conversation according to the current conversation content, the past conversation content, and the installation location of the user during the conversation.

また、本実施形態に係るコミュニケーションシステム１０は、特定のユーザの行動履歴などを学習して、ユーザへのアドバイスを出力する。このような構成により、コミュニケーションシステム１０は、薬を飲むべき時の通知、当該ユーザの好みの食事の提案、当該ユーザの健康のための食事内容の提案、および当該ユーザが継続可能かつ効果的な運動の提案を行うことにより、ユーザの忘却し易いこと、ユーザに未知のことを認識させ得る。 Further, the communication system 10 according to the present embodiment learns the behavior history of a specific user and outputs advice to the user. With such a configuration, the communication system 10 notifies the user when he / she should take medicine, proposes a favorite meal of the user, proposes a meal content for the health of the user, and is sustainable and effective for the user. By proposing an exercise, it is possible for the user to easily forget and to make the user aware of the unknown.

また、本実施形態に係るコミュニケーションシステム１０は、現在位置に関連付けられた情報を報知する。このような構成により、コミュニケーションシステム１０は、ユーザの居住地近辺に特化した地域情報をユーザに教示し得る。 Further, the communication system 10 according to the present embodiment notifies the information associated with the current position. With such a configuration, the communication system 10 can teach the user regional information specialized in the vicinity of the user's place of residence.

本発明を諸図面や実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形や修正を行うことが容易であることに注意されたい。従って、これらの変形や修正は本発明の範囲に含まれることに留意されたい。 Although the present invention has been described with reference to the drawings and examples, it should be noted that those skilled in the art can easily make various modifications and modifications based on the present disclosure. Therefore, it should be noted that these modifications and modifications are included in the scope of the present invention.

例えば、本実施形態において、携帯端末１１の制御部２２が、発話処理、音声認識処理、会話内容の学習、行動履歴の学習および当該行動履歴の学習に基づくアドバイス、ならびに現在位置に関連付けられた情報の報知を実行するが、これらを充電台１２の制御部３２が実行してもよい。充電台１２の制御部３２が実行する構成においては、ユーザとの対話において充電台１２のマイク２６、スピーカ２７、およびカメラ２８を駆動してもよいし、携帯端末１１のマイク１６、スピーカ１７、およびカメラ１８を、通信部２３、１３を介して駆動してもよい。 For example, in the present embodiment, the control unit 22 of the mobile terminal 11 performs utterance processing, voice recognition processing, learning of conversation content, learning of action history, advice based on the learning of the action history, and information associated with the current position. However, the control unit 32 of the charging stand 12 may execute these notifications. In the configuration executed by the control unit 32 of the charging stand 12, the microphone 26, the speaker 27, and the camera 28 of the charging stand 12 may be driven in the dialogue with the user, or the microphone 16 and the speaker 17 of the mobile terminal 11 may be driven. And the camera 18 may be driven via the communication units 23 and 13.

また、本実施形態において、充電台１２の制御部３２が、発話処理および音声認識処理の少なくとも一方の実行の可否の判別、伝言処理、およびメッセージ処理を実行するが、これらの少なくとも一部を携帯端末１１の制御部２２に実行させてもよい。また、本実施形態において、充電台１２の制御部３２が充電台１２の設置された場所を判別するが、充電台１２に載置された携帯端末１１の制御部２２が判別してもよい。 Further, in the present embodiment, the control unit 32 of the charging stand 12 executes determination of whether or not at least one of the utterance processing and the voice recognition processing can be executed, the message processing, and the message processing, but at least a part of them is carried. The control unit 22 of the terminal 11 may execute the execution. Further, in the present embodiment, the control unit 32 of the charging stand 12 determines the location where the charging stand 12 is installed, but the control unit 22 of the mobile terminal 11 mounted on the charging stand 12 may determine the location.

また、本実施形態において、上記変形例を組合わせて、充電台１２の制御部３２が発話処理、音声認識処理、会話内容の学習、行動履歴の学習および当該行動履歴の学習に基づくアドバイス、ならびに現在位置に関連付けられた情報の報知を実行し、かつ携帯端末１１の制御部２２が発話処理および音声認識処理の少なくとも一方の実行の可否を判別してもよい。 Further, in the present embodiment, in combination with the above modified examples, the control unit 32 of the charging stand 12 provides utterance processing, voice recognition processing, conversation content learning, action history learning, and advice based on the action history learning. The information associated with the current position may be notified, and the control unit 22 of the mobile terminal 11 may determine whether or not at least one of the utterance processing and the voice recognition processing can be executed.

また、本実施形態において、携帯端末１１の制御部２２が、登録処理を実行するが、充電台１２の制御部３２が実行してもよい。 Further, in the present embodiment, the control unit 22 of the mobile terminal 11 executes the registration process, but the control unit 32 of the charging stand 12 may execute the registration process.

１０ コミュニケーションシステム
１１ 携帯端末
１２ 充電台
１３ 通信部
１４ 受電部
１５ バッテリ
１６ マイク
１７ スピーカ
１８ カメラ
１９ ディスプレイ
２０ 入力部
２１ 記憶部
２２ 制御部
２３ 通信部
２４ 給電部
２５ 変動機構
２６ マイク
２７ スピーカ
２８ カメラ
２９ 人感センサ
３０ 載置センサ
３１ 記憶部
３２ 制御部 10 Communication system 11 Mobile terminal 12 Charging stand 13 Communication unit 14 Power receiving unit 15 Battery 16 Microphone 17 Speaker 18 Camera 19 Display 20 Input unit 21 Storage unit 22 Control unit 23 Communication unit 24 Power supply unit 25 Fluctuation mechanism 26 Microphone 27 Speaker 28 Camera 29 Human sensor 30 Mounted sensor 31 Storage unit 32 Control unit

Claims (8)

携帯端末が載置される場合、前記携帯端末に登録されたユーザへの伝言を出力させる制御部を備える
充電台。 A charging stand including a control unit that outputs a message to a user registered in the mobile terminal when the mobile terminal is mounted. 請求項１に記載の充電台において、
画像を撮像するカメラを、さらに備え、
前記制御部は、指定されたユーザが前記画像に含まれる場合、該ユーザへの伝言を出力させる
充電台。 In the charging stand according to claim 1,
Equipped with a camera that captures images
The control unit is a charging stand that outputs a message to the designated user when the designated user is included in the image. 請求項１または２に記載の充電台において、
前記制御部は、前記ユーザへの伝言に関連したメッセージを、前記ユーザの行動履歴に基づく時期に出力させる
充電台。 In the charging stand according to claim 1 or 2.
The control unit is a charging stand that outputs a message related to a message to the user at a time based on the user's action history. 充電台に載置される場合、登録されたユーザへの伝言を出力させる制御部を備える
携帯端末。 A mobile terminal equipped with a control unit that outputs a message to a registered user when it is placed on a charging stand. 請求項４に記載の携帯端末において、
前記制御部は、前記ユーザへの伝言に関連したメッセージを、前記ユーザの行動履歴に基づく時期に出力させる
携帯端末。 In the mobile terminal according to claim 4,
The control unit is a mobile terminal that outputs a message related to a message to the user at a time based on the user's action history. 携帯端末と、
前記携帯端末を載置可能な充電台と、を備え、
前記携帯端末および前記充電台のいずれかにおいて、前記充電台に前記携帯端末が載置される場合、前記携帯端末に登録されたユーザへの伝言を出力する
コミュニケーションシステム。 With mobile terminals
A charging stand on which the mobile terminal can be placed is provided.
A communication system that outputs a message to a user registered in the mobile terminal when the mobile terminal is placed on the charging stand in either the mobile terminal or the charging stand. 携帯端末に登録されたユーザへの伝言を取得するステップと、
前記携帯端末が充電台に設置される場合、前記携帯端末に登録されたユーザへの伝言を出力させるステップと、を備える
方法。 Steps to get a message to the user registered on the mobile terminal,
A method comprising, when the mobile terminal is installed on a charging stand, a step of outputting a message to a user registered in the mobile terminal. 携帯端末が充電台に載置される場合、前記携帯端末に登録されたユーザへの伝言を出力するように前記充電台または前記携帯端末を機能させる
プログラム。 A program that causes the charging stand or the mobile terminal to function so as to output a message to a user registered in the mobile terminal when the mobile terminal is placed on the charging stand.
JP2021001684A 2021-01-07 2021-01-07 Portable terminal and method Pending JP2021061636A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021001684A JP2021061636A (en) 2021-01-07 2021-01-07 Portable terminal and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021001684A JP2021061636A (en) 2021-01-07 2021-01-07 Portable terminal and method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017153626A Division JP6883487B2 (en) 2017-07-24 2017-08-08 Charging stand, communication system and program

Publications (1)

Publication Number Publication Date
JP2021061636A true JP2021061636A (en) 2021-04-15

Family

ID=75381516

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021001684A Pending JP2021061636A (en) 2021-01-07 2021-01-07 Portable terminal and method

Country Status (1)

Country Link
JP (1) JP2021061636A (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002057752A (en) * 2000-08-09 2002-02-22 Hitachi Ltd Portable terminal
JP2014063219A (en) * 2012-09-19 2014-04-10 Nakayo Telecommun Inc Information input device and portable terminal
JP2016071248A (en) * 2014-09-30 2016-05-09 シャープ株式会社 Interaction device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002057752A (en) * 2000-08-09 2002-02-22 Hitachi Ltd Portable terminal
JP2014063219A (en) * 2012-09-19 2014-04-10 Nakayo Telecommun Inc Information input device and portable terminal
JP2016071248A (en) * 2014-09-30 2016-05-09 シャープ株式会社 Interaction device

Similar Documents

Publication Publication Date Title
JP7103769B2 (en) Electronic devices, mobile terminals, communication systems, watching methods, and programs
JP6969811B2 (en) Voice response device
JP4595436B2 (en) Robot, control method thereof and control program
US20150162000A1 (en) Context aware, proactive digital assistant
JP6391813B2 (en) Information presentation method and apparatus
US20200410980A1 (en) Interactive electronic apparatus, communication system, method, and program
JP6977811B2 (en) Information processing system and information processing method
US20210232807A1 (en) Information processing system, storage medium, and information processing method
CN106313082B (en) Accompanying robot
WO2019021771A1 (en) Charging stand, mobile terminal, communication system, method, and program
JP6942557B2 (en) Interactive electronics, communication systems, methods, and programs
US20220036897A1 (en) Response processing apparatus, response processing method, and response processing program
JP6883487B2 (en) Charging stand, communication system and program
JP6883485B2 (en) Mobile devices and programs
JP2021061636A (en) Portable terminal and method
KR101298482B1 (en) Context-aware video phone service robot
US11707694B2 (en) Message delivery apparatus and methods
JP6974073B2 (en) Electronics, charging stands, communication systems, methods, and programs
JP6971088B2 (en) Interactive electronics, communication systems, methods, and programs
JP6974058B2 (en) Charging stand, communication system, methods and programs
JP2021064947A (en) Portable terminal and program
JP6783492B1 (en) Telephones, notification systems and computer programs
US10887552B1 (en) Door-knocking for teleconferencing
CN110825911A (en) Content display method and device
KR20200050441A (en) Smart character toy embedded artificiall intelligence function

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210107

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210107

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210830

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210831

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211006

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220308