JP7312061B2 - intercom device - Google Patents

intercom device Download PDF

Info

Publication number
JP7312061B2
JP7312061B2 JP2019159399A JP2019159399A JP7312061B2 JP 7312061 B2 JP7312061 B2 JP 7312061B2 JP 2019159399 A JP2019159399 A JP 2019159399A JP 2019159399 A JP2019159399 A JP 2019159399A JP 7312061 B2 JP7312061 B2 JP 7312061B2
Authority
JP
Japan
Prior art keywords
unit
candidate
response
resident
visitor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019159399A
Other languages
Japanese (ja)
Other versions
JP2021040209A (en
Inventor
慎也 纐纈
勝彦 坂口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aiphone Co Ltd
Original Assignee
Aiphone Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aiphone Co Ltd filed Critical Aiphone Co Ltd
Priority to JP2019159399A priority Critical patent/JP7312061B2/en
Publication of JP2021040209A publication Critical patent/JP2021040209A/en
Application granted granted Critical
Publication of JP7312061B2 publication Critical patent/JP7312061B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Interconnected Communication Systems, Intercoms, And Interphones (AREA)

Description

本発明は、来訪者の呼び出しに対して居住者が応答するインターホン装置に関する。 TECHNICAL FIELD The present invention relates to an intercom device that allows a resident to respond to a visitor's call.

特許文献1は、居住者を呼出して通話する機能を備えた玄関子機と、玄関子機からの呼出に応答する機能を備えた居室親機とを有するインターホンシステムを開示している。 Patent Literature 1 discloses an intercom system having an entrance terminal with a function of calling and talking to a resident and a room master with a function of responding to a call from the entrance terminal.

特開2007-267253号公報JP 2007-267253 A

特許文献1のインターホンシステムでは、来訪者の呼び出しに対して、居住者は直接通話して応答しなければならないため、プライバシーやセキュリティの問題が生じる可能性がある。 In the intercom system of Patent Literature 1, a resident must directly call and respond to a visitor's call, which may cause privacy and security problems.

そこで、本発明は、居住者のプライバシーやセキュリティを確保可能なインターホン装置を提供することを目的とする。 SUMMARY OF THE INVENTION Accordingly, it is an object of the present invention to provide an intercom device capable of ensuring the privacy and security of residents.

上記目的を達成するために、本発明のインターホン装置は、
来訪者が居住者を呼び出して通話するための玄関子機と、前記玄関子機からの呼び出しに居住者が応答するための居室親機と、を備えたインターホン装置であって、
前記居室親機は、
前記来訪者の音声を録音する録音部と、
前記録音部で録音された録音データを記憶する記憶部と、
前記玄関子機からの呼出操作を受けて呼出音の報音を制御する親機制御部と、
を有し、
前記親機制御部は、
前記録音データに基づいて前記音声を要約した要約データを生成し、
前記要約データを再生するとともに、前記要約データに基づいて、応対動作に関する少なくとも一つの応対動作候補を選択して前記居住者に伝達し、
前記少なくとも一つの応対動作候補を前記居住者が選択した場合には、前記玄関子機及び前記居室親機に接続された機器の少なくとも一方に、前記少なくとも一つの応対動作候補に対応する応対動作を実行させる、ように構成されている。
In order to achieve the above object, the intercom device of the present invention includes:
An intercom device comprising an entrance handset for a visitor to call and talk to a resident, and a living room master set for the resident to respond to the call from the entrance handset,
The living room base unit
a recording unit that records the visitor's voice;
a storage unit for storing recorded data recorded by the recording unit;
a base unit control unit that receives a call operation from the entrance cordless handset and controls a ringing tone;
has
The parent device control unit
generating summary data summarizing the voice based on the recorded data;
reproducing the summary data, selecting at least one candidate for a reception action based on the summary data, and transmitting the candidate to the resident;
When the resident selects the at least one candidate for the response action, the response action corresponding to the at least one candidate for the response action is caused to at least one of the devices connected to the entrance slave unit and the room base unit. It is configured to run

上記構成によれば、来訪者の呼出操作があった場合に、来訪者の音声の要約データに基づいて応対動作の候補を居住者に提示し、居住者が選択した応対動作候補に基づいてインターホン装置が応対動作を実行する。そのため、居住者自らが来訪者と直接通話することなく、来訪者に応対することができる。これにより、居住者のプライバシーやセキュリティを確保することができる。 According to the above configuration, when there is a call operation by the visitor, the candidate of the response action is presented to the resident based on the summary data of the voice of the visitor, and the intercom is based on the candidate of the response action selected by the resident. The device performs the response action. Therefore, the resident himself/herself can respond to the visitor without talking to the visitor directly. This ensures the privacy and security of the residents.

また、本発明のインターホン装置において、
前記親機制御部は、過去の応対動作の内容を学習し、前記少なくとも一つの応対動作候補を自動的に選択してもよい。
Further, in the intercom device of the present invention,
The parent device control unit may learn the contents of past response actions and automatically select the at least one candidate response action.

上記構成によれば、簡便な構成で、適切な応対動作候補を選択することができる。 According to the above configuration, it is possible to select an appropriate response operation candidate with a simple configuration.

また、本発明のインターホン装置において、
前記親機制御部は、過去の応対動作の内容を学習し、前記応対動作候補が複数存在する場合に、当該複数の応対動作候補間の優先度に関する情報を付加して前記複数の応対動作候補を前記居住者に伝達してもよい。
Further, in the intercom device of the present invention,
The base unit control unit learns the content of the past response motions, and when there are a plurality of candidates for the response motion, adds information about the priority among the candidates for the plurality of response motions, and may be communicated to the resident.

上記構成によれば、応対動作候補の優先度を付加して居住者に提供することで、居住者の利便性を向上させることができる。 According to the said structure, a resident's convenience can be improved by adding a priority of an answering operation|movement candidate, and providing it to a resident.

また、本発明のインターホン装置において、
前記優先度に関する情報は、前記居室親機のディスプレイに表示される各応対動作候補の表示態様を変更することで表現されてもよい。
Further, in the intercom device of the present invention,
The information regarding the priority may be expressed by changing the display mode of each of the reception action candidates displayed on the display of the room base unit.

上記構成によれば、応対動作候補の優先度をわかりやすく居住者に提供することができる。 According to the above configuration, it is possible to provide the resident with an easy-to-understand priority of the candidate response action.

また、本発明のインターホン装置において、
前記親機制御部は、前記録音データに前記要約データを生成するために必要な情報が含まれていないと判定された場合には、前記来訪者に対して前記必要な情報を要求するためのメッセージを、前記玄関子機から出力させてもよい。
Further, in the intercom device of the present invention,
When it is determined that the recorded data does not contain the information necessary for generating the summary data, the parent device control unit requests the visitor for the necessary information. A message may be output from the door slave unit.

上記構成によれば、要約データを生成するために必要な情報として例えば来訪者の氏名や用件などを来訪者に対して要求することで、適切な要約データを生成することができる。 According to the above configuration, appropriate summary data can be generated by requesting the visitor's name and business as information necessary for generating summary data.

また、本発明のインターホン装置において、
前記居室親機に接続された前記機器は、電気錠又は宅配ボックスであってもよい。
Further, in the intercom device of the present invention,
The device connected to the living room master unit may be an electric lock or a delivery box.

上記構成によれば、居住者が選択した応対動作候補に基づいて、例えば電気錠や宅配ボックスを解錠するような応対動作を実行することができる。 According to the above configuration, a response operation such as unlocking an electric lock or a delivery box can be executed based on the response operation candidate selected by the resident.

また、本発明のインターホン装置において、
前記親機制御部は、前記少なくとも一つの応対動作候補を前記居住者に伝達するために、前記居室親機のディスプレイ又は前記居室親機と通信可能に接続された電子機器のディスプレイに前記少なくとも一つの候補に関する情報を表示する、又は、前記居室親機又は前記電子機器から前記情報を報知するように構成されていてもよい。
Further, in the intercom device of the present invention,
The master device control unit displays the at least one candidate on the display of the room master device or the display of the electronic device communicatively connected to the room master device, in order to transmit the at least one candidate response action to the resident. Information about one candidate may be displayed, or the information may be notified from the room base unit or the electronic device.

上記構成によれば、居室親機やスマートフォンなどを介して応対動作候補を適切に居住者に伝達することができる。 According to the above configuration, it is possible to appropriately transmit the candidate of the response motion to the resident via the room master device, the smartphone, or the like.

本発明のインターホン装置によれば、居住者のプライバシーやセキュリティを確保することができる。 According to the intercom device of the present invention, the privacy and security of residents can be ensured.

本発明の実施形態に係るインターホンシステムの構成図である。1 is a configuration diagram of an interphone system according to an embodiment of the present invention; FIG. インターホン装置の玄関子機及び居室親機の機能ブロック図である。FIG. 3 is a functional block diagram of the entrance slave unit and the living room master unit of the intercom device; 図1のインターホンシステムの動作を説明するためのフローチャートである。FIG. 2 is a flow chart for explaining the operation of the intercom system of FIG. 1; FIG. 居室親機に表示される画面例を示す図である。It is a figure which shows the example of the screen displayed on a living-room main|base station.

以下、本発明の実施形態に係るインターホンシステムの一例について、図面を参照して説明する。
図1は、インターホンシステム100の構成を示す図である。図1に示すように、インターホンシステム100は、インターホン装置1と、インターホン装置1と通信可能に接続される機器、例えば、電気錠4、宅配ボックス5、スマートフォン6、スマートスピーカ7を備えている。
An example of an intercom system according to an embodiment of the present invention will be described below with reference to the drawings.
FIG. 1 is a diagram showing the configuration of an intercom system 100. As shown in FIG. As shown in FIG. 1 , the intercom system 100 includes an intercom device 1 and devices communicatively connected to the intercom device 1 , such as an electric lock 4 , a delivery box 5 , a smartphone 6 and a smart speaker 7 .

インターホン装置1は、玄関子機2と、居室親機3とを備えている。玄関子機2は、来訪者が居住者を呼び出して通話するためなどに用いられる。玄関子機2は、例えば、住戸の玄関等に設置されている。居室親機3は、玄関子機2からの呼び出しに居住者が応答するためなどに用いられる。居室親機3は、例えば、住戸内の居室等に設置されている。玄関子機2と居室親機3とは信号ラインL1を介して通信可能に接続されている。 The intercom device 1 is provided with an entrance slave unit 2 and a living room master unit 3. The entrance cordless handset 2 is used for a visitor to call a resident and make a call. The entrance cordless handset 2 is installed, for example, at the entrance of a dwelling unit. The living room base unit 3 is used for the resident to respond to a call from the entrance cordless handset 2, for example. The living-room base unit 3 is installed, for example, in a living room in a dwelling unit. The entrance slave unit 2 and the living room master unit 3 are communicably connected via a signal line L1.

電気錠4は、インターホン装置1が設置される住戸の玄関ドアに設けられている。電気錠4は、信号ラインL2を介して居室親機3に通信可能に接続されており、居室親機3から送信される制御信号に基づいて玄関ドアを施錠又は解錠する。宅配ボックス5は、宅配物を受け取るためのボックスであり、例えば、住戸の玄関周辺に設置されている。宅配ボックス5は、信号ラインL2を介して居室親機3に通信可能に接続されており、居室親機3から送信される制御信号に基づいて施錠又は解錠可能に構成されている。 The electric lock 4 is provided at the entrance door of the dwelling unit where the intercom device 1 is installed. The electric lock 4 is communicably connected to the living room master unit 3 via the signal line L2, and locks or unlocks the entrance door based on the control signal transmitted from the living room master unit 3. The home delivery box 5 is a box for receiving parcels to be delivered, and is installed, for example, around the entrance of a dwelling unit. The delivery box 5 is communicably connected to the living room master unit 3 via the signal line L2, and is configured to be lockable or unlockable based on a control signal transmitted from the living room master unit 3.

また、スマートフォン6及びスマートスピーカ7は、インターホン装置1の居室親機3と通信可能に接続される電子機器である。スマートフォン6は、住戸の居住者が携帯する端末である。スマートフォン6は、玄関子機2から居室親機3に送信される情報を居室親機3を介して受信することが可能である。また、スマートフォン6は、居室親機3から玄関子機2、電気錠4及び宅配ボックス5等に送信する制御信号を居室親機3を介して送信することが可能である。スマートスピーカ7は、AI(人工知能)を搭載したスピーカであり、例えば、住戸の居間などに設置されている。スマートスピーカ7は、居住者からの話しかけに基づいて居室親機3を介し、玄関子機2、電気錠4及び宅配ボックス5等を操作することが可能である。 Moreover, the smart phone 6 and the smart speaker 7 are electronic devices that are communicably connected to the room main unit 3 of the intercom device 1 . The smart phone 6 is a terminal carried by a resident of the dwelling unit. The smartphone 6 can receive information transmitted from the entrance slave device 2 to the living room master device 3 via the living room master device 3 . Further, the smartphone 6 can transmit control signals to be transmitted from the living room master device 3 to the entrance slave device 2, the electric lock 4, the delivery box 5, and the like via the living room master device 3. The smart speaker 7 is a speaker equipped with AI (artificial intelligence), and is installed, for example, in a living room of a dwelling unit. The smart speaker 7 can operate the entrance slave unit 2, the electric lock 4, the delivery box 5, etc. via the living room main unit 3 based on the voice of the resident.

インターホン装置1は、一戸建ての住宅、あるいはマンション等の集合住宅における各住戸などに設置される。マンションに設置される場合、集合玄関に設置される集合玄関機が玄関子機の機能の全部又は一部を有していてもよい。 The intercom device 1 is installed in a single-family house or each dwelling unit in a collective housing such as a condominium. In the case of installation in an apartment, the collective entrance machine installed at the collective entrance may have all or part of the function of the entrance slave machine.

図2は、インターホン装置1の玄関子機2及び居室親機3の機能ブロック図である。
図2に示すように、玄関子機2は、子機操作部21と、スピーカ22と、マイク23と、カメラ24と、子機制御部25とを備えている。
FIG. 2 is a functional block diagram of the entrance slave unit 2 and the living room master unit 3 of the intercom device 1. As shown in FIG.
As shown in FIG. 2 , the entrance child device 2 includes a child device operation section 21 , a speaker 22 , a microphone 23 , a camera 24 and a child device control section 25 .

子機操作部21は、来訪者が居住者を呼び出しする際に操作する操作部であり、例えば、呼び出しボタン等で構成されている。スピーカ22及びマイク23は、来訪者に向けて居住者側のメッセージ等を出力したり、居住者に向けて来訪者側のメッセージ等を送出したりするための通話部を構成する。カメラ24は、来訪者を撮像するための撮像機器である。子機操作部21、スピーカ22、マイク23及びカメラ24は、子機制御部25に接続されている。 The handset operation unit 21 is an operation unit operated by a visitor when calling a resident, and is composed of, for example, a call button or the like. The speaker 22 and the microphone 23 constitute a communication unit for outputting a message or the like from the resident to the visitor, or transmitting a message or the like from the visitor to the resident. Camera 24 is imaging equipment for imaging a visitor. The handset operation section 21 , the speaker 22 , the microphone 23 and the camera 24 are connected to the handset control section 25 .

子機制御部25は、玄関子機2の各部の動作を制御するための制御部であり、1以上のプロセッサと1以上のメモリを含む少なくとも一つのマイクロコントローラと、トランジスタ等のアクティブ素子及びパッシブ素子を含むその他電子回路を含んでもよい。プロセッサは、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)、GPU(Graphics Processing Unit)及び/又はTPU(Tensor Processing Unit)である。CPUは、複数のCPUコアによって構成されてもよい。GPUは、複数のGPUコアによって構成されてもよい。メモリは、ROM(Read Only Memory)と、RAM(Random Access Memory)を含む。ROMには、玄関子機制御プログラムが記憶されてもよい。RAMには、玄関子機制御プログラムが一時的に記憶されてもよい。プロセッサは、記憶装置又はROMに記憶された制御プログラムから指定されたプログラムをRAM上に展開し、RAMとの協働で各種処理を実行するように構成されてもよい。また、子機制御部25は、ASIC(Application Specific Integrated Circuit)やFPGA(Field-Programammable Gate Array)等の集積回路(ハードウェア資源)によって構成されてもよい。さらに、子機制御部25は、少なくとも一つのマイクロコントローラと集積回路との組み合わせによって構成されてもよい。子機制御部25は、信号ラインL1を介して居室親機3との間で信号の送受信を行う。 The slave unit control unit 25 is a control unit for controlling the operation of each unit of the entrance slave unit 2, and includes at least one microcontroller including one or more processors and one or more memories, active elements such as transistors, and passive elements. Other electronic circuits containing the elements may also be included. The processor is, for example, a CPU (Central Processing Unit), an MPU (Micro Processing Unit), a GPU (Graphics Processing Unit) and/or a TPU (Tensor Processing Unit). The CPU may be composed of multiple CPU cores. A GPU may consist of multiple GPU cores. The memory includes ROM (Read Only Memory) and RAM (Random Access Memory). The ROM may store a porch slave unit control program. The RAM may temporarily store the entrance slave unit control program. The processor may be configured to expand on the RAM a program specified from the control program stored in the storage device or the ROM, and execute various processes in cooperation with the RAM. Further, the slave device control unit 25 may be configured by an integrated circuit (hardware resource) such as ASIC (Application Specific Integrated Circuit) or FPGA (Field-Programmable Gate Array). Further, the slave device control section 25 may be configured by a combination of at least one microcontroller and an integrated circuit. The slave unit control unit 25 transmits and receives signals to and from the living room master unit 3 via the signal line L1.

居室親機3は、親機操作部31と、スピーカ32と、マイク33と、録音部34と、記憶部35と、ディスプレイ36と、親機制御部37とを備えている。親機制御部37は、要約データ生成部41と、応対動作候補決定部42とを少なくとも有している。 The living room master unit 3 includes a master unit operation unit 31 , a speaker 32 , a microphone 33 , a recording unit 34 , a storage unit 35 , a display 36 and a master unit control unit 37 . The parent device control unit 37 has at least a summary data generation unit 41 and a reception action candidate determination unit 42 .

親機操作部31は、来訪者からの呼び出しに対して居住者が応対する際に操作する操作部である。親機操作部31を操作することにより、例えば、来訪者との通話を可能にしたり、来訪者に対する応対動作の候補を選択したり、玄関ドアの電気錠4あるいは宅配ボックス5を解錠又は施錠することが可能である。親機操作部31は、例えば、タッチスクリーン式のディスプレイ36上に表示されるタッチボタン、あるいは居室親機3の筐体上に設けられた押下式のボタンで構成されている。 The base unit operation unit 31 is an operation unit operated by the resident when responding to a call from a visitor. By operating the base unit operation unit 31, for example, it is possible to make a call with a visitor, select a candidate for a response action for the visitor, unlock or lock the electric lock 4 of the entrance door or the delivery box 5. It is possible to The base unit operation unit 31 is composed of, for example, touch buttons displayed on a touch screen type display 36 or push-down buttons provided on the housing of the living room base unit 3 .

スピーカ32及びマイク33は、居住者に向けて来訪者側のメッセージ等を出力したり、来訪者に向けて居住者側のメッセージ等を送出したりするための通話部を構成する。 The speaker 32 and the microphone 33 constitute a communication unit for outputting a visitor's message or the like to the resident or transmitting a resident's side message or the like to the visitor.

録音部34は、玄関子機2のマイク23に入力されて居室親機3に送信される来訪者の音声を録音するように構成されている。 The recording unit 34 is configured to record the visitor's voice that is input to the microphone 23 of the entrance slave unit 2 and transmitted to the living room master unit 3 .

記憶部35には、録音部34で録音された録音データ(例えば来訪者の発話による音声)や、玄関子機2のカメラ24により撮像された撮像データ(例えば来訪者の映像)等が記憶される。また、記憶部35には、要約データ生成部41によって生成される要約データが記憶される。また、記憶部35には、来訪者に向けて送信される居住者側のメッセージ等が記憶されている。送信されるメッセージには、例えば、来訪者に対して来訪者名を名乗らせるためのメッセージと、来訪者の用件を伺うメッセージ等を含む初期メッセージが含まれる。また、例えば、初期メッセージに対して来訪者が発するメッセージ中に必要な情報が含まれていないときに、必要な情報を要求する要求メッセージが含まれる。また、例えば、来訪者に対する応対動作が居住者によって選択されたとき当該応対動作を実行させるための実行メッセージが含まれる。また、例えば、来訪者からの呼び出しに対して居住者が応対しない(応対できない)場合に送信される非応対メッセージが含まれる。また、記憶部35には、来訪者別(宅配業者、セールス、友人等)に準備された複数の応対動作の候補が記憶されている。また、記憶部35には、居住者の友人の名前や顔に関する情報が記憶されていてもよい。 The storage unit 35 stores recorded data recorded by the recording unit 34 (for example, voice of the visitor), imaging data (for example, video of the visitor) captured by the camera 24 of the entrance cordless handset 2, and the like. be. The storage unit 35 also stores summary data generated by the summary data generation unit 41 . In addition, the storage unit 35 stores messages and the like sent from residents to visitors. The transmitted message includes, for example, a message for asking the visitor to give his/her name and an initial message including a message asking about the visitor's business. Further, for example, a request message for requesting necessary information is included when the necessary information is not contained in the message issued by the visitor in response to the initial message. Further, for example, an execution message is included for executing a response action for a visitor when the response action is selected by the resident. Also includes, for example, a non-response message sent when a resident does not (cannot) answer a call from a visitor. In addition, the storage unit 35 stores a plurality of candidate response actions prepared for each visitor (courier, salesperson, friend, etc.). The storage unit 35 may also store information about the names and faces of friends of the residents.

ディスプレイ36には、例えば、玄関子機2のカメラ24で撮像された来訪者の映像が表示される。また、ディスプレイ36には、例えば、親機制御部37の要約データ生成部41によって生成される要約データが文字情報として表示される。さらに、ディスプレイ36には、例えば、親機制御部37の応対動作候補決定部42によって選択される応対動作の候補が文字情報として表示される。 The display 36 displays, for example, an image of the visitor captured by the camera 24 of the entrance slave device 2 . The display 36 also displays, for example, summary data generated by the summary data generation section 41 of the parent device control section 37 as character information. Further, on the display 36, for example, candidates for the response action selected by the response action candidate determination section 42 of the master device control section 37 are displayed as character information.

親機制御部37は、居室親機3の各部の動作を制御するための制御部であり、1以上のプロセッサと1以上のメモリを含む少なくとも一つのマイクロコントローラと、トランジスタ等のアクティブ素子及びパッシブ素子を含むその他電子回路を含んでもよい。プロセッサは、例えば、CPU、MPU、GPU及び/又はTPUである。CPUは、複数のCPUコアによって構成されてもよい。GPUは、複数のGPUコアによって構成されてもよい。メモリは、ROMと、RAMを含む。ROMには、居室親機制御プログラムが記憶されてもよい。RAMには、居室親機制御プログラムが一時的に記憶されてもよい。プロセッサは、記憶装置又はROMに記憶された居室親機制御プログラムから指定されたプログラムをRAM上に展開し、RAMとの協働で各種処理を実行するように構成されてもよい。また、親機制御部37は、ASICやFPGA等の集積回路(ハードウェア資源)によって構成されてもよい。さらに、親機制御部37は、少なくとも一つのマイクロコントローラと集積回路との組み合わせによって構成されてもよい。 The master unit control unit 37 is a control unit for controlling the operation of each unit of the living room master unit 3, and includes at least one microcontroller including one or more processors and one or more memories, active elements such as transistors, and passive elements. Other electronic circuits containing the elements may also be included. A processor is, for example, a CPU, MPU, GPU and/or TPU. The CPU may be composed of multiple CPU cores. A GPU may consist of multiple GPU cores. The memory includes ROM and RAM. A room base unit control program may be stored in the ROM. The room master unit control program may be temporarily stored in the RAM. The processor may be configured to develop on the RAM a program specified by the room main unit control program stored in the storage device or ROM, and execute various processes in cooperation with the RAM. Also, the parent device control unit 37 may be configured by an integrated circuit (hardware resource) such as an ASIC or FPGA. Furthermore, the parent device control unit 37 may be configured by a combination of at least one microcontroller and an integrated circuit.

親機操作部31、スピーカ32、マイク33、録音部34、記憶部35及びディスプレイ36は、親機制御部37に接続されている。親機制御部37は、接続されているこれら各部の動作を制御する。また、親機制御部37は、信号ラインL1を介して玄関子機2との間で信号の送受信を行う。また、親機制御部37は、信号ラインL2(図1参照)を介して電気錠4及び宅配ボックス5との間で信号の送受信を行う。 The base unit operation unit 31 , speaker 32 , microphone 33 , recording unit 34 , storage unit 35 and display 36 are connected to base unit control unit 37 . The parent device control section 37 controls the operations of these connected sections. Further, the parent device control unit 37 transmits and receives signals to and from the entrance child device 2 via the signal line L1. Further, the master device control unit 37 transmits and receives signals to and from the electric lock 4 and the delivery box 5 via the signal line L2 (see FIG. 1).

例えば、親機制御部37の要約データ生成部41は、記憶部35に記憶された録音データに基づいて、来訪者が発話した音声の内容を要約した要約データを生成する。また、親機制御部37の応対動作候補決定部42は、要約データ生成部41によって生成された要約データに基づいて、居住者が現来訪者に対して応対する応対動作の候補を選択する。また、応対動作候補決定部42は、各来訪者に対して居住者が過去に選択した応対動作の内容を学習し、現来訪者に対する応対動作の候補を選択する。 For example, the summary data generation unit 41 of the parent device control unit 37 generates summary data summarizing the content of the voice uttered by the visitor based on the recorded data stored in the storage unit 35 . Further, the reception action candidate determination section 42 of the parent device control section 37 selects candidates for the reception action for the resident to respond to the current visitor based on the summary data generated by the summary data generation section 41 . Further, the reception action candidate determination unit 42 learns the content of the reception action selected by the resident in the past for each visitor, and selects a candidate for the reception action for the current visitor.

また、親機制御部37は、要約データ生成部41によって生成された要約データ、応対動作候補決定部42によって選択された応対動作の候補を、居住者に伝達する。また、親機制御部37は、応対動作候補決定部42によって選択された応対動作の候補の中から所定の応対動作の候補が居住者によって特定された場合、特定された応対動作の候補に対応する応対動作を、玄関子機2、電気錠4、宅配ボックス5等に実行させる。 In addition, the master device control unit 37 transmits the summary data generated by the summary data generation unit 41 and the candidate of the response motion selected by the response motion candidate determination unit 42 to the resident. Further, when the resident specifies a candidate for a predetermined response motion from among the candidates for the response motion selected by the candidate for the response motion selected by the candidate determination unit 42 for the response motion, the master device control unit 37 responds to the candidate for the specified response motion. The reception operation to be performed is executed by the entrance cordless handset 2, the electric lock 4, the delivery box 5, and the like.

(第一動作例:来訪者が宅配業者の場合)
次に、図3及び図4を参照してインターホンシステム100の第一動作例について説明する。
図3は、インターホンシステム100の第一動作例の動作を説明するためのフローチャートである。図4は、居室親機3のディスプレイ36に表示される表示画面の一例を示す図である。
なお、本動作例では、宅配業者(来訪者)が荷物を配達に訪れた場合について説明する。
(First operation example: when the visitor is a home delivery company)
Next, a first operation example of the intercom system 100 will be described with reference to FIGS. 3 and 4. FIG.
FIG. 3 is a flowchart for explaining the operation of the intercom system 100 in the first operation example. FIG. 4 is a diagram showing an example of a display screen displayed on the display 36 of the living room master device 3. As shown in FIG.
In this operation example, a case where a home delivery company (visitor) visits to deliver a package will be described.

宅配業者により玄関子機2の呼び出しボタンが押下されると(ステップS10)、子機制御部25は、信号ラインL1を介して呼出信号を居室親機3に送信する。 When the home delivery company presses the call button of the entrance slave unit 2 (step S10), the slave unit control unit 25 transmits a call signal to the living room master unit 3 via the signal line L1.

玄関子機2から呼出信号を受信すると、居室親機3の親機制御部37は、記憶部35から初期メッセージとして、例えば、「どちら様ですか。ご用件は何ですか。」というメッセージを読み出す。なお、この段階では、親機制御部37は、スピーカ32から居住者に向けての呼出音をまだ報音させなくてもよい。親機制御部37は、記憶部35から読み出された初期メッセージを、信号ラインL1を介して玄関子機2へ送信する。 When the call signal is received from the entrance slave unit 2, the base unit control unit 37 of the living room base unit 3 receives an initial message from the storage unit 35, for example, "Who are you? What is your business?" read out. Note that, at this stage, the base unit control unit 37 does not have to make the ringing sound from the speaker 32 toward the resident yet. Base unit control unit 37 transmits the initial message read from storage unit 35 to entrance slave unit 2 via signal line L1.

居室親機3から初期メッセージを受信すると、玄関子機2の子機制御部25は、スピーカ22から宅配業者に向けて、受信した初期メッセージ「どちら様ですか。ご用件は何ですか。」を出力させる(ステップS11)。初期メッセージは、上述のように来訪者に氏名と用件を伺うための音声案内である。この場合、メッセージとして実際の人間の声を出力する方が自然なコミュニケーションになりやすいが、来訪者が居住者から応答があったと勘違いしてそのまま会話を始めようとする可能性がある。このため、初期メッセージは、機械により合成された音声で応答していることが分かる音声メッセージであることが望ましい。 When the initial message is received from room base unit 3, handset control unit 25 of entrance handset 2 transmits the received initial message from speaker 22 to the home delivery company, "Who are you? What is your order? ' is output (step S11). The initial message is voice guidance for asking the visitor for his/her name and purpose as described above. In this case, outputting an actual human voice as a message tends to result in more natural communication, but there is a possibility that the visitor may mistakenly think that a resident has responded and try to start a conversation. For this reason, it is desirable that the initial message be a voice message that is understood to be answered by a machine-synthesized voice.

子機制御部25は、初期メッセージの出力開始に伴って、カメラ24により宅配業者の映像の撮像を開始させる(ステップS12)。そして、子機制御部25は、撮像された宅配業者の撮像データを、信号ラインL1を介して居室親機3へ送信する。 The handset control unit 25 causes the camera 24 to start capturing an image of the home delivery company along with the start of the output of the initial message (step S12). Then, slave unit control unit 25 transmits the imaged image data of the home delivery company to living room master unit 3 via signal line L1.

また、子機制御部25は、初期メッセージの出力が終了すると、マイク23を作動させて宅配業者の音声の収集を開始させる。子機制御部25は、収集された音声データを、居室親機3へ送信する。なお、宅配業者の音声の収集は宅配業者の映像の撮像と同様に、初期メッセージの出力開始に伴って開始させてもよい。 Further, when the output of the initial message is finished, the handset control unit 25 activates the microphone 23 to start collecting the speech of the home delivery company. The slave unit control unit 25 transmits the collected voice data to the living room master unit 3 . It should be noted that the collection of the voice of the home delivery company may be started along with the start of the output of the initial message in the same way as the imaging of the video of the home delivery company.

玄関子機2から宅配業者の撮像データを受信すると、親機制御部37は、記憶部35に当該受信された宅配業者の撮像データを保存させる。 Upon receiving the imaged data of the home delivery company from the entrance slave device 2, the base unit control unit 37 causes the storage unit 35 to store the received imaged data of the home delivery company.

また、玄関子機2から宅配業者の音声データを受信すると、親機制御部37は、録音部34に当該受信された音声データの録音を開始させる(ステップS13)。録音部34によって録音された録音データは、記憶部35に保存される。 Further, when voice data of the home delivery company is received from the entrance slave device 2, the master device control section 37 causes the recording section 34 to start recording the received voice data (step S13). Recorded data recorded by the recording unit 34 is stored in the storage unit 35 .

親機制御部37は、記憶部35に保存された録音データ中に要約データを生成するために必要な情報(例えば、来訪者の氏名(社名を含む)又は用件など)が含まれているか否か判定する(ステップS14)。 The master unit control unit 37 checks whether the recorded data stored in the storage unit 35 contains information necessary for generating summary data (for example, the name of the visitor (including the company name) or the business subject). It is determined whether or not (step S14).

ステップS14において、録音データ中に氏名又は用件などの必要な情報が含まれていないと判定された場合(ステップS14のNo)、親機制御部37は、必要な情報を要求する要求メッセージ、例えば、「お名前とご用件をお願いいたします」というメッセージを記憶部35から読み出し、玄関子機2へ送信する。 In step S14, if it is determined that the recorded data does not contain necessary information such as a name or business (No in step S14), the master unit control unit 37 sends a request message requesting necessary information, For example, it reads a message "Your name and business, please" from the storage unit 35 and transmits it to the entrance slave unit 2 .

居室親機3から要求メッセージを受信すると、子機制御部25は、スピーカ22から宅配業者に向けて当該受信された要求メッセージを出力させる(ステップS15)。 Upon receiving the request message from the living room base unit 3, the slave unit control unit 25 outputs the received request message from the speaker 22 to the home delivery company (step S15).

要求メッセージが玄関子機2から出力されると、ステップS13に戻って居室親機3の録音部34によって音声データを録音した後に、ステップS14で、親機制御部37は、録音データ中に氏名又は用件などの必要な情報が含まれているかを再び判定する。 When the request message is output from the entrance slave unit 2, the process returns to step S13, and after voice data is recorded by the recording unit 34 of the living room master unit 3, in step S14, the master unit control unit 37 adds the name in the recorded data. Alternatively, it is determined again whether necessary information such as business is included.

一方、ステップS14において、録音データ中に氏名又は用件などの必要な情報が含まれていると判定された場合(ステップS14のYes)、親機制御部37の要約データ生成部41は、当該録音データに基づいて、来訪者の音声を要約した要約データを生成する(ステップS16)。要約データ生成部41によって生成された要約データは、記憶部35に記憶される。 On the other hand, if it is determined in step S14 that the recording data contains necessary information such as the name or the subject (Yes in step S14), summary data generation section 41 of master device control section 37 Summarized data summarizing the voice of the visitor is generated based on the recorded data (step S16). The summary data generated by the summary data generation section 41 is stored in the storage section 35 .

要約データ生成部41は、既知のアルゴリズムを用いて録音データから要約データを生成することができる。例えば、要約データ生成部41は、録音データ(来訪者の生音声)から、挨拶や復唱などの不要な語句を削除したり、重要な語句を抽出したり、学習データに基づく語句の変換を行ったりして、所定の規則に沿った要約データを生成する。 The summary data generator 41 can generate summary data from the recorded data using a known algorithm. For example, the summary data generator 41 deletes unnecessary phrases such as greetings and repetitions from the recorded data (visitor's raw voice), extracts important phrases, and converts phrases based on learning data. and generate summary data according to a predetermined rule.

本動作例では、宅配業者が居住者のメッセージに対して「X業者の佐藤です。お荷物をお届けに参りました。」と発話した録音データが収集されたとする。当該録音データ中には、要約データを生成するために必要な情報(氏名、用件等)が含まれている。このため、ステップS16において、要約データ生成部41は、録音データ「X業者の佐藤です。お荷物をお届けに参りました。」に基づいて、例えば「宅配業者様が荷物を持ってきました。」という要約データを生成する。 In this operation example, it is assumed that the recording data of the home delivery company's utterance of "This is Sato from X company. I have come to deliver the package" in response to the resident's message is collected. The recorded data includes information (name, subject, etc.) necessary for generating summary data. Therefore, in step S16, the summary data generation unit 41 generates, for example, "The home delivery company has .” is generated.

次に、親機制御部37の応対動作候補決定部42は、要約データ生成部41によって生成された要約データに基づいて、宅配業者が荷物を届けに来ていると判定する。そこで、応対動作候補決定部42は、居住者が宅配業者に対して応対する応対動作の候補を、記憶部35に予め準備されている複数の候補パターンの中から選択する(ステップS17)。 Next, based on the summary data generated by the summary data generation section 41, the response operation candidate determination section 42 of the master device control section 37 determines that the home delivery company has come to deliver the package. Accordingly, the response motion candidate determination unit 42 selects candidates for the response motion for the resident to respond to the home delivery company from a plurality of candidate patterns prepared in advance in the storage unit 35 (step S17).

ここで、応対動作候補決定部42による応対動作候補の選択は、例えば、居住者が各来訪者(宅配業者、セールス、友人等)に対してどのような応対動作を取っていたか等、過去の応対動作の内容を学習して選択するようにしてもよい。具体的には、応対動作候補決定部42は、記憶部35等に記憶されているデータを参照して、来訪者の来訪時間や、応対する居住者の属性(大人、子供、高齢者など)や、セールスの種類等の違いによって、過去にどのような応対動作が取られていたかを学習し、その学習の結果に基づいて応対動作候補を選択してもよい。また、親機制御部37は、来訪者の撮像データに基づいて顔認証を行い、その認証結果を応対動作候補の選択に利用してもよい。 Here, the selection of the candidate for the response motion by the candidate for the response motion determination unit 42 is based on the past behavior such as what kind of response the resident took to each visitor (home delivery company, sales person, friend, etc.). It is also possible to learn the content of the response operation and make a selection. Specifically, the response motion candidate determination unit 42 refers to the data stored in the storage unit 35 or the like, and determines the visiting time of the visitor and the attribute of the resident who responds (adult, child, elderly, etc.). Alternatively, it is also possible to learn what kind of response actions were taken in the past depending on the difference in the type of sales, etc., and select a candidate response action based on the learning result. Further, the master unit control section 37 may perform face authentication based on the imaging data of the visitor, and use the authentication result for selecting the candidate for the reception action.

本動作例では、宅配業者に対する応対動作候補として、例えば、居住者は宅配業者と直接通話せずに、荷物を宅配ボックスに入れてもらうという候補と、宅配業者から居住者が直接荷物を受け取るという候補と、の2つが選択されたとする。 In this operation example, the candidates for the response action to the delivery company are, for example, a candidate for the resident to have the package put in the delivery box without calling the delivery company directly, and a candidate for the resident to receive the package directly from the delivery company. It is assumed that two candidates are selected.

親機制御部37は、例えばこの段階で、宅配業者からの呼出音「ピンポン」をスピーカ32から報音させるとともに、撮像されている宅配業者の映像をディスプレイ36に表示させる。また、親機制御部37は、図4に示すように、宅配業者の映像Wに加えて、要約データ生成部41によって生成された要約データ51と、応対動作候補決定部42によって選択された2つの応対動作候補52,53をディスプレイ36上に文字情報として表示させる(ステップS18)。要約データ51としては、例えば、「宅配業者様が荷物を持ってきました。」と表示される。第一応対動作候補52としては、例えば、「宅配ボックスに入れてもらう。」と表示される。また、第二応対動作候補53としては、例えば、「直接受け取る。」と表示される。親機制御部37は、ディスプレイ36に表示された要約データ51の内容をスピーカ32から音声として再生させてもよい。 At this stage, for example, the base unit control unit 37 causes the speaker 32 to sound a ringing tone “ping-pong” from the home delivery company, and causes the display 36 to display an image of the home delivery company. Further, as shown in FIG. 4, in addition to the image W of the home delivery company, the master unit control unit 37 also includes the summary data 51 generated by the summary data generation unit 41 and the 2 selected by the reception operation candidate determination unit 42. The two answering action candidates 52 and 53 are displayed as character information on the display 36 (step S18). As the summary data 51, for example, "A parcel has been brought by the home delivery company." As the first response action candidate 52, for example, "Have it delivered to the home delivery box" is displayed. Further, as the second response operation candidate 53, for example, "receive directly" is displayed. The parent device control unit 37 may reproduce the contents of the summary data 51 displayed on the display 36 as audio from the speaker 32 .

親機制御部37は、第一応対動作候補52「宅配ボックスに入れてもらう。」と第二応対動作候補53「直接受け取る。」とをディスプレイ36に表示するに際し、過去の応対動作の学習に基づいて、応対動作候補間に優先度に関する情報を付加してもよい。例えば、親機制御部37は、荷物の配達時間に基づいて、この時間帯であれば居住者は荷物を宅配ボックスに入れてもらうことが多いと判定した場合には、優先度の高い応対動作候補52の表示を優先度の低い応対動作候補53の表示よりも大きく表示するようにしてもよい。また、例えば、優先度の高い応対動作候補52を色付き表示あるいは点滅表示するようにしてもよい。 When displaying on the display 36 the first response action candidate 52 "Have them put in the delivery box" and the second response action candidate 53 "Receive directly." Based on this, information regarding the priority may be added between the candidate response actions. For example, when the base unit control unit 37 determines, based on the delivery time of the parcel, that the resident often has the parcel put in the home delivery box during this time period, the high-priority response operation is performed. The display of the candidates 52 may be displayed larger than the display of the reception operation candidates 53 having a lower priority. Further, for example, the candidate response operation 52 having a high priority may be displayed in color or blinked.

次に、親機制御部37は、ディスプレイ36に表示された応対動作候補52,53のいずれかが居住者によって選択されたか否か判定する(ステップS19)。 Next, master unit control unit 37 determines whether or not one of response action candidates 52 and 53 displayed on display 36 has been selected by the resident (step S19).

ステップS19において、応対動作候補52,53のうち第一応対動作候補52が選択されたと判定された場合(ステップS19のYes)、親機制御部37は、第一応対動作候補52「宅配ボックスに入れてもらう。」に対応する応対動作を実行する(ステップS20)。具体的には、親機制御部37は、宅配ボックス5を解錠させる。また、親機制御部37は、応対動作を実行させるための実行メッセージを記憶部35から読み出して玄関子機2に送信する。この場合の実行メッセージは、例えば、「宅配ボックスを解錠しましたので荷物を入れてから施錠してください。」である。 If it is determined in step S19 that the first response operation candidate 52 has been selected from among the response operation candidates 52 and 53 (Yes in step S19), the base unit control unit 37 selects the first response operation candidate 52 "in the delivery box". Please let me in." is performed (step S20). Specifically, master unit control unit 37 unlocks delivery box 5 . In addition, the base unit control unit 37 reads out an execution message for executing a reception operation from the storage unit 35 and transmits the execution message to the entrance slave unit 2 . The execution message in this case is, for example, "The delivery box has been unlocked. Please lock it after putting in the package."

居室親機3から第一応対動作候補52に対応する実行メッセージを受信すると、子機制御部25は、スピーカ22から宅配業者に向けて「宅配ボックスを解錠しましたので荷物を入れてから施錠してください。」と出力させる。なお、玄関子機2が、ディスプレイ(不図示)を備えている場合には、実行メッセージを当該ディスプレイに表示させてもよい。 When receiving the execution message corresponding to the first response action candidate 52 from the living room base unit 3, the slave unit control unit 25 sends a message from the speaker 22 to the delivery company, saying, "The delivery box has been unlocked. please." is output. If the entrance slave device 2 has a display (not shown), the execution message may be displayed on the display.

また、ステップS19において、応対動作候補52,53のうち第二応対動作候補53が選択されたと判定された場合(ステップS19のYes)、親機制御部37は、第二応対動作候補53「直接受け取る。」に対応する応対動作を実行する。具体的には、居住者が宅配業者に直接応対することになるため、親機制御部37は、居住者が直接応対する際の実行メッセージを記憶部35から読み出して玄関子機2へ送信する。この場合の実行メッセージは、例えば、「受け取りに行きますので、少しお待ちください。」である。 Further, in step S19, when it is determined that the second candidate response motion 53 has been selected from among the candidate response motions 52 and 53 (Yes in step S19), the base unit control unit 37 selects the second candidate response motion 53 "directly receive." is executed. Specifically, since the resident directly responds to the home delivery company, the base unit control unit 37 reads out the execution message for when the resident directly responds from the storage unit 35 and transmits it to the entrance slave unit 2. . The execution message in this case is, for example, "I'm going to pick it up, so please wait a moment."

居室親機3から第二応対動作候補53に対応する実行メッセージを受信すると、子機制御部25は、スピーカ22から宅配業者に向けて「受け取りに行きますので、少しお待ちください。」と出力させる。 When receiving the execution message corresponding to the second answering action candidate 53 from the living room base unit 3, the slave unit control unit 25 causes the speaker 22 to output to the home delivery company, "I will go to pick it up, so please wait a moment." .

一方、ステップS19において、応対動作候補52,53のいずれも選択されないと判定された場合(ステップS19のNo)、親機制御部37は、居住者が応対できない(応対しない)ことを報知するための非応対メッセージを記憶部35から読み出して玄関子機2へ送信する。例えば、呼出音「ピンポン」が報音されてから所定時間(例えば30秒間、又は60秒間)、居住者からの対応がなかったとき、親機制御部37は、応対動作候補52,53が選択されないと判定する。非応対メッセージは、例えば、「今は応対できませんので、お引き取りください。」である。 On the other hand, when it is determined in step S19 that none of the response motion candidates 52 and 53 is selected (No in step S19), the base unit control unit 37 notifies that the resident cannot respond (does not respond). No response message is read from the storage unit 35 and transmitted to the entrance slave unit 2.例文帳に追加For example, when there is no response from the resident for a predetermined time (for example, 30 seconds or 60 seconds) after the ringing tone "ping-pong" is sounded, the base unit control unit 37 selects the response operation candidates 52 and 53. determined not to. The non-response message is, for example, "I am unable to respond at this time, so please take over."

居室親機3から非応対メッセージを受信すると、子機制御部25は、スピーカ22から宅配業者に向けて「今は応対できませんので、お引き取りください。」と出力させる(ステップS21)。
なお、本動作例のように来訪者が宅配業者であるときは、ステップS19において応対動作候補52,53が選択されないと判定された場合、宅配ボックス5に荷物を入れてもらうための応対動作(第一応対動作候補52)が選択され、スピーカ22から実行メッセージ「宅配ボックスを解錠しましたので荷物を入れてから施錠してください。」を出力するようにしてもよい。
Upon receiving the non-response message from room base unit 3, slave unit control unit 25 outputs, through speaker 22, to the home delivery company, "We are unable to respond at this time, so please pick up." (step S21).
Note that when the visitor is a home delivery company as in this operation example, if it is determined in step S19 that the candidates 52 and 53 are not selected, the response operation ( The first response operation candidate 52) may be selected, and an execution message "The home delivery box has been unlocked. Please put the package in and then lock it."

ステップS20で応対動作が実行された場合、あるいはステップS21で非応対メッセージが出力された場合には、宅配業者に対する応対が完了したと判定され、映像の録画及び音声の録音が終了され(ステップS22)、処理が終了する。 If the response operation is executed in step S20, or if a non-response message is output in step S21, it is determined that response to the home delivery company has been completed, and video recording and audio recording are terminated (step S22). ), the process ends.

なお、上述する動作例では、要約データに基づく応対動作の候補が選択された後に呼出音「ピンポン」が報音され、来訪者の映像が表示されているが、この例に限られない。例えば、来訪者の呼び出しボタンの押下に伴って、スピーカ32から呼出音「ピンポン」を報音させ、カメラ24による撮像開始に伴ってディスプレイ36に映像を表示させるようにしてもよい。また、ディスプレイ36への映像の表示に合わせて、来訪者が発話する音声をスピーカ32から出力させるようにしてもよい。 In the operation example described above, after the candidate for the response operation based on the summary data is selected, the ringing tone "ping-pong" is sounded and the image of the visitor is displayed, but the present invention is not limited to this example. For example, when the call button of the visitor is pressed, the speaker 32 may sound a ringing tone “ping-pong”, and when the camera 24 starts imaging, an image may be displayed on the display 36 . In addition, the sound uttered by the visitor may be output from the speaker 32 in accordance with the image displayed on the display 36 .

また、上述する動作例では、来訪者が宅配業者の場合について説明したが、例えば、来訪者がセールスあるいは友人の場合にはインターホンシステム100は、以下のように動作する。 In the above operation example, the case where the visitor is a home delivery company has been explained, but for example, when the visitor is a salesperson or a friend, the intercom system 100 operates as follows.

(第二動作例:来訪者がセールスの場合)
図3に示すフローチャートのステップS16において、第二動作例として、要約データ生成部41が、例えば、「XX新聞さんが来ました。」という要約データを生成したとする。
(Second operation example: when the visitor is a sales person)
In step S16 of the flowchart shown in FIG. 3, as a second operation example, it is assumed that the summary data generator 41 generates summary data such as "XX newspaper has arrived."

応対動作候補決定部42は、要約データに基づいて、新聞販売業者が勧誘に来ていると判定し、居住者が新聞の勧誘に対して応対する応対動作の候補を、記憶部35に予め準備されている複数の候補パターンの中から選択する。
本動作例の場合、新聞の勧誘に対する応対動作候補として、例えば、新聞販売業者と通話せずに勧誘を断るという候補と、居住者が新聞販売業者と直接通話するという候補と、の2つが選択されたとする。
A response motion candidate determination unit 42 determines that a newspaper vendor is inviting based on the summary data, and prepares in the storage unit 35 beforehand candidate response motions for the resident to respond to the solicitation of the newspaper. Select from multiple candidate patterns.
In the case of this operation example, there are two candidates for responding to a newspaper solicitation: a candidate for refusing the solicitation without calling the newspaper vendor, and a candidate for the resident to directly call the newspaper vendor. Suppose it was

親機制御部37は、要約データ生成部41によって生成された要約データ51「XX新聞さんが来ました。」と、応対動作候補決定部42によって選択された第一応対動作候補52「お断りする。」及び第二応対動作候補53「通話する。」をディスプレイ36に文字情報として表示させる。 The base unit control unit 37 generates the summary data 51 "XX Newspaper has arrived" generated by the summary data generation unit 41, and the first response action candidate 52 "Deny" selected by the response action candidate determination unit 42. and the second response operation candidate 53, "Call." are displayed on the display 36 as character information.

次に、応対動作候補52,53のうち応対動作候補52「お断りする。」が選択されたと判定された場合、親機制御部37は、応対動作候補52「お断りする。」に対応する応対動作を実行するための実行メッセージを記憶部35から読み出して玄関子機2に送信する。この場合の実行メッセージは、例えば、「今は応対できませんので、お引き取りください。」である。 Next, when it is determined that the answering action candidate 52 "I decline." is read from the storage unit 35 and transmitted to the entrance slave unit 2. The execution message in this case is, for example, "I can't answer right now, so please take over."

居室親機3から実行メッセージを受信すると、子機制御部25は、スピーカ22から宅配業者に向けて「今は応対できませんので、お引き取りください。」と出力させる。 When the execution message is received from room base unit 3, handset control unit 25 causes speaker 22 to output to the home delivery company, "We are unable to answer right now, so please pick up."

一方、応対動作候補52,53のうち応対動作候補53「通話する。」が選択されたと判定された場合、親機制御部37は、玄関子機2との間で通話することが可能な通話可能状態へと各部を移行させる。 On the other hand, if it is determined that the candidate response action 53 "talk" is selected from among the candidate response actions 52 and 53, the base unit control unit 37 selects a call that allows communication with the entrance cordless handset 2. Move each part to the possible state.

(第三動作例:来訪者が友人の場合)
図3に示すフローチャートのステップS16において、第三動作例として、要約データ生成部41が、例えば、「ご友人の鈴木さんが来ました。」という要約データを生成したとする。このとき、要約データ生成部41は、要約データを生成するにあたり、記憶部35に記憶されている居住者の友人の名前および/顔に関する情報を参照し、録音データに含まれる名前および/または録画データの映像と記憶部35に記憶されていた友人の名前および/または顔に関する情報とが一致する場合には、来訪者が友人であると判断して上記の要約データを生成する。
(Third operation example: when the visitor is a friend)
In step S16 of the flowchart shown in FIG. 3, as a third example of operation, it is assumed that the summary data generator 41 generates summary data such as "Mr. Suzuki, your friend, has arrived." At this time, in generating the summary data, the summary data generation unit 41 refers to the name and/or face information of the friend of the resident stored in the storage unit 35, If the image of the data matches the friend's name and/or face information stored in the storage unit 35, the visitor is determined to be a friend, and the summary data is generated.

応対動作候補決定部42は、要約データに基づいて、居住者の友人が来ていると判定し、居住者が友人(鈴木さん)に対して応対する応対動作の候補を、記憶部35に予め準備されている複数の候補パターンの中から選択する。本動作例の場合、友人に対する応対動作候補として、例えば、友人と通話するという候補と、そのまま家に入ってきてもらうという候補と、の2つが選択されたとする。 The reception motion candidate determining unit 42 determines that a friend of the resident is visiting based on the summarized data, and stores candidates of the reception motion for the resident to respond to the friend (Mr. Suzuki) in the storage unit 35 in advance. To select from a plurality of prepared candidate patterns. In the case of this operation example, it is assumed that, for example, two candidates, namely, a candidate of talking with a friend and a candidate of having the friend come into the house, are selected as the candidate of the behavior for responding to the friend.

親機制御部37は、要約データ生成部41によって生成された要約データ51「ご友人の鈴木さんが来ました。」と、応対動作候補決定部42によって選択された第一応対動作候補52「通話する。」及び第二応対動作候補53「家に入ってきてもらう。」をディスプレイ36上に文字情報として表示させる。 The master unit control unit 37 generates the summarized data 51 "Your friend Suzuki has arrived." and the second response operation candidate 53, "Come into the house." are displayed on the display 36 as character information.

次に、応対動作候補52,53のうち第一応対動作候補52「通話する。」が選択されたと判定された場合、居住者が来訪者と直接通話することになるため、親機制御部37は、玄関子機2との間で通話することが可能な通話可能状態へと各部を移行させる。 Next, when it is determined that the first response motion candidate 52 “talk” is selected from among the response motion candidates 52 and 53, the resident directly communicates with the visitor. shifts each part to a callable state in which a call can be made with the entrance cordless handset 2.

一方、応対動作候補52,53のうち第二応対動作候補53が選択されたと判定された場合、親機制御部37は、第二応対動作候補53「家に入ってきてもらう。」に対応する応対動作を実行するために、玄関ドアの電気錠4を解錠させる。また、親機制御部37は、第二応対動作候補53に対応する応対動作を実行させるための実行メッセージを記憶部35から読み出して玄関子機2に送信する。この場合の実行メッセージは、例えば、「ドアを解錠しましたのでお入りください。」である。 On the other hand, when it is determined that the second candidate response motion 53 has been selected from among the candidate response motions 52 and 53, the master device control unit 37 responds to the second candidate response motion 53 "I want you to come into my house." The electric lock 4 of the entrance door is unlocked in order to perform the reception operation. In addition, the parent device control unit 37 reads out from the storage unit 35 an execution message for executing the corresponding response operation corresponding to the second response operation candidate 53 and transmits the execution message to the entrance slave unit 2 . The execution message in this case is, for example, "The door has been unlocked. Please enter."

居室親機3から第二応対動作候補53に対応する実行メッセージを受信すると、子機制御部25は、スピーカ22から友人に向けて「ドアを解錠しましたのでお入りください。」と出力させる。 When receiving the execution message corresponding to the second response operation candidate 53 from the living room base unit 3, the slave unit control unit 25 outputs to the friend from the speaker 22, "The door is unlocked. Please enter." .

以上説明したように、インターホン装置1は、来訪者が居住者を呼び出して通話するための玄関子機2と、玄関子機2からの呼び出しに居住者が応答するための居室親機3とを備え、居室親機3は、来訪者の音声を録音する録音部34と、録音部34で録音された録音データを記憶する記憶部35と、居室親機3の各部を制御する親機制御部37とを有している。そして、親機制御部37は、録音データに基づいて音声を要約した要約データを生成し、要約データを再生するとともに、要約データに基づいて、応対動作に関する少なくとも一つの応対動作候補を選択して居住者に伝達し、少なくとも一つの応対動作候補を居住者が選択した場合には、玄関子機2及び居室親機3に接続された機器(電気錠4,宅配ボックス5)の少なくとも一方に、少なくとも一つの応対動作候補に対応する応対動作を実行させる。このような構成によれば、来訪者からの呼び出しがあった場合に、現来訪者の音声を要約した要約データに基づいて現来訪者に対する応対動作の候補を例えば文字情報として居住者に提示することができる。そして、提示された応対動作候補52,53から居住者が任意の応対動作候補を選択するだけで、来訪者に対する応対動作を玄関子機2、電気錠4、又は宅配ボックス5によって実行することができる。このため、居住者自らが来訪者と直接通話することなく、来訪者に応対することができる。これにより、居住者のプライバシーを確保できるとともに、居住者が在宅しているか不在であるかが来訪者に把握されることもないため侵入盗などに対する安全性も確保することができ、セキュリティの面からも有効である。 As described above, the intercom device 1 includes the entrance handset 2 for the visitor to call and talk to the resident, and the living room master set 3 for the resident to answer the call from the entrance handset 2. The living room master unit 3 includes a recording unit 34 that records the visitor's voice, a storage unit 35 that stores the recorded data recorded by the recording unit 34, and a master unit control unit that controls each part of the living room master unit 3. 37. Then, based on the recorded data, the base unit control unit 37 generates summarized data summarizing the voice, reproduces the summarized data, and selects at least one candidate for the corresponding response operation based on the summarized data. When the resident selects at least one response operation candidate, at least one of the devices (electric lock 4, delivery box 5) connected to the entrance handset 2 and the living room base unit 3, A response action corresponding to at least one response action candidate is executed. According to such a configuration, when a call is received from a visitor, based on summary data summarizing the voice of the current visitor, candidates for the response action for the current visitor are presented to the resident as, for example, character information. be able to. Then, only by the resident selecting an arbitrary candidate for the response operation from the presented candidates for the response operation 52, 53, the operation for responding to the visitor can be executed by the entrance cordless handset 2, the electric lock 4, or the delivery box 5. can. Therefore, the resident himself/herself can respond to the visitor without talking to the visitor directly. As a result, it is possible to ensure the privacy of the residents, and since visitors do not know whether the residents are at home or not, it is possible to ensure safety against burglaries and the like, thereby improving security. is also valid from

また、インターホン装置1によれば、居住者が各来訪者に対して応対してきた過去の応対動作の内容を学習し、現来訪者に対する応対動作候補を自動的に選択するように構成されている。このため、簡便な構成で、より適切な応対動作候補を選択することができる。 Further, according to the intercom device 1, it is configured to learn the content of the past response actions that the resident has made to each visitor, and to automatically select a candidate response action for the current visitor. . Therefore, it is possible to select a more suitable reception action candidate with a simple configuration.

また、インターホン装置1によれば、応対動作候補が複数選択された場合には、応対動作候補間に優先度に関する情報を付加し、当該優先度に関する情報をディスプレイ36に表示される各応対動作候補52,53の表示態様を変更することで表現するように構成されている。例えば、優先度の高い応対動作候補52を他の応対動作候補53よりも、ディスプレイ36上において大きく表示するように構成されている。このため、例えば、応対頻度の高い居住者には、当該来訪者に対する従前の応対動作を思い出させることができ、応対頻度の低い居住者には、当該来訪者には望ましい応対動作を認識させることができる。これにより、居住者の利便性を向上させることができる。 Further, according to the intercom device 1, when a plurality of answering action candidates are selected, information about the priority is added between the candidates of the answering action, and the information about the priority is displayed on the display 36 for each of the answering action candidates. It is configured to express by changing the display mode of 52 and 53 . For example, the candidate response operation 52 with a higher priority is displayed larger than the other candidate response operations 53 on the display 36 . For this reason, for example, it is possible to remind a resident who frequently responds to a previous response action to the visitor, and to make a resident who responds less frequently to recognize the desired response action for the visitor. can be done. Thereby, the convenience for residents can be improved.

また、インターホン装置1によれば、録音データに要約データを生成するために必要な情報が含まれていないと判定された場合には、来訪者に対して必要な情報を要求するための要求メッセージを、玄関子機2から出力させるように構成されている。要約データを生成するために必要な情報として、例えば、来訪者の氏名や用件などを来訪者に対して要求することで、適切な要約データを生成することができる。 Further, according to the intercom device 1, when it is determined that the recorded data does not contain the information necessary for generating the summary data, a request message for requesting the necessary information is sent to the visitor. is output from the entrance cordless handset 2. Appropriate summary data can be generated by requesting the visitor to provide information necessary for generating summary data, such as the visitor's name and business.

また、インターホン装置1によれば、選択された応対動作候補を居住者に伝達するに際し、居室親機3のディスプレイ36への表示や居室親機3のスピーカ32からの音声出力のほかに、スマートフォン6のディスプレイ6aへの表示及びスマートスピーカ7から音声出力することができるように構成されている。このため、居室親機3やスマートフォン6やスマートスピーカ7などを介して応対動作候補を適切に居住者に伝達することができる。 Further, according to the intercom device 1, when transmitting the selected candidate for the response action to the resident, in addition to displaying on the display 36 of the living room master device 3 and audio output from the speaker 32 of the living room master device 3, the smartphone 6 can be displayed on the display 6a and sound can be output from the smart speaker 7. Therefore, it is possible to appropriately transmit the candidate of the response action to the resident via the room master device 3, the smartphone 6, the smart speaker 7, or the like.

上記の実施形態では、要約データ生成部41によって生成された要約データと、応対動作候補決定部42によって選択された応対動作候補52,53とを居室親機3のディスプレイ36に表示することで居住者に伝達していたが、この例に限られない。例えば、親機制御部37は、要約データ51と応対動作候補52,53とをスマートフォン6に送信し、スマートフォン6のディスプレイ6a(図1参照)上に表示することによって居住者に伝達するようにしてもよい。また、親機制御部37は、例えば、要約データ51と応対動作候補52,53とをスマートスピーカ7に送信し、スマートスピーカ7から音声出力することによって居住者に伝達するようにしてもよい。この場合、居住者による応対動作候補52,53の選択は、スマートフォン6又はスマートスピーカ7を操作することにより、居室親機3を介して行うようにしてもよい。 In the above-described embodiment, the summary data generated by the summary data generation unit 41 and the reception motion candidates 52 and 53 selected by the reception motion candidate determination unit 42 are displayed on the display 36 of the living room master device 3 to However, it is not limited to this example. For example, master device control unit 37 transmits summary data 51 and response motion candidates 52 and 53 to smartphone 6, and displays them on display 6a (see FIG. 1) of smartphone 6 to convey them to the resident. may Further, for example, the master device control unit 37 may transmit the summary data 51 and the reception action candidates 52 and 53 to the smart speaker 7, and output the voice from the smart speaker 7 to the resident. In this case, the selection of the response action candidates 52 and 53 by the resident may be performed via the living room main unit 3 by operating the smartphone 6 or the smart speaker 7 .

なお、本発明は、上述した実施形態に限定されず、適宜、変形、改良等が自在である。その他、上述した実施形態における各構成要素の材質、形状、寸法、数値、形態、数、配置場所等は、本発明を達成できるものであれば任意であり、限定されない。 It should be noted that the present invention is not limited to the above-described embodiments, and can be modified, improved, etc. as appropriate. In addition, the material, shape, size, numerical value, form, number, location, etc. of each component in the above-described embodiment are arbitrary and not limited as long as the present invention can be achieved.

1:インターホン装置、2:玄関子機、3:居室親機、4:電気錠、5:宅配ボックス、6:スマートフォン、6a:ディスプレイ、7:スマートスピーカ、21:子機操作部、22:スピーカ、23:マイク、24:カメラ、25:子機制御部、31:親機操作部、32:スピーカ、33:マイク、34:録音部、35:記憶部、36:ディスプレイ、37:親機制御部、41:要約データ生成部、42:応対動作候補決定部、51:要約データ、52:第一応対動作候補、53:第二応対動作候補、L1,L2:信号ライン 1: intercom device, 2: entrance slave unit, 3: living room master unit, 4: electric lock, 5: delivery box, 6: smartphone, 6a: display, 7: smart speaker, 21: slave unit operation unit, 22: speaker , 23: microphone, 24: camera, 25: slave unit control unit, 31: master unit operation unit, 32: speaker, 33: microphone, 34: recording unit, 35: storage unit, 36: display, 37: master unit control Section 41: Summary Data Generation Section 42: Response Action Candidate Determination Section 51: Summary Data 52: First Response Motion Candidates 53: Second Response Motion Candidates L1, L2: Signal Lines

Claims (7)

来訪者が居住者を呼び出して通話するための玄関子機と、前記玄関子機からの呼び出しに居住者が応答するための居室親機と、を備えたインターホン装置であって、
前記居室親機は、
前記来訪者の音声を録音する録音部と、
前記録音部で録音された録音データを記憶する記憶部と、
前記玄関子機からの呼出操作を受けて呼出音の報音を制御する親機制御部と、
を有し、
前記親機制御部は、
前記録音データに基づいて前記音声を要約した要約データを生成し、
前記要約データを再生するとともに、前記要約データに基づいて、応対動作に関する少なくとも一つの応対動作候補を選択して前記居住者に伝達し、
前記少なくとも一つの応対動作候補を前記居住者が選択した場合には、前記玄関子機及び前記居室親機に接続された機器の少なくとも一方に、前記少なくとも一つの応対動作候補に対応する応対動作を実行させる、
ように構成されている、インターホン装置。
An intercom device comprising an entrance handset for a visitor to call and talk to a resident, and a living room master set for the resident to respond to the call from the entrance handset,
The living room base unit
a recording unit that records the visitor's voice;
a storage unit for storing recorded data recorded by the recording unit;
a base unit control unit that receives a call operation from the entrance cordless handset and controls a ringing tone;
has
The parent device control unit
generating summary data summarizing the voice based on the recorded data;
reproducing the summary data, selecting at least one candidate for a reception action based on the summary data, and transmitting the candidate to the resident;
When the resident selects the at least one candidate for the response action, the response action corresponding to the at least one candidate for the response action is caused to at least one of the devices connected to the entrance slave unit and the room base unit. let it run,
An intercom device configured to:
前記親機制御部は、過去の応対動作の内容を学習し、前記少なくとも一つの応対動作候補を自動的に選択する、請求項1に記載のインターホン装置。 2. The intercom device according to claim 1, wherein said base unit control unit learns the contents of past reception actions and automatically selects said at least one reception action candidate. 前記親機制御部は、過去の応対動作の内容を学習し、前記応対動作候補が複数存在する場合に、当該複数の応対動作候補間の優先度に関する情報を付加して前記複数の応対動作候補を前記居住者に伝達する、請求項1又は2に記載のインターホン装置。 The base unit control unit learns the content of the past response motions, and when there are a plurality of candidates for the response motion, adds information about the priority among the candidates for the plurality of response motions, and to the resident. 前記優先度に関する情報は、前記居室親機のディスプレイに表示される各応対動作候補の表示態様を変更することで表現される、請求項3に記載のインターホン装置。 4. The intercom device according to claim 3, wherein the information about the priority is expressed by changing the display mode of each reception action candidate displayed on the display of the room master unit. 前記親機制御部は、前記録音データに前記要約データを生成するために必要な情報が含まれていないと判定された場合には、前記来訪者に対して前記必要な情報を要求するためのメッセージを、前記玄関子機から出力させる、請求項1から4のいずれか一項に記載のインターホン装置。 When it is determined that the recorded data does not contain the information necessary for generating the summary data, the parent device control unit requests the visitor for the necessary information. 5. The intercom device according to any one of claims 1 to 4, wherein a message is output from said entrance slave unit. 前記居室親機に接続された前記機器は、電気錠又は宅配ボックスである、請求項1から5のいずれか一項に記載のインターホン装置。 6. The intercom device according to any one of claims 1 to 5, wherein the device connected to the room base unit is an electric lock or a delivery box. 前記親機制御部は、前記少なくとも一つの応対動作候補を前記居住者に伝達するために、前記居室親機のディスプレイ又は前記居室親機と通信可能に接続された電子機器のディスプレイに前記少なくとも一つの候補に関する情報を表示する、又は、前記居室親機又は前記電子機器から前記情報を報知するように構成されている、請求項1から6のいずれか一項に記載のインターホン装置。 The master device control unit displays the at least one candidate on the display of the room master device or the display of the electronic device communicatively connected to the room master device, in order to transmit the at least one candidate response action to the resident. 7. The intercom device according to any one of claims 1 to 6, configured to display information about one candidate, or to notify said information from said room master unit or said electronic device.
JP2019159399A 2019-09-02 2019-09-02 intercom device Active JP7312061B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019159399A JP7312061B2 (en) 2019-09-02 2019-09-02 intercom device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019159399A JP7312061B2 (en) 2019-09-02 2019-09-02 intercom device

Publications (2)

Publication Number Publication Date
JP2021040209A JP2021040209A (en) 2021-03-11
JP7312061B2 true JP7312061B2 (en) 2023-07-20

Family

ID=74847457

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019159399A Active JP7312061B2 (en) 2019-09-02 2019-09-02 intercom device

Country Status (1)

Country Link
JP (1) JP7312061B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008053989A (en) 2006-08-24 2008-03-06 Megachips System Solutions Inc Door phone system
JP2009100334A (en) 2007-10-18 2009-05-07 Hitachi Software Eng Co Ltd Apparatus and mobile terminal for dealing with visitor, and system therefor
JP2010080993A (en) 2008-09-23 2010-04-08 Brother Ind Ltd Intercom system
JP2013126498A (en) 2011-12-19 2013-06-27 Panasonic Corp Home delivery box
JP2019083468A (en) 2017-10-31 2019-05-30 シャープ株式会社 Output control device, intercom slave unit, and intercom system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008053989A (en) 2006-08-24 2008-03-06 Megachips System Solutions Inc Door phone system
JP2009100334A (en) 2007-10-18 2009-05-07 Hitachi Software Eng Co Ltd Apparatus and mobile terminal for dealing with visitor, and system therefor
JP2010080993A (en) 2008-09-23 2010-04-08 Brother Ind Ltd Intercom system
JP2013126498A (en) 2011-12-19 2013-06-27 Panasonic Corp Home delivery box
JP2019083468A (en) 2017-10-31 2019-05-30 シャープ株式会社 Output control device, intercom slave unit, and intercom system

Also Published As

Publication number Publication date
JP2021040209A (en) 2021-03-11

Similar Documents

Publication Publication Date Title
JP2019083468A (en) Output control device, intercom slave unit, and intercom system
JP2021072631A (en) Intercom system, lobby intercom, intercom master unit, control method of intercom system, and program
JP7312061B2 (en) intercom device
JP4945356B2 (en) Electric lock system
JP7422321B2 (en) Intercom system, setting method, and program
JP2019193124A (en) Intercom system, processing method, and program
JP2019068362A (en) Intercom system
JP2006319618A (en) Interphone answering system and method therefor
JP2007288675A (en) Intercom system
JP2003324534A (en) Interphone system for collective housing
JP2019153852A (en) Imaging system, imaging control method, and program
JP2001077926A (en) Visitor reply system
JP2016181822A (en) Intercom system
JP7474084B2 (en) Intercom System
JP2019216302A (en) Telephone conversation information output system, information terminal, telephone conversation information processing method, and program
JP7297462B2 (en) Visitor response system
JP2007150670A (en) Intercom system
JP2024044749A (en) Message processing system, information terminal control method, message processing method, message processing program, and information terminal control program
JP2024044776A (en) Audio information output system, audio information output system control method, and audio information output system control program
JP7352788B2 (en) Intercom system, registration method, and program
JP7467181B2 (en) Intercom device and intercom system
JP3949051B2 (en) Intercom device
JP2019186697A (en) Intercom system
JP2019068361A (en) Intercom system
WO2003098955A1 (en) Information communication system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220601

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230614

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230704

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230707

R150 Certificate of patent or registration of utility model

Ref document number: 7312061

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150