JP2020091507A - Ａｉロボットによる入退場管理システム - Google Patents

Abstract

【課題】ＡＩロボットを受付に配置して社員に挨拶の習慣付けを行い、友連れ入場等の不正入場を防止して社員の入退場を管理し、ＡＩロボットにより受付業務を代行させ、社員の健康管理、来客者への対応等を効果的に行うＡＩロボットによる入退場管理システムを提供する。【解決手段】社員１０がＡＩロボット１００に挨拶する際の音声データを社員１０の識別番号１２と紐付して初期設定し、音声データベースに登録する音声初期設定部２と、入退場する社員１０がＡＩロボット１００に挨拶する際の音声データを記録する音声データ記録部３と、音声データ記録部３に記録された音声データから音声特徴量を抽出する音声特徴量抽出部４と、音声特徴量を登録された音声データベースから検索して識別番号を特定する識別番号特定部５と、を備える。【選択図】図１

Description

本発明は、ＡＩロボットによる入退場管理システムに係り、対話型ロボットにより社員等の入退出管理を行うＡＩロボットによる入退場管理システムに関する。

オフィスビル、研究所、工場等に勤務する社員の入退場管理システムが各種提案されている。これは、社員の出退勤を確実に管理するためだけではなく、その企業の営業情報や技術情報が盗用されるのを防止するためである。特に問題となるのが、いわゆる「友連れ」による不正入場の問題である。これは、一人のＩＤ認証で開錠した入退出用の扉を複数の者が通過してしまうことをいう。この社員の入退場管理システムのポイントは、どのように本人認証をするかという点であり、様々な方法が提案されている。

一方、近年、いわゆる「コミュニケーションロボット」等と称されるＡＩ機能付き対話型ロボットが実用化され始めている。このコミュニケーションロボットにより、企業の施設の受付業務などの人件費を抑えることが提案されている。

特許文献１には、ＩＣカードをそのまま利用することができ、利用者がＩＣカードを携帯するだけで入退場を行うことのできる入退場管理システムが開示されている。ここでは、ＩＣカードのカード情報を読み書きするＩＣカードリーダライタと、ＩＣカードリーダライタにより読み取られたカード情報を人体通信により送信する人体通信送信機と、人体通信送信機から送信されたカード情報を受信する人体通信受信機と、ＩＣカードの利用者が入退場するためのゲート装置と、人体通信受信機により受信されたカード情報に基づいてゲート装置の開閉制御を行うシステム管理装置、を備えることが記載されている。

特許文献２には、建設現場における入退場管理システムにおいて、カード作成に手間が掛かり、カードの紛失・携帯忘れや、他人に成りすますことが容易に行われる点を解決する画像認証装置による入退場管理システムが開示されている。ここでは、個人データと顔画像データとを同じＩＤ情報に紐付けて予め顔蓄積サーバに登録し、ゲートに顔認証装置を設けて、入退場者の顔画像データを取得すると共に、この顔画像データと顔蓄積サーバから得られる顔画像データとを照合して、入退場者の入退場を認証することが記載されている。

特許文献３には、ＵＳＢから供給される電力のみで動作する指紋認証装置が開示されている。ここでは、ホストコンピュータにＵＳＢによって接続した指紋照合処理手段の非接触ＩＣカードリーダライタ部と指紋認証部の両者の電源の一方の起動、他方の停止の切替を切替手段によって行うことでＵＳＢによる供給電力のみによる指紋照合処理手段の作動が可能になることが記載されている。

特許文献４には、ＡＴＭやインターネットバンキングにおいて利用者認証の安全性を高め、かつ手軽に利用することができる声紋認証システムが開示されている。ここでは、認証サーバは、暗証番号又はパスワードを認証する第１認証部と、第１認証部による認証が正常に終了した際に、第１認証とは異なる第２認証が必要か否かを判定し、必要な場合は、ユーザ端末に秘密の質問等を送信し、秘密の質問等に対して利用者が発した音声を用いて声紋認証を行う第２認証部とを備えることが記載されている。

特許文献５には、移動可能なロボットを必要に応じて移動させることで、定点での監視ではなく、常に違った状況にも対応でき、人に密着した入退室管理や指定エリア内での案内を行わせる、高度のセキュリティレベルの入退室管理システムが開示されている。ここでは、人に密着した入退室管理や指定エリア内での誘導、誘導中の離脱等の監視、巡回中のすれ違う人の認証、許可エリアや許可通行経路にいることの確認等を、入室者にＲＦＩＤタグを持たせ、生体認証機能を有する移動可能なロボットとセキュリティドア装置等をＬＡＮ接続することが記載されている。

特開２０１２−５３５２０号公報 特開２０１６−５８０１５号公報 特開２００６−１２０７９号公報 特開２０１６−１３６２９９号公報 特開２００８−６５７６３号公報

オフィスビル、研究所、工場等では、社員の入退場を管理する方法として、出退勤管理用のホワイトボードに社員各自が手書きで記入するのが一般的である。他の社員、受付事務員、警備員等は、目視によりホワイトボードに記載された当該社員の所在を確認する。しかし、この方法では、ホワイトボードの掲載場所へ行って確認しなければならず、当該社員が記載を失念した場合、スケジュールの変更の際に記載の修正をしない場合などが発生し、混乱することも生じ得る。さらに、セキュリティ上の観点からも社員の入退場を正確に管理できないという問題がある。

そこで、引用文献２に示すように、社員の本人認証手段として非接触ＩＣカード等の社員カードを用いて個人認証を行うことが実用化されている。しかし、非接触ＩＣカード等のカード類は、上述したように、カードの盗用、偽造、紛失等の虞があり、また、友連れなどの入退場を有効に防止できない等の問題がある。

また、本人認証の精度が高いと言われている本人固有の身体情報（顔認証、指紋認証、虹彩認証）などを利用するバイオメトリックス認証が提案されている。しかし、誤認証の発生確率が無視できない場合がある等の問題があり、社員の本人認証手段として非接触ＩＣカード等の社員カードを用いて個人認証を行うのが一般的である。

一方、オフィスビル、研究所、工場等の施設の受付業務は、人件費の削減により無人化される傾向にある。そして、来客者は、受付に設けられた内線電話で担当者に直接電話をしてアポイントを取る方法が採用されつつある。

本願の目的は、かかる課題を解決し、ＡＩロボットを受付に配置して社員に挨拶の習慣付けを行い、友連れ入場等の不正入場を防止して社員の入退場を管理することである。

さらに、ＡＩロボットにより受付業務を代行させ、人工知能のディープラーニングにより、社員の健康管理、来客者への対応等を効果的に行うことである。

上記目的を達成するため、本発明に係るＡＩロボットによる入退場管理システムは、社員が入退場する受付に配置されるＡＩロボットを用いた入退場管理システムであって、社員がＡＩロボットに挨拶する際の音声データを録音し、社員の識別番号と紐付して初期設定し、音声データベースに登録する音声初期設定部と、入退場する社員がＡＩロボットに挨拶する際の音声データを録音して記録する音声データ記録部と、音声データ記録部に記録された音声データから音声特徴量を抽出する音声特徴量抽出部と、音声特徴量を登録された音声データベースから検索して識別番号を特定する識別番号特定部と、を備えることを特徴とする。

上記構成により、受付に配備されたＡＩロボットに対し、社員が入場する際に「おはよう」、「今日も一日頑張ろう」等の挨拶を交わすと、その社員の挨拶の音声データに基づき、声紋認証により個人認証が可能となり、その社員の識別番号が検索される。この声紋認証は、例えば、銀行におけるオンラインバンキング、保険会社のコールセンターでの住所確認、スピーカを通じてＥＣサイトで買い物をする場合のクレジットガード決済の認証などで使用が検討されている。しかし、全面的に採用するには誤認証の発生確率の問題があり難しいと言われている。しかし、限られた社員を対象とする受付に配備されたＡＩロボットにおいての適用には、比較的問題が少ない。すなわち、全社員が初めて声紋認証を行う際に、同時に非接触型ＩＣカードを読み取らせてその声紋の所有者を認識させれば良い。

ＡＩロボットによる入退場管理システムは、ＡＩロボットが一方の腕部に設けられた読み取り装置に非接触型ＩＣカードに記録された社員の識別番号を読み取らせて音声データの初期設定を行うことが好ましい。このように、社員が入退場する受付に配備されたＡＩロボットを用いた入退場管理システムにおいて、社員であれば誰でも携帯している非接触型ＩＣカードを用いることで、音声データの初期設定を簡易に行うことができる。すなわち、非接触型ＩＣカードに記録された社員の識別番号を読み取らせ、その社員がＡＩロボットに挨拶する際の音声データを社員の識別番号と紐付することができる。

ＡＩロボットによる入退場管理システムは、社員が一時外出する場合にはＡＩロボットの一方の腕部の読み取り装置に非接触型ＩＣカードに記録された社員の識別番号を読み取らせ、外出から帰社する際には、他方の腕部に設けられた読み取り装置に社員の非接触型ＩＣカードに記録された識別番号を読み取らせ、前記社員の滞在状況を確認し、変更又は修正可能なことが好ましい。これにより、社員の滞在状況が受付だけではなく社内ネットワークに接続された各社員のパソコン等で容易に確認することができ、インターネット回線等を介して本社や外出先からでも簡易に把握できるとともに前記社員の滞在状況の変更や修正も容易にできる。

また、ＡＩロボットによる入退場管理システムは、入退場管理部は、入退場管理ゲートに設けられたエリアセンサが感知した入場者のうちＡＩロボットに挨拶をしない入場者に対しては、不正入場とみなして入場者の入場を拒否することが好ましい。このように、社員は入退場の際に受付に配置されたＡＩロボットに対して必ず挨拶をしなければならない。なぜならば、この挨拶によりその社員の個人認証が行われ、その他のシステムが作動するからである、従って、この挨拶をしない者は個人認証ができないためＡＩロボットが不正入場とみなして入場者の入場を拒否する。このように、「友連れ」などにより不正入場しようとする者を容易に判定し、入退場の際のセキュリティを向上させることができる。

ＡＩロボットによる入退場管理システムは、音声特徴量には、社員がＡＩロボットに挨拶する際の言語的特徴量、又は社員がＡＩロボットに挨拶する際の音響的特徴量が含まれることが好ましい。すなわち、認証する社員の音素の並び方に関する制約により個人認証を行うことができ、認証する社員の声がどのような周波数特性を持つかを検知して個人認証を行うことができる。ここで、「音素」とは、語の意味を区別する音声の最小単位をいう。

また、上記目的を達成するため、本発明に係るＡＩロボットによる入退場管理システムは、社員がＡＩロボットに挨拶する際の表情データを社員の識別番号と紐付して初期設定し、表情データベースに登録する表情初期設定部と、入退場する社員がＡＩロボットに挨拶する際の表情データを撮像カメラで撮影して記録する表情データ記録部と、表情データ記録部に記憶された表情データから表情特徴量を抽出する表情特徴量抽出部と、抽出された表情特徴量を表情データベースに登録された表情データと比較して社員の識別番号を特定する識別番号特定部とを備えることが好ましい。

上記構成により、入退場する社員がＡＩロボットに挨拶する際の表情データに基づき、その社員の心理状態を推測することができる。これは、引用文献２で採用されている顔画像データにより社員の入退場を認証する技術とは異なる技術である。すなわち、社員のＡＩロボットに対する挨拶の際の表情から人工知能のディープラーニングによりその社員の心理状態を推測し、後述するように、「健康状態」または「ストレス状態」を判定することができる。これにより、受付にＡＩロボットを配置することで社員の福利厚生を図ることができる。

また、ＡＩロボットによる入退場管理システムは、抽出された前記表情特徴量を表情データベースに記録された社員の健康状態に関するビッグデータを参照して社員の健康状態を推測する健康管理部を備えることが好ましい。これにより、社員の顔色、表情、態度等から健康診断以外の方法で社員の健康状態が予測でき、社員の「未病」や「ストレス状態」を早期に検出できる。

また、ＡＩロボットによる入退場管理システムは、更に、抽出された音声特徴量を音声データベースに記録された社員の健康状態に関するビッグデータを参照して社員の健康状態を推測する健康管理部を備えることが好ましい。これにより、来客者に対して受付事務を行うＡＩロボットは、来客者の用件を聞くと同時に、来客者の顔又は身体の表情特徴量を抽出し、人工知能の「急いでいる」、「怒っている」、「カタログを欲しがっている」等の心理状態を推測する。そして、担当社員は、来客者の心理状態を分かった上で適切な対応をすることができる。

また、ＡＩロボットによる入退場管理システムは、入場者のうち来客者に対しては、ＡＩロボットは、来客者の顔又は身体の表情特徴量から来客者の心理状態を推測する心理状態推定部を備え、来客者の用件と共に来客者の心理状態を担当者に報知することが好ましい。これにより、来客者に対して受付事務を行うＡＩロボットは、来客者の用件を聞くと同時に、来客者の顔又は身体の表情特徴量を抽出し、人工知能の「急いでいる」、「怒っている」、「カタログを欲しがっている」等の心理状態を推測する。そして、担当社員は、来客者の心理状態を分かった上で適切な対応をすることができる。

また、ＡＩロボットによる入退場管理システムは、入退場する来客者がＡＩロボットに挨拶する際の音声データを記録する来客者音声データ記録部を備え、表情データには、音声データも含まれることが好ましい。これにより、入退場する来客者に対してその表情データだけではなく音声データからも心理状態を推測することができる。そして、担当社員は、来客者の心理状態を分かった上で適切な対応をすることができる。

さらに、ＡＩロボットによる入退場管理システムは、表情特徴量には、社員の顔の表情特徴量、又は社員の身体の表情特徴量が含まれることが好ましい。これにより、例えば、人工知能のディープラーニングにより「疲れている」、「しょげている」、「睡眠不足だ」、「ストレスを抱えている」等の社員の顔に出る表情特徴量を抽出することができる。又は、例えば、人工知能のディープラーニングにより「肩を落としている」、「姿勢が悪い」、「歩き方がおかしい」、「ため息をついている」等の社員の身体に出る表情特徴量を抽出することができる。

以上のように、本発明に係るＡＩロボットによる入退場管理システムによれば、ＡＩロボットを受付に配置して社員に挨拶の習慣付けを行い、友連れ入場等の不正入場を防止して社員の入退場を管理することである。

さらに、ＡＩロボットにより受付業務を代行させ、人工知能のディープラーニングにより、社員の健康管理、来客者への対応等を効果的に行うことである。

本発明に係るＡＩロボットによる入退場管理システムの一つの実施形態の概略構成を示すブロック図である。 ＡＩロボットが社員の音声データから個別認証を行う構成を示すブロック図である。 ＡＩロボットによる入退場管理システムによる友連れ入場を防止する構成を示すブロック図である。 ＡＩロボットが社員の表情データからその社員の個別認証を行う構成を示すブロック図である。 ＡＩロボットが社員の音声データ又は表情データからその社員の健康管理を行う構成を示すブロック図である。 ＡＩロボットが来客者に対応する来客者管理部の構成を示すブロック図である。 ＡＩロボットの一つの実施形態の構成を示す正面図である。

以下に、図面を用いて本発明に係るＡＩロボットによる入退場管理システム１につき、詳細に説明する。図１に、ＡＩロボットによる入退場管理システム１の一つの概略構成をブロック図で示す。ＡＩロボット１００は、既に実用化されている公知のロボットであり、本発明では社員１０が入退場する受付１４に配置される。そして、社員１０等と対話をする、いわゆる「コミュニケーションロボット」等と称されるＡＩ機能付き対話型ロボットである。本発明は、このコミュニケーションロボットを用いて、社員１０との対話だけではなく社員１０の個別認証を行うことで社員１０の入退場を管理し（図１参照）、さらに人工知能のディープラーニングにより、友連れ防止（図３参照）、社員１０の健康管理（図５参照）、来客者２０への対応（図６参照）など多機能な受付業務を実現させることができる。

（挨拶時の音声による入退場管理システムの構成）
図１に示すように、ＡＩロボットによる入退場管理システム１は、音声初期設定部２、音声データ記録部３、音声特徴量抽出部４、及び識別番号特定部５から構成される。そして、入退場管理ゲート９ａ，９ｂの間に一方向から進入してきた社員１０は、受付１４の前に配置されたＡＩロボット１００の横を通り過ぎる際に挨拶をして開閉ゲート１５を開けさせて通過する。音声初期設定部２は、社員１０がＡＩロボット１００に挨拶する際の音声データ７をアレーマイク１０６で録音し、社員１０の識別番号１２と紐付して初期設定する。そして、その音声データ７を音声データベース６に登録する音声データ記録部３は、入退場する社員１０がＡＩロボット１００に挨拶する際の音声データ７をアレーマイク１０６で録音して記録する。音声特徴量抽出部４は、音声データ記録部３に記録された音声データ７から音声特徴量８を抽出する。そして、識別番号特定部５は、音声特徴量８を登録された音声データベース６から検索して識別番号１２を特定する。

このように、本発明のＡＩロボット１００は、社員１０と対話をすることで、その社員１０の挨拶の声紋認証によりその社員個人を特定する。すなわち、受付１４に配備されたＡＩロボット１００に対し、社員１０が入場する際に「おはよう」、「今日も一日頑張ろう」等の挨拶を交わすと、その社員１０の挨拶の音声データ７に基づき、声紋認証による個人認証が可能となり、その社員１０の識別番号１２が検索される。また、ＡＩロボット１００は、あたかも人間と同じように挨拶するため、顔や手足を動かす動作をプラスしても良い。これは、社員１０がＡＩロボット１００に親しみを感じるようにして自然に挨拶の言葉が発せられるようにするためである。

この声紋認証は、例えば、銀行におけるオンラインバンキング、保険会社のコールセンターでの住所確認、スピーカ１０４を通じてＥＣサイトで買い物をする場合のクレジットカード決済の認証などで使用が可能である。しかし、全面的に採用するには誤認証の発生確率の問題があり難しいと言われている。しかし、限られた社員１０を対象とする受付１４に配備されたＡＩロボット１００においての適用には問題が少ない。すなわち、全ての社員１０が初めて声紋認証を行う際に、同時に非接触型ＩＣカードを読み取らせてその声紋の所有者が特定できれば良いからであり、不特定多数の者を対象にしていないからである。このように、社員１０の入退場管理をする際に、個人認証をどのようにして行うかが問題になるが、社員１０とＡＩロボット１００との挨拶に基づき声紋認証を採用することで、社員１０に挨拶の習慣付けを行い、社内でのコミュニケーションの重要性を認識させることができる。

（ＡＩロボット）
図７には、ＡＩロボット１００の一つの実施形態の構成を示す。本発明で用いるＡＩロボット１００は、声紋認証だけではなく、非接触型ＩＣカード１０３を用いた個人認証も可能である。すなわち、一方の腕部１０１ａに設けられた読取り装置１０２ａ，１０２ｂに非接触型ＩＣカード１０３に記録された社員１０の識別番号１２を読み取らせて音声データ７の初期設定を行う。このように、社員１０が入退場する受付１４に配置されたＡＩロボットを用いた入退場管理システム１において、社員１０であれば誰でも携帯している非接触型ＩＣカード１０３を用いることで、音声データ７の初期設定を簡易に行うことができる。すなわち、非接触型ＩＣカード１０３に記録された社員１０の識別番号１２を読み取らせ、その社員１０がＡＩロボット１００に挨拶する際の音声データ７を社員１０の識別番号１２と紐付することができる。なお、このＡＩロボット１００には、一つの実施例として、スピーカ１０４、表示モニタ１０５、アレーマイク１０６、動作スイッチ１０７が設けられているが、これらに限らない。紐

このように、全ての社員１０が、名前と配属とが記載された名刺の代わりになる非接触型ＩＣカード１０３を常に携帯することで、社員相互の認識が増進され、とりわけ、新入社員や転職者が馴染みやすくなるというメリットを生かすことができる。一方、非接触型ＩＣカード１０３のデメリットである、カードの盗用、偽造、紛失等の虞がある点、また、友連れなどの入退場を有効に防止できない等の問題がある点は、声紋認証を採用し、使い分けることで完璧な入退場管理を実現することができる。

また、社員１０は、他社との打ち合わせ等で一時外出する場合には、ＡＩロボット１００の一方の腕部１０１ａの読取り装置１０２ａに非接触型ＩＣカード１０３に記録された社員１０の識別番号１２を読み取らせる。そして、帰社予定時間等を入力し、表示モニタ１０５に表示された帰社予定時間等により確認しても良い。外出から帰社する際には、他方の腕部１０１ｂに設けられた読取り装置１０２ｂに社員１０の非接触型ＩＣカード１０３に記録された識別番号２７を読み取らせる。ＡＩロボット１００は、「お帰りなさい」等の挨拶と共に「電話がありました」などの留守中の連絡事項のメッセージを表示モニタ１０５に表示しても良い。このように、その社員１０の滞在状況が受付だけではなく各社員１０のパソコン等で容易に確認することができ、本社や外出先からでも簡易に把握できるとともに変更や修正も可能である。

図２に、ＡＩロボット１００が社員１０の音声データ７からその社員１０の個別認証を行う構成をブロック図で示す。図２（ａ）に示すように、音声初期設定部２は非接触型ＩＣカード１０３に記録された識別番号１２を読み取り、同時にこの社員１０から音声データ７を聞き取り、両者を紐付して初期設定し、それを音声データベース６に保存する。一方、図２（ｂ）では、社員１０がＡＩロボット１００に向かって挨拶した際に、音声データ記録部３がその音声を記録する。そして、音声特徴量抽出部４がその音声データ７から音声特徴量８を抽出する。この音声特徴量８には、後述するように、言語的特徴量８ａ及び音響的特徴量８ｂが含まれる。さらに、この音声特徴量８は、音声データベース６に保存されている音声データ７の中から一致するものが検索される。この一致した音声データ７と紐付されている認識番号１２からその社員１０を特定することができる。

（友連れ防止）
図３に、ＡＩロボットによる入退場管理システム１による友連れ入場を防止する構成をブロック図で示す。入退場管理ゲート9ａ、９ｂに設けられた開閉ゲート１５の両端部には複数のエリアセンサ１６ａ，１６ｂが設けられる。そして、入退場管理部１１は、このエリアセンサ１６ａ，１６ｂが検知した社員１０などの入場者１９のうちＡＩロボット１００に挨拶をしない入場者１９に対しては不正入場と見做し、スピーカ１０４を通じてその入場者１９の入場を拒否する。複数のエリアセンサ１６が設けられるのは、入場者１９の立ち位置によっては、エリアセンサ１６が他の入場者１９にブロックされて検知できないからである。

このように、社員１０は入退場の際に受付１４に配置されたＡＩロボット１００に対して必ず挨拶をしなければならない。なぜならば、この挨拶によりその社員１０の個人認証が行われ、友連れ入場か否かが判断できるからである。そして、後述するその他の管理システムがこの挨拶に基づき作動するからである。従って、ＡＩロボット１００は、自分に向かって挨拶をしない者は個人認証ができないため不正入場とみなして入場者１９の入場を拒否する。すなわち、開閉ゲート１５を閉じて通過させないようにする。このように、「友連れ」などにより不正入場しようとする入場者１９を容易に判定し、入退場の際のセキュリティを向上させることができる。

（音声特徴量）
ここで、音声特徴量８には、社員１０のＡＩロボット１００に挨拶する際の言語的特徴量８ａ、又は社員１０のＡＩロボット１００に挨拶する際の音響的特徴量８ｂが含まれる。すなわち、言語的特徴量８ａによると、認証する社員１０の音素の並び方に関する制約により個人認証を行うことができる。一方、音響的特徴量８ｂによると、認証する社員１０の声がどのような周波数特性を持つかを検知して個人認証を行うことができる。ここで、「音素」とは、語の意味を区別する音声の最小単位をいう。

（挨拶時の画像による健康管理）
図４に、ＡＩロボット１００が社員１０の表情データ３０からその社員１０の個別認証を行う構成をブロック図で示す。図４に示すように、ＡＩロボットによる入退場管理システム１は、表情初期設定部２１、表情データ記録部２２、表情特徴量抽出部２３、及び識別番号特定部２４から構成される。表情初期設定部２１は、社員１０がＡＩロボット１００に挨拶する際の表情データ３０を撮像カメラ１０９で撮影してその社員１０の識別番号２７と紐付して初期設定する。そして、表情データベース２５にその表情データ３０を登録する。表情データ記録部２２は、入退場する社員１０がＡＩロボット１００に挨拶する際の表情データ３０を記録する。表情特徴量抽出部２３は、表情データベース２５に記録された表情データ３０から表情特徴量２６を抽出する。識別番号特定部２４は、抽出された表情特徴量２６を表情データベース２５に登録された表情データ３０と比較して社員１０の識別番号２７を特定することができる。

（健康管理）
図５に、ＡＩロボット１００が社員１０の音声データ７又は表情データ３０からその社員１０の健康管理を行う構成をブロック図で示す。すなわち、入退場する社員１０がＡＩロボット１００に挨拶する際の音声データ７からだけではなく、挨拶する際のその社員１０の表情データ３０に基づき、その社員１０の心理状態を推測することができる。すなわち、上述したように、社員１０の音声データ７から個人認証したのに対して、その社員１０の音声データ７からも個人認証できるからである。また、音声データ７と表情データ３０の双方に基づいて個人認証しても良い。

これは、引用文献２で採用されている顔画像データにより社員１０の入退場を認証する技術とは異なる技術である。すなわち、社員１０のＡＩロボット１００に対する挨拶の際の表情から人工知能のディープラーニングによりその社員１０の心理状態を推測し、後述するように、「健康状態」または「ストレス状態」を判定することができる。これにより、受付１４にＡＩロボット１００を配置することで社員１０の福利厚生を図ることができる。

図５に示すように、ＡＩロボットによる入退場管理システム１は、音声データ記録部３に記録された音声データ７を音声データベース６に記録された社員１０の健康に関する音声ビッグデータ４０を参照して社員１０の健康状態を推測する健康管理部２８を備える。これにより、社員１０の顔色、表情、態度等から健康診断以外の方法で社員１０の健康状態が予測でき、社員１０の「未病」や「ストレス状態」を早期に検出できる。

また、ＡＩロボットによる入退場管理システム１は、表情データ記録部２２に記録された表情データ３０を表情データベース２５に記録された社員１０の健康に関する表情ビッグデータ４１を参照して社員１０の健康状態を推測する健康管理部２８を備える。これにより、社員１０の顔色、表情、態度等から健康診断以外の方法で社員１０の健康状態が予測でき、社員１０の「未病」や「ストレス状態」を早期に検出できる。

（来客者受付）
図６に、ＡＩロボット１００が来客者２０に対応する来客者管理部３４の構成をブロック図で示す。ＡＩロボット１００の来客者管理部３４は、来客者２０の来客者表情データ記録部３６が記録した表情データ３０から来客者２０の心理状態を推測する来客者心理状態推定部３３を備える。また、来客者心理状態推定部３３は、入退場する来客者２０がＡＩロボット１００に挨拶する際の音声データ７を記録する来客者音声データ記録部３５を備える。そして、表情データ３０には、この音声データ７も含まれる。これにより、来客者管理部３４は、入退場する来客者２０に対してその表情データ３０だけではなく音声データ７からも心理状態を推測することができる。

そして、来客者心理状態推定部３３は、過去の来客者音声ビッグデータ３７及び来客者表情ビッグデータ３８を参照し、来客者２０の心理状態を推測する。このように、来客者２０に対して受付事務を行うＡＩロボット１００は、来客者２０の用件を聞くと同時に、来客者２０の顔の表情特徴量２６ａ又は身体の表情特徴量２６ｂを抽出し、人工知能のディープラーニングにより「急いでいる」、「怒っている」、「カタログを欲しがっている」等の心理状態を推測する。ＡＩロボット１００は、来客者２０の用件と共に来客者２０の心理状態を担当社員４２に報知する。そして、担当社員４２は、来客者２０の心理状態を分かった上で適切な対応をすることができる。

さらに、ＡＩロボットによる入退場管理システム１は、図４に示すように、表情特徴量２６には、社員１０の顔の表情特徴量２６ａ、又は社員１０の身体の表情特徴量２６ｂが含まれる。これにより、例えば、人工知能のディープラーニングにより「疲れている」、「しょげている」、「睡眠不足だ」、「ストレスを抱えている」等の社員１０の顔の表情特徴量２６ａを抽出することができる。又は、例えば、人工知能のディープラーニングにより「肩を落としている」、「姿勢が悪い」、「歩き方がおかしい」、「ため息をついている」等の社員１０の身体の表情特徴量２６ｂを抽出することができる。

以上の実施形態で説明された構成、形状、大きさ、及び配置関係については、本発明が理解、実施できる程度に概略的に示したものにすぎない。従って、本発明は、説明された実施形態に限定されるものではなく、特許請求の範囲に示される技術的思想の範囲を逸脱しない限り様々な形態に変更することができる。

１ （ＡＩロボットによる）入退場管理システム、２ 音声初期設定部、３ 音声データ記録部、４ 音声特徴量抽出部、５ 識別番号特定部、６ 音声データベース、７ 音声データ、８ 音声特徴量，８ａ 言語的特徴量，８ｂ 音響的特徴量、９ａ，９ｂ 入退場管理ゲート、１０ （入退場する）社員、１１ 入退場管理部、１２，２７ 識別番号、１４ 受付、１５ 開閉ゲート、１６，１６ａ，１６ｂ エリアセンサ、１９ 入場者、２０ 来客者、２１ 表情初期設定部、２２ 表情データ記録部、２３ 表情特徴量抽出部、２４ 識別番号特定部、２５ 表情データベース、２６ 表情特徴量、２６ａ 顔の表情特徴量、２６ｂ 身体の表情特徴量、２８ 健康管理部、３０ 表情データ、３３ 来客者心理状態推定部、３４ 来客者管理部、３５ 来客者音声データ記録部、３６ 来客者表情データ記録部、３７ 来客者音声ビッグデータ、３８ 来客者表情ビッグデータ、４０ 健康に関する音声ビッグデータ、４１ 健康に関する表情ビッグデータ、４２ 担当社員１００ ＡＩロボット、１０１ａ 一方の腕部，１０１ｂ 他方の腕部、
１０２ａ，１０２ｂ 読取り装置（リーダーライター）、１０３ 非接触型ＩＣカード、１０４ スピーカ、１０５ 表示モニタ、１０６ アレーマイク、１０７ 動作スイッチ、１０９ 撮像カメラ。

Claims (11)

1. 社員が入退場する受付に配置されるＡＩロボットを用いた入退場管理システムであって、
   前記社員が前記ＡＩロボットに挨拶する際の音声データを録音し、前記社員の識別番号と紐付して初期設定し、音声データベースに登録する音声初期設定部と、
   入退場する前記社員が前記ＡＩロボットに挨拶する際の前記音声データを録音して記録する音声データ記録部と、
   前記音声データ記録部に記録された前記音声データから音声特徴量を抽出する音声特徴量抽出部と、
   前記音声特徴量を登録された前記音声データベースから検索して前記識別番号を特定する識別番号特定部と、を備えることを特徴とするＡＩロボットによる入退場管理システム。
2. 請求項１に記載のＡＩロボットによる入退場管理システムであって、
   前記ＡＩロボットは、一方の腕部に設けられた読み取り装置に非接触型ＩＣカードに記録された前記社員の前記識別番号を読み取らせて前記音声データの初期設定を行うことを特徴とするＡＩロボットによる入退場管理システム。
3. 請求項１又は２に記載のＡＩロボットによる入退場管理システムであって、前記社員は、一時外出する場合には前記ＡＩロボットの一方の腕部の読み取り装置に非接触型ＩＣカードに記録された前記社員の前記識別番号を読み取らせ、外出から帰社する際には、他方の腕部に設けられた前記読み取り装置に前記社員の前記非接触型ＩＣカードに記録された前記識別番号を読み取らせ、前記社員の滞在状況を確認し、変更又は修正可能なことを特徴とするＡＩロボットによる入退場管理システム。
4. 請求項１乃至３のいずれか１項に記載のＡＩロボットによる入退場管理システムであって、入退場管理部は、入退場管理ゲートに設けられたエリアセンサが感知した入場者のうち前記ＡＩロボットに挨拶をしない前記入場者に対しては、不正入場とみなして前記入場者の入場を拒否することを特徴とするＡＩロボットによる入退場管理システム。
5. 請求項１乃至４のいずれか１項に記載のＡＩロボットによる入退場管理システムであって、音声特徴量には、社員の前記ＡＩロボットに挨拶する際の言語的特徴量、又は前記社員の前記ＡＩロボットに挨拶する際の音響的特徴量が含まれることを特徴とするＡＩロボットによる入退場管理システム。
6. 社員がＡＩロボットに挨拶する際の表情データを社員の識別番号と紐付して初期設定し、表情データベースに登録する表情初期設定部と、
   入退場する前記社員が前記ＡＩロボットに挨拶する際の前記表情データを撮像カメラで撮影して記録する表情データ記録部と、
   前記表情データ記録部に記憶された前記表情データから表情特徴量を抽出する表情特徴量抽出部と、
   抽出された前記表情特徴量を前記表情データベースに登録された前記表情データと比較して前記社員の識別番号を特定する識別番号特定部と、
   を備えることを特徴とするＡＩロボットによる入退場管理システム。
7. 請求項６に記載のＡＩロボットによる入退場管理システムであって、
   抽出された前記表情特徴量を前記表情データベースに記録された前記社員の健康状態に関するビッグデータを参照して前記社員の健康状態を推測する健康管理部を備えることを特徴とするＡＩロボットによる入退場管理システム。
8. 請求項７に記載のＡＩロボットによる入退場管理システムであって、
   更に、抽出された音声特徴量を音声データベースに記録された前記社員の健康状態に関するビッグデータを参照して前記社員の健康状態を推測する健康管理部を備えることを特徴とするＡＩロボットによる入退場管理システム。
9. 請求項６又は８に記載のＡＩロボットによる入退場管理システムであって、来客者に対しては、前記ＡＩロボットは、前記来客者の顔又は身体の表情特徴量から前記来客者の心理状態を推測する心理状態推定部を備え、
   前記来客者の用件と共に前記来客者の心理状態を担当社員に報知することを特徴とするＡＩロボットによる入退場管理システム。
10. 請求項６乃至９のいずれか１項に記載のＡＩロボットによる入退場管理システムであって、入退場する来客者が前記ＡＩロボットに挨拶する際の音声データを記録する来客者音声データ記録部を備え、表情データには、音声データも含まれることを特徴とするＡＩロボットによる入退場管理システム。
11. 請求項６乃至１０のいずれか１項に記載のＡＩロボットによる入退場管理システムであって、表情特徴量には、社員の顔の表情特徴量、又は前記社員の身体の表情特徴量が含まれることを特徴とするＡＩロボットによる入退場管理システム。
    

Images