JP2023000493A - 情報処理装置、情報処理方法及び情報処理プログラム - Google Patents
情報処理装置、情報処理方法及び情報処理プログラム Download PDFInfo
- Publication number
- JP2023000493A JP2023000493A JP2021101353A JP2021101353A JP2023000493A JP 2023000493 A JP2023000493 A JP 2023000493A JP 2021101353 A JP2021101353 A JP 2021101353A JP 2021101353 A JP2021101353 A JP 2021101353A JP 2023000493 A JP2023000493 A JP 2023000493A
- Authority
- JP
- Japan
- Prior art keywords
- user
- information
- information processing
- unit
- language used
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 46
- 238000003672 processing method Methods 0.000 title claims description 10
- 230000009471 action Effects 0.000 claims abstract description 20
- 238000004891 communication Methods 0.000 claims description 18
- 238000000034 method Methods 0.000 claims description 18
- 238000010586 diagram Methods 0.000 description 14
- 238000012545 processing Methods 0.000 description 14
- 230000006399 behavior Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 238000010801 machine learning Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000009434 installation Methods 0.000 description 3
- 230000015654 memory Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 241001672694 Citrus reticulata Species 0.000 description 1
- 241000196324 Embryophyta Species 0.000 description 1
- 230000004308 accommodation Effects 0.000 description 1
- 238000003287 bathing Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 210000003462 vein Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
まず、図1を参照し、実施形態に係る情報処理装置が行う情報処理方法の概要について説明する。図1は、実施形態に係る情報処理方法の概要を示す説明図である。なお、図1では、海外からの訪日客(来訪者)への情報提供及び行動追跡をする場合を例に挙げて説明する。
ここで、図1を参照して、海外からの訪日客への情報提供及び行動追跡について説明する。
次に、図2を用いて、実施形態に係る情報提供装置100が含まれる情報処理システム1の構成について説明する。図2は、実施形態に係る情報処理システム1の構成例を示す図である。図2に示すように、実施形態に係る情報処理システム1は、情報提供装置100とスマートスピーカ200とカメラ300とを含む。これらの各種装置は、ネットワークNを介して、有線又は無線により通信可能に接続される。ネットワークNは、例えば、LAN(Local Area Network)や、インターネット等のWAN(Wide Area Network)である。
次に、図3を用いて、実施形態に係る情報提供装置100の構成について説明する。図3は、実施形態に係る情報提供装置100の構成例を示す図である。図3に示すように、情報提供装置100は、通信部110と、記憶部120と、制御部130とを有する。
通信部110は、例えば、NIC(Network Interface Card)等によって実現される。また、通信部110は、ネットワークN(図2参照)と有線又は無線で接続される。
記憶部120は、例えば、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、又は、HDD(Hard Disk Drive)、SSD(Solid State Drive)、光ディスク等の記憶装置によって実現される。図3に示すように、記憶部120は、訪日客情報データベース121と、提供情報データベース122とを有する。
訪日客情報データベース121は、海外からの訪日客(来訪者)等である利用者Uに関する各種情報を記憶する。図4は、訪日客情報データベース121の一例を示す図である。図4に示した例では、訪日客情報データベース121は、「利用者ID(Identifier)」、「音声」、「画像」、「取得場所」、「取得日時」、「使用言語」といった項目を有する。
提供情報データベース122は、同じ言語を使用する訪日客に対して提供すべき情報を記憶する。図5は、提供情報データベース122の一例を示す図である。図5に示した例では、提供情報データベース122は、「使用言語」、「滞在地」、「訪問先」、「情報」といった項目を有する。
図3に戻り、説明を続ける。制御部130は、コントローラ(Controller)であり、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等によって、情報提供装置100の内部の記憶装置に記憶されている各種プログラム(情報処理プログラムの一例に相当)がRAM等の記憶領域を作業領域として実行されることにより実現される。図3に示す例では、制御部130は、取得部131と、特定部132と、管理部133と、推定部134と、提供部135とを有する。
取得部131は、スマートスピーカ200が利用者U(ユーザ)と対話した際に、スマートスピーカ200及びカメラ300から、通信部110を介して、利用者Uの音声データ及び画像データを取得する。例えば、取得部131は、利用者Uと対話した店頭設置端末から利用者Uの音声データ及び画像データを取得する。あるいは、取得部131は、スマートスピーカ200及びカメラ300としての機能を有する利用者Uの端末装置10を介して利用者Uと対話した際に、利用者Uの端末装置10から利用者Uの音声データ及び画像データを取得する。
特定部132は、利用者Uの音声データに基づく音声認識、及び利用者Uの画像データに基づく画像認識により、利用者Uを特定する。また、特定部132は、利用者Uの端末装置10の識別情報から利用者Uを特定してもよい。
管理部133は、利用者Uを特定した場所と日時とを紐づけて利用者Uの行動履歴として蓄積する。すなわち、管理部133は、利用者Uの音声データ及び画像データを取得した場所及び日時を紐づけて利用者Uの行動履歴として蓄積する。このとき、管理部133は、利用者Uを特定した場所ごとに、利用者Uを特定した場所と日時とを紐づけて利用者Uの行動履歴として蓄積することで、利用者Uが提供部135による情報提供で案内された場所を訪れたことを示す履歴情報を蓄積する。
推定部134は、利用者Uの音声データから、利用者Uの使用言語を推定する。このとき、推定部134は、利用者Uとの対話(会話)の内容から、利用者Uの使用言語を推定してもよい。また、推定部134は、利用者Uが入力又は指定(選択)した文字の画像データから、利用者Uの使用言語を推定してもよい。あるいは、推定部134は、利用者Uが手にしているガイドブックや観光パンフレット等に記載されている言語から、利用者Uの使用言語を推定してもよい。また、推定部134は、利用者Uが入力又は指定(選択)した使用言語又は出身地に関する情報から、利用者Uの使用言語を推定してもよい。
提供部135は、利用者Uの使用言語による案内で利用者Uに情報提供する。このとき、提供部135は、利用者Uの使用言語による音声案内及び案内表示のうち少なくとも一方で利用者Uに情報提供してもよい。また、提供部135は、利用者Uの使用言語と、利用者Uの容姿、衣装及び所持品のうち少なくとも1つとに応じて、利用者Uへの情報提供の内容を変更する。
次に、図6を用いて実施形態に係る情報提供装置100、スマートスピーカ200及びカメラ300による処理手順について説明する。図6は、実施形態に係る処理手順を示すフローチャートである。なお、以下に示す処理手順は、情報提供装置100、スマートスピーカ200及びカメラ300によって繰り返し実行される。
上述した端末装置10及び情報提供装置100は、上記実施形態以外にも種々の異なる形態にて実施されてよい。そこで、以下では、実施形態の変形例について説明する。
上述してきたように、本願に係る情報処理装置(情報提供装置100)は、利用者U(ユーザ)と対話した際の利用者Uの音声を取得する取得部131と、音声認識により利用者Uを特定する特定部132と、利用者Uを特定した場所と日時とを紐づけて利用者Uの行動履歴として蓄積する管理部133と、利用者Uの使用言語により利用者Uが訪日外国人であると推定する推定部134と、利用者Uの使用言語に応じた情報提供をする提供部135と、を備える。
また、上述した実施形態に係る情報提供装置100は、例えば図7に示すような構成のコンピュータ1000によって実現される。以下、情報提供装置100を例に挙げて説明する。図7は、ハードウェア構成の一例を示す図である。コンピュータ1000は、出力装置1010、入力装置1020と接続され、演算装置1030、一次記憶装置1040、二次記憶装置1050、出力I/F(Interface)1060、入力I/F1070、ネットワークI/F1080がバス1090により接続された形態を有する。
以上、本願の実施形態を説明したが、これら実施形態の内容により本発明が限定されるものではない。また、前述した構成要素には、当業者が容易に想定できるもの、実質的に同一のもの、いわゆる均等の範囲のものが含まれる。さらに、前述した構成要素は適宜組み合わせることが可能である。さらに、前述した実施形態の要旨を逸脱しない範囲で構成要素の種々の省略、置換又は変更を行うことができる。
10 端末装置
100 情報提供装置
110 通信部
120 記憶部
121 訪日客情報データベース
122 提供情報データベース
130 制御部
131 取得部
132 特定部
133 管理部
134 推定部
135 提供部
Claims (12)
- ユーザと対話した際の前記ユーザの音声を取得する取得部と、
音声認識により前記ユーザを特定する特定部と、
前記ユーザを特定した場所と日時とを紐づけて前記ユーザの行動履歴として蓄積する管理部と、
前記ユーザの使用言語により前記ユーザが訪日外国人であると推定する推定部と、
前記ユーザの使用言語に応じた情報提供をする提供部と、
を備えることを特徴とする情報処理装置。 - 前記取得部は、前記ユーザと対話した際の前記ユーザの画像を取得し、
前記特定部は、画像認識により前記ユーザを特定する
ことを特徴とする請求項1に記載の情報処理装置。 - 前記推定部は、前記ユーザの使用言語と前記ユーザの容姿とにより前記ユーザが訪日外国人であると推定する
ことを特徴とする請求項2に記載の情報処理装置。 - 前記推定部は、前記ユーザの使用言語と前記ユーザの衣装及び所持品とにより前記ユーザが訪日外国人であると推定する
ことを特徴とする請求項2又は3に記載の情報処理装置。 - 前記提供部は、前記ユーザの使用言語と、前記ユーザの容姿、衣装及び所持品のうち少なくとも1つとに応じて、前記ユーザへの情報提供の内容を変更する
ことを特徴とする請求項2~4のうちいずれか1つに記載の情報処理装置。 - 前記提供部は、前記ユーザの使用言語による音声案内及び案内表示のうち少なくとも一方で前記ユーザに情報提供する
ことを特徴とする請求項1~5のうちいずれか1つに記載の情報処理装置。 - 前記管理部は、前記ユーザを特定した場所ごとに、前記ユーザを特定した場所と日時とを紐づけて前記ユーザの行動履歴として蓄積することで、前記ユーザが前記提供部による情報提供で案内された場所を訪れたことを示す履歴情報を蓄積する
ことを特徴とする請求項1~6のうちいずれか1つに記載の情報処理装置。 - 前記取得部は、前記ユーザと対話した店頭設置端末から前記ユーザの音声を取得する
ことを特徴とする請求項1~7のうちいずれか1つに記載の情報処理装置。 - 前記取得部は、前記ユーザの端末装置を介して前記ユーザと対話した際に、前記ユーザの端末装置から前記ユーザの音声を取得する
ことを特徴とする請求項1~8のうちいずれか1つに記載の情報処理装置。 - 前記取得部は、前記ユーザの端末装置と近距離無線通信を行った店頭設置端末から、前記店頭設置端末の所在情報と前記ユーザの端末装置の識別情報とを取得し、
前記特定部は、前記ユーザの端末装置の識別情報から前記ユーザを特定し、
前記管理部は、前記店頭設置端末の所在情報と前記ユーザの端末装置の識別情報を取得した日時とを紐づけて前記ユーザの行動履歴として蓄積し、
前記推定部は、前記ユーザが指定した使用言語により前記ユーザが訪日外国人であると推定し、
前記提供部は、前記ユーザが指定した使用言語に応じた情報提供をする
ことを特徴とする請求項1~9のうちいずれか1つに記載の情報処理装置。 - 情報処理装置が実行する情報処理方法であって、
ユーザと対話した際の前記ユーザの音声を取得する取得工程と、
音声認識により前記ユーザを特定する特定工程と、
前記ユーザを特定した場所と日時とを紐づけて前記ユーザの行動履歴として蓄積する蓄積工程と、
前記ユーザの使用言語により前記ユーザが訪日外国人であると推定する推定工程と、
前記ユーザの使用言語に応じた情報提供をする提供工程と、
を含むことを特徴とする情報処理方法。 - ユーザと対話した際の前記ユーザの音声を取得する取得手順と、
音声認識により前記ユーザを特定する特定手順と、
前記ユーザを特定した場所と日時とを紐づけて前記ユーザの行動履歴として蓄積する蓄積手順と、
前記ユーザの使用言語により前記ユーザが訪日外国人であると推定する推定手順と、
前記ユーザの使用言語に応じた情報提供をする提供手順と、
をコンピュータに実行させるための情報処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021101353A JP7459020B2 (ja) | 2021-06-18 | 2021-06-18 | 情報処理装置、情報処理方法及び情報処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021101353A JP7459020B2 (ja) | 2021-06-18 | 2021-06-18 | 情報処理装置、情報処理方法及び情報処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023000493A true JP2023000493A (ja) | 2023-01-04 |
JP7459020B2 JP7459020B2 (ja) | 2024-04-01 |
Family
ID=84687659
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021101353A Active JP7459020B2 (ja) | 2021-06-18 | 2021-06-18 | 情報処理装置、情報処理方法及び情報処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7459020B2 (ja) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5180116B2 (ja) | 2009-02-16 | 2013-04-10 | 富士フイルム株式会社 | 国籍判定装置、方法およびプログラム |
JP2015127884A (ja) | 2013-12-27 | 2015-07-09 | Necパーソナルコンピュータ株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP2017041120A (ja) | 2015-08-20 | 2017-02-23 | カシオ計算機株式会社 | 情報処理装置、情報処理システム、情報処理方法およびプログラム |
JP2019135629A (ja) | 2018-02-05 | 2019-08-15 | 株式会社東芝 | 案内装置および案内システム |
JP2020201322A (ja) | 2019-06-06 | 2020-12-17 | 株式会社日立製作所 | 案内ロボットシステム及び会話作成方法 |
-
2021
- 2021-06-18 JP JP2021101353A patent/JP7459020B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP7459020B2 (ja) | 2024-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10839605B2 (en) | Sharing links in an augmented reality environment | |
US20210295837A1 (en) | Non-Transitory Computer Readable Medium, Information Processing Method, Information Processing Device, and Information Processing System | |
Dadwal et al. | The augmented reality marketing: A merger of marketing and technology in tourism | |
KR101687927B1 (ko) | 이벤트 리뷰들을 획득하는 방법 및 시스템 | |
US10540707B2 (en) | Commercial information providing system and commercial information providing method | |
US11030422B2 (en) | Information display device and information display system | |
US20230297608A1 (en) | Method and system for producing story video | |
JP2011215964A (ja) | サーバ装置、クライアント装置、コンテンツ推薦方法及びプログラム | |
US10636207B1 (en) | Systems and methods for generating a three-dimensional map | |
García-Crespo et al. | CESARSC: Framework for creating cultural entertainment systems with augmented reality in smart cities | |
US9607094B2 (en) | Information communication method and information communication apparatus | |
WO2020240838A1 (ja) | 会話制御プログラム、会話制御方法および情報処理装置 | |
Abdelmoaty et al. | Smart Technology Applications in Tourism and Hospitality Industry of The New Administrative Capital, Egypt. | |
US20200013101A1 (en) | Systems and methods for providing an interactive virtual environment | |
US20210374199A1 (en) | A data communication system and method for use of the data communication system | |
US20230033675A1 (en) | Systems and methods for localized information provision using wireless communication | |
JP7459020B2 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
TW201629796A (zh) | 資訊多語言轉換系統 | |
Niculescu et al. | Designing muse: a multimodal user experience for a shopping mall kiosk | |
Paschou et al. | Intelligent mobile recommendations for exhibitions using indoor location services | |
Wolkowitz | Flesh and stone revisited: The body work landscape of South Florida | |
JP7481773B1 (ja) | 情報出力装置、情報出力プログラム、情報出力方法、及び情報出力システム | |
US20240048635A1 (en) | Method and system for transforming and integrating mobile device shopping interfaces across multiple shopping venues and carriers | |
US20160117698A1 (en) | System and Method for Context Dependent Streaming Services | |
Bakar et al. | Augmented reality meets artificial intelligence towards personalised user experience in cultural heritage sites |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230113 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20231026 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240305 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240319 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7459020 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |