JP2024085250A - 処理システム、処理方法、処理プログラム - Google Patents

Abstract

【課題】自律走行装置との協調によりユーザ嗜好性を満足するユーザサービスの提供を、可能にすること。【解決手段】サービス関連処理を遂行する処理システムのプロセッサは、ユーザが意図するサービスコンテンツＣｓ及び表示コンテンツＣｄを認識したコンテンツ情報Ｃｉを、ユーザが携帯するモバイル端末Ｍｔのセンシング情報に基づき取得することと、ユーザがモバイル端末Ｍｔを向けることにより表示背景となる背景エリアＡｂを、監視することと、サービスコンテンツＣｓに応じた種別のユーザサービスを、現在の背景エリアＡｂにおいて自律走行装置Ｍａの駆動制御により提供することと、ユーザサービスを提供する自律走行装置Ｍａが入る背景エリアＡｂの背景動画を表示するモバイル端末Ｍｔにおいて、表示コンテンツＣｄに応じたＸＲ画像を自律走行装置Ｍｔの存在位置Ｐｍに重畳表示することとを、実行するように構成される。【選択図】図５

Description

本開示は、ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行する処理技術に、関する。

特許文献１に開示の技術は、動画といったフレーム画像に表示コンテンツとしての仮想オブジェクトを寸法合わせして重畳させたコンテンツ画像を、モニタ、タッチパネル、又はＨＭＤ（Head Mounted Display）等の表示装置に表示させている。

特許第６６０９０７８号公報

上記特許文献１に開示の技術は、ライブコンテンツといった動画の配信サービスにおいて、ユーザを識別するためのアバターを仮想オブジェクトとして採用する技術に、留まっている。これに対して近年、ユーザサービスのコンテンツとなるサービスコンテンツは、そうした配信サービスに限らず多様化しており、例えば世界の諸国で建設が計画されるスマートシティ等では、自律走行装置と協調するサービスコンテンツが期待されている。それと共に表示コンテンツとしても、ユーザ識別用のアバターに限らず、多様化したサービスコンテンツとマッチするような画像によってユーザ嗜好性を満足することが、期待されている。

本開示の課題は、自律走行装置との協調によりユーザ嗜好性を満足するユーザサービスの提供を、可能にすることにある。

以下、課題を解決するための本開示の技術的手段について、説明する。尚、特許請求の範囲及び本欄に記載された括弧内の符号は、後に詳述する実施形態に記載された具体的手段との対応関係を示すものであり、本開示の技術的範囲を限定するものではない。

本開示の第一態様は、
プロセッサ（２４）を有し、ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行する処理システムであって、
プロセッサは、
ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、ユーザが携帯するモバイル端末（Ｍｔ）のセンシング情報に基づき取得することと、
ユーザがモバイル端末を向けることにより表示背景となる背景エリア（Ａｂ）を、監視することと、
コンテンツ情報のうちサービスコンテンツに応じた種別のユーザサービスを、現在の背景エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
ユーザサービスを提供する自律走行装置が入る背景エリアの背景動画（２ｃ）を表示するモバイル端末において、コンテンツ情報のうち表示コンテンツに応じたＸＲ画像（２ａ）を自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、実行するように構成される。

本開示の第二態様は、
ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行するために、プロセッサ（２４）により実行される処理方法であって、
ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、ユーザが携帯するモバイル端末（Ｍｔ）のセンシング情報に基づき取得することと、
ユーザがモバイル端末を向けることにより表示背景となる背景エリア（Ａｂ）を、監視することと、
コンテンツ情報のうちサービスコンテンツに応じた種別のユーザサービスを、現在の背景エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
ユーザサービスを提供する自律走行装置が入る背景エリアの背景動画（２ｃ）を表示するモバイル端末において、コンテンツ情報のうち表示コンテンツに応じたＸＲ画像（２ａ）を自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、含む。

本開示の第三態様は、
ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行するために記憶媒体（２２）に記憶され、プロセッサ（２４）により実行される命令を含む処理プログラムであって、
命令は、
ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、ユーザが携帯するモバイル端末（Ｍｔ）のセンシング情報に基づき取得させることと、
ユーザがモバイル端末を向けることにより表示背景となる背景エリア（Ａｂ）を、監視させることと、
コンテンツ情報のうちサービスコンテンツに応じた種別のユーザサービスを、現在の背景エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供させることと、
ユーザサービスを提供する自律走行装置が入る背景エリアの背景動画（２ｃ）を表示するモバイル端末において、コンテンツ情報のうち表示コンテンツに応じたＸＲ画像（２ａ）を自律走行装置の存在位置（Ｐｍ）に重畳表示させることとを、含む。

これら第一～第三態様によると、ユーザの意図するサービスコンテンツを認識したコンテンツ情報が、ユーザの携帯するモバイル端末のセンシング情報に基づき取得される。それと共に、ユーザがモバイル端末を向けることにより表示背景となる背景エリアが、監視される。そこで、サービスコンテンツに応じた種別のユーザサービスが、現在の背景エリアにおいて自律走行装置の駆動制御により提供される。これは、多様化したユーザサービスの中でも、自律走行装置との協調によりユーザ嗜好性を満足するユーザサービスを提供可能なことを、意味する。

しかも第一～第三態様によると、ユーザが意図する表示コンテンツを認識したコンテンツ情報も、モバイル端末のセンシング情報に基づき取得される。そこで、上述の如くユーザサービスを提供する自律走行装置が入る背景エリアの背景動画を表示するモバイル端末においては、表示コンテンツに応じたＸＲ画像が自律走行装置の存在位置に重畳表示される。これは、自律走行装置によって提供のサービスコンテンツとマッチする表示コンテンツに応じたＸＲ画像の重畳表示により、ユーザ嗜好性の満足度を高めることが可能なことを、意味する。

本開示の第四態様は、
プロセッサ（２４）を有し、ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行する処理システムであって、
プロセッサは、
ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、ユーザが装着するウェアラブル端末（Ｗｔ）のセンシング情報に基づき取得することと、
ウェアラブル端末を通してユーザにより視認される視界エリア（Ａｖ）を、監視することと、
コンテンツ情報のうちサービスコンテンツに応じた種別のユーザサービスを、現在の視界エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
ユーザサービスを提供する自律走行装置が視界エリアに入るウェアラブル端末において、コンテンツ情報のうち表示コンテンツに応じたＸＲ画像（２ａ）を自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、実行するように構成される。

本開示の第五態様は、
ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行するために、プロセッサ（２４）により実行される処理方法であって、
ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、ユーザが装着するウェアラブル端末（Ｗｔ）のセンシング情報に基づき取得することと、
ウェアラブル端末を通してユーザにより視認される視界エリア（Ａｖ）を、監視することと、
コンテンツ情報のうちサービスコンテンツに応じた種別のユーザサービスを、現在の視界エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
ユーザサービスを提供する自律走行装置が視界エリアに入るウェアラブル端末において、コンテンツ情報のうち表示コンテンツに応じたＸＲ画像（２ａ）を自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、含む。

本開示の第六態様は、
ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行するために記憶媒体（２２）に記憶され、プロセッサ（２４）により実行される命令を含む処理プログラムであって、
命令は、
ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、ユーザが装着するウェアラブル端末（Ｗｔ）のセンシング情報に基づき取得させることと、
ウェアラブル端末を通してユーザにより視認される視界エリア（Ａｖ）を、監視させることと、
コンテンツ情報のうちサービスコンテンツに応じた種別のユーザサービスを、現在の視界エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供させることと、
ユーザサービスを提供する自律走行装置が視界エリアに入るウェアラブル端末において、コンテンツ情報のうち表示コンテンツに応じたＸＲ画像（２ａ）を自律走行装置の存在位置（Ｐｍ）に重畳表示させることとを、含む。

これら第四～第六態様によると、ユーザの意図するサービスコンテンツを認識したコンテンツ情報が、ユーザの装着するウェアラブル端末のセンシング情報に基づき取得される。それと共に、ウェアラブル端末を通してユーザにより視認される視界エリアが、監視される。そこで、サービスコンテンツに応じた種別のユーザサービスが、現在の視界エリアにおいて自律走行装置の駆動制御により提供される。これは、多様化したユーザサービスの中でも、自律走行装置との協調によりユーザ嗜好性を満足するユーザサービスを提供可能なことを、意味する。

しかも第四～第六態様によると、ユーザが意図する表示コンテンツを認識したコンテンツ情報も、モバイル端末のセンシング情報に基づき取得される。そこで、上述の如くユーザサービスを提供する自律走行装置が視界エリアに入るウェアラブル端末において、表示コンテンツに応じたＸＲ画像が自律走行装置の存在位置に重畳表示される。これは、自律走行装置によって提供のサービスコンテンツとマッチする表示コンテンツに応じたＸＲ画像の重畳表示により、ユーザ嗜好性の満足度を高めることが可能なことを、意味する。

第一実施形態による処理システムのネットワーク接続環境を示す全体構成図である。 第一実施形態によるモバイル端末の表示状態を示す構成図である。 第一実施形態によるインフラシステムにおいて想定される三次元ボクセルを説明するための模式図である。 第一実施形態による処理システムを示すブロック図である。 第一実施形態による処理フローを示すフローチャートである 第一実施形態によるモバイル端末の表示状態を示す構成図である。 第一実施形態によるモバイル端末の表示状態を示す構成図である。 第一実施形態によるモバイル端末の背景エリアを示す斜視図である。 第一実施形態による自律走行装置の駆動制御パターンを説明するための斜視図である。 第一実施形態によるモバイル端末の表示状態を示す構成図である。 第二実施形態による処理システムのネットワーク接続環境を示す全体構成図である。 第二実施形態によるウェアラブル端末の表示状態を示す構成図である。 第二実施形態による処理システムを示すブロック図である。 第二実施形態による処理フローを示すフローチャートである

以下、本開示の実施形態を図面に基づき複数説明する。尚、各実施形態において対応する構成要素には同一の符号を付すことで、重複する説明を省略する場合がある。また、各実施形態において構成の一部分のみを説明している場合、当該構成の他の部分については、先行して説明した他の実施形態の構成を適用することができる。さらに、各実施形態の説明において明示している構成の組み合わせばかりではなく、特に組み合わせに支障が生じなければ、明示していなくても複数の実施形態の構成同士を部分的に組み合わせることができる。

（第一実施形態）
図１に示す第一実施形態の処理システム１は、ユーザＵｓへ提供されるユーザサービスに関連した、サービス関連処理を遂行する。そのために処理システム１は、事前登録されたユーザＵｓの携帯するモバイル端末Ｍｔと、自律走行する自律走行装置Ｍａと、インフラ情報を提供するインフラシステムＩｓとに、通信ネットワークＮｃを介して接続される。処理システム１との接続要素Ｍｔ，Ｍａ，Ｉｓとしては、それぞれ少なくとも一つずつが想定される。

図１，２に示すようにモバイル端末Ｍｔは、少なくとも処理システム１への接続時には、同システム１のユーザＵｓが手指で把持且つ操作可能に、構成されている。モバイル端末Ｍｔは、表示ユニット２及びセンサユニット３を備えた小型電子デバイスであって、例えばスマートフォン又はタブレット端末等である。モバイル端末Ｍｔは、通信ネットワークＮｃを介したデータの送受信を、通信ユニットにより制御する。モバイル端末Ｍｔは、処理システム１と共同してサービス関連処理を遂行するように、通信ネットワークＮｃを介した同システム１からの制御指令に従って制御ユニットにより作動制御される。

モバイル端末Ｍｔの制御ユニットによる作動制御下、例えば液晶パネル又は有機ＥＬパネル等の表示ユニット２には、サービス関連処理に必要な表示が図２の如く実現される。それと共に、モバイル端末Ｍｔの作動制御下においてセンサユニット３は、サービス関連処理に応じたセンシング処理により、センシング情報を取得する。センサユニット３としては、例えばカメラ、慣性センサ、ＧＮＳＳ（Global Navigation Satellite System）センサ、タッチセンサ、及びマイク等のうち、少なくとも一種類が採用される。こうした構成によりセンサユニット３は、ユーザＵｓの意図を表す、同ユーザＵｓからの入力を、センシング情報として取得可能となっている。

図１に示す自律走行装置Ｍａは、センサユニット４によるセンシング情報に基づいて車輪５を電動駆動することで前後左右の任意方向へ自律走行可能な、自動走行車両又は自動走行ロボットである。自律走行装置Ｍａは、通信ネットワークＮｃを介したデータの送受信を、通信ユニットにより制御する。自律走行装置Ｍａは、処理システム１と共同してサービス関連処理を遂行するように、通信ネットワークＮｃを介した同システム１からの制御指令に従って制御ユニットにより駆動制御される。この駆動制御下においてセンサユニット４は、サービス関連処理に応じたセンシング処理により、センシング情報を取得する。センサユニット４としては、例えばカメラ、慣性センサ、ＧＮＳＳセンサ、ＬｉＤＡＲ（Light Detection and Ranging / Laser Imaging Detection and Ranging）、及びソナー等のうち、少なくとも一種類が採用される。

インフラシステムＩｓは、分散型アーキテクチャの共通基盤として、インフラデータベースＤｉに蓄積される三次元空間情報Ｔｉを共有する、基盤システムである。インフラシステムＩｓは、通信ネットワークＮｃを介したデータの送受信を、通信ユニットにより制御する。インフラシステムＩｓは、分散型アーキテクチャを構成する処理システム１等の個別分散システムへと提供する三次元空間情報Ｔｉを、制御ユニットにより随時収集してインフラデータベースＤｉの蓄積情報を最新情報に更新する。

ここで特にインフラシステムＩｓは、情報の蓄積対象とする三次元空間を、図３に示すように三次元配列状に想定される複数の三次元ボクセルＶｉ（即ち、三次元グリッド）に仮想分割して、情報管理する。インフラシステムＩｓは、各ボクセルＶｉに個別に付与される空間ＩＤ毎にメタデータによって紐付けられたデータセットを三次元空間情報Ｔｉとして、図１の如くインフラデータベースＤｉに蓄積する。ここで三次元空間情報Ｔｉは、三次元配列のうち地面に沿った二次元配列の最下層を構成するボクセルＶｉの、例えば下面にのみ紐付けられた二次元グリッド情報を含んでいても、勿論よい。

三次元空間情報Ｔｉを構築するデータは、処理システム１と共同するモバイル端末Ｍｔ、及びそれ以外のモバイル端末、並びに例えばＨＭＤ又はスマートグラス等のウェアラブル端末のうち、少なくとも一種類から収集されてもよい。三次元空間情報Ｔｉを構築するデータは、処理システム１と共同する自律走行装置Ｍａ、及びそれ以外の移動体のうち、少なくとも一種類から収集されてもよい。三次元空間情報Ｔｉを構築するデータは、カメラ及び／又はＬｉＤＡＲといったインフラセンサを備えた、例えば通信基地局、スマートポール、及びスマート街路灯等のうち、少なくとも一種類から収集されてもよい。三次元空間情報Ｔｉを構築するデータは、例えば地図サービス、気象サービス、通信サービス、交通管理サービス、地物管理サービス、及び航空管理サービス、並びに処理システム１が扱う後述のユーザサービス等のうち、少なくとも一種類を提供するサービサーから収集されてもよい。

このように収集されて三次元空間情報Ｔｉを構築する構築データは、例えば動画、静止画、点群画像等のうち、少なくとも一種類の画像データであってもよい。三次元空間情報Ｔｉの構築データは、そうした画像データの画像処理により情報蓄積の対象空間内において処理システム１のユーザＵｓを含む人間に関して生成された、例えば位置データ、運動データ、姿勢データ、視線データ、行動データ、及び人流データ、並びに後述するユーザＵｓの意図を表す意図データ等のうち、情報セキュリティが担保される少なくとも一種類の二次データであってもよい。三次元空間情報Ｔｉの構築データは、情報蓄積対象空間内においてユーザＵｓのモバイル端末Ｍｔを含む、人間の携行品に関して画像データの画像処理により生成された、例えば位置データ、運動データ、及び姿勢データ等のうち、少なくとも一種類の二次データであってもよい。三次元空間情報Ｔｉの構築データは、情報蓄積対象空間内において自律走行装置Ｍａを含む移動体に関して画像データの画像処理により生成された、例えば位置データ、運動データ、及び姿勢データ等のうち、少なくとも一種類の二次データであってもよい。

三次元空間情報Ｔｉの構築データは、情報蓄積対象空間内において処理システム１のユーザＵｓを含む人間の音声を収集した、音声データであってもよい。三次元空間情報Ｔｉの構築データは、そうした音声データの音声認識処理によりユーザＵｓを含む人間に関して分析された、例えば位置データ、運動データ、行動データ、人流データ、及び会話データ、並びに後述するユーザＵｓの意図を表す意図データ等のうち、情報セキュリティが担保される少なくとも一種類の二次データであってもよい。三次元空間情報Ｔｉの構築データは、例えば二次元及び／又は三次元地図データ、ＧＩＳ（Geographic Information System）データ、道路ネットワークデータ、気象データ、通信データ、回線データ、交通データ、地物管理データ、ＢＩＭ（Building Information Modelling）データ、ＰＯＩ（Point of Interest）データ、航空管理データ、並びに時間データ等のうち、少なくとも一種類であってもよい。三次元空間情報Ｔｉの構築データは、処理システム１の扱うユーザサービスとして後述する、例えば撮影サービス、ゴミ箱案内サービス、配送サービス、及び誘導サービス等のうち、少なくとも一種類に関連するサービスデータであってもよい。

図１に示すように処理システム１は、通信系１０及び制御系２０を備えた、例えばクラウドサーバ、並びにエッジサーバ等のうち、少なくとも一種類を含んで構築される分散コンピュータシステムである。処理システム１における各系１０，２０の少なくとも一部ずつは、それぞれモバイル端末Ｍｔの通信ユニット及び制御ユニットにより構成されてもよい。処理システム１における各系１０，２０の少なくとも一部ずつは、それぞれ自律走行装置Ｍａの通信ユニット及び制御ユニットにより構成されてもよい。処理システム１における各系１０，２０の少なくとも一部ずつは、それぞれインフラシステムＩｓの通信ユニット及び制御ユニットにより構成されてもよい。

通信系１０は、通信ネットワークＮｃを構築するための、通信機器を主体に構成されている。制御系２０は、有線通信回線及び無線通信回線のうち少なくとも一種類を介して、通信系１０に接続される。制御系２０は、少なくとも一つの専用コンピュータを含んで構築されている。制御系２０を構築する専用コンピュータは、メモリ２２及びプロセッサ２４を、少なくとも一つずつ有している。

こうした処理システム１において制御系２０は、メモリ２２に記憶された処理プログラムの複数命令を、プロセッサ２４により実行する。これにより制御系２０は、ユーザＵｓへ提供されるユーザサービスに関連した、サービス関連処理を遂行するための機能ブロックが、複数構築される。構築される機能ブロックには、図４に示すように認識ブロック２００、監視ブロック２１０、駆動制御ブロック２２０、及び表示制御ブロック２３０が含まれている。

これらのブロック２００，２１０，２２０，２３０の共同により処理システム１がサービス関連処理を遂行する処理方法は、図５に示す処理フローに従って実行される。本処理フローは、ユーザＵｓがユーザサービス提供を要請する意図となる、サービス要請入力をモバイル端末Ｍｔのセンサユニット３がセンシング情報として取得するのに応じて、実行される。尚、本処理フローにおける各「Ｓ」は、第一実施形態の処理プログラムに含まれた複数命令により実行される複数ステップを、それぞれ意味している。

処理フローのＳ２００において認識ブロック２００（図４参照）は、ユーザＵｓが意図するサービスコンテンツＣｓ及び表示コンテンツＣｄを認識したコンテンツ情報Ｃｉを、同ユーザＵｓの携帯するモバイル端末Ｍｔのセンシング情報に基づき取得する。このＳ２００において認識されるサービスコンテンツＣｓとは、処理システム１のユーザＵｓへ提供可能なユーザサービスの種別を、意味する。ここで、サービスコンテンツＣｓに応じたユーザサービスの種別としては、第一実施形態では撮影サービス、ゴミ箱案内サービス、配送サービス、及び誘導サービスのうち、少なくとも二種類が用意される。

Ｓ２００において認識される表示コンテンツＣｄとは、サービスコンテンツＣｓに応じたユーザサービスの提供に伴って図２，６に示すようにモバイル端末Ｍｔの表示ユニット２に表示させるＸＲ画像２ａ，２ｄ，２ｅのうち、特にＸＲ画像２ａの種別を意味する。ここで、表示コンテンツＣｄとしてユーザＵｓの意図する種別が認識されるＸＲ画像２ａには、例えばモンスター、動物、植物、昆虫といった仮想上又は実在上の生物等を二次元若しくは三次元で表した、複数種別のキャラクター画像が用意される。これに対して、ＸＲ画像２ａの種別に応じた共通テーマを与えられるＸＲ画像２ｄ，２ｅには、例えばモンスター、動物、植物、昆虫といった仮想上又は実在上の生物、並びに前時代建物、サービス車両、及び空想物体といった無生物等を二次元若しくは三次元で表した、複数種別のキャラクター画像が用意される。

図５のＳ２００において、サービスコンテンツＣｓ及び表示コンテンツＣｄをそれぞれ認識するためのセンシング情報は、ユーザＵｓの意図としてセンサユニット３へと入力されることで、モバイル端末Ｍｔの通信ユニットを通じて取得される。このときモバイル端末Ｍｔの表示ユニット２には、サービスコンテンツＣｓ及び表示コンテンツＣｄのユーザＵｓからの選択入力として、センサユニット３によりタッチ入力を受け付けるための入力受付画像２ｂが、図７に示すように表示されてもよい。サービスコンテンツＣｓ及び表示コンテンツＣｄのユーザＵｓからの選択入力としては、ユーザＵｓによるジェスチャー入力、視線入力、表情入力、又は音声入力がセンサユニット３によりセンシングされてもよい。こうしたジェスチャー入力、視線入力、表情入力、又は音声入力は、インフラデータベースＤｉから取得の三次元空間情報Ｔｉに基づき認識されてもよい。

図５に示す処理フローのＳ２１０において監視ブロック２１０（図４参照）は、ユーザＵｓがモバイル端末Ｍｔを向けることにより図８に示すように表示ユニット２でのＸＲ画像２ａの表示背景となる背景エリアＡｂを、監視する。このとき背景エリアＡｂは、インフラシステムＩｓにより複数ボクセルＶｉが図３の如く想定される情報蓄積対象空間のうち、サービスコンテンツＣｓに応じた種別のユーザサービスが図８の如く提供されるサービス空間Ａｓにおいて、監視される。そこで、モバイル端末Ｍｔのセンサユニット３によるセンシング情報のうち、例えばカメラ情報、及び慣性情報等のうち少なくとも一方に基づくことで、モバイル端末Ｍｔの向く方位に広がる背景エリアＡｂの監視は実行される。

図５に示す処理フローのＳ２２０において駆動制御ブロック２２０（図４参照）は、コンテンツ情報ＣｉのうちサービスコンテンツＣｓに応じた種別のユーザサービスを、現在の背景エリアＡｂにおいて自律走行装置Ｍａの駆動制御により提供する。このときユーザサービスは、サービスコンテンツＣｓに合わせた自律走行装置Ｍａの駆動制御パターンがメモリ２２から読み出されることで、当該駆動制御パターンに従って提供される。

こうしたＳ２２０による撮影サービスは、撮像ユニットを保有する自律走行装置Ｍａを待機位置からユーザＵｓの目前位置又はユーザＵｓ周辺のランドマークまで駆動して、ユーザＵｓを周囲から撮影後、待機位置まで戻る駆動制御パターンによって提供される。このとき撮影サービスでは、自律走行装置Ｍａの保有する音声ユニットからの音声出力により、撮影タイミング又は撮影期間がユーザＵｓへ提示されてもよい。撮影サービスでは、自律走行装置Ｍａの保有する表示ユニットからの表示出力により、撮影タイミング又は撮影期間がユーザＵｓへ提示されてもよい。

撮影サービスでは、図９に白抜矢印で例示の如くユーザＵｓの周りを駆動される自律走行装置Ｍａにより、二次元若しくは三次元の静止画又は動画が当該ユーザＵｓを含むように撮影されてもよい。撮影サービスでは、自律走行装置Ｍａにおける例えばＬｉＤＡＲ等のセンサユニット４によりセンシングされる、ユーザＵｓまでの距離に基づくことで、撮影時のフォーカスが調整されてもよい。撮影サービスでは、インフラデータベースＤｉから取得の三次元空間情報Ｔｉ、又は自律走行装置Ｍａにおける例えばカメラ等のセンサユニット４からのセンシング情報に基づくことで、撮影時の外光入射方位が調整されてもよい。

Ｓ２２０によるゴミ箱案内サービスは、ゴミ箱を保有する自律走行装置Ｍａを待機位置からユーザＵｓの目前位置まで駆動して、ユーザＵｓが意図するゴミの当該ゴミ箱への廃棄を受け付けた後、待機位置まで戻る駆動制御パターンによって提供される。このときゴミ箱案内サービスでは、自律走行装置Ｍａの保有する音声ユニットからの音声出力により、ゴミ箱へのゴミの廃棄がユーザＵｓへ指示されてもよい。ゴミ箱案内サービスでは、自律走行装置Ｍａの保有する表示ユニットからの表示出力により、ゴミ箱へのゴミの廃棄がユーザＵｓへ指示されてもよい。

Ｓ２２０による配送サービスは、配送箱を保有する自律走行装置Ｍａを待機位置からユーザＵｓの目前位置まで駆動して、ユーザＵｓが意図する荷物の当該配送箱への積載を受け付けた後、待機位置まで戻る駆動制御パターンによって提供される。このとき配送サービスでは、自律走行装置Ｍａの保有する音声ユニットからの音声出力により、配送箱への荷物の積載がユーザＵｓへ指示されてもよい。配送サービスでは、自律走行装置Ｍａの保有する表示ユニットからの表示出力により、配送箱への荷物の積載がユーザＵｓへ指示されてもよい。

Ｓ２２０による誘導サービスは、自律走行装置Ｍａを待機位置からユーザＵｓ又は登録済家族といった誘導対象者の目前位置まで駆動して、当該誘導対象者を先導する経路誘導を実行後、待機位置まで戻る駆動制御パターンによって提供される。このとき誘導サービスでは、自律走行装置Ｍａの保有する音声ユニットからの音声出力により、誘導対象者を誘導する経路が指示されてもよい。誘導サービスでは、自律走行装置Ｍａの保有する表示ユニットからの表示出力により、誘導対象者を誘導する経路が指示されてもよい。さらに、こうした経路指示に先立ってモバイル端末Ｍｔでは、例えば目的地及び／又は利用希望の交通機関等といった経路関連情報のユーザＵｓからの入力を、センサユニット３により受け付けるための入力受付画像が、表示ユニット２に表示されてもよい。また、経路指示に伴って自律走行装置Ｍａには、保有する配送箱に誘導対象者の手荷物を収容して運搬する駆動制御パターンが、与えられてもよい。

図５に示す処理フローのＳ２３０は、Ｓ２２０と並行して実行される。Ｓ２３０において表示制御ブロック２３０（図４参照）は、Ｓ２２０によりユーザサービスを提供する自律走行装置Ｍａが図８，９の如く入る背景エリアＡｂの背景動画２ｃを、モバイル端末Ｍｔの表示ユニット２に図２，６の如く表示させる。ここで背景動画２ｃは、例えばカメラ等のセンサユニット４によるセンシング情報、又はインフラデータベースＤｉから取得の三次元空間情報Ｔｉに基づき、取得される。このとき背景動画２ｃには、背景エリアＡｂを撮影した一次動画データが用いられてもよいし、当該一次データにおける例えば地面又は空等の一部に加工を施した二次動画データが用いられてもよい。

そこで、図５のＳ２３０における表示制御ブロック２３０は、コンテンツ情報Ｃｉのうち表示コンテンツＣｄに応じたＸＲ画像２ａを、図２，６の如く表示ユニット２に表示される背景動画２ｃ上での自律走行装置Ｍａの存在位置Ｐｍに、重畳表示させる。このときＸＲ画像２ａの重畳表示位置は、Ｓ２２０による自律走行装置Ｍａの駆動制御パターンに従う、背景動画２ｃ上での存在位置Ｐｍに合わせて、調整される。これにより、背景動画２ｃ上における自律走行装置Ｍａの存在位置Ｐｍには、ＸＲ画像２ａが置換表示されることになる。

Ｓ２３０における表示制御ブロック２３０は、自律走行装置Ｍａと共に背景エリアＡｂに図８の如く入る他物体Ｏｏの存在位置Ｐｏにも、図２，６の如くＸＲ画像２ｄを重畳表示させる。このときＸＲ画像２ｄの重畳表示位置は、他物体Ｏｏの存在位置Ｐｏに合わせて調整される。こうして背景動画２ｃ上での存在位置ＰｏにＸＲ画像２ｄが置換表示される他物体Ｏｏは、例えば処理システム１のユーザＵｓ以外の人、処理システム１と共同する自律走行装置Ｍａ以外の移動体、及び地物等のうち少なくとも一種類となる。

Ｓ２３０において表示制御ブロック２３０は、図３の如くサービス空間Ａｓを仮想分割した複数ボクセルＶｉに対して、自律走行装置Ｍａ及び他物体Ｏｏの各存在位置Ｐｍ，Ｐｏに関連する位置関連情報がそれぞれ付加された三次元空間情報Ｔｉを、インフラデータベースＤｉから取得する。そこでＳ２３０における表示制御ブロック２３０は、取得の三次元空間情報Ｔｉに基づいた各存在位置Ｐｍ，Ｐｏに、それぞれＸＲ画像２ａ，２ｄを重畳表示する。これにより特に第一実施形態では、コンテンツ情報Ｃｉのうち表示コンテンツＣｄに関連するキャラクター画像が、ＸＲ画像２ａ，２ｄとして各存在位置Ｐｍ，Ｐｏに重畳表示されることになる。

Ｓ２３０における表示制御ブロック２３０は、背景エリアＡｂにおいて自律走行装置Ｍａ及び他物体Ｏｏの各存在位置Ｐｍ，Ｐｏ以外となる景色に、図２の如くＸＲ画像２ｅを重畳表示させてもよい。この場合に第一実施形態ではＸＲ画像２ｅとしても、表示コンテンツＣｄに関連するキャラクター画像が、重畳表示されるとよい。それと共に、ＸＲ画像２ｅの重畳表示位置は、ＸＲ画像２ａ，２ｄの各重畳位置からは外れるように、インフラデータベースＤｉから取得の三次元空間情報Ｔｉに基づき調整されるとよい。

こうしたＳ２３０により撮影サービス中は、ユーザＵｓを撮影するために駆動される自律走行装置Ｍａの存在位置Ｐｍとその周囲物体Ｏｏの存在位置Ｐｏとに少なくともＸＲ画像２ａ，２ｄの重畳された背景動画２ｃが、ユーザＵｓへと表示出力される。このとき、図９に示すユーザＵｓ及びその背景エリアを撮影した撮影画像２ｆとしての静止画又は動画が、図２の背景動画２ｃから図１０に示すように切り替えて表示されることで、ユーザＵｓ及び同伴者のうち少なくとも前者の当該撮影画像２ｆにおける存在位置ＰｓにＸＲ画像２ａが重畳表示されてもよい。こうしてユーザＵｓ及び背景エリアを撮影した撮影画像２ｆにＸＲ画像２ａの重畳した画像データは、モバイル端末Ｍｔの内部又は外部の記憶媒体に保存されてもよい。

Ｓ２３０によりゴミ箱案内サービス中は、ユーザＵｓからゴミの廃棄を受け付けるために駆動される自律走行装置Ｍａの存在位置Ｐｍとその周囲物体Ｏｏの存在位置Ｐｏとに少なくともＸＲ画像２ａ，２ｄの重畳された背景動画２ｃが、ユーザＵｓへと表示出力される。このとき自律走行装置Ｍａに対応するＸＲ画像２ａは、ゴミ箱の廃棄口を生物の口に模した、キャラクター画像であってもよい。自律走行装置Ｍａに対応するＸＲ画像２ａは、ゴミ箱の複数廃棄口のうち、廃棄されるゴミの種別に応じた廃棄口を指示する指示画像を、含んでいてもよい。

Ｓ２３０により配送サービス中は、ユーザＵｓから荷物の積載を受け付けるために駆動される自律走行装置Ｍａの存在位置Ｐｍとその周囲物体Ｏｏの存在位置Ｐｏとに少なくともＸＲ画像２ａ，２ｄの重畳された背景動画２ｃが、ユーザＵｓへと表示出力される。このとき自律走行装置Ｍａに対応するＸＲ画像２ａは、配送箱の積載口を生物の口に模した、キャラクター画像であってもよい。

Ｓ２３０により誘導サービス中は、誘導対象者を誘導するために駆動される自律走行装置Ｍａの存在位置Ｐｍとその周囲物体Ｏｏの存在位置Ｐｏとに少なくともＸＲ画像２ａ，２ｄの重畳された背景動画２ｃが、当該誘導対象者へと表示出力される。このとき、誘導する経路の背景エリアを撮影した撮影画像としての静止画又は動画が、背景動画２ｃから切り替えて表示されてもよい。こうして誘導経路の背景エリアを撮影した撮影画像の画像データは、モバイル端末Ｍｔの内部又は外部の記憶媒体に保存されてもよい。

以上の図５に示す第一実施形態の処理フローは、コンテンツ情報ＣｉのうちサービスコンテンツＣｓに応じたユーザサービスの提供が、Ｓ２２０，Ｓ２３０により終了すると、今回実行の完了となる。その後、次のサービス要請入力がモバイル端末Ｍｔのセンサユニット３を通じて取得されると、処理フローの次回実行が開始されることとなる。

（作用効果）
ここまで説明した第一実施形態の作用効果を、以下に説明する。

第一実施形態によると、ユーザＵｓの意図するサービスコンテンツＣｓを認識したコンテンツ情報Ｃｉが、ユーザＵｓの携帯するモバイル端末Ｍｔのセンシング情報に基づき取得される。それと共に、ユーザＵｓがモバイル端末Ｍｔを向けることにより表示背景となる背景エリアＡｂが、監視される。そこで、サービスコンテンツＣｓに応じた種別のユーザサービスが、現在の背景エリアＡｂにおいて自律走行装置Ｍａの駆動制御により提供される。これは、多様化したユーザサービスの中でも、自律走行装置Ｍａとの協調によりユーザ嗜好性を満足するユーザサービスを提供可能なことを、意味する。

しかも第一実施形態によると、ユーザＵｓが意図する表示コンテンツＣｄを認識したコンテンツ情報Ｃｉも、モバイル端末Ｍｔのセンシング情報に基づき取得される。そこで、上述の如くユーザサービスを提供する自律走行装置Ｍａが入る背景エリアＡｂの背景動画２ｃを表示するモバイル端末Ｍｔにおいては、表示コンテンツＣｄに応じたＸＲ画像２ａが自律走行装置Ｍａの存在位置Ｐｍに重畳表示される。これは、自律走行装置Ｍａによって提供のサービスコンテンツＣｓとマッチする表示コンテンツＣｄに応じたＸＲ画像２ａの重畳表示により、ユーザ嗜好性の満足度を高めることが可能なことを、意味する。

第一実施形態によると、自律走行装置Ｍａと共に背景エリアＡｂに入る他物体Ｏｏの存在位置Ｐｏにも、ＸＲ画像２ｄが重畳表示される。これによれば、自律走行装置Ｍａによって提供のサービスコンテンツＣｓとマッチする表示コンテンツＣｄに応じたＸＲ画像２ａ，２ｄの重畳表示を、背景エリアＡｂの背景動画２ｃにおける広範囲において実現して、ユーザ嗜好性の満足度を高めることが可能となる。

第一実施形態によると、ユーザサービスの提供されるサービス空間Ａｓを仮想分割した複数の三次元ボクセルＶｉには、自律走行装置Ｍａ及び他物体Ｏｏの各存在位置Ｐｍ，Ｐｏに関連する位置関連情報の付加された三次元空間情報Ｔｉが、インフラデータベースＤｉから取得される。そこで、取得の三次元空間情報Ｔｉに基づいた自律走行装置Ｍａ及び他物体Ｏｏの各存在位置Ｐｍ，Ｐｏには、背景エリアＡｂの背景動画２ｃにおいてユーザ嗜好性を満足させ得るＸＲ画像２ａ，２ｄを、適正位置にて置換して重畳表示することができる。故に、重畳表示の位置ずれに起因するユーザ不快感を抑制しつつ、ユーザ嗜好性の満足度を高めることが可能となる。

第一実施形態によると、コンテンツ情報ＣｉのうちサービスコンテンツＣｓに合わせた自律走行装置Ｍａの駆動制御パターンにより、ユーザサービスが提供される。これによれば、ユーザサービスと協調した自律走行装置Ｍａの駆動を通じて、ユーザ嗜好性の満足度を高めることが可能となる。それと共に第一実施形態によると、駆動制御パターンに従う自律走行装置Ｍａの存在位置Ｐｍに合わせて、ＸＲ画像２ａの背景動画２ｃに対する重畳表示位置が調整される。これによれば、サービスコンテンツＣｓとマッチする表示コンテンツＣｄに応じたＸＲ画像２ａは、自律走行装置Ｍａの駆動に追従して背景動画２ｃ内に重畳表示され得るので、ユーザ嗜好性の満足度をさらに高めることが可能となる。ここで特に第一実施形態では、インフラデータベースＤｉからの三次元空間情報Ｔｉに基づくことで、自律走行装置Ｍａの駆動に対するＸＲ画像２ａの追従性を高めることができるので、重畳表示の位置ずれに起因するユーザ不快感の抑制効果を高めることも可能となる。

第一実施形態によると、コンテンツ情報Ｃｉのうち表示コンテンツＣｄに関連するキャラクター画像が、ＸＲ画像２ａ，２ｄとして自律走行装置Ｍａ及び他物体Ｏｏの存在位置Ｐｍ，Ｐｏに重畳表示される。これによれば、背景エリアＡｂの背景動画２ｃにおいてユーザ嗜好性を満足させ得るキャラクター画像を、自律走行装置Ｍａ及び他物体Ｏｏの表示から置換してユーザＵｓに視認させることができる。故に、特に表示コンテンツＣｄに対するユーザ嗜好性の満足度を高めることが可能となる。

（第二実施形態）
第二実施形態は、第一実施形態の変形例である。

図１１に示すように第二実施形態の処理システム２００１は、事前登録されたユーザＵｓの装着するウェアラブル端末Ｗｔと、自律走行装置Ｍａと、インフラシステムＩｓとに、通信ネットワークＮｃを介して接続される。処理システム１との接続要素Ｗｔ，Ｍａ，Ｉｓとしては、それぞれ少なくとも一つずつが想定される。尚、第一実施形態で説明の如き、ユーザＵｓの携帯するモバイル端末Ｍｔは、通信ネットワークＮｃを介して処理システム２００１に接続されていてもよいし、非接続であってもよい。

ウェアラブル端末Ｗｔは、少なくとも処理システム２００１への接続時には、同システム１のユーザＵｓが顔に装着且つハンズフリーでの操作可能に、構成されている。図１２に示すようにウェアラブル端末Ｗｔは、表示ユニット２００２及びセンサユニット２００３を備えた光学シースルー型電子デバイスであって、例えばＨＭＤ又はスマートグラス等である。ウェアラブル端末Ｗｔは、通信ネットワークＮｃを介したデータの送受信を、通信ユニットにより制御する。ウェアラブル端末Ｗｔは、処理システム２００１と共同してサービス関連処理を遂行するように、通信ネットワークＮｃを介した同システム２００１からの制御指令に従って制御ユニットにより作動制御される。尚、ウェアラブル端末Ｗｔに関して図１２は、ユーザＵｓの両眼のうち片眼に対応する部分での、同ユーザＵｓ側からの視界エリアＡｖの見え方を模式的なイメージ図面で表している。

ウェアラブル端末Ｗｔの制御ユニットによる作動制御下、虚像投影型若しくは網膜投影型の表示ユニット２００２は、例えばグラス又はレンズ等を通してユーザＵｓにより視認される視界エリアＡｖの実像に対して、サービス関連処理に必要な表示を図１２の如く重畳して同ユーザＵｓに視認させる。それと共に、ウェアラブル端末Ｗｔの作動制御下においてセンサユニット２００３は、サービス関連処理に応じたセンシング処理により、センシング情報を取得する。センサユニット２００３としては、例えばカメラ、慣性センサ、ＧＮＳＳセンサ、眼電位センサ、視線センサ、赤外センサ、地磁気センサ、モーションセンサ、タッチセンサ、及びマイク等のうち、少なくとも一種類が採用される。こうした構成によりセンサユニット２００３は、ユーザＵｓの意図を表す、同ユーザＵｓからの入力を、センシング情報として取得可能となっている。

図１１に示す自律走行装置Ｍａは、処理システム２００１と共同してサービス関連処理を遂行するように、通信ネットワークＮｃを介した同システム２００１からの制御指令に従って制御ユニットにより駆動制御される点を除き、第一実施形態の処理システム１と同様に構成される。処理システム２００１の制御系２０２０は、その少なくとも一部がウェアラブル端末Ｗｔの通信ユニット及び制御ユニットにより構成されてもよい点、並びに後述の機能ブロック構成によるウェアラブル端末Ｗｔ利用式の処理フローを実行する点を除き、第一実施形態の制御系２０と同様に構成される。

制御系２０２０においてサービス関連処理を遂行するために構築される機能ブロックには、図１３に示すように認識ブロック２２００、監視ブロック２２１０、駆動制御ブロック２２２０、及び表示制御ブロック２２３０が含まれている。これらのブロック２２００，２２１０，２２２０，２２３０の共同により処理システム２００１がサービス関連処理を遂行する処理方法は、図１４に示す処理フローに従って実行される。本処理フローは、ユーザＵｓがユーザサービス提供を要請する意図となる、サービス要請入力をウェアラブル端末Ｗｔのセンサユニット２００３がセンシング情報として取得するのに応じて、実される。尚、本処理フローにおける各「Ｓ」は、第二実施形態の処理プログラムに含まれた複数命令により実行される複数ステップを、それぞれ意味している。

処理フローのＳ２２００において認識ブロック２２００（図１３参照）は、ユーザＵｓが意図するサービスコンテンツＣｓ及び表示コンテンツＣｄを認識したコンテンツ情報Ｃｉを、同ユーザＵｓが顔に装着するウェアラブル端末Ｗｔの、当該顔に関するセンシング情報に基づき取得する。そこでセンシング情報は、ユーザ意図としてセンサユニット２００３へと入力されることで、ウェアラブル端末Ｗｔの通信ユニットを通じて取得される。このときウェアラブル端末Ｗｔの表示ユニット２００２は、ユーザＵｓからセンサユニット２００３へのコンテンツＣｓ，Ｃｄの選択入力として、視線の方向変化に応じた視線入力、又は顔の表情変化に応じた表情入力を受け付けるために、第一実施形態に準ずる入力受付画像２ｂを視界エリアＡｖの実像に重畳表示させてもよい。Ｓ２２００は、以上の点を除き、第一実施形態のＳ２００に準じて実行される。

図１４に示す処理フローのＳ２２１０において監視ブロック２２１０（図１３参照）は、ウェアラブル端末Ｗｔを通してユーザＵｓにより視認される視界エリアＡｖを、監視する。このとき視界エリアＡｖは、インフラシステムＩｓにより複数ボクセルＶｉが想定される情報蓄積対象空間のうち、サービスコンテンツＣｓに応じた種別のユーザサービスが図１２の如く提供されるサービス空間Ａｓにおいて、監視される。そこで、ウェアラブル端末Ｗｔのセンサユニット２００３によるセンシング情報のうち、例えばカメラ情報、及び慣性情報等のうち少なくとも一方に基づくことで、ユーザＵｓの顔若しくは視線の向く方位、若しくはウェアラブル端末Ｗｔの向く方位に、例えばグラス又はレンズ等を通して広がる視界エリアＡｖの監視が、実行される。

図１４に示す処理フローのＳ２２２０において駆動制御ブロック２２２０（図１３参照）は、コンテンツ情報ＣｉのうちサービスコンテンツＣｓに応じた種別のユーザサービスを、現在の視界エリアＡｖにおいて自律走行装置Ｍａの駆動制御により提供する。Ｓ２２２０は、この点を除き、第一実施形態のＳ２２０に準じて実行される。

図１４に示す処理フローのＳ２２３０は、Ｓ２２２０と並行して実行される。Ｓ２２３０において表示制御ブロック２２３０（図１３参照）は、Ｓ２２２０によりユーザサービスを提供する自律走行装置Ｍａが視界エリアＡｖに入るウェアラブル端末Ｗｔにおいて、コンテンツ情報Ｃｉのうち表示コンテンツＣｄに応じたＸＲ画像２ａを自律走行装置Ｍａの存在位置Ｐｍに、図１２の如く重畳表示させる。このときＸＲ画像２ａの重畳表示位置は、Ｓ２２２０による自律走行装置Ｍａの駆動制御パターンに従った、視界エリアＡｖでの存在位置Ｐｍに合わせて、調整される。それにより視界エリアＡｖにおいては、存在位置Ｐｍの自律走行装置Ｍａ全体をその手前からは不透明又は半透明に隠すように、ＸＲ画像２ａが当該全体とオーバーラップする三次元重畳表示となる。

Ｓ２２３０における表示制御ブロック２２３０は、自律走行装置Ｍａと共に視界エリアＡｖに入る他物体Ｏｏの存在位置Ｐｏにも、図１２の如くＸＲ画像２ｄを重畳表示させる。このときＸＲ画像２ｄの重畳表示位置は、他物体Ｏｏの存在位置Ｐｏに合わせて調整される。こうして視界エリアＡｖでの存在位置ＰｏにＸＲ画像２ｄがオーバーラップされる他物体Ｏｏは、例えば処理システム２００１のユーザＵｓ以外の人、処理システム２００１と共同する自律走行装置Ｍａ以外の移動体、及び地物等のうち少なくとも一種類となる。

Ｓ２２３０は、これらの点を除き、第一実施形態のＳ２３０に準じて実行される。その結果、第一実施形態に準じたＳ２２３０による各種ユーザサービスでは、自律走行装置Ｍａの存在位置Ｐｍとその周囲物体Ｏｏの存在位置Ｐｏとに少なくとも重畳して視認されるＸＲ画像２ａ，２ｄが、ユーザＵｓへと表示出力されることとなる。

以上の図１４に示す第二実施形態の処理フローは、コンテンツ情報ＣｉのうちサービスコンテンツＣｓに応じたユーザサービスの提供が、Ｓ２２２０，Ｓ２２３０により終了すると、今回実行の完了となる。その後、次のサービス要請入力がウェアラブル端末Ｗｔのセンサユニット２００３を通じて取得されると、処理フローの次回実行が開始されることとなる。

（作用効果）
ここまで説明した第二実施形態の作用効果を、以下に説明する。

第二実施形態によると、ユーザＵｓの意図するサービスコンテンツＣｓを認識したコンテンツ情報Ｃｉが、ユーザＵｓの装着するウェアラブル端末Ｗｔのセンシング情報に基づき取得される。それと共に、ウェアラブル端末Ｗｔを通してユーザＵｓにより視認される視界エリアＡｖが、監視される。そこで、サービスコンテンツＣｓに応じた種別のユーザサービスが、現在の視界エリアＡｖにおいて自律走行装置Ｍａの駆動制御により提供される。これは、多様化したユーザサービスの中でも、自律走行装置Ｍａとの協調によりユーザ嗜好性を満足するユーザサービスを提供可能なことを、意味する。

しかも第二実施形態によると、ユーザＵｓが意図する表示コンテンツＣｄを認識したコンテンツ情報Ｃｉも、モバイル端末Ｍｔのセンシング情報に基づき取得される。そこで、上述の如くユーザサービスを提供する自律走行装置Ｍａが視界エリアＡｖに入るウェアラブル端末Ｗｔにおいて、表示コンテンツＣｄに応じたＸＲ画像２ａが自律走行装置Ｍａの存在位置Ｐｍに重畳表示される。これは、自律走行装置Ｍａによって提供のサービスコンテンツＣｓとマッチする表示コンテンツＣｄに応じたＸＲ画像２ａの重畳表示により、ユーザ嗜好性の満足度を高めることが可能なことを、意味する。

第二実施形態によると、自律走行装置Ｍａと共に視界エリアＡｖに入る他物体Ｏｏの存在位置Ｐｏにも、ＸＲ画像２ｄが重畳表示される。これによれば、自律走行装置Ｍａによって提供のサービスコンテンツＣｓとマッチする表示コンテンツＣｄに応じたＸＲ画像２ａ，２ｄの重畳表示を、視界エリアＡｖの広範囲において実現して、ユーザ嗜好性の満足度を高めることが可能となる。

第二実施形態によると、ユーザＵｓにおいてウェアラブル端末Ｗｔの装着された顔に関するセンシング情報に基づき、コンテンツ情報Ｃｉが取得される。これによれば、コンテンツ情報ＣｉとしてユーザＵｓの意図するサービスコンテンツＣｓ及び表示コンテンツＣｄは、ウェアラブル端末Ｗｔの装着された顔から自動的に認識され得る。故に、ユーザ嗜好性の満足度を高める上での利便性も、高めることが可能となる。

第二実施形態によると、ユーザサービスの提供されるサービス空間Ａｓを仮想分割した複数の三次元ボクセルＶｉには、自律走行装置Ｍａ及び他物体Ｏｏの各存在位置Ｐｍ，Ｐｏに関連する位置関連情報の付加された三次元空間情報Ｔｉが、インフラデータベースＤｉから取得される。そこで、取得の三次元空間情報Ｔｉに基づいた自律走行装置Ｍａ及び他物体Ｏｏの各存在位置Ｐｍ，Ｐｏには、視界エリアＡｖにおいてユーザ嗜好性を満足させ得るＸＲ画像２ａ，２ｄを、手前位置から適正にオーバーラップさせて重畳表示することができる。故に、重畳表示の位置ずれに起因するユーザ不快感を抑制しつつ、ユーザ嗜好性の満足度を高めることが可能となる。

第二実施形態によると、コンテンツ情報ＣｉのうちサービスコンテンツＣｓに合わせた自律走行装置Ｍａの駆動制御パターンにより、ユーザサービスが提供されることになる。これによれば、ユーザサービスと協調した自律走行装置Ｍａの駆動を通じて、ユーザ嗜好性の満足度を高めることが可能となる。それと共に第二実施形態によると、駆動制御パターンに従う自律走行装置Ｍａの存在位置Ｐｍに合わせて、ＸＲ画像２ａの視界エリアＡｖに対する重畳表示位置が調整される。これによれば、サービスコンテンツＣｓとマッチする表示コンテンツＣｄに応じたＸＲ画像２ａは、自律走行装置Ｍａの駆動に追従して視界エリアＡｖ内に重畳表示され得るので、ユーザ嗜好性の満足度をさらに高めることが可能となる。ここで特に第二実施形態でも、インフラデータベースＤｉからの三次元空間情報Ｔｉに基づくことで、自律走行装置Ｍａの駆動に対するＸＲ画像２ａの追従性を高めることができるので、重畳表示の位置ずれに起因するユーザ不快感の抑制効果を高めることも可能となる。

第二実施形態によると、コンテンツ情報Ｃｉのうち表示コンテンツＣｄに関連するキャラクター画像が、ＸＲ画像２ａ，２ｄとして自律走行装置Ｍａ及び他物体Ｏｏの存在位置Ｐｍ，Ｐｏに重畳表示されることになる。これによれば、視界エリアＡｖにおいてユーザ嗜好性を満足させ得るキャラクター画像を、自律走行装置Ｍａ及び他物体Ｏｏの手前位置にオーバーラップさせてユーザＵｓに視認させることができる。故に、特に表示コンテンツＣｄに対するユーザ嗜好性の満足度を高めることが可能となる。

（他の実施形態）
以上、複数の実施形態について説明したが、本開示は、それらの実施形態に限定して解釈されるものではなく、本開示の要旨を逸脱しない範囲内において種々の実施形態及び組み合わせに適用することができる。

第一及び第二実施形態に関する変形例では、処理システム１，２００１の制御系２０，２０２０を構成する専用コンピュータは、デジタル回路及びアナログ回路のうち、少なくとも一方をプロセッサとして有していてもよい。ここでデジタル回路とは、例えばＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）、ＳＯＣ（System on a Chip）、ＰＧＡ（Programmable Gate Array）、及びＣＰＬＤ（Complex Programmable Logic Device）等のうち、少なくとも一種類である。またこうしたデジタル回路は、プログラムを記憶したメモリを、有していてもよい。

第一及び第二実施形態に関する変形例では、処理システム１，２００１がインフラシステムＩｓとは非接続であってもよい。この場合、インフラデータベースＤｉから取得の三次元空間情報Ｔｉに代えて、処理システム１，２００１との接続要素Ｍｔ，Ｍａ，Ｗｔによるセンシング情報が、利用されてもよい。

第一及び第二実施形態に関する変形例では、ボクセルＶｉとは紐付けのない三次元空間情報Ｔｉが、インフラデータベースＤｉから処理システム１，２００１に取得されてもよい。第一及び第二実施形態に関する変形例では、三次元空間情報Ｔｉに代えて二次元グリッド情報が、インフラデータベースＤｉから処理システム１，２００１に取得されてもよい。

第一実施形態に関する変形例では、スマートウォッチ、又はビデオシースルー型若しくは非透過型のウェアラブル端末が、モバイル端末Ｍｔとして用いられてもよい。第二実施形態に関する変形例では、モバイル端末Ｍｔが処理システム２００１と接続されてウェアラブル端末Ｗｔの一部として機能している場合、当該一部を構成するセンサユニット３がサービス要請入力をセンシング情報として取得するのに応じて、処理フローが実行されてもよい。第二実施形態に関する変形例では、モバイル端末Ｍｔが処理システム２００１と接続されてウェアラブル端末Ｗｔの一部として機能している場合、処理フローのＳ２２００にておいてサービスコンテンツＣｓ及び表示コンテンツＣｄを認識したコンテンツ情報Ｃｉが、当該一部を構成するセンサユニット３のセンシング情報に基づき取得されてもよい。

第一実施形態のＳ２３０及び第二実施形態のＳ２２３０に関する変形例では、自律走行装置Ｍａと共にエリアＡｂ，Ａｖに入る他物体Ｏｏの存在位置Ｐｏには、ＸＲ画像２ｄが重畳表示されなくてもよい。第二実施形態のＳ２２００に関する変形例では、第一実施形態のＳ２００に準じて、ユーザＵｓによるジェスチャー入力、又は音声入力がセンサユニット２００３よりセンシングされてもよい。第二実施形態のＳ２２００に関する変形例では、第一実施形態のＳ２００に準じて、ユーザＵｓによるジェスチャー入力、視線入力、表情入力、又は音声入力がインフラデータベースＤｉから取得の三次元空間情報Ｔｉに基づき認識されてもよい。

ここまでの説明形態の他に上述の実施形態及び変形例は、制御系２０，２０２０においてプロセッサ２４及びメモリ２２を少なくとも一つずつ有する処理システム１，２００１として、半導体装置（例えば半導体チップ等）の形態で実施されてもよい。

（付言）
本明細書には、以下に列挙する複数の技術的思想と、それらの複数の組み合わせが開示されている。

（技術的思想１）
プロセッサ（２４）を有し、ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行する処理システムであって、
プロセッサは、
ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、ユーザが携帯するモバイル端末（Ｍｔ）のセンシング情報に基づき取得することと、
ユーザがモバイル端末を向けることにより表示背景となる背景エリア（Ａｂ）を、監視することと、
コンテンツ情報のうちサービスコンテンツに応じた種別のユーザサービスを、現在の背景エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
ユーザサービスを提供する自律走行装置が入る背景エリアの背景動画（２ｃ）を表示するモバイル端末において、コンテンツ情報のうち表示コンテンツに応じたＸＲ画像（２ａ）を自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、実行するように構成される。

（技術的思想２）
ＸＲ画像を重畳表示することは、
自律走行装置と共に背景エリアに入る他物体（Ｏｏ）の存在位置（Ｐｏ）に、ＸＲ画像（２ｄ）を重畳表示することを、含む技術的思想１に記載の処理システム。

（技術的思想３）
プロセッサ（２４）を有し、ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行する処理システムであって、
プロセッサは、
ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、ユーザが装着するウェアラブル端末（Ｗｔ）のセンシング情報に基づき取得することと、
ウェアラブル端末を通してユーザにより視認される視界エリア（Ａｖ）を、監視することと、
コンテンツ情報のうちサービスコンテンツに応じた種別のユーザサービスを、現在の視界エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
ユーザサービスを提供する自律走行装置が視界エリアに入るウェアラブル端末において、コンテンツ情報のうち表示コンテンツに応じたＸＲ画像（２ａ）を自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、実行するように構成される。

（技術的思想４）
ＸＲ画像を重畳表示することは、
自律走行装置と共に視界エリアに入る他物体（Ｏｏ）の存在位置に、ＸＲ画像（２ｄ）を重畳表示することを、含む技術的思想３に記載の処理システム。

（技術的思想５）
検知をすることは、
ユーザにおいてウェアラブル端末の装着された顔に関するセンシング情報に基づき、コンテンツ情報を取得することを、含む技術的思想３又は４に記載の処理システム。

（技術的思想６）
プロセッサは、
ユーザサービスの提供されるサービス空間（Ａｓ）を仮想分割した複数の三次元ボクセル（Ｖｉ）に存在位置に関連する位置関連情報の付加された三次元空間情報（Ｔｉ）を、インフラデータベース（Ｄｉ）から取得することを、さらに実行するように構成され、
ＸＲ画像を重畳表示することは、
取得の三次元空間情報に基づいた存在位置に、ＸＲ画像を重畳表示することを、含む技術的思想１～５のいずれか一項に記載の処理システム。

（技術的思想７）
ユーザサービスを提供することは、
コンテンツ情報のうちサービスコンテンツに合わせた自律走行装置の駆動制御パターンに従って、ユーザサービスを提供することを、含む技術的思想１～５のいずれか一項に記載の処理システム。

（技術的思想８）
ＸＲ画像を重畳表示することは、
駆動制御パターンに従う存在位置に合わせて、ＸＲ画像の重畳表示位置を調整することを、含む技術的思想７に記載の処理システム。

（技術的思想９）
ユーザサービスを提供することは、
コンテンツ情報のうちサービスコンテンツに合わせた自律走行装置の駆動制御パターンに従って、ユーザサービスを提供することを、含み、
ＸＲ画像を重畳表示することは、
駆動制御パターンに従う存在位置に合わせて、ＸＲ画像の重畳表示位置を調整することを、含む技術的思想６に記載の処理システム。

（技術的思想１０）
ＸＲ画像を重畳表示することは、
コンテンツ情報のうち表示コンテンツに関連するキャラクター画像を、ＸＲ画像として存在位置に重畳表示することを、含む技術的思想１～９のいずれか一項に記載の処理システム。

尚、上述した技術的思想１～１０は、方法及びプログラムの各形態で実現されてもよい。

１，２００１：処理システム、２ａ，２ｄ，２ｅ：ＸＲ画像、２ｃ：背景動画、２２：メモリ、２４：プロセッサ、Ａｂ：背景エリア、Ａｓ：サービス空間、Ａｖ：視界エリア、Ｃｄ：表示コンテンツ、Ｃｉ：コンテンツ情報、Ｃｓ：サービスコンテンツ、Ｄｉ：インフラデータベース、Ｍａ：自律走行装置、Ｍｔ：モバイル端末、Ｏｏ：他物体、Ｐｍ，Ｐｏ，Ｐｓ：存在位置、Ｔｉ：三次元空間情報、Ｖｉ：三次元ボクセル、Ｗｔ：ウェアラブル端末

Claims (14)

1. プロセッサ（２４）を有し、ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行する処理システムであって、
   前記プロセッサは、
   前記ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、前記ユーザが携帯するモバイル端末（Ｍｔ）のセンシング情報に基づき取得することと、
   前記ユーザが前記モバイル端末を向けることにより表示背景となる背景エリア（Ａｂ）を、監視することと、
   前記コンテンツ情報のうち前記サービスコンテンツに応じた種別の前記ユーザサービスを、現在の前記背景エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
   前記ユーザサービスを提供する前記自律走行装置が入る前記背景エリアの背景動画（２ｃ）を表示する前記モバイル端末において、前記コンテンツ情報のうち前記表示コンテンツに応じたＸＲ画像（２ａ）を前記自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、実行するように構成される処理システム。
2. 前記ＸＲ画像を重畳表示することは、
   前記自律走行装置と共に前記背景エリアに入る他物体（Ｏｏ）の存在位置（Ｐｏ）に、前記ＸＲ画像（２ｄ）を重畳表示することを、含む請求項１に記載の処理システム。
3. プロセッサ（２４）を有し、ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行する処理システムであって、
   前記プロセッサは、
   前記ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、前記ユーザが装着するウェアラブル端末（Ｗｔ）のセンシング情報に基づき取得することと、
   前記ウェアラブル端末を通して前記ユーザにより視認される視界エリア（Ａｖ）を、監視することと、
   前記コンテンツ情報のうち前記サービスコンテンツに応じた種別の前記ユーザサービスを、現在の前記視界エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
   前記ユーザサービスを提供する前記自律走行装置が前記視界エリアに入る前記ウェアラブル端末において、前記コンテンツ情報のうち前記表示コンテンツに応じたＸＲ画像（２ａ）を前記自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、実行するように構成される処理システム。
4. 前記ＸＲ画像を重畳表示することは、
   前記自律走行装置と共に前記視界エリアに入る他物体（Ｏｏ）の存在位置（Ｐｏ）に、前記ＸＲ画像（２ｄ）を重畳表示することを、含む請求項３に記載の処理システム。
5. 前記コンテンツ情報を取得することは、
   前記ユーザにおいて前記ウェアラブル端末の装着された顔に関する前記センシング情報に基づき、前記コンテンツ情報を取得することを、含む請求項３に記載の処理システム。
6. 前記プロセッサは、
   前記ユーザサービスの提供されるサービス空間（Ａｓ）を仮想分割した複数の三次元ボクセル（Ｖｉ）に前記存在位置に関連する位置関連情報の付加された三次元空間情報（Ｔｉ）を、インフラデータベース（Ｄｉ）から取得することを、さらに実行するように構成され、
   前記ＸＲ画像を重畳表示することは、
   前記三次元空間情報に基づいた前記存在位置に、前記ＸＲ画像を重畳表示することを、含む請求項１～５のいずれか一項に記載の処理システム。
7. 前記ユーザサービスを提供することは、
   前記コンテンツ情報のうち前記サービスコンテンツに合わせた前記自律走行装置の駆動制御パターンに従って、前記ユーザサービスを提供することを、含む請求項１～５のいずれか一項に記載の処理システム。
8. 前記ＸＲ画像を重畳表示することは、
   前記駆動制御パターンに従う前記存在位置に合わせて、前記ＸＲ画像の重畳表示位置を調整することを、含む請求項７に記載の処理システム。
9. 前記ユーザサービスを提供することは、
   前記コンテンツ情報のうち前記サービスコンテンツに合わせた前記自律走行装置の駆動制御パターンに従って、前記ユーザサービスを提供することを、含み、
   前記ＸＲ画像を重畳表示することは、
   前記駆動制御パターンに従う前記存在位置に合わせて、前記ＸＲ画像の重畳表示位置を調整することを、含む請求項６に記載の処理システム。
10. 前記ＸＲ画像を重畳表示することは、
    前記コンテンツ情報のうち前記表示コンテンツに関連するキャラクター画像を、前記ＸＲ画像として前記存在位置に重畳表示することを、含む請求項１～５のいずれか一項に記載の処理システム。
11. ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行するために、プロセッサ（２４）により実行される処理方法であって、
    前記ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、前記ユーザが携帯するモバイル端末（Ｍｔ）のセンシング情報に基づき取得することと、
    前記ユーザが前記モバイル端末を向けることにより表示背景となる背景エリア（Ａｂ）を、監視することと、
    前記コンテンツ情報のうち前記サービスコンテンツに応じた種別の前記ユーザサービスを、現在の前記背景エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
    前記ユーザサービスを提供する前記自律走行装置が入る前記背景エリアの背景動画（２ｃ）を表示する前記モバイル端末において、前記コンテンツ情報のうち前記表示コンテンツに応じたＸＲ画像（２ａ）を前記自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、含む処理方法。
12. ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行するために、プロセッサ（２４）により実行される処理方法であって、
    前記ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、前記ユーザが装着するウェアラブル端末（Ｗｔ）のセンシング情報に基づき取得することと、
    前記ウェアラブル端末を通して前記ユーザにより視認される視界エリア（Ａｖ）を、監視することと、
    前記コンテンツ情報のうち前記サービスコンテンツに応じた種別の前記ユーザサービスを、現在の前記視界エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供することと、
    前記ユーザサービスを提供する前記自律走行装置が前記視界エリアに入る前記ウェアラブル端末において、前記コンテンツ情報のうち前記表示コンテンツに応じたＸＲ画像（２ａ）を前記自律走行装置の存在位置（Ｐｍ）に重畳表示することとを、含む処理方法。
13. ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行するために記憶媒体（２２）に記憶され、プロセッサ（２４）により実行される命令を含む処理プログラムであって、
    前記命令は、
    前記ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、前記ユーザが携帯するモバイル端末（Ｍｔ）のセンシング情報に基づき取得させることと、
    前記ユーザが前記モバイル端末を向けることにより表示背景となる背景エリア（Ａｂ）を、監視させることと、
    前記コンテンツ情報のうち前記サービスコンテンツに応じた種別の前記ユーザサービスを、現在の前記背景エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供させることと、
    前記ユーザサービスを提供する前記自律走行装置が入る前記背景エリアの背景動画（２ｃ）を表示する前記モバイル端末において、前記コンテンツ情報のうち前記表示コンテンツに応じたＸＲ画像（２ａ）を前記自律走行装置の存在位置（Ｐｍ）に重畳表示させることとを、含む処理プログラム。
14. ユーザへ提供されるユーザサービスに関連したサービス関連処理を遂行するために記憶媒体（２２）に記憶され、プロセッサ（２４）により実行される命令を含む処理プログラムであって、
    前記命令は、
    前記ユーザが意図するサービスコンテンツ（Ｃｓ）及び表示コンテンツ（Ｃｄ）を認識したコンテンツ情報（Ｃｉ）を、前記ユーザが装着するウェアラブル端末（Ｗｔ）のセンシング情報に基づき取得させることと、
    前記ウェアラブル端末を通して前記ユーザにより視認される視界エリア（Ａｖ）を、監視させることと、
    前記コンテンツ情報のうち前記サービスコンテンツに応じた種別の前記ユーザサービスを、現在の前記視界エリアにおいて自律走行装置（Ｍａ）の駆動制御により提供させることと、
    前記ユーザサービスを提供する前記自律走行装置が前記視界エリアに入る前記ウェアラブル端末において、前記コンテンツ情報のうち前記表示コンテンツに応じたＸＲ画像（２ａ）を前記自律走行装置の存在位置（Ｐｍ）に重畳表示させることとを、含む処理プログラム。

Images