JP2023147830A - 情報処理装置、情報処理方法、及びプログラム - Google Patents

Abstract

【課題】車内環境を維持しながら、移動体の乗員に走行中の楽しみを提供することができる情報処理装置、情報処理方法、及びプログラムを提供する。
【解決手段】情報処理装置は、移動体に搭載された移動体デバイスによって、前記移動体内に出力される第１出力内容の第１情報を取得する第１取得部と、前記移動体の周囲における外部施設の第２情報を取得する第２取得部と、前記外部施設に設けられ、前記外部施設の外部に向けて情報を出力する外部出力デバイスの第２出力内容を、前記第１出力内容に対応付けて決定する決定部と、を備える、情報処理装置である。
【選択図】図１

Description

本発明は、情報処理装置、情報処理方法、及びプログラムに関する。

車両における乗員に走行中の楽しみを与える装置として、従来、外部環境に関連する香りを車内に出力することで、外部環境と車内の環境を同期させる手法が提案されている（例えば、特許文献１参照）。

国際公開第２０２１／０１９９８８号

しかし、上記の技術では、走行中の楽しみを得るために車内の環境を変化させることになる。このため、変化した環境を車両の乗員が好まない場合には、運転者などの乗員に走行中の楽しみを十分に与えることができない。

本発明は、このような事情を考慮してなされたものであり、車内環境を維持しながら、移動体の乗員に走行中の楽しみを提供することができる情報処理装置、情報処理方法、及びプログラムを提供することを目的の一つとする。

この発明に係る情報処理装置、情報処理方法、及びプログラムは、以下の構成を採用した。
（１）：この発明の一態様に係る情報処理装置は、移動体に搭載された移動体デバイスによって、前記移動体内に出力される第１出力内容の第１情報を取得する第１取得部と、前記移動体の周囲における外部施設の第２情報を取得する第２取得部と、前記外部施設に設けられ、前記外部施設の外部に向けて情報を出力する外部出力デバイスの第２出力内容を、前記第１出力内容に対応付けて決定する決定部と、を備える、情報処理装置である。

（２）の態様において、前記第２情報を取得された前記外部施設における前記外部出力デバイスに、前記第２出力内容をリンク再生させる出力制御部、を更に備えるものである。

（３）：上記（１）または（２）の態様において、前記外部出力デバイスは、視覚情報を出力する視覚情報デバイスを含む、ものである。

（４）：上記（１）から（３）のいずれかの態様において、前記第２取得部は、前記移動体の進行方向に基づいて、前記第２情報を取得する、ものである。

（５）：上記（４）の態様において、前記リンク再生が可能な第１外部出力デバイスを特定する特定部と、前記第１外部出力デバイスの位置を地図に対応付けて前記移動体内の表示部に表示させる表示制御部と、を更に備える、ものである。

（６）：上記（５）の態様において、前記外部出力デバイスの特性に基づいて、前記リンク再生の費用を算出する算出部、を更に備える、ものである。

（７）：上記（５）または（６）の態様において、前記表示部に表示された前記第１外部出力デバイスにより出力される出力内容の詳細設定に対する前記移動体の乗員の入力操作を受け付ける受付部、を更に備える、ものである。

（８）：上記（５）から（７）のいずれかの態様において、前記特定部は、前記リンク再生を行う第２外部出力デバイスを特定し、前記表示制御部は、前記第２外部出力デバイスの位置を地図に対応付けて前記移動体内の表示部に表示させる、ものである。

（９）：上記（５）から（８）のいずれかの態様において、前記表示制御部は、前記リンク再生の詳細設定の内容を更に表示させる、ものである。

（１０）：上記（１）から（９）のいずれかの態様において、前記決定部は、前記移動体の周辺における周辺移動体に搭載された周辺出力デバイスの第３出力内容を前記第１出力内容に基づいて決定し、前記第３出力内容を前記周辺出力デバイスに提供する提供部、を更に備える、ものである。

（１１）：この発明の一態様に係る情報処理方法は、情報処理装置のコンピュータが、移動体に搭載された移動体デバイスによって、前記移動体内に出力される第１出力内容の第１情報を取得し、前記移動体の周囲における外部施設の第２情報を取得し、前記外部施設に設けられ、前記外部施設の外部に向けて情報を出力する外部出力デバイスの第２出力内容を、前記第１出力内容に対応付けて決定する、情報処理方法である。

（１２）：この発明の一態様に係るプログラムは、情報処理装置のコンピュータに、移動体に搭載された移動体デバイスによって、前記移動体内に出力される第１出力内容の第１情報を取得し、前記移動体の周囲における外部施設の第２情報を取得し、前記外部施設に設けられ、前記外部施設の外部に向けて情報を出力する外部出力デバイスの第２出力内容を、前記第１出力内容に対応付けて決定することを行わせる、プログラムである。

（１）～（１２）の態様によれば、車内環境を維持しながら、移動体の乗員に走行中の楽しみを提供することができる。

第１実施形態の情報処理装置を利用した情報処理システム１の構成図である。 楽曲提供サーバ１００の構成図である。 利用者情報１２２の内容の一例を示す図である。 地図情報１２４の内容の一例を示す図である。 地図情報１２４を可視化した状態の一例を示す図である。 楽曲レコメンドに関する処理の流れの概略を示す図である。 情報処理装置２００の構成図である。 外部出力デバイスの構成図である。 フロントサーバ１１０の処理の一例を示すフローチャートである。 情報処理装置２００の処理の一例を示すフローチャートである。 タッチパネル５８に表示される画像の一例を示す図である。 タッチパネル５８に表示される画像の一例を示す図である。 タッチパネル５８に表示される画像の一例を示す図である。

以下、図面を参照し、本発明の情報処理装置、情報処理方法、及びプログラムの実施形態について説明する。

図１は、第１実施形態の情報処理装置を利用した情報処理システム１の構成図である。実施形態の情報処理システム１は、移動体に搭乗した乗員に対して楽曲（音楽のことであり、アーティストの歌唱、演奏、或いはプログラム再生による楽曲の他、環境音等を含んでもよい）を提供するシステムである。移動体とは、例えば、乗員が滞在する空間のある車両（四輪または三輪のある車両、マイクロモビリティ等）、船舶、航空機、或いは二輪車などを含む。二輪車の場合、ヘルメットに設けられたオーディオ装置によって楽曲が再生されてもよい。

情報処理システム１は、移動体に搭乗した乗員に対して楽曲を提供するほかに、提供した楽曲（以下、提供楽曲）に応じて移動体の周囲のデバイス、例えば、外部施設に設けられた外部出力デバイスや移動体Ｍの周辺の移動体（周辺移動体）に搭載された周辺出力デバイスの出力を制御するシステムである。例えば、乗員に提供楽曲を提供する場合に、移動体の周囲における外部出力デバイスから、提供楽曲に関連する楽曲を提供したり、提供楽曲に合わせて光や音を出力したり、乗員が搭乗する移動体の周辺の周辺移動体から、提供楽曲に関連する楽曲を出力させたりする。

情報処理システム１は、例えば、携帯端末装置１０と、車載装置２０と、フロントサーバ１１０と、バックサーバ１５０と、外部出力デバイス３００と、周辺出力デバイス４００と、を備える。車載装置２０は、移動体Ｍに搭載され、例えば、オーディオ装置５０と、情報処理装置２００と、を備える。外部出力デバイス３００は、例えば、トンネル内の電光掲示やビルの大型ディスプレイなど、ビルなどの建物（以下、外部施設）３１０に設けられ、外部施設３１０の外部に向けて情報を出力する。周辺出力デバイス４００は、周辺移動体４１０に搭載され、周辺移動体４１０の内部に向けて情報を出力する。

［携帯端末装置］
携帯端末装置１０は、例えばスマートフォンやタブレット端末等の通信機能、入出力機能、アプリ実行機能を有する可搬型コンピュータ装置である。携帯端末装置１０は、例えば、近距離通信部１２と、ネットワーク通信部１４と、Ｍｕｓｉｃアプリ実行部１６と、タッチパネル１８とを備える。

近距離通信部１２は、オーディオ装置５０の近距離通信部６０と、Ｂｌｕｅｔｏｏｔｈ（登録商標）やＷｉ－Ｆｉ、ＵＳＢ（Universal Serial Bus）などの通信規格に基づいて、無線または有線で通信する。

ネットワーク通信部１４は、ネットワークＮＷを介してフロントサーバ１１０と通信する。ネットワークＮＷは、無線基地局、アクセスポイント、インターネット、プロバイダ端末、ＷＡＮ（Wide Area Network）等を含む。

Ｍｕｓｉｃアプリ実行部１６は、ＣＰＵ（Central Processing Unit）などのプロセッサが、記憶部３０に記憶されたＭｕｓｉｃアプリ３２を実行することで機能する。Ｍｕｓｉｃアプリ実行部１６は、タッチパネル１８に対してなされた利用者の入力操作に応じて携帯端末装置１０の各部を制御する。Ｍｕｓｉｃアプリ３２は、例えば、予めアプリ提供者のサーバ装置から携帯端末装置１０にインストールされたものである。

［オーディオ装置］
オーディオ装置５０は、移動体Ｍに設置される（前述したようにヘルメット内に設置されてもよい）。オーディオ装置５０は、例えば、連携アプリ実行部５２と、音響調整部５４と、スピーカシステム５６と、タッチパネル５８と、近距離通信部６０とを備える。オーディオ装置５０は、移動体デバイスの一例である。オーディオ装置５０は、タッチパネル５８に代えてまたは加えて、モニタなどを備えてもよし、タッチパネル５８に代えてまたは加えて、物理ボタンなどの入力装置を備えてもよい。

連携アプリ実行部５２は、ＣＰＵなどのプロセッサが、記憶部に記憶された連携アプリ（不図示）を実行することで機能する。連携アプリ実行部５２は、タッチパネル５８に対してなされた利用者の入力操作に応じて、Ｍｕｓｉｃアプリ実行部１６と連携してオーディオ装置５０の各部を制御する。

音響調整部５４は、スピーカシステム５６を制御する。スピーカシステム５６は、例えば複数のスピーカを含む。音響調整部５４は、複数のスピーカのそれぞれの音量を調整することにより、音像を任意の場所に定位させてもよい。

タッチパネル５８には、例えば、ＧＵＩ（Graphical User Interface）が表示される。移動体Ｍの乗員がタッチパネル５８に表示されたＧＵＩを触れる操作をすることにより、ＧＵＩに表示された画像の内容を入力する入力操作となる。タッチパネル５８は、表示部の一例である。

近距離通信部６０は、前述の通り、携帯端末装置１０の近距離通信部１２と無線または有線で通信する。

［楽曲提供サーバ］
図２は、楽曲提供サーバ１００の構成図である。楽曲提供サーバ１００は、例えば、フロントサーバ１１０と、バックサーバ１５０と、を備える。フロントサーバ１１０とバックサーバ１５０との間では、例えば、ネットワークＮＷを介して通信が行われてもよいし、専用回線やＬＡＮ（Local Area Network）、ＶＰＮ（Virtual Private Network）等を介して通信が行われてもよい。

［フロントサーバ］
フロントサーバ１１０は、例えば、ネットワーク通信部１１２と、利用者情報取得部１１４と、位置情報取得部１１６と、ＰＯＩ（Point Of Interest）取得部１１７と、楽曲データ取得部１１８と、楽曲提供部１１９と、記憶部１２０とを備える。ネットワーク通信部１１２と記憶部１２０以外の構成要素は、例えば、ＣＰＵなどのハードウェアプロセッサがプログラム（ソフトウェア）を実行することにより実現される。これらの構成要素のうち一部または全部は、ＬＳＩ（Large Scale Integration）やＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、ＧＰＵ（Graphics Processing Unit）などのハードウェア（回路部；circuitryを含む）によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予めＨＤＤ（Hard Disk Drive）やフラッシュメモリなどの記憶装置（非一過性の記憶媒体を備える記憶装置）に格納されていてもよいし、ＤＶＤやＣＤ－ＲＯＭなどの着脱可能な記憶媒体（非一過性の記憶媒体）に格納されており、記憶媒体がドライブ装置に装着されることでインストールされてもよい。記憶部１２０には、利用者情報１２２や地図情報１２４等の情報が格納される。

ネットワーク通信部１１２は、ネットワークＮＷを介して携帯端末装置１０と通信する。

利用者情報取得部１１４は、携帯端末装置１０の利用者の情報（利用者情報）を取得し、利用者情報１２２に登録する。図３は、利用者情報１２２の内容の一例を示す図である。利用者情報１２２は、例えば、氏名、年齢、性別、職業、好みの音楽ジャンル、好みのアーティスト、趣味等を含む情報である。

位置情報取得部１１６は、利用者（移動体）の位置情報を取得する。利用者（移動体）の位置情報は、オーディオ装置５０が設置された移動体が備える位置測位装置（ＧＰＳ（Global Positioning System）受信機等、不図示）により測位され、オーディオ装置５０と携帯端末装置１０を介してフロントサーバ１１０に伝えられたものでもよいし、携帯端末装置１０が備える位置測位装置（不図示）により測位され、フロントサーバ１１０に伝えられたものでもよい。

ＰＯＩ取得部１１７は、利用者の位置情報を用いて地図情報１２４を参照し、楽曲レコメンド圏（以下、「レコメンド圏」）内に利用者が入った（以下、「ＰＯＩがヒットした」と称する）ＰＯＩを取得する。図４は、地図情報１２４の内容の一例を示す図である。地図情報１２４は、複数のＰＯＩ情報と、複数のＰＯＩ情報のそれぞれに対応するレコメンド圏の情報とを含む。ＰＯＩ情報は、例えば、ＰＯＩ（例えば有名な施設、景勝地等）に対応付けられた、ＰＯＩの位置情報（緯度、経度）、ＰＯＩの種別などの情報を含む。

地図情報１２４に含まれるＰＯＩは、適宜変更されてもよい。例えば、期間限定のイベントを開催するＰＯＩは、そのイベントを開催する期間のみ地図情報１２４に含まれてもよい。また、ＰＯＩに対応付けられる各情報は、適宜変更されてもよい。例えば、地図情報１２４に含まれるＰＯＩ、例えば観光地でライトアップを開催する場合、ライトアップが開催される時間帯のみレコメンド圏を広げるようにしてもよい。

地図情報１２４は、更に、道路構造の情報を含んでもよい。地図情報１２４が道路構造を含む場合は、道路を通過してＰＯＩに到達するまでの距離でレコメンド圏を設定してよい。なお、地図情報１２４に含まれるＰＯＩは楽曲レコメンド対象であるものとするが、楽曲レコメンド対象で無いＰＯＩが地図情報１２４に含まれてもよい。その場合、楽曲レコメンド対象である旨を示すフラグがＰＯＩに対応付けられる。

図５は、地図情報１２４を可視化した状態の一例を示す図である。図５に示す例では、レコメンド圏Ｒ１１～Ｒ１４がそれぞれ円形または道路に沿った形状で示されている。

楽曲データ取得部１１８は、あるＰＯＩがヒットした場合、楽曲リクエストをバックサーバ１５０に送信する。楽曲リクエストには、利用者の利用者情報（個人情報保護の観点から、氏名を削除、年齢を「３０代」などに変更、職業も詳細情報から「会社員」といった粒度に変更するなどの処理が行われてよい）と、ヒットしたＰＯＩを示すＰＯＩ情報（ＰＯＩの識別情報でもよい）が含まれる。楽曲データ取得部１１８は、複数のＰＯＩがヒットした場合、複数のＰＯＩのうちのいずれかのＰＯＩのＰＯＩ情報を楽曲リクエストに含める。楽曲リクエストに含めるＰＯＩ情報については、後に説明する。

後述するように、バックサーバ１５０は、楽曲リクエストを取得すると、当該利用者と当該ＰＯＩにマッチした楽曲を自動選択し、例えばストリーミング形式で選択して楽曲の楽曲データを楽曲データ１６８から取得してフロントサーバ１１０に送信する。楽曲データ取得部１１８は、バックサーバ１５０により送信されて自動レコメンドされる楽曲データを取得する。楽曲データ取得部１１８が取得する楽曲データは、利用者の情報と利用者がレコメンド圏に入ってヒットしたＰＯＩ情報とに基づいて自動レコメンドされる。

楽曲提供部１１９は、利用者がレコメンド圏に入ったときに、楽曲データ取得部１１８により取得された楽曲データを携帯端末装置１０に送信し、携帯端末装置１０に楽曲データを再生可能とさせる。携帯端末装置１０は、楽曲データをオーディオ装置５０に送信してスピーカシステム５６に再生させる。なお、楽曲データ１６８を保持して楽曲データの提供元となる機能はフロントサーバ１１０にあってもよいし、他のサーバ装置にあってもよい。

携帯端末装置１０またはオーディオ装置５０は、ＰＯＩが接近していることでレコメンドされた楽曲を提案することにより再生可能とする。携帯端末装置１０またはオーディオ装置５０は、提案した楽曲を再生してよいかどうか利用者に問いかける画像を表示し、または音声を出力し、利用者がタッチ操作または音声で承諾する旨の返信をした場合にレコメンドされた楽曲が再生される。

［バックサーバ］
バックサーバ１５０は、例えば、利用者特徴情報生成部１５２と、ＰＯＩ特徴情報生成部１５４と、自動楽曲選択部１５６と、記憶部１６０とを備える。記憶部１６０以外の機能部は、例えば、ＣＰＵなどのハードウェアプロセッサがプログラム（ソフトウェア）を実行することにより実現される。これらの構成要素のうち一部または全部は、ＬＳＩやＡＳＩＣ、ＦＰＧＡ、ＧＰＵなどのハードウェア（回路部；circuitryを含む）によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予めＨＤＤやフラッシュメモリなどの記憶装置（非一過性の記憶媒体を備える記憶装置）に格納されていてもよいし、ＤＶＤやＣＤ－ＲＯＭなどの着脱可能な記憶媒体（非一過性の記憶媒体）に格納されており、記憶媒体がドライブ装置に装着されることでインストールされてもよい。記憶部１６０には、利用者特徴情報１６２、ＰＯＩ特徴情報１６４、学習済モデル１６６、楽曲データ１６８などの情報が格納される。

利用者特徴情報生成部１５２は、楽曲リクエストに含まれる利用者情報に基づいて、ベクトル等の形式の利用者特徴情報を生成する。同じ利用者に係る二度目以降の楽曲リクエストに備えて、生成された利用者特徴情報は利用者特徴情報１６２として記憶部１６０に記憶されてよい。

ＰＯＩ特徴情報生成部１５４は、楽曲リクエストに含まれるＰＯＩ情報に基づいて、ベクトル等の形式のＰＯＩ特徴情報を生成する。同じＰＯＩに係る二度目以降の楽曲リクエストに備えて、生成されたＰＯＩ特徴情報は利用者特徴情報１６２として記憶部１６０に記憶されてよい。

なお、利用者情報から利用者特徴情報を生成する機能と、ＰＯＩ特徴情報からＰＯＩ特徴情報を生成する機能とのうち一方または双方は、フロントサーバ１１０の機能であってもよい。その場合、楽曲リクエストには、例えば利用者特徴情報とＰＯＩ特徴情報が含まれることになってよい。

自動楽曲選択部１５６は、楽曲リクエストに対応する利用者特徴情報とＰＯＩ特徴情報を学習済モデル１６６に入力することで、当該利用者および当該利用者が接近して通過するＰＯＩにマッチする楽曲の楽曲データを楽曲データ１６８から抽出して自動レコメンドする。自動楽曲選択部１５６は、自動レコメンドされた楽曲データをフロントサーバ１１０に送信する。フロントサーバ１１０の楽曲データ取得部１１８は、自動楽曲選択部１５６により自動レコメンドされた楽曲データを取得する。

学習済モデル１６６は、予めフィードバック実験結果から得られた情報を正解データとして、学習されたものである。学習済モデル１６６は、例えば、「３０代男性が東京タワー付近を通過する」ときに、そのシチュエーションで実際に評価が高かった楽曲を選択するように学習される。フィードバック実験とは、例えば、Ｍｕｓｉｃアプリ３２を通じた楽曲提供に対する高評価、低評価、再度の再生といった利用者のフィードバックを集めたものである。

図６は、楽曲レコメンドに関する処理の流れの概略を示す図である。フロントサーバ１１０は、携帯端末装置１０またはオーディオ装置５０により送信される利用者の位置情報を取得すると、取得した位置情報を地図情報に参照して、ＰＯＩがヒットしたか否かを判定する。ＰＯＩがヒットした場合に、位置情報を送信した利用者の利用者情報及びヒットしたＰＯＩのＰＯＩ情報を楽曲リクエストに含めてバックサーバ１５０に送信する。

バックサーバ１５０は、送信された楽曲リクエストに対応する利用者情報に基づいて利用者特徴情報を生成し、学習済モデル１６６に入力する。バックサーバ１５０は、送信された楽曲リクエストに対応するＰＯＩ情報に基づいてＰＯＩ特徴情報を生成し、学習済モデル１６６に入力する。バックサーバ１５０は、学習済モデル１６６の出力データを、利用者および利用者が接近して通過するＰＯＩにマッチする楽曲の楽曲データとして楽曲データ１６８から抽出する。

［情報処理装置２００］
図７は、情報処理装置２００の構成図である。情報処理装置２００は、例えば、ネットワーク通信部２１０と、取得部２２０と、特定部２３０と、算出部２４０と、表示制御部２５０と、受付部２６０と、決定部２７０と、出力制御部２８０と、提供部２９０と、を備える。ネットワーク通信部２１０以外の機能部は、例えば、ＣＰＵなどのハードウェアプロセッサがプログラム（ソフトウェア）を実行することにより実現される。これらの構成要素のうち一部または全部は、ＬＳＩやＡＳＩＣ、ＦＰＧＡ、ＧＰＵなどのハードウェア（回路部；circuitryを含む）によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予めＨＤＤやフラッシュメモリなどの記憶装置（非一過性の記憶媒体を備える記憶装置）に格納されていてもよいし、ＤＶＤやＣＤ－ＲＯＭなどの着脱可能な記憶媒体（非一過性の記憶媒体）に格納されており、記憶媒体がドライブ装置に装着されることでインストールされてもよい。

ネットワーク通信部２１０は、ネットワークＮＷを介して楽曲提供サーバ１００と通信する。取得部２２０は、例えば、第１取得部２２２と、第２取得部２２４と、を備える。第１取得部２２２は、オーディオ装置５０により出力される楽曲の情報（以下、第１出力内容）の情報（以下、第１情報）を取得する。第１出力内容は、現在出力されている楽曲でもよいし、将来的にオーディオ装置５０から出力されるまたは出力される可能性がある楽曲でもよい。オーディオ装置５０により出力される楽曲は、楽曲提供サーバ１００により送信された楽曲データの楽曲でもよいし、それ以外の楽曲でもよい。

第２取得部２２４は、移動体Ｍに搭載された図示しないナビゲーション装置が備える地図情報に基づいて、移動体Ｍが走行する地点の周囲における外部施設の情報（以下、第２情報）を取得する。第２取得部２２４は、例えば、移動体Ｍの進行方向に基づいて、第２情報を取得する。第２取得部２２４は、例えば、移動体Ｍの進行方向の先にある施設を外部施設とした第２情報を取得する。第２取得部２２４は、移動体Ｍの進行方向に基づいて第２情報を取得するので、運転者のわき見などを防止することができる。第２取得部２２４は、他の態様で第２情報を取得してもよい。

第２取得部２２４は、取得した第２情報に基づいて、第２情報が示す外部施設に設置された外部出力デバイスの情報を取得する。第２取得部２２４は、例えば、第２情報が示す外部施設にモニタ（ディスプレイ）、スピーカ、装飾ランプ（以下、ランプ）などの外部出力デバイスの有無や種類などの情報を取得する。

外部出力デバイスの情報は、どのように取得してもよい。例えば、外部施設における外部出力デバイスのデータを車載装置２０が予め記憶部等により記憶していてもよいし、外部施設における外部出力デバイスのデータを外部サーバ等から受信して取得してもよい。外部出力デバイスのうちのモニタやランプ類は、イルミネーションなどの視覚情報を出力する視覚情報デバイスの一例である。

特定部２３０は、第１取得部２２２により取得された第１情報及び第２取得部２２４により取得された第２情報に基づいて、移動体Ｍの周辺の外部施設のうち、第１情報が示す第１出力内容と関連する画像（映像）や音声を出力（以下、リンク再生）することが可能な外部出力デバイス（以下、第１外部出力デバイス）を特定する。特定部２３０は、更に、受付部２６０により受け付けられた第１外部出力デバイスに対する乗員の入力操作に基づいて、リンク再生を行う外部出力デバイス（以下、第２外部出力デバイス）を特定する。

算出部２４０は、特定部２３０により特定された第１外部出力デバイスの特性に基づいて、第１出力内容に対応付けられた出力内容（以下、第２出力内容）のリンク再生の費用（以下、出力費用）を算出する。外部出力デバイス３００の特性は、例えば、外部出力デバイス３００がモニタであればその大きさ、画像（映像）の性質（解像度や鮮明度）などであり、スピーカであれば音質などである。

算出部２４０は、出力費用をどのように算出してもよい。算出部２４０は、例えば、出力費用を車載装置２０が予め記憶部等により記憶しておいてもよいし、出力費用を外部サーバ等から受信して取得してもよい。

表示制御部２５０は、特定部２３０により特定された第１外部出力デバイスの位置を地図に対応付けて特定する。表示制御部２５０は、特定した第１外部出力デバイスの位置、出力可能な第２出力内容、及び出力費用をタッチパネル５８に表示させる。表示制御部２５０は、特定部２３０により複数の第１外部出力デバイスが特定された場合には、特定された複数の第１外部出力デバイスの位置、出力可能な第２出力内容、及び出力費用をタッチパネル５８に表示させる。

表示制御部２５０は、更に、第２出力内容の詳細設定をタッチパネル５８に表示させる。第２出力内容は、例えば、第１情報が示す楽曲のリズムに合わせて外部出力デバイスのうちのモニタに表示される画像やスピーカにより出力される音声の内容やタイミング、さらにはランプ類の点灯、点滅タイミングや色など示す。第２出力内容は、例えば、第１出力内容が落語や漫才などである場合の観客の笑い声などでもよい。移動体Ｍの乗員が、タッチパネル５８に表示された画像（ＧＵＩ）を触れることにより、画像が示す内容の入力操作がなされる。

受付部２６０は、タッチパネル５８に表示された第１外部出力デバイスに対する乗員の入力操作であって、第１外部出力デバイスの中から第２外部出力デバイスを指定する入力操作を受け付ける。受付部２６０は、タッチパネル５８に表示された第２出力内容の詳細設定に対する乗員の入力操作を受け付ける。

決定部２７０は、第１取得部２２２により取得された第１情報、第２取得部２２４により取得された第２情報、及び受付部２６０により受け付けられた乗員の入力操作に基づいて、第２出力内容を決定する。第２出力内容は、第１出力内容に対応付けて決定され、外部出力デバイスにより出力される内容である。決定部２７０は、第１取得部２２２により取得された第１情報に基づいて、周辺移動体４１０に搭載された周辺出力デバイス４００の出力内容（以下、第３出力内容）を決定する。

出力制御部２８０は、決定部２７０により決定された第２出力内容を、ネットワークＮＷを介して外部出力デバイス３００に送信する。外部出力デバイス３００は、出力制御部２８０により送信された第２出力内容に応じた画像や音声をリンク再生する。

提供部２９０は、決定部２７０により決定された第３出力内容を、ネットワークＮＷを介して周辺出力デバイス４００に送信する。周辺出力デバイス４００は、提供部２９０により送信された第３出力内容に応じた画像や音声をリンク再生する。

［外部出力デバイス３００］
図８は、外部出力デバイス３００の構成図である。外部出力デバイス３００は、例えば、モニタ３０２と、スピーカ３０４と、ランプ類３０６と、を備える。モニタ３０２は、例えば、外部施設３１０の外壁などに設けられる。モニタ３０２は、外部施設３１０の外に向けて映像（画像）を出力する。

スピーカ３０４は、例えば、外部施設３１０の屋上に設けられる。スピーカ３０４は、外部施設３１０の外側に向けて音声を出力する。ランプ類３０６は、例えば、外部施設３１０の周囲に取り付けられた複数のランプを備える。ランプ類３０６における個々のランプは、単独でまたは複数がまとまって点灯、点滅する。ランプ類３０６のランプは、種々の色で点灯、点滅可能である。

［周辺出力デバイス４００］
図１に戻り、周辺出力デバイス４００は、例えば、周辺移動体４１０の内部に設けられている。周辺出力デバイス４００は、例えば、移動体Ｍにおけるオーディオ装置５０と同様のスピーカシステムやタッチパネルを備える。周辺出力デバイス４００は、タッチパネルに代えてまたは加えて、モニタなどを備えてもよい。

続いて、フロントサーバ１１０における処理について説明する。フロントサーバ１１０は、楽曲データを携帯端末装置１０に送信するまでの処理を実行する前段階として、利用者情報取得部１１４において取得した利用者情報を記憶部１２０に格納しておく。記憶部１２０に格納される利用者情報は、利用者情報取得部１１４が取得した利用者情報に基づいて、適宜書き換えられるようにしてよい。

図９は、フロントサーバ１１０の処理の一例を示すフローチャートである。本フローチャートの処理は、例えば所定周期で繰り返し実行される。フロントサーバ１１０は、まず、位置情報取得部１１６において、携帯端末装置１０により送信される利用者の位置情報に基づいて、利用者の位置を取得したか否かを判定する（ステップＳ１０１）。位置情報取得部１１６が利用者の位置を取得していないと判定した場合、フロントサーバ１１０は、図９に示す処理の１ルーチンを終了する。

位置情報取得部１１６が利用者の位置を取得したと判定した場合、ＰＯＩ取得部１１７は、利用者の位置に基づいて、ＰＯＩがヒットしたか否かを判定する（ステップＳ１０３）。ＰＯＩがヒットしていないとＰＯＩ取得部１１７が判定した場合、フロントサーバ１１０は、図９に示す処理の１ルーチンを終了する。

ＰＯＩがヒットしたと判定した場合、ＰＯＩ取得部１１７は、ヒットしたＰＯＩのＰＯＩ情報を含む楽曲リクエストをバックサーバ１５０に送信する（ステップＳ１０５）。続いて、楽曲データ取得部１１８は、バックサーバ１５０により送信される楽曲データを受信したか否かを判定する（ステップＳ１０７）。楽曲データを受信していないと判定した場合、楽曲データ取得部１１８は、ステップＳ１０７の処理を繰り返す。楽曲データを受信したと判定した場合、楽曲提供部１１９は、送信された楽曲データを自動レコメンドされる楽曲データとして携帯端末装置１０に送信し（ステップＳ１０９）、携帯端末装置１０に楽曲データを再生可能とさせる。こうして、フロントサーバ１１０は、図９に示す処理の１ルーチンを終了する。

続いて、情報処理装置２００における処理について説明する。図１０は、情報処理装置２００の処理の一例を示すフローチャートである。本フローチャートの処理は、例えば所定周期で繰り返し実行される。情報処理装置２００は、まず、オーディオ装置５０により出力される第１情報が第１取得部２２２により取得されたか否かを判定する（ステップＳ２０１）。第１取得部２２２により第１情報が取得されていないと判定した場合、情報処理装置２００は、図１０に示す処理の１ルーチンを終了する。

第１取得部２２２により第１情報が取得されたと判定した場合、第２取得部２２４は、移動体Ｍが走行する地点の周囲における第２情報を取得する（ステップＳ２０３）。続いて、特定部２３０は、第１取得部２２２により取得された第１情報及び第２取得部２２４により取得された第２情報に基づいて、第１外部出力デバイスを特定する（ステップＳ２０５）。

続いて、算出部２４０は、特定部２３０により特定された第１外部出力デバイスの特性に基づいて、第２出力内容の出力費用を算出する（ステップＳ２０７）。続いて、表示制御部２５０は、第１外部出力デバイスの位置を地図に対応付け、第１外部出力デバイスの位置をタッチパネル５８における地図上に表示させるとともに、第１外部出力デバイスにより出力可能な第２出力内容の詳細設定及び出力費用をタッチパネル５８に表示させる（ステップＳ２０９）。

図１１から図１３は、タッチパネル５８に表示される画像の一例を示す図である。図１１に示す例では、第１外部出力デバイスの位置を示す第１位置画像Ｇ２１～第３位置画像Ｇ２３が地図画像上に表示されている。さらに、第１位置画像Ｇ２１～第３位置画像Ｇ２３のそれぞれに対応する第１外部出力デバイスの詳細設定及び費用が表示されている。

続いて、受付部２６０は、第２出力内容の詳細設定に関する乗員の入力操作を受け付ける（ステップＳ２１１）。図１２では、タッチパネル５８における第２出力内容の詳細設定を受け付ける画面を示している。例えば、図１１における第１位置画像Ｇ２１に対して乗員が入力操作を行うと、受付部２６０は、入力操作を受け付けて、図１２に示す第１位置画像Ｇ２１に対応する第１外部出力デバイスの第２出力内容の詳細情報を表示する。

図１２に示す画像では、詳細設定の内容及び詳細設定を行うための矢印画像が表示されている。図１２に示す例では、「モニタ」「スピーカ」「ランプ類」の各項目におけるそれぞれの「品質」「時間」について設定が可能とされており、「モニタ」の「品質」は「Ｓ」、時間は「長い」とされている。品質としては、「Ｓ」「Ａ」「Ｂ」「Ｃ」の４ランクが設定可能とされており、「時間」としては、「長」「普通」「短」の３ランクが設定可能とされている。乗員は、矢印画像に対して入力操作を行うことにより、各項目の内容を変更して設定可能とされている。各項目の内容を変更すると、算出部２４０は、第２出力内容の出力費用を更に算出し、表示制御部２５０は、算出部２４０により算出された出力費用を「費用（暫定）」の項目としてタッチパネル５８に表示させる。

続いて、第２出力内容の詳細設定が完了すると、特定部２３０は、複数の第１外部出力デバイスの中から選択された第２外部出力デバイスを特定する（ステップＳ２１３）。続いて、表示制御部２５０は、第２外部出力デバイスの位置、詳細設定、及び出力費用をタッチパネル５８に表示させる（ステップＳ２１５）。図１３には、第２外部出力デバイスとして、第１位置画像Ｇ２１に対応する第１外部出力デバイスが選択され、第２外部出力デバイスの位置、詳細設定、及び出力費用が表示されたタッチパネル５８の画像の一例を示す。

続いて、決定部２７０は、図１２に示す画像における乗員の入力操作の結果に基づいて、第２出力内容を決定する（ステップＳ２１７）。続いて、出力制御部２８０は、特定部２３０により特定された第２外部出力デバイスに対して、決定部２７０により決定された第２出力内容を送信する（ステップＳ２１９）。第２出力内容を送信された第２外部出力デバイスは、第２出力内容をリンク再生する。

続いて、決定部２７０は、第１取得部２２２により取得された第１情報に基づいて、第３出力内容を決定する（ステップＳ２２１）。続いて、提供部２９０は、決定部２７０により決定された第３出力内容を、ネットワークＮＷを介して周辺出力デバイス４００に送信する（ステップＳ２２３）。第３出力内容を送信された周辺出力デバイス４００は、第２出力内容をリンク再生する。こうして、情報処理装置２００は、図１０に示す処理の１ルーチンを終了する。

実施形態の情報処理システム１は、移動体Ｍ内で出力される第１出力内容に対応付けられた第２出力内容が外部出力デバイス３００によりリンク再生される。このため、移動体で移動中の乗員は、移動体Ｍ内で出力される第１出力内容を楽しむとともに、第１出力内容に対応する第２出力内容が移動体Ｍの外部からリンク再生される。したがって、移動体Ｍの車内環境を維持しながら、移動体Ｍの乗員に走行中の楽しみを提供することができる。

また、実施形態の情報処理システム１では、第２出力内容の詳細設定を乗員が設定することができる。したがって、乗員は、自らの嗜好に応じた設定の出力を楽しむことができるので、走行中の楽しみをさらに大きくすることができる。

さらに、実施形態の情報処理システム１では、外部施設に設けられた外部出力デバイス３００の他に移動体Ｍの周辺の周辺移動体４１０に搭載された周辺出力デバイス４００から第３出力内容がリンク再生される。このため、移動体Ｍの乗員と周辺移動体の乗員とが共通または関連する内容の楽曲などの出力を楽しむことができるので、移動体Ｍの乗員、さらには周辺移動体の乗員の楽しみを大きくすることができる。

上記実施形態の情報処理システム１において、情報処理装置２００は、移動体Ｍに設けられているが、情報処理装置２００の機能の一部及び全部は、移動体Ｍ以外に設けられていてもよい。例えば、情報処理装置２００の機能のうち、表示制御部２５０以外の機能について、移動体Ｍの外部、例えば、楽曲提供サーバ１００や別途設けられた外部サーバに設けられていてもよい。上記実施形態の情報処理システム１では、外部出力デバイス３００は、外部施設に設けられるが、外部出力デバイス３００自体が外部施設であってもよい。

また、実施形態の情報処理システム１において、外部出力デバイスは、外部施設に設けられたモニタ、スピーカ、装飾ランプなどであり、第２出力内容は、これらから出力される映像や音などであるが、外部出力デバイス及び第２出力内容は、その他のものでもよい。例えば、外部出力デバイスは、花火を打ち上げる打ち上げ装置であり、第２出力内容は、打ち上げ装置により打ち上げられる花火でもよい。あるいは、外部出力デバイスは、照明装置であり、第２出力内容は、照明装置を利用したサーチライトやプロジェクションマッピングなどでもよい。あるいは、外部出力デバイスは、ドローンなどの飛翔体であり、第２出力内容は、複数のドローンの編隊により表現される形状や回転、高速飛行などの飛行形態を制御したショーなどでもよい。

上記説明した実施形態は、以下のように表現することができる。
コンピュータによって読み込み可能な命令を格納する記憶媒と、
前記記憶媒体に接続されたプロセッサと、を備え、
前記プロセッサは、前記コンピュータによって読み込み可能な命令を実行することにより
移動体に搭載された移動体デバイスによって、前記移動体内に出力される第１出力内容の第１情報を取得し、
前記移動体の周囲における外部施設の第２情報を取得し、
前記外部施設に設けられ、前記外部施設の外部に向けて情報を出力する外部出力デバイスの第２出力内容を、前記第１出力内容に対応付けて決定する、
装置。

以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。

１…情報処理システム
１０…携帯端末装置
１２…近距離通信部
１４…ネットワーク通信部
１６…Ｍｕｓｉｃアプリ実行部
１８…タッチパネル
２０…車載装置
３０…記憶部
３２…Ｍｕｓｉｃアプリ
５０…オーディオ装置
５２…連携アプリ実行部
５４…音響調整部
５６…スピーカシステム
５８…タッチパネル
６０…近距離通信部
１００…楽曲提供サーバ
１１０…フロントサーバ
１１２…ネットワーク通信部
１１４…利用者情報取得部
１１６…位置情報取得部
１１７…ＰＯＩ取得部
１１８…楽曲データ取得部
１１９…楽曲提供部
１２０…記憶部
１２２…利用者情報
１２４…地図情報
１５０…バックサーバ
１５２…利用者特徴情報生成部
１５４…ＰＯＩ特徴情報生成部
１５６…自動楽曲選択部
１６０…記憶部
１６２…利用者特徴情報
１６４…ＰＯＩ特徴情報
１６６…学習済モデル
１６８…楽曲データ
２００…情報処理装置
２１０…ネットワーク通信部
２２０…取得部
２２２…第１取得部
２２４…第２取得部
２３０…特定部
２４０…算出部
２５０…表示制御部
２６０…受付部
２７０…決定部
２８０…出力制御部
２９０…提供部
３００…外部出力デバイス
３０２…モニタ
３０４…スピーカ
３０６…ランプ類
３１０…外部施設
４００…周辺出力デバイス
４１０…周辺移動体
Ｍ…移動体
ＮＷ…ネットワーク

Claims (12)

1. 移動体に搭載された移動体デバイスによって、前記移動体内に出力される第１出力内容の第１情報を取得する第１取得部と、
   前記移動体の周囲における外部施設の第２情報を取得する第２取得部と、
   前記外部施設に設けられ、前記外部施設の外部に向けて情報を出力する外部出力デバイスの第２出力内容を、前記第１出力内容に対応付けて決定する決定部と、を備える、
   情報処理装置。
2. 前記第２情報を取得された前記外部施設における前記外部出力デバイスに、前記第２出力内容をリンク再生させる出力制御部、を更に備える、
   請求項１に記載の情報処理装置。
3. 前記外部出力デバイスは、視覚情報を出力する視覚情報デバイスを含む、
   請求項１または２に記載の情報処理装置。
4. 前記第２取得部は、前記移動体の進行方向に基づいて、前記第２情報を取得する
   請求項１から３のうちいずれか１項に記載の情報処理装置。
5. 前記リンク再生が可能な第１外部出力デバイスを特定する特定部と、
   前記第１外部出力デバイスの位置を地図に対応付けて前記移動体内の表示部に表示させる表示制御部と、を更に備える、
   請求項２に記載の情報処理装置。
6. 前記外部出力デバイスの特性に基づいて、前記リンク再生の費用を算出する算出部、を更に備える、
   請求項５に記載の情報処理装置。
7. 前記表示部に表示された前記第１外部出力デバイスにより出力される出力内容の詳細設定に対する前記移動体の乗員の入力操作を受け付ける受付部、を更に備える、
   請求項５または６に記載の情報処理装置。
8. 前記特定部は、前記リンク再生を行う第２外部出力デバイスを特定し、
   前記表示制御部は、前記第２外部出力デバイスの位置を地図に対応付けて前記移動体内の表示部に表示させる、
   請求項５から７のうちいずれか１項に記載の情報処理装置。
9. 前記表示制御部は、前記リンク再生の詳細設定の内容を更に表示させる、
   請求項５から８のうちいずれか１項に記載の情報処理装置。
10. 前記決定部は、前記移動体の周辺における周辺移動体に搭載された周辺出力デバイスの第３出力内容を前記第１出力内容に基づいて決定し、
    前記第３出力内容を前記周辺出力デバイスに提供する提供部、を更に備える、
    請求項１から９のうちいずれか１項に記載の情報処理装置。
11. 情報処理装置のコンピュータが、
    移動体に搭載された移動体デバイスによって、前記移動体内に出力される第１出力内容の第１情報を取得し、
    前記移動体の周囲における外部施設の第２情報を取得し、
    前記外部施設に設けられ、前記外部施設の外部に向けて情報を出力する外部出力デバイスの第２出力内容を、前記第１出力内容に対応付けて決定する、
    情報処理方法。
12. 情報処理装置のコンピュータに、
    移動体に搭載された移動体デバイスによって、前記移動体内に出力される第１出力内容の第１情報を取得し、
    前記移動体の周囲における外部施設の第２情報を取得し、
    前記外部施設に設けられ、前記外部施設の外部に向けて情報を出力する外部出力デバイスの第２出力内容を、前記第１出力内容に対応付けて決定することを行わせる、
    プログラム。

Images