JP6739017B1

JP6739017B1 - Tourism support device, robot equipped with the device, tourism support system, and tourism support method

Info

Publication number: JP6739017B1
Application number: JP2019195060A
Authority: JP
Inventors: 利博雪本
Original assignee: SUBARU CARBELL CO.,LTD.
Current assignee: SUBARU CARBELL CO.,LTD.
Priority date: 2019-10-28
Filing date: 2019-10-28
Publication date: 2020-08-12
Anticipated expiration: 2039-10-28
Also published as: JP2021068357A

Abstract

【課題】人手によらずに、客の乗降管理を行うことできるとともに、客の多様性に対応させた情報を的確に提供することができる観光支援装置を提供すること。【解決手段】客が乗降する移動体に搭載される観光支援装置３０であって、移動体に搭載された機器から送信されてくる機器情報、客の通信端末から送信されてくる端末情報、及び外部の通信ネットワークを介して送信されてくるネットワーク情報のうちの少なくとも１つを取得する情報取得部４１と、少なくとも客の旅程情報を記憶する情報記憶部４２と、客が移動体を乗り降りするときに取得される客情報を用いて、乗降客を管理する乗降客管理部４３と、客の旅程情報及び情報取得部４１で取得される取得情報のうちの少なくとも１つと、前記客情報とを用いて、客に提供する提供情報を生成する提供情報生成部４４と、生成された提供情報を出力する提供情報出力部４５とを装備する。【選択図】図３PROBLEM TO BE SOLVED: To provide a tourism support device capable of managing passengers getting on and off without relying on manual labor and accurately providing information corresponding to the variety of customers. A tourism support device 30 mounted on a moving body on which a customer gets on and off, device information transmitted from a device mounted on the moving body, terminal information transmitted from a communication terminal of the customer, and An information acquisition unit 41 that acquires at least one of the network information transmitted via the external communication network, an information storage unit 42 that stores at least the itinerary information of the customer, and when the customer gets on and off the moving body. The passenger information is used to manage passengers and passengers, and at least one of the itinerary information of the passengers and the acquisition information acquired by the information acquisition unit 41 and the customer information are used. In addition, a provision information generation unit 44 that generates provision information to be provided to customers and a provision information output unit 45 that outputs the generated provision information are provided. [Selection diagram]

Description

本発明は観光支援装置、該装置が搭載されたロボット、観光支援システム、及び観光支援方法に関し、より詳細には、観光バスなどの移動体での観光を支援することができる観光支援装置、該装置が搭載されたロボット、観光支援システム、及び観光支援方法に関する。 The present invention relates to a sightseeing support device, a robot equipped with the device, a sightseeing support system, and a sightseeing support method, and more particularly, a sightseeing support device capable of supporting sightseeing in a mobile body such as a sightseeing bus. The present invention relates to a robot equipped with a device, a sightseeing support system, and a sightseeing support method.

下記の特許文献１には、案内者が居なくても、観光客の利便性を損なうことなく、観光客に対して観光案内を行うことのできる観光案内システムが開示されている。 The following Patent Document 1 discloses a tourist guidance system that can provide tourist guidance to tourists without impairing the convenience of tourists even if there is no guide.

特許文献１記載の観光案内システムは、車両から外側の景色を撮影し、当該撮影によって得られた撮影データを出力する車載カメラ装置と、観光案内を音声出力する音声出力装置と、これら装置に接続された処理装置とを備えている。
前記処理装置には、観光案内を音声出力するための音声データと予め定められた対象物の画像を含む判定用画像データとが対応付けて予め記憶されている。前記処理装置は、前記判定用画像データと前記撮影データとを比較して、前記予め定められた対象物が撮影されたか否かを判定する判定処理を行い、前記予め定められた対象物が撮影されたと判定したとき、音声データに基づく音声出力処理を行うようになっている。 The tourist guidance system described in Patent Document 1 is an in-vehicle camera device that captures an outside scene from a vehicle and outputs captured data obtained by the capture, a voice output device that outputs tourist information by voice, and these devices are connected. And a processing device.
In the processing device, voice data for outputting tourist information by voice and determination image data including an image of a predetermined target object are stored in advance in association with each other. The processing device compares the determination image data with the shooting data to perform a determination process of determining whether or not the predetermined target object is captured, and the predetermined target object is captured. When it is determined that it has been performed, a voice output process based on the voice data is performed.

前記観光案内システムでは、前記車載カメラ装置が前記予め定められた対象物を撮影したとき、前記音声出力装置から観光案内が音声出力される構成となっている。
このような構成により、観光案内サービスを提供する観光業者からすると、バスガイドのような案内者が居なくても、前記予め定められた対象物が撮影されたタイミングで観光案内を前記音声出力装置から音声出力することができるので、案内者を手配する必要がなくなり、案内者にかかるコストを減らすことができ、また、観光客からすると、自動的に観光案内が始まるので、利便性が良くなる、としている。 In the tourist guide system, when the vehicle-mounted camera device photographs the predetermined object, the audio output device outputs tourist guide by voice.
With such a configuration, from the viewpoint of a tourist company that provides a tourist guide service, even if there is no guide such as a bus guide, the tourist guide is provided with the tourist output at the timing when the predetermined object is photographed. Since it is possible to output audio from, it is not necessary to arrange a guide, the cost to the guide can be reduced, and from the viewpoint of tourists, tourist guides will start automatically, improving convenience. , And.

［発明が解決しようとする課題］
しかしながら、特許文献１記載の観光案内システムでは、前記車載カメラ装置によって撮影された前記予め定められた対象物と、その観光案内とが予め対応付けられているので、観光案内に関して、客の多様性に対応させることができないという課題があった。 [Problems to be Solved by the Invention]
However, in the tourist guide system described in Patent Document 1, since the predetermined object photographed by the vehicle-mounted camera device and the tourist guide are associated with each other in advance, there is a diversity of customers in the tourist guide. There was a problem that it could not correspond to.

また、観光バスでは、休憩地点、又は観光地点などで停車した場合、その後の出発前に添乗員又は運転者などにより、客全員の帰還を確認（点呼）する作業が通常行われる。しかしながら、乗客人数が多い場合、又は様々な国から来た観光客が乗車している場合などにおいては、この確認作業は容易ではない。特許文献１記載の観光案内システムでは、添乗員又は運転者などによる乗客の確認作業の負担を減らすことができないという課題があった。 Further, in a sightseeing bus, when the vehicle is stopped at a resting point or a sightseeing point, a tour operator or a driver usually confirms the return (rolling) of all the guests before departure. However, this confirmation work is not easy when there are many passengers or when tourists from various countries are on board. The sightseeing guide system described in Patent Document 1 has a problem that the burden of passenger confirmation work by the tour operator or the driver cannot be reduced.

特開２０１７−１９４８９８号公報JP, 2017-194898, A

Means for solving the problem and its effect

本発明は上記課題に鑑みなされたものであって、人手によらずに、客の乗降管理を行うことできるとともに、客の多様性に対応させた情報を的確に提供することができる観光支援装置、該装置が搭載されたロボット、観光支援システム、及び観光支援方法を提供することを目的としている。 The present invention has been made in view of the above problems, and a tourist assistance device capable of managing passengers getting on and off without relying on manual labor and accurately providing information corresponding to the variety of customers. It is an object of the present invention to provide a robot equipped with the device, a tourism support system, and a tourism support method.

上記目的を達成するために本発明に係る観光支援装置（１）は、
客が乗り降りする移動体に搭載される観光支援装置であって、
前記移動体に搭載された機器から送信されてくる機器情報、前記客の通信端末から送信されてくる端末情報、及び外部の通信ネットワークを介して送信されてくるネットワーク情報のうちの少なくとも１つを取得する情報取得部と、
少なくとも前記客の旅程情報を記憶する情報記憶部と、
前記客が前記移動体を乗り降りするときに取得される客情報を用いて、乗降客を管理する乗降客管理部と、
前記客の旅程情報、及び前記情報取得部で取得される取得情報のうちの少なくとも１つと、前記客情報とを用いて、前記客に提供する提供情報を生成する提供情報生成部と、
生成された前記提供情報を出力する提供情報出力部とを備えていることを特徴としている。 In order to achieve the above object, the tourism support device (1) according to the present invention is
A tourism support device mounted on a moving body on which a customer gets on and off,
At least one of device information transmitted from a device mounted on the mobile body, terminal information transmitted from the communication terminal of the customer, and network information transmitted via an external communication network. The information acquisition unit to acquire,
An information storage unit for storing at least the itinerary information of the customer;
Using the customer information acquired when the customer gets on and off the moving body, a passenger management section for managing passengers,
An itinerary information of the customer, at least one of the acquisition information acquired by the information acquisition unit, and a provision information generation unit that generates provision information to be provided to the customer using the customer information,
An additional information output unit that outputs the generated additional information is provided.

上記観光支援装置（１）によれば、前記乗降客管理部により、前記客が前記移動体を乗り降りするときに取得される前記客情報を用いて、前記乗降客、すなわち乗車客と降車客とがそれぞれ管理される。そして、前記提供情報生成部により、前記旅程情報、及び前記取得情報のうちの少なくとも１つと、前記客情報とを用いて、前記客に提供する提供情報が生成され、前記提供情報出力部により前記提供情報が出力される。
したがって、上記観光支援装置（１）によれば、人手によらずに、前記客の乗降管理を行うことが可能になるとともに、前記客の多様性に対応させた情報を前記提供情報として的確に提供することができる。また、前記乗降客管理部で用いる前記客情報を、前記提供情報生成部でも用いることにより、前記提供情報の生成を効率良く行うことができる。 According to the tourism support device (1), the passenger information, which is obtained when the passenger gets on and off the moving body by the passenger management unit, is used to detect the passengers, that is, the passengers and the passengers. Are managed respectively. Then, the provision information generation unit generates provision information to be provided to the customer using at least one of the itinerary information and the acquisition information and the customer information, and the provision information output unit outputs the provision information. The provided information is output.
Therefore, according to the tourism support device (1), it is possible to manage the passengers getting on and off the vehicle without manpower, and the information corresponding to the variety of the customers can be accurately provided as the provided information. Can be provided. Further, by using the customer information used by the passenger management unit also by the provision information generation unit, it is possible to efficiently generate the provision information.

また本発明に係る観光支援装置（２）は、上記観光支援装置（１）において、
前記乗降客管理部が、
前記客が撮像された客画像を取得する客画像取得部と、
取得された前記客画像から、前記客の顔、性別、年齢、年代、体格、人種、及び服装のうち少なくとも１以上の特徴を抽出する特徴抽出部と、
抽出された前記少なくとも１以上の特徴を前記客情報として記憶する特徴記憶部と、
該特徴記憶部に記憶された前記客情報を前記提供情報生成部に出力する客情報出力部と、
前記客が前記移動体を乗り降りした場合に、前記特徴抽出部により前記客画像から抽出される前記客の前記少なくとも１以上の特徴と、前記特徴記憶部に記憶されている前記客情報とを用いて、前記乗降客を判定する乗降客判定部と、
判定された前記乗降客の判定情報を記憶する判定情報記憶部と、
記憶された前記乗降客の判定情報を出力する判定情報出力部とを備えていることを特徴としている。 The tourism support device (2) according to the present invention is the same as the above tourism support device (1),
The passenger management section,
A customer image acquisition unit that acquires a customer image captured by the customer,
From the acquired customer image, a feature extraction unit that extracts at least one feature of the face, sex, age, age, physique, race, and clothes of the customer,
A feature storage unit that stores the extracted at least one feature as the customer information;
A customer information output unit that outputs the customer information stored in the feature storage unit to the provision information generation unit;
When the customer gets on and off the moving body, the at least one feature of the customer extracted from the customer image by the feature extraction unit and the customer information stored in the feature storage unit are used. A passenger determination unit for determining the passengers,
A determination information storage unit that stores the determination information of the passengers that have been determined,
And a determination information output unit that outputs the stored determination information of the passengers.

上記観光支援装置（２）によれば、前記乗降客管理部により、前記客が前記移動体を乗り降りした場合に、前記特徴抽出部により前記客画像から抽出される前記客の前記少なくとも１以上の特徴と、前記特徴記憶部に記憶されている前記客情報とを用いて、前記乗降客が判定され、その判定情報（すなわち、前記客の乗降状態）が記憶され、前記乗降客の判定情報が出力される。したがって、人手をかけずに、前記客の乗降管理を精度良く行うことができ、添乗員又は運転者などの人による確認（点呼）作業の負担をなくす、又は大幅に軽減することができる。 According to the tourism support device (2), when the passenger gets on and off the moving body by the passenger management section, the at least one or more of the customers extracted from the customer image by the feature extraction section A feature and the passenger information stored in the feature storage unit are used to determine the passenger, the determination information (that is, the passenger entry/exit state) is stored, and the passenger determination information is Is output. Therefore, it is possible to perform the boarding/alighting management of the passenger with high precision without manpower, and it is possible to eliminate or significantly reduce the burden of confirmation (rolling call) work by a person such as an attendant or a driver.

また本発明に係る観光支援装置（３）は、上記観光支援装置（２）において、
前記乗降客管理部が、前記乗降客判定部により前記乗降客が判定された場合に、該乗降客に向かって発話する発話部を備えていることを特徴としている。 The tourism support device (3) according to the present invention is the same as the above tourism support device (2),
It is characterized in that the passenger management unit includes an utterance unit that speaks to the passenger when the passenger determination unit determines the passenger.

上記観光支援装置（３）によれば、前記乗降客管理部が前記発話部を備えているので、前記乗降客判定部により前記乗降客が判定された場合に、該乗降客に向かって発話することが可能となる。なお、降車する客、乗車する客に応じて、発話内容が変更される構成としてもよい。前記発話内容には、例えば、挨拶、又は出発時刻などの次の予定などが含まれてもよい。これにより、前記乗降客を癒す効果、又は前記乗降客に注意等を喚起する効果などが得られる。 According to the tourism support device (3), since the passenger management unit includes the utterance unit, when the passenger determination unit determines the passenger, the user speaks to the passenger. It becomes possible. The utterance content may be changed depending on the passenger getting off and getting on. The utterance content may include, for example, a greeting or the next schedule such as the departure time. Thereby, an effect of healing the passengers, an effect of calling attention to the passengers, or the like can be obtained.

また本発明に係る観光支援装置（４）は、上記観光支援装置（１）〜（３）のいずれかにおいて、
前記客の音声を取得する音声取得部と、
取得された前記客の音声内容を認識する音声認識部とを備え、
前記提供情報生成部が、
前記音声認識部で認識された前記音声内容に対する回答情報を前記提供情報として生成する回答情報生成部を備えていることを特徴としている。 The tourism support device (4) according to the present invention is the tourism support device (1) to (3) according to any one of the above,
A voice acquisition unit for acquiring the voice of the customer,
A voice recognition unit for recognizing the acquired voice content of the customer,
The provision information generation unit,
It is characterized in that it is provided with an answer information generation unit which generates answer information for the voice content recognized by the voice recognition unit as the provision information.

上記観光支援装置（４）によれば、前記回答情報生成部によって、前記音声認識部で認識された前記客の音声内容に対する回答情報が前記提供情報として生成されるので、前記客の多様な問合せなどに的確に対応することができる。 According to the tourism support device (4), since the reply information generation unit generates reply information for the voice content of the customer recognized by the voice recognition unit as the provided information, various inquiries of the customer are provided. It is possible to respond appropriately to such.

また本発明に係る観光支援装置（５）は、上記観光支援装置（１）〜（４）のいずれかにおいて、
前記提供情報生成部が、
少なくとも前記客情報を用いて、前記客にお勧めする観光行動の推奨カテゴリーを推定する推定部と、
前記旅程情報、及び前記取得情報のうちの少なくとも１つと、前記推定部で推定された前記推奨カテゴリーに関する情報とを用いて、該推奨カテゴリーに対応する観光情報を前記提供情報として生成する観光情報生成部とを備えていることを特徴としている。 The tourism support device (5) according to the present invention is the tourism support device (1) to (4) according to any one of the above,
The provision information generation unit,
Using at least the customer information, an estimation unit that estimates a recommended category of tourist behavior recommended to the customer,
At least one of the itinerary information and the acquired information and information about the recommended category estimated by the estimation unit are used to generate tourist information corresponding to the recommended category as the provided information. It is characterized by having a section and.

上記観光支援装置（５）によれば、前記提供情報生成部が前記推定部と前記観光情報生成部とを備えているので、前記推定部によって、前記推奨カテゴリーが推定され、前記観光情報生成部によって、前記推奨カテゴリーに対応する観光情報が生成される。したがって、前記客にお勧めの観光情報を提供することができ、満足度の高い観光が行えるように前記客を支援することができる。 According to the tourism support device (5), since the provision information generation unit includes the estimation unit and the tourism information generation unit, the estimation unit estimates the recommended category and the tourism information generation unit. Thus, tourist information corresponding to the recommended category is generated. Therefore, recommended tourist information can be provided to the customer, and the customer can be supported so that the tourist can enjoy sightseeing with high satisfaction.

また本発明に係る観光支援装置（６）は、上記観光支援装置（５）において、
前記推定部が、
前記推奨カテゴリーを推定するための機械学習を行った学習済みの学習器を含み、
該学習器に少なくとも前記客情報を入力して、前記推奨カテゴリーに関する情報を前記学習器から取得するものであり、
前記観光情報生成部が、
前記学習器から取得された前記推奨カテゴリーに関する情報に基づいて、前記観光情報を生成するものであることを特徴としている。 The tourism support device (6) according to the present invention is the same as the above tourism support device (5),
The estimation unit,
Including a learned learner that has been machine-learned to estimate the recommended category,
At least the customer information is input to the learning device, and information about the recommended category is acquired from the learning device,
The tourist information generation unit,
The tourist information is generated based on the information on the recommended category acquired from the learning device.

上記観光支援装置（６）によれば、前記推定部が前記学習器を含んでいるので、少なくとも前記客情報を用いて、前記カテゴリーを精度良く推定することが可能となり、前記客の多様性に対応させたお勧めの観光情報を生成して提供することができ、前記客の満足度をより高めることができる。 According to the tourism support device (6), since the estimation unit includes the learning device, it is possible to accurately estimate the category by using at least the customer information, and to improve the diversity of the customers. Recommended corresponding tourist information can be generated and provided, and the customer's satisfaction level can be further enhanced.

また本発明に係る観光支援装置（７）は、上記観光支援装置（６）において、
前記学習器が、
前記観光情報を提供する各地点のデータ、及びこれら各地点を観光した客のデータを入力とし、これら各地点における客の観光行動のカテゴリーを出力とする教師データを用いて学習させた教師あり学習モデルを含み、
前記推定部が、
前記学習器に、前記観光情報を提供する地点のデータ、及び前記客情報を入力することで、前記学習器から前記推奨カテゴリーに関する情報を出力する処理を行うものであることを特徴としている。 Further, the tourism support device (7) according to the present invention is the same as the above tourism support device (6),
The learner is
Supervised learning that uses the data of each point that provides the tourist information and the data of the tourists who have visited these points as input and learns using the teacher data that outputs the category of tourist behavior of each of these points Including the model,
The estimation unit,
It is characterized in that the learning device is configured to perform processing of outputting information regarding the recommended category from the learning device by inputting data of a spot providing the tourist information and the customer information.

上記観光支援装置（７）によれば、前記学習器が前記教師あり学習モデルを含んでいるので、前記教師データに基づいて、前記推奨カテゴリーを精度良く出力することが可能となる。また、前記地点のデータ、及び前記客情報が前記学習器に入力され、前記地点における前記推奨カテゴリーに関する情報が前記学習器から出力されるので、前記客にお勧めの観光情報を前記地点毎に生成して提供することが可能となる。 According to the tourism support device (7), since the learning device includes the learning model with teacher, it is possible to accurately output the recommended category based on the teacher data. Further, since the data of the points and the customer information are input to the learning device, and the information regarding the recommended categories at the points is output from the learning device, the tourist information recommended to the customers is provided for each of the points. It can be generated and provided.

また本発明に係る観光支援装置（８）は、上記観光支援装置（６）において、
前記学習器が、
前記観光情報を提供する各地点のデータ、これら各地点を観光した客のデータ、及びこれら各地点における客の観光行動のカテゴリーを用いて、これら各地点における客の観光行動のカテゴリーと前記客のデータとの関係を学習させた教師なし学習モデルを含み、
前記推定部が、
前記学習器に、前記観光情報を提供する地点のデータ、及び前記客情報を入力することで、前記学習器から前記推奨カテゴリーに関する情報を出力する処理を行うものであることを特徴としている。 The tourism support device (8) according to the present invention is the same as the above tourism support device (6),
The learner is
Using the data of each point that provides the tourist information, the data of the tourists who have visited each of these points, and the category of the tourist behavior of the customer at each of these points, the category of the tourist behavior of the customer at each of these points and the Including an unsupervised learning model that trained the relationship with the data,
The estimation unit,
It is characterized in that the learning device is configured to perform processing of outputting information regarding the recommended category from the learning device by inputting data of a spot providing the tourist information and the customer information.

上記観光支援装置（８）によれば、前記学習器が前記教師なし学習モデルを含んでいるので、前記推奨カテゴリーを推定する場合に、教師あり学習では捉えにくい規則性や傾向などの特徴が捉えられたカテゴリー分類が可能となる。また、前記地点のデータ、及び前記客情報が前記学習器に入力され、前記地点における前記カテゴリーに関する情報が前記学習器から出力されるので、前記客にお勧めの観光情報を前記地点毎に生成して提供することができる。 According to the tourism support device (8), since the learning device includes the unsupervised learning model, when estimating the recommended category, features such as regularity and tendency that are difficult to capture in supervised learning are captured. It becomes possible to classify the categories. Further, since the data of the points and the customer information are input to the learning device, and information about the categories at the points is output from the learning device, tourist information recommended for the customers is generated for each of the points. Can be provided.

また本発明に係る観光支援装置（９）は、上記観光支援装置（７）又は（８）において、前記学習器に入力するデータに、さらに各地点の条件データを含むことを特徴としている。 Further, the tourism support device (9) according to the present invention is characterized in that, in the tourism support device (7) or (8), the data input to the learning device further includes condition data of each point.

上記観光支援装置（９）によれば、前記学習器に入力するデータに、さらに各地点の条件データが含まれるので、前記推奨カテゴリーを推定する場合に、これら各地点の条件データに応じて、さらに詳細なカテゴリー分類が可能となる。前記条件データには、例えば、天気や温度などの気象データ、年月データ、曜日データ、及び時間帯データのうちの少なくとも１つが含まれてもよい。 According to the tourism support device (9), since the data input to the learning device further includes condition data of each point, when estimating the recommended category, according to the condition data of each point, It enables more detailed category classification. The condition data may include, for example, at least one of weather data such as weather and temperature, year/month data, day of the week data, and time zone data.

また本発明に係る観光支援装置（１０）は、上記観光支援装置（１）〜（９）のいずれかにおいて、
前記提供情報生成部で用いられる前記客情報が、前記客の性別、年齢、年代、人種、及び国籍のうちの少なくとも１つを含むことを特徴としている。 The tourism support device (10) according to the present invention is the tourism support device (1) to (9) according to any one of the above,
The customer information used in the provision information generation unit includes at least one of sex, age, age, race, and nationality of the customer.

上記観光支援装置（１０）によれば、前記提供情報として、前記客の性別、年齢、年代、人種、及び国籍のうちの少なくとも１つが考慮された情報を生成することができ、前記客の多様性に適応した情報を提供することが可能となる。 According to the tourism support device (10), it is possible to generate, as the provided information, information in which at least one of the customer's sex, age, age, race, and nationality is considered, and It becomes possible to provide information adapted to diversity.

また本発明に係る観光支援装置（１１）は、上記観光支援装置（１０）において、前記提供情報生成部で用いられる前記客情報が、さらに、前記客の服装の系統、及び靴の系統のうちの少なくとも１つを含むことを特徴としている。 Further, in the tourist assistance device (11) according to the present invention, in the tourist assistance device (10), the customer information used in the provision information generation unit further includes a clothing system of the customer and a shoe system. Is included.

上記観光支援装置（１１）によれば、前記提供情報として、さらに、前記客の服装の系統、及び靴の系統のうちの少なくとも１つが考慮された情報を生成することができ、前記客の多様性に適応した情報を提供することが可能となる。 According to the tourism support device (11), it is possible to generate, as the provided information, information in which at least one of the clothing system of the customer and the shoe system is taken into consideration, and the variety of the customers can be generated. It is possible to provide information that is suitable for the sex.

また本発明に係る観光支援装置（１２）は、上記観光支援装置（１０）又は（１１）において、前記提供情報生成部で用いられる前記客情報が、さらに、前記客のグループ構成、興味、趣味、及び要望のうちの少なくとも１つを含むことを特徴としている。 Further, in the tourism support device (12) according to the present invention, in the tourism support device (10) or (11), the customer information used in the provision information generation unit further includes a group configuration, interests, hobbies of the customers. , And at least one of the following:

上記観光支援装置（１２）によれば、前記提供情報として、さらに、前記客のグループ構成、興味、趣味、及び要望のうちの少なくとも１つが考慮された情報を生成することができ、前記客の多様性に適応した情報を提供することが可能となる。 According to the tourism support device (12), it is possible to generate, as the provided information, information in which at least one of the group configuration, interests, hobbies, and wishes of the customers is considered, and It becomes possible to provide information adapted to diversity.

また本発明に係る観光支援装置（１３）は、上記観光支援装置（１）〜（１２）のいずれかにおいて、前記提供情報が、前記移動体の出発地、経由地、目的地、現在地、及びこれら周辺地域のうちの少なくとも１つに関連するご当地情報を含むことを特徴としている。 The tourism support apparatus (13) according to the present invention is the tourism support apparatus (1) to (12) described above, wherein the provided information is a departure point, a waypoint, a destination, a current location of the moving body, and It is characterized by including local information related to at least one of these surrounding areas.

上記観光支援装置（１３）によれば、前記提供情報生成部によって、前記移動体の出発地、経由地、目的地、現在地、及びこれら周辺地域のうちの少なくとも１つに関連するご当地情報を生成することが可能となり、前記ご当地情報を前記客に提供することができる。 According to the tourism support device (13), the provided information generation unit obtains local information related to at least one of the starting point, the transit point, the destination, the current position of the moving body, and these peripheral areas. It is possible to generate the local information and provide the local information to the customer.

また本発明に係る観光支援装置（１４）は、上記観光支援装置（１３）において、前記ご当地情報が、ご当地ソング、ご当地グルメ、ご当地イベント、ご当地名物、ご当地名所、及びご当地ニュースのうちの少なくとも１つを含むことを特徴としている。 In the tourism support device (14) according to the present invention, in the tourism support device (13), the local information is a local song, a local gourmet, a local event, a local specialty, a local landmark, and It is characterized by including at least one of local news.

上記観光支援装置（１４）によれば、前記提供情報生成部によって、前記ご当地ソング、ご当地グルメ、ご当地イベント、ご当地名物、ご当地名所、及びご当地ニュースのうちの少なくとも１つを前記ご当地情報として生成することが可能となり、前記客の多様なニーズや嗜好に対応した情報を前記ご当地情報として提供することができる。 According to the tourism support device (14), at least one of the local song, local gourmet, local event, local specialty, local landmark, and local news is generated by the provided information generation unit. It is possible to generate as the local information, and it is possible to provide the information corresponding to the various needs and tastes of the customer as the local information.

また本発明に係る観光支援装置（１５）は、上記観光支援装置（１）〜（１４）のいずれかにおいて、前記機器情報が、前記移動体の位置情報、移動経路情報、速度情報、制動情報、操舵情報、空調情報、及び周辺画像情報のうちの少なくとも１つを含むことを特徴としている。 Further, a tourism support device (15) according to the present invention is the tourism support device (1) to (14), wherein the device information is position information of the moving body, travel route information, speed information, braking information. , Steering information, air conditioning information, and peripheral image information.

上記観光支援装置（１５）によれば、前記移動体の位置情報、移動経路情報、速度情報、制動情報、操舵情報、空調情報、及び周辺画像情報のうちの少なくとも１つを用いて、前記提供情報が生成されるので、前記移動体の動態、室内環境、及び周辺状況のうちの少なくとも１つが考慮された情報を前記提供情報として生成することができ、前記客の多様なニーズ、特に移動時の安全性や快適性に関する情報を的確に提供することが可能となる。 According to the tourism support device (15), the provision is performed by using at least one of position information of the moving body, movement route information, speed information, braking information, steering information, air conditioning information, and surrounding image information. Since the information is generated, it is possible to generate the information in which at least one of the movement of the moving body, the indoor environment, and the surrounding situation is taken into consideration as the provided information. It is possible to accurately provide information on the safety and comfort of the.

また本発明に係る観光支援装置（１６）は、上記観光支援装置（１）〜（１５）のいずれかにおいて、前記端末情報が、前記通信端末に登録された前記客の登録情報、前記通信端末に入力された前記旅程情報に関連する入力情報、及び前記通信端末で検出された端末位置情報を含む検出情報のうちの少なくとも１つを含むことを特徴としている。 The tourism support device (16) according to the present invention is the tourism support device (1) to (15), wherein the terminal information is the registration information of the customer registered in the communication terminal, the communication terminal. It is characterized by including at least one of the input information related to the itinerary information input to, and the detection information including the terminal position information detected by the communication terminal.

上記観光支援装置（１６）によれば、前記客の登録情報、前記旅程情報に関連する入力情報、及び前記検出情報のうちの少なくとも１つを用いて、前記提供情報が生成されるので、前記客の登録情報、前記旅程情報に関連する入力情報、及び前記検出情報のうちの少なくとも１つが考慮された情報を前記提供情報として生成することができ、前記客の多様なニーズ、特に前記客の個人毎に的確な情報を提供することが可能となる。 According to the tourism support device (16), the provision information is generated using at least one of the customer registration information, the input information related to the itinerary information, and the detection information. Information in which at least one of the customer registration information, the input information related to the itinerary information, and the detection information is taken into consideration can be generated as the provided information, and the various needs of the customer, particularly the customer's various needs, can be generated. It is possible to provide accurate information for each individual.

また本発明に係る観光支援装置（１７）は、上記観光支援装置（１）〜（１６）のいずれかにおいて、前記ネットワーク情報が、前記通信ネットワークに接続されたサーバ装置から送信されてくるウェブ情報、及びＳＮＳ情報のうちの少なくとも１つを含むことを特徴としている。 The tourism support device (17) according to the present invention is the tourism support device (1) to (16), wherein the network information is web information transmitted from a server device connected to the communication network. , And SNS information.

上記観光支援装置（１７）によれば、前記ウェブ情報、及び前記ＳＮＳ情報のうちの少なくとも１つが考慮された情報が前記提供情報として生成されるので、前記客の多様なニーズに、特に流行りの情報やリアルタイムの情報を前記提供情報として的確に提供することができる。前記ウェブ情報、及び前記ＳＮＳ情報のうちの少なくとも１つは、例えば、前記旅程情報に含まれる地点に関連する情報、又は気象情報に関連する情報を含んでもよい。 According to the tourism support device (17), information in which at least one of the web information and the SNS information is considered is generated as the provided information, so that it is particularly popular for various needs of the customers. Information or real-time information can be accurately provided as the provided information. At least one of the web information and the SNS information may include, for example, information related to a point included in the itinerary information or information related to weather information.

また本発明に係る観光支援装置（１８）は、上記観光支援装置（１）〜（１７）のいずれかにおいて、
前記移動体が、走行制御、操舵制御、及び制動制御のうちの少なくとも１つを運転者の操作を介さずに実行する自動運転車両であり、
前記提供情報生成部が、
前記自動運転車両の走行状態、操舵状態、制動状態、及び車両周辺状況のうち少なくとも１つに関連する車両動態情報を前記提供情報として生成する車両動態情報生成部を備えていることを特徴としている。 The tourism support device (18) according to the present invention is the tourism support device (1) to (17) according to any one of the above,
The moving body is an autonomous vehicle that executes at least one of traveling control, steering control, and braking control without a driver's operation.
The provision information generation unit,
It is characterized by further comprising a vehicle dynamics information generation unit that generates, as the provision information, vehicle dynamics information related to at least one of a running state, a steering state, a braking state, and a vehicle surroundings state of the self-driving vehicle. ..

上記観光支援装置（１８）によれば、前記車両動態情報生成部により、前記自動運転車両の前記車両動態情報が前記提供情報として生成されるので、前記車両動態情報を前記客に適宜提供することが可能となり、自動運転中における前記客の安心感を高めることができる。 According to the tourism support device (18), the vehicle dynamics information generation unit generates the vehicle dynamics information of the self-driving vehicle as the provision information. Therefore, the vehicle dynamics information should be provided to the customers as appropriate. It is possible to increase the customer's sense of security during automatic driving.

また本発明に係る観光支援装置（１９）は、上記観光支援装置（１）〜（１８）のいずれかにおいて、
前記提供情報出力部が、前記提供情報生成部により生成された前記提供情報を音声に変換して出力するものであることを特徴としている。 The tourism support apparatus (19) according to the present invention is the tourism support apparatus (1) to (18) according to any one of the above,
It is characterized in that the provision information output unit converts the provision information generated by the provision information generation unit into a voice and outputs the voice.

上記観光支援装置（１９）によれば、前記提供情報生成部で生成された前記提供情報が音声に変換されて出力されるので、前記客は、前記音声によって前記提供情報を把握することができる。 According to the tourism support device (19), the provision information generated by the provision information generation unit is converted into a voice and output, so that the customer can grasp the provision information by the voice. ..

また本発明に係る観光支援装置（２０）は、上記観光支援装置（１）〜（１８）のいずれかにおいて、
前記提供情報出力部が、前記提供情報生成部により生成された前記提供情報を表示可能な言語、図形、絵、画像、及び映像のうちの少なくとも１つを含む表示物に変換して出力するものであることを特徴としている。 The tourism support device (20) according to the present invention is the tourism support device (1) to (18) according to any one of the above,
The provision information output unit converts the provision information generated by the provision information generation unit into a display object including at least one of a displayable language, figure, picture, image, and video, and outputs the display object. It is characterized by being.

上記観光支援装置（２０）によれば、前記提供情報生成部で生成された前記提供情報が表示可能な前記表示物に変換されて出力されるので、前記客は、前記表示物によって前記提供情報を把握することができる。 According to the tourism support device (20), the provision information generated by the provision information generation unit is converted into the display object that can be displayed and output, so that the customer can display the provision information by the display object. Can be grasped.

また本発明に係る観光支援装置（２１）は、上記観光支援装置（１）〜（２０）のいずれかにおいて、
前記情報取得部で取得した情報に基づいて、前記移動体に搭載された無人飛行体を飛行させる事象が発生したか否かを検出する事象検出部と、
該事象検出部により前記事象が検出された場合に、前記無人飛行体の飛行制御、前記無人飛行体に搭載された撮像部の撮像制御、及び該撮像部で撮像された画像を含むデータを所定の送信先に送信する送信制御を行う飛行体制御部とを備えていることを特徴としている。 The tourism support device (21) according to the present invention is the tourism support device (1) to (20) according to any one of the above,
Based on the information acquired by the information acquisition unit, an event detection unit that detects whether or not an event causing the unmanned air vehicle mounted on the mobile body to fly has occurred,
When the event is detected by the event detection unit, flight control of the unmanned aerial vehicle, imaging control of an imaging unit mounted on the unmanned aerial vehicle, and data including an image captured by the imaging unit It is characterized by comprising an air vehicle control unit that performs transmission control for transmission to a predetermined transmission destination.

上記観光支援装置（２１）によれば、前記事象検出部により、前記情報取得部で取得した情報に基づいて、前記無人飛行体を飛行させる事象が発生したか否かが検出され、前記事象が検出された場合に、前記飛行体制御部により、前記無人飛行体の飛行制御、前記撮像部の撮像制御、及び前記画像を含むデータの送信制御が行われる。したがって、前記事象が発生した場合に、前記所定の送信先では、前記移動体の周辺状況を迅速に把握することが可能となる。 According to the tourism support device (21), the event detection unit detects, based on the information acquired by the information acquisition unit, whether or not an event causing the unmanned aerial vehicle to fly has occurred, and When an elephant is detected, the flight control unit controls flight of the unmanned flight vehicle, imaging control of the imaging unit, and transmission control of data including the image. Therefore, when the event occurs, it becomes possible for the predetermined transmission destination to quickly grasp the surrounding situation of the moving body.

また本発明に係る観光支援装置（２２）は、上記観光支援装置（２１）において、前記事象には、前記移動体が関与している事故、及び前記移動体が位置する周辺地域で発生した災害のうちの少なくとも１つが含まれていることを特徴としている。 The tourism support device (22) according to the present invention is the tourism support device (21), wherein the event occurs in an accident in which the moving body is involved and in a surrounding area where the moving body is located. Characterized by the inclusion of at least one of the disasters.

上記観光支援装置（２２）によれば、前記事故、及び前記災害のうちの少なくとも１つが発生した場合に、前記所定の送信先では、前記移動体の周辺状況を迅速に把握することができ、前記事故や前記災害に対する救助対応などを迅速に行うことが可能となる。 According to the tourism support device (22), when at least one of the accident and the disaster occurs, the surrounding situation of the moving body can be quickly grasped at the predetermined destination. It becomes possible to promptly perform rescue response to the accident or the disaster.

また本発明に係るロボットは、上記観光支援装置（１）〜（２２）のいずれかが搭載されていることを特徴としている。 Further, the robot according to the present invention is characterized by being equipped with any one of the tourism support devices (1) to (22).

上記ロボットによれば、上記観光支援装置（１）〜（２２）のいずれかの効果を奏するロボットが実現されるとともに、前記客に親近感を与えることができる。前記ロボットは、例えば、少なくとも頭部を含む人型ロボットでもよいし、動物型ロボットなどでもよいし、表示装置又はプロジェクションマッピング装置などによって表示されるバーチャルロボットでもよい。 According to the robot, it is possible to realize a robot that exhibits any of the effects of the tourism support devices (1) to (22), and to give the customer a sense of familiarity. The robot may be, for example, a humanoid robot including at least a head, an animal robot, or a virtual robot displayed by a display device, a projection mapping device, or the like.

また本発明に係る観光支援システムは、上記ロボットと、該ロボットが搭載される移動体とを含んで構成されていることを特徴としている。 A tourism support system according to the present invention is characterized by including the robot and a moving body on which the robot is mounted.

上記観光支援システムによれば、前記移動体に前記ロボットが搭載されることにより、人手によらずに、前記客の乗降管理を行うことできるとともに、前記客の多様なニーズに対応した情報を的確に提供することができ、さらに、前記客に親近感を与えることができるシステムを実現することができる。 According to the tourism support system, by mounting the robot on the moving body, it is possible to manage the passengers getting on and off the passengers without any manual labor, and to accurately obtain information corresponding to the various needs of the customers. In addition, it is possible to realize a system that can provide the customer with an affinity.

また本発明に係る観光支援方法は、客が乗り降りする移動体に搭載されるコンピュータが実行する観光支援方法であって、
前記移動体に搭載された機器からの機器情報、前記客の通信端末からの端末情報、及び外部の通信ネットワークからのネットワーク情報のうちの少なくとも１つを取得する情報取得ステップと、
少なくとも前記客の旅程情報を情報記憶部に記憶する記憶ステップと、
前記客が前記移動体を乗り降りするときに取得される客情報を用いて、乗降客を管理する乗降客管理ステップと、
前記客の旅程情報、及び前記情報取得ステップで取得される取得情報のうちの少なくとも１つと、前記客情報とを用いて、前記客に提供する提供情報を生成する提供情報生成ステップと、
生成された前記提供情報を出力する提供情報出力ステップとを含んでいることを特徴としている。 Further, a tourism support method according to the present invention is a tourism support method executed by a computer mounted on a moving body on which a customer gets on and off,
An information acquisition step of acquiring at least one of device information from a device mounted on the mobile body, terminal information from the customer's communication terminal, and network information from an external communication network;
A storage step of storing at least the itinerary information of the customer in the information storage section;
Using the customer information obtained when the passenger gets on and off the moving body, a passenger management step of managing passengers,
At least one of the itinerary information of the customer and the acquisition information acquired in the information acquisition step, and the provision information generating step of generating provision information to be provided to the customer by using the customer information,
And a provision information output step of outputting the generated provision information.

上記観光支援方法によれば、前記乗降客管理ステップにより、前記客が前記移動体を乗り降りするときに取得される前記客情報を用いて、前記乗降客、すなわち乗車客と降車客とをそれぞれ管理する処理が実行される。そして、前記提供情報生成ステップにより、前記旅程情報、及び前記取得情報のうちの少なくとも１つと、前記客情報とを用いて、前記客に提供する提供情報を生成する処理が実行され、前記提供情報出力ステップにより、前記提供情報を出力する処理が実行される。
したがって、上記観光支援方法によれば、人手によらずに、前記客の乗降管理を行うことが可能になるとともに、前記客の多様性に対応させた情報を前記提供情報として的確に提供することができる。また、前記乗降客管理ステップで用いる前記客情報を、前記提供情報生成ステップでも用いることにより、前記提供情報の生成を効率良く行うことができる。 According to the tourism support method, the passenger management step manages the passengers, that is, the passengers and the passengers, respectively, by using the passenger information acquired when the passenger gets on and off the moving body. Processing is performed. Then, in the provision information generating step, a process of generating provision information to be provided to the customer is executed by using at least one of the itinerary information and the acquisition information and the customer information, and the provision information The output step executes a process of outputting the provided information.
Therefore, according to the tourism support method, it is possible to manage the passengers getting on and off without relying on human labor, and to appropriately provide information corresponding to the variety of the customers as the provision information. You can Further, by using the customer information used in the boarding/alighting passenger management step also in the provision information generating step, the provision information can be efficiently generated.

本発明の実施の形態（１）に係る観光支援システムの構成例を概略的に示すブロック図である。It is a block diagram which shows roughly the structural example of the tourism assistance system which concerns on embodiment (1) of this invention. 実施の形態（１）に係る観光支援システムを構成するロボットのハードウェア構成例を示すブロック図である。It is a block diagram which shows the hardware structural example of the robot which comprises the tourism assistance system which concerns on embodiment (1). 実施の形態（１）に係るロボットに搭載される観光支援装置の機能構成例を示すブロック図である。It is a block diagram showing an example of functional composition of a sightseeing support device carried in a robot concerning an embodiment (1). 実施の形態（１）に係る観光支援装置を構成する乗降客管理部の機能構成例を示すブロック図である。It is a block diagram showing an example of functional composition of a passenger getting-on/off part which constitutes a sightseeing support device concerning embodiment (1). 実施の形態（１）に係る観光支援装置を構成する提供情報生成部の機能構成例を示すブロック図である。It is a block diagram which shows the functional structural example of the provision information generation part which comprises the tourism assistance apparatus which concerns on Embodiment (1). 実施の形態（１）に係る観光支援装置における制御部が行う登録処理動作の一例を示すフローチャートである。7 is a flowchart showing an example of a registration processing operation performed by a control unit in the tourism assistance device according to the embodiment (1). 実施の形態（１）に係る観光支援装置における制御部が行う乗降客管理処理動作の一例を示すフローチャートである。7 is a flowchart showing an example of a passenger management processing operation performed by a control unit in the tourist assistance device according to the embodiment (1). 実施の形態（１）に係る観光支援装置における制御部が行う提供情報生成処理動作の一例を示すフローチャートである。9 is a flowchart showing an example of an operation of providing information generation processing performed by a control unit in the tourist assistance device according to the embodiment (1). 実施の形態（２）に係るロボットに搭載される観光支援装置の機能構成例を示すブロック図である。It is a block diagram which shows the functional structural example of the tourism assistance apparatus mounted in the robot which concerns on Embodiment (2). 実施の形態（２）に係る観光支援装置を構成する乗降客管理部の機能構成例を示すブロック図である。It is a block diagram which shows the functional structural example of the passenger getting-on/off part which comprises the tourism assistance apparatus which concerns on Embodiment (2). 実施の形態（２）に係る観光支援装置を構成する提供情報生成部の機能構成例を示すブロック図である。It is a block diagram which shows the functional structural example of the provision information generation part which comprises the tourism assistance apparatus which concerns on Embodiment (2). 実施の形態（２）に係る観光支援装置における制御部が行う乗降客管理処理動作を示すフローチャートである。It is a flow chart which shows a passenger management processing operation which a control part in a sightseeing support device concerning embodiment (2) performs. 実施の形態（２）に係る観光支援装置における制御部が行う提供情報生成処理動作の一例を示すフローチャートである。9 is a flowchart showing an example of an operation of providing information generation processing performed by a control unit in the tourist assistance device according to the embodiment (2). 実施の形態（３）に係る観光支援システムの構成例を概略的に示すブロック図である。It is a block diagram which shows roughly the structural example of the tourism assistance system which concerns on embodiment (3). 実施の形態（３）に係るロボットに搭載される観光支援装置の機能構成例を示すブロック図である。It is a block diagram which shows the functional structural example of the tourism assistance apparatus mounted in the robot which concerns on embodiment (3). 実施の形態（３）に係る観光支援装置を構成する提供情報生成部の機能構成例を示すブロック図である。It is a block diagram which shows the functional structural example of the provision information generation part which comprises the tourism assistance apparatus which concerns on embodiment (3). 実施の形態（３）に係る観光支援装置における制御部が行う無人飛行体制御処理動作の一例を示すフローチャートである。It is a flowchart which shows an example of an unmanned air vehicle control processing operation which the control part in the tourism assistance apparatus which concerns on embodiment (3) performs. 実施の形態（３）に係る観光支援装置における制御部が行う提供情報生成処理動作の一例を示すフローチャートである。It is a flow chart which shows an example of offer information generation processing operation which a control part in a sightseeing support device concerning embodiment (3) performs.

以下、本発明に係る観光支援装置、該装置が搭載されたロボット、観光支援システム、及び観光支援方法の実施の形態を図面に基づいて説明する。なお、以下に述べる実施の形態は、本発明の好適な具体例であるから、技術的に好ましい種々の限定が付されているが、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの形態に限られるものではない。 Embodiments of a tourism support device, a robot equipped with the device, a tourism support system, and a tourism support method according to the present invention will be described below with reference to the drawings. The embodiments described below are preferable specific examples of the present invention, and therefore, various technically preferable limitations are given, but the scope of the present invention particularly limits the present invention in the following description. Unless stated to the effect, it is not limited to these forms.

図１は、実施の形態（１）に係る観光支援システムの構成例を概略的に示すブロック図である。
観光支援システム１は、観光支援装置３０が搭載されるロボット２０と、ロボット２０が搭載されるバス１０とを含んで構成されている。バス１０は、「移動体」の一例である。なお、観光支援システム１に適用される移動体は、バス、タクシー等の車両に限定されない。前記移動体は、船舶、飛行機などでもよく、すなわち、少なくとも１人以上の客が乗り降り可能な輸送手段であればよい。 FIG. 1 is a block diagram schematically showing a configuration example of a tourism support system according to the embodiment (1).
The tourism support system 1 includes a robot 20 on which the tourism support device 30 is mounted and a bus 10 on which the robot 20 is mounted. The bus 10 is an example of a “moving body”. The moving body applied to the tourism support system 1 is not limited to vehicles such as buses and taxis. The moving body may be a ship, an airplane, or the like, that is, any means of transportation that allows at least one or more passengers to get on and off.

ロボット２０に搭載された観光支援装置３０が、バス１０に乗り降りする客の乗降を管理する処理を実行するとともに、客の多様性に対応させた情報を的確に提供する処理を実行する。これにより、バス１０で観光する客、運転者、又は添乗員などに対する支援が適切に行われる。 The tourism support device 30 mounted on the robot 20 executes a process of managing passengers getting on and off the bus 10 and a process of accurately providing information corresponding to the variety of customers. As a result, support for tourists, drivers, tour operators, and the like who are sightseeing on the bus 10 is appropriately provided.

ロボット２０は、バス１０に搭載された車載機器１１、客の通信端末２、及び外部の通信ネットワーク３のうちの少なくとも１つと通信を行って、各種の情報をやり取りすることが可能な構成となっている。 The robot 20 communicates with at least one of the vehicle-mounted device 11 mounted on the bus 10, the communication terminal 2 of the customer, and the external communication network 3 to exchange various kinds of information. ing.

ロボット２０は、少なくとも頭部を含む人型ロボットで構成されてもよいし、動物型ロボットで構成されてもよい。人型ロボットは、キャラクターなどを模した人形型ロボットでもよいし、人間を模したヒューマノイドロボットでもよい。また、ロボット２０は、車内モニタ１２に映し出されるバーチャルロボットなどであってもよい。 The robot 20 may be a humanoid robot including at least a head or an animal robot. The humanoid robot may be a doll type robot imitating a character or the like, or a humanoid robot imitating a human being. The robot 20 may be a virtual robot displayed on the in-vehicle monitor 12.

車載機器１１には、例えば、バス１０に搭載されている車載制御装置、車載センサ、ナビゲーション装置、空調装置、及び運転映像記録装置（いずれも図示せず）などが含まれているが、これらのうちの少なくともいずれかの装置が含まれていればよい。
前記車載制御装置には、例えば、エンジン、モーターなどの動力源を制御する動力源制御装置、ブレーキを制御する制動制御装置、ハンドルの操舵を制御する操舵制御装置、及びライト、ドア、キーなどを制御するボディ制御装置のうちの少なくとも１つが含まれている。 The in-vehicle device 11 includes, for example, an in-vehicle control device, an in-vehicle sensor, a navigation device, an air conditioner, and a driving video recording device (none of which are shown) mounted on the bus 10. It is sufficient that at least one of these devices is included.
The on-vehicle control device includes, for example, a power source control device that controls a power source such as an engine and a motor, a braking control device that controls a brake, a steering control device that controls steering of a steering wheel, and a light, a door, and a key. At least one of the controlling body controls is included.

前記車載センサには、例えば、車速センサ、加速度センサ、ブレーキセンサ、及び操舵角センサのうちの少なくとも１つが含まれている。前記ナビゲーション装置は、ＧＰＳ受信機を備え、該ＧＰＳ受信機で検出された自車位置から目的地までの移動経路を演算して案内する機能を備えている。前記空調装置は、例えば、車室内の温度、風量、風向などを制御するエアコン装置である。前記運転映像記憶装置は、バス１０の前方を含む運転中の車外の映像（周辺画像情報）を記録する装置である。なお、前記運転映像記憶装置は、車内の映像も記録するように構成されてもよい。 The vehicle-mounted sensor includes, for example, at least one of a vehicle speed sensor, an acceleration sensor, a brake sensor, and a steering angle sensor. The navigation device includes a GPS receiver, and has a function of calculating and guiding a moving route from a vehicle position detected by the GPS receiver to a destination. The air conditioner is, for example, an air conditioner that controls the temperature, the air volume, the air direction, and the like in the vehicle interior. The driving image storage device is a device for recording an image of the outside of the vehicle (peripheral image information) including the front of the bus 10 while driving. The driving image storage device may also be configured to record an image of the inside of the vehicle.

ロボット２０と車載機器１１とは、例えば、ＣＡＮ（Controller Area Network）などの車載ネットワークを介して接続されてもよいし、他の有線、又は無線の通信方式で接続されてもよい。 The robot 20 and the vehicle-mounted device 11 may be connected via a vehicle-mounted network such as a CAN (Controller Area Network), or may be connected by another wired or wireless communication method.

客の通信端末２は、例えば、スマートフォン、又はタブレットなどの携帯情報端末装置であり、客が所有している端末でもよいし、バス会社が客に貸与している端末であってもよい。ロボット２０と通信端末２とは、例えば、車内に設けられたＷｉＦｉなどの無線ＬＡＮ（Local Area Network）で接続されてもよいし、近距離無線通信、携帯電話網などの他の無線通信方式で接続されてもよい。 The customer communication terminal 2 is, for example, a mobile information terminal device such as a smartphone or a tablet, and may be a terminal owned by the customer or a terminal lent to the customer by a bus company. The robot 20 and the communication terminal 2 may be connected by, for example, a wireless LAN (Local Area Network) such as WiFi provided in the vehicle, or by another wireless communication system such as short-range wireless communication or a mobile phone network. May be connected.

ロボット２０は、通信ネットワーク３を介して外部サーバに接続可能となっている。通信ネットワーク３には、基地局を含む携帯電話網、公衆電話網、又はインターネットなどの有線や無線の通信ネットワークが含まれる。また、通信ネットワーク３には、車車間通信、又は車路間通信を行うための通信ネットワークが含まれてもよい。前記外部サーバには、例えば、バス運行会社、又は旅行会社などの事業者が運営しているバス運行サーバ４、インターネット上のＷｅｂサーバ５、及びＳＮＳ（Social Networking Service）サーバ６のうちの少なくとも1つが含まれている、また、これらサーバは、クラウドサーバで構成されてもよい。 The robot 20 can be connected to an external server via the communication network 3. The communication network 3 includes a mobile telephone network including a base station, a public telephone network, or a wired or wireless communication network such as the Internet. Further, the communication network 3 may include a communication network for performing inter-vehicle communication or inter-vehicle communication. The external server is, for example, at least one of a bus operating server 4 operated by a business operator such as a bus operating company or a travel agency, a Web server 5 on the Internet, and an SNS (Social Networking Service) server 6. Also, these servers may be configured with cloud servers.

ロボット２０は、バス運行サーバ４から客の旅程情報を取得したり、Ｗｅｂサーバ５から旅程情報に含まれる地点などのキーワードに関連する観光情報、気象・災害情報、又は道路交通情報などを収集したり、ＳＮＳサーバ６から旅程情報に含まれる地点などのキーワードに関連する個人の投稿を収集したりする処理を行うことが可能となっている。 The robot 20 acquires customer's itinerary information from the bus operation server 4 or collects tourist information, weather/disaster information, road traffic information, etc. related to keywords such as points included in the itinerary information from the Web server 5. Alternatively, it is possible to perform processing of collecting individual posts related to keywords such as points included in itinerary information from the SNS server 6.

ロボット２０は、バス１０に設置された車内モニタ１２と車内スピーカ１３とに接続されている。ロボット２０は、観光支援装置３０で生成された提供情報を車内モニタ１２に表示させたり、車内スピーカ１３から音声で出力させたりすることが可能となっている。
車内モニタ１２は、バス１０の前席側に設置される大型の表示装置でもよいし、各座席に設置される小型の表示装置であってもよい。車内スピーカ１３は、全席共用のスピーカであってもよいし、各座席用のスピーカであってもよい。 The robot 20 is connected to an in-vehicle monitor 12 and an in-vehicle speaker 13 installed on the bus 10. The robot 20 can display the provided information generated by the tourism support device 30 on the in-vehicle monitor 12 or can output it by voice from the in-vehicle speaker 13.
The in-vehicle monitor 12 may be a large display device installed on the front seat side of the bus 10 or a small display device installed on each seat. The in-vehicle speaker 13 may be a speaker for all seats or a speaker for each seat.

図２は、実施の形態（１）に係る観光支援システム１を構成するロボット２０のハードウェア構成例を示すブロック図である。
ロボット２０は、観光支援装置３０、カメラ２１、マイク２２、通信部２３、操作部２４、スピーカ２５、及び表示部２６を含んで構成されている。 FIG. 2 is a block diagram showing a hardware configuration example of the robot 20 configuring the tourism support system 1 according to the embodiment (1).
The robot 20 includes a tourism support device 30, a camera 21, a microphone 22, a communication unit 23, an operation unit 24, a speaker 25, and a display unit 26.

カメラ２１は、バス１０に乗車する客（乗車客）とバス１０から降車する客（降車客）とをそれぞれ撮像するための装置である。カメラ２１は、乗車客と降車客とがそれぞれ撮像できるように向き（角度）が調整可能な構成としてもよいし、乗車客の撮像用と降車客の撮像用の２台以上で構成してもよい。なお、ロボット２０にカメラ２１を設ける構成の他、バス１０の乗降口付近などに１台以上のカメラを設置し、ロボット２０が、これらカメラから乗降客の画像を取得する構成にしてもよい。カメラ２１で撮像された画像が観光支援装置３０に出力される。 The camera 21 is a device for picking up an image of a passenger getting on the bus 10 (passenger) and a passenger getting off the bus 10 (getting off). The camera 21 may have a configuration in which the directions (angles) can be adjusted so that the passengers and the passengers can take images respectively, or may be configured with two or more cameras for taking images of passengers and for getting off passengers. Good. In addition to the configuration in which the robot 20 is provided with the camera 21, one or more cameras may be installed near the entrance/exit of the bus 10 and the robot 20 may acquire images of passengers from these cameras. The image captured by the camera 21 is output to the tourism support device 30.

また、カメラ２１は、客（人）を検知する赤外線センサなどの人感センサにより人を検出したときの画像を記録してもよい。また、カメラ２１は、画像認識処理により画像中から人を認識（検出）したときの画像を記録してもよい。 Further, the camera 21 may record an image when a person is detected by a human sensor such as an infrared sensor that detects a customer (person). Further, the camera 21 may record an image when a person is recognized (detected) from the image by the image recognition processing.

マイク２２は、音声入力部として機能する装置であり、客が発声した音声を取り込み、これを電気信号に変換して、観光支援装置３０に出力する。
通信部２３は、車載機器１１、客の通信端末２、及び外部の通信ネットワーク３のうちの少なくとも１つと通信を行う機能を備えた装置であり、有線通信機器、及び無線通信機器のうちの少なくとも１つを含んで構成されている。 The microphone 22 is a device that functions as a voice input unit, captures a voice uttered by a customer, converts the voice into an electric signal, and outputs the electric signal to the tourist assistance device 30.
The communication unit 23 is a device having a function of communicating with at least one of the vehicle-mounted device 11, the customer's communication terminal 2, and the external communication network 3, and at least one of the wired communication device and the wireless communication device. It is configured to include one.

操作部２４は、ロボット２０や観光支援装置３０の電源入力、各種の設定入力などを行うための装置であり、ボタンスイッチ、又はタッチパネルスイッチなどを含んで構成されている。
スピーカ２５は、音声出力部として機能する装置であり、観光支援装置３０で生成された提供情報がスピーカ２５を介して音声出力可能となっている。
表示部２６は、表示出力部として機能する装置であり、液晶表示パネル、有機ＥＬパネルなどを含んで構成され、観光支援装置３０で生成された提供情報が表示部２６を介して表示出力可能となっている。 The operation unit 24 is a device for inputting power to the robot 20 and the tourism support device 30 and various setting inputs, and includes a button switch, a touch panel switch, or the like.
The speaker 25 is a device that functions as an audio output unit, and the provided information generated by the tourism support device 30 can be output as audio via the speaker 25.
The display unit 26 is a device that functions as a display output unit, is configured to include a liquid crystal display panel, an organic EL panel, and the like, and the provided information generated by the tourism support device 30 can be displayed and output via the display unit 26. Has become.

観光支援装置３０は、制御部３１、記憶部３２、及び入出力部３３を含んで構成されている。
制御部３１は、ハードウェアプロセッサであるＣＰＵ（Central Processing Unit）、又はＧＰＵ（Graphics Processing Unit）などの１以上の演算処理回路、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）を含み、プログラムに基づいて、各種の制御を実行する。 The tourism support device 30 includes a control unit 31, a storage unit 32, and an input/output unit 33.
The control unit 31 includes one or more arithmetic processing circuits such as a CPU (Central Processing Unit), which is a hardware processor, or a GPU (Graphics Processing Unit), a RAM (Random Access Memory), and a ROM (Read Only Memory). Based on the above, various controls are executed.

記憶部３２は、例えば、ハードディスクドライブ、ソリッドステートドライブ等の１つ以上の記憶装置であり、制御部３１が実行するプログラム、該プログラムの実行に必要な各種データなどが記憶されている。なお、前記プログラムは、前記ＲＯＭに記憶されてもよい。 The storage unit 32 is, for example, one or more storage devices such as a hard disk drive and a solid state drive, and stores a program executed by the control unit 31, various data necessary for executing the program, and the like. The program may be stored in the ROM.

入出力部３３は、ロボット２０に設けられたカメラ２１などの各装置と接続するための入力インターフェース、及びスピーカ２５などの装置と接続するための出力インターフェースなどを含んで構成されている。 The input/output unit 33 includes an input interface for connecting with each device such as the camera 21 provided in the robot 20, an output interface for connecting with a device such as the speaker 25, and the like.

図３は、実施の形態（１）に係るロボット２０に搭載される観光支援装置３０の機能構成例を示すブロック図である。
観光支援装置３０は、情報取得部４１、情報記憶部４２、乗降客管理部４３、提供情報生成部４４、及び提供情報出力部４５を含み、図２に示す制御部３１が、記憶部３２に記憶されているプログラムなどを読み込み、解釈して実行することにより、これら各部の機能が実現されるようになっている。 FIG. 3 is a block diagram showing a functional configuration example of the tourist assistance device 30 mounted on the robot 20 according to the embodiment (1).
The tourism support apparatus 30 includes an information acquisition unit 41, an information storage unit 42, a passenger management unit 43, a provision information generation unit 44, and a provision information output unit 45, and the control unit 31 illustrated in FIG. The functions of these units are realized by reading a stored program or the like, interpreting it, and executing it.

情報取得部４１は、バス１０に搭載された車載機器１１から送信されてくる機器情報、それぞれの客の通信端末２から送信されてくる端末情報、及び外部の通信ネットワーク３を介して外部サーバから送信されてくるネットワーク情報のうちの少なくとも１つを取得する処理を行う。 The information acquisition unit 41 receives the device information transmitted from the in-vehicle device 11 mounted on the bus 10, the terminal information transmitted from the communication terminal 2 of each customer, and the external server via the external communication network 3. A process of acquiring at least one of the transmitted network information is performed.

前記機器情報は、例えば、バス１０の位置情報、移動経路情報、速度情報、制動情報、操舵情報、空調情報、及び周辺画像情報のうちの少なくとも１つを含んでいる。
前記端末情報は、例えば、通信端末２に登録された客の登録情報、通信端末２に入力された旅程情報に関連する入力情報、及び通信端末２で検出された端末位置情報を含む検出情報のうちの少なくとも１つを含んでいる。前記登録情報、又は前記入力情報は、例えば、通信端末２にダウンロードされた旅行アプリ（アプリケーション）で登録された情報、又は入力された情報であってもよい。
前記ネットワーク情報は、通信ネットワーク３に接続されたバス運行サーバ４、Ｗｅｂサーバ５から送信されてくるウェブ情報、及びＳＮＳサーバ６から送信されてくるＳＮＳ情報のうちの少なくとも１つを含んでいる。 The device information includes, for example, at least one of position information of the bus 10, movement route information, speed information, braking information, steering information, air conditioning information, and surrounding image information.
The terminal information includes, for example, registration information of customers registered in the communication terminal 2, input information related to itinerary information input to the communication terminal 2, and detection information including terminal position information detected by the communication terminal 2. Contains at least one of them. The registration information or the input information may be, for example, information registered by a travel application (application) downloaded to the communication terminal 2 or input information.
The network information includes at least one of the bus operating server 4 connected to the communication network 3, web information transmitted from the web server 5, and SNS information transmitted from the SNS server 6.

情報記憶部４２には、少なくとも客の旅程情報が記憶される。旅程情報には、旅行の日程に関する各種情報が含まれる。旅程情報には、例えば、出発地点、経由地点（観光地点、休憩地点など）、目的地点（観光地点、宿泊地点など）の情報、これら地点での行動予定などの情報が含まれる。 The information storage unit 42 stores at least customer itinerary information. The itinerary information includes various kinds of information regarding travel dates. The itinerary information includes, for example, information on a departure point, a transit point (a tourist point, a rest point, etc.), a destination point (a tourist point, an accommodation point, etc.), and an action schedule at these points.

乗降客管理部４３は、客がバス１０を乗り降りするときに取得される客情報を用いて、乗降客を管理する処理などを行う。乗降客管理部４３の詳細は後述する。 The boarding/alighting passenger management unit 43 performs processing for managing the boarding/alighting passengers using the customer information acquired when the passenger gets on/off the bus 10. The details of the passenger management section 43 will be described later.

提供情報生成部４４は、情報記憶部４２に記憶されている客の旅程情報、及び情報取得部４１で取得される取得情報（機器情報、端末情報、ネットワーク情報）のうちの少なくとも１つと、乗降客管理部４３で用いられる客情報とを用いて、客に提供する提供情報を生成する処理などを行う。また、提供情報生成部４４は、客の旅程情報、及び取得情報のうちの少なくとも１つを用いて、提供情報を生成する処理を行ってもよい。提供情報生成部４４の詳細は後述する。 The provided information generation unit 44 includes at least one of the itinerary information of the customer stored in the information storage unit 42 and the acquired information (device information, terminal information, network information) acquired by the information acquisition unit 41, and the boarding/alighting information. Using the customer information used by the customer management unit 43, a process of generating provided information to be provided to the customer is performed. Further, the provision information generation unit 44 may perform the process of generating the provision information using at least one of the itinerary information of the customer and the acquisition information. Details of the provision information generation unit 44 will be described later.

提供情報出力部４５は、提供情報生成部４４で生成された提供情報を出力する処理を行う。提供情報出力部４５は、例えば、生成された提供情報を音声に変換して、スピーカ２５、車内スピーカ１３、又は客の通信端末２から音声出力する処理を行ってもよい。
また、提供情報出力部４５は、例えば、生成された提供情報を表示可能な言語、図形、絵、画像、及び映像のうちの少なくとも１つを含む表示物に変換して、表示部２６、車内モニタ１２、又は客の通信端末２に表示出力する処理を行ってもよい。 The provision information output unit 45 performs a process of outputting the provision information generated by the provision information generation unit 44. The additional information output unit 45 may perform a process of converting the generated additional information into voice and outputting the voice from the speaker 25, the in-vehicle speaker 13, or the customer communication terminal 2, for example.
Further, the additional information output unit 45 converts the generated additional information into a display object including at least one of a displayable language, a figure, a picture, an image, and a video, for example, and displays the display unit 26 and the vehicle interior. You may perform the process output to the monitor 12 or the customer's communication terminal 2.

図４は、実施の形態（１）に係る観光支援装置３０を構成する乗降客管理部４３の機能構成例を示すブロック図である。
乗降客管理部４３は、客画像取得部４３１、特徴抽出部４３２、特徴記憶部４３３、客情報出力部４３４、乗降客判定部４３５、判定情報記憶部４３６、及び判定情報出力部４３７を含んでいる。 FIG. 4 is a block diagram showing an example of the functional configuration of the passenger management section 43 that constitutes the tourism support device 30 according to Embodiment (1).
The passenger management unit 43 includes a customer image acquisition unit 431, a characteristic extraction unit 432, a characteristic storage unit 433, a passenger information output unit 434, a passenger determination unit 435, a determination information storage unit 436, and a determination information output unit 437. There is.

客画像取得部４３１は、カメラ２１で撮像された客の画像（客画像）を取得する処理を行う。取得する客画像は、静止画でもよいし、動画でもよい。 The customer image acquisition unit 431 performs a process of acquiring an image of a customer (customer image) captured by the camera 21. The customer image to be acquired may be a still image or a moving image.

特徴抽出部４３２は、客画像から、客の顔、性別、年齢、年代、体格、人種、及び服装のうち少なくとも１以上の特徴を抽出する画像処理を行う。これら画像処理は、機械学習などの人工知能技術を用いてもよい。
顔の特徴は、例えば、顔の目、鼻、口、眉などの顔の器官の位置や形状などを含み、これら顔の特徴抽出処理には、公知の顔検出処理、顔器官検出処理などを含む画像処理技術を用いることができる。
また、性別、年齢、年代、及び人種は、顔の特徴に基づいて推定される。これら性別、年齢、年代、及び人種の推定処理には、公知の画像処理技術を用いることができる。
また、体格の特徴は、例えば、肩幅、手の長さ、身長、又は顔の大きさなどを含み、これら体格の特徴抽出処理には、公知の画像処理技術を用いることができる。
また、服装の特徴は、例えば、カジュアル、スポーツ、フォーマルなどの服装の系統、色、又は靴の系統などを含み、これら服装の特徴抽出処理には、公知の画像処理技術を用いることができる。靴の系統には、例えば、スニーカー、サンダル、革靴、ブーツ、パンプス、又はハイヒールなどが含まれる。 The feature extraction unit 432 performs image processing to extract at least one feature of the customer's face, sex, age, age, physique, race, and clothes from the customer image. Artificial intelligence techniques such as machine learning may be used for these image processes.
The facial features include, for example, the position and shape of facial organs such as the eyes, nose, mouth, and eyebrows of the face. For the facial feature extraction processing, known facial detection processing, facial organ detection processing, and the like are performed. Image processing techniques including can be used.
Further, sex, age, age, and race are estimated based on facial features. A known image processing technique can be used for the processing of estimating the sex, age, age, and race.
Further, the physique characteristics include, for example, shoulder width, hand length, height, or face size, and a known image processing technique can be used for the physique feature extraction processing.
The clothing features include, for example, casual, sports, formal, and other clothing systems, colors, or shoe systems, and known image processing techniques can be used for the feature extraction processing of these clothing. The shoe system includes, for example, sneakers, sandals, leather shoes, boots, pumps, or high heels.

特徴記憶部４３３には、特徴抽出部４３２により抽出された少なくとも１以上の特徴が客情報として記憶される。特徴記憶部４３３に記憶される客情報には、客の顔、性別、年齢、年代、体格、人種、及び服装のうち少なくとも１以上の特徴が含まれる。
特徴記憶部４３３に記憶される客情報には、客の特徴の他、これら特徴と紐付けられた客の登録情報が含まれてもよい。客の登録情報には、例えば、通信端末２にダウンロードされた旅行アプリ（アプリケーション）で登録された情報（氏名、座席番号、ユーザＩＤ、メールアドレス、又は電話番号など）が含まれてもよい。 At least one feature extracted by the feature extraction unit 432 is stored in the feature storage unit 433 as customer information. The customer information stored in the characteristic storage unit 433 includes at least one characteristic of the customer's face, sex, age, age, physique, race, and clothes.
The customer information stored in the characteristic storage unit 433 may include customer characteristics and customer registration information associated with these characteristics. The customer registration information may include, for example, information (name, seat number, user ID, mail address, telephone number, etc.) registered in the travel application (application) downloaded to the communication terminal 2.

客情報出力部４３４は、特徴記憶部４３３に記憶された客情報のうちの少なくとも１つを提供情報生成部４４に出力する処理を行う。 The customer information output unit 434 performs a process of outputting at least one of the customer information stored in the feature storage unit 433 to the provision information generation unit 44.

乗降客判定部４３５は、客がバス１０を乗り降りした場合に、特徴抽出部４３２により客画像から抽出される客の少なくとも１以上の特徴と、特徴記憶部４３３に記憶されている客情報とを用いて、乗降客を判定する処理を行う。すなわち、乗降客判定部４３５は、乗車した客、降車した客を判定する（特定する）処理を行う。 The passenger determination unit 435 determines at least one feature of the customer extracted from the customer image by the feature extraction unit 432 when the customer gets on and off the bus 10, and the customer information stored in the feature storage unit 433. The process of determining passengers is performed using the above. That is, the boarding/alighting passenger determination unit 435 performs processing for judging (specifying) the passengers who have boarded and alighted.

判定情報記憶部４３６には、乗降客判定部４３５により判定された乗降客の判定情報が記憶される。記憶される乗降客の判定情報には、乗車した客、降車した客の情報が含まれる。これら客の情報には、客の特徴の他、これら特徴と紐付けられた客の登録情報が含まれてもよい。客の登録情報には、氏名、座席番号、ユーザＩＤ、メールアドレス、又は電話番号が含まれてもよい。これら客の登録情報は、通信端末２にダウンロードされた旅行アプリで登録された情報であってもよい。 The judgment information storage unit 436 stores the judgment information of the passengers who are judged by the passenger judgment unit 435. The stored passenger determination information includes information on passengers getting on and off. These customer information may include customer characteristics and customer registration information associated with these characteristics. The customer registration information may include a name, a seat number, a user ID, a mail address, or a telephone number. The customer registration information may be information registered by the travel application downloaded to the communication terminal 2.

判定情報出力部４３７は、判定情報記憶部４３６に記憶された乗降客の判定情報を出力する処理を行う。判定情報出力部４３７は、例えば、バス１０の出発前など、所定のタイミングで未乗車又は未帰還の客の情報（氏名、又は座席番号など）を音声に変換して、スピーカ２５、車内スピーカ１３、又は客の通信端末２から出力する処理を行ってもよいし、前記客の情報を表示部２６、車内モニタ１２、又は客の通信端末２に表示する処理を行ってもよい。 The determination information output unit 437 performs a process of outputting the determination information of passengers stored in the determination information storage unit 436. The determination information output unit 437 converts the information (name, seat number, etc.) of a passenger who has not boarded or returned to the vehicle at a predetermined timing, for example, before the departure of the bus 10, and outputs the speaker 25 and the in-vehicle speaker 13. Alternatively, the process of outputting from the customer's communication terminal 2 may be performed, or the process of displaying the customer information on the display unit 26, the in-vehicle monitor 12, or the customer's communication terminal 2 may be performed.

なお、特徴抽出部４３２では、取得した客画像から、客の顔の特徴とともに、客の体格及び服装に関する特徴のうちの少なくとも１つの特徴を抽出することが好ましい。そして、乗降客判定部４３５では、判定精度を高める観点から、これら２以上の特徴を用いて乗降客を判定することが好ましい。 It is preferable that the feature extraction unit 432 extracts at least one of the features of the customer's physique and clothes from the acquired customer image, as well as the features of the customer's face. Then, the passenger determination unit 435 preferably determines the passenger using these two or more features from the viewpoint of improving the determination accuracy.

図５は、実施の形態（１）に係る観光支援装置３０を構成する提供情報生成部４４の機能構成例を示すブロック図である。
提供情報生成部４４は、推定部４４１、及び観光情報生成部４４２を含んでいる。
推定部４４１は、少なくとも客情報４３０を用いて、客にお勧めする観光行動の推奨カテゴリー（以下、推奨カテゴリーという）を推定する処理を行う。 FIG. 5 is a block diagram showing a functional configuration example of the provision information generation unit 44 which constitutes the tourism support device 30 according to the embodiment (1).
The provided information generation unit 44 includes an estimation unit 441 and a tourist information generation unit 442.
The estimation unit 441 performs a process of estimating a recommended category of tourist action recommended to a customer (hereinafter referred to as a recommended category) using at least the customer information 430.

観光情報生成部４４２は、旅程情報４２０、及び取得情報４１０のうちの少なくとも１つと、推定部４４１で推定された推奨カテゴリーに関連する情報（推奨カテゴリー情報）４４４とを用いて、推奨カテゴリーに対応する観光情報を提供情報として生成する処理を行う。 The tourist information generation unit 442 uses at least one of the itinerary information 420 and the acquired information 410, and information related to the recommended category estimated by the estimation unit 441 (recommended category information) 444 to support the recommended category. Performs processing to generate tourist information to be provided as provision information.

提供情報生成部４４で用いられる客情報４３０は、客の性別（男性、女性など）、年齢、年代（２０代、３０代など）、人種、及び国籍のうちの少なくとも１つを含んでいる。
また、客情報４３０は、客の服装の系統（カジュアル、スポーツ、フォーマルなど）、及び靴の系統（スニーカー、革靴、ブーツ、サンダル、パンプス、ハイヒールなど）のうちの少なくとも１つをさらに含んでもよい。
また、客情報４３０は、客のグループ構成（一人、カップル、家族、親子３世代など）、興味、趣味、及び旅の要望のうちの少なくとも１つをさらに含んでもよい。 The customer information 430 used by the provision information generation unit 44 includes at least one of the sex (male, female, etc.), age, age (20s, thirties, etc.), race, and nationality of the customer. ..
In addition, the customer information 430 may further include at least one of a clothing system of a customer (casual, sports, formal, etc.) and a shoe system (sneakers, leather shoes, boots, sandals, pumps, high heels, etc.). ..
In addition, the customer information 430 may further include at least one of a group structure of customers (one person, a couple, a family, parent and child 3 generations, etc.), interests, hobbies, and travel requests.

推奨カテゴリー情報４４４に含まれる推奨カテゴリーには、例えば、グルメ、ショッピング、スポーツ、ハイキング、娯楽（遊園地）、癒し（自然、景色、温泉）、散策（公園、庭園）、歴史（寺院、神社、名所、旧跡）、学術・芸術（博物館、美術館）、文化（伝統工芸、工房）、及び音楽・演劇（コンサート、芝居、ミュージカル）、行事・イベント（祭り）などの観光行動が分類されたカテゴリーのうちの少なくとも１つが含まれている。推奨カテゴリー情報４４４に２以上の推奨カテゴリーが含まれる場合は、各推奨カテゴリーに優先度が付与されてもよい。 The recommended categories included in the recommended category information 444 include, for example, gourmet, shopping, sports, hiking, entertainment (amusement park), healing (nature, scenery, hot spring), walk (park, garden), history (temple, shrine, Sightseeing activities such as famous places, historic sites, academic/arts (museums, museums), culture (traditional crafts, workshops), music/drama (concerts, plays, musicals), events/events (festivals), etc. At least one of them is included. When the recommended category information 444 includes two or more recommended categories, priority may be given to each recommended category.

旅程情報４２０は、情報記憶部４２から取り込まれた情報であり、客の旅行の日程に関する各種情報が含まれる。
取得情報４１０は、情報取得部４１により取得された情報であり、車載機器１１の機器情報、通信端末２の端末情報、及びネットワーク情報のうちの少なくとも１つが含まれる。 The itinerary information 420 is information fetched from the information storage unit 42 and includes various kinds of information regarding the itinerary of the customer.
The acquisition information 410 is information acquired by the information acquisition unit 41, and includes at least one of the device information of the vehicle-mounted device 11, the terminal information of the communication terminal 2, and the network information.

推定部４４１は、推奨カテゴリーを推定するための機械学習を行った学習済みの学習器４４３を含み、学習器４４３に少なくとも客情報４３０を入力して、推奨カテゴリー情報４４４を学習器４４３から取得する処理を行う。学習器４４３には、客情報４３０の他に、取得情報４１０、及び旅程情報４２０のうち少なくとも１つが入力されてもよい。 The estimation unit 441 includes a learned learner 443 that has undergone machine learning for estimating a recommended category, inputs at least customer information 430 into the learner 443, and acquires recommended category information 444 from the learner 443. Perform processing. In addition to the customer information 430, at least one of the acquisition information 410 and the itinerary information 420 may be input to the learning device 443.

学習器４４３は、教師データを用いて学習させた教師あり学習モデルを含んで構成されてもよい。教師データには、例えば、観光情報を提供する各地点のデータ（地名、地区名、施設名など）、及びこれら各地点を観光した客のデータ（性別、年齢、年代、体格、人種、国籍、服装の系統、グループ構成、興味、及び趣味のうちの少なくとも１つ）を入力とし、これら各地点における客の観光行動のカテゴリー（例えば、グルメ、ショッピング、スポーツ、ハイキング、又は娯楽など）を出力とする正解ラベルが付されたデータを用いてもよい。これら教師データは、例えば、各地点で集計されたデータ（例えば、画像データ、又は人の手によって集計されたデータ）を、人の手又はコンピュータによって評価し、各地点のデータと、客のデータと、観光行動のカテゴリーとを関連付けることにより得られるものである。 The learning device 443 may be configured to include a learning model with a teacher that is trained using teacher data. The teacher data includes, for example, data of each point that provides tourist information (place name, district name, facility name, etc.) and data of tourists who have visited these points (sex, age, age, physique, race, nationality). , At least one of clothing system, group composition, interests, and hobbies), and outputs the tourist behavior category (eg, gourmet, shopping, sports, hiking, or entertainment) at each of these points. The data labeled with the correct answer may be used. These teacher data are, for example, data collected at each point (for example, image data or data collected by human hands) evaluated by a human hand or a computer, and data at each point and customer data. It is obtained by associating with the category of tourism behavior.

学習器４４３は、例えば、入力層、中間層、及び出力層を含むニューラルネットワークによって構成されてもよい。この場合、前記ニューラルネットワークを構成する各ニューロン間の結合の重み、及び各ニューロン間の閾値などの情報が学習データとして記憶部３２に記憶される。学習器４４３は、ニューラルネットワークの他、サポートベクターマシン、自己組織化マップ、又は強化学習により学習を行う学習器によって構成されてもよい。 The learner 443 may be configured by, for example, a neural network including an input layer, an intermediate layer, and an output layer. In this case, information such as the weight of the connection between the neurons forming the neural network and the threshold value between the neurons is stored in the storage unit 32 as learning data. The learning device 443 may be configured by a learning vector that performs learning by a support vector machine, a self-organizing map, or reinforcement learning other than the neural network.

また、学習器４４３は、教師なし学習モデルを含んで構成されてもよい。教師なし学習モデルは、例えば、観光情報を提供する各地点のデータ（地名、地区名、施設名など）、これら各地点を観光した客のデータ（性別、年齢、年代、体格、人種、国籍、服装の系統、グループ構成、興味、及び趣味のうちの少なくとも１つ）、及びこれら各地点における客の観光行動のカテゴリー（例えば、グルメ、ショッピング、スポーツ、ハイキング、又は娯楽など）を用いて、これら各地点における客の観光行動のカテゴリーと客のデータとの関係を学習させたモデルである。教師なし学習モデルの作成には、例えば、K-means法などのアルゴリズムを用いたクラスタリング、高次元のデータを低次元にまとめる次元圧縮を行う主成分分析、又は自己組織化マップ（Self Organizing Map : SOM）などの手法が用いられる。 Further, the learning device 443 may be configured to include an unsupervised learning model. The unsupervised learning model is, for example, data (location name, district name, facility name, etc.) of each point that provides tourist information, and data (sex, age, age, physique, race, nationality) of tourists who visited each of these points. , At least one of a system of clothing, group composition, interests, and hobbies), and a category of tourist behavior of the customer at each of these points (for example, gourmet, shopping, sports, hiking, or entertainment). This is a model in which the relationship between the tourist behavior category and the customer data at each of these points is learned. In order to create an unsupervised learning model, for example, clustering using an algorithm such as the K-means method, principal component analysis for performing dimensional compression that collects high-dimensional data into low dimensions, or a self-organizing map (Self Organizing Map: SOM) is used.

推定部４４１は、学習器４４３に、観光情報を提供する地点のデータ、及び客情報４３０を入力して演算処理を行い、学習器４４３から、当該地点における推奨カテゴリー情報４４４を出力する処理を行う。 The estimation unit 441 inputs the data of the spot providing the tourist information and the customer information 430 to the learning device 443, performs the arithmetic processing, and outputs the recommended category information 444 at the spot from the learning device 443. ..

なお、学習器４４３は、入力するデータに、さらに各地点の条件データを含めてもよい。
各地点の条件データには、取得情報４１０に含まれているデータ（例えば、天気や温度などの気象データ、年月データ、曜日データ、及び時間帯データのうちの少なくとも１つ）が含まれてもよい。 The learning device 443 may further include the condition data of each point in the input data.
The condition data of each point includes data included in the acquisition information 410 (for example, at least one of weather data such as weather and temperature, year/month data, day of the week data, and time zone data). Good.

また、推定部４４１は、学習器４４３に代えて、観光情報を提供する各地点のデータ、これら各地点を観光した客のデータ、及びこれら各地点における客の観光行動のカテゴリーの関係が定義されたテーブルを備え、該テーブルから、観光情報を提供する地点と、客情報４３０とに対応する推奨カテゴリー情報４４４を抽出する構成としてもよい。 Further, the estimation unit 441 defines, in place of the learning device 443, data of each point that provides tourist information, data of a tourist who has visited each of these points, and a relationship between the categories of tourist behavior of the customer at each of these points. The table may be provided, and the recommended category information 444 corresponding to the spot providing the tourist information and the customer information 430 may be extracted from the table.

図６は、実施の形態（１）に係る観光支援装置３０における制御部３１が行う登録処理動作の一例を示すフローチャートである。本処理動作は、例えば、客が出発地点などでバス１０に初めて乗車する時に実行され、乗車する客毎に実行される。 FIG. 6 is a flowchart showing an example of a registration processing operation performed by the control unit 31 in the tourist assistance device 30 according to the embodiment (1). The present processing operation is executed, for example, when a customer first gets on the bus 10 at a departure point or the like, and is executed for each passenger.

ステップＳ１では、制御部３１は、カメラ２１で撮像された客画像を取得する処理を行い、ステップＳ２に処理を進める。
ステップＳ２では、制御部３１は、取得した客画像から客の特徴を抽出する処理を行い、ステップＳ３では、抽出した客の特徴を客情報として特徴記憶部４３３に記憶する。客の特徴は、客の顔、性別、年齢、年代、体格、人種、及び服装のうちの少なくとも１以上を含む。 In step S1, the control unit 31 performs a process of acquiring the customer image captured by the camera 21, and advances the process to step S2.
In step S2, the control unit 31 performs a process of extracting a customer feature from the acquired customer image, and in step S3, stores the extracted customer feature in the feature storage unit 433 as customer information. The customer characteristics include at least one or more of the customer's face, sex, age, age, physique, race, and clothes.

次のステップＳ４では、制御部３１は、客の通信端末２から客の登録情報を取得したか否かを判断する。前記登録情報は、例えば、通信端末２にダウンロードされた旅行アプリ（アプリケーション）で登録された情報（氏名、座席番号、ユーザＩＤ、メールアドレス、又は電話番号など）でもよい。 In the next step S4, the control unit 31 determines whether or not the customer registration information is acquired from the customer communication terminal 2. The registration information may be, for example, information (name, seat number, user ID, mail address, telephone number, etc.) registered in the travel application (application) downloaded to the communication terminal 2.

ステップＳ４において、制御部３１が、通信端末２から客の登録情報を取得したと判断すれば、ステップＳ５に進み、取得した客の登録情報を客の特徴と紐付けて特徴記憶部４３３に記憶して、その後処理を終える。一方ステップＳ４において、制御部３１は、通信端末２から客の登録情報を取得していないと判断すれば、その後処理を終える。 If the control unit 31 determines in step S4 that the customer registration information is acquired from the communication terminal 2, the process proceeds to step S5, and the acquired customer registration information is stored in the feature storage unit 433 in association with the customer feature. Then, the process ends. On the other hand, if the control unit 31 determines in step S4 that the customer registration information has not been acquired from the communication terminal 2, then the process ends.

図７は、実施の形態（１）に係る観光支援装置３０における制御部３１が行う乗降客管理処理動作の一例を示すフローチャートである。本処理動作は、上記した客情報の登録処理を終えた後、バス１０から降車する客（降車客）、又はバス１０に乗車する客（乗車客）がカメラ２１で撮像された場合に実行される。 FIG. 7 is a flowchart showing an example of the passenger passenger management processing operation performed by the control unit 31 in the tourism support device 30 according to Embodiment (1). This processing operation is executed when the camera 21 captures an image of a passenger getting off from the bus 10 (passenger) or a passenger getting on the bus 10 (passenger) after completing the above-described customer information registration processing. It

ステップＳ１１では、制御部３１は、カメラ２１で撮像された客画像を取得する処理を行い、ステップＳ１２に処理を進める。
ステップＳ１２では、制御部３１は、降車客が撮像された画像であるか、又は乗車客が撮像された画像であるかを判断し、降車客が撮像された画像であると判断すれば、ステップＳ１３に処理を進める。ステップＳ１２での判断は、例えば、画像が撮像されたときのカメラ２１の向き（所定の基準位置からの角度変化）に基づいて判断してもよいし、降車客用カメラと乗車客用カメラとを備えている場合は、どちらのカメラから取得した画像であるかに基づいて判断してもよい。 In step S11, the control part 31 performs the process which acquires the customer image imaged by the camera 21, and advances a process to step S12.
In step S12, if the control unit 31 determines whether the image is the image of the getting-off passenger or the image of the passenger, if it is determined that the image is the image of the getting-off passenger, step S12 is performed. The process proceeds to S13. The determination in step S12 may be performed based on, for example, the orientation of the camera 21 when the image is captured (angle change from a predetermined reference position), or the determination may be made between the camera for getting off passengers and the camera for passengers. If it is provided, the determination may be made based on which camera the image is acquired from.

ステップＳ１３では、制御部３１は、取得した客画像から降車客の特徴を抽出する処理を行い、ステップＳ１４に処理を進める。降車客の特徴は、例えば、客の顔、性別、年齢、年代、体格、人種、及び服装のうちの少なくとも１以上を含む。 In step S13, the control unit 31 performs a process of extracting the characteristics of the getting-off passenger from the acquired customer image, and advances the process to step S14. The characteristics of the passenger getting off include at least one or more of the face, sex, age, age, physique, race, and clothes of the passenger.

ステップＳ１４では、制御部３１は、特徴記憶部４３３から客情報を読み出し、次のステップＳ１５では、制御部３１は、ステップＳ１３で抽出された降車客の特徴と、ステップＳ１４で読み出した客情報（客の特徴）とを照合して、降車客を判定する処理を行い、ステップＳ１６に処理を進める。 In step S14, the control unit 31 reads out the customer information from the characteristic storage unit 433, and in the next step S15, the control unit 31 extracts the characteristics of the passenger getting off in step S13 and the customer information (in step S14). The characteristics of the customer) are compared to determine the passenger getting off, and the process proceeds to step S16.

ステップＳ１６では、制御部３１は、判定された降車客の情報、例えば、氏名、座席番号、識別番号、メールアドレス、電話番号、又は旅行アプリのユーザＩＤなどの降車客を特定するための情報を判定情報記憶部４３６に記憶する処理を行い、ステップＳ１７に処理を進める。 In step S16, the control unit 31 provides the information of the determined alighting passenger, for example, information for identifying the alighting passenger such as name, seat number, identification number, mail address, telephone number, or user ID of the travel application. A process of storing in the determination information storage unit 436 is performed, and the process proceeds to step S17.

ステップＳ１７では、制御部３１は、降車客の情報を表示部２６に表示出力したり、スピーカ２５から音声出力したりする処理を行い、その後処理を終える。なお、表示部２６へは、降車客の情報が座席表形式で一覧表示されてもよいし、名簿形式で一覧表示されてもよい。なお、制御部３１は、降車客の情報に代えて、降車していない客の情報を出力してもよい。 In step S17, the control unit 31 performs a process of displaying and outputting the information of the getting-off passenger on the display unit 26 and a voice output from the speaker 25, and then ends the process. It should be noted that the information of the getting-off passengers may be displayed as a list in the seat chart format or as a list in the name list format on the display unit 26. Note that the control unit 31 may output information of customers who have not disembarked, instead of the information of passengers who have exited.

一方ステップＳ１２において、制御部３１は、乗車客が撮像された画像であると判断すれば、ステップＳ２１に処理を進め、ステップＳ２１では、取得した客画像から乗車客の特徴を抽出する処理を行い、ステップＳ２２に処理を進める。乗車客の特徴は、例えば、客の顔、性別、年齢、年代、体格、人種、及び服装のうちの少なくとも１以上を含む。 On the other hand, if the control unit 31 determines in step S12 that the passenger is an imaged image, the process proceeds to step S21, and in step S21, the feature of the passenger is extracted from the acquired passenger image. , And advances the processing to step S22. The characteristics of the passenger include, for example, at least one or more of the passenger's face, sex, age, age, physique, race, and clothes.

ステップＳ２２では、制御部３１は、特徴記憶部４３３から客情報を読み出し、次のステップＳ２３では、制御部３１は、ステップＳ２１で抽出された乗車客の特徴と、ステップＳ２２で読み出した客情報（客の特徴）とを照合して、乗車客を判定する処理を行い、ステップＳ２４に処理を進める。 In step S22, the control unit 31 reads out the customer information from the characteristic storage unit 433, and in the next step S23, the control unit 31 reads out the passenger information extracted in step S21 and the customer information read in step S22 ( The characteristics of the passengers) are compared to determine the passengers in the vehicle, and the process proceeds to step S24.

ステップＳ２４では、制御部３１は、判定された乗車客の情報、例えば、氏名、座席番号、識別番号、メールアドレス、電話番号、又は旅行アプリのユーザＩＤなどの乗車客を特定する情報を判定情報記憶部４３６に記憶する処理を行い、ステップＳ２５に処理を進める。 In step S24, the control unit 31 determines the information of the determined passenger, for example, information for identifying the passenger such as name, seat number, identification number, email address, telephone number, or user ID of the travel application, as the determination information. The process of storing in the storage unit 436 is performed, and the process proceeds to step S25.

ステップＳ２５では、制御部３１は、乗車客の情報を表示部２６に表示出力したり、スピーカ２５から音声出力したりする処理を行い、その後処理を終える。なお、表示部２６へは、乗車客の情報が座席表形式で一覧表示されてもよいし、名簿形式で一覧表示されてもよい。なお、制御部３１は、乗車客の情報に代えて、帰還していない客の情報を出力してもよい。また、制御部３１は、帰還していない客の通信端末２に、出発時刻などを知らせる通知処理を行ってもよい。 In step S25, the control unit 31 performs a process of displaying and outputting the passenger information on the display unit 26 and a voice output from the speaker 25, and then ends the process. It should be noted that the passenger information may be displayed as a list in the form of a seating chart or may be displayed as a list in the form of a name list on the display unit 26. Note that the control unit 31 may output information on passengers who have not returned, instead of information on passengers. Further, the control unit 31 may perform a notification process of notifying the communication terminal 2 of the customer who has not returned to the customer, such as the departure time.

図８は、実施の形態（１）に係る観光支援装置３０における制御部３１が行う提供情報生成処理動作の一例を示すフローチャートである。本処理動作は、例えば、所定間隔で繰り返し実行される。 FIG. 8 is a flowchart showing an example of an operation of providing information generation processing performed by the control unit 31 in the tourist assistance device 30 according to the embodiment (1). This processing operation is repeatedly executed at predetermined intervals, for example.

まず、ステップＳ３１では、制御部３１は、客情報４３０、取得情報４１０、及び旅程情報４２０を取り込む処理を行い、ステップＳ３２に処理を進める。客情報４３０は乗降客管理部４３から取り込み、取得情報４１０は情報取得部４１から取り込み、旅程情報４２０は情報記憶部４２から取り込む。
ステップＳ３２では、制御部３１は、現在地が客に情報を提供する地点であるか否かを判断し、現在地が客に情報を提供する地点であると判断すれば、ステップＳ３３に処理を進め、現在地が客に情報を提供する地点ではないと判断すれば、ステップＳ３５に処理を進める。現在地のデータは、取得情報４１０に含まれている。また、客に情報を提供する地点のデータは、旅程情報４２０に含まれている。 First, in step S31, the control unit 31 performs a process of fetching the customer information 430, the acquisition information 410, and the itinerary information 420, and advances the process to step S32. The passenger information 430 is fetched from the passenger management section 43, the acquisition information 410 is fetched from the information acquisition section 41, and the itinerary information 420 is fetched from the information storage section 42.
In step S32, the control unit 31 determines whether or not the current location is a point that provides information to the customer, and if the current location is a point that provides information to the customer, the process proceeds to step S33. If it is determined that the current location is not the location for providing information to the customer, the process proceeds to step S35. The data of the current location is included in the acquisition information 410. Further, the data of the point that provides the information to the customer is included in the itinerary information 420.

ステップＳ３３では、制御部３１は、取得情報４１０、及び旅程情報４２０のうちの少なくとも１つを用いて、現在地、又は現在地周辺地域に関連するご当地情報を生成する処理を行い、ステップＳ３４に処理を進める。前記ご当地情報は、ご当地ソング、ご当地グルメ、ご当地イベント、ご当地名物、ご当地名所、及びご当地ニュースのうちの少なくとも１つを含む。前記ご当地情報は、例えば、取得情報４１０に含まれている情報を用いて生成される。 In step S33, the control unit 31 uses at least one of the acquired information 410 and the itinerary information 420 to perform a process of generating local information related to the current position or a region around the current position, and the process proceeds to step S34. Proceed. The local information includes at least one of a local song, a local gourmet, a local event, a local specialty, a local landmark, and local news. The local information is generated using, for example, the information included in the acquisition information 410.

ステップＳ３４では、制御部３１は、現在地、又はその周辺地域に関連するご当地情報を出力する処理を行い、ステップＳ３５に処理を進める。ご当地情報は、車内モニタ１２に表示出力してもよいし、車内スピーカ１３から音声出力してもよいし、客の通信端末２に表示出力してもよい。 In step S34, the control unit 31 performs a process of outputting local information related to the current location or its surrounding area, and advances the processing to step S35. The local information may be displayed and output on the in-vehicle monitor 12, may be output by voice from the in-vehicle speaker 13, or may be displayed and output on the customer's communication terminal 2.

ステップＳ３５では、制御部３１は、いずれかの客の通信端末２から観光情報の要求があったか否かを判断し、観光情報の要求があったと判断すれば、ステップＳ３６に処理を進める一方、観光情報の要求がなかったと判断すれば、その後処理を終える。ステップＳ３５での判断は、例えば、通信端末２にダウンロードされた旅行アプリで入力された観光情報の要求データに基づいて判断してもよい。 In step S35, the control unit 31 determines whether or not there is a tourist information request from any one of the communication terminals 2 of the customers, and if it is determined that the tourist information is requested, the process proceeds to step S36 while the tourist information is requested. If it is determined that there is no request for information, then the process ends. The determination in step S35 may be made based on, for example, the tourist data request data input by the travel application downloaded to the communication terminal 2.

ステップＳ３６では、制御部３１は、地点指定があるか否かを判断し、地点指定があると判断すれば、ステップＳ３７に処理を進める一方、地点指定がないと判断すれば、ステップＳ４２に処理を進める。ステップＳ３６での判断は、例えば、通信端末２から取得した観光情報の要求データに、指定された地点に関するデータ（指定地点データ）が含まれているか否かに基づいて判断してもよい。指定地点データは、地名、施設などの名称、電話番号など、地点を指定できるデータであればよい。 In step S36, the control unit 31 determines whether or not there is a spot designation, and if it is determined that there is a spot designation, the process proceeds to step S37, while if it is determined that there is no spot designation, the process proceeds to step S42. Proceed. The determination in step S36 may be made based on, for example, whether or not the request data of the tourist information acquired from the communication terminal 2 includes data regarding the designated spot (designated spot data). The designated spot data may be data that can designate a spot, such as a place name, a name of a facility, a telephone number, or the like.

ステップＳ３７では、制御部３１は、推定部４４１として動作し、観光情報の要求をしてきた客の客情報４３０と指定地点データとを学習器４４３に入力する処理を行い、ステップＳ３８に処理を進める。 In step S37, the control unit 31 operates as the estimation unit 441 and performs a process of inputting the customer information 430 and the designated spot data of the customer who has requested the tourist information to the learning device 443, and proceeds to step S38. ..

ステップＳ３８では、制御部３１は、推定部４４１として動作し、学習器４４３の演算処理を実行し、観光情報の要求をしてきた客にお勧めする観光行動のカテゴリー（推奨カテゴリー）を推定する処理を行い、ステップＳ３９に処理を進める。 In step S38, the control unit 31 operates as the estimation unit 441, executes the arithmetic processing of the learning device 443, and estimates the category of recommended sightseeing behavior (recommended category) for the customer who has requested the sightseeing information. Is performed, and the process proceeds to step S39.

ステップＳ３９では、制御部３１は、推定部４４１として動作し、学習器４４３から指定地点での推奨カテゴリー情報４４４を出力する処理を行い、ステップＳ４０に処理を進める。 In step S39, the control unit 31 operates as the estimation unit 441, performs processing of outputting the recommended category information 444 at the designated point from the learning device 443, and advances the processing to step S40.

ステップＳ４０では、制御部３１は、観光情報生成部４４２として動作し、旅程情報４２０、及び取得情報４１０のうちの少なくとも１つと、学習器４４３から取得した推奨カテゴリー情報４４４とを用いて、推奨カテゴリーに対応する指定地点の観光情報を生成する処理を行い、ステップＳ４１に処理を進める。 In step S40, the control unit 31 operates as the tourist information generation unit 442, and uses at least one of the itinerary information 420 and the acquisition information 410, and the recommended category information 444 acquired from the learning device 443, to select the recommended category. The tourist information of the designated point corresponding to is performed, and the process proceeds to step S41.

ステップＳ４１では、制御部３１は、ステップＳ４０で生成された指定地点の観光情報を出力する処理、例えば、観光情報の要求をしてきた客の通信端末２に表示出力する処理を行い、その後ステップＳ３１に戻り、処理を繰り返す。 In step S41, the control unit 31 performs a process of outputting the tourist information of the designated point generated in step S40, for example, a process of displaying the tourist information on the communication terminal 2 of the customer who has requested the tourist information, and then in step S31. Return to and repeat the process.

一方ステップＳ３６において、制御部３１は、地点指定がないと判断すれば、ステップＳ４２に処理を進め、ステップＳ４２では、制御部３１は、推定部４４１として動作し、観光情報の要求をしてきた客の客情報４３０と、旅程情報４２０に含まれる停車地点データとを学習器４４３に入力する処理を行い、ステップＳ４３に処理を進める。停車地点データは、次に停車する地点のデータでもよいし、停車予定時間が所定時間（例えば、３０分）以上の地点のデータでもよい。 On the other hand, in step S36, if the control unit 31 determines that there is no point designation, the process proceeds to step S42, and in step S42, the control unit 31 operates as the estimation unit 441 and requests the tourist information. The customer information 430 and the stop point data included in the itinerary information 420 are input to the learning device 443, and the process proceeds to step S43. The stop point data may be data of a point to stop next, or may be data of a point where the scheduled stop time is a predetermined time (for example, 30 minutes) or more.

ステップＳ４３では、制御部３１は、推定部４４１として動作し、学習器４４３の演算処理を実行し、観光情報の要求をしてきた客にお勧めする観光行動のカテゴリー（推奨カテゴリー）を推定する処理を行い、ステップＳ４４に処理を進める。 In step S43, the control unit 31 operates as the estimation unit 441, executes the arithmetic processing of the learning device 443, and estimates a category of recommended tourist behavior (recommended category) for a customer who has requested tourist information. Then, the process proceeds to step S44.

ステップＳ４４では、制御部３１は、推定部４４１として動作し、学習器４４３から停車地点での推奨カテゴリー情報４４４を出力する処理を行い、ステップＳ４５に処理を進める。 In step S44, the control unit 31 operates as the estimation unit 441, performs the process of outputting the recommended category information 444 at the stop point from the learning device 443, and advances the process to step S45.

ステップＳ４５では、制御部３１は、観光情報生成部４４２として動作し、旅程情報４２０、及び取得情報４１０のうちの少なくとも１つと、学習器４４３から取得した推奨カテゴリー情報４４４とを用いて、推奨カテゴリーに対応する停車地点の観光情報を生成する処理を行い、ステップＳ４６に処理を進める。 In step S45, the control unit 31 operates as the tourist information generation unit 442, and uses at least one of the itinerary information 420 and the acquisition information 410, and the recommended category information 444 acquired from the learning device 443, to select the recommended category. The process of generating tourist information of the stop point corresponding to is performed, and the process proceeds to step S46.

ステップＳ４６では、制御部３１は、ステップＳ４５で生成された指定地点の観光情報を出力する処理、例えば、観光情報の要求をしてきた客の通信端末２に表示出力する処理を行い、その後処理を終える。 In step S46, the control unit 31 performs a process of outputting the tourist information of the designated point generated in step S45, for example, a process of displaying the tourist information on the communication terminal 2 of the customer who has requested the tourist information, and then performs the process. Finish.

上記実施の形態（１）に係る観光支援システム１によれば、バス１０に、観光支援装置３０が搭載されたロボット２０が搭載されることにより、人手によらずに、客の乗降管理を行うことできるとともに、客の多様なニーズに対応した情報を的確に提供することができる。さらに、ロボット２０により、客に親近感を与えることができるシステムが実現できるとともに、ロボット２０が、バスガイドや添乗員の役目を果たすことにより、人件費を削減することができる。 According to the tourism support system 1 according to the above-mentioned embodiment (1), the robot 20 including the tourism support device 30 is mounted on the bus 10, so that the passengers can get on and off the passengers without relying on manpower. In addition to being able to do so, it is possible to accurately provide information that meets the diverse needs of customers. Furthermore, the robot 20 can realize a system that gives the customer a sense of familiarity, and the robot 20 can also reduce the labor cost by acting as a bus guide and a passenger.

また、実施の形態（１）に係る観光支援装置３０によれば、乗降客管理部４３により、客がバス１０を乗り降りするときに取得される客情報４３０を用いて、乗降客、すなわち乗車客と降車客とがそれぞれ管理される。そして、提供情報生成部４４により、旅程情報４２０、及び取得情報４１０のうちの少なくとも１つと、客情報４３０とを用いて、客に提供する提供情報が生成され、提供情報出力部４５により前記提供情報が出力される。
したがって、観光支援装置３０によれば、人手によらずに、客の乗降管理を行うことが可能になるとともに、客の多様性に対応させた情報を前記提供情報として的確に提供することができる。また、乗降客管理部４３で用いる客情報４３０を、提供情報生成部４４でも用いることにより、前記提供情報の生成を効率良く行うことができる。 Further, according to the tourism support device 30 according to the embodiment (1), the passenger management unit 43 uses the passenger information 430 acquired when the passenger gets on and off the bus 10, and thus the passengers, that is, the passengers. And getting off passengers are managed respectively. Then, the provision information generating unit 44 generates provision information to be provided to the customer using at least one of the itinerary information 420 and the acquisition information 410 and the customer information 430, and the provision information output unit 45 provides the provision information. Information is output.
Therefore, according to the tourism support device 30, it is possible to manage the passengers getting on and off without relying on manual labor, and it is possible to accurately provide the information corresponding to the variety of the customers as the provision information. .. Further, by using the customer information 430 used by the passenger management section 43 also in the provision information generation section 44, the provision information can be efficiently generated.

また、観光支援装置３０によれば、乗降客管理部４３により、客がバス１０を乗り降りした場合に、特徴抽出部４３２により客画像から抽出される客の少なくとも１以上の特徴と、特徴記憶部４３３に記憶されている客情報とを用いて、乗降客が判定され、その判定情報（すなわち、客の乗降状態）が記憶され、乗降客の判定情報が出力される。したがって、人手をかけずに、客の乗降管理を精度良く行うことができ、添乗員又は運転者などの人による確認（点呼）作業の負担をなくす、又は軽減することができる。 Further, according to the tourism support device 30, when the passenger gets on and off the bus 10 by the passenger management section 43, at least one or more characteristics of the customer extracted from the customer image by the characteristic extraction section 432 and the characteristic storage section. The passenger information stored in 433 is used to determine the passengers, the determination information (that is, the passenger entry/exit state) is stored, and the passenger determination information is output. Therefore, passengers can get on and off with high accuracy without manpower, and the burden of checking (rolling) work by a person such as an attendant or a driver can be eliminated or reduced.

また、観光支援装置３０によれば、提供情報生成部４４が推定部４４１と観光情報生成部４４２とを備えているので、推定部４４１によって、推奨カテゴリーが推定され、観光情報生成部４４２によって、前記推奨カテゴリーに対応する観光情報が生成される。したがって、それぞれの客にお勧めの観光情報を提供することができ、満足度の高い観光が行えるように客を支援することができる。 Further, according to the tourism support device 30, since the provision information generation unit 44 includes the estimation unit 441 and the tourism information generation unit 442, the estimation unit 441 estimates the recommended category, and the tourism information generation unit 442 calculates the recommended category. Tourist information corresponding to the recommended categories is generated. Therefore, it is possible to provide recommended tourist information to each customer, and it is possible to support the customer so that the tourist can be highly satisfied.

また、観光支援装置３０によれば、推定部４４１が学習器４４３を含んでいるので、少なくとも客情報４３０を用いて、前記推奨カテゴリーを精度良く推定することが可能となり、客の多様性に対応させたお勧めの観光情報を生成して提供することができ、客の満足度をより高めることができる。 Further, according to the tourism support device 30, since the estimation unit 441 includes the learning device 443, it is possible to accurately estimate the recommended category using at least the customer information 430, and it is possible to cope with the variety of customers. The recommended tourist information can be generated and provided, and the customer's satisfaction can be further enhanced.

また、観光支援装置３０によれば、学習器４４３が教師あり学習モデルを含んで構成されている場合、教師データに基づいて、前記推奨カテゴリーを精度良く出力することが可能となる。また、観光情報を提供する地点のデータ、及び客情報４３０が学習器４４３に入力され、前記地点における推奨カテゴリーに関する情報が学習器４４３から出力されるので、客にお勧めの観光情報を前記地点毎に生成して提供することが可能となる。 Further, according to the tourism support device 30, when the learning device 443 is configured to include a learning model with a teacher, it is possible to accurately output the recommended category based on the teacher data. Further, since the data of the point providing the tourist information and the customer information 430 are input to the learning device 443 and the information about the recommended category at the point is output from the learning device 443, the tourist information recommended to the customer is input to the point. It is possible to generate and provide each.

また、観光支援装置３０によれば、学習器４４３が教師なし学習モデルを含んで構成されている場合、前記推奨カテゴリーを推定する場合に、教師あり学習では捉えにくい規則性や傾向などの特徴が捉えられたカテゴリー分類が可能となる。また、観光情報を提供する地点のデータ、及び客情報４３０が学習器４４３に入力され、前記地点における前記推奨カテゴリーに関する情報が学習器４４３から出力されるので、客にお勧めの観光情報を前記地点毎に生成して提供することができる。 Further, according to the tourism support apparatus 30, when the learning device 443 is configured to include an unsupervised learning model, when estimating the recommended categories, features such as regularity and tendency that are difficult to catch in supervised learning are provided. Categorized category classification is possible. In addition, since the data of the point providing the tourist information and the customer information 430 are input to the learning device 443 and the information regarding the recommended category at the point is output from the learning device 443, the tourist information recommended for the customer is described above. It can be generated and provided for each point.

また、観光支援装置３０によれば、学習器４４３に入力するデータに、さらに各地点の条件データ（例えば、天気や温度などの気象データ、年月データ、曜日データ、及び時間帯データのうちの少なくとも１つ）が含まれている場合、前記推奨カテゴリーを推定する場合に、これら各地点の条件データに応じて、例えば、気象別（晴れ、曇り、雨など）、月・季節別、曜日別（平日、土日、祝日別）、時間帯別（午前１２時まで、午後６時まで、午後１０時まで、午後１０時以降など）に推奨カテゴリーの分類が可能となり、これら条件データに適合した観光情報を提供することができる。 In addition, according to the tourism support device 30, the data input to the learning device 443 further includes condition data of each point (for example, weather data such as weather and temperature, year/month data, day of the week data, and time zone data). If at least one) is included, when estimating the recommended category, for example, according to the condition data of each of these points, for example, by weather (clear, cloudy, rain, etc.), by month/season, by day of week (Weekdays, Saturdays, Sundays, and holidays) and time zones (12:00 am, 6:00 pm, 10:00 pm, 10:00 pm, etc.) can be classified into recommended categories, and tourism that matches these condition data Information can be provided.

次に実施の形態（２）に係る観光支援システム、観光支援装置、及び該装置が搭載されたロボットについて説明する。但し、実施の形態（２）に係る観光支援システム１Ａの概略構成は、図１に示すように観光支援システム１と略同様であり、異なる機能を有するロボット２０Ａ、及び観光支援装置３０Ａには異なる符号を付し、他の同一機能を有する構成要素には同一符号を付し、ここではその説明を省略する。 Next, a sightseeing support system, a sightseeing support device, and a robot equipped with the device according to the embodiment (2) will be described. However, the schematic configuration of the tourist assistance system 1A according to the embodiment (2) is substantially the same as that of the tourist assistance system 1 as shown in FIG. 1, and is different in the robot 20A and the tourist assistance device 30A having different functions. The same reference numerals are given to other components having the same function, and the description thereof will be omitted here.

また、実施の形態（２）に係るロボット２０Ａの概略構成は、図２に示すようにロボット２０と略同様であり、異なる機能を有する観光支援装置３０Ａ、その制御部３１Ａ、及び記憶部３２Ａには異なる符号を付し、他の同一機能を有する構成要素には同一符号を付し、ここではその説明を省略する。 Further, the schematic configuration of the robot 20A according to the embodiment (2) is substantially the same as that of the robot 20 as shown in FIG. 2, and includes a tourist assistance device 30A having different functions, its control unit 31A, and storage unit 32A. Are denoted by different reference numerals, other components having the same function are denoted by the same reference numeral, and description thereof will be omitted here.

図９は、実施の形態（２）に係るロボット２０Ａに搭載される観光支援装置３０Ａの機能構成例を示すブロック図である。但し、図３に示した実施の形態（１）に係る観光支援装置３０と同一機能を有する構成要素には同一符号を付し、ここではその説明を省略する。 FIG. 9 is a block diagram showing a functional configuration example of a tourist assistance device 30A mounted on the robot 20A according to Embodiment (2). However, components having the same functions as those of the tourism support device 30 according to the embodiment (1) shown in FIG. 3 are designated by the same reference numerals, and the description thereof will be omitted here.

観光支援装置３０Ａは、情報取得部４１、情報記憶部４２、乗降客管理部４３Ａ、提供情報生成部４４Ａ、及び提供情報出力部４５に加えて、さらに音声取得部４６と音声認識部４７とを含み、図２に示す制御部３１Ａが、記憶部３２Ａに記憶されているプログラムなどを読み込み、解釈して実行することにより、これら各部の機能が実現されるようになっている。 The tourism support device 30A includes a voice acquisition unit 46 and a voice recognition unit 47 in addition to the information acquisition unit 41, the information storage unit 42, the passenger management unit 43A, the provision information generation unit 44A, and the provision information output unit 45. In addition, the control unit 31A shown in FIG. 2 reads, interprets and executes a program or the like stored in the storage unit 32A to realize the functions of these units.

音声取得部４６は、マイク２２を介して入力された客の音声を取り込み、これを電気信号である音声データに変換し、変換した音声データを音声認識部４７に送出する。 The voice acquisition unit 46 takes in the voice of the customer input through the microphone 22, converts it into voice data which is an electric signal, and sends the converted voice data to the voice recognition unit 47.

音声認識部４７は、音声取得部４６から取り込んだ客の音声データの内容を認識する音声認識処理を行い、認識された音声認識データを提供情報生成部４４Ａに送出する処理を行う。音声認識処理には、公知の音声認識技術を用いることができる。 The voice recognition unit 47 performs a voice recognition process for recognizing the contents of the voice data of the customer fetched from the voice acquisition unit 46, and a process for sending the recognized voice recognition data to the provision information generation unit 44A. A known voice recognition technique can be used for the voice recognition process.

図１０は、実施の形態（２）に係る観光支援装置３０Ａを構成する乗降客管理部４３Ａの機能構成例を示すブロック図である。但し、図４に示した実施の形態（１）に係る観光支援装置３０を構成する乗降客管理部４３と同一機能を有する構成要素には同一符号を付し、ここではその説明を省略する。 FIG. 10 is a block diagram showing an example of the functional configuration of the passenger management unit 43A that constitutes the tourist assistance device 30A according to Embodiment (2). However, components having the same functions as those of the passenger management unit 43 constituting the tourism support device 30 according to the embodiment (1) shown in FIG. 4 are designated by the same reference numerals, and description thereof will be omitted here.

乗降客管理部４３Ａは、客画像取得部４３１、特徴抽出部４３２、特徴記憶部４３３、客情報出力部４３４、乗降客判定部４３５、判定情報記憶部４３６、及び判定情報出力部４３７に加えて、さらに、発話部４３８を含んでいる。 In addition to the passenger image acquisition unit 431, the feature extraction unit 432, the feature storage unit 433, the customer information output unit 434, the passenger determination unit 435, the determination information storage unit 436, and the determination information output unit 437, the passenger management unit 43A In addition, the utterance unit 438 is included.

発話部４３８は、乗降客判定部４３５により乗降客（乗車客、又は降車客）が判定された場合に、該乗降客に向かって発話する処理を行う。発話内容には、例えば、挨拶、又は出発時刻などの次の予定などが含まれてもよい。これにより、乗降客を癒す効果、又は乗降客に注意等を喚起する効果などが得られる。 The utterance unit 438 performs a process of uttering the passenger when the passenger determination unit 435 determines the passenger (passenger or passenger). The utterance content may include, for example, a greeting or the next schedule such as the departure time. As a result, an effect of healing the passengers, an effect of calling attention to the passengers, and the like can be obtained.

図１１は、実施の形態（２）に係る観光支援装置３０Ａを構成する提供情報生成部４４Ａの機能構成例を示すブロック図である。但し、図５に示した実施の形態（１）に係る観光支援装置３０を構成する提供情報生成部４４と同一機能を有する構成要素には同一符号を付し、ここではその説明を省略する。 FIG. 11 is a block diagram showing a functional configuration example of the provision information generation unit 44A configuring the tourism support device 30A according to Embodiment (2). However, components having the same functions as those of the provided information generation unit 44 constituting the tourism support device 30 according to the embodiment (1) shown in FIG. 5 are designated by the same reference numerals, and description thereof will be omitted here.

提供情報生成部４４Ａは、推定部４４１、観光情報生成部４４２、及び回答情報生成部４４６を含んでいる。
回答情報生成部４４６は、音声認識部４７で認識された音声認識データ４７０を取り込み、音声認識データ４７０が示す音声内容に対する回答情報を提供情報として生成する処理を行う。回答情報生成部４４６は、取得情報４１０、及び旅程情報４２０のうちの少なくとも１つを用いて、回答情報を生成する。 The provision information generation unit 44A includes an estimation unit 441, a tourist information generation unit 442, and a reply information generation unit 446.
The answer information generation unit 446 performs a process of taking in the voice recognition data 470 recognized by the voice recognition unit 47 and generating reply information for the voice content indicated by the voice recognition data 470 as provision information. The reply information generation unit 446 uses at least one of the acquired information 410 and the itinerary information 420 to generate reply information.

図１２は、実施の形態（２）に係る観光支援装置３０Ａにおける制御部３１Ａが行う乗降客管理処理動作の一例を示すフローチャートである。但し、図１２に示すステップＳ１１〜Ｓ１７、及びステップＳ２１〜２５の処理動作は、図７に示したフローチャートと同一であるので、これらステップの説明をここでは省略する。 FIG. 12 is a flowchart showing an example of a passenger management processing operation performed by the control unit 31A in the tourist assistance device 30A according to Embodiment (2). However, since the processing operation of steps S11 to S17 and steps S21 to 25 shown in FIG. 12 is the same as that of the flowchart shown in FIG. 7, description of these steps will be omitted here.

制御部３１Ａは、ステップＳ１７において、降車客の情報を出力する処理を行い、その後ステップＳ１８に処理を進める。
ステップＳ１８では、制御部３１Ａは、降車客に対する発話処理を行い、その後処理を終える。発話内容は特に限定されないが、例えば、降車客に対して、「いってらっしゃいませ」などのあいさつ、「・・時・・分までにお戻りください」などの次の予定などの内容でもよい。 31 A of control parts perform the process which outputs the information of an alighting passenger in step S17, and after that, a process is advanced to step S18.
In step S18, the control unit 31A performs the utterance process for the getting-off passenger, and then ends the process. The content of the utterance is not particularly limited, but may be, for example, a greeting such as "Welcome to you" to the passenger getting off, or the next schedule such as "Please return by the hour, minute".

また、制御部３１Ａは、ステップＳ２５において、乗車客の情報を出力する処理を行い、その後ステップＳ２６に処理を進める。
ステップＳ２６では、制御部３１Ａは、乗車客に対する発話処理を行い、その後処理を終える。発話内容は特に限定されないが、例えば、乗車客に対して、「お帰りなさいませ」などのあいさつ、「次は・・・に向かいます」などの次の予定などの内容でもよい。 In addition, the control unit 31A performs the process of outputting the passenger information in step S25, and then advances the process to step S26.
In step S26, the control unit 31A performs the utterance process for the passengers, and then ends the process. The content of the utterance is not particularly limited, but may be, for example, a greeting such as "Welcome back" to the passengers, or a next schedule such as "I will go to...".

図１３は、実施の形態（２）に係る観光支援装置３０Ａにおける制御部３１Ａが行う提供情報生成処理動作の一例を示すフローチャートである。但し、図８に示した処理動作と同一の処理動作（すなわち、ステップＳ３１〜Ｓ４５）の説明をここでは省略する。 FIG. 13 is a flowchart showing an example of the provided information generation processing operation performed by the control unit 31A in the tourism support device 30A according to Embodiment (2). However, the description of the same processing operation as that shown in FIG. 8 (that is, steps S31 to S45) is omitted here.

制御部３１Ａは、ステップＳ３１からＳ３４の処理を行い、その後、ステップＳ３５に進み、ステップＳ３５では、いずれかの客の通信端末２から観光情報の要求があったか否かを判断し、観光情報の要求があったと判断すれば、ステップＳ３６に処理を進め、その後、ステップＳ３７〜Ｓ４１、又はステップＳ４２〜Ｓ４６の処理（図８参照）を行う。 31 A of control parts perform the process of step S31 to S34, after that, it progresses to step S35, and in step S35, it judges whether the communication terminal 2 of one of the customers had requested the tourist information, and requested tourist information. If it is determined that there is, the process proceeds to step S36, and then the processes of steps S37 to S41 or steps S42 to S46 (see FIG. 8) are performed.

一方、ステップＳ３５において、制御部３１Ａが、観光情報の要求がなかったと判断すれば、ステップＳ４７に処理を進める。
ステップＳ４７では、制御部３１Ａは、マイク２２から入力された音声を取得したか否かを判断し、音声を取得していないと判断すれば、その後処理を終える一方、音声を取得したと判断すれば、ステップＳ４８に処理を進める。 On the other hand, if the control unit 31A determines in step S35 that the tourist information is not requested, the process proceeds to step S47.
In step S47, the control unit 31A determines whether or not the voice input from the microphone 22 is acquired, and if it is determined that the voice is not acquired, the process is ended while the control unit 31A determines that the voice is acquired. If so, the process proceeds to step S48.

ステップＳ４８では、制御部３１Ａは、取得した音声データを認識する音声認識処理を行い、ステップＳ４９に処理を進める。
ステップＳ４９では、制御部３１Ａは、回答情報生成部４４６として動作し、音声認識データ４７０を取り込み、音声認識データ４７０が示す音声内容に対する回答情報を生成する処理を行う。前記回答情報は、例えば、取得情報４１０、又は旅程情報４２０から抽出して生成する。 In step S48, control unit 31A performs a voice recognition process for recognizing the acquired voice data, and advances the process to step S49.
In step S49, the control unit 31A operates as the response information generation unit 446, takes in the voice recognition data 470, and performs a process of generating response information for the voice content indicated by the voice recognition data 470. The answer information is generated by extracting from the acquisition information 410 or the itinerary information 420, for example.

ステップＳ５０では、制御部３１Ａは、ステップＳ４９で生成された回答情報を出力する処理、例えば、スピーカ２５から回答情報を音声出力する処理、又は表示部２６に回答情報を表示出力する処理を行い、その後処理を終える。 In step S50, the control unit 31A performs a process of outputting the reply information generated in step S49, for example, a process of outputting the reply information by voice from the speaker 25, or a process of displaying and outputting the reply information on the display unit 26, After that, the processing ends.

上記実施の形態（２）に係る観光支援システム１Ａによれば、上記した観光支援システム１と同様の効果を得ることできる。
さらに、観光支援装置３０Ａによれば、乗降客管理部４３Ａが発話部４３８を備えているので、乗降客判定部４３５により乗降客が判定された場合に、該乗降客に向かって発話することが可能となる。これにより、前記乗降客を癒す効果、又は前記乗降客に注意等を喚起する効果などが得られる。 According to the tourism support system 1A according to the above embodiment (2), it is possible to obtain the same effect as that of the above-mentioned tourism support system 1.
Furthermore, according to the tourism support device 30A, since the passenger management unit 43A includes the utterance unit 438, when the passenger determination unit 435 determines the passengers, it is possible to speak to the passengers. It will be possible. Thereby, an effect of healing the passengers, an effect of calling attention to the passengers, or the like can be obtained.

また、観光支援装置３０Ａによれば、回答情報生成部４４６によって、音声認識部４７で認識された客の音声内容に対する回答情報が提供情報として生成されるので、前記客の多様な問合せなどに的確に対応することができる。なお、回答情報生成部４４６は、人工知能技術を活用したチャットボット（自動会話プログラム）などで構成してもよい。 Further, according to the tourism support device 30A, since the reply information generation unit 446 generates reply information for the voice content of the customer recognized by the voice recognition unit 47 as the provision information, it is appropriate for the customer's various inquiries and the like. Can correspond to. The answer information generation unit 446 may be configured by a chatbot (automatic conversation program) that utilizes artificial intelligence technology.

次に実施の形態（３）に係る観光支援システム、観光支援装置、及び該装置が搭載されたロボットについて説明する。
図１４は、実施の形態（３）に係る観光支援システム１Ｂの構成例を概略的に示したブロック図である。但し、図１に示した実施の形態（１）に係る観光支援システム１と同一機能を有する構成要素には、同一符号を付し、ここではその説明を省略する。 Next, a sightseeing support system, a sightseeing support device, and a robot equipped with the device according to the embodiment (3) will be described.
FIG. 14 is a block diagram schematically showing a configuration example of the tourism support system 1B according to the embodiment (3). However, components having the same functions as those of the tourism support system 1 according to the embodiment (1) shown in FIG. 1 are designated by the same reference numerals, and the description thereof will be omitted here.

観光支援システム１Ｂは、観光支援装置３０Ｂが搭載されるロボット２０Ｂと、ロボット２０Ｂが搭載されるバス１０Ａとを含んで構成されている。
バス１０Ａは、走行制御、操舵制御、及び制動制御を運転者の操作を介さずに実行可能な自動運転車両であり、バス１０Ａには、例えば、アメリカのＳＡＥ（Society of Automotive Engineers）Internationalで定義されているレベル３〜５の何れかの自動運転レベルを実現する装置が装備されている。なお、バス１０Ａは、走行制御、操舵制御、及び制動制御のうちの少なくとも１つを運転者の操作を介さずに実行する自動運転車両であってもよい。 The tourism support system 1B is configured to include a robot 20B on which the tourism support device 30B is mounted and a bus 10A on which the robot 20B is mounted.
The bus 10A is an automatic driving vehicle capable of executing traveling control, steering control, and braking control without any intervention by the driver. It is equipped with a device that realizes any of the level 3 to 5 automatic driving levels. The bus 10A may be an autonomous vehicle that executes at least one of traveling control, steering control, and braking control without a driver's operation.

バス１０Ａには、観光支援装置３０Ｂが搭載されるロボット２０Ｂ、車載機器１１、車内モニタ１２、及び車内スピーカ１３に加えて、さらに小型の無人飛行体１４が搭載されている。
無人飛行体１４は、例えば、ドローンであり、撮像部としてのカメラ１４ａが搭載されている。無人飛行体１４の飛行制御やカメラ１４ａの撮影制御が、観光支援装置３０Ｂによって実行される。 On the bus 10A, in addition to the robot 20B in which the sightseeing support device 30B is mounted, the in-vehicle device 11, the in-vehicle monitor 12, and the in-vehicle speaker 13, a smaller unmanned air vehicle 14 is mounted.
The unmanned aerial vehicle 14 is, for example, a drone, and is equipped with a camera 14a as an imaging unit. Flight control of the unmanned aerial vehicle 14 and shooting control of the camera 14a are executed by the tourism support device 30B.

図１５は、実施の形態（３）に係るロボット２０Ｂに搭載される観光支援装置３０Ｂの機能構成例を示すブロック図である。但し、図３に示した実施の形態（１）に係る観光支援装置３０と同一機能を有する構成要素には同一符号を付し、ここではその説明を省略する。 FIG. 15 is a block diagram showing an example of the functional configuration of a tourist assistance device 30B mounted on the robot 20B according to Embodiment (3). However, components having the same functions as those of the tourism support device 30 according to the embodiment (1) shown in FIG. 3 are designated by the same reference numerals, and the description thereof will be omitted here.

観光支援装置３０Ｂは、情報取得部４１、情報記憶部４２、乗降客管理部４３、提供情報生成部４４Ｂ、及び提供情報出力部４５に加えて、さらに事象検出部４８と飛行体制御部４９とを含み、図２に示す制御部３１Ｂが、記憶部３２Ｂに記憶されているプログラムなどを読み込み、解釈して実行することにより、これら各部の機能が実現されるようになっている。 In addition to the information acquisition unit 41, the information storage unit 42, the passenger management unit 43, the provision information generation unit 44B, and the provision information output unit 45, the tourism support device 30B further includes an event detection unit 48 and an aircraft control unit 49. 2, the control unit 31B shown in FIG. 2 reads, interprets and executes a program or the like stored in the storage unit 32B to realize the functions of these units.

事象検出部４８は、情報取得部４１で取得した情報に基づいて、バス１０Ａに搭載された無人飛行体１４を飛行させる事象が発生したか否かを検出し、事象検出信号を飛行体制御部４９に送出する処理を行う。前記事象には、例えば、バス１０Ａが関与している事故、及びバス１０Ａが位置する周辺地域で発生した災害のうちの少なくとも１つが含まれている。 The event detection unit 48 detects, based on the information acquired by the information acquisition unit 41, whether or not an event causing the unmanned air vehicle 14 mounted on the bus 10A to fly has occurred, and outputs an event detection signal to the air vehicle control unit. The process of sending to 49 is performed. The event includes, for example, at least one of an accident involving the bus 10A and a disaster occurring in the surrounding area where the bus 10A is located.

飛行体制御部４９は、事象検出部４８により前記事象が検出された場合に、無人飛行体１４の飛行制御、無人飛行体１４に搭載されたカメラ１４ａの撮像制御、及びカメラ１４ａで撮像された画像を含むデータを所定の送信先に送信する送信制御を行う。 When the event detection unit 48 detects the event, the flight control unit 49 controls the flight of the unmanned flight vehicle 14, the imaging control of the camera 14a mounted on the unmanned flight vehicle 14, and the image capturing by the camera 14a. The transmission control for transmitting the data including the image to the predetermined destination is performed.

図１６は、実施の形態（３）に係る観光支援装置３０Ｂを構成する提供情報生成部４４Ｂの機能構成例を示すブロック図である。但し、図５に示した実施の形態（１）に係る観光支援装置３０を構成する提供情報生成部４４と同一機能を有する構成要素には同一符号を付し、ここではその説明を省略する。 FIG. 16 is a block diagram showing a functional configuration example of the provision information generation unit 44B configuring the tourism support device 30B according to Embodiment (3). However, components having the same functions as those of the provided information generation unit 44 constituting the tourism support device 30 according to the embodiment (1) shown in FIG. 5 are designated by the same reference numerals, and description thereof will be omitted here.

提供情報生成部４４Ｂは、推定部４４１、観光情報生成部４４２、及び車両動態情報生成部４４７を含んでいる。
車両動態情報生成部４４７は、バス１０Ａの走行状態、操舵状態、制動状態、及び車両周辺状況のうち少なくとも１つに関連する車両動態情報を提供情報として生成し、生成した車両動態情報を提供情報出力部４５に出力する処理を行う。 The provision information generation unit 44B includes an estimation unit 441, a tourist information generation unit 442, and a vehicle movement information generation unit 447.
The vehicle dynamic state information generation unit 447 generates vehicle dynamic state information related to at least one of the traveling state, the steering state, the braking state, and the vehicle peripheral state of the bus 10A as the provision information, and the generated vehicle dynamic state information is the provision information. Processing for outputting to the output unit 45 is performed.

図１７は、実施の形態（３）に係る観光支援装置３０Ｂにおける制御部３１Ｂが行う飛行体制御処理動作の一例を示すフローチャートである。本処理動作は、例えば、所定間隔で繰り返し実行される。 FIG. 17 is a flowchart showing an example of the flight object control processing operation performed by the control unit 31B in the tourist assistance device 30B according to Embodiment (3). This processing operation is repeatedly executed at predetermined intervals, for example.

ステップＳ６１では、制御部３１Ｂは、事象検出部４８として動作し、情報取得部４１から取得情報を取り込み、ステップＳ６２に処理を進める。取得情報は、車載機器１１から送信されてくる機器情報、及び通信ネットワーク３を介いて送信されてくるネットワーク情報のうちの少なくとも１つを含む。 In step S61, the control unit 31B operates as the event detection unit 48, acquires the acquired information from the information acquisition unit 41, and advances the processing to step S62. The acquisition information includes at least one of device information transmitted from the in-vehicle device 11 and network information transmitted via the communication network 3.

前記機器情報には、例えば、エアバッグ装置を含む安全装置の起動情報、又は衝突検知装置の衝突検知情報などが含まれ、前記ネットワーク情報には、例えば、事故情報（車両事故、人身事故、自損事故など）、又は災害情報（地震、津波、高潮、川の氾濫、道路冠水、火災など）が含まれる。 The device information includes, for example, activation information of a safety device including an airbag device or collision detection information of a collision detection device, and the network information includes, for example, accident information (vehicle accident, personal injury, self-injury). Accidents) or disaster information (earthquakes, tsunamis, storm surges, river floods, road floods, fires, etc.).

ステップＳ６２では、制御部３１Ｂは、事象検出部４８として動作し、取り込んだ取得情報に基づいて、所定の事象が発生したか否かを判断する。前記所定の事象には、無人飛行体１４を飛行させる事象が含まれ、該事象には、バス１０Ａが関与している事故、及びバス１０Ａが位置する周辺地域で発生した災害のうちの少なくとも１つが含まれる。 In step S62, the control unit 31B operates as the event detection unit 48 and determines whether or not a predetermined event has occurred based on the acquired acquisition information. The predetermined event includes an event in which the unmanned aerial vehicle 14 is caused to fly, and the event includes at least one of an accident involving the bus 10A and a disaster occurring in the surrounding area where the bus 10A is located. One is included.

ステップＳ６２において、制御部３１Ｂが、所定の事象が発生していないと判断すれば、その後処理を終える一方、所定の事象が発生したと判断すれば、ステップＳ６３に処理を進める。
ステップＳ６３では、制御部３１Ｂは、バス１０Ａに搭載された無人飛行体１４を飛行させる制御、例えば、バス１０Ａの上空に飛行させる制御を行い、ステップＳ６４に処理を進める。 If the control unit 31B determines in step S62 that the predetermined event has not occurred, then the process ends, while if it determines that the predetermined event has occurred, the process proceeds to step S63.
In step S63, the control unit 31B performs control to fly the unmanned aerial vehicle 14 mounted on the bus 10A, for example, control to fly above the bus 10A, and the process proceeds to step S64.

ステップＳ６４では、制御部３１Ｂは、無人飛行体１４に搭載されたカメラ１４ａの撮像制御、例えば、バス１０Ａの周辺状況を撮像する制御を行い、ステップＳ６５に処理を進める。 In step S64, the control unit 31B performs imaging control of the camera 14a mounted on the unmanned aerial vehicle 14, for example, control of imaging the surrounding situation of the bus 10A, and proceeds to step S65.

ステップＳ６５では、制御部３１Ｂは、カメラ１４ａで撮像された画像（静止画、動画のいずれでもよい）を含むデータを所定の送信先に送信する制御を行い、ステップＳ６６に処理を進める。前記画像を含むデータには、前記画像の他に、日時データ、現在地データなどが含まれてもよい。前記所定の送信先は、例えば、バス運行サーバ４でもよいし、他の緊急通報先でもよいし、客の通信端末２でもよいし、これら全てに送信してもよい。前記緊急通報先には、例えば、警察、消防、又は最寄りの救急病院などの各種機関が含まれてもよい。
ステップＳ６６では、制御部３１Ｂは、無人飛行体１４をバス１０Ａに格納する飛行制御を行い、その後処理を終える。なお、制御部３１Ｂは、無人飛行体１４をバス１０Ａに格納する飛行制御に代えて、無人飛行体１４を最寄りの緊急通報先などの所定機関まで飛行させる制御を行ってもよい。 In step S65, the control unit 31B controls to transmit the data including the image captured by the camera 14a (either a still image or a moving image) to a predetermined destination, and the process proceeds to step S66. The data including the image may include date and time data, current location data, and the like, in addition to the image. The predetermined transmission destination may be, for example, the bus operation server 4, another emergency call destination, the customer's communication terminal 2, or the transmission to all of them. The emergency call destination may include various organizations such as police, fire department, or the nearest emergency hospital.
In step S66, the control unit 31B performs flight control for storing the unmanned aerial vehicle 14 in the bus 10A, and then ends the process. Note that the control unit 31B may perform control of causing the unmanned aerial vehicle 14 to fly to a predetermined engine such as the nearest emergency call destination, instead of flight control in which the unmanned aerial vehicle 14 is stored in the bus 10A.

図１８は、実施の形態（３）に係る観光支援装置３０Ｂにおける制御部３１Ｂが行う提供情報生成処理動作の一例を示すフローチャートである。但し、図８に示した処理動作と同一の処理動作（すなわち、ステップＳ３１〜Ｓ４５）の説明をここでは省略する。 FIG. 18 is a flowchart showing an example of the provided information generation processing operation performed by the control unit 31B in the tourism support device 30B according to Embodiment (3). However, the description of the same processing operation as that shown in FIG. 8 (that is, steps S31 to S45) is omitted here.

制御部３１Ｂは、ステップＳ３１からＳ３４の処理を行い、その後、ステップＳ３５に進み、ステップＳ３５では、いずれかの客の通信端末２から観光情報の要求があったか否かを判断し、観光情報の要求があったと判断すれば、ステップＳ３６に処理を進め、その後、ステップＳ３７〜Ｓ４１、又はステップＳ４２〜Ｓ４６の処理（図８参照）を行う。 The control unit 31B performs the processing from steps S31 to S34, and then proceeds to step S35. In step S35, it is determined whether or not there is a tourist information request from the communication terminal 2 of any customer, and the tourist information request is made. If it is determined that there is, the process proceeds to step S36, and then the processes of steps S37 to S41 or steps S42 to S46 (see FIG. 8) are performed.

一方、ステップＳ３５において、制御部３１Ｂが、観光情報の要求がなかったと判断すれば、ステップＳ５１に処理を進める。
ステップＳ５１では、制御部３１Ｂは、バス１０Ａの車載機器１１から車両動態情報を取得したか否かを判断し、車両動態情報を取得していないと判断すれば、その後処理を終える一方、車両動態情報を取得したと判断すれば、ステップＳ５２に処理を進める。車両動態情報には、自動運転車両であるバス１０Ａの走行状態、操舵状態、制動状態、及び車両周辺状況のうちの少なくとも１つが含まれる。走行状態は車速を含み、操舵状態は急ハンドルなどのハンドル操作を含み、制動状態は急ブレーキなどのブレーキ操作を含み、車両周辺状況は周辺道路、周辺障害物、又は周辺車両の状況を含む。 On the other hand, if the control unit 31B determines in step S35 that the tourist information is not requested, the process proceeds to step S51.
In step S51, the control unit 31B determines whether or not the vehicle dynamics information has been acquired from the vehicle-mounted device 11 of the bus 10A, and if it determines that the vehicle dynamics information has not been acquired, then the processing is ended while the vehicle dynamics information is acquired. If it is determined that the information is acquired, the process proceeds to step S52. The vehicle dynamics information includes at least one of a running state, a steering state, a braking state, and a vehicle surroundings state of the bus 10A that is an autonomous vehicle. The traveling state includes a vehicle speed, the steering state includes a steering operation such as a sudden steering wheel, the braking state includes a braking operation such as a sudden braking, and the vehicle surroundings include a surrounding road, a surrounding obstacle, or a surrounding vehicle.

ステップＳ５２では、制御部３１Ｂは、取得した車両動態情報を解析する処理を行い、ステップＳ５３に処理を進める。
ステップＳ５３では、制御部３１Ｂは、車両動態情報生成部４４７として動作し、車両動態情報の解析データを取り込み、解析データが所定条件になったか否かを判断する。所定条件には、例えば、車速が所定速度以上になる条件、急操舵を示す条件、急制動を示す条件、周辺障害物、周辺車両等への急接近を示す条件などが含まれる。 In step S52, control unit 31B performs a process of analyzing the acquired vehicle dynamics information, and advances the process to step S53.
In step S53, the control unit 31B operates as the vehicle movement information generation unit 447, takes in the analysis data of the vehicle movement information, and determines whether or not the analysis data satisfies the predetermined condition. The predetermined condition includes, for example, a condition that the vehicle speed is equal to or higher than a predetermined speed, a condition indicating a sudden steering, a condition indicating a sudden braking, a condition indicating a rapid approach to a peripheral obstacle, a peripheral vehicle, and the like.

ステップＳ５３において、制御部３１Ｂが、解析データが所定条件になっていないと判断すれば、その後処理を終える一方、解析データが所定条件になったと判断すれば、ステップＳ５４に処理を進める。 If the control unit 31B determines in step S53 that the analysis data does not satisfy the predetermined condition, the process ends thereafter, while if it determines that the analysis data satisfies the predetermined condition, the process proceeds to step S54.

ステップＳ５４では、制御部３１Ｂは、車両動態情報の解析データに基づいて、客に提供する車両動態情報を生成する処理を行い、ステップＳ５５に処理を進める。客に提供する車両動態情報には、例えば、バス１０Ａの速度情報、操舵情報、制動情報、及び周辺状況のうちの少なくとも１つが含まれる。 In step S54, the control unit 31B performs a process of generating vehicle dynamics information to be provided to the customer based on the analysis data of the vehicle dynamics information, and advances the process to step S55. The vehicle movement information provided to the customer includes, for example, at least one of speed information, steering information, braking information, and surrounding conditions of the bus 10A.

ステップＳ５５では、制御部３１Ｂは、ステップＳ５４で生成された車両動態情報を出力する処理、例えば、スピーカ２５から車両動態情報を音声出力する処理、表示部２６に車両動態情報を表示出力する処理、又は客の通信端末２に車両動態状態を表示出力する処理を行い、その後処理を終える。 In step S55, the control unit 31B outputs the vehicle dynamics information generated in step S54, for example, outputs the vehicle dynamics information from the speaker 25 by voice, displays the vehicle dynamics information on the display unit 26, and outputs the vehicle dynamics information. Alternatively, the process of displaying and displaying the vehicle dynamic state on the communication terminal 2 of the customer is performed, and then the process ends.

上記実施の形態（３）に係る観光支援システム１Ｂによれば、上記した観光支援システム１と同様の効果を得ることができる。また、ロボット２０Ｂが、バスガイド、添乗員、及び運転者の役目を果たすことができ、人件費を削減することができる。
さらに、観光支援装置３０Ｂによれば、車両動態情報生成部４４７により、自動運転車両であるバス１０Ａの車両動態情報が提供情報として生成されるので、前記車両動態情報を客に適宜提供することが可能となり、自動運転中における客の安心感を高めることができ、客は目的地まで安心して楽しく過ごすことができる。 According to the tourism support system 1B of the above-mentioned Embodiment (3), it is possible to obtain the same effects as those of the tourism support system 1 described above. In addition, the robot 20B can serve as a bus guide, a tour operator, and a driver, so that the labor cost can be reduced.
Furthermore, according to the tourism support device 30B, the vehicle dynamics information generation unit 447 generates the vehicle dynamics information of the bus 10A, which is an autonomous vehicle, as the provision information. This makes it possible to enhance the customer's sense of security during autonomous driving, and allows the customer to spend their time at their destination with peace of mind and enjoyment.

また、観光支援装置３０Ｂによれば、事象検出部４８により、情報取得部４１で取得した情報に基づいて、無人飛行体１４を飛行させる事象が発生したことが検出され、前記事象として事故、及び災害のうちの少なくとも１つが検出された場合に、飛行体制御部４９により、無人飛行体１４の飛行制御、カメラ１４ａの撮像制御、及び画像を含むデータの送信制御が行われる。したがって、前記事象が発生した場合に、前記画像を含むデータの送信先では、バス１０Ａの周辺状況を迅速に把握することが可能となり、前記事故や前記災害に対する救助対応などを迅速に行うことが可能となる。 Further, according to the tourism support device 30B, the event detection unit 48 detects that an event causing the unmanned aerial vehicle 14 to fly has occurred based on the information acquired by the information acquisition unit 41, and as the event, an accident, And at least one of the disasters is detected, the flight control unit 49 controls the flight of the unmanned flight vehicle 14, the imaging control of the camera 14a, and the transmission control of the data including the image. Therefore, when the event occurs, it becomes possible for the destination of the data including the image to quickly grasp the surrounding situation of the bus 10A, and to promptly take a rescue response to the accident or the disaster. Is possible.

本発明は、以上の実施の形態に限定されるものではなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。例えば、別の実施の形態では、実施の形態（３）に係る観光支援装置３０Ｂと、実施の形態（２）に係る観光支援装置３０Ａとを組み合わせた構成としてもよい。 It is needless to say that the present invention is not limited to the above-mentioned embodiments, and various modifications can be made, which are also included in the scope of the present invention. For example, in another embodiment, the tourism support device 30B according to the embodiment (3) and the tourism support device 30A according to the embodiment (2) may be combined.

１、１Ａ、１Ｂ観光支援システム
２通信端末
３通信ネットワーク
４バス運行サーバ
５Ｗｅｂサーバ
６ＳＮＳサーバ
１０、１０Ａバス（移動体）
１１車載機器
１２車内モニタ
１３車内スピーカ
１４無人飛行体
１４ａカメラ
２０、２０Ａ、２０Ｂロボット
２１カメラ
２２マイク
２３通信部
２４操作部
２５スピーカ
２６表示部
３０、３０Ａ、３０Ｂ観光支援装置
３１、３１Ａ、３１Ｂ制御部
３２、３２Ａ、３２Ｂ記憶部
３３入出力部
４１情報取得部
４２情報記憶部
４３、４３Ａ乗降客管理部
４４、４４Ａ、４４Ｂ提供情報生成部
４５提供情報出力部
４６音声取得部
４７音声認識部
４８事象検出部
４９飛行体制御部
４１０取得情報
４２０旅程情報
４３０客情報
４３１客画像取得部
４３２特徴抽出部
４３３特徴記憶部
４３４客情報出力部
４３５乗降客判定部
４３６判定情報記憶部
４３７判定情報出力部
４３８発話部
４４１推定部
４４２観光情報生成部
４４３学習器
４４４推奨カテゴリー情報
４４６回答情報生成部
４４７車両動態情報生成部
４７０音声認識データ 1, 1A, 1B Tourism support system 2 Communication terminal 3 Communication network 4 Bus operation server 5 Web server 6 SNS server 10, 10A Bus (mobile body)
11 In-vehicle device 12 In-vehicle monitor 13 In-vehicle speaker 14 Unmanned aerial vehicle 14a Camera 20, 20A, 20B Robot 21 Camera 22 Microphone 23 Communication unit 24 Operation unit 25 Speaker 26 Display unit 30, 30A, 30B Tourism support device 31, 31A, 31B Control Part 32, 32A, 32B Storage part 33 Input/output part 41 Information acquisition part 42 Information storage part 43, 43A Passenger management part 44, 44A, 44B Provision information generation part 45 Provision information output part 46 Voice acquisition part 47 Voice recognition part 48 Event detection unit 49 Aircraft control unit 410 Acquisition information 420 Itinerary information 430 Customer information 431 Customer image acquisition unit 432 Feature extraction unit 433 Feature storage unit 434 Customer information output unit 435 Passenger determination unit 436 Determination information storage unit 437 Determination information output unit 438 Utterance unit 441 Estimating unit 442 Tourism information generating unit 443 Learning device 444 Recommended category information 446 Answer information generating unit 447 Vehicle dynamics information generating unit 470 Voice recognition data

Claims

A tourism support device mounted on a moving body on which a customer gets on and off,
At least one of device information transmitted from a device mounted on the mobile body, terminal information transmitted from the communication terminal of the customer, and network information transmitted via an external communication network. The information acquisition unit to acquire,
An information storage unit for storing at least the itinerary information of the customer;
Using the customer information acquired when the customer gets on and off the moving body, a passenger management section for managing passengers,
And obtaining information that is acquired by the itinerary information of customers, and the information acquisition unit, by using said customer information, and providing information generation unit for generating information to be provided to the customer,
A provision information output unit for outputting the generated provision information ,
The passenger management section,
A customer image acquisition unit that acquires a customer image captured by the customer,
From the acquired customer image, a feature extraction unit that extracts at least one feature of the face, sex, age, age, physique, race, and clothes of the customer,
A feature storage unit that stores the extracted at least one feature as the customer information;
A customer information output unit that outputs the customer information stored in the feature storage unit to the provision information generation unit;
When the customer gets on and off the moving body, the at least one feature of the customer extracted from the customer image by the feature extraction unit and the customer information stored in the feature storage unit are used. A passenger determination unit for determining the passengers,
A determination information storage unit that stores the determination information of the passengers that have been determined,
And a determination information output unit that outputs the stored determination information of the passengers,
The provision information generation unit,
Using at least the customer information, an estimation unit that estimates a recommended category of tourist behavior recommended to the customer,
A tourist information generation unit that generates tourist information corresponding to the recommended category as the provided information by using the itinerary information, the acquisition information, and the information on the recommended category estimated by the estimation unit. A tourism support device characterized by being present.

The passenger management section,
The passenger when the passengers is determined by the customer determination unit, tourist assistance apparatus according to claim 1, characterized in that it comprises a speech portion of the speech towards the occupant Fukyaku.

A voice acquisition unit for acquiring the voice of the customer,
A voice recognition unit for recognizing the acquired voice content of the customer,
The provision information generation unit,
The tourism support device according to claim 1 or 2 , further comprising: an answer information generation unit that generates answer information for the voice content recognized by the voice recognition unit as the provision information.

The estimation unit,
Including a learned learner that has been machine-learned to estimate the recommended category,
At least the customer information is input to the learning device, and information about the recommended category is acquired from the learning device,
The tourist information generation unit,
The tourism support device according to any one of claims 1 to 3 , wherein the tourist information is generated based on information about the recommended category acquired from the learning device.

The learner is
Supervised learning that uses the data of each point that provides the tourist information and the data of the tourists who have visited these points as input and learns using the teacher data that outputs the category of tourist behavior of each of these points Including the model,
The estimation unit,
The learning device, the data points for providing the tourist information, and by entering the customer information state, and are not performing a process for outputting information on the recommended category from the learning device,
The tourism support device according to claim 4 , wherein the data of the spot providing the tourist information is data of the spot included in the itinerary information .

The learner is
Using the data of each point that provides the tourist information, the data of the tourists who have visited each of these points, and the category of the tourist behavior of the customer at each of these points, the category of the tourist behavior of the customer at each of these points and the Including an unsupervised learning model that trained the relationship with the data,
The estimation unit,
The learning device, the data points for providing the tourist information, and by entering the customer information state, and are not performing a process for outputting information on the recommended category from the learning device,
The tourism support device according to claim 4 , wherein the data of the spot providing the tourist information is data of the spot included in the itinerary information .

The data to be input to the learning device, viewed including the further condition data at each point,
Condition data of the respective points are sightseeing assistance apparatus according to claim 5 or claim 6, wherein the a condition data contained in the acquired information.

The provided information is
The departure of the mobile body, via, destination, current position, and according to any one of claims 1-7, characterized in that it comprises a Gotochi information relating to at least one of these surrounding areas Tourism support device.

The local information is
9. The tourism support device according to claim 8 , comprising at least one of a local song, a local gourmet, a local event, a local specialty, a local attraction, and local news.

The moving body is an autonomous vehicle that executes at least one of traveling control, steering control, and braking control without a driver's operation.
The provision information generation unit,
It is characterized by further comprising a vehicle dynamics information generation unit that generates, as the provision information, vehicle dynamics information related to at least one of a running state, a steering state, a braking state, and a vehicle surroundings state of the autonomous driving vehicle. Things assist apparatus according to any of claims 1-9.

The provided information output unit,
Things assist apparatus according to any of claims 1-10, characterized in that the provided information generated by the providing information generation unit and outputs are converted into sound.

The provided information output unit,
The provision information generated by the provision information generation unit is converted into a display object including at least one of a displayable language, a figure, a picture, an image, and a video, and is output. Things assist apparatus according to any of claims 1-10.

Based on the information acquired by the information acquisition unit, an event detection unit that detects whether or not an event causing the unmanned air vehicle mounted on the mobile body to fly has occurred,
When the event is detected by the event detection unit, flight control of the unmanned aerial vehicle, imaging control of an imaging unit mounted on the unmanned aerial vehicle, and data including an image captured by the imaging unit Things assist apparatus according to any of claims 1 to 12, characterized in that it comprises a flying object control unit that performs transmission control for transmitting to a predetermined destination.

14. The tourism according to claim 13 , wherein the event includes at least one of an accident involving the mobile body and a disaster occurring in a surrounding area where the mobile body is located. Support device.

Robot, characterized in that tourist assistance device is mounted according to any one of claims 1-14.

The robot according to claim 15 ,
A tourism support system comprising a mobile body on which the robot is mounted.

A computer-implemented sightseeing support method for a moving body on which a passenger gets on and off,
An information acquisition step of acquiring at least one of device information from a device mounted on the mobile body, terminal information from the customer's communication terminal, and network information from an external communication network;
A storage step of storing at least the itinerary information of the customer in the information storage section;
Using the customer information obtained when the passenger gets on and off the moving body, a passenger management step of managing passengers,
And obtaining information that is acquired by the itinerary information, and the information acquisition step of the customer, using said customer information, and providing information generating step of generating information to be provided to the customer,
Look including an advertisement output step of outputting the generated the provided information,
The passenger management step comprises:
A customer image acquisition step of acquiring a customer image captured by the customer,
A feature extraction step of extracting at least one feature of the face, sex, age, age, physique, race, and clothing of the customer from the acquired customer image;
A feature storage step of storing the extracted at least one or more features in the feature storage unit as the customer information;
A customer information output step of outputting the customer information stored in the characteristic storage unit to the provision information generation unit;
When the customer gets on and off the moving body, the at least one feature of the customer extracted from the customer image in the feature extraction step and the customer information stored in the feature storage unit are used. And a passenger determination step of determining the passengers,
A determination information storage step of storing the determination information of the passengers that have been determined,
A determination information output step of outputting the stored determination information of the passengers,
The providing information generating step,
An estimation step of estimating a recommended category of tourist behavior recommended to the customer using at least the customer information,
A tourist information generating step of generating tourist information corresponding to the recommended category as the provided information by using the itinerary information, the acquisition information, and information about the recommended category estimated in the estimating step. Tourism support method characterized by.