JP6909834B2

JP6909834B2 - Information processing system, information processing device, computer program and information processing method

Info

Publication number: JP6909834B2
Application number: JP2019158569A
Authority: JP
Inventors: 道弘西田
Original assignee: Micware Co Ltd
Current assignee: Micware Co Ltd
Priority date: 2019-08-30
Filing date: 2019-08-30
Publication date: 2021-07-28
Anticipated expiration: 2039-08-30
Also published as: JP2021039413A

Description

本発明は、スポットの探索を支援する情報処理システム、情報処理装置、コンピュータプログラム及び情報処理方法に関する。 The present invention relates to an information processing system, an information processing device, a computer program, and an information processing method that support spot search.

スマートフォン等のカメラ付き携帯情報端末を用いて撮影した写真画像又は動画像を投稿し、ユーザ間で写真画像又は動画像を共有することを可能とするＳＮＳ（Social Network Service）アプリケーションが広く利用されている。これらのＳＮＳアプリケーションのユーザは、投稿した画像に対し、他のユーザからの反応が得られることを目的とする場合がある（特許文献１等） SNS (Social Network Service) applications that enable users to share photographic images or moving images by posting photographic images or moving images taken using a camera-equipped mobile information terminal such as a smartphone are widely used. There is. Users of these SNS applications may aim to obtain reactions from other users to the posted images (Patent Document 1 and the like).

特開２０１８−１２０５７５号広報Japanese Patent Application Laid-Open No. 2018-120575 Public Relations

ＳＮＳアプリケーションでより多くの反応を得るべく、所謂「映える」写真画像が撮影できる店舗、観光地等のスポットが人気である。ユーザは、他のユーザの投稿画像を参照し、「映える」写真画像を撮影することを目的で、他のユーザと同じスポットへ旅行や食事等を計画する場合がある。 Spots such as stores and tourist spots where so-called "shining" photographic images can be taken are popular in order to obtain more reactions with SNS applications. The user may plan a trip, a meal, or the like to the same spot as the other user for the purpose of referring to the posted image of the other user and taking a “shining” photographic image.

「映える」写真画像が撮影できるスポットとして、観光案内されていたり、他のユーザが住所や位置データを明確に提示していたりした場合、ユーザはそのスポットを明確に認識できる。しかしながら、スポットの位置が不明である場合、スポットを探すことが困難であり、同様な写真画像を撮影できない可能性がある。また、他のユーザが投稿していない、まだ見ぬスポットを発見したいという要望がある。 If a tourist guide is provided as a spot where a "shining" photographic image can be taken, or if another user clearly presents the address or location data, the user can clearly recognize the spot. However, when the position of the spot is unknown, it is difficult to find the spot, and it may not be possible to take a similar photographic image. There is also a desire to discover spots that other users haven't posted yet that they haven't seen yet.

本発明は、斯かる事情を鑑みてなされたものであり、「映える」写真画像を撮影できるスポットの探索を支援する情報処理システム、情報処理装置、コンピュータプログラム及び情報処理方法を提供することを目的とする。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide an information processing system, an information processing device, a computer program, and an information processing method that support the search for a spot where a "shining" photographic image can be taken. And.

本開示の一態様に係る情報処理システムは、情報処理装置と、情報端末装置とを含む。情報端末装置は、上記情報処理装置とデータを送受信するように構成されている。上記情報処理装置は、位置データが対応付けられている画像データを取得する画像取得部を備える。上記情報処理装置は、上記画像取得部が取得した上記画像データに対し、ＳＮＳ上での反応の得やすさを示す評価値を算出する評価算出部を備える。上記情報処理装置は、上記画像データに対して算出した上記評価値、及び上記画像データに対応する上記位置データに基づいて、上記評価値がより高い画像を撮影できる可能性が高いスポットを示す画面情報を出力する出力部を備える。 The information processing system according to one aspect of the present disclosure includes an information processing device and an information terminal device. The information terminal device is configured to send and receive data to and from the information processing device. The information processing device includes an image acquisition unit that acquires image data to which position data is associated. The information processing device includes an evaluation calculation unit that calculates an evaluation value indicating the ease of obtaining a reaction on the SNS with respect to the image data acquired by the image acquisition unit. The information processing device is a screen showing a spot that is likely to be able to capture an image having a higher evaluation value based on the evaluation value calculated for the image data and the position data corresponding to the image data. It has an output unit that outputs information.

本開示の一態様に係る情報処理方法は、上記情報処理システムにて上記情報処理装置と情報端末装置との間で実行される情報処理方法である。上記情報処理装置は、位置データが対応付けられている画像データを取得する。上記情報処理装置は、取得した上記画像データに対し、ＳＮＳ上での反応の得やすさを示す評価値を算出する。上記情報処理装置は、上記画像データに対して算出した上記評価値、及び上記画像データに対応する上記位置データに基づいて、上記評価値がより高い画像を撮影できる可能性が高いスポットを示す画面情報を上記情報端末装置へ送信する。上記情報端末装置は、上記画面情報に基づいて各スポットを示す画面を表示する。 The information processing method according to one aspect of the present disclosure is an information processing method executed between the information processing device and the information terminal device in the information processing system. The information processing device acquires image data to which position data is associated. The information processing device calculates an evaluation value indicating the ease of obtaining a reaction on the SNS with respect to the acquired image data. The information processing device is a screen showing a spot that is likely to be able to capture an image having a higher evaluation value based on the evaluation value calculated for the image data and the position data corresponding to the image data. Information is transmitted to the above information terminal device. The information terminal device displays a screen showing each spot based on the screen information.

本開示の一態様では、情報処理装置は、位置データが対応付けられた画像データに対し、ＳＮＳ上での反応の得やすさ、若しくはその予測値を示す評価値を算出する。評価値が比較的高い画像データに対応付けられている位置データは、多くの反応を得られる画像を撮影できる可能性が高いスポットを示す。そのスポットを示す画面情報が情報処理装置で作成され、出力される。評価値が高いか否かの判断は、算出される評価値が設定される所定値以上であるか否かによって判断されるとよい。 In one aspect of the present disclosure, the information processing apparatus calculates an evaluation value indicating the ease of obtaining a reaction on the SNS or a predicted value thereof with respect to the image data associated with the position data. The position data associated with the image data having a relatively high evaluation value indicates a spot where there is a high possibility that an image with many reactions can be taken. Screen information indicating the spot is created by the information processing device and output. Judgment as to whether or not the evaluation value is high may be made based on whether or not the calculated evaluation value is equal to or higher than the set predetermined value.

情報処理装置は、上記情報端末装置が備える位置データ取得部で取得されて第２通信部によって送信される位置データが示す位置から特定の範囲内の上記スポットを示す上記画面情報を、上記出力部に相当する第１通信部によって上記情報端末装置へ送信してもよい。 The information processing device outputs the screen information indicating the spot within a specific range from the position indicated by the position data acquired by the position data acquisition unit included in the information terminal device and transmitted by the second communication unit. It may be transmitted to the information terminal device by the first communication unit corresponding to.

特定の範囲とは、予め設定されている範囲であってもよいし、情報端末装置にて指定された範囲でもよい。範囲の指定は、情報端末装置が備える表示部で表示されている地図の表示範囲として指定されてもよい。 The specific range may be a preset range or a range specified by the information terminal device. The range may be specified as the display range of the map displayed on the display unit included in the information terminal device.

情報端末装置の上記位置データ取得部で取得される位置データは、情報端末装置の位置を示す位置の位置データ即ち現在地でもよい。上記情報処理装置は、上記情報端末装置の現在地を示す位置から上記特定の範囲内で上記評価値が画像を撮影できる可能性が高いスポットを示す画面情報を、上記情報端末装置へ送信する。 The position data acquired by the position data acquisition unit of the information terminal device may be the position data of the position indicating the position of the information terminal device, that is, the current location. The information processing device transmits screen information indicating a spot where the evaluation value is likely to be able to capture an image within the specific range from the position indicating the current location of the information terminal device to the information terminal device.

本開示の一態様では、情報端末装置の位置を基準とした特定の範囲内において、評価値がより高い画像を撮影できる可能性が高いスポットを示す画面情報が作成され、情報端末装置へ送信される。つまり、情報端末装置を使用するユーザの現在地に基づいて、スポットが提示される。 In one aspect of the present disclosure, screen information indicating a spot that is likely to capture an image having a higher evaluation value within a specific range based on the position of the information terminal device is created and transmitted to the information terminal device. NS. That is, the spot is presented based on the current location of the user who uses the information terminal device.

情報端末装置から情報処理装置へ送信される位置データは、情報端末装置で受け付けられる目的地の位置データであってもよい。上記情報処理装置は、上記情報端末装置で受け付けられた目的地を示す位置から上記特定の範囲内で上記評価値が画像を撮影できる可能性が高いスポットを示す画面情報を、上記情報端末装置へ送信する。 The position data transmitted from the information terminal device to the information processing device may be the position data of the destination accepted by the information terminal device. The information processing device transfers screen information indicating a spot where the evaluation value is likely to be able to take an image within the specific range from the position indicating the destination received by the information terminal device to the information terminal device. Send.

本開示の一態様では、情報端末装置で受け付けられる位置を基準とした特定の範囲内において、評価値がより高い画像を撮影できる可能性が高いスポットを示す画面情報が作成され、情報端末装置へ送信される。つまり、情報端末装置を使用するユーザの目的地に基づいて、スポットが提示される。 In one aspect of the present disclosure, screen information indicating a spot that is likely to be able to capture an image having a higher evaluation value is created within a specific range based on a position accepted by the information terminal device, and the information terminal device is provided with screen information. Will be sent. That is, the spot is presented based on the destination of the user who uses the information terminal device.

本開示の一態様に係る情報処理システムでは、上記情報処理装置は、上記画像取得部が取得した上記画像データの画像の種類を取得する種類取得部を備え、上記出力部は、上記画像の種類別に、上記評価算出部によって算出された上記評価値が他よりも高い画像データが対応付けられている位置データに基づく上記画面情報を出力してもよい。 In the information processing system according to one aspect of the present disclosure, the information processing apparatus includes a type acquisition unit for acquiring an image type of the image data acquired by the image acquisition unit, and the output unit is a type of the image. Separately, the screen information based on the position data to which the image data whose evaluation value is higher than the others calculated by the evaluation calculation unit is associated may be output.

本開示の一態様では、画像の種類別に、評価値が高い画像を撮影できる可能性が高いスポットを示す画面情報が情報処理装置で作成され、情報端末装置へ送信される。つまり、情報端末装置を使用するユーザは、提示されたスポットを、画像の種類別に表示させることができる。 In one aspect of the present disclosure, screen information indicating spots with a high possibility of being able to capture an image having a high evaluation value is created by the information processing device for each type of image and transmitted to the information terminal device. That is, the user who uses the information terminal device can display the presented spots according to the type of image.

本開示の一態様に係る情報処理システムでは、上記評価算出部は、写真画像又は動画像のデータが入力された場合に、上記写真画像又は上記動画像に対する上記評価値を出力するように学習してある評価モデルに基づいて評価値を出力してもよい。 In the information processing system according to one aspect of the present disclosure, the evaluation calculation unit learns to output the evaluation value for the photographic image or the moving image when the data of the photographic image or the moving image is input. The evaluation value may be output based on a certain evaluation model.

本開示の一態様では、評価値が学習済みの評価モデルを用いて出力される。実績に基づいて精度よく、評価値を算出することが可能になる。 In one aspect of the disclosure, the evaluation values are output using the trained evaluation model. It is possible to calculate the evaluation value with high accuracy based on the actual results.

本開示の一態様に係る情報処理システムでは、上記画面情報は、上記評価値が高い順に、各スポットの説明を含む関連データをリスト化した画面を表示させるための情報である。 In the information processing system according to one aspect of the present disclosure, the screen information is information for displaying a screen listing related data including explanations of each spot in descending order of the evaluation value.

本開示の一態様に係るコンピュータプログラムは、コンピュータに、位置を示す位置データの指定を受け付け、指定された上記位置データ又は上記位置データが示す位置を含む特定の範囲を情報処理装置へ通信によって送信し、上記情報処理装置から、評価値がより高い画像を撮影できる可能性が高いスポットを示す画面情報を受信し、上記画面情報に基づいて、上記評価値が高い順に、各スポットの説明を含む関連データをリスト化した画面を表示させる処理を実行させる。 The computer program according to one aspect of the present disclosure accepts the designation of the position data indicating the position to the computer, and transmits the designated position data or a specific range including the position indicated by the position data to the information processing apparatus by communication. Then, screen information indicating spots with a high possibility of being able to capture an image having a higher evaluation value is received from the information processing apparatus, and based on the screen information, explanations of each spot are included in descending order of the evaluation value. Execute the process to display the screen listing the related data.

本開示の一態様では、評価値がより高い画像を撮影できる可能性が高いスポットが、評価が高い順にスポットの説明を含む関連データのリストとして表示される。より期待できる順に、リスト化されることで視認性が高い。 In one aspect of the disclosure, spots that are more likely to capture images with higher ratings are displayed as a list of related data, including description of the spots, in descending order of rating. Visibility is high by listing them in a more promising order.

本開示の一態様に係る情報処理システムでは、上記画面情報は、上記評価値のテキストを含むオブジェクトを、地図画像上の各スポットの位置に表示させるための情報である。 In the information processing system according to one aspect of the present disclosure, the screen information is information for displaying an object including the text of the evaluation value at the position of each spot on the map image.

本開示の一態様では、評価値が画像を撮影できる可能性が高いスポットが、地図画像上に配置されるオブジェクトとして表示される。現在地又は目的地からのスポットの位置が、視覚的に認識し易くなる。 In one aspect of the present disclosure, a spot whose evaluation value is likely to be able to capture an image is displayed as an object arranged on the map image. The position of the spot from the current location or the destination becomes easy to visually recognize.

本開示の情報処理システムによれば、ユーザは、ＳＮＳにて他のユーザからより多くの反応を得る可能性が高い「映える」写真画像を撮影できるスポットを把握することができる。 According to the information processing system of the present disclosure, a user can grasp a spot where a "shining" photographic image can be taken, which is likely to receive more reactions from other users on SNS.

本実施の形態の情報処理システムの概要図である。It is a schematic diagram of the information processing system of this embodiment. 情報処理装置及び情報端末装置の構成を示すブロック図である。It is a block diagram which shows the structure of an information processing apparatus and an information terminal apparatus. 情報処理装置の機能ブロック図である。It is a functional block diagram of an information processing apparatus. 評価モデルの概要図である。It is a schematic diagram of an evaluation model. 評価モデルの一例をより詳細に示す図である。It is a figure which shows an example of an evaluation model in more detail. 情報処理装置と情報端末装置との間で実行される処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the processing procedure executed between an information processing apparatus and an information terminal apparatus. 情報処理装置と情報端末装置との間で実行される処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the processing procedure executed between an information processing apparatus and an information terminal apparatus. 情報端末装置で表示される画面の例である。This is an example of a screen displayed on an information terminal device. 情報端末装置で表示される画面の他の一例である。This is another example of the screen displayed on the information terminal device. 情報端末装置で表示される画面の他の一例である。This is another example of the screen displayed on the information terminal device. 情報端末装置で表示される画面の他の一例である。This is another example of the screen displayed on the information terminal device.

本開示をその実施の形態を示す図面を参照して具体的に説明する。 The present disclosure will be specifically described with reference to the drawings showing the embodiments thereof.

図１は、本実施の形態の情報処理システム１００の概要図である。情報処理システム１００は、情報処理装置１、情報端末装置２を含む。情報処理装置１と情報端末装置２とは、ネットワークＮを介してデータの送受信が可能である。 FIG. 1 is a schematic diagram of the information processing system 100 of the present embodiment. The information processing system 100 includes an information processing device 1 and an information terminal device 2. The information processing device 1 and the information terminal device 2 can transmit and receive data via the network N.

情報処理装置１は、サーバコンピュータを用いる。情報処理装置１は、情報端末装置２からの問い合わせに応じて「映える」写真画像を撮影できるスポットの情報を提供する。情報端末装置２は、ユーザが使用する情報端末装置である。情報端末装置２は、通信により、情報処理装置１とデータを送受信可能である。 The information processing device 1 uses a server computer. The information processing device 1 provides information on a spot where a “shining” photographic image can be taken in response to an inquiry from the information terminal device 2. The information terminal device 2 is an information terminal device used by the user. The information terminal device 2 can send and receive data to and from the information processing device 1 by communication.

ユーザは、情報端末装置２を用いて、その時点のユーザの位置（現在地）、またはユーザが向かおうとしている位置（目的地）の周辺にて「映える」写真画像又は動画像を撮影できる可能性が高いスポットを示す情報を情報処理装置１から受信することができる。情報処理装置１は、ユーザによって指定された位置を含む特定の範囲内にある位置の位置データが対応付けられている画像又は動画像のデータを複数、インターネット上から収集する。情報処理装置１は、収集した複数の画像又は動画像のデータに対し、評価値を算出する。情報処理装置１は、評価値に基づいて、より多くＳＮＳ上で反応を受けられるとして評価された画像データが対応付けられた位置データの位置にあるスポットを、探索結果として情報端末装置２へ送信する。情報端末装置２は、情報処理装置１から送信された探索結果を、「映える」写真画像又は動画像を撮影できるスポットのリストとして表示する。情報端末装置２は、例えば情報処理装置１から送信された探索結果を、「映える」写真画像又は動画像を撮影できる各スポットの位置を地図画像上で表示してもよい。 The user may be able to use the information terminal device 2 to capture a "shining" photographic image or moving image around the user's current position (current location) or the position (destination) the user is heading to. Information indicating a high spot can be received from the information processing device 1. The information processing device 1 collects a plurality of image or moving image data associated with position data of positions within a specific range including a position specified by a user from the Internet. The information processing device 1 calculates an evaluation value for the collected data of a plurality of images or moving images. The information processing device 1 transmits a spot at the position of the position data associated with the image data evaluated as being able to receive more reactions on the SNS based on the evaluation value to the information terminal device 2 as a search result. do. The information terminal device 2 displays the search result transmitted from the information processing device 1 as a list of spots where a "shining" photographic image or a moving image can be taken. The information terminal device 2 may display, for example, the position of each spot on which the search result transmitted from the information processing device 1 can take a “shining” photographic image or a moving image on a map image.

これにより、ユーザは、現在地又は指定する目的地周辺で「映える」写真画像又は動画像を撮影できそうなスポットを容易に知ることが可能になる。 This allows the user to easily know the spots where a "shining" photographic image or moving image can be taken around the current location or a designated destination.

このような情報処理システム１００の構成及び詳細な処理内容について以下に説明する。 The configuration and detailed processing contents of such an information processing system 100 will be described below.

図２は、情報処理装置１及び情報端末装置２の構成を示すブロック図である。情報処理装置１は、サーバコンピュータを用いる。情報処理装置１は、第１制御部１０、第１記憶部１１、及び第１通信部１２を備える。 FIG. 2 is a block diagram showing the configurations of the information processing device 1 and the information terminal device 2. The information processing device 1 uses a server computer. The information processing device 1 includes a first control unit 10, a first storage unit 11, and a first communication unit 12.

第１制御部１０は、ＣＰＵ（Central Processing Unit ）及び／又はＧＰＵ（Graphics Processing Unit）を用いたプロセッサであり、内蔵するＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等のメモリを用い、各構成部を制御して処理を実行する。第１制御部１０は、プロセッサ、メモリ、第１記憶部１１及び第１通信部１２を集積した１つのハードウェア（ＳｏＣ：System On a Chip）として構成されていてもよい。第１制御部１０は、第１記憶部１１に記憶されている情報処理プログラム１Ｐに基づき、汎用サーバコンピュータを、「映える」写真画像を撮影できるスポットの情報を提供する特有の情報処理装置１として機能させる。 The first control unit 10 is a processor using a CPU (Central Processing Unit) and / or a GPU (Graphics Processing Unit), and uses a built-in memory such as a ROM (Read Only Memory) and a RAM (Random Access Memory). Control each component to execute processing. The first control unit 10 may be configured as one piece of hardware (SoC: System On a Chip) in which a processor, a memory, a first storage unit 11, and a first communication unit 12 are integrated. Based on the information processing program 1P stored in the first storage unit 11, the first control unit 10 uses a general-purpose server computer as a unique information processing device 1 that provides information on spots capable of taking "shining" photographic images. Make it work.

第１記憶部１１は、不揮発性記憶媒体を用いることができる。不揮発性記憶媒体は、例えば、ハードディスク、若しくはＳＳＤ（Solid State Drive ）が挙げられる。第１記憶部１１は、情報処理プログラム１Ｐを含む第１制御部１０が参照するプログラム及びデータを記憶する。 The first storage unit 11 can use a non-volatile storage medium. Examples of the non-volatile storage medium include a hard disk or an SSD (Solid State Drive). The first storage unit 11 stores programs and data referred to by the first control unit 10 including the information processing program 1P.

第１記憶部１１には、評価モデル１Ｍの定義データ及び学習済みのパラメータが記憶される。また、第１記憶部１１には、地図情報が記憶されていてもよい。 The definition data of the evaluation model 1M and the learned parameters are stored in the first storage unit 11. Further, the map information may be stored in the first storage unit 11.

第１通信部１２は、公衆通信網Ｎ１又はキャリアネットワークＮ２を含むネットワークＮを介した情報端末装置２との通信を実現する通信モジュールである。第１通信部１２は例えば、ネットワークカード、Ｗｉ−Ｆｉ（登録商標）に対応する無線通信デバイス、又は、キャリア通信用モジュールを用いる。第１通信部１２は、出力部として機能する。出力部は、評価値が高い画像を撮影できるスポットを示す画面情報を、情報端末装置２へ送信することができるように構成されている。 The first communication unit 12 is a communication module that realizes communication with the information terminal device 2 via the network N including the public communication network N1 or the carrier network N2. The first communication unit 12 uses, for example, a network card, a wireless communication device compatible with Wi-Fi (registered trademark), or a carrier communication module. The first communication unit 12 functions as an output unit. The output unit is configured to be able to transmit screen information indicating a spot on which an image having a high evaluation value can be taken to the information terminal device 2.

情報端末装置２は、汎用の情報処理端末を用いることができる。情報処理端末は、例えば、スマートフォン、タブレット端末が挙げられる。情報処理端末は、パーソナルコンピュータであってもよいが、無線通信による通信デバイスを備えて可搬型であるとよい。情報端末装置２は、例えば、第２制御部２０、第２記憶部２１、表示部２２、操作部２３、撮像部２４、第２通信部２５、位置データ取得部２６、及び音声入出力部２７を備える。 As the information terminal device 2, a general-purpose information processing terminal can be used. Examples of the information processing terminal include a smartphone and a tablet terminal. The information processing terminal may be a personal computer, but may be portable with a communication device by wireless communication. The information terminal device 2 includes, for example, a second control unit 20, a second storage unit 21, a display unit 22, an operation unit 23, an imaging unit 24, a second communication unit 25, a position data acquisition unit 26, and an audio input / output unit 27. To be equipped.

第２制御部２０は、ＣＰＵ及び／又はＧＰＵを用いたプロセッサである。第２制御部２０は、内蔵するＲＯＭ及びＲＡＭ等のメモリを用い、各構成部を制御して処理を実行する。第２制御部２０は、プロセッサ、メモリ、第２記憶部２１、位置データ取得部２６、第２通信部２５を集積した１つのハードウェア（ＳｏＣ）として構成されていてもよい。第２制御部２０は、第２記憶部２１に記憶されている情報端末プログラム２Ｐに基づいて処理を実行する。 The second control unit 20 is a processor using a CPU and / or GPU. The second control unit 20 uses the built-in memory such as ROM and RAM to control each component unit to execute processing. The second control unit 20 may be configured as one piece of hardware (SoC) in which a processor, a memory, a second storage unit 21, a position data acquisition unit 26, and a second communication unit 25 are integrated. The second control unit 20 executes processing based on the information terminal program 2P stored in the second storage unit 21.

第２記憶部２１は、不揮発性記憶媒体を用いることができる。不揮発性記憶媒体は、例えば、ＳＳＤ、若しくは、フラッシュメモリが挙げられる。第２記憶部２１は、情報端末プログラム２Ｐを含む第２制御部２０が参照するプログラム及びデータを記憶する。第２記憶部２１には、ユーザが使用するＳＮＳアプリケーションプログラム及びアカウント情報が記憶されていることが好ましい。 The second storage unit 21 can use a non-volatile storage medium. Examples of the non-volatile storage medium include SSD and flash memory. The second storage unit 21 stores programs and data referred to by the second control unit 20 including the information terminal program 2P. It is preferable that the second storage unit 21 stores the SNS application program and account information used by the user.

表示部２２は、ディスプレイ装置である。ディスプレイ装置は、例えば、液晶パネル若しくは有機ＥＬディスプレイが挙げられる。操作部２３は、入力操作を受け付ける入出力装置である。入出力装置は、例えば、キーボード、ポインティングデバイス、ディスプレイ内蔵のタッチパネルデバイス、スピーカ及びマイクロフォンが挙げられる。操作部２３は、マイクロフォンにて入力音声から操作内容を認識し、スピーカで出力する音声との対話形式で操作を受け付けてもよい。操作部２３は、マイクロフォンにて入力音声から操作内容を認識し、スピーカで出力する音声との対話形式で操作を受け付ける場合、音声入出力部２７で構成されてもよい。操作部２３は、ユーザからの目的地の入力を受け付ける。操作部２３は、ユーザから範囲の指定を受け付ける。操作部２３は、ユーザから画像の種類の選択を受け付ける。 The display unit 22 is a display device. Examples of the display device include a liquid crystal panel and an organic EL display. The operation unit 23 is an input / output device that accepts input operations. Examples of the input / output device include a keyboard, a pointing device, a touch panel device with a built-in display, a speaker, and a microphone. The operation unit 23 may recognize the operation content from the input voice by the microphone and accept the operation in an interactive manner with the voice output by the speaker. The operation unit 23 may be configured by the voice input / output unit 27 when the operation content is recognized from the input voice by the microphone and the operation is received in an interactive manner with the voice output by the speaker. The operation unit 23 receives an input of a destination from the user. The operation unit 23 receives a range designation from the user. The operation unit 23 accepts the selection of the image type from the user.

撮像部２４は、被写体を撮像できるように構成されている。撮像部は、撮像素子を含む。撮像素子は、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサ、又はＣＭＯＳ（Complementary MOS ）イメージセンサが挙げられる。撮像部２４は、半導体素子で構成される画像処理エンジンを内蔵し、撮像素子を用いて取得されたデータを画像処理して画像データ又は動画像データを出力する。撮像部２４が出力する画像データ又は動画像データには、撮像データ、撮像データを加工した加工後データ、撮像データに関連するメタデータを含むように広義に解される。 The imaging unit 24 is configured to be able to image a subject. The image pickup unit includes an image pickup element. Examples of the image pickup device include a CCD (Charge Coupled Device) image sensor and a CMOS (Complementary MOS) image sensor. The image pickup unit 24 has a built-in image processing engine composed of semiconductor elements, performs image processing on the data acquired by using the image pickup element, and outputs image data or moving image data. The image data or moving image data output by the imaging unit 24 is broadly understood to include imaging data, processed data obtained by processing the imaging data, and metadata related to the imaging data.

位置データ取得部２６は、例えば、ＧＰＳ受信装置を用いることができる。位置データ取得部２６は、ＧＰＳ受信装置だけに限られない。位置データ取得部２６は、例えば、携帯電話機の基地局からの情報を利用して、情報端末装置２の位置を導出してもよい。ＧＰＳ受信装置は、ＧＰＳ（Global Positioning System ）衛星から受信する信号に基づいて情報端末装置２の位置を導出する。第２制御部２０は、位置データ取得部２６により情報端末装置２の位置を特定することができる。 The position data acquisition unit 26 can use, for example, a GPS receiving device. The position data acquisition unit 26 is not limited to the GPS receiving device. The position data acquisition unit 26 may derive the position of the information terminal device 2 by using, for example, the information from the base station of the mobile phone. The GPS receiving device derives the position of the information terminal device 2 based on the signal received from the GPS (Global Positioning System) satellite. The second control unit 20 can specify the position of the information terminal device 2 by the position data acquisition unit 26.

第２通信部２５は、ネットワークＮを介した通信を実現する通信デバイスである。第２通信部２５は、例えば、ネットワークカード、Ｗｉ−Ｆｉ（登録商標）に対応する無線通信デバイス、又は、キャリア通信用モジュールを用いる。第２通信部２５は、取得した位置データを送信する送信部として機能する。 The second communication unit 25 is a communication device that realizes communication via the network N. The second communication unit 25 uses, for example, a network card, a wireless communication device compatible with Wi-Fi (registered trademark), or a carrier communication module. The second communication unit 25 functions as a transmission unit that transmits the acquired position data.

図３は、情報処理装置１の機能ブロック図である。情報処理装置１の第１制御部１０は、情報処理プログラム１Ｐに基づいて、画像取得部１３８、種類取得部１３１、件数取得部１３２、予測部１３３、評価値算出部１３５、経路探索部１３６及び出力部１３７として機能するように構成されている。第１制御部１０は、件数推定部１３４が機能するように構成されてもよい。 FIG. 3 is a functional block diagram of the information processing device 1. Based on the information processing program 1P, the first control unit 10 of the information processing device 1 includes an image acquisition unit 138, a type acquisition unit 131, a number acquisition unit 132, a prediction unit 133, an evaluation value calculation unit 135, a route search unit 136, and a route search unit 136. It is configured to function as an output unit 137. The first control unit 10 may be configured such that the number estimation unit 134 functions.

画像取得部１３８は、指定される位置を含む特定の範囲内に含まれる位置の位置データが対応付けられている画像データを、第１通信部１２を介して公衆通信網Ｎ１から取得する。 The image acquisition unit 138 acquires the image data associated with the position data of the position included in the specific range including the designated position from the public communication network N1 via the first communication unit 12.

種類取得部１３１は、画像の種類を取得する。画像の種類は、例えば、「食べ物」、「景色」、「動物」に分類されていてもよい。種類取得部１３１は、後述するように識別モデルを用いて画像に写っている被写体の種類を識別した結果を取得する。画像の種類は、例えば、「食べ物」、「景色」、「動物」に限られず、「人物」、「車」、「自転車」、「建物」であってもよい。画像の種類は、より細かく分類されてもよい。細かく分類された種類は、例えば、「人物」であれば、「男性」、「女性」、「大人」、「子ども」のように分類されてもよい。細かく分類された種類は、例えば、「食べ物」であれば、「ドリンク」、「ケーキ」のように分類されてもよい。後述する識別モデル１３Ｍは、画像データが入力された場合に、予め設定されている種類の識別情報と、その種類である確度を示すスコアとを出力するように学習される。 The type acquisition unit 131 acquires the type of the image. The types of images may be classified into, for example, "food", "landscape", and "animal". The type acquisition unit 131 acquires the result of identifying the type of the subject in the image by using the identification model as described later. The type of the image is not limited to, for example, "food", "scenery", and "animal", and may be "person", "car", "bicycle", and "building". The types of images may be more subdivided. The finely classified types may be classified into, for example, "person", "male", "female", "adult", and "child". The finely classified types may be classified into, for example, "food", "drink", and "cake". The discriminative model 13M, which will be described later, is learned to output a preset type of discriminative information and a score indicating the accuracy of the type when image data is input.

件数取得部１３２は、情報端末装置２からユーザが使用するＳＮＳアプリにおけるユーザが投稿した画像又は動画像に対する反応件数、及び特定反応件数を含む件数データを取得する。反応件数は、ユーザが複数のコンテンツをＳＮＳへ投稿した場合に、他のユーザによる反応がより多かったコンテンツに対する反応件数である。反応件数は、例えば、「いいね」の数である。特定反応件数は、ＳＮＳに投稿された画像の種類毎に、他のユーザが反応した件数である。予測部１３３は、画像の種類及び件数データに基づいて、画像の評価値を予測する。 The number acquisition unit 132 acquires the number of reactions to the image or moving image posted by the user in the SNS application used by the user from the information terminal device 2, and the number data including the specific number of reactions. The number of responses is the number of responses to the content that was more responded by other users when the user posted a plurality of contents to the SNS. The number of reactions is, for example, the number of “likes”. The specific number of reactions is the number of reactions by other users for each type of image posted on the SNS. The prediction unit 133 predicts the evaluation value of the image based on the image type and the number of cases data.

件数推定部１３４は、ポテンシャル件数をユーザのＳＮＳアプリケーションにおけるフォロワー数に応じて推定する。ポテンシャル件数は、ユーザがＳＮＳに投稿するコンテンツに対して、他のユーザが反応する可能性を示す。予測部１３３は、画像に対して評価値算出部１３５によって算出された評価値とポテンシャル件数とに加え、ユーザのフォロワー数とから、投稿される画像に対する反応を予測した予測件数を取得することができる。 The number estimation unit 134 estimates the number of potential cases according to the number of followers in the user's SNS application. The number of potentials indicates the possibility that another user will react to the content that the user posts on the SNS. The prediction unit 133 can acquire the predicted number of predictions of the reaction to the posted image from the number of followers of the user in addition to the evaluation value and the number of potentials calculated by the evaluation value calculation unit 135 for the image. can.

評価値算出部１３５は、入力された画像に対する評価値を出力する。評価値算出部１３５は、指定された画像データを入力した場合に、ユーザ毎に、該ユーザが入力画像データを投稿した場合の、他のユーザからの反応の予測件数に対応する評価値を出力するように学習されている評価モデル１Ｍとしての機能を含む。 The evaluation value calculation unit 135 outputs an evaluation value for the input image. When the specified image data is input, the evaluation value calculation unit 135 outputs an evaluation value corresponding to the predicted number of reactions from other users when the user posts the input image data for each user. It includes a function as an evaluation model 1M that is trained to do so.

経路探索部１３６は、指定された位置から特定の位置への経路を、第１記憶部１１に記憶してある地図情報を用いて探索し、経路情報を出力する。 The route search unit 136 searches for a route from a designated position to a specific position using the map information stored in the first storage unit 11, and outputs the route information.

出力部１３７は、入力された画像に対して評価値算出部１３５によって算出した評価値、及び画像に対応する位置データに基づいて、評価値がより高い画像を撮影できる可能性が高いスポットを示す画面情報を作成して出力する。出力部１３７は、第１通信部１２によって作成した画面情報を情報端末装置２へ送信する。 The output unit 137 indicates a spot with a high possibility of being able to shoot an image having a higher evaluation value based on the evaluation value calculated by the evaluation value calculation unit 135 with respect to the input image and the position data corresponding to the image. Create and output screen information. The output unit 137 transmits the screen information created by the first communication unit 12 to the information terminal device 2.

ここで、評価モデル１Ｍについて詳細を説明する。図４は、評価モデル１Ｍの概要図である。評価モデル１Ｍは、ニューラルネットワークを用いた深層学習によって、生成され、学習される。評価モデル１Ｍは、学習用の画像データとして、ＳＮＳに投稿された画像の画像データを入力する。評価モデル１Ｍは、入力画像データに対応する画像の種類を共に入力するとよい。評価モデル１Ｍは、学習用の画像データ夫々に対する実際の反応件数を教師データとして、画像データが入力された場合に反応件数に対応する評価値を出力するように学習される。学習が進行すると、学習済みのモデルパラメータθが得られ、第１記憶部１１に記憶される。 Here, the evaluation model 1M will be described in detail. FIG. 4 is a schematic view of the evaluation model 1M. The evaluation model 1M is generated and trained by deep learning using a neural network. The evaluation model 1M inputs the image data of the image posted on the SNS as the image data for learning. The evaluation model 1M may input the type of image corresponding to the input image data together. The evaluation model 1M is trained to output an evaluation value corresponding to the number of reactions when the image data is input, using the actual number of reactions to each of the image data for learning as teacher data. As the learning progresses, the trained model parameter θ is obtained and stored in the first storage unit 11.

評価モデル１Ｍは、学習済みのモデルパラメータθを、定義されたニューラルネットワークに適用することによって、画像データ及び画像の種類が入力された場合に、ＳＮＳにおける反応の得やすさに対応する評価値を出力することが可能である。 The evaluation model 1M applies the trained model parameter θ to the defined neural network to obtain an evaluation value corresponding to the ease of obtaining a reaction in the SNS when image data and an image type are input. It is possible to output.

図５は、評価モデル１Ｍの一例をより詳細に示す図である。評価モデル１Ｍは、種類取得部１３１の機能の一部に対応する識別モデル１３Ｍを含む。識別モデル１３Ｍは、画像データを入力する入力層と、画像データに対して複数段の所定のノード数の畳み込み層を含む中間層とを含んで構成されている。識別モデル１３Ｍの中間層は、プーリング層、全結合層等を含んでもよい。識別モデル１３Ｍの中間層は、複数段階の畳み込み層から出力される特徴をノードに対応させたネットワークを含む。識別モデル１３Ｍは、設定されている画像の種類に各々対応するチャネルを含む出力層を有し、出力層は、各画像の種類に対する確度をスコアとして出力する。種類取得部１３１は、スコアが最も高い画像の種類によって、入力した画像データの被写体の種類を取得することができる。 FIG. 5 is a diagram showing an example of the evaluation model 1M in more detail. The evaluation model 1M includes an identification model 13M corresponding to a part of the functions of the type acquisition unit 131. The discriminative model 13M is configured to include an input layer for inputting image data and an intermediate layer including a convolution layer having a predetermined number of nodes in a plurality of stages with respect to the image data. The intermediate layer of the discriminative model 13M may include a pooling layer, a fully connected layer, and the like. The middle layer of the discriminative model 13M includes a network in which the features output from the multi-stage convolution layer correspond to the nodes. The discriminative model 13M has an output layer including channels corresponding to each set image type, and the output layer outputs the accuracy for each image type as a score. The type acquisition unit 131 can acquire the type of the subject of the input image data according to the type of the image having the highest score.

識別モデル１３Ｍは、例えば、ＳＮＳに投稿された画像の画像データに対して、予め判別された被写体の種類のラベルを付与した学習用の画像データを用いて学習する。識別モデル１３Ｍは、画像データが入力された場合に識別モデル１３Ｍから出力される値と、画像に対する実際の反応件数との差分が小さくなるように、中間層におけるパラメータ及び重み等を学習する。差分の大きさ、学習回数が所定基準を満たすことによって学習が完了すると、モデルパラメータθに含まれる識別モデル１３Ｍ用のパラメータが得られ、第１記憶部１１に記憶される。なお識別モデル１３Ｍは、既存の信頼性が高い識別モデルを用いてもよい。 The discriminative model 13M learns, for example, by using the image data for learning in which the image data of the image posted on the SNS is labeled with the type of the subject determined in advance. The discriminative model 13M learns parameters, weights, and the like in the intermediate layer so that the difference between the value output from the discriminative model 13M when the image data is input and the actual number of reactions to the image becomes small. When the learning is completed when the magnitude of the difference and the number of learnings satisfy the predetermined criteria, the parameters for the discriminative model 13M included in the model parameter θ are obtained and stored in the first storage unit 11. As the discriminative model 13M, an existing highly reliable discriminative model may be used.

評価モデル１Ｍは、学習済の識別モデル１３Ｍから出力される画像種類の識別結果と、入力された画像データとを入力する。評価モデル１Ｍは、画像データとして、識別モデル１３Ｍの中間層から得られる画像の特徴量を入力するように設計されていてもよい。 The evaluation model 1M inputs the identification result of the image type output from the trained identification model 13M and the input image data. The evaluation model 1M may be designed to input the feature amount of the image obtained from the intermediate layer of the discriminative model 13M as the image data.

評価モデル１Ｍの中間層は、所定の階層数及びノード数を含むニューラルネットワークとして定義される。情報処理装置１では、評価モデル１Ｍに、教師データとしてＳＮＳに投稿された画像の画像データ、又は画像の特徴量を入力し、出力される評価値が、教師データにおける反応件数に対応する評価値と合致する、即ち誤差が微小となるように、中間層におけるパラメータ及び重み等を学習する処理を実行する。 The intermediate layer of the evaluation model 1M is defined as a neural network including a predetermined number of layers and a predetermined number of nodes. In the information processing device 1, the image data of the image posted to the SNS as the teacher data or the feature amount of the image is input to the evaluation model 1M, and the output evaluation value is an evaluation value corresponding to the number of reactions in the teacher data. The process of learning the parameters, weights, etc. in the intermediate layer is executed so as to match with, that is, the error becomes small.

なお教師データにおける反応件数は、ＳＮＳのアカウント毎に、最も反応件数が高かった画像データにおける反応件数、又は平均値に対する投稿された画像データ毎の反応件数の割合（百分率）として基底化されているとよい。 The number of responses in the teacher data is based on the number of responses in the image data with the highest number of responses for each SNS account, or the ratio (percentage) of the number of responses in each posted image data to the average value. It is good.

評価モデル１Ｍは図５に示すように、更に、ユーザのフォロワー数や、フォロワーの特徴を入力してもよい。フォロワーの特徴は、例えば、「食べ物」に反応し易いのか、「景色」に反応し易いのか、「動物」に反応し易いのかの分類である。評価値算出部１３５は、ユーザのフォロワーの特徴を加味した評価値を出力する評価モデル１Ｍを用い、反応の予測値として評価値を算出することができる。 As shown in FIG. 5, the evaluation model 1M may further input the number of followers of the user and the characteristics of the followers. The characteristics of followers are, for example, the classification of whether they are responsive to "food", "scenery", or "animals". The evaluation value calculation unit 135 can calculate the evaluation value as the predicted value of the reaction by using the evaluation model 1M that outputs the evaluation value in consideration of the characteristics of the user's followers.

なお、評価モデル１Ｍの構成はこれに限られない。評価モデル１Ｍは、図５に示した例に限られず、入力された画像データに対し、その画像データを投稿した場合に反応の多さに対応する評価値を出力するように学習されてもよい。評価モデル１Ｍは、評価値と共に、識別結果を出力するように学習されていてもよい。評価モデル１Ｍは、他のアルゴリズムによって学習されたモデルであってもよい。評価モデル１Ｍは、上述したように、ニューラルネットワークを用いた深層学習に限られず、特定の数式によって評価値を導出するものであってもよい。 The configuration of the evaluation model 1M is not limited to this. The evaluation model 1M is not limited to the example shown in FIG. 5, and may be learned to output an evaluation value corresponding to the number of reactions when the image data is posted with respect to the input image data. .. The evaluation model 1M may be trained to output the identification result together with the evaluation value. The evaluation model 1M may be a model trained by another algorithm. As described above, the evaluation model 1M is not limited to deep learning using a neural network, and may derive an evaluation value by a specific mathematical formula.

図４及び図５の例では、評価モデル１Ｍは、画像の種類を識別する識別モデル１３Ｍを内包して、評価値を出力するとした。しかしながらこれに限らず、評価モデル１Ｍは、識別モデル１３Ｍを内包せず、画像の種類別に、入力画像データに対して評価値を出力するように学習されてある複数に分別されたモデルであってもよい。 In the examples of FIGS. 4 and 5, the evaluation model 1M includes the identification model 13M for identifying the type of image, and outputs the evaluation value. However, not limited to this, the evaluation model 1M is a model that does not include the discriminative model 13M and is divided into a plurality of models that have been trained to output evaluation values for input image data for each type of image. May be good.

評価モデル１Ｍを用いて評価値算出部１３５は、入力された画像データについて、ユーザがＳＮＳに投稿した場合の評価値を、評価モデル１Ｍから取得することができる。 Using the evaluation model 1M, the evaluation value calculation unit 135 can acquire the evaluation value when the user posts the input image data to the SNS from the evaluation model 1M.

図６及び図７は、情報処理装置１と情報端末装置２との間で実行される処理手順の一例を示すフローチャートである。情報端末装置２の第２制御部２０は、ユーザの操作によって、位置データの指定を受け付ける（ステップＳ２０１）。 6 and 7 are flowcharts showing an example of a processing procedure executed between the information processing device 1 and the information terminal device 2. The second control unit 20 of the information terminal device 2 accepts the designation of the position data by the operation of the user (step S201).

ステップＳ２０１において第２制御部２０は、「現在地」又は「目的地」の選択、及び、選択された目的地の入力操作を操作部２３によって受け付ける。「現在地」が選択された場合、第２制御部２０は、選択された時点で位置データ取得部２６によって取得できる経緯度データで位置データの指定を受け付ける。「目的地」が選択された場合、第２制御部２０は、操作部２３を介して入力されたテキストによって施設、店舗、観光地等の目的地候補を検索する。第２制御部２０は、検索によって抽出された目的地候補の選択を受け付ける。第２制御部２０は、選択された目的地候補の位置データを経緯度データとして取得する。第２制御部２０は取得した位置データを指定された位置データとして受け付ける。 In step S201, the second control unit 20 receives the selection of the "current location" or the "destination" and the input operation of the selected destination by the operation unit 23. When the "current location" is selected, the second control unit 20 accepts the designation of the position data with the latitude and longitude data that can be acquired by the position data acquisition unit 26 at the time of selection. When the "destination" is selected, the second control unit 20 searches for a destination candidate such as a facility, a store, or a tourist spot by the text input via the operation unit 23. The second control unit 20 accepts the selection of the destination candidate extracted by the search. The second control unit 20 acquires the position data of the selected destination candidate as latitude and longitude data. The second control unit 20 receives the acquired position data as the designated position data.

第２制御部２０は、指定された位置データに対してスポットを探す範囲の指定を受け付ける（ステップＳ２０２）。範囲の指定は、地図の縮尺度に応じてあらかじめ設定されている特定の距離内としてもよいし、地図上で範囲の指定を受けてもよいし、表示部２２に表示中の地図画像の範囲であってもよい。第２制御部２０は、「指定位置からｘｘｘｍ以内」と距離の指定を受け付けてもよい。 The second control unit 20 accepts designation of a range for searching for a spot with respect to the designated position data (step S202). The range may be specified within a specific distance preset according to the scale of the map, the range may be specified on the map, or the range of the map image displayed on the display unit 22. It may be. The second control unit 20 may accept the designation of the distance as "within xxxm from the designated position".

情報端末装置２の第２制御部２０は、指定された位置データ、及び指定範囲のデータを含むスポット問い合わせを情報処理装置１へ送信する（ステップＳ２０３）。 The second control unit 20 of the information terminal device 2 transmits a spot inquiry including the designated position data and the data in the designated range to the information processing device 1 (step S203).

情報処理装置１ではスポット問い合わせを受信すると（ステップＳ１０１）、スポット問い合わせに含まれる指定された位置データを取得する（ステップＳ１０２）。第１制御部１０は、ステップＳ１０２で取得した位置データが示す位置から指定範囲内の位置を各々対応付けられている画像データを収集する（ステップＳ１０３）。 When the information processing device 1 receives the spot inquiry (step S101), it acquires the designated position data included in the spot inquiry (step S102). The first control unit 10 collects image data associated with each position within the designated range from the position indicated by the position data acquired in step S102 (step S103).

ステップＳ１０３における画像データの収集は、インターネット上に開示されている画像データを対象とする。なお、ステップＳ１０３において第１制御部１０は、例えば、飲食店の評価サイト、紹介サイト、又は、宣伝サイト上で飲食店が投稿した画像データを、その飲食店の経緯度データと対応付けられている画像データとして収集する。飲食店のサイトからは、その飲食店の経緯度データを取得できるように構成されている。ステップＳ１０３において第１制御部１０は、例えば、飲食店の評価サイト上に口コミと共に投稿されている画像データを、その飲食店の住所と対応付けられている画像データとして収集してもよい。飲食店の住所は、位置データとなる経緯度データと対応付けられていればよい。第１制御部１０は、「景色」のよい観光スポットの評価サイト、観光スポットを案内する旅行サイト上の画像データを、観光スポットの住所と対応付けられている画像データとして収集してもよい。第１制御部１０は、人気の「史跡」の評価サイトの画像データを、「史跡」の住所と対応付けられている画像データとして収集してもよい。また第１制御部１０は、評判の「子連れお出かけ」スポットの評価サイトの画像データを、公園又は施設等のスポットの住所と対応付けられている画像データとして収集してもよい。このとき、評価サイトの評価対象のスポットの種類別に収集してもよい。 The collection of image data in step S103 targets the image data disclosed on the Internet. In step S103, the first control unit 10 associates the image data posted by the restaurant on the evaluation site, the introduction site, or the promotion site of the restaurant with the latitude and longitude data of the restaurant, for example. Collect as image data. From the restaurant site, it is configured so that the latitude and longitude data of the restaurant can be obtained. In step S103, the first control unit 10 may collect, for example, image data posted together with word-of-mouth on the evaluation site of the restaurant as image data associated with the address of the restaurant. The address of the restaurant may be associated with the latitude and longitude data which is the location data. The first control unit 10 may collect image data on a tourist spot evaluation site with a good “scenery” and a travel site that guides the tourist spot as image data associated with the address of the tourist spot. The first control unit 10 may collect image data of a popular "historic site" evaluation site as image data associated with the address of the "historic site". Further, the first control unit 10 may collect the image data of the evaluation site of the popular "going out with children" spot as the image data associated with the address of the spot such as a park or a facility. At this time, it may be collected according to the type of the spot to be evaluated on the evaluation site.

情報処理装置１の第１制御部１０は、収集した画像データに対し夫々、評価値算出部１３５によって評価値を算出する処理を実行する（ステップＳ１０４）。第１制御部１０は、各画像データに対応する評価値及びその画像データに対応付けられている位置データに基づいて、評価値が高い画像を撮影できる可能性が高いスポットの画面情報を作成し（ステップＳ１０５）、情報端末装置２へ第１通信部１２によって送信する（ステップＳ１０６）。 The first control unit 10 of the information processing device 1 executes a process of calculating an evaluation value by the evaluation value calculation unit 135 for each of the collected image data (step S104). The first control unit 10 creates screen information of a spot having a high possibility of being able to shoot an image having a high evaluation value based on the evaluation value corresponding to each image data and the position data associated with the image data. (Step S105), the first communication unit 12 transmits the data to the information terminal device 2 (step S106).

ステップＳ１０５において第１制御部１０は、一箇所の位置データに対応付けて収集された画像データに対し評価値算出部１３５によって算出した評価値に、平均、中央、最頻等の統計処理を施し、統計処理後の評価値を位置データに対し付与する。第１制御部１０は、評価値と、位置データに対応するスポットの関連情報とが対応付けて視認できるような画面情報を作成する。 In step S105, the first control unit 10 performs statistical processing such as average, center, and mode on the evaluation value calculated by the evaluation value calculation unit 135 with respect to the image data collected in association with the position data at one location. , The evaluation value after statistical processing is given to the position data. The first control unit 10 creates screen information so that the evaluation value and the related information of the spot corresponding to the position data can be visually recognized in association with each other.

情報端末装置２では、画面情報を受信すると（ステップＳ２０４）、第２制御部２０は、画面情報に基づいて表示部２２に探索結果画面を表示する（ステップＳ２０５）。情報処理装置１が、飲食店のサイト上での画像データを評価した評価値のみを用いた場合、情報端末装置２は、飲食店のリストの画面情報を、表示部２２に探索結果画面として表示することができる。情報処理装置１は、飲食店の評価サイト、観光スポットの評価サイト、「史跡」の評価サイト、「子連れお出かけ」スポットの評価サイトから評価対象のスポットの種類別に画像データを収集することもできる。この場合、第１制御部１０は、評価値と、位置データに対応するスポット夫々の関連情報とが対応付けられて視認できるような画面情報を作成することもできる。情報端末装置２では、飲食店、観光スポット、「史跡」、及び「子連れおでかけ」といった画像の種別毎に、リストの画面情報を表示部２２に探索結果画面として表示することもできる。 When the information terminal device 2 receives the screen information (step S204), the second control unit 20 displays the search result screen on the display unit 22 based on the screen information (step S205). When the information processing device 1 uses only the evaluation value obtained by evaluating the image data on the restaurant site, the information terminal device 2 displays the screen information of the restaurant list on the display unit 22 as a search result screen. can do. The information processing device 1 can also collect image data for each type of spot to be evaluated from the evaluation site of restaurants, the evaluation site of tourist spots, the evaluation site of "historic sites", and the evaluation site of "going out with children" spots. In this case, the first control unit 10 can also create screen information that can be visually recognized by associating the evaluation value with the related information of each spot corresponding to the position data. In the information terminal device 2, the screen information of the list can be displayed on the display unit 22 as a search result screen for each type of image such as restaurants, tourist spots, "historic sites", and "going out with children".

第２制御部２０は、表示されているリスト画面に対し、画像の種類の指定を受け付ける（ステップＳ２０６）。第２制御部２０は、指定された画像の種類を情報処理装置１へ送信する（ステップＳ２０７）。 The second control unit 20 accepts the designation of the image type for the displayed list screen (step S206). The second control unit 20 transmits the designated image type to the information processing device 1 (step S207).

情報処理装置１では、画像の種類の指定を受信すると（ステップＳ１０７）、第１制御部１０は、指定された種類の画像を、ステップＳ１０３にて収集した画像データから抽出し（ステップＳ１０８）、抽出された画像データに対する評価値を再算出する処理を実行する（ステップＳ１０９）。 When the information processing apparatus 1 receives the designation of the image type (step S107), the first control unit 10 extracts the image of the designated type from the image data collected in step S103 (step S108). A process of recalculating the evaluation value for the extracted image data is executed (step S109).

第１制御部１０は、再算出処理後の評価値、及びその画像データに対応付けられている位置データに基づいて、画面情報を再作成し（ステップＳ１１０）、情報端末装置２へ送信する（ステップＳ１１１）。 The first control unit 10 recreates the screen information based on the evaluation value after the recalculation processing and the position data associated with the image data (step S110), and transmits the screen information to the information terminal device 2 (step S110). Step S111).

情報端末装置２では、画面情報を受信すると（ステップＳ２０８）、第２制御部２０は、画面情報に基づいて表示部２２に探索結果画面を表示し（ステップＳ２０９）、処理を終了する。 When the information terminal device 2 receives the screen information (step S208), the second control unit 20 displays the search result screen on the display unit 22 based on the screen information (step S209), and ends the process.

なおステップＳ１０８〜Ｓ１１１の処理は、ステップＳ１０４の前に予め実行し、種類毎に分別された画面情報を作成して送信してもよい（図９Ａ，図９Ｂ参照）。 The processes of steps S108 to S111 may be executed in advance before step S104 to create and transmit screen information sorted for each type (see FIGS. 9A and 9B).

情報端末装置２で表示される画面例に基づいて説明する。図８は、情報端末装置２で表示される画面の一例である。表示部２２には、画面情報に基づくアプリ画面２２０が表示されている。アプリ画面２２０には、評価値が高い画像を撮影できる可能性が高いスポットの名前、住所、距離、そのスポットで撮影された画像等の関連データを含む表示画面２２１が、評価値の高い順にリストとして含まれている。表示画面２２１は夫々、操作部２３によって選択することができ、選択された場合には、そのスポットのより詳細な情報がアプリ画面２２０に表示されるとよい。 The description will be given based on a screen example displayed on the information terminal device 2. FIG. 8 is an example of a screen displayed on the information terminal device 2. The application screen 220 based on the screen information is displayed on the display unit 22. On the application screen 220, a display screen 221 including related data such as a spot name, an address, a distance, and an image taken at the spot, which is likely to be able to take an image having a high evaluation value, is listed in descending order of the evaluation value. Included as. Each of the display screens 221 can be selected by the operation unit 23, and when selected, more detailed information on the spot may be displayed on the application screen 220.

図９は、情報端末装置２で表示される画面の他の一例である。図９の例では、予め画像の種類別に画面情報が作成されている。図９の例では、画像の種類は「食べ物」／「景色」／「動物」に分けられている。図９の例で情報処理装置１の第１制御部１０は、図６及び図７のフローチャートに示した処理手順の内、ステップＳ１０４において、収集された画像データを識別モデル１３Ｍに入力して画像の種類を種類取得部１３１として取得する。第１制御部１０は、ステップＳ１０４で算出された画像データ毎の評価値を、画像の種類で分類し、分類毎に、評価が高い画像を撮影できる可能性が高いスポットのリストを作成する。 FIG. 9 is another example of the screen displayed on the information terminal device 2. In the example of FIG. 9, screen information is created in advance for each type of image. In the example of FIG. 9, the types of images are divided into "food" / "scenery" / "animals". In the example of FIG. 9, the first control unit 10 of the information processing apparatus 1 inputs the collected image data into the identification model 13M in step S104 among the processing procedures shown in the flowcharts of FIGS. 6 and 7 to obtain an image. Is acquired as the type acquisition unit 131. The first control unit 10 classifies the evaluation value for each image data calculated in step S104 by the type of the image, and creates a list of spots with a high possibility of being able to shoot an image with a high evaluation for each classification.

図９Ａでアプリ画面２２０は、情報端末装置２にて「食べ物」が選択された場合に表示されるリストを含み、図９Ｂでアプリ画面２２０は、情報端末装置２にて「景色」が選択された場合に表示されるリストを含む。このようにして、ユーザは、提示されたスポットを、画像の種類別に認識することができる。 In FIG. 9A, the application screen 220 includes a list displayed when "food" is selected in the information terminal device 2, and in FIG. 9B, the application screen 220 includes "scenery" selected in the information terminal device 2. Includes the list that will be displayed if In this way, the user can recognize the presented spots according to the type of image.

図１０は、情報端末装置２で表示される画面の他の一例である。図１０におけるアプリ画面２２０は、評価値のテキストを含むオブジェクト２２３を、地図画像上の各スポットの位置に配した画面として表示される。オブジェクト２２３は、評価値の大きさに応じたサイズで表示されてもよい。つまり、評価値が高い画像データが対応付けられた位置を示すオブジェクト２２３ほど、大きく目立って表示される。図１０の例においてアプリ画面２２０は、現在地を示すマーカ２２４と、下部に、スポットの関連データを表示する詳細画面２２５を含む。 FIG. 10 is another example of the screen displayed on the information terminal device 2. The application screen 220 in FIG. 10 is displayed as a screen in which the object 223 including the text of the evaluation value is arranged at the position of each spot on the map image. The object 223 may be displayed in a size corresponding to the size of the evaluation value. That is, the object 223 indicating the position to which the image data having a high evaluation value is associated is displayed larger and more conspicuously. In the example of FIG. 10, the application screen 220 includes a marker 224 indicating the current location and a detail screen 225 displaying spot-related data at the bottom.

図１１は、情報端末装置２で表示される画面の他の一例である。図１１は、図１０の画面例において評価値が「８３」のスポットに対応するオブジェクト２２３が操作部２３によって選択された場合に表示される例を示す。図１１においてアプリ画面２２０には、選択されたスポットへの経路が地図上に表示されている。第１制御部１０は、オブジェクト２２３が選択されたことを情報端末装置２から受信すると、経路探索部１３６の機能により、情報端末装置２の現在地から、選択されたオブジェクト２２３に対応する位置までの経路を探索し、地図画像上に描画して情報端末装置２へ送信する。図１１においてアプリ画面２２０には、経路が表示され、更に詳細画面２２５には、選択されたオブジェクト２２３のスポットに関する関連データ、即ちスポットの名前、住所、距離、そのスポットで撮影された画像等が表示されている。 FIG. 11 is another example of the screen displayed on the information terminal device 2. FIG. 11 shows an example displayed when the object 223 corresponding to the spot whose evaluation value is “83” is selected by the operation unit 23 in the screen example of FIG. In FIG. 11, the route to the selected spot is displayed on the map on the application screen 220. When the first control unit 10 receives from the information terminal device 2 that the object 223 has been selected, the function of the route search unit 136 is used to move from the current location of the information terminal device 2 to the position corresponding to the selected object 223. The route is searched, drawn on the map image, and transmitted to the information terminal device 2. In FIG. 11, the route is displayed on the application screen 220, and the detailed screen 225 shows the related data regarding the spot of the selected object 223, that is, the name, address, distance of the spot, the image taken at the spot, and the like. It is displayed.

このように、ユーザは、ＳＮＳにて他のユーザからより多くの反応を得る可能性が高い「映える」写真画像を撮影できるスポットを把握することができる。 In this way, the user can grasp the spot where a "shining" photographic image that is likely to get more reaction from other users can be taken on the SNS.

上述の実施の形態では、スポットの探索処理、即ち種類取得部１３１、件数取得部１３２、予測部１３３、件数推定部１３４、評価値算出部１３５、及び経路探索部１３６の機能は、情報処理装置１にて発揮された。しかしながら、情報端末装置２に、評価モデル１Ｍの定義データを記憶し、評価値を算出して単体で情報処理システム１００の機能を発揮することも可能である。 In the above-described embodiment, the functions of the spot search process, that is, the type acquisition unit 131, the number acquisition unit 132, the prediction unit 133, the number estimation unit 134, the evaluation value calculation unit 135, and the route search unit 136 are information processing devices. It was demonstrated in 1. However, it is also possible to store the definition data of the evaluation model 1M in the information terminal device 2, calculate the evaluation value, and exert the function of the information processing system 100 by itself.

上述のように開示された実施の形態は全ての点で例示であって、制限的なものではない。本発明の範囲は、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内での全ての変更が含まれる。 The embodiments disclosed as described above are exemplary in all respects and are not restrictive. The scope of the present invention is indicated by the scope of claims and includes all modifications within the meaning and scope equivalent to the scope of claims.

１００情報処理システム
１情報処理装置
１０第１制御部
１３１種類取得部
１３５評価値算出部
１３７出力部
１１第１記憶部
１Ｍ評価モデル
１２第１通信部
２情報端末装置
２０第２制御部
２２表示部
２３操作部
２５第２通信部
２６位置データ取得部 100 Information processing system 1 Information processing device 10 1st control unit 131 type acquisition unit 135 evaluation value calculation unit 137 output unit 11 1st storage unit 1M evaluation model 12 1st communication unit 2 information terminal device 20 2nd control unit 22 display unit 23 Operation unit 25 Second communication unit 26 Position data acquisition unit

Claims

An image acquisition unit that acquires image data to which position data is associated, and an image acquisition unit
An evaluation calculation unit that calculates an evaluation value indicating the ease of obtaining a reaction on an SNS (Social Network Service) with respect to the image data acquired by the image acquisition unit.
An output unit that outputs screen information indicating a spot that is likely to be able to capture an image having a higher evaluation value based on the evaluation value calculated for the image data and the position data corresponding to the image data. An information processing system equipped with.

An information processing device including the output unit and an information terminal device for transmitting and receiving data to and from the information processing device are included.
The information terminal device is
The position data acquisition unit that acquires the position data and
It is provided with a second communication unit that transmits the position data acquired by the position data acquisition unit to the information processing device.
The output unit of the information processing device is a first communication unit that transmits the screen information indicating the spot within a specific range from the position indicated by the position data transmitted from the information terminal device to the information terminal device. The information processing system according to claim 1.

The position data acquisition unit acquires position data indicating the position of the information terminal device, and obtains position data.
The information processing system according to claim 2, wherein the first communication unit transmits the screen information indicating the spot within the specific range including the position of the information terminal device to the information terminal device.

The information terminal device is
The destination is received and the position data of the destination is transmitted to the information processing apparatus by the second communication unit.
The information processing system according to claim 2, wherein the first communication unit transmits the screen information indicating the spot within the specific range including the destination received by the information terminal device to the information terminal device. ..

A type acquisition unit for acquiring an image type of the image data acquired by the image acquisition unit is provided.
Claims 1 to 4 that the output unit outputs the screen information based on the position data to which the image data whose evaluation value calculated by the evaluation calculation unit is higher than others is associated with each type of the image. The information processing system according to any one of the above items.

The evaluation calculation unit outputs an evaluation value based on an evaluation model trained to output the evaluation value for the photographic image or the moving image when data of a photographic image or a moving image is input. The information processing system according to any one of claims 1 to 5.

The information processing system according to any one of claims 1 to 6, wherein the screen information is information for displaying a screen listing related data including explanations of each spot in descending order of evaluation value.

The information processing system according to any one of claims 1 to 6, wherein the screen information is information for displaying an object including a text of the evaluation value at a position of each spot on a map image.

An image acquisition unit that acquires image data to which position data is associated, and an image acquisition unit
An evaluation calculation unit that calculates an evaluation value indicating the ease of obtaining a reaction on an SNS with respect to the image data acquired by the image acquisition unit.
An output unit that outputs screen information indicating a spot that is likely to be able to capture an image having a higher evaluation value based on the evaluation value calculated for the image data and the position data corresponding to the image data. Information processing device equipped with.

On the computer
Accepts the specification of position data indicating the position,
A specific range including the designated position data or the position indicated by the position data is transmitted to the information processing apparatus by communication.
From the information processing device, screen information indicating a spot that is likely to be able to take an image having a higher evaluation value is received, and the screen information is received.
A computer program that executes a process of displaying a screen listing related data including explanations of each spot in descending order of evaluation value based on the screen information.

On the computer
Accepts the specification of position data indicating the position,
A specific range including the designated position data or the position indicated by the position data is transmitted to the information processing apparatus by communication.
From the information processing device, screen information indicating a spot that is likely to be able to take an image having a higher evaluation value is received, and the screen information is received.
A computer program that executes a process of displaying a screen in which an object indicating an evaluation value is arranged at a position corresponding to each spot on a map image based on the screen information.

An information processing method executed between the information processing device and the information terminal device in an information processing system including the information processing device and an information terminal device for transmitting and receiving data to and from the information processing device.
The information processing device
Acquire the image data to which the position data is associated, and
For the acquired image data, an evaluation value indicating the ease of obtaining a reaction on SNS was calculated.
Based on the evaluation value calculated for the image data and the position data corresponding to the image data, the information terminal device provides screen information indicating a spot that is likely to be able to capture an image having a higher evaluation value. Send to
The information terminal device is
An information processing method including a process of displaying a screen indicating each spot based on the screen information.