JP2018190091A - 検索プログラム、検索装置及び検索方法 - Google Patents

検索プログラム、検索装置及び検索方法 Download PDF

Info

Publication number
JP2018190091A
JP2018190091A JP2017090562A JP2017090562A JP2018190091A JP 2018190091 A JP2018190091 A JP 2018190091A JP 2017090562 A JP2017090562 A JP 2017090562A JP 2017090562 A JP2017090562 A JP 2017090562A JP 2018190091 A JP2018190091 A JP 2018190091A
Authority
JP
Japan
Prior art keywords
vehicle type
search
image
text data
search result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017090562A
Other languages
English (en)
Other versions
JP7005932B2 (ja
Inventor
賢二 野上
Kenji Nogami
賢二 野上
早穂子 秦
Sahoko Hata
早穂子 秦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2017090562A priority Critical patent/JP7005932B2/ja
Priority to EP18154377.8A priority patent/EP3396566A1/en
Priority to US15/886,251 priority patent/US20180314890A1/en
Publication of JP2018190091A publication Critical patent/JP2018190091A/ja
Application granted granted Critical
Publication of JP7005932B2 publication Critical patent/JP7005932B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/248—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/434—Query formulation using image data, e.g. images, photos, pictures taken by a user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5846—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using extracted text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0645—Rental transactions; Leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/30—Scenes; Scene-specific elements in albums, collections or shared content, e.g. social network photos or video
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08—Detecting or categorising vehicles

Abstract

【課題】入力された画像に対する検索結果を見やすく表示する。【解決手段】検索プログラムは、入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、出力されたテキストデータが、第１の車種、第２の車種を判定結果として含む場合に、第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、第１の車種、第２の車種ごとに区分した表示画面を生成する、処理をコンピュータに実行させる。【選択図】図２

Description

本発明は、検索プログラム、検索装置及び検索方法に関する。
画像検索装置において、検索条件文が入力された場合に、画像データに付与されたキーワードを検索条件として検索を行い、検索結果を画像データに付与された分類名に分けて表示する技術が知られている。また、画像検索装置において、サムネイルをカテゴリごとに分類し、サムネイルを類似度によって整列させて表示する技術が知られている。
特開２００３−７６６９４号公報 特開２００７−３１７０３４号公報
しかし、上述技術では、入力された画像に対する検索結果を表示させることについては考慮されていない。
一つの側面では、入力された画像に対する検索結果を見やすく表示する検索プログラム、検索装置及び検索方法を提供することを目的とする。
一つの態様において、検索プログラムは、入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、出力されたテキストデータが、第１の車種、第２の車種を判定結果として含む場合に、第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、第１の車種、第２の車種ごとに区分した表示画面を生成する、処理をコンピュータに実行させる。
一つの態様によれば、入力された画像に対する検索結果を見やすく表示する。
図１は、実施例１におけるシステムの一例を示す図である。 図２は、実施例１におけるデータセンタの一例を示す図である。 図３は、実施例１における送信前の表示画面の一例を示す図である。 図４Ａは、実施例１における検索結果画像の一例を示す図である。 図４Ｂは、実施例１における検索結果画像の一例を示す図である。 図５は、実施例１における検索処理の一例を示すフローチャートである。 図６は、実施例２におけるデータセンタの一例を示す図である。 図７は、実施例２における車情報記憶部に記憶された車情報の一例を示す図である。 図８Ａは、実施例２における検索結果画像の一例を示す図である。 図８Ｂは、実施例２における検索結果画像の一例を示す図である。 図９は、実施例２における検索処理の一例を示すフローチャートである。 図１０は、実施例３における検索結果画像の一例を示す図である。 図１１Ａは、実施例３における検索結果画像の別の一例を示す図である。 図１１Ｂは、実施例３における検索結果画像の別の一例を示す図である。 図１２は、コンピュータのハードウェア構成例を示す図である。
以下に、本願の開示する検索プログラム、検索装置及び検索方法の実施例を図面に基づいて詳細に説明する。なお、この実施例によりこの発明が限定されるものではない。また、以下に示す各実施例は、矛盾を起こさない範囲で適宜組み合わせても良い。
［システム全体の説明］
最初に、実施例１におけるシステム１の一例を説明する。図１は、実施例１におけるシステム１の一例を示す図である。システム１は、データセンタ２と、端末装置３とを有する。データセンタ２と端末装置３とは、ネットワークＮ１を介して通信可能に接続され、各種の情報を交換することが可能とされている。かかるネットワークＮ１の一態様としては、有線または無線を問わず、携帯電話などの移動体通信、ＬＡＮ（Local Area Network）やＶＰＮ（Virtual Private Network）などの任意の種類の通信網を採用できる。
データセンタ２は、端末装置３から送信された画像に基づいて検索を行い、画像に関する情報を提供する装置である。すなわち、データセンタ２は、検索機能を有している。データセンタ２は、例えば、サーバコンピュータなどのコンピュータである。なお、データセンタ２は複数台のコンピュータによるクラウドＣとして実装されているが、１台のコンピュータとして実装されてもよい。
端末装置３は、情報の提供を希望するユーザが使用する装置である。端末装置３は、例えば、タブレット端末、スマートフォン、ＰＤＡ（Personal Digital Assistant）などの携帯端末装置である。なお、端末装置３は、例えば、パーソナルコンピュータなどのコンピュータであってもよい。
本実施例のシステム１は、例えば、カーシェアリングで使用されるシステムである。システム１において、データセンタ２は、端末装置３から送信される車の画像に基づいて画像に含まれる可能性がある車種を判定し、判定した車種に対応したテキストデータを出力する。そして、データセンタ２は、テキストデータを検索キーワードとして、貸し出し可能な車の検索を行い、検索結果を車種ごとに区分して端末装置３に表示させる。
［データセンタ２の構成］
次に、実施例１におけるデータセンタ２の一例について、図２を用いて説明する。図２は、実施例１におけるデータセンタ２の一例を示す図である。図２に示すように、本実施例におけるデータセンタ２は、制御装置１０と、サーバ装置１１とを有する。制御装置１０とサーバ装置１１とはデータセンタ２に設けられたネットワークＮ２で接続され、通信可能とされている。かかるネットワークＮ２は、インターネットなどの外部のネットワークと通信可能に接続され、ネットワークＮ１を介して端末装置３と通信可能とされてもよい。なお、ネットワークＮ２は、ネットワークＮ１を介して他のネットワークと通信可能とされてもよい。かかるネットワークＮ２もネットワークＮ１と同様に、任意の種類の通信網を採用できる。また、図２の例では、データセンタ２は、制御装置１０とサーバ装置１１とを有しているが、１つの装置で構成されてもよい。
制御装置１０は、データセンタ２に設けられた物理サーバであり、例えば、サーバコンピュータである。制御装置１０は、サーバ装置１１を制御する。制御装置１０は、第１通信部２０と、第２通信部２１と、ステーション情報記憶部２２と、制御部２３とを有する。なお、制御装置１０は、図２に示す機能部以外にも既知のコンピュータが有する各種の機能部、例えば各種の入力デバイスや音声出力デバイスなどの機能部を有してもよい。
第１通信部２０は、ネットワークＮ１を介して端末装置３に通信可能に接続され、各種の情報を送受信する。第１通信部２０は、例えばＮＩＣ（Network Interface Card）等の通信インターフェースなどである。
第２通信部２１は、データセンタ２に設けられたネットワークＮ２を介してサーバ装置１１の第３通信部４０と通信可能に接続され、各種の情報を送受信する。第２通信部２１は、例えば通信インターフェースなどである。
ステーション情報記憶部２２は、各種のデータを記憶する記憶デバイスである。例えば、ステーション情報記憶部２２は、ハードディスク、ＳＳＤ（Solid State Drive）、光ディスクなどの記憶装置である。ステーション情報記憶部２２は、貸し出し可能な車情報を記憶する。貸し出し可能な車情報は、例えば、貸し出し可能な車があるステーションの位置情報、貸し出し可能な車種、貸し出し可能な日時、貸し出し可能な車の装備情報、貸し出し可能な車の定員数、貸し出し可能な車の画像のファイル名などである。貸し出し可能な車情報は、例えば第１通信部２０を介して図示しないカーシェアリングサービスの管理者の端末により登録、削除または更新される。
制御部２３は、制御装置１０全体を制御するデバイスである。制御部２３としては、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）等の電子回路や、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）等の集積回路を採用できる。
制御部２３は、各種の処理手順を規定したプログラムやデータを格納するための内部メモリを有し、これらによって種々の処理を実行する。制御部２３は、各種のプログラムが動作することにより各種の処理部として機能する。例えば、制御部２３は、受付部３０と、ステーション検索部３１と、生成部３２とを有する。
受付部３０は、各種の受け付けを行う。例えば、受付部３０は、第１通信部２０を介して受信した端末装置３からの要求に応じて、ログイン画面を端末装置３に表示させて、ユーザのログインを受け付ける。また、受付部３０は、ユーザのログインが成功すると、レンタルを希望する車に関する情報を入力する入力画面を端末装置３に表示させ、車に関する情報の入力を受け付ける。例えば、受付部３０は、ユーザがレンタルを希望する車の画像及びレンタルを希望する日時の情報などを端末装置３から受け付ける。受付部３０は、端末装置３から受け付けた車の画像を、第２通信部２１を介してサーバ装置１１に送信する。受付部３０は、サーバ装置１１から、車種に関するテキストデータを受信し、ステーション検索部３１に出力する。
ステーション検索部３１は、ユーザがレンタルを希望する日時の情報及びサーバ装置１１から出力された車種に関するテキストデータに基づき、貸し出し可能な車があるステーションを検索する。ステーション検索部３１は、ステーション情報記憶部２２に記憶された貸し出し可能な車情報から、テキストデータを検索キーワードとして、レンタルを希望する日時などの条件を満たす車を貸し出し可能なステーションを検索する。すなわち、ステーション検索部３１は、検索キーワードにマッチする貸し出し可能な車を検索する。車種に関するテキストデータについては後述する。
生成部３２は、ステーション検索部３１による検索結果に基づいて端末装置３に表示させる画像、すなわち表示画面を生成する。具体的には、生成部３２は、検索結果が端末装置３に表示された場合に、検索結果が車種ごとに区分される画像を生成する。また、生成部３２は、各検索結果を切り替えて表示可能な画像を生成する。生成される画像には、車種や、ステーションの位置や、ステーションにある車の画像などが含まれる。
サーバ装置１１は、データセンタ２に設けられた物理サーバであり、例えば、サーバコンピュータである。サーバ装置１１は、第３通信部４０と、辞書記憶部４１と、制御部４２とを有する。なお、図２の例では、サーバ装置１１を１つ図示したが、サーバ装置１１は任意の台数とすることができる。
第３通信部４０は、データセンタ２に設けられたネットワークＮ２を介して制御装置１０の第２通信部２１と通信可能に接続され、各種の情報を送受信する。第３通信部４０は、例えば通信インターフェースなどである。
辞書記憶部４１は、各種のデータを記憶する記憶デバイスである。例えば、辞書記憶部４１は、ハードディスク、ＳＳＤ、光ディスクなどの記憶装置である。辞書記憶部４１は、各車種の画像が含まれる学習データと、各車種の画像が含まれない学習データとを用いた機械学習により生成された車種識別辞書を記憶する。車種識別辞書は、車種の画像と、車種に対応するテキストデータとの対応関係を機械学習により学習した辞書である。例えば、機械学習のアルゴリズムとしては、畳み込みニューラルネットワーク（ＣＮＮ；Convolutional Neural Networks）等のディープラーニングを用いることができる。車種に対応するテキストデータは、例えば車種の名称を含む。
制御部４２は、サーバ装置１１全体を制御するデバイスである。制御部４２としては、ＧＰＵ（Graphic Processing Unit）等の電子回路や、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）等の集積回路を採用できる。
制御部４２は、各種の処理手順を規定したプログラムやデータを格納するための内部メモリを有し、これらによって種々の処理を実行する。制御部４２は、各種のプログラムが動作することにより各種の処理部として機能する。例えば、制御部４２は、解析部５０と、テキストデータ出力部５１とを有する。
解析部５０は、辞書記憶部４１に記憶された辞書を用いて画像解析を行う。解析部５０は、制御装置１０から送信された画像を第３通信部４０を介して受信すると、辞書を用いて受信した画像を解析し、画像に含まれる可能性が高い車種を識別する。次に、解析部５０は、識別した車種ごとにスコアを算出する。解析部５０は、画像に含まれる可能性が高い車種の中から、上位複数車種、例えば、上位２つの車種を選択し、選択した各車種の評価を示す値としてスコアを算出する。解析部５０は、例えば、各スコアの合計が「１．０」となるようにスコアを算出する。スコアは、画像に含まれる可能性が高い車種ほど高くなる。なお、選択される車種の数は、予め設定される。
テキストデータ出力部５１は、解析部５０によって識別された車種のテキストデータとスコアとを出力する。すなわち、テキストデータ出力部５１は、解析部５０による車種の判定結果をテキストデータとして出力する。テキストデータ出力部５１は、車種ごとにテキストデータとスコアとを対応付けて出力する。
このように、サーバ装置１１では、複数の車種の画像と、対応する車種のテキストデータとの対応関係を機械学習により学習した人工知能による画像解析によって、画像に含まれる可能性が高い車種を識別する。これにより、サーバ装置１１は、画像に含まれる可能性が高い車種のテキストデータとスコアとを車種ごとに出力する。
［ステーション検索の一例］
次に、実施例１にかかるステーション検索について詳しく説明する。ユーザによるログインが終了し、ユーザによってレンタルを希望する車の画像が用意されると、端末装置３には、図３に示すような画像が表示される。図３は、実施例１における送信前の表示画面の一例を示す図である。ユーザが検索ボタンをタッチ（クリック）すると、車の画像３Ａが、レンタルを希望する日時など他の情報とともに制御装置１０に送信される。
制御装置１０は、車の画像３Ａなどを受信すると、受信した画像３Ａをサーバ装置１１に送信する。サーバ装置１１は、受信した画像３Ａを解析し、画像３Ａに含まれる可能性が高い車種を識別し、画像３Ａに含まれる可能性が高い車種の中から、例えば、上位２つの車種を選択し、各車種のスコアを算出する。サーバ装置１１は、例えば、第１の車種である車種「ＡＢＣ」と第２の車種である車種「ＥＦＧ」とを選択する。そして、画像３Ａに含まれる可能性が、車種「ＥＦＧ」よりも車種「ＡＢＣ」が高い場合には、例えば、サーバ装置１１は、車種「ＡＢＣ」のスコアを「０．９」と算出し、車種「ＥＦＧ」のスコアを「０．１」と算出する。
次に、サーバ装置１１は、車種「ＡＢＣ」について、テキストデータとして「ＡＢＣ」及びスコアとして「０．９」を出力し、車種「ＥＦＧ」について、テキストデータとして「ＥＦＧ」及びスコアとして「０．１」を出力する。サーバ装置１１は、テキストデータ「ＡＢＣ」とスコア「０．９」とを対応付けて出力し、テキストデータ「ＥＦＧ」とスコア「０．１」とを対応付けて出力する。
サーバ装置１１は、各テキストデータ及び各スコアを制御装置１０に送信する。制御装置１０は、各テキストデータ及び各スコアを受信し、受信したテキストデータ「ＡＢＣ」を検索キーワードとしてレンタルを希望する日時などの条件を満たす車を貸し出し可能なステーションを検索する。また、制御装置１０は、受信したテキストデータ「ＥＦＧ」を検索キーワードとしてレンタルを希望する日時などの条件を満たす車を貸し出し可能なステーションを検索する。
制御装置１０は、検索結果及び各スコアに基づいて端末装置３に表示する画像を生成する。制御装置１０は、車種ごとに検索結果であるステーションが区分された画像を生成する。制御装置１０は、車種「ＡＢＣ」の検索結果と車種「ＥＦＧ」の検索結果とを切り替え表示可能な関係の画像を生成する。制御装置１０は、生成した画像を端末装置３に送信する。
これにより、端末装置３には、図４Ａ及び図４Ｂに示す検索結果画像が表示される。図４Ａは、実施例１における検索結果画像の一例を示す図である。図４Ｂは、実施例１における検索結果画像の一例を示す図である。
端末装置３には、タブ３Ｅを有し、各タブ３Ｅに車種３Ｂが表示され車種３Ｂごとに区分された画像が表示される。端末装置３には、ステーション３Ｃと、そのステーション３Ｃにある車の画像３Ｄとが表示される。端末装置３には、まず、図４Ａに示すように、第１の検索結果として、スコアが高い車種３Ｂ「ＡＢＣ」に関する情報が表示される。端末装置３には、車種３Ｂ「ＡＢＣ」の車を貸し出し可能なステーション３Ｃとして「ＡＡ町Ｂ丁目」及びそのステーション３Ｃにある車種３Ｂ「ＡＢＣ」の車の画像３Ｄが表示される。また、端末装置３には、車種３Ｂ「ＡＢＣ」の車を貸し出し可能なステーション３Ｃとして「ＡＡ町Ｄ丁目」及びそのステーション３Ｃにある車種３Ｂ「ＡＢＣ」の車の画像３Ｄが表示される。
車種３Ｂ「ＡＢＣ」の車を貸し出し可能なステーション３Ｃが複数、例えば、図４Ａお及び図４Ｂにおいて３か所以上ある場合には、上下方向に移動可能なスクロールバー３Ｆが表示される。端末装置３のユーザは、スクロールバー３Ｆを上下方向に移動させることで、各ステーション３Ｃの情報を閲覧することができる。なお、スクロールバー３Ｆは表示されなくてもよい。
また、ユーザが車種３Ｂ「ＥＦＧ」のタブ３Ｅをタッチ（クリック）すると、端末装置３では、図４Ｂに示すように、第２の検出結果として、スコアが低い車種３Ｂ「ＥＦＧ」に関する情報が表示される。例えば、端末装置３には、車種３Ｂ「ＥＦＧ」の車を貸し出し可能なステーション３Ｃとして「ＡＢＣ町Ｄ丁目」及びそのステーション３Ｃにある車種３Ｂ「ＥＦＧ」の車の画像３Ｄが表示される。なお、車種３Ｂ「ＥＦＧ」の車を貸し出し可能なステーション３Ｃが複数ある場合には、図４Ａと同様に上下方向に移動可能なスクロールバー３Ｆが表示される。
このように、端末装置３には、検索結果が車種ごとに区分されて表示され、検索結果を見やすく表示することができる。
なお、ここでは、ユーザが送信した画像に含まれる可能性が高い車種として、上位２つの車種が選択される一例について説明したが、上位３つ以上の車種が選択されてもよい。その場合、端末装置３には、スコアが高い順に３つ以上のタブ３Ｅが並ぶように表示される。
［処理の流れ］
次に、本実施例におけるデータセンタ２による検索処理について、図５を用いて説明する。図５は、実施例１における検索処理の一例を示すフローチャートである。端末装置３からユーザがレンタルを希望する車の画像が送信されると、サーバ装置１１の第３通信部４０は車の画像を受信する（Ｓ１００）。なお、第３通信部４０は、制御装置１０の受付部３０から、第２通信部２１を介して車の画像を受信する。また、制御装置１０の受付部３０は、端末装置３から、第１通信部２０を介して車の画像を受信する。
次に、サーバ装置１１の解析部５０は、車の画像に含まれる可能性が高い車種を識別し、車種ごとにスコアを算出する（Ｓ１０１）。次に、サーバ装置１１のテキストデータ出力部５１は、識別された車種のテキストデータ及びスコアを出力する（Ｓ１０２）。次に、サーバ装置１１の第３通信部４０は、出力されたテキストデータ及びスコアを制御装置１０に送信し、制御装置１０の第２通信部２１はテキストデータ及びスコアを受信する（Ｓ１０３）。
次に、制御装置１０のステーション検索部３１は、テキストデータを検索キーワードとしてレンタルを希望する日時などの条件を満たす車を貸し出し可能なステーションを検索する（Ｓ１０４）。次に、制御装置１０の生成部３２は、検索結果に基づいて端末装置３に表示する画像を生成する（Ｓ１０５）。次に、制御装置１０の第１通信部２０は、生成した画像を端末装置３に送信し（Ｓ１０６）、処理を終了する。
［効果］
以上説明したように、本実施例におけるデータセンタ２は、入力された画像を画像解析して、該画像に含まれる可能性がある車種の判定結果をテキストデータとして出力する。また、本実施例におけるデータセンタ２は、出力されたテキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、第１の車種、第２の車種ごとに区分した表示画面を生成する。これにより、検索結果を見やすく表示することができる。
また、本実施例におけるデータセンタ２は、複数の車種の車の画像と対応する車種のテキストデータとの対応関係を機械学習により学習した人工知能による画像解析を行う。これにより、画像に対して人の判断に近い画像解析を行うことができ、ユーザがレンタルを希望する車を、送信された画像に基づいて検索することができる。
また、本実施例におけるデータセンタ２は、貸し出し可能な車の情報を記憶するステーション情報記憶部２２を参照して、検索キーワードにマッチする貸し出し可能な車を検索する。これにより、ユーザがレンタルを希望する車を検索することができる。
また、本実施例におけるデータセンタ２は、第１の車種についての第１の検索結果の表示画面と、第２の車種についての第２の検索結果の表示画面とを、切り替え表示可能な関係の表示画面にする。これにより、検索結果を見やすく表示することができる。
ところで、車のレンタルを希望するユーザは、車種よりも車の項目、例えば、車両タイプで判断し車を選ぶことがある。そこで、検索結果として車種だけでなく、車の項目についても検索し、検索結果を区分して表示することにより、多様な検索結果を表示するという効果を奏する。
［データセンタ２の構成］
本実施例におけるデータセンタ２の一例について、図６を用いて説明する。図６は、実施例２におけるデータセンタ２の一例を示す図である。なお、以下の実施例において、先に説明した図面に示す部位と同一の部位には同一の符号を付し、重複する説明は省略する。
本実施例における制御装置１０は、第１通信部２０と、第２通信部２１と、ステーション情報記憶部２２と、車情報記憶部２４と、制御部２３とを有する。
車情報記憶部２４は、各種のデータを記憶する記憶デバイスである。例えば、車情報記憶部２４は、ハードディスク、ＳＳＤ、光ディスクなどの記憶装置である。車情報記憶部２４は、車種ごとに項目に関する情報を記憶する。項目は、例えば、「車両タイプ」や、「定員数」である。「車両タイプ」は、車の形状や、大きさなどによって区分けされた種類であり、「コンパクト」、「セダン」、「ハイブリッド」、「ワゴン」などである。「定員数」は、予め設定された値であり、搭乗できる最大人数である。例えば、車情報記憶部２４は、図７に示すように、車種ごとに車両タイプ、定員数などを記憶する。図７は、実施例２における車情報記憶部２４に記憶された車情報の一例を示す図である。車情報記憶部２４は、車種「ＡＢＣ」の車については、車両タイプ「コンパクト」、定員数「５人」などを記憶する。車情報記憶部２４は、車種「ＥＦＧ」の車については、車両タイプ「コンパクト」、定員数「５人」などを記憶する。さらに車情報記憶部２４は、車種「ＨＩＪ」の車については、車両タイプ「コンパクト」、定員数「５人」などを記憶する。車ごとの項目は、例えば第１通信部２０を介して図示しないカーシェアリングサービスの管理者の端末により登録、削除または更新される。
図６に戻り、次に本実施例における制御装置１０の制御部２３は、受付部３０と、項目検索部３３と、ステーション検索部３１と、生成部３２とを有する。
項目検索部３３は、サーバ装置１１から出力されたテキストデータに対応する車種に共通の項目を検索する。例えば、サーバ装置１１から出力されたテキストデータとして「ＡＢＣ」及び「ＥＦＧ」が出力された場合には、項目検索部３３は、車種「ＡＢＣ」及び「ＥＦＧ」に共通の項目を検索する。項目検索部３３は、例えば、車種「ＡＢＣ」及び「ＥＦＧ」で共通の項目として車両タイプ「コンパクト」を検索結果として出力する。項目検索部３３は、予め設定された項目で共通となる項目を検索する。なお、設定される項目は、ユーザなどによって設定可能であってもよい。また、項目検索部３３は、例えば、車種の車両タイプが異なる場合には、スコアが高い方の車両タイプを項目として選択してもよい。
ステーション検索部３１は、ユーザがレンタルを希望する日時の情報、サーバ装置１１から出力された車種に関するテキストデータ及び項目検索部３３によって検索された項目に基づき、貸し出し可能な車があるステーションを検索する。ステーション検索部３１は、スコアが高い車種に関するテキストデータに基づいて貸し出し可能な車があるステーションを検索する。例えば、ステーション検索部３１は、スコアが最も高い車種のテキストデータを検索キーワードとして、車を貸し出し可能なステーションを検索する。また、ステーション検索部３１は、項目検索部３３によって検索された項目を検索キーワードとして該当する車を貸し出し可能なステーションを検索する。
生成部３２は、ステーション検索部３１による検索結果に基づいて端末装置３に表示させる画像を生成する。具体的には、生成部３２は、検索結果が端末装置３に表示された場合に、検索結果が車種及び項目ごとに区分した画像を生成する。生成部３２は、例えば、サーバ装置１１から出力された車種「ＡＢＣ」のスコアが車種「ＥＦＧ」のスコアより大きい場合、車種「ＡＢＣ」の検索結果の画像と、項目「コンパクト」の検索結果の画像とを切り替えて表示可能な画像を生成する。
これにより、端末装置３には、図８Ａ及び図８Ｂに示す検索結果画像が表示される。図８Ａは、実施例２における検索結果画像の一例を示す図である。図８Ｂは、実施例２における検索結果画像の一例を示す図である。
端末装置３には、まず、図８Ａに示す検索結果が表示される。端末装置３には、タブ３Ｅに車種３Ｂ及び項目３Ｇに区分された画像が表示される。端末装置３には、図４Ａと同様に、スコアが高い車種３Ｂ「ＡＢＣ」の車を貸し出し可能なステーション３Ｃ及びそのステーション３Ｃにある車種３Ｂ「ＡＢＣ」の車の画像３Ｄが表示される。
また、ユーザが項目３Ｇ「コンパクト」のタブ３Ｅをタッチ（クリック）すると、端末装置３は、図８Ｂに示すように、車両タイプが「コンパクト」である車を貸し出し可能なステーション３Ｃ、そのステーション３Ｃにある車の画像３Ｄ及び車種３Ｂを表示する。例えば、車両タイプが「コンパクト」である、車種３Ｂ「ＡＢＣ」、「ＨＩＪ」または「ＥＦＧ」の車を貸し出し可能なステーション３Ｃ、車種３Ｂ及びそのステーション３Ｃにある車種３Ｂの車の画像３Ｄが検索結果として表示される。なお、図８Ｂでは、説明のために車種３Ｂ「ＡＢＣ」及び「ＨＩＪ」の車を貸し出し可能なステーション３Ｃなどを同じ画面の上下に並べて表示した例を示しているが、車種３Ｂ「ＥＦＧ」の車を貸し出し可能なステーション３Ｃなども表示される。ユーザは、スクロールバー３Ｆを操作することで、各車種３Ｂの車を貸し出し可能なステーション３Ｃなどを閲覧することができる。また、同じ車種３Ｂの車を貸し出すことができるステーション３Ｃが複数ある場合には、端末装置３には、車種３Ｂごとにまとめてステーション３Ｃなどが表示される。
［処理の流れ］
次に、本実施例におけるデータセンタ２による検索処理について、図９を用いて説明する。図９は、実施例２における検索処理の一例を示すフローチャートである。なお、以下の説明において、図５に示すステップと同じ符号については同様のステップであるため、詳細な説明を省略する。
図９に示すように、制御装置１０の項目検索部３３は、テキストデータに対応する車種に共通の項目を検索する（Ｓ２００）。
次に、制御装置１０のステーション検索部３１は、最もスコアが高い車種のテキストデータを検索キーワードとしてレンタルを希望する日時などの条件を満たす車を貸し出し可能なステーションを検索し、また車種に共通の項目を検索キーワードとしてレンタルを希望する日時などの条件を満たす車を貸し出し可能なステーションを検索する（Ｓ２０１）。
［効果］
以上説明したように、本実施例におけるデータセンタ２は、入力された画像を画像解析して、該画像に含まれる可能性がある車種の判定結果をテキストデータとして出力する。また、本実施例におけるデータセンタ２は、出力されたテキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、第１の車種及び第２の車種に共通の項目を検索キーワードとして検索して得た第２の検索結果とを、第１の検索結果と第２の検索結果とを区分した表示画面を生成する。これにより、第１の車種及び第２の車種以外の車種であり、かつ第１の車種及び第２の車種で項目が共通の車を検索結果として表示することができ、多様な検索結果を表示することができる。
さて、これまで本発明の実施例について説明したが、本発明は上述した実施例以外にも、種々の異なる形態にて実施されてよいものである。上記の各実施例では、検索結果を、タブを有する画像を生成し、表示することで、検索結果を区分する構成について説明したが、実施の形態はこれに限られない。
例えば、制御装置１０の生成部３２は、検索結果を同じ画面上で異なる行や列に区分される画像を生成してもよい。例えば、生成部３２は、図１０に示すように、同じ画像で検索結果である車種ごとに行や列を区分して表示される画像を生成する。図１０は、実施例３における検索結果画像の一例を示す図である。なお、図１０では、説明のため、端末装置３を省略し、画像のみを示す。ユーザはスクロールバー３Ｆを操作することで、検索結果を閲覧することができる。
実施例１と同様の検索結果が得られた場合には、生成部３２は、図１０に示すような画像を生成する。まず、図１０に示す画像は、スコアが高い車種３Ｂ「ＡＢＣ」の車を貸し出し可能なステーション３Ｃ及びそのステーション３Ｃにある車の画像３Ｄを含む。さらに、図１０に示す画像は、上記した「ＡＢＣ」に関する情報と、その下に車種３Ｂ「ＥＦＧ」の車を貸し出し可能なステーション３Ｃ及びそのステーション３Ｃにある車の画像３Ｄとが表示されるように車種３Ｂごとに区分けされた画像を生成する。これにより、検索結果を見やすく表示することができる。
また、例えば、生成部３２は、図１１Ａ及び図１１Ｂに示すように、検索結果を端末装置３におけるユーザのフリック操作またはスワイプ操作によって切り替えて表示可能な画像を生成してもよい。図１１Ａは、実施例３における検索結果画像の別の一例を示す図である。図１１Ｂは、実施例３における検索結果画像の別の一例を示す図である。
実施例１と同様の検索結果が得られた場合には、生成部３２は、図１１Ａに示すように、まず車種３Ｂ「ＡＢＣ」の車を貸し出し可能なステーション３Ｃ及びそのステーション３Ｃにある車の画像３Ｄを端末装置３に表示する画像を生成する。また、生成部３２は、図１１Ａに示す画像に対し、ユーザのフリック操作やスワイプ操作が行われると図１１Ｂに示すように、車種３Ｂ「ＥＦＧ」の車を貸し出し可能なステーション３Ｃ及びそのステーション３Ｃにある車の画像３Ｄが表示される画像を生成する。これにより、検索結果を見やすく表示することができる。なお、図１１Ａに示すような画面は、図１１Ｂに示すような別の画像が存在することを示す矢印などをさらに含んでもよい。これにより、端末装置３のユーザは、フリック操作やスワイプ操作により、図１１Ｂに示すような別の画像を表示できることを知ることができる。
また、各実施例では、データセンタ２は、ユーザが用意した画像に基づいてステーションの検索を行ったが、これに限られない。例えば、データセンタ２は、ユーザの端末装置３から自動的に送信される画像に基づいてステーションの検索を行い、検索結果を端末装置３に表示させてもよい。すなわち、データセンタ２は、プッシュ通知を行ってもよい。例えば、ユーザの端末装置３から自動的に送信される画像は、街中でユーザが気に入った車を撮影した写真や、ＳＮＳ（Social Networking Service）でユーザが気に入った車の写真に「いいね」を選択した写真であってもよい。また、ユーザの端末装置３から自動的に送信される画像は、ユーザが登録したＷｅｂページに表示された車の写真や、ＳＮＳでユーザをフォローしている人がアップロードしている車の写真であってもよい。さらに、ユーザの端末装置３から自動的に送信される画像は、ユーザが購読している車雑誌に特集されている車の写真や、ユーザが好きなブランドの歴代の車の写真や、ユーザが初めて購入した車の写真などであってもよい。例えば、ユーザの端末装置３から自動的に送信される画像は、端末装置３に保存された画像や、Ｗｅｂページの画像が使用される。
また、データセンタ２は、例えば、ユーザのスケジュールや、ユーザの習慣に基づいてプッシュ通知を行う。ユーザのスケジュールや、ユーザの習慣は、例えば、端末装置３の予定表に記憶されたデータから抽出される。端末装置３の予定表に、「週末日帰りで横浜中華街」や、「ゴールデンウィークに実家に帰省」や、「３月末引っ越し」や、「保育園送り迎え」などとある場合には、データセンタ２は、予定や習慣に合わせてプッシュ通知を行う。データセンタ２は、ユーザのスケジュールや、ユーザの習慣に基づいて端末装置３から自動的に送信される画像を解析し、各実施例と同様に検索を行い、検索結果を区分した画像を生成し、端末装置３に生成した画像を送信する。これにより、ユーザが操作することなく、予定や用途に合った車の検索結果を通知することができる。
また、各実施例では、システム１は、カーシェアリングにおける車の検索を行ったが、これに限られない。例えば、システム１は、洋服などをシェアするシステムに使用されてもよい。例えば、本実施例のシステム１は、予め機械学習した教師データを記憶する記憶部を参照し、入力された画像に関連するテキストデータを出力（特定）し、さらに画像と類似する画像に対応するテキストデータを検索して出力する。そして、システム１は、テキストデータに基づいて機械学習して分類されたグループごとを識別可能となるように区分した画像を生成し、端末装置３に表示させる。なお、画像と類似する画像に対応するテキストデータを検索して出力する場合に、例えば、テキストデータ出力部５１は、入力された画像に関連するテキストデータを用いて検索を行い、ヒットした検索結果を出力してもよい。
［システム］
また、各実施例において説明した各処理のうち、自動的におこなわれるものとして説明した処理の全部または一部を手動的におこなうこともできる。あるいは、手動的におこなわれるものとして説明した処理の全部または一部を公知の方法で自動的におこなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散や統合の具体的形態は図示のものに限られない。つまり、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。例えば、実施例１におけるサーバ装置１１が、制御装置１０とは異なるデータセンタに設置されていてもよい。さらに、各装置にて行なわれる各処理機能は、その全部または任意の一部が、ＣＰＵ及び当該ＣＰＵにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。
［ハードウェア構成］
図１２は、コンピュータのハードウェア構成例を示す図である。図１２に示すように、コンピュータ５００は、各種演算処理を実行するＣＰＵ５０１と、ユーザからの画像などの入力を受け付ける入力装置５０２とを有する。また、コンピュータ５００は、記憶媒体からプログラムなどを読み取る媒体読取装置５０３と、他の装置と接続するためのインターフェース装置５０４とを有する。また、コンピュータ５００は、各種情報を一時記憶するＲＡＭ（Random Access Memory）５０５と、ハードディスク装置５０６とを有する。また、各装置５０１〜５０６は、バス５０７に接続される。
ハードディスク装置５０６には、上記実施例で示した受付部３０、ステーション検索部３１、生成部３２、解析部５０、テキストデータ出力部５１、項目検索部３３の各処理部と同様の機能を有する制御プログラムが記憶される。また、ハードディスク装置５０６には、制御プログラムを実現するための各種データが記憶される。各種データには、ステーション情報記憶部２２、辞書記憶部４１、車情報記憶部２４内のデータが含まれる。
ＣＰＵ５０１は、ハードディスク装置５０６に記憶された各プログラムを読み出して、ＲＡＭ５０５に展開して実行することで、各種の処理を行う。これらのプログラムは、コンピュータ５００を上記実施例で示した受付部３０、ステーション検索部３１、生成部３２、解析部５０、テキストデータ出力部５１、項目検索部３３として機能させることができる。
なお、上記の各プログラムは、必ずしもハードディスク装置５０６に記憶されている必要はない。例えば、コンピュータ５００が読み取り可能な記憶媒体に記憶されたプログラムを、コンピュータ５００が読み出して実行するようにしてもよい。コンピュータ５００が読み取り可能な記憶媒体は、例えば、ＣＤ−ＲＯＭやＤＶＤディスク、ＵＳＢ（Universal Serial Bus）メモリなどの可搬型記録媒体、フラッシュメモリなどの半導体メモリ、ハードディスクドライブなどが対応する。また、公衆回線、インターネット、ＬＡＮ（Local Area Network）などに接続された装置にこれらのプログラムを記憶させておき、コンピュータ５００がこれらのプログラムを読み出して実行するようにしても良い。
以上、本実施例を含む実施の形態に関し、さらに以下の付記を開示する。
（付記１）入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、
出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、前記第１の車種、前記第２の車種ごとに区分した表示画面を生成する
処理をコンピュータに実行させることを特徴とする検索プログラム。
（付記２）前記画像解析は、複数の車種の車の画像と対応する車種のテキストデータとの対応関係を機械学習により学習した人工知能による画像解析であることを特徴とする付記１に記載の検索プログラム。
（付記３）前記検索は、貸し出し可能な車の情報を記憶する記憶部を参照して、前記検索キーワードにマッチする貸し出し可能な車を検索する処理であることを特徴とする付記１に記載の検索プログラム。
（付記４）前記第１の車種についての第１の検索結果の表示画面と、前記第２の車種についての第２の検索結果の表示画面は、切り替え表示可能な関係の表示画面であることを特徴とする付記１に記載の検索プログラム。
（付記５）前記第１の車種についての第１の検索結果の表示画面と、前記第２の車種についての第２の検索結果の表示画面は、同じ画面上で異なる行又は列に区分されて表示されることを特徴とする付記１に記載の検索プログラム。
（付記６）前記第１の車種についての第１の検索結果の表示画面と、前記第２の車種についての第２の検索結果の表示画面は、フリック操作又はスワイプ操作で切り替え表示可能な関係の表示画面であることを特徴とする付記１に記載の検索プログラム。
（付記７）入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力する出力部と、
出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、前記第１の車種、前記第２の車種ごとに区分した表示画面を生成する生成部と
を備えることを特徴とする検索装置。
（付記８）入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、
出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、前記第１の車種、前記第２の車種ごとに区分した表示画面を生成する
処理をコンピュータに実行させることを特徴とする検索方法。
（付記９）入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、
出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第１の車種及び前記第２の車種に共通の項目を検索キーワードとして検索して得た第２の検索結果とを、前記第１の検索結果と前記第２の検索結果とを区分した表示画面を生成する
処理をコンピュータに実行させることを特徴とする検索プログラム。
（付記１０）入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力する出力部と、
出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第１の車種及び前記第２の車種に共通の項目を検索キーワードとして検索して得た第２の検索結果とを、前記第１の検索結果と前記第２の検索結果とを区分した表示画面を生成する生成部とを備えることを特徴とする検索装置。
（付記１１）入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、
出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第１の車種及び前記第２の車種に共通の項目を検索キーワードとして検索して得た第２の検索結果とを、前記第１の検索結果と前記第２の検索結果とを区分した表示画面を生成する
処理をコンピュータに実行させることを特徴とする検索方法。
（付記１２）画像を用いた検索の入力を受け付けた場合に、予め機械学習した教師データを記憶する記憶部を参照して、前記画像に関連するテキストデータを特定し、
特定した前記テキストデータを用いて、前記画像と類似する画像に対応するテキストデータを検索し、
検索結果であるテキストデータに基づいて、機械学習して分類されたグループ毎を識別可能に対応する画像を出力する、
処理をコンピュータに実行させることを特徴とする検索プログラム。
（付記１３）画像を用いた検索の入力を受け付けた場合に、予め機械学習した教師データを記憶する記憶部を参照して、前記画像に関連するテキストデータを特定する特定部と、
特定した前記テキストデータを用いて、前記画像と類似する画像に対応するテキストデータを検索する検索部と、
検索結果であるテキストデータに基づいて、機械学習して分類されたグループ毎を識別可能に対応する画像を出力する出力部とを備えることを特徴とする検索装置。
（付記１４）画像を用いた検索の入力を受け付けた場合に、予め機械学習した教師データを記憶する記憶部を参照して、前記画像に関連するテキストデータを特定し、
特定した前記テキストデータを用いて、前記画像と類似する画像に対応するテキストデータを検索し、
検索結果であるテキストデータに基づいて、機械学習して分類されたグループ毎を識別可能に対応する画像を出力する、
処理をコンピュータに実行させることを特徴とする検索方法。
１ システム
２ データセンタ
１０ 制御装置
１１ サーバ装置
２０ 第１通信部
２１ 第２通信部
２２ ステーション情報記憶部
２３、４２ 制御部
３０ 受付部
３１ ステーション検索部
３２ 生成部
４０ 第３通信部
４１ 辞書記憶部
５０ 解析部
５１ テキストデータ出力部

Claims (14)

  1. 入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、
    出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、前記第１の車種、前記第２の車種ごとに区分した表示画面を生成する
    処理をコンピュータに実行させることを特徴とする検索プログラム。
  2. 前記画像解析は、複数の車種の車の画像と対応する車種のテキストデータとの対応関係を機械学習により学習した人工知能による画像解析であることを特徴とする請求項１に記載の検索プログラム。
  3. 前記検索は、貸し出し可能な車の情報を記憶する記憶部を参照して、前記検索キーワードにマッチする貸し出し可能な車を検索する処理であることを特徴とする請求項１に記載の検索プログラム。
  4. 前記第１の車種についての第１の検索結果の表示画面と、前記第２の車種についての第２の検索結果の表示画面は、切り替え表示可能な関係の表示画面であることを特徴とする請求項１に記載の検索プログラム。
  5. 前記第１の車種についての第１の検索結果の表示画面と、前記第２の車種についての第２の検索結果の表示画面は、同じ画面上で異なる行又は列に区分されて表示されることを特徴とする請求項１に記載の検索プログラム。
  6. 前記第１の車種についての第１の検索結果の表示画面と、前記第２の車種についての第２の検索結果の表示画面は、フリック操作又はスワイプ操作で切り替え表示可能な関係の表示画面であることを特徴とする請求項１に記載の検索プログラム。
  7. 入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力する出力部と、
    出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、前記第１の車種、前記第２の車種ごとに区分した表示画面を生成する生成部と
    を備えることを特徴とする検索装置。
  8. 入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、
    出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第２の車種に対応するテキストデータを検索キーワードとして検索して得た第２の検索結果とを、前記第１の車種、前記第２の車種ごとに区分した表示画面を生成する
    処理をコンピュータに実行させることを特徴とする検索方法。
  9. 入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、
    出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第１の車種及び前記第２の車種に共通の項目を検索キーワードとして検索して得た第２の検索結果とを、前記第１の検索結果と前記第２の検索結果とを区分した表示画面を生成する
    処理をコンピュータに実行させることを特徴とする検索プログラム。
  10. 入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力する出力部と、
    出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第１の車種及び前記第２の車種に共通の項目を検索キーワードとして検索して得た第２の検索結果とを、前記第１の検索結果と前記第２の検索結果とを区分した表示画面を生成する生成部とを備えることを特徴とする検索装置。
  11. 入力された画像を画像解析して、該画像に含まれる可能性がある車の車種の判定結果をテキストデータとして出力し、
    出力された前記テキストデータが、第１の車種、第２の車種を判定結果として含む場合に、該第１の車種に対応するテキストデータを検索キーワードとして検索して得た第１の検索結果と、前記第１の車種及び前記第２の車種に共通の項目を検索キーワードとして検索して得た第２の検索結果とを、前記第１の検索結果と前記第２の検索結果とを区分した表示画面を生成する
    処理をコンピュータに実行させることを特徴とする検索方法。
  12. 画像を用いた検索の入力を受け付けた場合に、予め機械学習した教師データを記憶する記憶部を参照して、前記画像に関連するテキストデータを特定し、
    特定した前記テキストデータを用いて、前記画像と類似する画像に対応するテキストデータを検索し、
    検索結果であるテキストデータに基づいて、機械学習して分類されたグループ毎を識別可能に対応する画像を出力する、
    処理をコンピュータに実行させることを特徴とする検索プログラム。
  13. 画像を用いた検索の入力を受け付けた場合に、予め機械学習した教師データを記憶する記憶部を参照して、前記画像に関連するテキストデータを特定する特定部と、
    特定した前記テキストデータを用いて、前記画像と類似する画像に対応するテキストデータを検索する検索部と、
    検索結果であるテキストデータに基づいて、機械学習して分類されたグループ毎を識別可能に対応する画像を出力する出力部とを備えることを特徴とする検索装置。
  14. 画像を用いた検索の入力を受け付けた場合に、予め機械学習した教師データを記憶する記憶部を参照して、前記画像に関連するテキストデータを特定し、
    特定した前記テキストデータを用いて、前記画像と類似する画像に対応するテキストデータを検索し、
    検索結果であるテキストデータに基づいて、機械学習して分類されたグループ毎を識別可能に対応する画像を出力する、
    処理をコンピュータに実行させることを特徴とする検索方法。
JP2017090562A 2017-04-28 2017-04-28 検索プログラム、検索装置及び検索方法 Active JP7005932B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017090562A JP7005932B2 (ja) 2017-04-28 2017-04-28 検索プログラム、検索装置及び検索方法
EP18154377.8A EP3396566A1 (en) 2017-04-28 2018-01-31 Method, information processing apparatus and program
US15/886,251 US20180314890A1 (en) 2017-04-28 2018-02-01 Method, information processing apparatus and non-transitory computer-readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017090562A JP7005932B2 (ja) 2017-04-28 2017-04-28 検索プログラム、検索装置及び検索方法

Publications (2)

Publication Number Publication Date
JP2018190091A true JP2018190091A (ja) 2018-11-29
JP7005932B2 JP7005932B2 (ja) 2022-01-24

Family

ID=61132122

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017090562A Active JP7005932B2 (ja) 2017-04-28 2017-04-28 検索プログラム、検索装置及び検索方法

Country Status (3)

Country Link
US (1) US20180314890A1 (ja)
EP (1) EP3396566A1 (ja)
JP (1) JP7005932B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110442597A (zh) * 2019-07-10 2019-11-12 广州市巴图鲁信息科技有限公司 一种汽车配件精准查找方法
CN110909181A (zh) * 2019-09-30 2020-03-24 中国海洋大学 一种面向多类型海洋数据的跨模态检索方法及系统

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102081542B1 (ko) * 2019-09-06 2020-02-25 용 도 배 중장비 임대 및 매매 중개 방법
US11430042B2 (en) * 2020-04-30 2022-08-30 Capital One Services, Llc Methods and systems for providing a vehicle recommendation

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001229304A (ja) * 2000-02-14 2001-08-24 Takashi Tsutsui インターネットオークションの出品商品と出品者の信用問題、売買代金回収問題を解決するインターネットオークションの方法及びシステム
JP2003141409A (ja) * 2001-11-05 2003-05-16 Tsubasa System Co Ltd 車両販売台数提供方法及び車両販売台数提供システム
US20050267657A1 (en) * 2004-05-04 2005-12-01 Devdhar Prashant P Method for vehicle classification
EP2420941A1 (en) * 2010-08-20 2012-02-22 Deutsche Telekom AG System and method for providing object-related information
WO2015049732A1 (ja) * 2013-10-02 2015-04-09 株式会社日立製作所 画像検索方法、画像検索システム、および情報記録媒体

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003076694A (ja) 2001-09-05 2003-03-14 Canon Inc 画像検索装置及びその方法、プログラム
US8421872B2 (en) * 2004-02-20 2013-04-16 Google Inc. Image base inquiry system for search engines for mobile telephones with integrated camera
JP2007317034A (ja) 2006-05-27 2007-12-06 Ricoh Co Ltd 画像処理装置、画像処理方法、プログラムおよび記録媒体
US9015139B2 (en) * 2010-05-14 2015-04-21 Rovi Guides, Inc. Systems and methods for performing a search based on a media content snapshot image
WO2014186840A1 (en) * 2013-05-21 2014-11-27 Fmp Group (Australia) Pty Limited Image recognition of vehicle parts
US9946771B2 (en) * 2014-05-30 2018-04-17 Apple Inc. User interface for searching
US9665802B2 (en) * 2014-11-13 2017-05-30 Nec Corporation Object-centric fine-grained image classification
US10140017B2 (en) * 2016-04-20 2018-11-27 Google Llc Graphical keyboard application with integrated search
US10445576B2 (en) * 2016-09-23 2019-10-15 Cox Automotive, Inc. Automated vehicle recognition systems

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001229304A (ja) * 2000-02-14 2001-08-24 Takashi Tsutsui インターネットオークションの出品商品と出品者の信用問題、売買代金回収問題を解決するインターネットオークションの方法及びシステム
JP2003141409A (ja) * 2001-11-05 2003-05-16 Tsubasa System Co Ltd 車両販売台数提供方法及び車両販売台数提供システム
US20050267657A1 (en) * 2004-05-04 2005-12-01 Devdhar Prashant P Method for vehicle classification
EP2420941A1 (en) * 2010-08-20 2012-02-22 Deutsche Telekom AG System and method for providing object-related information
WO2015049732A1 (ja) * 2013-10-02 2015-04-09 株式会社日立製作所 画像検索方法、画像検索システム、および情報記録媒体

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110442597A (zh) * 2019-07-10 2019-11-12 广州市巴图鲁信息科技有限公司 一种汽车配件精准查找方法
CN110909181A (zh) * 2019-09-30 2020-03-24 中国海洋大学 一种面向多类型海洋数据的跨模态检索方法及系统

Also Published As

Publication number Publication date
US20180314890A1 (en) 2018-11-01
JP7005932B2 (ja) 2022-01-24
EP3396566A1 (en) 2018-10-31

Similar Documents

Publication Publication Date Title
CN106663109B (zh) 针对移动屏上内容提供自动动作
US20180068478A1 (en) Rendering Contiguous Image Elements
JP6487427B2 (ja) フレキシブルなイメージ・レイアウト
AU2022209288B2 (en) Personal information sharing method and apparatus, terminal device, and storage medium
JP7005932B2 (ja) 検索プログラム、検索装置及び検索方法
JP2017091567A (ja) イメージの提示
US20150019651A1 (en) Methods, systems, and user interfaces for community-based maps
WO2017218526A1 (en) Methods and systems for processing and displaying review data based on one or more stored relationship associations and one or more rule sets
US20160026643A1 (en) Presenting suggested facets
US11399002B2 (en) Social network collections
KR20160098951A (ko) 컨텐츠 공유 서버, 컨텐츠 공유 서버의 컨텐츠 리스트 제공 방법 및 컴퓨터 프로그램
JP7335109B2 (ja) 会話内容からテキストを利用して非テキストを検索する方法、システム、および非一時的なコンピュータ読み取り可能な記録媒体
US10331739B2 (en) Video search apparatus, video search method, and non-transitory computer readable medium
JP2018073396A (ja) 情報処理装置、情報処理方法及びプログラム
CN110162714B (zh) 内容推送方法、装置、计算设备和计算机可读存储介质
JP6364889B2 (ja) 表示制御プログラム、表示制御装置及び表示制御方法
JP6967041B2 (ja) 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム
JP7325562B2 (ja) コンピュータ・プログラムおよび非一時的なコンピュータ読み取り可能な記録媒体
US20160055174A1 (en) Facilitating searching for geographic place names
JP6896466B2 (ja) 表示プログラム、表示方法、端末装置、生成装置、生成方法、及び生成プログラム
JP2021034065A (ja) 画像認識モデルを用いた識別子情報推論のための電子装置、方法、プログラム及びシステム
CN116661648A (zh) 应用推荐方法、装置、计算机设备、存储介质和计算机程序产品
KR20230065750A (ko) 딥러닝 기반으로 장소 리뷰 이미지를 분류하는 방법, 시스템, 및 컴퓨터 프로그램
JP2018097560A (ja) 情報処理装置、情報処理方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200213

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210726

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211207

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211220

R150 Certificate of patent or registration of utility model

Ref document number: 7005932

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150