JP6867661B1 - Information processing methods, computer programs and information processing equipment - Google Patents
Information processing methods, computer programs and information processing equipment Download PDFInfo
- Publication number
- JP6867661B1 JP6867661B1 JP2020136750A JP2020136750A JP6867661B1 JP 6867661 B1 JP6867661 B1 JP 6867661B1 JP 2020136750 A JP2020136750 A JP 2020136750A JP 2020136750 A JP2020136750 A JP 2020136750A JP 6867661 B1 JP6867661 B1 JP 6867661B1
- Authority
- JP
- Japan
- Prior art keywords
- user
- work
- search
- information
- company
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 60
- 238000003672 processing method Methods 0.000 title claims abstract description 13
- 238000004590 computer program Methods 0.000 title claims abstract description 6
- 238000012545 processing Methods 0.000 claims description 127
- 238000003860 storage Methods 0.000 claims description 39
- 230000008901 benefit Effects 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 abstract description 17
- 238000000034 method Methods 0.000 description 70
- 230000008569 process Effects 0.000 description 51
- 238000004891 communication Methods 0.000 description 12
- 238000013473 artificial intelligence Methods 0.000 description 9
- 230000004044 response Effects 0.000 description 8
- 238000013528 artificial neural network Methods 0.000 description 6
- 238000004519 manufacturing process Methods 0.000 description 4
- 210000002569 neuron Anatomy 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000015654 memory Effects 0.000 description 3
- 230000000474 nursing effect Effects 0.000 description 3
- 230000008520 organization Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000012797 qualification Methods 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【課題】検索サービスの精度を向上することが期待できる情報処理方法、コンピュータプログラム及び情報処理装置を提供する。【解決手段】情報処理方法は、ユーザから検索のためのキーワードの入力を受け付け、当該キーワードに応じた一又は複数の検索対象に関する情報を出力する検索サービスを提供する情報処理装置が、キーワード及び検索対象を対応付ける作業の実施をユーザに依頼し、ユーザから作業の結果として、キーワード及び検索対象を対応付けた情報を取得し、作業を実施したユーザに対して特典を付与する。特典は、検索サービスを所定期間利用する権利であってよい。情報処理装置は、所定期間が経過する前に作業の実施をユーザに依頼してもよい。【選択図】図10PROBLEM TO BE SOLVED: To provide an information processing method, a computer program and an information processing device which can be expected to improve the accuracy of a search service. An information processing method is such that an information processing device that provides a search service that accepts input of a keyword for a search from a user and outputs information about one or a plurality of search targets corresponding to the keyword performs the keyword and search. The user is requested to perform the work of associating the target, and as a result of the work, the information associated with the keyword and the search target is acquired from the user, and the user who has performed the work is given a privilege. The privilege may be the right to use the search service for a predetermined period of time. The information processing device may request the user to perform the work before the predetermined period elapses. [Selection diagram] FIG. 10
Description
本発明は、検索サービスを提供するための情報処理方法、コンピュータプログラム及び情報処理装置に関する。 The present invention relates to an information processing method, a computer program, and an information processing device for providing a search service.
従来、ユーザが入力したキーワードに関連する情報を検索し、検索結果をユーザに提供する検索サービスが広く普及している。例えば特許文献1においては、クライアントがサーバに提供したキーワードに対応するグループキーワードをデータベースから探し、キーワードに該当する検索情報と共にグループキーワード及びキーワードを含む検索結果ページをサーバがクライアントに提供する検索システムが提案されている。この検索システムでは、クライアントが検索結果ページ上でキーワード又はグループキーワードを選択した場合、サーバは選択されたキーワード又はグループキーワードに対応するネットワークアドレスに該当するウェブページにクライアントを接続させる。
Conventionally, a search service that searches for information related to a keyword entered by a user and provides the search result to the user has become widespread. For example, in
近年、検索サービスの精度向上等を目的として、AI(Artificial Intelligence)が利用され始めている。AIを用いる検索サービスでは、例えばニューラルネットワークの学習モデルを用い、検索に用いられ得るキーワード等をこの学習モデルに予め学習させておく必要がある。学習モデルの学習を繰り返し行っていくことによって、検索の精度向上が期待できる。しかしながら、学習モデルの学習処理には、例えばキーワード及び検索対象を対応付けた学習用のデータを作成する必要があり、多大な労力が必要である。 In recent years, AI (Artificial Intelligence) has begun to be used for the purpose of improving the accuracy of search services. In a search service using AI, for example, it is necessary to use a learning model of a neural network and to train this learning model in advance for keywords and the like that can be used for the search. By repeating the learning of the learning model, the accuracy of the search can be expected to improve. However, in the learning process of the learning model, for example, it is necessary to create learning data in which keywords and search targets are associated with each other, which requires a great deal of labor.
本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、検索サービスの精度を向上することが期待できる情報処理方法、コンピュータプログラム及び情報処理装置を提供することにある。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide an information processing method, a computer program, and an information processing device which can be expected to improve the accuracy of a search service. is there.
一実施形態に係る情報処理方法は、情報処理装置が、検索サービスに係る検索用のキーワード及び検索対象を対応付ける作業の実施依頼を、前記検索サービスのユーザに送信し、前記ユーザから前記作業の結果として、キーワード及び検索対象を対応付けた情報を取得し、前記作業を実施したユーザに対して、前記検索サービスを所定期間利用する権利を付与する。 In the information processing method according to one embodiment, the information processing apparatus sends an execution request for a work of associating a search keyword and a search target related to the search service to a user of the search service, and the user sends the result of the work. As a result, the information associated with the keyword and the search target is acquired, and the user who has performed the work is given the right to use the search service for a predetermined period of time.
一実施形態による場合は、検索サービスの精度を向上することが期待できる。 In the case of one embodiment, it can be expected that the accuracy of the search service will be improved.
本発明の実施形態に係る情報処理システムの具体例を、以下に図面を参照しつつ説明する。なお、本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。 A specific example of the information processing system according to the embodiment of the present invention will be described below with reference to the drawings. It should be noted that the present invention is not limited to these examples, and is indicated by the scope of claims, and is intended to include all modifications within the meaning and scope equivalent to the scope of claims.
<システム概要>
図1は、本実施の形態に係る情報処理システムの概要を説明するための模式図である。本実施の形態に係る情報処理システムは、企業情報の検索サービスを提供するシステムである。ユーザは、端末装置3に表示された検索画面等において、企業に関連するキーワードの入力を行う。端末装置3はユーザが入力したキーワードを、検索サービスを提供するサーバ装置(情報処理装置)1へ送信する(矢印101参照)。サーバ装置1は、企業情報を記憶したデータベースを備えており、ユーザが入力したキーワードを端末装置3から取得し、取得したキーワードに対応する企業をデータベースから検索して、検索により得られた企業情報を端末装置3へ送信する(矢印102参照)。端末装置3はサーバ装置1からの企業情報を受信して表示し、キーワードを入力したユーザに対応する企業情報を提示する。
<System overview>
FIG. 1 is a schematic diagram for explaining an outline of an information processing system according to the present embodiment. The information processing system according to the present embodiment is a system that provides a search service for corporate information. The user inputs a keyword related to the company on the search screen or the like displayed on the
本実施の形態に係るサーバ装置1は、ユーザにより入力されたキーワードに応じた企業の検索処理を、いわゆるAIを利用して行っている。詳細は後述するが、本実施の形態に係るサーバ装置1が備えるAIは、例えばニューラルネットワークの構成が採用された学習モデルであり、キーワードに対する適切な企業を決定する処理に用いられる。学習モデルは、サーバ装置1又は別の装置において予め学習処理がなされ、学習済の学習モデルがサーバ装置1に記憶されている。学習モデルは、学習処理を繰り返し行う(再学習を行う)ことによって精度向上(即ち、キーワードの入力に対してより適切な企業情報を出力すること)が期待できるため、本実施の形態に係るサーバ装置1は、学習モデルの再学習に用いるデータを収集する処理を行う。
The
学習モデルの学習処理に用いるデータ、いわゆる教師データを作成する処理は、「アノテーション」と呼ばれる。本実施の形態に係る情報処理システムでは、検索サービスを利用するユーザ(検索サービスのユーザ)の端末装置3にこのアノテーションの作業の実施依頼を送信する(矢印103参照)。この依頼に応じて端末装置3は、ユーザによるアノテーションの作業を実施してその結果を取得し、取得したアノテーション結果をサーバ装置1へ送信する(矢印104参照)。サーバ装置1は、ユーザがアノテーションの作業を行った結果を端末装置3から取得して記憶する。サーバ装置1が記憶したアノテーション結果を用いて、サーバ装置1又は別の装置が学習モデルの再学習処理を行うことができる。本実施の形態においてユーザに依頼するアノテーションの作業は、1つの企業(検索対象)に対して一又は複数のキーワード(検索用のキーワード)を対応付ける作業とするが、これは一例である。このアノテーションの作業を単に作業ともいい、ユーザによりアノテーションの作業を行った結果が、アノテーションの作業を行った結果に相当する。
The process of creating data used for the learning process of the learning model, so-called teacher data, is called "annotation". In the information processing system according to the present embodiment, a request for executing the work of this annotation is transmitted to the
また本実施の形態に係る情報処理システムがユーザに対して提供する検索サービスは、例えば1ヶ月又は1年等の所定期間毎に所定額の利用料金を支払う必要がある有料のサービスである。ただし、上記のアノテーションの作業を実施したユーザに対してサーバ装置1は、利用料金の支払いを免除し、所定期間の検索サービスを利用する権利を特典として付与する(矢印105参照)。これにより本実施の形態に係る情報処理システムは、ユーザによるアノテーション作業の実施を促して、学習モデルの学習処理に必要なデータを蓄積し、学習モデルの再学習処理を繰り返し行うことにより、検索サービスの精度を向上することが期待できる。
Further, the search service provided to the user by the information processing system according to the present embodiment is a paid service that requires a predetermined amount of usage fee to be paid for each predetermined period such as one month or one year. However, the
なお本実施の形態においてユーザは、予め検索サービスの利用登録を行った利用者であり、必ずしも人(自然人)でなくてよく、企業又は組織等の法人であってもよい。また本実施の形態に係る情報処理システムが提供する検索サービスは、検索対象として企業情報を扱うものとするが、これに限るものではなく、検索対象は企業情報以外の種々の情報であってよい。また本実施の形態において企業には、例えば会社、組織、組合、事業体、団体及び法人等を含み得る。また本実施の形態においては、アノテーション作業の実施に対してユーザに与える特典を、検索サービスを利用する権利を付与することとしたが、これに限るものではなく、種々の特典をユーザに付与してよい。 In the present embodiment, the user is a user who has registered the use of the search service in advance, and is not necessarily a person (natural person), and may be a corporation such as a company or an organization. Further, the search service provided by the information processing system according to the present embodiment handles company information as a search target, but the search target is not limited to this, and the search target may be various information other than the company information. .. Further, in the present embodiment, the enterprise may include, for example, a company, an organization, a partnership, an entity, an organization, a corporation, or the like. Further, in the present embodiment, the right to use the search service is given to the privilege given to the user for the execution of the annotation work, but the present invention is not limited to this, and various benefits are given to the user. You can do it.
<装置構成>
図2は、本実施の形態に係るサーバ装置1の構成を示すブロック図である。本実施の形態に係るサーバ装置1は、処理部11、記憶部(ストレージ)12及び通信部(トランシーバ)13等を備えて構成されている。なお本実施の形態においては、1つのサーバ装置1にて処理が行われるものとして説明を行うが、複数のサーバ装置1が分散して処理を行ってもよい。
<Device configuration>
FIG. 2 is a block diagram showing a configuration of the
処理部11は、CPU(Central Processing Unit)又はMPU(Micro-Processing Unit)等の演算処理装置、ROM(Read Only Memory)、及び、RAM(Random Access Memory)等を用いて構成されている。処理部11は、記憶部12に記憶されたサーバプログラム12aを読み出して実行することにより、ユーザが入力したキーワードに対して検索した企業情報を提供する処理、及び、ユーザにアノテーションの作業を依頼する処理等の種々の処理を行う。
The
記憶部12は、例えばハードディスク等の大容量の記憶装置を用いて構成されている。記憶部12は、処理部11が実行する各種のプログラム、及び、処理部11の処理に必要な各種のデータを記憶する。本実施の形態において記憶部12は、処理部11が実行するサーバプログラム12aと、予め機械学習がなされた学習モデル12bとを記憶している。また記憶部12には、検索対象となる企業に関する情報を記憶する企業情報DB(データベース)12cと、検索サービスを利用するユーザに関する情報を記憶するユーザDB12dと、ユーザによるアノテーションの結果に関する情報を記憶するアノテーション情報DB12eとが設けられている。
The
本実施の形態においてサーバプログラム12aは、メモリカード又は光ディスク等の記録媒体99に記録された態様で提供され、サーバ装置1は記録媒体99からサーバプログラム12aを読み出して記憶部12に記憶する。ただし、サーバプログラム12aは、例えばサーバ装置1の製造段階において記憶部12に書き込まれてもよい。また例えばサーバプログラム12aは、遠隔の他のサーバ装置等が配信するものをサーバ装置1が通信にて取得してもよい。例えばサーバプログラム12aは、記録媒体99に記録されたものを書込装置が読み出してサーバ装置1の記憶部12に書き込んでもよい。サーバプログラム12aは、ネットワークを介した配信の態様で提供されてもよく、記録媒体99に記録された態様で提供されてもよい。
In the present embodiment, the
図3は、学習モデル12bの一構成例を示す模式図である。図示の学習モデル12bは、複数のニューロンが相互に結合したニューラルネットワークの構造をなしている。既存の技術であるため詳しい説明は省略するが、ニューロンは複数の入力に対して演算を行い、演算結果として1つの値を出力する素子である。ニューロンは、演算に用いられる重み付けの係数及び閾値等の情報を有している。ニューラルネットワークの学習モデル12bは、一又は複数のデータの入力を受け付ける入力層と、入力層にて受け付けられたデータに対して演算処理を行う中間層と、中間層の演算結果を集約して一又は複数の値を出力する出力層とを備えている。
FIG. 3 is a schematic diagram showing a configuration example of the
本実施の形態に係る学習モデル12bは、キーワードとなる一又は複数の単語又は文章等を入力として受け付ける。また学習モデル12bは、キーワードの入力に対して、入力されたキーワードに関連する企業の企業ラベルと、入力されたキーワードに対応するベクトル情報とを出力する。企業ラベルは、企業に対して一意に付されるものであり、本実施の形態においては例えば1〜9999までの整数値とする。ベクトル情報は、キーワードに対応して定まる例えば256次元又はそれ以上のベクトルである。なお学習モデル12bは、企業ラベルを出力し、ベクトル情報を出力しない構成であってもよい。また本図において学習モデル12bは企業ラベルを1つ出力しているが、学習モデル12bは複数の企業ラベルを出力する構成であってもよい。
The
本実施の形態において学習モデル12bは、例えばUniversal Sentence Encoder、又は、BERT(Bidirectional Encoder Representations from Transformers)等のモデルが採用され得る。Universal Sentence Encoderは、Attention及びTransformer等のモデルを複数の言語の学習データで学習させて得られるエンコーダであり、例えば英語及び日本語のような異なる言語であっても、同じ内容の入力文章であれば近い値のベクトルを出力する。なお、Universal Sentence Encoder及びBERT等の学習モデル12bは、既存の技術であるため、詳細な説明を省略する。また学習モデル12bは、Universal Sentence Encoder又はBERT等に限らず、例えばRNN(Recurrent Neural Network)及びLSTM(Long Short-Term Memory)によるエンコーダ等を採用してもよい。
In the present embodiment, as the
サーバ装置1の記憶部12に記憶された学習モデル12bは、予め学習処理がなされた学習済のモデルである。学習処理は、予め与えられた多数の学習用データを用いて、ニューラルネットワークを構成する各ニューロンの係数及び閾値等に適切な値を設定する処理である。本実施の形態に係る学習モデル12bは、少なくとも最初の段階において、例えば企業のホームページ又は刊行物等から抽出したキーワード(単語又は文章等)に基づいて作成された学習用データを用いて学習処理が行われる。このときの学習処理は、キーワードに対して企業ラベルの対応付けられた教師データを用いるいわゆる教師あり学習であってよく、企業ラベルが対応付けられていないキーワードを学習用データとして用いるいわゆる教師なし学習であってよい。学習処理に用いられるデータの作成は、本システムの設計者等が行ってもよく、サーバ装置1等の装置が行ってもよい。本実施の形態において学習モデル12bの2回目以降の学習処理(再学習処理)は、サーバ装置1が収集したアノテーション情報、即ち検索サービスを利用するユーザが作成したアノテーション情報を用いて行われる。
The
図4は、企業DB12cの一構成例を示す模式図である。本実施の形態に係る企業DB12cは、例えば「企業ラベル」、「企業名」、「企業属性情報」及び「詳細情報」等の情報を対応付けて記憶する。「企業ラベル」は、企業に対して一意に付される識別情報であり、学習モデル12bが出力する企業ラベルに対応するものである。本実施の形態において「企業ラベル」は、1〜9999までの整数値とする。図示の例では、「企業ラベル」が4桁の「0001」及び「0002」と示されているが、これは整数値の「1」及び「2」に対応するものである。「企業名」は、企業の名称等であり、文字列の情報である。図示の例では、「企業名」として「A株式会社」及び「B商事」が示されている。
FIG. 4 is a schematic diagram showing a configuration example of the
「企業属性情報」は、企業の性質又は特徴等を表す一又は複数の情報である。本実施の形態において「企業属性情報」には、例えば「業種」及び「所在地」等の複数の情報が含まれている。「業種」は、企業が営む事業の種類であり、本例では「A株式会社」について「製造業」が、「B商事」について「輸入業」が示されている。「所在地」は、企業の例えば本社等が存在する場所を示す情報であり、本例では「A株式会社」について「東京」が、「B商事」について「神奈川」が示されている。「企業属性情報」には、上記の「業種」及び「所在地」の他にも、例えば事業年数、社員数、資本数又は売上等の種々の情報が記憶され得る。「詳細情報」は、企業に関する「企業属性情報」以外の情報であり、文字列の情報の他に画像、音声又はリンク等の種々の情報が含まれ得る。「詳細情報」は、例えば企業に関するニュース等の文章、企業のホームページのURL(Uniform Resource Locator)、企業が扱う商品の画像、又は、企業の広告(コマーシャル、CM(Commercial Message))の動画像等の種々の情報が記憶され得る。「詳細情報」は、検索結果と共にユーザに対して提示される情報である。 "Corporate attribute information" is one or more pieces of information representing the nature or characteristics of a company. In the present embodiment, the "corporate attribute information" includes a plurality of information such as "industry" and "location". "Industry" is a type of business run by a company. In this example, "Manufacturing industry" is indicated for "A Co., Ltd." and "Import industry" is indicated for "B Shoji". The "location" is information indicating the place where, for example, the head office of a company is located. In this example, "Tokyo" is indicated for "A Co., Ltd." and "Kanagawa" is indicated for "B Shoji". In addition to the above-mentioned "industry" and "location", various information such as the number of business years, the number of employees, the number of capitals, and sales can be stored in the "corporate attribute information". The "detailed information" is information other than the "corporate attribute information" about the company, and may include various information such as images, sounds, and links in addition to the character string information. "Detailed information" includes, for example, texts such as news about a company, URL (Uniform Resource Locator) of a company's homepage, images of products handled by the company, or moving images of company advertisements (commercial, CM (Commercial Message)), etc. Various information can be stored. "Detailed information" is information presented to the user together with the search result.
図5は、ユーザDB12dの一構成例を示す模式図である。本実施の形態に係るユーザDB12dは、「ユーザID」、「ユーザ名」、「ユーザ属性情報」及び「無料期限」等の情報を対応付けて記憶する。「ユーザID」は、ユーザに対して一意に付される識別情報であり、文字及び数字等の組み合わせによる情報である。図示の例では「ユーザID」として「U001」及び「U002」が示されている。「ユーザ名」は、ユーザの名前である。図示の例では「ユーザ名」として「ユーザA」及び「ユーザB」が示されているが、実際にはユーザの本名等が記憶される。
FIG. 5 is a schematic diagram showing a configuration example of the
「ユーザ属性情報」は、ユーザの性質又は特徴等を表す一又は複数の情報である。本実施の形態において「ユーザ属性情報」には、例えば「業種」及び「住所」等の複数の情報が含まれている。「業種」は、ユーザが務める企業の業種であり、本例では「ユーザA」について「製造業」が、「ユーザB」について「建築業」が示されている。「住所」は、ユーザの居住地を示す情報であり、本例では「ユーザA」及び「ユーザB]についていずれも「東京」が示されている。「ユーザ属性情報」には、上記の「業種」及び「住所」の他にも、例えば性別、年齢、学歴、保有資格、趣味及び特技等の種々の情報が含まれ得る。 "User attribute information" is one or more pieces of information representing the nature or characteristics of the user. In the present embodiment, the "user attribute information" includes a plurality of information such as "industry" and "address". The "industry" is the industry of the company in which the user works. In this example, "manufacturing industry" is indicated for "user A" and "construction industry" is indicated for "user B". The "address" is information indicating the place of residence of the user, and in this example, "Tokyo" is indicated for both "user A" and "user B". In addition to the above-mentioned "industry" and "address", the "user attribute information" may include various information such as gender, age, educational background, qualifications, hobbies, and special skills.
「無料期限」は、ユーザが検索サービスを無料で利用することができる期限に関する情報である。本実施の形態に係る情報処理システムでは、サーバ装置1からの依頼によりアノテーションの作業を行ったユーザに対して、検索サービスを所定期間だけ無料で利用することができる権利が特典として付与される。「無料期限」は、この特典として付与された無料で利用できる所定期間の最終日であり、本例では「ユーザA」について「2020/8/15」が、「ユーザB」について「2020/7/31」が示されている。
The "free expiration date" is information regarding the expiration date during which the user can use the search service for free. In the information processing system according to the present embodiment, the user who has performed the annotation work at the request of the
図6は、アノテーション情報DB12eの一構成例を示す模式図である。本実施の形態に係るアノテーション情報DB12eは、「企業ラベル」、「企業名」、「キーワード」及び「作業ユーザ」等の情報を対応付けて記憶する。「企業ラベル」及び「企業名」は、上述の企業DB12cに記憶される「企業ラベル」及び「企業名」と同じものである。図示の例では、「企業ラベル」が「0001」であり「企業名」が「A株式会社」の企業と、「企業ラベル」が「0032」であり「企業名」が「株式会社N」の企業とが示されている。
FIG. 6 is a schematic diagram showing a configuration example of the annotation information DB 12e. The annotation information DB 12e according to the present embodiment stores information such as "company label", "company name", "keyword", and "working user" in association with each other. The "company label" and "company name" are the same as the "company label" and "company name" stored in the above-mentioned
「キーワード」は、アノテーションの作業によりユーザが企業に対して対応付けた単語等である。「キーワード」には、一又は複数の単語等が記憶される。図示の例では、「キーワード」として「A株式会社」に「コンピュータ、人工知能、…」等の単語が対応付けられ、「株式会社N」に「自動車、バイク」等の単語が対応付けられている。「作業ユーザ」は、企業に対してキーワードの対応付けを行ったユーザを特定するための情報であり、例えばユーザに付されたユーザIDが記憶される。図示の例では、「作業ユーザ」として「U005」及び「U106」のユーザIDが示されている。 The "keyword" is a word or the like that the user associates with the company by the work of annotation. One or more words or the like are stored in the "keyword". In the illustrated example, "A Co., Ltd." is associated with words such as "computer, artificial intelligence, ..." and "N Co., Ltd." is associated with words such as "automobile, motorcycle". There is. The "working user" is information for identifying a user who has associated a keyword with a company, and for example, a user ID attached to the user is stored. In the illustrated example, the user IDs of "U005" and "U106" are shown as "working users".
サーバ装置1の通信部13は、社内LAN(Local Area Network)、無線LAN及びインターネット等を含むネットワークNを介して、種々の装置との間で通信を行う。本実施の形態において通信部13は、ネットワークNを介して、一又は複数のユーザが利用する端末装置3との間で通信を行う。通信部13は、処理部11から与えられたデータを他の装置へ送信すると共に、他の装置から受信したデータを処理部11へ与える。
The
なお記憶部12は、サーバ装置1に接続された外部記憶装置であってよい。またサーバ装置1は、複数のコンピュータを含んで構成されるマルチコンピュータであってよく、ソフトウェアによって仮想的に構築された仮想マシンであってもよい。またサーバ装置1は、上記の構成に限定されず、例えば可搬型の記憶媒体に記憶された情報を読み取る読取部、操作入力を受け付ける入力部、又は、画像を表示する表示部等を含んでもよい。
The
また本実施の形態に係るサーバ装置1の処理部11には、記憶部12に記憶されたサーバプログラム12aを処理部11が読み出して実行することにより、検索処理部11a、アノテーション処理部11b、特典付与部11c及び学習処理部11d等がソフトウェア的な機能部として実現される。なおこれらの機能部は、検索サービス及びアノテーション等の処理に関する機能部であり、これ以外の機能部については図示及び説明を省略する。
Further, in the
検索処理部11aは、ユーザが端末装置3にて入力した検索用のキーワードに対し、検索結果として企業情報を端末装置3へ送信し、キーワードに対応する企業情報をユーザに提示する処理を行う。検索処理部11aは、ユーザが入力したキーワードを端末装置3から取得する。検索処理部11aは、端末装置3から取得したキーワードを記憶部12の学習モデル12bへ入力し、学習モデル12bが出力する企業ラベルを取得する。検索処理部11aは、学習モデル12bが出力する企業ラベルに対応する企業に関する情報を企業情報DB12cから読み出して、読み出した情報を端末装置3へ送信する。これにより端末装置3は、サーバ装置1から受信した情報を表示し、入力されたキーワードにより検索された企業の情報をユーザに提示することができる。
The
アノテーション処理部(作業依頼送信部及び作業結果取得部)11bは、学習モデル12bの再学習処理に用いられる学習用データを作成するため、企業とキーワードとを対応付けるアノテーションの処理を行う。本実施の形態に係る情報処理システムではアノテーションの作業はユーザにより行われ、アノテーション処理部11bは、ユーザに対してアノテーションを依頼する処理、及び、ユーザによるアノテーションの結果を取得する処理を行う。本実施の形態においてアノテーション処理部11bは、検索サービスを無料で利用できる所定期間が終了する日から所定日数(例えば10日又は2週間等)前に至ったユーザに対して、アノテーションの作業の実施依頼を送信する。なお上記の所定期間及び所定日数は、同じであってもよい。即ち、ユーザが検索サービスを無料で利用できる期間が始まった際に(同時に又は直後に)、このユーザに対してアノテーションの作業を依頼してもよい。また例えば、検索サービスを無料で利用できる期間が終了した際又はその後に、ユーザに対するアノテーションの作業の依頼が行われてもよい。また例えばアノテーションの作業をユーザに対して毎日、3日毎又は1週間毎等の周期で繰り返し依頼してもよい。アノテーション処理部11bがアノテーションの作業を依頼するタイミング、頻度及び回数等は、どのようなタイミング、頻度及び回数等であってもよい。
The annotation processing unit (work request transmission unit and work result acquisition unit) 11b performs annotation processing for associating a company with a keyword in order to create learning data used for re-learning processing of the
このときにアノテーション処理部11bは、企業DB12cに登録されている複数の企業の中から、ユーザにアノテーションを依頼する対象の企業を選択する。例えばアノテーション処理部11bは、ユーザによる企業情報の閲覧数を計数し、閲覧数が多い企業を優先的に選択してアノテーションの対象とすることができる。また例えばアノテーション処理部11bは、アノテーションの実施数を計数し、実施数が少ない企業を優先的に選択してアノテーションの対象とすることができる。また例えばアノテーション処理部11bは、アノテーションを依頼するユーザのユーザ属性情報に基づいて、業種が同じ企業又は近い企業をアノテーションの対象とすることができ、所在地がユーザの住所に近い企業をアノテーションの対象とすることができる。これらアノテーションの対象となる企業の選択方法は、一例であってこれに限るものではなく、アノテーション処理部11bは、どのような方法で企業を選択してもよい。
At this time, the
アノテーション処理部11bは、アノテーション対象の企業と、この企業に対応付ける候補となる複数のキーワードとを組にして、アノテーションを依頼するユーザの端末装置3へ送信する。このときにアノテーション処理部11bは、例えばこの企業のホームページ等から抽出した単語を候補キーワードとすることができ、また例えば予め用意された単語の集まりの中からランダムに選択した単語を候補キーワードとすることができる。候補キーワードの選択方法はどのような方法であってもよい。また候補キーワードを提示するのではなく、ユーザから任意の文字列の入力を受け付けて、この企業に対応付けるキーワードとしてもよい。
The
アノテーション処理部11bは、アノテーションの作業の実施依頼を送信したユーザの端末装置3から、アノテーションの作業をユーザが実施した結果、即ち企業に対するキーワードの対応付けの結果を取得する。アノテーション処理部11bは、取得した結果を記憶部12のアノテーション情報DB12eに記憶する。
The
特典付与部11cは、アノテーションの依頼に対してこれを実施したユーザに特典を付与する処理を行う。本実施の形態に係る情報処理システムでは、上述のように検索サービスの利用が有料であるが、特典付与部11cはアノテーションを実施したユーザに対して検索サービスを無料で利用する権利を付与する。特典付与部11cは、例えば所定の期間(検索サービスを無料で利用することが可能な期間と同じであってもよく、別の期間であってもよい)におけるユーザのアノテーションの実施数が所定数(10件又は100件等)に達した場合に、このユーザに対して特典を付与する。特典付与部11cは、特典を付与することを決定したユーザについて、ユーザDB12dの「無料期限」を所定期間だけ延長するよう更新することで、特典を付与することができる。
The
学習処理部11dは、学習モデル12bを学習する処理を行う。学習処理部11dは、アノテーション情報DB12eに蓄積された情報を基に、学習モデル12bを学習するための教師データ、即ち企業(企業ラベル)とキーワードとを対応付けたデータを生成する。なお、ユーザにより行われたアノテーションの結果は、必ずしも正しいとは限らない。このため学習処理部11dは、アノテーション情報DB12eに蓄積された情報から、正しいと判断できるアノテーション結果を選択して教師データを生成する。
The
アノテーション結果の正否は、例えば以下の方法で判定することができる。例えば1つの企業に対して複数のユーザにアノテーションを依頼し、閾値を超える数のユーザがこの企業に対して対応付けたキーワードを、この企業に対応付ける正しいキーワードと判定することができる。また例えば、ユーザ毎にこれまでのアノテーション作業の実績を管理し、キーワードの正しい対応付けを行った実績の高いユーザによるアノテーション結果を、正しいアノテーション結果と判定することができる。また例えば、一のユーザによるアノテーション結果の正否判定を他のユーザに依頼し、この正否判定の作業に対しても特典を与えることができる。これらのアノテーション結果の正否判定は一例であってこれに限るものではなく、学習処理部11dは、どのような方法でアノテーション結果の正否を判定してもよく、正否判定を行わずにアノテーション結果を利用して教師データを生成してもよい。
The correctness of the annotation result can be determined by, for example, the following method. For example, it is possible to request annotations from a plurality of users for one company, and determine that the keywords associated with this company by the number of users exceeding the threshold value are the correct keywords associated with this company. Further, for example, it is possible to manage the achievements of the annotation work so far for each user, and determine the annotation result by the user who has a high achievement of correctly associating the keywords as the correct annotation result. Further, for example, it is possible to request another user to determine the correctness of the annotation result by one user, and to give a privilege to the work of the correctness determination. The correctness determination of these annotation results is an example and is not limited to this. The
学習処理部11dは、例えば1週間又は1ヶ月等の周期で、学習モデル12bの学習処理(再学習処理)を行ってよい。なお、学習モデル12bの学習処理は、サーバ装置1とは別の装置にて行われてもよく、この場合にはサーバ装置1は学習処理部11dを備えず、別の装置が学習処理部11dを備えてよい。
The
図7は、本実施の形態に係る端末装置3の構成を示すブロック図である。本実施の形態に係る端末装置3は、処理部31、記憶部(ストレージ)32、通信部(トランシーバ)33、表示部(ディスプレイ)34及び操作部35等を備えて構成されている。端末装置3は、例えば汎用のパーソナルコンピュータ、スマートフォン又はタブレット型端末装置等の情報処理装置を用いて構成され得る。
FIG. 7 is a block diagram showing the configuration of the
処理部31は、CPU又はMPU等の演算処理装置、ROM及びRAM等を用いて構成されている。処理部31は、記憶部32に記憶されたプログラム32aを読み出して実行することにより、ユーザによる検索用のキーワードを受け付ける処理、キーワードに応じた検索結果を表示する処理、及び、サーバ装置1からの依頼に基づくアノテーションの作業に関する処理等の種々の処理を行う。
The
記憶部32は、例えばハードディスク等の磁気記憶装置又はフラッシュメモリ等の不揮発性のメモリ素子を用いて構成されている。記憶部32は、処理部31が実行する各種のプログラム、及び、処理部31の処理に必要な各種のデータを記憶する。本実施の形態において記憶部32は、処理部31が実行するプログラム32aを記憶している。本実施の形態においてプログラム32aは遠隔のサーバ装置等により配信され、これを端末装置3が通信にて取得し、記憶部32に記憶する。ただしプログラム32aは、例えば端末装置3の製造段階において記憶部32に書き込まれてもよい。例えばプログラム32aは、メモリカード又は光ディスク等の記録媒体98に記録されたプログラム32aを端末装置3が読み出して記憶部32に記憶してもよい。例えばプログラム32aは、記録媒体98に記録されたものを書込装置が読み出して端末装置3の記憶部32に書き込んでもよい。プログラム32aは、ネットワークを介した配信の態様で提供されてもよく、記録媒体98に記録された態様で提供されてもよい。
The
通信部33は、社内LAN、無線LAN及びインターネット等を含むネットワークNを介して、種々の装置との間で通信を行う。本実施の形態において通信部33は、ネットワークNを介して、サーバ装置1との間で通信を行う。通信部33は、処理部31から与えられたデータを他の装置へ送信すると共に、他の装置から受信したデータを処理部31へ与える。
The
表示部34は、液晶ディスプレイ等を用いて構成されており、処理部31の処理に基づいて種々の画像及び文字等を表示する。本実施の形態において表示部34は、例えば企業の検索のためのキーワードを入力する画面、検索結果を表示する画面、及び、アノテーションの作業を受け付ける画面等の種々の画面表示を行う。
The
操作部35は、ユーザの操作を受け付け、受け付けた操作を処理部31へ通知する。例えば操作部35は、機械式のボタン又は表示部34の表面に設けられたタッチパネル等の入力デバイスによりユーザの操作を受け付ける。また例えば操作部35は、マウス及びキーボード等の入力デバイスであってよく、これらの入力デバイスは端末装置3に対して取り外すことが可能な構成であってもよい。
The
また本実施の形態に係る端末装置3は、記憶部32に記憶されたプログラム32aを処理部31が読み出して実行することにより、検索処理部31a及びアノテーション処理部31b等がソフトウェア的な機能部として処理部31に実現される。なおプログラム32aは、本実施の形態に係る情報処理システムに専用のプログラムであってもよく、インターネットブラウザ又はウェブブラウザ等の汎用のプログラムであってもよい。
Further, in the
検索処理部31aは、本実施の形態に係る情報処理システムが提供する企業の検索サービスの利用に関する種々の処理を行う。検索処理部31aは、ユーザから検索用のキーワードの入力を受け付けて、受け付けたキーワードをサーバ装置1へ送信する。端末装置3から送信されたキーワードに応じてサーバ装置1にて企業の検索が行われ、検索処理部31aは、サーバ装置1から検索結果として送信される企業の情報を受信する。検索処理部31aは、受信した企業情報を表示部34に表示する。
The
アノテーション処理部31bは、サーバ装置1からの依頼に応じたアノテーションの実施に関する処理を行う。アノテーション処理部31bは、サーバ装置1からアノテーションの実施依頼と共に送信される企業及び候補キーワードの情報を受信する。アノテーション処理部31bは、受信した情報に基づいて、アノテーションを行うための画面、例えばアノテーション対象の企業の名称と、複数の候補キーワードとを表示(提示)した画面を表示部34に表示する。アノテーション処理部31bは、アノテーション用の画面において、ユーザが複数の候補キーワードの中から選択した候補キーワードを、企業に対応付けるキーワードとして受け付ける。アノテーション処理部31bは、アノテーション対象の企業と、ユーザが選択したキーワードとを対応付けた情報を、アノテーションの結果としてサーバ装置1へ送信する。
The
<検索処理>
本実施の形態に係る情報処理システムは、サーバ装置1が企業DB12cに蓄積した企業情報をユーザに提供するシステムである。なお本実施の形態においては、サーバ装置1が提供するサービスの利用には予めユーザ登録が必要であり、サービスの利用は有料である。ただし、ユーザが初めて本サービスの利用を開始してから所定期間(例えば1週間又は1ヶ月等)は、無料でサービスを利用することが可能であってもよい。ユーザは利用料金の支払いを行うことで本サービスを利用する権利を得ることができるが、本実施の形態においてはサーバ装置1が依頼するアノテーションの作業をユーザが実施することによって、ユーザは所定期間に亘って本サービスを無料で利用する権利を得ることができる。
<Search process>
The information processing system according to the present embodiment is a system in which the
サービスを利用する権利を得たユーザは、自身の端末装置3にて所定のアプリケーションプログラムを起動するか、又は、Webブラウザ等のプログラムにて本システムのWebページにアクセスすることで、本サービスを利用することができる。例えばユーザは、情報を必要とする企業の企業名を直接的に入力するか、又は、企業名の一覧等から所望の企業名を選択することで、この企業の情報を端末装置3に表示させることができる。また本実施の形態においては、ユーザは端末装置3にてキーワードを入力し、このキーワードに応じた一又は複数の企業の情報を端末装置3に表示させることができる。端末装置3は、キーワードを入力するボックス等が設けられた検索画面を表示部34に表示して、ユーザからキーワードの入力を受け付ける。端末装置3は、受け付けた一又は複数のキーワードをサーバ装置1へ送信し、企業情報の検索を要求する。
A user who has obtained the right to use the service can use the service by starting a predetermined application program on his / her own
サーバ装置1は、ユーザが端末装置3にて入力したキーワードを取得し、取得したキーワードに応じた企業を企業DB12cから検索し、キーワードに応じた企業の情報を端末装置3へ送信する。このときにサーバ装置1は、端末装置3から取得したキーワードを記憶部12の学習モデル12bへ入力し、学習モデル12bが出力する企業ラベルを取得し、取得した企業ラベルに応じた企業の情報を企業DB12cから読み出す。なお学習モデル12bは複数の企業ラベルを出力してよく、サーバ装置1はユーザによる1回のキーワードの入力に対して複数の企業についての企業情報を端末装置3に送信してもよい。
The
端末装置3は、キーワードの入力に応じてサーバ装置1から送信される企業情報を受信する。端末装置3は、受信した一又は複数の企業情報を表示部34に表示する。
The
図8は、本実施の形態に係る端末装置3が行う検索処理の手順を示すフローチャートである。本実施の形態に係る端末装置3の処理部31の検索処理部31aは、例えばキーワードを入力するためのテキストボックス等が設けられた検索画面を表示部34に表示する(ステップS1)。検索処理部31aは、検索画面において検索用のキーワードが入力されたか否かを判定する(ステップS2)。キーワードが入力されていない場合(S2:NO)、検索処理部31aは、ステップS1へ処理を戻し、検索画面の表示を維持してキーワードの入力を待機する。キーワードが入力された場合(S2:YES)、検索処理部31aは、入力されたキーワードを取得して、取得したキーワードをサーバ装置1へ送信する(ステップS3)。
FIG. 8 is a flowchart showing the procedure of the search process performed by the
その後、検索処理部31aは、キーワードの送信に対してサーバ装置1から検索結果として送信される企業情報を受信したか否かを判定する(ステップS4)。企業情報を受信していない場合(S4:NO)、検索処理部31aは、企業情報を受信するまで待機する。企業情報を受信した場合(S4:YES)、検索処理部31aは、受信した企業情報を検索結果として表示部34に表示し(ステップS5)、処理を終了する。
After that, the
図9は、本実施の形態に係るサーバ装置1が行う検索処理の手順を示すフローチャートである。本実施の形態に係るサーバ装置1の処理部11の検索処理部11aは、端末装置3から検索用のキーワードを受信したか否かを判定する(ステップS11)。キーワードを受信していない場合(S11:NO)、検索処理部11aは、端末装置3からキーワードを受信するまで待機する。キーワードを受信した場合(S11:YES)、検索処理部11aは、受信したキーワードを記憶部12の学習モデル12bへ入力する(ステップS12)。検索処理部11aは、キーワードの入力に応じて学習モデル12bが出力する企業ラベルを取得する(ステップS13)。検索処理部11aは、取得した企業ラベルを基に、記憶部12の企業DB12cから企業情報を読み出す(ステップS14)。検索処理部11aは、読み出した企業情報を、キーワードの送信元の端末装置3へ送信し(ステップS15)、ステップS11へ処理を戻す。
FIG. 9 is a flowchart showing the procedure of the search process performed by the
<アノテーション処理>
本実施の形態に係る情報処理システムでは、検索精度を向上させるためサーバ装置1の学習モデル12bの再学習が定期的に行われる。この再学習に用いる教師データを生成するため、サーバ装置1は、企業とこの企業に関連するキーワードとの対応付けの作業、いわゆるアノテーションの作業を、検索サービスを利用するユーザに依頼する。またサーバ装置1は、アノテーションの作業を実施したユーザに対して、検索サービスを所定期間に亘って無料で利用できる権利を特典として付与する。これにより情報処理システムは、ユーザにアノテーションの作業の実施を促し、より多くの教師データを作成して学習モデル12bの再学習処理を行い、学習モデル12bを用いる検索サービスの精度を向上させることができる。
<Annotation processing>
In the information processing system according to the present embodiment, the
サーバ装置1は、各ユーザについて、検索サービスを無料で利用できる期間を管理している。記憶部12のユーザDB12dに「無料期限」として記憶されている情報がこの管理に用いられる。サーバ装置1は、例えば無料期限まで所定日数(例えば2週間等)になったユーザをユーザDB12dから選択し、このユーザにアノテーションの作業の実施依頼を送信する。このときにサーバ装置1は、企業DB12cに登録された複数の企業の中から、アノテーションの対象とする企業を選択すると共に、企業に対応付けるキーワードの候補を複数選択し、企業及び複数の候補キーワードをユーザの端末装置3へ送信してアノテーションの作業を依頼する。
The
サーバ装置1によるアノテーションの対象とする企業の選択は、例えば以下の(1)〜(3)の方法で行うことができる。サーバ装置1は、これらの方法うちのいずれか1つを採用してもよく、複数の方法を併用してもよく、これら以外の方法を採用してもよい。
(1)企業情報の閲覧数に基づく選択
(2)アノテーションの実施数に基づく選択
(3)属性情報に基づく選択
The company to be annotated by the
(1) Selection based on the number of views of company information (2) Selection based on the number of annotations performed (3) Selection based on attribute information
(1)企業情報の閲覧数に基づく選択
本実施の形態に係る検索サービスでは、ユーザは企業情報を得ることを目的にサービスを利用する。企業情報の閲覧数が多い企業はユーザにとって必要とされる人気の企業であり、今後も多くのユーザが閲覧する可能性が高い。このような企業を優先的にアノテーションの対象として検索精度を向上することで、より優れた検索サービスを提供することが期待できる。例えばサーバ装置1は、企業情報DB12cに登録された企業毎に閲覧数をカウントし、1週間又は1ヶ月等の所定期間における閲覧数の順位付けを行う。サーバ装置1は、閲覧数の順位に応じて企業の選択確率に重み付け、即ち順位が高い企業ほど選択確率が高くなるような重み付けを行い、企業情報DB12cに登録された全企業の中からアノテーションの対象とする企業を選択する。
(1) Selection based on the number of views of company information In the search service according to this embodiment, the user uses the service for the purpose of obtaining company information. Companies with a large number of views of corporate information are popular companies that are needed by users, and there is a high possibility that many users will continue to view them in the future. By preferentially targeting such companies as annotation targets and improving search accuracy, it can be expected to provide better search services. For example, the
(2)アノテーションの実施数に基づく選択
再学習処理のための教師データが多いほど検索精度の向上が期待でき、企業のアノテーションの実施数が多いほどこの企業に関する検索精度の向上が期待できる。アノテーションの実施数にバラツキがある場合、企業間で検索精度に差異が生じる可能性があるが、アノテーションの実施数が少ない企業を優先的にアノテーションの対象として選択することでこれを回避又は低減等することが期待できる。例えばサーバ装置1は、企業情報DB12cに登録された企業毎にアノテーションの実施数をカウントし、1週間又は1ヶ月等の所定期間におけるアノテーションの実施数の順位付けを行う。サーバ装置1は、アノテーションの実施数の順位に応じて企業の選択確率に重み付け、即ち実施数が少ない企業ほど選択確率が高くなるような重み付けを行い、企業情報DB12cに登録された全企業の中からアノテーションの対象とする企業を選択する。
(2) Selection based on the number of annotations performed The more teacher data for the re-learning process, the better the search accuracy can be expected, and the larger the number of annotations performed by a company, the better the search accuracy for this company. If there is a variation in the number of annotations, there is a possibility that the search accuracy will differ between companies, but this can be avoided or reduced by preferentially selecting companies with a small number of annotations as annotation targets. You can expect to do it. For example, the
(3)属性情報に基づく選択
本実施の形態においてサーバ装置1は、各企業の企業属性情報を企業情報DB12cに記憶すると共に、各ユーザのユーザ属性情報をユーザDB12dに記憶している。例えば企業属性情報及びユーザ属性情報に含まれる業種に着目した場合、ユーザは自分の職業の業種に近い業種の企業について信頼性の高いアノテーションを実施することが期待できる。また例えば企業属性情報に含まれる所在地及びユーザ属性情報に含まれる住所に着目した場合、ユーザは自身が居住している場所又は自身が勤務する企業の所在する場所等の近くに所在する企業について信頼性の高いアノテーションを実施することが期待できる。サーバ装置1は、企業情報DB12cに記憶された企業情報に含まれる特定の企業属性情報と、ユーザDB12dに記憶されたユーザに関する特定のユーザ属性情報とを比較し、アノテーションの作業を依頼するユーザのユーザ属性情報に対して所定の条件を満たす企業属性情報を有する企業を、アノテーションの対象の企業として選択する。なお企業の選択に用いる企業属性情報及びユーザ属性情報は、上記の業種及び所在地等に限らず、種々の情報が採用され得る。企業属性情報及びユーザ属性情報に基づいて、サーバ装置1は、例えばユーザが勤務する企業の取引先(仕入れ元もしくは販売先等)の企業を選択してもよく、また例えばユーザが勤務する企業の競合の企業又は取り扱う商品が類似している企業等を選択してもよい。
(3) Selection Based on Attribute Information In the present embodiment, the
また、サーバ装置1は、アノテーションの作業において企業に対応付けるキーワードの候補を選択する際に、例えばこの企業のホームページ等から抽出した単語を候補キーワードとしてもよく、また例えば予め用意された単語の集まりの中からランダムに選択した単語を候補キーワードとしてもよい。単語の集まりは、例えば検索サービスを利用するユーザがキーワードとして入力した単語をサーバ装置1が記憶しておくことで予め用意することができる。
Further, when selecting a keyword candidate associated with a company in the annotation work, the
サーバ装置1からアノテーションの実施依頼と共にアノテーションの対象となる企業及びこの企業に対応付けるキーワードの候補を与えられた端末装置3は、これらの情報に基づいて、ユーザがアノテーションの作業を行うためのアノテーション画面を表示部34に表示する。図10は、アノテーション画面の一例を示す模式図である。本実施の形態に係る端末装置3が表示するアノテーション画面では、最上部に「株式会社Xに関連するキーワードを選択・入力してください」のメッセージが表示される。このメッセージにより、アノテーションの対象となる企業が「株式会社X」であることを示している。
The company to be annotated together with the request for annotation from the
端末装置3は、このメッセージの下方に、キーワードがラベルとして付されたボタンをマトリクス状に並べて表示する。図示の例では、「AI」、「IoT」、「ブロックチェーン」、「5G」、「スマートグリッド」、「量子コンピューティング」、「飲食業」、「卸売業」、「介護」、「運送業」、「保険」及び「医療」のラベルが付された12個のボタンが、4行×3列のマトリクス状に並べられている。端末装置3は、各ボタンに対するタッチ操作又はクリック操作等を受け付けることにより、企業に対応付けるキーワードの選択を受け付ける。図示の例では、「AI」及び「介護」のキーワードが選択されていることを、ボタンにハッチングを付すことで表している。
The
また端末装置3は、これら複数のボタンの下方に、「任意入力」の文字列と、文字列を入力するためのテキストボックスとを並べて表示する。ユーザは端末装置3の文字入力の機能を利用して、このテキストボックスに任意の文字列を入力することができる。端末装置3は、テキストボックスに入力された文字列を、アノテーションの対象の企業に対応付けるキーワードとして受け付ける。図示の例では、テキストボックスに「ロボット」のキーワードが入力されている。
Further, the
また端末装置3は、テキストボックスの下方に、「戻る」のラベルが付されたボタンと、「送信」のラベルが付されたボタンとを並べて表示する。「戻る」のボタンは、アノテーションの作業を中断して1つ前の表示状態、例えばメニュー画面又は検索画面等の表示状態へ戻る操作を受け付ける。「送信」のボタンは、ユーザによるアノテーションの作業の結果をサーバ装置1へ送信する操作を受け付ける。「送信」のボタンに対する操作が行われた場合、端末装置3は、アノテーションの対象の企業と、この企業にユーザが対応付けたキーワードとを含むアノテーション結果の情報をサーバ装置1へ送信する。図示の例では、「株式会社X」に対して「AI」、「介護」及び「ロボット」の3つのキーワードが対応付けられたアノテーション結果がサーバ装置1へ送信される。
Further, the
端末装置3からアノテーションの結果を受信したサーバ装置1は、受信した情報を記憶部12のアノテーション情報DB12eに記憶する。サーバ装置1は、アノテーション情報DB12eに蓄積された情報を用いて、学習モデル12bの再学習処理のための教師データを生成する。サーバ装置1は、例えば1週間又は1ヶ月等の周期で、教師データの生成と、これを用いた学習モデル12bの再学習処理とを行うことができる。
The
ただし、ユーザにより行われたアノテーションの結果は、必ずしも正しいとは限らず、企業及びキーワードの対応関係(関係)に誤りが含まれる教師データを用いて学習モデル12bの再学習処理を行った場合には、検索精度が低減する可能性がある。そこで本実施の形態に係る情報処理システムでは、アノテーションの結果の信頼性を向上するために、以下の(1)〜(3)の処理の少なくとも1つを実行して、企業及びキーワードの対応関係を決定してもよい。
(1)2段階アノテーション
(2)複数ユーザの多数決
(3)ユーザの実績評価
However, the result of the annotation performed by the user is not always correct, and when the
(1) Two-step annotation (2) Majority decision of multiple users (3) Evaluation of user performance
(1)2段階アノテーション
サーバ装置1は、例えば第1のユーザに対して上述のアノテーションの作業を依頼して結果を取得した後、第2のユーザに対してこのアノテーションの結果の正否を判定する作業を依頼する。サーバ装置1は、第2のユーザが正当と判定したアノテーションの結果を、アノテーション情報DB12eに記憶し、学習モデル12bの教師データとして利用する。またサーバ装置1は、アノテーションの作業を実施した第1のユーザと、アノテーションの結果の正否判定の作業を実施した第2のユーザとの両方に、特典を付与してよい。
(1) The two-stage
(2)複数ユーザの多数決
サーバ装置1は、1つの企業と複数の候補キーワードとを対応付けたアノテーションのための情報を生成し、同じ内容の情報を複数のユーザに送信してアノテーションの作業の実施依頼を行う。サーバ装置1は、この複数のユーザから取得した複数のアノテーションの結果を比較して、この企業に対して例えば半数以上のユーザが対応付けたキーワード、所定数以上のユーザが対応付けたキーワード、又は、最も多くのユーザが対応付けたキーワード等を取得する。サーバ装置1は、取得した一又は複数のキーワードをこの企業に対応付けた情報を、アノテーション情報DB12eに記憶する。
(2) Majority decision of a plurality of users The
(3)ユーザの実績評価
サーバ装置1は、ユーザDB12dに登録された各ユーザについて、アノテーションの作業に関する実績の情報を記憶する。実績の情報は、例えばこれまでに行ったアノテーションの件数とすることができる。また例えば、上記の(1)又は(2)を行う場合には、有効と判断できるアノテーションの件数、又は、アノテーションの全件数に対する有効件数の割合等を実績の情報としてもよい。例えばサーバ装置1は、実績が閾値を超えるユーザのアノテーションの結果のみを採用してもよい。また例えばサーバ装置1は、上記の(1)を行う場合に、実績が閾値を超えるユーザが行ったアノテーションの結果については2段階目の判定を省力してもよい。また例えばサーバ装置1は、上記の(2)を行う場合に、実績に応じた重み付けを各ユーザに行って、各キーワードを対応付けたユーザの数を算出してもよい。サーバ装置1は、企業に対して各キーワードを対応付けたユーザ数を算出する際に、アノテーションの件数が閾値を超えるユーザについては例えば2人分等としてユーザ数を算出することができる。
(3) User Performance Evaluation The
サーバ装置1は、上記の(1)〜(3)の処理のうちの1つ又はいくつかを組み合わせて、端末装置3から取得したアノテーションの結果の中から、最終的に教師データとして用いる結果を選別してアノテーション情報DB12eに記憶する。又は、サーバ装置1は、端末装置3から取得したアノテーションの結果を全てアノテーション情報DB12eに記憶してもよく、この場合には学習モデル12bの再学習処理を行う際又はそれ以前の適宜のタイミングで、上記の(1)〜(3)の処理を行って教師データとして用いるアノテーションの結果を選別してもよい。このようにして選別された企業及びキーワードの対応情報が教師データとして用いられて学習モデル12bの再学習処理が行われる。ただし、サーバ装置1は、このような選別を行うことなく、端末装置3から取得した全てのアノテーションの結果を用いて再学習処理を行ってもよい。
The
またサーバ装置1は、アノテーションの作業を行ったユーザに対して、特典を付与する。本実施の形態に係る情報処理システムでは、サーバ装置1が提供する検索サービスを所定期間に亘って無料で利用する権利をユーザに特典として付与する。サーバ装置1は、ユーザDB12dの「無料期限」を延長することにより、上記の特典付与を行うことができる。サーバ装置1は、例えばアノテーションの作業数が閾値を超えたユーザに対して特典を付与してもよく、また例えば作業数に応じて無料の期間を決定しもよい。サーバ装置1は、特典を付与したユーザの端末装置3へ、特典を付与した旨を通知するメッセージを送信する。このメッセージを受信した端末装置3は、アノテーションの作業を実施したことにより特典が付与された旨をユーザに通知する。
Further, the
図11は、本実施の形態に係るサーバ装置1が行うアノテーション処理の手順を示すフローチャートである。本実施の形態に係るサーバ装置1の処理部11のアノテーション処理部11bは、ユーザDB12dに登録された各ユーザについて、アノテーションの作業を依頼するタイミングに至ったか否かを判定する(ステップS31)。なお、アノテーションの作業を依頼するタイミングに至ったか否かは、ユーザDB12dの「無料期限」の所定日数前に至ったか否かにより判定される。依頼タイミングに至っていない場合(S31:NO)、アノテーション処理部11bは、アノテーションの作業を依頼するタイミングに至るまで待機する。
FIG. 11 is a flowchart showing a procedure of annotation processing performed by the
アノテーションの作業を依頼するタイミングに至った場合(S31:YES)、アノテーション処理部11bは、ユーザに依頼するアノテーションの内容を生成する(ステップS32)。本実施の形態においてアノテーションの内容は、アノテーションの対象となる企業と、この企業に対応付ける複数のキーワードとを含むものであるが、これに限られない。アノテーション処理部11bは、生成したアノテーションの内容をユーザの端末装置3へ送信することで、ユーザにアノテーションの作業の実施依頼を送信する(ステップS33)。
When the timing for requesting the annotation work is reached (S31: YES), the
アノテーション処理部11bは、アノテーションの作業の実施依頼を送信したユーザの端末装置3から、アノテーションの結果を受け付けたか否かを判定する(ステップS34)。本実施の形態に係る情報処理システムでは、サーバ装置1の依頼をユーザが引き受けないことも可能であり、アノテーションの結果を受け付けていない場合には(S34:NO)、アノテーション処理部11bは、処理を終了する。
The
端末装置3からユーザによるアノテーションの結果を受け付けた場合(S34:YES)、アノテーション処理部11bは、受け付けたアノテーションの結果、即ち企業及びキーワードを対応付けた情報を、記憶部12のアノテーション情報DB12eに記憶する(ステップS35)。処理部11の特典付与部11cは、アノテーションの作業を行ったユーザに対して、所定期間に亘って検索サービスを無料で利用できる権利を特典として付与し(ステップS36)、処理を終了する。なお本フローチャートでは、アノテーションの結果の信頼性を向上するための処理、即ち上述の(1)2段階アノテーション、(2)複数ユーザの多数決、及び、(3)ユーザの実績評価の処理は行っていない。これらの処理は、例えば本フローチャートのステップS35の前後に行われ得る。
When the result of annotation by the user is received from the terminal device 3 (S34: YES), the
図12は、本実施の形態に係る端末装置3が行うアノテーション処理の手順を示すフローチャートである。本実施の形態に係る端末装置3の処理部31のアノテーション処理部31bは、サーバ装置1からアノテーションの作業の実施依頼を受け付けたか否かを判定する(ステップS51)。アノテーションの作業の実施依頼を受け付けていない場合(S51:NO)、アノテーション処理部31bは、実施依頼を受け付けるまで待機する。
FIG. 12 is a flowchart showing a procedure of annotation processing performed by the
アノテーションの作業の実施依頼を受け付けた場合(S51:YES)、アノテーション処理部31bは、サーバ装置1から送信されるアノテーションの内容についての情報に基づいて、アノテーションの対象となる企業と、この企業に対応付ける候補となるキーワードとを示したアノテーション画面(図10参照)を表示部34に表示する(ステップS52)。アノテーション処理部31bは、アノテーション画面におけるキーワードの選択又は入力等を受け付けることにより、ユーザによるアノテーションの作業を受け付ける(ステップS53)。アノテーション処理部31bは、ユーザによるアノテーションの作業の結果、即ち企業及びキーワードの対応に関する情報を、サーバ装置1へ送信する(ステップS54)。
When the request for performing the annotation work is received (S51: YES), the
アノテーション処理部31bは、サーバ装置1からユーザに特典を付与した旨の通知を受け付けたか否かを判定する(ステップS55)。例えば所定数以上のアノテーションの作業が特典付与の条件となっている場合等には、ユーザが1件のアノテーションの作業を行っただけでは特典が付与されない場合がある。このように特典が付与されない場合(S55:NO)、アノテーション処理部31bは、処理を終了する。これに対してユーザに特典が付与された場合(S55:YES)、アノテーション処理部31bは、例えば表示部34にメッセージ等を表示して、ユーザに特典が付与された旨を通知し(ステップS56)、処理を終了する。
The
<その他の特典>
本実施の形態においては、サーバ装置1がユーザに付与する特典として、検索サービスを所定期間に亘って無料で利用できる権利を例に説明を行ったが、特典はこれ以外のものであってもよい。例えばサーバ装置1は、サービスの一部の機能を有料で提供し、特典としてこの機能を無料で利用できる権利を特典としてユーザに付与してもよい。例えばサーバ装置1は、検索サービスは全ユーザに無料で提供し、検索結果として表示される企業情報の量及び質等について有料会員と無料会員とで差を設けてもよく、この場合に有料会員と同等の権利を無料でユーザに特典として付与してもよい。また例えばサーバ装置1は、検索画面及び検索結果の表示画面等に広告を表示する機能を有していてもよく、この場合に広告を無料で配信する権利をユーザに特典として付与ししてもよい。またサーバ装置1は、検索結果の表示画面に複数の企業情報を表示してもよく、この場合により上位に企業情報を表示する権利をユーザに特典として付与してもよい。サーバ装置1は、これら以外の種々の特典を、アノテーションの作業を実施したユーザに対して付与してよい。
<Other benefits>
In the present embodiment, as a privilege given to the user by the
<まとめ>
以上の構成の本実施の形態に係る情報処理システムは、ユーザから検索のためのキーワードの入力を受け付けて、当該キーワードに応じた一又は複数の企業に関する情報を出力する検索サービスをサーバ装置1が提供する。サーバ装置1は、キーワード及び企業を対応付けるアノテーションの作業の実施依頼をユーザに送信し、ユーザからアノテーションの作業の結果としてキーワード及び企業を対応付けた情報を端末装置3から取得すると共に、アノテーションの作業を実施したユーザに対して特典を付与する。これにより本実施の形態に係る情報処理システムは、アノテーションの作業の実施をユーザに促すことができ、より多くのアノテーションの結果を収集して検索精度の向上等のために用いることができる。このようにユーザにアノテーション作業を依頼することにより、例えば、検索サービスの提供者を介さずに、学習用のデータを生成することができ、その結果、検索の精度向上が期待できる。
<Summary>
In the information processing system according to the present embodiment having the above configuration, the
また本実施の形態に係る情報処理システムは、検索サービスを所定期間に亘って無料で利用できる権利を特典としてユーザに付与する。これにより、検索サービスを利用するユーザに対して、アノテーションの作業の実施をより効果的に促すことが期待できる。 Further, the information processing system according to the present embodiment grants the user the right to use the search service free of charge for a predetermined period as a privilege. As a result, it can be expected that users who use the search service will be more effectively encouraged to carry out the annotation work.
また本実施の形態に係る情報処理システムは、検索サービスを無料で利用できる期間(無料期間)が経過する前に、アノテーションの作業の実施依頼をユーザに送信する。これにより、ユーザはアノテーションの作業を行うことで、無料期間が途切れることなく検索サービスを利用することが可能となる。 Further, the information processing system according to the present embodiment sends a request for performing annotation work to the user before the period during which the search service can be used free of charge (free period) elapses. As a result, the user can use the search service without interruption of the free period by performing the annotation work.
また本実施の形態に係る情報処理システムは、1つの企業に対して複数のユーザにアノテーションの作業の実施依頼を送信し、複数のユーザからアノテーションの作業の結果を取得して、取得した複数の結果に基づいて、教師データとして用いるキーワード及び企業の対応関係を決定する。例えば所定数以上のユーザが企業に対して対応付けたキーワードを抽出し、このキーワードと企業とを対応付けて教師データとすることができる。この企業に対して所定数に満たないユーザが対応付けたキーワードは、この企業に対応付けるキーワードとして信頼性が低いものと判断し、教師データとして利用しない。これにより、信頼性の高いアノテーションの結果を用いて、学習モデル12bの再学習処理を行うことができ、より確実な検索精度の向上が期待できる。
Further, the information processing system according to the present embodiment sends an annotation work execution request to a plurality of users to one company, acquires the results of the annotation work from the plurality of users, and obtains a plurality of acquired results. Based on the results, the keywords used as teacher data and the correspondence between companies are determined. For example, a predetermined number or more of users can extract a keyword associated with a company, and associate this keyword with the company to obtain teacher data. Keywords associated with this company by less than a predetermined number of users are judged to be unreliable as keywords associated with this company, and are not used as teacher data. As a result, the
また本実施の形態に係る情報処理システムは、サーバ装置1がユーザの作業実績を記憶し、複数のユーザによるアノテーションの結果と、各結果についてアノテーションの作業を行ったユーザの実績とに基づいて、教師データとして用いるキーワード及び企業の対応関係を決定する。例えば、これまでに所定件数以上のアノテーションの作業を行ったユーザは、信頼性の高いアノテーションを実施できると判断し、上記のように企業に対してキーワードを割り当てたユーザ数をカウントする際に、このユーザに重み付けを行って(例えばこのユーザを2人分とカウントし)、企業に対応付けるキーワードを決定することができる。また、より実績の高いユーザがアノテーションの作業で企業に対応付けたキーワードは、他のユーザが対応付けたか否かに関わらず、教師データとして採用してもよい。これらにより、より信頼性の高いアノテーションの結果を用いて再学習処理を行うことができ、より確実な検索精度の向上が期待できる。
Further, in the information processing system according to the present embodiment, the
また本実施の形態に係る情報処理システムは、検索サービスにおける企業情報の閲覧数、又は、ユーザによるアノテーションの作業の実施数に基づいて、ユーザにアノテーションの作業を依頼する対象の企業を決定する。これにより、例えば閲覧数が多く、ユーザに求められる企業に関する検索精度の向上が期待でき、また例えばアノテーションの作業の実施数が少なく、十分な教師データを得られていない企業に関する検索精度の向上が期待できる。 Further, the information processing system according to the present embodiment determines a target company for requesting the user to perform the annotation work based on the number of times the company information is viewed in the search service or the number of times the user performs the annotation work. As a result, for example, it is expected to improve the search accuracy for companies that have a large number of views and are required by users, and for example, the search accuracy for companies that have a small number of annotation operations and do not have sufficient teacher data can be improved. You can expect it.
また本実施の形態に係る情報処理システムは、ユーザ属性情報及び企業属性情報に基づいて、ユーザにアノテーションの作業を依頼する企業を決定する。例えばユーザと同じ業種、又は、同じ地域等の企業についてアノテーションの作業を依頼することで、信頼性の高いアノテーションの結果を得ることが期待できる。 Further, the information processing system according to the present embodiment determines a company that requests the user to perform annotation work based on the user attribute information and the company attribute information. For example, by requesting annotation work for a company in the same industry or region as the user, it can be expected that highly reliable annotation results can be obtained.
また本実施の形態に係る情報処理システムは、1つの企業に対して対応付ける複数の候補キーワードをユーザに提示し、提示した複数の候補キーワードの中から一又は複数のキーワードの選択を受け付けることで、ユーザによるアノテーションの作業の結果を取得する。これによりユーザは、アノテーションの作業を容易に実施することが期待できる。 Further, the information processing system according to the present embodiment presents a plurality of candidate keywords to be associated with one company to the user, and accepts the selection of one or a plurality of candidate keywords from the presented plurality of candidate keywords. Get the result of the annotation work by the user. As a result, the user can expect to easily carry out the annotation work.
なお本実施の形態においては、検索サービスの検索対象を企業としたが、これに限るものではなく、企業以外の種々の検索対象を扱う検索サービスをサーバ装置1が提供してよい。
In the present embodiment, the search target of the search service is a company, but the present invention is not limited to this, and the
今回開示された実施形態はすべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。 The embodiments disclosed this time should be considered as exemplary in all respects and not restrictive. The scope of the present invention is indicated by the scope of claims, not the above-mentioned meaning, and is intended to include all modifications within the meaning and scope equivalent to the scope of claims.
1 サーバ装置
3 端末装置
11 処理部
11a 検索処理部
11b アノテーション処理部
11c 特典付与部
11d 学習処理部
12 記憶部
12a サーバプログラム
12b 学習モデル
12c 企業情報DB
12d ユーザDB
12e アノテーション情報DB
13 通信部
31 処理部
31a 検索処理部
31b アノテーション処理部
32 記憶部
32a プログラム
33 通信部
34 表示部
35 操作部
98,99 記録媒体
1
12d user DB
12e Annotation information DB
13
Claims (11)
検索サービスに係る検索用のキーワード及び検索対象を対応付ける作業の実施依頼を、前記検索サービスのユーザに送信し、
前記ユーザから前記作業の結果として、キーワード及び検索対象を対応付けた情報を取得し、
前記作業を実施したユーザに対して、前記検索サービスを所定期間利用する権利を付与する、
情報処理方法。 Information processing device
A request for performing work of associating a search keyword and a search target related to the search service is sent to the user of the search service.
As a result of the work, the information associated with the keyword and the search target is acquired from the user, and the information is obtained.
Granting the user who performed the work the right to use the search service for a predetermined period of time.
Information processing method.
請求項1に記載の情報処理方法。 The information processing device transmits a request for performing the work to the user before the predetermined period elapses.
The information processing method according to claim 1.
ユーザの属性情報を記憶し、Memorize user attribute information
検索対象となる企業の属性情報を記憶し、Memorize the attribute information of the company to be searched,
記憶した両属性情報に基づいて、ユーザに作業を依頼する企業を決定し、Based on the memorized both attribute information, determine the company to request the work to the user,
検索サービスに係る検索用のキーワード及び検索対象を対応付ける作業の実施依頼を、前記検索サービスのユーザに送信し、A request for performing work of associating a search keyword and a search target related to the search service is sent to the user of the search service.
前記ユーザから前記作業の結果として、キーワード及び検索対象を対応付けた情報を取得し、As a result of the work, the information associated with the keyword and the search target is acquired from the user, and the information is obtained.
前記作業を実施したユーザに対して特典を付与する、Granting benefits to users who have performed the above work,
情報処理方法。Information processing method.
一つの検索対象に対して複数のユーザに前記作業の実施依頼を送信し、
前記複数のユーザから前記作業の結果を取得し、
取得した複数の結果に基づいて、前記キーワード及び前記検索対象の関係を決定する、
請求項1から請求項3までのいずれか1つに記載の情報処理方法。 The information processing device
Send the work execution request to multiple users for one search target,
Obtaining the results of the work from the plurality of users
The relationship between the keyword and the search target is determined based on the obtained plurality of results.
The information processing method according to any one of claims 1 to 3.
前記ユーザの作業実績を記憶し、
取得した複数の結果、及び、各結果の作業を実施したユーザの実績に基づいて、前記キーワード及び前記検索対象の関係を決定する、
請求項4に記載の情報処理方法。 The information processing device
Memorize the work record of the user and
The relationship between the keyword and the search target is determined based on the acquired plurality of results and the results of the user who performed the work of each result.
The information processing method according to claim 4.
請求項1から請求項5までのいずれか1つに記載の情報処理方法。 The information processing device determines a search target for which the user is requested to perform the work, based on the number of times the information is viewed in the search service or the number of times the user performs the work.
The information processing method according to any one of claims 1 to 5.
一の検索対象に対して対応付ける複数の候補キーワードをユーザに提示し、
提示した前記複数の候補キーワードの中から、一又は複数のキーワードの選択を前記ユーザから前記作業の結果として取得する、
請求項1から請求項6までのいずれか1つに記載の情報処理方法。 The information processing device
Presenting to the user multiple candidate keywords that correspond to one search target,
From the presented plurality of candidate keywords, the selection of one or a plurality of keywords is acquired from the user as a result of the work.
The information processing method according to any one of claims 1 to 6.
検索サービスに係る検索用のキーワード及び検索対象を対応付ける作業の実施依頼を、前記検索サービスのユーザに送信し、
前記ユーザから前記作業の結果として、キーワード及び検索対象を対応付けた情報を取得し、
前記作業を実施したユーザに対して、前記検索サービスを所定期間利用する権利を付与する、
処理を実行させる、コンピュータプログラム。 On the computer
A request for performing work of associating a search keyword and a search target related to the search service is sent to the user of the search service.
As a result of the work, the information associated with the keyword and the search target is acquired from the user, and the information is obtained.
Granting the user who performed the work the right to use the search service for a predetermined period of time.
A computer program that executes processing.
ユーザの属性情報を記憶し、Memorize user attribute information
検索対象となる企業の属性情報を記憶し、Memorize the attribute information of the company to be searched,
記憶した両属性情報に基づいて、ユーザに作業を依頼する企業を決定し、Based on the memorized both attribute information, determine the company to request the work to the user,
検索サービスに係る検索用のキーワード及び検索対象を対応付ける作業の実施依頼を、前記検索サービスのユーザに送信し、A request for performing work of associating a search keyword and a search target related to the search service is sent to the user of the search service.
前記ユーザから前記作業の結果として、キーワード及び検索対象を対応付けた情報を取得し、As a result of the work, the information associated with the keyword and the search target is acquired from the user, and the information is obtained.
前記作業を実施したユーザに対して特典を付与する、Granting benefits to users who have performed the above work,
処理を実行させる、コンピュータプログラム。A computer program that executes processing.
前記ユーザから前記作業の結果として、キーワード及び検索対象を対応付けた情報を取得する作業結果取得部と、
前記作業を実施したユーザに対して、前記検索サービスを所定期間利用する権利を付与する特典付与部と
を備える、情報処理装置。 A work request transmission unit that transmits a work request for associating a search keyword and a search target related to the search service to the user of the search service.
A work result acquisition unit that acquires information associated with a keyword and a search target as a result of the work from the user.
An information processing device including a privilege granting unit that grants a user who has performed the work the right to use the search service for a predetermined period of time.
記憶した両属性情報に基づいて、ユーザに作業を依頼する企業を決定する決定部と、Based on the memorized both attribute information, the decision department that decides the company to request the work to the user,
検索サービスに係る検索用のキーワード及び検索対象を対応付ける作業の実施依頼を、前記検索サービスのユーザに送信する作業依頼送信部と、A work request transmission unit that transmits a work request for associating a search keyword and a search target related to the search service to the user of the search service.
前記ユーザから前記作業の結果として、キーワード及び検索対象を対応付けた情報を取得する作業結果取得部と、A work result acquisition unit that acquires information associated with a keyword and a search target as a result of the work from the user.
前記作業を実施したユーザに対して特典を付与する特典付与部とWith the privilege granting department that grants benefits to the user who performed the above work
を備える、情報処理装置。Information processing device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020136750A JP6867661B1 (en) | 2020-08-13 | 2020-08-13 | Information processing methods, computer programs and information processing equipment |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020136750A JP6867661B1 (en) | 2020-08-13 | 2020-08-13 | Information processing methods, computer programs and information processing equipment |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6867661B1 true JP6867661B1 (en) | 2021-05-12 |
JP2022032694A JP2022032694A (en) | 2022-02-25 |
Family
ID=75801757
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020136750A Active JP6867661B1 (en) | 2020-08-13 | 2020-08-13 | Information processing methods, computer programs and information processing equipment |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6867661B1 (en) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002157259A (en) * | 2000-11-21 | 2002-05-31 | Nippon Telegr & Teleph Corp <Ntt> | Multimedia information retrieving method |
JP4899581B2 (en) * | 2006-03-29 | 2012-03-21 | コニカミノルタエムジー株式会社 | Information retrieval system and program |
JP2008226061A (en) * | 2007-03-15 | 2008-09-25 | Fujifilm Corp | Image tag designating device, image searching device, operation control method therefor and program for controlling those computers |
JP2009003520A (en) * | 2007-06-19 | 2009-01-08 | Mic 9 Co Ltd | Database server device, method of providing search service, and related method |
JP5185807B2 (en) * | 2008-12-16 | 2013-04-17 | ヤフー株式会社 | Voice search device, voice search method, and voice search program |
-
2020
- 2020-08-13 JP JP2020136750A patent/JP6867661B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2022032694A (en) | 2022-02-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10671620B2 (en) | Method for recommending a teacher in a network teaching system | |
US7831585B2 (en) | Employment of task framework for advertising | |
JP2019028647A (en) | Training information providing device, method and program | |
US20110236870A1 (en) | System and method for learning | |
US20070219988A1 (en) | Enhanced Patent Prior Art Search Engine | |
Lytvyn et al. | Design of the architecture of an intelligent system for distributing commercial content in the internet space based on SEO-technologies, neural networks, and Machine Learning | |
AU2016346497A1 (en) | Method and system for performing a probabilistic topic analysis of search queries for a customer support system | |
TWI526962B (en) | Contextual advertising with user features for providing user-relevant terms for selecting an advertisement for method, apparatus and computer readable storage medium | |
US20140156652A1 (en) | Data matching | |
US20110119208A1 (en) | Method and system for developing a classification tool | |
US20110010210A1 (en) | Educational asset distribution system and method | |
KR102021425B1 (en) | System and method of providing education platform | |
US11763180B2 (en) | Unsupervised competition-based encoding | |
JP6865479B2 (en) | Business card-related information provision method, business card-related information provision device and computer program | |
KR102457904B1 (en) | System for providing sports lesson matching service | |
JP7041639B2 (en) | Selection device, selection method and selection program | |
Zeng | Evaluation and enhancement of web content accessibility for persons with disabilities | |
JP6714268B1 (en) | Question sentence output method, computer program, and information processing apparatus | |
JP6867661B1 (en) | Information processing methods, computer programs and information processing equipment | |
Vysotska et al. | V. Lytvyn | |
JP2007305094A (en) | Information providing method, information providing system and computer program | |
US20210201177A1 (en) | Prediction system, prediction method, and information storage medium | |
KR20150112904A (en) | Method and apparatus for managementing learning contents | |
JP2005346171A (en) | Recruitment information provision system | |
KR20050071308A (en) | Online advertising method and online advertising system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200824 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200824 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200909 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210112 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210305 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210330 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210401 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6867661 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |