JP7171811B2 - 監視装置、ショッピングサーバ、監視方法、及びプログラム - Google Patents

監視装置、ショッピングサーバ、監視方法、及びプログラム Download PDF

Info

Publication number
JP7171811B2
JP7171811B2 JP2021069259A JP2021069259A JP7171811B2 JP 7171811 B2 JP7171811 B2 JP 7171811B2 JP 2021069259 A JP2021069259 A JP 2021069259A JP 2021069259 A JP2021069259 A JP 2021069259A JP 7171811 B2 JP7171811 B2 JP 7171811B2
Authority
JP
Japan
Prior art keywords
query
information
whitelist
change point
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021069259A
Other languages
English (en)
Other versions
JP2021108198A5 (ja
JP2021108198A (ja
Inventor
翔吾 鈴木
文彦 高橋
圭一郎 永島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yahoo Japan Corp
Original Assignee
Yahoo Japan Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yahoo Japan Corp filed Critical Yahoo Japan Corp
Priority to JP2021069259A priority Critical patent/JP7171811B2/ja
Publication of JP2021108198A publication Critical patent/JP2021108198A/ja
Publication of JP2021108198A5 publication Critical patent/JP2021108198A5/ja
Application granted granted Critical
Publication of JP7171811B2 publication Critical patent/JP7171811B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明は、監視装置、ショッピングサーバ、監視方法、及びプログラムに関する。
クエリにより検索された検索結果のうち、より関連性の高い検索結果を絞り込む技術が知られている(例えば、特許文献1参照)。
特開2010-118021号公報
ところで、関連性の高い検索結果の絞り込みが行われるクエリは、新たに別の意味のクエリを意図して検索に用いられることがある。この場合、ユーザが、別の意味のクエリを意図として入力しても、従来、クエリに対応付けられていた関連性の高い検索結果に絞り込まれる。このため、ユーザが意図した検索結果を提供することができない場合があった。
本発明は、このような事情を考慮してなされたものであり、ユーザの意図に沿った検索結果を返すようにすることができる監視装置、ショッピングサーバ、監視方法、及びプログラムを提供することを目的の一つとする。
本発明の一態様は、電子商取引のサイトにおいて、ユーザにより入力されたクエリに対して特定のカテゴリに絞り込んで商品またはサービス(以下、商品等)を紹介するための規則を更新する必要性に関する情報を出力する監視装置であって、ユーザによって入力されたクエリの履歴情報を参照して得た意味に変化が生じたと推定されるクエリに関して、前記規則を更新することを推奨する推奨情報を出力する監視装置である。
本発明の一態様によれば、ユーザの意図に沿った検索結果を返すようにすることができる。
第1実施形態に係るショッピングサーバ100の構成の一例を示す図である。 インターフェース画面IMの一例を示す図である。 ホワイトリスト情報121の内容の一例を示す図である。 履歴情報122の内容の一例を示す図である。 集計情報123の内容の一例を示す図である。 抽出部212の抽出対象のクエリの一例を示す図である。 「ABC BEAT」のリクエスト回数の時系列データの一例を示す図である。 「ABC BEAT」の変化点スコアScore(yt)の時系列データの一例を示す図である。 第1実施形態に係る意味が変化したクエリの抽出処理の動作の一例を示すフローチャートである。 第1実施形態に係るホワイトリストの更新処理の動作の一例を示すフローチャートである。 第2実施形態に係るショッピングサーバ100aの構成の一例を示す図である。 第2実施形態に係る意味が変化したクエリの抽出処理の動作の一例を示すフローチャートである。 第3実施形態に係るショッピングサーバ100bの構成の一例を示す図である。 第3実施形態に係る新商品情報124の内容の一例を示す図である。 第3実施形態に係るホワイトリストの更新処理の動作の一例を示すフローチャートである。
以下、図面を参照し、本発明の監視装置、ショッピングサーバ、監視方法、及びプログラムの実施形態について説明する。
監視装置は、一以上のプロセッサにより実現される。監視装置は、電子商取引のサイトにおいて、ユーザにより入力されたクエリに基づいて絞り込まれるカテゴリが適切であるか否かを監視する装置である。電子商取引のサイトとは、例えば、ショッピングサイト、オークションサイト、フリーマーケットサイト等である。以下の説明では、電子商取引のサイトが、ショッピングサイトであるものとし、これを提供する装置をショッピングサーバと称する。監視装置は、ショッピングサーバ等と一体に構成されてもよいし、別体で構成されてもよい。ショッピングサーバは、例えば、入力されたクエリに基づいてホワイトリストを検索し、該当するカテゴリに絞り込んで商品またはサービス(以下、商品等)をユーザに紹介する。商品等を紹介するとは、例えば、クエリの検索結果として商品等を画面内に提示することである。ホワイトリストは、例えば、クエリとカテゴリが対応付けられた情報である。「ユーザにより入力されたクエリがホワイトリストに含まれる場合に、ホワイトリストに規定されたカテゴリを読み出して商品等の紹介に適用すること」は、「クエリに対して特定のカテゴリに絞り込んで商品等を紹介するための規則」の一例である。
監視装置は、ユーザによって入力されたクエリの履歴情報を参照し、所定タイミング以前と所定タイミング以降とで、クエリとして入力された回数の変化が基準以上であるクエリを抽出する。そして、監視装置は、抽出されたクエリに関して、ホワイトリストを更新することを推奨する推奨情報を出力する。これによって、監視装置は、ホワイトリストに含まれるクエリの意味に変化が生じたとみなし、ホワイトリストの更新をオペレータに促し、或いは自動的に行うことができる。この結果、監視装置は、ユーザの意図に沿った検索結果を、ショッピングサーバが返すことができるように誘導することができる。
<第1実施形態>
図1は、第1実施形態に係るショッピングサーバ100の構成および使用環境の一例を示す図である。ショッピングサーバ100は、例えば、ネットワークNWを介して一以上の端末装置10と通信する。ネットワークNWは、例えば、WAN(Wide Area Network)やLAN(Local Area Network)、インターネット、専用回線、無線基地局、プロバイダなどを含む。
端末装置10は、例えば、スマートフォンなどの携帯電話、タブレット端末、各種パーソナルコンピュータなどの、入力装置、表示装置、通信装置、記憶装置、及び演算装置を備える端末装置である。通信装置は、NIC(Network Interface Card)などのネットワークカード、無線通信モジュールなどを含む。端末装置10には、商品の出品者により使用される端末装置と、商品の購入者により使用される端末装置とがあるが、図2ではこれらを区別せず表記している。端末装置10では、ブラウザやアプリケーションプログラムなどのUA(User Agent)が起動する。UAは、ショッピングサーバ100から提供された画面を表示すると共に、端末装置10の利用者によってなされた入力操作に応じたリクエストをショッピングサーバ100に送信する。以下の説明では、UAはブラウザであり、ショッピングサーバ100はウェブサーバであるものとする。端末装置10では、ウェブブラウザやアプリケーションプログラムなどのUAが起動し、ユーザの入力する内容に応じたリクエストをショッピングサーバ100に送信する。また、UAが起動された端末装置10は、ショッピングサーバ100から取得した情報に基づいて、表示装置に各種画像を表示させる。
ショッピングサーバ100は、例えば、ショッピングサイト提供部110と、記憶部120と、監視部210とを備える。ショッピングサイト提供部110は、例えば、販売管理部111と、履歴情報生成部112と、受付部113と、ホワイトリスト生成部114と、ホワイトリスト更新部115とを備える。監視部210は、例えば、集計情報生成部211と、抽出部212と、出力部213とを備える。ショッピングサイト提供部110及び監視部210の各部は、例えば、CPU(Central Processing Unit)などのハードウェアプロセッサがプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)などのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予めHDD(Hard Disk Drive)やフラッシュメモリなどの記憶装置に格納されていてもよいし、DVDやCD-ROMなどの着脱可能な記憶媒体に格納されており、記憶媒体がドライブ装置に装着されることでインストールされてもよい。また、ショッピングサイト提供部110と監視部210は、一体のプロセッサによって実現されてもよく、別体のプロセッサによって実現されてもよい。ショッピングサーバ100が備える監視部210は、「監視装置」の一例である。
記憶部120には、例えば、ホワイトリスト情報121と、履歴情報122と、集計情報123とが記憶される。記憶部120は、例えば、RAM(Random Access Memory)、HDD、フラッシュメモリ、SDカード等によって実現される。
[ショッピングサイト提供部110の構成について]
販売管理部111は、ショッピングサイトが提供するサービスのうち販売に関する部分の処理を行う。販売管理部111は、例えば、ショッピングサイトのインターフェースとなる各種画面を端末装置10に提供する。図2は、インターフェース画面IMの一例を示す図である。インターフェース画面IMは、例えば、商品を検索する際に用いられるクエリを入力するためのクエリ入力欄A1、及び検索を実行させるための検索ボタンB1、及び商品を紹介(提示)する商品等紹介欄A2等が設けられた画面である。
ユーザは、販売管理部111によって提供されたインターフェース画面IMに対して各種の操作を行い、ショッピングサイトの商品を購入する。販売管理部111は、例えば、端末装置10のユーザによって商品の購入を実行する操作が行われた際に、この取引に係る決済の処理を行う。決済の処理は、例えば、決済の処理を実行する決済サーバ(不図示)に、この売買に係る決済の情報を送信し、決済の処理を依頼する処理である。
販売管理部111は、ショッピングサイトのクエリ入力欄A1に入力されたクエリを検索キーにしてホワイトリストを検索し、当該クエリが対応付けられた商品のカテゴリが存在する場合に、そのカテゴリを取得する。そして、販売管理部111は、クエリの検索結果が示す各種商品の中から、特定されたカテゴリに絞り込んだ商品を商品等紹介欄A2に提示し、ユーザに紹介(提示)する。
図3は、ホワイトリスト情報121の内容の一例を示す図である。ホワイトリスト情報121は、例えば、ホワイトリストを示す情報である。ホワイトリストは、例えば、クエリと、当該クエリに対応する特定のカテゴリとが互いに対応付けられた情報である。クエリに対応付けられる特定のカテゴリは、当該クエリと関連性が高いことが予め判っているカテゴリである。ホワイトリストは、例えば、後述するホワイトリスト生成部114によって生成され、ホワイトリスト情報121として記憶部120に記憶される。図3に示されるホワイトリスト情報121では、「PC モニター」というクエリと、「PC モニター」と関連性の高いカテゴリである「液晶ディスプレイ」とが互いに対応付けられている。
図2に戻り、販売管理部111は、例えば、ショッピングサイトのクエリ入力欄A1に入力されたクエリが「PC モニター」である場合、「PC モニター」を検索キーとしてホワイトリスト情報121のホワイトリストを検索し、「PC モニター」に対応付けられるカテゴリ(図2に示す一例では「液晶ディスプレイ」)を取得する。販売管理部111は、商品等紹介欄A2において、「PC モニター」の検索結果が示す各種商品の中から、特定したカテゴリ(つまり、「液晶ディスプレイ」)の商品を紹介(提示)する。
図1に戻り、履歴情報生成部112は、履歴情報122を生成する。履歴情報122は、例えば、ユーザのショッピングサイトにおける行動履歴を、ユーザ毎、且つセッション毎に示す情報である。セッションとは、例えば、ある同一のユーザが、ショッピングサイトの閲覧を開始してから(A)所定の時間が経過する(つまり、タイムアウトする)までの期間、(B)他のサイトに移動するまでの期間、又は(C)ウィンドウ(或いは、アプリケーション)を閉じるまでの期間である。
図4は、履歴情報122の内容の一例を示す図である。図4に示される履歴情報122は、各セッションを識別するセッションID毎に、そのセッション期間中に発生した行動の履歴と、その行動が行われた日時とが対応付けられたレコードが、ユーザ毎に纏められたデータである。例えば、ユーザが、販売サイトの一つである「○○!ショッピングサイト」でXをクエリとして検索し、商品Aを閲覧し、その後、商品Aを購入した場合、履歴情報122に含まれるセッションIDが「SESH_1」のレコードのように、一つのセッションIDに対して、複数の行動履歴が対応付けられることになる。
図1に戻り、受付部113は、後述する出力部213によってホワイトリストを更新することを推奨する推奨情報が出力された後、ユーザが端末装置10に対して行った操作であり、ホワイトリストを更新することを指示する操作、或いは更新しないことを指示する操作を示す操作情報を受け付ける。
ホワイトリスト生成部114は、集計情報123に基づいて、ホワイトリストを生成する。図5は、集計情報123の内容の一例を示す図である。集計情報123は、例えば、ショッピングサイトにおいて、クエリ検索後の検索結果の中から、選択(クリック)された商品のカテゴリと、当該カテゴリの商品がクリックされたクリック数とが、互いに対応付けられたレコードが、クエリ毎に纏められたデータである。図4に示される集計情報生成部211は、「PC モニター」というクエリを検索した検索結果の中から、カテゴリが「液晶ディスプレイ」の商品がクリックされた回数が1200回であることを示し、カテゴリが「モニターアーム」の商品がクリックされた回数が100回であることを示す。
ホワイトリスト生成部114は、例えば、以下のいずれかの手法によってホワイトリストを生成する。
(1)ホワイトリスト生成部114は、例えば、集計情報123に示されるクエリのうち、クリック数の合計が所定数以上のクエリに絞り込み、絞り込んだ各クエリに対応付けられた商品のカテゴリのうち、最もクリック数の多いものを当該クエリに関連性の高いカテゴリとして特定する。
(2)ホワイトリスト生成部114は、例えば、集計情報123に示される各クエリに対応付けられた商品のカテゴリのうち、最もクリック数の多いものを抽出し、抽出したカテゴリのクリック数が所定数以上である場合に、そのカテゴリを当該クエリに関連性の高いカテゴリとして特定する。
ホワイトリスト生成部114は、図4に示される集計情報123に基づき、(1)、或いは(2)の手法によって、「PC モニター」というクエリと関連性の高いカテゴリとして、「液晶ディスプレイ」を特定する。ホワイトリスト生成部114は、「PC モニター」と、特定した「液晶ディスプレイ」とを対応付けたホワイトリストを生成し、ホワイトリスト情報121として記憶部120に記憶させる。
ホワイトリスト更新部115は、受付部113によって受け付けられたユーザの指示が、ホワイトリストを更新することを示す指示である場合、ホワイトリスト情報121のホワイトリストを更新する。ホワイトリスト更新部115の詳細については、後述する。
[監視部210の構成について]
集計情報生成部211は、履歴情報122に基づいて、集計情報123を生成する。集計情報生成部211は、履歴情報122に含まれる行動履歴の中から、クエリの入力が行われたことを示す行動履歴(図2に示す一例では、「Xをクエリとして検索」)を特定する。次に、集計情報生成部211は、特定した行動履歴の次に行われた操作であり、検索結果の中から商品を選択する操作(図2に示す一例では、「検索結果の中から、商品Aをクリック」)を特定する。
次に、集計情報生成部211は、クエリの検索後にクリックされた商品のカテゴリを特定する。集計情報生成部211は、例えば、以下のいずれかの手法によって、クエリの検索後にクリックされた商品のカテゴリを取得する。
(1)集計情報生成部211は、例えば、商品のカテゴリと商品との対応を示す対応情報であるカテゴリツリーと、履歴情報122とに基づいて、クエリの検索後にクリックされた商品のカテゴリを特定する。
(2)図4の履歴情報122では、行動履歴が行動の内容で表現されているが、実際には、行動に応じて閲覧されたURL(Uniform Resource Locator)で表現されてもよい。この場合、商品は、例えば、段階的に表現されたカテゴリに対応付けられた状態でURLに埋め込まれる。集計情報生成部211は、履歴情報122に示されるURLに基づいて、クエリの検索後にクリックされた商品のカテゴリを特定する。
集計情報生成部211は、上述の処理を繰り返し、特定したカテゴリの商品がクリックされた回数をクエリ毎に取得する。
次に、抽出部212について説明する。図6は、抽出部212の抽出対象のクエリの一例を示す図である。ここで、ホワイトリストには、後に意味が変わるクエリが含まれる場合がある。例えば、車部品販売店である「ABC Beat!」という店舗がショッピングサイトに存在し、この店舗において販売される商品のカテゴリが、「車パーツ」である場合、ホワイトリストには、「ABC BEAT」というクエリに、関連性の高いカテゴリとして「車パーツ」が対応付けられる。その後、「ABC BEAT」という名称のスマートフォンが発売されるものとする。この場合、ホワイトリストにおいて、大文字小文字は同じものとして扱われ、『!』などの記号は無視されるため、スマートフォンの発売日の前と後とでは、「ABC BEAT」というクエリは、「車パーツ」と「家電」の2つの意味を持つこととなる。
「ABC BEAT」というクエリの意味が変化した後も、ホワイトリストに基づいて、特定されたカテゴリに絞り込んだ商品を紹介する場合、ショッピングサーバ100は、新たな意味(スマートフォン)のクエリに対応付けられたカテゴリの商品(家電)を紹介することが困難である。したがって、ショッピングサーバ100は、意味が変化したクエリを抽出し、抽出されたクエリをホワイトリストから除く処理を行うことが好ましい。
ここで、ショッピングサイトにおいて「ABC BEAT」というクエリのリクエスト回数は、「ABC BEAT」という名称のスマートフォンが発売された発売日の前と、発売日の後とにおいて、変化している(例えば、発売日後に増加する)場合がある。換言すると、新製品の発売等に起因してクエリの意味が変化している場合、クエリの意味が変化した前後において、クエリのリクエスト回数が増加している場合がある。
図7は、「ABC BEAT」のリクエスト回数の時系列データの一例を示す図である。図7に示される波形W1は、「ABC BEAT」のリクエスト回数の経時変化を示す波形である。抽出部212は、例えば、履歴情報122に基づいて、ホワイトリストに含まれるクエリであり、スコアの算出対象のクエリ(以下、対象クエリ)のリクエスト回数を、所定の時間(例えば、1日)毎に時系列によって算出する。波形W1によって示される通り、「ABC BEAT」のリクエスト回数は、2017年2月の発売日以降、急激に増加する。抽出部212は、例えば、履歴情報122を参照し、ある時刻tの所定タイミング(例えば、3日)以前と、所定タイミング(例えば、3日)以降とで、リクエスト回数の変化が基準以上であるクエリを、意味が変化したクエリとして抽出する。
本実施形態の抽出部212は、例えば、Change Finderを用いて、クエリのリクエスト回数の変化点を検出する。Change Finderは、変化点の検出手法である。変化点は、時間とともに変化するデータの性質が変わる点(つまり、クエリの意味が変化した点)である。外れ値は、統計において他の値から大きく外れた値である。Change Finderでは、外れ値の継続を変化点とみなすことにより、変化点を検出する変化点検出手法である。以下、抽出部212によるChange Finderを用いた変化点の検出手法について説明する。
[Step1:SDARによる確率密度学習(第1段階学習)]
抽出部212は、履歴情報122に基づいて、対象クエリのリクエスト回数xtを、所定の時間(例えば、1日)毎に時系列によって算出する。以降の説明において、時系列によって算出したリクエスト回数xtを、時系列データ{xt:t=1,2,…}と記載する。抽出部212は、時系列データ{xt:t=1,2,…}を用いて、SDAR(Sequentially Discounting Auto Regressive)モデルによる確率密度の学習を行う。
抽出部212は、SDARモデルを用いて、時刻t=1,2,…の各時点における時系列モデル(つまり、時刻t=1,2,…の各時点までの時系列データを元にした、確率密度関数)を学習(構築)する。具体的には、抽出部212は、式(1)に基づいて、式(1)の左辺のIが最大になるようなパラメータPT1を推定することにより、確率密度関数を学習する。パラメータPT1は、例えば、ユールウォーカー法によって算出される。
Figure 0007171811000001
次に、抽出部212は、SDARモデルを用いて学習されたリクエスト回数xtの確率密度関数に基づいて、確率密度を算出する。具体的には、抽出部212は、式(2)に基づいて、確率密度pt-1(xt)を算出する。
Figure 0007171811000002
式(2)によって示される確率密度pt-1(xt)の値が大きい場合、予測した値と、実際の時系列データ{xt:t=1,2,…}とが近いことを示し、確率密度pt-1(xt)の値が小さい場合、予測した値と、実際の時系列データ{xt:t=1,2,…}とが外れていることを示す。
[Step2:外れ値スコア計算(外れ値らしさの取得)]
次に、抽出部212は、算出された確率密度pt-1(xt)を式(3)に代入し、時刻t=1,2,…の各時点における外れ値スコアScore(xt)を算出する。
Figure 0007171811000003
外れ値スコアScore(xt)は、外れ値らしさを示す値である。外れ値スコアScore(xt)が大きい場合、時刻tにおけるリクエスト回数xtが外れ値である可能性が高い。
[Step3:外れ値スコアの移動平均算出(新たな時系列データの生成)]
次に、抽出部212は、算出された外れ値スコアScore(xt)を式(4)に代入し、外れ値スコアScore(xt)の移動平均ytを算出する。移動平均ytは、ある時刻tの移動時間T(例えば、3日)前から、ある時刻tの移動時間T(例えば、3日)後までの間の外れ値スコアScore(xt)の平均を示す値である。
Figure 0007171811000004
式(4)より、移動平均ytは、外れ値スコアScore(xt)を平滑化したものである。
[Step4:SDARによる確率密度学習(第2段階学習)]
次に、抽出部212は、式(4)によって算出された移動平均ytを所定の時間(例えば、1日分)ずつ時系列によって算出する。以降の説明において、時系列によって算出した移動平均ytを、時系列データ{yt:t=1,2,…}と記載する。抽出部212は、時系列データ{yt:t=1,2,…}を用いて、SDARモデルによる確率密度の学習を行う。
抽出部212は、上述した時系列データ{xt:t=1,2,…}の場合と同様、式(5)の左辺のIが最大になるようなパラメータPT2を推定することにより、確率密度関数を学習する。
Figure 0007171811000005
次に、抽出部212は、SDARモデルを用いて学習された移動平均ytの確率密度関数に基づいて、確率密度を算出する。具体的には、抽出部212は、式(6)に基づいて、確率密度qt-1(yt)を算出する。
Figure 0007171811000006
[Step5:変化点スコア計算(変化点らしさの取得)]
次に、抽出部212は、算出された確率密度qt-1(yt)を式(7)に代入し、時刻t=1,2,…の各時点における変化点スコアScore(yt)を算出する。
Figure 0007171811000007
変化点スコアScore(yt)は、変化点らしさを示す値である変化点スコアScore(yt)が大きい場合、時刻tが変化点である可能性が高い。
抽出部212は、上述したStep1~5の処理を実行し、変化点スコアScore(yt)を算出する。抽出部212は、算出した変化点スコアScore(yt)と、所定の閾値とを比較し、変化点スコアScore(yt)が所定の閾値以上である場合、対象クエリを意味が変化したクエリとして抽出する。
図8は、「ABC BEAT」の変化点スコアScore(yt)の時系列データの一例を示す図である。図8に示される波形W2は、「ABC BEAT」の変化点スコアScore(yt)を経時変化を示す波形である。波形W2によって示される通り、「ABC BEAT」の変化点スコアScore(yt)は、2017年2月の発売日に、急激に増加する。抽出部212は、変化点スコアScore(yt)と、所定の閾値(図示する、30)とを比較し、変化点スコアScore(yt)が所定の閾値以上である場合、対象クエリを意味が変化したクエリとして抽出する。したがって、抽出部212は、「ABC BEAT」を意味が変化したクエリとして抽出する。
なお、抽出部212は、所定タイミング以前と所定タイミング以降とで、クエリとして入力された回数の変化が基準以上であるクエリを抽出することができる手法であれば、Change Finder以外の手法を採用してもよい。例えば、抽出部212は、所定タイミング以後の所定期間(例えば、3日間)の平均から所定タイミング以前の所定期間(例えば、3日間)の平均を差し引いた値が、所定の値以上であれば、対象クエリを意味が変化したクエリとして抽出してもよい。また、抽出部212は、所定期間の平均に代えて、所定期間の移動平均に基づいて、対象クエリの意味が変化したクエリを抽出してもよい。
図1に戻り、出力部213は、抽出部212によってクエリが抽出された場合、当該クエリに関して、ホワイトリストを更新することを推奨する推奨情報を出力する。出力部213は、例えば、ショッピングサイト提供部110、或いはショッピングサーバ100の管理者が使用する端末装置10に推奨情報を出力する。以降の説明では、出力部213が、ショッピングサーバ100の管理者が使用する端末装置10に推奨情報を出力するものとする。ショッピングサーバ100の管理者は、出力された推奨情報に基づいて、ホワイトリストを更新することを指示する操作、或いは更新しないことを指示する操作を端末装置10に入力する。
ホワイトリスト更新部115は、受付部113によって受け付けられた操作情報に基づいて、ホワイトリストを更新する。ホワイトリスト更新部115は、操作情報がホワイトリストを更新することを指示する操作を示す場合、抽出部212によって抽出されたクエリをホワイトリストから除外する。また、ホワイトリスト更新部115は、操作情報がホワイトリストを更新しないことを指示する操作を示す場合、抽出部212によって抽出されたクエリをホワイトリストから除外しない。
[クエリの抽出処理]
図9は、第1実施形態に係る意味が変化したクエリの抽出処理の動作の一例を示すフローチャートである。図9に示されるフローチャートは、ホワイトリストに含まれるそれぞれのクエリに対して、所定時間(例えば、1日)毎に実行される。まず、抽出部212は、履歴情報122に基づいて、対象クエリの変化点スコアScore(yt)を算出する(S100)。次に、抽出部212は、算出した対象クエリの変化点スコアScore(yt)が、所定の閾値以上であるか否かを判定する(S102)。抽出部212は、算出した対象クエリの変化点スコアScore(yt)が所定の閾値以上ではない場合、処理を終了する。出力部213は、抽出部212によって算出された対象クエリの変化点スコアScore(yt)が所定の閾値以上である場合、端末装置10に推奨情報を出力する(S104)。
[ホワイトリストの更新処理]
図10は、第1実施形態に係るホワイトリストの更新処理の動作の一例を示すフローチャートである。まず、受付部113は、端末装置10から操作情報を受け付けたか否かを判定する(S200)。受付部113は、端末装置10から操作情報を受け付けるまでの間、待機する。ホワイトリスト更新部115は、受付部113によって端末装置10から操作情報が受け付けられた場合、操作情報がホワイトリストを更新することを指示する操作を示すか否かを判定する(S202)。ホワイトリスト更新部115は、受付部113によって受け付けられた操作情報が、ホワイトリストを更新しないことを指示する操作を示す場合、処理を終了する。ホワイトリスト更新部115は、受付部113によって受け付けられた操作情報が、ホワイトリストを更新することを指示する操作である場合、抽出部212によって抽出された対象クエリをホワイトリストから除外することにより、ホワイトリスト情報121のホワイトリストを更新する(S204)。
[第1実施形態のまとめ]
以上説明したように、本実施形態のショッピングサーバ100は、電子商取引のサイト(この一例では、ショッピングサイト)において、ユーザにより入力されたクエリに対して特定のカテゴリに絞り込んで商品またはサービスを紹介するための規則(この一例では、ホワイトリスト)を更新する必要性に関する情報(この一例では、推奨情報)を出力する監視装置であって、ユーザによって入力されたクエリの履歴情報122を参照し、所定タイミング以前と所定タイミング以降とで、クエリとして入力されたリクエスト回数の変化が基準以上であるクエリを抽出する抽出部212と、抽出部212によって抽出されたクエリに関して、ホワイトリストを更新することを推奨する推奨情報を出力する出力部213と、を備え、ユーザの意図に沿った検索結果を返すようにすることができる。
また、本実施形態のショッピングサーバ100において、抽出部212は、リクエスト回数の変化を示す指標値(この一例では、変化点スコアScore(yt))を算出し、変化点スコアScore(yt)の基準を示す所定の閾値と、前記指標値とを比較し、クエリを抽出する。これにより、本実施形態のショッピングサーバ100は、AR(Auto Regressive)モデルを使用する場合と比較して、より少ない処理によってユーザの意図に沿った検索結果を返すようにすることができる。
また、本実施形態のショッピングサーバ100は、出力部213によって推奨情報が出力された場合、抽出部212によって抽出されたクエリを、ホワイトリスト情報121のホワイトリストから除外するか否かを指定する操作情報をユーザから受け付ける受付部113と、受付部113によって受け付けられた操作情報に基づいて、ホワイトリスト情報121を更新するホワイトリスト更新部115と、ショッピングサイトとしてのサービスを提供する販売管理部111と、を備え、意味に変化が生じたクエリをホワイトリストから除外することにより、適切に商品を紹介することができる。
<第2実施形態>
以下、図面を参照し、本発明の第2実施形態について説明する。第1実施形態のショッピングサーバ100は、抽出部212によってクエリが抽出された場合、推奨情報を出力したが、第2実施形態のショッピングサーバ100aは、抽出部212によって抽出されたクエリの品詞を判定し、クエリが名詞である場合に推奨情報を出力する。なお、上述した実施形態と同様の構成については、同一の符号を付して説明を省略する。
図11は、第2実施形態に係るショッピングサーバ100aの構成の一例を示す図である。ショッピングサーバ100aは、ショッピングサーバ100が備える監視部210に代えて(或いは、加えて)監視部210aを備える。監視部210aは、例えば、集計情報生成部211と、抽出部212と、出力部213と、クエリ品詞判定部214とを備える。
クエリ品詞判定部214は、抽出部212によって抽出されたクエリの品詞を判定する。ここで、ホワイトリストに含まれるクエリであり、後に意味が変わるクエリは、名詞である可能性が高い。クエリ品詞判定部214は、例えば、抽出部212によって抽出されたクエリに対して形態素解析を行い、クエリをワードに分割する。クエリ品詞判定部214は、分割したワードが名詞であるか否かを判定する。
本実施形態の出力部213は、クエリ品詞判定部214によってクエリが名詞であると判定された場合、端末装置10に推奨情報を出力し、クエリが名詞ではないと判定された場合、端末装置10に推奨情報を出力しない。
[クエリの抽出処理]
図12は、第2実施形態に係る意味が変化したクエリの抽出処理の動作の一例を示すフローチャートである。図12に示されるS100~S104の処理のうち、S103以外の処理は、図9における同じステップ番号の処理と同様であるため、説明を省略する。クエリ品詞判定部214は、抽出部212によって算出された対象クエリの変化点スコアScore(yt)が所定の閾値以上である場合、対象クエリが名詞であるか否かを判定する(S103)。クエリ品詞判定部214は、対象クエリが名詞ではない場合、処理を終了する。出力部213は、クエリ品詞判定部214によって対象クエリが名詞であると判定される場合、処理をS104に進める。
[クエリの品詞判定のタイミング]
なお、上述では、クエリ品詞判定部214が抽出部212によって抽出された対象クエリが名詞であるか否かを判定する場合について説明したが、これに限られない。例えば、抽出部212は、ホワイトリストに含まれるクエリのうち、クエリ品詞判定部214によって名詞であると判定されたクエリについて、変化点スコアScore(yt)を算出する構成であってもよい。この場合、抽出部212は、予め名詞であるクエリに対して変化点スコアScore(yt)を算出するため、変化点スコアScore(yt)を算出する処理に係る手間を低減することができる。
[第2実施形態のまとめ]
以上説明したように、本実施形態のショッピングサーバ100aは、抽出部212によって抽出されたクエリが名詞であるか否かを判定するクエリ品詞判定部214を更に備え、出力部213は、クエリ品詞判定部214によってクエリが名詞ではないと判定された場合、推奨情報を出力しない。これにより、本実施形態のショッピングサーバ100aは、より高い精度によってユーザの意図に沿った検索結果を返すようにすることができる。
<第3実施形態>
以下、図面を参照し、本発明の第3実施形態について説明する。第1実施形態、及び第2実施形態のショッピングサーバでは、ショッピングサーバの管理者の指示に基づいて、意味の変化が生じたとされるクエリをホワイトリストから除く場合について説明した。本実施形態のショッピングサーバ100bでは、新商品情報に基づいて、意味の変化が生じたとされるクエリをホワイトリストから除く場合について説明する。なお、上述した実施形態と同様の構成については、同一の符号を付して説明を省略する。
図13は、第3実施形態に係るショッピングサーバ100bの構成の一例を示す図である。ショッピングサーバ100bは、ショッピングサーバ100、及びショッピングサーバ100aが備えるショッピングサイト提供部110に代えて(或いは、加えて)、ショッピングサイト提供部110bを備える。また、ショッピングサーバ100bは、ショッピングサーバ100、及びショッピングサーバ100aが備える記憶部120に代えて(或いは、加えて)、記憶部120bを備える。
ショッピングサイト提供部110bは、販売管理部111と、ホワイトリスト生成部114と、ホワイトリスト更新部115と、新商品判定部116とを備える。記憶部120bには、ホワイトリスト情報121と、履歴情報122と、集計情報123と、新商品情報124とが記憶される。
図14は、第3実施形態に係る新商品情報124の内容の一例を示す図である。新商品情報124は、最近発売された商品の名称、或いはこれから発売される商品の名称と、発売日とが互いに対応付けられた情報である。図14に示される新商品情報124では、「ABC BEAT」という名称の商品と、この商品の発売日である「2017年2月」とが互いに対応付けられたレコードが含まれる。
図13に戻り、本実施形態の出力部213は、抽出部212によってクエリが抽出された場合、推奨情報をショッピングサイト提供部110bに出力する。新商品判定部116は、出力部213によって推奨情報が出力された場合、抽出部212によって抽出されたクエリを検索キーにして新商品情報124を検索し、当該クエリと一致、或いは合致する名称の商品を特定する。また、新商品判定部116は、特定された商品に対応付けられた発売日と、抽出部212によって変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tとが合致するか否かを判定する。
本実施形態のホワイトリスト更新部115は、新商品判定部116によって商品の発売日と、抽出部212によって変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tとが合致する場合、新商品の発売に伴いクエリに意味の変化が生じたとみなし、抽出部212によって抽出されたクエリをホワイトリストから除外する。また、ホワイトリスト更新部115は、新商品判定部116によって商品の発売日と、抽出部212によって変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tとが合致しない場合、新商品に伴うクエリの意味の変化が生じていないとみなし、抽出部212によって抽出されたクエリをホワイトリストから除外しない。
[ホワイトリストの更新処理]
図15は、第3実施形態に係るホワイトリストの更新処理の動作の一例を示すフローチャートである。まず、新商品判定部116は、出力部213から推奨情報が出力されたか否かを判定する(S300)。新商品判定部116は、出力部213から推奨情報が入力されるまでの間、待機する。新商品判定部116は、出力部213から推奨情報が出力された場合、抽出部212によって抽出されたクエリと、新商品情報124とに基づいて、抽出されたクエリと商品名が一致、或いは合致する商品の発売日と、変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tとが合致するか否かを判定する(S302)。ホワイトリスト更新部115は、抽出されたクエリと商品名が一致、或いは合致する商品の発売日と、変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tとが合致しないと新商品判定部116によって判定された場合、処理を終了する。ホワイトリスト更新部115は、抽出されたクエリと商品名が一致、或いは合致する商品の発売日と、変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tとが合致すると新商品判定部116によって判定された場合、抽出部212によって抽出された対象クエリをホワイトリストから除外することにより、ホワイトリスト情報121のホワイトリストを更新する(S304)。
[第3実施形態のまとめ]
以上説明したように、本実施形態のショッピングサーバ100bは、出力部213によって推奨情報が出力された場合、商品の名称と商品の発売日とが互いに対応付けられた新商品情報124と、抽出部212によって抽出されたクエリとに基づいて、ホワイトリスト情報121から抽出部212によって抽出されたクエリを除外するか否かを判定する新商品判定部116と、新商品判定部116によってホワイトリスト情報121から除外すると判定されたクエリを、ホワイトリスト情報121から除外することにより、ホワイトリスト情報121を更新する新商品情報124と、を備え、新商品情報124は、抽出部212によってリクエスト回数の変化が抽出されたタイミング(この一例では、変化点スコアScore(yt)が所定の閾値以上であるとされた時刻t)と、新商品情報124に示されるクエリと一致、或いは合致する名称の商品の発売日とが合致する場合、抽出部212によって抽出されたクエリをホワイトリスト情報121から除外すると判定する。これにより、本実施形態のショッピングサーバ100bは、より適切に商品を紹介することができる。
[その他のホワイトリスト更新方法]
なお、上述では、ホワイトリスト更新部115が、新商品判定部116によって判定された商品の発売日に基づいて、ホワイトリストを更新する場合について説明したが、これに限られない。ホワイトリスト更新部115は、例えば、発売日以外の情報に基づいて、ホワイトリストを更新してもよい。
例えば、ホワイトリスト更新部115は、ショッピングサイトの特売日に基づいて、ホワイトリストを更新してもよい。例えば、ショッピングサイトの特売日は、商品の購入者が増加するため、リクエスト回数も同様に増加する。このため、ホワイトリスト更新部115は、変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tが、ショッピングサイトの特売日と合致する場合、ホワイトリストを更新しなくてもよい。
また、ホワイトリスト更新部115は、気象条件に基づいて、ホワイトリストを更新してもよい。例えば、急激な温度変化によって、気温が上がった日、或いは、気温が下がった日は、暑さ対策グッズや寒さ対策グッズのリクエスト回数が増加する場合がある。このため、ホワイトリスト更新部115は、変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tが、急激な温度変化が生じた日と合致する場合、暑さ対策グッズや寒さ対策グッズに係るホワイトリストを更新しなくてもよい。
また、ホワイトリスト更新部115は、テレビ放映情報に基づいて、ホワイトリストを更新してもよい。例えば、テレビ放映等が影響し、意味に変化が生じていない場合であっても、クエリのリクエスト回数が増加する場合がある。このため、ホワイトリスト更新部115は、変化点スコアScore(yt)が所定の閾値以上であるとされた時刻tが、抽出部212によって抽出されたクエリに関するテレビ放映があった日と合致する場合、ホワイトリストを更新しなくてもよい。
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
10…端末装置、100、100a、100b…ショッピングサーバ、110、110b…ショッピングサイト提供部、111…販売管理部、112…履歴情報生成部、113…受付部、114…ホワイトリスト生成部、115…ホワイトリスト更新部、116…新商品判定部、120、120b…記憶部、121…ホワイトリスト情報、122…履歴情報、123…集計情報、124…新商品情報、210、210a…監視部、211…集計情報生成部、212…抽出部、213…出力部、214…クエリ品詞判定部、Score(yt)…変化点スコア、Score(xt)…外れ値スコア、pt-1(xt)、qt-1(yt)…確率密度、xt…リクエスト回数、yt…移動平均

Claims (10)

  1. 電子商取引のサイトにおいて、ユーザにより入力されたクエリに対して特定のカテゴリに絞り込んで商品またはサービス(以下、商品等)を紹介するための規則を更新する必要性に関する情報を出力する監視装置であって、
    ユーザによって入力されたクエリの履歴情報とクエリの入力回数が基準を超えて変化する変化点を検出する所定の変化点検出手法とに基づいて、変化点が検出されたクエリに関して、前記規則を更新することを推奨する推奨情報を出力する、
    監視装置。
  2. 前記変化点検出手法に基づいて得られた変化点スコアと所定の閾値とを比較して、変化点を検出する、
    請求項1に記載の監視装置。
  3. 前記規則は、入力されたクエリに対して絞り込むカテゴリを対応付けたホワイトリスト情報で規定される、
    請求項1または2に記載の監視装置。
  4. 前記更新には、前記推奨情報が出力された対象のクエリを前記ホワイトリスト情報から除くことが含まれる、
    請求項3に記載の監視装置。
  5. 前記履歴情報は、前記電子商取引のサイトに対して入力されたクエリの履歴情報である、
    請求項1から4のうちいずれか一項に記載の監視装置。
  6. 前記クエリが名詞であるか否かを判定し、
    前記クエリが名詞ではないと判定した場合、前記規則を更新することを推奨する推奨情報を出力しない、
    請求項1から5のうちいずれか一項に記載の監視装置。
  7. 請求項1から6のいずれかに記載の監視装置と、
    前記推奨情報が出力された場合、前記変化点が検出されたクエリを、入力されたクエリに対して絞り込むカテゴリを対応付けたホワイトリスト情報から除外するか否かを指定する情報をユーザから受け付ける受付部と、
    前記受付部によって受け付けられた情報に基づいて、前記ホワイトリスト情報を更新するホワイトリスト更新部と、
    前記電子商取引のサイトとしてのサービスを提供する販売管理部と、
    を備えるショッピングサーバ。
  8. 請求項1から6のいずれかに記載の監視装置と、
    前記推奨情報が出力された場合、商品の名称と前記商品の発売日とが互いに対応付けられた新商品情報と、前記変化点が検出されたクエリとに基づいて、入力されたクエリに対して絞り込むカテゴリを対応付けたホワイトリスト情報から前記変化点が検出されたクエリを除外するか否かを判定する新商品判定部と、
    前記新商品判定部によって前記ホワイトリスト情報から除外すると判定された前記クエリを、前記ホワイトリスト情報から除外することにより、前記ホワイトリスト情報を更新するホワイトリスト更新部と、
    前記電子商取引のサイトとしてのサービスを提供する販売管理部と、
    を備えるショッピングサーバ。
  9. 電子商取引のサイトにおいて、ユーザにより入力されたクエリに対して特定のカテゴリに絞り込んで商品またはサービス(以下、商品等)を紹介するための規則を更新する必要性に関する情報を出力するコンピュータが、
    ユーザによって入力されたクエリの履歴情報とクエリの入力回数が基準を超えて変化する変化点を検出する所定の変化点検出手法とに基づいて、変化点が検出されたクエリに関して、前記規則を更新することを推奨する推奨情報を出力する、
    監視方法。
  10. 電子商取引のサイトにおいて、ユーザにより入力されたクエリに対して特定のカテゴリに絞り込んで商品またはサービス(以下、商品等)を紹介するための規則を更新する必要性に関する情報を出力するコンピュータに、
    ユーザによって入力されたクエリの履歴情報とクエリの入力回数が基準を超えて変化する変化点を検出する所定の変化点検出手法とに基づいて、変化点が検出されたクエリに関して、前記規則を更新することを推奨する推奨情報を出力させる、
    プログラム。
JP2021069259A 2018-09-06 2021-04-15 監視装置、ショッピングサーバ、監視方法、及びプログラム Active JP7171811B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021069259A JP7171811B2 (ja) 2018-09-06 2021-04-15 監視装置、ショッピングサーバ、監視方法、及びプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018166832A JP6871208B2 (ja) 2018-09-06 2018-09-06 監視装置、ショッピングサーバ、監視方法、及びプログラム
JP2021069259A JP7171811B2 (ja) 2018-09-06 2021-04-15 監視装置、ショッピングサーバ、監視方法、及びプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018166832A Division JP6871208B2 (ja) 2018-09-06 2018-09-06 監視装置、ショッピングサーバ、監視方法、及びプログラム

Publications (3)

Publication Number Publication Date
JP2021108198A JP2021108198A (ja) 2021-07-29
JP2021108198A5 JP2021108198A5 (ja) 2021-10-21
JP7171811B2 true JP7171811B2 (ja) 2022-11-15

Family

ID=69798246

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018166832A Active JP6871208B2 (ja) 2018-09-06 2018-09-06 監視装置、ショッピングサーバ、監視方法、及びプログラム
JP2021069259A Active JP7171811B2 (ja) 2018-09-06 2021-04-15 監視装置、ショッピングサーバ、監視方法、及びプログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2018166832A Active JP6871208B2 (ja) 2018-09-06 2018-09-06 監視装置、ショッピングサーバ、監視方法、及びプログラム

Country Status (1)

Country Link
JP (2) JP6871208B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7154253B2 (ja) * 2020-05-12 2022-10-17 ヤフー株式会社 情報処理装置、情報処理方法及びプログラム
JP7087146B1 (ja) * 2021-03-19 2022-06-20 ヤフー株式会社 情報処理装置、情報処理方法、及び情報処理プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009104607A (ja) 2007-10-22 2009-05-14 Gmarket Inc ウェブサイトの運営方法及びオンラインシステム
JP2011002972A (ja) 2009-06-18 2011-01-06 Yahoo Japan Corp クエリ分析装置、クエリ分析方法及びプログラム、並びに情報検索装置
JP2011118759A (ja) 2009-12-04 2011-06-16 Yahoo Japan Corp 購買ステージ判定装置及び購買ステージ判定方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100930455B1 (ko) * 2007-09-06 2009-12-08 엔에이치엔(주) 쿼리별 검색 컬렉션 생성 방법 및 시스템
JP6604603B2 (ja) * 2015-09-18 2019-11-13 Zホールディングス株式会社 検索装置、検索方法、及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009104607A (ja) 2007-10-22 2009-05-14 Gmarket Inc ウェブサイトの運営方法及びオンラインシステム
JP2011002972A (ja) 2009-06-18 2011-01-06 Yahoo Japan Corp クエリ分析装置、クエリ分析方法及びプログラム、並びに情報検索装置
JP2011118759A (ja) 2009-12-04 2011-06-16 Yahoo Japan Corp 購買ステージ判定装置及び購買ステージ判定方法

Also Published As

Publication number Publication date
JP2020042333A (ja) 2020-03-19
JP2021108198A (ja) 2021-07-29
JP6871208B2 (ja) 2021-05-12

Similar Documents

Publication Publication Date Title
US10846461B2 (en) System and method for providing content to users based on interactions by similar other users
US9830633B2 (en) Deriving dynamic consumer defined product attributes from input queries
JP4833043B2 (ja) ブログ又はクエリ・クリックを利用したアフィニティ装置
US10360605B2 (en) Server apparatus, information providing method, information providing program, recording medium recording the information providing program, and information providing system
US20090164395A1 (en) Modeling, detecting, and predicting user behavior with hidden markov models
US10922737B2 (en) Interactive product recommendation method and non-transitory computer-readable medium
US20130179385A1 (en) Systems and methods for making contextual recommendations
US20130054356A1 (en) Systems and methods for contextualizing services for images
US20130054672A1 (en) Systems and methods for contextualizing a toolbar
US20120290974A1 (en) Systems and methods for providing a discover prompt to augmented content of a web page
JP7171811B2 (ja) 監視装置、ショッピングサーバ、監視方法、及びプログラム
US20120215664A1 (en) Epurchase model
US9104746B1 (en) Identifying contrarian terms based on website content
US20160019621A1 (en) Review based navigation and product discovery platform
EP1695232A1 (en) Methods and systems for information extraction
CN110909616A (zh) 一种视频中商品购买信息获取方法、装置及电子设备
WO2016157435A1 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
US20130204864A1 (en) Information provision device, information provision method, program, and information recording medium
JP6754808B2 (ja) 情報処理装置、情報処理方法
US7647300B2 (en) Methods and systems for output of search results
US20130185295A1 (en) Information provisioning device, information provisioning method, program, and information recording medium
JP2020042637A (ja) 情報処理装置
JP7042723B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP7140561B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP4689701B2 (ja) 広告評価方法、コンピュータ読み取り可能な記録媒体、広告評価システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210618

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210910

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220518

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220801

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221004

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221102

R150 Certificate of patent or registration of utility model

Ref document number: 7171811

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350