JP2012234326A - Advertisement display system, advertisement display method, advertisement generation device and advertisement display program - Google Patents

Advertisement display system, advertisement display method, advertisement generation device and advertisement display program Download PDF

Info

Publication number
JP2012234326A
JP2012234326A JP2011101972A JP2011101972A JP2012234326A JP 2012234326 A JP2012234326 A JP 2012234326A JP 2011101972 A JP2011101972 A JP 2011101972A JP 2011101972 A JP2011101972 A JP 2011101972A JP 2012234326 A JP2012234326 A JP 2012234326A
Authority
JP
Japan
Prior art keywords
advertisement
information
image
user terminal
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011101972A
Other languages
Japanese (ja)
Other versions
JP5710366B2 (en
Inventor
Marthinussen Tarje
タリア マルティヌッセン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rakuten Group Inc
Original Assignee
Rakuten Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Rakuten Inc filed Critical Rakuten Inc
Priority to JP2011101972A priority Critical patent/JP5710366B2/en
Publication of JP2012234326A publication Critical patent/JP2012234326A/en
Application granted granted Critical
Publication of JP5710366B2 publication Critical patent/JP5710366B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide advertisement information about goods drawn in an image without troubling a user.SOLUTION: A system displays advertisement which is related to goods drawn in an image of a Web page displayed on a user terminal. On the user terminal side, a user operation to select a Web image displayed on the Web page is inputted (S16). Property-related information of the selected target Web image is transmitted to a shopping server (S18). On the server side, property information of the goods drawn within the target Web image is acquired based on the property-related information. Advertisement information is generated using the property information (S26) and is transmitted to the user terminal (S28). On the user terminal, the received advertisement information is displayed in a position in which it is not overlapped with the target Web image (S30). The user is able to acquire the advertisement information of the goods in the image simply by selecting the image during browsing the Web page, without photographing the goods by the terminal.

Description

本発明は、広告表示システム、広告表示方法、広告生成装置及び広告表示プログラムに関するものである。   The present invention relates to an advertisement display system, an advertisement display method, an advertisement generation device, and an advertisement display program.

従来、広告表示システムとして、ユーザ端末により撮影された写真画像に基づいて、その画像に含まれる物品に類似する商品の画像を提示するアプリケーションが知られている(例えば、非特許文献1参照。)。非特許文献1記載のシステムは、ユーザ端末により撮像された画像内の物品を画像認識し、当該物品又は当該物品に類似する物品に関する販売情報等をリスト表示するものである。   2. Description of the Related Art Conventionally, an application that presents an image of a product similar to an article included in an image based on a photographic image taken by a user terminal is known as an advertisement display system (see, for example, Non-Patent Document 1). . The system described in Non-Patent Document 1 recognizes articles in an image captured by a user terminal, and displays a list of sales information about the article or articles similar to the article.

IQ Engines、「oMoby」、[online]、インターネット<URL:http://omoby.com/pages/index.php>IQ Engines, “oMoby”, [online], Internet <URL: http://omoby.com/pages/index.php>

しかしながら、非特許文献1記載の広告表示システムにあっては、ユーザ端末によって画像が撮像される必要があるため、ユーザが煩わしいと感じる場合がある。   However, in the advertisement display system described in Non-Patent Document 1, there is a case where the user feels troublesome because an image needs to be captured by the user terminal.

そこで、本発明は、このような技術課題を解決するためになされたものであって、ユーザに手間を取らせることなく画像に描画された物品の広告情報を提供することができる広告表示システム、広告表示方法、広告生成装置及び広告表示プログラムを提供することを目的とする。   Therefore, the present invention has been made to solve such a technical problem, and an advertisement display system capable of providing advertisement information of an article drawn on an image without taking the user trouble, An object is to provide an advertisement display method, an advertisement generation device, and an advertisement display program.

すなわち本発明に係る広告表示システムは、ウェブページを表示するユーザ端末と、前記ユーザ端末と通信可能に構成され前記ユーザ端末に表示させる広告情報を生成する広告生成装置とを備える広告表示システムであって、前記ユーザ端末は、前記ウェブページを表示する表示部と、前記ウェブページ内に含まれるウェブ画像から処理対象となる対象ウェブ画像を選択するユーザ操作を受け付ける入力部と、前記対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報を前記広告生成装置へ送信する端末側送信部と、前記広告生成装置から情報を受信する端末側受信部と、を有し、前記広告生成装置は、商品の属性情報と該商品の広告情報とを関連付けて記録する記録部を参照可能に構成されており、前記ユーザ端末から前記属性関連情報を受信する装置側受信部と、前記属性関連情報に基づいて前記対象ウェブ画像内に描画された物品の属性情報を取得し、前記記録部を参照して、前記対象ウェブ画像内に描画された物品の広告情報を生成する広告情報生成部と、前記広告情報を前記端末側受信部へ送信する装置側送信部と、を有し、前記表示部は、前記対象ウェブ画像と重畳しない位置に前記広告情報を表示することを特徴として構成される。   That is, an advertisement display system according to the present invention is an advertisement display system that includes a user terminal that displays a web page and an advertisement generation device that is configured to be communicable with the user terminal and generates advertisement information to be displayed on the user terminal. The user terminal includes a display unit that displays the web page, an input unit that receives a user operation for selecting a target web image to be processed from web images included in the web page, and the target web image. A terminal-side transmission unit that transmits attribute-related information for acquiring attribute information of the drawn article to the advertisement generation device; and a terminal-side reception unit that receives information from the advertisement generation device, and the advertisement The generation device is configured to be able to refer to a recording unit that records the attribute information of the product and the advertisement information of the product in association with each other. A device-side receiving unit that receives the attribute-related information, and acquires attribute information of an article drawn in the target web image based on the attribute-related information, and refers to the recording unit, An advertisement information generation unit that generates advertisement information of an article drawn on the device, and a device side transmission unit that transmits the advertisement information to the terminal side reception unit, and the display unit overlaps the target web image The advertisement information is displayed at a position not to be displayed.

本発明に係る広告表示システムによれば、ユーザ端末の入力部により、ウェブページ上に表示されているウェブ画像を選択するユーザ操作が入力され、端末側送信部によりユーザ操作により選択された対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報が広告生成装置へ送信され、広告情報生成部により、属性関連情報に基づいて対象ウェブ画像内に描画された物品の属性情報が取得され、取得された属性情報と記録部に記録された情報とを用いて広告情報が生成され、生成された広告情報が装置側送信部によりユーザ端末へ送信され、ユーザ端末の表示部により広告情報が対象ウェブ画像と重畳しない位置に表示される。このように、ユーザは、ユーザ端末を用いて物品を撮像することなく、ウェブページ閲覧中に画像を選択するだけで、当該画像に描画された物品に関連する広告情報を取得することができる。また、広告情報が当該画像と重畳しない位置に表示されるため、ユーザはウェブ画像と広告情報との両方を一度に閲覧することが可能となる。よって、ユーザに手間を取らせることなく画像に描画された物品の広告情報を提供することができる。   According to the advertisement display system of the present invention, a user operation for selecting a web image displayed on a web page is input by the input unit of the user terminal, and the target web selected by the user operation by the terminal-side transmission unit. Attribute-related information for acquiring the attribute information of the article drawn on the image is transmitted to the advertisement generation device, and the attribute information of the article drawn in the target web image based on the attribute-related information is sent by the advertisement information generation unit. The advertisement information is generated using the acquired attribute information and the information recorded in the recording unit, the generated advertisement information is transmitted to the user terminal by the device side transmission unit, and the advertisement is displayed by the display unit of the user terminal Information is displayed at a position where it does not overlap with the target web image. As described above, the user can acquire advertisement information related to the article drawn on the image only by selecting the image while browsing the web page without imaging the article using the user terminal. Further, since the advertisement information is displayed at a position that does not overlap with the image, the user can view both the web image and the advertisement information at a time. Therefore, it is possible to provide the advertisement information of the article drawn on the image without making the user troublesome.

ここで、前記入力部は、前記対象ウェブ画像内の前記ユーザ操作により選択された選択範囲を入力し、前記端末側送信部は、前記選択範囲の位置を特定する情報を前記広告生成装置へ送信し、前記広告情報生成部は、前記選択範囲内に描画された物品の属性情報を取得してもよい。あるいは、前記入力部は、前記対象ウェブ画像内の前記ユーザ操作により選択された選択位置を入力し、前記端末側送信部は、前記選択位置を特定する情報を前記広告生成装置へ送信し、前記広告情報生成部は、前記選択位置に描画された物品の属性情報を取得してもよい。このように構成することで、対象ウェブ画像内に複数の物品が表示されている場合であっても、ユーザが希望する物品の広告情報を適切に生成することができる。   Here, the input unit inputs a selection range selected by the user operation in the target web image, and the terminal-side transmission unit transmits information specifying the position of the selection range to the advertisement generation device. Then, the advertisement information generation unit may acquire attribute information of an article drawn in the selection range. Alternatively, the input unit inputs a selection position selected by the user operation in the target web image, and the terminal-side transmission unit transmits information specifying the selection position to the advertisement generation device, The advertisement information generation unit may acquire attribute information of an article drawn at the selected position. By configuring in this way, even if a plurality of articles are displayed in the target web image, it is possible to appropriately generate advertisement information of the article desired by the user.

また、前記入力部は、前記対象ウェブ画像が広告画像であるか否かを、前記対象ウェブ画像に関連付けされたウェブページのリンク情報に基づいて判定し、前記表示部は、前記対象ウェブ画像が前記広告画像である場合には、前記広告情報を表示しなくてもよい。このように構成することで、既存の広告の宣伝効果を妨げることを回避しつつ、ユーザに手間を取らせることなく画像に描画された物品の広告情報を提供することができる。   Further, the input unit determines whether the target web image is an advertisement image based on link information of a web page associated with the target web image, and the display unit determines whether the target web image is In the case of the advertisement image, the advertisement information may not be displayed. By configuring in this way, it is possible to provide advertisement information of an article drawn on an image without making the user troublesome while avoiding hindering the advertising effect of existing advertisements.

また、前記表示部は、前記ウェブ画像が広告画像であるか否かを、前記対象ウェブ画像に関連付けされたウェブページのリンク情報に基づいて判定し、前記広告画像である前記ウェブ画像と前記広告画像でない前記ウェブ画像との表示形態を異ならせてもよい。このように構成することで、本発明に係る広告表示システムによって広告情報が提供されるか否かをユーザに対して適切に報知することができる。   In addition, the display unit determines whether the web image is an advertisement image based on link information of a web page associated with the target web image, and the web image and the advertisement that are the advertisement image The display form of the web image that is not an image may be different. By comprising in this way, it can be alert | reported appropriately with respect to a user whether advertisement information is provided by the advertisement display system which concerns on this invention.

また、本発明に係る広告表示方法は、ウェブページを表示するユーザ端末と、前記ユーザ端末と通信可能に構成されるとともに商品の属性情報と該商品の広告情報とを関連付けて記録する記録部を参照可能に構成された広告生成装置とを備える広告表示システムにより実行される広告表示方法であって、前記ユーザ端末が、前記ウェブページを表示する第1表示ステップと、前記ウェブページ内に含まれるウェブ画像から処理対象となる対象ウェブ画像を選択するユーザ操作を受け付ける入力ステップと、前記対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報を前記広告生成装置へ送信する端末側送信ステップと、を備え、前記広告生成装置が、前記属性関連情報を受信する装置側受信ステップと、前記属性関連情報に基づいて前記対象ウェブ画像内に描画された物品の属性情報を取得し、前記記録部を参照して、前記対象ウェブ画像内に描画された物品の広告情報を生成する広告情報生成ステップと、前記広告情報を前記ユーザ端末へ送信する装置側送信ステップと、を備え、前記ユーザ端末が、前記対象ウェブ画像と重畳しない位置に前記広告情報を表示する第2表示ステップをさらに備えて構成される。   The advertisement display method according to the present invention includes a user terminal that displays a web page, a recording unit that is configured to be communicable with the user terminal, and that records and associates attribute information of the product and advertisement information of the product. An advertisement display method executed by an advertisement display system including an advertisement generation device configured to be referable, wherein the user terminal is included in the web page and a first display step of displaying the web page An input step for receiving a user operation for selecting a target web image to be processed from a web image, and a terminal for transmitting attribute related information for acquiring attribute information of an article drawn on the target web image to the advertisement generation device A side transmission step, wherein the advertisement generation device receives the attribute related information, and the attribute related information. Obtaining the attribute information of the article drawn in the target web image on the basis of, and referring to the recording unit, generating advertisement information of the article drawn in the target web image; and An apparatus-side transmission step of transmitting the advertisement information to the user terminal, and further comprising a second display step in which the user terminal displays the advertisement information at a position that does not overlap the target web image. .

また、本発明に係る広告生成装置は、ウェブページを表示するユーザ端末と通信可能に構成され前記ユーザ端末に表示させる広告情報を生成する広告生成装置であって、商品の属性情報と該商品の広告情報とを関連付けて記録する記録部を参照可能に構成されており、前記ウェブページ内に含まれるウェブ画像のうち処理対象となる対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報を前記ユーザ端末から受信する装置側受信部と、前記属性関連情報に基づいて前記対象ウェブ画像内に描画された物品の属性情報を取得し、前記記録部を参照して、前記対象ウェブ画像内に描画された物品の広告情報を生成する広告情報生成部と、前記広告情報を前記端末側受信部へ送信する装置側送信部と、を備えて構成される。   An advertisement generation apparatus according to the present invention is an advertisement generation apparatus that is configured to be communicable with a user terminal that displays a web page and generates advertisement information to be displayed on the user terminal. It is configured to be able to refer to a recording unit that records advertisement information in association with it, and for acquiring attribute information of an article drawn on a target web image to be processed among web images included in the web page A device-side receiving unit that receives attribute-related information from the user terminal, and obtains attribute information of an article drawn in the target web image based on the attribute-related information, and refers to the recording unit, and the target An advertisement information generation unit that generates advertisement information of an article drawn in a web image, and a device side transmission unit that transmits the advertisement information to the terminal side reception unit.

さらに、本発明に係る広告表示プログラムは、ウェブページを表示するユーザ端末を動作させる広告表示プログラムであって、前記ユーザ端末を、前記ウェブページを表示する表示部、前記ウェブページ内に含まれるウェブ画像から処理対象となる対象ウェブ画像を選択するユーザ操作を受け付ける入力部、前記対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報を、前記属性関連情報に基づいて前記対象ウェブ画像内に描画された物品の属性情報を取得し前記対象ウェブ画像内に描画された物品の広告情報を生成する広告生成装置へ送信する端末側送信部、及び、前記広告生成装置から前記物品に関する広告情報を受信する端末側受信部として機能させるとともに、前記表示部が、前記対象ウェブ画像と重畳しない位置に前記広告情報を表示するように機能させるプログラムとして構成される。   Furthermore, an advertisement display program according to the present invention is an advertisement display program for operating a user terminal that displays a web page, the user terminal including a display unit that displays the web page, and a web included in the web page. An input unit that receives a user operation for selecting a target web image to be processed from an image, attribute-related information for obtaining attribute information of an article drawn on the target web image, based on the attribute-related information A terminal-side transmitting unit that acquires attribute information of an article drawn in a web image and transmits the advertisement information of the article drawn in the target web image to the advertisement generation apparatus; and the article from the advertisement generation apparatus It functions as a terminal-side receiving unit that receives advertisement information related to the information, and the display unit does not overlap with the target web image Configured as a program to function to display the advertisement information on the location.

本発明に係る広告表示方法、広告生成装置及び広告表示プログラムによれば、上述した本発明に係る広告表示システムと同様の効果を奏する。   According to the advertisement display method, the advertisement generation device, and the advertisement display program according to the present invention, the same effects as those of the advertisement display system according to the present invention described above can be obtained.

本発明によれば、ユーザに手間を取らせることなく画像に描画された物品の広告情報を提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the advertisement information of the articles | goods drawn on the image can be provided, without making a user troublesome.

実施形態に係る広告表示システムの構成概要図である。1 is a schematic configuration diagram of an advertisement display system according to an embodiment. 実施形態に係る広告表示システムに含まれる装置のハードウェア構成図である。It is a hardware block diagram of the apparatus contained in the advertisement display system concerning an embodiment. 実施形態に係る広告表示システムの機能ブロック図である。It is a functional block diagram of the advertisement display system concerning an embodiment. 第1実施形態に係る広告表示システムの動作を示すフローチャートである。It is a flowchart which shows operation | movement of the advertisement display system which concerns on 1st Embodiment. ユーザ端末に表示されたウェブ画像の一例である。It is an example of the web image displayed on the user terminal. (A)はユーザ端末の選択の一例を説明する概要図、(B)は広告情報の表示の一例を説明する概要図である。(A) is a schematic diagram explaining an example of selection of a user terminal, (B) is a schematic diagram explaining an example of display of advertisement information. 検索データベースに格納されたテーブルの一例であり、(A)は画像と属性情報との対応テーブル、(B)は属性情報と物品情報との対応テーブル、(C)は物品情報と広告情報との対応テーブルである。It is an example of a table stored in a search database, (A) is a correspondence table between images and attribute information, (B) is a correspondence table between attribute information and article information, and (C) is an article information and advertisement information table. It is a correspondence table. 検索データベースに格納されたテーブルの一例であり、(A)はテキスト情報と物品情報との対応テーブル、(B)は物品情報と広告情報との対応テーブルである。It is an example of a table stored in a search database, (A) is a correspondence table between text information and article information, and (B) is a correspondence table between article information and advertisement information. 検索データベースに格納されたテーブルの一例であり、(A)は画像特徴パターンと物品情報との対応テーブル、(B)は属性情報と物品情報との対応テーブル、(C)は物品情報と広告情報との対応テーブルである。It is an example of a table stored in a search database, (A) is a correspondence table between image feature patterns and article information, (B) is a correspondence table between attribute information and article information, and (C) is article information and advertisement information. Is a correspondence table. 第2実施形態に係る広告表示システムの機能ブロック図である。It is a functional block diagram of the advertisement display system concerning a 2nd embodiment. 図10に示す広告表示システムの動作を示すフローチャートである。It is a flowchart which shows operation | movement of the advertisement display system shown in FIG. (A)はウェブ画像が分割されている例であり、(B)はウェブサーバから取得された情報に含まれるテーブルの一例であり、位置情報とテキスト情報との対応テーブルである。(A) is an example in which a web image is divided, and (B) is an example of a table included in information acquired from a web server, which is a correspondence table between position information and text information. 第3実施形態に係る広告表示システムの他の動作を示すフローチャートである。It is a flowchart which shows other operation | movement of the advertisement display system which concerns on 3rd Embodiment. (A)はユーザ端末の選択の一例を説明する概要図、(B)は広告情報の表示の一例を説明する概要図である。(A) is a schematic diagram explaining an example of selection of a user terminal, (B) is a schematic diagram explaining an example of display of advertisement information. (A)はユーザ端末の選択の一例を説明する概要図、(B)は広告情報の表示の一例を説明する概要図である。(A) is a schematic diagram explaining an example of selection of a user terminal, (B) is a schematic diagram explaining an example of display of advertisement information. ユーザ端末に表示されたウェブページの一例である。It is an example of the web page displayed on the user terminal.

以下、添付図面を参照して本発明の実施形態について説明する。なお、図面の説明において同一の要素には同一の符号を付し、重複する説明を省略する。   Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings. In the description of the drawings, the same elements are denoted by the same reference numerals, and redundant description is omitted.

(第1実施形態)
本実施形態に係る広告表示システムは、ユーザ端末を用いてウェブページを閲覧している時に当該ユーザ端末へ広告画像を表示させるシステムである。図1に示すように、本実施形態に係る広告表示システム40は、ショッピングサーバ(広告生成装置)1、ウェブサーバ2及びユーザ端末を備えている。なお、ユーザ端末は1台であってもよいし複数台であってもよい。ここでは便宜上、ユーザ端末3A〜ユーザ端末3Cの計3台を図示している。ユーザ端末3A〜ユーザ端末3Cの機能は全て同一であるので、以下ではユーザ端末3Aを例にして説明する。ショッピングサーバ1、ウェブサーバ2及びユーザ端末3Aはそれぞれインターネットに接続されており、互いに通信可能に構成されている。
(First embodiment)
The advertisement display system according to the present embodiment is a system that displays an advertisement image on the user terminal when browsing a web page using the user terminal. As shown in FIG. 1, the advertisement display system 40 according to the present embodiment includes a shopping server (advertisement generating device) 1, a web server 2, and a user terminal. Note that there may be one user terminal or a plurality of user terminals. Here, for convenience, a total of three user terminals 3A to 3C are shown. Since all the functions of the user terminal 3A to the user terminal 3C are the same, the user terminal 3A will be described below as an example. The shopping server 1, the web server 2, and the user terminal 3A are each connected to the Internet and configured to be able to communicate with each other.

図2は、ショッピングサーバ1、ウェブサーバ2及びユーザ端末3Aのハードウェア構成図である。図2に示すように、ショッピングサーバ1、ウェブサーバ2及びユーザ端末3Aは、物理的には、CPU(Central Processing Unit)100、ROM(Read Only Memory)101及びRAM(Random Access Memory)102等の主記憶装置、カメラ又はキーボード等の入力デバイス103、ディスプレイ等の出力デバイス104、ハードディスク等の補助記憶装置105、通信デバイス106などを含む通常のコンピュータシステムとして構成される。後述するショッピングサーバ1、ウェブサーバ2及びユーザ端末3Aの各機能は、CPU100、ROM101、RAM102等のハードウェア上に所定のコンピュータソフトウェアを読み込ませることにより、CPU100の制御の元で入力デバイス103及び出力デバイス104を動作させるとともに、主記憶装置や補助記憶装置105におけるデータの読み出し及び書き込みを行うことで実現される。   FIG. 2 is a hardware configuration diagram of the shopping server 1, the web server 2, and the user terminal 3A. As shown in FIG. 2, the shopping server 1, the web server 2, and the user terminal 3A physically include a CPU (Central Processing Unit) 100, a ROM (Read Only Memory) 101, a RAM (Random Access Memory) 102, and the like. It is configured as a normal computer system including a main storage device, an input device 103 such as a camera or a keyboard, an output device 104 such as a display, an auxiliary storage device 105 such as a hard disk, a communication device 106 and the like. Each function of the shopping server 1, the web server 2, and the user terminal 3A, which will be described later, is configured so that an input device 103 and an output are controlled under the control of the CPU 100 by causing predetermined computer software to be read on hardware such as the CPU 100, the ROM 101, and the RAM 102. This is realized by operating the device 104 and reading and writing data in the main storage device and the auxiliary storage device 105.

図3は、ショッピングサーバ1、ウェブサーバ2及びユーザ端末3Aの機能ブロック図である。図3に示すように、ユーザ端末3Aは、表示部31、入力部32及び通信部30を備えている。表示部31は、ウェブページを生成するブラウザ及びウェブページを描画するディスプレイを含み、ウェブページを表示する機能を有する。また、表示部31は、後述する広告情報をウェブページに重畳させて表示させる機能を有している。例えば、表示部31は、広告情報を新しいブラウザウインドとしてポップアップさせて表示させる機能を有している。   FIG. 3 is a functional block diagram of the shopping server 1, the web server 2, and the user terminal 3A. As illustrated in FIG. 3, the user terminal 3 </ b> A includes a display unit 31, an input unit 32, and a communication unit 30. The display unit 31 includes a browser that generates a web page and a display that draws the web page, and has a function of displaying the web page. The display unit 31 has a function of displaying advertisement information, which will be described later, superimposed on a web page. For example, the display unit 31 has a function of popping up and displaying advertisement information as a new browser window.

入力部32は、ユーザ操作を入力可能に構成されており、例えば、マウス、キーボード、タッチパネル等のハードウェアを介してユーザ操作を受け付ける。入力部32は、ユーザ操作として、ウェブページの表示を要求する操作、及びウェブページ内に表示された画像(ウェブ画像)に関連する広告情報の表示を要求する操作等を受け付ける機能を有している。例えば、入力部32は、ウェブページに含まれる複数のウェブ画像のうち、広告情報の表示を要求するウェブ画像の選択操作を受け付ける。入力部32は、例えば、カーソルをウェブ画像の上に位置させる操作、ウェブ画像のドラッグ操作、又は、ウェブ画像のクリック操作を処理対象のウェブ画像(対象ウェブ画像)を選択した操作として受け付ける。そして、入力部32は、ユーザ操作がなされたウェブ画像に関する情報を通信部30へ出力する機能を有している。対象ウェブ画像に関する情報は、当該対象ウェブ画像に描画された物品の属性情報を取得するために用いられる情報(属性関連情報)であり、例えば対象ウェブ画像の参照先を示す参照先アドレスが用いられる。   The input unit 32 is configured to be able to input a user operation, and accepts the user operation via hardware such as a mouse, a keyboard, and a touch panel, for example. The input unit 32 has a function of accepting, as a user operation, an operation for requesting display of a web page, an operation for requesting display of advertisement information related to an image (web image) displayed in the web page, and the like. Yes. For example, the input unit 32 receives a web image selection operation for requesting display of advertisement information among a plurality of web images included in a web page. The input unit 32 receives, for example, an operation of positioning the cursor on the web image, a drag operation of the web image, or a click operation of the web image as an operation of selecting the web image to be processed (target web image). The input unit 32 has a function of outputting information related to a web image on which a user operation has been performed to the communication unit 30. The information related to the target web image is information (attribute related information) used for acquiring the attribute information of the article drawn on the target web image. For example, a reference destination address indicating a reference destination of the target web image is used. .

通信部30は、送信部(端末側送信部)及び受信部(端末側受信部)として機能し、ショッピングサーバ1との送受信を行うとともに、ウェブサーバ2との送受信を行う。通信部30は、入力部32により入力されたウェブページの要求をウェブサーバ2へ送信し、ウェブサーバ2から要求したウェブページを受信する機能を有している。また、通信部30は、対象ウェブ画像の参照先を示す参照先アドレスをショッピングサーバ1へ送信し、ショッピングサーバ1から広告情報を受信する機能を有している。   The communication unit 30 functions as a transmission unit (terminal side transmission unit) and a reception unit (terminal side reception unit), and performs transmission / reception with the shopping server 1 and transmission / reception with the web server 2. The communication unit 30 has a function of transmitting a request for a web page input by the input unit 32 to the web server 2 and receiving the requested web page from the web server 2. In addition, the communication unit 30 has a function of transmitting a reference destination address indicating a reference destination of the target web image to the shopping server 1 and receiving advertisement information from the shopping server 1.

ウェブサーバ2は、通信部20、ウェブ提供部21及びウェブ情報DB22を備えている。通信部20は、ウェブ端末3Aとの送受信を行うとともに、ショッピングサーバ1との送受信を行う。ウェブ提供部21は、通信部20により受信された、ウェブ端末3Aからの要求に基づいて、要求に対応されたウェブページをウェブ情報DB22に基づいて生成し、生成されたウェブページを通信部20へ出力する機能を有している。ウェブ情報DB22には、例えばHTMLドキュメントやウェブページに表示される画像等が格納されている。通信部20は、ウェブ提供部21から出力された情報をユーザ端末3Aへ送信する。   The web server 2 includes a communication unit 20, a web providing unit 21, and a web information DB 22. The communication unit 20 performs transmission / reception with the web terminal 3 </ b> A and transmission / reception with the shopping server 1. Based on the request from the web terminal 3 </ b> A received by the communication unit 20, the web providing unit 21 generates a web page corresponding to the request based on the web information DB 22, and generates the generated web page. The function to output to. The web information DB 22 stores, for example, images displayed on HTML documents and web pages. The communication unit 20 transmits the information output from the web providing unit 21 to the user terminal 3A.

ショッピングサーバ1は、通信部10、画像取得部11、広告情報生成部12、検索DB(記録部)13及び商品DB(記録部)14を備えている。通信部10は、送信部(装置側送信部)及び受信部(装置側受信部)として機能し、ウェブ端末3Aとの送受信を行うとともに、ウェブサーバ2との送受信を行う。画像取得部11は、ユーザ端末3Aから送信された対象ウェブ画像の参照先を示す参照先アドレス(属性関連情報)に基づいて、対象ウェブ画像を取得する機能を有している。例えば、画像取得部11は、参照アドレスに基づいてウェブサーバ2へ対象ウェブ画像を要求し、ウェブサーバ2から対象ウェブ画像を取得する。また、画像取得部11は、取得した対象ウェブ画像を広告情報生成部12へ出力する機能を有している。   The shopping server 1 includes a communication unit 10, an image acquisition unit 11, an advertisement information generation unit 12, a search DB (recording unit) 13, and a product DB (recording unit) 14. The communication unit 10 functions as a transmission unit (device-side transmission unit) and a reception unit (device-side reception unit), and performs transmission / reception with the web terminal 3 </ b> A and transmission / reception with the web server 2. The image acquisition unit 11 has a function of acquiring a target web image based on a reference destination address (attribute-related information) indicating a reference destination of the target web image transmitted from the user terminal 3A. For example, the image acquisition unit 11 requests the target web image from the web server 2 based on the reference address, and acquires the target web image from the web server 2. The image acquisition unit 11 has a function of outputting the acquired target web image to the advertisement information generation unit 12.

広告情報生成部12は、参照先アドレス(属性関連情報)に基づいて得られた対象ウェブ画像内に描画された物品の属性情報を取得する機能を有している。広告情報生成部12は、所定のアルゴリズムを用いて物品の属性情報を取得する。例えば、広告情報生成部12は、画像認識技術を用いて対象ウェブ画像に描画された物品を認識して物品の属性情報を取得する。属性情報は、物品の商品名又は物品のカテゴリの名称を含み、当該物品を識別する情報である。また、画像認識技術を用いて属性情報を取得する手法としては、例えば、予め物品の属性情報と画像との組み合わせを学習し、学習済みの画像と対象ウェブ画像とをパターンマッチングする手法、予め物品の属性情報と当該物品の画像特徴パターンを学習し、学習済みの画像特徴パターンと対象ウェブ画像の画像特徴パターンとを比較する手法、又は、画像情報から物品に付与された文字情報(テキスト情報)を認識して属性情報を取得する手法が用いられる。広告情報生成部12は、検索DB13を参照して、上記手法で用いる情報を取得する。検索DB13には、画像と物品の属性情報とが関連付けされたテーブル、画像特徴パターンと物品の属性情報とが関連付けされたテーブル、又はテキスト情報と属性情報とが関連付けされたテーブルが格納されている。   The advertisement information generation unit 12 has a function of acquiring attribute information of an article drawn in a target web image obtained based on a reference address (attribute-related information). The advertisement information generation unit 12 acquires the attribute information of the article using a predetermined algorithm. For example, the advertisement information generation unit 12 recognizes an article drawn on the target web image using an image recognition technique and acquires attribute information of the article. The attribute information is information that includes a product name of an article or a name of an article category and identifies the article. In addition, as a method for acquiring attribute information using image recognition technology, for example, a method of learning a combination of attribute information of an article and an image in advance, and pattern matching between the learned image and the target web image, an article in advance A method for learning the attribute information of the image and the image feature pattern of the article and comparing the learned image feature pattern with the image feature pattern of the target web image, or character information (text information) given to the article from the image information Is used to acquire attribute information. The advertisement information generation unit 12 refers to the search DB 13 and acquires information used in the above method. The search DB 13 stores a table in which an image and article attribute information are associated, a table in which an image feature pattern and article attribute information are associated, or a table in which text information and attribute information are associated. .

また、広告情報生成部12は、物品の属性情報に基づいて、物品の属性情報の下位概念であり物品を一意に特定することができる物品情報を取得し、当該物品に関連する広告情報を生成する機能を有している。例えば、広告情報生成部12は、商品DB14を参照して広告情報の生成に必要な情報を取得する。商品DB14には、物品の属性情報と物品情報とが関連付けされたテーブル、及び、物品情報と広告情報とが関連付けされたテーブルが格納されている。なお、広告情報には、物品の画像、商品説明文、在庫数、販売店等の情報が含まれる。広告情報生成部12は、広告情報を通信部10へ出力する機能を有している。   The advertisement information generation unit 12 acquires article information that is a subordinate concept of the article attribute information and can uniquely identify the article based on the article attribute information, and generates advertisement information related to the article. It has a function to do. For example, the advertisement information generation unit 12 refers to the product DB 14 and acquires information necessary for generating advertisement information. The product DB 14 stores a table in which article attribute information and article information are associated with each other, and a table in which article information and advertisement information are associated with each other. The advertisement information includes information such as an image of the product, a product description, the number of stocks, and a store. The advertisement information generation unit 12 has a function of outputting advertisement information to the communication unit 10.

次に、本実施形態に係る広告表示システム40の動作を説明する。図4は、本実施形態に係る広告表示システム40の動作を示すフローチャートである。図4に示す制御処理は、ユーザ端末3Aからウェブページの要求がなされたタイミングで実行される。例えば、入力部32がユーザのウェブページの表示操作を受け付けた場合には、ユーザ端末3Aの通信部30はウェブサーバ2へウェブページの要求を送信する(S10)。   Next, the operation of the advertisement display system 40 according to the present embodiment will be described. FIG. 4 is a flowchart showing the operation of the advertisement display system 40 according to the present embodiment. The control process shown in FIG. 4 is executed at the timing when a web page request is made from the user terminal 3A. For example, when the input unit 32 receives a user's web page display operation, the communication unit 30 of the user terminal 3A transmits a web page request to the web server 2 (S10).

ウェブサーバ2では、S10の処理で送信されたウェブページの要求を通信部20が受信すると、ウェブ提供部21が当該要求を満たすウェブページをウェブ情報DB22から構築する。そして、ウェブサーバ2の通信部20は、構築したウェブページを、ウェブページの要求を送信したユーザ端末3Aへ送信する(S12)。   In the web server 2, when the communication unit 20 receives the web page request transmitted in the process of S10, the web providing unit 21 constructs a web page satisfying the request from the web information DB 22. Then, the communication unit 20 of the web server 2 transmits the constructed web page to the user terminal 3A that transmitted the request for the web page (S12).

ユーザ端末3Aでは、S12の処理で送信されたウェブページを通信部30が受信すると、表示部31が受信されたウェブページを表示する(S14:第1表示ステップ)。図5は、ウェブブラウザを用いて表示されたウェブページの一例である。ウェブページW1は、物品の画像P1を含んでいる。入力部32は、ウェブページW1上に位置するマウスカーソルKの操作情報を取得して対象ウェブ画像となる画像を選択する(S16:入力ステップ)。例えば、図6の(A)に示すように、画像P1の上にマウスカーソルを移動させる操作を取得する。入力部32は、上記操作によって、ユーザが画像P1を対象ウェブ画像(ユーザ操作画像)として選択したと判断する。S16の処理が終了すると、通信部30が当該画像P1のURLをショッピングサーバ1へ送信する(S18:端末側送信ステップ)。   In the user terminal 3A, when the communication unit 30 receives the web page transmitted in the process of S12, the display unit 31 displays the received web page (S14: first display step). FIG. 5 is an example of a web page displayed using a web browser. The web page W1 includes an image P1 of the article. The input unit 32 acquires operation information of the mouse cursor K located on the web page W1 and selects an image to be a target web image (S16: input step). For example, as shown in FIG. 6A, an operation for moving the mouse cursor on the image P1 is acquired. The input unit 32 determines that the user has selected the image P1 as the target web image (user operation image) by the above operation. When the process of S16 ends, the communication unit 30 transmits the URL of the image P1 to the shopping server 1 (S18: terminal side transmission step).

ショッピングサーバ1では、通信部10がS18の処理で送信されたURLを受信すると、画像取得部11がS18の処理で送信されたURLの画像の要求を出力する(装置側受信ステップ)。通信部10は、当該要求をウェブサーバ2へ送信する(S20)。   In the shopping server 1, when the communication unit 10 receives the URL transmitted in the process of S18, the image acquisition unit 11 outputs a request for the image of the URL transmitted in the process of S18 (apparatus side reception step). The communication unit 10 transmits the request to the web server 2 (S20).

ウェブサーバ2では、通信部20がS20の処理で送信されたURLを受信すると、ウェブ提供部21が、ウェブ情報DB22に格納された対象ウェブ画像を、当該URLに基づいて取得する。通信部20は、対象ウェブ画像をショッピングサーバ1へ送信する(S22)。   In the web server 2, when the communication unit 20 receives the URL transmitted in the process of S20, the web providing unit 21 acquires the target web image stored in the web information DB 22 based on the URL. The communication unit 20 transmits the target web image to the shopping server 1 (S22).

ショッピングサーバ1では、通信部10がS22の処理で送信された対象ウェブ画像を受信する(画像取得ステップ)。そして、広告情報生成部12が対象ウェブ画像の解析を行う(S24:広告情報生成ステップ)。ここでは一例として、画像マッチング技術を用いて対象ウェブ画像の解析を行う場合を説明する。検索DB13,商品DB14には、図7に示すテーブル及びテーブルに関連する画像が予め格納されているものとする。図7の(A)は、検索DB13に格納され、画像と属性情報とが関連付けされたテーブルであり、図7の(B)は、商品DB14に格納され、属性情報と物品情報とが関連付けされたテーブルであり、図7の(C)は、商品DB14に格納され、物品情報と広告情報とが関連付けされたテーブルである。広告情報生成部12は、図7の(A)に示すテーブルに基づいて、既に学習済みの画像(例えば画像No.1)と対象ウェブ画像とをマッチングする。学習済みの画像を順次マッチングさせ、学習済みの画像と対象ウェブ画像とが一致する場合又は学習済みの画像と対象ウェブ画像とが類似する場合には、当該画像の属性情報を取得する。例えば、画像No.1と対象ウェブ画像が一致した場合、又は、画像No.1の画像特徴量及び対象ウェブ画像の画像特徴量に基づいて画像No.1に描画されたバッグと対象ウェブ画像に描画された物品とが類似すると判定できる場合には、属性情報である「バッグ」をテーブルから取得する。S24の処理が終了すると、広告情報生成部12は、広告情報を生成する(S26)。   In the shopping server 1, the communication unit 10 receives the target web image transmitted in the process of S22 (image acquisition step). Then, the advertisement information generation unit 12 analyzes the target web image (S24: advertisement information generation step). Here, as an example, a case where the target web image is analyzed using an image matching technique will be described. Assume that the search DB 13 and the product DB 14 store in advance the table shown in FIG. 7 and images related to the table. 7A is a table stored in the search DB 13 and associated with images and attribute information. FIG. 7B is stored in the product DB 14 and associated with attribute information and article information. 7C is a table stored in the product DB 14 and associated with article information and advertisement information. The advertisement information generation unit 12 matches an already learned image (for example, image No. 1) with the target web image based on the table shown in FIG. The learned images are sequentially matched, and when the learned image matches the target web image, or when the learned image and the target web image are similar, the attribute information of the image is acquired. For example, image No. 1 and the target web image match, or the image No. 1 and the image feature amount of the target web image. If it can be determined that the bag drawn in 1 and the article drawn in the target web image are similar, the attribute information “bag” is acquired from the table. When the process of S24 ends, the advertisement information generation unit 12 generates advertisement information (S26).

S26の処理では、広告情報生成部12が、S24の処理で取得された属性情報に基づいて、図7の(B)に示す属性情報と物品情報とが関連付けされたテーブルから物品情報を取得する。例えば、属性情報が「バッグ」である場合には、広告情報生成部12は、物品情報として「バッグA」,「バッグB」,「バッグC」等を取得する。次に、広告情報生成部12は、物品情報に基づいて、図7の(C)に示す物品情報と広告情報とが関連付けされたテーブルから広告情報を取得する。物品情報が「バッグA」,「バッグB」,「バッグC」である場合には、広告情報生成部12は、広告情報として「広告A」,「広告B」,「広告C」を取得する。広告情報生成部12は、取得した広告情報に基づいて、ユーザ端末3Aの表示に適した形式に変更した広告情報を生成する。S26の処理が終了すると、広告情報送信処理へ移行する(S28:装置側送信ステップ)。S28の処理では、通信部10がS26の処理で生成された広告情報をユーザ端末3Aへ送信する。   In the process of S26, the advertisement information generation unit 12 acquires the article information from the table in which the attribute information and the article information illustrated in FIG. 7B are associated with each other based on the attribute information acquired in the process of S24. . For example, when the attribute information is “bag”, the advertisement information generation unit 12 acquires “bag A”, “bag B”, “bag C”, and the like as the item information. Next, the advertisement information generation unit 12 acquires the advertisement information from the table in which the article information and the advertisement information shown in FIG. When the article information is “bag A”, “bag B”, or “bag C”, the advertisement information generation unit 12 acquires “advertisement A”, “advertisement B”, and “advertisement C” as advertisement information. . The advertisement information generation unit 12 generates advertisement information that has been changed to a format suitable for display on the user terminal 3A based on the acquired advertisement information. When the process of S26 ends, the process proceeds to the advertisement information transmission process (S28: device side transmission step). In the process of S28, the communication unit 10 transmits the advertisement information generated in the process of S26 to the user terminal 3A.

ユーザ端末3Aでは、S28の処理で送信された広告情報を受信すると、広告情報を対象ウェブ画像と重畳しない位置に表示する(S30:第2表示ステップ)。例えば、図6の(B)に示すように、対象ウェブ画像P1の周囲に広告画像A1,A2をポップアップさせて表示させる。ポップアップの形態は何でもよく、例えば、新しいブラウザウインドとして広告画像A1,A2をポップアップさせてもよいし、ブラウザウインドを生成せずにポップアップさせてもよい。また、広告画像A1,A2は小売店舗へのリンクが張られていてもよい。すなわち、広告画像A1,A2に、ユーザ閲覧中のウェブページのドメインとは異なるドメインへのリンクが関連付けされていてもよい。なお、広告画像A1,A2は、対象ウェブ画像P1に近接した位置(並んだ位置又は隣接した位置)に、かつ、対象ウェブ画像P1とは重なることなく配置される。S30の処理が終了すると、図4に示す一連の動作を終了する。   In user terminal 3A, if advertising information transmitted by processing of S28 is received, advertising information will be displayed on a position which does not overlap with a target web picture (S30: 2nd display step). For example, as shown in FIG. 6B, advertisement images A1 and A2 are popped up and displayed around the target web image P1. Any form of pop-up may be used. For example, the advertisement images A1 and A2 may be popped up as a new browser window, or may be popped up without generating a browser window. Further, the advertisement images A1 and A2 may be linked to a retail store. That is, a link to a domain different from the domain of the web page being browsed by the user may be associated with the advertisement images A1 and A2. Note that the advertisement images A1 and A2 are arranged at positions close to the target web image P1 (aligned positions or adjacent positions) without overlapping the target web image P1. When the process of S30 ends, the series of operations shown in FIG. 4 ends.

以上で図4に示す制御処理を終了する。図4に示す制御処理を実行することで、ユーザの意思に基づいて、ウェブページ上に含まれる画像に関連する広告が、当該画像と重畳しない位置に表示される。なお、上述した制御処理では、S24に示す対象ウェブ画像の解析処理を、画像マッチング技術を用いて行う場合を説明したが、その他のアルゴリズムを用いてもよい。   Thus, the control process shown in FIG. 4 is completed. By executing the control process shown in FIG. 4, an advertisement related to an image included on the web page is displayed at a position that does not overlap the image based on the user's intention. In the above-described control processing, the case where the analysis processing of the target web image shown in S24 is performed using the image matching technique has been described, but other algorithms may be used.

例えば、広告情報生成部12は、画像認識技術を用いて対象ウェブ画像に描画されている物品に付与された商品名やブランド名をテキスト情報として抽出してもよい。検索DB13及び商品DB14には、図8に示すテーブルが予め格納されているものとする。図8の(A)は、検索DB13に格納され、テキスト情報と属性情報とが関連付けされたテーブルであり、図8の(B)は、商品DB14に格納され、属性情報と物品情報とが関連付けされたテーブルであり、図8の(C)は、商品DB14に格納され、物品情報と広告情報とが関連付けされたテーブルである。広告情報生成部12は、抽出したテキスト情報に基づいて、図8の(A)に示すテーブルを用いて属性情報を特定し、図8の(B)に示すテーブルを用いて物品情報を特定し、図8の(C)に示すテーブルを用いて広告情報を取得する。   For example, the advertisement information generation unit 12 may extract a product name or a brand name given to an article drawn on the target web image using text recognition technology as text information. It is assumed that the table shown in FIG. 8 is stored in advance in the search DB 13 and the product DB 14. 8A is a table stored in the search DB 13 and associated with text information and attribute information. FIG. 8B is stored in the product DB 14 and associated with attribute information and article information. 8C is a table stored in the product DB 14 and associated with article information and advertisement information. Based on the extracted text information, the advertisement information generation unit 12 specifies attribute information using the table shown in FIG. 8A, and specifies article information using the table shown in FIG. The advertisement information is acquired using the table shown in FIG.

また、広告情報生成部12は、画像認識技術を用いて対象ウェブ画像に描画されている物品の特徴パターンを抽出してもよい。検索DB13及び商品DB14には、図9に示すテーブルが予め格納されているものとする。図9の(A)は、検索DB13に格納され、特徴パターンと属性情報とが関連付けされたテーブルであり、図9の(B)は、商品DB14に格納され、属性情報と物品情報とが関連付けされたテーブルであり、図9の(C)は、商品DB14に格納され、物品情報と広告情報とが関連付けされたテーブルである。特徴パターンは、物品の特徴を示す情報であって、例えばバックであれば矩形形状の上部に取手が取り付けられているという情報となる。広告情報生成部12は、抽出した特徴パターンに基づいて、図9の(A)に示すテーブルを用いて属性情報を特定し、図9の(B)に示すテーブルを用いて物品情報を特定し、図9の(C)に示すテーブルを用いて広告情報を取得する。   Further, the advertisement information generation unit 12 may extract a feature pattern of an article drawn on the target web image using an image recognition technique. It is assumed that the table shown in FIG. 9 is stored in advance in the search DB 13 and the product DB 14. 9A is a table stored in the search DB 13 and associated with feature patterns and attribute information. FIG. 9B is stored in the product DB 14 and associated with attribute information and article information. 9C is a table stored in the product DB 14 and associated with article information and advertisement information. The feature pattern is information indicating the feature of the article. For example, in the case of a back, the feature pattern is information that a handle is attached to an upper portion of a rectangular shape. The advertisement information generation unit 12 specifies attribute information using the table shown in FIG. 9A based on the extracted feature pattern, and specifies article information using the table shown in FIG. 9B. The advertisement information is acquired using the table shown in FIG.

次に、ショッピングサーバ1を広告生成装置として機能させるための広告生成プログラムを説明する。   Next, an advertisement generation program for causing the shopping server 1 to function as an advertisement generation device will be described.

広告生成プログラムは、メインモジュール、入力モジュール及び演算処理モジュールを備えている。メインモジュールは、演算処理を統括的に制御する部分である。入力モジュールは、ユーザ端末3A及びウェブサーバ2から情報を取得するようにショッピングサーバ1を動作させる。演算処理モジュールは、画像取得モジュール及び広告情報生成モジュールを備えている。メインモジュール、入力モジュール及び演算処理モジュールを実行させることにより実現される機能は、上述したショッピングサーバ1の画像取得部11及び広告情報生成部12の機能とそれぞれ同様である。   The advertisement generation program includes a main module, an input module, and an arithmetic processing module. The main module is a part that comprehensively controls arithmetic processing. The input module operates the shopping server 1 so as to acquire information from the user terminal 3 </ b> A and the web server 2. The arithmetic processing module includes an image acquisition module and an advertisement information generation module. Functions realized by executing the main module, the input module, and the arithmetic processing module are the same as the functions of the image acquisition unit 11 and the advertisement information generation unit 12 of the shopping server 1 described above.

広告生成プログラムは、例えば、ROM等の記憶媒体または半導体メモリによって提供される。また、広告生成プログラムは、データ信号としてネットワークを介して提供されてもよい。   The advertisement generation program is provided by a storage medium such as a ROM or a semiconductor memory, for example. The advertisement generation program may be provided as a data signal via a network.

次に、ウェブページを表示するユーザ端末3Aを動作させる広告表示プログラムを説明する。   Next, an advertisement display program for operating the user terminal 3A that displays a web page will be described.

広告表示プログラムは、メインモジュール、入力モジュール及び演算処理モジュールを備えている。メインモジュールは、演算処理を統括的に制御する部分である。入力モジュールは、ショッピングサーバ1及びウェブサーバ2から情報を取得するようにユーザ端末3Aを動作させる。演算処理モジュールは、表示モジュールを備えている。メインモジュール、入力モジュール及び演算処理モジュールを実行させることにより実現される機能は、上述したユーザ端末3Aの表示部31、入力部32及び通信部30の機能とそれぞれ同様である。   The advertisement display program includes a main module, an input module, and an arithmetic processing module. The main module is a part that comprehensively controls arithmetic processing. The input module operates the user terminal 3 </ b> A so as to acquire information from the shopping server 1 and the web server 2. The arithmetic processing module includes a display module. Functions realized by executing the main module, the input module, and the arithmetic processing module are the same as the functions of the display unit 31, the input unit 32, and the communication unit 30 of the user terminal 3A described above.

広告表示プログラムは、例えば、ROM等の記憶媒体または半導体メモリによって提供される。また、広告生成プログラムは、データ信号としてネットワークを介して提供されてもよい。また、広告表示プログラムは、ブラウザ用ツールバー、ブラウザ用アドオン、ブラウザそのもの、の何れに実装してもよい。   The advertisement display program is provided by a storage medium such as a ROM or a semiconductor memory, for example. The advertisement generation program may be provided as a data signal via a network. The advertisement display program may be installed in any of the browser toolbar, browser add-on, and browser itself.

以上、第1実施形態に係る広告表示システム40によれば、ユーザ端末3Aの入力部32により、ウェブページ上に表示されているウェブ画像を選択するユーザ操作が入力され、通信部30によりユーザ操作により選択された対象ウェブ画像の参照先アドレスがショッピングサーバ1へ送信され、ショッピングサーバ1の画像取得部11により参照先アドレスに基づいて対象ウェブ画像が取得され、広告情報生成部12、検索DB13及び商品DB14により、対象ウェブ画像内に描画された物品の属性情報を用いて広告情報が生成され、生成された広告情報が通信部10によりユーザ端末3Aへ送信され、ユーザ端末3Aの表示部31により広告情報が対象ウェブ画像の周囲に表示される。このように、ユーザは、ユーザ端末3Aを用いて物品を撮像することなく、ウェブページ閲覧中に画像を選択するだけで、当該画像に描画された物品に関連する広告情報を取得することができる。すなわち、広告情報を提示するまでの動線を短くすることができる。また、広告情報が当該画像の周囲に表示されるため、ユーザはウェブ画像と広告情報との両方を一度に閲覧することが可能となる。よって、ユーザに手間を取らせることなく画像に描画された物品の広告情報を提供することができる。   As described above, according to the advertisement display system 40 according to the first embodiment, the user operation for selecting the web image displayed on the web page is input by the input unit 32 of the user terminal 3A, and the user operation is performed by the communication unit 30. The reference destination address of the target web image selected by is transmitted to the shopping server 1, and the target web image is acquired based on the reference destination address by the image acquisition unit 11 of the shopping server 1, and the advertisement information generation unit 12, the search DB 13, and The product DB 14 generates advertisement information using the attribute information of the article drawn in the target web image, the generated advertisement information is transmitted to the user terminal 3A by the communication unit 10, and is displayed by the display unit 31 of the user terminal 3A. Advertisement information is displayed around the target web image. As described above, the user can acquire advertisement information related to the article drawn on the image only by selecting the image while browsing the web page without imaging the article using the user terminal 3A. . That is, the flow line until the advertisement information is presented can be shortened. Further, since the advertisement information is displayed around the image, the user can view both the web image and the advertisement information at a time. Therefore, it is possible to provide the advertisement information of the article drawn on the image without making the user troublesome.

(第2実施形態)
第2実施形態に係る広告表示システム40は、第1実施形態に係る広告表示システム40とほぼ同様に構成され、ショッピングサーバ1が属性情報を取得するための画像解析を行わず、ユーザ端末3A側で対象ウェブ画像に描画された物品に関連するテキスト情報(属性関連情報)を取得する点が相違する。以下では、第1実施形態に係る広告表示システム40と相違する点を中心に説明し、重複する部分の説明は省略する。
(Second Embodiment)
The advertisement display system 40 according to the second embodiment is configured in substantially the same manner as the advertisement display system 40 according to the first embodiment, and the user terminal 3A side does not perform image analysis for the shopping server 1 to acquire attribute information. The difference is that the text information (attribute related information) related to the article drawn on the target web image is acquired. Below, it demonstrates centering on a different point from the advertisement display system 40 which concerns on 1st Embodiment, and description of the overlapping part is abbreviate | omitted.

最初に、広告表示システム40の構成について説明する。図10は、本実施形態に係る広告表示システム40の機能ブロック図である。   First, the configuration of the advertisement display system 40 will be described. FIG. 10 is a functional block diagram of the advertisement display system 40 according to the present embodiment.

ユーザ端末3Aは、第1実施形態に係るユーザ端末3Aとほぼ同様に構成され、テキスト情報取得部33を備える点が相違する。また、入力部32及び通信部30の一部機能が相違する。入力部32は、ウェブ画像においてユーザ操作により選択されたウェブ画像の選択位置(座標)を入力する機能を有している。また、入力部32は、選択位置に関する情報をテキスト情報取得部33へ出力する機能を有している。テキスト情報取得部33は、ユーザ操作により選択された選択位置に基づいて、選択位置又は選択位置付近に描画された物品に関するテキスト情報を取得する機能を有している。例えば、テキスト情報取得部33は、ウェブサーバ2から送信された情報(例えばウェブページの配信時に付与される情報)を参照し、選択位置に基づいてテキスト情報を取得する。ウェブサーバ2から送信される情報には、例えば、選択位置とテキスト情報とが関連付けされた情報(テーブル)が含まれている。通信部30は、テキスト情報をショッピングサーバ1へ送信する機能を有している。ユーザ端末3Aのその他の構成は、第1実施形態に係るユーザ端末3Aと同様である。   The user terminal 3A is configured in substantially the same manner as the user terminal 3A according to the first embodiment, and is different in that the user terminal 3A includes a text information acquisition unit 33. Moreover, some functions of the input unit 32 and the communication unit 30 are different. The input unit 32 has a function of inputting a selected position (coordinates) of a web image selected by a user operation in the web image. The input unit 32 has a function of outputting information on the selected position to the text information acquisition unit 33. The text information acquisition unit 33 has a function of acquiring text information related to an article drawn at or near the selected position based on the selected position selected by a user operation. For example, the text information acquisition unit 33 refers to information transmitted from the web server 2 (for example, information given when a web page is distributed), and acquires text information based on the selected position. The information transmitted from the web server 2 includes, for example, information (table) in which the selected position and text information are associated with each other. The communication unit 30 has a function of transmitting text information to the shopping server 1. Other configurations of the user terminal 3A are the same as those of the user terminal 3A according to the first embodiment.

ショッピングサーバ1は、第1実施形態に係るショッピングサーバ1とほぼ同様に構成され、画像取得部11を備えない点、及び広告情報生成部12の一部機能が相違する。広告情報生成部12は、ユーザ端末3Aから送信されたテキスト情報(属性関連情報)に基づいて広告情報を生成する機能を有している。ショッピングサーバ1のその他の構成は、第1実施形態に係るショッピングサーバ1と同様である。   The shopping server 1 is configured in substantially the same manner as the shopping server 1 according to the first embodiment, and is different in that it does not include the image acquisition unit 11 and a partial function of the advertisement information generation unit 12. The advertisement information generation unit 12 has a function of generating advertisement information based on text information (attribute-related information) transmitted from the user terminal 3A. Other configurations of the shopping server 1 are the same as those of the shopping server 1 according to the first embodiment.

次に、本実施形態に係る広告表示システム40の動作について説明する。図11は、本実施形態に係る広告表示システム40の動作を示すフローチャートである。図11に示すS10に示す処理は、図4に示す第1実施形態に係る広告表示システム40の処理と同様であるので説明を省略する。   Next, the operation of the advertisement display system 40 according to this embodiment will be described. FIG. 11 is a flowchart showing the operation of the advertisement display system 40 according to the present embodiment. The processing shown in S10 shown in FIG. 11 is the same as the processing of the advertisement display system 40 according to the first embodiment shown in FIG.

S12の処理では、ウェブサーバ2がウェブページをユーザ端末3Aへ送信する。このとき、選択位置とテキスト情報とが関連付けされた情報も送信される。例えば、ウェブサーバ2は、ウェブ情報DB22を参照し、座標位置とテキスト情報とを関連付けしたテーブルに含まれる情報を送信する。S14に示す処理は、図4に示す第1実施形態に係る広告表示システム40の処理と同様であるので説明を省略する。   In the process of S12, the web server 2 transmits a web page to the user terminal 3A. At this time, information in which the selected position is associated with the text information is also transmitted. For example, the web server 2 refers to the web information DB 22 and transmits information included in a table in which coordinate positions and text information are associated with each other. The process shown in S14 is the same as the process of the advertisement display system 40 according to the first embodiment shown in FIG.

S16の処理では、入力部32が、ウェブページW1上に位置するマウスカーソルKの位置情報を取得する。以下では、図12の(A)に示すように、対象ウェブ画像が複数の部分領域E1〜E9に分割されて管理されている場合を説明する。入力部32は、マウスカーソルKの位置情報に基づいて、ユーザが対象ウェブ画像のどの領域(選択位置)を選択しているのかを取得する。例えば、図12の(A)のマウスカーソルKに示す位置に含まれる領域E4を選択領域として取得する。S16の処理が終了すると、テキスト情報取得処理へ移行する(S17)。   In the process of S16, the input unit 32 acquires the position information of the mouse cursor K located on the web page W1. Below, as shown to (A) of FIG. 12, the case where a target web image is divided | segmented into several partial area | regions E1-E9 and managed is demonstrated. Based on the position information of the mouse cursor K, the input unit 32 acquires which region (selected position) of the target web image is selected by the user. For example, an area E4 included in the position indicated by the mouse cursor K in FIG. When the process of S16 ends, the process proceeds to a text information acquisition process (S17).

S17の処理では、テキスト情報取得部33が、S12の処理でウェブサーバ2から送信された情報を参照し、S16の処理で取得した選択領域に基づいて、テキスト情報を取得する。ここで、ウェブサーバ2から送信された情報の一例を、図12の(B)に示す。図12の(B)は、選択位置とテキスト情報とが関連付けされたテーブルである。テキスト情報取得部33は、選択領域に基づいて、図12の(B)に示すテーブルを用いてテキスト情報を取得する。例えば、選択位置がE4の場合には、商品名Aを取得する。S17の処理が終了すると、送信処理へ移行する(S18)。S18の処理では、通信部30がS17の処理で取得されたテキスト情報をショッピングサーバ1へ送信する。   In the process of S17, the text information acquisition unit 33 refers to the information transmitted from the web server 2 in the process of S12, and acquires the text information based on the selection area acquired in the process of S16. Here, an example of information transmitted from the web server 2 is shown in FIG. FIG. 12B is a table in which the selected position is associated with the text information. The text information acquisition unit 33 acquires text information using the table shown in FIG. 12B based on the selected area. For example, when the selection position is E4, the product name A is acquired. When the process of S17 ends, the process proceeds to a transmission process (S18). In the process of S18, the communication unit 30 transmits the text information acquired in the process of S17 to the shopping server 1.

ショッピングサーバ1がテキスト情報を受信すると、広告情報生成処理を開始する(S26)。広告情報生成部12は、受信したテキスト情報に基づいて広告情報を生成する。この処理は、図4に示す第1実施形態の処理(図8に示すテーブルを用いた処理)と同様であるので、説明を省略する。また、S28及びS30の処理も、図4に示す第1実施形態に係る広告表示システム40の処理と同様であるので、説明を省略する。   When the shopping server 1 receives the text information, the advertisement information generation process is started (S26). The advertisement information generation unit 12 generates advertisement information based on the received text information. Since this processing is the same as the processing of the first embodiment shown in FIG. 4 (processing using the table shown in FIG. 8), description thereof is omitted. Further, the processing of S28 and S30 is the same as the processing of the advertisement display system 40 according to the first embodiment shown in FIG.

以上で図11に示す制御処理を終了する。図11に示す制御処理を実行することにより、図4に示す制御処理と同様に、ユーザの意思に基づいて、ウェブページ上に含まれる画像に関連する広告が、当該画像と重畳しない位置に表示される。なお、上述した制御処理では、座標位置とテキスト情報とを関連付けしたテーブルがウェブサーバ2のウェブ情報DB22に格納されており、当該テーブルに関する情報がユーザ端末3A側へ送信され、当該テーブルを用いてテキスト情報を取得する例を説明したが、その他の方法でテキスト情報を取得してもよい。例えば、ユーザ端末3A側で、画像認識技術を用いて対象ウェブ画像に描画されている物品に付与された商品名やブランド名をテキスト情報として抽出してもよい。   This is the end of the control process shown in FIG. By executing the control process shown in FIG. 11, as in the control process shown in FIG. 4, the advertisement related to the image included on the web page is displayed at a position not superimposed on the image based on the user's intention. Is done. In the above-described control processing, a table in which the coordinate position and the text information are associated is stored in the web information DB 22 of the web server 2, and information related to the table is transmitted to the user terminal 3A side, and the table is used. Although an example of acquiring text information has been described, text information may be acquired by other methods. For example, on the user terminal 3A side, the product name or brand name given to the article drawn on the target web image using image recognition technology may be extracted as text information.

以上、第2実施形態に係る広告表示システム40によれば、第1実施形態に係る広告表示システムと同様の作用効果を奏する。   As mentioned above, according to the advertisement display system 40 which concerns on 2nd Embodiment, there exists an effect similar to the advertisement display system which concerns on 1st Embodiment.

(第3実施形態)
第3実施形態に係る広告表示システム40は、第1実施形態に係る広告表示システム40とほぼ同様に構成され、ショッピングサーバ1が、ウェブサーバ2から対象ウェブ画像を取得することなく、ユーザ端末3Aから対象ウェブ画像(属性関連情報)を取得する点が相違する。以下では、第1実施形態に係る広告表示システム40と相違する点を中心に説明し、重複する部分の説明は省略する。以下では、第1実施形態に係る広告表示システム40と相違する点を中心に説明し、重複する部分の説明は省略する。
(Third embodiment)
The advertisement display system 40 according to the third embodiment is configured in substantially the same manner as the advertisement display system 40 according to the first embodiment, and the shopping server 1 does not acquire the target web image from the web server 2 and the user terminal 3A. The difference is that the target web image (attribute-related information) is acquired from. Below, it demonstrates centering on a different point from the advertisement display system 40 which concerns on 1st Embodiment, and description of the overlapping part is abbreviate | omitted. Below, it demonstrates centering on a different point from the advertisement display system 40 which concerns on 1st Embodiment, and description of the overlapping part is abbreviate | omitted.

広告表示システム40の構成は、第1実施形態に係る広告表示システム40とほぼ同様であり、ショッピングサーバ1が画像取得部11を備えない点が相違し、その他は同様である。   The configuration of the advertisement display system 40 is substantially the same as that of the advertisement display system 40 according to the first embodiment, except that the shopping server 1 does not include the image acquisition unit 11, and the other is the same.

図13は、本実施形態に係る広告表示システム40の動作を示すフローチャートである。図13に示すS10〜S16に示す処理は、図4に示す第1実施形態に係る広告表示システム40と同様であるので説明を省略する。S18の処理において、ユーザ端末3Aは、S16の処理で取得した対象ウェブ画像を、ショッピングサーバ1へ送信する。   FIG. 13 is a flowchart showing the operation of the advertisement display system 40 according to the present embodiment. The processes shown in S10 to S16 shown in FIG. 13 are the same as those in the advertisement display system 40 according to the first embodiment shown in FIG. In the process of S18, the user terminal 3A transmits the target web image acquired in the process of S16 to the shopping server 1.

ショッピングサーバ1が対象ウェブ画像を受信すると、広告情報生成処理を開始する(S26)。広告情報生成部12は、受信した対象ウェブ画像に基づいて広告情報を生成する。この処理は、図4に示す第1実施形態の処理と同様であるので、説明を省略する。また、S28及びS30の処理も、図4に示す第1実施形態に係る広告表示システム40の処理と同様であるので、説明を省略する。   When the shopping server 1 receives the target web image, the advertisement information generation process is started (S26). The advertisement information generation unit 12 generates advertisement information based on the received target web image. This process is the same as the process of the first embodiment shown in FIG. Further, the processing of S28 and S30 is the same as the processing of the advertisement display system 40 according to the first embodiment shown in FIG.

以上で図13に示す制御処理を終了する。図13に示す制御処理を実行することにより、図4に示す制御処理と同様に、ユーザの意思に基づいて、ウェブページ上に含まれる画像に関連する広告が、当該画像と重畳しない位置に表示される。   Thus, the control process shown in FIG. 13 is finished. By executing the control process shown in FIG. 13, as in the control process shown in FIG. 4, the advertisement related to the image included on the web page is displayed at a position not superimposed on the image based on the user's intention. Is done.

以上、第3実施形態に係る広告表示システム40によれば、第1実施形態に係る広告表示システムと同様の作用効果を奏する。   As mentioned above, according to the advertisement display system 40 concerning 3rd Embodiment, there exists an effect similar to the advertisement display system concerning 1st Embodiment.

(第4実施形態)
第4実施形態に係る広告表示システム40は、第1実施形態に係る広告表示システム40とほぼ同様に構成され、ユーザ端末3Aの入力部32の構成が一部相違する。以下では、第1実施形態に係る広告表示システム40と相違する点を中心に説明し、重複する部分の説明は省略する。
(Fourth embodiment)
The advertisement display system 40 according to the fourth embodiment is configured in substantially the same manner as the advertisement display system 40 according to the first embodiment, and the configuration of the input unit 32 of the user terminal 3A is partially different. Below, it demonstrates centering on a different point from the advertisement display system 40 which concerns on 1st Embodiment, and description of the overlapping part is abbreviate | omitted.

第4実施形態に係る広告表示システム40のユーザ端末3Aの入力部32は、ウェブ画像においてユーザ操作により選択された選択範囲を入力する機能を有している。すなわち、入力部32は、ユーザ操作により選択された選択範囲の位置情報を入力する機能を有している。例えば、入力部32は、ウェブ画像をドラッグする操作を受け付けることで、対象ウェブ画像の選択範囲を入力する。図14の(A)に示すウェブ画像P2を例として説明すると、入力部32はユーザ操作によりドラッグされた範囲S1を選択範囲(部分画像)として受け付ける。   The input unit 32 of the user terminal 3A of the advertisement display system 40 according to the fourth embodiment has a function of inputting a selection range selected by a user operation on a web image. That is, the input unit 32 has a function of inputting position information of a selection range selected by a user operation. For example, the input unit 32 inputs a selection range of the target web image by receiving an operation of dragging the web image. To explain the web image P2 shown in FIG. 14A as an example, the input unit 32 receives a range S1 dragged by a user operation as a selection range (partial image).

また、入力部32は、ウェブ画像においてユーザ操作により選択された選択位置を入力する機能を有している。すなわち、入力部32は、ユーザ操作により選択された選択位置の位置情報を入力する機能を有している。例えば、入力部32は、ウェブ画像をクリックする操作を受け付けることで、対象ウェブ画像の選択位置を入力する。図15の(A)に示すウェブ画像P2を例として説明すると、入力部32はユーザ操作によりクリックされた位置S2を選択位置として受け付ける。   The input unit 32 has a function of inputting a selection position selected by a user operation on the web image. That is, the input unit 32 has a function of inputting position information of a selected position selected by a user operation. For example, the input unit 32 receives the operation of clicking the web image, and inputs the selection position of the target web image. If the web image P2 shown to (A) of FIG. 15 is demonstrated as an example, the input part 32 will receive the position S2 clicked by user operation as a selection position.

ユーザ端末3Aの通信部30は、入力部32により取得された選択範囲又は選択位置をショッピングサーバ1へ送信する。ショッピングサーバ1の通信部10が選択範囲を受信した場合には、広告情報生成部12は、対象ウェブ画像の選択範囲内に含まれる物品について画像認識を行い、選択範囲内に含まれる物品の属性情報を取得して、広告情報を生成する。例えば、図14の(A)に示すように、選択範囲S1内にバックが描画されているため、図14の(B)に示すように、バックに関する広告A1,A2が対象ウェブ画像の周囲に表示される。また、ショッピングサーバ1の通信部10が選択位置を受信した場合には、広告情報生成部12は、対象ウェブ画像の画像情報であるコントラスト情報(例えば、画素間のコントラスト差やコントラスト比)を用いて対象ウェブ画像内の物品の輪郭を特定し、物品の輪郭と選択位置とに基づいて、選択位置を含む部分画像(物品の輪郭に囲まれた領域)を取得する。そして、広告情報生成部12は、部分画像内の物品について画像認識を行い、対象ウェブ画像内の物品の属性情報を取得して、選択範囲内に含まれる物品についての広告情報を生成する。例えば、図15の(A)に示すように、選択位置S2は、帽子の輪郭R1内に含まれるため、図15の(B)に示すように、帽子に関する広告A3,A4が対象ウェブ画像の周囲に表示される。   The communication unit 30 of the user terminal 3 </ b> A transmits the selection range or the selection position acquired by the input unit 32 to the shopping server 1. When the communication unit 10 of the shopping server 1 receives the selection range, the advertisement information generation unit 12 performs image recognition on the articles included in the selection range of the target web image, and attributes of the articles included in the selection range. Get information and generate advertising information. For example, as shown in FIG. 14A, since a background is drawn in the selection range S1, advertisements A1 and A2 related to the background are displayed around the target web image as shown in FIG. Is displayed. Further, when the communication unit 10 of the shopping server 1 receives the selected position, the advertisement information generation unit 12 uses contrast information (for example, a contrast difference or contrast ratio between pixels) that is image information of the target web image. Then, the outline of the article in the target web image is specified, and a partial image (area surrounded by the outline of the article) including the selected position is acquired based on the outline of the article and the selected position. Then, the advertisement information generation unit 12 performs image recognition on the article in the partial image, acquires attribute information of the article in the target web image, and generates advertisement information about the article included in the selection range. For example, as shown in FIG. 15A, since the selected position S2 is included in the outline R1 of the hat, as shown in FIG. 15B, advertisements A3 and A4 related to the hat are included in the target web image. It is displayed around.

その他の構成及び動作については、第1実施形態に係る広告表示システム40と同様である。また、上記処理内容は、第1実施形態に係る広告表示システム40を基準として説明したが、第2又は第3実施形態に係る広告表示システム40に適用してもよい。   Other configurations and operations are the same as those of the advertisement display system 40 according to the first embodiment. Moreover, although the said process content demonstrated based on the advertisement display system 40 which concerns on 1st Embodiment, you may apply to the advertisement display system 40 which concerns on 2nd or 3rd embodiment.

以上、第4実施形態に係る広告表示システム40によれば、第1及び第2実施形態に係る広告表示システム40と同様の作用効果を奏するとともに、対象ウェブ画像内に複数の物品が表示されている場合であっても、ユーザが希望する物品の広告情報を適切に生成することができる。   As described above, according to the advertisement display system 40 according to the fourth embodiment, the same effects as the advertisement display system 40 according to the first and second embodiments are exhibited, and a plurality of articles are displayed in the target web image. Even if it exists, the advertising information of the goods which a user desires can be produced | generated appropriately.

(第5実施形態)
第5実施形態に係る広告表示システム40は、第1実施形態に係る広告表示システム40とほぼ同様に構成され、ユーザ端末3Aの入力部32及び表示部31の構成が一部相違する。以下では、第1実施形態に係る広告表示システム40と相違する点を中心に説明し、重複する部分の説明は省略する。
(Fifth embodiment)
The advertisement display system 40 according to the fifth embodiment is configured in substantially the same manner as the advertisement display system 40 according to the first embodiment, and the configurations of the input unit 32 and the display unit 31 of the user terminal 3A are partially different. Below, it demonstrates centering on a different point from the advertisement display system 40 which concerns on 1st Embodiment, and description of the overlapping part is abbreviate | omitted.

第5実施形態に係る広告表示システム40のユーザ端末3Aの表示部31は、ウェブページを表示する際に、ウェブ画像が広告画像であるか否かをウェブ画像の参照先アドレスを用いて判定する機能を有している。ここで、広告画像とは、ユーザ閲覧中のウェブページのドメインとは異なるドメインへのリンク(リンク情報)が関連付けされている画像である。そして、表示部31は、広告画像であるウェブ画像と広告画像でないウェブ画像との表示形態を異ならせて表示する機能を有している。例えば、図16に示すように、ウェブページW2上に、通常の画像P2と、広告画像P3,P4が存在しているとする。この場合、表示部31は、通常の画像P2はそのまま表示するとともに、画像P2の周囲を囲むフレームF1を作成して描画する。このように、通常の画像P2と、広告画像P3,P4とをユーザが一目で区別できるように、表示態様を異なるものとする。   When displaying the web page, the display unit 31 of the user terminal 3A of the advertisement display system 40 according to the fifth embodiment determines whether or not the web image is the advertisement image using the reference address of the web image. It has a function. Here, the advertisement image is an image associated with a link (link information) to a domain different from the domain of the web page being browsed by the user. And the display part 31 has a function which displays differently the display form of the web image which is an advertisement image, and the web image which is not an advertisement image. For example, as shown in FIG. 16, it is assumed that a normal image P2 and advertisement images P3 and P4 exist on the web page W2. In this case, the display unit 31 displays the normal image P2 as it is, and creates and draws a frame F1 surrounding the image P2. Thus, the display mode is different so that the user can distinguish the normal image P2 and the advertisement images P3 and P4 at a glance.

また、ユーザ端末3Aの入力部32は、ユーザにより選択された対象ウェブ画像が広告画像であるか否かを、対象ウェブ画像に関連付けされたウェブページのリンク情報に基づいて判定する機能を有している。そして、表示部31は、対象ウェブ画像が広告画像である場合には、広告情報を表示しない。これにより、広告画像の周囲には広告情報が表示されない。   Further, the input unit 32 of the user terminal 3A has a function of determining whether or not the target web image selected by the user is an advertisement image based on link information of a web page associated with the target web image. ing. And the display part 31 does not display advertising information, when a target web image is an advertising image. Thereby, advertisement information is not displayed around the advertisement image.

その他の構成及び動作については、第1実施形態に係る広告表示システム40と同様である。また、上記処理内容は、第1実施形態に係る広告表示システム40を基準として説明したが、第2〜第5実施形態に係る広告表示システム40に適用してもよい。   Other configurations and operations are the same as those of the advertisement display system 40 according to the first embodiment. Moreover, although the said process content demonstrated based on the advertisement display system 40 which concerns on 1st Embodiment, you may apply to the advertisement display system 40 which concerns on 2nd-5th embodiment.

以上、第5実施形態に係る広告表示システム40によれば、第1〜第3実施形態に係る広告表示システム40と同様の作用効果を奏するとともに、ユーザ端末3Aの入力部32により、対象ウェブ画像の参照先アドレスを用いて対象ウェブ画像が広告画像であるか否かが判定され、対象ウェブ画像が広告画像である場合には、ユーザ操作を受け付けない。このため、既存の広告画像の周囲に広告情報を表示することを防止することができる。したがって、既存の広告の宣伝効果を妨げることを回避しつつ、ユーザに手間を取らせることなく画像に描画された物品の広告情報を提供することができる。   As described above, according to the advertisement display system 40 according to the fifth embodiment, the same effect as the advertisement display system 40 according to the first to third embodiments can be obtained, and the target web image can be obtained by the input unit 32 of the user terminal 3A. It is determined whether or not the target web image is an advertisement image using the reference destination address, and if the target web image is an advertisement image, no user operation is accepted. For this reason, it is possible to prevent the advertisement information from being displayed around the existing advertisement image. Therefore, it is possible to provide the advertisement information of the article drawn on the image without making the user troublesome while avoiding hindering the advertising effect of the existing advertisement.

また、第5実施形態に係る広告表示システム40によれば、表示部31により対象ウェブ画像の参照先アドレスを用いて対象ウェブ画像が広告画像であるか否かが判定され、広告画像であるウェブ画像と広告画像でないウェブ画像とが異なる表示形態で表示される。このため、広告情報が提供されるか否かをユーザに対して適切に報知することができる。従って、ユーザが意図せず操作した画像に広告情報が表示される等、ユーザが煩わしいと感じる状況を回避することが可能となる。   Further, according to the advertisement display system 40 according to the fifth embodiment, the display unit 31 determines whether the target web image is the advertisement image using the reference destination address of the target web image, and the web that is the advertisement image. Images and web images that are not advertisement images are displayed in different display forms. For this reason, it is possible to appropriately notify the user whether or not advertisement information is provided. Therefore, it is possible to avoid situations where the user feels troublesome, such as displaying advertisement information on an image that the user has not intended to operate.

なお、上述した実施形態は本発明に係る広告表示システム、広告表示方法、広告生成装置及び広告表示プログラムの一例を示すものであり、実施形態に係るシステム、装置、方法、プログラム及び記録媒体に限られるものではなく、変形し、又は他のものに適用したものであってもよい。   The above-described embodiment shows an example of the advertisement display system, the advertisement display method, the advertisement generation device, and the advertisement display program according to the present invention, and is limited to the system, the device, the method, the program, and the recording medium according to the embodiment. It may be modified or applied to other things.

例えば、上述した実施形態では、画像認識処理を、ショッピングサーバ1又はウェブサーバ2で実行する例を説明したが、ユーザ端末3A側で実行してもよい。   For example, in the above-described embodiment, the example in which the image recognition process is executed by the shopping server 1 or the web server 2 has been described. However, the image recognition process may be executed on the user terminal 3A side.

また、上述した実施形態では、ショッピングサーバ1が検索DB13及び商品DB14を備える場合を説明したが、ショッピングサーバ1から検索DB13及び商品DB14が参照可能に構成されていればよい。   Moreover, although embodiment mentioned above demonstrated the case where the shopping server 1 was provided with search DB13 and goods DB14, the search DB13 and goods DB14 should just be comprised from the shopping server 1 so that reference is possible.

また、第4実施形態では、複数の物品が表示された画像の中からユーザが選択した物品に関する広告情報を表示する例を説明したが、対象ウェブ画像に複数の物品が表示されている場合において、ユーザのマウス操作等が無くても、ユーザ端末3Aまたはショッピングサーバ1が対象ウェブ画像内に描画された複数の物品すべてを、自動的に広告情報を生成する対象としてもよい。   In the fourth embodiment, the example in which the advertisement information related to the article selected by the user from the images in which the plurality of articles are displayed has been described. However, in the case where the plurality of articles are displayed in the target web image. Even if there is no user's mouse operation, the user terminal 3A or the shopping server 1 may automatically set all the articles drawn in the target web image as targets for automatically generating advertisement information.

また、上述した実施形態では、実際にユーザに表示される広告情報が画像である場合を説明したが、テキスト情報が含まれてもよい。また、広告情報は、テキスト情報のみであってもよい。   Moreover, although embodiment mentioned above demonstrated the case where the advertisement information actually displayed to a user was an image, text information may be included. Further, the advertisement information may be only text information.

さらに、上述した第2実施形態では、属性関連情報としてテキスト情報を用いる例を説明したが、図12の(B)に示すテキスト情報を属性情報そのものとしてもよい。すなわち属性関連情報に属性情報が含まれてもよい。   Furthermore, in the second embodiment described above, an example in which text information is used as attribute-related information has been described. However, the text information shown in FIG. 12B may be attribute information itself. That is, attribute information may be included in the attribute related information.

1…ショッピングサーバ(広告生成装置)、2…ウェブサーバ、3A,3B,3C…ユーザ端末、10…通信部(装置側受信部、装置側送信部)、11…画像取得部、12…広告情報生成部、13…検索DB(記録部)、14…商品DB(記録部)、30…通信部(端末側受信部、端末側送信部)、31…表示部、32…入力部、40…広告表示システム。   DESCRIPTION OF SYMBOLS 1 ... Shopping server (advertisement production | generation apparatus), 2 ... Web server, 3A, 3B, 3C ... User terminal, 10 ... Communication part (apparatus side receiving part, apparatus side transmission part), 11 ... Image acquisition part, 12 ... Advertisement information Generating unit, 13 ... Search DB (recording unit), 14 ... Product DB (recording unit), 30 ... Communication unit (terminal side receiving unit, terminal side transmitting unit), 31 ... Display unit, 32 ... Input unit, 40 ... Advertising Display system.

Claims (8)

ウェブページを表示するユーザ端末と、前記ユーザ端末と通信可能に構成され前記ユーザ端末に表示させる広告情報を生成する広告生成装置とを備える広告表示システムであって、
前記ユーザ端末は、
前記ウェブページを表示する表示部と、
前記ウェブページ内に含まれるウェブ画像から処理対象となる対象ウェブ画像を選択するユーザ操作を受け付ける入力部と、
前記対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報を前記広告生成装置へ送信する端末側送信部と、
前記広告生成装置から情報を受信する端末側受信部と、
を有し、
前記広告生成装置は、
商品の属性情報と該商品の広告情報とを関連付けて記録する記録部を参照可能に構成されており、
前記ユーザ端末から前記属性関連情報を受信する装置側受信部と、
前記属性関連情報に基づいて前記対象ウェブ画像内に描画された物品の属性情報を取得し、前記記録部を参照して、前記対象ウェブ画像内に描画された物品の広告情報を生成する広告情報生成部と、
前記広告情報を前記端末側受信部へ送信する装置側送信部と、
を有し、
前記表示部は、前記対象ウェブ画像と重畳しない位置に前記広告情報を表示する、
広告表示システム。
An advertisement display system comprising: a user terminal that displays a web page; and an advertisement generation device that is configured to be communicable with the user terminal and generates advertisement information to be displayed on the user terminal,
The user terminal is
A display unit for displaying the web page;
An input unit for receiving a user operation for selecting a target web image to be processed from a web image included in the web page;
A terminal-side transmission unit that transmits attribute-related information for acquiring attribute information of an article drawn on the target web image to the advertisement generation device;
A terminal-side receiving unit that receives information from the advertisement generating device;
Have
The advertisement generation device includes:
It is configured to be able to refer to a recording unit that records the attribute information of the product and the advertisement information of the product in association with each other,
A device-side receiving unit that receives the attribute-related information from the user terminal;
Advertisement information that acquires attribute information of an article drawn in the target web image based on the attribute-related information, and generates advertisement information of the article drawn in the target web image with reference to the recording unit A generator,
A device-side transmitter that transmits the advertisement information to the terminal-side receiver;
Have
The display unit displays the advertisement information at a position that does not overlap with the target web image.
Advertising display system.
前記入力部は、前記対象ウェブ画像内の前記ユーザ操作により選択された選択範囲を入力し、
前記端末側送信部は、前記選択範囲の位置を特定する情報を前記広告生成装置へ送信し、
前記広告情報生成部は、前記選択範囲内に描画された物品の属性情報を取得する請求項1に記載の広告表示システム。
The input unit inputs a selection range selected by the user operation in the target web image,
The terminal side transmission unit transmits information specifying the position of the selection range to the advertisement generation device,
The advertisement display system according to claim 1, wherein the advertisement information generation unit acquires attribute information of an article drawn in the selection range.
前記入力部は、前記対象ウェブ画像内の前記ユーザ操作により選択された選択位置を入力し、
前記端末側送信部は、前記選択位置を特定する情報を前記広告生成装置へ送信し、
前記広告情報生成部は、前記選択位置に描画された物品の属性情報を取得する請求項1に記載の広告表示システム。
The input unit inputs a selection position selected by the user operation in the target web image,
The terminal side transmission unit transmits information specifying the selected position to the advertisement generation device,
The advertisement display system according to claim 1, wherein the advertisement information generation unit acquires attribute information of an article drawn at the selected position.
前記入力部は、前記対象ウェブ画像が広告画像であるか否かを、前記対象ウェブ画像に関連付けされたウェブページのリンク情報に基づいて判定し、
前記表示部は、前記対象ウェブ画像が前記広告画像である場合には、前記広告情報を表示しない請求項1〜3の何れか一項に記載の広告表示システム。
The input unit determines whether the target web image is an advertisement image based on link information of a web page associated with the target web image;
The advertisement display system according to any one of claims 1 to 3, wherein the display unit does not display the advertisement information when the target web image is the advertisement image.
前記表示部は、前記ウェブ画像が広告画像であるか否かを、前記対象ウェブ画像に関連付けされたウェブページのリンク情報に基づいて判定し、前記広告画像である前記ウェブ画像と前記広告画像でない前記ウェブ画像との表示形態を異ならせる請求項1〜4の何れか一項に記載の広告表示システム。   The display unit determines whether the web image is an advertisement image based on link information of a web page associated with the target web image, and is not the web image that is the advertisement image and the advertisement image. The advertisement display system according to any one of claims 1 to 4, wherein a display form of the web image is different. ウェブページを表示するユーザ端末と、前記ユーザ端末と通信可能に構成されるとともに商品の属性情報と該商品の広告情報とを関連付けて記録する記録部を参照可能に構成された広告生成装置とを備える広告表示システムにより実行される広告表示方法であって、
前記ユーザ端末が、
前記ウェブページを表示する第1表示ステップと、
前記ウェブページ内に含まれるウェブ画像から処理対象となる対象ウェブ画像を選択するユーザ操作を受け付ける入力ステップと、
前記対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報を前記広告生成装置へ送信する端末側送信ステップと、
を備え、
前記広告生成装置が、
前記属性関連情報を受信する装置側受信ステップと、
前記属性関連情報に基づいて前記対象ウェブ画像内に描画された物品の属性情報を取得し、前記記録部を参照して、前記対象ウェブ画像内に描画された物品の広告情報を生成する広告情報生成ステップと、
前記広告情報を前記ユーザ端末へ送信する装置側送信ステップと、
を備え、
前記ユーザ端末が、前記対象ウェブ画像と重畳しない位置に前記広告情報を表示する第2表示ステップをさらに備える広告表示方法。
A user terminal that displays a web page; and an advertisement generation device configured to be able to refer to a recording unit configured to be able to communicate with the user terminal and to record product attribute information and advertisement information of the product in association with each other. An advertisement display method executed by an advertisement display system comprising:
The user terminal is
A first display step for displaying the web page;
An input step of accepting a user operation for selecting a target web image to be processed from a web image included in the web page;
A terminal-side transmission step of transmitting attribute-related information for acquiring attribute information of an article drawn on the target web image to the advertisement generation device;
With
The advertisement generating device is
A device side receiving step of receiving the attribute related information;
Advertisement information that acquires attribute information of an article drawn in the target web image based on the attribute-related information, and generates advertisement information of the article drawn in the target web image with reference to the recording unit Generation step;
A device-side transmission step of transmitting the advertisement information to the user terminal;
With
The advertisement display method further comprising a second display step in which the user terminal displays the advertisement information at a position that does not overlap the target web image.
ウェブページを表示するユーザ端末と通信可能に構成され前記ユーザ端末に表示させる広告情報を生成する広告生成装置であって、
商品の属性情報と該商品の広告情報とを関連付けて記録する記録部を参照可能に構成されており、
前記ウェブページ内に含まれるウェブ画像のうち処理対象となる対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報を前記ユーザ端末から受信する装置側受信部と、
前記属性関連情報に基づいて前記対象ウェブ画像内に描画された物品の属性情報を取得し、前記記録部を参照して、前記対象ウェブ画像内に描画された物品の広告情報を生成する広告情報生成部と、
前記広告情報を前記端末側受信部へ送信する装置側送信部と、
を備える広告生成装置。
An advertisement generating device configured to be communicable with a user terminal displaying a web page and generating advertisement information to be displayed on the user terminal,
It is configured to be able to refer to a recording unit that records the attribute information of the product and the advertisement information of the product in association with each other,
An apparatus-side receiving unit that receives, from the user terminal, attribute-related information for acquiring attribute information of an article drawn on a target web image to be processed among web images included in the web page;
Advertisement information that acquires attribute information of an article drawn in the target web image based on the attribute-related information, and generates advertisement information of the article drawn in the target web image with reference to the recording unit A generator,
A device-side transmitter that transmits the advertisement information to the terminal-side receiver;
An advertisement generation device comprising:
ウェブページを表示するユーザ端末を動作させる広告表示プログラムであって、
前記ユーザ端末を、
前記ウェブページを表示する表示部、
前記ウェブページ内に含まれるウェブ画像から処理対象となる対象ウェブ画像を選択するユーザ操作を受け付ける入力部、
前記対象ウェブ画像に描画された物品の属性情報を取得するための属性関連情報を、前記属性関連情報に基づいて前記対象ウェブ画像内に描画された物品の属性情報を取得し前記対象ウェブ画像内に描画された物品の広告情報を生成する広告生成装置へ送信する端末側送信部、及び、
前記広告生成装置から前記物品に関する広告情報を受信する端末側受信部
として機能させるとともに、
前記表示部が、前記対象ウェブ画像と重畳しない位置に前記広告情報を表示するように機能させる広告表示プログラム。
An advertisement display program for operating a user terminal that displays a web page,
The user terminal
A display unit for displaying the web page;
An input unit that accepts a user operation to select a target web image to be processed from a web image included in the web page;
Attribute related information for acquiring attribute information of an article drawn on the target web image is acquired, and attribute information of an article drawn in the target web image is acquired based on the attribute related information. A terminal-side transmission unit that transmits to the advertisement generation device that generates the advertisement information of the article drawn on
While functioning as a terminal-side receiving unit that receives advertisement information related to the article from the advertisement generation device,
An advertisement display program that causes the display unit to function to display the advertisement information at a position that does not overlap the target web image.
JP2011101972A 2011-04-28 2011-04-28 Advertisement display system, advertisement display method, advertisement generation apparatus, and advertisement display program Active JP5710366B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011101972A JP5710366B2 (en) 2011-04-28 2011-04-28 Advertisement display system, advertisement display method, advertisement generation apparatus, and advertisement display program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011101972A JP5710366B2 (en) 2011-04-28 2011-04-28 Advertisement display system, advertisement display method, advertisement generation apparatus, and advertisement display program

Publications (2)

Publication Number Publication Date
JP2012234326A true JP2012234326A (en) 2012-11-29
JP5710366B2 JP5710366B2 (en) 2015-04-30

Family

ID=47434602

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011101972A Active JP5710366B2 (en) 2011-04-28 2011-04-28 Advertisement display system, advertisement display method, advertisement generation apparatus, and advertisement display program

Country Status (1)

Country Link
JP (1) JP5710366B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015093023A1 (en) * 2013-12-17 2015-06-25 日本電気株式会社 Information provision system, information processing device, information provision method, terminal device, and computer-readable recording medium
JP2018018154A (en) * 2016-07-25 2018-02-01 株式会社プロフィールド Page processing apparatus, page processing method, and program
JP6310599B1 (en) * 2017-05-10 2018-04-11 ヤフー株式会社 SEARCH DEVICE, SEARCH METHOD, AND SEARCH PROGRAM
CN111125502A (en) * 2018-10-31 2020-05-08 北京字节跳动网络技术有限公司 Method and apparatus for generating information
CN112446720A (en) * 2019-08-29 2021-03-05 北京搜狗科技发展有限公司 Advertisement display method and device

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07321748A (en) * 1994-05-26 1995-12-08 Hitachi Ltd Video on-demand system
JPH09182037A (en) * 1995-12-26 1997-07-11 Sony Corp Television broadcast device and method and television signal receiving device and method
JP2002150114A (en) * 2000-11-08 2002-05-24 Casio Comput Co Ltd Connector and memory medium with its program recorded thereon
JP2003076692A (en) * 2001-08-31 2003-03-14 Ricoh Co Ltd Advertisement image retrieval system, on-line shopping system, advertisement image retrieval server, on-line shopping server, client terminal unit therefor, catalog retrieval system, and catalog commodity sales system
JP2003204539A (en) * 2001-12-28 2003-07-18 Victor Co Of Japan Ltd Video providing method and program for acquiring detailed contents of program video image
JP2010170436A (en) * 2009-01-26 2010-08-05 Hiroshi Kanda Method for distributing recommendation advertisement to optional keyword in internet web page (digital content) to display the same, method for evaluating quality of advertisement, and method for charging on the basis of quality evaluation

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07321748A (en) * 1994-05-26 1995-12-08 Hitachi Ltd Video on-demand system
JPH09182037A (en) * 1995-12-26 1997-07-11 Sony Corp Television broadcast device and method and television signal receiving device and method
JP2002150114A (en) * 2000-11-08 2002-05-24 Casio Comput Co Ltd Connector and memory medium with its program recorded thereon
JP2003076692A (en) * 2001-08-31 2003-03-14 Ricoh Co Ltd Advertisement image retrieval system, on-line shopping system, advertisement image retrieval server, on-line shopping server, client terminal unit therefor, catalog retrieval system, and catalog commodity sales system
JP2003204539A (en) * 2001-12-28 2003-07-18 Victor Co Of Japan Ltd Video providing method and program for acquiring detailed contents of program video image
JP2010170436A (en) * 2009-01-26 2010-08-05 Hiroshi Kanda Method for distributing recommendation advertisement to optional keyword in internet web page (digital content) to display the same, method for evaluating quality of advertisement, and method for charging on the basis of quality evaluation

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015093023A1 (en) * 2013-12-17 2015-06-25 日本電気株式会社 Information provision system, information processing device, information provision method, terminal device, and computer-readable recording medium
JPWO2015093023A1 (en) * 2013-12-17 2017-03-16 日本電気株式会社 Information providing system, information processing device, information providing method, terminal device, and computer-readable recording medium
JP2018018154A (en) * 2016-07-25 2018-02-01 株式会社プロフィールド Page processing apparatus, page processing method, and program
JP6310599B1 (en) * 2017-05-10 2018-04-11 ヤフー株式会社 SEARCH DEVICE, SEARCH METHOD, AND SEARCH PROGRAM
JP2018190293A (en) * 2017-05-10 2018-11-29 ヤフー株式会社 Retrieval device, retrieval method and retrieval program
CN111125502A (en) * 2018-10-31 2020-05-08 北京字节跳动网络技术有限公司 Method and apparatus for generating information
CN111125502B (en) * 2018-10-31 2024-02-20 北京字节跳动网络技术有限公司 Method and device for generating information
CN112446720A (en) * 2019-08-29 2021-03-05 北京搜狗科技发展有限公司 Advertisement display method and device

Also Published As

Publication number Publication date
JP5710366B2 (en) 2015-04-30

Similar Documents

Publication Publication Date Title
US10210659B2 (en) Augmented reality system, method, and apparatus for displaying an item image in a contextual environment
US9607055B2 (en) System and method for dynamically retrieving data specific to a region of a layer
US9898774B2 (en) User terminal apparatus, display apparatus, server and control method thereof
US8538821B2 (en) System and method for community aided research and shopping
KR102012411B1 (en) Method and system to provide a scroll map
US20140249935A1 (en) Systems and methods for forwarding users to merchant websites
JP5198838B2 (en) Information providing program, information providing apparatus, and information providing method
JP5710366B2 (en) Advertisement display system, advertisement display method, advertisement generation apparatus, and advertisement display program
KR101409009B1 (en) Information processing device, information processing method, and storage medium
US9148475B1 (en) Navigation control for network clients
JP6119334B2 (en) Electronic advertisement system and electronic advertisement providing method
US20130117152A1 (en) Javascript Widget Storefront
WO2018066102A1 (en) Information providing system, information providing device, information providing method, and program
JP2007249319A (en) Method for displaying screen
JP6372135B2 (en) Electronic leaflet information processing system and electronic leaflet information processing method
US20170270215A1 (en) Navigation control for network clients
US20140214591A1 (en) System and method to provide a product display in a business
CN109416768A (en) For the auto upgrading offer of publication item
JP2016048428A (en) Information processing system, information processor, control method and computer program
WO2012160931A1 (en) Web browsing control server and web browsing control method
KR20220044715A (en) Method, apparatus and computer program for fashion item recommendation
WO2013106304A1 (en) Creating optimal interactive elements
JP6244902B2 (en) Inter-gadget display cooperation method, inter-gadget display cooperation program, and information processing apparatus
JP5120563B2 (en) Shopping web server device and control method thereof
JP6401367B1 (en) Server apparatus, generation method, and generation program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131211

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140723

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140826

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150303

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150304

R150 Certificate of patent or registration of utility model

Ref document number: 5710366

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: R3D02

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250