JP2015070419A - Terminal device and program - Google Patents

Terminal device and program Download PDF

Info

Publication number
JP2015070419A
JP2015070419A JP2013202256A JP2013202256A JP2015070419A JP 2015070419 A JP2015070419 A JP 2015070419A JP 2013202256 A JP2013202256 A JP 2013202256A JP 2013202256 A JP2013202256 A JP 2013202256A JP 2015070419 A JP2015070419 A JP 2015070419A
Authority
JP
Japan
Prior art keywords
advertisement
pixel area
display
specific pixel
reproduction time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013202256A
Other languages
Japanese (ja)
Other versions
JP5854019B2 (en
Inventor
知裕 佐藤
Tomohiro Sato
知裕 佐藤
伸行 浅野
Nobuyuki Asano
伸行 浅野
哲司 西尾
Tetsuji Nishio
哲司 西尾
亮 佐橋
Akira Sahashi
亮 佐橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2013202256A priority Critical patent/JP5854019B2/en
Publication of JP2015070419A publication Critical patent/JP2015070419A/en
Application granted granted Critical
Publication of JP5854019B2 publication Critical patent/JP5854019B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a terminal device and a program, capable of effectively displaying an advertisement on a display object in which a user is really interested.SOLUTION: A client terminal 2 determines whether there is a first playback time corresponding to a second playback time associated with a display pixel area in a moving image currently in playback. On determining that the first playback time corresponding to the second playback time exists, the client terminal 2 determines whether there is an advertisement setting pixel area including at least a part of the display pixel area. On determining that the advertisement setting pixel area including at least a part of the display pixel area exists, the client terminal 2 displays on a display screen an advertisement content corresponding to an advertisement ID associated with the advertisement setting pixel area.

Description

本発明は、動画が表示される表示画面に広告を表示させる装置等の技術分野に関する。   The present invention relates to a technical field such as a device for displaying an advertisement on a display screen on which a moving image is displayed.

従来、情報表示装置が、広告配信装置からネットワークを介して配信された広告情報及びシナリオ情報を受信し、シナリオ情報に基づいて、仮想3次元空間上に広告画面を表示する技術が知られている(特許文献1参照)。このシナリオ情報は、どの広告情報がどの形状の広告画面に貼り付けられ、この広告画面がどのような動きをし、これらの広告画面が表示される仮想3次元空間がどのようなものかを定義する。これにより、利用者の能動的な働きかけを必要とせずに高い訴求効果を発揮することが可能になっている。   2. Description of the Related Art Conventionally, a technology is known in which an information display device receives advertisement information and scenario information distributed from an advertisement distribution device via a network, and displays an advertisement screen on a virtual three-dimensional space based on the scenario information. (See Patent Document 1). This scenario information defines which advertising information is pasted on which shape advertising screen, how this advertising screen moves, and what is the virtual 3D space in which these advertising screens are displayed To do. As a result, it is possible to exert a high appealing effect without requiring active user action.

特開2004−178086号公報JP 2004-178086 A

ところで、例えばパノラマ動画などの動画に対して、疑似的なカメラワークがユーザにより操作される場合がある。疑似的なカメラワークでは、例えば、仮想3次元空間上に配置される仮想カメラの位置または視点方向などが指示される。これにより、ユーザは、動画における表示範囲を動的に切り換えることができる。しかし、特許文献1の技術では、例えば、動画における表示範囲が切り換えられた場合にも、シナリオ情報に基づく同じ広告が表示される。そのため、動画において真にユーザが興味を持っている表示対象に対して、効果的に広告を表示させることは困難である。   By the way, for example, a pseudo camera work may be operated by a user for a moving image such as a panoramic moving image. In the pseudo camera work, for example, the position or the viewpoint direction of the virtual camera arranged in the virtual three-dimensional space is instructed. Thereby, the user can dynamically switch the display range in the moving image. However, in the technique of Patent Document 1, for example, the same advertisement based on the scenario information is displayed even when the display range in the moving image is switched. Therefore, it is difficult to display an advertisement effectively for a display target that the user is really interested in in the moving image.

本発明は、以上の点に鑑みてなされたものである。真にユーザが興味を持っている表示対象に対して、効果的に広告を表示させることが可能な端末装置、及びプログラムを提供する。   The present invention has been made in view of the above points. Provided are a terminal device and a program capable of effectively displaying an advertisement for a display object that is truly interested in a user.

上記課題を解決するために、請求項1に記載の発明は、複数の画素から構成される画像フレームであって、複数の前記画像フレームから構成される動画において、前記複数の画素の中で特定された1画素以上の第1特定画素領域と、前記複数の画像フレームの中で前記第1特定画素領域が特定された特定の第1特定画像フレームが出力される第1再生時間とに、広告コンテンツの広告識別情報を対応付けて、情報処理装置から取得する第1取得ステップと、前記動画を再生させる再生ステップと、前記動画の再生中に前記複数の画素の中で、表示手段により表示された1画素以上の第2特定画素領域と、前記複数の画像フレームの中で前記第2特定画素領域が特定された特定の第2特定画像フレームが出力される第2再生時間とを対応付けて取得する第2取得ステップと、前記第2再生時間に対応する前記第1再生時間があるかを判定する第1判定ステップと、前記第2再生時間に対応する前記第1再生時間があると判定された場合、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があるかを判定する第2判定ステップと、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があると判定された場合、前記第1特定画素領域に対応付けられた前記広告識別情報に対応する前記広告コンテンツを前記表示手段に表示させる表示ステップと、をコンピュータに実行させることを特徴とするプログラムである。   In order to solve the above-mentioned problem, the invention according to claim 1 is an image frame composed of a plurality of pixels, and is specified among the plurality of pixels in a moving image composed of the plurality of image frames. The first specific pixel area of one or more pixels and the first reproduction time in which the specific first specific image frame in which the first specific pixel area is specified among the plurality of image frames is output. Displayed by the display means in the plurality of pixels during the reproduction of the moving image, the first acquisition step of acquiring from the information processing apparatus in association with the advertisement identification information of the content, the reproducing step of reproducing the moving image The second specific pixel area having one or more pixels is associated with a second reproduction time in which a specific second specific image frame in which the second specific pixel area is specified among the plurality of image frames is output. It is determined that there is a second acquisition step to be obtained, a first determination step for determining whether or not there is the first reproduction time corresponding to the second reproduction time, and the first reproduction time corresponding to the second reproduction time. A second determination step for determining whether or not there is the first specific pixel region including at least a part of the second specific pixel region; and the first specific pixel region including at least a part of the second specific pixel region, A program for causing a computer to execute a display step of causing the display means to display the advertisement content corresponding to the advertisement identification information associated with the first specific pixel area when it is determined that there is a program. It is.

請求項2に記載の発明は、請求項1に記載のプログラムにおいて、前記第1取得ステップは、前記第1再生時間に、前記第1特定画素領域の第1表示倍率を対応付けて、さらに取得し、前記第2取得ステップは、前記第2再生時間に、前記第2特定画素領域の第2表示倍率を対応付けて、さらに取得し、前記第2判定ステップは、前記第2特定画素領域の第2表示倍率が、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域の第1表示倍率以上であるかをさらに判定し、前記表示ステップは、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があると判定され、且つ前記第2表示倍率が前記第1表示倍率以上であると判定された場合、前記第1特定画素領域に対応付けられた前記広告識別情報に対応する前記広告コンテンツを前記表示手段に表示させることを特徴とする。   According to a second aspect of the present invention, in the program according to the first aspect, the first acquisition step further acquires the first reproduction time by associating the first display magnification of the first specific pixel region with the first reproduction time. The second acquisition step further acquires the second reproduction time by associating the second display magnification of the second specific pixel region with the second reproduction time, and the second determination step includes the second specific pixel region. It is further determined whether a second display magnification is greater than or equal to a first display magnification of the first specific pixel region including at least a part of the second specific pixel region, and the display step includes at least the second specific pixel region. The advertisement identification associated with the first specific pixel area when it is determined that there is a part of the first specific pixel area and the second display magnification is greater than or equal to the first display magnification. Corresponding to the information The tell content, characterized in that to be displayed on the display means.

請求項3に記載の発明は、請求項1または2に記載のプログラムにおいて、前記再生ステップは、所定のサーバからネットワークを介してストリーミングで配信された前記動画を再生し、前記第2取得ステップは、前記ストリーミングで配信された前記動画の再生中に、前記第2特定画素領域と、前記第2再生時間とを対応付けて取得することを特徴とする。   According to a third aspect of the present invention, in the program according to the first or second aspect, the reproduction step reproduces the moving image distributed by streaming from a predetermined server via a network, and the second acquisition step includes The second specific pixel area and the second reproduction time are acquired in association with each other during reproduction of the moving image distributed by streaming.

請求項4に記載の発明は、請求項1乃至3の何れか一項に記載のプログラムにおいて、前記広告識別情報と、前記広告識別情報に対応する広告コンテンツとを前記動画の再生前に前記情報処理装置から取得するステップと、取得された前記広告識別情報と前記広告コンテンツとを対応付けて記憶手段に記憶するステップと、を更に前記コンピュータに実行させ、前記表示ステップは、前記広告識別情報と対応付けられて前記記憶手段に記憶された前記広告コンテンツを前記表示手段に表示させることを特徴とする。   According to a fourth aspect of the present invention, in the program according to any one of the first to third aspects, the advertisement identification information and the advertisement content corresponding to the advertisement identification information are stored in the information before the moving image is reproduced. A step of acquiring from the processing device; and a step of associating the acquired advertisement identification information and the advertisement content with each other and storing them in a storage unit, and further causing the computer to execute the display step. The advertisement content correlated and stored in the storage means is displayed on the display means.

請求項5に記載の発明は、複数の画素から構成される画像フレームであって、複数の前記画像フレームから構成される動画において、前記複数の画素の中で特定された1画素以上の第1特定画素領域と、前記複数の画像フレームの中で前記第1特定画素領域が特定された特定の第1特定画像フレームが出力される第1再生時間とに、広告コンテンツの広告識別情報を対応付けて、情報処理装置から取得する第1取得手段と、前記動画を再生させる再生手段と、前記動画の再生中に前記複数の画素の中で、表示手段により表示された1画素以上の第2特定画素領域と、前記複数の画像フレームの中で前記第2特定画素領域が特定された特定の第2特定画像フレームが出力される第2再生時間とを対応付けて取得する第2取得手段と、前記第2再生時間に対応する前記第1再生時間があるかを判定する第1判定手段と、前記第2再生時間に対応する前記第1再生時間があると判定された場合、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があるかを判定する第2判定手段と、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があると判定された場合、前記第1特定画素領域に対応付けられた前記広告識別情報に対応する前記広告コンテンツを前記表示手段に表示させる表示制御手段と、を備えることを特徴とする。   The invention according to claim 5 is an image frame composed of a plurality of pixels, and in a moving image composed of the plurality of image frames, the first of one or more pixels specified in the plurality of pixels. The advertisement identification information of the advertising content is associated with the specific pixel area and the first reproduction time in which the specific first specific image frame in which the first specific pixel area is specified among the plurality of image frames is output. A first acquisition unit that acquires from the information processing device, a reproduction unit that reproduces the moving image, and a second identification of one or more pixels displayed by the display unit among the plurality of pixels during the reproduction of the moving image Second acquisition means for acquiring a pixel area in association with a second reproduction time in which a specific second specific image frame in which the second specific pixel area is specified among the plurality of image frames is output; Said second re First determination means for determining whether or not there is the first reproduction time corresponding to the time, and when it is determined that there is the first reproduction time corresponding to the second reproduction time, at least the second specific pixel region is When it is determined that there is the first specific pixel region including at least a part of the second specific pixel region and the second determination unit that determines whether there is the first specific pixel region including a part, the first specific pixel region Display control means for causing the display means to display the advertisement content corresponding to the advertisement identification information associated with a pixel area.

請求項1、5に記載の発明によれば、真にユーザが興味を持っている表示対象に対して、効果的に広告を表示させることができる。   According to invention of Claim 1, 5, an advertisement can be effectively displayed with respect to the display object which a user is really interested.

請求項2に記載の発明によれば、真にユーザが興味を持っている表示対象に対して、より効果的に広告を表示させることができる。   According to invention of Claim 2, an advertisement can be more effectively displayed with respect to the display object which a user is really interested.

請求項3に記載の発明によれば、ストリーミングで配信された動画の再生中に、真にユーザが真に興味を持ったものの広告を表示させることができる。   According to the third aspect of the present invention, it is possible to display an advertisement of what the user is really interested in while playing a moving image distributed by streaming.

請求項4に記載の発明によれば、迅速に広告コンテンツを表示させることができる。   According to the invention described in claim 4, it is possible to quickly display the advertising content.

本実施形態の通信システムSの概要構成例を示す図である。It is a figure which shows the example of a schematic structure of the communication system S of this embodiment. (A),(C)は、動画を構成する複数の画像フレームにおける広告設定画素領域を示す図である。(B)は、(A)に示す広告設定画素領域R1-1〜R1-9に対応する広告設定データD1の一例を示す図である。(D)は、(C)に示す広告設定画素領域R2-1〜R2-8に対応する広告設定データD2の一例を示す図である。(E)は、(C)に示す広告設定画素領域R3〜R5のそれぞれに対応する広告設定データD3〜D5の一例を示す図である。(A), (C) is a figure which shows the advertisement setting pixel area | region in the several image frame which comprises a moving image. (B) is a diagram showing an example of advertisement setting data D1 corresponding to the advertisement setting pixel regions R1-1 to R1-9 shown in (A). (D) is a diagram showing an example of advertisement setting data D2 corresponding to the advertisement setting pixel regions R2-1 to R2-8 shown in (C). (E) is a figure which shows an example of advertisement setting data D3-D5 corresponding to each of advertisement setting pixel area | region R3-R5 shown to (C). クライアント端末2の制御部21またはCPUにより実行されるメイン処理の一例を示すフローチャートである。It is a flowchart which shows an example of the main process performed by the control part 21 or CPU of the client terminal 2. (A),(B)は、クライアント端末2の制御部21またはCPUにより実行される広告検索処理の一例を示すフローチャートである。(A), (B) is a flowchart which shows an example of the advertisement search process performed by the control part 21 or CPU of the client terminal 2. FIG.

以下、本発明の一実施形態を図面に基づいて説明する。   Hereinafter, an embodiment of the present invention will be described with reference to the drawings.

1.通信システムの構成及び動作概要
始めに、図1を参照して、本発明の一実施形態の通信システムSの構成及び動作概要について説明する。図1は、本実施形態の通信システムSの概要構成例を示す図である。図1に示すように、通信システムSは、配信サーバ1、クライアント端末2、広告サーバ3、及び管理者端末4を含んで構成される。クライアント端末2は、本発明の端末装置の一例である。広告サーバ3は、本発明の情報処理装置の一例である。配信サーバ1、クライアント端末2、広告サーバ3、及び管理者端末4は、ネットワークNWに接続される。ネットワークNWは、例えば、インターネット等により構成される。
[ 1. Overview of communication system configuration and operation ]
First, with reference to FIG. 1, the structure and operation | movement outline | summary of the communication system S of one Embodiment of this invention are demonstrated. FIG. 1 is a diagram illustrating a schematic configuration example of a communication system S of the present embodiment. As shown in FIG. 1, the communication system S includes a distribution server 1, a client terminal 2, an advertisement server 3, and an administrator terminal 4. The client terminal 2 is an example of a terminal device of the present invention. The advertisement server 3 is an example of an information processing apparatus according to the present invention. The distribution server 1, the client terminal 2, the advertisement server 3, and the administrator terminal 4 are connected to the network NW. The network NW is configured by, for example, the Internet.

配信サーバ1は、例えばクライアント端末2からのコンテンツ要求に応じて、コンテンツをクライアント端末2へ送信する。コンテンツには、動画データが含まれる。なお、コンテンツは、音声データを含んでもよい。コンテンツの送信は、例えば、ネットワークNWを介してストリーミング配信により行われる。クライアント端末2は、配信サーバ1からストリーミングで配信されたコンテンツを受信する。クライアント端末2は、受信されたコンテンツに含まれる動画データを再生する。そして、クライアント端末2は、複数の画素から構成される画像フレームであって、複数の画像フレームから構成される動画を表示手段に表示させる。このとき、ユーザは、疑似的なカメラワーク(以下、「疑似カメラワーク」という)の操作を行うことができる。疑似カメラワークにより、二次元平面または三次元仮想空間における仮想カメラの位置または仮想カメラの向きと、画角(視野範囲)とが制御される。これにより、動画の再生中に画像フレームを構成する複数の画素の中で、クライアント端末2の表示手段により表示された1画素以上の画素領域が特定される。ここで、この画素領域を、以下、「表示画素領域」という。表示画素領域は、第2特定画素領域の一例である。また、表示画素領域は、動画を構成する画像フレームにおける表示範囲である。表示画素領域は、1画像フレームのうち表示画面に描画される描画領域に相当する。言い換えれば、表示範囲は、画像フレームから切り出される範囲である。なお、三次元仮想空間は、例えば、コンピュータを用いて表示可能な仮想的な三次元空間を示す。仮想カメラとは、二次元平面または三次元仮想空間における仮想スクリーンに投影される動画に対して仮想的に設定された視点をいう。仮想スクリーンには、平面スクリーン、円筒形のスクリーン、及び球形のスクリーンがある。例えば、動画を撮影したカメラのレンズが魚眼レンズや360度レンズである場合、仮想スクリーンは球形のスクリーンとなる。クライアント端末2は、ユーザの疑似カメラワークの操作により特定された表示画素領域を表示画面に表示させる。   The distribution server 1 transmits content to the client terminal 2 in response to a content request from the client terminal 2, for example. The content includes moving image data. Note that the content may include audio data. The content is transmitted by streaming distribution via the network NW, for example. The client terminal 2 receives the content distributed by streaming from the distribution server 1. The client terminal 2 reproduces the moving image data included in the received content. Then, the client terminal 2 causes the display unit to display a moving image composed of a plurality of image frames, which is an image frame composed of a plurality of pixels. At this time, the user can perform pseudo camera work (hereinafter referred to as “pseudo camera work”). By the pseudo camera work, the position of the virtual camera or the orientation of the virtual camera and the angle of view (view range) in the two-dimensional plane or the three-dimensional virtual space are controlled. Thereby, a pixel area of one or more pixels displayed by the display unit of the client terminal 2 is specified among the plurality of pixels constituting the image frame during reproduction of the moving image. Here, this pixel region is hereinafter referred to as a “display pixel region”. The display pixel area is an example of a second specific pixel area. The display pixel area is a display range in an image frame constituting a moving image. The display pixel area corresponds to a drawing area drawn on the display screen in one image frame. In other words, the display range is a range cut out from the image frame. The three-dimensional virtual space indicates a virtual three-dimensional space that can be displayed using a computer, for example. A virtual camera refers to a viewpoint virtually set for a moving image projected on a virtual screen in a two-dimensional plane or a three-dimensional virtual space. Virtual screens include flat screens, cylindrical screens, and spherical screens. For example, when the lens of a camera that has captured a moving image is a fisheye lens or a 360-degree lens, the virtual screen is a spherical screen. The client terminal 2 displays the display pixel area specified by the user's pseudo camera work operation on the display screen.

クライアント端末2は、ストリーミングで配信された動画の再生中に疑似カメラワークの操作により表示された表示画素領域と、複数の画像フレームの中で表示画素領域が特定された特定の画像フレームが出力される再生時間とを対応付けて順次取得する。クライアント端末2は、取得した表示画素領域と再生時間とを対応付けて記憶する。ここで、表示画素領域が特定された特定の画像フレームは、第2特定画像フレームの一例である。また、第2特定画像フレームが出力される再生時間を、以下、「第2再生時間」という。第2再生時間は、表示画素領域に対応付けられた再生時間である。なお、再生時間とは、動画の再生開始からの経過時間である。なお、クライアント端末2は、第2再生時間に、表示画素領域の表示倍率を対応付けて取得し記憶してもよい。表示画素領域の表示倍率は、第2表示倍率の一例である。   The client terminal 2 outputs a display pixel area displayed by pseudo camera work operation during reproduction of a moving image distributed by streaming, and a specific image frame in which the display pixel area is specified among a plurality of image frames. The playback times are sequentially acquired in association with each other. The client terminal 2 stores the acquired display pixel area and the reproduction time in association with each other. Here, the specific image frame in which the display pixel region is specified is an example of the second specific image frame. In addition, the reproduction time during which the second specific image frame is output is hereinafter referred to as “second reproduction time”. The second reproduction time is a reproduction time associated with the display pixel area. Note that the playback time is the elapsed time from the start of playback of a moving image. The client terminal 2 may acquire and store the display magnification of the display pixel area in association with the second reproduction time. The display magnification of the display pixel area is an example of the second display magnification.

広告サーバ3は、動画を構成する画像フレームにおける特定の画素領域に広告IDが対応付けられる広告設定データを記憶する。この広告設定データには、動画を構成する複数の画像フレームにおいて複数の画素の中で特定された1画素以上の画素領域と、複数の画像フレームの中で上記画素領域が特定された特定の画像フレームが出力される再生時間と、広告コンテンツの広告IDとが対応付けられて含まれる。広告設定データは、例えば管理者端末4により作成される。この場合、管理者端末4は、配信サーバ1から動画データを取得する。そして、管理者端末4は、取得した動画データを再生し、動画を表示手段に表示させる。このとき、例えば広告の管理者は、画像フレームにおける特定の画素領域に広告IDを対応付ける広告設定操作を行うことができる。これにより、動画を構成する複数の画像フレームにおいて複数の画素の中で、広告IDが対応付けられる1画素以上の画素領域が特定される。ここで、この画素領域を、以下、「広告設定画素領域」という。広告設定画素領域は、第1特定画素領域の一例である。広告設定画素領域が特定された特定の画像フレームは、第1特定画像フレームの一例である。また、第1特定画像フレームが出力される再生時間を、以下、「第1再生時間」という。第1再生時間は、広告設定画素領域に対応付けられた再生時間である。また、広告IDは、広告コンテンツを識別する広告識別情報の一例である。広告IDは、広告コンテンツの所在を示すURL(Uniform Resource Locator)であってもよい。なお、広告設定データには、第1再生時間に、この広告設定画素領域の表示倍率が対応付けられて含まれてもよい。広告設定画素領域の表示倍率は、「第1表示倍率」の一例である。なお、広告設定データは、管理者端末4以外の装置により作成されてもよい。広告サーバ3は、例えばクライアント端末2からのデータ要求に応じて、広告設定データをクライアント端末2へ送信する。   The advertisement server 3 stores advertisement setting data in which an advertisement ID is associated with a specific pixel area in an image frame constituting a moving image. The advertisement setting data includes a pixel area of one or more pixels specified in a plurality of pixels in a plurality of image frames constituting a moving image, and a specific image in which the pixel area is specified in a plurality of image frames. The playback time during which the frame is output and the advertisement ID of the advertisement content are included in association with each other. The advertisement setting data is created by the administrator terminal 4, for example. In this case, the administrator terminal 4 acquires moving image data from the distribution server 1. Then, the administrator terminal 4 reproduces the acquired moving image data and causes the display unit to display the moving image. At this time, for example, the manager of the advertisement can perform an advertisement setting operation for associating the advertisement ID with a specific pixel area in the image frame. Thereby, the pixel area | region of 1 pixel or more with which advertisement ID is matched among the some pixels in the some image frame which comprises a moving image is specified. Here, this pixel area is hereinafter referred to as an “advertisement setting pixel area”. The advertisement setting pixel area is an example of a first specific pixel area. The specific image frame in which the advertisement setting pixel area is specified is an example of a first specific image frame. In addition, the reproduction time during which the first specific image frame is output is hereinafter referred to as “first reproduction time”. The first reproduction time is a reproduction time associated with the advertisement setting pixel area. The advertisement ID is an example of advertisement identification information for identifying advertisement content. The advertisement ID may be a URL (Uniform Resource Locator) indicating the location of the advertisement content. The advertisement setting data may include the display magnification of the advertisement setting pixel area in association with the first reproduction time. The display magnification of the advertisement setting pixel area is an example of “first display magnification”. The advertisement setting data may be created by a device other than the administrator terminal 4. The advertisement server 3 transmits advertisement setting data to the client terminal 2 in response to a data request from the client terminal 2, for example.

そして、クライアント端末2は、広告サーバ3から送信された広告設定データを取得する。クライアント端末2は、取得した広告設定データの中に、再生中の動画における表示画素領域に対応付けられた第2再生時間に対応する第1再生時間があるかを判定する。表示画素領域に対応付けられた第2再生時間に対応する第1再生時間が広告設定データに含まれる場合、クライアント端末2は、表示画素領域を少なくとも一部含む広告設定画素領域があるかを判定する。そして、クライアント端末2は、表示画素領域を少なくとも一部含む広告設定画素領域があると判定した場合、広告設定画素領域に対応付けられた広告IDに対応する広告コンテンツを、再生中の動画と共に表示手段に表示させる。そのため、動画において真にユーザが興味を持っている表示対象に対して、効果的に広告を表示させることができる。ここで、クライアント端末2は、広告設定画素領域に対応付けられた広告IDに対応する広告コンテンツを、動画の再生前に広告サーバ3から取得するとよい。この場合、クライアント端末2は、広告設定画素領域に対応付けられた広告IDと、取得した広告コンテンツとを対応付けて記憶手段に記憶する。これにより、クライアント端末2は、迅速に広告コンテンツを表示させることができる。   Then, the client terminal 2 acquires the advertisement setting data transmitted from the advertisement server 3. The client terminal 2 determines whether the acquired advertisement setting data includes a first reproduction time corresponding to the second reproduction time associated with the display pixel area in the moving image being reproduced. When the advertisement setting data includes the first reproduction time corresponding to the second reproduction time associated with the display pixel area, the client terminal 2 determines whether there is an advertisement setting pixel area including at least a part of the display pixel area. To do. When the client terminal 2 determines that there is an advertisement setting pixel area including at least a part of the display pixel area, the client terminal 2 displays the advertisement content corresponding to the advertisement ID associated with the advertisement setting pixel area together with the video being played back. Display on the means. Therefore, it is possible to effectively display an advertisement for a display target that the user is really interested in the moving image. Here, the client terminal 2 may acquire the advertisement content corresponding to the advertisement ID associated with the advertisement setting pixel area from the advertisement server 3 before playing the moving image. In this case, the client terminal 2 stores the advertisement ID associated with the advertisement setting pixel area and the acquired advertisement content in the storage unit in association with each other. Thereby, the client terminal 2 can display advertisement content quickly.

次に、配信サーバ1、クライアント端末2、及び広告サーバ3の構成例について説明する。   Next, configuration examples of the distribution server 1, the client terminal 2, and the advertisement server 3 will be described.

配信サーバ1は、図1に示すように、制御部11、記憶部12、及びインターフェース部13等を備えて構成される。これらの構成要素は、バス14に接続されている。制御部11は、CPU、ROM、及びRAM等により構成される。記憶部12は、例えばハードディスクドライブにより構成される。記憶部12には、OS、及びコンテンツ配信処理プログラム等が記憶されている。記憶部12には、クライアント端末2からの要求に応じて、クライアント端末2へ送信されるWebページのデータが記憶される。さらに、記憶部12には、動画データが記憶される。動画データには、動画IDが付与される。動画IDは、動画を識別する識別情報である。記憶部12には、音声データが記憶されてもよい。動画データは、動画を構成する画像フレーム内で、表示手段により表示される表示範囲が、動画の再生時間に応じて変化可能である。動画には、例えば、カメラにより撮影された動画や編集により生成された動画等が含まれる。このような動画の一例として、例えばパノラマ動画がある。パノラマ動画は、例えば高解像度のカメラで、且つ広範囲を撮影可能なレンズを搭載するカメラにより被写体が撮影された動画である。広範囲を撮影可能なレンズには、ワイドレンズ、魚眼レンズ、360度レンズ等がある。   As shown in FIG. 1, the distribution server 1 includes a control unit 11, a storage unit 12, an interface unit 13, and the like. These components are connected to the bus 14. The control unit 11 includes a CPU, a ROM, a RAM, and the like. The storage unit 12 is configured by, for example, a hard disk drive. The storage unit 12 stores an OS, a content distribution processing program, and the like. The storage unit 12 stores Web page data transmitted to the client terminal 2 in response to a request from the client terminal 2. Furthermore, the storage unit 12 stores moving image data. A moving image ID is assigned to the moving image data. The moving image ID is identification information for identifying a moving image. Audio data may be stored in the storage unit 12. In the moving image data, the display range displayed by the display means within the image frame constituting the moving image can be changed according to the reproduction time of the moving image. The moving image includes, for example, a moving image shot by a camera or a moving image generated by editing. An example of such a moving image is a panoramic moving image. A panoramic video is a video in which a subject is shot by a camera equipped with a lens capable of shooting a wide range, for example, with a high-resolution camera. Examples of lenses capable of photographing a wide range include a wide lens, a fisheye lens, and a 360 degree lens.

クライアント端末2は、図1に示すように、制御部21、記憶部22、ビデオRAM23、映像制御部24、操作処理部25、音声制御部26、及びインターフェース部27等を備えて構成される。これらの構成要素は、バス28に接続されている。映像制御部24には、ディスプレイを備える表示部24aが接続される。記憶部22は、記憶手段の一例である。表示部24aは、表示手段の一例である。操作処理部25には、操作部25aが接続される。操作部25aには、例えば、マウス、キーボード、リモコン等がある。表示部24aと操作部25aとを兼ねるタッチパネルが適用されてもよい。制御部21は、ユーザによる操作部25aからの操作指示を、操作処理部25を介して受け付ける。ユーザは、操作部25aを用いて、上述した疑似カメラワークの操作を行うことができる。音声制御部26には、スピーカ26aが接続される。インターフェース部27は、ネットワークNWに接続される。制御部21は、コンピュータとしてのCPU、ROM、及びRAM等により構成される。制御部21は、本発明の第1取得手段、再生手段、第2取得手段、第1判定手段、第2判定手段、及び表示制御手段の一例である。制御部21は、タイマー機能を備える。記憶部22は、例えば、ハードディスクドライブ(HDD)により構成される。記憶部22には、OS、及びプレイヤーソフトウェア等が記憶されている。プレイヤーソフトウェアは、コンテンツを再生するためのプログラムである。制御部21は、プレイヤーソフトウェアを実行することでコンテンツを再生するプレイヤーとして機能する。具体的には、制御部21は、プレイヤーの機能により、配信サーバ1からストリーミングで配信されたコンテンツを順次受信し、例えばRAMに設けられたバッファメモリに、コンテンツに含まれる動画データ等を一時的に保持する。そして、制御部21は、バッファメモリからビデオRAM23へ動画データを出力する。ビデオRAM23には、描画データを格納するフレームバッファがRAMに設けられている。映像制御部24は、制御部21からの制御信号に従って、フレームバッファに書き込まれた描画データを表示画面に描画することで動画を表示させる。また、制御部21は、後述するように、広告コンテンツを動画と共に表示させる処理を行う。ここで、「広告コンテンツを動画と共に表示」には、「広告コンテンツを動画に重ね合わせて表示」と、「広告コンテンツを動画に重ね合わせずに同時に表示」とが含まれる。なお、例えば配信サーバ1からバッファメモリに保持されたコンテンツに音声データが含まれる場合がある。この場合、制御部21は、バッファメモリから音声データを再生して音声制御部26へ出力する。音声制御部26は、音声データからアナログ音声信号を生成し、生成したアナログ音声信号をスピーカ26aへ出力する。   As shown in FIG. 1, the client terminal 2 includes a control unit 21, a storage unit 22, a video RAM 23, a video control unit 24, an operation processing unit 25, an audio control unit 26, an interface unit 27, and the like. These components are connected to the bus 28. A display unit 24 a including a display is connected to the video control unit 24. The storage unit 22 is an example of a storage unit. The display unit 24a is an example of a display unit. An operation unit 25 a is connected to the operation processing unit 25. Examples of the operation unit 25a include a mouse, a keyboard, and a remote controller. A touch panel serving both as the display unit 24a and the operation unit 25a may be applied. The control unit 21 receives an operation instruction from the operation unit 25 a by the user via the operation processing unit 25. The user can perform the above-described pseudo camera work operation using the operation unit 25a. A speaker 26 a is connected to the audio control unit 26. The interface unit 27 is connected to the network NW. The control unit 21 includes a CPU, ROM, RAM, and the like as a computer. The control unit 21 is an example of a first acquisition unit, a reproduction unit, a second acquisition unit, a first determination unit, a second determination unit, and a display control unit of the present invention. The control unit 21 has a timer function. The storage unit 22 is configured by, for example, a hard disk drive (HDD). The storage unit 22 stores an OS, player software, and the like. The player software is a program for playing back content. The control unit 21 functions as a player that reproduces content by executing player software. Specifically, the control unit 21 sequentially receives the content distributed by streaming from the distribution server 1 by the function of the player, and temporarily stores, for example, moving image data included in the content in a buffer memory provided in the RAM. Hold on. Then, the control unit 21 outputs moving image data from the buffer memory to the video RAM 23. In the video RAM 23, a frame buffer for storing drawing data is provided in the RAM. The video control unit 24 displays the moving image by drawing the drawing data written in the frame buffer on the display screen according to the control signal from the control unit 21. Moreover, the control part 21 performs the process which displays advertising content with a moving image so that it may mention later. Here, “display advertisement content together with video” includes “display advertisement content superimposed on video” and “display advertisement content simultaneously without overlay on video”. For example, audio data may be included in the content held in the buffer memory from the distribution server 1. In this case, the control unit 21 reproduces the audio data from the buffer memory and outputs it to the audio control unit 26. The voice control unit 26 generates an analog voice signal from the voice data, and outputs the generated analog voice signal to the speaker 26a.

広告サーバ3は、図1に示すように、制御部31、記憶部32、及びインターフェース部33等を備えて構成される。これらの構成要素は、バス34に接続されている。制御部31は、CPU、ROM、及びRAM等により構成される。記憶部32は、例えば、例えばハードディスクドライブ(HDD)により構成される。記憶部32には、OS(Operating System)、及び広告送信処理プログラム等が記憶されている。また、記憶部32には、クライアント端末2からの要求に応じて、クライアント端末2へ送信される広告設定データと動画IDとが対応付けられて記憶される。この動画IDは、広告設定データが作成されるときに再生された動画データの動画IDである。また、記憶部32には、広告IDが付与された広告コンテンツが記憶される。広告コンテンツには、例えば静止画データまたは動画データが含まれる。なお、広告コンテンツには、音声データが含まれてもよい。   As shown in FIG. 1, the advertisement server 3 includes a control unit 31, a storage unit 32, an interface unit 33, and the like. These components are connected to the bus 34. The control unit 31 includes a CPU, a ROM, a RAM, and the like. The storage unit 32 is configured by, for example, a hard disk drive (HDD). The storage unit 32 stores an OS (Operating System), an advertisement transmission processing program, and the like. Further, in the storage unit 32, the advertisement setting data transmitted to the client terminal 2 and the moving image ID are stored in association with each other in response to a request from the client terminal 2. This moving image ID is the moving image ID of the moving image data reproduced when the advertisement setting data is created. Further, the storage unit 32 stores advertisement content to which an advertisement ID is assigned. The advertising content includes, for example, still image data or moving image data. Note that the advertising content may include audio data.

ここで、図2を参照して、広告設定データの詳細について説明する。図2(A),(C)は、動画を構成する複数の画像フレームにおける広告設定画素領域を示す図である。なお、図2(A),(C)の例では、説明の便宜上、1つの画像フレームを示しているが、実際には、広告設定画素領域のそれぞれに対応する1つ以上の画像フレームがある。図2(A)の例では、破線矢印で示すように、時間経過に従って、広告設定画素領域R1-1からR1-9へ時系列で変化する疑似カメラワークを示す。図2(B)は、図2(A)に示す広告設定画素領域R1-1〜R1-9に対応する広告設定データD1の一例を示す図である。図2(B)に示す広告設定データD1では、広告設定画素領域R1-1〜R1-9と、広告設定画素領域R1-1〜R1-9が特定された1つ以上の画像フレームが出力される再生時間とに、1つの広告ID“0001”を対応付けている。なお、図2(B)の例では、広告設定画素領域R1-1〜R1-9は、それぞれ、各広告設定画素領域の左上頂点座標と、左上頂点座標からX軸方向の画素数(幅)と、左上頂点座標からY軸方向の画素数(高さ)とで表される。左上頂点座標は、画像フレームの左上頂点座標を原点(0,0)とする(X,Y)座標である。このように、図2(B)の例では、広告設定画素領域R1-1からR1-9へ変化していく疑似カメラワークに対して、1つの広告ID“0001”が対応付けられる。例えば、動画に表れるバンドに関する広告コンテンツの広告ID“0001”が対応付けられる。   Here, the details of the advertisement setting data will be described with reference to FIG. 2A and 2C are diagrams showing advertisement setting pixel areas in a plurality of image frames constituting a moving image. In the examples of FIGS. 2A and 2C, one image frame is shown for convenience of explanation, but actually there are one or more image frames corresponding to each of the advertisement setting pixel regions. . In the example of FIG. 2 (A), as shown by a broken line arrow, pseudo camera work that changes in time series from the advertisement setting pixel region R1-1 to R1-9 as time passes is shown. FIG. 2B is a diagram illustrating an example of advertisement setting data D1 corresponding to the advertisement setting pixel regions R1-1 to R1-9 illustrated in FIG. In the advertisement setting data D1 shown in FIG. 2B, one or more image frames in which the advertisement setting pixel areas R1-1 to R1-9 and the advertisement setting pixel areas R1-1 to R1-9 are specified are output. One advertisement ID “0001” is associated with the playback time. In the example of FIG. 2B, each of the advertisement setting pixel areas R1-1 to R1-9 has an upper left vertex coordinate of each advertisement setting pixel area and the number of pixels in the X-axis direction (width) from the upper left vertex coordinates. And the number of pixels (height) in the Y-axis direction from the upper left vertex coordinates. The upper left vertex coordinates are (X, Y) coordinates with the upper left vertex coordinates of the image frame as the origin (0, 0). As described above, in the example of FIG. 2B, one advertisement ID “0001” is associated with the pseudo camera work changing from the advertisement setting pixel region R1-1 to R1-9. For example, the advertisement ID “0001” of the advertisement content regarding the band appearing in the moving image is associated.

一方、図2(C)の例では、破線矢印で示すように、時間経過に従って、広告設定画素領域R2-1からR2-8へ時系列で変化する疑似カメラワークを示す。図2(D)は、図2(C)に示す広告設定画素領域R2-1〜R2-8に対応する広告設定データD2の一例を示す図である。図2(D)に示す広告設定データD2では、広告設定画素領域R2-1〜R2-8と、広告設定画素領域R2-1〜R2-8が特定された1つ以上の画像フレームが出力される再生時間とに、1つの広告ID“0002”を対応付けている。このように、図2(D)の例では、広告設定画素領域R2-1からR2-8へ変化していく疑似カメラワークに対して、1つの広告ID“0002”が対応付けられる。例えば、動画に表れるギターに関する広告コンテンツの広告ID“0002”が対応付けられる。さらに、図2(C)の例では、広告設定画素領域R3〜R5を示している。図2(E)は、図2(C)に示す広告設定画素領域R3〜R5のそれぞれに対応する広告設定データD3〜D5の一例を示す図である。例えば、図2(E)に示す広告設定データD3では、広告設定画素領域R3と、広告設定画素領域R3が特定された1つ以上の画像フレームが出力される再生時間とに、1つの広告ID“0003”を対応付けている。つまり、広告設定データD3〜D5は、それぞれ、広告設定データD1及びD2とは異なり、複数の画像フレームにおいて広告設定画素領域に変更がない時間範囲ごとに作成されたデータである。また、図2(E)の例では、広告設定画素領域R3〜R5は、それぞれ、広告設定画素領域R3〜R5の中心座標及び表示倍率で表される。中心座標は、画像フレームの左上頂点座標を原点(0,0)とする(X,Y)座標である。   On the other hand, in the example of FIG. 2 (C), as indicated by a broken-line arrow, pseudo camera work that changes in time series from the advertisement setting pixel region R2-1 to R2-8 as time elapses is shown. FIG. 2D is a diagram illustrating an example of advertisement setting data D2 corresponding to the advertisement setting pixel regions R2-1 to R2-8 illustrated in FIG. In the advertisement setting data D2 shown in FIG. 2D, one or more image frames in which the advertisement setting pixel areas R2-1 to R2-8 and the advertisement setting pixel areas R2-1 to R2-8 are specified are output. One advertisement ID “0002” is associated with the playback time. As described above, in the example of FIG. 2D, one advertisement ID “0002” is associated with the pseudo camera work changing from the advertisement setting pixel region R2-1 to R2-8. For example, the advertisement ID “0002” of the advertisement content related to the guitar appearing in the moving image is associated. Further, in the example of FIG. 2C, advertisement setting pixel regions R3 to R5 are shown. FIG. 2E is a diagram illustrating an example of advertisement setting data D3 to D5 corresponding to each of the advertisement setting pixel regions R3 to R5 illustrated in FIG. For example, in the advertisement setting data D3 shown in FIG. 2 (E), one advertisement ID is included in the advertisement setting pixel area R3 and the reproduction time during which one or more image frames in which the advertisement setting pixel area R3 is specified are output. “0003” is associated. That is, the advertisement setting data D3 to D5 are data created for each time range in which the advertisement setting pixel area is not changed in a plurality of image frames, unlike the advertisement setting data D1 and D2. In the example of FIG. 2E, the advertisement setting pixel areas R3 to R5 are represented by the center coordinates and display magnification of the advertisement setting pixel areas R3 to R5, respectively. The center coordinates are (X, Y) coordinates with the upper left vertex coordinate of the image frame as the origin (0, 0).

2.通信システムSにおけるクライアント端末2の動作
次に、図3及び図4を参照して、クライアント端末2の動作について説明する。図3は、クライアント端末2の制御部21またはCPUにより実行されるメイン処理の一例を示すフローチャートである。図4(A),(B)は、クライアント端末2の制御部21またはCPUにより実行される広告検索処理の一例を示すフローチャートである。なお、図4(A)に示す処理と、図4(B)に示す処理とは、別の実施形態である。図3に示す処理が実行されるときに、例えば設定に応じて、図4(A)に示す処理と図4(B)に示す処理との何れか一方の処理が実行される。図3に示す処理は、例えば、ユーザから処理開始指示があった場合に開始される。
[ 2. Operation of client terminal 2 in communication system S ]
Next, the operation of the client terminal 2 will be described with reference to FIGS. FIG. 3 is a flowchart illustrating an example of main processing executed by the control unit 21 or the CPU of the client terminal 2. FIGS. 4A and 4B are flowcharts illustrating an example of advertisement search processing executed by the control unit 21 or the CPU of the client terminal 2. Note that the process illustrated in FIG. 4A and the process illustrated in FIG. 4B are different embodiments. When the process shown in FIG. 3 is executed, one of the process shown in FIG. 4A and the process shown in FIG. 4B is executed, for example, according to the setting. The process illustrated in FIG. 3 is started, for example, when a user issues a process start instruction.

図3に示す処理が開始されると、クライアント端末2の制御部21は、広告コンテンツの取得処理を行う(ステップS1)。広告コンテンツの広告取得処理では、制御部21は、広告サーバ3へ広告設定データの要求を送信する。制御部21は、広告設定データの要求に応じて、広告サーバ3から送信された広告設定データと動画IDと対応付けて受信し、広告設定データと動画IDとを対応付けてRAMに記憶する。次いで、制御部21は、広告設定データに含まれる広告IDを取得する。次いで、制御部21は、取得した広告IDに対応する広告コンテンツを広告サーバ3から取得する。次いで、制御部21は、取得した広告IDと広告コンテンツとを対応付けて記憶部22に記憶する。なお、広告設定データに含まれる広告IDが、広告コンテンツの所在を示すURLである場合がある。この場合、制御部21は、広告設定データに含まれるURLにアクセスして所定のサーバから広告コンテンツを取得し、取得した広告コンテンツを広告IDに対応付けて記憶部22に記憶する。   When the process shown in FIG. 3 is started, the control unit 21 of the client terminal 2 performs an advertisement content acquisition process (step S1). In the advertisement content advertisement acquisition process, the control unit 21 transmits a request for advertisement setting data to the advertisement server 3. In response to the request for the advertisement setting data, the control unit 21 receives the advertisement setting data transmitted from the advertisement server 3 in association with the moving image ID, and stores the advertisement setting data and the moving image ID in the RAM in association with each other. Next, the control unit 21 acquires an advertisement ID included in the advertisement setting data. Next, the control unit 21 acquires advertisement content corresponding to the acquired advertisement ID from the advertisement server 3. Next, the control unit 21 stores the acquired advertisement ID and advertisement content in the storage unit 22 in association with each other. Note that the advertisement ID included in the advertisement setting data may be a URL indicating the location of the advertisement content. In this case, the control unit 21 accesses the URL included in the advertisement setting data, acquires the advertisement content from a predetermined server, and stores the acquired advertisement content in the storage unit 22 in association with the advertisement ID.

次いで、制御部21は、コンテンツの再生処理を開始する(ステップS2)。コンテンツの再生処理では、制御部21は、配信サーバ1へコンテンツの要求を送信する。制御部21は、コンテンツの要求に応じて、配信サーバ1からストリーミングで配信されたコンテンツを受信する。次いで、制御部21は、受信されたコンテンツに含まれる動画データ等をバッファメモリに記憶する。次いで、制御部21は、バッファメモリに記憶された動画データを再生し、表示画面に動画を表示させる。コンテンツの再生処理は、図3に示す処理の終了まで継続する。   Next, the control unit 21 starts a content reproduction process (step S2). In the content reproduction process, the control unit 21 transmits a content request to the distribution server 1. The control unit 21 receives the content distributed by streaming from the distribution server 1 in response to the content request. Next, the control unit 21 stores the moving image data included in the received content in the buffer memory. Next, the control unit 21 reproduces the moving image data stored in the buffer memory and displays the moving image on the display screen. The content reproduction process continues until the end of the process shown in FIG.

次いで、制御部21は、ストリーミングで配信された動画の再生中に疑似カメラワークの操作により表示された表示画素領域と、この表示画素領域が特定された特定の画像フレームが出力される第2再生時間と、この表示画素領域の表示倍率とを対応付けて取得し、RAMに記憶する(ステップS3)。ここで、上述した仮想スクリーンが平面スクリーンの場合、表示画素領域は、例えば、表示画素領域の左上頂点座標と、左上頂点座標からX軸方向の画素数(幅)と、左上頂点座標からY軸方向の画素数(高さ)とで表される。仮想スクリーンが平面スクリーンの場合、表示画素領域は、図2(E)に示す広告設定画素領域と同様、表示画素領域の中心座標及び表示倍率で表されてもよい。或いは、上述した仮想スクリーンが円筒形のスクリーンの場合、表示画素領域は、例えば、方位角、横視野角、及び高さで表される。或いは、上述した仮想スクリーンが球形のスクリーンの場合、表示画素領域は、例えば、方位角、仰俯角、横視野角、及び縦視野角で表される。或いは、表示画素領域は、仮想スクリーンの種類に依らず、例えば、パン,チルトパラメータ(pan,tilt)、及びズームパラメータ(zoom)で表されてもよい。パン,チルトパラメータ(pan,tilt)は、仮想カメラの左右振りを規定するパンに対応するパラメータと、仮想カメラの上下振りを規定するチルトに対応するパラメータとから構成される。ズームパラメータ(zoom)は、表示倍率を規定するパラメータである。   Next, the control unit 21 outputs the display pixel area displayed by the operation of the pseudo camera work during the reproduction of the moving image distributed by streaming and the specific image frame in which the display pixel area is specified. The time and the display magnification of the display pixel area are acquired in association with each other and stored in the RAM (step S3). Here, when the virtual screen described above is a flat screen, the display pixel area includes, for example, the upper left vertex coordinates of the display pixel area, the number of pixels (width) in the X axis direction from the upper left vertex coordinates, and the Y axis from the upper left vertex coordinates. It is represented by the number of pixels in the direction (height). When the virtual screen is a flat screen, the display pixel area may be represented by the center coordinates of the display pixel area and the display magnification, similarly to the advertisement setting pixel area shown in FIG. Alternatively, when the above-described virtual screen is a cylindrical screen, the display pixel region is represented by, for example, an azimuth angle, a horizontal viewing angle, and a height. Alternatively, when the above-described virtual screen is a spherical screen, the display pixel region is represented by, for example, an azimuth angle, an elevation angle, a horizontal viewing angle, and a vertical viewing angle. Alternatively, the display pixel area may be represented by, for example, pan, tilt parameters (pan, tilt), and zoom parameters (zoom) regardless of the type of virtual screen. The pan / tilt parameters (pan, tilt) are composed of a parameter corresponding to panning that defines the horizontal swing of the virtual camera and a parameter corresponding to tilt that defines the vertical swing of the virtual camera. The zoom parameter (zoom) is a parameter that defines the display magnification.

なお、疑似カメラワークの具体的な操作として、例えば、ドラッグ操作、及びフリック操作がある。ドラッグ操作では、例えば、ユーザが表示画面をマウスによりドラッグすることで表示画素領域を移動させることができる。また、フリック操作では、例えば、ユーザがタッチパネル方式の表示画面上で指やペン等の接触物を素早くスライドすることで表示画素領域を移動させることができる。また、疑似カメラワークの具体的な操作として、例えば、ユーザが操作部25aに設けられたボタンや画面上に表示されたボタン等を押すことにより、表示画素領域を拡大したり縮小させたりする操作がある。この操作の場合、表示画素領域の単位時間あたり変動量が大きくなりながら表示画素領域が拡大又は縮小する変動が行われ、その後、単位時間あたり変動量が一定となって、表示画素領域が変動する。ユーザがボタンを押すことをやめる操作を行わない限り、表示画素領域が変動し、表示画素領域の大きさが最大又は最少となった時点で、変動は停止する。仮想スクリーンが平面スクリーンである場合、表示画素領域の拡大・縮小は、表示画素領域の幅及び高さの変動である。仮想スクリーンが円筒形のスクリーンである場合、表示画素領域の拡大・縮小は、横視野角及び高さの変動である。仮想スクリーンが球形のスクリーンである場合、表示画素領域の拡大・縮小は、横視野角及び縦視野角の変動である。なお、上述した操作は、あくまでも例示に過ぎず、その他の操作により疑似カメラワークが行われてもよい。   Specific operations of the pseudo camera work include, for example, a drag operation and a flick operation. In the drag operation, for example, the display pixel region can be moved by the user dragging the display screen with a mouse. Further, in the flick operation, for example, the user can move the display pixel region by quickly sliding a contact object such as a finger or a pen on the touch panel display screen. Further, as a specific operation of the pseudo camera work, for example, an operation in which the display pixel region is enlarged or reduced by the user pressing a button provided on the operation unit 25a, a button displayed on the screen, or the like. There is. In the case of this operation, the display pixel region is expanded or reduced while the variation amount per unit time of the display pixel region is increased, and thereafter, the variation amount per unit time becomes constant and the display pixel region varies. . Unless the user performs an operation to stop pressing the button, the display pixel region changes, and the change stops when the size of the display pixel region becomes maximum or minimum. When the virtual screen is a flat screen, the enlargement / reduction of the display pixel region is a change in the width and height of the display pixel region. When the virtual screen is a cylindrical screen, the enlargement / reduction of the display pixel region is a change in the horizontal viewing angle and the height. When the virtual screen is a spherical screen, the enlargement / reduction of the display pixel region is a change in the horizontal viewing angle and the vertical viewing angle. Note that the above-described operations are merely examples, and pseudo camera work may be performed by other operations.

次いで、制御部21は、広告検索条件を満たしたか否かを判定する(ステップS4)。例えば、制御部21は、疑似カメラワークの操作により表示画素領域を変更する指定が所定時間なかった場合に、広告検索条件を満たしたと判定する。より具体的には、制御部21は、表示画素領域を変更する指定がない状態の継続時間をタイマー機能によりカウントする。そして、制御部21は、カウントされたカウント値が所定時間に到達したときに広告検索条件を満たしたと判定する。これにより、ユーザが所定時間、表示画素領域内の表示対象に注目しているときだけ、広告検索処理が実行される。そして、広告検索条件を満たしていないと判定された場合(ステップS4:NO)、ステップS5へ進む。一方、広告検索条件を満たしたと判定された場合(ステップS4:YES)、ステップS7へ進む。   Next, the control unit 21 determines whether or not the advertisement search condition is satisfied (step S4). For example, the control unit 21 determines that the advertisement search condition is satisfied when there is no designation for changing the display pixel area by a pseudo camera work operation for a predetermined time. More specifically, the control unit 21 counts the duration of the state in which there is no designation for changing the display pixel region by using the timer function. Then, the control unit 21 determines that the advertisement search condition is satisfied when the counted value reaches a predetermined time. Thereby, the advertisement search process is executed only when the user focuses on the display target in the display pixel area for a predetermined time. And when it determines with not satisfy | filling advertisement search conditions (step S4: NO), it progresses to step S5. On the other hand, when it is determined that the advertisement search condition is satisfied (step S4: YES), the process proceeds to step S7.

ステップS5では、制御部21は、ユーザから操作部25aを介して所定の操作があったか否かを判定する。例えば、制御部21は、ユーザが表示画面内を指等でタップまたはマウスでクリックした場合、所定の操作があったと判定する。これにより、ユーザから所定の操作があったときだけ、広告検索処理が実行される。そして、所定の操作があったと判定された場合(ステップS5:YES)、ステップS6へ進む。ステップS6では、制御部21は、所定の操作により指定された座標を記憶し、ステップS7へ進む。この座標は、例えば動画を構成する画像フレームの左上頂点座標を原点(0,0)とする(X,Y)座標である。一方、所定の操作がないと判定された場合(ステップS5:NO)、ステップS11へ進む。   In step S5, the control unit 21 determines whether or not a predetermined operation has been performed by the user via the operation unit 25a. For example, the control unit 21 determines that a predetermined operation has been performed when the user taps the display screen with a finger or clicks with the mouse. Thereby, the advertisement search process is executed only when a predetermined operation is performed by the user. If it is determined that a predetermined operation has been performed (step S5: YES), the process proceeds to step S6. In step S6, the control part 21 memorize | stores the coordinate designated by predetermined | prescribed operation, and progresses to step S7. This coordinate is, for example, an (X, Y) coordinate with the upper left vertex coordinate of the image frame constituting the moving image as the origin (0, 0). On the other hand, when it is determined that there is no predetermined operation (step S5: NO), the process proceeds to step S11.

なお、ステップS3で記憶された表示画素領域を表す形式が、広告設定データに含まれる広告設定画素領域を表す形式と同一でない場合がある。この場合、制御部21は、記憶された表示画素領域を表す形式を、広告設定データに含まれる広告設定画素領域を表す形式に変換する。例えば、広告設定画素領域が、広告設定画素領域の左上頂点座標、広告設定画素領域の幅、及び広告設定画素領域の高さで表される一方、表示画素領域が、パン,チルトパラメータ(pan,tilt)、及びズームパラメータ(zoom)で表される場合がある。この場合、制御部21は、所定の変換式により、パン,チルトパラメータ(pan,tilt)、及びズームパラメータ(zoom)の形式を、表示画素領域の左上頂点座標、表示画素領域の幅、及び表示画素領域の高さの形式に変換する。なお、例えば、広告設定画素領域が、広告設定画素領域の左上頂点座標、広告設定画素領域の幅、及び広告設定画素領域の高さで表される一方、表示画素領域が、表示画素領域の中心座標で表される場合がある。この場合、制御部21は、記憶された表示画素領域を表す形式を、広告設定データに含まれる広告設定画素領域を表す形式に変換しなくてもよい。   Note that the format representing the display pixel area stored in step S3 may not be the same as the format representing the advertisement setting pixel area included in the advertisement setting data. In this case, the control unit 21 converts the format representing the stored display pixel area into a format representing the advertisement setting pixel area included in the advertisement setting data. For example, the advertisement setting pixel area is represented by the upper left vertex coordinates of the advertisement setting pixel area, the width of the advertisement setting pixel area, and the height of the advertisement setting pixel area, while the display pixel area is represented by pan and tilt parameters (pan, tilt) and zoom parameter (zoom). In this case, the control unit 21 determines the pan, tilt parameter (pan, tilt), and zoom parameter (zoom) format according to a predetermined conversion formula, the upper left vertex coordinate of the display pixel region, the width of the display pixel region, and the display. Convert to pixel height format. For example, the advertisement setting pixel area is represented by the upper left vertex coordinates of the advertisement setting pixel area, the width of the advertisement setting pixel area, and the height of the advertisement setting pixel area, while the display pixel area is the center of the display pixel area. Sometimes expressed in coordinates. In this case, the control unit 21 does not have to convert the format representing the stored display pixel area into the format representing the advertisement setting pixel area included in the advertisement setting data.

ステップS7では、制御部21は、広告検索処理を実行する。例えば、図4(A)に示す広告検索処理では、先ず、制御部21は、例えば、ステップS1で記憶された広告設定データの中から、再生された動画データの動画IDが対応付けられた広告設定データをRAMに読み込む。次いで、制御部21は、読み込んだ広告設定データ中に、再生中の動画における表示画素領域に対応付けられた第2再生時間(つまり、ステップS3で記憶された第2再生時間)に対応する第1再生時間があるかを判定する(ステップS711)。ここで、第2再生時間に対応する第1再生時間には、例えば、第2再生時間と一致する第1再生時間、または第2再生時間が含まれる第1再生時間が該当する。例えば、図2(B)に示す広告設定データD1が用いられる場合において、表示画素領域に対応付けられた第2再生時間が“0:05”であるとする。この場合、第2再生時間は、広告設定データD1における第1再生時間“0:00”〜“0:20” に含まれると判定される。なお、この場合、第1再生時間は、“0:00”〜“0:20”の範囲を示しているが、例えば“0:05”のみを示す場合もある。第2再生時間に対応する第1再生時間があると判定された場合(ステップS711:YES)、ステップS712へ進む。一方、第2再生時間に対応する第1再生時間がないと判定された場合(ステップS711:NO)、ステップS717へ進む。   In step S7, the control unit 21 executes an advertisement search process. For example, in the advertisement search process shown in FIG. 4A, first, the control unit 21, for example, an advertisement associated with the movie ID of the reproduced movie data from the advertisement setting data stored in step S1. Read setting data into RAM. Next, the control unit 21 includes, in the read advertisement setting data, the second reproduction time corresponding to the display pixel region in the moving image being reproduced (that is, the second reproduction time stored in step S3). It is determined whether there is one playback time (step S711). Here, the first playback time corresponding to the second playback time corresponds to, for example, a first playback time that matches the second playback time or a first playback time that includes the second playback time. For example, when the advertisement setting data D1 shown in FIG. 2B is used, it is assumed that the second reproduction time associated with the display pixel region is “0:05”. In this case, it is determined that the second playback time is included in the first playback time “0:00” to “0:20” in the advertisement setting data D1. In this case, the first reproduction time shows a range from “0:00” to “0:20”, but may show only “0:05”, for example. If it is determined that there is a first reproduction time corresponding to the second reproduction time (step S711: YES), the process proceeds to step S712. On the other hand, when it is determined that the first reproduction time corresponding to the second reproduction time is not present (step S711: NO), the process proceeds to step S717.

ステップS712では、制御部21は、広告設定データから、ステップS711で判定された第2再生時間に対応する第1再生時間が対応付けられた広告設定画素領域を特定する。次いで、制御部21は、ステップS712で特定された広告設定画素領域の中で、ステップS711で判定された第2再生時間に対応付けられた表示画素領域を少なくとも一部含む広告設定画素領域があるかを判定する(ステップS713)。例えば、制御部21は、表示画素領域内の全座標と、広告設定画素領域内の全座標との中で、少なくとも一部の座標が一致しているか判定する。そして、制御部21は、表示画素領域内の全座標と、広告設定画素領域内の全座標との中で、少なくとも一部の座標が一致している場合、表示画素領域を少なくとも一部含む広告設定画素領域があると判定する。また、別の例として、図2(E)に示す広告設定データD3のように、広告設定画素領域が中心座標で表される場合がある。この場合、制御部21は、例えば左上頂点座標、幅及び高さで画定される表示画素領域内に、広告設定画素領域の中心座標が含まれるかを判定する。そして、制御部21は、表示画素領域内に、広告設定画素領域の中心座標が含まれる場合、表示画素領域を少なくとも一部含む広告設定画素領域があると判定する。また、別の例として、表示画素領域と広告設定画素領域とが共に中心座標で表される場合がある。この場合、制御部21は、表示画素領域の中心座標と広告設定画素領域の中心座標との間の距離(画素数)が、所定値以下であるかを判定する。そして、制御部21は、表示画素領域の中心座標と広告設定画素領域の中心座標との間の距離が所定値以下である場合、表示画素領域を少なくとも一部含む広告設定画素領域があると判定する。表示画素領域を少なくとも一部含む広告設定画素領域があると判定された場合(ステップS713:YES)、ステップS714へ進む。一方、表示画素領域を少なくとも一部含む広告設定画素領域がないと判定された場合(ステップS713:NO)、ステップS717へ進む。   In step S712, the control unit 21 specifies an advertisement setting pixel area associated with the first reproduction time corresponding to the second reproduction time determined in step S711 from the advertisement setting data. Next, the control unit 21 includes an advertisement setting pixel area that includes at least a part of the display pixel area associated with the second reproduction time determined in step S711 among the advertisement setting pixel areas specified in step S712. Is determined (step S713). For example, the control unit 21 determines whether at least some of the coordinates in the display pixel area and all the coordinates in the advertisement setting pixel area match. And the control part 21 is an advertisement including at least a part of the display pixel area when at least a part of the coordinates coincides among all the coordinates in the display pixel area and all the coordinates in the advertisement setting pixel area. It is determined that there is a set pixel area. As another example, the advertisement setting pixel area may be represented by center coordinates as in the advertisement setting data D3 shown in FIG. In this case, the control unit 21 determines whether the center coordinates of the advertisement setting pixel area are included in the display pixel area defined by, for example, the upper left vertex coordinates, the width, and the height. Then, when the center coordinates of the advertisement setting pixel area are included in the display pixel area, the control unit 21 determines that there is an advertisement setting pixel area including at least a part of the display pixel area. As another example, both the display pixel area and the advertisement setting pixel area may be represented by center coordinates. In this case, the control unit 21 determines whether the distance (number of pixels) between the center coordinates of the display pixel area and the center coordinates of the advertisement setting pixel area is equal to or less than a predetermined value. When the distance between the center coordinates of the display pixel area and the center coordinates of the advertisement setting pixel area is equal to or less than a predetermined value, the control unit 21 determines that there is an advertisement setting pixel area including at least a part of the display pixel area. To do. If it is determined that there is an advertisement setting pixel area including at least a part of the display pixel area (step S713: YES), the process proceeds to step S714. On the other hand, when it is determined that there is no advertisement setting pixel area including at least a part of the display pixel area (step S713: NO), the process proceeds to step S717.

ステップS714では、制御部21は、ステップS713で、表示画素領域を少なくとも一部含むと判定された広告設定画素領域を特定する。次いで、制御部21は、上記第2再生時間に対応付けられた表示画素領域の表示倍率が、ステップS714で特定された広告設定画素領域の表示倍率以上であるか否かを判定する(ステップS715)。表示画素領域の表示倍率が広告設定画素領域の表示倍率以上であると判定された場合(ステップS715:YES)、ステップS716へ進む。一方、表示画素領域の表示倍率が広告設定画素領域の表示倍率以上でないと判定された場合(ステップS715:NO)、ステップS717へ進む。ステップS716では、制御部21は、表示画素領域の表示倍率より小さい表示倍率の広告設定画素領域に対応付けられた広告IDを決定し、メイン処理へ戻る。ステップS715において、表示画素領域の表示倍率が広告設定画素領域の表示倍率以上である場合、例えば、ユーザより広告設定画素領域内のある部分の領域がズームされて表示されていることになる。そのため、ユーザは、この広告設定画素領域内のある部分に真に興味を持っているということができる。したがって、ステップS715の条件を満たす広告設定画素領域に広告IDが対応付けられた広告コンテンツを表示させることで、真にユーザが興味を持っている表示対象に対して、より効果的に広告を表示させることが可能となる。ただし、表示画素領域を少なくとも一部含む広告設定画素領域があると判定された場合(ステップS713:YES)、ステップS716へ進んでもよい。この場合、制御部21は、ステップS714で特定された広告設定画素領域に対応付けられた広告IDを決定することになる。なお、ステップS717では、制御部21は、該当する広告IDが無として決定し、メイン処理へ戻る。   In step S714, the control unit 21 specifies the advertisement setting pixel area determined to include at least a part of the display pixel area in step S713. Next, the control unit 21 determines whether or not the display magnification of the display pixel area associated with the second reproduction time is equal to or larger than the display magnification of the advertisement setting pixel area specified in Step S714 (Step S715). ). If it is determined that the display magnification of the display pixel area is greater than or equal to the display magnification of the advertisement setting pixel area (step S715: YES), the process proceeds to step S716. On the other hand, if it is determined that the display magnification of the display pixel area is not greater than or equal to the display magnification of the advertisement setting pixel area (step S715: NO), the process proceeds to step S717. In step S716, the control unit 21 determines an advertisement ID associated with the advertisement setting pixel area having a display magnification smaller than the display magnification of the display pixel area, and returns to the main process. In step S715, when the display magnification of the display pixel area is equal to or larger than the display magnification of the advertisement setting pixel area, for example, a certain area in the advertisement setting pixel area is zoomed and displayed by the user. Therefore, it can be said that the user is really interested in a certain part in the advertisement setting pixel area. Therefore, by displaying the advertisement content associated with the advertisement ID in the advertisement setting pixel area that satisfies the condition of step S715, the advertisement is displayed more effectively for the display target that the user is truly interested in. It becomes possible to make it. However, when it is determined that there is an advertisement setting pixel area including at least a part of the display pixel area (step S713: YES), the process may proceed to step S716. In this case, the control unit 21 determines the advertisement ID associated with the advertisement setting pixel area specified in step S714. In step S717, the control unit 21 determines that the corresponding advertisement ID is absent, and returns to the main process.

一方、図4(B)に示す広告検索処理は、図2(A)または図2(C)に示すように複数の広告設定画素領域が時系列で変化する疑似カメラワークに対して広告IDが対応付けられる場合の処理である。なお、図4(B)に示す広告検索処理に示すステップS721〜S724の処理は、図4(A)に示す広告検索処理に示すステップS711〜S714の処理と同様である。ステップS725では、制御部21は、広告設定データにおける複数の広告設定画素領域の中で、ステップS724で特定された広告設定画素領域の割合が、所定割合以上であるか否かを判定する。例えば、図2(D)に示す広告設定データD2に含まれる広告設定画素領域R2-1〜R2-8の中で、例えば75%以上(つまり、6つ以上)の広告設定画素領域がステップS724で特定されていた場合、制御部21は、広告設定画素領域の割合が所定割合以上であると判定する。この場合(ステップS725:YES)、制御部21は、所定割合以上の数の広告設定画素領域に対応付けられた広告IDを決定し(ステップS726)、メイン処理へ戻る。一方、広告設定画素領域の割合が所定割合以上でないと判定された場合(ステップS725:NO)、制御部21は、該当する広告IDが無として決定し(ステップS727)、メイン処理へ戻る。   On the other hand, in the advertisement search process shown in FIG. 4B, the advertisement ID is assigned to the pseudo camera work in which a plurality of advertisement setting pixel areas change in time series as shown in FIG. 2A or 2C. This is a process in the case of association. Note that the processes in steps S721 to S724 shown in the advertisement search process shown in FIG. 4B are the same as the processes in steps S711 to S714 shown in the advertisement search process shown in FIG. In step S725, the control unit 21 determines whether or not the ratio of the advertisement setting pixel area specified in step S724 among the plurality of advertisement setting pixel areas in the advertisement setting data is equal to or greater than a predetermined ratio. For example, among the advertisement setting pixel areas R2-1 to R2-8 included in the advertisement setting data D2 illustrated in FIG. 2D, for example, 75% or more (that is, six or more) advertisement setting pixel areas are set in step S724. In the case where the ratio is specified, the control unit 21 determines that the ratio of the advertisement setting pixel area is equal to or greater than the predetermined ratio. In this case (step S725: YES), the control unit 21 determines an advertisement ID associated with a number of advertisement setting pixel areas equal to or greater than a predetermined ratio (step S726), and returns to the main process. On the other hand, when it is determined that the ratio of the advertisement setting pixel area is not equal to or greater than the predetermined ratio (step S725: NO), the control unit 21 determines that the corresponding advertisement ID is not present (step S727), and returns to the main process.

なお、図4(B)に示す広告検索処理においても、制御部21は、記憶された表示画素領域の表示倍率が、ステップS724で特定された広告設定画素領域の表示倍率以上であるか否かを判定するように構成してもよい。この場合、制御部21は、広告設定データにおける複数の広告設定画素領域の中で、表示画素領域の表示倍率より小さい表示倍率の広告設定画素領域の割合が、所定割合以上であるか否かを判定する。そして、制御部21は、所定割合以上の数の広告設定画素領域に対応付けられた広告IDを決定し(ステップS726)、メイン処理へ戻る。   In the advertisement search process shown in FIG. 4B as well, the control unit 21 determines whether or not the display magnification of the stored display pixel area is equal to or larger than the display magnification of the advertisement setting pixel area specified in step S724. May be determined. In this case, the control unit 21 determines whether or not the ratio of the advertisement setting pixel area having a display magnification smaller than the display magnification of the display pixel area among the plurality of advertisement setting pixel areas in the advertisement setting data is a predetermined ratio or more. judge. And the control part 21 determines advertisement ID matched with the number of advertisement setting pixel area | regions more than a predetermined ratio (step S726), and returns to a main process.

次いで、制御部21は、広告検索処理で広告IDが決定されたか否かを判定する(ステップS8)。そして、広告IDが決定されたと判定された場合(ステップS8:YES)、ステップS9へ進む。一方、広告IDが決定されないと判定された場合(ステップS8:NO)、ステップS11へ進む。   Next, the control unit 21 determines whether or not an advertisement ID has been determined in the advertisement search process (step S8). And when it determines with advertising ID having been determined (step S8: YES), it progresses to step S9. On the other hand, when it is determined that the advertisement ID is not determined (step S8: NO), the process proceeds to step S11.

ステップS9では、制御部21は、所定の広告表示条件を満たしたか否かを判定する。例えば、ステップS6で座標が記憶された場合がある。この場合、制御部21は、所定の広告表示条件として、記憶された座標から所定範囲内に、決定された広告IDに対応付けられた広告設定画素領域内の所定座標(例えば、中心座標)が含まれるか否かを判定する。そして、記憶された座標から所定範囲内に広告設定画素領域内の所定座標が含まれると判定された場合、制御部21は、所定の広告表示条件を満たしたと判定し(ステップS9:YES)、ステップS10へ進む。これにより、ユーザが興味を持ちタップした表示対象に対して、より効果的に広告を表示させることが可能となる。或いは、制御部21は、所定の広告表示条件として、例えば、決定された広告IDに対応付けられた広告設定画素領域により表示画素領域の少なくとも一部を含んでいる時間が、所定時間(例えば、10秒)以上であるか否かを判定する。そして、広告設定画素領域により表示画素領域の少なくとも一部を含んでいる時間が、所定時間以上であると判定された場合、制御部21は、所定の広告表示条件を満たしたと判定し(ステップS9:YES)、ステップS10へ進む。なお、所定の広告表示条件を満たさないと判定された場合(ステップS9:NO)、ステップS11へ進む。   In step S9, the control unit 21 determines whether or not a predetermined advertisement display condition is satisfied. For example, the coordinates may be stored in step S6. In this case, as a predetermined advertisement display condition, the control unit 21 has a predetermined coordinate (for example, center coordinates) in the advertisement setting pixel area associated with the determined advertisement ID within a predetermined range from the stored coordinates. It is determined whether or not it is included. And when it determines with the predetermined coordinate in an advertisement setting pixel area | region being included in the predetermined range from the memorize | stored coordinate, the control part 21 determines with satisfy | filling predetermined advertisement display conditions (step S9: YES), Proceed to step S10. Thereby, it becomes possible to display an advertisement more effectively with respect to a display target that the user is interested in and taps. Alternatively, the control unit 21 may determine, as the predetermined advertisement display condition, for example, a time including at least a part of the display pixel area by the advertisement setting pixel area associated with the determined advertisement ID is a predetermined time (for example, 10 seconds) or more. When it is determined that the time including at least a part of the display pixel area by the advertisement setting pixel area is equal to or longer than the predetermined time, the control unit 21 determines that the predetermined advertisement display condition is satisfied (step S9). : YES), the process proceeds to step S10. If it is determined that the predetermined advertisement display condition is not satisfied (step S9: NO), the process proceeds to step S11.

ステップS10では、制御部21は、決定された広告IDと対応付けられて記憶部22に記憶された広告コンテンツを、例えば、表示画面に表示されている動画に重ね合わせて表示させる。これにより、同じ動画内であっても、実際にユーザが見ている位置や時間によって広告コンテンツが切り替えられるため、ユーザが真に興味を持ったものの広告を表示させることが可能になる。なお、制御部21は、広告コンテンツを、動画に重ね合わせずに、動画と同時に表示させてもよい。この場合、広告コンテンツは、例えば、動画が表示されている表示画面上の領域と異なる領域に表示される。ステップS11では、制御部21は、再生中の動画が再生終了に到達したか否かを判定する。動画が再生終了に到達していないと判定された場合(ステップS11:NO)、ステップS3に戻る。一方、動画が再生終了に到達したと判定された場合(ステップS11:YES)、図3に示す処理が終了する。   In step S <b> 10, the control unit 21 displays the advertising content associated with the determined advertisement ID and stored in the storage unit 22, for example, superimposed on the moving image displayed on the display screen. As a result, even within the same moving image, the advertisement content is switched depending on the position and time actually viewed by the user, so that it is possible to display an advertisement of what the user is really interested in. Note that the control unit 21 may display the advertisement content simultaneously with the moving image without overlapping the moving image. In this case, the advertising content is displayed in an area different from the area on the display screen where the moving image is displayed, for example. In step S11, the control unit 21 determines whether or not the moving image being played has reached the end of playback. If it is determined that the video has not reached the end of playback (step S11: NO), the process returns to step S3. On the other hand, when it is determined that the moving image has reached the end of reproduction (step S11: YES), the processing illustrated in FIG. 3 ends.

以上説明したように、上記実施形態によれば、クライアント端末2は、少なくとも、動画を構成する複数の画像フレームにおいて複数の画素の中で特定された広告設定画素領域と、広告設定画素領域が特定された特定の画像フレームが出力される第1再生時間と、広告コンテンツの広告IDとを対応付けて広告サーバ3から取得する。また、クライアント端末2は、少なくとも、クライアント端末2において動画の再生中に表示された表示画素領域と、表示画素領域が特定された特定の画像フレームが出力される第2再生時間とを対応付けて取得する。そして、クライアント端末2は、再生中の動画における表示画素領域に対応付けられた第2再生時間に対応する第1再生時間があるかを判定する。クライアント端末2は、第2再生時間に対応する第1再生時間があると判定した場合、表示画素領域を少なくとも一部含む広告設定画素領域があるかを判定する。そして、クライアント端末2は、表示画素領域を少なくとも一部含む広告設定画素領域があると判定した場合、広告設定画素領域に対応付けられた広告IDに対応する広告コンテンツを表示画面に表示させる。そのため、クライアント端末2のユーザが真に興味を持っている表示対象に対して、効果的に広告を表示させることができる。また、クライアント端末2が、表示画素領域を少なくとも一部含む広告設定画素領域があるかの判定を行うように構成した。そのため、広告サーバ3がこの判定を行う場合と比べて、広告サーバ3の処理負荷を低減することができる。   As described above, according to the above-described embodiment, the client terminal 2 specifies at least the advertisement setting pixel area identified among the plurality of pixels in the plurality of image frames constituting the moving image and the advertisement setting pixel area. The first playback time during which the specific image frame is output and the advertisement ID of the advertisement content are associated with each other and acquired from the advertisement server 3. In addition, the client terminal 2 associates at least the display pixel area displayed during the reproduction of the moving image on the client terminal 2 with the second reproduction time during which the specific image frame in which the display pixel area is specified is output. get. Then, the client terminal 2 determines whether there is a first reproduction time corresponding to the second reproduction time associated with the display pixel area in the moving image being reproduced. When it is determined that there is a first reproduction time corresponding to the second reproduction time, the client terminal 2 determines whether there is an advertisement setting pixel area including at least a part of the display pixel area. If the client terminal 2 determines that there is an advertisement setting pixel area including at least a part of the display pixel area, the client terminal 2 displays the advertisement content corresponding to the advertisement ID associated with the advertisement setting pixel area on the display screen. Therefore, an advertisement can be effectively displayed with respect to a display target that the user of the client terminal 2 is really interested in. Further, the client terminal 2 is configured to determine whether there is an advertisement setting pixel area including at least a part of the display pixel area. Therefore, the processing load of the advertisement server 3 can be reduced compared to the case where the advertisement server 3 makes this determination.

1 配信サーバ
2 クライアント端末
3 広告サーバ
4 管理者端末
S 通信システム
DESCRIPTION OF SYMBOLS 1 Distribution server 2 Client terminal 3 Advertising server 4 Administrator terminal S Communication system

Claims (5)

複数の画素から構成される画像フレームであって、複数の前記画像フレームから構成される動画において、前記複数の画素の中で特定された1画素以上の第1特定画素領域と、前記複数の画像フレームの中で前記第1特定画素領域が特定された特定の第1特定画像フレームが出力される第1再生時間とに、広告コンテンツの広告識別情報を対応付けて、情報処理装置から取得する第1取得ステップと、
前記動画を再生させる再生ステップと、
前記動画の再生中に前記複数の画素の中で、表示手段により表示された1画素以上の第2特定画素領域と、前記複数の画像フレームの中で前記第2特定画素領域が特定された特定の第2特定画像フレームが出力される第2再生時間とを対応付けて取得する第2取得ステップと、
前記第2再生時間に対応する前記第1再生時間があるかを判定する第1判定ステップと、
前記第2再生時間に対応する前記第1再生時間があると判定された場合、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があるかを判定する第2判定ステップと、
前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があると判定された場合、前記第1特定画素領域に対応付けられた前記広告識別情報に対応する前記広告コンテンツを前記表示手段に表示させる表示ステップと、
をコンピュータに実行させることを特徴とするプログラム。
An image frame composed of a plurality of pixels, in a moving image composed of a plurality of the image frames, a first specific pixel region of one or more pixels identified in the plurality of pixels, and the plurality of images A first reproduction time in which a specific first specific image frame in which the first specific pixel region is specified in the frame is output is associated with the advertisement identification information of the advertising content and acquired from the information processing apparatus. 1 acquisition step;
A playback step of playing back the video;
Among the plurality of pixels during reproduction of the moving image, the second specific pixel region of one or more pixels displayed by the display unit and the second specific pixel region specified in the plurality of image frames A second acquisition step of acquiring in association with a second reproduction time during which the second specific image frame is output;
A first determination step of determining whether there is the first reproduction time corresponding to the second reproduction time;
A second determination step of determining whether or not there is the first specific pixel area including at least a part of the second specific pixel area when it is determined that there is the first reproduction time corresponding to the second reproduction time;
When it is determined that there is the first specific pixel area including at least a part of the second specific pixel area, the display unit displays the advertisement content corresponding to the advertisement identification information associated with the first specific pixel area. Display steps to be displayed on the
A program that causes a computer to execute.
前記第1取得ステップは、前記第1再生時間に、前記第1特定画素領域の第1表示倍率を対応付けて、さらに取得し、
前記第2取得ステップは、前記第2再生時間に、前記第2特定画素領域の第2表示倍率を対応付けて、さらに取得し、
前記第2判定ステップは、前記第2特定画素領域の第2表示倍率が、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域の第1表示倍率以上であるかをさらに判定し、
前記表示ステップは、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があると判定され、且つ前記第2表示倍率が前記第1表示倍率以上であると判定された場合、前記第1特定画素領域に対応付けられた前記広告識別情報に対応する前記広告コンテンツを前記表示手段に表示させることを特徴とする請求項1に記載のプログラム。
The first acquisition step further acquires the first reproduction time by associating the first display magnification of the first specific pixel region with the first reproduction time,
The second acquisition step further acquires the second reproduction time by associating the second display magnification of the second specific pixel area with the second reproduction time,
The second determination step further determines whether a second display magnification of the second specific pixel region is equal to or higher than a first display magnification of the first specific pixel region including at least a part of the second specific pixel region. ,
In the display step, when it is determined that there is the first specific pixel region including at least a part of the second specific pixel region, and when it is determined that the second display magnification is greater than or equal to the first display magnification, The program according to claim 1, wherein the display unit displays the advertisement content corresponding to the advertisement identification information associated with the first specific pixel region.
前記再生ステップは、所定のサーバからネットワークを介してストリーミングで配信された前記動画を再生し、
前記第2取得ステップは、前記ストリーミングで配信された前記動画の再生中に、前記第2特定画素領域と、前記第2再生時間とを対応付けて取得することを特徴とする請求項1または2に記載のプログラム。
The reproduction step reproduces the video distributed by streaming from a predetermined server via a network,
3. The second acquisition step of acquiring the second specific pixel area and the second reproduction time in association with each other during reproduction of the moving image distributed by streaming. The program described in.
前記広告識別情報と、前記広告識別情報に対応する広告コンテンツとを前記動画の再生前に前記情報処理装置から取得するステップと、
取得された前記広告識別情報と前記広告コンテンツとを対応付けて記憶手段に記憶するステップと、
を更に前記コンピュータに実行させ、
前記表示ステップは、前記広告識別情報と対応付けられて前記記憶手段に記憶された前記広告コンテンツを前記表示手段に表示させることを特徴とする請求項1乃至3の何れか一項に記載のプログラム。
Obtaining the advertisement identification information and the advertisement content corresponding to the advertisement identification information from the information processing apparatus before playing the moving image;
Storing the acquired advertisement identification information and the advertisement content in association with each other in a storage unit;
Is further executed by the computer,
The program according to any one of claims 1 to 3, wherein the display step causes the display unit to display the advertisement content stored in the storage unit in association with the advertisement identification information. .
複数の画素から構成される画像フレームであって、複数の前記画像フレームから構成される動画において、前記複数の画素の中で特定された1画素以上の第1特定画素領域と、前記複数の画像フレームの中で前記第1特定画素領域が特定された特定の第1特定画像フレームが出力される第1再生時間とに、広告コンテンツの広告識別情報を対応付けて、情報処理装置から取得する第1取得手段と、
前記動画を再生させる再生手段と、
前記動画の再生中に前記複数の画素の中で、表示手段により表示された1画素以上の第2特定画素領域と、前記複数の画像フレームの中で前記第2特定画素領域が特定された特定の第2特定画像フレームが出力される第2再生時間とを対応付けて取得する第2取得手段と、
前記第2再生時間に対応する前記第1再生時間があるかを判定する第1判定手段と、
前記第2再生時間に対応する前記第1再生時間があると判定された場合、前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があるかを判定する第2判定手段と、
前記第2特定画素領域を少なくとも一部含む前記第1特定画素領域があると判定された場合、前記第1特定画素領域に対応付けられた前記広告識別情報に対応する前記広告コンテンツを前記表示手段に表示させる表示制御手段と、
を備えることを特徴とする端末装置。
An image frame composed of a plurality of pixels, in a moving image composed of a plurality of the image frames, a first specific pixel region of one or more pixels identified in the plurality of pixels, and the plurality of images A first reproduction time in which a specific first specific image frame in which the first specific pixel region is specified in the frame is output is associated with the advertisement identification information of the advertising content and acquired from the information processing apparatus. 1 acquisition means;
Playback means for playing back the video;
Among the plurality of pixels during reproduction of the moving image, the second specific pixel region of one or more pixels displayed by the display unit and the second specific pixel region specified in the plurality of image frames Second acquisition means for acquiring a second reproduction time during which the second specific image frame is output in association with each other;
First determination means for determining whether there is the first reproduction time corresponding to the second reproduction time;
Second determination means for determining whether or not there is the first specific pixel area including at least a part of the second specific pixel area when it is determined that there is the first reproduction time corresponding to the second reproduction time;
When it is determined that there is the first specific pixel area including at least a part of the second specific pixel area, the display unit displays the advertisement content corresponding to the advertisement identification information associated with the first specific pixel area. Display control means to be displayed on,
A terminal device comprising:
JP2013202256A 2013-09-27 2013-09-27 Terminal device and program Active JP5854019B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013202256A JP5854019B2 (en) 2013-09-27 2013-09-27 Terminal device and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013202256A JP5854019B2 (en) 2013-09-27 2013-09-27 Terminal device and program

Publications (2)

Publication Number Publication Date
JP2015070419A true JP2015070419A (en) 2015-04-13
JP5854019B2 JP5854019B2 (en) 2016-02-09

Family

ID=52836721

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013202256A Active JP5854019B2 (en) 2013-09-27 2013-09-27 Terminal device and program

Country Status (1)

Country Link
JP (1) JP5854019B2 (en)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002334092A (en) * 2001-05-11 2002-11-22 Hitachi Ltd Method for relating information, information reading device, information register information retrieving device, charging method, and program
JP2003204539A (en) * 2001-12-28 2003-07-18 Victor Co Of Japan Ltd Video providing method and program for acquiring detailed contents of program video image
JP2003529844A (en) * 2000-03-31 2003-10-07 ユナイテッド ビデオ プロパティーズ, インコーポレイテッド System and method for advertising linked by metadata
JP2005108000A (en) * 2003-09-30 2005-04-21 Canon Sales Co Inc Content browsing management system, program, and content server
JP2007018198A (en) * 2005-07-06 2007-01-25 Sony Corp Device for generating index information with link information, device for generating image data with tag information, method for generating index information with link information, method for generating image data with tag information, and program
JP2009117974A (en) * 2007-11-02 2009-05-28 Fujifilm Corp Interest information creation method, apparatus, and system
JP2010109773A (en) * 2008-10-30 2010-05-13 Koichi Sumida Information providing system, content distribution apparatus and content viewing terminal device
JP2011259184A (en) * 2010-06-09 2011-12-22 Nippon Hoso Kyokai <Nhk> Link-function-equipped moving image reproduction apparatus and link-function-equipped moving image reproduction program
JP2012055013A (en) * 2008-05-28 2012-03-15 Kyocera Corp Communication terminal, retrieval server, and communication system
JP2012226209A (en) * 2011-04-21 2012-11-15 Nec Corp Terminal device, information providing program and method
JP2013011991A (en) * 2011-06-28 2013-01-17 Yahoo Japan Corp Content match advertisement distribution device and method

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003529844A (en) * 2000-03-31 2003-10-07 ユナイテッド ビデオ プロパティーズ, インコーポレイテッド System and method for advertising linked by metadata
JP2002334092A (en) * 2001-05-11 2002-11-22 Hitachi Ltd Method for relating information, information reading device, information register information retrieving device, charging method, and program
JP2003204539A (en) * 2001-12-28 2003-07-18 Victor Co Of Japan Ltd Video providing method and program for acquiring detailed contents of program video image
JP2005108000A (en) * 2003-09-30 2005-04-21 Canon Sales Co Inc Content browsing management system, program, and content server
JP2007018198A (en) * 2005-07-06 2007-01-25 Sony Corp Device for generating index information with link information, device for generating image data with tag information, method for generating index information with link information, method for generating image data with tag information, and program
JP2009117974A (en) * 2007-11-02 2009-05-28 Fujifilm Corp Interest information creation method, apparatus, and system
JP2012055013A (en) * 2008-05-28 2012-03-15 Kyocera Corp Communication terminal, retrieval server, and communication system
JP2010109773A (en) * 2008-10-30 2010-05-13 Koichi Sumida Information providing system, content distribution apparatus and content viewing terminal device
JP2011259184A (en) * 2010-06-09 2011-12-22 Nippon Hoso Kyokai <Nhk> Link-function-equipped moving image reproduction apparatus and link-function-equipped moving image reproduction program
JP2012226209A (en) * 2011-04-21 2012-11-15 Nec Corp Terminal device, information providing program and method
JP2013011991A (en) * 2011-06-28 2013-01-17 Yahoo Japan Corp Content match advertisement distribution device and method

Also Published As

Publication number Publication date
JP5854019B2 (en) 2016-02-09

Similar Documents

Publication Publication Date Title
US9781356B1 (en) Panoramic video viewer
CN107590771B (en) 2D video with options for projection viewing in modeled 3D space
JP6167703B2 (en) Display control device, program, and recording medium
US20220222028A1 (en) Guided Collaborative Viewing of Navigable Image Content
JP6566698B2 (en) Display control apparatus and display control method
WO2018059034A1 (en) Method and device for playing 360-degree video
EP3522542B1 (en) Switching between multidirectional and limited viewport video content
US20120293613A1 (en) System and method for capturing and editing panoramic images
JP5942933B2 (en) Terminal device and program
WO2014132912A1 (en) Terminal device, program, and information processing device
WO2014132911A1 (en) Terminal device and program
JP5253300B2 (en) Display control device, display device control method, program, and storage medium
JPWO2016194441A1 (en) 3D advertisement space determination system, user terminal, and 3D advertisement space determination computer
JPWO2015122052A1 (en) Image transmission device, information processing terminal, image transmission method, information processing method, program, and information storage medium
JP2016224173A (en) Control device and control method
JP2014072608A (en) Information processing system, information processing device, display device, and program
JP5861684B2 (en) Information processing apparatus and program
JP5854019B2 (en) Terminal device and program
CN108510433B (en) Space display method and device and terminal
JP6149967B1 (en) Video distribution server, video output device, video distribution system, and video distribution method
JP5821919B2 (en) Information processing apparatus and program
JP5942932B2 (en) Terminal device and program
JP5854018B2 (en) Communication system, information processing apparatus, and program
JP6443505B2 (en) Program, display control apparatus, and display control method
US8054332B2 (en) Advanced input controller for multimedia processing

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150818

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150916

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151123

R150 Certificate of patent or registration of utility model

Ref document number: 5854019

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150