JP2011520324A - Method and apparatus for media content playback and playback control in web page - Google Patents
Method and apparatus for media content playback and playback control in web page Download PDFInfo
- Publication number
- JP2011520324A JP2011520324A JP2011503955A JP2011503955A JP2011520324A JP 2011520324 A JP2011520324 A JP 2011520324A JP 2011503955 A JP2011503955 A JP 2011503955A JP 2011503955 A JP2011503955 A JP 2011503955A JP 2011520324 A JP2011520324 A JP 2011520324A
- Authority
- JP
- Japan
- Prior art keywords
- media content
- media
- web page
- playback
- button
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 90
- 238000012545 processing Methods 0.000 claims abstract description 38
- 230000003139 buffering effect Effects 0.000 claims description 43
- 230000008569 process Effects 0.000 claims description 7
- 238000001514 detection method Methods 0.000 claims description 5
- 238000003708 edge detection Methods 0.000 claims description 4
- 238000004519 manufacturing process Methods 0.000 claims 2
- 238000012544 monitoring process Methods 0.000 description 10
- 230000015654 memory Effects 0.000 description 8
- 230000006870 function Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 230000008929 regeneration Effects 0.000 description 5
- 238000011069 regeneration method Methods 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000000872 buffer Substances 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000009193 crawling Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
ウェブページ内メディアコンテンツの再生兼再生制御方法及び装置を提案する。その一実施形態は、メディアプレイヤ及びメディアコンテンツを使用するウェブページをロードし、そのウェブページの画像を処理することでそのメディアプレイヤに付随する操作子を識別し、その操作子を利用しメディアコンテンツを提示するウェブページ内メディアコンテンツ提示方法である。 A method and apparatus for controlling playback and playback of media content in a web page is proposed. In one embodiment, a web page that uses a media player and media content is loaded, and an operator associated with the media player is identified by processing an image of the web page. This is a method for presenting media content in a web page that presents.
Description
本発明はウェブクローリングに関し、より詳細にはウェブページ内メディアコンテンツ再生兼再生制御方法及び装置に関する。 The present invention relates to web crawling, and more particularly to a method and apparatus for media content playback and playback control in a web page.
WWW(World Wide Web)の普及や公衆向け帯域幅の拡大が進むにつれ、ウェブページを用いたメディアコンテンツの配信も増加している。ウェブページ閲覧者に提供されるメディアコンテンツ、例えば音声や動画は様々なフォーマット、様々なメディアプレイヤでウェブページ閲覧者に提供されている。現在使用されているメディアプレイヤの例としては、Windows(登録商標)MediaPlayer(商標)、Quicktime(登録商標)、RealPlayer(登録商標)、FlashPlayer(登録商標)等がある。これらのメディアプレイヤでは、ウェブページ閲覧者が動画再生を操作できるよう様々な種類の操作子(control)が提供されている。なかには、ウェブブラウザアプリケーションの種類毎に別バージョンが提供されているメディアプレイヤもある。 As the WWW (World Wide Web) spreads and the bandwidth for the public advances, the distribution of media content using web pages is also increasing. Media contents provided to the web page viewer, such as audio and video, are provided to the web page viewer in various formats and various media players. Examples of media players currently used include Windows (registered trademark) MediaPlayer (trademark), Quicktime (registered trademark), RealPlayer (registered trademark), FlashPlayer (registered trademark), and the like. In these media players, various types of operators (controls) are provided so that a web page viewer can operate the reproduction of moving images. Some media players provide different versions for each type of web browser application.
本発明の目的は、ウェブページ内メディアコンテンツ再生兼再生監視方法及び装置を提供することにある。 An object of the present invention is to provide a method and apparatus for reproducing and monitoring media content in a web page.
本発明の一実施形態は、ウェブブラウザ、画像ジェネレータ、画像アナライザ、メディアプレイヤコントローラ及び署名ジェネレータを備えるウェブページ内メディアコンテンツ再生兼再生制御用のウェブクローラである。 One embodiment of the present invention is a web crawler for media content playback and playback control in a web page, which includes a web browser, an image generator, an image analyzer, a media player controller, and a signature generator.
本実施形態では、まず、ウェブブラウザが、メディアプレイヤを使用するウェブページをロードし、そのページのレイアウトを示す情報を画像ジェネレータに送る。画像ジェネレータはウェブページ画像、即ちそのウェブページをモニタの画面等に表示させた場合に現れるであろう画像を生成する。画像ジェネレータは、画像処理技術を用いそのウェブページ画像を解析することで、使用するメディアプレイヤ及びそのメディアプレイヤで再生すべきメディアコンテンツを識別する。このプレイヤ識別の際、画像アナライザは、そのメディアプレイヤに付随する操作子、即ちウェブページ閲覧者にとりメディアコンテンツ再生を制御する手段となる再生ボタン等の操作子も識別する。画像アナライザは、更に、メディアコンテンツ表示エリア及びメディアプレイヤ状態を識別する。メディアプレイヤがとりうる状態は多様である。ここでは、メディアコンテンツ再生中か、メディアコンテンツデータバッファリング中か等を識別する。 In this embodiment, first, the web browser loads a web page that uses the media player, and sends information indicating the layout of the page to the image generator. The image generator generates a web page image, that is, an image that will appear when the web page is displayed on a monitor screen or the like. The image generator identifies the media player to be used and the media content to be played by the media player by analyzing the web page image using an image processing technique. At the time of player identification, the image analyzer also identifies an operator associated with the media player, that is, an operator such as a playback button serving as a means for controlling media content reproduction for a web page viewer. The image analyzer further identifies the media content display area and the media player status. There are various states that a media player can take. Here, it is identified whether the media content is being played back or the media content data buffering is in progress.
メディアプレイヤコントローラは、メディアプレイヤ操作子やメディアプレイヤ状態を表す情報をウェブブラウザに送り、そこで稼働しているメディアプレイヤを制御する。例えば、再生コマンドをウェブブラウザに与えることで、ウェブページ閲覧者が再生ボタンをクリックしたときのそれと同じ動作をそのメディアプレイヤに実行させる。そして、署名ジェネレータは、メディア情報を用いそのメディアコンテンツ向けにディジタル署名を生成する。メディアコンテンツアイデンティファイアは、ディジタル署名と既知メディアコンテンツとを対応付けるデータベースを、生成されたディジタル署名を用い参照することで、何個かの又は全てのウェブページ内メディアコンテンツを識別する。 The media player controller sends information representing the media player operation element and the media player state to the web browser, and controls the media player operating there. For example, by giving a playback command to the web browser, the media player is caused to execute the same operation as that when the web page viewer clicks the play button. The signature generator then uses the media information to generate a digital signature for the media content. The media content identifier identifies some or all of the media content in the web page by referring to a database that associates digital signatures with known media content using the generated digital signature.
本発明の他の実施形態は、上述の実施形態に係るウェブクローラ等を用い実行されるウェブページ内メディアコンテンツ再生兼再生監視方法である。本方法では、そのウェブクローラが、一種類又は複数種類のメディアプレイヤ及びメディアコンテンツを使用するウェブページをロードし、そのウェブページの画像を生成し、更にその画像を解析することで、メディアコンテンツ及びユーザ向けメディアプレイヤ操作子の位置及び機能を識別する。メディアプレイヤ、メディアコンテンツ及びユーザ向け操作子の識別が済むと、ウェブクローラは、(自動再生されていない場合はまずそのメディアコンテンツの再生を開始させた上で)そのメディアコンテンツ向けにディジタル署名を生成する。ウェブクローラは、メディアコンテンツ再生中にメディアプレイヤ状態の監視も行う。監視されうるメディアプレイヤ状態は、「メディアコンテンツ再生中」「メディアコンテンツ再生一時停止中」「メディアコンテンツ再生停止中」「メディアコンテンツ再生終了」「メディアコンテンツデータバッファリング中」「メディアプレイヤエラー発生中」等多様である。 Another embodiment of the present invention is a web page media content playback / playback monitoring method executed using the web crawler or the like according to the above-described embodiment. In this method, the web crawler loads a web page that uses one or more types of media players and media content, generates an image of the web page, and further analyzes the image to obtain the media content and The position and function of the media player operator for the user are identified. Once the media player, media content, and user controls are identified, the web crawler generates a digital signature for the media content (starting playback of the media content first if not automatically played). To do. The web crawler also monitors the media player status during media content playback. Media player statuses that can be monitored are: “Media content playing” “Media content playback paused” “Media content playback stopped” “Media content playback ended” “Media content data buffering” “Media player error occurred” And so on.
以下、本発明の実施形態に係るシステムについて説明する。この説明では、構成部材のうち幾つかをソフトウェアで実現し、そのソフトウェアを相応のハードウェア上で実行する構成を採り上げるが、そうした装置構成はあくまで例であり、本発明はそれ以外の形態でも実施することができる。例えば、ハードウェア又はソフトウェアとして説明されている部材の一部或いは全てを、専用のハードウェアのみ、専用のソフトウェアのみ、或いは専用のファームウェアのみで実現することも、ハードウェア、ファームウェア及びソフトウェアの選択的組合せで実現することも可能である。 Hereinafter, a system according to an embodiment of the present invention will be described. In this description, some of the constituent members are realized by software, and the software is executed on corresponding hardware. However, such a device configuration is merely an example, and the present invention can be implemented in other forms. can do. For example, some or all of the components described as hardware or software can be realized by using only dedicated hardware, only dedicated software, or only dedicated firmware. It can also be realized in combination.
また、本明細書では、再生されるメディアコンテンツ及びその状態が監視されるメディアプレイヤが1個の例を用い、実施形態に係る方法及び装置を説明している。しかし、複数のメディアプレイヤ及びメディアコンテンツを使用するウェブページに対しても、それらの方法及び装置を適用することができるので、その点に留意されたい。 In addition, in this specification, the method and apparatus according to the embodiment are described using an example in which the media content to be played back and the media player whose status is monitored are single. However, it should be noted that these methods and apparatuses can be applied to web pages that use a plurality of media players and media contents.
図1Aに、一例として、メディアプレイヤ102及びメディアコンテンツ104を使用するウェブページ100を示す。このページ100が表示されるのは、ユーザがURL(uniform resource locator)等を辿って来訪したウェブサイトから、コンピュータ例えば図9に示す処理システムへとそのページ100がダウンロードされたときである。通常、こうしたページ100の記述にはHTML(hypertext mark-up language)、XML(extensible mark-up language)等のコンピュータ言語が使用されており、そのダウンロード及び表示にはウェブブラウザが使用されている。既知のウェブブラウザとしては、Microsoft(登録商標)InternetExplorer(登録商標)、Mozilla(登録商標)Firefox(登録商標)、Apple(登録商標)Safari(登録商標)等がある。
FIG. 1A shows a
メディアコンテンツ104は、例えば、こうしたウェブページ100に関する記述中にそのコンテンツ104を表す記述として含めることができる。この場合、コンテンツ104は、そのページ100を構成する他のコンテンツと共にダウンロードされ、ウェブブラウザによって表示される。また、ページ100に関する記述中にコンテンツ104の所在を記述してもよい。この場合、コンテンツ104は、そのページ100とは別の場所からダウンロードされる。更に、メディアプレイヤ102も、ページ100からダウンロードして使用することができる。しかし、通常は、そのコンピュータ上に搭載済のメディアプレイヤのうち相応しいものを、プレイヤ102として使用する。例えば、相応しいブラウザプラグインをウェブブラウザで呼び出して使用する。そうしたプレイヤ102で再生できるメディアコンテンツの種類は、通常、ある特定の種類のデータフォーマットに則り作成されたものに限られている。即ち、多数の又はあらゆるデータフォーマットのメディアコンテンツを再生可能なメディアプレイヤも作成できないではないが、再生可能なメディアコンテンツデータフォーマットは、通常、メディアプレイヤの種類毎に異なっている。使用されるメディアプレイヤの種類は一般にウェブサイト毎、ウェブページ毎に異なるので、そのサイト乃至ページでどのような種類のメディアプレイヤが使用されるかにより、そのサイト乃至ページでサポートされるデータフォーマットや、そのサイト乃至ページ上で個々のメディアプレイヤに付随し表示されるユーザ(例えばウェブ閲覧者)向けメディアプレイヤ操作子の種類も異なるものである。更に、ウェブページのなかには、ユーザとのやりとりやユーザからの指示がなくとも、ウェブページがロードされるとメディアコンテンツの再生が始まるものもある。
The
図1Bに、別例として、メディアプレイヤ108及びメディアコンテンツ110を使用するウェブページ106を示す。図中のプレイヤ108はメディアプレイヤ102とは別種のもの、コンテンツ110のデータフォーマットはメディアコンテンツ104のそれと同種、類似又は別種のものである。プレイヤ102・108間の違いはとりわけその操作子に現れている。例えば、プレイヤ108で提供されているユーザ向けメディアプレイヤ操作子のうち、幾つかはプレイヤ102用の操作子と機能的に類似しているものであるが、他の幾つかはプレイヤ102では提供されていないものである。総じて言えば、本発明の諸実施形態に係る方法及び装置は、ページ100,106で使用中の一種類又は複数種類のプレイヤ102,108で提供されるユーザ向け操作子を識別し、識別した操作子を利用し個々のプレイヤ102,108に係るコンテンツ104,110の再生を制御する、というものである。
FIG. 1B shows a
図2に、図1Aに示したウェブページ100で使用されるメディアプレイヤ102及びメディアコンテンツ104の詳細を示す。このプレイヤ102では、コンテンツ104のうち動画等が表示されるメディアコンテンツ表示エリア202に加え、再生ボタン204や再生/一時停止ボタン206も提供されている。再生ボタン204はコンテンツ104の再生を開始させうるとき(再生開始前)に表示され、コンテンツ104が再生されているときには表示されない。再生/一時停止ボタン206には、コンテンツ104が再生されていないとき(その再生が一時停止中又は停止中のとき)に再生シンボルが表示され、コンテンツ104が再生中又はバッファリング中のときには図示しない一時停止シンボルが表示される。
FIG. 2 shows details of the
このメディアプレイヤ102では更にプログレスバー208が提供されている。このバー208はコンテンツ再生の進捗状況をユーザに知らせるためのバーであり、メディアコンテンツ104の始まり(バー208の左端)や終わり(バー208の右端)を基準にした時刻、フレーム数等を、その上のプログレスバー指示子210で指し示すように構成されている。また、この例では、コンテンツ104を所期速度で再生したときの残り再生時間を表示するカウントダウンタイマ212も使用されている。こうした残り時間指示子に代え、又はこれと共に、その始まりや終わりを基準にコンテンツ104の再生時間を表示するカウントアップタイマを使用することもできる。更に、このプレイヤ102ではボリューム操作子214が提供されているので、音声を含むコンテンツ104を再生する際に、その音声出力レベルを調整することができる。
The
そして、このメディアプレイヤ102ではその操作子として再生/一時停止ボタン204、再生ボタン206、プログレスバー208、プログレスバー指示子210、カウントダウンタイマ212及びボリューム操作子214のみが提供されているが、これとは異なる個数、異なる種類のメディアプレイヤ操作子を提供し、メディアコンテンツ104の再生制御に利用可能とすることもできる。例えば、一時停止専用のボタン、停止ボタン、再生/停止ボタン、メディア表示サイズ操作子、早送りボタン、巻き戻しボタン、経過時間指示子、カウントダウン指示子、経過時間/合計時間指示子等を、上掲の操作子204〜214と共に或いはそれに代えて使用することができる。
In the
図3に、ウェブページ内メディアコンテンツ再生兼再生監視用のウェブクローラの一例ブロック構成300を示す。このウェブクローラ300は、ウェブブラウザ302、画像ジェネレータ304、画像アナライザ306、メディアプレイヤコントローラ308及び署名ジェネレータ310を内包しており、様々なウェブサイトからウェブページを受信できるようインターネット上のWWW312に接続されている。例えば、ある種の処理プラットフォーム(図9に示した処理システム等)で実行されるソフトウェアモジュール、といった形態で、こうしたクローラ300を実現することができる。
FIG. 3 shows an
ウェブページ上でのメディアコンテンツ再生、例えば図1に示したウェブページ100上でのメディアコンテンツ104の再生を実行・監視するため、ウェブブラウザ302は、そのページ100を記述しているウェブページ情報をWWW312経由で受信、ロードする。ロードされるウェブページ情報は、HTMLコード、XMLコード、JavaScript(登録商標)コード等のコード乃至コンピュータ言語を用い、そのページ100を記述したものである。ブラウザ302としては、InternetExplorer(登録商標)等、そのウェブページ情報に基づく表示を実行可能な商用版乃至カスタム版のウェブブラウザソフトウェアを使用することができる。
In order to execute and monitor media content reproduction on a web page, for example, reproduction of
メディアコンテンツ104を含むウェブページ100を表示する場合、ウェブブラウザ302は、そのページ100でそのコンテンツ104に関連付けられているメディアプレイヤ、例えば図1に示したメディアプレイヤ102を実行、作動させる。コンテンツ104を再生(プレイヤ102を作動)させる動作は、ブラウザ302自体の動作、ブラウザプラグイン(ホストアプリケーションとやりとりして特定の機能を司るプログラム)、或いはそれらの併用で実現することができる。ブラウザ302は、更に、ウェブページ情報を画像ジェネレータ304及び画像アナライザ306に供給し、メディアプレイヤ情報、メディアコンテンツ情報又はその双方をジェネレータ304に供給する。WWW312からのウェブページ情報をブラウザ302とアナライザ306が同時並行的に受け取る構成にすることもできる。
When displaying the
画像ジェネレータ304は、ウェブブラウザ302から送られてきたウェブページ情報を用いウェブページ画像、即ちそのウェブページをモニタ上に表示させたときにユーザの目に映るであろう画像を生成する。画像ジェネレータ304は、そうしたウェブページ画像を、コンピュータ用モニタ、テレビジョン受像機等を初めとするメディア再生装置用ディスプレイのリフレッシュレートに相当する枚数に亘り生成する。画像の生成枚数乃至生成速度を適宜設定することで、画像アナライザ306におけるメディアコンテンツ及び操作子の検出や、署名ジェネレータ310におけるディジタル署名の生成を、好適に行えるようにすることができる。
The
画像アナライザ306は、画像ジェネレータ304にて生成されたウェブページ画像を受け取り画像処理技術を用いて解析することによって、そのウェブページ100についての情報、特にそのページ100で使用しているメディアプレイヤ102についての情報を取得する(議論の単純化のためある一種類のプレイヤ102をメディアコンテンツ104の再生に使用するページ100を例にするが、本明細書の他の個所でも述べているように、本発明の諸実施形態の方法及び装置はプレイヤ102を複数使用するウェブページにも適用することができる)。具体的には、アナライザ306は、ウェブブラウザ302によってロードされたページ100の初期状態を示すウェブページ画像を解析し、それによってプレイヤ102の存否及び位置を判別する。その判別のため、アナライザ306は、メディアコンテンツ表示エリア202の識別を試みると共に、プレイヤ102に係る操作子、例えば再生ボタン、一時停止ボタン、停止ボタン、再生/停止ボタン、再生/一時停止ボタン、ボリューム操作子、プログレスバー、メディア表示サイズ操作子、早送りボタン、巻き戻しボタン、経過時間指示子、カウントダウン指示子、経過時間/合計時間指示子等の識別を試みる。ここで例示した操作子全てを識別対象としてもよいし、ある特定の操作子(群)、例えば再生/一時停止ボタン206、停止ボタン、経過時間/合計時間指示子等だけを識別対象としてもよい。
The
画像アナライザ306では、その画像処理技術として、ヒントとの画像マッチングやエッジ検出を使用している。画像マッチングの目的はメディアプレイヤ102及びメディアコンテンツ表示エリア202の識別、エッジ検出の目的はメディアプレイヤ操作子の識別である。ヒントとしては、アナライザ306によるプレイヤ102やエリア202の識別に役立つものなら、どのような情報でも使用することができる。例えば、受け取ったウェブページ情報に含まれているHTML等のコード、既知の座標値、相連続する画像同士の比較結果、関連するネットワークトラフィック等からヒントを導出すればよい。関連するネットワークトラフィックの例としては、ウェブブラウザ302によるプラグイン呼出の際に発生するトラフィックがある(「Rectangle 20,20,100,100」等)。
The
ヒントを使用するのは、メディアプレイヤ102及びメディアコンテンツ表示エリア202を識別するとき、狙いとするエリア例えば202に焦点を合わせるためである。そのアルゴリズムの例を次の式
画像アナライザ306は、メディアプレイヤ102の位置、メディアコンテンツ表示エリア202の位置、並びにメディアプレイヤ操作子の位置及び機能を識別するだけでなく、そのプレイヤ102の状態も識別する。例えば、「メディアコンテンツ再生中」「メディアコンテンツ再生一時停止中」「メディアコンテンツ再生停止中」「メディアコンテンツ再生終了」「メディアコンテンツデータバッファリング中」「メディアプレイヤエラー発生中」等といったメディアプレイヤ状態を識別する。
The
それらのうち「メディアコンテンツ再生一時停止中」なるメディアプレイヤ状態は、そのメディアプレイヤ102がメディアコンテンツ104を能動的に再生していない状態のうち、その状態を解消するとコンテンツ再生中断個所(一時停止ボタンが押されたところ)とほぼ同じところからそのコンテンツ104の再生が再開される状態のことである。
Among them, the media player state “media content playback paused” is a state where the
「メディアコンテンツ再生停止中」なるメディアプレイヤ状態は、そのメディアプレイヤ102がメディアコンテンツ104を能動的に再生していない状態のうち、その状態を解消するとその始まりからコンテンツ104の再生が再開される状態のことである。
The media player state of “Media content playback stopped” is a state in which the playback of the
「メディアコンテンツ再生終了」なるメディアプレイヤ状態は、そのメディアプレイヤ102がメディアコンテンツ104を能動的に再生していない状態のうち、そのコンテンツ104の終わりで停止している状態のことである。
The media player state of “media content playback end” is a state where the
画像アナライザ306にこうした機能があるため、ウェブクローラ300では、メディアコンテンツ104が再生中か否かを判定することや、そのコンテンツ104の再生を開始又は停止させることや、そのコンテンツ104の再生が終了若しくは一時停止していること又はそのデータをバッファリング中であることを検出することや、そのコンテンツ104の再生中に生じた問題乃至エラーを検出することができる。
Since the
メディアプレイヤコントローラ308は、その画像アナライザ306から、メディアプレイヤ102に係るユーザ向け操作子情報を受け取る。そのユーザ向け操作子情報には、例えば、操作子の機能(再生/一時停止等)、ウェブページ内位置(x,y座標値等)、各種使用条件(プレイヤ102によるメディアコンテンツ104の再生を開始するタイミング等)といったものが含まれている。プレイヤ102を制御するため、コントローラ308はコマンド、例えば特定位置でのマウスクリック、特定キーの押下等のユーザ入力を模したコマンドをウェブブラウザ302に与える。ブラウザ302は、そのコマンドをユーザ入力と見なして実行する。従って、コントローラ308は、そうしたコマンド例えばマウスクリックコマンドによりブラウザ302に指令することで、アナライザ306によって再生ボタン206と識別されたエリア内がクリックされたと認識させることができ、ひいてはプレイヤ102にコンテンツ104の再生を開始させることができる。なお、これ以外のユーザ入力、ジェスチャ乃至コマンドも、コントローラ308にて擬似的に発生させることやブラウザ302に実行させることができる。
The
署名ジェネレータ310は、メディア情報を受け取り、再生中のメディアコンテンツ104向けにディジタル署名を生成する。このディジタル署名生成は、例えば、そのコンテンツ104を識別可能な一種類又は複数種類の数値を、そのコンテンツ104に含まれる音声、動画又はその双方に基づき発生させるものであれば、任意のアルゴリズムで実行することができる。メディアコンテンツアイデンティファイア314は、そうして生成されたディジタル署名に基づきコンテンツ104を識別する。この識別は、例えば、基準ディジタル署名を基準メディアコンテンツのライブラリに関連付けるデータベースを、受け取ったディジタル署名の少なくとも一部分で参照することによって実行する。即ち、アイデンティファイア314は、受け取ったディジタル署名と基準ディジタル署名を比較することで類似度を求める。求めた類似度のなかに所定のしきい値を上回っているものがある場合、そのコンテンツ104に関する類似度が最高であると識別される。
The
また、メディアプレイヤを使用するウェブページのなかには、そのページがウェブブラウザに全て又は一部ロードされた段階でそのプレイヤによるメディアコンテンツの再生が始まるもの(プレイヤがそのように設定されているもの)もある。画像アナライザ306は、メディアコンテンツ104の再生が始まっていることを、例えば、メディアコンテンツ表示エリア202内モーションを検出する、音声を検出する、再生/一時停止ボタン204が一時停止ポジションであることを検出する、そのページ100がコンテンツ104の再生を自動的に開始させるページであるとの予備知識を利用する、等といった手法で検出する。エリア202内モーションの検出は、例えば、複数枚のウェブページ画像を解析しエリア202内の変化を検出することで行う。音声の検出は、例えば、ウェブクローラ300がウェブブラウザ302から図示しないオーディオデバイス(バーチャルなものでもリアルなものでもよい)への音声フォーマット出力を検出することで行う。再生/一時停止ボタン204が一時停止ポジションであることの検出は、例えば、それまで
逆に、メディアコンテンツ104の再生が自動的に始まらない場合等、その再生が停止又は一時停止しているときには、ウェブクローラ300は、そのコンテンツ104を再生するための諸ステップを実行する。具体的には、メディアプレイヤ102の操作子が識別された後、メディアプレイヤ操作子情報及び再生情報を画像アナライザ306からメディアプレイヤコントローラ308へと送り、それらの情報に基づくコマンドをコントローラ308からウェブブラウザ302へと送ることで、そのコンテンツ104の再生を開始させる。
On the contrary, when the reproduction of the
このメディアコンテンツ再生はいずれ終了する。画像アナライザ306は、再生が終了したことを、再生/一時停止ボタン204に再生シンボルが表示されている、再生ボタン206が可視状態である、プログレスバー指示子210がプログレスバー208の端(例えば右端)にある、所定時間に亘り音声を検出できていない、カウントダウンタイマ212が0:00になっている、経過時間指示子と合計時間指示子が同じ値である、メディアコンテンツ表示エリア202内モーションが見られない、といった条件のうち1個又は複数個を判別することで検出する。アナライザ306は、再生が終了したことを検出したら、そのことを示す信号を署名ジェネレータ310に送る。ジェネレータ310は、それを受けて、そのメディアコンテンツ104向けにディジタル署名を生成するための諸ステップの実行を全て終了する。
This media content reproduction will eventually end. The
メディアコンテンツ再生は一時停止されることもある。一時停止されるのは、メディアプレイヤコントローラ308からその旨のコマンドが発せられたときだけである。ウェブクローラ300では、そのため、コントローラ308からのコマンドでメディアコンテンツ104の再生が一時停止されたとき、並びにその一時停止が解除されたときにその値が変化するようポーズ変数を定義しておき、監視に当たってはその値を参照する。なお、コントローラ308からのコマンドでコンテンツ104の再生が一時停止されるのは、例えば、署名ジェネレータ310ではメディアコンテンツ向けの署名をいちどきに1個ずつしか生成できないのに、ウェブページ100上に複数のメディアプレイヤ102,106がある場合である。
Media content playback may be paused. It is only paused when a command to that effect is issued from the
メディアコンテンツ再生は、更に、そのメディアコンテンツ104についてのデータバッファリングが一段落するまで中断されることもある。データがバッファリングされるのは、ストリーミングメディアの再生に中断が生じないようにするためである。メディアプレイヤにおけるバッファリングは、通常、接続速度、総再生時間、残り再生時間等を勘案して実行される。バッファリングする長さは、ダウンロード済データに再生終了分が追いつかないうちにメディアを再生し終えるのに、どの程度まで先取りすればよいかを推定することで定められる。例えば、再生したいメディアコンテンツ104が60秒のメディアクリップであり、そのコンテンツ104の後寄り55秒分をそのメディアプレイヤ102で55秒以内にダウンロードできそうなら、再生開始前にそのプレイヤ102でバッファリングされる長さを5秒とすればよい。しかし、コンテンツ104を得るためのデータ接続には遅延が生じることもある。そうした場合、そのコンテンツ104の終わりに辿り着く前に、そのプレイヤ102の許にあるデータが皆再生されてしまうこととなろう。この場合、プレイヤ102は、コンテンツ104のデータをある程度バッファリングしてからでないと、そのコンテンツ104の再生を再開することができない。プレイヤ102は、メディアコンテンツ表示エリア202内に「Buffering」(バッファリング中)なる語を表示させることで、自分がそうした状態にあることをユーザに通知する(後掲の図7を参照)。
Media content playback may also be interrupted until the data buffering for that
画像アナライザ306は、メディアコンテンツ表示エリア202か操作子エリアに「Buffering」なる語が表示されていること、音声の中断が所定時間以上続いていること、プログレスバー208の端部に達しているわけでもないのにプログレスバー指示子210が所定時間以上動いていないこと、データのバッファリングが進行中であることが例えばポップアップウィンドウを用いそのウェブサイトにて表示されたこと等のうち、一種類又は複数種類を検出することによって、そのメディアコンテンツ104に係るデータのバッファリングが進行中であることを検出する。
The
なお、データのバッファリングが進行中でメディアコンテンツ104が再生されていないときには、そのコンテンツ104を構成している音声も再生されないので、そのウェブクローラ300内でウェブブラウザ302の音声出力を監視することにより、メディアプレイヤ102の状態についての追加情報を取得し、そのコンテンツ104に係るデータのバッファリングが進行中か否かを調べることができる。同様に、画像ジェネレータ304から(概ね)連続的に送られてくる複数枚のウェブページ画像を画像アナライザ306にて相互比較することで、プログレスバー指示子210を監視し、その動きを検出することができる。更に、ウェブページ100上やプレイヤ102上でなされている表示のうち、そのコンテンツ104に係るデータのバッファリングが進行中であることを示す一種類又は複数種類の表示、例えばポップアップウィンドウによる表示を調べることでも、再生中にコンテンツ104のデータバッファリング状態を判別することができる。
Note that when data buffering is in progress and the
メディアコンテンツ再生は停止されることもある。ウェブクローラ300は、そのことを、メディアプレイヤコントローラ308から停止ボタン押下とのコマンドが発せられたこと、プログレスバー指示子210が所定時間以上に亘り動いていないこと、プログレスバー指示子210がプログレスバー208の端にあること、ウェブブラウザ302の音声出力が所定時間以上に亘り途絶えていること等のうち、1個又は複数個を検出することで検出する。
Media content playback may be stopped. The
そして、ウェブクローラ300は、例えば、メディアコンテンツ104の再生が成功裏に開始されたのにその再生が所期時間を経過しても終了していないことを検出することで、その再生に障害が生じていることを検出する。
For example, the
なお、図3に示したのはあくまで一例である。本件技術分野で習熟を積まれた方々(いわゆる当業者)には、それ以外の構成にすることが可能且つ有益であることをご理解頂けよう。例えば、メディアリサーチパネリストが所有するパーソナルコンピュータ(PC)上で、ウェブページ上のメディアコンテンツを識別・監視可能なソフトウェアアプリケーションを実行する、といった形態で、本発明を実施することができる。この形態では、そのPCを使用している一人又は複数人のパネリストが、そのソフトウェアによる識別・監視の結果を参照することができる。 Note that the example shown in FIG. 3 is merely an example. Those skilled in the art (so-called persons skilled in the art) will appreciate that other configurations are possible and beneficial. For example, the present invention can be implemented by executing a software application capable of identifying and monitoring media content on a web page on a personal computer (PC) owned by a media research panelist. In this form, one or more panelists using the PC can refer to the result of identification / monitoring by the software.
図4に、メディアコンテンツ402の再生開始を待っているメディアプレイヤ400の例を示す。図中のコンテンツ402は、音声を伴う2分(2:00)長のビデオクリップである。プレイヤ400にはユーザ向け操作子として再生/一時停止ボタン404、停止ボタン406、ボリューム操作子408、巻き戻しボタン410、早送りボタン412、経過時間指示子414、合計時間指示子416、プログレスバー418及びプログレスバー指示子420が設けられている。これ以外の構成、例えば経過時間指示子414及び合計時間指示子416を図2中の残り時間指示子212に置き換えた構成でも、本発明を実施することができる。
FIG. 4 shows an example of the
前述の通り、画像アナライザ306は、メディアコンテンツ402の再生が開始されていないことを、再生/一時停止ボタン404、経過時間指示子414及びプログレスバー指示子420に対する監視で検出する。この図では再生/一時停止ボタン404に再生シンボルが表示されており、経過時間指示子414による表示が「0:00」、即ちコンテンツ402の(ほぼ)始まりであることを示す表示となっており、そしてプログレスバー指示子420がプログレスバー418の始まり(左端)に位置している。
As described above, the
図5に、メディアコンテンツ402を再生しているメディアプレイヤ400の例を示す。図中のプレイヤ400はコンテンツ402を再生できるよう構成されており、図4のそれと同様の操作子404〜420を伴っている。図示例では、コンテンツ402の再生が進行中で、その開始から1分(1:00)が経過している。画像アナライザ306は、コンテンツ402がプレイヤ400で再生されていることを、コンテンツ402を構成する画像間の差異を検出する、再生/一時停止ボタン404に一時停止シンボルが表示されていることを検出する、経過時間指示子414に表示されている時間が0:00ではなく合計再生時間とも等しくないことを検出する、プログレスバー指示子420の位置変化を検出する、それらの任意の組合せを実行する、等の手法で検出する。こうした操作子利用型再生状態検出手法のうち一種類又は複数種類と併せ、コンテンツ402に係る音声出力を検出する手法を使用してもかまわない。
FIG. 5 shows an example of a
図6に、メディアコンテンツ400の再生を終了したメディアプレイヤ400の例を示す。このプレイヤ400にはコンテンツ402が関連付けられており、且つ図4に示したものと同様のユーザ向け操作子404〜420が付随している。画像アナライザ306は、プレイヤ400によるコンテンツ402の再生が終了していることを、コンテンツ402、プログレスバー指示子又はその双方に画像間変化が見られないことを検出する、再生/一時停止ボタン404に再生シンボルが表示されていることを検出する、経過時間指示子414と合計時間指示子416が同じ時間を表示していることを検出する、所定時間に亘り音声出力が途絶えていることを検出する、それらの任意の組合せを実行する等、個々の又は一連のウェブページ画像に対する解析を通じて検出する。
FIG. 6 shows an example of the
図7に、メディアコンテンツ402に係るデータをバッファリング中のメディアプレイヤ400の例を示す。このプレイヤ400にはコンテンツ402が関連付けられており、且つユーザ向け操作子404〜420が付随している。コンテンツ402に係るデータ又はその一部のバッファリングが進行中であるため、プレイヤ400は、バッファリング中であることを示す語「Buffering」を含むアラート422を表示している。表示する個所は、プレイヤ400又はその一部の上でもよいし、そのウェブページ100内の別の場所でもよい。図示の如く、このアラート422にはバッファリング進行度が付加されているので、ユーザは、その進行度表示を見ることで、プレイヤ400によるデータのバッファリングが一段落しコンテンツ402の再生を開始乃至再開できる状態になるまでのおおよその時間を知ることができる。画像アナライザ306は、プレイヤ400がコンテンツ402についてのデータバッファリングを進めていることを、語「Buffering」又はそれに類するアラート422をプレイヤ400又はウェブページ100から検出する、所定時間に亘り音声出力が途絶えていることを検出する、所定時間に亘りプログレスバー指示子420の位置が変化していないことを検出する、プレイヤ400によるデータバッファリングが進行中であることを示すその他の徴候をそのウェブサイトから検出する、それらの任意の組合せを実行する等の手法で検出する。
FIG. 7 shows an example of the
図8に、ウェブページ100で参照しているメディアコンテンツ104を再生及び再生監視する手順のフロー例800を示す。この図の手順800は様々な種類のプロセッサ、コントローラ乃至処理デバイスで実現可能である。例えば、この図の手順800を一群の命令コードで記述し、そのコード群をフラッシュメモリ等の有形媒体やRAM(random access memory)に保存・ロードし、対応するプロセッサ、例えば図9を参照して後述するプロセッサシステム900内のプロセッサ912で実行させることができる。また、この図の手順800は、ASIC、PLD(programmable logic device)、FPLD(field programmable logic device)、ディスクリート論理回路、ハードウェア、ファームウェア、手動操作、それらの任意の組合せ等の形態(例えばファームウェア、ソフトウェア、ハードウェア又はその組合せ)で実現することができる。そして、以下の説明ではこの図の手順800を参照するが、図3に示したウェブクローラ300を実現可能な手順はほかにも色々と提案することができる。例えば、諸ステップの実行順序を変えたものや、諸ステップに内容変更、削除、分割乃至結合を施したものや、それらを任意に組み合わせたものである。加えて、この図の手順を、複数の処理スレッド、プロセッサ、デバイス、回路等を使用し、パラレルに実行することもシーケンシャルに実行することもできる。
FIG. 8 shows an
この手順800では、まず、ウェブクローラ300が、ウェブページリストに登録されている1個又は複数個のウェブページのうち1個をロードする(ステップ802)。このリストは、それぞれ一種類又は複数種類のメディアプレイヤ及び識別対象となるメディアコンテンツを指定乃至参照しているウェブページのリストである。ロードされるのは、そうしたウェブページのうちいずれか、例えば図1A、図1B及び図2に示す如くメディアプレイヤ102又は108及びメディアコンテンツ104又は110を指定乃至参照しているウェブページ100である。クローラ300は、その一部たる画像ジェネレータ304を使用しウェブページ画像、即ちそのウェブページ100を表示装置等でユーザ向けに表示したときに現れるであろう画像を生成する(ステップ804)。
In this
画像アナライザ306は、その画像に基づきウェブページ100を解析することで、図2中にメディアコンテンツ表示エリア202として例示したメディアエリアや、それに付随する全てのユーザ向け操作子を識別する(ステップ806)。画像アナライザ306は、ユーザ向け操作子として周知のシンボルにマッチするパターンをエッジ検出アルゴリズムに則り検出することで、そうしたユーザ向け操作子、例えば再生
また、あるウェブページ100上で複数個のメディアプレイヤが使用されており、個々のプレイヤに互いに別の識別対象メディアコンテンツが関連付けられている場合、画像アナライザ306は、それら複数種類のプレイヤそれぞれのメディアコンテンツ表示エリア202及び操作子を識別する。署名ジェネレータがそれらのプレイヤのディジタル署名を生成しているときに抵触乃至競合が生じるのを避けるため、メディアプレイヤコントローラ308は、それらのプレイヤのうち1個又は複数個を停止させるようウェブブラウザに対し指令を与える。
When a plurality of media players are used on a
メディアコンテンツ表示エリア202やユーザ向け操作子の識別が済んだら(ステップ806)、画像アナライザ306は、そのメディアコンテンツ104の再生が既に開始されているか否かを判別する(ステップ808)。例えば、前述の如くウェブクローラ300の指示でコンテンツ104の再生が開始されている場合、アナライザ306は再生開始済と判別する。逆に、コンテンツ104を再生せよとの指示、即ち再生ボタン押下を装う指示がクローラ300から発せられていない場合、アナライザ306は、コンテンツ104の再生が始まっているか否かを、エリア202内モーションを探すこと、音声を検出すること、再生/一時停止ボタン204が一時停止ポジションか否かを調べること、或いはそのウェブページ100が前述の如くコンテンツ104を自動再生するページであるか否かに関する予備知識を利用することで判別する。判別の結果、メディアプレイヤ102によるコンテンツ102の再生が開始されていないとされた場合、クローラ300は、内蔵するメディアプレイヤコントローラ308を用いウェブブラウザ302に指令を与えてコンテンツ104の再生を開始させる(ステップ810)。
When the media
メディアコンテンツ104の再生が既に始まっている場合、画像アナライザ306は、一連のウェブページ画像を解析しメディア情報を署名ジェネレータ310に供給する。ジェネレータ310は、受け取ったメディア情報に基づきそのコンテンツ104向けのディジタル署名を生成する(ステップ812)。例えばそのコンテンツ104が音声と動画から構成されている場合、生成されるディジタル署名はそれら音声及び動画の一方又は双方に基づくものとなる。
If playback of
画像アナライザ306は、一連のウェブページ画像を解析してメディア情報を署名ジェネレータ310に供給するのと並行し、使用するメディアプレイヤ102の諸状態を監視する。アナライザ306は、その監視の結果に基づき、まずメディアコンテンツ104の再生が停止しているか否かを判別する(ステップ814)。例えば、語「Buffering」がメディアコンテンツ表示エリア202か操作子エリアに表示されていること、音声が所定時間に亘り中断していること、プログレスバー指示子210が所定時間に亘り動いていないこと、再生/一時停止ボタン204に再生シンボルが表示されていること、再生ボタン206が可視状態であること、プログレスバー指示子210がプログレスバー208の端部例えば右端にあること、カウントダウンタイマ212に0:00と表示されていること、経過時間指示子414と合計時間指示子416が同じ値を示していること、エリア202内モーションが見られないこと、コンテンツ104の再生が止まっていることを示すその他の徴候がそのウェブサイトから提供されていること等を検出したとき、そのコンテンツ104の再生が止まっているものと判別する。逆に、コンテンツ104の再生が止まっていない場合は、翻ってステップ812に示す処理が実行される。即ち、アナライザ306によるウェブページ画像解析やジェネレータ310に対するメディア情報供給が再実行される。
The
メディアコンテンツ104の再生が止まっている場合、画像アナライザ306は、そのコンテンツ104について、メディアプレイヤ102によるデータバッファリングが進行中であるか否かを監視結果に基づき判別する(ステップ816)。例えば、語「Buffering」がメディアコンテンツ表示エリア202又は操作子エリアに表示されていること、所定時間に亘り音声が途絶えていること、プログレスバー指示子210がプログレスバー208の端部以外の位置で所定時間に亘り静止していること、データバッファリングが進行中であることを示すその他の徴候がそのウェブサイトから示されていること、その任意の組合せ等を検出することでその判別を実行する。コンテンツ104についてプレイヤ102によるデータバッファリングが進行中である、とアナライザ306が判別した場合、アナライザ306の動作はステップ812に戻り、コンテンツ104に係るデータのバッファリングが進行中であるか否かの判別が再実行される。
When the reproduction of the
逆に、メディアプレイヤ102によるデータバッファリングが進行中でない、或いはメディアコンテンツ104に係るデータのバッファリングが終了している、と判別した場合、画像アナライザ306は、プレイヤ102によるコンテンツ104の再生が終了したか否かを判別する(ステップ818)。プレイヤ102によるコンテンツ104の再生が未終了の場合はステップ816に戻り、コンテンツ104向けにディジタル署名を生成する処理が再実行される。
Conversely, if it is determined that data buffering by the
メディアコンテンツ104の再生が終了したら、ウェブクローラ300は、そのコンテンツ104のディジタル署名でディジタル署名データベースを参照することでそのコンテンツ104を識別する(ステップ820)。これに代え、後刻の参照に備えウェブクローラ内にそのディジタル署名を保存しておく、そのディジタル署名を外部に送信して識別させる、その組合せ等の手法を使用してもよい。図示例のウェブクローラ300では、図3に示したメディアコンテンツアイデンティファイア316にメディアコンテンツ104の識別を行わせている。
When the reproduction of the
ウェブクローラ300は、更に、そのウェブページ100でほかにもメディアプレイヤが使用されているか否かを判別する(ステップ822)。ディジタル署名未生成のメディアコンテンツに係るメディアプレイヤが残っている場合は、ステップ808に戻り、そのメディアプレイヤ102によるメディアコンテンツの再生が既に開始されているか否かを判別する。そうしたメディアコンテンツに係るメディアプレイヤが残っていない場合は、ステップ824に進み、ウェブページリスト上にウェブページが残っていないか否かを判別する。ウェブページが残っている場合、ウェブクローラ300は、そのリストから次のウェブページを選出した後(ステップ826)ステップ802に戻ってそのウェブページをロードする。ウェブページリスト上にウェブページが残っていない場合(ステップ824)処理を終了する。
The
図9に、図3に示したウェブクローラ300を実現すること及び図8に示した手順800を実行することが可能な処理システムの例900を示す。この処理システム900は、RAM904、ROM(read only memory)906、フラッシュメモリ908等のメモリが接続されているプロセッサ902をバス912等のインタフェースに接続し、そのバス912に更にほかの部材を接続した構成を有している。図中、バス912に接続されているのは、入力装置914、表示装置916、大容量記憶装置918、リムーバブル記憶装置ドライブ920、ネットワークアダプタ922といった部材である。ドライブ920では、磁気記録媒体、光記録媒体等のうちそのドライブ920に相応しいリムーバブル記憶媒体924が使用されている。ネットワークアダプタ922はこのシステム900を外部ネットワーク926に接続している。
FIG. 9 illustrates an
こうした処理システム900は、例えば、既存のデスクトップPC、ノートPC、ワークステーションといった情報処理装置で実現することができる。そのプロセッサ902としては、Intel(登録商標)Pentium(登録商標)ファミリ、Intel(登録商標)Itanium(登録商標)ファミリ、Intel(登録商標)XScale(商標)ファミリ等に代表されるマイクロプロセッサを初め、様々な種類の処理ユニットを使用することができる。そのプロセッサ902に接続されるメモリ904、906及び908としては、そのシステム900に求められる記憶性能に見合った記憶容量のものである限り、あらゆる種類のメモリデバイスを使用することができる。例えば、フラッシュメモリ908として使用する不揮発性メモリは、ブロック単位でアクセス及び消去することが可能なタイプのものにするとよい。
Such a
入力装置914としては、キーボード、マウス、タッチスクリーン、トラックパッド、バーコードスキャナ等を使用することができる。ユーザからプロセッサ902への情報供給に使用可能であればこれ以外も使用できる。
As the
表示装置916としては、LCD(Liquid Crystal Display)モニタ、CRT(Cathode Ray Tube)モニタ等を使用することができる。プロセッサ902・ユーザ間インタフェースとして機能させうる装置ならこれ以外の装置でもよい。図中の表示装置916には、表示画面・プロセッサ902間連携に必要な様々なハードウェアも備わっている。
As the
大容量記憶装置918としては、従来からあるハードディスクドライブ等、プロセッサ902にとって可読な磁気記録媒体、光記録媒体、固体記憶媒体等を使用することができる。
As the
リムーバブル記憶装置ドライブ920としては、例えば、CD−R(compact disk-recordable)ドライブ、CD−RW(compact disk-rewritable)ドライブ、DVD(digital versatile disk)ドライブ等の光学ドライブを使用することができる。これに代え他種ドライブ、例えば磁気媒体ドライブ、固体USB(universal serial bus)メモリドライブ等も使用することができる。リムーバブル記憶媒体924としてはそのドライブ920と対をなすもの、即ちそのドライブ920で使用できるものを選択する。例えば、ドライブ920が光学ドライブならば、媒体924として使用されるのはCD−Rディスク、CD−RWディスク、DVDディスク等といった光ディスクのうち相応のものである。逆に、ドライブ920が磁気媒体ドライブならば、媒体924として使用されるのはディスケット等の磁気記録媒体のうち相応のものである。
As the removable
ネットワークアダプタ922としては、例えばEthernet(登録商標)アダプタ、無線LAN(local area network)アダプタ、電話モデム等を使用する。この処理システム900と他の処理システムとの間でネットワーク経由の通信を行えるようにする装置であれば、どのような他種装置でも使用することができる。外部ネットワーク926とは、例えばLAN、WAN(wide area network)、無線通信網等、処理システム900との通信が可能な様々なネットワークのことである。その例としては、インターネット、イントラネット、アドホックネットワーク等がある。
As the
以上、ソフトウェア乃至ファームウェア及びそれを実行するハードウェアを備えるシステムを例に本発明を説明してきたが、この構成は一例に過ぎないので、本発明をそうした構成のシステムに限定して捉えることのないよう留意して頂きたい。例えば、上述したハードウェアコンポーネント及びソフトウェアコンポーネントの一部又は全てを、専らハードウェアで実現することも、専らソフトウェアで実現することも、専らファームウェアで実現することも、ハードウェア、ファームウェア及びソフトウェアの任意の組合せで実現することもできる。即ち、いわゆる当業者であれば直ちに理解できるように、本願明細書で例示したシステム、方法及び媒体は、本発明のシステム、方法及び媒体を実現できる唯一の形態ではない。従って、本発明の技術的範囲は、本願にて例示した方法、装置及び媒体に限定されるものではなく、別紙特許請求の範囲における定義に文理的又は均等論的に該当する全ての方法、装置及び媒体に及ぶものである。 The present invention has been described above by taking the system including software or firmware and hardware that executes the software as an example. However, since this configuration is only an example, the present invention is not limited to a system having such a configuration. Please keep this in mind. For example, some or all of the hardware components and software components described above may be implemented exclusively in hardware, implemented exclusively in software, implemented exclusively in firmware, or any of hardware, firmware, and software. It can also be realized by a combination of That is, as can be readily appreciated by those skilled in the art, the systems, methods and media illustrated herein are not the only forms that can implement the systems, methods and media of the present invention. Therefore, the technical scope of the present invention is not limited to the method, apparatus and medium exemplified in the present application, but all methods and apparatus which fall literally or equivalently within the scope of the appended claims. And media.
Claims (81)
上記ウェブページの画像を処理することで上記メディアプレイヤに付随する操作子を識別するステップと、
上記操作子を利用し上記メディアコンテンツを提示するステップと、
を有するウェブページ内メディアコンテンツ提示方法。 Loading a web page using a media player and media content;
Identifying an operator associated with the media player by processing an image of the web page;
Presenting the media content using the operator;
A method for presenting media content in a web page.
上記画像に基づきメディアプレイヤ及びそれに付随する操作子を識別し、更にその操作子を利用し上記メディアコンテンツを提示するのに必要な情報を提供する画像アナライザと、
を備えるウェブページ内メディアコンテンツ提示装置。 An image generator that generates images based on web pages that use media content;
An image analyzer for identifying a media player and an operator associated therewith based on the image, and further providing information necessary for presenting the media content using the operator;
An in-web page media content presentation device comprising:
上記ウェブページの画像を処理することで上記メディアプレイヤに付随する操作子を識別するステップと、
上記操作子を利用し上記メディアコンテンツを提示するステップと、
を機械に実行させる機械可読命令群がその製造時に保存されている媒体。 Loading a web page using a media player and media content;
Identifying an operator associated with the media player by processing an image of the web page;
Presenting the media content using the operator;
A medium in which machine-readable instructions for causing a machine to execute are stored at the time of manufacture.
上記ウェブページの画像を処理することで上記メディアプレイヤに付随する操作子を検出するステップと、
上記画像を処理することで上記メディアプレイヤの状態を検出するステップと、
上記操作子、上記状態又はその双方の検出結果に基づき上記メディアプレイヤによる上記メディアコンテンツの再生を開始させるステップと、
を有するウェブページ内メディアコンテンツ再生方法。 Loading a web page that uses a media player;
Detecting an operator associated with the media player by processing an image of the web page;
Detecting the state of the media player by processing the image;
Starting the reproduction of the media content by the media player based on the detection result of the operation element, the state or both;
A method of reproducing media content in a web page having:
上記ウェブページの画像を生成する画像ジェネレータと、
上記画像に基づき上記メディアプレイヤ並びにそのメディアコンテンツ表示エリア及び操作子を識別する画像アナライザと、
を備えるウェブページ内メディアコンテンツ再生兼再生制御装置。 A web browser that loads a web page and activates a media player for use on the web page;
An image generator for generating an image of the web page;
An image analyzer that identifies the media player and its media content display area and controls based on the image;
An in-web page media content playback and playback control device.
上記ウェブページで使用されるメディアプレイヤの種類を検出するステップと、
上記メディアプレイヤに付随する操作子を1個又は複数個検出するステップと、
上記メディアプレイヤによるメディアコンテンツの再生を開始させるステップと、
上記メディアコンテンツの再生中に上記メディアプレイヤの状態を検出するステップと、
を機械に実行させる機械可読命令群がその製造時に保存されている媒体。 Loading a web page;
Detecting the type of media player used in the web page;
Detecting one or more operators associated with the media player;
Starting playback of media content by the media player;
Detecting the state of the media player during playback of the media content;
A medium in which machine-readable instructions for causing a machine to execute are stored at the time of manufacture.
ウェブページの画像を生成するステップと、
上記画像を処理することで第1及び第2メディアプレイヤ並びに第1及び第2メディアコンテンツを検出するステップと、
上記画像を処理することで上記第1及び第2メディアプレイヤそれぞれに付随する操作子を各少なくとも1個検出するステップと、
上記第1メディアコンテンツを再生させるステップと、
上記第2メディアコンテンツを再生させるステップと、
を有する方法。 A method for controlling a plurality of media players each associated with media content comprising:
Generating an image of a web page;
Detecting first and second media players and first and second media content by processing the image;
Detecting at least one operator associated with each of the first and second media players by processing the image;
Playing back the first media content;
Playing back the second media content;
Having a method.
上記画像を解析することで第1及び第2メディアプレイヤ並びに第1及び第2メディアコンテンツを検出するステップと、
上記画像を解析することで上記第1及び第2メディアプレイヤそれぞれに付随する操作子を各少なくとも1個検出するステップと、
上記第1メディアコンテンツを再生させるステップと、
上記第2メディアコンテンツを再生させるステップと、
を実行することで、それぞれメディアコンテンツに関連付けられている複数のメディアプレイヤを制御するよう製造された媒体。 Generating an image of a web page;
Detecting the first and second media players and the first and second media contents by analyzing the image;
Detecting at least one operator associated with each of the first and second media players by analyzing the image;
Playing back the first media content;
Playing back the second media content;
Media manufactured to control a plurality of media players each associated with a media content.
ウェブページの画像を生成する画像ジェネレータと、
上記画像を解析することで、第1及び第2メディアプレイヤ並びに第1及び第2メディアコンテンツを検出し、当該第1及び第2メディアプレイヤそれぞれに付随する操作子を各少なくとも1個検出する画像アナライザと、
上記第1及び第2メディアコンテンツを再生させるメディアプレイヤコントローラと、
を備える装置。 An apparatus for controlling a plurality of media players each associated with a media content,
An image generator that generates images of web pages;
An image analyzer that detects the first and second media players and the first and second media contents by analyzing the image and detects at least one operator associated with each of the first and second media players. When,
A media player controller for reproducing the first and second media contents;
A device comprising:
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/US2008/059783 WO2009126152A1 (en) | 2008-04-09 | 2008-04-09 | Methods and apparatus to play and control playing of media content in a web page |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011520324A true JP2011520324A (en) | 2011-07-14 |
Family
ID=39596406
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011503955A Pending JP2011520324A (en) | 2008-04-09 | 2008-04-09 | Method and apparatus for media content playback and playback control in web page |
Country Status (4)
Country | Link |
---|---|
EP (1) | EP2281247A1 (en) |
JP (1) | JP2011520324A (en) |
AU (1) | AU2008354332B2 (en) |
WO (1) | WO2009126152A1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20140051065A (en) * | 2012-10-19 | 2014-04-30 | 한국전자통신연구원 | Method for proof of play in digital signage systems |
JP2017021843A (en) * | 2012-04-10 | 2017-01-26 | スポティファイ アーベー | Systems and methods for controlling local applications through web pages |
JP2017505036A (en) * | 2014-09-09 | 2017-02-09 | バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド | Video advertisement filtering method, apparatus and equipment |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10142687B2 (en) | 2010-11-07 | 2018-11-27 | Symphony Advanced Media, Inc. | Audience content exposure monitoring apparatuses, methods and systems |
US8607295B2 (en) | 2011-07-06 | 2013-12-10 | Symphony Advanced Media | Media content synchronized advertising platform methods |
CN104967909A (en) * | 2014-09-19 | 2015-10-07 | 腾讯科技(深圳)有限公司 | Page video play method and page video play apparatus |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002047467A2 (en) * | 2000-10-24 | 2002-06-20 | Singingfish.Com, Inc. | Method of sizing an embedded media player page |
JP2004157907A (en) * | 2002-11-08 | 2004-06-03 | Okayama Prefecture | Program for displaying link on computer for reproducing moving image |
WO2005043288A2 (en) * | 2003-10-22 | 2005-05-12 | Instant Media, Inc. | Media player and access system and method and media player operating system architecture |
WO2006058075A2 (en) * | 2004-11-22 | 2006-06-01 | Truveo, Inc. | Method and apparatus for an application crawler |
WO2007018102A1 (en) * | 2005-08-11 | 2007-02-15 | Matsushita Electric Industrial Co., Ltd. | Mobile information device and mobile information device display method |
JP2008171039A (en) * | 2007-01-05 | 2008-07-24 | Ants:Kk | Method and program for making object displayed on web browser seem to be extracted from web browser |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6263507B1 (en) * | 1996-12-05 | 2001-07-17 | Interval Research Corporation | Browser for use in navigating a body of information, with particular application to browsing information represented by audiovisual data |
WO2008021459A2 (en) * | 2006-08-17 | 2008-02-21 | Anchorfree, Inc. | Software web crawlwer and method thereof |
-
2008
- 2008-04-09 AU AU2008354332A patent/AU2008354332B2/en not_active Ceased
- 2008-04-09 JP JP2011503955A patent/JP2011520324A/en active Pending
- 2008-04-09 EP EP08745395A patent/EP2281247A1/en not_active Withdrawn
- 2008-04-09 WO PCT/US2008/059783 patent/WO2009126152A1/en active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002047467A2 (en) * | 2000-10-24 | 2002-06-20 | Singingfish.Com, Inc. | Method of sizing an embedded media player page |
JP2004157907A (en) * | 2002-11-08 | 2004-06-03 | Okayama Prefecture | Program for displaying link on computer for reproducing moving image |
WO2005043288A2 (en) * | 2003-10-22 | 2005-05-12 | Instant Media, Inc. | Media player and access system and method and media player operating system architecture |
WO2006058075A2 (en) * | 2004-11-22 | 2006-06-01 | Truveo, Inc. | Method and apparatus for an application crawler |
WO2007018102A1 (en) * | 2005-08-11 | 2007-02-15 | Matsushita Electric Industrial Co., Ltd. | Mobile information device and mobile information device display method |
JP2008171039A (en) * | 2007-01-05 | 2008-07-24 | Ants:Kk | Method and program for making object displayed on web browser seem to be extracted from web browser |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017021843A (en) * | 2012-04-10 | 2017-01-26 | スポティファイ アーベー | Systems and methods for controlling local applications through web pages |
US9935944B2 (en) | 2012-04-10 | 2018-04-03 | Spotify Ab | Systems and methods for controlling a local application through a web page |
US10397219B2 (en) | 2012-04-10 | 2019-08-27 | Spotify Ab | Systems and methods for controlling a local application through a web page |
US10999271B2 (en) | 2012-04-10 | 2021-05-04 | Spotify Ab | Systems and methods for controlling a local application through a web page |
US11775355B2 (en) | 2012-04-10 | 2023-10-03 | Spotify Ab | Systems and methods for controlling a local application through a web page |
KR20140051065A (en) * | 2012-10-19 | 2014-04-30 | 한국전자통신연구원 | Method for proof of play in digital signage systems |
KR102029740B1 (en) * | 2012-10-19 | 2019-10-08 | 한국전자통신연구원 | Method for proof of play in digital signage systems |
JP2017505036A (en) * | 2014-09-09 | 2017-02-09 | バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド | Video advertisement filtering method, apparatus and equipment |
Also Published As
Publication number | Publication date |
---|---|
EP2281247A1 (en) | 2011-02-09 |
AU2008354332B2 (en) | 2013-04-18 |
WO2009126152A1 (en) | 2009-10-15 |
AU2008354332A1 (en) | 2009-10-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9639531B2 (en) | Methods and apparatus to play and control playing of media in a web page | |
US9360941B2 (en) | Information processing apparatus, projection system, and information processing method | |
CN109754288B (en) | Advertisement page playing method and device, storage medium and computer equipment | |
US8020084B2 (en) | Synchronization aspects of interactive multimedia presentation management | |
JP2011520324A (en) | Method and apparatus for media content playback and playback control in web page | |
JP2009153115A (en) | Method, apparatus and system for displaying video data | |
US8621280B2 (en) | Failure reproducing apparatus and failure reproducing method | |
KR101938203B1 (en) | Apparatus for integrally managing of error generating of hardware and software in computer system | |
US20160088343A1 (en) | Renderable content partitioning and portability | |
KR20160029754A (en) | Software failure locating method, apparatus and equipment | |
JP2023521199A (en) | Video stream playback control method, device and storage medium | |
US20150312369A1 (en) | Checkpoints for media buffering | |
WO2001076250A1 (en) | Streaming multimedia information | |
CN110502416A (en) | Using Caton detection method, device, computer equipment and readable medium | |
KR20170138367A (en) | A method of collectively managing the occurrence of errors in the hardware included in the computer system and performing backup and recovery to inform the external terminal | |
US11361797B2 (en) | Moving image reproduction apparatus, moving image reproduction method, moving image reproduction system, and storage medium | |
JP2015046758A (en) | Information processor, information processing method, and program | |
CN110569184B (en) | Test method and terminal equipment | |
JP2014153990A (en) | Information processing apparatus, information processing method, and program | |
KR101938202B1 (en) | A method of collectively managing the occurrence of errors in the hardware included in the computer system and performing backup and recovery to inform the external terminal | |
US20170249057A1 (en) | Executable code in a media file | |
KR101793263B1 (en) | A method of collectively managing the occurrence of errors in the hardware included in the computer system and performing backup and recovery to inform the external terminal | |
AU2013203736B2 (en) | Methods and apparatus to play and control playing of media content in a web page | |
EP3258701A1 (en) | Playback of multi-period media | |
US20210112310A1 (en) | Schedule management method for playback device and schedule management system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120417 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20120711 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20120719 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20120814 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20120821 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120912 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130219 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20130513 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20130520 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20130813 |