JP2011527527A - 商品情報のタグ付け - Google Patents

Abstract

本発明は、動画像または静止画像内に現れるアイテム（２０１，２０２）にタグを付すことを可能にする方法及びシステムであって、タグを付すアイテムにまたはアイテム中に識別デバイス（２０３）を設け、タグを付すアイテムの画像を含む動画像の一場面を取り込み、動画像の一場面の各フレーム内における識別デバイス（２０３）の存在及び位置を検出して、動画像のフレーム内におけるタグを付すアイテムの位置を特定することを特徴とする。動画像を保存または送信する際に、識別デバイス（２０３）の位置を自動的に特定することで、識別デバイスを設けたアイテムまたは識別デバイスを中に設けたアイテムと、適切なタグを自動的に関連付けることができる。本発明は、スポーツイベント、音楽イベント、市民イベント、ドラマ、映画その他の番組または報道を含むがこれに限られない生または録画放送において、該スポーツ、イベント、番組または報道内の数的資料及びまたはスポンサーロゴ及びまたは情報／商品情報を提供する目的で、アイテムにタグを付すことに用いることができる。
【選択図】 図６

Description

本発明は、動画像（moving images）及び／または静止画像（paused images）上にタグ（tags）の形式で商品情報を提供する方法に関するものである。

同時係属中（co-pending）の我々の出願ＰＣＴ／ＧＢ２００８／０００７０６（特許文献１）には、観者（viewers）に商品情報を提供する方法及びシステムが開示されている。このシステムでは、動画像と並んで（alongside）または動画像の上に（over）ディスプレイ表示（displayed）された１以上の視覚的に表され且つ観者によって選択可能なタグ手段によって、付加情報（additional information）を提供する。観者によっていずれか１つのタグが選択されたことを検出すると、動画像の再生が一時停止され、該静止画像または動画像の上に、選択されたタグに関連する付加情報がディスプレイ表示される。付加情報は、対応する商品を直接注文可能な商品の購入オプションを含んでいてもよい。

ＰＣＴ／ＧＢ２００８／０００７０６

このような機能を提供するためには、タグを付すアイテム（items）が出現するところに、手動で動画像にタグを付す（tag）必要がある。タグを付すアイテムが多い場合や、タグを付すアイテムがたくさんのシーンで出現する場合が典型的であるが、この作業は骨の折れる（laborious）、時間のかかる（time consuming）、費用のかかる（costly undertaking）作業である。

本発明の目的は、これら問題点を少なくとも一部軽減（alleviate）または解消する（overcome）システム及び方法を提供することにある。

本発明の第１の態様によれば、動画像または静止画像内に現れるアイテムにタグを付すことを可能にする方法であって、タグを付すアイテムにまたはアイテム中に識別デバイス（identification device）を設ける（providing）ステップと、タグを付すアイテムの画像を含む動画像の一場面(footage)を取り込む（capturing）ステップと、動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出して（detecting）、動画像のフレーム内におけるタグを付すアイテムの位置を特定する（determining）ステップとからなることを特徴とするタグ付与方法が提供されている。

動画像を保存または送信する際に、識別デバイスの位置を自動的に特定することで、識別デバイスを設けたアイテムまたは識別デバイスを中に設けたアイテムと、適切なタグを自動的に関連付ける（associate）ことができる。そのため、タグを付すプロセスのうち、相当な部分を自動化することができ、時間及び費用を削減することができる。

フレーム内の識別デバイスを識別するプロセスを自動化することで、本発明は、スポーツイベント（sports events）、音楽イベント（music events）、市民イベント（civic events）、ドラマ（dramas）、映画（films）その他の番組または報道（reports）を含むがこれに限られない生放送（live broadcasts）または録画放送（pre-recorded broadcasts）において、該スポーツ、イベント、番組または報道内の数的資料（statistics）及びまたはスポンサーロゴ及びまたは情報／商品情報を提供する目的で、アイテムにタグを付すことに用いることができる。

フレーム内の識別デバイスを識別するプロセスを自動化することで、本発明は、上述の動画像内の商品にタグを付すプロセスに適用することができる。

誤解を避けるために、動画像（moving image）の用語は、２Ｄ及び３Ｄの両方を含み、例えば、ビデオ映像（video footage）、映画映像（movie footage）、テレビ画像（television pictures）、アニメーション、コンピュータによって生成された画像などのものを含む。動画像は、無声（silent）であっても、サウンドトラックを伴ってもよい。動画像は、どのような適切なフォーマットのデジタル動画像ファイル（ＤＶＤやＢｌｕ−Ｒａｙのエンコードに用いられる標準フォーマットを含むが、これに限られるものではない）、動画像放送（moving image broadcast）、インターネットを介してストリーミングされる動画像またはビデオテープやフィルムリールなどのアナログ動画像記録媒体（analogue moving image record）を含んでもよい。

本発明によるタグ付与方法は、更に、タグを付すアイテムの動作軌跡（motion track）を特定するステップを含んでもよい。動作軌跡にタグを付してもよい。動作軌跡は、画像の上にディスプレイ表示されてもよい。このことにより、人間であるオペレータがその正確性を確かめることができる。不一致（false matches）や誤認識を減らすために、本発明の方法は、前のフレーム内におけるアイテムの位置と隣接する位置のみ識別を行うように制限（constrain）してもよい。動作軌跡が誤っていた場合、オペレータは動作軌跡を調整することができる。動作軌跡の調整は、マウス、トラックボール（trackball）、タッチパッド（touch pad）またはタッチスクリーン（touch screen）システムを含むがこれに限られるものではない制御入力手段（control input means）によって行うことが可能である。

再生中、タグは、ディスプレイにアイテムが表示されている間、見えるようになっていてもよく、断続的または観者の要求によって見えるようになってもよい。

選択したアイテムに、１以上の識別デバイスを設けておくことも可能である。１または各識別デバイスは、固有に識別可能にしておくことができる。このような状況において、画像を取り込む前に、１または各識別デバイスを、特定のアイテムに割り当てておくことができる。このようにしておけば、アイテムに関する情報を、動画像内のアイテムに適用されたタグに自動的に割り当てることが可能になる。

１または各識別デバイスは、色、形、パターンその他の検出可能な画像の特性（image property）によって識別できればよい。識別デバイスは、視覚的な特徴を有するエレメント（element）または電磁スペクトルの別の領域において特徴的な態様（distinctive appearance）を有するエレメントであってもよい。個々の識別デバイスを識別するために、特徴的な態様を用いることができる。特徴的な態様は、可視光の領域においては明瞭でないかもしれないが、赤外線や紫外線の領域において明確に区別することができる。特徴的な態様は、パターンまたは比較的明るい単色部分であってもよい。典型的には、特有なエレメントは、可視光、ＲＦ、赤外線または紫外線信号を反射及び／または発信（emit）するものであってもよい。信号は、ほぼ連続的または断続的であってもよい。もし信号が断続的なものである場合、個々の識別デバイスを識別すること及びそのデバイスについてのさらなる情報、位置または態様を提供することに使用することができる。ＲＦ、紫外線または赤外線信号の実施例では、動画像を取り込むのに用いる手段は、可視光の領域ではなく、電磁放射線を検出することが可能な手段を装備していてればよい。典型的には、動画像を取り込むのに用いる手段は、取り込まれた画像内の識別デバイスの位置を特定することができるように、異なるスペクトル領域で同じ画像エリアを取り込むように動作してもよい。

実施例によっては、識別デバイス、または、画像内の選択されたアイテムの位置は、第２の画像（second image）を用いて特定することが可能である。第２の画像は、識別デバイスの特有のエレメント（distinctive elements）を明瞭に（clealy）示すようになっている。第２の画像は、従来のセンシング・アレイ（sensing array）と別個に（separately to）、隣接して（adjacent to）または散在させて（interspersed with）または混在させて（incorporated with）設けられた、専用の（dedicated）付加的センシング・アレイによって作成されてもよい。付加的センシング・アレイは、第２の画像内における特有のエレメントの明瞭さを強調するために、物理的（physical）またはデジタル・フィルタリング（digital filtering）を条件にしてもよい。付加的にまたは代わりに、第２の画像は、従来のセンシング・アレイの出力をデジタル・フィルタリングすることで作成されていてもよい。

タグの付与が完了した後に、識別デバイスが取り込まれた動画像を損ねる（detracts）または動画像ファイル内に映り込んでいる場合には、最終的な動画像から識別デバイスの可視的な形跡を除去するために適切なポストプロダクション技術（post production techniques）を適用してもよい。

ＲＦを発信する識別デバイスを組み入れた実施例では、識別デバイスの位置を追跡する（track）ために２以上のＲＦ受信機（RF receivers）が設けられていてもよい。必要ならば、１以上のＲＦブースター（RF booster）またはリレーステーション（relay stations）を設けておいてもよい。このようにすれば、距離の離れた場所でも識別デバイスを認識及び位置を特定できる。

動画像の一場面の各フレーム内の識別デバイスの位置は、適切な演算処理装置（processing unit）によって特定される。演算処理装置は、動画像の一場面を取り込むのに用いる手段のそれぞれと追跡手段のそれぞれと通信を行っていてもよい。

演算処理装置は、ユーザが操作可能な制御手段（user actuable controls）を備えていてもよい。制御手段は、動画像内の複数の識別デバイスのうち、どの識別デバイスにタグを付するかをユーザが選択することを可能にしてもよい。制御手段は、タグに関連付けられた情報を変更することも可能にしてよい。典型的には、情報は、専用のデータベースから検索されてもよい。付加的にまたは代わりに、情報は、演算処理装置によって生成されてもよい。

本発明の第２の態様によれば、動画像内に現れるアイテムにタグを付すことを可能にする方法であって、タグを付すアイテムにまたはアイテム中に識別デバイスを設けるステップと、タグを付すアイテムの画像を含む動画像の一場面を取り込むステップと、動画像の一場面を取り込むのに用いる手段の位置を特定するステップと、識別デバイスの位置を特定するステップと、動画像の一場面を取り込むのに用いる手段と識別デバイスの相対的な位置を特定して、タグを付すアイテムがフレーム内にあるか否かを特定し、タグを付すアイテムがフレーム内にある場合には、タグを付すアイテムがフレーム内における位置を特定するステップとからなることを特徴とするタグ付与方法が提供されている。

本発明の第２の態様の方法は、必要なだけまた望ましいだけ、本発明の第１の態様の方法の特徴を一部または全部含んでいてもよい。

この方法は、一度に２以上の識別デバイスの位置を特定することに使用することが可能である。この方法は、一度に２以上の動画像の一場面を取り込むのに用いる手段の位置を特定することに使用することが可能である。

動画像の一場面を取り込むのに用いる手段の位置は、予め決められていてよい。代わりに、動画像の一場面を取り込むのに用いる手段の位置は、追跡されてもよい。動画像の一場面を取り込むのに用いる手段の向き及び／または傾斜角は、予め決められている、または、追跡されてもよい。動画像の一場面を取り込むのに用いる手段の位置の追跡は、動画像の一場面を取り込むのに用いた手段に識別デバイスを取り付けることで達成される。

識別デバイスの位置は、追跡手段（tracking means）によって特定される。追跡手段は、動画像の一場面を取り込むのに用いる手段に組み込まれているか、または、別個に設けられていてもよい。好ましい実施例では、追跡手段は、動画像の一場面を取り込む領域内またはその周りの固定された予め定められた位置に設けられている。

識別デバイスは、追跡手段によって受信可能なＲＦ信号を発信することが可能であってもよい。１以上の識別デバイスが設けられている場合、各識別デバイスには、固有の識別コードが与えられていてもよい。識別デバイスは、望ましい場合には、衣服やその他の備品の中に隠されるようになっている。

代わりの実施例では、識別デバイスは、外部からの信号を受信し、関連する情報を追跡デバイスに送信するようになっていてもよい。このことによって、識別デバイスは、ＧＰＳなどの既存の位置特定システムを使用するようになっており、自身の位置を特定する、または、識別デバイスの位置を追跡デバイスが特定するために十分な情報を提供してもよい。

動画像の一場面を取り込むのに用いる手段はカメラであってもよい。典型的には、デジタルまたはアナログの動画像用カメラまたはテレビカメラであってもよい。動画像の一場面を取り込むのに用いる手段には、傾斜角、向き、及び視界の範囲を特定する１以上のセンサが設けられていることが望ましい。

動画像の一場面の各フレーム内の識別デバイスの位置は、適切な演算処理装置によって特定される。演算処理装置は、動画像の一場面を取り込むのに用いる手段のそれぞれと追跡手段のそれぞれと通信を行っていてもよい。

演算処理装置は、ユーザが操作可能な制御手段を備えていてもよい。制御手段は、動画像内の複数の識別デバイスのうち、どの識別デバイスにタグを付するかをユーザが選択することを可能にしてもよい。制御手段は、タグに関連付けられた情報を変更することも可能にしてよい。典型的には、情報は、専用のデータベースから検索されてもよい。付加的にまたは代わりに、情報は、演算処理装置によって生成されてもよい。

この方法は、典型的には、制限された競技空間内で行われるスポーツイベントの一場面を取り込むのに適用される。その場合、１以上の追跡手段を、制限された競技空間内またはその周りに設ける。付加的に、１以上の動画像の一場面を取り込む手段を制限された競技空間内またはその周りに設けることができる。

本発明の第３の態様によれば、動画像または静止画像内に現れるアイテムにタグを付すことを可能にすることに適しており、且つ、本発明の第１または第２の形態を実施可能なシステムであって、タグを付すアイテムの画像を含む動画像の一場面を取り込む手段と、動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出し、動画像のフレーム内におけるタグを付すアイテムの位置を特定する手段とからなることを特徴とするタグ付与システムが提供されている。

本発明の第３の態様のシステムは、望ましいだけまた適切なだけ、本発明の第１及び第２の態様の特徴を一部または全部含んでいてもよい。

実施例によっては、識別デバイス、または、画像内の選択されたアイテムの位置は、第２の画像を用いて特定することが可能である。第２の画像は、識別デバイスの特有のエレメントを明瞭に示すようになっている。第２の画像は、従来のセンシング・アレイと別個に、隣接してまたは散在させてまたは混在させて設けられた、専用の付加的センシング・アレイによって作成されてもよい。付加的センシング・アレイは、第２の画像内における特有のエレメントの明瞭さを強調するために、物理的またはデジタル・フィルタリングを条件にしてもよい。付加的にまたは代わりに、第２の画像は、従来のセンシング・アレイの出力をデジタル・フィルタリングすることで作成されていてもよい。

動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出する手段は、動画像の一場面を取り込むのに用いる手段の位置を特定する手段と、識別デバイスの位置を特定する手段と、動画像の一場面を取り込むのに用いる手段と識別デバイスの相対的な位置を特定し、タグを付すアイテムがフレーム内にあるか否かを特定し、タグを付すアイテムがフレーム内にある場合には、フレーム内におけるタグを付すアイテムが位置を特定する手段とからなる。

動画像の一場面を取り込むのに用いる手段の位置は、予め決められていてよい。代わりに、動画像の一場面を取り込むのに用いる手段の位置は、追跡されてもよい。動画像の一場面を取り込むのに用いる手段の向き及び／または傾斜角は、予め決められている、または、追跡されてもよい。動画像の一場面を取り込むのに用いる手段の位置の追跡は、動画像の一場面を取り込むのに用いた手段に識別デバイスを取り付けることで達成される。

識別デバイスの位置は、追跡手段によって特定される。追跡手段は、動画像の一場面を取り込むのに用いる手段に組み込まれているか、または、別個に設けられていてもよい。好ましい実施例では、追跡手段は、動画像の一場面を取り込む領域内またはその周りの固定された予め定められた位置に設けられている。

識別デバイスは、追跡手段によって受信可能なＲＦ信号を発信することが可能であってもよい。１以上の識別デバイスが設けられている場合、各識別デバイスには、固有の識別コードが与えられていてもよい。識別デバイスは、望ましい場合には、衣服やその他の備品の中に隠されるようになっている。

代わりの実施例では、識別デバイスは、外部からの信号を受信し、関連する情報を追跡デバイスに送信するようになっていてもよい。このことによって、識別デバイスは、ＧＰＳなどの既存の位置特定システムを使用するようになっており、自身の位置を特定する、または、識別デバイスの位置を追跡デバイスが特定するために十分な情報を提供してもよい。

動画像の一場面の各フレーム内の識別デバイスの位置は、適切な演算処理装置によって特定される。演算処理装置は、動画像の一場面を取り込むのに用いる手段のそれぞれと追跡手段のそれぞれと通信を行っていてもよい。

演算処理装置は、ユーザが操作可能な制御手段を備えていてもよい。制御手段は、動画像内の複数の識別デバイスのうち、どの識別デバイスにタグを付するかをユーザが選択することを可能にしてもよい。制御手段は、タグに関連付けられた情報を変更することも可能にしてよい。典型的には、情報は、専用のデータベースから検索されてもよい。付加的にまたは代わりに、情報は、演算処理装置によって生成されてもよい。

システムは、さらに、取り込まれた動画像をディスプレイ表示し、ディスプレイ表示された取り込まれた画像内のタグを付することが可能なアイテムの存在を示す手段と、示されたアイテムの選択及びタグの付与を可能にするユーザが操作可能な入力手段と、選択したアイテムのフレーム間の動作の軌道（motion path）を追跡するオブジェクト認識手段とを備えていてもよい。

本発明の第４の態様によれば、本発明で使用することに適している識別デバイスであって、アイテムに識別デバイスを取り付けるための取付手段と、識別デバイスを識別するために適切に装備された動画像用カメラ（moving image camera）によって検出可能であり、且つ、取り込まれた画像内の識別デバイスの位置を特定するための特有なエレメントとから構成されていることを特徴とする識別デバイスが提供されている。

本発明の第４の態様の識別デバイスは、望ましいだけまた適切なだけ、本発明の第１、第２及び第３の態様の特徴を一部または全部含んでいてもよい。

取付手段は、どのような適切な手段であってもよく、ネジ（screw fasteners）、ピン（pins）、釘（nails）、クリップ（clips）、接着剤（adhesives）、接着テープ（adhesive tapes）または面ファスナー（hock and loop fabrics）を含むが、これらに限られるものではない。付加的または代わりに、識別デバイスは、アイテムの製造時に取り付けられる、または、組み込まれてもよい。

特有なエレメントは、視覚的な特徴を有するエレメントまたは電磁スペクトルの別の領域において特徴的な態様を有するエレメントであってよい。特徴的な態様または信号は、固有の識別デバイスを識別するのに使用することができる。特徴的な態様または信号は、スペクトルの可視光の領域では明瞭でないかもしれない。特徴的な態様の場合、態様は、パターンまたは比較的明るい単色部分であってもよい。特徴的な信号の場合、信号は、可視光、ＲＦ、赤外線または紫外線信号であってもよい。信号は、ほぼ連続的または断続的であってもよい。信号が断続的なものである場合、信号を用いて固有の識別デバイスを識別することに使用することができる。そのような場合、可視光領域ではなく、電磁放射線を検出することが可能な手段をカメラに装備しておけばよい。典型的には、カメラは、取り込まれた画像内の識別デバイスの位置を特定することができるように、異なるスペクトル領域で同じ画像エリアを取り込むように動作してもよい。

識別デバイスは、追跡手段によって受信可能なＲＦ信号を発信することが可能であってもよい。１以上の識別デバイスが設けられている場合、各識別デバイスには、固有の識別コードが与えられていてもよい。識別デバイスは、望ましい場合には、衣服やその他の備品の中に隠されるようになっている。

代わりの実施例では、識別デバイスは、外部からの信号を受信し、関連する情報を追跡デバイスに送信するようになっていてもよい。このことによって、識別デバイスは、ＧＰＳなどの既存の位置特定システムを使用するようになっており、自身の位置を特定する、または、識別デバイスの位置を追跡デバイスが特定するために十分な情報を提供してもよい。

本発明の第５の態様によれば、本発明の様々な態様（aspects）に適した動画像用カメラであって、画像を取り込む画像取込手段と、取り込まれた画像内において本発明の第４の態様による識別デバイスを検出し、識別し及び位置を特定する識別手段とを備えていることを特徴とする動画像用カメラが提供されている。

本発明の第５の態様のカメラは、望ましいだけまた適切なだけ、本発明の第１、第２、第３及び第４の態様の特徴を一部または全部含んでいてもよい。

第２の画像を用いて識別デバイスの位置または画像内の選択されたアイテムの位置を特定する実施例においては、第２の画像は、識別デバイスの特有のエレメントを明瞭に示すようになっていてもよい。第２の画像は、従来のセンシング・アレイと別個に、隣接してまたは散在させてまたは混在させて設けられた、専用の付加的センシング・アレイによって生成されてもよい。付加的センシング・アレイは、特有のエレメントまたは第２の画像内のエレメントの明瞭性を強調するために物理的またはデジタル・フィルタリングを前提としていてもよい。付加的または代わりに、第２の画像は、従来のセンシング・アレイの出力を物理的またはデジタル・フィルタリングすることで作成されてもよい。

ＲＦを発信する識別デバイスを含む実施例においては、カメラは識別デバイスの位置を追跡するために２以上のＲＦ受信機を含んでいてもよい。

本発明の第６の態様によれば、観者に対して動画像の付加情報を提供する方法であって、タグを付すアイテムにまたは中に識別デバイスを設けるステップと、タグを付すアイテムの画像を含む動画像の一場面を取り込むステップと、動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出し、動画像のフレーム内におけるタグを付すアイテムの位置を特定するステップと、アイテムの特定された位置にタグを付すステップと、タグの存在を示すステップと、１以上のタグと関連付けられた情報を表示する要求を検出するステップと、要求のあった情報を動画像の上にディスプレイ表示するステップとからなることを特徴とする情報提供方法が提供されている。

この方法を用いることで、観者は、いつ更なる情報を得られるか、且つ、その情報に容易にアクセスすることができるかを容易に知ることができる。各場面における、タグを付されたアイテムの位置は、適切な手段または方法によって特定することができる。典型的には、本発明の第６の態様は、望ましいだけまた適切なだけ、本発明の第１、第２、第３、第４及び第５の態様の特徴を一部または全部含んでいてもよい。

タグを付するアイテムは、イベントの参加者（participant）、イベントの観客（spectator）またはイベントで使用されるまたは関連のある他のアイテムであってもよい。

タグの存在を示す視覚的表示は、自動または観者の行動に対する応答であってもよい。観者の行動は、タグの視覚的表示ディスプレイ表示モード（tag visual indication display mode）の選択であってもよい。タグの視覚的表示ディスプレイ表示モードは、有効と無効との間の切り替え（toggle）であってもよい。代わりに、タグの視覚的表示ディスプレイ表示モードは、観者の選択または要求に応じて一時的に有効にされてもよい。そのような場合、モードは、数秒などの限定された時間の間、有効にされてもよく、また、現在のシーンの終わりまでなど、画像ファイルに応じて継続するものであってもよい。付加的または代わりに、タグの視覚的表示は、ディスプレイ表示された画像の特定の領域を観者が選択したことに対する応答であってもよい。特定の領域は、関連付けられた商品がディスプレイ表示された領域または画像の他の専用の領域であってもよい。タグの視覚的表示は、数秒などの限定された時間の間、有効にされてもよく、また、現在のシーンの終わりまでなど、画像ファイルに応じて継続するものであってもよい。

付加的または代わりに、タグが付されたアイテムは、視覚的に（visually）強調表示（highlighted）されていてもよい。視覚的な強調表示は、一時的に（momentary）、断続的（intermittent）にまたは常に（constant）表示されるものであってもよい。実施例によっては、強調表示は、観者の要求に応じて行われる。

タグの視覚的表示ディスプレイ表示モードを選択すると、観者には選択可能な参加者、観客またはアイテムのリストが提供されてもよい。リストは、動画像の上、動画像に沿ってまたは動画像に代わって現れてもよい。リストは、望ましい場合には、カテゴリ分けされていてもよい。

ディスプレイ表示される情報は、動画像の上に表示されるウィンドウまたはダイアログ・ボックス内にディスプレイ表示されてもよい。ディスプレイ表示される情報は、次に挙げるものを含んでいてもよい：参加者、観客またはタグを付すアイテムの識別情報（identity）；それらに関連付けられたスポンサーのロゴやその他の情報；参加者の過去または現在の成績に関する数的資料などの情報；参加者、観客またはアイテムの１以上の画像；関連商品の購入詳細情報など。

ディスプレイ表示される情報は、画像内の参加者、観客またはアイテムと同じまたはほぼ同じ位置に表示されてもよい。情報は、参加者、観客またはアイテムが場面内に映っている場合にのみディスプレイ表示されてもよい。付加的または代わりに、情報は、参加者、観客またはアイテムが場面内に映っていない場合、スクリーンの余白部分にディスプレイ表示されてもよい。このことにより、本発明の方法によって、選手が場面に映っている場合に観者がスポーツイベントにおける選手の動きを追跡したり、観客が場面に映っている場合に観者が知っている特定の観客の位置を知ることが可能になる。

観者の要求は、適切な制御手段を用いて行われる。制御手段は、画像ファイルを、上映及び／またはディスプレイ表示するのに用いているシステムとインターフェースで接続されるどのようなタイプの制御手段でもよい。そのような適切なタイプの制御手段は、システムに直接備えられている制御インターフェース（control interface）、有線または無線接続（wired or wireless link）でシステムに接続されたキーボードまたはキーパッド（key pad）、有線または無線接続またはその他の制御ユニット（control unit）でシステムに接続されたカーソル指向装置（cursor directing devices）を含む。

システムは、専用のデバイスまたは１以上の接続されたデバイスによって構成されていてもよい。画像ファイルを上映及び／またはディスプレイ表示するのに用いる適切なシステムはコンピュータを含み、また、テレビ及びＤＶＤプレーヤ、ゲーム・コンソールまたはテレビ信号デコーダ（television signal decoder）などのメディアプレーヤ（media player）と関連して作動するテレビまたはモバイル・テクノロジー・デバイス（mobile technology device）を用いたものも含む。

本発明の第７の態様によれば、観者に対して動画像の付加情報を提供するシステムであって、動画像の動画像コンテンツを読み込み、動画像内の関連付けられた情報の存在を示す１以上のタグの存在を検出する読込手段（reading means）と、動画像の動画像コンテンツをディスプレイ表示し、動画像の上にまたは動画像に沿ってタグの存在の視覚的表示をディスプレイ表示するディスプレイ手段（display means）と、１以上のタグに関連付けられた情報をディスプレイ表示する要求を行うための観者操作手段（viewer actuable means）とからなり、観者操作手段に応答して、ディスプレイ手段は、要求された情報を静止画像及び／または動画像の上にディスプレイ表示することを特徴とする情報提供システムが提供されている。

本発明の第７の態様のシステムは、望ましいだけまた適切なだけ、本発明の第１乃至第６の態様の特徴を一部または全部含んでいてもよい。

例示として、また、添付の図面を参照して、本発明をさらにわかりやすくするために、以下により詳細に示す。

同時係属中の出願ＰＣＴ／ＧＢ２００８／０００７０６に開示されている先の発明の実施例において、例示的なシーンにおける特徴付けられた商品（featured product）に関する情報の表示を示す図である。 動画において、シーンのコース上で、選択されたアイテムの動きを示す概略図である。 本発明による方法を実行するためのシステムの略ブロック図である。 動画像を撮影する前に選択されたアイテムに取り付けられた識別デバイスの概略図である。 画像フレーム内における識別デバイスの位置または選択されたアイテムの位置を特定するための本発明によるデュアル画像システムを示す概略図である。 （ａ）は、本発明の１つの具体的な実施例を示すスポーツ競技場の概略図であり、（ｂ）は、図６の具体的な実施例のシステムの概略図である。 ダイアログ・ボックス形式で関連付けられたタグによって複数の選手が特定されているフットボール競技場の概略のスクリーンショットである。

ＰＣＴ／ＧＢ２００８／０００７０６に開示した先の発明は、動画像（典型的には、映画またはコンピュータゲームまたはテレビ番組）の観者が情報を取得でき、もし希望するのであれば、動画像及び／または静止画像内で見た商品及び／またはアイテム及び／またはサービスを購入することができる方法を提供している。該発明の方法において、動画像がディスプレイ・ユニットにディスプレイ表示され、観者には適切な制御手段が提供されている。動画像は、付加情報及び／またはアイテム及び／またはサービスの存在を示す１以上のタグを含んでいる。先述のタグの存在は、観者の選択、要求または行動に対する応答として、動画像と共に観者に対してディスプレイ表示されている。観者は、先述の情報の表示を要求することができ、その気があれば、関連した商品及び／またはアイテム及び／またはサービスを注文することができる。

図１には、ディスプレイ装置に動画像からの例示的なフレーム１０が表示されている。例示的なフレーム１０は、画像の下部のアイコン・バー１１と共にディスプレイ表示されている。ただし、アイコン・バー１１は、他の代替の実施例では、必ずしも表示されている必要はない。タグの視覚的表示ディスプレイ表示モードが選択されなければ、通常の画像と同様にディスプレイ表示される。選択は、制御手段（control means）の適切な入力手段を作動させることで行うようにすればよい。シーン内にタグが付されたアイテム２０が現れた場合、選択可能なアイコン１２がアイコン・バーにディスプレイ表示される。典型的に、図１において眼鏡（spectacles）について表示されているように、アイコンは、関連付けられているアイテム２０を絵で表した見本であってもよい。このことにより、観者が商品を特定することを可能にし、且つ、ディスプレイ表示されたシーンにタグを付されたアイテムが２以上存在する場合に、２以上のアイコンを区別することを可能にする。さらに、または、代わりに、動画像内において、アイテム２０は常に、または、一時的に強調表示されていてもよい。１つの典型的な実施例においては、観者が、商品が配置されている画像または画像エリア（area of the image）の上にカーソルをスクロールさせた場合に、アイテム２０が強調表示される。

アイコン１２は、制御手段を使用して選択することができる。これは、１または複数の専用の制御入力装置を作動させることで達成される。代わりに、もし制御手段が適しているのであれば（例えば、コンピュータ・マウスやそれに類するものであれば）、観者は、カーソルを商品の上にスクロールさせることで、直接商品を選択することができる。

図１に示されているように、商品を選択すると、画像は一時停止され、そのアイテム２０に関連する情報がディスプレイ表示される。情報は、静止画像及びまたは動画像の上に提供される、ポップアップウィンドウ（pop up window）１３でディスプレイ表示してもよい。場合によっては、図示したように、商品のすぐ近くでもよい。代わりに、情報は、静止画像及びまたは動画像と並んだ（alongside）情報バー（information bar）にディスプレイ表示してもよい。情報は、アイテムの品質（quality）の説明１４、１以上のアイテム画像１５、製造業者名及び値段を含んでいてもよい。情報は、付加的にまたは代わりに、アイテムまたはアイテムと関連した人または会社に関する特有の（general）または一般的な背景（background）、歴史的または教育的データに関するものであってもよい。

ディスプレイ表示された情報は、選択可能な購入アイコン（purchase icon）（図示せず）も含んでいてもよい。シッピングカートの形をしていてもよい。本実施の形態では、購入アイコンは、観者がアイコン１２または画像１５上をスクロールするか、専用の制御入力装置を作動させると現れるように構成されている。それから、観者は、適切な方法で、制御手段を用いて、購入アイコンを選択することができる。購入アイコンを選択することで、商品が顧客のショッピングリストに追加される。アイコンバーにディスプレイ表示されたショッピングカート・アイコン１７を選択することで、観者はショッピングリストを再検討及び編集し、購入に進むことができる。代わりに、この選択は、制御手段の専用の制御入力装置を作動させることで行ってもよい。

ショッピングリストに商品を追加してから、観者はこの時点で購入を完了するか、画像を見ることを継続するか、及び／または、観者は関連した広告を選択する、及び／または、関連した広告に案内される（directed to）。典型的に、これは、適切な画面上のアイコンやボタンを選択するか、制御手段の適切な入力を作動させることで可能である。

本発明は、動画像内における選択したアイテムの動作軌跡を識別する方法に関するものである。この方法は、動画像を撮影する（shoot）前に、１以上の識別デバイス３０をアイテムに取り付けることを必要とする（involves）。ポストプロダクションまたは生の（live）ストリーミング（streaming）または放送において、オブジェクト（object）は、１以上の識別デバイス３０によって認識することが可能になる。図２に示すように、フレーム内における識別デバイス３０の連続的な位置は、動作軌跡５０として描かれる（plotted）。すると、フレームが進むにつれ、動作の軌道に沿ってタグを自動的に適用することができる。上述のような動画像の場合、タグは、常時または断続的及び／または観者の要求に対する応答として、可視化されてもよい。

識別デバイス３０の誤認識を減らすために、選択した一場面（shot）内のフレーム間の認識は、識別デバイス３０が、前のフレーム内における位置と、隣接またはほぼ隣接する位置にある場合に判定される（determine）ように制限してもよい。

図４には、例示的な配置が図示されており、識別デバイス３０が、アイテム２０（上述の例のように、眼鏡）に適用されている。識別デバイスは、適切な装備を備えた（equipped）動画像用カメラによって検知することが可能な特殊なエレメントを有している。動画像用カメラは、識別デバイスを識別し、且つ、判定を行う対象の取り込んだ画像内の位置を利用可能にする。典型的には、この特殊なエレメントは、赤外線または紫外線周波数におけるエレメントの態様であるため、単色のカバー（monochromatic covering）、模様のあるカバー（patterned covering）または連続的または断続的な輻射の放射線（emission of radiation）である。代わりに、可視光の特定の色であってもよい。取り込んだ動画像内に識別デバイスが目立ち（visible）、そのことによって動画像の見た目（appearance）を損なう場合には、適切なポストプロダクション技術を用いて、ディスプレイ表示されている画像から取り除くことが可能である。

動画像内の識別デバイス３０、または、選択されたアイテム２０の位置と動作を追跡するために、特別に適応された（adapted）カメラ及び／または特別に適応された演算処理装置（processing）を用いてもよい。そのような状況においては、シーンの従来の動画像１０を取り込み、付加的に、シーンの第２の画像９０を取り込む、または生成する。第２の画像９０は、取り込んだ画像内に存在する１または複数の識別デバイスを優先的に表示するように適応されている。図５には、並んだ第１及び第２の画像の具体例を示してある。

第２の画像９０は、取り込んだ画像内における識別デバイス３０の位置、または、動作軌跡５０を特定可能にする。動作軌跡５０には、上述のように、タグを付すことができる。

第２の画像９０は、カメラ内の従来のセンシング・アレイによって作成された画像をデジタル・フィルタリングすることによって得ることもできる。第２の画像９０は、カメラの従来のセンシング・アレイに付加的に備えた第２のセンシング・アレイにより、且つ、物理的またはデジタル・フィルタリングによって生成することができる。付加的に、または、代わりに、第２のアレイは、従来のセンシング・アレイのセンシング素子（sensing elements）に隣接して取り付けられた、または、混ぜられた（intermingled）センシング素子から構成することが可能である。

さらに代わりの実施例（arrangement）では、１または各識別デバイス３０は、付加的にまたは代わりにＲＦ信号を発信することができる。ＲＦ信号によって、識別デバイスを固有に識別することができる。また、識別デバイス３０の特有の特性（distinctive properties）を識別することもできる。他の実施例では、ＲＦ信号は、画像内において、識別デバイスの位置を示すことに用いることもできる。このようにするために、画像を取り込むカメラに２以上のＲＦ受信機を接続または組み込むことができる。したがって、ＲＦ受信機は識別デバイスのカメラに対するおおよその位置、または、画像内の識別デバイスのおおよその位置を提供することができる。識別デバイスがカメラから比較的離れている場合には、付加的なＲＦロケータ（RF locator）またはリレーステーションを用意しておいてもよい。これによって、ＲＦ信号を用いて一場面の中の距離の離れた対象の位置を定めることができる。代わりに、ＲＦ信号をカメラに識別デバイスの性質（nature）または態様に関する情報の伝達に用いることができる。この情報によって、ポストプロダクション及びまたは生放送において、識別デバイスをより早く認識することができる。

本発明は、上述の機能を可能にし、且つ、上述の方法の結果をユーザによる制御及びまたは調整することを可能にするシステム１００も提供する。図３には、このようなシステムのブロック図を示してある。本システムは、ディスプレイ手段１０２に接続されたファイルリーダ／ライタ（file reader/writer）１０１から構成されている。ファイルリーダ／ライタ１０１は、動画像を読み込み、ディスプレイ手段１０２を制御可能であり、ファイルの画像内容（image content）をオペレータ（operator）に対して表示することが可能である。ファイルリーダ／ライタ１０１は、タグ及びタグに関連した情報を含む、更新された動画像を書き込むことも可能である。読み込み／書き込みされた画像ファイルは、適切なファイル記憶装置（file store）１１０から読み込まれ／記憶装置１１０に書き込まれる。ファイル記憶装置１１０は、データ記憶手段の形式は問わないものであり、磁気ドライブなど、メモリ集積回路（integrated memory circuits）（例えば、フラッシュドライブ〔flash drives〕）、テープベースのデータ記憶手段、光学ディスク（例えば、ＣＤ，ＤＶＤまたはこれらに似たものその他の電気的形式によるもの）、光学または磁気データ記憶手段を含むがこれに限られない。代わりに、ファイルリーダ／ライタ１０１は、生放送またはストリーミングされたデータ（streamed data）を受信及び続くプロセシング送信（following processing transmit）を行うことが可能でもよい。

ファイルリーダ／ライタ１０１及びディスプレイ手段１０２の操作は、適切なユーザ入力手段１０３によって制御する。ユーザ入力手段１０３は、どのような適切なユーザ入力手段の組み合わせであってもよく、次のものを含むが、これに限られるものではない：１以上のキー（keys）またはキーパッド（key pad）及び／またはトラックボール（trackball）、タッチスクリーン（touch screen）、タッチパッド（touch pad）、ジョイスティック（joy stick）またはコンピュータ・マウス（conputer mouse）などのポインティング・デバイス。好ましい実施の形態では、ディスプレイ手段１０２はタッチスクリーンディスプレイであり、入力手段１０３は、スクリーン上に表示された１以上のアイコンを含んでいる。そのような実施の形態では、オペレータは、適切なスタイラス（stylus）を用いて、選択またはその輪郭（outline）の周りを描くことにより、初めにオブジェクトを選択または識別することができる。

本システムは、さらに、選択されたアイテムに取り付けられている識別デバイス３０を認識することが可能な認識手段（recognition means）１０４を備えている。次に、認識手段１０４は、続くフレームにおいて、識別デバイス３０（すなわち、選択されたアイテム）を認識し、且つ、位置決め（locate）することが可能であり、一場面を通じて（through the shot）、アイテムの動作軌跡を生成する。そして、動作軌跡に対してタグを付し、ファイルリーダ／ライタ１０１により、更新された動画像にタグ及び動作軌跡が書き込まれる。

上述の発明のさらに可能な実施の形態は、生放送（live）であろうと、録画放送（pre-recorded）であろうと、スポーツ放送番組（sports broadcasts）に関するものである。次の例は、ボールをベースにしたスポーツを用いて説明している。ただし、本発明は、自動車レース（motor racing）、自転車競技（cycling）、競馬（horce racing）、ヨット競技（sailing）、ボクシングなどに関連するがこれらに限られない放送番組にも用いることができる。一般に、本発明は、付加情報及び／または購入情報及びアイコン及びまたはスポンサーのロゴをディスプレイ表示する目的で競技者（contestants）及び／または商品アイテムにタグを付すことによって強調する（enhanced）ことが可能などのようなスポーツの放送番組に応用しても有用である。

次に、図６ａ及び図６ｂには、さらに可能な実施の形態を図示している。この実施の形態では、本発明は、放送用に競技場（pitch）２００で行われるスポーツイベントの映像（footage）を記録するために用いられている。放送において、選手（players）２０１及びボール２０２にタグが付されている。このことにより、観者は、関連付けられたタグを上述の方法で選択することで、選手に関する情報、当の試合における固有の成績（specific performance）または彼らの装備品（equipment）またはテレビコマーシャル（endorsements）を呼び出すことができる。

図６ａ及び図６ｂの実施の形態では、各選手２０１及びボール２０２に１以上の識別デバイス２０３を取り付けることでタグが付される。識別デバイス２０３は、選手の衣服に取り付けておくか、またはボール２０２に組み込んでおくことができる。各識別デバイス２０３は、ＲＦ信号を発信し、競技場２００の周りに配置されたＲＦ検出器（RF detector）２０５によって検出することができる。受信した信号を分析することにより、各選手２０１及びボール２０２が試合中のいつでもどこにいるか特定することができる。

試合の映像は競技場の周りに配置された１以上のカメラ２０４によって取り込まれる。カメラ２０４の位置は既知である。試合前に競技場２００に関してカメラ２０４を固定の場所に設置する、または、試合中に識別デバイス２０３を追跡することができるように識別デバイス２０３に応じてカメラ２０４の位置を合わせることで、目的を達成することができる。付加的に、カメラが向けられている方向、傾斜角及びズーム設定はモニターされている（monitored）。

好ましい実施の形態では、少なくともいくつかのカメラ２０４は、固定位置に配置され、ＲＦ検出器を組み込んでいる。このことによって、本発明を実施するのに、別個のＲＦ検出器２０５を準備することなく、適切な装備を備えたカメラ２０４を利用することができる。

上記情報が全て使用可能な場合、演算処理装置２１０は、常に、競技場のどの部分がカメラによって取り込まれた映像内にあるか、且つ、競技場の全ての位置が取り込まれた映像内のどこで見られるか特定することができる。データと、選手２０１及びボール２０２の位置データを組み合わせることで、各カメラ２０４によって取り込まれた映像内に、どの選手２０１が写っているのか（写っている場合）及びボール２０２が写っているのかを特定することができ、且つ、映像の各フレーム内のどこで選手２０１またはボール２０２を見つけることができるかを特定することができる。したがって、１以上の選手２０１またはボール２０２にタグを自動的に付すことができる。

本発明をボールまたは選手の動きを追跡することに使用することができる一方、本発明の最も重要な目的は、一場面において選手、ドライバーまたは競技者を追跡し、観者が特定の選手と関連付けられたタグを選択することができるようにすることである。関連付けられたタグは、数的資料／情報／スポンサーロゴをディスプレイ表示することを可能にし、また、選手及び／またはそのスポンサーに関連するまたは宣伝されている商品またはサービスを観者が直接購入することを可能にさえする。ある選手が一場面またはカメラのカットを離れて他の場面に移ると、その選手の情報のタグは、観者がタグを解除するまで、スクリーンの１つの角部に見える状態で残る。このことは図７に描かれている。図７には、競技場３００のスクリーンショット３１０を概略的に図示してあり、多くの観客が競技場３００を取り囲むスタンドからフットボール（football）の試合を観戦している。この例では、観者は、場面３１０内の２人の選手３０１に関連付けられたタグを選択し、選手３０４を選択しないように判断した。そのため、選手３０１は、自動的に彼らの識別情報及び／または付加情報を示すダイアログ・ボックス３０３とタグ付けされている。観者は、現在の場面にいない２人の選手をさらに選択した。そのため、これらの選手と関連付けられたダイアログ・ボックス３０３が場面３１０の角部にディスプレイ表示されている。

イベントにおける観客が持ち運び可能な識別デバイスを購入することも可能である。このことにより、観者が観客の位置を追跡することが可能になる。この方法により、家にいる観者が、試合を観に行っている友人を見ることが可能になる。図７の例においては、観者は観客３０５と関連付けられたタグも選択しているため、観客３０５は、場面内にいる場合に、ダイアログ・ボックス３０３によって自動的に識別されている。このようなことが達成できるため、識別デバイスを購入または借りる場合に、観客は識別情報（identification）や名前やあだ名などの事項（details）やメッセージ（例えば、"Hi Mum!"、"Go on you reds!"、"You're not singing anymore!"等、必要に応じて）を関連付けられたデータベースにアップロードすることができる。これらの事項がダイアログ・ボックスに表示される。

どの選手／他者を追跡するかを選択するために、観者は、選択メニューにアクセスすることができる。選択メニューは、映像の上、映像に沿って、または、映像の代わりに現れるようにしてもよく、潜在的にタグを付すことが可能なアイテムまたは潜在的にタグを付すことが可能なアイテムをカテゴリごとに列挙してもよい。付加的にまたは代わりに、観客は観者に対して、イベントの中継（coverage）内において、彼らがタグを付されることが可能であることを示すメッセージを送ることが可能でも良い。このメッセージは、望ましいように、放送基盤（broadcast platform）を通じてまたは個別に送信すればよい。

本発明をボールまたは選手の動きを追跡することに使用することができる一方、本発明の最も重要な目的は、一場面において選手、ドライバーまたは競技者を追跡し、観者が特定の選手と関連付けられたタグを選択することができるようにすることである。関連付けられたタグは、数的資料／情報／スポンサーロゴをディスプレイ表示することを可能にし、また、選手及び／またはそのスポンサーに関連するまたは宣伝されている商品またはサービスを観者が直接購入することを可能にさえする。ある選手が一場面またはカメラのカットを離れて他の場面に移ると、その選手の情報のタグは、観者がタグを解除するまで、スクリーンの１つの角部に見える状態で残る。

多くのスポーツでは、試合中はいつでもボールは１つのみであるが、競技場２００を離れるボールを回収するために試合が過度に遅延しないように、複数のボールが用意される場合がある。そのような場合、各ボール２０２に別々の識別デバイスを用意し、演算処理装置２１０が、どのボールが現在試合で使用されているのか特定する適切なアルゴリズムを適用すればよい。試合中に使用されているボールを識別すると、アルゴリズムは、そのボール２０２が競技場２００を離れるまで、使用されているボールとして識別し続ける。もし試合中のボール２０２が識別されない場合、アルゴリズムは、全てのボール２０２の位置を識別する。もし１つのボールのみが競技場内で検出された場合、アルゴリズムは、そのボール２０２が試合で使用されているとみなす。もし競技場２００内に１つもボールが検出されない場合、アルゴリズムは、全てのボールの位置を選手２０１の位置と比較する。もし１つのボールが、競技場の外の選手２０１と同じ位置にあるか、または、すぐ隣接する位置にある場合、そのボール２０２が試合で使用されているとみなす。ボール２０２を支配している（possesion）ときに強制的にライン外に出された（out of play）選手や、フットボールにおけるスローイン（throw in）やラグビーにおけるラインアウト（line out）のような二次的な再スタート（subsequent restart）の場合にも、この状況は相当するかもしれない。

演算処理装置は、１以上のカメラ２０４によって取り込まれた画像及びその中の１つまたは各識別デバイス２０３をディスプレイ表示するディスプレイ・ユニット２１１に接続されている。それから、ユーザは、放送において、どの識別デバイス３０にタグを付すか選択する。これは適切なユーザ入力手段２１２によって達成される。ユーザ入力手段２１２は、次のものを含むが、これに限られるものではない：１以上のキーまたはキーパッド及び／またはトラックボール、タッチスクリーン、タッチパッド、ジョイスティックまたはコンピュータ・マウスなどのポインティング・デバイス。

タグが選択された際に示される情報は、専用のデータベース２１３から読み込む。付加的に、または、代わりに、いくつかのデータは、演算処理装置２１０によって特定された位置データから取得する。例えば、演算処理装置は、選手２０１または試合で使用しているボール２０２の動いた距離、動きの速さまたは代表的な位置を与える。

上述の実施の形態は、スポーツイベントの生中継との関連で表現されているが、他のイベントの生中継、もちろんイベントの録画中継または他のタイプの単一のシーンの撮影に適用できない理由はない。

さらに、上述の実施の形態は、第１に、ＲＦに関する実施例として表現されているが、他の状況においては、可視光、ＩＲまたはＵＶを用いた識別デバイスと適切な装備を備えたカメラを用いることもできる。これらの実施例は、チームのユニフォームではなく、個別の装備を有しているスポーツイベントに特に適している。そのような場合には、各選手は、固有ＩＲ、ＵＶまたは視覚的サイン（visual signature）をディスプレイ表示または発信する、適切に適合された衣服または装備のアイテムを有している。実例として、たくさんの中から騎手服（jockey's silks）、ドライバーのヘルメット、スイマーのキャップまたはトランクス（swimmer's caps or trunks）が挙げられるが、この例に限られるものではない。

上述の発明の他の実例には、参加者または観客が識別デバイスを持って行くことができる、パレードやカーニバルなどの市民イベントまたは、マラソンや市民参加マラソン（fun run）などの大規模参加イベント（mass participation events）があるが、この例に限られるものではない。

上述の実施例は例としてのみ説明したものであり、本発明は上述の実施例に限定されるものではないのはもちろんである。

Claims (84)

1. 動画像または静止画像内に現れるアイテムにタグを付すことを可能にする方法であって、
   前記タグを付す前記アイテムにまたは前記アイテム中に識別デバイスを設けるステップと、
   前記タグを付す前記アイテムの画像を含む動画像の一場面を取り込むステップと、
   前記動画像の一場面の各フレーム内における前記識別デバイスの存在及び位置を検出して、前記動画像の前記フレーム内における前記タグを付す前記アイテムの位置を特定するステップとからなることを特徴とするタグ付与方法。
2. 前記タグを付す前記アイテムの動作軌跡を特定し、且つ、前記動作軌跡に前記タグを付すステップを更に含むことを特徴とする請求項１に記載のタグ付与方法。
3. 前のフレーム内における前記アイテムの位置と隣接する位置のみ識別を行うように制限されていることを特徴とする請求項１または２に記載のタグ付与方法。
4. オペレータは、マウス、トラックボール、タッチパッドまたはタッチスクリーンシステムを含むがこれに限られるものではない制御入力手段によって前記動作軌跡を調整することが可能であることを特徴とする請求項２または３に記載のタグ付与方法。
5. 可視光、ＲＦ、赤外線または紫外線信号を反射及び／または発信する特定可能なエレメントを備えていることを特徴とする請求項１乃至４のうちいずれか１項に記載のタグ付与方法。
6. 前記信号は、ほぼ連続的または断続的であることを特徴とする請求項５に記載のタグ付与方法。
7. 前記信号は、特定の識別デバイスを識別及び／または前記識別デバイスについての更なる情報、フレーム内の位置またはその態様を提供するために用いられることを特徴とする請求項５または６に記載のタグ付与方法。
8. 前記識別デバイスの位置、または、前記画像内の選択された前記アイテムの位置は、異なるスペクトル領域の同じ画像領域の第２の画像を用いて特定され、
   前記第２の画像は、取り込んだ前記画像の一場面内で前記識別デバイスの位置が特定できるように、前記識別デバイスの特有のエレメントを明瞭に示すようになっていることを特徴とする請求項１乃至７のうちいずれか１項に記載のタグ付与方法。
9. 前記第２の画像は、専用の付加的センシング・アレイによって作成される、または物理的またはデジタル・フィルタリングすることで作成されることを特徴とする請求項８に記載のタグ付与方法。
10. 動画像内に現れるアイテムにタグを付すことを可能にする方法であって、
    前記タグを付す前記アイテムにまたは前記アイテム中に識別デバイスを設けるステップと、
    前記タグを付す前記アイテムの画像を含む動画像の一場面を取り込むステップと、
    前記動画像の一場面を取り込むのに用いる手段の位置を特定するステップと、
    前記識別デバイスの位置を特定するステップと、
    前記動画像の一場面を取り込むのに用いる前記手段と前記識別デバイスの相対的な位置を特定して、前記タグを付す前記アイテムがフレーム内にあるか否かを特定し、前記タグを付す前記アイテムが前記フレーム内にある場合には、前記タグを付す前記アイテムが前記フレーム内における位置を特定するステップとからなることを特徴とするタグ付与方法。
11. 一度に２以上の前記識別デバイスの位置を特定することに使用することが可能であることを特徴とする請求項１０に記載のタグ付与方法。
12. 一度に２以上の前記動画像の一場面を取り込むのに用いる前記手段の位置を特定することに使用することが可能であることを特徴とする請求項１０または１１に記載のタグ付与方法。
13. 前記動画像の一場面を取り込むのに用いる前記手段の位置は、予め決められている、または、追跡されていることを特徴とする請求項１０乃至１２のうちいずれか１項に記載のタグ付与方法。
14. 前記動画像の一場面を取り込むのに用いる前記手段の向き及び／または傾斜角は、予め決められている、または、追跡されていることを特徴とする請求項１０乃至１３のうちいずれか１項に記載のタグ付与方法。
15. 前記動画像の一場面を取り込むのに用いる前記手段の位置の追跡は、前記動画像の一場面を取り込むのに用いた前記手段に前記識別デバイスを取り付けることで達成されることを特徴とする請求項１３または１４に記載のタグ付与方法。
16. 前記識別デバイスの位置は、前記動画像の一場面を取り込むのに用いる前記手段に組み込まれているか、または、別個に設けられた追跡デバイスによって特定されることを特徴とする請求項１０乃至１５のうちいずれか１項に記載のタグ付与方法。
17. 前記追跡デバイスは、前記動画像の一場面を取り込む領域内またはその周りの固定された予め定められた位置に設けられていることを特徴とする請求項１６に記載のタグ付与方法。
18. 前記識別デバイスは、ＲＦ信号を発信することが可能であることを特徴とする請求項１６または１７に記載のタグ付与方法。
19. １以上の前記識別デバイスが設けられている場合、各識別デバイスには、固有の識別コードが与えられていることを特徴とする請求項１８に記載のタグ付与方法。
20. 前記識別デバイスは、望ましい場合には、衣服やその他の備品の中に隠されるようになっていることを特徴とする請求項１６乃至１９のうちいずれか１項に記載のタグ付与方法。
21. 前記識別デバイスは、外部からの信号を受信し、関連する情報を前記追跡デバイスに送信することを特徴とする請求項１６乃至２０のうちいずれか１項に記載のタグ付与方法。
22. 前記識別デバイスは、ＧＰＳなどの既存の位置特定システムを使用するようになっており、自身の位置を特定する、または、前記識別デバイスの位置を前記追跡デバイスが特定するために十分な情報を提供することを特徴とする請求項２１に記載のタグ付与方法。
23. 前記動画像の一場面の各フレーム内の前記識別デバイスの位置は、適切な演算処理装置によって特定されることを特徴とする請求項１０乃至２２のうちいずれか１項に記載のタグ付与方法。
24. 前記演算処理装置は、前記動画像の一場面を取り込むのに用いる前記手段のそれぞれと前記追跡デバイスのそれぞれと通信を行っていることを特徴とする請求項２３に記載のタグ付与方法。
25. 制限された競技空間内で行われるスポーツイベントの一場面を取り込むのに適用され、
    １以上の前記追跡デバイスと、１以上の前記動画像の一場面を取り込む前記手段とを前記制限された競技空間内またはその周りに設けることを特徴とする請求項１６乃至２４のうちいずれか１項に記載のタグ付与方法。
26. 前記動画像の一場面を取り込むのに用いる前記手段は、デジタルまたはアナログの動画用カメラまたはテレビカメラなどのカメラであることを特徴とする請求項１乃至２５のうちいずれか１項に記載のタグ付与方法。
27. タグの付与が完了した後に、前記識別デバイスが取り込まれた動画像ファイルを損ねるまたは前記動画像ファイル内に映り込んでいる場合には、最終的な前記動画像ファイルから前記識別デバイスの可視的な形跡を除去するために適切なポストプロダクション技術を適用することを特徴とする請求項１乃至２６のうちいずれか１項に記載のタグ付与方法。
28. 動画像または静止画像内に現れるアイテムにタグを付すことを可能にすることに適しており、且つ、本発明の第１または第２の形態を実施可能なシステムであって、
    前記タグを付す前記アイテムの画像を含む動画像の一場面を取り込む手段と、
    前記動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出し、前記動画像のフレーム内における前記タグを付す前記アイテムの位置を特定する手段とからなることを特徴とするタグ付与システム。
29. 前記識別デバイスの位置、または、前記動画像／静止画像内の選択した前記アイテムの位置は、異なるスペクトル領域の同じ画像領域の第２の画像を用いて特定され、
    前記第２の画像は、取り込んだ前記動画像の一場面内で前記識別デバイスの位置が特定できるように、前記識別デバイスの特有のエレメントを明瞭に示すようになっていることを特徴とする請求項２８に記載のタグ付与システム。
30. 前記第２の画像は、従来のセンシング・アレイと別個に、隣接してまたは散在させてまたは混在させて設けられた、専用の付加的センシング・アレイによって作成されていることを特徴とする請求項２９に記載のタグ付与システム。
31. 前記第２の画像は、従来のセンシング・アレイの出力をデジタル・フィルタリングすることで作成されていることを特徴とする請求項２９に記載のタグ付与システム。
32. ＲＦを発信する識別デバイスを組み入れた実施例では、前記識別デバイスの位置を追跡するために２以上のＲＦ受信機が設けられていることをことを特徴とする請求項２８乃至３１のうちいずれか１項に記載のタグ付与システム。
33. 距離の離れた場所でも識別デバイスを認識及び位置を特定できるように、１以上のＲＦブースターまたはリレーステーションを設けていることを特徴とする請求項３２に記載のタグ付与システム。
34. 前記動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出する手段は、
    前記動画像の一場面を取り込むのに用いる手段の位置を特定する手段と、
    前記識別デバイスの位置を特定する手段と、
    前記動画像の一場面を取り込むのに用いる前記手段と前記識別デバイスの相対的な位置を特定し、前記タグを付す前記アイテムがフレーム内にあるか否かを特定し、前記タグを付す前記アイテムが前記フレーム内にある場合には、前記フレーム内における前記タグを付す前記アイテムが位置を特定する手段とからなることを特徴とする請求項２８乃至３３のうちいずれか１項に記載のタグ付与システム。
35. 前記動画像の一場面を取り込むのに用いる前記手段の位置は、予め決められている、または、追跡されていることを特徴とする請求項３４に記載のタグ付与システム。
36. 前記動画像の一場面を取り込むのに用いる前記手段の向き及び／または傾斜角は、予め決められている、または、追跡されていることを特徴とする請求項３４または３５に記載のタグ付与システム。
37. 前記動画像の一場面を取り込むのに用いる前記手段には、傾斜角、向き、及び視界の範囲を特定する１以上のセンサが設けられていることを特徴とする請求項３６に記載のタグ付与システム。
38. 前記識別デバイスの位置は、前記動画像の一場面を取り込むのに用いる前記手段に組み込まれた、または、別個に設けられた追跡デバイスによって特定されることを特徴とする請求項３４乃至３７のうちいずれか１項に記載のタグ付与システム。
39. 前記動画像の一場面の各フレーム内の前記識別デバイスの位置は、適切な演算処理装置によって特定されることを特徴とする請求項２８乃至３８のうちいずれか１項に記載のタグ付与システム。
40. 前記演算処理装置は、前記動画像の一場面を取り込むのに用いる前記手段のそれぞれと前記追跡デバイスのそれぞれと通信を行っていることを特徴とする請求項３９に記載のタグ付与システム。
41. 前記演算処理装置は、ユーザが操作可能な制御手段を備えていることを特徴とする請求項４０に記載のタグ付与システム。
42. 前記制御手段は、動画像内の複数の識別デバイスのうち、どの識別デバイスにタグを付するかをユーザが選択することを可能にし、及び／または、タグに関連付けられた情報を変更することを可能にすることを特徴とする請求項４１に記載のタグ付与システム。
43. 前記タグに関連付けられた情報は、専用のデータベースから検索される、または、前記演算処理装置によって生成されることを特徴とする請求項４２に記載のタグ付与システム。
44. 取り込まれた動画像をディスプレイ表示し、ディスプレイ表示された前記取り込まれた画像内のタグを付することが可能なアイテムの存在を示す手段と、
    示されたアイテムの選択及びタグの付与を可能にするユーザが操作可能な入力手段と、
    選択したアイテムのフレーム間の動作の軌道を追跡するオブジェクト認識手段とを備えていることを特徴とする請求項２８乃至４３のうちいずれか１項に記載のタグ付与システム。
45. 請求項１乃至２７のうちいずれか１項に記載のタグ付与方法または請求項２８乃至４４のいずれか１項に記載のタグ付与システムに使用することに適している識別デバイスであって、
    アイテムに前記識別デバイスを取り付けるための取付手段と、
    前記識別デバイスを識別するために適切に装備された動画像用カメラによって検出可能であり、且つ、取り込まれた画像内の前記識別デバイスの位置を特定するための特有なエレメントとから構成されていることを特徴とする識別デバイス。
46. 前記取付手段は、ネジ、ピン、釘、クリップ、接着剤、接着テープまたは面ファスナーを含むことを特徴とする請求項４５に記載の識別デバイス。
47. 前記識別デバイスは、前記アイテムの製造時に取り付けられる、または、組み込まれることを特徴とする請求項４５または４６に記載の識別デバイス。
48. 前記特有なエレメントは、視覚的な特徴を有するエレメントまたは電磁スペクトルの別の領域において特徴的な態様を有するエレメントであることを特徴とする請求項４５乃至４７のうちいずれか１項に記載の識別デバイス。
49. 前記特徴的な態様は、パターンまたは比較的明るい単色部分であることを特徴とする請求項４８に記載の識別デバイス。
50. 前記特有なエレメントは、可視光、ＲＦ、赤外線または紫外線信号を反射及び／または発信することを特徴とする請求項４５乃至４９のうちいずれか１項に記載の識別デバイス。
51. 前記信号は、ほぼ連続的または断続的であることを特徴とする請求項５０に記載の識別デバイス。
52. 前記識別デバイスは、追跡手段によって受信可能なＲＦ信号を発信可能であることを特徴とする請求項５０または５１に記載の方法。
53. １以上の前記識別デバイスが設けられている場合、各識別デバイスには、固有の識別コードが与えられていることを特徴とする請求項５２に記載の方法。
54. 前記識別デバイスは、外部からの信号を受信し、関連する情報を前記追跡デバイスに送信することを特徴とする請求項５２または５３に記載の方法。
55. 前記識別デバイスは、ＧＰＳなどの既存の位置特定システムを使用するようになっており、自身の位置を特定する、または、前記識別デバイスの位置を前記追跡デバイスが特定するために十分な情報を提供することを特徴とする５２乃至５４のうちいずれか１項に記載の方法。
56. 前記識別手段は、望ましい場合には、衣服やその他の備品の中に隠されるようになっていることを特徴とする請求項４５乃至５５のうちいずれか１項に記載の方法。
57. 請求項１乃至２７のうちいずれか１項に記載のタグ付与方法または請求項２８乃至４４のいずれか１項に記載のタグ付与システムに使用することに適している動画像用カメラであって、
    画像を取り込む画像取込手段と、
    取り込まれた画像内において請求項４５乃至５６のうちいずれか１項に記載の識別デバイスを検出し、識別し及び位置を特定する識別手段とを備えていることを特徴とする動画像用カメラ。
58. 動画像の一場面を取り込むのに用いられる動画像用カメラは、可視範囲外の電磁放射線を検出可能な手段を装備していることを特徴とする請求項５７に記載の動画像用カメラ。
59. 前記動画像用カメラは、異なるスペクトル領域における同じ画像範囲を取り込む手段を備え、第２の画像を提供することを特徴とする請求項５８に記載の動画像用カメラ。
60. 前記第２の画像は、前記識別デバイスの特有のエレメントを明瞭に示すようになっており、前記識別デバイスの位置、または、画像内で選択されたアイテムが特定可能であることを特徴とする請求項５９に記載の動画像用カメラ。
61. 前記第２の画像は、従来のセンシング・アレイと別個に、隣接してまたは散在させてまたは混在させて設けられた、専用の付加的センシング・アレイによって作成されていることを特徴とする請求項６０に記載の動画像用カメラ。
62. 前記付加的センシング・アレイは、特有のエレメントまたは前記第２の画像内のエレメントの明瞭性を強調するために物理的またはデジタル・フィルタリングを前提としていることを特徴とする請求項６１に記載の動画像用カメラ。
63. 前記第２の画像は、前記画像取込手段を構成する従来のセンシング・アレイの出力を物理的またはデジタル・フィルタリングすることで作成されることを特徴とする請求項５７乃至６２のうちいずれか１項に記載の動画像用カメラ。
64. 前記識別デバイスの位置を追跡するために２以上のＲＦ受信機が設けられていることをことを特徴とする請求項５７乃至６３のうちいずれか１項に記載の動画像用カメラ。
65. 前記識別デバイスの位置は、前記動画像用カメラに組み込まれた追跡手段によって特定されることを特徴とする請求項５７乃至６４のうちいずれか１項に記載の動画像用カメラ。
66. 前記動画像用カメラには、傾斜角、向き、及び視界の範囲を特定する１以上のセンサが設けられていることを特徴とする請求項５７乃至６５のうちいずれか１項に記載の動画像用カメラ。
67. 観者に対して動画像の付加情報を提供する方法であって、
    タグを付すアイテムにまたは中に識別デバイスを設けるステップと、
    前記タグを付す前記アイテムの画像を含む動画像の一場面を取り込むステップと、
    前記動画像の一場面の各フレーム内における前記識別デバイスの存在及び位置を検出し、前記動画像のフレーム内における前記タグを付す前記アイテムの位置を特定するステップと、
    前記アイテムの特定された位置に前記タグを付すステップと、
    前記タグの存在を示すステップと、
    １以上の前記タグと関連付けられた前記情報を表示する要求を検出するステップと、
    要求のあった前記情報を前記動画像の上にディスプレイ表示するステップとからなることを特徴とする情報提供方法。
68. 各場面におけるタグを付されたアイテムの位置は、請求項１乃至２７のいずれか１項に記載の方法または請求項２８乃至４４のいずれか１項に記載のシステムまたは請求項４５乃至５６のいずれか１項に記載の識別デバイスまたは請求項５７乃至６６のいずれか１項に記載の動画像用カメラを用いて特定されることを特徴とする請求項６７に記載の情報提供方法。
69. 前記タグを付する前記アイテムは、イベントの参加者、イベントの観客またはイベントで使用されるまたは関連のある他のアイテムであることを特徴とする請求項６７または６８に記載の情報提供方法。
70. 前記タグの存在を示す視覚的表示は、自動または観者の行動に対する応答であることを特徴とする請求項６７乃至６９のいずれか１項に記載の情報提供方法。
71. 前記観者の行動は、タグの視覚的表示ディスプレイ表示モードの選択であることを特徴とする請求項７０に記載の情報提供方法。
72. 前記タグの視覚的表示ディスプレイ表示モードは、有効と無効との間の切り替え、または観者の選択または要求に応じて一時的に有効にされることを特徴とする請求項７１に記載の情報提供方法。
73. タグの視覚的表示は、ディスプレイ表示された画像の特定の領域を観者が選択したことに対する応答であり、
    前記特定の領域は、関連付けられた商品がディスプレイ表示された領域または画像の他の専用の領域であることを特徴とする請求項７０乃至７２のいずれか１項に記載の情報提供方法。
74. 画像内において、前記タグが付された前記アイテムは、視覚的に強調表示されていることを特徴とする請求項６７乃至７３のいずれか１項に記載の情報提供方法。
75. 視覚的な強調表示は、一時的に、断続的にまたは常に表示されるものであることを特徴とする請求項７４に記載の情報提供方法。
76. 視覚的な強調表示は、観者の要求に応じて行われることを特徴とする請求項７４または７５に記載の情報提供方法。
77. 前記タグの視覚的表示ディスプレイ表示モードを選択すると、観者には選択可能な参加者、観客またはアイテムのリストが提供され、前記リストは、前記動画像の上、前記動画像に沿ってまたは前記動画像に代わって現れることを特徴とする請求項７０乃至７６のいずれか１項に記載の情報提供方法。
78. 前記ディスプレイ表示される情報は、前記動画像の上に表示されるウィンドウまたはダイアログ・ボックス内にディスプレイ表示されることを特徴とする請求項６７乃至７７のいずれか１項に記載の情報提供方法。
79. 前記ディスプレイ表示される情報は、前記画像内の参加者、観客またはアイテムと同じまたはほぼ同じ位置に表示されることを特徴とする請求項７８の情報提供方法。
80. 前記情報は、参加者、観客またはアイテムが場面内に映っている場合にのみディスプレイ表示されることを特徴とする請求項７８または７９に記載の情報提供方法。
81. 前記情報は、参加者、観客またはアイテムが場面内に映っていない場合、スクリーンの余白部分にディスプレイ表示されることを特徴とする請求項７８乃至８０のいずれか１項に記載の情報提供方法。
82. 観者に対して動画像の付加情報を提供するシステムであって、
    前記動画像の動画像コンテンツを読み込み、前記動画像内の関連付けられた情報の存在を示す１以上のタグの存在を検出する読込手段と、
    前記動画像の動画像コンテンツをディスプレイ表示し、前記動画像の上にまたは前記動画像に沿って前記タグの存在の視覚的表示をディスプレイ表示するディスプレイ手段と、
    １以上の前記タグに関連付けられた情報をディスプレイ表示する要求を行うための観者操作手段とからなり、
    前記観者操作手段に応答して、前記ディスプレイ手段は、要求された情報を静止画像及び／または動画像の上にディスプレイ表示することを特徴とする情報提供システム。
83. 画像ファイルは、単独で作動するまたはＤＶＤプレーヤ、ゲーム・コンソールまたはテレビ信号デコーダなどのメディアプレーヤと関連したコンピュータ、モバイル・テクノロジー・デバイスまたはテレビを用いて上映またはディスプレイ表示されていることを特徴とする請求項８２に記載の情報提供システム。
84. 観者の要求は、画像ファイルを、上映及び／またはディスプレイ表示するのに用いているシステムとインターフェースで接続するのに適した制御手段を用いて行われ、
    前記制御手段は、システムに直接備えられている制御インターフェース、有線または無線接続でシステムに接続されたキーボードまたはキーパッド、有線または無線接続または遠隔制御ユニットでシステムに接続されたカーソル指向装置であることを特徴とする請求項８３に記載の情報提供システム。

Images