JP5474953B2 - 商品情報のタグ付け - Google Patents

商品情報のタグ付け Download PDF

Info

Publication number
JP5474953B2
JP5474953B2 JP2011514117A JP2011514117A JP5474953B2 JP 5474953 B2 JP5474953 B2 JP 5474953B2 JP 2011514117 A JP2011514117 A JP 2011514117A JP 2011514117 A JP2011514117 A JP 2011514117A JP 5474953 B2 JP5474953 B2 JP 5474953B2
Authority
JP
Japan
Prior art keywords
moving image
scene
identification device
item
tag
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011514117A
Other languages
English (en)
Other versions
JP2011527527A5 (ja
JP2011527527A (ja
Inventor
リヴゼイ,カール
Original Assignee
ヴァイアップ リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from GB0811140A external-priority patent/GB0811140D0/en
Priority claimed from GB0907595A external-priority patent/GB0907595D0/en
Application filed by ヴァイアップ リミテッド filed Critical ヴァイアップ リミテッド
Publication of JP2011527527A publication Critical patent/JP2011527527A/ja
Publication of JP2011527527A5 publication Critical patent/JP2011527527A5/ja
Application granted granted Critical
Publication of JP5474953B2 publication Critical patent/JP5474953B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/78Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using electromagnetic waves other than radio waves
    • G01S3/782Systems for determining direction or deviation from predetermined direction
    • G01S3/785Systems for determining direction or deviation from predetermined direction using adjustment of orientation of directivity characteristics of a detector or detector system to give a desired condition of signal derived from that detector or detector system
    • G01S3/786Systems for determining direction or deviation from predetermined direction using adjustment of orientation of directivity characteristics of a detector or detector system to give a desired condition of signal derived from that detector or detector system the desired condition being maintained automatically
    • G01S3/7864T.V. type tracking systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Image Analysis (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、動画像(moving images)及び/または静止画像(paused images)上にタグ(tags)の形式で商品情報を提供する方法に関するものである。
同時係属中(co-pending)の我々の出願PCT/GB2008/000706(特許文献1)には、観者(viewers)に商品情報を提供する方法及びシステムが開示されている。このシステムでは、動画像と並んで(alongside)または動画像の上に(over)ディスプレイ表示(displayed)された1以上の視覚的に表され且つ観者によって選択可能なタグ手段によって、付加情報(additional information)を提供する。観者によっていずれか1つのタグが選択されたことを検出すると、動画像の再生が一時停止され、該静止画像または動画像の上に、選択されたタグに関連する付加情報がディスプレイ表示される。付加情報は、対応する商品を直接注文可能な商品の購入オプションを含んでいてもよい。
PCT/GB2008/000706
このような機能を提供するためには、タグを付すアイテム(items)が出現するところに、手動で動画像にタグを付す(tag)必要がある。タグを付すアイテムが多い場合や、タグを付すアイテムがたくさんのシーンで出現する場合が典型的であるが、この作業は骨の折れる(laborious)、時間のかかる(time consuming)、費用のかかる(costly undertaking)作業である。
本発明の目的は、これら問題点を少なくとも一部軽減(alleviate)または解消する(overcome)システム及び方法を提供することにある。
本発明の第1の態様によれば、動画像または静止画像内に現れるアイテムにタグを付すことを可能にする方法であって、タグを付すアイテムにまたはアイテム中に識別デバイス(identification device)を設ける(providing)ステップと、タグを付すアイテムの画像を含む動画像の一場面(footage)を取り込む(capturing)ステップと、動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出して(detecting)、動画像のフレーム内におけるタグを付すアイテムの位置を特定する(determining)ステップとからなることを特徴とするタグ付与方法が提供されている。
動画像を保存または送信する際に、識別デバイスの位置を自動的に特定することで、識別デバイスを設けたアイテムまたは識別デバイスを中に設けたアイテムと、適切なタグを自動的に関連付ける(associate)ことができる。そのため、タグを付すプロセスのうち、相当な部分を自動化することができ、時間及び費用を削減することができる。
フレーム内の識別デバイスを識別するプロセスを自動化することで、本発明は、スポーツイベント(sports events)、音楽イベント(music events)、市民イベント(civic events)、ドラマ(dramas)、映画(films)その他の番組または報道(reports)を含むがこれに限られない生放送(live broadcasts)または録画放送(pre-recorded broadcasts)において、該スポーツ、イベント、番組または報道内の数的資料(statistics)及びまたはスポンサーロゴ及びまたは情報/商品情報を提供する目的で、アイテムにタグを付すことに用いることができる。
フレーム内の識別デバイスを識別するプロセスを自動化することで、本発明は、上述の動画像内の商品にタグを付すプロセスに適用することができる。
誤解を避けるために、動画像(moving image)の用語は、2D及び3Dの両方を含み、例えば、ビデオ映像(video footage)、映画映像(movie footage)、テレビ画像(television pictures)、アニメーション、コンピュータによって生成された画像などのものを含む。動画像は、無声(silent)であっても、サウンドトラックを伴ってもよい。動画像は、どのような適切なフォーマットのデジタル動画像ファイル(DVDやBlu−Rayのエンコードに用いられる標準フォーマットを含むが、これに限られるものではない)、動画像放送(moving image broadcast)、インターネットを介してストリーミングされる動画像またはビデオテープやフィルムリールなどのアナログ動画像記録媒体(analogue moving image record)を含んでもよい。
本発明によるタグ付与方法は、更に、タグを付すアイテムの動作軌跡(motion track)を特定するステップを含んでもよい。動作軌跡にタグを付してもよい。動作軌跡は、画像の上にディスプレイ表示されてもよい。このことにより、人間であるオペレータがその正確性を確かめることができる。不一致(false matches)や誤認識を減らすために、本発明の方法は、前のフレーム内におけるアイテムの位置と隣接する位置のみ識別を行うように制限(constrain)してもよい。動作軌跡が誤っていた場合、オペレータは動作軌跡を調整することができる。動作軌跡の調整は、マウス、トラックボール(trackball)、タッチパッド(touch pad)またはタッチスクリーン(touch screen)システムを含むがこれに限られるものではない制御入力手段(control input means)によって行うことが可能である。
再生中、タグは、ディスプレイにアイテムが表示されている間、見えるようになっていてもよく、断続的または観者の要求によって見えるようになってもよい。
選択したアイテムに、1以上の識別デバイスを設けておくことも可能である。1または各識別デバイスは、固有に識別可能にしておくことができる。このような状況において、画像を取り込む前に、1または各識別デバイスを、特定のアイテムに割り当てておくことができる。このようにしておけば、アイテムに関する情報を、動画像内のアイテムに適用されたタグに自動的に割り当てることが可能になる。
1または各識別デバイスは、色、形、パターンその他の検出可能な画像の特性(image property)によって識別できればよい。識別デバイスは、視覚的な特徴を有するエレメント(element)または電磁スペクトルの別の領域において特徴的な態様(distinctive appearance)を有するエレメントであってもよい。個々の識別デバイスを識別するために、特徴的な態様を用いることができる。特徴的な態様は、可視光の領域においては明瞭でないかもしれないが、赤外線や紫外線の領域において明確に区別することができる。特徴的な態様は、パターンまたは比較的明るい単色部分であってもよい。典型的には、特有なエレメントは、可視光、RF、赤外線または紫外線信号を反射及び/または発信(emit)するものであってもよい。信号は、ほぼ連続的または断続的であってもよい。もし信号が断続的なものである場合、個々の識別デバイスを識別すること及びそのデバイスについてのさらなる情報、位置または態様を提供することに使用することができる。RF、紫外線または赤外線信号の実施例では、動画像を取り込むのに用いる手段は、可視光の領域ではなく、電磁放射線を検出することが可能な手段を装備していてればよい。典型的には、動画像を取り込むのに用いる手段は、取り込まれた画像内の識別デバイスの位置を特定することができるように、異なるスペクトル領域で同じ画像エリアを取り込むように動作してもよい。
実施例によっては、識別デバイス、または、画像内の選択されたアイテムの位置は、第2の画像(second image)を用いて特定することが可能である。第2の画像は、識別デバイスの特有のエレメント(distinctive elements)を明瞭に(clealy)示すようになっている。第2の画像は、従来のセンシング・アレイ(sensing array)と別個に(separately to)、隣接して(adjacent to)または散在させて(interspersed with)または混在させて(incorporated with)設けられた、専用の(dedicated)付加的センシング・アレイによって作成されてもよい。付加的センシング・アレイは、第2の画像内における特有のエレメントの明瞭さを強調するために、物理的(physical)またはデジタル・フィルタリング(digital filtering)を条件にしてもよい。付加的にまたは代わりに、第2の画像は、従来のセンシング・アレイの出力をデジタル・フィルタリングすることで作成されていてもよい。
タグの付与が完了した後に、識別デバイスが取り込まれた動画像を損ねる(detracts)または動画像ファイル内に映り込んでいる場合には、最終的な動画像から識別デバイスの可視的な形跡を除去するために適切なポストプロダクション技術(post production techniques)を適用してもよい。
RFを発信する識別デバイスを組み入れた実施例では、識別デバイスの位置を追跡する(track)ために2以上のRF受信機(RF receivers)が設けられていてもよい。必要ならば、1以上のRFブースター(RF booster)またはリレーステーション(relay stations)を設けておいてもよい。このようにすれば、距離の離れた場所でも識別デバイスを認識及び位置を特定できる。
動画像の一場面の各フレーム内の識別デバイスの位置は、適切な演算処理装置(processing unit)によって特定される。演算処理装置は、動画像の一場面を取り込むのに用いる手段のそれぞれと追跡手段のそれぞれと通信を行っていてもよい。
演算処理装置は、ユーザが操作可能な制御手段(user actuable controls)を備えていてもよい。制御手段は、動画像内の複数の識別デバイスのうち、どの識別デバイスにタグを付するかをユーザが選択することを可能にしてもよい。制御手段は、タグに関連付けられた情報を変更することも可能にしてよい。典型的には、情報は、専用のデータベースから検索されてもよい。付加的にまたは代わりに、情報は、演算処理装置によって生成されてもよい。
本発明の第2の態様によれば、動画像内に現れるアイテムにタグを付すことを可能にする方法であって、タグを付すアイテムにまたはアイテム中に識別デバイスを設けるステップと、タグを付すアイテムの画像を含む動画像の一場面を取り込むステップと、動画像の一場面を取り込むのに用いる手段の位置を特定するステップと、識別デバイスの位置を特定するステップと、動画像の一場面を取り込むのに用いる手段と識別デバイスの相対的な位置を特定して、タグを付すアイテムがフレーム内にあるか否かを特定し、タグを付すアイテムがフレーム内にある場合には、タグを付すアイテムがフレーム内における位置を特定するステップとからなることを特徴とするタグ付与方法が提供されている。
本発明の第2の態様の方法は、必要なだけまた望ましいだけ、本発明の第1の態様の方法の特徴を一部または全部含んでいてもよい。
この方法は、一度に2以上の識別デバイスの位置を特定することに使用することが可能である。この方法は、一度に2以上の動画像の一場面を取り込むのに用いる手段の位置を特定することに使用することが可能である。
動画像の一場面を取り込むのに用いる手段の位置は、予め決められていてよい。代わりに、動画像の一場面を取り込むのに用いる手段の位置は、追跡されてもよい。動画像の一場面を取り込むのに用いる手段の向き及び/または傾斜角は、予め決められている、または、追跡されてもよい。動画像の一場面を取り込むのに用いる手段の位置の追跡は、動画像の一場面を取り込むのに用いた手段に識別デバイスを取り付けることで達成される。
識別デバイスの位置は、追跡手段(tracking means)によって特定される。追跡手段は、動画像の一場面を取り込むのに用いる手段に組み込まれているか、または、別個に設けられていてもよい。好ましい実施例では、追跡手段は、動画像の一場面を取り込む領域内またはその周りの固定された予め定められた位置に設けられている。
識別デバイスは、追跡手段によって受信可能なRF信号を発信することが可能であってもよい。1以上の識別デバイスが設けられている場合、各識別デバイスには、固有の識別コードが与えられていてもよい。識別デバイスは、望ましい場合には、衣服やその他の備品の中に隠されるようになっている。
代わりの実施例では、識別デバイスは、外部からの信号を受信し、関連する情報を追跡デバイスに送信するようになっていてもよい。このことによって、識別デバイスは、GPSなどの既存の位置特定システムを使用するようになっており、自身の位置を特定する、または、識別デバイスの位置を追跡デバイスが特定するために十分な情報を提供してもよい。
動画像の一場面を取り込むのに用いる手段はカメラであってもよい。典型的には、デジタルまたはアナログの動画像用カメラまたはテレビカメラであってもよい。動画像の一場面を取り込むのに用いる手段には、傾斜角、向き、及び視界の範囲を特定する1以上のセンサが設けられていることが望ましい。
動画像の一場面の各フレーム内の識別デバイスの位置は、適切な演算処理装置によって特定される。演算処理装置は、動画像の一場面を取り込むのに用いる手段のそれぞれと追跡手段のそれぞれと通信を行っていてもよい。
演算処理装置は、ユーザが操作可能な制御手段を備えていてもよい。制御手段は、動画像内の複数の識別デバイスのうち、どの識別デバイスにタグを付するかをユーザが選択することを可能にしてもよい。制御手段は、タグに関連付けられた情報を変更することも可能にしてよい。典型的には、情報は、専用のデータベースから検索されてもよい。付加的にまたは代わりに、情報は、演算処理装置によって生成されてもよい。
この方法は、典型的には、制限された競技空間内で行われるスポーツイベントの一場面を取り込むのに適用される。その場合、1以上の追跡手段を、制限された競技空間内またはその周りに設ける。付加的に、1以上の動画像の一場面を取り込む手段を制限された競技空間内またはその周りに設けることができる。
本発明の第3の態様によれば、動画像または静止画像内に現れるアイテムにタグを付すことを可能にすることに適しており、且つ、本発明の第1または第2の形態を実施可能なシステムであって、タグを付すアイテムの画像を含む動画像の一場面を取り込む手段と、動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出し、動画像のフレーム内におけるタグを付すアイテムの位置を特定する手段とからなることを特徴とするタグ付与システムが提供されている。
本発明の第3の態様のシステムは、望ましいだけまた適切なだけ、本発明の第1及び第2の態様の特徴を一部または全部含んでいてもよい。
実施例によっては、識別デバイス、または、画像内の選択されたアイテムの位置は、第2の画像を用いて特定することが可能である。第2の画像は、識別デバイスの特有のエレメントを明瞭に示すようになっている。第2の画像は、従来のセンシング・アレイと別個に、隣接してまたは散在させてまたは混在させて設けられた、専用の付加的センシング・アレイによって作成されてもよい。付加的センシング・アレイは、第2の画像内における特有のエレメントの明瞭さを強調するために、物理的またはデジタル・フィルタリングを条件にしてもよい。付加的にまたは代わりに、第2の画像は、従来のセンシング・アレイの出力をデジタル・フィルタリングすることで作成されていてもよい。
動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出する手段は、動画像の一場面を取り込むのに用いる手段の位置を特定する手段と、識別デバイスの位置を特定する手段と、動画像の一場面を取り込むのに用いる手段と識別デバイスの相対的な位置を特定し、タグを付すアイテムがフレーム内にあるか否かを特定し、タグを付すアイテムがフレーム内にある場合には、フレーム内におけるタグを付すアイテムが位置を特定する手段とからなる。
動画像の一場面を取り込むのに用いる手段の位置は、予め決められていてよい。代わりに、動画像の一場面を取り込むのに用いる手段の位置は、追跡されてもよい。動画像の一場面を取り込むのに用いる手段の向き及び/または傾斜角は、予め決められている、または、追跡されてもよい。動画像の一場面を取り込むのに用いる手段の位置の追跡は、動画像の一場面を取り込むのに用いた手段に識別デバイスを取り付けることで達成される。
識別デバイスの位置は、追跡手段によって特定される。追跡手段は、動画像の一場面を取り込むのに用いる手段に組み込まれているか、または、別個に設けられていてもよい。好ましい実施例では、追跡手段は、動画像の一場面を取り込む領域内またはその周りの固定された予め定められた位置に設けられている。
識別デバイスは、追跡手段によって受信可能なRF信号を発信することが可能であってもよい。1以上の識別デバイスが設けられている場合、各識別デバイスには、固有の識別コードが与えられていてもよい。識別デバイスは、望ましい場合には、衣服やその他の備品の中に隠されるようになっている。
代わりの実施例では、識別デバイスは、外部からの信号を受信し、関連する情報を追跡デバイスに送信するようになっていてもよい。このことによって、識別デバイスは、GPSなどの既存の位置特定システムを使用するようになっており、自身の位置を特定する、または、識別デバイスの位置を追跡デバイスが特定するために十分な情報を提供してもよい。
動画像の一場面の各フレーム内の識別デバイスの位置は、適切な演算処理装置によって特定される。演算処理装置は、動画像の一場面を取り込むのに用いる手段のそれぞれと追跡手段のそれぞれと通信を行っていてもよい。
演算処理装置は、ユーザが操作可能な制御手段を備えていてもよい。制御手段は、動画像内の複数の識別デバイスのうち、どの識別デバイスにタグを付するかをユーザが選択することを可能にしてもよい。制御手段は、タグに関連付けられた情報を変更することも可能にしてよい。典型的には、情報は、専用のデータベースから検索されてもよい。付加的にまたは代わりに、情報は、演算処理装置によって生成されてもよい。
システムは、さらに、取り込まれた動画像をディスプレイ表示し、ディスプレイ表示された取り込まれた画像内のタグを付することが可能なアイテムの存在を示す手段と、示されたアイテムの選択及びタグの付与を可能にするユーザが操作可能な入力手段と、選択したアイテムのフレーム間の動作の軌道(motion path)を追跡するオブジェクト認識手段とを備えていてもよい。
本発明の第4の態様によれば、本発明で使用することに適している識別デバイスであって、アイテムに識別デバイスを取り付けるための取付手段と、識別デバイスを識別するために適切に装備された動画像用カメラ(moving image camera)によって検出可能であり、且つ、取り込まれた画像内の識別デバイスの位置を特定するための特有なエレメントとから構成されていることを特徴とする識別デバイスが提供されている。
本発明の第4の態様の識別デバイスは、望ましいだけまた適切なだけ、本発明の第1、第2及び第3の態様の特徴を一部または全部含んでいてもよい。
取付手段は、どのような適切な手段であってもよく、ネジ(screw fasteners)、ピン(pins)、釘(nails)、クリップ(clips)、接着剤(adhesives)、接着テープ(adhesive tapes)または面ファスナー(hock and loop fabrics)を含むが、これらに限られるものではない。付加的または代わりに、識別デバイスは、アイテムの製造時に取り付けられる、または、組み込まれてもよい。
特有なエレメントは、視覚的な特徴を有するエレメントまたは電磁スペクトルの別の領域において特徴的な態様を有するエレメントであってよい。特徴的な態様または信号は、固有の識別デバイスを識別するのに使用することができる。特徴的な態様または信号は、スペクトルの可視光の領域では明瞭でないかもしれない。特徴的な態様の場合、態様は、パターンまたは比較的明るい単色部分であってもよい。特徴的な信号の場合、信号は、可視光、RF、赤外線または紫外線信号であってもよい。信号は、ほぼ連続的または断続的であってもよい。信号が断続的なものである場合、信号を用いて固有の識別デバイスを識別することに使用することができる。そのような場合、可視光領域ではなく、電磁放射線を検出することが可能な手段をカメラに装備しておけばよい。典型的には、カメラは、取り込まれた画像内の識別デバイスの位置を特定することができるように、異なるスペクトル領域で同じ画像エリアを取り込むように動作してもよい。
識別デバイスは、追跡手段によって受信可能なRF信号を発信することが可能であってもよい。1以上の識別デバイスが設けられている場合、各識別デバイスには、固有の識別コードが与えられていてもよい。識別デバイスは、望ましい場合には、衣服やその他の備品の中に隠されるようになっている。
代わりの実施例では、識別デバイスは、外部からの信号を受信し、関連する情報を追跡デバイスに送信するようになっていてもよい。このことによって、識別デバイスは、GPSなどの既存の位置特定システムを使用するようになっており、自身の位置を特定する、または、識別デバイスの位置を追跡デバイスが特定するために十分な情報を提供してもよい。
本発明の第5の態様によれば、本発明の様々な態様(aspects)に適した動画像用カメラであって、画像を取り込む画像取込手段と、取り込まれた画像内において本発明の第4の態様による識別デバイスを検出し、識別し及び位置を特定する識別手段とを備えていることを特徴とする動画像用カメラが提供されている。
本発明の第5の態様のカメラは、望ましいだけまた適切なだけ、本発明の第1、第2、第3及び第4の態様の特徴を一部または全部含んでいてもよい。
第2の画像を用いて識別デバイスの位置または画像内の選択されたアイテムの位置を特定する実施例においては、第2の画像は、識別デバイスの特有のエレメントを明瞭に示すようになっていてもよい。第2の画像は、従来のセンシング・アレイと別個に、隣接してまたは散在させてまたは混在させて設けられた、専用の付加的センシング・アレイによって生成されてもよい。付加的センシング・アレイは、特有のエレメントまたは第2の画像内のエレメントの明瞭性を強調するために物理的またはデジタル・フィルタリングを前提としていてもよい。付加的または代わりに、第2の画像は、従来のセンシング・アレイの出力を物理的またはデジタル・フィルタリングすることで作成されてもよい。
RFを発信する識別デバイスを含む実施例においては、カメラは識別デバイスの位置を追跡するために2以上のRF受信機を含んでいてもよい。
本発明の第6の態様によれば、観者に対して動画像の付加情報を提供する方法であって、タグを付すアイテムにまたは中に識別デバイスを設けるステップと、タグを付すアイテムの画像を含む動画像の一場面を取り込むステップと、動画像の一場面の各フレーム内における識別デバイスの存在及び位置を検出し、動画像のフレーム内におけるタグを付すアイテムの位置を特定するステップと、アイテムの特定された位置にタグを付すステップと、タグの存在を示すステップと、1以上のタグと関連付けられた情報を表示する要求を検出するステップと、要求のあった情報を動画像の上にディスプレイ表示するステップとからなることを特徴とする情報提供方法が提供されている。
この方法を用いることで、観者は、いつ更なる情報を得られるか、且つ、その情報に容易にアクセスすることができるかを容易に知ることができる。各場面における、タグを付されたアイテムの位置は、適切な手段または方法によって特定することができる。典型的には、本発明の第6の態様は、望ましいだけまた適切なだけ、本発明の第1、第2、第3、第4及び第5の態様の特徴を一部または全部含んでいてもよい。
タグを付するアイテムは、イベントの参加者(participant)、イベントの観客(spectator)またはイベントで使用されるまたは関連のある他のアイテムであってもよい。
タグの存在を示す視覚的表示は、自動または観者の行動に対する応答であってもよい。観者の行動は、タグの視覚的表示ディスプレイ表示モード(tag visual indication display mode)の選択であってもよい。タグの視覚的表示ディスプレイ表示モードは、有効と無効との間の切り替え(toggle)であってもよい。代わりに、タグの視覚的表示ディスプレイ表示モードは、観者の選択または要求に応じて一時的に有効にされてもよい。そのような場合、モードは、数秒などの限定された時間の間、有効にされてもよく、また、現在のシーンの終わりまでなど、画像ファイルに応じて継続するものであってもよい。付加的または代わりに、タグの視覚的表示は、ディスプレイ表示された画像の特定の領域を観者が選択したことに対する応答であってもよい。特定の領域は、関連付けられた商品がディスプレイ表示された領域または画像の他の専用の領域であってもよい。タグの視覚的表示は、数秒などの限定された時間の間、有効にされてもよく、また、現在のシーンの終わりまでなど、画像ファイルに応じて継続するものであってもよい。
付加的または代わりに、タグが付されたアイテムは、視覚的に(visually)強調表示(highlighted)されていてもよい。視覚的な強調表示は、一時的に(momentary)、断続的(intermittent)にまたは常に(constant)表示されるものであってもよい。実施例によっては、強調表示は、観者の要求に応じて行われる。
タグの視覚的表示ディスプレイ表示モードを選択すると、観者には選択可能な参加者、観客またはアイテムのリストが提供されてもよい。リストは、動画像の上、動画像に沿ってまたは動画像に代わって現れてもよい。リストは、望ましい場合には、カテゴリ分けされていてもよい。
ディスプレイ表示される情報は、動画像の上に表示されるウィンドウまたはダイアログ・ボックス内にディスプレイ表示されてもよい。ディスプレイ表示される情報は、次に挙げるものを含んでいてもよい:参加者、観客またはタグを付すアイテムの識別情報(identity);それらに関連付けられたスポンサーのロゴやその他の情報;参加者の過去または現在の成績に関する数的資料などの情報;参加者、観客またはアイテムの1以上の画像;関連商品の購入詳細情報など。
ディスプレイ表示される情報は、画像内の参加者、観客またはアイテムと同じまたはほぼ同じ位置に表示されてもよい。情報は、参加者、観客またはアイテムが場面内に映っている場合にのみディスプレイ表示されてもよい。付加的または代わりに、情報は、参加者、観客またはアイテムが場面内に映っていない場合、スクリーンの余白部分にディスプレイ表示されてもよい。このことにより、本発明の方法によって、選手が場面に映っている場合に観者がスポーツイベントにおける選手の動きを追跡したり、観客が場面に映っている場合に観者が知っている特定の観客の位置を知ることが可能になる。
観者の要求は、適切な制御手段を用いて行われる。制御手段は、画像ファイルを、上映及び/またはディスプレイ表示するのに用いているシステムとインターフェースで接続されるどのようなタイプの制御手段でもよい。そのような適切なタイプの制御手段は、システムに直接備えられている制御インターフェース(control interface)、有線または無線接続(wired or wireless link)でシステムに接続されたキーボードまたはキーパッド(key pad)、有線または無線接続またはその他の制御ユニット(control unit)でシステムに接続されたカーソル指向装置(cursor directing devices)を含む。
システムは、専用のデバイスまたは1以上の接続されたデバイスによって構成されていてもよい。画像ファイルを上映及び/またはディスプレイ表示するのに用いる適切なシステムはコンピュータを含み、また、テレビ及びDVDプレーヤ、ゲーム・コンソールまたはテレビ信号デコーダ(television signal decoder)などのメディアプレーヤ(media player)と関連して作動するテレビまたはモバイル・テクノロジー・デバイス(mobile technology device)を用いたものも含む。
本発明の第7の態様によれば、観者に対して動画像の付加情報を提供するシステムであって、動画像の動画像コンテンツを読み込み、動画像内の関連付けられた情報の存在を示す1以上のタグの存在を検出する読込手段(reading means)と、動画像の動画像コンテンツをディスプレイ表示し、動画像の上にまたは動画像に沿ってタグの存在の視覚的表示をディスプレイ表示するディスプレイ手段(display means)と、1以上のタグに関連付けられた情報をディスプレイ表示する要求を行うための観者操作手段(viewer actuable means)とからなり、観者操作手段に応答して、ディスプレイ手段は、要求された情報を静止画像及び/または動画像の上にディスプレイ表示することを特徴とする情報提供システムが提供されている。
本発明の第7の態様のシステムは、望ましいだけまた適切なだけ、本発明の第1乃至第6の態様の特徴を一部または全部含んでいてもよい。
例示として、また、添付の図面を参照して、本発明をさらにわかりやすくするために、以下により詳細に示す。
同時係属中の出願PCT/GB2008/000706に開示されている先の発明の実施例において、例示的なシーンにおける特徴付けられた商品(featured product)に関する情報の表示を示す図である。 動画において、シーンのコース上で、選択されたアイテムの動きを示す概略図である。 本発明による方法を実行するためのシステムの略ブロック図である。 動画像を撮影する前に選択されたアイテムに取り付けられた識別デバイスの概略図である。 画像フレーム内における識別デバイスの位置または選択されたアイテムの位置を特定するための本発明によるデュアル画像システムを示す概略図である。 (a)は、本発明の1つの具体的な実施例を示すスポーツ競技場の概略図であり、(b)は、図6の具体的な実施例のシステムの概略図である。 ダイアログ・ボックス形式で関連付けられたタグによって複数の選手が特定されているフットボール競技場の概略のスクリーンショットである。
PCT/GB2008/000706に開示した先の発明は、動画像(典型的には、映画またはコンピュータゲームまたはテレビ番組)の観者が情報を取得でき、もし希望するのであれば、動画像及び/または静止画像内で見た商品及び/またはアイテム及び/またはサービスを購入することができる方法を提供している。該発明の方法において、動画像がディスプレイ・ユニットにディスプレイ表示され、観者には適切な制御手段が提供されている。動画像は、付加情報及び/またはアイテム及び/またはサービスの存在を示す1以上のタグを含んでいる。先述のタグの存在は、観者の選択、要求または行動に対する応答として、動画像と共に観者に対してディスプレイ表示されている。観者は、先述の情報の表示を要求することができ、その気があれば、関連した商品及び/またはアイテム及び/またはサービスを注文することができる。
図1には、ディスプレイ装置に動画像からの例示的なフレーム10が表示されている。例示的なフレーム10は、画像の下部のアイコン・バー11と共にディスプレイ表示されている。ただし、アイコン・バー11は、他の代替の実施例では、必ずしも表示されている必要はない。タグの視覚的表示ディスプレイ表示モードが選択されなければ、通常の画像と同様にディスプレイ表示される。選択は、制御手段(control means)の適切な入力手段を作動させることで行うようにすればよい。シーン内にタグが付されたアイテム20が現れた場合、選択可能なアイコン12がアイコン・バーにディスプレイ表示される。典型的に、図1において眼鏡(spectacles)について表示されているように、アイコンは、関連付けられているアイテム20を絵で表した見本であってもよい。このことにより、観者が商品を特定することを可能にし、且つ、ディスプレイ表示されたシーンにタグを付されたアイテムが2以上存在する場合に、2以上のアイコンを区別することを可能にする。さらに、または、代わりに、動画像内において、アイテム20は常に、または、一時的に強調表示されていてもよい。1つの典型的な実施例においては、観者が、商品が配置されている画像または画像エリア(area of the image)の上にカーソルをスクロールさせた場合に、アイテム20が強調表示される。
アイコン12は、制御手段を使用して選択することができる。これは、1または複数の専用の制御入力装置を作動させることで達成される。代わりに、もし制御手段が適しているのであれば(例えば、コンピュータ・マウスやそれに類するものであれば)、観者は、カーソルを商品の上にスクロールさせることで、直接商品を選択することができる。
図1に示されているように、商品を選択すると、画像は一時停止され、そのアイテム20に関連する情報がディスプレイ表示される。情報は、静止画像及びまたは動画像の上に提供される、ポップアップウィンドウ(pop up window)13でディスプレイ表示してもよい。場合によっては、図示したように、商品のすぐ近くでもよい。代わりに、情報は、静止画像及びまたは動画像と並んだ(alongside)情報バー(information bar)にディスプレイ表示してもよい。情報は、アイテムの品質(quality)の説明14、1以上のアイテム画像15、製造業者名及び値段を含んでいてもよい。情報は、付加的にまたは代わりに、アイテムまたはアイテムと関連した人または会社に関する特有の(general)または一般的な背景(background)、歴史的または教育的データに関するものであってもよい。
ディスプレイ表示された情報は、選択可能な購入アイコン(purchase icon)(図示せず)も含んでいてもよい。シッピングカートの形をしていてもよい。本実施の形態では、購入アイコンは、観者がアイコン12または画像15上をスクロールするか、専用の制御入力装置を作動させると現れるように構成されている。それから、観者は、適切な方法で、制御手段を用いて、購入アイコンを選択することができる。購入アイコンを選択することで、商品が顧客のショッピングリストに追加される。アイコンバーにディスプレイ表示されたショッピングカート・アイコン17を選択することで、観者はショッピングリストを再検討及び編集し、購入に進むことができる。代わりに、この選択は、制御手段の専用の制御入力装置を作動させることで行ってもよい。
ショッピングリストに商品を追加してから、観者はこの時点で購入を完了するか、画像を見ることを継続するか、及び/または、観者は関連した広告を選択する、及び/または、関連した広告に案内される(directed to)。典型的に、これは、適切な画面上のアイコンやボタンを選択するか、制御手段の適切な入力を作動させることで可能である。
本発明は、動画像内における選択したアイテムの動作軌跡を識別する方法に関するものである。この方法は、動画像を撮影する(shoot)前に、1以上の識別デバイス30をアイテムに取り付けることを必要とする(involves)。ポストプロダクションまたは生の(live)ストリーミング(streaming)または放送において、オブジェクト(object)は、1以上の識別デバイス30によって認識することが可能になる。図2に示すように、フレーム内における識別デバイス30の連続的な位置は、動作軌跡50として描かれる(plotted)。すると、フレームが進むにつれ、動作の軌道に沿ってタグを自動的に適用することができる。上述のような動画像の場合、タグは、常時または断続的及び/または観者の要求に対する応答として、可視化されてもよい。
識別デバイス30の誤認識を減らすために、選択した一場面(shot)内のフレーム間の認識は、識別デバイス30が、前のフレーム内における位置と、隣接またはほぼ隣接する位置にある場合に判定される(determine)ように制限してもよい。
図4には、例示的な配置が図示されており、識別デバイス30が、アイテム20(上述の例のように、眼鏡)に適用されている。識別デバイスは、適切な装備を備えた(equipped)動画像用カメラによって検知することが可能な特殊なエレメントを有している。動画像用カメラは、識別デバイスを識別し、且つ、判定を行う対象の取り込んだ画像内の位置を利用可能にする。典型的には、この特殊なエレメントは、赤外線または紫外線周波数におけるエレメントの態様であるため、単色のカバー(monochromatic covering)、模様のあるカバー(patterned covering)または連続的または断続的な輻射の放射線(emission of radiation)である。代わりに、可視光の特定の色であってもよい。取り込んだ動画像内に識別デバイスが目立ち(visible)、そのことによって動画像の見た目(appearance)を損なう場合には、適切なポストプロダクション技術を用いて、ディスプレイ表示されている画像から取り除くことが可能である。
動画像内の識別デバイス30、または、選択されたアイテム20の位置と動作を追跡するために、特別に適応された(adapted)カメラ及び/または特別に適応された演算処理装置(processing)を用いてもよい。そのような状況においては、シーンの従来の動画像10を取り込み、付加的に、シーンの第2の画像90を取り込む、または生成する。第2の画像90は、取り込んだ画像内に存在する1または複数の識別デバイスを優先的に表示するように適応されている。図5には、並んだ第1及び第2の画像の具体例を示してある。
第2の画像90は、取り込んだ画像内における識別デバイス30の位置、または、動作軌跡50を特定可能にする。動作軌跡50には、上述のように、タグを付すことができる。
第2の画像90は、カメラ内の従来のセンシング・アレイによって作成された画像をデジタル・フィルタリングすることによって得ることもできる。第2の画像90は、カメラの従来のセンシング・アレイに付加的に備えた第2のセンシング・アレイにより、且つ、物理的またはデジタル・フィルタリングによって生成することができる。付加的に、または、代わりに、第2のアレイは、従来のセンシング・アレイのセンシング素子(sensing elements)に隣接して取り付けられた、または、混ぜられた(intermingled)センシング素子から構成することが可能である。
さらに代わりの実施例(arrangement)では、1または各識別デバイス30は、付加的にまたは代わりにRF信号を発信することができる。RF信号によって、識別デバイスを固有に識別することができる。また、識別デバイス30の特有の特性(distinctive properties)を識別することもできる。他の実施例では、RF信号は、画像内において、識別デバイスの位置を示すことに用いることもできる。このようにするために、画像を取り込むカメラに2以上のRF受信機を接続または組み込むことができる。したがって、RF受信機は識別デバイスのカメラに対するおおよその位置、または、画像内の識別デバイスのおおよその位置を提供することができる。識別デバイスがカメラから比較的離れている場合には、付加的なRFロケータ(RF locator)またはリレーステーションを用意しておいてもよい。これによって、RF信号を用いて一場面の中の距離の離れた対象の位置を定めることができる。代わりに、RF信号をカメラに識別デバイスの性質(nature)または態様に関する情報の伝達に用いることができる。この情報によって、ポストプロダクション及びまたは生放送において、識別デバイスをより早く認識することができる。
本発明は、上述の機能を可能にし、且つ、上述の方法の結果をユーザによる制御及びまたは調整することを可能にするシステム100も提供する。図3には、このようなシステムのブロック図を示してある。本システムは、ディスプレイ手段102に接続されたファイルリーダ/ライタ(file reader/writer)101から構成されている。ファイルリーダ/ライタ101は、動画像を読み込み、ディスプレイ手段102を制御可能であり、ファイルの画像内容(image content)をオペレータ(operator)に対して表示することが可能である。ファイルリーダ/ライタ101は、タグ及びタグに関連した情報を含む、更新された動画像を書き込むことも可能である。読み込み/書き込みされた画像ファイルは、適切なファイル記憶装置(file store)110から読み込まれ/記憶装置110に書き込まれる。ファイル記憶装置110は、データ記憶手段の形式は問わないものであり、磁気ドライブなど、メモリ集積回路(integrated memory circuits)(例えば、フラッシュドライブ〔flash drives〕)、テープベースのデータ記憶手段、光学ディスク(例えば、CD,DVDまたはこれらに似たものその他の電気的形式によるもの)、光学または磁気データ記憶手段を含むがこれに限られない。代わりに、ファイルリーダ/ライタ101は、生放送またはストリーミングされたデータ(streamed data)を受信及び続くプロセシング送信(following processing transmit)を行うことが可能でもよい。
ファイルリーダ/ライタ101及びディスプレイ手段102の操作は、適切なユーザ入力手段103によって制御する。ユーザ入力手段103は、どのような適切なユーザ入力手段の組み合わせであってもよく、次のものを含むが、これに限られるものではない:1以上のキー(keys)またはキーパッド(key pad)及び/またはトラックボール(trackball)、タッチスクリーン(touch screen)、タッチパッド(touch pad)、ジョイスティック(joy stick)またはコンピュータ・マウス(conputer mouse)などのポインティング・デバイス。好ましい実施の形態では、ディスプレイ手段102はタッチスクリーンディスプレイであり、入力手段103は、スクリーン上に表示された1以上のアイコンを含んでいる。そのような実施の形態では、オペレータは、適切なスタイラス(stylus)を用いて、選択またはその輪郭(outline)の周りを描くことにより、初めにオブジェクトを選択または識別することができる。
本システムは、さらに、選択されたアイテムに取り付けられている識別デバイス30を認識することが可能な認識手段(recognition means)104を備えている。次に、認識手段104は、続くフレームにおいて、識別デバイス30(すなわち、選択されたアイテム)を認識し、且つ、位置決め(locate)することが可能であり、一場面を通じて(through the shot)、アイテムの動作軌跡を生成する。そして、動作軌跡に対してタグを付し、ファイルリーダ/ライタ101により、更新された動画像にタグ及び動作軌跡が書き込まれる。
上述の発明のさらに可能な実施の形態は、生放送(live)であろうと、録画放送(pre-recorded)であろうと、スポーツ放送番組(sports broadcasts)に関するものである。次の例は、ボールをベースにしたスポーツを用いて説明している。ただし、本発明は、自動車レース(motor racing)、自転車競技(cycling)、競馬(horce racing)、ヨット競技(sailing)、ボクシングなどに関連するがこれらに限られない放送番組にも用いることができる。一般に、本発明は、付加情報及び/または購入情報及びアイコン及びまたはスポンサーのロゴをディスプレイ表示する目的で競技者(contestants)及び/または商品アイテムにタグを付すことによって強調する(enhanced)ことが可能などのようなスポーツの放送番組に応用しても有用である。
次に、図6a及び図6bには、さらに可能な実施の形態を図示している。この実施の形態では、本発明は、放送用に競技場(pitch)200で行われるスポーツイベントの映像(footage)を記録するために用いられている。放送において、選手(players)201及びボール202にタグが付されている。このことにより、観者は、関連付けられたタグを上述の方法で選択することで、選手に関する情報、当の試合における固有の成績(specific performance)または彼らの装備品(equipment)またはテレビコマーシャル(endorsements)を呼び出すことができる。
図6a及び図6bの実施の形態では、各選手201及びボール202に1以上の識別デバイス203を取り付けることでタグが付される。識別デバイス203は、選手の衣服に取り付けておくか、またはボール202に組み込んでおくことができる。各識別デバイス203は、RF信号を発信し、競技場200の周りに配置されたRF検出器(RF detector)205によって検出することができる。受信した信号を分析することにより、各選手201及びボール202が試合中のいつでもどこにいるか特定することができる。
試合の映像は競技場の周りに配置された1以上のカメラ204によって取り込まれる。カメラ204の位置は既知である。試合前に競技場200に関してカメラ204を固定の場所に設置する、または、試合中に識別デバイス203を追跡することができるように識別デバイス203に応じてカメラ204の位置を合わせることで、目的を達成することができる。付加的に、カメラが向けられている方向、傾斜角及びズーム設定はモニターされている(monitored)。
好ましい実施の形態では、少なくともいくつかのカメラ204は、固定位置に配置され、RF検出器を組み込んでいる。このことによって、本発明を実施するのに、別個のRF検出器205を準備することなく、適切な装備を備えたカメラ204を利用することができる。
上記情報が全て使用可能な場合、演算処理装置210は、常に、競技場のどの部分がカメラによって取り込まれた映像内にあるか、且つ、競技場の全ての位置が取り込まれた映像内のどこで見られるか特定することができる。データと、選手201及びボール202の位置データを組み合わせることで、各カメラ204によって取り込まれた映像内に、どの選手201が写っているのか(写っている場合)及びボール202が写っているのかを特定することができ、且つ、映像の各フレーム内のどこで選手201またはボール202を見つけることができるかを特定することができる。したがって、1以上の選手201またはボール202にタグを自動的に付すことができる。
本発明をボールまたは選手の動きを追跡することに使用することができる一方、本発明の最も重要な目的は、一場面において選手、ドライバーまたは競技者を追跡し、観者が特定の選手と関連付けられたタグを選択することができるようにすることである。関連付けられたタグは、数的資料/情報/スポンサーロゴをディスプレイ表示することを可能にし、また、選手及び/またはそのスポンサーに関連するまたは宣伝されている商品またはサービスを観者が直接購入することを可能にさえする。ある選手が一場面またはカメラのカットを離れて他の場面に移ると、その選手の情報のタグは、観者がタグを解除するまで、スクリーンの1つの角部に見える状態で残る。このことは図7に描かれている。図7には、競技場300のスクリーンショット310を概略的に図示してあり、多くの観客が競技場300を取り囲むスタンドからフットボール(football)の試合を観戦している。この例では、観者は、場面310内の2人の選手301に関連付けられたタグを選択し、選手304を選択しないように判断した。そのため、選手301は、自動的に彼らの識別情報及び/または付加情報を示すダイアログ・ボックス303とタグ付けされている。観者は、現在の場面にいない2人の選手をさらに選択した。そのため、これらの選手と関連付けられたダイアログ・ボックス303が場面310の角部にディスプレイ表示されている。
イベントにおける観客が持ち運び可能な識別デバイスを購入することも可能である。このことにより、観者が観客の位置を追跡することが可能になる。この方法により、家にいる観者が、試合を観に行っている友人を見ることが可能になる。図7の例においては、観者は観客305と関連付けられたタグも選択しているため、観客305は、場面内にいる場合に、ダイアログ・ボックス303によって自動的に識別されている。このようなことが達成できるため、識別デバイスを購入または借りる場合に、観客は識別情報(identification)や名前やあだ名などの事項(details)やメッセージ(例えば、"Hi Mum!"、"Go on you reds!"、"You're not singing anymore!"等、必要に応じて)を関連付けられたデータベースにアップロードすることができる。これらの事項がダイアログ・ボックスに表示される。
どの選手/他者を追跡するかを選択するために、観者は、選択メニューにアクセスすることができる。選択メニューは、映像の上、映像に沿って、または、映像の代わりに現れるようにしてもよく、潜在的にタグを付すことが可能なアイテムまたは潜在的にタグを付すことが可能なアイテムをカテゴリごとに列挙してもよい。付加的にまたは代わりに、観客は観者に対して、イベントの中継(coverage)内において、彼らがタグを付されることが可能であることを示すメッセージを送ることが可能でも良い。このメッセージは、望ましいように、放送基盤(broadcast platform)を通じてまたは個別に送信すればよい。
本発明をボールまたは選手の動きを追跡することに使用することができる一方、本発明の最も重要な目的は、一場面において選手、ドライバーまたは競技者を追跡し、観者が特定の選手と関連付けられたタグを選択することができるようにすることである。関連付けられたタグは、数的資料/情報/スポンサーロゴをディスプレイ表示することを可能にし、また、選手及び/またはそのスポンサーに関連するまたは宣伝されている商品またはサービスを観者が直接購入することを可能にさえする。ある選手が一場面またはカメラのカットを離れて他の場面に移ると、その選手の情報のタグは、観者がタグを解除するまで、スクリーンの1つの角部に見える状態で残る。
多くのスポーツでは、試合中はいつでもボールは1つのみであるが、競技場200を離れるボールを回収するために試合が過度に遅延しないように、複数のボールが用意される場合がある。そのような場合、各ボール202に別々の識別デバイスを用意し、演算処理装置210が、どのボールが現在試合で使用されているのか特定する適切なアルゴリズムを適用すればよい。試合中に使用されているボールを識別すると、アルゴリズムは、そのボール202が競技場200を離れるまで、使用されているボールとして識別し続ける。もし試合中のボール202が識別されない場合、アルゴリズムは、全てのボール202の位置を識別する。もし1つのボールのみが競技場内で検出された場合、アルゴリズムは、そのボール202が試合で使用されているとみなす。もし競技場200内に1つもボールが検出されない場合、アルゴリズムは、全てのボールの位置を選手201の位置と比較する。もし1つのボールが、競技場の外の選手201と同じ位置にあるか、または、すぐ隣接する位置にある場合、そのボール202が試合で使用されているとみなす。ボール202を支配している(possesion)ときに強制的にライン外に出された(out of play)選手や、フットボールにおけるスローイン(throw in)やラグビーにおけるラインアウト(line out)のような二次的な再スタート(subsequent restart)の場合にも、この状況は相当するかもしれない。
演算処理装置は、1以上のカメラ204によって取り込まれた画像及びその中の1つまたは各識別デバイス203をディスプレイ表示するディスプレイ・ユニット211に接続されている。それから、ユーザは、放送において、どの識別デバイス30にタグを付すか選択する。これは適切なユーザ入力手段212によって達成される。ユーザ入力手段212は、次のものを含むが、これに限られるものではない:1以上のキーまたはキーパッド及び/またはトラックボール、タッチスクリーン、タッチパッド、ジョイスティックまたはコンピュータ・マウスなどのポインティング・デバイス。
タグが選択された際に示される情報は、専用のデータベース213から読み込む。付加的に、または、代わりに、いくつかのデータは、演算処理装置210によって特定された位置データから取得する。例えば、演算処理装置は、選手201または試合で使用しているボール202の動いた距離、動きの速さまたは代表的な位置を与える。
上述の実施の形態は、スポーツイベントの生中継との関連で表現されているが、他のイベントの生中継、もちろんイベントの録画中継または他のタイプの単一のシーンの撮影に適用できない理由はない。
さらに、上述の実施の形態は、第1に、RFに関する実施例として表現されているが、他の状況においては、可視光、IRまたはUVを用いた識別デバイスと適切な装備を備えたカメラを用いることもできる。これらの実施例は、チームのユニフォームではなく、個別の装備を有しているスポーツイベントに特に適している。そのような場合には、各選手は、固有IR、UVまたは視覚的サイン(visual signature)をディスプレイ表示または発信する、適切に適合された衣服または装備のアイテムを有している。実例として、たくさんの中から騎手服(jockey's silks)、ドライバーのヘルメット、スイマーのキャップまたはトランクス(swimmer's caps or trunks)が挙げられるが、この例に限られるものではない。
上述の発明の他の実例には、参加者または観客が識別デバイスを持って行くことができる、パレードやカーニバルなどの市民イベントまたは、マラソンや市民参加マラソン(fun run)などの大規模参加イベント(mass participation events)があるが、この例に限られるものではない。
上述の実施例は例としてのみ説明したものであり、本発明は上述の実施例に限定されるものではないのはもちろんである。

Claims (24)

  1. タグ付与システムが、動画像内に現れるアイテムにタグを付すことを可能にする方法であって、
    前記タグを付す前記アイテムのそれぞれにまたは前記アイテムのそれぞれの中には、識別デバイス設けられており、前記方法は、
    1以上の画像取込手段を用いて、前記タグを付す1以上の前記アイテムの画像を含む動画像の一場面を取り込むステップと、
    前記動画像の一場面を取り込むのに用いる手段の位置を特定するステップと、
    前記識別デバイスの位置を特定するステップと、
    前記動画像の一場面を取り込むのに用いる前記手段と前記識別デバイスの相対的な位置を特定して、前記タグを付す前記アイテムがフレーム内にあるか否かを特定し、前記タグを付す前記アイテムが前記フレーム内にある場合には、前記フレーム内における前記タグを付す前記アイテムの位置を特定するステップとからなり、
    記動画像の一場面を取り込むのに用いる前記手段に組み込まれているか、または、別個に設けられた追跡手段が、前記識別デバイスの1つまたはそれぞれの位置を特定
    前記追跡手段は、前記動画像の一場面を取り込む領域内またはその周りの固定された予め定められた位置に設けられており、
    前記識別デバイスの1つまたはそれぞれは、前記追跡手段受信可能なRF信号を発信することが可能であることを特徴とするタグ付与方法。
  2. 前記動画像の一場面を取り込むのに用いる前記手段の1つまたはそれぞれの位置は、予め決められている、または、追跡されていることを特徴とする請求項1に記載のタグ付与方法。
  3. 前記動画像の一場面を取り込むのに用いる前記手段の1つまたはそれぞれの向き及び/または傾斜角は、予め決められている、または、追跡されていることを特徴とする請求項1または2に記載のタグ付与方法。
  4. 前記動画像の一場面を取り込むのに用いる前記手段の1つまたはそれぞれの位置の追跡は、前記動画像の一場面を取り込むのに用いる前記手段の1つまたはそれぞれに前記識別デバイスを取り付けることで達成されることを特徴とする請求項3に記載のタグ付与方法。
  5. 1以上の前記識別デバイスが設けられている場合、前記識別デバイスのそれぞれには、固有の識別コードが与えられていることを特徴とする請求項1乃至4のうちいずれか1項に記載のタグ付与方法。
  6. 前記識別デバイスは、望ましい場合には、衣服やその他の備品の中に隠されるようになっていることを特徴とする請求項1乃至5のうちいずれか1項に記載のタグ付与方法。
  7. 前記識別デバイスは、外部からの信号を受信し、関連する情報を前記追跡手段に送信することを特徴とする請求項1乃至6のうちいずれか1項に記載のタグ付与方法。
  8. 前記識別デバイスは、GPSなどの既存の位置特定システムを使用するようになっており、自身の位置を特定するため、または、前記識別デバイスの位置を前記追跡手段が特定するために十分な情報を提供することを特徴とする請求項7に記載のタグ付与方法。
  9. 前記動画像の一場面を取り込むのに用いる前記手段は、デジタルまたはアナログの動画用カメラまたはテレビカメラなどのカメラから構成されていることを特徴とする請求項1乃至8のうちいずれか1項に記載のタグ付与方法。
  10. タグの付与が完了した後に、前記識別デバイスが取り込まれた動画像ファイルを損ねるまたは前記動画像ファイル内に映り込んでいる場合には、最終的な前記動画像ファイルから前記識別デバイスの可視的な形跡を除去するためにポストプロダクション技術を適用するステップを更に有することを特徴とする請求項1乃至9のうちいずれか1項に記載のタグ付与方法。
  11. 動画像または静止画像内に現れるアイテムにタグを付すことを可能にすることに適しており、且つ、請求項1乃至10のうちいずれか1項に記載の方法を実施可能なシステムであって、
    前記タグを付す1以上の前記アイテムの画像を含む動画像の一場面を取り込む手段と、
    前記動画像の一場面の各フレーム内における識別デバイスの1つまたはそれぞれの存在及び位置を検出し、前記動画像のフレーム内における前記タグを付す前記アイテムの位置を特定する手段とからなり、
    前記動画像の一場面の各フレーム内における前記識別デバイスの1つまたはそれぞれの存在及び位置を検出する手段は、
    前記動画像の一場面を取り込むのに用いる手段の位置を特定する手段と、
    前記識別デバイスの位置を特定する手段と、
    前記動画像の一場面を取り込むのに用いる前記手段と前記識別デバイスの相対的な位置を特定し、前記タグを付す前記アイテムがフレーム内にあるか否かを特定し、前記タグを付す前記アイテムが前記フレーム内にある場合には、前記フレーム内における前記タグを付す前記アイテムの位置を特定する手段とからなり、
    前記システムは、さらに、追跡手段を備えており、
    前記追跡手段は、前記動画像の一場面を取り込むのに用いる前記手段に組み込まれた、または、別個に設けられており、
    前記追跡手段は、前記動画像の一場面を取り込む領域内またはその周りの固定された予め定められた位置に設けられており、
    前記識別デバイスの1つまたはそれぞれは、前記追跡手段によって受信可能なRF信号を発信することが可能であることを特徴とするタグ付与システム。
  12. 1以上の前記識別デバイスの位置を追跡するために2以上のRF受信機が設けられていることを特徴とする請求項11に記載のタグ付与システム。
  13. 距離の離れた場所でも前記識別デバイスを認識及び位置を特定できるように、1以上のRFブースターまたはリレーステーションを設けていることを特徴とする請求項12に記載のタグ付与システム。
  14. 前記動画像の一場面を取り込むのに用いる前記手段には、傾斜角、向き、及び視界の範囲を特定する1以上のセンサが設けられていることを特徴とする請求項11乃至13のうちいずれか1項に記載のタグ付与システム。
  15. 前記動画像の一場面の各フレーム内の前記識別デバイスの位置を特定可能な演算処理装置を更に備えており、
    前記演算処理装置は、前記動画像の一場面を取り込むのに用いる前記手段のそれぞれと前記追跡手段のそれぞれと通信を行っていることを特徴とする請求項11乃至14のうちいずれか1項に記載のタグ付与システム。
  16. 前記演算処理装置には、ユーザが操作可能な制御手段が設けられており、
    前記制御手段は、動画像内の複数の識別デバイスのうち、どの識別デバイスにタグを付するかをユーザが選択することを可能にし、及び/または、タグに関連付けられた情報を変更することを可能にすることを特徴とする請求項15に記載のタグ付与システム。
  17. 前記タグに関連付けられた情報は、専用のデータベースから検索される、または、前記演算処理装置によって生成されることを特徴とする請求項16に記載のタグ付与システム。
  18. 取り込まれた動画像をディスプレイ表示し、ディスプレイ表示された前記取り込まれた画像内のタグを付することが可能なアイテムの存在を示す手段と、
    示されたアイテムの選択及びタグの付与を可能にするユーザが操作可能な入力手段と、
    選択したアイテムのフレーム間の動作の軌道を追跡するオブジェクト認識手段とを備えていることを特徴とする請求項11乃至17のうちいずれか1項に記載のタグ付与システム。
  19. 請求項1乃至10のうちいずれか1項に記載のタグ付与方法または請求項11乃至18のいずれか1項に記載のタグ付与システムに使用することに適している動画像用カメラであって、
    画像を取り込む画像取込手段と、
    取り込まれた画像内において1以上の識別デバイスを検出し、識別し及び位置を特定する識別手段とを備え、
    前記識別手段は、追跡手段を備え、
    前記動画像用カメラは、前記識別デバイスの位置を追跡するために2以上のRF受信機が設けられていることを特徴とする動画像用カメラ。
  20. 前記追跡手段がカメラ内に組み込まれていることを特徴とする請求項19に記載の動画像用カメラ。
  21. 前記追跡手段がカメラと分かれていることを特徴とする請求項19に記載の動画像用カメラ。
  22. 動画像の一場面を取り込むのに用いられる動画像用カメラは、可視範囲外の電磁放射線を検出可能な手段を装備していることを特徴とする請求項19乃至21のうちいずれか1項に記載の動画像用カメラ。
  23. 前記動画像用カメラには、傾斜角、向き、及び視界の範囲を特定する1以上のセンサが設けられていることを特徴とする請求項19乃至22のうちいずれか1項に記載の動画像用カメラ。
  24. ディスプレイ装置が、観者に対して動画像の付加情報を提供する方法であって、
    前記タグを付す前記アイテムがフレーム内にあるか否かを特定し、前記タグを付す前記アイテムが前記フレーム内にある場合には、前記フレーム内における前記タグを付す前記アイテムの位置を請求項1乃至10のうちいずれか1項に記載の方法によって特定するステップと、
    前記アイテムの特定された位置に前記タグを付すステップと、
    前記タグの存在を示すステップと、
    1以上の前記タグと関連付けられた前記情報を表示する要求を検出するステップと、
    要求のあった前記情報を前記動画像の上にディスプレイ表示するステップとからなることを特徴とする情報提供方法。
JP2011514117A 2008-06-18 2009-06-18 商品情報のタグ付け Expired - Fee Related JP5474953B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
GB0811140A GB0811140D0 (en) 2008-06-18 2008-06-18 Tagging product information
GB0811140.3 2008-06-18
GB0907595A GB0907595D0 (en) 2009-05-01 2009-05-01 Tagging product information
GB0907595.3 2009-05-01
PCT/GB2009/001518 WO2009153557A1 (en) 2008-06-18 2009-06-18 Tagging product information

Publications (3)

Publication Number Publication Date
JP2011527527A JP2011527527A (ja) 2011-10-27
JP2011527527A5 JP2011527527A5 (ja) 2012-08-02
JP5474953B2 true JP5474953B2 (ja) 2014-04-16

Family

ID=41055395

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011514117A Expired - Fee Related JP5474953B2 (ja) 2008-06-18 2009-06-18 商品情報のタグ付け

Country Status (4)

Country Link
US (1) US9386339B2 (ja)
EP (1) EP2304930A1 (ja)
JP (1) JP5474953B2 (ja)
WO (1) WO2009153557A1 (ja)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7315631B1 (en) 2006-08-11 2008-01-01 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
US8121361B2 (en) 2006-05-19 2012-02-21 The Queen's Medical Center Motion tracking system for real time adaptive imaging and spectroscopy
US7916897B2 (en) 2006-08-11 2011-03-29 Tessera Technologies Ireland Limited Face tracking for controlling imaging parameters
US8379917B2 (en) * 2009-10-02 2013-02-19 DigitalOptics Corporation Europe Limited Face recognition performance using additional image features
US8533192B2 (en) * 2010-09-16 2013-09-10 Alcatel Lucent Content capture device and methods for automatically tagging content
US11039109B2 (en) 2011-08-05 2021-06-15 Fox Sports Productions, Llc System and method for adjusting an image for a vehicle mounted camera
EP2892228A1 (en) 2011-08-05 2015-07-08 Fox Sports Productions, Inc. Selective capture and presentation of native image portions
EP2747641A4 (en) 2011-08-26 2015-04-01 Kineticor Inc METHOD, SYSTEMS AND DEVICES FOR SCAN INTERNAL MOTION CORRECTION
US9436928B2 (en) 2011-08-30 2016-09-06 Google Inc. User graphical interface for displaying a belonging-related stream
US20130055101A1 (en) * 2011-08-30 2013-02-28 Google Inc. System and Method for Tagging Belongings in Photos and Posts
JP5659307B2 (ja) * 2012-07-17 2015-01-28 パナソニックIpマネジメント株式会社 コメント情報生成装置およびコメント情報生成方法
BR112015004087A2 (pt) * 2012-08-31 2017-07-04 Fox Sports Productions Inc método para rastrear e marcar objetos de interesse em uma transmissão; interface de usuário para visão seletiva captura ou reprodução de várias câmeras em um evento; e sistema de visão seletiva, captura ou reprodução de várias câmeras em um evento
US10327708B2 (en) 2013-01-24 2019-06-25 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9717461B2 (en) 2013-01-24 2017-08-01 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9305365B2 (en) 2013-01-24 2016-04-05 Kineticor, Inc. Systems, devices, and methods for tracking moving targets
CN109008972A (zh) 2013-02-01 2018-12-18 凯内蒂科尔股份有限公司 生物医学成像中的实时适应性运动补偿的运动追踪系统
KR101515174B1 (ko) * 2013-10-16 2015-04-27 한양대학교 에리카산학협력단 스마트 디스플레이
KR101519052B1 (ko) * 2013-10-16 2015-05-12 한양대학교 에리카산학협력단 감성광고 기반의 광고 제공 기능을 구비한 스마트 tv
CN106572810A (zh) 2014-03-24 2017-04-19 凯内蒂科尔股份有限公司 去除医学成像扫描的预期运动校正的系统、方法和装置
EP3188660A4 (en) 2014-07-23 2018-05-16 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
US9288545B2 (en) 2014-12-13 2016-03-15 Fox Sports Productions, Inc. Systems and methods for tracking and tagging objects within a broadcast
US11758238B2 (en) 2014-12-13 2023-09-12 Fox Sports Productions, Llc Systems and methods for displaying wind characteristics and effects within a broadcast
US11159854B2 (en) 2014-12-13 2021-10-26 Fox Sports Productions, Llc Systems and methods for tracking and tagging objects within a broadcast
US9943247B2 (en) 2015-07-28 2018-04-17 The University Of Hawai'i Systems, devices, and methods for detecting false movements for motion correction during a medical imaging scan
WO2017091479A1 (en) 2015-11-23 2017-06-01 Kineticor, Inc. Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan
CN105847999A (zh) * 2016-03-29 2016-08-10 广州华多网络科技有限公司 一种弹幕显示的方法及显示装置
EP3532859A1 (en) 2016-10-31 2019-09-04 Vizar Technologies Sàrl A method and apparatus for detection of light-modulated signals in a video stream
JP7095455B2 (ja) 2018-07-24 2022-07-05 トヨタ自動車株式会社 情報処理装置および情報処理方法
US11354534B2 (en) 2019-03-15 2022-06-07 International Business Machines Corporation Object detection and identification

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000069442A (ja) 1998-08-24 2000-03-03 Sharp Corp 動画システム
US6567116B1 (en) * 1998-11-20 2003-05-20 James A. Aman Multiple object tracking system
AU7588100A (en) 1999-09-16 2001-04-17 Ixl Enterprises, Inc. System and method for linking media content
ATE343291T1 (de) 2000-05-30 2006-11-15 Nokia Corp Unterhaltungssystem für mobiltelefone an einem vorherbestimmten aufenhaltsort
JP2003289465A (ja) * 2002-03-28 2003-10-10 Fuji Photo Film Co Ltd 撮影システム及び撮影方法
GB2387052A (en) 2002-03-28 2003-10-01 Datacq Ltd Object tracking within a defined area
JP2003348424A (ja) 2002-05-27 2003-12-05 Sony Corp 動きトラッキング装置およびその方法
US7545326B2 (en) * 2003-10-22 2009-06-09 Awarepoint Corporation Wireless tracking system and method with multipath error mitigation
US7327383B2 (en) * 2003-11-04 2008-02-05 Eastman Kodak Company Correlating captured images and timed 3D event data
JP4355227B2 (ja) * 2004-02-04 2009-10-28 日本電信電話株式会社 内容記述メタデータ作成方法、内容記述メタデータ作成装置、内容記述メタデータ作成プログラム及びそのプログラムを記録した記録媒体
US20050195292A1 (en) 2004-03-03 2005-09-08 Eastman Kodak Company System and method for providing a customized imaging product or service
US7298484B2 (en) * 2004-03-10 2007-11-20 Raytheon Company Dual-band sensor system utilizing a wavelength-selective beamsplitter
US20060184960A1 (en) 2005-02-14 2006-08-17 Universal Music Group, Inc. Method and system for enabling commerce from broadcast content
US7339470B2 (en) * 2005-03-17 2008-03-04 Jason Scott Digital integrated motion system
JP2007142925A (ja) * 2005-11-21 2007-06-07 Nec Corp 動画提供システム、サーバ、端末、画像提供方法及びプログラム
WO2007115224A2 (en) * 2006-03-30 2007-10-11 Sri International Method and apparatus for annotating media streams
US10003781B2 (en) 2006-08-04 2018-06-19 Gula Consulting Limited Liability Company Displaying tags associated with items in a video playback
US9361943B2 (en) * 2006-11-07 2016-06-07 The Board Of Trustees Of The Leland Stanford Jr. University System and method for tagging objects in a panoramic video and associating functions and indexing panoramic images with same
US7933809B2 (en) 2006-12-18 2011-04-26 International Business Machines Corporation Method, medium, and system for automatically embedding information concerning items appearing in video using RFID tags
JP2008172485A (ja) * 2007-01-11 2008-07-24 Nomura Research Institute Ltd ストリームデータ生成装置及び再生装置
TWI353563B (en) * 2007-12-19 2011-12-01 Ind Tech Res Inst Tagging and path reconstruction method utilizing u
JP5159381B2 (ja) * 2008-03-19 2013-03-06 セコム株式会社 画像配信システム

Also Published As

Publication number Publication date
US20110157370A1 (en) 2011-06-30
EP2304930A1 (en) 2011-04-06
US9386339B2 (en) 2016-07-05
JP2011527527A (ja) 2011-10-27
WO2009153557A1 (en) 2009-12-23

Similar Documents

Publication Publication Date Title
JP5474953B2 (ja) 商品情報のタグ付け
US10536661B2 (en) Tracking object of interest in an omnidirectional video
TWI701628B (zh) 用於現場直播之顯示控制系統及顯示控制方法
CN105187866B (zh) 广告投放方法和装置
US8843959B2 (en) Generating synchronized interactive link maps linking tracked video objects to other multimedia content in real-time
JP5649303B2 (ja) メディア・ストリームに注釈を付ける方法および装置
US20080143481A1 (en) Automatically embedding information concerning items appearing in interactive video by using rfid tags
US7983442B2 (en) Method and apparatus for determining highlight segments of sport video
US5929849A (en) Integration of dynamic universal resource locators with television presentations
US20160182971A1 (en) Method, system and computer program product for obtaining and displaying supplemental data about a displayed movie, show, event or video game
CN101686352B (zh) 显示控制装置、显示控制方法和程序
US20050220439A1 (en) Interactive multimedia system and method
US20080184121A1 (en) Authoring tool for providing tags associated with items in a video playback
US20150003798A1 (en) Alternate view video playback on a second screen
US20090019487A1 (en) Video tag layout
EP1487205A1 (en) Display system for views of video item
US20150189243A1 (en) Automated video production system
JPWO2006025284A1 (ja) ストリーム再生装置
US7343081B1 (en) Identification of video storage media
US11211097B2 (en) Generating method and playing method of multimedia file, multimedia file generation apparatus and multimedia file playback apparatus
CN105981103A (zh) 经由分段列表浏览视频
US20030030852A1 (en) Digital visual recording content indexing and packaging
JP2002503046A (ja) ビデオ媒体制御システム
Bove et al. Adding hyperlinks to digital television
TW201607592A (zh) 判定方法及裝置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120618

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120618

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20120723

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130709

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130930

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20131007

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131108

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20131115

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131206

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140205

R150 Certificate of patent or registration of utility model

Ref document number: 5474953

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees