JP2019532430A - メディアアセットからの参照画像を再現するためのシステムおよび方法 - Google Patents

メディアアセットからの参照画像を再現するためのシステムおよび方法 Download PDF

Info

Publication number
JP2019532430A
JP2019532430A JP2019517935A JP2019517935A JP2019532430A JP 2019532430 A JP2019532430 A JP 2019532430A JP 2019517935 A JP2019517935 A JP 2019517935A JP 2019517935 A JP2019517935 A JP 2019517935A JP 2019532430 A JP2019532430 A JP 2019532430A
Authority
JP
Japan
Prior art keywords
user
geospatial orientation
image
reference image
media asset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019517935A
Other languages
English (en)
Inventor
ポール ティ—. スタタコプロス,
ポール ティ―. スタタコプロス,
ベンジャミン エイチ. モーガン,
ベンジャミン エイチ. モーガン,
ショーン マシューズ,
ショーン マシューズ,
Original Assignee
ロヴィ ガイズ, インコーポレイテッド
ロヴィ ガイズ, インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ロヴィ ガイズ, インコーポレイテッド, ロヴィ ガイズ, インコーポレイテッド filed Critical ロヴィ ガイズ, インコーポレイテッド
Publication of JP2019532430A publication Critical patent/JP2019532430A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3632Guidance using simplified or iconic instructions, e.g. using arrows
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3635Guidance using 3D or perspective road maps
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/587Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • G06V30/42Document-oriented image-based pattern recognition based on the type of document
    • G06V30/422Technical drawings; Geographical maps
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • H04W4/026Services making use of location information using location based information parameters using orientation information, e.g. compass
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2215/00Indexing scheme for image rendering
    • G06T2215/16Using real world measurements to influence rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Data Mining & Analysis (AREA)
  • Artificial Intelligence (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Library & Information Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

ユーザデバイスで実装される双方向メディアガイドアプリケーション、例えば、携帯電話上のアプリを提供するシステムおよび方法。双方向メディアガイドアプリケーションは、ユーザデバイスの地理的場所(例えば、経度および緯度座標、および地理空間向き、例えば、ジャイロ角度)を使用して、ユーザが、場所が自分のお気に入りの映画またはテレビ番組において描写された同じ様式とでその場所の画像を捕捉することを可能にする。双方向メディアガイドアプリケーションは、自分が見ており、映画またはテレビ番組に関連付けられた監督または別の個人と同じ視点を有する場合の所望の没入型体験をユーザに配信することができる。

Description

一部の映画およびテレビファンは、自分のお気に入りの映画またはテレビ番組で体験したものを物理的場所で視聴および体験しようとして、自分のお気に入りの場面が録画された場所を探検することを好む。例えば、映画「Lord of the Rings」のファンは、自分のお気に入りの場面が録画された場所を見るためにニュージーランドに旅行し得る。別の例では、テレビ番組「Game of Thrones」のファンは、自分のお気に入りの場面が録画された場所を見るために北アイルランドに旅行し得る。ファンは、自分に見えており、自分が映画またはテレビ番組の監督と同じ視点を有する場合の没入型体験を作り出すことを欲し得る。しかしながら、例えば、全地球測位システム(GPS)デバイスを使用して、その目的地に到着した後、ファンは、自分のお気に入りの場面が録画された正確な場所および/またはカメラアングルを見出すことが困難であると感じ得る。場所は、録画された後の場面のデジタルエンハンスメントに起因して、ファンに馴染みがないようにも見え得る。したがって、ファンは、自分のお気に入りの映画またはテレビ番組からの場面を現実の世界で再現することができないこともある。
映画またはテレビ番組等のメディアアセットで取り上げられている場所の画像を捕捉するために使用される従来のシステムの欠点に対処するためのシステムおよび方法が、説明される。ユーザデバイス、例えば、携帯電話で実装される従来のシステムは、地理的情報、例えば、GPS座標(経度および緯度座標)を使用して、ユーザがメディアアセットで取り上げられている場所を見出すことを可能にし得る。しかしながら、この情報は、ユーザが、場所が自分のお気に入りの映画またはテレビ番組において描写された様式と対応する場所の画像を捕捉するために十分ではないこともある。ユーザは、自分が見ており、映画またはテレビ番組に関連付けられる監督もしくは別の個人と同じ視点を有する場合の没入型体験を作り出すことを欲し得る。
説明されるシステムおよび方法は、ユーザデバイスで実装される双方向メディアガイドアプリケーション、例えば、携帯電話上のアプリを提供する。ユーザデバイスは、画像を捕捉するためのカメラコンポーネントおよび/または捕捉された画像を表示するためのディスプレイコンポーネントを含み得る。双方向メディアガイドアプリケーションは、ユーザデバイスの地理的場所(例えば、経度および緯度座標、ならびに地理空間向き、例えば、ジャイロ角度)を使用して、ユーザが、場所が自分のお気に入りの映画またはテレビ番組において描写された同じ様式でその場所の画像を捕捉することを可能にする。双方向メディアガイドアプリケーションは、自分が見ており、映画またはテレビ番組に関連付けられる監督または別の個人と同じ視点を有する場合の所望の没入型体験をユーザに配信することができる。
いくつかの側面では、双方向メディアガイドアプリケーションは、現在の場所におけるユーザデバイスに組み込まれたカメラからの画像、および地理的場所および地理空間向き等の関連付けられるメタデータを捕捉する。例えば、経度および緯度座標を含む地理的場所は、ユーザデバイス内のGPSコンポーネントから取得され得る。別の例では、ジャイロ角度を含む地理空間向きは、ユーザデバイス内の1つ以上のジャイロコンポーネントから取得され得る。双方向メディアガイドアプリケーションは、データベースを検索し、ユーザ捕捉画像の地理的場所および/または地理空間向きに対応する映画もしくはテレビ番組等のメディアアセットからの参照画像を識別し得る。対応する参照画像は、地理的場所および/または地理空間向きを有するメタデータを含み得る。この情報は、映画もしくはテレビ番組が録画されるときに捕捉されるか、またはデータベースに追加されるときに後で添付され得る。例えば、情報は、場面の一部がある場所で録画されるときに捕捉され得、次いで、場面の次の部分が同じ場所で録画されるときに連続性を維持するために使用される。別の例では、情報は、録画された場面に適用され得る、録画後エンハンスメントを支援するために捕捉され得る。このデータベースは、自分のお気に入りの映画またはテレビ番組からの場面を再現するために必要とされる情報にアクセスするために、映画またはテレビ番組のファンに提供され得る。
いくつかの実施形態では、ユーザは、自分が見ており、映画またはテレビ番組に関連付けられる監督または別の個人と同じ視点を有することを欲し、個人によって意図された通りにデジタルでエンハンスメントされた場面を再現することも欲し得る。典型的映画およびテレビ番組が、撮影された場所からの画像にオーバーレイされるデジタルセットおよび風景を用いてデジタルでエンハンスメントされるので、ユーザがデジタルでエンハンスメントされた場面を再現することを可能にすることは、没入型および物理的娯楽体験を可能にし得る。地理的情報に依拠する従来のシステムは、そのような体験を提供することができない。それらは、撮影された場所のカメラ視野およびアングルを再現することができず、ユーザのお気に入りの映画またはテレビ番組で見られるような場面に適用されるデジタルエンハンスメントを含む場面の拡張現実バージョンを再現することができない。
いくつかの側面では、説明されるシステムおよび方法は、映画またはテレビ番組等のメディアアセットからの場面を再現するためのユーザデバイス上に実装される双方向メディアガイドアプリケーションを提供する。双方向メディアガイドアプリケーションは、ユーザデバイスの地理的場所および地理空間向きを受信する。双方向メディアガイドアプリケーションは、ユーザが地理的場所を使用して再現しようとしている場面のための参照画像を決定する。加えて、または代替として、ユーザは、特定の場面に関する情報を双方向メディアガイドアプリケーションに提供する。双方向メディアガイドアプリケーションは、ユーザデバイスの地理空間向きが参照画像に関連付けられた地理空間向きと対応しているかどうかを決定する。地理空間向きが合致していない場合、双方向メディアガイドアプリケーションは、ユーザデバイスの位置を変更し、参照画像の地理的場所および/または地理空間向きに合致させるようにユーザに通知する。通知は、オーディオまたはユーザデバイス上に表示される視覚合図の形態であり得る。双方向メディアガイドアプリケーションは、地理空間向きが合致するまで、ユーザデバイスの位置に関してフィードバックをユーザに提供し続け得る。続いて、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスを介して画像を捕捉することを可能にし得る。
加えて、または代替として、双方向メディアガイドアプリケーションは、ユーザが、デジタル効果またはエンハンスメントをユーザ捕捉画像にオーバーレイすることを可能にする。これは、ユーザが、ユーザのお気に入りの映画またはテレビ番組で見られるような画像に適用されるデジタルエンハンスメントを含む捕捉された画像の拡張現実バージョンを再現することを可能にする。加えて、または代替として、双方向メディアガイドアプリケーションは、場面の元の録画中に移動がカメラによって行われると、ユーザがカメラ移動を辿ることを支援するためのオーディオまたは視覚合図を提供し得る。オーディオまたは視覚合図は、ユーザデバイスの位置を変更し、その地理的場所および/または地理空間向きを調節して、元の録画中のカメラ移動を再現するようにユーザを誘導し得る。ユーザは、自分がユーザデバイスの位置を変更し、自分のお気に入りの場面の再現を録画するにつれて、画像を捕捉し得る。加えて、または代替として、ユーザは、再現された場面の中に友人および/または家族を含み、後で視聴するために場面の自分自身のカスタマイズされたバージョンを録画し得る。
いくつかの実施形態では、双方向メディアガイドアプリケーションは、モバイルデバイス等のユーザデバイス上のアプリの形態で実装される。双方向メディアガイドアプリケーションは、モバイルデバイスの現在の位置から画像を捕捉し、ユーザに表示するための画像を生成する。ユーザは、自分のお気に入りの映画もしくはテレビ番組からの場面に対応する地理的場所および/または地理空間向きにユーザデバイスを位置付けていることもある。例えば、ユーザのお気に入りの映画は、「Sunset」であり得、ユーザは、映画からの自分のお気に入りの場面が録画された物理的場所に旅行していることもある。双方向メディアガイドアプリケーションは、捕捉された画像の地理的場所および/または地理空間向きを分析し、場面に対応する参照画像、および捕捉された画像が参照画像を正しく再現するかどうかを決定し得る。例えば、双方向メディアガイドアプリケーションは、緯度47.6°Nおよび経度122.3°Wであるユーザデバイスの地理的場所に基づいて、ユーザが映画「Sunset」からの場所に関心があることを決定し得る。別の例では、双方向メディアガイドアプリケーションは、ユーザから、自分のお気に入りの映画が「Sunset」であるという指示を受信し、続いて、ユーザデバイスの地理的場所に合致する参照画像に対してデータベースを検索し得る。例えば、双方向メディアガイドアプリケーションは、緯度47.5°Nおよび経度122.4°Wの関連付けられた地理的場所を有する参照画像を見出し得る。
いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザデバイスの位置を変更するように、オーディオまたは視覚合図をユーザに提供する。双方向メディアガイドアプリケーションは、画像が捕捉されたときのユーザデバイスの地理的場所および/または地理空間向きを含む捕捉された画像のメタデータを受信し得る。双方向メディアガイドアプリケーションは、参照画像のための地理的場所および/または地理空間向きを含むメタデータを読み出し得る。双方向メディアガイドアプリケーションは、メタデータを比較し、捕捉された画像が参照画像と対応しているかどうかを決定し得る。例えば、双方向メディアガイドアプリケーションは、捕捉された画像の地理空間向き、例えば、ジャイロ角度90°が、参照画像の地理空間向き、例えば、ジャイロ角度85°と対応しているかどうかを決定し得る。
双方向メディアガイドアプリケーションは、捕捉された画像のメタデータと参照画像との間の偏差を決定し、ユーザデバイスの位置を変更することにおいてユーザを支援するためのオーディオまたは視覚合図を生成し得る。例えば、双方向メディアガイドアプリケーションは、ユーザデバイス上に静的矢印(または他の方向インジケータ)の組および動的矢印(または他の方向インジケータ)の組を生成し得る。双方向メディアガイドアプリケーションは、ユーザが、静的矢印(または他の方向インジケータ)および動的矢印(または他の方向インジケータ)を合致させようとしてユーザデバイスの位置を変更すると、動的矢印(または他の方向インジケータ)を更新し得る。双方向メディアガイドアプリケーションは、画像がユーザデバイスの新しい位置から捕捉されると、場所の画像に静的矢印(または他の方向インジケータ)および動的矢印(または他の方向インジケータ)をオーバーレイし得る。別の例では、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスを上、下、左、右、前方、後方に移動させること、傾けることを行うべきかどうかを示すオーディオ合図、または位置の別の好適な変更を行うべきかどうかを示すオーディオ合図を生成し得る。
いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザデバイスの位置が、参照画像のメタデータと対応する様式で較正されていることを検出する。例えば、ユーザのお気に入りの場面からの参照画像は、地理的場所および/または地理空間向きを含む関連付けられたメタデータを有し得る。ユーザデバイスの以前の位置は、地理的場所と対応していることもあるが、地理空間向きから逸それていることもある。ユーザがユーザデバイスの位置を変更した後、双方向メディアガイドアプリケーションは、ユーザデバイスの現在の地理空間向きと参照の地理空間向きとを比較し得る。双方向メディアガイドアプリケーションは、地理空間向きが合致したので、ユーザデバイスの位置が較正されていることを決定し得る。双方向メディアガイドアプリケーションは、例えば、通知を生成すること、および/または互いの上に、もしくは互いに近接近して静的およびに動的矢印を生成することによって、合致を示すようにユーザデバイスの表示を更新し得る。
いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザ捕捉画像にデジタル効果またはエンハンスメントをオーバーレイする。参照画像のメタデータを用いたユーザデバイスの較正に続いて、双方向メディアガイドアプリケーションは、デジタル効果またはエンハンスメントをユーザデバイスによって捕捉される画像にオーバーレイするオプションをユーザに提示し得る。典型的映画およびテレビ番組が、撮影された場所からの画像にオーバーレイされるデジタルセットおよび風景を用いてデジタルでエンハンスメントされるので、ユーザがデジタルでエンハンスメントされた場面を再現することを可能にすることは、没入型および物理的娯楽体験を可能にし得る。デジタル効果またはエンハンスメントを画像にオーバーレイすることによって、ユーザは、ユーザのお気に入りの映画またはテレビ番組で見られるような場面の拡張現実バージョンを再現し得る。双方向メディアガイドアプリケーションは、3次元レンダリングエンジン、および元のレンダリングされたメディアアセットからのデジタルオーバーレイアセットのデータベースを使用し、捕捉された画像の地理的場所および/または地理空間向きに基づいて、デジタルオーバーレイアセットをユーザ捕捉画像に適用し得る。デジタル効果またはエンハンスメントがユーザデバイスによって捕捉されている画像の上に合成されると、ユーザは、ユーザデバイスの周囲を移動し、映画またはテレビ番組に関連付けられる監督もしくは別の個人が見るように場面を意図した通りに、デジタルでエンハンスメントされた場面内で相互作用し得る。
いくつかの実施形態では、ユーザデバイスによって捕捉される画像は、ユーザ捕捉画像データ構造内に記憶されたメタデータに関連付けられる。このデータ構造は、捕捉された画像のための地理的場所および/または地理空間向きを含み得る。例えば、データ構造は、緯度47.6°Nおよび経度122.3°Wを含む地理的場所と、ジャイロ角度90°を含む地理空間向きとを含み得る。いくつかの実施形態では、メディアアセットからの参照画像は、参照画像データ構造内に記憶されたメタデータに関連付けられる。このデータ構造は、参照画像のための地理的場所および/または地理空間向きを含み得る。例えば、データ構造は、緯度47.5°Nおよび経度122.4°Wを含む地理的場所と、ジャイロ角度85°を含む地理空間向きとを含み得る。この情報は、メディアアセットからの参照画像が録画されるときに記憶される、または後に添付され得る。このデータ構造は、タイトル、例えば、「Sunset」、参照画像のためのタイムスタンプ、例えば、「10:45」、および「robot.overlay」等のデジタルオーバーレイアセット等のメディアアセットに関する情報を含み得る。
いくつかの側面では、説明されるシステムおよび方法は、ユーザデバイス上でメディアアセットからの参照画像を再現するための双方向メディアガイドアプリケーションを提供する。双方向メディアガイドアプリケーションは、ユーザデバイスによって捕捉されたユーザ画像を受信する。双方向メディアガイドアプリケーションは、メディアアセットからの参照画像を識別する。双方向メディアガイドアプリケーションは、ユーザ画像の第1の地理空間向きが参照画像の第2の地理空間向きに合致しているかどうかを決定する。双方向メディアガイドアプリケーションは、第2の地理空間向きに合致していない第1の地理空間向きに基づいて、ユーザがユーザデバイスの位置を変更するための通知を生成する。
いくつかの側面では、説明されるシステムおよび方法は、ユーザデバイス上でメディアアセットからの参照画像を再現するための双方向メディアガイドアプリケーションを提供する。双方向メディアガイドアプリケーションは、ユーザデバイスによって捕捉されたユーザ画像を受信する。例えば、ユーザデバイスは、ユーザの現在の場所において画像を捕捉し、ユーザデバイスのメモリの中に画像を記憶し、捕捉された画像を双方向メディアガイドアプリケーションに伝送するカメラコンポーネントを含み得る。
双方向メディアガイドアプリケーションは、ユーザ画像に関連付けられた地理的場所を決定する。いくつかの実施形態では、地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む。いくつかの実施形態では、ユーザ画像に関連付けられた地理的場所、および第1の地理空間向きのうちの少なくとも1つは、ユーザ画像から抽出されるメタデータから決定される。例えば、双方向メディアガイドアプリケーションは、捕捉された画像からメタデータを抽出し、緯度および経度等の地理的場所情報を含むデータ構造に対して抽出されたメタデータを分析し、データ構造から地理的場所を読み出し得る。例えば、双方向メディアガイドアプリケーションは、ユーザ画像に関連付けられた地理的場所が緯度47.6°Nおよび経度122.3°Wであることを決定し得る。
決定された地理的場所に基づいて、双方向メディアガイドアプリケーションは、データベースから、メディアアセットからの参照画像を識別する。いくつかの実施形態では、データベースは、メディアアセットと、地理的場所でタグ付けされた参照画像とを含む。いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザからメディアアセットの指示を受信する。双方向メディアガイドアプリケーションは、データベースから、決定された地理的場所およびメディアアセットの指示に基づいて、メディアアセットからの参照画像を識別する。例えば、双方向メディアガイドアプリケーションは、緯度47.6°Nおよび経度122.3°Wのユーザ画像に関連付けられた地理的場所を使用して、クエリをデータベースに伝送し得る。双方向メディアガイドアプリケーションは、例えば、+0.5°および−0.5°の閾値範囲を含み得る。双方向メディアガイドアプリケーションは、データベースから、緯度47.5°Nおよび経度122.4°Wの関連付けられた地理的場所を有する参照画像を示す応答を受信し得る。双方向メディアガイドアプリケーションは、ユーザ画像の地理的場所に基づいて、最も近い合致として参照画像を選択し得る。
双方向メディアガイドアプリケーションは、ユーザ画像に関連付けられた第1の地理空間向きを決定する。いくつかの実施形態では、第1の地理空間向きは、1つ以上のジャイロ角度を含む。いくつかの実施形態では、ユーザ画像に関連付けられた地理的場所、および第1の地理空間向きのうちの少なくとも1つは、ユーザ画像から抽出されるメタデータから決定される。例えば、双方向メディアガイドアプリケーションは、参照画像からメタデータを抽出し得る。双方向メディアガイドアプリケーションは、地理空間向き情報を含むデータ構造に対して抽出されたメタデータを分析し得る。例えば、双方向メディアガイドアプリケーションは、ユーザ画像に関連付けられる地理空間向きが90°のジャイロ角度を含むことを決定し得る。
双方向メディアガイドアプリケーションは、参照画像に関連付けられた第2の地理空間向きを受信する。いくつかの実施形態では、第2の地理空間向きは、1つ以上のジャイロ角度を含む。例えば、双方向メディアガイドアプリケーションは、参照画像に関連付けられた地理空間向きを受信し、85°のジャイロ角度を含み得る。
双方向メディアガイドアプリケーションは、第1の地理空間向きが第2の地理空間向きに合致しているかどうかを決定する。例えば、双方向メディアガイドアプリケーションは、85°の参照画像のジャイロ角度から90°のユーザ画像のジャイロ角度を減算し、ゼロではない結果に基づいて、画像が合致しないことを決定し得る。
第2の地理空間向きに合致しない第1の地理空間向きに基づいて、双方向メディアガイドアプリケーションは、第1の地理空間向きと第2の地理空間向きとの間の偏差を決定する。例えば、双方向メディアガイドアプリケーションは、85°の参照画像のジャイロ角度から90°のユーザ画像のジャイロ角度を減算し、偏差が5°であると決定し得る。
双方向メディアガイドアプリケーションは、偏差に基づいて、ユーザがユーザデバイスの位置を変更するための通知を生成する。例えば、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスの位置を変更するための通知を生成し、ユーザデバイスのディスプレイコンポーネント上での表示のために伝送し得る。双方向メディアガイドアプリケーションは、ユーザ画像がユーザデバイス上に表示されるときにユーザ画像にオーバーレイされるべき静的矢印の組および動的矢印の組を生成し得る。動的矢印の組は、ジャイロ配向間の偏差を示すように、静的矢印の組に対して変位させられ得る。ユーザが位置を変更すると、矢印の2つの組が並び、ジャイロ配向間の偏差が減少していることを示し得る。
いくつかの実施形態では、所定の閾値を下回る第1の地理空間向きと第2の地理空間向きとの間の偏差に基づいて、双方向メディアガイドアプリケーションは、ユーザ画像にデジタル効果をオーバーレイする。例えば、地理空間向き間の偏差が所定の閾値内、例えば、0.5°に到達した後、双方向メディアガイドアプリケーションは、ユーザ画像にデジタル効果をオーバーレイし得る。双方向メディアガイドアプリケーションは、参照画像に関連付けられたメタデータから、デジタル効果に関する情報、例えば、「robot.overlay」を読み出し得る。双方向メディアガイドアプリケーションは、デジタル効果をユーザ画像に適用するために、データベースからデジタル効果アセットを読み出し、デジタル画像処理アルゴリズムを開始し得る。例えば、双方向メディアガイドアプリケーションは、ユーザ画像に対してデジタル効果アセットの各ピクセルを比較し、デジタル効果が適用されることが予期されるユーザ画像内のピクセルを改変し得るが、デジタル効果が適用されることが予期されないユーザ画像内のピクセルを改変しないこともある。
いくつかの実施形態では、ユーザ画像にデジタル効果をオーバーレイすることに続いて、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスの位置を変更するための別の通知を生成する。例えば、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスの位置を変更し、場面内の次のフレームのための画像を捕捉するための別の通知を生成し得る。双方向メディアガイドアプリケーションは、ユーザデバイスのディスプレイコンポーネント上での表示のために伝送し得る。双方向メディアガイドアプリケーションは、ユーザ画像がユーザデバイス上に表示されるときにユーザ画像にオーバーレイされるべき静的矢印の組および動的矢印の組を生成し得る。動的矢印の組は、ジャイロ配向間の偏差を示すように、静的矢印の組に対して変位させられ得る。ユーザが位置を変更すると、矢印の2つの組が並び、ジャイロ配向間の偏差が減少していることを示し得る。
いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザデバイスによって捕捉された第2のユーザ画像を受信する。双方向メディアガイドアプリケーションは、データベースから、メディアアセットからの第2の参照画像を識別する。例えば、ユーザデバイス内のカメラコンポーネントは、ユーザの現在の場所において画像を捕捉し、ユーザデバイスのメモリの中に画像を記憶し、捕捉された画像を双方向メディアガイドアプリケーションに伝送し得る。双方向メディアガイドアプリケーションは、捕捉された画像からメタデータを抽出し、緯度および経度等の地理的場所情報を含むデータ構造に対して抽出されたメタデータを分析し、データ構造から地理的場所を読み出し得る。
いくつかの実施形態では、所定の閾値を下回る第2のユーザ画像のための地理空間向きと第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、双方向メディアガイドアプリケーションは、第2のユーザ画像に第2のデジタル効果をオーバーレイする。例えば、地理空間向き間の偏差が所定の閾値内、例えば、0.5°に到達した後、双方向メディアガイドアプリケーションは、ユーザ画像にデジタル効果をオーバーレイし得る。双方向メディアガイドアプリケーションは、参照画像に関連付けられたメタデータから、デジタル効果に関する情報、例えば、「robot2.overlay」を読み出し得る。双方向メディアガイドアプリケーションは、デジタル効果をユーザ画像に適用するために、データベースからデジタル効果アセットを読み出し、デジタル画像処理アルゴリズムを開始し得る。例えば、双方向メディアガイドアプリケーションは、ユーザ画像に対してデジタル効果アセットの各ピクセルを比較し、デジタル効果が適用されることが予期されるユーザ画像内のピクセルを改変し得るが、デジタル効果が適用されることが予期されないユーザ画像内のピクセルを改変しないこともある。
上で説明されるシステム、方法、装置、および/または側面は、本開示に説明される他のシステム、方法、装置、および/または側面に適用され得るか、またはそれに従って使用され得ることに留意されたい。
本開示の上記および他の目的ならびに利点は、同様の参照文字が全体を通して同様の部分を指す、添付の図面と併せて考慮される、以下の発明を実施するための形態の検討から明白であろう。
図1は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面の例証的例を示す。 図2は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面の別の例証的例を示す。 図3は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面のさらに別の例証的例を示す。 図4は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面のさらに別の例証的例を示す。 図5は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面の例証的例を示す。 図6は、本開示のいくつかの実施形態による、ユーザ画像データ構造および参照画像データ構造の例証的例を示す。 図7は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面のさらに別の例証的例を示す。 図8は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面のさらに別の例証的例を示す。 図9は、本開示のいくつかの実施形態による、例証的ユーザ機器デバイスのブロック図である。 図10は、本開示のいくつかの実施形態による、例証的メディアシステムのブロック図である。 図11は、本開示のいくつかの実施形態による、ユーザデバイス上でメディアアセットからの参照画像を再現するための例証的プロセスのフローチャートである。
映画またはテレビ番組等のメディアアセットで取り上げられている場所の画像を捕捉するために使用される従来のシステムの欠点に対処するためのシステムおよび方法が、説明される。ユーザは、自分に見え、自分が映画またはテレビ番組に関連付けられた監督または別の個人と同じ視点を有する場合の没入型体験を作り出すことを欲し得る。説明されるシステムおよび方法は、ユーザデバイス(例えば、ユーザ機器デバイス900、図9)の制御回路(例えば、制御回路904、図9)上に実装される双方向メディアガイドアプリケーション、例えば、携帯電話上のアプリを提供する。ユーザデバイス(例えば、ユーザ機器デバイス900、図9)は、画像を捕捉するためのカメラコンポーネントおよび/または捕捉された画像を表示するためのディスプレイコンポーネント(例えば、ディスプレイ912、図9)を含み得る。双方向メディアガイドアプリケーションは、ユーザデバイスの地理的場所、例えば、経度および緯度座標、および地理空間向き、例えば、ジャイロ角度を使用し、ユーザが、自分のお気に入りの映画またはテレビ番組に描写された同じ様式とでその場所の画像を捕捉することを可能にする。双方向メディアガイドアプリケーションは、自分に見え、自分が映画またはテレビ番組に関連付けられる監督もしくは別の個人と同じ視点を有する場合の所望の没入型体験をユーザに配信することができる。
いくつかの側面では、説明されるシステムおよび方法は、ユーザデバイス上でメディアアセットからの参照画像を再現するために、ユーザデバイス(例えば、ユーザ機器デバイス900、図9)の制御回路(例えば、制御回路904、図9)上に実装される双方向メディアガイドアプリケーションを提供する。双方向メディアガイドアプリケーションは、ユーザデバイスによって捕捉されたユーザ画像を受信する。双方向メディアガイドアプリケーションは、メディアアセットからの参照画像を識別する。双方向メディアガイドアプリケーションは、ユーザ画像の第1の地理空間向きが参照画像の第2の地理空間向きに合致しているかどうかを決定する。双方向メディアガイドアプリケーションは、第2の地理空間向きに合致しない第1の地理空間向きに基づいて、ユーザがユーザデバイスの位置を変更するための通知を生成する。
いくつかの側面では、ユーザデバイス(例えば、ユーザ機器デバイス900、図9)の制御回路(例えば、制御回路904、図9)上に実装される双方向メディアガイドアプリケーションは、ユーザデバイスに基づくユーザの現在の場所の画像と、地理的場所および地理空間向き等の関連付けられたメタデータとを捕捉する。例えば、経度および緯度座標を含む地理的場所は、ユーザデバイス内のGPSコンポーネントから取得され得る。別の例では、ジャイロ角度を含む地理空間向きは、ユーザデバイス内の1つ以上のジャイロコンポーネントから取得され得る。双方向メディアガイドアプリケーションは、データベース、例えば、メディアコンテンツソース1016またはメディアガイドデータソース1018(図10)を検索し、映画もしくはテレビ番組等のメディアアセットから、ユーザ捕捉画像の地理的場所および/または地理空間向きに対応する参照画像を識別し得る。対応する参照画像は、地理的場所および/または地理空間向きを有するメタデータを含み得る。この情報は、映画もしくはテレビ番組が録画されるときに捕捉されるか、またはデータベースに追加されるときに後で添付され得る。例えば、情報は、場面の一部がある場所で録画されるときに捕捉され得、次いで、場面の次の部分が同じ場所で録画されるときに連続性を維持するために使用される。別の例では、情報は、録画された場面に適用され得る録画後エンハンスメントを支援するために捕捉され得る。このデータベースは、自分のお気に入りの映画またはテレビ番組からの場面を再現するために必要とされる情報にアクセスするために、映画またはテレビ番組のファンに提供され得る。
いくつかの側面では、説明されるシステムおよび方法は、映画またはテレビ番組等のメディアアセットからの場面を再現するために、ユーザデバイス(例えば、ユーザ機器デバイス900、図9)の制御回路(例えば、制御回路904、図9)上に実装される双方向メディアガイドアプリケーションを提供する。双方向メディアガイドアプリケーションは、ユーザデバイスの地理的場所および地理空間向きを受信する。双方向メディアガイドアプリケーションは、ユーザが地理的場所を使用して再現しようとしている、場面のための参照画像を決定する。加えて、または代替として、ユーザは、特定の場面に関する情報を双方向メディアガイドアプリケーションに提供する。例えば、ユーザは、参照画像を決定することにおいて双方向メディアガイドアプリケーションを補助するために、特定の場面を含む映画を選択し得る。別の例では、ユーザは、参照画像を決定することにおいて双方向メディアガイドアプリケーションを補助するために、特定の場面自体を選択し得る。双方向メディアガイドアプリケーションは、ユーザデバイスの地理空間向きが参照画像に関連付けられた地理空間向きと対応しているかどうかを決定する。地理空間向きが合致していない場合、双方向メディアガイドアプリケーションは、ユーザデバイスの位置を変更し、参照画像の地理空間向きに合致させるようにユーザに通知する。通知は、オーディオまたはユーザデバイス上に表示される視覚合図の形態であり得る。双方向メディアガイドアプリケーションは、地理空間向きが合致するまで、ユーザデバイスの位置に関してフィードバックをユーザに提供し続け得る。続いて、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスを介して画像を捕捉することを可能にし得る。
加えて、または代替として、ユーザデバイス(例えば、ユーザ機器デバイス900、図9)の制御回路(例えば、制御回路904、図9)上に実装される双方向メディアガイドアプリケーションは、ユーザがデジタル効果またはエンハンスメントをユーザ捕捉画像に適用することを可能にする。これは、ユーザが、ユーザのお気に入りの映画またはテレビ番組で見られるような画像に適用されるデジタルエンハンスメントを含む捕捉された画像の拡張現実バージョンを再現することを可能にする。加えて、または代替として、双方向メディアガイドアプリケーションは、場面の元の録画中に移動がカメラによって行われたように、ユーザがカメラ移動を辿ることを支援するためのオーディオまたは視覚合図を提供し得る。オーディオまたは視覚合図は、ユーザデバイスの位置を変更し、その地理的場所および/または地理空間向きを調節し、元の録画中のカメラ移動を再現するようにユーザを誘導し得る。ユーザは、自分がユーザデバイスの位置を変更し、自分のお気に入りの場面の再現を録画するにつれて、画像を捕捉し得る。加えて、または代替として、ユーザは、再現された場面の中に友人および/または家族を含み、後に視聴するために場面の自分自身のカスタマイズされたバージョンを録画し得る。
図1は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面100の例証的例を示す。いくつかの実施形態では、双方向メディアガイドアプリケーションは、モバイルデバイス等のユーザデバイス上のアプリの形態で実装される。双方向メディアガイドアプリケーションは、モバイルデバイスの現在の位置から画像102を捕捉し、ユーザへの表示のために画像を生成する。双方向ガイドアプリケーションは、画像を分析するプロンプト104を表示のために生成する。ユーザは、画像を分析するオプション106またはプロンプトを却下するオプション108を選択し得る。ユーザは、自分のお気に入りの映画もしくはテレビ番組からの場面に対応する地理的場所および/または地理空間向きにユーザデバイスを位置付けていることもある。例えば、ユーザのお気に入りの映画は、「Sunset」であり得、ユーザは、映画からの自分のお気に入りの場面が録画された物理的場所に旅行していることもある。ユーザがオプション106を選択する場合、双方向メディアガイドアプリケーションは、捕捉された画像の地理的場所および/または地理空間向きを分析し、場面に対応する参照画像、および、捕捉された画像が参照画像を正しく再現しているかどうかを決定し得る。例えば、双方向メディアガイドアプリケーションは、緯度47.6°Nおよび経度122.3°Wであるユーザデバイスの地理的場所に基づいて、ユーザが映画「Sunset」からの場面に関心があることを決定し得る。別の例では、双方向メディアガイドアプリケーションは、ユーザから、自分のお気に入りの映画が「Sunset」であるという指示を受信し、続いて、ユーザデバイスの地理的場所に合致する参照画像に対してデータベースを検索し得る。例えば、双方向メディアガイドアプリケーションは、緯度47.5°Nおよび経度122.4°Wの関連付けられた地理的場所を有する参照画像を見出し得る。
図2−3は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面200および300の例証的例を示す。いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザデバイスの位置を変更するように、オーディオまたは視覚合図をユーザに提供する。双方向メディアガイドアプリケーションは、画像が捕捉されたときのユーザデバイスの地理的場所および/または地理空間向きを含む捕捉された画像202のメタデータを受信し得る。双方向メディアガイドアプリケーションは、参照画像のための地理的場所および/または地理空間向きを含むメタデータを読み出し得る。双方向メディアガイドアプリケーションは、メタデータを比較し、捕捉された画像が参照画像と対応しているかどうかを決定し得る。例えば、双方向メディアガイドアプリケーションは、捕捉された画像の地理空間向き、例えば、ジャイロ角度90°が、参照画像の地理空間向き、例えば、ジャイロ角度85°と対応しているかどうかを決定し得る。
双方向メディアガイドアプリケーションは、捕捉された画像のメタデータと参照画像との間の偏差を決定し、ユーザデバイスの位置を変更することにおいてユーザを支援するためのオーディオまたは視覚合図204、206、および208を生成し得る。例えば、双方向メディアガイドアプリケーションは、ユーザデバイス上に通知208とともに静的矢印の組204および動的矢印の組206を生成し得る。双方向メディアガイドアプリケーションは、ユーザが、静的矢印304と動的矢印306とを合致させようとしてユーザデバイスの位置を変更すると、動的矢印306を更新し得る。双方向メディアガイドアプリケーションは、画像がユーザデバイスの新しい位置から捕捉されると、場所の画像302に静的矢印304および動的矢印306をオーバーレイし得る。別の例では、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスを上、下、左、右、前方、後方に移動させるべきか、傾けるべきかを示す、または、位置の別の好適な変更を示すオーディオ合図を生成し得る。較正が完了した後、ユーザは、進むオプション210、310を選択するか、またはプロセスを却下するオプション212、312を選択し得る。双方向メディアガイドアプリケーションは、通知308を介して、較正が完了したときに適切なオプションを選択するようにユーザに通知し得る。加えて、または代替として、双方向メディアガイドアプリケーションは、較正を自動的に検出し、下記にさらに議論されるようにユーザに通知し得る。
図4は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面400の例証的例を示す。いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザから、較正が完了したことを示す入力を受信する。いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザデバイスの位置が参照画像のメタデータと対応する様式で較正されていることを検出する。例えば、ユーザのお気に入りの場面からの参照画像は、地理的場所および/または地理空間向きを含む関連付けられたメタデータを有し得る。ユーザデバイスの以前の位置は、地理的場所と対応していることもあるが、地理空間向きからそれていることもある。ユーザがユーザデバイスの位置を変更した後、双方向メディアガイドアプリケーションは、ユーザデバイスの現在の地理空間向きと参照の地理空間向きとを比較し得る。双方向メディアガイドアプリケーションは、地理空間向きが合致したので、ユーザデバイスの位置が較正されていることを決定し得る。双方向メディアガイドアプリケーションは、例えば、通知408とともに、互いの上に、または互いに近接近して静的矢印404と動的矢印406とがオーバーレイされた画像402を表示のために生成することによって、合致を示すためにユーザデバイスの表示を更新し得る。ユーザは、次のステップに進み、画像上にデジタル効果を適用するオプション410を選択するか、またはプロセスを却下するオプション412を選択し得る。
図5は、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面500の例証的例を示す。いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザ捕捉画像にデジタル効果またはエンハンスメントをオーバーレイする。参照画像のメタデータを用いたユーザデバイスの較正に続いて、双方向メディアガイドアプリケーションは、図4に図示されるように、デジタル効果またはエンハンスメントをユーザデバイスによって捕捉される画像にオーバーレイするオプションをユーザに提示し得る。典型的映画およびテレビ番組が、撮影された場所からの画像にオーバーレイされるデジタルセットおよび風景を用いてデジタルでエンハンスメントされるので、ユーザがデジタルでエンハンスメントされた場面を再現することを可能にすることは、没入型および物理的娯楽体験を可能にし得る。デジタル効果またはエンハンスメントを画像にオーバーレイすることによって、ユーザは、ユーザのお気に入りの映画またはテレビ番組で見られるような場面の拡張現実バージョンを再現し得る。双方向メディアガイドアプリケーションは、3次元レンダリングエンジンと、元のレンダリングされたメディアアセットからのデジタルオーバーレイアセットとを使用し、捕捉された画像の地理的場所および/または地理空間向きに基づいて、そのデジタルオーバーレイアセットをユーザ捕捉画像502に適用し得る。双方向メディアガイドアプリケーションは、デジタル効果が適用されていることを示す通知504を表示のために生成し、画像を保存するオプション506またはプロセスを却下するオプション508を提供し得る。デジタル効果またはエンハンスメントがユーザデバイスによって捕捉されている画像の上に合成された状態で、ユーザは、ユーザデバイスの周囲を移動し、映画またはテレビ番組に関連付けられる監督もしくは別の個人が見るように場面を意図したように、デジタルでエンハンスメントされた場面と相互作用し得る。
図5も、本開示のいくつかの実施形態による、メディアガイドアプリケーションによって生成される表示画面550の別の例証的例を示す。いくつかの実施形態では、双方向メディアガイドアプリケーションは、再現された場面の中にユーザの友人および/または家族を含むユーザ捕捉画像にデジタル効果もしくはエンハンスメントをオーバーレイする。参照画像のメタデータを用いたユーザデバイスの較正に続いて、双方向メディアガイドアプリケーションは、図4に図示されるように、デジタル効果またはエンハンスメントをユーザデバイスによって捕捉された画像にオーバーレイするオプションをユーザに提示し得る。デジタル効果もしくはエンハンスメントを、ユーザの友人および/または家族を含む画像にオーバーレイすることによって、ユーザは、ユーザのお気に入りの映画もしくはテレビ番組で見られる通りであるが、ユーザの友人および/または家族を含むようにカスタマイズされた場面の拡張現実バージョンを再現し得る。双方向メディアガイドアプリケーションは、3次元レンダリングエンジン、および元のレンダリングされたメディアアセットからのデジタルオーバーレイアセットのデータベースを使用し、捕捉された画像の地理的場所および/または地理空間向きに基づいて、デジタルオーバーレイアセットをユーザ捕捉画像552に適用し得る。双方向メディアガイドアプリケーションは、デジタル効果が適用されていることを示す通知554を表示のために生成し、画像を保存するオプション556またはプロセスを却下するオプション558を提供し得る。
図6は、本開示のいくつかの実施形態による、ユーザ画像データ構造および参照画像データ構造の例証的例600を示す。いくつかの実施形態では、ユーザデバイスによって捕捉される画像は、ユーザ捕捉画像データ構造602内に記憶されたメタデータに関連付けられる。このデータ構造は、捕捉された画像のための地理的場所604および地理空間向き610を含む。データ構造は、緯度606および経度608を含む地理的場所604と、ジャイロ角度612を含む地理空間向き610とを含む。いくつかの実施形態では、メディアアセットからの参照画像は、参照画像データ構造614内に記憶されたメタデータに関連付けられる。このデータ構造は、参照画像のための地理的場所616および地理空間向き622を含む。データ構造は、緯度618および経度620を含む地理的場所616と、ジャイロ角度624を含む地理空間向き622とを含む。この情報は、メディアアセットからの参照画像が録画されるときに記憶される、または後で添付され得る。このデータ構造はまた、メディアアセット626に関する情報、タイトル628、例えば、「Sunset」、参照画像のためのタイムスタンプ630、例えば、「10:45」、および「robot.overlay」等のデジタルオーバーレイアセット632も含む。上で説明されるデータ構造は、例示的であり、ユーザ捕捉画像もしくは参照画像に関連付けられたメタデータのために、適宜、情報を除外し、または、追加の情報を含み得る。
任意の所与のコンテンツ配信システムにおけるユーザに利用可能なコンテンツの量が、膨大であり得る。その結果、多くのユーザは、ユーザがコンテンツの選択を効率的にナビゲートし、所望し得るコンテンツを容易に識別することを可能にするインターフェースを通したメディアガイドの形態を所望している。そのようなガイドを提供するアプリケーションは、本明細書では、双方向メディアガイドアプリケーションと称されるが、時として、メディアガイドアプリケーションまたはガイドアプリケーションと称されることもある。
本明細書で参照されるように、「双方向メディアガイドアプリケーション」または「メディアガイドアプリケーション」、もしくは時として「ガイドアプリケーション」は、ユーザがコンテンツを消費すること、および/またはコンテンツにナビゲートすることを可能にするアプリケーションである。いくつかの実施形態では、メディアガイドアプリケーションは、オンラインアプリケーション(すなわち、ウェブサイト上で提供される)として、またはサーバもしくはユーザデバイス上の独立型アプリケーションとして提供され得る。いくつかの実施形態では、種々のデバイスおよびプラットフォーム上にインストールされた制御回路は、下記により詳細に説明されるように、メディアガイドアプリケーションを実行し得る。いくつかの実施形態では、本明細書で議論される実施形態のうちのいずれかを実施するためのメディアガイドアプリケーションおよび/または任意の命令は、コンピュータ読み取り可能な媒体上にエンコードされ得る。コンピュータ読み取り可能な媒体は、データを記憶することが可能な任意の媒体を含む。コンピュータ読み取り可能な媒体は、限定ではないが、電気もしくは電磁信号の伝搬を含む一過性であり得るか、または限定ではないが、ハードディスク、フロッピー(登録商標)ディスク、USBドライブ、DVD、CD、メディアカード、レジスタメモリ、プロセッサキャッシュ、ランダムアクセスメモリ(「RAM」)等の揮発性および不揮発性コンピュータメモリもしくは記憶デバイスを含む非一過性であり得る。
双方向メディアガイドアプリケーションは、ガイドを提供するコンテンツに応じて、種々の形態をとり得る。1つの典型的なタイプのメディアガイドアプリケーションは、双方向テレビ番組ガイドである。双方向テレビ番組ガイド(時として、電子番組ガイドと称される)は、とりわけ、ユーザが、多くのタイプのコンテンツまたはメディアアセット間をナビゲートし、それを見つけることを可能にする周知のガイドアプリケーションである。双方向メディアガイドアプリケーションは、ユーザが、コンテンツ間をナビゲートし、それを見つけ、選択することを可能にするグラフィカルユーザインターフェース画面を生成し得る。本明細書で参照されるように、用語「メディアアセット」および「コンテンツ」は、例えば、テレビ番組、ならびに有料番組、オンデマンド番組(ビデオオンデマンド(VOD)システムにおけるような)、インターネットコンテンツ(例えば、ストリーミングコンテンツ、ダウンロード可能コンテンツ、ウェブキャスト等)、ビデオクリップ、オーディオ、コンテンツ情報、写真、回転画像、ドキュメント、再生リスト項目、ウェブサイト、記事、書籍、電子書籍、ブログ、チャットセッション、ソーシャルメディア、アプリケーション、ゲーム、および/または任意の他のメディアもしくはマルチメディア、および/またはそれらの組み合わせ等の電子的に消費可能なユーザアセットを意味すると理解されたい。ガイドアプリケーションは、ユーザが、コンテンツ間をナビゲートし、それを見つけることも可能にする。本明細書で参照されるように、用語「マルチメディア」は、上で説明される少なくとも2つの異なるコンテンツ形態、例えば、テキスト、オーディオ、画像、ビデオ、または双方向コンテンツ形態を利用するコンテンツを意味すると理解されたい。コンテンツは、ユーザ機器デバイスによって、録画、再生、表示、またはアクセスされ得るが、それは、ライブパーフォーマンスの一部であることもできる。
本明細書で議論される実施形態のいずれかを実施するためのメディアガイドアプリケーションおよび/または任意の命令は、コンピュータ読み取り可能な媒体上にエンコードされ得る。コンピュータ読み取り可能な媒体は、データを記憶することが可能な任意の媒体を含む。コンピュータ読み取り可能な媒体は、限定ではないが、電気もしくは電磁信号の伝搬を含む一過性であり得るか、または限定ではないが、ハードディスク、フロッピー(登録商標)ディスク、USBドライブ、DVD、CD、メディアカード、レジスタメモリ、プロセッサキャッシュ、ランダムアクセスメモリ(「RAM」)等の揮発性および不揮発性コンピュータメモリもしくは記憶デバイスを含む非一過性であり得る。
インターネット、モバイルコンピューティング、および高速無線ネットワークの出現に伴って、ユーザは、従来使用しなかったユーザ機器デバイス上でメディアにアクセスするようになっている。本明細書で参照されるように、語句「ユーザ機器デバイス」、「ユーザ機器」、「ユーザデバイス」、「電子デバイス」、「電子機器」、「メディア機器デバイス」、または「メディアデバイス」は、テレビ、スマートTV、セットトップボックス、衛星テレビに対応するための統合型受信機デコーダ(IRD)、デジタル記憶デバイス、デジタルメディア受信機(DMR)、デジタルメディアアダプタ(DMA)、ストリーミングメディアデバイス、DVDプレーヤ、DVDレコーダ、接続型DVD、ローカルメディアサーバ、BLU−RAY(登録商標)プレーヤ、BLU−RAY(登録商標)レコーダ、パーソナルコンピュータ(PC)、ラップトップコンピュータ、タブレットコンピュータ、ウェブTVボックス、パーソナルコンピュータテレビ(PC/TV)、PCメディアサーバ、PCメディアセンター、ハンドヘルドコンピュータ、固定電話、携帯情報端末(PDA)、携帯電話、ポータブルビデオプレーヤ、ポータブル音楽プレーヤ、ポータブルゲーム機、スマートフォン、または任意の他のテレビ機器、コンピューティング機器、もしくは無線デバイス、および/またはそれらの組み合わせ等の上で説明されるコンテンツにアクセスするための任意のデバイスを意味すると理解されたい。いくつかの実施形態では、ユーザ機器デバイスは、正面画面および裏面画面、複数の正面画面、または複数の角度付き画面を有し得る。いくつかの実施形態では、ユーザ機器デバイスは、正面カメラおよび/または裏面カメラを有し得る。これらのユーザ機器デバイス上で、ユーザは、テレビを通して利用可能な同じコンテンツ間をナビゲートし、それを見つけることが可能であり得る。その結果として、メディアガイドは、これらのデバイス上でも利用可能であり得る。提供されるガイドは、テレビのみを通して利用可能なコンテンツ、他のタイプのユーザ機器デバイスのうちの1つ以上のもののみを通して利用可能なコンテンツ、もしくはテレビおよび他のタイプのユーザ機器デバイスのうちの1つ以上のものの両方を通して利用可能なコンテンツのためのものであり得る。メディアガイドアプリケーションは、ユーザ機器デバイス上で、オンラインアプリケーション(すなわち、ウェブサイト上で提供される)として、または独立型アプリケーションもしくはクライアントとして提供され得る。メディアガイドアプリケーションを実装し得る、種々のデバイスおよびプラットフォームは、下記により詳細に説明される。
メディアガイドアプリケーションの機能のうちの1つは、メディアガイドデータをユーザに提供することである。本明細書で参照されるように、語句「メディアガイドデータ」または「ガイドデータ」は、コンテンツに関連する任意のデータもしくはガイドアプリケーションを動作させることにおいて使用されるデータを意味すると理解されたい。例えば、ガイドデータは、番組情報、ガイドアプリケーション設定、ユーザ選好、ユーザプロファイル情報、メディアリスト項目、メディア関連情報(例えば、放送時間、放送チャネル、タイトル、内容、評価情報(例えば、ペアレンタルコントロール評価、批評家の評価等)、ジャンルまたはカテゴリ情報、俳優情報、放送会社またはプロバイダのロゴのロゴデータ等)、メディア形式(例えば、標準解像度、高解像度、3D等)、オンデマンド情報、ブログ、ウェブサイト、およびユーザが所望のコンテンツ選択間をナビゲートし、それを見つけるために役立つ任意の他のタイプのガイドデータを含み得る。
図7−8は、メディアガイドデータを提供するために使用され得る例証的表示画面を示す。図7−8に示される表示画面は、任意の好適なユーザ機器デバイスまたはプラットフォーム上に実装され得る。図7−8の表示は、フル画面表示として図示されているが、それらは、表示されているコンテンツ上にも完全または部分的にオーバーレイされ得る。ユーザは、表示画面に提供された選択可能なオプション(例えば、メニューオプション、リスト項目オプション、アイコン、ハイパーリンク等)を選択することによって、またはリモートコントロールもしくは他のユーザ入力インターフェースまたはデバイス上の専用ボタン(例えば、「ガイド」ボタン)を押し下げることによって、コンテンツ情報にアクセスする要望を示し得る。ユーザの指示に応答して、メディアガイドアプリケーションは、グリッド内の時間およびチャネル別、時間別、チャネル別、ソース別、コンテンツタイプ別、カテゴリ別(例えば、映画、スポーツ、ニュース、子供向け、または他の番組カテゴリ)、または他の所定、ユーザ定義、もしくは他の編成基準等のいくつかの方法のうちの1つにおいて編成されたメディアガイド情報を表示画面に提供し得る。
図7は、単一表示内の異なるタイプのコンテンツへのアクセスも可能にする時間およびチャネル別に配列された番組リスト項目表示700の例証的グリッドを示す。表示700は、以下、すなわち、(1)各チャネル/コンテンツタイプ識別子(列内のセル)が利用可能な異なるチャネルまたはコンテンツのタイプを識別するチャネル/コンテンツタイプ識別子704の列、および(2)各時間識別子(行内のセル)が番組の時間帯を識別する時間識別子706の行を伴うグリッド702を含み得る。グリッド702はまた、番組リスト項目708等の番組リスト項目のセルも含み、各リスト項目は、リスト項目の関連チャネルおよび時間の上に提供される番組のタイトルを提供する。ユーザ入力デバイスを用いて、ユーザは、ハイライト領域710を移動させることによって番組リスト項目を選択することができる。ハイライト領域710によって選択される番組リスト項目に関する情報が、番組情報領域712内に提供され得る。領域712は、例えば、番組タイトル、番組内容、番組が提供される時間(該当する場合)、番組が放送されるチャネル(該当する場合)、番組の評価、および他の所望の情報を含み得る。
線形番組(例えば、所定の時間に複数のユーザ機器デバイスに伝送されるようにスケジュールされ、スケジュールに従って提供されるコンテンツ)にアクセスを提供することに加えて、メディアガイドアプリケーションはまた、非線形番組(例えば、任意の時間においてユーザ機器デバイスにアクセス可能であって、スケジュールに従って提供されない、コンテンツ)へのアクセスも提供する。非線形番組は、オンデマンドコンテンツ(例えば、VOD)、インターネットコンテンツ(例えば、ストリーミングメディア、ダウンロード可能メディア等)、ローカルで記憶されたコンテンツ(例えば、上で説明される任意のユーザ機器デバイスまたは他の記憶デバイス上に記憶されたコンテンツ)、または時間的制約のない他のコンテンツを含む異なるコンテンツソースからのコンテンツを含み得る。オンデマンドコンテンツは、特定のコンテンツプロバイダ(例えば、「The Sopranos」や「Curb Your Enthusiasm」を提供するHBO ON DEMAND)によって提供される映画または任意の他のコンテンツを含み得る。HBO ON DEMANDは、Time Warner Company L.P. et al.によって所有されるサービスマークであり、THE SOPRANOSおよびCURB YOUR ENTHUSIASMは、Home Box Office,Inc.によって所有される商標である。インターネットコンテンツは、チャットセッションまたはウェブキャスト等のウェブイベント、もしくはインターネットウェブサイトまたは他のインターネットアクセス(例えば、FTP)を通して、ストリーミングコンテンツまたはダウンロード可能なコンテンツとしてオンデマンドで利用可能なコンテンツを含み得る。
グリッド702は、オンデマンドリスト項目714、録画コンテンツリスト項目716、およびインターネットコンテンツリスト項目718を含む非線形番組のメディアガイドデータを提供し得る。異なるタイプのコンテンツソースからのコンテンツのためのメディアガイドデータを組み合わせる表示は、時として、「混合メディア」表示と称されることもある。表示700とは異なる表示され得るメディアガイドデータのタイプの種々の順列は、ユーザ選択またはガイドアプリケーション定義に基づき得る(例えば、録画および放送リスト項目のみの表示、オンデマンドおよび放送リスト項目のみの表示等)。例証されるように、リスト項目714、716、および718は、これらのリスト項目の選択が、それぞれ、オンデマンドリスト項目、録画リスト項目、またはインターネットリスト項目専用の表示へのアクセスを提供し得ることを示すように、グリッド702内に表示される時間帯全体に及ぶものとして示されている。いくつかの実施形態では、これらのコンテンツタイプのリスト項目は、グリッド702に直接含まれ得る。ユーザがナビゲーションアイコン720のうちの1つを選択することに応答して、追加のメディアガイドデータが表示され得る(ユーザ入力デバイス上の矢印キーを押し下げることは、ナビゲーションアイコン720を選択することと同様に表示に影響を及ぼし得る)。
表示700は、ビデオ領域722およびオプション領域726を含み得る。ビデオ領域722は、ユーザが、ユーザに現在利用可能である、今後利用可能となる、もしくは利用可能であった番組を視聴および/またはプレビューすることを可能にし得る。ビデオ領域722のコンテンツは、グリッド702に表示されるリスト項目のうちの1つに対応するか、またはそれから独立し得る。ビデオ領域を含むグリッド表示は、時として、ピクチャインガイド(PIG)表示と称されることもある。PIG表示およびそれらの機能性は、2003年5月13日発行のSatterfield、他の米国特許第6,564,378号、および2001年5月29日発行のYuen、他の米国特許第6,239,794号(それらの全体として参照することによって本明細書に組み込まれる)でより詳細に説明されている。PIG表示は、本明細書に説明される実施形態の他のメディアガイドアプリケーション表示画面に含まれ得る。
オプション領域726は、ユーザが、異なるタイプのコンテンツ、メディアガイドアプリケーション表示、および/またはメディアガイドアプリケーション特徴にアクセスすることを可能にし得る。オプション領域726は、表示700(および本明細書に説明される他の表示画面)の一部であり得るか、または画面上のオプションを選択すること、もしくはユーザ入力デバイス上の専用または割り当て可能ボタンを押し下げることによって、ユーザによって呼び出され得る。オプション領域726内の選択可能オプションは、グリッド702内の番組リスト項目に関連する特徴に関し得るか、またはメインメニュー表示から利用可能なオプションを含み得る。番組リスト項目に関連する特徴は、他の放送時間または番組の受信方法の検索、番組の録画、番組の連続番組録画の有効化、番組および/またはチャネルをお気に入りとして設定、番組の購入、もしくは他の特徴を含み得る。メインメニュー表示から利用可能なオプションは、検索オプション、VODオプション、ペアレンタルコントロールオプション、インターネットオプション、クラウドベースのオプション、デバイス同期オプション、第2の画面デバイスオプション、種々のタイプのメディアガイドデータ表示にアクセスするオプション、プレミアムサービスをサブスクライブするオプション、ユーザのプロファイルを編集するオプション、ブラウザオーバーレイにアクセスするオプション、または他のオプションを含み得る。
メディアガイドアプリケーションは、ユーザの選好に基づいて個人化され得る。個人化されたメディアガイドアプリケーションは、ユーザが、メディアガイドアプリケーションを用いて個人化された「体験」を生成するように、表示および特徴をカスタマイズすることを可能にする。この個人化された体験は、ユーザがこれらのカスタマイズを入力することを可能にすることによって、および/または種々のユーザ選好を決定するようにメディアガイドアプリケーションがユーザアクティビティを監視することによって、生成され得る。ユーザは、ログインすることによって、または別様にガイドアプリケーションに対して自らを識別することによって、それらの個人化されたガイドアプリケーションにアクセスし得る。メディアガイドアプリケーションのカスタマイズは、ユーザプロファイルに従って作成され得る。カスタマイズは、提示方式(例えば、表示の色方式、テキストのフォントサイズ等)、表示されるコンテンツリスト項目の側面(例えば、HDTV番組のみまたは3D番組のみ、お気に入りチャネル選択に基づいたユーザ指定の放送チャネル、チャネルの表示の並び替え、推奨コンテンツ等)、所望の録画特徴(例えば、特定のユーザに対する録画または連続番組録画、録画品質等)、ペアレンタルコントロール設定、インターネットコンテンツのカスタマイズされた提示(例えば、ソーシャルメディアコンテンツ、電子メール、電子的に配信された記事等の提示)、および他の所望のカスタマイズを変更することを含み得る。
メディアガイドアプリケーションは、ユーザが、ユーザプロファイル情報を提供することを可能にし得るか、またはユーザプロファイル情報を自動的にコンパイルし得る。メディアガイドアプリケーションは、例えば、ユーザがアクセスするコンテンツ、および/またはユーザがガイドアプリケーションと行い得る他の相互作用を監視し得る。加えて、メディアガイドアプリケーションは、特定のユーザに関連する他のユーザプロファイルの全体または一部を取得し(例えば、www.allrovi.com等のユーザがアクセスするインターネット上の他のウェブサイトから、ユーザがアクセスする他のメディアガイドアプリケーションから、ユーザがアクセスする他の双方向アプリケーションから、ユーザの別のユーザ機器デバイスから等)、および/またはメディアガイドアプリケーションがアクセスし得る他のソースから、ユーザについての情報を取得し得る。結果として、ユーザは、ユーザの異なるユーザ機器デバイスにわたって、統一されたガイドアプリケーション体験を提供することができる。このタイプのユーザ体験は、図10に関連して下記により詳細に説明される。追加の個人化されたメディアガイドアプリケーション特徴は、2005年7月11日出願のEllis、他の米国特許出願第2005/0251827号、2007年1月16日出願のBoyer、他の米国特許第7,165,098号、および2002年2月21日出願のEllis、他の米国特許出願第2002/0174430号(それらの全体として参照することによって本明細書に組み込まれる)でより詳細に説明されている。
メディアガイドを提供するための別の表示配列が、図8に示されている。ビデオモザイク表示800は、コンテンツのタイプ、ジャンル、および/または他の編成基準に基づいて編成されたコンテンツ情報のための選択可能オプション802を含む。表示800では、テレビリスト項目オプション804が、選択され、したがって、リスト項目806、808、810、および812を放送番組リスト項目として提供する。表示800では、リスト項目は、カバーアート、コンテンツからの静止画像、ビデオクリップのプレビュー、コンテンツからのライブビデオ、またはリスト項目中のメディアガイドデータによって記述されているコンテンツをユーザに示す他のタイプのコンテンツを含むグラフィック画像を提供し得る。グラフィックリスト項目の各々は、リスト項目に関連付けられるコンテンツに関するさらなる情報を提供するために、テキストも伴い得る。例えば、リスト項目808は、メディア部分814およびテキスト部分816を含む2つ以上の部分を含み得る。メディア部分814および/またはテキスト部分816は、コンテンツをフル画面で視聴するように、またはメディア部分814に表示されるコンテンツに関連する情報を閲覧するように(例えば、ビデオが表示されるチャネルのリスト項目を閲覧するように)、選択可能であり得る。
表示800内のリスト項目は、異なるサイズである(すなわち、リスト項目806は、リスト項目808、810、および812より大きい)が、所望に応じて、全てのリスト項目が同じサイズであり得る。リスト項目は、コンテンツプロバイダの所望に応じて、またはユーザ選好に基づいて、ユーザの関心の程度を示すように、またはあるコンテンツを強調するように、異なるサイズであるか、またはグラフィック的に強調され得る。コンテンツリスト項目をグラフィック的に強調するための種々のシステムおよび方法は、例えば、2009年11月12日に出願されたYatesの米国特許出願第2010/0153885号(その全体として参照することによって本明細書に組み込まれる)で議論されている。
ユーザは、ユーザのユーザ機器デバイスのうちの1つ以上のものから、コンテンツおよびメディアガイドアプリケーション(および上および下で説明されるその表示画面)にアクセスし得る。図9は、例証的ユーザ機器デバイス900の一般化された実施形態を示す。ユーザ機器デバイスのより具体的な実装は、図10に関連して下で議論される。ユーザ機器デバイス900は、入出力(以下「I/O」)パス902を介して、コンテンツおよびデータを受信し得る。I/Oパス902は、処理回路906および記憶装置908を含む制御回路904に、コンテンツ(例えば、放送番組、オンデマンド番組、インターネットコンテンツ、ローカルエリアネットワーク(LAN)または広域ネットワーク(WAN)を経由して利用可能なコンテンツ、および/または他のコンテンツ)およびデータを提供し得る。制御回路904は、I/Oパス902を使用して、コマンド、要求、および他の好適なデータを送受信するために使用され得る。I/Oパス902は、制御回路904(具体的には、処理回路906)を1つ以上の通信パス(下記に説明される)に接続し得る。I/O機能は、これらの通信パスのうちの1つ以上のものによって提供され得るが、図面が複雑になり過ぎることを回避するために、図9では単一パスとして示されている。
制御回路904は、処理回路906等の任意の好適な処理回路に基づき得る。本明細書で参照されるように、処理回路とは、1つ以上のマイクロプロセッサ、マイクロコントローラ、デジタル信号プロセッサ、プログラマブル論理デバイス、フィールドプログラマブルゲートアレイ(FPGA)、特定用途向け集積回路(ASIC)等に基づく回路を意味すると理解され、マルチコアプロセッサ(例えば、デュアルコア、クアドコア、ヘクサコア、または任意の好適な数のコア)またはスーパーコンピュータを含み得る。いくつかの実施形態では、処理回路は、複数の別個のプロセッサまたは処理ユニット、例えば、複数の同じタイプの処理ユニット(例えば、2つのIntel Core i7プロセッサ)または複数の異なるプロセッサ(例えば、Intel Core i5プロセッサおよびIntel Core i7プロセッサ)にわたって分散され得る。いくつかの実施形態では、制御回路904は、メモリ(すなわち、記憶装置908)に記憶されたメディアガイドアプリケーションに対する命令を実行する。具体的には、制御回路904は、メディアガイドアプリケーションによって、上および下で議論される機能を果たすように命令され得る。例えば、メディアガイドアプリケーションは、制御回路904に、メディアガイド表示を生成するための命令を提供し得る。いくつかの実装では、制御回路904によって実施される任意のアクションは、メディアガイドアプリケーションから受信される命令に基づき得る。
クライアントサーバベースの実施形態では、制御回路904は、ガイドアプリケーションサーバまたは他のネットワークもしくはサーバと通信するための好適な通信回路を含み得る。上で述べられる機能性を実施するための命令は、ガイドアプリケーションサーバ上に記憶され得る。通信回路は、ケーブルモデム、総合デジタル通信網(ISDN)モデム、デジタルサブスクライバ回線(DSL)モデム、電話モデム、イーサネット(登録商標)カード、または他の機器との通信用の無線モデム、もしくは任意の他の好適な通信回路を含み得る。そのような通信は、インターネットまたは任意の他の好適な通信ネットワークもしくはパスを伴い得る(図10に関連してより詳細に説明される)。加えて、通信回路は、ユーザ機器デバイスのピアツーピア通信、または互いから遠隔の場所にあるユーザ機器デバイスの通信を可能にする回路を含み得る(下記により詳細に説明される)。
メモリは、制御回路904の一部である記憶装置908として提供される、電子記憶デバイスであり得る。本明細書で参照されるように、語句「電子記憶デバイス」または「記憶デバイス」とは、ランダムアクセスメモリ、読み取り専用メモリ、ハードドライブ、光学ドライブ、デジタルビデオディスク(DVD)レコーダ、コンパクトディスク(CD)レコーダ、BLU−RAY(登録商標)ディスク(BD)レコーダ、BLU−RAY(登録商標) 3Dディスクレコーダ、デジタルビデオレコーダ(DVR、または時として、パーソナルビデオレコーダもしくはPVRと呼ばれる場合もある)、ソリッドステートデバイス、量子記憶デバイス、ゲームコンソール、ゲームメディア、または任意の他の好適な固定もしくはリムーバブル記憶デバイス、および/またはそれらの任意の組み合わせ等の電子データ、コンピュータソフトウェア、もしくはファームウェアを記憶するための任意のデバイスを意味すると理解されたい。記憶装置908は、本明細書に説明される種々のタイプのコンテンツ、ならびに上で説明されるメディアガイドデータを記憶するために使用され得る。不揮発性メモリも、(例えば、ブートアップルーチンおよび他の命令を起動するために)使用され得る。図10に関連して説明されるクラウドベースの記憶装置が、記憶装置908を補完するために使用される、または記憶装置908の代わりに使用され得る。
制御回路904は、1つ以上のアナログチューナ、1つ以上のMPEG−2デコーダ、もしくは他のデジタルデコード回路、高解像度チューナ、または任意の他の好適な同調もしくはビデオ回路、またはそのような回路の組み合わせ等のビデオ生成回路および同調回路を含み得る。(例えば、記憶するために、無線、アナログ、またはデジタル信号をMPEG信号に変換するための)エンコード回路も、提供され得る。制御回路904は、コンテンツをユーザ機器900の好ましい出力形式に上方変換および下方変換するためのスケーリング回路も含み得る。回路904は、デジタル信号とアナログ信号との間で変換するためのデジタル/アナログ変換回路およびアナログ/デジタル変換回路も含み得る。同調およびエンコード回路は、コンテンツを受信して表示する、再生する、または録画するために、ユーザ機器デバイスによって使用され得る。同調およびエンコード回路は、ガイドデータを受信するためにも使用され得る。例えば、同調、ビデオ生成、エンコード、デコード、暗号化、解読、スケーリング、およびアナログ/デジタル回路を含む本明細書に説明される回路は、1つ以上の汎用もしくは特殊プロセッサ上で起動するソフトウェアを使用して実装され得る。複数のチューナが、同時同調機能(例えば、視聴および録画機能、ピクチャインピクチャ(PIP)機能、多重チューナ録画機能等)に対処するように提供され得る。記憶装置908が、ユーザ機器900とは別のデバイスとして提供される場合、同調およびエンコード回路(複数のチューナを含む)は、記憶装置908に関連付けられ得る。
ユーザは、ユーザ入力インターフェース910を使用して、命令を制御回路904に送信し得る。ユーザ入力インターフェース910は、リモートコントロール、マウス、トラックボール、キーパッド、キーボード、タッチスクリーン、タッチパッド、スタイラス入力、ジョイスティック、音声認識インターフェース、または他のユーザ入力インターフェース等の、任意の好適なユーザインターフェースであり得る。ディスプレイ912は、独立型デバイスとして提供される、またはユーザ機器デバイス900の他の要素と統合され得る。例えば、ディスプレイ912は、タッチスクリーンまたはタッチセンサ式ディスプレイであり得る。そのような状況では、ユーザ入力インターフェース910は、ディスプレイ912と統合されるか、または組み合わせられ得る。ディスプレイ912は、モニタ、テレビ、モバイルデバイス用液晶ディスプレイ(LCD)、非晶質シリコンディスプレイ、低温ポリシリコンディスプレイ、電子インクディスプレイ、電気泳動ディスプレイ、アクティブマトリクスディスプレイ、エレクトロウェッティングディスプレイ、電気流体ディスプレイ、ブラウン管ディスプレイ、発光ダイオードディスプレイ、エレクトロルミネセントディスプレイ、プラズマディスプレイパネル、高性能アドレッシングディスプレイ、薄膜トランジスタディスプレイ、有機発光ダイオードディスプレイ、表面伝導型電子放出素子ディスプレイ(SED)、レーザテレビ、カーボンナノチューブ、量子ドットディスプレイ、干渉変調器ディスプレイ、もしくは視覚的画像を表示するための任意の他の好適な機器のうちの1つ以上のものであり得る。いくつかの実施形態では、ディスプレイ912は、HDTV対応型であり得る。いくつかの実施形態では、ディスプレイ312は、3Dディスプレイであり得、双方向メディアガイドアプリケーションおよび任意の好適なコンテンツは、3Dで表示され得る。ビデオカードまたはグラフィックカードは、ディスプレイ912への出力を生成し得る。ビデオカードは、3Dシーンおよび2Dグラフィックのレンダリング加速、MPEG−2/MPEG−4デコード、TV出力、または複数のモニタを接続する能力等の種々の機能を提供し得る。ビデオカードは、制御回路904に関連する上で説明される任意の処理回路であり得る。ビデオカードは、制御回路904と統合され得る。スピーカ914は、ユーザ機器デバイス900の他の要素と統合されたものとして提供され得るか、または独立型ユニットであり得る。ディスプレイ912上に表示されるビデオおよび他のコンテンツのオーディオコンポーネントは、スピーカ914を通して再生され得る。いくつかの実施形態では、オーディオは、スピーカ914を介して音声を処理および出力する、受信機(図示せず)に配布され得る。
ガイドアプリケーションは、任意の好適なアーキテクチャを使用して実装され得る。例えば、それは、ユーザ機器デバイス900上で完全に実装される独立型アプリケーションであり得る。そのようなアプローチでは、アプリケーションの命令は、ローカルで(例えば、記憶装置908内に)記憶され、アプリケーションによって使用するためのデータは、周期的にダウンロードされる(例えば、帯域外フィードから、インターネットリソースから、または別の好適なアプローチを使用して)。制御回路904は、記憶装置908からアプリケーションの命令を読み出し、本明細書で議論される表示のうちのいずれかを生成するための命令を処理し得る。処理された命令に基づいて、制御回路904は、入力が入力インターフェース910から受信されるときに実施するアクションを決定し得る。例えば、表示上のカーソルの上/下への移動は、入力インターフェース910が上/下ボタンが選択されたことを示すとき、処理された命令によって示され得る。
いくつかの実施形態では、メディアガイドアプリケーションは、クライアントサーバベースのアプリケーションである。ユーザ機器デバイス900上に実装されるシックまたはシンクライアントによって使用するためのデータは、ユーザ機器デバイス900の遠隔にあるサーバに要求を発行することによって、オンデマンドで読み出される。クライアントサーバベースのガイドアプリケーションの一例では、制御回路904は、遠隔サーバによって提供されるウェブページを解釈するウェブブラウザを起動する。例えば、遠隔サーバは、記憶デバイス内にアプリケーションのための命令を記憶し得る。遠隔サーバは、回路(例えば、制御回路904)を使用して、記憶された命令を処理し、上および下で議論される表示を生成し得る。クライアントデバイスは、遠隔サーバによって生成される表示を受信し得、表示のコンテンツを機器デバイス900上でローカルで表示し得る。このように、命令の処理が、サーバによって遠隔で実施される一方で、結果として生じる表示は、機器デバイス900上にローカルで提供される。機器デバイス900は、入力インターフェース910を介して、ユーザからの入力を受信し、対応する表示を処理および生成するために、それらの入力を遠隔サーバに伝送し得る。例えば、機器デバイス900は、上/下ボタンが入力インターフェース910を介して選択されたことを示す、通信を遠隔サーバに伝送し得る。遠隔サーバは、その入力に従って命令を処理し、入力に対応するアプリケーションの表示を生成し得る(例えば、カーソルを上/下に移動させる表示)。生成された表示は、次いで、ユーザへの提示のために、機器デバイス900に伝送される。
いくつかの実施形態では、メディアガイドアプリケーションは、インタープリタまたは仮想マシン(制御回路904によって起動される)によって、ダウンロードされ、解釈または別様に起動される。いくつかの実施形態では、ガイドアプリケーションは、ETVバイナリ交換形式(ETV Binary Interchange Format/EBIF)でエンコードされ、好適なフィードの一部として制御回路904によって受信され、制御回路904上で起動するユーザエージェントによって解釈され得る。例えば、ガイドアプリケーションは、EBIFアプリケーションであり得る。いくつかの実施形態では、ガイドアプリケーションは、制御回路904によって実行されるローカル仮想マシンまたは他の好適なミドルウェアによって受信および起動される一連のJAVA(登録商標)ベースのファイルによって定義され得る。そのような実施形態のうちのいくつか(例えば、MPEG−2または他のデジタルメディアエンコードスキームを採用するもの)では、ガイドアプリケーションは、例えば、番組のMPEGオーディオおよびビデオパケットを用いたMPEG−2オブジェクトカルーセルにおいてエンコードおよび伝送され得る。
図9のユーザ機器デバイス900は、ユーザテレビ機器1002、ユーザコンピュータ機器1004、無線ユーザ通信デバイス1006、または非携帯用ゲーム機等のコンテンツにアクセスするために好適な任意の他のタイプのユーザ機器として、図10のシステム1000に実装されることができる。簡単にするために、これらのデバイスは、本明細書では総称して、ユーザ機器またはユーザ機器デバイスと称され得、上で説明されるユーザ機器デバイスに実質的に類似し得る。メディアガイドアプリケーションが実装され得る、ユーザ機器デバイスは、独立型デバイスとして機能し得るか、またはデバイスのネットワークの一部であり得る。デバイスの種々のネットワーク構成が実装され得、下記により詳細に議論される。
図9に関連して上で説明されるシステム特徴のうちの少なくともいくつかを利用するユーザ機器デバイスは、単に、ユーザテレビ機器1002、ユーザコンピュータ機器1004、または無線ユーザ通信デバイス1006として分類されないこともある。例えば、ユーザテレビ機器1002は、いくつかのユーザコンピュータ機器1004のように、インターネットコンテンツへのアクセスを可能にするインターネット対応型であり得る一方で、ユーザコンピュータ機器1004は、あるテレビ機器1002のように、テレビ番組へのアクセスを可能にするチューナを含み得る。メディアガイドアプリケーションは、種々の異なるタイプのユーザ機器上で同一レイアウトを有し得るか、またはユーザ機器の表示能力に合わせられ得る。例えば、ユーザコンピュータ機器1004上では、ガイドアプリケーションは、ウェブブラウザによってアクセスされるウェブサイトとして提供され得る。別の例では、ガイドアプリケーションは、無線ユーザ通信デバイス1006用に縮小され得る。
システム1000では、典型的には、各タイプのユーザ機器デバイスが2つ以上存在するが、図面が複雑になり過ぎることを回避するように、各々の1つのみが図10に示されている。加えて、各ユーザは、2つ以上のタイプのユーザ機器デバイスを利用し得、ユーザ機器デバイスの各タイプの2つ以上のものも利用し得る。
いくつかの実施形態では、ユーザ機器デバイス(例えば、ユーザテレビ機器1002、ユーザコンピュータ機器1004、無線ユーザ通信デバイス1006)は、「第2の画面デバイス」と称され得る。例えば、第2の画面デバイスは、第1のユーザ機器デバイス上に提示されるコンテンツを補完し得る。第2の画面デバイス上に提示されるコンテンツは、第1のデバイス上に提示されるコンテンツを補完する任意の好適なコンテンツであり得る。いくつかの実施形態では、第2の画面デバイスは、第1のデバイスの設定および表示選好を調節するためのインターフェースを提供する。いくつかの実施形態では、第2の画面デバイスは、他の第2の画面デバイスと相互作用するか、またはソーシャルネットワークと相互作用するために構成される。第2の画面デバイスは、第1のデバイスと同じ部屋内に、第1のデバイスと異なる部屋であるが、同じ家または建物内に、または、第1のデバイスと異なる建物内に位置することができる。
ユーザは、家庭内デバイスおよび遠隔デバイスにわたる一貫したメディアガイドアプリケーション設定を維持するための種々の設定も設定し得る。設定は、本明細書に説明されるもの、および、お気に入りのチャネルおよび番組、番組を推奨するためにガイドアプリケーションが利用する番組選好、表示選好、および他の望ましいガイド設定を含む。例えば、ユーザが、そのオフィスのパーソナルコンピュータ上で、例えば、ウェブサイトwww.allrovi.comの上で、チャネルをお気に入りとして設定した場合、同じチャネルが、ユーザの家庭内デバイス(例えば、ユーザテレビ機器およびユーザコンピュータ機器)上で、および、所望に応じて、ユーザのモバイルデバイス上でお気に入りとして表示されるであろう。したがって、同一または異なるタイプのユーザ機器デバイスであるかどうかにかかわらず、1つのユーザ機器デバイス上で行われる変更は、別のユーザ機器デバイス上のガイド体験を変更することができる。加えて、行われる変更は、ユーザによって入力される設定、および、ガイドアプリケーションによって監視されるユーザアクティビティに基づき得る。
ユーザ機器デバイスは、通信ネットワーク1014に結合され得る。すなわち、ユーザテレビ機器1002、ユーザコンピュータ機器1004、および無線ユーザ通信デバイス1006は、それぞれ、通信パス1008、1010、および1012を介して、通信ネットワーク1014に結合される。通信ネットワーク1014は、インターネット、携帯電話ネットワーク、モバイルボイスまたはデータネットワーク(例えば、4GまたはLTEネットワーク)、ケーブルネットワーク、公衆交換電話ネットワーク、または他のタイプの通信ネットワーク、もしくは通信ネットワークの組み合わせを含む1つ以上のネットワークであり得る。パス1008、1010、および1012は、別個に、または一緒に、衛星パス、光ファイバパス、ケーブルパス、インターネット通信をサポートするパス(例えば、IPTV)、フリースペース接続(例えば、放送または他の無線信号用)、もしくは任意の他の好適な有線または無線通信パス、もしくはそのようなパスの組み合わせ等の1つ以上の通信パスを含み得る。パス1012は、図10に示される例示的実施形態では、無線パスであることを示すために破線で描かれ、パス1008および1010は、有線パスであることを示すために実線として描かれている(しかし、これらのパスは、所望に応じて、無線パスであり得る)。ユーザ機器デバイスとの通信は、これらの通信パスのうちの1つ以上のものによって提供され得るが、図10では、図面が複雑になり過ぎることを回避するように、単一パスとして示されている。
通信パスは、ユーザ機器デバイスの間には描かれていないが、これらのデバイスは、パス1008、1010、および1012に関連して上で説明されるもの、および、USBケーブル、IEEE 1394ケーブル、無線パス(例えば、Bluetooth(登録商標)、赤外線、IEEE 802−11x等)等の他の短距離ポイントツーポイント通信パス、もしくは有線または無線パスを介した他の短距離通信等の通信パス等を介して、互いに直接通信し得る。BLUETOOTH(登録商標)は、Bluetooth(登録商標) SIG,INC.によって所有される認証マークである。ユーザ機器デバイスはまた、通信ネットワーク1014を介した間接パスを通して、互いに直接通信し得る。
システム1000は、通信パス1020および1022を介して通信ネットワーク1014にそれぞれ結合される、コンテンツソース1016およびメディアガイドデータソース1018を含む。パス1020および1022は、パス1008、1010、および1012に関連して上で説明される通信パスのうちのいずれかを含み得る。コンテンツソース1016およびメディアガイドデータソース1018との通信は、1つ以上の通信パスを介して交信され得るが、図10では、図面が複雑になり過ぎることを回避するように、単一パスとして示される。加えて、コンテンツソース1016およびメディアガイドデータソース1018の各々が2つ以上存在し得るが、図10では、図面が複雑になり過ぎることを回避するように、各々の1つのみが示されている。(異なるタイプのこれらのソースの各々が下で議論される)。所望に応じて、コンテンツソース1016およびメディアガイドデータソース1018は、1つのソースデバイスとして統合され得る。ソース1016および1018と、ユーザ機器デバイス1002、1004、および1006との間の通信は、通信ネットワーク1014を通したものとして示されているが、いくつかの実施形態では、ソース1016および1018は、パス1008、1010、および1012に関連して上で説明されるもの等の通信パス(図示せず)を介して、ユーザ機器デバイス1002、1004、および1006と直接通信し得る。
コンテンツソース1016は、テレビ配信施設、ケーブルシステムヘッドエンド、衛星配信施設、番組ソース(例えば、NBC、ABC、HBO等のテレビ放送会社)、中間配信施設および/またはサーバ、インターネットプロバイダ、オンデマンドメディアサーバ、および他のコンテンツプロバイダを含む1つ以上のタイプのコンテンツ配信機器を含み得る。NBCは、National Broadcasting Company,Inc.によって所有される商標であり、ABCは、American Broadcasting Company,INC.によって所有される商標であり、HBOは、Home Box Office,Inc.によって所有される商標である。コンテンツソース1016は、コンテンツの発信元であることも(例えば、テレビ放送会社、ウェブキャストプロバイダ等)、またはコンテンツの発信元でないこともある(例えば、オンデマンドコンテンツプロバイダ、ダウンロード用放送番組のコンテンツのインターネットプロバイダ等)。コンテンツソース1016は、ケーブルソース、衛星プロバイダ、オンデマンドプロバイダ、インターネットプロバイダ、オーバーザトップコンテンツプロバイダ、または他のコンテンツのプロバイダを含み得る。コンテンツソース1016はまた、ユーザ機器デバイスのうちのいずれかから遠隔の場所にある、異なるタイプのコンテンツ(ユーザによって選択されるビデオコンテンツを含む)を記憶するために使用される遠隔メディアサーバを含み得る。コンテンツの遠隔記憶のため、および遠隔に記憶されたコンテンツをユーザ機器に提供するためのシステムおよび方法は、2010年7月20日出願のEllis、他の米国特許出願第7,761,892号(その全体として参照することによって本明細書に組み込まれる)に関連して、より詳細に議論されている。
メディアガイドデータソース1018は、上で説明されるメディアガイドデータ等のメディアガイドデータを提供し得る。メディアガイドデータは、任意の好適なアプローチを使用して、ユーザ機器デバイスに提供され得る。いくつかの実施形態では、ガイドアプリケーションは、データフィード(例えば、継続フィードまたはトリクルフィード)を介して、番組ガイドデータを受信する独立型双方向テレビ番組ガイドであり得る。番組スケジュールデータおよび他のガイドデータは、テレビチャネルのサイドバンド上で、帯域内デジタル信号を使用して、帯域外デジタル信号を使用して、または任意の他の好適なデータ伝送技術によって、ユーザ機器に提供され得る。番組スケジュールデータおよび他のメディアガイドデータは、複数のアナログまたはデジタルテレビチャネル上でユーザ機器に提供され得る。
いくつかの実施形態では、メディアガイドデータソース1018からのガイドデータは、クライアントサーバアプローチを使用して、ユーザの機器に提供され得る。例えば、ユーザ機器デバイスは、メディアガイドデータをサーバからプルし得るか、またはサーバは、メディアガイドデータをユーザ機器デバイスにプッシュし得る。いくつかの実施形態では、ユーザの機器上に常駐するガイドアプリケーションクライアントは、必要に応じて、例えば、ガイドデータが、古くなっているとき、またはユーザ機器デバイスが、データを受信する要求をユーザから受信するとき、ソース1018とセッションを開始し、ガイドデータを取得し得る。メディアガイドは、任意の好適な頻度で(例えば、継続的に、毎日、ユーザ規定期間で、システム規定期間で、ユーザ機器からの要求に応答して等)ユーザ機器に提供され得る。メディアガイドデータソース1018は、ユーザ機器デバイス1002、1004、および1006に、メディアガイドアプリケーション自体、またはメディアガイドアプリケーションのソフトウェア更新を提供し得る。
いくつかの実施形態では、メディアガイドデータは、視聴者データを含み得る。例えば、視聴者データは、現在および/または履歴ユーザアクティビティ情報(例えば、ユーザが典型的に鑑賞するコンテンツ、ユーザがコンテンツを鑑賞する時刻、ユーザがソーシャルネットワークと相互作用するかどうか、ユーザがソーシャルネットワークと相互作用し、情報をポストする時間、ユーザが典型的に鑑賞するコンテンツのタイプ(例えば、有料TVまたは無料TV)、気分、脳の活動情報等)を含み得る。メディアガイドデータはまた、サブスクリプションデータを含み得る。例えば、サブスクリプションデータは、所与のユーザがサブスクライブするソースもしくはサービスおよび/または所与のユーザが以前にサブスクライブしていたが、後にアクセスを打ち切ったソースもしくはサービス(例えば、ユーザがプレミアムチャネルをサブスクライブしているかどうか、ユーザがプレミアムレベルのサービスを追加したかどうか、ユーザがインターネット速度を加速させたかどうか)を識別し得る。いくつかの実施形態では、視聴者データおよび/またはサブスクリプションデータは、1年を上回る期間の間の所与のユーザのパターンを識別し得る。メディアガイドデータは、所与のユーザがサービス/ソースへのアクセスを打ち切るであろう可能性を示すスコアを生成するために使用されるモデル(例えば、残存者モデル)を含み得る。例えば、メディアガイドアプリケーションは、所与のユーザが特定のサービスまたはソースへのアクセスを打ち切るであろうかどうかの可能性を示す、値またはスコアを生成するためのモデルを使用して、サブスクリプションデータを用いて視聴者データを処理し得る。特に、より高いスコアは、ユーザが特定のサービスまたはソースへのアクセスを打ち切るであろう、より高いレベルの信頼性を示し得る。スコアに基づいて、メディアガイドアプリケーションは、ユーザがアクセスを打ち切る可能性が高いであろうものとしてスコアによって示される特定のサービスまたはソースをユーザが維持するように勧誘する宣伝を生成し得る。
メディアガイドアプリケーションは、例えば、ユーザ機器デバイス上に実装される独立型アプリケーションであり得る。例えば、メディアガイドアプリケーションは、記憶装置908内に記憶され、ユーザ機器デバイス900の制御回路904によって実行され得るソフトウェアまたは実行可能命令の組として実装され得る。いくつかの実施形態では、メディアガイドアプリケーションは、クライアント−サーバアプリケーションであり得、その場合、クライアントアプリケーションのみが、ユーザ機器デバイス上に常駐し、サーバアプリケーションは、遠隔サーバ上に常駐する。例えば、メディアガイドアプリケーションは、部分的に、ユーザ機器デバイス900の制御回路904上のクライアントアプリケーションとして、および遠隔サーバの制御回路上で起動するサーバアプリケーション(例えば、メディアガイドデータソース1018)として部分的に遠隔サーバ上で、実装され得る。遠隔サーバの制御回路(メディアガイドデータソース1018等)によって実行されると、メディアガイドアプリケーションは、制御回路に、ガイドアプリケーション表示を生成し、生成された表示をユーザ機器デバイスに伝送するように命令し得る。サーバアプリケーションは、メディアガイドデータソース1018の制御回路に、ユーザ機器上での記憶のためのデータを伝送するように命令し得る。クライアントアプリケーションは、受信用ユーザ機器の制御回路に、ガイドアプリケーション表示を生成するように命令し得る。
ユーザ機器デバイス1002、1004、および1006に配信されるコンテンツおよび/またはメディアガイドデータは、オーバーザトップ(OTT)コンテンツであり得る。OTTコンテンツ配信は、上で説明される任意のユーザ機器デバイスを含むインターネット対応型ユーザデバイスが、ケーブルまたは衛星接続を経由して受信されるコンテンツに加えて、上で説明される任意のコンテンツを含むインターネットを経由して転送されるコンテンツを受信することを可能にする。OTTコンテンツは、インターネットサービスプロバイダ(ISP)によって提供されるインターネット接続を介して配布されるが、第三者も、コンテンツを配布する。ISPは、視聴能力、著作権、またはコンテンツの再配布に責任がないこともあり、OTTコンテンツプロバイダによって提供されるIPパケットのみを転送し得る。OTTコンテンツプロバイダの例は、IPパケットを介してオーディオおよびビデオを提供する、YOUTUBE(登録商標)、NETFLIX、ならびにHULUを含む。YOUTUBE(登録商標)は、Google Inc.によって所有される商標であり、Netflixは、Netflix,Inc.によって所有される商標であり、Huluは、Hulu,LLC.によって所有される商標である。OTTコンテンツプロバイダは、加えて、または代替として、上で説明されるメディアガイドデータを提供し得る。コンテンツおよび/またはメディアガイドデータに加えて、OTTコンテンツのプロバイダは、メディアガイドアプリケーション(例えば、ウェブベースのアプリケーションまたはクラウドベースのアプリケーション)を配布することができる、またはコンテンツは、ユーザ機器デバイス上に記憶されたメディアガイドアプリケーションによって表示されることができる。
メディアガイドシステム1000は、いくつかのアプローチまたはネットワーク構成を例証することを意図しており、これによって、ユーザ機器デバイスおよびコンテンツならびにガイドデータのソースは、コンテンツにアクセスし、メディアガイドを提供する目的のために、互いに通信し得る。本明細書に説明される実施形態は、これらのアプローチのうちのいずれか1つまたは一部において、もしくはコンテンツを配信し、メディアガイドを提供するための他のアプローチを採用するシステムにおいて、適用され得る。以下の4つのアプローチは、図10の一般化された例の具体的例証を提供する。
あるアプローチでは、ユーザ機器デバイスは、ホームネットワーク内で互いに通信し得る。ユーザ機器デバイスは、上で説明される短距離ポイントツーポイント通信方式を介して、ホームネットワーク上に提供されるハブまたは他の類似デバイスを通した間接パスを介して、もしくは通信ネットワーク1014を介して、互いに直接通信することができる。1つの家庭内の複数の個人の各々が、ホームネットワーク上の異なるユーザ機器デバイスを動作させ得る。結果として、種々のメディアガイド情報または設定が、異なるユーザ機器デバイスの間で通信されることが望ましくあり得る。例えば、2005年7月11日出願のEllis、他の米国特許公開第2005/0251827号でより詳細に説明されるように、ホームネットワーク内の異なるユーザ機器デバイス上で、ユーザが一貫したメディアガイドアプリケーション設定を維持することが望ましくあり得る。ホームネットワーク内の異なるタイプのユーザ機器デバイスも、互いに通信し、コンテンツを伝送し得る。例えば、ユーザは、ユーザコンピュータ機器から携帯用ビデオプレーヤまたは携帯用音楽プレーヤにコンテンツを伝送し得る。
第2のアプローチでは、ユーザは、複数のタイプのユーザ機器を有し得、これによって、コンテンツにアクセスし、メディアガイドを取得する。例えば、一部のユーザは、家庭内およびモバイルデバイスによってアクセスされるホームネットワークを有し得る。ユーザは、遠隔デバイス上に実装されるメディアガイドアプリケーションを介して、家庭内デバイスを制御し得る。例えば、ユーザは、そのオフィスのパーソナルコンピュータ、またはPDAもしくはウェブ対応携帯電話等のモバイルデバイスを介して、ウェブサイト上のオンラインメディアガイドアプリケーションにアクセスし得る。ユーザは、オンラインガイドアプリケーション上で種々の設定(例えば、録画、リマインダ、または他の設定)を設定して、ユーザの家庭内機器を制御し得る。オンラインガイドは、直接、またはユーザの家庭内機器上のメディアガイドアプリケーションと通信することによって、ユーザの機器を制御し得る。ユーザ機器デバイスが互いから遠隔の場所にある、ユーザ機器デバイスの通信のための種々のシステムおよび方法は、例えば、Ellis、他の2011年10月25日発行の米国特許第8,046,801号(その全体を参照することによって本明細書に組み込まれる)で議論されている。
第3のアプローチでは、家庭内外のユーザ機器デバイスのユーザは、コンテンツソース1016と直接通信し、コンテンツにアクセスするために、そのメディアガイドアプリケーションを使用することができる。具体的には、家庭内では、ユーザテレビ機器1002およびユーザコンピュータ機器1004のユーザは、メディアガイドアプリケーションにアクセスし、所望のコンテンツ間をナビゲートし、それを見つけ得る。ユーザはまた、無線ユーザ通信デバイス1006を使用して、家庭外のメディアガイドアプリケーションにアクセスし、所望のコンテンツ間をナビゲートし、それを見つけ得る。
第4のアプローチでは、ユーザ機器デバイスは、クラウドコンピューティング環境内で動作し、クラウドサービスにアクセスし得る。クラウドコンピューティング環境では、コンテンツ共有、記憶、または配布のための種々のタイプのコンピューティングサービス(例えば、ビデオ共有サイトまたはソーシャルネットワーキングサイト)が、「クラウド」と称される、ネットワークアクセス可能コンピューティングおよび記憶リソースの集合によって提供される。例えば、クラウドは、通信ネットワーク1014を介したインターネット等のネットワークを介して接続される、種々のタイプのユーザおよびデバイスにクラウドベースのサービスを提供する中央または分散場所に位置し得るサーバコンピューティングデバイスの集合を含むことができる。これらのクラウドリソースは、1つ以上のコンテンツソース1016および1つ以上のメディアガイドデータソース1018を含み得る。加えて、または代替として、遠隔コンピューティングサイトは、ユーザテレビ機器1002、ユーザコンピュータ機器1004、および無線ユーザ通信デバイス1006等の他のユーザ機器デバイスを含み得る。例えば、他のユーザ機器デバイスは、ビデオの記憶されたコピーまたはストリーミングされたビデオへのアクセスを提供し得る。そのような実施形態では、ユーザ機器デバイスは、中央サーバと通信することなく、ピアツーピア様式で動作し得る。
クラウドは、ユーザ機器デバイスのために、他の例の中でもとりわけ、コンテンツ記憶、コンテンツ共有、またはソーシャルネットワーキングサービス等のサービスへのアクセス、ならびに上で説明される任意のコンテンツへのアクセスを提供する。サービスは、クラウドコンピューティングサービスプロバイダを通して、またはオンラインサービスの他のプロバイダを通して、クラウド内で提供されることができる。例えば、クラウドベースのサービスは、コンテンツ記憶サービス、コンテンツ共有サイト、ソーシャルネットワーキングサイト、または他のサービスを含むことができ、それを介して、ユーザ供給コンテンツは、接続されたデバイス上で他者によって視聴するために配布される。これらのクラウドベースのサービスは、ユーザ機器デバイスが、コンテンツをローカルで記憶し、ローカルで記憶されたコンテンツにアクセスするのではなく、コンテンツをクラウドに記憶し、コンテンツをクラウドから受信することを可能にし得る。
ユーザは、カムコーダ、ビデオモード付きデジタルカメラ、オーディオレコーダ、携帯電話、およびハンドヘルドコンピューティングデバイス等の種々のコンテンツ捕捉デバイスを使用して、コンテンツを録画し得る。ユーザは、直接、例えば、ユーザコンピュータ機器1004から、またはコンテンツ捕捉特徴を有する、無線ユーザ通信デバイス1006からのいずれかにおいて、クラウド上のコンテンツ記憶サービスにコンテンツをアップロードすることができる。代替として、ユーザは、最初に、コンテンツをユーザコンピュータ機器1004等のユーザ機器デバイスに転送することができる。コンテンツを記憶するユーザ機器デバイスは、通信ネットワーク1014上のデータ伝送サービスを使用して、コンテンツをクラウドにアップロードする。いくつかの実施形態では、ユーザ機器デバイス自体が、クラウドリソースであり、他のユーザ機器デバイスは、直接、ユーザがコンテンツを記憶したユーザ機器デバイスから、コンテンツにアクセスすることができる。
クラウドリソースは、例えば、ウェブブラウザ、メディアガイドアプリケーション、デスクトップアプリケーション、モバイルアプリケーション、および/またはそれらのアクセスアプリケーションの任意の組み合わせを使用して、ユーザ機器デバイスによってアクセスされ得る。ユーザ機器デバイスは、アプリケーション配信のために、クラウドコンピューティングに依拠するクラウドクライアントであり得るか、またはユーザ機器デバイスは、クラウドリソースにアクセスすることなく、ある機能性を有し得る。例えば、ユーザ機器デバイス上で起動するいくつかのアプリケーションは、クラウドアプリケーション、すなわち、インターネットを経由して、サービスとして配信されるアプリケーションであり得る一方で、他のアプリケーションは、ユーザ機器デバイス上に記憶され、起動され得る。いくつかの実施形態では、ユーザデバイスは、コンテンツを複数のクラウドリソースから同時に受信し得る。例えば、ユーザデバイスは、オーディオを1つのクラウドリソースからストリーミングする一方で、コンテンツを第2のクラウドリソースからダウンロードすることができる。または、ユーザデバイスは、より効率的なダウンロードのために、コンテンツを複数のクラウドリソースからダウンロードすることができる。いくつかの実施形態では、ユーザ機器デバイスは、図9に関連して説明される処理回路によって実施される処理動作等の処理動作のために、クラウドリソースを使用することができる。
本明細書で参照されるように、用語「〜に応答して」は、「〜の結果として開始される」ことを指す。例えば、第2のアクションに応答して実施されている第1のアクションは、第1のアクションと第2のアクションとの間に介在ステップを含み得る。本明細書で参照されるように、用語「〜に直接応答して」は、「〜によって引き起こされる」ことを指す。例えば、第2のアクションに直接応答して実施されている第1のアクションは、第1のアクションと第2のアクションとの間に介在ステップを含まないこともある。
図11は、本開示のいくつかの実施形態による、ユーザデバイス(例えば、ユーザ機器デバイス900、図9)の制御回路(例えば、制御回路904、図9)上に実装される双方向メディアガイドアプリケーションが、ユーザデバイス上でメディアアセットからの参照画像を再現するための例証的プロセス1100のフローチャートである。
ステップ1102では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ユーザデバイス上でメディアアセットからの参照画像を再現するためのプロセスを開始する。いくつかの実施形態では、このアルゴリズムは、処理回路(例えば、処理回路906、図9)によってデコードおよび実行される命令の組として、非一過性の記憶媒体(例えば、記憶デバイス908、図9)上にエンコードされ得る。処理回路は、次に、同調、ビデオ生成、エンコード、デコード、暗号化、解読、スケーリング、アナログ/デジタル変換回路等の制御回路904(図9)内に含まれる他のサブ回路に命令を提供し得る。
ステップ1104では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ユーザデバイス、例えば、ユーザ機器デバイス900(図9)によって捕捉されたユーザ画像を受信する。例えば、ユーザデバイスは、ユーザの現在の場所において画像を捕捉し、ユーザデバイスのメモリの中に画像を記憶し、捕捉された画像を双方向メディアガイドアプリケーションに伝送するカメラコンポーネントを含み得る。
ステップ1106では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ユーザ画像に関連付けられた地理的場所を決定する。いくつかの実施形態では、地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む。いくつかの実施形態では、ユーザ画像に関連付けられた地理的場所、および第1の地理空間向きのうちの少なくとも1つは、ユーザ画像から抽出されるメタデータから決定される。例えば、双方向メディアガイドアプリケーションは、捕捉された画像からメタデータを抽出し、緯度および経度等の地理的場所情報を含むデータ構造に対して抽出されたメタデータを分析し、データ構造から地理的場所を読み出し得る。例えば、双方向メディアガイドアプリケーションは、ユーザ画像に関連付けられた地理的場所が緯度47.6°Nおよび経度122.3°Wであることを決定し得る。
ステップ1108では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、データベースから、メディアアセットからの参照画像を識別する。いくつかの実施形態では、データベースは、メディアアセットと、地理的場所でタグ付けされる参照画像とを含む。いくつかの実施形態では、双方向メディアガイドアプリケーションは、ユーザからメディアアセットの指示を受信する。双方向メディアガイドアプリケーションは、データベース、例えば、メディアコンテンツソース1016またはメディアガイドデータソース1018(図10)から、決定された地理的場所およびメディアアセットの指示に基づいて、メディアアセットからの参照画像を識別する。例えば、双方向メディアガイドアプリケーションは、緯度47.6°Nおよび経度122.3°Wのユーザ画像に関連付けられた地理的場所を使用して、クエリをデータベースに伝送し得る。双方向メディアガイドアプリケーションは、例えば、+0.5°および−0.5°の閾値範囲を含み得る。双方向メディアガイドアプリケーションは、データベースから、緯度47.5°Nおよび経度122.4°Wの関連付けられた地理的場所を有する参照画像を示す応答を受信し得る。双方向メディアガイドアプリケーションは、ユーザ画像の地理的場所に基づいて、最も近い合致として参照画像を選択し得る。
ステップ1110では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ユーザ画像に関連付けられた第1の地理空間向きを決定する。いくつかの実施形態では、第1の地理空間向きは、1つ以上のジャイロ角度を含む。いくつかの実施形態では、ユーザ画像に関連付けられた地理的場所、および第1の地理空間向きのうちの少なくとも1つは、ユーザ画像から抽出されるメタデータから決定される。例えば、双方向メディアガイドアプリケーションは、参照画像からメタデータを抽出し得る。双方向メディアガイドアプリケーションは、地理空間向き情報を含むデータ構造に対して抽出されたメタデータを分析し得る。例えば、双方向メディアガイドアプリケーションは、ユーザ画像に関連付けられる地理空間向きが90°のジャイロ角度を含むことを決定し得る。
ステップ1112では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、参照画像に関連付けられた第2の地理空間向きを受信する。いくつかの実施形態では、第2の地理空間向きは、1つ以上のジャイロ角度を含む。例えば、双方向メディアガイドアプリケーションは、参照画像に関連付けられた地理空間向きを受信し、85°のジャイロ角度を含み得る。
ステップ1114では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、第1の地理空間向きが第2の地理空間向きに合致しているかどうかを決定する。例えば、双方向メディアガイドアプリケーションは、85°の参照画像のジャイロ角度から90°のユーザ画像のジャイロ角度を減算し、ゼロではない結果に基づいて、それらが合致しないことを決定し得る。制御回路904(図9)上に実装される双方向メディアガイドアプリケーションが、第1の地理空間向きが第2の地理空間向きに合致しないことを決定する場合、双方向メディアガイドアプリケーションは、ステップ1116に進む。制御回路904(図9)上に実装される双方向メディアガイドアプリケーションが、第1の地理空間向きが第2の地理空間向きに合致することを決定する場合、双方向メディアガイドアプリケーションは、ステップ1120に進む。
ステップ1116では、第2の地理空間向きに合致しない第1の地理空間向きに基づいて、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、第1の地理空間向きと第2の地理空間向きとの間の偏差を決定する。例えば、双方向メディアガイドアプリケーションは、85°の参照画像のジャイロ角度から90°のユーザ画像のジャイロ角度を減算し、偏差が5°であると決定し得る。
ステップ1118では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、偏差に基づいて、ユーザがユーザデバイスの位置を変更するための通知を生成する。例えば、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスの位置を変更するための通知を生成し、ユーザデバイスのディスプレイコンポーネント上での表示のために伝送し得る。双方向メディアガイドアプリケーションは、ユーザ画像がユーザデバイス上に表示されるにときにユーザ画像にオーバーレイされるべき静的矢印の組および動的矢印の組を生成し得る。動的矢印の組は、ジャイロ配向間の偏差を示すように、静的矢印の組に対して変位させられ得る。ユーザが位置を変更すると、矢印の2つの組が並び、ジャイロ配向間の偏差が減少していることを示し得る。
ステップ1120では、第1の地理空間向きが第2の地理空間向きに合致していること(例えば、ゼロである、または所定の閾値を下回る偏差)に基づいて、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ユーザ画像にデジタル効果をオーバーレイする。例えば、地理空間向き間の偏差が所定の閾値内、例えば、0.5°に到達した後、双方向メディアガイドアプリケーションは、ユーザ画像にデジタル効果をオーバーレイし得る。双方向メディアガイドアプリケーションは、参照画像に関連付けられたメタデータから、デジタル効果に関する情報、例えば、「robot.overlay」を読み出し得る。双方向メディアガイドアプリケーションは、デジタル効果をユーザ画像に適用するために、データベースからデジタル効果アセットを読み出し、デジタル画像処理アルゴリズムを開始し得る。例えば、双方向メディアガイドアプリケーションは、ユーザ画像に対してデジタル効果アセットの各ピクセルを比較し、デジタル効果が適用されることが予期されるユーザ画像内のピクセルを改変し得るが、デジタル効果が適用されることが予期されないユーザ画像内のピクセルを改変しないこともある。
ステップ1122では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、随意に、デジタル効果がオーバーレイされたユーザ画像を保存し、続けて場面内の次のフレームのためのユーザ画像を捕捉すべきかどうかユーザに促す。制御回路904(図9)上に実装される双方向メディアガイドアプリケーションがユーザから肯定的応答を受信する場合、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ステップ1124に進む。制御回路904(図9)上に実装される双方向メディアガイドアプリケーションがユーザから否定的応答を受信する場合、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ステップ1120に戻る。いくつかの実施形態では、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ユーザから否定的応答を受信することに応答して、プロセスを終了し得る。
ステップ1124では、ユーザ画像にデジタル効果をオーバーレイするステップに続いて、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ユーザがユーザデバイスの位置を変更するための別の通知を生成する。例えば、双方向メディアガイドアプリケーションは、ユーザがユーザデバイスの位置を変更し、場面内の次のフレームのための画像を捕捉するための別の通知を生成し得る。双方向メディアガイドアプリケーションは、ユーザデバイスのディスプレイコンポーネント上での表示のために伝送し得る。双方向メディアガイドアプリケーションは、ユーザ画像がユーザデバイス上に表示されるときにユーザ画像にオーバーレイされるべき静的矢印の組および動的矢印の組を生成し得る。動的矢印の組は、ジャイロ配向間の偏差を示すように、静的矢印の組に対して変位させられ得る。ユーザが位置を変更すると、矢印の2つの組が並び、ジャイロ配向間の偏差が減少していることを示し得る。双方向メディアガイドアプリケーションは、ステップ1124においてプロセスを却下および終了するためのユーザ入力を受信し得る。代替として、双方向メディアガイドアプリケーションは、ステップ1104に進み得る。
ステップ1124に続いて、ステップ1104の後およびそれ以降に、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、ユーザデバイスによって捕捉された第2のユーザ画像を受信する。双方向メディアガイドアプリケーションは、データベースから、メディアアセットからの第2の参照画像を識別する。例えば、ユーザデバイス内のカメラコンポーネントは、ユーザの現在の場所において画像を捕捉し、ユーザデバイスのメモリの中に画像を記憶し、捕捉された画像を双方向メディアガイドアプリケーションに伝送し得る。双方向メディアガイドアプリケーションは、捕捉された画像からメタデータを抽出し、緯度および経度等の地理的場所情報を含むデータ構造に対して抽出されたメタデータを分析し、データ構造から地理的場所を読み出し得る。
いくつかの実施形態では、所定の閾値を下回る第2のユーザ画像のための地理空間向きと第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、制御回路904(図9)上に実装される双方向メディアガイドアプリケーションは、第2のユーザ画像に第2のデジタル効果をオーバーレイする。例えば、地理空間向き間の偏差が所定の閾値内、例えば、0.5°に到達した後、双方向メディアガイドアプリケーションは、ユーザ画像にデジタル効果をオーバーレイし得る。双方向メディアガイドアプリケーションは、参照画像に関連付けられたメタデータから、デジタル効果に関する情報、例えば、「robot2.overlay」を読み出し得る。双方向メディアガイドアプリケーションは、デジタル効果をユーザ画像に適用するために、データベースからデジタル効果アセットを読み出し、デジタル画像処理アルゴリズムを開始し得る。例えば、双方向メディアガイドアプリケーションは、ユーザ画像に対してデジタル効果アセットの各ピクセルを比較し、デジタル効果が適用されることが予期されるユーザ画像内のピクセルを改変し得るが、デジタル効果が適用されることが予期されないユーザ画像内のピクセルを改変しないこともある。
図11のステップまたは説明は、本開示の任意の他の実施形態とともに使用され得ることが考慮される。加えて、図11のアルゴリズムに関連して説明される説明は、本開示の目的を進めるために、代替順序で、または並行して、行われ得る。例えば、ステップ1114におけるもの等の条件文および論理評価は、システムまたは方法の遅延を低減させるために、もしくは速度を増加させるために、任意の順序で、または並行して、もしくは同時に実施され得る。さらなる例として、いくつかの実施形態では、いくつかの変数のインスタンスは、複数の論理プロセッサスレッドを使用して、並行して評価され得るか、またはアルゴリズムは、分岐予測を組み込むことによって増進され得る。さらに、図11のプロセスは、適切に構成されたソフトウェアおよびハードウェアの組み合わせの上に実装され得、図9−10に関連して議論されるデバイスまたは機器のうちのいずれかは、プロセスのうちの1つ以上のものを実装するために使用され得ることに留意されたい。
上で議論されるプロセスは、例証であり、限定を意図するものではない。当業者は、本明細書で議論されるプロセスのステップが、本発明の範囲から逸脱することなく、省略される、修正される、組み合わせられる、および/または再配列され得、任意の追加のステップが、実施され得ることを理解するであろう。より一般的には、上記の開示は、例示的であり、限定を意図するものではない。続く請求項のみが、本発明が含むものに関する境界を設定することが意図される。さらに、いずれか1つの実施形態で説明される特徴および限定は、本明細書の任意の他の実施形態に適用され得、一実施形態に関するフローチャートまたは例は、好適な様式で任意の他の実施形態と組み合わせられ得ること、異なる順序で行われ得ること、または並行して行われ得ることに留意されたい。加えて、本明細書で説明されるシステムおよび方法は、リアルタイムで実施され得る。上で説明されるシステムおよび/または方法が、他のシステムおよび/または方法に適用され得ること、またはそれらに従って使用され得ることにも留意されたい。
上で説明されるシステム、方法、装置、および/または側面は、本開示に説明される他のシステム、方法、装置、および/または側面に適用され得るか、またはそれに従って使用され得ることに留意されたい。
本発明はさらに、例えば、以下を提供する。
(項目1)
ユーザデバイス上でメディアアセットからの参照画像を再現する方法であって、前記方法は、
ユーザデバイスによって捕捉されたユーザ画像を受信することと、
前記メディアアセットからの前記参照画像を識別することと、
前記ユーザ画像の第1の地理空間向きが前記参照画像の第2の地理空間向きに合致しているかどうかを決定することと、
前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成することと
を含む、方法。
(項目2)
ユーザデバイス上でメディアアセットからの参照画像を再現する方法であって、前記方法は、
前記ユーザデバイスによって捕捉されたユーザ画像を受信することと、
前記ユーザ画像に関連付けられた地理的場所を決定することと、
前記決定された地理的場所に基づいて、
データベースから、前記メディアアセットからの前記参照画像を識別することと、
前記ユーザ画像に関連付けられた第1の地理空間向きを決定することと、
前記参照画像に関連付けられた第2の地理空間向きを受信することと、
前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定することと、
前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定することと、
前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成することと
を含む、方法。
(項目3)
前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、項目2に記載の方法。
(項目4)
前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、項目2に記載の方法。
(項目5)
前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、項目2に記載の方法。
(項目6)
前記ユーザから前記メディアアセットの指示を受信することと、
前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別することと
を含む、項目5に記載の方法。
(項目7)
前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、項目2に記載の方法。
(項目8)
所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイすることを含む、項目2に記載の方法。
(項目9)
前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成することを含む、項目8に記載の方法。
(項目10)
前記ユーザデバイスによって捕捉された第2のユーザ画像を受信することと、
前記データベースから、前記メディアアセットからの第2の参照画像を識別することと
を含む、項目9に記載の方法。
(項目11)
前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイすることを含む、項目10に記載の方法。
(項目12)
ユーザデバイス上でメディアアセットからの参照画像を再現するためのシステムであって、前記システムは、
前記ユーザデバイスと、
制御回路と
を備え、
前記制御回路は、
前記ユーザデバイスによって捕捉されたユーザ画像を受信することと、
前記ユーザ画像に関連付けられた地理的場所を決定することと、
前記決定された地理的場所に基づいて、
データベースから、前記メディアアセットからの前記参照画像を識別することと、
前記ユーザ画像に関連付けられた第1の地理空間向きを決定することと、
前記参照画像に関連付けられた第2の地理空間向きを受信することと、
前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定することと、
前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定することと、
前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成することと
を行うように構成されている、システム。
(項目13)
前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、項目12に記載のシステム。
(項目14)
前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、項目12に記載のシステム。
(項目15)
前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、項目12に記載のシステム。
(項目16)
前記制御回路は、
前記ユーザから前記メディアアセットの指示を受信することと、
前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別することと
を行うように構成されている、項目15に記載のシステム。
(項目17)
前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、項目12に記載のシステム。
(項目18)
前記制御回路は、所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイするように構成されている、項目12に記載のシステム。
(項目19)
前記制御回路は、前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成するように構成されている、項目18に記載のシステム。
(項目20)
前記制御回路は、
前記ユーザデバイスによって捕捉された第2のユーザ画像を受信することと、
前記データベースから、前記メディアアセットからの第2の参照画像を識別することと
を行うように構成されている、項目19に記載のシステム。
(項目21)
前記制御回路は、前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイするように構成されている、項目20に記載のシステム。
(項目22)
ユーザデバイス上でメディアアセットからの参照画像を再現するための装置であって、前記装置は、
前記ユーザデバイスによって捕捉されたユーザ画像を受信する手段と、
前記ユーザ画像に関連付けられた地理的場所を決定する手段と、
前記決定された地理的場所に基づいて、
データベースから、前記メディアアセットからの前記参照画像を識別する手段と、
前記ユーザ画像に関連付けられた第1の地理空間向きを決定する手段と、
前記参照画像に関連付けられた第2の地理空間向きを受信する手段と、
前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定する手段と、
前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定する手段と、
前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成する手段と
を備えている、装置。
(項目23)
前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、項目22に記載の装置。
(項目24)
前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、項目22に記載の装置。
(項目25)
前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、項目22に記載の装置。
(項目26)
前記ユーザから前記メディアアセットの指示を受信する手段と、
前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別する手段と
を備えている、項目25に記載の装置。
(項目27)
前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、項目22に記載の装置。
(項目28)
所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイする手段を備えている、項目22に記載の装置。
(項目29)
前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成する手段を備えている、項目28に記載の装置。
(項目30)
前記ユーザデバイスによって捕捉された第2のユーザ画像を受信する手段と、
前記データベースから、前記メディアアセットからの第2の参照画像を識別する手段と
を備えている、項目29に記載の装置。
(項目31)
前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイする手段を備えている、項目30に記載の装置。
(項目32)
ユーザデバイス上でメディアアセットからの参照画像を再現するためのエンコードされた命令を有するメモリを備えている非一過性機械読み取り可能な媒体であって、前記命令は、
前記ユーザデバイスによって捕捉されたユーザ画像を受信するための命令と、
前記ユーザ画像に関連付けられた地理的場所を決定するための命令と、
前記決定された地理的場所に基づいて、
データベースから、前記メディアアセットからの前記参照画像を識別するための命令と、
前記ユーザ画像に関連付けられた第1の地理空間向きを決定するための命令と、
前記参照画像に関連付けられた第2の地理空間向きを受信するための命令と、
前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定するための命令と、
前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定するための命令と、
前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成するための命令と
を備えている、非一過性機械読み取り可能な媒体。
(項目33)
前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、項目32に記載の非一過性機械読み取り可能な媒体。
(項目34)
前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、項目32に記載の非一過性機械読み取り可能な媒体。
(項目35)
前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、項目32に記載の非一過性機械読み取り可能な媒体。
(項目36)
前記ユーザから前記メディアアセットの指示を受信するための命令と、
前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別するための命令と
を備えている、項目35に記載の非一過性機械読み取り可能な媒体。
(項目37)
前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、項目32に記載の非一過性機械読み取り可能な媒体。
(項目38)
所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイするための命令を備えている、項目32に記載の非一過性機械読み取り可能な媒体。
(項目39)
前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成するための命令を備えている、項目38に記載の非一過性機械読み取り可能な媒体。
(項目40)
前記ユーザデバイスによって捕捉された第2のユーザ画像を受信するための命令と、
前記データベースから、前記メディアアセットからの第2の参照画像を識別するための命令と
を備えている、項目39に記載の非一過性機械読み取り可能な媒体。
(項目41)
前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイするための命令を備えている、項目40に記載の非一過性機械読み取り可能な媒体。
(項目42)
ユーザデバイス上でメディアアセットからの参照画像を再現する方法であって、前記方法は、
前記ユーザデバイスによって捕捉されたユーザ画像を受信することと、
前記ユーザ画像に関連付けられた地理的場所を決定することと、
前記決定された地理的場所に基づいて、
データベースから、前記メディアアセットからの前記参照画像を識別することと、
前記ユーザ画像に関連付けられた第1の地理空間向きを決定することと、
前記参照画像に関連付けられた第2の地理空間向きを受信することと、
前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定することと、
前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定することと、
前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成することと
を含む、方法。
(項目43)
前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、項目42に記載の方法。
(項目44)
前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、項目42または43に記載の方法。
(項目45)
前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、項目42−44のいずれか1項に記載の方法。
(項目46)
前記ユーザから前記メディアアセットの指示を受信することと、
前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別することと
を含む、項目45に記載の方法。
(項目47)
前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、項目42−46のいずれか1項に記載の方法。
(項目48)
所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイすることを含む、項目42−47のいずれか1項に記載の方法。
(項目49)
前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成することを含む、項目48に記載の方法。
(項目50)
前記ユーザデバイスによって捕捉された第2のユーザ画像を受信することと、
前記データベースから、前記メディアアセットからの第2の参照画像を識別することと、
を含む、項目49に記載の方法。
(項目51)
前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイすることを含む、項目50に記載の方法。

Claims (51)

  1. ユーザデバイス上でメディアアセットからの参照画像を再現する方法であって、前記方法は、
    ユーザデバイスによって捕捉されたユーザ画像を受信することと、
    前記メディアアセットからの前記参照画像を識別することと、
    前記ユーザ画像の第1の地理空間向きが前記参照画像の第2の地理空間向きに合致しているかどうかを決定することと、
    前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成することと
    を含む、方法。
  2. ユーザデバイス上でメディアアセットからの参照画像を再現する方法であって、前記方法は、
    前記ユーザデバイスによって捕捉されたユーザ画像を受信することと、
    前記ユーザ画像に関連付けられた地理的場所を決定することと、
    前記決定された地理的場所に基づいて、
    データベースから、前記メディアアセットからの前記参照画像を識別することと、
    前記ユーザ画像に関連付けられた第1の地理空間向きを決定することと、
    前記参照画像に関連付けられた第2の地理空間向きを受信することと、
    前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定することと、
    前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
    前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定することと、
    前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成することと
    を含む、方法。
  3. 前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、請求項2に記載の方法。
  4. 前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、請求項2に記載の方法。
  5. 前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、請求項2に記載の方法。
  6. 前記ユーザから前記メディアアセットの指示を受信することと、
    前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別することと
    を含む、請求項5に記載の方法。
  7. 前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、請求項2に記載の方法。
  8. 所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイすることを含む、請求項2に記載の方法。
  9. 前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成することを含む、請求項8に記載の方法。
  10. 前記ユーザデバイスによって捕捉された第2のユーザ画像を受信することと、
    前記データベースから、前記メディアアセットからの第2の参照画像を識別することと
    を含む、請求項9に記載の方法。
  11. 前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイすることを含む、請求項10に記載の方法。
  12. ユーザデバイス上でメディアアセットからの参照画像を再現するためのシステムであって、前記システムは、
    前記ユーザデバイスと、
    制御回路と
    を備え、
    前記制御回路は、
    前記ユーザデバイスによって捕捉されたユーザ画像を受信することと、
    前記ユーザ画像に関連付けられた地理的場所を決定することと、
    前記決定された地理的場所に基づいて、
    データベースから、前記メディアアセットからの前記参照画像を識別することと、
    前記ユーザ画像に関連付けられた第1の地理空間向きを決定することと、
    前記参照画像に関連付けられた第2の地理空間向きを受信することと、
    前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定することと、
    前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
    前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定することと、
    前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成することと
    を行うように構成されている、システム。
  13. 前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、請求項12に記載のシステム。
  14. 前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、請求項12に記載のシステム。
  15. 前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、請求項12に記載のシステム。
  16. 前記制御回路は、
    前記ユーザから前記メディアアセットの指示を受信することと、
    前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別することと
    を行うように構成されている、請求項15に記載のシステム。
  17. 前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、請求項12に記載のシステム。
  18. 前記制御回路は、所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイするように構成されている、請求項12に記載のシステム。
  19. 前記制御回路は、前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成するように構成されている、請求項18に記載のシステム。
  20. 前記制御回路は、
    前記ユーザデバイスによって捕捉された第2のユーザ画像を受信することと、
    前記データベースから、前記メディアアセットからの第2の参照画像を識別することと
    を行うように構成されている、請求項19に記載のシステム。
  21. 前記制御回路は、前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイするように構成されている、請求項20に記載のシステム。
  22. ユーザデバイス上でメディアアセットからの参照画像を再現するための装置であって、前記装置は、
    前記ユーザデバイスによって捕捉されたユーザ画像を受信する手段と、
    前記ユーザ画像に関連付けられた地理的場所を決定する手段と、
    前記決定された地理的場所に基づいて、
    データベースから、前記メディアアセットからの前記参照画像を識別する手段と、
    前記ユーザ画像に関連付けられた第1の地理空間向きを決定する手段と、
    前記参照画像に関連付けられた第2の地理空間向きを受信する手段と、
    前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定する手段と、
    前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
    前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定する手段と、
    前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成する手段と
    を備えている、装置。
  23. 前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、請求項22に記載の装置。
  24. 前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、請求項22に記載の装置。
  25. 前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、請求項22に記載の装置。
  26. 前記ユーザから前記メディアアセットの指示を受信する手段と、
    前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別する手段と
    を備えている、請求項25に記載の装置。
  27. 前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、請求項22に記載の装置。
  28. 所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイする手段を備えている、請求項22に記載の装置。
  29. 前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成する手段を備えている、請求項28に記載の装置。
  30. 前記ユーザデバイスによって捕捉された第2のユーザ画像を受信する手段と、
    前記データベースから、前記メディアアセットからの第2の参照画像を識別する手段と
    を備えている、請求項29に記載の装置。
  31. 前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイする手段を備えている、請求項30に記載の装置。
  32. ユーザデバイス上でメディアアセットからの参照画像を再現するためのエンコードされた命令を有するメモリを備えている非一過性機械読み取り可能な媒体であって、前記命令は、
    前記ユーザデバイスによって捕捉されたユーザ画像を受信するための命令と、
    前記ユーザ画像に関連付けられた地理的場所を決定するための命令と、
    前記決定された地理的場所に基づいて、
    データベースから、前記メディアアセットからの前記参照画像を識別するための命令と、
    前記ユーザ画像に関連付けられた第1の地理空間向きを決定するための命令と、
    前記参照画像に関連付けられた第2の地理空間向きを受信するための命令と、
    前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定するための命令と、
    前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
    前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定するための命令と、
    前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成するための命令と
    を備えている、非一過性機械読み取り可能な媒体。
  33. 前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、請求項32に記載の非一過性機械読み取り可能な媒体。
  34. 前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、請求項32に記載の非一過性機械読み取り可能な媒体。
  35. 前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、請求項32に記載の非一過性機械読み取り可能な媒体。
  36. 前記ユーザから前記メディアアセットの指示を受信するための命令と、
    前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別するための命令と
    を備えている、請求項35に記載の非一過性機械読み取り可能な媒体。
  37. 前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、請求項32に記載の非一過性機械読み取り可能な媒体。
  38. 所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイするための命令を備えている、請求項32に記載の非一過性機械読み取り可能な媒体。
  39. 前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成するための命令を備えている、請求項38に記載の非一過性機械読み取り可能な媒体。
  40. 前記ユーザデバイスによって捕捉された第2のユーザ画像を受信するための命令と、
    前記データベースから、前記メディアアセットからの第2の参照画像を識別するための命令と
    を備えている、請求項39に記載の非一過性機械読み取り可能な媒体。
  41. 前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイするための命令を備えている、請求項40に記載の非一過性機械読み取り可能な媒体。
  42. ユーザデバイス上でメディアアセットからの参照画像を再現する方法であって、前記方法は、
    前記ユーザデバイスによって捕捉されたユーザ画像を受信することと、
    前記ユーザ画像に関連付けられた地理的場所を決定することと、
    前記決定された地理的場所に基づいて、
    データベースから、前記メディアアセットからの前記参照画像を識別することと、
    前記ユーザ画像に関連付けられた第1の地理空間向きを決定することと、
    前記参照画像に関連付けられた第2の地理空間向きを受信することと、
    前記第1の地理空間向きが前記第2の地理空間向きに合致しているかどうかを決定することと、
    前記第1の地理空間向きが前記第2の地理空間向きに合致していないことに基づいて、
    前記第1の地理空間向きと前記第2の地理空間向きとの間の偏差を決定することと、
    前記偏差に基づいて、ユーザが前記ユーザデバイスの位置を変更するための通知を生成することと
    を含む、方法。
  43. 前記地理的場所は、緯度座標および経度座標のうちの少なくとも1つを含む、請求項42に記載の方法。
  44. 前記第1の地理空間向きは、1つ以上のジャイロ角度を含む、請求項42または43に記載の方法。
  45. 前記データベースは、前記メディアアセットと、前記地理的場所でタグ付けされた前記参照画像とを含む、請求項42−44のいずれか1項に記載の方法。
  46. 前記ユーザから前記メディアアセットの指示を受信することと、
    前記データベースから、前記決定された地理的場所および前記メディアアセットの指示に基づいて、前記メディアアセットからの前記参照画像を識別することと
    を含む、請求項45に記載の方法。
  47. 前記ユーザ画像に関連付けられた前記地理的場所および前記第1の地理空間向きのうちの少なくとも1つは、前記ユーザ画像から抽出されるメタデータから決定される、請求項42−46のいずれか1項に記載の方法。
  48. 所定の閾値を下回る前記第1の地理空間向きと前記第2の地理空間向きとの間の前記偏差に基づいて、前記ユーザ画像にデジタル効果をオーバーレイすることを含む、請求項42−47のいずれか1項に記載の方法。
  49. 前記ユーザ画像に前記デジタル効果をオーバーレイすることに続いて、前記ユーザが前記ユーザデバイスの位置を変更するための別の通知を生成することを含む、請求項48に記載の方法。
  50. 前記ユーザデバイスによって捕捉された第2のユーザ画像を受信することと、
    前記データベースから、前記メディアアセットからの第2の参照画像を識別することと、
    を含む、請求項49に記載の方法。
  51. 前記所定の閾値を下回る前記第2のユーザ画像のための地理空間向きと前記第2の参照画像のための地理空間向きとの間の第2の偏差に基づいて、前記第2のユーザ画像に第2のデジタル効果をオーバーレイすることを含む、請求項50に記載の方法。
JP2019517935A 2016-10-04 2017-10-04 メディアアセットからの参照画像を再現するためのシステムおよび方法 Pending JP2019532430A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/284,832 2016-10-04
US15/284,832 US10163008B2 (en) 2016-10-04 2016-10-04 Systems and methods for recreating a reference image from a media asset
PCT/US2017/055150 WO2018067706A1 (en) 2016-10-04 2017-10-04 Systems and methods for recreating a reference image from a media asset

Publications (1)

Publication Number Publication Date
JP2019532430A true JP2019532430A (ja) 2019-11-07

Family

ID=60162263

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019517935A Pending JP2019532430A (ja) 2016-10-04 2017-10-04 メディアアセットからの参照画像を再現するためのシステムおよび方法

Country Status (8)

Country Link
US (1) US10163008B2 (ja)
EP (1) EP3523781A1 (ja)
JP (1) JP2019532430A (ja)
KR (1) KR20190065329A (ja)
CN (1) CN109997094B (ja)
AU (1) AU2017338855A1 (ja)
CA (1) CA3039183A1 (ja)
WO (1) WO2018067706A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9854156B1 (en) 2016-06-12 2017-12-26 Apple Inc. User interface for camera effects
US10298837B2 (en) * 2016-12-28 2019-05-21 Facebook, Inc. Systems and methods for presenting content based on unstructured visual data
DK180859B1 (en) * 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
CN110111143A (zh) * 2019-04-28 2019-08-09 上海二三四五移动科技有限公司 一种建立移动端用户画像的控制方法以及控制装置
JP2023027650A (ja) * 2021-08-17 2023-03-02 富士フイルムビジネスイノベーション株式会社 遠隔支援システム、端末装置、遠隔装置、誘導画像表示プログラム、及び遠隔支援プログラム

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6239794B1 (en) 1994-08-31 2001-05-29 E Guide, Inc. Method and system for simultaneously displaying a television program and information about the program
US6564378B1 (en) 1997-12-08 2003-05-13 United Video Properties, Inc. Program guide system with browsing display
JP4268612B2 (ja) * 1998-05-20 2009-05-27 富士フイルム株式会社 画像再生装置
CN1867068A (zh) 1998-07-14 2006-11-22 联合视频制品公司 交互式电视节目导视系统及其方法
ES2342593T3 (es) 1998-07-17 2010-07-09 United Video Properties, Inc. Sistema de guia interactivo de programas de television que tienen multiples dispositivos dentro de una casa.
AR020608A1 (es) 1998-07-17 2002-05-22 United Video Properties Inc Un metodo y una disposicion para suministrar a un usuario acceso remoto a una guia de programacion interactiva por un enlace de acceso remoto
US7165098B1 (en) 1998-11-10 2007-01-16 United Video Properties, Inc. On-line schedule system with personalization features
KR100896725B1 (ko) 2001-02-21 2009-05-11 유나이티드 비디오 프로퍼티즈, 인크. 복수의 프로그램 가이드 제공 방법, 프로그램 버퍼링 방법 및 시스템
US7082365B2 (en) * 2001-08-16 2006-07-25 Networks In Motion, Inc. Point of interest spatial rating search method and system
US20040189849A1 (en) * 2003-03-31 2004-09-30 Hofer Gregory V. Panoramic sequence guide
JP4244973B2 (ja) 2005-08-03 2009-03-25 ソニー株式会社 撮像システムとカメラ制御装置およびパノラマ画像表示方法とプログラム
US20100153885A1 (en) 2005-12-29 2010-06-17 Rovi Technologies Corporation Systems and methods for interacting with advanced displays provided by an interactive media guidance application
US20100185389A1 (en) * 2009-01-21 2010-07-22 Michael Glenn Woodard GPS-based vehicle alert and control system
US8774527B1 (en) 2009-12-07 2014-07-08 Google Inc. Matching an approximately located query image against a reference image set using cellular base station and wireless access point information
US8189964B2 (en) * 2009-12-07 2012-05-29 Google Inc. Matching an approximately located query image against a reference image set
US8233686B2 (en) * 2010-06-28 2012-07-31 Junghoon Lee Methods and systems for locating objects embedded in a body
US9874454B2 (en) * 2011-01-13 2018-01-23 Here Global B.V. Community-based data for mapping systems
US8660358B1 (en) * 2011-02-18 2014-02-25 Google Inc. Rank-based image piling
US20120323690A1 (en) * 2011-06-15 2012-12-20 Joseph Michael Systems and methods for monitoring, managing, and facilitating location- and/or other criteria-dependent targeted communications and/or transactions
ES2402422B1 (es) * 2011-09-07 2014-03-11 Manuel MUÑOZ SÁIZ Sistema de conducción automática y de avisos de zonas de velocidad reducida para vehiculos mejorado
US20130128050A1 (en) * 2011-11-22 2013-05-23 Farzin Aghdasi Geographic map based control
JP5984114B2 (ja) * 2012-07-18 2016-09-06 富士通株式会社 モデル作成プログラム、モデル作成方法、およびモデル作成装置
US20150185992A1 (en) * 2012-09-27 2015-07-02 Google Inc. Providing geolocated imagery related to a user-selected image
US9251850B2 (en) * 2012-12-19 2016-02-02 Bitcentral Inc. Nonlinear proxy-based editing system and method having improved audio level controls
US9075988B2 (en) 2012-12-28 2015-07-07 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Inferring security decisions from trusted users
CN103105993B (zh) * 2013-01-25 2015-05-20 腾讯科技(深圳)有限公司 基于增强现实技术实现互动的方法和系统
US9074894B2 (en) * 2013-07-08 2015-07-07 GM Global Technology Operations LLC Vehicle range projection estimation
US9691237B2 (en) * 2013-08-21 2017-06-27 Raven Industries, Inc. Non-visual navigation feedback system and method
US20150185017A1 (en) * 2013-12-28 2015-07-02 Gregory L. Kreider Image-based geo-hunt
US9947042B2 (en) * 2014-01-01 2018-04-17 Ouri Shifman Method for providing on-demand digital representations to mobile devices and other computers in other geographic locations by auction and/or sale
US9451315B2 (en) * 2014-06-30 2016-09-20 Rovi Guides, Inc. Systems and methods for generating for display an interactive media guide based on user history

Also Published As

Publication number Publication date
US10163008B2 (en) 2018-12-25
CN109997094B (zh) 2023-08-04
KR20190065329A (ko) 2019-06-11
CA3039183A1 (en) 2018-04-12
EP3523781A1 (en) 2019-08-14
WO2018067706A1 (en) 2018-04-12
CN109997094A (zh) 2019-07-09
AU2017338855A1 (en) 2019-05-02
US20180096202A1 (en) 2018-04-05

Similar Documents

Publication Publication Date Title
US11799977B2 (en) Systems and methods for ensuring continued access to media of a playlist despite geographic content restrictions
US11375276B2 (en) Methods and systems for recommending media assets based on the geographic location at which the media assets are frequently consumed
JP2022000969A (ja) 第2のユーザの視聴アクティビティに基づいて第2のユーザのための再生リストに含めるための第1のユーザのメディアアセットに対する推奨のための方法およびシステム
JP2019520009A (ja) 別のデバイスに双方向特徴を伝送するための方法およびシステム
JP2018526837A (ja) メディアのシーケンスを消費するときのユーザ視聴経験を向上させるための方法
KR102323614B1 (ko) 미디어 자산을 효율적으로 다운로드하는 방법 및 시스템
CN109997094B (zh) 用于重建来自媒体资产的参考图像的系统和方法
JP2021093749A (ja) 家庭内で話されている言語に対応するコンテンツを識別するためのシステムおよび方法
US10110939B1 (en) Systems and methods for presenting a service application selection window including dynamic icons
JP2019537169A (ja) ユーザ画像に関連するメディアアセットのセグメントを受信するためのシステムおよび方法
US20230353817A1 (en) Systems and methods for providing personalized actionable items for content items
JP7167126B2 (ja) 現在のメディアアセットとの同時消費のためのメディアアセットの推奨を生成するためのシステムおよび方法
JP2018528492A (ja) ユーザプロファイルに基づくメディアアセットのための画像の自動フォーマットのためのシステムおよび方法
JP6934426B2 (ja) メディアを消費しているユーザにメディアを消費している他者の進捗度をアラートするためのシステムおよび方法
JP6704357B2 (ja) 選択されたメディアアセットに対するアクチュエータの機能性を自動的に修正するためのシステムおよび方法
CN107710767B (zh) 使得用户能够在封闭网络中接收对于内容的访问的系统和方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190604