CN107735746A - 交互式媒体系统和方法 - Google Patents

交互式媒体系统和方法 Download PDF

Info

Publication number
CN107735746A
CN107735746A CN201680036026.9A CN201680036026A CN107735746A CN 107735746 A CN107735746 A CN 107735746A CN 201680036026 A CN201680036026 A CN 201680036026A CN 107735746 A CN107735746 A CN 107735746A
Authority
CN
China
Prior art keywords
media
gesture
video
control
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680036026.9A
Other languages
English (en)
Inventor
B·T-布里格登
B·莫拉克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Deal Testa Private Ltd Co
Original Assignee
Deal Testa Private Ltd Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from AU2015901421A external-priority patent/AU2015901421A0/en
Application filed by Deal Testa Private Ltd Co filed Critical Deal Testa Private Ltd Co
Publication of CN107735746A publication Critical patent/CN107735746A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Hardware Design (AREA)
  • Databases & Information Systems (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

提供了一种交互式计算系统和方法，其实现与用户设备的简单且有效的交互，这提高兴趣并且改善用户体验。交互式系统包括：包括运动传感器的用户设备，该运动传感器用于通过用户设备的运动来接收基于运动的手势；和联接到运动传感器的控制器，该控制器配置成根据基于运动的手势来控制系统的一个或多个方面。有利地，系统实现用户设备的单手操作。

Description

交互式媒体系统和方法
技术领域
本发明涉及交互式数字媒体。特别地，尽管并不完全是，本发明涉及媒体的交互式显示和视频回放。
背景技术
在过去，消费的几乎所有媒体内容都经专业制作。例如广播和电视经专业制作且向大量用户广播。现在，高质量内容创建设备和软件工具在具备合理技能的人员力所能及的范围内，并且用户生成的内容(UGC)变得盛行。经由视频和社交媒体渠道、特别经由移动设备的这样的视频在线分配非常普遍。
这样的内容的问题是它一般对用户没有吸引力，因为它是线性的，并且一般是为了广大观众创建。此外，随着在便携式设备上消费越来越多的内容，特别关于这样的内容中的导航面临着新的挑战。
典型地，传统的桌面媒体交互方法适用于便携式设备，这在这些便携式设备上未提供好的用户体验。例如，触屏设备通常包含与标准控制(例如暂停和播放)有关的小的按钮，其在示出时典型地覆盖视频的一部分，并且一般是不方便的。
另外的问题是移动设备上的广告被传统媒体支配，并且提供与媒体非常有限的交互性。典型地，对于用户在广告中对“行动召唤”作出响应，他或她必须导航到另一个网站(或app)并且在那里手动采取行动。这样的动作显然是不方便的，并且因此，通常失去销售机会。
如此，需要有改进的交互式媒体系统和方法。
显然将理解，如果在本文参考现有技术的出版物，该参考在澳大利亚或任何其他国家并未构成对该出版物形成本领域内公知常识部分的承认。
发明内容
本发明针对交互式媒体系统和方法，其可以至少部分克服上面提到的缺点中的至少一个或对消费者提供有用或商业选择。
鉴于前述，本发明采用一个形式广泛地存在于交互式计算系统中，该交互式计算系统包括：
包括运动传感器的用户设备，该运动传感器用于通过用户设备的运动接收基于运动的手势；以及
联接到运动传感器的控制器，该控制器配置成根据基于运动的手势控制系统的一个或多个方面。
有利地，交互式媒体系统实现简单且有效交互，这提高兴趣并且改善用户体验。
控制器可以配置成基于所述基于运动的手势和媒体控制指令集选择性地控制媒体的显示。媒体控制指令可以定义基于运动的手势与媒体显示控制之间的关系。媒体控制指令可以在媒体控制文件中定义。媒体控制文件可以在媒体文件内定义标记。
媒体控制文件(或媒体控制指令)可以定义默认视频和其他视频文件，所述默认视频配置成在未检测到手势时播放，其中每个视频文件与一个基于运动的手势关联。
优选地，控制器配置成根据基于运动的手势控制媒体的回放。
优选地，控制器配置成通过选择用于回放的媒体来控制媒体的回放。选择用于回放的媒体可以包括从多个媒体文件选择媒体文件。备选地，选择用于回放的媒体可以包括从媒体文件选择媒体文件的一部分。在这样的情况下，该媒体文件的一部分可以通过媒体文件的时间线上的时间、媒体文件内的标记或通过媒体文件的备选内容来定义。
控制器可以配置成通过接收第一基于运动的手势且响应于此确定第一回放配置和接着接收第二基于运动的手势且响应于此确定第二回放配置而选择性地控制媒体的回放。
媒体的回放的控制可以根据基于运动的手势来预定义。备选地，媒体的回放的控制可以被动态定义。在这样的情况下，媒体的回放的控制可以根据何时接收基于运动的手势或接收手势时的系统的状态而动态定义。
优选地，媒体包括视觉媒体。媒体可以包括视频。媒体可以包括音频、文本、富文本、程式化文本、超文本标记语言(HTML)文档、动画、幻灯片放映、图形和图像中的至少一个。
媒体可以包括多个层的媒体。
媒体可以在用户设备的显示器上回放。备选地，媒体在用户设备外部的显示器上回放。
基于运动的手势可以包括多个预定义手势。
基于运动的手势可以通过用户设备的局部运动来定义。基于运动的手势包括以下中的一个或组合：用户设备的左倾、右倾、前倾、后倾、倒置倾斜、圆形倾斜、翻转倾斜、扭动和摇晃。
系统可以进一步包括加速计，其中基于运动的手势至少部分根据来自加速计的数据而确定。系统可以包括陀螺仪、罗盘或定位系统，其中基于运动的手势至少部分根据来自陀螺仪、罗盘或定位系统的数据而确定。
控制器可以配置成基于所述基于运动的手势来控制媒体的呈现。
控制器可以配置成控制用户设备的交互式应用。特别地，控制器可以配置成促使该交互式应用购买项目、向数字购物车或愿望清单添加项目、对项目出价、完成购买、打电话、发送SMS、打开应用、与另外的设备通信或调用另一个应用的功能。
系统可以进一步包括媒体播放器，其中控制器配置成在媒体播放器正播放媒体时控制用户设备的交互式应用。
交互式应用的控制可以独立于媒体的回放。
控制器可以形成用户设备的部分。
系统可以由手持设备组成。
系统可以包括头戴式显示器。
控制器可以配置成根据控制指令集和基于运动的手势来控制系统的一个或多个方面，其中控制指令定义基于运动的手势与系统的一个或多个方面的控制之间的关系。
采用另一个形式，本发明广泛存在于用于生成交互式媒体的系统中，该系统包括用于生成媒体控制数据的媒体控制生成部件，其中该媒体控制数据定义基于运动手势(由用户设备的运动定义)与媒体的控制之间的关系，使得用户能够基于所述基于运动的手势而选择性地控制媒体。
系统可以进一步包括拍摄装置，用于捕捉采用照片或视频形式的媒体。
系统可以进一步包括数据接口，用于接收媒体。
媒体控制生成部件可以配置成基于所述基于运动的手势生成交互式媒体。
采用再另一个形式，本发明广泛存在于交互式媒体方法中，该交互式媒体方法包括：
通过用户设备的移动接收基于运动的手势；以及
基于所述基于运动的手势控制媒体的呈现。
采用再另一个形式，本发明广泛存在于交互式方法中，该交互式方法包括：
通过用户设备的移动接收基于运动的手势；以及
基于所述基于运动的手势控制用户设备的交互式应用。
本文描述的特征中的任一个可以与本文描述的在本发明范围内的其他特征中的任一个或多个以任何组合来组合。
在该说明书中对任何现有技术的参考并未且不应视为对现有技术形成公知常识的确认或任何形式的建议。
附图说明
本发明的各种实施例将参考下列图描述，其中：
图1图示根据本发明的实施例的交互式媒体显示设备的框图；
图2a图示使用中的采用第一配置的交互式媒体显示设备的正视图；
图2b图示使用中的采用第二配置的交互式媒体显示设备的正视图；
图3a-3f图示图1的设备的多个预定义移动；
图4图示根据本发明的一个实施例的用户与图1的设备之间的交互的序列图；
图5图示根据本发明的另一个实施例的用户与图1的设备之间的交互的序列图；
图6图示根据本发明的实施例的视频生成系统的内容生成屏幕的截屏；
图7图示根据本发明的实施例的交互式媒体显示系统的框图；
图8图示根据本发明的实施例的交互式媒体显示方法；
图9图示根据本发明的实施例的用户与设备之间的交互以及视频文件在该设备上的对应显示的图，其中每个视频文件对应于系统的状态,其中对交互作出不同解释；
图10a图示根据本发明的实施例的用户设备，在其上显示视频并且在其中用户通过基于运动的手势来交互；
图10b图示图10a的用户设备，在其上呈现收藏夹列表；
图11图示根据本发明的实施例的训练屏幕的截屏，其中用户经训练来理解系统的倾斜控制；
图12a图示根据本发明的实施例的交互式购物屏幕(包括多维导航)的截屏；以及
图12b图示图12a的交互式购物屏幕的另外的截屏，其中用户在多维导航层级中导航。
本发明的优选特征、实施例和变化可以从下列详细描述了解，该下列详细描述对本领域内技术人员执行本发明提供足够信息。详细描述并不被认为是以任何方式限制本发明的前面的发明内容的范围。
具体实施方式
图1图示根据本发明的实施例的交互式媒体显示设备100的框图。该交互式媒体显示设备100使用户能够使用设备100的运动来控制媒体的显示，如在下文进一步详细论述的。所显示的媒体的控制可以方便地用一只手执行，因为持有设备100的同一只手可以用于倾斜，或另外向设备100提供基于运动的输入。
交互式媒体显示设备100包括处理器105、联接到该处理器105以用于向用户显示视频的显示屏110和联接到处理器105以用于接收设备100的运动信息的运动传感器115。
运动传感器115可以包括加速计和陀螺仪，它们一起用于确定基于运动的输入。然而，备选地或另外，基于运动的输入可以根据罗盘、拍摄装置、定位传感器(例如GPS或RF定位技术)或可以用于确定设备100的移动的任何其他输入(例如姿态、旋转速率、加速度及类似物)来确定。在不同实施例中，基于运动的命令通过观察如与用户设备一体化或附连到用户设备的拍摄装置所识别的用户位置改变而生成。
交互式媒体显示设备100包括存储器120，其联接到处理器105。存储器120包括：媒体存储部件120c，用于存储媒体以供在设备100上显示；媒体解码器指令120a，用于对存储的媒体解码；和媒体控制指令120b，用于使用媒体解码器指令120a来控制所存储的媒体的显示。
在使用中，媒体存储部件120c的媒体在媒体控制指令120b的控制下由媒体解码器指令120a解码，并且在显示屏110上显示。然后由媒体控制指令120b使用来自运动传感器115的数据来检测和监测显示期间的设备100的移动。该移动然后用于控制媒体的显示。
媒体控制指令120b可以配置成通过在媒体文件中导航来控制单个媒体文件的显示。特别地，基于来自运动传感器115的数据，媒体控制指令120b可以促使解码器指令120a在媒体文件的时间线上的点之间动态导航。作为说明性示例，在设备100向右倾斜(从用户的角度来看)时，媒体控制指令120b可以促使解码器指令120a在媒体文件的时间线上向前跳转预定义量。
相似地，媒体控制指令120b可以促使解码器指令120a在媒体文件的备选内容之间动态切换。作为说明性示例，当设备100短暂摇晃时，媒体控制指令120b可以促使解码器指令120a在媒体文件的备选媒体(例如媒体文件的不同语言轨道)之间切换。
备选地，媒体控制指令120b可以配置成基于设备100的移动通过在媒体文件之间导航来控制多个媒体文件的回放。作为说明性示例，当设备100向右倾斜(从用户的角度来看)时，媒体控制指令120b可以促使解码器指令120a在媒体文件的预定义序列中移到下一个媒体文件。
根据某些实施例，设备100可以配置成在各种类型的媒体之间导航。例如，设备100可以配置成通过基于运动的输入在视频与静止图像之间导航。如果期望关于以视频示出的项目的另外的信息，则这特别有用，并且可以适合购物和广告用例。
媒体文件可以本地存储在设备100上(例如在媒体存储部件120c上)，或按需下载或流播。如此，媒体可以存储“在云中”(即，远程)，并且根据期望更新。这在定期更新媒体文件(例如广告)是可取的情况下或在运行短期促销时特别有利，而不需要设备100上的任何更新。
设备100可以允许传统输入(例如通过触屏或键盘)或基于运动的输入。在一些情况下，传统输入和基于运动的输入不互相排斥。如此，传统输入在使用基于运动的输入时可受到限制(例如，设备100的触屏可被停用)。在有可能当输入基于运动的输入时用户可意外碰到传统输入的情况下，这特别有利。
交互式媒体显示设备100可以包括智能电话、平板或任何其他适合的便携式计算设备。
图2a和图2b图示在使用中的交互式媒体显示设备100的正视图。如图示的，交互式媒体显示设备100一般是便携式的并且可以专门设计成用一只或两只手持有或放置在保持架中以容易观看，并且包括大致平面的正面205，其包括显示屏110。
初始，在设备100上显示第一视频210a，如在图2a中图示的。在第一视频210a回放到一半时，用户使设备向右倾斜(从用户的角度来看)，如由倾斜箭头215图示的，并且如在下文进一步详细描述的。
响应于检测到设备100的倾斜(通过运动传感器115和媒体控制指令120B)，在设备100上显示第二视频210b，如参考图2b图示的。
有技能的受众将容易意识到导航到第三视频(未示出)或回到第一视频210a可以通过设备100另外的倾斜而提供。
图3a-3f图示设备100的多个预定义移动200a-300f。移动300a-300f也称为手势，并且使用户能够与设备100交互，如上文描述的。
图3a图示正常回放模式300a，其中设备100保持竖直且只有很少量移动。
图3b和图3c分别图示设备100的左倾300b和右倾300c。在左倾300b的情况下，从用户的角度来看，设备100的顶部向左倾斜。在右倾300c的情况下，从用户的角度来看，设备100的顶部向右倾斜。
图3d和图3e分别图示前倾300d和后倾300e。在前倾300d的情况下，设备100的顶部远离用户眼睛倾斜，并且在后倾300e的情况下，设备100的顶部朝用户眼睛倾斜。
最后，图3f图示摇晃300f，其中用户左右或上下或跨垂直或对角轴扭动地持续短时刻摇晃设备100。
其他移动可以在设备100上定义，其包括双重倾斜(例如左倾、接着很快是另一个左倾)、长倾斜、缓慢倾斜、硬摇晃、长摇晃、扭动、拍打、快拍和导致突然停止的移动。此外，上文的倾斜可以分成许多子倾斜：小的左倾(例如<30°倾斜)、中等左倾(例如>30°且<45°倾斜)和大的左倾(例如>45°倾斜)。相似地，移动可以被保持(例如，设备可以倾斜且被保持)或未被保持(例如在设备倾斜后使它返回它的原始位置)。
此外，用户也可以使用基于非移动的手势向设备100提供输入，例如触屏手势，其包括左、右、上或下滑动、捏或扩大、轻击或双击。如果用户处于其中设备100的移动作为输入不适合于用户或对于用户来说不方便的环境中，则这特别有用。
根据某些实施例，设备100包括综览模式，其中示出什么手势可用的图标向用户呈现。例如，轻击屏幕可以促使设备100进入或离开综览模式。在不同手势根据视频的不同设置而可用(如在媒体控制指令中描述的)的情况下，这特别有利。它还允许在设备平躺在表面(例如桌子)上时导航。
根据某些实施例，移动或手势300a-300f可以从绝对方面来定义。例如，正常回放模式300a可以参考正常的重力拉动而定义为大致竖直。备选地，移动或手势300a-300f可以从相对方面来定义。例如，左倾300b可以通过使设备相对于早些位置向左倾斜而定义。相对移动或手势使用户能够在各种位置使用设备100，例如在躺下时或处于其中设备在回放期间保持在非竖直位置的任何其他情形中。
图4图示根据时间线405在用户与设备100之间的交互以及视频410在设备上的对应回放的序列图400。视频410包括多个序列段410a，编号为1、2、3等，并且通过与设备100交互，用户能够在段410a之间导航。
初始，即在时间线405上的时间0(405a)，用户采用正常回放模式300a持有设备100。因此，视频410正常回放，即视频段0、1和2分别在时间0、1和2播放。
在时间线405上的时间3(405b)，用户使设备100倾斜成左倾300b。因此，设备100向后跳转视频410的两个段410a，并且分别在时间3和4播放视频段1和2(而不是另外本该示出的视频段3和4)。如果他或她被打断并且想再次观看视频410的一部分，则用户可以选择该特征。
在时间线405上的时间5(405c)，用户使设备100倾斜成右倾300b。因此，设备100向前跳转视频410的两个段410a，并且分别在时间5和6播放视频段5和6(而不是另外本该示出的视频段3和4)。
段410a可以是任何适合长度，例如5或10秒长。此外，段410a不必具有均匀大小。例如，每个段410a可以定义视频场景，其中该场景由视频的内容定义。该信息在媒体控制指令中描述。
视频410可以包括遗留视频文件，例如根据ISO基媒体文件格式、MPEG-4文件格式的文件，并且可以包括音频和视频两者。
图5图示根据时间线505在用户与设备100之间的交互以及视频文件510a、510b、510c在视频100上的对应回放的序列图500。视频510a、510b、510c包括多个有序段510(与图4的段410a相似)，并且通过与设备100交互，用户能够在视频510a、510b、510c之间导航。
初始，即在时间线505上的时间0(505a)，用户采用正常回放模式300a持有设备100。因此，初始播放第一视频510a。
在时间线505上的时间3(505b)，用户使设备100倾斜成左倾300b。因此，设备100跳转到第二视频510b，并且从时间3开始播放来自第二视频510b的段510。第二视频510b一般隐式或显式地与左倾300b关联。
在时间线505上的时间5(505c)，用户使设备100倾斜成右倾300c。因此，设备100跳转到第三视频510c，并且从时间5开始播放来自第三视频510c的段510。第三视频510c一般隐式或显式地与右倾300c关联。
视频510a、510b、510c可以与使用媒体控制文件的移动或手势300a-300f关联。在这样的情况下，媒体控制文件可以定义在哪个交互上播放哪个视频510a、510b、510c，即设备100如何对用户的移动和其他手势作出响应。
在这样的情况下，媒体控制指令可以在媒体控制文件内找到并且可以包括JavaScript对象标记(JSON)编码文本文件。媒体控制文件和视频文件510a、510b、510c可以封装成归档文件并且被压缩，潜在地具有自定义文件扩展名来指示文件的内容的类型。归档文件的优势不仅在于它能够压缩文件来减少文件大小，而且还在于它提供分配视频510a、510b、510c和媒体控制文件的方便方式，即在单一文件中。
根据某些实施例，媒体控制文件定义单一默认视频，也称为“主剪辑(homeclip)”，播放器首先播放该默认视频，加上多至五个其他剪辑，其中一个与五个手势(左倾300b、右倾300c、前倾300d、后倾300e和摇晃300f)中的每个关联。当做出手势时，播放器立刻播放关联的剪辑，然后在完成时返回主剪辑。
根据备选实施例，媒体控制文件可以指视频文件的外部位点(例如，通过统一资源定位符(URL))。如此，视频文件不必与媒体控制文件一起传送，这进而可以减少共享内容所需要的带宽。
为了例示，媒体控制文件的语法可以描述如下：
特别地，“id”字段可以用于识别每个视频剪辑，“用户名”字段可以用于使文件名与视频剪辑关联，“末端”字段可以定义在到达剪辑末端时发生什么，并且“手势”结构连同例如“前”、“后”、“左”、“右”和“摇晃”等手势字段一起定义在检测到对应手势时要播放哪个视频剪辑。
除上文的字段外，媒体控制文件可以进一步包括与媒体有关的元数据，例如在哪里拍摄媒体或它与之有关的地方。这然后可以允许其他用户找到解决他们位点的媒体，或搜索与某一位点有关的媒体或使用地图搜索特征来找到媒体。
内容可以对设备100专业制作，或用户生成，如上文概述的。
图6图示根据本发明的实施例的视频生成系统的内容生成屏幕的截屏600。视频记录系统可以包括智能电话、个人计算机或类似物。
内容生成屏幕边框多个手势按钮605，其对应于手势，左倾300b、右倾300b、前倾300d、后倾300e和摇晃300f以及静态。手势按钮使用户能够选择手势来确定在检测到所述手势时在解码器处发生什么。
内容生成屏幕包括记录按钮610，其使用户能够捕捉与所选手势有关的视频。可以提供备选按钮以使用户能够从系统本地的存储、从远程系统或从另外的设备选择预先记录的视频。如果系统上的拍摄装置不可用则这特别有用。
在使用中，用户在不同手势按钮605之间导航，使视频与关联手势中的一些或每个关联，并且保存文件。系统然后自动生成媒体控制指令，并且将它连同视频剪辑一起存储在归档中来简化所生成的内容的共享。
在其他实施例中，可以提供先进内容生成屏幕。该先进内容生成屏幕可以使任何数量的媒体剪辑或文件能够链接到运动手势。作为说明性示例，先进内容生成屏幕可以定义如何对每个剪辑或文件解释运动手势。因此，可以提供复杂的导航，其中例如可以仅经由某些其他视频剪辑导航到某些视频剪辑。
根据某些实施例，视频生成系统包括在记录时它监测的加速计、陀螺仪、罗盘和/或其他运动传感器。在检测到手势时，系统可以自动选择关联的手势按钮605、继续记录且使所继续的记录与手势关联。
根据某些实施例，视频生成系统自动拼接和修剪视频剪辑，和/或基于用户在记录时如何持有设备来确定它们如何与其他剪辑有关。
内容生成屏幕可以包括用户捕捉图像且使用所捕捉的图像来帮助使后续视频对准的能力。在这样的情况下，所捕捉的图像可以覆盖在所捕捉的视频上，以使用户能够使如捕捉的场景中的项目(例如，人)与所捕捉的图像中的项目(例如，人的图像)对准。因此，用户可以确保记录的项目处于视频的重要点(例如开始和结束点)处近似相同的地方来提供对准。
根据实施例，视频生成系统通过一个接一个地自动记录剪辑并且自动使所记录的剪辑与手势关联而能够免于用手记录。用户可以预先配置剪辑序列，或使用默认配置的剪辑序列，并且可以向用户提供音频或视觉指示符来让用户知道视频记录何时将开始或完成并且可以另外指示它们将与哪个手势相对应。
根据某些实施例，可以操纵媒体以在媒体之间产生更多可取转变。作为说明性示例，媒体中的项目可以跨转变对准，可以向媒体的各种部分(例如在视频开始和结束时)添加视觉效果，例如渐入渐出效果、在黑暗中淡出效果及类似物。
另外，可以手动操纵媒体以对于用户后来消费该媒体且在不同媒体之间导航的时候产生更可取效果。可以帮助促进媒体之间的项目对准的这样的功能可以包括缩放、平移、裁剪等。
图7图示根据本发明的实施例的交互式媒体显示系统700的框图。该交互式媒体显示系统700与图1的交互式媒体显示设备100相似。
交互式媒体显示系统700包括采用智能电话形式的便携式计算设备705、媒体流媒体服务器710和媒体控制服务器715。
在使用中，视频数据通过数据网络720(例如互联网)从媒体流媒体服务器710流播到便携式计算设备705。在便携式计算设备705移动时，使用例如加速计和陀螺仪来检测设备705的运动，以及与提供给媒体控制服务器715的运动有关的数据。
媒体控制服务器715在如上文描述的那样检测到有效运动手势时，将指示媒体流媒体服务器710改变视频文件或移到视频文件的不同部分。新的视频数据然后从媒体流媒体服务器710流播到便携式计算设备705。
备选地，媒体控制服务器715可以向便携式计算设备705提供控制指令，这些指令然后被便携式计算设备705用于指示媒体流媒体服务器710。在这样的情况下，媒体控制服务器715可以例如包括超文本传输协议(HTTP)服务器。另外，流媒体服务器可以提供实时内容。
有利地，仅相关数据流播到便携式计算设备，这减少带宽使用。这在存在大量可能交互(每个具有关联的视频)时特别有用，因为仅待回放的视频需要提供给用户。
根据某些实施例(未图示)，包含基于运动的视频控制的媒体播放器在用户设备的web浏览器中提供。有利地，媒体播放器配置成使用运动数据(如可用的话)并且(如不可用的话)提供备选导航元素(例如，按钮，或对应于手势的语音命令)。
例如，基于非运动的数据输入(例如键盘或鼠标输入)可以转化成运动手势以实现根据本发明的媒体回放。在这样的情况下，左箭头键可以转化成左倾，右箭头键可以转化成右箭头倾斜，以此类推。
根据某些实施例(未图示)，应用被提供有基于运动的交互，其中媒体播放器使用第三方或本地API而嵌入。作为说明性示例，媒体播放器可以在使用由Google Inc.或开放手机联盟(Open Handset Alliance)提供的Android API的WebView类或由Apple Inc.提供的iOS开发库的UIWebView类的应用的WebView中提供。备选地，媒体播放器可以由设备的本地库提供。
在这样的情况下，内容与交互之间的关系可以在向媒体播放器提供的内容中定义，例如通过HTML页面中的JavaScript代码。在这样的情况下，HTML页面可以定义待回放的媒体，以及设备检测到基于运动的命令时执行的交互或操作或任务。
这样的基于运动的控制的示例用例是在社交媒体系统上的基于视频的广告(例如Facebook新闻馈送)中。在这样的情况下，视频可以回放，其中用户可以登记他们对产品的兴趣、喜欢页面、购买产品或通过基于运动的命令导航到外部页面。视频可以包括基于音频或文本的指令(例如，“摇晃你的电话来喜欢我们的页面”)，或这样的命令和动作可以被预定义(例如，向后和向前倾斜可以对应于是，侧向倾斜可以对应于否)。
在另一个示例中，用户可以呈现有各种图像(或其他媒体)，其中提示他们提供关于例如‘喜欢’或‘不喜欢’图像的输入。例如，如果用户不喜欢图像则他可以左倾，或如果他们确实喜欢图像则右倾。备选地，用户可以摇晃设备来“传递”与图像关联的提议。用户然后呈现有下一个图像(或其他媒体)用于另外的输入，其可以是随机的、采用列表或根据早些输入而自定义。这样的实施例特别适合于交友app或网站，其中在用户之间高效选择是可取的。
基于运动的命令可以通过URI转化成动作。例如，在摇晃电话时，可以调用URI，其中用户可以“喜欢”页面，并且在使电话倾斜时，可以调用其中用户可以购买产品的URI。
在某些情况下，URI可以用于向服务器做出后台HTTP请求，以避免扰乱正在回放的媒体。作为说明性示例，用户可正在观看时尚视频，其中用户在时尚视频期间能够登记他们对时尚项目感兴趣、购买、喜欢或投票给时尚项目而不扰乱视频。
根据某些实施例，提供这样的应用，其中媒体的记录提供有记录的基于运动的控制。在这样的情况下，记录功能性可以通过web浏览器、WebView(上文论述)或另一个应用内的本地文件库提供。
根据某些实施例，除能够基于设备的运动控制视频的回放外，创建媒体的用户还能够选择和控制设备的其他方面，例如待向最终用户播放的后台声道、视频剪辑的静音音频、启用设备的振动功能。
根据一些实施例，系统700包括社交媒体部件。该社交媒体部件实现用户之间的聊天、与内容有关的公共和私人评论以及评分系统。此外，社交媒体使用户能够共享内容(例如通过将内容的状态设置为公开)，或存储私密内容。
根据某些实施例，内容的共享通过移动设备(例如，使其倾斜)而实现。导航到内容且选择内容来播放也可以通过移动设备来实现。此外，在某些时间摇晃移动可以促使随机媒体加载并且开始播放，并且从而移动不必采用预定义方式链接到媒体。在一些系统中，与系统的所有交互可以通过设备的运动来提供。
根据某些实施例，提供内容以供有限观看。特别地，内容可以配置成在规定时期内和/或仅在特定设备上播放一定次数。内容可以配置成向内容创建者报告使用信息，例如，播放频率、日期、时间、设备。内容的删除可以在某些事件时触发或内容创建者可以决定远程删除内容。
根据某些实施例，外部运动传感器可以用于提供到设备的输入并且控制设备。例如，便携式设备(例如智能电话或平板)可以与包括显示器的另外的设备(例如台式机/膝上型计算机或TV或投影仪)链接，其中便携式设备内的运动传感器可以用于检测其移动、控制内容在所链接的另外的设备上的显示。简而言之，便携式设备的运动可以用于控制另外的设备上的媒体。
便携式设备与另外的设备之间的连接可以通过任何适合的手段来建立，包括通过：利用一个设备的拍摄装置扫描另一设备的屏幕上显示的QR码和使用该代码来链接设备；将在一个设备的屏幕上显示的唯一代码输入另一设备上的软件内；导航到一个设备上的唯一URL，其在另一设备上显示；在相同时间登陆两个设备上的账户(例如，通过用户名和密码)；向便携式设备发送SMS消息(其包括URL或其他代码)来链接设备；使用设备的GPS位点来使附近的设备彼此连接；同时与每个设备交互，例如通过在(大约)相同时间轻击每个设备上的按钮；在一个设备的扬声器上播放音调或一系列音调，使得另一设备的麦克风可以检测该音调来建立链接；或通过使用设备之间的RFID或蓝牙链接。
在上文的实施例的一个示例中，一旦建立与另外的设备的适当持久连接，便携式设备上的软件检测多个预定义移动手势(例如右倾、左倾等)中的基于运动的手势，并且将该手势的细节连同适合的识别信息(例如唯一代码)一起传送到服务器。服务器然后将该信息传达给另外的设备，其可以充当媒体播放器。接收信息的另外的设备然后响应于接收的信息改变媒体的显示。此外，另外的设备上的其他功能可以基于接收的手势而发起，并且这样的功能可以是硬件或软件相关的。
控制便携式设备也可以在它的屏幕上显示相同的交互式媒体，或显示其他信息(例如刚刚识别什么移动)，或显示按钮来断开、暂停媒体和提供备选可轻击导航按钮。
可以存在配置有与便携式设备的适当持久连接的多个另外的设备。多个用户可以控制不同的另外设备或外设。此外，用户例如可以在空间上分开，并且在世界上任何地方的多个用户可以同时观看或控制任何其他的另外设备。
特别地，一个用户的便携式设备可以控制媒体，使得在世界各地任何位点的一个或多个其他用户可以基于接收的命令体验相同的媒体控制。
此外，上文描述的系统可以用于控制头戴式显示器以用于虚拟现实目的。这对于处于不同物理取向的用户(例如在他们静止、躺下、坐在非转椅上且使他们的头部保持不动时)允许有交互式虚拟现实体验。语音命令也可以用于控制如由任一设备检测的虚拟现实交互式媒体体验的方面。
在多个用户使用系统的情况下，媒体的控制可以在用户之间手动或自动传递(例如在一段时间后)。
多人同时控制多人在观看的体验，这也是可能的。
另外，可以维持音频链接以允许用户在媒体显示期间互相交谈。
如上文论述的，不同视频可以与可用手势中的每个关联。然而，根据本发明的另外的实施例，更复杂的交互可以用于在大量视频之间导航。例如，手势可以在之前的手势的上下文中解释。如此，可以定义交互的复杂分支，从而实现对用户的真正自定义体验。
图8图示根据本发明的实施例的交互式媒体显示方法。
在步骤805，向用户播放默认视频。该默认视频可以由如上文论述的媒体控制文件定义，并且一般自动播放且可以循环。
在步骤810，从用户接收第一运动手势。该第一运动手势与便携式设备的运动(例如倾斜、摇晃或类似物)有关。
响应于第一运动手势，播放第一视频。特别地，第一运动手势与媒体控制文件中的第一视频关联，如上文论述的。
在完成第一视频时，然后在步骤820再次播放默认视频。
在步骤825，从用户接收第二运动手势。该第二运动手势与便携式设备的另一个运动(例如倾斜、摇晃或类似物)有关。
响应于第二运动手势，播放第二视频。特别地，第二运动手势与媒体控制文件中的第二视频关联，如上文论述的。
根据某些实施例，媒体的控制仅在某些场景而非其他场景中提供。例如，用户可被迫观看某些视频剪辑，例如广告。在一些实施例中，系统配置成在主(或默认)视频期间对运动作出响应，而在其他视频期间未作出响应。
根据某些实施例，基于运动的媒体控制指令可以存储在视频文件的后向兼容元数据部分中。如此，遗留视频播放器可能够播放媒体文件而没有任何基于运动的控制，而更先进的播放器可以用相同文件提供详细的基于运动的交互。备选地，基于运动的媒体控制指令可以存储在HTML文件中，其中视频文件被引用，例如采用JavaScript代码的形式。
元数据部分还可以包括关于视频文件的其他信息，例如章节信息，其可以与基于运动的媒体控制信息一起用于在视频中提供更智能导航。这样的导航的示例包括到最后、暂停、慢运动、循环、定义跳转的“章节”、仅播放有趣段、跳过不必要的部分、加速某些部分及类似物。
图9图示根据本发明的实施例的用户与设备之间的交互以及视频文件在设备上的对应显示的图900。特别地，每个视频文件对应于系统的状态(其中对交互作出不同解释)。
初始，向用户播放第一视频905。在检测到左倾300b时，向用户播放第二视频910，这之后再次播放第一视频905。相似地，在检测到右倾300c、摇晃300f、前倾300d或后倾300e时，分别播放第三视频915、第四视频920、第五视频925或第六视频930。
在回放第三视频915期间接收摇晃300f时，播放第七视频935。相似地，在回放第七视频935期间接收右倾300c时，播放第八视频940。
在回放第八视频940时，可以解释基于若干运动的命令。特别地，在接收前倾300d或后倾300e时，分别播放第九视频945或第十视频950。另外，在回放第八视频940期间接收摇晃300f时，再次播放第一视频905并且过程可以重复。
最后，在回放第九视频945期间接收右倾300c时，播放第十一视频955。
在完成第二到第十一视频910-955中任一个的回放而没有任何运动输入时，可以再次播放第一视频905。备选地并且如下文论述的，回放可以在完成特定视频时停止并且相反可以显示网站。
如上文图示的，根据正在播放什么视频而对右倾300c作出不同解释。例如，在第一视频905期间，右倾300c导致第三视频915回放，而在第三视频回放期间，右倾300c导致第七视频935回放。简而言之，每个基于运动的输入可以鉴于在播放的视频而解释，这实现与用户的无限交互。
根据一些实施例，在完成视频中的一个或多个时自动打开网站。例如，在完成视频或视频905-955的集时，可以提供这样的网站，其实现另外的媒体的购买。该网站可以通过请求其中播发媒体的设备上的URL、默认web浏览器或通过将标识符传递到另一个app或网站(例如在线拍卖app或网站)而打开。网站可以在识别基于运动的命令时、在完成视频剪辑后或在接收另一个手势或轻击屏幕上的按钮(多个按钮)或元素(多个元素)时自动打开。另外，可以向服务器做出HTTP请求，其包括执行与服务器的任何类型的交易的指令。这可以在媒体没有任何改变的情况下发生，这时在播放视频且对用户没有任何指示。
因此，系统可以促进购买一般与内容(视频)或与特定视频905-955直接或间接有关的任何东西。实际上，过程可以用于从用户获得信息，例如来选择产品、尺寸、风格、颜色等，然后促进购买或发现关于产品的更多信息。
上文的示例描述本发明的实施例如何可以在用户没有触碰屏幕的情况下促进产品或许多产品的购买。项目可以加入愿望列表或购物车，在稍后时间发生结账和支付过程，这些全部都使用基于运动的命令。购物车或愿望清单中的项目可以通过将关联数据保存到本地或远程存储或两者而跨应用的许多使用而持久化。
此外，支付过程可以由单一的基于运动的命令发起。支付细节可以在早些时间收集。这有效地允许有一个运动购买，例如一个倾斜购买、一个拍打购买、一个扭动购买等。
另外，用户的尺寸、颜色偏好、风格偏好等可以跨应用的许多使用而持久化并且根据他们保存的偏好影响向用户显示什么项目。作为说明性示例，仅示出将可能适合用户的衣服。系统可以另外仅示出符合用户尺寸的当前有现货的项目。这些偏好可以由用户显式设置，然而也可以由系统计算，例如系统可以考虑用户浏览习惯、之前的购买、机器学习技术或可以允许系统无论出于什么原因(可能为了增加与优先项目有关的销售)选择性地优先向用户显示某些项目而不是其他项目的任何其他方法。
作为另外的示例，可以基于用户简档对用户示出不同媒体。例如，可以对男性用户示出男性衣服或男性相关项目，同样可以对女性用户示出女性衣服或女性相关项目。
继如在上文的段落中描述的那样保存用户的偏好之后，系统可以另外允许用户提供一个或多个图像以与项目的图像或视频一起显示。这对于帮助用户决定项目的适合性方面特别有用。提供的图像或图像的部分可以出现叠加在项目之上(或反之亦然)来模拟使用中的项目，然而图像可以出现在与项目有关的其他地方，例如挨着项目、在项目下面等。
系统可以允许用户使用设备上的拍摄装置来拍摄照片、从本地存储选择图像、提供来自远程源的图像或这些的任何组合。
优选地，图像包括人并且软件可以自动露头或选择人的头部。另外或代替该自动发生，软件可以提供允许用户手动执行裁剪或选择操作的特征。实际上，在人头部的裁剪图像与例如衣服项目等项目一起显示时，它可以叠加在项目上，其中如果人穿戴该项目则头部应出现。这是有利的，因为它应允许用户更容易决定衣服项目是否适合于那个人。然而，该特征不限于衣服项目，并且可以包括任何类型的项目，例如汽车、家具、手提包、手表等。
根据某些实施例(未图示)，系统可以促进拍卖，其中许多用户可以使用基于运动的输入来对项目出价。设备的移动可以触发出价并且多维导航菜单可以支持几乎同时在多个项目上出价。在其他实施例中，系统可以促进通过设备移动的博弈相关功能，例如选择比赛或对手并且权宜下注。
根据某些实施例(未图示)，设备的移动可以用于触发设备的功能性，例如打电话和发送SMS；打开app、调用播放器在其内运行的app的功能(例如在社交媒体应用中调用喜欢和共享功能)；调用其他app的功能并且将数据传递到其他app，例如URI。
应注意能够采用全屏模式观看媒体并且仍能够与媒体(或一般与设备)交互，这对于用户是有利的。如此，不需要在图形元素(例如按钮)上浪费部分屏幕，或不需要等待视频结束以能够与设备交互。此外，使用基于运动的命令而不是例如轻击屏幕或点击按钮来发起动作以与设备交互，这可更加方便。例如，轻击屏幕将促使用户的手指立刻覆盖部分屏幕，从而阻止屏幕被用户观看。
根据某些实施例，视频905-955中的一个或多个可以在另一个视频905-955的回放期间缓冲或从本地文件、远程文件或流媒体服务器预先下载。这可以应用户命令的预期而执行。
在一些实施例中，设备可以缓冲用户可以直接从当前视频文件导航到的所有视频文件的第一部分(例如10秒)。在图900的情况下，在第一视频905的回放期间，设备可以缓冲第二、第三、第四、第五和第六视频910-930中的每个的第一部分。在其他实施例中，用户从当前视频文件可以直接导航到的视频文件可以全部被下载，而不是仅其第一部分。
由于缓冲(或文件下载)，设备能够在识别手势时直接播放请求的内容，这减少延迟并且改善用户体验。
在本发明的另外的实施例中，根据基于运动的手势控制交互式应用(例如，购物应用)，同时在用户设备上显示视频(例如广告)，如下文概述的。
图10a图示根据本发明的实施例采用回放配置的便携式用户设备1005。特别地，在便携式用户设备1005上全屏显示视频1010，同时控制器(未图示)配置成根据基于运动的手势将某些项目放入收藏夹列表中。
特别地，视频1010与媒体控制指令关联，这些媒体控制指令根据视频1010中的时间点定义动作。如此，根据用户何时与视频1010交互可以将不同项目放入收藏夹列表中。
在本示例中，使装置1005左倾或右倾与在时间点之间使视频向后和向前移动关联，并且使设备前倾与将项目加入收藏夹列表关联，这取决于视频的当前时间(例如在两个时间点之间)。然而，内容的创建者可以创建手势与动作之间的任何适合关联，并且这样的关联可以随着视频回放而改变。
视频1010可以显示项目1015，例如衣服、小配件或类似物，其可用于购买。在这样的情况下，若干不同项目1015典型地在整个视频中并且通常在上下文中显示。例如，在衣服的情况下，衣服可以图示为在使用中(即穿上)，并且相似地在小配件的情况下，小配件可以图示为被使用。
根据某些实施例，训练指令在视频开始时被渲染为视频1010。特别地，训练指令图示每个手势(例如，左倾、前倾)与什么动作(例如，快进、加入收藏夹)关联。这在全屏显示视频1010时特别重要，因为在用户设备1005的显示器上对于这样的指令没有留下空间。
在完成视频时，用户看见他们使用倾斜手势选择的项目列表，如在图10b中示出的。特别地，便携式用户设备1005显示收藏夹列表1020，其包括多个购物元素1025。通过在对应购物元素1025上轻击，用户则可以继续购买项目或找出更多关于项目的信息。
该实施例从而图示在全屏视频(或其他媒体)继续播放或被显示时用户与便携式设备交互的一个示例。此外，该全屏视频可以从另一个应用(例如Facebook等社交媒体应用)内播放。
如从收藏夹列表1020可以看到的，多个项目可以加入列表，这取决于用户何时与设备1005交互。这在视频中显示多个项目(其中的每个可用于购买)时特别有用。
技术人员将容易意识到在接收基于运动的手势时可以发生任何适合的动作。例如，项目可以加入购物车，和/或在播放视频时可以出现实际购买。
如上文论述的，在播放媒体之前向用户提供训练，这通常是有利的。图11图示根据本发明的实施例的训练屏幕的截屏。
训练屏幕包括多个手势元素1105和多个动作元素1110，其中每个动作元素1110与手势元素关联。在图11中图示的示例中，向左倾斜在视频中向后移并且前倾导致购买(买)当前呈现的项目。
手势元素1105有利地是动画，其图示参考用户设备的基于运动的手势。例如，与右倾有关的手势元素1105可以配置成图示右倾的动画。
此外，训练屏幕可以配置成检测手势，并且在接收手势时加亮显示关联的手势元素1105。例如，与右倾有关的手势元素1105可以在接收右倾手势时加亮显示，来与用户确认接收哪个手势。这随着用户实践基于运动的手势而特别有用。
在观看训练屏幕后，用户能够轻击开始视频按钮1115来开始视频。
媒体控制指令可以定义多维导航层级。例如，用户可以在视频内部以及在视频中和视频外向后和向前导航，例如到网站或其他视频。作为说明性示例，某些手势可以用于在视频中向后和向前导航，而另一个手势可以促使显示web页面。另外，不同的web页面可以根据用户在视频的时间线上的哪里而显示。
图12a图示根据本发明的实施例的交互式购物屏幕的截屏1200a。该交互式购物屏幕提供4路导航层级，如上文论述的。
如在图12a中示出的，交互式购物屏幕包括项目的图像1205和关联的“加入购物车”按钮1210。此外，显示第一和第二导航元素1215a、1215b来向用户提供他们在多维导航层级中处于哪里的指示。
特别地，第一和第二导航元素1215a、1215b每个定义在相应维度中的可能位置1220和实际位置1225。图12a图示在左/右方向上的最左位置作为实际位置(参见第一导航元素1215a)和前/后方向上的最后位置作为实际位置(参见第二导航元素1215b)。
当用户在4路导航层级中导航时，可以更新图像1205来图示相同项目的备选配置，或显示备选项目。
图12b图示交互式购物屏幕的另外的截屏，其中用户在4路导航层级中向前导航四步并且向右导航三步。该另外的截屏包括回放条1230，其使用户能够控制视频的回放。特别地，图像1205可以被项目的视频代替。
在用户希望购买项目中的一个时，他或她可以使用“加入购物车”按钮1210而这样做。备选地或另外，用户可以使用基于运动的手势来购买项目，如上文论述的。
在一些实施例中，系统可以配置成根据一个或多个网站自动或半自动生成基于手势的控制数据。在这样的情况下，用户可以输入网站的URL或多个URL，系统从其提取例如媒体、产品描述、价格等信息。这在将传统的基于web的商店转换成基于运动手势的交互式购物系统方面特别有用。
在图12a和12b的示例中，第一导航元素1215a可以与来自不同URL的内容关联，并且第二导航元素1215b可以与来自单个URL的不同内容有关。
生成的媒体控制指令可以直接参考来自源(即原始URL)的媒体，或媒体可以复制到用于服务于媒体的另一个服务器(例如内容交付网络)。交互式广告可以在期望购买或购买可以如早些描述的那样直接发生时指示用户到输入的URL。
在再另一个实施例中，可以使用一个或多个产品提要而不是URL来生成基于手势的控制数据。在这样的情况下，当接收关于产品提要的数据时，例如媒体(或媒体位点)、产品描述、价格等的信息可以采用与在上文描述的相似的方式自动从其处提取来生成控制数据。
系统可以配置成持续更新控制数据，或一旦关闭(例如响应于从用户接收指令)就生成控制数据。例如，在一些实施例中，显示的产品可以根据那时产品提要中的信息而改变。
根据某些实施例，系统可以进一步配置成从用户接收偏好，例如GUI元素的风格、颜色、显示的产量数量，并且基于此来生成控制数据。在该上下文中，用户可以为他们自己或为稍后将使用系统的其他用户设置这些偏好。
根据一些实施例，显示设备可以由用户保持在纵向或横向取向上。在这样的情况下，采用纵向或横向模式回放媒体，使得它在回放期间正确取向，并且根据保持设备的取向检测基于运动的输入。
根据某些实施例，播放器可以收集统计和使用信息。播放器然后可以将该信息发送到服务器用于分析。这样的数据可以允许理解用户的兴趣、创建用户简档、广告定位和重定位、基于用户的简档改变内容性质等。
上文提到的数据收集过程可以另外允许自学技术项(a self-learning piece oftechnology)，其可以识别趋势和其他学习以重新应用于系统。
根据某些实施例，本发明可以包括数字版权管理(DRM)。DRM可以团体或单独应用于视频905-955中的每个，并且应用于任何媒体控制文件，来防止内容采用未经授权的方式重新分配。
根据一些实施例，与系统的基于运动的交互是上下文感知的。特别地，基于运动的交互300b-300e中的一个或多个可以根据上下文而作出不同解释，或根据上下文可以播放不同视频。
其中系统可以适应的上下文的示例包括一天的时间、天气、一年的时间、季节、当前位点和相对位点。作为说明性示例，如果在晚上观看，与在白天观看相比可以播放不同剪辑；并且如果在季节是冬天时观看，则与在夏天期间观看相比可以播放不同剪辑。
上文的示例主要集中在使用加速计和/或陀螺仪来确定基于运动的输入。然而，备选地或另外，基于运动的输入可以根据罗盘、拍摄装置、位置传感器(例如GPS)或可以用于确定设备的姿态、旋转速率、加速度或其他方面的任何其他输入来确定。在不同实施例中，基于运动的命令通过观察用户位置改变(如由与用户设备一体化或附连到它的拍摄装置识别的)而生成。
在一些情况下，设备作为头戴式显示器联接到用户。在这样的情况下，命令可以通过用户使他们的头部左或右倾或向前或向后倾斜而生成，例如以选择性地控制媒体的显示。
大部分便携式设备具有拍摄装置，其可以用于跟踪用户头部移动并且基于该移动触发关联动作，例如头部左倾触发左手势动作，头部右倾触发右手势动作，等。然而，这不限于头部移动。还可以使用如拍摄装置看到的手部移动、身体移动和物体移动。如果有人在使用他或她的手方面受到限制，这将非常有用。在本发明中，用户的移动代替设备的移动。
根据某些实施例，基于运动的输入跨三个轴确定。基于运动的输入可以与沿轴的移动、围绕轴的旋转或其组合有关。
本发明的实施例可以在多种不同场景中使用，其包括用于娱乐(例如，有趣的交互式视频、交互式探险)、训练(例如，教程，其中用户能够容易根据需要重放视频段)、教育(例如，其中用户能够回答视频问题并且从而通过做出正确手势而导航到下一个问题)、虚拟旅游、游戏、在线购物、交友网站或在设备的单手操作可取时。
在单个视频的情况下，运动可以用于采用与操纵杆或其他用户输入设备相似的方式发起快进、慢近、向前跳转、快退、慢退、跳转回、暂停和相似功能。这在观看移动设备上的安全拍摄装置画面时可特别有用。
本发明的另外的实施例涉及虚拟现实。当设备通过适合的安装设备安装到用户的头部时，媒体的控制和功能的调用可以经由头部移动来进行。在该示例中，系统可以采用对虚拟现实体验适合的方式显示媒体，例如采用分屏视图。在这样的情况下，第一类型的移动(例如设备的平移移动)可以用于通过虚拟现实模块来影响媒体(例如通过跟踪用户头部的移动来提供虚拟现实)，并且第二类型的移动(例如突然点头移动)可以用于改变媒体的内容(例如改变场景)或另外影响媒体。
系统然后可以允许记录和播放这样的虚拟现实体验。操纵媒体使得它更适合于虚拟现实体验，这可以在记录媒体时、在记录媒体之后且播放之前、在播放媒体时或这些的任何组合而发生。
尽管媒体控制指令主要参考基于运动的手势与待显示的媒体之间的关系来描述，媒体控制指令也可以在缺乏基于运动的手势下控制媒体的显示。
例如，媒体控制指令可以促使一段视频(例如在2个标记之间)无限循环(或某一次数)、暂停媒体并且等待额外用户输入、在检测到第一手势时暂停媒体并且在检测到第二手势时继续，或类似物。
尽管参考基于运动的交互来描述上文的交互，在运动单独用于识别手势的情况下，在一些实施例中，用户可以在移动设备时触摸屏幕来提供手势。
在一些情况下，可以对手势作出不同解释，或手势可以与不同功能关联，这取决于在移动设备时用户是否触摸屏幕。备选地，手势可以仅在用户触摸屏幕时接收(检测到)来防止基于设备的意外移动的无意手势检测。
在一些实施例中，用户可以在移动设备时触摸屏幕上的任何地方。备选地，可以使用例如按钮等图形元素，来启用手势识别，或修改手势识别。
根据某些实施例，系统可以配置成使用特定手势打开和关闭手势识别。例如，用户可以通过摇晃设备打开手势识别，并且稍后通过再次摇晃设备关闭手势识别。这在减少媒体的意外手势控制方面特别有利。
在本说明书和权利要求(如有的话)中，单词“包括”和它的派生词包括所述整数中的每个，但不排除包括一个或多个另外的整数。
在整个该说明书中对‘一个实施例’或‘实施例’的引用意思是连同实施例描述的特定特征、结构或特性包括在本发明的至少一个实施例中。从而，短语“在一个实施例中”或“在实施例中”在整个该说明书中各种地方的出现不一定都指相同的实施例。此外，特定特征、结构或特性采用任何适合的方式在一个或多个实施例中组合。
遵照法规，本发明采用或多或少对结构或方法特征特定的语言描述。要理解本发明不限于示出或描述的特定特征，因为本文描述的手段包括将本发明付诸实践的优选形式。因此本发明在本领域内技术人员适当解释的所附权利要求(如有的话)的适当范围内在它的形式或修改中的任一个中要求保护。

Claims (41)

1.一种交互式计算系统，其包括：
包括运动传感器的用户设备，所述运动传感器用于通过所述用户设备的运动接收基于运动的手势；以及
联接到所述运动传感器的控制器，所述控制器配置成根据所述基于运动的手势控制所述系统的一个或多个方面。
2.如权利要求1所述的系统，其中，所述控制器配置成基于所述基于运动的手势和媒体控制指令集选择性地控制媒体的显示。
3.如权利要求2所述的系统，其中，所述媒体控制指令定义所述基于运动的手势与媒体显示控制之间的关系。
4.如权利要求2或权利要求3所述的系统，其中，所述媒体控制指令在媒体控制文件中定义。
5.如权利要求4所述的系统，其中，所述媒体控制文件在媒体文件内定义标记。
6.如权利要求4所述的系统，其中，所述媒体控制文件定义默认视频和其他视频文件，所述默认视频配置成在未检测到手势时播放，其中每个视频文件与一个基于运动的手势关联。
7.如前述权利要求中任一项所述的系统，其中，所述控制器配置成根据所述基于运动的手势控制媒体的回放。
8.如权利要求7所述的系统，其中，所述控制器配置成通过选择用于回放的媒体来控制媒体的回放。
9.如权利要求8所述的系统，其中，选择用于回放的媒体包括从多个媒体文件选择媒体文件。
10.如权利要求8所述的系统，其中，选择用于回放的媒体包括从媒体文件选择媒体文件的一部分。
11.如权利要求10所述的系统，其中，所述媒体文件的一部分通过所述媒体文件的时间线上的时间、所述媒体文件内的标记或通过所述媒体文件的备选内容来定义。
12.如权利要求7至11中任一项所述的系统，其中，所述控制器配置成通过接收第一基于运动的手势且响应于此确定第一回放配置和接着接收第二基于运动的手势且响应于此确定第二回放配置而选择性地控制媒体的回放。
13.如权利要求7至12中任一项所述的系统，其中，媒体的回放的控制根据所述基于运动的手势来预定义。
14.如权利要求7至12中任一项所述的系统，其中，所述媒体的回放的控制被动态地定义。
15.如权利要求14所述的系统，其中，所述媒体的回放的控制根据何时接收所述基于运动的手势或接收所述手势时系统的状态而动态地定义。
16.如权利要求2至15中任一项所述的系统，其中，所述媒体包括视觉媒体。
17.如权利要求2至16中任一项所述的系统，其中，所述媒体包括视频。
18.如权利要求2至17中任一项所述的系统，其中，所述媒体包括以下中的至少一个：音频、文本、富文本、程式化文本、超文本标记语言(HTML)文档、动画、幻灯片放映、图形和图像。
19.如权利要求2至18中任一项所述的系统，其中，所述媒体包括多个层的媒体。
20.如权利要求2至19中任一项所述的系统，其中，所述媒体在所述用户设备的显示器上回放。
21.如权利要求2至19中任一项所述的系统，其中，所述媒体在所述用户设备外部的显示器上回放。
22.如前述权利要求中任一项所述的系统，其中，所述基于运动的手势包括多个预定义手势。
23.如前述权利要求中任一项所述的系统，其中，所述基于运动的手势通过所述用户设备的局部运动来定义。
24.如前述权利要求中任一项所述的系统，其中，所述基于运动的手势包括以下中的一个或组合：所述用户设备的左倾、右倾、前倾、后倾、倒置倾斜、圆形倾斜、翻转倾斜、扭动和摇晃。
25.如前述权利要求中任一项所述的系统，进一步包括加速计，其中，所述基于运动的手势至少部分根据来自所述加速计的数据确定。
26.如前述权利要求中任一项所述的系统，进一步包括陀螺仪、罗盘或定位系统，其中，所述基于运动的手势至少部分根据来自所述陀螺仪、所述罗盘或所述定位系统的数据确定。
27.如前述权利要求中任一项所述的系统，其中，所述控制器配置成基于所述基于运动的手势来控制媒体的呈现。
28.如权利要求1所述的系统，其中，所述控制器配置成控制所述用户设备的交互式应用。
29.如权利要求28所述的系统，其中，所述控制器配置成促使所述交互式应用购买项目、向数字购物车或愿望清单添加项目、对项目出价、完成交易、打电话、发送SMS、打开应用、与另外的设备通信或调用另一个应用的功能。
30.如权利要求28或权利要求29所述的系统，还包括媒体播放器，其中，所述控制器配置成在所述媒体播放器播放媒体时控制所述用户设备的交互式应用。
31.如权利要求30所述的系统，其中，所述交互式应用的控制独立于所述媒体的回放。
32.如权利要求1所述的系统，其中，所述控制器形成所述用户设备的一部分。
33.如权利要求1所述的系统，其中，所述系统由手持设备组成。
34.如权利要求1所述的系统，其中，所述系统包括头戴式显示器。
35.如权利要求1所述的系统，其中，所述控制器配置成根据控制指令集和所述基于运动的手势来控制所述系统的一个或多个方面，其中，所述控制指令定义所述基于运动的手势与所述系统的一个或多个方面的控制之间的关系。
36.一种用于生成交互式媒体的系统，所述系统包括用于生成媒体控制数据的媒体控制生成部件，其中，所述媒体控制数据定义由用户设备的运动定义的基于运动的手势与媒体的控制之间的关系，使得用户能够基于所述基于运动的手势而选择性地控制所述媒体。
37.如权利要求36所述的系统，进一步包括拍摄装置，用于捕捉照片或视频形式的媒体。
38.如权利要求36所述的系统，进一步包括数据接口，用于接收所述媒体。
39.如权利要求36至38中任一项所述的系统，其中，所述媒体控制生成部件配置成基于所述基于运动的手势生成交互式媒体。
40.一种交互式媒体方法，包括：
通过用户设备的移动接收基于运动的手势；以及
基于所述基于运动的手势来控制媒体的呈现。
41.一种交互式方法，包括：
通过用户设备的移动接收基于运动的手势；以及
基于所述基于运动的手势来控制所述用户设备的交互式应用。
CN201680036026.9A 2015-04-20 2016-04-20 交互式媒体系统和方法 Pending CN107735746A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
AU2015901421A AU2015901421A0 (en) 2015-04-20 Interactive Media System and Method
AU2015901421 2015-04-20
AU2015904160A AU2015904160A0 (en) 2015-10-13 Interactive Media System and Method
AU2015904160 2015-10-13
PCT/AU2016/050285 WO2016168893A1 (en) 2015-04-20 2016-04-20 Interactive media system and method

Publications (1)

Publication Number Publication Date
CN107735746A true CN107735746A (zh) 2018-02-23

Family

ID=57143507

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680036026.9A Pending CN107735746A (zh) 2015-04-20 2016-04-20 交互式媒体系统和方法

Country Status (8)

Country Link
US (1) US10866646B2 (zh)
EP (2) EP4395372A2 (zh)
JP (1) JP6913634B2 (zh)
CN (1) CN107735746A (zh)
AU (4) AU2016251812B2 (zh)
CA (1) CA3021380A1 (zh)
IL (3) IL296030B1 (zh)
WO (1) WO2016168893A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111324409A (zh) * 2020-02-14 2020-06-23 腾讯科技（深圳）有限公司 基于人工智能的互动方法和相关装置

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10511580B2 (en) 2014-03-31 2019-12-17 Monticello Enterprises LLC System and method for providing a social media shopping experience
US12008629B2 (en) 2014-03-31 2024-06-11 Monticello Enterprises LLC System and method for providing a social media shopping experience
US11004139B2 (en) 2014-03-31 2021-05-11 Monticello Enterprises LLC System and method for providing simplified in store purchases and in-app purchases using a use-interface-based payment API
US11080777B2 (en) 2014-03-31 2021-08-03 Monticello Enterprises LLC System and method for providing a social media shopping experience
US10695675B2 (en) * 2017-04-01 2020-06-30 Daniel Projansky System and method for creation and control of user interfaces for interaction with video content
US11842533B2 (en) 2017-04-26 2023-12-12 Chia-Lin Simmons Predictive search techniques based on image analysis and group feedback
US10951950B2 (en) * 2017-07-31 2021-03-16 Nokia Technologies Oy Method and apparatus for presenting a video loop during a storyline
US11526211B2 (en) * 2018-05-08 2022-12-13 Nevermind Capital Llc Methods and apparatus for controlling, implementing and supporting trick play in an augmented reality device
US11049299B2 (en) 2018-09-26 2021-06-29 The Alchemy Of You, Llc System and method for improved data structures and related interfaces
US11055923B2 (en) 2018-12-19 2021-07-06 Samsung Electronics Co., Ltd. System and method for head mounted device input
US11474620B2 (en) * 2019-03-01 2022-10-18 Sony Interactive Entertainment Inc. Controller inversion detection for context switching
TWI730539B (zh) * 2019-10-09 2021-06-11 開曼群島商粉迷科技股份有限公司 動態數位內容的顯示方法、圖形使用者介面與系統
CN111405346A (zh) * 2020-03-20 2020-07-10 北京字节跳动网络技术有限公司 视频流播放控制方法、设备及存储介质
CN112153454B9 (zh) * 2020-09-25 2023-05-30 北京字跳网络技术有限公司 提供多媒体内容的方法、装置和设备
KR20230124703A (ko) 2020-12-29 2023-08-25 스냅 인코포레이티드 증강 현실 컴포넌트들을 위한 신체 ui
US11500454B2 (en) * 2020-12-29 2022-11-15 Snap Inc. Body UI for augmented reality components
CN113760150B (zh) * 2021-09-22 2023-05-30 北京字跳网络技术有限公司 页面处理方法、装置、设备及存储介质
CN114820025A (zh) * 2022-03-17 2022-07-29 国家珠宝检测中心(广东)有限责任公司 基于图像识别技术的珠宝终端机的广告自动播放方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050210417A1 (en) * 2004-03-23 2005-09-22 Marvit David L User definable gestures for motion controlled handheld devices
CN102667937A (zh) * 2009-12-24 2012-09-12 三星电子株式会社 多媒体装置及控制多媒体装置的操作的方法
CN103065261A (zh) * 2012-12-25 2013-04-24 深圳Tcl新技术有限公司 基于手势操作的视频购物的方法、装置和系统
CN103248762A (zh) * 2013-04-16 2013-08-14 广东欧珀移动通信有限公司 一种快捷拨号的方法、装置及手机
CN103778926A (zh) * 2012-10-22 2014-05-07 深圳市快播科技有限公司 一种控制多媒体播放进度的方法及系统
US20140152531A1 (en) * 2011-12-01 2014-06-05 John T. Murray Head Mounted Display With Remote Control
CN104063248A (zh) * 2014-06-27 2014-09-24 上海摩软通讯技术有限公司 智能手表及其应用程序的启动方法
CN104079701A (zh) * 2013-03-25 2014-10-01 浪潮乐金数字移动通信有限公司 控制移动终端视频播放的方法及装置

Family Cites Families (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6496981B1 (en) 1997-09-19 2002-12-17 Douglass A. Wistendahl System for converting media content for interactive TV use
US6912726B1 (en) 1997-04-02 2005-06-28 International Business Machines Corporation Method and apparatus for integrating hyperlinks in video
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
JP2007531113A (ja) * 2004-03-23 2007-11-01 富士通株式会社 携帯装置の傾斜及び並進運動成分の識別
JP2008536196A (ja) 2005-02-14 2008-09-04 ヒルクレスト・ラボラトリーズ・インコーポレイテッド ３ｄポインティングを使用してテレビアプリケーションを向上させる方法およびシステム
US20070072676A1 (en) 2005-09-29 2007-03-29 Shumeet Baluja Using information from user-video game interactions to target advertisements, such as advertisements to be served in video games for example
US7667686B2 (en) 2006-02-01 2010-02-23 Memsic, Inc. Air-writing and motion sensing input for portable devices
GB2439121B (en) 2006-06-15 2009-10-21 Motorola Inc Apparatus and method for content item annotation
US20080115161A1 (en) 2006-10-30 2008-05-15 Google Inc. Delivering user-selected video advertisements
US7559017B2 (en) 2006-12-22 2009-07-07 Google Inc. Annotation framework for video
US8209223B2 (en) 2007-11-30 2012-06-26 Google Inc. Video object tag creation and processing
US8423076B2 (en) * 2008-02-01 2013-04-16 Lg Electronics Inc. User interface for a mobile device
US8112702B2 (en) 2008-02-19 2012-02-07 Google Inc. Annotating video intervals
US8467991B2 (en) * 2008-06-20 2013-06-18 Microsoft Corporation Data services based on gesture and location information of device
US8957835B2 (en) * 2008-09-30 2015-02-17 Apple Inc. Head-mounted display apparatus for retaining a portable electronic device with display
US20100095326A1 (en) 2008-10-15 2010-04-15 Robertson Iii Edward L Program content tagging system
US8458053B1 (en) 2008-12-17 2013-06-04 Google Inc. Click-to buy overlays
US20100154007A1 (en) 2008-12-17 2010-06-17 Jean Touboul Embedded video advertising method and system
KR20120082390A (ko) 2009-06-05 2012-07-23 모자이크 멀티미디어, 인코포레이티드 스마트 콘텐츠 태깅 및 상호 작용을 위한 에코시스템
US20110262103A1 (en) 2009-09-14 2011-10-27 Kumar Ramachandran Systems and methods for updating video content with linked tagging information
US20110076941A1 (en) 2009-09-30 2011-03-31 Ebay Inc. Near field communication and network data/product transfer
US9508080B2 (en) 2009-10-28 2016-11-29 Vidclx, Llc System and method of presenting a commercial product by inserting digital content into a video stream
US8291452B1 (en) * 2011-05-20 2012-10-16 Google Inc. Interface for watching a stream of videos
US20120206647A1 (en) 2010-07-01 2012-08-16 Digital Zoom, LLC System and method for tagging streamed video with tags based on position coordinates and time and selectively adding and using content associated with tags
US20120167146A1 (en) 2010-12-28 2012-06-28 White Square Media Llc Method and apparatus for providing or utilizing interactive video with tagged objects
US20120167145A1 (en) 2010-12-28 2012-06-28 White Square Media, LLC Method and apparatus for providing or utilizing interactive video with tagged objects
US20120197764A1 (en) 2011-02-02 2012-08-02 Ebay Inc. Method and process of using metadata associated with a digital media to search for local inventory
WO2012118976A2 (en) 2011-03-01 2012-09-07 Ebay Inc Methods and systems of providing a supplemental experience based on concurrently viewed content
US9424471B2 (en) 2011-03-01 2016-08-23 Sony Corporation Enhanced information for viewer-selected video object
US8776132B2 (en) 2011-03-17 2014-07-08 Ebay Inc. Single digital wallet across multiple payment platforms
WO2013020102A1 (en) 2011-08-04 2013-02-07 Dane Glasgow User commentary systems and methods
US9240059B2 (en) 2011-12-29 2016-01-19 Ebay Inc. Personal augmented reality
US9258626B2 (en) 2012-01-20 2016-02-09 Geun Sik Jo Annotating an object in a video with virtual information on a mobile terminal
US8638190B1 (en) 2012-02-02 2014-01-28 Google Inc. Gesture detection using an array of short-range communication devices
US9071282B1 (en) 2012-02-02 2015-06-30 Google Inc. Variable read rates for short-range communication
US8565791B1 (en) 2012-02-02 2013-10-22 Google Inc. Computing device interaction with visual media
US8837819B1 (en) 2012-04-05 2014-09-16 Google Inc. Systems and methods for facilitating identification of and interaction with objects in a video or image frame
US9442290B2 (en) * 2012-05-10 2016-09-13 Kopin Corporation Headset computer operation using vehicle sensor feedback for remote control vehicle
US9390448B2 (en) 2012-05-15 2016-07-12 Ebay Inc. System and methods to present a personal shopping experience
US9420213B2 (en) 2012-06-26 2016-08-16 Google Inc. Video creation marketplace
US20140047483A1 (en) 2012-08-08 2014-02-13 Neal Fairbanks System and Method for Providing Additional Information Associated with an Object Visually Present in Media
US9270515B1 (en) 2012-08-15 2016-02-23 Google Inc. Identifying portions of a media stream
US9888289B2 (en) 2012-09-29 2018-02-06 Smartzer Ltd Liquid overlay for video content
US20140100993A1 (en) 2012-10-04 2014-04-10 Rico Farmer Product Purchase in a Video Communication Session
US20140101551A1 (en) 2012-10-05 2014-04-10 Google Inc. Stitching videos into an aggregate video
US9094692B2 (en) 2012-10-05 2015-07-28 Ebay Inc. Systems and methods for marking content
US8863175B2 (en) 2012-12-19 2014-10-14 Ebay Inc. Method and system for targeted commerce in network broadcasting
CN104969224B (zh) 2013-03-13 2020-02-14 谷歌有限责任公司 未认可及新用户的改善用户体验
US10638198B2 (en) 2013-03-15 2020-04-28 Ebay Inc. Shoppable video
US9294712B2 (en) 2013-03-20 2016-03-22 Google Inc. Interpolated video tagging
US20140310752A1 (en) 2013-04-15 2014-10-16 Ebay Inc. Shopping in a media broadcast context
US9438947B2 (en) 2013-05-01 2016-09-06 Google Inc. Content annotation tool
US10394410B2 (en) 2013-05-09 2019-08-27 Amazon Technologies, Inc. Mobile device interfaces
US20140365341A1 (en) 2013-06-05 2014-12-11 Ebay Inc. Store of the future
US10137361B2 (en) * 2013-06-07 2018-11-27 Sony Interactive Entertainment America Llc Systems and methods for using reduced hops to generate an augmented virtual reality scene within a head mounted system
CN105359063B (zh) * 2013-06-09 2018-08-17 索尼电脑娱乐公司 利用追踪的头戴式显示器
US20140380380A1 (en) 2013-06-24 2014-12-25 Cinematique, L.L.C. System and method for encoding media with motion touch objects and display thereof
US9304648B2 (en) 2013-06-26 2016-04-05 Google Inc. Video segments for a video related to a task
CN103309618A (zh) 2013-07-02 2013-09-18 姜洪明 移动操作系统
US20150058870A1 (en) 2013-08-23 2015-02-26 Ramaneek Khanna Facilitating purchase from video advertisements
US10754511B2 (en) 2013-11-20 2020-08-25 Google Llc Multi-view audio and video interactive playback
US20150170245A1 (en) 2013-12-13 2015-06-18 DFS Medialabs, LLC Media content instance embedded product marketing
US20150278840A1 (en) 2014-03-25 2015-10-01 Ebay Inc. Systems and methods for implementing group incentives
US10248982B2 (en) 2014-12-23 2019-04-02 Ebay Inc. Automated extraction of product data from production data of visual media content
US10354290B2 (en) 2015-06-16 2019-07-16 Adobe, Inc. Generating a shoppable video
US20170017382A1 (en) 2015-07-15 2017-01-19 Cinematique LLC System and method for interaction between touch points on a graphical display
US9665972B2 (en) 2015-07-28 2017-05-30 Google Inc. System for compositing educational video with interactive, dynamically rendered visual aids
US9779304B2 (en) 2015-08-11 2017-10-03 Google Inc. Feature-based video annotation
US9627004B1 (en) 2015-10-14 2017-04-18 Google Inc. Video frame annotation
US10318581B2 (en) 2016-04-13 2019-06-11 Google Llc Video metadata association recommendation

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050210417A1 (en) * 2004-03-23 2005-09-22 Marvit David L User definable gestures for motion controlled handheld devices
CN102667937A (zh) * 2009-12-24 2012-09-12 三星电子株式会社 多媒体装置及控制多媒体装置的操作的方法
US20140152531A1 (en) * 2011-12-01 2014-06-05 John T. Murray Head Mounted Display With Remote Control
CN103778926A (zh) * 2012-10-22 2014-05-07 深圳市快播科技有限公司 一种控制多媒体播放进度的方法及系统
CN103065261A (zh) * 2012-12-25 2013-04-24 深圳Tcl新技术有限公司 基于手势操作的视频购物的方法、装置和系统
CN104079701A (zh) * 2013-03-25 2014-10-01 浪潮乐金数字移动通信有限公司 控制移动终端视频播放的方法及装置
CN103248762A (zh) * 2013-04-16 2013-08-14 广东欧珀移动通信有限公司 一种快捷拨号的方法、装置及手机
CN104063248A (zh) * 2014-06-27 2014-09-24 上海摩软通讯技术有限公司 智能手表及其应用程序的启动方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111324409A (zh) * 2020-02-14 2020-06-23 腾讯科技（深圳）有限公司 基于人工智能的互动方法和相关装置
CN111324409B (zh) * 2020-02-14 2023-03-10 腾讯科技（深圳）有限公司 基于人工智能的互动方法和相关装置

Also Published As

Publication number Publication date
CA3021380A1 (en) 2016-10-27
EP3286620A1 (en) 2018-02-28
AU2016251812B2 (en) 2021-08-05
WO2016168893A1 (en) 2016-10-27
AU2021261875A1 (en) 2021-12-02
IL296030B1 (en) 2024-07-01
AU2024205255A1 (en) 2024-08-22
AU2023202397A1 (en) 2023-05-11
JP6913634B2 (ja) 2021-08-04
US10866646B2 (en) 2020-12-15
AU2016251812A1 (en) 2017-12-07
EP3286620A4 (en) 2018-12-05
IL313286A (en) 2024-08-01
AU2023202397B2 (en) 2024-05-09
US20180101238A1 (en) 2018-04-12
IL255150B2 (en) 2023-02-01
IL296030A (en) 2022-10-01
AU2021261875B2 (en) 2023-01-19
EP4395372A2 (en) 2024-07-03
IL255150B (en) 2022-10-01
JP2018521378A (ja) 2018-08-02
IL255150A0 (en) 2017-12-31

Similar Documents

Publication Publication Date Title
CN107735746A (zh) 交互式媒体系统和方法
CN106257391B (zh) 用于导航媒体内容的设备、方法和图形用户界面
US9342212B2 (en) Systems, devices and methods for streaming multiple different media content in a digital container
CN102460412B (zh) 用于在网络中管理及/或再现因特网多媒体内容的系统及方法
JP2019195208A (ja) コンテンツトランザクションアイテムの動的バインド
CN103108248B (zh) 一种互动式视频的实现方法和系统
US9418346B2 (en) Method and apparatus for providing a drawer-based user interface for content access or recommendation
CN104145265B (zh) 涉及搜索和/或搜索整合的特征的系统和方法
WO2012162138A2 (en) System for selling products based on product collections represented in video
US11216073B2 (en) Systems and methods for displaying media assets associated with holographic structures
US20180348972A1 (en) Lithe clip survey facilitation systems and methods
CN103988162B (zh) 涉及信息模块的创建、观看和利用的特征的系统和方法
JP6999257B2 (ja) コンテンツ提示装置、コンテンツ提示方法、およびプログラム
US10656791B2 (en) Methods, systems, and media for navigating a user interface with a toolbar
US20150301699A1 (en) Methods, systems, and media for media guidance
WO2020071545A1 (ja) 情報処理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180223