CN106576191B - 视频制作共享设备及方法 - Google Patents

视频制作共享设备及方法 Download PDF

Info

Publication number
CN106576191B
CN106576191B CN201480061727.9A CN201480061727A CN106576191B CN 106576191 B CN106576191 B CN 106576191B CN 201480061727 A CN201480061727 A CN 201480061727A CN 106576191 B CN106576191 B CN 106576191B
Authority
CN
China
Prior art keywords
video
metadata
user
computer
panoramic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201480061727.9A
Other languages
English (en)
Other versions
CN106576191A (zh
Inventor
S·亚拉姆
V·K·辛格
R·卡利
J·哈里森
C·德切恩
U·杰亚拉姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN106576191A publication Critical patent/CN106576191A/zh
Application granted granted Critical
Publication of CN106576191B publication Critical patent/CN106576191B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/282Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743Video hosting of uploaded data from client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/64322IP
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种视频制作共享设备,其被提供有:第一计算机,所述第一计算机具有处理器、存储器、和输入装置,所述存储器具有存储在其中的程序,所述程序通过处理器实施并被设计为以使所述处理器:1)访问至少一个视频流,2)利用所述第一计算机的所述输入装置,操作至少一个视频流的视角以生成个人视频,以及3)传输来自用于操作至少一个视频流以创造所述个人视频的输入装置的用户输入的数据文件,所述个人视频描述所述至少一个视频流的个人视频。还提供一种方法。

Description

视频制作共享设备及方法
技术领域
本公开关于用于记录视频制作(video production)和在远程位置处观看视频制作的系统和方法。更具体地,本公开涉及通过以下方式来记录视频制作:记录与一个或更多个全景的或大视场的视频内容(video feed)有关的元数据,以及使用具有来自不同源的视频制作数据和原始视频内容的记录的元数据重新创造视频制作。
背景技术
用于捕捉和记录视频的技术是已知的。大多数技术涉及视频捕捉系统,该视频捕捉系统捕捉视频并且生成来自视频摄像机的视频流(或内容)。观看者受到通过(一个或更多个)视频摄像机操作者实现的摄像机定向、位置和缩放的限制。需要提高的是,使观看者能够将大视场视频流剪裁成能够共享和通过其它用户重新创造的唯一的视频制作。
发明内容
提供一种设备和方法,其用于:记录来自一个或更多个全景的和/或高分辨率的视频内容的视频制作,并且在远程位置处使用来自远程源的元数据、制作数据和视频内容重新创造视频制作。
单视场视频探测器的阵列以及视频探测器的立体象对的阵列被提供在一个或更多个唯一位置中(或在运动中),以随着时间的推移,从周围环境捕捉信息(诸如,单视场图像或立体图像),并且从超出针对单视频探测器或视频探测器的立体象对的范围捕捉音频输入。通过用户在用户界面处访问来自一个或更多个视频探测器的视频输出,以生成来自一个或更多个大视场视频内容的视频制作。然后,通过相同用户或另一个用户,在远程位置处使用与(一个或更多个)视频内容和制作数据相关的所记录的元数据以及来自与该用户不同的源的(一个或更多个)原始视频内容,重新创造所生成的视频制作。
根据一个方面,一种视频制作共享设备被提供有:第一计算机,所述第一计算机具有处理器、存储器、和输入装置,所述存储器具有存储在其中的程序,所述程序通过处理器实施并被设计以使所述处理器:1)访问至少一个视频流,2)利用所述第一计算机的所述输入装置,操作至少一个视频流的视角以生成个人视频,以及3)传输来自用于操作至少一个视频流的输入装置的用户输入的数据文件,以创造所述个人视频,所述个人视频描述所述至少一个视频流的个人视频。
根据另一个方面,提供一种用于共享视频制作的方法,包括:提供至少一个视频流和至少一个计算机;在所述至少一个计算机处访问至少一个视频流;利用所述至少一个计算机的输入装置,操作至少一个视频流的视角,以生成个人视频;以及提供来自用于操作所述至少一个视频流的所述输入装置的用户输入,创造以数据文件的形式的所述个人视频,所述个人视频描述至少一个视频流的所述个人视频。
根据再一个方面,提供一种设备和一种方法,其用于:记录来自一个或更多个全景的和/或高分辨率的视频内容的视频制作,并且在远程位置处使用来自远程源的元数据、制作数据和视频内容重新创造视频制作。
附图说明
以下参照以下附图描述本公开的优选的实施例。
图1是示出一种设备和方法的示意图,该设备和方法用于记录来自一个或更多个全景的和/或高分辨率的视频内容的视频制作,并且在远程位置处使用来自远程源的元数据、制作数据和视频内容重新创造视频制作。
图2是示出图1的设备和方法的实施方式的功能框图,该框图能够使第一用户生成和记录个人视频制作,并且进一步能够通过第一用户与第二用户共享与制作数据和视频内容结合以能够使第二用户访问和/或修改个人视频制作的元数据。
图3是示出涉及使用图1的系统10记录和创造视频片(clip)的步骤的流程图。
图4是示出涉及使用图1的系统10共享视频片的步骤的流程图。
图5是示出涉及使用图1的系统10播放发布在社交媒体网络上的视频片的步骤的流程图。
图6是示出涉及处理通过用户触发的视频回放状态更改事件(Video PlaybackState Changed Event)的步骤的流程图。
图7是例示用于捕捉视频图像的摄像机阵列捕捉系统的简化的示意图,该视频图像用于创造全景的和/或高分辨率视频内容,这些视频内容限定用户能够捕捉的图像空间为在一系列唯一的时间段处的图像空间(包括完整的图像空间)内的图像子空间,当生成个人用户视频时,该图像空间为具有来自捕捉的图像空间内的用户确定的方向和视场的完整集或子集。
图8是通过想要与他们自己或与第二用户共享个人用户视频的第一用户创造用于个人捕捉的图像子空间(子区域)的元数据的选择段的示例。
具体实施方式
本公开是为了促进美国专利法“为促进科学和有用技术的进步”(第1条,第8段)(“to promote the progress of science and useful arts”,(Article 1,Section 8))的法律目的而提交的。
实施例公开一种设备和方法,该设备和方法用于:接收来自多个全景视频摄像机头或来自本地存储盘的视频流;在本地存储器缓存器中存储视频数据;操作视频以生成能够通过因特网和社交媒体共享的个人视频;以及观看所生成的个人视频。提供一种设备和方法,该设备和方法用于:记录来自一个或更多个全景的和/或高分辨率的视频内容的视频制作,并且在远程位置处使用来自远程源的元数据、制作数据和视频内容重新创造视频制作。
对于图像输入的情况,在阵列中提供视频摄像机的立体象对。具有用于创造针对全景视频的全景图像数据的处理电路系统的单视场或立体视频探测器的组合单元被称作为全景视频摄像机头。能够将来自全景视频摄像机头的视频数据流式传输(stream)至观看者,或记录在计算机存储器中,或者通过观看者存储和检索,并且使用用于控制的用户界面装置观看。
参照附图描述本文中所描述的各种实施例。然而,在不具有一个或更多个这些具体细节,或者结合其它已知的方法和配置的情况下,可以实践某些实施例。在以下描述中,为了提供本发明的透彻理解,阐述诸如具体配置和方法等的数个具体细节。在其它示例中,没有具体详细地描述众所周知的结构和方法,以便不会不必要地混淆本发明。贯穿此说明书引用的“一个实施例”或“实施例”意味着是在本发明的至少一个实施例中包括结合该实施例描述的具体的特征、配置、组成或特性。因此,贯穿该说明各处出现的短语“在一个实施例中”或“在实施例中”不一定涉及本发明的相同实施例。此外,可以在一个或更多个实施例中以任何适合的方式组合具体特征、配置、组成或特性。
图1提供一种设备10和一种方法,其用于记录来自一个或更多个全景的和/或高分辨率的视频内容的视频制作,并且在远程位置处使用来自远程源的元数据、制作数据和视频内容重新创造视频制作。记录装置16(诸如,摄像机或摄像机的阵列(或立体配对摄像机))在被记录装置16捕捉的场景中捕捉一个或更多个图像对象18。一个或更多个记录装置16捕捉关于对象18的视频/媒体,并将其发送至一个或更多个服务器12。通过(一个或更多个)摄像机16生成视频流/视频片/媒体实体20。
如图1所示,一个或更多个服务器12接收视频流20。在便携式电子装置或平板计算机32处,驻留在服务器12上的视频/媒体片22被提供给第一用户32。平板计算机28具有输入装置30。平板计算机28是有关移动装置的实体,该移动装置以来自服务器12的视频内容或视频片的形式获取媒体。在已经从服务器12接收媒体之后,移动装置28现能够创造和记录通过元数据42限定的自制作的片或段(segment)。
图1的用户界面30示出允许与全景视频22交互的交互装置。装置28的用户界面30提供观看的个体控制以及同时记录捕捉实体的唯一观看点的该唯一个体化片24。保存和共享个体化片24。在保存和共享时,被共享的是元数据42,其为组件#42。将元数据42发送至云14(跨越因特网分布的),以在云14中以提供的任何种类的数据存储中存储。此外,元数据42能够进入到诸如
Figure BPA0000222094530000041
的社交媒体。随后,其进入到因特网40用于分享和分布。通过因特网40,经由元数据42提供的所获得的视频24投向至(go out)能够在因特网上接收它的每个人。
在另一个移动装置34上(和用户输入装置36)的另一个用户38能够接收能够使用户38观看的来自用户32的自制作片或段的元数据42和视频片22。用户(或实体)38接收通过移动装置28创造的元数据42,并且此外接收从(一个或更多个)服务器12获得的视频片22。具有直接来自服务器12和元数据44的视频片22允许明显有效地降低用于向视频/媒体的个体生成修改的一个至许多个的共享活动的时间和数据需求。使用装置36的实体38具有进一步修改片24并将元数据44发送回至用于随后共享和存储的社交媒体网站和云的能力。
如图2所示,实体或用户32具有对客户端应用46的访问。使用这个客户端应用访问来自多个摄像机22的视频内容。使用该应用,实体或用户选择记录选项78。记录数据包76由诸如开始时间、用户事件、和结束时间的元数据组成。在诸如文件75这样的存储机构中存储元数据。这适用于包括用于在专用数据存储74中保存数据的,或用于允许实体/用户选择以共享这个记录单元48的选择的若干选择。
如图2所示,共享之后,利用元数据文件50启动社交数据的网络插件应用程序。该元数据发布至朋友和社交网络52并且进入社交网络54。另一个选项是绕开社交网络并进入诸如3D4U观察者60的专用应用程序(应用程序)。该应用程序将至记录的链接62发送至由另一个用户38使用的应用程序。
图2的实体或用户38还启动客户端应用程序56。这个客户端应用程序接收至应用程序62中的记录的链接,和/或接收至社交网络界面58中的记录的链接。该应用程序重新创造从元数据24制作的视频。使用来自多个摄像机22和用于元数据74的文件或等价存储机构的视频内容完成此过程。
如图2所示,实体38现能够具有若干选择,包括:一个选择是观看且跟随(follow)66。另一个选择是进一步向共享数据添加数据68。将这个发送至诸如文件74的存储机构。第三选择是修改70。这创造新的元数据72。能够将此新的元数据72发布至朋友和在社交网络53上发布,并且发送至社交网络54。
图3形成示出用于使用(图1的)系统10记录和创造视频片的逻辑处理的流程图。更具体地,图3例示用于记录和创造片的逻辑处理。
如图3所示,逻辑流程图例示在记录视频片时,通过申请人的发明的系统实施的步骤。
在步骤“S1”中,个体请求使用可视化媒体开始记录视频。可设想各种形式的可视化媒体,其包括位于用户界面中的链接、位于用户界面上的标题、按钮、可点击的图标、可点击的图形或超文本链接。在执行步骤“S1”之后,过程继续至步骤“S2”。
在步骤“S2”中,针对视频片,在装置存储器中创造元数据。元数据能够是数据存储的任何方式,其包括枚举、目录、哈希表、阵列、列表、或二叉树或文件的一个或更多个组合。在执行步骤“S2”之后,过程继续至步骤“S3”。
在步骤“S3”中,过程获取当前回放时间并且在步骤“S2”中创造的元数据中添加当前回放时间。当前回放时间能够以字符串方式或整数方式或二进制方式添加。在执行步骤“S3”之后,过程继续至步骤“S4”。
在步骤“S4”中,过程开始记录或捕捉全部用户事件。过程可能对变量设置值以指示记录已经开始。变量能够是像字符串、布尔值、整数或二进制一样的数据存储的任何形式。在执行步骤“S4”之后,过程继续至步骤“S5”。
在步骤“S5”中,过程创造用于保存事件的数据存储。可设想各种形式的存储,其包括枚举、目录、哈希表、阵列、列表、或二叉树或文件的一个或更多个组合。在执行步骤“S5”之后,过程继续至步骤“S6”。
在步骤“S6”中,过程开始计时器以保持跟踪记录时间。这个步骤可以初始化一个数字或初始化类的对象,这提供了用于保持持续期间的跟踪的功能。在执行步骤“S6”之后,过程继续至步骤“S7”。
在步骤“S7”中,过程询问记录是否正在进行。过程可能获取在步骤“S4”中设置的变量的值,并且该值具有与在步骤“S4”中设置的相同的值,则该值指示记录正在进行,否则记录已经停止。例如,如果用户停止记录,则过程可能将在步骤“S4”中设置为“真”的布尔值设置为假,以指示记录已经停止。用户能够通过与装置的具体的物理的交互,或如在三星(Samsung)装置中凭借眼睛与装置交互来停止记录。例如,如果用户在已经开始记录之后再次点击记录按钮,则过程的记录变量将被设置为指示记录已经停止。在步骤“S7”之后,如果记录正在进行,则过程继续至步骤S8,否则记录继续至步骤“S16”。
在步骤“S8”中,过程询问用户事件是否已经发生。用户事件能够是物理交互或是像在三星装置中通过用户凭借眼睛与装置交互的任何形式。事件可以导致暂停、播放、向前播放(forward)、倒回、摄像机转换、缩放或摇摄(pan)。例如,如果用户在具有标签“暂停”的按钮上点击,则其可能导致视频的暂停,并且该过程将捕捉这个事件。如果用户事件发生,则过程继续至步骤S9,否则其再次继续步骤“S7”。
在步骤“S9”中,过程创造用于发生在步骤“S8”中的事件的数据存储。可设想各种形式的数据存储,其包括枚举、目录、哈希表、阵列、列表、或二叉树或文件的一个或更多个组合。在执行步骤“S9”之后,过程继续至步骤“S10”。
在步骤“S10”中,过程将与事件相关的信息保存至步骤“S9”中创造的数据存储。信息可能包括事件发生时的时间以及用于唯一识别事件的类型的细节。例如,过程可能获得视频的当前回放时间以及记录的当前持续时间和事件id。在执行步骤“S10”之后,过程继续至步骤“S11”。
在步骤“11”中,过程询问事件是否属于使屏幕摇摄的用户事件的列表。如果其导致屏幕摇摄,则过程继续至步骤“S14”,否则其继续至步骤“S12”。例如,如果用户向右或者向左水平地滑动他的手指且如果这个手势属于引起摇摄的用户事件列表,则过程移动至步骤“S14”。
在步骤“S14”中,过程将偏移值(X和Y)保存至步骤“S9”中创造的事件数据存储。在执行步骤“S14”之后,过程继续至步骤“S15”。
在步骤“12”中,过程询问事件是否属于使屏幕缩放的用户事件的列表。如果其导致屏幕缩放,则过程继续至步骤“S13”,否则其继续至步骤“S15”。例如,如果用户滑动两个手指使其彼此远离且如果这个手势属于使屏幕缩放的用户事件列表,则过程移动至步骤“S13”。
在步骤“S13”中,过程将缩放尺寸和偏移值(X和Y)保存至步骤“S9”中创造的事件数据存储。在执行步骤“S13”之后,过程继续至步骤“S15”。
在步骤“S15”中,过程将在步骤“S9”中创造的事件存储添加至用于全部事件的步骤“S5”中创造的数据存储。在执行步骤“S15”之后,过程再次继续至步骤“S7”。
在步骤“S16”中,如果用户停止记录,则过程向用户提供各种选项。选项包括:保存、共享或丢弃。使用可视化媒体提供选项中的每个。可设想各种形式的可视化媒体,其包括位于用户界面中的链接、位于用户界面上的标题、按钮、可点击的图标、可点击的图形或超文本链接。在步骤“S16”之后,如果用户选择保存片,则过程继续至步骤“S17”;或如果用户选择共享片,则过程继续至步骤“S18”;或如果用户选择丢弃片,则过程继续至步骤“S19”。
在步骤“S17”中,过程识别与需要被保存的片相关的元数据。在步骤“S17”之后,过程继续至步骤“S20”。
在步骤“S18”中,过程共享记录。在步骤“S18”之后,过程继续至步骤“S22”。
在步骤“S19”中,过程丢弃记录。在步骤“S19”之后,过程继续至其中存储器清除记录(或擦除记录)的步骤“S19.5”。
在步骤“S20”中,过程在装置盘上的文件中保存元数据。理解的是,文件能够是包括xml、text、word、或excel文件的任何类型。在执行步骤“S20”之后,过程继续至步骤“S21”。
在步骤“S21”中,个体请求使用可视化媒体共享视频片。可设想各种形式的可视化媒体,其包括位于用户界面内的链接、位于用户界面上的标题、按钮、可点击的图标、可点击的图形或超文本链接。在执行步骤“S21”之后,过程继续至如图3A示出的共享过程。
图3形成示出用于使用(图1的)系统10共享视频片的逻辑处理的过程流程图。更具体地,图3例示用于共享视频片的逻辑处理。
如图4所示,逻辑流程图例示在共享视频片时,通过申请人的发明的系统实现的步骤。
在步骤“S22”中,过程将元数据发送至共享服务器,并且接收用于共享视频片的唯一链接。能够以包括字符串或xml的各种形式将元数据发送至共享服务器。在执行步骤“S22”之后,过程继续至步骤“S23”。
在步骤“S23”中,过程生成用于被共享的片的缩略图。在执行步骤“S23”之后,过程继续至步骤“S24”。
在步骤“S24”中,过程请求用户输入视频片的评论,并且在存储器中保存该评论。可能通过可视化媒体请求评论。可设想各种形式的可视化媒体,其包括文本框。在执行步骤“S24”之后,过程继续至步骤“S25”。
在步骤“S25”中,过程请求用户选择社交网络媒体,用户愿意在该社交网络媒体上共享片。选项将包括包含
Figure BPA0000222094530000081
Figure BPA0000222094530000082
的全部可用的社交媒体。在执行步骤“S25”之后,对于所选择的社交媒体网络中的每个,过程继续至步骤“S26”。
在步骤“S26”中,过程询问社交媒体网络是否用户已经使用他们的API功能进行登录。例如,过程将询问
Figure BPA0000222094530000083
是否用户当前使用
Figure BPA0000222094530000084
API登录。在执行步骤“S26”之后,如果用户进行登录,则过程继续至步骤“S27”,否则过程继续至步骤“S29”。
在步骤“S29”中,过程提示用户以登录至社交媒体网络。用于进入的用户名称和密码将取决于社交媒体网络。例如,过程将请求
Figure BPA0000222094530000085
的登录ID和密码用于在
Figure BPA0000222094530000086
上共享片。在执行步骤“S29”之后,过程继续至步骤“S30”。
在步骤“S30”中,过程向用户请求针对3D4U应用程序至社交媒体网络的许可。在执行步骤“S30”之后,过程继续至步骤“S31”。
在步骤“S31”中,过程请求来自社交网络媒体的用户或社交网络信息。这个信息能够包括资料图片、用户的朋友的列表或用户ID。在执行步骤“S31”之后,过程继续至步骤“S27”。
在步骤“S27”中,过程将用户信息上传至3D4U共享服务器。在执行步骤“S27”之后,过程继续至步骤“S28”。
在步骤“S28”中,过程在社交媒体网络上发布唯一链接以及评论和缩略图。在针对所选择的社交媒体网络中的每个执行步骤“S28”之后,过程结束。
图4形成示出用于使用(图1的)系统10播放发布在社交媒体上的视频片的逻辑处理的过程流程图。更具体地,图4例示用于播放发布在社交媒体网络上的视频片的逻辑处理。
如图4所示,逻辑流程图例示在播放发布在社交媒体网络上的视频片时,通过申请人的发明的系统实现的步骤。
在步骤“SS1”中,应用程序用户请求使用呈现为可视化媒体的链接播放视频片。可设想各种形式的可视化媒体,其包括位于用户界面中的链接、位于用户界面上的标题、按钮、可点击的图标、缩略图、可点击的图形或超文本链接。在执行步骤“SS1”之后,过程继续至步骤“SS2”。
在步骤“SS2”中,过程使用来自链接的多用途因特网邮件扩展(MIME)类型信息,以启动3D4U应用程序。在执行步骤“SS2”之后,过程继续至步骤“SS3”。
在步骤“SS3”中,过程询问装置是否应用程序已经被安装在装置上。在执行步骤“SS3”之后,如果应用程序被安装,则过程继续至步骤“SS6”,否则过程继续至步骤“SS4”。
在步骤“SS4”中,过程将装置服务器重新定向至3D4U应用程序的下载网站。下载网站将取决于装置。例如,在
Figure BPA0000222094530000091
装置上,过程重新定向至
Figure BPA0000222094530000092
3D4U应用程序。在执行步骤“SS4”之后,过程继续至步骤“SS5”。
在步骤“SS5”中,过程在装置上安装3D4U应用程序。在执行步骤“SS5”之后,过程继续至步骤“SS6”。
在步骤“SS6”中,过程开始3D4U应用程序。在执行步骤“SS6”之后,过程继续至步骤“SS7”。
在步骤“SS7”中,过程询问片是否已经被下载在装置上。在步骤“SS7”之后,如果片已经被下载,则过程继续至步骤“SS9”,否则过程继续至步骤“SS8”。
在步骤“SS8”中,过程利用应用程序共享服务器请求片元数据,并且将其下载在装置上。在执行步骤“SS8”之后,过程继续至步骤“SS9”。
在步骤“SS9”中,过程从在步骤“SS8”中下载的元数据读取完整的视频ID。在执行步骤“SS9”之后,过程继续至步骤“SS10”。
在步骤“SS10”中,过程基于完整的视频ID打开完整的视频。在执行步骤“SS10”之后,过程继续至步骤“SS11”。
在步骤“SS11”中,过程从元数据获取片开始时间。在执行步骤“SS11”之后,过程继续至步骤“SS12”。
在步骤“SS12”中,过程从片的元数据获取全部的事件。在执行步骤“SS12”之后,过程继续至步骤“SS13”。
在步骤“SS13”中,过程根据在步骤“SS11”中获得的开始时间开始播放完整的视频。在执行步骤“SS13”之后,过程继续至步骤“SS14”。
在步骤“SS14”中,过程请求视频的当前时间戳。在执行步骤“SS14”之后,过程继续至步骤“SS15”。
在步骤“SS15”中,过程询问事件集合是否事件开始时间少于步骤“SS14”中获得的当前视频时间。在执行步骤“SS15”之后,如果存在具有开始时间少于当前视频时间的事件,则其将读取事件数据存储并且继续至步骤“SS16”,否则过程继续至步骤“SS14”。
在步骤“SS16”中,过程基于从在步骤“SS15”中获得的事件数据存储取得的事件ID读取事件类型。在执行步骤“SS16”之后,过程继续至步骤“SS17”。
在步骤“SS17”中,过程询问事件是否属于使屏幕摇摄的用户事件的列表。如果其导致屏幕摇摄,则过程继续至步骤“SS20”,否则其继续至步骤“SS18”。
在步骤“SS20”中,过程从在步骤“SS15”中获得的事件数据存储读取偏移值(X和Y)。在执行步骤“SS20”之后,过程继续至步骤“SS21”。
在步骤“SS18”中,过程询问事件是否属于使屏幕缩放的用户事件的列表。如果其导致屏幕缩放,则过程继续至步骤“SS19”,否则其继续至步骤“SS21”。
在步骤“SS21”中,过程将事件应用至视频。例如,如果视频是缩放类型,则过程应用偏移和缩放尺寸值,并且然后缩放屏幕。在执行步骤“SS21”之后,过程继续至步骤“SS22”。
在步骤“SS22”中,过程从在步骤“SS12”中读取的事件数据存储的集合中删除在步骤“SS15”中获得的事件存储。在执行步骤“SS22”之后,过程再次继续至步骤“SS14”。
图5形成示出针对3D-4U共享社交媒体网络和规则视频内容的单独认证并结合它们以提供完整认证的过程的过程流程图。更具体地,图5例示用于针对3D-4U共享社交媒体网络和规则视频内容的单独认证并结合它们以提供完整认证的逻辑处理。
在步骤“SSS1”中,用户选择用于从3D4U或从诸如
Figure BPA0000222094530000111
等的其它社交媒体网络、或在3D-4U应用程序中观看的共享片。用户选择使用可视化媒体的呈现为链接的视频片。可设想各种形式的可视化媒体,其包括位于用户界面内的链接、位于用户界面上的标题、按钮、可点击的图表、缩略图、可点击的图形或超文本链接。该链接指向由另一个用户或相同用户通过图2中示出的过程共享的视频。在不考虑元数据正在被共享的情况下,系统与数据库500进行通信,并且对用户观看基本视频内容的必要的许可进行验证。这包含通过媒体公司使用的正常认证过程(例如,登录过程、基于位置的认证、基于网络的认证等)。在执行步骤“SSS1”并且验证用户的用于观看视频的许可之后,过程继续至步骤“SSS2”。
在步骤“SSS2”中,过程验证用户的许可,以能够通过3D-4U共享数据库502观看3D-4U共享片或创造用于被共享的片。在执行步骤“SSS2”之后,过程继续至步骤“SSS3”。
在步骤“SSS3”中,过程验证在步骤“SSS2”和步骤“SSS3”两者中获得的许可。在执行步骤“SSS3”之后,过程继续至步骤“SSS4”。
在步骤“SSS4”中,过程询问装置元数据是否已经在装置上或其是否正在被流式传输。在执行步骤“SSS4”之后,如果元数据在装置上是可用的,则过程继续至步骤“SSS6”,否则过程继续至步骤“SSS5”。
在步骤“SSS5”中,过程从元数据存储数据库504下载元数据或开始流式传输元数据。
在步骤“SSS6”中,过程询问装置视频是否已经在装置上或其是否正在被流式传输。在执行步骤“SSS6”之后,如果视频在装置上是可用的,则过程继续至步骤“SSS8”,否则过程继续至步骤“SSS7”。
在步骤“SSS7”中,过程从视频存储数据库506下载视频或开始流式传输视频。
在步骤“SSS8”中,过程继续至用户创造和共享自定义片的过程,或继续至用户观看共享的自定义片的过程。
图6是示出用于向用户馈送来自多个摄像机的视频的过程的示意图。更具体地,图6例示用于创造来自多个摄像机的视频内容,以及用户选择内容并且观看它的逻辑处理。在框250中,过程记录通过制作人执行的用户事件。事件能够包括摇摄、倾斜、缩放、转换摄像机、暂停、重播等。在执行框250之后,过程继续至框252。在框252中,将元数据经由因特网40流式传输至用户且对用户可用。在框254中,从因特网40接收来自多个摄像机的视频内容。在执行框254之后,过程继续至框256。在框256中,制作人使用3D4U制作人应用程序以生成视频内容。在执行框256之后,过程继续至框250和框248。在框248中,过程记录通过制作人执行的用户事件。事件能够包括摇摄、倾斜、缩放、转换摄像机、暂停、重播等。在执行框250之后,过程继续至框246。在框246中,过程在从多个摄像机获得的视频内容中存储媒体数据。在执行框246之后,过程继续至框244。在框244中,过程通过因特网40发送从多个摄像机获得的、具有嵌入的制作人258元数据的视频内容,并且通过因特网40使得其可用。
图7是180度单视场(或立体配对)摄像机阵列16的简化示意图,其例示通过摄像机阵列16捕捉的全景和/或高分辨率视频的视场(包括具有相邻和连续视场的相邻摄照相机的阵列,以提供所得到的组合的全景视场)。全景图像区域102表示图像区域(在距离摄像机阵列16的一组径向距离处)并且表示针对任何给定时间点在距摄像机阵列16处拍摄的完整全景视频(或图像)。子视频(或子图像)104表示用户选择(通过缩放和图像部分选择)的视频组件(或图像),其是在时间段t=1处的图像区域102的子集。在之后的时间段t=5处,子视频(或子图像)106表示在之后时间段t=5处的用户选择的视频组件(或图像)。在更后段t=n处,子视频(或图像)108表示用户选择的视频组件(或在更后段t=n处的图像)。以这种方法,用户能够根据来自摄像机16的视频内容产生他们自己(随时间推移)的图像,以便从全景图像区域102提供个人视频。最多,图像104、106和108能够针对任何选择的时间段覆盖图像102的全部。
图8是例示在如图3所示的记录或创造片的过程期间,通过系统创造的片的元数据的示例元数据文件。以下描述图X在图3中示出的过程期间是如何被创造的。
元数据文件首先在存储器中被创造,并且然后在过程的步骤“S2”中将框A0添加至元数据。
在步骤“S3”中通过过程创造用于数据存储的框“A2”。在相同步骤中,通过过程使用摄像机标签细节创造框A3,并且然后将A3添加至A2。然后,过程获取当前回放时间,针对当前回放时间创造A4和A5,以及将A4和A5添加至A2。过程还添加默认事件ID以及值,以创造A6和A7数据存储,其然后被添加至A2。过程获取偏移的初始值,使用密钥创造A8和使用该值创造A9,并将它们添加至A2。过程获取针对播放状态的初始值,使用密钥创造A10和使用该值创造A11,并将它们添加至A2。过程获取针记录的装置内容转换的初始值,使用密钥创造A11和使用该值创造A12,并将它们添加至A2。过程获取应用程序的版本,使用密钥创造A13和使用该值创造A14,并将它们二者添加至A2。过程获取正在被播放的完整视频的视频ID,使用密钥创造A15和使用该值创造A16,并将它们二者添加至A2。过程获取当前缩放尺寸,使用密钥创造A17和使用该值创造A18,并将它们二者添加至A2。
在步骤“S5”中通过过程创造框“A1”。然后,将框“A2”添加至框“A1”,并将框“A1”添加至框“A0”。
当用户摇摄视频时,通过过程在步骤“S9”中创造框“A21”。在相同步骤中,使用当前回放时间通过过程创造框“A22”和框“A23”。另外,使用事件ID通过过程创造框“A24”和框“A25”。使用偏移值通过过程在步骤“S14”中创造框“A26”和框“A27”。另外,使用记录的持续时间通过过程创造框“A28”和框“A29”。所以,框“A21”例示用户事件在19.883273696秒处已经发生,其中,事件ID=109,其对应于具有偏移值(453.5,0)的摇摄并且记录的持续时间是1.7666667588055134。在步骤“S15”中将框“A21”添加至框“A1”。
当用户摇摄视频时,通过过程在步骤“S9”中创造框“A30”。在相同步骤中,使用当前回放时间通过过程创造框“A31”和框“A32”。另外,使用事件ID通过过程创造框“A33”和框“A34”。使用偏移值通过过程在步骤“S14”中创造框“A35”和框“A36”。另外,使用记录的持续时间通过过程创造框“A37”和框“A38”。所以,框“A30”例示用户事件在完整视频的19.883273696秒处已经发生,其中,事件ID=109,其对应于具有偏移值(457,0)的摇摄并且记录的持续时间是1.8000000938773155。在步骤“S15”中将框“A30”添加至框“A1”。
当用户摇摄视频时,通过过程在步骤“S9”中创造框“A39”。在相同步骤中,使用当前回放时间通过过程创造框“A40”和框“A41”。另外,使用事件ID通过过程创造框“A42”和框“A43”。使用偏移值通过过程在步骤“S14”中的创造框“A44”和框“A45”。另外,使用记录的持续时间通过过程创造框“A46”和框“A47”。所以,框“A39”例示用户事件在完整视频的19.915203333000001秒处已经发生,其中,事件ID=109,其对应于具有偏移值(460.5,0)的摇摄并且记录的持续时间是1.8000000938773155。在步骤“S15”中将框“A39”添加至框“A1”。
当用户缩放视频时,通过过程在步骤“S9”中创造框“A48”。在相同步骤中,使用当前回放时间通过过程创造框“A49”和框“A50”。另外,使用事件ID通过过程创造框“A51”和框“A52”。使用偏移值通过过程在步骤“S13”中创造框“A53”和框“A54”。在相同步骤中,使用记录的持续时间值通过过程创造框“A55”和框“A56”。使用缩放尺寸值通过过程创造框“A57”和框“A58”。所以,框“A48”例示用户事件在完整视频的23.910301570000001秒处已经发生,其中,事件ID=100,其对应于具有偏移值(1548.03,335.527),缩放尺寸是1.7527990341186523的缩放,以及记录的持续时间是5.4333336167037487。在步骤“S15”中将框“A48”添加至框“A1”。
当用户缩放视频时,通过过程在步骤“S9”中创造框“A59”。在相同步骤中,使用当前回放时间通过过程创造框“A60”和框“A61”。另外,使用事件ID通过过程创造框“A62”和框“A63”。使用偏移值通过过程在步骤“S13”中创造框“A64”和框“A65”。在相同步骤中,使用记录的持续时间值通过过程创造框“A66”和框“A67”。使用缩放尺寸值通过过程创造框“A68”和框“A69”。所以,框“A59”例示用户事件在完整视频的23.942486532秒处已经发生,其中,事件ID=100,其对应于具有偏移值(1550.33,336.157),缩放尺寸是1.7550586462020874的缩放,以及记录的持续时间是5.4666669517755508。在步骤“S15”中将框“A59”添加至框“A1”。
当用户缩放视频时,通过过程在步骤“S9”中创造框“A70”。在相同步骤中,使用当前回放时间通过过程创造框“A71”和框“A72”。另外,使用事件ID通过过程创造框“A73”和框“A74”。使用偏移值通过过程在步骤“S13”中创造框“A75”和框“A76”。在相同步骤中,使用记录的持续时间值通过过程创造框“A77”和框“A78”。使用缩放尺寸值通过过程创造框“A79”和框“A80”。所以,框“A70”例示用户事件在完整视频的23.974900081000001秒处已经发生,其中,事件ID=100,其对应于具有偏移值(1550.41,336.268),缩放尺寸是1.7553437948226929的缩放,以及记录的持续时间是5.500000286847353。在步骤“S15”中将框“A70”添加至框“A1”。
当用户暂停视频时,通过过程在步骤“S9”中创造框“A81”。在相同步骤中,使用当前回放时间通过过程创造框“A82”和框“A83”。另外,使用事件ID通过过程创造框“A84”和框“A85”。使用记录的持续时间值通过过程创造框“A86”和框“A87”。所以,框“A81”例示用户事件在完整视频的25.072922040000002秒处已经发生,其中,事件ID=101,其对应于暂停并且记录的持续时间是6.5000003390014172。在步骤“S15”中将框“A81”添加至框“A1”。
当用户停止记录时,通过过程在步骤“S9”中创造框“A88”。在相同步骤中,使用当前回放时间通过过程创造框“A89”和框“A90”。另外,使用事件ID通过过程创造框“A91”和框“A92”。使用记录的持续时间值通过过程创造框“A93”和框“A94”。所以,框“A81”例示用户事件在完整视频的25.488877777777777秒处已经发生,其中,事件ID=9999,其对应于停止记录并且记录的持续时间是8.2000004276633263。在步骤“S15”中将框“A88”添加至框“A1”。
提供一种记录和制作设备,其用于:记录真实场景的全景视频或真实场景的全景图像(排除计算机生成的场景)以及通过选择给观看者在数字空间中控制摄像机摇摄、倾斜和缩放的感觉的全景视频或全景图像的子集(子区域),生成符合TV和计算机监视器以及移动装置的标准长宽比的规则视频或图像。通过包括用于在视频的具体时间戳处控制虚拟摄相机的摇摄、倾斜和缩放控制中的至少一个的元数据集,从视频的全景图像创造视频制作。存储的元数据集还由包括传播事件(暂停、播放、向前播放、反向播放)的开始时间、结束时间、持续时间和回放速度中的至少一个和摄像机控制事件(摇摄、倾斜和缩放改变)的视频传播控制数据组成。在一种情况下,元数据集作为嵌入在视频或图像数据中的数据被发送。在另一种情况下,元数据集作为与视频数据的发送分离的数据被发送,并且使用在视频数据中的时间戳数据,利用元数据中的时间戳信息,同步元数据和视频数据。
提供一种记录和制作设备,其用于:记录真实场景的全景视频或真实场景的全景图像(排除计算机生成的场景)以及通过交互式地选择给观看者在数字空间中控制摄像机摇摄、倾斜和缩放的感觉的全景视频或全景图像的子集(子区域),生成符合电视机和计算机监视器以及移动装置的标准长宽比的规则视频或图像。设备包括用户界面,该用户界面用于选择摄像机摇摄、倾斜和缩放以选择被制作的全景视频或全景图像的子区域。提供用户界面,以限定诸如暂停、向前播放、向后播放和播放速度的视频传播控制。被制作的视频不被创造为包括图像或视频数据的视频片。被产生的视频作为包括用于在视频的具体时间戳处控制虚拟相机的摇摄、倾斜和缩放控制中的至少一个的元数据被存储。所存储的元数据还由包括传播事件暂停、播放、向前播放、向后播放)的开始时间、结束时间、持续时间和回放速度(中的至少一个的视频传播控制数据和摄像机控制事件(摇摄、倾斜和缩放改变)组成。结合全景视频或全景图像利用所存储的元数据,以重新创造所制作的视频。全景视频数据是即时(live)流式传输的数据、从硬盘检索的记录的数据或在存储器中缓存的数据。
在一种情况下,在相同视频观看装置上创造和利用元数据。在另一种情况下,在第一装置上创造元数据,并且然后在不同的第二装置上利用该元数据。在一些情况下,从第一装置发送元数据,并且作为与视频数据的发送分离的数据被发送。在其它情况下,使用在视频数据中的时间戳数据,利用在元数据中的时间戳信息,在第二装置上将元数据和视频数据同步。在某些其它情况下,从第一装置发送的元数据被嵌入在发送至第二装置的视频数据中。
提供一种包括输入装置、输出图形装置、存储器装置和一个或更多个存储器的设备。输入装置被设置与一个或更多处理器通信。输出图形装置被设置与一个或更多处理器通信。存储器装置被设置与一个或更多处理器通信。存储器具有存储在其中的程序,该程序通过一个或更多个处理器实现并被设计,以使计算机:1)允许用户观看真实场景的视频;2)允许用户通过选择给观看者在数字空间(产生的视频)中控制摄像机摇摄、倾斜和缩放的感觉的全景视频或全景图像的子集(子区域),生成符合电视机和计算机监视器以及移动装置的标准长宽比的规则视频或图像;3)通过输入装置,使用一个或更多个处理器,同时地记录用户的输入以用于创造作为元数据的所制作的视频;以及4)允许不同的用户自动地观看所制作的视频(“重新产生的视频”)。通过包括用于在视频的具体时间戳处控制虚拟摄相机的摇摄、倾斜和缩放控制中的至少一个的元数据集,从源视频创造重新产生的视频。元数据集还由包括传播事件(暂停、播放、向前播放、向后播放)的开始时间、结束时间、持续时间和回放速度中的至少一个的视频传播控制数据和摄像机控制事件(摇摄、倾斜和缩放改变)组成。

Claims (7)

1.一种视频制作共享系统,所述视频制作共享系统包括:
第一计算机,所述第一计算机具有处理器、存储器和输入装置,所述存储器具有存储在其中的程序,所述程序由所述处理器执行以使所述处理器:
访问由多个视频摄像机捕捉的场景的全景视频,所述视频摄像机中的每一个用于从一不同的观看点捕捉所述全景视频的一部分;
利用由第一用户控制的所述第一计算机的所述输入装置操作所述全景视频的视角以生成个人视频,操作所述视角包括对所述全景视频的摇摄、倾斜和缩放和所述全景视频的时间查看方向变化和/或所述全景视频的回放速度的变化;
将对所述视角的操作记录为元数据,所述元数据包括控制数据,所述控制数据用于指示开始时间、结束时间、持续时间、回放速度以及包括摇摄、倾斜和缩放中的一个或多个的摄像机控制事件中的至少一个;
从所述第一计算机将所述元数据传输到第二计算机,以及
所述第二计算机与所述第一计算机通信并具有处理器、存储器以及输出设备,所述存储器具有存储在其中的程序,所述程序由所述处理器执行以使所述处理器:
接收所述元数据以及所述全景视频,
通过根据所述元数据操作所述全景视频,在所述第二计算机处重新产生所述个人视频以用于查看,以及
在所述第二计算机的所述输出设备上查看所述个人视频。
2.根据权利要求1所述的系统,其中,客户端应用程序提供所述程序。
3.根据权利要求1所述的系统,所述系统进一步包括:服务器,所述服务器具有被配置为存储来自所述全景视频的视频数据的存储器。
4.根据权利要求1所述的系统,所述系统进一步包括:基于因特网云的数据存储,所述基于因特网云的数据存储被配置存储所述元数据。
5.一种用于共享视频制作的方法,所述方法包括:
访问由多个视频摄像机捕捉的场景的全景视频,所述视频摄像机中的每一个用于从一不同的观看点捕捉所述全景视频的一部分;
利用由第一用户控制的第一计算机的输入装置操作所述全景视频的视角以生成个人视频,操作所述视角包括对所述全景视频的摇摄、倾斜和缩放以及所述全景视频的时间查看方向变化和/或所述全景视频的回放速度的变化;
将对所述视角的操作记录为元数据,所述元数据包括控制数据,所述控制数据用于指示开始时间、结束时间、持续时间、回放速度以及包括摇摄、倾斜和缩放中的一个或多个的摄像机控制事件中的至少一个;
从所述第一计算机将所述元数据传输到第二计算机,
接收所述元数据以及所述全景视频,
通过根据所述元数据操作所述全景视频,在所述第二计算机处重新产生所述个人视频以用于查看,以及
在所述第二计算机的输出设备上查看所述个人视频。
6.根据权利要求5所述的方法,其中,操作视角包括:随着时间的推移,创造包括所述多个视频流的视角,每个视角包括用于操作每个视频流以在所述多个视频流中的每个的图像空间内捕捉图像子空间的用户输入。
7.根据权利要求6的所述方法,其中,每个图像子空间包括在给定时间点处的相应视频流的完整图像空间。
CN201480061727.9A 2013-09-13 2014-09-12 视频制作共享设备及方法 Expired - Fee Related CN106576191B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361877879P 2013-09-13 2013-09-13
US61/877,879 2013-09-13
PCT/US2014/055518 WO2015038976A1 (en) 2013-09-13 2014-09-12 Video production sharing apparatus and method

Publications (2)

Publication Number Publication Date
CN106576191A CN106576191A (zh) 2017-04-19
CN106576191B true CN106576191B (zh) 2020-07-14

Family

ID=52666354

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480061727.9A Expired - Fee Related CN106576191B (zh) 2013-09-13 2014-09-12 视频制作共享设备及方法

Country Status (8)

Country Link
US (3) US10009596B2 (zh)
EP (1) EP3044965A4 (zh)
JP (1) JP6434034B2 (zh)
KR (1) KR101826704B1 (zh)
CN (1) CN106576191B (zh)
CA (1) CA2924504A1 (zh)
IL (1) IL244574B (zh)
WO (1) WO2015038976A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10009596B2 (en) 2013-09-13 2018-06-26 Intel Corporation Video production sharing apparatus and method
FR3012279B1 (fr) * 2013-10-23 2017-02-17 Vogo Procede de diffusion multipoints
US10600245B1 (en) * 2014-05-28 2020-03-24 Lucasfilm Entertainment Company Ltd. Navigating a virtual environment of a media content item
EP3059949A1 (en) * 2015-02-23 2016-08-24 Thomson Licensing Method and apparatus for generating lens-related metadata
JP6726931B2 (ja) * 2015-03-20 2020-07-22 キヤノン株式会社 画像処理装置およびその方法、並びに、画像処理システム
WO2017036953A1 (en) * 2015-09-02 2017-03-09 Thomson Licensing Method, apparatus and system for facilitating navigation in an extended scene
JP6124985B1 (ja) * 2015-12-24 2017-05-10 株式会社コロプラ 映像コンテンツ配信システム及びコンテンツ管理サーバ
JP6040328B1 (ja) * 2016-02-10 2016-12-07 株式会社コロプラ 映像コンテンツ配信システム及びコンテンツ管理サーバ
US10348907B1 (en) * 2016-05-12 2019-07-09 Antony P. Ng Collaborative data processing
KR102567002B1 (ko) * 2016-08-16 2023-08-14 삼성전자주식회사 영상 표시 장치 및 그 동작방법
CN109362242B (zh) * 2016-10-10 2021-05-14 华为技术有限公司 一种视频数据的处理方法及装置
JP6853013B2 (ja) * 2016-10-26 2021-03-31 グリー株式会社 情報処理システム、情報処理方法、および情報処理プログラム
CN108271068B (zh) * 2016-12-30 2020-04-03 华为技术有限公司 一种基于流媒体技术的视频数据的处理方法及装置
US20190289204A1 (en) * 2018-01-03 2019-09-19 Gopro, Inc. Systems and methods for tagging highlights within spherical videos
US10587855B1 (en) 2018-12-20 2020-03-10 Gopro, Inc. Systems and methods for providing punchouts of videos

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1754139A (zh) * 2002-12-30 2006-03-29 小利兰斯坦福大学理事会 用于数字视频内容的交互式网络共享的方法及装置
CN101079248A (zh) * 2006-05-22 2007-11-28 美国博通公司 视频处理方法、电路和系统
CN101729784A (zh) * 2008-10-27 2010-06-09 索尼株式会社 图像处理装置、图像处理方法和程序
CN102915669A (zh) * 2012-10-17 2013-02-06 中兴通讯股份有限公司 一种实景地图的制作方法和装置
EP2852153A1 (en) * 2012-05-16 2015-03-25 Vatech Co., Ltd Method and apparatus for providing panorama image data

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0946688A (ja) * 1995-07-26 1997-02-14 Fujitsu Ltd ビデオ情報提供/受信システム
JP2004104556A (ja) * 2002-09-11 2004-04-02 Nippon Telegr & Teleph Corp <Ntt> 映像再生方法,映像再生装置,映像再生プログラムおよび映像再生プログラムの記録媒体
US7683937B1 (en) * 2003-12-31 2010-03-23 Aol Inc. Presentation of a multimedia experience
US7292257B2 (en) * 2004-06-28 2007-11-06 Microsoft Corporation Interactive viewpoint video system and process
JP2006345071A (ja) * 2005-06-07 2006-12-21 Canon Inc 動画再生装置、動画再生方法、記録媒体及びコンピュータプログラム
US20070079321A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. Picture tagging
CA2647617A1 (en) * 2006-03-28 2007-11-08 Motionbox, Inc. System and method for enabling social browsing of networked time-based media
WO2008118183A1 (en) * 2007-03-28 2008-10-02 Motionbox, Inc. System and method for autogeneration of long term media data from networked time-based media
WO2007127905A2 (en) * 2006-04-27 2007-11-08 Fujifilm Graphic Systems U.S.A., Inc System and method for remote monitoring of print systems
US7893999B2 (en) 2006-05-22 2011-02-22 Broadcom Corporation Simultaneous video and sub-frame metadata capture system
US7853669B2 (en) * 2007-05-04 2010-12-14 Microsoft Corporation Mesh-managing data across a distributed set of devices
JP5288827B2 (ja) * 2008-02-22 2013-09-11 キヤノン株式会社 表示処理装置及びその制御方法並びに表示処理システム、プログラム
JP4669890B2 (ja) 2008-10-06 2011-04-13 三菱樹脂株式会社 熱成形体の製造方法
US20100149338A1 (en) 2008-12-16 2010-06-17 Mamigo Inc Method and apparatus for multi-user user-specific scene visualization
US8340654B2 (en) * 2009-05-26 2012-12-25 Lextech Labs Llc Apparatus and method for video display and control for portable device
US8910051B2 (en) 2009-07-31 2014-12-09 Citizenglobal, Inc. Systems and methods for content aggregation, editing and delivery
MTP4301B (en) 2010-03-25 2011-10-26 Securency Int Pty Ltd High refractive index coatings and their use in the protection of surface relief structures
CN103190156A (zh) * 2010-09-24 2013-07-03 株式会社Gnzo 视频比特流的传输系统
US8763068B2 (en) * 2010-12-09 2014-06-24 Microsoft Corporation Generation and provision of media metadata
US8836771B2 (en) * 2011-04-26 2014-09-16 Echostar Technologies L.L.C. Apparatus, systems and methods for shared viewing experience using head mounted displays
WO2013093176A1 (en) * 2011-12-23 2013-06-27 Nokia Corporation Aligning videos representing different viewpoints
WO2013126784A2 (en) 2012-02-23 2013-08-29 Huston Charles D System and method for creating an environment and for sharing a location based experience in an environment
US20130300821A1 (en) * 2012-05-10 2013-11-14 Qualcomm Incorporated Selectively combining a plurality of video feeds for a group communication session
US9204041B1 (en) * 2012-07-03 2015-12-01 Gopro, Inc. Rolling shutter synchronization
US9210477B2 (en) * 2012-11-29 2015-12-08 Fanvision Entertainment Llc Mobile device with location-based content
US9210470B2 (en) * 2013-03-08 2015-12-08 Verizon Patent And Licensing Inc. User censoring of content delivery service streaming media
US9635252B2 (en) * 2013-04-16 2017-04-25 Disney Enterprises, Inc. Live panoramic image capture and distribution
US10009596B2 (en) 2013-09-13 2018-06-26 Intel Corporation Video production sharing apparatus and method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1754139A (zh) * 2002-12-30 2006-03-29 小利兰斯坦福大学理事会 用于数字视频内容的交互式网络共享的方法及装置
CN101079248A (zh) * 2006-05-22 2007-11-28 美国博通公司 视频处理方法、电路和系统
CN101729784A (zh) * 2008-10-27 2010-06-09 索尼株式会社 图像处理装置、图像处理方法和程序
EP2852153A1 (en) * 2012-05-16 2015-03-25 Vatech Co., Ltd Method and apparatus for providing panorama image data
CN102915669A (zh) * 2012-10-17 2013-02-06 中兴通讯股份有限公司 一种实景地图的制作方法和装置

Also Published As

Publication number Publication date
EP3044965A4 (en) 2017-03-01
CN106576191A (zh) 2017-04-19
US10009596B2 (en) 2018-06-26
KR101826704B1 (ko) 2018-02-08
CA2924504A1 (en) 2015-03-19
US20210099690A1 (en) 2021-04-01
JP2016534674A (ja) 2016-11-04
KR20160100907A (ko) 2016-08-24
US20150082364A1 (en) 2015-03-19
WO2015038976A1 (en) 2015-03-19
US10812781B2 (en) 2020-10-20
JP6434034B2 (ja) 2018-12-05
IL244574B (en) 2021-04-29
EP3044965A1 (en) 2016-07-20
US20190037206A1 (en) 2019-01-31
IL244574A0 (en) 2016-04-21

Similar Documents

Publication Publication Date Title
CN106576191B (zh) 视频制作共享设备及方法
US11546566B2 (en) System and method for presenting and viewing a spherical video segment
KR101387072B1 (ko) 온라인 미디어 프리뷰 시스템 및 그 방법
US20100303440A1 (en) Method and apparatus for simultaneously playing a media program and an arbitrarily chosen seek preview frame
CN105829995A (zh) 根据观看者表情捕捉媒体内容
US8805866B2 (en) Augmenting metadata using user entered metadata
US9973746B2 (en) System and method for presenting and viewing a spherical video segment
US11570415B2 (en) Methods, systems, and media for generating a summarized video using frame rate modification
US20190199763A1 (en) Systems and methods for previewing content
KR20170012109A (ko) 동화상 재생 프로그램, 장치, 및 방법
US10375456B2 (en) Providing highlights of an event recording
US20220201342A1 (en) Methods and systems for providing a user with an image content
Mate et al. Automatic video remixing systems
KR101827967B1 (ko) 비디오 컨텐츠 제공서버 및 제공방법
US10911839B2 (en) Providing smart tags
JP6258897B2 (ja) コンテンツ取得装置、コンテンツ取得方法、メタデータ配信装置、メタデータ配信方法
KR20160105173A (ko) 소셜 네트워크 서비스에 기반한 영상 제작, 편집 및 공유를 위한 사용자 단말 및 서버의 동작 방법
TWM464947U (zh) 多對多行動影像轉播系統

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20180104

Address after: California, USA

Applicant after: INTEL Corp.

Address before: California, USA

Applicant before: Intel investment Limited by Share Ltd.

Effective date of registration: 20180104

Address after: California, USA

Applicant after: Intel investment Limited by Share Ltd.

Address before: Delaware

Applicant before: Walker

GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200714

Termination date: 20210912