CN108028886A - 媒体馈入同步 - Google Patents
媒体馈入同步 Download PDFInfo
- Publication number
- CN108028886A CN108028886A CN201580083253.2A CN201580083253A CN108028886A CN 108028886 A CN108028886 A CN 108028886A CN 201580083253 A CN201580083253 A CN 201580083253A CN 108028886 A CN108028886 A CN 108028886A
- Authority
- CN
- China
- Prior art keywords
- recording equipment
- received
- timestamp value
- media feed
- message
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 230000001360 synchronised effect Effects 0.000 title claims abstract description 21
- 238000000034 method Methods 0.000 claims abstract description 42
- 230000004044 response Effects 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 9
- 230000015654 memory Effects 0.000 description 22
- 230000006870 function Effects 0.000 description 12
- 230000005540 biological transmission Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 241001062009 Indigofera Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013479 data entry Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/27—Server based end-user applications
- H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
- H04N21/2743—Video hosting of uploaded data from client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/812—Monomedia components thereof involving advertisement data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/268—Signal distribution or switching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W56/00—Synchronisation arrangements
- H04W56/0005—Synchronisation arrangements synchronizing of arrival of multiple uplinks
Abstract
公开了一种方法和装置,用于:在记录设备处,记录与场景有关的媒体馈入;在记录设备处,接收一系列无线同步消息;记录关于每个所接收的消息的指示接收时间的时间戳值;以及存储时间戳值和媒体馈入。还公开了一种方法和装置,用于:从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值,其中,每个时间戳值指示在相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从第一记录设备接收的媒体馈入与从第二记录设备接收的媒体馈入同步。
Description
技术领域
本发明涉及媒体馈入的同步。
背景技术
由于许多人携带能够记录媒体内容的移动设备,因此,使用多个设备对相同时刻的媒体记录现今很普遍。可以在许多场合中使用与相同事件有关的若干视频和/或音频馈入,而具有挑战性的问题是不同记录设备之间的有效视频和/或音频同步。
发明内容
在第一方面,本说明书描述一种方法,其包括:在记录设备处,记录与场景有关的媒体馈入;在记录设备处,接收一系列无线同步消息;记录关于每个所接收的消息的指示接收时间的时间戳值;以及存储时间戳值和媒体馈入。
所述方法可以进一步包括:将时间戳值和媒体馈入上传到远程装置以用于与其它媒体馈入同步。
消息之间的间隔可以随机或伪随机地变化。
每个消息可以包含粗略同步值;以及所述方法可以进一步包括向远程装置发送与每个时间戳值有关的粗略同步值。
粗略同步值可以是随机或伪随机变量。
粗略同步值可通过包含在一个或多个所接收的消息中的线性反馈移位寄存器值而确定。
粗略同步值可以从包含在一个或多个所接收的消息中的计数器值中导出。
所述方法可以进一步包括:将每个时间戳值与媒体馈入的定时时刻相关联。
将每个时间戳值与媒体馈入的定时时刻相关联可以包括:将时间戳数据应用于媒体馈入,作为媒体文件内的元数据。
所述方法可以进一步包括:将时间戳数据存储在与媒体文件分开的文件中。
所述方法可以进一步包括:响应于接收到包含开始记录的指令的消息,开始记录。
所述方法可以进一步包括:存储包含在所接收的消息中的远程设备的标识符;以及从具有该标识符的该远程设备中扫描其它通告分组。
所述方法可以进一步包括:响应于接收到包含停止记录的指令的消息,停止记录。
所述方法可以进一步包括:计算所接收的消息的到达角;以及向远程装置输出所计算的到达角。
在第二方面,本说明描述一种方法,其包括:从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值,其中,每个时间戳值指示在相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从第一记录设备接收的媒体馈入与从第二记录设备接收的媒体馈入同步。
所述方法可以进一步包括:将从第一记录设备接收的一系列时间戳值与从第一记录设备接收的媒体馈入相关联;以及将从第二记录设备接收的一系列时间戳值与从第二记录设备接收的媒体馈入相关联。
所述方法可以进一步包括:从每个记录设备接收粗略同步值以使用所述粗略同步值来对相应的馈入进行粗略同步。
在第三方面,本说明书描述一种计算机程序,其包括指令,所述指令在由计算装置执行时,使得计算装置执行第一方面或第二方面的方法。
在第四方面,本说明书描述一种装置,其包括:至少一个处理器;至少一个存储器,其上存储有计算机可读指令,所述计算机可读指令在由至少一个处理器执行时,使所述装置至少:在记录设备处,记录与场景有关的媒体馈入;在记录设备处,接收一系列无线同步消息;记录关于每个所接收的消息的指示接收时间的时间戳值;以及存储时间戳值和媒体馈入。
在第五方面,本说明书描述一种装置,其包括:至少一个处理器;至少一个存储器,其上存储有计算机可读指令,所述计算机可读指令在由至少一个处理器执行时,使所述装置至少:从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值,其中,每个时间戳值指示在相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从第一记录设备接收的媒体馈入与从第二记录设备接收的媒体馈入同步。
在第六方面,本说明书描述一种可读介质,其上存储有计算机可读代码,所述计算机可读代码在由至少一个处理器执行时,使得执行:在记录设备处,记录与场景有关的媒体馈入;在记录设备处,接收一系列无线同步消息;记录关于每个所接收的消息的指示接收时间的时间戳值;以及存储时间戳值和媒体馈入。
在第七方面,本说明书描述了一种计算机可读介质,其上存储有计算机可读代码,所述计算机可读代码在由至少一个处理器执行时,使得执行:从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值,其中,每个时间戳值指示在相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从第一记录设备接收的媒体馈入与从所述第二记录设备接收的媒体馈入同步。
在第八方面,本说明书描述一种装置,其包括:用于在记录设备处记录与场景有关的媒体馈入的装置;用于在记录设备处接收一系列无线同步消息的装置;用于记录关于每个所接收的消息的指示接收时间的时间戳值的装置;以及用于存储时间戳值和媒体馈入的装置。
在第九方面,本说明书描述一种装置,其包括:用于从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值的装置,其中,每个时间戳值指示在相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及用于将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从第一记录设备接收的媒体馈入与从第二记录设备接收的媒体馈入同步的装置。
在第十方面,本说明书描述一种系统,其包括多个根据第四、第六或第八方面的装置和根据第五、第七和第九方面的装置。
附图说明
为了更全面地理解在本文中描述的方法、装置和计算机可读指令,现在结合附图参考以下描述,其中:
图1是根据各种实施例的记录环境的示意图;
图2示出根据各种实施例的一系列通告事件;
图3示出根据各种实施例的分组结构;
图4示出一系列通告分组和视频馈入的标记;
图5示出包含用于记录设备的指令的通告分组;
图6是示出根据各种实施例的由记录设备执行的步骤的流程图;
图7是示出根据各种实施例的由控制设备执行的步骤的流程图;
图8是示出根据可替代实施例的由记录设备执行的步骤的流程图;
图9是示出控制设备的示意性框图;
图10是示出记录设备的示意性框图;
图11示出存储装置。
具体实施方式
本说明书中描述的实施例提供用于对由多个记录设备记录的视频和/或音频馈入进行无线同步的机制。这可以无需记录设备之间的有线连接,而利用连续接收的多个无线同步消息(诸如由控制设备发送的蓝牙低功耗(BLE)通告消息)的接收时间来实现。在下面的描述中,术语“分组”和“消息”可以互换使用。
图1示出了包括控制设备10和多个记录设备20的系统100。控制设备10被配置为发送一系列BLE通告分组以使能对记录设备20的控制。然而应当记住,记录设备20中的一个或多个可以代替控制设备10。换而言之,记录设备20中的一个或多个可以配备有BLE模块,并且除了记录事件之外还可以发送通告消息。在图1中所示的示例中,记录可以基于无线传输而被同步。在该示例中,存在一个进行发送的设备和三个进行接收的设备,但是,例如,所有设备都可以发送它们自己的信号并且从其它设备接收信号。
在图1中所示的示例中,三个相机各自记录极限运动事件25的视频。视频之间的时间同步通过在与BLE消息的接收对应的音频/视频馈入中不时地标记所记录的视频和/或音频流来设置。控制设备10具有BLE模块,其通过BLE协议通告某些信息。控制设备可以是智能电话或其它计算设备。包含在连续BLE消息中的信息可以根据记录阶段而变化,例如,初始BLE消息可以包含用于记录设备20开始记录的指令。后续BLE消息可以包含停止记录的指令。
每个记录设备20包括BLE模块,其可被可配置为扫描BLE通告消息。例如,可以搜索与媒体记录应用对应的某个UUID和与控制设备10对应的某个相机ID。
每个记录设备20被配置为记录时刻,例如,已接收到具有某个UUID的通告的时刻。可替代地,每个记录设备20被配置为记录接收到任何通告消息的时刻。可以监控UUID,以使得只有那些来自正确的控制设备10的通告才在同步过程中使用。可替代地,包含在消息内的UUID信息可仅用于过滤用于控制媒体记录的控制分组,以使得只有从特定控制设备10接收的包含开始或停止记录的指令的消息才使得记录设备20开始、暂停或停止记录。
控制设备10在通告事件中发送BLE通告消息,如图2中所示。每个通告事件由按照所使用的通告信道指标发送的一个或多个BLE通告消息组成。在已经按照每个所使用的通告信道指标发送一个BLE通告消息之后,通告事件可被关闭,或者控制设备10可以更早关闭通告事件以适应其它功能。
通告事件可以是如在蓝牙规范v4.2中定义的以下类型中的一个:
-可连接无定向事件;
-可连接定向事件;
-不可连接无定向事件;
-可扫描无定向事件。
对于在低占空比模式中使用的所有无定向通告事件或可连接定向通告事件,开始两个连续通告事件之间的时间(T_advEvent)对于每个通告事件可如下地计算:
T_advEvent=advInterval+advDelay
advInterval可以是20ms到10.24s的范围内的0.625ms的整数倍。如果通告事件类型是可扫描无定向事件类型或不可连接无定向事件类型,则advInterval可以是至少100ms。如果通告事件类型是在低占空比模式中使用的可连接无定向事件类型或可连接定向事件类型,则advInterval可以是20ms或更长。
advDelay是由数据链路层对于每个通告事件而生成的0ms到10ms的范围内的伪随机值。advDelay也可被称为通告抖动。
通告数据和扫描响应数据的格式如图3中所示。数据包括有效部分和非有效部分。有效部分包含AD结构的序列。每个AD结构可以具有一个八位字节的长度字段(其包含长度值)和“长度”个八位字节的数据字段。数据字段的第一个八位字节包含AD类型字段。数据字段中剩余“长度-1”个八位字节的内容取决于AD类型字段的值,并且被称为AD数据。非有效部分将通告和扫描响应数据扩展到31个八位字节,并且可以包含全零八位字节。只有通告或扫描响应数据的有效部分才需要被发送。通告和扫描响应数据在通告事件中发送。通告数据被放置在ADV_IND、ADV_NONCONN_IND和ADV_SCAN_IND分组的AdvData字段中。扫描响应数据在SCAN_RSP分组的ScanRspData字段中发送。这符合蓝牙规范v4.0。
在图3中示出的数据结构只是所发送的分组的一部分,其包括前导码、访问地址、PDU和CRC字段。PDU本身包括报头和有效载荷。PDU的有效载荷包括AdvData。AdvData字段包括BLE通告消息200的通告数据结构。
在图3中示出了可用于同步的BLE通告消息200的特定通告数据结构的示例。BLE通告消息200包含通告数据类型字段201“0x16”,其可以是用于标识随后的特定16位UUID的服务数据“服务数据-16位UUID”。数据结构200包含UUID字段202。示例的UUID可以是“0xFFFF”。相机ID字段203包含发送设备10的标识符,而rand字段204可以是周期性变化的随机或伪随机数,因此随后可用于发现在相同时间在相同区域中记录的记录。如在下面将更详细描述的,随机或伪随机值的存在允许多个视频或音频馈入的对齐和同步。通告消息还例如可以包括发射机状态(例如,“空闲”或“记录”)或者粗略时间戳。粗略时间戳可以是在发送分组时,由控制设备10包括在分组结构200中的发送时间戳。
数据结构200可以包括控制数据字段205。控制数据字段205例如可以是1个八位字节长度。十六进制条目“0x00”可以表示“开始记录”,而十六进制条目“0x01”可以表示“停止/暂停记录”指令。因此,由控制设备10发送的早期的消息可具有控制数据字段205值“0x00”以开始记录。随后的消息可以包含控制数据字段205值“0x01”以停止记录。
通告消息还可以包括可用于例如使用到达角(AoA)和离开角(AoD)方法来估计记录设备20相对于控制设备10的相对定向的数据。可以使用AoA和/或AoD来估计记录设备20的相对位置,并且例如还可以在音频/视频编辑阶段中使用AoA和/或AoD来除了时间同步之外还在空间中定位媒体。
在图3中示出的BLE通告消息结构有助于处理所接收的数据分组,例如在之后处理数据时。可以更容易地搜索到粗略同步时间,然后可以用通告分组的所记录的时间戳来执行微调。每个所接收的分组中的rand字段204的内容可用于执行由各个记录设备20记录的媒体馈入的粗略定时同步。在从每个记录中发现相同的rand字段值之后,可以使相应的馈入粗略地对齐。
然后可通过比较被应用于如图3中所示的在每个记录设备处接收的通告消息的接收(RX)时间戳来执行微调。被应用于一系列通告消息的发送抖动允许在各个记录设备处记录的媒体馈入的精确对齐。如此,馈入可通过使各个记录设备20的RX时间戳对齐而被同步。
记录设备20接收来自控制设备10的BLE通告分组,并对通告分组的接收时间标记时间戳。在一些实施例中,时间戳被作为标签应用于正在由记录设备20记录的视频和/或音频馈入文件。在其它实施例中,时间戳被单独存储。
图4A-D示出了通告消息的时间线。在这些附图的每一个中,时间都沿x轴前进。
图4A表示由控制设备10发送的一系列七个BLE通告消息。BLE通告消息由间隔隔开。第一消息与第二消息之间的BLE通告间隔可以是ams。第二消息与第三消息之间的间隔可以是a-1ms。第三消息与第四消息之间的间隔可以是a+2ms等等。间隔的变化是由于抖动而引起的,该抖动与由控制设备10创建并且在图2中示出的随机或伪随机advDelay值的引入相对应。
引入间隔的抖动可以包含在分组本身中的rand字段204中。连续的BLE通告消息之间的间隔的变化允许音频/视频馈入的同步。如果BLE通告消息之间的间隔是恒定的,则连续的BLE通告消息之间的间隔将不可区分,并且由于媒体文件对齐的许多可能的排列是可能的,所以视频同步将是不可能的。
图4B、4C和4D示出了由在图1中示出的记录设备20a、20b、20c中的每一个用在时间上与BLE通告消息对应的标签进行标记的相应的视频馈入300a、300b和300c。与所接收的BLE消息的RX时间戳对应的时间值的应用可以由相应的记录设备20a、20b、20c执行。所标记的馈入然后可被发送到诸如视频编辑计算机或服务器的远程装置以进行同步。
可替代地,所记录的媒体馈入可以和与被存储为单独文件的所接收的BLE通告消息有关的RX时间戳一起被输出到远程服务器,以使得远程执行馈入的标记。远离记录设备20标记的馈入然后可以在诸如视频编辑计算机的远程装置处进行同步。
记录设备20可通过UUID字段202来识别所接收的消息是从控制设备10发送的BLE通告消息。该内容可用于记录设备20搜索BLE通告消息,以便对视频馈入标记戳。记录设备20例如可以仅记录所有接收的分组的时间戳和BLE标识符。
每个记录设备20可以将所记录的视频馈入和时间戳数据存储在本地,例如存储在存储卡上。在用户已经从事件记录视频之后,可以将视频馈入和时间戳数据上传到例如远程服务器30。可替代地,可以将视频馈入和时间戳数据存储在网络附加存储(NAS)设备处。图1中示出的记录设备20包括无线收发机和天线,以允许媒体馈入无线地上传到远程服务器30。远程服务器30可被编辑装置40访问,编辑装置40可以是被配置为执行音频和/或视频馈入的同步和编辑的单个计算机或编辑套件(suite)。
编辑装置40可以是包括处理器41、存储设备42(具有非易失性存储器43和易失性存储器44)和用户输入输出45的计算机。非易失性存储器43可以具有以操作系统和软件的形式存储在其上的代码43A。用户/输入45包括诸如监控器、扬声器、键盘、鼠标等的输入和输出单元。输入和输出功能可以以触摸屏的形式而组合。
如图5中所示,编辑装置40可将时间戳应用于音频/视频馈入。可替代地,时间戳可由相应的记录设备20应用于视频馈入。
在一些实施例中,同步过程可以如下。视频编辑软件(其存储在编辑装置40的非易失性存储器43中)从第一记录设备20a获取视频,该视频与在图4B中记录的视频馈入相对应。BLE通告在视频时间线中进行标记的时间位置被记录。可以首先处理记录标签的开始。在第二视频中搜索相同的位置,然后对这两个视频馈入进行同步。同样地,第三视频馈入与前两个馈入进行同步,依此类推。在通过第一视频记录这些多个BLE通告标签位置并且在下一视频中搜索对应的标签位置之后,视频分别被同步/对齐。
表1示出了在第一记录设备20a处收集的信息。第一记录设备20a可以记录视频。接收一系列九个BLE通告消息。第一消息在与视频时间线中的00:00:134对应的时间处接收。该消息从具有MAC地址87:23:11:09:23:14的设备10接收。第一消息包含数据A22。后续消息从具有MAC地址87:23:11:09:23:14的设备10接收。还记录了与所记录的媒体馈入中的时刻对应的定时值。
表1
时间 | MAC地址 | 数据 |
00:00:134 | 87:23:11:09:23:14 | A22 |
00:01:023 | 87:23:11:09:23:14 | A23 |
00:01:345 | 87:23:11:09:23:14 | A23 |
00:02:576 | 87:23:11:09:23:14 | A23 |
00:03:753 | 87:23:11:09:23:14 | A24 |
00:03:915 | 87:23:11:09:23:14 | A24 |
00:04:097 | 87:23:11:09:23:14 | A24 |
00:04:349 | 87:23:11:09:23:14 | A25 |
00:04:436 | 87:23:11:09:23:14 | A25 |
表2
类似地,消息还在第二记录设备20b处接收。如表2中所示,同样记录定时信息、发送设备10的MAC地址和附加数据。
同步应用通过从每个记录设备20获取的粗略同步数据来识别可被同步的所接收的消息的模式。在表1和表2中以粗体突显的粗略同步数据条目被标识为与相应的记录设备20处可被同步的BLE消息的接收有关。然后可以执行音频/视频馈入的精确同步。
表3
时间1 | 时间2 | 时差 |
00:00:134 | 00:05:235 | 00:05:101 |
00:01:023 | 00:06:124 | 00:05:101 |
00:01:345 | 00:06:446 | 00:05:101 |
00:02:576 | 00:07:677 | 00:05:101 |
00:08:359 | 分组丢失 | |
00:03:753 | 00:08:854 | 00:05:101 |
比较在所记录的馈入的相应媒体时间线中的与一系列BLE通告消息的接收对应的定时值。如表3中所示,第一媒体馈入和第二媒体馈入的接收时间之间的差对于一系列BLE通告消息是恒定的。这表明这两个媒体馈入被同步。即使第一设备20a未能接收到第五BLE通告消息,同步仍然可以完成。
在可替代实施例中,BLE通告消息比较可以首先通过创建时间线来执行,在该时间线中,获取记录并且基于该时间线来选择视频以产生一个编辑视频。服务器30可包含多个视频,并且编辑装置40的用户可以通过在某个时间的某个区域来选择视频,例如,“昨天在18:00-20:00在坦佩雷市中心处举办的音乐会的视频”。
在可替代实施例中,BLE通告消息还可以在记录之前由记录设备接收和记录。在这种情况下,与BLE通告消息对应的时间戳被记录并且在记录已被停止之后被与视频或音频文件的时间线相比较。
在可替代实施例中,BLE通告消息还可以在记录之后由记录设备接收和记录。在这种情况下,与BLE通告消息对应的时间戳可以在已接收到最终的BLE通告消息之后被应用于视频或音频文件。最后接收到的BLE通告消息可以包含表明BLE通告消息确实是最终消息的指示。记录设备20或者远程设备然后可将标签应用于视频或音频文件的时间线。
如在上面所解释的,BLE发射机可位于远程控制设备10中或者位于诸如相机的记录设备20中。可替代地,BLE发射机可以是不参与记录过程,但其BLE通告消息可被用于同步的BLE信标标签。
在记录期间接收的数据可被包括到媒体记录中,例如作为视频文件或音频文件内的元数据。可替代地,所接收的定时数据可以包含在单独的文件中。
图6是示出由每个记录事件25的记录设备20执行的步骤的操作流程图。记录设备20包括收发机,因此可以接收通告消息。在图1示出的每个记录设备20彼此独立地执行以下步骤。
在步骤6.1,记录设备20接收开始记录事件25的用户输入。这可通过用户按下记录设备20上的物理或图形记录按钮来引发。在步骤6.2,记录设备记录事件25。记录可以是视频记录、音频记录或视频和音频记录。在步骤6.3,记录设备20接收BLE通告消息。记录设备20可以在步骤6.4将时间戳应用于所接收的消息并且存储时间戳值。附加地,在该步骤可以存储粗略同步数据。重复步骤6.2、6.3和6.4,直到记录设备20检测到应当在步骤6.5停止记录。这可响应于停止记录的用户输入。这可通过用户按下记录设备20上的物理或图形停止按钮来引发。记录设备20在步骤6.6停止记录。在步骤6.7,所标记的视频/音频文件被存储在例如记录设备20的存储卡上。可选地,可以在步骤6.8将所存储的视频/音频文件和BLE通告数据上传到服务器30。
在图6中示出的上述示例中,标签响应于从诸如控制设备10的远程源接收的BLE通告消息的接收而应用。然而,记录和停止指令由记录设备20的用户来输入。
在其它实施例中,记录和停止指令包含在BLE通告消息本身内。图7是示出由这样的示例中的控制设备10执行的步骤的流程图。图7是示出由记录设备20中的一个采用的对应步骤的流程图。
参考图7,在步骤7.1,可以开启控制设备10并且选择多相机模式。在步骤7.2,将图2中所示类型的BLE通告消息发送到记录设备20。在步骤7.3,确定控制设备10的物理或图形记录按钮是否被按下。在步骤7.4,响应于在控制设备10处接收到的记录输入,将“记录”指令包括在一个或多个BLE通告消息中,这些BLE通告消息用于指示接收BLE通告消息的记录设备开始记录。在步骤7.5,停止按钮被按下。可替代地,第二次按下记录按钮,这指示停止记录的指令。然后在步骤7.6,将“停止”指令包括在一个或多个后续BLE通告消息中。
参考图8,在步骤8.1,记录设备20可通过用户输入而被开启。在步骤8.2,记录设备20扫描BLE通告消息。在步骤8.3,记录设备20确定是否已接收到BLE通告消息。记录设备20还可以测量所接收的BLE通告消息的接收信号强度指示(RSSI)值。记录设备20可以确定并记录每个所接收的消息的时间戳。如果RSSI值高于最小阈值,则过程移到步骤8.4。在步骤8.4,包含在所接收的BLE通告消息内的信息被存储在记录设备20处,诸如控制设备10的相机ID 203。在步骤8.5,记录设备20扫描由控制设备10发送的包含UUID的通告消息。后续BLE通告消息在记录设备20处接收。在步骤8.6,如果从控制设备10接收到包含记录指令的BLE通告消息,则记录设备在步骤8.7开始记录事件25。记录可以是视频和/或音频记录。其它BLE通告消息在步骤8.8被从控制设备10发送,并且由记录设备20接收并标记时间戳。还可以存储粗略同步数据。如果在步骤8.9确定BLE通告消息包含“停止”指令,则记录在步骤8.10被停止。一旦接收到停止指令,则过程从步骤8.10移到步骤8.11,在步骤8.11中,馈入和时间戳数据被存储在例如存储卡上。馈入和时间戳数据可以随后在步骤8.12被上传到服务器30。
在本发明的一个实施例中,使用基于线性反馈移位寄存器(LFSR)的伪随机通告。控制设备10在通告分组内报告其LSFR状态值,这使得记录设备20(其具有类似的LFSR)可以计算下一通告分组何时将从相同的控制设备10到来。LFSR值(或者所接收的通告的定时)可被存储并被比较以对视频进行同步。用于通告抖动生成的LSFR值可被用于估计先前和随后的通告时刻。
抖动(advDelay)值可以是伪随机而不是真随机的,因此可以使用LSFR而生成。如果在至少一个通告中接收到该值,则除了通告间隔(图2中的advInterval)之外,还可以计算所有先前和随后的通告传输时间。对于BLE中可存在显著漂移的更长时段,这例如可以是每秒0.5ms(其相对很高),因此这可主要用于粗略同步。
此外,LSFR值例如可用于估计未被接收的分组的分组接收时间,或者用于估计记录时间以外的分组接收时间。在某些情况下,这可用来代替通告抖动,因为抖动是由LSFR定义的。
在另一个实施例中,计数器被添加到通告分组有效载荷中。计数器值针对每个通告事件而增加1。计数器值可由记录设备20存储并且用于对视频进行同步/对齐。分组接收时间被记录并且被与媒体馈入时间线相比较,而计数器值还被存储在通告数据文件中。
在该实施例中,计数器值取代rand字段204。计数器由无线收发机针对每个分组而增加,而rand 204由不了解或不控制分组的实际传输的上层SW层来更新,因此其更新更不频繁,例如,30s一次。
在所标记的媒体文件已由每个记录设备20上传到服务器30之后,视频编辑计算机40然后可通过将标记的通告与多个记录相关联来使来自相应记录设备20的馈入对齐,以对来自多个记录设备的记录进行同步。此外,可以使用地理定位和粗略定时信息。地理定位可以基于由记录设备20例如使用GPS记录的坐标。定位还可以基于通告设备MAC地址或相机ID203。
BLE通告消息可由控制设备10和记录设备20用来确定到达角(AoA)或离开角(A0D)信息。每个记录设备20可以配备有天线阵列和提供此功能的代码。
由控制设备10发送的BLE通告消息也可以用作AoA分组,而记录设备20在接收分组期间执行天线切换。记录设备20在接收这些分组的期间,扫描BLE通告消息并且执行幅度和相位采样。记录设备20然后可使用幅度和相位样本连同其自己的天线阵列信息来估计来自控制设备10的分组的AoA。该信息可以与时间戳信息和音频/视频馈入一起被存储,并且随后被上传。
在使用AoD的实施例中,控制设备10包括天线的阵列。控制设备10用作发送也用作AoD分组的BLE通告消息的位置信标设备。控制设备10在传输分组期间执行天线切换。记录设备20用作跟踪设备并且在接收这些分组的期间,扫描AoD分组并且执行幅度和相位采样。记录设备20然后可使用幅度和相位样本连同天线阵列参数信息来估计来自控制设备10的分组的AoD。
图9是控制设备10的示意性框图。控制设备10包括处理器100、存储设备101(包括易失性存储器102和非易失性存储器103)和天线104。在其中控制设备10被配置为执行AOD计算的实施例中,控制设备包括天线的阵列。控制设备10还包括收发机105。非易失性存储器103其上存储有计算机代码103A和蓝牙模块103B,以使控制设备10能够执行其功能。编程指令103A与本发明的实施例中的控制设备10的具体功能有关。编程指令103A允许根据例如在http://www.in-location-alliance.com中描述的高精度室内定位(HAIP)方案来处理所发送的分组。蓝牙模块103B包含计算机可读指令以使控制设备10根据BLE标准来发送分组信号/定位分组。处理器控制BLE模块103B以发送一系列BLE通告消息。如上所述,控制设备10可以是支持无线通信的智能手机或其它类型的计算设备。因此,控制设备10可以包括用户输入/输出107。用户输入/输出107可以是智能手机触摸屏,以使得用户能够控制上述控制设备10的功能。
图10是记录设备20中的一个的示意性框图。记录设备20包括处理器200、存储设备201、相机模块202、麦克风203、收发机205和天线的阵列206。存储设备201可以包括其上存储有计算机可读代码207A和蓝牙模块207B的非易失性存储器207(诸如ROM)以及易失性存储器208(诸如RAM)。编程指令207A与本发明的实施例中的记录设备20的具体功能有关。编程指令207A允许根据高精度室内定位(HAIP)方案来处理所接收的分组。记录设备20还包括用户输入/输出209。用户输入/输出209可以包括一个或多个物理按钮和屏幕。可替代地,输入/输出209可以是触摸屏。记录设备可以包括存储卡(未示出)。记录设备20包括时钟210。时钟210用于对所接收的分组标记时间戳。记录设备20包括执行天线切换的RF开关211。记录设备20还包括诸如电池的电源212或者与主供电的连接。
相机模块202包括现有技术中已知的记录静态和动态图像所需的硬件和软件组件。例如,相机模块202包括透镜、用于图像传感的CMOS传感器或CCD图像传感器等。
视频和音频处理器可以是单独的处理器,可以组合在单个多媒体处理器中,或者如图10中所示,相机102和麦克风103的处理功能可由主处理器100执行。
计算机可读指令可被预先编程到装置10、20、40中。可替代地,计算机可读指令可经由电磁载波信号到达装置10、20、40,或者可从诸如计算机程序产品、存储设备或诸如CD-ROM或DVD的记录介质的物理实体1200(参见图11)复制。计算机可读指令可以提供使得设备/装置10、20、40能够执行上述功能的逻辑和例程。
虽然已经使用BLE消息描述实施例,但是可以使用可替代的低功率无线电技术,诸如IEEE 802.15.4或802.11。
术语“存储器”在本说明书中使用时,旨在主要涉及包括非易失性存储器和易失性存储器两者的存储器,除非上下文另行说明,但是该术语也可以仅涵盖一个或多个易失性存储器、仅涵盖一个或多个非易失性存储器或者涵盖一个或多个易失性存储器和一个或多个非易失性存储器。易失性存储器的示例包括RAM、DRAM、SDRAM等。非易失性存储器的示例包括ROM、PROM、EEPROM、闪存存储器、光学存储设备、磁存储设备等。
本公开的实施例可以采用软件、硬件、应用逻辑或者软件、硬件和应用逻辑的组合来实现。软件、应用逻辑和/或硬件可驻留在存储器或任何计算机介质上。在示例性实施例中,应用逻辑、软件或指令集被维持在各种常规计算机可读介质中的任何一个上。在本文档的上下文中,“计算机可读介质”可以是能包含、存储、传送、传播或传输由诸如计算机的指令执行系统、装置或设备使用或者与诸如计算机的指令执行系统、装置或设备结合使用的指令的任何介质或装置。
计算机可读介质可以包括计算机可读存储介质,其可以是能包含或存储如先前定义的由诸如计算机的指令执行系统、装置或设备使用或者与诸如计算机的指令执行系统、装置或设备结合使用的指令的任何有形介质或装置。
根据本公开的前述方面的各个实施例,根据任一上述方面的计算机程序可以在包括承载在其中具体化的可与处理器一起使用以实现上述功能的计算机程序代码的有形计算机可读介质的计算机程序产品中实现。
提到“计算机可读存储介质”、“计算机程序产品”、“有形具体化的计算机程序”等或者“处理器”、“处理电路”等,应当被理解为不仅包括具有诸如单个/多个处理器架构和串行/并行架构的不同架构的计算机,而且还包括诸如现场可编程门阵列FPGA、专用集成电路ASIC、信号处理设备和其它设备的专用电路。提到计算机程序、指令、代码等,应当被理解为包括用于可编程处理器的软件,或者可包括用于处理器的指令的诸如硬件设备的可编程内容的固件,或者用于固定功能器件、门阵列或可编程逻辑器件等的配置设置。
作为示例而非限制,这种“计算机可读存储介质”可以表示非暂时性计算机可读存储介质,其可以包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储设备、磁盘存储设备、或其它磁存储设备、闪存存储器、或者可用于以指令或数据结构的形式存储所需的程序代码并且可由计算机访问的任何其它介质。然而应当理解,“计算机可读存储介质”和数据存储介质不包括连接、载波、信号或其它瞬态介质,而是涉及非瞬态的有形存储介质。在本文中使用的磁盘和光盘包括压缩光盘(CD)、激光光盘、光学光盘、数字化多功能光盘(DVD)、软盘和蓝光光盘,其中,磁盘通常磁性重现数据,而光盘通过激光光学重现数据。上述的组合也应当被包括在“计算机可读介质”的范围内。
指令可以由一个或多个处理器执行,诸如一个或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其它等同的集成或分立逻辑电路。因此,在本文中使用的术语“处理器”可以指任一上述结构或者适合于实现本文中所描述的技术的任何其它结构。此外,在某些方面,在本文中描述的功能可以在专用硬件和/或软件模块内提供。此外,这些技术可以在一个或多个电路或逻辑元件中全面实现。
如果需要,在本文中讨论的不同步骤可以采用不同的顺序执行和/或彼此同时执行。此外,如果需要,上述步骤中的一个或多个可以是可选的或者可被组合。
尽管在独立权利要求中阐述了本公开的各个方面,但是本公开的其它方面包括来自所描述的实施例和/或从属权利要求的特征与独立权利要求的特征的其它组合,而不仅仅是在权利要求中明确列出的组合。
Claims (40)
1.一种方法,包括:
在记录设备处,记录与场景有关的媒体馈入;
在所述记录设备处,接收一系列无线同步消息;
记录关于每个所接收的消息的指示接收时间的时间戳值;以及
存储所述时间戳值和所述媒体馈入。
2.根据权利要求1所述的方法,还包括:
将所述时间戳值和所述媒体馈入上传到远程装置以用于与其它媒体馈入同步。
3.根据任一前述权利要求所述的方法,其中,消息之间的间隔随机或伪随机地变化。
4.根据任一前述权利要求所述的方法,其中,每个消息包含粗略同步值;以及
所述方法还包括:向所述远程装置发送与每个时间戳值有关的所述粗略同步值。
5.根据权利要求4所述的方法,其中,所述粗略同步值是随机或伪随机变量。
6.根据权利要求4所述的方法,其中,所述粗略同步值通过包含在一个或多个所接收的消息中的线性反馈移位寄存器值而确定。
7.根据权利要求4所述的方法,其中,所述粗略同步值从包含在一个或多个所接收的消息中的计数器值中导出。
8.根据任一前述权利要求所述的方法,还包括:
将每个时间戳值与所述媒体馈入的定时时刻相关联。
9.根据权利要求8所述的方法,其中,将每个时间戳值与所述媒体馈入的定时时刻相关联包括:将时间戳数据应用于所述媒体馈入,作为媒体文件内的元数据。
10.根据权利要求1至8中任一项所述的方法,还包括:
将时间戳数据存储在与所述媒体文件分开的文件中。
11.根据任一前述权利要求所述的方法,还包括:
响应于接收到包含开始记录的指令的消息,开始记录。
12.根据权利要求11所述的方法,还包括:
存储包含在所接收的消息中的远程设备的标识符;以及
从具有所述标识符的所述远程设备中扫描其它通告分组。
13.根据任一前述权利要求所述的方法,还包括:
响应于接收到包含停止记录的指令的消息,停止记录。
14.根据任一前述权利要求所述的方法,还包括:
计算所接收的消息的到达角;以及
向远程装置输出所计算的到达角。
15.一种方法,包括:
从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值,其中,每个时间戳值指示在所述相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及
将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从所述第一记录设备接收的媒体馈入与从所述第二记录设备接收的媒体馈入同步。
16.根据权利要求15所述的方法,还包括:
将从所述第一记录设备接收的一系列时间戳值与从所述第一记录设备接收的媒体馈入相关联;以及
将从所述第二记录设备接收的一系列时间戳值与从所述第二记录设备接收的媒体馈入相关联。
17.根据权利要求15或16所述的方法,还包括:
从每个记录设备接收粗略同步值以使用所述粗略同步值来对相应的馈入进行粗略同步。
18.一种计算机程序,包括指令,所述指令在由计算装置执行时,使得所述计算装置执行任一前述权利要求所述的方法。
19.一种装置,包括:
至少一个处理器;
至少一个存储器,其上存储有计算机可读指令,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
在记录设备处,记录与场景有关的媒体馈入;
在所述记录设备处,接收一系列无线同步消息;
记录关于每个所接收的消息的指示接收时间的时间戳值;以及
存储所述时间戳值和所述媒体馈入。
20.根据权利要求19所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
将所述时间戳值和所述媒体馈入上传到远程装置以用于与其它媒体馈入同步。
21.根据权利要求19或20所述的装置,其中,消息之间的间隔随机或伪随机地变化。
22.根据权利要求19至21中任一项所述的装置,其中,每个消息包含粗略同步值;以及
所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
向所述远程装置发送与每个时间戳值有关的所述粗略同步值。
23.根据权利要求22所述的装置,其中,所述粗略同步值是随机或伪随机变量。
24.根据权利要求22所述的装置,其中,所述粗略同步值通过包含在一个或多个所接收的消息中的线性反馈移位寄存器值而确定。
25.根据权利要求22所述的装置,其中,所述粗略同步值从包含在一个或多个所接收的消息中的计数器值中导出。
26.根据权利要求19至25中任一项所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
将每个时间戳值与所述媒体馈入的定时时刻相关联。
27.根据权利要求26所述的装置,其中,将每个时间戳值与所述媒体馈入的定时时刻相关联包括:将时间戳数据应用于所述媒体馈入,作为媒体文件内的元数据。
28.根据权利要求19至26中任一项所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
将时间戳数据存储在与所述媒体文件分开的文件中。
29.根据权利要求19至28中任一项所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
响应于接收到包含开始记录的指令的消息,开始记录。
30.根据权利要求29所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
存储包含在所接收的消息中的远程设备的标识符;以及
从具有所述标识符的所述远程设备中扫描其它通告分组。
31.根据权利要求19至30中任一项所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
响应于接收到包含停止记录的指令的消息,停止记录。
32.根据权利要求19至31中任一项所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
计算所接收的消息的到达角;以及
向远程装置输出所计算的到达角。
33.一种装置,包括:
至少一个处理器;
至少一个存储器,其上存储有计算机可读指令,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值,其中,每个时间戳值指示在所述相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及
将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从所述第一记录设备接收的媒体馈入与从所述第二记录设备接收的媒体馈入同步。
34.根据权利要求33所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
将从所述第一记录设备接收的一系列时间戳值与从所述第一记录设备接收的媒体馈入相关联;以及
将从所述第二记录设备接收的一系列时间戳值与从所述第二记录设备接收的媒体馈入相关联。
35.根据权利要求33或34所述的装置,所述计算机可读指令在由所述至少一个处理器执行时,使所述装置至少:
从每个记录设备接收粗略同步值以使用所述粗略同步值来对相应的馈入进行粗略同步。
36.一种计算机可读介质,其上存储有计算机可读代码,所述计算机可读代码在由至少一个处理器执行时,使得执行:
在记录设备处,记录与场景有关的媒体馈入;
在所述记录设备处,接收一系列无线同步消息;
记录关于每个所接收的消息的指示接收时间的时间戳值;以及
存储所述时间戳值和所述媒体馈入。
37.一种计算机可读介质,其上存储有计算机可读代码,所述计算机可读代码在由至少一个处理器执行时,使得执行:
从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值,其中,每个时间戳值指示在所述相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及
将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从所述第一记录设备接收的媒体馈入与从所述第二记录设备接收的媒体馈入同步。
38.一种装置,包括:
用于在记录设备处记录与场景有关的媒体馈入的装置;
用于在所述记录设备处接收一系列无线同步消息的装置;
用于记录关于每个所接收的消息的指示接收时间的时间戳值的装置;以及
用于存储所述时间戳值和所述媒体馈入的装置。
39.一种装置,包括:
用于从第一记录设备和第二记录设备中的每一个接收由相应的记录设备记录的媒体馈入和一系列时间戳值的装置,其中,每个时间戳值指示在所述相应的记录设备处的一系列无线同步消息中的一个的接收时间;以及用于将从第一记录设备接收的一组时间戳值与从第二记录设备接收的一组时间戳值对齐,以使从所述第一记录设备接收的媒体馈入与从所述第二记录设备接收的媒体馈入同步的装置。
40.一种系统,包括多个根据权利要求19至32所述的装置和根据权利要求33至35所述的装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/FI2015/050631 WO2017051061A1 (en) | 2015-09-22 | 2015-09-22 | Media feed synchronisation |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108028886A true CN108028886A (zh) | 2018-05-11 |
Family
ID=58386071
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580083253.2A Withdrawn CN108028886A (zh) | 2015-09-22 | 2015-09-22 | 媒体馈入同步 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20180184180A1 (zh) |
EP (1) | EP3354006A4 (zh) |
JP (1) | JP2018534814A (zh) |
CN (1) | CN108028886A (zh) |
WO (1) | WO2017051061A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022060000A (ja) * | 2020-10-02 | 2022-04-14 | ソニーセミコンダクタソリューションズ株式会社 | 通信装置、および通信方法、通信システム、並びにプログラム |
CN116743303B (zh) * | 2023-08-15 | 2023-10-31 | 北京智芯微电子科技有限公司 | 时间同步方法、装置、计算机设备、芯片及可读存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1886960A (zh) * | 2003-12-16 | 2006-12-27 | 艾利森电话股份有限公司 | 媒体数据文件的传送技术 |
CN1954320A (zh) * | 2004-03-23 | 2007-04-25 | 诺基亚公司 | 用于移动设备中音乐同步的系统和方法 |
US20130039496A1 (en) * | 2007-08-21 | 2013-02-14 | Syracuse University | System and method for distributed audio recording and collaborative mixing |
US20130235166A1 (en) * | 2012-03-07 | 2013-09-12 | Cambridge Silicon Radio Limited | Synchronisation method |
US20140245367A1 (en) * | 2012-08-10 | 2014-08-28 | Panasonic Corporation | Method for providing a video, transmitting device, and receiving device |
EP2775694A1 (en) * | 2013-03-08 | 2014-09-10 | BlackBerry Limited | Methods and devices to generate multiple-channel audio recordings |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6993695B2 (en) * | 2001-06-06 | 2006-01-31 | Agilent Technologies, Inc. | Method and apparatus for testing digital devices using transition timestamps |
JP2006242871A (ja) * | 2005-03-04 | 2006-09-14 | Victor Co Of Japan Ltd | ビーコン受信機及びビュアーシステム |
US20060227813A1 (en) * | 2005-04-11 | 2006-10-12 | Mavrogeanes Richard A | Method and system for synchronized video recording/delivery |
US8737917B2 (en) * | 2009-07-24 | 2014-05-27 | Broadcom Corporation | Method and system for a dual-mode bluetooth low energy device |
CN103999455B (zh) * | 2011-12-16 | 2018-02-06 | 英特尔公司 | 协作交叉平台视频捕捉 |
EP2662703B1 (en) * | 2012-05-10 | 2017-10-18 | 9Solutions Oy | Improving positioning accuracy of location tracking system |
JP2015041438A (ja) * | 2013-08-21 | 2015-03-02 | アプリックスIpホールディングス株式会社 | 照明制御システム、端末およびその照明制御方法 |
US9113068B1 (en) * | 2014-05-15 | 2015-08-18 | Camera Slice, Inc. | Facilitating coordinated media and/or information capturing and aggregation |
US11115475B2 (en) * | 2015-01-26 | 2021-09-07 | Northeastern University | Software-defined implantable ultrasonic device for use in the internet of medical things |
-
2015
- 2015-09-22 CN CN201580083253.2A patent/CN108028886A/zh not_active Withdrawn
- 2015-09-22 EP EP15904685.3A patent/EP3354006A4/en not_active Withdrawn
- 2015-09-22 WO PCT/FI2015/050631 patent/WO2017051061A1/en active Application Filing
- 2015-09-22 US US15/759,744 patent/US20180184180A1/en not_active Abandoned
- 2015-09-22 JP JP2018514291A patent/JP2018534814A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1886960A (zh) * | 2003-12-16 | 2006-12-27 | 艾利森电话股份有限公司 | 媒体数据文件的传送技术 |
CN1954320A (zh) * | 2004-03-23 | 2007-04-25 | 诺基亚公司 | 用于移动设备中音乐同步的系统和方法 |
US20130039496A1 (en) * | 2007-08-21 | 2013-02-14 | Syracuse University | System and method for distributed audio recording and collaborative mixing |
US20130235166A1 (en) * | 2012-03-07 | 2013-09-12 | Cambridge Silicon Radio Limited | Synchronisation method |
US20140245367A1 (en) * | 2012-08-10 | 2014-08-28 | Panasonic Corporation | Method for providing a video, transmitting device, and receiving device |
EP2775694A1 (en) * | 2013-03-08 | 2014-09-10 | BlackBerry Limited | Methods and devices to generate multiple-channel audio recordings |
Also Published As
Publication number | Publication date |
---|---|
WO2017051061A1 (en) | 2017-03-30 |
US20180184180A1 (en) | 2018-06-28 |
EP3354006A4 (en) | 2019-05-08 |
EP3354006A1 (en) | 2018-08-01 |
JP2018534814A (ja) | 2018-11-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11546651B2 (en) | Video stream synchronization | |
EP3354007B1 (en) | Video content selection | |
US10791356B2 (en) | Synchronisation of streamed content | |
US10887673B2 (en) | Method and system for associating recorded videos with highlight and event tags to facilitate replay services | |
WO2017096956A1 (zh) | 音视频播放方法及装置 | |
US20160323483A1 (en) | Automatically generating notes and annotating multimedia content specific to a video production | |
US20140355947A1 (en) | System and method for synchronizing multi-camera mobile video recording devices | |
JP2017135539A (ja) | 収録データ処理方法 | |
US20160218820A1 (en) | Networked programmable master clock base stations | |
US20150104151A1 (en) | System and Method for Providing Device with Integrated Time Code Generator, Transmitter, and Reader with Interruptible Feedback Monitoring and Talkback | |
EP3353565B1 (en) | Video recording method and apparatus | |
WO2019073420A1 (en) | SYSTEMS AND METHODS FOR PERFORMING READING OF MULTIPLE MULTIMEDIA RECORDINGS BASED ON A SEGMENT CORRECTED THROUGH RECORDINGS | |
CN108028886A (zh) | 媒体馈入同步 | |
US20170188194A1 (en) | Augmenting Wi-Fi Localization with Auxiliary Sensor Information | |
US20140376877A1 (en) | Information processing apparatus, information processing method and program | |
CN104333429A (zh) | 实现时钟同步的方法及装置 | |
CN109688533B (zh) | 一种穿戴设备定位方法、装置及存储介质 | |
EP3868043B1 (en) | Wireless audio synchronization | |
WO2007110822A1 (en) | Method and apparatus for synchronising recording of multiple cameras | |
JP2018207152A (ja) | 同期制御装置及び同期制御方法 | |
Su et al. | Augmenting film and video footage with sensor data | |
US20230046779A1 (en) | Synchronized recording of audio and video with wirelessly connected video and audio recording devices | |
CN106131150A (zh) | 数据同步方法及装置 | |
JP2007325052A (ja) | 動画撮影システム及びビデオカメラ | |
JP2011097212A (ja) | 撮像システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20180511 |
|
WW01 | Invention patent application withdrawn after publication |