CN106954093B - 全景视频处理方法、装置及系统 - Google Patents
全景视频处理方法、装置及系统 Download PDFInfo
- Publication number
- CN106954093B CN106954093B CN201710153800.0A CN201710153800A CN106954093B CN 106954093 B CN106954093 B CN 106954093B CN 201710153800 A CN201710153800 A CN 201710153800A CN 106954093 B CN106954093 B CN 106954093B
- Authority
- CN
- China
- Prior art keywords
- picture
- played
- video
- panoramic video
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 238000012545 processing Methods 0.000 claims abstract description 74
- 238000000034 method Methods 0.000 claims description 18
- 230000001133 acceleration Effects 0.000 claims description 8
- 230000005484 gravity Effects 0.000 claims description 6
- 239000000126 substance Substances 0.000 claims 9
- 238000010586 diagram Methods 0.000 description 22
- 238000004891 communication Methods 0.000 description 10
- 230000009286 beneficial effect Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 239000004984 smart glass Substances 0.000 description 7
- 230000006978 adaptation Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 241000282376 Panthera tigris Species 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本公开是关于一种全景视频处理方法、装置及系统。本公开全景视频处理方法，包括：获取全景视频；根据预设的导向信息在所述全景视频中确定待播放画面；根据所述全景视频的时间线将所述待播放画面发送给视频播放装置。本公开通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
Description
技术领域
本公开涉及视频处理技术，尤其涉及全景视频处理方法、装置及系统。
背景技术
随着科技的发展，全景视频成为一种趋势，越来越多的场景、产品支持全景视频的播放，例如智能眼镜、家庭影院等。在播放全景视频时，和普通视频一样，也是播放器从视频中一帧一帧地抽取画面，区别在于全景视频的播放器可看做是将取出来的画面帧放在一个球体的内壁上，该球体的内壁全部都是显示屏，播放着一帧一帧的画面，用户通过智能眼睛观看全景视频时，只可以看到球体内的一部分显示屏播放的画面。
发明内容
为克服相关技术中存在的问题，本公开提供一种全景视频处理方法、装置及系统。
根据本公开实施例的第一方面，提供一种全景视频处理方法，包括：
获取全景视频；
根据预设的导向信息在所述全景视频中确定待播放画面；
根据所述全景视频的时间线将所述待播放画面发送给视频播放装置。
本公开的实施例提供的技术方案可以包括以下有益效果：通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
可选的，所述导向信息包括播放轨迹，所述播放轨迹用于指示在所述全景视频所展示的全景画面的画面移动方向；
所述根据预设的导向信息在所述全景视频中确定待播放画面，包括：
按照所述播放轨迹从所述全景视频中选取待播放画面。
可选的，所述导向信息包括一个指定元素；
所述根据预设的导向信息在所述全景视频中确定待播放画面，包括：
通过图像识别和图像跟踪在所述全景视频中确定包含所述一个指定元素的待播放画面。
可选的，所述导向观看轨迹包括多个指定元素；
所述根据预设的导向信息在所述全景视频中确定待播放画面，包括：
通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面。
可选的，所述根据所述全景视频的时间线将所述待播放画面发送给视频播放装置之前，还包括：；
当所述待播放画面存在多个时，根据第一预设播放规则确定所述待播放画面的播放顺序，所述第一预设播放规则用于确定多个所述待播放画面的播放顺序。
可选的，所述导向信息包括播放情景；
所述根据预设的导向信息在所述全景视频中确定待播放画面，包括：
通过图像识别和图像跟踪确定所述全景视频中与所述播放情景匹配的待播放画面。
可选的，所述根据所述全景视频的时间线将所述待播放画面发送给视频播放装置之前，还包括：
当同一时间存在多段所述待播放画面时，根据第二预设规则确定所述待播放画面的播放顺序，所述第二预设播放规则用于确定多段所述待播放画面的播放顺序。
可选的，所述根据所述全景视频的时间线将所述待播放画面发送给视频播放装置之前，还包括：
当同一时间存在多段所述待播放画面时，将包含相同元素的待播放画面拼接在一起。
根据本公开实施例的第二方面，提供一种全景视频处理方法，包括：
接收视频处理装置发送的待播放画面；
按照所述待播放画面的接收顺序播放所述待播放画面。
本公开的实施例提供的技术方案可以包括以下有益效果：通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
可选的，所述方法还包括：
接收视频切换指令；
根据所述视频切换指令切换即将播放的待播放画面。
可选的，所述视频切换指令由至少一种传感器产生，所述至少一种传感器包括：重力传感器，陀螺仪传感器以及加速度传感器。
根据本公开实施例的第三方面，提供一种视频处理装置，包括：
视频获取模块，被配置为获取全景视频；
视频确定模块，被配置为根据预设的导向信息在所述全景视频中确定待播放画面；
发送模块，被配置为根据所述全景视频的时间线将所述待播放画面发送给视频播放装置。
本公开的实施例提供的技术方案可以包括以下有益效果：通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
可选的，所述导向信息包括播放轨迹，所述播放轨迹用于指示在所述全景视频所展示的全景画面的画面移动方向；
所述视频确定模块，被配置为按照所述播放轨迹从所述全景视频中选取待播放画面。
可选的，所述导向信息包括一个指定元素；
所述视频确定模块，被配置为通过图像识别和图像跟踪在所述全景视频中确定包含所述一个指定元素的待播放画面。
可选的，所述导向观看轨迹包括多个指定元素；
所述视频确定模块，被配置为通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面。
可选的，所述装置还包括：第一视频调整模块；
所述第一视频调整模块，被配置为当所述待播放画面存在多个时，根据第一预设播放规则确定所述待播放画面的播放顺序，所述第一预设播放规则用于确定多个所述待播放画面的播放顺序。
可选的，所述导向信息包括播放情景；
所述视频确定模块，被配置为通过图像识别和图像跟踪确定所述全景视频中与所述播放情景匹配的待播放画面。
可选的，所述装置还包括：第二视频调整模块；
所述第二视频调整模块，被配置为当同一时间存在多段所述待播放画面时，根据第二预设规则确定所述待播放画面的播放顺序，所述第二预设播放规则用于确定多段所述待播放画面的播放顺序。
可选的，所述装置还包括：第三视频调整模块；
所述第三视频调整模块，被配置为当同一时间存在多段所述待播放画面时，将包含相同元素的待播放画面拼接在一起。
根据本公开实施例的第四方面，提供一种视频播放装置，包括：
视频接收模块，被配置为接收视频处理装置发送的待播放画面；
播放模块，被配置为按照所述待播放画面的接收顺序播放所述待播放画面。
本公开的实施例提供的技术方案可以包括以下有益效果：通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
可选的，所述装置还包括：指令接收模块和切换模块；
所述指令接收模块，被配置为接收视频切换指令；
所述切换模块，被配置为根据所述视频切换指令切换即将播放的待播放画面。
可选的，所述视频切换指令由至少一种传感器产生，所述至少一种传感器包括：重力传感器，陀螺仪传感器以及加速度传感器。
根据本公开实施例的第五方面，提供一种视频处理装置，包括：处理器和用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述可执行指令，以执行获取全景视频；根据预设的导向信息在所述全景视频中确定待播放画面；根据所述全景视频的时间线将所述待播放画面发送给视频播放装置。
本公开的实施例提供的技术方案可以包括以下有益效果：通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
根据本公开实施例的第六方面，提供一种视频播放装置，包括处理器和用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述可执行指令，以执行接收视频处理装置发送的待播放画面；按照所述待播放画面的接收顺序播放所述待播放画面。
本公开的实施例提供的技术方案可以包括以下有益效果：通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
根据本公开实施例的第七方面，提供一种全景视频播放系统，包括：视频处理装置和视频播放装置；
所述视频处理装置采用上述第三方面所述的视频处理装置；所述视频播放装置采用上述第四方面所述的视频播放装置。
本公开的实施例提供的技术方案可以包括以下有益效果：通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
根据本公开实施例的第八方面，提供一种非临时性计算机可读存储介质，当所述存储介质中的指令由装置的处理器执行时，使得装置能够执行一种全景视频处理方法，所述方法包括：获取全景视频；根据预设的导向信息在所述全景视频中确定待播放画面；根据所述全景视频的时间线将所述待播放画面发送给视频播放装置。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一全景视频处理方法的流程图。
图2是根据一示例性实施例示出的一全景视频处理方法的流程图。
图3是根据一示例性实施例示出的一种全景视频播放系统框图。
图4是根据一示例性实施例示出的一种视频处理装置框图。
图5是根据一示例性实施例示出的一种视频处理装置框图。
图6是根据一示例性实施例示出的一种视频处理装置框图。
图7是根据一示例性实施例示出的一种视频处理装置框图。
图8是根据一示例性实施例示出的一种视频播放装置框图。
图9是根据一示例性实施例示出的一种视频播放装置框图。
图10是根据一示例性实施例示出的一种装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
用户在观看全景视频时，可以认为该用户是站在一个封闭的球体内，该球体内壁全都是显示屏，播放着全景视频的内容，用户带着一个智能眼镜，站在球体内，只能通过眼镜看到播放中的一部分画面。而用户具体要看哪部分画面，可以根据用户的喜好，或观看习惯来进行选择。本公开提供一种全景视频处理方法，通过预先设定导向信息，可以在用户观看全景视频的过程中，自动选出用户感兴趣的视频播放给该用户，以提升用户的观看体验。
图1是根据一示例性实施例示出的一全景视频处理方法的流程图，如图1所示，全景视频处理方法用于视频处理装置中，该视频处理装置可以是智能眼镜，播放设备，移动电话，计算机，平板设备，个人数字助理等。全景视频处理方法包括以下步骤。
在步骤101中，获取全景视频。
全景视频是一种用3D摄像机进行全方位360度拍摄的视频，用户在观看全景视频的时候，可以随意调节视频上下左右进行观看。全景视频是将静态的全景图片转化为动态的视频图像，使得用户可以在拍摄角度左右上下的任意角度观看动态视频，产生有一种真正意义上身临其境的感觉。全景视频具有景深、动态图像、声音等，同时具备声画对位、声画同步。例如，航拍的全景视频犹如空中雄鹰俯瞰大地的视角，画面气势磅礴，很有景深感、空旷感，能够让我们一揽无余；而地面上平视拍摄的全景视频能够清楚的表现环境的诸多细节，让我们了解环境的具体位置、具体形状、细节等。
在步骤102中，根据预设的导向信息在所述全景视频中确定待播放画面。
视频处理装置可以将该全景视频的一些关键信息，例如，视频截图、视频时间戳等显示给用户。这样用户可以根据这些关键信息预设视频播放的导向信息，该导向信息包含了用户的观影指引，体现了用户在观看全景视频时自身希望观看的视频段的内容，例如，用户只想观看视频中某个人物的相关视频，那么用户预先设定的导向信息就是关于这个人物的画面。视频处理装置根据预设的导向信息从全景视频中确定出符合的待播放画面，例如，导向信息是指定某个人物，则视频处理装置从全景视频中将所有包含该人物的视频作为待播放画面。
在步骤103中，根据所述全景视频的时间线将所述待播放画面发送给视频播放装置。
可以认为用户在观看全景视频时，视频处理装置根据预设的导向信息将待播放画面拣选出来，然后由视频播放装置进行播放。视频处理装置根据全景视频的时间线，在某个时刻，视频处理装置正在处理的是导向信息指向的、时间线上未来即将播放的画面，而视频播放装置播放的是视频处理装置先前拣选出来的画面。这里的拣选并不是指视频处理装置将待播放画面从原全景视频中剪出来重新拼接，可以认为是对待播放画面打上标记由视频播放装置识别这些标记以进行播放，或者是将待播放画面的序号等标识发送给视频播放装置，由视频播放装置按标识进行播放。
本实施例，视频处理装置通过按照预设的导向信息确定出符合用户需求的待播放画面，并将其发送给视频播放装置进行播放，实时对播放中的全景视频进行有导向的处理，提高了视频的播放效率，并且提升用户体验。
上述实施例中视频处理装置根据预设的导向信息在全景视频中确定待播放画面，可以根据导向信息的不同有四种实现方式：
第一种是导向信息包括播放轨迹，该播放轨迹用于指示在全景视频所展示的全景画面的画面移动方向。用户观看全景视频时设定了一个全景视频画面移动的方向，例如，画面向上移动、向下移动、向左移动、向右移动等。可以认为用户佩戴着视频播放装置不动，而全景视频根据设定的播放轨迹进行移动，这样用户看到的画面就是全景视频按照某个固定的方向展示其画面。基于此视频处理装置就是按照播放轨迹从全景视频中将待播放画面确定出来，例如播放轨迹是向上，那么视频处理装置就是从全景视频开始时刻，根据时间线将全景中向上这一方向上的视频段选出来作为待播放画面。
第二种是导向信息包括一个指定元素。用户观看全景视频时设定了一个希望看的指定元素，例如一个人物，这样视频处理装置就根据该人物的画面通过图像识别和图像跟踪从全景视频中将包含该人物的视频选出来作为待播放画面。这样视频播放装置呈献给用户的画面就体现了该人物的行为追踪。
第三种是导向信息包括多个指定元素。用户观看全景视频时设定了多个希望看的指定元素，例如一个车和一个人物，这样视频处理装置就根据该多个指定元素的画面通过图像识别和图像跟踪从全景视频中将包含其中至少一样的，即包含车，包含人物，或者同时包含车和人物的视频选出来作为待播放画面。当人物和车在一起时，视频处理装置选出的待播放画面就是同时包含人物和车的，当人物下了车，和车分开，此时视频处理装置就要考虑后续待播放画面是追踪人物的行为还是车的行为，视频处理装置可以在待播放画面存在多个时，根据第一预设播放规则确定待播放画面的播放顺序。第一预设播放规则可以考虑多个指定元素的优先级，该优先级可以是用户预先设置的，例如，用户设置人物的优先级高于车，那么当人物和车分开时，视频处理装置优先选取包含了人物的视频作为待播放画面；第一预设播放规则也可以考虑以指定元素与其他物体的相对位置，例如，人物下车以后，车停在路边不动，人物移动了位置，此时以路灯为参考，车和路灯的相对位置不变，人物和路灯的相对位置发生变化，那么视频处理装置选取包含了人物的视频作为待播放画面。第一预设播放规则还可以考虑多个指定元素之间的情景发展，例如，两个指定元素都是人物，其中一个人物是主角，另一个是配角，那么当两个人物分开后，视频处理装置将包含主角的视频作为待播放画面。本实施例中的第一预设播放规则不限于上述情况，任何可以作为视频处理装置选择待播放画面的规则都可以用于本实施例，对此不作具体限定。
第四种是导向信息包括播放情景，该播放情景可以是视频中画面的变化速度，例如，快速变化的画面内容。视频处理装置在确定待播放画面时，通过图像识别和图像跟踪得到视频中画面的变化速度，将与播放情景匹配的视频选取出来。如果在同一时间内选出多段待播放画面，视频处理装置可以对这些待播放画面进行标记，根据预先设置的优先级确定出这些待播放画面的先后顺序，然后将其逐一发送给视频播放装置。另外，如果同时间内有多段待播放画面，为了画面的连贯性，视频处理装置优先将包含了相同元素的视频拼接在一起，例如，多段待播放画面可以分为两类，一类包含了鸟儿，另一类包含了老虎，此时视频处理装置会将包含了鸟儿的视频拼接在一起，将包含了老虎的视频拼接在一起。
需要说明的是，上述四种情况作为本公开可选的导向信息设置方式，但本公开导向信息的设置方式不限于此，只要可作为引导全景视频播放的导向信息设置方式均可用于本公开。
图2是根据一示例性实施例示出的一全景视频处理方法的流程图，如图2所示，全景视频处理方法用于视频播放装置中，该视频播放装置可以是智能眼镜，播放设备，移动电话，计算机，平板设备，个人数字助理等。全景视频处理方法包括以下步骤。
在步骤201中，接收视频处理装置发送的待播放画面。
在步骤202中，按照所述待播放画面的接收顺序播放所述待播放画面。
本公开中视频播放装置接收到视频处理装置发送的待播放画面后，将其按接收顺序进行播放，由于视频处理装置已经根据用户的设置选取出符合用户需求的视频，此时视频播放装置播放出来的视频正是用户希望看到的视频部分，提升了用户体验。
可选的，视频播放装置为了更快响应用户的需求，在播放视频时，可以接收用户发出的视频切换指令，该视频切换指令由至少一种传感器产生，该至少一种传感器包括：重力传感器，陀螺仪传感器以及加速度传感器。基于此，在视频播放装置中需要包含上述至少一种传感器，当用户想切换当前播放的视频，可以通过摇晃视频播放装置实现视频切换。例如，用户使用智能眼睛观看全景视频，如果希望快速切换至下一视频进行观看，可以通过左右摇晃脑袋以实现这一操作；或者用户希望快进当前视频，可以通过上下晃动智能眼镜以对当前视频进行快进。
通过上述实施例，本公开的全景视频处理方法可适用于视频处理装置和视频播放装置组成的全景视频播放系统，其中视频处理装置和视频播放装置可以是同一播放设备的两个组件，例如，智能眼镜中同时集成了视频处理和视频播放模块，也可以是两个独立的设备，例如，计算机和智能眼镜，计算机进行视频处理，智能眼镜进行视频播放。图3是根据一示例性实施例示出的一种全景视频播放系统框图。参照图3，该全景视频播放系统10包括视频处理装置11和视频播放装置12。所述视频处理装置11，被配置为获取全景视频；根据预设的导向信息在所述全景视频中确定待播放画面；根据所述全景视频的时间线将所述待播放画面发送给视频播放装置；所述视频播放装置12，被配置为接收视频处理装置发送的待播放画面；按照所述待播放画面的接收顺序播放所述待播放画面。
图4是根据一示例性实施例示出的一种视频处理装置框图。参照图4，该视频处理装置20包括视频获取模块21，视频确定模块22和发送模块23。
该视频获取模块21，被配置为获取全景视频；
该视频确定模块22，被配置为根据预设的导向信息在所述全景视频中确定待播放画面；
该发送模块23，被配置为根据所述全景视频的时间线将所述待播放画面发送给视频播放装置。
进一步的，所述导向信息包括播放轨迹，所述播放轨迹用于指示在所述全景视频所展示的全景画面的画面移动方向；
所述视频确定模块22，被配置为按照所述播放轨迹从所述全景视频中选取待播放画面。
进一步的，所述导向信息包括一个指定元素；
所述视频确定模块22，被配置为通过图像识别和图像跟踪在所述全景视频中确定包含所述一个指定元素的待播放画面。
进一步的，所述导向观看轨迹包括多个指定元素；
所述视频确定模块22，被配置为通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面。
进一步的，所述导向信息包括播放情景；
所述视频确定模块22，被配置为通过图像识别和图像跟踪确定所述全景视频中与所述播放情景匹配的待播放画面。
图5是根据一示例性实施例示出的一种视频处理装置框图。参照图5，该装置的结构在图4所示框图基础上，还包括：第一视频调整模块24。
所述第一视频调整模块24，被配置为当所述待播放画面存在多个时，根据第一预设播放规则确定所述待播放画面的播放顺序，所述第一预设播放规则用于确定多个所述待播放画面的播放顺序。
图6是根据一示例性实施例示出的一种视频处理装置框图。参照图6，该装置的结构在图4所示框图基础上，还包括：第二视频调整模块25。
所述第二视频调整模块25，被配置为当同一时间存在多段所述待播放画面时，根据第二预设规则确定所述待播放画面的播放顺序，所述第二预设播放规则用于确定多段所述待播放画面的播放顺序。
图7是根据一示例性实施例示出的一种视频处理装置框图。参照图7，该装置的结构在图4所示框图基础上，还包括：第三视频调整模块26。
所述第三视频调整模块26，被配置为当同一时间存在多段所述待播放画面时，将包含相同元素的待播放画面拼接在一起。
图8是根据一示例性实施例示出的一种视频播放装置框图。参照图8，该视频播放装置30包括视频接收模块31和播放模块32。
该视频接收模块31，被配置为接收视频处理装置发送的待播放画面；
该播放模块32，被配置为按照所述待播放画面的接收顺序播放所述待播放画面。
图9是根据一示例性实施例示出的一种视频播放装置框图。参照图9，该装置的结构在图8所示框图基础上，还包括：指令接收模块33和切换模块34。
所述指令接收模块33，被配置为接收视频切换指令；
所述切换模块34，被配置为根据所述视频切换指令切换即将播放的待播放画面。
进一步的，所述视频切换指令由至少一种传感器产生，所述至少一种传感器包括：重力传感器，陀螺仪传感器以及加速度传感器。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图10是根据一示例性实施例示出的一种装置的框图。例如，装置1000可以是移动电话，计算机，平板设备，个人数字助理等。本实施例的装置1000可以用作上述实施例中的视频处理装置，也可以用作上述实施例中的视频播放装置。
参照图10，装置1000可以包括以下一个或多个组件：处理组件1002，存储器1004，电力组件1006，多媒体组件1008，音频组件1010，输入/输出(I/O)的接口1012，传感器组件1014，以及通信组件1016。
处理组件1002通常控制装置1000的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件1002可以包括一个或多个处理器1020来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件1002可以包括一个或多个模块，便于处理组件1002和其他组件之间的交互。例如，处理组件1002可以包括多媒体模块，以方便多媒体组件1008和处理组件1002之间的交互。
存储器1004被配置为存储各种类型的数据以支持在装置1000的操作。这些数据的示例包括用于在装置1000上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器1004可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电力组件1006为装置1000的各种组件提供电力。电力组件1006可以包括电源管理系统，一个或多个电源，及其他与为装置1000生成、管理和分配电力相关联的组件。
多媒体组件1008包括在所述装置1000和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件1008包括一个前置摄像头和/或后置摄像头。当装置1000处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件1010被配置为输出和/或输入音频信号。例如，音频组件1010包括一个麦克风(MIC)，当装置1000处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1004或经由通信组件1016发送。在一些实施例中，音频组件1010还包括一个扬声器，用于输出音频信号。
I/O接口1012为处理组件1002和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1014包括一个或多个传感器，用于为装置1000提供各个方面的状态评估。例如，传感器组件1014可以检测到装置1000的打开/关闭状态，组件的相对定位，例如所述组件为装置1000的显示器和小键盘，传感器组件1014还可以检测装置1000或装置1000一个组件的位置改变，用户与装置1000接触的存在或不存在，装置1000方位或加速/减速和装置1000的温度变化。传感器组件1014可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1014还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件1014还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件1016被配置为便于装置1000和其他设备之间有线或无线方式的通信。装置1000可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件1016经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件1016还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，装置1000可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器1004，上述指令可由装置1000的处理器1020执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践本公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (13)
1.一种全景视频处理方法，其特征在于，包括：
获取全景视频；
根据预设的导向信息在所述全景视频中确定待播放画面；
根据所述全景视频的时间线将所述待播放画面发送给视频播放装置；其中，所述导向信息包括多个指定元素；
所述根据预设的导向信息在所述全景视频中确定待播放画面，包括：
通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面；其中，
所述通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面，包括：
在所述多个指定元素处于全景视频中的同一画面内的情况下，确定所述待播放画面包括所述全景视频中包含所述多个指定元素的画面；
在所述多个指定元素不处于全景视频中的同一画面内的情况下，根据每个指定元素相对于所述全景视频中的指定物体的相对位置，确定所述待播放画面包括所述全景视频中包含所述多个指定元素中所述相对位置发生变化的至少一个指定元素的画面。
2.根据权利要求1所述的方法，其特征在于，所述根据所述全景视频的时间线将所述待播放画面发送给视频播放装置之前，还包括：
当所述待播放画面存在多个时，根据第一预设播放规则确定所述待播放画面的播放顺序，所述第一预设播放规则用于确定多个所述待播放画面的播放顺序。
3.一种全景视频处理方法，其特征在于，包括：
接收视频处理装置发送的全景视频的待播放画面；
按照所述待播放画面的接收顺序播放所述待播放画面，所述待播放画面为根据预设的导向信息在所述全景视频中确定的待播放画面；其中，
所述导向信息包括多个指定元素，根据预设的导向信息在所述全景视频中确定待播放画面，包括：
通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面；其中，
在所述多个指定元素处于全景视频中的同一画面内的情况下，确定所述待播放画面包括所述全景视频中包含所述多个指定元素的画面；
在所述多个指定元素不处于全景视频中的同一画面内的情况下，根据每个指定元素相对于所述全景视频中的指定物体的相对位置，确定所述待播放画面包括所述全景视频中包含所述多个指定元素中所述相对位置发生变化的至少一个指定元素的画面。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
接收视频切换指令；
根据所述视频切换指令切换即将播放的待播放画面。
5.根据权利要求4所述的方法，其特征在于，所述视频切换指令由至少一种传感器产生，所述至少一种传感器包括：重力传感器，陀螺仪传感器以及加速度传感器。
6.一种视频处理装置，其特征在于，包括：
视频获取模块，被配置为获取全景视频；
视频确定模块，被配置为根据预设的导向信息在所述全景视频中确定待播放画面；
发送模块，被配置为根据所述全景视频的时间线将所述待播放画面发送给视频播放装置；其中，所述导向信息包括多个指定元素；
所述视频确定模块，被配置为：
通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面；其中，
所述视频确定模块，被配置为：
在所述多个指定元素处于全景视频中的同一画面内的情况下，确定所述待播放画面包括所述全景视频中包含所述多个指定元素的画面；
在所述多个指定元素不处于全景视频中的同一画面内的情况下，根据每个指定元素相对于所述全景视频中的指定物体的相对位置，确定所述待播放画面包括所述全景视频中包含所述多个指定元素中所述相对位置发生变化的至少一个指定元素的画面。
7.根据权利要求6所述的装置，其特征在于，所述装置还包括：第一视频调整模块；
所述第一视频调整模块，被配置为当所述待播放画面存在多个时，根据第一预设播放规则确定所述待播放画面的播放顺序，所述第一预设播放规则用于确定多个所述待播放画面的播放顺序。
8.一种视频播放装置，其特征在于，包括：
视频接收模块，被配置为接收视频处理装置发送的全景视频的待播放画面；
播放模块，被配置为按照所述待播放画面的接收顺序播放所述待播放画面，所述待播放画面为根据预设的导向信息在所述全景视频中确定的待播放画面；其中，
所述导向信息包括多个指定元素，根据预设的导向信息在所述全景视频中确定待播放画面，包括：
通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面；其中，
在所述多个指定元素处于全景视频中的同一画面内的情况下，确定所述待播放画面包括所述全景视频中包含所述多个指定元素的画面；
在所述多个指定元素不处于全景视频中的同一画面内的情况下，根据每个指定元素相对于所述全景视频中的指定物体的相对位置，确定所述待播放画面包括所述全景视频中包含所述多个指定元素中所述相对位置发生变化的至少一个指定元素的画面。
9.根据权利要求8所述的装置，其特征在于，所述装置还包括：指令接收模块和切换模块；
所述指令接收模块，被配置为接收视频切换指令；
所述切换模块，被配置为根据所述视频切换指令切换即将播放的待播放画面。
10.根据权利要求9所述的装置，其特征在于，所述视频切换指令由至少一种传感器产生，所述至少一种传感器包括：重力传感器，陀螺仪传感器以及加速度传感器。
11.一种视频处理装置，其特征在于，包括：处理器和用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述可执行指令，以执行获取全景视频；根据预设的导向信息在所述全景视频中确定待播放画面；根据所述全景视频的时间线将所述待播放画面发送给视频播放装置；其中，所述导向信息包括多个指定元素；
所述根据预设的导向信息在所述全景视频中确定待播放画面，包括：
通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面；其中，
所述通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面，包括：
在所述多个指定元素处于全景视频中的同一画面内的情况下，确定所述待播放画面包括所述全景视频中包含所述多个指定元素的画面；
在所述多个指定元素不处于全景视频中的同一画面内的情况下，根据每个指定元素相对于所述全景视频中的指定物体的相对位置，确定所述待播放画面包括所述全景视频中包含所述多个指定元素中所述相对位置发生变化的至少一个指定元素的画面。
12.一种视频播放装置，其特征在于，包括处理器和用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述可执行指令，以执行接收视频处理装置发送的全景视频的待播放画面；按照所述待播放画面的接收顺序播放所述待播放画面，所述待播放画面为根据预设的导向信息在所述全景视频中确定的待播放画面；其中，
所述导向信息包括多个指定元素，根据预设的导向信息在所述全景视频中确定待播放画面，包括：
通过图像识别和图像跟踪在所述全景视频中确定包含所述多个指定元素中至少一个指定元素的待播放画面；其中，
在所述多个指定元素处于全景视频中的同一画面内的情况下，确定所述待播放画面包括所述全景视频中包含所述多个指定元素的画面；
在所述多个指定元素不处于全景视频中的同一画面内的情况下，根据每个指定元素相对于所述全景视频中的指定物体的相对位置，确定所述待播放画面包括所述全景视频中包含所述多个指定元素中所述相对位置发生变化的至少一个指定元素的画面。
13.一种全景视频播放系统，其特征在于，包括：视频处理装置和视频播放装置；
所述视频处理装置采用权利要求6或7所述的视频处理装置；所述视频播放装置采用权利要求8至10中任一项所述的视频播放装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710153800.0A CN106954093B (zh) | 2017-03-15 | 2017-03-15 | 全景视频处理方法、装置及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710153800.0A CN106954093B (zh) | 2017-03-15 | 2017-03-15 | 全景视频处理方法、装置及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106954093A CN106954093A (zh) | 2017-07-14 |
| CN106954093B true CN106954093B (zh) | 2020-12-04 |
Family
ID=59472009
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710153800.0A Active CN106954093B (zh) | 2017-03-15 | 2017-03-15 | 全景视频处理方法、装置及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106954093B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111213374A (zh) * | 2017-11-29 | 2020-05-29 | 深圳市柔宇科技有限公司 | 一种视频播放方法及装置 |
| CN115499686B (zh) | 2017-12-15 | 2024-03-08 | Pcms控股公司 | 用于在360°视频导航中使用查看路径的方法 |
| CN108650500B (zh) * | 2018-04-02 | 2019-11-22 | 北京奇艺世纪科技有限公司 | 一种全景视频处理方法及装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102307309A (zh) * | 2011-07-29 | 2012-01-04 | 杭州电子科技大学 | 一种基于自由视点的体感交互导播系统及方法 |
| CN104796781A (zh) * | 2015-03-31 | 2015-07-22 | 小米科技有限责任公司 | 视频片段提取方法及装置 |
| CN105357585A (zh) * | 2015-08-29 | 2016-02-24 | 华为技术有限公司 | 对视频内容任意位置和时间播放的方法及装置 |
| CN106454321A (zh) * | 2016-10-26 | 2017-02-22 | 深圳市道通智能航空技术有限公司 | 全景视频的处理方法、装置及系统 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130141526A1 (en) * | 2011-12-02 | 2013-06-06 | Stealth HD Corp. | Apparatus and Method for Video Image Stitching |
-
2017
- 2017-03-15 CN CN201710153800.0A patent/CN106954093B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102307309A (zh) * | 2011-07-29 | 2012-01-04 | 杭州电子科技大学 | 一种基于自由视点的体感交互导播系统及方法 |
| CN104796781A (zh) * | 2015-03-31 | 2015-07-22 | 小米科技有限责任公司 | 视频片段提取方法及装置 |
| CN105357585A (zh) * | 2015-08-29 | 2016-02-24 | 华为技术有限公司 | 对视频内容任意位置和时间播放的方法及装置 |
| CN106454321A (zh) * | 2016-10-26 | 2017-02-22 | 深圳市道通智能航空技术有限公司 | 全景视频的处理方法、装置及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106954093A (zh) | 2017-07-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110662083B (zh) | 数据处理方法、装置、电子设备及存储介质 | |
| CN106791893B (zh) | 视频直播方法及装置 | |
| US20170304735A1 (en) | Method and Apparatus for Performing Live Broadcast on Game | |
| CN105450736B (zh) | 与虚拟现实连接的方法和装置 | |
| CN109729372B (zh) | 直播间切换方法、装置、终端、服务器及存储介质 | |
| US20170311004A1 (en) | Video processing method and device | |
| US10217487B2 (en) | Method and device for controlling playback | |
| US20150341698A1 (en) | Method and device for providing selection of video | |
| EP2953068A1 (en) | Prompting method and device for seat selection | |
| CN109151565B (zh) | 播放语音的方法、装置、电子设备及存储介质 | |
| US11770497B2 (en) | Method and device for processing video, and storage medium | |
| CN107132769B (zh) | 智能设备控制方法及装置 | |
| US20170054906A1 (en) | Method and device for generating a panorama | |
| CN108986117B (zh) | 视频图像分割方法及装置 | |
| CN106954093B (zh) | 全景视频处理方法、装置及系统 | |
| CN108174269B (zh) | 可视化音频播放方法及装置 | |
| CN107566878B (zh) | 直播中显示图片的方法及装置 | |
| CN108986803B (zh) | 场景控制方法及装置、电子设备、可读存储介质 | |
| KR20190073528A (ko) | 동영상 편집, 동영상 촬영 방법 및 장치 | |
| CN114268823A (zh) | 一种视频播放方法、装置、电子设备及存储介质 | |
| EP3799415A2 (en) | Method and device for processing videos, and medium | |
| CN113473224B (zh) | 视频处理方法、装置、电子设备及计算机可读存储介质 | |
| WO2021237744A1 (zh) | 拍摄方法及装置 | |
| CN110134305B (zh) | 一种语速调节方法、装置和用于语速调节的装置 | |
| CN108769780B (zh) | 广告播放方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |