CN109983760A - 视频处理方法和设备 - Google Patents

视频处理方法和设备 Download PDF

Info

Publication number
CN109983760A
CN109983760A CN201680090946.9A CN201680090946A CN109983760A CN 109983760 A CN109983760 A CN 109983760A CN 201680090946 A CN201680090946 A CN 201680090946A CN 109983760 A CN109983760 A CN 109983760A
Authority
CN
China
Prior art keywords
film
video
road
section
video clipping
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680090946.9A
Other languages
English (en)
Other versions
CN109983760B (zh
Inventor
王牧辰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen China Investment Co Ltd
Original Assignee
Volkswagen China Investment Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen China Investment Co Ltd filed Critical Volkswagen China Investment Co Ltd
Publication of CN109983760A publication Critical patent/CN109983760A/zh
Application granted granted Critical
Publication of CN109983760B publication Critical patent/CN109983760B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3697—Output of additional, non-guidance related information, e.g. low fuel level
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761—Proximity, similarity or dissimilarity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/48—Matching video sequences
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/024—Guidance services
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)
  • Navigation (AREA)

Abstract

本发明披露了虚拟现实影片的处理方法和处理设备。该方法包括：获取行驶路线各路段的道路相关特征；以及提供至少一条与行驶路线各路段的道路相关特征匹配的视频剪辑，作为在该路段上播放的视频剪辑。此方法和设备能够改善用户的视频观看体验。

Description

视频处理方法和设备
技术领域
本发明涉及处理视频方法和处理视频设备。
背景技术
虚拟现实(VR)影片应用非常广泛，可应用于例如展览会、远程指导、游览、教育、培训和电子游戏等领域。
每部VR影片均包含基本片段(基础情节，base plot)和矩阵。VR影片的矩阵可以表示该VR影片基本片段之间的播放关系。例如，假设某VR影片包括五个基本片段Bl、B2、B3、B4和B5，该VR影片矩阵可以表示基本片段B2和B3在B1后面播放，基本片段B5在B2后面播放，基本片段B4在B3后面播放。因此，能够根据矩阵确定VR影片的哪个(些)基本片段在特定基本片段后面播放。可根据其矩阵和用户要求，组合其基本片段来产生一部VR影片。
发明内容
本发明的实施例提供一种视频处理方法和视频处理设备，能够改善用户的视频观看体验。
根据本发明实施方式的视频处理方法包括：获取行驶路线(一个或多个)路段的道路相关特征；并提供与该行驶路线相应路段的道路相关特征匹配的至少一条视频剪辑，作为在该相应路段上播放的视频剪辑。
其中，所提供的至少一条视频剪辑包括：从多个视频剪辑中，确定在该行驶路线至少一个相应路段上指定播放的视频剪辑；其中，在该行驶路线至少一个相应路段上指定播放的视频剪辑是与至少一个相应路段的道路相关特征的多个视频剪辑中的其他视频剪辑相比，故事特征和/或背景特征更加匹配的多个视频剪辑之一。
其中，在至少一个相应路段上指定播放的视频剪辑是能够在至少一个相应路段的前一路段上指定播放的视频剪辑之后播放的至少一个视频剪辑。
其中，多个视频剪辑是特定影片的数条视频剪辑。
其中，特定影片是用户规定的影片。
其中，该方法进一步包括从多部影片中选择特定影片，其中，与该多部影片中的其他影片相比，特定影片的故事特征和/或背景特征更加匹配行驶路线的至少一个相应路段的道路相关特征。
其中，特定影片的选择包括：计算多部影片中每一部影片的匹配值，该匹配值表示该影片的故事特征和/或背景特征与行驶路线的至少一个相应路段的道路相关特征的匹配度；以及从该多部影片中搜索具有最大匹配值的影片，作为特定影片。
其中，该多部影片中的每一部的匹配值计算包括：针对多部影片中的每一部，计算该影片的多个亚匹配值；每个亚匹配值与行驶路线的至少一个相应路段之一相关、并且表示该相关路段的道路相关特征与该影片的某个视频剪辑的故事特征和/或背景特征的匹配度；其中，与该影片其他视频剪辑相比，该某个视频剪辑的故事特征和/或背景特征更加匹配该相关路段的道路相关特征；以及根据影片的亚匹配值计算多部影片中每一部的匹配值。
其中，该多部影片中每一部的匹配值的计算包括：针对多部影片中的每一部，计算该影片的多个亚匹配值；每一个该亚匹配值与行驶路线的至少一个相应路段之一相关、并且表示相关路段的道路相关特征与该影片某个视频剪辑的故事特征和/或背景特征的匹配度；其中，该某个视频剪辑是该影片的至少一个视频剪辑之一，并且与至少一个视频剪辑的其他视频剪辑相比，该某个视频剪辑的故事特征和/或背景特征更加匹配该相关路段的道路相关特征；并且其中，至少一个视频剪辑是能够在计算与相关路段的前一路段有关的亚匹配值时使用的视频剪辑之后播放的(一个或多个)视频剪辑；以及根据影片的多个亚匹配值计算多部影片中每一部的匹配值。
其中，该方法进一步包括：当到达行驶路线的至少一个相应路段后，播放指定在该路段播放的视频剪辑。
其中，该方法进一步包括：如果在播放某个视频剪辑期间发生特定事件，则播放该某个视频剪辑的特定子剪辑并且该特定子剪辑涉及该特定事件。
其中，行驶路线的道路相关特征包括行驶路线的道路类型、行驶路线的车辆行驶速度、行驶路线的车辆行驶时间和行驶路线的周围环境中的至少一种。
其中，该特定影片是虚拟现实影片，而多个视频剪辑是该虚拟现实影片的基本片段。
根据本发明实施方式的视频处理设备包含实施视频处理方法所包括的执行操作的多个模块。
根据本发明实施方式的视频处理装置包含处理器和用于存储可执行指令的存储器，在执行时，其使处理器执行视频处理方法中包括的操作。
根据本发明实施方式的计算机程序产品包含具有可执行指令的可读介质，在执行时，其使机器执行视频处理方法中包括的操作。
根据本发明实施方式的视频制作方法包括：获取道路网络至少一个路段的(一个或多个)道路相关特征；以及制作选择在具有相匹配的(一个或多个)道路相关特征的(一个或多个)相应路段上播放的至少一个视频剪辑集；其中该至少一个视频剪辑集中的每一个由前景视频剪辑和对应于至少一个代表性道路相关特征的至少一个背景视频剪辑中的每一个分别地合成。
根据本发明实施方式的视频制作设备包括：获取模块，用于获取道路网络至少一个路段的(一个或多个)道路相关特征；和制作模块，用于制作选择在具有匹配的(一个或多个)道路相关特征的(一个或多个)相应路段上播放的视频的至少一个视频剪辑集，其中该至少一个视频剪辑集中的每一个由前景视频剪辑和与对应于至少一个代表性道路相关特征对应的至少一个背景视频剪辑中的每一个分别地合成。
根据本发明实施方式的视频制作装置包括处理器和用于存储可执行指令的存储器；在执行时，其使处理器执行视频制作方法中包括的操作。
根据本发明实施方式的计算机程序产品包括具有可执行指令的可读介质；在执行时，其使机器执行视频制作方法中包括的操作。
考虑到行驶路线的条件，本发明上述实施方式提供了在行驶路线上播放的视频，因此当用户行驶在该行驶路线上并观看视频时，他/她会感到身临其境，从而改善了用户的视频观看体验。
附图说明
参考附图做出以下的详细说明，可更清楚地了解本发明的上述以及其他特征和优点。在附图中：
图1示出了根据本发明实施方式的处理系统的架构图；
图2示出了根据本发明实施方式的视频处理方法的流程图；
图3示出了根据本发明实施方式的视频处理方法的流程图；
图4示出了根据本发明实施方式的视频处理设备的示意图；
图5示出了根据本发明实施方式的视频处理装置的示意图；
图6示出了根据本发明实施方式的视频制作方法的流程图；
图7示出了根据本发明实施方式的视频制作设备的示意图；以及
图8示出了根据本发明实施方式的视频制作装置的示意图。
具体实施方式
现参照附图描述各种实施方式，其中相同的附图标记始终用于指代相同的元件。为方便解释，下文描述了很多具体细节，以便读者能够透彻地理解一种或多种实施方式。但是，在没有这些具体细节情况下显然也能实践这些实施方式。
本发明实施方式旨在提供一种视频处理解决方案，其可以在考虑行驶路线条件的同时，提供在行驶路线上播放的视频，从而当用户行驶在行驶路线上并观看该视频时，他/她会感到身临其境，并且改善了用户的视频观看体验。
以下将以一部VR影片作为视频的实例，来详细说明本发明的实施方式。
图1是表示根据本发明实施方式的处理系统的架构图。如图1所示，处理系统10可以包括VR装置20和控制装置30。
VR装置20是VR影片播放装置。用户可通过VR装置20观看VR影片。
控制装置30可以通过无线或有线通信网络连接至云服务器(未示出)，以从该云服务器获取VR影片和导航地图数据，并将所获得的VR影片和导航地图数据存入数据库。导航地图数据包括道路网络中包括的每一路段的道路类型(例如弯道、坡道和斜坡等)和周围环境(例如高山、丘陵、平原、海洋、森林等)中的至少一种。
控制装置30也可以与云服务器连接以实时获取在线交通信息。在线交通信息可以包括道路网络中包括的各路段的车辆行驶速度和车辆行驶时间。该路段的车辆行驶时间可以表示出车辆从该路段起点行驶到该路段终点所需的时间。
控制装置30还可以连接至车上安装的各种传感器(例如雨量传感器、振动传感器、声音传感器、温度传感器和/或风传感器等)。控制装置30可以利用获自这些传感器的数据来检测是否发生了某些事件(例如减速带、下雨、打雷和下雪等)。
通过考虑用户期望的行驶路线的路段条件，控制装置30可以从存储在数据库中的VR影片中获取在行驶路线上播放的VR影片，并从将在行驶路线上播放的VR影片的基本片段中，确定在行驶路线各路段上指定播放的剪辑，在下文中将对其进行详细描述。
控制装置30还可以连接至VR装置20，并将行驶路线各路段指定的剪辑提供给VR装置20，当用户到达那个路段时，播放上述剪辑。
控制装置30可以是导航设备、车载计算机或车上安装的类似设备。
图2是示出了根据本发明实施方式的视频处理方法的流程图。
如图2所示，在方框202处，当用户选择他/她想要行驶的行驶路线R时，控制装置30可以从云服务器取得行驶路线R的在线交通信息。
在方框204处，控制装置30可以从数据库中存储的导航地图数据取得的在线交通信息中，获取行驶路线R各路段的道路相关特征。例如，行驶路线R路段的每一路段E的道路相关特征可以包括以下至少一个特征项，包括路段E的道路类型(例如弯道、坡道和斜坡等)、路段E的车辆行驶速度、路段E的车辆行驶时间和路段E的周围环境(例如高山、丘陵、平原、海洋、森林等)。
在方框206处，控制装置30可以计算或运算数据库中存储的VR影片的各VR影片Gi的多个亚匹配值。其中，该VR影片Gi的多个亚匹配值中的每一个均与行驶路线R的路段RS有关，并可以指示该路段RS的道路相关特征与VR影片Gi的基本片段BP1的故事特征和/或背景特征的匹配度，并且与VR影片Gi的其他基本片段相比，基本片段BP1的故事特征和/或背景特征与路段RS的道路相关特征更加匹配。此处，如果一个剪辑所涉及的与路段的道路相关特征类似或相同的特征项越多，则该剪辑的故事特征和/或背景特征与路段TR的道路相关特征的匹配度就越高。
在方框208处，控制装置30可以根据VR影片Gi的亚匹配值计算VR影片Gi的匹配值，以获取数据库中存储的VR影片的匹配值。例如，可以将VR影片Gi的匹配值计算为VR影片Gi亚匹配值的加权和。
在方框210处，控制装置30可以从数据库存储的VR影片选择匹配值最大的VR影片，作为在行驶路线R上播放的VR影片。显然，与数据库中存储的其他VR影片相比，所选择的VR影片的故事特征和/或背景特征与行驶路线R路段的道路相关特征更匹配。为了简要起见，方框208处选择的VR影片在下文中称为VR影片V。
在方框212处，控制装置30可以将行驶路线R的第一路段和VR影片V的所有基本片段分别设定为目标路段TR和(一个或多个)候选剪辑CP。
在方框214处，控制装置30可以计算目标路段TR的道路相关特征与(一个或多个)候选片段中每一片段的故事特征和/或背景特征的匹配值；其中，匹配值表示目标路段TR的道路相关特征与(一个或多个)候选片段中每一片段的故事特征和/或背景特征的匹配度。此处，如果某个片段涉及的与目标路段TR的道路相关特征类似或相同的特征项越多，则该片段的故事特征和/或背景特征与目标路段TR的道路相关特征的匹配度就越高。
在方框216处，控制装置30可以将(一个或多个)候选片段CP的一个片段CT确定为指定在目标路段TR上播放的片段。其中，与(一个或多个)候选片段CP的(一个或多个)其他片段相比，目标路段TR的道路相关特征与该片段CT的故事特征和/或背景特征更匹配。
在方框218处，控制装置30可以判断目标路段TR是否是行驶路线R的最终路段。
在方框220处，如果方框218的判断结果为否，则控制装置30可以根据VR影片V矩阵所指示的VR影片基本片段之间的播放关系，确定VR影片V的基本片段中可以在片段CT之后播放的情节。
在方框222处，控制装置30可以将目标路段TR后面的行驶路线R的路段设定为目标路段TR，并将在方框220处确定的(一个或多个)片段设定为候选片段CP，然后流程图可以回到方框214。
在方框224处，如果方框218的判断结果为是，则控制装置30可以存储行驶路线R的路段与在行驶路线R该路段上指定播放的片段之间的映射关系。
在方框226处，当到达行驶路线R的每一路段Ki后，控制装置30可以根据所存储的映射关系，向VR装置20提供在路段Ki上指定播放的片段以进行播放。
在方框方框228处，在从控制装置30接收在路段Ki上指定播放的片段后，VR装置20可以播放在该路段Ki上指定播放的片段。
在方框230处，当基于来自车上安装的传感器的传感器数据检测到在特定片段播放期间发生了特定事件(例如减速带、下雨、打雷和下雪等)，且该特定片段包括涉及该特定事件的特定子片段时，控制装置30可以向VR装置20提供播放该特定子片段指令。
在方框232处，在接收到播放该特定子片段的指令之后，VR装置20可以暂停播放当前正在播放的特定片段的子片段，并启动播放该特定子片段。
在方框234处，当检测到特定事件消失时，控制装置30可以向VR装置20发送停止播放该特定子片段的指令。
在方框236处，当接收到停止播放该特定子片段的指令后，VR装置20可以播放暂停的子片段，或者该特定片段中特定子片段之后的子片段。
从上文的描述可以看出，本实施方式获得了将在行驶路线上播放的VR影片，并通过考虑行驶路线路段的条件，从已获取的VR影片基本片段中确定在行驶路线各路段上指定播放的片段，因而在行驶路线上观看VR影片时，使用户感到身临其境，从而改善了用户的视频观看体验。
其他修改变化
所属领域技术人员将会理解，在上述实施方式中，图2中所示的方法包括方框230-236，以进一步改善用户的视频观看体验，但是本发明不仅限于此。在本发明的其他实施方式中，图2所示方法可以不包括方框230-236。
所属领域技术人员将会理解，在上述实施方式中，方框202-224的操作由控制装置30实施，但是本发明不仅限于此。在本发明的其他实施方式中，方框202-224的操作可以由云服务器实施而不是由控制装置30实施。在此条件下，云服务器可以向控制装置30发送行驶路线R的路段与在行路径R的路段上指定播放的片段之间的映射关系，并且控制装置30可以实施方框226，或者方框226、228和234。
所属领域技术人员将会理解，在上述实施方式中，方框206处计算得到的每部VR影片Gi的多个亚匹配值与行驶路线R的路段RS相关，并且可以表示路段RS的道路相关特征与VR影片Gi基本片段BP1的故事特征和/或背景特征的匹配度，并且与VR影片Gi的其他基本片段相比，基本片段BP1的故事特征和/或背景特征可以与路段RS的道路相关特征更匹配，但是本发明不仅限于此。在本发明的其他实施方式中，每部VR影片Gi的多个亚匹配值可以与行驶路线R的一个路段TS相关，并且可以表示该相关路段TS的道路相关特征与VR影片Gi的某个基本片段KN的故事特征和/或背景特征的匹配度；其中，该某个基本片段KN是该VR影片Gi的至少一个基本片段之一，并且与该至少一个基本片段中的其他片段相比，该某个基本片段KN的故事特征和/或背景特征与相关路段TS的道路相关特征更匹配，并且其中，该至少一个基本片段是能够在计算与相关路段TS前一路段有关的亚匹配值时使用的基本片段播放之后播放的(一个或多个)基本片段。
所属领域技术人员将会理解，在上述实施方式中，将在行驶路线R上播放的影片是选自数据库存储的VR影片，但是本发明不仅限于此。在本发明的其他实施方式中，将在行驶路线R上播放的影片还可以是选自数据库存储的普通影片。在此条件下，在行驶路线R路段上指定播放的视频剪辑还可以是所选普通影片中包括的视频剪辑。
所属领域技术人员将会理解，在上述实施方式中，将在行驶路线R上播放的影片选自数据库，但是本发明不仅限于此。在本发明的其他实施方式中，在行驶路线R上播放的影片还可以由用户根据其自身喜好进行规定。
所属领域技术人员将会理解，在上述实施方式中，行驶路线R中包括的所有路段均被指定了视频剪辑，但是本发明不仅限于此。在本发明的其他实施方式中，行驶路线R中包括的仅一个或数个路段被指定了视频剪辑。
所属领域技术人员将会理解，在上述实施方式中，行驶路线R包括多个路段，但是本发明不仅限于此。在本发明的其他实施方式中，行驶路线R也可以包括一个路段。
所属领域技术人员将会理解，在上述实施方式中，行驶路线R是确定的(即，行驶路线的起点和目的地是已知的)，但是本发明不仅限于此。本发明的其他实施方式中，行驶路线R也可以是不确定的(例如，行驶路线R的目的地未知)。
所属领域技术人员将会理解，在上述实施方式中，VR装置20用作一种播放装置，但是本发明不仅限于此。在本发明的其他实施方式中，播放装置可以是具有播放功能的任何合适装置。
图3是示出了根据本发明实施方式的虚拟现实影片的处理方法的流程图。
如图3所示，方法300可包括，在方框302处，获取行驶路线的(一个或多个)路段的(一个或多个)道路相关特征。
方法300还可以包括，在方框304处，提供与行驶路线的(一个或多个)相应路段的(一个或多个)道路相关特征相匹配的至少一个视频剪辑，作为在该(一个或多个)相应路段上播放的(一个或多个)视频剪辑。根据本发明的实施方式，视频剪辑能够在至少一个相应路段上进行播放，并且能够在一个相应路段上播放多个视频剪辑。
例如，方框302-304可以由控制装置30或云服务器实施。
在第一个方面，方框304可以进一步包括，从多个视频剪辑中确定在该行驶路线的至少一个相应路段上指定播放的视频剪辑，其中，在该至少一个相应路段上指定播放的视频剪辑是与多个视频剪辑中的其他视频剪辑相比，故事特征和/或背景特征与至少一个相应路段的道路相关特征更匹配的多个视频剪辑之一。
在第二个方面，在至少一个相应路段上指定播放的视频剪辑可以是能够在该至少一个相应路段的前一路段上指定播放的视频剪辑之后播放的至少一个相应视频剪辑。
在第三个方面，该多个视频剪辑可以是特定影片的多个视频剪辑。
在第四个方面，该特定影片可以是用户规定的影片。
在第五个方面，方法300还可包括从多部影片中选取特定影片，其中，与影片该多部中的其他影片相比，特定影片的故事特征和/或背景特征与行驶路线的至少一个相应路段的道路相关特征更匹配。
在第六个方面，选择特定影片可以包括：计算多部影片中每一部的匹配值，该匹配值表示该部影片的故事特征和/或背景特征与行驶路线的至少一个相应路段的道路相关特征的匹配度；以及从该多部影片中搜索匹配值最大的影片作为特定影片。
在第七个方面，计算多部影片中每一部的匹配值可以包括：针对多部影片中的每一部，计算该部影片的多个亚匹配值，每一个该值与行驶路线的至少一个相应路段相关并且表示该相关路段的道路相关特征与该部影片的某个视频剪辑的故事特征和/或背景特征的匹配度，其中，与该部影片的其他视频剪辑相比，该某个视频剪辑的故事特征和/或背景特征与相关路段的道路相关特征更匹配；以及根据该部影片的亚匹配值计算该多部影片中每一部影片的匹配值。
在第八个方面，计算多部影片中每一部的匹配值可以包括：针对多部影片中的每一部，计算该部影片的多个亚匹配值，每一个该值与行驶路线的至少一个相应路段相关并且表示相关路段的道路相关特征与该不影片某个视频剪辑的故事特征和/或背景特征的匹配度，其中，该某个视频剪辑是该部影片的至少一个视频剪辑之一，并且与该至少一个视频剪辑的其他剪辑相比，该某个视频剪辑的故事特征和/或背景特征与相关路段的道路相关特征更匹配，并且其中，该至少一个视频剪辑是，能够在计算与相关路段的前一路段有关的亚匹配值时使用的视频剪辑之后播放的(一个或多个)视频剪辑；以及根据该部影片的多个亚匹配值计算该多部影片中中每一部影片的匹配值。
在第九个方面，设备300还可以包括：当到达行驶路线的至少一个相应路段中的每一个路段后，播放指定在该路段播放的视频剪辑。
在第十个方面，方法300还可以包括：如果在播放该某个视频剪辑期间发生特定事件，且特定子剪辑涉及该特定事件，则将播放该某个视频剪辑的特定子剪辑。
在第十一个方面，行驶路线的道路相关特征可以包括行驶路线的道路类型、行驶路线的车辆行驶速度、行驶路线的车辆行驶时间和行驶路线的周围环境中的至少一种。
在第十二个方面，特定影片可以是虚拟现实影片，且多个视频剪辑可以是该虚拟现实影片的基本片段。
图4是根据本发明实施方式的视频处理设备的示意图。图4所示设备400可以通过软件、硬件或软硬件组合实施。
如图4所示，设备400可以包括获取模块402和提供模块404。获取模块402可以获取行驶路线的(一个或多个)路段的(一个或多个)道路相关特征。提供模块404可以提供与该行驶路线的(一个或多个)相应路段的(一个或多个)道路相关特征匹配的至少一段视频剪辑，作为在该(一个或多个)相应路段上播放的(一个或多个)视频剪辑。根据本发明的实施方式，视频剪辑能够在至少一个相应路段上进行播放，并且能够在一个相应路段上播放多个视频剪辑。
在第一个方面，提供模块404可包括确定模块，用于从多个视频剪辑中，确定在行驶路线至少一个相应路段上指定播放的视频剪辑，其中，在该至少一个相应路段上指定播放的视频剪辑是与多个视频剪辑中其他视频剪辑相比，故事特征和/或背景特征与该至少一个相应路段的道路相关特征更匹配的多个视频剪辑之一。
在第二个方面，在至少一个相应路段上指定播放的视频剪辑可以是能够在至少一个相应路段的前一路段上指定播放的视频剪辑之后播放的至少一个相应视频剪辑。
在第三个方面，该多个视频剪辑可以是特定影片的视频剪辑。
在第四个方面，该特定影片可以是用户规定的影片。
在第五个方面，设备400还可包括选择模块，用于从多部影片中选择特定影片，其中，与该多部影片中的其他影片相比，该特定影片的故事特征和/或背景特征与行驶路线的至少一个相应路段的道路相关特征更匹配。
在第六个方面，选择模块可包括计算模块和搜索模块，计算模块用于计算该多部影片中每一部的匹配值，该匹配值表示该影片的故事特征和/或背景特征与行驶路线的至少一个相应路段的道路相关特征的匹配度；搜索模块用于从该多部影片中搜索匹配值最大的影片作为特定影片。
在第七个方面，计算模块可以包括第一计算模块和第二计算模块，第一计算模块用于针对多部影片中的每一部计算该影片的多个亚匹配值，每一个亚匹配值与行驶路线的至少一个相应路段之一相关并且指示相关路段的道路相关特征与该影片的某个视频剪辑的故事特征和/或背景特征的匹配度，其中，与该影片的其他视频剪辑相比，该某个视频剪辑的故事特征和/或背景特征与相关路段的道路相关特征更匹配；第二计算模块用于根据该影片的亚匹配值来计算多部影片中每一部的匹配值。
在第八个方面，计算模块可以包括第三计算模块和第四计算模块，第三计算模块用于针对多部影片中的每一部计算该影片的多个亚匹配值，每一个亚匹配值与行驶路线的至少一个相应路段之一相关并且表示相关路段的道路相关特征与该影片某个视频剪辑的故事特征和/或背景特征的匹配度，其中，某个视频剪辑是该影片的至少一个视频剪辑之一，并且与该至少一个视频剪辑中的其他视频剪辑相比，该某个视频剪辑的故事特征和/或背景特征与相关路段的道路相关特征更匹配，并且其中，该至少一个视频剪辑是能够在计算与相关路段的前一路段有关的亚匹配值时使用的视频剪辑之后播放的(一个或多个)视频剪辑；第四计算模块用于根据该影片的多个亚匹配值来计算多部影片中每一部的匹配值。
在第九个方面，设备400还可包括引起模块(起因模块，causing module)，当到达行驶路线至少一个相应路段中的每一个之后，利用该模块播放指定在该路段播放的视频剪辑。
在第十个方面，该引起模块被进一步配置为，如果在播放某个视频剪辑期间发生特定事件，且特定子剪辑涉及该特定事件，则播放该某个视频剪辑的该特定子剪辑。
在第十一个方面，行驶路线的道路相关特征可以包括行驶路线的道路类型、行驶路线的车辆行驶速度、行驶路线的车辆行驶时间和行驶路线的周围环境中的至少一种。
在第十二个方面，特定影片可以是虚拟现实影片，并且多个视频剪辑可以是该虚拟现实影片的基本片段。
图5示出了根据本发明实施方式的视频处理装置的示意图。如图5所示，装置500可以包括处理器502和存储器504。存储器504可以存储可执行指令，执行时，该可执行指令使得处理器502执行图3所示方法300中所包括的操作。
本发明的实施方式可提供一种计算机程序产品，其包括包含代码的机器可读介质，机器根据该代码执行图3所示方法300中所包括的操作。
本发明的实施方式还可以提供视频制作方案，利用此方案，可以制作其背景视频剪辑与路段的道路相关特征对应的视频剪辑。
图6示出了根据本发明实施方式的视频制作方法的示意图。
如图6所示，方法600可以包括：在方框602处，获取道路网络中至少一个路段的(一个或多个)道路相关特征。
方法600还可包括：在方框604处，制作选择用于在具有匹配的(一个或多个)道路相关特征的(一个或多个)相应路段上播放的至少一个视频剪辑集，其中该至少一个视频剪辑集中的每一个由前景视频剪辑和与至少一个代表性道路相关特征之一相对应的至少一个背景视频剪辑中的每一个分别合成。
图7示出了根据本发明实施方式的视频制作设备的示意图。图7所示的设备700可以通过软件、硬件或软硬件组合来实施。
如图7所示，设备700可以包括获取模块702和制作模块704。获取模块702被配置成用于获取道路网络的至少一个路段的(一个或多个)道路相关特征。制作模块704被配置成用于制作选择用于在具有匹配的(一个或多个)道路相关特征的(一个或多个)相应路段上播放的至少一个视频剪辑集，其中该至少一个视频剪辑集中的每一个由前景视频剪辑和与至少一个代表性道路相关特征之一相对应的至少一个背景视频剪辑中的每一个分别合成。
图8示出了根据本发明实施方式的视频制作装置的示意图。如图8所示，装置800可以包括处理器802和用于存储可执行指令的存储器804，执行时，该可执行指令使得处理器802执行图6所示方法700中所包括的操作。
本发明的实施方式可以提供其中包括包含代码的机器可读介质的计算机程序产品，机器根据该代码执行图6所示方法700中所包括的操作。
鉴于本文所述发明的描述和实践，对于本领域普通技术人员而言，本发明的其他实施方式和修改变型将是显而易见的。本文中给出的描述和实例应被视作仅仅是示例性的，并且所附权利要求书所涵盖本发明任意其他实施方式或修改变型均落入本发明的实际保护范围内。

Claims (20)

1.一种视频处理方法，包括：
获取行驶路线上的路段的道路相关特征；以及
提供与所述行驶路线的相应路段的道路相关特征相匹配的至少一个视频剪辑，作为在所述相应路段上播放的视频剪辑。
2.权利要求1的方法；其中，提供所述至少一个视频剪辑包括：
从多个视频剪辑中，确定在所述行驶路线的至少一个相应路段上指定播放的视频剪辑，其中，在所述至少一个相应路段上指定播放的视频剪辑是与所述多个视频剪辑中的其他视频剪辑相比，其故事特征和/或背景特征与所述至少一个相应路段的道路相关特征更匹配的所述多个视频剪辑之一。
3.权利要求2的方法；其中，在所述至少一个相应路段上指定播放的视频剪辑是能够在所述至少一个相应路段的前一路段上指定播放的视频剪辑之后播放的至少一个视频剪辑。
4.权利要求2或3的方法，其中，所述多个视频剪辑是特定影片的视频剪辑。
5.权利要求4的方法，其中，所述特定影片是用户规定的影片。
6.权利要求4的方法，还包括：
从多部影片中选择所述特定影片，其中，与所述多部影片中的其他影片相比，所述特定影片的故事特征和/或背景特征与所述行驶路线的至少一个相应路段的道路相关特征更匹配。
7.权利要求6的方法，其中，所述特定影片的选择包括：
计算所述多部影片中每一部的匹配值，所述匹配值表示该影片的故事特征和/或背景特征与所述行驶路线的至少一个相应路段的道路相关特征的匹配度；以及
从所述多部影片搜索匹配值最大的影片作为所述特定影片。
8.权利要求7的方法，其中，计算所述多部影片中每一部的匹配值包括：
针对所述多部影片中的每一部，计算该影片的多个亚匹配值，每个所述亚匹配值与所述行驶路线的至少一个相应路段相关并且表示所述相关路段的道路相关特征与该影片某个视频剪辑的故事特征和/或背景特征的匹配度，其中，与该影片的其他视频剪辑相比，所述某个视频剪辑的故事特征和/或背景特征与所述相关路段的道路相关特征更匹配；以及
根据该影片的亚匹配值来计算所述多部影片中每一部的匹配值。
9.权利要求7的方法，其中，计算所述多部影片中每一部的匹配值包括：
针对所述多部影片中的每一部，计算该影片的多个亚匹配值，每个所述亚匹配值与所述行驶路线的至少一个相应路段相关并且表示所述相关路段的道路相关特征与该影片某个视频剪辑的故事特征和/或背景特征的匹配度，其中，所述某个视频剪辑是该影片的至少一个视频剪辑之一并且与所述至少一个视频剪辑的其他视频剪辑相比，所述某个视频剪辑的故事特征和/或背景特征与相关路段的道路相关特征更匹配，并且其中，所述至少一个视频剪辑是能够在计算与所述相关路段的前一路段有关的亚匹配值时使用的视频剪辑之后播放的视频剪辑；以及
根据该影片的所述多个亚匹配值来计算所述多部影片中每一部的匹配值。
10.权利要求2-9中任一项的方法，进一步包括：
在到达所述行驶路线的至少一个相应路段后，播放在该路段指定播放的视频剪辑。
11.权利要求10的方法，进一步包括：
如果在播放某个视频剪辑期间发生特定事件，且特定子剪辑涉及所述特定事件，则播放所述某个视频剪辑的所述特定子剪辑。
12.权利要求1的方法，其中，所述行驶路线的道路相关特征包括行驶路线的道路类型、行驶路线的车辆行驶速度、行驶路线的车辆行驶时间和行驶路线的周围环境中的至少一种。
13.权利要求4的方法，其中，所述特定影片是虚拟现实影片，且所述多个视频剪辑是所述虚拟现实影片的基本片段。
14.一种视频处理设备，包括：
用于实施权利要求1-13中任一项所述方法中包括的操作的模块。
15.一种视频处理装置，包括：
处理器；和
用于存储可执行指令的存储器，执行时，所述可执行指令使的所述处理器执行权利要求1-13中任一项所述方法中包括的操作。
16.一种计算机程序产品，包括：
具有可执行指令的可读介质，执行时，所述可执行指令使机器执行权利要求1-13中任一项所述方法中包括的操作。
17.一种视频制作方法，包括：
获取道路网络的至少一个路段的道路相关特征；以及
制作选择在具有匹配的道路相关特征的相应路段上播放的至少一个视频剪辑集，其中所述至少一个视频剪辑集中的每一个由前景视频剪辑和与至少一个代表性道路相关特征相对应的至少一个背景视频剪辑中的每一个分别合成。
18.一种视频制作设备，包括：
获取模块，用于获取道路网络的至少一个路段的道路相关特征；
制作模块，用于制作选择在具有匹配的道路相关特征的相应路段上播放的至少一个视频剪辑集，其中所述至少一个视频剪辑集中的每一个由前景视频剪辑和与至少一个代表性道路相关特征相对应的至少一个背景视频剪辑中的每一个分别合成。
19.一种视频制作装置，包括：
处理器；和
用于存储可执行指令的存储器，执行时，所述可执行指令使得所述处理器执行权利要求17的方法中包括的操作。
20.一种计算机程序产品，包括：
具有可执行指令的可读介质，执行时，所述可执行指令使得机器执行权利要求17的方法中包括的操作。
CN201680090946.9A 2016-11-22 2016-11-22 视频处理方法和设备 Active CN109983760B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/106807 WO2018094573A1 (en) 2016-11-22 2016-11-22 Method and apparatus for processing a video

Publications (2)

Publication Number Publication Date
CN109983760A true CN109983760A (zh) 2019-07-05
CN109983760B CN109983760B (zh) 2021-12-21

Family

ID=62194653

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680090946.9A Active CN109983760B (zh) 2016-11-22 2016-11-22 视频处理方法和设备

Country Status (4)

Country Link
US (1) US11107502B2 (zh)
EP (1) EP3545672A4 (zh)
CN (1) CN109983760B (zh)
WO (1) WO2018094573A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110611806A (zh) * 2019-09-25 2019-12-24 北京蓦然认知科技有限公司 一种推送vr视频的方法、系统及共享平台

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006056874A1 (de) * 2006-12-01 2008-06-05 Siemens Ag Navigationsgerät
US20100023544A1 (en) * 2008-07-22 2010-01-28 At&T Labs System and method for adaptive media playback based on destination
US20110102637A1 (en) * 2009-11-03 2011-05-05 Sony Ericsson Mobile Communications Ab Travel videos
CN105222802A (zh) * 2015-09-22 2016-01-06 小米科技有限责任公司 导航、导航视频生成方法及装置
CN105657294A (zh) * 2016-03-09 2016-06-08 北京奇虎科技有限公司 在移动终端上呈现虚拟特效的方法及装置
CN105718547A (zh) * 2016-01-18 2016-06-29 传成文化传媒（上海）有限公司 基于景点标签的导游方法及系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5982298A (en) 1996-11-14 1999-11-09 Microsoft Corporation Interactive traffic display and trip planner
US7561966B2 (en) 2003-12-17 2009-07-14 Denso Corporation Vehicle information display system
WO2006095808A1 (ja) * 2005-03-11 2006-09-14 Pioneer Corporation 映像再生装置、映像再生方法、映像再生プログラムおよびコンピュータに読み取り可能な記録媒体
US20070150188A1 (en) 2005-05-27 2007-06-28 Outland Research, Llc First-person video-based travel planning system
US7840178B2 (en) * 2005-07-12 2010-11-23 Martin E. Hellman FM broadcast system competitive with satellite radio
US8593485B1 (en) 2009-04-28 2013-11-26 Google Inc. Automatic video and dense image-based geographic information matching and browsing
TWM380533U (en) * 2009-11-04 2010-05-11 Transtouch Technology Inc Capacitive touch panel
US9236093B2 (en) * 2013-08-01 2016-01-12 Customplay Llc Video bookmark generating data

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006056874A1 (de) * 2006-12-01 2008-06-05 Siemens Ag Navigationsgerät
US20100023544A1 (en) * 2008-07-22 2010-01-28 At&T Labs System and method for adaptive media playback based on destination
US20110102637A1 (en) * 2009-11-03 2011-05-05 Sony Ericsson Mobile Communications Ab Travel videos
CN105222802A (zh) * 2015-09-22 2016-01-06 小米科技有限责任公司 导航、导航视频生成方法及装置
CN105718547A (zh) * 2016-01-18 2016-06-29 传成文化传媒（上海）有限公司 基于景点标签的导游方法及系统
CN105657294A (zh) * 2016-03-09 2016-06-08 北京奇虎科技有限公司 在移动终端上呈现虚拟特效的方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110611806A (zh) * 2019-09-25 2019-12-24 北京蓦然认知科技有限公司 一种推送vr视频的方法、系统及共享平台
CN110611806B (zh) * 2019-09-25 2021-01-26 北京蓦然认知科技有限公司 一种推送vr视频的方法、系统及共享平台

Also Published As

Publication number Publication date
US20190355392A1 (en) 2019-11-21
WO2018094573A1 (en) 2018-05-31
CN109983760B (zh) 2021-12-21
EP3545672A4 (en) 2020-10-28
EP3545672A1 (en) 2019-10-02
US11107502B2 (en) 2021-08-31
WO2018094573A8 (en) 2019-05-31

Similar Documents

Publication Publication Date Title
KR101713493B1 (ko) 현실을 증강하는 방법, 클라이언트 장치 및 서버
US9189699B2 (en) Augmented reality interaction implementation method and system
CN111901626B (zh) 背景音频确定方法、视频剪辑方法、装置和计算机设备
US10650598B2 (en) Augmented reality-based information acquiring method and apparatus
CN109656441B (zh) 一种基于虚拟现实的导览方法及系统
CN107633441A (zh) 追踪识别视频图像中的商品并展示商品信息的方法和装置
EP2875602A1 (en) Determining user interest through detected physical indicia
US11188945B2 (en) Information processing apparatus and information processing method
KR20130137968A (ko) 사용자 단말에서 증강 현실을 통한 이벤트 제공 시스템, 방법 및 컴퓨터 판독 가능한 기록 매체
CN112948686B (zh) 位置推荐处理方法及装置
CN112330819A (zh) 基于虚拟物品的交互方法、装置及存储介质
JP5036178B2 (ja) コンテンツ案内システム、コンテンツ案内方法、コンテンツ案内支援サーバ、コンテンツ案内支援方法、プログラム及び情報記憶媒体
JPWO2019215779A1 (ja) モデル提供システム、方法およびプログラム
Nurmi et al. Influence of landmark-based navigation instructions on user attention in indoor smart spaces
CN112312142B (zh) 视频播放控制方法、装置和计算机可读存储介质
KR101613777B1 (ko) 라이브 댄스 클래스 및 라이브 뮤직 룸을 위한 서비스 시스템 및 서비스 방법
US20170287223A1 (en) Information processing method and electronic device
JP7001149B2 (ja) データ提供システムおよびデータ収集システム
CN109983760A (zh) 视频处理方法和设备
US20210224537A1 (en) Identification system, model re-learning method and program
Yim et al. Design and implementation of a smart campus guide android app
Möller et al. Tool support for prototyping interfaces for vision-based indoor navigation
CN114344898A (zh) 一种游戏中虚拟对象标记的方法和装置
JP2014228458A (ja) 投票処理システム、サーバ装置、端末装置、投票処理用プログラムおよび投票処理方法
US20220148215A1 (en) Information processing system, content generation device, content presentation device, content generation method, content presentation method, and program

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant