CN112055264B - 一种视频数据拆分方法及其系统以及电子设备和计算系统 - Google Patents

一种视频数据拆分方法及其系统以及电子设备和计算系统 Download PDF

Info

Publication number
CN112055264B
CN112055264B CN201910489193.4A CN201910489193A CN112055264B CN 112055264 B CN112055264 B CN 112055264B CN 201910489193 A CN201910489193 A CN 201910489193A CN 112055264 B CN112055264 B CN 112055264B
Authority
CN
China
Prior art keywords
eye
video stream
stream data
video
mipi
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910489193.4A
Other languages
English (en)
Other versions
CN112055264A (zh
Inventor
王斌
周炳
胡增新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sunny Optical Zhejiang Research Institute Co Ltd
Original Assignee
Sunny Optical Zhejiang Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sunny Optical Zhejiang Research Institute Co Ltd filed Critical Sunny Optical Zhejiang Research Institute Co Ltd
Priority to CN201910489193.4A priority Critical patent/CN112055264B/zh
Publication of CN112055264A publication Critical patent/CN112055264A/zh
Application granted granted Critical
Publication of CN112055264B publication Critical patent/CN112055264B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/167Synchronising or controlling image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

一种视频数据拆分方法及其系统以及电子设备和计算系统。该视频数据拆分方法包括步骤:对通过一基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频接卸数据;根据所配置的分辨率信息,对该视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据;以及分别对该第一纯视频流数据和该第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据,供一近眼显示设备基于该第一和第二视频流数据实现左右眼显示。

Description

一种视频数据拆分方法及其系统以及电子设备和计算系统
技术领域
本发明涉及虚拟(增强)现实技术领域,特别是涉及一种视频数据拆分方法及其系统以及电子设备和计算系统。
背景技术
虚拟(增强)现实作为新一代人机交互平台,其聚焦于身临其境的沉浸体验,强调用户连接交互深度而非连接广度。随着技术和产业生态的持续发展,虚拟现实的概念不断演进,将借助近眼显示、感知交互、渲染处理、网络传输和内容制作等新一代信息通信技术,构建身临其境与虚实融合沉浸体验所涉及的产品和服务统称为虚拟(增强)现实(VirtualReality,VR/Augmented Reality,AR)。相比于虚拟(增强)现实技术体系中的其他领域,近眼显示技术轨道呈现螺旋上升的发展态势,即近眼显示管件体验指标间的权衡取舍与VR/AR的差异话功能定位成为推动各类近眼显示技术演进突破的主要动因。
对于虚拟(增强)现实中的近眼显示而言,感知交互强调与近眼显示、渲染处理与网络传输等的技术协同,通过提高视觉、触觉、听觉等多感官通道的一致性体验,以及环境理解的准确程度,实现虚拟现实“感”、“知”能力的持续进化。换句话说,近眼显示技术集视频采集与显示于一体,需要承载经由不同传感器采集或显示的多路视频流的处理,例如鱼眼摄像头、RGB相机、TOF传感器、LCOS显示器或OLED显示器等等。虽然这些视频流通常都是遵循MIPI协议或者LVDS协议的,但基带芯片处理器(如AP)上相关接口资源有限(即数量有限),例如AP845只有2个4路DSI DPHY,而向近眼显示设备传输左右眼视频就需要两个接口,这导致现有的近眼显示设备无法接入更多的传感器,极大地限制了近眼显示设备的功能实现。因此,如何在有限的接口下实现更多的功能,已经成为当下急需解决的问题。
发明内容
本发明的一目的在于提供一种视频数据拆分方法及其系统以及电子设备和计算系统,其能够提高基带芯片处理器上接口的利用率,以便在有限的接口下实现更多的功能。
本发明的另一目的在于提供一种视频数据拆分方法及其系统以及电子设备和计算系统,其中,在本发明的一实施例中,所述视频数据拆分系统能够灵活配置参数,以便适应不同分辨率、不同通道数、不同帧率的视频拆分。
本发明的另一目的在于提供一种视频数据拆分方法及其系统以及电子设备和计算系统,其中,在本发明的一实施例中,所述视频数据拆分方法能够仅利用基带芯片处理器的一个接口来实现近眼显示设备的左右眼显示。
本发明的另一目的在于提供一种视频数据拆分方法及其系统以及电子设备和计算系统,其中,在本发明的一实施例中,所述视频数据拆分方法能够根据配置的分辨率信息进行左右side by side拆分,以获得左右眼视频。
本发明的另一目的在于提供一种视频数据拆分方法及其系统以及电子设备和计算系统,其中,在本发明的一实施例中,所述视频数据拆分系统不仅能够对MIPI视频流进行拆分处理,而且还能够对LVDS视频流进行拆分处理,有助于扩大所述视频数据拆分系统的适用范围。
本发明的另一目的在于提供一种视频数据拆分方法及其系统以及电子设备和计算系统,其中,在本发明的一实施例中,所述视频数据拆分系统引入可编程芯片,以便根据具体需要进行灵活配置,来实现不同视频流的拆分,有助于提升所述视频数据拆分系统的适应性。
本发明的另一目的在于提供一种视频数据拆分方法及其系统以及电子设备和计算系统,为了达到上述目的,在本发明中不需要采用昂贵的材料或复杂的结构。因此,本发明成功和有效地提供一解决方案,不只提供简单的视频数据拆分方法及其系统以及电子设备和计算系统,同时还增加了所述视频数据拆分方法及其系统以及电子设备和计算系统的实用性和可靠性。
为了实现上述至少一发明目的或其他目的和优点,本发明提供了一种视频数据拆分方法,包括步骤:
对通过一基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频接卸数据;
根据所配置的分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据;以及
分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据,供一近眼显示设备基于所述第一和第二视频流数据实现左右眼显示。
在本发明的一实施例中,所述的视频数据拆分方法,还包括步骤:
分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理,使得隔离处理后的所述第一视频流数据和所述第二视频流数据能够被同时输出至该近眼显示设备的左右眼显示单元。
在本发明的一实施例中,所述对通过一基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频接卸数据的步骤,包括步骤:
判断来自该基带芯片处理器的所述视频流数据是基于MIPI协议,还是基于LVDS协议;
如果所述视频流数据基于所述MIPI协议,则对所述视频流数据进行MIPI协议解析,以获得MIPI视频解析数据;以及
如果所述视频流数据基于所述LVDS协议,则对所述视频流数据进行LVDS协议解析,以获得LVDS视频解析数据。
在本发明的一实施例中,所述根据所配置的分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据的步骤,包括步骤:
根据所述分辨率信息,对所述MIPI视频解析数据进行左右拆分处理,以获得左眼MIPI纯视频流数据和右眼MIPI纯视频流数据;和
根据所述分辨率信息,对所述LVDS视频解析数据进行左右拆分处理,以获得左眼LVDS纯视频流数据和右眼LVDS纯视频流数据。
在本发明的一实施例中,所述分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据的步骤,包括步骤:
根据所述MIPI协议,分别对所述左眼MIPI纯视频流数据和所述右眼MIPI纯视频流数据进行打包处理,以获得完整的左眼MIPI视频流数据和右眼MIPI视频流数据,供所述近眼显示设备基于所述左眼和右眼MIPI视频流数据实现左右眼显示;和
根据所述LVDS协议,分别对所述左眼LVDS纯视频流数据和所述右眼LVDS纯视频流数据进行打包处理,以获得完整的左眼LVDS视频流数据和右眼LVDS视频流数据,供所述近眼显示设备基于所述左眼和右眼LVDS视频流数据实现左右眼显示。
在本发明的一实施例中,所述分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理的步骤,包括步骤:
分别对所述左眼MIPI视频流数据和所述右眼MIPI视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼MIPI视频流数据视频流数据的输出同步;和
分别对所述左眼LVDS视频流数据和所述右眼LVDS视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼LVDS视频流数据视频流数据的输出同步。
根据本发明的另一方面,本发明还提供了一种视频数据拆分系统,适于将基带芯片处理器上单一接口与近眼显示设备可通信地连接,其中所述视频数据拆分系统包括依次可通信地连接的:
一解析模块,其中所述解析模块适于与该基带芯片处理器上该单一接口可通信地连接,用于对通过一基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频接卸数据;
一拆分模块,用于根据所配置的分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据;以及
一打包模块,其中所述打包模块适于与该近眼显示设备的左右眼显示单元可通信地连接,用于分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据,供该近眼显示设备基于所述第一和第二视频流数据实现左右眼显示。
在本发明的一实施例中,所述的视频数据拆分系统,还包括一与所述打包模块可通信地连接的隔离模块,其中所述隔离模块适于该近眼显示设备的该左右眼显示单元可通信地连接,用于分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理,使得隔离处理后的所述第一视频流数据和所述第二视频流数据能够被同时输出至该近眼显示设备的该左右眼显示单元。
在本发明的一实施例中,所述解析模块包括一判断模块、一MIPI协议解析模块以及一LVDS协议解析模块,其中所述判断模块用于判断来自该基带芯片处理器的所述视频流数据是基于MIPI协议,还是基于LVDS协议;其中所述MIPI协议解析模块与所述判断模块可通信地连接,用于如果所述视频流数据基于所述MIPI协议,则对所述视频流数据进行MIPI协议解析,以获得MIPI视频解析数据;其中所述LVDS协议解析模块与所述判断模块可通信地连接,用于如果所述视频流数据基于所述LVDS协议,则对所述视频流数据进行LVDS协议解析,以获得LVDS视频解析数据。
在本发明的一实施例中,所述拆分模块包括一MIPI视频拆分模块和一LVDS视频拆分模块,其中所述MIPI视频拆分模块与所述MIPI协议解析模块可通信地连接,用于根据所述分辨率信息,对所述MIPI视频解析数据进行左右拆分处理,以获得左眼MIPI纯视频流数据和右眼MIPI纯视频流数据;其中所述LVDS视频拆分模块与所述LVDS协议解析模块可通信地连接,用于根据所述分辨率信息,对所述LVDS视频解析数据进行左右拆分处理,以获得左眼LVDS纯视频流数据和右眼LVDS纯视频流数据。
在本发明的一实施例中,所述打包模块包括一左眼MIPI协议打包模块、一右眼MIPI协议打包模块、一左眼LVDS协议打包模块以及一右眼LVDS协议打包模块,其中所述左眼MIPI协议打包模块和所述右眼MIPI协议打包模块分别与所述MIPI视频拆分模块可通信地连接,用于根据所述MIPI协议,分别对所述左眼MIPI纯视频流数据和所述右眼MIPI纯视频流数据进行打包处理,以获得完整的左眼MIPI视频流数据和右眼MIPI视频流数据,供所述近眼显示设备基于所述左眼和右眼MIPI视频流数据实现左右眼显示;其中所述左眼LVDS协议打包模块和所述右眼LVDS协议打包模块分别与所述LVDS视频拆分模块可通信地连接,用于根据所述LVDS协议,分别对所述左眼LVDS纯视频流数据和所述右眼LVDS纯视频流数据进行打包处理,以获得完整的左眼LVDS视频流数据和右眼LVDS视频流数据,供所述近眼显示设备基于所述左眼和右眼LVDS视频流数据实现左右眼显示。
在本发明的一实施例中,所述隔离模块包括一左眼MIPI视频隔离模块、一右眼MIPI视频隔离模块、一左眼LVDS视频隔离模块以及一右眼LVDS视频隔离模块,其中所述左眼MIPI视频隔离模块与所述左眼MIPI协议打包模块可通信地连接,用于对所述左眼MIPI视频流数据进行隔离时钟域处理,其中所述右眼MIPI视频隔离模块与所述右眼MIPI协议打包模块可通信地连接,用于对所述右眼MIPI视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼MIPI视频流数据视频流数据的输出同步;其中所述左眼LVDS视频隔离模块与所述左眼LVDS协议打包模块可通信地连接,用于对所述左眼LVDS视频流数据进行隔离时钟域处理,其中所述右眼LVDS视频隔离模块与所述右眼LVDS协议打包模块可通信地连接,用于对所述右眼LVDS视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼LVDS视频流数据视频流数据的输出同步。
在本发明的一实施例中,所述视频数据拆分系统基于可编程芯片进行构建。
根据本发明的另一方面,本发明还提供了一种电子设备,包括:
一近眼显示设备,其中所述近眼显示设备包括左右眼显示单元;
一具有基带芯片处理器的盒子;以及
上述任一所述的视频数据拆分系统,其中所述视频数据拆分系统被设置于所述盒子,并且所述视频数据拆分系统将所述基带芯片处理器上的单一接口与所述近眼显示设备的所述左右眼显示单元可通信地连接。
根据本发明的另一方面,本发明还提供了一种计算系统,包括:
一逻辑机,用于执行指令;和
一存储机,其中所述存储机被配置用于保存由所述逻辑机执行以实现上述任一所述的视频数据拆分方法的机器可读指令。
根据本发明的另一方面,本发明还提供了一种计算可读存储介质,所述计算可读存储介质上存储有计算程序指令,当所述计算程序指令被计算装置执行时,可操作来执行上述任一项所述的视频数据拆分方法。
通过对随后的描述和附图的理解,本发明进一步的目的和优势将得以充分体现。
本发明的这些和其它目的、特点和优势,通过下述的详细说明,附图和权利要求得以充分体现。
附图说明
图1是根据本发明的一实施例的一种视频数据拆分方法的流程示意图。
图2示出了根据本发明的上述实施例的所述视频数据拆分方法的步骤之一的一个示例。
图3示出了根据本发明的上述实施例的所述视频数据拆分方法的步骤之二的一个示例。
图4示出了根据本发明的上述实施例的所述视频数据拆分方法的步骤之三的一个示例。
图5示出了根据本发明的上述实施例的所述视频数据拆分方法的步骤之四的一个示例。
图6示出了根据本发明的一实施例的一种视频数据拆分系统的框图示意图。
图7示出了根据本发明的上述实施例的所述视频数据拆分系统的系统示意图。
图8示出了根据本发明的一实施例的一种电子设备的一个示例。
图9示出了根据本发明的一实施例的一种计算系统的一个示例。
具体实施方式
以下描述用于揭露本发明以使本领域技术人员能够实现本发明。以下描述中的优选实施例只作为举例,本领域技术人员可以想到其他显而易见的变型。在以下描述中界定的本发明的基本原理可以应用于其他实施方案、变形方案、改进方案、等同方案以及没有背离本发明的精神和范围的其他技术方案。
在本发明中,权利要求和说明书中术语“一”应理解为“一个或多个”,即在一个实施例,一个元件的数量可以为一个,而在另外的实施例中,该元件的数量可以为多个。除非在本发明的揭露中明确示意该元件的数量只有一个,否则术语“一”并不能理解为唯一或单一,术语“一”不能理解为对数量的限制。
在本发明的描述中,需要理解的是,属于“第一”、“第二”等仅用于描述目的,而不能理解为指示或者暗示相对重要性。本发明的描述中,需要说明的是,除非另有明确的规定和限定,属于“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接或者一体地连接;可以是机械连接,也可以是电连接;可以是直接连接,也可以是通过媒介间接连结。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
随着技术和产业生态的持续发展,虚拟现实的概念不断演进,将借助近眼显示、感知交互、渲染处理、网络传输和内容制作等新一代信息通信技术,构建身临其境与虚实融合沉浸体验所涉及的产品和服务统称为虚拟(增强)现实(Virtual Reality,VR/AugmentedReality,AR)。在虚拟(增强)现实领域中,近眼显示技术呈上升的发展态势,特别是近眼显示设备(如AR眼镜等)集视频采集与显示于一体,需要承载经由不同传感器采集或显示的多路视频流的处理。虽然这些视频流通常都是遵循MIPI协议或者LVDS协议的,但基带芯片处理器(如AP)上相关接口资源有限(即数量有限),例如AP845只有2个4路DSI DPHY,而近眼显示设备的左右眼显示所需的视频就需要两个接口进行数据传输,这导致现有的近眼显示设备将无法接入更多的传感器,极大地限制了近眼显示设备的功能实现。
因此,为了在有限的接口下实现更多的功能,本发明提供了一种视频数据拆分方法及其系统以及电子设备和计算系统,其先对通过基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频解析数据;再根据分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据;最后分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据,供近眼显示设备根据所述第一视频流数据和所述第二视频流数据实现左右眼显示,从而使得所述近眼显示设备仅利用所述基带芯片处理器上的一个接口就能够实现所述近眼显示设备的左右眼显示,而不像现有技术那样需要利用所述基带芯片处理器上的两个接口才能够实现左右眼显示,有效地提高了基台芯片处理器上的接口利用率。
示意性方法
参考说明书附图之图1至图5所示,根据本发明的一实施例的一种视频数据拆分方法被阐明。具体地,如图1所示,所述视频数据拆分方法,包括步骤:
S110:对通过基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频解析数据;
S120:根据所配置的分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据;以及
S130:分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据,供近眼显示设备基于所述第一和第二视频流数据实现左右眼显示。
进一步地,所述近眼显示设备进行左右眼显示时需要根据具体显示要求同步获得所述第一和第二视频流数据,但由于所述第一视频流数据和所述第二视频流数据的时钟域可能不同步,并且来自所述基带芯片处理器的所述视频流数据的传输速度与所述近眼显示设备的显示速度存在差异,因此在打包获得所述第一和第二视频流数据之后,还需要分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理,使得隔离后的所述第一视频流数据和所述第二视频流数据的输出同步,满足所述近眼显示设备的显示需要。换言之,如图1所示,在本发明的所述步骤S130之后,所述视频数据拆分方法还包括步骤:
S140:分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理,使得隔离处理后的所述第一视频流数据和所述第二视频流数据能够被同步输出至所述近眼显示设备的左右眼显示单元。
值得一提的是,在对视频流数据进行解析时,需要先获知所述视频流数据所基于的协议,再个根据相应的协议对所述视频流数据进行协议解析。而所述近眼显示设备的视频流通常基于MIPI(Mobile Industry Processor Interface,移动行业处理器接口)协议或者LVDS(Low-Voltage Differential Signaling,低电压差分信号)协议。换言之,在本发明的所述视频数据拆分方法中,所述视频流数据可以被实施为基于MIPI协议的视频流数据(简称MIPI视频流数据),也可以被实施为基于LVDS协议的视频流数据(简称LVDS视频流数据)。
因此,在本发明的一示例中,如图2所示,所述视频流数据拆分方法的所述步骤S110,包括步骤:
S111:判断来自所述基带芯片处理器的所述视频流数据是基于MIPI协议,还是基于LVDS协议;
S112:如果所述视频流数据基于所述MIPI协议,则对所述视频流数据进行MIPI协议解析,以获得MIPI视频解析数据;以及
S113:如果所述视频流数据基于所述LVDS协议,则对所述视频流数据进行LVDS协议解析,以获得LVDS视频解析数据。
值得注意的是,以基于MIPI协议的视频流数据为例,在对所述视频流数据解析MIPI协议时,将从所述视频流数据中解析出长短有效包,产生包头使所述长短有效包能够被标志,并对所述长短有效包进行包头ECC校验和包尾CRC校验,以便在出现数据传输错误时快速地找到出错源头。可以理解的是,由于所述基带芯片处理器上用于传输所述基于MIPI协议的视频流数据的接口和用于传输所述LVDS协议的视频流数据的接口互不相同,因此在本发明的所述视频数据拆分方法中,可以通过直接分析所述视频流数据的类型,以判断出所述视频流数据具体基于何种协议,或者还可以通过事先配置好的接口参数来间接分析,以判断出所述视频流数据具体基于何种协议,本发明对此不再赘述。
此外,在通过解析处理以获得所述MIPI视频解析数据或者所述LVDS视频解析数据之后,还需要对所述MIPI视频解析数据或者所述LVDS视频解析数据进行拆分处理,以获得用于左右眼显示的视频数据。换言之,所述第一纯视频流数据可以但不限于被实施为一左眼MIPI纯视频流数据或一左眼LVDS纯视频流数据,相应地所述第二纯视频流数据可以但不限于被实施为一右眼MIPI纯视频流数据或一右眼LVDS纯视频流数据。
具体地,在本发明的一示例中,如图3所示,所述视频流数据拆分方法的所述步骤S120,包括步骤:
S121:根据所述分辨率信息,对所述MIPI视频解析数据进行左右拆分处理,以获得左眼MIPI纯视频流数据和右眼MIPI纯视频流数据;和
S122:根据所述分辨率信息,对所述LVDS视频解析数据进行左右拆分处理,以获得左眼LVDS纯视频流数据和右眼LVDS纯视频流数据。
更具体地,以所述MIPI视频解析数据为例,在进行拆分时,先对所述MIPI视频解析数据中每一行视频进行缓存,然后根据配置的所述分辨率信息对所述MIPI视频解析数据中每一行视频进行左右side by side拆分,以获得分辨率相同且分辨率为所述视频流数据的分辨率一半的所述左眼MIPI纯视频流数据和所述右眼MIPI纯视频流数据。例如,当来自所述基带芯片处理器的所述视频流数据的分辨率为2560*960时,经解析和拆分后获得的所述左眼MIPI纯视频流数据和所述右眼MIPI纯视频流数据的分辨率均为1280*960。
值得注意的是,由于经拆分而获得的所述第一纯视频流数据(如所述左眼MIPI纯视频流数据或者所述左眼LVDS纯视频流数据)和所述第二纯视频流数据(如所述右眼MIPI纯视频流数据或者所述右眼LVDS纯视频流数据)不含包头和包尾,因此需要对拆分完的所述第一纯视频流数据和所述第二纯视频流数据分别重新打包,以重新产生包头和包尾,并对打包形成的完整长包重新进行CRC校验,便于后续出错源头的查找。
具体地,在本发明的一示例中,如图4所示,所述视频流数据拆分方法的所述步骤S130,包括步骤:
S131:根据所述MIPI协议,分别对所述左眼MIPI纯视频流数据和所述右眼MIPI纯视频流数据进行打包处理,以获得完整的左眼MIPI视频流数据和右眼MIPI视频流数据,供所述近眼显示设备基于所述左眼和右眼MIPI视频流数据实现左右眼显示;和
S132:根据所述LVDS协议,分别对所述左眼LVDS纯视频流数据和所述右眼LVDS纯视频流数据进行打包处理,以获得完整的左眼LVDS视频流数据和右眼LVDS视频流数据,供所述近眼显示设备基于所述左眼和右眼LVDS视频流数据实现左右眼显示。
值得一提的是,在本发明的一示例中,如图5所示,所述视频流数据拆分方法的所述步骤S140,也可以包括步骤:
S141:分别对所述左眼MIPI视频流数据和所述右眼MIPI视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼MIPI视频流数据视频流数据的输出同步;和
S142:分别对所述左眼LVDS视频流数据和所述右眼LVDS视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼LVDS视频流数据视频流数据的输出同步。
值得注意的是,本发明可以但不限于通过可编程芯片(现场可编程门阵列,英文Field-Programmable Gate Array,简称FPGA芯片)来执行所述视频数据拆分方法,以便灵活配置参数,适应不同分辨率、不同通道数或/和不同帧率的视频拆分,有助于拓展所述视频数据拆分方法的应用范围。
示意性系统
附图6和图7示出了根据本发明的一实施例的一种视频数据拆分系统20,适于将所述基带芯片处理器30上单一接口31与近眼显示设备40可通信地连接,使得所述近眼显示设备40能够实现左右目显示。具体地,如图6所示,所述视频数据拆分系统20包括依次可通信地连接的一解析模块21、一拆分模块22以及一打包模块23。所述解析模块21适于与一基带芯片处理器30上的接口31可通信地连接,用于对通过所述基带芯片处理器30上单一所述接口31传输来的视频流数据进行解析处理,以获得视频解析数据。所述拆分模块22用于根据所配置的分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据。所述打包模块23适于与所述近眼显示设备40的所述左右眼显示单元41可通信地连接,用于分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据,供所述近眼显示设备40基于所述第一和第二视频流数据实现左右眼显示。
进一步地,在本发明的上述实施例中,如图6所示,所述视频数据拆分系统20还可以包括与所述打包模块23可通信地连接的一隔离模块24,其中所述隔离模块24适于与所述近眼显示设备40的左右眼显示单元41可通信地连接,用于分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理,使得隔离处理后的所述第一视频流数据和所述第二视频流数据能够同步输出至所述近眼显示设备40的所述左右眼显示单元41。
值得注意的是,在本发明的一示例中,如图7所示,所述视频数据拆分系统20的所述解析模块21可以包括一判断模块211、一MIPI协议解析模块212以及一LVDS协议解析模块213,其中所述判断模块211用于判断来自所述基带芯片处理器30的所述视频流数据是基于MIPI协议,还是基于LVDS协议;所述MIPI协议解析模块212用于如果所述视频流数据基于所述MIPI协议,则对所述视频流数据进行MIPI协议解析,以获得MIPI视频解析数据;以及所述LVDS协议解析模块213用于如果所述视频流数据基于所述LVDS协议,则对所述视频流数据进行LVDS协议解析,以获得LVDS视频解析数据。
在本发明的一示例中,如图7所示,所述视频数据拆分系统20的所述拆分模块22可以包括一MIPI视频拆分模块221和一LVDS视频拆分模块,其中所述MIPI视频拆分模块221与所述MIPI协议解析模块212可通信地连接,用于根据所述分辨率信息,对所述MIPI视频解析数据进行左右拆分处理,以获得左眼MIPI纯视频流数据和右眼MIPI纯视频流数据;和所述LVDS视频拆分模块222适于与所述LVDS协议解析模块213可通信地连接,用于根据所述分辨率信息,对所述LVDS视频解析数据进行左右拆分处理,以获得左眼LVDS纯视频流数据和右眼LVDS纯视频流数据。
在本发明的一示例中,如图7所示,所述视频数据拆分系统20的所述打包模块23可以包括一左眼MIPI协议打包模块231和一右眼MIPI协议打包模块232,其中所述左眼MIPI协议打包模块231适于与所述MIPI视频拆分模块221可通信地连接,用于根据MIPI协议,对所述左眼MIPI纯视频流数据进行打包处理,以获得完整的左眼MIPI视频流数据;和所述右眼MIPI视频拆分模块232适于与所述MIPI视频拆分模块221可通信地连接,用于根据MIPI协议,对所述右眼MIPI纯视频流数据进行打包处理,以获得完整的右眼MIPI视频流数据。
此外,在本发明的上述示例中,如图7所示,所述视频数据拆分系统20的所述打包模块23可以包括一左眼LVDS协议打包模块233和一右眼LVDS协议打包模块234,其中所述左眼LVDS协议打包模块233适于与所述LVDS视频拆分模块222可通信地连接,用于根据LVDS协议,对所述左眼LVDS纯视频流数据进行打包处理,以获得完整的左眼LVDS视频流数据;和所述右眼LVDS视频拆分模块234适于与所述LVDS视频拆分模块222可通信地连接,用于根据LVDS协议,对所述右眼LVDS纯视频流数据进行打包处理,以获得完整的右眼LVDS视频流数据。
根据本发明的上述实施例,如图7所示,所述视频流数据拆分系统20的所述隔离模块24可以包括一左眼MIPI视频隔离模块241和一右眼MIPI视频隔离模块242,其中所述左眼MIPI视频隔离模块241与所述左眼MIPI协议打包模块231可通信地连接,用于对所述左眼MIPI视频流数据进行隔离时钟域处理;和所述右眼MIPI视频隔离模块242与所述右眼MIPI协议打包模块232可通信地连接,用于对所述右眼MIPI视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼MIPI视频流数据视频流数据的输出同步。
同样地,如图7所示,本发明的所述视频流数据拆分系统20的所述隔离模块24还可以包括一左眼LVDS视频隔离模块243和一右眼LVDS视频隔离模块244,其中所述左眼LVDS视频隔离模块243与所述左眼LVDS协议打包模块233可通信地连接,用于对所述左眼LVDS视频流数据进行隔离时钟域处理;和所述右眼LVDS视频隔离模块244与所述右眼LVDS协议打包模块234可通信地连接,用于对所述右眼LVDS视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼LVDS视频流数据视频流数据的输出同步。
值得注意的是,本发明的所述视频数据拆分系统可以但不限于基于可编程芯片(现场可编程门阵列,英文Field-Programmable Gate Array,简称FPGA芯片)进行构建,以便灵活配置参数,适应不同分辨率、不同通道数或/和不同帧率的视频拆分,有助于拓展所述视频数据拆分方法的应用范围。
示意性电子设备
下面,参考图8来描述根据本发明实施例的一种电子设备(图8示出了根据本发明实施例的配置有上述视频数据拆分系统20的电子设备的应用示意图)。如图8所示,电子设备5包括一近眼显示设备50、一具有基带芯片处理器61的盒子60以及所述视频数据拆分系统20,其中所述视频数据拆分系统20被设置于所述盒子60,其中所述视频数据拆分系统20与所述基带芯片处理器61的单一接口可通信地连接,并且所述视频数据拆分系统20与所述近眼显示设备50的左右眼显示单元51可通信地连接,用于将来自所述基带芯片处理器61的视频流数据拆分成第一视频流数据和第二视频流数据,供所述近眼显示设备50根据所述第一视频流数据和所述第二视频流数据实现左右眼显示,从而使得所述近眼显示设备50仅利用所述基带芯片处理器61上的一个接口就能够实现左右眼显示。
值得注意的是,尽管在附图8以所述近眼显示设备50为AR眼镜为例,阐述本发明的所述视频数据拆分系统的特征和优势,本领域的技术人员可以理解的是,附图8以及接下来的描述中揭露的所述电子设备仅为举例,其并不构成对本发明的内容和范围的限制,例如,在所述电子设备的其他示例中,所述近眼显示设备50为VR眼镜或其他头戴式显示设备等等。
示意性计算系统
附图9示出了可执行上述方法或过程中的一个或多个的计算系统900的非限制性实施例,并以简化形式示出了一计算系统900。所述计算系统900可采取以下形式:一个或多个头戴式显示设备,或与头戴式显示设备合作的一个或多个设备(例如,个人计算机、服务器计算机、平板计算机、家庭娱乐计算机、网络计算设备、游戏设备、移动计算设备、移动通信设备(例如,智能电话)和/或其他计算设备)。
如图9所示,所述计算系统900包括一逻辑机901和一存储机902,其中所述逻辑机901用于执行指令;所述存储机902被配置用于保存可由所述逻辑机901执行以实现上述任一所述的视频数据拆分方法的机器可读指令。
当然,所述计算系统900可任选地包括一显示子系统903、一输入子系统904、一通信子系统905和/或在图9中未示出的其他组件。
所述逻辑机901包括被配置成执行指令的一个或多个物理设备。例如,所述逻辑机901可被配置成执行作为以下各项的一部分的指令:一个或多个应用、服务、程序、例程、库、对象、组件、数据结构、或其他逻辑构造。这种指令可被实现以执行任务、实现数据类型、转换一个或多个部件的状态、实现技术效果、或以其他方式得到期望结果。
所述逻辑机901可包括被配置成执行软件指令的一个或多个处理器。作为补充或替换,所述逻辑机901可包括被配置成执行硬件或固件指令的一个或多个硬件或固件逻辑机。所述逻辑机901的处理器可以是单核或多核,且在其上执行的指令可被配置为串行、并行和/或分布式处理。所述逻辑机901的各个组件可任选地分布在两个或更多单独设备上,这些设备可以位于远程和/或被配置成进行协同处理。所述逻辑机901的各方面可由以云计算配置进行配置的可远程访问的联网计算设备来虚拟化和执行。
所述存储机902包括被配置成保存可由所述逻辑机901执行以实现此处所述的方法和过程的机器可读指令的一个或多个物理设备。在实现这些方法和过程时,可以变换所述存储机902的状态(例如,保存不同的数据)。
所述存储机902可以包括可移动和/或内置设备。所述存储机902可包括光学存储器(例如,CD、DVD、HD-DVD、蓝光盘等)、半导体存储器(例如,RAM、EPROM、EEPROM等)和/或磁存储器(例如,硬盘驱动器、软盘驱动器、磁带驱动器、MRAM等)等等。所述存储机902可包括易失性、非易失性、动态、静态、读/写、只读、随机存取、顺序存取、位置可寻址、文件可寻址和/或内容可寻址设备。
可以理解,所述存储机902包括一个或多个物理设备。然而,本文描述的指令的各方面可另选地通过不由物理设备在有限时长内持有的通信介质(例如,电磁信号、光信号等)来传播。
所述逻辑机901和所述存储机902的各方面可被一起集成到一个或多个硬件逻辑组件中。这些硬件逻辑组件可包括例如现场可编程门阵列(FPGA)、程序和应用专用的集成电路(PASIC/ASIC)、程序和应用专用的标准产品(PSSP/ASSP)、片上系统(SOC)以及复杂可编程逻辑器件(CPLD)。
值得注意的是,当所述计算系统900包括所述显示子系统903时,所述显示子系统903可用于呈现由所述存储机902保存的数据的视觉表示。该视觉表示可采用图形用户界面(GUI)的形式。由于此处所描述的方法和过程改变了由存储机保持的数据,并由此变换了所述存储机902的状态,因此同样可以转变所述显示子系统903的状态以视觉地表示底层数据的改变。所述显示子系统903可包括利用实际上任何类型的技术的一个或多个显示设备。可将这样的显示设备与所述逻辑机901和/所述或所述存储机902组合在共享封装中,或者这样的显示设备可以是外围显示设备。
此外,在所述计算系统900包括所述输入子系统904时,所述输入子系统904可以包括诸如键盘、鼠标、触摸屏或游戏控制器之类的一个或多个用户输入设备或者与其对接。在一些实施例中,所述输入子系统904可以包括所选择的自然用户输入(NUI)部件或与其对接。这种元件部分可以是集成的或外围的,并且输入动作的转导和/或处理可以在板上或板外被处理。示例NUI部件可包括用于语言和/或语音识别的话筒;用于机器视觉和/或姿势识别的红外、色彩、立体显示和/或深度相机;用于运动检测和/或意图识别的头部跟踪器、眼睛跟踪器、加速计和/或陀螺仪;以及用于评估脑部活动和/或身体运动的电场感测部件;和/或任何其他合适的传感器。
而当所述计算系统900包括所述通信子系统905时,所述通信子系统905可被配置成将所述计算系统900与一个或多个其他计算设备通信地耦合。所述通信子系统905可以包括与一个或多个不同通信协议兼容的有线和/或无线通信设备。作为非限制性示例,通信子系统可被配置成用于经由无线电话网络或者有线或无线局域网或广域网来进行通信。在一些实施例中,所述通信子系统905可允许所述计算系统900经由诸如因特网这样的网络将消息发送至其他设备以及/或者从其它设备接收消息。
将会理解,此处描述的配置和/或方法本质是示例性的,这些具体实施例或示例不应被视为限制性的,因为许多变体是可能的。此处描述的具体例程或方法可以表示任何数量的处理策略中的一个或多个。如此,所示和/或所述的各种动作可以以所示和/或所述顺序、以其他顺序、并行地执行,或者被省略。同样,上述过程的次序可以改变。
示意性计算程序产品
除了上述方法和设备以外,本发明的实施例还可以是计算程序产品,其包括计算程序指令,所述计算程序指令在被处理器运行时使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本发明各种实施例的方法中的步骤。
所述计算程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本发明实施例操作的程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如Java、C++等,还包括常规的过程式程序设计语言,诸如C语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。
此外,本发明的实施例还可以是计算可读存储介质,其上存储有计算程序指令,所述计算程序指令在被处理器运行时使得所述处理器执行本说明书上述方法中的步骤。
所述计算可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
以上结合具体实施例描述了本发明的基本原理,但是,需要指出的是,在本发明中提及的优点、优势、效果等仅是示例而非限制,不能认为这些优点、优势、效果等是本发明的各个实施例必须具备的。另外,上述公开的具体细节仅是为了示例的作用和便于理解的作用,而非限制,上述细节并不限制本发明为必须采用上述具体的细节来实现。
本发明中涉及的器件、装置、设备、系统的方框图仅作为例示性的例子并且不意图要求或暗示必须按照方框图示出的方式进行连接、布置、配置。如本领域技术人员将认识到的,可以按任意方式连接、布置、配置这些器件、装置、设备、系统。诸如“包括”、“包含”、“具有”等等的词语是开放性词汇,指“包括但不限于”,且可与其互换使用。这里所使用的词汇“或”和“和”指词汇“和/或”,且可与其互换使用,除非上下文明确指示不是如此。这里所使用的词汇“诸如”指词组“诸如但不限于”,且可与其互换使用。
还需要指出的是,在本发明的装置、设备和方法中,各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本发明的等效方案。
提供所公开的方面的以上描述以使本领域的任何技术人员能够做出或者使用本发明。对这些方面的各种修改对于本领域技术人员而言是非常显而易见的,并且在此定义的一般原理可以应用于其他方面而不脱离本发明的范围。因此,本发明不意图被限制到在此示出的方面,而是按照与在此公开的原理和新颖的特征一致的最宽范围。
本领域的技术人员应理解,上述描述及附图中所示的本发明的实施例只作为举例而并不限制本发明。本发明的目的已经完整并有效地实现。本发明的功能及结构原理已在实施例中展示和说明,在没有背离所述原理下,本发明的实施方式可以有任何变形或修改。

Claims (14)

1.一种视频数据拆分方法,其特征在于,包括步骤:
对通过一基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频解析数据;其中该基带芯片处理器用于处理经由不同传感器采集或显示的多路视频流,以获得从该单一接口传输的所述视频流数据;
根据所配置的分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据;以及
分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据,供一近眼显示设备基于所述第一和第二视频流数据实现左右眼显示;
其中,所述对通过一基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频接卸数据的步骤,包括步骤:
判断来自该基带芯片处理器的所述视频流数据是基于MIPI协议,还是基于LVDS协议;
如果所述视频流数据基于所述MIPI协议,则对所述视频流数据进行MIPI协议解析,以获得MIPI视频解析数据;以及
如果所述视频流数据基于所述LVDS协议,则对所述视频流数据进行LVDS协议解析,以获得LVDS视频解析数据。
2.如权利要求1所述的视频数据拆分方法,还包括步骤:
分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理,使得隔离处理后的所述第一视频流数据和所述第二视频流数据能够被同时输出至该近眼显示设备的左右眼显示单元。
3.如权利要求2所述的视频数据拆分方法,其中,所述根据所配置的分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据的步骤,包括步骤:
根据所述分辨率信息,对所述MIPI视频解析数据进行左右拆分处理,以获得左眼MIPI纯视频流数据和右眼MIPI纯视频流数据;和
根据所述分辨率信息,对所述LVDS视频解析数据进行左右拆分处理,以获得左眼LVDS纯视频流数据和右眼LVDS纯视频流数据。
4.如权利要求3所述的视频数据拆分方法,其中,所述分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据的步骤,包括步骤:
根据所述MIPI协议,分别对所述左眼MIPI纯视频流数据和所述右眼MIPI纯视频流数据进行打包处理,以获得完整的左眼MIPI视频流数据和右眼MIPI视频流数据,供所述近眼显示设备基于所述左眼和右眼MIPI视频流数据实现左右眼显示;和
根据所述LVDS协议,分别对所述左眼LVDS纯视频流数据和所述右眼LVDS纯视频流数据进行打包处理,以获得完整的左眼LVDS视频流数据和右眼LVDS视频流数据,供所述近眼显示设备基于所述左眼和右眼LVDS视频流数据实现左右眼显示。
5.如权利要求4所述的视频数据拆分方法,其中,所述分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理的步骤,包括步骤:
分别对所述左眼MIPI视频流数据和所述右眼MIPI视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼MIPI视频流数据视频流数据的输出同步;和
分别对所述左眼LVDS视频流数据和所述右眼LVDS视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼LVDS视频流数据视频流数据的输出同步。
6.一种视频数据拆分系统,适于将基带芯片处理器上单一接口与近眼显示设备可通信地连接,其特征在于,其中所述视频数据拆分系统包括依次可通信地连接的:
一解析模块,其中所述解析模块适于与该基带芯片处理器上该单一接口可通信地连接,用于对通过一基带芯片处理器上单一接口传输来的视频流数据进行解析处理,以获得视频解析数据;其中该基带芯片处理器用于处理经由不同传感器采集或显示的多路视频流,以获得从该单一接口传输的所述视频流数据;
一拆分模块,用于根据所配置的分辨率信息,对所述视频解析数据进行拆分处理,以获得第一纯视频流数据和第二纯视频流数据;以及
一打包模块,其中所述打包模块适于与该近眼显示设备的左右眼显示单元可通信地连接,用于分别对所述第一纯视频流数据和所述第二纯视频流数据进行打包处理,以获得完整的第一视频流数据和第二视频流数据,供该近眼显示设备基于所述第一和第二视频流数据实现左右眼显示;
其中,所述解析模块包括一判断模块、一MIPI协议解析模块以及一LVDS协议解析模块,其中所述判断模块用于判断来自该基带芯片处理器的所述视频流数据是基于MIPI协议,还是基于LVDS协议;其中所述MIPI协议解析模块与所述判断模块可通信地连接,用于如果所述视频流数据基于所述MIPI协议,则对所述视频流数据进行MIPI协议解析,以获得MIPI视频解析数据;其中所述LVDS协议解析模块与所述判断模块可通信地连接,用于如果所述视频流数据基于所述LVDS协议,则对所述视频流数据进行LVDS协议解析,以获得LVDS视频解析数据。
7.如权利要求6所述的视频数据拆分系统,还包括一与所述打包模块可通信地连接的隔离模块,其中所述隔离模块适于该近眼显示设备的该左右眼显示单元可通信地连接,用于分别对所述第一视频流数据和所述第二视频流数据进行隔离时钟域处理,使得隔离处理后的所述第一视频流数据和所述第二视频流数据能够被同时输出至该近眼显示设备的该左右眼显示单元。
8.如权利要求7所述的视频数据拆分系统,其中,所述拆分模块包括一MIPI视频拆分模块和一LVDS视频拆分模块,其中所述MIPI视频拆分模块与所述MIPI协议解析模块可通信地连接,用于根据所述分辨率信息,对所述MIPI视频解析数据进行左右拆分处理,以获得左眼MIPI纯视频流数据和右眼MIPI纯视频流数据;其中所述LVDS视频拆分模块与所述LVDS协议解析模块可通信地连接,用于根据所述分辨率信息,对所述LVDS视频解析数据进行左右拆分处理,以获得左眼LVDS纯视频流数据和右眼LVDS纯视频流数据。
9.如权利要求8所述的视频数据拆分系统,其中,所述打包模块包括一左眼MIPI协议打包模块、一右眼MIPI协议打包模块、一左眼LVDS协议打包模块以及一右眼LVDS协议打包模块,其中所述左眼MIPI协议打包模块和所述右眼MIPI协议打包模块分别与所述MIPI视频拆分模块可通信地连接,用于根据所述MIPI协议,分别对所述左眼MIPI纯视频流数据和所述右眼MIPI纯视频流数据进行打包处理,以获得完整的左眼MIPI视频流数据和右眼MIPI视频流数据,供所述近眼显示设备基于所述左眼和右眼MIPI视频流数据实现左右眼显示;其中所述左眼LVDS协议打包模块和所述右眼LVDS协议打包模块分别与所述LVDS视频拆分模块可通信地连接,用于根据所述LVDS协议,分别对所述左眼LVDS纯视频流数据和所述右眼LVDS纯视频流数据进行打包处理,以获得完整的左眼LVDS视频流数据和右眼LVDS视频流数据,供所述近眼显示设备基于所述左眼和右眼LVDS视频流数据实现左右眼显示。
10.如权利要求9所述的视频数据拆分系统,其中,所述隔离模块包括一左眼MIPI视频隔离模块、一右眼MIPI视频隔离模块、一左眼LVDS视频隔离模块以及一右眼LVDS视频隔离模块,其中所述左眼MIPI视频隔离模块与所述左眼MIPI协议打包模块可通信地连接,用于对所述左眼MIPI视频流数据进行隔离时钟域处理,其中所述右眼MIPI视频隔离模块与所述右眼MIPI协议打包模块可通信地连接,用于对所述右眼MIPI视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼MIPI视频流数据视频流数据的输出同步;其中所述左眼LVDS视频隔离模块与所述左眼LVDS协议打包模块可通信地连接,用于对所述左眼LVDS视频流数据进行隔离时钟域处理,其中所述右眼LVDS视频隔离模块与所述右眼LVDS协议打包模块可通信地连接,用于对所述右眼LVDS视频流数据进行隔离时钟域处理,使得隔离处理后的所述左眼和右眼LVDS视频流数据视频流数据的输出同步。
11.如权利要求6至10中任一所述的视频数据拆分系统,其中,所述视频数据拆分系统基于可编程芯片进行构建。
12.一种电子设备,其特征在于,包括:
一近眼显示设备,其中所述近眼显示设备包括左右眼显示单元;
一具有基带芯片处理器的盒子;以及
如权利要求6至11中任一所述的视频数据拆分系统,其中所述视频数据拆分系统被设置于所述盒子,并且所述视频数据拆分系统将所述基带芯片处理器上的单一接口与所述近眼显示设备的所述左右眼显示单元可通信地连接。
13.一种计算系统,其特征在于,包括:
一逻辑机,用于执行指令;和
一存储机,其中所述存储机被配置用于保存由所述逻辑机执行以实现如权利要求1至5中任一所述的视频数据拆分方法的机器可读指令。
14.一种计算可读存储介质,其特征在于,所述计算可读存储介质上存储有计算程序指令,当所述计算程序指令被计算装置执行时,可操作来执行如权利要求1至5中任一项所述的视频数据拆分方法。
CN201910489193.4A 2019-06-06 2019-06-06 一种视频数据拆分方法及其系统以及电子设备和计算系统 Active CN112055264B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910489193.4A CN112055264B (zh) 2019-06-06 2019-06-06 一种视频数据拆分方法及其系统以及电子设备和计算系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910489193.4A CN112055264B (zh) 2019-06-06 2019-06-06 一种视频数据拆分方法及其系统以及电子设备和计算系统

Publications (2)

Publication Number Publication Date
CN112055264A CN112055264A (zh) 2020-12-08
CN112055264B true CN112055264B (zh) 2022-11-01

Family

ID=73609494

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910489193.4A Active CN112055264B (zh) 2019-06-06 2019-06-06 一种视频数据拆分方法及其系统以及电子设备和计算系统

Country Status (1)

Country Link
CN (1) CN112055264B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205356597U (zh) * 2015-09-18 2016-06-29 云南师范大学 一种头戴式立体视频播放系统
CN105979250A (zh) * 2016-06-26 2016-09-28 深圳市华宇优诚科技有限公司 一种vr视频数据处理系统
CN106791771A (zh) * 2016-12-23 2017-05-31 歌尔科技有限公司 Vr设备播放3d视频的方法和vr设备
WO2017113869A1 (zh) * 2015-12-31 2017-07-06 深圳纳德光学有限公司 头戴显示器及其双目3d视频显示方法和装置
WO2017120756A1 (zh) * 2016-01-12 2017-07-20 深圳多哚新技术有限责任公司 一种vr视频数据处理系统
CN107547882A (zh) * 2016-06-23 2018-01-05 天津微莱福科技有限公司 一种vr视频数据新处理系统
CN108174183A (zh) * 2018-01-11 2018-06-15 鲁东大学 一种基于物联网的vr影像数据控制系统
CN108769645A (zh) * 2018-06-26 2018-11-06 威创集团股份有限公司 一种视频同步处理方法及设备

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5740885B2 (ja) * 2010-09-21 2015-07-01 セイコーエプソン株式会社 表示装置、及び、表示方法
JPWO2013108531A1 (ja) * 2012-01-19 2015-05-11 ソニー株式会社 受信装置、受信方法および電子機器
US9551873B2 (en) * 2014-05-30 2017-01-24 Sony Interactive Entertainment America Llc Head mounted device (HMD) system having interface with mobile computing device for rendering virtual reality content
US20170186243A1 (en) * 2015-12-28 2017-06-29 Le Holdings (Beijing) Co., Ltd. Video Image Processing Method and Electronic Device Based on the Virtual Reality

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205356597U (zh) * 2015-09-18 2016-06-29 云南师范大学 一种头戴式立体视频播放系统
WO2017113869A1 (zh) * 2015-12-31 2017-07-06 深圳纳德光学有限公司 头戴显示器及其双目3d视频显示方法和装置
WO2017120756A1 (zh) * 2016-01-12 2017-07-20 深圳多哚新技术有限责任公司 一种vr视频数据处理系统
CN107547882A (zh) * 2016-06-23 2018-01-05 天津微莱福科技有限公司 一种vr视频数据新处理系统
CN105979250A (zh) * 2016-06-26 2016-09-28 深圳市华宇优诚科技有限公司 一种vr视频数据处理系统
CN106791771A (zh) * 2016-12-23 2017-05-31 歌尔科技有限公司 Vr设备播放3d视频的方法和vr设备
CN108174183A (zh) * 2018-01-11 2018-06-15 鲁东大学 一种基于物联网的vr影像数据控制系统
CN108769645A (zh) * 2018-06-26 2018-11-06 威创集团股份有限公司 一种视频同步处理方法及设备

Also Published As

Publication number Publication date
CN112055264A (zh) 2020-12-08

Similar Documents

Publication Publication Date Title
KR102542734B1 (ko) 스피치-기반 디바이스들을 위한 외부의 시각적 상호작용들
US10154365B2 (en) Head-related transfer function measurement and application
US10769849B2 (en) Use of temporal motion vectors for 3D reconstruction
CN111182226B (zh) 一种多相机同步工作的方法、装置、介质和电子设备
WO2020211573A1 (zh) 用于处理图像的方法和装置
CN105874807B (zh) 用于在电视设备上对Web内容远程渲染的方法、系统和介质
US20170070835A1 (en) System for generating immersive audio utilizing visual cues
CN112395022B (zh) 信息显示方法、装置、电子设备及计算机可读存储介质
US11985381B2 (en) Mapping architecture of immersive technologies media format (ITMF) specification with rendering engines
CN114073057B (zh) 使用客户端音频参数的服务器侧绘制音频的方法和系统
WO2023103897A1 (zh) 图像处理方法、装置、设备及存储介质
US11756251B2 (en) Facial animation control by automatic generation of facial action units using text and speech
US20170230304A1 (en) Context-aware task processing for multiple devices
CN112055264B (zh) 一种视频数据拆分方法及其系统以及电子设备和计算系统
US10362241B2 (en) Video stream delimiter for combined frame
CN108401003A (zh) 雷达数据的同步方法、装置、设备和计算机存储介质
CN115136595A (zh) 用于流式传输到异构客户端端点的2d视频的适配
US10567457B1 (en) Dynamic rotation of streaming protocols
CN110991312A (zh) 生成检测信息的方法、装置、电子设备和介质
EP3857359A1 (en) Audio rendering from virtual machine
KR102579124B1 (ko) 영상 데이터 보정 방법, 장치, 전자 기기, 저장 매체, 컴퓨터 프로그램 및 자율 주행 차량
US20240056761A1 (en) Three-dimensional (3d) sound rendering with multi-channel audio based on mono audio input
US20240114189A1 (en) Video streaming authorization
US20140205025A1 (en) Adaptive filter application to video data
US10045146B2 (en) Wireless display that accesses remote resources for display data

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20201208

Assignee: Zhejiang Shunwei Technology Co.,Ltd.

Assignor: SUNNY OPTICAL (ZHEJIANG) RESEARCH INSTITUTE Co.,Ltd.

Contract record no.: X2024330000055

Denomination of invention: A video data splitting method and its system, as well as electronic devices and computing systems

Granted publication date: 20221101

License type: Common License

Record date: 20240515