CN110719522B - 一种视频显示方法、装置、存储介质及电子设备 - Google Patents

一种视频显示方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN110719522B
CN110719522B CN201911049153.4A CN201911049153A CN110719522B CN 110719522 B CN110719522 B CN 110719522B CN 201911049153 A CN201911049153 A CN 201911049153A CN 110719522 B CN110719522 B CN 110719522B
Authority
CN
China
Prior art keywords
display terminal
data
value
video
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911049153.4A
Other languages
English (en)
Other versions
CN110719522A (zh
Inventor
甘东融
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Shiyuan Electronics Thecnology Co Ltd
Guangzhou Shikun Electronic Technology Co Ltd
Original Assignee
Guangzhou Shiyuan Electronics Thecnology Co Ltd
Guangzhou Shikun Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Shiyuan Electronics Thecnology Co Ltd, Guangzhou Shikun Electronic Technology Co Ltd filed Critical Guangzhou Shiyuan Electronics Thecnology Co Ltd
Priority to CN201911049153.4A priority Critical patent/CN110719522B/zh
Publication of CN110719522A publication Critical patent/CN110719522A/zh
Application granted granted Critical
Publication of CN110719522B publication Critical patent/CN110719522B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4367Establishing a secure communication between the client and a peripheral device or smart card
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请实施例公开了一种视频显示方法、装置、存储介质及电子设备,其中,方法包括:接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据,获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据,显示所述目标视频数据对应的视频图像。采用本申请实施例,可以将视频实时显示,减小了视频显示的时延。

Description

一种视频显示方法、装置、存储介质及电子设备
技术领域
本申请涉及计算机技术领域,尤其涉及一种视频显示方法、装置、存储介质及电子设备。
背景技术
随着通信技术以及显示设备的普及,由显示设备进行视频画面显示的场景在人们生活中越来越常见,可以为人们带来更好的画面显示效果,例如:高铁站的多屏显示系统、户外的魔方柱等等。
在多个智能显示设备进行视频画面显示的场景中,例如:由两个及两个以上的显示屏组合显示一个视频画面,通常智能显示设备是活动可旋转的,即显示设备可进行横向、纵向等多个方向的旋转移动。正常情况下,多个显示设备在旋转移动时,各显示设备上显示的视频画面也需要进行相对应的旋转移动处理。
目前,在上述多个显示设备进行视频画面显示的场景中,通常是由PC机控制各显示设备,PC机在获取到视频流解码之后,PC机基于显示设备的位置或位姿,对视频旋转、拉伸、拼接等图像处理,然后在至少一个显示设备旋转到某一个特定角度发送待显示的视频数据进行显示。然而,采用这种方式,就需要控制或等待至少一个显示设备旋转到某一个特定角度才能发送待显示的视频数据,从而造成视频显示的时延较大。
发明内容
本申请实施例提供了一种视频显示方法、装置、存储介质及电子设备,可以将视频实时显示,减小了视频显示的时延。所述技术方案如下:
第一方面,本申请实施例提供了一种视频显示方法,所述方法包括:
接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据;
获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据;
显示所述目标视频数据对应的视频图像。
第二方面,本申请实施例提供了一种视频显示装置,所述装置包括:
数据接收模块,用于接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据;
图像调整模块,用于获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据;
图像显示模块,用于显示所述目标视频数据对应的视频图像。
第三方面,本申请实施例提供一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行上述的方法步骤。
第四方面,本申请实施例提供一种电子设备,可包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行上述的方法步骤。
本申请一些实施例提供的技术方案带来的有益效果至少包括:
在本申请一个或多个实施例中,第二显示终端在接收到第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,根据第一显示终端的位姿信息以及第二显示终端的位姿信息对所述视频数据进行图像调整处理,最后显示图像调整处理之后的目标视频数据对应的视频图像,不需要等待或控制第二显示终端旋转到某一个特定角度或到达某一位姿状态,可以将视频实时显示,减小了视频显示的时延。同时,第二显示终端基于第一显示终端的随机值生成第二密值并发送至第一显示终端进行认证,并对接收的第一位姿数据所包含的特征值以及第一位姿数据对应的数据容量进行检测,提高了在传输第一位姿数据的过程中的可靠性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种视频显示的场景架构示意图;
图2是本申请实施例提供的一种视频显示方法的流程示意图;
图3是本申请实施例提供的视频显示方法涉及的一种位姿信息表示方法的示意图;
图4a是本申请实施例提供的视频显示方法涉及的一种位姿信息监测方法的示意图;
图4b是本申请实施例提供的视频显示方法涉及的另一种位姿信息监测方法的示意图;
图5a是本申请实施例提供的视频显示方法涉及的一种图像调整处理的场景示意图;
图5b是本申请实施例提供的视频显示方法涉及的另一种图像调整处理的场景的示意图;
图6是本申请实施例提供的视频显示方法涉及的一种对目标视频数据进行播放的流程示意图;
图7是本申请实施例提供的另一种视频显示方法的流程示意图;
图8是本申请实施例提供的一种视频显示装置的结构示意图;
图9是本申请实施例提供的一种第二密值发送模块的结构示意图;
图10是本申请实施例提供的一种第三密值计算模块的结构示意图;
图11是本申请实施例提供的另一种视频显示装置的结构示意图;
图12是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在本申请的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。在本申请的描述中,需要说明的是,除非另有明确的规定和限定,“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本申请中的具体含义。此外,在本申请的描述中,除非另有说明,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
下面结合具体的实施例对本申请进行详细说明。
请参见图1,为本申请实施例提供的一种视频显示系统的场景示意图。如图1所示,所述视频显示系统可以包括第一显示终端100以及第二显示终端110。
所述第一显示终端100以及第二显示终端110可以是具有网络访问功能的电子设备,该电子设备包括但不限于:电视、大屏显示器、个人电脑、平板电脑、车载设备、计算设备或连接到无线调制解调器的其它处理设备等。
其中,所述第一显示终端100以及第二显示终端110之间通过网络进行通信,网络可以是无线网络,也可以是有线网络,无线网络或有线网络使用标准通信技术和/或协议。网络通常为因特网、但也可以是其它任何网络,包括但不限于局域网(Local AreaNetwork,LAN)、城域网(Metropolitan Area Network,MAN)、广域网(Wide Area Network,WAN)、移动、有线或者无线网络、专用网络或者虚拟专用网络的任何组合。在一些实施例中,使用包括超文本标记语言(Hyper Text Mark-up Language,HTML)、可扩展标记语言(Extensible Markup Language,XML)等的技术和/或格式来代表通过网络交换的数据。此外还可以使用诸如安全套接字层(Secure Socket Layer,SSL)、传输层安全(TransportLayer Security,TLS)、虚拟专用网络(Virtual Private Network,VPN)、网际协议安全(Internet Protocol Security,IPsec)等常规加密技术来加密所有或者一些链路。在另一些实施例中,还可以使用定制和/或专用数据通信技术取代或者补充上述数据通信技术。
第二显示终端110接收所述第一显示终端100发送的随机值,基于所述随机值生成第二密值。
具体的,第一显示终端100基于预设的随机规则产生一随机值,所述随机规则可以是第一显示终端基于第一显示终端的设备标识(MAC地址、IP地址、数字证书、IP地址等)以及时间节点生成的随机值,将随机值发送至第二显示终端110。第二显示终端110第二显示终端接收第一显示终端发送的随机值,根据随机值计算第二密值。所述第二密值可以是特征字符、特征栈、一串代码、字符串等形式。在本实施例中,所述第二密值用于第一显示终端100以及第二显示终端110之间进行鉴权认证。
第二显示终端110将所述第二密值发送至所述第一显示终端100。
第一显示终端100接收到所述第二密值之后,检测到所述第二密值与基于所述随机值生成的第一密值匹配时,所述第一显示终端100发送同步指令至所述第二显示终端110。
所述第一密值可以是特征字符、特征栈、一串代码、字符串等形式。在本实施例中,所述第一密值用于第一显示终端在接收到所述第二密值时,基于第一密值以及第二密值进行对第二显示终端进行鉴权认证。
所述同步指令可以理解为指挥第二显示终端接收或同步第一显示终端的相应数据(第二位姿数据等)功能的代码,第二显示终端通过执行所述代码,向第一显示终端反馈传输控制字符,以进行相应数据(第二位姿数据等)的接收。
具体的,第一显示终端100接收到所述第二密值之后,检测所述第一密值与所述第二密值是否匹配。当所述第二密值与基于所述随机值生成的第一密值匹配时,所述第一显示终端100发送同步指令至所述第二显示终端110。
所述第二显示终端110响应于所述同步指令,向所述第一显示终端100反馈传输控制字符。所述第一显示终端100基于所述传输控制字符将所述视频数据以及所述第一位姿数据同时发送至第二显示终端110。
在一种可行的实施方式中,第一显示终端100可以将displayport数字接口的主通道作为第一通道传输视频数据,并将displayport数字接口的辅通道作为第二通道传输第一位姿数据。当第一显示终端接收到第二显示终端的传输控制字符之后,通过第一通道发送视频数据以及同时通过第二通道发送第一位姿数据。第二显示终端基即可接收到第一显示终端通过第一通道发送的视频数据以及同时通过第二通道发送所述第一显示终端的第一位姿数据。
第二显示终端110向所述第一显示终端100发送完成接收指令,并将所述第一位姿数据所包含的指定位数的数据值作为特征值。
第二显示终端110获取所述第一位姿数据对应的数据容量以及所述特征值,基于所述数据容量以及所述特征值计算第三密值。
第二显示终端110将所述第三密值发送至所述第一显示终端100,接收所述第一显示终端基于所述第三密值返回的验证结果。
当所述验证结果指示所述第一位姿数据为验证通过状态时,第二显示终端110获取当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据。
在一种可行的实施方式中,第一显示终端100将视频数据以及第一位姿数据发送至第二显示终端110时,第一显示终端100可以基于第一位姿数据同时对视频数据对应的视频图像A进行图像调整处理,如图1所示,将图像调整处理之后的子图像1进行显示,所述子图像1为所述视频图像A所包含的部分画面,例如子图像1为所述视频图像A所包含的1/2画面。
第二显示终端接收到所述视频数据之后,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据,所述目标视频数据对应如图1所示的子图像2,所述子图像1为所述视频图像A所包含的部分画面,例如子图像1为所述视频图像A所包含的1/2画面,所述子图像1可以与子图像2相同或不同。第二显示终端110显示所述目标视频数据对应的视频图像。
其中,所述第一显示终端100向第二显示终端110发送的视频数据可以是诸如视频图像A所示的各帧图像对应的全部画面,可以理解为所述第一显示终端100向第二显示终端110发送初始的视频数据(即各帧图像未剪切过的视频数据),第二显示终端接收到所述初始的视频数据,然后对所述初始的视频数据进行图像调整处理;可以是诸如视频图像A所示的各帧图像对应的部分画面,例如:各帧图像对应的1/2、1/4部分画面。可以理解为第一显示终端100在发送视频数据之前对初始的视频数据进行图像处理(例如图像剪切),将图像处理之后的第二显示终端110待显示的视频数据发送至第二显示终端110。
在一种可行的实施方式中,在视频显示的过程中,第一显示终端100可以向第二显示终端110实时发送第一位姿数据,第二显示终端110也可以向第一显示终端100实时发送第二位姿数据,第一显示终端100或第二显示终端110可以基于所述第一位姿数据、第二位置数据调整本端的位姿状态。第一显示终端100(第二显示终端110)也可以基于所述第一位姿数据、第二位置数据向对端设备-第二显示终端100(第一显示终端110)发送位姿调整指令,所述位姿调整指令用于控制对端设备调整到特定的位姿状态。以达到接收双方到达某一特定位姿状态时,显示图像调整处理之后的视频数据对应的图像画面。
在本申请实施例中,第二显示终端在接收到第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,根据第一显示终端的位姿信息以及第二显示终端的位姿信息对所述视频数据进行图像调整处理,最后显示图像调整处理之后的目标视频数据对应的视频图像,不需要等待或控制第二显示终端旋转到某一个特定角度或到达某一位姿状态,可以将视频实时显示,减小了视频显示的时延。同时,第二显示终端基于第一显示终端的随机值生成第二密值并发送至第一显示终端进行认证,并对接收的第一位姿数据所包含的特征值以及第一位姿数据对应的数据容量进行检测,提高了在传输第一位姿数据的过程中的可靠性。
在一个实施例中,如图2所示,特提出了一种视频显示方法,该方法可依赖于计算机程序实现,可运行于基于冯诺依曼体系的视频显示装置上。该计算机程序可集成在应用中,也可作为独立的工具类应用运行。
具体的,该视频显示方法包括:
步骤101:接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据。
所述视频可以泛指将一系列静态影像以电信号的方式加以捕捉、纪录、处理、储存、传送与重现的各种技术。通常,连续的图像变化每秒超过24帧(frame)画面以上时,根据视觉暂留原理,人眼无法辨别单幅的静态画面,即看上去是平滑连续的视觉效果,这样由多帧连续的画面或图像组成的集合叫做视频。
在实际应用中,视频通常指各种动态影像的存储格式,可以理解为不同的存储格式对应着不同格式的视频数据,常见的存储格式MPEG、MPG、DAT、AVI、MOV等等,在本实施例中,所述视频数据可以包括音频数据、视频图像数据、包含文本(如字幕)的视频数据等等。
其中,所述第一显示终端发送的视频数据可以是在本地储存空间预先保存的,也可以是其他具有视频数据传输功能的电子设备发送至第一显示终端上的,例如:具有视频数据传输功能的电子设备可以是用户终端,用户终端可以通过有线通信连接或无线通信连接的方式将视频数据发送至第一显示终端,第一显示终端在接收到视频数据之后,即可以实时将视频数据进行发送。
所述位姿信息是指可移动或旋转对象的位置、姿态信息,即可移动或旋转对象在空间中所处的位置以及其在该位置上的姿态。在本实施例中,所述第一位姿数据可以理解为可移动或旋转对象-第一显示终端在空间中所处的位置以及其在该位置上的姿态。
在一种位姿信息表示方式中,可以通过x、y、z、roll、pitch、yaw来表示物体的位姿信息。图3示出了根据本发明实施例中用于确定可移动或旋转对象位姿信息的坐标系。如图3所示,roll是围绕x轴旋转,也叫翻滚角;pitch是围绕y轴旋转,也叫做俯仰角;yaw是围绕z轴旋转,也叫偏离角。
具体的,所述第一显示终端具有多种实时检测当前位姿信息的电子部件,该电子部件包括但不限于加速度传感器、磁力传感器、陀螺仪、物理量感应器等,所述第一显示终端通过所述电子部件获取到当前的物理量参数,所述物理量参数可以是加速度参数、磁力参数、角速度参数、相对距离等等,并对所述物理量参数进行位姿计算,即可以得到所述第一显示终端的第一位姿数据。
具体的,第二显示终端接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之前,第二显示终端先建立与第一显示终端之间的通信连接。
其中,第二显示终端可以设置有线通信连接和无线通信连接方式,第二显示终端可以通过有线通信接口采用通用串行总线(universal serial bus,USB)连接第一显示终端从而建立与第一显示终端的有线通信连接;第二显示终端也可以采用无线通信连接方式建立与所述第一显示终端的通信连接,所述无线通信连接方式可以是基于互联网、蓝牙、WIFI、紫峰协议(ZigBee)、局域网等通信方式。优选地,在本实施例第二显示终端采用有线通信连接方式建立与第一显示终端的通信连接。
具体的,第二显示终端建立与第一显示终端的通信连接之后,第二显示终端以及第一显示终端可以通过所述通信连接进行信息或数据的交互,第一显示终端可以在本地存储空间中获取发送至第二显示终端的视频数据以及第一位姿数据,再通过所述通信连接将视频数据以及第一位姿数据向第二显示终端发送,此时,第二显示终端既可以接收到第一显示终端发送的视频数据以及第一显示终端的第一位姿数据。
可选的,第一显示终端可以在本地存储空间中获取发送至第二显示终端的视频数据以及第一位姿数据之后,可以通过所述通信连接将视频数据以及第一位姿数据分别发送至第二显示终端,例如,第一显示终端先发送视频数据后发送第一位姿数据,或,第一显示终端先发送第一位姿数据后发送视频数据。可以是通过所述通信连接将视频数据以及第一位姿数据同时发送至第二显示终端。
步骤102:获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据。
所述第二位姿数据可以理解为可移动或旋转对象-第二显示终端在空间中所处的位置以及其在该位置上的姿态。
所述图像调整处理可以理解为对视频数据中对应的各帧图像进行图像调整,所述图像调整处理包括但不限于图像切割、图像旋转、图像拉伸、图像拼接等处理,在本实施例中,可以理解为第二显示终端基于第一位姿数据以及第二位姿数据对视频数据中对应的各帧图像进行上述涉及的图像调整处理中的一种或多种的拟合。
所述目标视频数据可以理解为将视频数据进行图像调整后对应的视频数据。也可以理解为,第二显示终端待播放的视频数据。
具体的,第二显示终端在接收到第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,通过所包含的用于实时检测当前位姿信息的电子部件(加速度传感器、磁力传感器、陀螺仪等等)获取当前的物理量参数,通常所述物理量参数用于表征检测对象(第二显示终端)的位姿信息,第二显示终端在获取到当前物理量参数之后,对所述物理量参数进行解析计算,得到第二显示终端当前的第二位姿数据,第二显示终端基于接收到的第一位姿数据以及当前获取到的第二位姿数据,根据基于预设的视频显示方法,对所述视频数据进行图像调整处理,具体对视频数据对应的各帧图像进行图像切割、图像旋转、图像拉伸、图像拼接等处理,以得到图像调整处理之后的目标视频数据。
可选的,所述预设的视频显示方法,可以是显示所述视频数据对应的各帧图像部分画面,例如,显示所述视频数据对应的各帧图像的1/2、1/4的画面,可以是显示所述视频数据对应的各帧图像全部画面,可以是对所述视频数据对应的各帧图像的全部或部分画面进行交替显示,例如所述视频数据对应的视频显示时长为2分钟,在视频显示的前30秒显示所述视频数据对应的各帧图像的1/2的画面,在视频显示的所述30秒之后显示所述视频数据对应的各帧图像的全部的画面,等等。
在一种可行的实施方式中,以上述通过x、y、z、roll、pitch、yaw来表示第二显示终端的位姿信息,通常,在实际应用中,设置参考点(x0、y0、z0、r0、p0、y0),其中p0对应pitch的参考值、y0对应yaw的参考值。如图4a所示,图4a是第二显示终端一种旋转场景的示意图,在图4a中,第二显示终端初始位置为图中虚线框所示的位置,参考点为图中A0点,其中A0(x0、y0、z0、r0、p0、ya0),第二显示终端在某段时间内从图4a中虚线框所示位置运动至图4a中实线框所示位置,第二显示终端通过所包含的用于实时检测当前位姿信息的电子部件(加速度传感器、磁力传感器、陀螺仪等等)获取当前的物理量参数,基于所述物理量参数计算得到所述第二显示终端上的参考点A1点(x1、y1、z1、r1、p1、ya1),通过对所述参考点A0点以及参考点A1点进行位姿计算,所述位姿计算可以计算第二显示终端相对于初始状态的相对位姿信息,例如相对初始状态旋转135度等,以得到获取第二显示终端当前的第二位姿数据。
可选的,第二显示终端可以通过预先设置至少一个参考点,通过所包含的用于实时检测当前位姿信息的电子部件(加速度传感器、磁力传感器、陀螺仪等等监测所述至少一个参考点中各参考点的位姿变化,以确定第二显示终端当前的第二位姿数据。例如,如图4b所示,图4b是第二显示终端另一种旋转场景的示意图,在图4b中,第二显示终端初始位置为图中虚线框所示的位置,参考点为图中A点、B点、C点、D点,通过监测参考点A点、B点、C点、D点的位姿变化,即可确定第二显示终端当前的第二位姿数据。
在一种具体的实施场景中,如图5a,图5a是一种图像调整处理应用于第二显示终端的场景示意图,第二显示终端当前的位姿状态如图5a所示,第二显示终端通过所包含的用于实时检测当前位姿信息的电子部件,得到当前的第二位姿数据,并基于获取到所述第一位姿数据、所述第二位姿数据,对所述视频数据对应的视频图像A进行图像调整处理,当前预设的视频显示方法为在第二显示终端上显示所述视频数据对应的视频图像A所包含的全部画面,具体对视频图像A进行图像拉伸、调整视频图像的分辨率、图像旋转处理等等,以适配当前第二显示终端,经图像调整处理之后,得到的目标视频数据在第二显示终端上的视频显示效果可参见图5a,第二显示终端即可显示经图像显示处理之后对应的视频图像A所包含的全部画面。
在一种具体的实施场景中,如图5b,图5b是一种图像调整处理应用于第二显示终端的场景示意图,第二显示终端当前的位姿状态如图5b所示,第二显示终端通过所包含的用于实时检测当前位姿信息的电子部件,得到当前的第二位姿数据,并基于获取到所述第一位姿数据、所述第二位姿数据,对所述视频数据对应的视频图像A进行图像调整处理,当前预设的视频显示方法为在第二显示终端上显示所述视频数据对应的视频图像A所包含的部分画面,例如:显示所述视频数据对应的视频图像A所包含的部分画面-子图像1,第二显示终端具体对视频图像A进行图像拉伸、图像切割、调整视频图像的分辨率、图像旋转处理等等,以适配当前第二显示终端,经图像调整处理之后,得到的目标视频数据-子图像1在第二显示终端上的视频显示效果可参见图5a,第二显示终端即可显示经图像显示处理之后对应的视频图像A所包含的部分画面-子图像1。
步骤103:显示所述目标视频数据对应的视频图像。
具体的,第二显示终端基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据之后,会对所述目标视频数据对应的视频图像进行显示(播放)处理以显示所述视频图像。
在一种可行的实施方式中,如图6所示,图6是一种对目标视频数据进行播放的流程示意图。第二显示终端通过对所述目标视频数据进行解协议、解封装,解码视音频,视音频同步处理。
其中,解协议是第二显示终端将目标视频数据解析为标准的相应的封装格式数据。在实际应用中,视频数据通过有线或无线通信的方式进行传输时,常常采用流媒体协议(RTMP协议、MMS协议等)传输视频数据,即在传输视频数据的同时,也会传输一些信令数据。这些信令数据包括对视频播放的控制(播放,暂停,停止等)等。解协议的过程中,第二显示终端会去除掉信令数据而只保留视音频数据。例如,采用RTMP协议传输的数据,经过解协议操作后,输出FLV格式的数据。
第二显示终端在解协议步骤之后,进行解封装。所述解封装是指将输入的封装格式的数据,分离成为音频流压缩编码数据和视频流压缩编码数据。封装格式种类很多,例如MP4,MKV,RMVB,TS,FLV,AVI等等,第二显示终端解封装就是将已经压缩编码的视频数据和音频数据按照一定的格式放到一起。例如,FLV格式的数据,经过解封装操作后,输出H.264编码的视频码流和AAC编码的音频码流。
第二显示终端在对视频压缩编码数据以及音频压缩编码数据,解码成为非压缩的视频原始数据以及音频原始数据。通过解码,压缩编码的视频数据输出成为非压缩的颜色数据,例如YUV420P,RGB等等;压缩编码的音频数据输出成为非压缩的音频抽样数据。
第二显示终端将同步解码出来的视频数据和音频数据分别发送至所包含的电子音频部件进行同步播放(显示)。例如:将音频数据发送至声卡,将视频数据发送至显卡。
在本申请实施例中,第二显示终端在接收到第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,根据第一显示终端的位姿信息以及第二显示终端的位姿信息对所述视频数据进行图像调整处理,最后显示图像调整处理之后的目标视频数据对应的视频图像,不需要等待或控制第二显示终端旋转到某一个特定角度或到达某一位姿状态,可以将视频实时显示,减小了视频显示的时延。同时,第二显示终端基于第一显示终端的随机值生成第二密值并发送至第一显示终端进行认证,并对接收的第一位姿数据所包含的特征值以及第一位姿数据对应的数据容量进行检测,提高了在传输第一位姿数据的过程中的可靠性。
请参见图7,图7是本申请提出的一种视频显示方法的另一种实施例的流程示意图。具体的:
步骤201:接收所述第一显示终端发送的随机值,基于所述随机值生成第二密值。
所述随机值可以理解为第一显示终端基于设置的随机规则随机产生的一个值。
所述第二密值可以是特征字符、特征栈、一串代码、字符串等形式。在本实施例中,所述第二密值用于第一显示终端以及第二显示终端间进行鉴权认证。
具体的,第一显示终端基于预设的随机规则产生一随机值,将随机值发送至第二显示终端。第二显示终端接收第一显示终端发送的随机值,根据随机值计算第二密值。
可选的,所述预设的随机规则可以是第一显示终端基于第一显示终端的设备标识(MAC地址、IP地址、数字证书、IP地址等)以及时间节点生成的随机值,可以是基于随机数算法产生的,可以是基于密值认证模型产生的,也可以是基于随机池获取的任意一随机值,等等。
可选的,所述根据随机值计算第二密值,可以是通过设置的密值认证模型计算得到的,所述密值认证模型可以是如下的形式:
Key=An|B
其中,Key为第二密值,An为随机值,“|”为逻辑运算符号-或,B为16进制的值,例如B可以是0xFFFF。
第二显示终端接收第一显示终端发送的随机值之后,可以将所述随机值输入至上述密值认证模型中,从而生成所述第二密值。
步骤202:将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,发送同步指令至所述第二显示终端。
所述第一密值可以是特征字符、特征栈、一串代码、字符串等形式。在本实施例中,所述第一密值用于第一显示终端在接收到所述第二密值时,基于第一密值以及第二密值进行对第二显示终端进行鉴权认证。
所述指令是指挥第二显示终端工作的指示和命令,可以理解为指定执行某种运算或功能实现的某种控制的代码。本申请实施例中,第一显示终端可以向第二显示终端发送SYNC信号(同步指令)。所述同步指令可以理解为指挥第二显示终端接收或同步第一显示终端的相应数据(第二位姿数据等)功能的代码,第二显示终端通过执行所述代码,向第一显示终端反馈传输控制字符,以进行相应数据(第二位姿数据等)的接收。
具体的,第二显示终端基于所述随机值生成第二密值之后,将所述第二密值发送至第一显示终端。第一显示终端接收到所述第二密值之后,判断所述第一密值与所述第二密值是否匹配。
具体的,当所述第一密值与所述第二密值匹配时,第一显示终端向第二显示终端发送同步指令。
具体的,当所述第一密值与所述第二密值不匹配时,第一显示终端可以再次产生一随机值,将所述随机值发送至第二显示终端,以使第二显示终端基于所述随机值反馈生成的新的第二密值,然后基于新的第二密值以及基于所述随机值生成的第一密值判断是否匹配。
可选的,所述第一显示终端基于所述随机值生成的第一密值可以理解为,第一显示终端与第二显示终端上基于随机值可以生成相匹配的密值,第一显示终端基于随机值的生成第一密值的方式,可以是与第二显示终端基于随机值的生成第二密值的方式相同,例如,第一显示终端可以在生成随机值之后,将所述随机值输入至上述的密值认证模型中,以得到第一密值。
可选的,所述判断所述第一密值与所述第二密值是否匹配。所述匹配方式可以是对所述第一密值与所述第二密值计算相似度,可以是对所述第一密值与所述第二密值计算相似距离,可以是对所述第一密值与所述第二密值计算差异特征信息,然后基于差异特征信息进行评级或评分,等等。
在一种可行的实施方式中,第一显示终端判断所述第一密值与所述第二密值是否匹配,可以是设置相似度阈值,例如设置相似度阈值为0.95,当所述第一密值与所述第二密值的相似度达到相似度阈值时,确定所述第一密值与所述第二密值匹配;当所述第一密值与所述第二密值的相似度未达到相似度阈值时,确定所述第一密值与所述第二密值不匹配。
在一种可行的实施方式中,第一显示终端判断所述第一密值与所述第二密值是否匹配,可以是设置相似距离阈值,例如设置相似度阈值为10,当所述第一密值与所述第二密值的相似距离达到相似距离阈值时,确定所述第一密值与所述第二密值匹配;当所述第一密值与所述第二密值的相似距离未达到相似距离时,确定所述第一密值与所述第二密值不匹配。
在一种可行的实施方式中,第一显示终端判断所述第一密值与所述第二密值是否匹配,可以是基于所述第一密值与所述第二密值的差异特征信息,对所述差异特征信息进行评级或评分,当所述第一密值与所述第二密值的评级达到预设等级或评分达到预设分数时,确定所述第一密值与所述第二密值匹配;当所述第一密值与所述第二密值的评级未达到预设等级或评分未达到预设分数时,确定所述第一密值与所述第二密值不匹配。
步骤203:响应于所述同步指令,向所述第一显示终端反馈传输控制字符,以使所述第一显示终端基于所述传输控制字符将所述视频数据以及所述第一位姿数据同时发送至第二显示终端。
所述传输控制字符用于在数据传输过程中用于指示开始或停止数据的传输,基于所述传输控制指令可以确认对端设备或对端设备与本端设备间的工作状态(通信状态、设备状态、链路状态等),第二显示终端在接收到第一显示终端的同步指令之后,向第一显示终端反馈一种预先设定好的字符,第一显示终端接收到所述字符即确认与第二显示终端间的数据传输通道或第二显示终端工作状态正常,常用的传输控制字符包括但不限于ENQ、EOT、ACK以及NAK等。
具体的,第二显示终端接收到第一显示终端的同步指令之后,对所述同步指令进行响应,生成传输控制字符,将传输控制字符发送至第一显示终端。第一显示终端接收到所述传输控制字符之后,通过读取并执行“传输控制字符”的控制逻辑对应的机器可执行指令,进而将所述视频数据以及所述第一位姿数据同时发送至第二显示终端。
步骤204:接收第一显示终端通过第一通道发送的视频数据以及同时通过第二通道发送所述第一显示终端的第一位姿数据。
在实际应用中,当通过有线通信传输的方式进行数据(例如视频数据、文本数据等等)传输时,发送端通常可以使用所包含的displayport数字接口、DVI数字接口、HDMI数字接口、LVDS数字接口等接口中的一种或多种,通过传输数据线连接到与之对应的接收端设备上进行数据的收发。
所述第一通道可以理解为用于视频数据传输的主通道。所述第二通道可以理解为用于位姿数据传输的辅通道。在本实施例中,第一显示终端可以通过displayport数字接口将视频数据与位姿数据进行同步传输。
其中,displayport数字接口作为一种视频传输接口,通常采用displayport数字接口的通道包含主通道(也称主链路)、辅通道。主通道采用单向传输,可以用于传输高速数据,辅通道采用半双工双向传输。
具体的,第一显示终端可以将displayport数字接口的主通道作为第一通道传输视频数据,并将displayport数字接口的辅通道作为第二通道传输第一位姿数据。当第一显示终端接收到第二显示终端的传输控制字符之后,通过第一通道发送视频数据以及同时通过第二通道发送第一位姿数据。第二显示终端基即可接收到第一显示终端通过第一通道发送的视频数据以及同时通过第二通道发送所述第一显示终端的第一位姿数据。
可选的,第一显示终端通过displayport数字接口的辅通道作为第二通道传输第一位姿数据时,通常对第一位姿数据采用ANSI 8B/10B的编码方式对第一位置数据进行编码,经编码后以微型信息包的形式传输第一位姿数据。
需要说明的是,在本申请实施例中,第二显示终端与第一显示终端在视频显示前的交互过程中,所述随机值、第二密值、同步指令、传输控制字符、第一位姿数据或第二位姿数据、完成接收指令等数据,可以由发送端经第二通道传输至接收端。例如:发送端-第一显示终端通过第二通道向接收端-第二显示终端发送随机值,发送端-第二显示终端通过第二通道将第二密值传输至接收端-第一显示终端等。
步骤205:向所述第一显示终端发送完成接收指令,并将所述第一位姿数据所包含的指定位数的数据值作为特征值。
所述完成接收指令可以理解为第二显示终端在接收到所述第一显示终端发送的视频数据以及第一位姿数据之后,向第一显示终端反馈的接收完成的代码。
所述特征值可以理解为一种用于校验第一位姿数据的指定位数的数据值。在本实施例中可以理解为,在第一位姿数据传输的过程,通常会因为网络抖动、通信质量、电磁干扰等原因导致第一位姿数据对应的部分或全部数据丢失,通过对特征值的检验可以用于检测所述第一位姿数据对应的数据完整性。
具体的,第二显示终端在接收到所述第一显示终端发送的视频数据以及第一位姿数据之后,向所述第一显示终端发送完成接收指令,并获取所述第一位姿数据所包含的指定位数的数据值,将所述数据值作为特征值。
可选的,通常所述第一位姿数据是以一串字符的形式进行传输,第二显示终端接收到所述第一位姿数据之后,需要获取第一位姿数据指定位数的数据值作为特征值,所述指定位数可以是基于预设特征值提取规则确定的,所述预设特征值提取规则可以是从第一位姿数据中从后向前依次提取对应的指定位数的数据值作为特征值,例如提取后8位的数据值作为特征值,可以是从前向后依次提取对应的指定位数的数据值作为特征值,可以是第一位姿数据中每间隔固定位数提取一位数据值,例如每间隔两位提取一位数据值,以此提取8位数据值作为特征值。
步骤206:获取所述第一位姿数据对应的数据容量以及所述特征值,基于所述数据容量以及所述特征值计算第三密值。
所述数据容量可以理解为第一位姿数据对应的数据大小,数据的基本单位是bit。
具体的,第二显示终端获取所述第一位姿数据对应的数据容量,判断所述数据容量与预设容量是否相等,所述预设容量可以理解为正常接收到所述述第一位姿数据对应的数据大小,例如所述预设容量为64KB。
具体的,当所述数据容量与预设容量相等时,确定校验参数为第一目标值,所述校验参数用于对第一位姿数据完整性验证过程中的一个参数,所述第一目标值可以是一个预先设置的值,例如第一目标值为1。将所述第一目标值与所述特征值异或运算的结果作为所述第三密值。
具体的,当所述数据容量与预设容量不相等时,确定所述校验参数为第二目标值,所述第一目标值可以是一个预先设置的值,例如第一目标值为0。将所述第二目标值与所述特征值异或运算的结果作为所述第三密值。
在一种具体的实施场景中,第二显示终端获取到所述第一位姿数据对应的数据容量为R1,所述预设容量为R0,此时第二显示终端判断R1与R0是否相等。所述校验参数为T。
当R1等于R0时,确定校验参数T为第一目标值1,即T=1;
当R1不等于R0时,确定校验参数T为第二目标值0,即T=0;
所述第三密值计算公式如下:
K=T^Rm
其中,K为第三密值,符号“^”为逻辑异或运算符,Rm为特征值。
将所述检验参数输入至上述第三密值计算公式中,即可得到所述第三密值。
步骤207:将所述第三密值发送至所述第一显示终端,接收所述第一显示终端基于所述第三密值返回的验证结果。
所述验证结果是指第一显示终端基于所述第三密值进行校验之后的结果,所述验证结果可以是特定的字符串、特征值、数字等形式。
具体的,第二显示终端基于所述数据容量以及所述特征值计算第三密值之后,将所述第三密值发送至第一显示终端。第一显示终端接收到所述第三密值之后,对所述第三密值进行验证,经验证之后向第二显示终端反馈验证结果。
具体的,第一显示终端获取第一位姿数据对应的特征值,所述特征值可以是理解为,第一显示终端与第二显示终端基于相同的规则确定所述特征值。第一显示终端将第一目标值与所述特征值异或运算的结果作为第一参考值,将第二目标值与所述特征值异或运算的结果作为第二参考值。
需要说明的是,第一显示终端计算第一参考值与第二参考值的顺序,可以是在接收到第三密值之前进行计算的,也可以是在接收到第三密值之后计算的,在本申请实施例中,所述计算第一参考值与第二参考值的顺序不作具体限定。
具体的,第一显示终端分别判断第三密值与第一参考值是否相等,判断第三密值与第二参考值是否相等。
在一种具体的实施场景中,第三密值为K3,第一目标值为1,即T=1,第一目标值为0,即T=0,第一参考值为K1,第二参考值为K2,所述参考值计算公式如下:
K=T^Rm
其中,K为参考值,符号“^”为逻辑异或运算符,Rm为特征值。
将T=1,Rm输入至上述公式中,即可得到第一参考值K1;
将T=0,Rm输入至上述公式中,即可得到第一参考值K1;
第一显示终端判断第三密值K3与第一参考值K1是否相等,判断第三密值K3与第二参考值K2是否相等。
当K3等于K1时,得到验证结果为特定字符0X11;
当K3等于K2时,得到验证结果为特定字符0X1F;
当K3不等于K1且不等于K2是,得到验证结果OXFF;
第一显示终端获取到第三密值之后,经上述判断,向第二显示终端反馈相应的包含特定字符的验证结果。例如:向第二显示终端反馈相应的包含特定字符-“OXFF”的验证结果。
步骤208:当所述验证结果指示所述第一位姿数据为验证通过状态时,获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据。
具体的,所述第二显示终端接收到述第一显示终端基于所述第三密值返回的验证结果之后,对所述验证结果进行解析处理,得到所述第一位姿数据对应的验证状态。
在一种具体的实施场景中,第二显示终端接收到述第一显示终端基于所述第三密值返回的验证结果之后,对所述验证结果进行解析处理,提取所述验证结果的特定字符。第二显示终端预先存储有特定字符与验证状态的对应关系表。所述特定字符与验证状态的对应关系表可参见表一:
表一
特定字符 解析结果 验证状态
0X11 特征值校验通过且数据完整 验证通过
0X1F 特征值校验通过但数据不完整 验证未通过
OXFF 特征值校验未通过且数据不完整 验证未通过
第二显示终端提取到所述验证结果的特定字符之后,基于所述特定字符与验证状态的对应关系表,确定所述验证结果对应的第一位姿数据的验证状态。例如,第二显示终端提取到所述验证结果的特定字符为0X11,此时,根据表一所示的对应关系,即可确定验证状态通过。
具体的,当验证状态通过时,第二显示终端获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据。
所述获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据。具体可参见步骤102,此处不再赘述。
在一种可行的实施方式中,当所述验证结果指示所述第一位姿数据为验证未通过状态时,第二显示终端向所述第一显示终端发送针对所述第一位姿数据的重发请求。第一显示终端接收到所述重发请求之后,可以向所述第二显示终端发送第一位姿数据。
步骤209:显示所述目标视频数据对应的视频图像。
具体可参见步骤103,此处不再赘述。
在本申请实施例中,第二显示终端在接收到第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,根据第一显示终端的位姿信息以及第二显示终端的位姿信息对所述视频数据进行图像调整处理,最后显示图像调整处理之后的目标视频数据对应的视频图像,不需要等待或控制第二显示终端旋转到某一个特定角度或到达某一位姿状态,可以将视频实时显示,减小了视频显示的时延。同时,第二显示终端基于第一显示终端的随机值生成第二密值并发送至第一显示终端进行认证,并对接收的第一位姿数据所包含的特征值以及第一位姿数据对应的数据容量进行检测,提高了在传输第一位姿数据的过程中的可靠性。
下述为本申请装置实施例,可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请方法实施例。
请参见图8,其示出了本申请一个示例性实施例提供的视频显示装置的结构示意图。该视频显示装置可以通过软件、硬件或者两者的结合实现成为装置的全部或一部分。该装置1包括数据接收模块11、图像调整模块12和图像显示模块13。
数据接收模块11,用于接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据;
图像调整模块12,用于获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据;
图像显示模块13,用于显示所述目标视频数据对应的视频图像。
可选的,如图11所示,所述装置1,还包括:
第二密值生成模块14,用于接收所述第一显示终端发送的随机值,基于所述随机值生成第二密值;
第二密值发送模块15,用于将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,将所述视频数据以及所述第一位姿数据同时发送至第二显示终端。
可选的,如图9所示,所述第二密值发送模块15,包括:
第二密值发送单元151,用于将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,发送同步指令至所述第二显示终端;
同步指令响应单元152,用于响应于所述同步指令,向所述第一显示终端反馈传输控制字符,以使所述第一显示终端基于所述传输控制字符将所述视频数据以及所述第一位姿数据同时发送至第二显示终端。
可选的,如图11所示,所述装置1,还包括:
特征值获取模块16,用于向所述第一显示终端发送完成接收指令,并将所述第一位姿数据所包含的指定位数的数据值作为特征值。
可选的,所述数据接收模块11,具体用于:
接收第一显示终端通过第一通道发送的视频数据以及同时通过第二通道发送所述第一显示终端的第一位姿数据。
可选的,如图11所示,所述装置1,还包括:
第三密值计算模块17,用于获取所述第一位姿数据对应的数据容量以及所述特征值,基于所述数据容量以及所述特征值计算第三密值;
验证结果接收模块18,用于将所述第三密值发送至所述第一显示终端,接收所述第一显示终端基于所述第三密值返回的验证结果;
所述图像调整模块12,还用于当所述验证结果指示所述第一位姿数据为验证通过状态时,执行所述获取第二显示终端当前的第二位姿数据的步骤。
可选的,如图10所示,所述第三密值计算模块17,包括:
第三密值第一子单元171,用于当所述数据容量与预设容量相等时,确定校验参数为第一目标值,将所述第一目标值与所述特征值异或运算的结果作为所述第三密值;
第三密值第二子单元172,用于当所述数据容量与预设容量不相等时,确定所述校验参数为第二目标值,将所述第二目标值与所述特征值异或运算的结果作为所述第三密值。
可选的,如图11所示,所述装置1,还包括:
重发请求发送模块19,用于当所述验证结果指示所述第一位姿数据为验证未通过状态时,向所述第一显示终端发送针对所述第一位姿数据的重发请求。
需要说明的是,上述实施例提供的视频显示装置在执行视频显示方法时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的视频显示装置与视频显示方法实施例属于同一构思,其体现实现过程详见方法实施例,这里不再赘述。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
在本实施例中,第二显示终端在接收到第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,根据第一显示终端的位姿信息以及第二显示终端的位姿信息对所述视频数据进行图像调整处理,最后显示图像调整处理之后的目标视频数据对应的视频图像,不需要等待或控制第二显示终端旋转到某一个特定角度或到达某一位姿状态,可以将视频实时显示,减小了视频显示的时延。同时,第二显示终端基于第一显示终端的随机值生成第二密值并发送至第一显示终端进行认证,并对接收的第一位姿数据所包含的特征值以及第一位姿数据对应的数据容量进行检测,提高了在传输第一位姿数据的过程中的可靠性。
本申请实施例还提供了一种计算机存储介质,所述计算机存储介质可以存储有多条指令,所述指令适于由处理器加载并执行如上述图1-图6所示实施例的所述视频显示方法,具体执行过程可以参见图1-图6所示实施例的具体说明,在此不进行赘述。
本申请还提供了一种计算机程序产品,该计算机程序产品存储有至少一条指令,所述至少一条指令由所述处理器加载并执行如上述图1-图6所示实施例的所述视频显示方法,具体执行过程可以参见图1-图6所示实施例的具体说明,在此不进行赘述。
请参见图12,为本申请实施例提供了一种电子设备的结构示意图。如图12所示,所述电子设备1000可以包括:至少一个处理器1001,至少一个网络接口1004,用户接口1003,存储器1005,至少一个通信总线1002。
其中,通信总线1002用于实现这些组件之间的连接通信。
其中,用户接口1003可以包括显示屏(Display)、摄像头(Camera),可选用户接口1003还可以包括标准的有线接口、无线接口。
其中,网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中,处理器1001可以包括一个或者多个处理核心。处理器1001利用各种借口和线路连接整个电子设备1000内的各个部分,通过运行或执行存储在存储器1005内的指令、程序、代码集或指令集,以及调用存储在存储器1005内的数据,执行服务器1000的各种功能和处理数据。可选的,处理器1001可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器1001可集成中央处理器(Central Processing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示屏所需要显示的内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器1001中,单独通过一块芯片进行实现。
其中,存储器1005可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选的,该存储器1005包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器1005可用于存储指令、程序、代码、代码集或指令集。存储器1005可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等;存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器1005可选的还可以是至少一个位于远离前述处理器1001的存储装置。如图12所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及视频显示应用程序。
在图12所示的电子设备1000中,用户接口1003主要用于为用户提供输入的接口,获取用户输入的数据;而处理器1001可以用于调用存储器1005中存储的视频显示应用程序,并具体执行以下操作:
接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据;
获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据;
显示所述目标视频数据对应的视频图像。
在一个实施例中,所述处理器1001在执行所述接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之前,还执行以下操作:
接收所述第一显示终端发送的随机值,基于所述随机值生成第二密值;
将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,将所述视频数据以及所述第一位姿数据同时发送至第二显示终端。
在一个实施例中,所述处理器1001在执行所述将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,将所述视频数据以及所述第一位姿数据同时发送至第二显示终端时,具体执行以下操作:
将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,发送同步指令至所述第二显示终端;
响应于所述同步指令,向所述第一显示终端反馈传输控制字符,以使所述第一显示终端基于所述传输控制字符将所述视频数据以及所述第一位姿数据同时发送至第二显示终端。
在一个实施例中,所述处理器1001在执行所述接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,还执行以下操作:
向所述第一显示终端发送完成接收指令,并将所述第一位姿数据所包含的指定位数的数据值作为特征值。
在一个实施例中,所述处理器1001在执行所述接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据时,具体执行以下操作:
接收第一显示终端通过第一通道发送的视频数据以及同时通过第二通道发送所述第一显示终端的第一位姿数据。
在一个实施例中,所述处理器1001在执行所述获取当前的第二位姿数据之前,还执行以下操作:
获取所述第一位姿数据对应的数据容量以及所述特征值,基于所述数据容量以及所述特征值计算第三密值;
将所述第三密值发送至所述第一显示终端,接收所述第一显示终端基于所述第三密值返回的验证结果;
当所述验证结果指示所述第一位姿数据为验证通过状态时,执行所述获取第二显示终端当前的第二位姿数据的步骤。
在一个实施例中,所述处理器1001在执行所述基于所述数据容量以及所述特征值计算第三密值时,具体执行以下操作:
当所述数据容量与预设容量相等时,确定校验参数为第一目标值,将所述第一目标值与所述特征值异或运算的结果作为所述第三密值;
当所述数据容量与预设容量不相等时,确定所述校验参数为第二目标值,将所述第二目标值与所述特征值异或运算的结果作为所述第三密值。
在一个实施例中,所述处理器1001在执行所述将所述第三密值发送至所述第一显示终端,接收所述第一显示终端基于所述第三密值返回的验证结果之后,还执行以下操作:
当所述验证结果指示所述第一位姿数据为验证未通过状态时,向所述第一显示终端发送针对所述第一位姿数据的重发请求。
在本实施例中,第二显示终端在接收到第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,根据第一显示终端的位姿信息以及第二显示终端的位姿信息对所述视频数据进行图像调整处理,最后显示图像调整处理之后的目标视频数据对应的视频图像,不需要等待或控制第二显示终端旋转到某一个特定角度或到达某一位姿状态,可以将视频实时显示,减小了视频显示的时延。同时,第二显示终端基于第一显示终端的随机值生成第二密值并发送至第一显示终端进行认证,并对接收的第一位姿数据所包含的特征值以及第一位姿数据对应的数据容量进行检测,提高了在传输第一位姿数据的过程中的可靠性。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体或随机存储记忆体等。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。

Claims (9)

1.一种视频显示方法,其特征在于,应用于第二显示终端,所述方法包括:
在多显示终端组合显示一个视频画面的场景中,接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据;所述接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据,包括:接收第一显示终端通过第一通道发送的视频数据以及同时通过第二通道发送所述第一显示终端的第一位姿数据;
获取第二显示终端当前的第二位姿数据,基于所述第一位姿数据、所述第二位姿数据对所述视频数据进行图像调整处理,得到目标视频数据;
显示所述目标视频数据对应的视频图像;
其中,在所述场景中,所述第一显示终端与第二显示终端在所述场景中可进行活动旋转,所述第一显示终端与第二显示终端组合显示所述视频数据对应的视频画面。
2.根据权利要求1所述的方法,其特征在于,所述接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之前,还包括:
接收所述第一显示终端发送的随机值,基于所述随机值生成第二密值;
将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,将所述视频数据以及所述第一位姿数据同时发送至第二显示终端。
3.根据权利要求2所述的方法,其特征在于,所述将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,将所述视频数据以及所述第一位姿数据同时发送至第二显示终端,包括:
将所述第二密值发送至所述第一显示终端,以使所述第一显示终端检测到所述第二密值与基于所述随机值生成的第一密值匹配时,发送同步指令至所述第二显示终端;
响应于所述同步指令,向所述第一显示终端反馈传输控制字符,以使所述第一显示终端基于所述传输控制字符将所述视频数据以及所述第一位姿数据同时发送至第二显示终端。
4.根据权利要求3所述的方法,其特征在于,所述接收第一显示终端发送的视频数据以及所述第一显示终端的第一位姿数据之后,还包括:
向所述第一显示终端发送完成接收指令,并将所述第一位姿数据所包含的指定位数的数据值作为特征值。
5.根据权利要求4所述的方法,其特征在于,所述获取当前的第二位姿数据之前,还包括:
获取所述第一位姿数据对应的数据容量以及所述特征值,基于所述数据容量以及所述特征值计算第三密值;
将所述第三密值发送至所述第一显示终端,接收所述第一显示终端基于所述第三密值返回的验证结果;
当所述验证结果指示所述第一位姿数据为验证通过状态时,执行所述获取第二显示终端当前的第二位姿数据的步骤。
6.根据权利要求5所述的方法,其特征在于,所述基于所述数据容量以及所述特征值计算第三密值,包括:
当所述数据容量与预设容量相等时,确定校验参数为第一目标值,将所述第一目标值与所述特征值异或运算的结果作为所述第三密值;
当所述数据容量与预设容量不相等时,确定所述校验参数为第二目标值,将所述第二目标值与所述特征值异或运算的结果作为所述第三密值。
7.根据权利要求5所述的方法,其特征在于,所述将所述第三密值发送至所述第一显示终端,接收所述第一显示终端基于所述第三密值返回的验证结果之后,还包括:
当所述验证结果指示所述第一位姿数据为验证未通过状态时,向所述第一显示终端发送针对所述第一位姿数据的重发请求。
8.一种计算机存储介质,其特征在于,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行如权利要求1~7任意一项的方法步骤。
9.一种电子设备,其特征在于,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行如权利要求1~7任意一项的方法步骤。
CN201911049153.4A 2019-10-31 2019-10-31 一种视频显示方法、装置、存储介质及电子设备 Active CN110719522B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911049153.4A CN110719522B (zh) 2019-10-31 2019-10-31 一种视频显示方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911049153.4A CN110719522B (zh) 2019-10-31 2019-10-31 一种视频显示方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN110719522A CN110719522A (zh) 2020-01-21
CN110719522B true CN110719522B (zh) 2021-12-24

Family

ID=69214604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911049153.4A Active CN110719522B (zh) 2019-10-31 2019-10-31 一种视频显示方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN110719522B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112770050B (zh) * 2020-12-31 2023-02-03 Oppo广东移动通信有限公司 视频展示方法及装置、计算机可读介质和电子设备
CN112967598B (zh) 2021-01-29 2024-05-17 京东方智慧物联科技有限公司 显示系统的控制方法、装置以及显示系统
CN113747228B (zh) * 2021-09-17 2023-09-15 四川启睿克科技有限公司 一种实现智能旋转电视动态屏保的方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104936039A (zh) * 2015-06-19 2015-09-23 小米科技有限责任公司 图像处理方法及装置
CN106302354A (zh) * 2015-06-05 2017-01-04 北京壹人壹本信息科技有限公司 一种身份认证方法和装置
CN109391468A (zh) * 2017-08-14 2019-02-26 杭州萤石网络有限公司 一种认证方法及系统
CN109814704A (zh) * 2017-11-22 2019-05-28 腾讯科技(深圳)有限公司 一种视频数据处理方法和装置
CN109922047A (zh) * 2019-01-31 2019-06-21 武汉天喻聚联网络有限公司 一种图像传输系统及方法
CN109922204A (zh) * 2017-12-13 2019-06-21 中兴通讯股份有限公司 图像处理方法及终端
CN110134424A (zh) * 2019-05-16 2019-08-16 上海东软载波微电子有限公司 固件升级方法及系统、服务器、智能设备、可读存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8805793B2 (en) * 2012-08-08 2014-08-12 Amazon Technologies, Inc. Data storage integrity validation
WO2014201059A1 (en) * 2013-06-10 2014-12-18 Certimix, Llc Secure storing and offline transfering of digitally transferable assets
CN105898342A (zh) * 2015-12-30 2016-08-24 乐视致新电子科技(天津)有限公司 一种视频的多点同屏播放方法及系统
CN206313874U (zh) * 2016-12-19 2017-07-07 广州视源电子科技股份有限公司 摄像装置和拼接显示系统
CN108304148B (zh) * 2017-01-11 2020-10-16 南京中兴新软件有限责任公司 一种多屏拼接显示的方法和装置
CN107678716A (zh) * 2017-09-06 2018-02-09 珠海格力电器股份有限公司 一种图像显示方法、装置及移动终端
JP6903529B2 (ja) * 2017-09-11 2021-07-14 株式会社東芝 情報処理装置、情報処理方法およびプログラム
CN109842792B (zh) * 2017-11-27 2021-05-11 中兴通讯股份有限公司 视频播放方法、装置、系统及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106302354A (zh) * 2015-06-05 2017-01-04 北京壹人壹本信息科技有限公司 一种身份认证方法和装置
CN104936039A (zh) * 2015-06-19 2015-09-23 小米科技有限责任公司 图像处理方法及装置
CN109391468A (zh) * 2017-08-14 2019-02-26 杭州萤石网络有限公司 一种认证方法及系统
CN109814704A (zh) * 2017-11-22 2019-05-28 腾讯科技(深圳)有限公司 一种视频数据处理方法和装置
CN109922204A (zh) * 2017-12-13 2019-06-21 中兴通讯股份有限公司 图像处理方法及终端
CN109922047A (zh) * 2019-01-31 2019-06-21 武汉天喻聚联网络有限公司 一种图像传输系统及方法
CN110134424A (zh) * 2019-05-16 2019-08-16 上海东软载波微电子有限公司 固件升级方法及系统、服务器、智能设备、可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"微服务架构的数据传输和鉴权安全研究";金一科;《中国优秀硕士学位论文全文数据库》;20190115;全文 *

Also Published As

Publication number Publication date
CN110719522A (zh) 2020-01-21

Similar Documents

Publication Publication Date Title
CN110719522B (zh) 一种视频显示方法、装置、存储介质及电子设备
EP3606082B1 (en) Panoramic video playback method and client terminal
US10313665B2 (en) Behavioral directional encoding of three-dimensional video
CN107735152B (zh) 用于虚拟现实(vr)观看的扩展视野重新渲染
US10958890B2 (en) Method and apparatus for rendering timed text and graphics in virtual reality video
US10229651B2 (en) Variable refresh rate video capture and playback
TWI407773B (zh) 提供三維立體影像之方法及系統
CN110419224B (zh) 消费视频内容的方法、电子设备和服务器
US9420324B2 (en) Content isolation and processing for inline video playback
US10652284B2 (en) Method and apparatus for session control support for field of view virtual reality streaming
US20060221188A1 (en) Method and apparatus for composing images during video communications
US10970931B2 (en) Method for transmitting virtual reality image created based on image direction data, and computer readable medium storing program using the same
CN111182226B (zh) 一种多相机同步工作的方法、装置、介质和电子设备
CN110537208B (zh) 头戴式显示器和方法
CN105874807B (zh) 用于在电视设备上对Web内容远程渲染的方法、系统和介质
US20230209031A1 (en) Methods, systems, and media for generating and rendering immersive video content
CN107409237A (zh) 针对输出装置和网络质量的云游戏数据流动态调整
US20150244984A1 (en) Information processing method and device
US9740294B2 (en) Display apparatus and method for controlling display apparatus thereof
US20120179774A1 (en) Three-dimensional earth-formation visualization
US11871089B2 (en) Video modification and transmission using tokens
US20220172440A1 (en) Extended field of view generation for split-rendering for virtual reality streaming
CN105676961B (zh) 头戴式显示器及其显示控制方法
CN113099311A (zh) 用于播放数据的方法、电子设备和计算机存储介质
CN110581960B (zh) 视频处理方法、装置、系统、存储介质和处理器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant