CN116266868A - 一种显示设备及切换视角方法 - Google Patents
一种显示设备及切换视角方法 Download PDFInfo
- Publication number
- CN116266868A CN116266868A CN202111552536.0A CN202111552536A CN116266868A CN 116266868 A CN116266868 A CN 116266868A CN 202111552536 A CN202111552536 A CN 202111552536A CN 116266868 A CN116266868 A CN 116266868A
- Authority
- CN
- China
- Prior art keywords
- user
- virtual reality
- network element
- view angle
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 230000000007 visual effect Effects 0.000 claims description 28
- 230000004044 response Effects 0.000 claims description 15
- 230000001960 triggered effect Effects 0.000 claims description 13
- 239000000463 material Substances 0.000 claims description 5
- 238000012544 monitoring process Methods 0.000 claims description 3
- 230000008569 process Effects 0.000 abstract description 11
- 238000010586 diagram Methods 0.000 description 22
- 238000004891 communication Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 8
- 230000003993 interaction Effects 0.000 description 7
- 238000013461 design Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请示出一种显示设备及切换视角方法,通过接收用户输入的用于进入虚拟现实应用的控制指令;响应于控制指令,获取媒资;其中,媒资为全景视角媒资;当用户在当前视角观看媒资时,接收服务器发送的第一消息;其中,第一消息包括中心视角的相机位置数据和相机旋转数据;中心视角由终端确定的用于设置用户观看媒资范围的视角;显示设备、服务器以及终端基于网络连接;根据第一消息将媒资的当前视角切换为中心视角。本申请示出的技术方案,能够在用户使用虚拟现实应用的过程中,实时控制用户的观看视角。
Description
技术领域
本申请涉及显示设备技术领域,尤其涉及一种显示设备及切换视角方法。
背景技术
虚拟现实(Virtual Reality,VR)技术是通过计算机模拟虚拟环境,从而给人以环境沉浸感的显示技术。虚拟现实应用采用虚拟现实技术构建的场景能够使用户获得更好的观看体验。基于虚拟现实技术的虚拟现实应用(如VR游戏、VR设计、VR直播等)广泛应用于旅游、赛事、房地产以及医疗行业等。
但是现有的虚拟现实应用中,通常由用户自己控制观看视角,以VR直播为例,用户在VR直播中观看直播画面时,由于不具备现场观看的空间立体感,在用户自己控制观看视角的过程中,用户无法及时、准确的确定VR直播画面中的焦点。为了帮助用户更好的确定VR直播画面的焦点,现有的观看VR直播的方式中,通常通过导播人员引导、字幕提示和切换播放源等方式提示用户VR直播画面中的焦点位置。
但仅通过VR直播画面中导播人员引导、字幕提示和切换播放源的方式无法干预用户的观看视角,不能够满足实时控制直播的需求。
发明内容
本申请提供一种显示设备及切换视角方法,能够在用户使用虚拟现实应用的过程中,实时控制用户的观看视角。
第一方面,本申请示出一种显示设备,包括:显示器;控制器,被配置为:接收用户输入的用于进入虚拟现实应用的控制指令;响应于控制指令,获取媒资;其中,媒资为全景视角媒资,当用户在当前视角观看媒资时,接收服务器发送的第一消息;其中,第一消息包括中心视角的相机位置数据和相机旋转数据;中心视角由终端确定的用于设置用户观看媒资范围的视角;显示设备、服务器以及终端基于网络连接;根据第一消息将媒资的当前视角切换为中心视角。采用该实施方式,能够将用户的当前视角切换为第一视角,通过实时调整用户的观看视角,以使用户能够及时,准确的获得观看焦点,得到最佳的观看体验。
第二方面,本申请示出一种终端,包括:显示器;控制器,被配置为:接收用户输入的用于进入虚拟现实应用的控制指令;响应于控制指令,向第一网元发送获取第二虚拟现实播放器的第三请求指令;其中,第一网元为服务器中向显示设备提供第二虚拟现实播放器的网元;加载第一网元响应于第三请求指令发送的第二虚拟现实播放器;通过第二虚拟现实播放器播放图像采集装置实时采集的媒资;当用户在第二虚拟现实播放器确定媒资的中心视角时,进行切换视角操作。采用本申请示出的技术方案,能够在终端通过人工手段或其他智能方式确定现场焦点,能够实时帮助用户确定观看视角。
第三方面,本申请示出一种显示设备,包括:显示器;控制器,被配置为:接收用户输入的用于进入虚拟现实应用的控制指令;响应于控制指令,向第一网元发送获取第三虚拟现实播放器的第四请求指令;其中,第一网元为服务器中向显示设备提供第三虚拟现实播放器的网元;加载第一网元响应于第四请求指令发送的第三虚拟现实播放器;当第三虚拟现实播放器在显示设备加载完毕时,向第二网元发送获取媒资的第五请求指令;其中,第二网元为服务器中接收终端实时采集的媒资并向显示设备提供媒资的网元;控制第三虚拟现实播放器播放第二网元响应于第五请求指令向显示设备发送的媒资;媒资已由终端确定中心视角;当用户在当前视角观看媒资时,媒资的初始视角为所述中心视角。
第四方面,本申请还示出一种切换视角方法,所述方法包括:获取媒资,媒资为全景视角媒资,当用户在当前视角观看媒资时,接收服务器发送的第一消息;第一消息包括中心视角的相机位置数据和相机旋转数据;中心视角由终端确定;显示设备、服务器以及终端基于网络连接;根据第一消息将媒资的当前视角切换为中心视角。
第五方面,本申请还示出一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现上述切换视角方法。
以上示出的技术方案,能够解决在用户使用虚拟现实应用的过程中仅通过导播人员引导、发送消息提示以及切换播放源的方式不能直接干预观看者视角的问题,本申请示出一种显示设备及切换视角方法,通过接收用户输入的用于进入虚拟现实应用的控制指令;响应于控制指令,获取媒资;媒资为终端实时采集的全景视角媒资,当用户在当前视角观看媒资时,接收服务器发送的第一消息;第一消息包括中心视角的相机位置数据和相机旋转数据;中心视角由终端确定;显示设备、服务器以及终端基于网络连接;根据第一消息将媒资的当前视角切换为中心视角。本申请示出的技术方案,能够在用户使用虚拟现实应用的过程中,实时控制用户的观看视角。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了根据一些实施例的显示设备的使用场景图;
图2示出了根据一些实施例的控制装置100的配置框图;
图3示出了根据一些实施例的显示设备200的硬件配置框图;
图4示出了根据一些实施例的显示设备200的软件配置图;
图5示出了根据一些实施例的应用程序的图标控件界面显示示意图;
图6示出了根据一些实施例的虚拟现实应用使用场景示意图;
图7示出了根据一些实施例的第一用户端使用场景示意图;
图8示出了根据一些实施例的采集端使用场景示意图;
图9示出了根据一些实施例的显示设备配置流程图;
图10示出了根据一些实施例的通过URL进入虚拟现实应用示意图;
图11示出了根据一些实施例的显示设备配置流程图;
图12示出了根据一些实施例的显示设备配置流程图;
图13示出了根据一些实施例的显示设备配置流程图;
图14示出了根据一些实施例的第一提示示意图;
图15示出了根据一些实施例的第二提示示意图;
图16示出了根据一些实施例的显示设备配置流程图;
图17示出了根据一些实施例的采集端显示设备的架构示意图;
图18示出了根据一些实施例的虚拟现实设备应用场景示意图。
具体实施方式
为使本申请的目的和实施方式更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的所有组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本说明书通篇提及的“多个实施例”、“一些实施例”、“一个实施例”或“实施例”等,意味着结合该实施例描述的具体特征、结构或特性包括在至少一个实施例中。因此,本说明书通篇出现的短语“在多个实施例中”、“在一些实施例中”、“在至少另一个实施例中”或“在实施例中”等并不一定都指相同的实施例。此外,在一个或多个实施例中,具体特征、结构或特性可以任何合适的方式进行组合。因此,在无限制的情形下,结合一个实施例示出或描述的具体特征、结构或特性可全部或部分地与一个或多个其他实施例的特征、结构或特性进行结合。这种修改和变型旨在包括在本申请的范围之内。
图1为根据本申请一个或多个实施例的显示设备与控制装置之间操作场景的示意图,如图1所示,用户可通过移动终端300和控制装置100操作显示设备200。控制装置100可以是遥控器,遥控器和显示设备的通信包括红外协议通信、蓝牙协议通信,无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键,语音输入、控制面板输入等输入用户指令,来控制显示设备200。在一些实施例中,也可以使用移动终端、平板电脑、计算机、笔记本电脑、和其他智能设备以控制显示设备200。
在一些实施例中,移动终端300可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。也可以将移动终端300上显示音视频内容传输到显示设备200上,实现同步显示功能显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。显示设备200,可以液晶显示器、OLED显示器、投影显示设备。显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。
图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示,控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。通信接口130用于和外部通信,包含WIFI芯片,蓝牙模块,NFC或可替代模块中的至少一种。用户输入/输出接口140包含麦克风,触摸板,传感器,按键或可替代模块中的至少一种。
图3示出了根据示例性实施例中显示设备200的硬件配置框图。如图3所示显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口280中的至少一种。控制器包括中央处理器,视频处理器,音频处理器,图形处理器,RAM,ROM,用于输入/输出的第一接口至第n接口。显示器260可为液晶显示器、OLED显示器、触控显示器以及投影显示器中的至少一种,还可以为一种投影装置和投影屏幕。调谐解调器210通过有线或无线接收方式接收广播电视信号,以及从多个无线或有线广播电视信号中解调出音视频信号,如以及EPG数据信号。检测器230用于采集外部环境或与外部交互的信号。控制器250和调谐解调器210可以位于不同的分体设备中,即调谐解调器210也可在控制器250所在的主体设备的外置设备中,如外置机顶盒等。
在一些实施例中,控制器250,通过存储在存储器上中各种软件控制程序,来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。用户可在显示器260上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
在一些实施例中,“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素中的至少一种。
图4为根据本申请一个或多个实施例的显示设备200中软件配置示意图,如图4所示,将系统分为四层,从上至下分别为应用程序(Applications)层(简称“应用层”),应用程序框架(Application Framework)层(简称“框架层”),安卓运行时(Android runtime)和系统库层(简称“系统运行库层”),以及内核层。内核层至少包含以下驱动中的至少一种:音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器,温度传感器,压力传感器等)、以及电源驱动等。
图5为根据本申请一个或多个实施例的显示设备200中应用程序的图标控件界面显示示意图,如图5中所示,应用程序层包含至少一个应用程序可以在显示器中显示对应的图标控件,如:直播电视应用程序图标控件、视频点播应用程序图标控件、媒体中心应用程序图标控件、应用程序中心图标控件、游戏应用图标控件等。直播电视应用程序,可以通过不同的信号源提供直播电视。视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。应用程序中心,可以提供储存各种应用程序。
本申请中的显示设备是指能够输出具体显示画面的终端设备,可以为手机、智能电视、平板电脑、桌面型、膝上型、笔记本电脑、超级移动个人计算机(ultra-mobilepersonal computer,UMPC)、手持计算机、上网本、个人数字助理(personal digitalassistant,PDA)、可穿戴电子设备、虚拟显示设备等终端设备,本申请实施例对终端设备的具体类型不作任何限制。
图6示例性示出了根据示例性实施例中虚拟现实应用使用场景示意图。虚拟现实应用可以为VR游戏、VR设计以及VR直播等应用。本申请示出的技术方案包括但不限于应用于任何需要实时控制用户观看视角的VR应用。如图6所示,以虚拟现实应用为VR直播为例,VR直播场景中,显示设备、服务器以及终端基于网络连接;终端在VR直播现场通过VR摄像机实时采集媒资;并通过服务器向显示设备提供媒资。其中,虚拟现实应用向显示设备提供观看者版本,向终端提供供应者版本,观看者版本用于观看服务器提供的媒资;供应者版本用于观看终端的图像采集装置实时采集的媒资,并控制媒资视角。
在一些实施例中,直播也可以是视频数据为预置数据用户可以调整视角进行观看,音频数据是直播数据,需要多台显示设备同步播放。以虚拟现实应用为VR设计为例,多台显示设备、服务器以及终端基于网络连接,在多台显示设备进入VR设计应用以使用户观看房屋室内装修场景中,房屋室内装修场景为预设数据,用户在显示设备上可以调整视角进行观看,导播人员在终端实时提供音频数据以进行讲解,并通过服务器向显示设备提供音频数据,当导播人员在进入对应房间进行讲解时,导播人员可以控制视频视角以使用户观看到音频数据对应讲解的视角,以提供给用户更好的讲解体验。
在一些实施例中,直播也可以是音频数据与视频数据同为直播数据,需要多台显示设备同步播放。以虚拟现实应用为VR直播为例,多台显示设备、服务器以及终端基于网络连接,在多台显示设备进入VR直播应用以使用户观看直播会议场景中,终端在VR直播现场通过图像采集装置采集视频数据,通过音频采集装置采集音频数据,用户在显示设备上可以调整视角观看视频数据,导播人员可以控制视频视角以使用户观看到与音频数据对应的视频视角,以提供给用户更好的观看体验。
需要说明的是,本申请中的虚拟现实应用包括但不限于基于超文本标记语言5(Hyper Text Markup Language 5,HTML5)格式构建的网页应用。HTML5是构建网页内容的一种语言描述方式。现有多种基于HTML5格式实现虚拟现实播放器的方法,例如,采用3D引擎(如Three.js)创建一个三维场地模型、一个虚拟摄像机、一个球体模型和一个网页图形(Web Graphics Library,Web GL)渲染器;将图片或视频资源转换成纹理贴到球体模型上,用户通过触摸屏或者鼠标调整虚拟摄像机的相机位置和旋转角度来选定显示视角,并将该显示视角的图片或视频通过Web GL渲染器进行渲染,以观看360度方向的图片或视频。如果显示设备配置有陀螺仪,用户通过旋转显示设备即可观看360度方向的图片或视频。
需要说明的是,本申请中的虚拟摄像机也可以称为摄像机模型,是用于包含在上述三维场地模型的虚拟场景中进行画面采集的虚拟模型。虚拟摄像机具有与实体摄像机类似的相机信息,比如,位置、姿态、光圈大小、焦距等等。虚拟摄像机在虚拟场景中的相机信息来确定。
为便于表述,显示设备为播放媒资加载的虚拟现实播放器表述为第一虚拟现实播放器,终端为播放媒资加载的虚拟现实播放器表述为第二虚拟现实播放器,另一显示设备为播放媒资加载的虚拟现实播放器表述为第三虚拟现实播放器。
图7示例性示出了根据示例性实施例中显示设备使用场景示意图。如图7所示,用户输入用于进入虚拟现实应用的控制指令,响应于控制指令,获取第一虚拟现实播放器;以使用户能够通过第一虚拟现实播放器观看媒资。在用户观看媒资的过程中,用户可以与显示设备实现交互。
在一些实施例中,显示设备可以包括显示单元,显示单元可用于接收输入的数字或字符信息,产生与显示设备的用户设置以及功能控制有关的信号输入,具体地,显示单元可以包括设置在通信终端正面的触摸屏,可以收集用户在其上或附近的触摸操作,例如点击按钮,拖动滚动框等。显示单元还可以包括设置在显示设备正面的显示屏。其中,显示屏可以采用液晶显示器、发光二极管等形式配置。其中,触摸屏可以覆盖在显示屏之上,也可以将触摸屏与显示屏集成而实现显示设备的输入和输出功能,集成后可以简称触摸显示屏。本申请中的显示单元可以用于显示本申请中虚拟现实应用界面。用户可以通过触摸操作在虚拟现实应用界面上调整媒资观看视角。
在一些实施例中,可以通过外设执行交互,例如,通过鼠标或对用户界面进行操作。用户可以通过鼠标移动操作在虚拟现实应用上调整媒资观看视角。
图8示例性示出了根据示例性实施例中终端使用场景示意图。如图8所示,终端在直播现场用实景摄像机拍摄实景场地,并根据实景场地在虚拟现实应用中构建三维场地模型,以形成虚拟现实画面,终端可以播放虚拟现实画面。
本申请实施例中,实景场地是指实体摄像机拍摄的目标场地,以会议直播为例,拍摄的目标场地为直播会场。其中,一个实景场地可以对应多个实体摄像机。多个实体摄像机各自拍摄的视频画面通过分区或者分时间拼接组成直播视频流,以上传至服务器。三维场地模型是实景场地的三维虚拟模型,该三维虚拟模型可以视为实景场地按照一定比例缩放的结果。实景场地的三维场地模型可以预先生成并存储。
在显示设备媒资播放的场景中,以用户通过VR直播在手机上线上参加某交流会为例,会议开始前,用户为体验交流会现场环境,在触摸屏上滑动以切换场景视角,用户观看的视角由用户操控。在交流会现场观众发言的过程中,现场参会人员可以根据空间方位感及时准确的确定现场正在发言的观众位置,然而由于线上VR直播中,用户不具有现场的空间方位感,因此不能及时转动视角确认正在发言的观众位置/无法确定音频数据对应的人/物,进而获得更好的参与感。
为了帮助用户更好的确定VR直播画面的焦点/或将音频数据对应的人/物作为焦点,现有的观看VR直播的方式中,通常通过导播人员引导、字幕提示和切换播放源等方式提示用户VR直播画面中的焦点位置。但仅通过VR直播画面中导播人员引导、字幕提示和切换播放源的方式无法干预用户的观看视角,不能够满足实时控制直播的需求。
由此可见,现有的VR直播应用中,用户无法及时确定重要的观看内容,因此,帮助用户实时控制观看视角,能够提高用户的观看体验。
本申请示出的技术方案,能在用户使用VR直播应用过程中,将显示设备端用户正在观看的视角切换为终端用户确定的中心视角,以帮助显示设备端用户及时、准确的确定最佳观看视角,进而在VR直播中获得更好的参与感。需要注意的是,本申请示出的技术方案包括但不限于应用于VR直播,本申请示出的技术方案能够应用任何需要实时控制用户观看视角的VR应用中。
为此,本申请示出了一种显示设备,包括:显示器;控制器,被配置为执行如图9所示的下列步骤S901-S904。
步骤S901,接收用户输入的用于进入虚拟现实应用的控制指令。
在一些实施例中,用户点击统一资源定位器(Uniform Resource Locator,URL)以进入网页中的虚拟现实应用。URL可以是其他用户向显示设备端用户分享的链接,也可以是媒资供应商向显示设备端用户推送的链接,还可以是显示设备端用户在浏览器中自行输入的链接。
图10示例性示出了根据示例性实施例中通过URL进入虚拟现实应用示意图。如图10所示,当显示设备端用户点击某VR直播应用的URL时,用户进入HTML5格式的浏览器页面加载VR直播间。
在一些实施例中,服务器会为该直播创建直播房间,在显示设备启动虚拟现实应用后,可以访问该直播房间。同步的,访问该直播房间的可包括第一显示设备、第二显示设备、第N显示设备。控制视角的终端可以是显示设备中的一个,采集端可以为终端的一部分,也可以仅作为采集设备向直播房间上传数据。
在一些实施例中,在采集端可以为终端的一部分时,终端不仅上传采集端采集的数据,也会从服务端下拉虚拟现实数据。
在一些实施例中,在采集端独立存在时,可以仅作为采集设备向直播房间上传数据,不下载虚拟现实数据。
步骤S902,响应于控制指令,获取媒资;其中,媒资为全景视角媒资。
在一些实施例中,媒资为终端实时采集的全景视角媒资。
在一些实施例中,媒资中的视频媒资为预置的全景视角图像,音频媒资为采集端实时采集的音频数据。
步骤S903,当用户在当前视角观看媒资时,接收服务器发送的第一消息;其中,第一消息包括中心视角的相机位置数据和相机旋转数据;中心视角由终端确定;显示设备、服务器以及终端基于网络连接;可选的,显示设备、服务器以及终端可以基于有线网络连接或无线网络连接。
需要说明的是,本申请中的中心视角可以是通过自由视角调整操作确定的用于设置用户观看所述媒资范围的视角,也就是说,在本申请实施例中,目标视角并不限制于固定视角,也可以是由终端用户自由调整的视角。终端作为直播的主持者,可以设定中心视角。并通过触发第一消息,来使得所有观看的显示设备观看相同视角的内容。
在一些实施例中,中心视角可以是会议的主持端设定的,也可以是根据终端的采集角度确定的,目的是使指定角度的人/物呈现在显示设备端的界面上。
在一些实施例中,服务器在接收到会议主持端的第一指令后,向各个显示设备发送第一消息。其中,第一指令用于控制直播图像中指定角度的人/物呈现在显示设备端的界面上。
在一些实施例中,上述的无线网络或有线网络使用标准通信技术和/或协议。网络通常为因特网、但也可以是任何网络,包括但不限于局域网(LocalAreaNetwork,LAN)、城域网(MetropolitanAreaNetwork,MAN)、广域网(WideAreaNetwork,WAN)、移动、有线或者无线网络、专用网络或者虚拟专用网络的任何组合)。在一些实施例中,使用包括超文本标记语言(HyperTextMark-upLanguage,HTML)、可扩展标记语言(ExtensibleMarkupLanguage,XML)等的技术和/或格式来代表通过网络交换的数据。此外还可以使用诸如安全套接字层(SecureSocketLayer,SSL)、传输层安全(TransportLayerSecurity,TLS)、虚拟专用网络(VirtualPrivateNetwork,VPN)、网际协议安全(InternetProtocolSecurity,IPsec)等常规加密技术来加密所有或者一些链路。在另一些实施例中,还可以使用定制和/或专用数据通信技术取代或者补充上述数据通信技术。
本申请中的服务器可以是一台服务器,或者为若干台服务器,或者是一个虚拟化平台或者是一个云计算服务中心。
需要说明的是,本申请中的媒资,包括但不限于直播视频流的视频画面、视频文件的视频画面以及视频动画的画面等。
在一些实施例中,服务器包括:第一网元、第二网元、第三网元以及第四网元;第一网元用于向显示设备提供第一虚拟现实播放器;第二网元用于接收终端实时采集的媒资并向显示设备提供媒资;第三网元用于在显示设备、服务器、终端之间发送消息,消息用于传递相机位置数据和相机旋转数据;第四网元用于通过终端控制媒资;
本申请中的第一网元与第四网元通过第二网元连接互通,第三网元分别与第一网元、第二网元以及第四网元连接。其中,本申请中的第一网元为Web网元;第二网元为业务网元;第三网元为消息网元;第四网元为Oss网元。网元由一个或多个机盘或机框组成,能够独立完成一定的传输功能。Web网元在本申请中用于在显示设备和终端加载虚拟现实播放器,Oss网元用于在终端控制媒资,业务网元为API Server,用于提供Web网元和Oss网元之间的数据交互,消息网元用于在Web网元、Oss网元、以及业务网元之间进行消息传输。
在一些实施例中,直播视频流中包含音频数据。在一些实施例中,音频数据和视频数据可以有不同的来源。
在一些实施例中,终端将本地录制的直播视频流上传至第二网元,并由第二网元对直播视频流进行转码等相关处理后,发送给第一虚拟现实播放器以进行媒资播放。
在一些实施例中,媒资数据中的视频数据是服务器或终端上预先存储的,声音数据是采集端实时上传的。示例性,会议介绍的模型是三维视频数据,各终端均可观看和切换视角。音频是实时数据,在视频数据介绍到指定目标物时,可以通过视角切换使得到所有与会终端均同步观看三位视频数据中的目标物。
在一些实施例中,控制器执行获取媒资的步骤,被进一步配置为执行如图11所示的步骤S1101-S1104;
步骤S1101,向第一网元发送获取第一虚拟现实播放器的第一请求指令;其中,第一网元为服务器中向显示设备提供第一虚拟现实播放器的网元;
步骤S1102,加载第一网元响应于第一请求指令向显示设备发送的第一虚拟现实播放器;
步骤S1103,当第一虚拟现实播放器在显示设备加载完毕时,向第二网元发送获取媒资的第二请求指令;其中,第二网元为服务器中接收终端实时采集的媒资并向显示设备提供媒资的网元;
步骤S1104,控制第一虚拟现实播放器播放第二网元响应于第二请求指令向显示设备发送的媒资。
在一些实施例中,所述控制器执行接收服务器发送的第一消息的步骤,被进一步配置为执行如图12所示的步骤S1201-S1203;
步骤S1201,当用户在当前视角观看获取的媒资时,通过第一虚拟现实播放器接收第三网元发送的第一消息;其中,所述第三网元为服务器中在显示设备、服务器、终端之间发送消息的网元;消息用于传递相机位置数据和相机旋转数据;
步骤S1202,根据第一消息解析出中心视角的相机位置数据和相机旋转数据;
步骤S1203,根据中心视角的相机位置数据和相机旋转数据将媒资的当前视角切换为中心视角。
需要说明的是,本申请中的第一消息包括但不限于为相机位置数据和相机旋转数据,还可以包括相机光圈数据以及相机焦距数据。具体实现中,本申请中的相机位置数据和相机旋转数据可以是第二用户采集端的显示设备中调整的虚拟摄像机的相机位置数据和相机旋转数据。
当终端确定中心视角时,终端通过第四网元控制媒资切换当前视角为第一视角,第四网元获取第一视角的相机位置信息和相机旋转信息,并将获取到的第一视角的相机位置信息和相机旋转信息发送至第二网元,第二网元将接收到的第一视角的相机位置信息和相机旋转信息存储至数据库。
当第二网元将接收到的第一视角的相机位置信息和相机旋转信息存储至数据库后,第二网元通过第三网元向第一网元发送第一消息,第一消息包含用于采集媒资的第一视角的相机位置数据和相机旋转数据。
当第一网元接收到第一消息后,将第一消息发送至用户端。
在一些实施例中,控制器执行接收服务器发送的第一消息的步骤后,被进一步配置为:
控制第一虚拟现实播放器监听触摸事件或鼠标移动事件是否触发,以判断用户当前是否切换视角;如果触摸事件或鼠标移动事件触发,确定用户当前切换视角;当确定用户当前切换视角时,暂停监听触摸事件或鼠标移动事件;如果触摸事件或鼠标移动事件未触发,确定用户当前未切换视角。
触摸事件包括touchstart事件、touchmove事件以及touchend事件,其中,touchstart为第一用户手指触摸到一个文档对象模型(Document Object Model,DOM)元素时触发;touchmove为第一用户手指在一个DOM元素上滑动时触发;touchend为第一用户从一个DOM元素上移开时触发,本申请中的触摸事件的触发条件可以为touchmove事件的触发,也可以为touchstart事件和touchmove事件均触发。鼠标移动事件(mousemove)是在页面上进行移动时触发事件处理程序,可以在该事件中采用文档(document)对象实时读取鼠标在页面中的位置。
需要注意的是,触摸事件与鼠标移动事件同一时间点内不能同时触发。
在一些实施例中,控制器执行控制第一虚拟现实播放器监听触摸事件或鼠标移动事件是否触发的步骤后,被进一步配置为:
判断当前视角是否为第一视角;
如果当前视角不为所述第一视角,执行根据所述第一消息将所述媒资的当前视角切换为中心视角的步骤。
在一些实施例中,控制器执行控制第一虚拟现实播放器监听触摸事件或鼠标移动事件是否触发的步骤后,还被进一步配置为:
如果当前视角为第一视角,停止执行据第一视角的相机位置数据和相机旋转数据将媒资的当前视角切换为第一视角的步骤。
步骤S904,根据第一消息将媒资的当前视角切换为中心视角。
在一些实施例中,不同的显示终端可能会存在独自查看全景视频数据的操作,在直播会议主持者希望大家同步关注某一视角的视频内容时,通过上述方案可以实现该目的。有利于增强会议消息的传递。
在一些实施例中,控制器执行根据所述第一消息将所述媒资的当前视角切换为所述中心视角的步骤后,被进一步配置为:执行如图13所示的步骤S1301-S1303;
步骤S1301,判断是否成功将媒资的当前视角切换为中心视角;
步骤S1302,如果媒资的当前视角成功切换为中心视角,控制显示器显示第一提示,第一提示用于提示用户终端已将当前视角切换为中心视角;
图14示例性示出了根据示例性实施例示出的第一提示示意图。示例性的,本申请中的第一提示可以为“当前用户视角已强制切换。”
步骤S1303,如果媒资的当前视角未成功切换为所述中心视角,控制显示器显示第二提示,第二提示用于提示用户当前视角需要切换为中心视角。
图15示例性示出了根据示例性实施例示出的第二提示示意图。示例性的,本申请中的第二提示可以为“播放出错,建议刷新重试。”
在一些实施例中,控制器执行所述根据第一消息将所述媒资的当前视角切换为所述中心视角的步骤后,被进一步配置为:
重新监听所述触摸事件或鼠标移动事件。
在将当前视角切换为第一视角的过程中,为了保证切换视角过程的流畅性,需要暂停监听触摸事件或鼠标移动事件,以避免第一用户通过触摸屏或者鼠标切换观看视角时与本申请示出的技术方法发生冲突;当暂停监听触摸事件或鼠标移动事件后,需要重新监听触摸事件或鼠标移动事件以使第一用户恢复主动切换视角的权限。
本申请还示出一种终端,包括:显示器;控制器,被配置为执行如图16所示的步骤S1601-S1605;
步骤S1601,接收用户输入的用于进入虚拟现实应用的控制指令;
步骤S1602,响应于控制指令,向第一网元发送获取第二虚拟现实播放器的第三请求指令;其中,第一网元为服务器中向所述显示设备提供第二虚拟现实播放器的网元;
步骤S1603,加载第一网元响应于第三请求指令发送的第二虚拟现实播放器;
步骤S1604,通过第二虚拟现实播放器播放图像采集装置实时采集的媒资;
步骤S1605,当用户在第二虚拟现实播放器确定媒资的中心视角时,进行切换视角操作。
其中,终端可以采用内置的图像采集装置实时采集媒资图像或者采用外设的图像采集装置采集媒资图像并发送至控制器,同时可以通过内置的音频采集装置采集媒资音频或者采用外设的音频采集装置采集媒资音频并发送至控制器。具体实现中,图像采集装置可以为实体摄像机,图像采集装置和音频采集装置可以是显示设备的一部分,比如,图像采集装置和音频采集装置可以是显示设备内置的摄像头和内置的麦克风;或者,图像采集装置和音频采集装置可以作为与显示设备连接的外置设备,如,连接显示设备的摄像机和话筒;或者,图像采集装置和音频采集装置也可以部分内置于显示设备,部分作为与显示设备连接的外置设备,如,图像采集装置为显示设备的内置摄像头,音频采集装置为连接该显示设备的耳机中的麦克风。本申请实施例对于图像采集装置和音频采集装置的具体实现形式不做限定。
在一些实施例中,虚拟现实应用的用户界面上包括:切换视角控件;
控制器执行切换视角操作的步骤时,被进一步配置为:
当用户点击切换视角控件时,进行切换视角操作。
本申请涉及的用于虚拟现实应用的“用户界面(user interface,UI)”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。应用程序的用户界面是通过java、可扩展标记语言(extensiblemarkup language,XML)等特定计算机语言编写的源代码,界面源代码在终端设备上经过解析,渲染,最终呈现为用户可以识别的内容,比如图片、文字、按钮等控件。控件(control)也称为部件(widget),是用户界面的基本元素,典型的控件有工具栏(toolbar)、菜单栏(menubar)、文本框(text box)、按钮(button)、滚动条(scrollbar)、图片和文本。界面中的控件的属性和内容是通过标签或者节点来定义的,比如XML通过<Textview>、<ImgView>、<VideoView>等节点来规定界面所包含的控件。一个节点对应界面中一个控件或属性,节点经过解析和渲染之后呈现为用户可视的内容。此外,很多应用程序,比如混合应用(hybridapplication)的界面中通常还包含有网页。网页,也称为页面,可以理解为内嵌在应用程序界面中的一个特殊的控件,网页是通过特定计算机语言编写的源代码,例如超文本标记语言(hyper text markup language,HTML),层叠样式表(cascading style sheets,CSS),java脚本(JavaScript,JS)等,网页源代码可以由浏览器或与浏览器功能类似的网页显示组件加载和显示为用户可识别的内容。网页所包含的具体内容也是通过网页源代码中的标签或者节点来定义的,比如HTML通过<p>、<img>、<video>、<canvas>来定义网页的元素和属性。
用户界面常用的表现形式是图形用户界面(graphic user interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
图17示例性示出了根据示例性实施例示出的终端的架构示意图,如图17所示,终端包括若干实体摄像机、渲染器以及虚拟现实用户界面。第二用户控制虚拟摄像机浏览三维场地模型的视角,渲染器根据实体摄像机采集到的画面,以显示界面控制的虚拟摄像机的视角中的至少一项,渲染生成视频画面和切换动画。
基于图17所示的终端架构,用户通过虚拟现实应用界面控制渲染引擎,根据实体摄像机拍摄的画面渲染生成媒资,并将媒资上传至第三网元,当用户想要确定中心视角时,用户通过触控屏或鼠标自由调整观察三维场地模型的视角,当确定中心视角后,点击切换视角控件。
本申请还示出一种显示设备,包括:显示器;控制器,被配置为:
接收用户输入的用于进入虚拟现实应用的控制指令;
响应于控制指令,向第一网元发送获取第三虚拟现实播放器的第四请求指令;
加载第一网元响应于第四请求指令发送的第三虚拟现实播放器;
当第三虚拟现实播放器在显示设备加载完毕时,向第三网元发送获取媒资的第五请求指令;
控制第三虚拟现实播放器播放第三网元响应于第五请求指令向显示设备发送的媒资;媒资已由终端确定中心视角;
当用户在当前视角观看所述媒资时,媒资的初始视角为所述中心视角。
图18示例性示出了根据示例性实施例示出的虚拟现实设备应用场景示意图,如图18所示,用户通过虚拟现实设备观看VR直播,本申请还示出了一种虚拟现实设备,所述虚拟现实设备包括:
显示器;
控制器;
所述控制器被进一步配置为:
接收用户输入的用于进入虚拟现实应用的控制指令;
响应于控制指令,获取媒资;媒资为终端实时采集的媒资;
当用户在当前视角观看媒资时,接收服务器发送的第一消息;第一消息包括中心视角的相机位置数据和相机旋转数据;中心视角由终端确定;虚拟现实设备、服务器以及终端基于网络连接;
根据第一消息将媒资的当前视角切换为中心视角。
在一些实施例中,虚拟现实设备还包括:姿态传感器,被配置为检测用户姿态数据,所述姿态数据包括用户头部旋转角度;
判断用户头部旋转角度是否小于第一阈值;
如果用户头部旋转角度小于第一阈值,执行根据第一消息将媒资的当前视角切换为中心视角的步骤;
如果用户头部旋转角度大于第一阈值,控制所述显示器显示第三提示,所述第三提示用于提示用户需要调整当前头部旋转角度且当前视角需要切换为中心视角。
需要说明的是,所述第一阈值可根据用户偏好设置,为用户适宜观看VR直播的角度。具体实现中,如果用户坐在沙发上观看VR直播,第一阈值可以设置为小幅度扭转头部的角度,如-45°~+45°。
本申请实施例中,所述虚拟现实设备泛指能够佩戴于用户面部,为用户提供沉浸感体验的显示设备,包括但不限于VR眼镜、增强现实设备(Augmented Reality,AR)、VR游戏设备、移动计算设备以及其它可穿戴式计算机等。本申请部分实施例以VR眼镜为例对技术方案进行阐述,应当理解的是,所提供的技术方案同时可应用于其他类型的虚拟现实设备。所述虚拟现实设备可以独立运行,或者作为外接设备接入其他智能显示设备,其中,所述显示设备可以是智能电视、计算机、平板电脑、服务器等。
本申请还示出了一种切换视角方法,所述方法包括:
获取媒资;所述媒资为终端实时采集的全景视角媒资,
当用户在当前视角观看所述媒资时,接收服务器发送的第一消息;第一消息包括中心视角的相机位置数据和相机旋转数据;中心视角由终端确定;显示设备、服务器以及终端基于网络连接;
根据第一消息将媒资的当前视角切换为中心视角。
在一些实施例中,本申请还示出一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如上述实施例所述的切换视角方法。
应当理解,上述切换视角方法中各步骤的具体实现方式可以参见前述显示设备实施例,此处不予赘述。由上述实施例可以看出,本申请示出的技术方案,能够解决在用户使用虚拟现实应用的过程中仅通过导播人员引导、发送消息提示以及切换播放源的方式不能直接干预观看者视角的问题,通过本申请中接收第一用户输入的用于进入虚拟现实应用的控制指令;响应于控制指令,接收服务器端发送的第一消息;根据第一消息解析出第一视角的相机位置数据和相机旋转数据;根据第一视角的相机位置数据和相机旋转数据将媒资的当前视角切换为第一视角的方式,能够在用户使用虚拟现实应用的过程中,实时控制用户的观看视角。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释,已经结合具体的实施方式进行了上述说明。但是,上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导,可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用,从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。
Claims (10)
1.一种显示设备,其特征在于,包括:
显示器;
控制器,被配置为:
接收用户输入的用于进入虚拟现实应用的控制指令;
响应于所述控制指令,获取媒资;其中,所述媒资为全景视角媒资;
当用户在当前视角观看所述媒资时,接收服务器发送的第一消息;其中,所述第一消息包括中心视角的相机位置数据和相机旋转数据;所述中心视角由所述终端确定的用于设置用户观看所述媒资范围的视角;所述显示设备、所述服务器以及所述终端基于网络连接;
根据所述第一消息将所述媒资的当前视角切换为所述中心视角。
2.根据权利要求1所述的显示设备,其特征在于,所述控制器执行获取媒资的步骤,被进一步配置为:
向第一网元发送获取第一虚拟现实播放器的第一请求指令;其中,所述第一网元为所述服务器中向所述显示设备提供第一虚拟现实播放器的网元;
加载所述第一网元响应于所述第一请求指令向所述显示设备发送的第一虚拟现实播放器;
当所述第一虚拟现实播放器在所述显示设备加载完毕时,向所述第二网元发送获取媒资的第二请求指令;其中,所述第二网元为所述服务器中接收所述终端实时采集的所述媒资并向所述显示设备提供所述媒资的网元;
控制所述第一虚拟现实播放器播放所述第二网元响应于所述第二请求指令向所述显示设备发送的所述媒资。
3.根据权利要求2所述的显示设备,其特征在于,所述控制器执行接收服务器发送的第一消息的步骤,被进一步配置为:
当用户在当前视角观看获取的所述媒资时,通过所述第一虚拟现实播放器接收所述第三网元发送的所述第一消息;其中,所述第三网元为所述服务器中在所述显示设备、所述服务器、所述终端之间发送消息的网元;所述消息用于传递所述相机位置数据和所述相机旋转数据;
根据所述第一消息解析出所述中心视角的所述相机位置数据和所述相机旋转数据;
根据所述中心视角的所述相机位置数据和所述相机旋转数据将所述媒资的当前视角切换为所述中心视角。
4.根据权利要求1所述的显示设备,其特征在于,所述控制器执行根据所述第一消息将所述媒资的当前视角切换为所述中心视角的步骤后,被进一步配置为:
判断是否成功将所述媒资的当前视角切换为所述中心视角;
如果所述媒资的当前视角成功切换为所述中心视角,控制所述显示器显示第一提示,所述第一提示用于提示用户终端已将当前视角切换为中心视角;
如果所述媒资的当前视角未成功切换为所述中心视角,控制所述显示器显示第二提示,所述第二提示用于提示用户当前视角需要切换为中心视角。
5.根据权利要求2所述的显示设备,其特征在于,所述控制器执行接收服务器发送的第一消息的步骤后,被进一步配置为:
控制所述第一虚拟现实播放器监听触摸事件或鼠标移动事件是否触发,以判断用户当前是否切换视角;
如果所述触摸事件或鼠标移动事件触发,确定用户当前切换视角;
当确定用户当前切换视角时,暂停监听所述触摸事件或所述鼠标移动事件;
如果所述触摸事件或鼠标移动事件未触发,确定用户当前未切换视角。
6.根据权利要求5所示的显示设备,其特征在于,所述控制器执行控制所述第一虚拟现实播放器监听触摸事件或鼠标移动事件是否触发的步骤后,被进一步配置为:
判断所述当前视角是否为第一视角;
如果所述当前视角不为所述第一视角,执行所述根据所述第一消息将所述媒资的当前视角切换为所述中心视角的步骤。
7.根据权利要求6所述的显示设备,其特征在于,所述控制器执行根据所述第一消息将所述媒资的当前视角切换为所述中心视角的步骤后,被进一步配置为:
重新监听所述触摸事件或鼠标移动事件。
8.一种终端,其特征在于,包括:
显示器;
控制器,被配置为:
接收用户输入的用于进入虚拟现实应用的控制指令;
响应于所述控制指令,向第一网元发送获取第二虚拟现实播放器的第三请求指令;其中,所述第一网元为服务器中向所述显示设备提供第二虚拟现实播放器的网元;
加载第一网元响应于所述第三请求指令发送的所述第二虚拟现实播放器;
通过所述第二虚拟现实播放器播放图像采集装置实时采集的媒资;
当用户在所述第二虚拟现实播放器确定所述媒资的中心视角时,进行切换视角操作。
9.一种显示设备,其特征在于,包括:
显示器;
控制器,被配置为:
接收用户输入的用于进入虚拟现实应用的控制指令;
响应于所述控制指令,向所述第一网元发送获取第三虚拟现实播放器的第四请求指令;其中,所述第一网元为所述服务器中向所述显示设备提供第三虚拟现实播放器的网元;
加载第一网元响应于所述第四请求指令发送的第三虚拟现实播放器;
当所述第三虚拟现实播放器在所述显示设备加载完毕时,向所述第二网元发送获取媒资的第五请求指令;其中,所述第二网元为服务器中接收所述终端实时采集的所述媒资并向所述显示设备提供所述媒资的网元;
控制所述第三虚拟现实播放器播放所述第二网元响应于所述第五请求指令向所述显示设备发送的所述媒资;所述媒资已由所述终端确定中心视角;
当用户在当前视角观看所述媒资时,所述媒资的初始视角为所述中心视角。
10.一种切换视角方法,其特征在于,所述方法包括:
获取媒资,所述媒资为全景视角媒资,
当用户在当前视角观看所述媒资时,接收服务器发送的第一消息;所述第一消息包括中心视角的相机位置数据和相机旋转数据;所述中心视角由所述终端确定的用于设置用户观看所述媒资的指定范围的视角;所述显示设备、所述服务器以及所述终端基于网络连接;
根据所述第一消息将所述媒资的当前视角切换为所述中心视角。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111552536.0A CN116266868A (zh) | 2021-12-17 | 2021-12-17 | 一种显示设备及切换视角方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111552536.0A CN116266868A (zh) | 2021-12-17 | 2021-12-17 | 一种显示设备及切换视角方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116266868A true CN116266868A (zh) | 2023-06-20 |
Family
ID=86743758
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111552536.0A Pending CN116266868A (zh) | 2021-12-17 | 2021-12-17 | 一种显示设备及切换视角方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116266868A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118678228A (zh) * | 2024-08-22 | 2024-09-20 | 圆周率科技(常州)有限公司 | 全景会议控制方法、装置、计算机设备 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106878764A (zh) * | 2015-12-01 | 2017-06-20 | 幸福在线(北京)网络技术有限公司 | 一种虚拟现实的直播方法、系统及其用途 |
WO2017113577A1 (zh) * | 2015-12-31 | 2017-07-06 | 幸福在线(北京)网络技术有限公司 | 一种游戏场景的实时播放方法及相关装置和系统 |
CN108076355A (zh) * | 2017-12-26 | 2018-05-25 | 百度在线网络技术(北京)有限公司 | 视频播放控制方法和装置 |
CN108900893A (zh) * | 2018-08-16 | 2018-11-27 | 科大讯飞股份有限公司 | 一种图片处理方法及装置 |
CN111158469A (zh) * | 2019-12-12 | 2020-05-15 | 广东虚拟现实科技有限公司 | 视角切换方法、装置、终端设备及存储介质 |
CN111510757A (zh) * | 2019-01-31 | 2020-08-07 | 华为技术有限公司 | 一种共享媒体数据流的方法、装置以及系统 |
CN111589167A (zh) * | 2020-05-14 | 2020-08-28 | 腾讯科技(深圳)有限公司 | 赛事观战方法、装置、终端、服务器及存储介质 |
CN111726640A (zh) * | 2020-07-03 | 2020-09-29 | 中图云创智能科技(北京)有限公司 | 一种0-360°动态视角直播方法 |
WO2021083176A1 (zh) * | 2019-10-28 | 2021-05-06 | 阿里巴巴集团控股有限公司 | 数据交互方法及系统、交互终端、可读存储介质 |
CN113438495A (zh) * | 2021-06-23 | 2021-09-24 | 中国联合网络通信集团有限公司 | Vr直播方法、装置、系统、设备及存储介质 |
-
2021
- 2021-12-17 CN CN202111552536.0A patent/CN116266868A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106878764A (zh) * | 2015-12-01 | 2017-06-20 | 幸福在线(北京)网络技术有限公司 | 一种虚拟现实的直播方法、系统及其用途 |
WO2017113577A1 (zh) * | 2015-12-31 | 2017-07-06 | 幸福在线(北京)网络技术有限公司 | 一种游戏场景的实时播放方法及相关装置和系统 |
CN108076355A (zh) * | 2017-12-26 | 2018-05-25 | 百度在线网络技术(北京)有限公司 | 视频播放控制方法和装置 |
CN108900893A (zh) * | 2018-08-16 | 2018-11-27 | 科大讯飞股份有限公司 | 一种图片处理方法及装置 |
CN111510757A (zh) * | 2019-01-31 | 2020-08-07 | 华为技术有限公司 | 一种共享媒体数据流的方法、装置以及系统 |
WO2021083176A1 (zh) * | 2019-10-28 | 2021-05-06 | 阿里巴巴集团控股有限公司 | 数据交互方法及系统、交互终端、可读存储介质 |
CN111158469A (zh) * | 2019-12-12 | 2020-05-15 | 广东虚拟现实科技有限公司 | 视角切换方法、装置、终端设备及存储介质 |
CN111589167A (zh) * | 2020-05-14 | 2020-08-28 | 腾讯科技(深圳)有限公司 | 赛事观战方法、装置、终端、服务器及存储介质 |
CN111726640A (zh) * | 2020-07-03 | 2020-09-29 | 中图云创智能科技(北京)有限公司 | 一种0-360°动态视角直播方法 |
CN113438495A (zh) * | 2021-06-23 | 2021-09-24 | 中国联合网络通信集团有限公司 | Vr直播方法、装置、系统、设备及存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118678228A (zh) * | 2024-08-22 | 2024-09-20 | 圆周率科技(常州)有限公司 | 全景会议控制方法、装置、计算机设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112565839B (zh) | 投屏图像的显示方法及显示设备 | |
CN113395558B (zh) | 一种显示设备及显示画面旋转适配方法 | |
CN110636353A (zh) | 一种显示设备 | |
CN113259741B (zh) | 一种剧集经典看点的展示方法及显示设备 | |
CN111787388B (zh) | 一种显示设备 | |
US11425466B2 (en) | Data transmission method and device | |
WO2020248680A1 (zh) | 视频数据处理方法、装置及显示设备 | |
CN112399264B (zh) | 一种放映厅业务管理方法及应用 | |
CN112399263A (zh) | 一种互动方法、显示设备及移动终端 | |
WO2020248697A1 (zh) | 显示设备及视频通讯数据处理方法 | |
CN112073662A (zh) | 一种显示设备 | |
CN112783380A (zh) | 显示设备和方法 | |
CN113489938B (zh) | 虚拟会议控制方法、智能设备及终端设备 | |
CN116266868A (zh) | 一种显示设备及切换视角方法 | |
CN113395554B (zh) | 显示设备 | |
CN112533056B (zh) | 一种显示设备及声音再现方法 | |
CN113115092A (zh) | 一种显示设备及详情页展示方法 | |
CN111314739B (zh) | 一种图像处理方法、服务器及显示设备 | |
CN112073777B (zh) | 一种语音交互方法及显示设备 | |
WO2020248790A1 (zh) | 语音控制方法及显示设备 | |
CN113727163B (zh) | 一种显示设备 | |
CN113115093B (zh) | 一种显示设备及详情页展示方法 | |
CN112367550A (zh) | 一种媒资列表多标题动态展示的实现方法及显示设备 | |
CN112399245A (zh) | 一种播放方法及显示设备 | |
CN112399225A (zh) | 放映厅业务管理方法及显示设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |