CN106385348A - 分步辨别的虚拟现实娱乐系统及其方法 - Google Patents

分步辨别的虚拟现实娱乐系统及其方法 Download PDF

Info

Publication number
CN106385348A
CN106385348A CN201610838125.0A CN201610838125A CN106385348A CN 106385348 A CN106385348 A CN 106385348A CN 201610838125 A CN201610838125 A CN 201610838125A CN 106385348 A CN106385348 A CN 106385348A
Authority
CN
China
Prior art keywords
user
server
integrated manipulator
mark
terminal server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610838125.0A
Other languages
English (en)
Inventor
平越
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201610838125.0A priority Critical patent/CN106385348A/zh
Publication of CN106385348A publication Critical patent/CN106385348A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种分步辨别的虚拟现实娱乐系统及其方法,通过个人集成控制器发送至VR终端服务器;个人集成控制器还含有:执行程序,还有就是3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中;所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个表示发送信息的标记;在所述用户的操作动作的信息发送结束后,就在触摸屏上显现一个表示发送信息的标记结束的标记。结合其方法避免了现有技术中步骤运行复杂、费用增大、控制困难、防错连、分辨形式单一、娱乐性不够强、认证时长不好把握、认证效率低下、选择性不强的缺陷。

Description

分步辨别的虚拟现实娱乐系统及其方法
技术领域
本发明涉及一种VR技术领域,尤其是涉及一种分步辨别的虚拟现实娱乐系统及其方法。
背景技术
虚拟现实技术(VR)丰要包括模拟环境、感知、自然技能和传感设各等方面。模拟环境是由计算机生成的、实时动态的三维立体逼真图像。感知是指理想的VR应该具有一切人所具有的感知,除计算机图形技术所生成的视觉感知外,还有听觉、触觉、力觉、运动等感知,甚至还包括嗅觉和味觉等,也称为多感知。随着虚拟现实技术的迅猛发展,大量的虚拟现实设备被广泛的应用于游戏、科研、工业等领域中。然而,目前已有的虚拟现实设备仍然局限于科学研究,工业制造及单人3D游戏领域,而传统的家庭的娱乐应用的主要特征为:多媒体服务(如音视媒体欣赏)、多人游戏等,因此,目前已有的虚拟现实设备与家庭娱乐应用仍有较大的差距。传统的物料传输还需要大量人工搬运工作,费时费力,取样时容易对样品造成污染和对工作人员的危害,由此还会带来传统取样工作的人员净化流程,加大了使用面积和系统运行的能耗。
为了解决上述问题,就引入了一种虚拟现实娱乐系统,包括系统前端云网络和家庭网络内部系统,家庭网络内部系统包括VR终端服务器、VR个人设备和用户动作捕捉设备,其中,VR终端服务器、VR个人设备、动作捕捉设备均通过家用网络进行互联互通;所述的VR终端服务器与VR内容服务前端网络进行通讯,通过宽带网络或广播信道获取VR内容数据,并将反馈信息或交互数据上传至前端网络;接受VR个人设备的接入请求,为用户提供VR内容服务;读取动作捕捉设备所采集到的用户动作数据,根据动作数据对VR内容作出实时调整;接受和处理个人显示控制器发来的其他操作要求和交互动作;系统前端云网络由一系列的数据中心、内容服务器、数据发布设备组成,用于存储海量的VR内容数据;允许多用户接入并进行数据的获取和上传;根据用户的权限对数据请求进行鉴权,并对数据进行加密;对于用户上传的新数据进行处理、整合;VR个人设备由个人集成控制器、操作外设、VR显示器设备组成,VR个人设备接入家庭网络,并向VR终端服务器请求VR内容服务;VR个人设备接收VR终端服务器发来的VR内容,个人集成控制器将VR内容处理后,通过VR显示器呈现给用户;用户手中的操作外设被接入个人集成控制器,个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器;VR显示器将VR内容呈现给用户;VR显示器内置多轴陀螺仪,能够感知用户的头部动作,并通过个人集成控制器发送至VR终端服务器。
而其数据处理方法为:
当用户向VR终端服务器发起一个VR内容观赏请求后,VR终端服务器会为这个用户的请求开启一个服务进程;
a.根据用户的服务请求,这个服务进程会通过VR终端服务器会首先向前端服务器请求响应的VR数据,或从本地存贮中寻找匹配的数据推送至VR内容渲染模块;
b.这个服务进程会驱动VR内容渲染模块开始工作,将3D内容渲染成2D序列帧,并根据VR显示器的特性,对2D画面进行处理和预变形;
c.这些2D序列帧被视频编码器压缩成视频流,并通过流媒体服务器进行发布;
d.个人集成控制器从流媒体服务器中获取视频流,解码为2D序列帧,并通过VR显示器呈现给用户;
e.用户通过手中的操作外设作出交互动作,这些操作由个人集成控制器采集并发送至VR终端服务器,VR内容渲染模块在收到交互动作后,会实时调整渲染内容,并通过2~5的工作步骤,将交互动作的效果通过VR画面反应给用户;
f.当用户的头部运动时,VR显示器内置的多轴陀螺仪同样会采集用户的头部动作,并通过个人集成控制器发送至VR终端服务器,VR内容渲染模块在得到用户的头部动作信息后,同样会实时调整渲染内容,并通过b~e的工作步骤,将实时渲染画面呈现给用户;
g.外部的用户动作采集装置,会实时通过动作捕捉设备及深度采集设备得到用户的手势或主要肢体动作,并将这些动作数据直接发至VR终端服务器,VR内容渲染模块同样会根据这些数据实时调整渲染画面,通过b~e的工作步骤,将实时渲染画面呈现给用户。
而个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器的方式往往为预设有个人集成控制器和家庭网络内部系统,所述家庭网络包括接入实现装置,所述接入实现装置包括3G无线单元,所述3G无线单元完成3G无线网络接入,建立3G无线数据链路,VR终端服务器同3G无线网络相连接,所述个人集成控制器包括处理器,所述处理器同3G模块和触摸屏相连接,由此个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器的步骤就是通过3G模块同3G无线单元相通信连接,然后经由3G无线数据链路来把用户的操作动作信息发送到VR终端服务器。
然而在采用3G无线数据链路实现用户的操作动作信息发送到VR终端服务器还须认证VR终端服务器的IP地址,如果无法认证VR终端服务器的IP地址的明文或解码出来的VR终端服务器的IP地址具有相近的特征,常常会发生混同的问题;链接之际须得到VR终端服务器的编码或须VR终端服务器实现认证响应,方可把个人集成控制器与终端服务器实现链接,接着方能发送用户的操作动作信息,此步骤运行复杂;另外若还结合Zigbee模块执行用户的操作动作信息的发送,须额外加大电路构造费用和对应控制程序的添加量。另外服务器还常常出现错连、分辨形式单一、娱乐性不够强、认证时长不好把握、认证效率低下、选择性不强的问题。
发明内容
本发明所要解决的技术问题在于提供一种分步辨别的虚拟现实娱乐系统及其控制方法,避免了现有技术中步骤运行复杂、费用增大、控制困难、服务器还常常出现错连、分辨形式单一、娱乐性不够强、认证时长不好把握、认证效率低下、选择性不强的缺陷。
为解决上述技术问题,本发明的技术解决方案是:
一种分步辨别的虚拟现实娱乐系统,包括系统前端云网络和家庭网络内部系统,家庭网络内部系统包括VR终端服务器、VR个人设备和用户动作捕捉设备,其中,VR终端服务器、VR个人设备、动作捕捉设备均通过家用网络进行互联互通;所述的VR终端服务器与VR内容服务前端网络进行通讯,通过宽带网络或广播信道获取VR内容数据,并将反馈信息或交互数据上传至前端网络;接受VR个人设备的接入请求,为用户提供VR内容服务;读取动作捕捉设备所采集到的用户动作数据,根据动作数据对VR内容作出实时调整;接受和处理个人显示控制器发来的其他操作要求和交互动作;系统前端云网络由一系列的数据中心、内容服务器、数据发布设备组成,用于存储海量的VR内容数据;允许多用户接入并进行数据的获取和上传;根据用户的权限对数据请求进行鉴权,并对数据进行加密;对于用户上传的新数据进行处理、整合;VR个人设备由个人集成控制器、操作外设、VR显示器设备组成,VR个人设备接入家庭网络,并向VR终端服务器请求VR内容服务;VR个人设备接收VR终端服务器发来的VR内容,个人集成控制器将VR内容处理后,通过VR显示器呈现给用户;用户手中的操作外设被接入个人集成控制器,个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器;VR显示器将VR内容呈现给用户;VR显示器内置多轴陀螺仪,能够感知用户的头部动作,并通过个人集成控制器发送至VR终端服务器;
所述个人集成控制器还含有:
执行程序,用来在个人集成控制器获取到用户的操作动作的信息后运行并启动至第一增速发送程序;用来于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,也就是于执行标记之际,于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,所述独特的符码为执行者来设置,能够为同VR终端服务器的识别码的标记采用同样的密文来作为所述独特的符码;用来设置若干个独特的符码,接着选择一个分配给所述个人集成控制器同VR终端服务器作为所述独特的符码;用来让所述若干个独特的符码依照设定的方式进行若干转化,每一转化方式为若干独特的符码构成,该若干独特的符码伴着时长的变大,进行往复转化,在第一天为第一符码作为独特的符码,第二天为第二符码作为独特的符码…第n天为第n符码作为独特的符码,往复一次;用来辨别探测3G无线网络内的服务器的识别码是不是带有所述独特的符码,还有就是3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中;用来在触摸屏上显现一个按钮,在所述执行者须把所述用户的操作动作的信息发送给VR终端服务器之际,触碰该按钮就开始发送;用来在触摸屏上显现出供选用的服务器的识别码;用来在所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个表示发送信息的标记;在所述用户的操作动作的信息发送结束后,就在触摸屏上显现一个表示发送信息的标记结束的标记。
所述分步辨别的虚拟现实娱乐系统的控制方法,具体如下:
当用户向VR终端服务器发起一个VR内容观赏请求后,VR终端服务器会为这个用户的请求开启一个服务进程;
a.根据用户的服务请求,这个服务进程会通过VR终端服务器会首先向前端服务器请求响应的VR数据,或从本地存贮中寻找匹配的数据推送至VR内容渲染模块;
b.这个服务进程会驱动VR内容渲染模块开始工作,将3D内容渲染成2D序列帧,并根据VR显示器的特性,对2D画面进行处理和预变形;
c.这些2D序列帧被视频编码器压缩成视频流,并通过流媒体服务器进行发布;
d.个人集成控制器从流媒体服务器中获取视频流,解码为2D序列帧,并通过VR显示器呈现给用户;
e.用户通过手中的操作外设作出交互动作,这些操作由个人集成控制器采集并发送至VR终端服务器,VR内容渲染模块在收到交互动作后,会实时调整渲染内容,并通过2~5的工作步骤,将交互动作的效果通过VR画面反应给用户;
f.当用户的头部运动时,VR显示器内置的多轴陀螺仪同样会采集用户的头部动作,并通过个人集成控制器发送至VR终端服务器,VR内容渲染模块在得到用户的头部动作信息后,同样会实时调整渲染内容,并通过b~e的工作步骤,将实时渲染画面呈现给用户;
g.外部的用户动作采集装置,会实时通过动作捕捉设备及深度采集设备得到用户的手势或主要肢体动作,并将这些动作数据直接发至VR终端服务器,VR内容渲染模块同样会根据这些数据实时调整渲染画面,通过b~e的工作步骤,将实时渲染画面呈现给用户;
另外个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器的方式为首先预设个人集成控制器和家庭网络内部系统,所述家庭网络包括接入实现装置,所述接入实现装置包括3G无线单元,所述3G无线单元完成3G无线网络接入,建立3G无线数据链路,VR终端服务器同3G无线网络相连接,所述个人集成控制器包括处理器,所述处理器同3G模块和触摸屏相连接,接着个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器的步骤如下:
步骤1:事先针对VR终端服务器的识别码进行标记后运行并启动至其第二增速发送程序,个人集成控制器获取到用户的操作动作的信息后,运行并启动至第一增速发送程序;
步骤2:当个人集成控制器处在第一增速发送程序的运行状态下后,向所述个人集成控制器本身的识别码执行标记,所述标记同VR终端服务器的识别码进的标记一致,另外还探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记;
步骤3:如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器;
所述当个人集成控制器处在第一增速发送程序的运行状态下后,向所述个人集成控制器本身的识别码执行标记,让所述个人集成控制器本身的识别码带有独一标记,由此在VR终端服务器亦同步执行了第二增速发送程序后,所述个人集成控制器即探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记,如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器就同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器;
所述步骤2内,所述向所述个人集成控制器本身的识别码执行标记的方式为:
所述个人集成控制器的时长的标记为表示运行并启动至第一增速发送程序的时长,所述VR终端服务器的时长的标记为表示运行并启动至第二增速发送程序的时长;
所述独特的符码还能够为所述个人集成控制器设置若干个,接着选择一个分配给所述个人集成控制器同VR终端服务器作为所述独特的符码,若干所述独特的符码分别为第一符码、第二符码…第n符码,其中n为符码的个数;
所述若干个独特的符码依照设定的方式进行若干转化,每一转化方式为若干独特的符码构成,该若干独特的符码伴着时长的变大,进行往复转化,在第一天为第一符码作为独特的符码,第二天为第二符码作为独特的符码…第n天为第n符码作为独特的符码,往复一次;
也能够在3G无线网络内其他需要发送所述用户的操作动作的信息的服务器上也设置同样的所述转化方式;
在步骤2中,所述探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记的方式包含:
辨别探测3G无线网络内的服务器的识别码是不是带有所述独特的符码,还有就是3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中;
所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个按钮,在所述执行者须把所述用户的操作动作的信息发送给VR终端服务器之际,触碰该按钮就开始发送;
若建立的信息链路不止一个的条件下,就在触摸屏上显现出供选用的服务器的识别码;
所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个表示发送信息的标记;在所述用户的操作动作的信息发送结束后,就在触摸屏上显现一个表示发送信息的标记结束的标记。
经由本发明的结构,与现有技术相比,本发明的优点在于:
个人集成控制器获取到用户的操作动作的信息后,运行并启动至第一增速发送程序;当个人集成控制器处在第一增速发送程序的运行状态下后,向所述个人集成控制器本身的识别码执行标记,所述标记同VR终端服务器的识别码进的标记一致,另外还探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记;如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器,这样就能主动分辨VR终端服务器,实现高效信息链路的构建,并能实现依据执行者的目的来发送所述用户的操作动作的信息,执行者须执行的无非就是运行启动至第一增速发送程序、随后让所述个人集成控制器把所述用户的操作动作的信息发送给VR终端服务器就可以了,就不必要执行者认证VR终端服务器的IP地址是不是VR终端服务器,亦就无须反复的触摸触摸屏来发出肯定的呼应,所述第一增速发送程序与第二增速发送程序均采用任务级程序执行。进一步实现了增速把所述用户的操作动作的信息发送给VR终端服务器的效果;另外也不需要额外的中转架构来实现发送,亦无须占用信息发送的信道,由此减少了执行者的费用。在另外不相关的服务器运行时,就不会出现错误的连接和发送的问题。根据设定的时长范围保证仅仅在时长范围内的所述个人集成控制器才可以实现认定并发送所述用户的操作动作的信息给VR终端服务器,能防止执行者出现多余的执行;由此在所述个人集成控制器与VR终端服务器间采用同样的转化方式后,所述个人集成控制器与VR终端服务器就带有一样的独特的符码的转化方式。也能够在3G无线网络内其他需要发送所述用户的操作动作的信息的服务器上也设置同样的所述转化方式。由此不但能确保联结的正确性,也可改善娱乐性。由此辨别3G无线网络内的服务器的识别码是不是同步带有和所述个人集成控制器一样的独特的符码,并且辨别3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中,所述时长范畴为3-4分钟间的随意值,时长超出范围,往往常常会使得若干服务器同步同所述个人集成控制器相连,时长若过低,也会发生无法相连的结果。所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个按钮,在所述执行者须把所述用户的操作动作的信息发送给VR终端服务器之际,触碰该按钮就开始发送;真正实现了整体发送用户的操作动作的信息的期间,执行者须执行的无非就是运行启动至第一增速发送程序、随后让所述个人集成控制器把所述用户的操作动作的信息发送给VR终端服务器就可以了,就不必要执行者认证VR终端服务器的IP地址是不是VR终端服务器,亦就无须反复的触摸触摸屏来发出肯定的呼应,这样在触摸屏上也不必显现VR终端服务器的识别符,因此这样的发送期间很容易,触摸屏的显现形式也不复杂,执行者容易实施。若建立的信息链路不止一个的条件下,就在触摸屏上显现出供选用的服务器的识别码。让执行者做出对的选用。所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个表示发送信息的标记,以此来说明现在正在发送信息;在所述用户的操作动作的信息发送结束后,就在触摸屏上显现一个表示发送信息的标记结束的标记;以此来说明发送信息已经结束,就此终止第一增速发送程序与第二增速发送程序。
附图说明
图1是所述分步辨别的虚拟现实娱乐系统的结构示意图。
图2是VR个人设备的结构示意图。
图3是系统前端云网络的结构示意图。
图4是VR显示器的结构示意图。
图5是处理器的部分连接示意图。
图6是分步辨别的虚拟现实娱乐系统的控制方法的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1-图6所示,分步辨别的虚拟现实娱乐系统,包括系统前端云网络和家庭网络内部系统,家庭网络内部系统包括VR终端服务器、VR个人设备和用户动作捕捉设备,其中,VR终端服务器、VR个人设备、动作捕捉设备均通过家用网络进行互联互通;所述的VR终端服务器与VR内容服务前端网络进行通讯,通过宽带网络或广播信道获取VR内容数据,并将反馈信息或交互数据上传至前端网络;接受VR个人设备的接入请求,为用户提供VR内容服务;读取动作捕捉设备所采集到的用户动作数据,根据动作数据对VR内容作出实时调整;接受和处理个人显示控制器发来的其他操作要求和交互动作;系统前端云网络由一系列的数据中心、内容服务器、数据发布设备组成,用于存储海量的VR内容数据;允许多用户接入并进行数据的获取和上传;根据用户的权限对数据请求进行鉴权,并对数据进行加密;对于用户上传的新数据进行处理、整合;VR个人设备由个人集成控制器、操作外设、VR显示器设备组成,VR个人设备接入家庭网络,并向VR终端服务器请求VR内容服务;VR个人设备接收VR终端服务器发来的VR内容,个人集成控制器将VR内容处理后,通过VR显示器呈现给用户;用户手中的操作外设被接入个人集成控制器,个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器;VR显示器将VR内容呈现给用户;VR显示器内置多轴陀螺仪,能够感知用户的头部动作,并通过个人集成控制器发送至VR终端服务器;
所述个人集成控制器还含有:
执行程序,用来在个人集成控制器获取到用户的操作动作的信息后运行并启动至第一增速发送程序;用来于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,也就是于执行标记之际,于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,所述独特的符码为执行者来设置,能够为同VR终端服务器的识别码的标记采用同样的密文来作为所述独特的符码;用来设置若干个独特的符码,接着选择一个分配给所述个人集成控制器同VR终端服务器作为所述独特的符码;用来让所述若干个独特的符码依照设定的方式进行若干转化,每一转化方式为若干独特的符码构成,该若干独特的符码伴着时长的变大,进行往复转化,在第一天为第一符码作为独特的符码,第二天为第二符码作为独特的符码…第n天为第n符码作为独特的符码,往复一次;用来辨别探测3G无线网络内的服务器的识别码是不是带有所述独特的符码,还有就是3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中;用来在触摸屏上显现一个按钮,在所述执行者须把所述用户的操作动作的信息发送给VR终端服务器之际,触碰该按钮就开始发送;用来在触摸屏上显现出供选用的服务器的识别码;用来在所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个表示发送信息的标记;在所述用户的操作动作的信息发送结束后,就在触摸屏上显现一个表示发送信息的标记结束的标记。
所述分步辨别的虚拟现实娱乐系统的控制方法,具体如下:
当用户向VR终端服务器发起一个VR内容观赏请求后,VR终端服务器会为这个用户的请求开启一个服务进程;
a.根据用户的服务请求,这个服务进程会通过VR终端服务器会首先向前端服务器请求响应的VR数据,或从本地存贮中寻找匹配的数据推送至VR内容渲染模块;
b.这个服务进程会驱动VR内容渲染模块开始工作,将3D内容渲染成2D序列帧,并根据VR显示器的特性,对2D画面进行处理和预变形;
c.这些2D序列帧被视频编码器压缩成视频流,并通过流媒体服务器进行发布;
d.个人集成控制器从流媒体服务器中获取视频流,解码为2D序列帧,并通过VR显示器呈现给用户;
e.用户通过手中的操作外设作出交互动作,这些操作由个人集成控制器采集并发送至VR终端服务器,VR内容渲染模块在收到交互动作后,会实时调整渲染内容,并通过2~5的工作步骤,将交互动作的效果通过VR画面反应给用户;
f.当用户的头部运动时,VR显示器内置的多轴陀螺仪同样会采集用户的头部动作,并通过个人集成控制器发送至VR终端服务器,VR内容渲染模块在得到用户的头部动作信息后,同样会实时调整渲染内容,并通过b~e的工作步骤,将实时渲染画面呈现给用户;
g.外部的用户动作采集装置,会实时通过动作捕捉设备及深度采集设备得到用户的手势或主要肢体动作,并将这些动作数据直接发至VR终端服务器,VR内容渲染模块同样会根据这些数据实时调整渲染画面,通过b~e的工作步骤,将实时渲染画面呈现给用户;
另外个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器的方式为首先预设个人集成控制器和家庭网络内部系统,所述家庭网络包括接入实现装置,所述接入实现装置包括3G无线单元,所述3G无线单元完成3G无线网络接入,建立3G无线数据链路,VR终端服务器同3G无线网络相连接,所述个人集成控制器包括处理器,所述处理器同3G模块和触摸屏相连接,接着个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器的步骤如下:
步骤1:事先针对VR终端服务器的识别码进行标记后运行并启动至其第二增速发送程序,个人集成控制器获取到用户的操作动作的信息后,运行并启动至第一增速发送程序;
步骤2:当个人集成控制器处在第一增速发送程序的运行状态下后,向所述个人集成控制器本身的识别码执行标记,所述标记同VR终端服务器的识别码进的标记一致,另外还探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记;
步骤3:如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器;
于这样的步骤中,所述当个人集成控制器处在第一增速发送程序的运行状态下后,向所述个人集成控制器本身的识别码执行标记,让所述个人集成控制器本身的识别码带有独一标记,由此在VR终端服务器亦同步执行了第二增速发送程序后,所述个人集成控制器即探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记,如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器就同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器;
还有就是,本发明就算若所述个人集成控制器未处在第一增速发送程序的运行状态,通过3G模块与3G无线单元相连接,也能够同步向所述个人集成控制器本身的识别码执行标记,所述标记同VR终端服务器的识别码进的标记一致,另外还探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记;如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器把所述用户的操作动作的信息发送给VR终端服务器。
所述步骤2内,所述向所述个人集成控制器本身的识别码执行标记的方式为:
于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,也就是于执行标记之际,于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,所述独特的符码为执行者来设置,能够为同VR终端服务器的识别码的标记采用同样的密文来作为所述独特的符码;于是在另外不相关的服务器运行时,就不会出现错误的连接和发送的问题。
所述个人集成控制器的时长的标记为表示运行并启动至第一增速发送程序的时长,所述VR终端服务器的时长的标记为表示运行并启动至第二增速发送程序的时长;比如2分33秒,这样来进一步根据设定的时长范围保证仅仅在时长范围内的所述个人集成控器才可以实现认定并发送所述用户的操作动作的信息给VR终端服务器。
由此在所述个人集成控制器与VR终端服务器间采用同样的转化方式后,所述个人集成控制器与VR终端服务器就带有一样的独特的符码的转化方式。
也能够在3G无线网络内其他需要发送所述用户的操作动作的信息的服务器上也设置同样的所述转化方式。由此不但能确保信息链路建立,也就是联结的正确性,也可改善娱乐性。
于是整体发送用户的操作动作的信息的期间,执行者须执行的无非就是运行启动至第一增速发送程序、随后让所述个人集成控制器把所述用户的操作动作的信息发送给VR终端服务器就可以了,就不必要执行者认证VR终端服务器的IP地址是不是VR终端服务器,亦就无须反复的触摸触摸屏来发出肯定的呼应,所述第一增速发送程序与第二增速发送程序均采用任务级程序执行。进一步实现了增速把所述用户的操作动作的信息发送给VR终端服务器的效果;另外也不需要额外的中转架构来实现发送,亦无须占用信息发送的信道,由此减少了执行者的费用。
辨别探测3G无线网络内的服务器的识别码是不是带有所述独特的符码,还有就是3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中。
经由本发明的结构,与现有技术相比,本发明的优点在于:
个人集成控制器获取到用户的操作动作的信息后,运行并启动至第一增速发送程序;当个人集成控制器处在第一增速发送程序的运行状态下后,向所述个人集成控制器本身的识别码执行标记,所述标记同VR终端服务器的识别码进的标记一致,另外还探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记;如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器,这样就能主动分辨VR终端服务器,实现高效信息链路的构建,并能实现依据执行者的目的来发送所述用户的操作动作的信息,执行者须执行的无非就是运行启动至第一增速发送程序、随后让所述个人集成控制器把所述用户的操作动作的信息发送给VR终端服务器就可以了,就不必要执行者认证VR终端服务器的IP地址是不是VR终端服务器,亦就无须反复的触摸触摸屏来发出肯定的呼应,所述第一增速发送程序与第二增速发送程序均采用任务级程序执行。进一步实现了增速把所述用户的操作动作的信息发送给VR终端服务器的效果;另外也不需要额外的中转架构来实现发送,亦无须占用信息发送的信道,由此减少了执行者的费用。在另外不相关的服务器运行时,就不会出现错误的连接和发送的问题。根据设定的时长范围保证仅仅在时长范围内的所述个人集成控制器才可以实现认定并发送所述用户的操作动作的信息给VR终端服务器。能防止执行者出现多余的执行;由此在所述个人集成控制器与VR终端服务器间采用同样的转化方式后,所述个人集成控制器与VR终端服务器就带有一样的独特的符码的转化方式。
所述时长的标记还能够为启动3G模块的时长。
还能辨别3G无线网络内的服务器的识别码是不是同步带有和所述个人集成控制器一样的独特的符码,并且辨别3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中,所述时长范畴为3-4分钟间的随意值,时长超出范围,往往常常会使得若干服务器同步同所述个人集成控制器相连,时长若过低,也会发生无法相连的结果。
还有就是,所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个按钮,在所述执行者须把所述用户的操作动作的信息发送给VR终端服务器之际,触碰该按钮就开始发送;真正实现了整体发送用户的操作动作的信息的期间,执行者须执行的无非就是运行启动至第一增速发送程序、随后让所述个人集成控制器把所述用户的操作动作的信息发送给VR终端服务器就可以了,就不必要执行者认证VR终端服务器的IP地址是不是VR终端服务器,亦就无须反复的触摸触摸屏来发出肯定的呼应,这样在触摸屏上也不必显现VR终端服务器的识别符,因此这样的发送期间很容易,触摸屏的显现形式也不复杂,执行者容易实施。
若建立的信息链路不止一个的条件下,就在触摸屏上显现出供选用的服务器的识别码。让执行者做出对的选用。
还有就是,所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个表示发送信息的标记,以此来说明现在正在发送信息;在所述用户的操作动作的信息发送结束后,就在触摸屏上显现一个表示发送信息的标记结束的标记;以此来说明发送信息已经结束,就此终止第一增速发送程序与第二增速发送程序。
以上述依据本发明的理想实施例为启示,通过上述的说明内容,相关工作人员完全可以在不偏离本项发明技术思想的范围内,进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容,必须要根据权利要求范围来确定其技术性范围。

Claims (6)

1.一种分步辨别的虚拟现实娱乐系统,其特征在于,包括系统前端云网络和家庭网络内部系统,家庭网络内部系统包括VR终端服务器、VR个人设备和用户动作捕捉设备,其中,VR终端服务器、VR个人设备、动作捕捉设备均通过家用网络进行互联互通;所述的VR终端服务器与VR内容服务前端网络进行通讯,通过宽带网络或广播信道获取VR内容数据,并将反馈信息或交互数据上传至前端网络;接受VR个人设备的接入请求,为用户提供VR内容服务;读取动作捕捉设备所采集到的用户动作数据,根据动作数据对VR内容作出实时调整;接受和处理个人显示控制器发来的其他操作要求和交互动作;系统前端云网络由一系列的数据中心、内容服务器、数据发布设备组成,用于存储海量的VR内容数据;允许多用户接入并进行数据的获取和上传;根据用户的权限对数据请求进行鉴权,并对数据进行加密;对于用户上传的新数据进行处理、整合;VR个人设备由个人集成控制器、操作外设、VR显示器设备组成,VR个人设备接入家庭网络,并向VR终端服务器请求VR内容服务;VR个人设备接收VR终端服务器发来的VR内容,个人集成控制器将VR内容处理后,通过VR显示器呈现给用户;用户手中的操作外设被接入个人集成控制器,个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器;VR显示器将VR内容呈现给用户;VR显示器内置多轴陀螺仪,能够感知用户的头部动作,并通过个人集成控制器发送至VR终端服务器;
所述个人集成控制器还含有:
执行程序,用来在个人集成控制器获取到用户的操作动作的信息后运行并启动至第一增速发送程序执行程序,用来在个人集成控制器获取到用户的操作动作的信息后运行并启动至第一增速发送程序;用来于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,也就是于执行标记之际,于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,所述独特的符码为执行者来设置,能够为同VR终端服务器的识别码的标记采用同样的密文来作为所述独特的符码;用来设置若干个独特的符码,接着选择一个分配给所述个人集成控制器同VR终端服务器作为所述独特的符码;用来让所述若干个独特的符码依照设定的方式进行若干转化,每一转化方式为若干独特的符码构成,该若干独特的符码伴着时长的变大,进行往复转化,在第一天为第一符码作为独特的符码,第二天为第二符码作为独特的符码…第n天为第n符码作为独特的符码,往复一次;用来辨别探测3G无线网络内的服务器的识别码是不是带有所述独特的符码,还有就是3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中;用来在触摸屏上显现一个按钮,在所述执行者须把所述用户的操作动作的信息发送给VR终端服务器之际,触碰该按钮就开始发送;用来在触摸屏上显现出供选用的服务器的识别码;用来在所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个表示发送信息的标记;在所述用户的操作动作的信息发送结束后,就在触摸屏上显现一个表示发送信息的标记结束的标记。
2.根据权利要求1所述的分步辨别的虚拟现实娱乐系统的控制方法,其特征在于,具体如下:
当用户向VR终端服务器发起一个VR内容观赏请求后,VR终端服务器会为这个用户的请求开启一个服务进程;
a.根据用户的服务请求,这个服务进程会通过VR终端服务器会首先向前端服务器请求响应的VR数据,或从本地存贮中寻找匹配的数据推送至VR内容渲染模块;
b.这个服务进程会驱动VR内容渲染模块开始工作,将3D内容渲染成2D序列帧,并根据VR显示器的特性,对2D画面进行处理和预变形;
c.这些2D序列帧被视频编码器压缩成视频流,并通过流媒体服务器进行发布;
d.个人集成控制器从流媒体服务器中获取视频流,解码为2D序列帧,并通过VR显示器呈现给用户;
e.用户通过手中的操作外设作出交互动作,这些操作由个人集成控制器采集并发送至VR终端服务器,VR内容渲染模块在收到交互动作后,会实时调整渲染内容,并通过2~5的工作步骤,将交互动作的效果通过VR画面反应给用户;
f.当用户的头部运动时,VR显示器内置的多轴陀螺仪同样会采集用户的头部动作,并通过个人集成控制器发送至VR终端服务器,VR内容渲染模块在得到用户的头部动作信息后,同样会实时调整渲染内容,并通过b~e的工作步骤,将实时渲染画面呈现给用户;
g.外部的用户动作采集装置,会实时通过动作捕捉设备及深度采集设备得到用户的手势或主要肢体动作,并将这些动作数据直接发至VR终端服务器,VR内容渲染模块同样会根据这些数据实时调整渲染画面,通过b~e的工作步骤,将实时渲染画面呈现给用户;
另外个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器的方式为首先预设个人集成控制器和家庭网络内部系统,所述家庭网络包括接入实现装置,所述接入实现装置包括3G无线单元,所述3G无线单元完成3G无线网络接入,建立3G无线数据链路,VR终端服务器同3G无线网络相连接,所述个人集成控制器包括处理器,所述处理器同3G模块和触摸屏相连接,接着个人集成控制器将用户的操作动作通过家庭网络发送给VR终端服务器的步骤如下:
步骤1:事先针对VR终端服务器的识别码进行标记后运行并启动至其第二增速发送程序,个人集成控制器获取到用户的操作动作的信息后,运行并启动至第一增速发送程序;
步骤2:当个人集成控制器处在第一增速发送程序的运行状态下后,向所述个人集成控制器本身的识别码执行标记,所述标记同VR终端服务器的识别码进的标记一致,另外还探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记;
步骤3:如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器;
所述当个人集成控制器处在第一增速发送程序的运行状态下后,向所述个人集成控制器本身的识别码执行标记,让所述个人集成控制器本身的识别码带有独一标记,由此在VR终端服务器亦同步执行了第二增速发送程序后,所述个人集成控制器即探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记,如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器就同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器;
所述步骤2内,所述向所述个人集成控制器本身的识别码执行标记的方式为:
于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,也就是于执行标记之际,于所述个人集成控制器本身的识别码上增加独特的符码和时长的标记,所述独特的符码为执行者来设置,能够为同VR终端服务器的识别码的标记采用同样的密文来作为所述独特的符码;
所述个人集成控制器的时长的标记为表示运行并启动至第一增速发送程序的时长,所述VR终端服务器的时长的标记为表示运行并启动至第二增速发送程序的时长;
所述独特的符码还能够为所述个人集成控制器设置若干个,接着选择一个分配给所述个人集成控制器同VR终端服务器作为所述独特的符码,若干所述独特的符码分别为第一符码、第二符码…第n符码,其中n为符码的个数;
所述若干个独特的符码依照设定的方式进行若干转化,每一转化方式为若干独特的符码构成,该若干独特的符码伴着时长的变大,进行往复转化,在第一天为第一符码作为独特的符码,第二天为第二符码作为独特的符码…第n天为第n符码作为独特的符码,往复一次;
也能够在3G无线网络内其他需要发送所述用户的操作动作的信息的服务器上也设置同样的所述转化方式;
在步骤2中,所述探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记的方式包含:
辨别探测3G无线网络内的服务器的识别码是不是带有所述独特的符码,还有就是3G无线网络内的服务器的时长的标记和所述个人集成控制器的时长的标记是不是在设定的时长范畴中;
所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个按钮,在所述执行者须把所述用户的操作动作的信息发送给VR终端服务器之际,触碰该按钮就开始发送;
若建立的信息链路不止一个的条件下,就在触摸屏上显现出供选用的服务器的识别码;
所述用户的操作动作的信息发送给VR终端服务器期间,在触摸屏上显现一个表示发送信息的标记;在所述用户的操作动作的信息发送结束后,就在触摸屏上显现一个表示发送信息的标记结束的标记。
3.根据权利要求2所述的分步辨别的虚拟现实娱乐系统的控制方法,其特征在于所述第一增速发送程序与第二增速发送程序均采用任务级程序执行。
4.根据权利要求2所述的分步辨别的虚拟现实娱乐系统的控制方法,其特征在于若所述个人集成控制器未处在第一增速发送程序的运行状态,通过3G模块与3G无线单元相连接,也能够同步向所述个人集成控制器本身的识别码执行标记,所述标记同VR终端服务器的识别码进的标记一致,另外还探测3G无线网络内的服务器的识别码,分辨3G无线网络内的服务器的识别码有没有一样的标记;如果3G无线网络内的服务器的识别码有一样的标记,就让所述个人集成控制器同VR终端服务器建立信息链路来把所述用户的操作动作的信息发送给VR终端服务器把所述用户的操作动作的信息发送给VR终端服务器。
5.根据权利要求2所述的分步辨别的虚拟现实娱乐系统的控制方法,其特征在于所述时长的标记还能够为启动3G模块的时长。
6.根据权利要求2所述的分步辨别的虚拟现实娱乐系统的控制方法,其特征在于所述时长范畴为3-4分钟间的随意值。
CN201610838125.0A 2016-09-21 2016-09-21 分步辨别的虚拟现实娱乐系统及其方法 Pending CN106385348A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610838125.0A CN106385348A (zh) 2016-09-21 2016-09-21 分步辨别的虚拟现实娱乐系统及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610838125.0A CN106385348A (zh) 2016-09-21 2016-09-21 分步辨别的虚拟现实娱乐系统及其方法

Publications (1)

Publication Number Publication Date
CN106385348A true CN106385348A (zh) 2017-02-08

Family

ID=57935718

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610838125.0A Pending CN106385348A (zh) 2016-09-21 2016-09-21 分步辨别的虚拟现实娱乐系统及其方法

Country Status (1)

Country Link
CN (1) CN106385348A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103197757A (zh) * 2012-01-09 2013-07-10 癸水动力(北京)网络科技有限公司 一种沉浸式虚拟现实系统及其实现方法
CN104915979A (zh) * 2014-03-10 2015-09-16 苏州天魂网络科技有限公司 跨移动平台实现沉浸式虚拟现实的系统
CN105323129A (zh) * 2015-12-04 2016-02-10 上海弥山多媒体科技有限公司 一种家庭虚拟现实娱乐系统
CN105739703A (zh) * 2016-02-02 2016-07-06 北方工业大学 面向无线头戴显示设备的虚拟现实体感交互系统及方法
CN105850148A (zh) * 2013-12-26 2016-08-10 精工爱普生株式会社 视频传输和显示系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103197757A (zh) * 2012-01-09 2013-07-10 癸水动力(北京)网络科技有限公司 一种沉浸式虚拟现实系统及其实现方法
CN105850148A (zh) * 2013-12-26 2016-08-10 精工爱普生株式会社 视频传输和显示系统
CN104915979A (zh) * 2014-03-10 2015-09-16 苏州天魂网络科技有限公司 跨移动平台实现沉浸式虚拟现实的系统
CN105323129A (zh) * 2015-12-04 2016-02-10 上海弥山多媒体科技有限公司 一种家庭虚拟现实娱乐系统
CN105739703A (zh) * 2016-02-02 2016-07-06 北方工业大学 面向无线头戴显示设备的虚拟现实体感交互系统及方法

Similar Documents

Publication Publication Date Title
CN105323129B (zh) 一种家庭虚拟现实娱乐系统
CN104506650B (zh) 一种用户设备协同控制方法、用户设备以及通信系统
CN106527713B (zh) Vr的三维数据渲染系统及其方法
CN110647303B (zh) 一种多媒体播放方法、装置、存储介质及电子设备
WO2017077751A1 (ja) 情報処理装置、情報処理方法およびプログラム
CN104571818B (zh) 一种显示文章评论的方法及装置
CN107029429A (zh) 用于实现云游戏系统的时移辅导的系统和方法
EP2448200A1 (en) Method, device and system for enabling interaction between video and virtual network scene
KR102287905B1 (ko) 멀티미디어 기기, 온라인 교육 시스템 및 이들의 컨텐츠 제공 방법
CN104182232B (zh) 一种创建上下文感知应用的方法及用户终端
CN104881115A (zh) 一种利用设备操控终端实现个性化交互的方法及系统
CN104871548B (zh) 影像显示装置
CN106339098A (zh) 增强正确性的虚拟现实娱乐系统及其方法
CN107179839A (zh) 用于终端的信息输出方法、装置及设备
CN106385681A (zh) 虚拟现实娱乐系统及其方法
CN108635840A (zh) 一种基于Sikuli图像识别的手机游戏体感操控系统及方法
CN106383581A (zh) 再现型虚拟现实娱乐系统及其方法
Viola et al. VR2Gather: A collaborative, social virtual reality system for adaptive, multiparty real-time communication
JP2011502297A5 (zh)
WO2019080900A1 (zh) 神经网络训练方法和装置、存储介质及电子装置
CN106412895A (zh) 高效虚拟现实娱乐系统及其方法
US20170026617A1 (en) Method and apparatus for real-time video interaction by transmitting and displaying user interface correpsonding to user input
CN106385348A (zh) 分步辨别的虚拟现实娱乐系统及其方法
CN106385682A (zh) 多功能的虚拟现实娱乐系统及其方法
CN116723353A (zh) 一种视频监控区域配置方法、系统、装置及可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170208

RJ01 Rejection of invention patent application after publication