CN110147234A - 终端设备、系统及数据处理方法 - Google Patents
终端设备、系统及数据处理方法 Download PDFInfo
- Publication number
- CN110147234A CN110147234A CN201910460840.9A CN201910460840A CN110147234A CN 110147234 A CN110147234 A CN 110147234A CN 201910460840 A CN201910460840 A CN 201910460840A CN 110147234 A CN110147234 A CN 110147234A
- Authority
- CN
- China
- Prior art keywords
- display engine
- dimensional display
- information
- primary layer
- instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/38—Creation or generation of source code for implementing user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Human Computer Interaction (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种终端设备、系统及数据处理方法，所述终端设备包括一三维显示引擎、一二维页面模块以及一原生层，所述二维页面模块用于采集控制指令，并根据所述控制指令向服务器发送目标请求；所述二维页面模块还用于从服务器获取所述目标请求的反馈数据，并将所述反馈数据的信息发送至所述原生层；所述原生层用于传输所述反馈数据的信息至所述三维显示引擎；所述三维显示引擎用于根据所述反馈数据的信息从所述服务器获取影像数据；所述三维显示引擎还用于显示所述影像数据。本发明的基于混合模式移动应用的终端设备、系统及数据处理方法能够降低软件对硬件资源的占用及消耗，运行更加流畅且能够降低生产成本，为用户提供更良好的使用体验。
Description
技术领域
本发明涉及一种终端设备、系统及数据处理方法。
背景技术
全景，英文名(Panorama)，又被称为3D实景，是一种新兴的富媒体技术，其与视频，声音，图片等传统的流媒体最大的区别是“可操作，可交互”。全景分为虚拟现实和3D实景两种。虚拟现实是利用软件，制作出来的模拟现实的场景，例如，虚拟紫禁城，河北虚拟旅游，泰山虚拟游等；3D实景是利用单反相机或街景车拍摄实景照片，经过特殊的拼合，处理，让作者立于画境中，让最美的一面展现出来。
随着科技的发展，数字媒体的迅猛发展正为旅游行业带来活力，越来越多的数字媒体技术用于场馆、景区导览导引系统设计中，通过智能播控平台实现聚合，从对功能的满足进一步上升到对人的精神关怀，打破空间局限和时间界限实现与用户互动、引导，为用户带来便利。
现有的软件多为Hybrid App(混合模式移动应用)，主要以JavaScript+Native两者相互调用为主，从开发层面实现“一次开发，多处运行”的机制，成为真正适合跨平台的开发。Hybrid App兼具了Native App(本地应用程序、原生App)良好用户体验的优势，也兼具了Web App使用HTML5跨平台开发低成本的优势。
目前已经有众多Hybrid App开发成功应用，比如美团、爱奇艺、微信等知名移动应用，都是采用Hybrid App开发模式。
现有的全域数字导览存在播放占用较多的系统资源，大幅度降低运行设备的待机时长的缺陷。
发明内容
本发明要解决的技术问题是为了克服现有技术中全景视频影像的播放占用较多的系统资源，大幅度降低运行设备的待机时长的缺陷，提供一种能够降低软件对硬件资源的占用及消耗，运行更加流畅且能够降低生产成本，为用户提供更良好使用体验的终端设备、系统及数据处理方法。
本发明是通过下述技术方案来解决上述技术问题：
一种基于混合模式移动应用的终端设备，其特点在于，所述终端设备包括一三维显示引擎、一二维页面模块以及一原生层，
所述二维页面模块用于采集控制指令，并根据所述控制指令向服务器发送目标请求；
所述二维页面模块还用于从服务器获取所述目标请求的反馈数据，并将所述反馈数据的信息发送至所述原生层；
所述原生层用于传输所述反馈数据的信息至所述三维显示引擎；
所述三维显示引擎用于根据所述反馈数据的信息从所述服务器获取影像数据；
所述三维显示引擎还用于显示所述影像数据。
较佳地，所述三维显示引擎还用于在服务器获取影像数据后通知所述原生层；
所述原生层还用于在获取三维显示引擎的通知后关闭所述二维页面模块。
较佳地，所述三维显示引擎还用于采集返回指令，并将返回指令的信息通知所述原生层；
所述原生层还用于在获取返回指令的信息后关闭所述三维显示引擎并激活所述二维页面模块。
较佳地，所述影像数据为全景视频影像，所述三维显示引擎还用于根据所述反馈数据的信息从所述服务器获取全景视频影像中的位置信息、观测点信息以及事件触发信息。
较佳地，所述终端设备还包括一判断模块，
所述二维页面模块用于显示一二维地图，并在显示二维地图时采集二维地图上的位置选取指令；
所述原生层还用于接收所述位置选取指令，并判断所述位置选取指令选取的位置的预设范围内是否包括目标影像，若是则向所述三维显示引擎发送所述位置选取指令的信息以及所述目标影像对应的三维模型；
所述三维显示引擎用于根据所述位置选取指令的信息从服务器获取影像数据，并将所述三维模型嵌入至所述影像数据中与所述目标影像对应的位置处。
较佳地，
所述二维页面模块包括通过Vue.js开发的H5页面；
所述三维显示引擎为Unity 3D引擎。
本发明还提供一种数据处理方法，其特点在于，所述数据传输方法包括：
通过二维页面模块采集控制指令；
根据所述控制指令向服务器发送目标请求；
从服务器获取所述目标请求的反馈数据；
将所述反馈数据的信息发送至原生层；
所述原生层传输所述反馈数据的信息至三维显示引擎；
所述三维显示引擎根据所述反馈数据的信息从所述服务器获取影像数据；
所述三维显示引擎显示所述影像数据。
较佳地，所述数据处理方法包括：
所述三维显示引擎在服务器获取影像数据后通知所述原生层；
所述原生层在获取三维显示引擎的通知后关闭所述二维页面模块；
和/或，所述数据处理方法包括：
所述三维显示引擎采集返回指令；
将返回指令的信息通知所述原生层；
所述原生层在获取返回指令的信息后关闭所述三维显示引擎并激活所述二维页面模块。
较佳地，所述数据处理方法包括：
所述二维页面模块显示一二维地图；
在显示二维地图时采集二维地图上的位置选取指令；
所述原生层接收所述位置选取指令；
判断所述位置选取指令选取的位置的预设范围内是否包括目标影像，若是则向所述三维显示引擎发送所述位置选取指令的信息以及所述目标影像对应的三维模型；
所述三维显示引擎根据所述位置选取指令的信息从服务器获取影像数据；
并将所述三维模型嵌入至所述影像数据中与所述目标影像对应的位置处。
本发明还提供一种基于混合模式移动应用的终端系统，其特征在于，所述终端系统包括如上所述的终端设备以及一服务器，所述服务器用于存储所述影像数据。
在符合本领域常识的基础上，上述各优选条件，可任意组合，即得本发明各较佳实例。
本发明的积极进步效果在于：
本发明的基于混合模式移动应用的终端设备、系统及数据处理方法能够降低软件对硬件资源的占用及消耗，运行更加流畅且能够降低生产成本，为用户提供更良好的使用体验。
附图说明
图1为本发明实施例1的终端系统的结构示意图。
图2为本发明实施例1的数据处理方法的流程图。
具体实施方式
下面通过实施例的方式进一步说明本发明，但并不因此将本发明限制在所述的实施例范围之中。
实施例1
本实施例提供一种基于混合模式移动应用的终端系统，所述终端系统包括一终端设备以及一服务器。
本实施例中的终端设备是指手机，所述终端设备还可以为平板电脑、台式机等智能终端设备。
所述终端设备包括一显示屏，所述显示屏为触控显示屏。本实施例的终端设备用于数字导览并显示全景视频影像。
所述终端设备还包括一三维显示引擎、一二维页面模块以及一原生层。
本实施例中，所述三维显示引擎为Unity 3D引擎，所述二维页面模块包括通过Vue.js开发的H5页面。
所述原生层为Native App。
参见图1，本申请终端系统的结构，其中三维显示引擎11、二维页面模块12以及原生层13为本地结构。
所述二维页面模块用于采集控制指令，并根据所述控制指令向服务器14发送目标请求；
所述二维页面模块还用于从服务器获取所述目标请求的反馈数据，并将所述反馈数据的信息发送至所述原生层；
所述原生层用于传输所述反馈数据的信息至所述三维显示引擎；
所述三维显示引擎用于根据所述反馈数据的信息从所述服务器获取影像数据，在本实施例中所述影像数据为全景视频影像。
所述三维显示引擎还用于显示所述影像数据。
由于三维显示引擎是一个资源高消耗的平台，若直接利用三维显示引擎进行全景影像的播放以及界面的显示不仅大量的消耗资源，而且界面显示的技术难于开发。
本实施例的终端设备通过多种平台进行数据的运行显示，能够降低资源消耗，便于开发。
所述三维显示引擎还用于在服务器获取影像数据后通知所述原生层；
所述原生层还用于在获取三维显示引擎的通知后关闭所述二维页面模块。
所述三维显示引擎还用于采集返回指令，并将返回指令的信息通知所述原生层；
所述原生层还用于在获取返回指令的信息后关闭所述三维显示引擎并激活所述二维页面模块。
所述三维显示引擎还用于根据所述反馈数据的信息从所述服务器获取全景视频影像中的位置信息、观测点信息以及事件触发信息。
所述终端设备还包括一判断模块。
所述二维页面模块用于显示一二维地图，并在显示二维地图时采集二维地图上的位置选取指令；
所述原生层还用于接收所述位置选取指令，并判断所述位置选取指令选取的位置的预设范围内是否包括目标影像，若是则向所述三维显示引擎发送所述位置选取指令的信息以及所述目标影像对应的三维模型；
所述三维显示引擎用于根据所述位置选取指令的信息从服务器获取影像数据，并将所述三维模型嵌入至所述影像数据中与所述目标影像对应的位置处。
本实施例能够为全景视频影像中添加三维模型，而且三维模型的添加速度较快。
具体方式为：
三维显示引擎从服务器获取一全景视频影像；
通过元生成获取的模型尺寸生成一隐形的参照模型，所述参照模型的尺寸根据所述全景视频影像中的物体获取；
在所述参照模型中添加一个物体的三维模型；三维模型数据通过所述原生层获取，原生层获取三维模型的方式更加灵活，方便修改及开发。
根据所述全景视频影像、参照模型以及目标模型生成用于数字导览的影像数据。
参见图2，利用上述终端设备，本实施例还提供一种数据处理方法，包括：
步骤100、通过二维页面模块采集控制指令；
本实施例中用户通过二维页面模块选取了一个景区的全景视频影像。
步骤101、根据所述控制指令向服务器发送目标请求；
步骤102、从服务器获取所述目标请求的反馈数据；
所述反馈数据包含所述景区对应的ID编号、位置信息、观测点信息以及事件触发信息等信息。事件触发包括播放语音导览内容、隐藏彩蛋等等。
步骤103、将所述反馈数据的信息发送至原生层；
步骤104、所述原生层传输所述反馈数据的信息至三维显示引擎；
步骤105、所述三维显示引擎根据所述反馈数据的信息从所述服务器获取影像数据；
根据ID编号能够获取对应的全景视频影像。
步骤106、所述三维显示引擎显示所述影像数据。
步骤105和步骤106之间包括：
所述三维显示引擎在服务器获取影像数据后通知所述原生层；
所述原生层在获取三维显示引擎的通知后关闭所述二维页面模块；
步骤106之后包括：
所述三维显示引擎采集返回指令；
将返回指令的信息通知所述原生层；
所述原生层在获取返回指令的信息后关闭所述三维显示引擎并激活所述二维页面模块。
进一步地，本实施例的所述数据处理方法还包括：
所述二维页面模块显示一二维地图；
在显示二维地图时采集二维地图上的位置选取指令；
所述位置选取指令即为步骤100中的一种控制指令。
所述原生层接收所述位置选取指令，同时所述位置选取指令的信息也向服务器发送并接收反馈。
原生层判断所述位置选取指令选取的位置的预设范围内是否包括目标影像，若是则向所述三维显示引擎发送所述位置选取指令的信息以及所述目标影像对应的三维模型；
所述三维显示引擎根据所述位置选取指令的信息从服务器获取影像数据，具体地步骤为三维显示引擎根据服务器的反馈从服务器获取影像数据，所述反馈中包含位置，所述位置能够对应全景视频影像中的时间线上的时间点，三维显示引擎可以直接跳转所述时间点。
并将所述三维模型嵌入至所述影像数据中与所述目标影像对应的位置处。
原生层不仅向三维显示引擎传输服务器的反馈还向三维显示引擎发送本地三维模型。能够在时间点上快速建立模型供用户使用。
虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这些仅是举例说明，本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，但这些变更和修改均落入本发明的保护范围。
Claims (10)
1.一种基于混合模式移动应用的终端设备，其特征在于，所述终端设备包括一三维显示引擎、一二维页面模块以及一原生层，
所述二维页面模块用于采集控制指令，并根据所述控制指令向服务器发送目标请求；
所述二维页面模块还用于从服务器获取所述目标请求的反馈数据，并将所述反馈数据的信息发送至所述原生层；
所述原生层用于传输所述反馈数据的信息至所述三维显示引擎；
所述三维显示引擎用于根据所述反馈数据的信息从所述服务器获取影像数据；
所述三维显示引擎还用于显示所述影像数据。
2.如权利要求1所述的终端设备，其特征在于，所述三维显示引擎还用于在服务器获取影像数据后通知所述原生层；
所述原生层还用于在获取三维显示引擎的通知后关闭所述二维页面模块。
3.如权利要求2所述的终端设备，其特征在于，所述三维显示引擎还用于采集返回指令，并将返回指令的信息通知所述原生层；
所述原生层还用于在获取返回指令的信息后关闭所述三维显示引擎并激活所述二维页面模块。
4.如权利要求1所述的终端设备，其特征在于，所述影像数据为全景视频影像，所述三维显示引擎还用于根据所述反馈数据的信息从所述服务器获取全景视频影像中的位置信息、观测点信息以及事件触发信息。
5.如权利要求1所述的终端设备，其特征在于，所述终端设备还包括一判断模块，
所述二维页面模块用于显示一二维地图，并在显示二维地图时采集二维地图上的位置选取指令；
所述原生层还用于接收所述位置选取指令，并判断所述位置选取指令选取的位置的预设范围内是否包括目标影像，若是则向所述三维显示引擎发送所述位置选取指令的信息以及所述目标影像对应的三维模型；
所述三维显示引擎用于根据所述位置选取指令的信息从服务器获取影像数据，并将所述三维模型嵌入至所述影像数据中与所述目标影像对应的位置处。
6.如权利要求1至5中任意一项所述的终端设备，其特征在于，
所述二维页面模块包括通过Vue.js开发的H5页面；
所述三维显示引擎为Unity3D引擎。
7.一种数据处理方法，其特征在于，所述数据传输方法包括：
通过二维页面模块采集控制指令；
根据所述控制指令向服务器发送目标请求；
从服务器获取所述目标请求的反馈数据；
将所述反馈数据的信息发送至原生层；
所述原生层传输所述反馈数据的信息至三维显示引擎；
所述三维显示引擎根据所述反馈数据的信息从所述服务器获取影像数据；
所述三维显示引擎显示所述影像数据。
8.如权利要求7所述的数据处理方法，其特征在于，所述数据处理方法包括：
所述三维显示引擎在服务器获取影像数据后通知所述原生层；
所述原生层在获取三维显示引擎的通知后关闭所述二维页面模块；
和/或，所述数据处理方法包括：
所述三维显示引擎采集返回指令；
将返回指令的信息通知所述原生层；
所述原生层在获取返回指令的信息后关闭所述三维显示引擎并激活所述二维页面模块。
9.如权利要求7所述的数据处理方法，其特征在于，所述数据处理方法包括：
所述二维页面模块显示一二维地图；
在显示二维地图时采集二维地图上的位置选取指令；
所述原生层接收所述位置选取指令；
判断所述位置选取指令选取的位置的预设范围内是否包括目标影像，若是则向所述三维显示引擎发送所述位置选取指令的信息以及所述目标影像对应的三维模型；
所述三维显示引擎根据所述位置选取指令的信息从服务器获取影像数据；
并将所述三维模型嵌入至所述影像数据中与所述目标影像对应的位置处。
10.一种基于混合模式移动应用的终端系统，其特征在于，所述终端系统包括如权利要求1至6中任意一项所述的终端设备以及一服务器，所述服务器用于存储所述影像数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910460840.9A CN110147234A (zh) | 2019-05-30 | 2019-05-30 | 终端设备、系统及数据处理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910460840.9A CN110147234A (zh) | 2019-05-30 | 2019-05-30 | 终端设备、系统及数据处理方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110147234A true CN110147234A (zh) | 2019-08-20 |
Family
ID=67593670
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910460840.9A Pending CN110147234A (zh) | 2019-05-30 | 2019-05-30 | 终端设备、系统及数据处理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110147234A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020113820A1 (en) * | 2000-10-10 | 2002-08-22 | Robinson Jack D. | System and method to configure and provide a network-enabled three-dimensional computing environment |
| CN104966225A (zh) * | 2015-07-08 | 2015-10-07 | 深圳爱布丁梦想科技有限公司 | 基于移动终端和3d全景图像浏览的房屋租赁方法及系统 |
| CN106941538A (zh) * | 2017-05-15 | 2017-07-11 | 百度在线网络技术（北京）有限公司 | 信息显示系统、方法和装置 |
| CN107896333A (zh) * | 2017-11-29 | 2018-04-10 | 北京未来媒体科技股份有限公司 | 一种基于智能终端的遥控全景视频播放的方法及装置 |
| CN108668168A (zh) * | 2018-05-28 | 2018-10-16 | 烽火通信科技股份有限公司 | 基于Unity 3D的安卓VR视频播放器及其设计方法 |
-
2019
- 2019-05-30 CN CN201910460840.9A patent/CN110147234A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020113820A1 (en) * | 2000-10-10 | 2002-08-22 | Robinson Jack D. | System and method to configure and provide a network-enabled three-dimensional computing environment |
| CN104966225A (zh) * | 2015-07-08 | 2015-10-07 | 深圳爱布丁梦想科技有限公司 | 基于移动终端和3d全景图像浏览的房屋租赁方法及系统 |
| CN106941538A (zh) * | 2017-05-15 | 2017-07-11 | 百度在线网络技术（北京）有限公司 | 信息显示系统、方法和装置 |
| CN107896333A (zh) * | 2017-11-29 | 2018-04-10 | 北京未来媒体科技股份有限公司 | 一种基于智能终端的遥控全景视频播放的方法及装置 |
| CN108668168A (zh) * | 2018-05-28 | 2018-10-16 | 烽火通信科技股份有限公司 | 基于Unity 3D的安卓VR视频播放器及其设计方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11195332B2 (en) | Information interaction method based on virtual space scene, computer equipment and computer-readable storage medium | |
| US10230779B2 (en) | Content provision system, information processing apparatus and content reproduction method | |
| US8571956B2 (en) | System architecture and methods for composing and directing participant experiences | |
| US20120039382A1 (en) | Experience or "sentio" codecs, and methods and systems for improving QoE and encoding based on QoE experiences | |
| US20220272133A1 (en) | Method and system for supporting sharing of experiences between users, and non-transitory computer-readable recording medium | |
| KR20140135292A (ko) | 4ｄ 컨텐츠 제작 서비스 제공 방법 및 시스템, 이를 위한 컨텐츠 제작 장치 | |
| Zheng | Research on mobile learning based on augmented reality | |
| CN108550088A (zh) | 基于虚拟现实的虚拟旅游管理方法和系统 | |
| CN110278445A (zh) | 基于5g网络的影像处理方法、移动终端及系统 | |
| CN110290409A (zh) | 数据处理方法、vr设备以及系统 | |
| JP2001216527A (ja) | マルチメディア情報空間入出力装置およびその方法、ならびにそのプログラムを記録した記録媒体 | |
| CN110147234A (zh) | 终端设备、系统及数据处理方法 | |
| CN110286837A (zh) | 用于数字导览的显示控制方法及移动终端 | |
| CN112423142A (zh) | 图像处理方法、装置、电子设备及计算机可读介质 | |
| CN104902163B (zh) | 图片处理方法和装置、图片生成方法和装置 | |
| CN111367598B (zh) | 动作指令的处理方法、装置、电子设备及计算机可读存储介质 | |
| WO2022231703A1 (en) | Integrating overlaid digital content into displayed data via processing circuitry using a computing memory and an operating system memory | |
| KR20220004859A (ko) | ＷｅｂＲＴＣ 기반 비대면 행사 서비스 제공 시스템 및 방법 | |
| Peng et al. | An interactive immersive serious game application for Kunyu Quantu world map | |
| CN110312165A (zh) | 基于全景视频影像的显示控制方法及终端设备 | |
| CN110278453A (zh) | 基于5g网络的全景视频影像显示方法、移动终端及系统 | |
| CN110267026A (zh) | 基于5g网络的数据处理方法、移动终端及系统 | |
| Tarumi et al. | Implementations and evaluations of location-based virtual city system for mobile phones | |
| JP7133634B2 (ja) | ユーザフィードバックが可能なボットに基づいて映像を制作する方法、システム、および非一時的なコンピュータ読み取り可能な記録媒体 | |
| Tarumi et al. | Design and evaluation of a location-based virtual city system for mobile phones |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20190820 |