CN108961371B - 全景启动页及app显示方法、处理装置以及移动终端 - Google Patents

全景启动页及app显示方法、处理装置以及移动终端 Download PDF

Info

Publication number
CN108961371B
CN108961371B CN201710358098.1A CN201710358098A CN108961371B CN 108961371 B CN108961371 B CN 108961371B CN 201710358098 A CN201710358098 A CN 201710358098A CN 108961371 B CN108961371 B CN 108961371B
Authority
CN
China
Prior art keywords
panorama
panoramic
picture
spherical
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710358098.1A
Other languages
English (en)
Other versions
CN108961371A (zh
Inventor
李东晖
刘俊成
徐昊
王冀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba China Co Ltd
Original Assignee
Alibaba China Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba China Co Ltd filed Critical Alibaba China Co Ltd
Priority to CN201710358098.1A priority Critical patent/CN108961371B/zh
Publication of CN108961371A publication Critical patent/CN108961371A/zh
Application granted granted Critical
Publication of CN108961371B publication Critical patent/CN108961371B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/005General purpose rendering architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2215/00Indexing scheme for image rendering
    • G06T2215/16Using real world measurements to influence rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2016Rotation, translation, scaling

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Architecture (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

公开了全景启动页显示方法、APP全景启动页的显示方法、处理装置以及移动终端。全景启动页显示方法的步骤包括将全景图片渲染到假想球体上形成球面全景原图;截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片;全景启动页显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片。

Description

全景启动页及APP显示方法、处理装置以及移动终端
技术领域
本发明涉及全景领域,特别是一种适用于全景APP的全景启动页显示方法、APP全景启动页的显示方法、处理装置以及移动终端。
背景技术
启动页是引导用户学习APP用法或了解APP作用的页面。打开一款应用的时候常常会看到精美的启动页,它们在你未使用产品之前提前告知你产品的主要功能与特点,第一次印象的好坏会极大地影响到后续的产品使用体验。APP启动引导页已在现在的大部分APP中广泛应用,可以帮助用户了解新功能,也可以展现广告、新闻等需要强调展示的内容,同时一些需要较长时间启动准备的APP,可以通过启动页来降低用户对启动速度的抱怨。因此,启动页的显示受到了本领域的关注。
最常见的启动页是简短的文字以及该功能的界面,主要是运用在功能介绍类与使用说明类上。这种方式能较为直接地传达产品的主要功能,缺点在与过于模式化,显得千篇一律。文字与插图的组合方式也是目前常见的形式之一,除了静态页面外,启动页还具有动态效果的页面。在单个页面采用动画的形式,考虑好各个组件的先后快慢,让页面动起来。同时结合动效,考虑页面间切换的方式。
目前较为常见的几种APP启动页的形式主要是静态图片、滚动图片和平面视频等。对于普通APP来说,上述的几种启动页的形式已经可以满足需求,但是对于一款以全景视频为主要内容的APP来说,普通的启动页显得较为平庸,也不能很好地起到引导用户的功能。
因此,设计一种具有吸引力且能够很好地引导全景APP的启动页是较为关注的重点。全景启动页能够给用户带来更大的吸引力,且特别契合以全景视频为主要内容的APP,但是,由于全景启动页的数据量较大,容易引起卡顿现象,这对APP来说是个重大缺陷。
专利文献1公开的一种全景互动移动终端展示系统包括:多触点控制模块,用于通过识别手势动作,完成对图片展示的控制;图片加载模块,用于加载符合格式的文件集合,文件集合包括迷你地图和图像单元,所述迷你地图存储所述图像单元缩略图及位置信息;全景图片展示模块,用于将图像单元的纹理作为介质将图像单元进行加载,并根据图像单元的尺寸设定屏幕的高度作为半径绘制一个球体,根据绘制球体的直径将图像单元拉伸,使图像单元的图片紧贴在球体的内壁,形成一种天空盒的效果,最后将视点至于球心位置。该专利能够覆盖整个空间的照片自动生成系列全景图和一张迷你地图,通过触摸多点触控智能终端平台右下角的迷你地图进行场景切换,在每个全景图中,进行缩放或者移动,场景的镜头就跟随前后拉伸或者上下左右转动。但该专利无法解决容易卡顿的现象,使得APP的应用性大大降低,造成不良的用户体验。
专利文献2公开的一种使用移动终端拍摄和浏览全景照片的方法,在用户使用移动终端连续拍摄多幅照片的过程中,每次摄取照片时,都在预览窗中提供前一张照片的“边侧影像”来提示和辅助用户准确取景,再利用模式识别算法对缓存中的重叠图像自动进行匹配处理,将多幅照片无缝拼接成为一张宽幅的全景照片图像,以供显示于移动终端的显示屏中。该专利提供了一种利用自己的具有普通拍照功能的移动终端拍摄出具有专业效果的超广角全景照片图像的方法,但该专利无法适用于引导页的显示,也不涉及解决卡顿问题。
专利文献3公开的一种显示全景数据的方法包括:获取欲显示的包含全景数据的全景图片;将所述全景图片加载到显示模型中,由此确定视点的位置;获取视角信息;根据所述视点的位置和视角信息,从所述全景数据中提取与所述视点对应的视点数据;在显示屏的预设显示区域内显示所述视点数据。该专利将包含全景数据的全景图片加载到显示模型中,从而确定视点的位置并获取视角信息,然后根据视点的位置和视角信息,从全景数据中提取与视点对应的视点数据,最后在显示屏的预设显示区域内显示视点数据。但该专利只能显示当下视点和视角下的视点数据,仅能显示部分全景图片,需要别的视点和视角下的数据时,需要改变视点和视角,重新加载数据,这无法顺畅地显示完整的全景照片,且需要多次改变视点和视角以及多次加载。
现有技术文献
专利文献
专利文献1:中国专利公开CN105892890A号
专利文献2:中国专利公开CN1589050A号
专利文献3:中国专利公开CN105208368A号
发明内容
发明要解决的问题
在全景APP中使用全景引导页时,由于全景图片数据量比较大,加载全景图片容易造成卡顿,现有技术中,一般是通过降低图片分辨率的方式来把大图变成小图来防止卡顿,或者如专利文献3通过仅展示局部全景图片来防止卡顿,但是启动页的清晰度和全息效果也非常重要,这关系到用户体验,而降低分辨率使得清晰度下降,展示局部图片使得全息信息无法完整表达,影响引导功能和用户体验,也无法顺畅地展示所有信息。
解决问题的方案
本发明人等为了达成上述目的而进行了深入研究,具体而言,在本发明的第一方面,本发明提供了一种全景启动页显示方法,全景启动页显示方法步骤包括:
将全景图片渲染到假想球体上形成球面全景原图。
截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片。
全景启动页显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片。
在所述的全景启动页显示方法中,所述球面全景原图的球体中心作为视点,屏幕平面靠近所述球体中心,球体中心至屏幕平面的至少三个预定点位的延长线与球面的交点围成的区域作为所述的第一部分。
在所述的全景启动页显示方法中,所述球面全景原图的球体中心作为视点,屏幕平面靠近所述球体中心,球体中心至屏幕平面四个顶点的延长线与球面的交点围成的区域作为所述的第一部分。
在所述的全景启动页显示方法中,所述第一图片约为所述球面全景原图的十分之一到四分之一。
在所述的全景启动页显示方法中,所述第一图片约为所述球面全景原图的六分之一。
在所述的全景启动页显示方法中,加载所述球面全景原图通过自动触发或基于屏幕移动而触发。
在所述的全景启动页显示方法中,移动或转动所述屏幕以显示所述球面全景原图的其他部分。
根据本发明的第二方面,一种APP全景启动页的显示方法,其步骤包括:
启动APP,将全景图片渲染到假想球体上形成球面全景原图。
截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片。
屏幕显示所述第一图片和提示语,然后加载所述球面全景原图以更新所述第一图片。
根据提示语转动所述屏幕以显示所述球面全景原图的其他部分,当屏幕转动超过预定角度时,提示语消失且结束引导。
根据本发明的第三方面,一种APP全景启动页的显示方法步骤包括:
启动APP,调用并在屏幕上显示第一图片和提示语,其中,所述第一图片是经由截取用户通过屏幕可看到的球面全景原图的第一部分而形成,所述球面全景原图通过全景图片渲染到假想球体上形成。
然后加载所述球面全景原图以更新所述第一图片。
根据提示语转动所述屏幕以显示所述球面全景原图的其他部分,当屏幕转动超过预定角度时,提示语消失且结束引导。在本发明的APP全景启动页的显示方法中,在预定时间间隔后自动显示所述球面全景原图的其他部分,当所述球面全景原图的一部分或整体显示完成后结束引导。
根据本发明的第四方面,一种实施所述的全景启动页显示方法的处理装置包括将全景图片渲染到假想球体上形成球面全景原图的全景形成模块、用于截取球面全景原图的图像处理模块和用于加载全景图片到屏幕的全景图片加载模块,其中,图像处理模块截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片,所述全景图片加载模块先显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片。
在本发明所述的处理装置中,所述全景形成模块为用于生成全景图像的全景生成器,所述图像处理模包括Photoshop、OpenGL或OpenCV图片处理器,所述全景图片加载模块为图形处理器。
根据本发明的第五方面,一种实施所述APP全景启动页的显示方法的移动终端包括存储全景图片和APP的存储器、运行APP的芯片、显示全景图片和APP的屏幕以及处理装置,其中,所述处理装置包括将全景图片渲染到假想球体上形成球面全景原图的全景形成模块、用于截取球面全景原图的图像处理模块和用于加载全景图片到屏幕的全景图片加载模块,所述芯片访问所述存储器以打开APP进入全景启动页,图像处理模块截取用户通过屏幕可看到所述球面全景原图的第一部分且保存为第一图片,所述全景图片加载模块在屏幕上先显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片,以及所述全景图片加载模块基于指令显示所述球面全景原图的其他部分。
在所述的移动终端中,所述移动终端包括手机、PAD、个人数字助理(PDA)、便携多媒体播放器(PMP)或导航系统,所述移动终端设有用于测量移动终端的转动角度的陀螺仪,所述全景图片加载模块基于陀螺仪测量的转动角度显示所述球面全景原图的其他部分,当所述转动角度超过预定角度时,所述全景图片加载模块结束加载。
发明的效果
根据本发明的适用于全景APP的全景启动页显示方法、处理装置以及移动终端,本发明首创地通过在展示全景图片之前进行截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片,解决了由于数据量过大造成的卡顿现象,而且通过显示所述第一图片然后加载所述球面全景原图以更新所述第一图片使得本发明进行了完整的全景展示,由于后加载了所述球面全景原图,能够顺畅地显示完整的球面全景原图。因此,本发明的全景启动页显示方法显著地提高了响应速度和优化了全景显示且完整地展示了全景原图以及确保了全景原图的清晰度,本发明既保障了响应速度又保证了展示的全景图片的清晰度和全息效果。
上述说明仅是本发明技术方案的概述,为了能够使得本发明的技术手段更加清楚明白,达到本领域技术人员可依照说明书的内容予以实施的程度,并且为了能够让本发明的上述和其它目的、特征和优点能够更明显易懂,下面以本发明的具体实施方式进行举例说明。
附图说明
[图1]示出了本发明的全景启动页显示方法的步骤示意图。
[图2]示出了本发明的全景启动页显示方法的球面全景原图的观看示意图。
[图3]示出了本发明的APP全景启动页的显示方法的步骤示意图。
[图4]示出了本发明的处理装置的结构示意图。
[图5]示出了本发明的移动终端的结构示意图。
符号说明
1 全景形成模块
2 图像处理模块
3 全景图片加载模块
4 存储器
5 芯片
6 屏幕
具体实施方式
下面将参照附图更详细地描述本发明的具体实施例。虽然附图中显示了本发明的具体实施例,然而应当理解,可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本发明,并且能够将本发明的范围完整的传达给本领域的技术人员。
需要说明的是,在说明书及权利要求当中使用了某些词汇来指称特定组件。本领域技术人员应可以理解,技术人员可能会用不同名词来称呼同一个组件。本说明书及权利要求并不以名词的差异来作为区分组件的方式,而是以组件在功能上的差异来作为区分的准则。如在通篇说明书及权利要求当中所提及的“包含”或“包括”为一开放式用语,故应解释成“包含但不限定于”。说明书后续描述为实施本发明的较佳实施方式,然所述描述乃以说明书的一般原则为目的,并非用以限定本发明的范围。本发明的保护范围当视所附权利要求所界定者为准。
为便于对本发明实施例的理解,下面将结合附图以几个具体实施例为例做进一步的解释说明,且各个附图并不构成对本发明实施例的限定。
具体而言,如图1所示的本发明的全景启动页显示方法的步骤示意图,全景启动页显示方法步骤包括:
将全景图片渲染到假想球体上形成球面全景原图。
截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片。
全景启动页显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片。
本发明中,全景图片指的是将一个360°的画面投影到二维平面上的图片,由于全景图片数据量比较大,加载全景图片容易引起卡顿,现有技术中,一般是通过降低图片分辨率的方式来把大图变成小图来防止卡顿,或者通过仅展示局部全景图片来防止卡顿,本发明首创地通过在展示全景图片之前进行截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片,解决了由于数据量过大可能造成的卡顿现象,而且通过显示所述第一图片然后加载所述球面全景原图以更新所述第一图片使得本发明进行了完整的全景展示,而且由于后加载了所述球面全景原图,能够顺畅地显示完整的球面全景原图。因此,本发明的全景启动页显示方法显著地提高了响应速度和优化了全景显示且完整地展示了全景原图以及确保了全景原图的清晰度,本发明既保障了加载速度又保证了展示的全景图片的清晰度和全息效果。
在本发明中,所述全景图片并不限于全景图像,也可以是全景视频。所述全景图片可以来自网络下载、也可以保存在本地存储设备上或者可通过用户实时拍摄获得。
在本发明中,形成球面全景原图是形成用户期望的全景图像,所述球面全景原图并不仅限于球面的全景原图,还可以是椭圆的全景原图以及类球面的全景原图。进一步地,球面全景原图可以是标清、高清、超清或1080P的清晰度。
本发明的全景启动页显示方法的实施例优选地是,在采用终端设备例如手机、电脑、掌上电脑等智能设备对待处理全景图片进行全景渲染的过程中,需要构建虚拟球体,本实施例不限定终端设备的具体类型,只要能够具有全景渲染功能的设备均可以使用。
本发明的全景启动页显示方法的实施例优选地是,采用正反面双镜头折叠的光学设备一次拍摄四周及上面和下面的场景生成球面全景原图。
本发明的全景启动页显示方法的实施例优选地是,利用鱼眼镜头拍摄全景图片,例如Nikon FC-E8照相机,其水平视角超过180度,拍摄两幅图片便可以覆盖全场景,根据镜头投影模型对图像进行变换然后生成球面全景原图。
本发明的全景启动页显示方法的实施例优选地是,利用普通数字相机拍摄图片,把数字相机固定在预定位置向四周拍摄全场景,然后从图片中提取球面上每一位置信息,然后将图片拼接形成全景原图。
本发明的全景启动页显示方法的实施例优选地是,本方法也可以直接适用由全景图片制成的球面全景原图。
本发明的全景启动页显示方法的实施例优选地是,根据全景图片的数据量计算渲染成球面全景原图所需时间,计算初始的虚拟球体的顶点坐标,以及映射图片需要的纹理坐标,根据移动终端的控制参数、视点和/或屏幕尺寸对顶点坐标进行预处理,根据预处理后的顶点坐标创建球体,以及根据纹理坐标在所构建的球体表面例如内表面构建全景图像纹理,将全景图片映射到所构建的球体表面形成球面全景原图,并计算当前渲染花费的实际时间,根据渲染花费的实际时间和所需时间,可以判断是否需要重新设定球体顶点坐标和纹理坐标,如果实际时间大于所需时间,调整顶点坐标和纹理坐标再一次建立新的球面全景原图直到符合要求。
本方法截取球面全景原图的第一部分并保存为第一图片,优选地,可预先确定第一部分在球面全景原图中的占比,比如五分之一。
在本发明中,定义用户的眼睛为观看全景的视点,本发明还可以根据用户的视点、屏幕大小以及球面全景原图的球心和半径等进行计算以获得更好的第一部分占比,其中,优选地,球心和视点重合,例如通过计算得到用户通过屏幕可看到的所述球面全景原图的第一部分为球面全景原图正前方的六分之一,将这第一部分保存为第一图片,由于第一图片如仅为球面全景原图的六分之一,数据量大大减少,显著提高了加载速度,优化了响应速度,在一个实施例中,为了进一步提高加载速度,对第一图片进行图片处理以进一步减小数据量,例如对第一图片的格式或类型等进行处理,还可以进行调整第一图片的整尺寸、形状、角度等。
本发明的全景启动页显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片,既保障了响应加载速度又保证了展示的全景图片的清晰度和顺畅逼真的全息效果,这比现有技术通过降低图片分辨率损害全息效果或仅显示局部全息图片有了显著的进步,本发明可以进行完整的全景展示,而且由于后加载了所述球面全景原图,能够顺畅地显示完整的球面全景原图,而且显著地提高了响应速度避免了卡顿现象,本发明既保障了响应加载速度又保证了展示的全景图片的清晰度和全息效果。
本发明中,所述球面全景原图的球体中心作为视点,屏幕平面靠近所述球体中心,球体中心至屏幕平面的至少三个预定点位的延长线与球面的交点围成的区域作为所述的第一部分。
本发明的全景启动页显示方法的实施例优选地是,所述球面全景原图的球体中心作为视点,屏幕平面靠近所述球体中心,球体中心至屏幕平面四个顶点的延长线与球面的交点围成的区域作为所述的第一部分,如图2所示的全景启动页显示方法的球面全景原图的观看示意图,用户的视点,即眼睛位置,和球面全景原图的球体中心重合,这样能够使得全景显示效果得到最优化,图中的球体表示球面全景原图,矩形平面表示屏幕,屏幕平面靠近所述球体中心,但不与球心重合,根据用户的使用习惯,可以预先设定屏幕平面离球体中心的距离,例如10-20厘米,计算球体中心至屏幕平面四个顶点的延长线与球面的交点围成的区域作为所述的第一部分。进一步地,本发明也可以计算球体中心至屏幕平面四个预定点位的延长线与球面的交点围成的区域作为所述的第一部分,例如在屏幕平面内选取间隔均匀的四个预定点位,这样截取的第一部分相对更小,从而数据量也更小,能够进一步提高响应速度,优化加载。
在全景启动页显示方法中,所述第一图片约为所述球面全景原图的十分之一到四分之一,其中,优选的是,所述第一图片约为所述球面全景原图的六分之一。
本发明的全景启动页显示方法的实施例优选地是,移动或转动所述屏幕以显示所述球面全景原图的其他部分。本方法加载了完整的球面全景原图,因此,通过移动或转动所述屏幕以显示所述球面全景原图的其他部分,此过程顺畅不卡顿,克服了现有技术中的根据屏幕重新计算及展示局部球面全景原图的无法顺畅显示完整球面全景原图以及加载速度慢的缺陷。
本发明的全景启动页显示方法的实施例优选地是,加载所述球面全景原图通过自动触发或基于屏幕移动而触发。自动触发模式能够迅速地加载球面全景原图,本发明还可以通过设置如屏幕移动进行触发加载命令,加载球面全景原图,提高本方法的控制性,当然,本发明还可以通过其他运动参数或者指令进行触发加载,在此不再赘述。APP启动所述启动页在现在的大部分APP中广泛应用,可以帮助用户了解新功能,也可以展现广告、新闻等需要强调展示的内容,同时一些需要较长时间启动准备的APP,可以通过启动页来降低用户对启动速度的抱怨。目前较为常见的几种APP启动页的形式主要是静态图片,滚动图片,平面视频等。本发明提供了一种全景图片的APP全景启动页,特别适用于全景视频为主要内容的APP,本发明的APP全景启动页的显示方法与全景内容为主的APP强关联,这种新颖的互动模式吸引用户使用APP,也契合全景APP的主题。
如图3所示的本发明的APP全景启动页的显示方法的步骤示意图,APP全景启动页的显示方法的步骤包括:
启动APP,将全景图片渲染到假想球体上形成球面全景原图。
截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片。
屏幕显示所述第一图片和提示语,然后加载所述球面全景原图以更新所述第一图片。
根据提示语转动所述屏幕以显示所述球面全景原图的其他部分,当屏幕转动超过预定角度时,提示语消失且结束引导。
本发明的APP全景启动页的显示方法提供了一种全景启动页的方案,在APP启动的时候,通过显示全景启动页,既能起到吸引用户的作用,又能指导用户如何使用APP来观看全景内容。
另一个实施例中,一种APP全景启动页的显示方法包括启动APP,调用并在屏幕上显示第一图片和提示语,其中,所述第一图片是经由截取用户通过屏幕可看到的球面全景原图的第一部分而形成,所述球面全景原图通过全景图片渲染到假想球体上形成,然后加载所述球面全景原图以更新所述第一图片,根据提示语转动所述屏幕以显示所述球面全景原图的其他部分,当屏幕转动超过预定角度时,提示语消失且结束引导。在该实施例中,显示方法可以预先进行球面全景原图生成以及第一图片的截取,这能够进一步提高APP的显示速度。
进一步地,APP全景启动页的显示方法可以根据在触摸屏上的手势,例如,上、下、左、右、旋转、放大和缩小等操作显示所述球面全景原图的其他部分。
如上所述的由于全景图片数据量比较大,在APP中加载全景图片容易造成卡顿,现有技术中,一般是通过降低图片分辨率的方式来把大图变成小图来防止卡顿,或者通过仅展示局部全景图片来防止卡顿,本方法首创地通过在展示全景图片之前进行截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片,解决了由于数据量过大可能造成的卡顿现象,而且通过显示所述第一图片然后加载所述球面全景原图以更新所述第一图片使得本发明进行了完整的全景展示,而且由于后加载了所述球面全景原图,能够顺畅地显示完整的球面全景原图。既保障了响应加载速度又保证了展示的全景图片的清晰度和全息效果,APP全景启动页的显示方法通过在屏幕上显示第一图片和提示语指导用户如何使用APP来观看全景内容,所述提示语可以是指导使用内容,也可以是“转动手机,发现更多”的提示语句,用于提示用户转动手机查看球面全景原图。根据用户操作,利用如陀螺仪检测屏幕转动,判断用户转动手机屏幕超过一定角度之后,提示语消失,显示进入APP首页的按钮,完成引导。本发明的APP全景启动页的显示方法通过这样引导启动页,可以帮助用户理解观看全景视频的方式,同时用新颖的形式吸引用户使用APP,也契合全景APP的主题,而且具备前述的响应速度快、不卡顿以及保证了展示的全景图片的清晰度和全息效果。
本发明的APP全景启动页的显示方法中,在预定时间间隔后自动显示所述球面全景原图的其他部分,当所述球面全景原图的一部分或整体显示完成后结束引导。为了保证使用流畅性和部分用户无法理解提示语,在等待超过一定时间之后,自动显示所述球面全景原图的其他部分,当所述球面全景原图的一部分或整体显示完成后,自动显示进入APP首页的按钮,完成引导。
本发明的APP全景启动页的显示方法不仅可以用于单屏显示球面全景原图,还可以通过双屏显示球面全景原图。双屏模式实现是基于双目视觉原理,因为人的左、右眼之间有间距,该间距会造成两眼的视角存在细微的差别,而这样的细微差别会让两只眼睛分别观察的景物具有稍许的位移。而人类之所以能够产生具有空间感的立体视觉效果,恰恰就是因为这种位移在大脑中的有机合成。人的左、右眼通过观看偏差图像能够判断其三维位置,例如深度,厚度。本发明的APP全景启动页的显示方法通过双屏能够进一步提高立体视觉效果,从而获到身临其境的沉浸感。
打开APP进入全景启动页,将全景图片渲染到假想球体上形成球面全景原图。
分别截取用户通过每个屏幕可看到的所述球面全景原图的第一部分并保存为左第一图片和右第一图片。
用户佩戴VR眼镜,两个屏幕分别加载所述左第一图片、右第一图片和提示语,然后加载所述球面全景原图以更新左第一图片和右第一图片。
根据提示语转动所述屏幕以显示所述球面全景原图的其他部分,当屏幕转动超过预定角度时,提示语消失且结束引导。
用户可以根据自己的使用习惯与具体需求,选择是使用单屏模式观看全景数据,还是使用双屏模式观看全景数据。用户也可以在观看的过程中随时在单屏模式和双屏模式之间进行切换。
图4示出了本发明的处理装置的结构示意图,一种实施所述的全景启动页显示方法的处理装置,所述处理装置包括将全景图片渲染到假想球体上形成球面全景原图的全景形成模块1、用于截取球面全景原图的图像处理模块2和用于加载全景图片到屏幕的全景图片加载模块3,其中,图像处理模块2截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片,所述全景图片加载模块3先显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片。
本发明的处理装置能够实施前述的全景启动页显示方法,其结构简单,功能强大,通过全景形成模块1将全景图片生成球面全景原图,图像处理模块2用于截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片,所述全景图片加载模块3先显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片,本处理装置响应速度快、不卡顿以及保证了展示的全景图片的清晰度和全息效果。
本发明所述的处理装置优选地是,所述全景形成模块1为用于生成全景图像的全景生成器,所述图像处理模块2包括Photoshop、OpenGL或OpenCV图片处理器,所述全景图片加载模块3为图形处理器GPU。
其中,用于生成全景图像的全景生成器可以是适用于鱼眼镜头拍摄的全景图片的用于生成全景图像的全景生成器,该用于生成全景图像的全景生成器可包括用于拟合成球体的多项式拟合计算单元和将全景图片准确融合到球面的配准单元。
用于生成全景图像的全景生成器也可以是适用于普通数码相机拍摄的一组全场景的全景图片,该用于生成全景图像的全景生成器可包括将所述一组全景图片拼接的图片拼接单元和渲染到球体上生成球面全景原图的渲染单元,其中,例如图片拼接单元可以使PTGUI图片处理器。在一个实施例中,如果照片的拼接方向是水平方向时,在拍得一张照片后,系统将所拍得的图片右端部分图像(全幅面的15-20%)显示在屏幕的左侧,用户将身体或终端向右转动一个小角度,此时在该屏幕中的新场景里有一部分和上一张图片的右侧图像大致重合,这样就能够保证该新拍摄的图片和相邻的前一张图片大致处于同一水平位置,并且前后两张图片有15-20%的重叠。如果图片的拼接方向是竖直方向时,在拍得一张图片后,将所拍得的图片下端部分图像(全幅面的15-20%)显示在屏幕的上侧,用户将身体或终端向下转动一个小角度,此时在该屏幕中新的场景里有一部分和相邻的上一张图片的下侧图像大致重合,这样就能够保证该新拍摄的图片和前一张图片大致处于同一垂直位置,并且前后两张图片有15-20%的重叠。15-20%的重叠图像的模式识别处理的工作量小且能够做到相邻两张照片尽可能精确的匹配拼接。
在一个实施例中,用于生成全景图像的全景生成器可以将全景图片的纹理作为介质,根据全景图片的尺寸设定屏幕的高度作为半径绘制一个球体,根据绘制球体的直径将全景图片拉伸,使全景图片紧贴在球体的内壁,形成一种天空盒的效果,最后将视点至于球心位置。
在一个实施例中,用于生成全景图像的全景生成器可包括照相机,所述照相机为数码照相机或鱼眼照相机。照相机在一个方向上改变拍摄角度的同时拍摄多个部分图片并连接多个部分图片来获取全景图片。
在一个实施例中,照相机可在视频模式或摄影模式中处理通过图像传感器获得的静止图像或运动图像的图像帧。照相机包括光圈控制器、定时发生器、电荷耦合设备(CCD)、模拟处理器、A/D转换器和图像处理器。光圈控制器输出用于控制至相机镜的入射光量的信号,而定时发生器生成用于操作照相机的各种定时信号。此外,CCD是将通过相机镜头输入的光信号转换成电信号的图像传感器。模拟处理器锁存从CCD接收的信号并对锁存信号执行双采样、增益闪光、黑点校正和可能的灰度校正以输出经模拟处理的图像信号。为了连接用于构造全景图片的多个图像,模拟处理器执行诸如对准、缝合和调和的图像处理操作,以平滑地连接用于构造全景图片的图像。A/D转换器将经模拟处理的图像信号转换成数字图像数据,且图像处理器从A/D转换器接收数字图像数据并对图像信号执行各种图像处理操作,包括白平衡、数据检测和灰度校正等。
在一个实施例中,全景图片加载模块3集成在图形处理器GPU中,或者全景图片加载模块3也可以是独立的组件。在一个实施例中,全景图片加载模块3可以从如硬盘的存储器中调用第一图片和/或球面全景原图到内存中,然后图形处理器处理后在屏幕上显示。
图5示出了本发明的移动终端的结构示意图,一种实施所述的APP全景启动页的显示方法的移动终端包括存储全景图片和APP的存储器4、运行APP的芯片5、显示全景图片和APP的屏幕6以及处理装置,其中,所述处理装置包括将全景图片渲染到假想球体上形成球面全景原图的全景形成模块1、用于截取球面全景原图的图像处理模块2和用于加载全景图片到屏幕的全景图片加载模块3,所述芯片5访问所述存储器4以打开APP进入全景启动页,图像处理模块2截取用户通过屏幕可看到所述球面全景原图的第一部分且保存为第一图片,所述全景图片加载模块3在屏幕上先显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片,以及所述全景图片加载模块3基于指令显示所述球面全景原图的其他部分。
移动终端的存储器4可存储APP程序以及存储全景图片等数据。存储器4可包括闪存、硬盘式存储器、多媒体卡微带存储器、卡式存储器(例如SD或XD存储器)、随机存取存储器(RAM)、静态RAM(SRAM)、只读存储器(ROM)、电可擦可编程ROM(EEPROM)、可编程ROM(PROM)磁存储器、磁盘和光盘中的至少一种。移动终端还可与在因特网上执行存储器4的存储功能的网络存储连接或无线连接。
芯片5可以是通用处理器、数字信号处理器、专用集成电路ASIC或现场可编程门阵列FPGA。在一个实施例中,芯片5可以包括基带、处理器、协处理器、RF、触摸屏控制器芯片、Memory和处理器。
移动终端还可包括蜂窝电话、智能手机、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携多媒体播放器(PMP)、导航系统等。
本发明所述的移动终端包括手机、PAD、个人数字助理(PDA)、便携多媒体播放器(PMP)或导航系统,所述移动终端设有用于测量移动终端的转动角度的陀螺仪,所述全景图片加载模块3基于陀螺仪测量的转动角度显示所述球面全景原图的其他部分,当所述转动角度超过预定角度时,所述全景图片加载模块3结束加载。
在实施例中,利用手机陀螺仪检测手机的屏幕转动,判断用户转动手机屏幕超过一定角度之后,提示语消失,显示进入APP首页的按钮,完成引导。
本发明的移动终端可以实施所述的APP全景启动页的显示方法,而且移动终端响应速度快、不卡顿以及保证了展示的全景图片的清晰度和全息效果,特别适用于展示全景类型的APP。
工业实用性
本发明的全景启动页显示方法、APP全景启动页的显示方法、处理装置以及移动终端可以在全景领域制造并使用。
尽管以上结合附图对本发明的实施方案进行了描述,但本发明并不局限于上述的具体实施方案和应用领域,上述的具体实施方案仅仅是示意性的、指导性的,而不是限制性的。本领域的普通技术人员在本说明书的启示下和在不脱离本发明权利要求所保护的范围的情况下,还可以做出很多种的形式,这些均属于本发明保护之列。

Claims (14)

1.一种全景启动页显示方法,其步骤包括:
将全景图片渲染到假想球体上形成球面全景原图;
截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片;
全景启动页显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片。
2.根据权利要求1所述的全景启动页显示方法,其特征在于:所述球面全景原图的球体中心作为视点,屏幕平面靠近所述球体中心,球体中心至屏幕平面的至少三个预定点位的延长线与球面的交点围成的区域作为所述的第一部分。
3.根据权利要求1所述的全景启动页显示方法,其特征在于:所述球面全景原图的球体中心作为视点,屏幕平面靠近所述球体中心,球体中心至屏幕平面四个顶点的延长线与球面的交点围成的区域作为所述的第一部分。
4.根据权利要求1所述的全景启动页显示方法,其特征在于:所述第一图片为所述球面全景原图的十分之一到四分之一。
5.根据权利要求1所述的全景启动页显示方法,其特征在于:所述第一图片为所述球面全景原图的六分之一。
6.根据权利要求1所述的全景启动页显示方法,其特征在于:加载所述球面全景原图通过自动触发或基于屏幕移动而触发。
7.根据权利要求1所述的全景启动页显示方法,其特征在于:移动或转动所述屏幕以显示所述球面全景原图的其他部分。
8.一种APP全景启动页的显示方法,其步骤包括:
启动APP,将全景图片渲染到假想球体上形成球面全景原图;
截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片;
屏幕显示所述第一图片和提示语,然后加载所述球面全景原图以更新所述第一图片;
根据提示语转动所述屏幕以显示所述球面全景原图的其他部分,当屏幕转动超过预定角度时,提示语消失且结束引导。
9.一种APP全景启动页的显示方法,其步骤包括:
启动APP,调用并在屏幕上显示第一图片和提示语,其中,所述第一图片是经由截取用户通过屏幕可看到的球面全景原图的第一部分而形成,所述球面全景原图通过全景图片渲染到假想球体上形成;
然后加载所述球面全景原图以更新所述第一图片;
根据提示语转动所述屏幕以显示所述球面全景原图的其他部分,当屏幕转动超过预定角度时,提示语消失且结束引导。
10.根据权利要求8或9所述的APP全景启动页的显示方法,其特征在于:在预定时间间隔后自动显示所述球面全景原图的其他部分,当所述球面全景原图的一部分或整体显示完成后结束引导。
11.一种实施权利要求1-7任一项所述的全景启动页显示方法的处理装置,其特征在于:所述处理装置包括将全景图片渲染到假想球体上形成球面全景原图的全景形成模块(1)、用于截取球面全景原图的图像处理模块(2)和用于加载全景图片到屏幕的全景图片加载模块(3),其中,图像处理模块(2)截取用户通过屏幕可看到的所述球面全景原图的第一部分并保存为第一图片,所述全景图片加载模块(3)先显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片。
12.根据权利要求11所述的处理装置,其特征在于:所述全景形成模块(1)为用于生成全景图像的全景生成器,所述图像处理模块(2)包括Photoshop、OpenGL或OpenCV图片处理器,所述全景图片加载模块(3)为图形处理器(GPU)。
13.一种实施权利要求8-10中任一项所述的APP全景启动页的显示方法的移动终端,其特征在于:所述移动终端包括存储全景图片和APP的存储器(4)、运行APP的芯片(5)、显示全景图片和APP的屏幕(6)以及处理装置,其中,所述处理装置包括将全景图片渲染到假想球体上形成球面全景原图的全景形成模块(1)、用于截取球面全景原图的图像处理模块(2)和用于加载全景图片到屏幕的全景图片加载模块(3),所述芯片(5)访问所述存储器(4)以打开APP进入全景启动页,图像处理模块(2)截取用户通过屏幕可看到所述球面全景原图的第一部分且保存为第一图片,所述全景图片加载模块(3)在屏幕上先显示所述第一图片,然后加载所述球面全景原图以更新所述第一图片,以及所述全景图片加载模块(3)基于指令显示所述球面全景原图的其他部分。
14.根据权利要求13所述的移动终端,其特征在于:所述移动终端包括手机、PAD、个人数字助理(PDA)、便携多媒体播放器(PMP)或导航系统,所述移动终端设有用于测量移动终端的转动角度的陀螺仪,所述全景图片加载模块(3)基于陀螺仪测量的转动角度显示所述球面全景原图的其他部分,当所述转动角度超过预定角度时,所述全景图片加载模块(3)结束加载。
CN201710358098.1A 2017-05-19 2017-05-19 全景启动页及app显示方法、处理装置以及移动终端 Active CN108961371B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710358098.1A CN108961371B (zh) 2017-05-19 2017-05-19 全景启动页及app显示方法、处理装置以及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710358098.1A CN108961371B (zh) 2017-05-19 2017-05-19 全景启动页及app显示方法、处理装置以及移动终端

Publications (2)

Publication Number Publication Date
CN108961371A CN108961371A (zh) 2018-12-07
CN108961371B true CN108961371B (zh) 2023-06-02

Family

ID=64462948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710358098.1A Active CN108961371B (zh) 2017-05-19 2017-05-19 全景启动页及app显示方法、处理装置以及移动终端

Country Status (1)

Country Link
CN (1) CN108961371B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111275803B (zh) * 2020-02-25 2023-06-02 北京百度网讯科技有限公司 3d模型渲染方法、装置、设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH118845A (ja) * 1997-04-21 1999-01-12 Sony Corp パノラマ画像生成装置および方法
CN102256154A (zh) * 2011-07-28 2011-11-23 中国科学院自动化研究所 实现三维全景视频的定位与播放的方法及系统
CN106131540A (zh) * 2016-07-29 2016-11-16 暴风集团股份有限公司 基于d3d播放全景视频的方法及系统
CN106569696A (zh) * 2016-11-08 2017-04-19 深圳岚锋创视网络科技有限公司 一种渲染输出全景影像的方法、系统及便携式终端

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9766089B2 (en) * 2009-12-14 2017-09-19 Nokia Technologies Oy Method and apparatus for correlating and navigating between a live image and a prerecorded panoramic image
US20140253574A1 (en) * 2013-03-05 2014-09-11 Research In Motion Limited Development Environment For Capture Of Image Data From A Mobile Device
CN104477115B (zh) * 2014-11-28 2017-04-12 广东好帮手电子科技股份有限公司 语音控制导航及全景分屏显示的方法及系统
CN105208368A (zh) * 2015-09-23 2015-12-30 北京奇虎科技有限公司 显示全景数据的方法及装置
CN105913478A (zh) * 2015-12-28 2016-08-31 乐视致新电子科技(天津)有限公司 360度全景显示方法、显示模块及移动终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH118845A (ja) * 1997-04-21 1999-01-12 Sony Corp パノラマ画像生成装置および方法
CN102256154A (zh) * 2011-07-28 2011-11-23 中国科学院自动化研究所 实现三维全景视频的定位与播放的方法及系统
CN106131540A (zh) * 2016-07-29 2016-11-16 暴风集团股份有限公司 基于d3d播放全景视频的方法及系统
CN106569696A (zh) * 2016-11-08 2017-04-19 深圳岚锋创视网络科技有限公司 一种渲染输出全景影像的方法、系统及便携式终端

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
一种全景图客户端快速显示的切片模型与实现;谢元礼;姚瑾;许允波;张荣斌;王芹;;西北大学学报(自然科学版)(第01期) *
面向移动互联网应用的全景地图切片技术研究;吕楠;向煜;;北京测绘(第02期) *

Also Published As

Publication number Publication date
CN108961371A (zh) 2018-12-07

Similar Documents

Publication Publication Date Title
US10129462B2 (en) Camera augmented reality based activity history tracking
US20210090608A1 (en) Video processing method, device and electronic equipment
US9571734B2 (en) Multi display device and method of photographing thereof
CN108939556B (zh) 一种基于游戏平台的截图方法及装置
US10754420B2 (en) Method and device for displaying image based on virtual reality (VR) apparatus
KR102146858B1 (ko) 촬영 장치 및 촬영 장치의 비디오 생성방법
US11625066B2 (en) Foldable electronic device and photographing method using multiple cameras in foldable electronic device
WO2022022715A1 (zh) 一种拍摄方法及设备
CN105991915A (zh) 拍照的方法和装置以及终端
US20230360184A1 (en) Image processing method and apparatus, and electronic device and computer-readable storage medium
WO2019200718A1 (zh) 图像处理方法、装置及电子设备
US20220172319A1 (en) Camera-based Transparent Display
KR20150011742A (ko) 사용자 단말 장치 및 그 제어 방법
EP4322520A1 (en) Photographing method and apparatus, and electronic device
CN105827978B (zh) 一种半球形全景图的拍摄方法、装置及终端
CN114071010A (zh) 一种拍摄方法及设备
WO2023273114A1 (zh) 动态分辨率的渲染方法、装置、设备、程序和可读介质
CN108961371B (zh) 全景启动页及app显示方法、处理装置以及移动终端
CN109427089B (zh) 基于环境光照条件的混合现实对象呈现
CN110870304A (zh) 向用户提供信息以观察多视图内容的方法和装置
CN105892890A (zh) 一种全景互动移动终端展示系统及方法
CN114071009B (zh) 一种拍摄方法及设备
JP6663491B2 (ja) 画像処理装置、画像処理プログラム、および記録媒体
CN111736692B (zh) 显示方法、显示装置、存储介质与头戴式设备
US10419666B1 (en) Multiple camera panoramic images

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200515

Address after: 310052 room 508, floor 5, building 4, No. 699, Wangshang Road, Changhe street, Binjiang District, Hangzhou City, Zhejiang Province

Applicant after: Alibaba (China) Co.,Ltd.

Address before: 200000, room 2, floor 02, building 555, Dongchuan Road, Minhang District, Shanghai

Applicant before: CHUANXIAN NETWORK TECHNOLOGY (SHANGHAI) Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant