CN106484122A - 一种虚拟现实装置及其浏览轨迹跟踪方法 - Google Patents

一种虚拟现实装置及其浏览轨迹跟踪方法 Download PDF

Info

Publication number
CN106484122A
CN106484122A CN201611005401.1A CN201611005401A CN106484122A CN 106484122 A CN106484122 A CN 106484122A CN 201611005401 A CN201611005401 A CN 201611005401A CN 106484122 A CN106484122 A CN 106484122A
Authority
CN
China
Prior art keywords
focus
picture
complete
staying
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611005401.1A
Other languages
English (en)
Inventor
尤雅各
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JRD Communication Shenzhen Ltd
Original Assignee
JRD Communication Shenzhen Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JRD Communication Shenzhen Ltd filed Critical JRD Communication Shenzhen Ltd
Priority to CN201611005401.1A priority Critical patent/CN106484122A/zh
Publication of CN106484122A publication Critical patent/CN106484122A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了虚拟现实装置及其浏览轨迹跟踪方法,虚拟现实装置包括:用于对待观看的完整VR画面建模的初始化模块,用于实时监视视角的焦点在完整VR画面上的位置的焦点捕捉模块,用于监视焦点在完整VR画面上各个位置的停留时间的计时模块,用于对焦点在完整VR画面上各个位置坐标和相应的停留时间关联后进行存储的关联模块。本发明通过记录完整VR画面上各个区域的坐标位置与用户观看时目光停留的时间,可以完整地统计出该用户在VR视频或图片中的某块图片区域或位置的停留信息,由此可以非常清楚地反映出该用户对该街景中哪一块信息感兴趣,该数据可以作为广告、资料推送等用途。

Description

一种虚拟现实装置及其浏览轨迹跟踪方法
技术领域
本发明涉及虚拟现实技术领域,尤其涉及一种虚拟现实装置及其浏览轨迹跟踪方法。
背景技术
VR(Virtual Reality,虚拟现实)技术正日益普及,用户通过头戴式VR设备就可以体验到身临其境的感觉。其中可供360°观看的VR视频、VR图片等资源也越来越丰富。
然而,现有的VR设备在使用时,当用户观看一段视频、一张图片的过程中,对画面中某个目标对象,如商品、景物、人物等感兴趣,而VR设备又无法及时、准确地获知用户的特殊需求时,VR设备无法获知不同用户的偏好,仍需要用户手动寻找自己感兴趣的相关资源,大大降低了用户的体验度。
发明内容
鉴于现有技术存在的不足,本发明提供了一种VR装置及其浏览轨迹跟踪方法。
为了实现上述的目的,本发明采用了如下的技术方案:
一种虚拟现实装置,包括:
初始化模块,用于对待观看的完整VR画面建模,定义完整VR画面上各个像素的坐标点;
焦点捕捉模块,用于实时监视视角的焦点在完整VR画面上的位置;
计时模块,用于监视所述焦点在完整VR画面上各个位置的停留时间;
关联模块,用于对所述焦点在完整VR画面上各个位置坐标和相应的停留时间关联后进行存储。
作为其中一种实施方式,所述的虚拟现实装置还包括第一修正模块,所述第一修正模块用于将所述焦点的坐标替换为相应的焦点区域的坐标,并将相应的焦点区域的坐标与所述焦点的停留时间关联后进行存储;所述焦点区域为以对应的焦点为中心、具有预设半径的区域。
作为其中一种实施方式,所述的虚拟现实装置还包括第二修正模块,所述第二修正模块用于在所述焦点区域的平均灰度与背景的灰度相似度大于预设阈值时,将所述焦点区域的坐标替换为离相应焦点区域最近的、与背景的灰度相似度骤减的第一区域的坐标进行存储。
作为其中一种实施方式,所述的虚拟现实装置还包括标记模块,所述标记模块用于在完整VR画面上标记出各个位置上焦点的停留时间。
作为其中一种实施方式,所述标记模块以不同的颜色深度表示不同的停留时间长短,且停留时间越长的区域颜色越深。
本发明的另一目的在于提供一种虚拟现实装置的浏览轨迹跟踪方法,包括:
对待观看的完整VR画面建模,定义完整VR画面上各个像素的坐标点;
实时监视视角的焦点在完整VR画面上的位置,及所述焦点在完整VR画面上各个位置的停留时间;
对所述焦点在完整VR画面上各个位置坐标和相应的停留时间关联后进行存储。
作为其中一种实施方式,所述的浏览轨迹跟踪方法还包括:将所述焦点的坐标替换为相应的焦点区域的坐标,并将相应的焦点区域的坐标与所述焦点的停留时间关联后进行存储;所述焦点区域为以对应的焦点为中心、具有预设半径的区域。
作为其中一种实施方式,所述的浏览轨迹跟踪方法还包括:在所述焦点区域的平均灰度与背景的灰度相似度大于预设阈值时,将所述焦点区域的坐标替换为离相应焦点区域最近的、与背景的灰度相似度骤减的第一区域的坐标进行存储。
作为其中一种实施方式,所述的浏览轨迹跟踪方法还包括:在完整VR画面上标记出各个位置上焦点的停留时间。
作为其中一种实施方式,所述的浏览轨迹跟踪方法还包括:以不同的颜色深度表示不同的停留时间长短,且停留时间越长的区域颜色越深。
本发明通过记录完整VR画面上各个区域的坐标位置与用户观看时目光停留的时间,可以完整地统计出该用户在360°VR视频或图片中的某块图片区域或位置的停留信息,由此可以非常清楚地反映出该用户对该360街景中哪一块信息感兴趣,该数据可以作为广告、资料推送等用途;另外,通过标记使某个区域被关注的时间越长,其标记颜色越深,即可很直观地对关注程度进行区分。
附图说明
图1为本发明实施例的虚拟现实装置的结构框图;
图2位本发明实施例的完整VR画面与VR装置的相对位置关系示意图;
图3为本发明实施例的浏览轨迹跟踪方法示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参阅图1,本发明实施例的虚拟现实装置主要包括初始化模块10、焦点捕捉模块20、计时模块30和关联模块40,结合图2所示,其中初始化模块10用于对待观看的完整VR画面P建模,以定义完整VR画面P上各个像素的坐标点p(x,y);焦点捕捉模块20用于实时监视视角的焦点V在完整VR画面P上的位置坐标V(x,y);计时模块30用于监视焦点V在完整VR画面P上各个位置的停留时间;关联模块40用于对焦点V在完整VR画面P上各个位置坐标和相应的停留时间关联后进行存储。
如图2所示,通常,一张完整VR画面P尺寸远大于VR装置1的视角范围,用户可以通过上、下、左、右转动头部以观看完整的画面。本实施例中,对待观看的完整VR画面P建模时,以完整VR画面P的一个角部为坐标原点o,在其他实施方式中,坐标原点o还可以为完整VR画面P的中心。关联模块40在对焦点V在完整VR画面P上各个位置坐标和相应的停留时间关联后进行存储的数据格式为(V(x,y),∑t),这里,V(x,y)为VR装置1的视角的焦点V的各个位置坐标,∑t为相应的位置坐标在单个位置坐标连续停留的时间之和。
通过记录完整VR画面上各个区域的坐标位置与用户观看时目光停留的时间,可以完整地统计出该用户在360°VR视频或图片中的某块图片区域或位置的停留信息,由此可以非常清楚地反映出该用户对该360街景中哪一块信息感兴趣。
优选地,本实施例的VR装置1还具有标记模块70,标记模块70用于在完整VR画面P上标记出各个位置上焦点V的停留时间。标记模块70进一步以不同的颜色深度表示不同的停留时间长短,且停留时间越长的区域标记颜色越深,以此区分用户对各个对象的不同关注程度,数据分析更直观。
进一步地,VR装置1还内置匹配模块80和推送模块90,匹配模块80用于根据关联模块40与标记模块70的统计结果与网络数据库/本地数据库进行对比,筛选出与停留时间较长区域相似度高的特定对象(如地址、广告链接、商品等);推送模块90用于将匹配模块80的匹配结果推送给用户。
由于用户在观看过程中,VR装置难免会产生轻微的移动,为提高统计精度,VR装置还具有第一修正模块50,第一修正模块50用于将焦点的坐标替换为相应的焦点区域的坐标,并将相应的焦点区域的坐标与焦点的停留时间关联后进行存储;焦点区域为以对应的焦点为中心、具有预设半径(如10像素)的区域,即允许VR装置有轻微抖动。
进一步地,VR装置还具有第二修正模块60,第二修正模块60用于在焦点区域的平均灰度与背景的灰度相似度大于预设阈值时,将焦点区域的坐标替换为离相应焦点区域最近的、与背景的灰度相似度骤减的第一区域的坐标进行存储。即,当某一关注度高的热点区域为空白或较淡的背景图片时,该第二修正模块60自动选取最近的某个对象作为关注区域,以此进行校正,提高精确性。
如图3所示,本发明实施例的VR装置的浏览轨迹跟踪方法,包括:
对待观看的完整VR画面建模,定义完整VR画面上各个像素的坐标点;
实时监视视角的焦点在完整VR画面上的位置,及焦点在完整VR画面上各个位置的停留时间;
对焦点在完整VR画面上各个位置坐标和相应的停留时间关联后进行存储;
在完整VR画面上标记出各个位置上焦点的停留时间;
以不同的颜色深度表示不同的停留时间长短,且停留时间越长的区域颜色越深。
上述步骤完成后,根据统计结果与网络数据库/本地数据库进行对比,筛选出与停留时间较长区域相似度高的特定对象(如地址、广告链接、商品等),并将匹配结果推送给用户。
在跟踪过程中,为提高跟踪精度,还包括在“对焦点在完整VR画面上各个位置坐标和相应的停留时间关联后进行存储”步骤前,将焦点的坐标替换为相应的焦点区域的坐标,并将相应的焦点区域的坐标与焦点的停留时间关联后进行存储;其中,焦点区域为以对应的焦点为中心、具有预设半径的区域。
为剔除跟踪错误,本实施例的跟踪方法还进一步地对浏览轨迹进行校正,跟踪方法还包括在“对焦点在完整VR画面上各个位置坐标和相应的停留时间关联后进行存储”步骤前,在焦点区域的平均灰度与背景的灰度相似度大于预设阈值时,将焦点区域的坐标替换为离相应焦点区域最近的、与背景的灰度相似度骤减的第一区域的坐标进行存储。
综上所述,本发明通过记录完整VR画面上各个区域的坐标位置与用户观看时目光停留的时间,可以完整地统计出该用户在360°VR视频或图片中的某块图片区域或位置的停留信息,由此可以非常清楚地反映出该用户对该360街景中哪一块信息感兴趣,该数据可以作为广告、资料推送等用途;另外,通过标记使某个区域被关注的时间越长,其标记颜色越深,即可很直观地对关注程度进行区分。
以上所述仅是本申请的具体实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种虚拟现实装置,其特征在于,包括:
初始化模块(10),用于对待观看的完整VR画面建模,定义完整VR画面上各个像素的坐标点;
焦点捕捉模块(20),用于实时监视视角的焦点在完整VR画面上的位置;
计时模块(30),用于监视所述焦点在完整VR画面上各个位置的停留时间;
关联模块(40),用于对所述焦点在完整VR画面上各个位置坐标和相应的停留时间关联后进行存储。
2.根据权利要求1所述的虚拟现实装置,其特征在于,还包括第一修正模块(50),所述第一修正模块(50)用于将所述焦点的坐标替换为相应的焦点区域的坐标,并将相应的焦点区域的坐标与所述焦点的停留时间关联后进行存储;所述焦点区域为以对应的焦点为中心、具有预设半径的区域。
3.根据权利要求2所述的虚拟现实装置,其特征在于,还包括第二修正模块(60),所述第二修正模块(60)用于在所述焦点区域的平均灰度与背景的灰度相似度大于预设阈值时,将所述焦点区域的坐标替换为离相应焦点区域最近的、与背景的灰度相似度骤减的第一区域的坐标进行存储。
4.根据权利要求1-3任一所述的虚拟现实装置,其特征在于,还包括标记模块(70),所述标记模块(70)用于在完整VR画面上标记出各个位置上焦点的停留时间。
5.根据权利要求4所述的虚拟现实装置,其特征在于,所述标记模块(70)以不同的颜色深度表示不同的停留时间长短,且停留时间越长的区域颜色越深。
6.一种虚拟现实装置的浏览轨迹跟踪方法,其特征在于,包括:
对待观看的完整VR画面建模,定义完整VR画面上各个像素的坐标点;
实时监视视角的焦点在完整VR画面上的位置,及所述焦点在完整VR画面上各个位置的停留时间;
对所述焦点在完整VR画面上各个位置坐标和相应的停留时间关联后进行存储。
7.根据权利要求6所述的浏览轨迹跟踪方法,其特征在于,还包括:将所述焦点的坐标替换为相应的焦点区域的坐标,并将相应的焦点区域的坐标与所述焦点的停留时间关联后进行存储;所述焦点区域为以对应的焦点为中心、具有预设半径的区域。
8.根据权利要求7所述的浏览轨迹跟踪方法,其特征在于,还包括:在所述焦点区域的平均灰度与背景的灰度相似度大于预设阈值时,将所述焦点区域的坐标替换为离相应焦点区域最近的、与背景的灰度相似度骤减的第一区域的坐标进行存储。
9.根据权利要求6-8任一所述的浏览轨迹跟踪方法,其特征在于,还包括:在完整VR画面上标记出各个位置上焦点的停留时间。
10.根据权利要求9所述的浏览轨迹跟踪方法,其特征在于,还包括:以不同的颜色深度表示不同的停留时间长短,且停留时间越长的区域颜色越深。
CN201611005401.1A 2016-11-16 2016-11-16 一种虚拟现实装置及其浏览轨迹跟踪方法 Pending CN106484122A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611005401.1A CN106484122A (zh) 2016-11-16 2016-11-16 一种虚拟现实装置及其浏览轨迹跟踪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611005401.1A CN106484122A (zh) 2016-11-16 2016-11-16 一种虚拟现实装置及其浏览轨迹跟踪方法

Publications (1)

Publication Number Publication Date
CN106484122A true CN106484122A (zh) 2017-03-08

Family

ID=58272285

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611005401.1A Pending CN106484122A (zh) 2016-11-16 2016-11-16 一种虚拟现实装置及其浏览轨迹跟踪方法

Country Status (1)

Country Link
CN (1) CN106484122A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108926828A (zh) * 2017-05-24 2018-12-04 胡敏君 团队运动虚拟现实训练系统
WO2019104533A1 (zh) * 2017-11-29 2019-06-06 深圳市柔宇科技有限公司 一种视频播放方法及装置
CN110709879A (zh) * 2017-06-14 2020-01-17 株式会社阿尔法代码 广告信息处理系统、广告显示区域评价方法以及广告信息处理用程序
WO2020093862A1 (zh) * 2018-11-08 2020-05-14 华为技术有限公司 一种vr视频处理的方法及相关装置
CN113076436A (zh) * 2021-04-09 2021-07-06 成都天翼空间科技有限公司 一种vr设备主题背景推荐方法及系统
CN114879851A (zh) * 2022-07-11 2022-08-09 深圳市中视典数字科技有限公司 一种基于虚拟现实的数据采集方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102221881A (zh) * 2011-05-20 2011-10-19 北京航空航天大学 基于仿生代理与视线追踪兴趣区域分析的人机交互方法
CN102981616A (zh) * 2012-11-06 2013-03-20 中兴通讯股份有限公司 增强现实中对象的识别方法及系统和计算机
US20140168056A1 (en) * 2012-12-19 2014-06-19 Qualcomm Incorporated Enabling augmented reality using eye gaze tracking
CN104484453A (zh) * 2014-12-30 2015-04-01 北京元心科技有限公司 确定网页页面热点区域的方法及装置
CN106095089A (zh) * 2016-06-06 2016-11-09 郑黎光 一种获取感兴趣目标信息的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102221881A (zh) * 2011-05-20 2011-10-19 北京航空航天大学 基于仿生代理与视线追踪兴趣区域分析的人机交互方法
CN102981616A (zh) * 2012-11-06 2013-03-20 中兴通讯股份有限公司 增强现实中对象的识别方法及系统和计算机
US20140168056A1 (en) * 2012-12-19 2014-06-19 Qualcomm Incorporated Enabling augmented reality using eye gaze tracking
CN104484453A (zh) * 2014-12-30 2015-04-01 北京元心科技有限公司 确定网页页面热点区域的方法及装置
CN106095089A (zh) * 2016-06-06 2016-11-09 郑黎光 一种获取感兴趣目标信息的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
柳沙: "《设计心理学》", 31 March 2012, 上海人民美术出版社,2012年3月第2版 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108926828A (zh) * 2017-05-24 2018-12-04 胡敏君 团队运动虚拟现实训练系统
CN110709879A (zh) * 2017-06-14 2020-01-17 株式会社阿尔法代码 广告信息处理系统、广告显示区域评价方法以及广告信息处理用程序
WO2019104533A1 (zh) * 2017-11-29 2019-06-06 深圳市柔宇科技有限公司 一种视频播放方法及装置
WO2020093862A1 (zh) * 2018-11-08 2020-05-14 华为技术有限公司 一种vr视频处理的方法及相关装置
CN111163306A (zh) * 2018-11-08 2020-05-15 华为技术有限公司 一种vr视频处理的方法及相关装置
CN111163306B (zh) * 2018-11-08 2022-04-05 华为技术有限公司 一种vr视频处理的方法及相关装置
US11341712B2 (en) 2018-11-08 2022-05-24 Huawei Technologies Co., Ltd. VR video processing method and related apparatus
CN113076436A (zh) * 2021-04-09 2021-07-06 成都天翼空间科技有限公司 一种vr设备主题背景推荐方法及系统
CN113076436B (zh) * 2021-04-09 2023-07-25 成都天翼空间科技有限公司 一种vr设备主题背景推荐方法及系统
CN114879851A (zh) * 2022-07-11 2022-08-09 深圳市中视典数字科技有限公司 一种基于虚拟现实的数据采集方法及系统
CN114879851B (zh) * 2022-07-11 2022-11-01 深圳市中视典数字科技有限公司 一种基于虚拟现实的数据采集方法及系统

Similar Documents

Publication Publication Date Title
CN106484122A (zh) 一种虚拟现实装置及其浏览轨迹跟踪方法
CN109729426B (zh) 一种视频封面图像的生成方法及装置
CN104537550B (zh) 一种基于增强现实ip地图的互联网自主广告方法
US20170301120A1 (en) Augmented display of information in a device view of a display screen
CN106303726B (zh) 一种视频标签的添加方法及装置
CN103365936A (zh) 视频推荐系统及其方法
EP3864491A1 (en) Method for hmd camera calibration using synchronised image rendered on external display
US9349053B2 (en) Method and system of identifying non-distinctive images/objects in a digital video and tracking such images/objects using temporal and spatial queues
CN105898583B (zh) 一种图像推荐方法及电子设备
US20130290994A1 (en) Selection of targeted content based on user reactions to content
CN104424585A (zh) 播放方法及电子装置
RU2012119843A (ru) Способ отображения видеоданных на мобильном устройстве
CN104391960B (zh) 一种视频标注方法及系统
CN106156237B (zh) 信息处理方法、信息处理装置及用户设备
CN106162303B (zh) 信息处理方法、信息处理装置及用户设备
CN106020461A (zh) 基于眼球追踪技术的视频交互方法
CN108040125A (zh) 内容识别及推送方法及电视伴随式ai助理装置
CN104735517B (zh) 一种信息显示方法及电子设备
US20190204604A1 (en) Display method and display system
JP2017169140A (ja) 生成装置、生成方法、及び生成プログラム
JP6162057B2 (ja) 表示装置及び表示方法
US11188757B2 (en) Method and apparatus for applying video viewing behavior
CN105590015B (zh) 信息图热点采集方法、处理方法和装置及热点系统
CN106803994B (zh) 识别四棱锥全景视频的方法及系统
CN108833354A (zh) 虚拟宠物构建方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170308

RJ01 Rejection of invention patent application after publication