CN114742980B - 结合关系图谱的三维展馆浏览方法 - Google Patents

结合关系图谱的三维展馆浏览方法 Download PDF

Info

Publication number
CN114742980B
CN114742980B CN202210398708.1A CN202210398708A CN114742980B CN 114742980 B CN114742980 B CN 114742980B CN 202210398708 A CN202210398708 A CN 202210398708A CN 114742980 B CN114742980 B CN 114742980B
Authority
CN
China
Prior art keywords
navigation
user
map
target
exhibit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210398708.1A
Other languages
English (en)
Other versions
CN114742980A (zh
Inventor
胡勇
王梦园
沈旭昆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yunnan Innovation Institute of Beihang University
Original Assignee
Yunnan Innovation Institute of Beihang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yunnan Innovation Institute of Beihang University filed Critical Yunnan Innovation Institute of Beihang University
Priority to CN202210398708.1A priority Critical patent/CN114742980B/zh
Publication of CN114742980A publication Critical patent/CN114742980A/zh
Application granted granted Critical
Publication of CN114742980B publication Critical patent/CN114742980B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/3331Query processing
    • G06F16/3332Query translation
    • G06F16/3334Selection or weighting of terms from queries, including natural language queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/36Creation of semantic tools, e.g. ontology or thesauri
    • G06F16/367Ontology
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/36Creation of semantic tools, e.g. ontology or thesauri
    • G06F16/374Thesaurus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/901Indexing; Data structures therefor; Storage structures
    • G06F16/9024Graphs; Linked lists
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/90335Query processing
    • G06F16/90344Query processing by using string matching techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Artificial Intelligence (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请公开了一种结合关系图谱的三维展馆浏览方法,包括以下步骤:步骤S10:展品关系的抽取和图谱构建;步骤S20:三维场景中图谱的渲染和交互;步骤S30:用户自定义浏览路线导航。该方法通过将关系图谱引入三维数字展馆,与场景交互进行充分关联,结合路径规划算法获取导航信息,设计并实现新的UI套件,进行自适应导航信息的显示。

Description

结合关系图谱的三维展馆浏览方法
技术领域
本申请涉及三维展馆浏览技术领域,特别是一种结合关系图谱的三维展馆浏览方法。
背景技术
近年来,随着图形学领域的研究发展和硬件设备性能提升,基于三维虚拟空间的应用越来越广泛。相较于二维图文展示形式,三维虚拟空间能够向用户展示更丰富的对象信息,提供更好的沉浸感和真实感。
现有展览馆展示展品多为实物,或采用VR技术合成虚拟立体视频进行展示,展示手段较单一,难以有效激发参观者的游览兴趣,现有技术中缺乏可用于展览馆的三维展示方法。
现有技术1的技术方案:使用超高像素扫描仪和谷歌街景技术再现博物馆的内部场景。如谷歌艺术项目(GAP)联合世界上许多著名的艺术博物馆共同推出的谷歌数字博物馆项目,其交互界面如图1所示,用户可以在线观看全景视频,得到身临其境的体验,下方缩略图列举了可选的观察视角,点击即可实现观察场景的切换。
现有技术1的缺点:
1.观察点固定,不能由用户仅需灵活调节,用户点击缩略图切换视点的切换方式易导致浏览过程不连续,影响用户体验。
2.这种浏览方案无法体现展品之间的关联关系,场馆之间及展品之间的割裂感非常明显,不利于用户获取前、后相关联展品的知识,导致浏览展品后无法获取全方面的知识。
现有技术2的技术方案:在小地图导航场景中,交互界面通过在展馆中以UI的方式提供主要展品清单,用户点击感兴趣的展品后跳转到模型前并显示展品的详细介绍。漫游时的导航实现方案是,在屏幕局部位置提供场景地图缩略版,并以可旋转的扇形表示虚拟替身的视野范围,从而使用户能够据此判断替身在场景中的方位和朝向。如图2所示,用户通过旋转视角对照小地图的信息和扇形角度变化,找到正确的移动路径。
现有技术2的缺点:
1.场馆中虽提供了展品清单,但其中的展品作为独立个体呈现,没有表现出展品之间的关联关系,且用户每次只能选择一个感性趣的展品浏览。
2.小地图占用屏幕较多空间,破坏画面完整性,对此主要的解决方式是设置小地图隐藏功能,但寻路和观赏时需要切换小地图状态导致操作比较麻烦。
3.小地图导航模式将导航信息通过小地图和视野图的方式间接表示,需要用户自己对照场景俯视图找到正确的前进路线,导航效率较低。
现有技术3的技术方案:针对三维场景的导航现有技术还包括在画面中放置3D书签,3D书签可包含多种样式,如直线箭头形状、带有角度的箭头形状,类似三角形状的其它标识等。提示在当前位置可选择的移动方向。如图3所示。
现有技术3的缺点:
1.在场景中的位置固定,难以兼容用户从不同角度观看书签时书签指示方向的准确性。场景结构复杂时更容易引起理解上的多义性。
2.一个3D书签只能指向一个方向,用于在一个位置标明下一步的移动方向。当路线复杂时,就需要在场景中密集地摆放导航书签,增加程序开发成本,遮挡场景内容,影像美观性,用户使用时感受到的灵活性也较低。
现有技术4的技术方案:针对三维场景导航的技术方案还包括在三维场景地面绘制推荐浏览路线的路径图,如图4所示,用户跟随地面路线进行漫游,到达预定的目标位置,路线轨迹由每次导航的起始位置决定,路线生成后漫游过程中不可更改。
现有技术4的缺点:
1.在场景地面采用绘制路线的方式添加了大量除场景内容外的信息,对场景内容造成了遮挡,且提示方式较生硬,影响用户漫游的沉浸感。
2.路线图不能全方位覆盖场景,用户位于场景角落或面向墙壁时,无法随时观察身后地面的路线信息,需要先调整自身朝向,使地面路线出现在视野中才能继续导航,降低漫游效率,影响用户体验。
发明内容
本申请提供了一种结合关系图谱的三维展馆浏览方法,用于解决现有技术中三维展馆对展品间关联性展示不充分问题;三维展馆中展品信息与场景信息的有效结合问题;目前三维场景导航方案中引导信息占用屏幕过多空间的问题;目前已有方案存在的方向提示不确定性,本发明通过采用对称轴指向目标方位的方式提高用户对提示信息理解的准确性;目前已有方案存在的场景兼容性较差情况,本发明通过将导航信息作为固定UI形式显示于屏幕部分区域的方式,解决当人物位于场景角落或面向墙壁时导航信息不可见的技术问题。
本申请提供了一种结合关系图谱的三维展馆浏览方法,包括以下步骤:
步骤S10:展品关系的抽取和图谱构建:
步骤S11:采用正则匹配方式,抽取文物数据中所包含的所有以‘“’、‘”’、‘《’、‘》’等符号包含的专有名字或书录名称,并加入自定义词典;
步骤S12:采用中文NLP处理工具,结合自定义词典,对文物展品详情进行文物关键词抽取;
步骤S13:对上述步骤中所得处理结果进行数据清洗,得到关键词集,记录展品与关键词集的对应关系;
步骤S14:采用编辑距离算法进行展品之间的文本相似度计算,得到任意多个文本间的关联指数,以由高到低的顺序为每个展品选取若干项的推荐展品;
步骤S15:根据交互需求设计图形数据库中用于存储数据的图结构;
步骤S16:基于以上抽取结果,通过脚本批量生成Neo4j引擎的Cypher 语句生成图;
步骤S20:三维场景中图谱的渲染和交互:步骤S23:选取三维场景中的图谱元素展示样式,设定数据库查询语句,根据所获得的用户交互需求,使用在线访问的方式连接Neo4j数据库,进行关键词相关展品查询和查询所得展品的相关推荐展品推荐两项功能,采用数据库查询语句对 Neo4j数据库进行查询;
步骤S24:解析Neo4j数据库返回的查询结果,根据三维场景中图谱元素的展示样式采用FR算法实现空间中节点位置的布局计算,布局算法保证图谱节点每次移动后都能及时达到平衡态;
步骤S25:为图谱对象设置子相机,选择正交投影方式,将图谱渲染到Canvas界面;
步骤S26:用户通过坐标系转换实现与图谱节点的交互操作;
步骤S28:将展品节点信息和场景信息相结合,用户对图谱节点进行操作后,实现场景导航;采用该操作能减少场景导航交互界面对图面的干扰,获得较大面积的图谱界面,提高操作顺畅性。
步骤S30:用户自定义浏览路线的导航:将导航信息与UI样式相绑定,以当前用户所处位置为起点,以选定的文物目标所处位置为终点通过路径规划算法计算完整路径;不限制寻路算法,以Unity引擎中自带的 NavMesh寻路框架为例,根据此框架得到的寻路结果进行导航;
所用UI样式为由一个空心的圆环和一个张角大小与旋转角度都可变的弧环段组成,以圆环为主要载体,通过弧环段的不同状态和改变趋势向用户提示正确的移动方式。
优选的,步骤S30以下步骤:
步骤S31:获取路径信息中所有路径节点Pset、当前用户替身的位置 Pcur、阶段导航位置点Ptarget,用户替身朝向的法相向量Nper,以Pcur为起点, Ptarget为终点的向量Ndir,选择导航对象并计算导航路径,根据用户浏览需求输入指令更新导航目标点;
步骤S32:获取实时向量信息更新导航UI的张角_Waver,导航UI的旋转角度_Rotate;
步骤S33:分别计算X的tan值、sin值和cos值,通过旋转矩阵计算像素坐标,利用tan值生成对称着色区域后,根据像素坐标返回对应颜色;
步骤S34:根据步骤S33计算结果在交互界面上实时显示更新后的导航UI。
优选的,所述步骤S30包括以下步骤:
步骤S31:根据用户在交互界面上选取的待浏览展品清单,使用 NavMesh框架进行路径规划,获取完整的路径信息,根据目标展品的切换规则进行多个待浏览展品切换,将Rin和Rout范围内的像素设为白色,范围外像素返回透明颜色,在交互界面中获得白色圆环,根据自适应UI获取路径信息算法获取导航目标。
优选的,所述步骤S31中根据自适应UI获取路径信息算法获取导航目标包括以下步骤:
1、得到路径节点集合Pset
2、循环判断经过的节点数量;
3、是否即将走到最后一个节点;
4、如果到达最后节点;
5、计算向量v,v:=场景中目标在xz平面坐标-虚拟相机在xz平面坐标;
6、如果未到达最后节点;
7、计算向量v,v:=下一个路径拐点的平面坐标-虚拟相机在xz轴平面坐标;
8、与当前节点距离低于阈值时,经过节点数+1;
9、根据向量v信息调整UI状态。
优选的,所述步骤S32包括以下步骤:步骤S321:根据当前用户替身位置Pcur与阶段导航位置点Ptarget的距离大小,经过系数换算得到0~90 范围内的数值,以张角度数_Waver参数定义,表示圆环中高亮区域的弧度大小;渲染时根据张角度数_Waver的tan值进行换算处理,并使uv坐标处于张角度数_Waver范围内像素返回当前的_Color颜色,同时uv坐标位于_Waver范围外的像素依然保持白色;设定坐标规则使得高亮区域的颜色由中心向两侧延伸,由两侧向中心收缩,得到张角度数变化的弧环段。
优选的,所述步骤S32包括以下步骤:步骤S322:获取当前阶段的导航位置Ptarget后,计算Nper和Ndir,利用两个向量夹角的sin值和cos值得到计算uv坐标的旋转角度_Rotate,_Rotate的取值范围为0~360°。
优选的,所述步骤S33包括以下步骤:
步骤S331:为uv坐标添加偏移实现将交互界面上导航UI图标从画面中心移至交互界面的角落上;
步骤S332:当替身在场景中位置改变时,将UI图标操作区域的Color 设为第一种颜色;当替身在三维展馆场景内的朝向发生改变时,Color设为第二种颜色;当替身在三维展馆内已行进到路径上最后节点时,Ndir以导航目标的场景位置为终点,表示已到达展品附近,此时Color设为第三种特定颜色。
优选的,所述步骤S33包括以下步骤:
步骤S333:在用户到达最终的目标位置之前,系统根据设定的目标展品切换规则实时更新导航UI所有参数,绘制新的圆环图形,并向用户输出提示导航信息。
优选的,包括:步骤S27:设置图谱节点设计辅助交互组件,交互组件为圆环结构,圆环上分别设置“选择”、“展开”、“删除”选项。
优选的,所用UI样式以圆形为主要载体,以圆形中部分扇形的圆心角变换提示用户正确移动方向;以扇形半径的大小表示与目标的距离;当扇形的半径向圆心收缩,表示替身正靠近目标展品;当扇形半径向圆周方向延伸表示替身在向远离目标展品的方向移动;圆型UI的透明度大于50%。
本申请涉及专业术语解释:
图形数据库:图形数据库是NoSQL数据库的一种类型,它应用图形理论存储实体之间的关系信息。图形数据库是一种非关系型数据库,它应用图形理论存储实体之间的关系信息。最常见例子就是社会网络中人与人之间的关系。
关系型数据库:用于存储“关系型”数据的效果并不好,其查询复杂、缓慢、超出预期,而图形数据库的独特设计恰恰弥补了这个缺陷。
着色器(Shader):用来实现图像渲染的,用来替代固定渲染管线的可编辑程序。
Vertex Shader(顶点着色器):主要负责顶点的几何关系等的运算。
Pixel Shader(像素着色器):主要负责片源颜色等的计算。
NavMesh:Unity引擎自身拥有一款功能十分强大的导航寻路系统。
UV坐标:UV坐标是指所有的图象文件都是二维的一个平面。水平方向是U,垂直方向是V,通过这个平面的,二维的UV坐标系。我们可以定位图象上的任意一个像素。
深度优先搜索DFS(Depth First Search):是从初始结点开始扩展,扩展顺序总是先扩展最新产生的结点。这就使得搜索沿着状态空间某条单一的路径进行下去,直到最后的结点不能产生新结点或者找到目标结点为止。当搜索到不能产生新的结点的时候,就沿着结点产生顺序的反方向寻找可以产生新结点的结点,并扩展它,形成另一条搜索路径。
广度优先搜索BFS(Breadth First Search):也称为宽度优先搜索,它是一种先生成的结点先扩展的策略。解答树上结点的扩展是按它们在树中的层次进行的。首先生成第一层结点,同时检查目标结点是否在所生成的结点中,如果不在,则将所有的第一层结点逐一扩展,得到第二层结点,并检查第二层结点是否包含目标结点,……,对层次为n+1的任一结点进行扩展之前,必须先考虑层次完层次为n的结点的每种可能的状态。因此,对于同一层结点来说,求解问题的价值是相同的,可以按任意顺序来扩展它们。通常采用的原则是先生成的结点先扩展。
Neo4j:Neo4j是一个高性能的,NOSQL图形数据库,它将结构化数据存储在网络上而不是表中。它是一个嵌入式的、基于磁盘的、具备完全的事务特性的Java持久化引擎,但是它将结构化数据存储在网络(从数学角度叫做图)上而不是表中。Neo4j也可以被看作是一个高性能的图引擎,该引擎具有成熟数据库的所有特性。
弹簧布局算法:也称为力导引布局算法,力导引布局的方法可以产生相当优美的网络布局,并充分展现网络的整体结构及其自同构特征。该方法最早由Eades在1984年提出。基本思想是将网络看成一个顶点为钢环,边为弹簧的物理系统,系统被赋予某个初始状态以后,弹簧弹力(引力和斥力)的作用会导致钢环移动,这种运动直到系统总能量减少到最小值停止。每次循环都要计算任意一对点的斥力和相邻两个点的引力,计算复杂度为O(N2)。
Fruchterman-Reingold(FR)算法:基于弹簧算法的优化算法,是现在用途最为广泛的布点算法。在弹簧布局算法的基础上提出使用原子引力模型代替弹簧模型。该模型针对每个节点,计算其与相连节点间的吸引力,与非相连节点之间的排斥力,得到节点的最终平衡态位置。
ShaderLab:Unity中的所有Shaders文件都使用名为“ShaderLab”的声明性语言编写。Unity中创建的Shader文件是surface shader,是对vertex and fragment shaders的包装,最后的编译到底层的时候也是以vertex and fragment shaders的形式输入的。
本申请中涉及的背景技术包括:文本信息抽取技术、关系图谱构建技术、三维空间图谱布局与绘制技术、三维空间路径规划技术、图形渲染技术。其中文本信息抽取算法、关系图谱数据存储平台、三维空间图谱布局算法、三维空间路径规划算法均有多种可选方案,实际使用中可依据不同项目的需求选择对应算法。
本申请能产生的有益效果包括:
1)本申请所提供的结合关系图谱的三维展馆浏览方法,为有效满足用户通过导览高效获取信息,提出了一种将展品间的关联性与三维场景的优势相结合的信息展示方案。通过将关系图谱引入三维数字展馆,与场景交互进行充分关联,结合路径规划算法获取导航信息,设计并实现新的UI 套件,进行自适应导航信息的显示。
2)本申请所提供的结合关系图谱的三维展馆浏览方法,将知识图谱技术与三维数字展馆相结合,实现用户在场馆中与图谱的流畅交互。本申请提供方法经实验证明可大幅提升用户在博物馆内的参观效率并在一定程度增加用户交互的趣味性,提升整体使用体验。
3)本申请所提供的结合关系图谱的三维展馆浏览方法,将相关展品推荐功能和场景导航机制相结合。实现展品关联性展示的同时保护了用户在三维场景中漫游的沉浸感,更大限度地模拟线下实体博物馆的参观体验。将用于传递导航信息的标识以UI形式固定于屏幕画面的角落,用户漫游过程中时刻都能看到,兼容所有场景情况。解决目前三维场景中方向提示信息形式单一、刻板、存在视线死角的问题实现用户漫游路线自定义功能。通过与图谱的交互,用户可选择个人感兴趣的展品进行浏览,而不是按照固定路线进行漫游。
4)本申请所提供的结合关系图谱的三维展馆浏览方法,采用唯一的空心的圆环作为导航信息的全部载体,有效解决传统导航提示载体冗余,占用屏幕较多空间的问题。本发明提出的导航UI改善了目前导航方案中信息提示方式多义性问题,本发明采用对称轴原理指向目标方向,用户能够更加准确地判断移动方向。
5)本申请所提供的结合关系图谱的三维展馆浏览方法,选用TextRank 和TF-IDF算法针对展馆中的展品说明文字进行关键词抽取,采用编辑距离算法执行展品之间的相似度计算分析;选用Neo4j图形数据库作为存储关系图谱的数据库引擎;选用三维空间中的FR算法实现图谱基础元素(边和节点)的绘制;选用Unity内置NavMesh寻路框架实现路径规划,在以上技术的基础上实现本申请技术方案。
附图说明
图1为现有技术1中谷歌数字博物馆项目浏览界面截图;
图2为现有技术2中小地图导航场景交互界面截图;
图3为现有技术3中场景放置的导航3D书签截图;
图4为现有技术4中场景放置的导航3D书签截图;
图5为本申请提供的展品关联图谱构建与应用流程图;
图6为本申请提供的图谱对象生命周期示意图;
图7为本申请提供的图谱节点交互组件示意图;
图8为本申请提供的图谱节点交互效果图;a)具体实施方式中宋高宗展品关联状态主视示意图;b)具体实施方式中记载西周“乡举里选”的史料关联节点交互效果示意图;c)锁厅试操作交互效果图;
图9为本申请提供的导航UI样式示意图;a)为操作环导航状态一示意图;其中环上深色区域为浏览走向;b)为操作环导航状态二示意图;c) 为操作环导航状态三示意图;
图10为本申请提供的用户替身在场景中位置变化示意图;
图11为本申请提供的弧环段张角变化与提示方向判断示意图;a)为弧环段张角状态一;b)为弧环段张角状态二;
图12为本申请提供的导航UI绘制流程图;
图13为本申请具体实施例中自适应UI对用户位移操作反馈状态一的对比图;其中a)为该实施例的反馈状态一;b)为该实施例的反馈状态二;
图14为本申请具体实施例中自适应UI对用户旋转操作反馈状态二的对比图;a)为该实施例的反馈状态一;b)为该实施例的反馈状态二;
具体实施方式
为使本发明实施方式的目的、技术方案和优点更加清楚,下面将结合本发明实施方式中的附图,对本发明实施方式中的技术方案进行清楚、完整地描述,显然,所描述的实施方式是本发明一部分实施方式,而不是全部的实施方式。通常在此处附图中描述和示出的本发明实施方式的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本发明的实施方式的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施方式。基于本发明中的实施方式,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。
本申请中未详述的且并不用于解决本申请技术问题的技术手段,均按本领域公知常识进行设置,且多种公知常识设置方式均可实现。
参见图5~12,本申请提供的结合关系图谱的三维展馆浏览方法,包括以下步骤:
步骤S10:展品关系的抽取和图谱构建:
步骤S11:采用正则匹配方式,抽取文物数据中所包含的所有以‘“’、
‘”’、‘《’、‘》’等符号包含的专有名字或书录名称,并加入自定义词典;
步骤S12:采用中文NLP处理工具,结合自定义词典,对文物展品详情进行文物关键词抽取;
步骤S13:对上述步骤中所得处理结果进行数据清洗,得到关键词集,记录展品与关键词集的对应关系;
步骤S14:采用编辑距离算法进行展品之间的文本相似度计算,得到任意多个文本间的关联指数,以由高到低的顺序为每个展品选取若干项的推荐展品;
步骤S15:根据交互需求设计图形数据库中用于存储数据的图结构;
步骤S16:基于以上抽取结果,通过脚本批量生成Neo4j引擎的Cypher 语句生成图;
展品关系的抽取和图谱构建模块所得结果,将用于通过在线访问的方式作为Unity查询的后端数据库,用于支持用户在场景漫游时实时返回关联词查询和相似展品查询两项交互功能。步骤S10的流程图如图5所示。
步骤S20:三维场景中图谱的渲染和交互:
步骤S23:选取三维场景中的图谱元素展示样式,设定数据库查询语句,根据所获得的用户交互需求,使用在线访问的方式连接Neo4j数据库,进行关键词相关展品查询和查询所得展品的相关推荐展品推荐两项功能,采用数据库查询语句对Neo4j数据库进行查询;
步骤S24:解析Neo4j数据库返回的查询结果,根据三维场景中图谱元素的展示样式采用FR算法实现空间中节点位置的布局计算,布局算法保证图谱节点每次移动后都能及时达到平衡态;
本申请中图谱对象生命周期示意图如图6所示。
步骤S25:为图谱对象设置子相机,选择正交投影方式,将图谱渲染到Canvas界面;
步骤S26:用户通过坐标系转换实现与图谱节点的交互操作;
步骤S28:将展品节点信息和场景信息相结合,用户对图谱节点进行操作后,实现场景导航;采用该操作能减少场景导航交互界面对图面的干扰,获得较大面积的图谱界面,提高操作顺畅性。
采用上述方法所能得到的图谱节点交互效果如图8所示。
步骤S30:用户自定义浏览路线的导航:将导航信息与UI样式相绑定,以当前用户所处位置为起点,以选定的文物目标所处位置为终点通过路径规划算法计算完整路径;不限制寻路算法,以Unity引擎中自带的 NavMesh寻路框架为例,根据此框架得到的寻路结果进行导航;
所用UI样式为由一个空心的圆环和一个张角大小与旋转角度都可变的弧环段组成,以圆环为主要载体,通过弧环段的不同状态和改变趋势向用户提示正确的移动方式。
本申请通过上述方法,用户在交互界面上进行查询时即可获得三维展馆中各展品及其关联推荐展品信息,提高展品信息获取全面性,避免片面性,有效解决现有技术中存在的问题。
采用上述方法能将所获取的展品信息在场景上进行全面展示,增强浏览的互动性,便于用户在三维展馆中导航至对应展品区域进行浏览,还能减少导航界面对浏览界面的侵占,获得较大面积的浏览界面。
采用上述方法中所用UI界面,用户既能获得准确的前进方向,又能获得朝向角度,增大导航信息的获取量,同时避免现有标签导航中存在的各项问题,提高方向提示的准确性,便于用户理解导航方向,采用该UI 还能解决用户投影至场景中部分区域存在的导航信息不可见的问题,有效改善用户在三维场景内的浏览体验。
步骤S20具体实现步骤采用实时绘制片元的方式,由于开发平台为 Unity引擎,参照内置的着色器编写标准ShaderLab,实现导航UI的实时生成。
步骤S30中包括完整的路径信息中所有路径节点Pset、当前用户替身位置Pcur、阶段导航位置点Ptarget,用户替身朝向的法相向量Nper,以Pcur为起点,Ptarget为终点的向量Ndir
绘制导航UI涉及的主要参数包括外侧圆半径Rout,内侧圆半径Rin,表示张角度数_Waver,表示旋转角度_Rotate,表示颜色的_Color。
优选的,步骤S30以下步骤:
步骤S31:获取路径信息中所有路径节点Pset、当前用户替身的位置 Pcur、阶段导航位置点Ptarget,用户替身朝向的法相向量Nper,以Pcur为起点, Ptarget为终点的向量Ndir,选择导航对象并计算导航路径,根据用户浏览需求输入指令更新导航目标点;
步骤S32:获取实时向量信息更新导航UI的张角_Waver,导航UI的旋转角度_Rotate;
步骤S33:分别计算X的tan值、sin值和cos值,通过旋转矩阵计算像素坐标,利用tan值生成对称着色区域后,根据像素坐标返回对应颜色;
步骤S34:根据步骤S33计算结果在交互界面上实时显示更新后的导航UI。
优选的,步骤S30包括以下步骤:
步骤S31:根据用户在交互界面上选取的待浏览展品清单,使用 NavMesh框架进行路径规划,获取完整的路径信息,根据目标展品的切换规则进行多个待浏览展品切换,将Rin和Rout范围内的像素设为白色,范围外像素返回透明颜色,在交互界面中获得白色圆环,根据自适应UI获取路径信息算法获取导航目标。
优选的,步骤S31中根据自适应UI获取路径信息算法获取导航目标包括以下步骤:
1、得到路径节点集合Pset
2、循环判断经过的节点数量;
3、是否即将走到最后一个节点;
4、如果到达最后节点;
5、计算向量v,v:=场景中目标在xz平面坐标-虚拟相机在xz平面坐标;
6、如果未到达最后节点;
7、计算向量v,v:=下一个路径拐点的平面坐标-虚拟相机在xz轴平面坐标;
8、与当前节点距离低于阈值时,经过节点数+1;
9、根据向量v信息调整UI状态。
优选的,步骤S321:根据当前用户替身位置Pcur与阶段导航位置点 Ptarget的距离大小,经过系数换算得到0~90范围内的数值,以张角度数 _Waver参数定义,表示圆环中高亮区域的弧度大小;渲染时根据张角度数_Waver的tan值进行换算处理,并使uv坐标处于张角度数_Waver范围内像素返回当前的_Color颜色,同时uv坐标位于_Waver范围外的像素依然保持白色;设定坐标规则使得高亮区域的颜色由中心向两侧延伸,由两侧向中心收缩,得到张角度数变化的弧环段;
本申请提供上述步骤,将弧环段导航环中心对称轴始终指向正确的移动方向,能有效改善用户在三维展馆中浏览文物的导向准确性,便于操作,提高操作准确性。
优选的,所述步骤S30包括以下步骤:步骤S322:获取当前阶段的导航位置Ptarget后,计算Nper和Ndir,利用两个向量夹角的sin值和cos值得到计算uv坐标的旋转角度_Rotate,_Rotate的取值范围为0~360°;
从而通过矩阵乘法将步骤S321中得到的弧环段有色区域旋转到正确位置,旋转后弧环段对称轴指向的方向即为正确的前进方向。本申请具体实施例中以相机表示用户替身由位置1移动到位置2示意图如图10所示,导航UI样式由图10左变为图10右,同时辅助线突出弧形区域指向方向的变化。图11所示为具体实施例中,用户通过UI环径向从位置1到位置2操作时,UI环上角度前后变化结果示意图。
采用本申请提供方法能使用户在操作替身时获取准确的导航方向,提高操作导向可靠性和准确性。
优选的,步骤S33包括以下步骤:
步骤S331:为uv坐标添加偏移实现将交互界面上导航UI图标从画面中心移至交互界面的角落上;
步骤S332:当替身在场景中位置改变时,将UI图标操作区域的Color 设为第一种颜色,例如可以设为红色;当替身在三维展馆场景内的朝向发生改变时,Color设为第二种颜色,例如可以设定为黄色;当替身在三维展馆内已行进到路径上最后节点时,Ndir以导航目标的场景位置为终点,表示已到达展品附近,此时Color设为第三种特定颜色,例如可设为绿色;
上述步骤中通过采用不同的颜色表示替身在三维展馆场景中的状态、所处位置,能有效提示用户在浏览界面中所处状态,有效改善用户使用体验,增强提示效果,避免用户移动超过目标展品所处位置。不同的颜色表现可帮助用户明确各种交互操作对完成导航任务的影响。
优选的,所述步骤S33包括以下步骤:
步骤S333:在用户到达最终的目标位置之前,系统根据设定的目标展品切换规则实时更新导航UI所有参数,绘制新的圆环图形,并向用户输出提示导航信息。
采用环形UI导航图标,既能在三维展馆中展示前进方向和朝向角度,由能通过路径规划实现对展品的准确定向导航,提高用户在三维展馆场景内的准确导航,同时还能获取各展品相关展品信息,便于用户获取多个相关展品,增强用户获得展品的全面信息。从而全面多方面的改善用户在三维展馆内的浏览、操作体验。
优选的,包括:步骤S27:设置图谱节点设计辅助交互组件,交互组件为圆环结构,圆环上分别设置“选择”、“展开”、“删除”选项。如图7 所示,设置辅助交互组件后,用户可通过操作辅助交互组件节点将展品加入/移出感兴趣的展品清单,或以当前展品为根节点展开递进查询。这一步骤得到的展品清单将用作之后寻路的主要依据,用户也可选择对清单中展品分别寻路。
优选的,所用UI样式以圆形为主要载体,以圆形中部分扇形的圆心角变换提示用户正确移动方向;以扇形半径的大小表示与目标的距离;当扇形的半径向圆心收缩,表示替身正靠近目标展品;当扇形半径向圆周方向延伸表示替身在向远离目标展品的方向移动;圆型UI的透明度大于50%。
通过调节圆型UI的透明度可降低对画面的遮挡。通过采用圆形UI替代环形UI增大用户识别区域面积,提高用户对前进方向和角度的识别效果,从而提高用户在三维展馆中的前进用户体验。
实施例
本发明的开发平台:
Figure RE-GDA0003642532860000151
Figure RE-GDA0003642532860000152
该方法包括以下步骤:
本发明主要包含三部分:展品关系的抽取和图谱构建、三维场景中图谱的渲染和交互、用户自定义浏览路线的导航。
第一部分:展品信息的抽取:
Step1.采用正则匹配方式对所有以‘“’、‘”’、‘《’、‘》’等符号包含的专有名字或书录名称进行抽取并加入自定义词典。
Step2.采用中文NLP处理工具并结合自定义词典,针对文物展品详情进行文物关键词抽取。
Step3.对处理结果进行数据清洗得到关键词集,记录展品与关键词集的对应关系。
Step4.采用编辑距离算法进行展品之间的文本相似度计算,得到任意文本间的关联指数,以由高到低的顺序为每个展品选取若干项推荐展品。
Step5.根据交互需求设计图形数据库中用于存储数据的图结构。
Step6.基于以上抽取结果通过脚本批量生成Neo4j引擎的Cypher语句,生成图。
这一模块所得结果将用于通过在线访问的方式作为Unity查询的后端数据库,用于支持用户在场景漫游时实时返回关联词查询和相似展品查询两项交互功能。
这部分的完整流程图如所示。
第二部分:三维场景中图谱的渲染和交互
Step1.设计三维场景中的图谱元素的展示样式
Step2.使用在线访问的方式连接Neo4j数据库
Step3.根据交互需求,关键词相关展品查询和展品相关展品推荐两项功能,设计设计数据库查询语句。
Step4.解析数据库返回的查询结果,采用FR算法实现空间中节点位置布局计算,布局算法保证图谱节点每次移动后能及时达到平衡态。图谱对象生命周期示意图如下:
Step5.为图谱对象设置子相机,选择正交投影方式,将图谱渲染到 Canvas界面。
Step6.通过坐标系转换实现用户与图谱节点的交互操作。
Step7.为图谱节点设计辅助的交互组件,如图所示,用户支持用户通过操作节点将展品加入/移出感兴趣的展品清单,或以当前展品为根节点展开递进查询。这一步骤得到的展品清单将用作之后寻路的主要依据,用户也可选择对清单中展品分别寻路。
Step8.将展品节点信息和场景信息相结合,使用户对图谱节点的操作与场景导航机制相连接。
第三部分:用户自定义浏览路线的导航
本发明提出了将导航信息与UI样式相绑定的交互界面。首先介绍导航UI的构成,UI的样式主要由一个空心的圆环和一个张角大小与旋转角度都可变的弧环段组成。具体实施例中所得图谱节点图,以圆环为主要载体,通过弧环段的不同状态和改变趋势向用户提示正确的移动方式。
技术方案的完整流程如下:首先通过路径规划算法计算以当前位置为起点,以选定的目标对象为终点的完整路径。此处对寻路算法没有限制,应用中可依据多种衡量标准分别选择对应的最优方案。本发明中以Unity 引擎中自带的NavMesh寻路框架为例,接着根据此框架得到的寻路结果开展导航机制的设计方案说明。
具体实现步骤采用实时绘制片元的方式,由于开发平台为Unity引擎,参照内置的着色器编写标准ShaderLab,实现导航UI的实时生成。
方案主要用到的信息包括完整的路径信息中所有路径节点Pset、当前用户替身的位置Pcur、阶段导航位置点Ptarget,用户替身朝向的法相向量Nper,以Pcur为起点,Ptarget为终点的向量Ndir。绘制导航UI涉及的主要参数包括外侧圆半径Rout,内侧圆半径Rin,表示张角大小的_Waver,表示旋转角度的 _Rotate,表示颜色的_Color。详细渲染步骤如下:
Step1.根据用户选择的感兴趣展品清单使用NavMesh框架进行路径规划,获取完整的路径信息。
Step2.设计目标展品的切换规则。1
Step3.将Rin和Rout范围内的像素设为白色,范围外像素返回透明颜色,即可在屏幕中得到一个白色的圆环。
Step4.根据如下算法获取的导航目标。
Algorithm 3自适应UI获取路径信息算法
1:得到路径节点集合Pset;
2、循环判断经过的节点数量:
3、是否即将走到最后一个节点:
4、如果到达最后节点:
5、计算向量v,v:=场景中目标在xz平面坐标-虚拟相机在xz平面坐标
6、如果未到达最后节点:
7、计算向量v,v:=下一个路径拐点的平面坐标-虚拟相机在xz轴平面坐标;
8、与当前节点距离低于阈值时,经过节点数+1
9、根据向量v信息调整UI状态
Step5.根据Pcur到Ptarget的距离大小,经过系数换算,得到一个在0到90 范围内的数值,以_Waver参数定义,表示圆环中高亮区域的弧度大小。渲染时根据_Waver的tan值进行换算处理,使uv坐标处于_Waver范围内的像素返回当前的_Color颜色,同时uv坐标位于_Waver范围外的像素依然保持白色。同时通过设定坐标规则使得高亮区域的颜色由中心向两侧延伸,由两侧向中心收缩,得到张角大小灵活变化的弧环段。本发明使用这个特性,
将弧环段中心的对称轴始终指向正确的移动方向。
Step6.获取当前阶段的导航位置Ptarget后,计算Nper和Ndir,利用两个向量夹角的sin值和cos值得到计算uv坐标的旋转角度_Rotate,_Rotate的取值范围是0到360度。从而通过矩阵乘法将Step5.后得到的弧环段有色区域旋转到正确位置,旋转后弧环段对称轴指向的方向即为正确的前进方向。图中以相机表示用户替身由位置1移动到位置2,导航UI样式由图10左变为图 10右,同时辅助线突出弧环段区域指向方向的变化。
Step7.将绘制的导航图标从画面中心移动到角落,通过为uv坐标添加偏移实现。
Step8.当用户替身在场景中的位置发生改变时,Color设为第一种特定颜色,此处暂设为红色;当用户替身在场景中的朝向发生改变时,Color 设为第二种特定颜色,此处暂设为黄色;当用户已行进到路径的最后节点时,Ndir以导航目标的场景位置而非路径中的拐点坐标为终点,表示已到达展品附近,导航即将结束,此时Color设为第三种特定颜色,此处暂设为绿色。不同的颜色表现可帮助用户明确各种交互操作对完成导航任务的影响。
Step9.在用户到达最终的目标位置之前,系统根据Step2.中的逻辑规则实时更新导航UI的所有参数,绘制新的圆环图形,向用户提示导航信息。
完整开发步骤的流程图12所示:
导航UI的使用说明:
导航UI对用户的提示方式包括静态和动态两种形式。当用户未进行交互操作时,可通过导航UI中弧环段的旋转角度判断目标相对于自身的方位和距离;当用户进行移动操作时,导航UI的弧环段张角变化可及时向用户反馈当前移动方向是否正确。
自适应导航UI在用户只发生位置移动,未发生旋转时的样式调整对比如图所示,图中弧环段为红色,表示用户正在进行移动操作,弧环段对称轴几乎为垂直状态,表示目标位于正前方,弧环段张角减小表示用户当前移动方向为靠近目标方向。
自适应导航UI在用户只发生旋转,未发生位置移动时的样式调整对比如图所示,图中弧环段为黄色,表示用户正在进行旋转操作,弧环段张角大小没有发生改变,表示用户距离目标的距离没有改变,以垂直方向为0 度参照,初始弧环段对称轴约指向顺时针45度方向,表示目标为与用户当前面向方向的右前方45度方向,改变后弧环段对称轴约指向逆时针20度方向,表示用户转向了右侧,目标位于用户当前面向方向的左前方20度左右方向。
尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种结合关系图谱的三维展馆浏览方法,其特征在于,包括以下步骤:
步骤S10:展品关系的抽取和图谱构建:
步骤S11:采用正则匹配方式,抽取文物数据中所包含的所有以‘“’、‘”’、‘《’、‘》’等符号包含的专有名字或书录名称,并加入自定义词典;
步骤S12:采用中文 NLP 处理工具,结合自定义词典,对文物展品详情进行文物关键词抽取;
步骤S13:对上述步骤中所得处理结果进行数据清洗,得到关键词集,记录展品与关键词集的对应关系;
步骤S14:采用编辑距离算法进行展品之间的文本相似度计算,得到任意多个文本间的关联指数,以由高到低的顺序为每个展品选取若干项的推荐展品;
步骤S15:根据交互需求设计图形数据库中用于存储数据的图结构;
步骤S16:基于以上抽取结果,通过脚本批量生成Neo4j引擎的Cypher语句生成图;
步骤S20:三维场景中图谱的渲染和交互:
步骤S23:选取三维场景中的图谱元素展示样式,设定数据库查询语句,根据所获得的用户交互需求,使用在线访问的方式连接Neo4j数据库,进行关键词相关展品查询和查询所得展品的相关推荐展品推荐两项功能,采用数据库查询语句对Neo4j数据库进行查询;
步骤S24:解析Neo4j数据库返回的查询结果,根据三维场景中图谱元素的展示样式采用FR算法实现空间中节点位置的布局计算,布局算法保证图谱节点每次移动后都能及时达到平衡态;
步骤S25:为图谱对象设置子相机,选择正交投影方式,将图谱渲染到Canvas界面;
步骤S26:用户通过坐标系转换实现与图谱节点的交互操作;
步骤S28:将展品节点信息和场景信息相结合,用户对图谱节点进行操作后,实现场景导航;采用该操作能减少场景导航交互界面对图面的干扰,获得较大面积的图谱界面,提高操作顺畅性;
步骤S30:用户自定义浏览路线的导航:将导航信息与 UI 样式相绑定,以当前用户所处位置为起点,以选定的文物目标所处位置为终点通过路径规划算法计算完整路径;不限制寻路算法,以Unity引擎中自带的NavMesh寻路框架为例,根据此框架得到的寻路结果进行导航;
所用UI 样式为由一个空心的圆环和一个张角大小与旋转角度都可变的弧环段组成,以圆环为主要载体,通过弧环段的不同状态和改变趋势向用户提示正确的移动方式。
2.根据权利要求1所述的结合关系图谱的三维展馆浏览方法,其特征在于,步骤S30包括以下步骤:
步骤S31:获取路径信息中所有路径节点Pset、当前用户替身的位置Pcur、阶段导航位置点Ptarget,用户替身朝向的法相向量Nper,以Pcur为起点,Ptarget为终点的向量Ndir,选择导航对象并计算导航路径,根据用户浏览需求输入指令更新导航目标点;
步骤S32:获取实时向量信息更新导航UI的张角_Waver,导航UI的旋转角度_Rotate;
步骤S33:分别计算X的tan值、sin值和cos值,通过旋转矩阵计算像素坐标,利用tan值生成对称着色区域后,根据像素坐标返回对应颜色;
步骤S34:根据步骤S33计算结果在交互界面上实时显示更新后的导航UI。
3.根据权利要求2所述的结合关系图谱的三维展馆浏览方法,其特征在于,所述步骤S31还包括:根据用户在交互界面上选取的待浏览展品清单,使用NavMesh框架进行路径规划,获取完整的路径信息,根据目标展品的切换规则进行多个待浏览展品切换,将Rin和Rout范围内的像素设为白色,范围外像素返回透明颜色,在交互界面中获得白色圆环,根据自适应UI获取路径信息算法获取导航目标;
Rout为绘制导航UI的外侧圆半径,Rin为绘制导航UI的内侧圆半径。
4.根据权利要求3所述的结合关系图谱的三维展馆浏览方法,其特征在于,所述步骤S31中根据自适应UI获取路径信息算法获取导航目标包括以下步骤:
1、得到路径节点集合Pset
2、循环判断经过的节点数量;
3、是否即将走到最后一个节点;
4、如果到达最后节点;
5、计算向量v,v:=场景中目标在xz平面坐标-虚拟相机在xz平面坐标;
6、如果未到达最后节点;
7、计算向量v,v:=下一个路径拐点的平面坐标-虚拟相机在xz轴平面坐标;
8、与当前节点距离低于阈值时,经过节点数+1;
9、根据向量v信息调整UI状态。
5.根据权利要求2所述的结合关系图谱的三维展馆浏览方法,其特征在于,所述步骤S32包括以下步骤:步骤S321:根据当前用户替身位置Pcur与阶段导航位置点Ptarget的距离大小,经过系数换算得到0~90范围内的数值,以张角度数_Waver参数定义,表示圆环中高亮区域的弧度大小;渲染时根据张角度数_Waver的tan值进行换算处理,并使uv坐标处于张角度数_Waver范围内像素返回当前的_Color颜色,同时uv坐标位于_Waver范围外的像素依然保持白色;设定坐标规则使得高亮区域的颜色由中心向两侧延伸,由两侧向中心收缩,得到张角度数变化的弧环段。
6.根据权利要求5所述的结合关系图谱的三维展馆浏览方法,其特征在于,所述步骤S32包括以下步骤:步骤S322:获取当前阶段的导航位置Ptarget后,计算Nper和Ndir,利用两个向量夹角的sin值和cos值得到计算uv坐标的旋转角度_Rotate,_Rotate的取值范围为0~360°。
7.根据权利要求2所述的结合关系图谱的三维展馆浏览方法,其特征在于,所述步骤S33包括以下步骤:
步骤S331:为uv坐标添加偏移实现将交互界面上导航UI图标从画面中心移至交互界面的角落上;
步骤S332:当替身在场景中位置改变时,将UI图标操作区域的Color设为第一种颜色;当替身在三维展馆场景内的朝向发生改变时,Color设为第二种颜色;当替身在三维展馆内已行进到路径上最后节点时,Ndir以导航目标的场景位置为终点,表示已到达展品附近,此时Color设为第三种特定颜色。
8.根据权利要求2所述的结合关系图谱的三维展馆浏览方法,其特征在于,所述步骤S33包括以下步骤:
步骤S333:在用户到达最终的目标位置之前,系统根据设定的目标展品切换规则实时更新导航UI所有参数,绘制新的圆环图形,并向用户输出提示导航信息。
9.根据权利要求2所述的结合关系图谱的三维展馆浏览方法,其特征在于,包括:步骤S27:设置图谱节点设计辅助交互组件,交互组件为圆环结构,圆环上分别设置“选择”、“展开”、“删除”选项。
10.根据权利要求1所述的结合关系图谱的三维展馆浏览方法,其特征在于,所用UI 样式以圆形为主要载体,以圆形中部分扇形的圆心角变换提示用户正确移动方向;以扇形半径的大小表示与目标的距离;当扇形的半径向圆心收缩,表示替身正靠近目标展品;当扇形半径向圆周方向延伸表示替身在向远离目标展品的方向移动;圆型UI的透明度大于50%。
CN202210398708.1A 2022-04-15 2022-04-15 结合关系图谱的三维展馆浏览方法 Active CN114742980B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210398708.1A CN114742980B (zh) 2022-04-15 2022-04-15 结合关系图谱的三维展馆浏览方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210398708.1A CN114742980B (zh) 2022-04-15 2022-04-15 结合关系图谱的三维展馆浏览方法

Publications (2)

Publication Number Publication Date
CN114742980A CN114742980A (zh) 2022-07-12
CN114742980B true CN114742980B (zh) 2022-12-16

Family

ID=82281625

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210398708.1A Active CN114742980B (zh) 2022-04-15 2022-04-15 结合关系图谱的三维展馆浏览方法

Country Status (1)

Country Link
CN (1) CN114742980B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116701759B (zh) * 2023-06-06 2023-11-24 南京莱医特电子科技有限公司 一种虚拟展馆的推荐方法、装置及电子设备
CN117590986A (zh) * 2024-01-19 2024-02-23 四川蜀天信息技术有限公司 一种应用于线上虚拟展馆的导览交互方法、装置及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015096806A1 (zh) * 2013-12-29 2015-07-02 刘进 智能机姿态测定、全景影像生成及目标识别方法
CN109783039A (zh) * 2018-12-14 2019-05-21 成都四方伟业软件股份有限公司 一种应用于大数据可视化的组件式数据系统和交互方法
CN113282741A (zh) * 2021-03-24 2021-08-20 北京明略软件系统有限公司 知识图谱可视化方法、装置、设备及计算机可读介质
CN114003718A (zh) * 2021-11-08 2022-02-01 北京金堤科技有限公司 关系图谱绘制方法及其装置、计算机存储介质、电子设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6968973B2 (en) * 2003-05-31 2005-11-29 Microsoft Corporation System and process for viewing and navigating through an interactive video tour
US10176633B2 (en) * 2012-06-05 2019-01-08 Apple Inc. Integrated mapping and navigation application
CN109657068B (zh) * 2018-11-30 2021-01-05 北京航空航天大学 面向智慧博物馆的文物知识图谱生成与可视化方法
CN112492365B (zh) * 2019-09-11 2024-06-14 新加坡商欧之遥控有限公司 遥控器导航界面组件
CN113546421A (zh) * 2021-07-26 2021-10-26 广州小丑鱼信息科技有限公司 基于Jump Point Search算法的寻路方法及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015096806A1 (zh) * 2013-12-29 2015-07-02 刘进 智能机姿态测定、全景影像生成及目标识别方法
CN109783039A (zh) * 2018-12-14 2019-05-21 成都四方伟业软件股份有限公司 一种应用于大数据可视化的组件式数据系统和交互方法
CN113282741A (zh) * 2021-03-24 2021-08-20 北京明略软件系统有限公司 知识图谱可视化方法、装置、设备及计算机可读介质
CN114003718A (zh) * 2021-11-08 2022-02-01 北京金堤科技有限公司 关系图谱绘制方法及其装置、计算机存储介质、电子设备

Also Published As

Publication number Publication date
CN114742980A (zh) 2022-07-12

Similar Documents

Publication Publication Date Title
US11776199B2 (en) Virtual reality environment based manipulation of multi-layered multi-view interactive digital media representations
CN114742980B (zh) 结合关系图谱的三维展馆浏览方法
JP5324714B2 (ja) 端末装置の視野に含まれていない客体に関する情報を提供するための方法、端末装置及びコンピュータプログラム
CN105339987B (zh) 针对陆地、空中和/或众包可视化的流形的图像提取和基于图像的渲染
JP6092865B2 (ja) マップ特徴の顕著さをベースとした生成およびレンダリング
CN102402797B (zh) 生成多层地理图像以及多层地理图像的使用
Wither et al. Annotation in outdoor augmented reality
CN104335008B (zh) 导航应用程序
Hile et al. Landmark-based pedestrian navigation from collections of geotagged photos
US9330476B2 (en) Generating a modified image with additional content provided for a region thereof
US20090289937A1 (en) Multi-scale navigational visualtization
CN104335012A (zh) 导航期间的语音指令
CN105023266A (zh) 增强现实实现方法、装置和终端设备
Grasset et al. Navigation techniques in augmented and mixed reality: Crossing the virtuality continuum
Huang et al. Trip Synopsis: 60km in 60sec
Pierdicca et al. Cyberarchaeology: improved way findings for archaeological parks through mobile augmented reality
Pierdicca et al. 3D visualization tools to explore ancient architectures in South America
Devaux et al. 3D urban geovisualization: In situ augmented and mixed reality experiments
CN106030488A (zh) 用于视觉接口的入口
Martínez et al. Augmented reality to preserve hidden vestiges in historical cities. a case study
EP3304001B1 (en) Crowd-sourced interaction of browsing behavior in a 3d map
Qian et al. Design of Smart Tourism System in Urban Scenic Spots Based on Computer Virtual Reality Technology
Ma et al. Enhanced expression and interaction of paper tourism maps based on augmented reality for emergency response
Tholsgård 3D rendering and interaction in an augmented reality mobile system
CN115077522B (zh) 一种三维场景环形方位导航提示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant