CN114299809A - 方向信息显示方法、显示装置、电子设备和可读存储介质 - Google Patents
方向信息显示方法、显示装置、电子设备和可读存储介质 Download PDFInfo
- Publication number
- CN114299809A CN114299809A CN202111660819.7A CN202111660819A CN114299809A CN 114299809 A CN114299809 A CN 114299809A CN 202111660819 A CN202111660819 A CN 202111660819A CN 114299809 A CN114299809 A CN 114299809A
- Authority
- CN
- China
- Prior art keywords
- panoramic image
- angle
- coordinate system
- input
- dimensional coordinate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 78
- 239000013598 vector Substances 0.000 claims abstract description 116
- 238000002372 labelling Methods 0.000 claims abstract description 39
- 230000000007 visual effect Effects 0.000 claims description 57
- 230000004044 response Effects 0.000 claims description 9
- 238000010586 diagram Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000001360 synchronised effect Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000007667 floating Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种方向信息显示方法、显示装置、电子设备和可读存储介质,本申请属于虚拟现实技术领域。其中,方向信息显示方法,包括:在全景图中建立三维坐标系;接收针对全景图的标注输入,以及与标注输入对应的预设方向信息;根据标注输入,在三维坐标系中生成坐标向量;根据坐标向量和预设方向信息,在全景图中显示方向标识。
Description
技术领域
本申请属于虚拟现实技术领域,具体涉及方向信息显示方法、显示装置、电子设备和可读存储介质。
背景技术
现有技术中存在很多通过全景图显示方案在各种领域得到广泛应用。在相关技术中,用户查看全景图时,由于全景图本身不具备方向性,导致用户无法直观地确定全景图中内容的方向。
发明内容
本申请实施例的目的是提供一种方向信息显示方法、显示装置、电子设备和可读存储介质,实现了对全景图显示方向的效果,使用户在查看全景图时,能够准确了解当前视角下的全景的方向。
第一方面,本申请实施例提供了一种方向信息显示方法,包括:在全景图中建立三维坐标系;接收针对全景图的标注输入,以及与标注输入对应的预设方向信息;根据标注输入,在三维坐标系中生成坐标向量;根据坐标向量和预设方向信息,在全景图中显示方向标识。
第二方面,本申请实施例提供了一种方向信息显示装置,包括:建立模块,用于在全景图中建立三维坐标系;接收模块,用于接收针对全景图的标注输入,以及与标注输入对应的预设方向信息;生成模块,用于根据标注输入,在三维坐标系中生成坐标向量;显示模块,用于根据坐标向量和预设方向信息,在全景图中显示方向标识。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器和存储器,存储器存储可在处理器上运行的程序或指令,程序或指令被处理器执行时实现如第一方面的方向信息显示方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,可读存储介质上存储程序或指令,程序或指令被处理器执行时实现如第一方面的方向信息显示方法的步骤。
本申请实施例通过在全景图中建立三维坐标系,标注人员能够在建立有坐标系的全景图中标注坐标向量,以及对坐标向量设定预设方向信息。标注系统根据标注人员标注的坐标向量和预设方向信息生成方向标识,并在全景图中显示,实现了对全景图显示方向的效果,使用户在查看全景图时,能够准确了解当前视角下的全景的方向。
附图说明
图1示出了本申请实施例提供的方向信息显示方法的流程示意图之一;
图2示出了本申请实施例中标注界面的示意图;
图3示出了本申请实施例提供的方向信息显示方法的流程示意图之二;
图4示出了本申请实施例中三维坐标系的示意图;
图5示出了本申请实施例提供的方向信息显示方法的流程示意图之三;
图6示出了本申请实施例提供的方向信息显示方法的流程示意图之四;
图7示出了本申请实施例提供的方向信息显示方法的流程示意图之五;
图8示出了本申请实施例提供的方向信息显示装置的结构框图;
图9示出了本申请实施例提供的电子设备的结构框图;
图10示出了本申请实施例的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图1至图10,通过具体的实施例及其应用场景对本申请实施例提供的方向信息显示方法、显示装置、电子设备和可读存储介质进行详细地说明。
在本申请实施例提供了一种方向信息显示方法,图1示出了本申请实施例提供的方向信息显示方法的流程示意图之一,如图1所示,方向信息显示方法包括:
步骤102,在全景图中建立三维坐标系;
步骤104,接收针对全景图的标注输入,以及与标注输入对应的预设方向信息;
其中,标注输入针对全景图中的图像特征,例如:桥梁、道路、房屋等。具体来说,标注输入为标注人员根据实际经验结合对全景图中图像特征的了解,对标注输入设置预设方向信息。
示例性地,标注人员查看到全景图中存在桥梁,并且确认该桥梁的延伸方向为由南至北延伸,则标注人员沿上述桥梁绘制标注线,并对标注线的延伸方向设置预设方向信息,在标注线的起点位置标注“南”,在标注线的终点位置标注“北”。
步骤106,根据标注输入,在三维坐标系中生成坐标向量;
步骤108,根据坐标向量和预设方向信息,在全景图中显示方向标识。
本申请实施例提供的方向标注方法应用于标注系统中,标注人员将全景图输入至方向标注系统中,系统能够自动在全景图中配置相应的三维坐标系。标注人员根据经验在全景图中绘制标注线,以完成对全景图的标注输入。标注系统能够根据用户的标注输入生成坐标向量,具体来说,标注人员在全景图中绘制标注线,标注系统记录标注线的起点和终点,以及标注线的延伸方向,根据标注线的起点和终点能够确定标注线的坐标,并根据标注线的延伸方向能够确定标注线的坐标向量,坐标向量不仅能够反映出标注线的位置,还能够反映出标注线的方向。标注人员在全景图中对标注线绘制完成后,输入与标注线相对应的预设方向信息,系统根据预设方向信息和标注线对应的坐标向量在全景图中显示方向标识。
本申请实施例中的坐标向量在三维坐标系中不仅能够体现出标注线的位置,还能够体现出标注线的延伸方向。标注系统根据用户输入的预设方向信息能够对在当前视角下的标注线的延伸方向赋予实际的方向含义。例如:用户在当前的三维坐标系中通过绘制标注线生成坐标向量,将坐标向量指向的方向赋予“北”的含义,则标注系统能够根据坐标向量在三维坐标系中的位置,对整个全景图的方向进行标记,在显示全景图时,根据标记得到的方向显示方向标识。其中,方向标识可选为指南针形式的标识。
图2示出了本申请实施例中标注界面的示意图,图2中显示有全景图202,在全景图202中,用户通过标注输入生成坐标向量204,并在输入框中输入预设方向信息。标注系统根据输入框中的预设方向信息和坐标向量204,在全景图中显示方向标识206。
本申请实施例通过在全景图中建立三维坐标系,标注人员能够在建立有坐标系的全景图中标注坐标向量,以及对坐标向量设定预设方向信息。标注系统根据标注人员标注的坐标向量和预设方向信息生成方向标识,并在全景图中显示,实现了对全景图显示方向的效果,使用户在查看全景图时,能够准确了解当前视角下的全景的方向。
在本申请的一些实施例中,图3示出了本申请实施例提供的方向信息显示方法的流程示意图之二,如图3所示,在全景图中建立三维坐标系,包括:
步骤302,获取全景图在三维坐标系中的初始视角;
步骤304,在初始视角下,对全景图建立三维坐标系。
本申请实施例中,标注人员通过渲染全景图能够调整全景图的显示视角,在对全景图建立三维坐标系之前,需要对全景图相对于三维坐标系的初始视角进行确定,即全景图处于零点位置时的视角。标注人员向标注系统输入针对全景图的视角调整输入,以使全景图处于标注人员标定的初始视角下,在全景图中建立三维坐标系。
具体来说,在初始视角下,将全景图的相机点位与三维坐标系的零点对齐,并将三维坐标系设置在全景图中,完成在全景图中建立三维坐标系。在对全景图建立完成三维坐标系后,能够相对三维坐标系旋转全景图,并且获取全景图在三维坐标系中的旋转角度。
示例性地,图4示出了本申请实施例中三维坐标系的示意图,在全景图中建立三维笛卡尔坐标系,具体来说,将全景图中的相机(模拟人眼在三维空间中观察世界而设置的虚拟相机)作为为三维坐标系的中心点,坐标原点为全景图中的相机位置,显示在屏幕的中心。XOY平面与屏幕平行,XOZ平面垂直于屏幕,垂直于屏幕的方向为Z轴正方向
本申请实施例中,通过对全景图设置初始视角,并在初始视角下在全景图中建立三维坐标系,能够实现获取全景图在三维坐标系中的旋转角度,在显示方向标识时,能够根据全景图的方向自动调整方向标识的显示方向,实现用户在调整全景图方向的过程中,方向标识随着全景图旋转而旋转显示。
在本申请的一些实施例中,图5示出了本申请实施例提供的方向信息显示方法的流程示意图之三,如图5所示,接收针对全景图的标注输入之前,还包括:
步骤502,接收针对全景图的旋转输入;
步骤504,根据旋转输入和初始视角,确定全景图在三维坐标系中的标注视角。
本申请实施例中,在全景图中建立三维坐标系后,全景图能够相对三维坐标系旋转。标注人员在对全景图执行标注输入之前,针对全景图执行旋转输入,全景图响应于用户的旋转输入相对三维坐标系旋转。标注人员能够依据自身的标注习惯针对全景图执行旋转输入,标注系统根据标注人员执行的旋转输入和全景图的初始视角将全景图旋转至标注人员设置的标注视角。标注视角为标注人员根据实际需要设置的视角,标注系统将全景图调整至标注视角后,能够确定全景图相对三维坐标系的旋转角度,以使标注人员在标注视角对全景图进行标注完成后,获取全景图在初始视角下的方向信息。
值得说明的是,全景图相对三维坐标系旋转为全景图能够在三维空间中沿水平方向与竖直方向进行交互旋转。
本申请实施例中,标注人员能够将显示在初始视角下的全景图进行旋转,以使全景图显示在标注视角下,并且标注视角由标注人员根据实际需要设置的视角,实现了标注人员能够在合适的标注视角下对全景图进行标注处理,提高了标注人员对全景图标注坐标向量的准确性。
在本申请的一些实施例中,图6示出了本申请实施例提供的方向信息显示方法的流程示意图之四,如图6所示,根据坐标向量和预设方向信息,在全景图中显示方向标识,包括:
步骤602,在标注视角下,获取坐标向量相对三维坐标系原点的第一角度;
步骤604,获取全景图在标注视角下相对三维坐标系旋转的第二角度;
步骤606,根据第一角度和第二角度,确定方向标识在初始视角下相对三维坐标系的第三角度;
步骤608,根据第三角度和预设方向信息,在初始视角下将方向标识显示在全景图中。
本申请实施例中,标注人员在标注视角下对全景图进行标注得到坐标向量,标注系统能够确定在标注视角下得到的坐标向量与三维坐标系的原点的第一角度,并能够获取在标注视角下全景图相对三维坐标系旋转的第二角度,由于全景图旋转过程中是以三维坐标系的原点进行旋转,因此通过第一角度和第二角度能够计算得到坐标向量在初始视角下相对三维坐标系的第三角度。在确定在初始视角下的坐标向量相对三维坐标系的第三角度后,能够根据第三角度在初始视角下的全景图中显示坐标向量,并将预设方向信息配置在坐标向量中。使标注人员能够在标注视角下标注坐标向量,将在标注视角下的标注完成的坐标向量转换至初始视角下,在初始视角下根据预设方向信息显示方向标识。
具体来说,标注系统记录在标注视角下标注向量相对三维坐标系的第一角度compassAngel,以及标注视角下全景图相对三维坐标系旋转的第二角度cameraAngel,通过以下公式能够计算得到在初始视角下的坐标向量与三维坐标系之间的第三角度offset,公式具体如下:
offset=compassAngel-cameraAngel
其中,compassAngel为第一角度,cameraAngel为第二角度,offset为第三角度。
本申请实施例中,用户在标注视角下对坐标向量进行标注,通过标注系统记录标注视角下的坐标向量和全景图相对三维坐标系的第一角度和第二角度,并根据第一角度和第二角度计算得到坐标向量相对三维坐标系的第三角度,通过第三角度和预设方向信息能够在初始视角下显示方向标识。实现了用户在任意视角下对方向标识进行标注都能够在初始视角下对方向标识进行显示。
在本申请的一些实施例中,图7示出了本申请实施例提供的方向信息显示方法的流程示意图之五,如图7所示,根据坐标向量和预设方向信息,在全景图中显示方向标识之后,还包括:
步骤702,获取全景图在三维坐标系中的观察视角;
步骤704,获取全景图在观察视角下相对三维坐标系旋转的第四角度;
步骤706,根据第三角度和第四角度,在观察视角下将方向标识显示在全景图中。
本申请实施例中,在标注人员在全景图中对坐标向量标注完成之后,用户在应用中能够查看全景图,在查看全景图的过程中用户能够自由切换全景图的查看视角。在用户输入全景图的观察视角后,标注系统能够计算得到全景图在观察视角下相对三维坐标系的第四角度,即用户在初始视角下旋转全景图的旋转角度。标注系统能够根据用户的第四角度和第三角度,在用户的观察视角下显示方向标识。
本申请实施例通过在全景图中建立三维坐标系,并根据方向标识对应的坐标向量在初始三维坐标系中的第三角度能够对用户观察视角下的方向标识的显示角度进行调整,实现了用户在任意角度下观察全景图均能够通过方向标识获取正确的方向信息。
在本申请的一些实施例中,根据标注输入,在三维坐标系中生成坐标向量,包括:根据标注输入确定第一坐标点和第二坐标点;根据第一坐标点和第二坐标点生成坐标向量。
在本申请实施例中,标注人员在全景图中绘制标注线,将标注线的起点作为第一标注点,将标注闲的终点作为第二标注点。在获取第一标注点和第二标注点的坐标信息后,根据第一标注点和第二标注点能够生成坐标向量。
本申请实施例中,通过用户绘制的标注线能够确定标注输入对应的第一坐标点和第二坐标点,并通过第一坐标点和第二坐标点之间进行连线,能够得到坐标向量。
在本申请的一些实施例中,接收针对全景图的标注输入之前,还包括:识别全景图中的目标图像特征;根据目标图像特征,在全景图中显示标注提示信息。
本申请实施例中,标注系统中配置有图像识别单元,图像识别单元能够对全景图中的图像特征进行识别。在全景图中建立三维坐标系后,标注系统通过图像识别单元对全景图中目标图像特征进行识别,在识别到目标图像特征之后,生成并显示与目标图像之间相关联的提示信息。
其中,图像识别单元可选为图像识别模型,通过训练图像识别模型,使图像识别模型能够自动识别全景图中的目标图像特征,并根据识别到的目标图像特征在全景图中显示标注提示信息。
示例性地,训练图像识别模型,使图像识别模型能够识别全景图中的“河道”、“桥梁”和“道路”的图像特征,即目标图像特征为“河道”、“桥梁”和“道路”。在全景图中建立三维模型后,图像识别模型能够自动对目标图像特征进行识别,并根据识别到的目标图像特征显示标注提示信息,以对标注人员进行提示。
本申请实施例中,通过图像识别技术对全景图中的目标图像特征进行图像识别。在标注人员对全景图进行标注之前,标注系统能够对标注人员可能选择的标注参照物通过标注提示信息进行提示,简化了标注人员执行标注输入的操作步骤。
在本申请的一些实施例中,根据图像特征,在全景图中生成标注提示信息,包括:在全景图中将目标图像特征高亮显示;和/或获取目标图像特征的特征信息;将特征信息显示在全景图中,特征信息的显示位置与图像特征的显示位置相对应。
本申请实施例中,在全景图中显示的标注提示信息包括多种不同的标注提示信息。其中可选为,将全景图中的目标图像特征通过高亮的方式进行显示,标注人员在查看到高亮显示的目标图像特征时,可以直接选择对该目标图像特征执行标注输入。还可选为,在全景图中的目标图像特征位置显示相应的标注提示信息,标注提示信息的显示位置与目标图像特征的显示位置相对应。
示例性地,在识别到全景图中的目标图像特征之后,将标注提示信息以悬浮窗的形式显示在目标图像特征上,并在悬浮窗内显示有该目标图像特征的信息,如“河道”。标注人员通过查看悬浮窗的内容,能够确定目标图像特征为河道。
本申请实施例通过标注信息对全景图中的目标图像特征进行标注,便于用户在查看全景图的过程中,确定全景图中的目标图像特征。
在本申请的一些实施例中,接收针对全景图的标注输入,包括:在全景图中显示有标注提示信息的情况下,接收针对标注提示信息的选择输入;根据标注输入,在三维坐标系中生成坐标向量,包括:响应于选择输入,选择目标图像特征;根据目标图像特征的图形形状特征标注坐标向量。
本申请实施例中,在全景图中显示有目标图像特征的情况下,标注人员能够通过选择目标图像特征完成对全景图的标注输入。由于全景图中的河道、桥梁等图像特征均呈直线,且容易判别其延伸方向,因此标注人员通常通过人眼识别全景图中的目标图像特征,进行绘制标注线。在标注系统自动识别到目标图像特征的情况下,标注人员通过选择显示在全景图中的标注提示信息选择目标图像特征,并根据目标图像特征的图形形状特征自动在全景图中生成标注线,从而在三维坐标系中生成坐标向量。
本申请实施例通过标注人员选择标注提示信息,能够选择标注系统自动识别得到目标图像特征,并使标注系统自动对坐标向量进行标注,标注人员仅需要针对生成的坐标向量输入预设方向信息,即可完成对全景图中方向信息的标注,以在全景图中显示方向标识。
在本申请的一些实施例中,根据目标图像特征在全景图中的延伸方向标注坐标向量之后,还包括:识别坐标向量中至少两个可调坐标点;响应于针对至少两个可调坐标点的调整输入,对至少两个可调坐标点进行调整。
本申请实施例中,标注系统自动标注坐标向量后,在坐标向量中显示至少两个可调的坐标点。标注人员针对可调坐标点执行调整输入,能够对坐标向量的显示方向进行修改。
示例性地,系统自动识别到的坐标向量后,在坐标向量对应的标注线上显示两个可调地坐标点,标注人员通过拖动该坐标点,能够调整坐标向量的朝向。
本申请实施例中,标注系统自动生成坐标向量后,显示可调坐标点,使标注人员能够根据实际需求调整识别生成的坐标向量的朝向,进一步保证了坐标向量标注的准确性。
本申请实施例提供的方向信息显示方法,执行主体可以为方向信息显示装置。本申请实施例中以方向信息显示装置执行上述方向信息显示方法为例,说明本申请实施例提供的方向信息显示装置。
在本申请的一些实施例中提供了一种方向信息显示装置,图8示出了本申请实施例提供的方向信息显示装置的结构框图,如图8所示,方向信息显示装置800,包括:
建立模块802,用于在全景图中建立三维坐标系;
接收模块804,用于接收针对所述全景图的标注输入,以及与所述标注输入对应的预设方向信息;
生成模块806,用于根据所述标注输入,在所述三维坐标系中生成坐标向量;
显示模块808,用于根据所述坐标向量和预设方向信息,在所述全景图中显示方向标识。
本申请实施例通过在全景图中建立三维坐标系,标注人员能够在建立有坐标系的全景图中标注坐标向量,以及对坐标向量设定预设方向信息。标注系统根据标注人员标注的坐标向量和预设方向信息生成方向标识,并在全景图中显示,实现了对全景图显示方向的效果,使用户在查看全景图时,能够准确了解当前视角下的全景的方向。
在本申请的一些实施例中,方向信息显示装置800,还包括:
获取模块,用于获取全景图在三维坐标系中的初始视角;
建立模块802,还用于在初始视角下,对全景图建立三维坐标系。
本申请实施例中,通过对全景图设置初始视角,并在初始视角下在全景图中建立三维坐标系,能够实现获取全景图在三维坐标系中的旋转角度,在显示方向标识时,能够根据全景图的方向自动调整方向标识的显示方向,实现用户在调整全景图方向的过程中,方向标识随着全景图旋转而旋转显示。
在本申请的一些实施例中,接收模块804,还用于接收针对全景图的旋转输入;
方向信息显示装置800,包括:
确定模块,用于根据旋转输入和初始视角,确定全景图在三维坐标系中的标注视角。
本申请实施例中,标注人员能够将显示在初始视角下的全景图进行旋转,以使全景图显示在标注视角下,并且标注视角由标注人员根据实际需要设置的视角,实现了标注人员能够在合适的标注视角下对全景图进行标注处理,提高了标注人员对全景图标注坐标向量的准确性。
在本申请的一些实施例中,获取模块,还用于在标注视角下,获取坐标向量相对三维坐标系原点的第一角度;
获取模块,还用于获取全景图在标注视角下相对三维坐标系旋转的第二角度;
确定模块,还用于根据第一角度和第二角度,确定方向标识在初始视角下相对三维坐标系的第三角度;
显示模块808,还用于根据第三角度和预设方向信息,在初始视角下将方向标识显示在全景图中。
本申请实施例中,用户在标注视角下对坐标向量进行标注,通过标注系统记录标注视角下的坐标向量和全景图相对三维坐标系的第一角度和第二角度,并根据第一角度和第二角度计算得到坐标向量相对三维坐标系的第三角度,通过第三角度和预设方向信息能够在初始视角下显示方向标识。实现了用户在任意视角下对方向标识进行标注都能够在初始视角下对方向标识进行显示。
在本申请的一些实施例中,获取模块,还用于获取全景图在三维坐标系中的观察视角;
获取模块,还用于获取全景图在观察视角下相对三维坐标系旋转的第四角度;
显示模块808,还用于根据第三角度和第四角度,在观察视角下将方向标识显示在全景图中。
本申请实施例通过在全景图中建立三维坐标系,并根据方向标识对应的坐标向量在初始三维坐标系中的第三角度能够对用户观察视角下的方向标识的显示角度进行调整,实现了用户在任意角度下观察全景图均能够通过方向标识获取正确的方向信息。
在本申请的一些实施例中,确定模块,还用于根据标注输入确定第一坐标点和第二坐标点;
生成模块806,还用于根据第一坐标点和第二坐标点生成坐标向量。
本申请实施例中,通过用户绘制的标注线能够确定标注输入对应的第一坐标点和第二坐标点,并通过第一坐标点和第二坐标点之间进行连线,能够得到坐标向量。
在本申请的一些实施例中,方向信息显示装置800,包括:
识别模块,用于识别全景图中的目标图像特征;
显示模块808,还用于根据目标图像特征,在全景图中显示标注提示信息。
本申请实施例中,通过图像识别技术对全景图中的目标图像特征进行图像识别。在标注人员对全景图进行标注之前,标注系统能够对标注人员可能选择的标注参照物通过标注提示信息进行提示,简化了标注人员执行标注输入的操作步骤。
在本申请的一些实施例中,方向信息显示装置800,包括:
显示模块808,还用于在全景图中将目标图像特征高亮显示;和/或
获取模块,还用于获取目标图像特征的特征信息;
显示模块808,还用于将特征信息显示在全景图中,特征信息的显示位置与图像特征的显示位置相对应。
本申请实施例通过标注信息对全景图中的目标图像特征进行标注,便于用户在查看全景图的过程中,确定全景图中的目标图像特征。
在本申请的一些实施例中,接收模块804,还用于在全景图中显示有标注提示信息的情况下,接收针对标注提示信息的选择输入;
方向信息显示装置800,包括:
选择模块,用于响应于选择输入,选择目标图像特征;
标注模块,用于根据目标图像特征的图形形状特征标注坐标向量。
本申请实施例通过标注人员选择标注提示信息,能够选择标注系统自动识别得到目标图像特征,并使标注系统自动对坐标向量进行标注,标注人员仅需要针对生成的坐标向量输入预设方向信息,即可完成对全景图中方向信息的标注,以在全景图中显示方向标识。
在本申请的一些实施例中,识别模块,还用于识别坐标向量中至少两个可调坐标点;
方向信息显示装置800,包括:
调整模块,用于响应于针对至少两个可调坐标点的调整输入,对至少两个可调坐标点进行调整。
本申请实施例中,标注系统自动生成坐标向量后,显示可调坐标点,使标注人员能够根据实际需求调整识别生成的坐标向量的朝向,进一步保证了坐标向量标注的准确性。
本申请实施例中的方向信息显示装置可以是电子设备,也可以是电子设备中的部件,例如集成电路或芯片。该电子设备可以是终端,也可以为除终端之外的其他设备。示例性的,电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device,MID)、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobilepersonal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等,还可以为服务器、网络附属存储器(Network Attached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的方向信息显示装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为iOS操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的方向信息显示装置能够实现上述方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选地,如图9所示,本申请实施例还提供一种电子设备900,电子设备900包括处理器902和存储器904,存储器904上存储有可在处理器902上运行的程序或指令,该程序或指令被处理器902执行时实现上述方法实施例的各个步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述的移动电子设备和非移动电子设备。
图10为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备1000包括但不限于:射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、以及处理器1010等部件。
本领域技术人员可以理解,电子设备1000还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器1010逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图10中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器1010,用于在全景图中建立三维坐标系;
用户输入单元1007,用于接收针对所述全景图的标注输入,以及与所述标注输入对应的预设方向信息;
处理器1010,用于根据所述标注输入,在所述三维坐标系中生成坐标向量;
显示单元1006,用于根据所述坐标向量和预设方向信息,在所述全景图中显示方向标识。
本申请实施例通过在全景图中建立三维坐标系,标注人员能够在建立有坐标系的全景图中标注坐标向量,以及对坐标向量设定预设方向信息。标注系统根据标注人员标注的坐标向量和预设方向信息生成方向标识,并在全景图中显示,实现了对全景图显示方向的效果,使用户在查看全景图时,能够准确了解当前视角下的全景的方向。
进一步地,处理器1010,用于获取全景图在三维坐标系中的初始视角;
处理器1010,用于在初始视角下,对全景图建立三维坐标系。
本申请实施例中,通过对全景图设置初始视角,并在初始视角下在全景图中建立三维坐标系,能够实现获取全景图在三维坐标系中的旋转角度,在显示方向标识时,能够根据全景图的方向自动调整方向标识的显示方向,实现用户在调整全景图方向的过程中,方向标识随着全景图旋转而旋转显示。
进一步地,用户输入单元1007,用于接收针对全景图的旋转输入;
处理器1010,用于根据旋转输入和初始视角,确定全景图在三维坐标系中的标注视角。
本申请实施例中,标注人员能够将显示在初始视角下的全景图进行旋转,以使全景图显示在标注视角下,并且标注视角由标注人员根据实际需要设置的视角,实现了标注人员能够在合适的标注视角下对全景图进行标注处理,提高了标注人员对全景图标注坐标向量的准确性。
进一步地,处理器1010,用于在标注视角下,获取坐标向量相对三维坐标系原点的第一角度;
处理器1010,用于获取全景图在标注视角下相对三维坐标系旋转的第二角度;
处理器1010,用于根据第一角度和第二角度,确定方向标识在初始视角下相对三维坐标系的第三角度;
显示单元1006,用于根据第三角度和预设方向信息,在初始视角下将方向标识显示在全景图中。
本申请实施例中,用户在标注视角下对坐标向量进行标注,通过标注系统记录标注视角下的坐标向量和全景图相对三维坐标系的第一角度和第二角度,并根据第一角度和第二角度计算得到坐标向量相对三维坐标系的第三角度,通过第三角度和预设方向信息能够在初始视角下显示方向标识。实现了用户在任意视角下对方向标识进行标注都能够在初始视角下对方向标识进行显示。
进一步地,处理器1010,用于获取全景图在三维坐标系中的观察视角;
处理器1010,用于获取全景图在观察视角下相对三维坐标系旋转的第四角度;
显示单元1006,用于根据第三角度和第四角度,在观察视角下将方向标识显示在全景图中。
本申请实施例通过在全景图中建立三维坐标系,并根据方向标识对应的坐标向量在初始三维坐标系中的第三角度能够对用户观察视角下的方向标识的显示角度进行调整,实现了用户在任意角度下观察全景图均能够通过方向标识获取正确的方向信息。
进一步地,处理器1010,用于根据标注输入确定第一坐标点和第二坐标点;
处理器1010,用于根据第一坐标点和第二坐标点生成坐标向量。
本申请实施例中,通过用户绘制的标注线能够确定标注输入对应的第一坐标点和第二坐标点,并通过第一坐标点和第二坐标点之间进行连线,能够得到坐标向量。
进一步地,处理器1010,用于识别全景图中的目标图像特征;
显示单元1006,用于根据目标图像特征,在全景图中显示标注提示信息。
本申请实施例中,通过图像识别技术对全景图中的目标图像特征进行图像识别。在标注人员对全景图进行标注之前,标注系统能够对标注人员可能选择的标注参照物通过标注提示信息进行提示,简化了标注人员执行标注输入的操作步骤。
进一步地,显示单元1006,用于在全景图中将目标图像特征高亮显示;和/或
处理器1010,用于获取目标图像特征的特征信息;
显示单元1006,用于将特征信息显示在全景图中,特征信息的显示位置与图像特征的显示位置相对应。
本申请实施例通过标注信息对全景图中的目标图像特征进行标注,便于用户在查看全景图的过程中,确定全景图中的目标图像特征。
进一步地,用户输入单元1007,用于在全景图中显示有标注提示信息的情况下,接收针对标注提示信息的选择输入;
处理器1010,用于响应于选择输入,选择目标图像特征;
处理器1010,用于根据目标图像特征的图形形状特征标注坐标向量。
本申请实施例通过标注人员选择标注提示信息,能够选择标注系统自动识别得到目标图像特征,并使标注系统自动对坐标向量进行标注,标注人员仅需要针对生成的坐标向量输入预设方向信息,即可完成对全景图中方向信息的标注,以在全景图中显示方向标识。
进一步地,处理器1010,用于识别坐标向量中至少两个可调坐标点;
处理器1010,用于响应于针对至少两个可调坐标点的调整输入,对至少两个可调坐标点进行调整。
本申请实施例中,标注系统自动生成坐标向量后,显示可调坐标点,使标注人员能够根据实际需求调整识别生成的坐标向量的朝向,进一步保证了坐标向量标注的准确性。
应理解的是,本申请实施例中,输入单元1004可以包括图形处理器(GraphicsProcessing Unit,GPU)10041和麦克风10042,图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板10061。用户输入单元1007包括触控面板10071以及其他输入设备10072中的至少一种。触控面板10071,也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
存储器1009可用于存储软件程序以及各种数据。存储器1009可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器1009可以包括易失性存储器或非易失性存储器,或者,存储器1009可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本申请实施例中的存储器1009包括但不限于这些和任意其它适合类型的存储器。
处理器1010可包括一个或多个处理单元;可选的,处理器1010集成应用处理器和调制解调处理器,其中,应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作,调制解调处理器主要处理无线通信信号,如基带处理器。可以理解的是,上述调制解调处理器也可以不集成到处理器1010中。
本申请实施例还提供一种可读存储介质,可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述方向信息显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,处理器为上述实施例中的电子设备中的处理器。可读存储介质,包括计算机可读存储介质,如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。
本申请实施例另提供了一种芯片,芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述方向信息显示方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (13)
1.一种方向信息显示方法,其特征在于,包括:
在全景图中建立三维坐标系;
接收针对所述全景图的标注输入,以及与所述标注输入对应的预设方向信息;
根据所述标注输入,在所述三维坐标系中生成坐标向量;
根据所述坐标向量和预设方向信息,在所述全景图中显示方向标识。
2.根据权利要求1所述的方向信息显示方法,其特征在于,所述在全景图中建立三维坐标系,包括:
获取所述全景图在所述三维坐标系中的初始视角;
在所述初始视角下,对所述全景图建立三维坐标系。
3.根据权利要求2所述的方向信息显示方法,其特征在于,所述接收针对所述全景图的标注输入之前,还包括:
接收针对所述全景图的旋转输入;
根据所述旋转输入和初始视角,确定所述全景图在所述三维坐标系中的标注视角。
4.根据权利要求3所述的方向信息显示方法,其特征在于,所述根据所述坐标向量和预设方向信息,在所述全景图中显示方向标识,包括:
在所述标注视角下,获取所述坐标向量相对所述三维坐标系的原点的第一角度;
获取所述全景图在所述标注视角下相对三维坐标系旋转的第二角度;
根据所述第一角度和所述第二角度,确定所述方向标识在所述初始视角下相对所述三维坐标系的第三角度;
根据所述第三角度和所述预设方向信息,在所述初始视角下将所述方向标识显示在所述全景图中。
5.根据权利要求4所述的方向信息显示方法,其特征在于,所述根据所述坐标向量和预设方向信息,在所述全景图中显示方向标识之后,还包括:
获取所述全景图在所述三维坐标系中的观察视角;
获取所述全景图在所述观察视角下相对三维坐标系旋转的第四角度;
根据所述第三角度和所述第四角度,在所述观察视角下将所述方向标识显示在所述全景图中。
6.根据权利要求1所述的方向信息显示方法,其特征在于,所述根据所述标注输入,在所述三维坐标系中生成坐标向量,包括:
根据所述标注输入确定第一坐标点和第二坐标点;
根据所述第一坐标点和所述第二坐标点生成坐标向量。
7.根据权利要求1至6中任一项所述的方向信息显示方法,其特征在于,所述接收针对所述全景图的标注输入之前,还包括:
识别所述全景图中的目标图像特征;
根据所述目标图像特征,在所述全景图中显示标注提示信息。
8.根据权利要求7所述的方向信息显示方法,其特征在于,所述根据所述图像特征,在所述全景图中显示标注提示信息,包括:
在所述全景图中将所述目标图像特征高亮显示;和/或
获取所述目标图像特征的特征信息;
将所述特征信息显示在所述全景图中,所述特征信息的显示位置与所述图像特征的显示位置相对应。
9.根据权利要求7所述的方向信息显示方法,其特征在于,所述接收针对所述全景图的标注输入,包括:
在所述全景图中显示有所述标注提示信息的情况下,接收针对所述标注提示信息的选择输入;
所述根据所述标注输入,在所述三维坐标系中生成坐标向量,包括:
响应于所述选择输入,选择目标图像特征;
根据所述目标图像特征的图形形状特征标注所述坐标向量。
10.根据权利要求9所述的方向信息显示方法,其特征在于,所述根据所述目标图像特征在所述全景图中的延伸方向标注所述坐标向量之后,还包括:
识别所述坐标向量中至少两个可调坐标点;
响应于针对所述至少两个可调坐标点的调整输入,对所述至少两个可调坐标点进行调整。
11.一种方向信息显示装置,其特征在于,包括:
建立模块,用于在全景图中建立三维坐标系;
接收模块,用于接收针对所述全景图的标注输入,以及与所述标注输入对应的预设方向信息;
生成模块,用于根据所述标注输入,在所述三维坐标系中生成坐标向量;
显示模块,用于根据所述坐标向量和预设方向信息,在所述全景图中显示方向标识。
12.一种电子设备,其特征在于,包括:
存储器,其上存储有程序或指令;
处理器,用于执行所述程序或指令时实现如权利要求1至10中任一项所述的方向信息显示方法的步骤。
13.一种可读存储介质,其上存储有程序或指令,其特征在于,所述程序或指令被处理器执行时实现如权利要求1至10中任一项所述的方向信息显示方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111660819.7A CN114299809B (zh) | 2021-12-30 | 2021-12-30 | 方向信息显示方法、显示装置、电子设备和可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111660819.7A CN114299809B (zh) | 2021-12-30 | 2021-12-30 | 方向信息显示方法、显示装置、电子设备和可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114299809A true CN114299809A (zh) | 2022-04-08 |
CN114299809B CN114299809B (zh) | 2024-03-22 |
Family
ID=80974292
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111660819.7A Active CN114299809B (zh) | 2021-12-30 | 2021-12-30 | 方向信息显示方法、显示装置、电子设备和可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114299809B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115879186A (zh) * | 2023-03-01 | 2023-03-31 | 北京天圣华信息技术有限责任公司 | 一种件号放置位置确定方法、装置、设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104484327A (zh) * | 2014-10-09 | 2015-04-01 | 上海杰图天下网络科技有限公司 | 一种项目工程的环境展示方法 |
CN109063123A (zh) * | 2018-08-01 | 2018-12-21 | 深圳市城市公共安全技术研究院有限公司 | 全景视频的标注添加方法及系统 |
CN111383271A (zh) * | 2018-12-29 | 2020-07-07 | 阿里巴巴集团控股有限公司 | 一种基于图片的方向标注方法及装置 |
CN112017304A (zh) * | 2020-09-18 | 2020-12-01 | 北京百度网讯科技有限公司 | 用于呈现增强现实数据的方法、装置、电子设备及介质 |
CN113593052A (zh) * | 2021-08-06 | 2021-11-02 | 北京房江湖科技有限公司 | 场景朝向确定方法及标记方法 |
-
2021
- 2021-12-30 CN CN202111660819.7A patent/CN114299809B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104484327A (zh) * | 2014-10-09 | 2015-04-01 | 上海杰图天下网络科技有限公司 | 一种项目工程的环境展示方法 |
CN109063123A (zh) * | 2018-08-01 | 2018-12-21 | 深圳市城市公共安全技术研究院有限公司 | 全景视频的标注添加方法及系统 |
CN111383271A (zh) * | 2018-12-29 | 2020-07-07 | 阿里巴巴集团控股有限公司 | 一种基于图片的方向标注方法及装置 |
CN112017304A (zh) * | 2020-09-18 | 2020-12-01 | 北京百度网讯科技有限公司 | 用于呈现增强现实数据的方法、装置、电子设备及介质 |
CN113593052A (zh) * | 2021-08-06 | 2021-11-02 | 北京房江湖科技有限公司 | 场景朝向确定方法及标记方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115879186A (zh) * | 2023-03-01 | 2023-03-31 | 北京天圣华信息技术有限责任公司 | 一种件号放置位置确定方法、装置、设备及存储介质 |
CN115879186B (zh) * | 2023-03-01 | 2023-05-12 | 北京天圣华信息技术有限责任公司 | 一种件号放置位置确定方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114299809B (zh) | 2024-03-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107491174B (zh) | 用于远程协助的方法、装置、系统及电子设备 | |
CN110457414B (zh) | 离线地图处理、虚拟对象显示方法、装置、介质和设备 | |
US9503681B1 (en) | Simulated transparent display with augmented reality for remote collaboration | |
US10360696B2 (en) | Image processing apparatus, image processing method, and program | |
CN108876934B (zh) | 关键点标注方法、装置和系统及存储介质 | |
US11231845B2 (en) | Display adaptation method and apparatus for application, and storage medium | |
JP7337104B2 (ja) | 拡張現実によるモデル動画多平面インタラクション方法、装置、デバイス及び記憶媒体 | |
US8850337B2 (en) | Information processing device, authoring method, and program | |
WO2020171909A1 (en) | Ergonomic mixed reality step-by-step instructions tethered to 3d holograms in real-world locations | |
CN104574267A (zh) | 引导方法和信息处理设备 | |
CN111031293B (zh) | 全景监控的展示方法、装置和系统及计算机可读存储介质 | |
CN104221056A (zh) | 用于提供终端装置视野内的对象的信息的方法、终端装置和计算机可读记录介质 | |
US10074216B2 (en) | Information processing to display information based on position of the real object in the image | |
CN107566793A (zh) | 用于远程协助的方法、装置、系统及电子设备 | |
JP2016122392A (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
CN107077200A (zh) | 基于反射的控件激活 | |
CN114299809B (zh) | 方向信息显示方法、显示装置、电子设备和可读存储介质 | |
CN114329675A (zh) | 模型生成方法、模型生成装置、电子设备和可读存储介质 | |
CN112667137B (zh) | 户型图和房屋三维模型的切换显示方法及装置 | |
KR101774807B1 (ko) | 휴대 단말기 및 그 동작 방법 | |
CN115421631A (zh) | 界面显示方法和装置 | |
CN113298040A (zh) | 关键点检测方法、装置、电子设备及计算机可读存储介质 | |
KR20150026358A (ko) | 피사체 정보에 따른 템플릿 피팅 방법 및 그 장치 | |
CN110806203A (zh) | 车辆的位置决定方法及系统 | |
CN108171802A (zh) | 一种云端与终端结合实现的全景增强现实实现方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |