CN113610990A - 基于可量测实景影像的数据交互方法、系统、设备和介质 - Google Patents
基于可量测实景影像的数据交互方法、系统、设备和介质 Download PDFInfo
- Publication number
- CN113610990A CN113610990A CN202110923769.0A CN202110923769A CN113610990A CN 113610990 A CN113610990 A CN 113610990A CN 202110923769 A CN202110923769 A CN 202110923769A CN 113610990 A CN113610990 A CN 113610990A
- Authority
- CN
- China
- Prior art keywords
- live
- action image
- interest
- contour
- measurable
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 39
- 238000000034 method Methods 0.000 title claims abstract description 34
- 230000000694 effects Effects 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 6
- 230000009471 action Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000012800 visualization Methods 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及基于可量测实景影像的数据交互方法、系统、设备和介质。本发明的方法包括：确定用户在可量测实景影像中选择的感兴趣对象；确定所述感兴趣对象的轮廓；在所述可量测实景影像中显示所述感兴趣对象的所述轮廓的至少一部分。本发明可以将3D信息关联到可量测2D实景，同时保持感兴趣对象关联信息的反馈和感兴趣对象之间的叠置在交互中短时呈现，从而既可以避免实景影像被强制绘制的矢量淹没，降低聚焦感，同时又可以保证视口上始终呈现真实实景。
Description
技术领域
本发明涉及基于可量测实景影像的数据交互方法、系统、设备和介质。
背景技术
一般的实景增强现实(Augmented Reality,AR)中，兴趣点(Point of Interest,POI)或矢量特征数据都是比较生硬地直接绘制投影在实景影像上，又同时带来聚合遮挡、干扰原始影像信息等问题。
另外，3D模型中直接提供矢量信息查询的方式也存在问题，虽然可以更好地查询3D对象，例如高亮显示或交互编辑等，但是3D模型的色彩精度和真实感比实景影像弱。
发明内容
本发明的目的在于提供基于可量测实景影像的数据交互方法、系统、设备和介质，可以将3D信息关联到可量测2D实景，同时保持感兴趣对象关联信息的反馈和感兴趣对象之间的叠置在交互中短时呈现，从而既可以避免实景影像被强制绘制的矢量淹没，降低聚焦感，同时又可以保证视口上始终呈现真实实景。
本发明公开了一种基于可量测实景影像的数据交互方法，所述方法包括：
确定用户在可量测实景影像中选择的感兴趣对象；
确定所述感兴趣对象的轮廓；
在所述可量测实景影像中显示所述感兴趣对象的所述轮廓的至少一部分。
可选地，基于用户点击所述可量测实景影像中的对象或在对象上悬停来确定所述感兴趣对象。
可选地，基于包围盒算法来确定所述感兴趣对象的所述轮廓。
可选地，基于所述可量测实景影像的深度图，对所述感兴趣对象的所述轮廓进行消隐处理，并且在所述可量测实景影像中显示消隐处理后的所述轮廓。
可选地，所述方法还包括，在所述可量测实景影像中显示所述感兴趣对象的特效和/或简档信息。
本发明公开了一种基于可量测实景影像的数据交互系统，所述系统包括：
第一确定模块，确定用户在可量测实景影像中选择的感兴趣对象；
第二确定模块，确定所述感兴趣对象的轮廓；
第一显示模块，在所述可量测实景影像中显示所述感兴趣对象的所述轮廓的至少一部分。
可选地，基于用户点击所述可量测实景影像中的对象或在对象上悬停来确定所述感兴趣对象。
可选地，基于包围盒算法来确定所述感兴趣对象的所述轮廓。
可选地，基于所述可量测实景影像的深度图，对所述感兴趣对象的所述轮廓进行消隐处理，并且在所述可量测实景影像中显示消隐处理后的所述轮廓。
可选地，所述系统还包括第二显示模块，在所述可量测实景影像中显示所述感兴趣对象的特效和/或简档信息。
本发明公开了一种基于可量测实景影像的数据交互设备，所述设备包括存储有计算机可执行指令的存储器和处理器，所述处理器被配置为执行所述指令以实施上面所述的基于可量测实景影像的数据交互方法。
本发明公开了一种使用计算机程序编码的计算机存储介质，所述计算机程序包括指令，所述指令被一个以上的计算机执行以实施上面所述的基于可量测实景影像的数据交互方法。
本发明与现有技术相比，主要区别及其效果在于：
在本发明中，在用户选择了感兴趣对象之后，才显示感兴趣对象的轮廓以及特效和/或简档信息，影像在交互前后不会被矢量数据绘制干扰，影像始终保持“完整纯粹”的状态。其次，基于可量测的深度图，可以实现矢量数据基于深度图的投影，对用户准备交互的对象投影轮廓在影像上进行可视化。另外，在交互可视化上可以适当增加相对新颖的特效和/或简档信息。
附图说明
图1是根据本发明的基于可量测实景影像的数据交互设备的结构图；
图2是根据本发明的基于可量测实景影像的数据交互系统的结构图；
图3是根据本发明的基于可量测实景影像的数据交互方法的流程图；
图4A和图4B是根据本发明的基于可量测实景影像的数据交互的示意图。
具体实施方式
为使本发明实施例的目的和技术方案更加清楚，下面将结合本发明实施例的附图，对本发明实施例的技术方案进行清楚、完整地描述。显然，所描述的实施例是本发明的一部分实施例，而不是全部的实施例。基于所描述的本发明的实施例，本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
根据本发明，提供了一种基于可量测实景影像的数据交互方法的实施方式，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
本申请方式所提供的方法实施方式可以在诸如移动终端、计算机终端或者服务器的设备中执行。图1是根据本发明的基于可量测实景影像的数据交互设备的结构图。如图1所示，基于可量测实景影像的数据交互设备100可以包括一个或多个(图中仅示出一个)处理器101(处理器101可以包括但不限于中央处理器CPU、图像处理器GPU、数字信号处理器DSP、微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于与用户交互的输入输出接口102、用于存储数据的存储器103、以及用于通信功能的传输装置104。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述设备的结构造成限定。例如，数据交互设备100还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。
输入输出接口102可以连接一个或多个显示器、触控屏等，用于显示从数据交互设备100传送的数据，还可以连接键盘、触控笔、触控板和/或鼠标等，用于输入诸如，选择、创建、编辑等的用户指令。
存储器103可用于存储数据库、队列、应用软件的软件程序以及模块，如根据本发明的基于可量测实景影像的数据交互方法对应的程序指令/模块，处理器101通过运行存储在存储器103内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的基于可量测实景影像的数据交互方法。存储器103可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器103可进一步包括相对于处理器101远程设置的存储器，这些远程存储器可以通过网络连接至数据交互设备100。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置104用于经由网络接收或者发送数据，网络可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。上述的网络具体实例可包括数据交互设备100的通信供应商提供的互联网。
本发明还提供一种基于可量测实景影像的数据交互系统。图2是根据本发明的基于可量测实景影像的数据交互系统的结构图。如图2所示，基于可量测实景影像的数据交互系统200包括第一确定模块201、第二确定模块202和第一显示模块203。优选地，基于可量测实景影像的数据交互系统200还包括第二显示模块204。
图3是根据本发明的基于可量测实景影像的数据交互方法的流程图。图4A和图4B是根据本发明的基于可量测实景影像的数据交互的示意图。下面结合图2至图4B对本发明的实施例进行详细说明。
在步骤S31，第一确定模块201确定用户在可量测实景影像中选择的感兴趣对象。其中，可量测实景影像(Digital Measurable Image,DMI)将3D信息关联到可量测2D实景(例如，街景)，该可量测实景影像包括一个或多个对象。其中，基于用户点击可量测实景影像中的对象或在对象上悬停来确定感兴趣对象。可以理解的是，用户也可以采用其它手势来选择对象，从而确定感兴趣对象，在此不作限制。如图4A所示，用户在可量测实景影像中选择了两幢大楼以作为感兴趣对象。
在步骤S32，第二确定模块202确定感兴趣对象的轮廓。其中，基于包围盒(bounding box)算法来确定感兴趣对象的轮廓。可以理解的是，也可以采用其它算法来确定感兴趣对象的轮廓，在此不作限制。如图4A所示，确定了两幢大楼的轮廓均为六面体轮廓，从而将每幢大楼封装在六面体中，并且用简单的六面体形状来近似代替复杂的大楼形状。
在步骤S33，第一显示模块203在可量测实景影像中显示感兴趣对象的轮廓的至少一部分。其中，可量测实景影像包括可量测的深度图，该深度图指示可量测实景影像上的每个对象和视点之间的距离。其中，基于可量测实景影像的深度图，对感兴趣对象的轮廓进行消隐处理，并且在可量测实景影像中显示消隐处理后的轮廓。如图4B所示，基于可量测实景影像的深度图可知，两幢大楼的底部被遮挡而相对于视点不可见，并且两幢大楼的后向面也相对于视点不可见，因此分别对两幢大楼的轮廓进行消隐处理，并且在可量测实景影像中显示消隐处理后的轮廓，例如，至少显示两幢大楼的可见部分的轮廓。
优选地，在步骤S34，第二显示模块204在可量测实景影像中显示感兴趣对象的特效和/或简档信息。其中，特效包括对感兴趣对象应用网格和/或蒙版形式的遮罩，从而夸大感兴趣对象。其中，简档信息包括以列表形式显示的感兴趣对象的名称、尺寸、位置、评论和/或推荐等，和/或切换显示的感兴趣对象的一张或多张实景图像。可以理解的是，特效和简档信息还可以包括其它内容，从而实现感兴趣对象的高亮显示、交互编辑和关联信息反馈等，在此不作限制。
在本发明中，在用户选择了感兴趣对象之后，才显示感兴趣对象的轮廓以及特效和/或简档信息，影像在交互前后不会被矢量数据绘制干扰，影像始终保持“完整纯粹”的状态。其次，基于可量测的深度图，可以实现矢量数据基于深度图的投影，对用户准备交互的对象投影轮廓在影像上进行可视化。另外，在交互可视化上可以适当增加相对新颖的特效和/或简档信息。
本发明还提供一种使用计算机程序编码的计算机存储介质，计算机程序包括指令，指令被一个以上的计算机执行以实施上面所述的基于可量测实景影像的数据交互方法。
需要说明的是，本发明的各方法实施方式均可以以软件、硬件、固件等方式实现。不管本发明是以软件、硬件、还是固件方式实现，指令代码都可以存储在任何类型的计算机可访问的存储器中(例如永久的或者可修改的，易失性的或者非易失性的，固态的或者非固态的，固定的或者可更换的介质等等)。同样，存储器可以例如是可编程阵列逻辑(Programmable Array Logic，简称“PAL”)、随机存取存储器(Random Access Memory，简称“RAM”)、可编程只读存储器(Programmable Read Only Memory，简称“PROM”)、只读存储器(Read-Only Memory，简称“ROM”)、电可擦除可编程只读存储器(Electrically ErasableProgrammable ROM，简称“EEPROM”)、磁盘、光盘、数字通用光盘(Digital Versatile Disc，简称“DVD”)等等。
需要说明的是，本发明各设备实施方式中提到的各单元/模块都是逻辑单元/模块，在物理上，一个逻辑单元可以是一个物理单元，也可以是一个物理单元的一部分，还可以以多个物理单元的组合实现，这些逻辑单元本身的物理实现方式并不是最重要的，这些逻辑单元所实现的功能的组合才是解决本发明所提出的技术问题的关键。此外，为了突出本发明的创新部分，本发明上述各设备实施方式并没有将与解决本发明所提出的技术问题关系不太密切的单元引入，这并不表明上述设备实施方式并不存在其它的单元。
在附图中，可以以特定布置和/或顺序示出一些结构或方法特征。然而，应该理解，可能不需要这样的特定布置和/或排序。而是，在一些实施例中，这些特征可以以不同于说明性附图中所示的方式和/或顺序来布置。另外，在特定图中包括结构或方法特征并不意味着暗示在所有实施例中都需要这样的特征，并且在一些实施例中，可以不包括这些特征或者可以与其他特征组合。
需要说明的是，在本专利的权利要求和说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
虽然通过参照本发明的某些优选实施方式，已经对本发明进行了图示和描述，但本领域的普通技术人员应该明白，可以在形式上和细节上对其作各种改变，而不偏离本发明的精神和范围。
Claims (12)
1.一种基于可量测实景影像的数据交互方法，其特征在于，所述方法包括：
确定用户在可量测实景影像中选择的感兴趣对象；
确定所述感兴趣对象的轮廓；
在所述可量测实景影像中显示所述感兴趣对象的所述轮廓的至少一部分。
2.根据权利要求1所述的方法，其特征在于，基于用户点击所述可量测实景影像中的对象或在对象上悬停来确定所述感兴趣对象。
3.根据权利要求1或2所述的方法，其特征在于，基于包围盒算法来确定所述感兴趣对象的所述轮廓。
4.根据权利要求3所述的方法，其特征在于，基于所述可量测实景影像的深度图，对所述感兴趣对象的所述轮廓进行消隐处理，并且在所述可量测实景影像中显示消隐处理后的所述轮廓。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括，在所述可量测实景影像中显示所述感兴趣对象的特效和/或简档信息。
6.一种基于可量测实景影像的数据交互系统，其特征在于，所述系统包括：
第一确定模块，确定用户在可量测实景影像中选择的感兴趣对象；
第二确定模块，确定所述感兴趣对象的轮廓；
第一显示模块，在所述可量测实景影像中显示所述感兴趣对象的所述轮廓的至少一部分。
7.根据权利要求6所述的系统，其特征在于，基于用户点击所述可量测实景影像中的对象或在对象上悬停来确定所述感兴趣对象。
8.根据权利要求6或7所述的系统，其特征在于，基于包围盒算法来确定所述感兴趣对象的所述轮廓。
9.根据权利要求8所述的系统，其特征在于，基于所述可量测实景影像的深度图，对所述感兴趣对象的所述轮廓进行消隐处理，并且在所述可量测实景影像中显示消隐处理后的所述轮廓。
10.根据权利要求6所述的系统，其特征在于，所述系统还包括第二显示模块，在所述可量测实景影像中显示所述感兴趣对象的特效和/或简档信息。
11.一种基于可量测实景影像的数据交互设备，其特征在于，所述设备包括存储有计算机可执行指令的存储器和处理器，所述处理器被配置为执行所述指令以实施根据权利要求1至5中任一项所述的基于可量测实景影像的数据交互方法。
12.一种使用计算机程序编码的计算机存储介质，其特征在于，所述计算机程序包括指令，所述指令被一个以上的计算机执行以实施根据权利要求1至5中任一项所述的基于可量测实景影像的数据交互方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110923769.0A CN113610990A (zh) | 2021-08-12 | 2021-08-12 | 基于可量测实景影像的数据交互方法、系统、设备和介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110923769.0A CN113610990A (zh) | 2021-08-12 | 2021-08-12 | 基于可量测实景影像的数据交互方法、系统、设备和介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113610990A true CN113610990A (zh) | 2021-11-05 |
Family
ID=78340470
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110923769.0A Pending CN113610990A (zh) | 2021-08-12 | 2021-08-12 | 基于可量测实景影像的数据交互方法、系统、设备和介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113610990A (zh) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111124233A (zh) * | 2019-12-27 | 2020-05-08 | 杭州依图医疗技术有限公司 | 医学影像的显示方法、交互方法及存储介质 |
| CN111311705A (zh) * | 2020-02-14 | 2020-06-19 | 广州柏视医疗科技有限公司 | 基于webgl的高适应性医学影像多平面重建方法及系统 |
| CN112348861A (zh) * | 2020-11-02 | 2021-02-09 | 上海联影医疗科技股份有限公司 | 图像处理方法、装置、设备及存储介质 |
-
2021
- 2021-08-12 CN CN202110923769.0A patent/CN113610990A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111124233A (zh) * | 2019-12-27 | 2020-05-08 | 杭州依图医疗技术有限公司 | 医学影像的显示方法、交互方法及存储介质 |
| CN111311705A (zh) * | 2020-02-14 | 2020-06-19 | 广州柏视医疗科技有限公司 | 基于webgl的高适应性医学影像多平面重建方法及系统 |
| CN112348861A (zh) * | 2020-11-02 | 2021-02-09 | 上海联影医疗科技股份有限公司 | 图像处理方法、装置、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11538229B2 (en) | Image processing method and apparatus, electronic device, and computer-readable storage medium | |
| US20150170260A1 (en) | Methods and Systems for Using a Mobile Device to Visualize a Three-Dimensional Physical Object Placed Within a Three-Dimensional Environment | |
| CN109377554B (zh) | 大型三维模型绘制方法、设备、系统及存储介质 | |
| US9589385B1 (en) | Method of annotation across different locations | |
| CN111031293B (zh) | 全景监控的展示方法、装置和系统及计算机可读存储介质 | |
| CN111709965B (zh) | 扫地机器人的地图的优化方法及装置 | |
| CN112561786A (zh) | 基于图像卡通化的在线直播方法、装置和电子设备 | |
| JP7277548B2 (ja) | サンプル画像生成方法、装置及び電子機器 | |
| CN114239508A (zh) | 表格还原方法和装置、存储介质及电子设备 | |
| CN111142967B (zh) | 一种增强现实显示的方法、装置、电子设备和存储介质 | |
| CN113204296B (zh) | 图元高亮显示方法、装置、设备及存储介质 | |
| US20150089374A1 (en) | Network visualization system and method | |
| CN107481307B (zh) | 一种快速渲染三维场景的方法 | |
| CN109598672B (zh) | 一种地图道路渲染方法及装置 | |
| CN113837194A (zh) | 图像处理方法、图像处理装置、电子设备以及存储介质 | |
| CN107481306B (zh) | 一种三维交互的方法 | |
| WO2021098306A1 (zh) | 一种物品比对方法和装置 | |
| CN110990106B (zh) | 数据展示方法、装置、计算机设备及存储介质 | |
| CN107704483A (zh) | 一种三维模型的加载方法 | |
| CN113610990A (zh) | 基于可量测实景影像的数据交互方法、系统、设备和介质 | |
| US10198837B2 (en) | Network graphing selector | |
| WO2022089061A1 (zh) | 物体标注信息呈现方法、装置、电子设备及存储介质 | |
| CN109522429A (zh) | 用于生成信息的方法和装置 | |
| CN114913277A (zh) | 一种物体立体交互展示方法、装置、设备及介质 | |
| CN112967369A (zh) | 一种光线展示方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |