CN112102481A - 一种交互模拟场景的构建方法、装置、计算机设备及存储介质 - Google Patents
一种交互模拟场景的构建方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN112102481A CN112102481A CN202011005813.1A CN202011005813A CN112102481A CN 112102481 A CN112102481 A CN 112102481A CN 202011005813 A CN202011005813 A CN 202011005813A CN 112102481 A CN112102481 A CN 112102481A
- Authority
- CN
- China
- Prior art keywords
- scene
- simulation
- simulation scene
- instruction stream
- sphere
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004088 simulation Methods 0.000 title claims abstract description 167
- 238000000034 method Methods 0.000 title claims abstract description 30
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 28
- 230000003287 optical effect Effects 0.000 claims abstract description 76
- 239000000463 material Substances 0.000 claims abstract description 61
- 238000005516 engineering process Methods 0.000 claims abstract description 20
- 238000010276 construction Methods 0.000 claims abstract description 13
- 238000012545 processing Methods 0.000 claims abstract description 13
- 238000003384 imaging method Methods 0.000 claims description 47
- 238000012937 correction Methods 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 9
- 239000007787 solid Substances 0.000 claims 2
- 238000011835 investigation Methods 0.000 description 20
- 238000004458 analytical method Methods 0.000 description 12
- 230000008569 process Effects 0.000 description 9
- 238000012549 training Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 238000009960 carding Methods 0.000 description 5
- 230000003993 interaction Effects 0.000 description 5
- 230000007774 longterm Effects 0.000 description 5
- 230000008520 organization Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 239000011521 glass Substances 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000009877 rendering Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Geometry (AREA)
- Studio Devices (AREA)
Abstract
本申请实施例属于图像处理领域，涉及一种交互模拟场景的构建方法、装置、设备及存储介质，包括：基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；基于三维仿真技术对多组现场光信号进行场景模拟操作，获得初始模拟场景；接收用户终端发送的素材补充数据，素材补充数据至少包括与初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；将素材图像数据嵌入至初始模拟场景中，得到中间模拟场景；基于操作指令流以及操作反馈信息在中间模拟场景中进行模拟操作，获得目标模拟场景；将目标模拟场景发送至显示终端进行展示操作。解决主观推断较大，遗留细节，不能营造真实复杂的现场环境的问题。
Description
技术领域
本申请涉及图像处理技术领域，尤其涉及一种交互模拟场景的构建方法、装置、计算机设备及存储介质。
背景技术
刑事案件侦查是公安类专业最为核心的教学内容，其庞大综合知识体系的学习，分解在侦查学、现场勘查学、法医学、刑事科学技术等十几门专业课程中，内容成碎片化和离散化，缺乏一个知识整合和综合能力训练的环节，无法培养提高学生案件侦查的综合技能和综合应用能力。无论从人才培养目标还是专业性质来看，公安技术类专业都是面向公安实践的具有很强应用性和实践性的应用型专业。因此需要不断地真实现场实践练习或者是接近真实现场的案例教学，来突破专业实验教学和公安实战训练的瓶颈。
现有一种模拟场景的构建方法，即利用3D渲染引擎手工创建三维模拟现场模型，然而，传统的模拟场景的构建方法普遍不智能，该技术方案的实现取决于手工创建者的能力和投入的工作量，掺杂的主观推断较大，容易遗留细节，不能营造真实复杂的现场环境。
发明内容
本申请实施例的目的在于提出一种交互模拟场景的构建方法、装置、计算机设备及存储介质，以解决现有的利用3D渲染引擎手工创建三维模拟现场模型掺杂的主观推断较大，容易遗留细节，不能营造真实复杂的现场环境的问题。
为了解决上述技术问题，本申请实施例提供一种交互模拟场景的构建方法，采用了如下所述的技术方案：
基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；
基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；
接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；
将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；
基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；
将所述目标模拟场景发送至显示终端进行展示操作。
为了解决上述技术问题，本申请实施例还提供一种交互模拟场景的构建装置，采用了如下所述的技术方案：
实景采集模块，用于基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；
场景模拟模块，用于基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；
素材接收模块，用于接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；
图像嵌入模块，用于将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；
模拟操作模块，用于基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；
场景输出模块，用于将所述目标模拟场景发送至显示终端进行展示操作。
为了解决上述技术问题，本申请实施例还提供一种计算机设备，采用了如下所述的技术方案：
包括存储器和处理器；
所述存储器中存储有计算机程序，所述处理器执行所述计算机程序时实现如上所述的交互模拟场景的构建方法的步骤。
为了解决上述技术问题，本申请实施例还提供一种计算机可读存储介质，采用了如下所述的技术方案：
所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的交互模拟场景的构建方法的步骤。
与现有技术相比，本申请实施例主要有以下有益效果：
本申请提供了一种交互模拟场景的构建方法，包括：基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；将所述目标模拟场景发送至显示终端进行展示操作。解决了传统重建方式中获取信息单一、数据资料零散、长期保存困难等问题；在不破坏犯罪现场的同时，可以快速准确地记录犯罪现场的三维数据，实现犯罪现场的三维建模；本发明促进公安院校学员的案件现场勘验、检查能力，现场分析侦查能力，应对多样现场的快速组织梳理能力的训练和培养，极大地提高案情分析的教学效率和质量。
附图说明
为了更清楚地说明本申请中的方案，下面将对本申请实施例描述中所需要使用的附图作一个简单介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例一提供的交互模拟场景的构建方法的实现流程图；
图2是本申请实施例二提供的交互模拟场景的构建装置的结构示意图；
图3是根据本申请的计算机设备的一个实施例的结构示意图。
具体实施方式
除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同；本文中在申请的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本申请；本申请的说明书和权利要求书及上述附图说明中的术语“包括”和“具有”以及它们的任何变形，意图在于覆盖不排他的包含。本申请的说明书和权利要求书或上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
为了使本技术领域的人员更好地理解本申请方案，下面将结合附图，对本申请实施例中的技术方案进行清楚、完整地描述。
实施例一
参考图1，示出了本申请实施例一提供的交互模拟场景的构建方法的流程示意图，为了便于说明，仅示出与本申请相关的部分。
在步骤S101中，基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号。
在本申请实施例中，球体摄像设备指的是可以360度全方位采集图像的摄像装置。
在本申请实施例中，实景采集操作指的是通过设置在各个不同空间的上述球体摄像设备，同一时间采集所在空间的场景图像数据，即可实现上述实景采集操作。
在本申请实施例中，多组现场光信号指的是上述不同空间、场景中的球体摄像设备分别采集到的场景图像数据，该场景图像数据基于不同场景进行分组区分。
在本申请实施例中，设置在各个不同空间的上述球体摄像设备中的所有的光学镜头组共用拍摄快门控制传感器，从而保证能在同一时刻进行拍摄采集光信号，进而让每次采集到的图像集合数据具有空间和时间的线性同一性，避免了现有的方式里的位移拍摄、延时拍摄渲染和有限角度成像的情况。
在步骤S102中，基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景。
在本申请实施例中，三维仿真技术指的是三维仿真(3D-S)漫游软件技术。
在本申请实施例中，由于案发现场会存在多个相关联的场景，作为示例，例如：室内、室外等。
在本申请实施例中，球体摄像设备采集的现场图像数据根据不同的场景进行区分，进而便于根据同一场景的现场图像数据拼接成为与该场景相一致的全景图像信息。
在步骤S103中，接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息。
在本申请实施例中，用户终端可以是诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端，应当理解，此处对用户终端的举例仅为方便理解，不用于限定本发明。
在本申请实施例中，素材补充数据指的是老师根据采集回来的案件现场的案件情况，进行勘查目标划定、侦查思路引导和现场勘验检查手段的训练，如凶器、甚至血迹、脚印等传统虚拟平台很难搭建完善的物件，通过案件现场情况分析推演案件发生过程，通过在真实案件现场进行实际勘查和侦查分析的方式，布置到案件现场环境中，让学生在实战中提炼自己的现场经验，培养出阅读现场的直觉。
在本申请实施例中，操作指令流指的是在实际模拟场景交互的过程中接收到用户的操作指令，当用户的操作指令与该操作指令流一致时，会触发相应的场景变化等操作反馈信息，以到达用户进行实景交互的效果。
在步骤S104中，将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景。
在本申请实施例中，由于素材图像数据还携带有空间位置数据，根据空间位置数据将素材图像数据嵌入至对应的场景图像信息中，从而实现将勘查目标附着于全景图像中，便于学员切身实际的进行学习，有效提高学员的动手与分析能力。
在步骤S105中，基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景。
在本申请实施例中，模拟操作指的是将与素材图像数据相对应的影像流等数据布置到中间模拟场景中。
在步骤S106中，将所述目标模拟场景发送至显示终端进行展示操作。
本申请提供了一种交互模拟场景的构建方法，包括：基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；将所述目标模拟场景发送至显示终端进行展示操作。解决了传统重建方式中获取信息单一、数据资料零散、长期保存困难等问题；在不破坏犯罪现场的同时，可以快速准确地记录犯罪现场的三维数据，实现犯罪现场的三维建模；本发明促进公安院校学员的案件现场勘验、检查能力，现场分析侦查能力，应对多样现场的快速组织梳理能力的训练和培养，极大地提高案情分析的教学效率和质量。
在本申请实施例一的一些可选的实现方式中，球体摄像设备由至少3个光学镜头组组成，所述光学镜头组均匀分布于所述球体摄像设备内部，且所述光学镜头组的聚焦方向均指向所述球体摄像设备的球心。
在本申请实施例一的一些可选的实现方式中，所述多个光学镜头组的透镜圆心点连线组成球体内最大的等边形或者等边体。
在本申请实施例中，球体摄像设备集成n+1(n>＝2)个光学镜头组均匀装嵌到球体设备表面上；并保证该球体摄像设备的所有的光学镜头组共用拍摄快门控制传感器，实现所有光学镜头组能在同一时刻进行拍摄采集光信号；同时，每组光学镜片的制造工艺统一，使所有光学镜片的折光率等参数都一致，把所有光学镜片的光学偏差率降到最低，以保证每个光学镜片的焦点集中在球体设备球心处。
在本申请实施例中，每组光学镜片的制造工艺统一，使所有光学镜片的折光率等参数都一致，把所有光学镜片的光学偏差率降到最低，以保证每个光学镜片的焦点集中在球体设备球心处，也就是光学镜片的焦点距离逼近等于球形设备的半径长度。
在本申请实施例一的一些可选的实现方式中，上述步骤S101还包括：调节所述球体摄像设备的白平衡参数。
在本申请实施例中，随着人们研究的深入，全景图像的标准化已成为保证图像清晰度的必要过程。然而，发明人意识到，全景扫描成像和很多因素有关系，例如，玻片扫描仪的型号等，都会对全景图像造成颜色结构上的不同。
在本申请实施例中，为了能够统一全景扫描成像的标准，可以对球体摄像设备进行白平衡参数的调节。白平衡也可以理解为白色的平衡，此处是指预先将未承载样品的玻片放置在球体摄像设备下，然后基于未承载样品的玻片来调节全景图像的颜色混合比例，即RGB值，使该全景图像的颜色混合比例达到白色。也就是说，全景扫描成像的标准被统一为使全景图像的背景为白色。
那么，在后续球体摄像设备进行全景扫描成像时，承载样品的玻片处在扫描时由于显现出有效图像而非白色，而未承载样品的玻片处在扫描时由于未能显现出有效图像，将作为背景保持白色。基于此，球体摄像设备进行全景扫描成像时获得的全景图像便能够基于白色进行图像清晰度的调整。
在本申请实施例一的一些可选的实现方式中，上述步骤S101还包括：对所述球体摄像设备进行gamma曲线校正处理。
发明人意识到，当光源照射在玻片上时，球体摄像设备进行扫描成像时，往往是图像中间区域比图像边缘区域亮，基于此，为了让图像的明亮对比度较小，可以调节球体摄像设备的gamma参数，即对球体摄像设备进行gamma曲线校正处理，使得图像边缘区域能够和图像中间区域的明亮对比度相对减小。
此外，为了能够统一全景扫描成像的标准，也需要对球体摄像设备进行gamma曲线校正处理。gamma曲线校正可用于补偿不同型号的玻片扫描仪中球体摄像设备扫描成像时图像存在的颜色显示差异，从而充分地保证不同型号的玻片扫描仪中球体摄像设备扫描成像时图像能够显现出相同的颜色显示效果。
通过如此设置，校正gamma曲线之后，可以实现如下目的：暗场灰阶的颜色明显改善，各灰阶的颜色误差明显减少，暗场颜色细节分明，图像颜色显示一致，透亮度好，明亮对比度相对减小。
综上所述，本申请提供了一种交互模拟场景的构建方法，包括：基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；将所述目标模拟场景发送至显示终端进行展示操作。解决了传统重建方式中获取信息单一、数据资料零散、长期保存困难等问题；在不破坏犯罪现场的同时，可以快速准确地记录犯罪现场的三维数据，实现犯罪现场的三维建模；本发明促进公安院校学员的案件现场勘验、检查能力，现场分析侦查能力，应对多样现场的快速组织梳理能力的训练和培养，极大地提高案情分析的教学效率和质量。同时，用户使用本发明可以快速轻便地进行多角度多场景现场的概貌和结构的固定，轻量级手持设备，多场景现场全景设备的采集时刻极差≤1s，一次采集36组照片多角度、全方位、整体覆盖，同一场景任意多个位置角度采集全景，拍摄后实时处理返回拼合全景显示到各类终端，直观现场；用户可以利用拍摄固定好的单场景数据，通过终端系统中“通道”的功能进行不同视觉范围内的独立场景的串联，把不同视觉范围内的单场景进行符合现实世界场景的连通，达到不同视觉范围内的多场景的自由切换的效果，不同于虚拟现实技术和增强现实技术，可以真正意义上的任意场景进行沉浸式的实景浏览功能。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，前述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等非易失性存储介质，或随机存储记忆体(Random Access Memory，RAM)等。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
实施例二
进一步参考图2，作为上述图1所示方法的实现，本申请提供了交互模拟场景的构建装置的一个实施例，该装置实施例与图1所示的方法实施例相对应，该装置具体可以应用于各种电子设备中。
如图2所示，本实施二提供的交互模拟场景的构建装置100包括：
实景采集模块110，用于基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；
场景模拟模块120，用于基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；
素材接收模块130，用于接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；
图像嵌入模块140，用于将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；
模拟操作模块150，用于基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；
场景输出模块160，用于将所述目标模拟场景发送至显示终端进行展示操作。
在本申请实施例中，球体摄像设备指的是可以360度全方位采集图像的摄像装置。
在本申请实施例中，实景采集操作指的是通过设置在各个不同空间的上述球体摄像设备，同一时间采集所在空间的场景图像数据，即可实现上述实景采集操作。
在本申请实施例中，多组现场光信号指的是上述不同空间、场景中的球体摄像设备分别采集到的场景图像数据，该场景图像数据基于不同场景进行分组区分。
在本申请实施例中，设置在各个不同空间的上述球体摄像设备中的所有的光学镜头组共用拍摄快门控制传感器，从而保证能在同一时刻进行拍摄采集光信号，进而让每次采集到的图像集合数据具有空间和时间的线性同一性，避免了现有的方式里的位移拍摄、延时拍摄渲染和有限角度成像的情况。
在本申请实施例中，三维仿真技术指的是三维仿真(3D-S)漫游软件技术。
在本申请实施例中，由于案发现场会存在多个相关联的场景，作为示例，例如：室内、室外等。
在本申请实施例中，球体摄像设备采集的现场图像数据根据不同的场景进行区分，进而便于根据同一场景的现场图像数据拼接成为与该场景相一致的全景图像信息。
在本申请实施例中，用户终端可以是诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端，应当理解，此处对用户终端的举例仅为方便理解，不用于限定本发明。
在本申请实施例中，素材补充数据指的是老师根据采集回来的案件现场的案件情况，进行勘查目标划定、侦查思路引导和现场勘验检查手段的训练，如凶器、甚至血迹、脚印等传统虚拟平台很难搭建完善的物件，通过案件现场情况分析推演案件发生过程，通过在真实案件现场进行实际勘查和侦查分析的方式，布置到案件现场环境中，让学生在实战中提炼自己的现场经验，培养出阅读现场的直觉。
在本申请实施例中，操作指令流指的是在实际模拟场景交互的过程中接收到用户的操作指令，当用户的操作指令与该操作指令流一致时，会触发相应的场景变化等操作反馈信息，以到达用户进行实景交互的效果。
在本申请实施例中，由于素材图像数据还携带有空间位置数据，根据空间位置数据将素材图像数据嵌入至对应的场景图像信息中，从而实现将勘查目标附着于全景图像中，便于学员切身实际的进行学习，有效提高学员的动手与分析能力。
在本申请实施例中，模拟操作指的是将与素材图像数据相对应的影像流等数据布置到中间模拟场景中。
本申请提供了一种交互模拟场景的构建装置，包括：实景采集模块，用于基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；场景模拟模块，用于基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；素材接收模块，用于接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；图像嵌入模块，用于将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；模拟操作模块，用于基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；场景输出模块，用于将所述目标模拟场景发送至显示终端进行展示操作。解决了传统重建方式中获取信息单一、数据资料零散、长期保存困难等问题；在不破坏犯罪现场的同时，可以快速准确地记录犯罪现场的三维数据，实现犯罪现场的三维建模；本发明促进公安院校学员的案件现场勘验、检查能力，现场分析侦查能力，应对多样现场的快速组织梳理能力的训练和培养，极大地提高案情分析的教学效率和质量。
在本申请实施例二的一些可选的实现方式中，球体摄像设备由至少3个光学镜头组组成，所述光学镜头组均匀分布于所述球体摄像设备内部，且所述光学镜头组的聚焦方向均指向所述球体摄像设备的球心。
在本申请实施例二的一些可选的实现方式中，所述多个光学镜头组的透镜圆心点连线组成球体内最大的等边形或者等边体。
在本申请实施例中，球体摄像设备集成n+1(n>＝2)个光学镜头组均匀装嵌到球体设备表面上；并保证该球体摄像设备的所有的光学镜头组共用拍摄快门控制传感器，实现所有光学镜头组能在同一时刻进行拍摄采集光信号；同时，每组光学镜片的制造工艺统一，使所有光学镜片的折光率等参数都一致，把所有光学镜片的光学偏差率降到最低，以保证每个光学镜片的焦点集中在球体设备球心处。
在本申请实施例中，每组光学镜片的制造工艺统一，使所有光学镜片的折光率等参数都一致，把所有光学镜片的光学偏差率降到最低，以保证每个光学镜片的焦点集中在球体设备球心处，也就是光学镜片的焦点距离逼近等于球形设备的半径长度。
在本申请实施例二的一些可选的实现方式中，上述实景采集模块110还包括：白平衡参数调节子模块。其中：
白平衡参数调节子模块，用于调节所述球体摄像设备的白平衡参数。
在本申请实施例中，随着人们研究的深入，全景图像的标准化已成为保证图像清晰度的必要过程。然而，发明人意识到，全景扫描成像和很多因素有关系，例如，玻片扫描仪的型号等，都会对全景图像造成颜色结构上的不同。
在本申请实施例中，为了能够统一全景扫描成像的标准，可以对球体摄像设备进行白平衡参数的调节。白平衡也可以理解为白色的平衡，此处是指预先将未承载样品的玻片放置在球体摄像设备下，然后基于未承载样品的玻片来调节全景图像的颜色混合比例，即RGB值，使该全景图像的颜色混合比例达到白色。也就是说，全景扫描成像的标准被统一为使全景图像的背景为白色。
那么，在后续球体摄像设备进行全景扫描成像时，承载样品的玻片处在扫描时由于显现出有效图像而非白色，而未承载样品的玻片处在扫描时由于未能显现出有效图像，将作为背景保持白色。基于此，球体摄像设备进行全景扫描成像时获得的全景图像便能够基于白色进行图像清晰度的调整。
在本申请实施例二的一些可选的实现方式中，上述实景采集模块110还包括：校正处理子模块。其中：
校正处理子模块，用于对所述球体摄像设备进行gamma曲线校正处理。
发明人意识到，当光源照射在玻片上时，球体摄像设备进行扫描成像时，往往是图像中间区域比图像边缘区域亮，基于此，为了让图像的明亮对比度较小，可以调节球体摄像设备的gamma参数，即对球体摄像设备进行gamma曲线校正处理，使得图像边缘区域能够和图像中间区域的明亮对比度相对减小。
此外，为了能够统一全景扫描成像的标准，也需要对球体摄像设备进行gamma曲线校正处理。gamma曲线校正可用于补偿不同型号的玻片扫描仪中球体摄像设备扫描成像时图像存在的颜色显示差异，从而充分地保证不同型号的玻片扫描仪中球体摄像设备扫描成像时图像能够显现出相同的颜色显示效果。
通过如此设置，校正gamma曲线之后，可以实现如下目的：暗场灰阶的颜色明显改善，各灰阶的颜色误差明显减少，暗场颜色细节分明，图像颜色显示一致，透亮度好，明亮对比度相对减小。
本申请提供了一种交互模拟场景的构建装置，包括：实景采集模块，用于基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；场景模拟模块，用于基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；素材接收模块，用于接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；图像嵌入模块，用于将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；模拟操作模块，用于基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；场景输出模块，用于将所述目标模拟场景发送至显示终端进行展示操作。解决了传统重建方式中获取信息单一、数据资料零散、长期保存困难等问题；在不破坏犯罪现场的同时，可以快速准确地记录犯罪现场的三维数据，实现犯罪现场的三维建模；本发明促进公安院校学员的案件现场勘验、检查能力，现场分析侦查能力，应对多样现场的快速组织梳理能力的训练和培养，极大地提高案情分析的教学效率和质量。同时，用户使用本发明可以快速轻便地进行多角度多场景现场的概貌和结构的固定，轻量级手持设备，多场景现场全景设备的采集时刻极差≤1s，一次采集36组照片多角度、全方位、整体覆盖，同一场景任意多个位置角度采集全景，拍摄后实时处理返回拼合全景显示到各类终端，直观现场；用户可以利用拍摄固定好的单场景数据，通过终端系统中“通道”的功能进行不同视觉范围内的独立场景的串联，把不同视觉范围内的单场景进行符合现实世界场景的连通，达到不同视觉范围内的多场景的自由切换的效果，不同于虚拟现实技术和增强现实技术，可以真正意义上的任意场景进行沉浸式的实景浏览功能。
为解决上述技术问题，本申请实施例还提供计算机设备。具体请参阅图3，图3为本实施例计算机设备基本结构框图。
所述计算机设备3包括通过系统总线相互通信连接存储器31、处理器32、网络接口33。需要指出的是，图中仅示出了具有组件31-33的计算机设备3，但是应理解的是，并不要求实施所有示出的组件，可以替代的实施更多或者更少的组件。其中，本技术领域技术人员可以理解，这里的计算机设备是一种能够按照事先设定或存储的指令，自动进行数值计算和/或信息处理的设备，其硬件包括但不限于微处理器、专用集成电路(ApplicationSpecific Integrated Circuit，ASIC)、可编程门阵列(Field－Programmable GateArray，FPGA)、数字处理器(Digital Signal Processor，DSP)、嵌入式设备等。
所述计算机设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述计算机设备可以与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互。
所述存储器31至少包括一种类型的可读存储介质，所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中，所述存储器31可以是所述计算机设备3的内部存储单元，例如该计算机设备3的硬盘或内存。在另一些实施例中，所述存储器31也可以是所述计算机设备3的外部存储设备，例如该计算机设备3上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(FlashCard)等。当然，所述存储器31还可以既包括所述计算机设备3的内部存储单元也包括其外部存储设备。本实施例中，所述存储器31通常用于存储安装于所述计算机设备3的操作系统和各类应用软件，例如交互模拟场景的构建方法的程序代码等。此外，所述存储器31还可以用于暂时地存储已经输出或者将要输出的各类数据。
所述处理器32在一些实施例中可以是中央处理器(Central Processing Unit，CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器32通常用于控制所述计算机设备3的总体操作。本实施例中，所述处理器32用于运行所述存储器31中存储的程序代码或者处理数据，例如运行所述交互模拟场景的构建方法的程序代码。
所述网络接口33可包括无线网络接口或有线网络接口，该网络接口33通常用于在所述计算机设备3与其他电子设备之间建立通信连接。
本申请还提供了另一种实施方式，即提供一种计算机可读存储介质，所述计算机可读存储介质存储有交互模拟场景的构建程序，所述交互模拟场景的构建程序可被至少一个处理器执行，以使所述至少一个处理器执行如上述的交互模拟场景的构建方法的步骤。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本申请各个实施例所述的方法。
显然，以上所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例，附图中给出了本申请的较佳实施例，但并不限制本申请的专利范围。本申请可以以许多不同的形式来实现，相反地，提供这些实施例的目的是使对本申请的公开内容的理解更加透彻全面。尽管参照前述实施例对本申请进行了详细的说明，对于本领域的技术人员来而言，其依然可以对前述各具体实施方式所记载的技术方案进行修改，或者对其中部分技术特征进行等效替换。凡是利用本申请说明书及附图内容所做的等效结构，直接或间接运用在其他相关的技术领域，均同理在本申请专利保护范围之内。
Claims (10)
1.一种交互模拟场景的构建方法，其特征在于，包括下述步骤：
基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；
基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；
接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；
将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；
基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；
将所述目标模拟场景发送至显示终端进行展示操作。
2.如权利要求1所述的基于多场景的全景成像方法，其特征在于，所述球体摄像设备由至少3个光学镜头组组成，所述光学镜头组均匀分布于所述球体摄像设备内部，且所述光学镜头组的聚焦方向均指向所述球体摄像设备的球心。
3.如权利要求2所述的基于多场景的全景成像方法，其特征在于，所述多个光学镜头组的透镜圆心点连线组成球体内最大的等边形或者等边体。
4.如权利要求1所述的基于多场景的全景成像方法，其特征在于，所述基于球体摄像设备进行全景采集操作，获取多组场景光信号的步骤，包括下述步骤：
调节所述球体摄像设备的白平衡参数。
5.如权利要求1所述的基于多场景的全景成像方法，其特征在于，所述基于球体摄像设备进行全景采集操作，获取多组场景光信号的步骤，包括下述步骤：
对所述球体摄像设备进行gamma曲线校正处理。
6.一种交互模拟场景的构建装置，其特征在于，包括：
实景采集模块，用于基于设置在目标现场的球体摄像设备进行实景采集操作，获取多组现场光信号；
场景模拟模块，用于基于三维仿真技术对所述多组现场光信号进行场景模拟操作，获得初始模拟场景；
素材接收模块，用于接收用户终端发送的素材补充数据，所述素材补充数据至少包括与所述初始模拟场景相对应的素材图像数据、操作指令流以及与操作指令流相对应的操作反馈信息；
图像嵌入模块，用于将所述素材图像数据嵌入至所述初始模拟场景中，得到中间模拟场景；
模拟操作模块，用于基于所述操作指令流以及操作反馈信息在所述中间模拟场景中进行模拟操作，获得目标模拟场景；
场景输出模块，用于将所述目标模拟场景发送至显示终端进行展示操作。
7.如权利要求6所述的基于多场景的全景成像装置，其特征在于，所述球体摄像设备由至少3个光学镜头组组成，所述光学镜头组均匀分布于所述球体摄像设备内部，且所述光学镜头组的聚焦方向均指向所述球体摄像设备的球心。
8.如权利要求7所述的基于多场景的全景成像装置，其特征在于，所述多个光学镜头组的透镜圆心点连线组成球体内最大的等边形或者等边体。
9.一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至5中任一项所述的交互模拟场景的构建方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的交互模拟场景的构建方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011005813.1A CN112102481A (zh) | 2020-09-22 | 2020-09-22 | 一种交互模拟场景的构建方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011005813.1A CN112102481A (zh) | 2020-09-22 | 2020-09-22 | 一种交互模拟场景的构建方法、装置、计算机设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112102481A true CN112102481A (zh) | 2020-12-18 |
Family
ID=73756474
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011005813.1A Pending CN112102481A (zh) | 2020-09-22 | 2020-09-22 | 一种交互模拟场景的构建方法、装置、计算机设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112102481A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114237401A (zh) * | 2021-12-28 | 2022-03-25 | 广州卓远虚拟现实科技有限公司 | 一种多种虚拟场景的无缝链接方法及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107622524A (zh) * | 2017-09-29 | 2018-01-23 | 百度在线网络技术（北京）有限公司 | 用于移动终端的显示方法和显示装置 |
| CN209964215U (zh) * | 2019-07-23 | 2020-01-17 | 深圳移动互联研究院有限公司 | 一种球形三维全景成像系统 |
| US20200068138A1 (en) * | 2018-08-21 | 2020-02-27 | Gopro, Inc. | Field of view adjustment |
| US10769843B1 (en) * | 2019-07-31 | 2020-09-08 | Hongfujin Precision Electronics(Tianjin)Co., Ltd. | 3D scene engineering simulation and real-life scene fusion system |
-
2020
- 2020-09-22 CN CN202011005813.1A patent/CN112102481A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107622524A (zh) * | 2017-09-29 | 2018-01-23 | 百度在线网络技术（北京）有限公司 | 用于移动终端的显示方法和显示装置 |
| US20200068138A1 (en) * | 2018-08-21 | 2020-02-27 | Gopro, Inc. | Field of view adjustment |
| CN209964215U (zh) * | 2019-07-23 | 2020-01-17 | 深圳移动互联研究院有限公司 | 一种球形三维全景成像系统 |
| US10769843B1 (en) * | 2019-07-31 | 2020-09-08 | Hongfujin Precision Electronics(Tianjin)Co., Ltd. | 3D scene engineering simulation and real-life scene fusion system |
Non-Patent Citations (1)
| Title |
|---|
| 飞揪Q9776: "案件现场全景再现分析演示系统", 百度文库, 21 June 2016 (2016-06-21), pages 1 - 4 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114237401A (zh) * | 2021-12-28 | 2022-03-25 | 广州卓远虚拟现实科技有限公司 | 一种多种虚拟场景的无缝链接方法及系统 |
| CN114237401B (zh) * | 2021-12-28 | 2024-06-07 | 广州卓远虚拟现实科技有限公司 | 一种多种虚拟场景的无缝链接方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3166079A1 (en) | Augmented reality method and system based on wearable device | |
| CN108594999B (zh) | 用于全景图像展示系统的控制方法和装置 | |
| CN111145135B (zh) | 一种图像去扰处理方法、装置、设备及存储介质 | |
| CN110213534A (zh) | 一种基于变电站的3d实景巡视方法、系统和存储介质 | |
| WO2020211427A1 (zh) | 基于扫描点云数据的分割与识别方法、系统及存储介质 | |
| CN113902657A (zh) | 图像拼接方法、装置和电子设备 | |
| CN113705349B (zh) | 一种基于视线估计神经网络的注意力量化分析方法及系统 | |
| CN104427230A (zh) | 增强现实的方法和增强现实的系统 | |
| CN109523499A (zh) | 一种基于众包的多源融合全景建模方法 | |
| CN111508033A (zh) | 相机参数确定方法、图像处理方法、存储介质及电子装置 | |
| CN112348885A (zh) | 视觉特征库的构建方法、视觉定位方法、装置和存储介质 | |
| CN111932681A (zh) | 房屋信息显示方法、装置和电子设备 | |
| CN111228821A (zh) | 智能检测穿墙外挂方法、装置、设备及其存储介质 | |
| CN113781664A (zh) | 基于三维模型的vr全景图构造显示方法、系统及终端 | |
| KR101360999B1 (ko) | 증강현실 기반의 실시간 데이터 제공 방법 및 이를 이용한 휴대단말기 | |
| CN112102481A (zh) | 一种交互模拟场景的构建方法、装置、计算机设备及存储介质 | |
| CN114358112A (zh) | 视频融合方法、计算机程序产品、客户端及存储介质 | |
| WO2023217138A1 (zh) | 一种参数配置方法、装置、设备、存储介质及产品 | |
| CN110662015A (zh) | 用于显示图像的方法及装置 | |
| KR20120074977A (ko) | 음성인식 및 명령을 수행하는 증강현실용 교육자재 및 그 사용방법 | |
| Wang et al. | Enhancing visualisation of anatomical presentation and education using marker-based augmented reality technology on web-based platform | |
| CN114419293B (zh) | 一种增强现实的数据处理方法、装置及设备 | |
| CN114339029B (zh) | 拍摄方法、装置及电子设备 | |
| CN115760886A (zh) | 基于无人机鸟瞰图的地块划分方法、装置及相关设备 | |
| CN112884888B (zh) | 一种基于混合现实的展会展示方法、系统、设备和介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 518000 Room 403, building 4, Shenzhen software industry base, No. 19, 17 and 18, Haitian 1st Road, Binhai community, Yuehai street, Nanshan District, Shenzhen, Guangdong Applicant after: Shenzhen man machine consensus Technology Co.,Ltd. Address before: 30A, building 5, building 1-5, Huating, modern city, No. 17, Nanguang Road, Nanshan street, Nanshan District, Shenzhen City, Guangdong Province Applicant before: Shenzhen Mobile Internet Research Institute Co.,Ltd. |