CN108174183A - 一种基于物联网的vr影像数据控制系统 - Google Patents
一种基于物联网的vr影像数据控制系统 Download PDFInfo
- Publication number
- CN108174183A CN108174183A CN201810025086.1A CN201810025086A CN108174183A CN 108174183 A CN108174183 A CN 108174183A CN 201810025086 A CN201810025086 A CN 201810025086A CN 108174183 A CN108174183 A CN 108174183A
- Authority
- CN
- China
- Prior art keywords
- module
- image
- video
- data
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 claims abstract description 42
- 230000005540 biological transmission Effects 0.000 claims abstract description 17
- 238000004891 communication Methods 0.000 claims abstract description 14
- 230000000694 effects Effects 0.000 claims abstract description 12
- 239000011521 glass Substances 0.000 claims abstract description 11
- 238000006243 chemical reaction Methods 0.000 claims description 26
- 230000003595 spectral effect Effects 0.000 claims description 26
- 238000007405 data analysis Methods 0.000 claims description 18
- 238000001228 spectrum Methods 0.000 claims description 16
- 230000004456 color vision Effects 0.000 claims description 15
- 239000013598 vector Substances 0.000 claims description 15
- 238000012856 packing Methods 0.000 claims description 10
- 230000003993 interaction Effects 0.000 claims description 9
- 238000009499 grossing Methods 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 7
- 238000012800 visualization Methods 0.000 claims description 7
- 238000012512 characterization method Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 claims description 6
- 238000003384 imaging method Methods 0.000 claims description 4
- 238000003706 image smoothing Methods 0.000 claims description 3
- 238000004806 packaging method and process Methods 0.000 claims description 3
- 238000005070 sampling Methods 0.000 claims description 3
- 238000005516 engineering process Methods 0.000 abstract description 15
- 238000010438 heat treatment Methods 0.000 abstract description 2
- 241001269238 Data Species 0.000 abstract 1
- 208000003464 asthenopia Diseases 0.000 abstract 1
- 238000000034 method Methods 0.000 description 10
- 230000008447 perception Effects 0.000 description 4
- 230000035807 sensation Effects 0.000 description 4
- 235000019615 sensations Nutrition 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000000701 chemical imaging Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000016776 visual perception Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000003556 assay Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000012880 independent component analysis Methods 0.000 description 1
- 230000008092 positive effect Effects 0.000 description 1
- 238000000513 principal component analysis Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 210000000697 sensory organ Anatomy 0.000 description 1
- 235000019613 sensory perceptions of taste Nutrition 0.000 description 1
- 230000035923 taste sensation Effects 0.000 description 1
- 238000007794 visualization technique Methods 0.000 description 1
Landscapes
- Image Processing (AREA)
Abstract
本发明属于VR影像技术领域，公开了一种基于物联网的VR影像数据控制系统，包括：摄像模块、视频传输模块、视频源转换模块、视频处理模块、无线通信模块、服务器模块、VR数据解析模块、VR显示模块。本发明通过无线通信模块可以将VR摄像机采集到的数据发送至互联网中，用户能够通过移动终端直接读取VR影像数据，方便简单；同时VR数据解析模块、VR显示模块，实现把发热大的工作移到视频源端，使VR眼镜部分仅仅作为一个显示设备，处理工作尽量小，从而降低了VR眼镜的发热效果，显示效果更加逼近自然，减少视觉疲劳。
Description
技术领域
本发明属于VR影像技术领域，尤其涉及一种基于物联网的VR影像数据控制系统。
背景技术
VR虚拟现实技术是仿真技术的一个重要方向，是仿真技术与计算机图形学、人机接口技术、多媒体技术、传感技术、网络技术等多种技术的集合，是一门富有挑战性的交叉技术前沿学科和研究领域。虚拟现实技术(VR)主要包括模拟环境、感知、自然技能和传感设备等方面。模拟环境是由计算机生成的、实时动态的三维立体逼真图像。感知是指理想的VR应该具有一切人所具有的感知。除计算机图形技术所生成的视觉感知外，还有听觉、触觉、力觉、运动等感知，甚至还包括嗅觉和味觉等，也称为多感知。自然技能是指人的头部转动，眼睛、手势、或其他人体行为动作，由计算机来处理与参与者的动作相适应的数据，并对用户的输入作出实时响应，并分别反馈到用户的五官。传感设备是指三维交互设备；然而，现有VR视频数据获取复杂，同时VR眼镜设备戴用容易出现发热状况，引起不适。
成像技术和光谱技术相结合的高光谱成像技术发展迅速，在互联网领域均获广泛应用，因此，针对其采集的高光谱图像进行处理和分析具有重要应用价值。高光谱图像同时表征被测区域的空间信息和连续光谱信息，即每个谱段均对应一幅二维分布的图像，图像的每个像素又可提取出一条光谱曲线，如何有效分析高光谱图像所承载的丰富信息，将其以可视化的形式表示出来并得以准确判读和应用，是高光谱成像技术领域的关键问题之一。
通常，针对高光谱图像的色彩可视化方法是利用一些降维的数学手段(如主元分析法、独立元分析法等)将多谱段降低为三谱段，从而在红(R)、绿(G)、蓝(B)三通道的显示设备进行显示。但是，这种方法使得图像每个像素的谱段急剧减少，丢失了大量有效信息，且选取出的三谱段并未将人眼视觉系统的色彩感知特性考量在内，与显示设备三通道的响应特性也不匹配，因此会引起色彩失真，进而影响对被测区域的准确判读。此外，不同显示设备之间红、绿、蓝三通道的响应特性各不相同，采用一致的算法及参数进行处理会导致色彩可视化效果因设备而异的状况。
综上，现有技术存在的问题是：现有VR视频数据获取复杂，与让人身临其境有很大差距，同时VR眼睛设备戴用容易出现发热状况，引起不适。现有高光谱图像色彩的显示效果因设备而异，容易引起色彩失真，影响对被测区域准确判读。
发明内容
针对现有技术存在的问题，本发明提供了一种基于物联网的VR影像数据控制系统。
本发明是这样实现的，一种基于物联网的VR影像数据控制系统包括：视频处理模块、VR数据解析模块；所述视频处理模块包括：
视频输入模块，用于接收视频源转换模块发送的RGB视频数据信号；
视频分配模块，用于将RGB视频数据信号按照分别在VR眼镜的左眼显示模块和右显示模块显示进行分解，分解为两部分数据帧视频信号；
数据帧打包模块，用于将两部分数据帧视频信号合并成并行数据，并在并行数据的末尾加入校验字节，分别打包后输入到GTP发送模块；
GTP发送模块，用于将数据帧打包模块打包的数据帧发送至VR数据解析模块；
所述VR数据解析模块包括：
GTP接收模块，用于接收GTP发送模块发送的数据帧；
数据帧解包模块，用于将接收的数据帧解析为两部分数据帧视频信号，并从两部分数据帧视频信号中获取两部分RGB视频数据，发送至VR视频分配模块；
VR视频分配模块，用于接收两部分RGB视频数据，对应分配给VR显示模块显示；
所述VR显示模块将采集的RGB视频数据图像变换成灰度图像；通过下面的表达式进行灰度变换；
Y＝-0.299R+0.587G+0.114B；
Y：像素值，R：红色成分，G：绿色成分，B：蓝色成分。
对灰度图像进行图像平滑处理，接着进行梯度计算，计算在特定的像素和相邻像素之间的亮度值的程度差；将图像的像素根据亮度值分成若干个图层，每一图层中的图像的边界都是由光谱曲线构成；
对于亮度最低的图层以及亮度最大的图层，先进行直方图均衡化处理，再去除噪点；对于其它的图层，先去除噪点，再进行直方图均衡化处理；
将处理过后的若干个所述图层合并为一幅增强图像；
再进行：
提取高光谱图像每个像素的光谱曲线；
将平滑后的光谱曲线结合CIE1931标准色度系统的色匹配函数计算至CIEXYZ三刺激值，根据显示设备的白点将每个像素的CIEXYZ三刺激值计算至均匀色彩感知空间CIEL*C*h*的明度、彩度和色调，并根据色彩复现需求设置明度系数、彩度系数和色调系数；
将调制后的明度、彩度和色调结合显示设备三通道的伽马系数和原色三刺激值，计算至每个像素的数字驱动值，实现色彩显示。
进一步，平滑化的剪裁图像的特定像素坐标(a，b))的亮度值表示为f(a，b)时，使用下面所示的表达式计算所有像素的梯度矢量；
梯度矢量表示在特定像素和相邻像素之间亮度值的程度差的物理量；
基于式(1)所示的梯度矢量的x成分的值和式(2)中所示的梯度矢量的y成分的值，通过式(3)中所示的表达式可计算梯度矢量的方向θ；
通过图像数据的离散化计算标准图像处理中的梯度计算，并且使用如式(4)和式(5)、式(6)中所示的表达式中的微分计算相邻像素之间的梯度；
进一步，将图像的像素根据亮度值分成若干个图层，每一图层中的图像的边界都是由光谱曲线构成，具体包括：假设图像I的每个像素的亮度值i＝I(x,y)，将图像I以一组阈值i1,i2,i3分为I0图层、I1图层、I2图层和I3图层；
对于所述I0图层，其中每个像素的亮度值i满足：0≤i＜i1；
对于所述I1图层，其中每个像素的亮度值i满足：i1≤i＜i2；
对于所述I2图层，其中每个像素的亮度值i满足：i2≤i＜i3；
对于所述I3图层，其中每个像素的亮度值i满足：i3≤i≤255。
进一步，所述实现色彩显示，包括以下步骤：
步骤一，对于高光谱图像数据的每个像素，由各谱段的灰度值计算出辐亮度值，并进行归一化构成一条光谱曲线；
步骤二，针对每个像素在步骤一所获的光谱曲线，采用Savitzky-Golay滤波器进行平滑处理，在保留较多曲线特征的基础上消除光谱噪声，得到各像素平滑后的光谱曲线
步骤三，将步骤二所获各像素平滑后的光谱曲线结合CIE1931标准色度系统的色匹配函数采用下式计算得CIE1931标准色度系统下的CIEXYZ三刺激值(X,Y,Z)，其中Δλ是成像光谱仪器的光谱采样间隔；
步骤四，根据标准照明体D65的三刺激值(XD65,YD65,ZD65)，通过下式将步骤三所获每个像素的CIEXYZ三刺激值转换至均匀色彩感知空间CIEL*C*h*，获得三个色彩感知参量，即明度彩度及色调h1；
其中，
XD65＝95.047,YD65＝100,ZD65＝108.883；
步骤五，设置明度系数kL、彩度系数kC和色调系数kh的取值，通过下式调制步骤四所获各像素的明度彩度及色调h1，得到调制后的色彩感知参量，即明度彩度及色调h2，使可视化效果满足保真复现需求，则kL＝kC＝1，kh＝0，改变kL实现调节图像明暗的需求，改变kC实现调节图像鲜艳程度的需求，改变kh实现调节图像白平衡的需求；
步骤六，根据显示设备的白点三刺激值(XW,YW,ZW)，通过下式，将步骤五所获各像素的明度彩度及色调h2转换至在显示设备上待显示的CIEXYZ值(X',Y',Z')；
步骤七，根据显示设备红、绿、蓝三通道的原色三刺激值(XRmax,YRmax,ZRmax)、(XGmax,YGmax,ZGmax、(XBmax,YBmax,ZBmax)结合三通道的伽马系数γR、γG、γB，建立起如下式的特征化模型，通过特征化模型，步骤六所获各像素的CIEXYZ值(X',Y',Z')计算至对应的数字驱动值(dR,dG,dB)，即完成了高光谱图像的色彩可视化，其中N是显示设备单通道的存储位数；
进一步，所述基于物联网的VR影像数据控制系统还包括：
摄像模块、视频传输模块、视频源转换模块、无线通信模块、服务器模块；
摄像模块，与视频传输模块连接，用于采集现场VR图像数据的多台VR摄像机；
视频传输模块，与摄像模块、视频源转换模块连接，用于将视频数据信息传输至视频源转换模块；
视频源转换模块，与视频传输模块、视频处理模块连接，用于接收视频传输模块传输的视频数据信息，将视频数据信息转换为RGB视频数据信号，并发送至视频处理模块；
无线通信模块，与视频处理模块连接，用于实现每台VR摄像机与物联网进行数据交互的无线通信模块；
服务器模块，与视频处理模块连接，用于与物联网进行数据交互，并存储每台VR摄像机输出信号的服务器。
进一步，所述视频处理模块，与视频源转换模块、无线通信模块、服务器模块、VR数据解析模块连接，用于接收RGB视频数据信号，将RGB视频数据信号分解为在VR眼镜的左眼显示屏和右眼显示屏显示的两部分数据帧视频信号，并将两部分数据帧视频信号分别打包发送给VR数据解析模块。
本发明的优点及积极效果为：本发明通过无线通信模块可以将VR摄像机采集到的数据发送至互联网中，用户能够通过移动直接读取VR影像数据，方便简单；同时VR数据解析模块、VR显示模块，实现把发热大的工作移到视频源端，使VR眼镜部分仅仅作为一个显示设备，处理工作尽量小，从而降低了VR眼镜的发热效果，提高了显示效果。
本发明提供的VR显示模块的高光谱图像的色彩显示，适用于VR影像数据控制系统显示设备的高光谱图像呈现过程，可以有效引入不同显示设备间表色参数方面的影响，使不同设备以不同数字驱动值显示相同的色彩感知参量，有效解决了色彩显示效果因设备而异的问题；此外，本发明提出了以明度因数kL、彩度系数kC和色调系数kh调节色彩感知参量的方法，可以通过制定对明度、彩度、色调等参量的调制要求，满足不同类型的色彩复现需求。本发明针对高光谱图像进行色彩可显示，色彩复现结果与人眼视觉感知一致性好，方法实施简单，实用，适用性强。
本发明通过平滑处理，和梯度计算可以提供图片的精度，提升图片清晰度；利用直方图均衡化算法执行效率高、对低对比度图像增强效果好的特点，结合噪点分类可以平衡光照不均匀图像的亮度的特性，将图像的像素根据亮度值分成若干个图层，并在保持连通性不变的每层内实施噪点分类去除，采用不同算法分别对原图各部分进行处理，将结果进行几何叠加后，得到最终图像，降低了图像的全局亮度差异，增强了图像对比度，增强了图像的暗部细节，基本保留了图像的亮部细节，同时有效地抑制了噪声，提升了视觉的可视度。
附图说明
图1是本发明实施例提供的基于物联网的VR影像数据控制系统结构图。
图中：1、摄像模块；2、视频传输模块；3、视频源转换模块；4、视频处理模块；5、无线通信模块；6、服务器模块；7、VR数据解析模块；8、VR显示模块。
具体实施方式
为能进一步了解本发明的发明内容、特点及功效，兹例举以下实施例，并配合附图详细说明如下。
下面结合附图对本发明的结构作详细的描述。
如图1所示，本发明提供的基于物联网的VR影像数据控制系统包括：
摄像模块1，与视频传输模块2连接，用于采集现场VR图像数据的多台VR摄像机；
视频传输模块2，与摄像模块1、视频源转换模块3连接，用于将视频数据信息传输至视频源转换模块3；
视频源转换模块3，与视频传输模块2、视频处理模块4连接，用于接收视频传输模块2传输的视频数据信息，将视频数据信息转换为RGB视频数据信号，并发送至视频处理模块4；
视频处理模块4，与视频源转换模块3、无线通信模块5、服务器模块6、VR数据解析模块7连接，用于接收RGB视频数据信号，将RGB视频数据信号分解为在VR眼镜的左眼显示屏和右眼显示屏显示的两部分数据帧视频信号，并将两部分数据帧视频信号分别打包发送给VR数据解析模块7；
无线通信模块5，与视频处理模块4连接，用于实现每台VR摄像机与物联网进行数据交互的无线通信模块；
服务器模块6，与视频处理模块4连接，用于与物联网进行数据交互，并存储每台VR摄像机输出信号的服务器；
VR数据解析模块7，与视频处理模块4连接，用于接收视频处理模块4传输的数据帧视频信号，并解析数据帧视频信号获得RGB视频数据，传输给VR显示模块8；
VR显示模块8，与VR数据解析模块7连接，用于显示VR数据解析模块发送的RGB视频数据。
本发明实施例提供的视频处理模块4包括：视频输入模块、视频分配模块、数据帧打包模块、GTP发送模块；
视频输入模块，用于接收视频源转换模块发送的RGB视频数据信号；
视频分配模块，用于将RGB视频数据信号按照分别在VR眼镜的左眼显示模块和右眼显示模块显示进行分解，分解为两部分数据帧视频信号；
数据帧打包模块，用于将两部分数据帧视频信号合并成并行数据，并在并行数据的末尾加入校验字节，分别打包后输入到GTP发送模块；
GTP发送模块，用于将数据帧打包模块打包的数据帧发送至VR数据解析模块7。
本发明提供的VR数据解析模块7包括：GTP接收模块、数据帧解包模块、VR视频分配模块；
GTP接收模块，用于接收GTP发送模块发送的数据帧；
数据帧解包模块，用于将接收的数据帧解析为两部分数据帧视频信号，并从两部分数据帧视频信号中获取两部分RGB视频数据，发送至VR视频分配模块；
VR视频分配模块，用于接收两部分RGB视频数据，对应分配给VR显示模块8显示。
本发明摄像模块1将采集的视频通过视频传输模块2传输给视频源转换模块3转换为RGB视频数据信号，并发送至视频处理模块4；视频处理模块4对视频源转换模块3采集的数据进行处理分析，发送给VR数据解析模块7解析数据帧视频信号获得RGB视频数据，传输给VR显示模块8进行显示，通过无线通信模块5实现每台VR摄像机与物联网进行数据交互的无线通信模块；通过服务器模块6与物联网进行数据交互，并存储每台VR摄像机输出信号。
下面结合具体分析对本发明作进一步描述。
所述VR显示模块将采集的RGB视频数据图像变换成灰度图像；通过下面的表达式进行灰度变换；
Y＝-0.299R+0.587G+0.114B；
Y：像素值，R：红色成分，G：绿色成分，B：蓝色成分。
对灰度图像进行图像平滑处理，接着进行梯度计算，计算在特定的像素和相邻像素之间的亮度值的程度差；将图像的像素根据亮度值分成若干个图层，每一图层中的图像的边界都是由光谱曲线构成；
对于亮度最低的图层以及亮度最大的图层，先进行直方图均衡化处理，再去除噪点；对于其它的图层，先去除噪点，再进行直方图均衡化处理；
将处理过后的若干个所述图层合并为一幅增强图像；
再进行：
提取高光谱图像每个像素的光谱曲线；
将平滑后的光谱曲线结合CIE1931标准色度系统的色匹配函数计算至CIEXYZ三刺激值，根据显示设备的白点将每个像素的CIEXYZ三刺激值计算至均匀色彩感知空间CIEL*C*h*的明度、彩度和色调，并根据色彩复现需求设置明度系数、彩度系数和色调系数；
将调制后的明度、彩度和色调结合显示设备三通道的伽马系数和原色三刺激值，计算至每个像素的数字驱动值，实现色彩显示。
进一步，平滑化的剪裁图像的特定像素坐标(a，b))的亮度值表示为f(a，b)时，使用下面所示的表达式计算所有像素的梯度矢量；
梯度矢量表示在特定像素和相邻像素之间亮度值的程度差的物理量；
基于式(1)所示的梯度矢量的x成分的值和式(2)中所示的梯度矢量的y成分的值，通过式(3)中所示的表达式可计算梯度矢量的方向θ；
通过图像数据的离散化计算标准图像处理中的梯度计算，并且使用如式(4)和式(5)、式(6)中所示的表达式中的微分计算相邻像素之间的梯度；
进一步，将图像的像素根据亮度值分成若干个图层，每一图层中的图像的边界都是由光谱曲线构成，具体包括：假设图像I的每个像素的亮度值i＝I(x,y)，将图像I以一组阈值i1,i2,i3分为I0图层、I1图层、I2图层和I3图层；
对于所述I0图层，其中每个像素的亮度值i满足：0≤i＜i1；
对于所述I1图层，其中每个像素的亮度值i满足：i1≤i＜i2；
对于所述I2图层，其中每个像素的亮度值i满足：i2≤i＜i3；
对于所述I3图层，其中每个像素的亮度值i满足：i3≤i≤255。
进一步，所述实现色彩显示，包括以下步骤：
步骤一，对于高光谱图像数据的每个像素，由各谱段的灰度值计算出辐亮度值，并进行归一化构成一条光谱曲线；
步骤二，针对每个像素在步骤一所获的光谱曲线，采用Savitzky-Golay滤波器进行平滑处理，在保留较多曲线特征的基础上消除光谱噪声，得到各像素平滑后的光谱曲线
步骤三，将步骤二所获各像素平滑后的光谱曲线结合CIE1931标准色度系统的色匹配函数采用下式计算得CIE1931标准色度系统下的CIEXYZ三刺激值(X,Y,Z)，其中Δλ是成像光谱仪器的光谱采样间隔；
步骤四，根据标准照明体D65的三刺激值(XD65,YD65,ZD65)，通过下式将步骤三所获每个像素的CIEXYZ三刺激值转换至均匀色彩感知空间CIEL*C*h*，获得三个色彩感知参量，即明度彩度及色调h1；
其中，
XD65＝95.047,YD65＝100,ZD65＝108.883；
步骤五，设置明度系数kL、彩度系数kC和色调系数kh的取值，通过下式调制步骤四所获各像素的明度彩度及色调h1，得到调制后的色彩感知参量，即明度彩度及色调h2，使可视化效果满足保真复现需求，则kL＝kC＝1，kh＝0，改变kL实现调节图像明暗的需求，改变kC实现调节图像鲜艳程度的需求，改变kh实现调节图像白平衡的需求；
步骤六，根据显示设备的白点三刺激值(XW,YW,ZW)，通过下式，将步骤五所获各像素的明度彩度及色调h2转换至在显示设备上待显示的CIEXYZ值(X',Y',Z')；
步骤七，根据显示设备红、绿、蓝三通道的原色三刺激值(XRmax,YRmax,ZRmax)、(XGmax,YGmax,ZGmax、(XBmax,YBmax,ZBmax)结合三通道的伽马系数γR、γG、γB，建立起如下式的特征化模型，通过特征化模型，步骤六所获各像素的CIEXYZ值(X',Y',Z')计算至对应的数字驱动值(dR,dG,dB)，即完成了高光谱图像的色彩可视化，其中N是显示设备单通道的存储位数；
以上所述仅是对本发明的较佳实施例而已，并非对本发明作任何形式上的限制，凡是依据本发明的技术实质对以上实施例所做的任何简单修改，等同变化与修饰，均属于本发明技术方案的范围内。
Claims (6)
1.一种基于物联网的VR影像数据控制系统，其特征在于，所述基于物联网的VR影像数据控制系统包括视频处理模块、VR数据解析模块；所述视频处理模块包括：
视频输入模块，用于接收视频源转换模块发送的RGB视频数据信号；
视频分配模块，用于将RGB视频数据信号按照分别在VR眼镜的左眼显示模块和右显示模块显示进行分解，分解为两部分数据帧视频信号；
数据帧打包模块，用于将两部分数据帧视频信号合并成并行数据，并在并行数据的末尾加入校验字节，分别打包后输入到GTP发送模块；
GTP发送模块，用于将数据帧打包模块打包的数据帧发送至VR数据解析模块；
所述VR数据解析模块包括：
GTP接收模块，用于接收GTP发送模块发送的数据帧；
数据帧解包模块，用于将接收的数据帧解析为两部分数据帧视频信号，并从两部分数据帧视频信号中获取两部分RGB视频数据，发送至VR视频分配模块；
VR视频分配模块，用于接收两部分RGB视频数据，对应分配给VR显示模块显示；
所述VR显示模块将采集的RGB视频数据图像变换成灰度图像；通过下面的表达式进行灰度变换；
Y＝-0.299R+0.587G+0.114B；
Y：像素值，R：红色成分，G：绿色成分，B：蓝色成分。
对灰度图像进行图像平滑处理，接着进行梯度计算，计算在特定的像素和相邻像素之间的亮度值的程度差；将图像的像素根据亮度值分成若干个图层，每一图层中的图像的边界都是由光谱曲线构成；
对于亮度最低的图层以及亮度最大的图层，先进行直方图均衡化处理，再去除噪点；对于其它的图层，先去除噪点，再进行直方图均衡化处理；
将处理过后的若干个所述图层合并为一幅增强图像；
再进行：
提取高光谱图像每个像素的光谱曲线；
将平滑后的光谱曲线结合CIE1931标准色度系统的色匹配函数计算至CIEXYZ三刺激值，根据显示设备的白点将每个像素的CIEXYZ三刺激值计算至均匀色彩感知空间CIEL*C*h*的明度、彩度和色调，并根据色彩复现需求设置明度系数、彩度系数和色调系数；
将调制后的明度、彩度和色调结合显示设备三通道的伽马系数和原色三刺激值，计算至每个像素的数字驱动值，实现色彩显示。
2.如权利要求1所述基于物联网的VR影像数据控制系统，其特征在于，
平滑化的剪裁图像的特定像素坐标(a，b))的亮度值表示为f(a，b)时，使用下面所示的表达式计算所有像素的梯度矢量；
梯度矢量表示在特定像素和相邻像素之间亮度值的程度差的物理量；
基于式(1)所示的梯度矢量的x成分的值和式(2)中所示的梯度矢量的y成分的值，通过式(3)中所示的表达式可计算梯度矢量的方向θ；
通过图像数据的离散化计算标准图像处理中的梯度计算，并且使用如式(4)和式(5)、式(6)中所示的表达式中的微分计算相邻像素之间的梯度；
3.如权利要求1所述基于物联网的VR影像数据控制系统，其特征在于，将图像的像素根据亮度值分成若干个图层，每一图层中的图像的边界都是由光谱曲线构成，具体包括：假设图像I的每个像素的亮度值i＝I(x,y)，将图像I以一组阈值i1,i2,i3分为I0图层、I1图层、I2图层和I3图层；
对于所述I0图层，其中每个像素的亮度值i满足：0≤i＜i1；
对于所述I1图层，其中每个像素的亮度值i满足：i1≤i＜i2；
对于所述I2图层，其中每个像素的亮度值i满足：i2≤i＜i3；
对于所述I3图层，其中每个像素的亮度值i满足：i3≤i≤255。
4.如权利要求1所述基于物联网的VR影像数据控制系统，其特征在于，所述实现色彩显示，包括以下步骤：
步骤一，对于高光谱图像数据的每个像素，由各谱段的灰度值计算出辐亮度值，并进行归一化构成一条光谱曲线；
步骤二，针对每个像素在步骤一所获的光谱曲线，采用Savitzky-Golay滤波器进行平滑处理，在保留较多曲线特征的基础上消除光谱噪声，得到各像素平滑后的光谱曲线
步骤三，将步骤二所获各像素平滑后的光谱曲线结合CIE1931标准色度系统的色匹配函数采用下式计算得CIE1931标准色度系统下的CIEXYZ三刺激值(X,Y,Z)，其中Δλ是成像光谱仪器的光谱采样间隔；
步骤四，根据标准照明体D65的三刺激值(XD65,YD65,ZD65)，通过下式将步骤三所获每个像素的CIEXYZ三刺激值转换至均匀色彩感知空间CIEL*C*h*，获得三个色彩感知参量，即明度彩度及色调h1；
其中，
XD65＝95.047,YD65＝100,ZD65＝108.883；
步骤五，设置明度系数kL、彩度系数kC和色调系数kh的取值，通过下式调制步骤四所获各像素的明度彩度及色调h1，得到调制后的色彩感知参量，即明度彩度及色调h2，使可视化效果满足保真复现需求，则kL＝kC＝1，kh＝0，改变kL实现调节图像明暗的需求，改变kC实现调节图像鲜艳程度的需求，改变kh实现调节图像白平衡的需求；
步骤六，根据显示设备的白点三刺激值(XW,YW,ZW)，通过下式，将步骤五所获各像素的明度彩度及色调h2转换至在显示设备上待显示的CIEXYZ值(X',Y',Z')；
步骤七，根据显示设备红、绿、蓝三通道的原色三刺激值(XRmax,YRmax,ZRmax)、(XGmax,YGmax,ZGmax、(XBmax,YBmax,ZBmax)结合三通道的伽马系数γR、γG、γB，建立起如下式的特征化模型，通过特征化模型，步骤六所获各像素的CIEXYZ值(X',Y',Z')计算至对应的数字驱动值(dR,dG,dB)，即完成了高光谱图像的色彩可视化，其中N是显示设备单通道的存储位数；
5.如权利要求1所述基于物联网的VR影像数据控制系统，其特征在于，所述基于物联网的VR影像数据控制系统还包括：
摄像模块、视频传输模块、视频源转换模块、无线通信模块、服务器模块；
摄像模块，与视频传输模块连接，用于采集现场VR图像数据的多台VR摄像机；
视频传输模块，与摄像模块、视频源转换模块连接，用于将视频数据信息传输至视频源转换模块；
视频源转换模块，与视频传输模块、视频处理模块连接，用于接收视频传输模块传输的视频数据信息，将视频数据信息转换为RGB视频数据信号，并发送至视频处理模块；
无线通信模块，与视频处理模块连接，用于实现每台VR摄像机与物联网进行数据交互的无线通信模块；
服务器模块，与视频处理模块连接，用于与物联网进行数据交互，并存储每台VR摄像机输出信号的服务器。
6.如权利要求1所述基于物联网的VR影像数据控制系统，其特征在于，
所述视频处理模块，与视频源转换模块、无线通信模块、服务器模块、VR数据解析模块连接，用于接收RGB视频数据信号，将RGB视频数据信号分解为在VR眼镜的左眼显示屏和右眼显示屏显示的两部分数据帧视频信号，并将两部分数据帧视频信号分别打包发送给VR数据解析模块。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810025086.1A CN108174183A (zh) | 2018-01-11 | 2018-01-11 | 一种基于物联网的vr影像数据控制系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810025086.1A CN108174183A (zh) | 2018-01-11 | 2018-01-11 | 一种基于物联网的vr影像数据控制系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108174183A true CN108174183A (zh) | 2018-06-15 |
Family
ID=62518149
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810025086.1A Pending CN108174183A (zh) | 2018-01-11 | 2018-01-11 | 一种基于物联网的vr影像数据控制系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108174183A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109686164A (zh) * | 2019-01-28 | 2019-04-26 | 温州大学 | 一种基于虚拟现实技术的护理教学实训系统 |
| CN110267029A (zh) * | 2019-07-22 | 2019-09-20 | 广州铭维软件有限公司 | 一种基于ar眼镜的远程全息人物显示技术 |
| CN112055264A (zh) * | 2019-06-06 | 2020-12-08 | 舜宇光学（浙江）研究院有限公司 | 一种视频数据拆分方法及其系统以及电子设备和计算系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102393959A (zh) * | 2010-06-28 | 2012-03-28 | 索尼公司 | 图像处理设备、图像处理方法和图像处理程序 |
| US20140098258A1 (en) * | 2011-05-26 | 2014-04-10 | Typonteq Co., Ltd. | Color distortion correction method and device for imaging systems and image output systems |
| CN104318542A (zh) * | 2014-11-20 | 2015-01-28 | 上海华力创通半导体有限公司 | 图像增强处理算法 |
| CN105046646A (zh) * | 2015-05-29 | 2015-11-11 | 西安电子科技大学 | 一种高光谱图像的色彩可视化的方法 |
| CN106791767A (zh) * | 2016-12-15 | 2017-05-31 | 天津知音网络科技有限公司 | Vr视频处理系统 |
| CN107547882A (zh) * | 2016-06-23 | 2018-01-05 | 天津微莱福科技有限公司 | 一种vr视频数据新处理系统 |
-
2018
- 2018-01-11 CN CN201810025086.1A patent/CN108174183A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102393959A (zh) * | 2010-06-28 | 2012-03-28 | 索尼公司 | 图像处理设备、图像处理方法和图像处理程序 |
| US20140098258A1 (en) * | 2011-05-26 | 2014-04-10 | Typonteq Co., Ltd. | Color distortion correction method and device for imaging systems and image output systems |
| CN104318542A (zh) * | 2014-11-20 | 2015-01-28 | 上海华力创通半导体有限公司 | 图像增强处理算法 |
| CN105046646A (zh) * | 2015-05-29 | 2015-11-11 | 西安电子科技大学 | 一种高光谱图像的色彩可视化的方法 |
| CN107547882A (zh) * | 2016-06-23 | 2018-01-05 | 天津微莱福科技有限公司 | 一种vr视频数据新处理系统 |
| CN106791767A (zh) * | 2016-12-15 | 2017-05-31 | 天津知音网络科技有限公司 | Vr视频处理系统 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109686164A (zh) * | 2019-01-28 | 2019-04-26 | 温州大学 | 一种基于虚拟现实技术的护理教学实训系统 |
| CN112055264A (zh) * | 2019-06-06 | 2020-12-08 | 舜宇光学（浙江）研究院有限公司 | 一种视频数据拆分方法及其系统以及电子设备和计算系统 |
| CN112055264B (zh) * | 2019-06-06 | 2022-11-01 | 舜宇光学（浙江）研究院有限公司 | 一种视频数据拆分方法及其系统以及电子设备和计算系统 |
| CN110267029A (zh) * | 2019-07-22 | 2019-09-20 | 广州铭维软件有限公司 | 一种基于ar眼镜的远程全息人物显示技术 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Smith et al. | Apparent greyscale: A simple and fast conversion to perceptually accurate images and video | |
| Liu et al. | CID: IQ–a new image quality database | |
| CN105046646B (zh) | 一种高光谱图像的色彩可视化的方法 | |
| Reinhard et al. | Calibrated image appearance reproduction. | |
| KR102662177B1 (ko) | 컬러-보존 스펙트럼 재성형을 위한 방법 및 장치 | |
| JPH06333039A (ja) | エアブラシ方法及びエアブラシ装置 | |
| WO2019092463A1 (en) | Video image processing | |
| CN108174183A (zh) | 一种基于物联网的vr影像数据控制系统 | |
| WO2019090580A1 (en) | System and method for image dynamic range adjusting | |
| CN106683082A (zh) | 一种基于四元数的全参考彩色图像质量评价方法 | |
| JPH11250227A (ja) | 顔領域補正方法、顔領域補正装置および顔領域補正プログラムを記録した記録媒体 | |
| Sanders et al. | Producing anaglyphs from synthetic images | |
| WO2015029633A1 (ja) | 液晶表示装置および液晶表示装置における画像表示方法 | |
| CN105654925B (zh) | 高动态范围图像处理方法及系统 | |
| CN107833256B (zh) | 用于数字图像的伪着色的方法以及装置 | |
| Pölönen et al. | Color asymmetry in 3D imaging: Influence on the viewing experience | |
| Kuang et al. | iCAM06, HDR, and image appearance | |
| CN102360493A (zh) | 基于色貌模型的灰度与伪彩图像的融合显示方法 | |
| Kumar et al. | Grey level to RGB using YCbCr color space Technique | |
| Bonanomi et al. | From printed color to image appearance: tool for advertising assessment | |
| KR20090060029A (ko) | 영상 시퀀스 디스플레이에 대한 몰입감 향상 방법 및시스템 | |
| Guo et al. | Color difference matrix index for tone-mapped images quality assessment | |
| JP2016025635A (ja) | 画像処理装置およびその方法 | |
| WO2022103117A1 (en) | Perceptual color enhancement based on properties of responses of human vision system to color stimulus | |
| CN114140580B (zh) | 一种手部三维模型的纹理调节方法及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180615 |
|
| RJ01 | Rejection of invention patent application after publication |