CN110058696A - 一种虚拟实景实现方法及其使用方法和相关方法装置 - Google Patents

Abstract

本发明提供的虚拟实景实现方法通过对比进行感知的方位数据或感知到的目的的方位数据，为用户展现匹配的视频、照片、音频及其它传感器感知原数据，实现已拍摄视频、实景及其它感知数据的仿真体验，达到身临其境的效果，可用于模拟或远程旅游、鉴赏以及交通、天气等各种现场监看和设备、系统监控、回看等。并由此衍生出包含方位数据的动静态感知数据集及其组合，在可视、可听多媒体数据及其它传感器感知原数据中嵌入相关方位数据，可实现更好的保存和展现数据。由此再衍生出一种感知数据采集方法、一种多感知设备同时感知数据采集方法及相应一种感知采集装置等，实现多媒体及其它传感器感知数据及相关方位数据的感知采集，从而更完整的记录了数据。

Description

一种虚拟实景实现方法及其使用方法和相关方法装置

技术领域

本发明属于信息技术领域，尤其涉及一种虚拟实景实现方法及上述虚拟实景实现方法的使用方法，还涉及一种包含方位数据的动态多媒体数据、一种包含方位数据的动态多媒体数据组合、静态及其组合、一种感知数据采集方法及多感知设备同时感知数据采集方法及一种感知采集装置。

背景技术

视频监控系统目前已遍布人群密集的公共区域，通过摄像头可以实时监看各处情况也可方便的回看。私人在家里安装摄像头并通过互联网进行查看的应用也越来越多，可以随时上网监看。上述实现了实时的及已拍摄视频的调看，尽管很方便，但和现实世界中的实际查看的体验是完全不同的。目前虚拟现实（VR）和增强现实（AR）等技术也只是把视频的查看通过可穿戴设备更好的展现出来而已，和现实世界中的实际查看的体验仍然有明显不同。这些不同主要就是视频是推送的，和用户本身没有什么关系。在游戏当中，包括一些使用虚拟现实（VR）和增强现实（AR）等技术的游戏当中，可以根据用户的动作信息包括由此带来的虚拟位置来提供指定的场景视频，但场景视频本身是不带方位信息的，和用户的方位无法进行对比，无法真正从用户的视角或从被查看的视角来进行展现（只能模拟），因此和现实世界中的实际查看的体验是有区别的。

视频、音频数据等通常被成为多媒体数据，可以可视、可听的直观形式进行展现，这些数据的采集一般通过光学传感器、拾音器等进行采集。而计算机仿真的人类感官还有触觉、味觉、嗅觉等，可通过各自相应的传感器进行感知采集，除此之外，还有很多其它传感器类型，比如力敏、温敏传感器等，这些传感器也可感知采集相应的数据，其展现为可以直观感受的形式有的目前还没有相应的技术，但展现为图文显然是没有问题的。目前的视频、音频数据和方位数据是没有关系的，当然我们可以另行标注，像苹果手机拍的照片就可以在属性里标注拍摄的地址，而有的直接将人工设定地址直接叠加到照片或视频上，由于其不易分离只能肉眼查看，显然也不能称为是数据。目前的摄像机、录音笔等摄录动态数据的设备也没有能够把方位数据嵌入的。有关的概念和技术原理在这里就不一一详述，具体可以查阅相关的文献或其它公开资料。

发明内容

本发明的目的首先要提供一种用户体验比较好的虚拟实景方法，可以根据用户查看的方位或观察目标被用户查看的方位来提供匹配的视频等，可以更好的模拟用户真实环境下的体验，甚至可以满足真实环境下用户无法或难以感受的体验。其技术方案如下：

对比用户当前要实际或虚拟进行感知的方位数据与已制成和/或当前正在制成的视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知原数据被实际或虚拟感知的方位数据。实际进行感知就是现实世界的真实环境中进行感知，这是的方位数据就是用户真实的方位数据，虚拟进行感知则可以是在模拟/仿真环境中也可以是完全虚拟的环境中，这时的方位数据一般需要换算，对比只能对比同种方位数据，比如是同种实际方位数据或是同种虚拟方位数据，如果不同就需要转换。对比可以是已制成的各种数据，比如已拍摄的视频、音频，取数据本身具有的或关联的方位数据来进行对比，对比也可以是正在制成的视频，比如视频监控系统正在实时拍摄的视频，这种情况只能对比正在实时拍摄的视频的方位数据，在展现时也只能提供当前正在实时拍摄的视频，而非已拍好的视频。然后为该用户展现经对比匹配的上述原数据（比如视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知数据，这里之所以称为原数据一是为了和方位数据及后面提到其它数据相区别，二是因为这是感知采集的本原数据）、上述方位数据（比如用户当前要实际或虚拟进行感知的方位数据、原数据被实际或虚拟感知的方位数据），也可以是由前述数据加工比如分析计算获得的数据以及关联的其它数据，可以是全部也可以是部分，可以根据实际需要来定。前面的方案是对比用户自身的方位数据（包括位置及方向等，说明见后文），也可以对比被观测目标的方位，在现实中用户无法查看和查看起来比较困难或受限的情况中用起来效果更好，比如在一个景观游人在现实中只能远观，在本方法中可以通过直升机、无人机或远距离摄像机拍摄视频，用户根据目标来选择需要的视频，实现近距离查看。即对比用户当前要实际或虚拟感知到的目的（即要查看的目标）的方位数据与已制成和/或当前正在制成的视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知原数据中被实际或虚拟感知到的目的的方位数据，然后为该用户展现经对比匹配的上述原数据、上述方位数据、由前述数据加工获得的数据和/或关联的其它数据的全部或部分。方位数据可以包括位置数据及方向（即视角）数据，如果是用户的方位，即用户的位置及视角，如果是观测目标，则是观测目标的位置及被观测的视角。匹配可以为完全匹配或最接近匹配或近似匹配，后文有解释，很多情况都是解释在后文中，不再一一说明。上述原数据与上述方位数据是整合在一起的或是分别存放的或是部分整合在一起部分分别存放的，整合在一起时使用起来比较方便，分别存放则具有较大的灵活性，可以根据需要采用。展现的可以仅为原数据或还包含全部/部分其它数据（比如方位数据、关联的其它数据等），展现的为不少于两种原数据的组合（比如视频和音频的组合，视频和图片的组合），可以互为补充，增加展现的效果。展现是可以以可视、可听、可闻、可触感、可尝味、使受力、使运动或其它模拟方式或其它仿真方式（比如类似于4D电影的方式）的展现，前5种是仿真人的五种主要感觉，其实还有很多其它感知方式，其中有些是人类本身也具有的。展现可以是通过耳机、眼镜、头盔、腕表、其它可穿戴设备、电视机、电脑、智能手机、电影放映系统、拼接大屏幕系统、曲面大屏、VR系统、AR系统和/或仿真系统展现的，这些是目前常见的一些展现的硬件。其它传感器可以为压力传感器、位置传感器、液面传感器、能耗传感器、速度传感器、热敏传感器、加速度传感器、射线辐射传感器、振动传感器、磁敏传感器、真空度传感器和/或生物传感器（视频、照片是有光学传感器感知采集的，同样其它传感器也可以感知采集相应的数据），还有一些其它类型的传感器，这里不一一列举。由前述数据加工获得的数据可以为在前述数据基础上通过分析计算获得的距离数据（两个观测目标之间的距离）/定位数据（某个观测目标的位置）/状态评判数据（正常、非正常的评判结论）/综合评价数据，比如在显示视频的同时进行面部识别、车牌识别，计算其位置、移动速度等，可以从丰富内容的角度实现更好的展现。匹配可以是指对比双方同种方位数据（都是同种实际方位数据或都是同种虚拟环境下的方位数据）的相差在允许的范围内，不同种类的方位数据则需要转换为同种后再进行匹配，可以分以下几种情况，匹配也可以是指对比双方其中一方虚拟的方位数据对应的实际的方位数据与另一方实际的方位数据相差在允许的范围内，匹配还可以是指经对比其中一方实际的方位数据对应的虚拟的方位数据与另一方虚拟的方位数据相差在允许的范围内。展现速度和方位变化速度要实现匹配则可以达到更好的展现效果，可以是通过调节已制成的原数据的展现速度实现与该用户进行感知的方位或感知到的目的的方位变化速度匹配（用户移动慢时提供的视频播放速度也随之慢、快时随之快），可以是通过同步调节正在制成原数据的相关感知设备/装置实现与该用户进行感知的方位或感知到的目的的方位变化速度匹配（用户移动时实时摄录设备也随之移动，用户移动快实时摄录设备移动也快）。用户当前要实际或虚拟进行感知的方位数据和/或上述原数据被实际或虚拟感知的方位数据全部或部分可以是通过具有相关功能的工具测量（比如测量到基准点的距离后就可以得到方位）的或是通过相关的定位系统如GPS北斗定位系统测量的或是根据相关的原数据计算得出的（比如直接通过视频本身可以计算），用户当前要虚拟进行感知的方位数据和/或上述原数据被虚拟感知的方位数据全部或部分可以是通过操作相应的操纵用实物（如操作杆、方向盘）和/或程序界面（如类似于游戏界面）实现控制并提供的，用户当前要实际或虚拟感知到的目的的方位数据和/或原数据中被实际或虚拟感知到的目的的方位数据全部或部分也可以是通过具有相关功能的工具测量的或是通过相关的定位系统测量的或是根据相关的原数据计算得出的，用户当前要虚拟感知到的目的的方位数据和/或原数据中被虚拟感知到的目的的方位数据全部或部分也可以是通过操作相应的操纵用实物和/或程序界面实现控制并提供的。上述正在制成的视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据可以是通过固定位置和/或移动位置的感知设备实时采集的，上述已制成或正在制成的视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据可以是通过不少于两台感知设备同时采集的，比如人就是用两只眼镜看世界、录音棚是用多种录音设备录下各种声音。上述关联（关联的数据的这个关联）也可以是经上述相同的对比方法（即前面所阐述的对比方位数据的方法）来确定的或是人为指定的或是对比其它的属性来确定的。

上述虚拟实景实现方法的细节可以进一步明确、优化，具体措施如下，可以根据需要择一或任意选择多种乃至全部措施：

上述进行实时采集的感知设备可以是通过手动控制的、手动设定后程序自动控制的、和所述用户间联动实现自动控制的、智能机器人自主控制的或其它AI系统自主控制的；上述移动位置的感知设备可以是通过人拉/推拖车、汽车、其它人工控制的可移动设备、遥控汽车、无人机或其它自动控制的可移动设备、自动无人驾驶汽车或智能机器人或其它AI系统自主控制的可移动设备承载的；上述进行实时采集的感知设备可以是通过手动选择的、手动设定后程序自动选择的、和所述用户间联动实现自动选择的和/或其它AI系统自主选择的；上述原数据和上述方位数据全部或部分整合在一起的情况可以是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中；采集视频、视音频、图片、照片或音频的感知设备可以为摄录设备或者进一步明确为摄像机、摄像头、照相机、录音机、录音笔或密拍设备；上述位置数据是通过一维、二维、三维或四维坐标描述的，一维坐标比如在线段中可以用到原点的距离来描述线段中某点的位置，二维坐标比如一个面中可以纵横坐标，以此类推；上述实际方位一般是指现实世界真实环境中的方位；上述虚拟方位可以是指现实世界模拟环境中实际方位对应的虚拟世界虚拟环境中的方位也可以是虚拟世界虚拟环境中的方位；完全匹配一般指相差在最小允许的范围内的情形；最接近匹配一般指比较而已相差是最小的一个的情形；近似匹配一般指尽管相差比较明显但还在可接受的范围内的情形。

上述虚拟实景实现方法可以在很多应用场景使用，实现多种身临其境的实景再现，实景可以是视频监控系统等实时拍摄的，也可以是摄制好的，技术方案如下：

方案一：将上述虚拟实景实现方法用于模拟或远程游览/参观公园、景区、古迹、商业街、其它街区、故居、住宅区、商场、博物馆、纪念馆、其它建筑物、大型工程设施、天空、星空、水域、水下、可进入参观的大型设备或其它游览/参观目的，在模拟游览/参观中可以使用已制成关于上述的游览/参观目的视频/视音频/图片/照片/音频，在远程游览/参观中可以使用正在现场实时摄录形成的视频/视音频/图片/照片/音频，在模拟游览/参观中同时还可切换游览/参观的时段、季节和/或情境，这在真实的游览/参观中是做不到的，可以是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的，这样也利于导游导览，下同不再一一说明。本场景的使用可以使人们足不出户就可以游遍天下，并能利用已制成的视听资料通过调整观察的方位或目标被观察的方位看到在真实环境无法看到或看不真切或是可遇不可求的景色，同时也可根据需要获得相应的讲解，也可通过实时的视频监控看到当前的景色，避免舟车劳顿和拥堵拥挤。这些优点大都也适用于后面的其它方案，不再一一说明。

方案二：将上述虚拟实景实现方法用于模拟或远程查看/鉴赏人、畜、字画、印章、古玩、文物、工艺品、首饰或其它工业产品/商品或者，在模拟查看/鉴赏中可以使用已制成的视频/视音频/图片/照片/音频，在远程查看/鉴赏中可以使用正在现场实时摄录形成的视频/视音频/图片/照片/音频，在模拟查看/鉴赏中同时还可切换查看/鉴赏的时段、季节和/或情境，可以是基于在缩小的仿实景环境、微缩模型、电子图样/图纸和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的。本场景的使用可以使人们足不出户就可实现珍品鉴赏，甚包括那些不公开对外展出的也可通过此方式实现展出。

方案三：将上述虚拟实景实现方法用于回看检查或远程查看在运行的机器、设备、系统或传感器，在回看检查中可以使用早先现场实时摄录形成的视频/视音频/图片/照片/音频，也可以使用早先现场实时感知采集形成的传感器感知数据，比如检测温度、湿度、电流、电压、压力、噪音（声音）的传感器，下同；在远程查看中可以使用正在现场实时摄录形成的视频/视音频/图片/照片/音频，也可以使用正在现场实时感知采集形成的传感器感知数据，在回看检查中同时还可切换回看检查的时段，可以是基于在缩小的仿实景环境、微缩模型、电子图样/图纸和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的。本方案特别适合于恶劣环境中的检查，通过远程查看以避免环境的不利影响。

方案四：将上述虚拟实景实现方法用于回看检查或远程查看有人、动物、车和/或其它物品存在的区域，在回看检查中可以使用早先现场实时摄录形成的视频/视音频/图片/照片/音频，在远程查看中可以使用正在现场实时摄录形成的视频/视音频/图片/照片/音频，在回看检查中同时还可切换回看检查的时段，可以是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的。除了前面提到的一些优点本方案也有外，还可节约检查时间及成本，如果还配合可以执行相关操作的远程控制系统、无人驾驶汽车或机器人则可以做更多的事，可以直接影响和干预现场，方案三及后面的方案也是如此，不再一一说明。

方案五：将上述虚拟实景实现方法用于回看检查或远程查看人流量、拥挤状况、等待/排队状况、交通状况、天气状况或其它现场状况，在回看检查中可以使用早先现场实时感知采集形成的传感器感知数据，在远程查看中可以使用正在现场实时感知采集形成的传感器感知数据，在回看检查中同时还可切换回看检查的时段，可以是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的。可以通过无人机、高空瞭望等全域查看，有时比实地查看更有效、更全面。

方案六：将上述虚拟实景实现方法用于回看检查或远程查看消化道、呼吸道、尿道、血管、体腔、管道、暗沟/渠、缝隙或其它人无法进入的洞隙，在回看检查中可以使用早先现场实时摄录形成的视频/视音频/图片/照片/音频，在远程查看中可以使用正在现场实时摄录形成的视频/视音频/图片/照片/音频，或者在回看检查中同时还可切换回看检查的时段，可以是基于在缩小的仿实景环境、微缩模型、电子地图（可以是根据最新图像即时生成的）和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的。这样操作更加直接、直观，去一些人在现实中无法去的地方。

方案七：将上述虚拟实景实现方法用于模拟查看人流量、拥挤状况、等待/排队状况、交通状况、天气状况或其它现场状况，在模拟查看中可以使用早先使用相应参数制成的视频/视音频/图片/照片，也可以使用正在使用相应参数制成的视频/视音频/图片/照片，同时还可切换参数，可以是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的。可以用于场景模拟，看起来更加直观，操作也更加方便。

方案八：将上述虚拟实景实现方法用于模拟查看消化道、呼吸道、尿道、血管、体腔、管道、暗沟/渠、缝隙或其它人无法进入的洞隙，在模拟查看中可以使用早先使用相应参数制成的视频/视音频/图片/照片，也可以使用正在使用相应参数制成的视频/视音频/图片/照片，还可切换参数，可以是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的。可以用于场景模拟，看起来更加直观，操作也更加方便。

由上面的技术方案的某些技术细节可以提炼出一种包含方位数据的动态感知数据集，这里的动态感知是指像视频摄录一样的连续感知而非一个时间点的瞬间感知，技术方案是：

将实际或虚拟感知动态原数据整体、局部、逻辑构成单元或最小构成单位的方位数据同时/或者动态原数据整体、局部、逻辑构成单元或最小构成单位中被实际或虚拟感知到的目的的方位数据或者还有感知的时间、关联的字幕、关联的音频和/或关联的其它数据按与动态原数据整体、局部、逻辑构成单元或最小构成单位的动态对应关系嵌入到原数据之中或进一步明确是可分离的或者另建关联文件/数据块/数据库/数据表/字段存储上述数据及其与动态原数据整体、局部、逻辑构成单元或最小构成单位的动态对应关系。上述动态原数据可以为实际感知、人工制作或部分实际感知部分人工制作形成的视频、视音频、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据。以视频为例，电影电视剧一般都是摄像机摄录即光学传感器感知的，而动画则是人工制作的，目前的人工合成视频的技术已经比较高级，甚至肉眼无法区分。本处的视频和原来的视频最大的区别就是包含了方位数据，摄录的动态方位数据（在整个摄录过程中可以变化也可以不变）以及被摄录目标的方位数据等，方位数据可以包括位置和/或方向数据（解释同前，下同），逻辑构成单元为可感知区域（如一个子区域）和/或可感知对象（如一个具体的物品），最小构成单位为一维、二维或三维元点（不可再分的点），假如在三维空间的每一个元点的图像及其位置都被采集，那么这个三维空间就可以以任意视角全方位的展示，在视频（准三维）、照片（二维）中这个元点可以就是像素。总而言之，就是这种动态感知数据集包含了方位数据，而不像现在是不带方位数据的。在有进行感知的方位数据的情况下，可以对于感知设备本身的一些情况及相互作用的情况进行深入的分析，在有感知到的目的方位数据的情况下，可以对观察目的进行更全面的深入分析，下同。

将同一和/或不同时段的同一或不同实际或虚拟感知的方位和/或感知到的目的的方位的上述包含方位数据的动态感知数据集整合在一起就构成一种包含方位数据的动态感知数据集组合，可以是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中；基于上述所整合的动态原数据、动态感知的方位数据和/或动态感知到的目的的方位数据的相似性可以进一步优化压缩，比如在多个摄像头从不同方位监控同一个点的时候，其中很多内容是相同的，这就给压缩提供了可能，具体的压缩技术参考现有的技术，这里不再赘述，下同。在多设备同时摄录（比如人用双眼同时看世界）的情况下，就可以用这种组合作为其摄录数据形式，后文会提到。其展现一是可以根据用户的视角或观测的目的来选择展现的内容，也可以结合人双眼同时看世界的原理分别为不同的感知器官提供不同的展现内容，下同。

由上面的技术方案的某些技术细节可以提炼出一种包含方位数据的静态感知数据集，这里的静态感知是指像照片一样的某个时间点感知，技术方案是：

将实际或虚拟感知静态原数据（这里去除了整体的情况，因为苹果手机拍照时可以记录地点信息，并作为图片的一个属性存放，不过目前还没有任何设备可以记录除整体外的其它方位数据）局部、逻辑构成单元或最小构成单位的方位数据同时/或者静态原数据整体、局部、逻辑构成单元或最小构成单位中被实际或虚拟感知到的目的的方位数据或者还有感知的时间、关联的字幕和/或关联的其它数据按与静态原数据整体、局部、逻辑构成单元或最小构成单位的静态对应关系嵌入到原数据之中或进一步明确是可分离的或者另建关联文件/数据块/数据库/数据表/字段存储上述数据及其与静态原数据整体、局部、逻辑构成单元或最小构成单位的静态对应关系。静态原数据可以为实际感知、人工制作或部分实际感知部分人工制作形成的图片、照片、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据，方位数据可以包括位置和/或方向数据，逻辑构成单元可以为可感知区域和/或可感知对象，最小构成单位可以为一维、二维或三维元点或者进一步为像素。具体解释可参考包含方位数据的动态感知数据集，只是根据静态情形作些修正，限于一个时间点的情况。

将同一和/或不同时间的同一和/或不同实际或虚拟感知的方位和/或感知到的目的的方位的上述包含方位数据的静态感知数据集整合在一起即形成一种包含方位数据的静态感知数据集组合或者进一步明确是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中；可以基于上述所整合的感知原数据、静态感知的方位数据和/或静态感知到的目的的方位数据的相似性进一步优化压缩。

还可在前面包含方位数据的动静态感知数据集的基础上提炼出一种感知数据采集方法，其技术方案是：

在感知采集原数据的同时还以上述包含方位数据的动态感知数据集的形式或是以上述包含方位数据的静态感知数据集的形式将实际感知的方位数据和/或实际感知到的目的的方位数据或者还有感知的时间、关联的字幕、关联的音频和/或关联的其它数据记录下来或进一步明确是与原数据整合在一起，或者进一步明确是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中，同时/或者进一步明确上述原数据为视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据；上述实际感知的方位数据全部或部分可以是通过具有相关功能的工具测量的或是通过相关的定位系统测量的或是人为设定的或是自动设定的或是根据相关的原数据计算得出的，上述实际感知到的目的的方位数据全部或部分可以是通过具有相应功能的工具测量的或是通过相关的定位系统测量的或是人为设定的或是自动设定的或是根据相关的原数据计算得出的。总而言之，就是在现有记录感知原数据的基础上再记录方位数据，其优点前面已提到过，为为人们展现一个真实世界提供了可能，比如目前我们是二维的方式看三维空间的视频，以后则可完全真实的体验三维的视频，可以置身之外甚至其中来观察的一个真正三维的世界。

还可在前面包含方位数据的动静态感知数据集组合的基础上提炼出一种多感知设备同时感知数据采集方法，其技术方案是：

在不少于两台感知设备同时感知采集原数据的同时还以上述包含方位数据的动态感知数据集组合的形式或以上述包含方位数据的静态感知数据集组合的形式将至少一台感知设备的实际感知的方位数据和/或实际感知到的目的的方位数据或者还有感知的时间、关联的字幕、关联的音频和/或关联的其它数据记录下来或进一步明确是与原数据整合在一起，或者进一步明确是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中，同时/或者进一步明确上述感知的数据为视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据；上述实际感知的方位数据全部或部分可以是通过具有相关功能的工具测量的或是通过相关的定位系统测量的或是人为设定的或是自动设定的或是根据相关的原数据计算得出的，上述实际感知到的目的的方位数据全部或部分可以是通过具有相应功能的工具测量的或是通过相关的定位系统测量的或是人为设定的或是自动设定的或是根据相关的原数据计算得出的，上述不少于两台感知设备可以是放在同一处的或放在不同处的或是部分放在同一处部分放在不同处的，上述不少于两台感知设备感知方向可以是相同的、不同的或部分相同部分不同的，上述不少于两台感知设备中所有摄录设备或至少有两台感知设备可以是按一种复眼的方式排列的或是分布在一个球面上的或是分布在一个半球面上的或是分布在一个其它的曲面上的或是分布在一个其它的曲面部分上的，上述不少于两台感知设备中所有感知设备或至少有两台感知设备可以是针对同一目标位置进行感知的。 这个在前面方法基础上模拟生物对外界的感知不是一个点，而是多个点（包括多种感知方式），一些昆虫具有复眼，看物体相对于人的单睛在很多方面具有独特的优势，这个方法就可以实现这些方式，来仿真自然界的感知方式。

一种实现上述两种感知数据采集方法的感知采集装置，其技术方案是：

为实现了上述感知数据采集方法的单台感知设备或包含单台感知设备及相关功能软硬件的系统或者该装置还可同时进行不记录原数据之外数据的感知采集或还可切换为进行不记录原数据之外数据的感知采集，也可以为实现了上述多感知设备同时感知数据采集方法的多台感知设备或包含多感知设备及相关功能软硬件的系统或者该装置还可同时进行不记录原数据之外数据的感知采集或还可切换为进行不记录原数据之外的数据的感知采集。感知采集装置可以为摄像头、摄像机、录音笔、录音机、录像机、数码相机、PDA、平板电脑、智能手机、可穿戴智能设备或其它单台设备或者为包含前述任意一种设备与相关设备的组合、前述任意多种设备的组合或前述任意多种设备与相关设备的组合的多台设备，和现有这些设备不同之处在于它可以记录（感知采集）方位数据，这样摄录的视频、音频等数据是带有方位数据的，可以全方位多视角的展现。本装置发明是前面方法发明的一种实现，也就是一种仿真自然界生物感知器官的一种实现。在前面基础上，可以将上述感知采集装置的全部或部分感知设备共享出来供其它用户访问数据和/或进行控制，这样就可以形成一种新的商业模式，通过提供这样的资源来收费盈利或推送广告等实现商业价值，在不少于两个其它用户同时竞争控制权时可以采用时间优先或者还有高优先权优先的原则，可以仅限于共享给就近的/付费的/付出金钱以外的其它对价的/经认证的/授权的/有权的其它用户，可以是通过互联网/近距离无线通信方式实现共享所需要的通信的。随着互联网、物联网、传感器等技术的不断发展和应用，这种商业模式的应用空间必然会越来越大。

本发明提供的虚拟实景实现方法基于用户本身进行感知的方位或感知到的目的的方位进行展现，解决了模拟身临其境的问题，应用场景非常广阔。由此衍生出包含方位数据的动静态感知数据集及其组合，通过在可视的视频、可听的音频等多媒体数据及其它传感器感知原数据结合进行感知的方位数据及感知到的目的的方位数据，从而实现全面的数据记录，为更好的展现打下了基础。本发明还基于这些再衍生出一种感知数据采集方法、多感知设备同时感知数据采集方法及一种感知采集装置等，实现包括进行感知的方位数据及感知到的目的的方位数据及多媒体及其它传感器感知数据在内的全面感知采集，从而为更好的记录和展现这个世界的各种数据打下了基础。

Claims (10)

1.一种虚拟实景实现方法，其特征在于：

对比用户当前要实际或虚拟进行感知的方位数据与已制成和/或当前正在制成的视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知原数据被实际或虚拟感知的方位数据，然后为该用户展现经对比匹配的上述原数据、上述方位数据、由前述数据加工获得的数据和/或关联的其它数据的全部或部分，

同时/或者对比用户当前要实际或虚拟感知到的目的的方位数据与已制成和/或当前正在制成的视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知原数据中被实际或虚拟感知到的目的的方位数据，然后为该用户展现经对比匹配的上述原数据、上述方位数据、由前述数据加工获得的数据和/或关联的其它数据的全部或部分；

或者进一步明确所述方位数据包括位置数据和/或方向数据，

同时/或者进一步明确所述匹配为完全匹配或最接近匹配或近似匹配，

同时/或者进一步明确上述原数据与上述方位数据是整合在一起的或是分别存放的或是部分整合在一起部分分别存放的，

同时/或者进一步明确展现的仅为原数据或还包含全部/部分其它数据，

同时/或者进一步明确展现的为不少于两种原数据的组合，

同时/或者进一步明确所述展现是以可视、可听、可闻、可触感、可尝味、使受力、使运动或其它模拟方式或其它仿真方式的展现，

同时/或者进一步明确展现是通过耳机、眼镜、头盔、腕表、其它可穿戴设备、电视机、电脑、智能手机、电影放映系统、拼接大屏幕系统、曲面大屏、VR系统、AR系统和/或仿真系统展现的，

同时/或者进一步明确所述其它传感器为压力传感器、位置传感器、液面传感器、能耗传感器、速度传感器、热敏传感器、加速度传感器、射线辐射传感器、振动传感器、磁敏传感器、真空度传感器和/或生物传感器，

同时/或者进一步明确所述由前述数据加工获得的数据为在前述数据基础上通过分析计算获得的距离数据/定位数据/状态评判数据/综合评价数据，

同时/或者进一步明确所述匹配是指对比双方同种方位数据的相差在允许的范围内，

同时/或者进一步明确所述匹配是指对比双方其中一方虚拟的方位数据对应的实际的方位数据与另一方实际的方位数据相差在允许的范围内，

同时/或者进一步明确所述匹配是指经对比其中一方实际的方位数据对应的虚拟的方位数据与另一方虚拟的方位数据相差在允许的范围内，

同时/或者进一步明确是通过调节已制成的原数据的展现速度实现与该用户进行感知的方位或感知到的目的的方位变化速度匹配，

同时/或者进一步明确是通过同步调节正在制成原数据的相关感知设备/装置实现与该用户进行感知的方位或感知到的目的的方位变化速度匹配，

同时/或者进一步明确该用户当前要实际或虚拟进行感知的方位数据和/或上述原数据被实际或虚拟感知的方位数据全部或部分是通过具有相关功能的工具测量的或是通过相关的定位系统测量的或是根据相关的原数据计算得出的，

同时/或者进一步明确所述用户当前要虚拟进行感知的方位数据和/或上述原数据被虚拟感知的方位数据全部或部分是通过操作相应的操纵用实物和/或程序界面实现控制并提供的，

同时/或者进一步明确所述用户当前要实际或虚拟感知到的目的的方位数据和/或原数据中被实际或虚拟感知到的目的的方位数据全部或部分是通过具有相关功能的工具测量的或是通过相关的定位系统测量的或是根据相关的原数据计算得出的，

同时/或者进一步明确所述用户当前要虚拟感知到的目的的方位数据和/或原数据中被虚拟感知到的目的的方位数据全部或部分是通过操作相应的操纵用实物和/或程序界面实现控制并提供的，

同时/或者进一步明确上述正在制成的视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据是通过固定位置和/或移动位置的感知设备实时采集的，

同时/或者进一步明确上述已制成或正在制成的视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据是通过不少于两台感知设备同时采集的，

同时/或者所述关联也是经上述相同的对比方法来确定的或是人为指定的或是对比其它的属性来确定的。

2.根据权利要求1所述的虚拟实景实现方法，其特征在于：

上述进行实时采集的感知设备是通过手动控制的、手动设定后程序自动控制的、和所述用户间联动实现自动控制的、智能机器人自主控制的或其它AI系统自主控制的；

同时/或者上述移动位置的感知设备是通过人拉/推拖车、汽车、其它人工控制的可移动设备、遥控汽车、无人机或其它自动控制的可移动设备、自动无人驾驶汽车或智能机器人或其它AI系统自主控制的可移动设备承载的；

同时/或者上述进行实时采集的感知设备是通过手动选择的、手动设定后程序自动选择的、和所述用户间联动实现自动选择的和/或其它AI系统自主选择的；

同时/或者上述原数据和上述方位数据全部或部分整合在一起的情况是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中；

同时/或者采集视频、视音频、图片、照片或音频的感知设备为摄录设备或者进一步明确为摄像机、摄像头、照相机、录音机、录音笔或密拍设备；

同时/或者上述位置数据是通过一维、二维、三维或四维坐标描述的；

同时/或者上述实际方位是指现实世界真实环境中的方位；

同时/或者上述虚拟方位是指现实世界模拟环境中实际方位对应的虚拟世界虚拟环境中的方位或虚拟世界虚拟环境中的方位；

同时/或者上述完全匹配是指相差在最小允许的范围内的情形；

同时/或者上述最接近匹配是指比较而已相差是最小的一个的情形；

同时/或者上述近似匹配是指尽管相差比较明显但还在可接受的范围内的情形。

3.一种虚拟实景实现方法的使用方法，其特征在于：

将权利要求1或2所述的虚拟实景实现方法用于模拟或远程游览/参观公园、景区、古迹、商业街、其它街区、故居、住宅区、商场、博物馆、纪念馆、其它建筑物、大型工程设施、天空、星空、水域、水下或可进入参观的大型设备或者进一步明确在模拟游览/参观中使用了已制成的视频/视音频/图片/照片/音频或在远程游览/参观中使用了正在现场实时摄录形成的视频/视音频/图片/照片/音频，或者在模拟游览/参观中同时还可切换游览/参观的时段、季节和/或情境，或者进一步明确是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的；

或者将权利要求1或2所述的虚拟实景实现方法用于模拟或远程查看/鉴赏人、畜、字画、印章、古玩、文物、工艺品、首饰或其它工业产品/商品或者进一步明确在模拟查看/鉴赏中使用了已制成的视频/视音频/图片/照片/音频或在远程查看/鉴赏中使用了正在现场实时摄录形成的视频/视音频/图片/照片/音频，或者在模拟查看/鉴赏中同时还可切换查看/鉴赏的时段、季节和/或情境，或者进一步明确是基于在缩小的仿实景环境、微缩模型、电子图样/图纸和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的；

或者将权利要求1或2所述的虚拟实景实现方法用于回看检查或远程查看在运行的机器、设备、系统或传感器或者进一步明确在回看检查中使用了早先现场实时摄录形成的视频/视音频/图片/照片/音频或在远程查看中使用了正在现场实时摄录形成的视频/视音频/图片/照片/音频，或者在回看检查中同时还可切换回看检查的时段，或者进一步明确是基于在缩小的仿实景环境、微缩模型、电子图样/图纸和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的；

或者将权利要求1或2所述的虚拟实景实现方法用于回看检查或远程查看有人、动物、车和/或其它物品存在的区域或者进一步明确在回看检查中使用了早先现场实时摄录形成的视频/视音频/图片/照片/音频或在远程查看中使用了正在现场实时摄录形成的视频/视音频/图片/照片/音频，或者在回看检查中同时还可切换回看检查的时段，或者进一步明确是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的；

或者将权利要求1或2所述的虚拟实景实现方法用于回看检查或远程查看人流量、拥挤状况、等待/排队状况、交通状况、天气状况或其它现场状况或者进一步明确在回看检查中使用了早先现场实时感知采集形成的传感器感知数据或在远程查看中使用了正在现场实时感知采集形成的传感器感知数据，或者在回看检查中同时还可切换回看检查的时段，或者进一步明确是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的；

或者将权利要求1或2所述的虚拟实景实现方法用于回看检查或远程查看消化道、呼吸道、尿道、血管、体腔、管道、暗沟/渠、缝隙或其它人无法进入的洞隙或者进一步明确在回看检查中使用了早先现场实时摄录形成的视频/视音频/图片/照片/音频或在远程查看中使用了正在现场实时摄录形成的视频/视音频/图片/照片/音频，或者在回看检查中同时还可切换回看检查的时段，或者进一步明确是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的；

或者将权利要求1或2所述的虚拟实景实现方法用于模拟查看人流量、拥挤状况、等待/排队状况、交通状况、天气状况或其它现场状况或者进一步明确在模拟查看中使用了早先使用相应参数制成的视频/视音频/图片/照片或使用了正在使用相应参数制成的视频/视音频/图片/照片，或者同时还可切换参数，或者进一步明确是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的；

或者将权利要求1或2所述的虚拟实景实现方法用于模拟查看消化道、呼吸道、尿道、血管、体腔、管道、暗沟/渠、缝隙或其它人无法进入的洞隙或者进一步明确在模拟查看中使用了早先使用相应参数制成的视频/视音频/图片/照片或使用了正在使用相应参数制成的视频/视音频/图片/照片，或者同时还可切换参数，或者进一步明确是基于在缩小的仿实景环境、微缩模型、电子地图和/或实际环境来获取进行感知的方位数据和/或感知到的目的的方位数据的。

4.一种包含方位数据的动态感知数据集，其特征在于：

将实际或虚拟感知动态原数据整体、局部、逻辑构成单元或最小构成单位的方位数据同时/或者动态原数据整体、局部、逻辑构成单元或最小构成单位中被实际或虚拟感知到的目的的方位数据或者还有感知的时间、关联的字幕、关联的音频和/或关联的其它数据按与动态原数据整体、局部、逻辑构成单元或最小构成单位的动态对应关系嵌入到原数据之中或进一步明确是可分离的或者另建关联文件/数据块/数据库/数据表/字段存储上述数据及其与动态原数据整体、局部、逻辑构成单元或最小构成单位的动态对应关系；

或者进一步明确所述动态原数据为实际感知、人工制作或部分实际感知部分人工制作形成的视频、视音频、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据，

同时/或者进一步明确所述方位数据包括位置和/或方向数据，

同时/或者进一步明确所述逻辑构成单元为可感知区域和/或可感知对象，

同时/或者进一步明确所述最小构成单位为一维、二维或三维元点或者进一步为像素。

5.一种包含方位数据的动态感知数据集组合，其特征在于：

将同一和/或不同时段的同一或不同实际或虚拟感知的方位和/或感知到的目的的方位的权利要求4所述的包含方位数据的动态感知数据集整合在一起或者进一步明确是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中；

或者在前面基础上基于上述所整合的动态原数据、动态感知的方位数据和/或动态感知到的目的的方位数据的相似性进一步优化压缩。

6.一种包含方位数据的静态感知数据集，其特征在于：

将实际或虚拟感知静态原数据局部、逻辑构成单元或最小构成单位的方位数据同时/或者静态原数据整体、局部、逻辑构成单元或最小构成单位中被实际或虚拟感知到的目的的方位数据或者还有感知的时间、关联的字幕和/或关联的其它数据按与静态原数据整体、局部、逻辑构成单元或最小构成单位的静态对应关系嵌入到原数据之中或进一步明确是可分离的或者另建关联文件/数据块/数据库/数据表/字段存储上述数据及其与静态原数据整体、局部、逻辑构成单元或最小构成单位的静态对应关系；

或者进一步明确所述静态原数据为实际感知、人工制作或部分实际感知部分人工制作形成的图片、照片、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据，

同时/或者进一步明确所述方位数据包括位置和/或方向数据，

同时/或者进一步明确所述逻辑构成单元为可感知区域和/或可感知对象，

同时/或者进一步明确所述最小构成单位为一维、二维或三维元点或者进一步为像素。

7.一种包含方位数据的静态感知数据集组合，其特征在于：

将同一和/或不同时间的同一和/或不同实际或虚拟感知的方位和/或感知到的目的的方位的权利要求6所述的包含方位数据的静态感知数据集整合在一起或者进一步明确是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中；

或者在前面基础上基于上述所整合的感知原数据、静态感知的方位数据和/或静态感知到的目的的方位数据的相似性进一步优化压缩。

8.一种感知数据采集方法，其特征在于：

在感知采集原数据的同时还以权利要求4所述的包含方位数据的动态感知数据集的形式或是以权利要求6所述的包含方位数据的静态感知数据集的形式将实际感知的方位数据和/或实际感知到的目的的方位数据或者还有感知的时间、关联的字幕、关联的音频和/或关联的其它数据记录下来或进一步明确是与原数据整合在一起，或者进一步明确是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中，同时/或者进一步明确上述原数据为视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据；

或者在前面基础上上述实际感知的方位数据全部或部分是通过具有相关功能的工具测量的或是通过相关的定位系统测量的或是人为设定的或是自动设定的或是根据相关的原数据计算得出的，

同时/或者上述实际感知到的目的的方位数据全部或部分是通过具有相应功能的工具测量的或是通过相关的定位系统测量的或是人为设定的或是自动设定的或是根据相关的原数据计算得出的。

9.一种多感知设备同时感知数据采集方法，其特征在于：

在不少于两台感知设备同时感知采集原数据的同时还以权利要求5所述的包含方位数据的动态感知数据集组合的形式或以权利要求7所述的包含方位数据的静态感知数据集组合的形式将至少一台感知设备的实际感知的方位数据和/或实际感知到的目的的方位数据或者还有感知的时间、关联的字幕、关联的音频和/或关联的其它数据记录下来或进一步明确是与原数据整合在一起，或者进一步明确是整合在同一组文件中或是同一个文件中或是整合在同一组数据块或是整合在同一个数据块或是整合在同一个数据库或是整合在同一个数据库同一个表或是整合在同一个数据库同一组表中，同时/或者进一步明确上述感知的数据为视频、视音频、图片、照片、音频、仿真味觉感知、仿真嗅觉感知、仿真触觉感知、压力感知、温度感知、湿度感知和/或其它传感器感知数据；

或者在前面基础上上述实际感知的方位数据全部或部分是通过具有相关功能的工具测量的或是通过相关的定位系统测量的或是人为设定的或是自动设定的或是根据相关的原数据计算得出的，

同时/或者上述实际感知到的目的的方位数据全部或部分是通过具有相应功能的工具测量的或是通过相关的定位系统测量的或是人为设定的或是自动设定的或是根据相关的原数据计算得出的，

同时/或者上述不少于两台感知设备是放在同一处的或放在不同处的或是部分放在同一处部分放在不同处的，

同时/或者上述不少于两台感知设备感知方向是相同的、不同的或部分相同部分不同的，

同时/或者上述不少于两台感知设备中所有摄录设备或至少有两台感知设备是按一种复眼的方式排列的或是分布在一个球面上的或是分布在一个半球面上的或是分布在一个其它的曲面上的或是分布在一个其它的曲面部分上的，

同时/或者上述不少于两台感知设备中所有感知设备或至少有两台感知设备是针对同一目标位置进行感知的。

10.一种感知采集装置，其特征在于：

为实现了权利要求8所述的感知数据采集方法的单台感知设备或包含单台感知设备及相关功能软硬件的系统或者该装置还可同时进行不记录原数据之外数据的感知采集或还可切换为进行不记录原数据之外数据的感知采集，

或者为实现了权利要求9所述的多感知设备同时感知数据采集方法的多台感知设备或包含多感知设备及相关功能软硬件的系统或者该装置还可同时进行不记录原数据之外数据的感知采集或还可切换为进行不记录原数据之外的数据的感知采集，

或者进一步明确所述感知采集装置为摄像头、摄像机、录音笔、录音机、录像机、数码相机、PDA、平板电脑、智能手机、可穿戴智能设备或其它单台设备或者为包含前述任意一种设备与相关设备的组合、前述任意多种设备的组合或前述任意多种设备与相关设备的组合的多台设备；

或者在前面基础上，可以将上述感知采集装置的全部或部分感知设备共享出来供其它用户访问数据和/或进行控制，或进一步明确在不少于两个其它用户同时竞争控制权时采用时间优先或者还有高优先权优先的原则，或进一步明确仅限于共享给就近的/付费的/付出金钱以外的其它对价的/经认证的/授权的/有权的其它用户，或进一步明确是通过互联网/近距离无线通信方式实现共享所需要的通信的。