CN108702497B - 用于拍摄提供虚拟现实的图像的三维相机 - Google Patents

用于拍摄提供虚拟现实的图像的三维相机 Download PDF

Info

Publication number
CN108702497B
CN108702497B CN201680080840.0A CN201680080840A CN108702497B CN 108702497 B CN108702497 B CN 108702497B CN 201680080840 A CN201680080840 A CN 201680080840A CN 108702497 B CN108702497 B CN 108702497B
Authority
CN
China
Prior art keywords
dimensional camera
camera
cameras
index
vertex
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201680080840.0A
Other languages
English (en)
Other versions
CN108702497A (zh
Inventor
安德里里·沃罗奇纽克
康斯坦丁·莫罗佐夫
金善京
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108702497A publication Critical patent/CN108702497A/zh
Application granted granted Critical
Publication of CN108702497B publication Critical patent/CN108702497B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0088—Synthesising a monoscopic image signal from stereoscopic images, e.g. synthesising a panoramic or high resolution monoscopic image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Architecture (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

根据实施方式的三维相机包括：多个相机和配置为追踪三维相机的位置的位置传感器，其中，多个相机布置在多面体的每个顶点处，并且在每个顶点处布置有至少三个相机。

Description

用于拍摄提供虚拟现实的图像的三维相机
技术领域
本公开涉及用于拍摄提供虚拟现实(VR)的图像的三维(3D)相机。
背景技术
近来，通过使用虚拟现实(VR)设备向用户提供三维(3D)图像的设备已经被研发。VR设备可感测用户的移动并且可根据用户的移动提供改变的图像。
需要拍摄3D图像的3D相机来向用户提供3D图像。3D相机根据空间内的用户的移动拍摄图像并且存储所拍摄的图像。因为3D相机应在每当用户移动时拍摄和存储图像，所以3D相机应包括存储空间。
发明内容
技术问题
提供了用于拍摄提供虚拟现实(VR)的图像的三维(3D)相机。
技术方案
根据本公开的方面，用于拍摄提供虚拟现实(VR)的图像的三维(3D)相机包括多个相机和配置为追踪3D相机的位置的位置传感器，其中，多个相机布置在多面体的每个顶点处，且多面体的每个顶点处布置有至少三个相机。
有益效果
根据实施方式的三维(3D)相机具有多面体形状并且可通过使用定位在多面体形状的每个顶点处的二维(2D)相机来拍摄图像。
根据实施方式的3D相机可根据3D相机的位置将索引分布映图和拍摄的图像存储在存储器中。
根据实施方式的3D相机可仅当3D相机定位在特定(Unique)位置处时才将索引和图像存储在存储器中。
附图说明
图1是用于解释虚拟现实(VR)的示例的图。
图2是用于解释三维(3D)相机和VR设备之间的关系的图。
图3是用于解释根据实施方式的用于提供VR的设备和方法的框图。
图4是示出3D相机的位置移动的图。
图5是用于解释通过3D相机执行的生成索引的方法的图。
图6是将索引覆盖的区域示出为圆的图。
图7是用于描述3D相机的形状的图。
图8是用于解释计算定位在顶点处的相机的视场的方法的图。
图9是用于解释根据实施方式的3D相机的图。
图10是用于解释根据实施方式的3D相机的图。
图11是根据实施方式的图像拍摄方法的流程图。
具体实施方式
现在将参照附图在下文中更充分地描述实施方式。
图1是用于解释虚拟现实(VR)的示例的图。参考图1，用户穿戴VR设备200。VR设备200向用户提供与用户所处的空间不同的空间的图像。例如，用户可在室内穿戴VR设备200，而VR设备200可向用户显示外国的城市的图像。
VR设备200可根据用户的移动显示图像。用户可使他的/她的整个身体或仅他的/她的头部移动。当用户的整个身体移动时，VR设备200可根据用户移动的方向调整图像的尺寸。当用户的头部移动时，VR设备200可根据用户的头部移动的方向显示另一图像。
VR设备200可称为头戴式显示器或头戴式耳机。
图2是用于解释3D相机和VR设备之间的关系的图。参考图2，3D相机100拍摄图像并且将所拍摄的图像传输至VR设备200。3D相机100将当拍摄图像时3D相机100的位置、3D相机100的顶点的位置和索引传输至VR设备200。索引表示通过顶点形成的虚拟多面体。索引可以是用于标识虚拟多面体的符号、字符或数量的组合。3D相机100可生成包括索引和顶点的位置的索引分布映图，并且可将索引分布映图传输至VR设备200。
3D相机100可生成索引分布映图并且将所生成的索引分布映图存储在存储器中。索引分布映图包括特定索引和3D相机100的顶点的位置。当3D相机100的位置改变时，3D相机100将索引和3D相机100的改变后的顶点位置存储在存储器中。
3D相机100仅将特定索引存储在存储器中，而不存储任何非特定索引。特定索引是不属于存储器中所存储的另一索引的索引。换言之，索引表示虚拟多面体且多面体可彼此重叠。表征非重叠的多面体的索引是特定索引，且仅特定索引可被存储在存储器中。例如，当第一多面体不与存储器中所存储的第二多面体重叠时，表征第一多面体的索引是特定索引。3D相机100仅将在特定索引指示的位置处拍摄的图像存储在存储器中。当3D相机100的位置改变时，3D相机100更新索引分布映图。3D相机100确定索引的位置是否是特定的，并且仅当索引是特定索引时才更新索引分布映图。索引分布映图表示多个特定索引之间的位置关系。
3D相机100将索引分布映图和图像传输至VR设备200。
VR设备200从3D相机100接收图像和索引分布映图。VR设备200通过使用图像生成复合视图并且向用户显示复合视图。
VR设备200根据用户的位置确定复合视图。VR设备200搜索最靠近用户的当前位置的索引或者包括用户的当前位置的索引。VR设备200可通过使用在所找到的索引处拍摄的图像生成复合视图，并且可显示所生成的复合视图。
图3是用于解释根据实施方式的用于提供VR的设备和方法的框图。参考图3，提供VR的方法包括以下操作：拍摄图像并且提供所拍摄的图像。
3D相机100包括相机组110、位置传感器120、存储器130和处理器140。相机组110包括多个相机。相机组110定位在3D相机100的多个顶点中的每一个处。相机组110可包括至少三个相机。单个顶点处定位有三个相机，并且三个相机的相应视场(Field of View,FOV)彼此重叠。定位在同一顶点处的相机的视场彼此重叠，并且定位在不同顶点处的相机的视场也彼此重叠。其重叠部分用于生成全景视图。
位置传感器120感测3D相机100的位置。位置传感器120根据3D相机100的移动向处理器140传输表征3D相机100的位置的信息。例如，位置传感器120可以是全球定位系统(GPS)或惯性测量单元(IMU)。
存储器130存储通过相机组110拍摄的图像和通过位置传感器120感测的位置的信息。
处理器140从相机组110接收图像并且从位置传感器120接收位置信息。处理器140可确定待存储在存储器130中的图像、位置信息或索引。例如，处理器140可将特定图像和特定索引存储在存储器130中。特定图像是在特定索引的位置处拍摄的图像。换言之，特定图像是位于下述位置处的相机组110拍摄的图像：3D相机100的顶点形成的多面体彼此不重叠。
处理器140生成索引分布映图。索引分布映图可代表3D相机100已经移动到的位置。索引分布映图包括3D相机100的顶点的位置和索引。
3D相机100将3D相机100的位置信息和图像传输至VR设备200。3D相机100可将索引分布映图和特定图像传输至VR设备200。
VR设备200包括位置传感器210、旋转传感器220、处理器230、显示器240和存储器250。位置传感器210感测VR设备200的位置。位置传感器210根据VR设备200的移动向处理器140传输表征VR设备200的位置的信息。例如，位置传感器210可以是GPS或IMU。
旋转传感器220感测VR设备200的旋转。用户可穿戴VR设备200并且可使他或她的头部绕x、y和z轴旋转。随着用户的头部旋转，VR设备200也旋转。旋转传感器220感测VR设备200的旋转并且测量用户的头部绕x、y和z轴旋转的角度。旋转传感器220将所测量的角度传输至处理器230。
当用户移动时，处理器230生成待向用户显示的图像。处理器230基于从位置传感器210和旋转传感器220接收的数据生成图像。处理器230可基于用户的移动方向、移动距离、旋转方向和旋转角度生成图像。
处理器230通过合成从3D相机100接收的图像来生成复合视图。处理器230随着用户移动选择从3D相机100接收的图像中的一些，并且通过所选择的图像生成复合视图。
显示器240显示由处理器230生成的复合视图。
存储器250存储从3D相机100接收的图像和索引分布映图。存储器250可存储复合视图并且还可存储与用户的移动有关的信息。
图4至图6是用于解释根据实施方式的生成索引分布映图的方法的图。参考图4至图6，3D相机100可生成仅包括特定索引的索引分布映图。
图4是示出3D相机的位置移动的图。3D相机100可沿着将点A连接至点B的线移动。图4中所示的圆彼此不重叠。在3D相机100的位置改变的位置处生成新的圆，且新的圆不与现有的圆重叠。圆是指由3D相机100生成的图像的边界。
图5是用于解释通过3D相机执行的用于生成索引的方法的图。3D相机100存储在顶点p0至p6处拍摄的图像。顶点p0至p6可代表2D相机的位置。当3D相机100从点A移动至点B时，2D相机可拍摄图像。然而，3D相机100可仅存储在顶点p0至p6处拍摄的图像。顶点p0至p6之间的距离可接近用户的双眼之间的距离。例如，用户的双眼之间的平均距离可等于顶点p0至p6之间的距离。
3D相机100生成索引idx1至idx4。由索引idx1至idx4表示的四面体彼此不重叠。第一索引idx1是用于标识最左边的四面体的索引，第二索引idx2是用于标识中间的四面体的索引，第三索引idx3是用于标识右底侧的四面体的索引；以及第四索引idx4是用于标识左上侧的四面体的索引。
图6是将索引覆盖的区域示出为圆的图。图6示出与图5的多面体对应的圆。圆表示在分别由索引idx1至idx4指示的位置处拍摄的图像的区域。
多个圆彼此不重叠。多个圆之间的距离可接近用户的双眼之间的距离。3D相机100可仅存储非重叠区域的图像，并且特定索引被分配给非重叠区域。
图7是用于描述3D相机的形状的图。参考图7，3D相机100可以是四面体、六面体、八面体、十二面体、二十面体等。虽然图7中示出3D相机的形状的五个示例，但是3D相机100可以是多面体的多种形状中的任意形状。在多面体的多个顶点中的每一个处可定位至少三个相机。
图8是用于解释计算定位在顶点处的相机的视场的方法的图。
视场(FOV)＞＝90+二面角-1/2×顶点角
二面角(Dihedral angle)是当多面体中的两个平面彼此相交时获得的角度，而顶点角(Vertex angle)是当一个平面中的两个边缘彼此相交时获得的角度。例如，当3D相机100是四面体时，定位在四面体的每个顶点处的相机的视场可计算如下：
视场>＝90+70.53-1/2×60＝130.53
因此，定位在四面体的每个顶点处的相机的视场可为130.53°或更大。
群组角＝180+二面角-顶点角
群组角(Group’s angle)表示单个顶点覆盖的视场。例如，定位在四面体的每个顶点处的一组相机(至少三个相机)的群组角可计算如下：
群组角＝180+70.53–60＝190.53
因此，定位在四面体的每个顶点处的一组相机的群组角可以是190.53°。
其他多面体的视场和群组角可利用与上面描述的方法相同的方法来计算。
图9是用于解释根据实施方式的3D相机900的图。3D相机900是四面体，并且包括四个顶点920。三个相机910定位在每个顶点920处。三个相机910拍摄图像并且所拍摄图像彼此重叠。三个相机910覆盖的视场可为180°或更大。通过合成由三个相机910拍摄的图像来生成球形图像930。在不同顶点920处拍摄的球形图像930可彼此重叠。
3D相机900包括将四个顶点920彼此连接的杆940。每个杆940的长度与人的双眼之间的距离对应。换言之，每个杆940的长度可以是接近人的双眼之间的距离的长度。
如上面参考图7所计算的，因为3D相机900是四面体，所以每个相机910的视场是130.53°，且通过定位在每个顶点920处的三个相机910形成的角度是190.53°。
图10是用于解释根据实施方式的3D相机1000的图。3D相机1000具有八面体形状并且包括八个顶点1020。三个相机1010定位在每个顶点1020处。三个相机1010拍摄图像并且所拍摄的图像彼此重叠。通过合成由三个相机1010拍摄的图像来生成球形图像1030。
3D相机1000包括将八个顶点1020彼此连接的杆1040。每个杆1040的长度与人的双眼之间的距离对应。换言之，每个杆1040的长度可以是接近人的双眼之间的距离的长度。
如上文参考图7所计算的那样，因为3D相机1000具有八面体形状，所以每个相机1010的视场是135°，且定位在每个顶点1020处的三个相机1010形成的角度是210°。
视场>＝90+90-1/2×90＝135
群组角＝180+90–60＝210
图11是根据实施方式的图像拍摄方法的流程图。
在操作1110中，3D相机追踪其自身位置。3D相机可移动，且当3D相机移动时，GPS、IMU等追踪3D相机的位置。3D相机可生成和存储包括表征特定位置的特定索引的索引分布映图。例如，3D相机基于3D相机的位置和由3D相机占据的区域生成索引分布映图。例如，3D相机将当多面体移动时由多面体占据的区域彼此不重叠的位置确定作为特定位置，并且向多面体分配表征特定位置的索引。
在操作1120中，当3D相机具有多面体形状时，将相机布置在多面体形状的顶点处。至少三个2D相机可布置在单个顶点处。
在操作1130中，3D相机中所包括的多个相机拍摄图像。3D相机可仅存储所拍摄的图像之中在特定索引指示的位置处拍摄的特定图像。定位在同一顶点处的相机拍摄彼此重叠的图像。定位成相邻顶点的相机组拍摄彼此重叠的图像。相邻顶点之间的距离与用户的双眼之间的距离对应。在同一顶点处的相机组的视场可为180°或更大。
根据该实施方式的装置可包括处理器、永久性存储单元、通信端口和用户接口设备，其中，存储器用于存储并执行程序数据；永久性存储单元诸如磁盘驱动器；通信端口用于处理与外部设备的通信；用户接口设备包括触摸面板、按键、按钮等。例如，当包括软件模块或算法时，这些软件模块可被存储为可在处理器上运行的、计算机可读记录介质中的程序指令或计算机可读代码。计算机可读记录介质的示例包括磁性存储介质(例如，只读存储器(ROM)、随机存取存储器(RAM)、软盘、硬盘等)和光学记录介质(例如，CD-ROM或数字多功能光盘(DVD))。计算机可读记录介质还可分布在联网的计算机系统上，使得计算机可读代码以分布方式被存储和执行。该介质可被计算机读取，存储在存储器中并且被处理器执行。
该实施方式可通过功能块组件和各种处理步骤的方式被描述。这样的功能块可通过配置为执行指定功能的任何数量的硬件和/或软件组件来实现。例如，实施方式可使用可在一个或多个微处理器或其他控制设备的控制下执行各种各样的功能的各种集成电路(IC)组件，例如，存储器元件、处理元件、逻辑元件、查找表等。类似地，在元件利用软件编程或软件元件来实现的情况下，该实施方式可利用任何编程或脚本语言来实现，诸如，C、C++、Java、汇编器语言等，其中，各种算法利用数据结构、对象、进程、例程或其他编程元件的任何组合来实现。功能框可在在一个或多个处理器上执行的算法中实现。此外，本文描述的本实施方式可使用用于电气配置、信号处理和/或控制、数据处理等的任何数量的常规方法。词语“机构”、“元件”、“装置”和“配置”广义地被使用，而不限于机械的或物理的实施方式，而是可包括结合处理器的软件进程等。
本文所示和所描述的特定实施例是说明性的，而并非旨在以任何方式另行限制本公开的范围。出于简洁的目的，常规的电子元件、控制系统、软件开发和系统的其他功能方面可能不会详细描述。此外，所提出的各图中所示的连接线或连接器旨在代表各元件之间的示例性功能关系和/或物理或逻辑联接。应注意，在实际设备中可存在诸多替代或附加的功能关系、物理连接器或逻辑连接器。
在描述本公开的上下文中(尤其是在所附权利要求的上下文中)，术语“一”、“一个”和“所述”及类似指代物的使用要解释为覆盖单数和复数两者。此外，除非本文另行指出，否则本文对值的范围的记载仅旨在充当落入范围中的每个单独值，并且每个单独的值包括在说明书中，如同其在本文中单独地记载一般。除非本文另行指出或者通过上下文清楚地另行否定，否则本文描述的全部方法的步骤能以任何合适的顺序来执行。本公开不限于所描述的步骤顺序。除非另行声明，否则本文提供的任何和全部示例或示例性措辞(例如，“诸如”)的使用仅旨在更好地例示本公开，而不对本公开的范围做出限制。对于本领域普通技术人员将显而易见的是，在没有脱离所附权利要求或其等同方案的情况下，可根据设计条件或因素进行诸多修改和适应调整。

Claims (11)

1.用于拍摄提供虚拟现实的图像的三维相机，所述三维相机包括：
多个相机；
位置传感器，配置为追踪所述三维相机的位置，其中，所述多个相机布置在多面体的每个顶点处，以及其中所述多个相机包括在所述多面体的每个顶点处布置的至少三个相机；
处理器，配置为：
生成包括特定索引的索引分布映图，所述特定索引表征所述三维相机的特定位置，其中，所述特定位置是指由所述三维相机的顶点形成的多面体占据的区域彼此不重叠的位置，以及其中，所述三维相机的顶点包括多个相机；以及
确定在所述特定索引指示的位置处拍摄的特定图像；以及存储器，存储所述特定图像。
2.如权利要求1所述的三维相机，其中，布置在所述多面体的每个顶点处的多个相机覆盖的视场是180°或更大。
3.如权利要求1所述的三维相机，其中，所述多面体的顶点之间的距离与用户的双眼之间的距离对应。
4.如权利要求1所述的三维相机，其中，布置在所述多面体的每个顶点处的所述至少三个相机拍摄球形全景图像。
5.如权利要求1所述的三维相机，其中：
所述处理器还配置为从所述位置传感器接收所述三维相机的位置信息并且生成表征所述三维相机的位置的索引分布映图。
6.如权利要求1所述的三维相机，其中，所述三维相机具有四面体形状，以及在所述四面体形状的四个顶点中的每个顶点处布置有三个二维相机。
7.用于拍摄提供虚拟现实的图像的方法，所述方法包括：
追踪三维相机的位置；
将多个相机布置在多面体的每个顶点处，其中，所述多个相机包括在所述多面体的每个顶点处布置的至少三个相机；
生成包括特定索引的索引分布映图，所述特定索引表征所述三维相机的特定位置，其中，所述特定位置是指由所述三维相机的顶点形成的多面体占据的区域彼此不重叠的位置，以及其中，所述三维相机的顶点包括多个相机；
确定在所述特定索引指示的位置处拍摄的特定图像；以及
存储所述特定图像。
8.如权利要求7所述的方法，还包括：
通过定位在所述多面体的同一顶点处的相机拍摄彼此重叠的图像。
9.如权利要求7所述的方法，还包括：
通过定位在所述多面体的相邻顶点处的相机组拍摄彼此重叠的图像。
10.如权利要求9所述的方法，其中，所述相邻顶点之间的距离与用户的双眼之间的距离对应。
11.记录有计算机程序的非暂时性计算机可读记录介质，所述计算机程序在被计算机运行时执行如权利要求7所述的方法。
CN201680080840.0A 2016-02-02 2016-04-26 用于拍摄提供虚拟现实的图像的三维相机 Expired - Fee Related CN108702497B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020160012894A KR102360179B1 (ko) 2016-02-02 2016-02-02 가상 현실을 제공하기 위한 이미지를 촬영하는 3차원 카메라
KR10-2016-0012894 2016-02-02
PCT/KR2016/004365 WO2017135514A1 (ko) 2016-02-02 2016-04-26 가상 현실을 제공하기 위한 이미지를 촬영하는 3차원 카메라

Publications (2)

Publication Number Publication Date
CN108702497A CN108702497A (zh) 2018-10-23
CN108702497B true CN108702497B (zh) 2020-07-24

Family

ID=59500447

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680080840.0A Expired - Fee Related CN108702497B (zh) 2016-02-02 2016-04-26 用于拍摄提供虚拟现实的图像的三维相机

Country Status (5)

Country Link
US (1) US10750156B2 (zh)
EP (1) EP3404915B1 (zh)
KR (1) KR102360179B1 (zh)
CN (1) CN108702497B (zh)
WO (1) WO2017135514A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102360179B1 (ko) 2016-02-02 2022-02-08 삼성전자주식회사 가상 현실을 제공하기 위한 이미지를 촬영하는 3차원 카메라
EP4176334A1 (en) * 2020-07-03 2023-05-10 Pfetch, Inc. Remote attendance and participation systems and methods
US11947740B2 (en) * 2021-06-02 2024-04-02 Qingdao Pico Technology Co., Ltd. 6DoF positioning tracking device and method, and electronic apparatus

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6141034A (en) * 1995-12-15 2000-10-31 Immersive Media Co. Immersive imaging method and apparatus
CN101055494A (zh) * 2006-04-13 2007-10-17 上海虚拟谷数码科技有限公司 基于空间索引立方体全景视频的虚拟场景漫游方法及其系统
CN101627623A (zh) * 2007-08-24 2010-01-13 索尼株式会社 图像处理设备、运动图像播放设备及其处理方法和程序
CN101872469A (zh) * 2009-04-21 2010-10-27 索尼公司 电子设备、显示控制方法和程序
KR20120016896A (ko) * 2010-08-17 2012-02-27 더블유에프지연구소 주식회사 기울기 센서를 이용한 3차원 이미지 조망기능을 갖는 디스플레이장치 및 디스플레이 시스템
KR20130058782A (ko) * 2011-11-27 2013-06-05 공석태 카메라내장 자동차라이트
KR20140146889A (ko) * 2013-06-18 2014-12-29 엘지전자 주식회사 전자장치 및 전자장치의 동작방법

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001285894A (ja) 2000-03-31 2001-10-12 Olympus Optical Co Ltd ３次元画像データの掲載方法
US8004558B2 (en) * 2005-04-07 2011-08-23 Axis Engineering Technologies, Inc. Stereoscopic wide field of view imaging system
JP2009077363A (ja) 2007-08-24 2009-04-09 Sony Corp 画像処理装置、動画再生装置、これらにおける処理方法およびプログラム
KR101594048B1 (ko) 2009-11-09 2016-02-15 삼성전자주식회사 카메라들의 협력을 이용하여 3차원 이미지를 생성하는 방법 및 상기 방법을 위한 장치
KR20130092522A (ko) * 2013-07-02 2013-08-20 삼성전자주식회사 카메라들의 협력을 위한 방법 및 장치
KR20150084200A (ko) 2014-01-13 2015-07-22 엘지전자 주식회사 헤드 마운트 디스플레이 및 제어 방법
GB2525170A (en) * 2014-04-07 2015-10-21 Nokia Technologies Oy Stereo viewing
US9992502B2 (en) * 2016-01-29 2018-06-05 Gopro, Inc. Apparatus and methods for video compression using multi-resolution scalable coding
KR102360179B1 (ko) 2016-02-02 2022-02-08 삼성전자주식회사 가상 현실을 제공하기 위한 이미지를 촬영하는 3차원 카메라

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6141034A (en) * 1995-12-15 2000-10-31 Immersive Media Co. Immersive imaging method and apparatus
CN101055494A (zh) * 2006-04-13 2007-10-17 上海虚拟谷数码科技有限公司 基于空间索引立方体全景视频的虚拟场景漫游方法及其系统
CN101627623A (zh) * 2007-08-24 2010-01-13 索尼株式会社 图像处理设备、运动图像播放设备及其处理方法和程序
CN101872469A (zh) * 2009-04-21 2010-10-27 索尼公司 电子设备、显示控制方法和程序
KR20120016896A (ko) * 2010-08-17 2012-02-27 더블유에프지연구소 주식회사 기울기 센서를 이용한 3차원 이미지 조망기능을 갖는 디스플레이장치 및 디스플레이 시스템
KR20130058782A (ko) * 2011-11-27 2013-06-05 공석태 카메라내장 자동차라이트
KR20140146889A (ko) * 2013-06-18 2014-12-29 엘지전자 주식회사 전자장치 및 전자장치의 동작방법

Also Published As

Publication number Publication date
CN108702497A (zh) 2018-10-23
EP3404915A4 (en) 2019-01-09
KR102360179B1 (ko) 2022-02-08
EP3404915A1 (en) 2018-11-21
WO2017135514A1 (ko) 2017-08-10
KR20170091950A (ko) 2017-08-10
EP3404915B1 (en) 2023-08-23
US10750156B2 (en) 2020-08-18
US20190045171A1 (en) 2019-02-07

Similar Documents

Publication Publication Date Title
JP7349793B2 (ja) 画像処理装置および画像処理方法、プログラム
JP7566973B2 (ja) 情報処理装置、情報処理方法及びプログラム
US20220058888A1 (en) Image processing method and apparatus, and computer storage medium
CN110956695B (zh) 信息处理装置、信息处理方法和存储介质
TW201835723A (zh) 圖形處理方法和裝置、虛擬實境系統和計算機儲存介質
JP6126821B2 (ja) 画像生成方法、画像表示方法、画像生成プログラム、画像生成システム、および画像表示装置
JP6496904B2 (ja) 多視点画像の撮影方法および撮影装置
CN108702497B (zh) 用于拍摄提供虚拟现实的图像的三维相机
CN108668108B (zh) 一种视频监控的方法、装置及电子设备
CN108604390A (zh) 针对头戴式显示设备的光场视点和像素剔除
KR20120017783A (ko) 증강 현실에서 위치 정보를 표시하는 방법 및 장치
US11373329B2 (en) Method of generating 3-dimensional model data
US10992914B2 (en) Image processing method for providing virtual reality, and virtual reality device
JP6997347B2 (ja) 多視点フォトグラメトリによる３ｄシーンモデリングシステム
US20160086372A1 (en) Three Dimensional Targeting Structure for Augmented Reality Applications
JP4710081B2 (ja) 画像作成システム及び画像作成方法
CN117635809A (zh) 3d模型生成方法、系统及电子设备
Sato et al. MR-mirror: a complex of real and virtual mirrors
JP6880410B2 (ja) 映像表示システム、映像表示方法及び映像表示プログラム
US11170562B2 (en) Method of representing shape and color data of 3-D objects
Lavrov et al. Experimental Evaluation of Different Camera Layouts in Marker Motion Capture System
KR20200005236A (ko) 연속적 콘텐츠를 위한 가상현실 제공방법 및 가상현실 제공 프로그램이 기록된 기록매체
JP2024042540A (ja) 画像生成装置、画像生成方法およびプログラム
MX2009008839A (es) Sensor de vision semiesferica con funciones de percepcion para robots moviles.

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200724

CF01 Termination of patent right due to non-payment of annual fee