KR20190096722A - Apparatus and method for providing digital album service through content data generation - Google Patents
Apparatus and method for providing digital album service through content data generation Download PDFInfo
- Publication number
- KR20190096722A KR20190096722A KR1020180016502A KR20180016502A KR20190096722A KR 20190096722 A KR20190096722 A KR 20190096722A KR 1020180016502 A KR1020180016502 A KR 1020180016502A KR 20180016502 A KR20180016502 A KR 20180016502A KR 20190096722 A KR20190096722 A KR 20190096722A
- Authority
- KR
- South Korea
- Prior art keywords
- content data
- information
- image information
- image
- matching
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000001360 synchronised effect Effects 0.000 claims abstract description 16
- 238000012800 visualization Methods 0.000 claims description 15
- 238000013523 data management Methods 0.000 claims description 4
- 230000003190 augmentative effect Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 8
- 230000014509 gene expression Effects 0.000 description 2
- 230000006698 induction Effects 0.000 description 2
- 230000001939 inductive effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Tourism & Hospitality (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
아래의 설명은 디지털 앨범 서비스 제공 장치 및 방법에 관한 것이다.The following description relates to a digital album service providing apparatus and method.
디지털 앨범 제공 서비스는 사용자의 사진 또는 동영상을 데스크톱 PC, 태블릿 PC, 스마트폰 등의 단말기를 통해 앨범 형태로 제공하는 서비스이다. 디지털 앨범 제공 서비스는 사용자의 사진 또는 동영상의 목록을 조회하거나 시각화하는 기능을 제공하거나 사진 또는 동영상이 촬영된 위치를 아이콘으로 표시한 2D 지도 또는 썸네일 이미지를 추가적으로 제공할 수 있다.Digital album providing service is a service that provides the user's photos or videos in the form of album through a terminal such as a desktop PC, tablet PC, smartphone. The digital album providing service may provide a function of searching or visualizing a list of a user's photo or video or additionally providing a 2D map or thumbnail image displaying a location where a photo or video is taken as an icon.
일 실시예에 따른 디지털 앨범 서비스를 위한 콘텐츠 데이터 생성 방법은 이미지 정보를 획득하는 단계; 상기 이미지 정보가 획득된 위치에 대한 위치 정보를 획득하는 단계; 상기 이미지 정보를 획득하는 이미지 정보 획득 장치의 자세에 대한 자세 정보를 획득하는 단계; 상기 이미지 정보, 상기 위치 정보 및 상기 자세 정보가 동기화된 콘텐츠 데이터를 생성하는 단계; 및 상기 콘텐츠 데이터를 저장하는 단계를 포함할 수 있다. According to one or more exemplary embodiments, a method of generating content data for a digital album service includes: obtaining image information; Obtaining location information on a location from which the image information is obtained; Acquiring posture information on a posture of an image information obtaining device obtaining the image information; Generating content data in which the image information, the location information, and the attitude information are synchronized; And storing the content data.
일 실시예에 따른 콘텐츠 데이터 생성 방법에서 상기 자세 정보를 획득하는 단계는 상기 이미지 정보 획득 장치의 이미지 획득 방향에 대한 정보, 기울기 정보, 회전 정보 및 FOV(Field Of View) 정보 중 적어도 하나를 획득할 수 있다.The acquiring of the posture information in the method of generating content data according to an embodiment may include obtaining at least one of information on an image acquisition direction, tilt information, rotation information, and field of view (FOV) information of the image information acquisition apparatus. Can be.
일 실시예에 따른 콘텐츠 데이터 생성 방법은 상기 이미지 정보가 사진에 해당하는 경우 상기 사진에 해당하는 이미지 정보에 대한 위치 정보 및 자세 정보를 포함하도록 상기 사진의 파일 형식을 수정하여 상기 위치 정보 및 자세 정보를 저장할 수 있다.In the method of generating content data according to an embodiment, when the image information corresponds to a photo, the location information and posture information are modified by modifying a file format of the photo to include location information and posture information on image information corresponding to the photo. Can be stored.
일 실시예에 따른 콘텐츠 데이터 생성 방법에서 상기 이미지 정보가 동영상에 해당하는 경우, 상기 콘텐츠 데이터를 생성하는 단계는 상기 동영상의 각각의 프레임에 대하여 상기 위치 정보 및 자세 정보를 동기화하고, 상기 동기화된 프레임에 기초하여 상기 콘텐츠 데이터를 생성할 수 있다.In the method of generating content data according to an embodiment, when the image information corresponds to a video, the generating of the content data may include synchronizing the position information and posture information with respect to each frame of the video, and the synchronized frames The content data can be generated based on.
일 실시예에 따른 콘텐츠 데이터 생성 방법은 상기 생성된 콘텐츠 데이터와 상기 동영상은 각각 따로 저장할 수 있다.In the method of generating content data according to an embodiment, the generated content data and the video may be separately stored.
일 실시예에 따른 디지털 앨범 서비스 제공 방법은 콘텐츠 데이터 생성 장치를 통해 생성된 콘텐츠 데이터를 조회하는 단계; 상기 콘텐츠 데이터가 제공될 서비스 환경에 기초하여 상기 콘텐츠 데이터를 시각화하는 단계; 및 상기 시각화된 콘텐츠 데이터를 사용자에게 제공하는 단계를 포함할 수 있다.According to one or more exemplary embodiments, a method for providing a digital album service includes: retrieving content data generated through a content data generating device; Visualizing the content data based on a service environment in which the content data is to be provided; And providing the visualized content data to a user.
일 실시예에 따른 디지털 앨범 서비스 제공 방법에서 상기 시각화하는 단계는 상기 콘텐츠 데이터를 2D 지도에 정합함으로써, 상기 콘텐츠 데이터를 2D 형태로 시각화할 수 있다.In the method of providing a digital album service according to an embodiment, the visualizing may match the content data to a 2D map, thereby visualizing the content data in a 2D form.
일 실시예에 따른 디지털 앨범 서비스 제공 방법에서 상기 시각화하는 단계는 상기 콘텐츠 데이터를 3D 공간에 정합함으로써, 상기 콘텐츠 데이터를 3D 형태로 시각화할 수 있다.In the method of providing a digital album service according to an embodiment, the visualizing may match the content data in a 3D space, thereby visualizing the content data in a 3D form.
일 실시예에 따른 디지털 앨범 서비스 제공 방법에서 상기 시각화하는 단계는 상기 콘텐츠 데이터에 포함된 위치 정보, 자세 정보 및 상기 3D 공간의 주변 환경 정보에 기초하여 상기 콘텐츠 데이터를 상기 3D 공간에 정합함으로써, 상기 콘텐츠 데이터를 시각화할 수 있다.In the digital album service providing method according to an embodiment, the visualizing may be performed by matching the content data with the 3D space based on location information, attitude information, and surrounding environment information of the 3D space. Visualize content data.
일 실시예에 따른 디지털 앨범 서비스 제공 방법에서 상기 시각화하는 단계는 상기 콘텐츠 데이터를 배경 VR(Virtual Reality) 이미지와 정합함으로써, VR 형태로 상기 콘텐츠 데이터를 시각화할 수 있다.In the method of providing a digital album service according to an embodiment, the visualizing may match the content data with a background VR (Virtual Reality) image, thereby visualizing the content data in a VR form.
일 실시예에 따른 디지털 앨범 서비스 제공 방법에서 상기 시각화하는 단계는 실시간 배경에 상기 콘텐츠 데이터를 정합함으로써, AR(Augmented Reality) 형태로 상기 콘텐츠 데이터를 시각화할 수 있다.In the method of providing a digital album service according to an embodiment, the visualizing may match the content data with a real-time background, thereby visualizing the content data in the form of Augmented Reality (AR).
일 실시예에 따른 디지털 앨범 서비스 제공 방법에서 상기 조회하는 단계는 사용자 단말을 통한 사용자의 요청 신호를 수신하는 경우 또는 상기 사용자 단말의 위치 정보에 기초하여 상기 콘텐츠 데이터를 조회할 수 있다.In the method of providing a digital album service according to an embodiment of the present disclosure, when the request signal of the user is received through the user terminal or the location data of the user terminal may be inquired, the content data may be inquired.
일 실시예에 따른 디지털 앨범 서비스 제공 방법에서 상기 조회하는 단계는 상기 사용자 단말의 현재 위치 정보 및 콘텐츠 데이터에 포함된 위치 정보에 기초하여, 상기 사용자 단말의 현재 위치로부터 미리 정해진 거리 내에서 체험할 수 있는 콘텐츠 데이터를 조회할 수 있다.In the method of providing a digital album service according to an embodiment of the present disclosure, the querying may be performed within a predetermined distance from the current location of the user terminal based on the current location information of the user terminal and location information included in the content data. You can query the content data.
일 실시예에 따른 디지털 앨범 서비스 제공 방법은 사용자 단말의 현재 위치 정보에 기초하여, 상기 사용자 단말의 현재 위치로부터 미리 정해진 거리 내에서 체험할 수 있는 콘텐츠 데이터에 대한 정보를 제공하는 단계를 더 포함할 수 있다.The method of providing a digital album service according to an embodiment may further include providing information on content data that can be experienced within a predetermined distance from the current location of the user terminal based on the current location information of the user terminal. Can be.
일 실시예에 따른 디지털 앨범 서비스 제공 방법에서 상기 콘텐츠 데이터에 대한 정보는 상기 콘텐츠 데이터에 포함된 상기 이미지 정보가 획득된 위치에 대한 위치 정보를 포함할 수 있다.In the digital album service providing method according to an embodiment, the information on the content data may include location information on a location where the image information included in the content data is obtained.
일 실시예에 따른 콘텐츠 데이터 생성 장치는 이미지 정보, 상기 이미지 정보가 획득된 위치에 대한 위치 정보 및 상기 이미지 정보를 획득한 이미지 정보 획득 장치의 자세에 대한 자세 정보를 수신하는 수신부; 상기 이미지 정보에 상기 위치 정보 및 상기 자세 정보를 동기화하는 동기화부; 및 상기 동기화된 이미지 정보에 기초하여 콘텐츠 데이터를 생성하고, 상기 생성된 콘텐츠 데이터를 관리하는 콘텐츠 데이터 관리부; 및 상기 생성된 콘텐츠 데이터를 저장하는 저장부를 포함할 수 있다.According to an embodiment, an apparatus for generating content data may include a receiver configured to receive image information, position information on a location at which the image information is obtained, and posture information on a posture of an image information obtaining apparatus obtained the image information; A synchronization unit for synchronizing the position information and the posture information with the image information; A content data manager configured to generate content data based on the synchronized image information and to manage the generated content data; And a storage unit for storing the generated content data.
일 실시예에 따른 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터를 조회하는 콘텐츠 데이터 조회부; 상기 콘텐츠 데이터를 상기 콘텐츠 데이터가 제공될 서비스 환경에 정합하는 정합부; 및 상기 정합부의 정합 결과에 기초하여, 상기 콘텐츠 데이터를 시각화하는 시각화부를 포함할 수 있다.According to an embodiment, an apparatus for providing a digital album service includes: a content data inquiry unit for searching content data; A matching unit for matching the content data to a service environment in which the content data is to be provided; And a visualization unit configured to visualize the content data based on a matching result of the matching unit.
도 1은 일 실시예에 따른 디지털 앨범 서비스 제공 시스템의 전체 동작을 도시하는 도면이다.
도 2는 일 실시예에 따른 디지털 앨범 서비스를 위한 콘텐츠 데이터 생성 방법을 설명하기 위한 흐름도이다.
도 3은 일 실시예에 따른 디지털 앨범 서비스 제공 방법을 설명하기 위한 흐름도이다.
도 4는 일 실시예에 따른 디지털 앨범 서비스 제공 시스템의 전체 구성을 도시하는 도면이다.
도 5는 일 실시예에 따른 콘텐츠 데이터 생성 장치의 구성을 도시하는 도면이다.
도 6은 일 실시예에 따른 디지털 앨범 서비스 제공 장치의 구성을 도시하는 도면이다.1 is a diagram illustrating the overall operation of a digital album service providing system according to an exemplary embodiment.
2 is a flowchart illustrating a method of generating content data for a digital album service according to an embodiment.
3 is a flowchart illustrating a digital album service providing method according to an embodiment.
4 is a diagram illustrating an overall configuration of a digital album service providing system according to an embodiment.
5 is a diagram illustrating a configuration of an apparatus for generating content data according to an embodiment.
6 is a diagram illustrating a configuration of a digital album service providing apparatus according to an embodiment.
이하에서, 첨부된 도면을 참조하여 실시예들을 상세하게 설명한다. 그러나, 실시예들에는 다양한 변경이 가해질 수 있어서 특허출원의 권리 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 실시예들에 대한 모든 변경, 균등물 내지 대체물이 권리 범위에 포함되는 것으로 이해되어야 한다.Hereinafter, exemplary embodiments will be described in detail with reference to the accompanying drawings. However, various changes may be made to the embodiments so that the scope of the patent application is not limited or limited by these embodiments. It is to be understood that all changes, equivalents, and substitutes for the embodiments are included in the scope of rights.
실시예에서 사용한 용어는 단지 설명을 목적으로 사용된 것으로, 한정하려는 의도로 해석되어서는 안된다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of description and should not be construed as limiting. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this specification, terms such as "comprise" or "have" are intended to indicate that there is a feature, number, step, action, component, part, or combination thereof described on the specification, and one or more other features. It is to be understood that the present invention does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, components, or a combination thereof.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in the commonly used dictionaries should be construed as having meanings consistent with the meanings in the context of the related art and shall not be construed in ideal or excessively formal meanings unless expressly defined in this application. Do not.
또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.In addition, in the description with reference to the accompanying drawings, the same components regardless of reference numerals will be given the same reference numerals and duplicate description thereof will be omitted. In the following description of the embodiment, when it is determined that the detailed description of the related known technology may unnecessarily obscure the gist of the embodiment, the detailed description thereof will be omitted.
디지털 앨범 서비스 제공 시스템은 이미지 정보를 획득한 위치에 대한 정보 및 이미지 정보 획득 장치의 자세에 대한 정보를 이미지 정보에 동기화하고, 동기화된 이미지 정보에 기초하여 콘텐츠 데이터를 생성하고, 서비스 환경에 따라 2D, 3D, VR(Virtual Reality), AR(Augmented Reality) 방식으로 콘텐츠 데이터를 시각화하여 사용자에게 제공할 수 있다. 디지털 앨범 서비스 제공 시스템은 이미지 정보가 획득된 위치에 대한 정보 및 이미지 정보 획득 장치의 자세에 대한 정보를 고려함으로써 이미지 정보가 획득될 당시의 공간 상황을 그대로 재현함으로써, 보다 현장감 넘치는 디지털 앨범 서비스를 제공할 수 있다. 또한, 디지털 앨범 서비스 제공 시스템은 서비스 환경에 따라 다양한 형태의 디지털 앨범 서비스를 제공함으로써 사용자에게 다양한 경험을 제공할 수 있고, 서비스 이용에 대한 사용자의 만족감을 증진시킬 수 있다.The digital album service providing system synchronizes the information on the position of obtaining the image information and the posture of the image information obtaining apparatus with the image information, generates the content data based on the synchronized image information, and according to the service environment, 2D. Content data can be visualized and provided to users in 3D, Virtual Reality (VR), and Augmented Reality (AR) methods. The digital album service providing system provides a more realistic digital album service by reproducing the spatial situation at the time when the image information is acquired by considering the information on the location of the image information and the attitude of the image information obtaining device. can do. In addition, the digital album service providing system can provide various experiences to the user by providing various types of digital album services according to the service environment, and can improve the user's satisfaction with the service use.
도 1은 일 실시예에 따른 디지털 앨범 서비스 제공 시스템의 전체 동작을 도시하는 도면이다.1 is a diagram illustrating the overall operation of a digital album service providing system according to an exemplary embodiment.
도 1을 참조하면, 디지털 앨범 서비스 제공 시스템(120)은 사용자(110)가 과거의 일 공간(111)에 대하여 획득한 이미지 정보(113)에 기초하여 2D 형태의 디지털 앨범(131), 3D 형태의 디지털 앨범(133), VR 형태의 디지털 앨범(135) 및 AR 형태의 디지털 앨범(137)을 제공할 수 있다. 디지털 앨범 서비스 제공 시스템(120)이 제공할 수 있는 디지털 앨범의 형태는 제시된 예시에 한정되지 않고, 이미지 정보에 대한 위치 정보 및 이미지 정보 획득 장치의 자세 정보에 기초하여 생성될 수 있는 모든 형태의 디지털 앨범을 제공할 수 있다.Referring to FIG. 1, the digital album
디지털 앨범 서비스 제공 시스템(120)은 사용자(110)가 일 공간(111)에 대하여 이미지 정보 획득 장치를 통해 획득한 이미지 정보(113), 이미지 정보를 획득한 위치에 대한 위치 정보 및 이미지 정보 획득 장치의 자세 정보가 동기화된 콘텐츠 데이터(121)을 생성하고, 생성된 콘텐츠 데이터에 기초하여 다양한 형태의 디지털 앨범을 제공할 수 있다. 디지털 앨범은 2D 지도에 이미지 정보가 결합된 2D 형태의 디지털 앨범(131), 3D 공간에 이미지 정보가 결합된 3D 형태의 디지털 앨범(133), 가상 현실 배경에 이미지 정보가 결합된 VR 형태의 디지털 앨범 및 사용자(130)의 사용자 단말로 촬영되는 현재의 실시간 배경에 이미지 정보가 결합된 AR 형태의 디지털 앨범(137)을 포함할 수 있다.The digital album
도 2는 일 실시예에 따른 디지털 앨범 서비스를 위한 콘텐츠 데이터 생성 방법을 설명하기 위한 흐름도이다.2 is a flowchart illustrating a method of generating content data for a digital album service according to an embodiment.
일 실시예에 따르면, 단계(210)에서 콘텐츠 생성 장치는 이미지 정보를 획득할 수 있다. 콘텐츠 생성 장치는 이미지 정보 획득 장치를 통해 이미지 정보를 획득할 수 있다. 이미지 정보는 사진, 동영상을 포함할 수 있고, 이미지 정보 획득 장치는 스마트폰, 태플릿 PC와 같은 모바일 기기 및 DSLR과 같은 디지털 카메라를 포함하지만 이에 한정되지 않는다.According to an embodiment, in
일 실시예에 따르면, 단계(230)에서 콘텐츠 생성 장치는 이미지 정보가 획득된 위치에 대한 위치 정보를 획득할 수 있고, 단계(250)에서 콘텐츠 생성 장치는 이미지 정보를 획득하는 이미지 정보 획득 장치의 자세에 대한 자세 정보를 획득할 수 있다. 일 실시예에 따르면, 위치 정보는 이미지 정보가 획득될 당시 이미지 획득 장치의 실내 좌표, 경위도를 포함할 수 있고, 자세 정보는 이미지 정보 획득 장치의 이미지 획득 방향에 대한 정보, 기울기 정보, 회전 정보 및 FOV(Field Of View) 정보 중 적어도 하나를 포함할 수 있다. 예를 들어, 자세 정보는 이미지 정보가 획득될 당시의 당시 이미지 획득 장치의 자세에 관한 정보로써, 방향에 대한 정보를 나타내는 요(yaw), 방위각(azimuth), 베어링(bearing), 기울기에 대한 정보를 나타내는 틸트(tilt), 피치(pitch), 회전에 대한 정보를 나타내는 롤(roll), 시야각에 대한 정보를 나타내는 FOV(Field of View) 정보를 포함할 수 있다. 이미지 정보 획득 장치가 스마트폰, 태블릿 PC와 같은 모바일 기기일 경우, 이미지 정보 획득 장치의 내부에 자체적으로 GPS(Global Positioning System), 자이로스코프, 가속도 센서, 각속도 센서, 지자기 센서 등을 포함하므로, 콘텐츠 생성 장치는 이미지 획득 장치가 자체적으로 생성한 이미지 정보에 대한 위치 정보 및 자세 정보를 획득할 수 있다. 이미지 정보 획득 장치가 DSLR과 같은 디지털 카메라인 경우, 자체적으로 이미지 정보에 대한 위치 정보 또는 자세 정보를 생성하지 못할 수 있다. 이미지 정보 획득 장치가 디지털 카메라와 같이 자체적으로 자세 정보를 생성할 수 없는 경우, 콘텐츠 생성 장치는 추가적인 장비를 통해 획득한 위치 정보 또는 자세 정보를 획득할 수 있다. 예를 들어, 이미지 정보 획득 장치는 추가적인 장비로써 GPS/GNSS(Global Navigation Satellite System), IMU(Inertial Measurement Unit)/AHRS(Attitude Heading Reference System) 등이 내장된 별도의 소형 부착 장비를 이용하고, 디지털 카메라의 스트로브 신호(strobe signal) 또는 적외선 신호와 소형 부착 장비의 출력을 연동함으로써 위치 정보 또는 자세 정보를 획득할 수 있다. 소형 부착 장비를 통해 이미지 정보에 대한 위치 정보 또는 이미지 정보 획득 장치의 자세 정보가 획득될 수 있고, 콘텐츠 생성 장치는 소형 부착 장비를 통해 획득한 위치 정보 또는 자세 정보를 획득할 수 있다.According to an embodiment, in
일 실시예에 따르면, 단계(270)에서 콘텐츠 생성 장치는 이미지 정보, 위치 정보 및 자세 정보가 동기화된 콘텐츠 데이터를 생성할 수 있다. 콘텐츠 생성 장치는 획득한 이미지 정보에 획득한 위치 정보 또는 자세 정보를 동기화하고, 동기화된 이미지 정보에 기초하여 콘텐츠 데이터를 생성할 수 있다. 일 실시예에 따르면, 이미지 정보가 동영상에 해당하는 경우, 콘텐츠 데이터 생성 장치는 동영상의 각각의 프레임에 대하여 위치 정보 및 자세 정보를 동기화할 수 있고, 동기화된 각각의 프레임을 통해 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, in
일 실시예에 따르면, 단계(290)에서 콘텐츠 데이터 생성 장치는 단계(270)에서 생성된 콘텐츠 데이터를 저장부에 저장할 수 있다.According to an embodiment, in
일 실시예에 따르면, 콘텐츠 데이터 생성 장치는 이미지 정보가 사진에 해당하는 경우, 사진에 해당하는 이미지 정보에 대응하는 위치 정보 및 자세 정보를 포함하도록 사진의 파일 형식을 수정함으로써, 위치 정보 및 자세 정보를 저장부에 저장할 수 있다. 예를 들어, 이미지 정보가 사진에 해당하는 경우, 콘텐츠 데이터 생성 장치는 EXIF(EXchangable Image File format) 사용자 태그를 확장하는 방식으로, 위치 정보 및 자세 정보를 부가 정보로 포함하도록 사진 파일의 파일 형식을 수정할 수 있고, 수정된 파일 형식에 기초하여 콘텐츠 데이터를 저장할 수 있다.According to an embodiment of the present disclosure, when the image information corresponds to a photo, the content data generating device may modify the file format of the photo to include location information and posture information corresponding to the image information corresponding to the photo, thereby providing location information and posture information. Can be stored in the storage. For example, if the image information corresponds to a photo, the content data generating device extends the EXIF (Exchangable Image File format) user tag, and the file format of the photo file is included to include location information and posture information as additional information. It is possible to modify, and to store content data based on the modified file format.
일 실시예에 따르면, 콘텐츠 데이터 생성 장치는 이미지 정보가 동영상에 해당하는 경우, 동영상의 각각의 프레임들을 위치 정보 및 자세 정보와 동기화함으로써 생성된 콘텐츠 데이터를 동영상과 따로 저장할 수 있다.According to an embodiment, when the image information corresponds to a video, the content data generating apparatus may store content data generated by synchronizing respective frames of the video with location information and posture information separately from the video.
도 3은 일 실시예에 따른 디지털 앨범 서비스 제공 방법을 설명하기 위한 흐름도이다.3 is a flowchart illustrating a digital album service providing method according to an embodiment.
일 실시예에 따르면, 단계(310)에서 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터 생성 장치를 통해 생성된 콘텐츠 데이터를 조회할 수 있다. 디지털 앨범 서비스 제공 장치는 사용자 단말의 조회 요청 신호를 수신하는 경우 콘텐츠 데이터를 콘텐츠 생성 장치에 조회할 수 있다. 또한, 디지털 앨범 서비스 제공 장치는 사용자 단말의 현재 위치와 콘텐츠 데이터에 포함된 위치 정보에 기초하여 사용자 단말의 현재 위치로부터 미리 정해진 거리 내에서 체험할 수 있는 콘텐츠 데이터의 존재 여부를 조회할 수 있다.According to an embodiment, in
일 실시예에 따르면, 단계(330)에서 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터가 제공될 서비스 환경에 기초하여 조회된 콘텐츠 데이터를 시각화할 수 있다. 디지털 앨범 서비스 제공 장치는 조회된 콘텐츠 데이터를 서비스 환경에 따라 서로 다른 방식으로 정합함으로써, 콘텐츠 데이터를 시각화할 수 있다.According to an embodiment, in
일 실시예에 따르면, 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터를 2D 지도에 정합함으로써 콘텐츠 데이터를 2D 형태로 시각화할 수 있다. 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터의 위치 정보 및 자세 정보에 기초하여 콘텐츠 데이터를 2D 지도에 정합함으로써, 시각화된 2D 형태의 콘텐츠 데이터를 생성할 수 있다. 예를 들어, 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터에 포함된 위치 정보, 자세 정보에 포함된 방향 정보 및 FOV 정보에 기초하여 콘텐츠 데이터를 시각화할 수 있다. 디지털 앨범 서비스 제공 장치는 위치 정보에 기초하여 2D 지도상에 콘텐츠 데이터의 이미지 정보를 정합할 위치를 결정할 수 있고, 방향 정보 및 FOV 정보에 기초하여 콘텐츠 데이터의 이미지 정보 및 2D 지도를 조절함으로써, 콘텐츠 데이터를 2D 지도에 정합할 수 있다. 디지털 앨범 서비스 제공 장치는 2D 지도에 정합된 콘텐츠 데이터를 통해 이미지 획득 당시의 공간 상황이 고려된 시각화된 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the digital album service providing apparatus may visualize the content data in the 2D form by matching the content data to the 2D map. The digital album service providing apparatus may generate the visualized 2D type content data by matching the content data to the 2D map based on the location information and the posture information of the content data. For example, the digital album service providing apparatus may visualize the content data based on the location information included in the content data, the direction information included in the attitude information, and the FOV information. The digital album service providing apparatus may determine a position to match image information of the content data on the 2D map based on the location information, and adjust the image information and the 2D map of the content data based on the direction information and the FOV information. Match data to 2D maps. The digital album service providing apparatus may generate visualized content data considering the spatial situation at the time of image acquisition through the content data matched to the 2D map.
일 실시예에 따르면, 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터를 3D 공간에 정합함으로써, 콘텐츠 데이터를 3D 형태로 시각화할 수 있다. 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터의 위치 정보 및 자세 정보에 기초하여 3D 공간에 콘텐츠 데이터의 이미지 정보를 정합함으로써, 시각화된 3D 형태의 콘텐츠 데이터를 생성할 수 있다. 예를 들어, 디지털 앨범 서비스 제공 장치는 위치 정보에 기초하여 3D 공간 상의 콘텐츠 데이터의 이미지 정보가 배치될 위치를 결정할 수 있고, 콘텐츠 데이터의 자세 정보 및 3D 공간의 주변 환경 정보(예를 들어, 3D 공간 상 건물의 텍스쳐(texture)정보 등)에 기초하여 콘텐츠 데이터의 이미지 정보 및 3D 공간을 조절함으로써, 콘텐츠 데이터를 3D 공간에 정합할 수 있다. 디지털 앨범 서비스 제공 장치는 3D 공간에 정합된 콘텐츠 데이터를 통해 이미지 획득 당시의 공간 상황이 고려된 시각화된 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the digital album service providing apparatus may visualize the content data in the 3D form by matching the content data to the 3D space. The digital album service providing apparatus may generate visualized 3D-type content data by matching the image information of the content data in the 3D space based on the location information and the attitude information of the content data. For example, the digital album service providing apparatus may determine a location where image information of content data on a 3D space is to be disposed based on the location information, and posture information of the content data and surrounding environment information of the 3D space (for example, 3D). The content data can be matched to the 3D space by adjusting the image information and the 3D space of the content data based on texture information of the building in space. The digital album service providing apparatus may generate visualized content data considering the spatial situation at the time of image acquisition through the content data matched to the 3D space.
일 실시예에 따르면, 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터를 배경 VR 이미지와 정합함으로써 콘텐츠 데이터를 VR 형태로 시각화할 수 있다. 예를 들어, VR 형태의 시각화된 콘텐츠 데이터는 거리뷰 또는 실내뷰 등의 VR 환경으로 표현될 수 있다. 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터의 위치 정보 및 자세 정보에 기초하여 콘텐츠 데이터를 배경 VR 이미지에 정합함으로써, 시각화된 VR 형태의 콘텐츠 데이터를 생성할 수 있다. 예를 들어, 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터에 포함된 위치 정보에 기초하여 배경 VR 이미지 상에 콘텐츠 데이터의 이미지 정보를 정합할 위치를 결정할 수 있고, 자세 정보에 기초하여 콘텐츠 데이터의 이미지 정보 및 배경 VR 이미지를 조절함으로써, 콘텐츠 데이터를 배경 VR 이미지에 정합할 수 있다. 디지털 앨범 서비스 제공 장치는 VR 형태의 시각화된 콘텐츠 데이터를 생성함으로써, 이미지 획득 당시의 공간 상황이 고려된 시각화된 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the digital album service providing apparatus may visualize the content data in a VR form by matching the content data with a background VR image. For example, the visualized content data in the form of VR may be represented in a VR environment such as a street view or an indoor view. The digital album service providing apparatus may generate the visualized VR content data by matching the content data with the background VR image based on the location information and the posture information of the content data. For example, the digital album service providing apparatus may determine a position to match the image information of the content data on the background VR image based on the position information included in the content data, and based on the posture information, the image information of the content data and By adjusting the background VR image, the content data can be matched to the background VR image. The digital album service providing apparatus may generate visualized content data in consideration of a spatial situation at the time of image acquisition by generating visualized content data in a VR form.
일 실시예에 따르면, 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터를 실시간 배경에 정합함으로써, 콘텐츠 데이터를 AR 형태로 시각화할 수 있다. 디지털 앨범 서비스 제공 장치는 콘텐츠 데이터의 위치 정보 및 자세 정보에 기초하여 콘텐츠 데이터를 모바일 기기를 통해 들어오는 실시간 배경에 정합함으로써 시각화된 AR 형태의 콘텐츠 데이터를 생성할 수 있다. 예를 들어 디지털 앨범 서비스 제공 장치는 위치 정보에 기초하여 실시간 배경에 콘텐츠 데이터의 이미지 정보를 정합할 위치를 결정할 수 있고, 자세 정보에 기초하여 콘텐츠 데이터의 이미지 정보 및 실시간 배경을 조절함으로써, 콘텐츠 데이터를 실시간 배경에 정합할 수 있다. 디지털 앨범 서비스 제공 장치는 AR 형태로 시각화된 콘텐츠 데이터를 통해 콘텐츠 데이터의 이미지 정보 획득 당시의 공간 상황을 재현한 시각화된 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the digital album service providing apparatus may visualize the content data in the AR form by matching the content data with the real-time background. The digital album service providing apparatus may generate visualized AR-type content data by matching the content data with a real-time background coming through the mobile device based on the location information and posture information of the content data. For example, the digital album service providing apparatus may determine a position to match the image information of the content data to the real time background based on the location information, and adjust the image information and the real time background of the content data based on the posture information. Can be matched to a real-time background. The digital album service providing apparatus may generate visualized content data that reproduces the spatial situation at the time of acquiring image information of the content data through the content data visualized in the AR form.
일 실시예에 따르면, 단계(350)에서 디지털 앨범 서비스 제공 장치는 시각화된 콘텐츠 데이터를 사용자에게 제공할 수 있다. 디지털 앨범 서비스 제공 장치는 단계(330)에서 시각화된 콘텐츠 데이터를 사용자의 사용자 단말에 제공함으로써, 이미지 정보 획득 당시의 공간 상황을 재현한 디지털 앨범을 사용자에게 제공할 수 있다.According to an embodiment, in
일 실시예에 따르면, 디지털 앨범 서비스 제공 장치는 사용자 단말의 현재 위치 정보에 기초하여, 사용자 단말의 현재 위치로부터 미리 정해진 거리 내에서 체험할 수 있는 콘텐츠 데이터에 대한 정보를 제공할 수 있다. 예를 들어, 디지털 앨범 서비스 제공 장치는 사용자 단말의 현재 위치를 모니터링할 수 있고, 모니터링 결과 및 콘텐츠 데이터의 위치 정보에 기초하여 미리 정해진 거리 내에서 체험할 수 있는 콘텐츠 데이터에 대한 정보를 제공할 수 있다. 콘텐츠 데이터에 대한 정보는 콘텐츠 데이터에 포함된 이미지 정보, 위치 정보, 콘텐츠 데이터를 체험하기 위한 위치 정보를 포함할 수 있다. 또한, 디지털 앨범 서비스 제공 장치는 사용자 단말에 각각의 콘텐츠 데이터를 체험할 수 있는 위치로 이동하기 위한 안내 정보 또는 이동을 유도하는 유도 메시지를 제공할 수 있다.According to an embodiment, the apparatus for providing digital album service may provide information about content data that can be experienced within a predetermined distance from the current location of the user terminal based on the current location information of the user terminal. For example, the digital album service providing apparatus may monitor the current location of the user terminal and may provide information about content data that can be experienced within a predetermined distance based on the monitoring result and the location information of the content data. have. The information about the content data may include image information included in the content data, location information, and location information for experiencing the content data. In addition, the digital album service providing apparatus may provide the user terminal with guidance information for moving to a location where the respective content data can be experienced or an induction message for inducing the movement.
도 4는 일 실시예에 따른 디지털 앨범 서비스 제공 시스템의 전체 구성을 도시하는 도면이다.4 is a diagram illustrating an overall configuration of a digital album service providing system according to an embodiment.
도 4를 참조하면, 디지털 앨범 서비스 제공 시스템(400)은 이미지 정보 및 자세 정보 획득 장치(410), 획득한 이미지 정보 및 자세 정보에 기초하여 콘텐츠 데이터를 생성하는 콘텐츠 데이터 생성 장치(420) 및 콘텐츠 데이터에 기초하여 디지털 앨범 서비스를 제공하는 디지털 앨범 서비스 제공 장치(430)를 포함할 수 있다. 이미지 정보 및 자세 정보 획득 장치(410)는 자세 정보를 획득할 수 있는 센서를 포함하는 경우 단일 장치를 통해 이미지 정보와 장치의 자세 정보를 획득할 수도 있지만 자세 정보를 획득하기 위한 센서가 포함되지 않은 경우 이미지 정보 획득 장치와 이미지 획득 장치의 자세 정보를 획득하는 자세 정보 획득 장치가 결합된 형태일 수도 있다. 디지털 앨범 서비스 제공 시스템(400)의 이미지 정보 및 자세 정보 획득 장치(410)는 콘텐츠 데이터 생성 장치(420) 및 디지털 앨범 서비스 제공 장치(430)과 일체형 장치이거나 별도의 구별된 장치일 수 있다. 콘텐츠 데이터 생성 장치(420) 및 디지털 앨범 서비스 제공 장치(430)의 세부 구성은 도 5 및 도 6을 통해 제시된다.Referring to FIG. 4, the digital album service providing system 400 includes an image information and posture
도 5는 일 실시예에 따른 콘텐츠 데이터 생성 장치의 구성을 도시하는 도면이다.5 is a diagram illustrating a configuration of an apparatus for generating content data according to an embodiment.
일 실시예에 따른 콘텐츠 데이터 생성 장치(500)는 이미지 정보, 이미지 정보가 획득된 위치에 대한 위치 정보 및 이미지 정보를 획득한 이미지 정보 획득 장치의 자세에 대한 자세 정보 중 적어도 하나를 수신하는 수신부(510), 이미지 정보에 위치 정보 및 자세 정보를 동기화하는 동기화부(520), 동기화된 이미지 정보에 기초하여 콘텐츠 데이터를 생성하고, 생성된 콘텐츠 데이터를 관리하는 콘텐츠 데이터 관리부(530), 생성된 콘텐츠 데이터를 저장하는 저장부(540) 및 콘텐츠 데이터를 검색하는 콘텐츠 데이터 검색부(550)를 포함할 수 있다.The content
일 실시예에 따르면, 위치 정보는 실내 좌표, 경위도를 포함하는 이미지 정보가 획득된 위치에 대한 정보를 포함할 수 있고, 자세 정보는 이미지 정보 획득 장치의 이미지 획득 방향에 대한 정보, 기울기 정보, 회전 정보 및 FOV 정보 중 적어도 하나를 포함할 수 있다.According to an embodiment, the location information may include information on a location from which image information including room coordinates and longitude and latitude is obtained, and the posture information includes information on an image acquisition direction, tilt information, and rotation of the image information acquisition device. It may include at least one of the information and FOV information.
일 실시예에 따르면, 동기화부(520)는 이미지 정보에 위치 정보 및 자세 정보를 동기화할 수 있다. 예를 들어, 이미지 정보가 동영상에 해당하는 경우, 동기화부(520)는 동영상의 각각의 프레임에 대하여 위치 정보 및 자세 정보를 동기화할 수 있다.According to an embodiment, the
일 실시예에 따르면, 콘텐츠 데이터 관리부(530)는 동기화된 이미지 정보에 기초하여 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the
일 실시예에 따르면, 콘텐츠 데이터 관리부(530)는 이미지 정보가 사진에 해당하는 경우 사진에 해당하는 이미지 정보에 대한 위치 정보 및 자세 정보를 포함하도록 사진의 파일 형식을 수정하여 위치 정보 및 자세 정보를 저장부(540)에 저장할 수 있다. 예를 들어, 데이터 관리부(530)는 사진의 EXIF 사용자 태그를 확장하는 방식으로 위치 정보 및 자세 정보를 부가 정보를 포함할 수 있도록 사진 파일의 형식을 수정할 수 있고, 수정된 파일 형식을 통해 콘텐츠 데이터를 저장부(540)에 저장할 수 있다.According to an embodiment of the present disclosure, when the image information corresponds to a photo, the
일 실시예에 따르면, 콘텐츠 데이터 관리부(530)는 이미지 정보가 동영상에 해당하는 경우 위치 정보 및 자세 정보가 각각의 프레임에 대해 동기화된 동영상에 기초하여 콘텐츠 데이터를 생성하고, 생성된 콘텐츠 데이터와 동영상을 각각 따로 저장부(540)에 저장할 수 있다.According to an embodiment, when the image information corresponds to a video, the
일 실시예에 따르면, 콘텐츠 데이터 검색부(550)는 디지털 앨범 서비스 제공 장치의 조회 요청 신호에 기초하여 콘텐츠 데이터 관리부(530)에 조회 요청 신호를 전달함으로써, 콘텐츠 데이터에 대한 검색을 수행할 수 있다. 콘텐츠 데이터 관리부(530)는 콘텐츠 데이터 검색부(550)으로부터 수신한 조회 요청 신호에 기초하여 저장부(540)에 저장된 콘텐츠 데이터를 검색할 수 있다.According to an embodiment, the content
도 6은 일 실시예에 따른 디지털 앨범 서비스 제공 장치의 구성을 도시하는 도면이다.6 is a diagram illustrating a configuration of a digital album service providing apparatus according to an embodiment.
일 실시예에 따르면, 디지털 앨범 서비스 제공 장치(600)는 콘텐츠 데이터를 조회하는 콘텐츠 데이터 조회부(610), 콘텐츠 데이터를 콘텐츠 데이터가 제공될 서비스 환경에 정합하는 정합부(630), 정합부(630)의 정합 결과에 기초하여 콘텐츠 데이터를 시각화하는 시각화부(650)를 포함하고, 정합부(630)는 콘텐츠 데이터를 2D 지도에 정합하는 2D 위치 정합부(631), 콘텐츠 데이터를 3D 공간 상에 정합하는 3D 모델 정합부(633), 콘텐츠 데이터를 배경 VR 이미지에 정합하는 VR 영상 정합부(635) 및 콘텐츠 데이터를 실시간 배경에 정합하는 AR 영상 정합부(637)를 포함할 수 있다.According to an embodiment, the digital album
일 실시예에 따르면, 콘텐츠 데이터 조회부(610)는 사용자 단말의 조회 요청 신호를 수신하는 경우 콘텐츠 데이터를 조회할 수 있다. 또한, 콘텐츠 데이터 조회부(610)는 사용자 단말의 현재 위치와 콘텐츠 데이터에 포함된 위치 정보에 기초하여 사용자 단말의 현재 위치로부터 미리 정해진 거리 내에서 체험할 수 있는 콘텐츠 데이터를 조회할 수 있다.According to an embodiment, the content
일 실시예에 따르면, 2D 위치 정합부(631)는 콘텐츠 데이터를 2D 지도에 정합하고, 시각화부(650)는 정합 결과에 기초하여 콘텐츠 데이터를 2D 형태로 시각화할 수 있다. 2D 위치 정합부(631)는 콘텐츠 데이터의 위치 정보에 기초하여 2D 지도 상에 콘텐츠 데이터의 이미지 정보를 정합할 위치를 결정할 수 있고, 콘텐츠 데이터의 자세 정보에 기초하여 콘텐츠 데이터의 이미지 정보 및 2D 지도를 조절함으로써, 콘텐츠 데이터를 2D 지도에 정합할 수 있다. 시각화부(650)는 2D 지도에 정합된 콘텐츠 데이터를 통해 2D 형태의 시각화된 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the 2D
일 실시예에 따르면, 3D 모델 정합부(633)는 콘텐츠 데이터를 3D 공간에 정합하고, 시각화부(650)는 정합 결과에 기초하여 콘텐츠 데이터를 3D 형태로 시각화할 수 있다. 3D 모델 정합부(633)는 콘텐츠 데이터의 위치 정보에 기초하여 3D 공간 상에서 콘텐츠 데이터의 이미지 정보를 정합할 위치를 결정할 수 있고, 콘텐츠 데이터의 자세 정보에 기초하여 콘텐츠 데이터의 이미지 정보 및 3D 모델을 조절함으로써, 콘텐츠 데이터를 3D 공간에 정합할 수 있다. 시각화부(650)는 3D 공간에 정합된 콘텐츠 데이터를 통해 3D 형태의 시각화된 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the 3D
일 실시예에 따르면, VR 영상 정합부(635)는 콘텐츠 데이터를 배경 VR 이미지에 정합하고, 시각화부(650)는 정합 결과에 기초하여 콘텐츠 데이터를 VR 형태로 시각화할 수 있다. VR 영상 정합부(635)는 콘텐츠 데이터의 위치 정보에 기초하여 배경 VR 이미지에서 콘텐츠 데이터의 이미지 정보를 정합할 위치를 결정할 수 있고, 콘텐츠 데이터의 자세 정보에 기초하여 콘텐츠 데이터의 이미지 정보 및 배경 VR 이미지를 조절함으로써, 콘텐츠 데이터를 배경 VR 이미지에 정합할 수 있다. 시각화부(650)는 배경 VR 이미지에 정합된 콘텐츠 데이터를 통해 VR 형태의 시각화된 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the VR
일 실시예에 따르면, AR 영상 정합부(637)는 콘텐츠 데이터를 실시간 배경에 정합하고, 시각화부(650)는 정합 결과에 기초하여 콘텐츠 데이터를 AR로 시각화할 수 있다. AR 영상 정합부(637) 콘텐츠 데이터의 위치 정보에 기초하여 사용자 단말을 통해 실시간으로 획득되는 실시간 배경 상에서 콘텐츠 데이터의 이미지 정보를 정합할 위치를 결정할 수 있고, 콘텐츠 데이터의 자세 정보에 기초하여 콘텐츠 데이터의 이미지 정보 및 실시간 배경을 조절함으로써, 콘텐츠 데이터를 실시간 배경에 정합할 수 있다. 시각화부(650)는 실시간 배경에 정합된 콘텐츠 데이터를 통해 AR 형태의 시각화된 콘텐츠 데이터를 생성할 수 있다.According to an embodiment, the AR
일 실시예에 따르면 디지털 앨범 서비스 제공 장치(600)는 사용자 단말에 각각의 콘텐츠 데이터를 체험할 수 있는 위치로 이동하기 위한 안내 정보 또는 이동을 유도하는 유도 메시지를 제공할 수 있다.According to an embodiment, the
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be embodied in the form of program instructions that can be executed by various computer means and recorded in a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the media may be those specially designed and constructed for the purposes of the embodiments, or they may be of the kind well-known and available to those having skill in the computer software arts. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the above, and configure the processing device to operate as desired, or process it independently or collectively. You can command the device. Software and / or data may be any type of machine, component, physical device, virtual equipment, computer storage medium or device in order to be interpreted by or to provide instructions or data to the processing device. Or may be permanently or temporarily embodied in a signal wave to be transmitted. The software may be distributed over networked computer systems so that they may be stored or executed in a distributed manner. Software and data may be stored on one or more computer readable recording media.
이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.Although the embodiments have been described with reference to the accompanying drawings, those skilled in the art may apply various technical modifications and variations based on the above. For example, the described techniques may be performed in a different order than the described method, and / or components of the described systems, structures, devices, circuits, etc. may be combined or combined in a different form than the described method, or other components. Or even if replaced or substituted by equivalents, an appropriate result can be achieved.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are within the scope of the following claims.
Claims (24)
이미지 정보를 획득하는 단계;
상기 이미지 정보가 획득된 위치에 대한 위치 정보를 획득하는 단계;
상기 이미지 정보를 획득하는 이미지 정보 획득 장치의 자세에 대한 자세 정보를 획득하는 단계;
상기 이미지 정보, 상기 위치 정보 및 상기 자세 정보가 동기화된 콘텐츠 데이터를 생성하는 단계; 및
상기 콘텐츠 데이터를 저장하는 단계
를 포함하는, 콘텐츠 데이터 생성 방법.In the content data generation method for a digital album service,
Obtaining image information;
Obtaining location information on a location from which the image information is obtained;
Acquiring posture information on a posture of an image information obtaining device obtaining the image information;
Generating content data in which the image information, the location information, and the attitude information are synchronized; And
Storing the content data
Including a content data generation method.
상기 자세 정보를 획득하는 단계는,
상기 이미지 정보 획득 장치의 이미지 획득 방향에 대한 정보, 기울기 정보, 회전 정보 및 FOV(Field Of View) 정보 중 적어도 하나를 획득하는, 콘텐츠 데이터 생성 방법.The method of claim 1,
Acquiring the posture information,
And obtaining at least one of information on an image acquisition direction, tilt information, rotation information, and field of view (FOV) information of the image information acquisition device.
상기 이미지 정보가 사진에 해당하는 경우,
상기 사진에 해당하는 이미지 정보에 대한 위치 정보 및 자세 정보를 포함하도록 상기 사진 파일의 형식을 수정하여 상기 위치 정보 및 자세 정보를 저장하는, 콘텐츠 데이터 생성 방법. The method of claim 1,
If the image information corresponds to a photo,
And modifying the format of the picture file to include the location information and the attitude information of the image information corresponding to the picture to store the location information and the attitude information.
상기 이미지 정보가 동영상에 해당하는 경우,
상기 콘텐츠 데이터를 생성하는 단계는,
상기 동영상의 각각의 프레임에 대하여 상기 위치 정보 및 자세 정보를 동기화하고, 상기 동기화된 프레임에 기초하여 상기 콘텐츠 데이터를 생성하는, 콘텐츠 데이터 생성 방법.The method of claim 1,
If the image information corresponds to a video,
Generating the content data,
And synchronizing the position information and attitude information with respect to each frame of the video, and generating the content data based on the synchronized frames.
상기 생성된 콘텐츠 데이터와 상기 동영상은 각각 따로 저장되는, 콘텐츠 데이터 생성 방법.The method of claim 4, wherein
The generated content data and the video are stored separately, respectively.
상기 콘텐츠 데이터가 제공될 서비스 환경에 기초하여 상기 콘텐츠 데이터를 시각화하는 단계; 및
상기 시각화된 콘텐츠 데이터를 사용자에게 제공하는 단계
를 포함하는, 디지털 앨범 서비스 제공 방법.Querying the content data generated by the content data generating device;
Visualizing the content data based on a service environment in which the content data is to be provided; And
Providing the visualized content data to a user
Including, digital album service providing method.
상기 시각화하는 단계는,
상기 콘텐츠 데이터를 2D 지도에 정합함으로써, 상기 콘텐츠 데이터를 2D 형태로 시각화하는, 디지털 앨범 서비스 제공 방법.The method of claim 6,
The step of visualizing,
And matching the content data to a 2D map to visualize the content data in a 2D form.
상기 시각화하는 단계는,
상기 콘텐츠 데이터를 3D 공간에 정합함으로써, 상기 콘텐츠 데이터를 3D 형태로 시각화하는, 디지털 앨범 서비스 제공 방법.The method of claim 6,
The step of visualizing,
And matching the content data to a 3D space to visualize the content data in a 3D form.
상기 시각화하는 단계는,
상기 콘텐츠 데이터에 포함된 위치 정보, 자세 정보 및 상기 3D 공간의 주변 환경 정보에 기초하여 상기 콘텐츠 데이터를 상기 3D 공간에 정합함으로써, 상기 콘텐츠 데이터를 시각화하는, 디지털 앨범 서비스 제공 방법. The method of claim 8,
The step of visualizing,
And visualizing the content data by matching the content data to the 3D space based on location information, attitude information, and surrounding environment information included in the content data.
상기 시각화하는 단계는,
상기 콘텐츠 데이터를 배경 VR(Virtual Reality) 이미지와 정합함으로써, VR 형태로 상기 콘텐츠 데이터를 시각화하는, 디지털 앨범 서비스 제공 방법.The method of claim 6,
The step of visualizing,
And matching the content data with a background virtual reality (VR) image to visualize the content data in a VR form.
상기 시각화하는 단계는,
실시간 배경에 상기 콘텐츠 데이터를 정합함으로써, AR(Augmented Reality) 형태로 상기 콘텐츠 데이터를 시각화하는, 디지털 앨범 서비스 제공 방법.The method of claim 6,
The step of visualizing,
And matching the content data with a real-time background to visualize the content data in Augmented Reality (AR) form.
상기 조회하는 단계는,
사용자 단말을 통한 사용자의 요청 신호를 수신하는 경우 또는 상기 사용자 단말의 위치 정보에 기초하여 상기 콘텐츠 데이터를 조회하는, 디지털 앨범 서비스 제공 방법.The method of claim 6,
The querying step,
When receiving the user's request signal through the user terminal or querying the content data based on the location information of the user terminal, the digital album service providing method.
상기 조회하는 단계는,
상기 사용자 단말의 현재 위치 정보 및 콘텐츠 데이터에 포함된 위치 정보에 기초하여, 상기 사용자 단말의 현재 위치로부터 미리 정해진 거리 내에서 체험할 수 있는 콘텐츠 데이터를 조회하는, 디지털 앨범 서비스 제공 방법.The method of claim 12,
The querying step,
And searching for the content data that can be experienced within a predetermined distance from the current location of the user terminal based on the current location information of the user terminal and the location information included in the content data.
사용자 단말의 현재 위치 정보에 기초하여, 상기 사용자 단말의 현재 위치로부터 미리 정해진 거리 내에서 체험할 수 있는 콘텐츠 데이터에 대한 정보를 제공하는 단계
를 더 포함하는, 디지털 앨범 서비스 제공 방법.The method of claim 6,
Providing information on content data that can be experienced within a predetermined distance from the current location of the user terminal based on the current location information of the user terminal;
Further comprising, digital album service providing method.
상기 콘텐츠 데이터에 대한 정보는,
상기 콘텐츠 데이터에 포함된 상기 이미지 정보가 획득된 위치에 대한 위치 정보를 포함하는, 디지털 앨범 서비스 제공 방법.The method of claim 14,
The information about the content data,
And location information on a location from which the image information included in the content data is obtained.
상기 이미지 정보에 상기 위치 정보 및 상기 자세 정보를 동기화하는 동기화부; 및
상기 동기화된 이미지 정보에 기초하여 콘텐츠 데이터를 생성하고, 상기 생성된 콘텐츠 데이터를 관리하는 콘텐츠 데이터 관리부; 및
상기 생성된 콘텐츠 데이터를 저장하는 저장부
를 포함하는 콘텐츠 데이터 생성 장치.A receiver configured to receive image information, position information on a position at which the image information is obtained, and posture information on a posture of the image information obtaining apparatus that obtained the image information;
A synchronization unit for synchronizing the position information and the posture information with the image information; And
A content data manager which generates content data based on the synchronized image information and manages the generated content data; And
A storage unit for storing the generated content data
Content data generation device comprising a.
상기 자세 정보는,
상기 이미지 정보 획득 장치의 이미지 획득 방향에 대한 정보, 기울기 정보, 회전 정보 및 FOV(Field Of View) 정보 중 적어도 하나를 포함하는, 콘텐츠 데이터 생성 장치.The method of claim 16,
The posture information,
And at least one of information on an image acquisition direction, tilt information, rotation information, and field of view (FOV) information of the image information acquisition device.
상기 이미지 정보가 사진에 해당하는 경우,
상기 콘텐츠 데이터 관리부는,
상기 사진에 해당하는 이미지 정보에 대한 위치 정보 및 자세 정보를 포함하도록 상기 사진의 파일 형식을 수정하여 상기 위치 정보 및 자세 정보를 저장하는, 콘텐츠 데이터 생성 장치. The method of claim 16,
If the image information corresponds to a photo,
The content data management unit,
And modifying the file format of the picture to include the location information and the attitude information of the image information corresponding to the picture to store the location information and the attitude information.
상기 이미지 정보가 동영상에 해당하는 경우,
상기 콘텐츠 데이터 관리부는,
상기 위치 정보 및 상기 자세 정보가 각각의 프레임에 대해 동기화된 동영상에 기초하여 콘텐츠 데이터를 생성하고,
상기 생성된 콘텐츠 데이터와 상기 동영상은 각각 따로 저장되는, 콘텐츠 데이터 생성 장치.The method of claim 16,
If the image information corresponds to a video,
The content data management unit,
Generate the content data based on the video in which the position information and the posture information are synchronized for each frame,
And the generated content data and the video are stored separately.
상기 콘텐츠 데이터를 상기 콘텐츠 데이터가 제공될 서비스 환경에 정합하는 정합부; 및
상기 정합부의 정합 결과에 기초하여, 상기 콘텐츠 데이터를 시각화하는 시각화부
를 포함하는, 디지털 앨범 서비스 제공 장치.A content data inquiry unit for searching the content data;
A matching unit for matching the content data to a service environment in which the content data is to be provided; And
A visualization unit for visualizing the content data based on a matching result of the matching unit
Device comprising a digital album service.
상기 정합부는,
상기 콘텐츠 데이터를 2D 지도에 정합하고,
상기 시각화부는,
상기 정합 결과에 기초하여 상기 콘텐츠 데이터를 2D 형태로 시각화하는, 디지털 앨범 서비스 제공 장치.The method of claim 20,
The matching part,
Match the content data to a 2D map,
The visualization unit,
And visualize the content data in a 2D form based on the matching result.
상기 정합부는,
상기 콘텐츠 데이터를 3D 공간에 정합하고,
상기 시각화부는,
상기 정합 결과에 기초하여 상기 콘텐츠 데이터를 3D 형태로 시각화하는, 디지털 앨범 서비스 제공 장치.The method of claim 20,
The matching part,
Matching the content data to 3D space,
The visualization unit,
And visualize the content data in a 3D form based on the matching result.
상기 정합부는,
상기 콘텐츠 데이터를 배경 VR(Virtual Reality) 이미지와 정합하고,
상기 시각화부는,
상기 정합 결과에 기초하여 상기 콘텐츠 데이터를 VR 형태로 시각화하는, 디지털 앨범 서비스 제공 장치.The method of claim 20,
The matching part,
Matching the content data with a background virtual reality (VR) image,
The visualization unit,
And visualize the content data in VR form based on the matching result.
상기 정합부는,
상기 콘텐츠 데이터를 실시간 배경에 정합하고,
상기 시각화부는,
상기 정합 결과에 기초하여 상기 콘텐츠 데이터를 AR 형태로 시각화하는, 디지털 앨범 서비스 제공 장치.The method of claim 20,
The matching part,
Match the content data to a real-time background,
The visualization unit,
And visualize the content data in an AR form based on the matching result.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180016502A KR20190096722A (en) | 2018-02-09 | 2018-02-09 | Apparatus and method for providing digital album service through content data generation |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180016502A KR20190096722A (en) | 2018-02-09 | 2018-02-09 | Apparatus and method for providing digital album service through content data generation |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20190096722A true KR20190096722A (en) | 2019-08-20 |
Family
ID=67807410
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180016502A KR20190096722A (en) | 2018-02-09 | 2018-02-09 | Apparatus and method for providing digital album service through content data generation |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20190096722A (en) |
-
2018
- 2018-02-09 KR KR1020180016502A patent/KR20190096722A/en unknown
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20240112430A1 (en) | Techniques for capturing and displaying partial motion in virtual or augmented reality scenes | |
US9699375B2 (en) | Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system | |
US9558559B2 (en) | Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system | |
EP2625847B1 (en) | Network-based real time registered augmented reality for mobile devices | |
US9280852B2 (en) | Augmented reality virtual guide system | |
US8692885B2 (en) | Method and apparatus for capture and distribution of broadband data | |
US10796207B2 (en) | Automatic detection of noteworthy locations | |
KR20160087284A (en) | Image processing apparatus, the image processing apparatus for performing image storage method and image search method | |
JP6412400B2 (en) | Image composition apparatus and image composition program | |
KR20190096722A (en) | Apparatus and method for providing digital album service through content data generation | |
JP6546940B2 (en) | Orientation estimation device, photographing / map display device, method, and program | |
JP7374253B2 (en) | Generation device, generation method, and generation program | |
JP6959305B2 (en) | Generation device, generation method, and generation program | |
JP7039535B2 (en) | Generator, generation method, and generation program | |
KR20200029153A (en) | Apparatus and method for providing contents for route guidance | |
US20240087157A1 (en) | Image processing method, recording medium, image processing apparatus, and image processing system | |
KR101910460B1 (en) | System and method for providing contents | |
JP2004233169A (en) | Method of correcting positional information | |
JP2004341742A (en) | Facility information display device | |
KR20160062770A (en) | Mashup service method for augmented reality and mobile device applying the same |