KR101316789B1 - System and method for playing contents of augmented reality - Google Patents

System and method for playing contents of augmented reality Download PDF

Info

Publication number
KR101316789B1
KR101316789B1 KR1020100103339A KR20100103339A KR101316789B1 KR 101316789 B1 KR101316789 B1 KR 101316789B1 KR 1020100103339 A KR1020100103339 A KR 1020100103339A KR 20100103339 A KR20100103339 A KR 20100103339A KR 101316789 B1 KR101316789 B1 KR 101316789B1
Authority
KR
South Korea
Prior art keywords
augmented reality
virtual
information
virtual coordinate
reality content
Prior art date
Application number
KR1020100103339A
Other languages
Korean (ko)
Other versions
KR20120041921A (en
Inventor
정진
김현정
한호선
홍선희
박새이
시아오 리우
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020100103339A priority Critical patent/KR101316789B1/en
Publication of KR20120041921A publication Critical patent/KR20120041921A/en
Application granted granted Critical
Publication of KR101316789B1 publication Critical patent/KR101316789B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0662—Virtualisation aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects

Abstract

본 발명은, 촬영구역에 위치한 인쇄서적을 촬영한 촬영영상을 기반으로 증강현실 컨텐츠를 제공하는 증강현실 서비스에 있어서, 사용자 조작에 따른 입력정보를 토대로 가상객체에 적용되는 가상좌표를 변경시켜 결과적으로 가상객체를 제어하는 효과를 도출함으로써, 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있고 실재감을 향상시킬 수 있는 증강 현실 컨텐츠 재생 시스템 및 방법이 개시되어 있다. 본 발명의 증강 현실 컨텐츠 재생 시스템은, 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 정보제공서버가 제공하면, 증강현실컨텐츠재생장치에서 이를 저장하고, 상기 증강현실컨텐츠재생장치가 특정 촬영구역에 위치하는 인쇄서적을 촬영한 촬영영상을 분석하여 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하며, 특정 입력정보가 인지되면, 상기 증강현실컨텐츠재생장치가 상기 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 구성을 포함한다.The present invention, in the augmented reality service that provides augmented reality content based on the photographed image of the print book located in the shooting zone, by changing the virtual coordinates applied to the virtual object based on the input information according to the user operation as a result Disclosed is a system and method for reproducing augmented reality content that can provide various user interactions and improve a sense of reality without deriving an effect of controlling a virtual object, without moving an actual printed book. In the augmented reality content reproduction system of the present invention, if the information providing server provides virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information, the augmented reality content playback device stores the information and stores the augmented reality content. The reality content playback device analyzes the photographed image of the printed book located in the specific photographing area, and outputs the augmented reality content applied to the photographed image according to the execution of a preset augmented reality corresponding to the analysis result, and inputs specific input information. If is recognized, the augmented reality content reproducing apparatus includes a configuration for performing the augmented reality implementation function by reflecting the corresponding virtual coordinate setting information according to the input information based on the virtual coordinate setting control information.

Description

증강 현실 컨텐츠 재생 시스템 및 방법{SYSTEM AND METHOD FOR PLAYING CONTENTS OF AUGMENTED REALITY}Augmented reality content playback system and method {SYSTEM AND METHOD FOR PLAYING CONTENTS OF AUGMENTED REALITY}

본 발명은 증강 현실 컨텐츠 재생 시스템 및 방법에 관한 것으로, 더욱 상세하게는 촬영구역에 위치한 인쇄서적을 촬영한 촬영영상을 기반으로 증강현실 컨텐츠를 제공하는 증강현실 서비스에 있어서, 사용자 조작에 따른 입력정보를 토대로 가상객체에 적용되는 가상좌표를 변경시켜 결과적으로 가상객체를 제어하는 효과를 도출함으로써, 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있고 실재감을 향상시킬 수 있는 증강 현실 컨텐츠 재생 시스템 및 방법, 증강현실컨텐츠재생장치 및 증강현실컨텐츠재생장치의 동작 방법에 관한 것이다.The present invention relates to a system and method for reproducing augmented reality contents, and more particularly, to an augmented reality service for providing augmented reality content based on a photographed image of a printed book located in a photographing zone. Augmented reality content playback system that can provide various user interactions and improve the realism without moving the actual printed book by changing the virtual coordinates applied to the virtual object based on the result, and thus controlling the virtual object. And a method, an augmented reality content reproducing apparatus, and a method of operating the augmented reality content reproducing apparatus.

AR(Augmented Reality, 증강현실)은 사용자가 눈으로 보는 현실세계와 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주는 가상현실의 하나이다. 현실세계를 가상세계로 보완해주는 개념인 AR은, 컴퓨터 그래픽으로 만들어진 가상환경을 사용하지만 주역은 현실환경이다. 컴퓨터 그래픽은 현실환경에 필요한 정보를 추가 제공하는 역할을 한다. 사용자가 보고 있는 실사 영상에 3차원 가상영상을 겹침(overlap)으로써 현실환경과 가상화면과의 구분이 모호해지도록 한다는 뜻이다. AR (Augmented Reality) is one of the virtual reality in which the user views the real world viewed by the user and the virtual world having the additional information as one image. AR, a concept that complements the real world with a virtual world, uses a virtual environment made of computer graphics, but the main role is the real environment. Computer graphics serve to provide additional information needed for the real world. By overlapping the three-dimensional virtual image on the real image that the user is viewing, it means that the distinction between the real environment and the virtual screen becomes blurred.

이러한 증강현실을 구현하는 방법에는, 인쇄서적의 페이지를 펼쳐 이를 카메라를 통해 촬영하고 촬영된 실시간 영상을 화면에 디스플레이함에 있어서, 페이지 내에 특정 마커(marker)가 기록되어 있음에 따라 촬영된 영상 내에서 특정 마커가 인지되면 해당 마커에 연결된 3차원 그래픽 모델을 실제 영상 즉 페이지를 촬영한 영상 위에 그려주는 방법이 있다. 여기서의 마커란 실제로 2차원 평면 위에 존재하면서, 자신과 연결된 3차원 그래픽모델이 그려질 크기, 방향 및 위치 정보를 제공하는 것을 말한다.In the method of implementing such an augmented reality, when a page of a printed book is unfolded and photographed through a camera and a captured real-time image is displayed on the screen, a specific marker is recorded in the page, so that the image is captured within the image. When a specific marker is recognized, there is a method of drawing a 3D graphic model connected to the marker on a real image, that is, a page image. The marker here refers to providing size, direction, and position information to be drawn on a three-dimensional graphic model that is actually present on a two-dimensional plane and connected to itself.

헌데, 전술한 종래의 증강현실 구현 방법은, 인쇄서적의 페이지 또는 페이지 상에 증강된 가상 객체(예 : 3차원 그래픽 모델)를 확대 또는 축소 또는 회전하여 보고자 하는 경우, 사용자가 실제 인쇄서적을 카메라에 가깝게 가져가거나 또는 멀리 가져가거나 또는 직접 회전시켜야만 한다. 즉, 현재 사용자가 실제 인쇄서적을 움직이지 않고도 그와 상응하는 다양한 증강현실 구현을 원하고 있지만, 현재의 증강현실 구현 방법에서는 이를 만족시킬 수 있는 방안이 없다는 점에서 여전히 미흡한 수준이라고 하겠다.However, the above-described conventional augmented reality implementation method, when the user wants to enlarge or reduce or rotate the augmented virtual object (for example, a three-dimensional graphics model) on the page of the printed book, the user can view the actual printed book It must be brought close to or far away or rotated directly. In other words, the current user wants to implement various augmented reality corresponding to it without moving the actual printed book, but the current augmented reality implementation method is still insufficient in that there is no way to satisfy this.

본 발명은 상기한 사정을 감안하여 창출된 것으로서, 본 발명에서 도달하고자 하는 목적은 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 정보제공서버가 제공하면, 증강현실컨텐츠재생장치에서 이를 저장하고, 상기 증강현실컨텐츠재생장치가 특정 촬영구역에 위치하는 인쇄서적을 촬영한 촬영영상을 분석하여 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하며, 특정 입력정보가 인지되면, 상기 증강현실컨텐츠재생장치가 상기 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 증강 현실 컨텐츠 재생 시스템 및 방법을 제공하여, 사용자 조작에 따른 입력정보를 토대로 가상객체에 적용되는 가상좌표를 변경시켜 결과적으로 가상객체를 제어하는 효과를 도출함으로써, 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있고 실재감을 향상시키는데 있다.The present invention has been made in view of the above-described circumstances, and an object of the present invention is to provide a virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information. This is stored in the reality content reproducing apparatus, and the augmented reality content reproducing apparatus analyzes the photographed image of the print book located in the specific photographing area and performs the preset augmented reality corresponding to the analysis result. Outputs the augmented reality content to be applied, and when the specific input information is recognized, the augmented reality content playback device reflects the virtual coordinate setting information according to the input information based on the virtual coordinate setting control information and performs the augmented reality implementation function. Providing an augmented reality content playback system and method, according to the user operation By changing the virtual coordinate to be applied to the virtual object based on the information it can sikineunde Consequently, by deriving the effect of controlling the virtual object to provide the different users without Interaction page, move the actual printed book and improving the siljaegam.

본 발명은 상기한 사정을 감안하여 창출된 것으로서, 본 발명에서 도달하고자 하는 다른 목적은 특정 촬영구역에 위치하는 인쇄서적을 촬영하고, 촬영된 촬영영상을 분석한 분석 결과에 근거하여, 상기 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하며, 사용자 조작에 의한 특정 입력정보가 인지되면 기 저장된 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 증강현실컨텐츠재생장치 및 증강현실컨텐츠재생장치의 동작 방법을 제공하여, 사용자 조작에 따른 입력정보를 토대로 가상객체에 적용되는 가상좌표를 변경시켜 결과적으로 가상객체를 제어하는 효과를 도출하는데 있다.The present invention was created in view of the above circumstances, and another object to be achieved in the present invention is to photograph a print book located in a specific photographing area, and based on an analysis result of analyzing the photographed photographed image, the analysis result. Outputs augmented reality content applied to the photographed image according to a preset augmented reality implementation function corresponding to the corresponding augmented reality, and if specific input information is recognized by a user's manipulation, a corresponding virtual according to the input information based on previously stored virtual coordinate setting control information. By providing the operation method of the augmented reality content playback device and augmented reality content playback device to perform the augmented reality implementation function by reflecting the coordinate setting information, by changing the virtual coordinates applied to the virtual object based on the input information according to the user operation As a result, we derive the effect of controlling the virtual object.

상기 목적을 달성하기 위한 본 발명의 제 1 관점에 따른 증강 현실 컨텐츠 재생 시스템은, 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 제공하는 정보제공서버; 및 상기 정보제공서버로부터 제공되는 상기 가상좌표설정제어정보를 저장하고, 특정 촬영구역에 위치하는 인쇄서적을 촬영한 촬영영상을 분석하여 분석 결과에 대응하는 기 설정된 증강현실 구현 기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하며, 특정 입력정보가 인지되면 상기 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 증강현실컨텐츠재생장치를 포함한다.An augmented reality content playback system according to a first aspect of the present invention for achieving the above object comprises: an information providing server for providing virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information; And storing the virtual coordinate setting control information provided from the information providing server, analyzing a photographed image photographing a print book located in a specific photographing region, and performing the preset augmented reality implementation function corresponding to an analysis result. Augmented reality content playback device that outputs augmented reality content applied to the image, and performs the augmented reality implementation function by reflecting the corresponding virtual coordinate setting information according to the input information based on the virtual coordinate setting control information when the specific input information is recognized It includes.

상기 목적을 달성하기 위한 본 발명의 제 2 관점에 따른 증강현실컨텐츠재생장치는, 특정 촬영구역에 위치하는 인쇄서적을 촬영하는 촬영부; 상기 촬영부를 통해 촬영된 촬영영상을 분석하는 영상분석부; 및 상기 영상분석부를 통한 분석 결과에 근거하여, 상기 분석 결과에 대응하는 기 설정된 증강현실 구현 기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하며, 사용자 조작에 의한 특정 입력정보가 인지되면 기 저장된 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 장치제어부를 포함한다.According to a second aspect of the present invention, there is provided an apparatus for reproducing augmented reality content, including: a photographing unit photographing a print book located in a specific photographing area; An image analyzer analyzing the photographed image photographed through the photographing unit; And outputting augmented reality content applied to the photographed image according to a preset augmented reality implementation function corresponding to the analysis result based on the analysis result through the image analyzer, and when specific input information by a user manipulation is recognized. And a device controller configured to perform the augmented reality implementation function by reflecting the corresponding virtual coordinate setting information according to the input information based on the stored virtual coordinate setting control information.

바람직하게는, 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보가 저장되는 정보저장부를 더 포함할 수 있다.Preferably, the apparatus may further include an information storage unit for storing virtual coordinate setting control information including virtual coordinate setting information corresponding to the at least one input information.

바람직하게는, 사용자 조작에 따른 적어도 하나의 상기 입력정보를 발생하는 입력부를 더 포함할 수 있다.Preferably, the apparatus may further include an input unit configured to generate at least one input information according to a user operation.

바람직하게는, 상기 가상좌표설정제어정보는, 제1입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링(rendering)된 가상객체에 적용되는 가상좌표를 기 설정된 제1방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제1회전설정정보, 제2입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제2방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제2회전설정정보, 제3입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제3방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보, 제4입력정보에 대응하여 상기 가상좌표를 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보, 제5입력정보에 대응하여 상기 가상좌표를 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보 중 적어도 어느 하나를 포함할 수 있다.Preferably, the virtual coordinate setting control information includes a preset virtual coordinate applied to a virtual object rendered to the captured image in the augmented reality content according to the execution of the augmented reality implementation function corresponding to the first input information. Virtual coordinates which are rotated at a preset rotation rate in one direction and are changed. The virtual coordinates applied to the virtual object rendered in the photographed image in the augmented reality content according to the augmented reality implementation function in response to the first rotation setting information and the second input information. Virtual coordinates for changing and rotating coordinates at a preset rotation rate in a second preset direction. The virtual images rendered in the captured image in the augmented reality content according to the augmented reality implementation function corresponding to the second rotation setting information and the third input information. The third rotation setting definition of the virtual coordinate which changes and rotates the virtual coordinate applied to the object in the preset third direction at the preset rotation rate. Virtual coordinate enlargement setting information for expanding and changing the virtual coordinates at a preset enlargement ratio in response to fourth input information, and reducing virtual coordinates for reducing and changing the virtual coordinates at a preset reduction ratio in response to fifth input information. It may include at least one of the setting information.

바람직하게는, 상기 장치제어부는, 사용자 조작에 의한 상기 입력정보가 인지되면, 상기 가상좌표설정제어정보를 토대로 상기 인지된 입력정보에 해당하는 가상좌표 설정정보를 확인하고, 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 가상객체에 적용되는 가상좌표를 상기 확인된 가상좌표 설정정보를 반영하여 변경하고, 변경된 가상좌표를 적용하여 상기 촬영영상에 가상객체를 렌더링하여 상기 증강현실 컨텐츠를 출력하는 상기 증강현실 구현 기능을 수행할 수 있다.Preferably, when the input information by the user operation is recognized, the device controller checks the virtual coordinate setting information corresponding to the recognized input information on the basis of the virtual coordinate setting control information, to perform the augmented reality implementation function The augmented to change the virtual coordinates applied to the virtual object in the augmented reality content to reflect the confirmed virtual coordinate setting information, and to apply the changed virtual coordinates to render the virtual object on the photographed image to output the augmented reality content It can perform the realization function.

바람직하게는, 상기 장치제어부는, 상기 가상좌표설정제어정보에 대한 설정정보를 조정하는 설정정보 조정기능을 제공하고, 상기 설정정보 조정기능을 통한 사용자의 조정에 대응하여 상기 가상좌표설정제어정보를 변경/저장할 수 있다.Preferably, the device control unit provides a setting information adjusting function for adjusting setting information of the virtual coordinate setting control information, and the virtual coordinate setting control information in response to the user's adjustment through the setting information adjusting function. Can change / save.

상기 목적을 달성하기 위한 본 발명의 제 3 관점에 따른 증강 현실 컨텐츠 재생 방법은, 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 정보제공서버가 제공하는 단계; 상기 정보제공서버로부터 제공되는 상기 가상좌표설정제어정보를 증강현실컨텐츠재생장치에서 저장하는 단계; 상기 증강현실컨텐츠재생장치가 특정 촬영구역에 위치하는 인쇄서적을 촬영한 촬영영상을 분석하여 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 단계; 및 특정 입력정보가 인지되면, 상기 증강현실컨텐츠재생장치가 상기 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 단계를 포함한다.According to a third aspect of the present invention, there is provided a method of reproducing augmented reality content, the method comprising: providing, by an information providing server, virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information; Storing the virtual coordinate setting control information provided from the information providing server in an augmented reality content playback device; Analyzing, by the augmented reality content reproducing apparatus, a photographed image of a print book located in a specific photographing region and outputting augmented reality content applied to the photographed image according to a preset augmented reality implementation function corresponding to the analysis result; And when the specific input information is recognized, the augmented reality content reproducing apparatus reflecting the virtual coordinate setting information according to the input information based on the virtual coordinate setting control information to perform the augmented reality implementation function.

상기 목적을 달성하기 위한 본 발명의 제 4 관점에 따른 증강현실컨텐츠재생장치의 동작 방법은, 특정 촬영구역에 위치하는 인쇄서적을 촬영하는 촬영 단계; 상기 촬영된 촬영영상을 분석한 분석 결과에 근거하여, 상기 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 증강현실 컨텐츠 출력단계; 사용자 조작에 의한 특정 입력정보를 인지하는 입력정보 인지단계; 및 상기 입력정보가 인지되면 기 저장된 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 가상좌표 변경 및 수행단계를 포함한다.According to a fourth aspect of the present invention, there is provided an operating method of an apparatus for reproducing augmented reality content, the method including: photographing a printing book located in a specific photographing area; An augmented reality content outputting step of outputting an augmented reality content applied to the captured image according to the execution of a preset augmented reality implementation function corresponding to the analysis result based on the analysis result of analyzing the photographed photographed image; An input information recognizing step of recognizing specific input information by a user manipulation; And changing and performing a virtual coordinate to perform the augmented reality implementation function by reflecting the corresponding virtual coordinate setting information according to the input information based on the previously stored virtual coordinate setting control information when the input information is recognized.

바람직하게는, 상기 가상좌표설정제어정보는, 제1입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링(rendering)된 가상객체에 적용되는 가상좌표를 기 설정된 제1방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제1회전설정정보, 제2입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제2방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제2회전설정정보, 제3입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제3방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보, 제4입력정보에 대응하여 상기 가상좌표를 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보, 제5입력정보에 대응하여 상기 가상좌표를 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보 중 적어도 어느 하나를 포함할 수 있다.Preferably, the virtual coordinate setting control information includes a preset virtual coordinate applied to a virtual object rendered to the captured image in the augmented reality content according to the execution of the augmented reality implementation function corresponding to the first input information. Virtual coordinates which are rotated at a preset rotation rate in one direction and are changed. The virtual coordinates applied to the virtual object rendered in the photographed image in the augmented reality content according to the augmented reality implementation function in response to the first rotation setting information and the second input information. Virtual coordinates for changing and rotating coordinates at a preset rotation rate in a second preset direction. The virtual images rendered in the captured image in the augmented reality content according to the augmented reality implementation function corresponding to the second rotation setting information and the third input information. The third rotation setting definition of the virtual coordinate which changes and rotates the virtual coordinate applied to the object in the preset third direction at the preset rotation rate. Virtual coordinate enlargement setting information for expanding and changing the virtual coordinates at a preset enlargement ratio in response to fourth input information, and reducing virtual coordinates for reducing and changing the virtual coordinates at a preset reduction ratio in response to fifth input information. It may include at least one of the setting information.

바람직하게는, 상기 가상좌표 변경 및 수행단계는, 사용자에 의한 상기 입력정보가 인지되면, 상기 가상좌표설정제어정보를 토대로 상기 인지된 입력정보에 해당하는 가상좌표 설정정보를 확인하고, 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 가상객체에 적용되는 가상좌표를 상기 확인된 가상좌표 설정정보를 반영하여 변경하는 단계와, 변경된 가상좌표를 적용하여, 상기 촬영영상에 가상객체를 렌더링하여 상기 증강현실 컨텐츠를 출력하는 상기 증강현실 구현 기능을 수행하는 단계를 포함할 수 있다.Preferably, in the changing and performing the virtual coordinates, when the input information is recognized by the user, the virtual coordinate setting information corresponding to the recognized input information is checked based on the virtual coordinate setting control information, and the augmented reality is implemented. Changing the virtual coordinates applied to the virtual object in the augmented reality content according to the performance of the function by reflecting the checked virtual coordinate setting information, and applying the changed virtual coordinates to render the virtual object on the photographed image to enhance the augmented reality. It may include performing the augmented reality implementation function for outputting content.

바람직하게는, 상기 가상좌표설정제어정보에 대한 설정정보를 조정하는 설정정보 조정기능을 제공하고, 상기 설정정보 조정기능을 통한 사용자의 조정에 대응하여 상기 가상좌표설정제어정보를 변경/저장하는 설정정보 조정단계를 더 포함할 수 있다.Preferably, a setting for adjusting the setting information for the virtual coordinate setting control information to provide a setting information adjustment function, the setting for changing / storing the virtual coordinate setting control information in response to the user's adjustment through the setting information adjustment function The information adjustment step may further include.

이에, 본 발명의 증강 현실 컨텐츠 재생 시스템 및 방법에 의하면, 촬영구역에 위치한 인쇄서적을 촬영한 촬영영상을 기반으로 증강현실 컨텐츠를 제공하는 증강현실 서비스에 있어서, 사용자 조작에 따른 입력정보를 토대로 가상객체에 적용되는 가상좌표를 변경시켜 결과적으로 가상객체를 제어하는 효과를 도출함으로써, 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있고 실재감을 향상시킬 수 있다.Accordingly, according to the augmented reality content reproduction system and method of the present invention, in the augmented reality service that provides augmented reality content based on a photographed image of a print book located in a photographing zone, a virtual based on input information according to a user's manipulation. By changing the virtual coordinates applied to the object, the result of controlling the virtual object can be derived, so that various user interactions can be provided and the realism can be improved without moving the actual printed book.

도 1은 본 발명의 바람직한 실시예에 따른 증강 현실 컨텐츠 재생 시스템의 제어 구성도이다.
도 2는 본 발명의 바람직한 실시예에 따른 증강현실컨텐츠재생장치 의 제어 블록도이다.
도 3은 본 발명의 바람직한 실시예에 따른 증강 현실 컨텐츠 재생 방법의 제어 흐름을 나타내는 흐름도이다.
도 4는 본 발명의 바람직한 실시예에 따른 증강현실컨텐츠재생장치의 동작 방법을 나타내는 흐름도이다.1 is a control block diagram of an augmented reality content playback system according to a preferred embodiment of the present invention.
2 is a control block diagram of an apparatus for reproducing augmented reality content according to a preferred embodiment of the present invention.
3 is a flowchart illustrating a control flow of a method for reproducing augmented reality content according to a preferred embodiment of the present invention.
4 is a flowchart illustrating a method of operating an augmented reality content playback device according to a preferred embodiment of the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대하여 설명한다.Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 바람직한 실시예에 따른 증강 현실 컨텐츠 재생 시스템을 도시한 도면이다. 1 is a diagram illustrating an augmented reality content playback system according to a preferred embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명에 따른 증강 현실 컨텐츠 재생 시스템은, 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 제공하는 정보제공서버(200)와, 정보제공서버(200)로부터 제공되는 상기 가상좌표설정제어정보를 저장하고, 특정 촬영구역(1)에 위치하는 인쇄서적(10)을 촬영한 촬영영상을 분석하여 분석 결과에 대응하는 기 설정된 증강현실 구현 기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하며, 특정 입력정보가 인지되면 상기 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 증강현실컨텐츠재생장치(100)를 포함한다.As shown in FIG. 1, the augmented reality content reproduction system according to the present invention includes an information providing server 200 for providing virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information; The virtual augmented reality stored in the virtual coordinate setting control information provided from the information providing server 200, and analyzes the photographed image photographing the print book 10 located in the specific photographing zone (1) and the preset augmented reality corresponding to the analysis result Output the augmented reality content applied to the captured image according to the implementation function, and if the specific input information is recognized, the augmented reality implementation function by reflecting the corresponding virtual coordinate setting information according to the input information based on the virtual coordinate setting control information. It includes an augmented reality content playback device 100 to perform.

인쇄서적(10)은, 텍스트 및/또는 그림이 포함되는 적어도 하나의 페이지로 이루어진 오프라인 도서이다. 이러한 인쇄서적(10)은 페이지에 적어도 하나의 증강 현실용의 마커(marker; 10a)를 포함할 수 있다.The printed book 10 is an offline book consisting of at least one page containing text and / or pictures. Such a printed book 10 may include at least one marker 10a for augmented reality on a page.

여기서, 인쇄서적(10)은, 사용자에 의해 특정 페이지가 펼쳐진 채로 증강현실컨텐츠재생장치(100)에 의해 촬영되는 특정 촬영구역(1)에 놓이게 될 것이다. 그리고, 인쇄서적(10)은, 도 1에 도시된 바와 같이, 해당 인쇄서적(10)이 무엇인지를 나타내는 서적식별정보 또는 해당 페이지가 무엇인지를 나타내는 페이지식별정보 또는 특정 가상객체(예 : 3D의 그래픽 모델)를 특정 위치에 렌더링(rendering)하여 증강 표시하도록 하는 증강식별정보에 대응하는 마커(10a)를 갖는 페이지를 포함할 수 있다.Here, the print book 10 will be placed in the specific photographing zone 1 photographed by the AR content playback apparatus 100 with the specific page unfolded by the user. As shown in FIG. 1, the printed book 10 may include book identification information indicating what the print book 10 is or page identification information indicating what the page is or a specific virtual object (eg, 3D). It may include a page having a marker (10a) corresponding to the augmentation identification information to render (rendered) to a specific position to augmented display.

물론, 증강현실컨텐츠재생장치(100)에서 다양한 마커프리(marker free) 또는 마커리스(marker-less) 기반의 증강현실 서비스를 제공한다면, 인쇄서적(10)은 별도의 마커(10a)를 페이지에 포함하지 않을 수도 있다.Of course, if the augmented reality content reproducing apparatus 100 provides a variety of marker free (marker-free) or marker-less (augmented reality) service based on the print book 10 is a separate marker (10a) on the page May not be included.

정보제공서버(200)는, 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 증강현실컨텐츠재생장치(100)로 제공한다.The information providing server 200 provides the virtual coordinate setting control information including the virtual coordinate setting information corresponding to the at least one input information to the augmented reality content playback device 100.

바람직하게는, 정보제공서버(200)는, 제1입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링(rendering)된 가상객체에 적용되는 가상좌표를 기 설정된 제1방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제1회전설정정보, 제2입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제2방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제2회전설정정보, 제3입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제3방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보, 제4입력정보에 대응하여 상기 가상좌표를 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보, 제5입력정보에 대응하여 상기 가상좌표를 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보 중 적어도 어느 하나를 포함하는 가상좌표설정제어정보를 관리하며, 증강현실컨텐츠재생장치(100)로부터의 요청에 따라 또는 가상좌표설정제어정보 업데이트와 같은 특정 제공 이벤트 발생 시에 가상좌표설정제어정보를 증강현실컨텐츠재생장치(100)로 제공할 수도 있다.Preferably, the information providing server 200 may be configured to set virtual coordinates applied to the virtual object rendered in the photographed image in the augmented reality content according to the augmented reality implementation function corresponding to the first input information. Virtual coordinates which are rotated at a preset rotation rate in one direction and are changed. The virtual coordinates applied to the virtual object rendered in the photographed image in the augmented reality content according to the augmented reality implementation function in response to the first rotation setting information and the second input information. Virtual coordinates for changing and rotating coordinates at a preset rotation rate in a second preset direction. The virtual images rendered in the captured image in the augmented reality content according to the augmented reality implementation function corresponding to the second rotation setting information and the third input information. The third rotation setting information and the fourth input of the virtual coordinates, which are changed by rotating the virtual coordinates applied to the object in the preset third direction at the preset rotation rate. At least one of virtual coordinate enlargement setting information for expanding and changing the virtual coordinate at a preset enlargement ratio in response to the beam, and reducing and changing the virtual coordinate at a preset reduction ratio in response to a fifth input information; Manages virtual coordinate setting control information including any one of the virtual coordinate setting control information, and augments the virtual coordinate setting control information according to a request from the augmented reality content reproducing apparatus 100 or when a specific providing event such as updating the virtual coordinate setting control information occurs. It may be provided to the content playback apparatus 100.

예를 들면, 정보제공서버(200)는, 인쇄서적 별로 상이하게 제작/생성된 가상좌표설정제어정보를 관리할 수 있으며, 증강현실컨텐츠재생장치(100)로부터 인쇄서적(10)이 무엇인지를 나타내는 서적식별정보가 제공되어 가상좌표설정제어정보가 요청되면, 해당 서적식별정보에 따른 인쇄서적(10)의 가상좌표설정제어정보를 증강현실컨텐츠재생장치(100)로 제공할 수도 있을 것이다.For example, the information providing server 200 may manage the virtual coordinate setting control information produced / generated differently for each print book, and may determine what the print book 10 is from the augmented reality content playback device 100. When the book identification information is provided and the virtual coordinate setting control information is requested, the virtual coordinate setting control information of the print book 10 according to the book identification information may be provided to the augmented reality content playback device 100.

증강현실컨텐츠재생장치(100)는, 특정 촬영구역(1)에 위치하는 인쇄서적(10)을 촬영한 촬영영상을 분석하여 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력한다.The augmented reality content reproducing apparatus 100 analyzes the photographed image of the print book 10 located in the specific photographing zone 1 and performs the preset augmented reality implementation function corresponding to the analysis result. Output the augmented reality content applied.

이에, 증강현실컨텐츠재생장치(100)는, 특정 촬영구역(1)에 위치한 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상을 분석하여, 분석 결과 마커가 존재하지 않으면 촬영된 실시간 촬영영상을 가상객체 증강 없이 그대로 처리하여 출력하고, 분석 결과 마커(예 : 10a)가 존재하면 해당 마커(예 : 10a)에 대응하여 기 설정된 증강현실 구현기능(예 : 3D의 그래픽 모델 렌더링)을 수행하여 촬영된 실시간 촬영영상에 가상객체(예 : 3D의 그래픽 모델)를 증강하여 출력함으로써, 인쇄서적(10)을 촬영한 촬영영상을 기반으로 증강현실 서비스를 제공할 수 있다.Thus, the augmented reality content playback apparatus 100 analyzes the photographed image of the unfolded page of the printed book 10 located in the specific photographing zone 1, and if the marker is not present as a result of the analysis, the real-time photographed image is captured. Process the output as it is without augmenting the virtual object, and if there is a marker (eg 10a) as a result of analysis, shoot by performing a preset augmented reality implementation function (eg 3D graphic model rendering) corresponding to the corresponding marker (eg 10a). By augmenting and outputting a virtual object (eg, a 3D graphic model) to the real-time photographed image, an augmented reality service may be provided based on a photographed image of the print book 10.

한편, 전술에서는 인쇄서적(10)에 마커(10a)가 포함되어 마커 인식을 통해 증강현실컨텐츠재생장치(100)가 증강현실 서비스를 제공하고 있지만 이는 일 실시예 일 뿐이다.Meanwhile, in the above description, although the marker 10a is included in the printed book 10, the augmented reality content reproducing apparatus 100 provides augmented reality service through marker recognition, but this is only an example.

즉, 인쇄서적(10)에 마커(10a)가 포함되지 않더라도, 증강현실컨텐츠재생장치(100)에서는 다양한 마커프리(marker free) 또는 마커리스(marker-less) 기반의 기 설정된 증강현실 서비스를 제공하는 것도 물론 가능할 것이다. That is, even if the marker 10a is not included in the printed book 10, the AR content reproducing apparatus 100 provides a preset AR service based on various marker free or markerless methods. Of course it would be possible.

이하에서는, 설명의 편의를 위해, 인쇄서적(10)에 마커(10a)가 포함되어 마커 인식을 통해 증강현실컨텐츠재생장치(100)가 증강현실 서비스를 제공하는 실시예로 설명하도록 하겠다.Hereinafter, for convenience of description, the marker 10a is included in the printed book 10 so that the augmented reality content reproducing apparatus 100 provides augmented reality service through marker recognition.

한편, 증강현실컨텐츠재생장치(100)는, 전술한 바와 같이 정보제공서버(200)로부터 제공되는 가상좌표설정제어정보를 저장할 수 있다.Meanwhile, the apparatus for reproducing augmented reality content 100 may store virtual coordinate setting control information provided from the information providing server 200 as described above.

그리고, 증강현실컨텐츠재생장치(100)는, 촬영구역(1)에 위치한 인쇄서적(10)을 촬영한 촬영영상을 기반으로 전술과 같이 증강현실 서비스를 제공함에 있어서, 사용자에 의한 특정 입력정보가 인지되면 상기 가상좌표설정제어정보를 토대로 금번 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 증강현실 구현 기능을 수행할 수 있다. The augmented reality content reproducing apparatus 100 provides augmented reality service as described above based on a photographed image of the print book 10 located in the photographing area 1, and thus, specific input information by the user is provided. When it is recognized, the augmented reality implementation may be performed by reflecting the corresponding virtual coordinate setting information according to the input information based on the virtual coordinate setting control information.

예를 들면, 사용자가 증강현실컨텐츠재생장치(100)의 키패드를 통해 특정 키버튼을 입력하면, 증강현실컨텐츠재생장치(100)는 가상좌표설정제어정보를 토대로 금번 입력된 키버튼에 따른 해당 가상좌표 설정정보를 반영하여 증강현실 구현 기능을 수행할 것이다.For example, when the user inputs a specific key button through the keypad of the augmented reality content playback device 100, the augmented reality content playback device 100 based on the virtual button setting control information, the corresponding virtual button according to this time input Augmented reality will be implemented by reflecting coordinate setting information.

이하에서는, 도 2를 참조하여 본 발명에 따른 증강현실컨텐츠재생장치(100)를 보다 구체적으로 설명하도록 한다.Hereinafter, the augmented reality content reproducing apparatus 100 according to the present invention will be described in more detail with reference to FIG. 2.

본 발명에 따른 증강현실컨텐츠재생장치(100)는, 특정 촬영구역에 위치하는 인쇄서적을 촬영하는 촬영부(110)와, 촬영부(110)를 통해 촬영된 촬영영상을 분석하는 영상분석부(140)와, 영상분석부(140)를 통한 분석 결과에 근거하여, 상기 분석 결과에 대응하는 기 설정된 증강현실 구현 기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하며, 사용자 조작에 의한 특정 입력정보가 인지되면 기 저장된 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행하는 장치제어부(150)를 포함한다.The augmented reality content playback apparatus 100 according to the present invention includes a photographing unit 110 for photographing a print book located in a specific photographing area, and an image analyzer for analyzing the photographed image photographed by the photographing unit 110 ( 140 and augmented reality content applied to the photographed image according to the execution of a preset augmented reality corresponding to the analysis result, based on the analysis result through the image analyzer 140, and specified by user manipulation. When the input information is recognized, a device control unit 150 for performing the augmented reality implementation function by reflecting the corresponding virtual coordinate setting information according to the input information based on the pre-stored virtual coordinate setting control information.

촬영부(110)는, 지정된 특정 촬영구역(1)을 촬영하여 해당 촬영구역(1)에 위치한 인쇄서적(10)의 페이지를 촬영한 촬영영상을 영상분석부(130) 및/또는 장치제어부(150)로 제공한다. 이러한 촬영부(110)는, 카메라 및 캠(Cam) 및 스캐너 등과 같이 영상을 촬영/인식하여 촬영영상을 제공할 수 있는 형태의 기능장치이면 가능할 것이다.The photographing unit 110 captures a specific photographing region 1 and captures a photographed image of a page of the print book 10 located in the photographing region 1 by the image analyzing unit 130 and / or the device controller. 150). The photographing unit 110 may be a functional device having a form capable of providing a photographed image by capturing / recognizing an image such as a camera, a cam, and a scanner.

영상분석부(130)는, 촬영부(110)를 통해 촬영된 촬영영상을 분석한다. The image analyzer 130 analyzes the photographed image photographed by the photographing unit 110.

예를 들면 영상분석부(130)는, 촬영부(110)를 통해 촬영된 촬영영상을 분석하여 촬영영상 내의 마커를 인지한 인지 결과 즉, 촬영영상 내에 마커가 존재하는지 여부 및 존재하는 경우 어떤 마커가 존재하는지에 대응하는 분석 결과를 장치제어부(150)로 제공할 수 있다.For example, the image analyzer 130 analyzes the photographed image photographed by the photographing unit 110 and recognizes a marker in the photographed image, that is, whether there is a marker in the photographed image and if so, which marker is present. The analysis result corresponding to whether there is a may be provided to the device controller 150.

장치제어부(150)는, 영상분석부(130)로부터 제공되는 분석 결과에 근거하여, 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라 촬영영상에 적용한 증강현실 컨텐츠를 출력부(120)를 통해 출력한다. 여기서, 출력부(120)는 디스플레이부 및 스피커 중 적어도 어느 하나를 포함할 수 있다.The device controller 150 outputs the augmented reality content applied to the captured image according to the execution of a preset augmented reality implementation function corresponding to the analysis result, based on the analysis result provided from the image analyzer 130. Output through Here, the output unit 120 may include at least one of a display unit and a speaker.

예를 들면, 장치제어부(150)는, 영상분석부(130)로부터 제공되는 분석 결과에 근거하여, 촬영영상 내에 마커가 존재하지 않으면 촬영된 실시간 촬영영상 즉 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상을 가상객체 증강 없이 그대로 처리하여 출력부(120)를 통해 출력할 수 있다. 이 경우, 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상의 컨텐츠가 증강현실 컨텐츠에 대응된다.For example, the device controller 150 captures the unfolded page of the real-time photographed image, that is, the printed book 10, if the marker is not present in the photographed image based on the analysis result provided from the image analyzer 130. One photographed image may be processed as it is without virtual object augmentation and output through the output unit 120. In this case, the content of the captured image photographing the unfolded page of the print book 10 corresponds to the augmented reality content.

또한, 장치제어부(150)는, 영상분석부(130)로부터 제공되는 분석 결과에 근거하여, 촬영영상 내에 마커(예 : 10a)가 존재하면 해당 마커(예 : 10a)에 대응하여 기 설정된 증강현실 구현기능(예 : 3D의 그래픽 모델 렌더링)을 수행함으로써, 촬영된 실시간 촬영영상 즉 인쇄서적(10)의 펼쳐진 페이지에 가상객체(예 : 3D의 그래픽 모델)를 증강하여 출력부(120)를 통해 출력할 수 있다. 이 경우, 인쇄서적(10)의 펼쳐진 페이지에 가상객체(예 : 3D의 그래픽 모델)를 렌더링한 컨텐츠가 증강현실 컨텐츠에 대응된다.In addition, the device controller 150 may, based on the analysis result provided from the image analyzer 130, if a marker (eg, 10a) is present in the captured image, the augmented reality preset according to the corresponding marker (eg, 10a). By performing an implementation function (eg, rendering a 3D graphic model), the virtual object (eg, a 3D graphic model) is augmented on the unfolded page of the captured real-time photographed image, that is, the print book 10, through the output unit 120. You can print In this case, content rendered by a virtual object (eg, a 3D graphic model) on the open page of the print book 10 corresponds to the augmented reality content.

이처럼, 장치제어부(150)는, 인쇄서적(10)을 촬영한 촬영영상의 마커를 기반으로 일반적인 증강현실 서비스를 제공할 수 있다.As such, the device controller 150 may provide a general augmented reality service based on a marker of a photographed image photographing the print book 10.

한편, 전술에서는 인쇄서적(10)에 마커(10a)가 포함되어 마커 인식을 통해 장치제어부(150)가 증강현실 서비스를 제공하고 있지만 이는 일 실시예일 뿐이다.Meanwhile, in the above description, although the marker 10a is included in the printed book 10, the apparatus controller 150 provides augmented reality service through marker recognition, but this is only an example.

즉, 장치제어부(150)는, 다양한 마커프리(marker free) 또는 마커리스(marker-less) 기반의 기 설정된 증강현실 서비스 제공 기능을 구비하고, 인쇄서적(10)에 마커(10a)가 포함되지 않은 경우에도 해당하는 다양한 마커프리(marker free) 또는 마커리스(marker-less) 기반의 증강현실 서비스를 제공할 수 있을 것이다.That is, the device controller 150 has various marker free or marker-less based augmented reality service providing functions, and the marker 10a is not included in the printed book 10. Even if not, various marker free or marker-less based augmented reality services may be provided.

이처럼, 장치제어부(150)는, 마커 기반 또는 마커프리 기반 또는 마커리스 기반 등의 다양한 방식을 통해 촬영영상에 가상객체를 렌더링한 증강현실 컨텐츠를 출력하는 일반적인 증강현실 서비스를 제공할 수 있다. As such, the device controller 150 may provide a general augmented reality service that outputs an augmented reality content of rendering a virtual object on a captured image through various methods such as a marker-based, a marker-free based, or a markerless based.

이러한 장치제어부(150)는, 사용자 조작에 의한 특정 입력정보가 인지되면 기 저장된 가상좌표설정제어정보를 토대로 금번 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행한다.When the specific input information by the user manipulation is recognized, the device controller 150 reflects the virtual coordinate setting information according to the input information based on the previously stored virtual coordinate setting control information to perform the augmented reality implementation function.

보다 구체적으로 설명하면, 본 발명에 따른 증강현실컨텐츠재생장치(100)는, 사용자 조작에 따른 적어도 하나의 상기 입력정보를 발생하는 입력부(130)를 포함한다.More specifically, the augmented reality content playback apparatus 100 according to the present invention includes an input unit 130 for generating at least one input information according to a user operation.

입력부(130)는, 사용자 조작에 따른 입력정보를 장치제어부(150)로 제공하는 기능부로서, 키패드 및 터치패드 및 마우스장치 및 음성기반 입력장치 등을 포함할 수 있다.The input unit 130 is a function unit that provides input information according to a user operation to the device controller 150 and may include a keypad, a touch pad, a mouse device, a voice-based input device, and the like.

또한, 증강현실컨텐츠재생장치(100)는, 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보가 저장되는 정보저장부(160)를 더 포함할 수 있다.In addition, the apparatus for reproducing augmented reality content 100 may further include an information storage unit 160 that stores virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information.

이때, 정보저장부(160)에 저장되는 가상좌표설정제어정보는, 외부의 정보제공서버(200)로부터 제공/저장되는 것이 가능할 것이다.In this case, the virtual coordinate setting control information stored in the information storage unit 160 may be provided / stored from an external information providing server 200.

그리고, 가상좌표설정제어정보는, 제1입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링(rendering)된 가상객체에 적용되는 가상좌표를 기 설정된 제1방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제1회전설정정보, 제2입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제2방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제2회전설정정보, 제3입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제3방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보, 제4입력정보에 대응하여 상기 가상좌표를 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보, 제5입력정보에 대응하여 상기 가상좌표를 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보 중 적어도 어느 하나를 포함할 수 있다.The virtual coordinate setting control information corresponds to a first direction in which the virtual coordinates applied to the virtual object rendered on the captured image in the augmented reality content according to the execution of the augmented reality implementation function corresponding to the first input information. Virtual coordinates rotated at a preset rotation rate to change the virtual coordinates applied to the virtual object rendered to the photographed image in the augmented reality content according to the first rotation setting information and the second input information. Applies to the virtual object rendered in the photographed image in the augmented reality content according to the implementation of the augmented reality corresponding to the virtual coordinate second rotation setting information, the third input information to rotate by changing at a predetermined rotation rate in the set second direction The third rotation setting information and the fourth input definition of the virtual coordinate which rotates the virtual coordinate to be rotated in a preset third direction at a preset rotation rate. At least one of virtual coordinate enlargement setting information for expanding and changing the virtual coordinate at a preset enlargement ratio in response to the beam, and reducing and changing the virtual coordinate at a preset reduction ratio in response to a fifth input information; It may include any one.

예를 들어, 가상좌표설정제어정보는, 입력부(130)의 "숫자4" 키버튼이 입력됨에 따른 제1입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 제1방향(예 : 가상좌표의 x축방향)으로 기 설정된 회전 비율만큼 회전시켜 변경하는 가상좌표 제1회전설정정보를 포함할 수 있다. For example, the virtual coordinate setting control information may include a preset virtual coordinate applied to the virtual object when the augmented reality implementation function is performed in response to the first input information of the “number 4” key button of the input unit 130. It may include virtual coordinate first rotation setting information that is rotated by a predetermined rotation rate in one direction (for example, the x-axis direction of the virtual coordinate).

또한 가상좌표설정제어정보는, 입력부(130)의 "숫자6" 키버튼이 입력됨에 따른 제2입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 제1방향(예 : 가상좌표의 y축방향)으로 기 설정된 회전 비율만큼 회전시켜 변경하는 가상좌표 제2회전설정정보를 포함할 수 있다.In addition, the virtual coordinate setting control information is a preset direction of the virtual coordinates applied to the virtual object when performing the augmented reality corresponding to the second input information according to the "number 6" key button of the input unit 130 is set in the first direction ( For example, the virtual coordinate second rotation setting information may be included by rotating by a preset rotation ratio in the y-axis direction of the virtual coordinate.

또한 가상좌표설정제어정보는, 입력부(130)의 "숫자8" 키버튼이 입력됨에 따른 제3입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 제3방향(예 : 가상좌표의 z축방향)으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보를 포함할 수 있다.In addition, the virtual coordinate setting control information may be set in a third direction in which the virtual coordinates applied to the virtual object when performing the augmented reality implementation function in response to the third input information of the “number 8” key button of the input unit 130 are input. For example, the virtual coordinates may include third rotation setting information that is changed by rotating at a preset rotation rate in the z-axis direction of the virtual coordinate.

또한 가상좌표설정제어정보는, 입력부(130)의 "↑" 키버튼이 입력됨에 따른 제4입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보를 포함할 수 있다.In addition, the virtual coordinate setting control information, by performing the augmented reality implementation function corresponding to the fourth input information when the "↑" key button of the input unit 130 is input to enlarge the virtual coordinates applied to the virtual object to a preset enlargement ratio The virtual coordinate enlargement setting information to be changed may be included.

또한 가상좌표설정제어정보는, 입력부(130)의 "↓" 키버튼이 입력됨에 따른 제5입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보를 포함할 수 있다.In addition, the virtual coordinate setting control information, by performing the augmented reality implementation function corresponding to the fifth input information according to the "↓" key button of the input unit 130 is reduced by reducing the virtual coordinate applied to the virtual object to a predetermined reduction ratio The virtual coordinate reduction setting information to be changed may be included.

이에, 장치제어부(150)는, 사용자 조작에 의한 상기 입력정보가 인지되면, 상기 가상좌표설정제어정보를 토대로 상기 인지된 입력정보에 해당하는 가상좌표 설정정보를 확인하고, 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 가상객체에 적용되는 가상좌표를 상기 확인된 가상좌표 설정정보를 반영하여 변경하고, 변경된 가상좌표를 적용하여 상기 촬영영상에 가상객체를 렌더링하여 상기 증강현실 컨텐츠를 출력하는 상기 증강현실 구현 기능을 수행할 수 있다.Thus, when the input information by the user operation is recognized, the device controller 150 checks the virtual coordinate setting information corresponding to the recognized input information based on the virtual coordinate setting control information, and performs the augmented reality implementation function. The augmented to change the virtual coordinates applied to the virtual object in the augmented reality content to reflect the confirmed virtual coordinate setting information, and to apply the changed virtual coordinates to render the virtual object on the photographed image to output the augmented reality content It can perform the realization function.

즉, 장치제어부(150)는, 입력부(130)를 통한 사용자 조작에 의한 입력정보가 인지되면, 저장된 가상좌표설정제어정보를 토대로 금번 인지된 입력정보(예 : "↑" 키버튼)에 해당하는 가상좌표 설정정보(예 : 가상좌표 확대설정정보)를 확인할 수 있다.That is, when the input information by the user manipulation through the input unit 130 is recognized, the device controller 150 corresponds to the input information (for example, "↑" key button) recognized this time based on the stored virtual coordinate setting control information. You can check virtual coordinate setting information (for example, virtual coordinate enlargement setting information).

그리고, 장치제어부(150)는, 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 가상객체에 적용되는 가상좌표를 금번 확인된 가상좌표 설정정보(예 : 가상좌표 확대설정정보)를 반영하여 변경한다. 따라서, 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표는 가상좌표 확대설정정보에 의해 기 설정된 확대 비율만큼 확대될 것이다.In addition, the device controller 150 changes the virtual coordinates applied to the virtual object in the augmented reality content according to the execution of the augmented reality implementation function to reflect the virtual coordinate setting information (for example, the virtual coordinate enlargement setting information) identified this time. Therefore, the virtual coordinates applied to the virtual object when performing the augmented reality implementation function will be enlarged by a preset enlargement ratio by the virtual coordinate enlargement setting information.

이에, 장치제어부(150)는, 현재 수행 중인 증강현실 구현 기능 수행에 있어서, 변경된 가상좌표 즉 기 설정된 확대 비율만큼 확대된 가상좌표를 적용하여 촬영영상에 가상객체를 렌더링하여 상기 증강현실 컨텐츠를 출력함으로써, 증강현실 구현 기능을 수행할 수 있다.Thus, the device controller 150 outputs the augmented reality content by rendering a virtual object in a captured image by applying a changed virtual coordinate, that is, a virtual coordinate enlarged by a preset magnification ratio, in performing the augmented reality implementation function currently being performed. By doing so, the augmented reality implementation can be performed.

증강현실 서비스는, 출력부(120)의 디스플레이부 화면에 적용되는 실제 좌표와, 증강현실 서비스에 따라 렌더링되는 가상객체에 적용되는 가상 좌표를 갖는다.The augmented reality service has an actual coordinate applied to the display unit screen of the output unit 120 and a virtual coordinate applied to a virtual object rendered according to the augmented reality service.

따라서, 사용자가 조작/입력하는 입력정보에 따라 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 회전 또는 확대 또는 축소시켜 변경하면, 결과적으로 증강현실컨텐츠재생장치(100)에서 출력하는 증강현실 컨텐츠에서 촬영영상에 렌더링되는 가상객체가 회전 또는 확대 또는 축소되어 표시될 것이다. Therefore, when the augmented reality is implemented according to input information manipulated / input by the user, when the virtual coordinates applied to the virtual object are rotated or enlarged or reduced, the augmented reality content output device 100 outputs the result. The virtual object rendered in the captured image in the content will be displayed by being rotated or enlarged or reduced.

이상에서 설명한 바와 같이, 본 발명에 따른 증강 현실 컨텐츠 재생 시스템은, 촬영구역에 위치한 인쇄서적을 촬영한 촬영영상을 기반으로 증강현실 컨텐츠를 제공하는 증강현실 서비스에 있어서, 사용자 조작에 따른 입력정보를 토대로 가상객체에 적용되는 가상좌표를 변경시켜 결과적으로 가상객체를 제어하는 효과를 도출함으로써, 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있고 실재감을 향상시킬 수 있다.As described above, the augmented reality content reproduction system according to the present invention, in the augmented reality service to provide augmented reality content based on the photographed image of the printed book located in the shooting zone, input information according to the user operation By changing the virtual coordinates applied to the virtual object based on the result, it is possible to derive the effect of controlling the virtual object, thereby providing various user interactions without moving the actual printed book and improving the realism.

이하에서는 도 3 및 도 4를 참조하여, 본 발명의 바람직한 실시예에 따른 증강 현실 컨텐츠 재생 방법을 설명하도록 한다. 여기서, 설명의 편의를 위해 전술한 도 1 내지 도 2에 도시된 구성은 해당 참조번호를 언급하여 설명하겠다. Hereinafter, a method of playing augmented reality content according to a preferred embodiment of the present invention will be described with reference to FIGS. 3 and 4. Here, for the convenience of description, the configuration shown in FIGS. 1 to 2 described above will be described with reference to the corresponding reference numerals.

먼저, 도 3을 참조하여 본 발명의 증강 현실 컨텐츠 재생 방법을 설명하면 다음과 같다. First, the augmented reality content reproduction method of the present invention with reference to FIG.

정보제공서버(200)는 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 제공한다(S10).The information providing server 200 provides virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information (S10).

바람직하게는, 정보제공서버(200)는, 제1입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링(rendering)된 가상객체에 적용되는 가상좌표를 기 설정된 제1방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제1회전설정정보, 제2입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제2방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제2회전설정정보, 제3입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제3방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보, 제4입력정보에 대응하여 상기 가상좌표를 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보, 제5입력정보에 대응하여 상기 가상좌표를 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보 중 적어도 어느 하나를 포함하는 가상좌표설정제어정보를 관리하며, 증강현실컨텐츠재생장치(100)로부터의 요청에 따라 또는 가상좌표설정제어정보 업데이트와 같은 특정 제공 이벤트 발생 시에 가상좌표설정제어정보를 증강현실컨텐츠재생장치(100)로 제공할 수 있다.Preferably, the information providing server 200 may be configured to set virtual coordinates applied to the virtual object rendered in the photographed image in the augmented reality content according to the augmented reality implementation function corresponding to the first input information. Virtual coordinates which are rotated at a preset rotation rate in one direction and are changed. The virtual coordinates applied to the virtual object rendered in the photographed image in the augmented reality content according to the augmented reality implementation function in response to the first rotation setting information and the second input information. Virtual coordinates for changing and rotating coordinates at a preset rotation rate in a second preset direction. The virtual images rendered in the captured image in the augmented reality content according to the augmented reality implementation function corresponding to the second rotation setting information and the third input information. The third rotation setting information and the fourth input of the virtual coordinates, which are changed by rotating the virtual coordinates applied to the object in the preset third direction at the preset rotation rate. At least one of virtual coordinate enlargement setting information for expanding and changing the virtual coordinate at a preset enlargement ratio in response to the beam, and reducing and changing the virtual coordinate at a preset reduction ratio in response to a fifth input information; Manages virtual coordinate setting control information including any one of the virtual coordinate setting control information, and augments the virtual coordinate setting control information according to a request from the augmented reality content reproducing apparatus 100 or when a specific providing event such as updating the virtual coordinate setting control information occurs. The content reproducing apparatus 100 may be provided.

이에, 증강현실컨텐츠재생장치(100)는, 전술한 바와 같이 정보제공서버(200)로부터 제공되는 가상좌표설정제어정보를 저장할 수 있다(S20).Thus, the AR content reproducing apparatus 100 may store the virtual coordinate setting control information provided from the information providing server 200 as described above (S20).

증강현실컨텐츠재생장치(100)는 특정 촬영구역(1)에 위치하는 인쇄서적(10)을 촬영한다(S30). The augmented reality content reproducing apparatus 100 photographs the print book 10 located in the specific photographing zone 1 (S30).

여기서, 인쇄서적(10)은, 사용자에 의해 특정 페이지가 펼쳐진 채로 증강현실컨텐츠재생장치(100)에 의해 촬영되는 특정 촬영구역(1)에 놓이게 될 것이다. 이에, 증강현실컨텐츠재생장치(100)는 특정 촬영구역(1)에 위치하는 인쇄서적(10)의 펼쳐진 페이지를 촬영하게 된다.Here, the print book 10 will be placed in the specific photographing zone 1 photographed by the AR content playback apparatus 100 with the specific page unfolded by the user. Accordingly, the augmented reality content reproducing apparatus 100 photographs the unfolded pages of the print book 10 located in the specific photographing zone 1.

그리고, 증강현실컨텐츠재생장치(100)는 촬영된 촬영영상을 분석하여 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력한다(S40).The augmented reality content playback apparatus 100 analyzes the photographed photographed image and outputs augmented reality content applied to the photographed image according to the execution of a preset augmented reality implementation function corresponding to the analysis result (S40).

이에, 증강현실컨텐츠재생장치(100)는, 특정 촬영구역(1)에 위치한 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상을 분석하여, 분석 결과 마커가 존재하지 않으면 촬영된 실시간 촬영영상을 증강 없이 그대로 처리하여 출력하고, 분석 결과 마커(예 : 10a)가 존재하면 해당 마커(예 : 10a)에 대응하여 기 설정된 증강현실 구현기능(예 : 3D의 그래픽 모델 렌더링)을 수행하여 촬영된 실시간 촬영영상에 가상객체(예 : 3D의 그래픽 모델)를 증강하여 출력함으로써, 인쇄서적(10)을 촬영한 촬영영상을 기반으로 증강현실 서비스를 제공할 수 있다.Thus, the augmented reality content playback apparatus 100 analyzes the photographed image of the unfolded page of the printed book 10 located in the specific photographing zone 1, and if the marker is not present as a result of the analysis, the real-time photographed image is captured. Process the output as it is without augmentation, and if a marker (eg 10a) exists as a result of analysis, a real-time shot by performing a preset augmented reality implementation function (eg rendering a 3D graphic model) corresponding to the corresponding marker (eg 10a) By augmenting and outputting a virtual object (eg, a 3D graphic model) on the photographed image, an augmented reality service may be provided based on the photographed image photographing the print book 10.

그리고, 증강현실컨텐츠재생장치(100)는, 촬영구역(1)에 위치한 인쇄서적(10)을 촬영한 촬영영상을 기반으로 전술과 같이 증강현실 서비스를 제공함에 있어서, 사용자에 의한 입력정보가 인지되면(S50), 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 반영하여 상기 증강현실 구현 기능을 수행한다(S60).In addition, the augmented reality content reproducing apparatus 100, based on the photographed image photographing the print book 10 located in the photographing zone (1) in providing the augmented reality service as described above, the input information by the user is recognized In operation S50, the augmented reality implementation function is performed by reflecting the corresponding virtual coordinate setting information according to the input information based on the virtual coordinate setting control information (S60).

예를 들면, 사용자가 증강현실컨텐츠재생장치(100)의 키패드를 통해 특정 키버튼을 입력하면, 증강현실컨텐츠재생장치(100)는 가상좌표설정제어정보를 토대로 금번 입력된 키버튼에 따른 해당 가상좌표 설정정보를 반영하여 증강현실 구현 기능을 수행할 것이다.For example, when the user inputs a specific key button through the keypad of the augmented reality content playback device 100, the augmented reality content playback device 100 based on the virtual button setting control information, the corresponding virtual button according to this time input Augmented reality will be implemented by reflecting coordinate setting information.

이하에서는 도 4를 참조하여 본 발명에 따른 증강현실컨텐츠재생장치의 동작 방법을 구체적으로 설명하도록 한다.Hereinafter, an operation method of the apparatus for reproducing augmented reality content according to the present invention will be described in detail with reference to FIG. 4.

본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 저장한다(S100).The operation method of the apparatus for reproducing augmented reality content 100 according to the present invention stores virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information (S100).

여기서 저장되는 가상좌표설정제어정보는, 외부의 정보제공서버(200)로부터 제공/저장되는 것이 가능할 것이다.The virtual coordinate setting control information stored here may be provided / stored from an external information provision server 200.

가상좌표설정제어정보는, 제1입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링(rendering)된 가상객체에 적용되는 가상좌표를 기 설정된 제1방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제1회전설정정보, 제2입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제2방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제2회전설정정보, 제3입력정보에 대응하여 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 상기 촬영영상에 렌더링된 가상객체에 적용되는 가상좌표를 기 설정된 제3방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보, 제4입력정보에 대응하여 상기 가상좌표를 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보, 제5입력정보에 대응하여 상기 가상좌표를 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보 중 적어도 어느 하나를 포함할 수 있다.The virtual coordinate setting control information is set in a preset first direction to set virtual coordinates applied to a virtual object rendered on the photographed image in the augmented reality content according to the execution of the augmented reality implementation function in response to the first input information. Virtual coordinates rotated at a rotation rate to change the first rotation setting information and the second rotation information corresponding to the second input information. Virtual coordinates that are rotated at a preset rotation rate in two directions to be changed. Virtual coordinates applied to the virtual object rendered to the captured image in the augmented reality content according to the augmented reality implementation function corresponding to the second rotation setting information and the third input information. For the virtual coordinates, the third rotation setting information and the fourth input information, which are rotated by changing the coordinates in the preset third direction at the preset rotation rate. At least one of the virtual coordinate enlargement setting information for enlarging and changing the virtual coordinate at a preset enlargement ratio and the virtual coordinate reduction setting information for reducing and changing the virtual coordinate at a preset reduction ratio in response to a fifth input information. It may include.

예를 들어, 가상좌표설정제어정보는, 입력부(130)의 "숫자4" 키버튼이 입력됨에 따른 제1입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 제1방향(예 : 가상좌표의 x축방향)으로 기 설정된 회전 비율만큼 회전시켜 변경하는 가상좌표 제1회전설정정보를 포함할 수 있다. For example, the virtual coordinate setting control information may include a preset virtual coordinate applied to the virtual object when the augmented reality implementation function is performed in response to the first input information of the “number 4” key button of the input unit 130. It may include virtual coordinate first rotation setting information that is rotated by a predetermined rotation rate in one direction (for example, the x-axis direction of the virtual coordinate).

또한 가상좌표설정제어정보는, 입력부(130)의 "숫자6" 키버튼이 입력됨에 따른 제2입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 제1방향(예 : 가상좌표의 y축방향)으로 기 설정된 회전 비율만큼 회전시켜 변경하는 가상좌표 제2회전설정정보를 포함할 수 있다.In addition, the virtual coordinate setting control information is a preset direction of the virtual coordinates applied to the virtual object when performing the augmented reality corresponding to the second input information according to the "number 6" key button of the input unit 130 is set in the first direction ( For example, the virtual coordinate second rotation setting information may be included by rotating by a preset rotation ratio in the y-axis direction of the virtual coordinate.

또한 가상좌표설정제어정보는, 입력부(130)의 "숫자8" 키버튼이 입력됨에 따른 제3입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 제3방향(예 : 가상좌표의 z축방향)으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보를 포함할 수 있다.In addition, the virtual coordinate setting control information may be set in a third direction in which the virtual coordinates applied to the virtual object when performing the augmented reality implementation function in response to the third input information of the “number 8” key button of the input unit 130 are input. For example, the virtual coordinate third rotation setting information may be included by rotating at a preset rotation rate in the z-axis direction of the virtual coordinate.

또한 가상좌표설정제어정보는, 입력부(130)의 "↑" 키버튼이 입력됨에 따른 제4입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보를 포함할 수 있다.In addition, the virtual coordinate setting control information, by performing the augmented reality implementation function corresponding to the fourth input information when the "↑" key button of the input unit 130 is input to enlarge the virtual coordinates applied to the virtual object to a preset enlargement ratio The virtual coordinate enlargement setting information to be changed may be included.

또한 가상좌표설정제어정보는, 입력부(130)의 "↓" 키버튼이 입력됨에 따른 제5입력정보에 대응하여 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보를 포함할 수 있다.In addition, the virtual coordinate setting control information, by performing the augmented reality implementation function corresponding to the fifth input information according to the "↓" key button of the input unit 130 is reduced by reducing the virtual coordinate applied to the virtual object to a predetermined reduction ratio The virtual coordinate reduction setting information to be changed may be included.

이러한 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 지정된 특정 촬영구역(1)을 촬영하여 해당 촬영구역(1)에 위치한 인쇄서적(10)을 촬영한다(S110). 즉, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 특정 촬영구역(1)에 위치하는 인쇄서적(10)의 펼쳐진 페이지를 촬영할 수 있다.The operation method of the apparatus for reproducing augmented reality content 100 according to the present invention photographs the designated specific photographing region 1 and photographs the print book 10 located in the photographing region 1 (S110). That is, in the method of operating the augmented reality content reproducing apparatus 100 according to the present invention, the unfolded pages of the print book 10 located in the specific photographing zone 1 may be photographed.

그리고 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 촬영된 촬영영상을 분석한 분석 결과에 근거하여, 상기 분석 결과에 대응하는 기 설정된 증강현실 구현기능 수행에 따라(S120), 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력한다(S130).And the operation method of the augmented reality content playback device 100 according to the present invention, based on the analysis results of the analysis of the photographed photographed image, according to the execution of a predetermined augmented reality implementation function corresponding to the analysis result (S120), The augmented reality content applied to the captured image is output (S130).

즉, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 촬영영상을 분석한 분석 결과에 근거하여, 촬영영상 내에 마커가 존재하지 않으면 촬영된 실시간 촬영영상 즉 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상을 가상 객체 증강 없이 그대로 처리하여 출력할 수 있다. 이 경우, 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상의 컨텐츠가 증강현실 컨텐츠에 대응된다.That is, the operating method of the apparatus for reproducing augmented reality content 100 according to the present invention is based on the analysis result of analyzing the photographed image, and if there is no marker in the photographed image, the photographed real-time photographed image, that is, the printed book 10. The captured image of the unfolded page can be processed and output as it is without virtual object enhancement. In this case, the content of the captured image photographing the unfolded page of the print book 10 corresponds to the augmented reality content.

또한, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 촬영영상을 분석한 분석 결과에 근거하여, 촬영영상 내에 마커(예 : 10a)가 존재하면 해당 마커(예 : 10a)에 대응하여 기 설정된 증강현실 구현기능(예 : 3D의 그래픽 모델 렌더링)을 수행함으로써, 촬영된 실시간 촬영영상 즉 인쇄서적(10)의 펼쳐진 페이지에 가상 객체(예 : 3D의 그래픽 모델)를 증강하여 출력할 수 있다. 이 경우, 인쇄서적(10)의 펼쳐진 페이지에 가상 객체(예 : 3D의 그래픽 모델)를 렌더링한 컨텐츠가 증강현실 컨텐츠에 대응된다.In addition, the operation method of the apparatus for reproducing augmented reality content 100 according to the present invention is based on the analysis result of analyzing the photographed image, and if a marker (for example, 10a) exists in the photographed image, the marker (for example, 10a) exists. Correspondingly, by performing a preset augmented reality implementation function (eg, rendering a 3D graphic model), augmented and outputting a virtual object (eg, 3D graphic model) on the captured real-time photographed image, that is, the open page of the print book 10. can do. In this case, the content of rendering a virtual object (eg, a 3D graphic model) on the open page of the print book 10 corresponds to the augmented reality content.

물론, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 다양한 마커프리(marker free) 또는 마커리스(marker-less) 기반의 기 설정된 증강현실 서비스 제공 기능을 구비하고, 인쇄서적(10)에 마커(10a)가 포함되지 않은 경우에도 해당하는 다양한 마커프리(marker free) 또는 마커리스(marker-less) 기반의 증강현실 서비스를 제공할 수 있을 것이다.Of course, the operation method of the apparatus for reproducing augmented reality content 100 according to the present invention includes various marker free or marker-less based augmented reality service providing functions, and a printed book ( Even if the marker 10a is not included in 10), various marker free or marker-less augmented reality services may be provided.

이처럼, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 마커 기반 또는 마커프리 기반 또는 마커리스 기반 등의 다양한 방식을 통해 촬영영상에 가상객체를 렌더링한 증강현실 컨텐츠를 출력하는 일반적인 증강현실 서비스를 제공할 수 있다.As described above, the operating method of the apparatus for reproducing augmented reality content 100 according to the present invention is a general method of outputting augmented reality content in which a virtual object is rendered to a captured image through various methods such as marker-based, marker-free, or markerless based. Augmented reality services can be provided.

이러한 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 사용자 조작에 의한 특정 입력정보가 인지되는지 여부를 판단한다(S140).The operation method of the apparatus for reproducing augmented reality content 100 according to the present invention determines whether specific input information by user manipulation is recognized (S140).

즉, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 입력부(130)를 통한 사용자 조작에 의해, 가상좌표설정제어정보 내 포함된 가상좌표 설정정보에 대응하는 입력정보가 인지되는지 여부를 판단할 수 있다.That is, in the operation method of the apparatus for reproducing augmented reality content 100 according to the present invention, whether the input information corresponding to the virtual coordinate setting information included in the virtual coordinate setting control information is recognized by a user manipulation through the input unit 130. It can be determined.

이에, 입력정보가 인지되면, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 가상좌표설정제어정보를 토대로 금번 인지된 입력정보에 해당하는 가상좌표 설정정보를 확인하여, 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 가상객체에 적용되는 가상좌표를 상기 확인된 가상좌표 설정정보를 반영하여 변경하고(S150), 변경된 가상좌표를 적용하여 상기 촬영영상에 가상객체를 렌더링하여 상기 증강현실 컨텐츠를 출력하는 상기 증강현실 구현 기능을 수행할 수 있다(S160).Thus, when the input information is recognized, the operation method of the augmented reality content playback device 100 according to the present invention, by checking the virtual coordinate setting information corresponding to the input information recognized this time, based on the virtual coordinate setting control information, augmented reality The virtual coordinates applied to the virtual object in the augmented reality content according to the implementation function are changed to reflect the checked virtual coordinate setting information (S150), and the virtual object is rendered to the photographed image by applying the changed virtual coordinates to the augmented image. The augmented reality implementation function of outputting reality content may be performed (S160).

즉, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 입력부(130)를 통한 사용자 조작에 의한 입력정보가 인지되면, 저장된 가상좌표설정제어정보를 토대로 금번 인지된 입력정보(예 : "↑" 키버튼)에 해당하는 가상좌표 설정정보(예 : 가상좌표 확대설정정보)를 확인할 수 있다.That is, in the operating method of the apparatus for reproducing augmented reality content 100 according to the present invention, when the input information by the user manipulation through the input unit 130 is recognized, the input information (for example, based on the stored virtual coordinate setting control information) is recognized. : You can check virtual coordinate setting information (for example, virtual coordinate enlargement setting information) corresponding to "↑" key button.

그리고, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 증강현실 구현 기능 수행에 따른 증강현실 컨텐츠 내 가상객체에 적용되는 가상좌표를 금번 확인된 가상좌표 설정정보(예 : 가상좌표 확대설정정보)를 반영하여 변경한다. 따라서, 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표는 가상좌표 확대설정정보에 의해 기 설정된 확대 비율만큼 확대될 것이다.In addition, the operating method of the apparatus for reproducing augmented reality content 100 according to the present invention includes virtual coordinate setting information (for example, virtual coordinates), which has been confirmed the virtual coordinates applied to the virtual object in the augmented reality content according to the augmented reality implementation function. Change to reflect the magnification setting information). Therefore, the virtual coordinates applied to the virtual object when performing the augmented reality implementation function will be enlarged by a preset enlargement ratio by the virtual coordinate enlargement setting information.

이에, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 현재 수행 중인 증강현실 구현 기능 수행에 있어서, 변경된 가상좌표 즉 기 설정된 확대 비율만큼 확대된 가상좌표를 적용하여 촬영영상에 가상객체를 렌더링하여 상기 증강현실 컨텐츠를 출력함으로써, 증강현실 구현 기능을 수행할 수 있다.Thus, in the method of operating the augmented reality content playback apparatus 100 according to the present invention, in performing an augmented reality implementation function currently being performed, a virtual image is applied to the captured image by applying a changed virtual coordinate, that is, a virtual coordinate enlarged by a preset enlargement ratio. Augmented reality can be implemented by rendering an object and outputting the augmented reality content.

증강현실 서비스는, 출력부(120)의 디스플레이부 화면에 적용되는 실제 좌표와, 증강현실 서비스에 따라 렌더링되는 가상객체에 적용되는 가상 좌표를 갖는다.The augmented reality service has an actual coordinate applied to the display unit screen of the output unit 120 and a virtual coordinate applied to a virtual object rendered according to the augmented reality service.

따라서, 사용자가 조작/입력하는 입력정보에 따라 증강현실 구현 기능 수행 시 가상객체에 적용되는 가상좌표를 회전 또는 확대 또는 축소시켜 변경하면, 결과적으로 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법에 의해 출력되는 증강현실 컨텐츠에서 촬영영상에 렌더링되는 가상객체가 회전 또는 확대 또는 축소되어 표시될 것이다.Therefore, if the virtual coordinates applied to the virtual object are rotated or enlarged or reduced according to the input information manipulated / input by the user, the resulting augmented reality content playback apparatus 100 according to the present invention changes. In the augmented reality content output by the operation method, the virtual object rendered in the captured image will be displayed rotated or enlarged or reduced.

이상에서 설명한 바와 같이, 본 발명에 따른 증강 현실 컨텐츠 재생 방법은, 촬영구역에 위치한 인쇄서적을 촬영한 촬영영상을 기반으로 증강현실 컨텐츠를 제공하는 증강현실 서비스에 있어서, 사용자 조작에 따른 입력정보를 토대로 가상객체에 적용되는 가상좌표를 변경시켜 결과적으로 가상객체를 제어하는 효과를 도출함으로써, 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있고 실재감을 향상시킬 수 있다.As described above, the augmented reality content reproduction method according to the present invention, in the augmented reality service for providing augmented reality content based on the photographed image of the printed book located in the shooting zone, input information according to the user operation By changing the virtual coordinates applied to the virtual object based on the result, it is possible to derive the effect of controlling the virtual object, thereby providing various user interactions without moving the actual printed book and improving the realism.

지금까지 본 발명을 바람직한 실시 예를 참조하여 상세히 설명하였지만, 본 발명이 상기한 실시 예에 한정되는 것은 아니며, 이하의 특허청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 또는 수정이 가능한 범위까지 본 발명의 기술적 사상이 미친다 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims.

촬영구역에 위치한 인쇄서적을 촬영한 촬영영상을 기반으로 증강현실 컨텐츠를 제공하는 증강현실 서비스에 있어서, 사용자 조작에 따른 입력정보를 토대로 가상객체에 적용되는 가상좌표를 변경시켜 결과적으로 가상객체를 제어하는 효과를 도출함으로써, 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있고 실재감을 향상시키는 증강 현실 컨텐츠 재생 시스템 및 방법을 적용할 경우, 증강현실 구현의 다양성 확장 및 제어 편의성, 사용자 만족도 측면에서 매우 큰 진보를 가져올 수 있으며, 적용되는 증강현실컨텐츠재생장치 및 서비스 솔루션의 시판 또는 영업의 가능성이 충분할 뿐만 아니라 현실적으로 명백하게 실시할 수 있다.In the augmented reality service that provides augmented reality content based on a photographed image of a print book located in a photographing area, the virtual object is controlled by changing a virtual coordinate applied to the virtual object based on input information according to a user's manipulation. By applying the augmented reality effect, it is possible to provide a variety of user interaction without moving the actual printed book, and when applying the augmented reality content reproduction system and method that improves the realism, the diversity of augmented reality implementation, control convenience, and user satisfaction It is possible to bring great advances in the market, and the possibility of marketing or sales of the applied augmented reality content reproducing apparatus and service solution is not only sufficient, but also realistically implemented.

10 : 인쇄서적
100 : 증강현실컨텐츠재생장치
200 : 정보제공서버10: printed book
100: augmented reality content playback device
200: information providing server

Claims (12)

적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 제공하는 정보제공서버; 및
상기 정보제공서버로부터 제공되는 상기 가상좌표설정제어정보를 저장하고, 특정 촬영구역에 위치하는 인쇄서적을 촬영한 촬영영상을 분석하고 분석 결과에 대응하는 기 설정된 증강현실 구현 기능을 수행하여 가상좌표가 적용된 가상객체를 상기 촬영영상에 랜더링(rendering)한 증강현실 컨텐츠를 출력하며, 특정 입력정보가 인지되면 상기 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 상기 가상좌표에 반영하여 상기 증강현실 구현 기능을 수행하여, 상기 증강현실 컨텐츠 내의 상기 가상객체가 회전 또는 확대 또는 축소되도록 하는 증강현실컨텐츠재생장치를 포함하는 것을 특징으로 하는 증강 현실 컨텐츠 재생 시스템.An information providing server providing virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information; And
The virtual coordinate is stored by storing the virtual coordinate setting control information provided from the information providing server, analyzing a photographed image photographing a print book located in a specific photographing area, and performing a preset augmented reality corresponding to an analysis result. Outputs augmented reality content by rendering the applied virtual object to the photographed image, and if specific input information is recognized, reflects the corresponding virtual coordinate setting information according to the input information on the virtual coordinates based on the virtual coordinate setting control information. And augmented reality content playback device to perform the augmented reality implementation function to rotate or enlarge or reduce the virtual object in the augmented reality content. 특정 촬영구역에 위치하는 인쇄서적을 촬영하는 촬영부;
상기 촬영부를 통해 촬영된 촬영영상을 분석하는 영상분석부; 및
상기 영상분석부를 통한 분석 결과에 근거하여, 상기 분석 결과에 대응하는 기 설정된 증강현실 구현 기능을 수행하여 가상좌표가 적용된 가상객체를 상기 촬영영상에 랜더링(rendering)한 증강현실 컨텐츠를 출력하며, 특정 입력정보가 인지되면 기 저장된 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 상기 가상좌표에 반영하여 상기 증강현실 구현 기능을 수행하여, 상기 증강현실 컨텐츠 내의 상기 가상객체가 회전 또는 확대 또는 축소되도록 하는 장치제어부를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치.A photographing unit photographing a print book located in a specific photographing area;
An image analyzer analyzing the photographed image photographed through the photographing unit; And
Based on the analysis result through the image analysis unit, a predetermined augmented reality implementation function corresponding to the analysis result is performed to output augmented reality content by rendering a virtual object to which the virtual coordinates are applied to the captured image, When the input information is recognized, the virtual object in the augmented reality content is rotated by performing the augmented reality implementation function by reflecting the corresponding virtual coordinate setting information according to the input information on the virtual coordinates based on previously stored virtual coordinate setting control information. Or augmented reality content playback device comprising a device control unit to enlarge or reduce. 제 2 항에 있어서,
적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보가 저장되는 정보저장부를 더 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치.3. The method of claim 2,
And an information storage unit for storing virtual coordinate setting control information including virtual coordinate setting information corresponding to at least one input information. 제 2 항에 있어서,
사용자 조작에 따른 적어도 하나의 상기 입력정보를 발생하는 입력부를 더 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치.3. The method of claim 2,
An augmented reality content playback device further comprises an input unit for generating at least one input information according to a user operation. 제 2 항 내지 제 4 항 중 어느 한 항에 있어서,
상기 가상좌표설정제어정보는,
상기 가상객체에 적용되는 가상좌표에 대하여, 상기 가상좌표를 제1입력정보에 대응하여 기 설정된 제1방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제1회전설정정보, 상기 가상좌표를 제2입력정보에 대응하여 기 설정된 제2방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제2회전설정정보, 상기 가상좌표를 제3입력정보에 대응하여 기 설정된 제3방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보, 상기 가상좌표를 제4입력정보에 대응하여 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보, 상기 가상좌표를 제5입력정보에 대응하여 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치.5. The method according to any one of claims 2 to 4,
The virtual coordinate setting control information,
Virtual coordinates, which are configured to rotate the virtual coordinates in the first direction corresponding to the first input information at a predetermined rotation rate and change the virtual coordinates applied to the virtual object. Second virtual rotation setting information for changing and rotating the virtual coordinate at a preset rotation rate in a second preset direction corresponding to the input information; and a preset rotation ratio in the third direction corresponding to the third input information. Virtual coordinate third rotation setting information to be rotated to change the virtual coordinate, virtual coordinate enlargement setting information to enlarge and change the virtual coordinate at a preset magnification ratio corresponding to the fourth input information, and the virtual coordinate to correspond to the fifth input information. An augmented reality content playback field comprising at least one of the virtual coordinate reduction setting information that is reduced and changed at a predetermined reduction ratio. . 제 2 항 내지 제 4 항 중 어느 한 항에 있어서,
상기 장치제어부는,
사용자 조작에 의한 상기 입력정보가 인지되면, 상기 가상좌표설정제어정보를 토대로 상기 인지된 입력정보에 해당하는 가상좌표 설정정보를 확인하고, 상기 증강현실 구현 기능 수행에 따라 출력된 상기 증강현실 컨텐츠 내의 상기 가상객체에 적용되는 상기 가상좌표를 상기 확인된 가상좌표 설정정보를 반영하여 변경하고, 변경된 가상좌표를 적용하여 상기 가상객체를 상기 촬영영상에 렌더링한 증강현실 컨텐츠를 출력하도록 상기 증강현실 구현 기능을 수행하는 것을 특징으로 하는 증강현실컨텐츠재생장치. 5. The method according to any one of claims 2 to 4,
The apparatus control unit includes:
When the input information is recognized by the user's manipulation, the virtual coordinate setting information corresponding to the recognized input information is checked based on the virtual coordinate setting control information, and in the augmented reality content output according to the execution of the augmented reality implementation function. The augmented reality implementation function to change the virtual coordinates applied to the virtual object by reflecting the confirmed virtual coordinate setting information, and to output the augmented reality content by rendering the virtual object to the photographed image by applying the changed virtual coordinates Augmented reality content playback device, characterized in that for performing. 제 2 항 내지 제 4 항 중 어느 한 항에 있어서,
상기 장치제어부는,
상기 가상좌표설정제어정보에 대한 설정정보를 조정하는 설정정보 조정기능을 제공하고, 상기 설정정보 조정기능을 통한 사용자의 조정에 대응하여 상기 가상좌표설정제어정보를 변경/저장하는 것을 특징으로 하는 증강현실컨텐츠재생장치.5. The method according to any one of claims 2 to 4,
The apparatus control unit includes:
An enhancement function for providing setting information adjustment function for adjusting setting information on the virtual coordinate setting control information, and changing / storing the virtual coordinate setting control information in response to the user's adjustment through the setting information adjusting function Real content playback device. 적어도 하나의 입력정보에 대응하는 가상좌표 설정정보를 포함하는 가상좌표설정제어정보를 정보제공서버가 제공하는 단계;
상기 정보제공서버로부터 제공되는 상기 가상좌표설정제어정보를 증강현실컨텐츠재생장치에서 저장하는 단계;
상기 증강현실컨텐츠재생장치가 특정 촬영구역에 위치하는 인쇄서적을 촬영한 촬영영상을 분석하고 분석 결과에 대응하는 기 설정된 증강현실 구현 기능을 수행하여 가상좌표가 적용된 가상객체를 상기 촬영영상에 랜더링한 증강현실 컨텐츠를 출력하는 단계; 및
특정 입력정보가 인지되면, 상기 증강현실컨텐츠재생장치가 상기 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 상기 가상좌표에 반영하여 상기 증강현실 구현 기능을 수행하여, 상기 증강현실 컨텐츠 내의 상기 가상객체가 회전 또는 확대 또는 축소되도록 하는 단계를 포함하는 것을 특징으로 하는 증강 현실 컨텐츠 재생 방법.Providing, by the information providing server, virtual coordinate setting control information including virtual coordinate setting information corresponding to the at least one input information;
Storing the virtual coordinate setting control information provided from the information providing server in an augmented reality content playback device;
The augmented reality content playback device analyzes a photographed image of a printed book located in a specific photographing area and performs a preset augmented reality corresponding function corresponding to the analysis result to render a virtual object to which the virtual coordinate is applied to the photographed image. Outputting augmented reality content; And
When the specific input information is recognized, the augmented reality content reproducing apparatus reflects the virtual coordinate setting information according to the input information in the virtual coordinates based on the virtual coordinate setting control information to perform the augmented reality implementation function, And rotating or enlarging or reducing the virtual object in the reality content. 특정 촬영구역에 위치하는 인쇄서적을 촬영하는 촬영 단계;
상기 촬영된 촬영영상을 분석한 분석 결과에 근거하여, 상기 분석 결과에 대응하는 기 설정된 증강현실 구현 기능을 수행하여 가상좌표가 적용된 가상객체를 상기 촬영영상에 랜더링한 증강현실 컨텐츠를 출력하는 증강현실 컨텐츠 출력단계;
사용자 조작에 의한 특정 입력정보를 인지하는 입력정보 인지단계; 및
상기 입력정보가 인지되면 기 저장된 가상좌표설정제어정보를 토대로 상기 입력정보에 따른 해당 가상좌표 설정정보를 상기 가상좌표에 반영하여 상기 증강현실 구현 기능을 수행하여, 상기 증강현실 컨텐츠 내의 상기 가상객체가 회전 또는 확대 또는 축소되도록 하는 가상좌표 변경 및 수행단계를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.A photographing step of photographing a print book located in a specific photographing area;
Augmented reality that outputs augmented reality content by rendering a virtual object to which the virtual coordinates are applied to the photographed image by performing a predetermined augmented reality implementation function corresponding to the analysis result based on the analysis result of analyzing the photographed photographed image Outputting content;
An input information recognizing step of recognizing specific input information by a user manipulation; And
When the input information is recognized, the virtual object in the augmented reality content is performed by reflecting the corresponding virtual coordinate setting information according to the input information in the virtual coordinates based on previously stored virtual coordinate setting control information. Method of operating an augmented reality content playback device comprising the step of changing and performing the virtual coordinates to be rotated or enlarged or reduced. 제 9 항에 있어서,
상기 가상좌표설정제어정보는,
상기 가상좌표설정제어정보는,
상기 가상객체에 적용되는 가상좌표에 대하여, 상기 가상좌표를 제1입력정보에 대응하여 기 설정된 제1방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제1회전설정정보, 상기 가상좌표를 제2입력정보에 대응하여 기 설정된 제2방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제2회전설정정보, 상기 가상좌표를 제3입력정보에 대응하여 기 설정된 제3방향으로 기 설정된 회전 비율로 회전시켜 변경하는 가상좌표 제3회전설정정보, 상기 가상좌표를 제4입력정보에 대응하여 기 설정된 확대 비율로 확대시켜 변경하는 가상좌표 확대설정정보, 상기 가상좌표를 제5입력정보에 대응하여 기 설정된 축소 비율로 축소시켜 변경하는 가상좌표 축소설정정보 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.The method of claim 9,
The virtual coordinate setting control information,
The virtual coordinate setting control information,
Virtual coordinates, which are configured to rotate the virtual coordinates in the first direction corresponding to the first input information at a predetermined rotation rate and change the virtual coordinates applied to the virtual object. Second virtual rotation setting information for changing and rotating the virtual coordinate at a preset rotation rate in a second preset direction corresponding to the input information; and a preset rotation ratio in the third direction corresponding to the third input information. Virtual coordinate third rotation setting information to be rotated to change the virtual coordinate, virtual coordinate enlargement setting information to enlarge and change the virtual coordinate at a preset magnification ratio corresponding to the fourth input information, and the virtual coordinate to correspond to the fifth input information. Augmented reality content playback site comprising at least any one of the virtual coordinate reduction setting information to be reduced by changing to a predetermined reduction ratio Method of operation. 제 9 항 또는 제 10 항에 있어서,
상기 가상좌표 변경 및 수행단계는,
사용자에 의한 상기 입력정보가 인지되면, 상기 가상좌표설정제어정보를 토대로 상기 인지된 입력정보에 해당하는 가상좌표 설정정보를 확인하고, 상기 증강현실 구현 기능 수행에 따라 출력된 상기 증강현실 컨텐츠 내의 상기 가상객체에 적용되는 상기 가상좌표를 상기 확인된 가상좌표 설정정보를 반영하여 변경하는 단계와,
변경된 가상좌표를 적용하여, 상기 가상객체를 상기 촬영영상에 렌더링한 증강현실 컨텐츠를 출력하도록 상기 증강현실 구현 기능을 수행하는 단계를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.11. The method according to claim 9 or 10,
The changing and performing the virtual coordinates,
When the input information is recognized by the user, the virtual coordinate setting information corresponding to the recognized input information is checked based on the virtual coordinate setting control information, and the augmented reality content is output in accordance with the augmented reality implementation function. Changing the virtual coordinates applied to the virtual object by reflecting the checked virtual coordinate setting information;
And applying the changed virtual coordinate to perform the augmented reality implementation function to output the augmented reality content rendered by the virtual object on the photographed image. 제 9 항 또는 제 10 항에 있어서,
상기 가상좌표설정제어정보에 대한 설정정보를 조정하는 설정정보 조정기능을 제공하고, 상기 설정정보 조정기능을 통한 사용자의 조정에 대응하여 상기 가상좌표설정제어정보를 변경/저장하는 설정정보 조정단계를 더 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.11. The method according to claim 9 or 10,
A setting information adjusting function for adjusting setting information on the virtual coordinate setting control information, and setting / adjusting setting information for changing / storing the virtual coordinate setting control information in response to a user's adjustment through the setting information adjusting function. Operation method of the augmented reality content playback device further comprising.
KR1020100103339A 2010-10-22 2010-10-22 System and method for playing contents of augmented reality KR101316789B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100103339A KR101316789B1 (en) 2010-10-22 2010-10-22 System and method for playing contents of augmented reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100103339A KR101316789B1 (en) 2010-10-22 2010-10-22 System and method for playing contents of augmented reality

Publications (2)

Publication Number Publication Date
KR20120041921A KR20120041921A (en) 2012-05-03
KR101316789B1 true KR101316789B1 (en) 2013-10-10

Family

ID=46262812

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100103339A KR101316789B1 (en) 2010-10-22 2010-10-22 System and method for playing contents of augmented reality

Country Status (1)

Country Link
KR (1) KR101316789B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101478954B1 (en) * 2014-08-21 2015-02-04 (주) 제이제이엠엔터테인먼트 Apparatus and Method for providing augment reality based on children's song
KR20230023075A (en) 2021-08-09 2023-02-17 (주)비타민상상력 Method for providing dinosaur augmented reality contents using a dinosaur skeleton model

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102063895B1 (en) 2015-04-20 2020-01-08 삼성전자주식회사 Master device, slave device and control method thereof

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090044702A (en) * 2007-11-01 2009-05-07 광주과학기술원 System and method of augmented reality-based product viewer
KR100941749B1 (en) 2008-08-25 2010-02-11 에이알비전 (주) Augmented reality apparatus and virtual image composition method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090044702A (en) * 2007-11-01 2009-05-07 광주과학기술원 System and method of augmented reality-based product viewer
KR100941749B1 (en) 2008-08-25 2010-02-11 에이알비전 (주) Augmented reality apparatus and virtual image composition method

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
하태진외 3명, 상호작용형 증강현실 기반 디지로그 북의 연구동행 및 전망, 한국멀티미디어학회지제13권제3호 페이지89-98 (2009.09.) *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101478954B1 (en) * 2014-08-21 2015-02-04 (주) 제이제이엠엔터테인먼트 Apparatus and Method for providing augment reality based on children's song
KR20230023075A (en) 2021-08-09 2023-02-17 (주)비타민상상력 Method for providing dinosaur augmented reality contents using a dinosaur skeleton model

Also Published As

Publication number Publication date
KR20120041921A (en) 2012-05-03

Similar Documents

Publication Publication Date Title
US11262835B2 (en) Human-body-gesture-based region and volume selection for HMD
KR102638526B1 (en) Modifying scenes in augmented reality using parameterized markers
US8644467B2 (en) Video conferencing system, method, and computer program storage device
TWI654539B (en) Virtual reality interaction method, device and system
CN109643212B (en) 3D document editing system
US20190180506A1 (en) Systems and methods for adding annotations to virtual objects in a virtual environment
US10049490B2 (en) Generating virtual shadows for displayable elements
EP2400464A2 (en) Spatial association between virtual and augmented reality
US20190130648A1 (en) Systems and methods for enabling display of virtual information during mixed reality experiences
US20190244410A1 (en) Computer implemented method and device
JP2024026151A (en) Methods, systems, and media for rendering immersive video content using foveated meshes
KR101316789B1 (en) System and method for playing contents of augmented reality
KR101216221B1 (en) System and method for providing augmented reality service
KR101308184B1 (en) Augmented reality apparatus and method of windows form
KR101211178B1 (en) System and method for playing contents of augmented reality
KR101246304B1 (en) System and method for providing augmented reality service
EP3652704B1 (en) Systems and methods for creating and displaying interactive 3d representations of real objects
KR20120035322A (en) System and method for playing contents of augmented reality
KR101242512B1 (en) System and method for playing contents of augmented reality
JP2020514937A (en) Realization method of augmented reality image using vector
KR20120035321A (en) System and method for playing contents of augmented reality
KR20140078083A (en) Method of manufacturing cartoon contents for augemented reality and apparatus performing the same
CN110349270B (en) Virtual sand table presenting method based on real space positioning
US20190130633A1 (en) Systems and methods for using a cutting volume to determine how to display portions of a virtual object to a user
KR101226727B1 (en) System and method for providing augmented reality service

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170927

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180927

Year of fee payment: 6