KR20120035321A

KR20120035321A - 증강 현실 컨텐츠 재생 시스템 및 방법

Info

Publication number: KR20120035321A
Application number: KR1020100096761A
Authority: KR
Inventors: 김현정; 박새이; 시아오 리우; 홍선희; 한호선; 정진
Original assignee: 에스케이플래닛 주식회사
Priority date: 2010-10-05
Filing date: 2010-10-05
Publication date: 2012-04-16

Abstract

본 발명은, 복수 개의 마커(marker)에 따른 마커조합에 대응하여 특정 증강현실 구현기능을 부여하여 단일 개의 마커에 따른 증강현실 구현 뿐 아니라 복수 개의 마커들에 따른 마커조합에 대해서도 특정 증강현실 기능을 구현함으로써, 마커를 이용한 증강현실 구현의 다양성을 확장하고 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있어 실재감을 향상시킬 수 있는 증강 현실 컨텐츠 재생 시스템 및 방법이 개시되어 있다. 본 발명의 증강 현실 컨텐츠 재생 시스템은, 증강 현실용의 마커(marker)가 포함된 페이지를 갖는 인쇄서적을 촬영한 촬영영상을 분석하여 상기 촬영영상 내에 복수 개의 마커가 존재한다고 판단되면, 증강현실컨텐츠재생장치가 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하여 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 구성을 포함한다.

Description

증강 현실 컨텐츠 재생 시스템 및 방법{SYSTEM AND METHOD FOR PLAYING CONTENTS OF AUGMENTED REALITY}

본 발명은 증강 현실 컨텐츠 재생 시스템 및 방법에 관한 것으로, 더욱 상세하게는 복수 개의 마커(marker)에 따른 마커조합에 대응하여 특정 증강현실 구현기능을 부여하여 단일 개의 마커에 따른 증강현실 구현 뿐 아니라 복수 개의 마커들에 따른 마커조합에 대해서도 특정 증강현실 기능을 구현함으로써, 마커를 이용한 증강현실 구현의 다양성을 확장하고 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있어 실재감을 향상시킬 수 있는 증강 현실 컨텐츠 재생 시스템, 증강현실컨텐츠재생장치 및 증강현실컨텐츠재생장치의 동작 방법에 관한 것이다.

AR(Augmented Reality, 증강현실)은 사용자가 눈으로 보는 현실세계와 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주는 가상현실의 하나이다. 현실세계를 가상세계로 보완해주는 개념인 AR은, 컴퓨터 그래픽으로 만들어진 가상환경을 사용하지만 주역은 현실환경이다. 컴퓨터 그래픽은 현실환경에 필요한 정보를 추가 제공하는 역할을 한다. 사용자가 보고 있는 실사 영상에 3차원 가상영상을 겹침(overlap)으로써 현실환경과 가상화면과의 구분이 모호해지도록 한다는 뜻이다.

이러한 증강현실을 구현하는 방법에는, 인쇄서적의 페이지를 펼쳐 이를 카메라를 통해 촬영하고 촬영된 실시간 영상을 화면에 디스플레이함에 있어서, 페이지 내에 특정 마커(marker)가 기록되어 있음에 따라 촬영된 영상 내에서 특정 마커가 인지되면 해당 마커에 연결된 3차원 그래픽 모델을 실제 영상 즉 페이지를 촬영한 영상 위에 그려주는 방법이 있다. 여기서의 마커란 실제로 2차원 평면 위에 존재하면서, 자신과 연결된 3차원 그래픽모델이 그려질 크기, 방향 및 위치 정보를 제공하는 것을 말한다.

헌데, 전술한 종래의 증강현실 구현 방법은, 1개의 마커에 대응하여 각각 하나의 가상 객체(예 : 3차원 그래픽 모델)가 존재하기 때문에 마커를 이용한 다양한 증강현실 구현에 한계를 가지며, 또한 사용자가 실제 인쇄서적을 움직이지 않고도 그와 상응하는 다양한 증강현실 구현을 원하고 있지만 이를 만족시키고자 하는 시도가 없다는 점에서, 여전히 미흡한 수준이라고 하겠다.

본 발명은 상기한 사정을 감안하여 창출된 것으로서, 본 발명에서 도달하고자 하는 목적은 증강 현실용의 마커(marker)가 포함된 페이지를 갖는 인쇄서적을 촬영한 촬영영상을 분석하여 상기 촬영영상 내에 복수 개의 마커가 존재한다고 판단되면, 증강현실컨텐츠재생장치가 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하여 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 증강 현실 컨텐츠 재생 시스템을 제공하여, 마커를 이용한 증강현실 구현의 다양성을 확장하고 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있어 실재감을 향상시키는데 있다.

본 발명은 상기한 사정을 감안하여 창출된 것으로서, 본 발명에서 도달하고자 하는 다른 목적은 촬영구역에 위치한 인쇄서적의 페이지를 촬영한 촬영영상을 분석하여 상기 페이지 내에 마커를 인지하고, 마커를 인지한 결과 상기 촬영영상 내에 복수 개의 마커가 존재하는지 여부를 판단하여, 상기 판단 결과 상기 페이지 내에 복수 개의 마커가 존재한다고 판단되는 경우 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하고, 상기 증강현실 구현기능을 수행한 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 증강현실컨텐츠재생장치 및 증강현실컨텐츠재생장치의 동작 방법을 제공하여, 마커를 이용한 증강현실 구현의 다양성을 확장하고 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있어 실재감을 향상시키는데 있다.

상기 목적을 달성하기 위한 본 발명의 제 1 관점에 따른 증강 현실 컨텐츠 재생 시스템은, 증강 현실용의 마커(marker)가 포함된 페이지를 갖는 인쇄서적; 및 인쇄서적의 페이지를 촬영한 촬영영상을 분석하여 상기 촬영영상 내에 복수 개의 마커가 존재한다고 판단되면, 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하여 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 증강현실컨텐츠재생장치를 포함한다.

상기 목적을 달성하기 위한 본 발명의 제 2 관점에 따른 증강현실컨텐츠재생장치는, 촬영구역에 위치한 인쇄서적의 페이지를 촬영하는 촬영부; 상기 촬영부를 통해 촬영된 촬영영상을 분석하여 마커(marker)를 인지하는 마커인지부; 및 상기 마커인지부를 통한 인지 결과에 근거하여, 상기 촬영영상 내에 복수 개의 마커가 존재하는 경우 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하고, 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 장치제어부를 포함한다.

바람직하게는, 상기 장치제어부는, 적어도 하나의 마커조합정보 각각에 대응하여 수행하도록 기 설정되는 증강현실 구현기능을 나타내는 마커조합 별 구현기능정보를 기 저장하거나, 또는 외부의 컨텐츠서버로부터 상기 인쇄서적에 대응하는 상기 마커조합 별 구현기능정보를 획득할 수 있다.

바람직하게는, 상기 장치제어부는, 상기 촬영영상 내에 복수 개의 마커가 존재하는 경우 상기 복수 개의 마커를 이용하여 적어도 하나의 마커조합을 도출하고, 도출된 적어도 하나의 마커조합에 대응하는 마커조합정보를 상기 마커조합 별 구현기능정보에서 검색하고, 검색된 마커조합정보에 따른 해당 증강현실 구현기능을 수행할 수 있다.

바람직하게는, 상기 장치제어부는, 상기 촬영영상 내에 존재하는 상기 복수 개의 마커 중 상기 검색된 마커조합정보에 대응하는 마커들을 제외한 나머지 마커가 존재하는 경우, 상기 나머지 마커에 대응하여 기 설정된 증강현실 구현기능을 더 수행할 수 있다.

바람직하게는, 상기 증강현실 구현기능은, 해당 마커조합정보에 대응하여 기 설정된 해당 2D이미지를 표시하는 2D이미지 표시기능 및 기 설정된 해당 3D이미지를 표시하는 3D이미지 표시기능 및 기 설정된 해당 사운드를 재생하는 사운드 출력기능 및 상기 촬영영상을 기 설정된 확대비율에 따라 확대하는 촬영영상 확대기능 및 상기 촬영영상을 기 설정된 축소비율에 따라 축소하는 촬영영상 축소기능 및 상기 촬영영상을 기 설정된 회전값에 따라 회전시키는 촬영영상 회전기능 중 적어도 어느 하나를 포함할 수 있다.

상기 목적을 달성하기 위한 본 발명의 제 3 관점에 따른 증강현실컨텐츠재생장치의 동작 방법은, 촬영구역에 위치한 인쇄서적의 페이지를 촬영한 촬영영상을 분석하여 상기 촬영영상 내에 마커를 인지하는 마커 인지단계; 마커를 인지한 결과 상기 촬영영상 내에 복수 개의 마커가 존재하는지 여부를 판단하는 판단단계; 상기 판단 결과, 상기 촬영영상 내에 복수 개의 마커가 존재한다고 판단되는 경우 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하는 증강현실 구현기능 수행단계; 및 상기 증강현실 구현기능을 수행한 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 컨텐츠 출력단계를 포함한다.

바람직하게는, 상기 인쇄서적에 대응하여 외부의 컨텐츠서버로부터 적어도 하나의 마커조합정보에 대응하여 수행하도록 기 설정되는 증강현실 구현기능을 나타내는 마커조합 별 구현기능정보를 획득하는 단계를 더 포함할 수 있다.

바람직하게는, 상기 증강현실 구현기능 수행단계는, 상기 촬영영상 내에 복수 개의 마커가 존재하는 경우 상기 복수 개의 마커를 이용하여 적어도 하나의 마커조합을 도출하고, 도출된 적어도 하나의 마커조합에 대응하는 마커조합정보를 상기 마커조합 별 구현기능정보에서 검색하고, 검색된 마커조합정보에 따른 해당 증강현실 구현기능을 수행할 수 있다.

바람직하게는, 상기 증강현실 구현기능 수행단계는, 상기 촬영영상 내에 존재하는 상기 복수 개의 마커 중 상기 검색된 마커조합정보에 대응하는 마커들을 제외한 나머지 마커가 존재하는 경우, 상기 나머지 마커에 대응하여 기 설정된 증강현실 구현기능을 더 수행할 수 있다.

이에, 본 발명의 증강 현실 컨텐츠 재생 시스템 및 방법에 의하면, 복수 개의 마커(marker)에 따른 마커조합에 대응하여 특정 증강현실 구현기능을 부여하여 단일 개의 마커에 따른 증강현실 구현 뿐 아니라 복수 개의 마커들에 따른 마커조합에 대해서도 특정 증강현실 기능을 구현함으로써, 마커를 이용한 증강현실 구현의 다양성을 확장하고 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있어 실재감을 향상시킬 수 있다.

도 1은 본 발명의 바람직한 실시예에 따른 증강 현실 컨텐츠 재생 시스템의 제어 구성도이다.
도 2는 본 발명의 바람직한 실시예에 따른 증강현실컨텐츠재생장치 의 제어 블록도이다.
도 3은 본 발명의 바람직한 실시예에 따른 증강현실컨텐츠재생장치의 동작 방법을 나타내는 흐름도이다.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대하여 설명한다.

도 1은 본 발명의 바람직한 실시예에 따른 증강 현실 컨텐츠 재생 시스템을 도시한 도면이다.

도 1에 도시된 바와 같이, 본 발명에 따른 증강 현실 컨텐츠 재생 시스템은, 증강 현실용의 마커(marker)가 포함된 페이지를 갖는 인쇄서적(10)과, 인쇄서적(10)의 페이지를 촬영한 촬영영상을 분석하여 상기 촬영영상 내에 복수 개의 마커가 존재한다고 판단되면, 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하여 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 증강현실컨텐츠재생장치(100)를 포함한다.

인쇄서적(10)은, 텍스트 및/또는 그림이 포함되는 적어도 하나의 페이지로 이루어진 오프라인 도서로서, 페이지에는 적어도 하나의 증강 현실용의 마커(marker)가 포함될 수 있다.

여기서, 증강 현실용의 마커를 설명하면, 최소 크기가 4cm * 4cm 정사각형이며 테두리로 둘러싸여 있으며 테두리 안의 이미지는 사용자가 다양한 이미지, 글자 등으로 형상화할 수 있다. 이때, 마커 테두리 및 마커 이미지는 원색이며, 바탕으로 흰색으로 해야 해당 마커의 인식율을 높일 수 있다

여기서, 인쇄서적(10)은, 사용자에 의해 특정 페이지가 펼쳐진 채로 증강현실컨텐츠재생장치(100)에 의해 촬영되는 특정 촬영구역에 놓이게 될 것이다. 그리고, 인쇄서적(10)은, 도 1에 도시된 바와 같이, 복수 개의 마커(예 : 2a, 2b, 2c)를 포함하는 페이지를 포함할 수 있다.

증강현실컨텐츠재생장치(100)는, 특정 촬영구역에 위치한 인쇄서적(10)의 펼쳐진 페이지를 촬영하고, 촬영한 촬영영상을 분석하여 상기 촬영영상 내에 복수 개의 마커가 존재한다고 판단되는 경우 해당 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하고, 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력한다.

이러한 증강현실컨텐츠재생장치(100)는, 적어도 하나의 마커조합정보 각각에 대응하여 수행하도록 기 설정되는 증강현실 구현기능을 나타내는 마커조합 별 구현기능정보를 기 저장하고 있을 수 있다.

또는, 증강현실컨텐츠재생장치(100)는, 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상을 분석하여 특정 마커를 통해 인지된 해당 인쇄서적(10)에 대한 식별정보를 토대로 외부의 컨텐츠서버(200)로부터 해당 인쇄서적(10)에 대응하는 마커조합 별 구현기능정보를 획득하는 것도 가능하다.

물론, 증강현실컨텐츠재생장치(100)는, 사용자의 조작에 따라 해당 인쇄서적(10)에 대응하는 마커조합 별 구현기능정보를 외부의 컨텐츠서버(200)로부터 획득하는 것도 가능할 것이다.

이처럼, 증강현실컨텐츠재생장치(100)에서 인쇄서적(10)에 대응하는 특정 정보를 컨텐츠서버(200)로부터 획득하는 과정은, 기존의 증강현실 서비스에서와 대응되므로 구체적인 획득 절차에 대한 설명은 생략하도록 하겠다.

이하에서는, 도 2를 참조하여 본 발명에 따른 증강현실컨텐츠재생장치(100)를 보다 구체적으로 설명하도록 한다.

본 발명에 따른 증강현실컨텐츠재생장치(100)는, 촬영구역에 위치한 인쇄서적(10)의 페이지를 촬영하는 촬영부(110)와, 촬영부(110)를 통해 촬영된 촬영영상을 분석하여 마커(marker)를 인지하는 마커인지부(130)와, 마커인지부(130)를 통한 인지 결과에 근거하여, 상기 촬영영상 내에 복수 개의 마커가 존재하는 경우 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하고, 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력부(120)를 통해 출력하는 장치제어부(140)를 포함한다.

촬영부(110)는, 지정된 촬영구역을 촬영하여 해당 촬영구역에 위치한 인쇄서적(10)의 페이지를 촬영한 촬영영상을 마커인지부(130) 및/또는 장치제어부(140)로 제공한다. 이러한 촬영부(110)는, 카메라 및 캠(Cam) 및 스캐너 등과 같이 영상을 촬영/인식하여 촬영영상을 제공할 수 있는 형태의 기능장치이면 가능할 것이다.

마커인지부(130)는, 촬영부(110)를 통해 촬영된 촬영영상을 분석하여 촬영영상 내의 마커를 인지함으로써 인지 결과를 장치제어부(130)로 제공한다.

장치제어부(140)는, 마커인지부(130)를 통한 인지 결과에 근거하여 금번 촬영된 실시간 촬영영상 즉 인쇄서적(10)의 촬영된 해당 페이지 내에 복수 개의 마커가 존재하는지 여부를 판단한다.

예를 들어, 도 1에 도시된 바와 같이 복수 개의 마커(예 : 2a, 2b, 2c)를 포함하는 인쇄서적(10)의 페이지가 촬영된 경우, 장치제어부(140)는, 촬영된 인쇄서적(10)의 해당 페이지 내에 복수 개의 마커(2a, 2b, 2c)가 존재하는 것으로 판단할 것이다.

장치제어부(140)는, 촬영영상 내에 복수 개의 마커가 존재한다고 판단되면 즉 인쇄서적(10)의 페이지 내에 복수 개의 마커가 존재한다고 판단되면, 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하고, 수행결과를 촬영영상에 적용한 증강현실 컨텐츠를 출력부(120)를 통해 출력한다. 여기서, 출력부(120)는 디스플레이부 및 스피커 중 적어도 어느 하나를 포함할 수 있다.

보다 구체적으로 설명하면, 장치제어부(140)는, 적어도 하나의 마커조합정보 각각에 대응하여 수행하도록 기 설정되는 증강현실 구현기능을 나타내는 마커조합 별 구현기능정보를 기 저장하고 있을 수 있다.

여기서, 마커조합 별 구현기능정보는, 기 정의된 복수 개의 마커들로 구성된 마커조합 별로 해당 마커조합에 대응하여 수행하도록 기 설정되는 증강현실 구현기능이 무엇인지를 나타내는 정보이다.

여기서, 증강현실 구현기능은, 해당 마커조합정보에 대응하여 기 설정된 해당 2D이미지를 표시하는 2D이미지 표시기능 및 기 설정된 해당 3D이미지를 표시하는 3D이미지 표시기능 및 기 설정된 해당 사운드를 재생하는 사운드 출력기능 및 해당 촬영영상을 기 설정된 확대비율에 따라 확대하는 촬영영상 확대기능 및 해당 촬영영상을 기 설정된 축소비율에 따라 축소하는 촬영영상 축소기능 및 해당 촬영영상을 기 설정된 회전값에 따라 회전시키는 촬영영상 회전기능 중 적어도 어느 하나를 포함할 수 있다.

또는, 장치제어부(140)는, 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상을 분석하여 특정 마커를 통해 인지된 해당 인쇄서적(10)에 대한 식별정보를 토대로 외부의 컨텐츠서버(200)로부터 해당 인쇄서적(10)에 대응하는 마커조합 별 구현기능정보를 획득하는 것도 가능하다.

즉, 마커인지부(130)를 통해 촬영영상을 분석하여 인지한 해당 인쇄서적(10)에 대한 식별정보를 토대로 장치제어부(140)는, 외부의 컨텐츠서버(200)에 접속하여 해당 인쇄서적(10)에 대응하여 컨텐츠서버(200) 내에서 저장/관리되는 해당 마커조합 별 구현기능정보를 획득하는 것도 가능할 것이다.

물론, 장치제어부(140)는, 사용자의 조작에 따라 해당 인쇄서적(10)에 대응하는 마커조합 별 구현기능정보를 외부의 컨텐츠서버(200)로부터 획득하는 것도 가능할 것이다.

이러한 장치제어부(140)는, 촬영영상 내에 복수 개의 마커가 존재한다고 판단되면 즉 인쇄서적(10)의 페이지 내에 복수 개의 마커(예 : 2a, 2b, 2c)가 존재한다고 판단되면, 마커조합 별 구현기능정보 중 해당 복수 개의 마커(예 : 2a, 2b, 2c)에 따른 마커조합에 대응하는 마커조합정보를 검색한다.

예를 들어, 장치제어부(140)는, 복수 개의 마커(예 : 2a, 2b, 2c)를 이용하여 적어도 하나의 마커조합을 도출한다. 이에, 장치제어부(140)는, 마커(2a) 및 마커(2b)에 해당되는 마커조합1, 마커(2a) 및 마커(2c)에 해당되는 마커조합2, 마커(2b) 및 마커(2c)에 해당되는 마커조합3, 마커(2a) 및 마커(2b) 및 마커(2c)에 해당되는 마커조합4를 도출할 수 있다.

그리고, 장치제어부(140)는, 도출된 적어도 하나의 마커조합1,2,3,4에 대응하는 마커조합정보를 마커조합 별 구현기능정보에서 검색한다.

이에, 마커(2a) 및 마커(2b) 및 마커(2c)에 해당되는 마커조합4에 따른 마커조합정보가 마커조합 별 구현기능정보에서 검색된 경우라면, 장치제어부(140)는 마커조합 별 구현기능정보에 근거하여 상기 검색된 마커조합정보에 대응하는 해당 증강현실 구현기능을 수행한다. 즉, 장치제어부(140)는 검색된 마커조합정보(예 : 2a,2b,2c)에 대응하는 해당 증강현실 구현기능, 예를 들면 기 설정된 특정 사운드를 재생하는 사운드 출력기능을 수행할 수 있다.

그리고, 장치제어부(140)는, 기 설정된 증강현실 구현기능을 수행한 수행결과를 촬영영상에 적용한 증강현실 컨텐츠를 출력부(120)를 통해 출력한다.

다시 말해, 장치제어부(140)는, 마커조합정보(예 : 2a,2b,2c)에 대응하는 해당 증강현실 구현기능 예를 들면 기 설정된 특정 사운드를 재생하는 사운드 출력기능을 수행하여, 금번 촬영부(110)를 통해 촬영된 촬영영상 즉 인쇄서적(10)의 페이지에 해당하는 촬영영상에 수행결과에 해당하는 사운드를 적용한 증강현실 컨텐츠(예 : 촬영영상+사운드)를 출력부(120)를 통해 출력할 수 있다.

한편, 마커(2a) 및 마커(2b)에 해당되는 마커조합1에 해당되는 마커조합정보가 마커조합 별 구현기능정보에서 검색된 경우라면, 장치제어부(140)는 마커조합 별 구현기능정보에 근거하여 상기 검색된 마커조합정보에 대응하는 해당 증강현실 구현기능을 수행한다. 즉, 장치제어부(140)는 검색된 마커조합정보(예 : 2a,2b)에 대응하는 해당 증강현실 구현기능, 예를 들면 촬영영상을 기 설정된 확대비율에 따라 확대하는 촬영영상 확대기능을 수행할 수 있다.

이 경우, 장치제어부(140)는, 촬영영상 내에 존재하는 복수 개의 마커(예 : 2a, 2b, 2c) 중 상기 검색된 마커조합정보에 대응하는 마커들(예 : 2a,2b)을 제외한 나머지 마커(예 : 2c)가 존재하므로, 나머지 마커(예 : 2c)에 대응하여 기 설정된 증강현실 구현기능을 더 수행할 수 있다.

즉, 장치제어부(140)는, 마커조합으로 판단되는 마커(2a) 및 마커(2b)를 제외한 나머지 마커(2c)에 대응하여, 단일 개의 마커(2c)에 대응하는 해당 증강현실 구현기능을 더 수행할 수도 있다.

예를 들어, 단일 개의 마커(2c)에 대응하는 해당 증강현실 구현기능이 특정 3D이미지를 표시하는 3D이미지 표시기능이라면, 장치제어부(140)는 검색된 마커조합정보(예 : 2a,2b)에 대응하는 해당 증강현실 구현기능 즉 촬영영상을 기 설정된 확대비율에 따라 확대하는 촬영영상 확대기능 및 단일 개의 마커(2c)에 대응하는 해당 증강현실 구현기능 즉 특정 3D이미지를 표시하는 3D이미지 표시기능을 모두 수행할 수 있다.

이에, 장치제어부(140)는, 마커조합정보(예 : 2a,2b)에 대응하는 해당 증강현실 구현기능 예를 들면 금번 촬영부(110)를 통해 촬영된 촬영영상 즉 인쇄서적(10)의 페이지에 해당하는 촬영영상을 기 설정된 확대비율(예 : 2배)에 따라 확대하는 촬영영상 확대기능 및 단일 개의 마커(2c)에 대응하는 해당 증강현실 구현기능 즉 특정 3D이미지를 표시하는 3D이미지 표시기능을 수행하여, 촬영영상에 적용한 증강현실 컨텐츠(예 : 2배 확대된 촬영영상+3D이미지)를 출력부(120)를 통해 출력할 수 있다.

이상에서 설명한 바와 같이, 본 발명에 따른 증강 현실 컨텐츠 재생 시스템은, 복수 개의 마커(marker)에 따른 마커조합에 대응하여 특정 증강현실 구현기능을 부여하여 단일 개의 마커에 따른 증강현실 구현 뿐 아니라 복수 개의 마커들에 따른 마커조합에 대해서도 특정 증강현실 기능을 구현함으로써, 마커를 이용한 증강현실 구현의 다양성을 확장하고 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있어 실재감을 향상시킬 수 있다.

이하에서는 도 3을 참조하여, 본 발명의 바람직한 실시예에 따른 증강현실컨텐츠재생장치의 동작방법을 설명하도록 한다. 여기서, 설명의 편의를 위해 전술한 도 1 내지 도 2에 도시된 구성은 해당 참조번호를 언급하여 설명하겠다.

본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 지정된 촬영구역을 촬영하여 해당 촬영구역에 위치한 인쇄서적(10)의 페이지를 촬영한다(S100).

이에, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 촬영된 촬영영상을 분석하여 촬영영상 내의 마커(marker)를 인지함으로써 인쇄서적(10)의 페이지 내에 존재하는 마커를 인지한다(S110).

이러한 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 적어도 하나의 마커조합정보 각각에 대응하여 수행하도록 기 설정되는 증강현실 구현기능을 나타내는 마커조합 별 구현기능정보를 기 저장하고 있을 수 있다.

또는, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 인쇄서적(10)의 펼쳐진 페이지를 촬영한 촬영영상을 분석하여 특정 마커를 통해 인지된 해당 인쇄서적(10)에 대한 식별정보를 토대로 외부의 컨텐츠서버(200)로부터 해당 인쇄서적(10)에 대응하는 마커조합 별 구현기능정보를 획득하는 것도 가능하다(S120).

즉, 촬영영상을 분석하여 인지한 해당 인쇄서적(10)에 대한 식별정보를 토대로 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 외부의 컨텐츠서버(200)에 접속하여 해당 인쇄서적(10)에 대응하여 컨텐츠서버(200) 내에서 저장/관리되는 해당 마커조합 별 구현기능정보를 획득하는 것도 가능할 것이다.

물론, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 사용자의 조작에 따라 해당 인쇄서적(10)에 대응하는 마커조합 별 구현기능정보를 외부의 컨텐츠서버(200)로부터 획득하는 것도 가능할 것이다.

그리고, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, S110단계의 인지 결과에 근거하여 금번 촬영된 실시간 촬영영상 즉 인쇄서적(10)의 촬영된 해당 페이지 내에 복수 개의 마커가 존재하는지 여부를 판단한다(S130).

이에 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 촬영영상 내에 복수 개의 마커가 존재한다고 판단되면 즉 인쇄서적(10)의 페이지 내에 복수 개의 마커(예 : 2a, 2b, 2c)가 존재한다고 판단되면, 마커조합 별 구현기능정보 중 해당 복수 개의 마커(예 : 2a, 2b, 2c)에 따른 마커조합에 대응하는 마커조합정보를 검색한다(S140).

예를 들어, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 복수 개의 마커(예 : 2a, 2b, 2c)를 이용하여 적어도 하나의 마커조합을 도출한다. 이에, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 마커(2a) 및 마커(2b)에 해당되는 마커조합1, 마커(2a) 및 마커(2c)에 해당되는 마커조합2, 마커(2b) 및 마커(2c)에 해당되는 마커조합3, 마커(2a) 및 마커(2b) 및 마커(2c)에 해당되는 마커조합4를 도출할 수 있다.

그리고, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 도출된 적어도 하나의 마커조합1,2,3,4에 대응하는 마커조합정보를 마커조합 별 구현기능정보에서 검색한다.

이에, 마커(2a) 및 마커(2b) 및 마커(2c)에 해당되는 마커조합4에 따른 마커조합정보가 마커조합 별 구현기능정보에서 검색된 경우라면, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 마커조합 별 구현기능정보에 근거하여 상기 검색된 마커조합정보에 대응하는 해당 증강현실 구현기능을 수행한다(S150). 즉, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 검색된 마커조합정보(예 : 2a,2b,2c)에 대응하는 해당 증강현실 구현기능, 예를 들면 기 설정된 특정 사운드를 재생하는 사운드 출력기능을 수행할 수 있다.

그리고, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 기 설정된 증강현실 구현기능을 수행한 수행결과를 촬영영상에 적용한 증강현실 컨텐츠를 출력부(120)를 통해 출력한다(S160).

다시 말해, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 마커조합정보(예 : 2a,2b,2c)에 대응하는 해당 증강현실 구현기능 예를 들면 기 설정된 특정 사운드를 재생하는 사운드 출력기능을 수행하여, 금번 촬영된 촬영영상 즉 인쇄서적(10)의 페이지에 해당하는 촬영영상에 수행결과에 해당하는 사운드를 적용한 증강현실 컨텐츠(예 : 촬영영상+사운드)를 출력부(120)를 통해 출력할 수 있다.

한편, 마커(2a) 및 마커(2b)에 해당되는 마커조합1에 해당되는 마커조합정보가 마커조합 별 구현기능정보에서 검색된 경우라면, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, S150단계에서 마커조합 별 구현기능정보에 근거하여 상기 검색된 마커조합정보에 대응하는 해당 증강현실 구현기능을 수행한다. 즉, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, S150단계에서 검색된 마커조합정보(예 : 2a,2b)에 대응하는 해당 증강현실 구현기능, 예를 들면 촬영영상을 기 설정된 확대비율에 따라 확대하는 촬영영상 확대기능을 수행할 수 있다.

이 경우, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 촬영영상 내에 존재하는 복수 개의 마커(예 : 2a, 2b, 2c) 중 상기 검색된 마커조합정보에 대응하는 마커들(예 : 2a,2b)을 제외한 나머지 마커(예 : 2c)가 존재하므로, 나머지 마커(예 : 2c)에 대응하여 기 설정된 증강현실 구현기능을 더 수행할 수 있다.

즉, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 마커조합으로 판단되는 마커(2a) 및 마커(2b)를 제외한 나머지 마커(2c)에 대응하여, 단일 개의 마커(2c)에 대응하는 해당 증강현실 구현기능을 더 수행할 수도 있다.

예를 들어, 단일 개의 마커(2c)에 대응하는 해당 증강현실 구현기능이 특정 3D이미지를 표시하는 3D이미지 표시기능이라면, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, S150단계에서 검색된 마커조합정보(예 : 2a,2b)에 대응하는 해당 증강현실 구현기능 즉 촬영영상을 기 설정된 확대비율에 따라 확대하는 촬영영상 확대기능 및 단일 개의 마커(2c)에 대응하는 해당 증강현실 구현기능 즉 특정 3D이미지를 표시하는 3D이미지 표시기능을 모두 수행할 수 있다.

이에, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 마커조합정보(예 : 2a,2b)에 대응하는 해당 증강현실 구현기능 예를 들면 금번 촬영된 촬영영상 즉 인쇄서적(10)의 페이지에 해당하는 촬영영상을 기 설정된 확대비율(예 : 2배)에 따라 확대하는 촬영영상 확대기능 및 단일 개의 마커(2c)에 대응하는 해당 증강현실 구현기능 즉 특정 3D이미지를 표시하는 3D이미지 표시기능을 수행하여, S160단계에서 촬영영상에 적용한 증강현실 컨텐츠(예 : 2배 확대된 촬영영상+3D이미지)를 출력부(120)를 통해 출력할 수 있다.

한편, 전술의 S130단계에서 복수 개의 마커가 존재하지 않고 단일 개의 마커가 존재한다고 판단되면, 본 발명에 따른 증강현실컨텐츠재생장치(100)의 동작 방법은, 해당 단일 개의 마커에 대응하여 기 설정된 증강현실 구현기능을 수행하고(S135), S160단계에서 수행결과를 촬영영상에 적용한 증강현실 컨텐츠를 출력부(120)를 통해 출력할 것이다.

이상에서 설명한 바와 같이, 본 발명에 따른 증강현실컨텐츠재생장치 및 증강현실컨텐츠재생장치의 동작 방법은, 복수 개의 마커(marker)에 따른 마커조합에 대응하여 특정 증강현실 구현기능을 부여하여 단일 개의 마커에 따른 증강현실 구현 뿐 아니라 복수 개의 마커들에 따른 마커조합에 대해서도 특정 증강현실 기능을 구현함으로써, 마커를 이용한 증강현실 구현의 다양성을 확장하고 실제 인쇄서적을 움직이지 않고도 다양한 사용자 Interaction을 제공할 수 있어 실재감을 향상시킬 수 있다.

지금까지 본 발명을 바람직한 실시 예를 참조하여 상세히 설명하였지만, 본 발명이 상기한 실시 예에 한정되는 것은 아니며, 이하의 특허청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 또는 수정이 가능한 범위까지 본 발명의 기술적 사상이 미친다 할 것이다.

복수 개의 마커(marker)에 따른 마커조합에 대응하여 특정 증강현실 구현기능을 부여하여 단일 개의 마커에 따른 증강현실 구현 뿐 아니라 복수 개의 마커들에 따른 마커조합에 대해서도 특정 증강현실 기능을 구현하는 증강 현실 컨텐츠 재생 시스템 및 방법을 적용할 경우, 마커 활용도 및 증강현실 구현의 다양성 확장, 사용자 만족도 측면에서 매우 큰 진보를 가져올 수 있으며, 적용되는 증강현실컨텐츠재생장치 및 서비스 솔루션의 시판 또는 영업의 가능성이 충분할 뿐만 아니라 현실적으로 명백하게 실시할 수 있다.

10 : 인쇄서적
100 : 증강현실컨텐츠재생장치
200 : 컨텐츠서버

Claims

증강 현실용의 마커(marker)가 포함된 페이지를 갖는 인쇄서적; 및
상기 인쇄서적의 페이지를 촬영한 촬영영상을 분석하여 상기 촬영영상 내에 복수 개의 마커가 존재한다고 판단되면, 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하여 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 증강현실컨텐츠재생장치를 포함하는 것을 특징으로 하는 증강 현실 컨텐츠 재생 시스템.
촬영구역에 위치한 인쇄서적의 페이지를 촬영하는 촬영부;
상기 촬영부를 통해 촬영된 촬영영상을 분석하여 마커(marker)를 인지하는 마커인지부; 및
상기 마커인지부를 통한 인지 결과에 근거하여, 상기 촬영영상 내에 복수 개의 마커가 존재하는 경우 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하고, 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 장치제어부를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치.
제 2 항에 있어서,
상기 장치제어부는,
적어도 하나의 마커조합정보 각각에 대응하여 수행하도록 기 설정되는 증강현실 구현기능을 나타내는 마커조합 별 구현기능정보를 기 저장하거나, 또는 외부의 컨텐츠서버로부터 상기 인쇄서적에 대응하는 상기 마커조합 별 구현기능정보를 획득하는 것을 특징으로 하는 증강현실컨텐츠재생장치.
제 3 항에 있어서,
상기 장치제어부는,
상기 촬영영상 내에 복수 개의 마커가 존재하는 경우 상기 복수 개의 마커를 이용하여 적어도 하나의 마커조합을 도출하고, 도출된 적어도 하나의 마커조합에 대응하는 마커조합정보를 상기 마커조합 별 구현기능정보에서 검색하고, 검색된 마커조합정보에 따른 해당 증강현실 구현기능을 수행하는 것을 특징으로 하는 증강현실컨텐츠재생장치.
제 4 항에 있어서,
상기 장치제어부는,
상기 촬영영상 내에 존재하는 상기 복수 개의 마커 중 상기 검색된 마커조합정보에 대응하는 마커들을 제외한 나머지 마커가 존재하는 경우, 상기 나머지 마커에 대응하여 기 설정된 증강현실 구현기능을 더 수행하는 것을 특징으로 하는 증강현실컨텐츠재생장치.
제 2 항 내지 제 5 항 중 어느 한 항에 있어서,
상기 증강현실 구현기능은,
해당 마커조합정보에 대응하여 기 설정된 해당 2D이미지를 표시하는 2D이미지 표시기능 및 기 설정된 해당 3D이미지를 표시하는 3D이미지 표시기능 및 기 설정된 해당 사운드를 재생하는 사운드 출력기능 및 상기 촬영영상을 기 설정된 확대비율에 따라 확대하는 촬영영상 확대기능 및 상기 촬영영상을 기 설정된 축소비율에 따라 축소하는 촬영영상 축소기능 및 상기 촬영영상을 기 설정된 회전값에 따라 회전시키는 촬영영상 회전기능 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치.
촬영구역에 위치한 인쇄서적의 페이지를 촬영한 촬영영상을 분석하여 상기 촬영영상 내에 마커를 인지하는 마커 인지단계;
마커를 인지한 결과 상기 촬영영상 내에 복수 개의 마커가 존재하는지 여부를 판단하는 판단단계;
상기 판단 결과, 상기 촬영영상 내에 복수 개의 마커가 존재한다고 판단되는 경우 상기 복수 개의 마커에 따른 마커조합정보에 대응하여 기 설정된 증강현실 구현기능을 수행하는 증강현실 구현기능 수행단계; 및
상기 증강현실 구현기능을 수행한 수행결과를 상기 촬영영상에 적용한 증강현실 컨텐츠를 출력하는 컨텐츠 출력단계를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.
제 7 항에 있어서,
상기 인쇄서적에 대응하여 외부의 컨텐츠서버로부터 적어도 하나의 마커조합정보에 대응하여 수행하도록 기 설정되는 증강현실 구현기능을 나타내는 마커조합 별 구현기능정보를 획득하는 단계를 더 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.
제 8 항에 있어서,
상기 증강현실 구현기능 수행단계는,
상기 촬영영상 내에 복수 개의 마커가 존재하는 경우 상기 복수 개의 마커를 이용하여 적어도 하나의 마커조합을 도출하고, 도출된 적어도 하나의 마커조합에 대응하는 마커조합정보를 상기 마커조합 별 구현기능정보에서 검색하고, 검색된 마커조합정보에 따른 해당 증강현실 구현기능을 수행하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.
제 9 항에 있어서,
상기 증강현실 구현기능 수행단계는,
상기 촬영영상 내에 존재하는 상기 복수 개의 마커 중 상기 검색된 마커조합정보에 대응하는 마커들을 제외한 나머지 마커가 존재하는 경우, 상기 나머지 마커에 대응하여 기 설정된 증강현실 구현기능을 더 수행하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.
제 7 항 또는 제 10 항에 있어서,
상기 증강현실 구현기능은,
해당 마커조합정보에 대응하여 기 설정된 해당 2D이미지를 표시하는 2D이미지 표시기능 및 기 설정된 해당 3D이미지를 표시하는 3D이미지 표시기능 및 기 설정된 해당 사운드를 재생하는 사운드 출력기능 및 상기 촬영영상을 기 설정된 확대비율에 따라 확대하는 촬영영상 확대기능 및 상기 촬영영상을 기 설정된 축소비율에 따라 축소하는 촬영영상 축소기능 및 상기 촬영영상을 기 설정된 회전값에 따라 회전시키는 촬영영상 회전기능 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 증강현실컨텐츠재생장치의 동작 방법.