KR101152919B1 - 증강 현실을 구현하는 방법 및 이를 이용하는 장치 - Google Patents

증강 현실을 구현하는 방법 및 이를 이용하는 장치 Download PDF

Info

Publication number
KR101152919B1
KR101152919B1 KR1020080117076A KR20080117076A KR101152919B1 KR 101152919 B1 KR101152919 B1 KR 101152919B1 KR 1020080117076 A KR1020080117076 A KR 1020080117076A KR 20080117076 A KR20080117076 A KR 20080117076A KR 101152919 B1 KR101152919 B1 KR 101152919B1
Authority
KR
South Korea
Prior art keywords
camera
digital marker
augmented reality
marker
size
Prior art date
Application number
KR1020080117076A
Other languages
English (en)
Other versions
KR20090087807A (ko
Inventor
이종원
Original Assignee
세종대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 세종대학교산학협력단 filed Critical 세종대학교산학협력단
Publication of KR20090087807A publication Critical patent/KR20090087807A/ko
Application granted granted Critical
Publication of KR101152919B1 publication Critical patent/KR101152919B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/24—Aligning, centring, orientation detection or correction of the image
    • G06V10/245—Aligning, centring, orientation detection or correction of the image by locating a pattern; Special marks for positioning

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 적응형 디지털 마커를 이용한 증강 현실 구현 방법 및 이를 이용하는 장치에 관한 것이다. 본 발명의 증강 현실 구현 방법은 디지털 마커를 생성하고 상기 생성된 디지털 마커가 표시되도록 하는 단계와, 카메라가 탑재된 사용자 단말로부터 상기 표시된 디지털 마커의 촬영 결과에 따라 추정된 상기 카메라의 위치 정보를 전송받는 단계와, 상기 전송받은 카메라의 위치 정보에 따라 상기 디지털 마커의 크기 또는 위치를 변경하는 단계를 포함한다. 이러한 본 발명에 의하면, 디스플레이부에 표시되는 디지털 마커와 사용자 간의 위치 및 거리에 따라 실시간으로 디지털 마커의 위치 및 크기가 변경됨으로써, 보다 정확하고 융통성 있는 증강현실을 구현할 수 있다는 장점이 있다.
디지털 마커, 증강 현실, 카메라, 사용자 단말, 디스플레이이, 가상

Description

증강 현실을 구현하는 방법 및 이를 이용하는 장치{METHOD FOR IMPLEMENTING AUGMENTED REALITY}
본 발명은 증강 현실을 구현하는 방법 및 이를 이용하는 장치에 관한 것으로서, 적응형 디지털 마커를 이용한 증강 현실 구현 방법 및 이를 이용하는 장치에 관한 것이다.
본 발명은 서울시 산학연 협력사업, 기술기반 구축사업의 일환으로 수행한 연구로부터 도출된 것이다[과제고유번호: 10557, 연구과제명: 차세대 PMP 콘텐츠산업 클러스터 사업].
증강현실(增强現實: Augmented Reality)이란 사용자가 눈으로 보는 현실세계와 부가정보를 갖는 가상세계를 합쳐 새로운 환경을 생성한다. 현실환경과 가상환경을 융합하는 증강현실 시스템은 1990년대 후반부터 미국?일본을 중심으로 연구?개발이 진행되고 있다. 현실세계를 가상세계로 보완해주는 개념인 증강현실은 컴 퓨터 그래픽으로 만들어진 가상환경을 사용하지만 주역은 현실환경이다. 컴퓨터 그래픽은 현실환경에 필요한 정보를 추가 제공하는 역할을 한다. 사용자가 보고 있는 실사 영상에 3차원 가상영상을 정합함(register)으로써 현실환경과 가상환경과의 구분이 모호해지도록 한다는 뜻이다. 가상현실기술은 가상환경에 사용자를 몰입하게 하여 실제환경을 볼 수 없다. 하지만 실제환경과 가상의 객체가 혼합된 증강현실기술은 사용자가 실제환경을 볼 수 있게 하여 보다 나은 현실감을 제공한다.
증강현실 기술에 대한 연구가 시작된 이래 다양한 분야에서 이 기술을 응용하려는 연구가 이어져왔고, 최근 게임 분야에서도 이 기술을 접목하려는 연구가 활발히 이루어지고 있다. 최근 휴대폰, PDA(personal digital assistants), UMPC(ultra mobile personal computer) 등 모바일기기의 컴퓨팅 능력 향상 및 무선 네트워크 장치의 발달로 핸드헬드 증강현실 시스템이 가능해졌다. 이러한 시스템이 가능해지면서 모바일기기를 사용한 증강현실 게임이 다수 개발되었다. 그리고 모바일기기의 보급이 매우 빠르게 보편화 되어 증강현실 게임을 접할 수 있는 환경이 조성되고 있는 상황이다. 하지만 부족한 콘텐츠 수로 인해 게임 유저들의 관심을 이끌지 못하고 있다.
이미 유럽과 북미에선 오래전부터 대중화되었지만 국내에선 몇 년 전부터 새로운 놀이문화로 자리 잡은 보드게임은 기존 컴퓨터 게임 유저들을 수용할 수 있는 양질의 콘텐츠를 많이 보유하고 있다. 이러한 콘텐츠를 핸드헬드 증강현실 시스템 기반으로 새롭게 전환한다면 부족한 증강현실 게임 콘텐츠 수를 확충할 수 있고, 게임 유저들에게는 증강현실 기술이 새로운 게임 기술로써 관심과 흥미를 불러일으 킬 수 있으나, 아직까지 이와 같은 증강현실 기술이 보드게임에 많이 활용되지 못하고 있는 것이 현실이다.
또한, 기존의 증강현실 응용시스템에서는 동일한 형태와 크기의 물리적인 마커를 실사영상으로부터 입력받아 해당 마커를 인지하고, 그에 따른 마커의 위치, 방향 등을 영상입력장치로부터의 상대적인 데이터로 계산하여 가상의 개체가 보여질 포즈 및 위치를 예측하여 가상 개체를 실사영상에 정합하는 방식을 사용했는데, 이 방식에서는 가상 개체를 투영하기 위해서는 반드시 그에 부합되는 물리적인 마커가 반드시 하나 이상 필요하고 유동적으로 마커 정보를 변경할 수 없다는 단점이 있다. 또한 마커 영상을 입력받는 영상입력장치의 위치가 변경되어도 마커의 위치와 크기가 고정되어 가상 개체가 부정확하게 증강되는 단점이 있다.
따라서 본 발명은 마커 영상을 입력받는 영상입력장치(예: 카메라)의 위치가 변경됨에 따라 마커의 위치와 크기도 변경되어 가상 개체가 정확하게 증강되도록 하는 것을 목적으로 한다.
본 발명의 목적들은 앞에서 언급한 목적으로 제한되지 않는다. 본 발명의 다른 목적 및 장점들은 아래 설명에 의해 더욱 분명하게 이해될 것이다.
이와 같은 목적을 달성하기 위한 본 발명은 증강 현실 제공 장치에서 증강 현실을 구현하는 방법에 있어서, 디지털 마커를 생성하고 상기 생성된 디지털 마커가 표시되도록 하는 단계와, 카메라가 탑재된 사용자 단말로부터 상기 표시된 디지털 마커의 촬영 결과에 따라 추정된 상기 카메라의 위치 정보를 전송받는 단계와, 상기 전송받은 카메라의 위치 정보에 따라 상기 디지털 마커의 크기 또는 위치를 변경하는 단계를 포함하는 것을 일 특징으로 한다.
또한 본 발명은 카메라가 탑재된 사용자 단말에서 증강 현실을 구현하는 방법에 있어서, 증강 현실 제공 장치에 의해 표시된 디지털 마커에 대한 크기 및 위치 정보를 전송받는 단계와, 상기 표시된 디지털 마커에 대한 상기 카메라의 촬영 결과와 상기 디지털 마커에 대한 크기 및 위치 정보를 기반으로 상기 카메라의 위치 정보를 추정하는 단계와, 상기 추정된 카메라의 위치 정보를 상기 증강 현실 제 공 장치로 전송하는 단계를 포함하는 것을 다른 특징으로 한다.
또한 본 발명은 증강 현실을 제공하는 장치에 있어서, 디지털 마커를 생성하는 마커 생성부와, 상기 생성된 디지털 마커가 표시되도록 하는 표시부와, 카메라가 탑재된 사용자 단말과 통신하는 통신부와, 상기 표시된 디지털 마커를 상기 카메라가 촬영한 결과에 따라 추정된 상기 카메라의 위치 정보를 상기 통신부를 통해 상기 사용자 단말로부터 전송받고, 상기 전송받은 카메라의 위치 정보에 따라 상기 마커 생성부를 제어하여 상기 디지털 마커의 크기 또는 위치를 변경하는 제어부를 포함하는 것을 또 다른 특징으로 한다.
또한 본 발명은 증강 현실 제공 장치와 통신하는 통신부와, 상기 증강 현실 제공 장치에 의해 표시된 디지털 마커를 촬영하는 카메라와, 상기 통신부를 통해 전송받은 상기 디지털 마커에 대한 크기 및 위치 정보와 상기 표시된 디지털 마커에 대한 상기 카메라의 촬영 결과를 기반으로 상기 카메라의 위치 정보를 추정하고 상기 추정된 카메라의 위치 정보를 상기 통신부를 통해 상기 증강 현실 제공 장치로 전송하는 제어부를 포함하는 것을 또 다른 특징으로 한다.
이와 같은 본 발명에 의하면, 디스플레이부에 표시되는 디지털 마커와 사용자 간의 위치 및 거리에 따라 실시간으로 디지털 마커의 위치 및 크기가 변경됨으로써, 보다 정확하고 융통성 있는 증강현실을 구현할 수 있다는 장점이 있다.
전술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술되며, 이에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있을 것이다. 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 상세한 설명을 생략한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 의한 증강 현실 제공 장치 및 사용자 단말의 구성과 연결 관계를 설명하는 도면이다. 도시된 바와 같이 증강 현실 제공 장치(100)는 디스플레이부(110), 디지털 마커 생성부(120), 제어부(130), 통신부(135)를 구비하고 있다. 그리고 사용자 단말(140)은 카메라(142), 통신부(144), 제어부(146), 디스플레이부(148)를 구비하고 있다. 사용자 단말(140)은 스마트폰, PDA, UMPC 등과 같은 무선 단말이거나 유선 단말일 수 있다.
디지털 마커 생성부(120)는 적어도 하나 이상의 디지털 마커(112)를 생성한다. 마커 생성부(120)는 디스플레이부(110)의 특성을 고려하여 디스플레이부(110)에 표시된 디지털 마커에 대한 크기 및 위치 정보를 생성하여 통신부(135)를 통해 사용자 단말(140)로 전송한다.
디스플레이부(110)는 디지털 마커 생성부(120)에서 생성된 디지털 마커(112)가 표시되도록 한다. 본 실시예에서는 디지털 마커(112)가 PDP, LCD 등과 같은 평판표시장치로 구현되는 테이블 탑 환경으로 제공되나, 프로젝터를 활용한 벽 또는 바닥 투영으로 제공될 수 있다.
디스플레이부(110)는 증강현실 테이블(ARtable)로서의 역할을 수행한다. 예를 들어, 보드게임용 증강현실 시스템에 있어서 디스플레이부(110)는 게임 진행 정보, 게임 보드 및 디지털 마커 등을 화면에 디스플레이하여 사용자가 게임 상태를 한눈에 파악할 수 있도록 하는 역할을 한다. 즉, 디스플레이부(110)는 빔 프로젝터 또는 평판표시장치를 통해 게임 보드와 게임 진행 정보를 표현하여 사용자 단말(140)의 연산 부담을 덜어주고, 디지털 마커(112)를 활용하여 직관적인 객체 증강 및 상호 작용이 가능하도록 한다.
통신부(135)는 제어부(130)의 제어에 따라 사용자 단말(140)의 통신부(144)와 통신을 수행한다.
제어부(130)는 통신부(135)를 통해 사용자 단말(140)이 추정한 카메라(142)의 위치 정보를 전송받고, 전송받은 카메라의 위치 정보에 따라 마커 생성부(120)를 제어하여 디지털 마커(112)의 크기 또는 위치를 변경한다. 여기서 카메라의 위치 정보는 디지털 마커(112)로부터의 카메라의 거리, 방향 등에 대한 정보를 포함한다.
카메라(142)는 증강 현실 제공 장치(100)에 의해 표시된 디지털 마커(112)를 촬영하고, 디스플레이부(140)는 제어부(146)에 의해 생성된 가상현실을 사용자에게 표시한다. 즉, 디스플레이부(140)는 사용자에게 개인화된 게임 화면과 3차원으로 증강된 게임 화면을 제공한다.
통신부(144)는 무선 랜카드(144)로 구현될 수 있으며, 디지털 마커 생성 부(120) 및 디스플레이부(110)를 제어하는 제어부(130)와 통신부(135)를 통해 무선 네트워크로 연결되어 게임 오브젝트들을 제어할 수 있도록 제어부(130)와 소정의 정보를 주고 받는다.
제어부(146)는 통신부(144)를 통해 전송받은 디지털 마커(142)에 대한 크기 및 위치 정보와, 디지털 마커(112)에 대한 카메라(142)의 촬영 결과를 기반으로 카메라(142)의 위치 정보를 추정하고 추정된 카메라의 위치 정보를 통신부(144)를 통해 증강 현실 제공 장치(100)의 통신부(135)로 전송한다. 또한 제어부(146)는 통신부(144)를 통해 증강 현실 제공 장치(100)로부터 가상세계에 대한 정보를 전송받고, 추정된 카메라의 위치 정보에 따라 전송받은 가상세계를 현실세계에 융합하여 증강현실을 생성한다.
사용자 단말(140)은 디스플레이부(110)에 표시된 디지털 마커(112)와 연동하여 3차원 오브젝터를 증강하고, 사용자는 이와 같이 증강된 오브젝트들을 사용자 단말(140)에 표시된 커서를 사용하여 버튼을 누름으로써, 원하는 작업을 할 수 있게 되는 것이다. 또한, 게임 메뉴와 같은 2차원 오브젝트들은 사용자 단말(140)의 터치스크린을 사용하여 상호 작용할 수 있다.
도 2는 본 발명의 일 실시예에 따른 증강 현실 제공 장치에서의 증강 현실 구현 방법의 흐름도이다.
먼저, 디지털 마커(112)가 디지털 마커 생성부(120)에서 생성되고 디스플레이부(110)를 통해 표시된다(S202). 그러면, 적어도 한 명 이상의 사용자는 사용자의 사용자 단말(140)에 구비된 카메라(142)를 통해 디스플레이부(110)에 표시되는 디지털 마커(112)를 촬영하게 된다. 이때, 사용자가 가지고 있는 사용자 단말(140) 및 디지털 마커(112)와의 거리, 각도 등에 따라 각각의 사용자측에서 촬영되는 디지털 마커(112)의 촬영 정보는 서로 상이하게 된다.
다음에 디지털 마커 생성부(120)는 디스플레이부(110)에 표시된 디지털 마커(112)에 대한 크기 및 위치 정보를 생성하여 사용자 단말(140)로 전송한다(S204). 또한 가상세계에 대한 정보가 사용자 단말(140)로 전송될 수 있다(S206). 사용자 단말(140)은 카메라(142)를 통한 디지털 마커(112)의 촬영 결과와 수신된 디지털 마커(112)에 대한 크기 및 위치 정보에 기반하여 카메라(142)의 위치를 추정하고, 통신부(144)를 통해 증강 현실 제공 장치(100)로 제공한다.
다음에 증강 현실 제공 장치(100)는 통신부(135)를 통해 추정된 카메라(142)의 위치 정보를 전송받고(S208), 제어부(130)를 통해 디지털 마커 생성부(120)를 제어하여 전송받은 카메라의 위치 정보에 따라 디지털 마커의 크기 또는 위치를 변경한다(S210).
도 3은 본 발명의 일 실시예에 따른 사용자 단말(140)에서의 증강 현실 구현 방법의 흐름도이다.
먼저 사용자 단말(140)은 통신부(144)를 통해 증강 현실 제공 장치(100)의 디스플레이부(110)에 의해 표시된 디지털 마커(112)에 대한 크기 및 위치 정보를 전송받는다(S302). 다음에 사용자 단말(140)은 증강 현실 제공 장치(100)로부터 가상세계에 대한 정보를 전송받는다(S302).
다음에 사용자가 카메라(142)를 통해 디스플레이부(110)에 표시된 디지털 마 커(112)를 촬영하면(S306), 제어부(146)는 카메라의 촬영 결과와 디지털 마커에 대한 크기 및 위치 정보를 기반으로 카메라(142)의 위치 정보를 추정하여 증강 현실 제공 장치(100)로 제공한다(S308).
카메라의 위치 정보를 추정하는 방법은 다음과 같다. 먼저, 대형 디스플레이부(110)에 보여지는 디지털 마커(112)의 위치, 방향 및 크기가 상황에 따라 변하므로 대형 디스플레이의 특징(픽셀의 크기 등)을 기반으로 디지털 마커에 존재하는 특징점(마커의 코너 등)의 3차원 위치를 추정한다(단계 1). 다음에는 카메라를 이용해 촬영된 영상에서 디지털 마커에 존재하는 특징점들의 2차원 위치를 추정한다(단계 2). 단계 2에서 획득된 디지털 마커의 특징점들과 단계 1에서 획득된 디지털 마커의 특징점들 중에서 서로 상응하는 특징점들을 찾아낸다(단계 3). 즉, 단계 2에서 획득된 각각의 특징점과 상응하는 실제 공간에 그려진 디지털 마커의 특징점을 찾아낸다. 다음에는 최소 4개의 상응하는 특징점 쌍을 기반으로 카메라의 위치 및 방향을 추정한다(단계 4).
다음에 제어부(146)는 추정된 카메라의 위치 정보에 따라 전송받은 가상세계를 현실세계에 융합하여 증강현실을 생성하고 디스플레이부(148)에 표시한다(S310). 디지털 마커(112)의 크기 및 위치 등이 변동되면, 이에 대응하여 렌더링이 수행됨으로써, 사용자의 위치에 맞게 적절히 증강된 오브젝트들이 각 사용자의 사용자 단말(140)에 구비된 디스플레이부(148)에 표현되는 것이다. 이 때, 렌더링(rendering)이란 가상의 객체를 컴퓨터그래픽(CG)을 통해 생성하는 것을 말하며, 이를 통해서 실제 공간에 존재하지 않는 객체를 보이어 추가 정보를 제공하게 되는 것이다.
이와 같은 증강현실 시스템을 예를 들어, 보드게임에 적용하면, 보드게임에서 사용자(게임 플레이어)에게 증강된 정보가 주어지게 됨으로써, 그렇지 않을 때 보다 보드게임에 대한 흥미를 높일 수 있게 되는 것이다. 즉, 증강현실 시스템을 보드게임에 적용하면 게임 요소들을 입체적으로 표현할 수 있고, 앞서 설명한 적응형 디지털 마커의 활용을 통하여 직접적이고 실감적인 상호작용을 제공할 수 있으므로 플레이어가 더욱 게임에 흥미를 가질 수 있게 된다. 그리고 게임 진행에 필요한 정보들을 증강시켜 플레이어가 쉽게 게임을 플레이 할 수 있도록 도와줄 수 있다. 이러한 보드게임용 증강현실 시스템은 보드게임의 장점과 컴퓨터 게임의 장점을 동시에 사용자에게 제공하는 새로운 게임 방식으로서, 이는 게임 진행을 컴퓨터로 구현되는 제어부가 제어하기 때문에 그래픽이나 사운드를 이용하여 보다 동적인 게임 환경을 제공하고, 사용자에게 게임의 정보를 시각적으로 지원하여 보다 재미있고 빠른 게임 진행을 가능하게 할 수 있게 된다.
전술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체 (씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치 환, 변형 및 변경이 가능하다는 것이 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다.
도 1은 본 발명의 일 실시예에 의한 증강 현실 제공 장치 및 사용자 단말의 구성과 연결 관계를 설명하는 도면이다.
도 2는 본 발명의 일 실시예에 따른 증강 현실 제공 장치에서의 증강 현실 구현 방법의 흐름도이다.
도 3은 본 발명의 일 실시예에 따른 사용자 단말에서의 증강 현실 구현 방법의 흐름도이다.

Claims (11)

  1. 증강 현실 제공 장치에서 디지털 마커를 이용하여 증강 현실을 구현하는 방법에 있어서,
    디지털 마커를 생성하고 상기 생성된 디지털 마커가 표시되도록 하는 단계와,
    카메라가 탑재된 사용자 단말로부터 상기 표시된 디지털 마커의 촬영 결과에 따라 추정된 상기 카메라의 위치 정보를 전송받는 단계와,
    상기 전송받은 카메라의 위치 정보에 따라 상기 디지털 마커의 크기 또는 위치를 변경하는 단계와,
    상기 표시된 디지털 마커에 대한 크기 및 위치 정보를 생성하여 상기 사용자 단말로 전송하는 단계
    를 포함하되
    상기 카메라의 위치 정보는 상기 카메라가 상기 표시된 디지털 마커를 촬영한 결과와 상기 디지털 마커에 대한 크기 및 위치 정보를 기반으로 추정되는 것을 특징으로 하는 증강 현실 구현 방법.
  2. 삭제
  3. 제 1 항에 있어서,
    상기 사용자 단말로 가상세계에 대한 정보를 전송하는 단계를 더 포함하는 것을 특징으로 하는 증강 현실 구현 방법.
  4. 카메라가 탑재된 사용자 단말에서 디지털 마커를 이용하여 증강 현실을 구현하는 방법에 있어서,
    증강 현실 제공 장치에 의해 표시된 디지털 마커에 대한 크기 및 위치 정보를 전송받는 단계와,
    상기 표시된 디지털 마커에 대한 상기 카메라의 촬영 결과와 상기 디지털 마커에 대한 크기 및 위치 정보를 기반으로 상기 카메라의 위치 정보를 추정하는 단계와,
    상기 추정된 카메라의 위치 정보를 상기 증강 현실 제공 장치로 전송하는 단계
    를 포함하되,
    상기 카메라의 위치 정보를 추정하는 단계는
    상기 디지털 마커에 존재하는 특징점의 3차원 위치를 추정하는 단계,
    상기 카메라의 촬영 결과인 영상에서 디지털 마커에 존재하는 특징점의 2차원 위치를 추정하는 단계,
    상기 추정된 3차원 위치의 특징점들과 상기 추정된 2차원 위치의 특징점들 중 서로 상응하는 특징점을 검색하는 단계 및
    적어도 4개의 상응하는 특징점 쌍을 기반으로 상기 카메라의 위치 정보를 추정하는 단계를 포함하며,
    상기 증강 현실 제공 장치에서는 상기 추정된 카메라의 위치 정보에 따라 상기 디지털 마커의 크기 또는 위치가 변경되며, 상기 변경된 디지털 마커에 대한 크기 및 위치 정보는 상기 사용자 단말로 전송되는 것을 특징으로 하는 증강 현실 구현 방법.
  5. 제 4 항에 있어서,
    상기 증강 현실 제공 장치로부터 가상세계에 대한 정보를 전송받는 단계와,
    상기 추정된 카메라의 위치 정보에 따라 상기 전송받은 가상세계를 현실세계에 융합하여 증강현실을 생성하는 단계를
    더 포함하는 것을 특징으로 하는 증강 현실 구현 방법.
  6. 제 5 항에 있어서,
    상기 생성된 증강현실을 상기 사용자 단말의 디스플레이부에 표시하는 단계
    를 더 포함하는 것을 특징으로 하는 증강 현실 구현 방법.
  7. 디지털 마커를 이용하여 증강 현실을 제공하는 장치에 있어서,
    디지털 마커를 생성하는 마커 생성부와,
    상기 생성된 디지털 마커가 표시되도록 하는 표시부와,
    카메라가 탑재된 사용자 단말과 통신하는 통신부와,
    상기 표시된 디지털 마커를 상기 카메라가 촬영한 결과에 따라 추정된 상기 카메라의 위치 정보를 상기 통신부를 통해 상기 사용자 단말로부터 전송받고, 상기 전송받은 카메라의 위치 정보에 따라 상기 마커 생성부를 제어하여 상기 디지털 마커의 크기 또는 위치를 변경하는 제어부
    를 포함하되,
    상기 마커 생성부는 상기 표시된 디지털 마커에 대한 크기 및 위치 정보를 생성하여 상기 통신부를 통해 상기 사용자 단말로 전송하고,
    상기 카메라의 위치 정보는 상기 카메라가 상기 표시된 디지털 마커를 촬영한 결과와 상기 디지털 마커에 대한 크기 및 위치 정보를 기반으로 추정되는 것을 특징으로 하는 증강 현실 제공 장치.
  8. 삭제
  9. 디지털 마커를 이용하여 증강 현실을 제공하는 증강 현실 제공 장치와 통신하는 통신부와,
    상기 증강 현실 제공 장치에 의해 표시된 디지털 마커를 촬영하는 카메라와,
    상기 통신부를 통해 전송받은 상기 디지털 마커에 대한 크기 및 위치 정보와 상기 표시된 디지털 마커에 대한 상기 카메라의 촬영 결과를 기반으로 상기 카메라의 위치 정보를 추정하고 상기 추정된 카메라의 위치 정보를 상기 통신부를 통해 상기 증강 현실 제공 장치로 전송하는 제어부
    를 포함하되,
    상기 제어부는 상기 디지털 마커에 존재하는 특징점의 3차원 위치를 추정하고, 상기 카메라의 촬영 결과인 영상에서 디지털 마커에 존재하는 특징점의 2차원 위치를 추정하며, 상기 추정된 3차원 위치의 특징점들과 상기 추정된 2차원 위치의 특징점들 중 서로 상응하는 특징점을 검색하여 적어도 4개의 상응하는 특징점 쌍을 기반으로 상기 카메라의 위치 정보를 추정하며,
    상기 증강 현실 제공 장치에서는 상기 추정된 카메라의 위치 정보에 따라 상기 디지털 마커의 크기 또는 위치가 변경되며,
    상기 제어부는 상기 증강 현실 제공 장치로부터 상기 통신부를 통해 상기 변경된 디지털 마커에 대한 크기 및 위치 정보를 전송받는 것을 특징으로 하는 사용자 단말.
  10. 제 9 항에 있어서,
    상기 제어부는 상기 통신부를 통해 상기 증강 현실 제공 장치로부터 가상세계에 대한 정보를 전송받고, 상기 추정된 카메라의 위치 정보에 따라 상기 전송받은 가상세계를 현실세계에 융합하여 증강현실을 생성하는 것을 특징으로 하는 사용 자 단말.
  11. 제 10 항에 있어서,
    상기 생성된 증강현실을 표시하는 디스플레이부를 더 포함하는 것을 특징으로 하는 사용자 단말.
KR1020080117076A 2008-02-13 2008-11-24 증강 현실을 구현하는 방법 및 이를 이용하는 장치 KR101152919B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20080012931 2008-02-13
KR1020080012931 2008-02-13

Publications (2)

Publication Number Publication Date
KR20090087807A KR20090087807A (ko) 2009-08-18
KR101152919B1 true KR101152919B1 (ko) 2012-06-05

Family

ID=41206729

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080117076A KR101152919B1 (ko) 2008-02-13 2008-11-24 증강 현실을 구현하는 방법 및 이를 이용하는 장치

Country Status (1)

Country Link
KR (1) KR101152919B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101292083B1 (ko) * 2011-03-29 2013-08-01 주식회사 소프트맥스 증강 현실 환경에서의 위치기반 광고방법 및 그 장치
WO2014145532A1 (en) * 2013-03-15 2014-09-18 Rubicon Group Holding Limited Augmented reality systems and methods used to identify toys and trigger video and graphics
KR101564169B1 (ko) 2014-04-22 2015-10-29 한국과학기술원 동적 마커를 이용한 디바이스 간 컨텐츠 이동 시스템 및 그 방법
KR20210156620A (ko) * 2020-06-18 2021-12-27 (주)이츠비전 증강 현실을 이용한 광고 제공 서버 및 증강 현실을 이용한 광고 제공 프로그램

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101401321B1 (ko) * 2009-10-20 2014-05-29 에스케이플래닛 주식회사 근거리 무선 네트워크 기반 증강현실 서비스 시스템 및 그 방법
KR101642000B1 (ko) * 2009-11-20 2016-07-22 엘지전자 주식회사 이동 단말기, ｄｔｖ 및 ｄｔｖ의 제어 방법
KR101227255B1 (ko) * 2010-03-17 2013-01-28 에스케이플래닛 주식회사 마커 크기 기반 인터렉션 방법 및 이를 구현하기 위한 증강 현실 시스템
KR20110132260A (ko) * 2010-05-29 2011-12-07 이문기 모니터 기반 증강현실 시스템
KR101056418B1 (ko) * 2011-03-31 2011-08-11 주식회사 맥스트 모바일 센서를 이용한 증강 현실 콘텐츠 추적 장치 및 방법
KR101242551B1 (ko) * 2011-05-30 2013-03-19 (주)포스트미디어 입체 디지털 정보 표시 기능을 갖는 입체 영상 디스플레이 장치 및 입체 영상에서 입체 디지털 정보 표시 방법
EP2754289A4 (en) * 2011-09-08 2016-05-18 Intel Corp INCREASED REALITY BASED ON OBJECT CHARACTERISTICS WHERE THE IMAGE IS FORMED
KR101360061B1 (ko) 2012-12-05 2014-02-12 현대자동차 주식회사 증강 현실 제공 방법 및 그 장치
US11270114B2 (en) 2019-08-30 2022-03-08 Lg Electronics Inc. AR device and method for controlling the same
US11561611B2 (en) 2020-10-29 2023-01-24 Micron Technology, Inc. Displaying augmented reality responsive to an input

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
논문1(한국컴퓨터그래픽스학회, 2007)*

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101292083B1 (ko) * 2011-03-29 2013-08-01 주식회사 소프트맥스 증강 현실 환경에서의 위치기반 광고방법 및 그 장치
WO2014145532A1 (en) * 2013-03-15 2014-09-18 Rubicon Group Holding Limited Augmented reality systems and methods used to identify toys and trigger video and graphics
KR101564169B1 (ko) 2014-04-22 2015-10-29 한국과학기술원 동적 마커를 이용한 디바이스 간 컨텐츠 이동 시스템 및 그 방법
KR20210156620A (ko) * 2020-06-18 2021-12-27 (주)이츠비전 증강 현실을 이용한 광고 제공 서버 및 증강 현실을 이용한 광고 제공 프로그램
KR102421817B1 (ko) * 2020-06-18 2022-07-15 (주)이츠비전 증강 현실을 이용한 광고 제공 서버 및 증강 현실을 이용한 광고 제공 프로그램

Also Published As

Publication number Publication date
KR20090087807A (ko) 2009-08-18

Similar Documents

Publication Publication Date Title
KR101152919B1 (ko) 증강 현실을 구현하는 방법 및 이를 이용하는 장치
US11703993B2 (en) Method, apparatus and device for view switching of virtual environment, and storage medium
KR102184586B1 (ko) 파노라마 이미지 디스플레이 제어 방법 및 장치 그리고 저장 매체
KR102497683B1 (ko) 다수의 가상 캐릭터를 제어하는 방법, 기기, 장치 및 저장 매체
US9324298B2 (en) Image processing system, image processing apparatus, storage medium having stored therein image processing program, and image processing method
JP2020024752A (ja) 情報処理装置及びその制御方法、プログラム
KR101692335B1 (ko) 증강현실 영상표시 시스템 및 증강현실 영상표시 방법
CN103324453B (zh) 显示器
JP6348741B2 (ja) 情報処理システム、情報処理装置、情報処理プログラム、および情報処理方法
US10062209B2 (en) Displaying an object in a panoramic image based upon a line-of-sight direction
US20130154974A1 (en) Input direction determination system, terminal server, network system, information storage medium, and input direction determination method
JP2004054590A (ja) 仮想空間描画表示装置、及び仮想空間描画表示方法
CN103513951A (zh) 使用三维地图提供增强现实信息的设备和方法
JP2013099511A (ja) 描画システム、描画サーバ、その制御方法、プログラム、及び記録媒体
US20140152764A1 (en) Information processing system, information processing apparatus, storage medium having stored therein information processing program, and information transmission/reception method
US20130057574A1 (en) Storage medium recorded with program, information processing apparatus, information processing system, and information processing method
US20200341541A1 (en) Simulated reality cross platform system
JP2014044655A (ja) 拡張現実システム、映像合成装置、映像合成方法及びプログラム
CN108401463A (zh) 一种虚拟显示装置、智能交互方法和云端服务器
KR101039611B1 (ko) 증강현실에 기반하여 메시지를 표시하는 방법
CN104580967B (zh) 一种基于便携式投影仪的地图投影方法和用于投影的装置
KR101108542B1 (ko) 위치기반 증강현실을 이용하는 이동통신 단말기 및 이의 제어방법
KR101405499B1 (ko) 경로방향 상징객체 표출방법
JP7072706B1 (ja) 表示制御装置、表示制御方法および表示制御プログラム
CN117082201A (zh) 终端装置、非临时性的计算机可读取的介质以及图像显示方法

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150429

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160427

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee