KR101085680B1 - 모바일 장치 및 이를 이용한 증강 현실 구현 방법 - Google Patents

모바일 장치 및 이를 이용한 증강 현실 구현 방법 Download PDF

Info

Publication number
KR101085680B1
KR101085680B1 KR1020100041768A KR20100041768A KR101085680B1 KR 101085680 B1 KR101085680 B1 KR 101085680B1 KR 1020100041768 A KR1020100041768 A KR 1020100041768A KR 20100041768 A KR20100041768 A KR 20100041768A KR 101085680 B1 KR101085680 B1 KR 101085680B1
Authority
KR
South Korea
Prior art keywords
mobile device
camera
augmented reality
image
photographing
Prior art date
Application number
KR1020100041768A
Other languages
English (en)
Other versions
KR20110122333A (ko
Inventor
이정후
Original Assignee
삼성전기주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전기주식회사 filed Critical 삼성전기주식회사
Priority to KR1020100041768A priority Critical patent/KR101085680B1/ko
Publication of KR20110122333A publication Critical patent/KR20110122333A/ko
Application granted granted Critical
Publication of KR101085680B1 publication Critical patent/KR101085680B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/34—Microprocessors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/36—Memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/38—Displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Abstract

본 발명은 증강 현실 모드를 수행하는 모바일 장치에 관한 것으로, 본 발명에 따른 모바일 장치는 이미지를 촬영하여 실제 이미지를 취득하는 촬영부, 촬영부가 촬영한 실제 이미지에 실제 이미지와 관련된 정보 이미지를 부가하는 제어부, 실제 이미지와 정보 이미지가 겹쳐진 최종 이미지를 외부에 표시하는 표시부, 그리고 증강 현실 모드 설정시, 모바일 장치의 위치가 변화되어도 촬영부의 촬영 각도가 사용자의 전방을 향하도록, 촬영부의 촬영 각도를 조절하는 구동부를 포함한다.

Description

모바일 장치 및 이를 이용한 증강 현실 구현 방법{mobile device and method for implementing augmented reality using the same}
본 발명은 모바일 장치 및 이를 이용한 증강 현실 구현 방법에 관한 것으로, 보다 상세하게는 증강 현실 기능의 기능성 및 효용성을 향상시킨 모바일 장치 및 이를 이용한 증강 현실 구현 방법에 관한 것이다.
증강 현실(augmented rality)은 사용자가 눈으로 보는 현실 세계의 실제 이미지 상에 가상 이미지를 겹쳐 보여주는 기술이다. 이러한 증강 현실 기술은 방송 통신 분야, 의료 기기 분야, 그리고 최근 점차 상용화가 진행되고 있는 핸드폰 및 네비게이션 등의 모바일 장치 분야에 점차 적용되고 있다.
일 예로서, 최근의 핸드폰과 같은 모바일 기기는 이미지를 촬영하는 카메라, 상기 카메라로부터 취득한 영상 정보를 판단하는 제어부, 그리고 사용자에게 상기 영상 정보를 표시하는 표시부를 포함한다. 이와 같은 구성의 모바일 기기에 상기와 같은 증강 현실 기능을 구현하는 경우, 제어부가 카메라에 의해 촬영된 전방의 실제 이미지들을 분석하여, 상기 실제 이미지에 이와 관련된 정보 이미지를 부가하여, 사용자에게 실시간으로 표시하게 된다.
이와 같은 모바일 기기를 이용한 증강 현실 기술은 카메라에 의해 전방 이미지들을 정확하고 안정적으로 확인하는 것이 증강 현실의 구현에 중요한 요소이다. 그러나, 모바일 기기의 특성상, 사용자의 다양한 손동작 및 손떨림 등으로 인해 증강 현실 구현시 실제 이미지의 안정적인 촬영이 어려울 수 있다. 또한, 일반적인 모바일 기기는 카메라의 촬영 각도가 고정된 구조를 가지므로, 상기 카메라의 촬영 각도 조절은 사용자가 모바일 기기를 움직여 조절하도록 구성된다. 그러나, 이 경우 사용자가 증강 현실 모드 실행시, 카메라가 전방을 향하도록 항상 모바일 기기의 위치를 일정하게 유지시켜야 하므로, 사용자가 장시간 증강 현실 기능을 위한 자세를 유지해야 하는 단점이 있다. 이에 더하여, 일반적으로 카메라는 그 촬영 각도가 고정되어 있으므로, 상기 증강 현실 모드 실행시에는 사용자가 모바일 장치에 데이터의 입력하거나, 정보를 외부로 전송하는 등의 키패드 작업, 예컨대, 문자 전송, 사진 전송, 통화, 정보 입력 및 저장, 그리고 트위터(twitter)와 같은 소셜 네트워크 서비스(Social Network Service；SNS)를 실시간으로 이용하기에 어려움이 있다.
본 발명이 해결하고자 하는 과제는 증강 현실 기능의 기능성 및 효용성을 향상시키는 모바일 장치 및 이를 이용한 증강 현실 구현 방법을 제공하는 것에 있다.
본 발명이 해결하고자 하는 과제는 사용자의 자세 및 모바일 장치의 위치에 상관 없이 전방의 실제 이미지들을 효과적으로 취득할 수 있는 모바일 장치 및 이를 이용한 증강 현실 구현 방법을 제공하는 것에 있다.
본 발명이 해결하고자 하는 과제는 증강 현실 구현시, 사용자가 모바일 장치에 다양한 키패드 작업을 용이하게 수행할 수 있는 모바일 장치 및 이를 이용한 증강 현실 구현 방법을 제공하는 것에 있다.
본 발명에 따른 모바일 장치는 이미지를 촬영하여 실제 이미지를 취득하는 촬영부, 상기 촬영부가 촬영한 실제 이미지에 상기 실제 이미지와 관련된 정보 이미지를 부가하는 제어부, 상기 실제 이미지와 상기 정보 이미지가 겹쳐진 최종 이미지를 외부에 표시하는 표시부, 그리고 상기 증강 현실 모드 설정시, 모바일 장치의 위치가 변화되어도 상기 촬영부의 촬영 각도가 사용자의 전방을 향하도록, 상기 촬영부의 촬영 각도를 조절하는 구동부를 포함한다.
본 발명의 실시예에 따르면, 상기 촬영부는 상기 모바일 장치에 회전가능하게 구비된 카메라를 포함하고, 상기 구동부는 상기 카메라를 회전시키는 구동 모터, 상기 모바일 장치의 움직임을 감지하는 센서, 그리고 상기 모바일 장치의 움직임을 고려하여, 상기 카메라의 촬영 각도가 일정하게 유지되도록, 상기 구동 모터를 제어하는 컨트롤러를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 센서는 중력 센서(gravity sensor), 가속 센서(Accelerometer), 그리고 모션센서(Motion sensor) 중 적어도 어느 하나를 포함하는 모바일 장치.
본 발명의 실시예에 따르면, 상기 카메라는 원통 형상을 가지고, 상기 구동부는 상기 증강 현실 모드 설정시, 상기 모바일 장치의 움직임에 따라 상기 카메라를 상기 카메라의 중심축을 기준으로 회전시킬 수 있다.
본 발명의 실시예에 따르면, 상기 카메라는 구 형상을 가지고, 상기 구동부는 상기 증강 현실 모드 설정시, 상기 모바일 장치의 움직임에 따라, 상기 카메라를 상하 좌우 방향으로 회전시킬 수 있다.
본 발명에 따른 모바일 장치를 이용한 증강 현실 구현 방법은 증강 현실 모드 기능을 설정하는 단계, 카메라가 실제 이미지를 촬영하는 단계, 촬영된 실제 이미지에 상기 실제 이미지와 관련된 정보 이미지를 부가하는 단계, 그리고 상기 실제 이미지와 상기 정보 이미지가 겹쳐진 최종 이미지를 외부에 표시하는 단계를 포함하되, 상기 실제 이미지를 촬영하는 단계는 모바일 장치의 위치가 변화되어도, 상기 카메라의 촬영 각도가 사용자의 전방을 향하도록, 상기 카메라의 촬영 각도를 조절하는 단계를 포함한다.
본 발명의 실시예에 따르면, 상기 모바일 장치는 상기 모바일 장치의 움직임을 감지하는 센서를 포함하고, 상기 카메라의 촬영 각도를 조절하는 단계는 상기 중력 센서를 이용하여, 상기 모바일 장치의 움직임을 고려하여, 상기 카메라의 촬영 각도가 상기 사용자의 전방을 유지하도록 상기 카메라를 제어하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 센서로는 중력 센서(gravity sensor), 가속 센서(Accelerometer), 그리고 모션센서(Motion sensor) 중 적어도 어느 하나를 사용할 수 있다.
본 발명에 따른 모바일 장치는 증강 현실 모드 설정시, 촬영부의 촬영 각도가 항상 사용자의 전방을 향하도록 촬영부의 촬영 각도를 조절하는 구동부를 구비할 수 있다. 이에 따라, 본 발명에 따른 모바일 장치는 모바일 장치의 위치에 상관없이, 상기 카메라가 항상 사용자의 전방의 영상들을 안정적이고 정확하게 취득하여 증강 현실 기능을 효율적으로 수행할 수 있다.
본 발명에 따른 모바일 장치는 증강 현실 모드 설정시, 모바일 장치의 위치에 상관없이 카메라가 안정적으로 실제 이미지들을 촬영할 수 있으므로, 사용자가 상기 증강 현실 기능을 수행하는 동안에도, 모바일 장치에 대해 정보 입력 및 무선 네트워크를 통한 정보 전송 다양한 실시간 작업들을 용이하게 수행할 수 있어, 증강 현실의 기능성 및 효율성을 높일 수 있다. 이에 따라, 상기 모바일 장치는 최근 점차 보급되고 있는 트위터와 같은 소셜 네트워크 서비스(Social Network Service；SNS)를 용이하게 사용할 수 있는 구조를 갖는다.
본 발명에 따른 증강 현실 구현 방법은 증강 현실 모드 설정시, 촬영부의 촬영 각도가 항상 사용자의 전방을 향하도록 촬영부의 촬영 각도를 조절하므로, 모바일 장치의 위치에 상관없이, 카메라가 항상 전방의 영상들을 안정적이고 정확하게 취득할 수 있어, 사용자가 모바일 장치의 위치를 다양하게 변경할 수 있다. 이에 따라, 본 발명에 따른 증강 현실 구현 방법은 증강 현실 기능을 실행하는 동안에도, 사용자가 모바일 장치에 대해 다양한 작업들을 용이하게 할 수 있어, 증강 현실의 기능성 및 효용성을 높일 수 있다.
도 1은 본 발명의 실시예에 따른 모바일 장치의 구성들을 개략적으로 보여주는 블록도이다.
도 2는 도 1에 도시된 구동부의 구성들을 설명하기 위한 도면이다.
도 3a 및 도 3b는 도 2에 도시된 촬영부의 카메라의 일 적용예들을 보여주는 도면이다.
도 4는 도 3a 및 도 3b에 도시된 모바일 장치의 증강 현실 모드 설정시의 카메라의 동작을 설명하기 위한 도면이다.
도 4는 도 2에 도시된 카메라의 다른 적용예를 보여주는 도면이다.
도 5는 도 2에 도시된 카메라의 다른 적용예를 보여주는 도면이다.
도 6은 도 5에 도시된 모바일 장치의 증강 현실 모드 설정시의 카메라의 동작을 설명하기 위한 도면이다.
도 7a 및 도 7b는 본 발명의 또 다른 카메라의 적용예를 보여주는 도면이다.
도 8은 도 7a 및 도 7b에 도시된 모바일 장치의 증강 현실 모드 설정시의 카메라의 동작을 설명하기 위한 도면이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면들과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다. 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공될 수 있다. 명세서 전문에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
본 명세서에서 사용된 용어들은 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 '포함한다(comprise)' 및/또는 '포함하는(comprising)'은 언급된 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.
이하, 첨부한 도면들을 참조하여 본 발명의 실시예에 따른 모바일 장치 및 이를 이용한 증강 현실 구현 방법에 대해 상세히 설명한다.
도 1은 본 발명의 실시예에 따른 모바일 장치의 구성들을 개략적으로 보여주는 블록도이고, 도 2는 도 1에 도시된 구동부의 구성들을 설명하기 위한 도면이다.
도 1 및 도 2를 참조하면, 본 발명의 실시예에 따른 모바일 장치(100)는 증강 현실(augmented reality) 기능이 탑재된 휴대용 전자 장치일 수 있다. 상기 증강 현실은 실제로 촬영된 실제 이미지에 상기 실제 이미지와 관련된 정보 이미지를 부가한 최종 이미지를 외부에 표시하는 기술일 수 있다. 일 예로서, 상기 모바일 장치(100)가 핸드폰이고, 상기 증강 현실 기능이 음식점 정보에 대한 증강 현실 모드로 설정된 경우, 사용자는 상기 음식점이 실제로 촬영된 촬영 이미지에 상기 음식점에 대한 종류, 가격 및 맛 평가 자료 등의 정보 이미지가 겹쳐진 최종 이미지를 볼 수 있다. 그 밖에도 상기 모바일 장치(100)는 길 찾기 기능, 지도 검색 기능, 교통편 검색, 도로 정보 검색, 건물 정보 검색, 물건 정보 검색, 그리고 특정 인물 정보 검색 등의 다양한 종류의 증강 현실 모드를 사용할 수 있도록 구성될 수 있다.
상기와 같은 증강 현실의 구현을 위해, 상기 모바일 장치(100)는 촬영부(110), 저장부(120), 제어부(130), 표시부(140), 그리고 구동부(150)를 포함할 수 있다.
상기 촬영부(110)는 외부 영상을 촬영할 수 있다. 상기 촬영부(110)는 적어도 하나의 카메라(112)를 포함할 수 있다. 상기 카메라(112)는 모바일 장치(100)에 다양한 각도로 회전되도록 구비될 수 있다. 예컨대, 상기 카메라(112)는 상기 모바일 장치(100)에 사용자의 전방을 향해 그 촬영 각도가 일정한 범위 내에서 조절될 수 있도록, 상하 좌우로 회전 가능하게 구비될 수 있다.
상기 저장부(120)는 영상 정보를 저정할 수 있다. 예컨대, 상기 저장부(120)는 증강 현실(augmented reality) 모드 설정시, 실제 영상 이미지에 부가하고자 하는 정보 이미지들을 저장할 수 있다. 상기 저장부(120)는 다양한 종류의 저장 매체, 예컨대 SD 카드, CF 카드, 플래시 메모리, 메모리 스틱들 중 어느 하나일 수 있다. 한편, 본 실시예에서는 정보 이미지가 기설정된 저장부(120)를 구비하는 경우를 예로 들어 설명하였으나, 상기 정보 이미지는 무선 네트워크를 통해, 외부로부터 공급받을 수도 있으며, 이 경우 상기 증강 현실 모드 설정시, 상기 카메라(112)에 의해 촬영된 실제 이미지와 관련된 정보들을 무선 네트워크를 통해, 외부로부터 실시간으로 전송받을 수 있으며, 상기와 같은 저장부(120)는 구비되지 않을 수 있다.
상기 제어부(130)는 상기 촬영부(110)가 촬영한 실제 이미지와 상기 저장부(120)에 저장된 정보 이미지를 비교 판단하여, 상기 실제 이미지와 관련된 정보 이미지를 추출하여, 상기 실제 이미지에 상기 정보 이미지를 합쳐, 최종 이미지를 생성할 수 있다.
상기 표시부(140)는 상기 증강 현실 기능 구현시, 상기 실제 이미지와 상기 정보 이미지로 이루어진 최종 이미지를 외부에 표시할 수 있다. 상기 표시부(140)로는 다양한 종류의 디스플레이 장치가 이용될 수 있다.
상기 구동부(150)는 상기 촬영부(110)의 촬영 각도를 조절할 수 있다. 예컨대, 상기 구동부(150)는 상기 증강 현실 모드 설정시, 상기 카메라(112)의 촬영 각도가 항상 사용자의 전방을 향하도록, 상기 카메라(112)의 촬영 각도를 조절할 수 있다. 이를 위해, 상기 구동부(150)는 카메라(112)를 구동시키는 구동 모터(152), 상기 구동 모터(152)의 구동을 제어하는 컨트롤러(154), 그리고 상기 모바일 장치(100)의 움직임을 감지하는 센서(156)를 포함할 수 있다. 상기 구동 모터(152)는 상기 카메라(112)에 결합되어, 상기 카메라(112)를 회전시키도록 구성될 수 있다. 상기 컨트롤러(154)는 상기 센서(156)에 의해 감지되는 상기 모바일 장치(100)의 위치 및 움직임 등을 판단하여, 상기 카메라(112)의 촬영 각도가 상기 사용자의 전방을 향하도록, 상기 구동 모터(152)를 제어할 수 있다. 여기서, 상기 모바일 장치(100)의 위치는 상기 모바일 장치(100)의 각도, 거치 형태, 설치 위치, 그리고 높이 등을 모두 포함하는 것으로 정의될 수 있다. 이에 따라, 상기 증강 현실 기능을 수행하는 동안 상기 모바일 장치(100)의 위치 및 움직임 등에 상관 없이, 상기 카메라(112)의 촬영 각도는 항상 전방을 향하도록 제어될 수 있다. 그리고, 상기 센서(156)는 상기 모바일 장치(100)의 움직임, 예컨대, 실시간으로 변화되는 모바일 장치(100)의 각도, 놓여진 형태, 그리고 높이 등을 감지하기 위한 것일 수 있다. 상기 센서(156)는 중력 센서(gravity sensor), 가속 센서(Accelerometer), 그리고 모션센서(Motion sensor) 중 적어도 어느 하나를 포함할 수 있다.
상기와 같은 구성의 모바일 장치(100)는 다음과 같은 방식으로 증강 현실을 구현할 수 있다. 일 예로서, 사용자는 모바일 장치(100)를 조작하여, 증강 현실 모드를 설정할 수 있다. 상기 모바일 장치(100)가 증강 현실 모드로 설정되면, 상기 구동부(150)는 상기 촬영부(110)의 카메라(112)가 항상 사용자의 전방을 향하도록, 상기 카메라(112)를 구동시킬 수 있다. 즉, 상기 컨트롤러(154)는 상기 중력 센서(156)가 감지하는 모바일 장치(100)의 위치 및 움직임을 판단하여, 상기 카메라(112)가 상기 사용자의 전방을 향하도록, 상기 구동 모터(152)를 제어할 수 있다. 상기 구동 모터(152)의 구동에 의해, 상기 카메라(112)는 사용자의 전방을 향하도록, 그 촬영 각도가 실시간으로 조절될 수 있다. 따라서, 상기 증강 현실 모드 설정시, 상기 카메라(112)의 촬영 각도는 사용자의 전방을 유지하도록 조절됨으로써, 상기 촬영부(110)는 상기 모바일 장치(100)의 위치 및 움직임에 상관없이, 지속적으로 전방의 실제 이미지들을 촬영할 수 있다.
그리고, 제어부(130)는 상기 저장부(120)에 저장된 정보 이미지들 중 상기 촬영부(110)가 촬영한 실제 이미지와 관련된 정보 이미지들을 추출하거나, 무선 네트워크를 통해 실시간으로 상기 정보 이미지들을 전송받아, 상기 실제 이미지에 상기 정보 이미지를 겹쳐서, 상기 표시부(140)를 통해 외부에 이를 표시할 수 있다.
상술한 바와 같이, 본 발명에 따른 모바일 장치(100)는 상기 증강 현실 모드 설정시, 상기 촬영부(110)의 촬영 각도가 사용자의 전방을 향해 일정하게 유지되도록, 상기 촬영부(110)의 촬영 각도를 조절하는 구동부(150)를 구비할 수 있다. 이에 따라, 본 발명에 따른 모바일 장치 및 이를 이용한 증강 현실 구현 방법은 사용자의 이동 및 손떨림 등으로 인해 변화되는 상기 모바일 장치(100)의 위치에 상관없이, 상기 촬영부(110)의 카메라(112)가 항상 사용자의 전방의 영상들을 안정적이고 정확하게 취득할 수 있으므로, 증강 현실 효율을 향상시킬 수 있다.
또한, 본 발명에 따른 모바일 장치(100) 및 이를 이용한 증강 현실 구현 방법은 상기 증강 현실 모드 설정시, 상기 모바일 장치(100)의 위치에 상관없이, 상기 촬영부(110)의 카메라(112)가 안정적으로 실제 이미지들을 촬영할 수 있으므로, 상기 사용자가 상기 증강 현실 기능을 수행하는 동안에도, 용이하게 상기 모바일 장치(100)에 다양한 실시간 작업들, 예컨대, 문자 전송, 사진 전송, 통화, 정보 입력 및 저장, 그리고 트위터(twitter)와 같은 소셜 네트워크 서비스(Social Network Service；SNS)를 용이하게 사용할 수 있다.
계속해서, 앞서 살펴본 본 발명의 실시예에 따른 모바일 장치의 다양한 적용예들에 대해 상세히 설명한다. 여기서, 상기 모바일 장치(100)에 대해 중복되는 내용은 생략되거나 간소화될 수 있다.
도 3a 및 도 3b는 도 2에 도시된 카메라의 일 적용예를 보여주는 도면이고, 도 4는 도 3a 및 도 3b에 도시된 모바일 장치의 증강 현실 모드 설정시의 카메라의 동작을 설명하기 위한 도면이다.
도 3a, 도 3b 및 도 4를 참조하면, 도 3a 또는 도 3b에 도시된 바와 같이, 촬영부의 카메라(112)는 원통 형상을 가지며, 사용자가 정방향으로 바라보는 표시부(130)에 대해 수평하게 배치되도록 모바일 장치(100)에 구비될 수 있다. 이에 더하여, 상기 카메라(112)는 그 촬영 각도가 그 카메라(112)의 중심축을 기준으로 회전되도록, 상기 모바일 장치(100)에 구비될 수 있다.
이 경우 사용자는 증강 현실 모드 설정시, 상기 사용자의 전방을 기준으로 모바일 장치(100)의 위치 및 각도가 상하로 움직여도, 상기 카메라(112)가 자동적으로 전방을 향하도록 하는 구조를 가질 수 있다. 따라서, 상기 증강 현실 모드 설정시에도, 사용자가 상기 모바일 장치(100)를 상하로 다양하게 움직여 별도의 키패드 작업 등을 자유롭게 수행할 수 있다.
도 5는 도 2에 도시된 카메라의 다른 적용예를 보여주는 도면이고, 도 6은 도 5에 도시된 모바일 장치의 증강 현실 모드 설정시의 카메라의 동작을 설명하기 위한 도면이다. 도 5 및 도 6을 참조하면, 카메라(112a)는 원통 형상을 가지며, 상기 사용자가 정방향으로 바라보는 표시부(130)에 대해 수직하게 배치되도록, 모바일 장치(100)에 구비될 수 있다. 이에 더하여, 상기 카메라(112a)는 그 촬영 각도가 상기 카메라(112a)의 중심축을 기준으로 회전되도록, 모바일 장치(100)에 구비될 수 있다. 이 경우 사용자는 상기 증강 현실 모드 설정시, 상기 사용자의 전방을 기준으로 상기 카메라(112a)가 자동적으로 전방을 향하도록 하는 구조를 가질 수 있다. 따라서, 상기 증강 현실 모드 설정시에도, 사용자가 상기 모바일 장치(100)를 좌우로 다양하게 움직여 별도의 키패드 작업 등을 자유롭게 수행할 수 있다.
도 7a 및 도 7b는 본 발명의 또 다른 카메라의 적용예를 보여주는 도면이고,도 8은 도 7a 및 도 7b에 도시된 모바일 장치의 증강 현실 모드 설정시의 카메라의 동작을 설명하기 위한 도면이다. 도 7a, 도 7b 및 도 8을 참조하면, 도 7a 및 도 7b에 도시된 바와 같이, 상기 카메라(112b)는 구(sphere) 형상을 가지며, 그 촬영 각도가 상하 좌우 방향으로 조절되도록, 모바일 장치(100)에 구비될 수 있다. 이 경우 사용자는 상기 증강 현실 모드 설정시, 상기 사용자의 전방을 기준으로 상기 모바일 장치(100)의 위치 및 각도를 상하 좌우로 움직인다 하여도, 상기 카메라(112b)가 자동적으로 전방을 향하도록 하는 구조를 가질 수 있다. 따라서, 상기 증강 현실 모드 설정시, 사용자는 상기 모바일 장치(100)를 상하 좌우로 다양하게 움직여 별도의 키패드 작업 등을 자유롭게 수행할 수 있다.
이상의 상세한 설명은 본 발명을 예시하는 것이다. 또한 전술한 내용은 본 발명의 바람직한 실시 형태를 나타내고 설명하는 것에 불과하며, 본 발명은 다양한 다른 조합, 변경 및 환경에서 사용할 수 있다. 즉, 본 명세서에 개시된 발명의 개념의 범위, 저술한 개시 내용과 균등한 범위 및/또는 당업계의 기술 또는 지식의 범위 내에서 변경 또는 수정이 가능하다. 전술한 실시예들은 본 발명을 실시하는데 있어 최선의 상태를 설명하기 위한 것이며, 본 발명과 같은 다른 발명을 이용하는데 당업계에 알려진 다른 상태로의 실시, 그리고 발명의 구체적인 적용 분야 및 용도에서 요구되는 다양한 변경도 가능하다. 따라서, 이상의 발명의 상세한 설명은 개시된 실시 상태로 본 발명을 제한하려는 의도가 아니다. 또한 첨부된 청구범위는 다른 실시 상태도 포함하는 것으로 해석되어야 한다.
100 : 모바일 장치
110 : 촬영부
112 : 카메라
120 : 저장부
130 : 표시부
140 : 제어부
150 : 구동부
152 : 구동 모터
154 : 컨트롤러
156 : 센서

Claims (12)

  1. 증강 현실(augmented reality) 기능이 탑재된 모바일 장치에 있어서,
    이미지를 촬영하여 실제 이미지를 취득하는 카메라로 구성된 촬영부;
    상기 촬영부가 촬영한 실제 이미지에 상기 실제 이미지와 관련된 정보 이미지를 부가하는 제어부;
    상기 실제 이미지와 상기 정보 이미지가 겹쳐진 최종 이미지를 외부에 표시하는 표시부; 및
    상기 증강 현실 모드 설정시, 상기 모바일 장치의 위치가 변화되어도 상기 촬영부의 촬영 각도가 사용자의 전방을 향하도록, 상기 촬영부의 촬영 각도를 조절하는 구동부를 포함하며,
    상기 구동부는 상기 증강 현실 모드 설정시, 상기 모바일 장치의 움직임에 따라 상기 카메라를 상기 카메라의 중심축을 기준으로 회전시키는 모바일 장치.
  2. 제 1 항에 있어서,
    상기 촬영부는 상기 모바일 장치에 회전가능하게 구비된 카메라를 포함하고,
    상기 구동부는
    상기 카메라를 회전시키는 구동 모터;
    상기 모바일 장치의 움직임을 감지하는 센서; 및
    상기 모바일 장치의 움직임을 고려하여, 상기 카메라의 촬영 각도가 일정하게 유지되도록, 상기 구동 모터를 제어하는 컨트롤러를 포함하는 모바일 장치.
  3. 제 2 항에 있어서,
    상기 센서는 중력 센서(gravity sensor), 가속 센서(Accelerometer), 그리고 모션센서(Motion sensor) 중 적어도 어느 하나를 포함하는 모바일 장치.
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 증강 현실(augmented reality) 기능이 탑재된 모바일 장치에 있어서,
    이미지를 촬영하여 실제 이미지를 취득하는 카메라로 구성된 촬영부;
    상기 촬영부가 촬영한 실제 이미지에 상기 실제 이미지와 관련된 정보 이미지를 부가하는 제어부;
    상기 실제 이미지와 상기 정보 이미지가 겹쳐진 최종 이미지를 외부에 표시하는 표시부; 및
    상기 증강 현실 모드 설정시, 상기 모바일 장치의 위치가 변화되어도 상기 촬영부의 촬영 각도가 사용자의 전방을 향하도록, 상기 촬영부의 촬영 각도를 조절하는 구동부를 포함하며,
    상기 구동부는 상기 증강 현실 모드 설정시, 상기 모바일 장치의 움직임에 따라 상기 카메라를 상하 좌우 방향으로 회전시키는 모바일 장치.
  10. 제 9 항에 있어서,
    상기 촬영부는 상기 모바일 장치에 회전가능하게 구비된 카메라를 포함하고,
    상기 구동부는
    상기 카메라를 회전시키는 구동 모터;
    상기 모바일 장치의 움직임을 감지하는 센서; 및
    상기 모바일 장치의 움직임을 고려하여, 상기 카메라의 촬영 각도가 일정하게 유지되도록, 상기 구동 모터를 제어하는 컨트롤러를 포함하는 모바일 장치.
  11. 제 10 항에 있어서,
    상기 센서는 중력 센서(gravity sensor), 가속 센서(Accelerometer), 그리고 모션센서(Motion sensor) 중 적어도 어느 하나를 포함하는 모바일 장치.
  12. 제 1 항 내지 제 11 항 중 어느 한 항에 있어서,
    상기 카메라는 원통 형상 또는 구 형상을 가지는 모바일 장치.









KR1020100041768A 2010-05-04 2010-05-04 모바일 장치 및 이를 이용한 증강 현실 구현 방법 KR101085680B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100041768A KR101085680B1 (ko) 2010-05-04 2010-05-04 모바일 장치 및 이를 이용한 증강 현실 구현 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100041768A KR101085680B1 (ko) 2010-05-04 2010-05-04 모바일 장치 및 이를 이용한 증강 현실 구현 방법

Publications (2)

Publication Number Publication Date
KR20110122333A KR20110122333A (ko) 2011-11-10
KR101085680B1 true KR101085680B1 (ko) 2011-11-22

Family

ID=45392880

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100041768A KR101085680B1 (ko) 2010-05-04 2010-05-04 모바일 장치 및 이를 이용한 증강 현실 구현 방법

Country Status (1)

Country Link
KR (1) KR101085680B1 (ko)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USRE48963E1 (en) 2012-03-02 2022-03-08 Microsoft Technology Licensing, Llc Connection device for computing devices
US9360893B2 (en) 2012-03-02 2016-06-07 Microsoft Technology Licensing, Llc Input device writing surface
US9075566B2 (en) 2012-03-02 2015-07-07 Microsoft Technoogy Licensing, LLC Flexible hinge spine
US8873227B2 (en) 2012-03-02 2014-10-28 Microsoft Corporation Flexible hinge support layer
US9870066B2 (en) 2012-03-02 2018-01-16 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US9064654B2 (en) 2012-03-02 2015-06-23 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US9426905B2 (en) 2012-03-02 2016-08-23 Microsoft Technology Licensing, Llc Connection device for computing devices
US9298236B2 (en) 2012-03-02 2016-03-29 Microsoft Technology Licensing, Llc Multi-stage power adapter configured to provide a first power level upon initial connection of the power adapter to the host device and a second power level thereafter upon notification from the host device to the power adapter
US9134807B2 (en) 2012-03-02 2015-09-15 Microsoft Technology Licensing, Llc Pressure sensitive key normalization
US9706089B2 (en) 2012-03-02 2017-07-11 Microsoft Technology Licensing, Llc Shifted lens camera for mobile computing devices
US20130300590A1 (en) 2012-05-14 2013-11-14 Paul Henry Dietz Audio Feedback
US10031556B2 (en) 2012-06-08 2018-07-24 Microsoft Technology Licensing, Llc User experience adaptation
US9019615B2 (en) 2012-06-12 2015-04-28 Microsoft Technology Licensing, Llc Wide field-of-view virtual image projector
US8964379B2 (en) 2012-08-20 2015-02-24 Microsoft Corporation Switchable magnetic lock
US8786767B2 (en) 2012-11-02 2014-07-22 Microsoft Corporation Rapid synchronized lighting and shuttering
US9304549B2 (en) 2013-03-28 2016-04-05 Microsoft Technology Licensing, Llc Hinge mechanism for rotatable component attachment
WO2014166521A1 (en) * 2013-04-09 2014-10-16 Huawei Technologies Co., Ltd. Mobile electronic device with a rotatable camera
US9424048B2 (en) 2014-09-15 2016-08-23 Microsoft Technology Licensing, Llc Inductive peripheral retention device

Also Published As

Publication number Publication date
KR20110122333A (ko) 2011-11-10

Similar Documents

Publication Publication Date Title
KR101085680B1 (ko) 모바일 장치 및 이를 이용한 증강 현실 구현 방법
US9635254B2 (en) Panoramic scene capturing and browsing mobile device, system and method
US9774780B1 (en) Cues for capturing images
JP5659304B2 (ja) 画像生成装置および画像生成方法
JP5659305B2 (ja) 画像生成装置および画像生成方法
US10104300B2 (en) System and method for supporting photography with different effects
JP6205071B2 (ja) 撮像制御装置、撮像制御方法、カメラシステム及びプログラム
JP5769813B2 (ja) 画像生成装置および画像生成方法
KR102173106B1 (ko) 증강현실 메커니즘을 가지는 전자 시스템 및 그 동작 방법
JP6205072B2 (ja) 撮像制御装置、撮像制御方法、カメラ、カメラシステム及びプログラム
JP5865388B2 (ja) 画像生成装置および画像生成方法
KR102602074B1 (ko) 가상 환경에서 가상 물체를 관찰하는 방법 및 디바이스, 및 판독 가능한 저장 매체
CN111034181A (zh) 图像捕获设备、图像显示系统和操作方法
WO2013015147A1 (ja) 画像処理システム、情報処理装置、プログラム及び画像処理方法
RU2015116420A (ru) Устройство и способ отображения изображения, мобильное устройство, система отображения изображения и компьютерная программа
WO2013017023A1 (zh) 一种控制终端屏幕的显示状态的方法及装置
CN113645410B (zh) 图像采集方法、设备及机器可读存储介质
KR102565711B1 (ko) 관점 회전 방법 및 장치, 디바이스 및 저장 매체
US20180121711A1 (en) Display control method and apparatus
CN105718232A (zh) 一种任意角平面旋转显示方法及显示装置
WO2016202288A1 (zh) 一种即时视频的显示方法和电子设备
US9438805B2 (en) Terminal device and image capturing method
EP3520071B1 (en) Consistent spherical photo and video orientation correction
WO2018010473A1 (zh) 基于智能显示设备的无人机云台转动控制方法
JP2018019305A (ja) 携帯端末装置及び画像記録システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141001

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20151005

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee