KR101444407B1 - 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법 - Google Patents

근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법 Download PDF

Info

Publication number
KR101444407B1
KR101444407B1 KR1020100108346A KR20100108346A KR101444407B1 KR 101444407 B1 KR101444407 B1 KR 101444407B1 KR 1020100108346 A KR1020100108346 A KR 1020100108346A KR 20100108346 A KR20100108346 A KR 20100108346A KR 101444407 B1 KR101444407 B1 KR 101444407B1
Authority
KR
South Korea
Prior art keywords
control device
information
image
control
marker
Prior art date
Application number
KR1020100108346A
Other languages
English (en)
Other versions
KR20120046605A (ko
Inventor
김해용
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020100108346A priority Critical patent/KR101444407B1/ko
Priority to US13/286,671 priority patent/US20120105447A1/en
Publication of KR20120046605A publication Critical patent/KR20120046605A/ko
Application granted granted Critical
Publication of KR101444407B1 publication Critical patent/KR101444407B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42226—Reprogrammable remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227—Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1087—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera
    • A63F2300/1093—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals comprising photodetecting means, e.g. a camera using visible light
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/6045—Methods for processing data by generating or executing the game program for mapping control signals received from the input arrangement into game commands
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42684—Client identification by a unique number or address, e.g. serial number, MAC address, socket ID

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Selective Calling Equipment (AREA)

Abstract

본 발명은 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법에 관한 것으로, 주변에 위치한 제어기기의 ID 정보를 등록하고, 제어기기의 이미지 및 기능에 대한 세부 정보를 요청하여 등록하는 ID 등록부, 카메라를 통해 촬영된 제어기기의 영상을 분석하는 영상 분석부, 영상 분석부의 영상 분석 결과와 ID 등록부에 의해 등록된 제어기기의 세부 정보를 비교하여 제어기기를 인식하는 기기 인식부, 및 기기 인식부에 의해 인식된 제어기기의 ID 정보를 이용하여 제어기기로 현재상태정보를 요청하고, 제어기기로부터 수신된 현재상태정보 및 제어기기의 기능에 대한 세부 정보를 제어기기의 영상에 함께 표시하도록 하는 제어부를 포함한다.

Description

근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법{Apparatus for controlling device based on augmented reality using local wireless communication and method thereof}
본 발명은 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법에 관한 것으로, 근거리에 위치한 무선 통신 기능을 갖춘 제어기기들을 증강현실을 통해 인식하여 제어하도록 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법에 관한 것이다.
증강현실은 실사 영상의 정보를 바탕으로 컴퓨터 또는 사용자 단말에서 생성된 가상 영상을 합성시켜 사용자의 편의를 도모하는 기술이다. 이러한 증강현실 기술은 실사 영상에 나타난 물체 인식을 기본으로 한다.
물체 인식을 위한 방법은 고유한 특정 마커(marker)를 사용하는 마커 기반 방식과, 물체 이미지 자체를 인식하여 구별해내는 marker-less 방식이 있다.
마커 기반 방식은 해당 마커를 해독하여 특정 정보를 보여줄 수 있는 응용프로그램이 사용자 단말과 연계되어 동작하거나, 혹은 원거리의 서버로 해당 마커 영상 정보를 전송하고 서버로부터 해당 마커와 연관된 정보를 받아오는 형식을 취하고 있다.
Marker-less 방식은 사용자가 소지한 증강현실 기술을 제공하는 단말의 경우 성능의 한계로 인하여 대부분 실사 영상을 원거리에 위치한 서버로 보내고 서버가 해당 영상을 처리하여 물체를 구분해 내고 그로부터 제공 가능한 정보를 다시 사용자의 단말로 보내주는 방식을 이용하고 있다. Marker-less 방식에서는 좀 더 정확한 물체 인식을 위하여 사용자의 위치 정보를 얻기 위해 GPS 및 자이로 센서 정보를 추가적으로 활용하기도 한다.
이처럼 종래의 증강현실 기술은 실사영상으로부터 사용자에게 유용할만한 추가적인 정보를 제공하거나 사용자 단말에서 특정한 응용이 실행되도록 하는 정도일 뿐, 기기와의 상호작용을 통한 장치 제어와 같은 기능을 제공하진 못하였다.
본 발명의 목적은, 기존의 증강현실 기술이 실제 사물을 인식하여 추가적인 정보를 사용자에게 제공하는 수준에 그쳤던 것과는 달리, 현실 세계의 사물과 양방향 통신을 통해 정보를 얻는 것뿐만 아니라 제어 가능하도록 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법을 제공함에 있다.
또한, 본 발명의 다른 목적은, 근거리 무선통신을 이용함으로써 원거리에 위치한 서버의 도움 없이 기기 제어가 가능하도록 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법을 제공함에 있다.
상기의 목적을 달성하기 위한 본 발명에 따른 근거리 무선 통신을 이용한 증간현실 기반의 기기 제어 장치는, 주변에 위치한 제어기기의 ID 정보를 등록하고, 상기 제어기기의 이미지 및 기능에 대한 세부 정보를 요청하여 등록하는 ID 등록부, 카메라를 통해 촬영된 상기 제어기기의 영상을 분석하는 영상 분석부, 상기 영상 분석부의 영상 분석 결과와 상기 ID 등록부에 의해 등록된 상기 제어기기의 세부 정보를 비교하여 상기 제어기기를 인식하는 기기 인식부, 및 상기 기기 인식부에 의해 인식된 상기 제어기기의 ID 정보를 이용하여 상기 제어기기로 현재상태정보를 요청하고, 상기 제어기기로부터 수신된 현재상태정보 및 상기 제어기기의 기능에 대한 세부 정보를 상기 제어기기의 영상에 함께 표시하도록 하는 제어부를 포함하는 것을 특징으로 한다.
상기 제어기기의 세부 정보는 상기 제어기기의 기기명, 크기 및 색상 정보가 포함된 3D 이미지 정보, 상기 제어기기의 기능에 대한 제어 정보 중 적어도 하나를 포함하는 것을 특징으로 한다.
상기 제어부는 상기 제어기기의 현재상태정보 및 상기 제어기기의 제어 정보에 근거하여, 상기 제어기기를 제어하기 위한 증강 현실 화면을 표시하도록 하는 것을 특징으로 한다.
상기 ID 등록부는 상기 제어기기에 마커가 부착된 경우, 상기 마커로부터 상기 제어기기의 ID를 인식하여 등록하는 것을 특징으로 한다.
상기 ID 등록부는 상기 제어기기에 마커가 부착되지 않은 경우, 사용자로부터 상기 제어기기의 ID를 입력받아 등록하는 것을 특징으로 한다.
상기 ID 등록부는 상기 제어기기의 ID 정보에 근거하여 상기 제어기기로 상기 제어기기에 대한 세부정보를 요청하고, 상기 제어기기에 대한 세부정보를 상기 ID 정보에 대응하여 저장하는 것을 특징으로 한다.
또한, 본 발명에 따른 기기 제어 장치는 주변에 위치한 상기 제어기기와 무선 연결되어 신호를 송수신하는 통신모듈을 더 포함하며, 상기 통신모듈은 Zigbee, 6LoWPAN, 블루투스, WIFI, 및 적외선 통신 중 적어도 하나의 통신 방식으로 상기 제어기기와 통신하는 것을 특징으로 한다.
한편, 상기의 목적을 달성하기 위한 본 발명에 따른 근거리 무선통신을 이용한 증간현실 기반의 기기 제어 방법은, 주변에 위치한 제어기기의 ID 정보를 등록하고, 상기 제어기기의 이미지 및 기능에 대한 세부 정보를 요청하여 등록하는 단계, 카메라를 통해 촬영된 상기 제어기기의 영상을 분석하는 단계, 상기 영상에 대한 분석 결과와 기 등록된 상기 제어기기의 세부 정보를 비교하여 상기 제어기기를 인식하는 단계, 상기 제어기기에 대해 등록된 ID 정보를 이용하여 상기 제어기기로 현재상태정보를 요청하는 단계, 및 상기 제어기기로부터 수신된 현재상태정보 및 상기 제어기기의 기능에 대한 세부 정보를 상기 제어기기의 영상에 함께 표시하는 단계를 포함하는 것을 특징으로 한다.
상기 제어기기의 세부 정보는 상기 제어기기의 기기명, 크기 및 색상 정보가 포함된 3D 이미지 정보, 상기 제어기기의 기능에 대한 제어 정보 중 적어도 하나를 포함하는 것을 특징으로 한다.
상기 표시하는 단계는, 상기 제어기기의 현재상태정보 및 상기 제어기기의 제어 정보에 근거하여, 상기 제어기기를 제어하기 위한 증강 현실 화면을 표시하는 단계를 포함하는 것을 특징으로 한다.
상기 등록하는 단계는, 상기 제어기기에 마커가 부착된 경우 상기 마커를 촬영하는 단계, 및 상기 마커로부터 상기 제어기기의 ID를 인식하여 등록하는 단계를 포함하는 것을 특징으로 하는 한다.
상기 등록하는 단계는, 상기 제어기기에 마커가 부착되지 않은 경우, 사용자로부터 상기 제어기기의 ID를 입력받아 등록하는 단계를 더 포함하는 것을 특징으로 한다.
상기 등록하는 단계는, 상기 제어기기의 ID 정보에 근거하여 상기 제어기기로 상기 제어기기에 대한 세부정보를 요청하는 단계를 더 포함하고, 상기 제어기기에 대한 세부정보를 상기 ID 정보에 대응하여 저장하는 것을 특징으로 한다.
상기 등록하는 단계는, 동일한 제어기기에 대해 초기 1회만 수행하는 것을 특징으로 한다.
본 발명에 따르면, 사용자에게 익숙한 장치들의 정보를 단말에 저장해 두고 이 후 쉽게 해당 장치를 가리키는 것만으로 해당 장치를 제어할 수 있도록 함으로써 단순히 증강현실을 새로운 정보를 얻기 위한 기술로만 이용하는 것이 아니라, 하나의 동일한 사용자 단말로 다양한 장치를 무선으로 제어할 수 있어 편의성을 증대시키는 이점이 있다.
또한, 본 발명은, 원거리의 서버와의 연동이 필요치 않으며, 단순히 사용자가 해당 장치와 최초 1회 연결을 통해 장치 정보를 사용자 단말에 저장함으로써 구현되어, 기존 증강현실 정보를 얻기 위해 인터넷을 통해 서버를 연결하던 방식에 비해 빠를 뿐만 아니라 인터넷에 접속해야 하는 제약에서 벗어날 수 있는 이점이 있다.
도 1 은 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치가 적용된 시스템 구성을 설명하는데 참조되는 도이다.
도 2 는 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치의 구성을 설명하는데 참조되는 블록도이다.
도 3 및 도 4 는 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치와 제어기기 간 통신 동작을 설명하는데 참조되는 예시도이다.
도 5 및 도 6 은 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치의 제어기기를 제어하는 동작 설명에 참조되는 예시도이다.
도 7 은 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법의 제어기기 등록 과정에 대한 동작 흐름을 도시한 순서도이다.
도 8 은 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법에 대한 동작 흐름을 도시한 순서도이다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 설명한다.
도 1은 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치가 적용된 시스템 구성을 설명하는데 참조되는 도이다.
도 1에서와 같이, 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치는 사용자 단말(10)로서, 이동통신 단말기, 컴퓨터 등이 해당 될 수 있다. 이하의 설명에서는 기기 제어 장치를 사용자 단말(10)로 대신하여 설명하도록 한다. 물론, 청구항에 기재된 기기 제어 장치 또한 상세한 설명에서는 사용자 단말(10)에 해당되는 것임은 당연한 것이다.
사용자 단말(10)은 근거리에 위치한 TV, 모니터, DVD 플레이어, 혹은 가전 등의 제어기기(20)를 촬영한 영상을 통해 증강현실에서 현실 세계에 위치한 제어기기(20)의 정보를 획득하고, 해당 제어기기(20)를 제어하게 된다.
여기서, 사용자 단말(10)은 기본적으로 제어기기(20)를 촬영할 영상획득수단과 영상을 표시할 디스플레이 수단, 그리고 제어기기(20)와 통신을 위한 무선통신수단을 구비한다. 또한, 제어기기(20)는 제어기기(20)의 정보가 저장된 저장수단과 사용자 단말(10)과 통신을 위한 무선통신수단을 구비한다. 사용자 단말(10)과 제어기기(20)에 대한 구체적인 구성 설명은 도 2의 실시예를 참조하도록 한다.
도 2는 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치의 구성을 설명하는데 참조되는 블록도이다.
도 2를 참조하면, 먼저, 사용자 단말(10)은 제어부(11), 입력부(12), 카메라(13), 출력부(14), 저장부(15), 및 통신모듈(16)을 포함한다. 이때, 제어부(11)는 사용자 단말(10)의 각 부 동작을 제어한다.
입력부(12)는 사용자로부터의 제어 명령을 입력받는다. 카메라(13)는 마커가 부착된 제어기기(20)의 ID를 인식하기 위한 영상을 촬영하고, 또한 사용자 단말(10)에 등록된 제어기기(20)를 인식하기 위한 영상을 촬영한다. 출력부(14)는 카메라(13)를 통해 촬영되는 영상을 표시한다. 또한, 출력부(14)는 제어부(11)에 의해 제어기기(20)가 인식되면, 인식된 제어기기(20)의 현재상태정보 및 제어 정보를 촬영된 영상과 함께 표시한다.
저장부(15)는 카메라(13)를 통해 촬영된 영상이 저장된다. 또한, 저장부(15)는 제어부(11)에 의해 인식된 제어기기(20)의 ID 정보 및 ID 정보에 대응하는 해당 제어기기(20)의 세부정보가 저장된다. 일 예로서, 저장부(15)는 제어기기(20)의 ID 정보와 함께, 해당 제어기기(20)의 기기명, 크기 및 색상 정보를 포함하는 3D 이미지, 기능, 제어정보 등이 저장된다.
추후, 제어부(11)는 카메라(13)를 통해 제어기기(20)의 영상이 촬영되면, 저장부(15)에 등록된 제어기기(20)의 세부정보와 촬영된 영상을 비교함으로써, 해당 제어기기(20)의 ID를 인식하게 된다.
통신모듈(16)은 제어기기(20)와 무선 연결되어 신호를 송수신한다. 이때, 통신모듈(16)은 802.15.4 기반의 Zigbee, 6LoWPAN, 블루투스, WIFI, 및 적외선 통신 등을 이용하여 제어기기(20)와 통신 가능하다.
한편, ID 등록부(17)는 주변에 위치한 제어기기(20)의 정보를 확인하거나, 또는 해당 제어기기(20)의 제어를 위해 해당 제어기기(20)의 ID를 등록한다. 이때, ID 등록부(17)는 카메라를 통해 제어기기(20)가 촬영되면, 제어기기(20)에 부착된 마커를 인식함으로써 해당 제어기기(20)의 ID를 확인하게 된다. ID 등록부(17)는 마커를 통해 확인된 해당 제어기기(20)의 ID를 저장부(15)에 등록한다.
여기서, ID 등록은 초기 1회만 실시하도록 한다. 물론, ID 등록부(17)는 해당 제어기기(20)에 마커가 부착되지 않은 경우에는 사용자로부터 수동으로 해당 제어기기(20)의 ID 정보를 입력받아 등록한다.
ID 등록부(17)에 의해 제어기기(20)의 ID가 등록되면, 통신모듈(16)은 등록된 ID를 통해 해당 제어기기(20)와 무선통신을 수행한다.
이때, ID 등록부(17)는 등록된 ID를 이용하여 해당 제어기기(20)의 기기명, 크기 및 색상 정보가 포함된 3D 이미지 정보, 해당 제어기기(20)의 다양한 기능에 대한 제어 정보를 수집하고, 수집된 정보를 저장부(15)에 저장하도록 한다.
이후, 사용자 단말(10)은 해당 제어기기(20)의 크기 및 색상 정보가 포함된 3D 이미지 정보가 저장되어 있기 때문에, 사용자는 별다른 조작 없이 카메라(13)를 통해 해당 제어기기(20)를 촬영하는 것만으로도 카메라(13)로 입력되는 영상정보를 분석하여 해당 제어기기(20)가 어떤 기기인지 자동으로 분석할 수 있다.
다시 말해, 카메라(13)를 통해 제어기기(20)의 영상이 입력되면, 영상 분석부(18)는 입력된 영상을 분석하고, 기기 인식부(19)는 영상 분석부(18)의 영상 분석 결과에 근거하여 해당 제어기기(20)를 인식한다. 이때, 기기 인식부(19)는 저장부(15)에 저장된 3D 이미지 정보와 입력된 영상을 비교하여 해당 제어기기(20)를 인식한다.
다른 예로서, 기기 인식부(19)는 카메라(13)를 통해 제어기기(20)의 영상이 입력되면, 입력된 영상으로부터 제어기기(20)에 부착된 마커를 인식하고, 해당 마커를 통해 제어기기(20)를 인식하는 것 또한 가능하다.
제어부(11)는 해당 제어기기(20)가 인식되면, 저장부(15)에 저장된 해당 제어기기(20)의 정보를 추출하여 카메라(13)를 통해 입력된 제어기기(20)의 영상에 추출된 정보를 함께 표시할 수 있다. 물론, 제어부(11)는 해당 제어기기(20)의 기능 제어정보를 추출하여, 해당 제어기기(20)의 제어를 위한 증강 현실 화면을 표시할 수도 있다.
제어를 위한 증강 현실 화면은 제어기기(20)에 따라 달라질 수 있으며, 이때 단순히 제어 기능을 사용자에게 제공할 뿐만 아니라, 추가적으로 제어기기(20)의 현재의 상태 정보를 수신하여 보여주는 것도 가능하다.
한편, 본 발명에 따른 제어기기(20)는 기기 제어부(21), 저장부(22), 및 통신모듈(23)을 포함한다. 이때, 기기 제어부(21)는 제어기기(20)의 각 부 동작을 제어한다.
저장부(22)는 제어기기(20)에 대한 현재상태 정보 및 해당 제어기기(20)의 기기명, 크기 및 색상 정보를 포함하는 3D 이미지, 기능, 제어정보 등이 저장된다. 통신모듈(23)은 사용자 단말(10)과 무선 연결되어 신호를 송수신한다. 이때, 통신모듈(23)은 802.15.4 기반의 Zigbee, 6LoWPAN, 블루투스, WIFI, 및 적외선 통신 등을 이용하여 사용자 단말(10)과 통신 가능하다.
기기 제어부(21)는 해당 제어기기(20)의 ID를 통해 사용자 단말(10)로부터 해당 제어기기(20)에 대한 세부 정보의 요청이 있는 경우, 저장부(22)에 저장된 세부 정보를 추출하여 통신모듈(23)을 통해 사용자 단말(10)로 전송할 수 있다. 또한, 기기 제어부(21)는 사용자 단말(10)로부터 현재상태정보의 요청이 있을 때마다, 저장된 현재상태정보를 추출하여 사용자 단말(10)로 전송하도록 한다.
한편, 기기 제어부(21)는 사용자 단말(10)로부터 소정의 제어 명령이 입력되면, 입력된 제어 명령을 수행하고, 제어 명령을 수행한 결과에 대한 제어값을 통신모듈(23)을 통해 사용자 단말(10)로 전송하도록 한다.
물론, 도 1 및 도 2에는 도시되지 않았으나, 제어기기(20)에는 해당 제어기기(20)의 ID 정보 또는 기기 인식을 위한 마커가 부착될 수 있다.
도 3 및 도 4는 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치와 제어기기(20) 간 통신 동작을 설명하는데 참조되는 예시도이다.
특히, 도 3 및 도 4는 초기에 제어기기의 ID를 등록하기 위해 해당 제어기기로부터 정보를 입력받는 실시예를 나타낸 것이다.
먼저, 도 3은 제어기기(20)에 마커가 부착된 경우를 나타낸 것이다.
도 3에서와 같이, 사용자 단말(10)은 마커(25a, 25b, 25c, 25d)가 부착된 제어기기(20)의 ID를 등록하기 위하여 카메라(13)를 통해 해당 제어기기(20)에 부착된 마커들(25a, 25b, 25c, 25d)을 촬영한다.
이때, 사용자 단말(10)은 촬영된 마커들(25a, 25b, 25c, 25d)로부터 손쉽게 해당 제어기기(20)의 ID 정보를 획득할 수 있다. 따라서, 사용자 단말(10)은 해당 제어기기(20)로부터 수신된 ID를 등록함으로써, 추후 해당 ID를 통해 제어기기(20)와 통신 가능하게 된다.
한편, 도 4는 제어기기(20)에 마커가 부착되지 않은 경우를 나타낸 것이다.
도 4에서와 같이, 마커가 부착되지 않은 제어기기(20)의 경우, 사용자 단말(10)은 사용자로부터 제어기기(20)의 ID를 수동으로 입력받을 수 있다. 물론, 사용자는 해당 제어기기의 사용 설명서 또는 해당 제어기기에 기재된 ID 정보를 확인할 수 있다.
이때, 제어기기(20)는 사용자로부터 입력된 해당 제어기기(20)의 ID를 등록함으로써, 추후 해당 ID를 통해 제어기기(20)와 통신 가능하게 된다.
도 5 및 도 6은 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치의 제어기기를 제어하는 동작 설명에 참조되는 예시도이다.
도 5에 도시된 바와 같이, 본 발명에 따른 사용자 단말(10)은 카메라(13)를 통해 현재상태를 확인하거나 제어하고자 하는 제어기기(20)를 촬영하면, 사용자 단말(10)의 화면(14a)에 표시된 영상을 분석함으로써 기 등록된 기기 중 촬영된 영상에 포함된 제어기기(20)를 인식하게 된다.
한편, 도 6에 도시된 바와 같이, 사용자 단말(10)은 제어기기(20)에 마커(25a, 35b, 25c, 25d)가 부착된 상태에서 카메라(13)를 통해 해당 제어기기(20)를 촬영하면, 사용자 단말(10)의 화면(14b)에 표시된 영상의 마커(25a, 35b, 25c, 25d)를 통해 해당 제어기기(20)를 인식하게 된다.
따라서, 사용자 단말(10)은 인식된 제어기기(20)의 등록된 정보에 근거하여 해당 제어기기(20)로부터 현재상태정보를 수신하여 화면(14a, 14b)에 표시된 영상에 같이 표시하거나, 등록된 제어정보 또는 제어기기(20)로부터 새로 수신된 제어정보를 화면(14a, 14b)에 표시된 영상에 같이 표시할 수 있게 된다.
이하에서는, 상기와 같이 구성되는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치에 대한 동작 방법을 보다 상세히 설명한다.
도 7은 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법의 제어기기 등록 과정에 대한 동작 흐름을 도시한 순서도이다.
도 7에 도시된 바와 같이, 본 발명에 따른 사용자 단말(10)은 제어를 위한 제어기기(20)를 등록하고자 하는 경우, 등록할 제어기기(20)에 마커가 존재하는지 확인한다.
만일, 해당 제어기기(20)에 마커가 존재하면(S100), 카메라(13)를 동작하여 해당 제어기기(20)의 마커를 촬영하고(S110), 촬영된 마커를 통해 해당 제어기기(20)의 ID를 등록한다(S120).
한편, 해당 제어기기(20)에 마커가 존재하지 않으면(S100), 사용자 단말(10)은 사용자로부터 해당 제어기기(20)에 대한 ID 정보를 수동으로 입력받아(S130), 해당 제어기기(20)의 ID를 등록한다(S140).
이후, 사용자 단말(10)은 등록된 ID를 이용하여 해당 제어기기(20)와 통신을 수행하고, 이때 해당 제어기기(20)의 ID에 대응하여 세부정보를 저장한다(S150). 여기서, 제어기기(20)의 세부정보는 기기명, 크기 및 색상 정보를 포함하는 3D 이미지, 기능, 제어정보 등을 포함한다.
이로써, 제어기기(20)에 대한 등록 과정을 완료된다. 도 6에서와 같이 제어기기(20)에 대한 등록이 완료되면, 이후 도 7의 과정을 통해 해당 제어기기(20)의 현재상태를 확인하거나 제어할 수 있게 된다.
도 8은 본 발명에 따른 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법에 대한 동작 흐름을 도시한 순서도이다.
도 8에 도시된 바와 같이, 본 발명에 따른 사용자 단말(10)은 제어기기(20)의 현재상태를 확인하거나 제어하기 위하여 우선 카메라(13)를 구동하여 대상이 되는 제어기기(20)를 촬영한다(S200), 사용자 단말(10)은 카메라(13)를 통해 촬영된 영상을 분석하여(S210), 촬영된 영상에 해당되는 제어기기(20)를 인식한다(S220).
이때, 영상에 해당되는 제어기기(20)가 사용자 단말(10)에 기 등록된 기기가 아닌 경우에는(S230), 도 7의 'S100' 과정부터 다시 수행함으로써 영상에 해당되는 제어기기(20)를 사용자 단말(10)에 등록한 후 'S200' 과정부터 다시 수행하도록 한다.
한편, 영상에 해당되는 제어기기(20)가 사용자 단말(10)에 기 등록된 기기인 경우(S230), 제어기기(20)의 영상정보와 기 등록된 정보를 비교함으로써 해당 제어기기(20)를 인식할 수 있다.
만일, 제어기기(20)에 마커가 부착된 경우, 사용자 단말(10)은 입력된 영상의 마커를 통해 제어기기(20)를 인식하는 것 또한 가능하다.
사용자 단말(10)은 제어기기(20)의 ID를 인식하고, 인식된 ID를 이용하여 해당 제어기기(20)로 현재상태정보 및 제어 정보를 수신한다(S240). 물론, 사용자 단말(10)은 기 등록된 해당 제어기기(20)의 제어 정보를 이용할 경우에는 해당 제어기기(20)로 현재상태정보만을 요청할 수도 있다.
이후, 사용자 단말(10)은 'S200' 과정에서 촬영된 영상에 해당 제어기기(20)에 대한 현재상태정보 및 제어정보를 표시하도록 한다(S250). 따라서, 사용자가 해당 영상에 포함된 정보를 통해 해당 제어기기(20)의 현재상태를 확인할 수 있을 뿐만 아니라, 제어정보를 통해 해당 제어기기(20)를 제어할 수도 있게 된다.
만일, 해당 영상에 표시된 제어 정보에 근거하여 사용자로부터 해당 제어기기(20)에 대한 제어명령이 입력된 경우(S260), 사용자 단말(10)은 사용자로부터 입력된 제어명령을 해당 제어기기(20)로 전송하고(S270), 제어명령에 대응하여 해당 제어기기(20)로부터 수신된 제어값을 저장한다(S280).
한편, 사용자 단말(10)이 현재 인식된 해당 제어기기(20) 외에 다른 제어기기(20)를 촬영한 경우(S290), 'S210' 내지 'S280' 과정을 반복하여 수행하도록 한다.
이상과 같이 본 발명에 의한 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법은 예시된 도면을 참조로 설명하였으나, 본 명세서에 개시된 실시예와 도면에 의해 본 발명은 한정되지 않고, 기술사상이 보호되는 범위 이내에서 응용될 수 있다.
10: 사용자 단말 11: 제어부
12: 입력부 13: 카메라
14: 출력부 15: 저장부
16: 통신모듈 20: 제어기기
21: 기기 제어부 22: 저장부
23: 통신모듈 25a, 25b, 25c, 25d: 마커

Claims (14)

  1. 주변에 위치한 제어기기의 ID 정보를 등록하고, 상기 제어기기의 이미지 및 기능에 대한 세부 정보를 요청하여 등록하되, 상기 제어기기의 ID 정보에 근거하여 상기 제어기기로 상기 제어기기에 대한 세부정보를 요청하고, 상기 제어기기에 대한 세부정보를 상기 ID 정보에 대응하여 등록하는 ID 등록부;
    카메라를 통해 촬영된 상기 제어기기의 영상을 분석하는 영상 분석부;
    상기 영상 분석부의 영상 분석 결과와 상기 ID 등록부에 의해 등록된 상기 제어기기의 세부 정보를 비교하여 상기 제어기기를 인식하는 기기 인식부; 및
    상기 기기 인식부에 의해 인식된 상기 제어기기의 ID 정보를 이용하여 상기 제어기기로 현재상태정보를 요청하고, 상기 제어기기로부터 수신된 현재상태정보 및 상기 제어기기의 기능에 대한 세부 정보를 상기 제어기기의 영상에 함께 표시하도록 하는 제어부;를 포함하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치.
  2. 청구항 1에 있어서,
    상기 제어기기의 세부 정보는,
    상기 제어기기의 기기명, 크기 및 색상 정보가 포함된 3D 이미지 정보, 상기 제어기기의 기능에 대한 제어 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치.
  3. 청구항 2에 있어서,
    상기 제어부는,
    상기 제어기기의 현재상태정보 및 상기 제어기기의 제어 정보에 근거하여, 상기 제어기기를 제어하기 위한 증강 현실 화면을 표시하도록 하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치.
  4. 청구항 1에 있어서,
    상기 ID 등록부는,
    상기 제어기기에 마커가 부착된 경우, 상기 제어기기에 부착된 마커를 통해 상기 제어기기의 ID를 인식하여 등록하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치.
  5. 청구항 1에 있어서,
    상기 ID 등록부는,
    상기 제어기기에 마커가 부착되지 않은 경우, 사용자로부터 상기 제어기기의 ID를 입력받아 등록하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치.
  6. 삭제
  7. 청구항 1에 있어서,
    주변에 위치한 상기 제어기기와 무선 연결되어 신호를 송수신하는 통신모듈;을 더 포함하며,
    상기 통신모듈은, Zigbee, 6LoWPAN, 블루투스, WIFI, 및 적외선 통신 중 적어도 하나의 통신 방식으로 상기 제어기기와 통신하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치.
  8. 주변에 위치한 제어기기의 ID 정보를 등록하고, 상기 제어기기의 이미지 및 기능에 대한 세부 정보를 요청하여 등록하되, 상기 제어기기의 ID 정보에 근거하여 상기 제어기기로 상기 제어기기에 대한 세부정보를 요청하고, 상기 제어기기에 대한 세부정보를 상기 ID 정보에 대응하여 등록하는 단계;
    카메라를 통해 촬영된 상기 제어기기의 영상을 분석하는 단계;
    상기 영상에 대한 분석 결과와 기 등록된 상기 제어기기의 세부 정보를 비교하여 상기 제어기기를 인식하는 단계;
    상기 제어기기에 대해 등록된 ID 정보를 이용하여 상기 제어기기로 현재상태정보를 요청하는 단계; 및
    상기 제어기기로부터 수신된 현재상태정보 및 상기 제어기기의 기능에 대한 세부 정보를 상기 제어기기의 영상에 함께 표시하는 단계;를 포함하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법.
  9. 청구항 8에 있어서,
    상기 제어기기의 세부 정보는,
    상기 제어기기의 기기명, 크기 및 색상 정보가 포함된 3D 이미지 정보, 상기 제어기기의 기능에 대한 제어 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법.
  10. 청구항 9에 있어서,
    상기 표시하는 단계는,
    상기 제어기기의 현재상태정보 및 상기 제어기기의 제어 정보에 근거하여, 상기 제어기기를 제어하기 위한 증강 현실 화면을 표시하는 단계;를 포함하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법.
  11. 청구항 8에 있어서,
    상기 등록하는 단계는,
    상기 제어기기에 마커가 부착된 경우 상기 마커를 촬영하는 단계; 및
    상기 마커로부터 상기 제어기기의 ID를 인식하여 등록하는 단계;를 포함하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법.
  12. 청구항 8에 있어서,
    상기 등록하는 단계는,
    상기 제어기기에 마커가 부착되지 않은 경우, 사용자로부터 상기 제어기기의 ID를 입력받아 등록하는 단계;를 더 포함하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법.
  13. 삭제
  14. 청구항 8에 있어서,
    상기 등록하는 단계는,
    동일한 제어기기에 대해 초기 1회만 수행하는 것을 특징으로 하는 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 방법.
KR1020100108346A 2010-11-02 2010-11-02 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법 KR101444407B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020100108346A KR101444407B1 (ko) 2010-11-02 2010-11-02 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법
US13/286,671 US20120105447A1 (en) 2010-11-02 2011-11-01 Augmented reality-based device control apparatus and method using local wireless communication

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100108346A KR101444407B1 (ko) 2010-11-02 2010-11-02 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20120046605A KR20120046605A (ko) 2012-05-10
KR101444407B1 true KR101444407B1 (ko) 2014-09-29

Family

ID=45996192

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100108346A KR101444407B1 (ko) 2010-11-02 2010-11-02 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법

Country Status (2)

Country Link
US (1) US20120105447A1 (ko)
KR (1) KR101444407B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11363522B2 (en) 2018-07-11 2022-06-14 Samsung Electronics Co., Ltd. Method of controlling electronic apparatus and computer-readable recording medium

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
US10180572B2 (en) 2010-02-28 2019-01-15 Microsoft Technology Licensing, Llc AR glasses with event and user action control of external applications
WO2011106797A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Projection triggering through an external marker in an augmented reality eyepiece
US20150309316A1 (en) 2011-04-06 2015-10-29 Microsoft Technology Licensing, Llc Ar glasses with predictive control of external device based on event input
US8738754B2 (en) * 2011-04-07 2014-05-27 International Business Machines Corporation Systems and methods for managing computing systems utilizing augmented reality
KR101330807B1 (ko) * 2011-08-31 2013-11-18 주식회사 팬택 증강 현실을 활용한 데이터 공유 장치 및 방법
US9773345B2 (en) * 2012-02-15 2017-09-26 Nokia Technologies Oy Method and apparatus for generating a virtual environment for controlling one or more electronic devices
US20130260360A1 (en) * 2012-03-27 2013-10-03 Sony Corporation Method and system of providing interactive information
FR2990286B1 (fr) * 2012-05-07 2019-09-06 Schneider Electric Industries Sas Procede d'affichage en realite augmentee d'une information relative a un equipement cible sur un ecran d'un dispositif electronique, produit programme d'ordinateur, dispositif electronique et equipement electrique associes
US9635159B2 (en) * 2012-05-08 2017-04-25 Nokia Technologies Oy Method and apparatus for providing immersive interaction via everyday devices
CN103577071A (zh) * 2012-07-23 2014-02-12 鸿富锦精密工业（深圳）有限公司 产品使用说明书显示系统及方法
KR102047494B1 (ko) * 2012-09-10 2019-11-21 삼성전자주식회사 투명 디스플레이 장치 및 그 객체 선택 방법
JP5964190B2 (ja) * 2012-09-27 2016-08-03 京セラ株式会社 端末装置
KR101973934B1 (ko) * 2012-10-19 2019-04-30 한국전자통신연구원 증강현실 서비스 제공 방법, 이를 이용하는 사용자 단말 장치 및 액세스 포인트
US9607438B2 (en) * 2012-10-22 2017-03-28 Open Text Corporation Collaborative augmented reality
US9791921B2 (en) 2013-02-19 2017-10-17 Microsoft Technology Licensing, Llc Context-aware augmented reality object commands
JP2016524397A (ja) 2013-05-20 2016-08-12 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ 画像を使用した遠隔制御プログラミング
WO2015030786A1 (en) * 2013-08-30 2015-03-05 Hewlett-Packard Development Company, L.P. Augmented reality device interfacing
TWI526878B (zh) * 2013-10-04 2016-03-21 大同股份有限公司 控制電子裝置的方法、手持電子裝置與監控系統
KR102179154B1 (ko) * 2013-11-27 2020-11-16 한국전자통신연구원 투명 디스플레이를 이용한 전자기기 제어방법 및 이를 이용한 장치
KR20160142772A (ko) * 2015-06-03 2016-12-13 디에스글로벌 (주) 색칠놀이를 위한 증강현실 서비스 방법 및 시스템
JP2017021656A (ja) * 2015-07-13 2017-01-26 キヤノン株式会社 表示装置及びその制御方法
US10908694B2 (en) 2016-02-01 2021-02-02 Microsoft Technology Licensing, Llc Object motion tracking with remote device
US10120635B2 (en) * 2016-03-09 2018-11-06 Samsung Electronics Co., Ltd. Configuration and operation of display devices including device management
CN114895864A (zh) * 2016-05-06 2022-08-12 富士胶片商业创新有限公司 信息处理装置、信息处理方法以及记录介质
US10554435B2 (en) * 2017-08-14 2020-02-04 Arm Limited Systems and methods for implementing digital content effects
CN107592520B (zh) * 2017-09-29 2020-07-10 京东方科技集团股份有限公司 Ar设备的成像装置及成像方法
US11131973B2 (en) * 2017-12-06 2021-09-28 Arris Enterprises Llc System and method of IOT device control using augmented reality
US11354815B2 (en) * 2018-05-23 2022-06-07 Samsung Electronics Co., Ltd. Marker-based augmented reality system and method
KR20190109337A (ko) 2019-09-06 2019-09-25 엘지전자 주식회사 증강현실 기반의 기기 제어 장치 및 그 방법
WO2022009338A1 (ja) * 2020-07-08 2022-01-13 マクセル株式会社 情報処理端末、遠隔制御方法およびプログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005065118A (ja) * 2003-08-19 2005-03-10 Hitachi Ltd リモコン機能付き携帯端末及びリモコンサーバ
KR20070009263A (ko) * 2005-07-15 2007-01-18 삼성전자주식회사 통합 리모콘 및 그 제어기기 인식방법
KR20070076304A (ko) * 2006-01-18 2007-07-24 삼성전자주식회사 증강 현실 장치 및 방법
KR20100046805A (ko) * 2008-10-28 2010-05-07 삼성전자주식회사 휴대 단말기의 메뉴수행 장치 및 방법

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6407779B1 (en) * 1999-03-29 2002-06-18 Zilog, Inc. Method and apparatus for an intuitive universal remote control system
US7787886B2 (en) * 2003-02-24 2010-08-31 Invisitrack, Inc. System and method for locating a target using RFID
US7548833B2 (en) * 2004-03-25 2009-06-16 Siemens Building Technologies, Inc. Method and apparatus for graphical display of a condition in a building system with a mobile display unit
US7920071B2 (en) * 2006-05-26 2011-04-05 Itt Manufacturing Enterprises, Inc. Augmented reality-based system and method providing status and control of unmanned vehicles
US8830267B2 (en) * 2009-11-16 2014-09-09 Alliance For Sustainable Energy, Llc Augmented reality building operations tool
KR20110118421A (ko) * 2010-04-23 2011-10-31 엘지전자 주식회사 증강 원격제어장치, 증강 원격제어장치 제어방법 및 그 시스템
KR101229078B1 (ko) * 2009-12-21 2013-02-04 한국전자통신연구원 실내외 상황인식 기반의 모바일 혼합현실 콘텐츠 운용 장치 및 방법
KR101082285B1 (ko) * 2010-01-29 2011-11-09 주식회사 팬택 증강 현실 제공 단말기 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005065118A (ja) * 2003-08-19 2005-03-10 Hitachi Ltd リモコン機能付き携帯端末及びリモコンサーバ
KR20070009263A (ko) * 2005-07-15 2007-01-18 삼성전자주식회사 통합 리모콘 및 그 제어기기 인식방법
KR20070076304A (ko) * 2006-01-18 2007-07-24 삼성전자주식회사 증강 현실 장치 및 방법
KR20100046805A (ko) * 2008-10-28 2010-05-07 삼성전자주식회사 휴대 단말기의 메뉴수행 장치 및 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11363522B2 (en) 2018-07-11 2022-06-14 Samsung Electronics Co., Ltd. Method of controlling electronic apparatus and computer-readable recording medium

Also Published As

Publication number Publication date
US20120105447A1 (en) 2012-05-03
KR20120046605A (ko) 2012-05-10

Similar Documents

Publication Publication Date Title
KR101444407B1 (ko) 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법
KR102247675B1 (ko) 혼합 현실 시스템들을 위한 로컬화 결정
US20190092345A1 (en) Driving method, vehicle-mounted driving control terminal, remote driving terminal, and storage medium
EP2093650B1 (en) User interface system based on pointing device
JP5597772B2 (ja) 遠隔制御システム、遠隔制御方法、通信装置及びプログラム
WO2016110903A1 (ja) 人物追尾システム及び人物追尾方法
KR20180003569A (ko) 디바이스를 제어하는 방법 및 장치, 및 단말 디바이스
US9392248B2 (en) Dynamic POV composite 3D video system
JP2011160403A (ja) 通信端末及びそのデータ伝送方法
KR101959366B1 (ko) 무인기와 무선단말기 간의 상호 인식 방법
WO2017011945A1 (zh) 姿态数据输入装置及方法、云台控制装置及方法
KR101757884B1 (ko) 전장 상황 인식 기반 상황 정보 제공 장치 및 그 방법
KR20160024848A (ko) 이미지를 이용한 리모컨 프로그래밍
KR20140100035A (ko) 전자기기를 제어하기 위한 장치 및 방법
KR100946673B1 (ko) 디지털기기의 원격 제어 방법 및 시스템
US10810867B2 (en) Remote control system, remote control method, and program
US11689707B2 (en) Techniques for calibrating a stereoscopic camera in a device
CN109564084B (zh) 记录介质、位置推断装置以及位置推断方法
US20220066223A1 (en) Head mounted display and control method thereof
JP2018103823A (ja) 情報処理装置、システム、及びその制御方法、プログラム
EP3970817A1 (en) Head mounted display and control method thereof
KR102435802B1 (ko) 증강 현실 기반의 캠퍼스 안내 장치 및 방법
WO2018230111A1 (ja) 情報処理装置、情報処理方法、及び情報処理システム
US20200382707A1 (en) System for controlling the zoom of a set of cameras and method of controlling a set of cameras
US20210195090A1 (en) Information processing device, information processing method, and information processing program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170828

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190826

Year of fee payment: 6