KR20110101328A - 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기 - Google Patents

제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기 Download PDF

Info

Publication number
KR20110101328A
KR20110101328A KR1020100020265A KR20100020265A KR20110101328A KR 20110101328 A KR20110101328 A KR 20110101328A KR 1020100020265 A KR1020100020265 A KR 1020100020265A KR 20100020265 A KR20100020265 A KR 20100020265A KR 20110101328 A KR20110101328 A KR 20110101328A
Authority
KR
South Korea
Prior art keywords
terminal
external screen
user
screen
external
Prior art date
Application number
KR1020100020265A
Other languages
English (en)
Other versions
KR101196761B1 (ko
Inventor
홍상우
신상희
유병철
임민주
김정윤
이유종
박명순
강석훈
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to KR1020100020265A priority Critical patent/KR101196761B1/ko
Publication of KR20110101328A publication Critical patent/KR20110101328A/ko
Application granted granted Critical
Publication of KR101196761B1 publication Critical patent/KR101196761B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Projection Apparatus (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 인접한 단말기로 콘텐츠를 쉽게 전송할 수 있는 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기에 관한 것이다. 본 발명에 따르면, 단말기는 외부 화면을 투영할 공간을 촬영하여 상기 외부 화면의 배경 색상을 검출하고, 상기 배경 색상과 구분되도록 상기 외부 화면의 기준 색상을 설정한다. 그리고, 상기 기준 색상으로 이루어지고 하나 이상의 콘텐츠를 표시하는 외부 화면을 단말기의 외부로 투영한다. 그리고, 상기 투영한 외부 화면에 대한 사용자의 드래그 동작에 따라서, 선택된 콘텐츠를 인접 단말기로 전송한다.

Description

제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기{Method for transmitting contents using gesture recognition and terminal thereof}
본 발명은 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기에 관한 것으로서, 더욱 상세하게는 하나 이상의 콘텐츠가 표시된 외부 화면을 단말기의 외부 공간에 투영하고, 상기 외부 화면에 대한 사용자의 드래그 동작을 인식하여 선택된 콘텐츠를 인접한 단말기로 전송하는 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기에 관한 것이다.
최근 정보 통신 기술이 급속히 발전하면서, 원격지의 상대방과 무선으로 통화할 수 있는 이동 통신 단말, PDA(Portable Data Assistant), PMP(Portable Multimedia Player) 등과 같이 사용자가 휴대하면서 사용할 수 있는 다양한 종류의 휴대 단말기가 대중적으로 보급되고 있다.
이 중에서도 특히 이동 통신 단말은, 장소 및 시간에 관계없이 통화 서비스를 제공한다는 잇점 때문에, 남녀 노소를 불문하고 사용하게 되면서, 생활 필수품으로 자리 잡아 가고 있다. 더하여, 이동 통신 단말기는, 이동통신망이 발달하고, 무선 콘텐츠가 증가하고, 프로세서 및 메모리 기술이 비약적으로 발전하면서 노트북과 개인용 컴퓨터 장치와 그 기능상의 경쟁을 벌이는 시대에 이르게 되었다.
한편, 이동 통신 단말기를 포함하는 기존의 단말기는, 통상적으로, 키패드, 터치 스크린 등과 같은 입력 수단을 사용자가 조작하여 단말기의 제어 명령이나 데이터를 입력한다.
이러한 단말기 간에 콘텐츠를 전송하는 경우, 사용자는 키패드나 터치 스크린을 조작하여, 먼저 콘텐츠를 전송할 상대 단말기와의 무선 통신을 연결하고, 전송하고자 하는 콘텐츠를 선택한 후, 상기 선택한 콘텐츠에 대한 전송 명령을 지시하여야 한다. 다른 방법으로는 콘텐츠를 전송할 단말기의 식별번호나, IP 어드레스나, 콘텐츠를 전송할 상대방의 이메일 주소 등과 같은 목적지 정보를 사용자가 일일이 입력한 후, 선택한 콘텐츠를 첨부하여 전송해야 한다.
이에 따르면, 단말기 간에 콘텐츠를 전송하기 위하여 입력 수단에 대한 사용자 조작(명령 입력)이 여러 번 이루어져야 하기 때문에, 사용자 입장에서 번거롭다는 문제점이 있다. 특히, 대부분의 휴대 단말기는 사용자가 손에 쥐고 있는 상태에서 이용되기 때문에, 콘텐츠 전송과 같은 하나의 기능을 수행하기 위하여 여러 번 사용자 명령을 입력하여야 하는 것은 사용자 불편을 가중시키게 된다.
이에, 본 발명은 단말기 간의 콘텐츠 전송을 더욱 간단하게 구현하기 위한 것으로서, 하나 이상의 콘텐츠를 표시하는 외부 화면을 단말기의 외부 공간에 투영하고, 상기 외부 화면에 대한 사용자의 드래그 동작을 인식하여, 선택된 콘텐츠를 인접 단말기로 전송하는 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기를 제공하고자 한다.
상기 과제를 해결하기 위한 수단으로서, 본 발명은, 프로젝터, 제스처 검출부, 카메라, 제어부, 및 통신 인터페이스부를 포함하는 단말기를 제공한다.
프로젝터는 단말기의 외부 공간에 하나 이상의 콘텐츠를 표시하는 외부 화면을 투영한다. 제스처 검출부는 상기 프로젝터에 의해 투영된 외부 화면에 대한 사용자의 드래그 동작을 검출한다. 상기 카메라는 상기 외부 화면이 투영되는 공간을 촬영한다. 제어부는 상기 외부 화면을 프로젝터에 제공하고, 상기 카메라의 촬영 영상으로부터 외부 화면의 배경 색상을 검출하여, 배경 색상과 구분되도록 상기 외부 화면의 기준 색상을 제어하고, 상기 외부 화면의 투영 이후에 상기 제스처 검출부를 통해 사용자의 드래그 동작이 검출되면, 선택된 콘텐츠의 정보를 인접 단말기로 전송시킨다. 통신 인터페이스부는 상기 제어부의 제어에 따라서 상기 인접 단말기와 통신을 연결하여, 상기 선택된 콘텐츠를 상기 인접 단말기로 전송한다.
본 발명에 의한 단말기에 있어서, 상기 제어부는 상기 드래그 동작에서의 드래그 방향 또는 드래그가 끝나는 위치에 있는 다른 단말기를 상기 인접 단말기로 인식하고, 상기 인접 단말기와 통신을 연결하여 상기 선택된 콘텐츠를 전송한다.
본 발명에 의한 단말기에 있어서, 상기 프로젝터는 외장형으로 구현되어, 상기 단말기의 제어부와 입출력 인터페이스를 통해 연결된다.
본 발명에 의한 단말기에 있어서, 상기 제스처 검출부는 적외선 위치 센서, 초음파 위치 센서, RF 위치 센서, 및 카메라 중에서 어느 하나를 이용하여 사용자의 드래그 동작을 검출할 수 있다.
본 발명에 의한 단말기에 있어서, 상기 제스처 검출부가 카메라를 이용하여 드래그 동작을 검출하는 경우, 상기 제스처 검출부는 상기 외부 화면이 투영되는 위치를 촬영하는 카메라와 일체로 구현될 수 있으며, 또한, 상기 제어부는 상기 카메라로 촬영된 외부 화면에 대한 영상의 픽셀 변화로부터 사용자의 드래그 동작을 인식한다.
본 발명에 의한 단말기에 있어서, 상기 외부 화면은 하나의 사용자 인터페이스 화면 또는 복수의 사용자 인터페이스 화면의 집합일 수 있다.
본 발명에 의한 단말기에 있어서, 상기 외부 화면이 복수의 사용자 인터페이스 화면의 집합인 경우, 상기 제어부가 시분할 방식을 이용하여, 상기 복수의 사용자 인터페이스 화면을 프로젝션의 시간 별로, 서로 다른 방향으로 투영하도록 상기 프로젝터를 제어하거나, 상기 프로젝터가 서로 다른 공간으로 투영하는 복수의 프로젝션 파트로 이루어져, 상기 복수의 프로젝션 파트가 상기 복수의 사용자 인터페이스 화면을 동시에 투영할 수 있다.
상기 과제를 해결하기 위한 다른 수단으로서, 본 발명은 하나 이상의 콘텐츠를 표시하는 외부 화면이 투영될 단말기의 외부 공간을 촬영하여 상기 외부 화면의 배경 색상을 검출하고, 상기 배경 색상과 구분되도록 상기 외부 화면의 기준 색상을 설정하는 단계; 상기 외부 화면을 상기 단말기의 외부 공간에 투영하는 단계; 상기 투영한 외부 화면에 대한 사용자의 드래그 동작을 감지하는 단계; 및 상기 사용자의 드래그 동작을 감지하면, 상기 드래그 동작에 따라서 선택된 콘텐츠를 인접 단말기로 전송하는 단계를 포함하는 제스처 인식을 이용한 콘텐츠 전송 방법을 제공한다.
본 발명에 의한 제스처 인식을 이용한 콘텐츠 전송 방법에 있어서, 상기 인접 단말기는 상기 드래그 방향 또는 드래그가 끝나는 위치에 있는 다른 단말기인 것을 특징으로 한다.
본 발명에 의한 제스처 인식을 이용한 콘텐츠 전송 방법에 있어서, 상기 사용자의 드래그 동작을 감지하는 단계는, 적외선 위치 센서 또는 초음파 위치 센서 또는 RF 위치 센서를 통해 상기 화면에 대한 사용자의 드래그 동작을 감지하거나, 상기 외부 화면을 카메라로 촬영하고, 상기 촬영된 영상에서의 픽셀변화를 통해 사용자의 드래그 동작을 감지할 수 있다.
본 발명에 의한 제스처 인식을 이용한 콘텐츠 전송 방법에 있어서, 상기 외부 화면은, 하나의 사용자 인터페이스 화면 또는 복수의 사용자 인터페이스 화면의 집합인 것을 특징으로 한다.
본 발명에 의한 제스처 인식을 이용한 콘텐츠 전송 방법에 있어서, 상기 외부 화면을 상기 단말기의 외부 공간에 투영하는 단계는, 시분할 방식을 이용하여, 상기 복수의 사용자 인터페이스 화면을 프로젝션 시간 별로, 서로 다른 공간에 투영하거나, 복수의 프로젝션 파트를 통해, 상기 복수의 사용자 인터페이스 화면을 서로 다른 공간에 동시에 투영할 수 있다.
본 발명에 따른 단말기는 프로젝터를 통해 하나 이상의 콘텐츠를 표시하는 외부 화면을 단말기의 외부 공간에 투영하고, 상기 외부 화면에 대한 사용자의 드래그 동작을 감지 시에, 상기 드래그 동작의 방향 및 드래그 된 위치에 대응하는 인접 단말기로 선택된 콘텐츠를 전송함으로써, 사용자가 복잡한 단말기 조작 없이 간단하게 콘텐츠를 선택하여 다른 단말기로 전송할 수 있게 된다.
더하여, 본 발명은 외부 화면을 투영하는데 있어서, 외부 화면이 투영되는 단말기의 외부 공간을 촬영하여, 배경 색상을 검출하고, 배경 색상과 구분되도록 상기 외부 화면의 기준 색상을 설정함으로써, 외부 화면으로 투영되는 정보를 사용자가 정확하게 인식할 수 있도록 한다.
또한, 본 발명은, 단말기에서 외부 화면으로서 하나의 사용자 인터페이스 화면을 투영함은 물론, 복수의 사용자 인터페이스 화면을 서로 다른 공간에 거의 동시에 투영함으로써, 단말기를 통한 멀티태스킹 작업을 보다 용이하게 할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 단말기의 구성을 나타낸 블럭도이다.
도 2는 본 발명의 다른 실시 예에 따른 단말기의 구성을 나타낸 블럭도이다.
도 3은 본 발명에 따른 단말기에 있어서, 제스처 검출부의 구현 예를 보인 도면이다.
도 4는 본 발명에 따른 단말기에 있어서, 제스처 검출부의 다른 구현 예를 보인 도면이다.
도 5는 본 발명에 따른 단말기에 있어서, 드래그 동작에 따른 콘텐츠 전송 과정을 보인 예시도이다.
도 6은 본 발명에 따른 제스처 인식을 이용한 콘텐츠 전송 방법을 나타낸 순서도이다.
이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 다만, 하기의 설명 및 첨부된 도면에서 본 발명의 요지를 흐릴 수 있는 공지 기능 또는 구성에 대한 상세한 설명은 생략한다. 또한, 설명의 일관성을 위하여, 도면 전체에 걸쳐 동일한 구성 요소들은 가능한 한 동일한 도면 부호로 나타낸다.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 '연결'되어 있다고 할 때, 이는 '직접적으로 연결'되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 '간접적으로 연결'되어 있는 경우도 포함한다. 또한 어떤 구성 요소를 '포함'한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
도 1 및 도 2는 본 발명의 실시 예에 따른 단말기의 구성을 나타낸 블럭도이다.
상기 도 1 및 도 2를 참조하면, 본 발명에 따른 단말기(100)는, 프로젝터(110)와, 제스처 검출부(120)와, 제어부(130)와, 카메라(140)와, 통신 인터페이스부(150)를 포함한다.
상기 단말기(100)는, 사용자의 명령에 따라서 임의의 기능을 수행하고, 상기 수행 결과를 시각적으로 표시하는 사용자 장치이며, 사용자의 명령을 입력 받아 단말기(100)의 기능 수행을 제어하는 부분에 본 발명이 적용된다. 상기 단말기(100)로, 예를 들면, 이동 통신 단말, 무선 랜 단말, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 포함될 수 있다.
상기 프로젝터(110)는, 단말기(100)의 외부 공간에 하나 이상의 콘텐츠를 표시하는 외부 화면을 투영한다. 상기 프로젝터(110)는 도 1에 도시된 바와 같이, 단말기(100) 내부에 설치되는 내장형으로 구현될 수도 있고, 도 2에 도시된 바와 같이, 단말기(100)의 외부에 위치하는 외장형으로 구현되어, 입출력 인터페이스(160)를 통해 단말기(100)의 제어부(130)와 연결되는 형태로 이용될 수 있다.
그리고, 상기 외부 화면은, 단말기(100)의 기능과 관련된 사용자 인터페이스 화면으로서, 특히, 하나 이상의 콘텐츠가 표시된다. 또한, 상기 외부 화면은, 하나의 사용자 인터페이스 화면으로 이루어질 수도 있고, 복수의 사용자 인터페이스 화면의 집합으로 이루어질 수도 있다. 예를 들어, 상기 단말기(100)가 멀티 태스킹을 지원하는 경우, 멀티 태스킹에 의해 동시에 구동되는 복수의 기능에 각각 관련되는 복수의 사용자 인터페이스 화면의 집합이 외부 화면으로 제공될 수 있다. 이러한 외부 화면은 단말기(100)의 동작 모드에 따라서 달라진다.
상기 외부 화면이 복수의 사용자 인터페이스 화면의 집합인 경우, 복수의 사용자 인터페이스 화면을 동시에 투영하기 위하여, 본 발명의 일 실시 예에서는 상기 프로젝터(110)가 투영 방향을 조절할 수 있도록 구현된 후, 상기 제어부(130)가, 프로젝션 시간 별로 상기 프로젝터(110)의 프로젝션 방향을 조절하여, 상기 복수의 사용자 인터페이스 화면을 서로 다른 공간에 투영한다. 본 발명의 다른 실시 예에서는 상기 프로젝터(110)가, 투영 방향이 다른 복수의 프로젝션 파트로 이루어져, 상기 복수의 프로젝션 파트를 통해 복수의 사용자 인터페이스 화면을 서로 다른 공간에 동시에 투영하도록 한다.
상기 제스처 검출부(120)는, 상기 프로젝터(110)에 의해 투영된 외부 화면에 대한 사용자의 특정 제스처, 더 구체적으로는 외부 화면에 대한 사용자의 드래그 동작을 검출한다. 상기 드래그 동작은, 외부 화면에 대한 사용자의 터치가 일정 시간이상 지속되면서, 터치 지점이 일정 거리 이상 이동하는 경우를 의미한다. 상기 드래그 동작은, 최초 터치 지점, 이동 방향, 이동 거리, 최후 터치 지점 중에서 하나 이상의 정보로 표현될 수 있다.
이러한 드래그 동작을 검출하기 위하여, 상기 제스처 검출부(120)는 적외선 위치 센서, 초음파 위치 센서 및 RF(Radio Frequency) 위치 센서와 같은 위치 센서 또는 카메라를 이용한 영상 처리 기술로 구현될 수 있다.
도 3은 본 발명의 일 실시 예로서, 적외선 위치 센서를 이용하여 제스처 검출부를 구현한 예를 나타낸 도면이다.
도 3은 참조하면, 단말기(200)의 상단부에 프로젝터(210)가 설치되어 단말기의 외부 공간으로 외부 화면(211)을 투영하는데, 이때, 투영 방향은 단말기(200)의 전면 하측을 향하도록 구현되어, 단말기(200)가 세워진 평면에 외부 화면(211)이 투영된다. 그리고, 제스처 검출부(220)는 투영된 외부 화면과 평행하게 적외선(IR: Infrared Light)을 조사하는 적외선 송신부(221)와, 상기 외부 화면에 사용자 접촉 시, 사용자의 손가락에 의해 반사되는 적외선을 수신하는 적외선 수신부(222)를 포함한다. 도 3에서 도시된 부호 221은 상기 투영된 외부 화면에 대한 적외선 수신부(222)의 스캔 범위를 나타낸다. 즉, 적외선을 외부 화면(211)에 근접하여 평행하게 조사하면, 외부 화면(211)의 특정 위치를 사용자가 터치할 경우, 상기 적외선이 사용자의 손가락에 의해 반사되는데, 이렇게 반사된 적외선 신호를 수신하여 분석함으로써, 상기 사용자의 터치 여부뿐만 아니라 터치 위치까지 검출하고, 이러한 연속된 터치 정보를 조합함으로써, 드래그 동작을 검출할 수 있다. 즉, 최초 터치가 검출된 후, 일정 시간 이상 터치 입력이 계속 감지되고, 상기 터치 위치가 이동하면, 드래그 동작이 검출된 것으로 인식한다.
더불어, 초음파 위치 센서 및 RF 위치 센서의 경우도, 도 3에 도시된 적외선 위치 센서의 경우와 유사하게 구현될 수 있다.
상기 적외선 위치 센서, 초음파 위치 센서, RF 위치 센서를 통한 위치 검출 방법으로 일반적으로 잘 알려져 있으므로, 이에 대한 구체적인 설명은 생략한다.
다음으로, 도 4는 카메라를 이용하여 제스처 검출부를 구현한 예를 보인 도면이다.
도 4를 참조하면, 단말기(300)의 상단부에 외부 화면을 투영하는 프로젝터(310) 및 터치 위치를 검출하기 위한 카메라(320)를 설치한다.
상기 프로젝터(310) 및 카메라(320)의 설치 위치는 편의에 따라서 조정될 수 있으나, 상기 프로젝터(310)에서 외부 화면이 투영되는 영역(311)과 카메라(320)에 의해 촬영되는 영역(321)은 동일하도록 구현되어야 한다. 이때, 상기 카메라(320)에서 촬영되는 영역(321)이 외부 화면이 투영되는 영역(311)보다 큰 것이 바람직하다. 따라서, 프로젝터(310)가 외부 화면을 단말기(300)의 외부 공간으로 투영하면, 카메라(320)는 상기 외부 화면이 투영되는 공간을 촬영한다. 이 때, 사용자가 상기 외부 화면을 터치할 경우, 사용자의 손에 의해 상기 촬영된 영상의 일부 픽셀 값에 변화가 발생한다. 이러한 픽셀 변화를 모니터링 함으로써, 사용자의 드래그 동작을 검출할 수 있다. 즉, 픽셀 변화를 통해 사용자의 터치가 일정 시간 이상 연속되고, 최초 터치 위치에서 최후 터치 위치에 변화가 발생하면, 이를 드래그 동작으로 인식하는 것이다.
다시 도 1 및 도 2를 참조하면, 상기 카메라(140)는 터치 화면이 투영될 외부 공간의 배경 색상을 검출하기 위한 것으로서, 외부 화면의 투영 이전에 미리 터치 화면이 투영될 외부 공간을 촬영한다. 따라서, 상기 카메라(140)의 촬영 영역은 상기 프로젝터(110)에서 외부 화면을 투영하는 영역과 겹쳐지는 것이 바람직하다. 도 4에 보인 실시 예에서와 같이, 제스처 검출부(120)가 카메라(320)로 구현되는 경우, 상기 카메라(320)는 상기 외부 화면의 배경 색상 검출을 위한 카메라(140)와 일체로 구현될 수 있다. 즉, 상기 제스처 검출부(120)에서 별도의 카메라를 추가로 구비할 필요 없이, 외부 화면의 투영 이후에 상기 카메라(140)를 이용하여 외부 화면을 촬영하고, 상기 카메라(140)에서 촬영된 영상을 분석함으로써 사용자의 드래그 동작을 검출하도록 할 수 있다.
이 경우, 상기 카메라(140)는 외부 화면의 투영 이전부터 투영 이후까지 연속적으로 상기 외부 화면이 투영되는 공간을 촬영하게 된다. 이와 같이 구현할 경우, 본 발명에 다른 단말기를 구현하는데 있어서, 부품 수를 줄여 제작비를 절감시킬 수 있다.
그리고, 상기 제어부(130)는, 단말기(100)의 기능 실행에 따라서 설정된 상기 외부 화면을 상기 프로젝터(110)에 제공하는데, 이때, 상기 카메라(140)의 촬영 영상으로부터 외부 화면이 투영될 외부 공간의 배경 색상을 검출하여, 배경 색상과 구분되도록 상기 외부 화면의 기준 색상을 제어한다. 예를 들면, 배경 색상과 보색 관계의 색상을 상기 외부 화면의 기준 색상으로 설정하거나, 배경 색상의 명도와 반대의 명도로 외부 화면의 기준 색상을 설정할 수 있다. 여기서, 배경에 여러 가지 색상이 혼합되어 있는 경우, 가장 많이 분포되는 색상을 기준으로 외부 화면의 기준 색상을 정하거나, 배경의 전체적인 명도를 기준으로 외부 화면의 기준 색상을 설정할 수 있다.
그리고, 상기 제어부(130)는, 상기 외부 화면이 투영된 이후에 상기 제스처 검출부(120)를 통해 사용자의 드래그 동작이 검출되면, 선택된 콘텐츠를 인접 단말기로 전송한다. 더 구체적으로 설명하면, 사용자가 특정 콘텐츠를 터치한 후, 상기 콘텐츠를 소정 방향으로 드래그하는 것이 감지되면, 상기 제어부(130)는 인접 단말기(도시생략)와 통신을 연결하여, 상기 선택된 특정 콘텐츠를 인접 단말기로 전송한다. 이때, 상기 단말기(100)의 주변에 위치한 인접 단말기가 복수개인 경우, 드래그 방향에 따라서 복수의 인접 단말기 중에서 하나를 선택하여, 선택한 인접 단말기로 상기 선택된 특정 콘텐츠를 전송할 수 있다. 더 구체적으로 설명하면, 상기 제어부(100)는 드래그 동작이 검출되면, 상기 드래그 동작이 상기 외부 화면에서 밖으로 향하는 드래그 동작인지, 밖에서 외부 화면으로 진입하는 드래그 동작인지를 확인하고, 외부 화면에서 밖으로 향하는 드래그 동작이면, 상기 드래그 동작에서 선택된 콘텐츠를 전송시키고, 상기 밖에서 외부 화면으로 진입하는 드래그 동작이면, 인접 단말기에서 전송된 콘텐츠를 수신한다. 이에 따르면, 두 개의 단말기를 인접하여 배치한 상태에서, 사용자가 한 단말기의 외부 화면에서 특정 콘텐츠를 선택하여 다른 단말기의 외부 화면으로 드래그할 경우, 상기 드래그 동작이 시작된 단말기에서 콘텐츠 전송이 수행되고, 드래그 동작이 끝나는 단말기에서는 콘텐츠 수신이 수행되어, 두 단말기 간에 콘텐츠의 송수신이 가능해지며, 드래그 방향으로 콘텐츠를 전송할 단말기를 선택할 수 있게 된다.상기 제어부(130)는, 상기 외부 화면으로서, 단말기(100)에서 현재 실행되는 기능과 관련된 사용자 인터페이스 화면을 프로젝터(110)에 제공한다. 이때, 상기 단말기(100)에서 멀티태스킹에 의하여 복수의 기능을 동시에 실행중인 경우에는, 복수의 기능에 각각 대응하는 복수의 사용자 인터페이스 화면의 집합이 외부 화면으로 제공된다.
외부 화면이 복수의 사용자 인터페이스 화면의 집합인 경우, 본 발명의 일 실시 예에서는, 상기 제어부(130)가 서로 다른 공간에 상기 복수의 사용자 인터페이스 화면이 투영되도록 프로젝터(110)의 투영 방향을 프로젝션 시간 별로 제어한다.
더하여, 상기 제어부(130)는, 상기 제스처 검출부(120)가 도 4에 도시된 바와 같이, 카메라(320)로 구현되는 경우, 외부 화면의 투영 이후에 상기 카메라(320)로 촬영된 영상을 분석하여, 픽셀 값이 변화되는 위치를 검출하고, 이를 통해 드래그 동작을 인식한다.
마지막으로, 상기 통신 인터페이스부(150)는, 인접 단말기와 통신을 연결하여, 상기 제어부(130)의 제어에 따라서 선택된 콘텐츠를 인접 단말기로 전송하기 위한 것이다. 이때, 상기 통신 인터페이스부(150)에서의 통신 방식은 제한하지 않는다. 예를 들어, 통신 인터페이스부(150)는 유선 통신, 무선 통신, 적외선 통신을 통해 인접 단말기와 통신을 수행할 수 있다.
도 5는 본 발명에 있어서, 드래그 동작에 따른 콘텐츠 전송 과정을 예시한 도면이다. 여기서, 400a 및 400b는 본 발명에 따라 구현된 단말기로서, 이하에서 구분이 용이하도록 400a를 제1 단말기로 400b를 제2 단말기로 부르기로 한다.
도 5를 참조하면, 제1,2 단말기(400a, 400b)를 나란히 배치한 상태에서, 상기 제1,2 단말기(400a, 400b)가 각각 임의의 외부 화면(411,412)를 투영한다.
이때, 사용자가 제1 단말기(400a)의 외부 화면(411)에 표시된 하나 이상의 콘텐츠 중에서 하나를 손가락으로 터치한 상태에서, 제2 단말기(400b) 쪽으로 드래그하면, 제1 단말기(400a)는 제2 단말기(400b)쪽으로의 드래그 동작을 검출하며, 제2 단말기(400b)에서 사용자 손가락의 접근을 감지하도록 할 수 있다. 이 경우, 제2 단말기(400b)는 제스처 검출부(120)를 통해 제1 단말기(400a)에서 드래그하는 사용자의 손가락의 접근을 감지할 수 있다.
따라서, 제1 단말기(400a)가 상기 사용자의 드래그 동작을 검출하여, 인접한 제2 단말기(400b)와 통신을 연결하여, 상기 선택된 콘텐츠를 제2 단말기(400b)로 전송하고, 사용자의 손가락 접근을 감지한 제2 단말기(400b)는 제1 단말기(400a)로부터 전송된 콘텐츠를 수신하여 저장한다. 이때, 사용자 편의를 위하여, 제2 단말기(400b) 측에서, 수신한 콘텐츠를 외부 화면(412) 상에 표시함으로써, 사용자가 콘텐츠 전송 상태를 확인하도록 할 수 있다. 여기서, 통신 연결을 위하여, 제1 단말기(400a)가 드래그 동작 감지 시 통신 연결 요청을 주변에 전송하면, 사용자의 손가락 접근을 감지한 제2 단말기(400b)가 상기 요청에 대한 응답을 통해 연결을 수락하도록 할 수 있다.
다음으로, 도 6은 본 발명에 따른 제스처 인식을 이용한 콘텐츠 전송 방법을 나타낸 순서도이다.
도 1 내지 도 6을 참조하면, 본 발명에 따른 단말기(100)는, 먼저 하나 이상의 콘텐츠를 표시하는 외부 화면이 투영될 외부 공간을 촬영하여, 상기 외부 화면의 배경 색상을 검출하고, 상기 배경 색상과 구분되도록 상기 외부 화면의 기준 색상을 설정한다(S510). 상기 외부 화면의 기준 색상은, 외부 화면에 표시되는 정보들이 쉽게 인식될 수 있도록 설정되는 것이 바람직한데, 더 구체적으로는, 배경 색상과 보색 관계에 있는 색상으로 설정되거나, 상기 배경 색상과 반대의 명도를 갖도록 설정될 수 있다. 예를 들어, 촬영된 배경 색상이 어두운 경우, 상기 외부 화면은 흰색으로 설정되고, 촬영된 배경 색상이 밝은 경우, 상기 외부 화면은 검정색으로 설정된다.
그리고, 단말기(100)는, 상기 설정된 기준 색상의 외부 화면을 단말기(100)의 외부 공간에 투영한다(S520). 이때, 프로젝터(100)에 의한 투영 범위가 대략적으로 설정되므로, 이에 맞추어 사용자가 원하는 장소, 예를 들어, 벽면이나 책상 위에 상기 외부 화면이 투영되도록 단말기(100)의 위치를 조정할 수 있다.
그리고, 상기에서 단말기(100)에 의해 투영되는 외부 화면은, 단말기(100)에서 실행되는 기능과 관련된 사용자 인터페이스 화면으로서, 하나 이상의 콘텐츠가 표시된다. 더하여, 상기 단말기(100)가 멀티 태스킹을 지원하는 경우, 상기 외부 화면은, 멀티 태스킹으로 실행되는 복수의 기능에 각각 대응하는 복수의 사용자 인터페이스 화면의 집합일 수 있다.
상기에서, 상기 투영하는 외부 화면이 복수의 사용자 인터페이스 화면의 집합인 경우, 프로젝션 시간 별로 프로젝터의 투영 방향을 제어하여 상기 복수의 사용자 인터페이스 화면을 서로 다른 공간에 투영하도록 하거나, 복수의 프로젝션 파트를 통해, 상기 복수의 사용자 인터페이스 화면을 서로 다른 방향으로 동시에 투영한다. 이에 따르면, 복수의 사용자 인터페이스 화면을 동시에 표시하여, 사용자가 쉽게 멀티태스킹 작업을 수행할 수 있도록 할 수 있다.
상기와 같이 외부 화면을 투영한 이후에, 상기 단말기(100)는, 상기 투영한 외부 화면에 대한 사용자의 제스처, 더 구체적으로는 드래그 동작을 감지한다(S530). 여기서, 사용자의 드래그 동작은, 적외선 위치 센서, 초음파 위치 센서, RF 위치 센서와 같은 위치를 검출할 수 있는 센서를 이용하여 검출할 수 있으며, 또한, 카메라를 이용하여 상기 투영된 외부 화면을 촬영한 후, 촬영된 영상에서의 사용자 터치에 따른 픽셀 변화를 감시하여 검출할 수 있다. 즉, 적외선 위치 센서, 초음파 위치 센서, RF 위치 센서 및 카메라를 이용하여 외부 화면에 대한 터치를 검출하고, 상기 터치 상태를 모니터링하여, 터치 상태가 일정 시간 이상 지속되고, 터치 위치가 변화되는 경우를 드래그 동작으로 인식한다.
상기와 같이 외부 화면에 대한 사용자의 드래그 동작을 감지하면, 상기 단말기(100)는, 인접한 단말기와 통신을 연결한다(S540). 여기서, 통신 방식은 제한하지 않는다. 이때, 상기 인접 단말기는 사용자에 의하여 상기 단말기(100)와 일정 거리 이내에 배치되어 있는 것이 바람직하며, 더 구체적으로는 도 5에 도시된 바와 같이 나란히 배치되는 것이 바람직하다. 그리고, 상기 통신 연결은 드래그 동작을 감지한 상기 단말기(100)가 주변으로 통신 연결 요청 메시지를 전송하면, 상기 드래그 동작에 의한 사용자의 손가락 접근을 감지한 인접 단말기가 연결을 수락하는 방식으로 이루어질 수 있다.
그리고 통신이 연결되면, 상기 단말기(100)는 드래그 동작에 의해 선택된 특정 콘텐츠를 상기 연결된 인접 단말기로 전송하고, 인접 단말기는 상기 특정 콘텐츠를 수신하여 저장한다(S550).
이에 따르면, 사용자는 드래그 동작만으로 단말기간에 콘텐츠를 전송할 수 있게 된다.
이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시 예에 대하여 개시하였으나, 여기에 개시된 실시 예외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다. 또한, 본 명세서와 도면에서 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다.
본 발명은 사용자 명령에 따라서 일정 기능을 수행하도록 구현된 모든 종류의 단말기에 적용될 수 있는 것으로서, 바람직하게는, 휴대형 단말기에 적용되어, 단말기의 제어를 위한 외부 화면을 프로젝터를 통해 단말기의 외부에 투영함으로써, 공간적 제한 없이 다양한 외부 화면을 제공하고, 외부 화면에 대한 사용자의 드래그 동작을 감지하여, 드래그 동작에 의해 선택된 콘텐츠를 인접 단말기로 전송함으로써, 사용자가 단말기를 직접적으로 접촉하지 않고도 간단하게 콘텐츠 전송을 지시할 수 있다. 더하여, 본 발명은 외부 화면이 투영되는 공간의 배경 색상에 따라서 배경과 구분되도록 상기 외부 화면의 색상을 설정함으로써, 사용자가 외부 화면을 통해 정보를 쉽게 인지할 수 있도록 한다.
또한, 본 발명은 복수의 사용자 인터페이스 화면을 서로 다른 공간에 투영함으로써, 복수의 사용자 인터페이스 화면을 동시에 표시하여, 사용자의 멀티태스킹 작업을 용이하게 할 수 있다.
100, 200, 300: 단말기
110, 210, 310: 프로젝터
120, 220, 320: 제스처 검출부
130: 제어부
140: 카메라
150: 통신 인터페이스부
221: 적외선 송신부
222: 적외선 수신부

Claims (17)

  1. 단말기의 외부 공간에 하나 이상의 콘텐츠를 표시하는 외부 화면을 투영하는 프로젝터;
    상기 프로젝터에 의해 투영된 외부 화면에 대한 사용자의 드래그 동작을 검출하는 제스처 검출부;
    상기 외부 화면이 투영되는 공간을 촬영하는 카메라;
    상기 외부 화면을 프로젝터에 제공하고, 상기 카메라의 촬영 영상으로부터 외부 화면의 배경 색상을 검출하여, 배경 색상과 구분되도록 상기 외부 화면의 기준 색상을 제어하고, 상기 외부 화면의 투영 이후에 상기 제스처 검출부를 통해 사용자의 드래그 동작이 검출되면, 선택된 콘텐츠의 정보를 인접 단말기로 전송시키는 제어부; 및
    상기 제어부의 제어에 따라서 상기 인접 단말기와 통신을 연결하여, 상기 선택된 콘텐츠를 상기 인접 단말기로 전송하는 통신 인터페이스부를 포함하는 단말기.
  2. 제1항에 있어서, 상기 제어부는
    복수의 인접 단말기 중에서, 상기 드래그의 방향에 위치한 인접 단말기와 통신을 연결하여 상기 선택된 콘텐츠를 전송하는 것을 특징으로 하는 단말기.
  3. 제2항에 있어서, 상기 제어부는
    드래그 동작이 검출되면, 드래그 방향을 확인하여, 외부 화면에서 밖으로 향하는 드래그 동작이면, 상기 선택된 콘텐츠를 인접 단말기로 전송하고, 밖에서 외부 화면으로 들어오는 드래그 동작이면, 인접 단말기에서 전송된 콘텐츠를 수신하는 것을 특징으로 하는 단말기.
  4. 제1항에 있어서, 상기 프로젝터는
    외장형으로 구현되어, 상기 단말기의 제어부와 입출력 인터페이스를 통해 연결되는 것을 특징으로 하는 단말기.
  5. 제1항에 있어서, 상기 제스처 검출부는
    적외선 위치 센서, 초음파 위치 센서, RF 위치 센서, 및 카메라 중에서 어느 하나를 이용하여 사용자의 드래그 동작을 검출하는 것을 특징으로 하는 단말기.
  6. 제5항에 있어서,
    상기 제스처 검출부가 카메라를 이용하여 드래그 동작을 검출하는 경우, 상기 제스처 검출부는 상기 외부 화면이 투영되는 위치를 촬영하는 카메라와 일체로 구현되는 것을 특징으로 하는 단말기.
  7. 제5항에 있어서,
    상기 제스처 검출부가 카메라로 구현되는 경우, 상기 제어부가 상기 카메라로 촬영된 외부 화면에 대한 영상의 픽셀 변화로부터 사용자의 드래그 동작을 인식하는 것을 특징으로 하는 단말기.
  8. 제1항에 있어서, 상기 외부 화면은
    하나의 사용자 인터페이스 화면 또는 복수의 사용자 인터페이스 화면의 집합인 것을 특징으로 하는 단말기.
  9. 제8항에 있어서, 상기 제어부는
    상기 외부 화면이 복수의 사용자 인터페이스 화면의 집합인 경우, 시분할 방식을 적용하여, 상기 복수의 사용자 인터페이스 화면을 프로젝션의 시간 별로, 서로 다른 방향으로 투영하도록 상기 프로젝터를 제어하는 것을 특징으로 하는 단말기.
  10. 제8항에 있어서, 상기 프로젝터는
    서로 다른 공간으로 투영하는 복수의 프로젝션 파트로 이루어져, 상기 복수의 프로젝션 파트가 상기 복수의 사용자 인터페이스 화면을 동시에 투영하는 것을 특징으로 하는 단말기.
  11. 하나 이상의 콘텐츠를 표시하는 외부 화면이 투영될 단말기의 외부 공간을 촬영하여 상기 외부 화면의 배경 색상을 검출하고, 상기 배경 색상과 구분되도록 상기 외부 화면의 기준 색상을 설정하는 단계;
    상기 외부 화면을 상기 단말기의 외부 공간에 투영하는 단계;
    상기 투영한 외부 화면에 대한 사용자의 드래그 동작을 감지하는 단계; 및
    상기 사용자의 드래그 동작을 감지하면, 상기 드래그 동작에 따라서 선택된 콘텐츠를 인접 단말기로 전송하는 단계를 포함하는 제스처 인식을 이용한 콘텐츠 전송 방법.
  12. 제11항에 있어서, 상기 선택된 콘텐츠를 인접 단말기로 전송하는 단계는
    상기 드래그 방향에 위치한 인접 단말기로 상기 선택된 콘텐츠를 전송하는 단계인 것을 특징으로 하는 제스처 인식을 이용한 콘텐츠 전송 방법.
  13. 제11항에 있어서, 상기 사용자의 드래그 동작을 감지하는 단계는
    적외선 위치 센서 또는 초음파 위치 센서 또는 RF 위치 센서를 통해 상기 화면에 대한 사용자의 드래그 동작을 감지하는 단계인 것을 특징으로 하는 제스처 인식을 이용한 콘텐츠 전송 방법.
  14. 제11항에 있어서, 상기 사용자의 터치를 감지하는 단계는
    상기 외부 화면을 카메라로 촬영하고, 상기 촬영된 영상에서의 픽셀변화를 통해 사용자의 드래그 동작을 감지하는 단계인 것을 특징으로 하는 제스처 인식을 이용한 콘텐츠 전송 방법.
  15. 제11항에 있어서, 상기 외부 화면은
    하나의 사용자 인터페이스 화면 또는 복수의 사용자 인터페이스 화면의 집합인 것을 특징으로 하는 제스처 인식을 이용한 콘텐츠 전송 방법.
  16. 제15항에 있어서, 상기 외부 화면을 상기 단말기의 외부 공간에 투영하는 단계는
    시분할 방식을 이용하여, 상기 복수의 사용자 인터페이스 화면을 프로젝션 시간 별로, 서로 다른 공간에 투영하는 단계인 것을 특징으로 하는 제스처 인식을 이용한 콘텐츠 전송 방법.
  17. 제15항에 있어서, 상기 외부 화면을 상기 단말기의 외부 공간에 투영하는 단계는
    복수의 프로젝션 파트를 통해, 상기 복수의 사용자 인터페이스 화면을 서로 다른 공간에 동시에 투영하는 단계인 것을 특징으로 하는 제스처 인식을 이용한 콘텐츠 전송 방법.
KR1020100020265A 2010-03-08 2010-03-08 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기 KR101196761B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100020265A KR101196761B1 (ko) 2010-03-08 2010-03-08 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100020265A KR101196761B1 (ko) 2010-03-08 2010-03-08 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기

Publications (2)

Publication Number Publication Date
KR20110101328A true KR20110101328A (ko) 2011-09-16
KR101196761B1 KR101196761B1 (ko) 2012-11-05

Family

ID=44953366

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100020265A KR101196761B1 (ko) 2010-03-08 2010-03-08 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기

Country Status (1)

Country Link
KR (1) KR101196761B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016047824A1 (ko) * 2014-09-25 2016-03-31 엘지전자 주식회사 화상 정보 영사 장치 및 그 영사 장치의 제어 방법
WO2017217725A1 (ko) * 2016-06-13 2017-12-21 (주)블루클라우드 사용자 인식 컨텐츠 제공 시스템 및 그 동작방법
CN113795015A (zh) * 2021-08-17 2021-12-14 咪咕文化科技有限公司 数据传输方法、装置、设备及计算可读存储介质
KR20220077361A (ko) * 2020-12-02 2022-06-09 (주)유비컴 3차원 가상공간과 손목형 밴드를 이용한 제스처 인식 장치 및 이를 이용한 인식방법

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016047824A1 (ko) * 2014-09-25 2016-03-31 엘지전자 주식회사 화상 정보 영사 장치 및 그 영사 장치의 제어 방법
US10506290B2 (en) 2014-09-25 2019-12-10 Lg Electronics Inc. Image information projection device and projection device control method
WO2017217725A1 (ko) * 2016-06-13 2017-12-21 (주)블루클라우드 사용자 인식 컨텐츠 제공 시스템 및 그 동작방법
KR20220077361A (ko) * 2020-12-02 2022-06-09 (주)유비컴 3차원 가상공간과 손목형 밴드를 이용한 제스처 인식 장치 및 이를 이용한 인식방법
CN113795015A (zh) * 2021-08-17 2021-12-14 咪咕文化科技有限公司 数据传输方法、装置、设备及计算可读存储介质
CN113795015B (zh) * 2021-08-17 2023-10-20 咪咕文化科技有限公司 数据传输方法、装置、设备及计算可读存储介质

Also Published As

Publication number Publication date
KR101196761B1 (ko) 2012-11-05

Similar Documents

Publication Publication Date Title
USRE49323E1 (en) Mobile client device, operation method, and recording medium
US20200319716A1 (en) Motion detection system having two motion detecting sub-system
US9110495B2 (en) Combined surface user interface
TWI689844B (zh) 行動裝置以及控制方法
US9002520B2 (en) User interface device of remote control system for robot device and method using the same
US20140062863A1 (en) Method and apparatus for setting electronic blackboard system
US9377901B2 (en) Display method, a display control method and electric device
US11971646B2 (en) Camera module, mobile terminal, and control method
RU2014109966A (ru) Устройство и способ управления объектом пользовательского прибора
CN104777927A (zh) 影像式触控装置及其控制方法
US20100060592A1 (en) Data Transmission and Reception Using Optical In-LCD Sensing
CN108053803A (zh) 显示模组的显示校正方法、显示校正装置和显示校正系统
KR101196761B1 (ko) 제스처 인식을 이용한 콘텐츠 전송 방법 및 그 단말기
US20210405773A1 (en) Method and apparatus for detecting orientation of electronic device, and storage medium
KR20220108161A (ko) 카메라 작동 방법 및 전자기기
US20060154652A1 (en) Method and system for direct communication between mobile device and application on display
TW201510772A (zh) 手勢判斷方法及電子裝置
TW202004432A (zh) 電子裝置及電子裝置的操作控制方法
CN102999284A (zh) 传输方法和电子设备
US20160124523A1 (en) Electronic device, display device, and method for controlling the same
CN109272549B (zh) 一种红外热点的位置确定方法及终端设备
KR101196760B1 (ko) 제스처 인식을 이용한 단말기 제어 방법 및 그 단말기
KR102297025B1 (ko) 모바일 장치, 크로스디바이스 콘텐츠 공유 시스템 및 그 콘텐츠 공유 방법
KR20190092672A (ko) 전자장치 및 그 제어방법
KR102281784B1 (ko) 지문인식영역의 확장을 위한 지문인식시스템 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150922

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170928

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180928

Year of fee payment: 7