KR20110101374A

KR20110101374A - 시선 추적 안경을 이용한 유비쿼터스 리모트 컨트롤러

Info

Publication number: KR20110101374A
Application number: KR1020100020337A
Authority: KR
Inventors: 이강수
Original assignee: 이강수
Priority date: 2010-03-08
Filing date: 2010-03-08
Publication date: 2011-09-16

Abstract

본 발명품은 현재 마케팅 분야에서 사용되고 있는 시선 추적 안경에 무선 통신 장치, 움직임 감지 센서, 제품 분별 지표(Object Marker)를 추가하여 시선을 통해 여러 가지 제품(컴퓨터, 텔레비젼, 전등 스위치 등)을 무선 조작(Remote Control) 가능하게 하여주는 장비로 유비쿼터스(ubiquitous) 시대에 다용도로 쓰일 수 있는 리모트 컨트롤러가 될 것으로 생각된다.

Description

시선 추적 안경을 이용한 유비쿼터스 리모트 컨트롤러 {Ubiquitous Remote Controller using Eye-tracking Glasses}

본 발명은 무선 리모트 컨트롤러에 관한 것으로, 이전의 손을 이용한 마우스, 터치패드, 키보드, TV 리모컨 등과는 다르게 사람의 눈의 시선을 추적하여 활용함으로써 보다 직관적이고 편리해진 "시선 추적 안경을 이용한 유비쿼터스 리모트 컨트롤러"에 관한 것이다.

2010년 02월 08일 SBS 경제안테나에 나온 뉴스 "유통업체들, 지갑여는 마케팅 과학"을 보면, 안경에 달린 카메라 2대가 정면의 화면(1)과 동공의 움직임(2)을 체크해 녹화하고, 사람의 시선이 어디를 향하고 있는지 분석하는 화면이 나온다. 사람의 동공 위치와 정면 화면을 분석함으로써 사람의 정면에서 어느 부분을 보고 있는지 판단해 내는 것이다. 이러한 기술이 실제 마케팅에 사용되고 있고, 본 발명은 이러한 시선 추적 안경에 무선 통신장치와 동작 감지 센서(혹은 클릭 장치), 사물 분별장치(Object Marker)를 추가하여 사람의 시선을 이용한 리모트 컨트롤러를 발명하였다.

현재의 디지털 입력 장치들(마우스, 터치패드, 키보드, TV 리모컨)은 대부분 손을 이용하여 조작한다. 이러한 입력 장치들을 사용하기 위해서는 손을 움직여야 하며, 직관적으로 사용하기에 불편하고, 조작에 익숙해 지려면 시간이 어느 정도 필요하게 된다. 이에 시선 추적 안경을 이용하여 직관적이고 조작이 편하며 다양한 곳에 쓰일 수 있는 다기능 리모트 컨트롤러를 발명하였다.

시선 추적 안경을 이용하여 사람의 시선이 어디를 향해 있는지 분석이 가능하고, 모니터나 전등 스위치 등 조작이 필요한 곳에 적외선 등이나 디지털 시그널 발생기(digital signal emitter)를 두어 시선이 어느 제품을 향해 있는지 판단한다. 안경에 무선 통신장치를 장착하여 조작하고자 하는 물체를 바라본 뒤, 무선 장치를 클릭(혹은 안경에 움직임 감지센서를 달아 안경을 움직임에 따라 적절한 데이터를 송신)하면 시선이 향한 제품이 명령을 전달받아 사용자가 원하는 작동을 할 수 있도록 만들었다.

컴퓨터에서는 마우스와 같이 쓸 수 있고(시선이 마우스 포인터가 되고, 클릭버튼만 따로 눌러주거나, 움직임 감지센서를 이용. 드레그, 앞으로&뒤로 기능도 사용 가능.), 전등 스위치(스위치를 바라보고 클릭하거나 전등을 바라보고 클릭하면 전등이 켜짐.), TV 리모컨(화면 위아래를 보고 클릭하면 채널이동, 양옆을 보고 클릭하면 음량조절)으로도 활용 가능하다. 그야말로 유비쿼터스 시대에 가장 필요한 제품이라고 생각된다.

[도 1]: 시선 추적 안경을 이용한 리모트 컨트롤러의 개략도.
[도 2]: 특수한 색을 이용한 제품 분별 지표(Object Marker).
[도 3]: 특수한 문양을 이용한 제품 분별 지표(Object Marker).
[도 4]: 명령어 역할을 할 수 있는 좌우 움직임 및 회전 움직임.

시선 추적 안경은 현재 마케팅 분야에서 사용되고 있고, 문제없이 잘 작동되고 있다. 이 안경에 무선 통신 장치(무선 마우스에 쓰이는 통신장비를 이용)와 정면 카메라가 어떤 제품인지를 구분해 줄 수 있게 해주는 Object Marker(특수한 색 혹은 문양을 입혀서 구분할 수도 있고, 적외선, 자외선 등 눈에 보이지 않지만 카메라는 인식 가능한 빛을 이용하는 방법, Digital Signal Emitter를 달아 구분하는 방법 등이 있다.)를 설치하여 시선 추적 안경은 마우스 포인터의 역할을 무선 통신 장치는 신호를 전달하는 역할을 Object Marker는 어느 제품을 조작하려는지를 구분가능하게 하여 시선만으로 여러 가지 전자제품을 조작할 수 있게 해준다.

일 예로 본 발명품을 컴퓨터의 마우스와 같은 용도로 사용하고 있다면, [도 2]와 같이 컴퓨터 모니터를 응시하고 있을 것이다. 본 발명품 [도 1]에 달린 정면 카메라가 화면을 찍고, 왼쪽 상단부(노란색 Marker)와 오른쪽 하단부(초록색 Marker)를 기준으로 시선이 어디를 향해 있는지 동공 촬영을 통해 확인한다. 이를 통해 (노락색, 초록색 Marker가 화면 경계를 알려주므로) 모니터 화면상에서 시선이 어디 머물고 있는지 판단할 수 있고, 따라서 시선이 마우스 포인터 역할을 할 수 있게 된다. [도 1]의 클릭 버튼을 이용해 마우스의 클릭, 더블클릭 기능을 재현할 수 있고, 움직임 감지 센서 혹은 정면 카메라의 이미지 분석을 통해 [도 4]와 같은 움직임을 감지하여 드레그, 앞으로&뒤로 등의 기능도 본 발명품을 이용하여 구현할 수 있다.

두 번째 예로 본 발명품을 [도 3]에 있는 전등의 리모컨으로서 쓰고 싶다면, 본 발명품에서 사용되는 시선 추적 안경이 [도 3]에 있는 전등 스위치 혹은 전등 옆에 있는 문양에 사람의 시선이 가 있다는 것을 판단하고, 정면 카메라의 화면에서 시선 부분의 이미지를 분석하여(이미지 분석은 무선 통신 장치를 이용 컴퓨터로 이미지를 보내 분석할 수 있다.) 거실에 있는 형광등을 바라보고 있다는 것을 판단, 클릭으로 신호를 보내면 형광등 스위치가 그 신호를 받아 불을 켜게 된다.

현재의 마우스, 터치패드, 전등 리모컨, TV 리모컨 등을 대체할 수 있다.

부호 없음.

Claims

유무선 조작기(Wire or Wireless Controller)에 있어서,
시선 추적 안경을 이용하여 정면 사진과 동공 사진을 찍어 유무선 통신장비를 통해 컴퓨터에 이 정보를 보낸 뒤,
정면 카메라에 찍힌 화면상의 어느 부분을 사용자가 보고 있는지 판단하고,
그 부분의 이미지 혹은 전체 이미지를 분석하여 사용자가 어느 제품을 어떻게 조작하기를 원하는지 판단하여,
해당 제품에 유무선 통신장비를 이용하여 사용자가 원하는 명령을 하달하는 유무선 조작기(wire or wireless(remote) controller).
이미지를 분석하여 명령을 내리는 유무선 조작기(Wire or Wireless Controller)에 있어서,
[도 2]와 같이 두 지표를 기준으로 시선 혹은 포인터(카메라, 유무선 통신장비가 장착된 막대기를 이용하여 본 발명품과 비슷한 식의 컨트롤러를 만들 수 있음.)가 어디를 향해 있는지 판단하고,
두 지표를 기준으로 하는 좌표 상에서 어느 위치에 시선 혹은 포인터가 있는지 계산하여 명령을 내리는 유무선 조작기.
이미지를 분석하여 명령을 내리는 유무선 조작기(Wire or Wireless Controller)에 있어서,
[도 2]와 같이 특별한 색상을 이용하여 제품 구별을 가능하게 하는 지표.
이미지를 분석하여 명령을 내리는 유무선 조작기(Wire or Wireless Controller)에 있어서,
[도 3]과 같이 특별한 문양(바코드와 비슷)을 이용하여 제품 구별을 가능하게 하는 지표.
이미지를 분석하여 명령을 내리는 유무선 조작기(Wire or Wireless Controller)에 있어서,
적외선, 혹은 자외선 빛을 이용하여 눈에는 보이지 않지만 카메라를 통하면 제품 구별을 가능하게 하는 지표.