KR20050073920A - 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결방법 - Google Patents

Abstract

본 발명은 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법에 관한 것이다.

본 발명은 눈동자 감지 통화연결 모드가 실행되면, 카메라를 통해 눈동자의 기준 위치를 설정받는 단계와; 상기 카메라를 통해 감지된 눈동자의 위치 정보를 통해 상기 기준 위치에 대한 눈동자의 좌표값을 산출하는 단계와; 상기 산출된 눈동자 좌표값과 기저장된 키버튼 좌표값을 비교하는 단계와; 상기 비교 결과, 상기 산출된 눈동자 좌표값이 기저장된 키버튼 좌표값의 영역 내에 있는 경우, 상기 산출된 눈동자 좌표값을 특정의 키버튼으로 인식하는 단계와; 상기 인식된 특정의 키버튼에 따라 통화를 연결하는 단계를 포함하는 방법을 구비하여 구성된다.

따라서, 본 발명은 노트북, 이동통신 단말기, PDA(Personal Digital Assistants) 등의 휴대용 단말기에 눈동자의 위치를 감지할 수 있는 카메라가 장착된 경우, 상기 장착된 카메라를 이용하여 사용자 눈동자의 위치 정보에 따른 키버튼을 선택받아 통화 연결을 함으로써, 양손에 물건을 들고 있는 등의 이유로 양손을 모두 사용할 수 없거나 거동이 불편한 장애인이 전화를 사용하는 경우에도, 키패드의 조작 없이도 사용자에게 통화 서비스를 제공하는 효과가 있다.

Description

휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법{CALL CONNECTING METHOD IN USING PUPIL LOCATION INFORMATION IN A PORTABLE TERMINAL}

본 발명은 휴대용 단말기에 관한 것으로, 특히 노트북, 이동통신 단말기, PDA(Personal Digital Assistants) 등의 휴대용 단말기에 눈동자의 위치를 감지할 수 있는 카메라가 장착된 경우, 상기 장착된 카메라를 이용하여 사용자 눈동자의 위치 정보에 따른 키버튼을 선택받아 통화 연결 서비스를 제공하는 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법에 관한 것이다.

최근의 이동통신 단말기는 소형화, 경량화 추세에 있어 각종 명령어를 입력하는 키패드의 크기 또한 작아지고 있는 반면, 현대인은 식생활의 변화로 인해 신체의 각 부분이 과거보다 커지고 있는 실정이다.

따라서, 일반 성인이나 시력이 약한 노인 등을 위한 키패드가 크게 강조된 이동통신 단말기가 출시되고는 있으나, 그래도 여러 개의 버튼이 밀집되어 있는 키패드를 조작하기는 여전히 어려울 뿐만 아니라, 특히 양손에 물건을 들고 있는 등의 이유로 양손을 모두 사용할 수 없는 상태에서 전화를 받거나 거동이 불편한 장애인이 전화를 사용하는 경우에도, 종래의 이동통신 단말기는 키패드를 조작하여야만 통화를 연결할 수 있어 불편한 문제점이 있었다.

따라서, 본 발명은 상기와 같은 종래의 문제점을 해결하기 위하여 제안한 것으로, 노트북, 이동통신 단말기, PDA 등의 휴대용 단말기에 눈동자의 위치를 감지할 수 있는 카메라가 장착된 경우, 상기 장착된 카메라를 이용하여 사용자 눈동자의 위치 정보에 따른 키버튼을 선택받아 통화 연결 서비스를 제공하도록 하는 방법을 제공함에 그 목적이 있다.

이와 같은 목적을 달성하기 위한 본 발명은, 눈동자 감지 통화연결 모드가 실행되면, 카메라를 통해 눈동자의 기준 위치를 설정받는 단계와; 상기 카메라를 통해 감지된 눈동자의 위치 정보를 통해 상기 기준 위치에 대한 눈동자의 좌표값을 산출하는 단계와; 상기 산출된 눈동자 좌표값과 기저장된 키버튼 좌표값을 비교하는 단계와; 상기 비교 결과, 상기 산출된 눈동자 좌표값이 기저장된 키버튼 좌표값의 영역 내에 있는 경우, 상기 산출된 눈동자 좌표값을 특정의 키버튼으로 인식하는 단계와; 상기 인식된 특정의 키버튼에 따라 통화를 연결하는 단계를 포함하는 것을 특징으로 한다.

이하, 본 발명에 따른 일실시예를 첨부한 도면을 참조하여 상세히 설명하면 다음과 같다.

도1은 본 발명 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법의 동작과정을 보인 순서도로서, 이에 도시한 바와 같이, 눈동자 감지 통화연결 모드가 실행되면, 카메라를 통해 눈동자의 기준 위치를 설정받는 단계(S10,S11)와; 상기 카메라를 통해 눈동자의 위치 정보를 감지하여, 상기 기준 위치에 따른 눈동자의 좌표값을 산출하는 단계(S12)와; 상기 산출된 눈동자 좌표값과 기저장된 키버튼 좌표값을 비교하는 단계(S13)와; 상기 비교 결과, 상기 산출된 눈동자 좌표값이 기저장된 키버튼 좌표값의 영역 내에 있는 경우, 상기 산출된 눈동자 좌표값을 특정의 키버튼으로 인식하는 단계(S14,S15)와; 상기 키버튼을 인식한 후 통화 연결 명령이 입력되면 통화를 연결하는 단계(S16,S17)로 구성한다.

본 발명은 노트북, 이동통신 단말기, PDA(Personal Digital Assistants) 등의 휴대용 단말기 중 눈동자의 위치를 감지할 수 있는 카메라가 장착된 휴대용 단말기에 적용할 수 있으며, 본 발명이 적용된 휴대용 단말기는 키패드를 조작하여 숫자, 문자 등을 입력하는 대신에, 상기 휴대용 단말기에 장착된 카메라를 이용하여 사용자 눈동자의 위치 정보에 따른 키버튼을 선택받아 통화 연결을 시도하게 된다.

상기 휴대용 단말기의 소정의 위치에 장착된 카메라는, 홍채 인식 시스템(Iris recognition System)과 같이 눈동자의 이미지를 정밀하게 촬영 가능한 이미지 센서가 장착되어, 사용자의 눈동자의 미세한 움직임을 감지한다.

그리고, 본 발명의 일실시예에서는, 이동통신 단말기에 적용하여 통화 연결을 수행하는 것으로 가정하며, 사용자의 눈동자에 의해 입력 가능한 키패드는 숫자(0∼9), 특수문자(*,#) 및 키명령(통화연결,지움,종료)으로 구성되는 키버튼인 것으로 가정한다.

본 발명을 수행하기 위해, 사용자가 이동통신 단말기의 대기(Idle) 상태에서 메뉴를 선택하여 눈동자 감지 통화연결 모드를 실행한 후, 해당 단말기에 장착된 카메라를 활성화하여 상기 카메라를 통해 눈동자의 기준 위치를 설정받는다(S10,S11).

즉, 사용자가 소정의 시간 동안 이동통신 단말기 내의 임의의 위치를 주시하여 카메라의 이미지 센서와 촛점이 맞으면, 상기 단말기 내 주제어부(MSM, Mobile Station Modem)는 해당 위치를 기준 위치로 하여 이후의 눈동자의 좌표값을 산출하는데 사용한다.

눈동자 감지 통화연결 모드가 실행된 경우, 상기 이동통신 단말기 내 주제어부는 카메라가 이미지 센서를 통해 사용자의 눈동자 위치 정보를 추적 및 감지하기 위한 준비상태가 되도록 제어하는데, 이때 액정화면을 통해 도2와 같은 키패드 화면을 디스플레이하여 사용자가 주시하는 액정화면 상의 키버튼을 키버튼 선택신호로 인식하여 처리하게 된다.

예를 들어, 도2와 같이 액정화면에 디스플레이되는 키패드 화면 상에서 좌측 상단의 '통화연결' 키버튼을 기준으로 사용하는 경우, 주제어부는 사용자가 상기 '통화연결' 키버튼을 소정 시간 동안 주시할 때의 눈동자 위치를 기준 위치로 설정하여, 이후의 다른 키버튼을 주시하여 눈동자 위치가 바뀔 때마다 그 위치 변화를 키버튼 선택신호로 인식하여 처리하게 된다.

여기서, 기준 위치 설정을 위해 사용자가 이동통신 단말기 내의 임의의 위치를 주시하는 것과 마찬가지로, 이후 사용자가 키버튼을 선택하기 위해 주시하는 대상은 눈동자 감지 통화연결 모드에서 액정화면 상에 표시되는 키패드 화면 뿐만 아니라 기존의 키패드도 가능하며, 이 경우 상기 설정된 기준 위치를 중심으로 기존의 키패드를 주시하는 눈동자의 움직임을 추적하게 된다.

그 다음, 상기 단계(S11)에서 눈동자의 기준 위치가 설정되면, 상기 주제어부는 액정화면 상에 "눈동자 감지 통화연결 모드의 실행을 위하여 눈동자의 움직임을 감지하기 시작한다"는 내용의 메시지를 출력한 후, 카메라의 이미지 센서를 통해 액정화면 상에 표시되는 키패드 화면을 소정 시간 동안 주시하는 눈동자의 움직임을 눈동자의 위치 정보로 감지하여, 상기 감지된 눈동자의 위치 정보로부터 획득한 눈동자의 움직임 변화량을 이용하여 기준 위치에 따른 눈동자의 좌표값을 산출한다(S12).

여기서, 상기 주제어부는 상기 이미지 센서를 통해 감지된 눈동자의 미세한 움직임에 따른 눈동자의 좌표값 'x' 및 'y'를 산출하며, 이때 상기 주제어부에서 산출하는 눈동자의 좌표값은 'x축' 및 'y축'의 2차원적인 좌표로 표시된다.

그리고, 상기 산출된 눈동자의 좌표값 'x' 및 'y'는, 눈동자의 움직임 변화량에 대응하는 좌표값을 키패드에 설정한 후, 사용자가 특정의 키버튼을 주시하기 위해 눈동자를 움직이는 경우 그 눈동자의 움직임 변화량에 해당하는 키패드 상의 상기 설정된 좌표값으로 환산하는 방식으로 산출한다.

따라서, 상기 주제어부는 상기 설정된 기준 위치를 중심으로 눈동자가 얼마 만큼 이동하였는지 여부를 추적하는 것만으로 눈동자의 좌표값을 산출하게 된다.

그 다음, 주제어부는 상기 단계(S12)에서 산출된 눈동자 좌표값과 내부의 메모리에 기저장된 키버튼 좌표값을 비교하여(S13), 상기 눈동자 좌표값이 기저장된 키버튼 좌표값의 영역 내에 있는 경우, 상기 눈동자 좌표값을 특정의 키버튼의 선택에 의한 키버튼 선택신호가 입력되는 것으로 인식하게 된다(S14,S15).

그리고, 상기 인식된 키버튼이 액정화면 상에 디스플레이된 키패드 화면 상의 '통화연결' 키버튼인 경우, 이를 통화 연결 명령이 입력된 것으로 인식하여 이전까지 사용자로부터 입력받은 키버튼을 이용하여 통화를 연결한다(S16,S17).

이때, 통화를 종료하는 경우에는 사용자가 통화 완료 후 '종료' 키버튼을 소정 시간 주시하여 통화를 종료하고, 요청된 통화를 수신하는 경우 사전에 눈동자 감지 통화연결 모드가 실행중이었다면 사용자가 '통화연결' 키버튼을 주시하여 통화를 수신하게 된다.

한편, 상기 단계(S12∼S15)에서 눈동자의 좌표값과 기저장된 키버튼 좌표값을 비교하여 눈동자의 위치 정보로 특정의 키버튼을 인식하는 과정을 첨부한 도3을 참조하여 설명하면 다음과 같다.

예를 들어, 카메라의 이미지 센서를 통해 주제어부가 사용자 눈동자의 위치 정보를 감지한 좌표값이 'x' 및 'y' 라고 인식하면(S30), 액정화면에 표시되는 키패드 화면의 각 키버튼을 'x축' 및 'y축'의 좌표로 표시되는 좌표값 영역으로 구분하여, 'x'값이 속하는 행에 대한 좌표값 영역을 결정한 후 'y'값이 속하는 열에 대한 좌표값 영역을 결정하는 방식 혹은 그 역의 방식으로, 상기 감지된 'x'값 및 'y'값이 속하는 특정의 키버튼을 검색하여 인식하게 된다.

즉, 상기 주제어부는 도2에 도시한 액정화면 상의 키패드 화면에 대하여 기준 위치인 '통화연결' 키버튼부터 '#' 키버튼에 이르기까지 각각의 x좌표와 y좌표에 대한 영역으로 구분하여, 상기 감지된 'x'값 및 'y'값이 각각 x1 내지 x3 의 좌표값 영역이나 y1 내지 y5의 좌표값 영역에 포함되는지 여부를 판단하여 특정의 키버튼을 인식하게 된다.

먼저, 상기 감지된 'x'값이 'x1'의 좌표값 영역에 속하는지 여부를 확인하여(S31), 상기 'x'값이 'x1'의 좌표값 영역 내에 속하면, 'y'값이 속하는 좌표값 영역을 'y1'부터 'y5'까지 순차적으로 확인하여(S32∼S35), 상기 'y'값이 속하는 좌표값 영역에 따라 '통화연결', '1', '4', '7', '*' 에 해당하는 키버튼으로 인식하게 된다(S36∼S40).

그 다음, 상기 단계(S31)에서 상기 감지된 'x'값이 'x1'의 좌표값 영역 내에 속하지 않으면, 상기 'x'값이 'x2' 혹은 'x3' 좌표값 영역에 속하는지 여부를 확인하여(S41), 'x2'의 좌표값 영역에 속하는 경우 상기 'y'값을 처리하는 과정(S32∼S35)과 같이 'y'값이 속하는 좌표값 영역을 'y1'부터 'y5'까지 순차적으로 확인하여 '지움', '2', '5', '8', '0' 에 해당하는 키버튼으로 인식하게 된다(S42).

그리고, 'x3'의 좌표값 영역에 속하는 경우, 마찬가지로 상기 'y'값을 처리하는 과정(S32∼S35)과 같이 'y'값이 속하는 좌표값 영역을 'y1'부터 'y5'까지 순차적으로 확인하여 '종료', '3', '6', '9', '#' 에 해당하는 키버튼으로 인식하게 된다(S43).

이상에서 설명한 바와 같이, 본 발명은 노트북, 이동통신 단말기, PDA(Personal Digital Assistants) 등의 휴대용 단말기에 눈동자의 위치를 감지할 수 있는 카메라가 장착된 경우, 상기 장착된 카메라를 이용하여 사용자 눈동자의 위치 정보에 따른 키버튼을 선택받아 통화 연결을 함으로써, 양손에 물건을 들고 있는 등의 이유로 양손을 모두 사용할 수 없거나 거동이 불편한 장애인이 전화를 사용하는 경우에도, 키패드의 조작 없이도 사용자에게 통화 서비스를 제공하는 효과가 있다.

도1은 본 발명 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법의 동작과정을 보인 순서도.

도2는 본 발명 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법에서, 액정화면에 디스플레이되는 키패드 화면의 예를 보인 예시도.

도3은 본 발명 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법에서, 눈동자의 좌표값과 기저장된 키버튼 좌표값을 비교하여 눈동자의 위치 정보로 특정의 키버튼을 인식하는 과정을 보인 순서도.

Claims (4)

1. 눈동자 감지 통화연결 모드가 실행되면, 카메라를 통해 눈동자의 기준 위치를 설정받는 단계와; 상기 카메라를 통해 감지된 눈동자의 위치 정보를 통해 상기 기준 위치에 대한 눈동자의 좌표값을 산출하는 단계와; 상기 산출된 눈동자 좌표값과 기저장된 키버튼 좌표값을 비교하는 단계와; 상기 비교 결과, 상기 산출된 눈동자 좌표값이 기저장된 키버튼 좌표값의 영역 내에 있는 경우, 상기 산출된 눈동자 좌표값을 특정의 키버튼으로 인식하는 단계와; 상기 인식된 특정의 키버튼에 따라 통화를 연결하는 단계를 포함하는 것을 특징으로 하는 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법.
2. 제1항에 있어서, 상기 눈동자 좌표값은, 액정화면 상에 표시되는 키패드 화면 혹은 기존의 키패드를 소정 시간 동안 주시하는 눈동자가 움직임을 추적하여 결정되는 것을 특징으로 하는 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법.
3. 제1항에 있어서, 상기 눈동자 좌표값을 특정의 키버튼으로 인식하는 단계는, 액정화면에 표시되는 키패드 화면의 각 키버튼을 'x축' 및 'y축'의 좌표로 표시되는 좌표값 영역으로 구분하는 과정과; 눈동자 좌표값 'x' 및 'y' 중에서, 좌표값 'x'가 속하는 행에 대한 좌표값 영역을 결정하는 과정과; 상기 결정된 좌표값 'x' 의 좌표값 영역에 따라, 좌표값 'y'가 속하는 열에 대한 좌표값 영역을 결정하는 과정과; 상기 결정된 좌표값 영역에 따라 해당 눈동자 좌표값 'x' 및 'y'을 특정의 키버튼으로 인식하는 과정을 포함하는 것을 특징으로 하는 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법.
4. 제1항에 있어서, 상기 눈동자 좌표값을 특정의 키버튼으로 인식하는 단계는, 액정화면에 표시되는 키패드 화면의 각 키버튼을 'x축' 및 'y축'의 좌표로 표시되는 좌표값 영역으로 구분하는 과정과; 눈동자 좌표값 'x' 및 'y' 중에서, 좌표값 'y'가 속하는 열에 대한 좌표값 영역을 결정하는 과정과; 상기 결정된 좌표값 'y'의 좌표값 영역에 따라, 좌표값 'x'가 속하는 행에 대한 좌표값 영역을 결정하는 과정과; 상기 결정된 좌표값 영역에 따라 해당 눈동자 좌표값 'x' 및 'y'을 특정의 키버튼으로 인식하는 과정을 포함하는 것을 특징으로 하는 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결 방법.