KR101861318B1 - 터치 스크린을 구비한 기기의 인터페이스 제공 장치 및 방법 - Google Patents

Abstract

본 발명은 터치 스크린을 구비한 기기에서 장애인의 접근성을 향상시키기 위한 인터페이스 제공 장치 및 방법에 관한 것이다. 본 발명에 따른 터치 스크린을 구비한 기기의 인터페이스 제공 방법은, 다수의 이름과 이에 대응하는 전화번호로 구성된 주소록을 화면에 표시하는 과정과, 터치 이벤트가 발생할 경우, 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하는 과정과, 포커싱 영역 내 이름과 전화번호를 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송하는 과정을 포함하는 것을 특징으로 한다.

Description

터치 스크린을 구비한 기기의 인터페이스 제공 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING INTERFACE IN DEVICE WITH TOUCH SCREEN}

본 발명은 터치 스크린을 구비한 기기에 관한 것으로, 특히, 터치 스크린을 구비한 기기에서 장애인의 접근성을 향상시키기 위한 인터페이스 제공 장치 및 방법에 관한 것이다.

멀티미디어 정보 서비스가 발달함에 따라 사회복지 실현의 차원에서 장애인을 위하여 이를 뒷받침해 줄 수 있는 통신 단말기에 대한 요구가 절실해지고 있다. 특히 시각장애인을 위한 통신 단말기는 청각과 촉감 등을 효율적으로 지원할 수 있는 강력한 사용자 인터페이스(Interface)를 적용하여 사용자가 지닌 제한적 능력을 보완할 수 있어야 한다.

현재 통신 단말기는 비장애인 위주로 만들어지며, 예를 들어 단말기와 사람 사이의 인터페이스가 모두 터치 스크린을 통해 이루어지기 때문에, 시각 장애인의 경우 단말기를 이용하여 서비스를 제공받기 어려운 문제점이 있다. 또한, 장애인 전용 기기를 사용하는 장애인의 경우, 기존의 장애인 전용 기기와 단말기의 연동을 통하여 단말기를 사용하고자 하는 욕구를 가지고 있지만, 기기간 인터페이스의 부족으로 인하여 원활한 사용이 어려운 문제점이 있다.

본 발명의 목적은 터치 스크린을 구비한 기기에서 장애인의 접근성을 향상시키기 위한 인터페이스 제공 장치 및 방법을 제공함에 있다.

상술한 목적들을 달성하기 위한 본 발명의 제 1 견지에 따르면, 터치 스크린을 구비한 기기의 인터페이스 제공 방법은, 다수의 이름과 이에 대응하는 전화번호로 구성된 주소록을 화면에 표시하는 과정과, 터치 이벤트가 발생할 경우, 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하는 과정과, 포커싱 영역 내 이름과 전화번호를 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송하는 과정을 포함하는 것을 특징으로 한다.

본 발명의 제 2 견지에 따르면, 터치 스크린을 구비한 기기의 인터페이스 제공 방법은, 다수의 전화번호와 이에 대응하는 일부 문자메시지 내용으로 구성된 문자메시지 리스트를 화면에 표시하는 과정과, 터치 이벤트가 발생할 경우, 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하는 과정과, 포커싱 영역 내 전화번호와 전체 문자메시지 내용을 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송하는 과정을 포함하는 것을 특징으로 한다.

본 발명의 제 3 견지에 따르면, 터치 스크린을 구비한 기기의 인터페이스 제공 방법은, 통화요청신호가 수신될 경우, 상기 수신된 통화요청신호에서 발신자 정보를 추출하는 과정과, 상기 추출된 발신자 정보를 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송하는 과정을 포함하는 것을 특징으로 한다.

본 발명의 제 4 견지에 따르면, 터치 스크린을 구비한 기기의 인터페이스 제공 방법은, 다수의 어플리케이션 이름과 아이콘으로 구성된 어플리케이션 리스트를 화면에 표시하는 과정과, 터치 이벤트가 발생할 경우, 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하는 과정과, 포커싱 영역이 화면의 제1영역에 위치하는지 여부를 검사하는 과정과, 상기 포커싱 영역이 화면의 제1영역에 위치할 경우, 화면의 제2영역에 포커싱 영역 내 어플리케이션 이름과 아이콘을 확대 표시하는 과정과, 상기 포커싱 영역이 화면의 제2영역에 위치할 경우, 화면의 제1영역에 포커싱 영역 내 어플리케이션 이름과 아이콘을 확대 표시하는 과정을 포함하는 것을 특징으로 한다.

본 발명의 제 5 견지에 따르면, 터치 스크린을 구비한 기기의 인터페이스 제공 방법은, 화면 영역을 n×m 배열의 가상 영역으로 분할하는 과정과, 상기 분할된 각 가상 영역에 어플리케이션 이름을 매핑하는 과정과, 하나의 가상 영역을 기본위치로 설정하는 과정과, 터치 이벤트가 발생할 경우, 상기 터치 이벤트가 발생된 위치를 n×m 배열의 가상 영역 상의 기본위치로 인식하는 과정과, 상기 터치 이벤트가 유지된 상태에서 위치가 이동될 경우, n×m 배열의 가상 영역을 기반으로 위치 이동에 따라 터치 이벤트 발생 위치를 변경하는 과정과, 드롭 이벤트가 발생할 경우, 드롭 이벤트가 발생된 위치에 매핑된 어플리케이션 이름의 어플리케이션을 실행하는 과정을 포함하는 것을 특징으로 한다.

본 발명은 터치 스크린을 구비한 기기에서 장애인의 접근성을 향상시키기 위한 인터페이스를 제공함으로써, 시각장애인이 쉽고 원활하게 통신기기를 사용할 수 있는 이점이 있다.

도 1은 본 발명에 따른 터치 스크린을 구비한 기기와 점자 디스플레이 및 인터페이스를 도시한 도면,
도 2는 본 발명의 제1 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 수신번호 표시 방법을 도시한 예시도,
도 3은 본 발명의 제1 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 수신번호 표시 방법을 도시한 흐름도,
도 4는 본 발명의 제2 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 주소록 검색 및 통화요청 방법을 도시한 예시도,
도 5a와 도 5b는 본 발명의 제2 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 주소록 검색 및 통화요청 방법을 도시한 흐름도,
도 6은 본 발명의 제3 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 문자메시지 검색 및 통화요청 방법을 도시한 예시도,
도 7a와 도 7b는 본 발명의 제3 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 문자메시지 검색 및 통화요청 방법을 도시한 흐름도,
도 8은 본 발명의 제4 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 선택 방법을 도시한 예시도,
도 9a와 도 9b는 본 발명의 제4 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 선택 방법을 도시한 흐름도,
도 10은 본 발명의 제5 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 숫자입력 방법을 도시한 예시도,
도 11은 본 발명의 제5 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 숫자입력 방법을 도시한 흐름도,
도 12는 본 발명의 제6 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 실행 방법을 도시한 예시도,
도 13은 본 발명의 제6 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 실행 방법을 도시한 흐름도,
도 14는 본 발명의 제6 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 이름 매핑 방법을 도시한 흐름도, 및
도 15는 본 발명에 따른 터치 스크린을 구비한 기기의 구성 장치를 도시한 블럭도.

이하 첨부된 도면을 참조하여 본 발명의 동작 원리를 상세히 설명한다. 하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.

이하, 본 발명은 터치 스크린을 구비한 기기에서 장애인의 접근성을 향상시키기 위한 인터페이스 제공 기술에 대해 설명한다.

이하 본 발명에 따른 인터페이스 제공 기술은 셀룰러 전화기(Celluar Phone), 개인 휴대 통신 전화기(PCS: Personal Communication System), 복합 무선 단말기(PDA: Personal Digital Assistant), IMT2000(International Mobile Telecommunication-2000) 단말기 등의 휴대용 단말기, 랩탑(laptop) 컴퓨터, 스마트폰(smart phone), 타블렛(tablet) PC(Personal Computer) 등 터치 스크린을 구비한 기기라면 모두 적용될 수 있다.

도 1은 본 발명에 따른 터치 스크린을 구비한 기기와 점자 디스플레이 및 인터페이스를 도시한 도면이다.

상기 도 1을 참조하면, 상기 터치 스크린(102)을 구비한 기기(100)는 시각장애인을 위한 문자/숫자 크기 확대/축소 기능, 문자데이터를 음성데이터로 변환하여 출력하는 TTS(Text to Speech) 기능, 문자-점자 변환 API(Application Programming Interface)/프로토콜 지원 기능 등을 제공하며, 인터페이스(110)를 통해 점자 디스플레이(120)로 점자 데이터를 전송한다.

상기 인터페이스(110)는 터치 스크린(102)을 구비한 기기(100)와 점자 디스플레이(120) 사이의 인터페이스를 제공하며, USB, Serial, PS/2, IEEE1394, UART 등의 유선 인터페이스, 또는 블루투스, 와이파이(WiFi), RF, 지그비(ZigBee) 등의 무선 인터페이스로 구현될 수 있다.

상기 점자 디스플레이(120)는 인터페이스(110)를 통해 상기 터치 스크린(102)을 구비한 기기(100)로부터 수신되는 점자 데이터를 점자 모듈(130)을 통해 출력한다. 추가적으로, 상기 점자 디스플레이(120)는 상기 터치 스크린(102)을 구비한 기기(100)를 제어하기 위한 좌측 방향키(122)와 우측 방향키(124), 확인키(즉 OK 키)(120), 포인팅디바이스(예를 들어, 트랙볼(Trackball))(128) 중 적어도 하나를 포함하여 구성될 수 있다. 예를 들어, 상기 좌측 방향키(122)와 우측 방향키(124)는, 상기 기기(100)를 제어하여 터치 스크린(102) 상의 포커싱 영역을 이동시킬 수 있으며, 상기 확인키(즉 OK 키)(120)는 상기 터치 스크린(102) 상의 포커싱 영역 내 전화번호로 통화요청신호를 전송하도록 상기 기기(100)를 제어할 수 있다.

도 2는 본 발명의 제1 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 수신번호 표시 방법을 도시한 예시도이다.

상기 도 2를 참조하면, 상기 기기는, 대기 상태(도 2의 (a))에서 통화요청신호가 수신되면, 발신자 정보(즉, 이름 및 전화번호)를 화면에 확대 표시함으로써(도 2의 (b)), 사용자(예를 들어, 약시 시각장애인)로 하여금 확대된 문자를 통해 발신자 정보를 쉽게 확인하도록 할 수 있다. 또한, 상기 기기는 발신자 정보를 음성 데이터로 변환하여 스피커를 통해 출력할 수 있으며, 인터페이스를 통해 점자 디스플레이가 연결되는 경우, 발신자 정보를 점자 데이터로 변환하여 점자 디스플레이로 전송할 수도 있다. 이로써, 시각장애인(예를 들어, 전맹 시각장애인)은 음성 또는 점자를 통해 발신자 정보를 쉽게 확인할 수 있다.

도 3은 본 발명의 제1 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 수신번호 표시 방법을 도시한 흐름도이다.

상기 도 3을 참조하면, 상기 기기는 301단계에서 통화요청신호가 수신되는지 여부를 검사한다.

상기 301단계에서, 통화요청신호가 수신됨이 판단될 시, 상기 기기는 303단계에서 상기 수신된 통화요청신호에서 발신자 정보를 추출한다. 여기서, 상기 수신된 통화요청신호에서 추출되는 발신자 정보는 전화번호를 포함한다. 도시하지는 않았지만, 상기 기기는 상기 추출된 전화번호가 기 등록된 번호인지 여부를 검사하여, 기 등록된 번호인 경우, 메모리에서 해당 전화번호에 대응하는 이름을 검색하고, 상기 검색된 이름을 발신자 정보에 추가할 수 있다.

이후, 상기 기기는 305단계에서 화면에 상기 추출된 발신자 정보를 확대 표시한다. 예를 들어, 상기 기기는 화면에 상기 추출된 발신자 정보를 일반적인 크기로 표시하면서, 동시에 별도의 팝업창을 통해 상기 추출된 발신자 정보를 확대 표시할 수 있다. 여기서, 상기 확대 표시되는 발신자 정보에 대하여 고대비 화면 배색을 적용할 수 있다. 이로써, 사용자(예를 들어, 약시 시각장애인)는 확대된 문자를 통해 발신자 정보를 쉽게 확인할 수 있다.

이후, 상기 기기는 307단계에서 상기 추출된 발신자 정보를 음성 데이터로 변환하고, 309단계에서 스피커를 통해 상기 음성 데이터를 출력한다. 이로써, 사용자(예를 들어, 시각장애인)은 음성을 통해 발신자 정보를 쉽게 확인할 수 있다.

이후, 상기 기기는 311단계에서 상기 추출된 발신자 정보를 점자 데이터로 변환하고, 313단계에서 인터페이스를 통해 상기 점자 데이터를 점자 디스플레이로 전송한다. 이로써, 시각장애인(예를 들어, 전맹 시각장애인)은 점자를 통해 발신자 정보를 쉽게 확인할 수 있다.

이후, 상기 기기는 본 발명에 따른 알고리즘을 종료한다.

도 4는 본 발명의 제2 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 주소록 검색 및 통화요청 방법을 도시한 예시도이다.

상기 도 4를 참조하면, 상기 기기는, 다수의 이름과 전화번호로 구성된 주소록을 화면에 표시한 상태에서 터치 이벤트가 발생되면, 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하고, 포커싱 영역 내 이름과 전화번호를 확대 표시한다(도 4의 (a)). 이로써, 사용자(예를 들어, 약시 시각장애인)는 확대된 문자를 통해 주소록 내 포커싱된 하나의 이름과 전화번호를 쉽게 확인할 수 있다. 여기서, 화면 내 하나의 이름과 이에 대응하는 전화번호가 포함된 영역을 기반으로, 주소록 내 포커싱 가능한 영역이 구분된다. 또한, 상기 기기는 포커싱 영역 내 이름과 전화번호를 음성 데이터로 변환하여 스피커를 통해 출력할 수 있으며, 인터페이스를 통해 점자 디스플레이가 연결되는 경우, 포커싱 영역 내 이름과 전화번호를 점자 데이터로 변환하여 점자 디스플레이로 전송할 수도 있다. 이로써, 시각장애인(예를 들어, 전맹 시각장애인)은 음성 또는 점자를 통해 주소록 내 포커싱된 하나의 이름과 전화번호를 쉽게 확인할 수 있다. 여기서, 점자 디스플레이에서 한 번에 표시될 수 있는 점자 데이터의 양은 한정되어 있으며, 따라서 포커싱 영역 내 이름과 전화번호가 한 번에 점자 디스플레이에 표시되는 것이 불가능할 수 있다. 이 경우, 상기 기기는 점자 디스플레이에서 한번에 표시될 수 있는 점자 데이터의 양을 기반으로 전체 점자 데이터를 그룹핑하고, 터치 이벤트의 발생에 따라 그 중 첫 그룹의 점자 데이터를 인터페이스를 통해 점자 디스플레이로 전송할 수 있다.

이후, 상기 기기는 상/하 방향으로 플리킹 이벤트가 발생되면, 상/하 방향으로 한 단계 포커싱 영역을 이동한다(도 4의 (b)). 여기서, 상기 플리킹 이벤트는, 화면을 터치하여 원하는 방향으로 튕기듯 움직이는 이벤트를 의미한다.

도시하지는 않았지만, 상기 기기는 좌/우 방향으로 플리킹 이벤트가 발생되면, 전체 점자 데이터 중 현재 점자 디스플레이로 전송된 그룹의 점자 데이터를 기준으로, 이전/이후 그룹의 점자 데이터를 인터페이스를 통해 점자 디스플레이로 전송한다.

또한, 도시하지는 않았지만, 상기 기기는 상/하 방향으로 멀티스크롤 이벤트가 발생되면, 상/하 방향으로 스크롤 이동거리만큼 포커싱 영역을 이동한다. 여기서, 상기 멀티스크롤 이벤트는, 다수의 위치에서 동시에 화면을 터치하여 원하는 방향으로 이동하는 이벤트를 의미한다.

또한, 도시하지는 않았지만, 상기 기기는 멀티터치 이벤트가 발생되면, 포커싱 영역 내 전화번호로 통화요청신호를 전송한다. 여기서, 상기 멀티터치 이벤트는, 다수의 위치에서 동시에 화면이 터치되는 이벤트, 또는 연속으로 다수 회수 화면이 터치되는 이벤트를 의미한다.

도 5a와 도 5b는 본 발명의 제2 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 주소록 검색 및 통화요청 방법을 도시한 흐름도이다.

상기 도 5a와 도 5b를 참조하면, 상기 기기는 501단계에서 사용자의 요청에 따라 다수의 이름과 이에 대응하는 전화번호로 구성된 주소록을 화면에 표시한다. 상기 주소록은 사용자(예를 들어, 약시 시각장애인)의 가독성을 향상시키기 위하여 이름과 전화번호만으로 단순하게 구성하며, 문자 및 숫자의 크기를 크게 표시한다. 여기서, 화면 내 하나의 이름과 이에 대응하는 전화번호가 포함된 영역을 기반으로, 주소록 내 포커싱 가능한 영역이 구분된다.

이후, 상기 기기는 503단계에서 터치 이벤트가 발생하는지 여부를 검사한다.

상기 503단계에서, 터치 이벤트가 발생함이 판단될 시, 상기 기기는 505단계에서 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하고, 507단계에서 포커싱 영역 내 이름과 전화번호를 확대 표시한다. 여기서, 상기 포커싱 영역 내 이름과 전화번호에 대하여 고대비 화면 배색을 적용할 수 있다. 또한, 상기 포커싱 영역 내 이름과 전화번호는 하이라이트될 수 있다. 이로써, 사용자(예를 들어, 약시 시각장애인)는 확대된 문자를 통해 주소록 내 포커싱된 하나의 이름과 전화번호를 쉽게 확인할 수 있다. 도시하지는 않았으나, 포커싱 영역 내 이름과 전화번호의 확대 표시는 하드웨어키(예를 들어, 볼륨 업/다운 키)를 이용하여 조절 가능하다.

이후, 상기 기기는 509단계에서 상기 포커싱 영역 내 이름과 전화번호를 음성 데이터로 변환하고, 511단계에서 스피커를 통해 상기 음성 데이터를 출력한다. 이로써, 사용자(예를 들어, 시각장애인)은 음성을 통해 주소록 내 포커싱된 하나의 이름과 전화번호를 쉽게 확인할 수 있다.

이후, 상기 기기는 513단계에서 상기 포커싱 영역 내 이름과 전화번호를 점자 데이터로 변환하고, 515단계에서 인터페이스를 통해 상기 점자 데이터를 점자 디스플레이로 전송한다. 이로써, 시각장애인(예를 들어, 전맹 시각장애인)은 점자를 통해 주소록 내 포커싱된 하나의 이름과 전화번호를 쉽게 확인할 수 있다. 여기서, 점자 디스플레이에서 한 번에 표시될 수 있는 점자 데이터의 양은 한정되어 있으며, 따라서 포커싱 영역 내 이름과 전화번호가 한 번에 점자 디스플레이에 표시되는 것이 불가능할 수 있다. 이 경우, 상기 기기는 점자 디스플레이에서 한번에 표시될 수 있는 점자 데이터의 양을 기반으로 전체 점자 데이터를 그룹핑하고, 터치 이벤트의 발생에 따라 그 중 첫 그룹의 점자 데이터를 인터페이스를 통해 점자 디스플레이로 전송할 수 있다.

이후, 상기 기기는 517단계에서 상/하 방향으로 플리킹 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 플리킹 이벤트는, 화면을 터치하여 원하는 방향으로 튕기듯 움직이는 이벤트를 의미한다.

상기 517단계에서, 상/하 방향으로 플리킹 이벤트가 발생함이 판단될 시, 상기 기기는 519단계에서 상/하 방향으로 한 단계 포커싱 영역을 이동하고, 상기 507단계로 돌아가 이하 단계를 반복 수행한다. 여기서, 상기 포커싱 영역은, 플리킹 이벤트의 발생 위치와 상관없이, 플래킹 이벤트의 발생 방향으로 한 단계 이동한다.

반면, 상기 517단계에서, 상/하 방향으로 플리킹 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 521단계에서 좌/우 방향으로 플리킹 이벤트가 발생하는지 여부를 검사한다.

상기 521단계에서, 좌/우 방향으로 플리킹 이벤트가 발생함이 판단될 시, 상기 기기는 523단계에서 인터페이스를 통해 이전/이후 점자 데이터를 점자 디스플레이로 전송하고, 525단계로 진행한다. 즉, 전체 점자 데이터 중 현재 점자 디스플레이로 전송된 그룹의 점자 데이터를 기준으로, 플리킹 이벤트의 발생 방향에 따라 이전/이후 그룹의 점자 데이터를 인터페이스를 통해 점자 디스플레이로 전송한다.

반면, 상기 521단계에서, 좌/우 방향으로 플리킹 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 바로 525단계로 진행하여 상/하 방향으로 멀티스크롤 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 멀티스크롤 이벤트는, 다수의 위치에서 동시에 화면을 터치하여 원하는 방향으로 이동하는 이벤트를 의미한다.

상기 525단계에서, 상/하 방향으로 멀티스크롤 이벤트가 발생함이 판단될 시, 상기 기기는 527단계에서 상/하 방향으로 스크롤 이동거리만큼 포커싱 영역을 이동하고, 상기 507단계로 돌아가 이하 단계를 반복 수행한다. 즉, 상기 기기는 상/하 방향으로 발생되는 멀티스크롤 이벤트에 대응하여 실제 이동거리를 검출하고, 상기 검출된 실제 이동거리에 비례하는 스크롤 이동거리를 산출하여, 상기 멀티스크롤 이벤트의 진행 방향으로 상기 산출된 스크롤 이동거리만큼 상기 포커싱 영역을 이동한다.

반면, 상기 525단계에서, 상/하 방향으로 멀티스크롤 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 529단계에서 멀티터치 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 멀티터치 이벤트는, 다수의 위치에서 동시에 화면이 터치되는 이벤트, 또는 연속으로 다수 회수 화면이 터치되는 이벤트를 의미한다.

상기 529단계에서, 멀티터치 이벤트가 발생함이 판단될 시, 상기 기기는 531단계에서 포커싱 영역 내 전화번호로 통화요청신호를 전송한 후, 본 발명에 따른 알고리즘을 종료한다. 여기서, 상기 통화요청신호는, 멀티터치 이벤트의 발생 위치와 상관없이, 멀티터치 이벤트의 발생 여부에 따라 전송된다.

반면, 상기 529단계에서, 멀티터치 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 상기 517단계로 돌아가 이하 단계를 반복 수행한다.

도 6은 본 발명의 제3 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 문자메시지 검색 및 통화요청 방법을 도시한 예시도이다.

상기 도 6을 참조하면, 상기 기기는, 다수의 이름(또는 전화번호)과 이에 대응하는 일부 문자메시지 내용으로 구성된 문자메시지 리스트를 화면에 표시한 상태에서(도 6의 (a)), 터치 이벤트가 발생되면, 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하고, 포커싱 영역 내 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용을 확대 표시한다(도 6의 (b)). 이로써, 사용자(예를 들어, 약시 시각장애인)는 확대된 문자를 통해 문자메시지 리스트 내 포커싱된 하나의 이름(또는 전화번호)과 전체 문자메시지 내용을 쉽게 확인할 수 있다. 여기서, 화면 내 하나의 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용이 포함된 영역을 기반으로, 문자메시지 리스트 내 포커싱 가능한 영역이 구분된다. 또한, 상기 기기는 포커싱 영역 내 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용을 음성 데이터로 변환하여 스피커를 통해 출력할 수 있으며, 인터페이스를 통해 점자 디스플레이가 연결되는 경우, 포커싱 영역 내 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용을 점자 데이터로 변환하여 점자 디스플레이로 전송할 수도 있다. 이로써, 시각장애인(예를 들어, 전맹 시각장애인)은 음성 또는 점자를 통해 문자메시지 리스트 내 포커싱된 하나의 이름(또는 전화번호)과 전체 문자메시지 내용을 쉽게 확인할 수 있다. 여기서, 점자 디스플레이에서 한 번에 표시될 수 있는 점자 데이터의 양은 한정되어 있으며, 따라서 포커싱 영역 내 이름(또는 전화번호)과 전체 문자메시지 내용이 한 번에 점자 디스플레이에 표시되는 것이 불가능할 수 있다. 이 경우, 상기 기기는 점자 디스플레이에서 한번에 표시될 수 있는 점자 데이터의 양을 기반으로 전체 점자 데이터를 그룹핑하고, 터치 이벤트의 발생에 따라 그 중 첫 그룹의 점자 데이터를 인터페이스를 통해 점자 디스플레이로 전송할 수 있다. 또한, 포커싱 영역 내 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용의 확대 표시는 하드웨어키(예를 들어, 볼륨 업/다운 키)를 이용하여 조절 가능하다(도 6의 (c)).

도시하지는 않았지만, 상기 기기는 상/하 방향으로 플리킹 이벤트가 발생되면, 상/하 방향으로 한 단계 포커싱 영역을 이동한다. 여기서, 상기 플리킹 이벤트는, 화면을 터치하여 원하는 방향으로 튕기듯 움직이는 이벤트를 의미한다.

도시하지는 않았지만, 상기 기기는 좌/우 방향으로 플리킹 이벤트가 발생되면, 전체 점자 데이터 중 현재 점자 디스플레이로 전송된 그룹의 점자 데이터를 기준으로, 이전/이후 그룹의 점자 데이터를 인터페이스를 통해 점자 디스플레이로 전송한다.

또한, 도시하지는 않았지만, 상기 기기는 상/하 방향으로 멀티스크롤 이벤트가 발생되면, 상/하 방향으로 스크롤 이동거리만큼 포커싱 영역을 이동한다. 여기서, 상기 멀티스크롤 이벤트는, 다수의 위치에서 동시에 화면을 터치하여 원하는 방향으로 이동하는 이벤트를 의미한다.

또한, 도시하지는 않았지만, 상기 기기는 멀티터치 이벤트가 발생되면, 포커싱 영역 내 이름(또는 전화번호)으로 통화요청신호를 전송한다. 여기서, 상기 멀티터치 이벤트는, 다수의 위치에서 동시에 화면이 터치되는 이벤트, 또는 연속으로 다수 회수 화면이 터치되는 이벤트를 의미한다.

도 7a와 도 7b는 본 발명의 제3 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 문자메시지 검색 및 통화요청 방법을 도시한 흐름도이다.

상기 도 7a와 도 7b를 참조하면, 상기 기기는 701단계에서 사용자의 요청에 따라 다수의 이름(또는 전화번호)과 이에 대응하는 일부 문자메시지 내용으로 구성된 문자메시지 리스트를 화면에 표시한다. 상기 문자메시지 리스트는 사용자(예를 들어, 약시 시각장애인)의 가독성을 향상시키기 위하여 이름(또는 전화번호)과 일부 문자메시지 내용만으로 단순하게 구성하며, 문자 및 숫자의 크기를 크게 표시한다. 여기서, 화면 내 하나의 이름(또는 전화번호)과 이에 대응하는 일부 문자메시지 내용이 포함된 영역을 기반으로, 문자메시지 리스트 내 포커싱 가능한 영역이 구분된다.

이후, 상기 기기는 703단계에서 터치 이벤트가 발생하는지 여부를 검사한다.

상기 703단계에서, 터치 이벤트가 발생함이 판단될 시, 상기 기기는 705단계에서 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하고, 707단계에서 포커싱 영역 내 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용을 확대 표시한다. 여기서, 상기 포커싱 영역 내 이름(또는 전화번호)과 전체 문자메시지 내용에 대하여 고대비 화면 배색을 적용할 수 있다. 또한, 상기 포커싱 영역 내 이름(또는 전화번호)과 전체 문자메시지 내용은 하이라이트될 수 있다. 이로써, 사용자(예를 들어, 약시 시각장애인)는 확대된 문자를 통해 문자메시지 리스트 내 포커싱된 하나의 이름(또는 전화번호)과 전체 문자메시지 내용을 쉽게 확인할 수 있다. 도시하지는 않았으나, 포커싱 영역 내 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용의 확대 표시는 하드웨어키(예를 들어, 볼륨 업/다운 키)를 이용하여 조절 가능하다.

이후, 상기 기기는 709단계에서 상기 포커싱 영역 내 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용을 음성 데이터로 변환하고, 711단계에서 스피커를 통해 상기 음성 데이터를 출력한다. 이로써, 사용자(예를 들어, 시각장애인)은 음성을 통해 문자메시지 리스트 내 포커싱된 하나의 이름(또는 전화번호)과 전체 문자메시지 내용을 쉽게 확인할 수 있다.

이후, 상기 기기는 713단계에서 상기 포커싱 영역 내 이름(또는 전화번호)과 이에 대응하는 전체 문자메시지 내용을 점자 데이터로 변환하고, 715단계에서 인터페이스를 통해 상기 점자 데이터를 점자 디스플레이로 전송한다. 이로써, 시각장애인(예를 들어, 전맹 시각장애인)은 점자를 통해 문자메시지 리스트 내 포커싱된 하나의 이름(또는 전화번호)과 전체 문자메시지 내용을 쉽게 확인할 수 있다. 여기서, 점자 디스플레이에서 한 번에 표시될 수 있는 점자 데이터의 양은 한정되어 있으며, 따라서 포커싱 영역 내 이름(또는 전화번호)과 전체 문자메시지 내용이 한 번에 점자 디스플레이에 표시되는 것이 불가능할 수 있다. 이 경우, 상기 기기는 점자 디스플레이에서 한번에 표시될 수 있는 점자 데이터의 양을 기반으로 전체 점자 데이터를 그룹핑하고, 터치 이벤트의 발생에 따라 그 중 첫 그룹의 점자 데이터를 인터페이스를 통해 점자 디스플레이로 전송할 수 있다.

이후, 상기 기기는 717단계에서 상/하 방향으로 플리킹 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 플리킹 이벤트는, 화면을 터치하여 원하는 방향으로 튕기듯 움직이는 이벤트를 의미한다.

상기 717단계에서, 상/하 방향으로 플리킹 이벤트가 발생함이 판단될 시, 상기 기기는 719단계에서 상/하 방향으로 한 단계 포커싱 영역을 이동하고, 상기 707단계로 돌아가 이하 단계를 반복 수행한다. 여기서, 상기 포커싱 영역은, 플리킹 이벤트의 발생 위치와 상관없이, 플래킹 이벤트의 발생 방향으로 한 단계 이동한다.

반면, 상기 717단계에서, 상/하 방향으로 플리킹 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 721단계에서 좌/우 방향으로 플리킹 이벤트가 발생하는지 여부를 검사한다.

상기 721단계에서, 좌/우 방향으로 플리킹 이벤트가 발생함이 판단될 시, 상기 기기는 723단계에서 인터페이스를 통해 이전/이후 점자 데이터를 점자 디스플레이로 전송하고, 725단계로 진행한다. 즉, 전체 점자 데이터 중 현재 점자 디스플레이로 전송된 그룹의 점자 데이터를 기준으로, 플리킹 이벤트의 발생 방향에 따라 이전/이후 그룹의 점자 데이터를 인터페이스를 통해 점자 디스플레이로 전송한다.

반면, 상기 721단계에서, 좌/우 방향으로 플리킹 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 바로 725단계로 진행하여 상/하 방향으로 멀티스크롤 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 멀티스크롤 이벤트는, 다수의 위치에서 동시에 화면을 터치하여 원하는 방향으로 이동하는 이벤트를 의미한다.

상기 725단계에서, 상/하 방향으로 멀티스크롤 이벤트가 발생함이 판단될 시, 상기 기기는 727단계에서 상/하 방향으로 스크롤 이동거리만큼 포커싱 영역을 이동하고, 상기 707단계로 돌아가 이하 단계를 반복 수행한다. 즉, 상기 기기는 상/하 방향으로 발생되는 멀티스크롤 이벤트에 대응하여 실제 이동거리를 검출하고, 상기 검출된 실제 이동거리에 비례하는 스크롤 이동거리를 산출하여, 상기 멀티스크롤 이벤트의 진행 방향으로 상기 산출된 스크롤 이동거리만큼 상기 포커싱 영역을 이동한다.

반면, 상기 725단계에서, 상/하 방향으로 멀티스크롤 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 729단계에서 멀티터치 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 멀티터치 이벤트는, 다수의 위치에서 동시에 화면이 터치되는 이벤트, 또는 연속으로 다수 회수 화면이 터치되는 이벤트를 의미한다.

상기 729단계에서, 멀티터치 이벤트가 발생함이 판단될 시, 상기 기기는 731단계에서 포커싱 영역 내 이름(또는 전화번호)으로 통화요청신호를 전송한 후, 본 발명에 따른 알고리즘을 종료한다. 여기서, 상기 통화요청신호는, 멀티터치 이벤트의 발생 위치와 상관없이, 멀티터치 이벤트의 발생 여부에 따라 전송된다.

반면, 상기 729단계에서, 멀티터치 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 상기 717단계로 돌아가 이하 단계를 반복 수행한다.

도 8은 본 발명의 제4 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 선택 방법을 도시한 예시도이다.

상기 도 8을 참조하면, 상기 기기는, 다수의 어플리케이션 이름과 이에 대응하는 아이콘으로 구성된 어플리케이션 리스트를 화면에 표시한 상태에서 터치 이벤트가 발생되면, 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하고(도 8의 (a)), 포커싱 영역 내 어플리케이션 이름과 아이콘을 화면의 상단 또는 하단에 확대 표시한다. 이로써, 사용자(예를 들어, 약시 시각장애인)는 확대된 그림 및 문자를 통해 어플리케이션 리스트 내 포커싱된 하나의 어플리케이션 이름과 아이콘을 쉽게 확인할 수 있다. 여기서, 화면 내 하나의 어플리케이션 이름과 이에 대응하는 아이콘이 포함된 영역을 기반으로, 어플리케이션 리스트 내 포커싱 가능한 영역이 구분된다. 또한, 상기 기기는 포커싱 영역 내 어플리케이션 이름을 음성 데이터로 변환하여 스피커를 통해 출력할 수 있으며, 인터페이스를 통해 점자 디스플레이가 연결되는 경우, 포커싱 영역 내 어플리케이션 이름을 점자 데이터로 변환하여 점자 디스플레이로 전송할 수도 있다. 이로써, 시각장애인(예를 들어, 전맹 시각장애인)은 음성 또는 점자를 통해 어플리케이션 리스트 내 포커싱된 하나의 어플리케이션 이름을 쉽게 확인할 수 있다.

이후, 상기 기기는 좌/우 방향으로 멀티플리킹 이벤트가 발생되면, 좌/우 방향으로 화면을 전환한다(도 8의 b)). 여기서, 상기 멀티플리킹 이벤트는, 다수의 위치에서 동시에 화면을 터치하여 원하는 방향으로 튕기듯 움직이는 이벤트를 의미한다.

도시하지는 않았지만, 상기 기기는 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되면, 좌표위치 이동에 따라 포커싱 영역을 이동한다.

도시하지는 않았지만, 상기 기기는 멀티터치 이벤트가 발생되면, 포커싱 영역 내 어플리케이션을 실행한다. 여기서, 상기 멀티터치 이벤트는, 다수의 위치에서 동시에 화면이 터치되는 이벤트, 또는 연속으로 다수 회수 화면이 터치되는 이벤트를 의미한다.

도 9a와 도 9b는 본 발명의 제4 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 선택 방법을 도시한 흐름도이다.

상기 도 9a와 도 9b를 참조하면, 상기 기기는 901단계에서 사용자의 요청에 따라 다수의 어플리케이션 이름과 이에 대응하는 아이콘으로 구성된 어플리케이션 리스트를 화면에 표시한다. 상기 어플리케이션 리스트는 사용자(예를 들어, 약시 시각장애인)의 가독성을 향상시키기 위하여 어플리케이션 이름과 아이콘만으로 단순하게 구성하며, 그림과 문자 및 숫자의 크기를 크게 표시한다. 여기서, 화면 내 하나의 어플리케이션 이름과 이에 대응하는 아이콘이 포함된 영역을 기반으로, 어플리케이션 리스트 내 포커싱 가능한 영역이 구분된다.

이후, 상기 기기는 903단계에서 터치 이벤트가 발생하는지 여부를 검사한다.

상기 903단계에서, 터치 이벤트가 발생함이 판단될 시, 상기 기기는 905단계에서 화면 내 상기 터치 이벤트가 발생된 영역을 포커싱하고, 907단계에서 포커싱 영역이 화면중심선을 기준으로 화면의 상단에 위치하는지 여부를 검사한다.

상기 907단계에서, 포커싱 영역이 화면중심선을 기준으로 화면의 상단에 위치함이 판단될 시, 상기 기기는 909단계에서 화면 하단에 포커싱 영역 내 어플리케이션 이름과 아이콘을 확대 표시하고, 913단계로 진행한다. 반면, 상기 907단계에서, 포커싱 영역이 화면중심선을 기준으로 화면의 하단에 위치함이 판단될 시, 상기 기기는 911단계에서 화면 상단에 포커싱 영역 내 어플리케이션 이름과 아이콘을 확대 표시하고, 상기 913단계로 진행한다. 여기서, 상기 포커싱 영역 내 어플리케이션 이름과 아이콘에 대하여 고대비 화면 배색을 적용할 수 있다. 또한, 상기 포커싱 영역 내 어플리케이션 이름과 아이콘은 하이라이트될 수 있다. 이로써, 사용자(예를 들어, 약시 시각장애인)는 확대된 그림 및 문자를 통해 어플리케이션 리스트 내 포커싱된 하나의 어플리케이션 이름과 아이콘을 쉽게 확인할 수 있다. 도시하지는 않았으나, 포커싱 영역 내 어플리케이션 이름과 아이콘의 확대 표시는 하드웨어키(예를 들어, 볼륨 업/다운 키)를 이용하여 조절 가능하다.

이후, 상기 기기는 913단계에서 상기 포커싱 영역 내 어플리케이션 이름을 음성 데이터로 변환하고, 915단계에서 스피커를 통해 상기 음성 데이터를 출력한다. 이로써, 사용자(예를 들어, 시각장애인)은 음성을 통해 어플리케이션 리스트 내 포커싱된 하나의 어플리케이션 이름을 쉽게 확인할 수 있다.

이후, 상기 기기는 917단계에서 상기 포커싱 영역 내 어플리케이션 이름을 점자 데이터로 변환하고, 919단계에서 인터페이스를 통해 상기 점자 데이터를 점자 디스플레이로 전송한다. 이로써, 시각장애인(예를 들어, 전맹 시각장애인)은 점자를 통해 어플리케이션 리스트 내 포커싱된 하나의 어플리케이션 이름을 쉽게 확인할 수 있다.

이후, 상기 기기는 921단계에서 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되는지 여부를 검사한다.

상기 921단계에서, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동됨이 판단될 시, 상기 기기는 923단계에서 좌표위치 이동에 따라 포커싱 영역을 이동하고, 상기 907단계로 돌아가 이하 단계를 반복 수행한다.

반면, 상기 921단계에서, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되지 않음이 판단될 시, 상기 기기는 925단계에서 좌/우 방향으로 멀티플리킹 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 멀티플리킹 이벤트는, 다수의 위치에서 동시에 화면을 터치하여 원하는 방향으로 튕기듯 움직이는 이벤트를 의미한다.

상기 925단계에서, 좌/우 방향으로 멀티플리킹 이벤트가 발생함이 판단될 시, 상기 기기는 927단계에서 좌/우 방향으로 화면을 전환한다. 여기서, 상기 화면 전환에 따라 현재 표시된 어플리케이션 리스트와 다른 어플리케이션 리스트가 화면에 표시될 수 있다.

반면, 상기 925단계에서, 좌/우 방향으로 멀티플리킹 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 929단계에서 멀티터치 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 멀티터치 이벤트는, 다수의 위치에서 동시에 화면이 터치되는 이벤트, 또는 연속으로 다수 회수 화면이 터치되는 이벤트를 의미한다.

상기 929단계에서, 멀티터치 이벤트가 발생함이 판단될 시, 상기 기기는 931단계에서 포커싱 영역 내 어플리케이션을 실행한 후, 본 발명에 따른 알고리즘을 종료한다. 여기서, 상기 어플리케이션은, 멀티터치 이벤트의 발생 위치와 상관없이, 멀티터치 이벤트의 발생 여부에 따라 실행된다.

반면, 상기 929단계에서, 멀티터치 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 상기 921단계로 돌아가 이하 단계를 반복 수행한다

도 10은 본 발명의 제5 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 숫자입력 방법을 도시한 예시도이다.

상기 도 10을 참조하면, 상기 기기는 화면에서 입력창 영역을 제외한 나머지 영역을 n×m 배열의 가상 영역으로 분할하고, 상기 분할된 각 가상 영역에 숫자, 또는 특수문자, 또는 기능 이름 등을 매핑한다(도 10의 (a)). 예를 들어, 상기 분할된 각 가상 영역에 0~9까지의 숫자, *, # 등의 특수문자, 삭제 기능, 뒤로 기능, 통화 기능 등을 매핑할 수 있다. 이때, 상기 기기는 상기 분할된 각 가상 영역에 매핑된 숫자(또는 특수문자) 또는 기능 이름 중 하나의 숫자(또는 특수문자) 또는 기능 이름을 기준점(즉, 기본위치)으로 설정한다. 예를 들어, 숫자 5를 기준점으로 설정할 수 있다.

이후, 상기 기기는 터치 이벤트가 발생되면, 상기 터치 이벤트가 발생된 위치를 상기 기준점(예를 들어, 숫자 5)의 위치로 인식한다. 만약, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되면(도 10의 (b)), 상기 기기는 상기 n×m 배열의 가상 영역을 기반으로 상기 터치 이벤트의 좌표위치 이동에 따라 터치 이벤트 발생 위치를 변경하고, 상기 변경된 위치에 매핑된 숫자(또는 특수문자) 또는 기능 이름을 팝업창을 통해 화면에 확대 표시한다(도 10의 (c)). 또한, 상기 기기는 상기 변경된 위치에 매핑된 숫자(또는 특수문자) 또는 기능 이름을 음성 데이터로 변환하여 스피커를 통해 출력하고, 상기 변경된 위치에 매핑된 숫자(또는 특수문자) 또는 기능 이름을 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송한다. 이후, 상기 위치이동에 연속하여 드롭 이벤트가 발생되면, 상기 기기는 상기 드롭 이벤트가 발생된 위치에 매핑된 숫자(또는 특수문자)를 입력창에 입력하거나 또는 상기 드롭 이벤트가 발생된 위치에 매핑된 기능(예를 들어, 통화 기능)을 실행한다.

도 11은 본 발명의 제5 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 숫자입력 방법을 도시한 흐름도이다.

상기 도 11을 참조하면, 상기 기기는 1101단계에서 화면에서 입력창 영역을 제외한 나머지 영역을 n×m 배열의 가상 영역으로 분할하고, 상기 분할된 각 가상 영역에 숫자, 또는 특수문자, 또는 기능 이름(예를 들어 어플리케이션 이름) 등을 매핑한다. 예를 들어, 상기 분할된 각 가상 영역에 0~9까지의 숫자, *, # 등의 특수문자, 삭제 기능, 뒤로 기능, 통화 기능 등을 매핑할 수 있다.

이후, 상기 기기는 1103단계에서 상기 분할된 각 가상 영역에 매핑된 숫자(또는 특수문자) 또는 기능 이름 중 하나의 숫자(또는 특수문자) 또는 기능 이름을 기준점으로 설정한다. 예를 들어, 숫자 5를 기준점으로 설정할 수 있다.

이후, 상기 기기는 1105단계에서 터치 이벤트가 발생하는지 여부를 검사한다.

상기 1105단계에서, 터치 이벤트가 발생함이 판단될 시, 상기 기기는 1107단계에서 상기 터치 이벤트가 발생된 위치를 상기 기준점(예를 들어, 숫자 5)의 위치로 인식하고, 1109단계에서 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되는지 여부를 검사한다.

상기 1109단계에서, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동됨이 판단될 시, 상기 기기는 1111단계에서 상기 n×m 배열의 가상 영역을 기반으로 상기 터치 이벤트의 좌표위치 이동에 따라 터치 이벤트 발생 위치를 변경하고 상기 변경된 위치에 매핑된 숫자(또는 특수문자) 또는 기능 이름을 검색한 후, 1113단계로 진행한다.

이후, 상기 기기는 1113단계에서 상기 검색된 숫자(또는 특수문자) 또는 기능 이름을 팝업창을 통해 화면에 확대 표시하고, 1115단계에서 상기 검색된 숫자(또는 특수문자) 또는 기능 이름을 음성 데이터로 변환하여 스피커를 통해 출력하며, 1117단계에서 상기 검색된 숫자(또는 특수문자) 또는 기능 이름을 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송한 후, 상기 1109단계로 돌아가 이하 단계를 반복 수행한다.

반면, 상기 1109단계에서, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되지 않음이 판단될 시, 상기 기기는 1119단계에서 드롭 이벤트가 발생되는지 여부를 검사한다. 여기서, 상기 드롭 이벤트는 터치가 해제되는 이벤트를 의미한다.

상기 1119단계에서, 드롭 이벤트가 발생됨이 판단될 시, 상기 기기는 1121단계에서 상기 드롭 이벤트가 발생된 위치에 매핑된 숫자(또는 특수문자) 또는 기능 이름을 검색하고, 1123단계에서 입력창에 상기 검색된 숫자(또는 특수문자)를 입력하거나 또는 상기 검색된 기능 이름에 대응하는 기능(예를 들어, 통화 기능)을 실행한 후, 1125단계로 진행한다.

이후, 상기 기기는 1125단계에서 숏 터치 이벤트가 발생하는지 여부를 검사한다. 여기서, 상기 숏 터치 이벤트는 터치 후 위치 이동 없이 바로 터치 해제되는 이벤트를 의미한다.

상기 1125단계에서, 숏 터치 이벤트가 발생함이 판단될 시, 상기 기기는 1127단계에서 현재까지 입력창에 입력된 숫자(또는 특수문자)들을 음성 데이터로 변환하여 스피커를 통해 출력하고, 1129단계에서 현재까지 입력창에 입력된 숫자(또는 특수문자)들을 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송한 후, 상기 1105단계로 돌아가 이하 단계를 반복 수행한다.

반면, 상기 1125단계에서, 숏 터치 이벤트가 발생하지 않음이 판단될 시, 상기 기기는 바로 상기 1105단계로 돌아가 이하 단계를 반복 수행한다.

반면, 상기 1119단계에서, 드롭 이벤트가 발생되지 않음이 판단될 시, 상기 기기는 상기 1109단계로 돌아가 이하 단계를 반복 수행한다.

도 12는 본 발명의 제6 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 실행 방법을 도시한 예시도이다.

상기 도 12를 참조하면, 도시하지는 않았지만, 상기 기기는 화면 영역을 n×m 배열의 가상 영역으로 분할하고, 상기 분할된 각 가상 영역에 어플리케이션 이름을 매핑한다. 이때, 상기 기기는 상기 분할된 가상 영역들 중 하나의 가상 영역을 기준점의 위치 영역으로 설정한다.

이후, 상기 기기는 터치 이벤트가 발생되면, 상기 터치 이벤트가 발생된 위치를 상기 기준점의 위치로 인식한다. 만약, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되면(도 12의 (a)), 상기 기기는 상기 n×m 배열의 가상 영역을 기반으로 상기 터치 이벤트의 좌표위치 이동에 따라 터치 이벤트 발생 위치를 변경하고, 상기 변경된 위치에 매핑된 어플리케이션 이름을 팝업창을 통해 화면에 확대 표시한다(도 12의 (b)). 또한, 상기 기기는 상기 변경된 위치에 매핑된 어플리케이션 이름을 음성 데이터로 변환하여 스피커를 통해 출력하고, 상기 변경된 위치에 매핑된 어플리케이션 이름을 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송한다. 이후, 상기 위치이동에 연속하여 드롭 이벤트가 발생되면, 상기 기기는 상기 드롭 이벤트가 발생된 위치에 매핑된 어플리케이션(예를 들어, 인터넷 어플리케이션)을 실행한다.

도 13은 본 발명의 제6 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 실행 방법을 도시한 흐름도이다.

상기 도 13을 참조하면, 상기 기기는 1301단계에서 화면 영역을 n×m 배열의 가상 영역으로 분할하고, 상기 분할된 각 가상 영역에 어플리케이션 이름을 매핑한다. 이와 같은 과정에 대하여 이후 도 14를 통해 자세히 설명하기로 한다.

이후, 상기 기기는 1303단계에서 상기 분할된 가상 영역들 중 하나의 가상 영역을 기준점의 위치 영역으로 설정한다.

이후, 상기 기기는 1305단계에서 터치 이벤트가 발생하는지 여부를 검사한다.

상기 1305단계에서, 터치 이벤트가 발생함이 판단될 시, 상기 기기는 1307단계에서 상기 터치 이벤트가 발생된 위치를 상기 기준점의 위치로 인식하고, 1309단계에서 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되는지 여부를 검사한다.

상기 1309단계에서, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동됨이 판단될 시, 상기 기기는 1311단계에서 상기 n×m 배열의 가상 영역을 기반으로 상기 터치 이벤트의 좌표위치 이동에 따라 터치 이벤트 발생 위치를 변경하고 상기 변경된 위치에 매핑된 어플리케이션 이름을 검색한 후, 1313단계로 진행한다.

이후, 상기 기기는 1313단계에서 상기 검색된 어플리케이션 이름을 팝업창을 통해 화면에 확대 표시하고, 1315단계에서 상기 검색된 어플리케이션 이름을 음성 데이터로 변환하여 스피커를 통해 출력하며, 1317단계에서 상기 검색된 어플리케이션 이름을 점자 데이터로 변환하여 인터페이스를 통해 점자 디스플레이로 전송한 후, 상기 1309단계로 돌아가 이하 단계를 반복 수행한다.

반면, 상기 1309단계에서, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 이동되지 않음이 판단될 시, 상기 기기는 1319단계에서 드롭 이벤트가 발생되는지 여부를 검사한다. 여기서, 상기 드롭 이벤트는 터치가 해제되는 이벤트를 의미한다.

상기 1319단계에서, 드롭 이벤트가 발생됨이 판단될 시, 상기 기기는 1321단계에서 상기 드롭 이벤트가 발생된 위치에 매핑된 어플리케이션 이름을 검색하고, 1323단계에서 입력창에 상기 검색된 어플리케이션 이름에 대응하는 어플리케이션(예를 들어, 인터넷 어플리케이션)을 실행한 후, 본 발명에 따른 알고리즘을 종료한다.

반면, 상기 1319단계에서, 드롭 이벤트가 발생되지 않음이 판단될 시, 상기 기기는 상기 1309단계로 돌아가 이하 단계를 반복 수행한다.

도 14는 본 발명의 제6 실시 예에 따른 터치 스크린을 구비한 기기에서 시각장애인을 위한 어플리케이션 이름 매핑 방법을 도시한 흐름도이다.

상기 도 14를 참조하면, 상기 기기는 1401단계에서 화면 영역을 n×m 배열의 가상 영역으로 분할하고, 1403단계에서 상기 분할된 가상 영역들 중 하나의 가상 영역을 기준점의 위치 영역으로 설정한다.

이후, 상기 기기는 1405단계에서 터치 이벤트가 발생하는지 여부를 검사한다.

상기 1405단계에서, 터치 이벤트가 발생함이 판단될 시, 상기 기기는 1407단계에서 상기 터치 이벤트가 발생된 위치를 상기 기준점의 위치로 인식한다.

이후, 상기 기기는 1409단계에서 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 특정 위치로 이동되고 연속하여 드롭 이벤트가 발생하는지 여부를 검사한다.

상기 1409단계에서, 상기 터치 이벤트가 유지된 상태에서 상기 터치 이벤트의 좌표위치가 특정 위치로 이동되고 연속하여 드롭 이벤트가 발생함이 판단될 시, 상기 기기는 1411단계에서 어플리케이션 설정 모드로 진입하고, 1413단계에서 n×m 배열의 가상 영역을 화면에 표시한다.

이후, 상기 기기는 1415단계에서 상기 표시된 가상 영역들 중 하나의 가상 영역이 선택되는지 여부를 검사한다. 여기서, 상기 기기는 터치 이벤트가 발생되고 상기 터치 이벤트가 유지된 상태에서 좌표위치를 이동하여 드롭 이벤트가 발생되는지 여부를 판단한 후, 상기 n×m 배열의 가상 영역을 기반으로 상기 터치 이벤트의 좌표위치 이동에 따라 터치 이벤트 발생 위치를 변경함으로써, 상기 표시된 가상 영역들 중 하나의 가상 영역이 선택되는지 여부를 검사할 수 있다.

상기 1415단계에서, 상기 표시된 가상 영역들 중 하나의 가상 영역이 선택됨이 판단될 시, 상기 기기는 1417단계에서 어플리케이션 리스트를 화면에 표시한다.

이후, 상기 기기는 1419단계에서 상기 표시된 어플리케이션 리스트 중 하나의 어플리케이션이 선택되는지 여부를 검사한다. 여기서, 상기 기기는 어플리케이션 리스트를 화면에 표시한 후, 터치 이벤트가 발생되는지 여부를 판단하여, 터치 이벤트가 발생된 영역을 포커싱하고, 포커싱 영역 내 어플리케이션 이름을 확대 표시함으로써, 하나의 어플리케이션을 선택받을 수 있다. 또한, 상기 기기는 포커싱 영역 내 어플리케이션 이름을 음성 데이터로 변환하여 스피커를 통해 출력하고, 포커싱 영역 내 어플리케이션 이름을 점자 데이터로 변환하여 점자 디스플레이로 전송할 수 있다. 또한, 상기 기기는 상/하 플리킹 이벤트의 발생 여부에 따라 상/하 방향으로 한 단계 포커싱 영역을 이동할 수 있으며, 좌/우 방향 플리킹 이벤트의 발생 여부에 따라 이전/이후 점자 데이터를 점자 디스플레이로 전송할 수 있다.

상기 1419단계에서, 상기 표시된 어플리케이션 리스트 중 하나의 어플리케이션이 선택됨이 판단될 시, 상기 기기는 1421단계에서 상기 선택된 가상 영역에 상기 선택된 어플리케이션의 이름을 매핑한다.

이후, 상기 기기는 1423단계에서 어플리케이션 설정을 완료하였는지 여부를 검사한다.

상기 1423단계에서, 어플리케이션 설정을 완료하였음이 판단될 시, 상기 기기는 본 발명에 따른 알고리즘을 종료한다.

반면, 상기 1423단계에서, 어플리케이션 설정을 완료하지 않았음이 판단될 시, 상기 기기는 상기 1413단계로 돌아가 이하 단계를 반복 수행한다.

도 15는 본 발명에 따른 터치 스크린을 구비한 기기의 구성 장치를 도시한 블럭도이다.

도시된 바와 같이, 상기 기기는, 제어부(1500), 통신부(1510), 터치 스크린부(1520), 메모리(1530), TTS(Text to Speech)부(1540), 문자-점자 변환부(1550), 인터페이스부(1560)를 포함하여 구성된다.

상기 도 15를 참조하면, 상기 제어부(1500)는 상기 기기의 전반적인 동작을 제어하며, 본 발명에 따라 장애인의 접근성을 향상시키기 위한 인터페이스 제공을 위한 전반적인 동작을 제어 및 처리한다.

상기 통신부(1510)는 안테나를 통해 입출력되는 무선신호를 송수신 처리하는 기능을 수행한다. 예를 들어, 송신인 경우, 송신할 기저대역신호를 RF(Radio Frequency)대역신호로 상향변환하여 안테나를 통해 송신하는 기능을 수행하고, 수신인 경우, 안테나를 통해 수신되는 RF대역신호를 기저대역신호로 하향변환하여 데이터를 복원하는 기능을 수행한다.

상기 터치 스크린부(1520)는 터치패널(1522)과 디스플레이부(1524)를 포함하여 구성된다. 상기 디스플레이부(1524)는, 상기 기기의 동작 중에 발생하는 상태 정보, 제한된 숫자의 문자들, 다량의 동영상 및 정지영상 등을 디스플레이한다. 상기 터치패널(1522)은 디스플레이부(1524)에 장착되어 각종 메뉴를 화면에 표시하고, 화면에 발생되는 터치를 감지한다.

상기 메모리(1530)는 상기 기기의 동작을 위한 기본 프로그램, 설정 정보 등의 데이터를 저장한다.

상기 TTS부(1540)는 문자데이터를 음성데이터로 변환하여 스피커를 통해 출력한다.

상기 문자-점자 변환부(1550)는 문자-점자 변환 API(Application Programming Interface)/프로토콜을 지원하며, 문자데이터를 점자데이터로 변환하여 인터페이스부(1560)로 제공한다.

상기 인터페이스부(1560)는 상기 문자-점자 변환부(1550)로부터 입력되는 점자데이터를 인터페이스를 통해 점자 디스플레이로 전송한다.

한편, 본 발명에 따른 설명에서 확대 표시 과정, 음성데이터로 변환 및 스피커를 통해 전송 과정, 점자데이터로 변환 및 점자 디스플레이로 전송 과정 등의 순서는 의미가 없으며, 순서가 바뀔 수도 있고, 동시에 수행될 수도 있음은 물론이다.

한편, 본 발명에서는 터치 스크린을 구비한 기기가 문자-점자 변환부를 포함하는 것을 예로 들어 설명하였으나, 다른 방법으로, 점자 디스플레이가 문자-점자 변환부를 포함할 수도 있음은 물론이다. 이 경우, 상기 기기는 인터페이스를 통해 점자 디스플레이로 문자 데이터를 전송하고, 상기 점자 디스플레이는 문자-점자 변환부를 통해 상기 문자 데이터를 점자 데이터로 변환하여 점자 모듈을 통해 출력할 수 있다.

한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.

터치 스크린을 구비한 기기 100, 인터페이스 110, 점자 디스플레이 120

Claims (32)

1. 전자 장치의 동작 방법에 있어서,
   제1 영역과 다수 개의 서브 영역들을 포함하는 제2 영역으로 구성된 화면을 제공하는 동작;
   상기 제2 영역에 대한 터치 입력이 검출된 것에 대한 응답으로, 상기 터치 입력의 위치를 기준점의 위치로 인식하는 동작;
   상기 터치 입력이 상기 제2 영역 상에서 이동되면, 상기 터치 입력의 이동 방향 및 상기 터치 입력의 이동 거리를 식별하는 동작;
   상기 기준점으로부터 상기 터치 입력의 이동 방향으로 상기 터치 입력의 이동 거리만큼 이동된 위치에 대응하는 서브 영역을 결정하는 동작;
   상기 서브 영역에 매핑된 기호 또는 상기 서브 영역에 매핑된 기능을 나타내는 정보를 상기 전자 장치의 스피커를 통해 출력하는 동작;
   상기 전자 장치의 통신 회로를 통해 상기 정보를 점자 장치로 전송하는 동작; 및
   상기 터치 입력이 해제되면, 상기 제1 영역에 상기 기호를 표시하거나 또는 상기 기능을 수행하는 동작을 포함하는 방법.
   
2. 삭제
3. 제 1 항에 있어서,
   상기 정보는, 상기 점자 장치에서 상기 기호 또는 상기 기능의 이름을 출력하기 위해 사용되는 방법.
   
4. 제 1 항에 있어서,
   상기 통신 회로는, 무선 통신 회로 또는 유선 통신 회로를 포함하는 방법.
   
5. 제 4 항에 있어서,
   상기 통신 회로는 블루투스 통신 회로를 포함하는 방법.
   
6. 제 1 항에 있어서,
   상기 터치 입력이 유지되는 동안 상기 기호 또는 상기 기능의 이름을 팝업 윈도우를 통해 표시하는 동작을 더 포함하는 방법.
   
7. 삭제
8. 삭제
9. 삭제
10. 전자 장치에 있어서,
    디스플레이;
    스피커;
    통신 회로; 및
    적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는,
    제1 영역과 다수 개의 서브 영역들을 포함하는 제2 영역으로 구성된 화면이 제공되도록 상기 디스플레이를 제어하고;
    상기 제2 영역에 대한 터치 입력이 검출된 것에 대한 응답으로, 상기 터치 입력의 위치를 기준점의 위치로 인식하고;
    상기 터치 입력이 상기 제2 영역 상에서 이동되면, 상기 터치 입력의 이동 방향 및 상기 터치 입력의 이동 거리를 식별하고;
    상기 기준점으로부터 상기 터치 입력의 이동 방향으로 상기 터치 입력의 이동 거리만큼 이동된 위치에 대응하는 서브 영역을 결정하고;
    상기 서브 영역에 매핑된 기호 또는 상기 서브 영역에 매핑된 기능을 나타내는 정보가 출력되도록 상기 스피커를 제어하고;
    상기 정보가 점자 장치로 전송되도록 상기 통신 회로를 제어하고; 및
    상기 터치 입력이 해제되면, 상기 제1 영역에 상기 기호가 표시되도록 상기 디스플레이를 제어하거나 또는 상기 기능을 수행하도록 설정된 전자 장치.
    
11. 삭제
12. 제 10항에 있어서,
    상기 정보는, 상기 점자 장치에서 상기 기호 또는 상기 기능의 이름을 출력하기 위해 사용되는 전자 장치.
    
13. 제 10항에 있어서,
    상기 통신 회로는, 무선 통신 회로 또는 유선 통신 회로를 포함하는 전자 장치.
    
14. 제 13항에 있어서,
    상기 통신 회로는, 블루투스 통신 회로를 포함하는 전자 장치.
    
15. 제 10항에 있어서,
    상기 적어도 하나의 프로세서는, 상기 터치 입력이 유지되는 동안 상기 기호 또는 상기 기능의 이름이 팝업 윈도우를 통해 표시되도록 상기 디스플레이를 제어하는 전자 장치.
16. 삭제
17. 삭제
18. 삭제
19. 삭제
20. 삭제
21. 삭제
22. 삭제
23. 삭제
24. 삭제
25. 삭제
26. 삭제
27. 삭제
28. 삭제
29. 삭제
30. 삭제
31. 삭제
32. 삭제

Images