KR20160097414A - 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법 - Google Patents

시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법 Download PDF

Info

Publication number
KR20160097414A
KR20160097414A KR1020150018490A KR20150018490A KR20160097414A KR 20160097414 A KR20160097414 A KR 20160097414A KR 1020150018490 A KR1020150018490 A KR 1020150018490A KR 20150018490 A KR20150018490 A KR 20150018490A KR 20160097414 A KR20160097414 A KR 20160097414A
Authority
KR
South Korea
Prior art keywords
braille
wheel
swipe
touch
user
Prior art date
Application number
KR1020150018490A
Other languages
English (en)
Inventor
이강우
이호찬
김해미
Original Assignee
이강우
김해미
이호찬
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이강우, 김해미, 이호찬 filed Critical 이강우
Priority to KR1020150018490A priority Critical patent/KR20160097414A/ko
Publication of KR20160097414A publication Critical patent/KR20160097414A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0202—Constructional details or processes of manufacture of the input device
    • G06F3/0219—Special purpose keyboards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/02—Methods for producing synthetic speech; Speech synthesisers

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법에 관한 것으로서, 더욱 상세하게는 풀 터치 방식으로 동작하는 터치 디바이스에 있어서, 터치 디바이스 화면의 특정 위치에 고정되어 터치 디바이스 상에 디스플레이된 객체를 자유롭게 선택 및 실행시킬 수 있도록 제공하는 스와이프 휠 및 점자체계에 의한 입력이 가능한 가상 키보드로 구성된 입력 시스템을 제공함으로써, 풀 터치 방식의 터치 디바이스에서도 시각 장애인에 의해 응용 소프트웨어를 용이하게 제어 및 실행 가능하도록 제공하는 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법을 제공한다.

Description

시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법{Input system of touch device for the blind and the input method thereof}
본 발명은 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법에 관한 것으로서, 더욱 상세하게는 풀 터치 방식으로 동작하는 터치 디바이스에 있어서, 터치 디바이스 화면의 특정 위치에 고정 표시되어 터치 디바이스 상에 디스플레이된 객체를 자유롭게 선택 및 실행시킬 수 있도록 제공하는 스와이프 휠 및 점자체계에 의한 입력이 가능하도록 구성된 점자 키보드를 포함하는 입력 시스템을 제공함으로써, 풀 터치 방식의 터치 디바이스에서도 시각 장애인에 의해 응용 소프트웨어를 용이하게 제어 및 실행 가능하도록 제공하는 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법에 관한 것이다.
최근에는 컴퓨터, 이동통신 단말기, PDA, PMP 등의 각종 전자 및 휴대 전자 장치의 보급도가 증대되고 있다. 이러한 전자 장치들의 사용은 디지털 정보에의 접근 여부를 결정함으로써 다른 형태의 디지털 디바이드(digital divide)를 야기하고 있는데, 기존의 통상적인 전자 장치들은 신체적인 어려움을 수반하지 않은 비장애인을 기준으로 설계되기 때문에, 장애인들의 접근성이 어려웠다.
또한, 다양한 유저 인터페이스의 환경을 제공하기 위하여 디스플레이 모듈에 터치패드를 결합한 터치스크린이 스마트 디바이스에 채용되고 있으며, 이로 인하여 사용자는 디스플레이 모듈에 구현된 화면을 보면서 다양한 사용자 명령을 입력하거나 기능을 선택할 수 있게 되었으나, 터치스크린은 물리적으로 구성된 버튼형식과 달리 터치감을 인식할 수 없기 때문에, 시각 장애인들이 자신이 입력한 버튼을 인지하는데 있어 많은 불편함이 발생하였다.
이러한 문제점을 해결하기 위하여, 한국공개특허공보 제2015-0006454에는 풀터치 방식의 터치스크린에 표시된 객체를 손가락으로 포커싱 하였을 때, 음성으로 출력해주는 보이스 오버(Voice Over) 기술이 기재되어 있으나, 객체의 위치 및 방향을 예측할 수 없는 시각장애인에게 무작위적 조작을 통해 우연한 동작을 요구함으로써 객체 선택 및 제어에 있어 정확성이 떨어지며, 안드로이드를 기반으로 하는 터치 디바이스에서는 사용이 제한되고, 문자입력이 불가능하다는 문제점이 있다.
1. 한국공개특허공보 제2015-0006454호 (공개일 2015. 1. 16) "음성 작동형 문서 탐색 및 브라우징을 위한 디바이스, 방법 및 사용자 인터페이스"
본 발명은 상기한 종래 기술에 따른 문제점을 해결하기 위한 것이다. 즉 본 발명의 목적은, 풀 터치 방식으로 동작하는 터치 디바이스에 있어서, 터치 디바이스 화면의 특정 위치에 고정 표시되어 터치 디바이스 상에 디스플레이된 객체를 자유롭게 선택 및 실행시킬 수 있도록 제공하는 스와이프 휠 및 점자체계에 의한 입력이 가능하도록 구성된 점자 키보드를 포함하는 입력 시스템을 제공함으로써, 풀 터치 방식의 터치 디바이스에서도 시각 장애인에 의해 응용 소프트웨어를 용이하게 제어 및 실행 가능하도록 제공하는 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법을 제공함에 있다.
상기의 목적을 달성하기 위한 기술적 사상으로서 본 발명은, 터치스크린으로 구성된 표시부, 상기 표시부 일측에 고정 표시되어 상기 표시부를 통해 디스플레이된 객체를 선택 및 실행시킬 수 있도록 제공하는 스와이프 휠 및 6점자 패턴에 따라 점자체계에 의한 입력이 가능하도록 구성된 점자 키보드를 포함하는 사용자 입력부, 상기 스와이프 휠을 통한 사용자의 조작에 의해 상기 표시부에 디스플레이된 객체들을 순차적으로 포커싱하고, 포커싱 된 객체를 사용자의 선택에 의해 실행하며, 사용자에 의해 실행된 객체 상에서 문자입력이 선택되는 경우 점자 키보드를 제공하는 제어부 및 상기 포커싱된 객체의 정보 및 사용자에 의해 입력된 문자를 음성으로 출력하는 음성 출력부를 포함하는 시각 장애인을 위한 터치 디바이스 입력 시스템을 제공한다.
상기 제어부는, 상기 스와이프 휠이 활성화된 상태에서 상기 스와이프 휠에 의한 사용자의 터치가 감지되는 경우, 상기 스와이프 휠의 동작 방향을 감지하고, 상기 스와이프 휠의 동작에 따라 상기 표시부를 통해 디스플레이된 객체 중에서 임의의 객체가 포커싱되면, 상기 포커싱된 객체의 정보를 읽어오는 객체 판단부, 상기 점자 키보드가 활성된 상태에서 사용자의 터치가 감지되는 경우, 상기 터치된 점자 키보드의 터치포지션에 따른 키값을 생성하여 점자를 인식하고, 인식된 점자를 기 저장된 점자일람표에 근거하여 문자로 변환하는 점자 인식부 및 상기 객체 판단부를 통해 포커싱된 객체의 텍스트 정보 및 상기 점자 인식부를 통해 생성된 문자를 텍스트 음성 변환(TTS : TEXT to Speech) 엔진을 이용하여 음성 데이터로 변환하는 음성변환부를 포함한다.
본 발명의 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법은, 풀 터치 방식으로 동작하는 터치 디바이스에 있어서, 터치 디바이스 화면의 특정 위치에 고정 표시되어 터치 디바이스 상에 디스플레이된 객체를 자유롭게 선택 및 실행시킬 수 있도록 제공하는 스와이프 휠 및 점자체계에 의한 입력이 가능하도록 구성된 점자 키보드를 포함하는 입력 시스템을 제공함으로써, 풀 터치 방식의 터치 디바이스에서도 시각 장애인에 의해 응용 소프트웨어를 용이하게 제어 및 실행 가능하도록 제공한다.
또한, 풀터치 방식의 터치 디바이스를 사용함에 있어, 별도의 물리적 부가 장치를 추가하지 않고, 풀터치 용법을 그대로 활용함으로써, 시각장애인의 사용성 확보를 위한 추가 비용이 절감된다.
도 1은 본 발명의 일실시예에 따른 터치 디바이스 입력 시스템의 개략적인 내부 구성도.
도 2는 본 발명의 일실시예에 따른 스와이프 휠의 구성도.
도 3 내지 도 4는 본 발명의 일실시예에 따른 스와이프 휠의 조작 예시도.
도 5는 본 발명의 일실시예에 따른 점자 키보드 화면 예시도.
도 6은 본 발명의 일실시예에 따른 터치 디바이스 입력 방법을 순차적으로 도시한 순서도.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 본문에 상세하게 설명하고자 한다.
그러나, 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 제1, 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성 요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다.
본 출원에서 사용한 용어는 단지 특정한 실시예들을 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 발명의 바람직한 실시예를 첨부 도면에 의거하여 상세하겨 설명하기로 한다.
본 발명의 터치 디바이스는 스마트폰, 휴대폰, MP3, 게임기, 네비게이션, TV, 디스플레이 장치, 노트북 컴퓨터, 태블릿(tablet) 컴퓨터, PMP(Personal Media Player), PDA(Personal Digital Assistants) 등일 수 있으며, 본 발명의 실시예에서는 터치 디바이스의 대표적인 구성인 스마트폰을 이용하여 설명하기로 한다. 또한, 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다.
도 1은 본 발명의 일실시예에 따른 터치 디바이스 입력 시스템의 개략적인 내부 구성도이다.
도 1에 도시된 바와 같이, 본 발명에 따른 터치 디바이스 입력 시스템은 표시부(110), 사용자 입력부(120), 제어부(130) 및 음성 출력부(140)를 포함하여 구성된다.
표시부(110)는 터치 디바이스에서 처리되는 정보를 표시(출력)한다. 특히, 본 발명의 표시부(110)는 터치 동작을 감지하는 터치 패널이 상호 레이어(layer) 구조를 이루어(이하, '터치스크린(touchscreen)'이라 칭함), 출력장치 이외에 입력 장치로도 사용된다. 터치 패널은 표시부(110)의 특정 부위에 가해진 압력 또는 표시부의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변화하도록 구성된다. 터치 패널은 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 터치 패널에 대한 터치 입력이 있는 경우, 그에 대응하는 신호는 터치 제어기(미도시)로 보내진다. 터치 제어기는 그 신호를 처리한 다음 대응하는 데이터를 제어부(130)로 전송한다. 이로써, 제어부(130)는 표시부(110)의 어느 영역이 터치되었는지 여부 등을 알 수 있게 된다.
사용자 입력부(120)는 사용자의 터치 디바이스의 동작 제어를 위한 입력 데이터를 발생시킨다. 특히, 본 발명의 사용자 입력부(120)는 디스플레이된 객체를 선택 및 실행시킬 수 있는 스와이프 휠(210) 및 점자체계에 의한 입력이 가능하도록 구성된 점자 키보드(220)를 포함한다.
스와이프 휠(210)은 표시부(110)의 특정 위치에 고정 표시되어 일반 하드 키보드의 탭(tab) 기능을 제공한다. 이하에서 설명되는 본 발명의 실시예들에 있어서는, 상기 스와이프 휠(210)이 터치 디바이스의 최상부 우측에 고정 표시되도록 도시되어 있으나, 본 발명은 이에 한정되는 것은 아니며 사용자가 터치 디바이스 상에서 모서리나 키 스킨 등을 이용하여 스와이프 휠(210)을 용이하게 인지할 수 있는 위치일 경우 어디든 가능하다.
본 발명의 스와이프 휠(210)은 도 2에 도시된 바와 같이, 상·하·좌·우 이동기판(212)과 휠버튼(214)으로 구성된다. 이어서, 사용자가 휠버튼(214)을 도 3에 도시된 바와 같이 상·하 또는 좌·우로 이동시킬 경우, 터치 디바이스의 화면 상에 디스플레이된 다양한 객체들이 순차적으로 포커싱되도록 구성되고, 터치 디바이스는 이와 같이 포커싱된 객체의 정보를 음성으로 출력한다. 상기 객체의 정보는 해당 객체를 텍스트로 표시한 이름, 종류, 상태일 수 있다. 또한, 사용자가 휠버튼(214)을 도 4에 도시된 바와 같이 클릭할 경우, 현재 포커싱된 객체를 실행한다.
예를 들어, 터치 디바이스의 화면이 현재 메인 화면을 출력하고 있을 경우, 사용자는 휠버튼(214)을 상·하 또는 좌·우로 이동함으로써 탭 이동을 수행하며, 휠버튼(214)의 이동에 따라 터치 디바이스 화면에 디스플레이된 어플리케이션 아이콘들이 순차적으로 포커싱되고, 이와 동시에 해당 어플리케이션의 명칭이 음성으로 출력된다. 이때, 휠버튼을 상·하 또는 좌·우로 한번 이동할 때마다, 포커싱이 이동되며, 사용자가 원하는 것을 선택한 상태에서 휠버튼(214)을 클릭하면 해당 어플리케이션이 실행된다. 또한, 터치 디바이스가 특정 어플리케이션을 실행중인 경우, 휠버튼(214)의 이동에 따라 차례로 클릭이나 터치 가능한 컨텐츠를 선택하고 읽어준다.
점자 키보드(220)는 텍스트 입력이 가능한 어플리케이션이 실행되는 경우, 표시부(110)를 통해 점자체계에 의한 입력이 가능하도록 구성된 키패드 화면을 제공한다. 즉, 시각장애인이 어플리케이션을 실행하고, 어플리케이션 상에서 문자입력을 선택하는 경우, 터치 디바이스는 점자를 통한 문자입력이 가능한 점자 키보드(220)를 시각장애인에게 제공한다.
이러한 점자 키보드(220)는 도 5에 도시된 바와 같이 일정 개수의 터치포지션이 배열된 구조로, 6점자 패턴에 따라 점자 자모를 입력할 수 있는 6개의 점자버튼과, 삭제(CLEAR), 지우기, 확인(엔터) 및 문자변환 등을 포함하는 기능버튼을 포함하여 구성될 수 있다. 또한, 점자 키보드(220)가 화면에 제공되는 경우, 특정 효과음이 나타나 시각장애인이 점자 키보드가 화면에 디스플레이되었음을 인지할 수 있도록 제공할 수 있으며, 점자 자모 및 문자가 입력될 때마다 효과음이 출력되어 점자 키보드(220)의 선택 및 문자 입력을 사용자가 인지할 수 있도록 제공할 수 있다.
제어부(130)는 상기 스와이프 휠(210)을 통한 사용자의 조작에 의해 상기 표시부(110)에 디스플레이된 객체들을 순차적으로 포커싱하고, 포커싱 된 객체를 사용자의 선택에 의해 실행하며, 사용자에 의해 실행된 객체 상에서 문자입력이 선택되는 경우 점자 키보드(220)를 제공한다. 이를 위해, 제어부(130)는 객체 판단부(132), 점자 인식부(134) 및 음성 변환부(136)를 포함하여 구성된다.
객체 판단부(132)는 스와이프 휠(210)이 활성화된 상태에서 사용자의 스와이프 휠(210)을 통한 터치가 감지되는 경우, 스와이프 휠(210)의 동작 방향을 감지하고, 상기 스와이프 휠(210)의 동작에 따라 상기 표시부(110)를 통해 디스플레이된 객체 중에서 임의의 객체가 포커싱되면, 상기 포커싱된 객체의 정보를 읽어온다. 이러한 포커싱된 객체의 정보는, 객체가 어플리케이션 아이콘일 경우, 해당 어플리케이션을 텍스트로 표시한 명칭, 종류, 상태 등을 포함하며, 특정 어플리케이션이 실행되어 화면에 표시된 경우, 현재 실행된 어플리케이션의 화면에 표시된 객체의 이름, 객체의 종류, 객체에 표시된 텍스트 문자 등을 포함한다.
점자 인식부(134)는 점자 키보드(220)가 활성화된 상태에서 사용자의 터치가 감지되는 경우, 상기 터치된 점자 키보드(220)의 터치포지션에 따른 키값을 생성하여 점자를 인식하고, 인식된 점자를 기 저장된 점자일람표에 근거하여 문자로 변환한다. 또한, 점자 인식부(134)는 시각장애인에 의해 입력된 점자를 문자로 변환할 때마다, 시각장애인이 인지할 수 있도록 음성으로 출력할 수 있다.
음성 변환부(136)는 상기 객체 판단부(132)를 통해 포커싱된 객체의 텍스트 정보 및 상기 점자 인식부(134)를 통해 입력된 문자를 텍스트 음성 변환(TTS : TEXT to Speech) 엔진을 이용하여 음성데이터로 변환한다.
음성 출력부(140)는 음성 변환부(136)에 의해 변환된 음성데이터를 음성으로 출력한다.
도 6은 본 발명의 일실시예에 따른 터치 디바이스 입력 방법을 순차적으로 도시한 순서도이다.
도 6에 도시된 바와 같이, 본 발명은 터치 디바이스의 화면 일측에 고정 표시되는 스와이프 휠에 의한 사용자 입력이 감지되는 경우, 스와이프 휠의 동작 방향을 감지한다(S612).
이어서 스와이프 휠의 동작에 따라 터치 디바이스에 디스플레이된 객체 중에서 임의의 객체가 포커싱되면, 상기 포커싱된 객체의 정보를 읽어온다(S614). 예를 들어, 객체가 어플리케이션 아이콘일 경우, 해당 어플리케이션을 텍스트로 표시한 명칭, 종류, 상태 등을 포함하며, 특정 어플리케이션이 실행되어 화면에 표시된 경우, 현재 실행된 어플리케이션의 화면에 표시된 객체의 이름, 객체의 종류, 객체에 표시된 텍스트 문자 등을 포함한다.
다음으로, 포커싱된 객체의 정보를 텍스트 음성 변환(TTS : TEXT to Speech) 엔진을 이용하여 음성 데이터로 변환하여 출력한다(S616). 예를 들어, 터치 디바이스의 화면이 현재 메인 화면을 출력하고 있을 경우, 사용자는 휠버튼을 상·하 또는 좌·우로 이동함으로써 탭 이동을 수행하며, 휠버튼의 이동에 따라 터치 디바이스 화면에 디스플레이된 어플리케이션 아이콘들이 순차적으로 포커싱되고, 이와 동시에 해당 어플리케이션의 명칭이 음성으로 출력된다. 이때, 휠버튼을 상·하 또는 좌·우로 한번 이동할 때마다, 포커싱이 이동되며, 사용자가 원하는 것을 선택한 상태에서 휠버튼을 클릭하면 해당 어플리케이션이 실행된다. 또한, 터치 디바이스가 특정 어플리케이션을 실행중인 경우, 휠버튼의 이동에 따라 차례로 클릭이나 터치 가능한 컨텐츠를 선택하고 읽어준다.
또한, 사용자가 어플리케이션을 실행하고(S618), 어플리케이션 상에서 문자입력을 선택하는 경우(S620), 터치 디바이스는 점자를 통한 문자입력이 가능한 점자 키보드를 사용자에게 제공한다(S622). 이어서, 터치 디바이스는 사용자에 의해 터치된 점자 키보드의 터치 포지션에 따른 키값을 생성하여 점자를 인식하고(S624), 인식된 점자를 기 저장된 점자일람표에 근거하여 문자로 변환한다(S628). 이때, 변환된 문자는 텍스트 음성 변환(TTS : TEXT to Speech) 엔진을 이용하여 음성 데이터로 변환하여 출력됨으로써 사용자가 자신이 입력한 문자를 음성으로 확인할 수 있도록 제공하며(S630), 사용자가 자신이 입력한 문자를 음성으로 확인한 후 입력(엔터)키를 누를 경우 입력이 되도록 제공할 수 있다(S632).
상술한 바와 같이 본 발명의 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법은, 터치 디바이스 화면의 특정 위치에 고정 표시되어 터치 디바이스 상에 디스플레이된 객체를 자유롭게 선택 및 실행시킬 수 있도록 제공하는 스와이프 휠 및 점자체계에 의한 입력이 가능하도록 구성된 점자 키보드를 포함하는 입력 시스템을 제공함으로써, 풀 터치 방식의 터치 디바이스에서도 시각 장애인에 의해 응용 소프트웨어를 용이하게 제어 및 실행 가능하도록 제공한다.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것은 아니며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하다는 것은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 명백하다 할 것이다.
110 : 표시부 120 : 사용자 입력부
130 : 제어부 132 : 객체 판단부
134 : 점자 인식부 136 : 음성 합성부
140 : 음성 출력부 210 : 스와이프 휠
220 : 점자 키보드 212 : 이동기판
214 : 휠버튼

Claims (10)

  1. 터치 디바이스의 입력 시스템에 있어서,
    터치스크린으로 구성된 표시부;
    상기 표시부 일측에 고정 표시되어 상기 표시부를 통해 디스플레이된 객체를 선택 및 실행시킬 수 있도록 제공하는 스와이프 휠 및 6점자 패턴에 따라 점자체계에 의한 입력이 가능하도록 구성된 점자 키보드를 포함하는 사용자 입력부;
    상기 스와이프 휠을 통한 사용자의 조작에 의해 상기 표시부에 디스플레이된 객체들을 순차적으로 포커싱하고, 포커싱 된 객체를 사용자의 선택에 의해 실행하며, 사용자에 의해 실행된 객체 상에서 문자입력이 선택되는 경우 점자 키보드를 제공하는 제어부; 및
    상기 포커싱된 객체의 정보 및 사용자에 의해 입력된 문자를 음성으로 출력하는 음성 출력부;
    를 포함하는 시각 장애인을 위한 터치 디바이스 입력 시스템.
  2. 제 1항에 있어서,
    상기 제어부는,
    상기 스와이프 휠이 활성화된 상태에서 상기 스와이프 휠에 의한 사용자의 터치가 감지되는 경우, 상기 스와이프 휠의 동작 방향을 감지하고, 상기 스와이프 휠의 동작에 따라 상기 표시부를 통해 디스플레이된 객체 중에서 임의의 객체가 포커싱되면, 상기 포커싱된 객체의 정보를 읽어오는 객체 판단부;
    상기 점자 키보드가 활성된 상태에서 사용자의 터치가 감지되는 경우, 상기 터치된 점자 키보드의 터치포지션에 따른 키값을 생성하여 점자를 인식하고, 인식된 점자를 기 저장된 점자일람표에 근거하여 문자로 변환하는 점자 인식부; 및
    상기 객체 판단부를 통해 포커싱된 객체의 텍스트 정보 및 상기 점자 인식부를 통해 생성된 문자를 텍스트 음성 변환(TTS : TEXT to Speech) 엔진을 이용하여 음성 데이터로 변환하는 음성변환부;
    를 포함하는 것을 특징으로 하는 시각 장애인을 위한 터치 디바이스 입력 시스템.
  3. 제 1항에 있어서,
    상기 스와이프 휠은,
    상·하·좌·우 이동이 가능한 휠버튼으로 구성되는 것을 특징으로 하는 시각 장애인을 위한 터치 디바이스 입력 시스템.
  4. 제 3항에 있어서,
    상기 스와이프 휠은,
    상기 휠버튼을 상·하 또는 좌·우 방향으로 이동하였을 경우, 화면을 구성하고 있는 객체를 순차적으로 포커싱하고,
    상기 휠버튼을 클릭하였을 경우, 현재 포커싱한 객체를 실행하는 클릭 기능을 포함하는 것을 특징으로 하는 시각 장애인을 위한 터치 디바이스 입력 시스템.
  5. 제 4항에 있어서,
    상기 스와이프 휠은,
    사용자의 휠버튼 이동 및 선택시 특정 효과음이 출력되는 것을 특징으로 하는 시각 장애인을 위한 터치 디바이스 입력 시스템.
  6. 제 1항에 있어서,
    상기 스와이프 휠은,
    상기 표시부의 상부 우측에 고정 표시되는 것을 특징으로 시각 장애인을 위한 터치 디바이스 입력 시스템.
  7. 제 1항에 있어서,
    상기 점자 키보드는,
    일정 개수의 터치포지션이 배열된 구조로, 6점자 패턴에 따라 점자자모를 입력할 수 있는 6개의 점자버튼과 삭제, 지우기, 확인 및 문자변환을 포함하는 기능버튼을 포함하여 구성되는 것을 특징으로 하는 시각 장애인을 위한 터치 디바이스 입력 시스템.
  8. 제 7항에 있어서,
    상기 점자 키보드는,
    사용자의 점자버튼 및 기능버튼 선택시 특정 효과음이 출력되는 것을 특징으로 하는 시각 장애인을 위한 터치 디바이스 입력 시스템.
  9. 시각 장애인을 위한 터치 디바이스 입력 방법에 있어서,
    터치 디바이스의 화면 일측에 고정 표시되는 스와이프 휠에 의한 사용자 입력이 감지되는 경우, 스와이프 휠의 동작 방향을 감지하는 단계;
    상기 스와이프 휠의 동작에 따라 터치 디바이스에 디스플레이된 객체 중에서 임의의 객체가 포커싱되면, 상기 포커싱된 객체의 정보를 읽어오는 단계;
    상기 포커싱된 객체의 정보를 텍스트 음성 변환(TTS : TEXT to Speech) 엔진을 이용하여 음성 데이터로 변환하여 출력하는 단계; 및
    상기 포커싱된 객체를 사용자가 스와이프 휠을 통해 클릭할 경우, 해당 객체를 실행하는 단계;
    를 포함하는 시각 장애인을 위한 터치 디바이스 입력 방법.
  10. 제 9항에 있어서,
    상기 해당 객체를 실행하는 단계에서는,
    상기 실행된 객체 상에서 사용자에 의해 문자입력이 선택되는 경우, 점자체계에 의한 입력이 가능하도록 구성된 6점자 패턴의 점자 키보드 화면을 제공하는 단계;
    상기 점자 키보드 화면이 제공된 상태에서 사용자의 터치가 감지되는 경우, 상기 터치된 점자 키보드의 터치포지션에 따른 키값을 생성하여 점자를 인식하고, 인식된 점자를 기 저장된 점자일람표에 근거하여 문자로 변환하는 단계;
    상기 변환된 문자를 텍스트 음성 변환(TTS : TEXT to Speech) 엔진을 이용하여 음성 데이터로 출력하는 단계; 및
    사용자에 의해 확인키를 입력받아, 상기 변환된 문자를 입력하는 단계;
    를 포함하는 시각 장애인을 위한 터치 디바이스 입력 방법.
KR1020150018490A 2015-02-06 2015-02-06 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법 KR20160097414A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150018490A KR20160097414A (ko) 2015-02-06 2015-02-06 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150018490A KR20160097414A (ko) 2015-02-06 2015-02-06 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법

Publications (1)

Publication Number Publication Date
KR20160097414A true KR20160097414A (ko) 2016-08-18

Family

ID=56873958

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150018490A KR20160097414A (ko) 2015-02-06 2015-02-06 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법

Country Status (1)

Country Link
KR (1) KR20160097414A (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102017115456A1 (de) 2016-07-29 2018-02-01 Kumho Tire Co., Inc. Luftloser Reifen
WO2018034400A1 (ko) * 2016-08-19 2018-02-22 가천대학교 산학협력단 촉각 인터페이스장치를 제어하는 방법, 장치 및 비일시적 컴퓨터-판독가능 매체
US10845880B2 (en) 2016-04-20 2020-11-24 Gachon University-Industry Foundation Method, device, and computer-readable medium for controlling tactile interface device interacting with user
KR20220096280A (ko) * 2020-12-30 2022-07-07 동서대학교 산학협력단 스마트폰 케이스 기반 점자 키보드 시스템
WO2024012357A1 (zh) * 2022-07-14 2024-01-18 腾讯科技（深圳）有限公司 振动提醒方法、相关设备、计算机存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150006454A (ko) 2012-06-29 2015-01-16 애플 인크. 음성 작동형 문서 탐색 및 브라우징을 위한 디바이스, 방법 및 사용자 인터페이스

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150006454A (ko) 2012-06-29 2015-01-16 애플 인크. 음성 작동형 문서 탐색 및 브라우징을 위한 디바이스, 방법 및 사용자 인터페이스

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10845880B2 (en) 2016-04-20 2020-11-24 Gachon University-Industry Foundation Method, device, and computer-readable medium for controlling tactile interface device interacting with user
DE102017115456A1 (de) 2016-07-29 2018-02-01 Kumho Tire Co., Inc. Luftloser Reifen
WO2018034400A1 (ko) * 2016-08-19 2018-02-22 가천대학교 산학협력단 촉각 인터페이스장치를 제어하는 방법, 장치 및 비일시적 컴퓨터-판독가능 매체
US10891875B2 (en) 2016-08-19 2021-01-12 Gachon University-Industry Foundation Method, device, and non-transitory computer-readable medium for controlling tactile interface device
KR20220096280A (ko) * 2020-12-30 2022-07-07 동서대학교 산학협력단 스마트폰 케이스 기반 점자 키보드 시스템
WO2024012357A1 (zh) * 2022-07-14 2024-01-18 腾讯科技（深圳）有限公司 振动提醒方法、相关设备、计算机存储介质

Similar Documents

Publication Publication Date Title
JP6965319B2 (ja) 文字入力インターフェース提供方法及び装置
US20180239512A1 (en) Context based gesture delineation for user interaction in eyes-free mode
US9035883B2 (en) Systems and methods for modifying virtual keyboards on a user interface
US8451236B2 (en) Touch-sensitive display screen with absolute and relative input modes
US9678659B2 (en) Text entry for a touch screen
AU2008100003B4 (en) Method, system and graphical user interface for viewing multiple application windows
US8707195B2 (en) Devices, methods, and graphical user interfaces for accessibility via a touch-sensitive surface
KR101636705B1 (ko) 터치스크린을 구비한 휴대 단말의 문자 입력 방법 및 장치
US8751971B2 (en) Devices, methods, and graphical user interfaces for providing accessibility using a touch-sensitive surface
US7889185B2 (en) Method, system, and graphical user interface for activating hyperlinks
US20140306897A1 (en) Virtual keyboard swipe gestures for cursor movement
US20130300668A1 (en) Grip-Based Device Adaptations
US20120019465A1 (en) Directional Pad Touchscreen
EP2523070A2 (en) Input processing for character matching and predicted word matching
US20130285926A1 (en) Configurable Touchscreen Keyboard
US20110298723A1 (en) Devices, Methods, and Graphical User Interfaces for Accessibility via a Touch-Sensitive Surface
US8456433B2 (en) Signal processing apparatus, signal processing method and selection method of user interface icon for multi-touch panel
KR101474856B1 (ko) 음성인식을 통해 이벤트를 발생시키기 위한 장치 및 방법
JP2013503387A (ja) モバイル装置用の感圧ユーザインターフェイス
CN106104450B (zh) 选择图形用户界面某一部分的方法
KR20160097414A (ko) 시각 장애인을 위한 터치 디바이스 입력 시스템 및 입력 방법
TW201145146A (en) Handling tactile inputs
KR20140106801A (ko) 시각 장애인들을 위한 휴대 단말기의 음성 서비스 지원 방법 및 장치
US20140210729A1 (en) Gesture based user interface for use in an eyes-free mode
US20140215339A1 (en) Content navigation and selection in an eyes-free mode

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination