KR20220109162A - A mobile terminal for prividing virtual keypads for blind person - Google Patents

A mobile terminal for prividing virtual keypads for blind person Download PDF

Info

Publication number
KR20220109162A
KR20220109162A KR1020210012496A KR20210012496A KR20220109162A KR 20220109162 A KR20220109162 A KR 20220109162A KR 1020210012496 A KR1020210012496 A KR 1020210012496A KR 20210012496 A KR20210012496 A KR 20210012496A KR 20220109162 A KR20220109162 A KR 20220109162A
Authority
KR
South Korea
Prior art keywords
touch screen
sheet
palpation
virtual
touch
Prior art date
Application number
KR1020210012496A
Other languages
Korean (ko)
Inventor
조현선
Original Assignee
주식회사 에스엠 플래닛
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스엠 플래닛 filed Critical 주식회사 에스엠 플래닛
Priority to KR1020210012496A priority Critical patent/KR20220109162A/en
Publication of KR20220109162A publication Critical patent/KR20220109162A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72475User interfaces specially adapted for cordless or mobile telephones specially adapted for disabled users
    • H04M1/72481User interfaces specially adapted for cordless or mobile telephones specially adapted for disabled users for visually impaired users
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Position Input By Displaying (AREA)

Abstract

The present invention relates to a portable terminal, capable of displaying a virtual keypad suitable for a tactile sheet for the visually impaired, which comprises: a touch screen; and a control unit for controlling the touch screen to display a first virtual keypad for controlling a screen and an application, and a second virtual keypad for inputting a letter, a number, and a symbol on the touch screen to which a tactile sheet is attached. The control unit controls the touch screen to display the first and second virtual keypads on an area of the touch screen matching the attached tactile sheet, and controls the touch screen to display one of preset key combinations of the second virtual keypad on the basis of attribute information on an application being executed on the touch screen. Therefore, the visually impaired can easily control an application or an application program.

Description

시각장애인을 위한 가상 키패드를 제공하는 휴대용 단말기 {A MOBILE TERMINAL FOR PRIVIDING VIRTUAL KEYPADS FOR BLIND PERSON}A portable terminal providing a virtual keypad for the visually impaired {A MOBILE TERMINAL FOR PRIVIDING VIRTUAL KEYPADS FOR BLIND PERSON}

본 발명은 시각장애인을 위한 가상 키패드를 제공하는 휴대용 단말기에 관한 것으로, 특히 시각장애인용 촉지시트가 부착된 터치스크린에 가상 키패드를 제공하는 휴대용 단말기에 관한 것이다.The present invention relates to a portable terminal providing a virtual keypad for the visually impaired, and more particularly, to a portable terminal providing a virtual keypad to a touch screen to which a tactile sheet for the visually impaired is attached.

일반적으로 시각장애인은 소리나 촉지정보 등을 통해서 정보를 획득할 수 있으나, 눈으로 보면서 사용하는 터치스크린이 적용된 최근의 전자기기들을 사용하는 데에 어려움이 있다. 일반인은 휴대용 단말기을 이용하여 다양한 정보를 보고 획득할 수 있지만, 시각장애인에게는 무용지물이다.In general, the visually impaired can obtain information through sound or tactile information, but it is difficult to use the latest electronic devices to which a touch screen used while looking with the eyes is applied. The general public can view and obtain various information using a portable terminal, but it is useless to the visually impaired.

보통 터치패널에 금속으로 된 촉지판을 부착해서 사용하는 방법이 있으나, 베이스판을 가압하여 형성된 점자나 픽토그램으로 이루어진 촉지판을 사용자가 직접 확인하여 부착해야 하며 이를 터치함으로써 단말기를 통해 정보를 획득할 수 있다. 그러나, 이러한 촉지판과 터치스크린의 결합 시에 별도의 조립구를 구비하여 사용자가 직접 조립해야 하며, 단말기에서 제공되는 인터페이스와 실제 촉지판이 매칭되는지 확인이 불가능할뿐만 아니라 조립구를 통한 결합 역시 스스로 해야하기 때문에 실제로 혼자서 이러한 작업을 수행하기 어려운 문제점이 있다.Usually, there is a method of attaching a metal palpation plate to the touch panel, but the user must directly check and attach the palpation plate made of Braille or pictogram formed by pressing the base plate, and by touching it, information can be obtained through the terminal. can However, when the palpation plate and the touch screen are combined, a separate assembly tool is provided and the user must directly assemble it. Therefore, there is a problem in that it is difficult to actually perform these tasks alone.

또한, 촉지판이 결합된 단말기를 사용하더라도 사용자가 원하는 애플리케이션이나 기능을 찾기 위해서는 애플리케이션이나 기능을 하나씩 순서대로 선택하면서 확인해야만 하는 불편함이 있다. In addition, even when a terminal with a tactile plate is used, in order to find an application or function that a user wants, it is inconvenient to have to select and check the applications or functions one by one in order.

본 발명은 상기와 같은 점을 감안하여 창안된 것으로서, 촉지시트가 부착된 터치스크린에 해당 촉지시트에 적합한 가상 키패드를 표시할 수 있는 휴대용 단말기를 제공하는 데에 그 목적이 있다. The present invention was devised in view of the above points, and an object of the present invention is to provide a portable terminal capable of displaying a virtual keypad suitable for the palpation sheet on a touch screen to which the palpation sheet is attached.

또한, 실행중인 애플리케이션이나 응용프로그램에 적합한 가상 키패드의 키조합을 선택적으로 표시할 수 있는 휴대용 단말기를 제공하는 데에 그 목적이 있다.Another object of the present invention is to provide a portable terminal capable of selectively displaying a key combination of a virtual keypad suitable for a running application or application program.

또한, 원하는 애플리케이션이나 응용프로그램의 선택 및 제어가 용이한 가상 키패드를 표시할 수 있는 휴대용 단말기를 제공하는 데에 그 목적이 있다.Another object of the present invention is to provide a portable terminal capable of displaying a virtual keypad that facilitates selection and control of a desired application or application program.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다. The technical problems to be achieved in the present invention are not limited to the technical problems mentioned above, and other technical problems not mentioned will be clearly understood by those of ordinary skill in the art to which the present invention belongs from the description below. will be able

상기 목적을 달성하기 위한 본 발명에 따른 휴대용 단말기는, 터치스크린과; 화면 및 애플리케이션을 제어하기 위한 제 1 가상 키패드와 문자, 숫자 및 기호를 입력하기 위한 제 2 가상 키패드를 촉지시트가 부착된 상기 터치스크린에 표시하도록 상기 터치스크린을 제어하는 제어부를 포함하되, 상기 제어부는 상기 부착된 촉지시트와 일치하는 상기 터치스크린의 영역에 상기 제 1, 2 가상 키패드들을 표시하도록 상기 터치스크린을 제어하고, 상기 터치스크린에서 실행중인 애플리케이션의 속성정보를 기초로 상기 제 2 가상 키패드의 기설정된 키조합들 중 하나를 표시하도록 상기 터치스크린을 제어한다.According to an aspect of the present invention, there is provided a portable terminal comprising: a touch screen; A first virtual keypad for controlling a screen and an application and a second virtual keypad for inputting characters, numbers and symbols comprising a controller for controlling the touch screen to display on the touch screen to which a palpation sheet is attached, the controller controls the touch screen to display the first and second virtual keypads in an area of the touch screen that matches the attached palpation sheet, and the second virtual keypad based on attribute information of an application running on the touch screen Controls the touch screen to display one of the preset key combinations.

상기 제어부는 기저장된 키패드 정보에 따라 상기 터치스크린에 표시될 상기 제 1, 2 가상 키패드들의 위치 및 상기 제 1, 2 가상 키패들의 키조합을 결정한다. The control unit determines positions of the first and second virtual keypads to be displayed on the touch screen and a key combination of the first and second virtual keypads according to pre-stored keypad information.

또한, 상기 제어부는 안내음성 또는 안내화면을 이용하여 상기 촉지시트에 형성된 돌기들 중 적어도 하나 이상을 터치하도록 사용자에게 요청하고, 상기 사용자가 터치한 돌기의 위치에 따라 상기 촉지시트의 부착위치 및 상기 촉지시트의 타입을 판단할 수 있다. 상기 제어부는 상기 사용자가 터치한 돌기의 위치에 따라 상기 촉지시트의 사이즈, 상기 촉지시트에 포함된 전체 돌기들의 조합 및 위치도 함께 판단할 수 있다. In addition, the control unit requests the user to touch at least one of the protrusions formed on the palpation sheet using a guide voice or a guide screen, and the attachment position of the palpation sheet and the It is possible to determine the type of the palpation sheet. The control unit may determine the size of the palpation sheet and the combination and position of all the protrusions included in the facilitation sheet according to the position of the protrusion touched by the user.

그리고 상기 제어부는 상기 촉지시트의 부착위치 및 상기 촉지시트의 타입에 따라 상기 터치스크린에 표시될 상기 제 1, 2 가상 키패드들의 위치를 결정하고, 상기 제 2 가상 키패드의 기설정된 키조합들 중 하나가 표시될 때, 상기 표시된 키조합을 설명하는 안내음성을 출력하도록 출력부를 제어한다.In addition, the control unit determines the positions of the first and second virtual keypads to be displayed on the touch screen according to the attachment position of the palpation sheet and the type of the palpation sheet, and one of the preset key combinations of the second virtual keypad. When is displayed, the output unit is controlled to output a guide voice explaining the displayed key combination.

또한, 상기 제 2 가상 키패드 상에서 상기 사용자의 드래그 터치가 감지되면, 상기 제어부는 상기 드래그 터치에 따라 상기 제 2 가상 키패드의 키조합을 변경할 수 있다.Also, when the user's drag touch is sensed on the second virtual keypad, the controller may change a key combination of the second virtual keypad according to the drag touch.

본 발명에 따른 휴대용 단말기는 터치스크린에 부착된 촉지시트의 위치 및 타입에 적합한 가상 키패드를 표시하므로, 시각장애인 자신이 원하는 촉지시트를 휴대용 단말기와 함께 사용할 수 있다.Since the portable terminal according to the present invention displays a virtual keypad suitable for the position and type of the palpation sheet attached to the touch screen, the visually impaired person can use the desired tactile sheet together with the portable terminal.

또한, 실행중인 애플리케이션이나 응용프로그램에 적합한 가상 키패드의 키조합을 선택적으로 표시함으로써, 시각장애인이 애플리케이션이나 응용프로그램을 쉽게 제어할 수 있다.In addition, by selectively displaying a key combination of a virtual keypad suitable for a running application or application, the visually impaired can easily control the application or application.

도 1은 본 발명의 제 1 실시예에 따른 가상 키패드가 표시된 휴대용 단말기를 나타낸 도면이다.
도 2는 도 1의 휴대용 단말기의 일부 구성요소를 나타낸 도면이다.
도 3은 본 발명의 제 1 실시예에 따른 촉지시트를 휴대용 단말기에 부착하기 전의 상태를 나타낸 도면이다.
도 4는 본 발명의 제 1 실시예에 따른 촉지시트를 휴대용 단말기에 부착한 상태를 나타낸 도면이다.
도 5는 도 1의 휴대용 단말기에 표시되는 화면의 일 예를 나타낸 도면이다.
도 6은 본 발명의 제 2 실시예에 따른 촉지시트를 나타낸 도면이다.
도 7 내지 도 11은 본 발명의 제 2 실시예에 따른 가상 키패드들이 표시된 휴대용 단말기를 나타낸 도면이다.
도 12는 도 7의 '전화' 키를 선택한 경우 순서대로 실행되는 화면을 나타낸 도면이다.
1 is a diagram illustrating a portable terminal on which a virtual keypad is displayed according to a first embodiment of the present invention.
FIG. 2 is a diagram illustrating some components of the portable terminal of FIG. 1 .
3 is a view showing a state before attaching the palpation sheet according to the first embodiment of the present invention to the portable terminal.
4 is a view showing a state in which the palpation sheet according to the first embodiment of the present invention is attached to the portable terminal.
5 is a diagram illustrating an example of a screen displayed on the portable terminal of FIG. 1 .
6 is a view showing a facilitation sheet according to a second embodiment of the present invention.
7 to 11 are diagrams illustrating a portable terminal on which virtual keypads are displayed according to a second embodiment of the present invention.
12 is a view showing screens that are sequentially executed when the 'phone' key of FIG. 7 is selected.

이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. Hereinafter, the embodiments disclosed in the present specification will be described in detail with reference to the accompanying drawings, but the same or similar components are assigned the same reference numerals regardless of reference numerals, and redundant description thereof will be omitted. The suffixes "module" and "part" for components used in the following description are given or mixed in consideration of only the ease of writing the specification, and do not have distinct meanings or roles by themselves. In addition, in describing the embodiments disclosed in the present specification, if it is determined that detailed descriptions of related known technologies may obscure the gist of the embodiments disclosed in this specification, the detailed description thereof will be omitted. In addition, the accompanying drawings are only for easy understanding of the embodiments disclosed in this specification, and the technical idea disclosed herein is not limited by the accompanying drawings, and all changes included in the spirit and scope of the present invention , should be understood to include equivalents or substitutes.

이하 첨부된 도면을 참조하여 본 발명의 실시예에 따른 촉지시트 및 이를 이용한 휴대용 단말기를 자세히 설명하기로 한다.Hereinafter, a palpation sheet and a portable terminal using the same according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

제 1No. 1 실시예Example

도 1은 본 발명의 제 1 실시예에 따른 가상 키패드가 표시된 휴대용 단말기(10)를 나타낸 것으로, 터치스크린(111)의 일정 영역 상에 제 1 가상 키패드(113) 및 제 2 가상 키패드(115)가 표시된 휴대용 단말기(10)를 도시한다.1 shows a portable terminal 10 on which a virtual keypad is displayed according to a first embodiment of the present invention, wherein a first virtual keypad 113 and a second virtual keypad 115 are placed on a predetermined area of the touch screen 111 . shows the displayed portable terminal 10 .

본 명세서에서 설명되는 휴대용 단말기(10)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(personal digital assistants), PMP(portable multimedia player), 네비게이션, 슬레이트 PC(slate PC), 태블릿 PC(tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(wearable device, 예를 들어, 워치형 단말기 (smartwatch), 글래스형 단말기 (smart glass), HMD(head mounted display)) 중 어느 하나일 수 있다. 또한, 본 발명의 휴대용 단말기(10)는 무선 통신이 가능한 다른 형태의 단말기로 구성될 수 있다.The portable terminal 10 described in this specification is a mobile phone, a smart phone, a laptop computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), a navigation system, a slate PC ( slate PC), tablet PC (tablet PC), ultrabook (ultrabook), wearable device (e.g., watch-type terminal (smartwatch), glass-type terminal (smart glass), HMD (head mounted display)) It can be any one. In addition, the portable terminal 10 of the present invention may be configured as another type of terminal capable of wireless communication.

도 2에 도시된 바와 같이, 휴대용 단말기(10)는 입력부(110), 통신부(120), 출력부(130), 메모리(140), 제어부(170) 등을 포함할 수 있다. 휴대용 단말기(10)는 여기에 열거된 구성요소들 보다 더 많거나 또는 적은 구성요소들로 이루어질 수 있다.As shown in FIG. 2 , the portable terminal 10 may include an input unit 110 , a communication unit 120 , an output unit 130 , a memory 140 , a control unit 170 , and the like. The portable terminal 10 may be composed of more or fewer components than those listed herein.

구체적으로, 상기 입력부(110)는 영상 신호 입력을 위한 카메라 또는 영상 입력부, 오디오 신호 입력을 위한 마이크로폰(microphone), 또는 오디오 입력부, 사용자로부터 정보를 입력받기 위한 사용자 입력부를 포함할 수 있다. 사용자 입력부는 사용자로부터 정보를 입력받기 위한 것으로서, 사용자 입력부를 통해 정보가 입력되면, 제어부(170)는 입력된 정보에 대응되도록 휴대용 단말기(10)의 동작을 제어할 수 있다. 이러한, 사용자 입력부는 기계식 (mechanical) 입력수단(또는, 메커니컬 키, 예를 들어, 휴대용 단말기(10)의 전·후면 또는 측면에 위치하는 버튼, 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력수단을 포함할 수 있다. 일 예로서, 터치식 입력수단은, 소프트웨어적인 처리를 통해 터치스크린(111)에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 상기 터치스크린(111) 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다. 한편, 상기 가상키 또는 비주얼 키는, 다양한 형태를 가지면서 터치스크린(111) 상에 표시되는 것이 가능하며, 예를 들어, 그래픽(graphic), 텍스트(text), 아이콘(icon), 비디오(video) 또는 이들의 조합으로 이루어질 수 있다. Specifically, the input unit 110 may include a camera or image input unit for inputting an image signal, a microphone or an audio input unit for inputting an audio signal, and a user input unit for receiving information from a user. The user input unit is for receiving information from the user, and when information is input through the user input unit, the controller 170 may control the operation of the portable terminal 10 to correspond to the input information. Such a user input unit is a mechanical input means (or a mechanical key, for example, a button located on the front, rear or side of the portable terminal 10, a dome switch, a jog wheel, a jog switch, etc.) ) and a touch input means. As an example, the touch input means consists of a virtual key, a soft key, or a visual key displayed on the touch screen 111 through software processing, or the touch screen (111) may be formed of a touch key (touch key) disposed in a portion other than. On the other hand, the virtual key or the visual key can be displayed on the touch screen 111 while having various shapes, for example, a graphic, a text, an icon, and a video. ) or a combination thereof.

한편, 설명의 편의를 위해, 터치 스크린(111) 상에 물체가 접촉되지 않으면서 근접되어 상기 물체가 상기 터치 스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 명명하고, 상기 터치 스크린(111) 상에 물체가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 명명한다. 상기 터치 스크린(111) 상에서 물체가 근접 터치 되는 위치라 함은, 상기 물체가 근접 터치될 때 상기 물체가 상기 터치 스크린(111)에 대해 수직으로 대응되는 위치를 의미한다. 근접 센서는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지할 수 있다. 한편, 제어부(170)는 위와 같이, 근접 센서를 통해 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 데이터(또는 정보)를 처리하며, 나아가, 처리된 데이터에 대응하는 시각적인 정보를 터치 스크린(111) 상에 출력시킬 수 있다. 나아가, 제어부(170)는, 터치 스크린(111) 상의 동일한 지점에 대한 터치가, 근접 터치인지 또는 접촉 터치인지에 따라, 서로 다른 동작 또는 데이터(또는 정보)가 처리되도록 휴대용 단말기(10)를 제어할 수 있다.On the other hand, for convenience of explanation, the act of approaching the object on the touch screen 111 without contacting it so that the object is recognized that it is located on the touch screen is called "proximity touch", and , an action of actually touching an object on the touch screen 111 is called “contact touch”. The position where the object is touched in proximity on the touch screen 111 means a position in which the object vertically corresponds to the touch screen 111 when the object is touched in proximity. The proximity sensor may detect a proximity touch and a proximity touch pattern (eg, a proximity touch distance, a proximity touch direction, a proximity touch speed, a proximity touch time, a proximity touch position, a proximity touch movement state, etc.). On the other hand, the controller 170 processes data (or information) corresponding to the proximity touch operation and the proximity touch pattern sensed through the proximity sensor as described above, and further, displays visual information corresponding to the processed data to the touch screen ( 111) can be output. Furthermore, the controller 170 controls the portable terminal 10 so that different operations or data (or information) are processed according to whether a touch on the same point on the touch screen 111 is a proximity touch or a contact touch. can do.

터치 센서는 저항막 방식, 정전용량 방식, 적외선 방식, 초음파 방식, 자기장 방식 등 여러 가지 터치방식 중 적어도 하나를 이용하여 터치 스크린(또는 디스플레이부)에 가해지는 터치(또는 터치입력)을 감지한다.The touch sensor senses a touch (or touch input) applied to the touch screen (or the display unit) using at least one of various touch methods such as a resistive method, a capacitive method, an infrared method, an ultrasonic method, and a magnetic field method.

일 예로서, 터치 센서는, 터치 스크린(111)의 특정 부위에 가해진 압력 또는 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는, 터치 스크린(111) 상에 터치를 가하는 터치 대상체가 터치 센서 상에 터치 되는 위치, 면적, 터치 시의 압력, 터치 시의 정전 용량 등을 검출할 수 있도록 구성될 수 있다. 여기에서, 터치 대상체는 상기 터치 센서에 터치를 인가하는 물체로서, 예를 들어, 손가락, 터치펜 또는 스타일러스 펜(Stylus pen), 포인터 등이 될 수 있다. As an example, the touch sensor may be configured to convert a change in pressure applied to a specific part of the touch screen 111 or a change in capacitance occurring in a specific part of the touch screen 111 into an electrical input signal. The touch sensor may be configured to detect a position, an area, a pressure at the time of touch, an electrostatic capacitance at the time of touch, etc. where a touch object applying a touch on the touch screen 111 is touched on the touch sensor. Here, the touch object is an object that applies a touch to the touch sensor, and may be, for example, a finger, a touch pen, a stylus pen, or a pointer.

이와 같이, 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(170)로 전송한다. 이로써, 제어부(170)는 디스플레이부(111)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다. 여기에서, 터치 제어기는, 제어부(170)와 별도의 구성요소일 수 있고, 제어부(170) 자체일 수 있다. As such, when there is a touch input to the touch sensor, a signal(s) corresponding thereto is sent to the touch controller. The touch controller processes the signal(s) and then transmits the corresponding data to the controller 170 . Accordingly, the control unit 170 can know which area of the display unit 111 has been touched, and the like. Here, the touch controller may be a component separate from the controller 170 , or may be the controller 170 itself.

한편, 제어부(170)는, 터치 스크린(111)을 터치하는, 터치 대상체의 종류에 따라 서로 다른 제어를 수행하거나, 동일한 제어를 수행할 수 있다. 터치 대상체의 종류에 따라 서로 다른 제어를 수행할지 또는 동일한 제어를 수행할지는, 현재 휴대용 단말기(10)의 동작상태 또는 실행 중인 응용 프로그램에 따라 결정될 수 있다. Meanwhile, the controller 170 may perform different controls or may perform the same control according to the type of the touch object that touches the touch screen 111 . Whether to perform different control or the same control according to the type of the touch object may be determined according to the current operating state of the portable terminal 10 or a running application program.

한편, 위에서 살펴본 터치 센서 및 근접 센서는 독립적으로 또는 조합되어, 터치 스크린(111)에 대한 숏(또는 탭) 터치(short touch), 롱 터치(long touch), 멀티 터치(multi touch), 드래그 터치(drag touch), 플리크 터치(flick touch), 핀치-인 터치(pinch-in touch), 핀치-아웃 터치(pinch-out 터치), 스와이프(swype) 터치, 호버링(hovering) 터치 등과 같은, 다양한 방식의 터치를 센싱할 수 있다.On the other hand, the above-described touch sensor and proximity sensor are independently or in combination, a short (or tap) touch (short touch), long touch (long touch), multi-touch (multi touch), drag touch on the touch screen 111 such as drag touch, flick touch, pinch-in touch, pinch-out touch, swype touch, hovering touch, etc.; Various types of touch can be sensed.

상기 통신부(120)는, 무선 통신망을 이용하여 휴대용 단말기(10)와 무선 통신 시스템 사이, 휴대용 단말기(10)와 다른 휴대용 단말기 사이, 또는 휴대용 단말기(10)와 서버 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 또한, 상기 통신부(120)는, 휴대용 단말기(10)를 하나 이상의 네트워크에 연결하는 하나 이상의 모듈을 포함할 수 있다. 이러한 통신부(120)는, 방송 수신 모듈, 이동통신 모듈, 무선 인터넷 모듈, 근거리 통신 모듈, 위치정보 모듈 중 적어도 하나를 포함할 수 있다.The communication unit 120 enables wireless communication between the portable terminal 10 and a wireless communication system, between the portable terminal 10 and another portable terminal, or between the portable terminal 10 and a server using a wireless communication network. It may include one or more modules. In addition, the communication unit 120 may include one or more modules for connecting the portable terminal 10 to one or more networks. The communication unit 120 may include at least one of a broadcast reception module, a mobile communication module, a wireless Internet module, a short-range communication module, and a location information module.

상기 출력부(130)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부, 음향 출력부, 햅팁 모듈, 광 출력부 중 적어도 하나를 포함할 수 있다. 디스플레이부는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린(111)을 구현할 수 있다. 이러한 터치 스크린(111)은, 휴대용 단말기(10)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부로써 기능함과 동시에, 휴대용 단말기(10)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.The output unit 130 is for generating an output related to visual, auditory or tactile sense, and may include at least one of a display unit, a sound output unit, a haptip module, and an optical output unit. The display unit may implement the touch screen 111 by forming a mutually layered structure with the touch sensor or integrally formed therewith. The touch screen 111 may function as a user input unit providing an input interface between the portable terminal 10 and a user, and may provide an output interface between the portable terminal 10 and a user.

상기 메모리(140)는 휴대용 단말기(10)의 다양한 기능을 지원하는 데이터를 저장한다. 메모리(140)는 휴대용 단말기(10)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 휴대용 단말기(10)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한, 이러한 응용 프로그램 중 적어도 일부는, 휴대용 단말기(10)의 기본적인 기능(예를 들어, 전화 착신, 발신 기능, 메시지 수신, 발신 기능)을 위하여 출고 당시부터 휴대용 단말기(10)상에 존재할 수 있다. 한편, 응용 프로그램은, 메모리(140)에 저장되고, 휴대용 단말기(10) 상에 설치되어, 제어부(170)에 의하여 상기 휴대용 단말기(10)의 동작(또는 기능)을 수행하도록 구동될 수 있다.The memory 140 stores data supporting various functions of the portable terminal 10 . The memory 140 may store a plurality of application programs (or applications) driven in the portable terminal 10 , data for operation of the portable terminal 10 , and commands. At least some of these application programs may be downloaded from an external server through wireless communication. In addition, at least some of these application programs may exist on the portable terminal 10 from the time of shipment for basic functions (eg, incoming calls, outgoing functions, message reception, and outgoing functions) of the portable terminal 10 . . Meanwhile, the application program may be stored in the memory 140 , installed on the portable terminal 10 , and driven to perform an operation (or function) of the portable terminal 10 by the controller 170 .

상기 제어부(170)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 휴대용 단말기(10)의 전반적인 동작을 제어한다. 제어부(170)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(140)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다. 또한, 제어부(170)는 메모리(140)에 저장된 응용 프로그램을 구동하기 위하여, 휴대용 단말기(10)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.In addition to the operation related to the application program, the controller 170 generally controls the overall operation of the portable terminal 10 . The controller 170 may provide or process appropriate information or functions to the user by processing signals, data, information, etc. input or output through the above-described components or by driving an application program stored in the memory 140 . Also, in order to drive an application program stored in the memory 140 , the controller 170 may operate at least two or more of the components included in the portable terminal 10 in combination with each other.

도 1에 도시된 바와 같이, 제 1 가상 키패드(113)는 화면, 애플리케이션 및 응용프로그램을 제어하기 위한 것으로, 방향키, OK키, 홈키 등을 포함한다. 제 2 가상 키패드(115)는 문자, 숫자 및 기호를 입력하기 위하나 것으로, 제 1 가상 키패드(113)의 아래에 위치한다. 제 2 가상 키패드(115)는 사용중에 한글모드, 외국어모드, 숫자모드, 기호모드 등으로 변환되며, 각 모드의 키조합은 미리 설정되어 메모리(140)에 저장된다.As shown in FIG. 1 , the first virtual keypad 113 is for controlling a screen, an application, and an application program, and includes a direction key, an OK key, a home key, and the like. The second virtual keypad 115 is for inputting letters, numbers, and symbols, and is located below the first virtual keypad 113 . The second virtual keypad 115 is converted into a Korean mode, a foreign language mode, a number mode, a symbol mode, etc. during use, and a key combination of each mode is preset and stored in the memory 140 .

도 3은 본 발명의 제 1 실시예에 따른 촉지시트(30)가 휴대용 단말기(10)에 부착되기 전의 상태를 도시하고, 도 4는 본 발명의 제 1 실시예에 따른 촉지시트(30)가 휴대용 단말기(10)에 부착된 상태를 도시한다.3 shows a state before the facilitation sheet 30 according to the first embodiment of the present invention is attached to the portable terminal 10, and FIG. 4 shows the facilitation sheet 30 according to the first embodiment of the present invention. The state attached to the portable terminal 10 is shown.

본 발명의 제 1 실시예에 따른 촉지시트(30)는 제 1, 2 가상 키패드(113, 115)에 포함된 가상 키들과 일대일로 매칭되는 복수개의 돌기들을 포함한다. 이 돌기들은 |, ∥, ―, =,

Figure pat00001
, #, * 등의 형상을 가지며 촉지시트(30)의 표면 위로 돌출되도록 형성된다. The palpation sheet 30 according to the first embodiment of the present invention includes a plurality of protrusions that are matched one-to-one with virtual keys included in the first and second virtual keypads 113 and 115 . These projections are |, │, ―, =,
Figure pat00001
, #, *, etc. are formed to protrude above the surface of the facilitating sheet 30 .

제어부(170)는 촉지시트(30)가 부착된 터치스크린(111)의 일정영역에 제 1, 2 가상 키패드(113, 115)를 표시하도록 터치스크린(111)을 제어한다. 특히, 제어부(170)는 부착된 촉지시트(30)에 형성된 돌기들의 위치와 일치하는 터치스크린(111)의 영역에 제 1, 2 가상 키패드(113, 115)의 가상 키들을 표시하도록 터치스크린(111)을 제어한다. The controller 170 controls the touch screen 111 to display the first and second virtual keypads 113 and 115 on a predetermined area of the touch screen 111 to which the palpation sheet 30 is attached. In particular, the control unit 170 controls the touch screen to display the virtual keys of the first and second virtual keypads 113 and 115 in the area of the touch screen 111 that matches the positions of the protrusions formed on the attached palpation sheet 30 . 111) is controlled.

이때, 제어부(170)는 메모리(140)에 기저장된 키패드 정보에 따라 상기 터치스크린(111)에 표시될 가상 키들의 조합을 결정하거나 상기 터치스크린(111)에 표시될 제 1, 2 가상 키패드(113, 115)의 위치 및 가상 키들의 위치를 결정할 수 있다. At this time, the controller 170 determines a combination of virtual keys to be displayed on the touch screen 111 according to the keypad information stored in the memory 140 or first and second virtual keypads ( The positions 113 and 115 and the positions of the virtual keys may be determined.

여기서, 기저장된 키패드 정보는 하나 이상의 가상 키패드에 대한 정보를 포함할 수 있는데, 예를 들어, 각 가상 키패드의 크기를 나타내는 데이터, 각 가상 키패드에 포함된 가상 키들의 표시될 위치를 나타내는 데이터, 각 가상 키들의 조합/배열을 나타내는 데이터, 기선택된 가상 키패드의 타입 또는 ID를 나타내는 데이터 중 적어도 하나를 포함한다. 따라서, 제어부(170)는 기저장된 키패드 정보에 따라 미리 선택된 제 1, 2 가상 키패드(113, 115)를 터치스크린(111)의 지정된 영역에 표시할 수 있다.Here, the pre-stored keypad information may include information on one or more virtual keypads, for example, data indicating the size of each virtual keypad, data indicating the position to be displayed of the virtual keys included in each virtual keypad, each It includes at least one of data representing a combination/arrangement of virtual keys and data representing a type or ID of a preselected virtual keypad. Accordingly, the controller 170 may display the first and second virtual keypads 113 and 115 pre-selected according to the pre-stored keypad information on a designated area of the touch screen 111 .

상기 키패드 정보는 통신부(120)를 이용해서 다른 휴대용 단말기나 서버로부터 수신될 수 있다.The keypad information may be received from another portable terminal or server using the communication unit 120 .

한편, 제어부(170)는 부착된 촉지시트(30)의 실제 위치 및 타입을 자동으로 인식할 수 있는데, 이를 위해서 먼저 제어부(170)는 안내음성 또는 안내화면을 이용하여 상기 돌기들 중 적어도 하나 이상을 터치하도록 사용자에게 요청한다. On the other hand, the control unit 170 can automatically recognize the actual position and type of the attached palpation sheet 30. For this purpose, first, the control unit 170 uses at least one of the protrusions using a voice guidance or a guidance screen. Ask the user to touch .

사용자는 돌기들의 위치와 가상 키들의 위치를 매칭해서 기억하고 있기 때문에, 돌기들을 더듬어서 원하는 가상 키를 찾아서 누를 수 있다. 제어부(170)는 안내음성 또는 안내화면을 따라 사용자가 터치한 돌기의 위치를 감지하고 그 감지된 위치에 따라 촉지시트(30)가 부착된 영역의 실제 위치, 촉지시트의 타입(촉지시트의 사이즈, 전체 돌기들의 조합/배열, 전체 돌기들의 위치 등)을 판단하는 것이 가능하다.Since the user matches and memorizes the positions of the projections and the positions of the virtual keys, he or she can find and press the desired virtual key by fumbling the projections. The control unit 170 detects the position of the protrusion touched by the user according to the guidance voice or the guidance screen, and according to the detected position, the actual position of the area to which the palpation sheet 30 is attached, and the type of palpation sheet (size of the palpation sheet) , a combination/arrangement of all protrusions, positions of all protrusions, etc.).

예를 들어, 제어부(170)가 '1', '2', '3', '취소'에 해당하는 가상 키들을 순서대로 누르도록 안내음성을 출력하고 사용자가 기억하고 있는 해당 돌기들을 터치해서 가상 키들을 누르게 되면, 제어부(170)는 사용자가 터치한 돌기들('1', '2', '3', '취소'에 해당하는 가상 키들)의 위치와 기저장된 키패드 정보를 비교하여 해당 촉지시트의 부착위치 및 타입을 판단한다.For example, the controller 170 outputs a guide voice so as to press the virtual keys corresponding to '1', '2', '3', and 'cancel' in order, and touches the protrusions that the user remembers to create a virtual When the keys are pressed, the control unit 170 compares the positions of the protrusions (virtual keys corresponding to '1', '2', '3', and 'cancel') touched by the user with the stored keypad information, and the corresponding tactile information Determine the attachment position and type of the sheet.

그리고 제어부(170)는 촉지시트(30)의 부착위치 및 상기 촉지시트(30)의 타입에 따라 터치스크린(111)에 표시될 제 1, 2 가상 키패드(113, 115)의 위치를 결정하고 제 1, 2 가상 키패드(113, 115)의 가상 키들을 표시하도록 터치스크린(111)을 제어한다. 이를 위해서, 기저장된 키패드 정보는 각 촉지시트(30)의 타입에 지정된 제 1, 2 가상 캐패드(113, 115)의 타입/ID를 나타내는 데이터를 더 포함하는 것이 바람직하다. 따라서, 제어부(170)는 해당 촉지시트(30)의 타입에 맞는 제 1, 2 가상 키패드(113, 115)를 선택할 수 있고, 상기 촉지시트(30)가 부착된 실제 위치와 일치하도록 상기 선택된 제 1, 2 가상 키패드(113, 115)를 터치스크린(111) 상에 표시할 수 있다.And, the control unit 170 determines the positions of the first and second virtual keypads 113 and 115 to be displayed on the touch screen 111 according to the attachment position of the palpation sheet 30 and the type of the palpation sheet 30, and The touch screen 111 is controlled to display the virtual keys of the 1 and 2 virtual keypads 113 and 115 . To this end, the stored keypad information preferably further includes data indicating the type/ID of the first and second virtual cappads 113 and 115 designated for the type of each palpation sheet 30 . Accordingly, the control unit 170 can select the first and second virtual keypads 113 and 115 suitable for the type of the corresponding palpation sheet 30, and the selected first and second virtual keypads 113 and 115 to match the actual position to which the palpation sheet 30 is attached. 1 and 2 virtual keypads 113 and 115 may be displayed on the touch screen 111 .

또한, 제어부(170)는 터치스크린(111)에서 실제로 실행되고 있는 애플리케이션이나 응용프로그램의 속성정보를 메모리(140)로부터 읽어오고, 이 속성정보를 기초로 제 2 가상 키패드(115)의 기설정된 키조합들 중 하나를 표시하도록 터치스크린(111)을 제어한다. 여기서, 속성정보는 애플리케이션 및 응용프로그램과 관련된 사용 언어, 사용 용도, 호환 가능한 OS(Operating System) 프로그램, 호환 가능한 휴대용 단말기 등을 나타내는 정보를 포함한다. 제 2 가상 키패드(115)의 기설정된 키조합은 한글모드, 외국어모드, 숫자모드, 기호모드에 따라 관련된 키들이 미리 설정된 것을 의미하나, 이와 같은 모드에 따라 설정되지 않고 사용자나 애플리케이션에 적합하게 미리 설정된 것일 수 있다. In addition, the control unit 170 reads the attribute information of the application or application actually executed on the touch screen 111 from the memory 140, and a preset key of the second virtual keypad 115 based on the attribute information. Controls the touchscreen 111 to display one of the combinations. Here, the attribute information includes information indicating a language used, a usage purpose, a compatible operating system (OS) program, a compatible portable terminal, etc. related to the application and the application program. The preset key combination of the second virtual keypad 115 means that related keys are preset according to the Korean mode, the foreign language mode, the numeric mode, and the symbol mode. may have been set.

제 2 가상 키패드(115)의 기설정된 키조합들 중 하나가 터치스크린(111)에 표시될 때, 제어부(170)는 해당 키조합을 설명하는 안내음성을 출력하도록 출력부(130)를 제어한다. 예를 들어, 표시된 키조합이 한글모드인 경우, 제어부(170)는 '한글모드 키조합입니다'의 안내음성을 출력한다.When one of the preset key combinations of the second virtual keypad 115 is displayed on the touch screen 111, the control unit 170 controls the output unit 130 to output a guide voice explaining the corresponding key combination. . For example, when the displayed key combination is the Korean mode, the control unit 170 outputs a guide voice of 'This is a Korean mode key combination'.

한편, 사용자가 터치스크린(111)에 표시되는 제 2 가상 키패드(115)의 키조합을 변경할 수 있는데, 제 2 가상 키패드(115) 상에서 사용자가 일정방향으로 드래그 터치를 하면 제어부(170)가 이를 감지하고 드래그 터치의 방향에 따라 제 2 가상 키패드(115)의 키조합을 변경할 수 있다. 예를 들어, 사용자가 오른쪽에서 왼쪽으로 수평하게 드래그 터치를 하면, 제어부(170)는 한글모드의 키조합을 외국어모드의 키조합으로 변경할 수 있다.On the other hand, the user can change the key combination of the second virtual keypad 115 displayed on the touch screen 111. When the user drags and touches the second virtual keypad 115 in a certain direction, the control unit 170 It is possible to detect and change the key combination of the second virtual keypad 115 according to the direction of the drag touch. For example, when the user horizontally drags and touches from right to left, the controller 170 may change the key combination in the Korean mode to the key combination in the foreign language mode.

위와 같은 방법들에 따라 가상 키패드(113, 115)를 표시하는 경우, 다른 모델이나 다른 사양의 휴대용 단말기(10)로 바꾸더라도 사용자는 원하는 가상 키패드를 선택해서 사용할 수 있다. 특히 시각 장애인은 촉지시트(30)를 이용해서 자신에게 익숙한 가상 키패드를 계속해서 사용할 수 있다.When the virtual keypads 113 and 115 are displayed according to the above methods, the user can select and use the desired virtual keypad even if the portable terminal 10 of a different model or specification is changed. In particular, the visually impaired can continue to use the virtual keypad familiar to them by using the tactile sheet 30 .

제 1, 2 가상 키패드(113, 115)가 터치스크린(111)에 표시되면 사용자는 촉지시트(30)의 돌기를 선택해서 원하는 가상 키를 누를 수 있으며, 미리 설정된 단축키를 이용해서 원하는 애플리케이션이나 기능을 쉽게 접근할 수 있다. 기존에는 원하는 콘텐츠에 접근하기 위해서 휴대용 단말기(10)에서 출력되는 음성을 들으면서 원하는 콘텐츠를 차례로 하나씩 확인해야만 했다. 하지만, 돌기를 이용해서 단축키를 누를 수 있으므로 직관적이고 빠른 애플리케이션의 실행이 가능하다. 애플리케이션의 중지나 종료도 단축키로 실행이 가능하다. 예를 들어, 제 1 가상 키패드(113)의 상단 중앙에 있는 '홈키'를 길게 누르면 해당 키에 대한 안내음성이 출력되고 실행중인 애플리케이션이 중지되도록 설정될 수 있다. 또한, 도 5와 같이 화면에 표시된 여러 기능들의 리스트에서 사용자는 제 1 가상 키패드(113)의 '방향키'를 눌러서 원하는 기능을 선택할 수 있다. 이때, 휴대용 단말기(10)는 방향키가 눌려질 때마다 선택될 기능을 음성으로 안내한다.When the first and second virtual keypads 113 and 115 are displayed on the touch screen 111, the user can select a protrusion of the tactile sheet 30 and press a desired virtual key, and use a preset shortcut key to select a desired application or function. can be easily accessed. Conventionally, in order to access the desired content, it is necessary to check the desired content one by one while listening to the voice output from the portable terminal 10 . However, since you can press a shortcut key using the projection, it is possible to run the application intuitively and quickly. Stopping or terminating the application can also be executed with a shortcut key. For example, when the 'home key' in the upper center of the first virtual keypad 113 is long pressed, a guide sound for the corresponding key may be output and the running application may be set to stop. In addition, from the list of various functions displayed on the screen as shown in FIG. 5 , the user can select a desired function by pressing the 'direction key' of the first virtual keypad 113 . At this time, the portable terminal 10 guides the function to be selected by voice whenever the direction key is pressed.

촉지시트(30)는 터치스크린(111)의 일부 영역에만 부착되는 것이 바람직한데, 이는 터치스크린(111)의 나머지 일부를 애플리케이션의 표시를 위해 사용하거나 다른 용도의 직접적인 터치를 위해 사용하고자 함이다. 예를 들어, 전원이 켜진 후 터치스크린(111)에 동그라미를 그리면 화면잠금이 해제되는 기능 등을 사용할 수 있다.The palpation sheet 30 is preferably attached to only a portion of the touch screen 111 , which is intended to use the remaining part of the touch screen 111 for displaying applications or for direct touch for other purposes. For example, if a circle is drawn on the touch screen 111 after the power is turned on, a function of unlocking the screen may be used.

본 발명의 경우, 시각 장애인용 애플리케이션을 따라 시작할 필요 없이 잠금화면 해제 시에 시각 장애인용 UI가 자동으로 실행될 수 있다.In the case of the present invention, the UI for the visually impaired may be automatically executed when the lock screen is released without the need to start the application for the visually impaired.

제 22nd 실시예Example

도 6은 본 발명의 제 2 실시예에 따른 촉지시트(32)를 나타낸 도면이고, 도 7 내지 도 11은 본 발명의 제 2 실시예에 따른 가상 키패드들(123, 125)이 표시된 휴대용 단말기(10)를 나타낸 것이다. 6 is a view showing a palpation sheet 32 according to a second embodiment of the present invention, and FIGS. 7 to 11 are a portable terminal ( 10) is shown.

도 6에 도시된 바와 같이, 본 발명의 제 2 실시예에 따른 촉지시트(32)는 제 1 실시예의 촉지시트(30)와 유사하나, 돌기들의 위치, 배열, 형상이 조금 다르다. 이 돌기들도 마찬가지로 |, ∥, ―, =, ∧, ∨, ■, ●, 〉, ★, ○ 등의 형상을 가지며 촉지시트(32)의 표면 위로 돌출되도록 형성된다. 6, the facilitation sheet 32 according to the second embodiment of the present invention is similar to the facilitation sheet 30 of the first embodiment, but the position, arrangement, and shape of the protrusions are slightly different. These protrusions also have shapes such as |, │, ―, =, ∧, ∨, ∧, ∨, ∧, ∨, ∧, ∨, ?, ?

제 2 실시예에 따른 제 1, 2 가상 키패드들(123, 125)은 제 1 실시예의 가상 키패드들(113, 115)과 기능 및 사용방법 측면에서 유사하나 키들의 위치, 배열, 조합이 다르다. The first and second virtual keypads 123 and 125 according to the second embodiment are similar to the virtual keypads 113 and 115 of the first embodiment in terms of function and usage, but the positions, arrangement, and combination of keys are different.

도 7에 도시된 제 1, 2 가상 키패드들(123, 125)은 런처 키패드(launcher keypad)로 사용된다. 런처 키패드를 이용하면 사용자가 원하는 애플리케이션이나 응용프로그램을 곧바로 실행시킬 수 있다.The first and second virtual keypads 123 and 125 shown in FIG. 7 are used as launcher keypads. By using the launcher keypad, the user can directly launch the desired application or application program.

도 8은 한글모드의 제 1, 2 가상 키패드들(123, 125)의 일 예를 나타내며, 도 9는 외국어모드의 제 1, 2 가상 키패드들(123, 125)의 일 예를 나타내고, 도 10은 기호모드의 제 1, 2 가상 키패드들(123, 125)의 일 예를 나타내고, 도 11은 숫자모드의 제 1, 2 가상 키패드들(123, 125)의 일 예를 나타낸다.8 shows an example of the first and second virtual keypads 123 and 125 in the Korean mode, and FIG. 9 shows an example of the first and second virtual keypads 123 and 125 in the foreign language mode, and FIG. shows an example of the first and second virtual keypads 123 and 125 in the symbol mode, and FIG. 11 shows an example of the first and second virtual keypads 123 and 125 in the numeric mode.

제 1 실시예와 마찬가지로 제 1 가상 키패드(123)의 키조합은 사용중에 변경되지 않으나 제 2 가상 키패드(125)의 키조합은 사용중 변경이 가능하다. 제 2 가상 키패드(125)의 키조합의 변경 과정 및 방법은 제 1 실시예와 동일하다.Like the first embodiment, the key combination of the first virtual keypad 123 is not changed during use, but the key combination of the second virtual keypad 125 can be changed during use. The process and method of changing the key combination of the second virtual keypad 125 are the same as those of the first embodiment.

도 12는 도 7의 런처 키패드에서 '전화' 키를 선택한 경우 이후 순서대로 실행되는 화면을 보여준다. '전화' 키를 선택한 후, 숫자모드의 제 2 가상 키패드(125)의 '1' 숫자키를 연속해서 선택하면 전화->최근전화-> 최근전화 상세내역을 차례로 확인할 수 있다.FIG. 12 shows screens that are executed sequentially when the 'phone' key is selected on the launcher keypad of FIG. 7 . After selecting the 'Phone' key, if the '1' number key of the second virtual keypad 125 in the numeric mode is continuously selected, the phone -> recent calls -> details of recent calls can be checked in sequence.

이상, 본 발명을 본 발명의 원리를 예시하기 위한 바람직한 실시예와 관련하여 도시하고 설명하였으나, 본 발명은 그와 같이 도시되고 설명된 그대로의 구성 및 작용으로 한정되는 것이 아니다. 오히려 첨부된 특허청구범위의 사상 및 범위를 일탈함이 없이 본 발명에 대한 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다.In the foregoing, the present invention has been shown and described in connection with preferred embodiments for illustrating the principles of the present invention, but the present invention is not limited to the construction and operation as shown and described as such. Rather, it will be apparent to those skilled in the art that many changes and modifications can be made to the present invention without departing from the spirit and scope of the appended claims.

10: 휴대용 단말기 30, 32: 촉지시트
110: 입력부 111: 터치스크린
113, 123: 제 1 가상 키패드 115, 125: 제 2 가상 키패드
120: 통신부 130: 출력부
140: 메모리 170: 제어부
10: portable terminal 30, 32: palpation sheet
110: input unit 111: touch screen
113, 123: first virtual keypad 115, 125: second virtual keypad
120: communication unit 130: output unit
140: memory 170: control unit

Claims (10)

터치스크린과;
화면 및 애플리케이션을 제어하기 위한 제 1 가상 키패드와 문자, 숫자 및 기호를 입력하기 위한 제 2 가상 키패드를 촉지시트가 부착된 상기 터치스크린에 표시하도록 상기 터치스크린을 제어하는 제어부를 포함하되,
상기 제어부는 상기 부착된 촉지시트와 일치하는 상기 터치스크린의 영역에 상기 제 1, 2 가상 키패드들을 표시하도록 상기 터치스크린을 제어하고, 상기 터치스크린에서 실행중인 애플리케이션의 속성정보를 기초로 상기 제 2 가상 키패드의 기설정된 키조합들 중 하나를 표시하도록 상기 터치스크린을 제어하는 것을 특징으로 하는 휴대용 단말기.
a touch screen;
A first virtual keypad for controlling a screen and an application and a controller for controlling the touch screen to display a second virtual keypad for inputting characters, numbers and symbols on the touch screen to which a palpation sheet is attached,
The control unit controls the touch screen to display the first and second virtual keypads on an area of the touch screen that matches the attached palpation sheet, and based on attribute information of an application running on the touch screen, the second and controlling the touch screen to display one of preset key combinations of a virtual keypad.
제 1 항에 있어서,
상기 제어부는,
기저장된 키패드 정보에 따라 상기 터치스크린에 표시될 상기 제 1, 2 가상 키패드들의 위치를 결정하는 것을 특징으로 하는 휴대용 단말기.
The method of claim 1,
The control unit is
and determining the positions of the first and second virtual keypads to be displayed on the touch screen according to stored keypad information.
제 1 항에 있어서,
상기 제어부는,
기저장된 키패드 정보에 따라 상기 터치스크린에 표시될 상기 제 1, 2 가상 키패들의 키조합을 결정하는 것을 특징으로 하는 휴대용 단말기.
The method of claim 1,
The control unit is
and determining a key combination of the first and second virtual key paddles to be displayed on the touch screen according to stored keypad information.
제 1 항에 있어서,
상기 제어부는,
안내음성 또는 안내화면을 이용하여 상기 촉지시트에 형성된 돌기들 중 적어도 하나 이상을 터치하도록 사용자에게 요청하고,
상기 사용자가 터치한 돌기의 위치에 따라 상기 촉지시트의 부착위치 및 상기 촉지시트의 타입을 판단하는 것을 특징으로 하는 휴대용 단말기.
The method of claim 1,
The control unit is
requesting the user to touch at least one of the protrusions formed on the palpation sheet by using the guidance voice or the guidance screen,
The portable terminal, characterized in that for determining the attachment position of the palpation sheet and the type of the palpation sheet according to the position of the protrusion touched by the user.
제 4 항에 있어서,
상기 제어부는,
상기 사용자가 터치한 돌기의 위치와 기저장된 키패드 정보를 비교하여 상기 촉지시트의 부착위치 및 상기 촉지시트의 타입을 판단하는 것을 특징으로 하는 휴대용 단말기.
5. The method of claim 4,
The control unit is
The portable terminal, characterized in that the attachment position of the palpation sheet and the type of the palpation sheet are determined by comparing the position of the protrusion touched by the user with pre-stored keypad information.
제 4 항에 있어서,
상기 제어부는,
상기 촉지시트의 부착위치 및 상기 촉지시트의 타입에 따라 상기 터치스크린에 표시될 상기 제 1, 2 가상 키패드들의 위치를 결정하는 것을 특징으로 하는 휴대용 단말기.
5. The method of claim 4,
The control unit is
The portable terminal of claim 1, wherein the positions of the first and second virtual keypads to be displayed on the touch screen are determined according to the attachment position of the palpation sheet and the type of the palpation sheet.
제 4 항에 있어서,
상기 제어부는,
상기 사용자가 터치한 돌기의 위치에 따라 상기 촉지시트의 사이즈, 상기 촉지시트에 포함된 전체 돌기들의 조합 및 위치를 판단하는 것을 특징으로 하는 휴대용 단말기.
5. The method of claim 4,
The control unit is
The portable terminal, characterized in that the size of the palpation sheet and the combination and position of all the protrusions included in the palpation sheet are determined according to the position of the protrusion touched by the user.
제 1 항에 있어서,
상기 제어부는,
상기 제 2 가상 키패드의 기설정된 키조합들 중 하나가 표시될 때, 상기 표시된 키조합을 설명하는 안내음성을 출력하도록 출력부를 제어하는 것을 특징으로 하는 휴대용 단말기.
The method of claim 1,
The control unit is
and when one of the preset key combinations of the second virtual keypad is displayed, the output unit is controlled to output a guide voice explaining the displayed key combination.
제 1 항에 있어서,
상기 제어부는,
상기 제 2 가상 키패드 상에서 상기 사용자의 드래그 터치가 감지되면, 상기 드래그 터치에 따라 상기 제 2 가상 키패드의 키조합을 변경하는 것을 특징으로 휴대용 단말기.
The method of claim 1,
The control unit is
When the user's drag touch is detected on the second virtual keypad, the portable terminal according to claim 1, wherein a key combination of the second virtual keypad is changed according to the drag touch.
제 1 항에 있어서,
상기 제어부는,
상기 촉지시트가 부착된 영역을 제외한 상기 터치스크린의 나머지 영역에 상기 애플리케이션을 표시하도록 상기 터치스크린을 제어하는 것을 특징으로 휴대용 단말기.

The method of claim 1,
The control unit is
and controlling the touch screen to display the application on the remaining area of the touch screen except for the area to which the palpation sheet is attached.

KR1020210012496A 2021-01-28 2021-01-28 A mobile terminal for prividing virtual keypads for blind person KR20220109162A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210012496A KR20220109162A (en) 2021-01-28 2021-01-28 A mobile terminal for prividing virtual keypads for blind person

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210012496A KR20220109162A (en) 2021-01-28 2021-01-28 A mobile terminal for prividing virtual keypads for blind person

Publications (1)

Publication Number Publication Date
KR20220109162A true KR20220109162A (en) 2022-08-04

Family

ID=82837066

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210012496A KR20220109162A (en) 2021-01-28 2021-01-28 A mobile terminal for prividing virtual keypads for blind person

Country Status (1)

Country Link
KR (1) KR20220109162A (en)

Similar Documents

Publication Publication Date Title
US10037130B2 (en) Display apparatus and method for improving visibility of the same
RU2666236C2 (en) Method of block display operation and terminal therefor
KR102091235B1 (en) Apparatus and method for editing a message in a portable terminal
US11650733B2 (en) Device, method, and graphical user interface for controlling multiple devices in an accessibility mode
US9684448B2 (en) Device input system and method for visually impaired users
US8456433B2 (en) Signal processing apparatus, signal processing method and selection method of user interface icon for multi-touch panel
WO2007084078A1 (en) A keyboard for a mobile phone or other portable communication devices
CN102057345A (en) Haptic user interface
EP4160370A1 (en) Icon arrangement method, electronic device, and storage medium
KR20140106801A (en) Apparatus and method for supporting voice service in terminal for visually disabled peoples
EP3211510B1 (en) Portable electronic device and method of providing haptic feedback
KR101434495B1 (en) Terminal with touchscreen and method for inputting letter
KR20100015165A (en) A user interface system using a touch screen pad
US20140129933A1 (en) User interface for input functions
KR20220109162A (en) A mobile terminal for prividing virtual keypads for blind person
KR20210014386A (en) A tactile sheet for blind person and a mobile terminal using the same
EP2410415A1 (en) Display apparatus and control method thereof
AU2018278777B2 (en) Touch input device and method
EP3457269B1 (en) Electronic device and method for one-handed operation
KR20150080831A (en) Virtual keyboard for Dual Remote Control between mobile devices
KR20200126149A (en) Apparatus for Providing User Interface for Information Input
WO2018167860A1 (en) Touch gesture determination device, touch gesture determination method, touch gesture determination program, and touch panel input device
KR20220152911A (en) Control method for moving icon or folder to another screen on mobile terminal
KR101919515B1 (en) Method for inputting data in terminal having touchscreen and apparatus thereof
KR20070060220A (en) Inputting apparatus and method for using touch screen

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application