KR102193531B1 - 애플리케이션에서 지원 기능을 실현하기 위한 방법 및 디바이스 - Google Patents

애플리케이션에서 지원 기능을 실현하기 위한 방법 및 디바이스 Download PDF

Info

Publication number
KR102193531B1
KR102193531B1 KR1020197013117A KR20197013117A KR102193531B1 KR 102193531 B1 KR102193531 B1 KR 102193531B1 KR 1020197013117 A KR1020197013117 A KR 1020197013117A KR 20197013117 A KR20197013117 A KR 20197013117A KR 102193531 B1 KR102193531 B1 KR 102193531B1
Authority
KR
South Korea
Prior art keywords
event
accessibility
accessibility function
control unit
input control
Prior art date
Application number
KR1020197013117A
Other languages
English (en)
Other versions
KR20190061061A (ko
Inventor
용 로우
지아지아 리
Original Assignee
어드밴스드 뉴 테크놀로지스 씨오., 엘티디.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 어드밴스드 뉴 테크놀로지스 씨오., 엘티디. filed Critical 어드밴스드 뉴 테크놀로지스 씨오., 엘티디.
Publication of KR20190061061A publication Critical patent/KR20190061061A/ko
Application granted granted Critical
Publication of KR102193531B1 publication Critical patent/KR102193531B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/604—Tools and structures for managing or administering access control systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/629—Protecting access to data via a platform, e.g. using keys or access control rules to features or functions of an application
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/50—Monitoring users, programs or devices to maintain the integrity of platforms, e.g. of processors, firmware or operating systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6281—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database at program execution time, where the protection is within the operating system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/561—Adding application-functional data or data for application control, e.g. adding metadata
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/225—Feedback of the input speech
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/53—Network services using third party service providers

Abstract

본 출원은 애플리케이션에서 접근성 기능을 실현하기 위한 방법 및 디바이스를 개시한다. 방법은: 애플리케이션이, 입력 제어부를 호출하라는 요청을 수신하고, 입력 제어부를 호출하는 단계; 입력 제어부에 의해 트리거되는 접근성 기능에 대응하는 이벤트를 검출할 때, 이벤트에 대응하는 서비스 피드백 명령을 결정하는 단계; 애플리케이션의 디바이스의 접근성 기능 엔진을 호출하고, 서비스 피드백 명령을 참조하여 접근성 기능 엔진을 사용하여 접근성 기능을 실현하는 단계를 포함한다. 본 발명에 의해 제공되는 접근성 서비스를 실현하는 프로세스는 제3자 애플리케이션 소프트웨어의 사용을 요구하지 않는다. 그에 의해, 본 발명은 제3자 애플리케이션 소프트웨어가 애플리케이션 사용자의 디바이스 인터페이스 정보 및 제어 정보에 접근하는 것에 의해 야기되는 사용자 정보 보안 위험의 이슈를 방지한다.

Description

애플리케이션에서 지원 기능을 실현하기 위한 방법 및 디바이스
본 출원은 컴퓨터 기술들의 분야에 관한 것으로, 특히, 애플리케이션들에서 접근성 기능(accessibility function)을 구현하기 위한 방법 및 장치에 관한 것이다.
현재, 모바일 폰 또는 컴퓨터와 같은 디바이스를 사용자에게 접근가능해지게 하기 위해, 시스템은 사용자에게 많은 접근성 기능들을 제공한다. 예를 들어, 텍스트 음성 변환 기능(text-to-speech function)은 시각 장애가 있는 사용자가 디바이스와 보다 양호하게 상호작용할 수 있게 한다.
기존 기술에서, 애플리케이션들에서 접근성 기능을 구현하기 위한 특정 방법이 도 1에 도시되어 있다.
단계 101: 사용자가 디바이스에 설치되는 애플리케이션 A에 입력 제어 유닛을 호출하라는 요청을 전송하고; 호출 요청을 수신한 후에, 애플리케이션 A는 시스템에서 구성되는 입력 제어 유닛을 호출하고; 사용자가, 입력 제어 유닛에 대한 동작을 수행하는 것에 의해, 접근성 기능에 대응하는 이벤트를 트리거할 때, 입력 제어 유닛은 이벤트를 시스템 접근성 관리자에게 전송한다.
단계 102: 이벤트를 수신한 후에, 시스템 접근성 관리자는 시스템에서의 각각의 접근성 서비스의 구성에 기초하여 이벤트의 타입에 대응하는 접근성 서비스를 결정하고, 이벤트를 접근성 서비스에 전송한다.
단계 103: 이벤트를 수신한 후에, 접근성 서비스는 이벤트에 대응하는 서비스 피드백 명령을 결정하고, 디바이스 상의 접근성 기능 엔진을 호출하며, 서비스 피드백 명령에 기초하여 접근성 기능 엔진을 사용하여 접근성 기능을 최종적으로 구현한다.
실제 애플리케이션들에서, 시스템에서의 접근성 서비스는 통상적으로 제3자 애플리케이션 소프트웨어에 의해 제공된다. 단계 102로부터, 접근성 서비스를 제공하는 제3자 애플리케이션 소프트웨어는 디바이스 인터페이스에서의 정보 및 사용자의 동작 정보를 획득할 수 있고, 애플리케이션 A 상의 사용자의 프라이버시 정보를 또한 획득할 수 있다는 것을 알 수 있다. 예를 들어, 이전 단계에서, 프라이버시 정보는, 애플리케이션 A 상의 사용자의 것인 계정 및 패스워드이다. 이와 같이, 사용자의 정보 보안에 위협이 가해진다.
현재, 이전 문제를 완화시키기 위한 두 가지 방법들이 있다: 하나의 방법에서, 접근성 서비스를 제공하는 신뢰성있는 제3자 애플리케이션 소프트웨어가 미리 선택된다. 명백하게는, 이 방법은 사용자 정보에 대해 제3자 애플리케이션 소프트웨어에 의해 야기되는 보안 위험들을 완전히 제거할 수 없다. 다른 방법에서는, 사용자의 정보가 제3자 애플리케이션 소프트웨어를 통해 전달될 필요가 없도록, 시스템이 접근성 서비스의 가능화를 금지한다. 이 방법은 사용자 정보에 대해 제3자 애플리케이션 소프트웨어에 의해 야기되는 보안 위험들을 완전히 제거할 수 있지만, 방법이 사용될 때 사용자는 접근성 서비스를 획득할 수 없다. 이와 같이, 현재는, 사용자 정보를 보안화할 뿐만 아니라, 사용자가 접근성 서비스를 획득한다는 것을 보장할 수 있는 어떠한 방법도 없다.
본 출원의 구현들은 제3자 애플리케이션 소프트웨어가 사용자에 대한 접근성 기능을 제공할 때 보안 위험들이 사용자 정보에 야기되는 기존 기술의 문제를 완화시키기 위해, 애플리케이션들에서 접근성 기능을 구현하기 위한 방법 및 장치를 제공한다.
본 개시내용은 애플리케이션들에서 접근성 기능을 구현하기 위한 방법을 제공하고, 여기서 방법은, 다음의 것: 애플리케이션에 의해, 입력 제어 유닛을 호출하라는 요청을 수신하고, 입력 제어 유닛을 호출하는 단계; 입력 제어 유닛을 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출할 때, 이벤트에 대응하는 서비스 피드백 명령을 결정하는 단계; 및 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출하고, 서비스 피드백 명령에 기초하여 접근성 기능 엔진을 사용하여 접근성 기능을 구현하는 단계를 포함한다.
이에 대응하여, 본 개시내용은 애플리케이션들에서 접근성 기능을 구현하기 위한 장치를 추가로 제공하고, 여기서 장치는, 다음의 것: 수신 유닛, 결정 유닛, 및 구현 유닛을 포함하고, 여기서 수신 유닛은 입력 제어 유닛을 호출하라는 요청을 수신하고, 입력 제어 유닛을 호출하고; 입력 제어 유닛을 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출할 때, 결정 유닛은 이벤트에 대응하는 서비스 피드백 명령을 결정하고; 구현 유닛은 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출하고, 서비스 피드백 명령에 기초하여 접근성 기능 엔진을 사용하여 접근성 기능을 구현한다.
본 출원에서 제공되는 애플리케이션들에서 접근성 기능을 구현하기 위한 방법들에 따르면, 입력 제어 유닛에 의해 트리거되고 접근성 기능에 대응하는 이벤트를 검출할 때, 애플리케이션은 이벤트에 대응하는 서비스 피드백 명령에 기초하여 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 직접 호출하여, 접근성 기능을 구현한다. 즉, 본 출원에서 접근성 서비스를 구현하는 프로세스에서, 제3자 애플리케이션 소프트웨어가 사용될 필요가 없다. 그것은 제3자 애플리케이션 소프트웨어가 애플리케이션에서의 사용자의 동작 정보 및 디바이스 인터페이스에서의 정보를 획득할 때 보안 위험들이 사용자 정보에 야기된다는 문제를 완화시킨다.
여기에 설명되는 첨부 도면들은 본 출원의 추가의 이해를 제공하도록 의도되고, 본 출원의 일부분을 구성한다. 본 출원의 예시적인 구현들 및 그 설명들은 본 출원을 설명하도록 의도되고, 본 출원에 대한 제한들이 되지 않는다. 첨부 도면들에서:
도 1은 기존 기술에서 애플리케이션들에서 접근성 기능을 구현하기 위한 방법을 예시하는 특정 개략적 흐름도이다.
도 2는 본 출원의 구현에 따른, 애플리케이션들에서 접근성 기능을 구현하기 위한 방법을 예시하는 특정 개략적 흐름도이다.
도 3은 본 출원의 구현에 따른, 애플리케이션들에서 접근성 기능을 구현하기 위한 장치를 예시하는 특정 개략적 구조도이다.
현재, 실제 애플리케이션들에서, 사용자와 디바이스(예를 들어, 모바일 폰 또는 태블릿 컴퓨터) 사이의 보다 양호한 상호작용을 용이하게 하기 위해, 디바이스는 사용자에 대한 일부 접근성 기능들을 제공한다. 예를 들어, 안드로이드 시스템에서의 "토크 백(Talk Back)" 애플리케이션은 사용자에 대한 텍스트 음성 변환 기능을 제공할 수 있다. 이 기능은 비교적 시력이 약한 사용자가 모바일 폰 상의 사용자의 입력 에러를 제시간에 수정할 수 있게 하고 사용자를 용이하게 한다.
본 출원에 제공되는 기술적 솔루션들은 모바일 폰에서의 텍스트 음성 변환 기능에도 또한 적용가능하다. 본 출원을 명확히 설명하기 위해, 이하에서는 기존 기술에서 사용자가 모바일 폰 애플리케이션에서 텍스트 음성 변환 기능을 사용하는 프로세스를 설명하기 위한 예로서 텍스트 음성 변환 기능을 사용한다.
우선, 사용자가 애플리케이션 A의 현재 인터페이스에서 입력 박스를 탭(tap)하고, 운영 체제에서 구성되는 온-스크린 키보드(on-screen keyboard)(즉, 기본 키보드(native keyboard))가 애플리케이션 A의 현재 인터페이스에 디스플레이된다. 그 후에, 사용자가 온-스크린 키보드를 사용하여 입력 박스에 정보를 입력한다. 최종적으로, 사용자에 의해 입력 박스에 입력된 정보에 기초하여 실시간으로 입력 정보에 대한 텍스트 음성 변환이 수행된다. 예를 들어, 사용자가 온-스크린 키보드 상의 키를 탭할 때마다, 모바일 폰은 키에 대응하는 정보에 대한 텍스트 음성 변환을 수행한다.
이전 단계에서, 사용자가 온-스크린 키보드를 사용하여 입력 박스에 정보를 입력한 후에, 모바일 폰에서의 텍스트 음성 변환 기능에 대응하는 이벤트가 트리거된다. 이 경우에, 온-스크린 키보드는 우선 (도 1의 단계 101에서 설명된 바와 같이) 이벤트를 접근성 관리자에게 전송한다. 그 후에, 접근성 관리자는, (도 1의 단계 102에서 설명된 바와 같이) 이벤트를, 이벤트에 대응하는 접근성 서비스에 전송한다. 다음으로, 접근성 서비스는 이벤트에 대응하는 서비스 피드백 명령을 결정하고, 텍스트 음성 변환 엔진을 호출한다. 최종적으로, (도 1의 단계 103에서 설명된 바와 같이) 서비스 피드백 명령에 기초하여 텍스트 음성 변환 엔진을 사용하여 텍스트 음성 변환 기능이 구현된다.
배경기술에서 설명된 바와 같이, 접근성 서비스는 통상적으로 제3자 애플리케이션 소프트웨어에 의해 제공된다. 텍스트 음성 변환을 구현하는 이전 프로세스에서, 제3자 애플리케이션 소프트웨어는 애플리케이션 A 상의 사용자의 프라이버시 정보를 획득하여, 사용자의 정보에 보안 위험들을 야기시킬 수 있다.
이전 문제를 완화시키기 위해, 본 출원은 애플리케이션들에서 접근성 기능을 구현하기 위한 방법 및 장치를 제공한다. 본 출원의 목적들, 기술적 솔루션들, 및 이점들을 더 명확하게 하기 위해, 이하에서는 본 출원의 특정 구현들 및 첨부 도면들을 참조하여 본 출원의 기술적 솔루션들을 명확하고 포괄적으로 설명한다. 명백하게는, 설명된 구현들은 본 출원의 구현들의 전부가 아니라 단지 일부일 뿐이다. 창의적 노력들 없이도 본 출원의 구현들에 기초하여 본 기술분야의 통상의 기술자에 의해 획득되는 다른 구현들은 본 출원의 보호 범주 내에 있어야 한다.
본 출원의 구현들에서 제공되는 기술적 솔루션들은 첨부 도면들을 참조하여 아래에 상세히 설명된다.
본 출원은 제3자 애플리케이션 소프트웨어가 사용자에 대한 접근성 기능을 제공할 때 보안 위험들이 사용자 정보에 야기되는 기존 기술의 문제를 완화시키기 위해, 애플리케이션들에서 접근성 기능을 구현하기 위한 방법을 추가로 제공한다. 도 2는 이 방법의 개략적 흐름도를 도시한다. 이 방법은 다음의 단계들을 포함한다.
단계 201: 애플리케이션은 입력 제어 유닛을 호출하라는 요청을 수신하고, 입력 제어 유닛을 호출한다.
본 단계에서, 애플리케이션은 입력 제어 유닛을 호출하라는 요청을 수신하고, 여기서 입력 제어 유닛을 호출하라는 요청은 이전 예에서 "사용자가 현재 애플리케이션 인터페이스에서 입력 박스를 탭한다"는 것에 의해 트리거될 수 있거나, 또는 다른 미리 결정된 동작들에 의해 트리거될 수 있다.
입력 제어 유닛을 호출하라는 요청을 수신한 후에, 애플리케이션은 현재 애플리케이션 인터페이스에 입력 제어 유닛을 디스플레이한다. 입력 제어 유닛은 온-스크린 키보드일 수 있다. 입력 제어 유닛은, 일부 온-스크린 키들을 포함하는 온-스크린 키보드 인터페이스일 수 있다. 입력 제어 유닛은 또한 다른 입력 제어 유닛일 수 있고, 입력 제어 유닛은 운영 체제에서 구성될 수 있거나 또는 애플리케이션에 의해 미리 구성될 수 있다. 구현들은 여기에서 특별히 제한되지 않는다.
단계 202: 입력 제어 유닛을 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출할 때, 이벤트에 대응하는 서비스 피드백 명령을 결정.
입력 제어 유닛을 호출한 후에, 애플리케이션은, 입력 제어 유닛을 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출한다. 많은 검출 방법들이 있다. 예를 들어, 애플리케이션은 입력 제어 유닛을 사용하여 트리거되는 이벤트를 검출하고, 트리거된 이벤트의 타입을 결정하며, 트리거된 타입의 타입에 기초하여 트리거된 이벤트가 접근성 기능에 대응하는 이벤트인지 여부를 결정할 수 있다.
예를 들어, 미리 결정된 접근성 기능에 대응하는 이벤트 타입들은 "탭", "더블 탭", 및 "포커스 변경"이다. 사용자가 입력 제어 유닛 상의 오브젝트를 "탭"하는 경우, 애플리케이션은 트리거된 이벤트의 타입이 접근성 기능에 대응하는 이벤트 타입이라는 것, 즉, 트리거된 이벤트가 접근성 기능에 대응하는 이벤트라는 것을 검출한다. 사용자가 애플리케이션 인터페이스에서 오브젝트를 "드래그"하는 경우, 애플리케이션은 트리거된 이벤트가 접근성 기능에 대응하는 이벤트 타입이 아니라는 것, 즉, 트리거된 이벤트가 접근성 기능에 대응하는 이벤트가 아니라는 것을 검출한다.
애플리케이션에 의해 접근성 기능에 대응하는 이벤트를 검출하기 위한 이전 방법은, 추가로 다음의 것: 입력 제어 유닛을 사용하여 트리거되는 이벤트를 검출하는 것, 트리거된 이벤트에서 사용자의 동작 오브젝트를 결정하는 것, 및 동작 오브젝트에 기초하여 트리거된 이벤트가 접근성 기능에 대응하는 이벤트인지 여부를 결정하는 것일 수 있다.
예를 들어, 입력 제어 유닛이 온-스크린 키보드이고, 미리 결정된 접근성 기능에 대응하는 동작 오브젝트들이 온-스크린 키보드 상의 "a", "b", 및 "c"인 경우, 그리고 사용자가 온-스크린 키보드 상의 "a"를 탭하는 경우, 애플리케이션은 트리거된 이벤트의 동작 오브젝트가 접근성 기능에 대응하는 동작 오브젝트라는 것, 즉, 트리거된 이벤트가 접근성 기능에 대응하는 이벤트라는 것을 검출한다.
접근성 기능에 대응하는 이벤트를 검출하기 위한 방법들의 이전 두 가지 예들은 단지 예시적인 설명을 위한 것일 뿐이다. 실제 애플리케이션들에서, 사용자의 요구들에 기초하여 사용자에 의해 검출 방법이 설정될 수 있다. 구현들은 여기에서 특별히 제한되지 않는다.
접근성 기능에 대응하고 입력 제어 유닛에 의해 트리거되는 이벤트를 검출할 때, 애플리케이션은 이벤트에 대응하는 서비스 피드백 명령을 결정한다. 서비스 피드백 명령을 결정하기 위한 방법은, 접근성 기능에 대응하는 이벤트의 타입과 각각의 서비스 피드백 명령 사이의 미리 결정된 매핑 관계에 기초하여 이벤트의 타입에 대응하는 서비스 피드백 명령을 결정하는 것일 수 있다.
이전 예를 다시 참조하면, 미리 결정된 접근성 기능에 대응하는 이벤트 타입들은 "탭", "더블 탭", 및 "포커스 변경"이다. 각각의 서비스 피드백 명령과 3개의 이벤트 타입들 각각 사이의 매핑 관계가 확립된다. 예를 들어, 접근성 기능이 텍스트 음성 변환 기능인 경우, 타입 "탭"과 서비스 피드백 명령 "탭된 오브젝트에 대해 텍스트 음성 변환을 수행" 사이에 매핑 관계가 확립될 수 있다. 사용자가 애플리케이션 인터페이스에서 오브젝트를 "탭"할 때, 애플리케이션은, 트리거된 이벤트의 타입 및 이전 매핑 관계에 기초하여, 트리거된 이벤트에 대응하는 서비스 피드백 명령이 "탭된 오브젝트에 대해 텍스트 음성 변환을 수행"이라고 결정한다.
서비스 피드백 명령 및 접근성 기능에 대응하는 이벤트의 타입은 단지 예시적인 설명을 위한 것일 뿐이다. 실제 애플리케이션들에서, 서비스 피드백 명령 및 접근성 기능에 대응하는 이벤트의 타입은 때로는 더 복잡하다. 예를 들어, 서비스 피드백 명령은 동작 오브젝트를 추가로 제한할 수 있다. 사용자가 "W"를 탭할 때에만 텍스트 음성 변환이 수행되거나, 또는 사용자가 "W"를 탭할 때, 다른 문자가 탭될 때 생성되는 것보다 텍스트 음성 변환 볼륨이 더 높다고 가정한다. 이들은 사용자의 요구들에 기초하여 설정될 수 있다.
애플리케이션이 입력 제어 디바이스를 사용하여 트리거되는 이벤트가 접근성 기능에 대응하는 이벤트가 아니라는 것을 검출할 때, 리소스들을 절약하기 위해, 애플리케이션은 트리거된 이벤트에 대해 동작을 수행할 필요가 없을 수도 있다, 즉, 애플리케이션은 접근성 기능에 대응하는 이벤트 타입에만 단지 "관심을 가질" 필요가 있다.
단계 203: 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출하고, 서비스 피드백 명령에 기초하여 접근성 기능 엔진을 사용하여 접근성 기능을 구현.
본 단계에서, 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진이 호출된다. 특정 호출 방법은 다음과 같을 수 있다: 애플리케이션은 우선 접근성 기능을 제공하는 엔진에 대한 연결 관계를 확립하고; 연결 관계를 성공적으로 확립한 후에, 애플리케이션은 접근성 기능 엔진을 호출할 수 있고; 그렇지 않으면, 애플리케이션은 접근성 기능 엔진을 호출할 수 없다.
애플리케이션에 의해 접근성 기능 엔진에 대한 연결 관계를 확립하는 특정 방법은 다음과 같다: 애플리케이션은 인터페이스를 호출하라는 요청을 접근성 기능 엔진에 전송하고, 접근성 기능 엔진이 요청을 수신한 후에, 애플리케이션은 접근성 기능 엔진의 인터페이스를 성공적으로 호출한다, 즉, 애플리케이션은 접근성 기능 엔진에 대한 연결 관계를 성공적으로 확립한다.
실제 애플리케이션들에서, 일부 접근성 기능 엔진들의 인터페이스들이 개방되어 있다, 즉, 접근성 기능 엔진은 애플리케이션이 인터페이스를 호출하라는 요청을 전송하는 한 애플리케이션이 인터페이스를 호출하도록 허용한다. 일부 접근성 기능 엔진들은, 인터페이스들을 호출하는 오브젝트들에 대한 권한을 설정한다. 애플리케이션이 인터페이스를 호출하라는 요청을 접근성 기능 엔진에 전송할 때, 우선, 접근성 기능 엔진은 애플리케이션이 인터페이스를 호출하는 권한을 갖는지 여부를 검증할 필요가 있다. 검증이 성공한 후에, 애플리케이션은 인터페이스를 호출하도록 허용된다.
애플리케이션이 접근성 기능 엔진을 호출하기 전에, 애플리케이션에 의해 접근성 기능 엔진에 대한 연결 관계를 확립하는 단계가 수행될 수 있다. 예를 들어, 애플리케이션은 입력 제어 유닛을 호출한 후에 연결 관계를 확립할 수 있거나, 또는 트리거된 이벤트에 대응하는 서비스 피드백 명령을 결정한 후에 연결 관계를 확립할 수 있다.
애플리케이션이 입력 제어 유닛을 호출한 후에 연결 관계가 확립되는 경우, 연결 관계를 확립하는 특정 프로세스는 다음과 같을 수 있다: 입력 제어 유닛을 호출한 후에, 애플리케이션은 접근성 기능 엔진에 연결 요청을 전송하고; 연결이 성공적으로 확립되는 경우, 애플리케이션은 단계 202를 수행하고; 연결이 확립되지 못한 경우, 애플리케이션은 단계 202를 수행할 필요가 없다. 애플리케이션이 트리거된 이벤트에 대응하는 서비스 피드백 명령을 결정한 후에 연결 관계가 확립되는 방법과 비교하면, 연결 방법은 리소스 소비를 감소시킬 수 있다.
애플리케이션이 접근성 기능 엔진을 호출한 후에, 접근성 기능 엔진은 단계 202에서 결정된 서비스 피드백 명령에 기초하여 접근성 기능을 구현한다.
예를 들어, 표 1은 이벤트 타입과 각각의 서비스 피드백 명령 사이의 미리 결정된 매핑 관계이다.
이벤트 타입 서비스 피드백 명령
탭 탭된 오브젝트에 대해 텍스트 음성 변환을 수행
더블 탭 특정 보이스를 브로드캐스팅
…
사용자가 입력 제어 유닛 상의 오브젝트를 "탭"하는 경우, 애플리케이션은 트리거된 이벤트에 대응하는 서비스 피드백 명령이 "탭된 오브젝트에 대해 텍스트 음성 변환을 수행"이라고 결정한다. 이 경우에, 애플리케이션은 애플리케이션을 포함하는 디바이스의 텍스트 음성 변환 엔진을 호출하고, 텍스트 음성 변환 엔진은 서비스 피드백 명령 "탭된 오브젝트에 대해 텍스트 음성 변환을 수행"에 기초하여 사용자에 의해 탭된 오브젝트에 대해 텍스트 음성 변환을 수행한다. 사용자가 탭된 오브젝트가 사용자가 입력하기를 원하는 오브젝트라고 결정할 때, 사용자는 오브젝트가 입력 오브젝트로서 선택됨을 나타내기 위해 오브젝트를 "더블 탭"할 수 있고, 애플리케이션은 트리거된 이벤트에 대응하는 서비스 피드백 명령이 "특정 보이스를 브로드캐스팅"이라고 결정한다. 예를 들어, 미리 결정된 특정 보이스는 "징글링(jingling)"이다. 이 경우에, 사용자가 오브젝트를 더블 탭한 후에, 텍스트 음성 변환 엔진이 "징글링" 사운드를 브로드캐스팅한다.
배경기술의 내용으로부터, 기존 기술에서 애플리케이션들에서 접근성 기능을 구현하기 위한 방법에서, 애플리케이션이 접근성 기능에 대응하고 입력 제어 유닛에 의해 트리거되는 이벤트를 검출할 때, 입력 제어 유닛은 우선 이벤트를 시스템 접근성 관리자에게 전송한 후에, 시스템 접근성 관리자가 인터페이스에서의 정보 및 이벤트를 제3자 애플리케이션 소프트웨어에 전송하고, 최종적으로 제3자 애플리케이션 소프트웨어를 사용하여 접근성 기능 엔진을 호출함으로써 접근성 기능이 구현된다는 것을 알 수 있다. 본 출원에서, 접근성 기능에 대응하고 입력 제어 수단에 의해 트리거되는 이벤트를 검출할 때, 애플리케이션은 이벤트에 대응하는 서비스 피드백 명령에 기초하여 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 직접 호출하여, 접근성 기능을 구현한다. 즉, 본 출원에서, 접근성 서비스 및 시스템 접근성 관리자를 포함하는 운영 체제는 접근성 서비스를 구현하는 프로세스에서 직접 우회될 수 있다, 즉, 제3자 애플리케이션 소프트웨어가 우회되고, 접근성 기능 엔진이 직접 호출되어 접근성 기능을 구현한다. 그것은 제3자 애플리케이션 소프트웨어가 디바이스 인터페이스에서의 정보 및 애플리케이션에서의 사용자의 동작 정보를 획득한 후에 사용자 정보에 보안 위험들을 야기시키는 문제를 완화시킨다.
단계 202 및/또는 단계 203에서, 애플리케이션에서 입력 제어 유닛 또는 다른 실행 모듈에 의해 실행될 수 있다는 것에 주목할 가치가 있다. 구현들은 본 출원에서 제한되지 않는다.
이전 내용에 기록된 바와 같이, 입력 제어 유닛은 운영 체제에서 구성될 수 있거나 또는 애플리케이션에 의해 미리 구성될 수 있다.
입력 제어 유닛이 운영 체제에서 구성될 때, 본 출원에서, 운영 체제가 개선될 수 있다. 기존 기술의 운영 체제에서 구성되는 입력 제어 유닛은 접근성 기능에 대응하는 이벤트를 접근성 관리자에게 전송할 필요가 있다. 그러나, 본 출원의 개선된 운영 체제에서 구성되는 입력 제어 유닛은 접근성 기능에 대응하는 이벤트를 차단하고, 디바이스의 접근성 기능 엔진을 직접 호출하여 접근성 기능을 구현한다. 접근성 기능을 구현하는 프로세스에서, 제3자 애플리케이션 소프트웨어가 사용될 필요가 없다. 이와 같이, 사용자 정보의 보안이 개선된다.
입력 제어 유닛이 애플리케이션에 의해 구성될 때, 사용자가 입력 제어 유닛을 호출하라는 요청을 애플리케이션에 전송한 후에, 애플리케이션은 운영 체제에서 구성되는 입력 제어 유닛을 차폐하고, 애플리케이션에 의해 구성되는 입력 제어 유닛을 애플리케이션 인터페이스에 디스플레이한다. 사용자가 애플리케이션에 의해 구성되는 입력 제어 유닛을 사용하여 접근성 기능에 대응하는 이벤트를 트리거할 때, 애플리케이션에 의해 구성되는 입력 제어 유닛은 디바이스의 접근성 기능 엔진을 직접 호출하여 접근성 기능을 구현한다. 마찬가지로, 접근성 기능을 구현하는 프로세스에서, 제3자 애플리케이션 소프트웨어가 사용될 필요가 없다. 이와 같이, 사용자 정보의 보안이 개선된다.
이에 대응하여, 본 개시내용은 제3자 애플리케이션 소프트웨어가 사용자에 대한 접근성 기능을 제공할 때 보안 위험들이 사용자 정보에 야기되는 기존 기술의 문제를 완화시키기 위해, 애플리케이션들에서 접근성 기능을 구현하기 위한 장치를 추가로 제공한다. 도 3은 장치의 개략적 구조도를 도시한다. 장치는, 다음의 것: 수신 유닛(301), 결정 유닛(302), 및 구현 유닛(303)을 포함한다.
수신 유닛(301)은 입력 제어 유닛을 호출하라는 요청을 수신하고, 입력 제어 유닛을 호출한다.
입력 제어 유닛을 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출할 때, 결정 유닛(302)은 이벤트에 대응하는 서비스 피드백 명령을 결정한다.
구현 유닛(303)은 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출하고, 서비스 피드백 명령에 기초하여 접근성 기능 엔진을 사용하여 접근성 기능을 구현한다.
이 장치 구현의 작업 프로시저는 다음과 같다: 우선, 수신 유닛(301)은 입력 제어 유닛을 호출하라는 요청을 수신하고, 입력 제어 유닛을 호출한다. 그 후에, 입력 제어 유닛을 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출할 때, 결정 유닛(302)은 이벤트에 대응하는 서비스 피드백 명령을 결정한다. 최종적으로, 구현 유닛(303)은 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출하고, 서비스 피드백 명령에 기초하여 접근성 기능 엔진을 사용하여 접근성 기능을 구현한다.
이전 장치 구현에서 애플리케이션들에서 접근성 기능을 구현하기 위한 많은 방법들이 있다. 예를 들어, 구현에서, 결정 유닛(302)은, 다음의 것: 입력 제어 유닛을 사용하여 트리거되는 이벤트를 검출하는 것; 트리거된 이벤트의 타입을 결정하는 것; 및 타입에 기초하여 트리거된 이벤트가 접근성 기능에 대응하는 이벤트인지 여부를 결정하는 것을 포함하여, 입력 제어 유닛에 의해 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출한다.
다른 구현에서, 결정 유닛(302)은, 다음의 것: 접근성 기능에 대응하는 이벤트의 타입과 각각의 서비스 피드백 명령 사이의 미리 결정된 매핑 관계에 기초하여 이벤트의 타입에 대응하는 서비스 피드백 명령을 결정하는 것을 포함하여, 이벤트에 대응하는 서비스 피드백 명령을 결정한다.
또 다른 구현에서, 구현 유닛(303)은, 다음의 것: 접근성 기능을 제공하는 엔진에 대한 연결 관계를 확립하는 것; 및 연결 관계에 기초하여 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출하는 것을 포함하여, 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출한다.
또 다른 구현에서, 결정 유닛(302)은, 다음의 것: 입력 제어 유닛을 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출하는 것을 포함하여, 입력 제어 유닛을 사용하여 트리거되고 접근성 기능에 대응하는 이벤트를 검출한다.
결정 유닛(302)은, 다음의 것: 입력 제어 유닛을 사용하여 이벤트에 대응하는 서비스 피드백 명령을 결정하는 것을 포함하여, 이벤트에 대응하는 서비스 피드백 명령을 결정한다.
구현 유닛(303)은, 다음의 것: 입력 제어 유닛을 사용하여 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출하는 것, 및 서비스 피드백 명령에 기초하여 접근성 기능 엔진을 사용하여 접근성 기능을 구현하는 것을 포함하여, 애플리케이션을 포함하는 디바이스의 접근성 기능 엔진을 호출하고, 서비스 피드백 명령에 기초하여 접근성 기능 엔진을 사용하여 접근성 기능을 구현한다.
본 출원에서 제공되는 시스템 구현들을 적용하는 것에 의해 획득되는 유익한 효과들은 이전 방법 구현들을 적용하는 것에 의해 획득된 것들과 동일하거나 또는 유사하다. 반복을 피하기 위해, 여기서는 단순화를 위해 세부사항들이 생략된다.
본 기술분야의 통상의 기술자는 본 개시내용의 구현이 방법, 시스템, 또는 컴퓨터 프로그램 제품으로서 제공될 수 있다는 것을 이해해야 한다. 그에 따라, 본 개시내용은 하드웨어 전용 구현들, 소프트웨어 전용 구현들, 또는 소프트웨어와 하드웨어의 조합에 의한 구현들의 형태를 사용할 수 있다. 더욱이, 본 개시내용은 컴퓨터 사용가능 프로그램 코드를 포함하는 하나 이상의 컴퓨터 사용가능 저장 매체들(디스크 메모리, CD-ROM, 광학 메모리 등을 포함하지만 이에 제한되지 않음) 상에서 구현되는 컴퓨터 프로그램 제품의 형태를 사용할 수 있다.
본 개시내용은 본 개시내용의 구현들에 기초하는 방법, 디바이스(시스템), 및 컴퓨터 프로그램 제품의 흐름도들 및/또는 블록도들을 참조하여 설명된다. 컴퓨터 프로그램 명령들이 흐름도들 및/또는 블록도들에서의 각각의 프로세스 및/또는 각각의 블록 및 흐름도들 및/또는 블록도들에서의 프로세스 및/또는 블록의 조합을 구현하는 데 사용될 수 있다는 것에 주목할 가치가 있다. 이들 컴퓨터 프로그램 명령들은, 머신을 생성하도록 범용 컴퓨터, 전용 컴퓨터, 내장 프로세서, 또는 다른 프로그래밍가능 데이터 프로세싱 디바이스의 프로세서에 대해 제공될 수 있어서, 컴퓨터 또는 다른 프로그래밍가능 데이터 프로세싱 디바이스의 프로세서에 의해 실행된 명령들이 흐름도들에서의 하나 이상의 프로세스들에서의 그리고/또는 블록도들에서의 하나 이상의 블록들에서의 특정 기능을 구현하기 위한 장치를 생성한다.
이들 컴퓨터 프로그램 명령들은, 컴퓨터 또는 다른 프로그래밍가능 데이터 프로세싱 디바이스에게 특정 방식으로 작업하도록 명령할 수 있는 컴퓨터 판독가능 메모리에 저장될 수 있어서, 컴퓨터 판독가능 메모리에 저장된 명령들이 명령 장치를 포함하는 인공물을 생성한다. 명령 장치는 흐름도들에서의 하나 이상의 프로세스들에서의 그리고/또는 블록도들에서의 하나 이상의 블록들에서의 특정 기능을 구현한다.
이들 컴퓨터 프로그램 명령들은 컴퓨터 또는 다른 프로그래밍가능 데이터 프로세싱 디바이스 상으로 로딩될 수 있어서, 일련의 동작들 및 단계들이 컴퓨터 또는 다른 프로그래밍가능 디바이스 상에서 수행되어, 그에 의해 컴퓨터 구현 프로세싱을 생성한다. 그에 따라, 컴퓨터 또는 다른 프로그래밍가능 디바이스 상에서 실행되는 명령들은 흐름도들에서의 하나 이상의 프로세스들에서의 그리고/또는 블록도들에서의 하나 이상의 블록들에서의 특정 기능을 구현하기 위한 단계들을 제공한다.
전형적인 구성에서, 컴퓨팅 디바이스는 하나 이상의 프로세서들(CPU), 하나 이상의 입/출력 인터페이스들, 하나 이상의 네트워크 인터페이스들, 및 하나 이상의 메모리들을 포함한다.
메모리는 비영구적 메모리, 랜덤 액세스 메모리(RAM), 비휘발성 메모리, 및/또는 컴퓨터 판독가능 매체로 이루어지는 다른 형태, 예를 들어, 판독 전용 메모리(ROM) 또는 플래시 메모리(플래시 RAM)를 포함할 수 있다. 메모리는 컴퓨터 판독가능 매체의 예이다.
컴퓨터 판독가능 매체는, 임의의 방법 또는 기술을 사용하여 정보를 저장할 수 있는 영구적, 비영구적, 이동식 및 비이동식 매체들을 포함한다. 정보는 컴퓨터 판독가능 명령, 데이터 구조체, 프로그램 모듈 또는 다른 데이터일 수 있다. 컴퓨터 저장 매체의 예들은 상변화 랜덤 액세스 메모리(PRAM), 정적 랜덤 액세스 메모리(SRAM), 동적 랜덤 액세스 메모리(DRAM), 다른 타입의 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 전기적 소거가능 프로그래밍가능 판독 전용 메모리(EEPROM), 플래시 메모리 또는 다른 메모리 기술, 콤팩트 디스크 판독 전용 메모리(CD-ROM), 디지털 다기능 디스크(DVD) 또는 다른 광학 스토리지, 카세트 자기 테이프, 자기 테이프/자기 디스크 스토리지 또는 다른 자기 스토리지 디바이스, 또는 임의의 다른 비송신 매체를 포함하지만, 이에 제한되지 않는다. 컴퓨터 저장 매체는 컴퓨팅 디바이스에 의해 접근가능한 정보를 저장하는 데 사용될 수 있다. 본 명세서에서의 정의에 기초하여, 컴퓨터 판독가능 매체는, 변조된 데이터 신호 및 캐리어와 같은 일시적 컴퓨터 판독가능 매체들(일시적 매체들)을 포함하지 않는다.
용어들 "포함하다(include)", "함유하다(contain)", 또는 이들의 임의의 다른 변형들은 요소들의 리스트를 포함하는 프로세스, 방법, 제품 또는 디바이스가 이들 요소들을 포함할 뿐만 아니라, 명백히 리스팅되지 않은 다른 요소들을 포함하거나, 또는 그러한 프로세스, 방법, 제품 또는 디바이스에 내재하는 요소들을 더 포함하도록 하는 비배타적인 포함을 커버하도록 의도된다는 것에 추가로 주목할 가치가 있다. 더 많은 제약들 없이, "...을 포함하다(includes a ...)"가 선행되는 요소는, 요소를 포함하는 프로세스, 방법, 제품 또는 디바이스에서 부가적인 동일한 요소들의 존재를 배제시키지 않는다.
이전 구현들은 본 출원의 구현들이고, 본 출원을 제한하려고 의도된 것이 아니다. 본 기술분야의 통상의 기술자는 본 출원에 대해 다양한 수정들 및 변경들을 행할 수 있다. 본 출원의 사상 및 원리로부터 벗어남이 없이 행해지는 임의의 수정, 등가의 대체, 또는 개선은 본 출원의 청구범위의 범주 내에 있어야 한다.

Claims (20)

  1. 보안 위험을 감소시키기 위해 제3자 애플리케이션을 우회함으로써 현재 애플리케이션에서 접근성 기능(accessibility function)을 구현하는 컴퓨터 구현(computer-implemented) 방법에 있어서,
    디바이스에 설치된 제3자 애플리케이션에 의해, 접근성 기능을 제공하는 단계;
    현재 애플리케이션에 의해, 입력 제어 유닛을 호출하라는 요청을 수신하는 단계;
    상기 입력 제어 유닛을 호출하는 단계;
    상기 입력 제어 유닛을 사용하여 상기 접근성 기능에 대응하는 이벤트가 트리거되는지 여부를 결정하는 단계 - 상기 접근성 기능은 상기 제3자 애플리케이션에 의해 제공됨 - ;
    상기 입력 제어 유닛을 사용하여 상기 접근성 기능에 대응하는 이벤트가 트리거된다고 결정하는 것에 응답하여, 상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 단계;
    상기 디바이스의 접근성 기능 엔진을 호출함으로써 상기 제3자 애플리케이션을 우회하는 단계 - 상기 접근성 기능 엔진은 상기 디바이스의 운영 체제를 우회하고, 상기 운영 체제는 상기 제3자 애플리케이션에 의해 제공된 접근성 서비스 및 시스템 접근성 관리자를 포함함 - ; 및
    상기 서비스 피드백 명령에 기초하여 상기 접근성 기능 엔진을 사용하여 상기 접근성 기능을 구현하는 단계를 포함하는, 컴퓨터 구현 방법.
  2. 제1항에 있어서,
    상기 입력 제어 유닛은 상기 애플리케이션에서 구성되는 것인, 컴퓨터 구현 방법.
  3. 제1항에 있어서,
    상기 입력 제어 유닛을 사용하여 접근성 기능에 대응하는 이벤트가 트리거되는지 여부를 결정하는 단계는,
    상기 입력 제어 유닛을 사용하여 트리거되는 이벤트를, 트리거된 이벤트로서, 검출하는 단계;
    상기 트리거된 이벤트의 타입을 결정하는 단계; 및
    상기 트리거된 이벤트의 타입에 기초하여 상기 트리거된 이벤트가 상기 접근성 기능에 대응하는 이벤트인지 여부를 결정하는 단계를 포함하는 것인, 컴퓨터 구현 방법.
  4. 제3항에 있어서,
    상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 단계는,
    상기 접근성 기능에 대응하는 이벤트의 타입과 각각의 서비스 피드백 명령 사이의 미리 결정된 매핑 관계에 기초하여 상기 이벤트의 타입에 대응하는 서비스 피드백 명령을 결정하는 단계를 포함하는 것인, 컴퓨터 구현 방법.
  5. 제3항에 있어서,
    상기 트리거된 이벤트의 타입은 탭(tap), 더블 탭, 또는 포커스 변경을 포함하는 것인, 컴퓨터 구현 방법.
  6. 제1항에 있어서,
    디바이스의 접근성 기능 엔진을 호출하는 단계는,
    상기 접근성 기능을 제공하는 엔진에 대한 연결 관계를 확립하는 단계; 및
    상기 연결 관계에 기초하여 상기 애플리케이션을 포함하는 상기 디바이스의 접근성 기능 엔진을 호출하는 단계를 포함하는 것인, 컴퓨터 구현 방법.
  7. 제1항에 있어서,
    상기 입력 제어 유닛을 사용하여 접근성 기능에 대응하는 이벤트가 트리거되는지 여부를 결정하는 단계는,
    상기 입력 제어 유닛을 사용하여 상기 접근성 기능에 대응하는 이벤트를 검출하는 단계를 포함하는 것인, 컴퓨터 구현 방법.
  8. 제7항에 있어서,
    상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 단계는,
    상기 입력 제어 유닛을 사용하여 상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 단계를 포함하는 것인, 컴퓨터 구현 방법.
  9. 제8항에 있어서,
    상기 디바이스의 접근성 기능 엔진을 호출하는 단계는,
    상기 입력 제어 유닛을 사용하여 상기 디바이스의 접근성 기능 엔진을 호출하는 단계를 포함하는 것인, 컴퓨터 구현 방법.
  10. 제1항에 있어서,
    상기 입력 제어 유닛은 온-스크린 키보드(on-screen keyboard)인 것인, 컴퓨터 구현 방법.
  11. 제10항에 있어서,
    상기 접근성 기능은 상기 온-스크린 키보드의 일부분의 선택을 포함하는 것인, 컴퓨터 구현 방법.
  12. 보안 위험을 감소시키기 위해 제3자 애플리케이션을 우회함으로써 현재 애플리케이션에서 접근성 기능을 구현하는 동작들을 수행하도록 컴퓨터 시스템에 의해 실행가능한 하나 이상의 명령어가 저장된 비일시적 컴퓨터 판독가능 매체에 있어서,
    상기 동작들은,
    디바이스에 설치된 제3자 애플리케이션에 의해, 접근성 기능을 제공하는 동작;
    현재 애플리케이션에 의해, 입력 제어 유닛을 호출하라는 요청을 수신하는 동작;
    상기 입력 제어 유닛을 호출하는 동작;
    상기 입력 제어 유닛을 사용하여 상기 접근성 기능에 대응하는 이벤트가 트리거되는지 여부를 결정하는 동작 - 상기 접근성 기능은 상기 제3자 애플리케이션에 의해 제공됨 - ;
    상기 입력 제어 유닛을 사용하여 상기 접근성 기능에 대응하는 이벤트가 트리거된다고 결정하는 것에 응답하여, 상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 동작;
    상기 디바이스의 접근성 기능 엔진을 호출함으로써 상기 제3자 애플리케이션을 우회하는 동작 - 상기 접근성 기능 엔진은 상기 디바이스의 운영 체제를 우회하고, 상기 운영 체제는 상기 제3자 애플리케이션에 의해 제공된 접근성 서비스 및 시스템 접근성 관리자를 포함함 - ; 및
    상기 서비스 피드백 명령에 기초하여 상기 접근성 기능 엔진을 사용하여 상기 접근성 기능을 구현하는 동작을 포함하는 것인, 비일시적 컴퓨터 판독가능 매체.
  13. 제12항에 있어서,
    상기 입력 제어 유닛은 상기 애플리케이션에서 구성되는 것인, 비일시적 컴퓨터 판독가능 매체.
  14. 제12항에 있어서,
    상기 입력 제어 유닛을 사용하여 접근성 기능에 대응하는 이벤트가 트리거되는지 여부를 결정하는 동작은,
    상기 입력 제어 유닛을 사용하여 트리거되는 이벤트를, 트리거된 이벤트로서, 검출하는 동작;
    상기 트리거된 이벤트의 타입을 결정하는 동작; 및
    상기 트리거된 이벤트의 타입에 기초하여 상기 트리거된 이벤트가 상기 접근성 기능에 대응하는 이벤트인지 여부를 결정하는 동작을 포함하는 것인, 비일시적 컴퓨터 판독가능 매체.
  15. 제14항에 있어서,
    상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 동작은,
    상기 접근성 기능에 대응하는 이벤트의 타입과 각각의 서비스 피드백 명령 사이의 미리 결정된 매핑 관계에 기초하여 상기 이벤트의 타입에 대응하는 서비스 피드백 명령을 결정하는 동작을 포함하는 것인, 비일시적 컴퓨터 판독가능 매체.
  16. 제14항에 있어서,
    상기 트리거된 이벤트의 타입은 탭, 더블 탭, 또는 포커스 변경을 포함하는 것인, 비일시적 컴퓨터 판독가능 매체.
  17. 제12항에 있어서,
    디바이스의 접근성 기능 엔진을 호출하는 동작은,
    상기 접근성 기능을 제공하는 엔진에 대한 연결 관계를 확립하는 단계; 및
    상기 연결 관계에 기초하여 상기 애플리케이션을 포함하는 상기 디바이스의 접근성 기능 엔진을 호출하는 동작을 포함하는 것인, 비일시적 컴퓨터 판독가능 매체.
  18. 제12항에 있어서,
    상기 입력 제어 유닛을 사용하여 접근성 기능에 대응하는 이벤트가 트리거되는지 여부를 결정하는 동작은, 상기 입력 제어 유닛을 사용하여 상기 접근성 기능에 대응하는 이벤트를 검출하는 동작을 포함하고,
    상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 동작은, 상기 입력 제어 유닛을 사용하여 상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 동작을 포함하는 것인, 비일시적 컴퓨터 판독가능 매체.
  19. 제18항에 있어서,
    상기 디바이스의 접근성 기능 엔진을 호출하는 동작은,
    상기 입력 제어 유닛을 사용하여 상기 디바이스의 접근성 기능 엔진을 호출하는 동작을 포함하는 것인, 비일시적 컴퓨터 판독가능 매체.
  20. 컴퓨터 구현 시스템에 있어서,
    하나 이상의 컴퓨터; 및
    상기 하나 이상의 컴퓨터와 상호동작 가능하게 결합된 하나 이상의 컴퓨터 메모리 디바이스로서, 상기 하나 이상의 컴퓨터에 의해 실행될 때, 보안 위험을 감소시키기 위해 제3자 애플리케이션을 우회함으로써 현재 애플리케이션에서 접근성 기능을 구현하는 동작들을 수행하는 하나 이상의 명령어가 저장된 유형의(tangible) 비일시적 머신 판독가능 매체를 가지는, 상기 하나 이상의 컴퓨터 메모리 디바이스를 포함하고,
    상기 동작들은,
    디바이스에 설치된 제3자 애플리케이션에 의해, 접근성 기능을 제공하는 동작;
    현재 애플리케이션에 의해, 입력 제어 유닛을 호출하라는 요청을 수신하는 동작;
    상기 입력 제어 유닛을 호출하는 동작;
    상기 입력 제어 유닛을 사용하여 상기 접근성 기능에 대응하는 이벤트가 트리거되는지 여부를 결정하는 동작 - 상기 접근성 기능은 상기 제3자 애플리케이션에 의해 제공됨 - ;
    상기 입력 제어 유닛을 사용하여 상기 접근성 기능에 대응하는 이벤트가 트리거된다고 결정하는 것에 응답하여, 상기 이벤트에 대응하는 서비스 피드백 명령을 결정하는 동작;
    상기 디바이스의 접근성 기능 엔진을 호출함으로써 상기 제3자 애플리케이션을 우회하는 동작 - 상기 접근성 기능 엔진은 상기 디바이스의 운영 체제를 우회하고, 상기 운영 체제는 상기 제3자 애플리케이션에 의해 제공된 접근성 서비스 및 시스템 접근성 관리자를 포함함 - ; 및
    상기 서비스 피드백 명령에 기초하여 상기 접근성 기능 엔진을 사용하여 상기 접근성 기능을 구현하는 동작을 포함하는 것인, 컴퓨터 구현 시스템.
KR1020197013117A 2016-10-08 2017-09-26 애플리케이션에서 지원 기능을 실현하기 위한 방법 및 디바이스 KR102193531B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201610878439.3 2016-10-08
CN201610878439.3A CN106886721B (zh) 2016-10-08 2016-10-08 一种在应用中实现辅助功能的方法及装置
PCT/CN2017/103379 WO2018064938A1 (zh) 2016-10-08 2017-09-26 一种在应用中实现辅助功能的方法及装置

Publications (2)

Publication Number Publication Date
KR20190061061A KR20190061061A (ko) 2019-06-04
KR102193531B1 true KR102193531B1 (ko) 2020-12-23

Family

ID=59175722

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197013117A KR102193531B1 (ko) 2016-10-08 2017-09-26 애플리케이션에서 지원 기능을 실현하기 위한 방법 및 디바이스

Country Status (12)

Country Link
US (1) US10664160B2 (ko)
EP (1) EP3525128B1 (ko)
JP (1) JP6797293B2 (ko)
KR (1) KR102193531B1 (ko)
CN (2) CN106886721B (ko)
ES (1) ES2849175T3 (ko)
MY (1) MY196277A (ko)
PH (1) PH12019500762B1 (ko)
PL (1) PL3525128T3 (ko)
SG (2) SG11201903124VA (ko)
TW (1) TW201814442A (ko)
WO (1) WO2018064938A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106886721B (zh) 2016-10-08 2020-03-13 阿里巴巴集团控股有限公司 一种在应用中实现辅助功能的方法及装置
CN116860420B (zh) * 2023-09-05 2024-03-01 荣耀终端有限公司 事件处理方法、可读存储介质和电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130229377A1 (en) * 2010-02-26 2013-09-05 Apple Inc. Accessory protocol for touch screen device accessibility
US20160077793A1 (en) * 2014-09-15 2016-03-17 Microsoft Corporation Gesture shortcuts for invocation of voice input

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030098891A1 (en) * 2001-04-30 2003-05-29 International Business Machines Corporation System and method for multifunction menu objects
JP2003030596A (ja) * 2001-07-13 2003-01-31 Hitachi Ltd 論理チャネル管理機能付き記憶装置
JP3838193B2 (ja) * 2002-11-27 2006-10-25 ブラザー工業株式会社 文章読み上げ装置、同装置のためのプログラム及び記録媒体
US8233592B2 (en) * 2003-11-10 2012-07-31 Nuance Communications, Inc. Personal home voice portal
CN101246020B (zh) * 2008-03-14 2011-05-25 深圳市凯立德科技股份有限公司 语音播报装置、使用了此装置的导航系统及其采用的方法
KR20110014249A (ko) * 2010-02-09 2011-02-10 김규천 카테고리별 액세스 제어 방법 및 이를 채용한 전자 장치
EP2388726B1 (en) * 2010-05-18 2014-03-26 Kaspersky Lab, ZAO Detection of hidden objects in a computer system
CN102075629A (zh) * 2011-01-17 2011-05-25 惠州Tcl移动通信有限公司 一种移动通讯设备及其通话持续时间提示方法
KR101851239B1 (ko) * 2011-11-08 2018-04-23 삼성전자 주식회사 휴대단말기의 이미지 표현장치 및 방법
US8813218B2 (en) * 2012-02-14 2014-08-19 Janus Technologies, Inc. Security-enhanced computer systems and methods
US20130212478A1 (en) 2012-02-15 2013-08-15 Tvg, Llc Audio navigation of an electronic interface
KR101895818B1 (ko) * 2012-04-10 2018-09-10 삼성전자 주식회사 단말기에서 전자책과 연관된 피드백 제공 방법 및 장치
CN103377209A (zh) * 2012-04-20 2013-10-30 阿里巴巴集团控股有限公司 语音辅助浏览网页的方法和终端
JP6242040B2 (ja) * 2012-06-27 2017-12-06 京セラ株式会社 電子機器、制御方法、及び制御プログラム
CN103631506B (zh) * 2012-08-24 2018-09-04 腾讯科技（深圳）有限公司 基于终端的阅读方法及相应的终端
CN103106031B (zh) * 2013-01-22 2016-03-23 小米科技有限责任公司 一种移动终端的操作方法及装置
CN104144239B (zh) * 2013-09-25 2017-11-28 腾讯科技（深圳）有限公司 一种语音辅助通讯方法和装置
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9323518B1 (en) * 2014-07-29 2016-04-26 Symantec Corporation Systems and methods for modifying applications without user input
CN104461346B (zh) * 2014-10-20 2017-10-31 天闻数媒科技（北京）有限公司 一种视障人士触控屏幕的方法、装置及智能触屏移动终端
CN104484193A (zh) * 2014-11-20 2015-04-01 乐视网信息技术（北京）股份有限公司 一种快速启动应用程序的方法和装置
CN105023086A (zh) * 2015-01-07 2015-11-04 泰华智慧产业集团股份有限公司 一种基于云计算的数字城市管理数据共享系统
CN204422993U (zh) * 2015-03-09 2015-06-24 陈映坤 一种儿童智能手表
CN106886721B (zh) * 2016-10-08 2020-03-13 阿里巴巴集团控股有限公司 一种在应用中实现辅助功能的方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130229377A1 (en) * 2010-02-26 2013-09-05 Apple Inc. Accessory protocol for touch screen device accessibility
US20160077793A1 (en) * 2014-09-15 2016-03-17 Microsoft Corporation Gesture shortcuts for invocation of voice input

Also Published As

Publication number Publication date
PH12019500762A1 (en) 2019-11-11
CN106886721B (zh) 2020-03-13
EP3525128B1 (en) 2020-11-04
EP3525128A4 (en) 2019-10-02
MY196277A (en) 2023-03-24
EP3525128A1 (en) 2019-08-14
SG11201903124VA (en) 2019-05-30
PH12019500762B1 (en) 2019-11-11
US10664160B2 (en) 2020-05-26
TW201814442A (zh) 2018-04-16
KR20190061061A (ko) 2019-06-04
CN111241588B (zh) 2020-11-10
WO2018064938A1 (zh) 2018-04-12
PL3525128T3 (pl) 2021-07-05
ES2849175T3 (es) 2021-08-16
CN106886721A (zh) 2017-06-23
US20190235753A1 (en) 2019-08-01
CN111241588A (zh) 2020-06-05
JP2019531555A (ja) 2019-10-31
SG10202102909PA (en) 2021-05-28
JP6797293B2 (ja) 2020-12-09

Similar Documents

Publication Publication Date Title
CN106020943B (zh) 应用程序双开启方法及装置
KR102078753B1 (ko) 화면 구성 방법 및 그 전자 장치
TWI705348B (zh) 服務調用方法及裝置
US11818282B2 (en) Non-verbal sensitive data authentication
CN106130970B (zh) 应用访问控制方法及装置
US10867065B2 (en) Secure voice communication method and device based on instant communication
KR20150080578A (ko) 주소록에 플러그인을 추가하는 방법, 장치, 기기, 프로그램 및 기록매체
CN112765655B (zh) 一种基于隐私数据外发的管控方法及装置
JP2020504356A (ja) 決済アプリケーション分離方法および装置、ならびに端末
KR102193531B1 (ko) 애플리케이션에서 지원 기능을 실현하기 위한 방법 및 디바이스
CN107533596A (zh) 指纹识别方法及移动终端
CN107423146B (zh) 控制应用程序相互调用的方法、装置及系统
US9697341B1 (en) Method of enhanced account authentication management integrated with real time script shifting
US10599878B2 (en) Using decoy icons to prevent unwanted user access to applications on a user computing device
CN108132816B (zh) 应用中实现本地框架层调用的方法和装置
US9258286B1 (en) Systems and methods for communications channel authentication
US9736176B2 (en) System and method for detecting security exposures of VOIP devices
US20140359147A1 (en) Systems and methods of communicating via a web browser
CN109145572A (zh) 用户认证方法、装置和存储介质以及电子设备
KR102042815B1 (ko) 전자 장치에서 시간 정보를 공유하기 위한 장치 및 방법
CN111240868B (zh) 实例处理与调用方法、设备、系统及存储介质
KR102031810B1 (ko) 어플리케이션서비스 기반 서비스메뉴 제공 시스템 및 그 방법, 그리고 이에 적용되는 장치
CN111008375B (zh) 一种数据保护方法及装置
CN115242767B (zh) 信息交互追踪方法及相关设备
US20230216912A1 (en) Page Display Method and Electronic Device

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
N231 Notification of change of applicant
GRNT Written decision to grant