KR20200090785A - 입력 조작 처리 방법, 처리 장치 및 컴퓨터 판독가능 저장 매체 - Google Patents

입력 조작 처리 방법, 처리 장치 및 컴퓨터 판독가능 저장 매체 Download PDF

Info

Publication number
KR20200090785A
KR20200090785A KR1020207014913A KR20207014913A KR20200090785A KR 20200090785 A KR20200090785 A KR 20200090785A KR 1020207014913 A KR1020207014913 A KR 1020207014913A KR 20207014913 A KR20207014913 A KR 20207014913A KR 20200090785 A KR20200090785 A KR 20200090785A
Authority
KR
South Korea
Prior art keywords
input
input event
event
external
touch screen
Prior art date
Application number
KR1020207014913A
Other languages
English (en)
Inventor
쿤샤오 마
Original Assignee
상하이 종리안 테크놀로지스 엘티디 씨오
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 상하이 종리안 테크놀로지스 엘티디 씨오 filed Critical 상하이 종리안 테크놀로지스 엘티디 씨오
Publication of KR20200090785A publication Critical patent/KR20200090785A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/542—Event management; Broadcasting; Multicasting; Notifications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04162—Control or interface arrangements specially adapted for digitisers for exchanging data with external devices, e.g. smart pens, via the digitiser sensing hardware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명에서는 입력 조작 처리 방법, 처리 장치 및 컴퓨터 판독가능 저장 매체를 제공하는 바, 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 상기 입력 조작 처리 방법에는 하기 단계가 포함되는 바, 즉 하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하며; 상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지하며; 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였을 때, 상기 응용 프로그램이 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하며; 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환하며; 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅하는 것이다. 상기 기술방안을 실시한 후, 외부 입력 장치 또는 외부 입력 장치와 터치스크린을 결합시키는 방식을 사용하여 스마트 단말에 대하여 조작을 직할 수 있어, 입력 조작의 유연성을 향상시키고, 사용자 체험을 향상시킬 수 있다.

Description

입력 조작 처리 방법, 처리 장치 및 컴퓨터 판독가능 저장 매체
본 발명은 스마트 단말 입력 처리 분야에 관한 것으로서, 특히 입력 조작 처리 방법, 처리 장치 및 컴퓨터 판독가능 저장 매체에 관한 것이다.
현재 스마트폰, 태블릿 PC 등 스마트 단말, 특히 안드로이드 시스템(Android System)을 기반으로 하는 스마트 단말의 응용이 날로 보편화되고 있고, 제3자들은 해당 운영시스템의 프레임워크 상에서 여러 가지 응용 수요를 만족시키는 응용 프로그램, 즉 APP를 개발한다. 이러한 응용 프로그램은 왕왕 사용자와 인간-기계 상호작용을 진행하여야 하는 바, 즉 사용자의 입력 조작을 수신하는 것으로서, 주요하게는 상기 스마트 단말의 터치스크린이 터치 조작을 수신하고, 게임 등 외부 입력 장치를 연결하여야 하는 응용 프로그램은 조작의 대상이 다름에 따라 외부 입력 이벤트, 터치스크린 입력 이벤트 등 서로 다른 입력 이벤트가 발생한다.
도1을 참조하면, 이는 안드로이드 운영시스템의 입력 이벤트에 대한 처리 흐름 블럭도로서, 안드로이드 운영시스템(Android) 하의 각 계층을 볼 수 있고, 그 중에서 응용 계층(Application)에는 루트 뷰 객체(ViewRootimpl)가 포함되며, 루트 뷰 객체 내에는 또한 윈도우 입력 이벤트 수신기(WindowinputEventReceiver)가 포함되며; 프레임워크 계층(Framework)에는 입력 이벤트 핑거(Input Flinger)가 포함되고, 입력 이벤트 핑커에는 또한 입력 배분기(Input Dispatcher)와 입력 리더(Input Reader)가 포함되며; 입력 장치 계층(Input Device)에는 조이스틱(Joystick)과 터치스크린(Touch Screen)이 포함된다. 입력 조작이 발생할 때, 입력 장치 계층으로부터 입력 이벤트를 형성하여 응용 계층 중의 윈도우 입력 이벤트 수신기까지 층층이 리포팅한다. 현재의 안드로이드 운영시스템은 조이스틱(Joystick) 등 외부 입력 장치 접속을 지원하고, 접속 후의 외부 입력 장치는 응용 프로그램으로 외부 입력 이벤트를 송신할 수 있으며, 만일 응용 프로그램이 외부 입력 이벤트에 대하여 전문 처리를 진행하지 않는다면, 기본 규칙에 의하여 외부 입력 이벤트를 진행하는 바, 즉 도1 중의 윈도우 입력 이벤트 수신기가 이러한 이벤트를 포기하고 처리를 진행하지 않으며, 다시 말하면 응용 프로그램은 단지 터치스크린(Touch Screen)이 수신한 입력 조작만 식별할 수 있고, 외부 입력 장치가 수신한 입력 조작을 식별할 수 없다.
도2를 참조하면, 이는 종래 기술 중의 외부 입력 이벤트 및 터치스크린 입력 이벤트에 대한 처리 흐름 블럭도이다. 응용 프로그램이 외부 입력 장치가 수신한 입력 조작을 식별하도록 하기 위하여, 반드시 외부 입력 이벤트와 터치스크린 이벤트 간의 맵핑 관계를 구성하여야 한다. 구체적으로 말하면, 종래 기술에는 스마트 단말 운영시스템 프레임워크 계층에 위치하는 하나의 입력 이벤트 전환기(Event Translator)를 구비하는 바, 해당 입력 이벤트 전환기는 입력 장치 계층으로부터 외부 입력 장치(예를 들면 조이스틱)의 외부 입력 이벤트를 수신한 후, 해당 외부 입력 이벤트를 터치스크린 이벤트로 전환하여, 입력 이벤트 핑커로 집계시킨 후 다시 통일적으로 응용 계층의 윈도우 입력 이벤트 수신기로 리포팅한다. 하지만 응용 계층에 있어서, 외부 입력 장치가 수신한 조작이든 아니면 터치스크린이 수신한 조작이든, 응용 프로그램이 수신하는 것은 모두 터치스크린 이벤트이고, 해당 이벤트가 터치스크린이 발생시킨 것인지 아니면 외부 입력 장치가 발생시킨 것인지 구분할 수 없고, 나아가 외부 이력 장치와 터치스크린을 동시에 사용할 수 없어, 사용자 체험에 영향을 미친다.
그러므로 응용 프로그램의 서로 다른 입력 이벤트에 대하여 식별을 진행하는 것을 구현하여, 사용자들이 동시에 터치스크린 조작과 외부 입력 장치 조작을 진행하는 수요를 만족시켜야 한다.
본 발명에서는 외부 입력 장치와 터치스크린이 동시에 입력 조작을 진행하는 것을 지원하는 입력 조작 처리 방법을 제공한다.
본 발명에서는 입력 조작 처리 방법을 제공하는 바, 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 하기 단계가 포함되는 바, 즉
S101: 하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하며;
S102: 상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지하며;
S103: 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였을 때, 상기 응용 프로그램이 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하며;
S104: 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환하며;
S105: 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅하는 것이다.
바람직하게는, S101 단계에서, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며; 상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응된다.
바람직하게는, S104 단계에는,
S104-1: 상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시키며;
S104-2: 상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시키는 것이 포함된다.
바람직하게는, S102 단계에서, 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신한다.
바람직하게는, S101 단계에서, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며; S103 단계에서, 상기 응용 프로그램이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별한다.
본 발명에서는 또한 입력 조작 처리 장치를 제공하는 바, 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 상기 입력 조작 처리 장치에는,
하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하는 사전 설정 모듈;
상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지하는 탐지 모듈;
상기 탐지 모듈 및 사전 설정 모듈과 연결되고, 상기 탐지 모듈이 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였다는 것을 탐지할 때, 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하는 식별 모듈;
상기 식별 모듈과 연결되고, 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환하는 전환 모듈;
상기 전환 모듈과 연결되고, 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅하는 리포팅 모듈이 포함된다.
바람직하게는, 상기 사전 설정 모듈이 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정할 때, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며; 상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응된다.
바람직하게는, 상기 전환 모듈에는,
상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시키는 제1 전환 유닛;
상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시키는 제2 전환 유닛이 포함된다.
바람직하게는, 상기 탐지 모듈이 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신하는지 여부를 탐지한다.
바람직하게는, 상기 사전 설정 모듈이 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정할 때, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며; 상기 식별 모듈이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별한다.
본 발명에서는 또한 컴퓨터 판독가능 저장 매체를 제공하는 바, 여기에는 컴퓨터 프로그램이 저장되어 있으며, 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때 하기 단계를 구현하는 바, 즉
S106: 하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하며;
S107: 상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지하며;
S108: 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였을 때, 상기 응용 프로그램이 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하며;
S109: 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환하며;
S110: 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅하는 것이다.
바람직하게는, S106 단계에서, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며; 상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응된다.
바람직하게는, S109 단계에는,
S109-1: 상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시키며;
S109-2: 상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시키는 것이 포함된다.
바람직하게는, S107 단계에서, 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신한다.
바람직하게는, S106 단계에서, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며; S108 단계에서, 상기 응용 프로그램이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별한다.
상기 기술 방안을 사용한 후, 종래의 기술에 비하여, 하기 유익한 효과를 가진다.
1. 외부 입력 장치 또는 외부 입력 장치와 터치스크린을 결합시키는 방식을 사용하여 스마트 단말에 대하여 조작을 직할 수 있어, 입력 조작의 유연성을 향상시키고, 사용자 체험을 향상시킬 수 있으며;
2. 단지 응용 계층에서만 코드 수정을 진행하여, 서로 다른 운영시스템 버전에 대하여 비교적 훌륭한 호환성을 가진다.
도1은 종래 기술 중의 안드로이드 시스템의 입력 이벤트 및 터치스크린 입력 이벤트에 대한 처리 흐름 블럭도.
도2는 종래 기술 중의 외부 입력 이벤트 및 터치스크린 입력 이벤트에 대한 처리 흐름 블럭도.
도3은 본 발명의 하나의 바람직한 실시예 중의 입력 조작 처리 방법에 부합되는 흐름 도면.
도4는 도3 중의 S104 단계의 흐름 도면.
도5는 본 발명의 하나의 바람직한 실시예 중의 입력 조작 처리 장치에 부합되는 구조 블럭도.
도6은 도5 중의 전환 모듈의 구조 블럭도.
도7은 본 발명의 하나의 바람직한 실시예 중의 컴퓨터 판독가능 저장 매체 중의 컴퓨터 프로그램의 흐름 도면.
도8은 도7 중의 S109 단계의 흐름 도면.
도9는 본 발명의 하나의 바람직한 실시예 중의 안드로이드 운영시스템을 기반으로 하는 응용 프로그램에 부합되는 블럭도.
아래, 도면과 구체적인 실시예를 참조하여 진일보로 본 발명의 장점을 설명하도록 한다.
여기에서는 상세하게 예시적 실시예를 설명할 것이며, 여시는 도면에 표시되어 있다. 아래의 설명이 도면과 연관될 때, 다른 표시가 있는 외, 다른 도면 중의 같은 숫자는 같거나 유사한 요소를 표시한다. 하기 예시적 실시예에서 설명하는 실시 방식은 본 출원과 일치한 모든 실시 방식을 대표하는 것이 아니다. 반대로, 이는 단지 특허청구범위에 상세하게 기재된, 본 출원의 일부 방면과 일치한 장치와 방법의 예일 뿐이다.
본 출원에 사용된 용어는 단지 특정 실시예를 설명하기 위한 목적이고, 본 출원을 제한하는 것이 아닌 것을 이해할 것이다. 본 출원과 첨부된 특허청구범위에 사용된 단수 형식의 “한 가지”, “상기”와 “해당”도 문맥 상에서 명확하게 기타 뜻을 표시하지 않은 한, 복수의 형식이 포함된다. 또한 본 출원에 사용된 용어 “및/또"는 하나 또는 복수의 관련된 나열 항목을 포함하는 임의의 또는 모든 가능한 조합을 가리키는 것을 이해할 것이다.
본 출원이 용어 제1, 제2, 제3 등을 사용하여 여러 가지 정보를 설명할 수 있지만, 이러한 정보는 이러한 용어의 제한을 받지 않는다. 이러한 용어는 단지 동일한 유형의 정보를 서로 구분하기 위한 것이다. 예를 들면, 본 출원의 범위를 벗어나지 않는 상황 하에서, 제1 정보는 또한 제2 정보라 칭할 수 있고, 이와 유사하게, 제2 정보도 또한 제1 정보라 칭할 수 있다. 비록 문맥에 의하여 결정되기는 하지만, 여기에서 사용되는 단어”만일”은 “... 때” 또는 “... 할 때” 또는 “... 결정한 것에 응답하여”로 해석될 수 있다.
본 발명의 설명에서, 용어 "세로 방향", "가로 방향", "상", "하", "전", "후", "좌", "우", "수직", "수평", "꼭대기", "저부", "내", "외" 등이 지시하는 방향 또는 위치 관계는 도면에 도시된 방향 또는 위치 관계를 기초로 한 것으로서, 단지 본 발명에 대한 설명의 편리를 위하고 설명을 간략화하기 위한 것일 뿐 해당 장치 또는 소자가 반드시 특정 방향을 구비하고 특정 방향으로 구성되고 조작되어야 함을 뜻하는 것이 아니기 때문에, 본 발명에 대해 한정하는 것으로 이해되어서는 안된다.
본 발명의 설명에서, 다른 규정과 제한이 있는 외, 설명하여야 할 바로는, 용어 “설치”, “상호 연결”, “연결”은 광의적으로 이해하여야 하는 바, 예를 들면, 기계적 연결 또는 전기적 연결일 수 있고, 또한 두 소자 내부의 연통일 수 있으며, 또한 직접 상호 연결일 수 있으며, 또한 중간 매개체를 통하여 간접적으로 연결될 수 있고, 당업계의 기술자로 말하면, 구체적인 상황에 의거하여 상기 용어의 구체적인 뜻을 이해할 수 있다.
차후의 설명에서, 소자를 표시하기 위한 예를 들면 “모듈”, “부품” 또는 “유닛” 등 접미사를 사용하는 것은 단지 본 발명의 설명의 편리를 위한 것일 뿐, 그 자체는 특정된 뜻을 갖고 있지 않다. 그러므로, “모듈”과 “부품”은 혼합되어 사용될 수 있다.
도3을 참조하면, 이는 본 발명의 하나의 바람직한 실시예 중의 입력 조작 처리 방법에 부합되는 흐름 도면으로서, 상기 입력 조작 처리 방법은 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 하기 단계가 포함된다.
S101: 하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정한다.
입력 장치가 다름에 따라, 여러 가지 입력 장치가 수신하는 입력 조작도 다른 바, 예를 들면 상기 스마트 단말의 터치스크린은 터치 조작을 수신할 수 있고, 상기 스마트 단말의 키는 누름 조작을 수신할 수 있으며, 만일 상기 스마트 단말이 조이스틱, 외부 키보드 등 외부 입력 장치를 연결하였다면, 외부 입력 조작을 수신할 수 있다. 상기 입력 이벤트는 상기 스마트 단말 내에 형성된 소프트웨어 임무로서, 상기 응용 프로그램은 운영시스템 프레임워크 계층으로부터 입력 이벤트를 수신하고 또한 입력 이벤트에 대하여 처리를 진행할 수 있는 바, 예를 들면 입력 이벤트에 관련된 컴퓨터 임무에 대하여 트리거를 진행하거나, 또는 디스플레이 화면에 입력 이벤트의 결과를 디스플레이한다. 서로 다른 입력 조작은 서로 다른 입력 이벤트가 대응되고, 각 입력 이벤트가 소프트웨어가 그 차별점을 식별할 수 있다.
본 단계는 상기 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하는 바, 즉 서로 다른 입력 이벤트에 대응되는 식별 아이디 및 그에 대응되는 입력 조작 종류를 사전 저장한다. 상기 응용 프로그램은 상기 스마트 단말 운영시스템의 응용 계층에 구비되고, 게임, 원격 조작 소프트웨어 등 인간-기계 상호작용이 필요한 응용 소프트웨어일 수 있다. 상기 응용 프로그램이 시작될 때, Hook 기술을 통하여 외부 입력 이벤트와 터치스크린 입력 이벤트의 맵핑 관계를 응용 프로그램에 로딩시킨다. Hook의 원래의 뜻은 갈고리로서, 컴퓨터 소프트웨어 개발에서, Hook 기술은 어느 한 프로그램의 인터페이스에 대하여 모니터링을 진행하고, 또한 해당 인터페이스의 데이터를 가로채 처리하는 것을 가리키는 바, 예를 들면 게임 치팅 프로그램이 바로 전형적인 Hook 기술 응용이다. 본 실시예에서는 Hook 기술을 통하여 상기 응용 프로그램 내에 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하는 바, 구체적인 구현 수단은 원래의 응용 프로그램 중의 입력 이벤트를 처리하는 클래스 또는 방법에 대하여 교체를 진행하고, 자체 정의된 동일한 명칭의 클래스 또는 방법 중에 상기 맵핑 관계를 사전 설정하여, 입력 이벤트 인터페이스가 입력 이벤트를 리포팅하는 것을 모니터링할 때 자체 정의된 클래스 또는 방법을 통하여 입력 이벤트에 대하여 처리를 진행한다.
S102: 상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지한다.
본 단계에서, 상기 응용 프로그램의 입력 이벤트 인터페이스에 대하여 모니터링을 진행하여, 상기 입력 이벤트 인터페이스가 임의의 상기 S101 단계에서 사전 설정된 입력 이벤트를 수신하였는지 여부를 탐지한다. 상기 입력 이벤트 인터페이스는 윈도우 입력 이벤트 수신기일 수 있고, 상기 운영시스템의 프레임워크 계층으로부터 리포팅하는 입력 이벤트를 수신할 수 있다. 상기 입력 이벤트 인터페이스가 입력 이벤트를 수신할 때, 반드시 데이터 흐름 또는 관련 아이디 비트의 변화를 일으킬 것이기 때문에, 입력 이벤트를 수신하는 행위를 알 수 있다. 안드로이드 운영시스템을 예로 들면, 본 단계에서 응용 프로그램이 입력 이벤트 인터페이스 WindowInputEventReceiver 클래스 중의 onInputEvent를 취득하는 것을 모니터링하여, 프레임워크 계층이 리포팅한 입력 이벤트를 가로챈다.
S103: 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였을 때, 상기 응용 프로그램이 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별한다.
S102 단계에서 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신한 것을 탐지할 때, 본 단계를 실행한다. 본 단계에서, 상기 응용 프로그램이 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하고, 서로 다르 종류의 입력 이벤트가 필연코 소프트웨어 데이터 상의 차이, 예를 들면 서로 다른 아이디 비트, 서로 다른 원소 변수 또는 서로 다른 속성 등 차이가 존재하고, 상기 차이가 이미 맵핑 관계로서 상기 S101 단계에서 상기 응용 프로그램 내에 사전 저장되었기 때문에, 상기 입력 이벤트에 대응되는 입력 조작을 식별할 수 있다.
S104: 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환한다.
단지 S103 단계를 통하여 서로 다른 종류의 입력 이벤트에 대하여 식별을 진행하는 것은 아직 상기 응용 프로그램의 서로 다른 입력 이벤트에 대한 처리를 구현하지 못했기 때문에, 또한 본 단계를 실행하여야 한다. 본 단계는 전환 조작을 진행하여, 상기 S103 단계에서 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환한다. 본 단계를 실행할 때, 상기 입력 이벤트에 대하여 수정을 진행하고, 수정하는 내용은 원소 변수, 속성 등 입력 이벤트 특성에 영향을 미치는 데이터이고, 또한 수정 후의 입력 이벤트가 기타 종류의 입력 이벤트와 공존할 수 있는 바, 예를 들면 외부 입력 장치가 리포팅한 외부 입력 이벤트에 대하여 전환을 진행한 후, 해당 이벤트는 터치스크린에 대응되는 터치스크린 입력 이벤트와 공정할 수 있으며, 즉 양자는 응용 프로그램에 대하여 구분할 수 있고, 또한 상응한 처리 조작을 진행할 수 있다.
S105: 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅한다.
본 단계에서는 S104 단계에서 전환한 후의 입력 이벤트를 리포팅하고, 상기 응용 프로그램 중의 기타 모델로 리포팅하는 바, 예를 들면 입력 이벤트에 대하여 관련된 데이터 계산을 진행하거나, 또는 상기 입력 이벤트의 결과를 디스플레이한다. 예를 들면 게임에서, 사용자가 조이스틱을 사용하여 조작 객체 이동에 대한 입력 조작을 진행하면, 해당 조작이 하나의 입력 이벤트를 형성한 후, 게임 프로그램은 반드시 해당 입력 이벤트에 대하여 분석을 진행하여, 조작 객체의 이동 거리를 산출하고, 또한 디스플레이 화면 상에 해당 조작 객체의 이동 효과를 디스플레이하는 바, 상기 과정에서, 반드시 전환 후의 입력 이벤트를 상기 응용 프로그램 중의 분석 및 디스플레이 관련 모듈로 리포팅하여야 한다. 본 실시예에서, Java 반사 기술을 통하여, 전환 후의 입력 이벤트를 onInputEvent 인터페이스를 통하여 송신한다. Java 반사 기술은 Java 반사 매커니즘을 기반으로 구현하는 바, 상기 Java 반사 매커니즘은 작동 과정에, 임의의 한 클래스에 대하여 모두 이 클래스의 모든 속성과 방법을 알 수 있으며; 임의의 한 객체에 대하여 모두 이의 임의의 방법과 속성을 호출 사용할 수 있으며; 이러한 동적으로 정보를 취득하고 또한 동적으로 객체 방법을 호출 사용하는 기능을 Java 언어의 반사 매커니즘이라고 하기 때문에, Java 언어는 또한 동적 언어라 칭한다. Java 반사 기술을 통하여, 전환 후의 입력 이벤트의 클래스의 속성 및 방법을 취득하고, 이어 해당 속성 및 방법을 onInputEvent 인터페이스를 통하여 상기 응용 프로그램 내의 기타 모듈로 송신한다.
상기 입력 조작 처리 방법의 진일보의 개선으로서, 상기 S101 단계에서, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며; 상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응된다. 본 개선 실시예는 진일보로 상기 입력 조작의 종류에 대하여 구분을 진행하여, 두 가지로 구분하는 바, 각각 상기 터치스크린이 수신한 터치 조작과 외부 입력 장치가 수신한 외부 입력 조작이다. 상응하게, 상기 두 가지 입력 조작은 서로 다른 입력 이벤트에 대응되는 바, 상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응되어, 응용 프로그램이 식별 및 처리를 진행하도록 한다.
도4를 참조하면, 이는 도3 중의 S104 단계의 흐름 도면으로서, S104 단계에는,
S104-1: 상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시키며;
S104-2: 상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시키는 것이 포함된다.
본 개선 실시예에서, 상기 입력 조작이 터치 조작 및 외부 입력 조작으로 구분된 기초 상에서, 상기 S104 단계에 대하여 진일보 한정하는 바, 상기 입력 이벤트 인터페이스가 수신한 입력 이벤트의 종류에 의하여, 입력 이벤트를 각각 제1 입력 이벤트 또는 제2 입력 이벤트로 전환한다. 상기 제1 입력 이벤트는 터치 조작에 관한 속성 또는 관련 파라미터를 나타낼 수 있고, 상기 제2 입력 이벤트는 외부 입력 조작에 관한 속성 또는 관련 파라미터를 나타낼 수 있어, 후속으로 상기 응용 프로그램 내 기타 모듈이 처리를 진행하는데 유리하다.
상기 입력 조작 처리 방법의 진일보의 개선으로서, S102 단계에서, 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신한다. 입력 이벤트가 안드로이드 운영시스템의 드라이버 계층으로부터 형성된 후 층층이 리포팅되기 때문에, 이론 상에서 드라이버 계층(Android Driver), 로컬 실행 라이브러리 계층(Android Native), 프레임워크 계층(Framework) 및 응용 계층(Application)의 임의의 계층에서 가로채어 처리를 진행할 수 있다. 운영시스템 업그레이드 시의 코드 이식 작업량을 감소시키기 위하여, 본 실시예에서 상기 입력 이벤트에 대한 수신, 탐지, 처리 과정을 모두 응용 계층에서 구현하기 때문에, 상기 프레임워크 계층으로부터 상기 입력 이벤트를 수신할 수 있으며, 이로써 운영시스템의 업그레이드든 아니면 서로 다른 버전의 운영시스템에 대한 코드 이식이든, 모두 프레임워크 계층 및 그 이하 각 계층의 코드를 건드릴 필요가 없기 때문에, 코드 이식 작업량을 감소시켰다.
상기 입력 조작 처리 방법의 진일보의 개선으로서, S101 단계에서, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며; S103 단계에서, 상기 응용 프로그램이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별한다. 본 개선 실시예는 상기 이력 이벤트의 식별 방식에 대하여 진일보로 한정하는 바, 즉 상기 입력 이벤트의 아이디 비트를 통하여 식별을 진행하기 때문에, 상기 맵핑 관계 중에 아이디 비트를 사전 설정하고, 또한 식별 단계에 사전 설정된 아이디 비트에 의하여 입력 이벤트의 식별을 진행하여야 한다.
도9를 참조하면, 이는 본 발명의 하나의 바람직한 실시예 중의 안드로이드 운영시스템을 기반으로 하는 응용 프로그램에 부합되는 블럭도로서, 도1에 비하여, 본 발명은 원래의 안드로이드 운영시스템 프레임워크 상에 방법 포착기(Method Hooker)를 증가하고, 상기 방법 포착기에는 또한 입력 이벤트 방법(OnInputEvent)이 포함되며, 상기 입력 이벤트 방법에는 또한 이벤트 전환기(Exchanger가 포함된다. S101 단계에서 상기 방법 포착기를 사전 설정하고, 그 내부의 입력 이벤트 방법은 입력 조작과 입력 이벤트의 맵핑 관계를 정의하며; S102 단계에서는 프레임워크 계층이 입력 이벤트를 응용 계층의 윈도우 입력 이벤트 수신기로 입력 이벤트를 리포팅하였는지 여부를 탐지하고, 상기 프레임워크 계층은 상기 입력 이벤트 인터페이스를 통하여 상기 입력 이벤트를 리포팅하며; S103 단계 및 S104 단계에서는 방법 포착기를 통하여 상기 윈도우 입력 이벤트 수신기 중의 입력 이벤트 방법에 대하여 교체를 진행하고, 상기 방법 포착기 중의 입력 이벤트 방법을 사용하여 상기 입력 이벤트에 대하여 식별 및 전환을 진행하며; S105 단계에서는 상기 방법 포착기 전환 후의 입력 이벤트를 입력 이벤트 큐(EnqueueInputEvent)로 리포팅한다.
도5를 참조하면, 이는 본 발명의 하나의 바람직한 실시예 중의 입력 조작 처리 장치(10)에 부합되는 구조 블럭도로서, 상기 입력 조작 처리 장치(10)는 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 하기 모듈이 포함된다.
-사전 설정 모듈(11)
상기 사전 설정 모듈(11)은 하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정한다. 상기 사전 설정 모듈(11)은 서로 다른 입력 이벤트에 대응되는 식별 아이디 및 그 대응되는 입력 조작 종류를 사전 저장하고, Hook 기술을 통하여 서로 다른 종류의 입력 이벤트와 입력 조작 간의 맵핑 관계를 응용 프로그램으로 로딩한다.
-탐지 모듈(12)
상기 탐지 모듈(12)은 상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지한다. 상기 탐지 모듈(12)은 실제상 모니터링 프로그램으로서, 상기 입력 이벤트 인터페이스에 대하여 모니터링을 진행하고, 데이터 흐름 또는 관련 아이디 비트의 변화에 의하여 입력 이벤트 리포팅이 존재하는지 여부를 식별한다.
-식별 모듈(13)
상기 식별 모듈(13)은 상기 탐지 모듈(12) 및 사전 설정 모듈(11)과 연결되고, 상기 탐지 모듈(12)이 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였다는 것을 탐지할 때, 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별한다. 상기 식별 모듈(13)은 상기 사전 설정 모듈(11)을 통하여 상기 맵핑 관계를 취득하고, 또한 상기 입력 이벤트에 대하여 식별을 진행한다.
-전환 모듈(14)
상기 전환 모듈(14)은 상기 식별 모듈(13)과 연결되고, 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환한다. 상기 전환 모듈(14)은 상기 식별 모듈(13)의 식별 결과에 의하여 상기 입력 이벤트에 대하여 전환을 진행하는 바, 서로 다른 입력 이벤트에 대하여 그 전환 결과도 다르고, 최종적으로 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환되며, 즉 전환 후의 서로 다른 입력 이벤트는 처리 시 구분할 수 있다.
-리포팅 모듈(15)
상기 리포팅 모듈(15)은 상기 전환 모듈(14)과 연결되고, 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅한다. 상기 리포팅 모듈(15)은 상기 전환 모듈(14)로부터 전환 후의 입력 이벤트를 취득하고, 또한 상기 응용 프로그램 내의 기타 모듈로 리포팅하여 후속 처리를 진행한다.
상기 입력 조작 장치(10)의 진일보의 개선으로서, 상기 사전 설정 모듈(11)이 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정할 때, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며; 상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응된다.
도6을 참조하면, 이는 도5 중의 전환 모듈(14)의 구조 블럭도로서, 상기 전환 모듈(14)에는 하기 유닛이 포함된다.
-제1 전환 유닛(141)
상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 제1 전환 유닛(141)이 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시킨다.
-제2 전환 유닛(142)
상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 제2 전환 유닛(142)이 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시킨다.
서로 다른 종류의 입력 이벤트의 클래스 및 방법의 속성이 모두 다르기 때문에, 상기 제1 전환 유닛(141) 및 제2 전환 유닛(142)을 통하여 각각 터치스크린 입력 이벤트 및 외부 입력 이벤트에 대하여 전환을 진행하여, 대응되는 제1 입력 이벤트 및 제2 입력 이벤트를 형성한다.
상기 입력 조작 장치(10)의 진일보의 개선으로서, 상기 탐지 모듈(12)이 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신하는지 여부를 탐지한다. 본 개선 실시예에서, 상기 탐지 모듈(12)이 상기 프레임워크 계층이 리포팅한 입력 이벤트에 대하여 모니터링을 진행한다.
상기 입력 조작 장치(10)의 진일보의 개선으로서, 상기 사전 설정 모듈(11)이 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정할 때, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며; 상기 식별 모듈(13)이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별한다.
도7을 참조하면, 이는 본 발명의 하나의 바람직한 실시예 중의 컴퓨터 판독가능 저장 매체 중의 컴퓨터 프로그램의 흐름 도면으로서, 상기 컴퓨터 판독가능 저장 매체에는 컴퓨터 프로그램이 저장되어 있으며, 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때 하기 단계를 구현하는 바, 즉
S106: 하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하며;
S107: 상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지하며;
S108: 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였을 때, 상기 응용 프로그램이 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하며;
S109: 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환하며;
S110: 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅하는 것이다.
상기 컴퓨터 프로그램의 진일보의 개선으로서, S106 단계에서, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며; 상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응된다.
도8를 참조하면, 이는 도7 중의 S109 단계의 흐름 도면으로서, 상기 S104 단계에는,
S109-1: 상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시키며;
S109-2: 상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시키는 것이 포함된다.
상기 컴퓨터 프로그램의 진일보의 개선으로서, S107 단계에서, 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신한다.
상기 컴퓨터 프로그램의 진일보의 개선으로서, S106 단계에서, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며; S108 단계에서, 상기 응용 프로그램이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별한다.
상기 컴퓨터 프로그램의 방법 단계는 본 발명 중의 입력 조작 처리 방법의 구현 방식과 일치하며, 상세한 설명을 생략하도록 한다.
유의하여야 할 바로는, 본 발명의 실시예는 비교적 바람직한 실시성을 갖고 있고, 또한 본 발명에 대하여 아무런 형식의 제한을 진행하지 말아야 하며, 해당 분야에 익숙한 어떠한 기술자라도 상기에 개시된 기술 내용을 이용하여 동등한 유효 실시예로 변경 또는 동등화시킬 수 있으나, 본 발명의 기술 방안의 내용을 벗어나지 않고, 본 발명의 기술 본질에 의거하여 상기 실시예에 대하여 진행하는 어떠한 수정 또는 동등한 변화 및 수정이라도, 모두 여전히 본 발명의 기술 방안의 범위 내에 속한다.
10-입력 조작 처리 장치; 11-사전 설정 모듈; 12-탐지 모듈; 13-식별 모듈; 14-전환 모듈; 15-리포팅 모듈; 141-제1 전환 유닛; 142-제2 전환 유닛.

Claims (15)

  1. 입력 조작 처리 방법에 있어서, 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 하기 단계가 포함되는 바, 즉
    S101: 하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하며;
    S102: 상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지하며;
    S103: 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였을 때, 상기 응용 프로그램이 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하며;
    S104: 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환하며;
    S105: 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅하는 것인 것을 특징으로 하는 입력 조작 처리 방법.
  2. 제1항에 있어서,
    S101 단계에서, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며;
    상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응되는 것을 특징으로 하는 입력 조작 처리 방법.
  3. 제2항에 있어서,
    S104 단계에는,
    S104-1: 상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시키며;
    S104-2: 상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시키는 것이 포함되는 것을 특징으로 하는 입력 조작 처리 방법.
  4. 제1항 내지 제3항의 어느 한 항에 있어서,
    S102 단계에서, 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신하는 것을 특징으로 하는 입력 조작 처리 방법.
  5. 제1항 내지 제3항의 어느 한 항에 있어서,
    S101 단계에서, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며;
    S103 단계에서, 상기 응용 프로그램이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하는 것을 특징으로 하는 입력 조작 처리 방법.
  6. 입력 조작 처리 장치에 있어서, 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고,
    하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하는 사전 설정 모듈;
    상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지하는 탐지 모듈;
    상기 탐지 모듈 및 사전 설정 모듈과 연결되고, 상기 탐지 모듈이 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였다는 것을 탐지할 때, 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하는 식별 모듈;
    상기 식별 모듈과 연결되고, 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환하는 전환 모듈;
    상기 전환 모듈과 연결되고, 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅하는 리포팅 모듈이 포함되는 것을 특징으로 하는 입력 조작 처리 장치.
  7. 제6항에 있어서,
    상기 사전 설정 모듈이 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정할 때, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며;
    상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응되는 것을 특징으로 하는 입력 조작 처리 장치.
  8. 제7항에 있어서,
    상기 전환 모듈에는,
    상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시키는 제1 전환 유닛;
    상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시키는 제2 전환 유닛이 포함되는 것을 특징으로 하는 입력 조작 처리 장치.
  9. 제6항 내지 제8항의 어느 한 항에 있어서,
    상기 탐지 모듈이 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신하는지 여부를 탐지하는 것을 특징으로 하는 입력 조작 처리 장치.
  10. 제6항 내지 제8항의 어느 한 항에 있어서,
    상기 사전 설정 모듈이 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정할 때, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며;
    상기 식별 모듈이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하는 것을 특징으로 하는 입력 조작 처리 장치.
  11. 컴퓨터 프로그램이 저장되어 있는 컴퓨터 판독가능 저장 매체에 있어서, 하나의 스마트 단말이 수신하는 입력 조작을 처리하는데 적용되고, 상기 컴퓨터 프로그램이 프로세서에 의해 실행될 때 하기 단계를 구현하는 바, 즉
    S106: 하나의 응용 프로그램 내에 적어도 두 가지 입력 조작과 입력 이벤트의 맵핑 관계를 사전 설정하며;
    S107: 상기 응용 프로그램의 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였는지 여부를 탐지하며;
    S108: 상기 입력 이벤트 인터페이스가 임의의 입력 이벤트를 수신하였을 때, 상기 응용 프로그램이 상기 맵핑 관계를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하며;
    S109: 식별한 후의 입력 이벤트를 기타 종류의 입력 이벤트와 공존하는 입력 이벤트로 전환하며;
    S110: 기타 종류의 입력 이벤트와 공존하는 상기 입력 이벤트를 리포팅하는 것인 것을 특징으로 하는 컴퓨터 판독가능 저장 매체.
  12. 제11항에 있어서,
    S106 단계에서, 상기 입력 조작에는 상기 스마트 단말 터치스크린이 수신한 터치 조작 및 상기 스마트 단말과 연결된 외부 입력 장치가 수신한 외부 입력 조작이 포함되며;
    상기 터치 조작이 하나의 터치스크린 입력 이벤트에 대응되고, 상기 외부 입력 조작이 하나의 외부 입력 이벤트에 대응되는 것을 특징으로 하는 컴퓨터 판독가능 저장 매체.
  13. 제12항에 있어서,
    S109 단계에는,
    S109-1: 상기 입력 이벤트 인터페이스가 상기 터치스크린 입력 이벤트를 수신할 때, 상기 터치스크린 입력 이벤트를 상기 외부 입력 이벤트와 공존하는 제1 입력 이벤트로 전환시키며;
    S109-2: 상기 입력 이벤트 인터페이스가 상기 외부 입력 이벤트를 수신할 때, 상기 외부 입력 이벤트를 상기 터치스크린 입력 이벤트와 공존하는 제2 입력 이벤트로 전환시키는 것이 포함되는 것을 특징으로 하는 컴퓨터 판독가능 저장 매체.
  14. 제11 내지 제13항의 어느 한 항에 있어서,
    S107 단계에서, 상기 입력 이벤트 인터페이스가 상기 스마트 단말 운영시스템의 프레임워크 계층으로부터 상기 입력 이벤트를 수신하는 것을 특징으로 하는 컴퓨터 판독가능 저장 매체.
  15. 제11 내지 제13항의 어느 한 항에 있어서,
    S106 단계에서, 상기 맵핑 관계에 각 입력 이벤트의 아이디 비트가 포함되며;
    S108 단계에서, 상기 응용 프로그램이 상기 입력 이벤트 내의 아이디 비트를 통하여 상기 입력 이벤트에 대응되는 입력 조작을 식별하는 것을 특징으로 하는 컴퓨터 판독가능 저장 매체.
KR1020207014913A 2017-11-24 2018-10-24 입력 조작 처리 방법, 처리 장치 및 컴퓨터 판독가능 저장 매체 KR20200090785A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201711191433.X 2017-11-24
CN201711191433.XA CN108008992B (zh) 2017-11-24 2017-11-24 一种输入操作处理方法、处理装置及计算机可读存储介质
PCT/CN2018/111756 WO2019100898A1 (zh) 2017-11-24 2018-10-24 一种输入操作处理方法、处理装置及计算机可读存储介质

Publications (1)

Publication Number Publication Date
KR20200090785A true KR20200090785A (ko) 2020-07-29

Family

ID=62053415

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020207014913A KR20200090785A (ko) 2017-11-24 2018-10-24 입력 조작 처리 방법, 처리 장치 및 컴퓨터 판독가능 저장 매체

Country Status (6)

Country Link
US (1) US20200293385A1 (ko)
EP (1) EP3702913A4 (ko)
JP (1) JP2021504823A (ko)
KR (1) KR20200090785A (ko)
CN (1) CN108008992B (ko)
WO (1) WO2019100898A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108008992B (zh) * 2017-11-24 2020-08-18 南昌黑鲨科技有限公司 一种输入操作处理方法、处理装置及计算机可读存储介质
CN110750370B (zh) * 2019-10-17 2022-06-14 Oppo（重庆）智能科技有限公司 信息处理方法及装置、设备、存储介质
CN110898424B (zh) * 2019-10-21 2023-10-20 维沃移动通信有限公司 一种显示控制方法及电子设备
CN110865894B (zh) * 2019-11-22 2023-09-22 腾讯科技（深圳）有限公司 跨终端控制应用程序的方法及装置
CN111399739B (zh) * 2020-03-11 2022-04-19 努比亚技术有限公司 触摸事件转换处理方法、终端和计算机可读存储介质
CN112214264A (zh) * 2020-10-10 2021-01-12 交通运输部规划研究院 Ais交互操作处理方法及装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120100900A1 (en) * 2010-10-21 2012-04-26 Aibelive Co., Ltd Method for operating a mobile device to control a main Unit in playing a video game
CN103164265A (zh) * 2011-12-16 2013-06-19 盛乐信息技术（上海）有限公司 基于Linux系统的输入事件处理方法和系统
CN102508675B (zh) * 2011-12-28 2015-01-07 Tcl集团股份有限公司 基于android平台鼠标移动的响应处理方法及装置
CN102707882A (zh) * 2012-04-27 2012-10-03 深圳瑞高信息技术有限公司 虚拟图标触摸屏应用程序的操控转换方法及触摸屏终端
US20140121010A1 (en) * 2012-10-29 2014-05-01 Nishith Shah Method and system for video gaming using game-specific input adaptation
CN105477854B (zh) * 2014-12-19 2019-04-02 广州爱九游信息技术有限公司 应用于智能终端的手柄控制方法、装置及系统
CN105893067A (zh) * 2015-06-03 2016-08-24 福建创意嘉和软件有限公司 基于PC机实现运行Android系统应用的方法
CN106569829B (zh) * 2016-11-10 2020-11-20 北京小鸟看看科技有限公司 触摸屏工作模式切换实现方法、触摸屏装置和头戴式设备
CN106730820A (zh) * 2016-12-12 2017-05-31 苏州蜗牛数字科技股份有限公司 一种适配多种游戏手柄的方法及Android终端设备
CN107357560A (zh) * 2017-04-28 2017-11-17 阿里巴巴集团控股有限公司 交互处理方法及装置
CN108008992B (zh) * 2017-11-24 2020-08-18 南昌黑鲨科技有限公司 一种输入操作处理方法、处理装置及计算机可读存储介质

Also Published As

Publication number Publication date
WO2019100898A1 (zh) 2019-05-31
CN108008992B (zh) 2020-08-18
EP3702913A1 (en) 2020-09-02
JP2021504823A (ja) 2021-02-15
EP3702913A4 (en) 2021-08-04
CN108008992A (zh) 2018-05-08
US20200293385A1 (en) 2020-09-17

Similar Documents

Publication Publication Date Title
KR20200090785A (ko) 입력 조작 처리 방법, 처리 장치 및 컴퓨터 판독가능 저장 매체
CN110888615B (zh) 用于Android系统双屏异显的多输入设备交互方法、装置及介质
CN107102904B (zh) 基于混合应用程序的交互方法及装置
US9354919B2 (en) Method and device for loading android virtual machine application
CN103472996A (zh) 一种移动设备接收触控方法及设备
CN109947650B (zh) 脚本步骤处理方法、装置和系统
US20140361991A1 (en) Method and electronic device for controlling mouse module
CN111309574A (zh) 信息处理方法、装置及设备
CN110198324B (zh) 数据监控方法、装置、浏览器及终端
CN108241510B (zh) 一种显卡的切换方法
CN105472359B (zh) 用于投影仪的远程调试方法
CN115454296B (zh) 一种跨运行环境的用户行为智能融合方法
CN108123937B (zh) 监管移动终端应用的多线程监测方法及系统
CN103473170B (zh) 测试系统及测试方法
CN115600213A (zh) 基于应用程序的漏洞管理方法、装置、介质及设备
CN111522599B (zh) 用于发送信息的方法和装置
CN113168340B (zh) 信息处理系统以及信息处理方法
CN106970884B (zh) 应用于安卓系统运行层处理串口命令的方法及装置
CN114153321A (zh) 一种虚拟键盘和鼠标实现远程控制的方法
CN106371818A (zh) 一种用于处理用户级事件以编制应用程序的方法
CN107491205B (zh) 一种一体机
CN102929632A (zh) 控件动作执行方法
CN112188189B (zh) 电视设备的预警方法、预警服务器及计算机可读存储介质
CN111782118B (zh) 一体机上的画面平移方法、装置、存储介质及一体机设备
CN110069723B (zh) 图形码识别方法、装置及存储介质

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application