KR20150079829A - 제스처에 기반한 대화 처리 방법, 장치, 단말 장치, 프로그램 및 기록 매체 - Google Patents

제스처에 기반한 대화 처리 방법, 장치, 단말 장치, 프로그램 및 기록 매체 Download PDF

Info

Publication number
KR20150079829A
KR20150079829A KR1020157013841A KR20157013841A KR20150079829A KR 20150079829 A KR20150079829 A KR 20150079829A KR 1020157013841 A KR1020157013841 A KR 1020157013841A KR 20157013841 A KR20157013841 A KR 20157013841A KR 20150079829 A KR20150079829 A KR 20150079829A
Authority
KR
South Korea
Prior art keywords
conversation
gesture operation
gesture
finger
sliding
Prior art date
Application number
KR1020157013841A
Other languages
English (en)
Inventor
빈 왕
야오콴 리유
하이빈 웽
Original Assignee
시아오미 아이엔씨.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 시아오미 아이엔씨. filed Critical 시아오미 아이엔씨.
Publication of KR20150079829A publication Critical patent/KR20150079829A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4403—Processor initialisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4416—Network booting; Remote initial program loading [RIPL]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/448—Execution paradigms, e.g. implementations of programming paradigms
    • G06F9/4482—Procedural
    • G06F9/4484—Executing subprograms

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)

Abstract

본 발명에 따른 실시예는 제스처에 기반한 대화 처리 방법, 장치 및 단말 장치에 관한 것으로, 당해 방법은, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하는 단계와, 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 제스처 조작을 식별하는 단계와, 식별해낸 제스처 조작에 기초하여, 현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행하는 단계를 포함한다. 따라서, 대화 조작 인터페이스로 진입할 필요가 없이 현재 대화 인터페이스에서 대화에 대해 조작을 진행할 수 있으므로, 대화 처리과정을 단축하고 처리시간을 절약함으로써 사용자의 조작에 편리하도록 하고 사용자 선호도를 제고한다.

Description

제스처에 기반한 대화 처리 방법, 장치 및 단말 장치{GESTURE-BASED CONVERSATION PROCESSING METHOD, APPARATUS, AND TERMINAL DEVICE}
본 발명은 통신 기술 분야에 속하는 것이며, 특히 제스처에 기반한 대화 처리 방법, 장치 및 단말 장치에 관한 것이다.
본원은 출원 번호 201310253279.X이고, 출원일자가 2013년 6월 24일인 중국 특허 출원을 기초로, 우선권을 주장하며, 당해 중국 특허 출원의 모든 내용을 본원에 원용한다.
기술의 발전에 따라, 사람들이 인터넷 제품 및 소프트웨어 제품의 표시에 대한 요구가 날로 높아지고 있다. 현재, 사람들의 연락 방법은 이미 전화, 문자 등 전통적인 방법을 떠나, 네트워크 소셜 소프트웨어를 더욱 많이 이용하고 있으며, 더욱 보편적으로는 실시간 채팅 방법을 이용하고 있다.
실시간 채팅은 특정된 소프트웨어를 통해 네트워크 상으로 기타 플레이어(player)들과 공동으로 관심을 가지는 일부 이슈에 대해 토론을 진행하는 것을 가리킨다. 실시간 채팅 도구 사용 시, 사용자는 친구와 문자, 음성 심지어 동영상으로도 교류 가능하다. 일반적으로, 각 친구와의 대화는 모두 채팅창 내에 위치하므로, 대화의 단일성, 대상 정확성 및 대화 프라이버시를 보장한다. 사용자가 대화 그룹에 가입했을 경우, 동일한 그룹에 위치하는 임의의 친구가 말을 하면 자체 단말 사용자는 모두 수신할 수 있으며, 이러한 그룹 대화는 사용자의 소셜 활력도를 제고하는데 유리하다.
그러나, 대화 조작을 실행할 경우 반드시 당해 대화에 들어가 읽기, 삭제, 포워딩 등 조작을 실행해야 한다. 사용자가 여러명의 친구들과 동시에 채팅을 진행할 경우, 대화 페이지를 빈번히 전환하는 것이 더 필요한게 된다. 이러한 현재의 대화 처리는 대화 처리 과정이 너무 길고, 효율이 낮으며, 사용자 조작에 유리하지 않다.
본 발명의 실시예는 배경 기술에 존재하는 문제를 해결하기 위하여, 제스처(gesture) 동작에 기반한 대화 처리 방법, 장치 및 단말 장치를 제공한다.
본 발명의 제1 실시예에 따르면, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하는 단계와, 상기 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 상기 제스처 조작을 식별하는 단계와, 식별해낸 상기 제스처 조작에 기초하여, 상기 현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행하는 단계를 포함하는 제스처 조작에 기반한 대화 처리방법을 제공한다.
바람직하게, 상기 제스처 조작은, 원 핑거 좌향 슬라이딩, 원 핑거 우향 슬라이딩, 멀티 핑거 좌향 슬라이딩, 멀티 핑거 우향 슬라이딩, 원 핑거 상향 슬라이딩, 원 핑거 하향 슬라이딩, 멀티 핑거 상향 슬라이딩, 멀티 핑거 하향 슬라이딩, 원 핑거 클릭, 멀티 핑거 클릭, 원 핑거 핀치 및/또는 멀티 핑거 핀치를 포함한다.
바람직하게, 상기 방법은, 기준 제스처 조작 및 상기 기준 제스처 조작에 대응되는 처리를 미리 설정하는 단계를 더 포함하며, 상기 제스처 조작을 식별하는 단계는, 상기 모니터링 된 제스처 조작과 상기 미리 설정된 기준 제스처 조작을 비교하는 단계와, 비교한 결과, 일치할 경우, 상기 제스처 조작을 식별해 냈음을 확정하는 단계와, 비교한 결과, 일치하지 않을 경우, 상기 제스처 조작을 식별해 내재 못했음을 확정하는 단계를 포함한다.
바람직하게, 상기 제스처 조작을 식별해낸 후, 상기 방법은 상기 제스처 조작의 합법성을 검출하는 단계를 더 포함한다.
바람직하게, 상기 제스처 조작이 원 핑거 좌향 슬라이딩, 원 핑거 우향 슬라이딩, 멀티 핑거 좌향 슬라이딩, 멀티 핑거 우향 슬라이딩, 원 핑거 상향 슬라이딩, 원 핑거 하향 슬라이딩, 멀티 핑거 상향 슬라이딩 또는 멀티 핑거 하향 슬라이딩일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는, 상기 제스처 조작에 의한 상기 대화의 자체 구역 내에서의 슬라이딩 거리를 획득하는 단계와, 상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하는지의 여부를 검출하는 단계와, 상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와, 상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계를 포함한다.
바람직하게, 상기 제스처 조작이 원 핑거 클릭 또는 멀티 핑거 클릭일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는, 설정된 시간 내에서의 상기 제스처 조작의 클릭 회수를 획득하는 단계와, 상기 제스처 조작의 클릭 회수가 회수 한계치를 초과하는지의 여부를 검출하는 단계와, 상기 클릭 회수가 상기 회수 한계치를 초과했을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계와, 상기 클릭 회수가 상기 회수 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계를 포함한다.
바람직하게, 상기 제스처 조작이 원 핑거 핀치 또는 멀티 핑거 핀치일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는, 상기 제스처 조작에 의해 생성되는 전압치를 획득하는 단계와, 상기 제스처 조작에 의해 생성되는 접압치가 전압 한계치를 초과하는지의 여부를 검출하는 단계와, 상기 전압치가 전압 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와, 상기 전압치가 전압 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계를 포함하거나, 또는 상기 현재 대화 인터페이스를 표시하는 디스플레이가 플랙시블 디스플레이일 경우, 상기 제스처 조작의 핀치 방향에서의 핀치 깊이값을 획득하는 단계와, 상기 제스처 조작의 핀치 깊이값이 깊이 한계치를 초과하는지의 여부를 검출하는 단계와, 상기 깊이값이 깊이 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와, 상기 깊이값이 깊이 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계를 포함한다.
바람직하게, 상기 식별해낸 제스처 조작에 의해, 상기 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하는 단계는, 식별해낸 상기 제스처 조작이 상기 대화를 읽기 완료로 표기하기 위한 동작일 경우, 상기 대화의 상태를 읽기 완료로 업데이트 하는 단계, 또는 식별해낸 상기 제스처 조작이 상기 대화를 삭제로 표기하기 위한 동작일 경우, 상기 대화를 현재 대화 인터페이스에서 삭제하는 단계, 또는 식별해낸 상기 제스처 조작이 상기 대화를 포워딩으로 표기하기 위한 동작일 경우, 상기 대화의 포워딩 페이지를 팝업하는 단계, 또는 식별해낸 상기 제스처 조작이 상기 대화를 맨 위에 고정으로 표기하기 위한 동작일 경우, 상기 대화를 상기 현재 대화 인터페이스에서 맨 위에 고정하여 표시하는 단계를 포함한다.
바람직하게, 식별해낸 상기 제스처 조작에 의해, 상기 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하는 단계는, 식별해낸 상기 제스처 조작이 2급 옵션을 여는 동작일 경우, 상기 대화를 자체 구역에서 좌향 이동, 우향 이동, 상향 이동 또는 하향 이동시키며, 상기 대화의 이동이 발생된 구역에 상기 2급 옵션을 표시하는 단계를 포함하며, 상기 2급 옵션은, 상기 대화에 대한 조작 옵션, 상기 대화가 위치하는 현재 인터페이스에 대한 조작 옵션, 상기 대화가 속하는 어플리케이션에 대한 조작 옵션을 포함한다.
본 발명의 제2 실시예에 따르면, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하기 위한 모니터링 모듈, 상기 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 상기 제스처 조작을 식별하기 위한 식별 모듈, 및，식별해낸 상기 제스처 조작에 기초하여, 상기 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하기 위한 처리 모듈을 포함하는 제스처 조작에 기반한 대화 처리 장치를 제공한다.
바람직하게, 상기 대화 처리 장치는 상기 제스처 조작의 합법성을 검출하기 위한 검출 모듈을 더 포함한다.
바람직하게, 상기 식별 모듈에 의해 식별해낸 상기 제스처 조작이 상기 대화를 읽기 완료로 표기하기 위한 동작일 경우, 상기 처리 모듈은 상기 대화의 상태를 읽기 완료로 업데이트하거나, 또는 상기 식별모듈에 의해 식별해낸 상기 제스처 조작이 상기 대화를 삭제로 표기하기 위한 동작일 경우, 상기 처리 모듈은 상기 대화를 상기 현재 대화 인터페이스에서 삭제하거나, 또는, 상기 식별 모듈에 의해 식별해낸 상기 제스처 조작이 상기 대화를 포워딩으로 표기하기 위한 동작일 경우, 상기 처리 모듈은 상기 대화의 포워딩 페이지를 팝업하거나, 또는 상기 식별 모듈에 의해 식별해낸 상기 제스처 조작이 상기 대화를 맨 위에 고정으로 표기하기 위한 동작일 경우, 상기 처리 모듈은 상기 대화를 상기 현재 대화 인터페이스 상에서 맨 위에 고정하여 표시한다.
바람직하게, 상기 식별 모듈에 의해 식별해낸 상기 제스처 조작이 2급 옵션을 여는 동작일 경우, 상기 처리 모듈은 상기 대화를 자체 구역에서 좌향 이동, 우향 이동, 상향 이동 또는 하향 이동시키며, 상기 대화의 이동이 발생된 구역에 상기 2급 옵션을 표시하며, 상기 2급 옵션은 상기 대화에 대한 조작 옵션, 상기 대화가 위치하는 현재 인터페이스에 대한 조작 옵션, 상기 대화가 속하는 어플리케이션에 대한 조작 옵션을 포함한다.
본 발명의 제3 실시예에 따르면, 메모리와, 상기 메모리에 저장되는 하나 또는 하나 이상의 프로그램을 포함하며, 하나 이상의 프로세서를 통해, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하고, 상기 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 상기 제스처 조작을 식별하며, 식별해낸 상기 제스처 조작에 기초하여, 상기 현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행하는 인스트럭션을 포함하는 상기 하나 또는 하나 이상의 프로그램을 실행하도록 구성되는 단말 장치를 제공한다.
본 발명의 실시예에 따른 제스처에 기반한 대화 처리 방법, 장치 및 단말 장치는, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링하는 것을 통해, 현재 대화 인터페이스 중의 임의의 대화의 제스처 조작이 모니터링 되었을 경우, 상기 제스처 조작을 식별하며, 식별해낸 제스처 조작에 기초하여, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행한다. 따라서, 대화 조작 인터페이스로 진입할 필요가 없이 현재 대화 인터페이스에서 대화에 대해 조작을 진행할 수 있으므로, 대화 처리 과정을 단축하고 처리 시간을 절약함으로써 사용자의 조작에 편리하다.
본 발명의 기타 특징과 장점은 하기 명세서에서 설명하도록 하며, 부분적으로 명세서에 의해 명료하게 되거나 본 발명의 실시를 통해 알 수 있다. 본 발명의 목적과 기타 장점은 명세서, 청구범위 및 도면에서 특별히 제기한 구조에 의해 실현 및 획득될 수 있다.
여기에 표시된 도면은 명세서에 포함되며 명세서의 일부를 구성하고 본 발명에 따른 실시예를 도시하였으며, 명세서와 함께 본 발명의 원리를 해석하는데 사용된다.
도 1은 본 발명의 실시예에 따른 제스처 조작에 의한 대화를 처리하기 위한 예시적 방법의 흐름도이다.
도 2는 본 발명의 실시예에 따른 슬라이딩 제스처의 합법성을 검출하는 예시적인 흐름도이다.
도 3a는 본 발명의 실시예에 따른 슬라이딩 제스처가 합벅적이 않은 경우의 예시적 상태 모식도이다.
도 3b는 본 발명의 실시예에 따른 슬라이딩 제스처가 합법적인 경우의 예시적 상태 모식도이다.
도 4는 본 발명의 다른 실시예에 따른 클릭 제스처의 합법성을 검출하는 예시적인 흐름도이다.
도 5는 본 발명의 다른 실시예에 따른 핀치 제스처의 합법성을 검출하는 예시적인 흐름도이다.
도 6은 본 발명의 다른 실시예에 따른 핀치 제스처의 합법성을 검출하는 예시적인 흐름도이다.
도 7은 본 발명의 실시예에 따른 핀치 제스처의 예시적 상태 모식도이다.
도 8a 내지 도 8c는 본 발명의 실시예에 따른 우향 슬라이딩하여 읽기 완료 상태를 표기하는 예시적인 모식도이다.
도 9a 내지 도 9c는 본 발명의 실시예에 따른 읽지 않은 메세지가 있는 대화를 맨 위에 고정하는 예시적인 모식도이다.
도 10은 본 발명의 실시예에 따른 대화를 좌향 슬라이딩하여 2급 옵션을 표시하는 예시적인 모식도이다.
도 11은 본 발명의 실시예에 따른 원 핑거로 우향 슬라이딩하여 대화 표기를 변화시키는 것을 예로 하는, 제스처 조작에 기반한 대화 처리 방법의 예시적인 흐름도이다.
도 12는 본 발명의 실시예에 따른 원 핑거로 하향으로 핀치하여 2급 옵션을 표시하는 것을 예로 하는, 제스처 조작에 기반한 대화 처리 방법의 예시적인 흐름도이다.
도 13은 본 발명의 실시예에 따른 대화를 상향으로 슬라이딩하여 2급 옵션을 표시하는 예시적인 모식도이다.
도 14는 본 발명의 실시예에 따른 투 핑거로 하향으로 슬라이딩하는 제스처 조작을 통해 읽지 않은 대화를 맨 위에 고정하는 것을 예로 하는, 제스처 조작에 기반한 대화 처리방법의 예시적인 흐름도이다.
도 15는 본 발명의 실시예에 따른 제스처 조작에 기반한 대화 처리 장치의 예시적 기능 블록도이다.
도 16은 본 발명의 실시예에 따른 단말 장치의 예시적 구조 모식도이다.
본 발명의 목적, 기술 방안 및 장점이 더욱 명확하도록 하기 위해, 하기에 도면을 결부하여 본 발명의 실시 형태에 대해 상세히 설명하도록 한다.
도 1은 본 발명의 실시예에 따른 제스처 조작에 의한 대화를 처리하기 위한 방법의 예시적인 흐름도이다. 도 1에 의하면, 당해 방법은 하기와 같은 단계를 포함한다.
101 단계에서, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 한다.
102 단계에서, 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 제스처 조작을 식별한다.
103 단계에서, 식별해낸 제스처 조작에 기초하여, 현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행한다.
하나의 실시예에 있어서, 제스처 조작은, 원 핑거(One Finger) 좌향 슬라이딩, 원 핑거 우향 슬라이딩, 멀티 핑거 좌향 슬라이딩, 멀티 핑거 우향 슬라이딩, 원 핑거 상향 슬라이딩, 원 핑거 하향 슬라이딩, 멀티 핑거 상향 슬라이딩, 멀티 핑거 하향 슬라이딩, 원 핑거 클리, 멀티 핑거 클릭, 원 핑거 핀치 및/또는 멀티 핑거 핀치를 포함한다. 여기서 열거한 제스처 조작은 본 발명에 공개된 실시예에서 사용 가능한 부분적 제스처뿐 일 수 있으며, 또한 대화 처리를 진행할 수 있는 기타 제스처 조작 일 수도 있다. 예를 들면, 스크린 패널을 터치하지 않고 센서를 통해 임의의 제스처를 감지할 수도 있다.
하나의 실시예에 있어서, 본 발명에 따른 다른 하나의 실시예에 있어서, 당해 방법은 또한 기준 제스처 조작 및 기준 제스처 조작에 대응되는 처리를 미리 설정하는 단계를 포함한다.
여기서, 상기 제스처 조작을 식별하는 단계는, 모니터링된 제스처 조작과 미리 설정된 기준 제스처 조작에 대해 비교를 진행하여, 비교한 결과, 일치할 경우, 제스처 조작을 식별해냈음을 확정하고, 비교한 결과, 일치하지 않을 경우, 제스처 조작을 식별해내지 못했음을 확정한다. 예를 들면, 기준 제스처 조작이 원 핑거 슬라이딩이고, 이에 대응되는 처리는 당해 대화를 읽기 완료 상태로 표기하는 것으로 설정할 경우, 현재 대화 인터페이스에 나타난 제스처 조작이 원 핑거 슬라이딩이라고 모니터링 되었을 경우, 당해 제스처 조작이 식별 가능한 제스처 조작임을 확정할 수 있다.
본 발명에 따른 다른 하나의 실시예에 있어서, 제스처 조작을 식별해낸 후, 당해 방법은 또한 제스처 조작의 합법성을 검출하는 단계를 포함한다.
제스처 조작의 정확성을 보장하고 오동작의 발생을 피하기 위해, 식별해낸 제스처 조작에 대해 합법성 검출을 진행할 수 있다.
본 발명에 따른 다른 하나의 실시예에 있어서, 제스처 조작이 원 핑거 좌향 슬라이딩, 원 핑거 우향 슬라이딩, 멀티 핑거 좌향 슬라이딩, 멀티 핑거 우향 슬라이딩, 원 핑거 상향 슬라이딩, 원 핑거 하향 슬라이딩, 멀티 핑거 상향 슬라이딩 또는 멀티 핑거 하향 슬라이딩일 경우, 제스처 조작의 합법성을 검출하며, 도 2와 같은 하기 단계를 포함한다.
201 단계에서, 제스처 조작에 의한 대화의 자체 구역 내에서의 슬라이딩 거리를 획득한다.
202 단계에서, 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하는지의 여부에 대해 검출하여, 초과했을 경우, 단계 203을 실행하고, 아닐 경우, 단계 204를 실행한다.
203 단계에서, 슬라이딩 거리가 슬라이딩 거리 한계치를 초과했을 경우, 제스처 조작이 합법적임을 확정한다.
204 단계에서, 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하지 않았을 경우, 제스처 조작이 합법적이 아님을 확정한다.
원 핑거 우향 슬라이딩을 예로 들면, 도 3a에 도시된 바와 같이, 제스처 조작으로 인한 대화의 자체 구역 내에서의 슬라이딩 거리는 a1이고, 이는 슬라이딩 거리 한계치 A보다 작을 경우, 원 핑거 우향 슬라이딩 제스처 조작이 합법적이지 않고 오동작에 속한다고 확정한다. 도 3b에 도시된 바와 같이, 제스처 조작으로 인한 대화가 자체 구역 내에서의 슬라이딩 거리는 a2이고, 이는 슬라이딩 거리 한계치 A보다 작지 않을 경우, 원 핑거 우향 슬라이딩 제스처 조작이 합법적이고 정상 동작에 속한다고 확정한다. 원 핑거 좌향 슬라이딩, 멀티 핑거 좌향 슬라이딩, 멀티 핑거 우향 슬라이딩, 원 핑거 상향 슬라이딩, 원 핑거 하향 슬라이딩, 멀티 핑거 상향 슬라이딩 또는 멀티 핑거 하향 슬라이딩의 합법성 검출 원리는 원 핑거 우향 슬라이딩과 같으므로 상세히 설명하지 않는다.
본 발명에 따른 다른 하나의 실시예에 있어서, 제스처 조작이 원 핑거 클릭 또는 멀티 핑거 클릭일 경우, 제스처 조작의 합법성을 검출하도록 하며, 도 4에 도시된 바와 같이 하기 단계를 포함한다.
401 단계에서, 설정된 시간 내에서의 제스처 조작의 클릭 회수를 획득한다.
402 단계에서, 제스처 조작의 클릭 회수가 회수 한계치를 초과하는지의 여부에 대해 검출하고, 초과했을 경우, 단계 403을 실행하고, 아닐 경우, 단계 404를 실행한다.
403 단계에서, 클릭 회수가 회수 한계치를 초과했을 경우, 제스처 조작이 합법적이지 않음을 확정한다.
단계 404에서, 클릭 회수가 회수 한계치를 초과하지 않았을 경우, 제스처 조작이 합법적임을 확정한다.
이와 같이, 클릭 회수에 대한 검출을 통해, 정상 동작 또는 동작이 발생되지 않은 것을 비교적 정확하게 분별해 낼 수 있다.
본 발명에 따른 다른 하나의 실시예에 있어서, 제스처 조작이 원 핑거 핀치 또는 멀티 핑거 핀치일 경우, 제스처 조작의 합법성을 검출하며, 도 5에 도시된 바와 같이 하기 단계를 포함한다.
501 단계에서, 제스처 조작에 의해 생성되는 전압치를 획득한다.
502 단계에서, 제스처 조작에 의해 생성되는 전압치가 전압 한계치를 초과하는지의 여부에 대해 검출하고, 초과했을 경우 단계 503을 실행하고, 아닐 경우 단계 504를 실행한다.
503 단계에서, 전압치가 전압 한계치를 초과했을 경우, 제스처 조작이 합법적임을 확정한다.
504 단계에서, 전압치가 전압 한계치를 초과하지 않았을 경우, 제스처 조작이 합법적이지 않음을 확정한다.
사람이 손가락으로 터치 패널을 핀치(pressing, 누름)할 경우, 터치 패널과 연결된 회로의 전압치는 변화하게 되며, 전압치를 검출하는 것을 통해, 정상 동작 및 동작이 발생되지 않은 것을 비교적 정확하게 분별할 수 있다.
또는, 본 발명에 따른 다른 하나의 실시예에 있어서, 현재 대화 인터페이스를 표시하는 디스플레이가 플랙시블 디스플레이(Flexible displays)일 경우, 도 6에 도시된 바와 같은 단계를 이용할 수 있다.
601 단계에서, 제스처 조작의 핀치 방향에서의 핀치 깊이값을 획득한다.
602 단계에서, 제스처 조작의 핀치 깊이값이 깊이 한계치를 초과하는지의 여부에 대해 검출하고, 초과했을 경우, 단계 603을 실행하고, 아닐 경우, 단계 604를 실행한다.
603 단계에서, 깊이값이 깊이 한계치를 초과했을 경우, 제스처 조작이 합법적임을 확정한다.
단계 604에서, 깊이값이 깊이 한계치를 초과하지 않았을 경우, 제스처 조작이 합법적이지 않음을 확정한다.
원 핑거 하향 핀치를 예로 하여, 도 7에 도시된 바와 같이, 제스처 조작의 핀치 깊이값이 b1일 경우, 이는 깊이 한계치 B보다 작을 경우, 원 핑거 하향 핀치 제스처(pinch gesture) 동작이 합법적이 아니고 오동작에 속한다고 확정한다. 제스처 조작의 핀치 깊이값이 b2이고, 이가 슬라이딩 거리 한계치 B보다 작지 않을 경우，원 핑거 하향 핀치 제스처 조작은 합법적이고 정상 동작에 속한다고 확정한다. 원 핑거(single-finger) 또는 멀티 핑거(multi-finger)로 기타 방향으로 핀치할 경우의 합법성에 대한 검출 원리는 원 핑거 하향 핀치의 경우와 동일하므로, 여기서 상세히 설명하지 않는다.
하나의 실시예에 있어서, 식별해낸 제스처 조작에 의해, 현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행하는 단계는, 식별해낸 제스처 조작이 대화를 읽기 완료로 표기하기 위한 조작일 경우, 대화 상태를 읽기 완료 상태로 업데이트 하는 단계, 또는, 식별해낸 제스처 조작이 대화를 삭제로 표기하기 위한 조작일 경우, 대화를 현재 대화 인터페이스에서 삭제하는 단계, 또는, 식별해낸 제스처 조작이 상기 대화를 포워딩으로 표기하기 위한 조작일 경우, 대화 포워딩 페이지를 팝업(pop-up)하는 단계를 포함한다. 여기서 열거한 처리 방법은 본 발명에 따른 실시예에 사용되는 일부분 처리 방법이며, 예하면, 당해 대화의 위치를 이동하는 등 기타 방식을 사용하여 처리할 수도 있다.
예를 들면, 본 발명에 따른 다른 하나의 실시예에 있어서, 도 8a에서와 같이, 현재 대화 인터페이스에 읽지 않은 메세지가 있는 대화 2가 존재하고, 대화 2는 11개의 읽지 않은 메세지를 가지고 있다. 당해 읽지 않은 메세지가 있는 대화에 대한 제스처 조작이 모니터링 되고 식별된 후, 당해 제스처 조작 (예컨대 원 핑거 우향 슬라이딩）에 대응되는 처리결과가 당해 대화를 《읽기 완료》라는 문자로 표기하는 것일 경우, 도 8b에 도시된 바와 같이, 당해 대화에 대해 원 핑거 우향 슬라이딩을 진행할 경우, 대화 자체 구역중의 이동이 발생된 구역에 사용자 프롬프트(user prompt)로서 《읽기 완료》를 표시한다. 물론, 기타 문자, 이미지 및 / 또는 애니메이션 등 방식을 통해 프롬프트를 제공할 수도 있다.
도 8c에 도시된 바와 같이, 원 핑거 우향 슬라이딩이 종료되면, 당해 대화는 원위치로 회복되며, 회복 후 스프링백(springback) 효과를 나타낼 수도 있다. 읽지 않은 메세지 수량을 표기한 프롬프트도 이에 따라 소실되며, 소실 시 당해 프롬프트가 좌향 슬라이딩하여 소실되는 방식을 이용할 수 있으며, 점진적으로 소실되는 방식 등을 이용할 수 도 있다.
예를 들면, 본 발명에 따른 다른 하나의 실시예에 있어서, 도 9a에서와 같이, 현재 대화 인터페이스에 읽지 않은 메세지가 있는 대화（대화 2, 대화 4 및 대화 6）이 존재하고, 읽지 않은 메세지가 있는 대화에 대한 제스처 조작이 모니터링 되고 및 식별된 후, 당해 제스처 조작（예컨대, 원 핑거 하향 슬라이딩）에 대응되는 처리 결과가 읽지 않은 대화를 맨 위에 고정하는 것일 경우, 도 9b에 도시된 바와 같이, 당해 대화에 대해 원 핑거 하향 슬라이딩을 진행할 경우, 현재 대화 인터페이스는 전체적으로 하향 이동하며, 도 9c에 도시된 바와 같이, 원 핑거 하향 슬라이딩이 종료되면, 읽지 않은 메세지가 있는 대화는 맨 위에 고정됨과 동시에 사용자 프롬프트가 표시되어, 현재 상태에서 읽지 않은 대화가 맨 위에 고정됨을 설명한다. 물론, 임의의 하나 또는 복수개 대화를 맨 위에 고정할 수 있으며, 이는 제스처 조작에 대응되는 처리 결과를 변경하기만 하면 된다. 또는 다른 하나의 제스처 조작을 예로 들면, 투 핑거 하향 슬라이딩에 대응되는 처리 결과가 선택된 대화를 맨 위에 고정하는 것으로 되도록 정의한다.
본 발명에 따른 다른 하나의 실시예에 있어서, 식별해낸 제스처 조작에 의해，현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행하는 단계는, 식별해낸 제스처 조작이 2급 옵션을 여는 조작일 경우, 대화를 자체 구역에서 좌향 이동, 우향 이동, 상향 이동 또는 하향 이동시키며, 당해 대화의 이동이 발생된 구역에 2급 옵션을 표시하는 단계를 포함한다. 여기서, 당해 2급 옵션은, 대화에 대한 조작 옵션, 대화에 위치하는 현재 인터페이스의 조작 옵션, 대화가 속하는 어플리케이션에 대한 조작 옵션을 포함한다.
도 10에 도시된 바와 같이, 제스처 조작을 통해 대화를 좌향 이동할 경우, 당해 대화의 이동이 발생된 구역에 《포워딩》, 《삭제》, 《이동》,《검색》, 《대화 추가》, 《누르고 말하기》, 《누르고 동영상》 등, 2급 옵션 중의 하나 또는 복수개가 표시된다. 또한 다른 제스처 조작을 통해 대화를 원위치로 회복할 수 있으며, 예를 들면, 당해 대화를 원 핑거 클릭 하면, 대화는 원위치로 이동 해가고, 상기 2급 옵션을 오버랩(overlap)시킨다.
상기 모든 바람직한 기술 방안은 임의로 결부하여 본 발명의 바람직한 실시예로 할 수 있으며, 여기서 상세히 설명하지 않는다.
그러므로, 본 발명에 따른 실시예서 제공하는 제스처 조작에 기반한 대화 처리 방법은, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링하는 것을 통해, 식별해낸 제스처 조작에 의해, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행한다. 대화 조작 인터페이스로 진입할 필요가 없이, 현재 대화 인터페이스에서 대화에 대해 조작을 진행할 수 있으므로, 대화 처리 과정을 단축하고 처리 시간을 절약함으로써 사용자의 조작에 더욱 편리하다.
도 11은 본 발명의 실시예에 따른 제스처 조작에 기반한 대화 처리방법의 흐름도이다. 원 핑거 우향 슬라이딩을 통해 대화 표기를 변경하는 것을 예로, 당해 방법은 하기 단계를 포함한다.
1101 단계에서, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 한다.
1102 단계에서, 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 모니터링된 당해 제스처 조작과 미리 설정된 기준 제스처 조작을 비교하고, 비교한 결과 일치할 경우, 원 핑거 우향 슬라이딩을 식별해냈음을 확정하고, 계속하여 1103 단계를 실행하며, 아닐 경우, 제스처 조작을 식별해내지 못했음을 확정하고, 1101 단계를 실행한다.
1103 단계에서, 대화의 자체 구역 내에서의 우향 슬라이딩 거리를 획득한다.
1104 단계에서, 당해 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하는지 여부에 대해 검출하고, 슬라이딩 거리가 슬라이딩 거리 한계치를 초과했을 경우, 당해 제스처 조작이 합법적임을 확정하고, 계속하여 1105 단계를 실행하며, 아닐 경우, 당해 제스처 조작이 합법적이지 않음을 확정하고 1101 단계를 실행한다. 당해 단계의 효율성은 도 3a 및 도 3b를 참조하도록 한다.
1105 단계에서, 대화의 이동이 발생된 구역에 프롬프트 문자를 표시하여 당해 조작의 효과를 통지한다. 당해 단계의 효과도는 도 8b를 참조하도록 한다.
1106 단계에서, 당해 대화 상태를 읽기 완료로 업데이트 한다. 당해 단계의 효율성은 도 8c를 참조하도록 한다.
그러므로, 본 발명에 따른 실시예서 제공하는 제스처 조작에 기반한 대화 처리 방법은, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링하는 것을 통해, 식별해낸 제스처 조작에 의해, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행한다. 대화 조작 인터페이스로 진입할 필요가 없이 현재 대화 인터페이스에서 대화에 대해 조작을 진행할 수 있으므로, 대화 처리 과정을 단축하고 처리 시간을 절약함으로써 사용자의 조작에 더욱 편리하다.
도 12는 본 발명에 따른 실시예서 제공하는 제스처 조작에 기반한 대화 처리 방법의 흐름도이다. 원 핑거 하향 핀치를 통해 2급 옵션을 표시하는 것을 예로, 당해 방법은 하기 단계를 포함한다.
1201 단계에서, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 한다.
1202 단계에서, 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 모니터링된 당해 제스처 조작과 미리 설정된 기준 제스처 조작을 비교하고, 비교한 결과, 일치할 경우, 원 핑거 하향 핀치를 식별해냈음을 확정하고, 계속하여 1203 단계를 실행하며, 아닐 경우, 제스처 조작을 식별해내지 못했음을 확정하고, 1201 단계를 실행한다.
1203 단계에서, 원 핑거 하향 핀치의 깊이값을 획득한다.
1204 단계에서, 당해 깊이값이 깊이 한계치를 초과하는지의 여부에 대해 검출하고, 초과했을 경우, 당해 제스처 조작이 합법적임을 확정하고, 계속하여 단계 1205를 실행하며, 아닐 경우, 당해 제스처 조작이 합벅적이지 않음을 확정하고 단계 1201을 실행한다. 당해 단계의 효율성은 도 7을 참조하도록 한다.
1205 단계에서, 대화를 상향 이동하여, 대화의 이동이 발생된 구역에 2급 옵션을 표시한다. 도 13에 도시된 바와 같이, 대화를 자체 구역 내에서 끊임없이 상향 이동하여, 심지어 그 자체 위치의 정상부까지 이동시킬 수 있다. 바람직하게, 회전, 점진적 변화 등 효과를 통해 당해 2급 옵션을 표시할 수 있다.
1206 단계에서, 2급 옵션에 대한 사용자의 선택에 따라 해당되는 조작을 실행한다. 예를 들면, 《삭제》를 2급 옵션으로 선택 후, 당해 대화를 현재 대화 인터페이스에서 삭제한다.
그러므로, 본 발명에 따른 실시예서 제공하는 제스처 조작에 기반한 대화 처리 방법은, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링하는 것을 통해, 식별해낸 제스처 조작에 의해, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행한다. 대화 조작 인터페이스로 진입할 필요가 없이 현재 대화 인터페이스에서 대화에 대해 조작을 진행할 수 있으므로, 대화 처리 과정을 단축하고 처리 시간을 절약함으로써 사용자의 조작에 더욱 편리하다.
도 14는 본 발명의 실시예에서 제공한 제스처 조작에 기반한 대화 처리 방법의 흐름도이다. 투 핑거 하향 슬라이딩하는 제스처 조작을 통해 읽지 않은 대화를 맨 위에 고정하는 것을 예로, 당해 방법은 하기 단계를 포함한다.
1401 단계에서, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 한다.
1402 단계에서, 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 모니터링된 당해 제스처 조작과 미리 설정된 기준 제스처 조작을 비교하고, 비교한 결과 일치할 경우, 투 핑거 하향 슬라이딩을 식별했음을 확정하고, 계속하여 1403 단계를 실행하며, 아닐 경우, 제스처 조작을 식별해내지 못했음을 확정하고, 1401 단계를 실행한다.
1403 단계에서, 당해 제스처 조작이 현재 대화 인터페이스에서의 슬라이딩 거리를 획득한다.
1404단계에서, 당해 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하는지의 여부에 대해 검출하고, 슬라이딩 거리가 슬라이딩 거리 한계치를 초과했을 경우, 당해 제스처 조작이 합법적임을 확정하고, 계속하여 1405 단계 를 실행하며, 아닐 경우, 당해 제스처 조작이 합벅적이 아님을 확정하고, 1401단계를 실행한다.
1405 단계에서, 읽지 않은 대화를 맨 위에 고정하여 표시한다. 읽지 않은 대화가 복수개 존재할 경우, 대화 접수 시간 또는 대화 내의 읽지 않은 메세지 개수에 따라, 읽지 않은 대화의 표시 순서를 배렬할 수 있다. 물론, 제스처 조작 시작 위치의 대화만 맨 위에 고정하여 표시할 수도 있다.
그러므로, 본 발명에 따른 실시예서 제공하는 제스처 조작에 기반한 대화 처리 방법은, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링하는 것을 통해, 식별해낸 제스처 조작에 기초하여, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행한다. 대화 조작 인터페이스로 진입할 필요가 없이 현재 대화 인터페이스에서 대화에 대해 조작을 진행할 수 있으므로, 대화 처리 과정을 단축하고 처리 시간을 절약함으로써 사용자의 조작에 더욱 편리하다.
도 15는 본 발명에 따른 실시예에서 제공한 제스처 조작에 기반한 대화 처리 장치의 기능 블록도이다. 도 15를 참조하면, 당해 장치는 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하기 위한 모니터링 모듈 (1501), 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 제스처 조작을 식별하기 위한 식별모듈 (1502), 식별해낸 제스처 조작에 기초하여, 현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행하기 위한 처리 모듈 (1503)을 포함한다.
하나의 실시예에 있어서, 당해 장치는 또한 제스처 조작의 합법성을 검출하기 위한 검출 모듈 (1504)을 포함한다.
하나의 실시예에 있어서, 식별 모듈 (1502)에서 식별해낸 제스처 조작이 상기 대화를 읽기 완료로 표기하기 위한 조작일 경우, 처리 모듈 (1503)은 대화 상태를 읽기 완료 상태로 업데이트하거나, 또는, 식별모듈 (1502)에서 식별해낸 제스처 조작이 대화를 삭제로 표기하기 위한 조작일 경우, 처리 모듈 (1503)은 대화를 현재 대화 인터페이스에서 삭제하거나, 또는, 식별 모듈 (1502)에서 식별해낸 제스처 조작이 대화를 포워딩으로 표기하기 위한 조작일 경우, 처리 모듈 (1503)은 대화 포워딩 페이지를 팝업하거나, 또는, 식별 모듈 (1502)에서 식별해낸 제스처 조작이 대화를 맨 위에 고정으로 표기하기 위한 조작일 경우, 처리 모듈 (1503)은 대화를 현재 대화 인터페이스에서 맨 위에 고정하여 표시한다.
하나의 실시예에 있어서, 식별 모듈 (1502)에 의해 식별해낸 제스처 조작이 2급 옵션을 여는 조작일 경우, 처리 모듈 (1503)은 상기 대화를 자체 구역에서 좌향 이동, 우향 이동, 상향 이동 또는 하향 이동시키며, 대화의 이동이 발생된 구역에 상기 2급 옵션을 표시한다. 여기서, 2급 옵션은, 대화에 대한 조작 옵션, 대화가 위치하는 현재 인터페이스의 조작 옵션, 대화가 속하는 어플리케이션에 대한 조작 옵션을 포함한다.
설명할 해야할 것은, 상기 실시예에서 제공하는 제스처 조작에 기반한 대화 처리 장치는, 상기 기능 실현 시 상기 각 기능 모듈의 구분에 의해 예를 들어 설명을 했으나, 실제 활용 중, 수요에 따라 상기 기능을 상이한 기능 모듈로 배분함으로써 실현할 수 있다. 즉, 장치의 내부 구조를 상이한 기능 모듈로 구분함으로써 상기 기재한 전부 또는 부분적 기능을 실현할 수 있다. 그리고, 상기 실시예에서 제공하는 제스처 조작에 기반한 대화 처리 장치와 제스처 조작에 기반한 대화 처리방법의 실시예는 동일한 구상에 속하는 것으로, 구체적인 실현 과정은 방법 실시예를 참조하도록 하며 여기서 상세히 설명하지 않는다.
당업자라면 상기 실시예의 전부 또는 일부분 단계는 하드웨어를 통해 완성 가능하며, 프로그램을 통해 관련 하드웨어를 인스트럭트함으로써도 완성할 수 있음을 이해할 수 있으며, 상기 프로그램은 컴퓨터 판독 가능한 기록 매체에 저장할 수 있으며, 상기에 언급된 기록 매체는 ROM, 자기 디스크 혹은 콤팩트 디스크 등일 수 있다.
도 16은 본 발명의 실시예에서 제공한 단말 장치의 구조 모식도이다. 도 16에 도시된 바와 같이, 당해 단말 장치는 상기 실시예에서 제공하는 제스처 조작에 기반한 대화 처리 방법의 실시에 사용 가능하다. 여기서, 당해 단말기는 휴대폰, 태블릿 PC(pad), 웨어러블 모바일 디바이스 (Wearable mobile devices) (예하면 스마트 워치) 등 일 수 있다. 바람직하게는 하기와 같다.
단말 장치(700)는 통신 유닛(110), 컴퓨터가 판독 가능한 기록 매체를 1개 또는 1개 이상 포함하는 메모리(120), 입력 유닛(130), 표시 유닛(140), 센서(150), 오디오 회로(160), WIFI(Wireless Fidelity) 모듈(170), 1개 또는 1개 이상의 처리 코어를 구비하는 프로세서(180) 및 전원(190) 등을 포함한다. 당업자는 도 16에 도시된 단말 장치의 구성이 단말 장치에 대한 한정이 아니며 당해 단말 장치가 도시된 부품보다 많은 수량 또는 적은 수량의 부품을 구비해도 되고 혹은 몇개의 부품의 조합 또는 부동한 부품 배치를 구비해도 되는 것으로 이해되어야 한다.
여기에서, 통신 유닛(110)은 정보를 송수신하거나 통화 중에 신호를 수신하고 송신하기 위한 것이다. 당해 통신 유닛(110)은 RF（Radio Frequency）회로, 라우터, 모뎀 등의 네트워크 통신 장치여도 된다. 특히, 통신 유닛(110)이 RF회로일 경우 기지국으로부터의 다운링크 정보를 수신한 후 1 개 또는 1 개 이상의 프로세서(180)에 송신하여 처리하게 한다. 또한, 업링크 데이터를 기지국에 송신한다. 일반적으로 통신 유닛으로서의 RF회로는 안테나, 적어도 1 개의 앰프, 튜너, 1 개 또는 복수 개의 발진기, 가입자 인증 모듈（SIM）카드, 송수신 기, 커플러, LNA（Low Noise Amplifier, 저 노이즈 앰프）, 듀플렉서 등을 포함하지만 이에 한정되지 않는다. 그리고 통신 유닛(110)은 무선 통신에 의해 네트워크 및 기타 장치와 통신할 수 있다. 상기 무선 통신으로서 GSM（Global System of Mobile communication）, GPRS（General Packet Radio Service）, CDMA（Code Division Multiple Access）, WCDMA（Wideband Code Division Multiple Access）, LTE（Long Term Evolution）, 전자메일, SMS（Short Messaging Service） 등을 포함하는 임의의 통신규격 또는 프로토콜을 이용해도 되지만 이에 한정되지 않는다. 메모리(120)는 소프트웨어 프로그램 및 모듈을 저장하기 위한 것이며 프로세서(180)는 메모리(120)에 저장되어 있는 소프트웨어 프로그램 및 모듈을 실행하는 것을 통하여 각 종 기능의 어플 및 데이터 처리를 실행한다. 메모리(120)는 주로 프로그램 저장영역과 데이터 저장 영역을 구비한다. 프로그램 저장 영역에는 OS(Operating System), 적어도 1 개의 기능을 실행하는 어플（예를 들면 음성재생기능, 화상재생기능 등） 등이 저장된다. 데이터 저장 영역에는 단말 장치(700)의 사용에 의해 작성된 데이터（예를 들면 오디오 데이터, 전화부 등） 등이 저장된다. 또한, 메모리(120)는 고속RAM（Random Access Memory）를 포함해도 되고 예를 들면 적어도 1 개의 자기 디스크 메모리, 플래시 메모리 등 비휘발성 메모리 또는 기타 휘발성 SSD（solid state drive） 메모리를 포함해도 된다. 그리고 메모리(120)는 프로세서(180) 및 입력 유닛(130)이 메모리(120)에 액세스할 수 있도록 메모리 제어기를 진일보로 포함해도 된다.
입력 유닛(130)은 숫자 또는 캐릭터 정보의 입력을 받고 사용자 설정 및 기능 제어에 관한 키보드, 마우스, 조이 스틱, 광학 볼이나 트랙 볼에 의한 신호입력을 발생하기 위한 것이다. 입력 유닛(130)은 터치센시티브 표면(131) 및 기타 입력 장치(132)를 포함해도 된다. 터치센시티브 표면(131)은 터치 패널 또는 터치 패드라고도 불리우며 사용자가 그 표면위나 부근에 대한 터치 동작（예를 들면 사용자가 손가락이나 터치팬 등의 임의의 적합한 물건이나 부속품을 사용하여 터치센시티브 표면(131) 혹은 터치센시티브표면(131) 부근에 대하여 진행하는 조작）을 수집함과 동시에 미리 설정된 프로그램에 따라 관련된 접속 장치를 구동한다. 터치센시티브 표면(131)은 선택적으로 터치 검출 수단 및 터치 제어기 이 2 개의 부분을 포함해도 된다. 여기에서, 터치 검출 수단은 사용자의 터치 위치를 검출함과 동시에 터치 동작에 의한 신호를 검출하고 그 터치 정보를 터치 제어기에 송신한다. 터치 제어기는 터치 검출 수단으로부터 터치 정보를 수신하고 당해 정보를 접촉점 좌표로 변환하여 프로세서(180)에 송신함과 동시에 프로세서(180)로부터의 명령어를 수신하여 실행한다. 또한, 저항식, 용량식, 적외선식 및 표면 탄성파식 등의 각 종 방식으로 터치센시티브 표면(131)을 실현할 수 있다. 입력 유닛(130)은 터치센시티브 표면(131) 외에 기타 입력 장치(132)를 진일보로 포함해도 된다. 기타 입력 장치(132)는 물리적인 키보드, 기능키（예를 들면 볼륨 버튼, 스위치 버튼 등）, 트랙 볼, 마우스, 조이 스틱 등 중의 1 개 또는 복수 개를 포함해도 되지만 이에 한정되지 않는다.
표시 유닛(140)은 사용자가 입력한 정보나 사용자에게 제공하는 정보 및 단말 장치(700)의 각 종 그래픽 사용자 인터페이스（GUI）를 표시하기 위한 것이며 이러한 그래픽 사용자 인터페이스는 도형, 텍스트, 아이콘, 비디오 및 그들의 임의의 조합으로 구성될 수 있다. 표시 유닛(140)은 표시 패널(141)을 포함할 수 있다. 선택적으로 표시 패널(141)은 LCD（Liquid Crystal Display）, OLED（Organic Light－Emitting Diode） 등 형태로 구성되어도 된다. 진일보로, 터치센시티브 표면(131)이 표시 패널(141)을 덮게끔 설치되고 터치센시티브 표면(131)이 그 표면 또는 부근에 대한 터치동작을 검출하면 그 검출 결과를 프로세서(180)에 송신하여 터치 이벤트의 타입을 확인하게 하고 그 후 프로세서(180)가 터치 이벤트의 타입에 근거하여 표시패널(141) 상에 대응되는 시각적 출력을 제공하도록 구성되어도 된다. 도 5에 있어서, 터치센시티브 표면(131)과 표시 패널(141)은 2 개의 독립적인 부품으로서 출력 및 입력 기능을 실현하게끔 구성되어 있지만 터치센시티브표면(131)과 표시패널(141)을 집적 구성하여 입력 및 출력 기능을 실현하는 실시예도 가능하다.
단말 장치(700)는 예를 들면 광센서, 운동센서 및 기타 센서 등 적어도 1 개의 센서(150)를 진일보로 포함해도 된다. 광센서는 환경 광센서와 근접 센서를 포함해도 되는데 환경 광센서는 환경광의 밝기에 근거하여 표시패널(141)의 휘도를 조절할 수 있고 근접 센서는 단말 장치(700)가 귓가까지 이동하면 표시 패널(141) 및/또는 백라이트를 오프시킨다. 운동센서의 일종으로서의 중력가속도센서는 각 방향（일반적으로 3축）에서의 가속도의 크기를 검출할 수 있고 정지 상태에서는 중력의 크기 및 그 방향을 검출할 수 있으므로 휴대폰의 자세를 인식하는 어플（예를 들면 화면의 횡종방향의 변환, 게임, 자력계의 자세교정）, 진동인식에 관한 기능（예를 들면 보수계, 타격） 등에 사용된다. 단말 장치(700)는 자이로스코프, 기압계, 습도계, 온도계, 적외선센서 등의 기타 센서를 진일보로 구비해도 되는데 여기에서 그 구체적인 설명은 생략한다.
오디오 회로(160), 스피커(161), 마이크(162)는 사용자와 단말 장치(700) 간의 오디오 인터페이스를 제공한다. 오디오 회로(160)는 수신한 오디오 데이터로부터 변환된 전기 신호를 스피커(161)에 송신하고 스피커(161)에 의하여 음성 신호로 변환하여 출력한다. 반면, 마이크(162)는 수집한 음성 신호를 전기 신호로 변환하고 오디오 회로(160)가 당해 전기 신호를 수신한 후 오디오 데이터로 변환하고 오디오 데이터를 프로세서(180)에 송신하여 처리한 후 RF 회로(110)를 경유하여 예를 들면 기타 단말기에 송신하거나 또는 오디오 데이터를 메모리(120)에 송신하여 진일보 처리하도록 한다. 오디오 회로(160)는 단말 장치(700)가 외부의 이어폰과 통신할 수 있도록 이어폰 삽입공을 진일보로 포함해도 된다.
당해 단말 장치는 무선 통신을 실현하기 위하여 무선통신 유닛(170)을 구비해도 된다. 당해 무선통신 유닛(170)은 ＷiＦi（Wireless Fidelity）모듈이여도 된다. ＷiＦi는 근거리 무선통신 기술에 속하며 사용자에게 무선 광대역 인터넷 액세스를 제공하므로 사용자는 단말 장치(700)의 무선통신 유닛(170)을 이용하여 전자메일의 송수신, 웹 사이트의 열람, 스트리밍 미디어의 액세스 등을 진행할 수 있다. 비록 도면에서 무선통신 유닛(170)을 도시하고 있지만 당해 무선통신 유닛(170)은 단말 장치(700)에 있어서 불가결의 구성이 아니며 본 발명의 취지를 변경하지 않는 범위내에서 수요에 따라 생략할 수 있음을 이해해야 한다.
프로세서(180)는 단말 장치(700)의 제어 센터이며 각 종 인터페이스 및 회로를 경유하여 휴대폰 전체의 각 부분에 접속되며 메모리(120) 내에 저장된 소프트웨어 프로그램 및/또는 모듈을 실행 또는 작동시킴과 동시에 메모리(120) 내에 저장되어 있는 데이터를 호출하는 것을 통하여 단말 장치(700)의 각 종 기능의 실행 및 데이터의 처리를 실현하며 따라서 휴대폰 전체를 제어한다. 선택적으로 프로세서(180)는 1 개 또는 복수 개의 처리 코어를 포함해도 되고 어플 프로세서와 모뎀 프로세서를 집적하여 구성되어도 된다. 여기에서 어플 프로세서는 주로 OS, 사용자 인터페이스 및 어플 등을 처리하고 모뎀 프로세서는 주로 무선통신을 처리한다. 그리고 상기 모뎀 프로세서가 프로세서(180)에 집적되지 않아도 됨을 이해해야 한다.
단말 장치(700)는 각 부분에 전력을 공급하는 전원(190)（예를 들면 배터리）를 진일보로 포함하고 당해 전원(190)은 전원관리시스템을 통하여 프로세서(180)에 논리적으로 접속되어 전원관리 시스템을 통하여 충전?방전관리 및 전력관리 등 기능을 실현할 수 있다. 전원(190)은 1 개 또는 1 개 이상의 직류 또는 교류 전원, 재충전시스템, 전원고장 검출회로, 전원 컨버터 또는 인버터, 전원상태 인티케이터 등 임의의 어셈블리를 진일보로 포함해도 된다.
도시하지 않았지만, 단말 장치 (700)는 카메라, 블루투스 모듈 등을 더 포함할 수 있으며, 여기서 상세히 설명하지 않는다. 구체적으로 실시예에서, 단말 장치의 표시유닛은 터치 스크린 디스플레이이며, 단말 장치는 메모리, 및 메모리에 저장된 하나 또는 하나 이상의 프로그램을 포함하며, 하나 또는 하나 이상의 프로세서를 통해, 하기 조작을 진행하는 인스트럭션을 포함하는 상기 하나 또는 하나 이상의 프로그램을 실행하도록 구성한다. 상기 조작은, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하는 단계와, 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 제스처 조작을 식별하는 단계와, 식별해낸 제스처 조작에 기초하여, 현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행하는 단계를 포함한다.
하나의 실시예에 있어서, 메모리는 하기 조작을 진행하는 인스트럭션을 더 포함한다. 기준 제스처 조작 및 상기 기준 제스처 조작에 대응되는 처리를 미리 설정하는 단계를 더 포함하며, 상기 제스처 조작을 식별하는 단계는, 모니터링 된 제스처 조작과 상기 미리 설정된 기준 제스처 조작을 비교하는 단계와, 비교한 결과, 일치할 경우, 상기 제스처 조작을 식별해 냈음을 확정하는 단계와, 비교한 결과, 일치하지 않을 경우, 상기 제스처 조작을 식별해 내재 못했음을 확정하는 단계를 포함한다.
하나의 실시예에 있어서, 메모리는 상기 제스처 조작을 식별해낸 후, 상기 제스처 조작의 합법성을 검출하는 조작을 실행하는 인스트럭션을 더 포함한다.
하나의 실시예에 있어서, 메모리는 하기 조작을 진행하는 인스트럭션을 더 포함한다. 상기 제스처 조작이 원 핑거 좌향 슬라이딩, 원 핑거 우향 슬라이딩, 멀티 핑거 좌향 슬라이딩, 멀티 핑거 우향 슬라이딩, 원 핑거 상향 슬라이딩, 원 핑거 하향 슬라이딩, 멀티 핑거 상향 슬라이딩 또는 멀티 핑거 하향 슬라이딩일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는, 상기 제스처 조작에 의한 상기 대화의 자체 구역 내에서의 슬라이딩 거리를 획득하는 단계와, 상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하는지 여부를 검출하는 단계와, 상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와, 상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계를 포함한다.
하나의 실시예에 있어서, 메모리는 하기 조작을 실행하는 인스트럭션을 더 포함한다. 상기 제스처 조작이 원 핑거 클릭 또는 멀티 핑거 클릭일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는, 설정된 시간 내에서의 상기 제스처 조작의 클릭 회수를 획득하는 단계와, 상기 제스처 조작의 클릭 회수가 회수 한계치를 초과하는지 여부를 검출하는 단계와, 상기 클릭 회수가 회수 한계치를 초과했을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계와, 상기 클릭 회수가 회수 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계를 포함한다.
하나의 실시예에 있어서, 메모리는 하기 조작을 실행하는 인스트럭션을 더 포함한다. 상기 제스처 조작이 원 핑거 핀치 또는 멀티 핑거 핀치일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는, 상기 제스처 조작에 의해 생성되는 전압치를 획득하는 단계와, 상기 제스처 조작에 의해 생성되는 접압치가 전압 한계치를 초과하는지 여부를 검출하는 단계와, 상기 전압치가 전압 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와, 상기 전압치가 전압 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이 아님을 확정하는 단계를 포함하거나, 또는 상기 현재 대화 인터페이스를 표시하는 디스플레이가 플랙시블 디스플레이일 경우, 상기 제스처 조작의 핀치 방향에서의 핀치 깊이값을 획득하는 단계와, 상기 제스처 조작의 핀치 깊이값이 깊이 한계치를 초과하는지 여부를 검출하는 단계와, 상기 깊이값이 깊이 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와, 상기 깊이값이 깊이 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이 아님을 확정하는 단계를 포함한다.
하나의 실시예에 있어서, 메모리는 하기 조작을 실행하는 인스트럭션을 더 포함한다. 상기 식별해낸 제스처 조작에 의해, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하는 단계는, 식별해낸 제스처 조작이 상기 대화를 읽기 완료로 표기하기 위한 동작일 경우, 상기 대화의 상태를 읽기 완료로 업데이트 하는 단계, 또는 식별해낸 제스처 조작이 상기 대화를 삭제로 표기하기 위한 동작일 경우, 상기 대화를 현재 대화 인터페이스에서 삭제하는 단계, 또는 식별해낸 제스처 조작이 상기 대화를 포워딩으로 표기하기 위한 동작일 경우, 상기 대화의 포워딩 페이지를 팝업하는 단계, 또는 식별해낸 제스처 조작이 상기 대화를 맨 위에 고정으로 표기하기 위한 동작일 경우, 상기 대화를 현재 대화 인터페이스에서 맨 위에 고정하여 표시하는 단계를 포함한다.
하나의 실시예에 있어서, 메모리는 하기 조작을 실행하는 인스트럭션을 더 포함한다. 식별해낸 제스처 조작에 의해, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하는 단계는, 식별해낸 제스처 조작이 2급 옵션을 여는 동작일 경우, 상기 대화를 자체 구역에서 좌향 이동, 우향 이동, 상향 이동 또는 하향 이동시키며, 상기 대화의 이동이 발생된 구역에 상기 2급 옵션을 표시하는 단계를 포함하며, 상기 2급 옵션은, 상기 대화에 대한 조작 옵션, 상기 대화가 위치하는 현재 인터페이스에 대한 조작 옵션, 상기 대화가 속하는 어플리케이션에 대한 조작 옵션을 포함한다.
그러므로, 본 발명에 따른 실시예서 제공하는 제스처 조작에 기반한 대화 처리방법은, 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링하는 것을 통해, 식별해낸 제스처 조작에 의해, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행한다. 대화 조작 인터페이스로 진입할 필요가 없이 현재 대화 인터페이스에서 대화에 대해 조작을 진행할 수 있으므로, 대화 처리 과정을 단축하고 처리 시간을 절약함으로써 사용자의 조작에 더욱 편리하다.
상기는 본 발명의 바람직한 실시예로, 본 발명은 이에 한정되지 않으며, 본 발명의 사싱 및 원칙 내에서의 다양한 수정, 균등 교체, 개진 등은 모두 본 발명의 보호 범위 내에 속한다.

Claims (14)

  1. 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하는 단계와,
    상기 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 제스처 조작을 식별하는 단계와,
    식별해낸 상기 제스처 조작에 기초하여, 상기 현재 대화 인터페이스에서 대화에 대해 대응되는 처리를 진행하는 단계
    를 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  2. 제1항에 있어서,
    상기 제스처 조작은,
    원 핑거 좌향 슬라이딩, 원 핑거 우향 슬라이딩, 멀티 핑거 좌향 슬라이딩, 멀티 핑거 우향 슬라이딩, 원 핑거 상향 슬라이딩, 원 핑거 하향 슬라이딩, 멀티 핑거 상향 슬라이딩, 멀티 핑거 하향 슬라이딩, 원 핑거 클릭, 멀티 핑거 클릭, 원 핑거 핀치 및/또는 멀티 핑거 핀치를 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  3. 제1항에 있어서,
    상기 방법은,
    기준 제스처 조작 및 상기 기준 제스처 조작에 대응되는 처리를 미리 설정하는 단계를 더 포함하며,
    상기 제스처 조작을 식별하는 단계는,
    상기 모니터링된 제스처 조작과 상기 미리 설정된 기준 제스처 조작을 비교하는 단계와,
    비교한 결과, 일치할 경우, 상기 제스처 조작을 식별해 냈음을 확정하는 단계와,
    비교한 결과, 일치하지 않을 경우, 상기 제스처 조작을 식별해 내재 못했음을 확정하는 단계
    를 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  4. 제1항 내지 3항 중 어느 한 항에 있어서,
    상기 제스처 조작을 식별해낸 후, 상기 방법은,
    상기 제스처 조작의 합법성을 검출하는 단계를 더 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  5. 제4항에 있어서,
    상기 제스처 조작이 원 핑거 좌향 슬라이딩, 원 핑거 우향 슬라이딩, 멀티 핑거 좌향 슬라이딩, 멀티 핑거 우향 슬라이딩, 원 핑거 상향 슬라이딩, 원 핑거 하향 슬라이딩, 멀티 핑거 상향 슬라이딩 또는 멀티 핑거 하향 슬라이딩일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는,
    상기 제스처 조작에 의한 상기 대화의 자체 구역 내에서의 슬라이딩 거리를 획득하는 단계와,
    상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하는지의 여부를 검출하는 단계와,
    상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와,
    상기 슬라이딩 거리가 슬라이딩 거리 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계
    를 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  6. 제4항에 있어서,
    상기 제스처 조작이 원 핑거 클릭 또는 멀티 핑거 클릭일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는,
    설정된 시간 내에서의 상기 제스처 조작의 클릭 회수를 획득하는 단계와,
    상기 제스처 조작의 클릭 회수가 회수 한계치를 초과하는지의 여부를 검출하는 단계와,
    상기 클릭 회수가 회수 한계치를 초과했을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계와,
    상기 클릭 회수가 회수 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계
    를 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  7. 제4항에 있어서,
    상기 제스처 조작이 원 핑거 핀치 또는 멀티 핑거 핀치일 경우, 상기 제스처 조작의 합법성을 검출하는 단계는,
    상기 제스처 조작에 의해 생성되는 전압치를 획득하는 단계와,
    상기 제스처 조작에 의해 생성되는 접압치가 전압 한계치를 초과하는지의 여부를 검출하는 단계와, 상기 전압치가 전압 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와, 상기 전압치가 전압 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계를 포함하거나,
    또는
    상기 현재 대화 인터페이스를 표시하는 디스플레이가 플랙시블 디스플레이일 경우, 상기 제스처 조작의 핀치 방향에서의 핀치 깊이값을 획득하는 단계와,
    상기 제스처 조작의 핀치 깊이값이 깊이 한계치를 초과하는지의 여부를 검출하는 단계와,
    상기 깊이값이 깊이 한계치를 초과했을 경우, 상기 제스처 조작이 합법적임을 확정하는 단계와, 상기 깊이값이 깊이 한계치를 초과하지 않았을 경우, 상기 제스처 조작이 합법적이지 않음을 확정하는 단계
    를 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  8. 제1항에 있어서,
    상기 식별해낸 제스처 조작에 의해, 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하는 단계는,
    식별해낸 상기 제스처 조작이 상기 대화를 읽기 완료로 표기하기 위한 동작일 경우, 상기 대화의 상태를 읽기 완료로 업데이트 하는 단계, 또는
    식별해낸 상기 제스처 조작이 상기 대화를 삭제로 표기하기 위한 동작일 경우, 상기 대화를 현재 대화 인터페이스에서 삭제하는 단계, 또는
    식별해낸 상기 제스처 조작이 상기 대화를 포워딩으로 표기하기 위한 동작일 경우, 상기 대화의 포워딩 페이지를 팝업하는 단계, 또는
    식별해낸 상기 제스처 조작이 상기 대화를 맨 위에 고정으로 표기하기 위한 동작일 경우, 상기 대화를 현재 대화 인터페이스에서 맨 위에 고정하여 표시하는 단계
    를 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  9. 제1항에 있어서,
    식별해낸 상기 제스처 조작에 의해, 상기 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하는 단계는,
    상기 식별해낸 제스처 조작이 2급 옵션을 여는 동작일 경우, 상기 대화를 자체 구역에서 좌향 이동, 우향 이동, 상향 이동 또는 하향 이동시키며, 상기 대화의 이동이 발생된 구역에 상기 2급 옵션을 표시하는 단계를 포함하며,
    상기 2급 옵션은, 상기 대화에 대한 조작 옵션, 상기 대화가 위치하는 현재 인터페이스에 대한 조작 옵션, 상기 대화가 속하는 어플리케이션에 대한 조작 옵션
    을 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 방법.
  10. 현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하기 위한 모니터링 모듈,
    상기 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 상기 제스처 조작을 식별하기 위한 식별 모듈, 및
    식별해낸 상기 제스처 조작에 기초하여, 상기 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하기 위한 처리 모듈
    을 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 장치.
  11. 제10항에 있어서,
    상기 제스처 조작의 합법성을 검출하기 위한 검출 모듈을 더 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 장치.
  12. 제10항에 있어서,
    상기 식별 모듈에 의해 식별해낸 제스처 조작이 상기 대화를 읽기 완료로 표기하기 위한 동작일 경우, 상기 처리 모듈은 상기 대화의 상태를 읽기 완료로 업데이트하거나, 또는
    상기 식별 모듈에 의해 식별해낸 제스처 조작이 상기 대화를 삭제로 표기하기 위한 동작일 경우, 상기 처리 모듈은 상기 대화를 현재 대화 인터페이스에서 삭제하거나, 또는,
    상기 식별 모듈에 의해 식별해낸 제스처 조작이 상기 대화를 포워딩으로 표기하기 위한 동작일 경우, 상기 처리 모듈은 상기 대화의 포워딩 페이지를 팝업하거나, 또는
    상기 식별 모듈에 의해 식별해낸 제스처 조작이 상기 대화를 맨 위에 고정으로 표기하기 위한 동작일 경우, 상기 처리모듈은 상기 대화를 현재 대화 인터페이스 상에서 맨 위에 고정하여 표시하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 장치.
  13. 제10항에 있어서,
    상기 식별 모듈에 의해 식별해낸 제스처 조작이 2급 옵션을 여는 동작일 경우, 상기 처리 모듈은,
    상기 대화를 자체 구역에서 좌향 이동, 우향 이동, 상향 이동 또는 하향 이동시키며, 상기 대화의 이동이 발생된 구역에 상기 2급 옵션을 표시하며,
    상기 2급 옵션은,
    상기 대화에 대한 조작 옵션, 상기 대화가 위치하는 현재 인터페이스에 대한 조작 옵션, 상기 대화가 속하는 어플리케이션에 대한 조작 옵션을 포함하는 것을 특징으로 하는 제스처 조작에 기반한 대화 처리 장치.
  14. 메모리와,
    상기 메모리에 저장되는 하나 또는 하나 이상의 프로그램을 포함하며,
    하나 이상의 프로세서를 통해,
    현재 대화 인터페이스에 대한 제스처 조작이 존재하는지를 모니터링 하고,
    상기 현재 대화 인터페이스 중의 임의의 대화에 대한 제스처 조작이 모니터링 되었을 경우, 상기 제스처 조작을 식별하며,
    식별해낸 상기 제스처 조작에 기초하여, 상기 현재 대화 인터페이스에서 상기 대화에 대해 대응되는 처리를 진행하는 인스트럭션을 포함하는 상기 하나 또는 하나 이상의 프로그램을 실행하도록 구성되는 것을 특징으로 하는 단말 장치.
KR1020157013841A 2013-06-24 2014-02-20 제스처에 기반한 대화 처리 방법, 장치, 단말 장치, 프로그램 및 기록 매체 KR20150079829A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201310253279.X 2013-06-24
CN201310253279.XA CN103309673B (zh) 2013-06-24 2013-06-24 一种基于手势的会话处理方法、装置
PCT/CN2014/072327 WO2014206101A1 (zh) 2013-06-24 2014-02-20 一种基于手势的会话处理方法、装置及终端设备

Publications (1)

Publication Number Publication Date
KR20150079829A true KR20150079829A (ko) 2015-07-08

Family

ID=49134934

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157013841A KR20150079829A (ko) 2013-06-24 2014-02-20 제스처에 기반한 대화 처리 방법, 장치, 단말 장치, 프로그램 및 기록 매체

Country Status (9)

Country Link
EP (1) EP3015978A4 (ko)
JP (1) JP6130926B2 (ko)
KR (1) KR20150079829A (ko)
CN (1) CN103309673B (ko)
BR (1) BR112015016187A2 (ko)
IN (1) IN2015DN04199A (ko)
MX (1) MX350847B (ko)
RU (1) RU2621012C2 (ko)
WO (1) WO2014206101A1 (ko)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103309673B (zh) * 2013-06-24 2017-03-01 小米科技有限责任公司 一种基于手势的会话处理方法、装置
CN103530550B (zh) * 2013-09-23 2016-08-24 北京奇虎科技有限公司 移动通讯终端上的文件/应用程序处理方法及装置
US20150121250A1 (en) * 2013-10-31 2015-04-30 Avaya Inc. PROVIDING INTELLIGENT MANAGEMENT FOR WEB REAL-TIME COMMUNICATIONS (WebRTC) INTERACTIVE FLOWS, AND RELATED METHODS, SYSTEMS, AND COMPUTER-READABLE MEDIA
CN105511597B (zh) * 2014-09-25 2019-07-05 腾讯科技（深圳）有限公司 一种基于浏览器的页面控制方法及装置
CN104268245B (zh) * 2014-09-29 2018-05-22 小米科技有限责任公司 信息管理方法和装置
CN105630299A (zh) * 2014-10-30 2016-06-01 阿里巴巴集团控股有限公司 移动终端中信息列表功能的管理方法、装置和移动终端
CN105788228A (zh) * 2014-12-23 2016-07-20 中兴通讯股份有限公司 可穿戴设备控制终端的方法和系统、终端及可穿戴设备
CN106155526B (zh) * 2015-04-28 2020-05-26 阿里巴巴集团控股有限公司 一种信息标记方法及装置
CN105117038B (zh) * 2015-07-28 2017-05-17 广东欧珀移动通信有限公司 一种智能手表的控制方法及智能手表
CN105224071B (zh) * 2015-08-26 2018-12-11 广东欧珀移动通信有限公司 一种数据交互的方法、设备及系统
CN105279687A (zh) * 2015-10-20 2016-01-27 陈宏堃 一种在线购物方法、客户端、服务器及系统
CN105487798B (zh) * 2015-11-26 2019-08-16 小米科技有限责任公司 在触摸屏终端上对通讯应用程序进行操作的方法及装置
CN105700788B (zh) * 2016-01-11 2020-08-18 Oppo广东移动通信有限公司 界面操控方法及移动终端
CN105549892B (zh) * 2016-01-18 2020-03-06 Oppo广东移动通信有限公司 一种增强现实信息的显示方法和装置
CN105912244A (zh) * 2016-04-05 2016-08-31 广东欧珀移动通信有限公司 一种更换显示屏背景的方法及终端
CN107518756B (zh) * 2016-06-21 2022-03-01 佛山市顺德区美的电热电器制造有限公司 烹饪电器的控制方法及装置
CN106227407A (zh) * 2016-07-18 2016-12-14 鼎泰生物科技（海南）有限公司 一种基于血糖仪的多用户管理方法和装置
CN108900407B (zh) * 2017-05-11 2020-08-11 腾讯科技（深圳）有限公司 会话记录的管理方法、装置及存储介质
CN108958854B (zh) * 2017-05-18 2020-11-10 腾讯科技（深圳）有限公司 窗口显示方法、装置及终端
CN108965101B (zh) * 2017-05-26 2020-10-13 腾讯科技（深圳）有限公司 会话消息处理方法、装置、存储介质和计算机设备
CN107682254A (zh) * 2017-11-08 2018-02-09 林碧琴 一种快速显示已确认成员的方法
CN107911281A (zh) * 2017-11-11 2018-04-13 林碧琴 一种方便获知收到群消息顺序的方法
JP7127273B2 (ja) * 2017-11-14 2022-08-30 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
JP7027826B2 (ja) 2017-11-14 2022-03-02 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
CN109729004B (zh) 2018-12-29 2021-08-31 天津字节跳动科技有限公司 会话消息置顶处理方法和装置
CN110012165B (zh) * 2019-03-29 2021-05-18 上海掌门科技有限公司 一种呈现会话列表页面的方法与设备、可读介质
CN110928465A (zh) * 2019-11-29 2020-03-27 维沃移动通信有限公司 一种信息处理方法及电子设备
CN112558853B (zh) * 2020-12-04 2023-03-17 广州博冠信息科技有限公司 会话消息处理方法及装置、电子设备和存储介质

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0612493A (ja) * 1992-06-25 1994-01-21 Hitachi Ltd ジェスチャ認識方法およびユーザインタフェース方法
JP2955149B2 (ja) * 1993-05-11 1999-10-04 グンゼ株式会社 タッチパネルの座標検出装置
US7730401B2 (en) * 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
JP4728019B2 (ja) * 2005-03-11 2011-07-20 キヤノン電子株式会社 ボタン制御装置及び方法、並びにプログラム
US8519963B2 (en) * 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
EP2034399B1 (en) * 2007-09-04 2019-06-05 LG Electronics Inc. Scrolling method of mobile terminal
RU2412463C2 (ru) * 2008-04-08 2011-02-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Терминал мобильной связи и способ управления его меню
KR101461954B1 (ko) * 2008-05-08 2014-11-14 엘지전자 주식회사 단말기 및 그 제어 방법
EP2579143B1 (en) * 2008-12-01 2019-09-18 BlackBerry Limited Portable electronic device and method of controlling same
KR101565768B1 (ko) * 2008-12-23 2015-11-06 삼성전자주식회사 휴대단말의 잠금 모드 해제 방법 및 장치
KR101646922B1 (ko) * 2009-05-19 2016-08-23 삼성전자 주식회사 휴대 단말기의 통신 관련 기능 운용 방법 및 이를 지원하는 휴대 단말기
US8072437B2 (en) * 2009-08-26 2011-12-06 Global Oled Technology Llc Flexible multitouch electroluminescent display
KR101684704B1 (ko) * 2010-02-12 2016-12-20 삼성전자주식회사 휴대용 단말기에서 메뉴 실행 방법 및 이를 제공하는 장치
CN102339152A (zh) * 2010-07-20 2012-02-01 上海闻泰电子科技有限公司 具有ClearPad功能的移动终端及其实现方法
US8645872B2 (en) * 2010-11-30 2014-02-04 Verizon Patent And Licensing Inc. User interfaces for facilitating merging and splitting of communication sessions
CN102419650A (zh) * 2011-05-06 2012-04-18 北京汇冠新技术股份有限公司 一种多点触控的实现方法及系统
JP5802830B2 (ja) * 2011-06-05 2015-11-04 アップル インコーポレイテッド 複数のアプリケーションから受信した通知を表示するためのシステムおよび方法
JP5829982B2 (ja) * 2011-06-28 2015-12-09 京セラ株式会社 電子機器、報知制御方法および制御プログラム
JP2013016116A (ja) * 2011-07-06 2013-01-24 Sony Corp 情報処理装置、画像表示装置、および情報処理方法
JP5693408B2 (ja) * 2011-07-19 2015-04-01 シャープ株式会社 動作装置
JP5633906B2 (ja) * 2011-09-08 2014-12-03 Kddi株式会社 画面への押圧でページ捲りが可能な電子書籍表示装置及びプログラム
US9880640B2 (en) * 2011-10-06 2018-01-30 Amazon Technologies, Inc. Multi-dimensional interface
CN102662598A (zh) * 2012-04-25 2012-09-12 深圳市中兴移动通信有限公司 基于手势滑动的会话查看方法及装置、触屏智能终端
CN202798884U (zh) * 2012-07-31 2013-03-13 北京播思软件技术有限公司 一种具有手势控制电话功能的移动终端
CN102915202A (zh) * 2012-09-25 2013-02-06 广东欧珀移动通信有限公司 一种触摸设备的触控方法及系统
CN102981756A (zh) * 2012-11-01 2013-03-20 山东大学 一种触屏移动终端上快速切换应用的方法
CN103309673B (zh) * 2013-06-24 2017-03-01 小米科技有限责任公司 一种基于手势的会话处理方法、装置

Also Published As

Publication number Publication date
WO2014206101A1 (zh) 2014-12-31
CN103309673B (zh) 2017-03-01
JP2015535626A (ja) 2015-12-14
CN103309673A (zh) 2013-09-18
BR112015016187A2 (pt) 2017-07-11
IN2015DN04199A (ko) 2015-10-16
RU2621012C2 (ru) 2017-05-30
JP6130926B2 (ja) 2017-05-17
MX2015007250A (es) 2015-08-12
EP3015978A1 (en) 2016-05-04
RU2015120739A (ru) 2017-03-27
EP3015978A4 (en) 2016-12-07
MX350847B (es) 2017-09-21

Similar Documents

Publication Publication Date Title
KR20150079829A (ko) 제스처에 기반한 대화 처리 방법, 장치, 단말 장치, 프로그램 및 기록 매체
US20200183574A1 (en) Multi-Task Operation Method and Electronic Device
KR101652373B1 (ko) 가상 키보드 표시방법, 장치, 단말기, 프로그램 및 기록매체
CN107493389A (zh) 单手模式实现方法、终端及计算机可读介质
WO2017125027A1 (zh) 一种进行信息展示的方法和装置、计算机存储介质
CN105022552B (zh) 一种显示消息列表的方法和装置
CN106375179B (zh) 一种显示即时通信消息的方法和装置
CN103543913A (zh) 一种终端设备操作方法、装置和终端设备
CN108958606B (zh) 分屏显示方法、装置、存储介质和电子设备
US10320730B2 (en) Method and device for displaying message
CN103677633B (zh) 屏幕解锁方法、装置和终端
CN110531915B (zh) 屏幕操作方法及终端设备
CN103677564B (zh) 滑动操作响应方法、装置及终端设备
US9798713B2 (en) Method for configuring application template, method for launching application template, and mobile terminal device
TW201516844A (zh) 一種物件選擇的方法和裝置
US11290591B2 (en) Dialing method and mobile terminal
EP2846296A1 (en) Method, apparatus and terminal device for displaying messages
CN103813127A (zh) 一种视频通话方法、终端及系统
WO2017128986A1 (zh) 多媒体菜单项的选择方法、装置及存储介质
CN103677417B (zh) 一种检测手势的方法、装置及终端设备
CN104238931B (zh) 信息输入方法、装置及电子设备
CN105513098B (zh) 一种图像处理的方法和装置
CN104090743A (zh) 用于移动终端的音乐定位方法、装置及移动终端
US20150089370A1 (en) Method and device for playing media data on a terminal
CN110908586B (zh) 一种键盘的显示方法、装置及终端设备

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment