KR102340735B1 - 사용자 인터페이스 제공 장치 및 방법 - Google Patents

사용자 인터페이스 제공 장치 및 방법 Download PDF

Info

Publication number
KR102340735B1
KR102340735B1 KR1020190082902A KR20190082902A KR102340735B1 KR 102340735 B1 KR102340735 B1 KR 102340735B1 KR 1020190082902 A KR1020190082902 A KR 1020190082902A KR 20190082902 A KR20190082902 A KR 20190082902A KR 102340735 B1 KR102340735 B1 KR 102340735B1
Authority
KR
South Korea
Prior art keywords
input
operation state
voice
applications
state
Prior art date
Application number
KR1020190082902A
Other languages
English (en)
Other versions
KR20210006814A (ko
Inventor
박종민
소송희
소한나
이주원
Original Assignee
주식회사 엔씨소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엔씨소프트 filed Critical 주식회사 엔씨소프트
Priority to KR1020190082902A priority Critical patent/KR102340735B1/ko
Publication of KR20210006814A publication Critical patent/KR20210006814A/ko
Application granted granted Critical
Publication of KR102340735B1 publication Critical patent/KR102340735B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04164—Connections between sensors and controllers, e.g. routing lines between electrodes and connection pads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

사용자 인터페이스 제공 방법 및 장치가 제공된다. 사용자 인터페이스 제공 장치는 음성 입력 또는 음성 출력을 제공하는 복수의 어플리케이션을 유지하는 메모리, 실행중인 복수의 어플리케이션이 디스플레이 상에 디스플레이 되도록 제어하는 디스플레이 컨트롤러, 상기 디스플레이에 대한 사용자 입력을 센싱하는 터치 센서 및 상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 프로세서를 포함하고, 상기 디스플레이 컨트롤러는, 상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공한다.

Description

사용자 인터페이스 제공 장치 및 방법{APPARTUS AND METHOD FOR PROVIDING USER INTERFACE}
아래의 실시예들은 아래의 실시예들은 사용자 인터페이스 제공 장치 및 방법에 관한 것이다.
PC(Personal Computer)용 게임, 비디오용 게임, 무선 단말기용 게임, 네트워크 게임 등에서 음성 입력을 통해 다른 플레이어와 커뮤니케이션할 수 있는 기능이 제공된다. 복수의 어플리케이션을 실행할 경우, 선택적으로 음성 입력을 제어할 필요성이 제기된다.
본 발명의 일실시예에 따르면, 사용자 인터페이스 제공 장치는 간단한 조작을 통해 복수의 어플리케이션의 음성 입력의 활성 상태를 제어할 수 있는 사용자 인터페이스를 제공함으로써 사용자 편의성을 높일 수 있다.
본 발명의 일 실시예에 따르면, 사용자 인터페이스를 제공하기 위한 장치에 있어서, 음성 입력 또는 음성 출력을 제공하는 복수의 어플리케이션을 유지하는 메모리; 실행중인 복수의 어플리케이션이 디스플레이 상에 디스플레이 되도록 제어하는 디스플레이 컨트롤러; 상기 디스플레이에 대한 사용자 입력을 센싱하는 터치 센서; 및 상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 프로세서를 포함하고, 상기 디스플레이 컨트롤러는, 상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공할 수 있다.
상기 디스플레이 컨트롤러는, 음성 제어 아이콘을 상기 디스플레이 상에 표시하고, 상기 프로세서는, 상기 음성 제어 아이콘에 대한 상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어할 수 있다.
상기 디스플레이 컨트롤러는, 상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션의 테두리를 미리 정해진 색상으로 표시할 수 있다.
상기 프로세서는, 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 초기화할 수 있다.
상기 사용자 입력은 제1 터치 입력 및 제2 터치 입력을 포함하고, 상기 프로세서는, 상기 음성 제어 아이콘에 대한 상기 제1 터치 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태의 제어를 활성화하고, 상기 제2 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
상기 사용자 입력은 드래그 입력을 포함하고, 상기 프로세서는, 상기 드래그 입력에 의해 이동되는 상기 음성 제어 아이콘이 위치한 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 변경할 수 있다.
상기 사용자 입력은 포스 터치 입력을 포함하고, 상기 프로세서는, 상기 포스 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
상기 사용자 입력은 롱 프레스 입력을 포함하고, 상기 프로세서는, 상기 롱 프레스 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
상기 프로세서는, 새로 실행하는 어플리케이션이 미리 설정된 어플리케이션인 경우, 상기 새로 실행하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 초기화하고, 이미 실행 중인 상기 복수의 어플리케이션의 음성 입력의 동작 상태는 비활성화 상태로 변경하고, 상기 디스플레이 컨트롤러는, 상기 새로 실행하는 어플리케이션에 시각적 효과를 제공할 수 있다.
일 실시예에 따르면, 사용자 인터페이스 제공 방법은 복수의 어플리케이션을 실행하는 동작; 사용자 입력을 수신하는 동작: 상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작; 및 상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공하는 동작을 포함할 수 있다.
상기 사용자 입력은 제1 터치 입력 및 제2 터치 입력을 포함하고, 상기 동작 상태를 제어하는 동작은, 상기 음성 제어 아이콘에 대한 상기 제1 터치 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태의 제어를 활성화하는 동작; 및 상기 제2 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경하는 동작을 포함할 수 있다.
상기 사용자 입력은 드래그 입력을 포함하고, 상기 동작 상태를 제어하는 동작은, 상기 드래그 입력에 의해 이동되는 상기 음성 제어 아이콘이 위치한 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 변경할 수 있다.
상기 사용자 입력은 포스 터치 입력을 포함하고, 상기 동작 상태를 제어하는 동작은, 상기 포스 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
상기 사용자 입력은 롱 프레스 입력을 포함하고, 상기 동작 상태를 제어하는 동작은, 상기 롱 프레스 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
본 발명의 일실시예에 따르면, 간단한 조작을 통해 복수의 어플리케이션의 음성 입력의 활성 상태를 제어할 수 있는 사용자 인터페이스를 제공함으로써 사용자 편의성을 높이는 효과를 달성할 수 있다.
도 1은 일 실시예에 따른 사용자 인터페이스 제공 장치에 의해 복수의 어플리케이션의 음성 입력의 동작 상태가 제어되는 상황을 도시한 도면이다.
도 2는 일 실시예에 따른 사용자 인터페이스 제공 장치의 전체 구성을 도시한 도면이다.
도 3은 일 실시예에 따른 사용자 인터페이스 제공 방법의 동작을 도시한 순서도이다.
도 4는 복수의 어플리케이션의 음성 입력의 동작 상태가 제어되는 일례를 도시한 도면이다.
도 5는 복수의 어플리케이션의 음성 입력의 동작 상태가 제어되는 다른 일례를 도시한 도면이다.
본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시 예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시 예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시 예들은 다양한 형태들로 실시될 수 있으며 본 명세서에 설명된 실시 예들에 한정되지 않는다.
본 발명의 개념에 따른 실시 예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시 예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예들을 특정한 개시 형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1구성요소는 제2구성요소로 명명될 수 있고, 유사하게 제2구성요소는 제1구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미가 있다.
일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하의 설명에서 동일한 식별 기호는 동일한 구성을 의미하며, 불필요한 중복적인 설명 및 공지 기술에 대한 설명은 생략하기로 한다.
본 발명의 실시 예에서 '통신', '통신망' 및 '네트워크'는 동일한 의미로 사용될 수 있다. 상기 세 용어들은, 파일을 사용자 단말, 다른 사용자들의 단말 및 다운로드 서버 사이에서 송수신할 수 있는 유무선의 근거리 및 광역 데이터 송수신망을 의미한다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다.
도 1은 일 실시예에 따른 사용자 인터페이스 제공 장치에 의해 복수의 어플리케이션의 음성 입력의 동작 상태가 제어되는 상황을 도시한 도면이다.
일 실시예에 따르면, 사용자 인터페이스 제공 장치(100)는 복수의 어플리케이션의 음성 입력을 제어할 수 있다. 사용자 인터페이스 제공 장치(100)는 복수의 어플리케이션의 음성 입력의 활성 상태를 제어할 수 있다. 사용자 인터페이스 제공 장치(100)는 간단한 사용자 입력을 통해 복수의 어플리케이션의 음성 입력을 제어할 수 있는 사용자 인터페이스를 제공할 수 있다. 사용자 인터페이스 제공 장치(100)는 터치 센서에 대한 사용자 입력을 통해 복수의 어플리케이션의 음성 입력을 제어할 수 있는 직관적인 사용자 인터페이스를 제공할 수 있다.
사용자(101)는 스마트폰 등의 클라이언트를 통해 복수의 어플리케이션을 수행할 수 있다. 어플리케이션 중에서는 음성 입력을 수신하는 어플리케이션이 존재할 수 있다. 복수의 어플리케이션 중에서 선택적으로 음성 입력을 수신하거나 수신하지 않도록 제어할 필요가 발생할 수 있다. 이를 위해, 종래 기술에 따르면, 사용자(101)는 각각의 어플리케이션의 설정 화면에서 음성 입력의 활성 상태를 제어해야 한다.
일 실시예에 따르면, 사용자 인터페이스 제공 장치(100)는 간단한 조작을 통해 복수의 어플리케이션의 음성 입력의 활성 상태를 제어할 수 있는 사용자 인터페이스를 제공할 수 있다. 사용자 인터페이스 제공 장치(100)는 터치 센서를 통한 사용자 입력을 제공함으로써 간단하고 직관적인 조작을 가능하게 할 수 있다. 사용자 인터페이스 제공 장치(100)는 음성 입력의 활성화 상태의 제어 모드와 어플리케이션의 일반적인 실행 모드를 전환하는 음성 제어 아이콘을 제공할 수 있다.
사용자 인터페이스 제공 장치(100)는 터치 센서를 통해 사용자 입력을 수신할 수 있다. 사용자 입력은 터치 센서에 의해 검출될 수 있는 다양한 실시예를 포함할 수 있다. 예를 들어 사용자 입력은 터치(touch) 입력, 드래그(drag) 입력, 포스 터치(force touch) 입력, 롱 프레스(long press) 입력 등을 포함할 수 있다. 다만, 이들은 예시에 불과하며 사용자 입력은 이에 한정되지 않고 터치 센서를 통해 검출될 수 있는 모든 입력을 포함할 수 있다.
사용자 인터페이스 제공 장치(100)는 음성 제어 아이콘을 제공함으로써 음성 입력의 활성화 상태의 제어 모드와 어플리케이션의 일반적인 실행 모드를 전환할 수 있다. 음성 제어 아이콘은 디스플레이의 화면의 임의의 위치에 표시될 수 있다. 음성 제어 아이콘은 디스플레이의 화면의 특정 위치에 표시될 수 있다. 음성 제어 아이콘은 사용자 입력에 의해 이동될 수 있다. 음성 제어 아이콘은 터치 센서에 대한 사용자 입력에 의해 특정 위치에서 다른 위치로 이동될 수 있다.
음성 제어 아이콘의 위치는 제어되는 어플리케이션의 선택과 무관할 수 있다. 음성 제어 아이콘은 하나 이상의 어플리케이션과 중첩되어 표시될 수 있다. 음성 제어 아이콘은 중첩되는 어플리케이션의 활성화 상태만 제어하는 것이 아니라 전체 어플리케이션의 모드를 음성 입력의 활성화 상태의 제어 모드로 전환하는 기능을 수행할 수 있다.
음성 제어 아이콘의 위치는 제어되는 어플리케이션의 선택과 유관할 수 있다. 음성 제어 아이콘은 하나 이상의 어플리케이션과 중첩되어 표시될 수 있다. 음성 제어 아이콘은 중첩되어 표시되는 어플리케이션의 음성 입력의 활성화 상태를 제어할 수 있다. 만일, 음성 제어 아이콘이 여러 개의 어플리케이션의 걸쳐서 표시된 경우, 해당 어플리케이션들의 음성 입력의 활성화 상태를 제어할 수 있다.
도 1을 참조하면, 사용자(101)는 사용자 인터페이스 제공 장치(100)를 통해 복수의 어플리케이션을 실행할 수 있다. 예를 들어, 사용자 인터페이스 제공 장치(100)는 3 개의 어플리케이션을 실행할 수 있다. 각각이 어플리케이션은 사용자 인터페이스 제공 장치(100)의 디스플레이를 통해 동시에 표시될 수 있다. 사용자 인터페이스 제공 장치(100)는 제1 어플리케이션의 화면(110), 제2 어플리케이션의 화면(120) 및 제3 어플리케이션의 화면(130)을 표시할 수 있다.
사용자 인터페이스 제공 장치(100)는 복수의 어플리케이션의 음성 입력의 활성화 상태를 제어할 수 있다. 예를 들어, 사용자 인터페이스 제공 장치(100)는 제1 어플리케이션과 제3 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 제어할 수 있다. 사용자 인터페이스 제공 장치(100)는 제2 어플리케이션의 음성 입력의 동작 상태를 비활성화 상태로 제어할 수 있다.
사용자 인터페이스 제공 장치(100)는 어플리케이션의 음성 입력의 동작 상태에 대응하여 동작 상태 아이콘을 디스플레이에 표시할 수 있다. 예를 들어, 사용자 인터페이스 제공 장치(100)는 동작 상태 아이콘(111)을 표시함으로써 제1 어플리케이션의 동작 상태가 활성화 상태라는 것을 나타낼 수 있다. 사용자 인터페이스 제공 장치(100)는 동작 상태 아이콘(121)을 표시함으로써 제2 어플리케이션의 동작 상태가 비활성화 상태라는 것을 나타낼 수 있다. 사용자 인터페이스 제공 장치(100)는 동작 상태 아이콘(131)을 표시함으로써 제3 어플리케이션의 동작 상태가 활성화 상태라는 것을 나타낼 수 있다.
동작 상태 아이콘(111, 121, 131)은 일정한 시간동안 표시될 수 있다. 예를 들어, 사용자(101)는 동작 상태 아이콘(111, 121, 131)을 통해 복수의 어플리케이션의 변경된 동작 상태를 파악할 수 있다. 사용자 입력을 통해 어플리케이션의 동작 상태에 상태 변경이 발생된 경우, 상태 변경이 발생된 시점부터 일정한 시간 동안 동작 상태 아이콘(111, 121, 131)이 표시될 수 있다. 다른 예로, 사용자(101)는 동작 상태 아이콘(111, 121, 131)을 통해 복수의 어플리케이션의 현재의 동작 상태를 알 수 있다. 음성 제어 아이콘이 표시된 디스플레이의 위치에 사용자 입력이 입력된 경우, 입력 시점으로부터 일정한 시간 동안 동작 상태 아이콘(111, 121, 131)이 표시될 수 있다. 이처럼, 일정한 시간동안 동작 상태 아이콘(111, 121, 131)이 표시됨으로써, 사용자에게 어플리케이션의 음성 입력의 동작 상태가 제공되면서도 어플리케이션의 실행에 대한 방해는 최소화될 수 있다.
사용자 인터페이스 제공 장치(100)는 사용자의 키 조작에 따라 AP를 포함한 통신 중개장치를 이용하여 각종 데이터를 송수신할 수 있는 단말기를 포함할 수 있으며, 태블릿 PC(Tablet PC), 랩톱(Laptop), 개인용 컴퓨터(PC: Personal Computer), 스마트폰(Smart Phone), 개인휴대용 정보단말기(PDA: Personal Digital Assistant) 및 이동통신 단말기(Mobile Communication Terminal) 등 중 어느 하나일 수 있다. 인터페이스 제공 장치(100)는 폴더블 스마트폰을 포함할 수 있다. 사용자 인터페이스 제공 장치(100)는 AP 및 통신망을 이용하여 음성 또는 데이터 통신을 수행하는 단말기이며, AP 및 통신망을 경유하여 외부 장치와 통신하기 위한 프로그램 또는 프로토콜을 저장하기 위한 메모리, 해당 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하고 있는 단말기를 의미한다. 즉, 사용자 인터페이스 제공 장치(100)는 AP 및 통신망을 이용하여 통신이 가능하다면 그 어떠한 단말기도 가능하며, 노트북 컴퓨터, 이동통신 단말기, PDA 등 여하한 통신 컴퓨팅 장치를 모두 포함하는 넓은 개념이다. 한편, 사용자 인터페이스 제공 장치(100)는 사용자의 조작을 통한 입출력을 수행하기 위해 터치 스크린을 구비한 형태로 제작되는 것이 바람직하며, 사용자의 조작에 따른 입력을 통해 게임 프로그램을 구동할 수 있다.
사용자 인터페이스 제공 장치(100)는 비디오 게임용 단말기, 오락실용 단말기, 휴대용 단말기, PC용 단말기, 유선 또는 무선 단말기를 적어도 하나 이상 포함하여 이루어지는 것이 바람직하며, 단말기에 구비된 소정의 키입력수단은 키보드, 마우스, 게임조작 유니트, 아날로그 유니트, 터치 스크린을 적어도 하나 이상 포함할 수 있다.
사용자 인터페이스 제공 장치(100)는, 사용자 장비, 모바일, 무선 통신이 가능한 PC, 핸드폰, 키오스크, 셀룰러 폰, 셀룰러, 셀룰러 단말, 가입자 유닛, 가입자국, 이동국, 단말, 원격국, PDA, 원격 단말, 액세스 단말, 사용자 에이전트, 무선 접속 기능을 구비하는 휴대용 장치, 무선 모뎀과 같은, 무선 접속 매커니즘을 사용할 수 있는 임의의 장치 등으로 지칭될 수 있으나, 이들로 한정되지는 않는다. 사용자 인터페이스 제공 장치(100)는 단말기 또는 피어로 지칭될 수도 있다.
도 2는 일 실시예에 따른 사용자 인터페이스 제공 장치의 전체 구성을 도시한 도면이다.
일 실시예에 따르면, 사용자 인터페이스 제공 장치(100)는 메모리(201), 디스플레이 컨트롤러(203), 프로세서(205) 및 터치 센서(207)를 포함한다.
메모리(201)는 음성 입력 또는 음성 출력을 제공하는 복수의 어플리케이션을 유지한다. 메모리(201)는 하나 이상의 어플리케이션의 실행을 위한 데이터를 저장할 수 있다. 메모리(201)는 각 어플리케이션의 음성 입력의 동작 상태를 저장할 수 있다. 메모리(201)는 각 어플리케이션의 음성 입력의 동작 상태의 변경을 위한 인스트럭션(instruction)들을 저장할 수 있다.
디스플레이 컨트롤러(203)는 실행중인 복수의 어플리케이션이 디스플레이 상에 디스플레이 되도록 제어한다. 디스플레이는 터치 센서를 통해 장치와 사용자 사이의 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플레이 컨트롤러(203)는 디스플레이로부터 전기 신호를 수신하거나, 디스플레이로 전기 신호를 송신하거나, 양자 모두일 수 있다. 디스플레이는 사용자에 대한 시각적 출력을 디스플레이한다. 시각적 출력은 그래픽들, 텍스트, 아이콘, 비디오 및 이들의 임의의 조합(총괄하여 "그래픽들"이라고 지칭됨)을 포함할 수 있다.
터치 센서(207)는 디스플레이에 대한 사용자 입력을 센싱한다. 디스플레이 내의 터치 센서(207) 햅틱 접촉(haptic contact) 및/또는 택틸(tactile) 접촉에 기초하여 사용자로부터의 입력을 받아들이는 터치-감지 표면이다. 디스플레이 및 디스플레이 컨트롤러(203)는 (메모리(201)의 임의의 관련 모듈 및/또는 명령어 집합과 함께) 디스플레이 상의 (접촉의 임의의 움직임(movement) 또는 해제 및) 접촉을 감지하고 감지된 접촉을 디스플레이 상에 디스플레이될 (하나 이상의 소프트 키, 아이콘, 웹 페이지 또는 이미지 등의) 사용자-인터페이스 객체와의 상호 작용으로 변환한다. 예시적인 실시예에서, 디스플레이 내의 터치 센서(207)와 사용자 사이의 접촉점은 사용자의 손가락에 대응한다.
디스플레이는 LCD(액정 디스플레이) 기술 또는 LPD(light emitting polymer display, 발광 중합체 디스플레이) 기술이 사용될 수 있지만, 기타 디스플레이 기술이 다른 실시예에서 사용될 수 있다. 터치 센서(207) 및 디스플레이 컨트롤러(203)는, 정전용량식 기술(capacitive technology), 저항식 기술(resistative), 적외선 기술(infrared technology) 및 표면 음파 기술(surface acoustic wave technology) 뿐만 아니라 근접 센서 배열(proximity sensor array) 또는 디스플레이 내의 터치 스크린과의 하나 이상의 접촉점을 결정하기 위한 기타 구성요소를 포함하지만, 이들로 한정되지 않는 복수의 터치 감지 기술 중 임의의 것을 이용하여 접촉 및 임의의 접촉의 움직임이나 해제를 감지할 수 있다.
프로세서(205)는 사용자 입력에 반응하여 복수의 어플리케이션의 음성 입력의 동작 상태를 제어한다. 프로세서(205)는 간단한 조작을 통해 복수의 어플리케이션의 음성 입력의 활성 상태를 제어할 수 있는 사용자 인터페이스를 제공할 수 있다. 프로세서(205)는 터치 센서를 통한 사용자 입력을 제공함으로써 간단하고 직관적인 조작을 가능하게 할 수 있다.
디스플레이 컨트롤러(203)는 사용자 입력에 반응하여 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공할 수 있다. 예를 들어, 디스플레이 컨트롤러(203)는 어플리케이션의 동작 상태가 활성화 상태인 경우에, 해당 어플리케이션의 실행 화면의 외곽을 특정한 색상 또는 패턴으로 표시할 수 있다. 디스플레이 컨트롤러(203)는 어플리케이션의 동작 상태가 비활성화 상태인 경우에, 해당 어플리케이션의 실행 화면의 외곽을 다른 색상 또는 패턴으로 표시할 수 있다. 디스플레이 컨트롤러(203)는 사용자 입력에 반응하여 음성 입력의 동작 상태가 활성화인 어플리케이션의 테두리를 미리 정해진 색상으로 표시할 수 있다. 다른 예로, 디스플레이 컨트롤러(203)는 어플리케이션의 음성 입력의 동작 상태에 대응하여 동작 상태 아이콘을 디스플레이에 표시할 수 있다. 예를 들어, 디스플레이 컨트롤러(203)는 동작 상태 아이콘을 표시함으로써 어플리케이션의 동작 상태가 활성화 상태 또는 비활성화 상태라는 것을 나타낼 수 있다.
디스플레이 컨트롤러(203)는 음성 제어 아이콘을 디스플레이 상에 표시할 수 있다. 프로세서(205)는 음성 제어 아이콘에 대한 사용자 입력에 반응하여 복수의 어플리케이션의 음성 입력의 동작 상태를 제어할 수 있다. 프로세서(205)는 음성 제어 아이콘을 제공함으로써 음성 입력의 활성화 상태의 제어 모드와 어플리케이션의 일반적인 실행 모드를 전환할 수 있다.
음성 제어 아이콘은 디스플레이의 화면의 임의의 위치에 표시될 수 있다. 음성 제어 아이콘은 디스플레이의 화면의 특정 위치에 표시될 수 있다. 음성 제어 아이콘은 사용자 입력에 의해 이동될 수 있다. 음성 제어 아이콘은 터치 센서에 대한 사용자 입력에 의해 특정 위치에서 다른 위치로 이동될 수 있다.
음성 제어 아이콘은 하나 이상의 어플리케이션과 중첩되어 표시될 수 있다. 음성 제어 아이콘의 위치는 제어되는 어플리케이션의 선택과 무관할 수 있다. 이 경우, 음성 제어 아이콘은 전체 어플리케이션의 모드 변경을 제어할 수 있다. 음성 제어 아이콘의 위치는 제어되는 어플리케이션의 선택과 유관할 수 있다. 이 경우, 음성 제어 아이콘은 중첩되어 표시되는 어플리케이션의 음성 입력의 활성화 상태를 제어할 수 있다. 만일, 음성 제어 아이콘이 여러 개의 어플리케이션의 걸쳐서 표시된 경우, 해당 어플리케이션들의 음성 입력의 활성화 상태를 제어할 수 있다.
프로세서(205)는 복수의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 초기화할 수 있다. 프로세서(205)는 음성 제어 아이콘을 통해 어플리케이션들의 동작 상태를 제어하기 전에, 어플리케이션들의 동작 상태를 활성화 상태로 초기화할 수 있다. 초기화 설정은 임의적인 것으로서, 어플리케이션들의 동작 상태는 비활성화 상태로 초기화될 수도 있다.
프로세서(205)는 복수의 어플리케이션의 동작 상태를 제어할 수 있다. 프로세서(205)는 터치 센서(207)에 대한 사용자 입력을 통해 복수의 어플리케이션의 동작 상태를 제어할 수 있다. 사용자 입력은 터치 센서에 의해 검출될 수 있는 다양한 실시예를 포함할 수 있다. 예를 들어 사용자 입력은 터치 입력, 드래그 입력, 포스 터치 입력, 롱 프레스 입력 등을 포함할 수 있다.
일 실시예에 따르면, 사용자 입력은 제1 터치 입력 및 제2 터치 입력을 포함할 수 있다. 프로세서(205)는 음성 제어 아이콘에 대한 제1 터치 입력에 반응하여 복수의 어플리케이션의 음성 입력의 동작 상태의 제어를 활성화하고, 제2 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
다른 실시예에 따르면, 사용자 입력은 드래그 입력을 포함할 수 있다. 프로세서(205)는 드래그 입력에 의해 이동되는 음성 제어 아이콘이 위치한 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 변경할 수 있다. 사용자는 음성 제어 아이콘을 제1 위치에서 제2 위치로 드래그할 수 있다. 이를 통해, 제1 위치를 포함하는 실행 화면에 대응하는 어플리케이션의 동작 상태는 비활성화 상태로 변경되고, 제2 위치를 포함하는 실행 화면에 대응하는 어플리케이션의 동작 상태는 활성화 상태로 변경될 수 있다.
다른 실시예에 따르면, 사용자 입력은 포스 터치 입력을 포함할 수 있다. 포스 터치 입력은 터치 압력이 임계값 이상인 터치 입력을 의미할 수 있다. 프로세서(205)는 포스 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
다른 실시예에 따르면, 사용자 입력은 롱 프레스입력을 포함할 수 있다. 롱 프레스 입력은 터치 시간이 임계값 이상인 터치 입력을 의미할 수 있다. 프로세서(205)는 롱 프레스 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
새로 실행하는 어플리케이션이 미리 설정된 어플리케이션인 경우, 프로세서(205)는 새로 실행하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 초기화하고, 이미 실행 중인 복수의 어플리케이션의 음성 입력의 동작 상태는 비활성화 상태로 변경할 수 있다. 예를 들어, 게임 프로그램을 실행 중에 전화가 걸려온 경우, 게임 프로그램의 음성 입력의 동작 상태는 자동으로 비활성화 상태로 변경되고, 전화 프로그램의 음성 입력의 동작 상태는 자동으로 활성화 상태로 변경될 수 있다. 디스플레이 컨트롤러(203)는 새로 실행하는 어플리케이션에 시각적 효과를 제공할 수 있다. 예를 들어, 디스플레이 컨트롤러(203) 새로 실행하는 어플리케이션의 실행 화면의 외곽을 특정한 색상 또는 패턴으로 표시할 수 있다. 다른 예로, 디스플레이 컨트롤러(203)는 새로 실행하는 어플리케이션의 음성 입력의 동작 상태에 대응하여 동작 상태 아이콘을 디스플레이에 표시할 수 있다.
도 3은 일 실시예에 따른 사용자 인터페이스 제공 방법의 동작을 도시한 순서도이다.
일 실시예에 따르면, 동작(301)에서, 사용자 인터페이스 제공 장치(100)는 복수의 어플리케이션을 실행한다.
일 실시예에 따르면, 동작(303)에서, 사용자 인터페이스 제공 장치(100)는 사용자 입력을 수신한다.
일 실시예에 따르면, 동작(305)에서, 사용자 인터페이스 제공 장치(100)는 사용자 입력에 반응하여 복수의 어플리케이션의 음성 입력의 동작 상태를 제어한다.
일 실시예에 따르면, 사용자 입력은 제1 터치 입력 및 제2 터치 입력을 포함하고, 사용자 인터페이스 제공 장치(100)는 음성 제어 아이콘에 대한 제1 터치 입력에 반응하여 복수의 어플리케이션의 음성 입력의 동작 상태의 제어를 활성화할 수 있다. 사용자 인터페이스 제공 장치(100)는 제2 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
다른 실시예에 따르면, 사용자 입력은 드래그 입력을 포함하고, 사용자 인터페이스 제공 장치(100)는 드래그 입력에 의해 이동되는 음성 제어 아이콘이 위치한 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 변경할 수 있다.
다른 실시예에 따르면, 사용자 입력은 포스 터치 입력을 포함하고, 사용자 인터페이스 제공 장치(100)는 포스 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
다른 실시예에 따르면, 사용자 입력은 롱 프레스 입력을 포함하고, 사용자 인터페이스 제공 장치(100)는 롱 프레스 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
일 실시예에 따르면, 동작(307)에서, 사용자 인터페이스 제공 장치(100)는 사용자 입력에 반응하여 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공한다.
도 4는 복수의 어플리케이션의 음성 입력의 동작 상태가 제어되는 일례를 도시한 도면이다.
도 4를 참조하면, 사용자 인터페이스 제공 장치(100)는 드래그 입력에 의해 이동되는 음성 제어 아이콘이 위치한 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 변경할 수 있다. 음성 제어 아이콘의 위치를 포함하는 실행 화면에 대응하는 어플리케이션의 동작 상태는 활성화 상태일 수 있다.
디스플레이의 화면(413)은 3 개의 어플리케이션의 실행 화면(414, 415, 416)으로 분할될 수 있다. 음성 제어 아이콘(417)은 실행 화면(414)과 실행 화면(416)의 경계에 위치할 수 있다. 음성 제어 아이콘(417)의 위치를 포함하는 실행 화면(414, 416)에 대응하는 어플리케이션의 동작 상태는 활성화 상태일 수 있다. 사용자(411)의 음성 입력(412)는 실행 화면(414, 416)에 대응하는 어플리케이션에 입력될 수 있다.
사용자는 음성 제어 아이콘(417)을 제1 위치에서 제2 위치로 드래그 할 수 있다. 이를 통해, 제1 위치를 포함하는 실행 화면(414)에 대응하는 어플리케이션의 동작 상태는 비활성화 상태로 변경되고, 제2 위치를 포함하는 실행 화면(426)에 대응하는 어플리케이션의 동작 상태는 활성화 상태로 변경될 수 있다.
디스플레이의 화면(423)은 3 개의 어플리케이션의 실행 화면(424, 425, 426)으로 분할될 수 있다. 음성 제어 아이콘(427)은 실행 화면(426)에 위치할 수 있다. 음성 제어 아이콘(427)의 위치를 포함하는 실행 화면(426)에 대응하는 어플리케이션의 동작 상태는 활성화 상태일 수 있다. 반면에, 음성 제어 아이콘(427)의 위치를 포함하지 않는 실행 화면(424, 425)에 대응하는 어플리케이션의 동작 상태는 비활성화 상태일 수 있다. 사용자(421)의 음성 입력(422)는 실행 화면(426)에 대응하는 어플리케이션에 입력될 수 있다.
도 5는 복수의 어플리케이션의 음성 입력의 동작 상태가 제어되는 다른 일례를 도시한 도면이다.
초기 화면(513)에서, 실행 화면(514)과 실행 화면(516)에 대응하는 어플리케이션의 동작 상태는 활성화 상태일 수 있고, 실행 화면(515)에 대응하는 어플리케이션의 동작 상태는 비활성화 상태일 수 있다. 음성 입력(512)은 실행 화면(514)과 실행 화면(516)에 대응하는 어플리케이션에 입력될 수 있다.
일 실시예에 따르면, 사용자 입력은 제1 터치 입력 및 제2 터치 입력을 포함할 수 있다. 사용자 인터페이스 제공 장치(100)는 음성 제어 아이콘(517)에 대한 제1 터치 입력에 반응하여 복수의 어플리케이션의 음성 입력의 동작 상태의 제어를 활성화하고, 제2 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다. 사용자(511)는 실행 화면(514)와 실행 화면(516)에 제2 터치 입력을 입력할 수 있다. 제2 터치 입력 이후에, 실행 화면(524)는 비활성화 상태로 변경되고, 실행 화면(526)은 활성화 상태로 변경될 수 있다. 음성 입력(512)은 실행 화면(526)에 대응하는 어플리케이션에 입력될 수 있다.
다른 실시예에 따르면, 사용자 입력은 포스 터치 입력을 포함할 수 있다. 사용자 인터페이스 제공 장치(100)는 음성 제어 아이콘(517)에 대한 포스 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다. 사용자(511)는 실행 화면(514)과 실행 화면(516)에 제2 터치 입력을 입력할 수 있다. 제2 터치 입력 이후에, 실행 화면(524)는 비활성화 상태로 변경되고, 실행 화면(526)은 활성화 상태로 변경될 수 있다.
다른 실시예에 따르면, 사용자 입력은 롱 프레스 입력을 포함할 수 있다. 프로세서(205)는 음성 제어 아이콘(517)에 대한 롱 프레스 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경할 수 있다.
이상에서, 본 발명의 실시예를 구성하는 모든 구성 요소들이 하나로 결합되거나 결합되어 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 적어도 하나로 선택적으로 결합하여 동작할 수도 있다.
또한, 그 모든 구성 요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 그 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 본 발명의 기술 분야의 당업자에 의해 용이하게 추론될 수 있을 것이다.
이러한 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 저장매체(Computer Readable Media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시예를 구현할 수 있다. 컴퓨터 프로그램의 저장매체로서는 자기 기록매체, 광 기록매체, 등이 포함될 수 있다.
또한, 이상에서 기재된 "포함하다", "구성하다" 또는 "가지다" 등의 용어는, 특별히 반대되는 기재가 없는 한, 해당 구성 요소가 내재될 수 있음을 의미하는 것이므로, 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것으로 해석되어야 한다.
기술적이거나 과학적인 용어를 포함한 모든 용어들은, 다르게 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 사전에 정의된 용어와 같이 일반적으로 사용되는 용어들은 관련 기술의 문맥 상의 의미와 일치하는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명에서 개시된 방법들은 상술된 방법을 달성하기 위한 하나 이상의 동작들 또는 단계들을 포함한다. 방법 동작들 및/또는 단계들은 청구항들의 범위를 벗어나지 않으면서 서로 상호 교환될 수도 있다. 다시 말해, 동작들 또는 단계들에 대한 특정 순서가 명시되지 않는 한, 특정 동작들 및/또는 단계들의 순서 및/또는 이용은 청구항들의 범위로부터 벗어남이 없이 수정될 수도 있다.
본 발명에서 이용되는 바와 같이, 아이템들의 리스트 중 "그 중 적어도 하나" 를 지칭하는 구절은 단일 멤버들을 포함하여, 이들 아이템들의 임의의 조합을 지칭한다. 일 예로서, "a, b, 또는 c: 중의 적어도 하나" 는 a, b, c, a-b, a-c, b-c, 및 a-b-c 뿐만 아니라 동일한 엘리먼트의 다수의 것들과의 임의의 조합 (예를 들어, a-a, a-a-a, a-a-b, a-a-c, a-b-b, a-c-c, b-b, b-b-b, b-b-c, c-c, 및 c-c-c 또는 a, b, 및 c 의 다른 임의의 순서 화한 것) 을 포함하도록 의도된다.
본 발명에서 이용되는 바와 같이, 용어 "결정하는"는 매우 다양한 동작들을 망라한다. 예를 들어, "결정하는"는 계산하는, 컴퓨팅, 프로세싱, 도출하는, 조사하는, 룩업하는 (예를 들어, 테이블, 데이터베이스, 또는 다른 데이터 구조에서 룩업하는), 확인하는 등을 포함할 수도 있다. 또한, "결정하는"은 수신하는 (예를 들면, 정보를 수신하는), 액세스하는 (메모리의 데이터에 액세스하는) 등을 포함할 수 있다. 또한, "결정하는"은 해결하는, 선택하는, 고르는, 확립하는 등을 포함할 수 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다.
따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100...사용자 인터페이스 제공 장치
201...메모리
203...디스플레이 컨트롤러
205...프로세서
207...터치 센서

Claims (14)

  1. 사용자 인터페이스를 제공하기 위한 장치에 있어서,
    음성 입력 또는 음성 출력을 제공하는 복수의 어플리케이션을 유지하는 메모리;
    실행중인 복수의 어플리케이션이 디스플레이 상에 디스플레이 되도록 제어하는 디스플레이 컨트롤러;
    상기 디스플레이에 대한 사용자 입력을 센싱하는 터치 센서; 및
    상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 프로세서를 포함하고,
    상기 디스플레이 컨트롤러는,
    상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공하되,
    상기 디스플레이 컨트롤러는,
    음성 제어 아이콘을 상기 디스플레이 상에 표시하고,
    상기 프로세서는, 상기 음성 제어 아이콘에 대한 상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하고,
    상기 음성 제어 아이콘이 상기 복수의 어플리케이션 중 하나 이상의 어플리케이션과 중첩되어 표시되면, 상기 음성 제어 아이콘은 중첩되어 표시되는 상기 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 제어하는 사용자 인터페이스 제공 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 디스플레이 컨트롤러는,
    상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션의 테두리를 미리 정해진 색상으로 표시하는,
    사용자 인터페이스 제공 장치.
  4. 제1항에 있어서,
    상기 프로세서는, 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 초기화하는,
    사용자 인터페이스 제공 장치.
  5. 제1항에 있어서,
    상기 사용자 입력은 제1 터치 입력 및 제2 터치 입력을 포함하고,
    상기 프로세서는, 상기 음성 제어 아이콘에 대한 상기 제1 터치 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태의 제어를 활성화하고, 상기 제2 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경하는,
    사용자 인터페이스 제공 장치.
  6. 제1항에 있어서,
    상기 사용자 입력은 드래그 입력을 포함하고,
    상기 프로세서는, 상기 드래그 입력에 의해 이동되는 상기 음성 제어 아이콘이 위치한 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 변경하는,
    사용자 인터페이스 제공 장치.
  7. 제1항에 있어서,
    상기 사용자 입력은 포스 터치 입력을 포함하고,
    상기 프로세서는, 상기 포스 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경하는,
    사용자 인터페이스 제공 장치.
  8. 제1항에 있어서,
    상기 사용자 입력은 롱 프레스 입력을 포함하고,
    상기 프로세서는, 상기 롱 프레스 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경하는,
    사용자 인터페이스 제공 장치.
  9. 제1항에 있어서,
    상기 프로세서는, 새로 실행하는 어플리케이션이 미리 설정된 어플리케이션인 경우, 상기 새로 실행하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 초기화하고, 이미 실행 중인 상기 복수의 어플리케이션의 음성 입력의 동작 상태는 비활성화 상태로 변경하고,
    상기 디스플레이 컨트롤러는, 상기 새로 실행하는 어플리케이션에 시각적 효과를 제공하는,
    사용자 인터페이스 제공 장치.
  10. 복수의 어플리케이션을 실행하는 동작;
    사용자 입력을 수신하는 동작:
    상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작; 및
    상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공하는 동작
    을 포함하되,
    상기 사용자 입력을 수신하는 동작은,
    음성 제어 아이콘을 디스플레이 상에 표시하는 동작을 포함하고,
    상기 동작 상태를 제어하는 동작은,
    상기 음성 제어 아이콘에 대한 상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작; 및
    상기 음성 제어 아이콘이 상기 복수의 어플리케이션 중 하나 이상의 어플리케이션과 중첩되어 표시되면, 상기 음성 제어 아이콘은 중첩되어 표시되는 상기 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작
    을 포함하는 사용자 인터페이스 제공 방법.
  11. 복수의 어플리케이션을 실행하는 동작;
    사용자 입력을 수신하는 동작:
    상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작; 및
    상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공하는 동작
    을 포함하되,
    상기 사용자 입력을 수신하는 동작은,
    음성 제어 아이콘을 디스플레이 상에 표시하는 동작을 포함하고,
    상기 동작 상태를 제어하는 동작은,
    상기 음성 제어 아이콘에 대한 상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작; 및
    상기 음성 제어 아이콘이 상기 복수의 어플리케이션 중 하나 이상의 어플리케이션과 중첩되어 표시되면, 상기 음성 제어 아이콘은 중첩되어 표시되는 상기 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작
    을 포함하되,
    상기 사용자 입력은 제1 터치 입력 및 제2 터치 입력을 포함하고,
    상기 동작 상태를 제어하는 동작은,
    상기 음성 제어 아이콘에 대한 상기 제1 터치 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태의 제어를 활성화하는 동작; 및
    상기 제2 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경하는 동작
    을 포함하는, 사용자 인터페이스 제공 방법.
  12. 복수의 어플리케이션을 실행하는 동작;
    사용자 입력을 수신하는 동작:
    상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작; 및
    상기 사용자 입력에 반응하여 상기 음성 입력의 동작 상태가 활성화인 어플리케이션에 시각적 효과를 제공하는 동작
    을 포함하되,
    상기 사용자 입력을 수신하는 동작은,
    음성 제어 아이콘을 디스플레이 상에 표시하는 동작을 포함하고,
    상기 동작 상태를 제어하는 동작은,
    상기 음성 제어 아이콘에 대한 상기 사용자 입력에 반응하여 상기 복수의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작; 및
    상기 음성 제어 아이콘이 상기 복수의 어플리케이션 중 하나 이상의 어플리케이션과 중첩되어 표시되면, 상기 음성 제어 아이콘은 중첩되어 표시되는 상기 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 제어하는 동작
    을 포함하되,
    상기 사용자 입력은 드래그 입력을 포함하고,
    상기 동작 상태를 제어하는 동작은,
    상기 드래그 입력에 의해 이동되는 상기 음성 제어 아이콘이 위치한 하나 이상의 어플리케이션의 음성 입력의 동작 상태를 활성화 상태로 변경하는,
    사용자 인터페이스 제공 방법.
  13. 제10항에 있어서,
    상기 사용자 입력은 포스 터치 입력을 포함하고,
    상기 동작 상태를 제어하는 동작은,
    상기 포스 터치 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경하는,
    사용자 인터페이스 제공 방법.
  14. 제10항에 있어서,
    상기 사용자 입력은 롱 프레스 입력을 포함하고,
    상기 동작 상태를 제어하는 동작은,
    상기 롱 프레스 입력에 대응하는 어플리케이션의 음성 입력의 동작 상태를 활성화 상태 또는 비활성화 상태로 변경하는,
    사용자 인터페이스 제공 방법.
KR1020190082902A 2019-07-09 2019-07-09 사용자 인터페이스 제공 장치 및 방법 KR102340735B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190082902A KR102340735B1 (ko) 2019-07-09 2019-07-09 사용자 인터페이스 제공 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190082902A KR102340735B1 (ko) 2019-07-09 2019-07-09 사용자 인터페이스 제공 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20210006814A KR20210006814A (ko) 2021-01-19
KR102340735B1 true KR102340735B1 (ko) 2021-12-17

Family

ID=74237547

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190082902A KR102340735B1 (ko) 2019-07-09 2019-07-09 사용자 인터페이스 제공 장치 및 방법

Country Status (1)

Country Link
KR (1) KR102340735B1 (ko)

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101888457B1 (ko) * 2011-11-16 2018-08-16 삼성전자주식회사 복수 개의 어플리케이션을 실행하는 터치스크린을 가지는 장치 및 그 제어 방법
KR20130126428A (ko) * 2012-05-11 2013-11-20 삼성전자주식회사 다중 어플리케이션 실행 장치 및 방법

Also Published As

Publication number Publication date
KR20210006814A (ko) 2021-01-19

Similar Documents

Publication Publication Date Title
US10552031B2 (en) Experience mode transition
US9357396B2 (en) Terminal device
EP3239804B1 (en) Control of an electronic device including display and keyboard moveable relative to the display
KR101229699B1 (ko) 애플리케이션 간의 콘텐츠 이동 방법 및 이를 실행하는 장치
EP3617861A1 (en) Method of displaying graphic user interface and electronic device
US9377868B2 (en) Sliding control method and terminal device thereof
US10372320B2 (en) Device and method for operating on touch screen, and storage medium
CN108509105B (zh) 一种应用程序管理方法和终端
KR20160001602A (ko) 폴더블 전자 장치의 인터페이싱 방법 및 그 폴더블 전자 장치
CN108762705B (zh) 一种信息显示方法、移动终端和计算机可读存储介质
EP2588945A1 (en) Method and apparatus for implementing a multiple display mode
KR101251761B1 (ko) 어플리케이션 간 데이터 전달 방법 및 이를 이용하는 단말 장치
US20160182603A1 (en) Browser Display Casting Techniques
WO2017172494A1 (en) Touch-input support for an external touch-capable display device
EP3211510B1 (en) Portable electronic device and method of providing haptic feedback
KR102320072B1 (ko) 전자 장치 및 전자 장치의 정보 공개 제어 방법
US10908868B2 (en) Data processing method and mobile device
EP3528103B1 (en) Screen locking method, terminal and screen locking device
KR102340735B1 (ko) 사용자 인터페이스 제공 장치 및 방법
CN114398016B (zh) 界面显示方法和装置
JP7419569B2 (ja) アプリケーション制御方法、装置及び電子機器
CN114296626B (zh) 一种输入界面的显示方法及终端
KR20110063412A (ko) 애플리케이션 간의 콘텐츠 전달 방법 및 이를 실행하는 장치
WO2022228097A1 (zh) 显示方法、显示装置和电子设备
US20160173563A1 (en) Rotation Control of an External Display Device

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant