KR20150049469A - 멀티 윈도우에서의 사용자 인터페이스 제공 방법 및 장치 - Google Patents

멀티 윈도우에서의 사용자 인터페이스 제공 방법 및 장치 Download PDF

Info

Publication number
KR20150049469A
KR20150049469A KR1020130130085A KR20130130085A KR20150049469A KR 20150049469 A KR20150049469 A KR 20150049469A KR 1020130130085 A KR1020130130085 A KR 1020130130085A KR 20130130085 A KR20130130085 A KR 20130130085A KR 20150049469 A KR20150049469 A KR 20150049469A
Authority
KR
South Korea
Prior art keywords
output
application
path
determining
window
Prior art date
Application number
KR1020130130085A
Other languages
English (en)
Inventor
김현재
강명수
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130130085A priority Critical patent/KR20150049469A/ko
Priority to US14/525,479 priority patent/US20150121278A1/en
Publication of KR20150049469A publication Critical patent/KR20150049469A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)

Abstract

본 발명은 멀티 윈도우들에 포함된 각 윈도우에 대한 출력경로를 결정하는 단계, 및 상기 결정된 출력경로와 연관된 출력부로 상기 각 윈도우와 연관된 출력신호를 제공하는 단계를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법을 제공한다.

Description

멀티 윈도우에서의 사용자 인터페이스 제공 방법 및 장치{DEVICE AND METHOD FOR PROVIDING USER INTERFACE ON MULTI WINDOWS}
본 실시예는 멀티 윈도우에서의 사용자 인터페이스 제공 방안에 관한 것이다.
휴대 단말기의 기능이 점차 발전하면서, 처음에는 음성통화, 문자 메시지 전송 등의 1차적인 서비스를 진행하였다면, 최근에는 노트북과 같이, 무선 인터넷 환경을 제공함으로써, 더욱 다양한 서비스를 제공하고 있다.
이러한, 상기 휴대 단말기는 한번에 두 개 이상의 서비스를 제공하는 "멀티 태스킹(Multi-tasking)" 기능을 제공하고 있다. 예를 들어, 사용자는 전화를 받으면서 메모장을 작성하거나, 음악을 들으면서 게임을 플레이할 수 있다. 그런데, 상기 멀티 태스킹 기능은 상기 휴대 단말기의 배경화면에 하나의 어플리케이션을 실행하면 다른 하나의 어플리케이션의 실행창을 표시할 수 없었다. 따라서, 상기 사용자는 두 개의 어플리케이션 실행창을 번갈아 확인해야 한다는 단점이 있었다.
이러한 단점을 보완하기 위하여, 상기 휴대 단말기는 두 개의 어플리케이션 실행창을 하나의 바탕화면에 동시에 표시할 수 있는 "멀티 윈도우(Multi Windows)" 환경을 제공하고 있다.
현재, 멀티 윈도우는 한 명의 사용자가 복수개의 어플리케이션을 실행시킬 수 있는 환경에만 중점을 맞추고 있다. 그러나, 사용자 인터페이스 장치의 화면이 점점 커지고 있어, 복수의 사용자가 하나의 사용자 인터페이스 장치를 사용하는 일이 많아지고 있다. 이 경우, 사용자는 멀티 윈도우를 이용하여 여러 개의 어플리케이션을 실행할 수는 있지만, 복수의 사용자들 간의 간섭이 발생한다는 단점이 있다.
특히, 복수개의 멀티 미디어를 동시에 재생하는 경우, 복수개의 멀티 미디어의 음원들이 혼합되어 출력된다는 문제점이 있었다. 또한, 멀티 미디어 재생 시 전화가 오는 경우 멀티 윈도우 기능이 무력화되고, 한 명의 사용자가 사용자 인터페이스 장치를 독점해야만 하고, 다른 사용자는 사용자 인터페이스 장치를 전혀 사용하지 못하게 되는 문제점이 있다.
본 발명의 일실시예는 멀티 윈도우 환경에서 각 윈도우별로 사용자 인터페이스를 독립적으로 제어할 수 있는, 멀티 윈도우의 사용자 인터페이스 제공 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명의 일실시예에 따른 멀티 윈도우에서의 사용자 인터페이스 제공 방법은 멀티 윈도우들에 포함된 각 윈도우에 대한 출력경로를 결정하는 단계, 및 상기 결정된 출력경로와 연관된 출력부로 상기 각 윈도우와 연관된 출력신호를 제공하는 단계를 포함한다.
본 발명의 일실시예에 따른 멀티 윈도우에서의 사용자 인터페이스 장치는 멀티 윈도우들에 포함된 각 윈도우에 대한 출력경로를 결정하는 경로 결정부, 및 상기 결정된 출력경로와 연관된 출력부로 상기 각 윈도우와 연관된 출력신호를 제공하는 신호 제공부를 포함한다.
본 발명의 일실시예에 따르면, 멀티 윈도우 환경에서 각 윈도우별로 사용자 인터페이스를 독립적으로 제어함으로써, 하나의 사용자 인터페이스 장치를 복수개의 사용자 인터페이스 장치처럼 활용할 수 있다.
도 1은 본 발명의 일실시예에 따른 멀티 윈도우에서의 사용자 인터페이스 장치를 도시한 블록도이다.
도 2a 내지 도 2c는 본 발명의 일실시예에 따른 출력경로를 결정하는 일례를 도시한 도면이다.
도 3a 및 도 3b는 본 발명의 일실시예에 따른 사용자로부터 출력부를 선택받는 일례를 도시한 도면이다.
도 4a 및 도 4b는 본 발명의 일실시예에 따른 제2 어플리케이션에 대한 출력경로를 결정하는 일례를 도시한 도면이다.
도 5a 및 도 5b는 본 발명의 일실시예에 따른 어플리케이션의 특성에 따라 출력부를 추천하는 일례를 도시한 도면이다.
도 6a 및 도 6b는 본 발명의 일실시예에 따른 출력부의 출력값을 제어하는 일례를 도시한 도면이다.
도 7은 본 발명의 일실시예에 따른 멀티 윈도우에서의 사용자 인터페이스 제공 방법을 도시한 흐름도이다.
이하, 첨부된 도면들을 참조하여 다양한 실시예들을 상세히 설명한다. 이때, 첨부된 도면들에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다. 하기의 설명에서는 본 발명의 다양한 실시 예들에 따른 동작을 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
본 발명의 멀티 윈도우에서의 사용자 인터페이스 장치는 전자장치에 포함되어 수행될 수 있다. 본 발명에 따른 전자장치는, 통신 기능이 포함된 장치일 수 있다. 예를 들면, 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 카메라(camera), 웨어러블 장치(wearable device), 전자 시계(electronic clock), 손목 시계(wrist watch), 가전 제품(home appliance)(예: 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기 등), 인공 지능 로봇, TV, DVD(digital video disk) 플레이어, 오디오, 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 전자 사전, 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(electronic equipment for ship, 예를 들면, 선박용 항법 장치, 자이로콤파스 등), 항공 전자기기(avionics), 보안 기기, 전자 의복, 전자 키, 캠코더(camcorder), 게임 콘솔(game consoles), HMD(head-mounted display), 평판표시장치(flat panel display device), 전자 액자, 전자 앨범, 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device) 또는 프로젝터(projector) 등의 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 본 발명에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
도 1은 본 발명의 일실시예에 따른 멀티 윈도우에서의 사용자 인터페이스 장치를 도시한 블록도이다.
도1을 참고하면, 멀티 윈도우에서의 사용자 인터페이스 장치(이하, '사용자 인터페이스 장치'라 함, 100)는 경로 결정부(110), 실행부(120), 신호 제공부(130), 출력부(140), 제어부(150), 및 카메라(160)를 포함할 수 있다. 실시예로, 출력부(140)는 이어폰(141), 스피커(142)를 포함하는 음원 출력장치 또는 모니터, TV를 포함하는 표시장치(143)를 포함할 수 있다.
경로 결정부(110)는 멀티 윈도우들에 포함된 각 윈도우에 대한 출력경로를 결정한다.
멀티 윈도우(Multi Windows)는 하나의 바탕화면에 두 개의 어플리케이션 실행창을 동시에 표시할 수 있는 환경의 말한다. 종래의 멀티 윈도우는 한 명의 사용자가 복수개의 어플리케이션을 실행시킬 수 있는 환경에만 중점을 맞추고 있다. 그러나, 사용자 인터페이스 장치의 화면이 점점 커지고 있어, 복수의 사용자가 하나의 사용자 인터페이스 장치를 사용하는 일이 많아지고 있다. 이 경우, 사용자는 멀티 윈도우를 이용하여 여러 개의 어플리케이션을 실행할 수는 있지만, 복수의 사용자들 간의 간섭이 발생한다는 단점이 있었다.
특히, 복수개의 멀티 미디어를 동시에 재생하는 경우, 복수개의 멀티 미디어의 음원들이 혼합되어 출력된다는 문제점이 있었다. 또한, 멀티 미디어 재생 시 전화가 오는 경우 멀티 윈도우 기능이 무력화되고, 한 명의 사용자가 사용자 인터페이스 장치를 독점해야만 하고, 다른 사용자는 사용자 인터페이스 장치를 전혀 사용하지 못하게 되는 문제점이 있다.
따라서, 본 발명의 일실시예에 따르면, 멀티 윈도우 환경에서 각 윈도우별로 사용자 인터페이스를 독립적으로 제어함으로써, 하나의 사용자 인터페이스 장치를 복수개의 사용자 인터페이스 장치처럼 활용할 수 있다.
이를 위해, 경로 결정부(110)는 각 윈도우별로 출력경로를 결정한다.
도 2a 내지 도 2c는 본 발명의 일실시예에 따른 출력경로를 결정하는 일례를 도시한 도면이다.
도 2a를 참고하면, 경로 결정부(110)는 상기 멀티 윈도우들에 포함된 각 윈도우별 표시영역을 구분하고, 상기 표시영역에 따라 출력경로를 결정할 수 있다. 예를 들어, 경로 결정부(110)는 멀티 윈도우가 2개의 윈도우를 포함하는 경우, 왼쪽, 오른쪽 두 개의 표시영역을 구분하고, 왼쪽 표시영역(영화)에 대한 출력경로를 '왼쪽 출력부'로 결정하고, 오른쪽 표시영역(동영상)에 대한 출력경로를 '오른쪽 출력부'로 결정할 수 있다. 여기서, 출력부(140)는 이어폰(141)일 수 있다. 따라서, 경로 결정부(110)는 윈도우의 표시영역에 따라 이어폰(141)의 왼쪽(L)과 오른쪽(R)에서 각각 다른 출력신호가 제공될 수 있도록 한다.
도 2b를 참고하면, 경로 결정부(110)는 상기 각 윈도우에서 실행되는 어플리케이션의 배치위치를 확인하고, 상기 어플리케이션의 배치위치에 따라 출력경로를 결정할 수 있다. 예를 들어, 경로 결정부(110)는 왼쪽 윈도우에서 제1 어플리케이션(영화 1)이 표시되는 경우, 제1 어플리케이션에 대한 출력경로를 '이어폰(141)의 왼쪽(L)'으로 결정하고, 오른쪽 윈도우에서 제2 어플리케이션(영화 2)이 표시되는 경우, 제2 어플리케이션에 대한 출력경로를 '이어폰(141)의 오른쪽(R)'으로 결정할 수 있다.
따라서, 본 발명에 따르면, 하나의 사용자 인터페이스 장치(100)를 이용하여 두 명의 사용자가 각각 다른 어플리케이션을 실행할 수 있다. 또한, 본 발명에 따르면, 실행되는 어플리케이션과 연관된 출력신호를 각각 다른 출력경로를 통해 제공될 수 있도록 하여, 출력신호가 서로 혼합되어 출력될 염려가 없다.
즉, 경로 결정부(110)는 윈도우의 표시영역 또는 어플리케이션의 배치위치에 따라 출력경로를 결정할 수 있다.
도 2c를 참고하면, 경로 결정부(110)는 상기 각 윈도우에서 실행되는 어플리케이션의 특성을 확인하고, 상기 확인된 특성에 따라 출력경로를 결정할 수 있다. 예를 들어, 경로 결정부(110)는 제1 윈도우에서 실행되는 제1 어플리케이션이 "웹페이지"인 경우, 상기 제1 어플리케이션에 대한 제1 출력신호를 이어폰(141)으로 출력되도록 출력경로를 결정할 수 있다. 또는, 경로 결정부(110)는 제2 윈도우에서 실행되는 제2 어플리케이션이 "영화"인 경우, 상기 제2 어플리케이션에 대한 제2 출력신호를 스피커(142)로 출력되도록 출력경로를 결정할 수 있다. 이때, 경로 결정부(110)는 상기 어플리케이션의 특성에 상응하는 출력부가 연결되어 있는지 검색하고, 상기 검색된 출력부와 연관하여 상기 출력경로를 결정할 수 있다.
사용자 인터페이스 장치(100)는 유선으로 연결한 출력부 이외에 무선으로 연결한 출력부를 더 포함할 수 있다. 영화는 어플리케이션 특성 상, 복수의 사용자가 시청할 수 있기 때문에 이어폰(141)보다 스피커(142)로 출력하는 것이 좋을 수 있다. 또한, 영화는 사용자 인터페이스 장치(100)보다 표시영역이 큰 모니터, TV 등의 표시장치(143)로 재생하는 것이 좋을 수 있다. 따라서, 경로 결정부(100)는 '영화'라는 상기 어플리케이션의 특성에 상응하는 스피커(142) 또는 표시장치(143)가 사용자 인터페이스 장치(100)에 연결되어 있는지 검색하고, 상기 검색된 스피커(142) 또는 표시장치(143)로 '영화' 어플리케이션에 대한 출력경로를 결정할 수 있다. 즉, 경로 결정부(110)는 '영화' 어플리케이션에 대한 음원 출력경로를 스피커(142)로, 화면 출력경로를 표시장치(143)로 각각 결정할 수 있다.
또 다른 실시예로, 경로 결정부(110)는 상기 각 윈도우에서 실행되는 어플리케이션의 특성에 따라 출력부를 추천하고, 상기 추천된 출력부 중 사용자로부터 선택된 출력부(140)와 연관하여 출력경로를 결정할 수 있다.
도 3a 및 도 3b는 본 발명의 일실시예에 따른 사용자로부터 출력부를 선택받는 일례를 도시한 도면이다.
도 3a를 참고하면, 경로 결정부(110)는 실행부(120)에 의해 실행되고 있는 어플리케이션 화면에 실행된 어플리케이션의 특성에 따라 출력부(스피커, 이어폰, 왼쪽(L), 오른쪽(R))를 추천하고, 상기 추천된 출력부 중 사용자로부터 선택된 출력부(스피커)와 연관하여 출력경로를 결정할 수 있다.
도 3b를 참고하면, 경로 결정부(110)는 출력부 리스트(스피커, 이어폰, 왼쪽(L), 오른쪽(R))를 제공하고, 상기 출력부 리스트 중 사용자로부터 상기 각 윈도우에 대응하는 출력부(이어폰)를 선택받고, 상기 선택된 출력부(이어폰)와 연관하여 상기 출력경로를 결정할 수 있다.
신호 제공부(130)는 상기 결정된 출력경로와 연관된 출력부(140)로 상기 각 윈도우와 연관된 출력신호를 제공한다. 예컨대, 신호 제공부(130)는 제1 윈도우에 대해서는 이어폰(141)의 왼쪽(L)으로 출력신호를 제공하고, 제2 윈도우에 대해서는 이어폰(141)의 오른쪽(R)으로 출력신호를 제공할 수 있다. 또는, 신호 제공부(130)는 제1 어플리케이션에 대해서는 이어폰(141)으로 출력신호를 제공하고, 제2 어플리케이션에 대해서는 스피커(142)로 출력신호를 제공할 수 있다.
또 다른 실시예로, 경로 결정부(110)는 상기 출력신호를 제공하는 중에, 제2 어플리케이션이 발생하는 경우, 상기 제2 어플리케이션에 대한 출력경로를 결정할 수 있다. 상기 출력신호는 현재 출력부를 통해 제공되고 있는 신호를 의미한다. 제2 어플리케이션은 새로 실행되는 어플리케이션을 의미하는 것으로, 나중에 발생한 것이므로 "제2"를 붙여서 설명한다. 즉, 상기 제2 어플리케이션보다 먼저 실행되는 어플리케이션은 "제1 어플리케이션"일 수 있다.
도 4a 및 도 4b는 본 발명의 일실시예에 따른 제2 어플리케이션에 대한 출력경로를 결정하는 일례를 도시한 도면이다.
신호 제공부(130)는 제1 윈도우(왼쪽)에서 영화 어플리케이션이 실행되어 스피커(142)로 출력신호를 제공하고, 제2 윈도우(오른쪽)에서 음악 어플리케이션이 실행되어 이어폰(141)으로 출력신호를 제공할 수 있다. 이때, 전화가 오는 경우, 경로 결정부(110)는 제2 어플리케이션이 발생한 것으로 간주한다. 따라서, 경로 결정부(110)는 제2 어플리케이션의 출력신호를 출력할 출력부(140)를 결정해야 한다.
도 4a를 참고하면, 경로 결정부(110)는 제2 어플리케이션이 실행되는 경우, 사용자로부터 제2 어플리케이션을 표시하는 윈도우를 선택받고, 선택된 윈도우와 연관된 출력경로를 상기 제2 어플리케이션에 대한 출력경로로 결정할 수 있다.
또는, 도 4b를 참고하면, 경로 결정부(110)는 제2 어플리케이션의 특성에 따라 출력부를 추천하고, 추천된 출력부 중 사용자로부터 선택된 출력부(140)에 대한 출력경로를 결정할 수 있다. 예컨대, 경로 결정부(110)는 상기 제2 어플리케이션이 '음성 통화'인 경우, 음성 통화는 사적인 것일 수 있기 때문에, 이어폰(141)을 출력부로서 추천할 수 있다. 또는, 경로 결정부(110)는 상기 제2 어플리케이션이 '영상 통화'인 경우, 음성 통화와 달리 그룹 통화일 수 있기 때문에, 스피커(142)를 출력부로서 추천할 수 있다.
경로 결정부(110)는 제2 어플리케이션이 실행되는 경우, 상기 제2 어플리케이션과 연관하여 기설정된 출력부로 상기 제2 어플리케이션에 대한 출력경로를 결정할 수 있다. 즉, 경로 결정부(110)는 제2 어플리케이션이 '음성 통화'인 경우, 음성 통화에 대해서는 출력부(140)로서 이어폰(141)을 사전에 설정할 수 있다.
그런데, 상기 기설정된 출력부가 사용중인 경우, 경로 결정부(110)는 상기 기설정된 출력부를 제외한 제2 출력부를 추천하고, 상기 추천된 제2 출력부 중 사용자로부터 선택된 제2 출력부를 상기 제2 어플리케이션에 대한 출력경로로 결정할 수 있다. 예컨대, 기설정된 출력부가 '이어폰'인데, 이어폰이 사용중인 경우, 경로 결정부(110)는 이어폰을 제외한 스피커를 제2 출력부로 추천하고, 추천된 제2 출력부 중에서 선택된 제2 출력부를 상기 제2 어플리케이션에 대한 출력경로로 결정할 수 있다.
또는, 경로 결정부(110)는 상기 기설정된 출력부가 사용 중인 경우, 사용자로부터 상기 제2 어플리케이션에 대한 출력경로를 선택받고, 상기 제2 어플리케이션에 대한 출력경로를 상기 선택된 출력경로로 결정할 수 있다. 예컨대, 기설정된 출력부가 '이어폰'인데, 이어폰이 사용중인 경우, 경로 결정부(110)는 이어폰을 포함한 출력부 리스트를 제공하고, 제공된 출력부 리스트 중에서 선택된 출력부를 상기 제2 어플리케이션에 대한 출력경로로 결정할 수 있다. 이때, 사용중인 이어폰을 상기 제2 어플리케이션에 대한 출력경로로 선택받은 경우, 경로 결정부(110)는 먼저 사용하고 있던 출력경로를 변경하거나, 제2 어플리케이션에 대한 출력경로로 사용할 수 없음을 표시할 수 있다.
도 5a 및 도 5b는 본 발명의 일실시예에 따른 어플리케이션의 특성에 따라 출력부를 추천하는 일례를 도시한 도면이다.
도 5a를 참고하면, 경로 결정부(110)는 상기 각 윈도우에서 실행되는 어플리케이션의 특성에 따라 출력경로를 결정할 수 있다. 즉, 경로 결정부(110)는 제1 윈도우에서 실행되는 제1 어플리케이션은 "게임"이므로, 이어폰으로 출력경로를 결정하고, 제2 윈도우에서 실행되는 제2 어플리케이션은 "음악"이므로, 스피커를 출력경로를 결정할 수 있다.
도 5b를 참고하면, 신호 제공부(130)는 상기 결정된 출력경로와 연관된 출력부로 상기 각 윈도우와 연관된 출력신호를 제공하고, 제어부(150)는 사용자 인터페이스 장치(100)의 화면에 제2 어플리케이션을 표시하지 않고, 제1 어플리케이션만 표시되도록 할 수 있다. 예컨대, 복수의 사용자들 중 한 사람만 게임을 실행하고, 나머지 복수의 사용자들은 음악을 듣는 경우, 음악 어플리케이션을 별도로 표시할 필요가 없을 수 있다. 따라서, 제어부(150)는 사용자 인터페이스 장치(100)의 화면에 제1 어플리케이션(게임)을 표시하고, 제2 어플리케이션(음악)을 표시하지 않을 수 있다.
도 6a 및 도 6b는 본 발명의 일실시예에 따른 출력부의 출력값을 제어하는 일례를 도시한 도면이다.
도 6a를 참고하면, 제어부(150)는 카메라(160)를 이용하여 각 윈도우와 연관된 사용자의 존재여부를 확인하고, 상기 확인 결과에 따라, 출력부(140)의 출력값을 제어할 수 있다. 예컨대, 카메라(160)에서 인식한 오른쪽 사용자(B)가 존재하지 않는 경우, 제어부(150)는 오른쪽 출력부(140)의 출력값을 "0(MUTE)"으로 설정할 수 있다. 이는, 불필요한 출력신호를 제거함으로써, 전력을 절감하는 효과가 있다.
도 6b를 참고하면, 제어부(150)는 카메라(160)를 이용하여 각 윈도우와 연관된 사용자(A, B)의 배치위치를 파악하고, 사용자의 배치위치에 따라 출력부(140)의 출력값을 제어할 수 있다. 또는, 제어부(150)는 사용자(B)로부터 제2 어플리케이션의 화면을 180도 변환하라고 선택받고, 사용자의 선택에 따라 출력부(140)의 출력값을 제어할 수 있다. 즉, 제어부(150)는 오른쪽에 표시되는 제2 어플리케이션의 화면을 180도 변환하여 제공할 수 있다. 제어부(150)는 카메라(160) 이외에 자이로 센서, 가속도 센서를 이용하여 각 윈도우와 연관된 사용자(A, B)의 배치위치를 파악할 수도 있다.
도 7은 본 발명의 일실시예에 따른 멀티 윈도우에서의 사용자 인터페이스 제공 방법을 도시한 흐름도이다. 멀티 윈도우에서의 사용자 인터페이스 제공 방법은 사용자 인터페이스 장치(100)에 포함되어 수행될 수 있다.
도 7을 참고하면, 단계(10)에서, 사용자 인터페이스 장치(100)의 경로 결정부(110)는 멀티 윈도우들에 포함된 각 윈도우에 대한 출력경로를 결정한다. 실시예로, 경로 결정부(110)는 상기 멀티 윈도우들에 포함된 각 윈도우별 표시영역을 구분하고, 상기 표시영역에 따라 출력경로를 결정할 수 있다. 다른 실시예로, 경로 결정부(110)는 상기 각 윈도우에서 실행되는 어플리케이션의 배치위치를 확인하고, 상기 어플리케이션의 배치위치에 따라 출력경로를 결정할 수 있다. 또 다른 실시예로, 경로 결정부(110)는 상기 각 윈도우에서 실행되는 어플리케이션의 특성을 확인하고, 상기 확인된 특성에 따라 출력경로를 결정할 수 있다. 이때, 경로 결정부(110)는 상기 어플리케이션의 특성에 상응하는 출력부(140)가 연결되어 있는지 검색하고, 상기 검색된 출력부(140)와 연관하여 상기 출력경로를 결정할 수 있다.
또 다른 실시예로, 경로 결정부(110)는 상기 각 윈도우에서 실행되는 어플리케이션의 특성에 따라 출력부를 추천하고, 상기 추천된 출력부 중 사용자로부터 선택된 출력부(140)와 연관하여 출력경로를 결정할 수 있다.
또 다른 실시예로, 경로 결정부(110)는 출력부 리스트를 제공하고, 상기 출력부 리스트 중 사용자로부터 상기 각 윈도우에 대응하는 출력부를 선택받고, 상기 선택된 출력부(140)와 연관하여 상기 출력경로를 결정할 수 있다.
단계(20)에서, 사용자 인터페이스 장치(100)의 신호 제공부(130)는 상기 결정된 출력경로와 연관된 출력부로 상기 각 윈도우와 연관된 출력신호를 제공한다.
또 다른 실시예로, 경로 결정부(110)는 새로운 제2 어플리케이션이 실행되는 경우, 사용자로부터 상기 제2 어플리케이션을 표시하는 윈도우를 선택받고, 상기 선택된 윈도우와 연관된 출력경로를 상기 제2 어플리케이션에 대한 출력경로로 결정할 수 있다. 또는, 경로 결정부(110)는 상기 제2 어플리케이션과 연관하여 기설정된 출력부로 상기 제2 어플리케이션에 대한 출력경로를 결정할 수 있다.
사용자 인터페이스 장치(100)의 제어부(150)는 카메라(160)를 이용하여 각 윈도우와 연관된 사용자의 존재여부를 확인하고, 상기 확인 결과에 따라, 상기 출력부의 출력값을 제어할 수 있다. 또는, 제어부(150)는 카메라를 이용하여 각 윈도우와 연관된 사용자의 배치위치를 파악하고, 상기 사용자의 배치위치에 따라 출력부의 출력값을 제어할 수 있다.
그리고 본 명세서와 도면에 개시된 실시 예들은 본 발명의 내용을 쉽게 설명하고, 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 사용자 인터페이스 장치
110: 경로 결정부 120: 실행부
130: 신호 제공부 140: 출력부
150: 제어부 160: 카메라

Claims (20)

  1. 멀티 윈도우들에 포함된 각 윈도우에 대한 출력경로를 결정하는 단계; 및
    상기 결정된 출력경로와 연관된 출력부로 상기 각 윈도우와 연관된 출력신호를 제공하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  2. 제1항에 있어서,
    상기 출력경로를 결정하는 단계는,
    상기 멀티 윈도우들에 포함된 각 윈도우별 표시영역을 구분하는 단계; 및
    상기 표시영역에 따라 출력경로를 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  3. 제1항에 있어서,
    상기 출력경로를 결정하는 단계는,
    상기 각 윈도우에서 실행되는 어플리케이션의 배치위치를 확인하는 단계; 및
    상기 어플리케이션의 배치위치에 따라 출력경로를 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  4. 제1항에 있어서,
    상기 출력경로를 결정하는 단계는,
    상기 각 윈도우에서 실행되는 어플리케이션의 특성을 확인하는 단계; 및
    상기 확인된 특성에 따라 출력경로를 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  5. 제4항에 있어서,
    상기 확인된 특성에 따라 출력경로를 결정하는 단계는,
    상기 어플리케이션의 특성에 상응하는 출력부가 연결되어 있는지 검색하는 단계; 및
    상기 검색된 출력부와 연관하여 상기 출력경로를 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  6. 제1항에 있어서,
    상기 출력경로를 결정하는 단계는,
    상기 각 윈도우에서 실행되는 어플리케이션의 특성에 따라 출력부를 추천하는 단계; 및
    상기 추천된 출력부 중 사용자로부터 선택된 출력부와 연관하여 출력경로를 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  7. 제1항에 있어서,
    상기 출력경로를 결정하는 단계는,
    출력부 리스트를 제공하는 단계;
    상기 출력부 리스트 중 사용자로부터 상기 각 윈도우에 대응하는 출력부를 선택받는 단계; 및
    상기 선택된 출력부와 연관하여 상기 출력경로를 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  8. 제1항에 있어서,
    상기 출력경로를 결정하는 단계는,
    제2 어플리케이션이 실행되는 경우, 사용자로부터 상기 제2 어플리케이션을 표시하는 윈도우를 선택받는 단계;
    상기 선택된 윈도우와 연관된 출력경로를 상기 제2 어플리케이션에 대한 출력경로로 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  9. 제1항에 있어서,
    상기 출력경로를 결정하는 단계는,
    제2 어플리케이션이 실행되는 경우, 상기 제2 어플리케이션과 연관하여 기설정된 출력부로 상기 제2 어플리케이션에 대한 출력경로를 결정하는 단계를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  10. 제9항에 있어서,
    상기 기설정된 출력부로 상기 출력경로를 결정하는 단계는,
    상기 기설정된 출력부가 사용중인 경우, 상기 기설정된 출력부를 제외한 제2 출력부를 추천하는 단계; 및
    상기 추천된 제2 출력부 중 사용자로부터 선택된 제2 출력부를 상기 제2 어플리케이션에 대한 출력경로로 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  11. 제9항에 있어서,
    상기 기설정된 출력부로 상기 출력경로를 결정하는 단계는,
    상기 기설정된 출력부가 사용중인 경우, 사용자로부터 상기 제2 어플리케이션에 대한 출력경로를 선택받는 단계; 및
    상기 제2 어플리케이션에 대한 출력경로를 상기 선택된 출력경로로 결정하는 단계
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  12. 제1항에 있어서,
    카메라를 이용하여 각 윈도우와 연관된 사용자의 존재여부를 확인하는 단계; 및
    상기 확인 결과에 따라, 상기 출력부의 출력값을 제어하는 단계
    를 더 포함하는, 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  13. 제1항에 있어서,
    카메라를 이용하여 각 윈도우와 연관된 사용자의 배치위치를 파악하는 단계; 및
    상기 사용자의 배치위치에 따라 출력부의 출력값을 제어하는 단계
    를 더 포함하는, 멀티 윈도우에서의 사용자 인터페이스 제공 방법.
  14. 멀티 윈도우들에 포함된 각 윈도우에 대한 출력경로를 결정하는 경로 결정부; 및
    상기 결정된 출력경로와 연관된 출력부로 상기 각 윈도우와 연관된 출력신호를 제공하는 신호 제공부
    를 포함하는 멀티 윈도우에서의 사용자 인터페이스 장치.
  15. 제14항에 있어서,
    상기 경로 결정부는,
    상기 각 윈도우별 표시영역 또는 상기 각 윈도우에서 실행되는 어플리케이션의 배치위치에 따라 출력경로를 결정하는, 멀티 윈도우에서의 사용자 인터페이스 장치.
  16. 제14항에 있어서,
    상기 경로 결정부는,
    상기 각 윈도우에 실행되는 어플리케이션의 특성을 확인하고, 상기 확인된 특성에 따라 출력경로를 결정하는, 멀티 윈도우에서의 사용자 인터페이스 장치.
  17. 제14항에 있어서,
    상기 경로 결정부는,
    출력부 리스트를 제공하고, 상기 출력부 리스트 중 사용자로부터 상기 각 윈도우에 대응하는 출력부를 선택받고, 상기 선택된 출력부와 연관하여 상기 출력경로를 결정하는, 멀티 윈도우에서의 사용자 인터페이스 장치.
  18. 제14항에 있어서,
    상기 경로 결정부는,
    제2 어플리케이션이 실행되는 경우, 사용자로부터 제2 어플리케이션을 표시하는 윈도우를 선택받고, 상기 선택된 윈도우와 연관된 출력경로를 상기 제2 어플리케이션에 대한 출력경로로 결정하는, 멀티 윈도우에서의 사용자 인터페이스 장치.
  19. 제14항에 있어서,
    상기 신호 제공부는,
    제2 어플리케이션이 실행되는 경우, 상기 제2 어플리케이션과 연관하여 기설정된 출력부로 상기 제2 어플리케이션에 대한 출력경로를 결정하는, 멀티 윈도우에서의 사용자 인터페이스 장치.
  20. 제14항에 있어서,
    카메라를 이용하여 각 윈도우와 연관된 사용자의 존재여부를 확인하고, 상기 확인 결과에 따라, 출력부의 출력값을 제어하는 제어부
    를 더 포함하는, 멀티 윈도우에서의 사용자 인터페이스 장치.
KR1020130130085A 2013-10-30 2013-10-30 멀티 윈도우에서의 사용자 인터페이스 제공 방법 및 장치 KR20150049469A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130130085A KR20150049469A (ko) 2013-10-30 2013-10-30 멀티 윈도우에서의 사용자 인터페이스 제공 방법 및 장치
US14/525,479 US20150121278A1 (en) 2013-10-30 2014-10-28 Method and apparatus for providing user interface in multi-window

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130130085A KR20150049469A (ko) 2013-10-30 2013-10-30 멀티 윈도우에서의 사용자 인터페이스 제공 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20150049469A true KR20150049469A (ko) 2015-05-08

Family

ID=52996941

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130130085A KR20150049469A (ko) 2013-10-30 2013-10-30 멀티 윈도우에서의 사용자 인터페이스 제공 방법 및 장치

Country Status (2)

Country Link
US (1) US20150121278A1 (ko)
KR (1) KR20150049469A (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11425079B2 (en) * 2014-12-16 2022-08-23 All Phase Consulting, Inc. Simultaneous uninterrupted media play and call management
US9652196B2 (en) * 2015-06-29 2017-05-16 Microsoft Technology Licensing, Llc Smart audio routing management
USD798331S1 (en) * 2015-08-03 2017-09-26 Google Inc. Display screen with animated graphical user interface
KR102291021B1 (ko) * 2017-03-17 2021-08-18 삼성전자주식회사 오디오 출력을 제어하기 위한 전자 장치 및 그의 동작 방법
CN107450830B (zh) * 2017-07-19 2020-08-14 瑞芯微电子股份有限公司 一种单屏多窗口同时支持多点输入的方法和装置
USD997952S1 (en) 2018-12-21 2023-09-05 Streamlayer, Inc. Display screen with transitional graphical user interface
USD947233S1 (en) 2018-12-21 2022-03-29 Streamlayer, Inc. Display screen or portion thereof with transitional graphical user interface
US11770579B2 (en) 2018-12-21 2023-09-26 Streamlayer, Inc. Method and system for providing interactive content delivery and audience engagement
CN109946456B (zh) * 2019-02-19 2022-02-11 中国农业科学院北京畜牧兽医研究所 牛结核病诊断标志物及其应用
CN111651116B (zh) * 2020-06-04 2022-06-14 京东方科技集团股份有限公司 分屏交互方法、电子设备及计算机存储介质
USD1028999S1 (en) 2020-09-17 2024-05-28 Streamlayer, Inc. Display screen with transitional graphical user interface

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070112563A1 (en) * 2005-11-17 2007-05-17 Microsoft Corporation Determination of audio device quality
US20130008095A1 (en) * 2011-06-15 2013-01-10 Gregory Hoover Portable Sever Weather Shelter
US9052810B2 (en) * 2011-09-28 2015-06-09 Sonos, Inc. Methods and apparatus to manage zones of a multi-zone media playback system
EP2766796A4 (en) * 2011-10-13 2015-07-01 Autodesk Inc Approaching MULTITOUCH TABLETOP
US9244925B2 (en) * 2012-09-21 2016-01-26 Intel Corporation Audio distribution for electronic tabletop system
JP6195481B2 (ja) * 2013-07-08 2017-09-13 東京エレクトロン株式会社 クリーニング方法及び基板処理装置

Also Published As

Publication number Publication date
US20150121278A1 (en) 2015-04-30

Similar Documents

Publication Publication Date Title
KR20150049469A (ko) 멀티 윈도우에서의 사용자 인터페이스 제공 방법 및 장치
US9948980B2 (en) Synchronizing audio content to audio and video devices
US10019224B2 (en) Electronic device and method of operating the same
KR102504201B1 (ko) 전자 장치 및 이의 알림 출력 제어 방법
EP2752762A1 (en) System for control of an image on a first display apparatus through an user interface on a second display apparatus
KR20150082824A (ko) 장치 제어 방법 및 제어 장치
US20180349001A1 (en) Automatic Home Screen Determination Based on Display Device
EP3651008B1 (en) Method for displaying and an electronic device thereof
US10318093B2 (en) Method and apparatus for message processing
US20150067521A1 (en) Method and apparatus for presenting content using electronic devices
KR20150037014A (ko) 전자장치 및 전자장치의 사용자 인터페이스 제공방법
KR20130021614A (ko) 휴대단말기의 표시 방법 및 장치
KR102188101B1 (ko) 오디오 처리 방법 및 그 전자 장치
KR20140127005A (ko) 화면 제어 방법 및 그 전자 장치
US20150095437A1 (en) Method for providing notification information selectively and electronic device thereof
EP2919106A1 (en) Electronic device and method for displaying content
US20150128120A1 (en) Method for providing auto-run service and electronic device thereof
AU2014293863B2 (en) Method for displaying and an electronic device thereof
KR102208624B1 (ko) 전자 장치 및 이의 컨텐츠 제공 방법
KR20150115454A (ko) 서비스 화면을 표시하기 위한 전자 장치 및 방법
KR20150009199A (ko) 객체 편집을 위한 전자 장치 및 방법
KR20150065289A (ko) 데이터 재사용 방법 및 전자장치
KR102176681B1 (ko) 객체 표시를 위한 전자 장치 및 방법
KR20170091437A (ko) 전자 장치 및 전자 장치의 제어 방법
KR20160020158A (ko) 미디어 컨텐츠 관련 정보 제공 방법 및 전자 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application