KR102651875B1 - 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치 - Google Patents

전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치 Download PDF

Info

Publication number
KR102651875B1
KR102651875B1 KR1020160055769A KR20160055769A KR102651875B1 KR 102651875 B1 KR102651875 B1 KR 102651875B1 KR 1020160055769 A KR1020160055769 A KR 1020160055769A KR 20160055769 A KR20160055769 A KR 20160055769A KR 102651875 B1 KR102651875 B1 KR 102651875B1
Authority
KR
South Korea
Prior art keywords
external device
electronic device
application
control
identification information
Prior art date
Application number
KR1020160055769A
Other languages
English (en)
Other versions
KR20170125655A (ko
Inventor
김병오
김철주
이상정
이윤경
진동윤
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160055769A priority Critical patent/KR102651875B1/ko
Priority to PCT/KR2016/011847 priority patent/WO2017191875A1/ko
Priority to US16/096,376 priority patent/US11036367B2/en
Publication of KR20170125655A publication Critical patent/KR20170125655A/ko
Application granted granted Critical
Publication of KR102651875B1 publication Critical patent/KR102651875B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485—Task life-cycle, e.g. stopping, restarting, resuming execution
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/12—Arrangements for remote connection or disconnection of substations or of equipment thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/48—Indexing scheme relating to G06F9/48
    • G06F2209/482—Application
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/20—Binding and programming of remote control devices
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/20—Binding and programming of remote control devices
    • G08C2201/21—Programming remote control devices via third means
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/92—Universal remote control
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/93—Remote control using other portable devices, e.g. mobile phone, PDA, laptop

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)
  • Computer Security & Cryptography (AREA)
  • Stored Programmes (AREA)

Abstract

전자 장치를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신하는 단계, 포그라운드(foreground) 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 단계, 및 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 외부 장치로 전송하는 단계를 포함하는, 외부 장치를 제어하기 위한 전자 장치의 동작 방법을 제공한다.

Description

전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치{electronic apparatus and method for controlling external device}
전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치에 관한 것이다.
모바일 장치의 사용이 보편화 되면서, 모바일 장치는 모바일 장치뿐 아니라 주변 기기들을 제어하기 위한 허브 역할을 수행하고 있다. 웨어러블 및 IOT 환경에서, 모바일 장치에 대한 중요도는 점점 더 커지고 있다.
모바일 장치는 스마트 TV 등과 같은 외부 장치를 제어하기 위한 리모콘 애플리케이션 등과 같은 전용 애플리케이션을 제공한다. 그러나, 모바일 장치에서 제공되는 전용 애플리케이션은, 전통적인 리모콘이 제공하는 기능을 크게 벗어나지 못하고 있다. 또한, 모바일 장치의 사용자는 전용 애플리케이션에 대한 학습을 해야 한다는 점에서 불편함이 있다.
실시예들은 전자 장치가 제공하는 사용자 경험(user experience)에 기초하여, 외부 장치들을 제어할 수 있는 방법 및 그 전자 장치를 제공하는 것을 목적으로 한다.
상술한 과제를 해결하기 위한 개시된 실시예의 제1 측면은, 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신하는 단계; 포그라운드(foreground) 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 단계; 및 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 외부 장치로 전송하는 단계를 포함하는, 전자 장치가 외부 장치를 제어하는 방법을 제공한다.
또한, 사용자 인터페이스는, 전자 장치에 구비된 적어도 하나의 버튼 또는 전자 장치를 제어하기 위해 제공되는 적어도 하나의 GUI 일 수 있다.
또한, 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 단계는, 외부 장치에 설치된 애플리케이션의 식별 정보 및 외부 장치에 설치된 애플리케이션을 제어하기 위한 제어 애플리케이션의 실행 정보를 외부 장치로부터 수신하는 단계; 및 포그라운드 애플리케이션이 제어 애플리케이션의 실행 정보에 매칭되면, 포그라운드 애플리케이션이 외부 장치에 연관되는 것으로 판단하는 단계를 포함할 수 있다.
또한, 포그라운드 애플리케이션은, 외부 장치로부터 수신된 애플리케이션 설치 파일에 기초하여 제공될 수 있다.
또한, 포그라운드 애플리케이션은, 외부 장치로부터 수신된 URL 정보에 기초하여 제공될 수 있다.
또한, 사용자 인터페이스가 음량 조절 버튼인 경우, 제어 신호는 외부 장치의 음량을 업(up) 또는 다운(down)하기 위한 것일 수 있다.
또한, 사용자 인터페이스가 홈 버튼인 경우, 제어 신호는 외부 장치의 화면을 홈 화면으로 전환하기 위한 것일 수 있다.
사용자 인터페이스가 설정창을 활성화하기 위한 GUI 인 경우, 제어 신호는 외부 장치의 화면을 설정창 화면으로 전환하기 위한 것인, 동작 방법.
또한, 포그라운드 애플리케이션은, 전자 장치에 표시된 애플리케이션 목록 중에서 하나를 선택하는 사용자 입력에 따라 실행되며, 애플리케이션 목록은, 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함할 수 있다.
또한, 애플리케이션 목록은, 전자 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록과 구별되어 표시될 수 있다.
또한, 포그라운드 애플리케이션은, 외부 장치의 상태 정보 및 외부 장치에서 실행 중인 애플리케이션에 대한 정보 중 적어도 하나를 포함하는 위젯(widget)일 수 있다.
또한, 사용자 인터페이스는 전자 장치에서 실행 중인 적어도 하나의 애플리케이션을 제어하기 위해 제공될 수 있으며, 전자 장치의 동작 방법은, 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 수신하는 단계; 및
외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보 및 전자 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 포함하는 태스크 매니지먼트(task management) 창을 표시하는, 동작 방법.
또한, 상기 제1 측면의 방법은, 태스크 매니지먼트 창에서, 외부 장치에서 실행 중인 적어도 하나의 애플리케이션을 종료하기 위한 사용자 입력을 수신하는 단계, 및 사용자 입력에 응답하여 애플리케이션 종료 신호를 외부 장치로 전송하는 단계를 더 포함할 수 있다.
또한, 제2 측면은, 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신하는 사용자 인터페이스부, 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하고, 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 생성하는 제어부, 및 제어 신호를 외부 장치로 전송하는 통신부를 포함하는 전자 장치를 제공한다.
또한, 제3 측면은, 상기 제1 측면의 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체를 제공한다.
도 1은 전자 장치가 외부 장치를 제어하는 방법을 설명하기 위한 개요도이다.
도 2는 실시예에 따라 전자 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 3a 및 도 3b는 전자 장치를 제어하기 위해 제공되는 UI 의 일례이다.
도 4는 실시예에 따라 전자 장치가 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 방법을 설명하기 위한 흐름도이다.
도 5는 전자 장치가 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공하는 일례이다.
도 6은 전자 장치가 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공하는 다른 일례이다.
도 7은 전자 장치에서 제공된 애플리케이션 목록에 기초하여, 외부 장치와 연관된 애플리케이션이 실행되는 방법을 설명하기 위한 흐름도이다.
도 8은 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 일례이다.
도 9는 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 다른 일례이다.
도 10은 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 또 다른 일례이다.
도 11은 전자 장치가 전자 장치의 음량을 제어하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 12는 전자 장치가 전자 장치의 음량을 제어하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 13은 전자 장치가 전자 장치의 실행을 취소하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 14는 전자 장치가 전자 장치의 실행을 취소하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 15은 전자 장치가 전자 장치의 화면을 홈 화면으로 전환하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 16은 전자 장치가 전자 장치의 화면을 홈 화면으로 전환하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 17은 전자 장치가 전자 장치의 화면 밝기를 조정하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 18은 전자 장치가 전자 장치의 화면 밝기를 조정하기 위해 제공되는 UI 에 대한 사용자 입력에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 19는 전자 장치가 전자 장치의 설정창을 활성화하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 20은 전자 장치가 전자 장치의 설정창을 활성화하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 21은 전자 장치가 태스크 매니지먼트(task management) 기능을 수행하는 방법을 설명하기 위한 흐름도이다.
도 22a 및 도 22b는 전자 장치가 제공하는 태스크 매니지먼트 창의 일례이다.
도 23 및 도 24는 실시예에 따른 전자 장치의 구성을 도시한 도면이다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되지는 않는다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 항목들의 조합 또는 복수의 관련된 항목들 중의 어느 하나의 항목을 포함한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에서 사용되는 "부"라는 용어는 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, "부"는 어떤 역할들을 수행한다. 그렇지만 "부"는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. "부"는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 "부"는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 "부"들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 "부"들로 결합되거나 추가적인 구성요소들과 "부"들로 더 분리될 수 있다.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
도 1은 전자 장치가 외부 장치를 제어하는 방법을 설명하기 위한 개요도이다.
도 1을 참조하면, 전자 장치(10)는 적어도 하나의 외부 장치(20)와 상호 통신 가능한 네트워크를 이용하여 연결되어 있을 수 있다.
실시예에 따라 전자 장치(10)는 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)를 이용하여 적어도 하나의 외부 장치(20)를 제어할 수 있다. 여기서, 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)는, 전자 장치(10)의 기본적인 기능들을 직관적으로 제어하기 위해 미리 설정되어 있을 수 있다. 예를 들어, 전자 장치(10)는 전자 장치(10)의 음량 조절, 화면 밝기, 화면 전환, 태스크 매니지먼트(task management), 통신 연결 등의 기능을 직관적으로 제어하기 위한 UI 를 제공할 수 있다. 또한, 전자 장치(10)를 제어하기 위해 제공되는 UI 는, 전자 장치(10)에 구비된 물리 버튼(11 내지 13) 또는 소프트 버튼(14 내지 15) 또는 GUI(graphic user interface)(16 내지 18) 등을 포함할 수 있다.
실시예에 따라 전자 장치(10)는 포그라운드(foreground) 애플리케이션이 외부 장치(20)와 연관되어 있으면, 전자 장치(10)를 제어하기 위해 제공되는 UI 를 이용하여 외부 장치(20)의 기능을 직관적으로 제어할 수 있다. 여기서, 포그라운드(foreground) 애플리케이션은, 멀티 태스킹(multi-tasking) 환경에서 현재 활성화된 애플리케이션일 수 있다. 또한, 애플리케이션이 외부 장치(20)와 연관된다는 것은, 애플리케이션이 외부 장치(20)로부터 제공되거나, 외부 장치(20)로부터 제공된 정보에 기초하여 제공되는 것일 수 있다.
전자 장치(10)를 제어하기 위해 제공되는 UI 는, 일반적으로 포그라운드 애플리케이션에 관계없이 전자 장치(10)의 기능을 제어하나, 실시예에 따라 전자 장치(10)는 포그라운드 애플리케이션이 전자 장치(10) 또는 외부 장치(20)와 연관되는지 여부에 기초하여 전자 장치(10) 또는 외부 장치(20)의 기능을 제어할 수 있다. 예를 들어, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되면, 전자 장치(10)에서 제공되는 UI에 대한 사용자 입력에 대응되는 제어 신호를 외부 장치(20)에게 제공함으로써, 외부 장치(20)의 음량 조절, 화면 밝기, 화면 전환, 태스크 매니지먼트, 통신 연결 등의 기능을 제어할 수 있다.
전자 장치(10)는 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어 또는 모바일 의료기기 중 적어도 하나를 포함할 수 있다.
또한, 외부 장치(20)는 가전 제품(home appliance)일 수 있다. 가전 제품은, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), 홈 오토매이션 컨트롤 패널(home automation control panel), 보안 컨트롤 패널(security control panel), TV 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(예: XboxTM, PlayStationTM), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
또는, 외부 장치(20)는 웨어러블 장치(wearable device)일 수 있다. 웨어러블 장치는, 예를 들어, 액세서리형(예: 시계, 반지, 팔찌, 발찌, 목걸이, 안경, 콘택트 렌즈, 또는 머리 착용형 장치(head-mounted-device(HMD)), 직물 또는 의류 일체형(예: 전자 의복), 신체 부착형(예: 스킨 패드(skin pad) 또는 문신), 또는 생체 이식형(예: implantable circuit) 중 적어도 하나를 포함할 수 있다.
또는, 외부 장치(20)는 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 등), 네비게이션(navigation) 장치, 위성 항법 시스템(GNSS(global navigation satellite system)), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller's machine), 상점의 POS(point of sales), 또는 사물 인터넷 장치(internet of things)(예: 전구, 각종 센서, 전기 또는 가스 미터기, 스프링클러 장치, 화재경보기, 온도조절기(thermostat), 가로등, 토스터(toaster), 운동기구 등) 중 적어도 하나를 포함할 수 있다.
도 2는 실시예에 따라 전자 장치의 동작 방법을 설명하기 위한 흐름도이다.
도 2를 참조하면, S210 에서, 전자 장치(10)는 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)에 대한 사용자 입력을 수신한다. 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)는, 전자 장치(10)에 구비된 적어도 하나의 버튼, 또는 전자 장치(10)를 제어하기 위해 제공되는 적어도 하나의 GUI(graphic user interface)일 수 있다. 또한, 사용자 입력은, 전자 장치(10)에 구비된 버튼 또는 GUI 에 대한 누름, 연속 누름, 롱(long) 누름, 터치(touch), 롱프레스 터치(long-pressed touch) 입력 등을 포함할 수 있다.
도 3a 및 도 3b는 전자 장치를 제어하기 위해 제공되는 UI 의 일례이다.
도 3a를 참조하면, 전자 장치(10)는 전자 장치(10)를 제어하기 위한 물리 버튼 및 소프트 버튼을 제공할 수 있다. 예를 들어, 전자 장치(10)는 음량 조절을 위한 음량 조절 버튼(11), 전원 버튼(12) 및 홈 버튼(13)을 포함하는 물리 버튼을 제공할 수 있다. 또한, 전자 장치(10)는 태스크 매니지먼트(task management) 버튼(14) 및 실행 취소 버튼(15)을 포함하는 소프트 버튼을 제공할 수 있다. 그러나, 이에 제한되는 것은 아니며, 제조사에 의해 더 많은 수의 버튼 또는 더 적은 수의 버튼이 제공될 수 있다. 예를 들어, 전자 장치(10)는 태스크 매니지먼트 버튼(14)을 별도로 구비하지 않고, 홈 버튼(13)에 대한 사용자 입력(예를 들어, 연속 누름 입력 또는 롱 누름 입력)에 기초하여 태스크 매니지먼트 버튼에 대응되는 동작을 수행할 수 있다.
도 3b를 참조하면, 전자 장치(10)는 전자 장치(10)를 제어하기 위한 GUI(graphic user interface)를 제공할 수 있다. 예를 들어, 전자 장치(10)는 화면의 상단에 대한 터치앤드래그(touch&drag) 입력에 응답하여, 알림창(301)을 활성화할 수 있다. 또한, 전자 장치(10)는 알림창(301)을 통해 전자 장치(10)의 다양한 설정을 신속하게 변경할 수 있는 빠른 설정 GUI들(17), 설정창 실행 GUI(16) 및 화면 밝기 조절 GUI(18)를 제공할 수 있다. 그러나, 이에 제한되는 것은 아니며, 제조사 또는 사용자에 의해 전자 장치(10)를 제어하기 위한 다양한 GUI 가 제공될 수 있다.
다시 도 2를 참조하면, 실시예에 따라 전자 장치(10)는 도 3a 또는 도3b에 도시된 적어도 하나의 UI 에 대한 사용자 입력을 수신할 수 있다.
S220에서, 전자 장치(10)는 포그라운드(foreground) 애플리케이션이 외부 장치(20)와 연관되는지 여부를 판단한다.
실시예에 따라 전자 장치(10)는 외부 장치(20)로부터 실행 중인 애플리케이션의 식별 정보에 기초하여, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는지 판단할 수 있다. 예를 들어, 전자 장치(10)는 외부 장치(20)로부터 수신된 식별 정보와 포그라운드 애플리케이션의 식별 정보가 매칭되면, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는 것으로 판단할 수 있다.
또는, 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 미리 수신하고, 포그라운드 애플리케이션이 미리 수신된 애플리케이션들에 대한 정보에 매칭되는지 여부를 판단할 수 있다. 여기서, 외부 장치(20)에 설치된 애플리케이션들에 대한 정보는, 외부 장치(20)에 설치된 애플리케이션들의 식별 정보 및 외부 장치(20)에 설치된 애플리케이션들을 제어하기 위한 제어 애플리케이션의 실행 정보를 포함할 수 있다. 제어 애플리케이션은, 외부 장치(20)에서 실행되는 애플리케이션을 전자 장치(10)가 제어하기 위한 것일 수 있다. 한편, 전자 장치(10)는, 주기적으로 또는 소정 시점에, 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 수신할 수 있다.
또한, 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공할 수 있다. 전자 장치(10)는 애플리케이션 목록 중 하나를 선택하는 사용자 입력이 수신되면, 선택된 애플리케이션을 실행하기 위한 제어 신호를 외부 장치(20)로 전송하고, 선택된 애플리케이션에 대응되는 제어 애플리케이션을 전자 장치(10)에서 실행할 수 있다. 이때, 제어 애플리케이션이 포그라운드 애플리케이션으로 실행 중인 경우, 제어 애플리케이션은 외부 장치(20)에 연관되며, 미리 수신된 애플리케이션들에 대한 정보에 매칭될 수 있다.
S230에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치와 연관되면, 사용자 입력에 대응되는 제어 신호를 외부 장치(20)로 전송한다.
실시예에 따라 전자 장치(10)는 사용자 입력에 대응되는 동작을 수행하는 대신, 사용자 입력에 대응되는 제어 신호를 외부 장치(20)로 전송할 수 있다. 예를 들어, 전자 장치(10)는 음량 조절, 화면 밝기 조절, 통신 연결 등의 동작을 수행하기 위한 사용자 입력에 대응되는 제어 신호를 외부 장치(20)로 전송할 수 있다.
또는, 전자 장치(10)는 사용자 입력에 대응되는 동작을 수행하면서, 제어 신호를 외부 장치(20)로 전송할 수 있다. 예를 들어, 전자 장치(10)는 설정창 활성화, 화면 전환 등의 동작을 수행하기 위한 사용자 입력에 대응되는 제어 신호를 외부 장치(20)로 전송하면서, 전자 장치(10)의 설정창을 활성화하거나 화면을 전환시키는 등의 동작을 수행할 수 있다.
한편, 전자 장치(10)가 복수의 외부 장치(20)와 통신 연결된 경우, 전자 장치(10)는 포그라운드 애플리케이션에 연관되는 특정 외부 장치로 제어 신호를 전송할 수 있다.
외부 장치(20)는 수신된 제어 신호에 대응되는 동작을 수행할 수 있다.
도 4는 실시예에 따라 전자 장치가 포그라운드 애플리케이션이 외부 장치와 연관되는지 여부를 판단하는 방법을 설명하기 위한 흐름도이다.
도 4를 참조하면, S410에서, 외부 장치(20)는 외부 장치(20)에 설치된 애플리케이션의 식별 정보 및 외부 장치(20)에 설치된 애플리케이션을 제어하기 위한 제어 애플리케이션의 실행 정보를 전자 장치(10)로 전송할 수 있다.
예를 들어, 외부 장치(20)는 외부 장치(20)에 설치된 애플리케이션의 식별값(401) 및 아이콘 이미지(402)를 포함하는 애플리케이션 식별 정보 및 외부 장치(20)에 설치된 애플리케이션을 제어할 수 있는 제어 애플리케이션의 실행 정보(403)를 전자 장치(10)로 전송할 수 있다. 여기서, 제어 애플리케이션의 실행 정보(403)는, 전자 장치(10)가 외부 장치(20)에 설치된 애플리케이션을 제어하기 위해 전자 장치(10)에서 실행되는 제어 애플리케이션의 식별값 및 실행 파일에 대한 정보 중 적어도 하나를 포함할 수 있다. 예를 들어, 제어 애플리케이션의 실행 정보(403)는, URL 정보, 애플리케이션 설치 파일 정보 또는 위젯(widget) 실행 정보 등을 포함할 수 있다. 또한, 애플리케이션의 식별값(401)은 외부 장치(20)에 설치된 애플리케이션의 이름, 코드(code), 아이디, 또는 채널 정보 등을 포함할 수 있다. 한편, 전자 장치(10)는 외부 장치(20)로부터 수신된 애플리케이션들에 대한 정보를 테이블(table)(400)로 관리할 수 있다.
실시예에 따라 전자 장치(10)는 외부 장치(20)로부터 수신된 애플리케이션 식별 정보에 기초하여, 애플리케이션의 식별값(401) 및 아이콘 이미지(402) 중 적어도 하나를 포함하는 애플리케이션 목록을 제공할 수 있다. 또한, 애플리케이션 목록 중 하나가 선택되면, 선택된 애플리케이션을 실행하기 위한 제어 신호를 외부 장치(20)로 제공하고, 선택된 애플리케이션에 대응되는 제어 애플리케이션을 전자 장치(10)에서 실행할 수 있다. 제어 애플리케이션은, 예를 들어, 전자 장치(10)에 설치되어 실행될 수 있으며, 브라우저를 통해 제공되는 웹 애플리케이션, 또는 위젯일 수 있다. 이와 같이, 전자 장치(10)는 외부 장치(20)를 제어하기 위한 전용 애플리케이션을 설치하지 않으면서, 외부 장치(20)에 설치된 애플리케이션들을 실행 및 제어할 수 있다.
S420에서, 전자 장치(10)는 수신된 애플리케이션의 식별 정보에 기초하여, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는지 여부를 판단할 수 있다.
실시예에 따라 전자 장치(10)는 테이블(400)에 저장된 값들 중에서, 포그라운드 애플리케이션과 매칭되는 값이 존재하는지 판단할 수 있다. 예를 들어, 전자 장치(10)는 포그라운드 애플리케이션의 실행 정보가 테이블(400)의 제어 애플리케이션에 대한 정보(403)와 매칭되는지 판단할 수 있다.
또는, 실시예에 따라 전자 장치(10)는 애플리케이션 디스크립터(application descriptor)에 플래그(flag)를 추가하여, 각 애플리케이션이 연관된 장치를 나타낼 수도 있다. 이 경우, 전자 장치(10)는 추가된 플래그를 참조하여, 포그라운드 애플리케이션이 외부 장치(20)와 연관되는지 여부를 판단할 수 있다.
도 5는 전자 장치가 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공하는 일례이다.
도 5를 참조하면, 실시예에 따라 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 수신하여, 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공할 수 있다. 예를 들어, 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션의 식별값(도 4의 401) 및 아이콘 이미지(도 4의 402)를 이용하여, 애플리케이션 목록을 제공할 수 있다.
또한, 전자 장치(10)는 애플리케이션 목록을 포함하는 폴더(folder)(510)를 제공할 수 있다. 전자 장치(10)는 폴더(510)에 대한 사용자 입력(540)이 수신되면, 도 5의 530에 도시된 바와 같이, 폴더(510)에 포함된 애플리케이션 목록을 화면에 표시할 수 있다.
한편, 전자 장치(10)는 전자 장치(10)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록과 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 구별하여 표시할 수 있다. 예를 들어, 전자 장치(10)는 전자 장치(10)에 설치된 애플리케이션들의 식별 정보를 포함하는 적어도 하나의 폴더(520)와 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 적어도 하나의 폴더(510)를 구별하여 제공할 수 있다.
도 6은 전자 장치가 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공하는 다른 일례이다.
도 6을 참조하면, 실시예에 따라 전자 장치(10)는 외부 장치(20)를 직관적으로 나타내는 아이콘 이미지(610, 620)를 제공함으로써, 각 외부 장치에 대응되는 애플리케이션 목록을 제공할 수 있다.
예를 들어, 전자 장치(10)는 제1 외부 장치를 나타내는 아이콘 이미지(610), 제2 외부 장치를 나타내는 아이콘 이미지(620) 등을 홈(home) 화면에 표시할 수 있다. 전자 장치(10)는 제1 외부 장치의 아이콘 이미지(610)에 대한 사용자 입력이 수신되면, 도 6의 630에 도시된 바와 같이, 제1 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 표시할 수 있다.
도 7은 전자 장치에서 제공된 애플리케이션 목록에 기초하여, 외부 장치와 연관된 애플리케이션이 실행되는 방법을 설명하기 위한 흐름도이다.
도 7을 참조하면, S710 에서, 전자 장치(10)는 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 제공할 수 있다.
S720 에서, 전자 장치(10)는 애플리케이션 목록 중 하나를 선택하는 사용자 입력을 수신할 수 있다.
S730 에서, 전자 장치(10)는 선택된 애플리케이션을 실행하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. S740 에서, 외부 장치(20)는 수신된 제어 신호에 기초하여, 전자 장치(10)에서 선택된 애플리케이션을 실행할 수 있다.
S750 에서, 전자 장치(10)는 선택된 애플리케이션을 제어하기 위한 제어 애플리케이션을 실행할 수 있다. 제어 애플리케이션은, 외부 장치(20)로부터 수신된 설치 파일에 기초하여 실행되는 애플리케이션, URL 에 기초하여 실행되는 웹 애플리케이션, 또는 위젯일 수 있다. 또한, 전자 장치(10)에서 실행되는 제어 애플리케이션은 외부 장치(20)에 연관된다.
도 8은 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 일례이다.
도 8을 참조하면, 전자 장치(10)는 외부 장치(20)에서 실행되는 브라우저 애플리케이션(820)을 제어하기 위한 브라우저 제어 애플리케이션(810)을 실행할 수 있다. 이때, 브라우저 제어 애플리케이션(810)은 외부 장치(20)로부터 수신된 설치 파일에 기초하여 전자 장치(10)에 설치될 수 있다. 또한, 브라우저 제어 애플리케이션(810)은 브라우저 애플리케이션(820)의 입력, 웹 페이지 이동, 콘텐트 선택 등을 제어할 수 있는 GUI 를 제공할 수 있다.
도 9는 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 다른 일례이다.
도 9를 참조하면, 전자 장치(10)는 외부 장치(20)에서 실행되는 A/V(Audio/Video) 콘텐트 재생 애플리케이션(920)을 제어하기 위한 웹 애플리케이션(910)을 실행할 수 있다. 예를 들어, 웹 애플리케이션(910)은 외부 장치(20)로부터 수신된 URL 에 접근함으로써, A/V 콘텐트 재생 애플리케이션(920)의 콘텐트 선택, 재생 등을 제어하기 위한 GUI 를 제공할 수 있다.
도 10은 전자 장치가 외부 장치와 연관된 제어 애플리케이션을 실행하는 또 다른 일례이다.
도 10을 참조하면, 전자 장치(10)는 외부 장치(20)의 상태 정보 및 실행 중인 애플리케이션 정보 중 적어도 하나를 제공하기 위한 위젯(1010, 1020)을 실행할 수 있다. 예를 들어, 전자 장치(10)는 외부 장치(20)를 나타내는 아이콘(도 6의 610)에 대한 롱-프레스 터치 입력이 수신되면, 외부 장치(20)의 상태 정보를 나타내는 위젯(1010)을 제공할 수 있다. 또한, 전자 장치(10)는 애플리케이션 목록에서 선택된 애플리케이션에 대응되는 위젯(1020)을 실행할 수 있다.
또한, 전자 장치(10)는 외부 장치(20)로부터 이벤트(event)가 수신되면, 이벤트를 포함하는 위젯(미도시)을 제공할 수도 있다. 여기서, 이벤트는, 외부 장치(20)에 기 설정된 알림 이벤트(예를 들어, TV 프로그램 시작 시간 알림 이벤트, 냉장고 열림 알림 이벤트 등), 외부 장치(20)에 설치된 애플리케이션의 업데이트 이벤트 등을 포함할 수 있다. 한편, 외부 장치(20)로부터 수신된 이벤트는, 전자 장치(10)의 노티피케이션 바(notification bar) 또는 알림창(도 3b의 301)에서 표시될 수도 있다.
한편, 도 8 내지 도 10에 도시된 제어 애플리케이션들 등은 다양한 GUI 를 제공하며, 전자 장치(10)는 상기 GUI 에 대한 사용자 입력을 이용하여 외부 장치(20)를 제어할 수 있다. 또한, 실시예에 따라 전자 장치(10)는 도 8 내지 도 10에 도시된 제어 애플리케이션들 등이 포그라운드 애플리케이션으로 동작하는 경우, 전자 장치(10)를 제어하기 위해 제공되는 UI 에 대한 사용자 입력을 이용하여 외부 장치(20)를 제어할 수 있다.
도 11은 전자 장치가 전자 장치의 음량을 제어하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 11을 참조하면, S1110 에서, 전자 장치(10)는 전자 장치(10)에 구비된 음량 조절 버튼(11)에 대한 사용자 입력을 수신할 수 있다.
S1120 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되는지 판단할 수 있다. 포그라운드 애프리케이션이 외부 장치(20)와 연관되지 않으면, S1130 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)의 음량을 조절할 수 있다.
포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1140 에서, 전자 장치(10)는 외부 장치(20)의 음량을 조절하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. 예를 들어, 전자 장치(10)는 음량 조절 버튼(11)의 업(up) 버튼에 대한 누름 입력이 수신되면, 외부 장치(20)의 음량을 증가시키기 위한 제어 신호를 전송할 수 있다. 또한, 전자 장치(10)는 음량 조절 버튼(11)의 다운(down) 버튼에 대한 누름 입력이 수신되면, 외부 장치(20)의 음량을 감소시키기 위한 제어 신호를 전송할 수 있다.
도 12는 전자 장치가 전자 장치의 음량을 제어하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 12를 참조하면, 전자 장치(10)는 외부 장치(20)에 연관된 웹 애플리케이션(910)의 실행 중, 전자 장치(10)의 음량을 조절하기 위한 음량 조절 버튼(11)에 대한 사용자 입력(1210)을 수신할 수 있다. 또한, 전자 장치(10)는 사용자 입력(1210)에 대응되는 제어 신호를 외부 장치(20)로 제공할 수 있다.
외부 장치(20)는 전자 장치(10)로부터 수신된 제어 신호에 기초하여, 외부 장치(20)의 음량을 조절할 수 있다. 또한, 외부 장치(20)는 전자 장치(10)에 의해 조절되는 음량을 나타내는 이미지(1220)를 화면에 표시할 수 있다.
도 13은 전자 장치가 전자 장치의 실행을 취소하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 13을 참조하면, S1310 에서, 전자 장치(10)는 전자 장치(10)에 구비된 실행 취소 버튼(15)에 대한 사용자 입력을 수신할 수 있다.
S1320 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치와 연관되는지 판단할 수 있다. 포그라운드 애플리케이션이 외부 장치(20)와 연관되지 않으면, S1330 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)에서 마지막으로 실행된 작업을 취소할 수 있다.
포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1340 에서, 전자 장치(10)는 외부 장치(20)에서 마지막으로 실행된 작업을 취소하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다.
도 14는 전자 장치가 전자 장치의 실행을 취소하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 14를 참조하면, 전자 장치(10)는 외부 장치(20)에 연관된 웹 애플리케이션(910)의 실행 중에 실행 취소 버튼(15)에 대한 사용자 입력(1410)을 수신할 수 있다. 전자 장치(10)는 사용자 입력(1410)에 대응되는 제어 신호를 외부 장치(20)로 전송할 수 있다.
외부 장치(20)는 수신된 제어 신호에 기초하여, 외부 장치(20)에서 마지막으로 실행된 작업을 취소하고 이전 화면을 표시할 수 있다. 예를 들어, 현재 실행 중인 A/V 콘텐트 재생 애플리케이션(920)을 종료하고, 이전에 실행 했던 브라우저 애플리케이션(820)의 실행 화면을 표시할 수 있다. 이 경우, 전자 장치(10)는 A/V 콘텐트 재생 애플리케이션(920)에 대응되는 웹 애플리케이션(910)을 종료할 수 있다. 또한, 전자 장치(10)는 외부 장치(20)에서 재실행되는 브라우저 애플리케이션(820)에 대응되는 브라우저 제어 애플리케이션(도 8의 810)을 재실행할 수 있다.
도 15은 전자 장치가 전자 장치의 화면을 홈 화면으로 전환하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 15를 참조하면, S1510 에서, 전자 장치(10)는 전자 장치(10)에 구비된 홈 버튼(13)에 대한 사용자 입력을 수신할 수 있다.
S1520 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치와 연관되는지 판단할 수 있다. 포그라운드 애플리케이션이 외부 장치(20)와 연관되지 않으면, S1530 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)의 화면을 홈 화면(또는, 초기 화면)으로 전환할 수 있다.
포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1540 에서, 전자 장치(10)는 외부 장치(20)의 화면을 홈 화면(또는, 초기 화면)으로 전환하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. 또한, 전자 장치(10)는 S1530 단계로 이동하여, 전자 장치(10)의 화면을 홈 화면(또는, 초기 화면)으로 전환할 수 있다.
도 16은 전자 장치가 전자 장치의 화면을 홈 화면으로 전환하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 16을 참조하면, 전자 장치(10)는 외부 장치(20)에 연관된 웹 애플리케이션(910)의 실행 중에 홈 버튼(13)에 대한 사용자 입력(1610)을 수신하고, 사용자 입력(1610)에 대응되는 제어 신호를 외부 장치(20)로 전송할 수 있다.
외부 장치(20)는 수신된 제어 신호에 기초하여, A/V 콘텐트 재생 애플리케이션의 실행 화면(미도시)을 홈 화면(1620)으로 전환할 수 있다. 또한, 전자 장치(10)는 제어 신호를 외부 장치(20)로 전송한 후, 전자 장치(10)의 화면을 홈 화면(미도시)으로 전환할 수 있다.
도 17은 전자 장치가 전자 장치의 화면 밝기를 조정하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 17을 참조하면, S1710 에서, 전자 장치(10)는 전자 장치(10)의 화면 밝기를 신속하게 조절하기 위해 제공되는 화면 밝기 조절 GUI(18)에 대한 사용자 입력을 수신할 수 있다.
S1720 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되는지 판단할 수 있다. 포그라운드 애플리케이션이 외부 장치(20)와 연관되지 않으면, S1730 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)의 화면 밝기를 조절할 수 있다.
포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1740 에서, 전자 장치(10)는 외부 장치(20)의 화면 밝기를 조절하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다.
도 18은 전자 장치가 전자 장치의 화면 밝기를 조정하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 18을 참조하면, 전자 장치(10)는 전자 장치(10)의 알림창(301)에서 제공되는 화면 밝기 조절 GUI(18)에 대한 사용자 입력(1810)에 응답하여, 외부 장치(20)의 화면 밝기를 조절할 수 있다.
외부 장치(20)는 전자 장치(10)로부터 수신된 제어 정보에 기초하여, 외부 장치(20)의 화면 밝기를 조절할 수 있다. 또한, 외부 장치(20)는 전자 장치(10)에 의해 조절되는 현재 화면 밝기를 나타내는 이미지(1820)를 표시할 수 있다.
한편, 전자 장치(10)는 전자 장치(10)의 통신 연결(예를 들어, 블루투스 통신 연결, 와이파이 통신 연결 등)을 신속하게 제어하기 위한 통신 연결 GUI(17)에 대한 사용자 입력에 응답하여, 외부 장치(20)의 통신 연결을 제어하기 위한 제어 신호를 외부 장치(20)로 제공할 수도 있다. 이 경우, 외부 장치(20)는 수신된 제어 신호에 기초하여, 외부 장치(20)의 통신 연결을 설정하거나 종료할 수 있다.
도 19는 전자 장치가 전자 장치의 설정창을 활성화하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 방법을 설명하는 흐름도이다.
도 19를 참조하면, S1910 에서, 전자 장치(10)는 전자 장치(10)의 설정창을 신속하게 활성화하기 위해 제공되는 설정창 활성화 GUI(18)에 대한 사용자 입력을 수신할 수 있다.
S1920 에서, 전자 장치(10)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되는지 판단할 수 있다. 포그라운드 애플리케이션이 외부 장치(20)와 연관되지 않으면, S1730 에서, 전자 장치(10)는 사용자 입력에 응답하여 전자 장치(10)에 대응되는 설정창을 활성화할 수 있다.
실시예에 따라 설정창은 전자 장치(10)의 설정 및 외부 장치(20)의 설정을 변경할 수 있는 복수의 페이지들을 포함할 수 있다. 따라서, 전자 장치(10)에 대응되는 설정창은, 복수의 페이지들 중, 전자 장치(10)의 설정을 변경할 수 있는 적어도 하나의 페이지를 의미할 수 있다. 전자 장치(10)는 외부 장치(20)로부터 수신된 설정 정보(configuration information)에 기초하여, 각 페이지를 생성할 수 있다.
만약, 포그라운드 애플리케이션이 외부 장치(20)와 연관되면, S1740 에서, 전자 장치(10)는 외부 장치(20)의 화면을 설정창 화면으로 전환하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. 또한, S1950 에서, 전자 장치(10)는 외부 장치(20)에 대응되는 설정창을 활성화할 수 있다. 여기서, 외부 장치(20)에 대응되는 설정창은, 복수의 페이지들 중, 외부 장치(20)의 설정을 변경할 수 있는 적어도 하나의 페이지를 의미할 수 있다.
도 20은 전자 장치가 설정창을 활성화하기 위해 제공되는 UI 에 대응되는 제어 신호를 외부 장치로 제공하는 일례이다.
도 20을 참조하면, 전자 장치(10)는 전자 장치(10)의 알림창(301)에서 제공되는 설정창 활성화 GUI(16)에 대한 사용자 입력(2010)에 응답하여, 외부 장치(20)의 화면을 설정창(2020) 화면으로 전환할 수 있다.
또한, 전자 장치(10)는, 도20의 우측에 도시된 바와 같이, 전자 장치(10)의 설정창(2040)을 활성화할 수 있다. 이때, 전자 장치(10)는 전자 장치(10)의 설정창(2040)에 포함된 복수의 페이지들을 중에서, 외부 장치(20)의 설정을 변경할 수 있는 페이지(2041)를 활성화할 수 있다. 외부 장치(20)의 설정을 변경할 수 있는 페이지(2041)는 외부 장치(20)에서 활성화된 설정창(2020)과 동일 또는 유사한 항목을 포함할 수 있다.
도 21은 전자 장치가 태스크 매니지먼트(task management) 기능을 수행하는 방법을 설명하기 위한 흐름도이다.
도 21을 참조하면, S2110 에서, 전자 장치(10)는 태스크 매니지먼트 버튼(14)에 대한 사용자 입력을 수신할 수 있다.
S2120 에서, 전자 장치(10)는 외부 장치(20)에서 실행 중인 애플리케이션의 식별 정보를 요청할 수 있다. 또한, S2130 에서, 전자 장치(10)는 외부 장치(20)에서 실행 중인 애플리케이션의 식별 정보를 수신할 수 있다.
S2140 에서, 전자 장치(10)는 전자 장치(10) 및 외부 장치(20)에서 실행 중인 애플리케이션들의 식별 정보를 포함하는 태스크 매니지먼트 창을 제공할 수 있다. 여기서, 태스크 매니지먼트 창은, 전자 장치(10) 또는 외부 장치(20)의 백그라운드(background) 애플리케이션을 포그라운드 애플리케이션으로 전환하거나, 전자 장치(10) 또는 외부 장치(20)에서 실행 중인 애플리케이션을 종료할 수 있는 GUI 를 제공할 수 있다.
예를 들어, 전자 장치(10)는 태스크 매니지먼트 창에서 외부 장치(20)에서 실행 중인 적어도 하나의 애플리케이션을 종료하기 위한 사용자 입력을 수신할 수 있다. 또한, 전자 장치(10)는 수신된 사용자 입력에 응답하여 애플리케이션 종료 신호를 외부 장치(20)로 전송할 수 있다.
도 22a 및 도 22b는 전자 장치가 제공하는 태스크 매니지먼트 창의 일례이다.
도 22a를 참조하면, 전자 장치(10)는 전자 장치(10) 및 외부 장치(20)에서 실행 중인 애플리케이션들의 식별 정보를 포함하는 태스크 매니지먼트 창(2210)을 제공할 수 있다. 한편, 전자 장치(10)는 각 애플리케이션이 실행되는 장치를 나타내는 이미지(2211 내지 2214)를 제공할 수 있다. 따라서, 사용자는 직관적으로 각 애플리케이션이 실행 중인 장치를 인지할 수 있다.
도 22b를 참조하면, 전자 장치(10)에서 제공되는 태스크 매니지먼트 창(2220)은, 장치 별로, 실행 중인 애플리케이션의 식별 정보를 표시할 수도 있다. 예를 들어, 전자 장치(10)는 태스크 매니지먼트 창(2220)을 분할하여, 전자 장치(10)에서 실행중인 애플리케이션의 식별 정보(2222)와 외부 장치(20)에서 실행 중인 애플리케이션의 식별 정보(2221)를 구별하여 표시할 수 있다.
도 23 및 도 24는 실시예에 따른 전자 장치의 구성을 도시한 도면이다. 도 23 및 도 24에 도시된 각 구성의 동작은, 앞서 설명된 도 1 내지 도 22 에서 설명된 실시예와 관련된다. 따라서, 이하 생략된 내용이라 할지라도, 도 1 내지 도 22 에서 앞서 설명된 내용들은, 도 23 및 도 24의 각 구성의 동작에 적용될 수 있다.
도 23에 도시된 바와 같이, 실시예에 따른 전자 장치(10)는 사용자 인터페이스부(1100), 제어부(1200) 및 통신부(1300)를 포함할 수 있다. 그러나, 도 23에 도시된 구성 요소 모두가 전자 장치(10)의 필수 구성 요소인 것은 아니다. 도 23에 도시된 구성 요소보다 많은 구성 요소에 의해 전자 장치(10)가 구현될 수도 있고, 도 23에 도시된 구성 요소보다 적은 구성 요소에 의해 전자 장치(10)가 구현될 수도 있다.
예를 들어, 도 24에 도시된 바와 같이, 실시예에 따른 전자 장치(10)는 사용자 인터페이스부(1100), 제어부(1200) 및 통신부(1300) 이외에, 출력부(1400), 센싱부(1500), A/V 입력부(1600), 및 메모리(1700)를 더 포함할 수도 있다.
사용자 인터페이스부(1100)는 사용자가 전자 장치(10)를 제어하기 위한 데이터를 입력하는 수단을 의미할 수 있다.
실시예에 따라 사용자 인터페이스부(1100)는 전자 장치(10)를 제어하기 위해 제공되는 사용자 인터페이스(UI)와 전자 장치(10)에서 실행 중인 애플리케이션을 제어하기 위해 제공되는 사용자 인터페이스(UI)를 포함할 수 있다. 전자 장치(10)를 제어하기 위해 제공되는 UI 는, 예를 들어, 전자 장치(10)의 음량 조절, 화면 밝기, 화면 전환, 태스크 매니지먼트(task management), 통신 연결 등의 기능을 직관적으로 제어하기 위한 UI 를 포함할 수 있다.
또한, 전자 장치(10)를 제어하기 위해 제공되는 UI 는, 전자 장치(10)에 구비된 적어도 하나의 버튼 또는 적어도 하나의 GUI(graphic user interface)를 포함할 수 있다. 이때, 적어도 하나의 GUI는, 터치 패드(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등)를 이용하여 데이터를 입력하는 수단일 수 있다. 또한, 사용자 인터페이스부(1100)는 돔 스위치(dome switch), 조그 휠 등을 더 포함할 수 있다.
사용자 인터페이스부(1100)는 전자 장치(10)를 제어하기 위해 제공되는 UI 에 대한 사용자 입력을 수신하고, 수신된 사용자 입력을 제어부(1200)로 제공할 수 있다. 한편, 사용자의 입력에는, 누름, 연속 누름, 롱 누름, 탭, 터치&홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭, 스와이프 등이 있을 수 있다.
제어부(1200)는 통상적으로 전자 장치(10)의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(1200)는 메모리(1700)에 저장된 프로그램들을 실행함으로써, 사용자 인터페이스부(1100), 통신부(1300), 출력부(1400), 센싱부(1500), A/V 입력부(1600) 등을 전반적으로 제어할 수 있다. 제어부(1200)는 도 1 내지 도 22에서의 전자 장치(10)의 동작을 수행하기 위하여, 사용자 인터페이스부(1100), 통신부(1300), 출력부(1400), 센싱부(1500), A/V 입력부(1600) 등을 전반적으로 제어할 수 있다.
구체적으로, 제어부(1200)는 사용자 인터페이스부(1100)를 통해 사용자 입력이 수신되면, 포그라운드(foreground) 애플리케이션이 외부 장치(20)와 연관되는지 판단할 수 있다. 예를 들어, 제어부(1200)는 외부 장치(20)로부터 실행 중인 애플리케이션의 식별 정보에 기초하여, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는지 판단할 수 있다. 또는, 제어부(1200)는 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 미리 수신하고, 포그라운드 애플리케이션이 미리 수신된 애플리케이션들에 대한 정보에 매칭되는지 여부를 판단할 수 있다. 여기서, 외부 장치(20)에 설치된 애플리케이션들에 대한 정보는, 외부 장치(20)에 설치된 애플리케이션들의 식별 정보 및 외부 장치(20)에 설치된 애플리케이션들을 제어하기 위해 전자 장치(10)에서 제공되는 제어 애플리케이션의 실행 정보를 포함할 수 있다. 또한, 제어 애플리케이션의 실행 정보는, URL 정보, 애플리케이션 설치 파일 또는 위젯(widget) 실행 파일 등을 포함할 수 있다. 따라서, 제어부(1200)는 포그라운드 애플리케이션이 제어 애플리케이션의 실행 정보에 매칭되는지 여부에 기초하여, 포그라운드 애플리케이션이 외부 장치(20)에 연관되는지 판단할 수 있다. 한편, 제어부(1200)는 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 메모리(1600)에 저장할 수 있다.
실시예에 따라 제어부(1200)는 포그라운드 애플리케이션이 외부 장치(20)에 연관되면, 사용자 인터페이스부(1100)를 통해 수신된 사용자 입력에 대응되는 동작을 수행하는 대신, 사용자 입력에 대응되는 제어 신호를 생성할 수 있다. 예를 들어, 제어부(1200)는 음량 조절, 화면 밝기 조절, 통신 연결 등의 동작을 수행하기 위한 사용자 입력에 대응되는 제어 신호를 생성할 수 있다.
또는, 제어부(1200)는 포그라운드 애플리케이션이 외부 장치(20)와 연관되면, 사용자 인터페이스부(1100)를 통해 수신된 사용자 입력에 대응되는 동작을 수행하면서, 사용자 입력에 대응되는 제어 신호를 생성할 수 있다. 예를 들어, 제어부(1200)는 설정창 활성화, 화면 전환 등의 동작을 수행하기 위한 사용자 입력에 대응되는 제어 신호를 생성하고, 설정창을 활성화하거나 화면을 전환시키는 등의 동작을 수행할 수 있다. 또한, 제어부(1200)는 생성된 제어 신호를 통신부(1300)로 제공할 수 있다.
실시예에 따라 제어부(1200)는 외부 장치(20)로부터 수신된 애플리케이션 식별 정보에 기초하여 애플리케이션 목록을 제공할 수 있다. 또한, 제어부(1200)는 애플리케이션 목록 중 하나가 선택되면, 선택된 애플리케이션을 실행하기 위한 제어 신호를 통신부(1300)로 제공하고, 선택된 애플리케이션에 대응되는 제어 애플리케이션을 실행할 수 있다.
또한, 제어부(1200)는 태스크 매니지먼트(task management) 기능을 실행하는 사용자 입력에 응답하여, 외부 장치(20)에서 실행 중인 애플리케이션들의 식별 정보를 포함하는 태스크 매니지먼트 창을 생성할 수 있다. 이때, 외부 장치(20)에서 실행 중인 애플리케이션들의 식별 정보는, 통신부(1300)로부터 제공될 수 있다.
통신부(1300)는, 전자 장치(10)가 적어도 하나의 외부 장치(20)와 통신을 하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들어, 통신부(1300)는, 근거리 통신부(1310), 이동 통신부(1320) 및 방송 수신부(1330) 중 적어도 하나를 포함할 수 있다.
근거리 통신부(short-range wireless communication unit)(1310)는, 블루투스 통신부, BLE(Bluetooth Low Energy) 통신부, 근거리 무선 통신부(Near Field Communication unit), WLAN(와이파이) 통신부, 지그비(Zigbee) 통신부, 적외선(IrDA, infrared Data Association) 통신부, WFD(Wi-Fi Direct) 통신부, UWB(ultra wideband) 통신부, Ant+ 통신부 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
이동 통신부(1320)는, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신할 수 있다. 방송 수신부(1330)는, 방송 채널을 통하여 외부로부터 방송 신호 및/또는 방송 관련된 정보를 수신할 수 있다. 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다.
실시예에 따라 통신부(1300)는 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 수신할 수 있다. 예를 들어, 통신부(1300)는 주기적으로, 또는 소정 시점에 외부 장치(20)에 설치된 애플리케이션들에 대한 정보를 수신할 수 있다.
또한, 통신부(1300)는 외부 장치(20)를 제어하기 위한 제어 신호를 외부 장치(20)로 전송할 수 있다. 예를 들어, 통신부(1300)는 외부 장치(20)의 음량 조절, 화면 밝기 조절, 화면 전환, 설정창 활성화, 채널 변경, 통신 연결, 애플리케이션 실행 및 종료 등을 지시하는 제어 신호를 외부 장치(20)로 전송할 수 있다. 한편, 실시예에 따라 통신부(1300)는 상기 제어 신호를 외부 서버, 라우터(router) 등을 통해 외부 장치(20)로 전송할 수도 있다.
또한, 통신부(1300)는 외부 장치(20)에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 수신할 수 있다. 또한, 통신부(1300)는 외부 장치(20)로부터 이벤트를 수신할 수 있다.
출력부(1400)는, 오디오 신호 또는 비디오 신호 또는 진동 신호를 출력할 수 있으며, 출력부(1400)는 디스플레이부(1410), 음향 출력부(1420), 및 진동 모터(1430)를 포함할 수 있다.
디스플레이부(1410)는 전자 장치(10)에서 처리되는 정보를 표시 출력한다. 예를 들어, 디스플레이부(1410)는 전자 장치(10) 또는 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 표시할 수 있다. 예를 들어, 디스플레이부(1410)는 전자 장치(10)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록과 외부 장치(20)에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록을 구별하여 표시할 수 있다. 구체적으로, 디스플레이부(1410)는 각각의 애플리케이션 목록을 포함하는 서로 다른 폴더(folder) 또는 이미지를 표시할 수 있다.
또한, 디스플레이부(1410)는 제어부(1200)의 제어에 의해 애플리케이션의 실행창, 알림창, 위젯(widget), 설정창, 홈 화면, 태스크 매니지먼트(task management) 창, 노티피케이션 바(notification bar) 등을 표시할 수 있다.
또한, 디스플레이부(1410)는 사용자 인터페이스부(1100)와 결합되어, 전자 장치(10)를 제어하기 위해 제공되는 GUI 를 표시할 수 있다. 예를 들어, 디스플레이부(1410)와 터치패드가 레이어 구조를 이루어 터치 스크린으로 구성될 수 있다.
한편, 디스플레이부(1410)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전기영동 디스플레이(electrophoretic display) 중에서 적어도 하나를 포함할 수 있다. 그리고 전자 장치(10)의 구현 형태에 따라 전자 장치(10)는 디스플레이부(1410)를 2개 이상 포함할 수도 있다. 이때, 2개 이상의 디스플레이부(1410)는 힌지(hinge)를 이용하여 마주보게 배치될 수도 있다.
음향 출력부(1420)는 통신부(1300)로부터 수신되거나 메모리(1700)에 저장된 오디오 데이터를 출력한다. 진동 모터(1430)는 진동 신호를 출력할 수 있다.
센싱부(1500)는 전자 장치(10)의 상태 또는 전자 장치(10) 주변의 상태를 감지하고, 감지된 정보를 제어부(1200)로 전달할 수 있다. 예를 들어, 센싱부(1500)는 지자기 센서(Magnetic sensor)(1510), 가속도 센서(Acceleration sensor)(1520), 온/습도 센서(1530), 적외선 센서(1540), 자이로스코프 센서(1550), 위치 센서(예컨대, GPS)(1560), 기압 센서(1570), 근접 센서(1580), 및 RGB 센서(illuminance sensor)(1590) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다.
A/V(Audio/Video) 입력부(1600)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(1610)와 마이크로폰(1620) 등이 포함될 수 있다.
카메라(1610)는 화상 통화모드 또는 촬영 모드에서 이미지 센서를 통해 정지영상 또는 동영상 등의 화상 프레임을 얻을 수 있다. 또한, 마이크로폰(1620)은 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다.
메모리(1700)는 제어부(1200)의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 전자 장치(10)로 입력되거나 전자 장치(10)로부터 출력되는 데이터를 저장할 수도 있다.
메모리(1700)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
메모리(1700)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 예를 들어, UI 모듈(1710), 터치 스크린 모듈(1720), 알림 모듈(1730) 등으로 분류될 수 있다.
UI 모듈(1710)은 전자 장치(10)를 제어하기 위해 제공되는 UI 등 또는 애플리케이션을 제공하기 위해 제공되는 UI 등을 지원할 수 있다. 터치 스크린 모듈(1720)은 사용자의 터치 스크린 상의 터치 제스처를 감지하고, 터치 제스처에 관한 정보를 지원할 수 있다. 일부 실시예에 따른 터치 스크린 모듈(1720)은 터치 코드를 인식하고 분석할 수 있다. 터치 스크린 모듈(1720)은 컨트롤러를 포함하는 별도의 하드웨어로 구성될 수도 있다.
알림 모듈(1730)은 전자 장치(10)의 이벤트 발생을 알리기 위한 신호를 발생할 수 있다. 알림 모듈(1730)은 디스플레이부(1410)를 통해 비디오 신호 형태로 알림 신호를 출력할 수도 있고, 음향 출력부(1420)를 통해 오디오 신호 형태로 알림 신호를 출력할 수도 있고, 진동 모터(1430)를 통해 진동 신호 형태로 알림 신호를 출력할 수도 있다.
개시된 실시예들은 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체 및 통신 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. 통신 매체는 전형적으로 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 반송파와 같은 변조된 데이터 신호의 기타 데이터, 또는 기타 전송 메커니즘을 포함하며, 임의의 정보 전달 매체를 포함한다.
전술한 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (20)

  1. 외부 장치를 제어하기 위한 전자 장치의 동작 방법에 있어서,
    상기 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스에 대한 사용자 입력을 수신하는 단계;
    포그라운드(foreground) 애플리케이션이 상기 외부 장치와 연관되는지 여부를 판단하는 단계; 및
    상기 포그라운드 애플리케이션이 상기 외부 장치와 연관되면, 상기 사용자 입력에 대응되는 제어 신호를 상기 외부 장치로 전송하는 단계;를 포함하는, 동작 방법.
  2. 제 1 항에 있어서,
    상기 사용자 인터페이스는, 상기 전자 장치에 구비된 적어도 하나의 버튼 또는 상기 전자 장치를 제어하기 위해 제공되는 적어도 하나의 GUI 인, 동작 방법.
  3. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션이 상기 외부 장치와 연관되는지 여부를 판단하는 단계는,
    상기 외부 장치에 설치된 애플리케이션의 식별 정보 및 상기 외부 장치에 설치된 애플리케이션을 제어하기 위한 제어 애플리케이션의 실행 정보를 상기 외부 장치로부터 수신하는 단계; 및
    상기 포그라운드 애플리케이션이 상기 제어 애플리케이션의 실행 정보에 매칭되면, 상기 포그라운드 애플리케이션이 상기 외부 장치에 연관되는 것으로 판단하는 단계; 를 포함하는, 동작 방법.
  4. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 외부 장치로부터 수신된 애플리케이션 설치 파일에 기초하여 제공되는, 동작 방법.
  5. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 외부 장치로부터 수신된 URL 정보에 기초하여 제공되는, 동작 방법.
  6. 제 1 항에 있어서,
    상기 사용자 인터페이스가, 음량 조절 버튼인 경우,
    상기 제어 신호는, 상기 외부 장치의 음량을 업(up) 또는 다운(down)하기 위한 것인, 동작 방법.
  7. 제 1 항에 있어서,
    상기 사용자 인터페이스가, 홈(home) 버튼인 경우,
    상기 제어 신호는, 상기 외부 장치의 화면을 홈 화면으로 전환하기 위한 것인, 동작 방법.
  8. 제 1 항에 있어서,
    상기 사용자 인터페이스가, 설정창을 활성화하기 위한 GUI 인 경우,
    상기 제어 신호는, 상기 외부 장치의 화면을 설정창 화면으로 전환하기 위한 것인, 동작 방법.
  9. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 전자 장치에 표시된 애플리케이션 목록 중에서 하나를 선택하는 사용자 입력에 따라 실행되며,
    상기 애플리케이션 목록은, 상기 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는, 동작 방법.
  10. 제 9 항에 있어서,
    상기 애플리케이션 목록은, 상기 전자 장치에 설치된 애플리케이션들의 식별 정보를 포함하는 애플리케이션 목록과 구별되어 표시되는, 동작 방법.
  11. 제 1 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 외부 장치의 상태 정보 및 상기 외부 장치에서 실행 중인 애플리케이션에 대한 정보 중 적어도 하나를 포함하는 위젯(widget)인, 동작 방법.
  12. 제 1 항에 있어서,
    상기 사용자 인터페이스는, 상기 전자 장치에서 실행 중인 적어도 하나의 애플리케이션을 제어하기 위해 제공되며,
    상기 동작 방법은,
    상기 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 수신하는 단계; 및
    상기 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보 및 상기 전자 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 포함하는 태스크 매니지먼트(task management) 창을 표시하는, 동작 방법.
  13. 제 12 항에 있어서, 상기 동작 방법은,
    상기 태스크 매니지먼트 창에서, 상기 외부 장치에서 실행 중인 적어도 하나의 애플리케이션을 종료하기 위한 사용자 입력을 수신하는 단계; 및
    상기 사용자 입력에 응답하여 애플리케이션 종료 신호를 상기 외부 장치로 전송하는 단계;를 더 포함하는, 동작 방법.
  14. 외부 장치를 제어하기 위한 전자 장치에 있어서,
    상기 전자 장치를 제어하기 위해 제공되는 사용자 인터페이스에 대한 사용자 입력을 수신하는 사용자 인터페이스부;
    포그라운드(foreground) 애플리케이션이 상기 외부 장치와 연관되는지 여부를 판단하고, 상기 포그라운드 애플리케이션이 상기 외부 장치와 연관되면, 상기 사용자 입력에 대응되는 제어 신호를 생성하는 제어부; 및
    상기 제어 신호를 상기 외부 장치로 전송하는 통신부;를 포함하는, 전자 장치.
  15. 제 14 항에 있어서,
    상기 사용자 인터페이스부는, 상기 전자 장치에 구비된 적어도 하나의 버튼 또는 상기 전자 장치를 제어하기 위해 제공되는 적어도 하나의 GUI(graphic user interface)를 포함하는, 전자 장치.
  16. 제 14 항에 있어서,
    상기 통신부는, 상기 외부 장치에 설치된 애플리케이션의 식별 정보 및 상기 외부 장치에 설치된 애플리케이션을 제어하기 위한 제어 애플리케이션의 실행 정보를 상기 외부 장치로부터 수신하고,
    상기 제어부는, 상기 포그라운드 애플리케이션이 상기 제어 애플리케이션의 실행 정보에 매칭되면, 상기 포그라운드 애플리케이션이 상기 외부 장치에 연관되는 것으로 판단하는, 전자 장치.
  17. 제 14 항에 있어서,
    상기 포그라운드 애플리케이션은, 상기 외부 장치로부터 수신된 애플리케이션 설치 파일 또는 URL 정보에 기초하여 제공되는, 전자 장치.
  18. 제 14 항에 있어서,
    상기 전자 장치에 표시된 애플리케이션 목록 중에서 하나를 선택하는 사용자 입력에 따라 실행되며,
    상기 애플리케이션 목록은, 상기 외부 장치에 설치된 애플리케이션들의 식별 정보를 포함하는, 전자 장치.
  19. 제 14 항에 있어서,
    상기 사용자 인터페이스는, 상기 전자 장치에서 실행 중인 적어도 하나의 애플리케이션을 제어하기 위해 제공되며,
    상기 통신부는, 상기 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 수신하고,
    상기 제어부는, 외부 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보 및 상기 전자 장치에서 실행 중인 적어도 하나의 애플리케이션의 식별 정보를 포함하는 태스크 매니지먼트(task management) 창을 제공하는, 전자 장치.
  20. 제 1 항 내지 제 13 항 중 어느 한 항의 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.
KR1020160055769A 2016-05-04 2016-05-04 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치 KR102651875B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020160055769A KR102651875B1 (ko) 2016-05-04 2016-05-04 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치
PCT/KR2016/011847 WO2017191875A1 (ko) 2016-05-04 2016-10-20 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치
US16/096,376 US11036367B2 (en) 2016-05-04 2016-10-20 Method for controlling external device by electronic device, and electronic device therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160055769A KR102651875B1 (ko) 2016-05-04 2016-05-04 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치

Publications (2)

Publication Number Publication Date
KR20170125655A KR20170125655A (ko) 2017-11-15
KR102651875B1 true KR102651875B1 (ko) 2024-03-27

Family

ID=60203757

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160055769A KR102651875B1 (ko) 2016-05-04 2016-05-04 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치

Country Status (3)

Country Link
US (1) US11036367B2 (ko)
KR (1) KR102651875B1 (ko)
WO (1) WO2017191875A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2017418882A1 (en) * 2017-06-13 2019-12-19 Huawei Technologies Co., Ltd. Display method and apparatus
KR102572483B1 (ko) 2018-05-25 2023-08-30 삼성전자주식회사 전자 장치 및 외부 전자 장치를 제어하는 방법
CN110769320B (zh) * 2019-11-19 2021-10-15 三星电子（中国）研发中心 一种智能设备分享内容的方法、系统及装置
CN114115691B (zh) * 2021-10-27 2023-07-07 荣耀终端有限公司 电子设备及其交互方法、介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130005250A1 (en) 2011-05-03 2013-01-03 Lg Electronics Inc. Electronic device and method for operating the same
US8504008B1 (en) 2012-02-02 2013-08-06 Google Inc. Virtual control panels using short-range communication
US20140055251A1 (en) 2012-08-27 2014-02-27 Lg Electronics Inc. Mobile terminal and controlling method thereof

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9257037B2 (en) 1998-07-23 2016-02-09 Universal Electronics Inc. System and method for automatically setting up a universal remote control
US7586398B2 (en) 1998-07-23 2009-09-08 Universal Electronics, Inc. System and method for setting up a universal remote control
US8176432B2 (en) 2001-11-20 2012-05-08 UEI Electronics Inc. Hand held remote control device having an improved user interface
US6989763B2 (en) 2002-02-15 2006-01-24 Wall Justin D Web-based universal remote control
US9208679B2 (en) 2006-09-05 2015-12-08 Universal Electronics Inc. System and method for configuring the remote control functionality of a portable device
KR101057810B1 (ko) 2008-08-29 2011-08-19 주식회사 유시스 휴대폰에 리모컨 기능을 부가하는 리모컨 기능 부가 시스템및 리모컨 기능 부가 방법
US9154942B2 (en) 2008-11-26 2015-10-06 Free Stream Media Corp. Zero configuration communication between a browser and a networked media device
US8423911B2 (en) * 2010-04-07 2013-04-16 Apple Inc. Device, method, and graphical user interface for managing folders
US8995981B1 (en) 2010-12-13 2015-03-31 Csr Technology Inc. Systems and methods for remote control adaptive configuration
KR101836403B1 (ko) * 2011-04-12 2018-04-19 엘지전자 주식회사 디스플레이 장치의 리모콘 기능을 수행하는 이동 단말기
KR101859959B1 (ko) 2011-07-25 2018-05-21 엘지전자 주식회사 휴대 단말기 및 그 동작방법
US9268424B2 (en) 2012-07-18 2016-02-23 Sony Corporation Mobile client device, operation method, recording medium, and operation system
WO2014027349A1 (en) 2012-08-14 2014-02-20 Switchbee Ltd. System and method for remote control of home appliances without infrastructure changes
CN103677498A (zh) * 2012-09-11 2014-03-26 华为终端有限公司 图标排序显示的方法和终端设备
KR101533064B1 (ko) 2012-11-01 2015-07-01 주식회사 케이티 콘텐츠 맞춤형 인터페이스를 표시하는 모바일 디바이스 및 모바일 디바이스 사용 방법
KR20140144504A (ko) 2013-06-11 2014-12-19 삼성전자주식회사 가전 기기와 모바일 기기, 가전 기기의 제어 시스템
KR102121918B1 (ko) 2013-12-20 2020-06-11 삼성전자주식회사 홈 네트워크 시스템에서 이벤트 통지 방법 및 장치
EP2916195B1 (en) 2014-03-03 2019-09-11 LG Electronics Inc. Mobile terminal and controlling method thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130005250A1 (en) 2011-05-03 2013-01-03 Lg Electronics Inc. Electronic device and method for operating the same
US8504008B1 (en) 2012-02-02 2013-08-06 Google Inc. Virtual control panels using short-range communication
US20140055251A1 (en) 2012-08-27 2014-02-27 Lg Electronics Inc. Mobile terminal and controlling method thereof

Also Published As

Publication number Publication date
WO2017191875A1 (ko) 2017-11-09
KR20170125655A (ko) 2017-11-15
US20190138172A1 (en) 2019-05-09
US11036367B2 (en) 2021-06-15

Similar Documents

Publication Publication Date Title
US10951253B2 (en) Bendable user terminal device and method for displaying thereof
KR102628044B1 (ko) 삼차원 가상 현실 환경에서의 이차원 애플리케이션 사용을 위한 시스템 및 방법
EP3367225B1 (en) Electronic device and method for managing window
KR102391772B1 (ko) 터치 감응 디스플레이를 포함하는 전자 장치 및 이 전자 장치를 동작하는 방법
KR102397602B1 (ko) 그래픽 사용자 인터페이스를 제공하는 방법 및 전자 장치
KR102302353B1 (ko) 전자 장치 및 이의 ui 표시 방법
KR102348947B1 (ko) 전자장치의 화면 표시 제어 방법 및 장치
KR102247817B1 (ko) 락스크린 제공 방법 및 장치
KR102444920B1 (ko) 윈도우의 크기를 변경하는 디바이스 및 그 제어 방법
US20150324078A1 (en) Wearable device and controlling method thereof
EP3082028B1 (en) Apparatus and method for providing information via portion of display
KR102651875B1 (ko) 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치
EP3436919B1 (en) Method of switching application and electronic device therefor
KR20160011915A (ko) 화면 제어 방법 및 이를 사용하는 전자 장치
US20160170709A1 (en) Device and method for controlling sound output
US20190333441A1 (en) Case of electronic device for controlling display and method therefor
US20200202629A1 (en) System and method for head mounted device input
KR20170117843A (ko) 멀티 스크린 제공 방법 및 그 장치
KR102373170B1 (ko) 하나 이상의 아이템들을 동시에 표시하는 방법 및 이를 위한 전자 장치
KR102607564B1 (ko) 소프트 키를 표시하는 방법 및 그 전자 장치
KR102310106B1 (ko) 서비스 화면을 표시하기 위한 전자 장치 및 방법
EP3588256A1 (en) Method for displaying icon and electronic device therefor
KR102656425B1 (ko) 영상을 표시하는 전자 장치 및 방법
US10908645B2 (en) Method for controlling screen output and electronic device supporting same
KR20150093016A (ko) 디스플레이 장치 및 그 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right