KR20240035251A

KR20240035251A - 전자 장치 및 이의 제어 방법

Info

Publication number: KR20240035251A
Application number: KR1020220114513A
Authority: KR
Inventors: 박재성
Original assignee: 삼성전자주식회사
Priority date: 2022-09-08
Filing date: 2022-09-08
Publication date: 2024-03-15
Also published as: WO2024053851A1

Abstract

전자 장치 및 이의 제어 방법이 개시된다. 본 개시에 따른 전자 장치는 통신 인터페이스, 디스플레이, 스피커,적어도 하나의 인스트럭션을 저장하는 메모리 및 적어도 하나의 인스트럭션을 실행하는 하나 이상의 프로세서를 포함하고, 하나 이상의 프로세서는, 통신 인터페이스를 통해 연결된 웨어러블(Wearable) 기기가 제어 UI(User Interface) 기능을 갖는 기기인지 식별하고, 통신 인터페이스를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 웨어러블 기기가 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 디스플레이 또는 스피커 중 적어도 하나를 제어하고, 사용자 명령에 따라 웨어러블 기기가 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 전자 장치의 적어도 하나의 기능에 대응되는 웨어러블 기기의 제1 제어 UI를 식별하고, 전자 장치의 적어도 하나의 기능에 대한 GUI(Graphical User Interface)와 전자 장치의 적어도 하나의 기능에 대응되는 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이를 제어하고, 웨어러블 기기로부터 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 사용자 인터랙션 정보 및 제1 제어 UI에 대응되는 전자 장치의 적어도 하나의 기능에 기초하여 전자 장치를 제어할 수 있다.

Description

전자 장치 및 이의 제어 방법 {ELECTRONIC APPARATUS AND METHOD FOR CONTROLLING THEREOF}

본 개시는 전자 장치 및 이의 제어 방법에 관한 것으로, 더욱 상세하게는, 웨어러블(Wearable) 기기가 전자 장치에 대한 제어 권한을 갖도록 하여 웨어러블 기기에 포함된 제어 UI(User Interface)를 통해 전자 장치의 기능을 제어하는 전자 장치 및 이의 제어 방법에 관한 것이다.

웨어러블 기기는 신체에 착용하여 활용되는 전자 장치를 의미한다. 웨어러블 기기로는, 예를들어, 안면에 착용하는 디지털 안경, 손목에 착용하는 스마트 워치, 귀에 착용하는 무선 이어폰 및 헤드폰, 기타 어깨, 팔, 다리에 착용할 수 있는 헬스 케어 장치 등이 있다. 웨어러블 기기는 신체에 직접 맞닿은 상태로 착용되기도 하지만 옷, 장신구, 신발에 결합된 상태로 착용되기도 한다.

웨어러블 기기는 고유의 기능을 위해 단독으로 사용되는 경우도 있지만 다른 전자 장치, 예를 들어, 디스플레이 장치, 컴퓨터, 스마트 폰 등과 연동된 상태로 활용되기도 한다. 최근에는 스마트폰과 연동되는 스마트 워치, 무선 이어폰이 널리 사용되고 있다.

웨어러블 기기는 각종 디스플레이 장치와도 연동되어 사용될 수 있다. 무선 이어폰, 스마트 워치 등을 디스플레이 장치와 연결하여 디스플레이 장치로 출력되는 컨텐츠가 웨어러블 기기로 출력되도록 할 수 있다.

상술한 목적을 달성하기 위한 본 실시 예에 따른 전자 장치는, 통신 인터페이스, 디스플레이, 스피커, 적어도 하나의 인스트럭션을 저장하는 메모리, 및 상기 적어도 하나의 인스트럭션을 실행하는 하나 이상의 프로세서를 포함하고, 상기 하나 이상의 프로세서는, 상기 통신 인터페이스를 통해 연결된 웨어러블(Wearable) 기기가 제어 UI(User Interface) 기능을 갖는 기기인지 식별하고, 상기 통신 인터페이스를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 상기 디스플레이 또는 상기 스피커 중 적어도 하나를 제어하고, 사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 웨어러블 기기의 제1 제어 UI를 식별하고, 상기 전자 장치의 적어도 하나의 기능에 대한 GUI(Graphical User Interface)와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하고, 상기 웨어러블 기기로부터 상기 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 상기 사용자 인터랙션 정보 및 상기 제1 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 기초하여 상기 전자 장치를 제어할 수 있다.

한편, 상기 하나 이상의 프로세서는, 상기 웨어러블 기기가 제어 권한을 가지는 상기 전자 장치의 적어도 하나의 기능이 식별되면, 상기 전자 장치의 적어도 하나의 기능 각각에 대응되는 제1 제어 UI에 관한 제1 사용자 인터랙션 정보를 식별하고, 상기 제1 제어 UI에 관한 상기 제1 사용자 인터랙션 정보를 상기 전자 장치의 적어도 하나의 기능에 대한 GUI 및 상기 제1 제어 UI에 대한 GUI와 매핑하여 표시하도록 상기 디스플레이를 제어할 수 있다.

한편, 상기 하나 이상의 프로세서는, 상기 제1 제어 UI에 대한 정보 및 상기 전자 장치에 대한 원격 제어 장치의 제어 UI에 대한 정보에 기초하여 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI를 식별할 수 있다.

한편, 상기 원격 제어 장치의 제어 UI에 대한 정보는, 상기 원격 제어 장치의 제어 UI에 관한 사용자 인터랙션 정보 및 상기 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 대한 정보일 수 있다.

한편, 상기 하나 이상의 프로세서는, 상기 웨어러블 기기의 제어 정보에 기초하여 상기 웨어러블 기기를 통해 제어 가능한 상기 전자 장치의 적어도 하나의 기능을 식별하고, 상기 웨어러블 기기를 통해 제어 가능한 상기 전자 장치의 적어도 하나의 기능이 식별되면, 상기 식별된 전자 장치의 적어도 하나의 기능에 대한 리스트를 표시하도록 상기 디스플레이를 제어하고, 사용자 입력에 기초하여 상기 리스트에 포함된 상기 전자 장치의 적어도 하나의 기능 중 상기 웨어러블 기기가 제어 권한을 가지는 상기 전자 장치의 적어도 하나의 제어 기능을 식별할 수 있다.

한편, 상기 하나 이상의 프로세서는, 사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 웨어러블 기기와 통신 연결을 수행하는 사용자 단말로부터 상기 전자 장치의 적어도 하나의 기능 및 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 정보를 수신하고, 상기 사용자 단말로부터 수신된 정보에 기초하여 상기 전자 장치의 적어도 하나의 기능에 대한 GUI와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이를 제어할 수 있다.

한편, 상기 사용자 단말로부터 수신된 정보는, 상기 사용자 단말에서 실행되는 상기 웨어러블 기기의 제어 어플리케이션에서 제공되는 정보를 포함할 수 있다.

한편, 상기 하나 이상의 프로세서는, 상기 웨어러블 기기를 통해 컨텐츠가 출력되도록 상기 통신 인터페이스를 통해 상기 컨텐츠에 대한 정보를 상기 웨어러블 기기로 전송하고, 상기 웨어러블 기기를 통해 상기 컨텐츠가 출력되는 동안 외부 기기에 대한 상기 웨어러블 기기의 제어 요청이 식별되면, 상기 외부 기기에 대한 제어 기능을 수행하도록 상기 웨어러블 기기를 제어할 수 있다.

한편, 상기 사용자 인터랙션은, 터치 수신, 음성 수신 또는 모션 인식 중 적어도 하나를 포함할 수 있다.

본 개시에 따른 전자 장치의 제어 방법에 있어서, 상기 통신 인터페이스를 통해 연결된 웨어러블(Wearable) 기기가 제어 UI(User Interface) 기능을 갖는 기기인지 식별하는 단계, 상기 통신 인터페이스를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 상기 디스플레이 또는 상기 스피커 중 적어도 하나를 제어하는 단계, 사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 웨어러블 기기의 제1 제어 UI를 식별하는 단계, 상기 전자 장치의 적어도 하나의 기능에 대한 GUI(Graphical User Interface)와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계 및 상기 웨어러블 기기로부터 상기 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 상기 사용자 인터랙션 정보 및 상기 제1 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 기초하여 상기 전자 장치를 제어하는 단계를 포함하는 제어 방법.

한편, 상기 제1 UI를 식별하는 단계는, 상기 웨어러블 기기가 제어 권한을 가지는 상기 전자 장치의 적어도 하나의 기능이 식별되면, 상기 전자 장치의 적어도 하나의 기능 각각에 대응되는 제1 제어 UI에 관한 제1 사용자 인터랙션 정보를 식별하는 단계를 포함하고, 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계는, 상기 제1 제어 UI에 관한 상기 제1 사용자 인터랙션 정보를 상기 전자 장치의 적어도 하나의 기능에 대한 GUI 및 상기 제1 제어 UI에 대한 GUI와 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계를 포함할 수 있다.

한편, 상기 제1 UI를 식별하는 단계는, 상기 제1 제어 UI에 대한 정보 및 상기 전자 장치에 대한 원격 제어 장치의 제어 UI에 대한 정보에 기초하여 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI를 식별하는 단계를 포함할 수 있다.

한편, 상기 확인 요청을 제공하도록 상기 디스플레이 또는 상기 스피커 중 적어도 하나를 제어하는 단계는, 상기 웨어러블 기기의 제어 정보에 기초하여 상기 웨어러블 기기를 통해 제어 가능한 상기 전자 장치의 적어도 하나의 기능을 식별하는 단계, 상기 웨어러블 기기를 통해 제어 가능한 상기 전자 장치의 적어도 하나의 기능이 식별되면, 상기 식별된 전자 장치의 적어도 하나의 기능에 대한 리스트를 표시하도록 상기 디스플레이를 제어하는 단계 및 사용자 입력에 기초하여 상기 리스트에 포함된 상기 전자 장치의 적어도 하나의 기능 중 상기 웨어러블 기기가 제어 권한을 가지는 상기 전자 장치의 적어도 하나의 제어 기능을 식별하는 단계를 포함할 수 있다.

한편, 상기 제1 UI를 식별하는 단계는, 사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 웨어러블 기기와 통신 연결을 수행하는 사용자 단말로부터 상기 전자 장치의 적어도 하나의 기능 및 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 정보를 수신하는 단계를 포함하고, 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계는, 상기 사용자 단말로부터 수신된 정보에 기초하여 상기 전자 장치의 적어도 하나의 기능에 대한 GUI와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이를 제어하는 단계를 포함할 수 있다.

한편, 상기 제어 방법은, 상기 웨어러블 기기를 통해 컨텐츠가 출력되도록 상기 통신 인터페이스를 통해 상기 컨텐츠에 대한 정보를 상기 웨어러블 기기로 전송하는 단계 및 상기 웨어러블 기기를 통해 상기 컨텐츠가 출력되는 동안 외부 기기에 대한 상기 웨어러블 기기의 제어 요청이 식별되면, 상기 외부 기기에 대한 제어 기능을 수행하도록 상기 웨어러블 기기를 제어하는 단계를 포함할 수 있다.

본 개시에 따른 전자 장치의 프로세서의 의해 실행되어 상기 전자 장치가 동작을 수행하도록 하는 컴퓨터 명령을 저장하는 비일시적 컴퓨터 판독가능 기록매체는 상기 통신 인터페이스를 통해 연결된 웨어러블(Wearable) 기기가 제어 UI(User Interface) 기능을 갖는 기기인지 식별하는 단계, 상기 통신 인터페이스를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 상기 디스플레이 또는 상기 스피커 중 적어도 하나를 제어하는 단계, 사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 웨어러블 기기의 제1 제어 UI를 식별하는 단계, 상기 전자 장치의 적어도 하나의 기능에 대한 GUI(Graphical User Interface)와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계 및 상기 웨어러블 기기로부터 상기 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 상기 사용자 인터랙션 정보 및 상기 제1 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 기초하여 상기 전자 장치를 제어하는 단계에 대한 인스트럭션을 포함할 수 있다.

본 개시의 특정 실시 예의 양상, 특징 및 이점은 첨부된 도면들을 참조하여 후술되는 설명을 통해 보다 명확해질 것이다.
도 1은 본 개시의 일 실시 예에 따른, 전자 장치, 웨어러블 기기 및 원격 제어 장치를 설명하기 위한 도면이다.
도 2는 본 개시의 일 실시 예에 따른, 전자 장치의 구성을 설명하기 위한 블록도이다.
도 3은 본 개시의 일 실시 예에 따른, 전자 장치의 동작을 설명하기 위한 시퀀스도이다.
도 4a는 본 개시의 일 실시 예에 따른, 전자 장치가 웨어러블 기기가 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하는 동작을 설명하기 위한 도면이다.
도 4b는 본 개시의 일 실시 예에 따른, 전자 장치가 웨어러블 기기를 통해 제어 가능한 전자 장치의 적어도 하나의 기능에 대한 리스트를 표시하도록 디스플레이를 제어하는 동작을 설명하기 위한 도면이다.
도 5는 본 개시의 일 실시 예에 따른, 전자 장치의 적어도 하나의 기능에 대한 GUI와 웨어러블 기기의 제어 UI에 대한 GUI를 매핑하여 표시하는 동작을 설명하기 위한 도면이다.
도 6a는 본 개시의 일 실시 예에 따른, 전자 장치의 적어도 하나의 기능을 제어하기 위해 웨어러블 기기를 통해 입력되는 사용자 인터랙션을 설명하기 위한 도면이다.
도 6b는 본 개시의 일 실시 예에 따른, 전자 장치의 적어도 하나의 기능을 제어하기 위해 웨어러블 기기를 통해 입력되는 사용자 인터랙션을 설명하기 위한 도면이다.
도 6c는 본 개시의 일 실시 예에 따른, 전자 장치의 적어도 하나의 기능을 제어하기 위해 웨어러블 기기를 통해 입력되는 사용자 인터랙션을 설명하기 위한 도면이다.
도 7a는 본 개시의 일 실시 예에 따른, 전자 장치를 제어하기 위한 웨어러블 기기의 제어 UI에 관한 사용자 인터랙션 정보를 전자 장치의 적어도 하나의 기능에 대한 GUI 및 제어 UI에 대한 GUI와 매핑하여 표시하는 동작을 설명하기 위한 도면이다.
도 7b는 본 개시의 일 실시 예에 따른, 전자 장치를 제어하기 위한 웨어러블 기기의 제어 UI에 관한 사용자 인터랙션 정보를 전자 장치의 적어도 하나의 기능에 대한 GUI 및 제어 UI에 대한 GUI와 매핑하여 표시하는 동작을 설명하기 위한 도면이다.
도 8은 본 개시의 일 실시 예에 따른, 전자 장치를 제어하기 위한 원격 제어 장치의 제어 UI에 대한 정보에 기초하여 전자 장치의 적어도 하나의 기능에 대응되는 웨어러블 기기의 제어 UI를 식별하는 동작을 설명하기 위한 도면이다.
도 9는 본 개시의 일 실시 예에 따른, 전자 장치가 사용자 단말로부터 수신된 정보에 기초하여 전자 장치의 적어도 하나의 기능에 대한 GUI와 웨어러블 기기의 제어 UI에 대한 GUI를 매핑하여 표시하는 동작을 설명하기 위한 도면이다.
도 10은 본 개시의 일 실시 예에 따른, 전자 장치의 구성을 설명하기 위한 블록도이다.
도 11은 본 개시의 일 실시 예에 따른, 전자 장치의 동작을 설명하기 위한 흐름도이다.

본 실시 예들은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 특정한 실시 형태에 대해 범위를 한정하려는 것이 아니며, 본 개시의 실시 예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.

본 개시를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략한다.

덧붙여, 하기 실시 예는 여러 가지 다른 형태로 변형될 수 있으며, 본 개시의 기술적 사상의 범위가 하기 실시 예에 한정되는 것은 아니다. 오히려, 이들 실시 예는 본 개시를 더욱 충실하고 완전하게 하고, 당업자에게 본 개시의 기술적 사상을 완전하게 전달하기 위하여 제공되는 것이다.

본 개시에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 권리범위를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.

본 개시에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.

본 개시에서, "A 또는 B," "A 또는/및 B 중 적어도 하나," 또는 "A 또는/및 B 중 하나 또는 그 이상"등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B," "A 및 B 중 적어도 하나," 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.

본 개시에서 사용된 "제1," "제2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다.

어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 어떤 구성요소가 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다.

반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 어떤 구성요소와 다른 구성요소 사이에 다른 구성요소(예: 제3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.

본 개시에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)," "~하는 능력을 가지는(having the capacity to)," "~하도록 설계된(designed to)," "~하도록 변경된(adapted to)," "~하도록 만들어진(made to)," 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다.

대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.

실시 예에 있어서 '모듈' 혹은 '부'는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 '모듈' 혹은 복수의 '부'는 특정한 하드웨어로 구현될 필요가 있는 '모듈' 혹은 '부'를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서로 구현될 수 있다.

한편, 도면에서의 다양한 요소와 영역은 개략적으로 그려진 것이다. 따라서, 본 발명의 기술적 사상은 첨부한 도면에 그려진 상대적인 크기나 간격에 의해 제한되지 않는다.

이하에서는 첨부한 도면을 참고하여 본 개시에 따른 실시 예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.

도 1은 본 개시의 일 실시 예에 따른, 전자 장치, 웨어러블 기기 및 원격 제어 장치를 설명하기 위한 도면이다.

도 1을 참조하면, 전자 장치(100)는 시각적 컨텐츠 또는 청각적 컨텐츠를 출력하여 사용자에게 제공하는 장치일 수 있다. 전자 장치(100)는 예를 들어, 스마트 TV, 태블릿, 모니터, 스마트 폰, 데스크톱 컴퓨터, 랩톱 컴퓨터 등과 같이 디스플레이(120)를 구비하여 영상 컨텐츠를 재생할 수 있는 다양한 장치로 구현될 수 있다.

본 개시의 일 실시 예에 따른 전자 장치(100)는 상술한 기기에 한정되지 않으며, 전자 장치(100)는 상술한 기기들의 둘 이상의 기능을 갖춘 전자 장치(100)로 구현될 수 있다.

또한, 본 개시의 일 실시 예에 따른 전자 장치(100)는 다른 외부 기기와 연결되어 하나 이상의 기능 수행을 위한 동작을 할 수 있다. 예를 들어, 전자 장치(100)는 DVD(digital video disk) 플레이어, 미디어 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM)중 적어도 하나와 연결되어 하나 이상의 기능 수행을 위한 동작을 할 수 있다.

전자 장치(100)는 웨어러블 기기 및 원격 제어 장치와 통신 연결을 수행하여 다양한 제어 동작을 수행할 수 있다

여기서, 원격 제어 장치는 전자 장치(100)의 제어에 관한 사용자 입력을 수신하는 사용자 단말, 예를 들어, 리모컨일 수 있다.

또한, 웨어러블 기기는 무선 이어폰 또는 스마트 워치일 수 있다. 다만, 이에 국한되는 것은 아니며, 웨어러블 기기는 신체에 착용할 수 있는 다양한 전자 장치(100)일 수 있다.

전자 장치(100)는 원격 제어 장치로부터 수신된 제어 신호에 기초하여 전자 장치(100)의 제어 동작을 수행할 수 있다.

또한, 전자 장치(100)는 웨어러블 기기로부터 수신된 제어 신호에 기초하여 전자 장치(100)의 제어 동작을 수행할 수 있다.

여기서, 전자 장치(100)는 웨어러블 기기와 통신 연결을 수행하여 전자 장치(100)의 적어도 하나의 기능에 대응되는 웨어러블 기기에 포함된 제어 UI(User Interface)를 식별하거나 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 웨어러블 기기에 포함된 제어 UI에 할당할 수 있다.

따라서, 전자 장치(100)는 통신 인터페이스(110)를 통해 웨어러블 기기로부터 수신된 제어 신호에 기초하여 전자 장치(100)에 포함된 구성을 제어하여 다양한 기능을 수행할 수 있다.

도 2는 본 개시의 일 실시 예에 따른, 전자 장치(100)의 구성을 설명하기 위한 블록도이다.

도 2를 참조하면, 전자 장치(100)는 통신 인터페이스(110), 디스플레이(120), 스피커(130), 메모리(140) 및 프로세서(150)를 포함할 수 있다.

다만, 이에 국한되는 것은 아니며 전자 장치(100)는 웨어러블 기기와 연결되어 다양한 기능을 수행하기 위한 구성을 더 포함할 수 있다.

통신 인터페이스(110)는 무선 통신 인터페이스(110), 유선 통신 인터페이스(110) 또는 입력 인터페이스를 포함할 수 있다. 무선 통신 인터페이스(110)는, 무선 통신 기술이나 이동 통신 기술을 이용하여 각종 외부 장치와 통신을 수행할 수 있다. 이러한 무선 통신 기술로는, 예를 들어, 블루투스(Bluetooth), 저전력 블루투스(Bluetooth Low Energy), 캔(CAN) 통신, 와이 파이(Wi-Fi), 와이파이 다이렉트(Wi-Fi Direct), 초광대역 통신(UWB, ultrawide band), 지그비(zigbee), 적외선 통신(IrDA, infrared Data Association) 또는 엔에프씨(NFC, Near Field Communication) 등이 포함될 수 있으며, 이동 통신 기술 로는, 3GPP, 와이맥스(Wi-Max), LTE(Long Term Evolution), 5G 등이 포함될 수 있다.

무선 통신 인터페이스(110)는 전자기파를 외부로 송신하거나 또는 외부에서 전달된 전자기파를 수신할 수 있는 안테나, 통신 칩 및 기판 등을 이용하여 구현될 수 있다.

유선 통신 인터페이스(110)는 유선 통신 네트워크를 기반으로 각종 외부 장치와 통신을 수행할 수 있다. 여기서, 유선 통신 네트워크는, 예를 들어, 페어 케이블, 동축 케이블, 광섬유 케이블 또는 이더넷(Ethernet) 케이블 등 물리적인 케이블을 이용하여 구현될 수 있다.

무선 통신 인터페이스(110) 및 유선 통신 인터페이스(110)는 실시 예에 따라 어느 하나가 생략될 수도 있다. 따라서, 전자 장치(100)는 무선 통신 인터페이스(110)만을 포함하거나 유선 통신 인터페이스(110)만을 포함할 수 있다. 뿐만 아니라, 전자 장치(100)는 무선 통신 인터페이스(110)에 의한 무선 접속과 유선 통신 인터페이스(110)에 의한 유선 접속을 모두 지원하는 통합된 통신 인터페이스(110)를 구비할 수도 있다.

전자 장치(100)는 한 가지 방식의 통신 연결을 수행하는 한 개의 통신 인터페이스(110)를 포함하는 경우에 국한되지 않고, 복수의 방식으로 통신 연결을 수행하는 복수의 통신 인터페이스(110)를 포함할 수 있다.

프로세서(150)는 통신 인터페이스(110)를 통해 다른 기기와 통신 연결을 수행하여 제어 신호를 송/수신할 수 있다.

프로세서(150)는 통신 인터페이스(110)를 통해 웨어러블 기기와 통신 연결을 수행하여 웨어러블 기기에 포함된 제어 UI에 대한 정보, 제어 UI를 통해 입력된 사용자 인터랙션(Interaction) 및 제어 신호에 대한 정보를 수신할 수 있다.

프로세서(150)는 통신 인터페이스(110)를 통해 원격 제어 장치와 통신 연결을 수행하여 원격 제어 장치의 제어 UI에 대한 정보, 제어 UI를 통해 입력된 사용자 인터랙션 및 제어 신호에 대한 정보를 수신할 수 있다.

프로세서(150)는 통신 인터페이스(110)를 통해 사용자 단말과 통신 연결을 수행하여 UI 정보, 제어 신호 및 사용자 단말에서 실행되는 어플리케이션에 대한 정보를 수신할 수 있다.

다만, 상술한 실시 예에 국한되는 것은 아니며, 프로세서(150)는 통신 인터페이스(110)를 통해 외부 기기, 외부 서버 등과 통신 연결을 수행하여 본 개시의 목적에 따른 다양한 동작을 위한 신호를 송신하거나 수신할 수 있다.

디스플레이(120)는 LCD(Liquid Crystal Display) 패널, OLED(Organic Light Emitting Diodes) 패널, AM-OLED(Active-Matrix Organic Light-Emitting Diode), LcoS(Liquid Crystal on Silicon), QLED(Quantum dot Light-Emitting Diode) 및 DLP(Digital Light Processing), PDP(Plasma Display Panel) 패널, 무기 LED 패널, 마이크(160)(150)로 LED 패널 등 다양한 종류의 디스플레이(120) 패널을 포함할 수 있으나, 이에 한정되는 것은 아니다. 한편, 디스플레이(120)는 터치 패널과 함께 터치스크린을 구성할 수도 있으며, 플렉서블(flexible) 패널로 이루어질 수도 있다.

디스플레이(120)는 2D 형태의 정사각형, 직사각형으로 구현될 수 있으나, 이에 국한되지 않고, 원형, 다각형, 3D 입체 형태 등 다양한 형태로 구현될 수 있다.

프로세서(150)는 다양한 시각적 컨텐츠, 전자 장치(100)의 제어 동작을 안내하기 위한 GUI를 표시하도록 디스플레이(120)를 제어할 수 있다.

프로세서(150)는 전자 장치(100)의 적어도 하나의 기능에 대응되는 GUI(Graphical User Interface) 및 전자 장치(100)와 통신 인터페이스(110)를 통해 통신 연결을 수행하는 웨어러블 기기의 제어 UI에 대한 GUI를 표시하도록 디스플레이(120)를 제어할 수 있다.

구체적으로, 프로세서(150)는 전자 장치(100)의 적어도 하나의 기능에 대응되는 GUI와 웨어러블 기기의 제어 UI에 대한 GUI가 매핑되어 표시되도록 디스플레이(120)를 제어할 수 있다.

또한, 프로세서(150)는 웨어러블 기기의 제어 UI를 통해 입력된 사용자 인터랙션 정보에 대한 GUI를 표시하도록 디스플레이(120)를 제어할 수 있다.

구체적으로, 프로세서(150)는 웨어러블 기기의 제어 UI를 통해 입력된 사용자 인터랙션 정보에 대한 GUI를 웨어러블 기기의 제어 UI에 대한 GUI 또는 전자 장치(100)의 적어도 하나의 기능에 대한 GUI와 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다.

프로세서(150)는 웨어러블 기기의 제어 UI에 대한 GUI와 전자 장치(100)의 제어를 위한 원격 제어 장치의 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다.

다만, 상술한 바에 국한되지 않고, 프로세서(150)는 웨어러블 기기를 통한 전자 장치(100)의 제어를 위한 다양한 UI, GUI를 표시하도록 디스플레이(120)를 제어할 수 있다.

스피커(130)는 고음역대 소리 재생을 위한 트위터, 중음역대 소리 재생을 위한 미드레인지, 저음역대 소리 재생을 위한 우퍼, 극저음역대 소리 재생을 위한 서브우퍼, 공진을 제어하기 위한 인클로저, 스피커(130)에 입력되는 전기 신호 주파수를 대역 별로 나누는 크로스오버 네트워크 등으로 이루어질 수 있다.

스피커(130)는, 음향 신호를 전자 장치(100)의 외부로 출력할 수 있다. 스피커(130)는 멀티미디어 재생, 녹음 재생, 각종 알림음, 음성 메시지 등을 출력할 수 있다. 전자 장치(100)는 스피커(130)와 같은 오디오 출력 장치를 포함할 수 있으나, 오디오 출력 단자와 같은 출력 장치를 포함할 수 있다. 특히, 스피커(130)는 획득한 정보, 획득한 정보에 기초하여 가공·생산한 정보, 사용자 음성에 대한 응답 결과 또는 동작 결과 등을 음성 형태로 제공할 수 있다.

프로세서(150)는 다양한 청각적 컨텐츠, 전자 장치(100)의 제어 동작에 대한 안내 음성을 출력하도록 스피커(130)를 제어할 수 있다.

프로세서(150)는 전자 장치(100)의 적어도 하나의 기능에 대한 음성, 전자 장치(100)와 통신 인터페이스(110)를 통해 연결된 웨어러블 기기의 정보에 대한 음성을 출력하도록 스피커(130)를 제어할 수 있다.

구체적으로, 프로세서(150)는 전자 장치(100)와 통신 인터페이스(110)를 통해 연결된 웨어러블 기기에 포함된 제어 UI에 대한 정보, 웨어러블 기기의 제어 UI를 통해 입력된 사용자 인터랙션에 대한 정보에 대한 음성을 출력하도록 스피커(130)를 제어할 수 있다.

또한, 프로세서(150)는 전자 장치(100)의 적어도 하나의 기능과 웨어러블 기기의 제어 UI의 매핑 정보에 대한 음성을 출력하도록 스피커(130)를 제어할 수 있다.

프로세서(150)는 웨어러블 기기를 통해 입력되는 사용자 인터랙션에 대한 정보와 웨어러블 기기의 제어 UI에 대한 정보 또는 전자 장치(100)의 적어도 하나의 기능의 매핑 정보에 대한 음성을 출력하도록 스피커(130)를 제어할 수 있다.

프로세서(150)는 웨어러블 기기의 제어 UI와 전자 장치(100)를 제어하기 위한 원격 제어 장치의 제어 UI의 매핑 정보에 대한 음성을 출력하도록 스피커(130)를 제어할 수 있다.

다만, 상술한 실시 예에 국한되는 것은 아니며, 프로세서(150)는 본 개시에 따른 다양한 전자 장치(100)의 제어 동작을 수행하기 위한 음성을 출력하도록 스피커(130)를 제어할 수 있다.

메모리(140)는 각종 프로그램이나 데이터를 일시적 또는 비일시적으로 저장하고, 프로세서(150)의 호출에 따라서 저장된 정보를 프로세서(150)에 전달한다. 또한, 메모리(140)는, 프로세서(150)의 연산, 처리 또는 제어 동작 등에 필요한 각종 정보를 전자적 포맷으로 저장할 수 있다.

메모리(140)는, 예를 들어, 주기억장치 및 보조기억장치 중 적어도 하나를 포함할 수 있다. 주기억장치는 롬(ROM) 및/또는 램(RAM)과 같은 반도체 저장 매체를 이용하여 구현된 것일 수 있다. 롬은, 예를 들어, 통상적인 롬, 이피롬(EPROM), 이이피롬(EEPROM) 및/또는 마스크롬(MASK-ROM) 등을 포함할 수 있다. 램은 예를 들어, 디램(DRAM) 및/또는 에스램(SRAM) 등을 포함할 수 있다. 보조기억장치는, 플래시 메모리(140) 장치, SD(Secure Digital) 카드, 솔리드 스테이트 드라이브(SSD, Solid State Drive), 하드 디스크 드라이브(HDD, Hard Disc Drive), 자기 드럼, 컴팩트 디스크(CD), 디브이디(DVD) 또는 레이저 디스크 등과 같은 광 기록 매체(optical media), 자기테이프, 광자기 디스크 및/또는 플로피 디스크 등과 같이 데이터를 영구적 또는 반영구적으로 저장 가능한 적어도 하나의 저장 매체를 이용하여 구현될 수 있다.

메모리(140)는 전자 장치(100)의 적어도 하나의 기능에 대한 정보, 전자 장치(100)와 통신 인터페이스(110)를 통해 통신 연결을 수행하는 웨어러블 기기의 제어 정보, 웨어러블 기기의 제어 UI 정보, 웨어러블 기기의 제어 UI를 통해 입력되는 사용자 인터랙션에 대한 정보를 저장할 수 있다.

메모리(140)는 전자 장치(100)의 적어도 하나의 기능에 대응되는 전자 장치(100)와 통신 인터페이스(110)를 통해 통신 연결을 수행하는 웨어러블 기기의 제어 UI에 대한 정보를 저장할 수 있다.

메모리(140)는 웨어러블 기기의 제어 UI를 통해 입력되는 사용자 인터랙션 정보에 대응되는 전자 장치(100)의 적어도 하나의 기능에 대한 정보를 저장할 수 있다.

이외에 메모리(140)는 각종 GUI에 대한 정보, 예를 들어, 전자 장치(100)와 통신 인터페이스(110)를 통해 통신 연결을 수행하는 웨어러블 기기의 제어 정보에 대한 GUI, 웨어러블 기기의 제어 UI에 대한 GUI, 웨어러블 기기의 제어 UI를 통해 입력되는 사용자 인터랙션에 대한 GUI, 전자 장치(100)의 적어도 하나의 기능에 대한 GUI와 웨어러블 기기의 제어 UI에 대한 GUI의 매핑 정보 등을 저장할 수 있다.

프로세서(150)는 전자 장치(100)의 전반적인 동작을 제어한다. 구체적으로, 프로세서(150)는 상술한 바와 메모리(140)를 포함하는 전자 장치(100)의 구성과 연결되며, 상술한 바와 같은 메모리(140)에 저장된 적어도 하나의 인스트럭션을 실행함으로써, 전자 장치(100)의 동작을 전반적으로 제어할 수 있다. 특히, 프로세서(150)는 하나의 프로세서(150)로 구현될 수 있을 뿐만 아니라 복수의 프로세서(150)로 구현될 수 있다.

프로세서(150)는 다양한 방식으로 구현될 수 있다. 예를 들어, 프로세서(150)는 주문형 집적 회로(Application Specific Integrated Circuit, ASIC), 임베디드 프로세서(150), 마이크(160)로 프로세서(150), 하드웨어 컨트롤 로직, 하드웨어 유한 상태 기계(hardware Finite State Machine, FSM), 디지털 신호 프로세서(150)(Digital Signal Processor, DSP) 중 적어도 하나로 구현될 수 있다.

한편, 본 개시에서 프로세서(150)는 디지털 신호를 처리하는 중앙처리장치 (central processing unit(CPU)), MCU(Micro Controller Unit), MPU(micro processing unit), 컨트롤러(controller), 어플리케이션 프로세서(150)(application processor(AP)), 또는 커뮤니케이션 프로세서(150)(communication processor(CP)), ARM 프로세서(150) 중 하나 또는 그 이상을 포함하거나, 해당 용어로 정의될 수 있다. 또한, 프로세서(150)는 프로세싱 알고리즘이 내장된 SoC(System on Chip), LSI(large scale integration)로 구현될 수도 있고, FPGA(Field Programmable gate array) 형 태로 구현될 수도 있다. 프로세서(150)는 메모리(140)에 저장된 컴퓨터 실행가능 명령어(computer executable instructions)를 실행함으로써 다양한 기능을 수행할 수 있다. 뿐만 아니라, 프로세서(150)는 인공지능 기능을 수행하기 위하여, 별도의 AI 전용 프로세서(150)인 GPU(graphics-processing unit), NPU(Neural Processing Unit), VPU(Visual Processing UniT) 중 적어도 하나를 포함할 수 있다.

프로세서(150)는 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기인지 식별할 수 있다.

프로세서(150)는 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 웨어러블 기기가 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 디스플레이(120) 또는 스피커(130) 중 적어도 하나를 제어할 수 있다.

프로세서(150)는 사용자 명령에 따라 웨어러블 기기가 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 전자 장치(100)의 적어도 하나의 기능에 대응되는 웨어러블 기기의 제1 제어 UI를 식별할 수 있다.

프로세서(150)는 전자 장치(100)의 적어도 하나의 기능에 대한 GUI와 전자 장치(100)의 적어도 하나의 기능에 대응되는 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다.

프로세서(150)는 웨어러블 기기로부터 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 사용자 인터랙션 정보 및 제1 제어 UI에 대응되는 전자 장치(100)의 적어도 하나의 기능에 기초하여 전자 장치(100)를 제어할 수 있다.

상술한 프로세서(150)의 전자 장치(100) 구성에 대한 제어 동작은 도 3에서 전자 장치(100)와 통신 인터페이스(110)를 통해 통신 연결을 수행하는 웨어러블 기기 및 원격 제어 장치와 함께 설명될 수 있다.

도 3은 본 개시의 일 실시 예에 따른, 전자 장치(100)의 동작을 설명하기 위한 시퀀스도이다.

도 3을 참조하면, 전자 장치(100)는 통신 인터페이스(110)를 통해 웨어러블 기기로 탐색 신호를 전송할 수 있다(S305).

전자 장치(100)로부터 탐색 신호가 수신되면, 웨어러블 기기는 연결 신호를 전자 장치(100)로 전송할 수 있고, 전자 장치(100)는 통신 인터페이스(110)를 통해 웨어러블 기기가 전송한 연결 신호를 수신할 수 있다(S310).

웨어러블 기기로부터 연결 신호가 수신되면, 전자 장치(100)는 웨어러블 기기가 전자 장치(100)의 적어도 하나의 기능(또는 제어 기능, 이하 적어도 하나의 기능이라고 칭함)에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 사용자에게 제공하도록 디스플레이(120) 또는 스피커(130)를 제어할 수 있다(S315).

전자 장치(100)는 통신 인터페이스(110)를 통해 원격 제어 장치로부터 웨어러블 기기의 전자 장치(100)에 대한 제어 권한을 허용하는 신호를 수신할 수 있다(S320).

웨어러블 기기의 전자 장치(100)에 대한 제어 권한을 허용하는 신호가 수신되면, 전자 장치(100)는 통신 인터페이스(110)를 통해 웨어러블 기기로 웨어러블 기기의 제어 정보를 요청하는 신호를 전송할 수 있다(S325).

웨어러블 기기의 제어 정보를 요청하는 신호가 수신되면, 웨어러블 기기는 웨어러블 기기의 제어 정보를 전자 장치(100)로 전송할 수 있다(S330).

통신 인터페이스(110)를 통해 웨어러블 기기의 제어 정보가 수신되면, 전자 장치(100)는 웨어러블 기기가 제어 권한을 가질 수 있는 전자 장치(100)의 적어도 하나의 제어 기능에 대한 리스트를 표시하도록 디스플레이(120)를 제어할 수 있다(S335). 또한, 전자 장치(100)는 웨어러블 기기가 제어 권한을 가질 수 있는 전자 장치(100)의 적어도 하나의 제어 기능에 대한 리스트에 대한 음성을 출력하도록 스피커(130)를 제어할 수도 있다.

원격 제어 장치는 사용자로부터 입력 받은 웨어러블 기기가 제어 권한을 가지는 전자 장치(100)의 적어도 하나의 기능을 선택하는 신호를 전자 장치(100)로 전송할 수 있다(S340).

통신 인터페이스(110)를 통해 웨어러블 기기가 제어 권한을 가지는 전자 장치(100)의 적어도 하나의 기능을 선택하는 신호가 수신되면, 전자 장치(100)는 전자 장치(100)의 적어도 하나의 기능에 대응되는 웨어러블 기기의 제어 UI를 식별할 수 있다(S345). 또한, 전자 장치(100)는 적어도 하나의 기능에 대한 제어를 웨어러블 기기의 제어 UI에 할당할 수도 있다.

전자 장치(100)는 전자 장치(100)의 적어도 하나의 기능에 대한 GUI와 전자 장치(100)의 적어도 하나의 기능에 대응되는 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다(S350). 또한, 전자 장치(100)는 매핑된 GUI에 대한 음성을 출력하도록 스피커(130)를 제어할 수도 있다.

전자 장치(100)는 통신 인터페이스(110)를 통해 원격 제어 장치와 통신 연결을 수행하여 전자 장치(100)의 적어도 하나의 기능에 대응되는 제어 UI에 대한 확인 신호를 수신할 수 있다(S355). 다만, 이에 국한되지 않고, 전자 장치(100)는 원격 제어 장치로부터 확인 신호를 수신하는 동작을 수행하지 않을 수도 있다.

전자 장치(100)는 통신 인터페이스(110)를 통해 웨어러블 기기와 통신 연결을 수행하여 웨어러블 기기의 전자 장치(100)에 대한 제어 신호를 수신할 수 있다(S360).

웨어러블 기기로부터 전자 장치(100)에 대한 제어 신호가 수신되면, 전자 장치(100)는 웨어러블 기기의 제어 신호에 따라 적어도 하나의 기능을 수행할 수 있다(S365).

이하, 도 4 내지 9를 통해 전자 장치(100)의 프로세서(150)가 웨어러블 기기와 통신 인터페이스(110)를 통해 통신 연결을 수행하여 전자 장치(100)의 각 구성을 제어하는 동작에 대해 보다 구체적으로 설명한다.

프로세서(150)는 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기인지 식별할 수 있다. 여기서, 프로세서(150)는 통신 인터페이스(110)를 통해 웨어러블 기기의 ID, 속성에 대한 정보에 기초하여 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기인지 식별할 수 있다.

도 4a는 본 개시의 일 실시 예에 따른, 전자 장치(100)가 웨어러블 기기가 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하는 동작을 설명하기 위한 도면이다.

도 4a를 참조하면, 프로세서(150)는 "웨어러블 기기가 전자 장치(100)의 제어 권한을 갖도록 하겠습니까?"라는 확인 문구를 표시하도록 디스플레이(120)를 제어하거나, 확인 문구에 대한 음성을 출력하도록 스피커(130)를 제어할 수 있다.

다만, 상술한 실시 예에 국한되는 것은 아니며, 프로세서(150)는 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 가지는지 여부에 관한 다양한 문구를 표시하도록 디스플레이(120)를 제어하거나 음성을 출력하도록 스피커(130)를 제어할 수 있다.

여기서, 프로세서(150)는 웨어러블 기기의 제어 정보에 기초하여 웨어러블 기기를 통해 제어 가능한 전자 장치(100)의 적어도 하나의 기능을 식별할 수 있다. 예를 들어, 프로세서(150)는 웨어러블 기기가 제어 UI를 포함하는 무선 이어폰인 경우, 무선 이어폰을 통해 제어 가능한 전자 장치(100)의 기능으로, 음량 조절, 채널 변경 등의 기능을 식별할 수 있다.

프로세서(150)는 웨어러블 기기를 통해 제어 가능한 전자 장치(100)의 적어도 하나의 기능이 식별되면, 식별된 전자 장치(100)의 적어도 하나의 기능에 대한 리스트를 표시하도록 디스플레이(120)를 제어할 수 있다.

도 4b는 본 개시의 일 실시 예에 따른, 전자 장치(100)가 웨어러블 기기를 통해 제어 가능한 전자 장치(100)의 적어도 하나의 기능에 대한 리스트를 표시하도록 디스플레이(120)를 제어하는 동작을 설명하기 위한 도면이다.

도 4b를 참조하면, 프로세서(150)는 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 제어 가능한 전자 장치(100)의 적어도 하나의 기능으로, 예를 들어, 음량 조절, 채널 변경, 전원 on/off 등을 포함하는 리스트를 표시하도록 디스플레이(120)를 제어할 수 있다. 또한, 프로세서(150)는 웨어러블 기기가 제어 가능한 전자 장치(100)의 적어도 하나의 기능에 대한 정보를 안내하는 음성을 출력하도록 스피커(130)를 제어할 수 있다.

프로세서(150)는 사용자 입력에 기초하여 웨어러블 기기가 제어 가능한 전자 장치(100)의 적어도 하나의 기능에 대한 리스트에 포함된 전자 장치(100)의 적어도 하나의 기능 중 웨어러블 기기가 제어 권한을 가지는 전자 장치(100)의 적어도 하나의 기능을 식별할 수 있다.

여기서, 사용자 입력은 웨어러블 기기가 제어 가능한 전자 장치(100)의 적어도 하나의 기능을 선택하기 위한 것으로, 프로세서(150)가 사용자 인터페이스(180)를 통해 입력 받거나 프로세서(150)가 통신 인터페이스(110)를 통해 원격 제어 장치 또는 웨어러블 기기로부터 수신한 제어 신호일 수 있다.

또한, 프로세서(150)는 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 통신 인터페이스(110)를 통해 연결된 웨어러블 기기의 제1 제어 UI에 할당할 수 있다.

따라서, 사용자로부터 웨어러블 기기에 구비된 제1 제어 UI를 통해 사용자 입력을 수신하여 제1 제어 UI에 대응되는 전자 장치(100)의 기능을 제어할 수 있다.

도 5는 본 개시의 일 실시 예에 따른, 전자 장치(100)의 적어도 하나의 기능에 대한 GUI와 웨어러블 기기의 제어 UI에 대한 GUI를 매핑하여 표시하는 동작을 설명하기 위한 도면이다.

도 5를 참조하면, 프로세서(150)는 전자 장치(100)와 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 무선 이어폰인 경우, 무선 이어폰의 제어 UI 중 외부 표면에 위치한 버튼을 전자 장치(100)의 적어도 하나의 기능 중 볼륨 조절 기능(510) 및 채널 변경 기능(520)에 대응되는 것으로 식별하고, 매핑 정보를 표시하도록 디스플레이(120)를 제어할 수 있다.

구체적으로, 무선 이어폰의 외부 표면에 위치한 버튼 중 제1 버튼(210)을 볼륨 조절 기능(510)에 대응되는 것으로 식별하고, 제1 버튼(210)에 대한 GUI와 볼륨 조절 기능(510)에 대한 GUI를 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다. 또한, 무선 이어폰의 외부 표면에 위치한 버튼 중 제2 버튼(220)을 채널 변경 기능(520)에 대응되는 것으로 식별하고, 제2 버튼(220)에 대한 GUI와 채널 변경 기능(520)에 대한 GUI를 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다

또 다른 실시 예로, 프로세서(150)는 웨어러블 기기가 제어 권한을 가지는 전자 장치(100)의 적어도 하나의 기능이 식별되면, 전자 장치(100)의 적어도 하나의 기능 각각에 대응되는 제1 제어 UI에 관한 제1 사용자 인터랙션 정보를 식별할 수 있다.

여기서, 사용자 인터랙션 정보란, 웨어러블 기기가 제어 UI를 통해 감지하거나 수신할 수 있는 사용자의 터치, 사용자의 음성, 사용자의 제스처 등을 의미할 수 있다.

도 6a, 6b 및 6c는 본 개시의 일 실시 예에 따른, 전자 장치(100)의 적어도 하나의 기능을 제어하기 위해 웨어러블 기기를 통해 입력되는 사용자 인터랙션을 설명하기 위한 도면이다.

도 6a를 참조하면, 웨어러블 기기가 제어 UI를 통해 감지하거나 수신할 수 있는 사용자 인터랙션은 사용자의 터치일 수 있다. 웨어러블 기기가 무선 이어폰인 경우, 무선 이어폰은 표면에 위치한 터치형 제어 UI를 통해 감지된 사용자 터치 입력을 감지할 수 있다.

프로세서(150)는 웨어러블 기기의 터치형 제어 UI를 통해 감지된 사용자 터치 입력에 대응되는 전자 장치(100)의 적어도 하나의 기능을 식별할 수 있다.

따라서, 사용자는 웨어러블 기기의 표면에 위치한 제어 UI를 터치함으로써 간편하게 웨어러블 기기와 통신 인터페이스(110)를 통해 연결된 전자 장치(100)의 기능을 제어할 수 있다.

도 6b를 참조하면, 웨어러블 기기가 제어 UI를 통해 감지하거나 수신할 수 있는 사용자 인터랙션은 사용자의 음성일 수 있다. 이 경우, 제어 UI는 마이크(160)일 수 있다. 웨어러블 기기가 무선 이어폰인 경우, 무선 이어폰은 표면에 위치한 마이크(160)를 통해 감지된 사용자의 음성을 감지할 수 있다.

프로세서(150)는 웨어러블 기기의 마이크(160)를 통해 감지된 사용자 음성에 대응되는 전자 장치(100)의 적어도 하나의 기능을 식별할 수 있다. 예를 들어, 웨어러블 기기는 사용자의 "볼륨 줄여줘"라는 음성을 마이크(160)를 통해 감지할 수 있고, 전자 장치(100)는 웨어러블 기기를 통해 감지된 "볼륨 줄여줘"라는 음성에 기초하여 전자 장치(100)의 음량을 작게 조절할 수 있다.

따라서, 사용자는 웨어러블 기기의 표면에 위치한 마이크(160)를 통해 간편하게 웨어러블 기기와 통신 인터페이스(110)를 통해 연결된 전자 장치(100)의 기능을 제어할 수 있다.

도 6c를 참조하면, 웨어러블 기기가 제어 UI를 통해 감지하거나 수신할 수 있는 사용자 인터랙션은 사용자의 제스처일 수 있다. 웨어러블 기기가 무선 이어폰인 경우, 무선 이어폰은 표면에 위치한 제스처 감지형 제어 UI를 통해 감지된 사용자 제스처를 감지할 수 있다. 여기서, 제스처는 제어 UI의 둘레를 따라 사용자가 손가락을 시계 방향으로 움직이거나 반시계 방향으로 움직이는 행위일 수 있다. 다만, 이에 국한되는 것은 아니며, 웨어러블 기기가 감지할 수 있는 제스처는 사용자가 신체 또는 도구를 통해 취할 수 있는 다양한 제스처를 포함할 수 있다.

프로세서(150)는 웨어러블 기기의 제스처 감지형 제어 UI를 통해 감지된 사용자의 제스처 입력에 대응되는 전자 장치(100)의 적어도 하나의 기능을 식별할 수 있다.

따라서, 사용자는 웨어러블 기기의 표면에 위치한 제스처 감지형 제어 UI를 통해 간편하게 웨어러블 기기와 통신 인터페이스(110)를 통해 연결된 전자 장치(100)의 기능을 제어할 수 있다.

프로세서(150)는 제1 제어 UI에 관한 제1 사용자 인터랙션 정보를 전자 장치(100)의 적어도 하나의 기능에 대한 GUI 및 제1 제어 UI에 대한 GUI와 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다.

도 7a 및 7b는 본 개시의 일 실시 예에 따른, 전자 장치(100)를 제어하기 위한 웨어러블 기기의 제어 UI에 관한 사용자 인터랙션 정보를 전자 장치(100)의 적어도 하나의 기능에 대한 GUI 및 제어 UI에 대한 GUI와 매핑하여 표시하는 동작을 설명하기 위한 도면이다.

도 7a를 참조하면, 프로세서(150)는 사용자 인터랙션 정보가 사용자 터치인 경우, 사용자 터치에 대한 정보를 웨어러블 기기의 제어 UI에 대한 GUI와 제어 UI에 대응되는 전자 장치(100)의 기능인 볼륨 조절 또는 음량 조절에 대한 GUI와 매핑하여 표시할 수 있다.

구체적으로, 프로세서(150)는 사용자가 웨어러블 기기 표면에 위치한 터치형 제어 UI를 한번 터치한 경우, 전자 장치(100)로부터 출력되는 소리의 음량을 높이는 기능으로 식별하고, 사용자가 웨어러블 기기 표면에 위치한 터치형 제어 UI를 두 번 터치한 경우, 전자 장치(100)로부터 출력되는 소리의 음량을 낮추는 기능으로 식별할 수 있다. 또한, 프로세서(150)는 사용자 터치에 관한 정보를 웨어러블 기기의 제어 UI 및 전자 장치(100)의 기능인 음량 조절에 대한 GUI(710)와 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다.

도 7b를 참조하면, 프로세서(150)는 사용자 인터랙션 정보가 사용자 제스처에 관한 것인 경우, 사용자 제스처에 대한 정보를 웨어러블 기기의 제어 UI에 대한 GUI와 제어 UI에 대응되는 전자 장치(100)의 기능인 채널 변경 기능과 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다.

구체적으로, 프로세서(150)는 사용자가 웨어러블 기기 표면에 위치한 제스처 감지형 제어 UI의 둘레를 따라 시계 방향으로 움직이는 사용자 제스처를 감지한 경우, 전자 장치(100)로부터 출력되는 방송 컨텐츠의 채널을 위로 변경하는 기능으로 식별하고, 사용자가 웨어러블 기기 표면에 위치한 제스처 감지형 제어 UI의 둘레를 따라 반시계 방향으로 움직이는 사용자 제스처를 감지한 경우, 채널을 아래로 변경하는 기능으로 식별할 수 있다.

또 다른 실시 예에 따르면, 프로세서(150)는 제1 제어 UI에 대한 정보 및 전자 장치(100)에 대한 원격 제어 장치의 제어 UI에 대한 정보에 기초하여 전자 장치(100)의 적어도 하나의 기능에 대응되는 제1 제어 UI를 식별할 수 있다.

도 8은 본 개시의 일 실시 예에 따른, 전자 장치(100)를 제어하기 위한 원격 제어 장치의 제어 UI에 대한 정보에 기초하여 전자 장치(100)의 적어도 하나의 기능에 대응되는 웨어러블 기기의 제어 UI를 식별하는 동작을 설명하기 위한 도면이다.

도 8을 참조하면, 웨어러블 기기 표면에 위치한 제1 버튼(210)과 제2 버튼(220)의 조작 방식과 배치가 유사한 원격 제어 장치의 음량 증가 버튼(310) 및 음량 감소 버튼(320)을 식별하여 제1 버튼(210)과 제2 버튼(220)을 각각 음량 증가 기능 및 음량 감소 기능에 대응되는 것으로 식별할 수 있으며, 이와 같은 매핑 정보를 표시하도록 디스플레이(120)를 제어할 수 있다.

다만, 이에 국한되는 것은 아니며, 프로세서(150)는 웨어러블 기기의 제어 UI와 원격 제어 장치의 제어 UI가 유사한 방식으로 조작되도록 웨어러블 기기의 제어 UI에 대응되는 전자 장치(100)의 적어도 하나의 기능을 식별할 수 있다.

도 9는 본 개시의 일 실시 예에 따른, 전자 장치(100)가 사용자 단말로부터 수신된 정보에 기초하여 전자 장치(100)의 적어도 하나의 기능에 대한 GUI와 웨어러블 기기의 제어 UI에 대한 GUI를 매핑하여 표시하는 동작을 설명하기 위한 도면이다.

프로세서(150)는, 사용자 명령에 따라 웨어러블 기기가 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 웨어러블 기기와 통신 연결을 수행하는 사용자 단말로부터 전자 장치(100)의 적어도 하나의 기능 및 전자 장치(100)의 적어도 하나의 기능에 대응되는 제1 제어 UI에 대한 정보를 수신할 수 있다.

프로세서(150)는 사용자 단말로부터 수신된 정보에 기초하여 전자 장치(100)의 적어도 하나의 기능에 대한 GUI와 전자 장치(100)의 적어도 하나의 기능에 대응되는 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다.

여기서, 사용자 단말로부터 수신된 정보는, 사용자 단말에서 실행되는 웨어러블 기기의 제어 어플리케이션에서 제공되는 정보를 포함할 수 있다.

프로세서(150)는, 웨어러블 기기를 통해 컨텐츠가 출력되도록 통신 인터페이스(110)를 통해 컨텐츠에 대한 정보를 웨어러블 기기로 전송할 수 있다.

프로세서(150)는 웨어러블 기기를 통해 컨텐츠가 출력되는 동안 외부 기기에 대한 웨어러블 기기의 제어 요청이 식별되면, 외부 기기에 대한 제어 기능을 수행하도록 웨어러블 기기를 제어할 수 있다.

도 10은 본 개시의 일 실시 예에 따른, 전자 장치(100)의 구성을 설명하기 위한 블록도이다.

도 10을 참조하면, 전자 장치(100)는 도 2와 함께 상술한 장치 구성 외에 추가적인 장치 구성을 더 포함할 수 있다. 예를 들어, 전자 장치(100)는 마이크(160), 카메라(170), 사용자 인터페이스(180), 입출력 인터페이스(190)를 더 포함할 수 있다.

마이크(160)는 소리를 획득하여 전기 신호로 변환하는 모듈을 의미할 수 있으며, 콘덴서 마이크(160), 리본 마이크(160), 무빙코일 마이크(160), 압전소자 마이크(160), 카본 마이크(160), MEMS(Micro Electro Mechanical System) 마이크(160)일 수 있다. 또한, 무지향성, 양지향성, 단일지향성, 서브 카디오이드(Sub Cardioid), 슈퍼 카디오이드(Super Cardioid), 하이퍼 카디오이드(Hyper Cardioid)의 방식으로 구현될 수 있다.

프로세서(150)는 마이크(160)를 통해 사용자의 음성 명령에 대한 정보를 획득할 수 있다. 프로세서(150)는 획득된 사용자의 음성 명령에 대한 정보에 기초하여 웨어러블 기기가 전자 장치(100)에 대한 제어 권한을 가지도록 할지 여부를 식별할 수 있다.

또한, 프로세서(150)는 획득된 사용자의 음성 명령에 대한 정보에 기초하여 웨어러블 기기의 제어 UI에 대응되는 전자 장치(100)의 적어도 하나의 기능을 식별할 수 있다. 예를 들어, 프로세서(150)는 획득된 사용자의 음성 명령에 대한 정보에 웨어러블 기기의 일 영역에 위치한 제어 UI를 전자 장치(100)의 기능 중 음량 조절에 대한 기능에 대응되는 것으로 식별할 수 있다.

이외에 프로세서(150)는 마이크(160)를 통해 전자 장치(100)와 웨어러블 기기의 제어에 관한 다양한 음성을 수신하여 음성 데이터를 획득할 수 있다.

카메라(170)는 전자 장치(100) 주변 또는 전자 장치(100) 주변에 위치한 사용자에 대한 이미지, 정지 영상 및 동영상을 촬영할 수 있다. 일 실시 예에 따르면, 카메라(170) 모듈은 하나 이상의 렌즈, 이미지 센서, 이미지 시그널 프로세서(150), 또는 플래시를 포함할 수 있다.

프로세서(150)는 카메라(170)를 통해 획득된 이미지에 기초하여 통신 인터페이스(110)를 통해 통신 연결을 수행하는 웨어러블 기기를 착용하고 있는 사용자가 전자 장치(100)의 주변부에 위치하고 있는지 여부를 식별할 수 있다.

웨어러블 기기를 착용한 사용자가 전자 장치(100)의 주변부에 위치하고 있지 않은 것으로 식별되면, 프로세서(150)는 웨어러블 기기를 통한 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 허용하지 않을 수 있다.

또한, 이 과정에서 프로세서(150)는 신경망 모델(예: 이미지 분류 모델)에 카메라(170)를 통해 획득된 이미지를 입력하여 획득한 출력 값에 기초하여 전자 장치(100) 주변에 사용자가 위치하고 있는지 여부를 식별할 수 있다.

사용자 인터페이스(180)는 버튼(button), 레버(lever), 스위치(switch), 센서(sensor)형, 터치(Touch)형 인터페이스 등을 포함할 수 있고, 터치형 인터페이스는 디스플레이(120) 화면 상에서 사용자의 터치로 입력을 받는 방식으로 구현될 수 있다.

전자 장치(100)의 프로세서(150)는 사용자 인터페이스(180)를 통해 사용자 입력을 수신할 수 있다. 구체적으로, 프로세서(150)는 사용자 인터페이스(180)를 통해 사용자 입력을 수신하여 영상 컨텐츠, 각종 UI를 출력하도록 디스플레이(120)를 제어하거나, 음성을 출력하도록 스피커(130)를 제어할 수 있다.

프로세서(150)는 원격 제어 장치, 웨어러블 기기, 사용자 단말 등과 통신 연결을 수행하여 제어 신호를 수신하는 경우 외에 전자 장치(100)에 포함된 사용자 인터페이스(180)를 통해 직접 사용자로부터 제어 신호를 입력 받을 수 있다.

프로세서(150)는 사용자 인터페이스(180)를 통해 입력 받거나 수신한 사용자 명령에 기초하여 웨어러블 기기와 전자 장치(100)의 적어도 하나의 기능에 대한 제어에 관한 동작을 수행할 수 있다.

입출력 인터페이스(190)는 전자 장치(100)와 별도로 마련된 다른 장치, 예를 들어 외부 저장 장치와 연결 가능하게 마련될 수 있다. 예를 들어, 입출력 인터페이스(190)는, 범용 직렬 시스템 버스(USB: Universal Serial Bus) 단자일 수 있으며, 이외에도 HDMI(High Definition Multimedia Interface), MHL (Mobile High-Definition Link), USB (Universal Serial Bus), DP(Display Port), 썬더볼트(Thunderbolt), VGA(Video Graphics Array)포트, RGB 포트, D-SUB(D-subminiature), DVI(Digital Visual Interface) 중 어느 하나의 인터페이스일 수 있다.

입출력 인터페이스(190)는 오디오 및 비디오 신호 중 적어도 하나를 입출력 할 수 있다. 구현 예에 따라, 입출력 인터페이스(190)는 오디오 신호만을 입출력하는 포트와 비디오 신호만을 입출력하는 포트를 별개의 포트로 포함하거나, 오디오 신호 및 비디오 신호를 모두 입출력하는 하나의 포트로 구현될 수 있다.

프로세서(150)는 입출력 인터페이스(190)를 통해 외부 기기와 연결되어 웨어러블 기기를 통한 전자 장치(100)의 적어도 하나의 기능에 대한 제어에 관한 다양한 신호를 송/수신할 수 있다.

도 11은 본 개시의 일 실시 예에 따른, 전자 장치(100)의 동작을 설명하기 위한 흐름도이다.

도 11을 참조하면, 전자 장치(100)는 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기인지 식별할 수 있다(S1110).

전자 장치(100)는 통신 인터페이스(110)를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 웨어러블 기기가 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 디스플레이(120) 또는 스피커(130) 중 적어도 하나를 제어할 수 있다(S1120).

전자 장치(100)는 통신 인터페이스(110)를 통해 웨어러블 기기로부터 수신된 웨어러블 기기의 제어 정보에 기초하여 웨어러블 기기를 통해 제어 가능한 전자 장치(100)의 적어도 하나의 기능을 식별할 수 있다.

전자 장치(100)는 웨어러블 기기를 통해 제어 가능한 전자 장치(100)의 적어도 하나의 기능이 식별되면, 식별된 전자 장치(100)의 적어도 하나의 기능에 대한 리스트를 표시하도록 디스플레이(120)를 제어할 수 있다.

전자 장치(100)는 사용자 입력에 기초하여 리스트에 포함된 전자 장치(100)의 적어도 하나의 기능 중 웨어러블 기기가 제어 권한을 가지는 전자 장치(100)의 적어도 하나의 제어 기능을 식별할 수 있다.

전자 장치(100)는 사용자 명령에 따라 웨어러블 기기가 전자 장치(100)의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 전자 장치(100)의 적어도 하나의 기능에 대응되는 웨어러블 기기의 제1 제어 UI를 식별할 수 있다(S1130).

전자 장치(100)는 웨어러블 기기가 제어 권한을 가지는 전자 장치(100)의 적어도 하나의 기능이 식별되면, 전자 장치(100)의 적어도 하나의 기능 각각에 대응되는 제1 제어 UI에 관한 제1 사용자 인터랙션 정보를 식별할 수 있다.

전자 장치(100)는 제1 제어 UI에 대한 정보 및 전자 장치(100)에 대한 원격 제어 장치의 제어 UI에 대한 정보에 기초하여 전자 장치(100)의 적어도 하나의 기능에 대응되는 제1 제어 UI를 식별할 수 있다.

여기서, 원격 제어 장치의 제어 UI에 대한 정보는, 원격 제어 장치의 제어 UI에 관한 사용자 인터랙션 정보 및 제어 UI에 대응되는 전자 장치(100)의 적어도 하나의 기능에 대한 정보일 수 있다.

전자 장치(100)는 전자 장치(100)의 적어도 하나의 기능에 대한 GUI와 전자 장치(100)의 적어도 하나의 기능에 대응되는 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다(S1140).

전자 장치(100)는 제1 제어 UI에 관한 제1 사용자 인터랙션 정보를 전자 장치(100)의 적어도 하나의 기능에 대한 GUI 및 제1 제어 UI에 대한 GUI와 매핑하여 표시하도록 디스플레이(120)를 제어할 수 있다.

전자 장치(100)는 웨어러블 기기로부터 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 사용자 인터랙션 정보 및 제1 제어 UI에 대응되는 전자 장치(100)의 적어도 하나의 기능에 기초하여 전자 장치(100)를 제어할 수 있다(S1150).

일 실시 예에 따르면, 본 문서에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품(예: 다운로더블 앱(downloadable app))의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.

이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시에 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형 실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

100: 전자 장치
110: 통신 인터페이스
120: 디스플레이
130: 스피커
140: 메모리
150: 프로세서
160: 마이크
170: 카메라
180: 사용자 인터페이스
190: 입출력 인터페이스

Claims

전자 장치에 있어서,
통신 인터페이스;
디스플레이;
스피커;
적어도 하나의 인스트럭션을 저장하는 메모리; 및
상기 적어도 하나의 인스트럭션을 실행하는 하나 이상의 프로세서;를 포함하고,
상기 하나 이상의 프로세서는,
상기 통신 인터페이스를 통해 연결된 웨어러블(Wearable) 기기가 제어 UI(User Interface) 기능을 갖는 기기인지 식별하고,
상기 통신 인터페이스를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 상기 디스플레이 또는 상기 스피커 중 적어도 하나를 제어하고,
사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 웨어러블 기기의 제1 제어 UI를 식별하고,
상기 전자 장치의 적어도 하나의 기능에 대한 GUI(Graphical User Interface)와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하고,
상기 웨어러블 기기로부터 상기 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 상기 사용자 인터랙션 정보 및 상기 제1 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 기초하여 상기 전자 장치를 제어하는 전자 장치.
제1항에 있어서,
상기 하나 이상의 프로세서는,
상기 웨어러블 기기가 제어 권한을 가지는 상기 전자 장치의 적어도 하나의 기능이 식별되면, 상기 전자 장치의 적어도 하나의 기능 각각에 대응되는 제1 제어 UI에 관한 제1 사용자 인터랙션 정보를 식별하고,
상기 제1 제어 UI에 관한 상기 제1 사용자 인터랙션 정보를 상기 전자 장치의 적어도 하나의 기능에 대한 GUI 및 상기 제1 제어 UI에 대한 GUI와 매핑하여 표시하도록 상기 디스플레이를 제어하는 전자 장치.
제1항에 있어서,
상기 하나 이상의 프로세서는,
상기 제1 제어 UI에 대한 정보 및 상기 전자 장치에 대한 원격 제어 장치의 제어 UI에 대한 정보에 기초하여 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI를 식별하는 전자 장치.
제3항에 있어서,
상기 원격 제어 장치의 제어 UI에 대한 정보는,
상기 원격 제어 장치의 제어 UI에 관한 사용자 인터랙션 정보 및 상기 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 대한 정보인 전자 장치.
제1항에 있어서,
상기 하나 이상의 프로세서는,
상기 웨어러블 기기의 제어 정보에 기초하여 상기 웨어러블 기기를 통해 제어 가능한 상기 전자 장치의 적어도 하나의 기능을 식별하고,
상기 웨어러블 기기를 통해 제어 가능한 상기 전자 장치의 적어도 하나의 기능이 식별되면, 상기 식별된 전자 장치의 적어도 하나의 기능에 대한 리스트를 표시하도록 상기 디스플레이를 제어하고,
사용자 입력에 기초하여 상기 리스트에 포함된 상기 전자 장치의 적어도 하나의 기능 중 상기 웨어러블 기기가 제어 권한을 가지는 상기 전자 장치의 적어도 하나의 제어 기능을 식별하는 전자 장치.
제1항에 있어서,
상기 하나 이상의 프로세서는,
사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 웨어러블 기기와 통신 연결을 수행하는 사용자 단말로부터 상기 전자 장치의 적어도 하나의 기능 및 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 정보를 수신하고,
상기 사용자 단말로부터 수신된 정보에 기초하여 상기 전자 장치의 적어도 하나의 기능에 대한 GUI와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이를 제어하는 전자 장치.
제6항에 있어서,
상기 사용자 단말로부터 수신된 정보는,
상기 사용자 단말에서 실행되는 상기 웨어러블 기기의 제어 어플리케이션에서 제공되는 정보를 포함하는 전자 장치.
제1항에 있어서,
상기 하나 이상의 프로세서는,
상기 웨어러블 기기를 통해 컨텐츠가 출력되도록 상기 통신 인터페이스를 통해 상기 컨텐츠에 대한 정보를 상기 웨어러블 기기로 전송하고,
상기 웨어러블 기기를 통해 상기 컨텐츠가 출력되는 동안 외부 기기에 대한 상기 웨어러블 기기의 제어 요청이 식별되면, 상기 외부 기기에 대한 제어 기능을 수행하도록 상기 웨어러블 기기를 제어하는 전자 장치.
제1항에 있어서,
상기 사용자 인터랙션은,
터치 수신, 음성 수신 또는 모션 인식 중 적어도 하나를 포함하는 전자 장치.
전자 장치의 제어 방법에 있어서,
상기 통신 인터페이스를 통해 연결된 웨어러블(Wearable) 기기가 제어 UI(User Interface) 기능을 갖는 기기인지 식별하는 단계;
상기 통신 인터페이스를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 상기 디스플레이 또는 상기 스피커 중 적어도 하나를 제어하는 단계;
사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 웨어러블 기기의 제1 제어 UI를 식별하는 단계;
상기 전자 장치의 적어도 하나의 기능에 대한 GUI(Graphical User Interface)와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계; 및
상기 웨어러블 기기로부터 상기 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 상기 사용자 인터랙션 정보 및 상기 제1 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 기초하여 상기 전자 장치를 제어하는 단계;를 포함하는 제어 방법.
제10항에 있어서,
상기 제1 UI를 식별하는 단계는,
상기 웨어러블 기기가 제어 권한을 가지는 상기 전자 장치의 적어도 하나의 기능이 식별되면, 상기 전자 장치의 적어도 하나의 기능 각각에 대응되는 제1 제어 UI에 관한 제1 사용자 인터랙션 정보를 식별하는 단계;를 포함하고,
상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계는,
상기 제1 제어 UI에 관한 상기 제1 사용자 인터랙션 정보를 상기 전자 장치의 적어도 하나의 기능에 대한 GUI 및 상기 제1 제어 UI에 대한 GUI와 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계;를 포함하는 제어 방법.
제10항에 있어서,
상기 제1 UI를 식별하는 단계는,
상기 제1 제어 UI에 대한 정보 및 상기 전자 장치에 대한 원격 제어 장치의 제어 UI에 대한 정보에 기초하여 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI를 식별하는 단계;를 포함하는 제어 방법.
제12항에 있어서,
상기 원격 제어 장치의 제어 UI에 대한 정보는,
상기 원격 제어 장치의 제어 UI에 관한 사용자 인터랙션 정보 및 상기 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 대한 정보인 제어 방법.
제10항에 있어서,
상기 확인 요청을 제공하도록 상기 디스플레이 또는 상기 스피커 중 적어도 하나를 제어하는 단계는,
상기 웨어러블 기기의 제어 정보에 기초하여 상기 웨어러블 기기를 통해 제어 가능한 상기 전자 장치의 적어도 하나의 기능을 식별하는 단계;
상기 웨어러블 기기를 통해 제어 가능한 상기 전자 장치의 적어도 하나의 기능이 식별되면, 상기 식별된 전자 장치의 적어도 하나의 기능에 대한 리스트를 표시하도록 상기 디스플레이를 제어하는 단계; 및
사용자 입력에 기초하여 상기 리스트에 포함된 상기 전자 장치의 적어도 하나의 기능 중 상기 웨어러블 기기가 제어 권한을 가지는 상기 전자 장치의 적어도 하나의 제어 기능을 식별하는 단계;를 포함하는 제어 방법.
제10항에 있어서,
상기 제1 UI를 식별하는 단계는,
사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 웨어러블 기기와 통신 연결을 수행하는 사용자 단말로부터 상기 전자 장치의 적어도 하나의 기능 및 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 정보를 수신하는 단계;를 포함하고,
상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계는,
상기 사용자 단말로부터 수신된 정보에 기초하여 상기 전자 장치의 적어도 하나의 기능에 대한 GUI와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 디스플레이를 제어하는 단계;를 포함하는 제어 방법.
제15항에 있어서,
상기 사용자 단말로부터 수신된 정보는,
상기 사용자 단말에서 실행되는 상기 웨어러블 기기의 제어 어플리케이션에서 제공되는 정보를 포함하는 제어 방법.
제10항에 있어서,
상기 제어 방법은,
상기 웨어러블 기기를 통해 컨텐츠가 출력되도록 상기 통신 인터페이스를 통해 상기 컨텐츠에 대한 정보를 상기 웨어러블 기기로 전송하는 단계; 및
상기 웨어러블 기기를 통해 상기 컨텐츠가 출력되는 동안 외부 기기에 대한 상기 웨어러블 기기의 제어 요청이 식별되면, 상기 외부 기기에 대한 제어 기능을 수행하도록 상기 웨어러블 기기를 제어하는 단계;를 포함하는 제어 방법.
제10항에 있어서,
상기 사용자 인터랙션은,
터치 수신, 음성 수신 또는 모션 인식 중 적어도 하나를 포함하는 제어 방법.
전자 장치의 프로세서의 의해 실행되어 상기 전자 장치가 동작을 수행하도록 하는 컴퓨터 명령을 저장하는 비일시적 컴퓨터 판독가능 기록매체에 있어서,
상기 통신 인터페이스를 통해 연결된 웨어러블(Wearable) 기기가 제어 UI(User Interface) 기능을 갖는 기기인지 식별하는 단계;
상기 통신 인터페이스를 통해 연결된 웨어러블 기기가 제어 UI 기능을 갖는 기기로 식별되면, 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지도록 할지 여부에 대한 확인 요청을 제공하도록 상기 디스플레이 또는 상기 스피커 중 적어도 하나를 제어하는 단계;
사용자 명령에 따라 상기 웨어러블 기기가 상기 전자 장치의 적어도 하나의 기능에 대한 제어 권한을 가지는 것으로 식별되면, 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 웨어러블 기기의 제1 제어 UI를 식별하는 단계;
상기 전자 장치의 적어도 하나의 기능에 대한 GUI(Graphical User Interface)와 상기 전자 장치의 적어도 하나의 기능에 대응되는 상기 제1 제어 UI에 대한 GUI를 매핑하여 표시하도록 상기 디스플레이를 제어하는 단계; 및
상기 웨어러블 기기로부터 상기 제1 제어 UI를 통해 입력된 사용자 인터랙션 정보가 수신되면, 상기 사용자 인터랙션 정보 및 상기 제1 제어 UI에 대응되는 상기 전자 장치의 적어도 하나의 기능에 기초하여 상기 전자 장치를 제어하는 단계;를 포함하는 컴퓨터 판독가능 기록매체.