KR101594105B1 - The method and apparatus for implementing multy-screen by distributing screen and sharing input interface between user equipments - Google Patents
The method and apparatus for implementing multy-screen by distributing screen and sharing input interface between user equipments Download PDFInfo
- Publication number
- KR101594105B1 KR101594105B1 KR1020150031353A KR20150031353A KR101594105B1 KR 101594105 B1 KR101594105 B1 KR 101594105B1 KR 1020150031353 A KR1020150031353 A KR 1020150031353A KR 20150031353 A KR20150031353 A KR 20150031353A KR 101594105 B1 KR101594105 B1 KR 101594105B1
- Authority
- KR
- South Korea
- Prior art keywords
- screen
- user device
- user
- application
- output
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
- H04N21/43637—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
- G06F3/1431—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1827—Network arrangements for conference optimisation or adaptation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/16—Use of wireless transmission of display information
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Graphics (AREA)
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
- Digital Computer Display Output (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephone Function (AREA)
Abstract
Description
본 발명은 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린 구현 방법 및 장치에 관한 것으로서, 보다 상세하게는, 사용자 장치 및 추가의 디스플레이를 기반으로 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린 구현 방법 및 장치에 관한 것이다.The present invention relates to a multi-screen implementation method and apparatus for distributing multiple screens and sharing an input interface among user devices, and more particularly, to a multi-screen implementation method and apparatus for distributing multiple screens between a user device and a user device, And more particularly to a multi-screen realization method and apparatus sharing the same.
스마트 TV, 스마트 폰, 태블릿 등과 같은 스마트 디바이스들과 N-스크린 서비스 또는 멀티스크린 서비스가 대두되기 이전에는 스크린을 가지고 있는 단말의 종류에 따라 화면을 제공하는 주체가 누구인지 명확하게 구분되었다.Prior to the emergence of N-screen services or multi-screen services with smart devices such as smart TVs, smartphones, tablets, etc., it was clearly identified who provided the screen according to the type of terminal having the screen.
예를 들어, TV는 방송사에서 휴대폰은 이동 통신 사업자가 개인용 컴퓨터는 웹 포털 사업자를 중심으로 각 기기의 스크린을 장악했다고 해도 과언은 아닐 것이다. 하지만, 최근 스마트 기기, 네트워크, 콘텐츠 및 서비스 제공 플랫폼 등의 진화와 함께 화면 제공 주체에 대한 경계가 무너지면서 다양한 스마트 디바이스에 대응하는 뉴미디어의 등장으로 크로스 플랫폼과 멀티 스크린 서비스 시대가 보편화되고 있다. For example, it would not be an exaggeration to say that TV has dominated screens of broadcasters, mobile phone operators, personal computers, and web portal operators. However, with the recent evolution of smart devices, networks, content and service delivery platforms, and the breakdown of screen providers, the era of cross-platform and multi-screen services is becoming popular due to the emergence of new media for various smart devices.
스마트 기기와 플랫폼에 관계없이 언제 어디서나 콘텐츠를 접근하고 소비할 수 있는 환경을 제공하는 서비스를 멀티 스크린 서비스라 정의할 수 있다.A multi-screen service can be defined as a service that provides an environment in which content can be accessed and consumed anytime, anywhere regardless of smart devices and platforms.
멀티스크린 서비스는 실시간 방송 및 주문형 비디오에 대한 콘텐츠 서비스를 중심으로 활성화되고 있을 뿐만 아니라 사용자 상호 작용이 많은 게임 서비스로도 확장되고 있다. 콘텐츠 서비스 관점에서 하나의 콘텐츠를 다양한 스크린에서 공통으로 제공하는 형태, 스크린 간 이동성을 고려한 끊김업는 콘텐츠 서비스 형태, 각 스크린 속성에 따라 콘텐츠 변환을 통한 기기 별 특성에 맞는 콘텐츠를 제공하는 형태로 서비스가 이루어 지고 있다.Multi - screen services are being activated not only on content services for real - time broadcasting and on - demand video, but also as game services with many user interactions. From the viewpoint of content service, it is possible to provide a service in which one content is provided in common on various screens, a content service type in which the inter-screen mobility is considered is provided, .
본 발명의 일 측면은 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 방법을 제공한다.One aspect of the present invention provides a method for distributing multiple screens and sharing an input interface among user devices.
본 발명의 다른 측면은 사용자 장치를 기반으로 구현된 멀티 스크린 및 입력 장치를 제공한다.Another aspect of the present invention provides a multi-screen and input device implemented on the basis of a user device.
본 발명의 일 측면에 따른 멀티 스크린을 구현하는 방법은 제1 사용자 장치가 적어도 하나의 재2 사용자 장치 각각과 네트워크를 설정하는 단계, 상기 제1 사용자 장치가 상기 적어도 하나의 제2 사용자 장치 각각으로부터 상기 네트워크를 통해 상기 적어도 하나의 제2 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 정보를 수신하는 단계와 제1 사용자 장치가 상기 적어도 하나의 제2 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 멀티 스크린 설정을 수행하는 단계를 포함할 수 있다. A method for implementing a multi-screen in accordance with an aspect of the present invention includes the steps of: a first user device establishing a network with each of at least one second user device, the first user device communicating with each of the at least one second user device Receiving information for setting each of the at least one second user device to the multi-screen through the network; and receiving information for setting each of the at least one second user device to the multi- And performing a screen setting.
한편, 상기 제1 사용자 장치가 상기 적어도 하나의 제2 사용자 장치 각각을 위한 입력 인터페이스를 결정하는 단계를 더 포함할 수 있다.The first user device, on the other hand, may further comprise determining an input interface for each of the at least one second user device.
또한, 상기 멀티 스크린 설정은 상기 제1 사용자 장치의 화면에서 출력될 적어도 하나의 제1 어플리케이션에 대한 설정 및 상기 적어도 하나의 제2 사용자 장치의 화면 각각에서 출력될 적어도 하나의 제2 어플리케이션 각각에 대한 설정을 포함할 수 있다.Also, the multi-screen setting may be configured for at least one first application to be output on the screen of the first user device, and for at least one second application to be output on each screen of the at least one second user device Settings.
또한, 멀티 스크린을 구현하는 방법은 상기 제1 사용자 장치가 전환 지시 명령을 수신하는 경우, 상기 제1 사용자 장치의 화면이 상기 제1 사용자 장치의 제1 디폴트 화면에서 상기 전환 지시 명령을 기반으로 지시된 적어도 하나의 제2 사용자 장치 중 특정 제2 사용자 장치의 제2 디폴트 화면으로 전환되는 단계를 더 포함할 수 있되, 상기 제1 디폴트 화면은 상기 멀티 스크린 설정을 기반으로 설정된 상기 적어도 하나의 제1 어플리케이션에 대한 출력 화면이고, 상기 제2 디폴트 화면은 상기 적어도 하나의 제2 어플리케이션 중 상기 멀티 스크린 설정을 기반으로 설정된 상기 특정 제2 사용자 장치에 설정된 적어도 하나의 특정 제2 어플리케이션에 대한 출력 화면일 수 있다.In addition, a method of implementing a multi-screen may include: when the first user equipment receives a switch instruction command, the screen of the first user equipment is displayed on the first default screen of the first user equipment To a second default screen of a particular one of the at least one second user device, wherein the first default screen is the first default screen of the at least one first user device And the second default screen is an output screen for at least one specific second application set in the specific second user device set based on the multi-screen setting of the at least one second application have.
또한, 상기 전환 지시 명령을 기반으로 상기 제1 사용자 장치의 화면이 상기 제2 디폴트 화면으로 전환된 경우, 상기 제1 사용자 장치를 기반으로 상기 적어도 하나의 특정 제2 어플리케이션에 대한 상기 출력 화면의 크기의 제어가 가능할 수 있다.In addition, when the screen of the first user device is switched to the second default screen based on the switching instruction command, the size of the output screen for the at least one specific second application based on the first user device Can be controlled.
또한, 상기 전환 지시 명령을 기반으로 상기 제1 사용자 장치의 화면이 상기 제2 디폴트 화면으로 전환된 경우, 상기 제1 사용자 장치를 기반으로 상기 적어도 하나의 특정 제2 어플리케이션 중 적어도 하나의 어플리케이션에 대한 종료가 가능하고, 상기 적어도 하나의 어플리케이션이 종료된 경우, 상기 제1 사용자 장치는 상기 종료된 적어도 하나의 어플리케이션의 개수에 따라 상기 종료된 적어도 하나의 어플리케이션을 제외한 상기 적어도 하나의 특정 제2 어플리케이션을 위한 화면 재배치를 수행하여 상기 제2 디폴트 화면을 재구성할 수 있다.In addition, when the screen of the first user device is switched to the second default screen based on the switching instruction command, at least one of the at least one specific second application, based on the first user device, Wherein the first user device is capable of terminating the at least one specific second application except for the terminated at least one application according to the number of the terminated at least one application, So that the second default screen can be reconstructed.
또한, 상기 적어도 하나의 제2 사용자 장치 각각에 대한 정보는 상기 적어도 하나의 제2 사용자 장치 각각의 출력 정보를 포함하고, 상기 출력 정보는 상기 적어도 하나의 제2 사용자 장치 각각의 화면 크기 정보, 상기 적어도 하나의 제2 사용자 장치 각각의 가능한 해상도 정보를 포함할 수 있다.Also, the information about each of the at least one second user device includes output information of each of the at least one second user device, and the output information includes information about the screen size of each of the at least one second user device, And may include the possible resolution information of each of the at least one second user device.
또한, 멀티 스크린을 구현하는 방법은 상기 제1 사용자 장치가 상기 출력 정보를 기반으로 상기 적어도 하나의 제2 사용자 장치 각각을 위한 통신 자원을 할당하는 단계와 상기 제1 사용자 장치가 상기 통신 자원을 통해 상기 적어도 하나의 제2 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 영상 정보를 전송하는 단계를 더 포함할 수 있다.Also, a method for implementing a multi-screen may include the steps of the first user device allocating communication resources for each of the at least one second user device based on the output information, And transmitting image information for setting each of the at least one second user device to the multi-screen.
본 발명의 다른 측면에 따른 멀티 스크린을 구현하는 사용자 장치에 있어서, 상기 사용자 장치는 프로세서를 포함하고, 상기 프로세서는 적어도 하나의 다른 사용자 장치 각각과 네트워크를 설정하고, 상기 적어도 하나의 다른 사용자 장치 각각으로부터 상기 네트워크를 통해 상기 적어도 하나의 다른 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 정보를 수신하고, 상기 적어도 하나의 다른 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 멀티 스크린 설정을 수행하도록 구현될 수 있다. In a user device implementing a multi-screen according to another aspect of the present invention, the user device comprises a processor, the processor establishes a network with each of the at least one other user device, and the at least one other user device Screen to set each of the at least one other user device to the multi-screen from the network, and to perform multi-screen setup to set each of the at least one other user device to the multi-screen .
한편, 상기 프로세서는 상기 적어도 하나의 다른 사용자 장치 각각을 위한 입력 인터페이스를 결정하도록 구현될 수 있다.Meanwhile, the processor may be configured to determine an input interface for each of the at least one other user device.
또한, 상기 멀티 스크린 설정은 상기 사용자 장치의 화면에서 출력될 적어도 하나의 제1 어플리케이션에 대한 설정 및 상기 적어도 하나의 다른 사용자 장치의 화면 각각에서 출력될 적어도 하나의 제2 어플리케이션 각각에 대한 설정을 포함할 수 있다.Also, the multi-screen setting may include settings for at least one first application to be output on the screen of the user device and settings for each of the at least one second application to be output on each screen of the at least one other user device can do.
또한, 상기 프로세서는 전환 지시 명령을 수신하는 경우, 상기 사용자 장치의 화면을 상기 사용자 장치의 제1 디폴트 화면에서 상기 전환 지시 명령을 기반으로 지시된 적어도 하나의 다른 사용자 장치 중 특정 다른 사용자 장치의 제2 디폴트 화면으로 전환하도록 구현되되, 상기 제1 디폴트 화면은 상기 멀티 스크린 설정을 기반으로 설정된 상기 적어도 하나의 제1 어플리케이션에 대한 출력 화면이고, 상기 제2 디폴트 화면은 상기 적어도 하나의 제2 어플리케이션 중 상기 멀티 스크린 설정을 기반으로 설정된 상기 특정 다른 사용자 장치에 설정된 적어도 하나의 특정 제2 어플리케이션에 대한 출력 화면일 수 있다.In addition, when receiving the switch instruction command, the processor may switch the screen of the user device from a first default screen of the user device to a specific one of at least one other user device instructed based on the
또한, 상기 프로세서는 상기 전환 지시 명령을 기반으로 상기 사용자 장치의 화면이 상기 제2 디폴트 화면으로 전환된 경우, 상기 적어도 하나의 특정 제2 어플리케이션에 대한 상기 출력 화면의 크기의 제어가 가능하도록 구현될 수 있다.The processor may be configured to control the size of the output screen for the at least one specific second application when the screen of the user apparatus is switched to the second default screen based on the switching instruction command .
또한, 상기 프로세서는 상기 전환 지시 명령을 기반으로 상기 사용자 장치의 화면이 상기 제2 디폴트 화면으로 전환된 경우, 상기 적어도 하나의 특정 제2 어플리케이션 중 적어도 하나의 어플리케이션에 대한 종료가 가능하도록 구현되고, 상기 적어도 하나의 어플리케이션이 종료된 경우, 상기 프로세서는 상기 종료된 적어도 하나의 어플리케이션의 개수에 따라 상기 종료된 적어도 하나의 어플리케이션을 제외한 상기 적어도 하나의 특정 제2 어플리케이션을 위한 화면 재배치를 수행하여 상기 제2 디폴트 화면을 재구성할 수 있다.Also, the processor may be configured to be able to terminate at least one application among the at least one specific second application when the screen of the user apparatus is switched to the second default screen based on the switching instruction command, Wherein if the at least one application is terminated, the processor performs screen relocation for the at least one specific second application except for the terminated at least one application according to the number of the terminated at least one application, 2 You can reconfigure the default screen.
또한, 상기 적어도 하나의 다른 사용자 장치 각각에 대한 정보는 상기 적어도 하나의 다른 사용자 장치 각각의 출력 정보를 포함하고, 상기 출력 정보는 상기 적어도 하나의 다른 사용자 장치 각각의 화면 크기 정보, 상기 적어도 하나의 다른 사용자 장치 각각의 가능한 해상도 정보를 포함할 수 있다.Also, the information for each of the at least one other user device may include output information for each of the at least one other user device, the output information may include information about the screen size of each of the at least one other user device, And may include possible resolution information for each of the other user devices.
또한, 상기 프로세서는 상기 출력 정보를 기반으로 상기 적어도 하나의 다른 사용자 장치 각각을 위한 통신 자원을 할당하고, 상기 통신 자원을 통해 상기 적어도 하나의 다른 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 영상 정보를 전송하도록 구현될 수 있다.The processor is further configured to: allocate communication resources for each of the at least one other user device based on the output information; generate image information for setting each of the at least one other user device to the multi- As shown in FIG.
상술한 본 발명의 일 측면에 따르면, 복수의 사용자 장치 각각에 구현된 디스플레이를 통해 멀티스크린을 구현함으로써 복수의 디스플레이가 사용자의 필요에 따라 다양하게 활용될 수 있다. According to an aspect of the present invention, a plurality of displays can be variously utilized according to a user's need by implementing a multi-screen through a display implemented in each of a plurality of user devices.
도 1은 본 발명의 실시예에 따른 복수의 화면을 통한 멀티 스크린 구현 방법을 나타낸 개념도이다.
도 2는 본 발명의 실시예에 따른 멀티 스크린 설정 방법을 나타낸 개념도이다.
도 3은 본 발명의 실시예에 따른 다른 사용자 장치의 디폴트 화면을 제어하는 방법을 나타낸 개념도이다.
도 4는 본 발명의 실시예에 따른 어플리케이션 애드(이동) 방법을 나타낸 개념도이다.
도 5는 본 발명의 실시예에 따른 입력 인터페이스 설정 방법을 나타낸 개념도이다.
도 6은 본 발명의 실시예에 따른 멀티 스크린을 통한 어플리케이션 실행 방법을 나타낸 순서도이다.
도 7은 본 발명의 실시예에 따른 복수의 다른 사용자 장치의 화면을 기반으로 멀티 스크린을 구현하는 방법을 나타낸 개념도이다.
도 8은 본 발명의 실시예에 따른 사용자 장치와 다른 사용자 장치 간의 네트워크 설정 방법을 나타낸 개념도이다.FIG. 1 is a conceptual diagram illustrating a multi-screen implementation method using a plurality of screens according to an embodiment of the present invention.
2 is a conceptual diagram illustrating a multi-screen setting method according to an embodiment of the present invention.
3 is a conceptual diagram illustrating a method of controlling a default screen of another user apparatus according to an embodiment of the present invention.
4 is a conceptual diagram illustrating an application add (moving) method according to an embodiment of the present invention.
5 is a conceptual diagram illustrating an input interface setting method according to an embodiment of the present invention.
6 is a flowchart illustrating a method of executing an application through a multi-screen according to an embodiment of the present invention.
7 is a conceptual diagram illustrating a method for implementing a multi-screen based on a screen of a plurality of other user apparatuses according to an embodiment of the present invention.
8 is a conceptual diagram illustrating a network setting method between a user apparatus and another user apparatus according to an embodiment of the present invention.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예와 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.The following detailed description of the invention refers to the accompanying drawings, which illustrate, by way of illustration, specific embodiments in which the invention may be practiced. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention are different, but need not be mutually exclusive. For example, certain features, structures, and characteristics described herein may be implemented in other embodiments without departing from the spirit and scope of the invention in connection with an embodiment. It is also to be understood that the position or arrangement of the individual components within each disclosed embodiment may be varied without departing from the spirit and scope of the invention. The following detailed description is, therefore, not to be taken in a limiting sense, and the scope of the present invention is to be limited only by the appended claims, along with the full scope of equivalents to which such claims are entitled, if properly explained. In the drawings, like reference numerals refer to the same or similar functions throughout the several views.
이하, 도면들을 참조하여 본 발명의 바람직한 실시예들을 보다 상세하게 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in more detail with reference to the drawings.
기존의 사용자 장치 간에 스크린을 공유하기 위해서는 제1 사용자 장치의 화면에서 출력되는 이미지를 제2 사용자 장치의 화면으로 미러링하는 방법이 사용되었다. 이러한 방법이 사용되는 경우, 작은 화면 상에서 출력되는 화면을 큰 화면 상에서 출력하여 볼 수는 있으나, 사용자의 의도에 따라 다양한 화면 구성은 불가능하다. 이하, 본 발명의 실시예에서는 사용자의 의도에 따라 복수의 사용자 장치 각각의 복수의 화면 각각을 통해 적어도 하나의 어플리케이션을 출력하는 방법에 대해 개시한다.
In order to share a screen between existing user devices, a method of mirroring an image output from a screen of a first user device to a screen of a second user device has been used. When this method is used, a screen output on a small screen can be displayed on a large screen, but various screen configurations are not possible according to the user's intention. Hereinafter, a method of outputting at least one application through each of a plurality of screens of each of a plurality of user equipments in accordance with an intention of a user will be described in an embodiment of the present invention.
도 1은 본 발명의 실시예에 따른 복수의 화면을 통한 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린 구현 방법(이하, '멀티 스크린 구현 방법'으로 총칭)을 나타낸 개념도이다. FIG. 1 is a conceptual diagram illustrating a multi-screen implementation method (hereinafter, referred to as a multi-screen implementation method) in which a plurality of screens are distributed among a plurality of screens and an input interface is shared according to an embodiment of the present invention.
도 1에서는 복수의 사용자 장치 각각의 화면 상에서 복수의 어플리케이션에 대한 화면을 출력하는 방법이 개시된다. 복수의 어플리케이션은 영상 컨텐츠 재생 프로그램, 웹 서칭 프로그램, 게임 프로그램 등 사용자 장치에서 실행 가능한 다양한 프로그램일 수 있다. 예를 들어, 제1 사용자 장치는 스마트 기기(스마트 폰, 스마트 패드 등)이고, 제2 사용자 장치는 디스플레이 장치일 수 있다.1, a method of outputting a screen for a plurality of applications on a screen of each of a plurality of user apparatuses is disclosed. The plurality of applications may be various programs that can be executed by a user apparatus such as an image content reproducing program, a web searching program, a game program, and the like. For example, the first user device may be a smart device (smart phone, smart pad, etc.), and the second user device may be a display device.
이하, 본 발명의 실시예에서는 제1 사용자 장치가 주 제어 장치이고, 제2 사용자 장치가 종속 제어 장치로 구분될 수 있다. 주 제어 장치는 적어도 하나의 어플리케이션에 대한 제어를 수행하고 적어도 하나의 어플리케이션에 대한 화면을 멀티 스크린 상에 출력하기 위한 멀티 스크린 설정을 수행하는 장치일 수 있다. 종속 제어 장치는 주 제어 장치에 의한 멀티스크린 설정에 따라 화면 상에 어플리케이션에 대한 화면을 출력하는 장치일 수 있다.Hereinafter, in an embodiment of the present invention, the first user device may be a main control device and the second user device may be classified as a slave control device. The main control device may be a device for performing multi-screen setting for controlling at least one application and outputting a screen for at least one application on a multi-screen. The slave control device may be a device for outputting a screen for the application on the screen in accordance with multi-screen setting by the main control device.
도 1의 (A)는 제1 사용자 장치와 제2 사용자 장치에서 미러링을 통해 동일한 어플리케이션이 실행되는 경우가 개시된다. 예를 들어, 제1 사용자 장치와 제2 사용자 장치는 유무선 네트워크를 통해 초기 연결을 설정할 수 있다. 제1 사용자 장치는 제1 사용자 장치의 화면 상에서 어플리케이션1을 출력하고 제2 사용자 장치의 화면 상에서도 어플리케이션1을 출력하기 위한 멀티스크린 설정을 수행할 수 있다. 이러한 멀티스크린 설정이 수행되는 경우, 제1 사용자 장치와 제2 사용자 장치 사이의 유무선 네트워크를 통해 제1 사용자 장치의 화면 상에서 출력되는 화면과 동일한 화면이 제2 사용자 장치 상에서 출력될 수 있다. 이하, 본 발명의 실시예에서는 제1 사용자 장치와 제2 사용자 장치가 무선 네트워크를 통해 연결된 경우가 가정된다. 1 (A) shows a case where the same application is executed through mirroring in the first user device and the second user device. For example, the first user device and the second user device may establish an initial connection over a wired or wireless network. The first user device can perform the multi-screen setting for outputting the application 1 on the screen of the first user device and outputting the application 1 on the screen of the second user device. When the multi-screen setting is performed, a screen identical to a screen displayed on the screen of the first user device through the wired / wireless network between the first user device and the second user device may be output on the second user device. Hereinafter, it is assumed that the first user device and the second user device are connected through a wireless network in the embodiment of the present invention.
즉, 제1 사용자 장치가 제2 사용자 장치와의 무선 네트워크를 설정하고 제1 사용자 장치의 화면 상에서 출력되는 화면을 미러링하여 제2 사용자 장치의 화면 상에서 출력되도록 제어할 수 있다. 구체적인 제1 사용자 장치와 제2 사용자 장치 간의 네트워크 설정 및 멀티 스크린 설정 방법은 후술한다.That is, the first user equipment sets a wireless network with the second user equipment, and mirrors the screen displayed on the screen of the first user equipment, and controls the screen to be output on the screen of the second user equipment. The network setting and multi-screen setting method between the first user device and the second user device will be described later.
제1 사용자 장치뿐만 아니라 제2 사용자 장치에도 어플리케이션1을 제어하기 위한 입력 인터페이스가 구현되어 있는 경우, 사용자는 제1 사용자 장치의 입력 인터페이스뿐만 아니라 제2 사용자 장치의 입력 인터페이스를 통해 어플리케이션1을 제어할 수도 있다.When an input interface for controlling the application 1 is implemented not only in the first user device but also in the second user device, the user controls the application 1 through the input interface of the second user device as well as the input interface of the first user device It is possible.
도 1의 (B)는 제1 사용자 장치와 제2 사용자 장치 각각의 화면 상에서 서로 다른 어플리케이션이 실행되는 경우가 개시한다.1 (B) shows a case where different applications are executed on the screens of the first user device and the second user device.
예를 들어, 제1 사용자 장치와 제2 사용자 장치는 유무선 네트워크를 통해 초기 연결을 수행할 수 있다. 제1 사용자 장치는 제1 사용자 장치 상에서 어플리케이션1 및 어플리케이션2을 실행하고, 멀티스크린 설정을 기반으로 제1 사용자 장치의 화면 상에서 어플리케이션1을 출력하고, 제2 사용자 장치의 화면 상에서 어플리케이션2를 출력할 수 있다.For example, the first user device and the second user device may perform an initial connection through a wired or wireless network. The first user device executes the application 1 and the
도 1의 (C)에서는 제1 사용자 장치와 제2 사용자 장치 각각에서 서로 다른 어플리케이션이 실행되는 경우가 개시된다. 특히, 도 1의 (C)에서는 특정 사용자 장치에서는 복수의 어플리케이션을 위한 화면이 출력되는 경우가 개시된다.1C, a case where different applications are executed in each of the first user device and the second user device is disclosed. Particularly, FIG. 1 (C) shows a case where a screen for a plurality of applications is output in a specific user apparatus.
예를 들어, 제1 사용자 장치와 제2 사용자 장치는 유무선 네트워크를 통해 초기 연결을 수행할 수 있다. 제1 사용자 장치는 제1 사용자 장치 상에서 어플리케이션1, 어플리케이션2 및 어플리케이션3을 실행하고, 멀티스크린 설정을 기반으로 제1 사용자 장치의 화면 상에서 어플리케이션1을 출력하고, 제2 사용자 장치의 화면 상에서 어플리케이션2 및 어플리케이션3을 출력할 수 있다.For example, the first user device and the second user device may perform an initial connection through a wired or wireless network. The first user device executes application 1,
도 1의 (D)에서는 제1 사용자 장치와 제2 사용자 장치 각각의 화면에서 복수의 어플리케이션이 출력되는 경우가 개시된다. 예를 들어, 제1 사용자 장치와 제2 사용자 장치는 유무선 네트워크를 통해 초기 연결을 수행할 수 있다. 제1 사용자 장치는 제1 사용자 장치 상에서 어플리케이션1, 어플리케이션2, 어플리케이션3 및 어플리케이션4를 실행하고, 멀티스크린 설정을 기반으로 제1 사용자 장치의 화면 상에서 어플리케이션1 및 어플리케이션2를 출력하고, 제2 사용자 장치의 화면 상에서 어플리케이션3 및 어플리케이션4를 출력할 수 있다.In FIG. 1 (D), a case where a plurality of applications are outputted from the screens of the first user device and the second user device is disclosed. For example, the first user device and the second user device may perform an initial connection through a wired or wireless network. The first user device executes
도 1에서는 설명의 편의상 2개의 사용자 장치를 기반으로 한 출력 화면의 미러링 및 확장 방법에 대해 개시하나, 2개 이상의 사용자 장치를 기반으로 한 출력 화면의 미러링 및 출력 화면의 확장이 수행될 수 있다. 예를 들어, 제1 사용자 장치는 주 제어 장치로 동작하여 어플리케이션1을 출력하고, 제1 사용자 장치는 주 제어 장치로 동작하여 어플리케이션1을 출력하고, 제2 사용자 장치는 종속 제어 장치로 동작하여 어플리케이션2 및 어플리케이션3을 출력하고, 제3 사용자 장치는 종속 제어 장치로 동작하여 어플리케이션4 및 어플리케이션5를 출력할 수 있다.Although FIG. 1 discloses a method for mirroring and expanding an output screen based on two user devices for convenience of description, mirroring of an output screen based on two or more user devices and expansion of an output screen can be performed. For example, the first user device operates as the main control device and outputs the application 1, the first user device operates as the main control device and outputs the application 1, and the second user device operates as the slave control device, 2 and the application 3, and the third user device can operate as the slave control device and output the application 4 and the application 5.
이러한 방법을 사용하는 경우, 가용한 복수의 사용자 장치를 통해 멀티 스크린이 구현될 수 있다.
When this method is used, multi-screens can be implemented through a plurality of available user devices.
도 2는 본 발명의 실시예에 따른 멀티 스크린 설정 방법을 나타낸 개념도이다.2 is a conceptual diagram illustrating a multi-screen setting method according to an embodiment of the present invention.
도 2에서는 복수의 사용자 장치 간에 멀티 스크린이 설정된 후 화면 제어 방법이 개시된다.In FIG. 2, a screen control method after multi-screens are set among a plurality of user equipments is disclosed.
도 2를 참조하면, 멀티 스크린이 설정된 경우, 주 제어 장치로 동작하는 제1 사용자 장치의 화면 상에 종속 제어 장치로 동작하는 다른 사용자 장치가 연결됨을 지시하고, 사용자 장치 간 화면 전환을 위한 전환 지시자(indicator)(230)가 위치할 수 있다. 전환 지시자(230)는 아이콘, 위젯 등 다양한 포맷을 가질 수 있다.Referring to FIG. 2, when a multi-screen is set, it is indicated that another user device operating as a slave control device is connected to a screen of a first user device operating as a main control device, an
전환 지시자(230)는 제1 사용자 장치의 화면과 제2 사용자 장치의 화면 간에 전환(스위칭)을 위해 사용될 수 있다. 사용자가 제1 사용자 장치의 화면 상에 위치한 전환 지시자(230)를 터치하는 경우, 제1 사용자 장치의 화면은 제1 사용자 장치의 디폴트 화면(210)에서 제2 사용자 장치의 디폴트 화면(220)으로 전환될 수 있다. 디폴트 화면은 멀티 스크린 설정을 기반으로 특정 사용자 장치의 화면에서 출력되도록 설정된 어플리케이션의 출력 화면일 수 있다.The switching
예를 들어, 멀티 스크린의 설정을 기반으로 제1 사용자 장치의 화면 상에서 어플리케이션1이 출력되고, 제2 사용자 장치의 화면 상에서 어플리케이션2 및 어플리케이션3이 출력되도록 설정된 경우가 가정될 수 있다. 이러한 경우, 제1 사용자 장치의 디폴트 화면(210)은 어플리케이션1의 출력 화면이고, 제2 사용자 장치의 디폴트 화면(220)은 어플리케이션2 및 어플리케이션3의 출력 화면일 수 있다. 사용자는 어플리케이션2 및 어플리케이션3을 출력하는 제2 사용자 장치의 화면을 제어하기 위해 어플리케이션1을 출력하는 제1 사용자 장치의 화면 상의 전환 지시자(230)를 클릭할 수 있다. 전환 지시자(230)가 클릭되는 경우, 제1 사용자 장치의 디폴트 화면(210)은 제2 사용자 장치의 디폴트 화면(220)으로 전환될 수 있다. 즉, 제1 사용자 장치의 화면 상에서 제2 사용자 장치의 디폴트 화면(220)인 어플리케이션2 및 어플리케이션3이 출력될 수 있다.For example, it can be assumed that the application 1 is output on the screen of the first user device based on the setting of the multi-screen, and the
사용자는 전환된 다른 사용자 장치의 디폴트 화면을 출력하는 제1 사용자 장치를 사용하여 다른 사용자 장치의 디폴트 화면을 제어할 수 있다. 주 제어 장치로 동작하는 특정 사용자 장치를 통해 다른 사용자 장치의 디폴트 화면을 제어하는 방법은 후술한다.The user can control the default screen of another user apparatus using the first user apparatus that outputs the default screen of the switched other user apparatus. A method of controlling a default screen of another user apparatus through a specific user apparatus operating as a main control apparatus will be described later.
도 2에서는 설명의 편의상 전환 지시자를 기반으로 제1 사용자 장치와 제2 사용자 장치의 디폴트 화면 간의 전환하는 방법에 대해 개시한다. 하지만, 2개 이상의 사용자 장치가 멀티스크린을 구현하는 경우, 전환 지시자는 2개 이상의 종속 사용자 장치 중 하나의 종속 사용자 장치의 디폴트 화면을 제어하기 위해 사용될 수 있다. 예를 들어, 제1 사용자 장치의 전환 지시자는 제1 사용자 장치의 종속 제어 장치로 동작하는 제2 사용자 장치 및 제3 사용자 장치 중 하나의 디폴트 화면을 제1 사용자 장치 상에 출력하기 위해 사용될 수 있다.2 illustrates a method for switching between a default screen of a first user device and a second user device based on a switching indicator for convenience of explanation. However, if two or more user devices implement multi-screen, the switch indicator may be used to control the default screen of one of the two or more dependent user devices. For example, the switch indicator of the first user equipment may be used to output a default screen of one of the second user equipment and the third user equipment acting as a slave control device of the first user equipment on the first user equipment .
사용자가 사용자 장치에서 다시 사용자 장치의 디폴트 화면을 출력하고자 하는 경우, 사용자는 사용자 장치의 전환 시지자(230)를 다시 터치하거나, 특정한 입력 신호(예를 들어, 화면 터치)를 사용자 장치로 입력하여 사용자 장치에서 출력되는 화면을 다른 사용자 장치의 디폴트 화면을 사용자 장치의 디폴트 화면으로 전환시킬 수 있다.
When the user wishes to output a default screen of the user device again from the user device, the user touches the change-
도 3은 본 발명의 실시예에 따른 다른 사용자 장치의 디폴트 화면을 제어하는 방법을 나타낸 개념도이다.3 is a conceptual diagram illustrating a method of controlling a default screen of another user apparatus according to an embodiment of the present invention.
도 3에서는 사용자 장치에서 출력되는 다른 사용자 장치의 디폴트 화면을 기반으로 다른 사용자 장치에서 출력되는 디폴트 화면을 제어하는 방법이 개시된다.3 illustrates a method of controlling a default screen output from another user apparatus based on a default screen of another user apparatus output from the user apparatus.
도 3의 (A)을 참조하면, 사용자 장치를 기반으로 다른 사용자 장치의 디폴트 화면 상에서 출력되는 어플리케이션을 위한 화면 사이즈가 제어될 수 있다. 구체적으로 사용자 장치의 화면을 사용하여 다른 사용자 장치의 화면 상에서 출력되는 복수의 어플리케이션 각각을 위한 화면 사이즈가 제어될 수 있다.Referring to FIG. 3 (A), a screen size for an application output on a default screen of another user apparatus based on the user apparatus can be controlled. Specifically, the screen size for each of a plurality of applications output on the screen of another user apparatus using the screen of the user apparatus can be controlled.
예를 들어, 제1 사용자 장치의 디폴트 화면은 어플리케이션1의 출력 화면이고 제2 사용자 장치의 디폴트 화면은 어플리케이션2(320) 및 어플리케이션3(330)의 출력 화면일 수 있다. 사용자는 제1 사용자 장치 상에 위치한 전환 지시자를 기반으로 어플리케이션1을 출력하는 제1 사용자 장치의 디폴트 화면을 전환하여 제1 사용자 장치의 화면 상에서 어플리케이션2(320) 및 어플리케이션3(330)을 출력하는 다른 사용자 장치의 디폴트 화면을 출력할 수 있다.For example, the default screen of the first user device may be the output screen of the application 1, and the default screen of the second user device may be the output screen of the
사용자는 제1 사용자 장치의 화면 상에서 출력되는 어플리케이션2(320) 및 어플리케이션3(330) 각각을 위한 화면의 크기를 제어함으로써 제2 사용자 장치의 화면 상에서 디폴트 화면으로서 출력되는 어플리케이션2(320) 및 어플리케이션3(330) 각각을 위한 화면의 크기를 제어할 수 있다. 예를 들어, 사용자가 디폴트 화면 전환 이후 제1 사용자 장치의 화면을 통해 어플리케이션3(330)을 위한 화면 사이즈를 더 증가시키는 경우, 제2 사용자 장치 상에서 출력되는 어플리케이션 3(330)을 위한 화면 사이즈가 증가될 수 있다.The user controls the size of the screen for each of the
도 3의 (B)을 참조하면, 사용자 장치를 기반으로 다른 사용자 장치의 디폴트 화면 상에서 출력되는 특정 어플리케이션을 위한 화면이 삭제될 수 있다. 구체적으로 사용자 장치의 화면을 사용하여 다른 사용자 장치의 화면 상에서 출력되는 적어도 하나의 어플리케이션을 위한 화면을 삭제할 수 있다.Referring to FIG. 3B, a screen for a specific application output on a default screen of another user apparatus based on the user apparatus may be deleted. Specifically, the screen of the user apparatus can be used to delete a screen for at least one application displayed on the screen of another user apparatus.
예를 들어, 제1 사용자 장치의 디폴트 화면은 어플리케이션1의 출력 화면이고 제2 사용자 장치의 디폴트 화면은 어플리케이션2(320) 및 어플리케이션3(330)의 출력 화면일 수 있다. 사용자는 제1 사용자 장치 상에 위치한 전환 지시자를 기반으로 어플리케이션1을 출력하는 제1 사용자 장치의 디폴트 화면을 전환하여 제1 사용자 장치의 화면 상에서 어플리케이션2(320) 및 어플리케이션3(330)을 출력하는 제2 사용자 장치의 디폴트 화면을 출력할 수 있다.For example, the default screen of the first user device may be the output screen of the application 1, and the default screen of the second user device may be the output screen of the
사용자는 제1 사용자 장치의 화면 상에서 출력되는 어플리케이션3(330)을 삭제함으로써 제2 사용자 장치의 디폴트 화면이 어플리케이션2(320)의 출력 화면이 되도록 설정할 수 있다.The user can set the default screen of the second user device to be the output screen of the
삭제 후 다른 사용자 장치의 화면 상에서 출력되는 어플리케이션의 개수가 1개이면 전체 화면 상에서 출력되도록 설정될 수도 있다. 삭제 후 다른 사용자 장치의 화면 상에서 출력되는 어플리케이션의 개수가 복수이면 복수개의 어플리케이션 각각을 위한 화면 사이즈가 동일한 크기로 전체 화면 상에서 출력되도록 설정되거나 사용자에 의한 별도의 화면 사이즈의 설정을 통해 결정된 화면 사이즈로 복수의 어플리케이션 각각이 출력되도록 설정될 수 있다.
And if the number of applications output on the screen of another user apparatus after deletion is one, it may be set to be output on the entire screen. If the number of applications output on the screen of another user apparatus after deletion is plural, the screen size for each of the plurality of applications may be set to be output on the entire screen with the same size, or may be set to a screen size determined through setting of a separate screen size by the user Each of the plurality of applications can be set to be output.
도 4는 본 발명의 실시예에 따른 어플리케이션 애드(이동) 방법을 나타낸 개념도이다. 4 is a conceptual diagram illustrating an application add (moving) method according to an embodiment of the present invention.
도시된 바와 같이, 사용자는 제1 사용자 장치에 디스플레이되고 있는 어플리케이션 프로그램들(App1~App4) 중 적어도 하나를 다른 사용자 장치로 이동시킬 수 있다. As shown, the user can move at least one of the application programs App1 ~ App4 displayed on the first user device to another user device.
이 때, 이동된 어플리케이션 프로그램(App2)은 제1 사용자 장치의 화면 상에서 삭제될 수도 있고, 그대로 유지될 수도 있을 것이다.At this time, the moved application program App2 may be deleted on the screen of the first user device or may be maintained as it is.
이러한 어플리케이션 프로그램(App2)의 이동 또는 애드는 제1 사용자 장치에 대한 사용자의 조작에 의해 수행되며, 이러한 조작은 드래그 조작, 메뉴 입력 조작, 설정 변경 조작 등 다양한 방법으로 수행될 수 있을 것이다.
The movement or addition of the application program App2 is performed by a user's operation with respect to the first user device, and this operation can be performed in various ways such as a drag operation, a menu input operation, a setting change operation and the like.
도 5는 본 발명의 실시예에 따른 입력 인터페이스 설정 방법을 나타낸 개념도이다.5 is a conceptual diagram illustrating an input interface setting method according to an embodiment of the present invention.
도 5에서는 사용자 장치를 통해 외부 입력 장치(400) 또는 사용자 장치 상의 입력 장치(이하, 내부 입력 장치(410))를 입력 인터페이스로 선택하는 방법이 개시된다. 예를 들어, 외부 입력 장치(400)는 키보드, 마우스, 터치패드, 조이스틱 등일 수 있고, 내부 입력 장치(410)는 사용자 장치에 구현된 입력 인터페이스일 수 있다.5, a method for selecting an
도 5를 참조하면, 사용자는 주 제어 장치로 동작하는 사용자 장치는 종속 제어 장치로 동작하는 다른 사용자 장치의 화면 상에서 출력되는 어플리케이션의 제어를 위해 입력 인터페이스를 선택할 수 있다.Referring to FIG. 5, a user operating a main control device may select an input interface for controlling an application output on a screen of another user device operating as a slave control device.
외부 입력 장치(400)가 연결된 경우, 사용자는 다른 사용자 장치의 화면 상에서 출력되는 어플리케이션의 제어를 위해 외부 입력 장치(400)를 선택할 수 있다. 또는 사용자는 다른 사용자 장치의 화면 상에서 출력되는 어플리케이션의 제어를 위해 내부 입력 장치(410)를 선택할 수도 있다.When the
사용자가 외부 입력 장치(400)를 선택한 경우, 사용자 장치 상의 화면은 유지되고 외부 입력 장치(400)로부터 입력 신호를 수신하여 다른 사용자 장치 상에서 출력되는 어플리케이션에 대한 제어를 수행할 수 있다.When the user selects the
사용자가 내부 입력 장치(410)를 선택한 경우, 사용자 장치 상의 화면에서 입력 인터페이스가 출력될 수 있다. 즉, 사용자 장치의 화면 상에서 입력 인터페이스가 출력되고, 사용자는 입력 인터페이스를 통해 입력 신호를 입력할 수 있다.
If the user selects the internal input device 410, the input interface may be output on the screen on the user device. That is, the input interface is output on the screen of the user device, and the user can input the input signal through the input interface.
도 6은 본 발명의 실시예에 다른 멀티 스크린을 통한 어플리케이션 실행 방법을 나타낸 순서도이다.6 is a flowchart illustrating a method of executing an application through a multi-screen according to an embodiment of the present invention.
도 6에서는 복수의 사용자 장치 각각의 화면을 통해 적어도 하나의 어플리케이션을 출력하는 멀티 스크린을 통한 화면 출력 방법이 개시된다.FIG. 6 illustrates a screen output method using a multi-screen for outputting at least one application through a screen of each of a plurality of user apparatuses.
도 6을 참조하면, 사용자 장치는 사용자 장치와 다른 사용자 장치가 네트워크를 통해 연결되었는지 여부를 결정할 수 있다(단계 S500).Referring to FIG. 6, the user device may determine whether the user device and another user device are connected through a network (step S500).
예를 들어, 사용자 장치와 다른 사용자 장치는 초기 연결 설정 절차를 통해 유선 네트워크 또는 무선 네트워크를 형성할 수 있다.For example, the user equipment and other user equipment may form a wired network or a wireless network through an initial connection establishment procedure.
사용자 장치와 다른 사용자 장치가 네트워크를 통해 연결되었는지 여부를 지시하는 메시지를 사용자 장치와 다른 사용자 장치의 화면 상에 출력한다(단계 S510).A message indicating whether the user apparatus and the other user apparatus are connected through the network is output on the screen of the user apparatus and the user apparatus (step S510).
사용자 장치와 다른 사용자 장치가 네트워크를 통해 연결된 경우, 연결 완료 메시지가 사용자 장치와 다른 사용자 장치의 화면 상에 출력될 수 있다. 사용자 장치와 다른 사용자 장치가 네트워크를 통해 연결되지 않은 경우, 연결 실패 메시지가 사용자 장치와 다른 사용자 장치의 화면 상에 출력될 수 있다. 네트워크 설정시 복수의 사용자 장치 중 주 제어 장치로 사용될 사용자 장치에 대한 선택이 수행될 수 있다. 이하, 사용자 장치가 주 제어 장치로 동작하고, 다른 사용자 장치가 종속 제어 장치로 동작하는 경우를 가정하여 설명한다.When the user apparatus and another user apparatus are connected through a network, a connection completion message may be output on the screen of the user apparatus and the other user apparatus. If the user device and another user device are not connected through the network, a connection failure message may be output on the screen of the user device and another user device. A selection can be made for a user device to be used as a main control device among a plurality of user devices in network setting. Hereinafter, it is assumed that the user apparatus operates as the main control apparatus and the other user apparatus operates as the slave control apparatus.
사용자 장치를 기반으로 한 멀티 스크린 설정이 수행된다(단계 S520).A multi-screen setting based on the user device is performed (step S520).
사용자 장치는 사용자 장치와 다른 사용자 장치의 화면 상에서 출력될 어플리케이션의 결정을 기반으로 멀티스크린 설정을 수행할 수 있다. 멀티스크린 설정은 도 1 내지 도 5에서 전술한 바와 같이 다양한 방법으로 수행될 수 있다. The user device may perform multi-screen setup based on the determination of the application to be output on the screen of the user device and other user devices. The multi-screen setting may be performed in various ways as described above with reference to Figs. 1-5.
입력 인터페이스 설정 절차를 수행한다(단계 S530).An input interface setting procedure is performed (step S530).
사용자 장치 및/또는 다른 사용자 장치의 화면 상에서 출력되는 어플리케이션의 제어를 위해 사용자 장치의 입력 인터페이스가 선택될 수 있다. The input interface of the user device may be selected for control of the application output on the screen of the user device and / or other user devices.
사용자 장치 및/또는 다른 사용자 장치에 외부 입력 인터페이스가 연결되어 있는 경우, 주 제어 장치로 동작하는 사용자 장치는 외부 입력 인터페이스의 사용 여부에 대한 정보를 입력받고 외부 입력 인터페이스의 사용 여부를 결정할 수 있다. 예를 들어 사용자는 외부 입력 인터페이스와 내부 입력 인터페이스 중 어떠한 입력 인터페이스를 사용할지 여부에 대한 결정을 하여 사용자 장치로 입력할 수 있다. 내부 입력 인터페이스와 외부 인터페이스가 모두 입력 인터페이스로서 설정될 수도 있다.When the external input interface is connected to the user device and / or another user device, the user device operating as the main control device may receive information on whether to use the external input interface and determine whether to use the external input interface. For example, the user can make a decision as to whether to use any of the external input interface and the internal input interface, and input the input to the user device. Both the internal input interface and the external interface may be set as the input interface.
내부 입력 인터페이스 및/또는 외부 입력 인터페이스 중 설정된 입력 인터페이스를 통해 입력된 입력 신호를 기반으로 사용자 장치 및/또는 다른 사용자 장치의 화면 상에서 출력되는 어플리케이션이 제어될 수 있다.
An application output on the screen of the user device and / or another user device based on the input signal input through the input interface set in the internal input interface and / or the external input interface can be controlled.
도 7은 본 발명의 실시예에 따른 복수의 다른 사용자 장치의 화면을 기반으로 멀티 스크린을 구현하는 방법을 나타낸 개념도이다.7 is a conceptual diagram illustrating a method for implementing a multi-screen based on a screen of a plurality of other user apparatuses according to an embodiment of the present invention.
도 7에서는 하나의 사용자 장치가 주 제어 장치로 동작하고 복수의 다른 사용자 장치가 종속 제어 장치로 동작하는 경우, 복수의 다른 사용자 장치의 화면을 통해 멀티 스크린을 구현하는 방법이 개시된다.7 illustrates a method of implementing a multi-screen through screens of a plurality of other user devices when one user device operates as a main control device and a plurality of other user devices operate as a slave control device.
도 7을 참조하면, 사용자 장치(600)는 사용자 장치(600)와 연결된 복수의 다른 사용자 장치에 대한 정보를 획득할 수 있다.Referring to FIG. 7, a
사용자 장치(600)와 복수의 다른 사용자 장치 각각이 직접적으로 네트워크를 형성할 수 있다.The
예를 들어, 사용자 장치(600)는 연결된 복수의 다른 사용자 장치 각각과 통신을 위한 시간 자원을 복수의 다른 사용자 장치 각각으로 할당할 수 있다. 다른 사용자 장치가 3개(제1 다른 사용자 장치(610), 제2 다른 사용자 장치(620) 및 제3 다른 사용자 장치(630))인 경우, 사용자 장치(600)는 제1 다른 사용자 장치(610)와의 통신을 위한 제1 시간 자원, 제2 다른 사용자 장치(620)와의 통신을 위한 제2 시간 자원, 제3 다른 사용자 장치(630)와의 통신을 위한 제3 시간 자원을 제1 다른 사용자 장치(610) 내지 제3 다른 사용자 장치(630) 각각으로 할당할 수 있다.For example, the
본 발명의 실시예에 따르면, 사용자 장치는 다른 사용자 장치의 하드웨어 정보(또는 출력 정보)를 기반으로 시간 자원을 서로 다르게 할당할 수 있다. 예를 들어, 사용자 장치는 복수의 다른 사용자 장치의 화면 크기 및/또는 설정된 해상도 정보를 기반으로 어플리케이션의 출력을 위한 데이터의 크기를 예측할 수 있다.According to an embodiment of the present invention, a user equipment can allocate time resources differently based on hardware information (or output information) of another user equipment. For example, the user device may estimate the size of data for output of the application based on the screen size of the plurality of other user devices and / or the set resolution information.
제1 다른 사용자 장치(610)가 가장 큰 화면, 제2 다른 사용자 장치(620)가 중간 화면, 제3 다른 사용자 장치(630)가 가장 작은 화면을 가진 경우, 사용자 장치는 제1 시간 자원을 가장 많이 할당하고, 제2 시간 자원을 제1 시간 자원과 제3 시간 자원의 중간 크기, 제3 시간 자원을 가장 적게 할당할 수 있다. 또한 사용자 장치(600)는 복수의 다른 사용자 장치 각각과의 채널 상태를 고려하여 채널 상태가 좋지 못한 다른 사용자 장치에 대해 상대적으로 더 큰 시간 자원을 할당할 수도 있다.If the first
시간 자원뿐만 아니라 서로 다른 주파수 자원이 다른 사용자 장치 각각으로 할당될 수도 있다. 예를 들어, 다른 사용자 장치의 하드웨어 정보(예를 들어, 화면 크기, 가능한 해상도, 가능한 통신 속도 등) 및 다른 사용자 장치와 사용자 장치(600) 간의 채널 상태 정보를 기반으로 서로 다른 주파수 자원이 다른 사용자 장치 각각으로 할당될 수도 있다.Not only time resources but also different frequency resources may be allocated to different user equipments. For example, based on hardware information (e.g., screen size, possible resolution, possible communication speed, etc.) of another user device and channel state information between another user device and
사용자 장치(600)는 다른 사용자 장치와 초기 결합시 다른 사용자 장치의 하드웨어 정보를 수신할 수 있다.
복수의 다른 사용자 장치 각각은 할당된 시간 자원 상에서 사용자 장치와의 통신을 통해 복수의 다른 사용자 장치 각각의 화면 상에 할당된 어플리케이션을 출력하기 위한 정보를 수신할 수 있다. Each of the plurality of other user apparatuses can receive information for outputting an application allocated on the screen of each of the plurality of other user apparatuses via communication with the user apparatus on the allocated time resource.
예를 들어, 사용자 장치(600)를 통해 제1 다른 사용자 장치(610)에서 어플리케이션1, 제2 다른 사용자 장치(620)에서 어플리케이션2, 제3 다른 사용자 장치(630)에서 어플리케이션3의 출력이 설정된 경우를 가정할 수 있다. 이러한 경우, 사용자 장치(600)는 제1 시간 자원을 통해 제1 다른 사용자 장치(610)로 어플리케이션1의 출력을 위한 데이터를 전송하고, 제2 시간 자원을 통해 제2 다른 사용자 장치(620)로 어플리케이션2의 출력을 위한 데이터를 전송하고, 제3 시간 자원을 통해 제3 다른 사용자 장치(630)로 어플리케이션3의 출력을 위한 데이터를 전송할 수 있다.For example, through the
복수의 다른 사용자 장치가 멀티 스크린을 구현하는 경우, 전환 지시자는 복수의 다른 사용자 장치 중 전환할 다른 사용자 장치를 지시하기 위해 사용될 수 있다. 예를 들어, 제1 다른 사용자 장치(610) 내지 제3 다른 사용자 장치(630)가 다른 사용자 장치로 사용되는 경우, 전환 지시자는 제1 다른 사용자 장치(610) 내지 제3 다른 사용자 장치(630)의 디폴트 화면 중 사용자 장치(600)의 화면을 전환하여 출력할 디폴트 화면을 선택하기 위해 사용될 수 있다.
When a plurality of different user devices implement multi-screen, the switch indicator may be used to indicate another user device to switch among the plurality of different user devices. For example, if the first
도 8은 본 발명의 실시예에 따른 사용자 장치와 다른 사용자 장치 간의 네트워크 설정 방법을 나타낸 개념도이다.8 is a conceptual diagram illustrating a network setting method between a user apparatus and another user apparatus according to an embodiment of the present invention.
도 8에서는 사용자 장치와 다른 사용자 장치 간의 초기 네트워크 설정에 대해 개시한다.8, an initial network setup between a user equipment and another user equipment is described.
도 8을 참조하면, 사용자 장치(700)는 다른 사용자 장치(750)의 화면을 멀티 스크린으로 사용하기 위해 초기 설정 요청 메시지(710)를 다른 사용자 장치(750)로 전송할 수 있다.Referring to FIG. 8, the
초기 설정 요청 메시지(710)는 다른 사용자 장치(750)로 멀티 스크린 설정을 요청하기 위한 메시지로서 사용자 장치(700)의 식별 정보, 사용자 장치(700)가 설정하고자 하는 멀티 스크린의 포맷에 대한 정보를 포함할 수 있다.The initial setting request message 710 is a message for requesting a multi-screen setting to another
다른 사용자 장치(750)는 초기 설정 요청 메시지(710)를 수신하고, 초기 설정 요청 메시지(710)에 대한 응답으로 초기 설정 응답 메시지(720)를 사용자 장치(700)로 전송할 수 있다. 다른 사용자 장치(750)는 사용자 장치(700)의 식별 정보 및 사용자 장치(700)가 설정하고자 하는 멀티 스크린의 포맷을 기반으로 사용자 장치(700)와 멀티 스크린 설정을 위한 네트워킹을 수행할지 여부를 결정할 수 있다.The
예를 들어, 다른 사용자 장치(750)는 탐지된 사용자 장치(700)의 식별자를 보고 멀티 스크린 설정을 위한 네트워킹을 허용할 사용자 장치(700)인지 여부를 확인하고 사용자 장치(700)와 멀티 스크린 설정을 위한 네트워킹을 수행할지 여부를 결정할 수 있다. 또한, 다른 사용자 장치(750)는 사용자 장치(700)가 설정하고자 하는 멀티 스크린의 포맷에 대한 지원이 가능하지 여부에 대해 판단하여 사용자 장치(700)와 멀티 스크린 설정을 위한 네트워킹을 수행할지 여부를 결정할 수 있다.For example, the
다른 사용자 장치(750)가 사용자 장치(700)와 멀티 스크린 설정을 위한 네트워킹의 수행을 결정한 경우, 전송되는 초기 설정 응답 메시지(720)는 다른 사용자 장치(750)의 하드웨어 정보(또는 출력 정보), 사용자 장치(700)와 다른 사용자 장치(750) 간의 채널 상태 정보를 포함할 수 있다.When the
다른 사용자 장치(750)의 하드웨어 정보(또는 출력 정보)는 다른 사용자 장치(750)의 가능한 해상도 정보, 다른 사용자 장치(750)의 화면 크기, 다른 사용자 장치(750)에서 출력 가능한 멀티 화면의 개수에 대한 정보 등을 포함할 수 있다. 채널 상태 정보는 초기 설정 요청 메시지를 기반으로 판단된 사용자 장치(700)와 다른 사용자 장치(750) 간의 채널 상태에 대한 정보를 포함할 수 있다. 하드웨어 정보는 출력 정보라는 용어로 표현될 수도 있다.The hardware information (or output information) of the
초기 설정 응답 메시지(720)를 수신한 사용자 장치(700)는 다른 사용자 장치(750)를 위한 시간 자원 및/또는 주파수 자원을 결정하고, 할당된 주파수 자원 및 시간 자원에 대한 정보를 자원 할당 메시지에 포함하여 다른 사용자 장치(750)로 전송할 수 있다. Upon receiving the initial setup response message 720, the
또한, 사용자 장치(700)는 할당된 자원 상에서 다른 사용자 장치(750)의 화면 상에서 어플리케이션의 출력을 위한 데이터(예를 들어, 영상 데이터)를 다른 사용자 장치(750)로 전송할 수 있다.In addition, the
다른 사용자 장치(750)는 자원 할당 메시지를 수신하고, 자원 할당 메시지에 포함된 자원 상에서 사용자 장치(700)로부터 어플리케이션의 출력을 위한 데이터를 수신할 수 있다.The
다른 사용자 장치(750)는 할당된 시간 자원을 고려하여 할당되지 않은 시간 자원 상에서는 파워 세이브 모드로 운영되어 통신 모듈의 전원을 오프 상태로 유지하고, 할당된 시간 자원 상에서만 액티브 모드로 운용되어 소비 전력을 절약할 수도 있다. The
도 8에서는 하나의 다른 사용자 장치를 가정하여 설명하였으나, 사용자 장치와 복수의 다른 사용자 장치를 통해 멀티 스크린이 구현되는 경우에도 동일한 방식으로 복수의 다른 사용자 장치 각각과 멀티 스크린의 설정을 위한 네트워킹을 수행할 수 있다.8, a multi-screen is implemented through a user apparatus and a plurality of different user apparatuses, networking for multi-screen setting is performed in the same manner with each of a plurality of other user apparatuses can do.
도 1 내지 도 8에서 전술한 멀티 스크린을 구현하는 방법을 사용자 장치의 프로세서를 기반으로 수행될 수 있다.The method for implementing the multi-screen described above with reference to FIGS. 1 to 8 may be performed based on the processor of the user apparatus.
이와 같은, 사용자 장치를 사용하여 멀티 스크린을 구현하는 방법은 애플리케이션으로 구현되거나 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.Such a method of implementing a multi-screen using a user device may be implemented in an application or may be implemented in the form of program instructions that can be executed through various computer components and recorded on a computer-readable recording medium. The computer-readable recording medium may include program commands, data files, data structures, and the like, alone or in combination.
상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거니와 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다.The program instructions recorded on the computer-readable recording medium may be ones that are specially designed and configured for the present invention and are known and available to those skilled in the art of computer software.
컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD 와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD-ROMs and DVDs, magneto-optical media such as floptical disks, media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like.
프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Examples of program instructions include machine language code such as those generated by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules for performing the processing according to the present invention, and vice versa.
이상에서는 실시예들을 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those skilled in the art that various changes and modifications may be made therein without departing from the spirit and scope of the invention as defined in the appended claims. It will be possible.
Claims (16)
제1 사용자 장치가 적어도 하나의 재2 사용자 장치 각각과 네트워크를 설정하는 단계;
상기 제1 사용자 장치가 상기 적어도 하나의 제2 사용자 장치 각각으로부터 상기 네트워크를 통해 상기 적어도 하나의 제2 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 정보를 수신하는 단계; 및
제1 사용자 장치가 상기 적어도 하나의 제2 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 멀티 스크린 설정을 수행하는 단계를 포함하고,
상기 멀티 스크린 설정은 상기 제1 사용자 장치의 화면에서 출력될 적어도 하나의 제1 어플리케이션에 대한 설정 및 상기 적어도 하나의 제2 사용자 장치의 화면 각각에서 출력될 적어도 하나의 제2 어플리케이션 각각에 대한 설정을 포함하며,
상기 제1 사용자 장치는,
상기 멀티 스크린 설정을 수행하는 단계에서 상기 입력 인터페이스가 복수로 마련되는 경우에, 상기 적어도 하나의 제2 사용자 장치의 화면에서 출력될 상기 적어도 하나의 제2 어플리케이션이 제어되도록 상기 복수의 입력 인터페이스 중 어느 하나의 입력 인터페이스를 선택하도록 하며,
상기 적어도 하나의 제2 사용자 장치 각각에 대한 정보는 상기 적어도 하나의 제2 사용자 장치 각각의 출력 정보를 포함하고,
상기 출력 정보는 상기 적어도 하나의 제2 사용자 장치 각각의 화면 크기 정보를 포함하고,
상기 제1 사용자 장치가 상기 출력 정보를 기반으로 상기 적어도 하나의 제2 사용자 장치 각각을 위한 통신 자원을 할당하는 단계; 및
상기 제1 사용자 장치가 상기 통신 자원을 통해 상기 적어도 하나의 제2 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 영상 정보를 전송하는 단계를 더 포함하며,
상기 제1 사용자 장치가 상기 통신 자원을 할당하는 단계는,
상기 통신 자원이 상기 제1 사용자 장치와 복수의 제2 사용자 장치 간의 통신을 위한 시간 자원이고, 상기 제1 사용자 장치가 상기 복수의 제2 사용자 장치로부터 각각의 화면 크기 정보를 수신하는 경우에, 상기 제1 사용자 장치가 상기 수신된 각각의 화면 크기 정보를 기반으로 상기 각각의 제2 사용자 장치의 화면 크기가 클수록 긴 시간 자원이 할당되도록 하는 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린 구현 방법.A multi-screen implementation method for distributing multiple screens and sharing an input interface among user devices,
Establishing a first user device with each of the at least one second user device;
Receiving information from each of the at least one second user device over the network to set each of the at least one second user device to the multi-screen; And
The first user device performing multi-screen setup to set each of the at least one second user device to the multi-screen,
Wherein the multi-screen setting comprises a setting for at least one first application to be output on the screen of the first user device and a setting for each of the at least one second application to be output on each screen of the at least one second user device ≪ / RTI &
Wherein the first user equipment comprises:
Wherein, in the step of performing the multi-screen setting, when the plurality of input interfaces are provided, the at least one second application to be outputted on the screen of the at least one second user apparatus is controlled To select one input interface,
Wherein the information for each of the at least one second user device comprises output information for each of the at least one second user device,
Wherein the output information includes screen size information of each of the at least one second user device,
The first user device allocating communication resources for each of the at least one second user device based on the output information; And
Further comprising transmitting the image information for the first user device to set each of the at least one second user device to the multi-screen through the communication resource,
Wherein the allocating the communication resources by the first user equipment comprises:
Wherein when the communication resource is a time resource for communication between the first user equipment and a plurality of second user equipment and the first user equipment receives respective screen size information from the plurality of second user equipment, Wherein the first user device allocates a long time resource according to a size of the screen of each second user device based on the received screen size information, A shared multi-screen implementation method.
상기 제1 사용자 장치가 상기 적어도 하나의 제2 사용자 장치 각각을 위한 입력 인터페이스를 결정하는 단계를 더 포함하는 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린 구현 방법.The method according to claim 1,
Further comprising the step of the first user device determining an input interface for each of the at least one second user device, wherein the plurality of screens are distributed among the user devices and the input interface is shared.
상기 제1 사용자 장치가 전환 지시 명령을 수신하는 경우, 상기 제1 사용자 장치의 화면이 상기 제1 사용자 장치의 제1 디폴트 화면에서 상기 전환 지시 명령을 기반으로 지시된 적어도 하나의 제2 사용자 장치 중 특정 제2 사용자 장치의 제2 디폴트 화면으로 전환되는 단계를 더 포함하되,
상기 제1 디폴트 화면은 상기 멀티 스크린 설정을 기반으로 설정된 상기 적어도 하나의 제1 어플리케이션에 대한 출력 화면이고,
상기 제2 디폴트 화면은 상기 적어도 하나의 제2 어플리케이션 중 상기 멀티 스크린 설정을 기반으로 설정된 상기 특정 제2 사용자 장치에 설정된 적어도 하나의 특정 제2 어플리케이션에 대한 출력 화면인 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린 구현 방법.The method according to claim 1,
Wherein when the first user equipment receives the switch instruction command, the screen of the first user equipment is displayed on the first default screen of the first user equipment, among the at least one second user equipment Switching to a second default screen of a particular second user device,
Wherein the first default screen is an output screen for the at least one first application based on the multi-screen setting,
Wherein the second default screen is an output screen for at least one specific second application set on the specific second user device based on the multi-screen setting of the at least one second application. A multi-screen implementation method for distributing screens and sharing an input interface.
상기 전환 지시 명령을 기반으로 상기 제1 사용자 장치의 화면이 상기 제2 디폴트 화면으로 전환된 경우, 상기 제1 사용자 장치를 기반으로 상기 적어도 하나의 특정 제2 어플리케이션에 대한 상기 출력 화면의 크기의 제어가 가능한 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린 구현 방법.5. The method of claim 4,
Controlling the size of the output screen for the at least one specific second application based on the first user device when the screen of the first user device is switched to the second default screen based on the switching instruction command, Wherein a plurality of screens are distributed among user devices and an input interface is shared.
상기 전환 지시 명령을 기반으로 상기 제1 사용자 장치의 화면이 상기 제2 디폴트 화면으로 전환된 경우, 상기 제1 사용자 장치를 기반으로 상기 적어도 하나의 특정 제2 어플리케이션 중 적어도 하나의 어플리케이션에 대한 종료가 가능하고,
상기 적어도 하나의 어플리케이션이 종료된 경우, 상기 제1 사용자 장치는 상기 종료된 적어도 하나의 어플리케이션의 개수에 따라 상기 종료된 적어도 하나의 어플리케이션을 제외한 상기 적어도 하나의 특정 제2 어플리케이션을 위한 화면 재배치를 수행하여 상기 제2 디폴트 화면을 재구성하는 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린 구현 방법.5. The method of claim 4,
Wherein when the screen of the first user device is switched to the second default screen based on the switching instruction command, the end of at least one of the at least one specific second application based on the first user device If possible,
When the at least one application is terminated, the first user equipment performs screen relocation for the at least one specific second application except for the terminated at least one application according to the number of the terminated at least one application Wherein the second default screen is reconfigured to distribute a plurality of screens and share an input interface among user devices.
상기 사용자 장치는 프로세서를 포함하고,
상기 프로세서는 적어도 하나의 다른 사용자 장치 각각과 네트워크를 설정하고,
상기 적어도 하나의 다른 사용자 장치 각각으로부터 상기 네트워크를 통해 상기 적어도 하나의 다른 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 정보를 수신하고,
상기 적어도 하나의 다른 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 멀티 스크린 설정을 수행하도록 구현되며,
상기 멀티 스크린 설정은 상기 사용자 장치의 화면에서 출력될 적어도 하나의 제1 어플리케이션에 대한 설정 및 상기 적어도 하나의 다른 사용자 장치의 화면 각각에서 출력될 적어도 하나의 제2 어플리케이션 각각에 대한 설정을 포함하고,
상기 사용자 장치는,
상기 멀티 스크린 설정을 수행하는 경우에 상기 입력 인터페이스가 복수로 마련되면, 상기 적어도 하나의 다른 사용자 장치의 화면에서 출력될 상기 적어도 하나의 제2 어플리케이션이 제어되도록 상기 복수의 입력 인터페이스 중 어느 하나의 입력 인터페이스를 선택하도록 하며,
상기 적어도 하나의 다른 사용자 장치 각각에 대한 정보는 상기 적어도 하나의 다른 사용자 장치 각각의 출력 정보를 포함하고,
상기 출력 정보는 상기 적어도 하나의 다른 사용자 장치 각각의 화면 크기 정보를 포함하며,
상기 프로세서는 상기 출력 정보를 기반으로 상기 적어도 하나의 다른 사용자 장치 각각을 위한 통신 자원을 할당하고,
상기 통신 자원을 통해 상기 적어도 하나의 다른 사용자 장치 각각을 상기 멀티 스크린으로 설정하기 위한 영상 정보를 전송하도록 구현되고,
상기 프로세서는,
상기 통신 자원이 상기 사용자 장치와 복수의 다른 사용자 장치 간의 통신을 위한 시간 자원이고, 상기 사용자 장치가 상기 복수의 다른 사용자 장치로부터 각각의 화면 크기 정보를 수신하는 경우에, 상기 수신된 각각의 화면 크기 정보를 기반으로 상기 각각의 다른 사용자 장치의 화면 크기가 클수록 긴 시간 자원이 할당되도록 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린을 구현하는 사용자 장치.A user apparatus for implementing a multi-screen in which a plurality of screens are distributed among user devices and an input interface is shared,
The user device comprising a processor,
The processor establishes a network with each of the at least one other user device,
Receiving information from each of the at least one other user device over the network to set each of the at least one other user device to the multi-screen,
Screen setup for setting each of the at least one other user device to the multi-screen,
Wherein the multi-screen setting comprises settings for at least one first application to be output on the screen of the user device and settings for each of the at least one second application to be output on each screen of the at least one other user device,
The user device comprising:
Wherein when the plurality of input interfaces are provided in the case of performing the multi-screen setting, the at least one second application to be outputted on the screen of the at least one other user apparatus is controlled so that any one of the plurality of input interfaces Interface,
Wherein the information for each of the at least one other user device comprises output information for each of the at least one other user device,
Wherein the output information includes screen size information of each of the at least one other user device,
Wherein the processor is configured to allocate communication resources for each of the at least one other user device based on the output information,
And to transmit image information for setting each of the at least one other user device to the multi-screen through the communication resource,
The processor comprising:
Wherein when the communication resource is a time resource for communication between the user device and a plurality of other user devices and the user device receives respective screen size information from the plurality of other user devices, A plurality of screens for distributing a plurality of screens and sharing an input interface among the plurality of user devices for allocating long time resources as the screen sizes of the respective other user devices are increased based on the information.
상기 프로세서는 상기 적어도 하나의 다른 사용자 장치 각각을 위한 입력 인터페이스를 결정하도록 구현되는 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린을 구현하는 사용자 장치.10. The method of claim 9,
Wherein the processor is configured to determine an input interface for each of the at least one other user device, wherein the processor is configured to distribute multiple screens among the user devices and share an input interface.
상기 프로세서는 전환 지시 명령을 수신하는 경우, 상기 사용자 장치의 화면을 상기 사용자 장치의 제1 디폴트 화면에서 상기 전환 지시 명령을 기반으로 지시된 적어도 하나의 다른 사용자 장치 중 특정 다른 사용자 장치의 제2 디폴트 화면으로 전환하도록 구현되되,
상기 제1 디폴트 화면은 상기 멀티 스크린 설정을 기반으로 설정된 상기 적어도 하나의 제1 어플리케이션에 대한 출력 화면이고,
상기 제2 디폴트 화면은 상기 적어도 하나의 제2 어플리케이션 중 상기 멀티 스크린 설정을 기반으로 설정된 상기 특정 다른 사용자 장치에 설정된 적어도 하나의 특정 제2 어플리케이션에 대한 출력 화면인 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린을 구현하는 사용자 장치.10. The method of claim 9,
Wherein the processor is configured to, when receiving a switch instruction command, to switch a screen of the user device from a first default screen of the user device to a second default of at least one other user device, Screen,
Wherein the first default screen is an output screen for the at least one first application based on the multi-screen setting,
Wherein the second default screen is an output screen for at least one specific second application set on the specific other user device based on the multi-screen setting of the at least one second application. And sharing the input interface.
상기 프로세서는 상기 전환 지시 명령을 기반으로 상기 사용자 장치의 화면이 상기 제2 디폴트 화면으로 전환된 경우, 상기 적어도 하나의 특정 제2 어플리케이션에 대한 상기 출력 화면의 크기의 제어가 가능하도록 구현되는 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린을 구현하는 사용자 장치.13. The method of claim 12,
Wherein the processor is configured to control the size of the output screen for the at least one specific second application when the screen of the user device is switched to the second default screen based on the switching instruction command Wherein the user interface device shares multiple screens and shares an input interface among the plurality of user devices.
상기 프로세서는 상기 전환 지시 명령을 기반으로 상기 사용자 장치의 화면이 상기 제2 디폴트 화면으로 전환된 경우, 상기 적어도 하나의 특정 제2 어플리케이션 중 적어도 하나의 어플리케이션에 대한 종료가 가능하도록 구현되고,
상기 적어도 하나의 어플리케이션이 종료된 경우, 상기 프로세서는 상기 종료된 적어도 하나의 어플리케이션의 개수에 따라 상기 종료된 적어도 하나의 어플리케이션을 제외한 상기 적어도 하나의 특정 제2 어플리케이션을 위한 화면 재배치를 수행하여 상기 제2 디폴트 화면을 재구성하는 것을 특징으로 하는 사용자 장치 간에 여러 화면을 분배하고 입력 인터페이스를 공유하는 멀티 스크린을 구현하는 사용자 장치.13. The method of claim 12,
Wherein the processor is configured to be able to terminate at least one application of the at least one specific second application when the screen of the user device is switched to the second default screen based on the switching instruction command,
Wherein if the at least one application is terminated, the processor performs screen relocation for the at least one specific second application except for the terminated at least one application according to the number of the terminated at least one application, Wherein the default screen is reconfigured to distribute a plurality of screens and share an input interface among user devices.
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020150031353A KR101594105B1 (en) | 2015-03-06 | 2015-03-06 | The method and apparatus for implementing multy-screen by distributing screen and sharing input interface between user equipments |
| US14/703,090 US20160259611A1 (en) | 2015-03-06 | 2015-05-04 | Method and apparatus for implementing a multi-screen system |
| EP15178467.5A EP3065047A3 (en) | 2015-03-06 | 2015-07-27 | Method and apparatus for implementing multi-screen by distributing screen and sharing input interface between user |
| CN201510484867.3A CN106201389A (en) | 2015-03-06 | 2015-08-07 | Distribute picture between user's set and share multi-screen implementation method and the device at interface |
| JP2015158885A JP2016164769A (en) | 2015-03-06 | 2015-08-11 | Method for implementing multi-screen by distributing plural screens and sharing input interface between user apparatuses, and user apparatuses for setting up as multi-screen |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020150031353A KR101594105B1 (en) | 2015-03-06 | 2015-03-06 | The method and apparatus for implementing multy-screen by distributing screen and sharing input interface between user equipments |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR101594105B1 true KR101594105B1 (en) | 2016-02-16 |
Family
ID=53762009
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020150031353A KR101594105B1 (en) | 2015-03-06 | 2015-03-06 | The method and apparatus for implementing multy-screen by distributing screen and sharing input interface between user equipments |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US20160259611A1 (en) |
| EP (1) | EP3065047A3 (en) |
| JP (1) | JP2016164769A (en) |
| KR (1) | KR101594105B1 (en) |
| CN (1) | CN106201389A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20220029222A (en) * | 2020-09-01 | 2022-03-08 | 이용제 | Method and apparatus for providing a plurality of user screen sharing services using multi terminals |
| WO2022215910A1 (en) * | 2021-04-06 | 2022-10-13 | 삼성전자 주식회사 | Screen sharing method and electronic device therefor |
| WO2023229364A1 (en) * | 2022-05-25 | 2023-11-30 | Samsung Electronics Co., Ltd. | Multi-view resource allocation method and apparatus |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10719289B2 (en) * | 2015-11-05 | 2020-07-21 | Topcon Positioning Systems, Inc. | Monitoring and control display system and method using multiple displays in a work environment |
| CN108984444A (en) * | 2017-06-05 | 2018-12-11 | 聪泰科技开发股份有限公司 | Adjustable interface conversion method |
| CN108829304A (en) * | 2018-05-29 | 2018-11-16 | 维沃移动通信有限公司 | A kind of display control method and terminal |
| FR3083041B1 (en) * | 2018-06-21 | 2023-05-12 | Amadeus Sas | SYNCHRONIZATION OF INTER-DEVICE DISPLAYS |
| CN113050841A (en) * | 2019-12-26 | 2021-06-29 | 华为技术有限公司 | Method, electronic equipment and system for displaying multiple windows |
| US11330026B1 (en) * | 2021-07-31 | 2022-05-10 | Zoom Video Communications, Inc. | Concurrent screen sharing by multiple users within a communication session |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20080057187A (en) | 2006-12-18 | 2008-06-24 | 삼성전자주식회사 | Method and apparatus for multiscreen management for multiple screen configuration |
| KR20120124843A (en) * | 2011-05-04 | 2012-11-14 | 주식회사 인프라웨어테크놀러지 | Method for executing clone applications, computer readable recording medium for the same, and clone devices for the same |
| KR20140086790A (en) * | 2012-12-28 | 2014-07-08 | 삼성전자주식회사 | Method and system for executing application |
| KR20140140427A (en) * | 2013-05-29 | 2014-12-09 | 서울대학교산학협력단 | Method of calculating optimal solution of system resource management for n-screen service, apparatus performing the same and storage media storing the same |
| US20150061970A1 (en) * | 2013-08-29 | 2015-03-05 | Samsung Electronics Co., Ltd. | Method for sharing screen and electronic device thereof |
Family Cites Families (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06124185A (en) * | 1992-10-12 | 1994-05-06 | Sharp Corp | Multiwindow plotting managing device |
| JP2000035847A (en) * | 1998-07-17 | 2000-02-02 | Sharp Corp | Multiple screen controllable information processor |
| JP4954026B2 (en) * | 2007-11-12 | 2012-06-13 | 株式会社コンテック | PC image distribution equipment |
| US20100045567A1 (en) * | 2008-08-19 | 2010-02-25 | Lin Frank C H | Systems and methods for facilitating presentation |
| CN102207813A (en) * | 2010-03-31 | 2011-10-05 | 宏碁股份有限公司 | Multi-screen electronic device and operating method thereof |
| JP5948764B2 (en) * | 2011-01-31 | 2016-07-06 | 株式会社リコー | Screen sharing apparatus, screen sharing method, and program |
| KR101080674B1 (en) * | 2011-03-09 | 2011-11-08 | (주)자람테크놀로지 | Input interface providing usb apparatus and interface providing method |
| JP5259772B2 (en) * | 2011-05-27 | 2013-08-07 | 株式会社東芝 | Electronic device, operation support method, and program |
| US8786517B2 (en) * | 2012-02-21 | 2014-07-22 | Blackberry Limited | System and method for displaying a user interface across multiple electronic devices |
| EP4164203A1 (en) * | 2012-09-10 | 2023-04-12 | Samsung Electronics Co., Ltd. | Method for connecting mobile terminal and external display and apparatus implementing the same |
| KR20140085048A (en) * | 2012-12-27 | 2014-07-07 | 삼성전자주식회사 | Multi display device and method for controlling thereof |
| US20140351722A1 (en) * | 2013-05-23 | 2014-11-27 | Microsoft | User interface elements for multiple displays |
| US9588677B2 (en) * | 2014-01-03 | 2017-03-07 | Verizon Patent And Licensing Inc. | Systems and methods for touch-screen-based remote interaction with a graphical user interface |
-
2015
- 2015-03-06 KR KR1020150031353A patent/KR101594105B1/en active IP Right Grant
- 2015-05-04 US US14/703,090 patent/US20160259611A1/en not_active Abandoned
- 2015-07-27 EP EP15178467.5A patent/EP3065047A3/en not_active Withdrawn
- 2015-08-07 CN CN201510484867.3A patent/CN106201389A/en not_active Withdrawn
- 2015-08-11 JP JP2015158885A patent/JP2016164769A/en active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20080057187A (en) | 2006-12-18 | 2008-06-24 | 삼성전자주식회사 | Method and apparatus for multiscreen management for multiple screen configuration |
| KR20120124843A (en) * | 2011-05-04 | 2012-11-14 | 주식회사 인프라웨어테크놀러지 | Method for executing clone applications, computer readable recording medium for the same, and clone devices for the same |
| KR20140086790A (en) * | 2012-12-28 | 2014-07-08 | 삼성전자주식회사 | Method and system for executing application |
| KR20140140427A (en) * | 2013-05-29 | 2014-12-09 | 서울대학교산학협력단 | Method of calculating optimal solution of system resource management for n-screen service, apparatus performing the same and storage media storing the same |
| US20150061970A1 (en) * | 2013-08-29 | 2015-03-05 | Samsung Electronics Co., Ltd. | Method for sharing screen and electronic device thereof |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20220029222A (en) * | 2020-09-01 | 2022-03-08 | 이용제 | Method and apparatus for providing a plurality of user screen sharing services using multi terminals |
| KR102382660B1 (en) * | 2020-09-01 | 2022-04-05 | 이용제 | Method and apparatus for providing a plurality of user screen sharing services using multi terminals |
| WO2022215910A1 (en) * | 2021-04-06 | 2022-10-13 | 삼성전자 주식회사 | Screen sharing method and electronic device therefor |
| WO2023229364A1 (en) * | 2022-05-25 | 2023-11-30 | Samsung Electronics Co., Ltd. | Multi-view resource allocation method and apparatus |
Also Published As
| Publication number | Publication date |
|---|---|
| EP3065047A2 (en) | 2016-09-07 |
| CN106201389A (en) | 2016-12-07 |
| US20160259611A1 (en) | 2016-09-08 |
| EP3065047A3 (en) | 2016-09-21 |
| JP2016164769A (en) | 2016-09-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101594105B1 (en) | The method and apparatus for implementing multy-screen by distributing screen and sharing input interface between user equipments | |
| AU2014201293B2 (en) | Multi-input control method and system, and electronic device supporting the same | |
| TWI538499B (en) | Universal environment extender, transmitter and universal environment extender sysetm thereof | |
| CN110602805B (en) | Information processing method, first electronic device and computer system | |
| KR102310780B1 (en) | Service providing apparatus and method for web application, user equipment for the same | |
| KR102078867B1 (en) | Method for managing control right, client device thereof, and master device thereof | |
| CA2961216C (en) | Presentation of computing environment on multiple devices | |
| WO2013111239A1 (en) | Mobile terminal, television broadcast receiver, and device linkage method | |
| CN104685487A (en) | Sharing content with nearby devices | |
| US9906981B2 (en) | Method and system for dynamic regulation and control of Wi-Fi scans | |
| WO2017032080A1 (en) | Method and device for address book control and mobile terminal | |
| JP2016530628A (en) | Application test system and application test method | |
| CN105100150B (en) | Cloud desktop migration method and device and distributed cloud desktop system | |
| US11349976B2 (en) | Information processing method, file transmission method, electronic apparatus, and computing apparatus | |
| US10425801B2 (en) | Method and device for providing contents in communication system | |
| CN111245854A (en) | Media transmission method, media control method and device | |
| KR102115076B1 (en) | Data manipulation control method and system and user terminal | |
| US9986499B1 (en) | Location-based determination of channel for initiating peer-to-peer session | |
| KR101078349B1 (en) | Device for supporting Multi Network Interface Switching And Method using the same | |
| CN110178353A (en) | Method for processing business, Cloud Server and terminal device | |
| CN110457522B (en) | Information sharing method and device, terminal and storage medium | |
| US10038750B2 (en) | Method and system of sharing data and server apparatus thereof | |
| CN104135519B (en) | Method, participant system end, participant end and the system that conferencing resource is shared | |
| CN103201727A (en) | Method for dynamically allocating an external peripheral to device application | |
| KR20200021735A (en) | Manage control of mirroring services that expose multiple devices to a one screen |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20190131 Year of fee payment: 4 |