WO2023042950A1 - 디스플레이 장치 및 그의 동작 방법 - Google Patents

디스플레이 장치 및 그의 동작 방법 Download PDF

Info

Publication number
WO2023042950A1
WO2023042950A1 PCT/KR2021/013226 KR2021013226W WO2023042950A1 WO 2023042950 A1 WO2023042950 A1 WO 2023042950A1 KR 2021013226 W KR2021013226 W KR 2021013226W WO 2023042950 A1 WO2023042950 A1 WO 2023042950A1
Authority
WO
WIPO (PCT)
Prior art keywords
portable device
image
screen sharing
display device
terminal
Prior art date
Application number
PCT/KR2021/013226
Other languages
English (en)
French (fr)
Inventor
석상인
신성은
구윤희
장기정
이승훈
이강일
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of WO2023042950A1 publication Critical patent/WO2023042950A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/32—Monitoring with visual or acoustical indication of the functioning of the machine
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W84/00—Network topologies
    • H04W84/02—Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10—Small scale networks; Flat hierarchical networks
    • H04W84/12—WLAN [Wireless Local Area Networks]

Definitions

  • the present invention relates to a display device and an operating method thereof.
  • the PC screen needs to be shared on a separate large display device.
  • Individuals may want to share the screen with a large display device in order to see a larger screen, or may want to share the screen of a personal laptop in a common space such as a conference room so that several people can view one screen together.
  • the screen sharing method using the existing HDMI cable or Miracast of the PC cannot provide better convenience to the user.
  • the PC basically provides a screen sharing function using Miracast.
  • the Miracast screen sharing method is a technology that transmits the screen using the PC's WIFI-Direct, so it can be used only when the PC and the display device are connected via WIFI.
  • An object of the present disclosure is to provide a method for sharing a PC screen in a wireless environment without using a wired cable, without restricting the use of Wi-Fi on a PC, and providing a convenient method for installing a screen sharing program.
  • An object of the present disclosure is to facilitate sequential or simultaneous sharing of multiple PC screens.
  • a display device performs wireless communication with a display unit, a first portable device connected to a first terminal displaying a first image, or a second portable device connected to a second terminal displaying a second image.
  • a screen sharing request is received from the wireless communication unit and the first portable device, it is determined whether a management mode for managing screen sharing of the second portable device connected to the second terminal is activated, and the management of the second portable device is activated.
  • the mode is activated, it is determined whether screen sharing permission is received from the second portable device, and when the screen sharing permission is received, the first image data corresponding to the first image is received from the portable device. and a controller displaying a first mirroring image on the display unit based on the received first image data.
  • the screen of a terminal can be shared with a display device having a large screen in a wireless environment without a separate wired cable.
  • the order of composing all screens in the multi-screen sharing mode can be changed or the screen of a specific portable device can be canceled.
  • the portable device since the portable device itself transmits the video/audio data of the terminal to the display device, a separate module for data transmission is not required, thereby reducing costs and simplifying the configuration of the device.
  • FIG. 1 is a diagram illustrating the configuration of a screen sharing system according to an embodiment of the present disclosure.
  • FIG. 2 is a block diagram illustrating a configuration of a terminal according to an embodiment of the present disclosure.
  • FIG. 3 is a block diagram illustrating a configuration of a portable device according to an embodiment of the present disclosure.
  • FIG. 4 is a block diagram illustrating a configuration of a display device according to an exemplary embodiment of the present disclosure.
  • FIG. 5 is a ladder diagram illustrating an operating method of a screen sharing system according to an embodiment of the present disclosure.
  • FIG. 6 is a diagram illustrating a pop-up window prompting installation of a screen sharing program according to an embodiment of the present disclosure.
  • FIG. 7 is a ladder diagram illustrating an operating method of a screen sharing system according to another embodiment of the present disclosure.
  • 8 to 10 are diagrams illustrating examples of providing a screen sharing service through one of two portable devices.
  • FIG. 11 is a flowchart illustrating a process of changing an operation mode of a portable device from a single screen sharing mode to a multi screen sharing mode according to an embodiment of the present disclosure.
  • FIGS 12 to 14 are diagrams related to scenarios in which a plurality of screens are shared through a plurality of portable devices.
  • a display device is, for example, an intelligent display device in which a computer support function is added to a broadcast reception function, and an Internet function is added while being faithful to the broadcast reception function, such as a handwriting input device, a touch screen Alternatively, a more user-friendly interface such as a space remote control may be provided.
  • a more user-friendly interface such as a space remote control may be provided.
  • functions such as e-mail, web browsing, banking, or game can be performed.
  • a standardized universal OS can be used for these various functions.
  • the display device may be, for example, a network TV, an HBBTV, a smart TV, an LED TV, an OLED TV, and the like, and may also be applied to a smartphone in some cases.
  • the screen sharing system 1 may include a terminal 100 , a portable device 200 , and a display device 300 .
  • the terminal 100 may be a computer such as a PC or a notebook, but this is only an example.
  • the terminal 100 and the portable device 200 may be connected wirelessly or wired.
  • the terminal 100 and the portable device 200 may be connected to each other through the USB standard.
  • Each of the portable device 200 and the terminal 100 may be configured in plurality.
  • the portable device 200 is a dongle type and can be connected to the terminal 100 through a Universal Serial Bus (USB) standard.
  • USB Universal Serial Bus
  • the display device 300 may be a TV.
  • the portable device 200 and the display device 300 may communicate through Wi-Fi standards.
  • FIG. 2 is a block diagram illustrating a configuration of a terminal according to an embodiment of the present disclosure.
  • a terminal 100 may include a communication interface 110, an external input interface 120, a display 130, a memory 140, and a processor 190. .
  • the communication interface 110 may perform wired or wireless communication with an external device.
  • the communication interface 110 may include Wi-Fi and Bluetooth modules.
  • the external input interface 120 may receive data and information from an external device.
  • the external input interface 120 may receive data necessary for installing a screen sharing program from the input/output interface 220 of the portable device 200 .
  • the external input interface 120 may provide a connection path between the terminal 100 and an external device.
  • the external input interface 120 may include a plurality of external input terminals.
  • the plurality of external input terminals may include an RGB terminal, one or more High Definition Multimedia Interface (HDMI) terminals, and component terminals.
  • HDMI High Definition Multimedia Interface
  • the display 130 may display an image.
  • the memory 140 may store programs for processing and controlling each signal in the processor 190, and may store signal-processed video, audio, or data signals.
  • the processor 190 may control overall operations of the terminal 100 .
  • FIG. 3 is a block diagram illustrating a configuration of a portable device according to an embodiment of the present disclosure.
  • the portable device 200 may include a wireless communication interface 210, an input/output interface 220, a user input interface 230, a memory 240, an LED 250, and a microcomputer 290.
  • the wireless communication interface 210 may perform wireless communication with the display device 300 .
  • the wireless communication interface 210 may perform wireless communication with the display device 300 through Wi-Fi standards.
  • the wireless communication interface 210 may include a Wi-Fi module.
  • the input/output interface 220 may provide a connection path with the terminal 100 through the USB standard.
  • User input interface 230 may include one or more physical buttons. The button can be used to switch to screen sharing mode, multi screen sharing mode, and single screen sharing mode.
  • the memory 240 may store a screen sharing program and data necessary for installing the screen sharing program.
  • the LED 250 may output a specific color to indicate a screen sharing state with the display device 300 .
  • the LED 250 When the portable device 200 is in a connection standby state (screen sharing state) with the display device 300, the LED 250 outputs a light green color, and when in a connection state (screen sharing state), the LED 250 outputs a green color, and when the connection is in an unstable state, the LED 250 can output a red color.
  • the microcomputer 290 may control overall operations of the portable device 200 .
  • FIG. 4 is a block diagram illustrating a configuration of a display device according to an exemplary embodiment of the present disclosure.
  • the display device 300 may include a wireless communication unit 310 , a memory 320 , a display unit 330 , an audio output unit 340 and a controller 390 .
  • the wireless communication unit 310 may perform wireless communication with the portable device 200 .
  • the wireless communication unit 310 may communicate with the portable device 200 through Wi-Fi or Wi-Fi Direct standards.
  • the memory 320 may store a screen sharing control program.
  • the screen sharing control program may be a program that decodes video data received from the portable device 200 and controls output of a mirroring video based on the decoded data.
  • the display unit 330 may display an image signal, a data signal, and an OSD signal processed by the controller 190 .
  • the audio output unit 340 may output an audio signal.
  • the controller 390 may control overall operations of the display device 300 .
  • FIG. 5 is a ladder diagram illustrating an operating method of a screen sharing system according to an embodiment of the present disclosure.
  • the terminal 100 determines whether a screen sharing program is installed (S503).
  • the terminal 100 may be connected to the input/output interface 220 of the portable device 200 through the external input interface 120 to exchange data.
  • the terminal 100 and the portable device 200 may be connected to each other through the USB standard.
  • a user can insert the portable device 200 into a USB terminal provided in the external input interface 120 of the terminal 100 .
  • the processor 190 of the terminal 100 may determine whether a screen sharing program is installed in the memory 140 when the portable device 200 is connected.
  • the screen sharing program may be a program for sharing the screen by transmitting the screen being displayed on the display 130 of the terminal 100 to the display device 300 through the portable device 200 .
  • a screen sharing program is installed in the memory 240 of the portable device 200 .
  • the memory 240 of the portable device 200 may store program data required to install the screen sharing program.
  • the processor 190 of the terminal 100 may determine whether the screen sharing program installed in the portable device 200 is also installed in the mobile device 200 according to the connection of the mobile device 200 .
  • the portable device 200 may inquire the terminal 100 whether a screen sharing program is installed.
  • the terminal 100 transmits a pre-installation response indicating that the program is installed to the portable device 200 (S505).
  • the terminal 100 can automatically execute a screen sharing program according to the connection of the portable device 200 . That is, the terminal 100 may enter a standby state for screen sharing with the display device 300 .
  • the processor 190 of the terminal 100 may transmit a preset response to the input/output interface 220 of the portable device 200 through the external input interface 120 .
  • the terminal 100 determines that the screen sharing program is not installed, it transmits a not installed response indicating that the corresponding program is not installed to the portable device 200 (S507).
  • the processor 190 of the terminal 100 may display a pop-up window requesting installation of the screen sharing program through the display 130 .
  • FIG. 6 is a diagram illustrating a pop-up window prompting installation of a screen sharing program according to an embodiment of the present disclosure.
  • the processor 190 of the terminal 100 displays a pop-up window 600 on the display 130 prompting installation of the screen sharing program when the mobile device 200 is connected but the screen sharing program is not installed. can do.
  • the user can install the screen sharing program in the terminal 100 by selecting the ⁇ YES> item included in the pop-up window 600 .
  • FIG. 5 will be described.
  • the portable device 200 transmits program data to the terminal 100 to install the screen sharing program (S509).
  • the microcomputer 290 of the portable device 200 may transmit program data to the external input interface 120 of the terminal 100 based on the non-installation response.
  • the program data may include an installation file of a screen sharing program.
  • the terminal 100 installs a screen sharing program using the program data received from the portable device 200 (S511).
  • the processor 190 of the terminal 100 may install the screen sharing program in the memory 140 using the program data.
  • the terminal 100 transmits image data corresponding to the image being displayed through the display 130 to the portable device 200 (S513).
  • the processor 190 of the terminal 100 may receive a screen sharing request from the portable device 200 and transmit image data to the portable device 200 in response to the received screen sharing request.
  • the microcomputer 290 of the portable device 200 may receive a screen sharing request through the user input interface 230 .
  • the user input interface 230 may include physical buttons.
  • the portable device 200 may determine that a screen sharing request has been received.
  • the portable device 200 may determine that a screen sharing request has been received when a physical button is selected in a ready state for connection with the display device 300 .
  • the portable device 200 transmits the image data received from the terminal 100 to the display device 300 (S515).
  • the microcomputer 290 of the portable device 200 may transmit image data corresponding to the image being displayed by the terminal 100 to the wireless communication unit 310 of the display device 300 through the wireless communication interface 210.
  • the portable device 200 may transmit audio data corresponding to audio output from the terminal 100 to the display device 300 .
  • Each of the wireless communication interface 210 and the wireless communication unit 310 may include a Wi-Fi module.
  • the portable device 200 may transmit image data to the display device 300 through the Wi-Fi standard.
  • the display device 300 displays a mirroring image based on the image data received from the portable device 200 (S517).
  • a display control program capable of displaying image data received from the portable device 200 may be installed in the display device 300, and a mirroring image based on the image data may be displayed using the display control program. .
  • the display control program may be a program for decoding video data or audio data received from the portable device 200 and controlling display of the decoded video data.
  • the terminal 100 and the display device 300 can share the same screen.
  • FIG. 7 is a ladder diagram illustrating an operating method of a screen sharing system according to another embodiment of the present disclosure.
  • FIG. 7 is a diagram related to a scenario in which one screen is shared through one portable device 200 .
  • Steps S700 to S709 of FIG. 7 may be steps executed between steps S511 and S513 of FIG. 5 .
  • the portable device 200 is in a screen sharing standby state (S700).
  • the LED 230 may output a first color.
  • the first color may be light green, but this is merely an example.
  • the screen sharing standby state may be a state in which the terminal 100 is waiting to share the image being displayed.
  • the portable device 200 receives a screen sharing request in a screen sharing standby state (S701).
  • the screen sharing request may be received through the user input interface 230 provided in the portable device 200 .
  • the microcomputer 290 of the portable device 200 may determine that the screen sharing request has been received when a physical button included in the user input interface 230 is selected.
  • the portable device 200 transmits the received screen sharing request to the display device 300 (S703).
  • the microcomputer 290 of the portable device 200 may transmit a screen sharing request to the wireless communication unit 310 of the display device 300 through the wireless communication interface 210 .
  • the screen sharing request may include at least one of identification information for identifying the portable device 200 and identification information for the terminal 100 connected to the portable device 200 through the USB standard.
  • the screen sharing request may be a request to share the screen of the terminal 100 connected to the portable device 200 .
  • the display apparatus 300 determines whether the management mode of another portable device is turned on (S705).
  • the management mode is a mode capable of managing the authority of screen sharing, and when there are a plurality of portable devices connected to the display device 300, only one portable device is in the management mode. can be set.
  • the display device 300 may check which portable device among a plurality of portable devices connected to the display device 300 is set to the management mode.
  • the display apparatus 300 may first identify the portable device that has transmitted the management mode activation request among the plurality of portable devices, and determine that only the identified portable device has activated the management mode.
  • the display apparatus 300 may identify a device that first receives a request for a management mode among the first portable device and the second portable device as a management device having screen sharing authority.
  • the display apparatus 300 determines whether screen sharing permission of the corresponding portable device has been received (S707).
  • the controller 390 of the display device 300 may determine whether a screen sharing permission has been received from the other portable device when the management mode is set to on in the other portable device. This is because the management mode is set to on in other portable devices.
  • the display device 300 requests the portable device 200 to start sharing the screen (S709).
  • the controller 390 of the display device 300 may request the portable device 200 to start sharing the screen when receiving a screen sharing permission from another portable device for which the management mode is set to on.
  • the portable device 200 transmits the image data received from the terminal 100 to the display device 300 (S711), and the display device 300 displays a mirroring image based on the received image data (S713). .
  • the display apparatus 300 determines whether the other portable device is sharing the screen (S715).
  • the screen of the terminal connected to the other portable device can be shared by transmitting image data to the display device 300 .
  • the controller 390 of the display device 300 may determine whether image data for screen sharing is being received from another portable device.
  • the display device 300 performs S709 when other portable devices are not sharing the screen.
  • the controller 390 of the display device 300 may request the portable device 200 to start sharing the screen when another portable device is not sharing the screen.
  • the display device 300 determines whether or not a screen sharing confirmation request for sharing the screen through the portable device 200 is received even though the other portable device is sharing the screen ( S717).
  • the controller 390 of the display device 300 may display a pop-up window on the display unit 330 when receiving a screen sharing request from the portable device 200 while sharing the screen through another portable device. there is.
  • the display device 300 may receive a screen sharing confirmation request through a pop-up window.
  • the controller 390 of the display device 300 may receive a screen sharing confirmation request from another portable device.
  • the display device 300 performs S709.
  • the display device 300 performs S700 when not receiving screen sharing confirmation.
  • 8 to 10 are diagrams illustrating examples of providing a screen sharing service through one of two portable devices.
  • a first terminal 100-1 is connected to a first portable device 200-1, and a second terminal 100-2 is connected to a second portable device 200-2.
  • the first terminal 100-1 displays the first image 810
  • the second terminal 100-2 displays the second image 830
  • the display device 300 displays the second image 830.
  • a mirroring image 850 based on the image 830 is displayed.
  • the display device 300 displays the second mirroring image 850 on the display unit 330 based on the image data received from the second portable device 200-2.
  • the display device 300 may receive a screen sharing request from the first portable device 200-1.
  • the display device 300 sends a notification 900 indicating that a screen sharing request has been received from the first portable device 200-1 as shown in FIG. can be displayed on the
  • the display device 300 may receive a screen sharing permission message permitting screen sharing of the first portable device 200-1 from the second portable device 200-2.
  • the display device 300 may determine to receive permission for screen sharing from the second portable device 200-2.
  • the display device 300 may convert the second mirroring image 850 to the first mirroring image 1000 based on the first image 810 as shown in FIG. 10 according to a screen sharing confirmation request.
  • the display device 300 receives image data corresponding to the first image 810 from the first portable device 200-1 and displays the first mirroring image 1000 to the display unit using a display control program. (330).
  • the display device 300 may provide a screen sharing service through the first portable device 200-1.
  • the screen of a terminal can be shared with a display device having a large screen in a wireless environment without a separate wired cable.
  • FIG. 11 is a flowchart illustrating a process of changing an operation mode of a portable device from a single screen sharing mode to a multi screen sharing mode according to an embodiment of the present disclosure.
  • the microcomputer 290 of the portable device 200 operates in a single screen sharing mode (S1101).
  • the single screen sharing mode may be a mode in which the display device 300 shares a screen with one portable device 200 .
  • the microcomputer 290 of the portable device 200 determines whether a button provided on the user input interface 230 has been selected for 3 seconds or more (S1103).
  • the microcomputer 290 of the portable device 200 changes the operation mode from the single screen sharing mode to the multi-screen operation mode (S1105).
  • the multi-screen sharing mode may be a mode for sharing a plurality of screens through a plurality of portable devices connected to each of a plurality of terminals.
  • the microcomputer 290 of the portable device 200 changes the operation mode from the multi-screen sharing mode to the single screen sharing mode again when the button is selected for 3 seconds or more (S1107) under the multi-screen sharing mode.
  • FIGS 12 to 14 are diagrams related to scenarios in which a plurality of screens are shared through a plurality of portable devices.
  • a first terminal 100-1 is connected to a first portable device 200-1, and a second terminal 100-2 is connected to a second portable device 200-2.
  • the first terminal 100-1 displays the first image 810
  • the second terminal 100-2 displays the second image 830
  • the display device 300 displays the second image 830.
  • a mirroring image 850 based on the image 830 is displayed.
  • the display device 300 displays the second mirroring image 850 on the display unit 330 based on the image data received from the second portable device 200-2.
  • a management mode having screen sharing management authority is set in the second portable device 200-2, and each of the first portable device 200-1 and the second portable device 200-2 is in a multi-screen sharing mode. , assuming that it is operating.
  • the first portable device 200-1 may receive a button selection input in a screen sharing standby state.
  • the first portable device 200 - 1 may transmit a screen sharing request to the display device 300 according to a button selection input.
  • the display device 300 sends a notification 1300 indicating that a multi-screen sharing request has been received from the first portable device 200-1 as shown in FIG. 13 to the display unit 330. ) can be displayed on
  • the display device 300 may receive a multi-screen sharing permission message allowing screen sharing of the first portable device 200-1 from the second portable device 200-2.
  • the display device 300 may determine to receive permission for screen sharing from the second portable device 200-2.
  • the display device 300 Upon receiving the multi-screen sharing permission, the display device 300 displays the first mirroring image 1000 based on the second mirroring image 850 and the first image 810 on the divided screens as shown in FIG. 14 . can be displayed on the
  • the display device 300 receives image data corresponding to the first image 810 from the first portable device 200-1, and displays the first mirroring image 1000 to the second image 810 using a display control program. Together with the mirroring image 850, it can be output on the display unit 330.
  • the display device 300 may provide a multi-screen sharing service through the first and second portable devices 200-1 and 2000-2.
  • screens of a plurality of terminals can be shared on a display device having a large screen in a wireless environment without a separate wired cable.
  • the display device 300 when sharing multiple screens, can adjust the arrangement and order of the screens, and can cancel the screens of portable devices that are not in the management mode.
  • the above-described method can be implemented as a processor-readable code in a medium on which a program is recorded.
  • media readable by the processor include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, and the like.
  • the display device described above is not limited to the configuration and method of the above-described embodiments, but the embodiments may be configured by selectively combining all or part of each embodiment so that various modifications can be made. may be

Abstract

본 발명의 실시 예에 따른 디스플레이 장치는 디스플레이부, 제1 영상을 표시 중인 제1 단말기와 연결된 제1 휴대용 기기 또는 제2 영상을 표시 중인 제2 단말기와 연결된 제2 휴대용 기기와 무선 통신을 수행하는 무선 통신부 및 상기 제1 휴대용 기기로부터 화면 공유 요청을 수신한 경우, 상기 제2 단말기와 연결된 제2 휴대용 기기의 화면 공유를 관리하는 관리 모드가 활성화되어 있는지를 판단하고, 상기 제2 휴대용 기기의 관리 모드가 활성화되어 있는 경우, 상기 제2 휴대용 기기로부터 화면 공유 허락을 수신했는지를 판단하고, 상기 화면 공유 허락을 수신한 경우, 상기 제1 영상에 상응하는 상기 제1 영상 데이터를 상기 휴대용 기기로부터 수신하고, 수신된 제1 영상 데이터에 기반하여, 제1 미러링 영상을 상기 디스플레이부 상에 표시하는 컨트롤러를 포함할 수 있다.

Description

디스플레이 장치 및 그의 동작 방법
본 발명은 디스플레이 장치 및 그의 동작 방법에 관한 것이다.
PC 화면을 별도의 큰 Display 기기에 공유해야 되는 경우가 많다.
개인이 보다 큰 화면을 보기 위해서 큰 Display 기기로 화면 공유를 원할 수도 있고, 회의실과 같이 공용 공간에서 개인 노트북의 화면을 공유하여 여러 사람이 같이 한 화면을 보기를 원할 수도 있다.
특히, 여러 명이 순차적으로 혹은 동시에 화면을 공유를 원할 수도 있기에 기존의 HDMI 케이블 혹은 PC의 Miracast 등을 이용한 화면 공유 방법은 사용자에게 보다 나은 편리함을 제공해 줄 수 없다.
구체적으로, PC와 Display 기기를 HDMI 케이블로 연결하는 방법의 경우, 유선 케이블 선을 이용하기 때문에 케이블 선의 길이에 따른 거리 제약이 있을 수 있고, 여러 PC 화면을 동시에 공유할 수는 없는 불편함이 있다.
또한, PC에서는 기본으로 Miracast를 이용하여 화면을 공유할 수 기능을 제공한다. Miracast 화면 공유 방법은 PC의 WIFI-Direct를 이용하여 화면을 전송하는 기술이기 때문에 PC와 Display기기의 WIFI 로 연결이 된 경우에만 사용 가능하다.
이로 인해, PC가 화면을 공유할 때는 현재 연결되어 있는 Display 이외에 다른 WIFI를 사용할 수 없는 제약이 생긴다.
또한, 1:1 연결만 지원하기 때문에 여러 개의 PC화면을 동시에 공유할 수 없다. 현재 PC 화면이 공유 중이고 다른 PC 화면을 공유하려면 기존 연결을 종료한 후 새로이 연결을 해야 되는 번거로움이 존재한다.
그 밖에도 다른 무선 공유 방법을 사용하는 경우, 사용자가 Display 기기에 맞는 별도의 프로그램을 설치해야 되고 별도의 설정이 필요한 경우가 많아 사용자의 기기 조작에 불편함을 줄 수도 있다.
본 개시는 유선 케이블 사용이 없이, 무선환경으로 PC 화면을 공유할 수 있고, PC의 와이파이 사용에 제약을 주지 않으며, 화면 공유 프로그램 설치가 편리한 방법을 제공하는 것에 그 목적이 있다.
본 개시는 여러 PC 화면의 순차적인 공유 혹은 동시 공유를 쉽게 할 수 있도록 하는 것에 그 목적이 있다.
본 발명의 실시 예에 따른 디스플레이 장치는 디스플레이부, 제1 영상을 표시 중인 제1 단말기와 연결된 제1 휴대용 기기 또는 제2 영상을 표시 중인 제2 단말기와 연결된 제2 휴대용 기기와 무선 통신을 수행하는 무선 통신부 및 상기 제1 휴대용 기기로부터 화면 공유 요청을 수신한 경우, 상기 제2 단말기와 연결된 제2 휴대용 기기의 화면 공유를 관리하는 관리 모드가 활성화되어 있는지를 판단하고, 상기 제2 휴대용 기기의 관리 모드가 활성화되어 있는 경우, 상기 제2 휴대용 기기로부터 화면 공유 허락을 수신했는지를 판단하고, 상기 화면 공유 허락을 수신한 경우, 상기 제1 영상에 상응하는 상기 제1 영상 데이터를 상기 휴대용 기기로부터 수신하고, 수신된 제1 영상 데이터에 기반하여, 제1 미러링 영상을 상기 디스플레이부 상에 표시하는 컨트롤러를 포함할 수 있다.
본 개시의 실시 예에 따르면, 별도의 유선 케이블 없이, 무선 환경에서, 단말기의 화면을 대화면을 갖는 디스플레이 장치에 공유할 수 있다.
또한, 휴대용 기기를 통해 화면 공유를 위한 영상 데이터가 디스플레이 장치로 전송되므로, 단말기의 와이파이 규격 사용에 제약이 없다.
또한, 휴대용 기기의 관리 모드가 있어, 현재 공유 중인 다른 휴대용 기기의 상태를 알 수 있다.
또한, 멀티 화면 공유 모드에서의 전체 화면 구성 순서를 바꾸거나, 특정 휴대용 기기의 화면을 해지할 수 있다.
또한, admin 모드에 있는 기기의 허락을 맡아야 화면 공유가 가능하기 때문에 불필요한 다른 휴대용 기기의 화면 공유를 막을 수 있다.
또한, 휴대용 기기 자체가 단말기의 영상/오디오 데이터를 디스플레이 장치에 전송하므로, 별도의 데이터 전송을 위한 모듈이 필요 없어, 비용 절감이 가능하고, 기기의 구성이 심플해질 수 있다.
도 1은 본 개시의 일 실시 예에 따른 화면 공유 시스템의 구성을 설명하는 도면이다.
도 2는 본 개시의 일 실시 예에 따른 단말기의 구성을 설명하는 블록도이다.
도 3은 본 개시의 일 실시 예에 따른 휴대용 기기의 구성을 설명하는 블록도이다.
도 4는 본 개시의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하는 블록도이다.
도 5는 본 개시의 일 실시 예에 따른 화면 공유 시스템의 동작 방법을 설명하기 위한 래더다이어 그램이다.
도 6은 본 개시의 일 실시 예에 따른 화면 공유 프로그램의 설치를 유도하는 팝업 창을 설명하는 도면이다.
도 7은 본 개시의 또 다른 실시 예에 따른 화면 공유 시스템의 동작 방법을 설명하는 래더 다이어그램이다.
도 8 내지 도 10은 2개의 휴대용 기기들 중 어느 하나의 휴대용 기기를 통해 화면 공유 서비스를 제공하는 예를 설명하는 도면이다.
도 11은 본 개시의 일 실시 예에 따라, 휴대용 기기의 동작 모드를 단일 화면 공유 모드에서, 멀티 화면 공유 모드로 변경하는 과정을 설명하는 흐름도이다.
도 12 내지 도 14는 복수의 휴대용 기기들을 통해, 복수의 화면들을 공유하는 시나리오에 관한 도면이다.
이하, 본 발명과 관련된 실시 예에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
본 발명의 실시예에 따른 디스플레이 장치는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 디스플레이 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.
따라서, 본 발명에서 기술되는 디스플레이 장치는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 디스플레이 장치는, 보다 구체적으로 예를 들면, 네트워크 TV, HBBTV, 스마트 TV, LED TV, OLED TV 등이 될 수 있으며, 경우에 따라 스마트폰에도 적용 가능하다.
도 1은 본 개시의 일 실시 예에 따른 화면 공유 시스템의 구성을 설명하는 도면이다.
화면 공유 시스템(1)은 단말기(100), 휴대용 기기(200), 디스플레이 장치(300)를 포함할 수 있다.
단말기(100)는 PC, 노트북과 같은 컴퓨터일 수 있으나, 이는 예시에 불과하다.
단말기(100)와 휴대용 기기(200)는 무선 또는 유선으로 연결될 수 있다. 단말기(100)와 휴대용 기기(200)는 USB 규격을 통해 서로 연결될 수 있다.
휴대용 기기(200) 및 단말기(100)는 각각 복수 개로 구성될 수도 있다.
휴대용 기기(200)는 동글(dongle) 타입으로, 단말기(100)에 USB(Universal Serial Bus) 규격을 통해 연결될 수 있다.
디스플레이 장치(300)는 TV일 수 있다.
휴대용 기기(200)와 디스플레이 장치(300)는 와이파이 규격을 통해 통신할 수 있다.
도 2는 본 개시의 일 실시 예에 따른 단말기의 구성을 설명하는 블록도이다.
도 2를 참조하면, 본 개시의 실시 예에 따른 단말기(100)는 통신 인터페이스(110), 외부 입력 인터페이스(120), 디스플레이(130), 메모리(140) 및 프로세서(190)를 포함할 수 있다.
통신 인터페이스(110)는 외부 기기와 유선 또는 무선으로 통신을 수행할 수 있다. 통신 인터페이스(110)는 와이파이, 블루투스 모듈을 포함할 수 있다.
외부 입력 인터페이스(120)는 외부 기기로부터 데이터, 정보를 수신할 수 있다. 특히, 외부 입력 인터페이스(120)는 휴대용 기기(200)의 입출력 인터페이스(220)로부터 화면 공유 프로그램의 설치에 필요한 데이터를 수신할 수 있다.
외부 입력 인터페이스(120)는 단말기(100)와 외부 장치 간의 연결 경로를 제공할 수 있다.
외부 입력 인터페이스(120)는 복수의 외부 입력 단자들을 포함할 수 있다. 복수의 외부 입력 단자들은 RGB 단자, 하나 이상의 HDMI(High Definition Multimedia Interface) 단자, 컴포넌트(Component) 단자를 포함할 수 있다.
디스플레이(130)는 영상을 표시할 수 있다.
메모리(140)는 프로세서(190) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.
프로세서(190)는 단말기(100)의 전반적인 동작을 제어할 수 있다.
도 3은 본 개시의 일 실시 예에 따른 휴대용 기기의 구성을 설명하는 블록도이다.
휴대용 기기(200)는 무선 통신 인터페이스(210), 입출력 인터페이스(220), 사용자 입력 인터페이스(230), 메모리(240), LED(250) 및 마이컴(290)을 포함할 수 있다.
무선 통신 인터페이스(210)는 디스플레이 장치(300)와 무선 통신을 수행할 수 있다. 무선 통신 인터페이스(210)는 와이파이 규격을 통해 디스플레이 장치(300)와 무선 통신을 수행할 수 있다.
이를 위해, 무선 통신 인터페이스(210)는 와이파이 모듈을 포함할 수 있다.
입출력 인터페이스(220)는 USB 규격을 통해 단말기(100)와 연결 경로를 제공할 수 있다.
사용자 입력 인터페이스(230)는 하나 이상의 물리적 버튼을 포함할 수 있다. 버튼은 화면 공유 상태, 멀티 화면 공유 모드, 단일 화면 공유 모드 로의 전환에 사용될 수 있다.
메모리(240)는 화면 공유 프로그램, 화면 공유 프로그램의 설치에 필요한 데이터를 저장하고 있을 수 있다.
LED(250)는 특정 컬러를 출력하여, 디스플레이 장치(300)와의 화면 공유 상태를 나타낼 수 있다.
휴대용 기기(200)가 디스플레이 장치(300)와 연결 대기 상태(화면 공유 상태)에 있는 경우, LED(250)는 연두색 컬러를 출력하고, 연결 상태(화면 공유 상태)에 있는 경우, LED(250)는 녹색 컬러를 출력하고, 연결이 불안정한 상태에 있는 경우, LED(250)는 레드 컬러를 출력할 수 있다.
마이컴(290)은 휴대용 기기(200)의 전반적인 동작을 제어할 수 있다.
도 4는 본 개시의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하는 블록도이다.
도 4를 참조하면, 디스플레이 장치(300)는 무선 통신부(310), 메모리(320), 디스플레이부(330), 오디오 출력부(340) 및 컨트롤러(390)를 포함할 수 있다.
무선 통신부(310)는 휴대용 기기(200)와 무선 통신을 수행할 수 있다. 무선 통신부(310)는 와이파이 또는 와이파이 다이렉트 규격을 통해, 휴대용 기기(200)와 통신을 수행할 수 있다.
메모리(320)는 화면 공유 제어 프로그램을 저장하고 있을 수 있다. 화면 공유 제어 프로그램은 휴대용 기기(200)로부터 수신된 영상 데이터를 디코딩하고, 디코딩된 데이터에 기반하여, 미러링 영상의 출력을 제어하는 프로그램일 수 있다.
디스플레이부(330)는 컨트롤러(190)에서 처리된 영상 신호, 데이터 신호, OSD 신호를 표시할 수 있다.
오디오 출력부(340)는 오디오 신호를 출력할 수 있다.
컨트롤러(390)는 디스플레이 장치(300)의 전반적인 동작을 제어할 수 있다.
도 5는 본 개시의 일 실시 예에 따른 화면 공유 시스템의 동작 방법을 설명하기 위한 래더다이어 그램이다.
도 5를 참조하면, 단말기(100)와 휴대용 기기(200)가 연결되면(S501), 단말기(100)는 화면 공유 프로그램이 설치되어 있는지를 판단한다(S503).
단말기(100)는 외부 입력 인터페이스(120)를 통해 휴대용 기기(200)의 입출력 인터페이스(220)와 연결되어, 데이터를 교환할 수 있다.
단말기(100)와 휴대용 기기(200)는 USB 규격을 통해 서로 연결될 수 있다.
사용자는 단말기(100)의 외부 입력 인터페이스(120)에 구비된 USB 단자에 휴대용 기기(200)를 꽂을 수 있다.
단말기(100)의 프로세서(190)는 휴대용 기기(200)가 연결된 경우, 화면 공유 프로그램이 메모리(140)에 설치되어 있는지를 판단할 수 있다.
화면 공유 프로그램은 단말기(100)의 디스플레이(130) 상에 표시 중인 화면을 휴대용 기기(200)를 통해 디스플레이 장치(300)에 전송하여, 화면을 공유하기 위한 프로그램일 수 있다.
휴대용 기기(200)의 메모리(240)에는 화면 공유 프로그램이 설치되어 있다. 휴대용 기기(200)의 메모리(240)에는 화면 공유 프로그램의 설치에 필요한 프로그램 데이터를 저장하고 있을 수 있다.
단말기(100)의 프로세서(190)는 휴대용 기기(200)의 연결에 따라 휴대용 기기(200)에 설치되어 있는 화면 공유 프로그램이 자신에게도 설치되어 있는지를 판단할 수 있다.
휴대용 기기(200)는 화면 공유 프로그램이 설치되어 있는지를 단말기(100)에 문의할 수 있다.
단말기(100)는 화면 공유 프로그램이 설치되어 있는 경우, 해당 프로그램이 설치되었음을 나타내는 기 설치 응답을 휴대용 기기(200)에 전송한다(S505).
이 경우, 단말기(100)는 휴대용 기기(200)의 연결에 따라, 자동으로 화면 공유 프로그램을 실행할 수 있다. 즉, 단말기(100)는 디스플레이 장치(300)와의 화면 공유를 위한 대기 상태로 진입할 수 있다.
단말기(100)의 프로세서(190)는 외부 입력 인터페이스(120)를 통해 휴대용 기기(200)의 입출력 인터페이스(220)에 기 설치 응답을 전송할 수 있다.
단말기(100)는 화면 공유 프로그램이 설치되어 있지 않는 것으로 판단한 경우, 해당 프로그램이 설치되어 있지 않음을 나타내는 미 설치 응답을 휴대용 기기(200)에 전송한다(S507).
또한, 단말기(100)의 프로세서(190)는 화면 공유 프로그램이 설치되어 있지 않는 것으로 판단된 경우, 디스플레이(130)를 통해 화면 공유 프로그램의 설치를 문의하는 팝업 창을 표시할 수 있다.
이에 대해서는, 도 6을 참조하여 설명한다.
도 6은 본 개시의 일 실시 예에 따른 화면 공유 프로그램의 설치를 유도하는 팝업 창을 설명하는 도면이다.
단말기(100)의 프로세서(190)는 휴대용 기기(200)와 연결되었지만, 화면 공유 프로그램이 설치되어 있지 않은 경우, 화면 공유 프로그램의 설치를 유도하는 팝업 창(600)을 디스플레이(130) 상에 표시할 수 있다.
사용자는 팝업 창(600)에 포함된 <YES> 항목을 선택하여, 단말기(100)에 화면 공유 프로그램이 설치되도록 할 수 있다.
다시, 도 5를 설명한다.
휴대용 기기(200)는 미 설치 응답에 기초하여, 화면 공유 프로그램의 설치에 프로그램 데이터를 단말기(100)에 전송한다(S509).
휴대용 기기(200)의 마이컴(290)은 미 설치 응답에 기초하여, 프로그램 데이터를 단말기(100)의 외부 입력 인터페이스(120)에 전송할 수 있다.
프로그램 데이터는 화면 공유 프로그램의 설치 파일을 포함할 수 있다.
단말기(100)는 휴대용 기기(200)로부터 수신된 프로그램 데이터를 이용하여, 화면 공유 프로그램을 설치한다(S511).
단말기(100)의 프로세서(190)는 프로그램 데이터를 이용하여, 화면 공유 프로그램을 메모리(140)에 설치할 수 있다.
그 후, 단말기(100)는 디스플레이(130)를 통해 표시 중인 영상에 상응하는 영상 데이터를 휴대용 기기(200)에 전송한다(S513).
단말기(100)의 프로세서(190)는 휴대용 기기(200)로부터 화면 공유 요청을 수신할 수 있고, 수신된 화면 공유 요청에 응답하여, 영상 데이터를 휴대용 기기(200)에 전송할 수 있다.
휴대용 기기(200)의 마이컴(290)은 사용자 입력 인터페이스(230)를 통해 화면 공유 요청을 수신할 수 있다. 사용자 입력 인터페이스(230)는 물리적 버튼을 포함할 수 있다.
물리적 버튼이 선택된 경우, 휴대용 기기(200)는 화면 공유 요청을 수신한 것으로 판단할 수 있다.
구체적으로, 휴대용 기기(200)는 디스플레이 장치(300)와 연결 준비 상태에서, 물리적 버튼이 선택된 경우, 화면 공유 요청을 수신한 것으로 판단할 수 있다.
휴대용 기기(200)는 단말기(100)로부터 수신된 영상 데이터를 디스플레이 장치(300)에 전송한다(S515).
휴대용 기기(200)의 마이컴(290)은 무선 통신 인터페이스(210)를 통해, 단말기(100)가 표시 중인 영상에 상응하는 영상 데이터를 디스플레이 장치(300)의 무선 통신부(310)에 전송할 수 있다.
휴대용 기기(200)는 영상 데이터에 더하여, 단말기(100)가 출력하는 오디오에 상응하는 오디오 데이터를 디스플레이 장치(300)에 전송할 수 있다.
무선 통신 인터페이스(210) 및 무선 통신부(310) 각각은 와이파이 모듈을 포함할 수 있다.
즉, 휴대용 기기(200)는 와이파이 규격을 통해 영상 데이터를 디스플레이 장치(300)에 전송할 수 있다.
디스플레이 장치(300)는 휴대용 기기(200)로부터 수신된 영상 데이터에 기초하여, 미러링 영상을 표시한다(S517).
디스플레이 장치(300)에는 휴대용 기기(200)로부터 전달받은 영상 데이터를 표시할 수 있는 디스플레이 제어 프로그램이 설치되어 있을 수 있고, 디스플레이 제어 프로그램을 이용하여, 영상 데이터에 기초한, 미러링 영상을 표시할 수 있다.
디스플레이 제어 프로그램은 휴대용 기기(200)로부터 수신된 영상 데이터 또는 오디오 데이터를 디코딩하고, 디코딩된 영상 데이터의 표시를 제어하기 위한 프로그램일 수 있다.
이에 따라, 단말기(100)와 디스플레이 장치(300)는 동일한 화면을 공유할 수 있다.
도 7은 본 개시의 또 다른 실시 예에 따른 화면 공유 시스템의 동작 방법을 설명하는 래더 다이어그램이다.
특히, 도 7은 하나의 휴대용 기기(200)를 통해 하나의 화면을 공유하는 시나리오에 관한 도면이다.
도 7의 단계 S700 내지 S709는 도 5의 S511 및 S513 단계의 사이에서 실행되는 단계들일 수 있다.
도 7을 참조하면, 휴대용 기기(200)는 화면 공유 대기 상태에 있다(S700).
휴대용 기기(200)의 화면 공유 대기 상태에서, LED(230)는 제1 컬러를 출력할 수 있다. 제1 컬러는 연두색일 수 있으나, 이는 예시에 불과하다.
화면 공유 대기 상태는, 단말기(100)가 표시 중인 영상의 공유를 대기하고 있는 상태일 수 있다.
휴대용 기기(200)는 화면 공유 대기 상태에서, 화면 공유 요청을 수신한다(S701).
일 실시 예에서, 화면 공유 요청은 휴대용 기기(200)에 구비된 사용자 입력 인터페이스(230)를 통해 수신될 수 있다.
휴대용 기기(200)의 마이컴(290)은 사용자 입력 인터페이스(230)에 포함된 물리적 버튼이 선택된 경우, 화면 공유 요청을 수신한 것으로 결정할 수 있다.
휴대용 기기(200)는 수신된 화면 공유 요청을 디스플레이 장치(300)에 전송한다(S703).
휴대용 기기(200)의 마이컴(290)은 무선 통신 인터페이스(210)를 통해 디스플레이 장치(300)의 무선 통신부(310)에 화면 공유 요청을 전송할 수 있다.
화면 공유 요청은 휴대용 기기(200)를 식별하는 식별 정보, 휴대용 기기(200)와 USB 규격을 통해 연결된 단말기(100)의 식별 정보 중 하나 이상을 포함할 수 있다.
화면 공유 요청은 휴대용 기기(200)와 연결된 단말기(100)의 화면을 공유하는 요청일 수 있다.
디스플레이 장치(300)는 화면 공유 요청에 따라, 다른 휴대용 기기의 관리 모드가 온 되어 있는지를 판단한다(S705).
일 실시 예에서, 관리 모드(admin mode)는 화면 공유의 권한을 관리할 수 있는 모드로, 디스플레이 장치(300)와 연결된 복수의 휴대용 기기들이 있는 경우, 어느 하나의 휴대용 기기만이, 관리 모드로 설정될 수 있다.
관리 모드는 1개의 휴대용 기기만이 온 될 수 있다.
디스플레이 장치(300)는 자신과 연결된 복수의 휴대용 기기들 중 어느 휴대용 기기가 관리 모드로 설정되어 있는지를 확인할 수 있다.
디스플레이 장치(300)는 복수의 휴대용 기기들 중 가장 먼저, 관리 모드의 활성화 요청을 전송한 휴대용 기기를 식별하고, 식별된 휴대용 기기만이 관리 모드를 활성화한 것으로 판단할 수 있다.
디스플레이 장치(300)는 제1 휴대용 기기 및 상기 제2 휴대용 기기 중 관리 모드로의 요청을 먼저 수신한 기기를 화면 공유 권한을 갖는 관리 기기로 식별할 수 있다.
디스플레이 장치(300)는 다른 휴대용 기기의 관리 모드가 온 되어 있는 경우, 해당 휴대용 기기의 화면 공유 허락을 수신했는지를 판단한다(S707).
디스플레이 장치(300)의 컨트롤러(390)는 다른 휴대용 기기에 관리 모드가 온으로, 설정되어 있는 경우, 다른 휴대용 기기로부터 화면 공유 허락을 수신했는지를 판단할 수 있다. 이는 다른 휴대용 기기에 관리 모드가 온으로 설정되어 있기 때문이다.
디스플레이 장치(300)는 화면 공유 허락을 수신한 경우, 휴대용 기기(200)에 화면 공유 시작을 요청한다(S709).
디스플레이 장치(300)의 컨트롤러(390)는 관리 모드가 온으로 설정된 다른 휴대용 기기로부터, 화면 공유 허락을 수신한 경우, 휴대용 기기(200)에 화면 공유의 시작을 요청할 수 있다.
휴대용 기기(200)는 단말기(100)로부터 전달받은 영상 데이터를 디스플레이 장치(300)에 전송하고(S711), 디스플레이 장치(300)는 수신된 영상 데이터에 기반하여, 미러링 영상을 표시한다(S713).
한편, 디스플레이 장치(300)는 다른 휴대용 기기의 관리 모드가 오프되어 있는 경우(S705), 다른 휴대용 기기가 화면을 공유 중인지를 판단한다(S715).
다른 휴대용 기기는 관리 모드로 설정되어 있지 않다고 하더라고, 디스플레이 장치(300)에 영상 데이터를 전송하여, 다른 휴대용 기기에 연결된 단말기의 화면을 공유할 수 있다.
디스플레이 장치(300)의 컨트롤러(390)는 다른 휴대용 기기로부터 화면 공유를 위한 영상 데이터를 수신하고 있는지를 판단할 수 있다.
디스플레이 장치(300)는 다른 휴대용 기기가 화면을 공유하고 있지 않은 경우, S709를 수행한다.
디스플레이 장치(300)의 컨트롤러(390)는 다른 휴대용 기기가 화면을 공유하고 있지 않은 경우, 휴대용 기기(200)에 화면 공유 시작을 요청할 수 있다.
디스플레이 장치(300)는 다른 휴대용 기기가 화면을 공유 중인 경우, 다른 휴대용 기기가 화면을 공유 중임에도 불구하고, 휴대용 기기(200)를 통해 화면을 공유하도록 하는 화면 공유 확인 요청을 수신하는지를 판단한다(S717).
디스플레이 장치(300)의 컨트롤러(390)는 다른 휴대용 기기를 통해 화면을 공유 중, 휴대용 기기(200)로부터 화면 공유 요청을 수신한 경우, 이를 알리는 팝업 창을 디스플레이부(330) 상에 표시할 수 있다.
디스플레이 장치(300)는 팝업 창을 통해, 화면 공유 확인 요청을 수신할 수 있다.
디스플레이 장치(300)의 컨트롤러(390)는 다른 휴대용 기기로부터 화면 공유 확인 요청을 수신할 수도 있다.
디스플레이 장치(300)는 화면 공유 확인을 수신한 경우, S709를 수행한다.
한편, 디스플레이 장치(300)는 화면 공유 확인을 수신하지 않은 경우, S700을 수행한다.
도 7을 실제 시나리오를 통해 설명한다.
도 8 내지 도 10은 2개의 휴대용 기기들 중 어느 하나의 휴대용 기기를 통해 화면 공유 서비스를 제공하는 예를 설명하는 도면이다.
도 8에서, 제1 단말기(100-1)는 제1 휴대용 기기(200-1)와 연결되어 있고, 제2 단말기(100-2)는 제2 휴대용 기기(200-2)와 연결되어 있다.
또한, 제1 단말기(100-1)는 제1 영상(810)을 표시하고 있고, 제2 단말기(100-2)는 제2 영상(830)을 표시하고 있고, 디스플레이 장치(300)는 제2 영상(830)에 기반한 미러링 영상(850)을 표시하고 있다.
즉, 디스플레이 장치(300)는 제2 휴대용 기기(200-2)로부터 수신된 영상 데이터에 기반하여, 제2 미러링 영상(850)을 디스플레이부(330) 상에 표시하고 있다.
또한, 제2 휴대용 기기(200-2)에 화면 공유 관리 권한을 갖는 관리 모드가 설정되어 있음을 가정한다.
디스플레이 장치(300)는 제1 휴대용 기기(200-1)로부터 화면 공유 요청을 수신할 수 있다.
디스플레이 장치(300)는 수신된 화면 공유 요청에 응답하여, 도 9에 도시된 바와 같이, 제1 휴대용 기기(200-1)로부터 화면 공유 요청을 수신했음을 나타내는 알림(900)을 디스플레이부(330) 상에 표시할 수 있다.
디스플레이 장치(300)는 제2 휴대용 기기(200-2)로부터 제1 휴대용 기기(200-1)의 화면 공유를 허락하는 화면 공유 허락 메시지를 수신할 수 있다.
디스플레이 장치(300)는 제2 휴대용 기기(200-2)로부터 화면 공유의 허락을 수신할 것으로 판단할 수 있다.
디스플레이 장치(300)는 화면 공유 확인 요청에 따라, 도 10에 도시된 바와 같이, 제2 미러링 영상(850)을 제1 영상(810)에 기반한 제1 미러링 영상(1000)으로 전환할 수 있다.
즉, 디스플레이 장치(300)는 제1 휴대용 기기(200-1)로부터 제1 영상(810)에 상응하는 영상 데이터를 수신하고, 디스플레이 제어 프로그램을 이용하여, 제1 미러링 영상(1000)을 디스플레이부(330) 상에 출력할 수 있다.
이에 따라, 디스플레이 장치(300)는 제1 휴대용 기기(200-1)를 통해 화면 공유 서비스를 제공할 수 있다.
이와 같이, 본 개시의 실시 예에 따르면, 별도의 유선 케이블 없이, 무선 환경에서, 단말기의 화면을 대화면을 갖는 디스플레이 장치에 공유할 수 있다.
또한, 휴대용 기기를 통해 화면 공유를 위한 영상 데이터가 디스플레이 장치로 전송되므로, 단말기의 와이파이 규격 사용에 제약이 없다.
도 11은 본 개시의 일 실시 예에 따라, 휴대용 기기의 동작 모드를 단일 화면 공유 모드에서, 멀티 화면 공유 모드로 변경하는 과정을 설명하는 흐름도이다.
도 11을 참조하면, 휴대용 기기(200)의 마이컴(290)은 단일 화면 공유 모드로 동작한다(S1101).
단일 화면 공유 모드는, 디스플레이 장치(300)가 하나의 휴대용 기기(200)와 화면을 공유하는 모드일 수 있다.
휴대용 기기(200)의 마이컴(290)은 사용자 입력 인터페이스(230)에 구비된 버튼이 3초 이상 선택되었는지를 판단한다(S1103).
휴대용 기기(200)의 마이컴(290)은 사용자 입력 인터페이스(230)에 구비된 버튼이 3초 이상 선택된 경우, 동작 모드를 단일 화면 공유 모드에서 멀티 화면 동작 모드로 변경한다(S1105).
멀티 화면 공유 모드는, 복수의 단말기들 각각에 연결된 복수의 휴대용 기기들을 통해, 복수의 화면들을 공유하기 위한 모드일 수 있다.
휴대용 기기(200)의 마이컴(290)은 멀티 화면 공유 모드 하에서, 버튼이 3초 이상 선택된 경우(S1107), 동작 모드를 멀티 화면 공유 모드에서 단일 화면 공유 모드로 재 변경한다.
도 12 내지 도 14는 복수의 휴대용 기기들을 통해, 복수의 화면들을 공유하는 시나리오에 관한 도면이다.
도 12에서, 제1 단말기(100-1)는 제1 휴대용 기기(200-1)와 연결되어 있고, 제2 단말기(100-2)는 제2 휴대용 기기(200-2)와 연결되어 있다.
또한, 제1 단말기(100-1)는 제1 영상(810)을 표시하고 있고, 제2 단말기(100-2)는 제2 영상(830)을 표시하고 있고, 디스플레이 장치(300)는 제2 영상(830)에 기반한 미러링 영상(850)을 표시하고 있다.
즉, 디스플레이 장치(300)는 제2 휴대용 기기(200-2)로부터 수신된 영상 데이터에 기반하여, 제2 미러링 영상(850)을 디스플레이부(330) 상에 표시하고 있다.
또한, 제2 휴대용 기기(200-2)에 화면 공유 관리 권한을 갖는 관리 모드가 설정되어 있고, 제1 휴대용 기기(200-1) 및 제2 휴대용 기기(200-2) 각각은 멀티 화면 공유 모드로, 동작하고 있음을 가정한다.
제1 휴대용 기기(200-1)는 화면 공유 대기 상태에서, 버튼 선택 입력을 수신할 수 있다. 제1 휴대용 기기(200-1)는 버튼 선택 입력에 따라, 화면 공유 요청을 디스플레이 장치(300)에 전송할 수 있다.
디스플레이 장치(300)는 수신된 화면 공유 요청에 응답하여, 도 13에 도시된 바와 같이, 제1 휴대용 기기(200-1)로부터 멀티 화면 공유 요청을 수신했음을 나타내는 알림(1300)을 디스플레이부(330) 상에 표시할 수 있다.
디스플레이 장치(300)는 제2 휴대용 기기(200-2)로부터 제1 휴대용 기기(200-1)의 화면 공유를 허락하는 멀티 화면 공유 허락 메시지를 수신할 수 있다.
디스플레이 장치(300)는 제2 휴대용 기기(200-2)로부터 화면 공유의 허락을 수신할 것으로 판단할 수 있다.
디스플레이 장치(300)는 멀티 화면 공유 허락의 수신에 따라, 도 14에 도시된 바와 같이, 제2 미러링 영상(850) 및 제1 영상(810)에 기반한 제1 미러링 영상(1000)을 분할된 화면 상에 표시할 수 있다.
즉, 디스플레이 장치(300)는 제1 휴대용 기기(200-1)로부터 제1 영상(810)에 상응하는 영상 데이터를 수신하고, 디스플레이 제어 프로그램을 이용하여, 제1 미러링 영상(1000)을 제2 미러링 영상(850)과 함께, 디스플레이부(330) 상에 출력할 수 있다.
이에 따라, 디스플레이 장치(300)는 제1,2 휴대용 기기(200-1, 2000-2)를 통해 멀티 화면 공유 서비스를 제공할 수 있다.
이와 같이, 본 개시의 실시 예에 따르면, 별도의 유선 케이블 없이, 무선 환경에서, 복수의 단말기들의 화면을 대화면을 갖는 디스플레이 장치에 공유할 수 있다.
한편, 본 개시의 또 다른 실시 예에 따르면, 디스플레이 장치(300)는 멀티 화면의 공유 시, 화면의 배치, 순서를 조절할 수 있고, 관리 모드에 있지 않은 휴대용 기기의 화면을 해지할 수 있다.
본 발명의 일실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있다.
상기와 같이 설명된 디스플레이 장치는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims (13)

  1. 디스플레이 장치에 있어서,
    디스플레이부;
    제1 영상을 표시 중인 제1 단말기와 연결된 제1 휴대용 기기 또는 제2 영상을 표시 중인 제2 단말기와 연결된 제2 휴대용 기기와 무선 통신을 수행하는 무선 통신부; 및
    상기 제1 휴대용 기기로부터 화면 공유 요청을 수신한 경우, 상기 제2 단말기와 연결된 제2 휴대용 기기의 화면 공유를 관리하는 관리 모드가 활성화되어 있는지를 판단하고, 상기 제2 휴대용 기기의 관리 모드가 활성화되어 있는 경우, 상기 제2 휴대용 기기로부터 화면 공유 허락을 수신했는지를 판단하고, 상기 화면 공유 허락을 수신한 경우, 상기 제1 영상에 상응하는 상기 제1 영상 데이터를 상기 휴대용 기기로부터 수신하고, 수신된 제1 영상 데이터에 기반하여, 제1 미러링 영상을 상기 디스플레이부 상에 표시하는 컨트롤러를 포함하는
    디스플레이 장치.
  2. 제1항에 있어서,
    상기 컨트롤러는
    상기 제2 휴대용 기기의 관리 모드가 비 활성화되어 있는 경우, 상기 제2 휴대용 기기를 통해 상기 제2 단말기가 표시 중인 제2 영상을 공유 중인지 판단하고,
    상기 제2 영상이 공유 중이지 않은 경우, 상기 제1 미러링 영상을 표시하는
    디스플레이 장치.
  3. 제2항에 있어서,
    상기 컨트롤러는
    상기 제2 휴대용 기기를 통해 상기 제2 영상을 공유 중인 경우, 이를 나타내는 알림을 상기 디스플레이부 상에 표시하는
    디스플레이 장치.
  4. 제1항에 있어서,
    휴대용 기기로부터 수신된 영상 데이터를 디코딩하고, 디코딩된 데이터에 기반하여, 미러링 영상을 표시하도록 하는 화면 제어 프로그램을 저장하는 메모리를 더 포함하는
    디스플레이 장치.
  5. 제1항에 있어서,
    상기 컨트롤러는
    상기 제1 휴대용 기기 및 상기 제2 휴대용 기기가 멀티 화면 공유 모드로 동작하는 경우, 상기 제1 미러링 영상 및 상기 제2 단말기가 표시 중인 상기 제2 영상에 기반한 제2 미러링 영상을 분할하여 표시하는
    디스플레이 장치.
  6. 제1항에 있어서,
    상기 컨트롤러는
    상기 제1 휴대용 기기 및 상기 제2 휴대용 기기 중 관리 모드로의 요청을 먼저 수신한 기기를 관리 기기로 식별하는
    디스플레이 장치.
  7. 제1항에 있어서,
    상기 무선 통신부는
    와이파이 모듈을 포함하는
    디스플레이 장치.
  8. 디스플레이 장치의 동작 방법에 있어서,
    제1 영상을 표시 중인 제1 단말기와 연결된 제1 휴대용 기기로부터 화면 공유 요청을 수신하는 단계;
    상기 제2 단말기와 연결된 제2 휴대용 기기의 화면 공유를 관리하는 관리 모드가 활성화되어 있는지를 판단하는 단계;
    상기 제2 휴대용 기기의 관리 모드가 활성화되어 있는 경우, 상기 제2 휴대용 기기로부터 화면 공유 허락을 수신했는지를 판단하는 단계;
    상기 화면 공유 허락을 수신한 경우, 상기 제1 영상에 상응하는 상기 제1 영상 데이터를 상기 휴대용 기기로부터 수신하는 단계; 및
    수신된 제1 영상 데이터에 기반하여, 제1 미러링 영상을 상기 디스플레이부 상에 표시하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  9. 제8항에 있어서,
    상기 제2 휴대용 기기의 관리 모드가 비 활성화되어 있는 경우, 상기 제2 휴대용 기기를 통해 상기 제2 단말기가 표시 중인 제2 영상을 공유 중인지 판단하는 단계;
    사이 제1 미러링 영상을 표시하는 단계는
    상기 제2 영상이 공유 중이지 않은 경우, 상기 제1 미러링 영상을 표시하는 단계를 포함하는
    디스플레이 장치의 동작 방법.
  10. 제9항에 있어서,
    상기 제2 휴대용 기기를 통해 상기 제2 영상을 공유 중인 경우, 이를 나타내는 알림을 표시하는 단계를 더 포함하는
    디스플레이 장치의 동작 방법.
  11. 제8항에 있어서,
    휴대용 기기로부터 수신된 영상 데이터를 디코딩하고, 디코딩된 데이터에 기반하여, 미러링 영상을 표시하도록 하는 화면 제어 프로그램을 저장하는 단계를 더 포함하는
    디스플레이 장치의 동작 방법.
  12. 제8항에 있어서,
    상기 제1 휴대용 기기 및 상기 제2 휴대용 기기가 멀티 화면 공유 모드로 동작하는 경우, 상기 제1 미러링 영상 및 상기 제2 단말기가 표시 중인 상기 제2 영상에 기반한 제2 미러링 영상을 분할하여 표시하는 단계를 더 포함하는
    디스플레이 장치의 동작 방법.
  13. 제8항에 있어서,
    상기 제1 휴대용 기기 및 상기 제2 휴대용 기기 중 관리 모드로의 요청을 먼저 수신한 기기를 관리 기기로 식별하는 단계를 더 포함하는
    디스플레이 장치의 동작 방법.
PCT/KR2021/013226 2021-09-15 2021-09-28 디스플레이 장치 및 그의 동작 방법 WO2023042950A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210123410A KR102463351B1 (ko) 2021-09-15 2021-09-15 디스플레이 장치 및 그의 동작 방법
KR10-2021-0123410 2021-09-15

Publications (1)

Publication Number Publication Date
WO2023042950A1 true WO2023042950A1 (ko) 2023-03-23

Family

ID=84101576

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/013226 WO2023042950A1 (ko) 2021-09-15 2021-09-28 디스플레이 장치 및 그의 동작 방법

Country Status (2)

Country Link
KR (1) KR102463351B1 (ko)
WO (1) WO2023042950A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116185326A (zh) * 2023-04-27 2023-05-30 深圳市微克科技有限公司 一种基于智能设备分屏交互的控制方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180041961A (ko) * 2016-10-17 2018-04-25 엘지전자 주식회사 디스플레이 디바이스 및 그 데이터 처리 방법
KR20190035414A (ko) * 2017-09-26 2019-04-03 엘지전자 주식회사 무선 디바이스 및 그의 동작 방법
KR102078867B1 (ko) * 2013-09-17 2020-02-18 삼성전자주식회사 제어권 관리 방법, 그에 따른 클라이언트 기기 및 그에 따른 마스터 기기
KR20210009027A (ko) * 2019-07-16 2021-01-26 유니온시티 주식회사 스크린 스튜디오 다중스크린 제어 방법 및 장치
KR102243220B1 (ko) * 2014-11-07 2021-04-22 현대모비스 주식회사 우선순위를 이용한 차량용 미러링 제어 장치 및 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140140957A (ko) * 2013-05-30 2014-12-10 삼성전자주식회사 화면 데이터의 미러링 방법, 저장 매체 및 전자 장치
KR102389038B1 (ko) * 2015-09-02 2022-04-21 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
KR102490540B1 (ko) * 2018-02-23 2023-01-19 삼성전자주식회사 화면 데이터를 공유하는 전자 장치 및 그 방법
KR20200021735A (ko) * 2018-08-21 2020-03-02 (주)현대에이아이티 다수의 디바이스를 하나의 스크린에 노출하는 미러링 서비스의 제어 관리 방법
KR20210061199A (ko) * 2019-11-19 2021-05-27 삼성전자주식회사 디스플레이 기기, 모바일 기기, 디스플레이 기기의 화면 미러링 방법 및 모바일 기기의 화면 미러링 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102078867B1 (ko) * 2013-09-17 2020-02-18 삼성전자주식회사 제어권 관리 방법, 그에 따른 클라이언트 기기 및 그에 따른 마스터 기기
KR102243220B1 (ko) * 2014-11-07 2021-04-22 현대모비스 주식회사 우선순위를 이용한 차량용 미러링 제어 장치 및 방법
KR20180041961A (ko) * 2016-10-17 2018-04-25 엘지전자 주식회사 디스플레이 디바이스 및 그 데이터 처리 방법
KR20190035414A (ko) * 2017-09-26 2019-04-03 엘지전자 주식회사 무선 디바이스 및 그의 동작 방법
KR20210009027A (ko) * 2019-07-16 2021-01-26 유니온시티 주식회사 스크린 스튜디오 다중스크린 제어 방법 및 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116185326A (zh) * 2023-04-27 2023-05-30 深圳市微克科技有限公司 一种基于智能设备分屏交互的控制方法及系统

Also Published As

Publication number Publication date
KR102463351B1 (ko) 2022-11-04

Similar Documents

Publication Publication Date Title
WO2015012449A1 (en) Electronic device and control method thereof
WO2015041436A1 (en) Method of managing control right, client device therefor, and master device therefor
WO2019074260A1 (en) REMOTE CONTROL, DISPLAY APPARATUS, SYSTEM AND METHOD FOR CONTROLLING THE SAME
EP2994810A1 (en) Method and apparatus for displaying user interface through sub device that is connectable with portable electronic device
WO2015005730A1 (en) Portable device, display apparatus, display system, and method for controlling power of display apparatus thereof
WO2016068654A1 (en) User terminal apparatus, electronic apparatus, system and controlling method thereof
WO2015152614A1 (en) Method of reconnecting master device and slave device
WO2017135776A1 (en) Display apparatus, user terminal apparatus, system, and controlling method thereof
WO2019039795A1 (en) AIR CONDITIONER REPEATER, AIR CONDITIONER SYSTEM AND ITS CONTROL METHOD
WO2017126740A1 (ko) 단말 장치, 원격 제어 시스템 및 제어 방법
WO2020256497A1 (ko) 블루투스 통신 연결 방법 및 그 전자 장치
WO2016052849A1 (en) Display apparatus and system for providing ui, and method for providing ui of display apparatus
WO2017065418A1 (ko) 전자장치 및 그 제어방법
WO2023042950A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2016111502A1 (en) System and method for transmitting information about task to external device
WO2020080675A1 (en) Remote control apparatus and control method thereof
WO2017138708A1 (en) Electronic apparatus and sensor arrangement method thereof
WO2018097442A1 (ko) 모바일 단말을 이용한 화상 형성 장치의 무선 연결 설정 방법 및 이를 수행하기 위한 화상 형성 장치
WO2014178585A1 (ko) 무선 통신을 기반으로 멀티탭을 개별 제어 및 그룹 제어하는 방법 및 무선 통신을 기반으로 개별 제어 및 그룹 제어 되는 멀티탭
WO2017119735A1 (en) Display device and operation method thereof
WO2020080867A1 (en) Display device and control method thereof
WO2019117561A1 (ko) 외부 장치에 따라 다른 서비스를 제공하는 전자 장치
WO2016003119A1 (en) Method of controlling electronic device, electronic device, method of controlling access point and access point
WO2017099338A1 (ko) 사용자 단말 장치 및 그 제어 방법
WO2017047985A1 (en) Display apparatus and method for controlling the same

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21957618

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2021957618

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2021957618

Country of ref document: EP

Effective date: 20240415