KR102084633B1 - 화면 미러링 방법 및 그에 따른 소스 기기 - Google Patents

화면 미러링 방법 및 그에 따른 소스 기기 Download PDF

Info

Publication number
KR102084633B1
KR102084633B1 KR1020130112069A KR20130112069A KR102084633B1 KR 102084633 B1 KR102084633 B1 KR 102084633B1 KR 1020130112069 A KR1020130112069 A KR 1020130112069A KR 20130112069 A KR20130112069 A KR 20130112069A KR 102084633 B1 KR102084633 B1 KR 102084633B1
Authority
KR
South Korea
Prior art keywords
screen
area
menu
display
image data
Prior art date
Application number
KR1020130112069A
Other languages
English (en)
Other versions
KR20150032066A (ko
Inventor
강필섭
함성일
황태환
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130112069A priority Critical patent/KR102084633B1/ko
Priority to EP14846630.3A priority patent/EP3047383B1/en
Priority to CN201480051353.2A priority patent/CN105556495B/zh
Priority to PCT/KR2014/008600 priority patent/WO2015041438A1/en
Priority to US14/487,673 priority patent/US20150082241A1/en
Publication of KR20150032066A publication Critical patent/KR20150032066A/ko
Application granted granted Critical
Publication of KR102084633B1 publication Critical patent/KR102084633B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/14—Handling requests for interconnection or transfer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports

Abstract

화면 미러링 방법 및 그에 따른 디스플레이 기기가 개시된다. 본 발명의 일 실시예에 따른 소스 기기는 제1 화면을 디스플레이하는 디스플레이 부, 제1 화면상에서 제1 영역을 선택받는 입력부, 미러링 서비스가 실행될 때, 상기 제1 영역을 상기 제1 화면에서 상기 제1 영역을 제외한 영역인 제2 영역과 독립적으로 처리하고, 상기 처리를 반영한 상기 제1 화면이 상기 적어도 하나의 싱크 기기에서 미러링되도록 제어하는 제어부, 및 상기 제1 화면에 대응되는 영상 데이터를 전송하는 통신부를 포함하며, 미러링 서비스 이용 시, 사용자의 의도에 따라서 탄력적으로 화면을 변경하여 이용할 수 있다.

Description

화면 미러링 방법 및 그에 따른 소스 기기{METHOD FOR SCREEN MIRRORING, AND SOURCE DEVICE THEREOF}
본원 발명은 화면 미러링 방법 및 그에 따른 소스 기기에 관한 것이다.
보다 상세하게는, 적어도 하나의 디스플레이 기기에서 디스플레이 하는 적어도 하나의 화면을 적어도 하나의 다른 디스플레이 기기에서 미러링하여 디스플레이 하는 방법 및 장치에 관한 것이다.
유무선 통신 네트워크의 발달로, 화면을 디스플레이 하여 사용자가 시각적으로 인식할 수 있는 데이터를 출력하는 전자기기들이 유무선 통신 네트워크를 통하여 상호 연결될 수 있다.
전자기기들 상호간은 유무선 통신 네트워크를 통하여 각종 데이터를 송수신할 수 있으며, 일 전자기기에서 다른 전자기기를 원격으로 제어하거나 일 전자기기를 다른 전자기기를 통하여 이용할 수 있다. 전술한 원격 제어나 전자기기들 간의 공유 이용을 위해서는 미러링(mirroring) 기술이 필요하다.
미러링 기술은 디스플레이 부(display unit)를 가진 장치들 간에 스크린 데이터(screen data)를 공유하고 조작할 수 있는 기술이다. 예를 들어, 미러링 기술은 개인 컴퓨터(personal computer) 간에 스크린 데이터를 공유하여 이용할 수 있도록 한다.
또한, 미러링 기술은 노트북, 넷북 또는 태블릿 PC 등과 같은 휴대용 컴퓨터, 스마트 폰 또는 PDA 와 같은 휴대용 단말기, TV 등과 같이 디스플레이 부를 통하여 화면(screen)을 출력할 수 있는 모든 전자기기에 적용할 수 있도록 널리 개발되고 있다. 다수개의 전자기기들에 미러링 기술을 적용하여, 화면을 공유하고 상호간 원격 제어를 할 수 있도록 하는 미러링 서비스(mirroring service)를 제공할 수 있다. 미러링 서비스를 제공하기 위한 기술로 Daas(Display as a service), 미라캐스트(Miracast) 및 에어플레이(Airplay) 등이 개발되어 있다.
이하에서는, 화면을 공유하여 디스플레이 함으로써 미러링 서비스를 이용할 수 있는 모든 전자기기를 '디스플레이 기기'라 칭한다.
미러링 서비스를 제공하기 위해서는, 영상을 제공하는 기기에서 영상을 제공받는 기기로 소정 영상을 전송한다. 여기서, 영상을 제공하는 기기를 소스 기기(source device) 또는 마스터 기기(master device)라 칭할 수 있으며, 영상을 제공받는 기기를 싱크 기기(sink device) 또는 클라이언트 기기(client device)라 칭할 수 있다. 이하에서는, 영상을 제공하는 기기를 소스 기기라 하고, 영상을 제공받는 기기를 싱크 기기라 한다.
미러링 서비스는 네트워크로 연결된 다수개의 디스플레이 기기들 사이에서 동일한 화면을 공유하여 디스플레이 한다. 즉, 미러링 서비스의 제공에 있어서, 소스 기기는 자체적으로 디스플레이하고 있는 화면을 그대로 싱크 기기로 보내고, 싱크 기기는 수신한 화면을 그대로 디스플레이 한다. 따라서, 미러링 서비스 이용 시, 화면을 일부 변형하여 공유하거나, 사용자의 의도에 맞춰 공유되는 화면을 변경할 수 없었다. 그리고, 사용자의 의도에 맞춰서 공유되는 화면을 변경하려면, 미러링 서비스를 계속하여 이용하지 못하고 중단시켜야 한다.
따라서, 사용자의 의도에 맞춰서 탄력적으로 미러링 서비스를 이용할 수 있는 방법 및 장치를 제공할 필요가 있다.
본원 발명은 미러링 서비스 이용 시, 사용자의 의도에 따라서 탄력적으로 화면을 변경하여 이용할 수 있는 화면 미러링 방법 및 그에 따른 소스 기기의 제공을 목적으로 한다.
본 발명의 일 실시예에 따른 소스 기기는 제1 화면을 디스플레이하는 디스플레이 부, 제1 화면상에서 제1 영역을 선택받는 입력부, 미러링 서비스가 실행될 때, 상기 제1 영역을 상기 제1 화면에서 상기 제1 영역을 제외한 영역인 제2 영역과 독립적으로 처리하고, 상기 처리를 반영한 상기 제1 화면이 상기 적어도 하나의 싱크 기기에서 미러링되도록 제어하는 제어부, 및 상기 제1 화면에 대응되는 영상 데이터를 전송하는 통신부를 포함한다.
또한, 상기 제어부는 상기 제1 영역을 상기 제2 영역과 독립적으로 처리하기 위한 적어도 하나의 메뉴가 디스플레이 되도록 제어할 수 있다.
또한, 상기 제어부는 상기 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나에서 상기 제1 영역의 화면을, 공유하기 위한 메뉴, 숨기기 위한 메뉴, 갱신 금지하기 위한 메뉴, 필기하기 위한 메뉴, 및 편집하기 위한 메뉴 중 적어도 하나를 포함하는 메뉴 화면이 디스플레이되도록 제어할 수 있다.
또한, 상기 제어부는 소정 메뉴가 선택되면, 상기 선택된 메뉴에 따라서 상기 제1 영역의 디스플레이를 처리할 수 있다.
또한, 상기 제어부는 상기 적어도 하의 메뉴 중 소정 메뉴가 선택되면, 상기 선택된 메뉴에 따라서 상기 소스 기기 및 상기 적어도 하나의 싱크 기기의 디스플레이를 처리할 수 있다.
또한, 상기 제어부는 상기 제1 영역의 화면이 상기 적어도 하나의 싱크 기기 중 적어도 하나의 기기와 공유되도록, 상기 제1 화면이 갱신될 때, 상기 공유되는 적어도 하나의 기기가 상기 제1 영역의 화면을 디스플레이하도록 제어할 수 있다.
또한, 상기 디스플레이 부는 상기 적어도 하나의 싱크 기기 중 적어도 하나를 선택하기 위한 기기 선택 메뉴를 디스플레이하며, 상기 입력부는 상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받으며, 상기 제어부는
상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터를 전송시키고, 상기 선택된 기기에서 상기 제1 영역의 화면이 디스플레이되도록 제어할 수 있다.
또한, 상기 제어부는 상기 제1 영역에 대응되는 영상 데이터의 전송을 금지할 수 있다.
또한, 상기 제어부는 상기 적어도 하나의 싱크 기기에서 상기 제1 화면에 대한 미러링 서비스를 요청한 경우, 상기 제1 화면 중 상기 제1 영역의 화면을 제외한 화면에 대응되는 영상 데이터가 상기 적어도 하나의 싱크 기기로 전송되도록 제어할 수 있다.
또한, 상기 디스플레이 부는 상기 적어도 하나의 싱크 기기 중 적어도 하나를 선택하기 위한 기기 선택 메뉴를 디스플레이하며, 상기 입력부는 상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받으며, 상기 제어부는
상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터가 전송되는 것을 금지할 수 있다.
또한, 상기 제어부는 상기 제1 화면이 갱신될 때, 상기 적어도 하나의 싱크 기기가 상기 제1 화면에서 상기 제1 영역을 제외한 영역을 미러링하여 갱신하도록 제어하고, 상기 제1 영역에 대응되는 영역은 갱신되지 않도록 제어할 수 있다.
또한, 상기 디스플레이 부는 상기 적어도 하나의 싱크 기기 중 적어도 하나를 선택하기 위한 기기 선택 메뉴를 디스플레이하며, 상기 입력부는 상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받으며, 상기 제어부는
상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터를 전송시키고, 상기 제1 화면이 갱신될 때, 상기 선택된 기기가 상기 제1 영역을 디스플레이 하도록 제어할 수 있다.
또한, 상기 제어부는 상기 갱신되지 않은 제1 영역 내에 사용자의 필기 입력이 표시되도록 제어할 수 있다.
또한, 상기 입력부는 터치 펜, 마우스 및 손가락 중 어느 하나에 의해서 형성된 폐루프 감지하며, 상기 제어부는 상기 감지된 폐루프에 따라서 상기 제1 영역을 확정할 수 있다.
또한, 상기 제어부는 상기 폐루프가 감지되면, 상기 제1 화면상에서 상기 폐루프의 적어도 하나의 구간의 밝기 및 색상 중 적어도 하나가 변경되어 디스플레이되도록 제어할 수 있다.
또한, 상기 디스플레이부는 상기 제1 영역을 선택하기 위한 적어도 하나의 도형 키를 디스플레이하고, 상기 입력부는 상기 도형 키를 이동 및 확대 또는 축소하여 지정된 영역을 상기 제1 영역으로 선택받을 수 있다.
또한, 본 발명의 일 실시예에 따른 소스 기기는 상기 제1 영역에 디스플레이 되는 영상 데이터를 저장하는 메모리를 더 포함할 수 있다.
또한, 상기 제어부는 타임 머신 메뉴의 실행이 요청되면, 상기 저장된 영상 데이터를 이용하여, 상기 제1 영역이 소정 이전 시점의 화면으로 디스플레이되도록 제어할 수 있다.
본 발명의 일 실시예에 따른 화면 미러링 방법은 적어도 하나의 소스 기기에서 디스플레이 되는 제1 화면을 미러링하여 적어도 하나의 싱크 기기에서 제2 화면을 디스플레이 하는 단계, 상기 제1 화면상에서 제1 영역을 선택하는 단계, 상기 제1 영역을 상기 제1 화면에서 상기 제1 영역을 제외한 영역인 제2 영역과 독립적으로 처리하는 단계, 및 상기 처리를 반영하여, 상기 적어도 하나의 소스 기기에서 제1 화면을 디스플레이하고 상기 적어도 하나의 싱크 기기에서 상기 제1 화면을 미러링하여 상기 제2 화면을 디스플레이 하는 단계를 포함한다.
또한, 상기 독립적으로 처리하는 단계는 상기 제1 영역을 상기 제2 영역과 독립적으로 처리하기 위한 적어도 하나의 메뉴를 디스플레이 하는 단계를 더 포함할 수 있다.
또한, 상기 메뉴를 디스플레이 하는 단계는 상기 적어도 하나의 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나에서 상기 제1 영역의 화면을, 공유하기 위한 메뉴, 숨기기 위한 메뉴, 갱신 금지하기 위한 메뉴, 필기하기 위한 메뉴, 및 편집하기 위한 메뉴 중 적어도 하나를 포함하는 메뉴 화면을 디스플레이 하는 단계를 더 포함할 수 있다.
또한, 상기 처리를 반영하여 디스플레이하는 단계는 상기 적어도 하나의 메뉴 중 소정 메뉴가 선택되면, 상기 선택된 메뉴에 따라서 상기 제1 영역의 디스플레이를 처리하는 단계를 포함할 수 있다.
또한, 상기 처리를 반영하여 디스플레이하는 단계는 상기 선택된 메뉴에 따라서 상기 적어도 하나의 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나의 디스플레이를 처리하는 단계를 더 포함할 수 있다.
또한, 상기 처리를 반영하여 디스플레이하는 단계는 상기 제1 영역의 화면이 상기 적어도 하나의 싱크 기기 및 상기 적어도 하나의 소스 기기 중 적어도 하나의 기기와 공유되도록, 상기 제1 화면이 갱신될 때, 상기 공유되는 적어도 하나의 기기가 상기 제1 영역의 화면을 디스플레이 하는 단계를 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 화면 미러링 방법은 상기 적어도 하나의 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나를 선택하기 위한 기기 선택 메뉴를 디스플레이 하는 단계, 상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받는 단계, 및 상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터를 전송하는 단계를 더 포함할 수 있다. 여기서, 상기 처리를 반영하여 디스플레이 하는 단계는 상기 선택된 기기에서 상기 제1 영역의 화면을 디스플레이 하는 단계를 포함할 수 있다.
또한, 상기 독립적으로 처리하는 단계는 상기 제1 영역에 대응되는 영상 데이터의 전송을 금지하는 단계를 더 포함할 수 있다.
또한, 상기 독립적으로 처리하는 단계는 상기 적어도 하나의 싱크 기기에서 제1 화면에 대한 미러링 서비스를 요청한 경우, 상기 제1 화면 중 상기 제1 영역의 화면을 제외한 화면에 대응되는 영상 데이터를 상기 적어도 하나의 싱크 기기로 전송하는 단계를 더 포함할 수 있다.
또한, 상기 독립적으로 처리하는 단계는 상기 적어도 하나의 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나를 선택하기 위한 기기 선택 메뉴를 디스플레이 하는 단계, 상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받는 단계, 및 상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터가 전송되는 것을 금지하는 단계를 포함할 수 있다.
또한, 상기 처리를 반영하여 디스플레이 하는 단계는 상기 제1 화면이 갱신될 때, 상기 제2 화면 중 상기 제1 영역을 제외한 영역을 상기 제1 화면을 미러링하여 갱신하는 단계, 및 상기 제1 화면이 갱신될 때, 상기 제2 화면 중 상기 제1 영역은 갱신하지 않는 단계를 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 화면 미러링 방법은 상기 적어도 하나의 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나를 포함하는 기기 선택 메뉴를 디스플레이 하는 단계, 상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받는 단계, 및 상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터가 전송하는 단계를 더 포함할 수 있다.
또한, 상기 처리를 반영하여 디스플레이 하는 단계는 상기 제1 화면을 갱신하는 단계, 및 상기 제1 화면이 갱신될 때, 상기 선택된 기기는 상기 제1 영역을 디스플레이 하는 단계를 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 화면 미러링 방법은 상기 갱신되지 않은 제1 영역 내에 사용자의 필기 입력을 표시하여 디스플레이 하는 단계를 더 포함할 수 있다.
또한, 상기 제1 영역을 선택하는 단계는 터치 펜, 마우스 및 손가락 중 어느 하나에 의해서 형성된 폐루프 감지하는 단계, 및 상기 감지된 폐루프에 따라서 상기 제1 영역을 확정하는 단계를 포함할 수 있다.
또한, 상기 제1 영역을 선택하는 단계는 상기 폐루프가 감지되면, 상기 제1 화면상에서 상기 폐루프의 적어도 하나의 구간의 밝기 및 색상 중 적어도 하나를 변경하여 디스플레이 하는 단계를 더 포함할 수 있다.
또한, 상기 제1 영역을 선택하는 단계는 상기 제1 영역 선택을 위한 적어도 하나의 도형 키를 디스플레이 하는 단계, 및 상기 도형 키를 이동 및 확대 또는 축소하여 지정된 영역을 상기 제1 영역으로 선택하는 단계를 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 화면 미러링 방법은 상기 제1 화면에 대응되는 영상 데이터를 상기 적어도 하나의 싱크 기기로 전송하는 단계, 및 상기 적어도 하나의 싱크 기기에서, 수신된 영상 데이터 중 상기 제1 영역에 대응되는 영상 데이터를 저장하는 단계를 더 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 화면 미러링 방법은 타임 머신 메뉴의 실행이 요청되면, 상기 적어도 하나의 싱크 기기에서 상기 저장된 영상 데이터를 이용하여, 상기 제1 영역을 소정 이전 시점의 화면으로 디스플레이 하는 단계를 더 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 화면 미러링 방법은 상기 제1 영역에 대응되는 영상 데이터를 상기 적어도 하나의 소스 기기에 저장하는 단계를 더 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른 화면 미러링 방법은 타임 머신 메뉴의 실행이 요청되면, 상기 적어도 하나의 소스 기기에서 상기 저장된 영상 데이터를 이용하여, 상기 제1 영역을 소정 이전 시점의 화면으로 디스플레이 하는 단계를 더 포함할 수 있다.
도 1은 미러링 연결의 일 예를 나타내는 도면이다.
도 2는 미러링 연결의 다른 예를 나타내는 도면이다.
도 3은 본 발명의 일 실시예에 따른 소스 기기 및 싱크 기기를 나타내는 블록도이다.
도 4는 본 발명의 일 실시예에 따른 화면 미러링 방법을 나타내는 도면이다.
도 5는 본 발명의 일 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 일 도면이다.
도 6은 본 발명의 일 실시예에 따른 화면 미러링 방법의 영역 선택 동작을 설명하기 위한 일 도면이다.
도 7은 본 발명의 일 실시예에 따른 화면 미러링 방법의 영역 선택 동작을 설명하기 위한 다른 도면이다.
도 8은 본 발명의 일 실시예에 따른 화면 미러링 방법의 영역 선택 동작을 설명하기 위한 다른 도면이다.
도 9는 본 발명의 일 실시예에 따른 화면 미러링 방법의 영역 선택 동작을 설명하기 위한 다른 도면이다.
도 10은 본 발명의 다른 실시예에 따른 화면 미러링 방법을 나타내는 도면이다.
도 11은 본 발명의 다른 실시예에 따른 화면 미러링 방법에서 메뉴 선택 및 기기 선택 동작을 설명하기 위한 일 도면이다.
도 12는 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 일 도면이다.
도 13은 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다.
도 14는 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다.
도 15는 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다.
도 16은 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다.
도 17은 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다.
이하에서는, 첨부된 도면을 참조하여 본 발명의 일 실시예에 따른 화면 미러링 방법 및 그에 따른 소스 기기를 상세히 설명한다.
전술한 바와 같이 다수개의 디스플레이 기기들은 상호 연결되어, 상호간을 원격 제어하고 상호 이용을 할 수 있다.
미러링 서비스를 이용하는 다수개의 디스플레이 기기들은 적어도 하나의 소스 기기와 적어도 하나의 싱크 기기를 포함하며, 적어도 하나의 소스 기기와 적어도 하나의 싱크 기기는 유무선의 통신 네트워크를 통하여 상호 연결된다.
이하에서는 도 1 및 도 2를 참조하여, 본 발명의 일 실시예에 따른 디스플레이 기기 및 미러링 서비스를 이용하는 다수개의 디스플레이 기기들 간의 연결 관계를 설명한다.
도 1 및 도 2에 도시된 디스플레이 기기는 디스플레이 부(display unit)를 포함하는 전자기기로, 전술한 바와 같이 노트북, 넷북 또는 태블릿 PC 등과 같은 휴대용 컴퓨터, 스마트 폰 또는 PDA 와 같은 휴대용 단말기, 컴퓨터, 스마트 TV 등이 될 수 있다.
이하에서 기재하는 소스 기기와 싱크 기기는 상대적인 개념으로, 소정 영상 데이터를 보내주는 디스플레이 기기를 소스 기기라 칭할 수 있으며, 소스 기기로부터 소정 영상 데이터를 수신하여 미러링하는 디스플레이 기기를 싱크 기기라 칭할 수 있다.
도 1은 미러링 연결의 일 예를 나타내는 도면이다.
도 1에서는 하나의 소스 기기와 적어도 하나의 싱크 기기가 연결되는 경우를 예로 들어 도시하였다.
도 1의 (a)를 참조하면, 하나의 소스 기기와 하나의 싱크 기기가 1:1 네트워크 토폴로지(network topology)로 연결된다. 구체적으로, 소스 기기(110)는 소정 네트워크(115)를 통하여 싱크 기기(120)와 1:1 네트워크 토폴로지(network topology)로 연결된다.
여기서, 소정 네트워크(115)는 소정 데이터를 송수신할 수 있는 유무선의 통신 네트워크이다. 소정 네트워크(115)는 LAN(local area network), WAN(wide area network), 3G, LTE(Long Term Evolution), WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), CDMA, WCDMA, 근거리 통신(NFC: Near Field Communication) 등과 같이 매우 다양한 통신 네트워크 표준에 따라서 형성될 수 있다.
소스 기기(110)는 소스 기기(110)의 동작을 제어하기 위한 메뉴 화면, 또는 영상을 재생하는 화면 등을 디스플레이 할 수 있다. 소스 기기(110)는 현재 재생되고 있는 화면에 대응되는 영상 데이터를 싱크 기기(120)로 전송한다. 구체적으로, 소스 기기(110)는 현재 재생되고 있는 화면 전체에 대응되는 영상 데이터를 전송할 수 있고, 현재 재생되고 있는 화면을 분할하여 분할된 적어도 하나의 화면에 대응되는 영상 데이터를 전송할 수도 있다.
싱크 기기(120)는 소정 네트워크(115)를 통하여 소스 기기(110)에서 디스플레이 되고 있는 화면에 대응되는 영상 데이터를 전송 받는다. 또한, 싱크 기기(120)는 소스 기기(110)로부터 전송받은 영상 데이터를 디코딩하여 생성된 화면을 디스플레이 할 수 있다.
구체적으로, 싱크 기기(120)는 소스 기기(110)에서 디스플레이 하는 화면(screen)을 단일 또는 다중으로 나누어 전송받는다. 그리고, 싱크 기기(120)는 전송받은 영상 데이터를 이용하여, 소스 기기(110)에서 디스플레이 되고 있는 화면과 동일 대응되는 화면을 디스플레이 할 수 있다. 구체적으로, 싱크 기기(120)는 소스 기기(110)에서 디스플레이 되고 있는 화면의 전체 또는 일부분을 디스플레이 할 수 있다.
도 1의 (b)를 참조하면, 하나의 소스 기기와 다수개의 싱크 기기가 1:n 네트워크 토폴로지(network topology)로 연결된다. 구체적으로, 소스 기기(130)는 소정 네트워크(135)를 통하여 다수개의 싱크 기기(141, 142, 143)와 1:n 네트워크 토폴로지(network topology)로 연결된다.
도 1의 (b)를 참조하면, 하나의 소스 기기(130)는 다수개의 싱크 기기들(141, 142, 143)로 화면 전체를 복사하여 전송하거나, 화면의 소정 영역을 복사하여 전송하거나, 또는 화면의 서로 다른 영역을 각각 전송할 수 있다.
도 1의 (b)에 있어서, 도 1의 (a)와 중복되는 구성 설명은 생략하도록 한다.
도 2는 미러링 연결의 다른 예를 나타내는 도면이다.
구체적으로, 도 2는 다수개의 소스 기기들과 적어도 하나의 싱크 기기가 연결되는 경우를 예로 들어 도시하였다.
도 2의 (a)를 참조하면, 다수개의 소스 기기들(211, 212, 213)과 하나의 싱크 기기(220)가 n:1 네트워크 토폴로지(network topology)로 연결된다. 구체적으로, 소스 기기들(211, 212, 213)은 소정 네트워크(215)를 통하여 싱크 기기(220)와 n:1 네트워크 토폴로지(network topology)로 연결된다.
도 2의 (a)를 참조하면, 다수개의 소스 기기들(211, 212, 213)들 각각은 하나의 싱크 기기(220)로 영상 데이터를 전송한다. 싱크 기기(220)는 수신된 다수개의 영상 데이터에서 특정 영상 데이터에 대응되는 화면을 선택적으로 디스플레이 할 수 있다. 또한, 싱크 기기(220)는 수신된 다수개의 영상 데이터에 포함되는 다수개의 영상을 집합(aggregation)하여 하나의 화면을 생성하여 디스플레이 할 수 있다.
도 2의 (b)를 참조하면, 다수개의 소스 기기들(231, 232, 233)과 다수개의 싱크 기기들(241, 242, 243, 244, 245)이 m:n 네트워크 토폴로지(network topology)로 연결된다. 구체적으로, 다수개의 소스 기기들(231, 232, 233)은 소정 네트워크(235)를 통하여 다수개의 싱크 기기들(241, 242, 243, 244, 245)과 m;n 네트워크 토폴로지(network topology)로 연결된다.
도 2의 (b)를 참조하면, 다수개의 소스 기기들(231, 232, 233)들 각각은 다수개의 싱크 기기들(241, 242, 243, 244, 245)로 영상 데이터를 전송한다. 다수개의 싱크 기기들(241, 242, 243, 244, 245) 각각은 수신된 다수개의 영상 데이터에서 특정 영상 데이터에 대응되는 화면을 선택적으로 디스플레이 할 수 있다. 또한, 다수개의 싱크 기기들(241, 242, 243, 244, 245) 각각은 수신된 다수개의 영상 데이터에 포함되는 다수개의 영상을 집합(aggregation)하여 하나의 화면을 생성하여 디스플레이 할 수 있다.
일반적인 미러링 기술은, 미러링 서비스를 이용하는 도중에, 미러링 화면에서 공유하고 싶지 않은 화면이 있는 경우에도 계속하여 화면을 공유하여야 한다. 즉, 미러링 서비스를 이용하는 도중에, 미러링 화면에서 공유하고 싶지 않은 화면이 있는 경우에는, 미러링 서비스를 잠시 멈춰 다른 디스플레이 기기의 화면이 갱신되지 않도록 하거나, 미러링 서비스 자체를 중단하여야 했다.
즉, 미러링 서비스를 이용하는 모든 디스플레이 기기들은 동일한 화면을 디스플레이 하여야만 하고, 사용자의 의도에 맞춰 미러링 화면을 독립적으로 조작할 수 없어서, 사용자가 이용하는데 불편함이 있었다.
본원 발명의 일 또는 다른 실시예에 따른 화면 미러링 방법 및 그에 따른 싱크 기기는 사용자의 의도에 맞춰, 미러링 서비스를 이용하는 디스플레이 기기들 간에 미러링 화면을 독립적으로 변경할 수 있도록 함으로써, 사용자의 이용 편리성을 증가시킬 수 있다. 이하에서는 도 3 내지 도 17을 참조하여, 사용자의 의도에 더욱 부합할 수 있는 미러링 서비스를 제공하는 방법 및 장치를 상세히 설명한다.
도 3은 본 발명의 일 실시예에 따른 디스플레이 기기를 나타내는 도면이다. 본 발명의 일 실시예에 따른 디스플레이 기기는 전술한 소정 네트워크를 통하여 미러링 서비스를 이용할 수 있는 전자기기로, 소스 기기(310) 또는 싱크 기기(360)가 될 수 있다.
도 3을 참조하면, 본 발명의 일 실시예에 따른 디스플레이 기기는 소스 기기(310) 또는 싱크 기기(360) 중 어느 하나가 될 수 있다. 소스 기기(310) 및 싱크 기기(360)의 상세 구성 및 동작은 동일 유사하나, 미러링 화면을 전송하는 디스플레이 기기를 소스 기기(310)라 하고, 미러링 화면을 전송받는 디스플레이 기기를 싱크 기기(360)라 한다.
또한, 본 발명의 일 또는 다른 실시예에 따른 소스 기기(310) 및 싱크 기기(360)는 도 1 및 도 2에서 전술한 바와 같이, 1:1 네트워크 토폴로지(network topology), 1:n 네트워크 토폴로지(network topology), n:1 네트워크 토폴로지(network topology), 또는 m:n 네트워크 토폴로지(network topology)로 연결될 수 있다.
도 3에서는 소스 기기(310) 및 싱크 기기(360)가 1:1 네트워크 토폴로지(network topology)로 연결된 경우를 예로 들어 도시하였다.
도 3을 참조하면, 소스 기기(310)는 제어부(315), 디스플레이 부(320), 통신부(325) 및 입력부(330)를 포함한다. 또한, 소스 기기(310)는 메모리(335)를 더 포함할 수 있다.
제어부(315)는 영상 데이터를 생성한다. 구체적으로, 제어부(315)는 정지화상 데이터 또는 동화상 데이터와 같은 영상 데이터를 디코딩하여 디스플레이 부(320)에서 디스플레이 될 화면을 생성할 수 있다. 또는, 메뉴 화면, 사용자 인터페이스 화면 등을 생성할 수 있다.
디스플레이 부(320)는 제어부(315)에서 생성한 영상 데이터를 디스플레이 한다. 구체적으로, 제어부(315)에서 생성된 영상 데이터에 대응하는 소정 화면을 입력받고, 이를 디스플레이 패널(display panel)(미도시)을 통하여 출력한다. 이하에서는, 디스플레이 부(320)가 디스플레이하며, 싱크 기기(360)가 미러링하는 화면을 제1 화면이라 한다. 즉, 미러링 서비스 실행 시, 디스플레이 부(320)는 제1 화면을 디스플레이 한다.
통신부(325)는 소정 네트워크(350)를 통하여 연결된 다른 디스플레이 기기들과 데이터를 송수신한다. 구체적으로, 제어부(315)에서 생성된 영상 데이터를 적어도 하나의 다른 디스플레이 기기, 예를 들어, 싱크 기기(360)의 통신부(375)로 전송할 수 있다.
통신부(325)는 유선 또는 무선으로 소정 네트워크(350)에 접속하기 위한 통신 모듈을 포함할 수 있다. 예를 들어, WLAN(Wireless LAN)(Wi-Fi), 3G, LTE(Long Term Evolution), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), CDMA, WCDMA 등이 포함될 수 있다.
또한, 통신부(325)는 근거리 통신 기술(NFC: Near Field Communication)에 따른 통신 모듈을 포함할 수 있다. 그에 따라서, 근접 연결 방식을 지원하여, 소스 기기(310)와 싱크 기기(360)가 인접하거나 접촉하게 되면, 소정 데이터를 송수신할 수도 있다.
입력부(330)는 사용자로부터 소스 기기(310)의 동작을 제어하기 위한 요청, 명령, 또는 기타 데이터를 입력받는다.
입력부(330)는 터치 스크린으로 형성될 수 있다. 구체적으로, 입력부(330)는 디스플레이 패널(display panel)(미도시)과 결합되는 터치 패드(touch pad)(미도시)를 포함하여, 디스플레이 패널로 터치 스크린을 출력하고, 터치 스크린을 통하여 소정 명령을 입력받으면 터치 패드에서 이를 감지할 수 있다.
예를 들어, 입력부(330)가 터치 스크린으로 형성되는 경우, 입력부(330)는 터치 패드와 결합된 디스플레이 패널 상으로 사용자 인터페이스 화면인 메뉴 화면을 출력할 수 있다. 사용자가 메뉴 화면의 소정 지점, 예를 들어, 미러링 서비스 메뉴가 디스플레이 된 지점을 터치하면, 입력부(330)는 터치된 지점을 감지한다. 그리고, 감지된 정보를 제어부(315)로 전송할 수 있다.
그러면, 제어부(315)는 감지된 지점에 표시된 메뉴에 대응되는 사용자의 요청 또는 명령을 인식하며, 인식된 요청 또는 명령을 수행할 수 있다. 예를 들어, 미러링 서비스 메뉴가 디스플레이 된 지점이 터치되면, 미러링 서비스 실행을 요청하는 정보를 제어부(315)로 전송할 수 있다. 또는, 입력부(330)가 터치된 지점에 대한 위치 정보를 제어부(315)로 전송하면, 제어부(315)는 위치 정보에 대응하는 메뉴가 미러링 서비스 메뉴임을 감지하고, 미러링 서비스가 실행되도록 소스 기기 (310)를 제어할 수 있다.
메모리(335)는 각종 데이터, 소스 기기(310)가 동작하는데 필요한 프로그램들, 및 송수신되는 데이터 등을 저장할 수 있다.
구체적으로, 메모리(335)는 소스 기기(310)에서 미러링 서비스 실행 시 전송하는 영상 데이터를 저장할 수 있다. 구체적으로, 제1 화면에 대응되는 영상 데이터에서 선택된 제1 영역의 영상 데이터를 저장할 수 있다.
미러링 서비스 실행 동작은 이하에서 설명한다.
입력부(330)를 통하여 미러링 서비스가 요청되면, 제어부(315)는 요청된 미러링 서비스를 실행시킨다.
구체적으로, 제어부(315)는 현재 디스플레이 되고 있는 화면의 영상 데이터를 엔코딩 및 멀티플렉싱하고, 전송 스트림을 생성한다. 그리고, 통신부(325)는 제어부(315)에서 생성된 전송 스트림을 싱크 기기(360)로 전송한다.
싱크 기기(360)는 소스 기기(310)와 소정 네트워크(350)를 통해 연결된 적어도 하나의 다른 디스플레이 기기로, 소스 기기(310)에서 디스플레이 되는 적어도 하나의 화면을 미러링하여 출력하는 디스플레이 기기이다. 이하에서는 싱크 기기(360)가 미러링하여 디스플레이하는 화면을 '제2 화면'이라 한다.
본 발명의 일 실시예에 따른 소스 기기(310)의 상세 동작을 이하에서 도 4 내지 도 17을 참조하여 설명한다.
싱크 기기(360)는 소스 기기(310)와 동일한 세부 구성인 제어부(365), 디스플레이 부(370), 통신부(375) 및 입력부(380)를 포함한다. 또한, 싱크 기기(360)는 메모리(385)를 더 포함할 수 있다.
제어부(365), 디스플레이 부(370), 통신부(375), 입력부(380), 및 메모리(385)는 각각 전술한 제어부(315), 디스플레이 부(320), 통신부(325), 입력부(330), 및 메모리(335)와 동일 대응되므로, 싱크 기기(360)의 상세 구성에 있어서 소스 기기(310)의 설명에서와 중복되는 설명은 생략한다.
통신부(375)는 적어도 하나의 다른 디스플레이 기기에서 적어도 하나의 영상 데이터를 수신한다. 구체적으로, 통신부(375)는 소스 기기(310)의 통신부(325)와 소정 네트워크(350)를 통하여 유무선으로 연결되며, 통신부(325)에서 전송되는 제1 화면을 포함하는 영상 데이터를 수신한다.
제어부(365)는 수신된 영상 데이터 중 적어도 하나 또는 적어도 하나의 소정 부분에 대응되는 소정 화면을 생성한다. 구체적으로, 제어부(365)는 적어도 하나의 다른 디스플레이 기기인 적어도 하나의 소스 기기들, 예를 들어, 소스 기기(310)에서 디스플레이 되는 적어도 하나의 영상 데이터를 미러링하기 위하여, 수신된 영상 데이터에 대응되는 제2 화면을 생성한다.
또한, 제어부(365)는 영상 데이터에 대응되는 화면 전체를 미러링 할 수도 있고, 수신된 영상 데이터의 일 부분에 대응되는 소정 부분 화면을 미러링 할 수도 있다. 또한, 다수개의 화면에 대응되는 다수개의 영상 데이터를 수신한 경우, 다수개의 영상 데이터 중 적어도 하나를 조합하여 하나의 화면을 생성할 수 있다.
디스플레이 부(370)는 제어부(365)에서 생성된 소정 화면을 디스플레이 한다. 미러링 서비스가 실행되었으므로, 디스플레이 부(370)는 제1 화면을 미러링 한 제2 화면을 디스플레이 한다. 이하에서는, 제2 화면은 제1 화면과 동일한 화면인 경우를 예로 들어 설명한다. 구체적으로, 제2 화면은 제1 화면 자체 또는 일부분을 확대한 화면이 될 수 있다.
또한, 메모리(385)는 소스 기기(310)와의 미러링 서비스 실행 시, 전송하는 영상 데이터를 수신하여 저장할 수 있다. 구체적으로, 제1 화면에 대응되는 영상 데이터를 수신하고, 제1 영상 데이터를 버퍼링하여 저장할 수 있다. 또한, 제1 화면의 영상 데이터 중, 선택된 제1 영역에 대응되는 영상 데이터를 버퍼링하여 저장할 수 있다.
도 4는 본 발명의 일 실시예에 따른 화면 미러링 방법을 나타내는 도면이다.
이하에서는 도 3에 도시된 소스 기기(310) 및 싱크 기기(360)를 참조하여, 본 발명의 일 실시예에 따른 화면 미러링 방법(400)을 설명한다.
본 발명의 일 실시예에 따른 화면 미러링 방법(400)은 적어도 하나의 싱크 기기가 적어도 하나의 소스 기기로부터 적어도 하나의 영상 데이터를 수신하고, 상기 수신된 영상 데이터 중 적어도 하나에 대응되는 화면을 미러링하여 디스플레이 하는 방법이다. 이하에서는, 소스 기기와 싱크 기기가 도 3에서와 같이 1:1 네트워크 토폴로지로 연결된 경우를 예로 들어 설명한다.
도 4를 참조하면, 본 발명의 일 실시예에 따른 화면 미러링 방법(400)은 미러링 서비스를 실행한다. 구체적으로, 적어도 하나의 소스 기기에서 디스플레이 되는 제1 화면을 미러링하여 적어도 하나의 싱크 기기에서 제2 화면을 디스플레이 한다(410 단계). 410 단계의 동작은 제어부(315)의 제어에 따라서 디스플레이 부(320)에서 제1 화면을 디스플레이하고, 제어부(365)의 제어에 따라서 디스플레이 부(370)에서 제2 화면을 디스플레이하여 수행될 수 있다.
410 단계는 이하에서 도 5를 참조하여 상세히 설명한다.
도 5는 본 발명의 일 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 일 도면이다.
도 5를 참조하면, 소스 기기로 태블릿 PC(510)가 도시되었고, 싱크 기기로 스마트 TV(560)가 도시되었다. 예를 들어, 사용자는 태블릿 PC(510)에서 재생되는 동영상 강의를 스마트 TV(560)로 미러링하여 시청할 수 있다.
도 5에 있어서, 태블릿 PC(510) 및 스마트 TV(560)는 각각 도 3의 소스 기기(310) 및 싱크 기기(360)에 동일 대응된다. 따라서, 도 3에서와 중복되는 설명은 생략한다.
미러링 서비스를 실행하기 위해서는 먼저, 싱크 기기(360)의 통신부(375)는 소정 네트워크(350)를 통하여 소스 기기(310)가 디스플레이 하는 화면에 대응되는 적어도 하나의 영상 데이터를 수신한다.
구체적으로, 소스 기기(310)의 디스플레이 부(320)는 영상 데이터, 예를 들어, 동영상 강의를 재생한다. 소스 기기(310)의 입력부(330) 또는 싱크 기기(360)의 입력부(380)로 미러링 서비스가 요청되면, 소스 기기(310)의 제어부(315)는 현재 디스플레이 되고 있는 동영상 강의 화면을 포함하는 영상 데이터를 엔코딩하여 싱크 기기(360)로 전송할 영상 데이터를 생성한다. 그러면, 통신부(325)는 제어부(315)에서 생성된 영상 데이터를 싱크 기기(360)의 통신부(375)로 전송한다.
통신부(375)는 전송되는 영상 데이터를 수신하여 제어부(365)로 전달한다. 제어부(365)는 전달된 영상 데이터를 디코딩하여 디스플레이 될 화면을 생성한다. 디스플레이 부(370)는 제어부(365)에서 생성된 화면을 디스플레이 한다.
도 5를 참조하면, 미러링 서비스가 실행됨에 따라서, 스마트 TV(560)의 화면(565)은 태블릿 PC(510)의 화면(515)을 미러링하여 출력하므로, 화면(565)과 화면(515)은 도시된 바와 같이 동일한 화면이 된다.
소스 기기가 디스플레이하는 제1 화면에 포함되는 소정 영역인 제1 영역을 선택한다(420 단계). 구체적으로, 사용자는 소스 기기(310)의 입력부(330)를 통하여 소정 영역을 선택할 수 있다. 또한, 제어부(315)는 선택된 소정 영역에 대한 정보를 전송받을 수 있다.
420 단계의 상세 동작은 이하에서 도 6 내지 도 10을 참조하여 상세히 설명한다.
도 6은 본 발명의 일 실시예에 따른 화면 미러링 방법의 영역 선택 동작을 설명하기 위한 일 도면이다. 도 6에 도시된 도면은 도 5에 도시된 도면과 동일 대응되며, 도 6에서는 도 5에 비하여 소정 영역의 선택이 추가적으로 표시된다.
구체적으로, 420 단계는 터치 펜, 마우스 및 손가락 중 어느 하나에 의해서 형성된 폐루프(closed loop)를 감지하는 단계(단계 미도시) 및 감지된 폐루프에 따라서 상기 소정 영역을 확정하는 단계(단계 미도시)를 더 포함할 수 있다.
사용자는 소정 영역을 선택하기 위해서 선택하고자 하는 영역을 손가락으로 터치 또는 드래그하여 제1 화면상에서 폐루프를 그릴 수 있다. 또는, 터치 펜 또는 마우스 등과 같은 사용자 입력 수단을 이용하여 폐루프를 그릴 수도 있다. 구체적으로, 입력부(330)를 통하여, 사용자는 폐루프를 입력시킬 수 있다.
사용자가 터치 펜을 이용하여 제1 화면상에서 폐루프(610)를 그린 경우, 도 6에 도시된 바와 같이 사용자의 그리기 동작에 대응되는 폐루프(610)가 제1 화면(515)상에 표시된다. 구체적으로, 소스 기기(310)의 입력부(330)는 사용자의 폐루프 형성 동작을 감지하고, 형성되는 폐루프(610)를 실시간으로 화면(515)에 표시할 수 있다. 또한, 도 6에서와 같이, 제2 화면(565) 상에서도 형성되는 폐루프(660)를 표시할 수 있다. 따라서, 사용자는 싱크 기기(560)의 화면(565)을 보면서도 선택되는 영역을 확인할 수 있다.
이하에서는, 420 단계에서 선택된 영역을 제1 영역이라 하고, 제1 화면상에서 제1 영역을 제외한 영역을 제2 영역이라 한다.
도 7은 본 발명의 일 실시예에 따른 화면 미러링 방법의 영역 선택 동작을 설명하기 위한 다른 도면이다. 도 7에는 소스 기기(310)에서 디스플레이되는 제1 화면(701, 761)이 도시된다. 도 7에 있어서 도시되는 제1 화면(701, 761)은 도 5 및 도 6에서 도시한 소스 기기인 태블릿 PC(510)의 화면(515)과 동일 대응되며, 도 7에서는 도 5 및 도 6에 비하여, 선택영역을 확정하기 위한 구성이 추가적으로 표시된다.
420 단계에 있어서, 폐루프가 감지되면, 제1 화면(710) 상에서 폐루프의 적어도 하나의 구간에서 밝기 및 색상 중 적어도 하나를 변경하여 디스플레이 하는 단계(단계 미도시)를 더 포함할 수 있다.
도 7의 (a)를 참조하면, 사용자가 그리기 동작을 계속하여 완전한 폐루프(705)가 형성되었으면, 형성된 폐루프(705)를 사용자가 보다 쉽게 인식할 수 있도록 깜빡임 또는 강조 표시(710)하여 디스플레이 할 수 있다. 또한, 폐루프(705)를 하이라이트 표시하거나, 색상을 변경시켜 표시할 수도 있다.
구체적으로, 소스 기기(310)의 입력부(330)는 사용자의 그리기 동작에 따라서 생성되는 폐루프를 감지하며, 완전한 폐루프가 형성되면 폐루프를 강조하기 위한 표시를 추가한 화면을 생성하여 디스플레이 할 수 있다.
도 7의 (b)를 참조하면, 제1 화면(761)상에서 제1 영역이 선택되면, 선택된 소정 영역을 최종적으로 확정시키기 위한 메뉴창(770)을 생성하여 디스플레이 할 수 있다.
예를 들어, 입력부(330)는 제1 화면(761)상에서 폐루프 형성이 완료되면, 도시된 바와 같이 '영역확정'(771) 메뉴 및 '선택취소'(772) 메뉴를 포함하는 메뉴창(770)을 출력할 수 있다. 사용자는 출력되는 메뉴창(770)을 이용하여, 선택 영역을 확정시키거나 취소 후 재설정할 수도 있다.
도 8은 본 발명의 일 실시예에 따른 화면 미러링 방법의 영역 선택 동작을 설명하기 위한 다른 도면이다. 도 8에 도시된 도면은 도 5에 도시된 도면과 동일 대응되며, 도 8에서는 도 5에 비하여 소정 영역의 선택이 추가적으로 표시된다.
도 8을 참조하면, 소정 영역의 선택은 도 6에서와 같이 폐루프를 그릴 필요 없이, 도형 툴을 이용하여 수행될 수 있다. 구체적으로, 기 설정된 소정 동작, 예를 들어, 마우스 더블클릭, 연속하여 세 번의 터치, 또는 연속하여 두 번의 터치 후 드레그 등의 동작이 입력부(330)를 통하여 입력되면, 제1 영역을 선택하기 위한 도형이 자동으로 디스플레이 될 수 있다. 그러면, 사용자는 디스플레이 된 도형의 확대 또는 축소하여 소정 영역을 확정할 수 있다.
예를 들어, 사용자가 마우스를 이용하여 제1 화면(515) 중 선택하고 하는 영역의 중심을 더블 클릭하면, 소정 영역의 선택을 위한 도형(860)이 디스플레이 될 수 있다. 또한, 제1 영역의 선택을 위한 도형(810)과 동일한 도형(860)이 제2 화면(565)상에 표시될 수도 있다.
도 9는 본 발명의 일 실시예에 따른 화면 미러링 방법의 영역 선택 동작을 설명하기 위한 다른 도면이다. 도 9에는 싱크 기기의 화면인 제1 화면(901, 961)이 도시된다. 도 9에 있어서 도시되는 제1 화면(901, 961)은 도 5 및 도 6에서 도시한 소스 기기인 태블릿 PC(510)의 화면(515)과 동일 대응되며, 도 9에서는 도 5 및 도 6에 비하여, 선택영역을 확정하기 위한 구성이 추가적으로 표시된다.
또한, 420 단계는 제1 영역 선택을 위한 적어도 하나의 도형 키를 디스플레이 하는 단계(단계 미도시) 및 도형 키를 이동 및 확대 또는 축소하여 지정된 영역을 제1 영역으로 선택하는 단계(단계 미도시)를 더 포함할 수 있다.
도 9의 (a)를 참조하면, 영역 선택을 위한 적어도 하나의 도형 키를 포함하는 메뉴(910)가 제1 화면(901) 상에 디스플레이 될 수 있다.
예를 들어, 메뉴(910)는 대각선 선택 키(911), 도형 키(912), 그리기 키(913) 및 이동 키(914)를 포함할 수 있다. 구체적으로, 대각선 선택 키(911)는 선택하고자 하는 영역의 대각선을 지정하면 그에 대응되는 사각 영역이 선택되는 키이다. 또한, 그리기 키(913)를 이용하여 마우스 등으로 소정 영역을 그릴 수 있으며, 이동 키(914)를 이용하여 도형 키에 의해 형성된 소정 영역의 위치를 이동시킬 수 있다.
도 9의 (b)를 참조하면, 도형 키에 의해 선택된 영역을 확정하기 위한 메뉴가 제1 화면(961) 상에 디스플레이 될 수 있다. 도 9의 (b)에 있어서, 메뉴창(960), '영역확정'(961) 메뉴 및 '선택취소'(962) 메뉴는 각각 도 7의 (b)에 도시된 메뉴창(770), '영역확정'(771) 메뉴 및 '선택취소'(772) 메뉴와 동일 대응되므로, 상세한 설명은 생략한다.
420 단계에서, 소정 영역이 선택되면, 제1 영역을 제1 화면에서 제1 영역을 제외한 영역인 제2 영역과 독립적으로 처리한다(430 단계). 430 단계의 동작은 제어부(315)에서 수행될 수 있다.
430 단계의 처리를 반영하여, 미러링 서비스를 실행한다(440 단계). 구체적으로, 430 단계의 처리를 반영하여, 적어도 하나의 소스 기기에서 제1 화면을 디스플레이하고 적어도 하나의 싱크 기기에서 제1 화면을 미러링하여 제2 화면을 디스플레이한다. 410 단계의 동작은 제어부(315)의 제어에 따라서 디스플레이 부(320)에서 제1 화면을 디스플레이하고, 제어부(365)의 제어에 따라서 디스플레이 부(370)에서 제2 화면을 디스플레이 하여 수행될 수 있다.
430 단계의 독립적 처리는 이하에서 도 10 내지 17을 참조하여 상세히 설명한다.
440 단계에 있어서, 적어도 하나의 싱크 기기는 선택된 제1 영역을 포함하는 제1 화면을 디스플레이 하는 소스 기기(310)와 소정 네트워크를 통하여 유무선으로 현재 연결되어 있거나 연결될 수 있는 디스플레이 기기를 뜻한다. 예를 들어, 적어도 하나의 싱크 기기는 사용자의 설정 또는 소스 기기의 설정에 따라서 특정 기기로 설정 및 자동연결 될 수 있다.
예를 들어, 440 단계는 제1 화면이 갱신될 때, 제2 화면 중 420 단계에서 선택된 제1 영역을 제외한 영역은 제1 화면을 미러링하여 갱신하는 단계, 및 제1 화면이 갱신될 때, 제2 화면 중 제1 영역에 대응되는 영역은 갱신하지 않는 단계를 포함할 수 있다.
도 10은 본 발명의 다른 실시예에 따른 화면 미러링 방법을 나타내는 도면이다. 도 10에 있어서, 1010 단계, 1020 단계, 1070 단계 및 1080 단계는 각각 도 4에서 설명한 410 단계, 420 단계, 430 단계 및 440 단계와 동일 대응된다. 따라서, 도 4에서와 중복되는 설명은 생략한다. 또한, 본 발명의 다른 실시예에 따른 화면 미러링 방법(1000)은 도 3에서 설명한 본 발명의 일 실시예에 따른 디스플레이 기기 내에서 수행될 수 있다. 구체적으로, 소스 기기(310) 및 싱크 기기(360) 중 적어도 하나에서 수행될 수 있다. 따라서, 이하에서는 도 3 및 도 10을 참조하여, 화면 미러링 방법(1000)을 설명한다.
도 10을 참조하면, 화면 미러링 방법(1000)은 1010 단계, 1020 단계, 1030 단계, 1040 단계, 및 1070 단계 및 1080 단계를 포함한다. 또한, 화면 미러링 방법(1000)은 1050 단계 및 1060 단계를 더 포함할 수 있다.
도 10을 참조하면, 화면 미러링 방법(1000)은 적어도 하나의 소스 기기에서 디스플레이 되는 제1 화면을 미러링하여 적어도 하나의 싱크 기기에서 제2 화면을 디스플레이 한다(1010 단계).
제1 화면에 포함되는 제1 영역을 선택한다(1020 단계).
1020 단계에서 소정 영역이 선택되면, 제1 영역의 화면을 제2 영역의 화면과 독립적으로 처리하기 위한 적어도 하나의 메뉴를 디스플레이 한다(1030 단계). 구체적으로, 1030 단계는 적어도 하나의 소스 기기 및 적어도 하나의 싱크 기기 중 적어도 하나에서, 제1 영역의 화면을, 공유하기 위한 메뉴, 숨기기 위한 메뉴, 갱신 금지하기 위한 메뉴, 필기하기 위한 메뉴, 및 편집하기 위한 메뉴 중 적어도 하나를 포함하는 메뉴 화면을 디스플레이 할 수 있다. 1030 단계의 동작은 제어부(315)의 제어에 따라서 입력부(330) 및 디스플레이 부(320)에서 수행될 수 있다. 구체적으로, 입력부(330)는 제1 영역을 선택받고, 전술한 메뉴를 포함하는 사용자 인터페이스 화면을 생성한다. 그러면, 디스플레이 부(320)는 사용자 인터페이스 화면을 디스플레이 할 수 있다.
여기서, 적어도 하나의 소스 기기 및 적어도 하나의 싱크 기기는 선택된 제1 영역을 포함하는 제1 화면을 디스플레이 하는 소스 기기(310)와 소정 네트워크 또는 근거리 통신 등을 통하여 유무선으로 연결되거나 연결될 수 있는 모든 디스플레이 기기를 뜻한다.
1030 단계에서 디스플레이 되는 메뉴는 이하에서 도 11의 (a)를 참조하여 상세히 설명한다.
1030 단계에서 디스플레이 된 메뉴 중 소정 메뉴를 선택받는다(1040 단계). 1040 단계의 동작은 입력부(330)를 통하여 수행될 수 있다.
1040 단계에서 소정 메뉴가 선택되면, 선택된 메뉴에 따라서 제1 화면상에서 제1 영역의 디스플레이를 처리할 수 있다(1070 단계). 구체적으로, 입력부(330)를 통하여 소정 메뉴를 선택받으면, 제어부(315)는 선택된 소정 메뉴에 따른 디스플레이가 이뤄질 수 있도록 제어한다.
또한, 1040 단계에서 소정 메뉴가 선택되면, 선택된 메뉴에 따라서 적어도 하나의 소스 기기 및 적어도 하나의 싱크 기기 중 적어도 하나의 디스플레이를 처리할 수 있다. 구체적으로, 입력부(330)를 통하여 소정 메뉴를 선택받으면, 제어부(315)는 선택된 소정 메뉴에 따른 디스플레이가 이뤄질 수 있도록 적어도 하나의 소스 기기 및 적어도 하나의 싱크 기기 중 적어도 하나로 제어 신호를 전송할 수 있다.
메뉴 선택이 완료되면, 적어도 하나의 소스 기기 및 적어도 하나의 싱크 기기 중 적어도 하나를 선택하기 위한 기기 선택 메뉴를 디스플레이 한다(1050 단계). 1050 단계는 이하에서 도 11의 (b)를 참조하여 상세히 설명한다.
1050 단계에서 디스플레이 된 기기 선택 메뉴를 통하여 적어도 하나의 기기를 선택받는다(1060 단계). 1050 단계 및 1060 단계의 동작은 입력부(330) 및 디스플레이 부(320)에서 수행될 수 있다. 구체적으로, 입력부(330)는 메뉴를 포함하는 사용자 인터페이스 화면을 생성하고, 소정 메뉴를 선택받을 수 있다. 또한, 디스플레이 부(330)는 메뉴 선택을 위한 사용자 인터페이스 화면을 디스플레이 할 수 있다.
선택된 메뉴에 따라서 제1 화면상에서 제1 영역의 디스플레이를 처리할 수 있다(1070 단계). 그리고, 1060 단계에서 선택된 기기로 선택된 메뉴에 따라서 처리된 제1 영역을 포함하는 영상 데이터를 전송할 수도 있다.
계속하여, 1040 단계에서 선택된 메뉴에 따라서 적어도 하나의 소스 기기에서 제1 화면을 디스플레이하고 적어도 하나의 싱크 기기에서 상기 제1 화면을 미러링하여 제2 화면을 디스플레이 하는 한다(1080 단계).
이하에서는 도 11 내지 도 14를 참조하여, 1040 단계 내지 1080 단계의 동작을 상세히 설명한다.
도 11은 본 발명의 다른 실시예에 따른 화면 미러링 방법에서 메뉴 선택 및 기기 선택 동작을 설명하기 위한 일 도면이다. 도 11의 (a) 및 (b)는 소스기기(1100)에서 디스플레이되는 제1 화면을 도시한다.
도 12는 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 일 도면이다. 도 12에 있어서, 제1 화면을 디스플레이 하는 소스 기기(1210) 및 제2 화면을 디스플레이 하는 싱크 기기(1220)는 각각 도 3에서 설명한 소스 기기(310) 및 싱크 기기(360)와 동일 대응된다. 또한, 도 12에 있어서, 디스플레이 기기들(1230, 1240, 1250)은 제1 화면을 디스플레이 하는 소스 기기(1220)와 소정 네트워크(1260)를 통하여 연결될 수 있는 적어도 하나의 싱크 기기 또는 적어도 하나의 소스 기기가 될 수 있다.
도 11의 (a)를 참조하면, 소스 기기(310)는 제1 영역의 선택이 완료되면, 메뉴 리스트(1115)를 디스플레이 할 수 있다. 구체적으로, 메뉴 리스트(1115)는 팝업창 형태로 출력될 수 있다.
메뉴 리스트(1115)는 공유 메뉴(1120), 숨기기 메뉴(1121), 갱신 금지 메뉴(1122), 필기 메뉴(1123), 편집 메뉴(1124), 및 타임 머신 메뉴(1125) 중 적어도 하나를 포함할 수 있다.
430 단계에서의 독립적 처리는 전술한 메뉴 리스트(1115)에 포함되는 메뉴에 따른 처리를 의미한다. 각 메뉴에 다른 처리는 이하에서 상세히 설명한다.
도 11의 (b)를 참조하면, 메뉴 선택이 완료되면 기기 선택을 위한 메뉴인 '기기 선택 리스트'(1160)를 디스플레이 할 수 있다. 기기 선택 리스트(1160)에는 소스 기기(310)와 통신 네트워크를 통하여 연결되어 있거나, 현재는 연결되어 있지 않더라도 연결될 수 있는 디스플레이 기기의 목록이 포함된다. 예를 들어, 컴퓨터(1161), 핸드폰(1162), TV(1163) 등의 디스플레이 기기들이 기기 선택 리스트(1160)에 포함될 수 있으며, 사용자는 기기 선택 리스트(1160)에 포함된 적어도 하나의 기기를 선택하고, 선택된 기기에서 1040 단계에서 선택된 메뉴에 따라 화면 디스플레이를 수행하게 된다.
구체적으로, 공유 메뉴(1120)는 선택된 제1 영역(1130)의 화면이 적어도 하나의 싱크 기기 및 적어도 하나의 소스 기기 중 적어도 하나의 기기와 공유되도록 하기 위한 메뉴이다. 구체적으로, 소스 기기(310)가 디스플레이 하는 제1 화면이 갱신될 때, 공유되는 적어도 하나의 기기가 제1 영역(1130)의 화면을 디스플레이 하도록 한다. 여기서, 공유되는 기기는 1060 단계에서 선택된 기기일 수 있다.
도 12를 참조하면, 1030 단계에서 공유 메뉴(1120)가 선택되면, 제1 영역(1221)의 화면은 다른 디스플레이 기기(1240)와 공유될 수 있다. 구체적으로, 도 12에 도시된 바와 같이, 다른 디스플레이 기기(1240)는 소정 영역(1221)의 화면 B를 동일하게 디스플레이 할 수 있다. 여기서, 다른 디스플레이 기기(1240)는 미러링 서비스로 연결된 싱크 기기 또는 소스 기기 일 수 있다. 또한, 소스 기기(1210)와 미러링 서비스로 연결된 전자기기 이외에, 통신 네트워크를 통하여 연결될 있는 디스플레이 기기일 수 있다.
숨기기 메뉴(1121)는 제1 화면에 포함되는 제1 영역(1130)의 화면이 다른 기기와 공유되지 않도록, 제1 영역에 디스플레이되는 영상 데이터의 전송을 금지하기 위한 메뉴이다. 따라서, 소스 기기(310)와 소정 네트워크를 통해서 연결될 수 있는 다른 디스플레이 기기에서 미러링 서비스를 요청한 경우, 제1 화면 중 제1 영역의 화면을 제외한 화면에 대응되는 영상 데이터를 상기 다른 디스플레이 기기로 전송한다. 이 경우, 미러링 서비스를 요청한 다른 디스플레이 기기는 소스 기기(310)의 제2 영역 화면을 미러링하여 출력하나, 제1 영역에서 디스플레이되는 화면은 미러링 할 수 없다.
구체적으로, 1040 단계에서 숨기기 메뉴(1121)가 선택되면, 다른 디스플레이 기기로 제1 화면 중 제1 영역에 대응되는 영상 데이터가 전송되는 것을 금지할 수 있다. 여기서, 다른 디스플레이 기기(1250)는 1060 단계에서 선택된 기기일 수 있다.
도 12를 참조하면, 1030 단계에서 숨기기 메뉴(1121) 가 선택되면, 다른 디스플레이 기기(1250)가 소스 기기(1210)로 미러링 서비스를 요청하더라도, 소정 영역(1221)을 제외한 화면 A 화면만을 미러링하여 디스플레이 할 수 있다.
갱신 금지 메뉴(1122)는 소스 기기(310)에서 디스플레이 되는 제1 화면이 갱신될 때, 소스 기기(310)에서 디스플레이 되는 제1 화면 중 제1 영역(1130)에 디스플레이되는 화면은 갱신하지 않도록 하기 위한 메뉴이다.
또한, 갱신 금지 메뉴(1122)는 소스 기기(310)에서 디스플레이 되는 제1 화면이 갱신될 때, 소스 기기(310)를 미러링하는 다른 디스플레이 기기의 화면 중 제1 영역(1130)에 동일 대응되는 위치의 영역에서 디스플레이되는 화면은 갱신하지 않도록 하기 위한 메뉴일 수 있다. 이 경우, 갱신 금지 메뉴(1122)가 선택되면, 기기 선택 메뉴(1160)를 디스플레이하고, 디스플레이 된 기기 선택 메뉴(1160)를 이용하여 소정 영역의 갱신을 금지하고자 하는 소정 기기를 선택할 수 있다. 그러면, 선택된 기기에서 디스플레이 되는 화면 중 제1 영역(1130)에 대응되는 영역은 제1 영역(1130)의 화면을 디스플레이하고 나머지 화면은 제1 화면을 미러링하여 갱신한다. 이 때, 소스 기기(310)는 선택된 기기로 갱신되지 않은 제1 영역(1130)을 포함하는 미러링 화면을 전송할 수 있다.
또한, 갱신 금지 메뉴(1122)는 소스 기기(310)에서 디스플레이 되는 제1 화면이 갱신될 때, 소스 기기(310)를 미러링하는 다른 디스플레이 기기의 화면 자체를 갱신하지 않도록 하기 위한 메뉴일 수 있다. 이 경우, 갱신 금지 메뉴(1122)가 선택되면, 기기 선택 메뉴(1160)를 디스플레이하고, 디스플레이 된 기기 선택 메뉴(1160)를 이용하여 화면 갱신을 금지하고자 하는 소정 기기를 선택할 수 있다. 그러면, 선택된 기기의 화면은 제1 화면을 미러링하여 갱신되지 않으며, 갱신되지 않은 제1 영역(1130)의 화면을 디스플레이 할 수 있다. 이 때, 소스 기기(310)는 선택된 기기로 제1 영역(1130)의 영상 데이터를 전송하며, 선택된 기기는 전송된 제1 영역(1130)의 영상 데이터를 이용해 갱신되지 않은 제1 영역(1130)의 화면을 디스플레이하게 된다.
갱신 금지 메뉴(1122)에 따른 동작은 이하에서 도 13을 참조하여 상세히 설명한다.
도 13은 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다.
도 13의 (a)를 참조하면, 화면(1310)은 t1 시점에서 소스 기기(310)가 디스플레이 하는 화면이고, 화면(1320)은 t1 시점에 후속하는 t2 시점에서 소스 기기(310)가 디스플레이 하는 화면이다.
도 13의 (b)를 참조하면, 화면(1330)은 t1 시점에서 싱크 기기(360)가 디스플레이 하는 화면이고, 화면(1340)은 t2 시점에서 싱크 기기(360)가 디스플레이 하는 화면이다.
또한, 전술한 갱신 금지 메뉴(1122)가 선택되고 기기 선택 리스트(1160)를 통하여 소정 기기가 선택된 경우, 화면(1330) 및 화면(1340) 각각은 t1 및 t2 시점에서, 선택된 기기를 통해서 출력되는 화면이 될 수 있다.
도 13의 (a) 및 (b)를 참조하면, 소스 기기(310)는 t1 시점에서 제1 화면(1310)을 디스플레이하고, 소스 기기(310)와 소정 네트워크(350)와 연결된 싱크 기기(360)는 제1 화면(1310)을 미러링하여 제2 화면(1330)을 디스플레이 한다(1010 단계). 따라서, 제1 화면(1310)과 제2 화면(1330)은 동일한 화면이 된다.
1020 단계에서, 제1 화면(1310)에 디스플레이 되는 제1 영역(1311)이 선택된다. 그리고, 갱신 금지 메뉴(1122)가 선택될 수 있다(1040 단계). 그리고, 선택된 제1 영역(1311)에 대한 표시는 제2 화면(1330)에서도 디스플레이될 수 있다.
t1 시점에 후속하는 t2 시점에서 제1 화면(1310)이 갱신되어 다른 화면(1320)이 디스플레이 된다.
소스 기기(310)는 제1 영역(1311)은 갱신시키지 않고, 나머지 영역의 화면 만을 갱신하여 디스플레이한다. 따라서, t2 시점에 디스플레이되는 제1 화면(1320)에는 갱신되지 않은 제1 영역(1321)의 화면이 포함된다.
또한, 싱크 기기(360)의 화면은 소스 기기(310)의 화면을 미러링하므로, 제2 화면(1340)은 제1 화면(1320)에 맞춰 갱신된다. 여기서, 싱크 기기(360)가 갱신 금지 메뉴를 실행할 기기로 선택된 경우, 소정 영역(1341)은 갱신되지 않고, t1 시점에서 소정 영역(1331)에 디스플레이 된 화면을 그대로 유지하게 될 수 있다.
필기 메뉴(1123)는 제1 화면에 포함되는 제1 영역(1130)의 화면상에 사용자의 필기 입력을 표시하여 디스플레이하기 위한 메뉴이다. 또한, 필기 메뉴(1123)는 갱신 금지 메뉴(1122)에서 설명한 갱신되지 않은 제1 영역(1130)의 화면상에 필기 입력을 표시하여 디스플레이하기 위한 메뉴일 수 있다.
필기 메뉴(1123)에 따른 동작은 이하에서 도 14를 참조하여 상세히 설명한다.
도 14는 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다.
도 14의 (a)를 참조하면, 화면(1410)은 t1 시점에서 소스 기기(310)가 디스플레이 하는 화면이고, 화면(1420)은 t1 시점에 후속하는 t2 시점에서 소스 기기(310)가 디스플레이 하는 화면이다.
도 14의 (b)를 참조하면, 화면(1430)은 t1 시점에서 싱크 기기(360)가 디스플레이 하는 화면이고, 화면(1440)은 t2 시점에서 싱크 기기(360)가 디스플레이 하는 화면이다.
또한, 전술한 필기 메뉴(1123)가 선택되고 기기 선택 리스트(1160)를 통하여 소정 기기가 선택된 경우, 화면(1430) 및 화면(1440) 각각은 t1 및 t2 시점에서, 선택된 기기를 통해서 출력되는 화면이 될 수 있다.
도 14의 (a) 및 (b)를 참조하면, 소스 기기(310)는 t1 시점에서 제1 화면(1310)을 디스플레이하고, 소스 기기(310)와 소정 네트워크(350)와 연결된 싱크 기기(360)는 제1 화면(1410)을 미러링하여 제2 화면(1430)을 디스플레이 한다(1010 단계). 따라서, 제1 화면(1410)과 제2 화면(1430)은 동일한 화면이 된다.
1020 단계에서, 제1 화면(1410)에 디스플레이 되는 소정 영역(1431)이 선택된다. 그리고, 필기 메뉴(1123)가 선택될 수 있다(1040 단계). 또한, 소정 영역(1411) 상에 사용자의 필기 입력이 표시될 수 있다.
t1 시점에 후속하는 t2 시점에서 제1 화면(1410)이 갱신되어 다른 화면(1420)이 디스플레이 된다.
도 14의 (a)에 도시된 예에서, 소스 기기(310)는 필기 입력이 표시된 제1 영역(1411)은 갱신하지 않고, 제2 영역에 대한 화면만을 갱신하여, 화면(1420)을 디스플레이할 수 있다.
싱크 기기(360)의 화면은 소스 기기(310)의 화면을 미러링하므로, 제2 화면(1440)은 제1 화면(1420)에 맞춰 갱신된다. 필기 메뉴(1123)가 선택되고 기기 선택 메뉴에서 싱크 기기(360)가 선택된 경우, 싱크 기기(360)가 디스플레이하는 화면(1440)에 있어서, 제1 영역(1441)에 디스플레이 된 사용자의 필기 입력은 갱신되지 않고 유지될 수 있다.
편집 메뉴(1124)는 선택된 제1 영역의 화면을 편집하기 위한 메뉴이다. 구체적으로, 편집 메뉴(1124)는 사용자가 선택된 제1 영역(1130)에 대하여 위치 이동, 영역 크기 조절, 영역 형태 조절, 및 기존 영역 삭제 등의 작업을 수행할 수 있도록 하는 메뉴이다. 또한, 편집 메뉴(1124)가 선택되면, 후속하여 편집의 위한 툴 바(tool bar)가 디스플레이 될 수 있다. 예를 들어, 툴 바는 제1 영역(1130)에 인접하여 팝업 창 형태로 디스플레이 될 수 있다.
구체적으로, 위치 이동 작업은 사용자가 선택한 제1 영역(1130)의 위치를 제1 화면(1110) 상에서 이동시킬 수 있다. 영역 크기 조절 작업은 선택한 영역의 크기를 조절 할 수 있다. 또한, 멀티 터치 등의 사용자의 다양한 제스처를 통해 선택한 영역의 회전 등의 동작을 수행할 수도 있다. 영역 형태 조절 작업은 소정 영역의 형태를 다양한 모양의 도형 등으로 수정할 수 있다.
또한, 편집 메뉴(1124)에 의해서 제1 영역(1130)이 편집된 경우, 후속하여 전술한 메뉴 리스트(1115)에 포함된 메뉴들을 실행할 수도 있다. 예를 들어, 제1 영역(1130)이 편집된 후, 편집된 제1 영역(1130)을 공유하거나 갱신 금지시킬 수도 있다.
타임 머신 메뉴(1125)는 1020 단계에서 선택된 제1 영역(1130)에 대하여 이전의 소정 시점에서 재생된 화면으로 시간 이동(time shifting)하여 재생하도록 하기 위한 메뉴이다. 타임 머신 메뉴(1125)에 따른 처리는 이하에서 도 15 및 도 16을 참조하여 상세히 설명한다.
도 15는 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다. 구체적으로, 도 15는 소스 기기에서 타임 머신 메뉴를 실행하는 동작을 나타내는 플로우차트이다. 도 15에 있어서, 1510 단계 및 1520 단계의 동작은 각각 도 4에서 도시된 410 및 420 단계의 동작과 동일 대응되므로, 상세 설명은 생략한다.
소스 기기(310)의 메모리(335)는 제1 영역에 디스플레이 되는 영상 데이터를 저장한다(1530 단계). 구체적으로, 메모리(335)는 제1 영역에 디스플레이되는 영상 데이터를 소정 시간 동안 저장할 수 있다. 또는 메모리(335)는 사용자가 미러링 서비스를 실행하는 동안에 제1 영역에 디스플레이되는 영상 데이터를 저장해 놓을 수 있다.
타이 머신 메뉴(1125)가 선택되어 타임 머신 기능의 실행이 요청되면(1540 단계), 제어부(315)는 메모리(335)에 저장된 제1 영역의 영상 데이터를 이용하여, 제1 영역을 소정 이전 시점의 화면으로 디스플레이할 수 있다(1550 단계). 소정 이전 시점의 제1 영역 화면은 디스플레이 부(335)에서 디스플레이될 수 있다. 또한, 소정 이전 시점의 제1 영역 화면은 미러링 되어 싱크 기기(360)의 디스플레이 부(370)에서 디스플레이될 수도 있다.
도 16은 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 다른 도면이다. 구체적으로, 도 16은 싱크 기기에서 타임 머신 메뉴를 실행하는 동작을 나타내는 플로우차트이다. 도 16에 있어서, 1620 단계 및 1630 단계의 동작은 각각 도 4에서 도시된 410 및 420 단계의 동작과 동일 대응되므로, 상세 설명은 생략한다.
소스 기기(310)의 제어부(315)가 미러링 서비스 실행을 위하여 제1 화면에 대응되는 영상 데이터를 싱크 기기(360)로 전송한다(1610 단계).
전송된 영상 데이터를 이용하여 미러링 서비스를 실행한다(1620 단계). 그리고, 소스 기기(310)에서 제1 영역이 선택된다(1630 단계).
그러면, 싱크 기기(360)의 메모리(385)에서 수신된 영상 데이터 중 제1 영역에 디스플레이되는 영상 데이터를 저장할 수 있다(1640 단계).
싱크 기기(360)의 제어부(365)는 타임 머신 기능의 실행이 요청되면(1650 단계), 메모리(385)에 저장된 영상 데이터를 이용하여, 제1 영역을 소정 이전 시점의 화면으로 디스플레이 할 수 있다(1660 단계).
예를 들어, 미러링 서비스 이용 중, 사용자가 중간에 확인하지 못하고 지나간 내용이 있는 경우, 타임 머신 메뉴(1125)를 이용하여 일정 시간 이내에서 재생되었던 화면으로 회귀하여 재생시킬 수 있다. 예를 들어, 학생이 동영상 강의를 듣다가 중간에 강사가 칠판에 기재한 내용을 놓쳤을 경우, 사용자인 학생은 타임 머신 메뉴(1125)를 이용하여 칠판에 기재된 내용을 다시 확인할 수 있다.
도 17은 본 발명의 다른 실시예에 따른 화면 미러링 방법의 상세 동작을 설명하기 위한 일 도면이다. 도 17은 타임 머신 메뉴가 실행된 경우, 소스 기기(310) 또는 싱크 기기(360)가 디스플레이하는 화면을 도시한다.
도 17에 있어서, 소정 영역(1730)은 도 11에서 전술한 제1 영역(1130)과 동일 대응된다.
도 17을 참조하면, 소정 영역(1730)에 대하여 타임 머신 기능이 요청되면, 타임 테이블 재생 메뉴(1740)가 화면(1710) 상에 디스플레이 된다. 사용자는 타임 테이블 재생 메뉴(1740)를 조작하여, 이전의 소정 시점에서 디스플레이 된 제1 영역의 화면을 다시 디스플레이할 수 있다. 또한, 화면(1710) 상에는 타임 머신 기능이 수행중임을 알리는 표시(1720)가 디스플레이 될 수 있다.
전술한 바와 같이, 본 발명의 일 또는 다른 실시예에 따른 화면 미러링 방법 및 그에 따른 소스 기기는 사용자의 의도에 맞춰서 미러링 서비스 이용시 미러링되는 화면을 변경하여 이용할 수 있다. 그에 따라서, 본 발명의 일 또는 다른 실시예에 따른 화면 미러링 방법 및 그에 따른 소스 기기는 사용자의 의도에 보다 부합하며, 다양하게 미러링 서비스를 이용할 수 있다.
그리고, 본 발명의 일 또는 다른 실시예에 따른 화면 미러링 방법은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드 또는 프로그램으로서 구현하는 것도 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 하드디스크, 플로피디스크, 플래쉬 메모리, 광 데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드로서 저장되고 실행될 수 있다.
이상의 설명은 본 발명의 일 실시예에 불과할 뿐, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진자는 본 발명의 본질적 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현할 수 있을 것이다. 따라서, 본 발명의 범위는 전술한 실시예에 한정되지 않고 특허 청구 범위에 기재된 내용과 동등한 범위내에 있는 다양한 실시 형태가 포함되도록 해석되어야 할 것이다.
110, 130, 310: 소스 기기
115, 135, 215, 235, 350: 소정 네트워크
120, 220, 360: 싱크 기기
315, 365: 제어부
320, 370: 디스플레이 부
325, 375: 통신부
330, 380: 입력부
510: TV
560: 태블릿 PC

Claims (37)

  1. 제1 화면을 디스플레이하는 디스플레이 부;
    상기 제1 화면에 포함되는 부분 영역인 제1 영역을 선택받는 입력부;
    적어도 하나의 싱크 기기에서 상기 제1 화면을 미러링하여 디스플레이 하도록 하는 미러링 서비스가 실행될 때, 상기 제1 영역이 선택되면 상기 제1 영역의 화면의 갱신을 금지하기 위한 갱신 금지 메뉴가 디스플레이 되도록 제어하고,
    상기 갱신 금지 메뉴가 선택되면, 상기 제1 화면이 갱신될 때 상기 제1 화면에 포함되는 상기 제1 영역의 화면은 상기 적어도 하나의 싱크 기기에서 갱신되지 않고 상기 제1 화면에서 상기 제1 영역을 제외한 제2 영역은 갱신되어 상기 적어도 하나의 싱크 기기에서 출력되도록, 갱신되지 않은 상기 제1 영역 및 갱신된 상기 제2 영역의 화면을 포함하는 영상 데이터가 상기 적어도 하나의 싱크 기기로 전송되도록 제어하는 제어부; 및
    상기 영상 데이터를 전송하는 통신부를 포함하는 것을 특징으로 하는 소스 기기.
  2. 제1항에 있어서, 상기 제어부는
    상기 갱신 금지 메뉴를 포함하며, 상기 제1 영역을 상기 제2 영역과 독립적으로 처리하기 위한 적어도 하나의 메뉴가 디스플레이 되도록 제어하는 것을 특징으로 하는 소스 기기.
  3. 제2항에 있어서, 상기 제어부는
    상기 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나에서 상기 제1 영역의 화면을, 공유하기 위한 메뉴, 숨기기 위한 메뉴, 필기하기 위한 메뉴, 및 편집하기 위한 메뉴 중 적어도 하나, 및 상기 갱신 금지 메뉴를 포함하는 메뉴 화면이 디스플레이되도록 제어하는 것을 특징으로 하는 소스 기기.
  4. 제2항에 있어서, 상기 제어부는
    소정 메뉴가 선택되면, 상기 선택된 메뉴에 따라서 상기 제1 영역의 디스플레이를 처리하는 것을 특징으로 하는 소스 기기.
  5. 제4항에 있어서, 상기 제어부는
    상기 적어도 하나의 메뉴 중 소정 메뉴가 선택되면, 상기 선택된 메뉴에 따라서 상기 소스 기기 및 상기 적어도 하나의 싱크 기기의 디스플레이를 처리하는 것을 특징으로 하는 소스 기기.
  6. 제1항에 있어서, 상기 제어부는
    상기 제1 영역의 화면이 상기 적어도 하나의 싱크 기기 중 적어도 하나의 기기와 공유되도록,
    상기 제1 화면이 갱신될 때, 상기 공유되는 적어도 하나의 기기가 상기 제1 영역의 화면을 디스플레이하도록 제어하는 것을 특징으로 하는 소스 기기.
  7. 제6항에 있어서,
    상기 디스플레이 부는
    상기 적어도 하나의 싱크 기기 중 적어도 하나를 선택하기 위한 기기 선택 메뉴를 디스플레이하며,
    상기 입력부는
    상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받으며,
    상기 제어부는
    상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터를 전송시키고, 상기 선택된 기기에서 상기 제1 영역의 화면이 디스플레이되도록 제어하는 것을 특징으로 하는 소스 기기.
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 제1항에 있어서,
    상기 디스플레이 부는
    상기 적어도 하나의 싱크 기기 중 적어도 하나를 선택하기 위한 기기 선택 메뉴를 디스플레이하며,
    상기 입력부는
    상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받으며,
    상기 제어부는
    상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터를 전송시키고, 상기 제1 화면이 갱신될 때, 상기 선택된 기기가 상기 제1 영역을 디스플레이 하도록 제어하는 것을 특징으로 하는 소스 기기.
  13. 제1항에 있어서, 상기 제어부는
    상기 갱신되지 않은 제1 영역 내에 사용자의 필기 입력이 표시되도록 제어하는 것을 특징으로 하는 소스 기기.
  14. 제1항에 있어서,
    상기 입력부는
    터치 펜, 마우스 및 손가락 중 어느 하나에 의해서 형성된 폐루프 감지하며,
    상기 제어부는
    상기 감지된 폐루프에 따라서 상기 제1 영역을 확정하는 것을 특징으로 하는 소스 기기.
  15. 제14항에 있어서, 상기 제어부는
    상기 폐루프가 감지되면, 상기 제1 화면상에서 상기 폐루프의 적어도 하나의 구간의 밝기 및 색상 중 적어도 하나가 변경되어 디스플레이되도록 제어하는 것을 특징으로 하는 소스 기기.
  16. 제1항에 있어서,
    상기 디스플레이부는
    상기 제1 영역을 선택하기 위한 적어도 하나의 도형 키를 디스플레이하고,
    상기 입력부는
    상기 도형 키를 이동 및 확대 또는 축소하여 지정된 영역을 상기 제1 영역으로 선택받는 것을 특징으로 하는 소스 기기.
  17. 제1항에 있어서,
    상기 제1 영역에 디스플레이 되는 영상 데이터를 저장하는 메모리를 더 포함하며,
    상기 제어부는
    타임 머신 메뉴의 실행이 요청되면,
    상기 저장된 영상 데이터를 이용하여, 상기 제1 영역이 소정 이전 시점의 화면으로 디스플레이되도록 제어하는 것을 특징으로 하는 소스 기기.
  18. 적어도 하나의 소스 기기에서 디스플레이 되는 제1 화면을 미러링하여 적어도 하나의 싱크 기기에서 제2 화면을 디스플레이 하는 단계;
    상기 제1 화면에 포함되는 부분 영역인 제1 영역을 선택하는 단계;
    적어도 하나의 싱크 기기에서 상기 제1 화면을 미러링하여 디스플레이 하도록 하는 미러링 서비스가 실행될 때, 상기 제1 영역이 선택되면 상기 제1 영역의 화면의 갱신을 금지하기 위한 갱신 금지 메뉴를 디스플레이 하는 단계; 및
    상기 갱신 금지 메뉴가 선택되면, 상기 제1 화면이 갱신될 때 상기 제1 화면에 포함되는 상기 제1 영역의 화면은 상기 적어도 하나의 싱크 기기에서 갱신되지 않고 상기 제1 화면에서 상기 제1 영역을 제외한 제2 영역은 갱신되어 상기 적어도 하나의 싱크 기기에서 출력되도록, 갱신되지 않은 상기 제1 영역 및 갱신된 상기 제2 영역의 화면을 포함하는 영상 데이터를 상기 적어도 하나의 싱크 기기로 전송하는 단계를 포함하는 것을 특징으로 하는 화면 미러링 방법.
  19. 제18항에 있어서, 상기 독립적으로 처리하는 단계는
    상기 갱신 금지 메뉴를 포함하며, 상기 제1 영역을 상기 제2 영역과 독립적으로 처리하기 위한 적어도 하나의 메뉴를 디스플레이 하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.
  20. 제19항에 있어서, 상기 메뉴를 디스플레이 하는 단계는
    상기 적어도 하나의 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나에서 상기 제1 영역의 화면을, 공유하기 위한 메뉴, 숨기기 위한 메뉴, 갱신 금지하기 위한 메뉴, 필기하기 위한 메뉴, 및 편집하기 위한 메뉴 중 적어도 하나, 및 상기 갱신 금지 메뉴를 포함하는 메뉴 화면을 디스플레이 하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.
  21. 제19항에 있어서, 상기 처리를 반영하여 디스플레이하는 단계는
    상기 적어도 하나의 메뉴 중 소정 메뉴가 선택되면, 상기 선택된 메뉴에 따라서 상기 제1 영역의 디스플레이를 처리하는 단계를 포함하는 것을 특징으로 하는 화면 미러링 방법.
  22. 제21항에 있어서, 상기 처리를 반영하여 디스플레이하는 단계는
    상기 선택된 메뉴에 따라서 상기 적어도 하나의 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나의 디스플레이를 처리하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 제18항에 있어서,
    상기 적어도 하나의 소스 기기 및 상기 적어도 하나의 싱크 기기 중 적어도 하나를 포함하는 기기 선택 메뉴를 디스플레이 하는 단계;
    상기 기기 선택 메뉴를 통하여 상기 적어도 하나의 기기를 선택받는 단계; 및
    상기 선택된 기기로 상기 제1 영역에 대응되는 영상 데이터를 전송하는 단계를 더 포함하며,
    상기 처리를 반영하여 디스플레이 하는 단계는
    상기 제1 화면을 갱신하는 단계; 및
    상기 제1 화면이 갱신될 때, 상기 선택된 기기는 상기 제1 영역을 디스플레이 하는 단계를 포함하는 것을 특징으로 하는 화면 미러링 방법.
  30. 제18항에 있어서,
    상기 갱신되지 않은 제1 영역 내에 사용자의 필기 입력을 표시하여 디스플레이 하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.
  31. 제18항에 있어서, 상기 제1 영역을 선택하는 단계는
    터치 펜, 마우스 및 손가락 중 어느 하나에 의해서 형성된 폐루프 감지하는 단계; 및
    상기 감지된 폐루프에 따라서 상기 제1 영역을 확정하는 단계를 포함하는 것을 특징으로 하는 화면 미러링 방법.
  32. 제31항에 있어서, 상기 제1 영역을 선택하는 단계는
    상기 폐루프가 감지되면, 상기 제1 화면상에서 상기 폐루프의 적어도 하나의 구간의 밝기 및 색상 중 적어도 하나를 변경하여 디스플레이 하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.
  33. 제18항에 있어서, 상기 제1 영역을 선택하는 단계는
    상기 제1 영역을 선택하기 위한 적어도 하나의 도형 키를 디스플레이 하는 단계; 및
    상기 도형 키를 이동 및 확대 또는 축소하여 지정된 영역을 상기 제1 영역으로 선택하는 단계를 포함하는 것을 특징으로 하는 화면 미러링 방법.
  34. 제18항에 있어서,
    상기 제1 화면에 대응되는 영상 데이터를 상기 적어도 하나의 싱크 기기로 전송하는 단계; 및
    상기 적어도 하나의 싱크 기기에서, 상기 전송된 영상 데이터 중 상기 제1 영역에 대응되는 영상 데이터를 저장하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.
  35. 제34항에 있어서,
    타임 머신 메뉴의 실행이 요청되면,
    상기 적어도 하나의 싱크 기기에서 상기 저장된 영상 데이터를 이용하여, 상기 제1 영역을 소정 이전 시점의 화면으로 디스플레이 하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.
  36. 제18항에 있어서,
    상기 제1 영역에 대응되는 영상 데이터를 상기 적어도 하나의 소스 기기에 저장하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.
  37. 제36항에 있어서,
    타임 머신 메뉴의 실행이 요청되면,
    상기 적어도 하나의 소스 기기에서 상기 저장된 영상 데이터를 이용하여, 상기 제1 영역을 소정 이전 시점의 화면으로 디스플레이 하는 단계를 더 포함하는 것을 특징으로 하는 화면 미러링 방법.





KR1020130112069A 2013-09-17 2013-09-17 화면 미러링 방법 및 그에 따른 소스 기기 KR102084633B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020130112069A KR102084633B1 (ko) 2013-09-17 2013-09-17 화면 미러링 방법 및 그에 따른 소스 기기
EP14846630.3A EP3047383B1 (en) 2013-09-17 2014-09-16 Method for screen mirroring and source device thereof
CN201480051353.2A CN105556495B (zh) 2013-09-17 2014-09-16 用于屏幕镜像的方法及其源设备
PCT/KR2014/008600 WO2015041438A1 (en) 2013-09-17 2014-09-16 Method for screen mirroring and source device thereof
US14/487,673 US20150082241A1 (en) 2013-09-17 2014-09-16 Method for screen mirroring and source device thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130112069A KR102084633B1 (ko) 2013-09-17 2013-09-17 화면 미러링 방법 및 그에 따른 소스 기기

Publications (2)

Publication Number Publication Date
KR20150032066A KR20150032066A (ko) 2015-03-25
KR102084633B1 true KR102084633B1 (ko) 2020-03-04

Family

ID=52669197

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130112069A KR102084633B1 (ko) 2013-09-17 2013-09-17 화면 미러링 방법 및 그에 따른 소스 기기

Country Status (5)

Country Link
US (1) US20150082241A1 (ko)
EP (1) EP3047383B1 (ko)
KR (1) KR102084633B1 (ko)
CN (1) CN105556495B (ko)
WO (1) WO2015041438A1 (ko)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6092702B2 (ja) * 2013-04-25 2017-03-08 京セラ株式会社 通信端末、および情報送信方法
KR102066226B1 (ko) * 2013-11-01 2020-01-14 엘지전자 주식회사 전자기기 및 이를 구비하는 통신 시스템
JP6003939B2 (ja) * 2014-04-15 2016-10-05 コニカミノルタ株式会社 画像処理連携システムと連携方法、携帯端末装置及び画像処理連携プログラム
KR20150142347A (ko) * 2014-06-11 2015-12-22 삼성전자주식회사 사용자 단말 및 이의 제어 방법, 그리고 멀티미디어 시스템
TWI616808B (zh) * 2014-06-30 2018-03-01 緯創資通股份有限公司 分享顯示畫面的方法及裝置
KR102269481B1 (ko) * 2014-10-17 2021-06-28 삼성전자주식회사 디바이스 간에 화면 공유 방법 및 이를 이용하는 디바이스
US9992307B2 (en) * 2015-02-03 2018-06-05 Google Llc Interoperability of discovery and connection protocols between client devices and first screen devices
CN105760127A (zh) * 2016-02-19 2016-07-13 浙江吉利控股集团有限公司 一种传屏方法、传屏装置及移动终端
KR102542122B1 (ko) * 2016-04-01 2023-06-09 엘지전자 주식회사 영상표시장치
CN106020753B (zh) * 2016-05-06 2019-03-29 联想(北京)有限公司 控制方法及电子设备
WO2017193328A1 (en) * 2016-05-12 2017-11-16 Qualcomm Incorporated Human interface device and automatic calibration for back-controlling source device during remote screen casting session
US10999331B1 (en) * 2016-07-06 2021-05-04 Google Llc Reverse discovery and pairing of client devices to a media device
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
JP6565878B2 (ja) * 2016-11-25 2019-08-28 トヨタ自動車株式会社 表示システム
KR102656574B1 (ko) * 2017-01-10 2024-04-12 삼성전자주식회사 전자 장치 및 이를 포함하는 차량
WO2018144027A1 (en) 2017-02-06 2018-08-09 Hewlett-Packard Development Company, L.P. Mirroring of screens
KR20180135190A (ko) * 2017-06-12 2018-12-20 모브리진 주식회사 웹 또는 클라우드 환경의 클라이언트간 동기화된 화면보기를 위한 방법 및 시스템
KR20190021016A (ko) * 2017-08-22 2019-03-05 삼성전자주식회사 전자 장치 및 그 제어 방법
KR102481894B1 (ko) * 2017-11-06 2022-12-28 삼성전자 주식회사 전자 장치 및 이를 이용한 화면 공유 방법
US10732916B2 (en) * 2017-11-28 2020-08-04 Ncr Corporation Multi-device display processing
US11049053B2 (en) * 2018-03-29 2021-06-29 Ricoh Company, Ltd. Communication terminal, sharing system, communication method, and non-transitory recording medium storing program
WO2019212575A1 (en) * 2018-04-30 2019-11-07 Ramzi Khalil Maalouf System, apparatus, and method for optimizing viewing experience on an intelligent terminal
US10760728B1 (en) 2018-09-25 2020-09-01 Ramzi Khalil Maalouf Stand for a terminal system with adjustable screen orientation
US10994411B2 (en) * 2018-10-10 2021-05-04 Aipps, Llc. Mobile phone robot
KR20200084587A (ko) * 2019-01-03 2020-07-13 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
CN111666119B (zh) * 2019-03-06 2023-11-21 华为终端有限公司 Ui组件显示的方法及电子设备
KR102339367B1 (ko) * 2019-04-18 2021-12-16 삼성전자주식회사 디스플레이 장치, 사용자 단말 장치 및 디스플레이 장치와 사용자 단말 장치 의 제어 방법
CN111831243A (zh) 2019-04-18 2020-10-27 三星电子株式会社 显示装置、用户终端装置、以及装置的控制方法
CN110022161A (zh) * 2019-04-23 2019-07-16 京东方科技集团股份有限公司 发射器、发射设备、传输设备和无线投屏的方法
KR20200136256A (ko) 2019-05-27 2020-12-07 삼성전자주식회사 전자 장치 및 그의 제어 방법
WO2022025751A1 (en) * 2020-07-28 2022-02-03 Mimos Berhad A system and method for mirroring and distributing a presentation content
CN114077411A (zh) * 2020-08-11 2022-02-22 华为技术有限公司 数据传输方法和设备
CN114237779A (zh) * 2020-09-09 2022-03-25 华为技术有限公司 一种显示窗口的方法、切换窗口的方法、电子设备和系统
CN113094011B (zh) * 2021-03-26 2023-12-26 联想(北京)有限公司 屏幕分享方法、装置、设备及计算机可读存储介质
CN116301516A (zh) * 2021-12-21 2023-06-23 北京小米移动软件有限公司 一种应用共享方法及装置、电子设备、存储介质
CN114125526B (zh) * 2021-12-24 2024-03-15 北京淳中科技股份有限公司 一种屏幕镜像方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070106952A1 (en) 2005-06-03 2007-05-10 Apple Computer, Inc. Presenting and managing clipped content
US20070219981A1 (en) * 2006-03-02 2007-09-20 Motoyuki Takaai Electronic conference system, electronic conference support method, electronic conference support device, and conference server
WO2009140766A1 (en) * 2008-05-21 2009-11-26 Smart Technologies Ulc Desktop sharing method and system
US20110225544A1 (en) 2010-03-09 2011-09-15 AI Squared Flexible display of visual content on multiple display devices
US20130081089A1 (en) 2011-09-26 2013-03-28 Soyoung KIM Contents sharing method and display apparatus using the same
US20130159874A1 (en) * 2011-12-14 2013-06-20 International Business Machines Corporation Variable refresh rates for portions of shared screens
US20130236125A1 (en) * 2012-03-08 2013-09-12 Pantech Co., Ltd. Source device and method for selectively displaying an image

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101300882B1 (ko) * 2006-10-27 2013-08-27 엘지전자 주식회사 타임머신 기능을 가지는 영상표시기기 및 그 제어 방법
KR100983481B1 (ko) * 2007-07-06 2010-09-27 엔에이치엔(주) 복수의 편집 어플리케이션에 의해 편집되는 화상 데이터에 대한 정보를 공유하는 방법 및 시스템
KR20120015931A (ko) * 2010-08-13 2012-02-22 삼성전자주식회사 휴대용 전자 장치 및 그것의 디스플레이 미러링 방법
JP2012128480A (ja) * 2010-12-13 2012-07-05 Canon Inc 画面共有システムおよびその制御方法
EP2490113B1 (en) * 2011-02-15 2016-11-23 Lg Electronics Inc. Display device and method of controlling operation thereof
KR101890850B1 (ko) * 2011-03-30 2018-10-01 삼성전자주식회사 3ｄ 뷰를 포함하는 가이드를 표시하는 전자 장치 및 그 가이드 표시 방법
JP5892408B2 (ja) * 2011-09-26 2016-03-23 日本電気株式会社 画面共有表示システム、画面共有表示方法、およびプログラム
US9632648B2 (en) * 2012-07-06 2017-04-25 Lg Electronics Inc. Mobile terminal, image display device and user interface provision method using the same

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070106952A1 (en) 2005-06-03 2007-05-10 Apple Computer, Inc. Presenting and managing clipped content
US20070219981A1 (en) * 2006-03-02 2007-09-20 Motoyuki Takaai Electronic conference system, electronic conference support method, electronic conference support device, and conference server
WO2009140766A1 (en) * 2008-05-21 2009-11-26 Smart Technologies Ulc Desktop sharing method and system
US20110225544A1 (en) 2010-03-09 2011-09-15 AI Squared Flexible display of visual content on multiple display devices
US20130081089A1 (en) 2011-09-26 2013-03-28 Soyoung KIM Contents sharing method and display apparatus using the same
US20130159874A1 (en) * 2011-12-14 2013-06-20 International Business Machines Corporation Variable refresh rates for portions of shared screens
US20130236125A1 (en) * 2012-03-08 2013-09-12 Pantech Co., Ltd. Source device and method for selectively displaying an image

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Mechanism and User Interface for Remote Mirroring of Application Windows, IBM Technical Disclosure Bulletin(1993.6)

Also Published As

Publication number Publication date
EP3047383A1 (en) 2016-07-27
EP3047383B1 (en) 2019-12-04
CN105556495A (zh) 2016-05-04
US20150082241A1 (en) 2015-03-19
CN105556495B (zh) 2020-03-27
EP3047383A4 (en) 2017-05-17
WO2015041438A1 (en) 2015-03-26
KR20150032066A (ko) 2015-03-25

Similar Documents

Publication Publication Date Title
KR102084633B1 (ko) 화면 미러링 방법 및 그에 따른 소스 기기
KR102230708B1 (ko) 사용자 인터렉션을 제공하는 사용자 단말 장치 및 그 방법
US11163425B2 (en) User terminal apparatus and management method of home network thereof
US20190095014A1 (en) System and method of page sharing by a device
US10564813B2 (en) User terminal apparatus and management method of home network thereof
US11592968B2 (en) User terminal apparatus and management method of home network thereof
US9507482B2 (en) Electronic slide presentation controller
US20110145745A1 (en) Method for providing gui and multimedia device using the same
KR102078867B1 (ko) 제어권 관리 방법, 그에 따른 클라이언트 기기 및 그에 따른 마스터 기기
US10579218B2 (en) Application producing apparatus, system, method, and non-transitory computer readable medium
JP6364893B2 (ja) 端末装置、電子ホワイトボードシステム、電子ホワイトボードの入力支援方法、及びプログラム
CN103914258A (zh) 移动终端及其操作方法
JP5925046B2 (ja) 情報処理装置、情報処理装置の制御方法、およびプログラム
KR102368044B1 (ko) 사용자 단말 장치 및 이의 제어 방법
KR20150095537A (ko) 사용자 단말 장치 및 이의 디스플레이 방법
US20160253087A1 (en) Apparatus and method for controlling content by using line interaction
WO2018001115A1 (zh) 滑动控件控制方法及装置、滑块选择器
US20190065030A1 (en) Display apparatus and control method thereof
US20140145969A1 (en) System and method for graphic object management in a large-display area computing device
KR20140135884A (ko) 디스플레이 장치 및 그 제어방법
US10303346B2 (en) Information processing apparatus, non-transitory computer readable storage medium, and information display method
US20230123119A1 (en) Terminal, control method therefor, and recording medium in which program for implementing method is recorded
JP6293903B2 (ja) 情報を表示するための電子機器および方法
JP6209868B2 (ja) 情報端末、情報処理プログラム、情報処理システム、及び情報処理方法
US20220121355A1 (en) Terminal, method for controlling same, and recording medium in which program for implementing the method is recorded

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant