KR102364620B1 - 영상표시장치, 및 그 동작방법 - Google Patents

영상표시장치, 및 그 동작방법 Download PDF

Info

Publication number
KR102364620B1
KR102364620B1 KR1020150012235A KR20150012235A KR102364620B1 KR 102364620 B1 KR102364620 B1 KR 102364620B1 KR 1020150012235 A KR1020150012235 A KR 1020150012235A KR 20150012235 A KR20150012235 A KR 20150012235A KR 102364620 B1 KR102364620 B1 KR 102364620B1
Authority
KR
South Korea
Prior art keywords
application
image
mobile terminal
execution icon
information
Prior art date
Application number
KR1020150012235A
Other languages
English (en)
Other versions
KR20160091743A (ko
Inventor
이재경
이은정
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020150012235A priority Critical patent/KR102364620B1/ko
Priority to US15/003,268 priority patent/US10474322B2/en
Priority to EP16000159.0A priority patent/EP3048799B1/en
Priority to CN201610052063.0A priority patent/CN105828170B/zh
Publication of KR20160091743A publication Critical patent/KR20160091743A/ko
Application granted granted Critical
Publication of KR102364620B1 publication Critical patent/KR102364620B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227Providing Remote input by a user located remotely from the client device, e.g. at work
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173End-user applications, e.g. Web browser, game

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Software Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명은 영상표시장치, 및 그 동작방법에 관한 것이다. 본 발명의 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기로부터 디바이스 정보, 실행 중인 애플리케이션 정보, 및 실행 중인 애플리케이션 이미지를 수신하는 인터페이스부와, 이동 단말기에 대한 미러링 모드인 경우, 수신되는 애플리케이션 이미지를 표시하도록 제어하며, 실행된 애플리케이션 정보에 기초하여, 해당 애플리케이션에 대한 실행 아이콘을 생성하고, 생성된 실행아이콘을 표시하도록 제어하는 제어부를 포함한다. 이에 의해, 이동 단말기와 영상표시장치 사이의 미러링시, 실행 아이콘을 간편하게 생성하여 표시할 수 있게 된다.

Description

영상표시장치, 및 그 동작방법{Image display apparatus, and method for operating the same}
본 발명은 영상표시장치, 및 그 동작방법에 관한 것이며, 더욱 상세하게는 이동 단말기와 영상표시장치 사이의 미러링시, 실행 아이콘을 간편하게 생성하여 표시할 수 있는 영상표시장치, 및 그 동작방법에 관한 것이다.
영상표시장치는 사용자가 시청할 수 있는 영상을 제공하는 기능을 갖춘 장치이다. 사용자는 영상표시장치를 통하여 방송을 시청할 수 있다. 영상표시장치는 방송국에서 송출되는 방송신호 중 사용자가 선택한 방송을 제공하며, 이러한 방송 영상은 디스플레이에 표시된다. 현재 방송은 전세계적으로 아날로그 방송에서 디지털 방송으로 전환하고 있는 추세이다.
디지털 방송은 디지털 영상 및 음성 신호를 송출하는 방송을 의미한다. 디지털 방송은 아날로그 방송에 비해, 외부 잡음에 강해 데이터 손실이 작으며, 에러 정정에 유리하며, 해상도가 높고, 선명한 화면을 제공한다. 또한, 디지털 방송은 아날로그 방송과 달리 양방향 서비스가 가능하다.
본 발명의 목적은, 이동 단말기와 영상표시장치 사이의 미러링시, 실행 아이콘을 간편하게 생성하여 표시할 수 있는 영상표시장치, 및 그 동작방법을 제공함에 있다.
본 발명의 다른 목적은, 이동 단말기와 영상표시장치 사이의 미러링시, 영상표시장치에서 선택된 실행 아이콘에 의해 간편하게 미러링이 수행될 수 있는 영상표시장치, 및 그 동작방법을 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기로부터 디바이스 정보, 실행 중인 애플리케이션 정보, 및 실행 중인 애플리케이션 이미지를 수신하는 인터페이스부와, 이동 단말기에 대한 미러링 모드인 경우, 수신되는 애플리케이션 이미지를 표시하도록 제어하며, 실행된 애플리케이션 정보에 기초하여, 해당 애플리케이션에 대한 실행 아이콘을 생성하고, 생성된 실행아이콘을 표시하도록 제어하는 제어부를 포함한다.
또한, 상기 목적을 달성하기 위한 본 발명의 다른 실시예에 따른 영상표시장치는, 디스플레이와, 이동 단말기와 데이터를 교환하는 인터페이스부와, 애플리케이션 리스트 표시 입력에 따라, 애플리케이션 리스트가 표시되도록 제어하며, 애플리케이션 리스트 중 이동 단말기와의 미러링이 가능한 실행 아이콘이 선택되는 경우, 이동 단말기로, 실행 아이콘에 대응하는 애플리케이션 정보를 전송하도록 제어하는 제어부를 포함한다.
또한, 상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상표시장치의 동작방법은, 이동 단말기로부터 디바이스 정보, 실행 중인 애플리케이션 정보, 및 실행 중인 애플리케이션 이미지를 수신하는 단계와, 수신되는 이미지를 표시하는 단계와, 애플리케이션이 전환되거나 종료되는 경우, 애플리케이션에 대한 실행 아이콘을 생성하는 단계와, 생성된 실행 아이콘을 표시하는 단계를 포함한다.
본 발명의 일실시예에 따르면, 영상표시장치는, 디스플레이와, 이동 단말기로부터 디바이스 정보, 실행 중인 애플리케이션 정보, 및 실행 중인 애플리케이션 이미지를 수신하는 인터페이스부와, 이동 단말기에 대한 미러링 모드인 경우, 수신되는 애플리케이션 이미지를 표시하도록 제어하며, 실행된 애플리케이션 정보에 기초하여, 해당 애플리케이션에 대한 실행 아이콘을 생성하고, 생성된 실행아이콘을 표시하도록 제어하는 제어부를 포함함으로써, 이동 단말기와 영상표시장치 사이의 미러링시, 실행 아이콘을 간편하게 생성하여 표시할 수 있게 된다.
특히, 실행 중인 애플리케이션의 종료시 해당 애플리케이션에 대한 실행 아이콘을 생성함으로써, 사용자의 이용편의성이 증대될 수 있게 된다.
한편, 영상표시장치는, 복수의 이동 단말기에 대해서, 미러링 수행시, 각각의 이동 단말기에서 실행된 애플리케이션에 대한 실행 아이콘을 생성하여 표시할 수 있으며, 이에 따라, 사용자의 이용편의성이 증대될 수 있게 된다.
이때, 수신되는 사용자 정보에 따라, 표시할 실행 아이콘을 달리함으로써, 사용자에 적합한 실행 아이콘을 제공할 수 있게 되어, 사용자의 이용편의성이 증대될 수 있게 된다.
한편, 애플리케이션 이미지는 방송 영상과 함께 표시될 수 있으며, 이에 따라, 방송 영상 시청과 함께, 이동 단말기에서, 실행되는 애플리케이션에 대한 이미지를 대형 화면을 통해, 시청할 수 있게 된다.
한편, 복수의 이동 단말기로부터 각각 실행 중인 애플리케이션 이미지를 수신하는 경우, 복수의 애플리케이션 이미지를 화면 분할하여 표시 가능하며, 이에 따라, 각 사용자 별로, 원하는 이미지를 시청할 수 있게 된다.
본 발명의 다른 일실시예에 따르면, 영상표시장치는, 디스플레이와, 이동 단말기와 데이터를 교환하는 인터페이스부와, 애플리케이션 리스트 표시 입력에 따라, 애플리케이션 리스트가 표시되도록 제어하며, 애플리케이션 리스트 중 이동 단말기와의 미러링이 가능한 실행 아이콘이 선택되는 경우, 이동 단말기로, 실행 아이콘에 대응하는 애플리케이션 정보를 전송하도록 제어하는 제어부를 포함함으로써, 이동 단말기와 영상표시장치 사이의 미러링시, 영상표시장치에서 선택된 실행 아이콘에 의해 간편하게 미러링이 수행될 수 있게 된다.
도 1은 본 발명의 일 실시예에 따른 영상표시장치를 도시한 도면이다.
도 2는 도 1의 영상표시장치의 내부 블록도의 일예이다.
도 3은 도 2의 제어부의 내부 블록도의 일예이다.
도 4a는 도 2의 원격제어장치의 제어 방법을 도시한 도면이다.
도 4b는 도 2의 원격제어장치의 내부 블록도이다.
도 5는 도 1의 이동 단말기의 내부 블록도이다.
도 6은 본 발명의 실시예에 따른 영상표시장치의 동작방법의 일예를 보여주는 순서도이다.
도 7a 내지 도 10c는 도 6의 동작방법을 설명하기 위해 참조되는 도면이다.
도 11은 본 발명의 다른 실시예에 따른 영상표시장치의 동작방법의 일예를 보여주는 순서도이다.
도 12a 내지 도 13f는 도 11의 동작방법을 설명하기 위해 참조되는 도면이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.
도 1은 본 발명의 실시예에 따른 영상표시장치와 이동 단말기를 도시한 도면이다.
도면을 참조하면, 영상표시장치(100)와 이동 단말기(600)는, 미러링(mirrorring)을 수행할 수 있다.
도면에서는, 이동 단말기(600)에서 실행되는 갤러리 애플리케이션에 대한 갤러리 이미지(840a)에 대한 무선 신호(Saib)가, 영상표시장치(100)로 전송되어, 영상표시장치(100)에, 갤러리 애플리케이션에 대응하여 확대된 갤러리 이미지(840b)가 표시되는 것을 예시한다.
이동 단말기(600)의 디스플레이(도 5의 680)의 크기 보다, 영상표시장치(100)의 디스플레이(180)의 크기가 훨씬 크므로, 사용자는, 미러링을 통해, 확대된 이미지를 시청할 수 있게 된다.
이러한 미러링 수행 방법의 일예로, 이동 단말기(600)에서 미러링 모드가 선택되는 경우, 이동 단말기(600)가 영상표시장치(100)에 무선으로 페어링 신호(pairing signal)를 전송하고, 영상표시장치(100)가 페어링 신호에 대응하여, 페어링 응답 신호(pairing response signal)를 전송함으로써, 이동 단말기(600)와 영상표시장치(100)가 서로 접속할 수 있다.
이때, 이동 단말기(600)는, 페어링 신호 외에, 디바이스 아이디(device ID)를 포함하는 디바이스 정보(device inforamtion)를 포함할 수 있다.
접속 이후, 이동 단말기(600)는, 실행 중인 미러링과 관련된 애플리케이션 이미지를 무선으로 영상표시장치(100)로 전송할 수 있다. 예를 들어, 미라캐스트(miracast) 방식에 따라, Wi-Fi를 통해, 애플리케이션 이미지를 무선으로 영상표시장치(100)로 전송할 수 있다.
한편, 본 발명에서는, 사용자의 이용 편의를 위해, 영상표시장치(100)를 중심으로, 미러링 모드가 수행되도록 한다.
구체적으로, 영상표시장치(100)는, 이동 단말기(600)에 대한 미러링 모드인 경우, 수신되는 애플리케이션 이미지를 표시하며, 실행된 애플리케이션 정보에 기초하여, 해당 애플리케이션에 대한 실행 아이콘을 생성하고, 생성된 실행아이콘을 표시한다.
특히, 영상표시장치(100)는, 미러링 모드 종료 이후, 실행된 애플리케이션 정보에 기초하여, 해당 애플리케이션에 대한 실행 아이콘을 생성하고, 생성된 실행아이콘을 표시할 수 있다. 이와 같이, 실행 중인 애플리케이션의 종료시 해당 애플리케이션에 대한 실행 아이콘을 생성함으로써, 사용자의 이용편의성이 증대될 수 있게 된다.
한편, 영상표시장치(100)는, 표시되는 실행 아이콘이 선택되는 경우, 이동 단말기(600)에서, 실행 아이콘에 대응하는 애플리케이션이 실행되도록, 이동 단말기(600)로, 실행 아이콘에 대응하는 애플리케이션 정보를 전송할 수 있다. 이에 따라, 영상표시장치(100)에서 선택된 실행 아이콘에 의해 간편하게 미러링이 수행될 수 있게 된다.
한편, 영상표시장치(100)는, 이동 단말기(600)로부터, 수신 또는 실행된 순서에 따라, 복수의 애플리케이션에 대응하는 복수의 아이콘을 정렬하여 표시할 수 있다.
한편, 영상표시장치(100)는, 수신되는 사용자 정보에 따라, 사용자 정보에 대응하는 실행 아이콘을 표시할 수 있다. 이에 따라, 사용자에 적합한 실행 아이콘을 제공할 수 있게 되어, 사용자의 이용편의성이 증대될 수 있게 된다.
한편, 영상표시장치(100)는, 복수의 이동 단말기(600)로부터, 각각 디바이스 정보, 실행 중인 애플리케이션 정보, 및 실행 중인 애플리케이션 이미지를 수신하며, 복수의 이동 단말기(600)로부터 수신되는 복수의 애플리케이션 이미지를 화면 분할하여 디스플레이에 표시할 수 있다. 이에 따라, 각 사용자 별로, 원하는 이미지를 시청할 수 있게 된다.
한편, 영상표시장치(100)는, 제1 시간에, 이동 단말기(600)로부터 디바이스 정보, 실행 중인 제1 어플리케이션 정보, 및 실행 중인 제1 애플리케이션 이미지를 수신하고, 제1 시간에 후속하는 제2 시간에, 이동 단말기(600)로부터 디바이스 정보, 실행 중인 제1 어플리케이션 정보, 및 실행 중인 제1 애플리케이션 이미지를 수신하며, 제1 시간과 제2 시간 사이의 시간 차이가 소정 시간 이하인 경우, 제1 애플리케이션 이미지와 제2 애플리케이션 이미지를 화면 분할하여 디스플레이에 표시할 수 있다. 즉, 미러링 모드에서, 타임머신 기능을 활용하여, 화면 분할 표시함으로써, 사용자의 이용 편의성이 증대될 수 있게 된다.
한편, 영상표시장치(100)는, 이동 단말기(600)에 접속하여, 이동 단말기(600) 내의 복수의 애플리케이션 중 선택되는 애플리케이션을 미러링 가능한 애플리케이션으로 설정하며, 설정된 애플리케이션에 대응하는 실행 아이콘을 생성할 수 있다.
한편, 영상표시장치(100)는, 방송 신호에 기초한 방송 영상과, 애플리케이션 이미지가 함께 표시할 수 있다. 이에 따라, 방송 영상 시청과 함께, 이동 단말기(600)에서, 실행되는 애플리케이션에 대한 이미지를 대형 화면을 통해, 시청할 수 있게 된다.
한편, 영상표시장치(100)는, 이동 단말기(600)에서 실행 중인 애플리케이션 또는 애플리케이션 이미지에 대한, 최근 실행 시간 정보, 이미지 파일 정보 중 적어도 하나를 이동 단말기(600)로 전송할 수 있다.
한편, 영상표시장치(100)는, 제1 이동 단말기(600)로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 제1 이동 단말기(600)에 대응하는 제1 실행 아이콘을 포함하는 애플리케이션 리스트가 자동으로 표시할 수 있으며, 애플리케이션 리스트가 표시된 상태에서, 제2 이동 단말기(600)로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 제1 실행 아이콘, 및 제2 이동 단말기(600)에 대응하는 제2 실행 아이콘을 포함하는 애플리케이션 리스트가 자동으로 표시할 수 있다. 이에 따라, 자동으로, 실행 아이콘이 표시될 수 있어, 사용자의 이용 편의성이 증대될 수 있게 된다.
한편, 영상표시장치(100)는, 애플리케이션 리스트 표시 입력에 따라, 애플리케이션 리스트가 표시되도록 제어하며, 애플리케이션 리스트 중 이동 단말기(600)와의 미러링이 가능한 실행 아이콘이 선택되는 경우, 이동 단말기(600)로, 실행 아이콘에 대응하는 애플리케이션 정보를 전송할 수 있다. 이에 따라, 영상표시장치(100)에서 선택된 실행 아이콘에 의해 간편하게 미러링이 수행될 수 있게 된다.
상술한 영상표시장치(100)의 다양한 동작방법에 대해서는, 도 6 이하를 참조하여 보다 상세히 기술한다.
한편, 도 1의 영상표시장치(100)는, 모니터, TV, 태블릿 PC 등이 가능하다.
도 2는 도 1의 영상표시장치의 내부 블록도의 일예이다.
도 2를 참조하면, 본 발명의 일실시예에 의한 영상표시장치(100)는, 방송 수신부(105), 외부장치 인터페이스부(130), 저장부(140), 사용자입력 인터페이스부(150), 센서부(미도시), 제어부(170), 디스플레이(180), 오디오 출력부(185)를 포함할 수 있다.
방송 수신부(105)는, 튜너부(110), 복조부(120), 네트워크 인터페이스부(130), 외부장치 인터페이스부(135)를 포함할 수 있다.
한편, 방송 수신부(105)는, 도면과 달리, 튜너부(110), 복조부(120)와, 외부장치 인터페이스부(135)만을 포함하는 것도 가능하다. 즉, 네트워크 인터페이스부(130)를 포함하지 않을 수도 있다.
튜너부(110)는, 안테나(미도시)를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기저장된 모든 채널에 해당하는 RF 방송 신호를 선택한다. 또한, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다.
예를 들어, 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)로 변환한다. 즉, 튜너부(110)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다. 튜너부(110)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)는 제어부(170)로 직접 입력될 수 있다.
한편, 튜너부(110)는, 본 발명에서 안테나를 통해 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다.
한편, 튜너부(110)는, 복수 채널의 방송 신호를 수신하기 위해, 복수의 튜너를 구비하는 것이 가능하다. 또는, 복수 채널의 방송 신호를 동시에 수신하는 단일 튜너도 가능하다.
복조부(120)는 튜너부(110)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다.
복조부(120)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다.
복조부(120)에서 출력한 스트림 신호는 제어부(170)로 입력될 수 있다. 제어부(170)는 역다중화, 영상/음성 신호 처리 등을 수행한 후, 디스플레이(180)에 영상을 출력하고, 오디오 출력부(185)로 음성을 출력한다.
외부장치 인터페이스부(130)는, 접속된 외부 장치(미도시), 예를 들어, 셋탑 박스(50)와 데이터를 송신 또는 수신할 수 있다. 이를 위해, 외부장치 인터페이스부(130)는, A/V 입출력부(미도시)를 포함할 수 있다.
외부장치 인터페이스부(130)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북), 셋탑 박스 등과 같은 외부 장치와 유/무선으로 접속될 수 있으며, 외부 장치와 입력/출력 동작을 수행할 수도 있다.
A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 입력받을 수 있다. 한편, 무선 통신부(미도시)는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다.
이러한 무선 통신부(미도시)를 통해, 외부장치 인터페이스부(130)는, 인접하는 이동 단말기(600)와 데이터를 교환할 수 있다. 특히, 외부장치 인터페이스부(130)는, 미러링 모드에서, 이동 단말기(600)로부터 디바이스 정보, 실행되는 애플리케이션 정보, 애플리케이션 이미지 등을 수신할 수 있다.
네트워크 인터페이스부(135)는, 영상표시장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 예를 들어, 네트워크 인터페이스부(135)는, 네트워크를 통해, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다.
한편, 네트워크 인터페이스부(135)는, 무선 통신부(미도시)를 포함할 수 있다.
저장부(140)는, 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다.
또한, 저장부(140)는 외부장치 인터페이스부(130)로 입력되는 영상, 음성 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(140)는, 채널 맵 등의 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다.
도 2의 저장부(140)가 제어부(170)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(140)는 제어부(170) 내에 포함될 수 있다.
사용자입력 인터페이스부(150)는, 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달한다.
예를 들어, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 사용자 입력 신호를 송신/수신하거나, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 사용자 입력 신호를 제어부(170)에 전달하거나, 사용자의 제스처를 센싱하는 센서부(미도시)로부터 입력되는 사용자 입력 신호를 제어부(170)에 전달하거나, 제어부(170)로부터의 신호를 센서부(미도시)로 송신할 수 있다.
제어부(170)는, 튜너부(110) 또는 복조부(120) 또는 네트워크 인터페이스부(135) 또는 외부장치 인터페이스부(130)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다.
제어부(170)에서 영상 처리된 영상 신호는 디스플레이(180)로 입력되어, 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(130)를 통하여 외부 출력장치로 입력될 수 있다.
제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 음향 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부장치 인터페이스부(130)를 통하여 외부 출력장치로 입력될 수 있다.
도 2에는 도시되어 있지 않으나, 제어부(170)는 역다중화부, 영상처리부 등을 포함할 수 있다. 이에 대해서는 도 3을 참조하여 후술한다.
그 외, 제어부(170)는, 영상표시장치(100) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(170)는 튜너부(110)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(100)를 제어할 수 있다.
한편, 제어부(170)는, 영상을 표시하도록 디스플레이(180)를 제어할 수 있다. 이때, 디스플레이(180)에 표시되는 영상은, 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.
한편, 제어부(170)는 디스플레이(180)에 표시되는 영상 내에, 소정 2D 오브젝트가 표시되도록 할 수 있다. 예를 들어, 오브젝트는, 접속된 웹 화면(신문, 잡지 등), EPG(Electronic Program Guide), 다양한 메뉴, 위젯, 아이콘, 정지 영상, 동영상, 텍스트 중 적어도 하나일 수 있다.
한편, 제어부(170)는, 촬영부(미도시)로부터 촬영된 영상에 기초하여, 사용자의 위치를 인식할 수 있다. 예를 들어, 사용자와 영상표시장치(100) 간의 거리(z축 좌표)를 파악할 수 있다. 그 외, 사용자 위치에 대응하는 디스플레이(180) 내의 x축 좌표, 및 y축 좌표를 파악할 수 있다.
디스플레이(180)는, 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호, 제어 신호 또는 외부장치 인터페이스부(130)에서 수신되는 영상 신호, 데이터 신호, 제어 신호 등을 변환하여 구동 신호를 생성한다.
디스플레이(180)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등이 가능하며, 또한, 3차원 디스플레이(3D display)가 가능할 수도 있다. 3차원 디스플레이(180)는, 무안경 방식과 안경 방식으로 구분될 수 있다.
한편, 디스플레이(180)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.
오디오 출력부(185)는, 제어부(170)에서 음성 처리된 신호를 입력 받아 음성으로 출력한다.
촬영부(미도시)는 사용자를 촬영한다. 촬영부(미도시)는 1 개의 카메라로 구현되는 것이 가능하나, 이에 한정되지 않으며, 복수 개의 카메라로 구현되는 것도 가능하다. 한편, 촬영부(미도시)는 디스플레이(180) 상부에 영상표시장치(100)에 매립되거나 또는 별도로 배치될 수 있다. 촬영부(미도시)에서 촬영된 영상 정보는 제어부(170)에 입력될 수 있다.
제어부(170)는, 촬영부(미도시)로부터 촬영된 영상, 또는 센서부(미도시)로부터의 감지된 신호 각각 또는 그 조합에 기초하여 사용자의 제스처를 감지할 수 있다.
전원 공급부(190)는, 영상표시장치(100) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip,SOC)의 형태로 구현될 수 있는 제어부(170)와, 영상 표시를 위한 디스플레이(180), 및 오디오 출력을 위한 오디오 출력부(185) 등에 전원을 공급할 수 있다.
구체적으로, 전원 공급부(190)는, 교류 전원을 직류 전원으로 변환하는 컨버터와, 직류 전원의 레벨을 변환하는 dc/dc 컨버터를 구비할 수 있다.
원격제어장치(200)는, 사용자 입력을 사용자입력 인터페이스부(150)로 송신한다. 이를 위해, 원격제어장치(200)는, 블루투스(Bluetooth), RF(Radio Frequency) 통신, 적외선(IR) 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. 또한, 원격제어장치(200)는, 사용자입력 인터페이스부(150)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 원격제어장치(200)에서 표시하거나 음성 출력할 수 있다.
한편, 상술한 영상표시장치(100)는, 고정형 또는 이동형 디지털 방송 수신 가능한 디지털 방송 수신기일 수 있다.
한편, 도 2에 도시된 영상표시장치(100)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 영상표시장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
도 3은 도 2의 제어부의 내부 블록도의 일예이다.
도면을 참조하여 설명하면, 본 발명의 일실시예에 의한 제어부(170)는, 역다중화부(310), 영상 처리부(320), 프로세서(330), OSD 생성부(340), 믹서(345), 프레임 레이트 변환부(350), 및 포맷터(360)를 포함할 수 있다. 그 외 오디오 처리부(미도시), 데이터 처리부(미도시)를 더 포함할 수 있다.
역다중화부(310)는, 입력되는 스트림을 역다중화한다. 예를 들어, MPEG-2 TS가 입력되는 경우 이를 역다중화하여, 각각 영상, 음성 및 데이터 신호로 분리할 수 있다. 여기서, 역다중화부(310)에 입력되는 스트림 신호는, 튜너부(110) 또는 복조부(120) 또는 외부장치 인터페이스부(130)에서 출력되는 스트림 신호일 수 있다.
영상 처리부(320)는, 역다중화된 영상 신호의 영상 처리를 수행할 수 있다. 이를 위해, 영상 처리부(320)는, 영상 디코더(325), 및 스케일러(335)를 구비할 수 있다.
영상 디코더(325)는, 역다중화된 영상신호를 복호화하며, 스케일러(335)는, 복호화된 영상신호의 해상도를 디스플레이(180)에서 출력 가능하도록 스케일링(scaling)을 수행한다.
영상 디코더(325)는 다양한 규격의 디코더를 구비하는 것이 가능하다. 예를 들어, MPEG-2, H,264 디코더, 색차 영상(color image) 및 깊이 영상(depth image)에 대한 3D 영상 디코더, 복수 시점 영상에 대한 디코더 등을 구비할 수 있다.
프로세서(330)는, 영상표시장치(100) 내 또는 제어부(170) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 프로세서(330)는 튜너(110)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다.
또한, 프로세서(330)는, 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(100)를 제어할 수 있다.
또한, 프로세서(330)는, 네트워크 인터페이스부(135) 또는 외부장치 인터페이스부(130)와의 데이터 전송 제어를 수행할 수 있다.
또한, 프로세서(330)는, 제어부(170) 내의 역다중화부(310), 영상 처리부(320), OSD 생성부(340) 등의 동작을 제어할 수 있다.
OSD 생성부(340)는, 사용자 입력에 따라 또는 자체적으로 OSD 신호를 생성한다. 예를 들어, 사용자 입력 신호에 기초하여, 디스플레이(180)의 화면에 각종 정보를 그래픽(Graphic)이나 텍스트(Text)로 표시하기 위한 신호를 생성할 수 있다. 생성되는 OSD 신호는, 영상표시장치(100)의 사용자 인터페이스 화면, 다양한 메뉴 화면, 위젯, 아이콘 등의 다양한 데이터를 포함할 수 있다. 또한, 생성되는 OSD 신호는, 2D 오브젝트 또는 3D 오브젝트를 포함할 수 있다.
또한, OSD 생성부(340)는, 원격제어장치(200)로부터 입력되는 포인팅 신호에 기초하여, 디스플레이에 표시 가능한, 포인터를 생성할 수 있다. 특히, 이러한 포인터는, 포인팅 신호 처리부에서 생성될 수 있으며, OSD 생성부(240)는, 이러한 포인팅 신호 처리부(미도시)를 포함할 수 있다. 물론, 포인팅 신호 처리부(미도시)가 OSD 생성부(240) 내에 구비되지 않고 별도로 마련되는 것도 가능하다.
믹서(345)는, OSD 생성부(340)에서 생성된 OSD 신호와 영상 처리부(320)에서 영상 처리된 복호화된 영상 신호를 믹싱할 수 있다. 믹싱된 영상 신호는 프레임 레이트 변환부(350)에 제공된다.
프레임 레이트 변환부(Frame Rate Conveter, FRC)(350)는, 입력되는 영상의 프레임 레이트를 변환할 수 있다. 한편, 프레임 레이트 변환부(350)는, 별도의 프레임 레이트 변환 없이, 그대로 출력하는 것도 가능하다.
포맷터(360)는, 프레임 레이트 변환된 3D 영상의 좌안 영상 프레임과 우안 영상 프레임을 배열할 수 있다. 그리고, 3D 시청 장치(미도시)의 좌안 글래스와 우안 글래스의 개방을 위한 동기 신호(Vsync)를 출력할 수 있다.
한편, 포맷터(Formatter)(360)는, 입력되는 영상 신호의 포맷을, 디스플레이에 표시하기 위한 영상 신호로 변화시켜 출력할 수 있다.
또한, 포맷터(360)는, 3D 영상 신호의 포맷을 변경할 수 있다. 예를 들어, 사이드 바이 사이드(Side by Side) 포맷, 탑 다운(Top / Down) 포맷, 프레임 시퀀셜(Frame Sequential) 포맷, 인터레이스 (Interlaced) 포맷, 체커 박스(Checker Box) 포맷 등의 다양한 3D 포맷 중 어느 하나의 포맷으로 변경할 수 있다.
한편, 포맷터(360)는, 2D 영상 신호를 3D 영상 신호로 전환할 수도 있다. 예를 들어, 3D 영상 생성 알고리즘에 따라, 2D 영상 신호 내에서 에지(edge) 또는 선택 가능한 오브젝트를 검출하고, 검출된 에지(edge)에 따른 오브젝트 또는 선택 가능한 오브젝트를 3D 영상 신호로 분리하여 생성할 수 있다. 이때, 생성된 3D 영상 신호는, 상술한 바와 같이, 좌안 영상 신호(L)와 우안 영상 신호(R)로 분리되어 정렬될 수 있다.
한편, 도면에서는 도시하지 않았지만, 포맷터(360) 이후에, 3D 효과(3-dimensional effect) 신호 처리를 위한 3D 프로세서(미도시)가 더 배치되는 것도 가능하다. 이러한 3D 프로세서(미도시)는, 3D 효과의 개선을 위해, 영상 신호의 밝기(brightness), 틴트(Tint) 및 색조(Color) 조절 등을 처리할 수 있다. 예를 들어, 근거리는 선명하게, 원거리는 흐리게 만드는 신호 처리 등을 수행할 수 있다. 한편, 이러한 3D 프로세서의 기능은, 포맷터(360)에 병합되거나 영상처리부(320) 내에 병합될 수 있다.
한편, 제어부(170) 내의 오디오 처리부(미도시)는, 역다중화된 음성 신호의 음성 처리를 수행할 수 있다. 이를 위해 오디오 처리부(미도시)는 다양한 디코더를 구비할 수 있다.
또한, 제어부(170) 내의 오디오 처리부(미도시)는, 베이스(Base), 트레블(Treble), 음량 조절 등을 처리할 수 있다.
제어부(170) 내의 데이터 처리부(미도시)는, 역다중화된 데이터 신호의 데이터 처리를 수행할 수 있다. 예를 들어, 역다중화된 데이터 신호가 부호화된 데이터 신호인 경우, 이를 복호화할 수 있다. 부호화된 데이터 신호는, 각 채널에서 방영되는 방송프로그램의 시작시간, 종료시간 등의 방송정보를 포함하는 전자 프로그램 가이드 정보(Electronic Program Guide) 정보일 수 있다.
한편, 도 3에 도시된 제어부(170)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 제어부(170)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.
특히, 프레임 레이트 변환부(350), 및 포맷터(360)는 제어부(170) 내에 마련되지 않고, 각각 별도로 구비되거나, 하나의 모듈로서 별도로 구비될 수도 있다.
도 4a는 도 2의 원격제어장치의 제어 방법을 도시한 도면이다.
도 4a의 (a)에 도시된 바와 같이, 디스플레이(180)에 원격제어장치(200)에 대응하는 포인터(205)가 표시되는 것을 예시한다.
사용자는 원격제어장치(200)를 상하, 좌우(도 4a의 (b)), 앞뒤(도 4a의 (c))로 움직이거나 회전할 수 있다. 영상표시장치의 디스플레이(180)에 표시된 포인터(205)는 원격제어장치(200)의 움직임에 대응한다. 이러한 원격제어장치(200)는, 도면과 같이, 3D 공간 상의 움직임에 따라 해당 포인터(205)가 이동되어 표시되므로, 공간 리모콘 또는 3D 포인팅 장치라 명명할 수 있다.
도 4a의 (b)는 사용자가 원격제어장치(200)를 왼쪽으로 이동하면, 영상표시장치의 디스플레이(180)에 표시된 포인터(205)도 이에 대응하여 왼쪽으로 이동하는 것을 예시한다.
원격제어장치(200)의 센서를 통하여 감지된 원격제어장치(200)의 움직임에 관한 정보는 영상표시장치로 전송된다. 영상표시장치는 원격제어장치(200)의 움직임에 관한 정보로부터 포인터(205)의 좌표를 산출할 수 있다. 영상표시장치는 산출한 좌표에 대응하도록 포인터(205)를 표시할 수 있다.
도 4a의 (c)는, 원격제어장치(200) 내의 특정 버튼을 누른 상태에서, 사용자가 원격제어장치(200)를 디스플레이(180)에서 멀어지도록 이동하는 경우를 예시한다. 이에 의해, 포인터(205)에 대응하는 디스플레이(180) 내의 선택 영역이 줌인되어 확대 표시될 수 있다. 이와 반대로, 사용자가 원격제어장치(200)를 디스플레이(180)에 가까워지도록 이동하는 경우, 포인터(205)에 대응하는 디스플레이(180) 내의 선택 영역이 줌아웃되어 축소 표시될 수 있다. 한편, 원격제어장치(200)가 디스플레이(180)에서 멀어지는 경우, 선택 영역이 줌아웃되고, 원격제어장치(200)가 디스플레이(180)에 가까워지는 경우, 선택 영역이 줌인될 수도 있다.
한편, 원격제어장치(200) 내의 특정 버튼을 누른 상태에서는 상하, 좌우 이동의 인식이 배제될 수 있다. 즉, 원격제어장치(200)가 디스플레이(180)에서 멀어지거나 접근하도록 이동하는 경우, 상,하,좌,우 이동은 인식되지 않고, 앞뒤 이동만 인식되도록 할 수 있다. 원격제어장치(200) 내의 특정 버튼을 누르지 않은 상태에서는, 원격제어장치(200)의 상,하, 좌,우 이동에 따라 포인터(205)만 이동하게 된다.
한편, 포인터(205)의 이동속도나 이동방향은 원격제어장치(200)의 이동속도나 이동방향에 대응할 수 있다.
도 4b는 도 2의 원격제어장치의 내부 블록도이다.
도면을 참조하여 설명하면, 원격제어장치(200)는 무선통신부(425), 사용자 입력부(435), 센서부(440), 출력부(450), 전원공급부(460), 저장부(470), 제어부(480)를 포함할 수 있다.
무선통신부(425)는 전술하여 설명한 본 발명의 실시예들에 따른 영상표시장치 중 임의의 어느 하나와 신호를 송수신한다. 본 발명의 실시예들에 따른 영상표시장치들 중에서, 하나의 영상표시장치(100)를 일예로 설명하도록 하겠다.
본 실시예에서, 원격제어장치(200)는 RF 통신규격에 따라 영상표시장치(100)와 신호를 송수신할 수 있는 RF 모듈(421)을 구비할 수 있다. 또한 원격제어장치(200)는 IR 통신규격에 따라 영상표시장치(100)와 신호를 송수신할 수 있는 IR 모듈(423)을 구비할 수 있다.
본 실시예에서, 원격제어장치(200)는 영상표시장치(100)로 원격제어장치(200)의 움직임 등에 관한 정보가 담긴 신호를 RF 모듈(421)을 통하여 전송한다.
또한, 원격제어장치(200)는 영상표시장치(100)가 전송한 신호를 RF 모듈(421)을 통하여 수신할 수 있다. 또한, 원격제어장치(200)는 필요에 따라 IR 모듈(423)을 통하여 영상표시장치(100)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다.
사용자 입력부(435)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. 사용자는 사용자 입력부(435)를 조작하여 원격제어장치(200)로 영상표시장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(435)가 하드키 버튼을 구비할 경우 사용자는 하드키 버튼의 푸쉬 동작을 통하여 원격제어장치(200)로 영상표시장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(435)가 터치스크린을 구비할 경우 사용자는 터치스크린의 소프트키를 터치하여 원격제어장치(200)로 영상표시장치(100)와 관련된 명령을 입력할 수 있다. 또한, 사용자 입력부(435)는 스크롤 키나, 조그 키 등 사용자가 조작할 수 있는 다양한 종류의 입력수단을 구비할 수 있으며 본 실시예는 본 발명의 권리범위를 제한하지 아니한다.
센서부(440)는 자이로 센서(441) 또는 가속도 센서(443)를 구비할 수 있다. 자이로 센서(441)는 원격제어장치(200)의 움직임에 관한 정보를 센싱할 수 있다.
일예로, 자이로 센서(441)는 원격제어장치(200)의 동작에 관한 정보를 x,y,z 축을 기준으로 센싱할 수 있다. 가속도 센서(443)는 원격제어장치(200)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 거리측정센서를 더 구비할 수 있으며, 이에 의해, 디스플레이(180)와의 거리를 센싱할 수 있다.
출력부(450)는 사용자 입력부(435)의 조작에 대응하거나 영상표시장치(100)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 출력부(450)를 통하여 사용자는 사용자 입력부(435)의 조작 여부 또는 영상표시장치(100)의 제어 여부를 인지할 수 있다.
일예로, 출력부(450)는 사용자 입력부(435)가 조작되거나 무선 통신부(425)을 통하여 영상표시장치(100)와 신호가 송수신되면 점등되는 LED 모듈(451), 진동을 발생하는 진동 모듈(453), 음향을 출력하는 음향 출력 모듈(455), 또는 영상을 출력하는 디스플레이 모듈(457)을 구비할 수 있다.
전원공급부(460)는 원격제어장치(200)로 전원을 공급한다. 전원공급부(460)는 원격제어장치(200)이 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로서 전원 낭비를 줄일 수 있다. 전원공급부(460)는 원격제어장치(200)에 구비된 소정 키가 조작된 경우에 전원 공급을 재개할 수 있다.
저장부(470)는 원격제어장치(200)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 만일 원격제어장치(200)가 영상표시장치(100)와 RF 모듈(421)을 통하여 무선으로 신호를 송수신할 경우 원격제어장치(200)와 영상표시장치(100)는 소정 주파수 대역을 통하여 신호를 송수신한다. 원격제어장치(200)의 제어부(480)는 원격제어장치(200)와 페어링된 영상표시장치(100)와 신호를 무선으로 송수신할 수 있는 주파수 대역 등에 관한 정보를 저장부(470)에 저장하고 참조할 수 있다.
제어부(480)는 원격제어장치(200)의 제어에 관련된 제반사항을 제어한다. 제어부(480)는 사용자 입력부(435)의 소정 키 조작에 대응하는 신호 또는 센서부(440)에서 센싱한 원격제어장치(200)의 움직임에 대응하는 신호를 무선 통신부(425)를 통하여 영상표시장치(100)로 전송할 수 있다.
영상표시장치(100)의 사용자 입력 인터페이스부(150)는, 원격제어장치(200)와 무선으로 신호를 송수신할 수 있는 무선통신부(151)와, 원격제어장치(200)의 동작에 대응하는 포인터의 좌표값을 산출할 수 있는 좌표값 산출부(415)를 구비할 수 있다.
사용자 입력 인터페이스부(150)는, RF 모듈(412)을 통하여 원격제어장치(200)와 무선으로 신호를 송수신할 수 있다. 또한 IR 모듈(413)을 통하여 원격제어장치(200)이 IR 통신 규격에 따라 전송한 신호를 수신할 수 있다.
좌표값 산출부(415)는 무선통신부(151)를 통하여 수신된 원격제어장치(200)의 동작에 대응하는 신호로부터 손떨림이나 오차를 수정하여 디스플레이(170)에 표시할 포인터(205)의 좌표값(x,y)을 산출할 수 있다.
사용자 입력 인터페이스부(150)를 통하여 영상표시장치(100)로 입력된 원격제어장치(200) 전송 신호는 영상표시장치(100)의 제어부(180)로 전송된다. 제어부(180)는 원격제어장치(200)에서 전송한 신호로부터 원격제어장치(200)의 동작 및 키 조작에 관한 정보를 판별하고, 그에 대응하여 영상표시장치(100)를 제어할 수 있다.
또 다른 예로, 원격제어장치(200)는, 그 동작에 대응하는 포인터 좌표값을 산출하여 영상표시장치(100)의 사용자 입력 인터페이스부(150)로 출력할 수 있다. 이 경우, 영상표시장치(100)의 사용자 입력 인터페이스부(150)는 별도의 손떨림이나 오차 보정 과정 없이 수신된 포인터 좌표값에 관한 정보를 제어부(180)로 전송할 수 있다.
또한, 다른 예로, 좌표값 산출부(415)가, 도면과 달리 사용자 입력 인터페이스부(150)가 아닌, 제어부(170) 내부에 구비되는 것도 가능하다.
도 5는 도 1의 이동 단말기의 내부 블록도이다.
도면을 참조하면, 이동 단말기(600)는, 무선 통신부(610), A/V(Audio/Video) 입력부(620), 사용자 입력부(630), 센싱부(640), 출력부(650), 메모리(660), 인터페이스부(625), 제어부(670), 및 전원 공급부(690)를 포함할 수 있다.
한편, 무선 통신부(610)는, 방송수신 모듈(611), 이동통신 모듈(613), 무선 인터넷 모듈(615), 음향 통신부(617), 및 GPS 모듈(619) 등을 포함할 수 있다.
방송수신 모듈(611)은 방송 채널을 통하여 외부의 방송관리 서버로부터 방송 신호 및 방송관련 정보 중 적어도 하나를 수신할 수 있다. 이때, 방송 채널은 위성 채널, 지상파 채널 등을 포함할 수 있다.
방송수신 모듈(611)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(660)에 저장될 수 있다.
이동통신 모듈(613)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호, 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈(615)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 무선 인터넷 모듈(615)은 이동 단말기(600)에 내장되거나 외장될 수 있다. 예를 들어, 무선 인터넷 모듈(615)은, WFii 기반의 무선 통신 또는 WiFi Direct 기반의 무선 통신을 수행할 수 있다.
음향 통신부(617)는 음향 통신을 수행할 수 있다. 음향 통신부(617)는, 음향 통신 모드에서, 출력할 오디오 데이터에, 소정의 정보 데이터를 부가하여, 사운드를 출력할 수 있다. 또한, 음향 통신부(617)는, 음향 통신 모드에서, 외부로부터 수신되는 사운드로부터 소정의 정보 데이터를 추출할 수 있다.
그 외, 근거리 통신 기술로서, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee) 등이 이용될 수 있다.
GPS(Global Position System) 모듈(619)은 복수 개의 GPS 인공위성으로부터 위치 정보를 수신할 수 있다.
A/V(Audio/Video) 입력부(620)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(621)와 마이크(623) 등이 포함될 수 있다.
사용자 입력부(630)는 사용자가 단말기의 동작 제어를 위하여 입력하는 키 입력 데이터를 발생시킨다. 이를 위해, 사용자 입력부(630)는, 키 패드(key pad), 돔 스위치(dome switch), 터치 패드(정압/정전) 등으로 구성될 수 있다. 특히, 터치 패드가 디스플레이(680)와 상호 레이어 구조를 이룰 경우, 이를 터치스크린(touch screen)이라 부를 수 있다.
센싱부(640)는 이동 단말기(600)의 개폐 상태, 이동 단말기(600)의 위치, 사용자 접촉 유무 등과 같이 이동 단말기(600)의 현 상태를 감지하여 이동 단말기(600)의 동작을 제어하기 위한 센싱 신호를 발생시킬 수 있다.
센싱부(640)는, 감지센서(641), 압력센서(643), 및 모션 센서(645) 등을 포함할 수 있다. 모션 센서(645)는 가속도 센서, 자이로 센서, 중력 센서 등을 이용하여 이동 단말기(600)의 움직임이나 위치 등을 감지할 수 있다. 특히, 자이로 센서는 각속도를 측정하는 센서로서, 기준 방향에 대해 돌아간 방향(각도)을 감지할 수 있다.
출력부(650)는 디스플레이(680), 오디오 출력부(653), 알람부(655), 및 햅틱 모듈(657) 등을 포함할 수 있다.
디스플레이(680)는 이동 단말기(600)에서 처리되는 정보를 표시 출력한다.
한편, 전술한 바와 같이, 디스플레이(680)와 터치패드가 상호 레이어 구조를 이루어 터치스크린으로 구성되는 경우, 디스플레이(680)는 출력 장치 이외에 사용자의 터치에 의한 정보의 입력이 가능한 입력 장치로도 사용될 수 있다.
오디오 출력부(653)는 무선 통신부(610)로부터 수신되거나 메모리(660)에 저장된 오디오 데이터를 출력한다. 이러한 오디오 출력부(653)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
알람부(655)는 이동 단말기(600)의 이벤트 발생을 알리기 위한 신호를 출력한다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. .
햅틱 모듈(haptic module)(657)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(657)이 발생시키는 촉각 효과의 대표적인 예로는 진동 효과가 있다.
메모리(660)는 제어부(670)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입력되거나 출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다.
인터페이스부(625)는 이동 단말기(600)에 연결되는 모든 외부기기와의 인터페이스 역할을 수행한다. 인터페이스부(625)는 이러한 외부 기기로부터 데이터를 전송받거나 전원을 공급받아 이동 단말기(600) 내부의 각 구성 요소에 전달할 수 있고, 이동 단말기(600) 내부의 데이터가 외부 기기로 전송되도록 할 수 있다.
제어부(670)는 통상적으로 상기 각부의 동작을 제어하여 이동 단말기(600)의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행할 수 있다. 또한, 제어부(670)는 멀티 미디어 재생을 위한 멀티미디어 재생 모듈(681)을 구비할 수도 있다. 멀티미디어 재생 모듈(681)은 제어부(670) 내에 하드웨어로 구성될 수도 있고, 제어부(670)와 별도로 소프트웨어로 구성될 수도 있다.
전원 공급부(690)는, 제어부(670)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.
한편, 도 5에 도시된 이동 단말기(600)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 이동 단말기(600)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
도 6은 본 발명의 실시예에 따른 영상표시장치의 동작방법의 일예를 보여주는 순서도이고, 도 7a 내지 도 10c는 도 6의 동작방법을 설명하기 위해 참조되는 도면이다.
먼저, 도 6을 참조하면, 영상표시장치(100)는, 미러링 입력이 있는 경우, 미러링 모드로 진입한다(S605).
예를 들어, 영상표시장치(100)에서, 미러링을 위한 미러링 항목이 선택되는 경우, 미러링 모드로 진입할 수 있다.
다른 예로, 영상표시장치(100)에서, 미러링이 가능한 애플리케이션이 선택되는 경우, 미러링 모드로 진입할 수 있다.
또 다른 예로, 이동 단말기(600)에서, 미러링이 가능한 애플리케이션을 포함하는 미러링 폴더가 선택되는 경우, 미러링 모드로 진입할 수 있다.
또 다른 예로, 이동 단말기(600)에서, 미러링(mirroring)을 위한 미러링 항목이 선택되는 경우, 미러링 모드로 진입할 수 있다.
또 다른 예로, 이동 단말기(600)에서, 미러링이 가능한 애플리케이션이 선택되는 경우, 미러링 모드로 진입할 수 있다.
또 다른 예로, 이동 단말기(600)에서, 미러링이 가능한 애플리케이션을 포함하는 미러링 폴더가 선택되는 경우, 미러링 모드로 진입할 수 있다.
다음, 영상표시장치(100)는, 미러링 모드에 따라, 이동 단말기에 접속한다(S610).
예를 들어, 영상표시장치(100)에서, 미러링 입력에 의해 미러링 모드로 집입한 경우, 영상표시장치(100)는, 외부장치 인터페이스부(130)를 통해, 이동 단말기(600)로, 미러링(mirroring)을 위한 페어링 신호를 전송할 수 있다. 그리고, 이동 단말기(600)는, 페어링 응답 신호를 영상표시장치(100)로 전송할 수 있다. 이러한 페어링 신호, 페어링 응답 신호에 기초하여, 영상표시장치(100)와 이동 단말기(600)는 서로 접속할 수 있다.
다른 예로, 이동 단말기(600)에서, 미러링 입력에 의해 미러링 모드로 집입한 경우, 이동 단말기(600)는, 영상표시장치(100)로, 미러링(mirroring)을 위한 페어링 신호를 전송할 수 있다. 그리고, 영상표시장치(100)는, 외부장치 인터페이스부(130)를 통해, 페어링 응답 신호를 이동 단말기(600)로 전송할 수 있다. 이러한 페어링 신호, 페어링 응답 신호에 기초하여, 영상표시장치(100)와 이동 단말기(600)는 서로 접속할 수 있다.
다음, 영상표시장치(100)의 외부장치 인터페이스부(130)는, 이동 단말기(600)로부터, 디바이스 아이디를 포함하는 디바이스 정보(device information), 실행 중인 애플리케이션 정보, 및 실행 중인 애플리케이션에 대한 이미지를 수신할 수 있다(S615).
특히, 영상표시장치(100)의 외부장치 인터페이스부(130)는, 이동 단말기(600)로부터, 디바이스 아이디(device ID)를 포함하는 디바이스 정보, 실행 중인 애플리케이션 정보를 수신한 이후, 실행 중인 애플리케이션에 대한 이미지를 수신하는 것도 가능하다.
애플리케이션 정보는, 애플리케이션 아이디, 애플리케이션 버젼 정보, 애플리케이션 아이콘 이미지를 포함할 수 있다. 이러한 애플리케이션 정보는, 디바이스 정보와 함께 메모리(140)에 저장될 수 있다.
영상표시장치(100)의 제어부(170)는, 디바이스 아이디(device ID)를 포함하는 디바이스 정보에 기초하여, 이동 단말기(600)에 대한 인증을 수행할 수 있다. 그리고, 실행 중인 애플리케이션
영상표시장치(100)의 제어부(170)는, 애플리케이션 정보에 기초하여, 실행 중인 애플리케이션에 대한 정보를 획득할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 이동 단말기(600)에서 수신되는 애플리케이션 실행 이미지를 표시하도록 제어할 수 있다(S620).
특히, 영상표시장치(100)의 제어부(170)는, 이동 단말기(600)에서 수신되는 애플리케이션 실행 이미지를 스케일링하여, 스케일링된 애플리케이션 실행 이미지가, 디스플레이(180)에 표시되도록 제어할 수 있다. 이에 의해, 사용자는 확대된 애플리케이션 실행 이미지를 시청할 수 있게 된다.
다음, 영상표시장치(100)의 제어부(170)는, 이동 단말기에서 실행 중인 애플리케이션이 전환 또는 종료되는 지 여부를 판단하고(S625), 해당하는 경우, 애플리케이션에 대한 실행 아이콘을 생성한다(S630). 그리고, 영상표시장치(100)의 제어부(170)는, 생성된 실행 아이콘을 디스플레이(180)에 표시하도록 제어한다(S635).
이동 단말기(600)는, 미러링 모드에서, 실행 중인 애플리케이션의 실행이 종료되거나, 홈 버튼이 동작하여 홈 화면으로 전환되는 경우, 해당 애플리케이션 실행 종료 정보를, 영상표시장치(100)로 전송할 수 있다.
예를 들어, 이동 단말기(600)는, 홈 화면으로 전환되는 경우, 애플리케이션 종료 정보 외에, 추가로 미러링 모드 종료 정보를, 영상표시장치(100)로 전송할 수도 있다.
다른 예로, 이동 단말기(600)는, 제1 애플케이션 실행 중 미러링이 가능한 제2 애플리케이션이 실행되는 경우, 제1 애플리케이션 실행 종료 정보를 영상표시장치로 전송할 수 있다. 이때, 미러링이 계속 수행되므로, 미러링 모드 종료 정보는 전송되지 않을 수 있다.
한편, 영상표시장치의 제어부(170)는, 미러링되어 수신되는 애플리케이션 이미지에 기초하여, 해당 애플리케이션의 종료 여부 등을 판단할 수도 있다.
예를 들어, 영상표시장치의 제어부(170)는, 미러링 가능한 다른 애플리케이션 이미지가 수신되는 경우, 이미지 인식 알고리즘 등을 통해, 이전 애플리케이션이 종료된 것으로 판단할 수 있다.
다른 예로, 영상표시장치의 제어부(170)는, 소정 애플리케이션 이미지에서, 더 이상, 미러링과 관련한 이미지가 수신되지 않는 경우, 미러링 모드가 종료된 것으로 판단할 수도 있다.
영상표시장치의 제어부(170)는, 실행 중인 애플리케이션에 대한 이미지 수신이 종료된 경우, 즉, 해당 애플리케이션이 종료되거나 전환된 경우, 메모리(140)에 저장된 애플리케이션 정보를 이용하여, 해당 애플리케이션에 대한 실행 아이콘을 생성할 수 있다.
구체적으로, 영상표시장치의 제어부(170)는, 애플리케이션 정보 중 애플리케이션 아이콘 이미지를 이용하여, 해당 애플리케이션에 대한 실행 아이콘을 생성할 수 있다. 그리고, 해당 애플리케이션에 대한 실행 아이콘을, 애플리케이션 리스트 내에 포함시킬 수 있다.
그리고, 영상표시장치의 제어부(170)는, 애플케이션 리스트 표시 입력이 있는 경우, 생성된 실행 아이콘을 포함하는 애플케이션 리스트를 표시하도록 제어할 수 있다.
한편, 영상표시장치(100)에서, 미러링 모드와 관련된 실행 아이콘을 생성하여 표시함으로써, 사용자의 이용 편의성이 증대될 수 있게 된다. 특히, 미러링 모드가 종료된 상태에서, 실행 아이콘이 선택되는 경우, 영상표시장치(100)는, 이동 단말기(600)로 해당 애플리케이션에 대한 정보를 전송함으로써, 미러링 모드로 진입하도록 제어할 수 있다. 이에 따라, 간편하게, 영상표시장치(100)를 통해, 미럴링이 수행될 수 있게 된다.
한편, 실행 아이콘은, 애플리케이션 정보 외에 디바이스 정보에도 기초하여 실행될 수 있다. 이에 따라, 복수의 이동 단말기 별로, 또는 사용자 별로, 각각 다른 실행 아이콘이 생성되어 표시될 수 있다.
한편, 영상표시장치의 제어부(170)는, 애플리케이션 리스트 표시시, 사용자 정보에 따라, 해당 사용자 정보에 대응하는 실행 아이콘을 포함하는 애플리케이션 리스트를 표시하도록 제어할 수 있다.
영상표시장치의 제어부(170)는, 제1 사용자 정보가 입력되는 경우, 영상표시장치의 제어부(170)는, 제1 사용자 정보 또는 제1 사용자가 사용하는 제1 이동 단말기에 대응하는 제1 실행 아이콘을 포함하는 제1 애플리케이션 리스트를 표시하도록 제어할 수 있다.
영상표시장치의 제어부(170)는, 제2 사용자 정보가 입력되는 경우, 영상표시장치의 제어부(170)는, 제2 사용자 정보 또는 제2 사용자가 사용하는 제1 이동 단말기에 대응하는 제2 실행 아이콘을 포함하는 제2 애플리케이션 리스트를 표시하도록 제어할 수 있다.
이에 따라, 사용자 맞춤형 실행 아이콘의 제공이 가능하게 되며, 사용자의 이용 편의성이 증대될 수 있게 된다.
이하에서는, 도 6의 동작방법에 대해, 도 7a 내지 도 10c를 참조하여 기술한다.
도 7a는, 이동 단말기(600)의 디스플레이(680)에, 홈 화면(700)이 표시되는 것을 예시한다. 홈 화면(700)은 미러링 폴더 또는 아이콘(705)을 포함할 수 있다.
미러링 폴더 또는 아이콘(705)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 7b와 같이, 미러링이 가능한 애플리케이션 항목들(707,708,709)을 포함하는 애플리케이션 리스트(706)가 표시되도록 제어할 수 있다.
도 7b에서는, 미러링이 가능한 애플리케이션 항목들(707,708,709)을 포함하는 애플리케이션 리스트(706) 증, 메일 애플리케이션 항목(709)이 사용자 손가락(701)에 의해 선택되는 것을 예시한다.
한편, 이동 단말기(600)는, 미러링 폴더 또는 아이콘(705)이 선택되는 경우, 도 7c와 같이, 영상표시장치(100)로, 페어링 요청 신호(Sco)를 전송할 수 있다.
영상표시장치(100)의 제어부(170)는, 외부장치 인터페이스부(130)를 통해 수신되는 페어링 요청 신호(Sco)에 기초하여, 미러링 모드 진입 여부를 나타내는 오브젝트(720)가 표시되도록 제어할 수 있다.
미러링 모드 진입 여부를 나타내는 오브젝트(720)는, 승낙 항목(721)과, 거절 항목(722)을 구비할 수 있다.
한편, 영상표시장치(100)의 사용자 입력 인터페이스부(150)는, 원격제어장치(200)로부터 포인팅 신호를 수신할 수 있다. 그리고, 영상표시장치(100)의 제어부(170)는, 포인팅 신호에 기초하여, 포인터(205)를 표시하도록 제어할 수 있다.
포인터(205)에 의해, 승낙 항목(721)이 선택되는 경우, 영상표시장치(100)는 미러링 모드로 진입할 수 있다.
이에 따라, 영상표시장치(100)는, 페어링 응답 신호(Srco)를 이동 단말기(600)로 전송할 수 있다. 이에 의해, 이동 단말기(600)와 영상표시장치(100)는 미러링을 위해 접속할 수 있다.
한편, 이동 단말기(600)는, 도 7c와 같이, 메일 애플리케이션 항목(709)이 선택된 경우, 메일 애플리케이션에 대응하는 애플리케이션 정보(Sai), 이동 단말기의 디바이스 정보(Sde)를, 영상표시장치(100)로, 전송할 수 있다.
영상표시장치(100)의 제어부(170)는, 외부장치 인터페이스부(130)를 통해 수신되는 애플리케이션 정보(Sai), 이동 단말기의 디바이스 정보(Sde)를, 메모리(140)에 저장하도록 제어할 수 있다.
도 7d는, 이동 단말기(600)에서 실행되는 메일 애플리케이션에 대응하는 메일 이미지(740a)가 이동 단말기(600)에 표시되고, 미러링에 의해, 애플리케이션 이미지(Saia)가 전송되어, 영상표시장치(100)에, 미러링 이미지로서, 확대된 애플리케이션 이미지(740b)가 표시되는 것을 예시한다.
다음, 도 7e는 이동 단말기(600)에서 백 키(702)가 사용자 손가락(701)에 의해 선택되는 것을 예시한다. 이에 의해, 애플리케이션 종료 여부를 나타내는 오브젝트(750)가 표시될 수 있다.
오브젝트(750)는, 승낙 항목(751)과, 거절 항목(752)을 구비할 수 있다. 사용자 손가락(701)에 의해, 승낙 항목(751)이 선택되는 경우, 이동 단말기(600)에서 실행되는 메일 애플리케이션은 종료된다.
도 7f는, 메일 에플리케이션 종료에 의해, 이동 단말기(600)에 홈 화면(700)이 표시되고, 애플리케이션 종료 정보(Sae1)가 영상표시장치(100)에 전송되는 것을 예시한다.
영상표시장치(100)의 제어부(170)는, 애플리케이션 종료 정보(Sae1)에 기초하여, 실행 종료된 애플리케이션에 대한 실행 아이콘 생성 여부를 나타내는 오브젝트(760)가 표시되도록 제어할 수 있다.
오브젝트(760)는, 메일 애플리케이션을 나타내는 아이콘을 포함하며, 메일 애플리케이션을 실행 아이콘으로 등록할 지 여부를 나타낼 수 있다.
포인터(205)에 의해, 오브젝트(760) 내의 승낙 항목(761)이 선택되는 경우, 영상표시장치(100)의 제어부(170)는, 메일 애플리케이션에 대응하는 실행 아이콘을 생성할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 도면과 달리, 애플리케이션 종료 정보(Sae1) 수신 이후, 오브젝트(760) 표시 없이, 자동으로, 메일 애플리케이션에 대응하는 실행 아이콘을 생성할 수도 있다.
한편, 영상표시장치(100)의 제어부(170)는, 도 7g와 같이, 원격제어장치(200)의 소정키(201)가 동작하는 경우, 소정 영상(715)과, 생성된 실행 아이콘(773)을 포함하는 애플리케이션 리스트(770)가 표시되도록 제어할 수 있다. 이때 소정 영상(715)는, 방송 수신부(105)에서 수신된 방송 신호에 기초한 방송 영상일 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 도면과 달리, 실행 아이콘(773)의 생성 이후, 바로, 생성된 실행 아이콘(773)을 포함하는 애플리케이션 리스트(770)가 자동으로 표시되도록 제어할 수도 있다.
영상표시장치(100)의 제어부(170)는, 이전에 미러링되어 실행되었던, 실행 아이콘(771,772) 등과, 가장 최근에 실행된 아이콘(773)이, 애플리케이션 리스트(770) 내에, 함께 표시되도록 제어할 수 있다.
특히, 영상표시장치(100)의 제어부(170)는, 이동 단말기(600)로부터, 수신 또는 실행된 순서에 따라, 복수의 애플리케이션에 대응하는 복수의 실행 아이콘들(771,772,773)이 정렬되어 표시되도록 제어할 수 있다.
즉, 실행된 순서에 따라, 메신저 애플리케이션에 대응하는 실행 아이콘(771), 스케쥴 애플리케이선에 대응하는 실행 아이콘(772), 메일 애플리케이션에 대응하는 실행 아이콘(773)이 정렬되어 표시될 수 있다. 특히, 최근에 생성된 실행 아이콘(773)은 다른 아이콘과 달리 하이라이트 표시될 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 로그인과 같은 사용자 정보가 입력되는 경우, 해당 사용자에 대응하는 실행 아이콘을 포함하는 애플리케이션 리스트가 표시되도록 제어할 수 있다.
즉, 제1 사용자 정보가 입력되는 경우, 영상표시장치(100)의 제어부(170)는, 제1 사용자의 제1 이동 단말기에서 미러링 실행되었던 제1 실행 아이콘을 포함하는 제1 애플리케이션 리스트가 표시되도록 제어할 수 있다.
또는, 제2 사용자 정보가 입력되는 경우, 영상표시장치(100)의 제어부(170)는, 제2 사용자의 제2 이동 단말기에서 미러링 실행되었던 제2 실행 아이콘을 포함하는 제2 애플리케이션 리스트가 표시되도록 제어할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 제1 이동 단말기에서 미러링 실행되었던 제1 실행 아이콘과, 제2 이동 단말기에서 미러링 실행되었던 제2 실행 아이콘을 포함하는 애플리케이션 리스트가 표시되도록 제어할 수도 있다.
이와 같이, 복수의 사용자를 위한 실행 아이콘을 포함하는 애플리케이션 리스트가 표시되는 경우, 다른 사용자의 허가 없는 실행 아이콘 선택에 따른, 애플리케이션 실행을 방지하기 위해, 영상표시장치(100)의 제어부(170)는, 실행 아이콘 선택시, 비밀 번호와 같은, 인증 정보 입력을 위한 입력창이 표시되도록 제어할 수도 있다.
도 8a는, 도 7a와 동일하게, 이동 단말기(600)의 디스플레이(680)에, 홈 화면(700)이 표시되는 것을 예시한다. 홈 화면(700)은 미러링 폴더 또는 아이콘(705)을 포함할 수 있다.
미러링 폴더 또는 아이콘(705)이 선택되는 경우, 이동 단말기(600)의 제어부(670)는, 도 8b와 같이, 미러링이 가능한 애플리케이션 항목들(707,708,709)을 포함하는 애플리케이션 리스트(706)가 표시되도록 제어할 수 있다.
도 8b에서는, 미러링이 가능한 애플리케이션 항목들(707,708,709)을 포함하는 애플리케이션 리스트(706) 증, 갤러리 애플리케이션 항목(708)이 사용자 손가락(701)에 의해 선택되는 것을 예시한다.
한편, 이동 단말기(600)는, 미러링 폴더 또는 아이콘(705)이 선택되는 경우, 도 8c와 같이, 영상표시장치(100)로, 페어링 요청 신호(Sco)를 전송되며, 영상표시장치(100)는, 페어링 응답 신호(Srco)를 이동 단말기(600)로 전송할 수 있다..
한편, 이동 단말기(600)는, 도 8c와 같이, 갤러리 애플리케이션 항목(708)이 선택된 경우, 갤러리 애플리케이션에 대응하는 애플리케이션 정보(Sai), 이동 단말기의 디바이스 정보(Sde)를, 영상표시장치(100)로, 전송할 수 있다.
영상표시장치(100)의 제어부(170)는, 외부장치 인터페이스부(130)를 통해 수신되는 애플리케이션 정보(Sai), 이동 단말기의 디바이스 정보(Sde)를, 메모리(140)에 저장하도록 제어할 수 있다.
도 8d는, 이동 단말기(600)에서 실행되는 갤러리 애플리케이션에 대응하는 갤러리 이미지(840a)가 이동 단말기(600)에 표시되고, 미러링에 의해, 애플리케이션 이미지(Saib)가 전송되어, 영상표시장치(100)에, 미러링 이미지로서, 확대된 애플리케이션 이미지(840b)가 표시되는 것을 예시한다.
다음, 도 8e는 이동 단말기(600)에서 홈 키(703)가 사용자 손가락(701)에 의해 선택되는 것을 예시한다. 이에 의해, 도 8f와 같이, 홈 화면(700)이 표시될 수 있다.
이때, 다시 미러링 폴더 또는 아이콘(705)이 선택되는 경우, 도 8g와 같은, 미러링이 가능한 애플리케이션 항목들(707,708,709)을 포함하는 애플리케이션 리스트(706)가 표시될 수 있다.
이 중 메일 애플리케이션 항목(709)이 선택되는 경우, 메일 애플리케이션이 실행되며, 미러링에 따라, 도 7d와 같이, 메일 애플리케이션 이미지(Saia)가 영상표시장치로 전송되며, 영상표시장치(100)에 미러링 이미지로서, 메일 애플리케이션 이미지(740b)가 표시될 수 있다.
한편, 이와 같이, 실행되던 애플리케이션이 전환되어, 다른 애플리케이션이 실행된 경우, 이동 단말기(600)는, 도 8h와 같이, 갤러리 애플리케이션의 종료 정보(Sae1)가 영상표시장치(100)에 전송할 수 있다.
영상표시장치(100)의 제어부(170)는, 애플리케이션 종료 정보(Sae1)에 기초하여, 실행 종료된 애플리케이션에 대한 실행 아이콘 생성 여부를 나타내는 오브젝트(860)가 표시되도록 제어할 수 있다.
오브젝트(860)는, 갤러리 애플리케이션을 나타내는 아이콘을 포함하며, 갤러리 애플리케이션을 실행 아이콘으로 등록할 지 여부를 나타낼 수 있다.
포인터(205)에 의해, 오브젝트(860) 내의 승낙 항목(861)이 선택되는 경우, 영상표시장치(100)의 제어부(170)는, 갤러리 애플리케이션에 대응하는 실행 아이콘을 생성할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 도면과 달리, 애플리케이션 종료 정보(Sae1) 수신 이후, 오브젝트(860) 표시 없이, 자동으로, 갤러리 애플리케이션에 대응하는 실행 아이콘을 생성할 수도 있다.
한편, 영상표시장치(100)의 제어부(170)는, 도 8i와 같이, 원격제어장치(200)의 소정키(201)가 동작하는 경우, 소정 영상(715)과, 생성된 실행 아이콘(774)을 포함하는 애플리케이션 리스트(870)가 표시되도록 제어할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 도면과 달리, 실행 아이콘(774)의 생성 이후, 바로, 생성된 실행 아이콘(774)을 포함하는 애플리케이션 리스트(870)가 자동으로 표시되도록 제어할 수도 있다.
영상표시장치(100)의 제어부(170)는, 이전에 미러링되어 실행되었던, 실행 아이콘(77) 등과, 가장 최근에 실행된 아이콘(774)이, 애플리케이션 리스트(870) 내에, 함께 표시되도록 제어할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 복수의 이동 단말기에서 실행되는, 애플리케이션에 대응하는 실행 아이콘을 포함하는 애플리케이션 리스트가 표시되도록 제어할 수도 있다. 이에 대해서는, 도 9a 내지 도 9c를 참조하여 기술한다.
도 9a는, 소정 영상(715)과, 애플리케이션 리스트(970a)가 표시되는 것을 예시한다.
애플리케이션 리스트(970a)는, 제1 사용자(Terry)의 제1 이동 단말기(600a)에서 실행되었던 실행 아이콘(921,922,923)과, 제2 사용자(Sang)의 제2 이동 단말기(600b)에서 실행되었던 실행 아이콘(911)을 포함할 수 있다.
예를 들어, 영상표시장치(100)의 제어부(170)는, 원격제어장치(200)의 소정키(201)가 동작하는 경우, 제1 사용자(Terry)의 제1 이동 단말기(600a)에서 실행되었던 애플리케이션에 대응하는 실행 아이콘(921,922,923)과, 제2 사용자(Sang)의 제2 이동 단말기(600b)에서 실행되었던 애플리케이션에 대응하는 실행 아이콘(911)을 포함하는 애플리케이션 리스트(970a)가 표시되도록 제어할 수 있다.
도 9b는, 소정 영상(715)과, 애플리케이션 리스트(970b)가 표시되는 것을 예시한다.
애플리케이션 리스트(970b)는, 제1 사용자(Terry) 폴더(920), 제2 사용자(Sang) 폴더(910)를 포함할 수 있다.
영상표시장치(100)의 제어부(170)는, 포인터(2050에 의해, 제1 사용자(Terry) 폴더(920)가 선택되는 경우, 도 9c와 같이, 제2 사용자(Sang) 폴더(910)에 포함되는 제1 이동 단말기(600a)에서 실행되었던 실행 아이콘(921,922,923)이 표시되도록 제어할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 이동 단말기(600)로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 실행 아이콘을 포함하는 애플리케이션 리스트가 자동으로 표시되도록 제어할 수 있다.
한편, 영상표시장치(100)의 제어부(170)는, 제1 이동 단말기(600)로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 제1 이동 단말기(600)에 대응하는 제1 실행 아이콘을 포함하는 애플리케이션 리스트가 자동으로 표시되도록 제어하며, 애플리케이션 리스트가 표시된 상태에서, 제2 이동 단말기(600)로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 제1 실행 아이콘, 및 제2 이동 단말기(600)에 대응하는 제2 실행 아이콘을 포함하는 애플리케이션 리스트가 자동으로 표시되도록 제어할 수 있다. 이에 대해서는, 도 10a 내지 도 10c를 참조하여 기술한다.
도 10a는 영상표시장치(100)와 제1 이동 단말기(600a) 사이의 거리가 상당히 먼 Da인 것을 예시한다.
영상표시장치(100)의 제어부(170)는, 영상표시장치(100)와 제1 이동 단말기(600a) 사이의 거리가 상당히 먼 Da 로서, 제1 이동 단말기(600a)로부터 수신되는 무선 신호의 세기가 소정 세기 미만인 경우, 별다른 동작을 수행하지 않고, 표시되던 영상(715)이 그대로 표시되도록 제어할 수 있다.
도 10a는 영상표시장치(100)와 제1 이동 단말기(600a) 사이의 거리가 근접하영 Db인 것을 예시한다.
영상표시장치(100)의 제어부(170)는, 영상표시장치(100)와 제1 이동 단말기(600a) 사이의 거리가 가까운 Db 로서, 제1 이동 단말기(600a)로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 제1 이동 단말기(600a)로부터 수신한 디바이스 정보에 기초하여, 도 10b와 같이, 제1 이동 단말기(600a)에 대응하는 실행 아이콘(921,922,923)을 포함하는 애플리케이션 리스트(1070)가 자동으로 표시되도록 제어할 수 있다. 이에 따라, 사용자가 간편하게 미러링 모드로 진입할 수 있게 된다.
도 10c는, 영상표시장치(100)와, 제1 이동 단말기(600a), 제2 이동 단말기(600b)가 근접한 것을 예시한다.
도 10b에 비해 추가로, 영상표시장치(100)와 제2 이동 단말기(600b) 사이의 거리가 가까운 Db 로서, 영상표시장치(100)의 제어부(170)는, 제2 이동 단말기(600b)로부터 수신한 디바이스 정보에 기초하여, 도 10c와 같이, 제1 이동 단말기(600a)에 대응하는 실행 아이콘(921,922,923), 및 제2 이동 단말기(600b)에 대응하는 실행 아이콘(911)을 포함하는 애플리케이션 리스트(1071)가 자동으로 표시되도록 제어할 수 있다. 이에 따라, 사용자가 간편하게 미러링 모드로 진입할 수 있게 된다.
도 11은 본 발명의 다른 실시예에 따른 영상표시장치의 동작방법의 일예를 보여주는 순서도이고, 도 12a 내지 도 13f는 도 11의 동작방법을 설명하기 위해 참조되는 도면이다.
도면을 참조하면, 영상표시장치의 제어부(170)는, 애플리케이션 표시 입력에 따라, 미러링과 관련된 애플리케이션 실행 아이콘을 포함하는 애플리케이션 리스트를 표시하도록 제어한다(S1105).
다음, 실행 아이콘이 선택되는 경우, 영상표시장치의 제어부(170)는, 이동 단말기(600)로 실행 아이콘에 대응하는 애플리케이션 정보를 전송하도록 제어한다(S1115).
다음, 영상표시장치의 외부 장치 인터페이스부(130)는, 이동 단말기(600)로부터 디바이스 정보, 실행 중인 애플리케이션 정보, 및 애플리케이션 이미지를 수신한다(S1120).
다음, 영상표시장치의 제어부(170)는, 수신되는 애플리케이션 이미지를 디스플레이(180)에 표시하도록 제어한다(S1125).
도 12a는, 영상표시장치(200)에 소정 영상(715)이 표시되는 것을 예시한다. 소정 영상(715)은, 방송 영상일 수 있다.
도 12b는, 원격제어장치(200)의 소정키(201)가 동작하는 경우, 애플리케이션 리스트(1270)가, 영상(715)과 함께, 표시되는 것을 예시한다.
애플리케이션 리스트(1270)는 미러링과 관련된 실행 아이콘들(771,773,774)을 포함할 수 있다.
원격제어장치(200)의 포인팅 신호에 기초한 포인터(205)에 의해, 갤러리 실행 아이콘(774)이 선택되는 경우, 영상표시장치의 제어부(170)는, 외부장치 인터페이스부(130)를 통해, 이동 단말기(600)로, 갤러리 애플리케이션 실행 정보(Ssa)를 전송하도록 제어할 수 있다.
이에 따라, 이동 단말기(600)는, 갤러리 애플리케이션을 실행할 수 있다.
도 12c는, 갤러리 애플리케이션 실행에 따른 갤러리 애플리케이션 이미지(840a)가 이동 단말기(600)에 표시되면서, 갤러리 애플리케이션 이미지(Saib)가, 영상표시장치(100)로 전송되어, 영상표시장치(100)에, 미러링된 갤러리 애플리케이션 이미지(840b)가 표시되는 것을 예시한다.
한편, 영상표시장치의 제어부(170)는, 도 12c와 달리, 표시되던 소정 영상(715)과 갤러리 애플리케이션 이미지(840b)가 함께 표시되도록 제어할 수도 있다.
한편, 원격제어장치(200)의 소정키(201)가 동작하는 경우, 영상표시장치의 제어부(170)는, 도 12d와 같이, 미러링과 관련된 실행 아이콘들(771,773,774)을 포함하는 애플리케이션 리스트(1270)가 표시되도록 제어할 수 있다. 특히, 표시되던 갤러리 애플리케이션 이미지(840b)와 애플리케이션 리스트(1270)가 함께 표시되도록 제어할 수 있다.
원격제어장치(200)의 포인팅 신호에 기초한 포인터(205)에 의해, 메일 실행 아이콘(773)이 선택되는 경우, 영상표시장치의 제어부(170)는, 외부장치 인터페이스부(130)를 통해, 이동 단말기(600)로, 메일 애플리케이션 실행 정보(Ssb)를 전송하도록 제어할 수 있다.
이에 따라, 이동 단말기(600)는, 메일 애플리케이션을 실행할 수 있다.
도 12e는, 메일 애플리케이션 실행에 따른 메일 애플리케이션 이미지(740a)가 이동 단말기(600)에 표시되면서, 메일 애플리케이션 이미지(Saia)가, 영상표시장치(100)로 전송되어, 영상표시장치(100)에, 미러링된 메일 애플리케이션 이미지(740b)가 표시되는 것을 예시한다.
한편, 외부장치 인터페이스부(130)는, 제1 시간에, 이동 단말기(600)로부터 디바이스 정보, 실행 중인 제1 어플리케이션 정보, 및 실행 중인 제1 애플리케이션 이미지를 수신하고, 제1 시간에 후속하는 제2 시간에, 이동 단말기(600)로부터 디바이스 정보, 실행 중인 제1 어플리케이션 정보, 및 실행 중인 제1 애플리케이션 이미지를 수신할 수 있다.
한편, 제어부(170)는, 제1 시간과 제2 시간 사이의 시간 차이가 소정 시간 이하인 경우, 제1 애플리케이션 이미지와 제2 애플리케이션 이미지를 화면 분할하여 디스플레이(80)에 표시되도록 제어할 수 있다.
즉, 도 12b의 제1 애플리케이션 이미지 수신 이후, 소정 시간 이하 내에, 도 12e의 제2 애플리케이션 이미지가 수신되는 경우, 영상표시장치의 제어부(170)는, 도 12f와 같이, 미러링된 갤러리 애플리케이션 이미지(840bb)와, 미러링된 메일 애플리케이션 이미지(740bb)가 함께 표시되도록 제어할 수 있다. 즉, 미러링 모드에서, 타임머신 기능을 활용하여, 화면 분할 표시함으로써, 사용자의 이용 편의성이 증대될 수 있게 된다.
한편, 제어부(170)는, 이동 단말기(600)에 접속하여, 이동 단말기(600) 내의 복수의 애플리케이션 중 선택되는 애플리케이션을 미러링 가능한 애플리케이션으로 설정하도록 제어할 수 있다. 이에 따라, 이동 단말기(600)에서는, 도 7b의 폴더(705) 내에 선택된 애플리케이션이 포함되도록 제어할 수 있다.
한편, 영상표시장치의 제어부(170)는, 선택되어 설정된 애플리케이션에 대응하는 실행 아이콘을 생성하도록 제어할 수 있다. 그리고, 애플리케이션 리스트 표시시, 생성된 실행 아이콘이 추가되어 표시되도록 제어할 수도 있다.
도 13a는, 영상표시장치(200)에 소정 영상(715)이 표시되는 것을 예시한다. 소정 영상(715)은, 방송 영상일 수 있다.
도 13b는, 원격제어장치(200)의 소정키(201)가 동작하는 경우, 애플리케이션 리스트(970a)가, 영상(715)과 함께, 표시되는 것을 예시한다.
애플리케이션 리스트(970a)는, 제1 사용자(terry)의 제1 이동 단말기(600a)와 미러링과 관련된 실행 아이콘들(921,922,923), 및 제2 사용자(Sang)의 제2 이동 단말기(600b)와 미러링과 관련된 실행 아이콘(911)을 포함할 수 있다.
원격제어장치(200)의 포인팅 신호에 기초한 포인터(205)에 의해, 제1 사용자(terry)의 제1 이동 단말기(600a)와 관련된 갤러리 실행 아이콘(922)이 선택되는 경우, 영상표시장치의 제어부(170)는, 외부장치 인터페이스부(130)를 통해, 제1 이동 단말기(600a)로, 갤러리 애플리케이션 실행 정보(Ssc)를 전송하도록 제어할 수 있다.
이에 따라, 제1 이동 단말기(600a)는, 갤러리 애플리케이션을 실행할 수 있다.
도 13c는, 갤러리 애플리케이션 실행에 따른 갤러리 애플리케이션 이미지(840a)가 제1 이동 단말기(600a)에 표시되면서, 갤러리 애플리케이션 이미지(Saib)가, 영상표시장치(100)로 전송되어, 영상표시장치(100)에, 미러링된 갤러리 애플리케이션 이미지(840b)가 표시되는 것을 예시한다.
한편, 영상표시장치의 제어부(170)는, 도 13c와 달리, 표시되던 소정 영상(715)과 갤러리 애플리케이션 이미지(840b)가 함께 표시되도록 제어할 수도 있다.
한편, 원격제어장치(200)의 소정키(201)가 동작하는 경우, 영상표시장치의 제어부(170)는, 도 13d와 같이, 제1 사용자(terry)의 제1 이동 단말기(600a)와 미러링과 관련된 실행 아이콘들(921,922,923), 및 제2 사용자(Sang)의 제2 이동 단말기(600b)와 미러링과 관련된 실행 아이콘(911)을 포함하는 애플리케이션 리스트(970a)가 표시되도록 제어할 수 있다. 특히, 표시되던 갤러리 애플리케이션 이미지(840b)와 애플리케이션 리스트(970a)가 함께 표시되도록 제어할 수 있다.
원격제어장치(200)의 포인팅 신호에 기초한 포인터(205)에 의해, 제2 사용자(Sang)의 제2 이동 단말기(600b)와 관련된 메신저 실행 아이콘(911)이 선택되는 경우, 영상표시장치의 제어부(170)는, 외부장치 인터페이스부(130)를 통해, 제2 이동 단말기(600b)로, 메신저 애플리케이션 실행 정보(Ssd)를 전송하도록 제어할 수 있다.
이에 따라, 제2 이동 단말기(600b)는, 메신저 애플리케이션을 실행할 수 있다.
도 13e는, 메신저 애플리케이션 실행에 따른 메신저 애플리케이션 이미지(1340a)가 제2 이동 단말기(600b)에 표시되면서, 메신저 애플리케이션 이미지(Saie)가, 영상표시장치(100)로 전송되어, 영상표시장치(100)에, 미러링된 메신저 애플리케이션 이미지(1340b)가 표시되는 것을 예시한다.
한편, 외부장치 인터페이스부(130)는, 제1 시간에, 이동 단말기(600)로부터 디바이스 정보, 실행 중인 제1 어플리케이션 정보, 및 실행 중인 제1 애플리케이션 이미지를 수신하고, 제1 시간에 후속하는 제2 시간에, 이동 단말기(600)로부터 디바이스 정보, 실행 중인 제1 어플리케이션 정보, 및 실행 중인 제1 애플리케이션 이미지를 수신할 수 있다.
한편, 제어부(170)는, 제1 시간과 제2 시간 사이의 시간 차이가 소정 시간 이하인 경우, 제1 애플리케이션 이미지와 제2 애플리케이션 이미지를 화면 분할하여 디스플레이(80)에 표시되도록 제어할 수 있다.
즉, 도 13b의 제1 애플리케이션 이미지 수신 이후, 소정 시간 이하 내에, 도 13e의 제2 애플리케이션 이미지가 수신되는 경우, 영상표시장치의 제어부(170)는, 도 13f와 같이, 미러링된 갤러리 애플리케이션 이미지(840bb)와, 미러링된 메신저 애플리케이션 이미지(1340b)가 함께 표시되도록 제어할 수 있다. 즉, 미러링 모드에서, 타임머신 기능을 활용하여, 화면 분할 표시함으로써, 사용자의 이용 편의성이 증대될 수 있게 된다.
한편, 도 13a 내지 도 13f 와 달리, 영상표시장치의 외부장치 인터페이스부(130)는, 복수의 이동 단말기(600)로부터, 각각 디바이스 정보, 실행 중인 애플리케이션 정보, 및 실행 중인 애플리케이션 이미지를 수신할 수 있다.
그리고, 영상표시장치의 제어부(170)는, 복수의 이동 단말기(600)로부터 수신되는 복수의 애플리케이션 이미지를 화면 분할하여 디스플레이(80)에 표시되도록 제어할 수 있다.
즉, 제1 이동 단말기(600a)에서, 갤러리 애플리케이션이 실행되고, 제2 이동 단말기(600b)에서, 메신저 애플리케이션이 실행되는 경우, 영상표시장치의 제어부(170)는, 도 13f와 같이, 미러링된 갤러리 애플리케이션 이미지(840bb)와, 미러링된 메신저 애플리케이션 이미지(1340b)가 함께 표시되도록 제어할 수 있다.
한편, 본 발명의 영상표시장치의 동작방법은 영상표시장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (20)

  1. 디스플레이;
    이동 단말기로부터 디바이스 정보, 실행 중인 애플리케이션 정보, 및 상기 실행 중인 애플리케이션 이미지를 수신하는 인터페이스부;
    상기 이동 단말기에 대한 미러링 모드인 경우, 상기 수신되는 애플리케이션 이미지를 표시하도록 제어하며, 상기 실행된 애플리케이션 정보에 기초하여, 해당 애플리케이션에 대한 실행 아이콘을 생성하고, 상기 생성된 실행아이콘을 표시하도록 제어하는 제어부;를 포함하며,
    상기 제어부는,
    상기 이동 단말기와 다른 제2 이동 단말기에 대한 미러링 모드인 경우, 상기 수신되는 제2 애플리케이션 이미지를 표시하도록 제어하며, 상기 실행된 제2 애플리케이션 정보에 기초하여, 제2 애플리케이션에 대한 제2 실행아이콘을 생성하고,
    상기 생성된 실행아이콘과 상기 생성된 제2 실행아이콘을 포함하는 애플리케이션 리스트를 소정 영상과 함께 표시하도록 제어하며,
    상기 제어부는,
    상기 이동 단말기 또는 상기 제2 이동단말기에서 각각 수신되는 애플리케이션 정보 중 아이콘 이미지를 이용하여, 상기 실행아이콘 및 상기 제2 실행아이콘을 생성하며,
    상기 이동 단말기 또는 상기 제2 이동단말기에서 각각 수신되는 디바이스 정보에 더 기초하여, 상기 실행아이콘과 상기 제2 실행아이콘이 구분되도록 제어하는 영상표시장치.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 미러링 모드 종료 이후, 상기 실행된 애플리케이션 정보에 기초하여, 해당 애플리케이션에 대한 실행 아이콘을 생성하고, 상기 생성된 실행아이콘을 표시하도록 제어하는 영상표시장치.
  3. 제1항에 있어서,
    상기 인터페이스부는,
    상기 표시되는 실행 아이콘이 선택되는 경우, 상기 이동 단말기에서, 상기 실행 아이콘에 대응하는 애플리케이션이 실행되도록, 상기 이동 단말기로, 상기 실행 아이콘에 대응하는 애플리케이션 정보를 전송하는 영상표시장치.
  4. 제1항에 있어서,
    상기 제어부는,
    애플리케이션 리스트 내에, 상기 실행 아이콘이 배치되도록 제어하며,
    상기 이동 단말기로부터, 수신 또는 실행된 순서에 따라, 복수의 애플리케이션에 대응하는 복수의 아이콘이 정렬되어 표시되도록 제어하는 영상표시장치.
  5. 제1항에 있어서,
    상기 제어부는,
    수신되는 사용자 정보에 따라, 상기 사용자 정보에 대응하는 실행 아이콘이 표시되도록 제어하는 영상표시장치.
  6. 제1항에 있어서,
    상기 인터페이스부는,
    복수의 이동 단말기로부터, 각각 디바이스 정보, 실행 중인 애플리케이션 정보, 및 상기 실행 중인 애플리케이션 이미지를 수신하며,
    상기 제어부는,
    상기 복수의 이동 단말기로부터 수신되는 복수의 애플리케이션 이미지를 화면 분할하여 상기 디스플레이에 표시되도록 제어하는 영상표시장치.
  7. 제1항에 있어서,
    상기 인터페이스부는,
    제1 시간에, 상기 이동 단말기로부터 상기 디바이스 정보, 실행 중인 제1 애플리케이션 정보, 및 상기 실행 중인 제1 애플리케이션 이미지를 수신하고,
    상기 제1 시간에 후속하는 제2 시간에, 상기 이동 단말기로부터 상기 디바이스 정보, 실행 중인 제1 애플리케이션 정보, 및 상기 실행 중인 제1 애플리케이션 이미지를 수신하며,
    상기 제어부는,
    상기 제1 시간과 상기 제2 시간 사이의 시간 차이가 소정 시간 이하인 경우, 상기 제1 애플리케이션 이미지와 상기 제2 애플리케이션 이미지를 화면 분할하여 상기 디스플레이에 표시되도록 제어하는 영상표시장치.
  8. 제1항에 있어서,
    상기 제어부는,
    상기 이동 단말기에 접속하여, 상기 이동 단말기 내의 복수의 애플리케이션 중 선택되는 애플리케이션을 미러링 가능한 애플리케이션으로 설정하도록 제어하며,
    상기 설정된 애플리케이션에 대응하는 실행 아이콘을 생성하도록 제어하는 영상표시장치.
  9. 제1항에 있어서,
    방송 신호를 수신하는 방송 수신부;를 더 포함하고,
    상기 제어부는,
    상기 방송 신호에 기초한 방송 영상과, 상기 애플리케이션 이미지가 함께 표시되도록 제어하는 영상표시장치.
  10. 제1항에 있어서,
    상기 제어부는,
    상기 이동 단말기에서 실행 중인 애플리케이션 또는 애플리케이션 이미지에 대한, 최근 실행 시간 정보, 이미지 파일 정보 중 적어도 하나를 상기 이동 단말기로 전송하도록 제어하는 영상표시장치.
  11. 제1항에 있어서,
    상기 제어부는,
    상기 이동 단말기로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 상기 실행 아이콘을 포함하는 애플리케이션 리스트가 자동으로 표시되도록 제어하는 영상표시장치.
  12. 제1항에 있어서,
    상기 제어부는,
    제1 이동 단말기로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 상기 제1 이동 단말기에 대응하는 제1 실행 아이콘을 포함하는 애플리케이션 리스트가 자동으로 표시되도록 제어하며,
    상기 애플리케이션 리스트가 표시된 상태에서, 제2 이동 단말기로부터 수신되는 무선 신호의 세기가 소정 세기 이상인 경우, 상기 제1 실행 아이콘, 및 상기 제2 이동 단말기에 대응하는 제2 실행 아이콘을 포함하는 애플리케이션 리스트가 자동으로 표시되도록 제어하는 영상표시장치.
  13. 삭제
  14. 이동 단말기로부터 디바이스 정보, 실행 중인 애플리케이션 정보, 및 상기 실행 중인 애플리케이션 이미지를 수신하는 단계;
    상기 수신되는 이미지를 표시하는 단계;
    상기 애플리케이션이 전환되거나 종료되는 경우, 상기 애플리케이션에 대한 실행 아이콘을 생성하는 단계; 및
    상기 생성된 실행 아이콘을 표시하는 단계;
    상기 이동 단말기와 다른 제2 이동 단말기에 대한 미러링 모드인 경우, 상기 수신되는 제2 애플리케이션 이미지를 표시하는 단계;
    상기 실행된 제2 애플리케이션 정보에 기초하여, 제2 애플리케이션에 대한 제2 실행아이콘을 생성하는 단계;
    상기 생성된 실행아이콘과 상기 생성된 제2 실행아이콘을 포함하는 애플리케이션 리스트를 소정 영상과 함께 표시하는 단계;를 포함하며,
    상기 이동 단말기 또는 상기 제2 이동단말기에서 각각 수신되는 애플리케이션 정보 중 아이콘 이미지를 이용하여, 상기 실행아이콘 및 상기 제2 실행아이콘을 생성하며,
    상기 이동 단말기 또는 상기 제2 이동단말기에서 각각 수신되는 디바이스 정보에 더 기초하여, 상기 실행아이콘과 상기 제2 실행아이콘이 구분되는 영상표시장치의 동작방법.
  15. 제14항에 있어서,
    상기 실행 아이콘이 선택되는 경우, 상기 이동 단말기로 상기 선택된 실행 아이콘에 대응하는 애플리케이션 정보를 전송하는 단계;를 더 포함하는 영상표시장치의 동작방법.
  16. 제15항에 있어서,
    상기 실행 아이콘 선택에 기초하여, 상기 이동 단말기에서 실행되는 애플리케이션 정보, 및 이미지를 수신하는 단계; 및
    상기 수신되는 이미지를 표시하는 단계;를 더 포함하는 영상표시장치의 동작방법.
  17. 제14항에 있어서,
    사용자 정보를 수신하는 단계;를 더 포함하며,
    상기 실행 아이콘 표시 단계는,
    상기 사용자 정보에 대응하여, 사용자 별 실행 아이콘을 표시하는 단계를 포함하는 영상표시장치의 동작방법.
  18. 제14항에 있어서,
    복수의 이동 단말기로부터, 각각 디바이스 정보, 실행 중인 애플리케이션 정보, 및 상기 실행 중인 애플리케이션 이미지를 수신하는 경우,
    상기 복수의 이동 단말기로부터 수신되는 복수의 애플리케이션 이미지를 화면 분할하여 디스플레이에 함께 표시하는 단계;를 더 포함하는 영상표시장치의 동작방법.
  19. 제14항에 있어서,
    방송 신호를 수신하는 단계;를 더 포함하며,
    상기 실행 아이콘 표시 단계는,
    상기 방송 신호에 기초한 방송 영상과, 상기 실행 아이콘을 함께 표시하는 단계를 포함하는 영상표시장치의 동작방법.
  20. 제14항에 있어서,
    상기 이동 단말기에서 실행 중인 애플리케이션 또는 애플리케이션 이미지에 대한, 최근 실행 시간 정보, 이미지 파일 정보 중 적어도 하나를 상기 이동 단말기로 전송하는 단계;를 더 포함하는 영상표시장치의 동작방법.
KR1020150012235A 2015-01-26 2015-01-26 영상표시장치, 및 그 동작방법 KR102364620B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020150012235A KR102364620B1 (ko) 2015-01-26 2015-01-26 영상표시장치, 및 그 동작방법
US15/003,268 US10474322B2 (en) 2015-01-26 2016-01-21 Image display apparatus
EP16000159.0A EP3048799B1 (en) 2015-01-26 2016-01-22 Image display apparatus
CN201610052063.0A CN105828170B (zh) 2015-01-26 2016-01-26 图像显示装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150012235A KR102364620B1 (ko) 2015-01-26 2015-01-26 영상표시장치, 및 그 동작방법

Publications (2)

Publication Number Publication Date
KR20160091743A KR20160091743A (ko) 2016-08-03
KR102364620B1 true KR102364620B1 (ko) 2022-02-17

Family

ID=55274957

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150012235A KR102364620B1 (ko) 2015-01-26 2015-01-26 영상표시장치, 및 그 동작방법

Country Status (4)

Country Link
US (1) US10474322B2 (ko)
EP (1) EP3048799B1 (ko)
KR (1) KR102364620B1 (ko)
CN (1) CN105828170B (ko)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2996346A1 (en) * 2014-09-12 2016-03-16 Samsung Electronics Co., Ltd. Multi-screen control method and device supporting multiple window applications
KR102306536B1 (ko) * 2015-04-01 2021-09-29 삼성전자주식회사 위젯 제공 시스템 및 방법
USD791186S1 (en) * 2015-09-17 2017-07-04 Lg Electronics Inc. Display panel with icon
KR102412283B1 (ko) * 2016-02-17 2022-06-23 삼성전자 주식회사 전자 장치 및 전자 장치의 영상 공유 제어 방법
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
DE102017203570A1 (de) * 2017-03-06 2018-09-06 Volkswagen Aktiengesellschaft Verfahren und vorrichtung zur darstellung von empfohlenen bedienhandlungen eines vorschlagssystems und interaktion mit dem vorschlagssystem
US10585637B2 (en) * 2017-03-27 2020-03-10 Lenovo (Beijing) Co., Ltd. Information processing method and electronic device
KR102365678B1 (ko) 2017-03-29 2022-02-21 삼성전자주식회사 외부 장치를 이용한 화면 출력 방법 및 이를 지원하는 전자 장치
CN108781235B (zh) * 2017-06-13 2021-12-28 华为技术有限公司 一种显示方法及装置
KR102350933B1 (ko) * 2017-06-20 2022-01-12 엘지전자 주식회사 영상표시장치
EP3685588A4 (en) * 2017-09-19 2021-01-27 LG Electronics Inc. DISPLAY DEVICE AND ITS CONTROL TERMINAL
CN111371947A (zh) * 2018-12-26 2020-07-03 珠海格力电器股份有限公司 一种图片查看方法、装置、存储介质及终端
CN110399112A (zh) * 2019-08-28 2019-11-01 北京小米移动软件有限公司 一种投屏方法及装置
US11349976B2 (en) * 2019-09-12 2022-05-31 Lenovo (Beijing) Co., Ltd. Information processing method, file transmission method, electronic apparatus, and computing apparatus
CN116055773A (zh) * 2019-12-17 2023-05-02 华为技术有限公司 一种多屏协同方法、系统及电子设备
KR20220017193A (ko) * 2020-08-04 2022-02-11 삼성전자주식회사 전자 장치 및 전자 장치가 외부 장치 디스플레이 상에 어플리케이션 화면을 제공하는 방법
CN112612436A (zh) * 2020-12-24 2021-04-06 广州视源电子科技股份有限公司 一种投屏切换方法、装置、设备及存储介质
JP2023069763A (ja) * 2021-11-08 2023-05-18 セイコーエプソン株式会社 表示装置の画像表示方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120088548A1 (en) * 2010-10-06 2012-04-12 Chanphill Yun Mobile terminal, display device and controlling method thereof

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9641884B2 (en) * 2008-11-15 2017-05-02 Adobe Systems Incorporated Method and device for establishing a content mirroring session
KR101695810B1 (ko) 2010-05-07 2017-01-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8924594B2 (en) * 2011-05-18 2014-12-30 Barbara J. Manges Network architecture for synchronized display
US9317240B2 (en) 2012-02-15 2016-04-19 Lg Electronics Inc. Image display device and method of controlling the same
KR101919788B1 (ko) * 2012-05-31 2018-11-19 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR102144553B1 (ko) * 2013-08-30 2020-08-13 삼성전자주식회사 다중 디스플레이 방법, 저장 매체 및 전자 장치
CN104750237B (zh) 2013-12-29 2018-10-12 中国移动通信集团公司 一种多屏互动连接方法、装置及电子设备

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120088548A1 (en) * 2010-10-06 2012-04-12 Chanphill Yun Mobile terminal, display device and controlling method thereof

Also Published As

Publication number Publication date
US10474322B2 (en) 2019-11-12
EP3048799B1 (en) 2020-10-21
KR20160091743A (ko) 2016-08-03
EP3048799A1 (en) 2016-07-27
CN105828170B (zh) 2021-02-02
US20160216852A1 (en) 2016-07-28
CN105828170A (zh) 2016-08-03

Similar Documents

Publication Publication Date Title
KR102364620B1 (ko) 영상표시장치, 및 그 동작방법
KR102403338B1 (ko) 이동 단말기
CN107925791B (zh) 图像显示设备和移动终端
KR102350933B1 (ko) 영상표시장치
US11449297B2 (en) Image display apparatus
KR102482549B1 (ko) 영상표시장치
EP2560402B1 (en) Image display device and method for operating the same using mobile terminal
KR102459590B1 (ko) 영상표시장치
US11397513B2 (en) Content transmission device and mobile terminal for performing transmission of content
KR102313306B1 (ko) 영상표시장치, 및 이동 단말기
KR102190007B1 (ko) 영상제공장치, 서버, 및 이를 포함하는 영상 제공 시스템
KR102444150B1 (ko) 영상표시장치
KR20160039478A (ko) 영상표시장치, 및 그 동작방법
KR20170112099A (ko) 영상표시장치
KR20230116662A (ko) 영상표시장치
KR20160081650A (ko) 영상제공장치
KR101896257B1 (ko) 원격제어장치, 영상표시장치, 및 그 동작방법
KR101980546B1 (ko) 영상표시장치의 동작 방법
KR20140089208A (ko) 영상표시장치 및 그 동작 방법
KR20130051777A (ko) 영상표시장치 및 그 동작방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant