KR102169522B1 - 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치 - Google Patents

모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치 Download PDF

Info

Publication number
KR102169522B1
KR102169522B1 KR1020130079801A KR20130079801A KR102169522B1 KR 102169522 B1 KR102169522 B1 KR 102169522B1 KR 1020130079801 A KR1020130079801 A KR 1020130079801A KR 20130079801 A KR20130079801 A KR 20130079801A KR 102169522 B1 KR102169522 B1 KR 102169522B1
Authority
KR
South Korea
Prior art keywords
display device
content
external display
mobile device
electronic device
Prior art date
Application number
KR1020130079801A
Other languages
English (en)
Other versions
KR20150009014A (ko
Inventor
서인교
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020130079801A priority Critical patent/KR102169522B1/ko
Publication of KR20150009014A publication Critical patent/KR20150009014A/ko
Application granted granted Critical
Publication of KR102169522B1 publication Critical patent/KR102169522B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 모바일장치의 다중화면 표시방법은, 통신 가능하게 연결된 외부 디스플레이장치에 표시하기 위한 컨텐츠에 대한 사용자 선택을 수신하는 단계, 상기 선택된 컨텐츠를 가상메모리 영역에 저장하는 단계, 상기 가상메모리 영역에 저장된 컨텐츠를 AV(audio video) 데이터 프레임으로 구성하는 단계, 상기 AV 데이터 프레임을 엔코딩(encoding)하는 단계 및 상기 엔코딩 한 AV 프레임 데이터를 상기 외부 디스플레이장치에 전송하는 단계를 포함하여 구성된다.
본 발명의 모바일장치의 다중화면 표시방법에 의하면, 모바일장치에서 처리되는 일부의 컨텐츠는 모바일장치의 주화면으로 표시하고, 다른 일부의 컨텐츠는 통신으로 연결된 외부 디스플레이장치에 표시하여 편리한 멀티태스킹을 수행할 수 있다.

Description

모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치{A METHOD FOR DISPLAYING MULI-SCREEN IN THE MOBILE DEVICE AND MOBILE DEVICE CAPABLE OF MULI-SCREEN DISPLAYING}
본 발명은 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치, 더욱 상세하게는 모바일장치에서 복수의 컨텐츠를 표시하는 다중화면 중 하나를 통신을 이용하여 외부 디스플레이장치에서 실시간으로 표시할 수 있는 다중화면표시 방법 및 그 다중화면표시가 가능한 모바일장치에 관한 것이다.
기술이 발전함에 따라 스마트폰을 비롯한 모바일단말기에 다양한 기능들이 구현되고 있다. 이러한 다양한 기능들로 인하여 사용자는 모바일단말기를 통해 기본적인 통신 기능뿐만 아니라 인터넷, 멀티미디어 방송 서비스 등 다양한 기능과 서비스들을 접할 수 있다.
모바일단말기에서 멀티태스킹, 예를 들면 인터넷을 통해 서핑을 하다가 특정 동영상을 다운로드 실행 또는 스트리밍으로 실행하는 경우, 동영상이나 웹페이지 중 하나를 전체화면으로 볼 수 있지만, 다른 하나는 동시에 볼 수 없는 문제가 있다.
이러한 문제를 해결하기 위한 방법으로, 모바일단말기의 물리적 화면을 2개의 스크린으로 분할하여 표시하거나 모바일단말기의 화면을 와이파이로 연결된 TV의 대화면에 미러링(mirroring)으로 표시하는 방법이 이용될 수 있다.
그러나, 종래의 모바일단말기의 물리적인 화면을 2개로 분할하여 표시하거나 하드웨어적으로 분할된 듀얼 스크린에 다중화면을 표시하는 방법은 협소한 모바일화면을 분할하여 사용함으로써 사용자의 만족도가 낮을 수밖에 없다.
또한, 모바일화면 미러링의 경우, 모바일장치의 동일 화면을 연결된 제2장치(TV)와 공유하기 때문에, 비록 대화면에 동일한 화면이 표시되기 때문에 멀티태스킹을 수행할 수는 없다.
본 발명의 목적은 상술한 종래의 문제를 해결하기 위한 것으로, 상대적으로 화면이 작은 모바일장치의 주화면 이외에, 보조 화면 영역을, 네트워크 상에서 연결되어 있는 게이트웨이 셋탑박스(gateway STB)의 주화면(TV 등)으로 이용할 수 있는 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치를 제공함에 있다.
　본 발명의 다른 목적은 모바일장치가 갖는 작은 표시영역에서 오는 협소한 사용자 인터페이스(UI) 공간을 확장할 수 있는 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치를 제공함에 있다.
본 발명의 또 다른 목적은 보조 표시영역을 TV와 같은 상대적으로 큰 화면으로 확장할 수 있기 때문에, 다양한 멀티태스킹 동작이 가능한 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치를 제공함에 있다.
상술한 본 발명의 과제를 해결하기 위한 본 발명의 일 실시예에 따른 모바일장치의 다중화면 표시방법은, 통신 가능하게 연결된 외부 디스플레이장치에 표시하기 위한 컨텐츠에 대한 사용자 선택을 수신하는 단계, 상기 선택된 컨텐츠를 가상메모리 영역에 저장하는 단계, 상기 가상메모리 영역에 저장된 컨텐츠를 AV(audio video) 데이터 프레임으로 구성하는 단계, 상기 AV 데이터 프레임을 엔코딩(encoding)하는 단계 및 상기 엔코딩 한 AV 프레임 데이터를 상기 외부 디스플레이장치에 전송하는 단계를 포함하여 구성할 수 있다.
상기 일 실시예의 방법에서, 상기 AV데이터 프레임은 연속 프레임 AV데이터를 포함할 수 있다.
상기 일 실시예의 방법은, 상기 사용자의 명령에 따라 외부 디스플레이장치와의 통신할 수 있는 세션 연결 단계를 더 포함할 수 있다.
상기 일 실시예의 방법에서, 상기 외부 디스플레이장치에 표시하기 위한 컨텐츠는 상기 모바일장치 내에서 멀티태스킹(multi tasking)으로 동작하는 복수의 어플리케이션 중 하나에서 처리되는 컨텐츠를 포함할 수 있다.
상기 일 실시예의 방법에서, 상기 외부 디스플레이장치에 표시하기 위한 컨텐츠에 대한 사용자의 선택은 상기 어플리케이션을 소정 방향으로 드래그하여 이루어지는 것을 특징으로 하는 방법.
상기 일 실시예의 방법에서, 상기 외부 디스플레이장치에 표시하기 위한 컨텐츠에 대한 사용자의 선택은 상기 드래그에 의해 상기 모바일장치의 스크린 영역을 벗어나는 부분으로 결정될 수 있다.
상기 일 실시예의 방법에서, 상기 외부 디스플레이장치에 표시하기 위한 컨텐츠에 대한 사용자의 선택은 유저인터페이스를 통하여 수행될 수 있다.
상기 일 실시예의 방법에서, 상기 세션 연결단계는 외부 디스플레이장치의 전원을 온(ON)시키는 제어신호를 전송하는 단계를 포함할 수 있다.
상기 일 실시예의 방법에서, 상기 세션 연결단계는 외부 디스플레이장치와의 세션유지 및 동기화를 위한 제어신호를 전송하는 단계를 포함할 수 있다.
본 발명의 일 실시예에 따른 다중화면 표시가 가능한 모바일장치는, 음성 또는 영상을 출력하기 위한 출력부, 외부 디스플레이장치와 통신을 위한 통신부, 통신 가능하게 연결된 상기 외부 디스플레이장치에 표시하기 위한 컨텐츠를 선택하는 유저인터페이스, 상기 선택된 컨텐츠를 저장하는 가상메모리 영역을 형성하는 저장부, 상기 가상메모리 영역에 저장된 컨텐츠를 AV(audio video) 데이터 프레임으로 구성하는 데이터처리부, 상기 AV 데이터 프레임을 엔코딩하는 엔코더 및 상기 엔코딩 한 AV 프레임 데이터를 상기 외부 디스플레이장치에 전송하도록 상기 통신부를 제어하는 제어부를 포함하여 구성할 수 있다.
상기 일 실시예의 장치에서, 상기 AV데이터 프레임은 연속 프레임 AV데이터를 포함할 수 있다.
상기 일 실시예의 장치에서, 상기 제어부는 사용자의 명령에 따라 외부 디스플레이장치와의 통신할 수 있도록 통신부를 제어할 수 있다.
상기 일 실시예의 장치에서, 상기 외부 디스플레이장치에 표시하기 위한 컨텐츠는 상기 모바일장치 내에서 멀티태스킹(multi tasking)으로 동작하는 복수의 어플리케이션 중 하나에서 처리되는 컨텐츠를 포함할 수 있다.
상기 일 실시예의 장치에서, 상기 외부 디스플레이장치에 표시하기 위한 컨텐츠에 대한 사용자의 선택은 상기 어플리케이션을 소정 방향으로 드래그하여 이루어질 수 있다.
상기 일 실시예의 장치에서, 상기 외부 디스플레이장치에 표시하기 위한 컨텐츠에 대한 사용자의 선택은 상기 드래그에 의해 상기 모바일장치의 스크린 영역을 벗어나는 부분으로 결정될 수 있다.
상기 일 실시예의 장치에서, 상기 제어부는 상기 외부 디스플레이장치의 전원을 온(ON)시키는 제어신호를 전송할 수 있다.
상기 일 실시예의 장치에서, 상기 제어부는 외부 디스플레이장치와의 세션유지 및 동기화를 위한 제어신호를 전송할 수 있다.
본 발명에 의하면, 모바일장치에서 처리되는 일부의 컨텐츠는 모바일장치의 주화면으로 표시하고, 다른 일부의 컨텐츠는 통신으로 연결된 외부 디스플레이장치에 표시하여 편리한 멀티태스킹을 수행할 수 있다.
도 1은 본 발명에 따른 모바일장치와 외부 디스플레이장치의 연결을 나타내는 도,
도 2는 본 발명에 따른 모바일장치와 외부 디스플레이장치의 구성을 나타내는 블록도,
도 3은 본 발명에 따른 모바일장치의 메모리 구성을 나타내는 도,
도 4는 본 발명에 따른 모바일장치의 다중화면 표시방법을 나타내는 흐름도,
도 5는 본 발명에 따른 모바일장치와 외부 장치들의 세션 연결을 나타내는 도,
도 6은 본 발명에 따른 모바일장치를 통해 외부 디스플레이장치의 전원을 제어하는 것을 나타내는 도,
도 7은 본 발명의 일 실시예에 따른 모바일장치에서 외부 디스플레이장치로 전송하기 위해 모바일장치에 표시된 컨텐츠에 대한 사용자입력(드래그)을 나타내는 도,
도 8은 도 7의 사용자입력에 따른 외부 디스플레이로의 컨텐츠 전송을 나타내는 도,
도 9는 본 발명의 또 다른 실시예에 따른 모바일장치에서 외부 디스플레이장치로 전송하기 위해 모바일장치에 표시된 컨텐츠에 대한 유저인터페이스를 나타내는 도, 및
도 10은 도 9의 유저인터페이스 선택에 따른 외부 디스플레이로의 컨텐츠 전송을 나타내는 도이다.
이하에서는 첨부도면을 참조하여 본 발명에 대해 상세히 설명한다. 이하 실시예에서는 본 발명의 사상과 직접적인 관련이 있는 구성들에 관해서만 설명하며, 그 외의 구성에 관해서는 설명을 생략한다. 그러나, 본 발명의 사상이 적용된 장치 또는 시스템을 구현함에 있어서, 이와 같이 설명이 생략된 구성이 불필요함을 의미하는 것이 아님을 밝힌다.
본 발명에서 설명하는 모바일장치는 스마트 폰, 태블릿 PC, 노트북 등 통신 수단을 갖는 이동 가능장치라면 어는 것이든 사용될 수 있다.
도 1에 나타낸 바와 같이, 모바일장치(100)는 홈 네트워크와 같은 통신으로 연결된 게이트웨이 셋탑박스(Gateway STB)를 가진 TV(200)를 보조 디스플레이로 활용할 수 있다.
도 2에 나타낸 바와 같이, 모바일장치(100)는 제1통신부(110), 제1제어부(120), 유저인터페이스부(130), 엔코더(140), 데이터처리부(150), 제1저장부(160), 제1영상처리부(170), 제1디스플레이부(180), 제1음성처리부(190), 및 제1스피커(195)를 포함하여 구성할 수 있다.
제1통신부(110)는 외부 장치, 예를 들면 TV(200)나 다른 모바일장치(300)와 각종 데이터를 송수신할 수 있다. 모바일장치(100)가 외부장치와 송수신하는 데이터는 외부장치에서 출력하고자 하는 영상이나 음성데이터, 외부장치와의 세션을 유지하고자 하는 제어신호나 동기신호 데이터를 포함할 수 있다.
제1통신부(110)는 2G, 3G, 4G, 롱텀에볼루션(LTE)와 같은 이동 통신, WLAN (Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등의 무선인터넷 기술, 및 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee) 등의 근거리 통신 기술을 적용할 수 있다. 물론 제1통신부(110)는 필요에 따라 케이블을 이용한 유선통신기술을 적용할 수 있다.
제1제어부(120)는 모바일장치(100)의 각 구성 부품들을, 예를 들면 제1통신부(110), 제1제어부(120), 유저인터페이스부(130), 엔코더(140), 데이터처리부(150), 제1저장부(160), 제1영상처리부(170), 제1디스플레이부(180), 제1음성처리부(190), 및 제1스피커(195)를 제어할 수 있다.
제1제어부(120)는 사용자의 지시에 따라 기본적으로 제1영상처리부(170)와 제1음성처리부(190)를 제어하여 제1디스플레이부(180)와 제1스피커(195)를 통해 출력할 각종 데이터를 처리하도록 할 수 있다.
또한, 제1제어부(120)는 사용자의 지시에 따라 외부 디스플레이장치(TV)(200)에 표시하고자 하는 컨텐츠를 제1저장부(160)를 이용하여 가상메모리에 저장하고, 데이터처리부(150)로 하여금 가상메모리에 저장된 컨텐츠를 오디오 비디오(AV) 데이터 프레임으로 처리하게 하고, 엔코더(140)로 하여금 상기 처리된 오디오 비디오(AV) 데이터 프레임을 엔코딩하고, 제1통신부(110)로 하여금 외부 디스플레이장치(TV)(200)에 엔코딩 된 오디오 비디오(AV) 데이터를 전송하도록 할 수 있다.
제1제어부(120)는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors)를 포함할 수 있다.
유저인터페이스부(UI)(130)는 사용자가 명령을 입력하게 하는 그래픽 유저인터페이스(GUI)나 텍스트 유저인터페이스(TUI)를 포함한다. 예를 들면, 모바일장치(100)에서 웹서핑을 하면서 원하는 동영상을 스트리밍 또는 다운로드 재생하는 멀티태스킹을 작업을 할 때, 동영상 재생을 외부 디스플레이장치(TV)에서 재생시키도록 하는 외부전송 명령 버튼(401)과 같은 그래픽 유저 인터페이스, 터치패널을 통한 드레그(drag) 동작인식 인터페이스를 포함할 수 있다.
엔코더(140)는 각 종 데이터를 재현 가능한 전송 데이터로 엔코딩(encoding)할 수 있다. 엔코더(140)는 데이터처리부(150)에 변환된 AV데이터 프레임을 외부 디스플레이장치(200)에 전송할 수 있도록 엔코딩할 수 있다.
데이터처리부(150)는 기본적으로 각종 데이터를 처리하여 제1디스플레이부(180)나 제1스피커(195)에서 출력할 수 있도록 한다. 또한, 데이터처리부(150)는 현재 제1디스플레이부(180)나 제1스피커(195)에 출력 중 또는 출력할 컨텐츠의 적어도 일부를 외부 디스플레이장치(TV)(200)로 표시할 부분을 AV데이터 프레임으로 변환할 수 있다.
제1저장부(160)는 한정되지 않은 데이터가 저장된다. 제1저장부(160)는 제어부(120)에 의해 액세스 되며, 이들에 의한 데이터의 읽기, 기록, 수정, 삭제, 갱신 등이 수행된다. 제1저장부(120)에 저장되는 데이터는, 예를 들면 사용자 입력부에서 수신한 각종 데이터, 운영체제, 운영체제 상에서 실행 가능한 다양한 애플리케이션, 부가데이터 등을 포함할 수 있다.
도3에 나타낸 바와 같이, 제1저장부(160)는 제1디스플레이부(180)나 제1스피커(195)에서 처리할 컨텐츠를 저장하는 제1표시영역으로 주화면 표시 가상메모리와 외부 디스플레이장치(200)에서 표시할 컨텐츠를 저장하는 제2표시영역으로 보조화면 표시 가상메모리를 포함할 수 있다.
제1저장부(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
제1영상처리부(170)는 제1디스플레이부(180)에 표시할 수 있도록 제1저장부에 저장된 또는 외부로부터 수신한 영상데이터를 처리할 수 있다.
제1디스플레이부(180)는 상기 제1영상처리부(170)에서 처리한 영상데이터를 표시할 수 있다. 제1디스플레이부(180)의 구현 방식은 한정되지 않는 바, 액정(liquid crystal), 발광 다이오드(light-emitting diode), 유기발광 다이오드(organic light-emitting diode) 등의 다양한 디스플레이 패널로 구현될 수 있다.
제1디스플레이부(180)는 구현 방식에 따라서 부가적인 구성을 추가적으로 포함할 수 있다. 예를 들면, 제1디스플레이부(130)는 액정 방식인 경우, 광을 공급하는 백라이트유닛(미도시)과, 표시패널(미도시)을 구동시키는 패널구동기판(미도시)을 포함할 수 있다.
제1디스플레이부(180)는 상기 제1영상처리부(170)를 통해 처리된 영상 신호 타이밍을 제어하는 타이밍제어부(T-con)(미도시), 라인버퍼(미도시), 프레임메모리(미도시), 계조변환회로(미도시), 표시패널(미도시) 등을 포함할 수 있다.
제1음성처리부(190)는 제1스피커(195)에서 출력할 제1저장부(160)에 저장된 또는 외부로부터 수신한 음성데이터를 처리할 수 있다.
제1스피커(195)는 처리된 음성신호를 소리로 변환하는 장치이다.
모바일장치(100)의 보조화면으로 이용되는 디스플레이장치(200)는 영상이나 음성을 출력할 수 있는 TV나 다른 모바일장치(300)를 포함할 수 있다. 이하 디스플레이장치(200)는 TV를 예로 들어 설명하기로 한다.
디스플레이장치(200)는 제2통신부(210), 제2제어부(220), 디코더(240), 제2영상처리부(270), 제2디스플레이부(280), 제2음성처리부(290), 및 제2스피커(295)를 포함하여 구성할 수 있다.
제2통신부(210)는 외부 장치, 예를 들면 모바일장치(100)와 각종 데이터를 송수신할 수 있다. 모바일장치(100)와 송수신하는 데이터는 모바일장치(100)와의 세션을 유지하고자 하는 제어신호나 데이터 동기신호를 포함할 수 있다.
제2통신부(210)는 2G, 3G, 4G, 롱텀에볼루션(LTE)와 같은 이동 통신, WLAN (Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등의 무선인터넷 기술, 및 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등의 근거리 통신 기술을 적용할 수 있다. 물론 제2통신부(210)는 케이블을 이용한 유선통신기술을 적용할 수 있다.
제2제어부(220)는 디스플레이장치(200)의 각 구성 부품들을, 예를 들면 제2통신부(210), 제2제어부(220), 디코더(240), 제2영상처리부(270), 제2디스플레이부(280), 제2음성처리부(290), 및 제2스피커(295)를 제어할 수 있다.
제2제어부(220)는 사용자의 지시에 따라 기본적으로 제2영상처리부(270)와 제2음성처리부(290)를 제어하여 제2디스플레이부(280)와 제2스피커(295)를 통해 출력할 각종 데이터를 처리하도록 할 수 있다.
또한, 제2제어부(220)는 제2통신부(210)를 통해 모바일장치(200)가 전송하는 AV데이터를 수신하고, 수신한 AV데이터를 디코더(240)를 통해 디코딩하고, 제2디스플레이부(280)나 제2스피커(295)에 출력하기 위해 제2영상처리부(270)나 제2음성처리부(290)를 제어할 수 있다.
제2제어부(220)는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors)를 포함할 수 있다.
디코더(240)는 각종 디코딩 데이터를 디코딩(decoding)할 수 있다.
제2영상처리부(270)는 제2디스플레이부(280)에 표시할 수 있도록 상기 디코딩된 AV데이터를 처리할 수 있다.
제2디스플레이부(280)는 상기 제2영상처리부(270)에서 처리한 영상데이터를 표시할 수 있다. 제2디스플레이부(280)는 제2디스플레이부(280)의 구현 방식은 한정되지 않는 바, 액정(liquid crystal), 플라즈마(plasma), 발광 다이오드(light-emitting diode), 유기발광 다이오드(organic light-emitting diode), 면전도 전자총(surface-conduction electron-emitter), 탄소 나노 튜브(carbon nano-tube), 나노 크리스탈(nano-crystal) 등의 다양한 디스플레이 패널로 구현될 수 있다.
제2디스플레이부(280)는 구현 방식에 따라서 부가적인 구성을 추가적으로 포함할 수 있다. 예를 들면, 제2디스플레이부(280)는 액정 방식인 경우, 광을 공급하는 백라이트유닛(미도시)과, 표시패널(미도시)을 구동시키는 패널구동기판(미도시)을 포함할 수 있다.
제2디스플레이부(280)는 상기 처리된 영상 신호 타이밍을 제어하는 타이밍제어부(T-con), 라인버퍼(미도시), 프레임메모리(미도시), 계조변환회로(미도시), 표시패널(미도시) 등을 포함할 수 있다.
제2음성처리부(290)는 제2스피커(295)에서 출력할 음성데이터를 처리할 수 있다.
제2스피커(295)는 처리된 음성신호를 소리로 변환하는 장치이다.
이하 본 발명에 따른 모바일장치(100)의 다중화면 표시방법을 도 4를 참조하여 상세히 설명한다.
사용자는 모바일장치(100)에서 복수의 작업을 동시에 수행할 수 있다. 예를 들면 웹페이지를 통해 원하는 정보(영화)를 검색할 수 있고, 검색 결과에서 특정 영화를 선택하면 동영상의 스트리밍 또는 다운로드 재생을 통해 영화를 감상할 수 있다. 이때, 모바일장치(100)는 화면이 작기 때문에 검색 중인 웹페이지는 보여주지 못하고 동영상만을 보여주게 된다.
사용자는 웹페이지를 통한 웹서핑과 동영상 감상을 동시에 수행하기 위해서는 다중화면 표시를 하여야 하나, 모바일장치(100)의 화면 크기가 작기 때문에 용이하지 않다.
일 실시예로서 사용자가 도 7에 나타낸 바와 같이 동영상을 모바일장치(100)의 스크린을 벗어나도록 드레그(drag)하면, 드레그에 의해 벗어나는 동영상 부분들이 통신으로 연결된 외부 디스플레이장치(200)에 표시할 컨텐츠로 선택될 수 있다(S110). 이 경우 사용자의 드레그에 의한 선택은 외부 디스플레이장치(200)에 표시할 컨텐츠의 일부가 된다.
다른 실시예로서, 사용자가 도 9에 나타나 있는 바와 같이 모바일장치(100)의 주화면 내의 UI로서 "외부전송: 버튼(401)을 선택할 수도 있다(S110). 이 경우 사용자의 버튼 선택은 외부 디스플레이장치(200)에 표시할 컨텐츠의 전체가 된다.
외부 디스플레이장치(200)에 표시할 컨텐츠는 모바일장치(100)의 제1디스플레이부(180)에 표시하기 위해 처리된 데이터이다. 에를 들면, 모바일장치(200)의 웹브라우저에 의한 처리된 데이터 또는 동영상 재생 어플리케이션에서 처리된 데이터가 된다.
사용자가 외부 디스플레이장치(200)에 표시할 컨텐츠를 선택하면, 선택된 컨텐츠는 제1저장부의 가상메모리에 저장된다(S120). 물론 외부 디스플레이장치(200)에 표시할 컨텐츠는 모바일장치(100)에서 실시간으로 처리되는 데이터들을 연속적 저장될 수 있다.
이어서 데이터처리부(150)를 통해 가상 메모리에 저장된 외부 디스플레이장치(200)에 표시할 컨텐츠를 AV 데이터 프레임으로 구성한다(S130). 이때, AV 데이터 프레임은 모바일장치(100)에서 실시간으로 처리되기 때문에 연속 데이터 프레임으로 구성될 수 있다.
AV 데이터 프레임은 외부 디스플레이장치(200)로의 전송을 위해 엔코더(140)에 의해 엔코딩 된다(S140).
엔코딩 AV 데이터 프레임은 제1통신부(110)를 통해 외부 디스플레이장치(200)로 전송된다(S150).
외부 디스플레이장치(200)는 제2통신부(210)를 통해 수신한 AV 데이터 프레임을 디코딩 하여 제2디스플레이부(180)에 표시한다.
모바일장치(100)에서 처리되는 영상 또는 음성데이터를 실시간으로 통신으로 연결된 디스플레이장치(200)에 전송하기 위해서는 세션 유지 및 데이터 동기화를 위해 데이터 송수신과 별도로 제어신호를 실시간을 교환하는 것이 필요하다(S160). 예를 들면, 도 7에서와 같이 하나의 동영상을 모바일장치(100)와 디스플레이장치(200)가 분할하여 표시할 때 세션 유지 및 데이터 동기화가 이루어지지 않으면 서로 연결된 동영상이 아니라 왜곡된 동영상을 보여주게 될 것이다.
결과적으로 도 10에 나타낸 바와 같이, 모바일장치(100)에 멀티태스킹을 할 때 드레그 또는 외부전송 버튼 클릭을 통해 모바일장치(100)에는 웹페이지가, 외부 디스플레이장치(200)에는 동영상이 표시될 수 있다. 즉, 모바일장치(100)에서는 웹페이지 표시를 포함한 웹서핑과 동영상 재생 동작을 동시에 수행하지만, 처리되는 동영상은 사용자 선택, 선택 컨텐츠를 가상메모리에 저장, 프레임 구성, 엔코딩, 전송 과정을 통해 실시간으로 디스플레이장치(TV)(200)에서 표시될 수 있다.
모바일장치(100)에서 표시를 위해 처리되는 컨텐츠를 외부 디스플레이장치(200,300)에 전송하기 위해서는 외부 디스플레이장치(200)와 데이터 통신을 위한 사전 세션연결이 필요하다.
도 5에 나타나 있는 바와 같이, 모바일장치(100)는 데이터 통신 연결이 가능한 주변의 디스플레이장치 검색을 수행할 수 있다. 검색에 의해 예를 들면 모바일장치(100)의 주변에 TV A(ID: 111) 와 Phone(ID: 222)이 검색될 수 있다. 이와 같이 장치검색을 통해 연결 가능한 장치가 검색되면, 원하는 장치를 선택한 후 식별번호(ID) 또는 패스워드를 입력하여 통신연결을 할 수 있다. 이렇게 연결된 모바일장치(100)와 디스플레이장치(200)는 실시간으로 데이터를 주고받고 공유할 수 있도록 세션 유지 및 데이터 동기화를 위한 제어신호를 실시간으로 교환한다.
도 5에서 검색된 디스플레이장치(220,300)를 이용하기 위해서는 선택된 디스플레이장치(200)가 동작 중이어야 한다. 이때, 도 6에 나타낸 바와 같이, 사용자가 원하는 디스플레이장치를 선택하였는데, 선택 디스플레이장치(200)가 오프(off)되어 있는 경우도 있을 수 있다. 따라서, 사용자는 해당 디스플레이장치(200)의 전원 온(ON)시켜야 하나 이는 매우 불편하다.
모바일장치(100)에서 사용자가 원하는 디스플레이장치를 선택하였는데, 선택 디스플레이장치(200)가 오프(OFF)되어 있는 경우 모바일장치(100)에서 디스플레이장치(200)의 전원 ON 제어신호를 전송하여 원격으로 디스플레이장치를 동작시킬 수 있다.
상기한 실시예는 예시적인 것에 불과한 것으로, 당해 기술 분야의 통상의 지식을 가진 자라면 다양한 변형 및 균등한 타 실시예가 가능하다. 따라서, 본 발명의 진정한 기술적 보호범위는 하기의 특허청구범위에 기재된 발명의 기술적 사상에 의해 정해져야 할 것이다.
100: 모바일장치
110,210: 통신부
120,220: 제어부
130: 유저인터페이스부
140: 엔코더
150: 데이터처리부
160: 제1저장부
170,270: 영상처리부
180,280: 디스플레이부
190,290: 음성처리부
200: 외부 디스플레이장치

Claims (17)

  1. 전자장치의 제어방법에 있어서,
    복수의 컨텐츠를 디스플레이에 표시하는 단계;
    상기 표시된 컨텐츠 중 일부 컨텐츠에 대한 사용자 선택을 수신하는 단계;
    상기 선택된 일부 컨텐츠를 메모리 영역에 저장하는 단계;
    상기 저장된 일부 컨텐츠를 외부 디스플레이장치에 표시되도록 상기 외부 디스플레이장치에 전송하는 단계; 및
    상기 일부 컨텐츠 이외의 다른 컨텐츠를 상기 디스플레이에 표시하는 단계를 포함하는 것을 특징으로 하는 전자장치의 제어방법.
  2. 제1항에 있어서,
    상기 메모리 영역에 저장된 일부 컨텐츠를 AV데이터 프레임으로 구성하는 단계를 더 포함하는 것을 특징으로 하는 전자장치의 제어방법.
  3. 제2항에 있어서,
    상기 사용자의 명령에 따라 외부 디스플레이장치와의 통신할 수 있는 세션 연결 단계를 더 포함하는 것을 특징으로 하는 전자장치의 제어방법.
  4. 제1항에 있어서,
    상기 외부 디스플레이장치에 표시하기 위한 일부 컨텐츠는 상기 전자장치 내에서 멀티태스킹(multi tasking)으로 동작하는 복수의 어플리케이션 중 하나에서 처리되는 컨텐츠를 포함하는 것을 특징으로 하는 전자장치의 제어방법.
  5. 제 4항에 있어서,
    상기 외부 디스플레이장치에 표시하기 위한 일부 컨텐츠에 대한 사용자의 선택은 상기 어플리케이션을 소정 방향으로 드래그하여 이루어지는 것을 특징으로 하는 전자장치의 제어방법.
  6. 제 5항에 있어서,
    상기 외부 디스플레이장치에 표시하기 위한 일부 컨텐츠에 대한 사용자의 선택은 상기 드래그에 의해 상기 전자장치의 스크린 영역을 벗어나는 부분으로 결정되는 것을 특징으로 하는 전자장치의 제어방법.
  7. 제 4항에 있어서,
    상기 외부 디스플레이장치에 표시하기 위한 일부 컨텐츠에 대한 사용자의 선택은 유저인터페이스를 통하여 수행되는 것을 특징으로 하는 전자장치의 제어방법.
  8. 제3항에 있어서,
    상기 세션 연결단계는 외부 디스플레이장치의 전원을 온(ON)시키는 제어신호를 전송하는 단계를 포함하는 것을 특징으로 하는 전자장치의 제어방법.
  9. 제3항에 있어서,
    상기 세션 연결단계는 상기 외부 디스플레이장치와의 세션유지 및 동기화를 위한 제어신호를 전송하는 단계를 포함하는 것을 특징으로 하는 전자장치의 제어방법.
  10. 전자장치에 있어서,
    컨텐츠를 출력하기 위한 출력부;
    외부 디스플레이장치와 통신을 위한 통신부;
    상기 출력부에 출력된 복수의 컨텐츠 중 상기 외부 디스플레이장치에 출력하기 위한 일부 컨텐츠를 선택하는 유저인터페이스;
    상기 선택된 일부 컨텐츠를 저장하는 메모리 영역을 가진 저장부;
    상기 저장된 일부 컨텐츠를 상기 외부 디스플레이장치에 전송하도록 상기 통신부를 제어하고, 상기 일부 컨텐츠 이외의 다른 컨텐츠를 상기 출력부에 출력하는 제어부를 포함하는 것을 특징으로 하는 전자장치.
  11. 제10항에 있어서,
    상기 메모리 영역에 저장된 일부 컨텐츠를 AV데이터 프레임으로 구성하는 데이터처리부를 더 포함하는 것을 특징으로 하는 전자장치.
  12. 제10항에 있어서,
    상기 제어부는 사용자의 명령에 따라 상기 외부 디스플레이장치와의 통신할 수 있도록 통신부를 제어하는 것을 특징으로 하는 전자장치.
  13. 제10항에 있어서,
    상기 외부 디스플레이장치에 출력하기 위한 일부 컨텐츠는 상기 전자장치 내에서 멀티태스킹(multi tasking)으로 동작하는 복수의 어플리케이션 중 하나에서 처리되는 컨텐츠를 포함하는 것을 특징으로 하는 전자장치.
  14. 제 13항에 있어서,
    상기 외부 디스플레이장치에 출력하기 위한 일부 컨텐츠에 대한 사용자의 선택은 상기 어플리케이션을 소정 방향으로 드래그하여 이루어지는 것을 특징으로 하는 전자장치.
  15. 제 14항에 있어서,
    상기 외부 디스플레이장치에 출력하기 위한 일부 컨텐츠에 대한 사용자의 선택은 상기 드래그에 의해 상기 전자장치의 스크린 영역을 벗어나는 부분으로 결정되는 것을 특징으로 하는 전자장치.
  16. 제12항에 있어서,
    상기 제어부는 상기 외부 디스플레이장치의 전원을 온(ON)시키는 제어신호를 전송하는 것을 특징으로 하는 전자장치.
  17. 제10항에 있어서,
    상기 제어부는 상기 외부 디스플레이장치와의 세션유지 및 동기화를 위한 제어신호를 전송하는 것을 특징으로 하는 전자장치.
KR1020130079801A 2013-07-08 2013-07-08 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치 KR102169522B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130079801A KR102169522B1 (ko) 2013-07-08 2013-07-08 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130079801A KR102169522B1 (ko) 2013-07-08 2013-07-08 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치

Publications (2)

Publication Number Publication Date
KR20150009014A KR20150009014A (ko) 2015-01-26
KR102169522B1 true KR102169522B1 (ko) 2020-10-23

Family

ID=52572353

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130079801A KR102169522B1 (ko) 2013-07-08 2013-07-08 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치

Country Status (1)

Country Link
KR (1) KR102169522B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102360067B1 (ko) * 2015-08-12 2022-02-07 삼성전자 주식회사 전자 장치 및 전자 장치의 정보 공유 방법
CN107172073A (zh) * 2017-06-26 2017-09-15 西安万像电子科技有限公司 媒体数据的处理方法、装置及系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07298368A (ja) * 1994-04-21 1995-11-10 Hitachi Ltd Ａｖコントロールシステム
KR101093223B1 (ko) * 2005-10-31 2011-12-13 주식회사 팬택 멀티 디스플레이 단말기 및 방법
KR20100026799A (ko) * 2008-09-01 2010-03-10 삼성전자주식회사 외부기기와 통신하는 방송수신장치 및 그 컨텐츠 이용방법
KR101164813B1 (ko) * 2009-11-13 2012-07-12 삼성전자주식회사 디스플레이장치, 단말기 및 영상표시방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
유투브 영상파일 (https://www.youtube.com/watch?v=ixI3MJfMtDA)(2011.06.16. 공개)

Also Published As

Publication number Publication date
KR20150009014A (ko) 2015-01-26

Similar Documents

Publication Publication Date Title
US9906841B2 (en) Display apparatus, and method and apparatus for setting up and controlling the same
KR101911253B1 (ko) 전자 태그와 모바일 디바이스 및 디스플레이 장치를 포함하는 시스템의 제어 방법, 모바일 디바이스 그리고 디스플레이 장치
US20170255304A1 (en) Mobile terminal, image display device and user interface provision method using the same
US9257097B2 (en) Remote rendering for efficient use of wireless bandwidth for wireless docking
KR102622950B1 (ko) 디스플레이장치, 그 제어방법 및 기록매체
EP2892239A1 (en) Living room computer with small form-factor pluggable port
JP2010524056A (ja) 遠隔制御装置およびその制御方法
KR102404356B1 (ko) 디지털 디바이스 및 상기 디지털 디바이스에서 데이터 처리 방법
US8941782B2 (en) Display apparatus, upgrading apparatus, display system and data processing method of display system
KR20160069443A (ko) 웹 어플리케이션 서비스 제공 장치 및 방법, 그리고 이를 위한 사용자 장치
KR102646030B1 (ko) 영상제공장치, 그의 제어 방법 및 영상제공시스템
US9948979B2 (en) User terminal and control method thereof
KR102190887B1 (ko) 디스플레이장치, 그의 설정방법 및 설정장치
EP2986013A1 (en) User terminal apparatus, display apparatus, system and control method thereof
CN104333789A (zh) 同屏互动系统及其控制方法
KR20150005061A (ko) 사용자단말기, 디스플레이장치 및 그들의 제어방법
KR102248745B1 (ko) 디스플레이 장치, 서버, 및 콘텐츠 제공 방법
KR102169522B1 (ko) 모바일장치의 다중화면표시 방법 및 다중화면표시가 가능한 모바일장치
CN103227955A (zh) 显示设备、升级设备、其控制方法和显示系统
KR20210078218A (ko) 전자장치 및 그 제어방법
CN111213373B (zh) 电子设备、音频输出设备以及电子设备的操作方法
KR102657462B1 (ko) 디스플레이장치 및 그 제어방법
EP3691308B1 (en) Electronic apparatus and control method for initial setup of setup language
US20200413150A1 (en) Display apparatus and the controlling method thereof
CN113407346B (zh) 一种浏览器内存调节方法及显示设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant