KR20130110573A - An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor - Google Patents

An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor Download PDF

Info

Publication number
KR20130110573A
KR20130110573A KR1020120032633A KR20120032633A KR20130110573A KR 20130110573 A KR20130110573 A KR 20130110573A KR 1020120032633 A KR1020120032633 A KR 1020120032633A KR 20120032633 A KR20120032633 A KR 20120032633A KR 20130110573 A KR20130110573 A KR 20130110573A
Authority
KR
South Korea
Prior art keywords
mirroring
multimedia data
data
top box
terminal device
Prior art date
Application number
KR1020120032633A
Other languages
Korean (ko)
Other versions
KR101358812B1 (en
Inventor
이수우
Original Assignee
(주)정직한기술
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)정직한기술 filed Critical (주)정직한기술
Priority to KR1020120032633A priority Critical patent/KR101358812B1/en
Publication of KR20130110573A publication Critical patent/KR20130110573A/en
Application granted granted Critical
Publication of KR101358812B1 publication Critical patent/KR101358812B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PURPOSE: A method for transmitting multimedia data in a mirroring process, a terminal device, and a set-top box are provided to prevent quality degradation and to reduce a load according to a performance of a mirroring function of the terminal device by transmitting to a display device according to a data transmission method by a file streaming. CONSTITUTION: A terminal device for transmitting multimedia data in a mirroring process comprises a memory (100), a play command recognition part (110), a terminal controller (120), and a terminal interface part (130). The memory stores a mirroring program for a mirroring operation. The play command recognition part recognizes a play command of the multimedia data in an execution of the mirroring program. The terminal controller controls a driving of the mirroring program. The terminal controller controls the multimedia data to stream a file according to the play command recognized in the play command recognition part. The terminal interface part transmits at least one between the multimedia data by a file streaming and mirroring data by a mirroring according to a control of the terminal controller. [Reference numerals] (100) Memory; (110) Play command recognition part; (120) Terminal controller; (130) Terminal interface part

Description

미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치와 셋탑박스 및 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법{An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor}A terminal apparatus for transmitting multimedia data in a mirroring process and a method for transmitting multimedia data in a set-top box and a mirroring process {An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor}

본 발명은 단말장치와 디스플레이 기기 사이에서 이루어지는 미러링 기능의 동작 중에, 사용자에 의해 선택된 멀티미디어 데이터를 파일 스트리밍에 따른 데이터 전송방식에 따라, 디스플레이 기기로 전송하도록 하는 기술에 관한 것이다. The present invention relates to a technology for transmitting multimedia data selected by a user to a display device according to a data transmission method according to file streaming during an operation of a mirroring function between a terminal device and a display device.

디지털 TV, IPTV(Internet Protocol Television), VOD(Video On Demand) 등과 같은 멀티미디어 서비스가 다양화되고 단말기 기술이 발전함에 따라, 디지털화된비디오, 그래픽, 오디오 등과 같은 멀티미디어 컨텐츠를 자유롭게 액세스 및 디스플레이할 수 있는 사용자 장치(user devices), 그 중에서도 휴대용 전자 장치(portable electric device)에 대한 요구가 증가하고 있다. 이와 같은 요구의 증가와 더불어 최근에는 복수의 사용자 장치들 간에 무선으로 데이터를 공유하는 기술과, 무선으로 화면을 공유할 수 있는 미러링(display mirroring) 기술 등이 사용자 장치에 채택되고 있다. As multimedia services such as digital TV, Internet Protocol Television (IPTV), and Video On Demand (VOD) are diversified and terminal technologies are developed, multimedia contents such as digitized video, graphics, and audio can be freely accessed and displayed. There is an increasing demand for user devices, particularly portable electric devices. Along with such an increase in demand, a technology for wirelessly sharing data among a plurality of user devices and a display mirroring technology for wirelessly sharing a screen have been adopted in user devices.

디스플레이 미러링을 수행하기 위해서는 원격에 위치한 사용자 장치들 간의 원활한 데이터 전송이 요구된다. 사용자 장치들간의 원활한 데이터 전송을 위해서는 데이터 전송률, 대역폭, 소모 전력 등과 같은 제한 요소가 데이터 전송에 충분히 고려되어야 할 것이다. 만일 데이터 전송률, 대역폭, 소모 전력 등과 같은 제한 요소가 충분히 고려되지 않는다면, 무선 데이터 공유 또는 디스플레이 미러링이 수행되는 사용자 장치들간에 원치 않는 시간적 지연이 발생될 수 있다. In order to perform display mirroring, smooth data transmission between remotely located user devices is required. In order to facilitate data transmission between user devices, limitation factors such as data rate, bandwidth, power consumption, etc. should be sufficiently considered in data transmission. If limitations such as data rate, bandwidth, power consumption, etc. are not sufficiently taken into account, unwanted time delays may occur between user devices where wireless data sharing or display mirroring is performed.

특히, 미러링된는 데이터가 멀티미디어 데이터에 해당하는 동영상 또는 오디오 신호 등에 해당하는 경우에는 미러링 시에 영상이나 오디오 신호가 끊기는 등의 문제점이 야기될 수 있다. 즉, 미러링데이터의 전송시에 데이터의 압축에 따른 화질의 열화 또는 음질의 열화가 발생할 수 있으며, 네트워크 상의 트레픽이 높아져서 전송 딜레이가 발생할 수 있다. In particular, when the mirrored data corresponds to a moving picture or audio signal corresponding to the multimedia data, problems such as interruption of the video or audio signal may occur during mirroring. That is, the transmission of the mirroring data may cause deterioration of image quality or sound quality due to data compression, and may cause transmission delay due to high traffic on the network.

본 발명은 단말장치와 디스플레이 기기 사이에서 이루어지는 미러링 기능의 동작 중에, 사용자에 의해 선택된 멀티미디어 데이터를 미러링 기능이 아닌, 파일 스트리밍에 따른 데이터 전송방식에 따라, 디스플레이 기기로 전송하도록 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치와 셋탑박스 및 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법에 관한 것이다. The present invention provides a multimedia in a mirroring process for transmitting multimedia data selected by a user to a display device according to a data transmission method according to file streaming, not a mirroring function, during an operation of a mirroring function between a terminal device and a display device. A terminal device for data transmission, and a method for transmitting multimedia data in a set-top box and a mirroring process.

상기의 과제를 해결하기 위한, 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치는 미러링 동작을 위한 미러링 프로그램을 저장하고 있는 메모리; 상기 미러링 프로그램의 실행 중에, 상기 멀티미디어 데이터의 재생 명령을 인식하는 재생명령 인식부; 상기 미러링 프로그램의 구동을 제어하고, 상기 재생명령 인식부에서 인식된 재생 명령에 따라 상기 멀티미디어 데이터를 파일 스트리밍하도록 제어하는 단말 제어부; 및 상기 단말 제어부의 제어에 따라, 미러링에 의한 미러링 데이터 및 파일 스트리밍에 의한 상기 멀티미디어 데이터 중 적어도 어느 하나를 셋탑박스로 전송하는 단말 인터페이스부를 구비하는 것을 특징으로 한다.In order to solve the above problems, a terminal apparatus for transmitting multimedia data in a mirroring process according to the present invention includes a memory for storing a mirroring program for a mirroring operation; A reproducing command recognizing unit recognizing a reproducing command of the multimedia data while executing the mirroring program; A terminal controller which controls the driving of the mirroring program and controls to stream the multimedia data according to a playback command recognized by the playback command recognition unit; And a terminal interface configured to transmit at least one of the mirroring data by mirroring and the multimedia data by file streaming to the set-top box under the control of the terminal controller.

상기 멀티미디어 데이터는 동영상 데이터 및 오디오 데이터를 포함하는 것을 특징으로 한다.The multimedia data may include video data and audio data.

상기 재생명령 인식부는, 로컬 영역에 저장되어 있거나, 웹 페이지를 통해 다운로드되는 상기 멀티미디어 데이터의 재생 명령을 인식하는 것을 특징으로 한다.The play command recognition unit may recognize a play command of the multimedia data stored in a local area or downloaded through a web page.

상기 재생명령 인식부는 사용자의 상기 멀티미디어 데이터의 재생에 따른 기능 조작 명령시에, 상기 기능 조작 명령을 인식하고, 상기 단말 제어부는 상기 재생명령 인식부에서 인식된 상기 기능 조작 명령에 대응하는 신호를 상기 셋탑박스로 전송하도록 제어하는 것을 특징으로 한다.The playback command recognition unit recognizes the function operation command at the time of a function operation command according to reproduction of the multimedia data by the user, and the terminal control unit outputs a signal corresponding to the function operation command recognized by the playback command recognition unit. Characterized in that the control to transmit to the set-top box.

상기 단말 제어부는, 상기 멀티 미디어 데이터의 재생 명령시에, 상기 미러링 데이터의 전송을 중지하도록 제어하고, 상기 멀티 미디어 데이터의 재생 종료시에, 상기 미러링 데이터의 전송을 재개하도록 제어하는 것을 특징으로 한다.The terminal control unit may control to stop the transmission of the mirroring data at the time of the reproduction command of the multimedia data, and to resume the transmission of the mirroring data at the end of the reproduction of the multimedia data.

상기 단말 제어부는 상기 셋탑박스에서 상기 멀티미디어 데이터에 대한 디코딩 및 렌더링의 지원이 불가하다고 판단되면, 상기 미러링 프로그램을 사용해 상기 멀티 미디어 데이터의 재생 화면을 상기 미러링 데이터로 변환하도록 제어하는 것을 특징으로 한다.
If it is determined that the decoding and rendering of the multimedia data is not supported in the set-top box, the terminal controller controls to convert the playback screen of the multimedia data into the mirroring data using the mirroring program.

상기의 과제를 해결하기 위한, 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 셋탑박스는 미러링 데이터 및 멀티미디어 데이터 중 어느 하나를 수신하는 셋탑 인터페이스부; 상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나의 압축을 해제하고 디코딩하는 제1 디코더; 디코딩된 상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나를 렌더링하는 제1 렌더링부; 단말장치로부터 전송되는 제어신호에 따라, 상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나를 상기 제1 디코더 및 상기 제1 렌더링부로 제공하도록 제어하고, 렌더링된 상기 미러링 데이터 및 상기 멀티미디어 데이터를 디스플레이 기기로 출력하도록 제어하는 셋탑 제어부를 포함하는 것을 특징으로 한다.In order to solve the above problems, the set-top box for the transmission of multimedia data in the mirroring process according to the present invention comprises a set-top interface for receiving any one of the mirroring data and multimedia data; A first decoder for decompressing and decoding any one of the mirroring data and the multimedia data; A first renderer which renders any one of the decoded mirroring data and the multimedia data; According to a control signal transmitted from a terminal device, the control unit provides one of the mirroring data and the multimedia data to the first decoder and the first rendering unit, and outputs the rendered mirroring data and the multimedia data to a display device. It characterized in that it comprises a set-top control unit for controlling to.

상기 셋탑박스는, 상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나의 압축을 해제하고 디코딩하는 제2 디코더; 및 디코딩된 상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나를 렌더링하는 제2 렌더링부를 더 포함하고, 상기 셋탑 제어부는 상기 미러링 데이터를 상기 제1 디코더 및 제1 렌더링부로 제공하도록 제어하고, 상기 멀티미디어 데이터를 상기 제2 디코더 및 제2 렌더링부로 제공하도록 제어하는 것을 특징으로 한다.The set top box may include: a second decoder configured to decompress and decode any one of the mirroring data and the multimedia data; And a second rendering unit which renders any one of the decoded mirroring data and the multimedia data, wherein the set-top control unit controls to provide the mirroring data to the first decoder and the first rendering unit, and provides the multimedia data. And provide the control to the second decoder and the second renderer.

상기의 과제를 해결하기 위한, 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법은 단말장치가 미러링을 위한 프로그램을 실행하여, 미러링 데이터를 셋탑박스로 전송하는 단계; 상기 단말장치가 상기 미러링 프로그램의 실행 중에, 멀티미디어 데이터의 재생 명령을 인식하는 단계; 인식된 재생 명령에 따라, 상기 멀티미디어 데이터를 상기 셋탑박스로 전송하는 단계; 및 상기 셋탑박스가 상기 멀티미디어 데이터를 디코딩 및 렌더링하여 디스플레이 기기로 출력하는 단계를 포함하는 것을 특징으로 한다.In order to solve the above problems, a method for transmitting multimedia data in the mirroring process according to the present invention comprises the steps of transmitting a mirroring data to the set-top box by the terminal device executing a program for mirroring; Recognizing, by the terminal device, a command to play multimedia data while executing the mirroring program; Transmitting the multimedia data to the set-top box according to the recognized play command; And outputting the multimedia data to the display device by decoding and rendering the multimedia data.

상기 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법은, 상기 멀티 미디어 데이터의 재생 종료시에, 상기 단말장치가 상기 미러링 데이터를 상기 셋탑 박스로 전송하는 단계로 진행하는 것을 특징으로 한다.The method for transmitting multimedia data in the mirroring process may include the step of transmitting, by the terminal device, the mirroring data to the set-top box when the multimedia data is finished playing.

본 발명에 따르면, 단말장치와 디스플레이 기기 사이에서 이루어지는 미러링 기능의 동작 중에, 사용자에 의해 선택된 멀티미디어 데이터를 미러링 기능이 아닌, 파일 스트리밍에 따른 데이터 전송방식에 따라, 디스플레이 기기로 전송하도록 함으로써, 단말장치의 미러링 기능의 수행에 따른 부하를 줄일 수 있도록 하며, 멀티미디어 데이터의 전송에 따른 품질 저하도 방지할 수 있는 효과가 있다. According to the present invention, during operation of the mirroring function between the terminal device and the display device, the terminal device transmits the multimedia data selected by the user to the display device according to the data transmission method according to file streaming instead of the mirroring function. It is possible to reduce the load caused by the mirroring function and to prevent the degradation of quality due to the transmission of multimedia data.

도 1은 본 발명을 설명하기 위한 단말장치, 셋탑박스 및 디스플레이 기기 사이의 연결관계를 도시한 참조도이다.
도 2는 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치를 설명하기 위한 일 실시예의 블록도이다.
도 3은 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 셋탑박스를 설명하기 위한 일 실시예의 블록도이다.
도 4는 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한과정을 설명하기 위한 참조도이다.
도 5는 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법을 설명하기 위한 일 실시예의 플로차트이다.1 is a reference diagram illustrating a connection relationship between a terminal device, a set-top box, and a display device for explaining the present invention.
2 is a block diagram of an embodiment for describing a terminal device for transmitting multimedia data in a mirroring process according to the present invention.
3 is a block diagram of an embodiment for explaining a set-top box for transmission of multimedia data in the mirroring process according to the present invention.
4 is a reference diagram for explaining a process for transmitting multimedia data in a mirroring process according to the present invention.
5 is a flowchart of an embodiment for explaining a method for transmitting multimedia data in a mirroring process according to the present invention.

이하, 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치 및 셋탑박스를 첨부된 도면을 참조하여 설명한다. Hereinafter, a terminal device and a set-top box for transmitting multimedia data in a mirroring process according to the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명을 설명하기 위한 단말장치(10), 셋탑박스(20) 및 디스플레이 기기(30) 사이의 연결관계를 도시한 참조도이다. 1 is a reference diagram illustrating a connection relationship between a terminal device 10, a set top box 20, and a display device 30 for explaining the present invention.

단말장치(10)는 셋탑박스(20)과 유선 또는 무선(예를 들어, 블루투스, 와이파이, 와이브로 등)에 의한 네트워크를 형성하고 있으며, 단말장치(10) 내의 미러링 데이터 또는 멀티미디어 데이터를 셋탑박스(20)로 전송한다. 단말장치의 구체적인 내용을 후술한다.The terminal device 10 forms a network by the set-top box 20 by wire or wirelessly (for example, Bluetooth, Wi-Fi, WiBro, etc.), and sets the mirroring data or the multimedia data in the terminal device 10 to the set-top box ( 20). Details of the terminal device will be described later.

셋탑박스(20)는 단말장치(10)에서 제공되는 미러링 데이터 또는 멀티미디어 데이터를 디스플레이 기기(30)로 출력한다. 셋탑박스의 구체적인 내용을 후술한다.The set top box 20 outputs mirroring data or multimedia data provided from the terminal device 10 to the display device 30. Details of the set-top box will be described later.

디스플레이 기기(30)는 셋탑박스(20)로부터 제공되는 단말장치(10) 상의 미러링 데이터 또는 멀티미디어 데이터를 디스플레이하는 기기로, IP-TV, PC 모니터 등을 포함한다.The display device 30 is a device for displaying mirroring data or multimedia data on the terminal device 10 provided from the set-top box 20 and includes an IP-TV, a PC monitor, and the like.

도 2는 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치(10)를 설명하기 위한 일 실시예의 블록도로서, 메모리(100), 재생명령 인식부(110), 단말 제어부(120), 단말 인터페이스부(130)로 구성된다.FIG. 2 is a block diagram of an embodiment for explaining a terminal device 10 for transmitting multimedia data in a mirroring process according to the present invention. The memory 100, the play command recognition unit 110, and the terminal control unit 120 are illustrated in FIG. ), And a terminal interface unit 130.

메모리(100)는 미러링 동작을 위한 미러링 프로그램을 저장하고 있다. 또한, 메모리(100)는 로컬 상에서 멀티미디어 데이터를 저장할 수도 있으며, 웹 페이지를 통해 다운로드 된 멀티미디어 데이터를 저장할 수도 있다. 이러한, 멀티미디어 데이터는 동영상 데이터 및 오디오 데이터를 포함한다.The memory 100 stores a mirroring program for a mirroring operation. In addition, the memory 100 may store multimedia data locally or may store multimedia data downloaded through a web page. Such multimedia data includes moving image data and audio data.

재생명령 인식부(110)는 단말 제어부(120)의 제어에 따른 미러링 프로그램의 실행 중에, 멀티미디어 데이터의 재생 명령을 인식한다. 미러링 실행 중에, 사용자가 단말장치(10) 내의 메모리(100)에 저장되어 있는 멀티미디어 데이터의 재생 명령을 선택(예를 들어, 마우스의 더블 클릭을 통해 해당 멀티미디어 데이터의 재생명령을 선택)하면, 재생명령 인식부(110)는 이러한 사용자의 재생 명령을 인식하고, 인식한 재생 명령을 단말 제어부(120)로 출력한다. The play command recognition unit 110 recognizes a play command of the multimedia data while executing the mirroring program under the control of the terminal controller 120. During the mirroring operation, when the user selects a playback command of the multimedia data stored in the memory 100 in the terminal device 10 (for example, the playback command of the multimedia data is selected by double-clicking the mouse), the playback is performed. The command recognizer 110 recognizes the play command of the user, and outputs the recognized play command to the terminal controller 120.

특히, 재생명령 인식부(110)는 메모리(100)와 같은 로컬 영역에 저장되어 있는 멀티미디어 데이터의 재생명령을 인식할 수도 있고, 사용자가 웹 페이지의 접속을 통해 웹 페이지 상의 멀티 미디어 데이터의 재생 명령을 선택하는 경우에는 이러한 웹 페이지에서 다운로드되는 멀티 미디어 데이터의 재생 명령을 인식할 수도 있다. In particular, the play command recognition unit 110 may recognize a play command of multimedia data stored in a local area, such as the memory 100, and the user may play a play command of the multimedia data on the web page through a web page connection. In the case of selecting, the playback command of the multimedia data downloaded from the web page may be recognized.

또한, 재생명령 인식부(110)는 멀티미디어 데이터의 재생에 따른 기능 조작버튼의 선택 시에, 기능 조작 명령을 인식한다. 예를 들어, 사용자가 멀티 미디어 데이터의 기능 중에서, 빨리감기, 되감기, 일시 정지 등의 기능 조작 버튼을 클릭하는 경우에, 이러한 사용자의 기능 조작 명령을 인식하고, 인식한 기능 조작 명령에 대해 단말 제어부(120)로 출력한다. In addition, the playback command recognition unit 110 recognizes a function operation command when the function operation button is selected according to the reproduction of the multimedia data. For example, when a user clicks a function operation button such as fast forward, rewind, or pause among the functions of the multimedia data, the user recognizes the function operation command of the user, and the terminal control unit for the recognized function operation command. Output to 120.

단말 제어부(120)는 메모리(100)에 저장된 미러링 프로그램의 구동을 제어하여, 단말장치(10)의 디스플레이 화면에 대응하는 미러링 데이터를 셋탑박스(20)로 전송하도록 제어한다. The terminal controller 120 controls the driving of the mirroring program stored in the memory 100 to transmit mirroring data corresponding to the display screen of the terminal device 10 to the set-top box 20.

한편, 단말 제어부(120)는 미러링 동작의 수행 중에, 재생명령 인식부(110)에서 인식된 재생 명령에 따라 멀티미디어 데이터를 파일 스트리밍하도록 제어한다. 미러링 동작 수행 중 즉, 단말장치(10)의 디스플레이 화면에 대응하는 미러링 데이터를 셋탑박스(20)로 전송하는 중에, 멀티미디어 데이터의 재생 명령이 있다고 판단되면, 단말 제어부(120)는 멀티미디어 데이터에 대응하는 화면을 미러링 데이터로 변환하는 대신에, 멀티미디어 데이터 자체를 셋탑박스(20)로 전송하도록 하기 위해, 멀티미디어 데이터를 셋탑박스(20)로의 파일 스트리밍하도록 제어한다. 이에 따라, 멀티미디어 데이터는 미러링 데이터가 아님 멀티미디어 데이터 그 자체로 셋탑박스(20)로 전송된다.Meanwhile, the terminal controller 120 controls to stream the multimedia data according to the playback command recognized by the playback command recognition unit 110 during the mirroring operation. When performing the mirroring operation, that is, transmitting the mirroring data corresponding to the display screen of the terminal device 10 to the set-top box 20 and determining that there is a playback command of the multimedia data, the terminal controller 120 corresponds to the multimedia data. Instead of converting the screen into mirroring data, the multimedia data is controlled to be streamed to the set-top box 20 in order to transmit the multimedia data itself to the set-top box 20. Accordingly, the multimedia data is not mirroring data and is transmitted to the set-top box 20 as the multimedia data itself.

단말 제어부(120)는 멀티미디어 데이터의 재생 명령시에, 미러링 데이터의 전송을 중지하도록 제어할 수 있다. 즉, 단말 제어부(120)는 멀티미디어 데이터의 재생 명령에 따라, 멀티미디어 데이터를 셋탑박스(20)로 전송하는 때에는, 미러링을 위한 미러링 데이터를 셋탑박스(20)로 전송하는 것을 중지할 수 있다. 다만, 멀티미디어 데이터가 전송되는 과정 중에 미러링 데이터를 전송할 것인지 여부는 선택적으로 전송 또는 중지할 수도 있도록 구현할 수 있다.The terminal controller 120 may control to stop the transmission of the mirroring data when the multimedia data is reproduced. That is, the terminal controller 120 may stop transmitting the mirroring data for mirroring to the set-top box 20 when the multimedia data is transmitted to the set-top box 20 according to the reproduction command of the multimedia data. However, whether to transmit the mirroring data during the process of transmitting the multimedia data may be selectively transmitted or stopped.

단말 제어부(120)는 재생명령 인식부(110)에서 인식된 기능 조작 명령을 수신하면, 수신된 기능 조작 명령에 대응하는 신호를 셋탑박스(20)로 전송하도록 제어한다.When the terminal control unit 120 receives the function operation command recognized by the play command recognition unit 110, the terminal control unit 120 transmits a signal corresponding to the received function operation command to the set-top box 20.

단말 제어부(120)는 멀티 미디어 데이터의 재생 종료시에, 미러링 데이터의 전송을 재개하도록 제어한다. 단말 제어부(120)는 멀티미디어 데이터의 재생이 완료되거나, 재생 중 정지되는 경우에, 자동적으로 단말장치(10)의 미러링 데이터가 셋탑박스(20)로 전송되도록 제어한다. 또한, 단말 제어부(120)는 셋탑박스(20)에서 멀티미디어 데이터에 대한 디코딩 및 렌더링의 지원이 불가하다고 판단되면, 미러링 프로그램을 사용해 멀티 미디어 데이터의 재생 화면을 상기 미러링 데이터로 변환하도록 제어한다. 즉, 셋탑박스(20)에서 멀티미디어 데이터의 재생이 불가능한 경우에는, 단말 제어부(120)는 멀티미디어 데이터를 미러링 데이터로 변환하도록 제어하고, 이에 따라, 멀티미디어 데이터가 미러링 데이터로 변환되어, 셋탑박스(20)로 전송된다. The terminal control unit 120 controls to resume the transmission of the mirroring data at the end of playback of the multimedia data. The terminal controller 120 automatically controls the mirroring data of the terminal device 10 to be transmitted to the set-top box 20 when the reproduction of the multimedia data is completed or stopped during the reproduction. In addition, if it is determined that the decoding and rendering of the multimedia data is not supported in the set-top box 20, the terminal controller 120 controls to convert the playback screen of the multimedia data into the mirroring data using a mirroring program. That is, when the multimedia data cannot be reproduced in the set-top box 20, the terminal controller 120 controls to convert the multimedia data into mirroring data. Accordingly, the multimedia data is converted into mirroring data and thus the set-top box 20 is converted into mirroring data. Is sent).

단말 인터페이스부(130)는 단말 제어부(120)의 제어에 따라, 미러링에 의한 미러링 데이터 및 파일 스트리밍에 의한 멀티미디어 데이터를 셋탑박스(20)로 전송한다. 또한, 단말 인터페이스부(130)는 단말장치(10)의 재생 명령, 기능 조작 명령 등을 포함하는 제어신호를 셋탑박스로 전송한다.
The terminal interface unit 130 transmits the mirroring data by mirroring and the multimedia data by file streaming to the set-top box 20 under the control of the terminal controller 120. In addition, the terminal interface unit 130 transmits a control signal including a play command, a function operation command, and the like of the terminal device 10 to the set-top box.

도 3은 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 셋탑박스를 설명하기 위한 일 실시예의 블록도로서, 셋탑 인터페이스부(200), 셋탑 제어부(210), 제1 디코더(220), 제1 렌더링부(230), 제2 디코더(240) 및 제2 렌더링부(250)로 구성된다. 3 is a block diagram of an embodiment for explaining a set-top box for transmitting multimedia data in the mirroring process according to the present invention, the set-top interface unit 200, the set-top control unit 210, the first decoder 220, The first renderer 230, the second decoder 240, and the second renderer 250 are configured.

셋탑 인터페이스부(200)는 미러링 데이터, 멀티미디어 데이터, 단말장치(10)의 제어신호 등을 수신한다.The set top interface unit 200 receives mirroring data, multimedia data, a control signal of the terminal device 10, and the like.

셋탑 인터페이스부(200)에서 수신하는 미러링 데이터 또는 멀티미디어 데이터에 따라, 셋탑 제어부(210)는 미러링 데이터 또는 멀티미디어 데이터를 제1 디코더(220) 및 제1 렌더링부(230)로 제공하도록 제어하고, 렌더링된 상기 미러링 데이터 및 상기 멀티미디어 데이터를 디스플레이 기기(30)로 출력하도록 제어한다.According to the mirroring data or the multimedia data received by the set-top interface unit 200, the set-top control unit 210 controls to provide the mirroring data or the multimedia data to the first decoder 220 and the first rendering unit 230, and renders the rendering data. And outputs the mirroring data and the multimedia data to the display device 30.

제1 디코더(220)는 셋탑 인터페이스부(200)로부터 제공되는 미러링 데이터 또는 멀티미디어 데이터의 압축을 해제 및 디코딩하고, 디코딩한 결과를 제1 렌더링부(230)로 출력한다. 그러면, 제1 렌더링부(230)는 제1 디코더(220)에서 디코딩된 미러링 데이터 또는 멀티미디어 데이터를 렌더링하고, 렌더링한 결과 즉, 미러링 영상 또는 멀티미디어 영상을 디스플레이 기기(30)로 출력한다.The first decoder 220 decompresses and decodes mirroring data or multimedia data provided from the set-top interface unit 200, and outputs the decoded result to the first rendering unit 230. Then, the first renderer 230 renders the mirroring data or the multimedia data decoded by the first decoder 220, and outputs the mirrored image or the multimedia image to the display device 30.

또한, 셋탑 제어부(210)는 단말장치(10)의 제어신호(예를 들어, 기능 조작 명령 등)에 따라, 멀티미디어 데이터의 기능 조작 명령(예를 들어, 되감기, 빨리감기, 일시 정지 등)을 컨트롤한다. In addition, the set-top control unit 210 controls a function operation command (eg, rewind, fast forward, pause, etc.) of the multimedia data according to a control signal (eg, a function operation command) of the terminal device 10. Control

한편, 상기 셋탑박스(20)는 상기 제1 디코더(220) 및 제1 렌더링부(230) 이외에, 제2 디코더(240) 및 제2 렌더링부(250)을 더 구비할 수도 있다. 이에 따르면, 제2 디코더(240)는 미러링 데이터 또는 멀티미디어 데이터의 압축을 해제하고 디코딩하고, 제2 렌더링부(250)는 디코딩된 미러링 데이터 또는 멀티미디어 데이터 를 렌더링한다. The set top box 20 may further include a second decoder 240 and a second renderer 250 in addition to the first decoder 220 and the first renderer 230. Accordingly, the second decoder 240 decompresses and decodes the mirroring data or the multimedia data, and the second renderer 250 renders the decoded mirroring data or the multimedia data.

디코더와 렌더링부가 각각 2개씩 구비되어 있다면, 셋탑 제어부(210)는 미러링 데이터를 제1 디코더(220) 및 제1 렌더링부(230)로 제공하도록 제어하고, 멀티미디어 데이터를 제2 디코더(240) 및 제2 렌더링부(250)로 제공하도록 제어한다.If two decoders and two renderers are provided, the set-top controller 210 controls to provide mirroring data to the first decoder 220 and the first renderer 230, and provides multimedia data to the second decoder 240 and the second decoder 240. Control to provide to the second renderer 250.

제1 디코더(220)는 셋탑 인터페이스부(200)로부터 제공되는 미러링 데이터의 압축을 해제 및 디코딩하고, 디코딩한 결과를 제1 렌더링부(230)로 출력한다. 그러면, 제1 렌더링부(230)는 제1 디코더(220)에서 디코딩된 미러링 데이터를 렌더링하고, 렌더링한 결과를 디스플레이 기기(30)로 출력한다.The first decoder 220 decompresses and decodes the mirroring data provided from the set top interface unit 200, and outputs the decoded result to the first renderer 230. Then, the first renderer 230 renders the mirroring data decoded by the first decoder 220 and outputs the rendered result to the display device 30.

또한, 제2 디코더(240)는 셋탑 인터페이스부(200)로부터 제공되는 멀티미디어 데이터의 압축을 해제 및 디코딩하고, 디코딩한 결과를 제2 렌더링부(250)로 출력한다. 그러면, 제2 렌더링부(250)는 제2 디코더(240)에서 디코딩된 멀티미디어 데이터를 렌더링하고, 렌더링한 결과를 디스플레이 기기(30)로 출력한다.In addition, the second decoder 240 decompresses and decodes the multimedia data provided from the set-top interface unit 200, and outputs the decoded result to the second renderer 250. Then, the second renderer 250 renders the multimedia data decoded by the second decoder 240 and outputs the rendered result to the display device 30.

도 4는 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한과정을 설명하기 위한 참조도이다. 먼저, 단말장치에서 미러링 실행에 따른 화면의 미러링 데이터를 압축한다. 그 후, 단말장치가 미러링 데이터를 셋탑박스로 전송한다. 셋탑박스는 미러링 데이터의 압축을 해제하고, 이를 디코딩 및 렌더링한다. 그 후, 셋탑박스는 렌더링된 미러링 영상을 디스플레이 기기로 출력한다. 디스플레이 기기는 미러링 영상을 디스플레이한다. 그 후, 사용자 선태에 의한 멀티미디어 데이터의 재생명령이 있는지를 인식한다. 멀티미디어 데이터의 재생명령이 인식되었다면, 멀티미디어 데이터를 파일 스트리밍에 의해 셋탑박스로 전송한다. 셋탑박스는 전송된 멀티미디어 데이터를 압축 해제하고, 디코딩 및 렌더링한다. 그 후, 렌더링된 멀티미디어 영상을 디스플레이 기기로 출력한다. 디스플레이 기기는 멀티미디어 영상을 디스플레이한다. 그 후, 멀티미디어 데이터의 재생 종료가 인식되면, 단말장치는 멀티미디어 데이터의 파일 스트리밍에 의한 전송을 중지하고, 미러링 데이터의 전송을 위한 과정으로 복귀한다. 이에 따라, 단말장치는 미러링 데이터를 셋탑박스로 전송하고, 셋탑박스는 미러링 데이터의 압축 해제, 디코딩 및 렌더링 과정을 수행한 후에, 미러링 영상을 디스플레이 기기로 출력한다. 이에 따라, 디스플레이 기기는 미러링 영상을 디스플레이한다.
4 is a reference diagram for explaining a process for transmitting multimedia data in a mirroring process according to the present invention. First, the terminal device compresses mirroring data of a screen according to mirroring execution. Thereafter, the terminal device transmits the mirroring data to the set-top box. The set top box decompresses, decodes and renders the mirroring data. Thereafter, the set-top box outputs the rendered mirroring image to the display device. The display device displays the mirrored image. Thereafter, it is recognized whether there is a playback command of multimedia data according to user selection. If the playback command of the multimedia data is recognized, the multimedia data is transmitted to the set-top box by file streaming. The set-top box decompresses, decodes and renders the transmitted multimedia data. Thereafter, the rendered multimedia image is output to the display device. The display device displays a multimedia image. Thereafter, when the end of reproduction of the multimedia data is recognized, the terminal apparatus stops the transmission by the file streaming of the multimedia data and returns to the process for transmitting the mirroring data. Accordingly, the terminal device transmits the mirroring data to the set top box, and the set top box outputs the mirroring image to the display device after decompressing, decoding and rendering the mirroring data. Accordingly, the display device displays the mirrored image.

도 5는 본 발명에 따른 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법을 설명하기 위한 일 실시예의 플로차트이다.5 is a flowchart of an embodiment for explaining a method for transmitting multimedia data in a mirroring process according to the present invention.

먼저, 단말장치가 미러링을 위한 프로그램을 실행하여, 미러링 데이터를 셋탑박스로 전송한다(제300 단계). 이에 따라, 셋탑박스는 미러링 데이터의 압축을 해제하고, 이를 디코딩 및 렌더링한다. 그 후, 셋탑박스가 렌더링된 미러링 영상을 디스플레이 기기로 출력하면, 디스플레이 기기는 미러링 영상을 디스플레이한다.First, the terminal device executes a program for mirroring and transmits mirroring data to the set-top box (step 300). Accordingly, the set-top box decompresses, decodes and renders the mirroring data. Thereafter, when the set-top box outputs the rendered mirroring image to the display device, the display device displays the mirroring image.

제300 단계 후에, 미러링 실행을 종료할 것인가를 판단(제302 단계)한 후에, 미러링 실행을 계속하는 경우에는 단말장치는 멀티미디어 데이터의 재생명령을 인식하는가를 판단한다(제304 단계). 멀티미디어 데이터의 재생명령을 인식하지 못하였다면, 제300 단계로 진행하여 미러링 데이터를 셋탑박스로 전송하는 과정을 반복한다.After step 300, after determining whether to terminate the mirroring operation (step 302), when continuing the mirroring operation, the terminal device determines whether to recognize the playback command of the multimedia data (step 304). If the playback command of the multimedia data is not recognized, the process proceeds to step 300 where the process of transmitting the mirroring data to the set-top box is repeated.

그러나, 멀티미디어 데이터의 재생명령을 인식하였다면, 단말장치는 인식된 재생 명령에 따라, 멀티미디어 데이터를 셋탑박스로 전송한다(제306 단계). 미러링 실행 중에, 사용자가 단말장치 내에 저장되어 있는 멀티미디어 데이터의 재생 명령을 선택하면, 단말장치는 이러한 사용자의 재생 명령을 인식하고, 인식한 재생 명령을 출력한다. 특히, 단말장치는 로컬 영역에 저장되어 있는 멀티미디어 데이터의 재생명령을 인식할 수도 있고, 사용자가 웹 페이지의 접속을 통해 웹 페이지 상의 멀티 미디어 데이터의 재생 명령을 선택하는 경우에는 이러한 웹 페이지에서 다운로드되는 멀티 미디어 데이터의 재생 명령을 인식할 수도 있다. However, if it recognizes the playback command of the multimedia data, the terminal device transmits the multimedia data to the set-top box according to the recognized playback command (step 306). During the mirroring operation, if the user selects a playback command of the multimedia data stored in the terminal device, the terminal device recognizes the playback command of the user and outputs the recognized playback command. In particular, the terminal device may recognize a command for playing multimedia data stored in a local area, and when the user selects a command for playing multimedia data on a web page through access to a web page, the terminal device is downloaded from the web page. It is also possible to recognize a playback command of multimedia data.

단말장치의 디스플레이 화면에 대응하는 미러링 데이터를 셋탑박스로 전송하는 중에, 멀티미디어 데이터의 재생 명령이 있다고 판단되면, 단말장치는 멀티미디어 데이터에 대응하는 화면을 미러링 데이터로 변환하는 대신에, 멀티미디어 데이터 자체를 셋탑박스로 전송하도록 하기 위해, 멀티미디어 데이터를 셋탑박스로의 파일 스트리밍한다. 이에 따라, 멀티미디어 데이터는 미러링 데이터가 아님 멀티미디어 데이터 그 자체로 셋탑박스로 전송된다.If it is determined that there is a playback command of the multimedia data while transmitting mirroring data corresponding to the display screen of the terminal device to the set-top box, the terminal device converts the screen corresponding to the multimedia data into mirroring data instead of converting the screen corresponding to the multimedia data into mirroring data. Stream the multimedia data to the set-top box for transmission to the set-top box. Accordingly, the multimedia data is not mirroring data, but the multimedia data itself is transmitted to the set-top box.

이때, 단말장치는 멀티미디어 데이터의 재생 명령시에, 미러링 데이터의 전송을 중지하도록 할 수 있다. 즉, 단말장치는 멀티미디어 데이터의 재생 명령에 따라, 멀티미디어 데이터를 셋탑박스로 전송하는 때에는, 미러링을 위한 미러링 데이터를 셋탑박스로 전송하는 것을 중지할 수 있다. 다만, 멀티미디어 데이터가 전송되는 과정 중에 미러링 데이터를 전송할 것인지 여부는 선택적으로 전송 또는 중지할 수도 있도록 구현할 수 있다. In this case, the terminal device may stop transmitting the mirroring data when the multimedia data is reproduced. That is, the terminal device may stop transmitting the mirroring data for mirroring to the set-top box when transmitting the multimedia data to the set-top box according to the reproduction command of the multimedia data. However, whether to transmit the mirroring data during the process of transmitting the multimedia data may be selectively transmitted or stopped.

또한, 단말장치는 멀티미디어 데이터의 재생에 따른 기능 조작버튼의 선택 시에, 기능 조작 명령을 인식하고, 인식한 기능 조작 명령에 대해 셋탑박스로 출력한다. In addition, when the terminal apparatus selects a function manipulation button according to reproduction of multimedia data, the terminal apparatus recognizes a function manipulation command and outputs the recognized function manipulation command to the set-top box.

제306 단계 후에, 셋탑박스는 수신된 멀티미디어 데이터를 디코딩 및 렌더링하여 디스플레이 기기로 출력한다(제308 단계). 셋탑박스는 수신된 멀티미디어 데이터의 압축을 해제 및 디코딩한다. 그 후, 셋탑박스는 디코딩된 멀티미디어 데이터를 렌더링한 후에, 렌더링한 결과를 디스플레이 기기로 출력한다.After operation 306, the set-top box decodes and renders the received multimedia data to output to the display device (operation 308). The set top box decompresses and decodes the received multimedia data. Thereafter, the set-top box renders the decoded multimedia data and then outputs the rendered result to the display device.

한편, 셋탑박스는 단말장치의 제어신호(예를 들어, 기능 조작 명령 등)에 따라, 멀티미디어 데이터의 기능 조작 명령(예를 들어, 되감기, 빨리감기, 일시 정지 등)을 컨트롤한다. On the other hand, the set-top box controls the function operation command (eg, rewind, fast forward, pause, etc.) of the multimedia data according to the control signal (eg, function operation command, etc.) of the terminal device.

셋탑박스가 렌더링된 멀티미디어 영상을 디스플레이 기기로 출력하면, 디스플레이 기기는 멀티미디어 영상을 재생한다. When the set-top box outputs the rendered multimedia image to the display device, the display device plays the multimedia image.

제308 단계 후에, 멀티 미디어 데이터의 재생 종료가 인식되었는가를 판단한다(제310 단계). 만일, 멀티 미디어 데이터의 재생 종료가 인식되지 않았다면, 제306 단계로 진행하여, 멀티미디어 데이터를 셋탑박스로 전송하고, 셋탑박스에서, 멀티미디어 데이터를 압축해제, 디코딩 및 렌더링하고, 이를 디스플레이 기기에서 멀티미디어 영상을 재생하는 과정을 반복한다.After step 308, it is determined whether the end of reproduction of the multimedia data has been recognized (step 310). If the end of playback of the multimedia data is not recognized, the flow proceeds to step 306 to transmit the multimedia data to the set-top box, and decompresses, decodes and renders the multimedia data on the set-top box, and then displays the multimedia image on the display device. Repeat the process to play.

그러나, 제310 단계에서, 멀티 미디어 데이터의 재생 종료가 인식되었다면, 제300 단계로 진행하여, 단말장치가 미러링 데이터를 셋탑 박스로 전송하는 과정을 반복한다. 단말장치는 멀티 미디어 데이터의 재생 종료시에, 미러링 데이터의 전송을 재개하도록 한다. 이를 위해, 단말장치는 멀티미디어 데이터의 재생이 완료되거나, 재생 중 정지되는 경우에, 자동적으로 단말장치(10)의 미러링 데이터가 셋탑박스(20)로 전송되도록 제어한다.
However, if it is recognized in step 310 that the reproduction of the multimedia data is terminated, the process proceeds to step 300 where the terminal apparatus repeats the process of transmitting the mirroring data to the set-top box. At the end of playback of the multimedia data, the terminal apparatus resumes the transmission of the mirroring data. To this end, when the reproduction of the multimedia data is completed or is stopped during the reproduction, the terminal device automatically controls the mirroring data of the terminal device 10 to be transmitted to the set-top box 20.

한편, 상술한 본 발명의 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법은 컴퓨터에서 읽을 수 있는 코드/명령들(instructions)/프로그램으로 구현될 수 있다. 예를 들면, 컴퓨터로 읽을 수 있는 기록 매체를 이용하여 상기 코드/명령들/프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록 매체는 마그네틱 저장 매체(예를 들어, 롬, 플로피 디스크, 하드디스크, 마그네틱 테이프 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등) 와 같은 저장 매체를 포함한다. Meanwhile, the above-described method for transmitting multimedia data in the mirroring process of the present invention may be implemented by computer-readable codes / instructions / programs. For example, it may be implemented in a general-purpose digital computer that operates the code / instructions / program using a computer-readable recording medium. The computer-readable recording medium includes a storage medium such as a magnetic storage medium (e.g., a ROM, a floppy disk, a hard disk, a magnetic tape, etc.), an optical reading medium (e.g., a CD-ROM, a DVD, .

이러한 본원 발명인 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치와 셋탑박스 및 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법은 이해를 돕기 위하여 도면에 도시된 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 분야에서 통상적 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위에 의해 정해져야 할 것이다.The terminal device for transmitting the multimedia data in the mirroring process and the method for transmitting the multimedia data in the set-top box and the mirroring process have been described with reference to the embodiments shown in the drawings for clarity of understanding. Those skilled in the art will appreciate that various modifications and equivalent other embodiments are possible from this. Accordingly, the true scope of the present invention should be determined by the appended claims.

10: 단말장치
20: 셋탑박스
30: 디스플레이 기기
100: 메모리
110: 재생명령 인식부
120: 단말 제어부
130: 단말 인터페이스부
200: 셋탑 인터페이스부
210: 셋탑 제어부
220: 제1 디코더
230: 제1 렌더링부
240: 제2 디코더
250: 제2 렌더링부10: terminal device
20: Set-top box
30: Display device
100: memory
110: playback command recognition unit
120: terminal control unit
130: terminal interface unit
200: set-top interface
210: set top control unit
220: first decoder
230: First rendering unit
240: second decoder
250: second rendering unit

Claims (10)

미러링 동작을 위한 미러링 프로그램을 저장하고 있는 메모리;
상기 미러링 프로그램의 실행 중에, 상기 멀티미디어 데이터의 재생 명령을 인식하는 재생명령 인식부;
상기 미러링 프로그램의 구동을 제어하고, 상기 재생명령 인식부에서 인식된 재생 명령에 따라 상기 멀티미디어 데이터를 파일 스트리밍하도록 제어하는 단말 제어부; 및
상기 단말 제어부의 제어에 따라, 미러링에 의한 미러링 데이터 및 파일 스트리밍에 의한 상기 멀티미디어 데이터 중 적어도 어느 하나를 셋탑박스로 전송하는 단말 인터페이스부를 구비하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치.A memory storing a mirroring program for a mirroring operation;
A reproducing command recognizing unit recognizing a reproducing command of the multimedia data while executing the mirroring program;
A terminal controller which controls the driving of the mirroring program and controls to stream the multimedia data according to a playback command recognized by the playback command recognition unit; And
Under the control of the terminal controller, a terminal interface for transmitting at least one of the mirroring data by mirroring and the multimedia data by file streaming to the set-top box for transmitting the multimedia data in the mirroring process Terminal device. 제1항에 있어서,
상기 멀티미디어 데이터는 동영상 데이터 및 오디오 데이터를 포함하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치.The method of claim 1,
The multimedia data terminal device for transmission of the multimedia data in the mirroring process, characterized in that the video data and audio data. 제1항에 있어서, 상기 재생명령 인식부는
로컬 영역에 저장되어 있거나, 웹 페이지를 통해 다운로드되는 상기 멀티미디어 데이터의 재생 명령을 인식하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치.The apparatus of claim 1, wherein the playback command recognition unit
The terminal device for transmitting the multimedia data in the mirroring process, characterized in that for recognizing a playback command of the multimedia data stored in the local area or downloaded through a web page. 제1항에 있어서,
상기 재생명령 인식부는 사용자의 상기 멀티미디어 데이터의 재생에 따른 기능 조작 명령시에, 상기 기능 조작 명령을 인식하고,
상기 단말 제어부는 상기 재생명령 인식부에서 인식된 상기 기능 조작 명령에 대응하는 신호를 상기 셋탑박스로 전송하도록 제어하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치.The method of claim 1,
The playback command recognition unit recognizes the function operation command at the time of a function operation command according to the reproduction of the multimedia data by the user,
And the terminal controller controls to transmit a signal corresponding to the function operation command recognized by the play command recognition unit to the set-top box. 제1항에 있어서, 상기 단말 제어부는
상기 멀티 미디어 데이터의 재생 명령시에, 상기 미러링 데이터의 전송을 중지하도록 제어하고, 상기 멀티 미디어 데이터의 재생 종료시에, 상기 미러링 데이터의 전송을 재개하도록 제어하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치.The method of claim 1, wherein the terminal control unit
And controlling the transmission of the mirroring data to be stopped at the reproduction command of the multimedia data and to resume transmission of the mirroring data at the end of the reproduction of the multimedia data. Terminal device for transmission of. 제1항에 있어서, 상기 단말 제어부는
상기 셋탑박스에서 상기 멀티미디어 데이터에 대한 디코딩 및 렌더링의 지원이 불가하다고 판단되면, 상기 미러링 프로그램을 사용해 상기 멀티 미디어 데이터의 재생 화면을 상기 미러링 데이터로 변환하도록 제어하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 단말장치.The method of claim 1, wherein the terminal control unit
If it is determined that the decoding and rendering of the multimedia data are not supported in the set-top box, the mirroring program is used to control to convert the playback screen of the multimedia data into the mirroring data. Terminal device for data transmission. 미러링 데이터 및 멀티미디어 데이터 중 어느 하나를 수신하는 셋탑 인터페이스부;
상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나의 압축을 해제하고 디코딩하는 제1 디코더;
디코딩된 상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나를 렌더링하는 제1 렌더링부;
단말장치로부터 전송되는 제어신호에 따라, 상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나를 상기 제1 디코더 및 상기 제1 렌더링부로 제공하도록 제어하고, 렌더링된 상기 미러링 데이터 및 상기 멀티미디어 데이터를 디스플레이 기기로 출력하도록 제어하는 셋탑 제어부를 포함하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 셋탑박스.A set top interface unit which receives one of mirroring data and multimedia data;
A first decoder for decompressing and decoding any one of the mirroring data and the multimedia data;
A first renderer which renders any one of the decoded mirroring data and the multimedia data;
According to a control signal transmitted from a terminal device, the control unit provides one of the mirroring data and the multimedia data to the first decoder and the first rendering unit, and outputs the rendered mirroring data and the multimedia data to a display device. Set-top box for transmission of multimedia data in the mirroring process, characterized in that it comprises a set-top control unit for controlling to. 제7항에 있어서, 상기 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 셋탑박스는
상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나의 압축을 해제하고 디코딩하는 제2 디코더; 및
디코딩된 상기 미러링 데이터 및 상기 멀티미디어 데이터 중 어느 하나를 렌더링하는 제2 렌더링부를 더 포함하고,
상기 셋탑 제어부는 상기 미러링 데이터를 상기 제1 디코더 및 제1 렌더링부로 제공하도록 제어하고, 상기 멀티미디어 데이터를 상기 제2 디코더 및 제2 렌더링부로 제공하도록 제어하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 셋탑박스.The method of claim 7, wherein the set-top box for transmitting multimedia data in the mirroring process
A second decoder for decompressing and decoding any one of the mirroring data and the multimedia data; And
A second rendering unit for rendering any one of the decoded mirroring data and the multimedia data,
The set-top control unit controls to provide the mirroring data to the first decoder and the first rendering unit and to provide the multimedia data to the second decoder and the second rendering unit. Set-top box for transmission. 단말장치가 미러링을 위한 프로그램을 실행하여, 미러링 데이터를 셋탑박스로 전송하는 단계;
상기 단말장치가 상기 미러링 프로그램의 실행 중에, 멀티미디어 데이터의 재생 명령을 인식하는 단계;
인식된 재생 명령에 따라, 상기 멀티미디어 데이터를 상기 셋탑박스로 전송하는 단계; 및
상기 셋탑박스가 상기 멀티미디어 데이터를 디코딩 및 렌더링하여 디스플레이 기기로 출력하는 단계를 포함하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법.Executing, by the terminal device, a mirroring program to transmit mirroring data to the set-top box;
Recognizing, by the terminal device, a command to play multimedia data while executing the mirroring program;
Transmitting the multimedia data to the set-top box according to the recognized play command; And
And decoding, rendering, and outputting the multimedia data to a display device by the set-top box. 제9항에 있어서, 상기 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법은
상기 멀티 미디어 데이터의 재생 종료시에, 상기 단말장치가 상기 미러링 데이터를 상기 셋탑 박스로 전송하는 단계로 진행하는 것을 특징으로 하는 미러링 과정에서의 멀티미디어 데이터의 전송을 위한 방법.The method of claim 9, wherein the method for transmitting multimedia data in the mirroring process
And upon the reproduction of the multimedia data, the terminal device transmits the mirroring data to the set-top box.
KR1020120032633A 2012-03-29 2012-03-29 An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor KR101358812B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120032633A KR101358812B1 (en) 2012-03-29 2012-03-29 An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120032633A KR101358812B1 (en) 2012-03-29 2012-03-29 An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor

Publications (2)

Publication Number Publication Date
KR20130110573A true KR20130110573A (en) 2013-10-10
KR101358812B1 KR101358812B1 (en) 2014-02-11

Family

ID=49632365

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120032633A KR101358812B1 (en) 2012-03-29 2012-03-29 An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor

Country Status (1)

Country Link
KR (1) KR101358812B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015076608A1 (en) * 2013-11-21 2015-05-28 엘지전자 주식회사 Video processing method and video processing apparatus
KR20150102794A (en) 2014-02-28 2015-09-08 한국과학기술원 Wireless high data mirroring system between the mobile communication terminal and the monitor on the vehicle seat
KR20170090100A (en) * 2016-01-28 2017-08-07 엘지전자 주식회사 a digital device, a mobile terminal and method for controlling the same

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100702530B1 (en) * 2004-11-11 2007-04-02 주식회사 케이티프리텔 Method and apparatus for executing mobile contents supporting multiuser
KR20080017607A (en) * 2006-08-21 2008-02-27 엘지전자 주식회사 Method for joint screen in communication terminal
KR100810223B1 (en) * 2007-01-19 2008-03-06 삼성전자주식회사 System and method for providing live streaming service between terminals
KR20120015931A (en) * 2010-08-13 2012-02-22 삼성전자주식회사 Portable electric device and display mirorring method therof

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015076608A1 (en) * 2013-11-21 2015-05-28 엘지전자 주식회사 Video processing method and video processing apparatus
US9936236B2 (en) 2013-11-21 2018-04-03 Lg Electronics Inc. Video processing method and video processing apparatus
KR20150102794A (en) 2014-02-28 2015-09-08 한국과학기술원 Wireless high data mirroring system between the mobile communication terminal and the monitor on the vehicle seat
KR20170090100A (en) * 2016-01-28 2017-08-07 엘지전자 주식회사 a digital device, a mobile terminal and method for controlling the same

Also Published As

Publication number Publication date
KR101358812B1 (en) 2014-02-11

Similar Documents

Publication Publication Date Title
US10250664B2 (en) Placeshifting live encoded video faster than real time
US7860996B2 (en) Media streaming with seamless ad insertion
US7558760B2 (en) Real-time key frame generation
US9565479B2 (en) Methods and apparatus for seeking within a media stream using scene detection
US9332050B2 (en) Media streaming with adaptation
CN109937448B (en) System and method for providing audio content during trick play playback
JP4730590B2 (en) Control device and method, information processing device and method, and program
US10826963B2 (en) Reducing latency for streaming video
JP2009044416A (en) Content playback device, content playback method, program, and content playback system
US20190327425A1 (en) Image processing device, method and program
JP2020511826A (en) Electronic device and control method thereof
JP5282383B2 (en) Content reproduction apparatus, content reproduction method, program, and content reproduction system
WO2012001905A1 (en) Playback device, audio selection method and audio selection program
US9451328B1 (en) Methods and systems for variable speed playback with bi-directionality
KR101358812B1 (en) An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor
CN103635938B (en) For processing the method for video streaming data, streaming client in streaming client
KR20150121459A (en) SERVER DEVICE FOR PROVIDING VoD SERVICE, CLIENT DEVICE AND METHODS THEREOF
KR101361692B1 (en) An terminal apparatus and a settop box for transmitting a multimedia data during mirroring, a method therefor
JP4994942B2 (en) Information processing apparatus, information processing method, and information processing system
JP7314102B2 (en) CONTROL SIGNAL GENERATING CIRCUIT, RECEIVER, SYSTEM, GENERATING METHOD, AND PROGRAM
EP3732888B1 (en) Reducing latency for streaming video
CA3050636C (en) Reducing latency for streaming video
US20140189766A1 (en) Methods and apparatus for seeking within recorded media stored on a set-top box
JP2008270939A (en) Motion image distribution system, and server device and client device
JP3886892B2 (en) Video storage device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee