KR20100061908A - 영상표시장치, 영상전송장치, 영상전송방법 및 기록매체 - Google Patents

영상표시장치, 영상전송장치, 영상전송방법 및 기록매체 Download PDF

Info

Publication number
KR20100061908A
KR20100061908A KR1020080120272A KR20080120272A KR20100061908A KR 20100061908 A KR20100061908 A KR 20100061908A KR 1020080120272 A KR1020080120272 A KR 1020080120272A KR 20080120272 A KR20080120272 A KR 20080120272A KR 20100061908 A KR20100061908 A KR 20100061908A
Authority
KR
South Korea
Prior art keywords
frame
bitstream
gop
video
image
Prior art date
Application number
KR1020080120272A
Other languages
English (en)
Inventor
김덕성
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020080120272A priority Critical patent/KR20100061908A/ko
Priority to US12/628,172 priority patent/US20100135392A1/en
Publication of KR20100061908A publication Critical patent/KR20100061908A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784—Data processing by the network
    • H04N21/64792—Controlling the complexity of the content stream, e.g. by dropping packets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 서로 다른 비트레이트를 가지며 하나 이상의 GOP들을 포함하는 복수의 비트스트림을 저장하는 단계와, 네트워크의 전송환경를 감지하여, 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 어느 하나의 비트스트림을 선택하는 단계와, 상기 선택된 비트스트림을, 상기 선택된 비트스트림을 구성하는 GOP단위로 전송하는 단계를 포함하고, 상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치하는 영상전송방법 및 영상전송장치, 영상표시장치 및 상기 구조를 저장한 기록매체에 관한 것이다.

Description

영상표시장치, 영상전송장치, 영상전송방법 및 기록매체{IMAGE DISPLAY DEVICE, IMAGE TRANSMITTING DEVICE, METHOD FOR TRANSMITTING IMAGE AND RECORDING MEDIUM}
본 발명은 스트리밍 서비스를 이용하여 동영상을 재생하는데 있어서, 네트워크의 전송환경에 따라 동영상 데이터를 전송하는 영상전송장치 및 영상전송방법, 동영상 데이터의 구조를 기록한 기록매체 및 영상표시장치에 관한 것이다.
스트리밍 서비스란 영상표시장치가 네트워크를 통하여 서버로부터 동영상 데이터를 다운로드하면서 동시에 이를 재생하여 동영상을 출력하는 방식의 서비스를 의미한다.
네트워크를 통하여 전송되는 동영상 데이터는 특정한 파일 포맷 규격을 가지고 있으며, 인터넷 프로토콜(Internet Protocol;IP) 네트워크를 통한 스트리밍 서비스의 경우에는 국제표준화 기구(ISO/IEC) 산하의 동영상 연구모임인 MPEG(Moving Picture Expert Group)에서 제정한 MPEG 표준에 의하여 동영상 데이터를 생성하고, 이를 전송한다.
네트워크를 통하여 스트리밍 서비스 방식에 의해 서버로부터 동영상 데이터 를 수신하여 재생하는 영상표시장치는 데스크톱 컴퓨터(desktop computer), IP TV등과 같은 고정 단말기(Stationary Terminal)나, 이동통신 단말기, 네비게이션 장치, 텔레매틱스 단말기, 휴대용 멀티미디어 플레이어(Portable Multimedia Player;PMP), 랩탑 컴퓨터(laptop computer)와 같은 이동 단말기(Mobile Terminal)등의 형태로 구현될 수 있다.
스트리밍 서비스를 제공하는 네트워크의 전송환경은 접속자 수의 증가, 네트워크의 물리적인 장애, 서버의 장애 등 여러가지 원인으로 변화할 수 있다. 이러한 네트워크 전송환경에 변화에 따라 사용자에게 최적화된 품질의 동영상 정보를 제공하는 방법에 대한 고려가 요구된다.
본 발명은 스트리밍 서비스를 이용하여 동영상 데이터를 전송함에 있어서, 네트워크 전송환경에 따라 최적화된 비트레이트를 가지는 동영상 데이터를 제공하면서도 일정수준 이상의 서비스 품질(Quality of Service;QoS)를 보장하기 위한 것이다.
상기한 과제를 실현하기 위한 본 발명의 일 실시예와 관련된 영상표시장치는, 서로 다른 비트레이트를 지니며 하나 이상의 GOP들을 포함하는 복수의 비트스트림의 조합으로 구성된 동영상 데이터를 수신하는 영상수신부와, 상기 수신된 동영상 데이터를 재생가능한 형태로 처리하는 영상처리부와, 상기 재생가능한 형태로 처리된 데이터와 관련된 동영상을 출력하는 영상출력부를 포함하고,
상기 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치한다.
본 발명의 일 측면에서, 상기 복수의 비트스트림은, 동일한 동영상을 변환하여 생성된 비트스트림일 수 있다.
본 발명의 다른 일 측면에서, 상기 복수의 비트스트림은, 상기 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 GOP는, I(BlP)mBnP 구조를 가지며 l, m, n은 자연수일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 비트스트림은, 비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함할 수 있다.
상기한 과제를 실현하기 위한 본 발명의 일 실시예와 관련된 영상전송장치는, 서로 다른 비트레이트를 가지며 하나 이상의 GOP들을 포함하는 복수의 비트스트림을 저장하는 데이터베이스와, 네트워크의 전송환경 변화를 감지하는 네트워크 감지부와, 상기 감지된 네트워크의 전송환경하에서 전송가능한 비트스트림 중 어느 하나의 비트스트림을 선택하여 GOP단위로 전송하도록 제어하는 제어부와, 상기 선택된 비트스트림을, 상기 선택된 비트스트림을 구성하는 GOP단위로 전송하는 데이터 송신부를 포함하고,
상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치한다.
본 발명의 일 측면에서, 상기 복수의 비트스트림은, 동일한 동영상을 변환하여 생성된 비트스트림일 수 있다.
본 발명의 다른 일 측면에서, 상기 복수의 비트스트림은, 상기 동일한 동영 상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 GOP는, I(BlP)mBnP 구조를 가지며 l, m, n은 자연수일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 비트스트림은, 비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함할 수 있다.
본 발명의 또 다른 일 측면에서, 상기 제어부는, 상기 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 가장 비트레이트가 높은 비트스트림을 선택할 수 있다.
본 발명의 또 다른 일 측면에서, 상기 제어부는, 상기 선택된 비트스트림이 전송중인 비트스트림과 다른 비트스트림인 경우, 전송중인 GOP의 전송이 완료된 후 선택된 비트스트림에 포함된 GOP를 전송할 수 있다.
상기한 과제를 실현하기 위한 본 발명의 일 실시예와 관련된 기록매체는, 서로 다른 비트레이트를 지니며 하나 이상의 GOP들을 포함하는 복수의 비트스트림을 포함하며, 네트워크의 전송환경에 따라 복수의 비트스트림 중 어느 하나가 선택되어 네트워크를 통해 GOP단위로 전송가능한 동영상정보를 기록하고,
상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분 에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치한다.
본 발명의 일 측면에서, 상기 복수의 비트스트림은, 동일한 동영상을 변환하여 생성된 비트스트림일 수 있다.
본 발명의 다른 일 측면에서, 상기 복수의 비트스트림은, 상기 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 GOP는, I(BlP)mBnP 구조를 가지며 l, m, n은 자연수일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 비트스트림은, 비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함할 수 있다.
상기한 과제를 실현하기 위한 본 발명의 일 실시예와 관련된 영상전송방법은, 서로 다른 비트레이트를 가지며 하나 이상의 GOP들을 포함하는 복수의 비트스트림을 저장하는 단계와, 네트워크의 전송환경를 감지하여, 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 어느 하나의 비트스트림을 선택하는 단계와, 상기 선택된 비트스트림을, 상기 선택된 비트스트림을 구성하는 GOP단위로 전송하는 단계를 포함하고,
상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치한 다.
본 발명의 일 측면에서, 상기 복수의 비트스트림은, 동일한 동영상을 변환하여 생성된 비트스트림일 수 있다.
본 발명의 다른 일 측면에서, 상기 복수의 비트스트림은, 상기 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환한 비트스트림일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 GOP는, I(BlP)mBnP 구조를 가지며 l, m, n은 자연수일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 비트스트림은, 비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함할 수 있다.
본 발명의 또 다른 일 측면에서, 상기 선택하는 단계는, 상기 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 가장 비트레이트가 높은 비트스트림을 선택하는 단계일 수 있다.
본 발명의 또 다른 일 측면에서, 상기 전송하는 단계는, 상기 선택된 비트스트림이 전송중인 비트스트림과 다른 비트스트림인 경우, 전송중인 GOP의 전송이 완료된 후 선택된 비트스트림에 포함된 GOP를 전송하는 단계일 수 있다.
상기와 같이 구성되는 본 발명의 적어도 하나의 실시예에 관련된 영상전송방법은, 네트워크의 전송환경에 따라 최적화된 데이터스트림을 전송함에 따라, 사용 자에게 스트리밍 서비스를 원활하게 제공할 수 있다.
또한, 본 발명은, 서로 다른 비트레이트를 가지는 데이터스트림이 연속됨에도 불구하고 재생시에 동영상 재생 중단 또는 화질의 열화가 없는 데이터 구조를 지니는 동영상 데이터를 전송함으로서, 동영상 재생이 중단되거나 화질 열화가 발생하는 현상을 개선할 수 있다.
이하 본 발명의 일 실시예와 관련된 영상표시장치, 영상전송장치, 영상전송방법, 기록매체에 대하여 도면을 참조하여 상세하게 설ㅇ이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
이하, 본 발명과 관련된 스트리밍 서비스의 구성에 대하여 도면을 참조하여 보다 상세하게 설명한다.
도 1은 본 발명의 일 실시예와 관련된 스트리밍 서비스를 제공하는 스트리밍 서비스 시스템의 개념도이다.
도 1에 도시된 바와 같이, 스트리밍 서비스 시스템은 웹서버(WS), 스트리밍 서버(SS), 스트리밍 클라이언트(SC)를 포함하여 구성될 수 있다. 컨텐츠 제공자(Contets Provider;CP)로부터 실시간 동영상 정보를 제공받아 클라이언트에게 제공하기 위하여 인코딩 서버(IS)를 추가로 포함할 수 있다.
도1 에 도시된 바와 같이, 인코딩 서버(IS)는 실시간으로 수신된 동영상 정 보를 스트리밍 서비스에 이용되는 동영상 포맷을 지니는 동영상 데이터로 변환할 수 있다. 상기 인코딩 서버(IS)는 동영상 데이터를 스트리밍 서버(SS)에 전송할 수 있다.
도1 에 도시된 바와 같이, 스트리밍 서버(SS)는 영상전송장치(200)를 포함하여 구현될 수 있다. 스트리밍 서버(SS)는 스트리밍 클라이언트(SC)로부터 요청이 있는 경우, 스트리밍 클라이언트(SC)로 데이터를 전송한다.
상기 스트리밍 서버(SS)는 저장된 동영상 데이터의 헤더를 해석하여 전송대상인 동영상 데이터의 포멧, 비트레이트등을 확인하여 데이터 전송 속도를 결정할 수 있다.
상기 스트리밍 서버(SS)는 스트리밍 클라이언트(SC)와 연결된 네트워크의 송신측 통계정보(타임 스탬프, 누적되는 패킷 개수)를 스트리밍 클라이언트(SC)로 전달하고, 스트리밍 클라이언트(SC)로부터 수신측 통계정보(누적 손실 패킷 계수, 패킷 지터)를 수신할 수 있다.
상기 통계정보들을 이용하여 스트리밍 서버(SS)는 네트워크의 전송환경을 감지할 수 있다. 상기 네트워크의 전송환경이란, 스트리밍 서버(SS)와 클라이언트(SC)간의 동영상 데이터 전송가능여부, 전송시 가용한 대역폭 정보등을 포함할 수 있다.
상기 스트리밍 서버(SS)는 스트리밍 서비스를 통하여 전송되는 동영상 정보를 저장하는 데이터 베이스(210)를 포함할 수 있다. 또는 상기 스트리밍 서버(SS)는 상기 인코딩 서버(SS)또는 다른 서버로부터 실시간으로 동영상 데이터를 수신하 여 이를 스트리밍 클라이언트(SC)로 전송할 수 있다.
도1 에 도시된 바와 같이, 상기 스트리밍 클라이언트(SC)는 웹 서버(WS)를 통하여 스트리밍 서버(SS)에 접속하거나 스트리밍 서버(SS)에 직접 접속하여, 동영상 데이터를 요청할 수 있다. 상기 스트리밍 클라이언트(SC)는 수신한 동영상 데이터를 재생하는 영상표시장치(100)를 포함할 수 있다.
상기 스트리밍 클라이언트(SC)와 웹 서버(WS)는 인터넷 네트워크를 통하여 연결될 수 있다.
상기 웹 서버(WS)는 스트리밍 서버(SS)와 연결되며, 스트리밍 클라이언트(SC)는 상기 웹 서버(WS)를 통하여 스트리밍 서비스를 통하여 제공되는 동영상 데이터의 목록을 수신할 수 있다.
상기 스트리밍 클라이언트(SC)는 상기 웹 서버(WS)를 통하여 스트리밍 서버(SS)에 동영상 데이터의 전송을 요청하는 신호를 전송할 수 있다.
상기 스트리밍 클라이언트(SC)는 상기 웹 서버(WS)를 통하여 제공되는 웹 페이지(Web page)를 이용하여 스트리밍 서비스를 제공받을 수 있다.
도1 에 도시된 바와 같이, 상기 웹 서버(WS)는 스트리밍 클라이언트(SC)에 스트리밍 서비스를 통하여 제공할 수 있는 동영상 데이터의 목록을 제공할 수 있다. 상기 웹 서버(WS)는 스트리밍 클라이언트(SC)의 요청에 의하여, 스트리밍 서버(SS)로 하여금 상기 요청된 동영상 데이터를 스트리밍 클라이언트(SC)에 전송하도록 할 수 있다.
이하, 본 발명과 관련된 영상표시장치에 대하여 도면을 참조하여 보다 상세 하게 설명한다.
본 명세서에서 설명되는 영상표시장치에는 텔레비젼(Television), DVD 플레이어(DVD Player), 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등 외부로부터 영상을 수신하여 재생하는 기능을 가진 전자기기 등이 포함될 수 있다.
도 2는 본 발명의 일 실시예와 관련된 영상표시장치의 블록 구성도(block diagram)이다.
상기 이동 단말기(100)는 영상수신부(110), 영상처리부(120), 영상출력부(130), 제어부(140), 메모리(150), 사용자입력부(160), 인터페이스부(170) 등을 포함할 수 있다. 도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기가 구현될 수도 있다.
이하, 상기 구성요소들에 대해 차례로 살펴본다.
영상수신부(110)는 영상표시장치 외부로부터 영상신호 및/또는 영상과 관련된 정보를 수신하고, 이를 영상처리부(120)로 전송한다. 상기 영상수신부(110)는 외부신호수신부(111)와 튜너(112)를 포함할 수 있다.
외부신호수신부(111)는 DVD(Digital Versatile Disk), 셋탑박스(Set Top Box), 캠코더, 유선/무선 인터넷 네트워크, 과 같은 외부기기 및/또는 네트워크로부터 수신되는 외부신호를 입력받을 수 있다.
무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.
유선 인터넷 기술로는 이더넷(Ethernet), 광동축 혼합망(Hybrid Fiber Coax;HFC)방식, 비대칭 디지털 가입자 회선(Assymetric Digital Subscriber Line;ADSL)방식, 초고속 디지털 가입자 회선(Very high-data rate Digital Subscriber Line;VDSL)방식, 광랜방식(Fiber-to-the-home;FTTH)방식, PLC(Power Line Communication) 방식 등이 이용될 수 있다.
상기 외부기기와 영상표시장치(100)는 외부신호수신부(111)를 통하여 유선 및/또는 무선으로 연결될 수 있다.
상기 외부기기와 영상표시장치(100)가 무선으로 연결된 경우, 근거리 통신을 통하여 연결될 수 있다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.
튜너(112)는 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라 디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.
상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다.
상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.
상기 튜너(112)는, 예를 들어, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 튜너(112)는, 상술한 디지털 방송 시스템뿐만 아니라 다른 방송 시스템에 적합하도록 구성될 수도 있다.
상기 영상수신부(110)를 통해 수신된 영상신호 및/또는 영상관련정보는 메모리(160)에 저장될 수 있다.
영상처리부(120)는 상기 영상수신부(110)로부터 영상신호를 수신하여 이를 영상출력부(130)가 출력할 수 있도록 처리한다. 상기 영상처리부(120)는 채널버퍼(121), 디코더버퍼(122), 디코더(123) 등을 포함할 수 있다.
상기 채널버퍼(121)는 상기 영상수신부(110)로부터 영상신호를 수신하여 이를 임시적으로 저장할 수 있다. 상기 영상신호는 영상에서 동영상재생을 위한 비디오 데이터와, 음향 재생을위한 오디오 데이터가 혼합된 데이터스트림 형태로 저장된다.
상기 채널버퍼(121)에 저장된 데이터는, 디코더 버퍼(122)에 전송된 후 삭제될 수 있다. 채널버퍼(121)에 저장된 데이터는 디코더버퍼(122)에 전송된 후 일정시간동안 저장된 상태로 유지될 수 있다.
상기 디코더 버퍼(122)는 상기 데이터스트림에서 분리된 오디오 데이터와 비디오 데이터를 임시적으로 저장한다. 상기 디코더 버퍼(122)에 임시적으로 저장된 오디오 데이터와 비디오 데이터는 디코더(123)로 전송된다.
상기 디코더 버퍼(122)에 저장된 데이터는, 디코더(123)에 전송된 후 삭제될 수 있다. 상기 디코더 버퍼(122)에 저장된 데이터는 디코더(123)에 전송된 후 바로 삭제되거나 일정시간 경과후에 삭제될 수 있다.
상기 오디오 디코더(125)는 상기 오디오 데이터를 제어부(140)또는 영상출력부(130)에서 사용가능한 형식으로 변환할 수 있다. 상기 오디오 데이터는 다양한 형태를 지닐 수 있다. 예를 들어,
상기 디코더(126)는 상기 비디오 또는 오디오 데이터를 제어부(140)또는 영상출력부(130)에서 사용가능한 형식으로 변환할 수 있다. 상기 비디오 및/또는 오디오 데이터는 다양한 형태를 지닐 수 있다. 예를 들어, AVI(Audio Video Interleaved), MPEG(Motion Picture Expert Group), DivX, XviD, WMV(Windows Media Video codec) 등의 형태의 비디오 데이터를 인코딩/디코딩 할 수 있다.
영상출력부(130)는 디코더(123)가 변환한 데이터를 이용하여 영상 및/또는 음향을 재생한다. 상기 영상출력부(130)는 디스플레이부(131)와 음향출력모듈(132)을 포함할 수 있다.
디스플레이부(131)는 영상표시장치(100)에서 처리되는 정보를 표시, 출력한다. 예를 들어, 영상표시장치(100)가 동영상 출력 모드인 경우, 동영상을 출력한다. 영상표시장치(100)가 인터넷 통신 모드인 경우 인터넷 통신과 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다.
디스플레이부(131)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display),플라즈마 표시 패널(plasma display panel, PDP), MDT(Multi Display Tube) 중에서 적어도 하나를 포함할 수 있다.
음향 출력부(132)는 상기 오디오 디코더(125)을 이용하여 디코딩된 음향데이터를 출력한다. 상기 음향 출력부(122)는, 다이내믹 스피커(Dynamic speaker), 정전형 스피커(electrostatic speaker), 평판형 스피커(Planar-magnetic speaker) 중에서 적어도 하나를 포함할 수 있다.
상기 제어부(140)는 영상표시장치(100)의 전반적인 동작을 제어한다. 예를 들어, 상기 제어부(140)는 영상수신부(110)를 이용하여 수신한 데이터를 처리하거 나, 메모리(150)에 저장된 데이터를 처리한다. 이를 위하여, 상기 제어부(140)는 디지털 신호 처리기(Digital Signal Processor; DSP)를 포함할 수 있다.
상기 메모리(150)는 제어부(140)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들의 임시 저장을 위한 기능을 수행할 수도 있다. 메모리(140)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상표시장치(100)는 인터넷(internet)상에서 메모리(140)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.
사용자 입력부(160)는 상기 영상표시장치(100)의 동작을 제어하는 신호를 수신한다. 상기 동작 제어 신호는 현재 재생중인 동영상의 제어 동작(Rewind, Fast-Foward, Pause, Record 등을 포함한다.)을 의미할 수 있다. 상기 동작 제어 신호는 영상표시장치(100)의 동작(전원 On/Off, 예약 녹화, 인터넷 통신 모듈 Enable/Disable, 근거리 무선 통신 모듈 Enable/Disable, 방송 채널 변경 기능, 음량 조절 기능, 음소거 기능 등을 포함한다.) 상기 사용자 입력부(160)에는 상기 영상표시장치(100)를 제어하는 신호 이외에도, 사용자가 직접 카메라 또는 마이크를 통하여 음향 데이터 또는 영상 데이터를 입력할 수도 있다.
상기 신호들은 사용자가 직접 입력하거나 유/무선 리모트 컨트롤러(Remote Controller)를 이용하여 간접적으로 이용할 수 있다.
인터페이스부(170)는 영상표시장치(100)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 영상표시장치(100) 내부의 각 구성 요소에 전달하거나, 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(170)에 포함될 수 있다.
하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(130)에 의해 구현될 수 있다.
소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시 예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션 에 의해 구현될 수 있다. 소프트웨어 코드는 메모리(140)에 저장되고, 제어부(130)에 의해 실행될 수 있다.
동영상의 복호화 및 부호화를 위한 MPEG 표준에 따르면, 동영상 데이터는 인코딩의 기본 단위인 GOP(Group of Pictures)들의 집합으로 구성된다. GOP는 후술할 I-프레임부터 다음 I-프레임까지의 프레임의 집합을 의미한다.
상기 GOP는 I-프레임(Infra-frame;I-frame), B-프레임(Bidirectional-frame;B-frame) 및 P-프레임(Predicted-frame;P-frame)과 같은 세가지 종류의 프레임의 집합으로 구성된다.
상기 프레임은 동영상을 구성하는 개개의 정지화면을 재생하기 위해 필요한 정보를 담고있는 데이터 단위를 의미한다.
I-프레임은 키 프레임이라고도 부르며, 동영상의 임의의 한 화면을 압축한 정보를 담고있는 데이터를 의미한다. 가장 높은 화질의 동영상 데이터를 가지고 있으며, 일반적으로 가장 높은 크기의 용량을 지니고 있다.
P-프레임은 해당 프레임 이전에 존재하는 키프레임의 정보를 바탕으로 화면을 구성하는 데이터를 의미한다. I-프레임보다 용량이 작고, 화질이 낮으나, 후술할 B-프레임보다 용량이 크고, 화질이 높다.
B-프레임은 해당 프레임 이전에 존재하는 키프레임과, 이후에 존재하는 프레임을 바탕으로 화면을 구성하는 데이터를 의미한다. 상기 프레임 중 가장 용량이 작으며, 화질이 가장 낮다.
도 2에 도시된 바와 같이, 상기 영상 수신부(110)는 유/무선 네트워크를 통 하여 서로 다른 비트레이트를 지니며 하나 이상의 GOP들을 포함하는 복수의 비트스트림의 조합으로 구성된 동영상 데이터를 수신할 수 있다.
상기 복수의 비트스트림은 동일한 동영상을 변환하여 생성된 비트스트림일 수 있다. 또는 상기 복수의 비트스트림은 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림일 수 있다.
스트리밍 서버(SS)가 동영상을 스트리밍 클라이언트(SC)로 전송함에 있어서, 네트워크의 전송환경에 따라 동일한 동영상을 변환한 비트스트림의 조합을 전송할 수 있다. 상기 비트스트림은 각기 다른 비트레이트를 지니며, 시간의 흐름에 따라 변화하는 네트워크 전송환경에 따라 각 네트워크 전송환경하에서 가장 최적화된 비트레이트를 가지는 비트스트림이 선택되어 전송된다. 상기 네트워크 전송환경은 시간에 따라 변화하므로 상기 동영상 데이터는 시간의 흐름에 따라 선택된 각각의 비트스트림의 조합으로서 구성될 수 있다.
상기 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치할 수 있다.
상기 비트스트림에 포함된 GOP는 I(BlP)mBnP 구조를 가지며 l, m, n은 자연수일 수 있다. 예를 들어 상기 GOP는 IBBBPBBPBBBPBP, IBBBBPBBBPBPBP, IBPBPBP 등의 형태를 지닐 수 있다. 상기 I,B,P는 각기 I-프레임, B-프레임, P-프레임을 의미하 며, 상기 I,B,P를 포함한 문자열은 각 프레임을 재생되는 순서를 기준으로 좌측부터 나열한 것이다.
상기 비트스트림에는 비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함할 수 있다.
이하, 본 발명과 관련된 영상전송장치에 대하여 도면을 참조하여 보다 상세하게 설명한다.
도 3은 본 발명의 일 실시예와 관련된 영상전송장치의 블록 구성도(block diagram)이다.
도 3에 도시된 바와 같이, 상기 데이터베이스(210)는 스트리밍 서비스를 통하여 제공되는 동영상 데이터를 저장할 수 있다. 상기 데이터베이스(210)에 저장된 동영상 데이터는 서로 다른 비트레이트를 가지머 하나 이상의 GOP들을 포함하는 복수의 비트스트림으로 구성될 수 있다.
상기 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치할 수 있다.
상기 복수의 비트스트림은 동일한 동영상을 변환하여 생성된 비트스트림일 수 있다. 또는 상기 복수의 비트스트림은 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림일 수 있다.
상기 비트스트림에 포함된 GOP는 I(BlP)mBnP 구조를 가지며 l, m, n은 자연수일 수 있다. 예를 들어 상기 GOP는 IBBBPBBPBBBPBP, IBBBBPBBBPBPBP, IBPBPBP 등의 형태를 지닐 수 있다. 상기 I,B,P는 각기 I-프레임, B-프레임, P-프레임을 의미하며, 상기 I,B,P를 포함한 문자열은 각 프레임을 재생되는 순서를 기준으로 좌측부터 나열한 것이다.
상기 비트스트림에는 비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함할 수 있다.
도 2에 도시된 바와 같이 네트워크 감지부(230)는 스트리밍 클라이언트(SC)와 정보교환을 통하여 네트워크의 전송환경을 감지할 수 있다.
도 2에 도시된 바와 같이, 제어부(220)는 상기 네트워크 감지부(230)에 의하여 감지된 네트워크의 전송환경하에서 전송가능한 비트스트림 중 어느 하나의 비트스트림을 선택하여 GOP단위로 전송하도록 제어할 수 있다.
상기 제어부(220)는 상기 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 가장 비트레이트가 높은 비트스트림을 선택하여 GOP단위로 전송하도록 제어할 수 있다.
상기 제어부(220)는 네트워크에서 허용된 대역폭(Bandwidth)를 감지하여, 상기 네트워크의 대역폭에 따라 전송가능한 비트스트림의 최대 비트레이트를 계산할 수 있다.
상기 제어부(220)는 상기 데이터베이스(210)에 저장된 복수의 비트스트림 중 현재 감지된 네트워크의 대역폭(Bandwidth)하에서, 영상표시장치에서 끊김현상이 발생하지 않으면서 가장 높은 화질의 동영상 데이터를 제공할 수 있는 비트스트림을 선택하여 이를 GOP단위로 전송하도록 데이터 송신부(240)를 제어할 수 있다.
이때, 상기 제어부(220)는 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 가장 비트레이트가 높은 비트스트림을 선택하여 GOP 단위로 전송하도록 데이터 송신부(240)를 제어할 수 있다.
상기 제어부(220)는 상기 선택된 비트스트림이 전송중인 비트스트림과 다른 비트스트림인 경우, 전송중인 GOP의 전송이 완료된 후 선택된 비트스트림에 포함된 GOP를 전송할 수 있다.
네트워크의 전송환경이 변화함에 따라, 상기 영상전송장치(200)가 전송중인 비트스트림과 다른 비트레이트를 가지는 비트스트림을 전송하여야 할 경우가 발생할 수 있다.
예를 들어, 네트워크에서 허용된 대역폭이 증가하여 전송중인 비트스트림보다 높은 비트레이트를 가지는 비트스트림을 수신단에서 끊김현상없이 전송가능한 경우, 제어부(220)는 데이터베이스(210)에 저장된 비트스트림 중 전송중인 비트스트림보다 높은 비트레이트를 가지는 비트스트림을 선택하여 GOP단위로 전송하도록 데이터 송신부(240)를 제어할 수 있다.
또는, 네트워크에서 허용된 대역폭이 감소하여 전송중인 비트스트림을 지속하여 전송할경우, 네트워크의 전송속도가 전송중인 비트스트림의 비트레이트에 미 치지 못함에 따라 수신단에서 끊김현상이 발생할 것으로 예측될 수 있다. 이 때, 상기 제어부(220)는 데이터베이스(210)에 저장된 비트스트림 중 전송중인 비트스트림보다 낮은 비트레이트를 가지는 비트스트림을 선택하여 GOP단위로 전송하도록 데이터 송신부(240)를 제어할 수 있다.
이 경우, 제어부(220)는 전송중인 비트스트림의 GOP가 전송완료되었는지 여부를 판단할 수 있다. 상기 판단결과 전송중인 비트스트림의 GOP의 전송이 완료되지 않았다고 판단되는 경우, 상기 비트스트림의 GOP전송이 완료된 후 다른 비트스트림에 포함된 GOP의 전송을 개시할 수 있다.
이하, 본 발명과 관련된 기록매체 대하여 도면을 참조하여 보다 상세하게 설명한다.
본 명세서에서 설명되는 기록매체는 전기적 데이터를 읽거나 쓸 수 있으며 컴퓨터로 판독가능한 기록매체를 의미한다. 상기 기록매체는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입으로 구현될 수 있다.
도 4는 본 발명의 일 실시예와 관련된 기록매체에 저장된 데이터의 구조를 보인 개념도이다.
도 4에 도시된 바와 같이, 상기 기록 매체는 서로 다른 비트레이트를 지니며 하나 이상의 GOP들을 포함하는 복수의 비트스트림을 포함하고, 네트워크의 전송환경에 따라 복수의 비트스트림 중 어느 하나가 선택되어 네트워크를 통해 GOP단위로 전송가능한 동영상정보를 기록할 수 있다.
상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치할 수 있다.
도 4에 도시된 바와 같이 상기 기록매체에는 복수의 비트스트림(A,B,C)들이 기록될 수 있다. 도 4에는 3개의 비트스트림이 도시되어 있으나, 비트스트림의 개수는 네트워크의 전송환경 변화 정도 및/또는 스트리밍 서버(SS)의 데이터 베이스 크기 등의 요인에 따라 다양하게 설정될 수 있다. 상기 복수의 비트스트림(A,B,C)에는 복수의 GOP들이 포함되어 있다.
도 4에 도시된 바와 같이, 상기 비트스트림에 포함된 GOP에는 I, B, P프레임들이 포함되어 있다. 예를 들어, 제1 비트스트림(A)의 첫번째 GOP인 GOP1-1을 보면, 재생되는 순서를 기준으로, GOP1-1의 시작부분은 I프레임인 I10 프레임으로 시작하고, GOP1-1의 마지막부분은 P프레임인 P1Z 프레임으로 종료된다. 상기I, P 프레임의 중간에는 하나 또는 복수의 B프레임이 위치할 수 있다. 제1 비트스트림(A)에 포함된 GOP를 구성하는 I, B, P 프레임의 개수 및 배치순서는 상기 재생되는 순서 를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치한다는 기준을 충족하는 범위 내에서 다양하게 변화할 수 있다.
도 4에 도시된 바와 같이, 상기 제2, 제3 비트스트림에 포함된 GOP도 GOP1-1과 유사하게 구성될 수 있다.
MPEG의 동영상 표준에 따르면, I프레임을 디코딩함에 있어서는 다른 프레임을 참조하지 않아도 된다. 또한, P프레임은 해당 P프레임에 선행하는 다른 프레임을 참조하여 디코딩되며, B프레임은 해당 B프레임에 선행하는 다른 프레임과, 후행하는 다른 프레임을 참조하여 디코딩 된다.
예를 들어, 제1 비트스트림에 포함된 GOP1-1을 구성하는 프레임들을 디코딩함에 있어서, I10프레임을 재생하기 위하여는 다른 프레임을 참조할 필요가 없다. 이에 비하여 P13 프레임을 재생하기 위하여는 이에 선행하는 다른 프레임 즉, I10, B11 또는 B12와 같은 프레임을 참조하여야 한다. 또한 B14프레임을 재생하기 위해서는 이에 선행하는 I10 또는 P13프레임 및 이에 후행하는 P15프레임을 참조하여야 한다.
본 발명의 일 실시예에 따른 기록매체에 저장된 동영상 데이터 구조의 경우, 복수의 비트스트림 각각을 구성하는 GOP는 I프레임으로 시작하므로, 수신단에서 동영상을 재생함에 있어, 해당 GOP에 선행하는 다른 GOP에 위치한 프레임을 참조할 필요가 없다. 또한 GOP의 마지막은 I프레임 또는 P프레임으로 종료되므로, 수신단에서 동영상을 재생함에 있어, 해당 GOP에 후행하는 다른 GOP에 위치한 프레임을 참조할 필요가 없다. 즉 각 GOP내에 존재하는 프레임들을 재생함에 있어서, 해당 GOP외에 다른 GOP에 포함되는 프레임을 참조할 필요가 없으며, 각 GOP는 독립적으로 재생될 수 있다.
따라서, 상기 스트리밍 서버(SS)로부터 전송되는 동영상 데이터가 상기 복수의 스트림으로부터 추출된 GOP의 조합으로 구성되더라도, 각 GOP는 독립적으로 재생가능하므로, 서로 다른 비트스트림으로부터 추출된 GOP들을 연속하여 재생함으로 인해 발생하는 문제점들이 발생하지 않는다.
만약 서로 다른 비트스트림으로부터 추출된 GOP들을 연속하여 재생하는 경우, 각 데이터 프레임들은, 본래 참조하도록 되어있는 프레임과는 다른 프레임을 참조하여 재생되므로, 화질이 열화되거나, 데이터의 끊김현상이 발생할 것이다.
상기 복수의 비트스트림은 동일한 동영상을 변환하여 생성된 비트스트림일 수 있다. 또는 상기 복수의 비트스트림은 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림일 수 있다.
상기 비트스트림에 포함된 GOP는 I(BlP)mBnP 구조를 가지며 l, m, n은 자연수일 수 있다. 예를 들어 상기 GOP는 IBBBPBBPBBBPBP, IBBBBPBBBPBPBP, IBPBPBP 등의 형태를 지닐 수 있다. 상기 I,B,P는 각기 I-프레임, B-프레임, P-프레임을 의미하며, 상기 I,B,P를 포함한 문자열은 각 프레임을 재생되는 순서를 기준으로 좌측부터 나열한 것이다.
상기 비트스트림에는 비트스트림을 구성하는 각 프레임의 비트스트림 내에서 의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함할 수 있다.
도 4에 도시된 각 비트스트림에서, GOP1-1, GOP2-1, GOP3-1은 동일한 동영상에 포함된 동일한 동영상 구간을 재생하는데 필요한 프레임들을 포함할 수 있다. 이와 마찬가지로 GOP1-k, GOP2-k, GOP3-k(k는 자연수이다)로 구성된 GOP들은 동일한 동영상에 포함된 동일한 동영상 구간을 재생하는데 필요한 프레임들을 포함할 수 있다.
도 5는 본 발명의 일 실시예와 관련된 영상재생방법에서 전송되는 동영상 정보를 보인 개념도이다.
도 5에 도시된 바와 같이, 상기 전송되는 비트스트림들은 각기 다른 비트스트림에 포함된 GOP들의 조합으로 구성될 수 있다.
예를 들어, 도 5에 도시된 바와 같이, 최초의 GOP는 제1 비트스트림(A)에 포함된 GOP1-1이, 그후 연속되는 두개의 GOP는 제2 비트스트림(B)에 포함되는 GOP2-2, GOP2-3이, 그후 연속되는 두개의 GOP는 제3 비트스트림(C)에 포함되는 GOP3-4, GOP3-5가 위치한다고 가정한다.
상기 GOP1-1이 수신단에서 재생됨에 있어서, GOP1-1은 재생되는 순서를 기준으로, 마지막에 P1Z 프레임이 위치한다. P1Z 프레임은 해당 프레임에 선행하는 프레임을 참조하여 재생되므로, P1Z 프레임을 재생함에 있어서는 GOP1-1내에 포함된 I10 프레임이 참조된다.
만약 P1Z 프레임이 아닌 B1X 또는 B1Y 프레임이 상기 GOP1-1 프레임의 마지막에 위치한다고 가정하면, B프레임은 해당 프레임에 선행하는 프레임과 후행하는 프레임을 모두 참조하여 재생되므로, B1X 또는 B1Y 프레임은 GOP1-1에 포함되는 I10 프레임 이외에도, GOP2-2에 포함되는 다른 프레임들을 참조하여 재생될 것이다.
원래 B1X 또는 B1Y 프레임은 GOP1-1에 포함되는 I10 프레임과 GOP1-2에 포함되는 다른 프레임을 참조하여 재생되도록 생성된 프레임인 바, 원래 참조하도록 지정된 GOP1-2에 포함되는 다른 프레임이 아닌 GOP2-2에 포함되는 다른 프레임을 참조할 경우, 재생되는 화질이 열화되거나 재생이 끊기는 현상이 발생할 것이다.
그러나 본 발명의 일 실시예와 관련된 기록매체에 저장된 비트스트림들은 각각의 GOP가 다른 GOP를 참조하지 않고 독립적으로 재생가능하도록 기록매체에 기록되었으므로, 복수의 비트스트림(A,B,C)으로터 각각의 GOP가 조합되어 구성된 상기 동영상 데이터는 화질의 열화나 끊김현상없이 재생될 수 있다.
도 5에 도시된 바와 같이, GOP3-4의 경우, I프레임인 I30프레임으로 시작하고, I프레임은 다른 프레임을 참조하지 않고 재생되므로, I30프레임은 GOP3-4에 선행하는 다른 GOP에 포함된 프레임을 참조하지 않고 재생될 수 있다.
기록매체에 저장된 비트스트림에 포함된 GOP들이 독립적으로 재생가능함으로 인하여, 서로 다른 비트스트림에 포함되는 GOP들을 조합하여 구성된 비트스트림을 전송하더라도 각 프레임들이 기 설정된 프레임 이외에 다른 프레임을 참조함으로 인하여 발생하는 화질 열화 또는 재생중단 현상을 개선할 수 있다.
이하, 본 발명과 관련된 영상전송방법에 대하여 도면을 참조하여 보다 상세하게 설명한다.
도 6은 본 발명의 일 실시예와 관련된 영상전송방법을 나타낸 흐름도(flow chart)이다.
서로 다른 비트레이트를 지니며 하나 이상의 GOP를 포함하는 복수의 비트스트림을 저장한후(S101), 네트워크의 전송환경을 감지할 수 있다(S102).
상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치할 수 있다.
상기 복수의 비트스트림은 동일한 동영상을 변환하여 생성된 비트스트림일 수 있다. 또는 상기 복수의 비트스트림은 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림일 수 있다.
상기 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치할 수 있다.
상기 비트스트림에 포함된 GOP는 I(BlP)mBnP 구조를 가지며 l, m, n은 자연수 일 수 있다. 예를 들어 상기 GOP는 IBBBPBBPBBBPBP, IBBBBPBBBPBPBP, IBPBPBP 등의 형태를 지닐 수 있다. 상기 I,B,P는 각기 I-프레임, B-프레임, P-프레임을 의미하며, 상기 I,B,P를 포함한 문자열은 각 프레임을 재생되는 순서를 기준으로 좌측부터 나열한 것이다.
상기 비트스트림에는 비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함할 수 있다.
네트워크의 전송환경이 감지(S102)되면, 스트리밍 서버(SS)는 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 어느 하나의 비트스트림을 선택할 수 있다(S103).
상기 선택시에, 상기 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 가장 비트레이트가 높은 비트스트림을 선택할 수 있다(S103).
선택된 비트스트림과 전송중인 비트스트림을 비교한(S104a)결과, 선택된 비트스트림과 전송중인 비트스트림이 서로 다르다면, 전송중인 비트스트림에 포함된 GOP의 전송이 완료되었는지 여부를 판단할 수 있다(S014b). 만약 전송중인 비트스트림에 포함된 GOP의 전송이 완료되지 않은 경우, 전송중인 GOP의 전송이 완료된 후 선택된 비트스트림을 GOP단위로 전송할 수 있다(S104c).
만약, 전송중인 비트스트림에 포함된 GOP의 전송이 완료된 경우, 선택된 비트스트림을 GOP단위로 전송할 수 있다(S104d).
상기 선택된 비트스트림과 전송중인 비트스트림을 비교한(S104a)결과, 선택 된 비트스트림과 전송중인 비트스트림이 서로 같다면, 선택된 비트스트림을 GOP단위로 전송할 수 있다(S104d).
또한, 본 발명의 일 실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
상기와 같이 설명된 영상표시장치, 영상전송장치 및 기록매체는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
도 1은 본 발명의 일 실시예와 관련된 스트리밍 서비스를 제공하는 스트리밍 서비스 시스템의 개념도.
도 2는 본 발명의 일 실시예와 관련된 영상표시장치의 블록 구성도(block diagram).
도 3은 본 발명의 일 실시예와 관련된 영상전송장치의 블록 구성도(block diagram).
도 4는 본 발명의 일 실시예와 관련된 기록매체에 저장된 데이터의 구조를 보인 개념도.
도 5는 본 발명의 일 실시예와 관련된 영상재생방법에서 전송되는 동영상 정보를 보인 개념도.
도 6은 본 발명의 일 실시예와 관련된 영상전송방법을 나타낸 흐름도(flow chart).

Claims (24)

  1. 서로 다른 비트레이트를 지니며 하나 이상의 GOP들을 포함하는 복수의 비트스트림의 조합으로 구성된 동영상 데이터를 수신하는 영상수신부;
    상기 수신된 동영상 데이터를 재생가능한 형태로 처리하는 영상처리부;및
    상기 재생가능한 형태로 처리된 데이터와 관련된 동영상을 출력하는 영상출력부를 포함하고,
    상기 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치하는 영상표시장치.
  2. 제1 항에 있어서,
    상기 복수의 비트스트림은,
    동일한 동영상을 변환하여 생성된 비트스트림인 영상표시장치.
  3. 제2 항에 있어서,
    상기 복수의 비트스트림은,
    상기 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림인 영상표시장치.
  4. 제1 항에 있어서,
    상기 GOP는, I(BlP)mBnP 구조를 가지며 l, m, n은 자연수인 영상표시장치.
  5. 제1 항에 있어서,
    상기 비트스트림은,
    비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함하는 영상표시장치.
  6. 서로 다른 비트레이트를 가지며 하나 이상의 GOP들을 포함하는 복수의 비트스트림을 저장하는 데이터베이스;
    네트워크의 전송환경 변화를 감지하는 네트워크 감지부;
    상기 감지된 네트워크의 전송환경하에서 전송가능한 비트스트림 중 어느 하나의 비트스트림을 선택하여 GOP단위로 전송하도록 제어하는 제어부;및
    상기 선택된 비트스트림을, 상기 선택된 비트스트림을 구성하는 GOP단위로 전송하는 데이터 송신부를 포함하고,
    상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치하는 영상전송장치.
  7. 제6 항에 있어서,
    상기 복수의 비트스트림은,
    동일한 동영상을 변환하여 생성된 비트스트림인 영상전송장치.
  8. 제7 항에 있어서,
    상기 복수의 비트스트림은,
    상기 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림인 영상전송장치.
  9. 제6 항에 있어서,
    상기 GOP는, I(BlP)mBnP 구조를 가지며 l, m, n은 자연수인 영상전송장치.
  10. 제6 항에 있어서,
    상기 비트스트림은,
    비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함하는 영상전송 장치.
  11. 제6 항에 있어서,
    상기 제어부는,
    상기 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 가장 비트레이트가 높은 비트스트림을 선택하는 영상전송장치.
  12. 제6 항에 있어서,
    상기 제어부는,
    상기 선택된 비트스트림이 전송중인 비트스트림과 다른 비트스트림인 경우,
    전송중인 GOP의 전송이 완료된 후 선택된 비트스트림에 포함된 GOP를 전송하는 영상전송장치.
  13. 서로 다른 비트레이트를 지니며 하나 이상의 GOP들을 포함하는 복수의 비트스트림을 포함하며, 네트워크의 전송환경에 따라 복수의 비트스트림 중 어느 하나가 선택되어 네트워크를 통해 GOP단위로 전송가능한 동영상정보를 기록하고,
    상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임 을 포함하여 구성되며, 각 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치하는 기록매체.
  14. 제13 항에 있어서,
    상기 복수의 비트스트림은,
    동일한 동영상을 변환하여 생성된 비트스트림인 기록매체.
  15. 제14 항에 있어서,
    상기 복수의 비트스트림은,
    상기 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환된 비트스트림인 기록매체.
  16. 제13 항에 있어서,
    상기 GOP는, I(BlP)mBnP 구조를 가지며 l, m, n은 자연수인 기록매체.
  17. 제13 항에 있어서,
    상기 비트스트림은,
    비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함하는 기록매체.
  18. 서로 다른 비트레이트를 가지며 하나 이상의 GOP들을 포함하는 복수의 비트스트림을 저장하는 단계;
    네트워크의 전송환경를 감지하여, 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 어느 하나의 비트스트림을 선택하는 단계;및
    상기 선택된 비트스트림을, 상기 선택된 비트스트림을 구성하는 GOP단위로 전송하는 단계를 포함하고,
    상기 전송되는 비트스트림에 포함되는 GOP는 I-프레임, B-프레임 또는 P-프레임을 포함하여 구성되며, 각 프레임은, 재생되는 순서를 기준으로, I-프레임이 GOP의 시작부분에 위치하고, I-프레임 또는 P-프레임이 GOP의 마지막부분에 위치하는 영상전송방법.
  19. 제18 항에 있어서,
    상기 복수의 비트스트림은,
    동일한 동영상을 변환하여 생성된 비트스트림인 영상전송방법.
  20. 제19 항에 있어서,
    상기 복수의 비트스트림은,
    상기 동일한 동영상을 서로 다른 화질로 재생가능하도록 변환한 비트스트림인 영상전송방법.
  21. 제18 항에 있어서,
    상기 GOP는, I(BlP)mBnP 구조를 가지며 l, m, n은 자연수인 영상전송방법.
  22. 제18 항에 있어서,
    상기 비트스트림은,
    비트스트림을 구성하는 각 프레임의 비트스트림 내에서의 위치정보, 동영상 데이터의 포멧, 비트레이트 중 적어도 하나가 기록된 헤더를 더 포함하는 영상전송방법.
  23. 제18 항에 있어서,
    상기 선택하는 단계는,
    상기 감지된 네트워크 전송환경하에서 전송가능한 비트스트림 중 가장 비트레이트가 높은 비트스트림을 선택하는 단계인 영상신호 전송방법.
  24. 제18 항에 있어서,
    상기 전송하는 단계는,
    상기 선택된 비트스트림이 전송중인 비트스트림과 다른 비트스트림인 경우,
    전송중인 GOP의 전송이 완료된 후 선택된 비트스트림에 포함된 GOP를 전송하는 단계인 영상신호 전송방법.
KR1020080120272A 2008-12-01 2008-12-01 영상표시장치, 영상전송장치, 영상전송방법 및 기록매체 KR20100061908A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080120272A KR20100061908A (ko) 2008-12-01 2008-12-01 영상표시장치, 영상전송장치, 영상전송방법 및 기록매체
US12/628,172 US20100135392A1 (en) 2008-12-01 2009-11-30 Image display apparatus, image transmitting apparatus, image transmitting method and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080120272A KR20100061908A (ko) 2008-12-01 2008-12-01 영상표시장치, 영상전송장치, 영상전송방법 및 기록매체

Publications (1)

Publication Number Publication Date
KR20100061908A true KR20100061908A (ko) 2010-06-10

Family

ID=42222794

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080120272A KR20100061908A (ko) 2008-12-01 2008-12-01 영상표시장치, 영상전송장치, 영상전송방법 및 기록매체

Country Status (2)

Country Link
US (1) US20100135392A1 (ko)
KR (1) KR20100061908A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101237523B1 (ko) * 2012-07-30 2013-02-26 (주) 휴스 수리시설물 물관리자동화시스템의 다입력에 대한 화면 출력을 위한 전송시스템

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9143838B2 (en) * 2010-09-06 2015-09-22 Vasona Networks Inc. Device and method for quality assessment of encrypted streaming media flows
JP5331773B2 (ja) * 2010-10-14 2013-10-30 株式会社ソニー・コンピュータエンタテインメント 動画再生装置、情報処理装置および動画再生方法
EP2547062B1 (en) * 2011-07-14 2016-03-16 Nxp B.V. Media streaming with adaptation
US10304471B2 (en) * 2014-10-24 2019-05-28 Dolby International Ab Encoding and decoding of audio signals

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6859496B1 (en) * 1998-05-29 2005-02-22 International Business Machines Corporation Adaptively encoding multiple streams of video data in parallel for multiplexing onto a constant bit rate channel
US6570922B1 (en) * 1998-11-24 2003-05-27 General Instrument Corporation Rate control for an MPEG transcoder without a priori knowledge of picture type
JP3694888B2 (ja) * 1999-12-03 2005-09-14 ソニー株式会社 復号装置および方法、符号化装置および方法、情報処理装置および方法、並びに記録媒体
US20100091888A1 (en) * 2008-10-13 2010-04-15 General Instrument Corporation Multi-Rate Encoder with GOP Alignment

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101237523B1 (ko) * 2012-07-30 2013-02-26 (주) 휴스 수리시설물 물관리자동화시스템의 다입력에 대한 화면 출력을 위한 전송시스템

Also Published As

Publication number Publication date
US20100135392A1 (en) 2010-06-03

Similar Documents

Publication Publication Date Title
KR101537701B1 (ko) 영상표시장치 및 영상표시장치의 스트리밍 서비스 제공방법
EP1673940B1 (en) Digital video recording and playback system with quality of service playback from multiple locations via a home area network
US10382798B2 (en) System and method for multiscreen network digital video recording using on-demand transcoding
US8661152B2 (en) Method and apparatus for reducing deterioration of a quality of experience of a multimedia service in a multimedia system
US8862763B2 (en) Downloading video using excess bandwidth
US9621604B2 (en) Statistical remultiplexing of ABR streams
US8625974B1 (en) Obscuring advertisements during trick mode operation
US20090193482A1 (en) System and Method of Scheduling Recording of Media Content
US20060230176A1 (en) Methods and apparatus for decreasing streaming latencies for IPTV
US20110093617A1 (en) Content reproduction system, content reproduction apparatus, program, content reproduction method, and providing content server
US8572670B2 (en) Video distribution device, video distribution system, and video distribution method
KR101480469B1 (ko) 영상표시장치, 영상전송장치, 영상전송방법 및 기록매체
US20040034870A1 (en) Data streaming system and method
US20130204973A1 (en) Method for transmitting a scalable http stream for natural reproduction upon the occurrence of expression-switching during http streaming
US20110231521A1 (en) Media convergence platform
WO2013145419A1 (ja) コンテンツデータ記録装置、コンテンツデータ記録方法、制御プログラムおよび記録媒体
CN112752115A (zh) 直播数据传输方法、装置、设备及介质
KR20100061908A (ko) 영상표시장치, 영상전송장치, 영상전송방법 및 기록매체
US20120066338A1 (en) Recording variable-quality content stream
KR20120030969A (ko) Ｈｔｔｐ 스트리밍에서 표현 스위칭시 처리 방법
KR101578723B1 (ko) 영상표시장치 및 영상표시장치의 동영상 스트리밍 방법
US20080069126A1 (en) Method and system for buffering content
US20120251086A1 (en) Trick mode technique for a bandwidth limited channel
JP2012222530A (ja) 受信装置及び方法、並びにプログラム
KR20110070481A (ko) 인터넷 텔레비전을 이용한 영상 고속 재생방법 및 그 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application