KR20050026966A - 트릭 플레이 방법 - Google Patents

트릭 플레이 방법 Download PDF

Info

Publication number
KR20050026966A
KR20050026966A KR1020057001379A KR20057001379A KR20050026966A KR 20050026966 A KR20050026966 A KR 20050026966A KR 1020057001379 A KR1020057001379 A KR 1020057001379A KR 20057001379 A KR20057001379 A KR 20057001379A KR 20050026966 A KR20050026966 A KR 20050026966A
Authority
KR
South Korea
Prior art keywords
image
images
decoder
server
display mode
Prior art date
Application number
KR1020057001379A
Other languages
English (en)
Inventor
프랭크 아베라드
마크 암스토츠
프레데릭 살라운
Original Assignee
톰슨 라이센싱 에스.에이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 에스.에이. filed Critical 톰슨 라이센싱 에스.에이.
Publication of KR20050026966A publication Critical patent/KR20050026966A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H04N21/6336—Control signals issued by server directed to the network components or client directed to client directed to decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17318—Direct or substantially direct transmission and handling of requests

Abstract

본 발명은 디지털 이미지를 처리하기 위한 방법 및 디바이스에 관한 것이다. 본 디바이스에서, 이미지(M'i,M"i)는, 서버(202)로부터, 다양한 디스플레이 모드를 사용하는 디코더(208,206)로 전송되며, 이미지는 제1 이미지의 코딩을 사용하여 제2 이미지를 코딩하는 의존 방식으로 코딩된다. 본 방법에서, 서버로부터 디코더로 전송되는 이미지의 순서는, 이미지의 의존성 및 디코더에 의해 요구되는 디스플레이 모드의 함수에 의해 결정된다.

Description

트릭 플레이 방법{TRICK PLAY METHOD}
본 발명은 디지털 이미지 처리를 위한 방법 및 장치에 관한 것이다.
코딩된 이미지의 시퀀스를 다양한 모드에 따른 디지털 데이터로 디스플레이하는 것이 알려져 있는데, 디스플레이 모드는, 디스플레이된 이미지의 수에 의존하는 디스플레이의 방향과 속도에 의해 정의된다. 예를 들어, 연속적인 이미지 M1, M2, M3, M4 및 M5를 포함하는 시퀀스는, 그 이미지 M1, M2, M3, M4 및 M5가 연속적으로 디스플레이되도록 하는 방향과 속도에 대응하는 모드에 의해 디스플레이될 수도 있다.
또다른 모드에 따르면, 디스플레이 방향은 최초의 모드에 대해 반전되는 반면, 시퀀스의 디스플레이 속도가 가속되어, 이미지 M5, M3 및 M1만이 연속적으로 디스플레이된다.
최근의 예에 따르면, 시퀀스의 디스플레이 속도가 0이 되어, 이미지, 예를 들어 M1이 계속해서 디스플레이된다.
추가적으로, 시퀀스의 첫 번째 이미지의 코딩을 사용하여, 이 시퀀스의 두 번째 이미지의 코딩을 수행하는, 이미지 시퀀스의 디지털 이미지를 코딩하는 것이 알려져 있다. 본 명세서에 후속하는 바와 같이, 그러한 이미지는 의존된다고 불린다.
시퀀스의 코딩된 이미지는, 예를 들어 이 시퀀스가 MPEG(Motion Pictures Expert Group) 표준에 의해 코딩될 때, 의존될 수도 있다.
MPEG 표준에 따르면, 이미지의 코딩은, 코딩된 이미지를 다음의 세 가지 카테고리 중 하나에 관련시킨다는 점이 연상된다.
- 소위 인트라(intra)(I) 이미지로 불리는 카테고리로서, 인트라 이미지는, 또다른 이미지의 디코딩을 요구하지 않으면서 디코딩 및 디스플레이 가능하다.
- 소위 프리딕티브(predictive)(P) 이미지로 불리는 카테고리로서, 프리딕티브 이미지는, 이 프리딕티브 이미지 이전에 전송된 인트라 또는 프리딕티브 이미지의 디코딩을 요구하여 디스플레이된다.
- 소위 바이프리딕티브(bi-predictive)(B) 이미지로 불리는 카테고리로서, 바이프리딕티브 이미지는, 이 바이프리딕티브 이미지 이전 및 이후에 디스플레이된 이미지의 디코딩을 요구하여 디스플레이된다.
본 발명의 다른 특징 및 장점은, 이하의 한정되지 않는 예로서 참조되는 도면을 통해 명백해질 것이다.
도 1의 (a)는 순방향 모드와 역방향 모드에서의 데이터 디스플레이 순서를 나타낸다.
도 1의 (b), (c) 및 (d)는 다양한 디스플레이 모드에 따른 이미지의 전송 순서의 예를 나타낸다.
도 2는 본 발명의 실시예에 따른 서버와 두 개의 터미널을 나타낸다.
본 발명은, 지정된 모드, 즉 지정된 방향과 속도에 따른 이미지의 디스플레이에는, 이미지의 상당한 조작이 요구되므로, 디코딩 디바이스에서의 상당한 리소스를 필요로 한다는 점에서 기인한다.
예를 들어, MPEG 표준에 따른 이미지의 코딩을 고려하면, 바이프리딕티브 이미지의 디스플레이는, 이 바이프리딕티브 이전에 디스플레이된 이미지 및 후속하여 디스플레이되는 이미지의 디코딩을 필요로 하는데, 이러한 세 개의 디코딩된 이미지는, 터미널의 디스플레이 모드가, 코딩된 이미지의 전체 세트가 디스플레이되는 속도에 대응할 때 디스플레이된다.
이에 반해, 디스플레이 속도로 인하여 바이프리딕티브 이미지는 디스플레이되는 반면, 그 이미지의 이전 및 이후의 이미지가, 예를 들어 가속화된 디스플레이 때문에 디스플레이되지 않더라도, 후자는, 바이프리딕티브 이미지의 디스플레이를 위하여 전송되어 디코딩되어야 한다.
디스플레이 모드의 함수로서, 두 번째 이미지의 디코딩을 위하여, 디스플레이되지 않은 첫 번째 이미지가 전송되어 디코딩되어야 한다는 점이 명백하다.
유사하게, 코딩된 이미지의 전체 세트가 디스플레이되는 디스플레이 모드인 경우, 프리딕티브 이미지는, 이전에 전송되어 디코딩된 이미지에 의해 디코딩되어 디스플레이된다.
이에 반해, 디스플레이 속도가 가속되어, 프리딕티브 이미지 이전의 이미지가 디스플레이되지 않더라도, 이 이전 이미지는, 프리딕티브 이미지의 디코딩을 위하여 전송되어 디코딩된다.
최근의 예에 따르면, 디스플레이 방향이, 이러한 이미지의 전송 순서에 대응할 때, 프리딕티브 이미지는, 이전에 디코딩된 이미지를 사용하여 디코딩되어 디스플레이된다.
그러나, 디스플레이 방향이 반전되면, 프리딕티브 이미지의 디코딩이, 프리딕티브 이미지 이전에 전송된 이미지의 디코딩을 요구할지라도, 이 이전 이미지는, 프리딕티브 이미지가 디스플레이된 후에 디스플레이될 수도 있다.
그렇지 않은 경우, 코딩된 이미지가 처리되는 순서는, 디스플레이의 반전된 모드에 부적합하여 이러한 이미지 처리를 복잡하게 하며, 디스플레이 래그(lag)를 증가시킨다. 그 프로세싱은, 스트림의 구조 분석, 이미지의 재배열, 필요한 메모리 용량 및 채택된 프로세서 능력의 관점에서의 수많은 리소스를 부과하는 다중 디코딩을 실질적으로 요구한다.
이러한 단점은, 코딩된 이미지가 서버에 의해 하나 이상의 원격 디스플레이 터미널에 전송될 때, 더욱 심각해진다. 구체적으로는, 디코딩의 복잡도 및 디코딩을 위해 요구되는 래그와 관련되는 단점 외에, 두 번째로 코딩된 이미지의 디코딩을 수행하기 위해 필수적인, 디스플레이되지 않은 첫 번째로 코딩된 이미지를 전송하기 위해 전송 리소스가 사용된다.
본 발명은 이러한 결점 중 적어도 하나를 개선한다. 본 발명은 디지털 이미지 처리 방법에 관한 것으로서, 이러한 이미지는, 서버로부터, 다양한 디스플레이 모드를 사용하는 디코더로 전송되며, 이미지는, 첫 번째 이미지의 코딩이 두 번째 이미지를 코딩하기 위해 사용되는 의존 방식으로 코딩된다.
본 발명에 따르면, 서버로부터 디코더로의 이미지의 전송 순서는, 이러한 이미지의 의존성 및 디코더에 의해 요구되는 디스플레이 모드의 함수에 의해 결정된다.
그러한 방법으로 인하여, 디지털 이미지의 전송은 잠재적으로는 디스플레이 모드에 따라 수행될 수 있으므로, 디코딩 디바이스에서의 프로세싱이 효율적으로 수행된다.
서버가 코딩된 이미지를 터미널로 전송하는 경우, 본 발명은, 제한된 수의 이미지만을 전송하여, 전송 네트워크의 사용을 제한할 수도 있다.
바람직한 실시예에 따르면, 디코더에 의해 사용되는 디스플레이 모드가 서버에 전송되며, 서버는, 디코더에 의해 사용되는 디스플레이 모드의 함수에 의해 이미지의 전송을 수행한다.
이는, 서버와 디코더, 또는 디코더들 사이에서 전송되는 이미지의 수를 감소시킬 수도 있다. 따라서, 디코더는 오퍼레이팅 모드를 서버에 나타낼 수도 있으며, 서버는 이 모드의 함수에 의해 이미지의 전송을 수행한다.
바람직한 실시예에 따르면, 서버가 코딩된 이미지를 디코더로 전송하는 경우, 서버는, 디코더가 각각의 이미지를 처리하게 하는 정보를 포함하는 각각의 이미지와 관련된 명령을 병렬로 전송한다.
이미지는, 코딩 순서에 더 이상 대응할 필요가 없는 순서대로 서버로부터 디코더로 전송된다. MPEG-2 표준에 의해 디코딩된 이미지의 경우, 서버로부터 디코더로 전송되는 스트림은, MPEG-2 표준에 의한 코딩을 더 이상 따르지 않는데, 이는, 이미지가 코딩으로부터의 순서와는 상이하게 전송되기 때문이다. 따라서, 데이터와 함께 전송되는 명령으로 인하여, 스트림이, 데이터가 코딩된 표준을 더 이상 따르지 않더라도, 디코더는 그 스트림의 이미지를 디코딩한다.
바람직한 실시예에 따르면, 정보는,
- 이미지가 디스플레이되는지를 나타내는 필드,
- 이미지가 디코딩되는지를 나타내는 필드,
- 디코딩 후, 이미지가 기록되는 디코더의 메모리 버퍼를 나타내는 필드,
- 이미지의 디코딩을 위해 사용되는 이미지를 포함하는 메모리 버퍼의 인덱스 번호를 나타내는 필드, 및
- 이미지의 디스플레이 방향을 나타내는 필드
를 포함한다.
이 정보는, 디코더에 수신되는 이미지를 처리하고, 이 이미지를 기록하는 방식을 설명한다.
바람직한 실시예에 따르면, 터미널이 코딩된 이미지 및 각각의 이미지와 관련된 명령을 수신하는 경우, 명령은 제1 메모리 버퍼로 전송되는 반면, 코딩된 이미지는 상이한 메모리 버퍼로 전송된다.
바람직한 실시예에 따르면, 제1 메모리 버퍼에 저장된 명령은 메모리 버퍼 내 저장 순서의 함수에 의해 처리된다.
바람직한 실시예에 따르면, 디스플레이 방향, 즉 이미지가 디스플레이되는 순서 뿐만 아니라, 디스플레이 속도에 의해 정의되는 디스플레이 모드를 사용하여, 하나의 동일하게 처리된 이미지 그룹에 대해 가변 수의 이미지가 디스플레이된다.
비디오 시퀀스의 디코딩을 담당하는 디지털 디코더는, 흔히 고속 포워드, 지연 재생, 되감기 등과 같은 특정 모드를 처리한다.
바람직한 실시예에 따르면, 디코더가 디스플레이 모드를 변경하는 경우, 제1 메모리 버퍼의 사이즈가 감소된다.
이러한 방식으로, 메모리 버퍼의 깊이를 개조하는 것, 예를 들어 디스플레이 속도가 감소하는 경우, 메모리 버퍼의 깊이를 감소시키거나, 디스플레이 속도가 증가하는 경우, 메모리 버퍼의 깊이를 증가시키는 것이 가능할 수도 있다.
이로 인하여 디코더에서의 지연이 감소될 수도 있으며, 디코더의 반응 시간이 개선될 수도 있다. 이는, 디스플레이 모드의 변경 동안에 특히 유익할 수도 있다.
바람직한 실시예에 따르면, 디코더가 디스플레이 모드를 변경하는 경우, 제1 메모리 버퍼가 비워지게 된다.
이로 인하여, 디스플레이 모드의 변경이 수행되는 경우, 디코더 내 지연이 또한 감소될 수도 있다.
또한, 본 발명은 디지털 이미지를 처리하기 위한 디바이스에 관한 것으로서, 서버로부터, 다양한 디스플레이 모드를 사용하는 디코더로 이미지를 전송하기 위한 수단을 포함하고, 이미지는, 제1 이미지의 코딩을 사용하여 제2 이미지를 코딩하는 의존 방식으로 코딩된다.
본 발명에 따르면, 상기 디바이스는, 이미지의 의존성 및 디코더에 의해 요구되는 디스플레이 모드의 함수에 의해, 서버로부터 디코더로 전송되는 이미지의 순서를 결정하기 위한 수단을 포함한다.
마지막으로, 본 발명에 따른 방법은, 이하에서 후술되는 공지된 디코더에서 용이하게 구현될 수도 있음을 이해해야 한다.
또한, 본 발명은, 프로그램이 컴퓨터에서 실행되는 경우, 본 발명의 실시예 중 하나에 따른 디지털 이미지 처리 방법의 단계를 실행하기 위한 프로그램 코드 명령을 포함하는 컴퓨터 프로그램 제품에 관한 것이다.
도 1의 (a)는 MPEG-2 표준에 의해 코딩된 이미지의 시퀀스를 나타낸다.
이미지는, 전술한 3가지 모드 I, B 또는 P에 의해 코딩된 이미지를 포함하는 시퀀스로 그룹화된다(GOP, Group of Picture).
도시한 실시예에서, 시퀀스는 12개의 이미지를 포함한다. 도 1의 (a), (b), (c) 및 (d)에 있어서, I, B 및 P로 표시된 이미지는 GOP에 속하고, I', B' 및 P'으로 표시된 이미지는 다른 GOP에 속하며, I", B" 및 P"으로 표시된 이미지는 또다른 GOP에 속한다.
디스플레이 모드가 순방향(forward)인 경우, 이미지는, 그 이미지의 코딩 순서에 대응하는 순서, 즉 첫 번째로 디스플레이되는 이미지 B0부터 이미지 B1, I2, B3...P11의 순서로 디스플레이된다.
디스플레이 모드가 역방향(backward)인 경우, 이미지 P11, B10, B99...B0를 디스플레이하기 시작한다. 후자의 경우, 이미지는 코딩된 순서대로 디스플레이되지 않으므로, 상당한 디코딩 제약을 수반하며, 이미지를 디코딩하여 디스플레이 디바이스에 전송하기 위한 디코딩 디바이스에서의 상당한 리소스를 요구한다.
도시한 도 1의 (b)는, 디스플레이 모드가 순방향인 경우, 본 발명의 실시예에 의해 서버로부터 디코더로 전송되는 이미지의 시퀀스이다.
디코더에 필요한 리소스를 제한하기 위하여, 디코더에서의 프로세싱을 감소시킬 수 있는 순서대로 이미지를 전송한다.
따라서, I2, B0, B1, P5, B3, B4, P8, B6, B7, P11, B9, B10..의 순서대로 이미지를 전송한다.
도시한 도 1의 (c)는, 디스플레이 모드가 순방향 가속되는 경우, 본 발명의 실시예에 의해 서버로부터 디코더로 전송되는 이미지의 시퀀스이다.
B 타입의 이미지는 디코더에 전송되지 않는다. I 및 P 이미지가, I2, P5, P8, P11..의 순서대로 서버로부터 디코더로 전송된다.
도시한 도 1의 (d)는, 디스플레이 모드가 역방향인 경우, 본 발명의 실시예에 의해 서버로부터 디코더로 전송되는 이미지의 시퀀스이다.
한 개 및 동일한 GOP의 이미지가, I2, P5, P8, B10, B9, I2, P5, B7, B6, I2, B4, B3의 방향으로 전송된다.
따라서, 디코더에서의 프로세싱을 용이하게 하기 위하여, 어떤 이미지(시퀀스 아래에 ×표로 표시됨)가 수차례 전송되는지를 발견한다.
도시한 도 2는, 서버(202) 및 터미널(206,208)을 나타내는데, 서버(202)의 기록 매체(하드 디스크, CD, DVD)(204)에 기록된 이미지를 디스플레이하기 위한 것이다.
본 발명에 따르면, 서버(202)는, 제1 이미지 Mj'이 제2 코딩된 이미지 Mk'에 의해 코딩되는 의존 방식으로 코딩된 이미지 Mi'을 터미널(206,208)에 전송한다.
추가적으로, 이미지 Mi'은, 그 이미지 Mi'과 관련된 디스플레이 모드를 식별하는 명령 Ci'을 함께 전송하는데, 디스플레이 모드는, 특히 디스플레이의 방향과 속도에 의해 정의된다.
코딩된 이미지 Mi' 및 명령 Ci'의 전송을 수행하기 위하여, 터미널(206)은, 그 터미널의 사용자에 의해 선택된 디스플레이 모드와 관련되는 정보 A206을 서버(204)에 전송한다.
터미널(206)에서 사용되는 디스플레이 모드의 함수에 의하여, 도 1의 (b), (c) 및 (d)에서 표현한 이미지의 다양한 시퀀스가 터미널(206)에 전송되어, 이미지 프로세싱을 최적화한다.
서버(202)가 디바이스(206,208)로 전송하는 명령 C'i 및 C"i는, 디바이스(206,208)에 의해 수행될 디코딩 및 디스플레이와 관련되는 정보를 포함하며, 후자의 명령은, 전송된 이미지 Mi', Mi" 및 명령 Ci', Ci"에 대해 수행되는 프로세싱을 모니터링한다.
이하의 표 1은 명령 C'i 및 C"i의 다양한 정보(리스트는 개략적임)를 나타낸다.
이름 설명
RDCld 명령 식별자
Display 이미지가 디스플레이되는지를 나타냄
BuffNr 디코딩 후에 이미지가 기록되는 메모리 버퍼를 나타냄
Decode 이미지가 디코딩되는지를 나타냄
P_BuffNr 현재 이미지를 디코딩하는데 필요할 수도 있는 P 이미지를 포함하는 메모리 버퍼의 인덱스 번호를 나타냄
I_BuffNr 현재 이미지를 디코딩하는데 필요할 수도 있는 I 이미지를 포함하는 메모리 버퍼의 인덱스 번호를 나타냄
Forward 디스플레이 방향을 나타냄. 디코더는 이 항목의 정보를 사용하여, 두 개의 이미지를 인터리브 모드에서 디스플레이함
옵션
Size 이미지의 사이즈 (TS 패킷의 수)
Type 이미지의 타입
TempRef 이미지의 시간 기준
commandeld 전송된 이미지와 대응하는 디스플레이 모드를 확인가능하게 하는 명령 인덱스 번호를 나타냄
이 정보에 기초하여, 서버(202)는 터미널(206)의 동작을 모델링하는데, 특히 이용가능한 메모리 용량에 의해서, 처리 용량 및 터미널(206)의 저장 리소스 보다 큰 데이터 양은 전송하지 않는다.
터미널(206)이 데이터 Mi' 및 명령 Ci'을 포함하는 신호를 수신한 경우, 디멀티플렉서(210)가 그 신호를 처리하여, 명령 Ci'을 레지스터(212)로 전송하고, 코딩된 이미지 Mi'을 저장 메모리(214)로 전송한다. 레지스터(212)는 바람직하게는 FIFO(선입선출을 나타내는 머리글자) 타입의 메모리로서 구현된다.
실시예에 있어서, 메모리는, 수신된 오디오 정보 및 비디오 정보를 각각 저장하기 위해 사용되는 두 개의 서브메모리(214a,214b)를 포함한다.
저장 레지스터(212)는, 명령 Ci'을 이 레지스터(212)에 저장되는 순서에 대응하는 순서대로 제어기(216)에 전송한다.
제어기(216)가 명령 Ci'을 수신한 경우, 제어기는 엘리먼트(218)에 명령하여, 저장 메모리(214)의 코딩된 이미지를, 그 이미지를 디코딩하기 위한 메모리 버퍼(220)로 전송한다. 모듈(218)은 메모리 버퍼(214b) 내 새로운 이미지의 도착을 통보받고, 제어기(216)의 명령에 의해, 재구성 메모리 버퍼(220) 내 이미지의 디코딩을 시작한다.
디코딩된 이미지는 디스플레이 제어기(200)를 경유하여 디스플레이 스크린(222)으로 전송된다.
바람직한 실시예에 있어서, 네 개의 메모리 버퍼(220)는, 특히 디스플레이 모드의 변경이 발생하는 경우, 이미지 처리 속도를 높이기 위해 사용된다.
디스플레이 모드가 변경되는 경우, 새로운 디스플레이 모드의 함수에 의하여, 이미지의 코딩을 수정하는 정보 A206이 서버(202)에 전송되며, 서버(202)는 명령 Ci"에 의한 새로운 디스플레이 모드와 관련된 새로운 코딩 이미지 Mi"를 전송한다.
바람직한 실시예에 있어서, 레지스터(212)는, 사용자가 디스플레이 모드를 변경하는 경우, 지연(latency)의 감소를 가능하게 하는 어댑티브(adaptive) 깊이를 구비한다. 따라서, 레지스터(212)에 기록된 명령이 제거되며, 그 다음 디스플레이 모드로 신속하게 진행하는 것이 가능하다.
변형 예에 있어서, 디스플레이 모드의 변경이 존재하는 경우, 레지스터(212)는 비워지는데, 이는 디스플레이 모드의 변경 동안, 지연을 감소시키는 것을 또한 가능하게 한다.
Commandld 필드는, 각각의 이미지에 대응하는 디스플레이 모드를 확인하는 것을 가능하게 한다. 이 식별자는, 초기에 디코더(206)로부터 서버(202)에 디스플레이 모드와 함께 전송된다. 그 다음, 이 디스플레이 모드에 대응하는 각각의 이미지가, 도 1의 (b), (c) 및 (d)에 도시한 시퀀스에 의해 식별자 Commandld와 함께 전송된다. 따라서, 디스플레이 모드의 변경 동안, 디코더는, 이전의 디스플레이 모드에 대응하는 이미지를 수신할 때, 레지스터(212)를 비울 수 있다.
변형 예에 있어서, 메모리 버퍼(220)는, 코딩된 이미지의 카테고리, 인트라, 바이프리딕티브 또는 프리딕티브에 지정된다.
MPEG-2 표준에 의해 이미지가 코딩될 때, 전송 타입의 패킷에 포함된 CC 필드(연속 카운터를 나타내는 머리글자)는 더 이상 유효하지 않는데, 이는, 이미지가 코딩으로부터의 순서와는 상이하게 전송되기 때문이다. 스트림에서의 불연속을 방지하기 위하여, 패딩(padding) 패킷을 삽입하여 CC 필드의 예상 값을 얻는 것을 생각할 수 있다. 또다른 변형 예에 따르면, 디코더 내 CC 필드를 무시하는 것이 또한 가능하다.
MPEG-2 표준에 의해 이미지가 코딩될 때, 특정 패킷 식별자(PID)를 구비한 TS 패킷을 사용하여, 명령 C'i, C"i를 개인 영역에 삽입할 수 있다. 이 경우, 디코더는 PAT 필드와 개인 테이블을 디코딩한다.
식별자만을 포함하고 데이터는 포함하지 않기 위하여 특별하게 생성된 TS 타입의 패킷에, 명령 C'i 및 C"i가 또한 삽입될 수 있다.

Claims (11)

  1. 디지털 이미지 처리 방법으로서,
    이미지(M'i,M"i)는, 서버(202)로부터, 다양한 디스플레이 모드를 사용하는 디코더(208,206)로 전송되고, 상기 이미지는 제1 이미지의 코딩을 사용하여 제2 이미지를 코딩하는 의존 방식으로 코딩되며,
    상기 방법은,
    상기 서버로부터 상기 디코더로 전송되는 이미지의 순서가, 상기 이미지의 의존성 및 상기 디코더에 의해 요구되는 디스플레이 모드의 함수에 따라 결정되는 것을 특징으로 하는 디지털 이미지 처리 방법.
  2. 제2항에 있어서,
    상기 디코더(206,208)에 의해 사용되는 디스플레이 모드는 상기 서버(202)로 전송되며, 상기 서버(202)는, 상기 디코더(206,208)에 의해 사용되는 디스플레이 모드의 함수에 따라 상기 이미지의 전송을 수행하는 것을 특징으로 하는 디지털 이미지 처리 방법.
  3. 제3항에 있어서,
    상기 서버(202)가 코딩된 이미지(Mi',M"i)를 상기 디코더(206,208)로 전송하는 경우, 상기 서버는, 상기 디코더가 각각의 이미지를 처리하게 하는 정보를 포함하는 각각의 이미지와 관련된 명령(Ci',C"i)을 병렬로 전송하는 것을 특징으로 하는 디지털 이미지 처리 방법.
  4. 제3항에 있어서,
    상기 정보는,
    상기 이미지가 디스플레이되는지를 나타내는 필드(Display),
    상기 이미지가 디코딩되는지를 나타내는 필드(Decode),
    디코딩 후, 상기 이미지(M'i)가 기록되는 디코더(206)의 메모리 버퍼를 나타내는 필드(BuffNr),
    상기 이미지의 디코딩을 위해 사용되는 이미지를 포함하는 메모리 버퍼의 인덱스 번호를 나타내는 필드(P_BuffNr,I_BuffNr), 및
    상기 이미지의 디스플레이 방향을 나타내는 필드(Forward)
    를 포함하는 것을 특징으로 하는 디지털 이미지 처리 방법.
  5. 제4항에 있어서,
    터미널이 코딩된 이미지(Mi') 및 각각의 이미지와 관련된 명령(Ci')을 수신하는 경우, 상기 명령(Ci')은 제1 메모리 버퍼(212)로 전송되는 반면, 상기 코딩된 이미지는 상이한 메모리 버퍼(214b)로 전송되는 것을 특징으로 하는 디지털 이미지 처리 방법.
  6. 제3항 내지 제5항 중 한 항에 있어서,
    상기 제1 메모리 버퍼(212)에 저장된 명령은 상기 메모리 버퍼 내 저장 순서의 함수에 따라 처리되는 것을 특징으로 하는 디지털 이미지 처리 방법.
  7. 제1항 내지 제6항 중 한 항에 있어서,
    디스플레이 방향, 즉 이미지가 디스플레이되는 순서 뿐만 아니라, 디스플레이 속도에 의해 정의되는 디스플레이 모드를 사용하여, 하나의 동일하게 처리된 이미지 그룹에 대해 가변 수의 이미지가 디스플레이되는 것을 특징으로 하는 디지털 이미지 처리 방법.
  8. 제5항 내지 제7항에 있어서,
    상기 디코더가 디스플레이 모드를 변경하는 경우, 상기 제1 메모리 버퍼(212)의 사이즈가 감소되는 것을 특징으로 하는 디지털 이미지 처리 방법.
  9. 제5항 내지 제8항에 있어서,
    상기 디코더가 디스플레이 모드를 변경하는 경우, 상기 제1 메모리 버퍼(212)가 비워지게 되는 것을 특징으로 하는 디지털 이미지 처리 방법.
  10. 디지털 이미지를 처리하기 위한 디바이스로서,
    서버(202)로부터, 다양한 디스플레이 모드를 사용하는 디코더(208,206)로 이미지를 전송하기 위한 수단을 포함하고,
    상기 이미지(M'i,M"i)는, 제1 이미지의 코딩을 사용하여 제2 이미지를 코딩하는 의존 방식으로 코딩되며,
    상기 디바이스는, 상기 이미지의 의존성 및 상기 디코더(208,206)에 의해 요구되는 디스플레이 모드의 함수에 의해, 상기 서버(202)로부터 상기 디코더(208,206)로 전송되는 이미지의 순서를 결정하기 위한 수단을 포함하며,
    상기 디바이스는 제1항 내지 제9항 중 어느 한 항에 따른 방법을 구현하기에 적합한 것인 디지털 이미지 처리 디바이스.
  11. 컴퓨터 프로그램 제품으로서,
    상기 프로그램이 컴퓨터에서 실행되는 경우, 제1항 내지 제9항 중 어느 한 항에 따른 디지털 이미지 처리 방법의 단계를 실행하기 위한 프로그램 코드 명령을 포함하는 컴퓨터 프로그램 제품.
KR1020057001379A 2002-07-26 2003-07-09 트릭 플레이 방법 KR20050026966A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0209788A FR2842982B1 (fr) 2002-07-26 2002-07-26 Procede et dispositif de traitement d'images numeriques
FR02/09788 2002-07-26

Publications (1)

Publication Number Publication Date
KR20050026966A true KR20050026966A (ko) 2005-03-16

Family

ID=30011615

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020057001379A KR20050026966A (ko) 2002-07-26 2003-07-09 트릭 플레이 방법

Country Status (9)

Country Link
US (1) US20060050792A1 (ko)
EP (1) EP1525561A2 (ko)
JP (1) JP2005534259A (ko)
KR (1) KR20050026966A (ko)
CN (1) CN1669299A (ko)
AU (1) AU2003250028A1 (ko)
FR (1) FR2842982B1 (ko)
MX (1) MXPA05001063A (ko)
WO (1) WO2004013813A2 (ko)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000022820A1 (en) * 1998-10-09 2000-04-20 Sarnoff Corporation Method and apparatus for providing vcr-type controls for compressed digital video sequences

Also Published As

Publication number Publication date
EP1525561A2 (en) 2005-04-27
AU2003250028A1 (en) 2004-02-23
JP2005534259A (ja) 2005-11-10
FR2842982A1 (fr) 2004-01-30
FR2842982B1 (fr) 2005-03-04
US20060050792A1 (en) 2006-03-09
WO2004013813A3 (en) 2004-07-22
WO2004013813A2 (en) 2004-02-12
AU2003250028A8 (en) 2004-02-23
CN1669299A (zh) 2005-09-14
MXPA05001063A (es) 2005-04-08

Similar Documents

Publication Publication Date Title
KR100476781B1 (ko) 캐싱기법을 이용한 ｍｐｅｇ-4 시스템 단말의 제어방법
US7342967B2 (en) System and method for enhancing performance of personal video recording (PVR) functions on hits digital video streams
US20090282444A1 (en) System and method for managing the presentation of video
EP1239674A2 (en) Method and apparatus for recording broadcast data
EP1329101A2 (en) Trick-mode processing for digital video
US5739862A (en) Reverse playback of MPEG video
US9055272B2 (en) Moving image reproduction apparatus, information processing apparatus, and moving image reproduction method
US20140086564A1 (en) Decoding interdependent frames of a video for display
CN110582012A (zh) 视频切换方法、视频处理方法、装置及存储介质
JP2003111048A (ja) コンテンツ再生のためのサーバ及びプログラム
JP4322944B2 (ja) 映像再生装置、映像再生方法及び映像再生処理用プログラム
US8300701B2 (en) Offspeed playback in a video editing system of video data compressed using long groups of pictures
US7620293B2 (en) Method and apparatus for controlling a bit rate of digital video data
KR20050026966A (ko) 트릭 플레이 방법
KR100236981B1 (ko) 동영상 스트림의 고속 전후진 제어 방법
US8923689B2 (en) Image processing apparatus and method
CN114513658B (zh) 一种视频加载方法、装置、设备及介质
JP2009124521A (ja) 映像再生装置
JPH09186967A (ja) 動画処理方法
JP2007122502A (ja) フレームバッファ管理プログラム、プログラム記憶媒体、および管理方法。
US7426217B2 (en) Method for transmitting data by an audio and video playback system
CN112887755A (zh) 用于播放视频的方法和装置
JP2001320653A (ja) 画像復号装置及び画像復号方法
EP3300383A1 (en) Method for converting a slideshow into a video
WO2013165624A1 (en) Mechanism for facilitating cost-efficient and low-latency encoding of video streams

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid