KR20040077443A - 암호화한 압축 화상 데이터를 배신하는 스트리밍 시스템및 그 스트리밍 방법 - Google Patents

암호화한 압축 화상 데이터를 배신하는 스트리밍 시스템및 그 스트리밍 방법 Download PDF

Info

Publication number
KR20040077443A
KR20040077443A KR10-2003-7012699A KR20037012699A KR20040077443A KR 20040077443 A KR20040077443 A KR 20040077443A KR 20037012699 A KR20037012699 A KR 20037012699A KR 20040077443 A KR20040077443 A KR 20040077443A
Authority
KR
South Korea
Prior art keywords
stream data
data
packet
block size
predetermined
Prior art date
Application number
KR10-2003-7012699A
Other languages
English (en)
Other versions
KR100917513B1 (ko
Inventor
게이꼬 다다
류지 이시구로
모또마사 후따가미
Original Assignee
소니 가부시끼 가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 가부시끼 가이샤 filed Critical 소니 가부시끼 가이샤
Publication of KR20040077443A publication Critical patent/KR20040077443A/ko
Application granted granted Critical
Publication of KR100917513B1 publication Critical patent/KR100917513B1/ko

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2347Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/6437Real-time Transport Protocol [RTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23895Multiplex stream processing, e.g. multiplex stream encrypting involving multiplex stream encryption
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4381Recovering the multiplex stream from a specific network, e.g. recovering MPEG packets from ATM cells
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4385Multiplex stream processing, e.g. multiplex stream decrypting
    • H04N21/43853Multiplex stream processing, e.g. multiplex stream decrypting involving multiplex stream decryption
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/24Systems for the transmission of television signals using pulse code modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/167Systems rendering the television signal unintelligible and subsequently intelligible
    • H04N7/1675Providing digital key or authorisation information for generation or regeneration of the scrambling sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

본 발명은, 압축 부호화된 화상 데이터를 암호화하여 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 배신하는 스트리밍 시스템으로서, 이 시스템에 이용되는 스트리밍 서버는 각 GOP의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화된 스트림 데이터를, RTP 패킷 단위로 클라이언트 단말기로 송신한다. 이 때, RTP 패킷마다 송신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 전후의 스트림 데이터의 일부를 RTP 헤더의 확장 영역에 저장한다. 또한, 부가된 전 부가 데이터 및/또는 후 부가 데이터의 사이즈 정보에 대해서도, 확장 영역에 저장한다. 이 스트리밍 서버는 암호화에 의한 사이즈의 증가를 억제하여, 재암호화없이, 리얼 타임 재생과 다운로드 재생과의 양방을 서포트할 수 있게 한다.

Description

암호화한 압축 화상 데이터를 배신하는 스트리밍 시스템 및 그 스트리밍 방법{STREAMING SYSTEM FOR DISTRIBUTING ENCRYPTED COMPRESSED IMAGE DATA AND STREAMING METHOD THEREOF}
현재, 인터넷 상에서의 영상(비디오) 및 음성(오디오) 데이터의 전송에는 다운로드형 전송 방식과 스트림형 전송 방식이 있다. 이 다운로드형 전송 방식에서는, 배신 서버로부터 송신된 영상 파일은 단말기측에서 일단 축적되고, 그 후 영상 파일의 데이터(영상 데이터)가 재생된다. 이 때문에, 이 방식에서는 파일의 전송이 완료될 때까지는 단말기측에서 데이터의 재생을 행할 수 없다. 다운로드형 전송 방식은 영상 데이터 등의 장시간 재생에 이용하기 위해서는 부적합하다.
한편, 스트림형 전송 방식에서는 스트리밍 서버로부터 단말기로의 전송이 행해지고 있는 동안에도 수신한 데이터의 재생이 행해진다. 이 스트림형 전송 방식은, IETF(Internet Engineering Task Force)의 RFC1889에서 규정되어 있는 RTP(Real-Time Transport Protocol)라고 불리는 프로토콜을 이용하는 것이 주류로 되어 있다.
그런데, 최근에는 암호화 통신에 의한 시큐러티 대책으로의 요망도 높아지고 있어, 예를 들면 단순히 특정한 어플리케이션에 의한 통신만을 암호화하는 것이 아니라, 호스트로부터 송신되는 각종 통신을 IP(Internet Protocol) 레벨로 암호화하는 IPSec(IPSecurity Protocol) 등이 제안되어 있다. 이 IPSec는 IETF가 표준화를 진행하고 있는 암호화 통신의 표준 규격이다.
이 IPSec에서는 블록 사이즈에 대응한 패딩이나 패딩 사이즈 등을 페이로드 데이터에 부가함으로써 암호화 통신을 행하고 있기 때문에, 송신측 및 수신측의 통신 부분에서의 암호화, 복호화가 필요해지고, 현상의 배신 툴로의 실장이 곤란하다고 하는 문제가 있다.
패딩이나 패딩 사이즈를 부가하는 경우, 실제 데이터보다도 암호화 데이터의 사이즈가 커지고, 암호화 전후에서 사이즈의 변화가 일어난다. 이 때문에, 스트림의 비트 레이트나 파일 사이즈가 변화한다고 하는 문제가 있었다. 또, 스트리밍으로 송신하는 데이터수가 크게 되기 때문에, 스트리밍의 퍼포먼스가 저하한다는 문제가 있다.
MPEG4(Moving Picture experts Group4)로 압축 부호화된 화상 데이터를 암호화하여 스트리밍하는 것도 생각된다. 여기서, MPEG4에서는 스트리밍 시에는 비디오 패킷 단위로 송신을 행하는 것이 RFC3016에서 규정되어 있다. 그러나, 비디오 패킷의 이음매와 암호화 블록의 이음매가 일치하지 않기 때문에, 비디오 패킷 단위로 완결하는 암호화를 할 수 없고, 전송 오류 등에 의해서 비디오 패킷이 소실된 경우에는 그 비디오 패킷뿐만 아니라 전후의 비디오 패킷까지 복호할 수 없게 된다는 문제가 있다.
<발명의 개시>
본 발명의 목적은, 상술한 바와 같은 종래 제안되고 있는 데이터 전송 방법의 문제점을 해결 할 수 있는 스트리밍 시스템 및 그 스트리밍 방법을 제공하는 것에 있다.
본 발명의 다른 목적은 암호화에 의한 사이즈의 증가를 억제하고, 스트림 시와 다운로드 재생 시와의 쌍방에 대응 가능한 스트리밍 시스템 및 그 스트리밍 방법, 스트리밍 서버 및 그 데이터 배신 방법, 크라이아지트 단말기 및 그 데이터 복호 방법, 오더링 장치 및 그 오더링 방법, 및 프로그램 및 기록 매체를 제공하는 데에 있다.
본 발명에 따른 스트리밍 시스템은, 화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를 암호화할 때에, 스트림 데이터의 소정 단위마다 이 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않은 암호화 장치와, 소정의 파일 형식이 되도록, 암호화된 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 파일을 작성하는 오더링 장치와, 오더링 장치에 의해 작성된 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 배신하는 스트리밍 서버와, 스트리밍 서버로부터 암호화된 스트림 데이터를 수신하고, 스트림 데이터 중, 암호화되어 있는 부분을 복호화하고, 원래의 화상 데이터로 복호하는 클라이언트 단말기를 구비한다.
여기서, 스트리밍 서버는 패킷화 제어 정보에 기초하여, 스트림 데이터와 함께, 패킷마다 배신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하고, 패킷 단위로 상기 클라이언트 단말기에 배신할 수 있다.
스트리밍 서버는 스트림 데이터와 함께, 패킷마다 배신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 제1 패킷화 방법과, 소정 단위마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화하는 제2 패킷화 방법을 네트워크의 통신 상태에 따라 전환하고, 패킷 단위로 클라이언트 단말기에 배신하도록 해도 된다.
스트리밍 서버는 소정 단위마다 암호화 블록 사이즈의 정수배가 되도록 패딩되고, 암호화된 스트림 데이터를 패킷화 제어 정보에 기초하여 스트림 데이터와 함께, 패킷마다 배신되는 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하여, 패킷 단위로 상기 클라이언트 단말기에 배신할 수 있다.
본 발명의 또 다른 목적, 본 발명에 의해 얻어지는 구체적인 이점은 이하에 있어서 도면을 참조하여 설명되는 실시 형태의 설명으로부터 한층 명백해질 것이다.
본 발명은 압축 부호화된 화상 데이터를 암호화하여 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 배신하는 스트리밍 시스템 및 그 스트리밍 방법, 스트리밍 서버 및 그 데이터 배신 방법, 클라이언트 단말기 및 그 데이터 복호 방법, 오더링 장치 및 그 오더링 방법, 및 프로그램 및 기록 매체에 관한 것이다.
본 출원은 일본국에서 2002년 1월 30일에 출원된 일본 특허 출원 번호 2002-022257을 기초로 하여 우선권을 주장하는 것으로, 이 출원은 참조로서 본 출원에 원용된다.
도 1은 본 발명이 적용된 콘텐츠 배신 시스템의 개념 구성을 설명하는 도면.
도 2는 콘텐츠 배신 시스템의 MPEG4 부호화부에서 생성된 스트림 데이터의 구조를 설명하는 도면.
도 3A 내지 도 3C는 비디오 패킷을 설명하는 도면으로, 도 3A는 비디오 패킷의 구조를 도시하고, 도 3B는 비디오 패킷 헤더 정보의 상세를 도시하고, 도 3C는 비디오 패킷 헤더 내의 HEC 플래그가 1인 경우의 비디오 패킷 헤더 정보의 상세를 도시하는 도면.
도 4는 본 발명에 이용되는 암호화 방법에 대하여 설명하는 도면.
도 5는 본 발명에 따른 콘텐츠 배신 시스템의 오더링부에서 작성된 파일을 설명하는 도면.
도 6은 RFC3016에서의 RTP 패킷 및 비디오 패킷을 설명하는 도면.
도 7은 RTP 패킷을 상세히 설명하는 도면이다.
도 8A 및 도 8B는 본 발명에서 이용되는 RTP 패킷을 설명하는 도면으로, 도 8A는 GOP 도중의 RTP 패킷의 예를 도시하고, 도 8B는 GOP 최후의 RTP 패킷의 예를 도시하는 도면.
도 9는 본 발명에 따른 RTP 패킷의 다른 예를 설명하는 도면.
도 10은 본 발명에 따른 콘텐츠 배신 시스템의 클라이언트 단말기의 개략 구성을 설명하는 도면.
도 11은 본 발명에 따른 클라이언트 단말기의 RTP 역 패킷화부의 동작을 설명하는 흐름도.
<발명을 실시하기 위한 최량의 형태>
이하, 본 발명의 실시 형태를 도면을 참조하여 상세히 설명한다. 이 실시 형태는, 본 발명을 MPEG4(Moving Picture Experts Group4)로 압축 부호화된 화상 데이터를 암호화하고, 클라이언트 단말기에 대하여 리얼타임으로 배신하는, 또는 클라이언트 단말기에 대하여 다운로드 가능하게 하는 콘텐츠 배신 시스템에 적용한 것이다. 또, 본 발명은, 예를 들면 MPEG4 오디오로 압축 부호화된 음성 데이터에 대해서도 적용할 수 있지만, 이하에서는, 특히 화상 데이터에 대해서만 설명한다.
본 발명이 적용된 콘텐츠 배신 시스템의 개념 구성을 도 1을 참조하여 설명한다.
본 발명이 적용된 콘텐츠 배신 시스템(1)은, 도 1에 도시한 바와 같이, MPEG4 부호화부(10)와, 암호화부(11)와, 오더링부(12)와, 스트리밍 서버(13)와, 배신 서버(14)와, 기록부(20)와, 클라이언트 단말기(30)에 의해 구성된다. 또, 이 콘텐츠 배신 시스템(1)을 스트리밍 시스템으로서 구성하는 경우에는 배신 서버(14)를 생략할 수 있다. 이 스트리밍 기술로서는, Apple사의 QuickTime(등록상표) 등을 이용할 수 있다.
도 1에서, 도시하지 않은 카메라, VTR 등의 동화상 입력 장치로부터 입력되고, 디지털 신호로 변환된 화상 신호는 우선 MPEG4 부호화부(10)에 입력된다.
MPEG4 부호화부(10)는 DCT 변환, 양자화, 가변 길이 부호화, 역양자화, 역 DCT 변환, 움직임 보상 등을 이용하여, 화상 신호를 MPEG4 압축 부호화하고, 스트림 데이터를 생성한다. MPEG4 부호화부(10)는 생성한 스트림 데이터를 암호화부(11)에 공급한다.
여기서, MPEG4 부호화부(10)에서 생성된 스트림 데이터는 간단하게는 도 2에 도시한 바와 같은 구조로 되어 있다. 도 2에 도시한 바와 같이, MPEG4 화상 압축 정보는 랜덤 액세스를 행하기 때문에 시간 정보 등을 포함하는 GOV(Group of VOP)가 복수 존재하여 구성되고, 각 GOV는 복수의 VOP(Video Object Plane)로 이루어진다. 또, 이 VOP는 프레임에 상당하는 것이다.
VOP는 몇몇의 매크로 블록으로 이루어지는 비디오 패킷(VP; Video Packet)이라고 불리는 단위로 구획되어 있다. 여기서 도 3A에 도시한 바와 같이, 각 비디오 패킷 중, 프레임(VOP)의 최초의 비디오 패킷에는 프레임 헤더 정보인 VOP 헤더(VOP header)가 부가되고, 프레임의 최초 이외의 비디오 패킷에는 비디오 패킷 헤더 정보(VP header)가 부가되어 있다. 비디오 부호열의 각 비디오 패킷의 선두에는, 동기 회복을 도모하기 위한 마커(RM: Resynchronization marker)가 부가된다.
비디오 패킷 헤더 정보의 상세를, 도 3B에 도시한다. 도 3B에 도시한 바와 같이, 비디오 패킷 헤더에는 HEC(Header Extension Code)라는 플래그가 포함되어 있고, 이 플래그가 "1"인 경우에는 도 3C에 도시한 바와 같이, VOP 헤더에 포함되는 타임 코드 MTB 및 VTI(타임 스탬프) 정보와, 프레임의 부호화에 따른 정보인VOP의 부호화 모드 정보 VCP, 인트라 DC용 VLC 케이블 전환 정보 IDVT 및 움직임 벡터 범위 정보 VFF 등의 정보가 비디오 패킷 헤더에도 부가된다.
도 1로 되돌아가서, 암호화부(11)는 MPEG4 부호화부(10)로부터 공급된 스트림 데이터를 소정의 암호화 블록마다 암호화한다.
이 때, 도 4에 도시한 바와 같이, 각 GOV 마다의 암호화 블록 사이즈로 나누어 떨어지지 않은 나머지의 데이터가 생기는 경우가 있다. 종래, 이러한 경우에는 각 GOV의 데이터 사이즈가 암호화 블록 사이즈의 정수배가 되도록 패딩을 부가하였지만, 본 발명에서는 이러한 나머지의 데이터에 대해서는 암호화를 행하지 않고, 생(生) 데이터의 상태 그대로로 한다. 즉, 암호화 블록 사이즈를 n 바이트로 하였을 때, 각 GOV의 최초의 n*m 바이트(m은, 0 이상의 정수)에 대해서만 암호화를 행하고, 나머지의 0 내지 (n-1) 바이트에 대해서는 생 데이터로 한다. 이에 의해, 데이터 사이즈를 증대시키지 않고 암호화할 수 있어, 암호화 전후에 데이터 사이즈가 변화하지 않았다.
오더링부(12)는 도 5에 도시한 바와 같이, 암호화부(11)에서 암호화된 스트림 데이터(102)에 헤더 정보(101)와 패킷화 제어 정보 등이 기재된 SDP(Session Description Protocol) 파일(104)을 포함하는 부가 정보(103)를 부가하고, 소정의 파일 형식의 파일(100)을 작성하여, 기록부(20)에 기록한다. 오더링부(12)는 그 파일(100)을 적절하게 추출하고, 스트리밍 서버(13) 또는 배신 서버(14)에 공급한다. 또, 이 파일(100)을 도시하지 않은 기록 매체에 기록하고, 그 기록 매체를 스트리밍 서버(13) 또는 배신 서버(14)에 공급하도록 해도 된다.
스트리밍 서버(13)는 패킷화 제어 정보에 기초하여 공급된 파일(100)의 암호화 스트림 데이터(102)를 패킷화하고, RTP 및 RTSP(Real-Time Streaming Protocol)에 따라서, 패킷마다 데이터를 클라이언트 단말기(30)에 배신하고, 리얼타임 재생시킨다.
한편, 배신 서버(14)는 공급된 파일(100)을 클라이언트 단말기(30)에 대하여 다운로드 가능하게 한다.
그런데, RFC3016에서는 도 6에 도시한 바와 같이, 1 이상의 비디오 패킷을 통합하여 1개의 RTP 패킷으로서 송신하는 것이 정의되어 있다. 이 RTP 패킷의 예를 도 7에 도시한다. 또, 도 7의 예에서는 RTP 패킷을 32 비트마다 구획하여 배열하여 도시하고 있고, 횡축의 00∼31이 32 비트로 구분된 비트 위치를 나타내고 있다.
도 7에서, RTP header와 도시되어 있는 V, P, X…로부터 CSRC까지가 도 6에 도시한 RTP 헤더에 상당한다. 도 7에서, X는 확장 비트를 나타내고, X=1일 때에는 RTP 헤더의 최후에 확장 영역이 부가된다. 또한, M은 마커 비트를 나타내고, RTP 패킷에 각 VOP 최후의 비디오 패킷이 포함되는 경우에만, M=1로 된다.
스트림 데이터는 1 이상의 비디오 패킷마다 RTP 페이로드(RTP Payload)에 취입된다. 또, RTP 패킷의 비트수가 32 비트의 배수가 아닌 경우에는, RTP 페이로드의 최후에 RTP 패딩(RTP Padding)이라고 불리는 비트열을 추가하여, RTP 패킷이 32 비트의 배수가 되도록 해도 된다.
여기서, RFC3016에서는 비디오 패킷의 이음매와 암호화의 단위인 암호화 블록의 이음매가 일치하지 않고, 비디오 패킷 단위로 완결하는 암호화를 할 수 없다. 이 때문에, 전송로 상에서 패킷 손실 등의 전송로 오류가 생기면, 손실된 비디오 패킷뿐만 아니라, 그 전후의 비디오 패킷까지 복호할 수 없게 된다는 문제가 있다.
그래서, 본 발명에 따른 스트리밍 서버(13)는 RTP 헤더 내의 확장 영역을 이용하여, 복호화에 필요한 암호화 블록 경계선의 데이터를 부가하여 패킷화한다. 자세하게는, 도 8A에 도시한 바와 같이, 암호화 블록의 경계선이 되는 전후의 비디오 패킷의 데이터를 확장 영역에 부가하고, 패킷마다 송신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되게 된다. 또한, 부가된 전의 비디오 패킷에서의 데이터의 사이즈(전 부가 데이터 사이즈)와 부가된 후의 비디오 패킷에서의 데이터의 사이즈(후 부가 데이터 사이즈)와의 정보에 대해서도, 확장 영역에 부가한다.
GOV의 최후의 생 데이터는, 도 8B에 도시한 바와 같은 형태로 패킷화되지만, 전에만 암호화 블록 경계선의 데이터를 부가함으로써, 암호화 블록 길이로 나누어 떨어지지 않은 데이터가 생 데이터인 것을 알 수 있어, 생 데이터의 사이즈를 부가하지 않고 송신할 수 있다.
이와 같이, RTP 패킷의 확장 헤더 영역에 복호화에 필요한 암호화 블록 경계선의 데이터를 부가하여 송신함으로써, 스트리밍 시에 패킷이 손실된 경우에도 데이터를 복호할 수 있다.
또, 패킷의 손실이 버스트적으로 발생하는 환경 하에서 스트리밍을 행하는 경우에는, 상술한 바와 같은 비디오 패킷의 정수배를 송신 단위로 하는 것이 아니라, 도 9에 도시한 바와 같이 암호화 블록 사이즈의 정수배로 스트림 데이터를 구획하여 송신하도록 해도 된다. 즉, 예를 들면 암호화 블록 사이즈의 1배, m 배를 송신 단위로 하여 1개의 RTP 패킷으로 한다. 이 때, GOV의 최후의 생 데이터에 대해서는, 예를 들면 생 데이터 직전에 있는 암호화 블록 사이즈의 n배의 스트림 데이터에 생 데이터를 부가하여 1개의 RTP 패킷으로 한다. 이 경우, 암호화 블록 사이즈로 나누어 떨어지지 않은 나머지의 데이터가 생 데이터인 것을 나타낸다.
또한, 에러 레이트 등의 전송로의 통신 상황에 따라, 상기한 2 종류의 송신 방법을 전환하도록 하는 것도 가능하다. 이 콘텐츠 배신 시스템(1)에서는, 상술한 바와 같이, 스트림 데이터와는 별도로 패킷화 제어 정보 등의 부가 정보가 파일에 부가되어 있기 때문에, 스트림 데이터에 의존하지 않고, 스트림 데이터의 송신 단위를 변경할 수 있다.
이상과 같이 하여 생성된 RTP 패킷이 클라이언트 단말기(30)에 리얼 타임으로 배신된다.
그래서, 이하에서는, 클라이언트 단말기(30)에서의 복호 재생 방법에 대하여 설명하지만, 다운로드 후의 재생에 대해서는 통상의 재생 수순과 마찬가지이기 때문에, 설명을 생략하고, 스트리밍을 행하는 경우의 클라이언트 단말기(30)에서의 리얼타임 재생 방법에 대해서만 설명한다.
도 10에 도시한 바와 같이, 클라이언트 단말기(30)는 RTSP 송수신부(31)와, RTP 역 패킷화부(32)와, 암호 복호화부(33)와, MPEG4 복호부(34)에 의해 구성된다. 또, 도 10에서는 리얼타임 재생의 설명에 필요한 부분만을 나타내고 있다.
RTSP 송수신부(31)는 우선 화상 데이터의 요청을 RTSP에 따라 스트리밍 서버(13)에 공급하고, 스트리밍 서버(13)로부터 상술한 SDP 파일을 수취한다. RTSP 송수신부(31)는 그 SDP 파일에 기초하여 처리 가능한지의 여부를 판단하고, 재생 커맨드를 스트리밍 서버(13)에 공급한다. 또한, RTSP 송수신부(31)는 정지, 빨리 감기, 되감기, 지정한 위치로부터의 재생 등의 커맨드를 RTSP에 따라 스트리밍 서버(13)에 공급할 수 있다. 이에 의해, 클라이언트 단말기(30)측에서 스트리밍 서버(13)의 데이터를 조작할 수 있다.
RTP 역 패킷화부(32)는 RTSP 송수신부(31)로부터의 재생 커맨드에 따라 RTP 패킷 단위로 송신된 스트림 데이터를, 이하에 설명한 바와 같이 VOP 단위로 통합하여, 암호 복호화부(33)에 공급한다.
여기서, 클라이언트 단말기(30)의 RTP 역 패킷화부(32)의 동작에 대하여, 도 11의 흐름도를 이용하여 설명한다.
우선, 단계 S1에서 RTP 패킷 데이터를 취득하고, 단계 S2에서 전의 RTP 패킷 데이터와 동일한 타임 스탬프인지의 여부가 판별된다. 단계 S2에서 전의 RTP 패킷 데이터와 동일한 타임 스탬프인 경우에는 단계 S3으로 진행하고, 그렇지 않은 경우에는 단계 S7로 진행한다.
단계 S3에서는, 전의 RTP 패킷 데이터의 패킷이 손실되어 있는지의 여부가 판별된다. 단계 S3에서, 전의 RTP 패킷 데이터의 패킷이 손실하고 있는 경우에는 단계 S4로 진행하고, 그렇지 않은 경우에는 단계 S5로 진행한다.
단계 S4에서는 RTP 헤더를 제외하고, 상술한 전 부가 데이터와 후 부가 데이터를 추출하여 부가한다. 그리고, 이 데이터를 버퍼에 추가하여 단계 S6으로 진행한다.
단계 S5에서는 RTP 헤더를 제외하고, 상술한 후 부가 데이터를 추출하여 부가한다. 그리고, 이 데이터를 버퍼에 추가된 직전의 데이터의 확장 부분으로부터 덧씌우기 추가하여 단계 S6으로 진행한다.
단계 S6에서는 마커 비트가 1인지의 여부가 판별된다. 단계 S6에서 마커 비트가 1인 경우에는 단계 S7로 진행하고, 그렇지 않은 경우에는 단계 S1로 되돌아간다.
단계 S7에서는 버퍼에 축적되어 있는 데이터를 암호 복호화부(33)에 공급함과 함께 버퍼를 비어 있게 한다.
또, 단계 S7에서는 단계 S2에서 전의 RTP 패킷 데이터와 동일한 타임 스탬프가 아니라고 판별된 경우에도 암호 복호화부(33)에 버퍼의 데이터를 건네고, 버퍼가 비어 있게 된다. 이와 같이 타임 스탬프를 비교함으로써, 예를 들면 마커 비트 M=1로 되는 각 VOP의 최후의 비디오 패킷을 포함하는 RTP 패킷이 손실된 경우에도, VOP의 끝을 판단할 수 있다.
이와 같이 하여, 각 VOP 마다 암호 복호화부(33)에 공급된 데이터는 암호 복호화부(33)에서 복호화된 후, MPEG4 복호부(34)에서 원래의 화상 신호로 복호되어 리얼타임으로 재생된다.
이상 설명한 바와 같이, 본 발명에 따른 콘텐츠 배신 시스템(1)에 따르면, 각 GOP의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않음으로써, 암호화에 의한 사이즈의 증가를 억제할 수 있다.
또한, 패킷마다 배신되는 스트림 데이터의 사이즈가 암호화블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화함으로써, 또는 GOP 마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화함으로써, 재암호화없이 리얼타임 재생과 다운로드 재생과의 양방이 서포트 가능하게 된다.
또, 본 발명은, 상술한 실시 형태에만 한정되는 것은 아니고, 본 발명의 요지를 일탈하지 않은 범위에서 여러가지의 변경이 가능한 것은 물론이다.
예를 들면, 상술한 실시 형태에서는, 각 GOP마다 암호화 블록 사이즈로 나누어 떨어지지 않은 말미의 데이터의 암호화를 행하지 않고, 생 데이터로 하는 것으로 하여 설명하였지만, 이것에 한정되는 것은 아니고, 각 GOP마다 암호화 블록 사이즈로 나누어 떨어지지 않은 말미 데이터에 패딩을 붙여서 암호화하도록 해도 상관없다. 이 경우에도 패킷마다 배신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화함으로써, 패킷이 손실된 경우에도 데이터가 복호 가능하게 된다.
상술한 실시 형태에서는, 각 GOP마다 암호화 블록의 경계선이 되는 전후의 비디오 패킷의 데이터를 확장 영역에 부가하는 것으로서 설명하였지만, 이것에 한정되는 것이 아니고, 패킷마다 송신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 예를 들면 전후의 비디오 패킷의 데이터를 RTP 페이로드에 취입하도록 해도 된다.
또한, 각 GOP마다 한정되지 않고, 각 VOP마다 암호화 블록 사이즈로 나누어 떨어지지 않은 데이터의 암호화를 행하지 않고, 생 데이터로 해도 된다.
상술한 실시 형태에서는, 하드웨어의 구성으로서 설명하였지만, 이것에 한정되는 것은 아니고, 오더링부(12), 스트리밍 서버(13) 및 클라이언트 단말기(30)의 처리를, 각각 CPU(Central Processing Unit)에 컴퓨터 프로그램을 실행시킴으로써 실현하는 것도 가능하다. 이 경우, 그 컴퓨터 프로그램은 기록 매체에 기록하여 제공할 수 있다.
또한, 상술한 실시 형태에서는 MPEG4로 압축 부호화된 화상 데이터에 대해서만 설명하였지만, 이것에 한정되는 것은 아니고, 예를 들면 MPEG4 오디오로 압축 부호화된 음성 데이터에 대해서도 적용 가능하다.
즉, 음성 데이터에 대해서도 규격에 의해 여러 계층 구조가 생각되지만, 소정의 단위마다 암호화 블록 사이즈로 나누어 떨어지지 않는 말미의 데이터의 암호화를 행하지 않도록 함으로써, 화상 데이터인 경우와 마찬가지의 효과를 발휘할 수 있다. 또한, MPEG4 오디오에서는 MPEG4 audioMuxElement 단위 또는 그것을 분할한 단위로 RTP 페이로드에 취입되지만, 이 경우에도 패킷마다 배신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화함으로써, 패킷이 손실된 경우에도 데이터가 복호 가능하게 된다.
또, 본 발명은 도면을 참조하여 설명한 상술한 실시예에 한정되는 것은 아니고, 첨부한 청구의 범위 및 그 주지를 일탈하지 않고, 여러가지 변경, 치환 또는 그 동등한 것을 행하는 것이 가능하는 것은 당업자에게 있어서 분명하다.
상술한 바와 같이, 본 발명에 따른 스트리밍 시스템은, 화상 데이터 및/또는 음성 데이터를 압축 부호화 하여 얻은 스트림 데이터를 암호화할 때에, 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않은 암호화 장치와, 소정의 파일 형식이 되도록 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 파일을 작성하는 오더링 장치와, 오더링 장치에 의해 작성된 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 배신하는 스트리밍 서버와, 스트리밍 서버로부터 암호화된 스트림 데이터를 수신하고, 스트림 데이터 중, 암호화되어 있는 부분을 복호화하여, 원래의 화상 데이터로 복호하는 클라이언트 단말기를 구비한다.
여기서, 스트리밍 서버는 패킷화 제어 정보에 기초하여 스트림 데이터와 함께, 패킷마다 배신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하고, 패킷 단위로 상기 클라이언트 단말기에 배신할 수 있다.
또한, 스트리밍 서버는, 스트림 데이터와 함께, 패킷마다 배신된 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 제1 패킷화 방법과,소정 단위마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화하는 제2 패킷화 방법을, 네트워크의 통신 상태에 따라 전환하여, 패킷 단위로 상기 클라이언트 단말기에 배신하도록 해도 된다.
스트리밍 서버는, 소정 단위마다 암호화 블록 사이즈의 정수배가 되도록 패딩되고, 암호화된 스트림 데이터를 패킷화 제어 정보에 기초하여 상기 스트림 데이터와 함께, 패킷마다 배신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하고, 패킷 단위로 상기 클라이언트 단말기에 배신할 수 있다.
이러한 스트리밍 시스템에 따르면, 스트림 데이터의 소정 단위마다 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않음으로써, 스트림 데이터의 암호화에 있어서 사이즈의 증가를 억제할 수 있다.
암호화된 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성함으로써, 스트리밍 재생 시에는 그 패킷화 제어 정보에 기초하여 파일을 패킷화하고, 다운로드 재생 시에는 그 파일을 다운로드 가능하게 할 수 있어, 스트리밍 재생과 다운로드 재생과의 양방을 서포트할 수 있다.
패킷화 시에, 패킷마다 배신되는 스트림 데이터의 사이즈가 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화함으로써, 또는 소정 단위마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화함으로써, 패킷이 손실된 경우에도 데이터의 복호가 가능하게 된다.

Claims (88)

  1. 화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를 암호화할 때에, 상기 스트림 데이터의 소정 단위마다 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않은 암호화 장치와,
    소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 파일을 작성하는 오더링 장치와,
    상기 오더링 장치에 의해서 작성된 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 배신하는 스트리밍 서버와,
    상기 스트리밍 서버로부터 암호화된 상기 스트림 데이터를 수신하고, 상기 스트림 데이터 중 암호화되어 있는 부분을 복호화하고, 원래의 화상 데이터로 복호하는 클라이언트 단말기
    를 구비하는 것을 특징으로 하는 스트리밍 시스템.
  2. 제1항에 있어서,
    상기 스트림 데이터는 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 스트리밍 시스템.
  3. 제2항에 있어서,
    상기 소정 단위는 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 스트리밍 시스템.
  4. 제3항에 있어서,
    상기 랜덤 액세스 가능한 단위는 상기 화상 데이터의 부호화가 완결되는 복수의 상기 프레임으로 이루어지는 그룹인 것을 특징으로 하는 스트리밍 시스템.
  5. 제1항에 있어서,
    상기 스트리밍 서버는 상기 패킷화 제어 정보에 기초하여, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하고, 패킷 단위로 상기 클라이언트 단말기에 배신하는 것을 특징으로 하는 스트리밍 시스템.
  6. 제1항에 있어서,
    상기 스트리밍 서버는 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화하는 제2 패킷화 방법을 네트워크의 통신 상태에 따라 전환하고, 패킷 단위로 상기 클라이언트 단말기에 배신하는 것을 특징으로 하는 스트리밍 시스템.
  7. 암호화 장치가 화상 데이터 및/또는 음성 데이터를 압축 부호화 하여 얻은 스트림 데이터를 암호화할 때에, 상기 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행함과 함께, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않고,
    오더링 장치가 소정의 파일 형식이 되도록 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고,
    스트리밍 서버가 상기 오더링 장치에 의해서 작성된 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 배신하고,
    클라이언트 단말기가 상기 스트리밍 서버로부터 암호화된 상기 스트림 데이터를 수신하고, 상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하여, 원래의 화상 데이터로 복호하는
    것을 특징으로 하는 스트리밍 방법.
  8. 제7항에 있어서,
    상기 스트림 데이터는 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 스트리밍 방법.
  9. 제8항에 있어서,
    상기 소정 단위는, 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 스트리밍 방법.
  10. 제9항에 있어서,
    상기 랜덤 액세스 가능한 단위는, 상기 화상 데이터의 부호화가 완결되는 복수의 상기 프레임으로 이루어지는 그룹인 것을 특징으로 하는 스트리밍 방법.
  11. 제7항에 있어서,
    상기 스트리밍 서버는, 상기 패킷화 제어 정보에 기초하여, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하고, 패킷 단위로 상기 클라이언트 단말기에 배신하는 것을 특징으로 하는 스트리밍 방법.
  12. 제7항에 있어서,
    상기 스트리밍 서버는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배로 패킷화하는 제2 패킷화 방법을, 네트워크의 통신 상태에 따라 전환하여, 패킷 단위로 상기 클라이언트 단말기에 배신하는 것을 특징으로 하는 스트리밍 방법.
  13. 화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를, 해당 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화하고, 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 파일을 입력하고, 상기 패킷화 제어 정보에 기초하여 상기 파일을 패킷화하는 패킷화 수단과,
    패킷화된 상기 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 클라이언트 단말기에 배신하는 배신 수단
    을 갖는 것을 특징으로 하는 스트리밍 서버.
  14. 제13항에 있어서,
    상기 스트림 데이터는 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 스트리밍 서버.
  15. 제14항에 있어서,
    상기 소정 단위는 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 스트리밍 서버.
  16. 제14항에 있어서,
    상기 패킷화 수단은 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 것을 특징으로 하는 스트리밍 서버.
  17. 제13항에 있어서,
    상기 패킷화 수단은 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배로 패킷화하는 제2 패킷화 방법을, 네트워크의 통신 상태에 따라 전환하여 패킷화하는 것을 특징으로 하는 스트리밍 서버.
  18. 화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를, 해당 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 파일을 입력하고, 상기 패킷화 제어 정보에 기초하여, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는후의 스트림 데이터의 일부에 대해서도 패킷화하는 패킷화 수단과,
    패킷화된 상기 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 클라이언트 단말기에 배신하는 배신 수단
    을 갖는 것을 특징으로 하는 스트리밍 서버.
  19. 제18항에 있어서,
    상기 패킷화 수단은, 상기 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 상기 파일을 패킷화하는 것을 특징으로 하는 스트리밍 서버.
  20. 화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를, 해당 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화하고, 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 파일을 입력하고, 상기 패킷화 제어 정보에 기초하여 상기 파일을 패킷화하는 패킷화 공정과,
    패킷화된 상기 파일을 소정의 트랜스포트 포로토콜에 의한 네트워크 경유로 클라이언트 단말기에 배신하는 배신 공정
    을 포함하는 것을 특징으로 하는 데이터 배신 방법.
  21. 제20항에 있어서,
    상기 스트림 데이터는, 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 데이터 배신 방법.
  22. 제21항에 있어서,
    상기 소정 단위는, 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 데이터 배신 방법.
  23. 상기 패킷화 공정에서는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장되어 패킷화되는 것을 특징으로 하는 데이터 배신 방법.
  24. 제20항에 있어서,
    상기 패킷화 공정에서는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배로 패킷화하는 제2 패킷화 방법이 네트워크의 통신 상태에 따라 전환되어 패킷화되는 것을 특징으로 하는 데이터 배신 방법.
  25. 화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를, 해당 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 파일을 입력하고, 상기 패킷화 제어 정보에 기초하여, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부에 대해서도 패킷화하는 패킷화 공정과,
    패킷화된 상기 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 클라이언트 단말기에 배신하는 배신 공정
    을 포함하는 것을 특징으로 하는 데이터 배신 방법.
  26. 제25항에 있어서,
    상기 패킷화 공정에서는, 상기 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 상기 파일이 패킷화되는 것을 특징으로 하는 데이터 배신 방법.
  27. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를, 해당 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화하고, 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 파일을 입력하고, 상기 패킷화 제어 정보에 기초하여 상기 파일을 패킷화하는 패킷화 공정과,
    패킷화된 상기 파일을 소정의 트랜스포트 포로토콜에 의한 네트워크 경유로 클라이언트 단말기에 배신하는 배신 공정
    을 포함하는 것을 특징으로 하는 프로그램.
  28. 제27항에 있어서,
    상기 스트림 데이터는, 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 프로그램.
  29. 제28항에 있어서,
    상기 소정 단위는, 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 프로그램.
  30. 제27항에 있어서,
    상기 패킷화 공정에서는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장되어 패킷화되는 것을 특징으로 하는 프로그램.
  31. 제27항에 있어서,
    상기 패킷화 공정에서는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배로 패킷화하는 제2 패킷화 방법이 네트워크의 통신 상태에 따라 전환되어 패킷화되는 것을 특징으로 하는 프로그램.
  32. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램에 있어서,
    화상 데이터에 대하여 예측 부호화에 기초한 화상 처리가 실시된 스트림 데이터를, 해당 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 파일을 입력하고, 상기 패킷화 제어 정보에 기초하여, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 상기 파일을 패킷화하는 패킷화 공정과,
    패킷화된 상기 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로클라이언트 단말기에 배신하는 배신 공정
    을 포함하는 것을 특징으로 하는 프로그램.
  33. 제32항에 있어서,
    상기 패킷화 공정에서는, 상기 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 상기 파일이 패킷화되는 것을 특징으로 하는 프로그램.
  34. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를, 해당 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화하고, 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 파일을 입력하고,
    상기 패킷화 제어 정보에 기초하여 상기 파일을 패킷화하는 패킷화 공정과,
    패킷화된 상기 파일을 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 클라이언트 단말기에 배신하는 배신 공정
    을 포함하는 것을 특징으로 하는 프로그램이 기록된 기록 매체.
  35. 제34항에 있어서,
    상기 스트림 데이터는, 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호한 것인 것을 특징으로 하는 기록 매체.
  36. 제35항에 있어서,
    상기 소정 단위는 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 기록 매체.
  37. 제34항에 있어서,
    상기 패킷화 공정에서는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장되어 패킷화되는 것을 특징으로 하는 기록 매체.
  38. 제34항에 있어서,
    상기 패킷화 공정에서는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배로 패킷화하는 제2 패킷화 방법이, 네트워크의 통신 상태에 따라 전환되어 패킷화되는 것을 특징으로 하는 기록 매체.
  39. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램이 기록된 기록 매체에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터를, 해당 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 파일을 입력하고, 상기 패킷화 제어 정보에 기초하여 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부에 대해서도 패킷화하는 패킷화 공정과,
    패킷화된 상기 파일을 소정의 트랜스포트 포로토콜에 의한 네트워크 경유로 클라이언트 단말기에 배신하는 배신 공정
    을 포함하는 것을 특징으로 하는 프로그램이 기록된 기록 매체.
  40. 제39항에 있어서,
    상기 패킷화 공정에서는, 상기 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 상기 파일이 패킷화되는 것을 특징으로 하는 기록 매체.
  41. 화상 데이터 및/또는 음성 데이터를 압축 부호화하고, 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않은 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고, 상기 패킷화 제어 정보에 기초하여, 패킷 단위로 소정의 트랜스포트 포로토콜에 의한 네트워크 경유로 스트리밍 서버로부터 배신된 해당 패킷을 수신하는 수신 수단과,
    상기 패킷을 역 패킷화하는 역 패킷화 수단과,
    상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하는 암호 복호화 수단과,
    복호화된 상기 스트림 데이터를 원래의 화상 데이터로 복호하는 복호 수단
    을 포함하는 것을 특징으로 하는 클라이언트 단말기.
  42. 제41항에 있어서,
    상기 스트림 데이터는 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 클라이언트 단말기.
  43. 제42항에 있어서,
    상기 소정 단위는 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 클라이언트 단말기.
  44. 제41항에 있어서,
    상기 패킷은 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장된 것을 특징으로 하는 클라이언트 단말기.
  45. 제41항에 있어서,
    상기 패킷은 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화하는 제2 패킷화 방법이 네트워크의 통신 상태에 따라 전환되어 패킷화된 것인 것을 특징으로 하는 클라이언트 단말기.
  46. 화상 데이터 및/또는 음성 데이터를 압축 부호화하고, 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행한 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고, 상기 패킷화 제어 정보에 기초하여, 패킷 단위로 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 스트리밍 서버로부터 배신된 해당 패킷을 수신하는 수신 수단과,
    상기 패킷을 역 패킷화하는 역 패킷화 수단과,
    상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하는 암호 복호화 수단과,
    복호화된 상기 스트림 데이터를 원래의 화상 데이터로 복호하는 복호 수단을 포함하고,
    상기 패킷은 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부에 대해서도 패킷화된 것인 것을 특징으로 하는 클라이언트 단말기.
  47. 제46항에 있어서,
    상기 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장되는 것을 특징으로 하는 클라이언트 단말기.
  48. 화상 데이터 및/또는 음성 데이터를 압축 부호화하고, 소정 단위마다 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않은 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고, 상기 패킷화 제어 정보에 기초하여, 패킷 단위로 소정의 트랜스포트 포로토콜에 의한 네트워크 경유로 스트리밍 서버로부터 배신된 해당 패킷을 수신하는 수신 공정과,
    상기 패킷을 역 패킷화하는 역 패킷화 공정과,
    상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하는 암호 복호화 공정과,
    복호화된 상기 스트림 데이터를 원래의 화상 데이터로 복호하는 복호 공정
    을 포함하는 것을 특징으로 하는 데이터 복호 방법.
  49. 제48항에 있어서,
    상기 스트림 데이터는, 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 데이터 복호 방법.
  50. 제49항에 있어서,
    상기 소정 단위는, 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 데이터 복호 방법.
  51. 제48항에 있어서,
    상기 패킷은, 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장된 것인 것을 특징으로 하는 데이터 복호 방법.
  52. 제48항에 있어서,
    상기 패킷은, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화하는 제2 패킷화 방법이, 네트워크의 통신 상태에 따라 전환되어 패킷화된 것인 것을 특징으로 하는 데이터 복호 방법.
  53. 화상 데이터 및/또는 음성 데이터를 압축 부호화하고, 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행한 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고, 상기 패킷화 제어 정보에 기초하여, 패킷 단위로 소정의 트랜스포트 포로토콜에 의한 네트워크 경유로 스트리밍 서버로부터 배신된 해당 패킷을 수신하는 수신 공정과,
    상기 패킷을 역 패킷화하는 역 패킷화 공정과,
    상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하는 암호 복호화 공정과,
    복호화된 상기 스트림 데이터를 원래의 화상 데이터로 복호하는 복호 공정을 갖고,
    상기 패킷은 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부에 대해서도 패킷화된 것인 것을 특징으로 하는 데이터 복호 방법.
  54. 제53항에 있어서,
    상기 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장되는 것을 특징으로 하는 데이터 복호 방법.
  55. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하고, 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않은 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고, 상기 패킷화 제어 정보에 기초하여, 패킷 단위로 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 스트리밍 서버로부터 배신된 해당 패킷을 수신하는 수신 공정과,
    상기 패킷을 역 패킷화하는 역 패킷화 공정과,
    상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하는 암호 복호화 공정과,
    복호화된 상기 스트림 데이터를 원래의 화상 데이터로 복호하는 복호 공정을 포함하는 것을 특징으로 하는 프로그램.
  56. 제55항에 있어서,
    상기 스트림 데이터는, 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 프로그램.
  57. 제56항에 있어서,
    상기 소정 단위는, 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 프로그램.
  58. 제55항에 있어서,
    상기 패킷은, 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장된 것인 것을 특징으로 하는 프로그램.
  59. 제55항에 있어서,
    상기 패킷은 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화하는 제2 패킷화 방법이, 네트워크의 통신 상태에 따라 전환되어 패킷화된 것을 특징으로 하는 프로그램.
  60. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하고, 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행한 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고, 상기 패킷화 제어 정보에 기초하여, 패킷 단위로 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 스트리밍 서버로부터 배신된 해당 패킷을 수신하는 수신 공정과,
    상기 패킷을 역 패킷화하는 역 패킷화 공정과,
    상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하는 암호 복호화 공정과,
    복호화된 상기 스트림 데이터를 원래의 화상 데이터로 복호하는 복호 공정을 갖고,
    상기 패킷은, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부에 대해서도 패킷화된 것을 특징으로 하는 프로그램.
  61. 제60항에 있어서,
    상기 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장되는 것을 특징으로 하는 프로그램.
  62. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하고, 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않은 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고, 상기 패킷화 제어 정보에 기초하여, 패킷 단위로 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 스트리밍 서버로부터 배신된 해당 패킷을 수신하는 수신 공정과,
    상기 패킷을 역 패킷화하는 역 패킷화 공정과,
    상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하는 암호 복호화 공정과,
    복호화된 상기 스트림 데이터를 원래의 화상 데이터로 복호하는 복호 공정
    을 포함하는 것을 특징으로 하는 프로그램이 기록된 기록 매체.
  63. 제62항에 있어서,
    상기 스트림 데이터는, 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 기록 매체.
  64. 제63항에 있어서,
    상기 소정 단위는, 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 기록 매체.
  65. 제62항에 있어서,
    상기 패킷은 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장된 것을 특징으로 하는 기록 매체.
  66. 제62항에 있어서,
    상기 패킷은 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화하는 제1 패킷화 방법과, 상기 소정 단위마다 암호화 블록 사이즈의 정수배를 단위로 하여 패킷화하는 제2 패킷화 방법이, 네트워크의 통신 상태에 따라 전환되어 패킷화된 것을 특징으로 하는 기록 매체.
  67. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램이 기록된 기록 매체에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하고, 소정 단위마다, 해당소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행한 스트림 데이터가 소정의 파일 형식이 되도록, 적어도 패킷화 제어 정보를 부가하여 파일을 작성하고, 상기 패킷화 제어 정보에 기초하여, 패킷 단위로 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 스트리밍 서버로부터 배신된 해당 패킷을 수신하는 수신 공정과,
    상기 패킷을 역 패킷화하는 역 패킷화 공정과,
    상기 스트림 데이터 중, 암호화되어 있는 부분을 복호화하는 암호 복호화 공정과,
    복호화된 상기 스트림 데이터를 원래의 화상 데이터로 복호하는 복호 공정을 갖고,
    상기 패킷은, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장된 것인 것을 특징으로 하는 프로그램이 기록된 기록 매체.
  68. 제67항에 있어서,
    상기 전 및/또는 후의 스트림 데이터의 일부가 확장 영역에 저장되는 것을 특징으로 하는 기록 매체.
  69. 화상 데이터 및/또는 음성 데이터를 압축 부호화 하여 얻은 스트림 데이터의소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화된 상기 스트림 데이터를 입력하고,
    소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 파일을 작성하는 파일 작성 수단을 포함하는 것을 특징으로 하는 오더링 장치.
  70. 제69항에 있어서,
    상기 스트림 데이터는, 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 오더링 장치.
  71. 제70항에 있어서,
    상기 소정 단위는 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 오더링 장치.
  72. 제69항에 있어서,
    상기 패킷화 제어 정보는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화시키는 것인 것을 특징으로 하는 오더링 장치.
  73. 화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화된 상기 스트림 데이터를 입력하고,
    소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 파일을 작성하는 파일 작성 공정
    을 포함하는 것을 특징으로 하는 오더링 방법.
  74. 제73항에 있어서,
    상기 스트림 데이터는 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 오더링 방법.
  75. 제73항에 있어서,
    상기 소정 단위는, 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 오더링 방법.
  76. 제73항에 있어서,
    상기 패킷화 제어 정보는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화시키는 것인 것을 특징으로 하는 오더링 방법.
  77. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화된 상기 스트림 데이터를 입력하고,
    소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 파일을 작성하는 파일 작성 공정을 포함하는 것을 특징으로 하는 프로그램.
  78. 제77항에 있어서,
    상기 스트림 데이터는 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 프로그램.
  79. 제78항에 있어서,
    상기 소정 단위는 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 프로그램.
  80. 제77항에 있어서,
    상기 패킷화 제어 정보는 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화시키는 것인 것을 특징으로 하는 프로그램.
  81. 소정의 동작을 컴퓨터에 실행시키기 위한 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체에 있어서,
    화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화된 상기 스트림 데이터를 입력하고,
    소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 파일을 작성하는 파일 작성 공정을 포함하는 것을 특징으로 하는 프로그램이 기록된 기록 매체.
  82. 제81항에 있어서,
    상기 스트림 데이터는 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 기록 매체.
  83. 제82항에 있어서,
    상기 소정 단위는, 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 기록 매체.
  84. 제81항에 있어서,
    상기 패킷화 제어 정보는, 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화시키는 것인 것을 특징으로 하는 기록 매체.
  85. 스트리밍 서버에 의해서, 패킷화되어 소정의 트랜스포트 프로토콜에 의한 네트워크 경유로 클라이언트 단말기에 배신되는 파일이 기록된 기록 매체에 있어서,
    상기 파일은 화상 데이터 및/또는 음성 데이터를 압축 부호화하여 얻은 스트림 데이터의 소정 단위마다, 해당 소정 단위의 선두로부터 암호화 블록 사이즈마다 암호화를 행하고, 암호화 블록 사이즈에 충족하지 않는 말미의 데이터에 대해서는 암호화를 행하지 않도록 하여 암호화된 상기 스트림 데이터가 소정의 파일 형식이 되도록, 암호화된 상기 스트림 데이터에 적어도 패킷화 제어 정보를 부가하여 작성된 것인 것을 특징으로 하는 기록 매체.
  86. 제85항에 있어서,
    상기 스트림 데이터는, 상기 화상 데이터에 대하여 예측 부호화에 기초한 화상 처리를 실시하여 압축 부호화한 것인 것을 특징으로 하는 기록 매체.
  87. 제86항에 있어서,
    상기 소정 단위는 상기 화상 데이터의 표시 단위가 되는 프레임, 또는 랜덤 액세스 가능한 단위인 것을 특징으로 하는 기록 매체.
  88. 제85항에 있어서,
    상기 패킷화 제어 정보는 상기 스트림 데이터와 함께, 패킷마다 배신되는 상기 스트림 데이터의 사이즈가 상기 암호화 블록 사이즈의 정수배가 되도록, 전 및/또는 후의 스트림 데이터의 일부를 확장 영역에 저장하여 패킷화시키는 것인 것을 특징으로 하는 기록 매체.
KR20037012699A 2002-01-30 2003-01-28 암호화한 압축 화상 데이터를 분배하는 스트리밍 시스템 및 그 스트리밍 방법 KR100917513B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2002-00022257 2002-01-30
JP2002022257A JP3925218B2 (ja) 2002-01-30 2002-01-30 ストリーミングシステム及びストリーミング方法、ストリーミングサーバ及びデータ配信方法、クライアント端末及びデータ復号方法、並びにプログラム及び記録媒体
PCT/JP2003/000806 WO2003065726A1 (en) 2002-01-30 2003-01-28 Streaming system for distributing encrypted compressed image data and streaming method thereof

Publications (2)

Publication Number Publication Date
KR20040077443A true KR20040077443A (ko) 2004-09-04
KR100917513B1 KR100917513B1 (ko) 2009-09-16

Family

ID=27654420

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20037012699A KR100917513B1 (ko) 2002-01-30 2003-01-28 암호화한 압축 화상 데이터를 분배하는 스트리밍 시스템 및 그 스트리밍 방법

Country Status (6)

Country Link
US (2) US8325918B2 (ko)
EP (1) EP1471743A4 (ko)
JP (1) JP3925218B2 (ko)
KR (1) KR100917513B1 (ko)
CN (1) CN1228981C (ko)
WO (1) WO2003065726A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100954649B1 (ko) * 2007-02-15 2010-04-27 후지쯔 가부시끼가이샤 데이터 암호화 장치, 데이터 복호화 장치 및 데이터 암호화 방법

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100524770B1 (ko) 2003-09-17 2005-10-31 엘지전자 주식회사 주문형 비디오 서비스 장치 및 방법
JP4740157B2 (ja) * 2004-02-03 2011-08-03 サンディスク セキュア コンテンツ ソリューションズ インコーポレイテッド デジタルデータコンテンツの保護
JP4649850B2 (ja) * 2004-03-04 2011-03-16 ソニー株式会社 コンテンツ再生装置、コンテンツ記録装置、ネットワークシステム、およびコンテンツ記録・再生方法
CN100456358C (zh) * 2004-04-08 2009-01-28 华为技术有限公司 一种实现端到端语音加密的方法
CN1783877B (zh) * 2004-11-30 2010-05-12 Ut斯达康通讯有限公司 实时通讯数据流穿越网络地址转换设备和防火墙的方法
JP2008035272A (ja) * 2006-07-28 2008-02-14 Canon Inc 情報処理システム及び当該システムにおけるデータ通信方法
US20100095115A1 (en) * 2007-01-26 2010-04-15 Safenet, Inc. File encryption while maintaining file size
RS51926B (en) * 2007-04-27 2012-02-29 Deutsche Telekom Ag. PROCEDURE AND DATA TRANSMISSION SYSTEM FOR THE SAFE TRANSMISSION OF VIDEO AND / OR AUDIO DATA THROUGH AN SAFE PUBLIC IP BASED NETWORK
WO2009003685A1 (en) * 2007-07-02 2009-01-08 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for storing and reading a file having a media data container and a metadata container
JPWO2010044146A1 (ja) * 2008-10-15 2012-03-08 三菱電機株式会社 暗号装置及び復号装置及び暗号方法及び復号方法
JP4984181B2 (ja) * 2009-06-22 2012-07-25 ソニー株式会社 再生装置および再生方法
CN101710964B (zh) * 2009-11-17 2012-09-05 深圳国微技术有限公司 Mpeg2传输流数据包的加密和解密方法
CN102739417B (zh) 2011-04-01 2014-08-20 华为技术有限公司 流媒体业务处理系统及故障检测方法
US9357275B2 (en) * 2011-09-06 2016-05-31 Qualcomm Incorporated Network streaming of coded video data
EP2842339A1 (en) 2012-04-26 2015-03-04 Huawei Technologies Co., Ltd System and method for signaling segment encryption and key derivation for adaptive streaming
US9369274B2 (en) * 2012-07-06 2016-06-14 International Business Machines Corporation Cipher text translation
CN103875261B (zh) * 2012-08-23 2018-06-05 高通股份有限公司 一种用于使用带内信令来指示数据流的结尾的方法、装置及计算机可读介质
JP2015012580A (ja) 2013-07-02 2015-01-19 キヤノン株式会社 受信装置、受信方法及びプログラム
US9397832B2 (en) * 2014-08-27 2016-07-19 International Business Machines Corporation Shared data encryption and confidentiality
US9397833B2 (en) 2014-08-27 2016-07-19 International Business Machines Corporation Receipt, data reduction, and storage of encrypted data
CN105578308B (zh) * 2015-12-29 2018-06-22 武汉市烽视威科技有限公司 一种rtp组播直播与hls单播时移相结合的实现方法
CN110352586B (zh) * 2017-03-08 2021-12-07 日立能源瑞士股份公司 用于保留网络中的数据分组的相对定时和排序的方法和装置
JP7506562B2 (ja) 2020-09-01 2024-06-26 日本放送協会 送信装置、受信装置およびプログラム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08265723A (ja) * 1995-03-27 1996-10-11 Matsushita Electric Ind Co Ltd スクランブル制御方法およびスクランブル装置およびデスクランブル装置
US5684876A (en) * 1995-11-15 1997-11-04 Scientific-Atlanta, Inc. Apparatus and method for cipher stealing when encrypting MPEG transport packets
US5991403A (en) * 1996-12-23 1999-11-23 Intel Corporation Recoverable cryptographic transformation on YUV data suitable for compressions
JPH10276365A (ja) * 1997-03-31 1998-10-13 Hitachi Ltd 映像データ圧縮装置、映像記録再生装置および映像データの圧縮符号化方法
US6650783B2 (en) * 1998-01-14 2003-11-18 Canon Kabushiki Kaisha Image processing apparatus and method for processing images with different scalabilites
DE69925466T2 (de) 1998-03-16 2006-02-02 Intertrust Technologies Corp., Santa Clara Streaming-media-abspielgerät mit fortdauernde kontrolle und schutz von medieninhalt
CA2362879A1 (en) 1999-02-11 2000-08-17 Loudeye Technologies, Inc. System for automated comprehensive remote servicing for media information
US6873877B1 (en) * 1999-02-11 2005-03-29 Loudeye Corp. Distributed production system for digitally encoding information
DE19906450C1 (de) * 1999-02-16 2000-08-17 Fraunhofer Ges Forschung Verfahren und Vorrichtung zum Erzeugen eines verschlüsselten Nutzdatenstroms und Verfahren und Vorrichtung zum Entschlüsseln eines verschlüsselten Nutzdatenstroms
US7010032B1 (en) * 1999-03-12 2006-03-07 Kabushiki Kaisha Toshiba Moving image coding apparatus and decoding apparatus
US6415031B1 (en) 1999-03-12 2002-07-02 Diva Systems Corporation Selective and renewable encryption for secure distribution of video on-demand
US7085377B1 (en) * 1999-07-30 2006-08-01 Lucent Technologies Inc. Information delivery in a multi-stream digital broadcasting system
BR0013522A (pt) 1999-08-24 2002-05-07 Gen Instrument Corp Método para facilitar a distribuição de conteúdo pré criptografado de acordo com uma ou uma série de palavras de controle e de um serviço audiovisual criptografado de acordo com uma tecla de programa, terminal, e, controlador de acesso de vìdeo sob encomenda
US6918034B1 (en) * 1999-09-29 2005-07-12 Nokia, Corporation Method and apparatus to provide encryption and authentication of a mini-packet in a multiplexed RTP payload
JP2001175793A (ja) * 1999-12-21 2001-06-29 Toshiba Corp 医用画像配信装置
US7593529B1 (en) 2000-01-27 2009-09-22 Agere Systems Inc. Scramble methods and apparatus for packetized digital video signal in conditional access system
US6735173B1 (en) * 2000-03-07 2004-05-11 Cisco Technology, Inc. Method and apparatus for accumulating and distributing data items within a packet switching system
WO2002051096A1 (en) * 2000-12-18 2002-06-27 Koninklijke Philips Electronics N.V. Pointers to encrypted data in rtp header
US20020114452A1 (en) * 2000-12-21 2002-08-22 Hamilton Jon W. Method and system for digital image authentication
KR100413682B1 (ko) * 2001-03-26 2003-12-31 삼성전자주식회사 암호화된 데이터를 포함한 데이터의 전송 및 수신 제어 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100954649B1 (ko) * 2007-02-15 2010-04-27 후지쯔 가부시끼가이샤 데이터 암호화 장치, 데이터 복호화 장치 및 데이터 암호화 방법

Also Published As

Publication number Publication date
JP3925218B2 (ja) 2007-06-06
US20040177267A1 (en) 2004-09-09
EP1471743A4 (en) 2009-05-20
US8325918B2 (en) 2012-12-04
EP1471743A1 (en) 2004-10-27
WO2003065726A1 (en) 2003-08-07
US20090010430A1 (en) 2009-01-08
KR100917513B1 (ko) 2009-09-16
CN1498499A (zh) 2004-05-19
JP2003224839A (ja) 2003-08-08
US8325919B2 (en) 2012-12-04
CN1228981C (zh) 2005-11-23

Similar Documents

Publication Publication Date Title
KR100917513B1 (ko) 암호화한 압축 화상 데이터를 분배하는 스트리밍 시스템 및 그 스트리밍 방법
Wee et al. Secure scalable streaming enabling transcoding without decryption
KR100927322B1 (ko) 디지털 콘텐트 분배 시스템
KR101244308B1 (ko) 동영상 파일의 암호화 방법 및 그를 이용한 디지털 저작권관리방법
US6989773B2 (en) Media data encoding device
US8832434B2 (en) Methods for generating data for describing scalable media
US7797454B2 (en) Media data transcoding devices
KR20050069928A (ko) 스트리밍 시스템 및 스트리밍 방법
US7504968B2 (en) Media data decoding device
EP1714492A1 (en) Methods for scaling encoded data without requiring knowledge of the encoding scheme
EP1714494A1 (en) Methods for scaling a progressively encrypted sequence of scalable data
US20050047449A1 (en) Individual video encryption system and method
KR20090066177A (ko) 비디오 멀티캐스팅 서비스에서 정보 보안 유지 방법 및장치
US20120250860A1 (en) Encryption procedure and device for an audiovisual data stream
EP1499062B1 (en) Individual video encryption system and method
Yu Streaming media encryption
Jeronimo et al. Heather Yu
Apostolopoulos et al. Secure media streaming and secure transcoding
Sadourny et al. WCAM: secured video surveillance with digital rights management

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120903

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee