KR20010091988A - 콘텐츠 공급 장치 및 방법과, 기록 매체 - Google Patents

콘텐츠 공급 장치 및 방법과, 기록 매체 Download PDF

Info

Publication number
KR20010091988A
KR20010091988A KR1020010012659A KR20010012659A KR20010091988A KR 20010091988 A KR20010091988 A KR 20010091988A KR 1020010012659 A KR1020010012659 A KR 1020010012659A KR 20010012659 A KR20010012659 A KR 20010012659A KR 20010091988 A KR20010091988 A KR 20010091988A
Authority
KR
South Korea
Prior art keywords
content
information
difficulty
acquiring
information signal
Prior art date
Application number
KR1020010012659A
Other languages
English (en)
Other versions
KR100875781B1 (ko
Inventor
스즈끼데루히꼬
피터쿤
Original Assignee
이데이 노부유끼
소니 가부시끼 가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이데이 노부유끼, 소니 가부시끼 가이샤 filed Critical 이데이 노부유끼
Publication of KR20010091988A publication Critical patent/KR20010091988A/ko
Application granted granted Critical
Publication of KR100875781B1 publication Critical patent/KR100875781B1/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Computer And Data Communications (AREA)

Abstract

콘텐츠 공급 장치는 소정의 비트 레이트에서 코딩 파라미터의 리스트를 보유하는 다중매체 콘텐츠 서버를 포함한다. 비트 스트림을 전송하기 위한 코딩 파라미터는 상기 코딩 파라미터 리스트에 기초하여 전송 용량에 따라 결정된다. 구해진 코딩 파라미터에 기초하여, 비트 스트림이 변환되어 전송 채널로 전송된다.

Description

콘텐츠 공급 장치 및 방법과, 기록 매체{CONTENT SUPPLYING APPARATUS AND METHOD, AND RECORDING MEDIUM}
본 발명은 콘텐츠를 공급하는 장치 및 방법과 기록 매체에 관한 것이다. 보다 구체적으로, 본 발명은 광자기 디스크 혹은 자기 테이프와 같은 기록 매체에서 동영상 신호를 기록하고, 신호를 판독하고, 디스플레이에 신호를 표시하기에 적합하고, 전송 채널을 통해 전송측에서 수신측으로 동영상 신호를 전송하는데 적합하며- 여기서, 수신측은 원격지간 회의 시스템, 텔레비전 전화 시스템, 방송 시스템, 다중매체 데이터베이스 탐색 시스템 등에서와 동일한 방식으로 신호를 수신하고 표시함 -, 동영상 신호를 편집하고 기록하기에 적합한 콘텐츠 공급 장치 및 방법과 기록 매체에 관한 것이다.
원격 위치에 동영상 신호를 전송하기 위한 원격지간 회의 시스템 혹은 텔레비전 전화 시스템과 같은 시스템에 있어서, 화상 신호는 전송 채널을 효과적으로 이용하기 위해 비디오 신호 및 내부 프레임 상관성간의 라인 상관성을 사용하여 압축되고 인코딩된다.
기억 동영상 코딩 시스템인 MPEG(Moving Picture Expert Group) 시스템은 동화상에 대한 전형적인 고-효율 코딩 시스템이다. 이러한 시스템은 ISO-IEC/JTC1/SC2/WG11 표준 하에 논의되어 왔고 그러한 표준의 드래프트로서 제안되어 왔다. 이러한 시스템은 이동-보상된 예측 코딩 및 DCT(discrete cosine transform) 코딩을 결합한 하이브리드 시스템을 사용한다.
MPEG에 있어서, 여러 가지 프로파일 및 레벨은 다양한 어플리케이션 및 기능을 제공하기 위해 정의된다. 가장 기본이 되는 프로파일/레벨은 메인 레벨에서의 메인 프로파일이다(MP@ML).
도 1을 참조하면, MPEG를 사용하여 메인 레벨에서의 메인 프로파일(MP@ML)에 따르는 인코더의 구조의 일례가 기술된다.
입력 화상 신호는 프레임 메모리 그룹(1)에 입력되고 소정의 명령에서 인코딩된다.
인코딩될 화상 데이터는 매크로블럭 유닛 내에서 이동 벡터 검출 회로(2)에 입력된다. 이동 벡터 검출 회로(2)는 I 영상, P 영상 혹은 B 영상 중 하나로서,미리 설정된 소정의 시퀀스에 따라 각 프레임 내에서 화상 데이터를 처리한다. I, P, 혹은 B 영상과 같은 각 프레임에서 연속하는-입력 화상을 처리하는 명령은 미리 결정된다(예컨데, 화상은 명령 I, B, P, B, P, ... B, P에서 처리됨).
이동 벡터 검출 회로(2)는 미리 결정된 소정의 기준 프레임에 관련되고 이동 벡터를 검출하기 위해 이동 보상을 수행한다. 이동 보상(내부-프레임 예측)은 세 개의 모드, 즉 전방 예측, 후방 예측, 및 양방향 예측을 포함한다. P 영상은 전방 예측 모드만을 사용한다. B 영상에서는 세 개의 예측 모드, 즉 전방 예측, 후방 예측, 및 양방향 예측이 있다. 이동 벡터 검출 회로(2)는 예측 에러를 최소화하는 예측 모드를 선택하고 예측 모드를 생성한다.
동시에, 예측 에러는 예컨데, 인코딩되는 매크로블럭의 변동과 비교된다. 매크로블럭 변동이 예측 에러보다 적을 때, 어떠한 예측도 그러한 매크로블럭을 사용하여 수행되지 않는다. 대신, 내부-프레임 코딩이 수행된다. 이러한 경우에, 내부-화상 코딩 예측 모드(내부)가 사용된다. 이동 벡터 및 예측 모드는 가변-길이 코딩 회로(6) 및 이동 보상 회로(12)에 입력된다.
이동 보상 회로(12)는 소정의 이동 벡터에 의거하여 예측 화상을 생성하고, 연산 회로(3)에 예측 화상을 입력한다. 연산 회로(3)는 인코딩될 매크로블럭의 값과 예측 화상의 값 사이의 차분 신호를 DCT 회로(4)에 출력한다. 내부 매크로블럭의 경우에, 연산 회로(3)는 인코딩될 매크로블럭의 신호를 DCT 회로(4)에 직접 출력한다.
DCT 회로(4)는 입력 신호의 DCT(discrete cosine transform)를 수행하고 그것을 DCT 계수로 변환한다. DCT 계수는 양자화 회로(5)에 입력되어 전송 버퍼(7)의 데이터 기억량(버퍼 기억량)에 대응하여 양자화하는 단계를 사용하여 양자화된다. 양자화된 데이터는 가변-길이 코딩 회로(6)에 입력된다.
가변-길이 코딩 회로(6)는 양자화 회로(5)로부터 제공된 양자화 단계(스케일)에 따라, 양자화 회로(5)로부터 제공된 화상 데이터(이러한 예에서, I-영상 데이터)를 하프만 코드 등과 같은 가변-길이 코드로 변환하고, 가변-길이 코딩 회로(6)는 가변-길이 코드를 전송 버퍼(7)에 출력한다.
양자화 단계(스케일)는 양자화 회로(5)로부터 가변-길이 코딩 회로(6)에 입력된다. 또한 예측 모드(내부-화상 예측, 전방 예측, 후방 예측, 및 양방향 예측 중 하나가 설정됨을 지시하는 모드) 및 이동 벡터는 이동 벡터 검출 회로(2)에서 가변-길이 코딩 회로(6)로 입력된다. 또한 이러한 데이터는 가변-길이로 코딩된다.
전송 버퍼(7)는 입력 데이터를 일시적으로 기억하고 기억된 양에 대응하는 데이터를 양자화 회로(5)에 출력한다.
데이터의 잔량이 허용 상한치로 증가할 때, 전송 버퍼(7)는 양자화 제어 신호를 사용하여 양자화 회로(5)의 양자화 스케일을 확대시키고, 따라서 양자화 데이터 량이 감소한다. 대조적으로, 데이터의 잔량이 허용 하한치로 감소될 때, 전송 버퍼(7)는 양자화 제어 신호를 사용하여 양자화 회로(5)의 양자화 스케일을 감소시키고, 이로써 양자화 데이터 량은 증가한다. 이러한 방식으로, 전송 버퍼(7)의 오버플로우 혹은 언더플로우가 방지된다.
전송 버퍼(7)에 기억된 데이터는 소정의 시간에 판독되고 전송 채널에 출력된다.
양자화 회로(5)로부터 출력된 데이터는 역양자화(dequantization) 회로(8)에 입력되고 양자화 회로(5)로부터 제공된 양자화 단계에 따라 역양자화된다. 역양자화 회로(8)로부터의 출력은 IDCT(inverse discrete transform circuit) 회로(9)에 입력되어 역-DCT 처리되고, 연산 유닛(10)을 통해 프레임 메모리 그룹(11)에 차례로 기억된다. 도 2를 참조하여, MPEG에서 MP@ML에서의 디코더의 구조의 일례가 기술된다. 전송 채널을 통해 전송된 코딩된 화상 데이터는 수신 회로(도시되지 않음)에 의해 수신되거나 혹은 판독 유닛에 의해 판독된다. 데이터는 수신 버퍼(31)에 일시적으로 기억되고, 그 때 가변-길이 디코딩 회로(32)에 제공된다. 가변-길이 디코딩 회로(32)는 수신 버퍼(31)로부터 제공된 데이터의 가변-길이 디코딩을 수행하고, 이동 벡터 및 예측 모드를 이동 보상 회로(37)에 출력하고, 양자화 단계를 역양자화 회로(33)에 출력한다. 또한, 가변-길이 디코딩 회로(32)는 디코딩된 화상 데이터를 역양자화 회로(33)에 출력한다.
역양자화 회로(33)는 가변-길이 디코딩 회로(32)로부터 제공된 양자화 단계에 따라 가변-길이 디코딩 회로(32)로부터 제공된 화상 데이터를 역양자화하고, 데이터를 IDCT 회로(34)에 출력한다. 역양자화 회로(33)로부터 출력된 데이터(DCT 계수)는 IDCT 회로(34)에 의해 역-DCT 처리되고 연산 유닛(35)에 제공된다.
IDCT 회로(34)로부터 제공된 화상 데이터가 I-영상 데이터일 때, 데이터는 연산 유닛(35)으로부터 출력된다. 그 이후에 연산 유닛(35)에 입력된 화상 데이터(P 혹은 B-영상 데이터)에 대한 예측 화상 데이터를 생성하기 위해, 화상 데이터는 프레임 메모리 그룹(36)에 제공되고 프레임 메모리 그룹(36)에 기억된다. 데이터는 판독 화상으로서 직접 출력된다.
입력 비트 스트림이 P 혹은 B 영상일 때, 이동 보상 회로(37)는 이동 벡터 및 예측 모드에 따라 예측 화상을 생성하는데, 이는 가변-길이 디코딩 회로(32)로부터 제공되고, 예측 화상을 연산 유닛(35)에 출력한다. 연산 유닛(35)은 IDCT 회로(34)로부터 입력된 화상 데이터 및 이동 보상 회로(37)로부터 제공된 예측-화상 데이터를 추가하고 그 결과 화상을 출력한다. 입력 비트 스트림이 P 영상일 때, 연산 유닛(35)으로부터의 출력은 프레임 메모리 그룹(36)에 입력되고 프레임 메모리 그룹(36)에 기억되어, 데이터가 디코딩될 다음 화상 신호에 대해 기준 화상으로서 사용될 수 있다.
MPEG에 있어서, MP@ML 이외의 다양한 프로파일 및 레벨이 정의된다. 또한, 다양한 툴이 준비된다. 스케일러빌리티는 MPEG에 있어서 툴 중 하나이다.
MPEG에 있어서, 다른 화상 사이즈 및 프레임 레이트에 대응하여 스케일러빌리티를 구현하는 스케일러블 코딩 시스템이 소개된다. 예를 들어, 공간 스케일러빌리티의 경우에 있어서, 하위층에서 비트 스트림을 디코딩할 때만 작은 화상 사이즈의 화상 신호가 디코딩된다. 하위층 및 상위층에서 비트 스트림을 디코딩할 때, 큰 화상 사이즈의 화상 신호가 디코딩된다.
도 3을 참조하여, 공간 스케일러빌리티에 대한 인코더가 기술된다. 공간 스케일러빌리티의 경우에 있어서, 하위층은 작은 화상 사이즈의 화상 신호에 대응하고, 상위층은 큰 화상 사이즈의 화상 신호에 대응한다.
하위층에서 화상 신호는 프레임 메모리 그룹(1)에 입력되고 MP@ML에서와 같이 인코딩된다. 연산 유닛(10)으로부터의 출력은 프레임 메모리 그룹(11)에 제공된다. 출력은 하위층에 대한 예측 기준 화상으로서 뿐만 아니라, 화상 확대 회로 (41)에 의해 상위층에서의 화상 사이즈만큼의 사이즈로 화상이 확대된 이후에 상위층에 대한 예측 기준 화상으로서 사용된다
상위층에서의 화상 신호는 프레임 메모리 그룹(51)에 입력된다. 이동 벡터 검출 회로(52)는 MP@ML에서와 같이, 이동 벡터 및 예측 모드를 결정한다.
이동 보상 회로(62)는 이동 벡터 검출 회로(52)에 의해 결정된 이동 벡터 및 예측 모드에 따라 예측 화상을 생성하고, 예측 화상을 가중 회로(44)에 출력한다. 가중 회로(44)는 무게(계수) W에 의해 예측 화상을 확대시키고, 그 결과를 연산 유닛(43)에 출력한다.
상술된 바와 같이, 연산 유닛(10)으로부터의 출력은 프레임 메모리 그룹(11) 및 화상 확대 회로(41)에 입력된다. 화상 확대 회로(41)는 연산 유닛(10)에 의해 생성된 화상 신호를 상위층에서의 화상 사이즈의 사이즈로 확대시키고, 화상 신호를 가중 회로(42)에 출력한다. 가중 회로(42)는 무게 (1-W)에 의해 화상 확대 회로(41)로부터의 출력을 증가시키고, 그 결과를 연산 유닛(43)에 출력한다.
연산 유닛(43)은 가중 회로(42, 43)로부터의 출력을 추가하고, 예측 화상으로서의 총계를 연산 유닛(53)에 출력한다. 연산 유닛(43)으로부터의 출력 역시 연산 유닛(60)에 입력되어 IDCT 회로(59)로부터의 출력에 추가된다. 이어서, 총계는프레임 메모리 그룹(61)에 입력되고, 인코딩될 다음 화상 신호에 대해 예측 기준 프레임으로서 사용된다.
연산 유닛(53)은 인코딩될 화상 신호 및 연산 유닛(43)으로부터의 출력간의 차이를 연산하고, 그 차이를 출력한다. 내부-프레임에서 코딩된 매크로블럭의 경우에 있어서, 연산 유닛(53)은 인코딩될 화상 신호를 DCT 회로(54)로 직접 출력한다.
DCT 회로(54)는 연산 유닛(53)으로부터의 출력을 DCT(discrete cosine transform) 처리하여, DCT 계수를 생성하고, DCT 계수를 양자화 회로(55)에 출력한다. MP@ML에서와 같이, 양자화 회로(55)는 전송 버퍼(57) 등의 데이터 기억량에 의거하여 결정된 양자화 스케일에 따라 DCT 계수를 양자화하고, 양자화된 DCT 계수를 가변-길이 코딩 회로(56)에 출력한다. 가변-길이 코딩 회로(56)는 양자화된 DCT 계수의 가변-길이 코딩을 수행하고, 전송 버퍼(57)를 통해 상위층에서의 비트 스트림과 같은 결과를 출력한다.
양자화 회로(55)로부터의 출력은 양자화 회로에 의해 사용된 양자화 스케일에 따라 역양자화 회로(58)에 의해 역양자화된다. IDCT 회로(59)는 역양자화된 결과의 역 DCT를 수행하고, 이는 연산 유닛(60)에 차례로 입력된다. 연산 유닛(60)은 연산 유닛(43) 및 IDCT 회로(59)로부터의 출력을 추가하고, 총계를 프레임 메모리 그룹(61)에 입력한다.
이동 벡터 검출 회로(52)에 의해 검출된 이동 벡터 및 예측 모드, 양자화 회로(55)에 의해 사용된 양자화 스케일, 및 가중 회로(42, 44)에 의해 사용된 무게 W는 가변-길이 코딩 회로(56)에 입력되고, 전체가 인코딩되어 전송된다.
종래의 동영상 인코더 및 디코더에 있어서, 유닛이 일대일 대응임을 가정한다. 예를 들어, 원격지간 회의 시스템에 있어서, 전송측 및 수신측은 항상 일대일 대응이다. 전송 터미널 및 수신 터미널의 처리 능력 및 사양은 미리 결정된다. DVD 등과 같은 기억 매체에 있어서, 디코더의 사양 및 처리 능력은 미리 엄밀히 결정되고, 인코더는 사양을 만족하는 디코더만이 사용될 것이라는 가정에서 동영상 신호를 인코딩한다. 인코더가 화상 신호를 인코딩하여 소정의 사양에 따르는 디코더가 최적의 화질을 달성할 수 있을 때, 최적의 화질을 갖는 화상을 항상 전송할 수 있다.
그러나, 동영상을 인터넷과 같은 전송 채널로 전송할 때, 이는 시간 혹은 경로에 따라 변하는 가변 전송 용량을 갖거나, 사양이 미리 결정되지 않고 다양한 처리 능력을 갖는 수신 터미널의 규정되지 않은 번호로 동영상을 전송할 때, 최적의 화질인지 알기는 어렵다. 따라서, 동영상을 효과적으로 전송하는 것은 어렵다.
터미널의 사양은 유일하지 않으므로, 코더 및 디코더에 대한 코딩 시스템은 어느 하나의 터미널과 다른 터미널에 있어서 다르다. 그러한 경우에, 코딩된 비트 스트림을 소정의 포맷으로 효과적으로 변환하는 것이 필요하다. 그러나, 최적의 변환 방법은 아직 수립되지 않았다.
상술한 것의 견지에서, 본 발명의 목적은 다양한 전송 용량을 갖는 전송 채널을 통해 화상 신호를 효과적으로 전송하기 위한 것과, 다양한 처리 능력을 갖는수신 터미널에 최적의 동영상을 전송하기 위한 것이다.
본 발명의 양상에 따르면, 다른 장치로부터의 요청에 의거하여 다른 장치에 콘텐츠를 공급하는 콘텐츠 공급 장치가 제공되며, 이는 다른 장치의 기능에 관여하는 제1 정보를 얻기 위한 제1 취득 유닛을 포함한다. 제2 취득 유닛은 콘텐츠에 관여하는 제2 정보를 얻는데, 제2 정보는 제1 취득 유닛에 의해 얻어진 제1 정보에 대응한다. 제3 취득 유닛은 콘텐츠를 얻는다. 변환기는 제2 취득 유닛에 의해 얻어진 제2 정보에 의거하여 제3 취득 유닛에 의해 얻어진 콘텐츠를 변환한다. 제공 유닛은 변환기에 의해 변환된 콘텐츠를 다른 장치에 제공한다.
제2 정보는 콘텐츠를 변환하는 변환 파라미터 및 콘텐츠의 인코딩 난이도 중 하나를 포함한다.
제2 취득 유닛은 콘텐츠와는 별개로 전송되는 기술자로부터 제2 정보를 얻을 수 있다.
변환기는 코딩된 콘텐츠를 디코딩하는 디코딩 유닛, 및 기술자에 의해 기술된 제2 정보 및 디코딩을 수행할 때 디코딩 유닛에 의해 사용되는 디코딩 파라미터에 의거하여 디코딩 유닛에 의해 디코딩되는 콘텐츠를 인코딩하는 인코딩 유닛을 포함할 수 있다.
본 발명의 다른 양상에 따르면, 다른 장치로부터의 요청에 의거하여 다른 장치에 콘텐츠를 공급하는 콘텐츠 제공 장치에 대한 콘텐츠 제공 방법이 제공되고, 이는 다른 장치의 기능에 관여하는 제1 정보를 얻는 제1 취득 단계를 포함한다. 제2 취득 단계에 있어서, 콘텐츠에 관여하는 제2 정보가 얻어지는데, 제2 정보는제2 취득 단계에서 얻어진 제1 정보에 대응한다. 제3 취득 단계에 있어서, 콘텐츠가 얻어진다. 변환 단계에 있어서, 제3 취득 단계에서 얻어진 콘텐츠는 제2 취득 단계에서 얻어진 제2 정보에 의거하여 변환된다. 제공 단계에 있어서, 변환 단계에서 변환된 콘텐츠는 다른 장치에 제공된다.
본 발명의 다른 양상에 따르면, 다른 장치로부터의 요청에 의거하여 다른 장치에 콘텐츠를 공급하는 콘텐츠 공급 장치에 대해, 거기에 기록된 프로그램을 갖는 기록 매체가 제공된다. 프로그램은 다른 장치의 기능에 관여하는 제1 정보를 얻는 제1 취득 단계를 포함한다. 제2 취득 단계에 있어서, 콘텐츠에 관여하는 제2 정보가 얻어지는데, 제2 정보는 제1 취득 단계에서 얻어진 제1 정보에 대응한다. 제2 취득 단계에 있어서, 콘텐츠가 얻어진다. 변환 단계에 있어서, 제2 취득 단계에서 얻어진 콘텐츠는 제2 취득 단계에서 얻어진 제2 정보에 의거하여 변환된다. 제공 단계에 있어서, 변환단계에서 변환된 콘텐츠가 다른 장치에 제공된다.
본 발명의 다른 양상에 따르면, 콘텐츠에 관여하는 콘텐츠-정보 신호를 콘텐츠에 의거하여 생성하는, 신호 발생 장치가 제공된다. 신호 발생 장치는 콘텐츠의 인코딩 난이도를 분석하고 콘텐츠-정보 신호로서의 결과를 출력하는 코딩 난이도 해석 회로를 포함한다. 메모리는 콘텐츠 및 콘텐츠-정보 신호를 기억한다.
코딩 난이도 해석 회로는 콘텐츠의 이동 보상 난이도를 분석하는 제1 분석 회로를 포함할 수 있다.
코딩 난이도 해석 회로는 공간 도메인에서 콘텐츠의 압축 난이도를 분석하는 제2 분석 회로를 포함할 수 있다.
본 발명의 다른 양상에 따르면, 콘텐츠를 소정 포맷의 콘텐츠로 변환하는 변환 장치가 제공되는데, 이는 콘텐츠 및 콘텐츠에 관여하는 콘텐츠-정보 신호를 를 기억하는 메모리를 포함한다. 제1 취득 유닛은 콘텐츠를 기록하는 터미널 상에서 정보를 얻는다. 변환기는 콘텐츠를 콘텐츠-정보 신호에 의거하여 터미널에 대해 적합한 포맷으로 변환한다. 콘텐츠-정보 신호는 콘텐츠의 인코딩 난이도를 지시하는 코딩 난이도 정보를 포함한다. 변환기는 코딩 난이도 정보에 의거하여 콘텐츠를 변환한다.
본 발명의 다른 양상에 따르면, 콘텐츠를 소정 포맷의 콘텐츠로 변환하고, 콘텐츠를 판독하는 판독 터미널이 제공되는데, 이는 콘텐츠 및 콘텐츠에 관여하는 콘텐츠-정보 신호를 기억하는 메모리를 포함한다. 변환기는 콘텐츠-정보 신호에 의거하여 판독 터미널에 적합한 포맷으로 콘텐츠를 변환한다. 판독 유닛은 변환된 콘텐츠를 판독한다. 콘텐츠-정보 신호는 콘텐츠의 인코딩 난이도를 지시하는 코딩 난이도 정보를 포함한다. 변환기는 코딩 난이도 정보에 의거하여 콘텐츠를 변환한다.
본 발명에 따르면, 얻어진 콘텐츠는 제2 정보에 의거하여 변환되고, 다른 장치에 제공된다. 따라서, 다양한 전송 용량을 갖는 전송 채널 및 다양한 처리 능력을 갖는 유닛에 콘텐츠 전송을 효과적으로 수행할 수 있다. 또한, 다른 유닛으로부터의 요청에 응하여 콘텐츠 및 콘텐츠에 관여하는 정보를 전송할 수 있고, 따라서 다른 유닛의 능력에 따라 콘텐츠를 공급할 수 있는 시스템을 취득할 수 있다.
도 1은 종래의 MPEG 인코더의 구조에 관한 블럭도.
도 2는 종래의 MPEG 인코더의 구조에 관한 블럭도.
도 3은 다른 종래의 MPEG 인코더의 구조에 관한 블럭도.
도 4는 본 발명의 실시예에 따른 시스템의 구조에 관한 블럭도.
도 5는 도 4에 도시된 다중매체 콘텐츠 서버의 구조에 관한 블럭도.
도 6은 도 4에 도시된 데이터 액세스 서버의 구조에 관한 블럭도.
도 7은 도 6에 도시된 트랜스코딩 유닛의 구조에 관한 블럭도.
도 8a 및 도 8b는 트랜스코딩을 기술하는 그래프.
도 9a 내지 도 9d는 트랜스코딩을 기술하는 그래프.
도 10은 도 4에 도시된 다중매체 콘텐츠 서버에서의 인코딩을 기술하는 도면.
도 11a 및 도 11b는 도 10에 도시된 코딩 난이도 해석 회로의 구조에 관한 블럭도.
도 12a 내지 도 12d는 콘텐츠-정보 신호의 구조를 기술하는 도면.
도 13은 TranscodingHint 기술자의 구조를 기술하는 도면.
도 14는 매체정보의 구조를 기술하는 도면.
도 15는 세그먼트의 구조를 기술하는 도면.
도 16은 전체 MPEG-7 데이터 구조를 기술하는 도면.
도 17은 도 10에 도시된 코딩 난이도 해석 회로의 구조의 다른 일례에 관한 블럭도.
도 18은 도 17에 도시된 콘텐츠-정보 신호 발생 회로에 의해 수행되는 공정을 도시하는 순서도.
도 19a 내지 도 19c는 매체TranscodingHint Ds의 구조를 기술하는 도면.
도 20은 난이도 형태를 기술하는 표.
도 21은 매체TranscodingHint 기술자의 구조를 기술하는 도면.
도 22는 매체정보의 구조를 기술하는 도면.
도 23은 비디오 데이터 및 세그먼트간의 관계를 기술하는 도면.
도 24는 퍼스널 컴퓨터 구조의 일례에 관한 블럭도.
<도면의 주요 부분에 대한 부호의 설명>
101 : 다중매체 콘텐츠 서버
102 : 데이터 액세스 서버
103 : 수신 터미널
111 : 메타 데이터 기억 디바이스
112 : 콘텐츠 기억 디바이스
113 : 메타 데이터 관리자
114 : 다중매체 콘텐츠 관리자
121 : 트랜스코딩 관리자
122 : 트랜스코딩 유닛
123 : 트랜스코딩 라이브러리
131 : 디코더
132 : 인코더
141 : 코딩 난이도 해석 회로
151 : 파서
152 : 힌트 생성기
161 : 디코더
162 : 인코더
제1 실시예
도 4는 본 발명의 제1 실시예에 따른 시스템의 구조를 도시한다.
다중매체 콘텐츠 서버(101)는 하드디스크 등과 같은 기억 매체(예컨데, 도 5에 도시된 콘텐츠 기억 디바이스(112))에 동영상 등과 같은 다중매체 콘텐츠를 기록 및 기억한다. 다중매체 콘텐츠는 압축해제되거나 혹은 MPEG-1, MPEG-2, 혹은 MPEG-4(이후, MPEG-1/2/3 등으로 약칭됨)와 같은 압축 비트 스트림 포맷으로 기록된다.
수신 터미널(클라이언트; 103)은 다중매체 콘텐츠를 요청, 수신 및 표시한다. 사용자는 콘텐츠를 얻기 위해 수신 터미널(103)을 사용한다. 수신 터미널(103)은 소정의 콘텐츠를 요청하는 콘텐츠 요청 신호(1), 및 메모리 사이즈, 화상 디스플레이 디바이스의 해상도, 연산 능력, 버퍼 사이즈, 디코딩가능 비트-스트림 포맷 등과 같은 그 자신의 처리 능력을 지시하는 클라이언트 정보 신호를 전송한다.
콘텐츠 요청 신호(1)는 영화의 제목과 같은 요청된 콘텐츠가 의미론적 콘텐츠를 포함하는 정보이다. 콘텐츠 요청 신호(1)는 MPEG-7 인코딩 시스템에 의해 인코딩된다.
데이터 액세스 서버(102)는 네트워크 혹은 소정의 전송 채널을 통해 수신 터미널(103)로부터 콘텐츠 요청 신호(1) 및 클라이언트 정보 신호를 수신한다. 데이터 액세스 서버(102)는 콘텐츠 요청 신호(1)에 의거하여 요청된 콘텐츠 상의 정보를 요청하는 콘텐츠-정보 요청 신호를 네트워크 혹은 소정의 전송 채널을 통해 다중매체 콘텐츠 서버(101)로 전송한다.
다중매체 콘텐츠 서버(101)는 다중매체 콘텐츠 및 장착된 기억 매체 내에 기록된 다중매체 콘텐츠 상의 정보를 기록한다. 다중매체 콘텐츠 서버(101)가 콘텐츠-정보 요청 신호를 수신할 때, 다중매체 콘텐츠 서버(101)는 수신된 콘텐츠-정보 요청 신호에 의거하여 소정의 콘텐츠-정보 신호를 데이터 액세스 서버(102)로 전송한다.
콘텐츠-정보 신호는 다중매체 콘텐츠 서버(101)에 기록된 다중매체 콘텐츠 상의 정보를 포함한다. 콘텐츠-정보 신호는 파일명, 콘텐츠 제목, 저자, 캐스트 등과 같은 정보를 포함한다. 콘텐츠-정보 신호는 의미론적 정보 및 물리적 정보 둘 다를 포함하고 MPEG-7에 의해 인코딩된다. 물리적 정보는 예컨데, 기억 매체에 기록된 파일명 및 비트 스트림 내에서 소정의 위치를 지시하는 포인터를 포함한다. 의미론적 정보는 예컨데, 콘텐츠 및 캐스트의 제목을 포함한다.
데이터 액세스 서버(102)는 콘텐츠-정보 신호, 콘텐츠 요청 신호(1) 및 클라이언트 정보 신호에 의거하여 소정의 콘텐츠를 정의하고, 콘텐츠를 요청하는 콘텐츠 요청 신호(2)를 다중매체 콘텐츠 서버(101)에 전송한다.
콘텐츠 요청 신호(2)는 예컨데, 파일명을 포함한다. 콘텐츠 요청 신호(2)는 파일명 혹은 비트 스트림 내에서 소정의 위치를 지시하는 포인터와 같은 물리적 정보를 포함한다. 콘텐츠 요청 신호(2)는 예컨데, MPEG-7에 의해 인코딩된다.
다중매체 콘텐츠 서버(101)는 콘텐츠 요청 신호(2)에 의해 요청된 다중매체 (MM) 콘텐츠를 데이터 액세스 서버(102)에 전송한다.
데이터 액세스 서버(102)는 다중매체 콘텐츠 서버(11)로부터 콘텐츠 정보 신호 및 다중매체 콘텐츠를 수신한다. 데이터 액세스 서버(102)는 다중매체 콘텐츠를 클라이언트 정보 신호 및 콘텐츠-정보 신호에 의거하여 ("트랜스코딩 (transcoding)"이라 칭하는 공정에 의해) 최적의 포맷으로 변환한다. 데이터 액세스 서버(102)는 변환된 다중매체 콘텐츠를 수신 터미널(103)로 전송한다.
도 4를 계속 참조하면, 데이터 액세스 서버(102) 및 수신 터미널(103)은 전송 채널에 의해 분리되고, 데이터 액세스 서버(102) 및 다중매체 콘텐츠 서버(101)은 전송 채널에 의해 분리된다. 다중매체 콘텐츠 서버(101), 데이터 액세스 서버 (102) 및 수신 터미널(103)은 독립적인 유닛으로 지시된다. 또한, 이러한 유닛들은 단일 터미널에 장착될 수 있다. 예를 들어, 다중매체 콘텐츠 서버(101), 데이터 액세스 서버(102) 및 수신 터미널(103)은 단일 터미널에 제공될 수 있다. 다중매체 콘텐츠 서버(101) 및 데이터 액세스 서버(102)는 단일 터미널에 제공될 수 있고, 수신 터미널(103)은 네트워크에 의해 격리된 개별 터미널로서 제공될 수 있다. 유사하게, 다중매체 콘텐츠 서버(101)는 네트워크에 의해 격리된 개별 터미널로서 제공될 수 있고, 데이터 액세스 서버(102) 및 수신 터미널(103)은 단일 터미널에 제공될 수 있다. 다음에 기술하는 바와 같이, 기술을 단순화하기 위해 유닛을 독립적인 유닛으로서 기술한다. 그러나, 다음 기술은 모든 유닛이 단일 터미널에 제공되는 경우에 적용된다.
도 5를 참조하면, 도 4에 도시된 다중매체 콘텐츠 서버(101)의 구조의 일례가 기술된다. 메타-데이터 기억 디바이스(111)는 콘텐츠-정보 및 콘텐츠 정보를기술하는 다른 메타-데이터를 기록한다. 콘텐츠 기억 디바이스(112)는 동영상을 포함하는 다중매체 콘텐츠를 기록한다.
콘텐츠-정보 신호 및 콘텐츠에 관련된 다른 메타-데이터는 의미론적 및 물리적 정보를 포함한다. 의미론적 정보는 예컨데, 영화의 제목 및 감독명을 포함한다. 물리적 정보는 예컨데, 파일명, URL 및 비트 스트림에서 소정의 위치를 지시하는 포인터를 포함한다. 콘텐츠-정보 신호 및 메타-데이터는 예컨데, MPEG-7에 의해 인코딩되고 기록된다.
다중매체 콘텐츠 그 자체는 MPEG-1/2/4와 같은 다양한 포맷으로 인코딩되고, 콘텐츠 기억 디바이스(112)에 기록된다.
데이터 액세스 서버(102)에 의해 입력된 콘텐츠-정보 요청 신호는 메타-데이터 관리자(113)에 입력된다. 메타-데이터 관리자(113)는 메타-데이터 기억 디바이스(111)에 기록된 콘텐츠-정보 신호 및 메타-데이터를 관리한다. 메타-데이터 관리자(113)은 콘텐츠-정보 요청 신호를 메타-데이터 기억 디바이스(111)에 제공한다.
메타-데이터 기억 디바이스(111)는 제공된 콘텐츠-정보 요청 신호에 의거하여 소정의 메타-데이터 혹은 콘텐츠-정보 신호에 대해 탐색하고 탐색 결과를 메타-데이터 관리자(113)에 제공한다. 메타-데이터 관리자(113)는 콘텐츠-정보 신호를 도 4에 도시된 데이터 액세스 서버(102)에 출력한다.
데이터 액세스 서버(102)로부터 입력된 콘텐츠 요청 신호(2)는 다중매체 콘텐츠 관리자(114)에 입력된다. 다중매체 콘텐츠 관리자(114)는 콘텐츠 기억 디바이스(112)에 기록된 다중매체 콘텐츠를 관리한다. 다중매체 콘텐츠 관리자(114)는 콘텐츠 요청 신호(2)를 콘텐츠 기억 디바이스(112)에 제공한다.
콘텐츠 기억 디바이스(112)는 제공된 콘텐츠 요청 신호(2)에 의거하여 소정의 다중매체(MM) 콘텐츠에 대해 탐색하고, 탐색 결과를 다중매체 콘텐츠 관리자(114)에 출력한다. 다중매체 콘텐츠 관리자(114)는 다중매체 콘텐츠를 도 4에 도시된 데이터 액세스 서버(102)에 출력한다.
도 6은 도 4에 도시된 데이터 액세스 서버의 구조의 일례를 도시한다. 데이터 액세스 서버(102)는 트랜스코딩 관리자(12), 트랜스코딩 유닛(122) 및 트랜스코딩 라이브러리(123)를 포함한다.
도 4에 도시된 수신 터미널(103)로부터 입력된 클라이언트 정보 신호는 트랜스코딩 관리자(121)에 입력된다. 도 4에 도시된 다중매체 콘텐츠 서버(101)로부터 입력된 콘텐츠-정보 신호는 트랜스코딩 관리자(121)에 입력된다.
트랜스코딩 관리자(121)는 클라이언트 정보 신호 및 콘텐츠-정보 신호에 의거하여 다중매체 콘텐츠의 출력 포맷을 결정한다. 트랜스코딩 관리자(121)는 트랜스코딩 형태 정보를 트랜스코딩 유닛(122)에 출력한다. 트랜스코딩 형태 정보는 다중매체 콘텐츠 및 트랜스코딩 유닛(122)에 대한 트랜스코딩 방법을 지시한다.
트랜스코딩 관리자(121)는 콘텐츠 이용가능 정보 및 콘텐츠-정보 신호를 도 4에 도시된 수신 터미널(103)에 출력한다. 요청된 콘텐츠가 다중매체 콘텐츠 서버(101)에서 검출되지 않을 때, 트랜스코딩 관리자(121)는 콘텐츠 이용가능 정보를 "0"으로 설정한다. 요청된 콘텐츠가 다중매체 콘텐츠 서버(101)에서 검출될때, 트랜스코딩 관리자(121)는 콘텐츠 이용가능 정보를 "1"로 설정한다.
트랜스코딩 유닛(122)은 트랜스코딩 형태 정보에 의거하여 입력 콘텐츠를 변환한다.
트랜스코딩 유닛(122)은 CPU(central processing unit) 혹은 DSP(digital signal processor)에서 소프트웨어 모듈 동작으로서 실행될 수 있다. 그러한 경우에, 트랜스코딩 유닛(122)은 트랜스코딩 형태 정보에 의거하여 트랜스코딩 라이브러리(123)에 기록된 소정의 트랜스코딩 툴을 사용하여 트랜스코딩을 수행한다(콘텐츠의 변환). 트랜스코딩 형태 정보에 의거하여, 트랜스코딩 유닛(122)은 툴 요청 신호를 트랜스코딩 라이브러리(123)에 출력한다. 트랜스코딩 라이브러리(123)는 요청된 소프트웨어 모듈(트랜스코딩 도구)을 트랜스코딩 유닛(122)에 출력한다. 트랜스코딩 유닛(122)은 소프트웨어 모듈을 실행하기 위해 필요한 메모리 등을 보유하고 소프트웨어 모듈을 사용하여 트랜스코딩을 수행한다.
도 7을 참조하여, 트랜스코딩 유닛(122)의 구조의 일례가 기술된다. 트랜스코딩 유닛(122)을 실행하는 가장 간단한 방법은 콘텐츠(비트 스트림)를 디코딩하고, 그 이후에 소정의 포맷인 인코더를 사용하여 콘텐츠를 다시 인코딩하는 것이다.
도 7에 도시된 트랜스코딩 유닛(122)에 있어서, 다중매체 콘텐츠 서버(101)에 의해 제공된 비트 스트림은 디코더(131)에 입력되어 디코딩된다. 디코딩된 화상 신호는 수신 터미널(103)이 데이터를 수신할 수 있는 포맷인 인코더(132)에 공급되고, 신호는 인코딩된다.
비트 스트림이 디코더(131)에 의해 디코딩될 때 디코딩되는 이동 벡터, 양자화 계수 및 코딩 모드와 같은 코딩 파라미터가 인코더(132)에 공급되고, 코딩 파라미터는 인코더(132)가 화상 신호를 인코딩할 때 사용된다. 인코더(132)는 디코더(131)로부터 공급된 코딩 파라미터 및 트랜스코딩 관리자(121)로부터 공급된 트랜스코딩 형태 정보에 의거하여 디코딩된 화상을 인코딩하여, 소정의 포맷인 비트 스트림을 생성하고, 그 비트 스트림을 출력한다.
도 8a 및 도 8b를 참조하여, 콘텐츠-정보 신호를 사용하여 트랜스코딩 유닛(122)에 의해 수행되는 트랜스코딩 방법의 일례가 기술된다.
소정의 콘텐츠를 인코딩할 때, 비록 동일한 비트 레이트에서 실행되더라도, 화질은 프레임 사이즈, 프레임 레이트 등에 따라 다를 것이다. 이러한 일례는 도 8b에서 기술된다. 그래프는 세 개의 다른 프레임 사이즈 및 프레임 레이트를 사용하여 동일한 화상이 인코딩될 때, 비트 레이트(도 8b에서 횡좌표) 및 화질(도 8b에서 종좌표) 간의 관계를 기술한다. 비트 레이트가 충분히 높을 때, 높은 프레임 레이트(30 ㎐)에서 화상이 큰 프레임(ITU-R Recommendation; 601) 내에 있을 때, 화질은 최고이다. 보다 낮은 비트 레이트에서, 화질은 갑자기 나빠지기 시작한다.
소정의 비트 레이트 RB2혹은 그 이하에서, 화상 사이즈 Rec. 601의 가로 및 세로가 절반으로 감소할 때(SIF)와 프레임 레이트가 감소할 때(10 ㎐로) 인코딩되는 화상의 화질은 향상된다. 소정의 비트 레이트 RB1혹은 그 이하에서, 인코딩되는 화상의 화질은 화상 사이즈 SIF의 가로 및 세로가 절반 더 감소될 때(QSIF) 향상된다. 각 비트 레이트에서 최적의 화질을 얻기 위한 화상 사이즈 및 프레임 레이트는 화상 속성에 의존한다. 도 8b에 도시된 관계는 각 콘텐츠에 대해 다르다.
본 발명의 실시예에 있어서 콘텐츠-정보 신호는 예컨데, 각 비트 레이트에서 콘텐츠를 인코딩하는 최적의 코딩 파라미터의 리스트이다. 이러한 일례는 도 8a에 도시된다. 비트 레이트 RA1혹은 그 이하에서 콘텐츠-정보 신호에 대해, 인코딩은 1/4 사이즈 프레임 및 프레임 레이트 10 ㎐를 사용하여 수행된다. RA1에서 RA2에 걸친 범위의 비트 레이트에서 인코딩은 1/2 사이즈 프레임을 사용하여 수행된다. 비트 레이트 RA2혹은 그 이상에서, Rec 601 사이즈 및 프레임 레이트 30 ㎐가 인코딩을 수행하는데 사용된다.
이러한 경우에 있어서, 콘텐츠-정보 신호를 기술하는 방법은 이후에 상세히 기술된다.
도 9a 내지 도 9d를 참조하여, 콘텐츠-정보 신호를 사용하여 트랜스코딩 유닛(122)에 의해 수행된 트랜스코딩 방법의 변형이 기술된다. 소정의 다중매체 콘텐츠를 전송하는 전송 채널은 두 가지 형태, 즉 비트 레이트가 시간에 걸쳐 변하도록 허용하는 가변 비트 레이트를 갖는 전송 채널 및 고정된 비트 레이트를 갖는 전송 채널을 포함한다. 코딩 시스템은 두 가지 형태, 즉 가변 비트 레이트에서 인코딩할 수 있는 코딩 시스템 및 고정된 비트 레이트에서 인코딩하는 코딩 시스템을 포함한다.
예를 들어, 원격지간 회의 시스템에서, 무선 전송 링크를 통해 방송될 때,비트 스트림은 고정된 비트 레이트에서 인코딩된다. 반대로, DVD 등에서, 비트 스트림은 가변 비트 레이트에서 인코딩된다. MPEG-1 및 H.263와 같은 코딩 시스템에 있어서, 고정된 비트 레이트에서만 인코딩이 가능하다. MPEG-2 및 MPEG-4에 있어서, 가변 비트 레이트에서만 인코딩이 가능하다.
콘텐츠를 인코딩할 때, 콘텐츠가 고정된 비트 레이트에 대립된 가변 비트 레이트에서 인코딩될 때 일반적으로 화질은 더 우수하다. 콘텐츠의 인코딩 효율은 화상의 속성에 의존한다. 콘텐츠가 다르다면, 코딩 효율 역시 다를 것이다. 콘텐츠의 단일 피스는 시간에 걸쳐 다른 코딩 효율을 갖는다. 도 9a는 시변 코딩 난이도의 일례를 도시한다. 시간은 횡좌표에서 플롯되고, 코딩 난이도는 종좌표에서 플롯된다. 낮은 코딩 난이도를 갖는 씬(scene)에서, 우수한 화질은 저 비트 레이트에서 달성될 수 있다. 반대로, 높은 코딩 난이도를 갖는 씬에서는, 고 비트 레이트에서 조차 충분한 화질을 달성하기는 어렵다.
도 9b는 동영상이 고정된 비트 레이트에서 인코딩될 때 시변 화질을 도시한다. 도 9a 및 도 9b를 비교하면, 고정된 비트 레이트에서의 코딩될 때, 화질은 낮은 코딩 난이도를 갖는 씬에서 향상되는 반면, 높은 코딩 난이도를 갖는 씬에서는 화질이 나빠진다는 것이 분명하다. 따라서, 화질은 시간에 걸쳐 크게 변한다.
도 9c는 도 9a에 도시된 경우에 사용된 동영상이 가변 비트 레이트에서 인코딩될 때 시변 코딩 비트 레이트를 도시한다. 높은 코딩 난이도를 갖는 씬에, 보다 높은 비트 레이트가 할당된다. 낮은 코딩 난이도를 갖는 씬에는, 상대적으로 적은 수의 비트가 할당된다. 그 결과, 화질은 도 9d에 도시된 바와 같이 변경된다. 비교해 보면, 고정된 비트 레이트(도 9b)에서 코딩할 때, 콘텐츠에서 생성된 비트 수가 동일하더라도 평균 화질은 가변 비트 레이트에서 더 우수하다. 가변 비트-레이트 코딩에서, 시간에 따른 화질의 변화는 더 적다.
가변 비트-레이트 코딩을 효과적으로 수행하기 위해, 도 9a에 도시된 바와 같이 전체 동영상의 코딩 난이도를 분석하고, 미리 특성을 결정할 필요가 있다. 상대적으로 큰 용량을 갖는 버퍼를 준비하고, 버퍼의 허용 가능 범위 내에서 코딩 난이도를 측정할 수 있다. 이러한 방법에 있어서, 최적화는 용량 범위 내에서 수행된다. 전체 콘텐츠의 최적화가 수행된다는 것을 의미하지는 않는다.
상기 문제를 해결하기 위해, 도 9a에 도시된 바와 같이 콘텐츠 코딩 난이도 정보는 다중매체 콘텐츠 서버(101)로부터 출력된 콘텐츠-정보 신호에서 기술된다. 트랜스코딩 유닛(12)은 코딩 난이도 정보를 사용하여, 고정된 비트 레이트에서 인코딩된 비트 스트림을 가변 비트 레이트에서 인코딩하여, 비트 스트림을 출력한다.
특히, 도 7에 도시된 일례의 트랜스코딩 유닛(122)에 있어서, 인코더(132)는 다중매체 콘텐츠 서버(101)로부터 공급된 콘텐츠-정보 신호에 의거하여 비트 스트림을 인코딩하여 비트 스트림을 출력한다.
이에 대하여, 도 10을 참조하면, 도 4에 도시된 다중매체 콘텐츠 서버(101)에 소정의 다중매체 콘텐츠를 기록하는 경우, 다중매체 콘텐츠 서버(101)에는 외부로부터 비트 스트림이 공급된다. 비트 스트림은 코딩 난이도 해석 회로(141)에 입력된다. 본 실시예에서는 비트 스트림이 입력되었지만, 압축되지 않은 동화상을 직접 입력하여도 좋다.
코딩 난이도 해석 회로(141)는 콘텐츠의 인코딩 난이도를 해석하고, 도 9a에 도시된 코딩 난이도의 특성을 얻는다. 코딩 난이도 해석 회로(141)는 상기 특성을 콘텐츠 정보 신호로서 메타-데이터 기억 디바이스(111)로 출력하고, 입력된 콘텐츠 비트 스트림을 콘텐츠 기억 디바이스(112)로 출력한다.
도 11a 및 11b는 코딩 난이도 해석 회로(141)의 구성예를 도시한다. 도 11a를 참조하면, 먼저 입력 비트 스트림이 파싱 회로(파서)(151)에 입력되고, 비트 스트림으로부터 (양자화 계수 및 비트 수와 같은) 코딩 파라미터가 추출된다. 힌트 생성기(hint generator)(152)는 각 프레임에서 양자화 계수의 평균 Q와 그 프레임에서 발생된 비트 수 B를 구한다. 또한, 힌트 생성기(152)는 Q x B를 연산하여 해당 프레임의 코딩 난이도를 구하고, 그 코딩 난이도를 콘텐츠 정보 신호로서 메타-데이터 기억 디바이스(111)에 공급한다. 메타-데이터 기억 디바이스(111)는 콘텐츠 정보 신호를 기록한다.
도 11b는 코딩 난이도 해석 회로(141)의 변형예를 도시한다. 이 실시예에서, 입력 비트 스트림은 디코더(161)에 의해 디코딩된다. 디코딩된 영상은 인코더(162)에 입력되고, 인코더(162)는 그 영상을 Q = 1과 같은 고정된 양자화 스케일로 코딩한다. Q = 1로 코딩될 때 각 프레임에서 발생된 비트의 수가 그 프레임의 코딩 난이도이며, 코딩 난이도는 콘텐츠 정보로서 메타-데이터 기억 디바이스(111)에 공급된다. 메타-데이터 기억 디바이스(111)는 콘텐츠 정보를 기록한다.
도 12a 내지 12d를 참조하여, 콘텐츠 정보 신호를 기술하는 포맷의 예를 설명한다. 도 12a 내지 12d에 도시된 예에서, 콘텐츠 정보 신호는 도 12a에 도시된 TranscodingHint에 기술되어 있는데, 이는 트랜스코딩에 관한 힌트를 제공하는 정보를 포함하는 기술자이다. 도 12a에 도시된 예에서, TranscodingHint는 ID, TranscodingParameterSet 기술자 및 TranscodingComplexityHint 기술자를 포함하고, ID는 기술자를 식별하기 위한 식별 번호이다.
도 12b를 참조하면, TranscodingParametSet는 각각의 비트 레이트에서 코딩 및 트랜스코딩을 행할 때 최적의 코딩 파라미터를 기술하는 기술자이다. TranscodingParametSet는 ID, MinBitRate, MaxBitRate, FrameRate, FrameSize를 포함한다.
MinBitRate는 기술자의 정보가 유효한 최소 비트 레이트를 기술하는 플래그이고, MaxBitRate는 기술자의 정보가 유효한 최대 비트 레이트를 기술하는 플래그이며, FrameRate는 MinBitRate에서 MaxBitRate까지 범위의 비트 레이트에서 특정 영상을 인코딩할 때 최적의 화질이 얻어지는 프레임 레이트를 기술하는 플래그이며, FrameSize는 MinBitRate에서 MaxBitRate까지 범위의 비트 레이트에서 특정 영상을 인코딩할 때 최적의 화질이 얻어지는 프레임 사이즈를 기술하는 플래그이다.
TranscodingComplexityHint는 콘텐츠의 인코딩 및 트랜스코딩의 복잡성을 기술하는 기술자이며, 도 12c는 TranscodingComplexityHint의 구성을 도시한다. StartMediaLocator는 기술자의 정보가 유효한 비트 스트림의 선두를 보여주는 포인터이다.
EndMediaLocator는 기술자의 정보가 유효한 비트 스트림의 끝을 나타내는 포인터이다. 복잡성은 비트 스트림의 StartMediaLocator와 EndMediaLocator 사이의 부분의 코딩 난이도를 기술하는 플래그이다.
도 12d는 TranscodingComplexityHint의 구성의 다른 예를 도시한다. StartFrameNumber는 기술자의 정보가 유효한 선두 프레임의 프레임 번호를 보여주는 포인터이다.
EndfarmeNumber는 기술자의 정보가 유효한 최종 프레임의 프레임 번호를 나타내는 포인터이다. 복잡성은 비트 스트림의 StartFrameNumber와 EndFrameNumber 사이의 부분의 코딩 난이도를 기술하는 플래그이다.
도 13은 UML(Universal Modeling Language)로 쓰여진 도 12a에 도시된 TranscodingHint 기술자의 데이터 구조를 도시한다. TranscodingHint는 적어도 하나의 TranscodingParameterSet 및 적어도 하나의 TranscodingComplexityHint를 포함한다. TranscodingParameterSet의 반복 회수는 0회 이상이다. TranscodingComplexityHint의 반복 회수도 0회 이상이다.
MPEG-7은 콘텐츠의 정보를 기술하는 메타-데이터에 관한 규격이다. MPEG-7은 복수의 기술자를 포함한다. MPEG-7 규격의 사양은 ISO/IEC SC29/WG11 N3112, N3113, N3114에 설명되어 있다. TranscodingHint 기술자는 MPEG-7에서 메타-데이터의 한 타입으로 구성될 수 있다.
도 14는 MPEG-7에서 MediaInformation(MediaIdentification, MediaFormat, MediaCoding, MediaTranscodingHint, MediaInstance 포함)의 데이터 구조의 일 예를 도시하는데, 여기에는 전술한 TranscodingHint 기술자가 추가되었다.MediaInformation은 코딩 시스템 등과 같은 콘텐츠의 매체를 기술하는 기술자이다. MediaInformation에는 하나 이상의 TranscodingHint가 기술되어 있다.
MediaInformation은 전체 콘텐츠에 또는 콘텐츠의 일부에 추가된다. 본 실시예에서는 TranscodingHint도 역시 전체 콘텐츠 또는 콘텐츠의 일부에 추가된다.
도 15는 MPEG-7의 세그먼트(Segment)에서 TranscodingHint의 기술을 위한 데이터 구조의 일 예를 도시한다. Segment는 콘텐츠가 복수의 부분 또는 씬(scene)으로 분할되는 경우 각 부분에 대한 정보를 기술하는 기술자이다. 본 실시예에서는 0 이상의 TranscodingHint가 VisualSegment 및 AudioSegment에 기술된다. Segment는 콘텐츠의 일부에 추가되며, 또한 TranscodingHint도 콘텐츠의 일부에 추가된다.
도 16은 도 14에 도시된 것처럼 MPEG-7에서 MediaInformation에 TranscodingHint이 추가되는 경우의 전체 MPEG-7 데이터 구조를 도시한다.
제2 실시예
이하, 본 발명의 제2 실시예에 따른 시스템을 설명한다. 제2 실시예에 따르면, 콘텐츠 정보 신호를 형성하는 코딩 난이도는 이동 보상 난이도를 나타내는 정보와 인트라 코딩 난이도를 나타내는 정보를 포함한다. 이러한 두 가지 정보에 기초하여, 도 9a에 도시된 바와 같이 제1 실시예의 콘텐츠에서 소정 씬의 코딩 난이도를 구할 수 있다. 도 17은 이 경우 도 10에 도시된 코딩 난이도 해석 회로(141)의 구조의 일 예를 도시한다.
필요하다면, 입력 비트 스트림은 디코더(201)에 의해 디코딩되고, 디코딩된비트 스트림은 인코더(202 내지 205)에 입력된다. 인코더(202)는 디코더(201)로부터 입력된 영상 데이터의 인트라 코딩을 Q = 1과 같은 양자화 스케일을 사용하여 실시한다. Q = 1로 인코딩될 때 각 프레임에서 발생된 비트의 수가 그 프레임 인코딩의 인트라 코딩 난이도이며, 코딩 난이도는 콘텐츠 정보 신호 발생 회로(208)에 입력된다.
인코더(203)는 예컨대 Q = 1 및 m = 1의 고정된 양자화 스케일을 사용하여 인코딩(I 및 P 영상의 인코딩)을 실시한다. 인코더(204)는 예컨대 Q = 1 및 m = 2의 고정된 양자화 스케일을 사용하여(두 개의 인접한 P 영상 사이에 단일 프레임 B 영상을 삽입한다) 인코딩을 실시한다. 인코더(205)는 예컨대 Q = 1 및 m = 3의 고정된 양자화 스케일을 사용하여(두 개의 인접한 P 영상 사이에 B 영상을 2 프레임 삽입한다) 인코딩을 실시한다.
평균치 회로(206)는 인코더(203 내지 205)의 출력의 평균을 연산하고, 이 평균은 이동 보상 코딩 난이도로서 차분 회로(207)에 공급된다.
차분 회로(207)는 인코더(202)의 출력으로부터 평균치 회로(206)의 출력을 감산하여, 그 차분치를 콘텐츠 정보 신호 발생 회로(208)에 공급한다. 세그먼트의 개시 시간 및 종료 시간은 외부 회로(도시되지 않음)로부터 콘텐츠 정보 신호 발생 회로(208)에 공급된다. 콘텐츠 정보 신호 발생 회로(208)는 인코더(202)의 출력 및 차분 회로(207)의 출력에 기초하여 개시 시간 및 종료 시간에 의해 지정된 세그먼트에 대한 콘텐츠 정보 신호를 발생한다. 콘텐츠 정보 신호는 메타-데이터 기억 디바이스(111)에 공급된다.
동작시, 필요하다면, 디코더(201)는 입력 비트 스트림을 디코딩하여, 디코딩화된 비트 스트림을 인코더(202 내지 205)에 공급한다. 인코더(202)는 Q = 1을 사용하여 인트라 코딩만을 실시한다. 각 프레임에서 발생된 비트의 수는 그 프레임 코딩의 인트라 코딩 난이도를 나타낸다. 인트라 코딩 난이도는 콘텐츠 정보 신호 발생 회로(208) 및 차분 회로(207)에 공급된다.
인트라 코딩 난이도는 이하 설명되는 TextureHint(도 19c)에 기술되어 있다.
인코더(203)는 Q = 1 및 m = 1을 사용하여 디코더(201)로부터 공급된 영상 데이터를 인코딩한다. 인코더(204)는 Q = 1 및 m = 2를 사용하여 디코더(201)로부터 출력된 영상 데이터를 인코딩하며, 인코더(205)는 Q = 1 및 m = 3을 사용하여 디코더(201)로부터의 영상 데이터를 인코딩한다. 인코더(203 내지 205)는 각 프레임에서 발생된 비트의 수를 평균치 회로(206)에 출력한다.
평균치 회로(206)는 인코더(203, 205)로부터 공급되는 각 프레임에서 발생된 비트 수의 평균을 연산하고, 이 평균은 이동 보상 코딩 난이도로서 차분 회로(207)에 공급된다.
차분 회로(207)는 인코더(202)로부터 공급되는 인트라 코딩 난이도를 나타내는 인트라 코딩 난이도로부터, 평균치 회로(206)로부터 공급되는 이동 보상 난이도를 감산하여, 그 나머지를 이동 보상 난이도로서 콘텐츠 정보 신호 발생 회로(208)에 공급한다.
이동 보상 난이도는 이하 설명되는 MotionHint(도 19b)에 기술되어 있다.
콘텐츠 정보 신호 발생 회로(208)는 인코더(202)로부터 공급된 인트라 코딩난이도 및 차분 회로(207)로부터 공급된 이동 보상 난이도에 기초하여 콘텐츠 정보 신호를 발생하여, 메타-데이터 기억 디바이스(111)에 공급한다.
도 18은 콘텐츠 정보 신호 발생 회로(208)에서 실시되는 콘텐츠 정보 신호 발생 처리를 도시하는 순서도이다.
단계 S1에서, 콘텐츠 정보 신호 발생 회로(208)는 개시 시간 및 종료 시간에 의해 지정된 세그먼트의 모든 프레임에서 인트라 코딩 난이도를 합산한다.
세그먼트는 비디오 신호의 소정의 간격을 시간 도메인으로 나타낸다. 비디오 콘텐츠는 하나의 또는 복수의 세스먼트로 이루어진다. 세그먼트의 구체적인 예를 도 22를 참조하여 설명한다.
단계 S2에서, 콘텐츠 정보 신호 발생 회로(208)는 전체 시퀀스의 모든 프레임의 인트라 코딩 난이도를 합산한다.
단계 S3에서, 콘텐츠 정보 신호 발생 회로(208)는 다음의 식을 사용하여 정규화 처리를 실시하고, TextureHint의 난이도(Difficulty)를 연산한다:
Difficulty = (세그먼트의 인트라 코딩 난이도의 합 ÷ 세그먼트의 프레임 수) ÷ (전체 시퀀스의 인트라 코딩 난이도의 합 ÷ 전체 시퀀스의 프레임 수)
난이도는 각 세그먼트 마다 구해진다.
단계 S4에서, 콘텐츠 정보 신호 발생 회로(208)는 세그먼트의 인트라 코딩 난이도를 합산한다. 단계 S5에서, 전체 시퀀스의 코딩 난이도가 연산된다. 단계 S6에서, 콘텐츠 정보 신호 발생 회로(208)는 다음의 식을 사용하여 정규화 처리를 실시하고, MotionHint의 Motion uncompensability를 연산한다:
Motion uncompensability = (세그먼트의 이동 보상 난이도의 합 ÷ 세그먼트의 프레임 수) ÷ (전체 시퀀스의 이동 보상 난이도의 합 ÷ 전체 시퀀스의 프레임 수)
Motion uncompensability는 각 세그먼트 마다 구해진다.
단계 S7에서, 콘텐츠 정보 신호 발생 회로(208)는 단계 S3, S6에서의 연산 결과에 기초하여 MediaTranscodingHint를 콘텐츠 정보 신호로서 발생한다.
MediaTranscodingHint는 트랜스코딩을 실시하기 위한 최적의 코딩 파라미터를 기술하는 기술자이다. 도 19a는 본 발명의 제2 실시예에서의 MediaTranscodingHint 기술자를 도시한다.
도 19a를 참조하면, MediaTranscoding은 ID, UtilityScaling(), MotionHint(), TextureHint()를 포함한다.
UtilityScaling은 각 비트 레이트에서 콘텐츠의 화질을 기술하는 기술자이다.
도 19b를 참조하면, MotionHint는 콘텐츠의 이동 보상 난이도를 기술하는 기술자이다. MotionHint는 ID, Motion uncompensability, Motion range x left, Motion range x right, Motion range y left, Motion range y right를 포함한다.
내부 프레임 상관성이 낮은 경우, 이동 보상에 의해 개선될 수 있는 코딩 효율은 그다지 높지 않으므로, 내부 프레임 상관성이 낮은 부분에는 더 많은 비트를 할당할 필요가 있다. Motion uncompensability은 0 내지 1의 값을 갖는 파라미터이다. 0 값은 프레임들이 동일하다는 것을 나타내고, 1 값은 프레임들 간에 상관성이 검출되지 않음을 나타낸다. 차분 회로(207)로부터 출력된 이동 보상 난이도는 Motion uncompensability에 기술된다.
Motion range x left 및 Motion range x right은 이동 보상에 의해 야기된 수평 방향 이동의 최대 변화량을 가리키고, Motion range y left 및 Motion range y right은 이동 보상에 의해 야기된 수직 방향 이동의 최대 변화량을 가리킨다. 이들은 이동 벡터 검출을 위한 수직 및 수평 방향의 최대 검출 범위를 표시한다. 이동 벡터의 최대 값을 미리 지정함으로써, 화질을 유지하면서도 트랜스코딩에 필요한 연산량은 감소된다.
TextureHint는 공간 도메인의 콘텐츠의 압축 난이도를 기술하는 기술자이다. 도 17에 도시된 인코더(202)로부터 출력된 인트라 코딩 난이도는 TextureHint에 기술된다. 도 19c를 참조하면, TextureHint는 ID, Difficulty, DifficultyType을 포함한다.
Difficulty는 콘텐츠의 인트라 코딩 난이도를 나타내는 플래그이며, 말하자면 이동 보상을 실시하지 않은 코딩의 난이도를 가리킨다.
DifficultyType은 기술자에 기술된 Difficulty가 어떻게 측정되는지를 보여주는 Difficulty의 처리를 나타내는 플래그이다. 도 20을 참조하면, DifficultyType에서 "0" 값은 Encoding Difficulty(인코딩 난이도)를 가리킨다.
도 21은 UML을 사용하는 도 19a에 도시된 MediaTranscodingHint의 데이터 구조를 보여준다.
MediaTranscoding 기술자는 0 또는 하나의 UtilityScaling 기술자, 0 또는하나의 MotionHint 기술자, 0 또는 하나의 TextureHint 기술자를 포함한다.
도 22를 참조하면, 도 21에 도시된 MediaTranscoding은 코딩 시스템 등과 같은 콘텐츠의 매체를 기술하는 MediaIdentification, MediaFormat, MediaInstance, MediaInformation을 포함한다.
MediaInformation은 콘텐츠 전체 또는 일부에 추가된다. 또한, MediaTranscodingHint도 콘텐츠의 전체 또는 일부에 추가된다.
도 23은 비디오 데이터에 대한 MediaTranscodingHint의 관계를 보여준다. 비디오 콘텐츠(211)는 적어도 하나의 시퀀스를 포함한다. 시퀀스의 일부인 씬(세그먼트)(212)은 개시 시간과 종료 시간에 의해 규정된다. 세그먼트(212)에 관한 정보(개시 시간, 종료 시간 등등)는 세그먼트 기술자(213)에 기술되어 있다.
MediaInformation 기술자(214)는 하나의 콘텐츠 또는 하나의 세그먼트 기술자 마다 정의될 수 있다. MediaInformation 기술자(214)를 세그먼트 기술자(213)의 자 기술자(child descriptor)로서 정의하면, MediaTranscodingHint 기술자(215)가 MediaInformation 기술자(214)의 자 기술자이므로 MediaTranscodingHint 기술자(215)는 각각의 세그먼트(씬) 마다 정의된다. MediaTranscodingHint 기술자(215)는 UtilityScaling 기술자(216), MediaHint 기술자(217), TextureHint 기술자(218)와 같은 자 기술자를 포함한다.
MediaInformation 기술자(214)와 그의 자 기술자는 세그먼트 기술자(213)의 자 기술자가 된다. 기술의 내용은 개시 시간부터 종료 시간까지의 기간 내에서만 유효하며, 모 기술자 세그먼트 기술자(213)에 의해 정의된다.
상술한 처리는 하드웨어에 의해 또는 소프트웨어에 의해 실시될 수 있다. 일련의 처리를 소프트웨어에 의해 실시하는 경우, 프로그램은 전용 하드웨어에 설치된 컴퓨터 또는 각종 프로그램을 인스톨하여 각종 기능을 실행할 수 있는 범용 퍼스널 컴퓨터에 네트워크로부터 또는 기록매체로부터 인스톨된다.
도 24는 상기 처리를 실시하기 위한 퍼스널 컴퓨터의 구성예를 도시한다. 중앙 처리 장치(CPU)(221)는 판독 전용 메모리(ROM)(222)에 기억된 프로그램 또는 기억 디바이스(228)로부터 랜덤 액세스 메모리(RAM)(223)로 로드된 프로그램에 따라 각종 처리를 실시한다. 경우에 따라, RAM(223)은 CPU(221)가 각종 처리를 실시하기 위해 필요한 데이터를 저장한다.
CPU(221), ROM(222), RAM(223)은 버스(224)를 통해 상호 접속된다. 버스(224)에는 입/출력 인터페이스(225)가 접속된다.
입/출력 인터페이스(225)에는 키보드와 마우스를 포함하는 입력부(226); 음극선관(CRT)이나 액정 표시 장치(LCD)와 같은 디스플레이와 스피커를 포함하는 출력부(227); 하드디스크를 포함하는 기억 디바이스(228); 모뎀과 터미널 어댑터를 포함하는 통신부(229)가 접속된다. 통신부(229)는 네트워크를 통해 통신 처리를 실시한다.
필요하다면, 드라이브(230)도 입/출력 인터페이스(225)에 접속될 수 있다. 자기 디스크(241), 광 디스크(242), 광-자기 디스크(243) 및/또는 반도체 메모리(244)도 적절히 장착될 수 있다. 컴퓨터 프로그램은 환경에 따라 상기 기록 매체로부터 판독되거나 기억 디바이스(228)에 인스톨될 수 있다.
프로그램이 기록된 기록 매체는 프로그램을 사용자에게 공급하기 위해 컴퓨터와는 별도로 분배된다. 기록 매체는 자기 디스크(241)(플로피 디스크 포함), 광 디스크(242)(CD-ROM, DVD(digital versatile disk) 포함), 광-자기 디스크(243)(MD(mini-disk) 포함), 반도체 메모리(244)와 같은 패키지된 매체를 포함한다. 또한, 기록 매체는 컴퓨터에 미리 설치되어 사용자에게 배포되는 프로그램이 기록된 ROM(222) 또는 기억 디바이스(228)에 포함된 하드디스크를 포함한다.
본 명세서에서, 기록 매체에 기록된 프로그램을 기술하는 단계는 기술된 순서에 따라 실시되는 시계열 처리만을 포함하는 것이 아니라, 시계열로 처리될 필요가 없는 병렬 또는 개별 처리도 포함하는 것이다.
본 명세서에서, 시스템은 복수의 장치에 의해 구성되는 전체 장치를 가리킨다. 또한, 콘텐츠는 예로써 영상 신호를 이용하여 주로 설명되었지만, 콘텐츠가 영상 신호에 국한되는 것은 아니다. 콘텐츠는 오디오 신호, 프로그램, 텍스트 신호 등을 포함할 수 있다.
상기한 바와 같이, 본 발명에 따른 콘텐츠 제공 장치, 방법 및 기록 매체에 따르면, 다른 장치의 기능에 관련하는 제1 정보에 대응하는 콘텐츠에 관한 제2 정보를 취득하고, 상기 제2 정보에 기초하여, 콘텐츠를 변환하기 위한 것으로서, 다양한 전송 용량을 갖는 전송 채널을 통해 콘텐츠를 효율적으로 전송하고, 다양한 처리 능력을 갖는 다른 장치에 최적의 콘텐츠를 전송할 수 있다.
또한, 본 발명에 따른 콘텐츠 제공 장치, 방법 및 기록 매체에 따르면, 제1요청 신호에 기초하여, 콘텐츠에 관한 정보를 다른 장치에 제공하고, 제2 요청 신호에 기초하여, 콘텐츠를 다른 장치에 제공하기 위한 것으로서, 다른 장치의 요청에 대응하여 콘텐츠와 콘텐츠에 관한 정보를 적절하게 전송하여 다른 장치의 능력에 대응하는 콘텐츠를 제공하는 시스템을 실현할 수 있다.

Claims (27)

  1. 다른 장치로부터의 요구에 기초하여 상기 다른 장치로 콘텐츠를 공급하는 콘텐츠 공급 장치에 있어서,
    상기 다른 장치의 기능에 관한 제1 정보를 취득하는 제1 취득 수단;
    상기 제1 취득 수단에 의해 취득된 상기 제1 정보에 대응하는, 상기 콘텐츠에 관한 제2 정보를 취득하는 제2 취득 수단;
    상기 콘텐츠를 취득하는 제3 취득 수단;
    상기 제3 취득 수단에 의해 취득된 상기 콘텐츠를, 상기 제2 취득 수단에 의해 취득된 상기 제2 정보에 기초하여 변환하는 변환 수단; 및
    상기 변환 수단에 의해 변환된 상기 콘텐츠를 상기 다른 장치로 공급하는 공급 수단
    을 포함하는 것을 특징으로 하는 콘텐츠 공급 장치.
  2. 제1항에 있어서, 상기 제2 정보는 상기 콘텐츠를 변환하는 변환 파라미터 또는 상기 콘텐츠의 인코딩 난이도를 포함하는 것을 특징으로 하는 콘텐츠 공급 장치.
  3. 제1항에 있어서, 상기 제2 취득 수단은 상기 콘텐츠와는 별도로 전송된 기술자로부터 상기 제2 정보를 취득하는 것을 특징으로 하는 콘텐츠 공급 장치.
  4. 제3항에 있어서, 상기 변환 수단은
    코딩된 콘텐츠를 디코딩하는 디코딩 수단; 및
    상기 디코딩 수단에 의해 디코딩된 콘텐츠를, 디코딩을 실시할 때 상기 디코딩 수단에 의해 사용되는 디코딩 파라미터 및 기술자에 기술된 상기 제2 정보에 기초하여 인코딩하는 인코딩 수단
    을 포함하는 것을 특징으로 하는 콘텐츠 공급 장치.
  5. 다른 장치로부터의 요구에 기초하여 상기 다른 장치로 콘텐츠를 공급하는 콘텐츠 공급 장치의 콘텐츠 공급 방법에 있어서,
    상기 다른 장치의 기능에 관한 제1 정보를 취득하는 제1 취득 단계;
    상기 제1 취득 단계에 의해 취득된 상기 제1 정보에 대응하는, 상기 콘텐츠에 관한 제2 정보를 취득하는 제2 취득 단계;
    상기 콘텐츠를 취득하는 제3 취득 단계;
    상기 제3 취득 단계에 의해 취득된 상기 콘텐츠를, 상기 제2 취득 단계에 의해 취득된 상기 제2 정보에 기초하여 변환하는 변환 단계; 및
    상기 변환 단계에 의해 변환된 상기 콘텐츠를 상기 다른 장치로 공급하는 공급 단계
    를 포함하는 것을 특징으로 하는 콘텐츠 공급 방법.
  6. 다른 장치로부터의 요구에 기초하여 상기 다른 장치로 콘텐츠를 공급하는 콘텐츠 공급 장치를 위한 컴퓨터 판독가능 프로그램이 기록되어 있는 기록 매체에 있어서,
    상기 프로그램은
    상기 다른 장치의 기능에 관한 제1 정보를 취득하는 제1 취득 단계;
    상기 제1 취득 단계에 의해 취득된 상기 제1 정보에 대응하는, 상기 콘텐츠에 관한 제2 정보를 취득하는 제2 취득 단계;
    상기 콘텐츠를 취득하는 제3 취득 단계;
    상기 제3 취득 단계에 의해 취득된 상기 콘텐츠를, 상기 제2 취득 단계에 의해 취득된 상기 제2 정보에 기초하여 변환하는 변환 단계; 및
    상기 변환 단계에 의해 변환된 상기 콘텐츠를 상기 다른 장치로 공급하는 공급 단계
    를 포함하는 것을 특징으로 하는 기록 매체.
  7. 콘텐츠에 기초하여, 상기 콘텐츠에 관한 콘텐츠 정보 신호를 발생하는 신호 발생 장치에 있어서,
    상기 콘텐츠의 인코딩 난이도를 해석하여 그 결과를 상기 콘텐츠 정보 신호로서 출력하는 코딩 난이도 해석 회로; 및
    상기 콘텐츠 및 상기 콘텐츠 정보 신호를 기억하는 메모리
    를 포함하는 것을 특징으로 하는 신호 발생 장치.
  8. 제7항에 있어서, 상기 코딩 난이도 해석 회로는 상기 콘텐츠의 이동 보상 난이도를 해석하는 제1 해석 회로를 포함하는 것을 특징으로 하는 신호 발생 장치.
  9. 제8항에 있어서, 상기 제1 해석 회로는 상기 콘텐츠의 내부 프레임 상관성을 나타내는 파라미터를 출력하는 것을 특징으로 하는 신호 발생 장치.
  10. 제8항에 있어서, 상기 제1 해석 회로는 상기 콘텐츠의 이동 보상에 관한 이동의 검출 범위를 출력하는 것을 특징으로 하는 신호 발생 장치.
  11. 제7항에 있어서, 상기 코딩 난이도 해석 회로는 공간 도메인의 상기 콘텐츠의 압축 난이도를 해석하는 제2 해석 회로를 포함하는 것을 특징으로 하는 신호 발생 장치.
  12. 제11항에 있어서, 상기 제2 해석 회로는 상기 콘텐츠의 각각의 프레임이 인트라 코딩된 경우 인트라 코딩 난이도를 출력하는 것을 특징으로 하는 신호 발생 장치.
  13. 제7항에 있어서, 상기 코딩 난이도 해석 회로는 상기 콘텐츠를 분할하여 얻어지는 세그먼트 단위로 코딩 난이도를 해석하는 것을 특징으로 하는 신호 발생 장치.
  14. 제7항에 있어서, 상기 코딩 난이도 해석 회로는 상기 코딩 난이도를 해석하고, 정규화하여, 정규화된 코딩 난이도를 콘텐츠 정보 신호로서 출력하는 것을 특징으로 하는 신호 발생 장치.
  15. 제7항에 있어서, 상기 콘텐츠와 콘텐츠 정보 신호는 별도의 메모리에 각각 기억되는 것을 특징으로 하는 신호 발생 장치.
  16. 콘텐츠에 기초하여, 상기 콘텐츠에 관한 콘텐츠 정보 신호를 발생하는 신호 발생 방법에 있어서,
    상기 콘텐츠의 인코딩 난이도를 해석하여 그 결과를 상기 콘텐츠 정보 신호로서 출력하는 코딩 난이도 분석 단계; 및
    상기 콘텐츠 및 상기 콘텐츠 정보 신호를 메모리에 기억하는 기억 단계
    를 포함하는 것을 특징으로 하는 신호 발생 방법.
  17. 콘텐츠를 소정 포맷의 콘텐츠로 변환하는 변환 장치에 있어서,
    상기 콘텐츠 및 상기 콘텐츠에 관한 콘텐츠 정보 신호를 기억하는 메모리;
    상기 콘텐츠를 판독하는 터미널상의 정보를 취득하는 제1 취득 수단; 및
    상기 콘텐츠 정보 신호에 기초하여, 상기 콘텐츠를 상기 터미널에 적합한 포맷으로 변환하는 변환 수단
    을 포함하되,
    상기 콘텐츠 정보 신호는 콘텐츠의 인코딩 난이도를 나타내는 코딩 난이도 정보를 포함하며,
    상기 변환 수단은 상기 코딩 난이도 정보에 기초하여 콘텐츠를 변환하는 것을 특징으로 하는 변환 장치.
  18. 제17항에 있어서, 상기 코딩 난이도 정보는 상기 콘텐츠의 이동 보상 난이도를 나타내는 정보를 포함하는 것을 특징으로 하는 변환 장치.
  19. 제17항에 있어서, 상기 코딩 난이도 정보는 상기 콘텐츠의 내부 프레임 상관성을 나타내는 파라미터를 포함하는 것을 특징으로 하는 변환 장치.
  20. 제17항에 있어서, 상기 코딩 난이도 정보는 상기 콘텐츠의 이동 보상에 관한 이동의 검출 범위를 포함하는 것을 특징으로 하는 변환 장치.
  21. 제17항에 있어서, 상기 코딩 난이도 정보는 공간 도메인의 상기 콘텐츠의 압축 난이도를 나타내는 정보를 포함하는 것을 특징으로 하는 변환 장치.
  22. 제17항에 있어서, 상기 코딩 난이도 정보는 상기 콘텐츠의 각각의 프레임이인트라 코딩된 경우 인트라 코딩 난이도를 포함하는 것을 특징으로 하는 변환 장치.
  23. 제17항에 있어서, 상기 콘텐츠 정보 신호는 상기 콘텐츠를 분할하여 얻어지는 세그먼트 단위의 코딩 난이도 정보를 포함하는 것을 특징으로 하는 변환 장치.
  24. 제17항에 있어서, 상기 콘텐츠 정보 신호는 정규화된 코딩 난이도 정보를 포함하는 것을 특징으로 하는 변환 장치.
  25. 콘텐츠를 소정 포맷의 콘텐츠로 변환하는 변환 방법에 있어서,
    상기 콘텐츠 및 상기 콘텐츠에 관한 콘텐츠 정보 신호를 메모리에 기억하는 기억 단계;
    상기 콘텐츠를 판독하는 터미널상의 정보를 취득하는 취득 단계; 및
    상기 콘텐츠 정보 신호에 기초하여, 상기 콘텐츠를 상기 터미널에 적합한 포맷으로 변환하는 변환 단계
    를 포함하되,
    상기 콘텐츠 정보 신호는 콘텐츠의 인코딩 난이도를 나타내는 코딩 난이도 정보를 포함하며,
    상기 변환 단계에서, 상기 코딩 난이도 정보에 기초하여 콘텐츠를 변환하는 것을 특징으로 하는 변환 방법.
  26. 콘텐츠를 소정 포맷의 콘텐츠로 변환하여, 콘텐츠를 판독하는 판독 터미널에 있어서,
    상기 콘텐츠 및 상기 콘텐츠에 관한 콘텐츠 정보 신호를 기억하는 메모리;
    상기 콘텐츠 정보 신호에 기초하여, 상기 콘텐츠를 상기 판독 터미널에 적합한 포맷으로 변환하는 변환 수단; 및
    상기 변환된 콘텐츠를 판독하는 판독 수단
    을 포함하되,
    상기 콘텐츠 정보 신호는 콘텐츠의 인코딩 난이도를 나타내는 코딩 난이도 정보를 포함하며,
    상기 변환 수단은 상기 코딩 난이도 정보에 기초하여 콘텐츠를 변환하는 것을 특징으로 하는 판독 터미널.
  27. 콘텐츠를 소정 포맷의 콘텐츠로 변환하여, 콘텐츠를 판독하는 판독 터미널의 판독 방법에 있어서,
    상기 콘텐츠 및 상기 콘텐츠에 관한 콘텐츠 정보 신호를 메모리에 기억하는 기억 단계;
    상기 콘텐츠 정보 신호에 기초하여, 상기 콘텐츠를 상기 판독 터미널에 적합한 포맷으로 변환하는 변환 단계; 및
    상기 변환된 콘텐츠를 판독하는 판독 단계
    를 포함하되,
    상기 콘텐츠 정보 신호는 콘텐츠의 인코딩 난이도를 나타내는 코딩 난이도 정보를 포함하며,
    상기 변환 단계에서, 상기 코딩 난이도 정보에 기초하여 콘텐츠를 변환하는 것을 특징으로 하는 판독 방법.
KR20010012659A 2000-03-13 2001-03-12 콘텐츠 공급 장치 및 방법과, 기록 매체 KR100875781B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2000-068719 2000-03-13
JP2000068719 2000-03-13
JP2000-147768 2000-05-19
JP2000147768 2000-05-19

Publications (2)

Publication Number Publication Date
KR20010091988A true KR20010091988A (ko) 2001-10-23
KR100875781B1 KR100875781B1 (ko) 2008-12-24

Family

ID=26587320

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20010012659A KR100875781B1 (ko) 2000-03-13 2001-03-12 콘텐츠 공급 장치 및 방법과, 기록 매체

Country Status (8)

Country Link
US (4) US7020196B2 (ko)
EP (2) EP1137289B1 (ko)
JP (3) JP4483997B2 (ko)
KR (1) KR100875781B1 (ko)
CN (2) CN1595985B (ko)
AU (1) AU777595B2 (ko)
HK (1) HK1043636A1 (ko)
SG (1) SG105486A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040028401A (ko) * 2002-09-30 2004-04-03 주식회사 케이티 대역폭별 컨텐츠 제공 시스템 및 그 방법
KR100739931B1 (ko) * 2001-11-30 2007-07-16 마츠시타 덴끼 산교 가부시키가이샤 정보 출력 장치 및 정보 출력 방법

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5890503A (en) * 1998-06-29 1999-04-06 Bowen; Steven J. Self-contained fully automatic apparatus for cleaning eyeglasses
AU777595B2 (en) 2000-03-13 2004-10-21 Sony Corporation Content supplying apparatus and method, and recording medium
WO2003001770A2 (en) * 2001-06-22 2003-01-03 Emblaze Systems, Ltd. Mms system and method with protocol conversion suitable for mobile/portable handset display
JP2003087785A (ja) * 2001-06-29 2003-03-20 Toshiba Corp 動画像符号化データの形式変換方法及び装置
WO2003021971A1 (en) * 2001-08-28 2003-03-13 Ntt Docomo, Inc. Moving picture encoding/transmission system, moving picture encoding/transmission method, and encoding apparatus, decoding apparatus, encoding method, decoding method, and program usable for the same
US7355530B2 (en) * 2001-11-21 2008-04-08 Canon Kabushiki Kaisha Method and device for determining at least one multimedia data encoding parameter
ATE513415T1 (de) * 2001-12-28 2011-07-15 Koninkl Philips Electronics Nv Verfahren zur verarbeitung von multimediainhalt
US20030174771A1 (en) * 2002-03-12 2003-09-18 Victor Company Of Japan, Ltd Method, apparatus, and program for variable bit rate encoding
US7236521B2 (en) * 2002-03-27 2007-06-26 Scientific-Atlanta, Inc. Digital stream transcoder
WO2004008775A1 (ja) 2002-07-15 2004-01-22 Hitachi, Ltd. 動画像符号化方法及び復号化方法
JP2004178332A (ja) * 2002-11-28 2004-06-24 Satake Corp コンテンツ変換制御方法及びコンテンツ利用システム
KR100703421B1 (ko) * 2003-01-20 2007-04-03 삼성전자주식회사 트랜스코딩을 이용한 동영상메일 통신장치 및 방법
JP2006191186A (ja) * 2004-12-28 2006-07-20 Toshiba Corp コンテンツの再生システム、再生装置、再生方法、及び配信サーバ
JP2006203682A (ja) * 2005-01-21 2006-08-03 Nec Corp 動画像圧縮符号化ビットストリームシンタックス変換装置及び動画像通信システム
JP2006277402A (ja) * 2005-03-29 2006-10-12 Nec Corp データ圧縮装置及び方法並びにデータ圧縮用プログラム
WO2007037726A1 (en) * 2005-09-28 2007-04-05 Telefonaktiebolaget Lm Ericsson (Publ) Media content management
FR2896118A1 (fr) * 2006-01-12 2007-07-13 France Telecom Codage et decodage adaptatifs
US20070176919A1 (en) * 2006-01-31 2007-08-02 Toshiba Matsushita Display Technology Co., Ltd. Interface
TWI554053B (zh) * 2006-05-11 2016-10-11 Ｃｆｐｈ股份有限公司 使用及管理電子檔案的方法和設備
EP2100459B1 (en) 2007-01-08 2019-04-03 Nokia Technologies Oy System and method for providing and using predetermined signaling of interoperability points for transcoded media streams
JP4952433B2 (ja) * 2007-08-08 2012-06-13 ソニー株式会社 情報処理装置および方法、並びに、情報処理システム
JP5123681B2 (ja) * 2008-02-05 2013-01-23 キヤノン株式会社 映像表示装置及びその制御方法、並びに映像出力装置及びその制御方法
US8370520B2 (en) * 2008-11-24 2013-02-05 Juniper Networks, Inc. Adaptive network content delivery system
JP2011081457A (ja) * 2009-10-02 2011-04-21 Sony Corp 情報処理装置および方法
JP5553140B2 (ja) * 2009-10-02 2014-07-16 ソニー株式会社 情報処理装置および方法
JP5652021B2 (ja) 2010-07-08 2015-01-14 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
EP2732627A1 (en) * 2011-07-13 2014-05-21 Telefonaktiebolaget L M Ericsson (PUBL) Encoder, decoder and methods thereof for reference picture management
US8885702B2 (en) * 2011-10-17 2014-11-11 Google Inc. Rate-distortion-complexity optimization of video encoding guided by video description length
US10463858B2 (en) * 2012-07-17 2019-11-05 Stimwave Technologies Incorporated Devices and methods for treating craniofacial pain
EP3022927A1 (en) 2013-10-11 2016-05-25 Telefonaktiebolaget LM Ericsson (publ) Method and arrangement for transcoding a video bitstream
US10440080B2 (en) 2013-10-18 2019-10-08 Telefonaktiebolaget Lm Ericsson (Publ) Software-defined media platform
CN106210745A (zh) * 2016-08-31 2016-12-07 成都市和平科技有限责任公司 一种智能化jpeg图像编解码系统及方法
EP3322189B1 (en) * 2016-11-10 2019-12-25 Alcatel Lucent Method and system for controlling video transcoding
EP3322187B1 (en) * 2016-11-10 2020-01-29 Alcatel Lucent Method and transcoder for video transcoding
EP3322188B1 (en) * 2016-11-10 2019-12-25 Alcatel Lucent Method and device for generating a signal comprising video transcoding hints
US20180176285A1 (en) * 2016-12-15 2018-06-21 The Directv Group, Inc. Enhanced transmission of media to client devices
KR20200094525A (ko) 2019-01-30 2020-08-07 삼성전자주식회사 서로 연관된 복수의 데이터를 포함하는 하나의 파일을 처리하는 전자 장치
JP7352396B2 (ja) * 2019-07-04 2023-09-28 日本放送協会 番組送出装置

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5517652A (en) 1990-05-30 1996-05-14 Hitachi, Ltd. Multi-media server for treating multi-media information and communication system empolying the multi-media server
US5231484A (en) * 1991-11-08 1993-07-27 International Business Machines Corporation Motion video compression system with adaptive bit allocation and quantization
US5475421A (en) 1992-06-03 1995-12-12 Digital Equipment Corporation Video data scaling for video teleconferencing workstations communicating by digital data network
JP4388598B2 (ja) 1995-02-22 2009-12-24 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 伝送チャネルを介して複数のビデオプログラムを同時に送信するシステム
US6018768A (en) * 1996-03-08 2000-01-25 Actv, Inc. Enhanced video programming system and method for incorporating and displaying retrieved integrated internet information segments
US6513069B1 (en) * 1996-03-08 2003-01-28 Actv, Inc. Enhanced video programming system and method for providing a distributed community network
US5960389A (en) * 1996-11-15 1999-09-28 Nokia Mobile Phones Limited Methods for generating comfort noise during discontinuous transmission
JP3662384B2 (ja) * 1997-03-09 2005-06-22 松下電器産業株式会社 情報提供方法及びこれに用いる情報提供、受信装置
US6026097A (en) * 1997-03-13 2000-02-15 8 X 8, Inc. Data processor having controlled scalable input data source and method thereof
US6181711B1 (en) * 1997-06-26 2001-01-30 Cisco Systems, Inc. System and method for transporting a compressed video and data bit stream over a communication channel
US5907374A (en) * 1997-06-30 1999-05-25 Hewlett-Packard Company Method and apparatus for processing a compressed input bitstream representing an information signal
CN1152576C (zh) * 1997-07-08 2004-06-02 索尼公司 视频数据编码装置、编码方法和传送装置
US5963222A (en) 1997-10-27 1999-10-05 International Business Machines Corporation Multi-format reduced memory MPEG decoder with hybrid memory address generation
JP4186242B2 (ja) * 1997-12-26 2008-11-26 ソニー株式会社 画像信号処理装置及び画像信号処理方法
JP3906542B2 (ja) * 1998-01-28 2007-04-18 ソニー株式会社 情報処理装置及び方法、データ通信システム
JPH11250009A (ja) 1998-03-04 1999-09-17 Uniden Corp サーバ装置及びウェブデータ変換方式
EP2273393A3 (en) 1998-05-29 2012-12-12 Palm, Inc. Method and apparatus for communicating information over low bandwidth communications networks
US6031872A (en) 1998-06-16 2000-02-29 Daewoo Electronics Co., Ltd. Method and apparatus for encoding a video signal
WO1999066716A1 (en) * 1998-06-18 1999-12-23 Sony Electronics Inc. A method of and apparatus for partitioning, scaling and displaying video and/or graphics across several display devices
US6490370B1 (en) * 1999-01-28 2002-12-03 Koninklijke Philips Electronics N.V. System and method for describing multimedia content
US6628839B1 (en) * 1999-02-23 2003-09-30 Matsushita Electric Industrial Co., Ltd. Image coding system converting apparatus, image coding system converting method, and recording medium
US6345279B1 (en) * 1999-04-23 2002-02-05 International Business Machines Corporation Methods and apparatus for adapting multimedia content for client devices
US6738559B1 (en) * 1999-06-29 2004-05-18 Lg Electronics Inc. Feature-dependent operating method between two connected equipments and an apparatus for controlling the operating method
US20010047517A1 (en) * 2000-02-10 2001-11-29 Charilaos Christopoulos Method and apparatus for intelligent transcoding of multimedia data
AU777595B2 (en) * 2000-03-13 2004-10-21 Sony Corporation Content supplying apparatus and method, and recording medium

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100739931B1 (ko) * 2001-11-30 2007-07-16 마츠시타 덴끼 산교 가부시키가이샤 정보 출력 장치 및 정보 출력 방법
US7397817B2 (en) 2001-11-30 2008-07-08 Matsushita Electric Industrial Co., Ltd. Information converting apparatus
US7408953B2 (en) 2001-11-30 2008-08-05 Matsushita Electric Industrial Co., Ltd. Information converting apparatus
US7424034B2 (en) 2001-11-30 2008-09-09 Matsushita Electric Industrial Co., Ltd. Information converting apparatus
KR100863857B1 (ko) * 2001-11-30 2008-10-15 마츠시타 덴끼 산교 가부시키가이샤 서버 및 컨텐츠 배송 방법
KR100899495B1 (ko) * 2001-11-30 2009-05-27 파나소닉 주식회사 정보 출력 장치 및 방법
KR20040028401A (ko) * 2002-09-30 2004-04-03 주식회사 케이티 대역폭별 컨텐츠 제공 시스템 및 그 방법

Also Published As

Publication number Publication date
SG105486A1 (en) 2004-08-27
US9894316B2 (en) 2018-02-13
JP2010011511A (ja) 2010-01-14
AU777595B2 (en) 2004-10-21
CN1321945A (zh) 2001-11-14
JP4483997B2 (ja) 2010-06-16
EP1137289B1 (en) 2012-05-02
US20020015444A1 (en) 2002-02-07
JP5088594B2 (ja) 2012-12-05
JP2011024250A (ja) 2011-02-03
AU2646301A (en) 2001-09-20
KR100875781B1 (ko) 2008-12-24
US20050201461A1 (en) 2005-09-15
US8792552B2 (en) 2014-07-29
HK1043636A1 (zh) 2002-09-20
JP5327366B2 (ja) 2013-10-30
US20150070581A1 (en) 2015-03-12
CN1595985A (zh) 2005-03-16
EP2369842B1 (en) 2015-08-19
EP1137289A3 (en) 2005-09-14
US7782941B2 (en) 2010-08-24
US20110019084A1 (en) 2011-01-27
EP2369842A1 (en) 2011-09-28
JP2012235516A (ja) 2012-11-29
CN1595985B (zh) 2012-07-04
US7020196B2 (en) 2006-03-28
EP1137289A2 (en) 2001-09-26

Similar Documents

Publication Publication Date Title
KR100875781B1 (ko) 콘텐츠 공급 장치 및 방법과, 기록 매체
US6463445B1 (en) Multimedia information retrieval system and method including format conversion system and method
US6574279B1 (en) Video transcoding using syntactic and semantic clues
US7266148B2 (en) Video transcoding apparatus
US6490320B1 (en) Adaptable bitstream video delivery system
US6493386B1 (en) Object based bitstream transcoder
US8218617B2 (en) Method and system for optimal video transcoding based on utility function descriptors
JP4622121B2 (ja) データ変換装置および方法、並びに、符号化装置および方法
US20040013399A1 (en) Information processing method and apparatus
CN101827262B (zh) 解码设备和方法
Vetro et al. Media conversions to support mobile users
KR100932727B1 (ko) 비디오 스트림 전환 장치 및 방법
WO2004030367A1 (ja) 動画像データストリームの変換装置及び方法
JP2004007571A (ja) 符号化装置および方法、復号装置および方法、編集装置および方法、記録媒体、並びにプログラム
Out et al. SISTEM INFORMASI MULTIMEDIA

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121207

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20131206

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20141205

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20151204

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20161209

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20171208

Year of fee payment: 10