KR100977646B1 - 화상 데이터 분배 시스템, 장치, 및 방법 - Google Patents

화상 데이터 분배 시스템, 장치, 및 방법 Download PDF

Info

Publication number
KR100977646B1
KR100977646B1 KR1020087004072A KR20087004072A KR100977646B1 KR 100977646 B1 KR100977646 B1 KR 100977646B1 KR 1020087004072 A KR1020087004072 A KR 1020087004072A KR 20087004072 A KR20087004072 A KR 20087004072A KR 100977646 B1 KR100977646 B1 KR 100977646B1
Authority
KR
South Korea
Prior art keywords
data
image
coded data
image data
delete delete
Prior art date
Application number
KR1020087004072A
Other languages
English (en)
Other versions
KR20080024544A (ko
Inventor
히로아끼 데이
Original Assignee
닛본 덴끼 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 닛본 덴끼 가부시끼가이샤 filed Critical 닛본 덴끼 가부시끼가이샤
Publication of KR20080024544A publication Critical patent/KR20080024544A/ko
Application granted granted Critical
Publication of KR100977646B1 publication Critical patent/KR100977646B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0009—Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the channel coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0014—Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the source coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0033—Systems modifying transmission characteristics according to link quality, e.g. power backoff arrangements specific to the transmitter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/02—Arrangements for detecting or preventing errors in the information received by diversity reception
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2347—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
    • H04N21/23476—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption by partially encrypting, e.g. encrypting the ending portion of a movie
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4516—Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/64—Addressing
    • H04N21/6405—Multicasting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/162—Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

화상 데이터 분배 장치(101)는, 화상 부호화 데이터 1 송신부(105), 화상 부호화 데이터 2 송신부(106), 세션 관리부(103)를 구비하고, 동일 화상의 복수의 화상 부호화 데이터를, 상이한 세션으로 분배하거나, 혹은 화상 프레임이나 화상 블록의 종별이 상이한 화상 데이터를, 상이한 세션으로 분배하고, 이 때 세션마다 전송로에서의 라우팅의 우선도 제어나 무선 전송로이면 전력 제어를 행하고, 화상 데이터 수신 장치는(108)는, 화상 부호화 데이터 1 수신부(110), 화상 부호화 데이터 2 수신부(111), 세션 정보 수신부(109), 부호화 데이터를 재구성하는 부호화 데이터 재구성부(112), 디코더(113)를 구비하고, 1개 이상의 세션으로부터 정상적으로 수신할 수 있었던 화상 부호화 데이터 중에서 화상 품질에 기초하여 부호화 데이터를 선택하여 복호화한다.
Figure R1020087004072
화상 데이터 분배 장치, 화상 부호화 데이터, 세션, 라우팅, 우선도, 전력 제어

Description

화상 데이터 분배 시스템, 장치, 및 방법{IMAGE DATA DISTRIBUTION SYSTEM, DEVICE, AND METHOD}
본 발명은, 부호화된 화상 데이터를 분배하는(distribute) 방법, 장치, 및 시스템, 그리고 화상 데이터의 분배 장치와 수신 장치를 각각 구성하는 컴퓨터로 실행되는 컴퓨터 프로그램에 관한 것으로서, 특히 수신 장치에서의 동화상 데이터 등의 수신 환경에 따라서 양호한 화질의 재생을 가능하게 하기에 적합하게 되는 방법, 장치, 시스템, 그리고 컴퓨터 프로그램에 관한 것이다.
최근, 동화상 데이터를 효율적으로 전송하는 방법으로서, 프레임간 예측에 기초한 고능률 압축에 의한 부호화 데이터를 전송하는 방법이 많이 이용되고 있다. 이들 방식에서는, 시간적으로 전후의 프레임으로부터 부호화 화상을 예측하여 얻어진 예측 파라미터와 예측 잔차 화상 데이터를 부호화함으로써, 시간 방향의 상관이 높은 동화상 데이터의 정보량을 삭감한다. 또한, 예측 잔차 화상 데이터를 변환 부호화나 양자화에 의해 고능률로 압축 부호화함으로써, 적은 전송 대역에서의 동화상 데이터 전송을 가능하게 하고 있다.
그 대표예로서는 MPEG(Moving Picture Experts Group)-1, MPEG-2, MPEG-4 등 의 압축 부호화 방식을 이용하는 방법이 있다. 이들 압축 부호화 방식에서는, 입력 화상 프레임을 매크로 블록이라고 불리는 일정 사이즈의 사각형 영역 단위로 움직임 보상에 의한 프레임간 예측을 행하고, 얻어진 움직임 벡터와, 예측 잔차 화상 데이터에 2차원 이산 코사인 변환 및 양자화를 실시하여 압축한 신호 데이터를 가변 길이 부호화한다.
이와 같은 동화상 압축 부호화 정보를, 패킷 교환 방식을 이용한 IP(Internet Protocol) 네트워크에 분배하는 방법은 다수 있고, 또한 무선 전송로를 이용한 동화상의 분배로 전개해 가는 것을 생각할 수 있다.
동화상 데이터의 분배에 있어서, 네트워크의 트래픽의 상황에 의해 패킷 손실이 발생한 경우, 혹은 무선 전송로에서의 무선 오류나 손실이 발생한 경우, 상실된 데이터의 재송 요구를 행하는 방법이 일반적이다.
또한, 무선 전송로에서의 통신에서는, 개개의 수신자의 무선 수신 환경에 따라 송수신 전력 제어 등을 행하여, 데이터의 통신 품질을 확보하고, 수신 데이터의 안정화를 도모하고 있다.
또한, 화질이 상이한 화상 정보를 전송하는 방법으로서, 데이터 레이트가 낮은 저화질 성분의 화상 정보의 전송과 데이터 레이트가 높은 고화질 성분의 화상 정보의 전송을 적응적으로 전환하고, 화질을 열화시키지 않고 전송 효율의 향상을 도모한 시스템이 알려져 있다(예를 들면 특허 문헌 1). 또한, 송신측에 상이한 레이트의 복수의 영상 데이터를 구비한 것으로서, 영상 송신 장치에 복수의 영상 레이트를 갖는 영상 데이터 (1)∼(3)을 준비하고, 영상 수신 장치가, 레이트 전환 요 구 신호를 영상 송신 장치에 보내고, 영상 데이터(1)∼(3)을 전환함으로써, 영상 정지를 방지하고, 고화질의 영상 데이터를 송신하도록 한 장치도 알려져 있다(예를 들면 특허 문헌 2). 또한, 수신 데이터를 선택해서 재구성하여 복호화하는 장치로서, 수신측 장치 내의 재구성 수단이, 화상 프레임의 동일 부분에 대하여 수신한 복수의 블록 데이터(송신측 장치로부터 화상 프레임 중의 동일 부분에 대하여 복수의 블록 데이터가 송신된다)로부터 정상적인 블록 데이터를 선택하여 해당 화상 프레임을 재구성하고, 재구성된 화상 프레임을 복호화하는 화상 복호화 수단을 구비한 구성도 알려져 있다(예를 들면 특허 문헌 3). 또한, 후술되는 RTP 헤더 정보 등에 대해서는 이하의 비특허 문헌 1 등이 참조된다.
특허 문헌 1
일본 특개평10-294941호 공보(제5-6페이지, 도 1)
특허 문헌 2
일본 특개평11-187367호 공보(제3-4페이지, 도 1)
특허 문헌 3
일본 특개평10-224746호 공보(제4-6페이지, 도 1)
비특허 문헌 1
Schulzrinne, H., Casner, S., Frederick, R., and V.Jacobson, "RTP:A Transport Protocol for Real-Time Applications", RFC 1889, January 1996, 5.1 RTP Fixed Header Fields. 인터넷<URL//www.ietf.org/tfc.html로부터 입수되는, ftp://ftp.rfc-editor.org/in-notes/rfc1889.txt>
그런데, 패킷 손실 발생시, 재송 요구에 의한 데이터 손실을 보완한다고 하는 종래의 방법에서는, 재송 요구 정보, 및 재송되어 오는 데이터가, 네트워크 트래픽을 더욱 증대시키는 결과로 된다. 이 때문에, 트래픽의 폭주에 의해 패킷이 손실된 경우, 본질적인 해결로 되지 않는다. 또한, 수신자마다의 무선 전송로에서의 전력 제어는, 복잡한 처리가 필요해진다.
또한, 재송 제어나, 수신자마다의 무선 전송로에서의 전력 제어라는 방법을 채용해도, 패킷의 손실이 발생하는 경우가 있다. 패킷 손실에 대한 수신측에서의 대책으로서, 정확하게 디코드 가능한 시간적으로 전후의 프레임의 화상이나 동일 프레임 내의 주위의 화상 데이터로부터, 오류를 가능한 한 눈에 띄지 않게 하는 화상 데이터를 생성하는 에러 컨실먼트 방법이 있다. 그러나, 이 에러 컨실먼트 방법에 의해서도, 복호화 화상의 혼란을 제거하는 것은 불가능하다. 또한, 프레임간 예측을 이용하고 있기 때문에, 한번 발생한 화상의 혼란이, 후속 프레임에도 전파된다는 문제가 있다.
따라서, 본 발명은 상기 사정을 고려하여 이루어진 것으로서, 본 발명의 제1 목적은, 동화상의 분배에 있어서, 트래픽의 증가를 작게 억제하면서, 수신자의 수신 환경에 따라 분배 화상 품질의 최적화를 도모하는 방법, 장치, 시스템, 및 컴퓨터 프로그램을 제공하는 것이다.
또한, 본 발명의 제2 목적은, 화상의 분배 방식의 신뢰성을 높이기 위해, 적어도 1개 이상의 세션으로부터의 화상 데이터를 수신하고, 화상 품질에 따라 데이터를 선택하여 복호화함으로써, 패킷 손실 발생시의 화상의 혼란을 억제하는 것을 가능하게 한 방법, 장치, 시스템, 및 컴퓨터 프로그램을 제공하는 것이다.
본 발명의 또 다른 목적은, 상기 제1, 제2 목적을 달성하기 위해, 송수신자 양방에 가해지는 처리량을 적게 억제하는 것을 가능하게 한 방법, 장치, 시스템, 및 컴퓨터 프로그램을 제공하는 것에 있다.
본 발명의 또 다른 목적은, 수신측으로부터의 피드백 정보를 송신측에 보내지 않고, 상기 제1, 제2 목적을 달성하는 방법, 장치, 시스템, 및 컴퓨터 프로그램을 제공하는 것에 있다.
또한 본 발명의 다른 목적은, 상기 제1, 제2 목적을 달성하면서, 수신 장치측에서 필요하게 되는 소비 전력의 증대를 억제하는 것을 가능하게 하는 방법, 장치, 시스템, 및 컴퓨터 프로그램을 제공하는 것에 있다.
상기 목적 중 적어도 하나를 달성하는 본 발명의 하나의 관점에 따른 장치는, 동일 화상의 복수의 화상 부호화 데이터를 분배할 때, 화상 품질에 따라서, 화상 부호화 데이터를 분배할 세션을 선택하는 수단과, 선택된 세션으로 화상 부호화 데이터를 분배하는 수단을 구비하고 있다. 본 발명에 있어서는, 이 때에, 동일 화상의 복수의 화상 부호화 데이터를, 시간차를 두고 분배하는 구성으로 하여도 된다.
본 발명에 있어서는, 동일 화상의 복수의 화상 부호화 데이터를 분배할 때, 화상 품질에 기초하여 분배할 세션을 선택하는 수단과, 화상의 품질에 따라 선택되는 세션마다, 전송로에서의 라우팅의 우선도 제어 및/또는 무선 전송로에서의 전력 제어를 행하는 수단을 구비한 구성으로 하여도 된다.
본 발명의 다른 관점에 따른 장치는, 화상 부호화 데이터를 분배할 때, 화상 프레임 및/또는 화상 블록의 종별에 기초하여, 분배할 세션을 선택하는 수단과, 선택된 세션으로 화상 부호화 데이터를 분배하는 수단을 구비하고 있다.
본 발명에 있어서는, 화상 부호화 데이터를 분배할 때, 화상 프레임 및/또는 화상 블록의 종별에 기초하여, 분배할 세션을 선택하는 수단과, 화상의 품질에 따라 선택되는 세션마다, 전송로에서의 라우팅의 우선도 제어 및/또는 무선 전송로에서의 전력 제어를 행하는 수단을 구비한 구성으로 하여도 된다.
본 발명의 다른 관점에 따른 장치는, 화상 부호화 데이터를 분배할 때, 화상 부호화 데이터를 분배하는 복수의 세션을 선택하는 수단과, 선택된 세션으로 화상 부호화 데이터를 분배하는 수단을 구비하고 있다.
본 발명에 있어서는, 화상 부호화 데이터를 분배할 세션을 선택하는 수단과, 화상의 품질에 따라 선택되는 세션마다, 전송로에서의 라우팅의 우선도 제어 및/또는 무선 전송로에서의 전력 제어를 행하는 수단을 구비한 구성으로 하여도 된다.
본 발명에 있어서는, 상기 동일 화상의 복수의 화상 부호화 데이터는, 부호화 방식 및 프레임 구성이 동일하고, 그 각 송신 단위는, 각각 동일 프레임의 동일 부위가 부호화된 데이터이다.
본 발명의 다른 관점에 따른 장치는, 화상 데이터 분배 장치로부터 분배되는, 적어도 1개의 동화상 부호화 데이터를 수신하는 수단과, 정상적으로 수신된 부호화 데이터 중에서, 화상 품질에 기초하여, 데이터를 선택하는 수단과, 선택된 데이터를 복호화하는 수단을 구비하고 있다.
본 발명의 또 다른 관점에 따른 장치는, 화상 데이터 분배 장치로부터 분배되는, 적어도 1개의 동화상 부호화 데이터를 수신하는 수단과, 적어도 1개의 화상 데이터의 수신의 유무를, 수신 데이터의 오류/손실률, 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단과, 정상적으로 수신된 부호화 데이터 중에서, 화상 품질에 기초하여, 데이터를 선택하는 수단과, 선택된 데이터를 복호화하는 수단을 구비하고 있다.
본 발명의 다른 관점에 따른 방법은, 화상 데이터 분배 장치로부터 화상 데이터 수신 장치에 화상 데이터를 분배하는 제어 방법으로서, 상기 화상 데이터 분배 장치가, 동일 화상의 복수의 화상 부호화 데이터를 분배할 때, 화상 품질에 기초하여 분배할 세션을 선택하는 단계와, 선택된 세션으로 화상 부호화 데이터를 분배하는 단계를 포함한다.
본 발명의 다른 관점에 따른 방법은, 상기 화상 데이터 분배 장치가, 동일 화상의 복수의 화상 부호화 데이터를 분배할 때, 화상 품질에 기초하여 분배할 세션을 선택하는 단계와, 상기 화상 데이터 분배 장치가, 화상의 품질에 따라 선택되는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로인 경우에 전력 제어를 행하는 단계를 포함한다.
본 발명의 다른 관점에 따른 방법은, 화상 데이터 분배 장치로부터 화상 데이터 수신 장치에 화상 데이터를 분배하는 제어 방법으로서, 상기 화상 데이터 분배 장치가, 화상 부호화 데이터를 분배할 때, 화상 프레임 및/또는 화상 블록의 종별에 기초하여, 분배할 세션을 선택하는 단계와, 선택된 세션으로 화상 부호화 데이터를 분배하는 단계를 포함한다.
본 발명의 다른 관점에 따른 방법은, 상기 화상 데이터 분배 장치가, 화상 부호화 데이터를 분배할 때, 화상 프레임 및/또는 화상 블록의 종별에 기초하여, 분배할 세션을 선택하는 단계와, 화상의 품질에 따라 선택되는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로인 경우에 전력 제어를 행하는 단계를 포함한다.
본 발명의 다른 관점에 따른 방법은, 상기 화상 데이터 수신 장치는, 상기 화상 데이터 분배 장치로부터 분배되는 적어도 1개의 동화상 부호화 데이터를 수신하는 단계와, 상기 화상 데이터 수신 장치는, 정상적으로 수신된 부호화 데이터 중에서, 화상 품질에 기초하여, 데이터를 선택하는 단계와, 선택된 데이터를 복호화하는 단계를 포함한다.
본 발명의 다른 관점에 따른 방법은, 상기 화상 데이터 수신 장치는, 상기 화상 데이터 분배 장치로부터 분배되는 적어도 1개의 동화상 부호화 데이터를 수신하는 단계와, 적어도 1개의 화상 데이터의 수신의 유무를, 수신 데이터의 오류/손실률, 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 단계와, 상기 화상 데이터 수신 장치는, 정상적으로 수신된 부호화 데이터 중에서, 화상 품질에 기초하여, 데이터를 선택하는 단계와, 선택된 데이터를 복호화하는 단계를 포함한다.
본 발명에 따른 시스템에 있어서는, 화상 데이터 분배 장치는, 동일한 화상의 복수의 동화상 데이터를, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고, 상기 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 수신한 동화상 데이터 중, 화상 품질에 기초하여 데이터를 선택하여, 1개의 동화상 데이터로 재구성하는 수단과, 재구성된 데이터를 복호화하는 수단을 구비하고 있다.
본 발명에 따른 시스템에 있어서는, 화상 데이터 분배 장치는, 동일한 화상의 복수의 동화상 데이터를, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고, 상기 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단과, 수신한 동화상 데이터 중, 화상 품질에 기초하여 데이터를 선택하여, 1개의 동화상 데이터로 재구성하는 수단과, 재구성된 데이터를 복호화하는 수단을 구비하고 있다.
본 발명에 따른 시스템에 있어서는, 상기 화상 데이터 분배 장치는, 동화상 데이터와, 동화상 데이터의 해당 프레임 중 적어도 일부를 인트라-매크로 블록 부호화한 부호화 데이터를, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다.
본 발명에 따른 시스템에 있어서는, 상기 화상 데이터 분배 장치는, 동화상 데이터의 I(Intra) 픽쳐, P(Predictive) 픽쳐, 및 동화상의 부호화에 이용한 부호화 방식에 존재하는 경우에는, B(Bidirectionally-predictive) 픽쳐 중, I 픽쳐와 그 이외의 픽쳐에서 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다, 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고, 상기 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 수신한 동화상 데이터를, 1개의 동화상 데이터로 재구성하는 수단과, 재구성된 데이터를 복호화하는 수단을 구비하고 있다.
본 발명에 따른 시스템에 있어서는, 상기 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 B 픽쳐 중, I/P 픽쳐와 그 이외의 픽쳐에서, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다, 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다.
본 발명에 따른 시스템에 있어서는, 상기 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 B 픽쳐 중 I 픽쳐, P 픽쳐, B 픽쳐에서, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다.
본 발명에 따른 시스템에서는, 상기 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 동화상의 부호화에 이용한 부호화 방식에 존재하는 경우에는 B 픽쳐, 및 동화상 데이터의 해당 프레임 중 적어도 일부를 인트라-매크로 블록(Intra-MB) 부호화한 부호화 데이터를, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다.
본 발명에 따르면, 동화상의 분배에 있어서, 네트워크 트래픽의 증가를 작게 억제하면서, 수신자의 수신 환경에 따라 분배 화상을 최적화할 수 있다.
또한 본 발명에 따르면, 전송로에서의 데이터 오류, 누락에 대하여 내성이 있는 분배가 가능하게 되어, 동화상 분배의 신뢰성을 높일 수 있다.
또한, 본 발명에 따르면, 상기 2개의 효과를 얻기 때문에, 송수신자 쌍방에 필요해지는 처리량의 증가를 작게 억제하는 것이 가능하다.
본 발명에 따르면, 수신측으로부터 송신측으로 피드백 정보를 보내는 일 없이 상기 2개의 효과를 얻을 수 있다.
또한, 본 발명에 따르면, 상기의 2개의 효과를 얻기 때문에, 수신 장치에서 필요하게 되는 소비 전력의 증대를 작게 억제할 수 있다.
<발명을 실시하기 위한 최선의 형태>
본 발명을 실시하기 위한 최선의 형태와 실시예에 대하여 이하에 설명한다.
[발명의 제1 실시 형태]
본 발명의 제1 실시 형태에 있어서, 화상 데이터 분배 장치는, 동일한 화상의 복수의 동화상 데이터(예를 들면 상이한 화상 품질의 동화상 데이터)를, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다, 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 화상 데이터 수신 장치측은, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 수신한 동화상 데이터 중, 화상 품질에 기초하여 데이터를 선택하고, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다.
또한, 본 발명의 제1 실시 형태에 있어서, 화상 데이터 수신 장치는, 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제1 실시예]
본 발명의 제1 실시예를 도면을 참조하여 설명한다. 도 1은 본 발명의 제1 실시예의 구성을 도시하고 있다. 도 1에 도시한 바와 같이 화상 부호화 데이터를 분배하는 화상 데이터 분배 장치(101)와, 화상 데이터 수신 장치(108)와, 화상 부호화 데이터를 전송하기 위한 전송로(107)를 구비하고 있다. 본 실시예에서는, 화상 데이터 분배 장치(101)는, IP(Internet Protocol)망인 전송로(107)에 접속되어 있고, UDP(User Datagram Protocol)/IP를 이용하여 화상 부호화 데이터를 분배하고, 화상 데이터 수신 장치(108)는, IP망에 접속되는 클라이언트 단말기인 것으로 한다. 또한, 본 실시예에서는, 어디까지나 설명을 간단히 하기 위해, 분배하는 화상 데이터 수를 「2」로서 설명하지만, 본 발명에 있어서 분배하는 화상 데이터 수가 2에 한정되는 것이 아님은 물론이다.
화상 데이터 분배 장치(101)는, 분배 정보 송신부(102)와, 세션 정보 관리부(103)와, 화상 데이터 축적/생성부(104)와, 화상 부호화 데이터 1 송신부(105)와, 화상 부호화 데이터 2 송신부(106)를 구비하고 있다.
화상 데이터 수신 장치(108)는, 세션 정보 수신부(109)와, 화상 부호화 데이터 1 수신부(110) 및 화상 부호화 데이터 2 수신부(111)와, 부호화 데이터 재구성부(112)와, 디코더(113)를 구비하고 있다. 이하, 화상 데이터 분배 장치(101), 화상 데이터 수신 장치(108)의 동작에 대하여 차례로 설명한다.
화상 데이터 분배 장치(101)는, 화상 데이터 축적/생성부(104)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 부호화하여 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상 데이터를 변환하여 생성된 화상 데이터를,
세션 정보 관리부(103)에서 설정된, 세션마다의 전송로(107)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, 화상 부호화 데이터 1 송신부(105) 및 화상 부호화 데이터 2 송신부(106)에 의해, 전송로(107) 경유로 송신한다. 우선 라우팅은, 특정 프로토콜과 포트 번호를 지정함으로써, 특정한 어플리케이션 데이터를 우선하여 송수신 가능하게 한 것으로서, 이 실시예 및 이하 의 각 실시예에서는, 공지의 임의의 방법을 이용할 수 있다. 또한 무선 전송로에서의 전력 제어는, 송신 전력을 제어하여, 적절한 수신 레벨로 제어하기 위한 것으로서, 이 실시예 및 이하의 각 실시예에서는, 공지의 임의의 방법을 이용할 수 있다.
세션 정보 관리부(103)에서는, 화상 부호화 데이터 1 및 화상 부호화 데이터 2의 화상 품질(압축률)에 관한 정보를 관리하여, 분배 정보 송신부(102)로부터 화상 데이터 수신 장치(108)에 통지한다.
화상 부호화 데이터 1 송신부(105) 및 화상 부호화 데이터 2 송신부(106)는, 화상 데이터 수신 장치(108)에서, 중복하는 복수의 화상 데이터가 수신된 경우에, 데이터의 선택을 할 수 있도록, 또한 수신한 데이터의 순서가 바뀌어 있더라도, 정확하게 재배열되도록, RTP(Real-time Transport Protocol)에 상당하는 정보(예를 들면 RTP 헤더)를 부가하는 기능을 갖는다. RTP 헤더에 대해서는 상기 비특허 문헌 1 등이 참조된다. 또한, 화상 부호화 데이터 1 및 화상 부호화 데이터 2의 각 송신 단위는, 각각 동일 화상의 동일 프레임의 동일 부위를 부호화한 데이터로 하고, 이와 동일한 RTP 시퀀스 번호를 부여하고, 또한 어느 화상 부호화 데이터인지를 나타내는, 페이로드 타입 및/또는 SSRC(Synchronization Source Identifier) 및/또는 CSRC(Contributing Source Identifier)를 부여하여도 된다.
또한, 송신시, 화상 부호화 데이터 1에 대하여 화상 부호화 데이터 2를, 예를 들면 전송로(107)에서의 데이터의 오류, 혹은 손실의 버스트 길이보다 길어지는 시간차를 두고 송신하면, 전송로에서 화상 부호화 데이터가 양방 모두 오류 혹은 손실의 영향을 받을 가능성이 저하되고, 화상 데이터 수신 장치(108)가 이 시간차 이상의 수신 버퍼를 구비하는 경우, 더 안정된 화상 데이터의 분배를 할 수 있다. 이 때, 화상 부호화 데이터 1과 화상 부호화 데이터 2의 화상 품질을 동일하게 설정하거나, 혹은 화상 부호화 데이터 1을 화상 부호화 데이터 1 송신부(105) 및 화상 부호화 데이터 2 송신부(106)의 쌍방으로부터 송신하면, 전송로에서의 오류나 손실의 영향이 있었던 경우의, 화상 데이터 수신 장치에서의 재생 화상 품질의 열화를 최소한으로 억제하는 것이 가능하게 된다.
본 실시예에 있어서, 동일 화상의 복수의 화상 부호화 데이터의 송신의 시간차(시간 간격)에 대하여, 세션 정보 관리부(103)로 관리하여, 분배 정보 송신부(102)로부터 화상 데이터 수신 장치(108)에 통지하는 구성으로 하여도 되고, 혹은 송신의 시간차에 대하여, 미리 화상 데이터 분배 장치(101) 및 화상 데이터 수신 장치(108) 사이에서 정해 두고, 해당 시간차에 기초하여, 화상 데이터 수신 장치(108)가 수신 버퍼량을 설정하는 구성으로 하여도 된다.
화상 데이터 수신 장치(108)는, 화상 데이터 분배 장치(101)로부터의 예를 들면 화상 품질(압축률) 등의 화상 부호화에 관한 정보를, 세션 정보 수신부(109)에서 수신하고, 이 정보로부터, 전송로(107)로부터 수신한 화상 데이터의 부호화 정보를 안다.
또한, 세션 정보 관리부(103)는,
·화상 부호화 데이터 1 및 화상 부호화 데이터 2의 부호화 설정,
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(102)에 의해 화상 데이터 수신 장치(108)에 통지하거나, 혹은 이들 정보를, 미리 화상 데이터 분배 장치(101) 및 화상 데이터 수신 장치(108) 사이에서 설정해 두어도 된다.
화상 부호화 데이터 1과 화상 부호화 데이터 2 모두 수신할 수 있었던 경우, 중복하는 화상 데이터에 대하여, 부호화 데이터 재구성부(112)는, RTP에 상당하는 기능, RTP 헤더의 시퀀스 번호, 페이로드 타입, SSRC나 CSRC, 및/또는 세션 정보 수신부(109)에서 수신된 화상 품질에 관한 정보에 기초해서 선택하여, 1개의 화상 데이터로 재구성하고, 재구성한 데이터를 디코더(113)에 출력한다. 화상 데이터는, 1개만 복호화하면 되기 때문에, 디코더(113)의 복호화 처리의 부담은 증가하지 않는다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조는, 이하와 같은 것으로 된다.
화상 부호화 데이터 1과 화상 부호화 데이터 2의 품질(압축률 등)을 변경하여, 예를 들면 화상 부호화 데이터 1을 더 고품질로 한다.
화상 부호화 데이터 1 송신부(105) 및 화상 부호화 데이터 2 송신부(106)에서, 화상 부호화 데이터 2를, 전송로(107)에 있어서 화상 부호화 데이터 1보다 높은 우선도로 라우팅되도록 설정한다. 혹은, 화상 부호화 데이터 1 송신부(105) 및 화상 부호화 데이터 2 송신부(106)에서, 화상 부호화 데이터 2를, 무선 전송로에 있어서, 더 높은 전력으로 송신하도록 설정한다.
수신자 A의 화상 데이터 수신 장치(108)와 수신자 B의 화상 데이터 수신 장치(108)가, 분배되는 동화상 데이터를 수신하고 있는 것으로 하고, 수신자 A의 화상 데이터 수신 장치(108)는 수신자 B의 화상 데이터 수신 장치(108)와 비교하여, 예를 들면 네트워크의 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호한 것으로 한다.
수신자 A의 화상 데이터 수신 장치(108)는, 네트워크의 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호하기 때문에, 화상 부호화 데이터 1의 고품질의 화상 데이터와, 화상 부호화 데이터 2의 저품질의 화상 데이터 양방을 수신할 수 있다. 그리고, 수신자 A의 화상 데이터 수신 장치(108)에서는, 만일 화상 부호화 데이터 1의 화상 데이터에 오류나 누락이 있었다고 해도, 해당 개소를 화상 부호화 데이터 2의 화상 데이터로 보완할 수 있기 때문에, 수신 환경의 양호함에 부합한, 고품질로 안정된 동화상 데이터를 재생할 수 있다.
이 때, 예를 들면 수신자 A의 화상 데이터 수신 장치(108)가,
배터리/전지로 동작하는 경우와 같이, 이용 가능한 전력에 제한이 있는 환경에서 사용되는 경우, 및/또는,
수신 환경이 양호하고, 화상 부호화 데이터 1을, 거의 오류나 누락 없이 수신할 수 있는 경우에는, 화상 부호화 데이터 2의 수신을 정지하여, 장치의 사용 시간을 가능한 한 길게 하는 제어를 행해도 된다.
반대로, 화상 데이터 수신 장치(108)가, 대용량 배터리나 AC 전원이 접속된 경우에는, 화상 부호화 데이터 1, 화상 부호화 데이터 2 모두 수신하도록 하여도 된다. 이와 같이, 이용 가능한 전력이나 수신 환경에 따라서, 데이터 수신의 유무를 제어할 수도 있다. 혹은, 수신 화상 데이터 수를, 수신자 A가, 화상 데이터 수신 장치(108)에 설정할 수 있도록 구성하여도 된다.
수신자 B의 화상 데이터 수신 장치(108)는, 고우선도로 라우팅, 혹은 고전력으로 무선 분배된 화상 부호화 데이터 2는 수신할 수 있고, 수신 환경이 뒤떨어지는 만큼, 수신자 A의 화상 데이터 수신 장치(108)와 비교하여 품질은 뒤떨어지지만, 동화상 데이터를 재생할 수 있다.
이 때도, 예를 들면 수신자 B의 화상 데이터 수신 장치(108)가,
배터리/전지로 동작하는 경우와 같이, 전력에 제한이 있는 환경에서 사용되는 경우, 화상 데이터 1의 수신을 정지하고, 화상 데이터 2의 수신만으로 하여, 장치의 사용 시간을 가능한 한 길게 하도록 하여도 된다.
반대로, 수신자 B의 화상 데이터 수신 장치(108)가, 대용량 배터리나 AC 전원이 접속된 경우에는, 화상 데이터 1, 화상 데이터 2와도 수신하도록 하여도 된다. 이와 같이, 이용 가능한 전력이나 수신 환경에 따라서, 데이터 수신의 유무를 제어할 수도 있다.
혹은, 수신 화상 데이터 수를, 수신자 B가 화상 데이터 수신 장치(108)에 설정할 수 있도록 하여도 된다.
또한, 압축률이 높고, 더 저품질의 화상 부호화 데이터 2의 분배는, 고품질의 화상 부호화 데이터 1과 비교하여, 트래픽에 여유가 없는 네트워크에서의 분배에 적합하고, 또한 무선 전송로에서 더 높은 전력으로 송신하는 것이 용이하기 때문에, 한정된 자원 환경하에서의 분배에 적용하는 것이 가능하다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, 화상 부호화 데이터 1 및 화상 부호화 데이터 2, 및 이들의 화상 부호화에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 됨은 물론이다.
본 실시예에 있어서, 화상 부호화 데이터 1 및 화상 부호화 데이터 2를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(101)에 있어서의, 분배 정보 송신부(102)와, 세션 정보 관리부(103)와, 화상 데이터 축적/생성부(104)와, 화상 부호화 데이터 1 송신부(105)와, 화상 부호화 데이터 2 송신부(106)에 대하여, 화상 데이터 분배 장치(101)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(108)에 있어서의, 세션 정보 수신부(109)와, 화상 부호화 데이터 1 수신부(110) 및 화상 부호화 데이터 2 수신부(111)와, 부호화 데이터 재구성부(112)와, 디코더(113)에 대하여, 화상 데이터 수신 장치(108)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제2 실시 형태]
본 발명의 제2 실시 형태에서는, 화상 데이터 분배 장치는, 동화상 데이터와, 동화상 데이터의 해당 프레임 중 적어도 일부를 인트라-매크로 블록 부호화한 부호화 데이터를, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 또한 화상 데이터 수신 장치측은, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 수신한 동화상 데이터 중, 화상 품질에 기초하여 데이터를 선택하여, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제2 실시예]
다음으로 본 발명의 제2 실시예로서 도면을 참조하면서 설명한다. 도 2는 본 발명의 제2 실시예의 구성을 도시한 도면이다. 도 2에 도시한 바와 같이 화상 데이터 분배 장치(201)와, 화상 데이터 수신 장치(208), 및 동화상 부호화 데이터를 전송하기 위한 전송로(207)를 구비하고 있다. 본 실시예에서는, 화상 데이터 분배 장치(201)는 IP(Internet Protocol)망인 전송로(207)에 접속되어 있고, UDP/IP를 이용하여 화상 부호화 데이터를 분배하고, 화상 데이터 수신 장치(208)는, IP망에 접속되는 클라이언트 단말기인 것으로 한다.
화상 데이터 분배 장치(201)는, 분배 정보 송신부(202)와, 세션 정보 관리부(203)와, 화상 데이터 축적/생성부(204)와, 화상 부호화 데이터 송신부(205)와, 인트라-매크로 블록(Intra-MB) 부호화 데이터 송신부(206)를 구비하고 있다.
화상 데이터 수신 장치(208)는, 세션 정보 수신부(209)와, 화상 부호화 데이터 수신부(210), 인트라-매크로 블록(Intra-MB) 부호화 데이터 수신부(211), 부호화 데이터 재구성부(212)와, 디코더(213)를 구비하고 있다. 이하, 화상 데이터 분배 장치(201), 화상 데이터 수신 장치(208)의 동작을 차례로 설명한다.
화상 데이터 분배 장치(201)는, 화상 데이터 축적/생성부(204)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 부호화하여 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상 데이터를 변환하여 생성된 화상 데이터를,
세션 정보 관리부(203)에서 설정된, 세션마다의 전송로(207)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, 화상 부호화 데이터 송신부(205) 및 인트라-매크로 블록(Intra-MB) 부호화 데이터 송신부(206)에 의해, 전송로(207) 경유로 송신한다.
또한, 세션 정보 관리부(203)에서, 부호화 데이터의 종별에 관한 정보를 관리하여, 분배 정보 송신부(202)로부터 화상 데이터 수신 장치(208)에 통지한다.
화상 부호화 데이터 송신부(205) 및 Intra-MB 부호화 데이터 송신부(206)는, 화상 데이터 수신 장치(208)에서, 중복하는 복수의 화상 데이터가 수신된 경우에, 데이터의 선택을 할 수 있도록, 또한 수신한 데이터의 순서가 바뀌어 있더라도, 정확하게 재배열되도록, RTP에 상당하는 정보를 부가하는 기능을 갖는다. 이 때, 인트라-매크로 블록 부호화 데이터가 부호화하는 화상의 동일 부위의 화상 부호화 데이터에, 동일한 RTP 시퀀스 번호를 부여하고, 또한 화상 부호화 데이터와 인트라- 매크로 블록의 어느 것인지를 나타내는 페이로드 타입 및/또는 SSRC 및/또는 CSRC를 부여하여도 된다.
또한, 본 실시예에 있어서는, 송신시, 화상 부호화 데이터에 대하여, 인트라-매크로 블록 부호화 데이터를, 예를 들면 전송로(207)에서의 데이터의 오류 혹은 손실의 버스트 길이보다 길어지는 시간차를 두고 송신하면, 전송로에서 화상 부호화 데이터와 인트라-매크로 블록 부호화 데이터가 양방 모두 오류 혹은 손실의 영향을 받을 가능성이 저하되고, 화상 데이터 수신 장치가 이 시간차 이상의 수신 버퍼를 구비하는 경우, 더 안정된 화상 데이터의 분배를 할 수 있다.
본 실시예에 있어서, 동일 화상의 복수의 화상 부호화 데이터의 송신의 시간차에 대해서는, 세션 정보 관리부(203)로 관리하여, 분배 정보 송신부(202)로부터 화상 데이터 수신 장치(208)에 통지하거나, 미리 화상 데이터 분배 장치(201) 및 화상 데이터 수신 장치(208) 사이에서 정해 두고, 그 시간차에 기초하여 화상 데이터 수신 장치(208)가 수신 버퍼량을 설정하여도 된다.
화상 데이터 수신 장치(208)는, 화상 데이터 분배 장치(201)로부터의 부호화 데이터 종별에 관한 정보를, 세션 정보 수신부(209)에서 수신하고, 이 정보로부터, 전송로(207)로부터 수신한 부호화 데이터의 종별을 안다.
또한, 세션 정보 관리부(203)는,
·부호화 데이터의 부호화 설정,
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(202)에 의해 화상 데이터 수신 장치(208)에 통지하거나, 혹은 이들 정보를, 미리 화상 데이터 분배 장치(201) 및 화상 데이터 수신 장치(208) 사이에서 설정해 두어도 된다.
화상 부호화 데이터 및 인트라-매크로 블록 부호화 데이터의 양방을 수신할 수 있었던 경우, 중복하는 화상 데이터는, 부호화 데이터 재구성부(212)에서 RTP에 상당하는 기능, RTP 헤더의 시퀀스 번호, 페이로드 타입, SSRC나 CSRC, 및/또는 세션 정보 수신부(209)에서 수신된 정보에 기초하여, 1개의 화상 데이터로 재구성하여, 디코더(213)에 출력한다. 화상 데이터는, 1개만 복호화하면 되기 때문에, 디코더(213)의 복호화 처리의 부담은 증가하지 않는다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조는, 이하와 같은 것으로 된다.
인트라-매크로 블록은, 부호화되는 프레임 중, 움직임 벡터가 큰 개소 등, 일부의 매크로 블록만을 선택하여 부호화한다.
화상 부호화 데이터 송신부(205) 및 Intra-MB 부호화 데이터 송신부(206)에서, 화상 부호화 데이터를, 전송로(207)에 있어서, 인트라-매크로 블록 부호화 데이터보다 높은 우선도로 라우팅되도록 설정한다. 혹은, 화상 부호화 데이터 송신부(205) 및 Intra-MB 부호화 데이터 송신부(206)에서, 화상 부호화 데이터를, 무선 전송로에서 더 높은 전력으로 송신하도록 설정한다.
수신자 A의 화상 데이터 수신 장치(208)와 수신자 B의 화상 데이터 수신 장치(208)가, 분배되는 동화상 데이터를 수신하고 있는 것으로 하고, 수신자 A의 화상 데이터 수신 장치(208)는, 수신자 B의 화상 데이터 수신 장치(208)와 비교하여, 예를 들면 네트워크의 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호한 것으로 한다.
수신자 A의 화상 데이터 수신 장치(208)는, 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호하기 때문에, 화상 부호화 데이터와 인트라-매크로 블록 부호화 데이터의 양방을 수신할 수 있다. 그리고, 수신자 A의 화상 데이터 수신 장치(208)에서는, 만일 화상 부호화 데이터의 일부에 오류나 누락이 있었다고 해도, 해당 개소의 매크로 블록의 부호화 데이터가 인트라-매크로 블록 부호화 데이터로부터 수신할 수 있으면, 보완할 수 있다. 혹은, 오류나 누락에 의해 열화된 매크로 블록을 보정할 수 있기 때문에, 수신 환경의 양호함에 따른, 안정된 동화상 데이터를 재생할 수 있다.
수신자 B의 화상 데이터 수신 장치(208)는, 고우선도로 라우팅, 혹은 고전력으로 무선 분배된 화상 부호화 데이터는 수신할 수 있고, 수신 환경이 뒤떨어지는 만큼, 수신자 A의 화상 데이터 수신 장치(208)보다, 데이터의 오류나 누락이 증가할 가능성은 있지만, 동화상 데이터를 재생할 수 있다.
이 때, 예를 들면 수신자 A, B의 화상 데이터 수신 장치(208)가, 배터리/전지로 동작하는 경우와 같이, 전력에 제한이 있는 환경에서 사용되는 경우, 및/또는, 수신 환경이 양호하고, 화상 부호화 데이터를, 거의 오류나 누락 없이 수신할 수 있는 경우에는, 인트라-매크로 블록 부호화 데이터의 수신을 정지하여, 장치의 사용 시간을 가능한 한 길게 하도록 하여도 된다.
반대로, 대용량 배터리나 AC 전원이 접속된 경우, 화상 부호화 데이터, 인트라-매크로 블록 부호화 데이터 모두 수신하는 등, 이용 가능한 전력이나 수신 환경에 따라서, 데이터 수신의 유무를 제어할 수도 있다.
본 실시예에 있어서는, 이 수신 화상 부호화 데이터의 종별을, 수신자가, 화상 데이터 수신 장치(208)에 설정할 수 있는 구성으로 하여도 된다.
또한, 예를 들면 화상 부호화 데이터를 정확하게 수신할 수 있는 경우라도, 그것이 인터프레임(참조 프레임) 부호화 데이터일 때, 부호화 데이터 재구성부(212)로 주기적으로 반드시 인트라-매크로 블록 부호화 데이터를 선택하도록 하면, 전송로에서의 오류나 손실이 발생한 경우라도, MPEG-4 부호화 방식에서의 CIR(Cyclic Intra Refresh)과 마찬가지의 효과를 얻을 수 있고, 전송로에서의 오류나 손실에 의한 재생 화상 품질의 열화를 신속하게 회복시킴으로써, 이후의 프레임에의 품질 열화의 전파를 작게 억제할 수 있다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, 화상 부호화 데이터 및 인트라-매크로 블록 부호화 데이터, 및 이들의 화상 부호화에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 된다.
또한, 화상 부호화 데이터 및 인트라-매크로 블록 부호화 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신 받아도, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(201)에 있어서의, 분배 정보 송신부(202)와, 세션 정보 관리부(203)와, 화상 데이터 축적/생성부(204)와, 화상 부호화 데이터 송신부(205)와, 인트라-매크로 블록 부호화 데이터 송신부(206)에 대하여, 화상 데이터 분배 장치(201)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(208)에 있어서의, 세션 정보 수신부(209)와, 화상 부호화 데이터 수신부(210) 및 인트라-매크로 블록 부호화 데이터 수신부(211)와, 부호화 데이터 재구성부(212)와, 디코더(213)에 대하여, 화상 데이터 수신 장치(208)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제3 실시 형태]
본 발명의 제3 실시 형태에서는, 화상 데이터 분배 장치측은, 동화상 데이터의 I(Intra) 픽쳐, P(Predictive) 픽쳐, 및 동화상의 부호화에 이용한 부호화 방식에 존재하는 경우에는 B(Bidirectionally-predictive) 픽쳐 중, I 픽쳐와 그 이외의 픽쳐에서 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 화상 데이터 수신 장치측은, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 수신한 동화상 데이터를, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제3 실시예]
본 발명의 제3 실시예를 도면을 참조하면서 설명한다. 도 3은 본 발명의 제3 실시예의 구성을 도시한 도면이다. 도 3에 도시한 바와 같이 화상 데이터 분배 장치(301)와, 화상 데이터 수신 장치(308), 및 화상 부호화 데이터를 전송하기 위한 전송로(307)로 구성된다. 본 실시예에서는, 화상 데이터 분배 장치(301)는 IP망인 전송로(307)에 접속되어 있고, UDP/IP를 이용하여 화상 부호화 데이터를 분배하고, 화상 데이터 수신 장치(308)는, IP망에 접속되는 클라이언트 단말기인 것으로 한다. 또한, 여기서는 간단히 하기 위해, 분배하는 화상 데이터의 부호화 방식에는, I 픽쳐, P 픽쳐, B 픽쳐의 3개의 프레임 종별이 존재하는 것으로서 설명한다.
화상 데이터 분배 장치(301)는, 분배 정보 송신부(302)와, 세션 정보 관리부(303)와, 화상 데이터 축적/생성부(304)와, I 픽쳐 부호화 데이터 송신부(305)와, P/B 픽쳐 부호화 데이터 송신부(306)를 구비하고 있다.
화상 데이터 수신 장치(308)는, 세션 정보 수신부(309)와, I 픽쳐 부호화 데이터 수신부(310), P/B 픽쳐 부호화 데이터 수신부(311)와, 부호화 데이터 재구성부(312)와, 디코더(313)를 구비하고 있다. 이하, 화상 데이터 분배 장치(301), 화상 데이터 수신 장치(308)의 동작을 차례로 설명한다.
화상 데이터 분배 장치(301)는, 화상 데이터 축적/생성부(304)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상 데이터를 변환하여 생성된 화상 데이터를,
세션 정보 관리부(303)에서 설정된, 세션마다의 전송로(307)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, I 픽쳐 부호화 데이터 송신부(305) 및 P/B 픽쳐 부호화 데이터 송신부(306)에 의해, 전송로(307) 경유로 송신한다.
또한, 세션 정보 관리부(303)에서는, 각 세션으로부터 분배하는 픽쳐 정보를 관리하여, 분배 정보 송신부(302)로부터 화상 데이터 수신 장치(308)에 통지한다.
I 픽쳐 부호화 데이터 송신부(305) 및 P/B 픽쳐 부호화 데이터 송신부(306)는, 화상 데이터 수신 장치(308)에서, 수신한 데이터의 순서가 바뀌어 있더라도, 정확하게 재배열되도록, RTP에 상당하는 정보를 부가하는 기능을 갖는다.
화상 데이터 수신 장치(308)는, 화상 데이터 분배 장치(301)로부터의 화상 부호화에 관한 정보를, 세션 정보 수신부(309)에서 수신하고, 이 정보로부터, 전송로(307)로부터 수신한 화상 데이터의 픽쳐 종별을 안다.
또한, 세션 정보 관리부(303)는,
·부호화 데이터의 부호화 설정,
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(302)에 의해 화상 데이터 수신 장치(308)에 통지하거나, 혹은 이들 정보를 미리 화상 데이터 분배 장치(301) 및 화상 데이터 수신 장치(308) 사이에서 설정해 두어도 된다.
수신한 I 픽쳐, P 픽쳐, B 픽쳐 부호화 데이터는, 부호화 데이터 재구성부(312)에서, RTP에 상당하는 기능, RTP 헤더의 시퀀스 번호, 페이로드 타입, SSRC나 CSRC, 및/또는 세션 정보 수신부(309)에서 수신된 정보에 기초하여, 1개의 화상 데이터로 재구성하여, 디코더(313)에 출력한다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조는, 이하와 같은 것으로 된다.
I 픽쳐 부호화 데이터 송신부(305) 및 P/B 픽쳐 부호화 데이터 송신부(306)에서, I 픽쳐 부호화 데이터를, 전송로(307)에 있어서, P/B 픽쳐 부호화 데이터보다 높은 우선도로 라우팅되도록 설정한다. 혹은, I 픽쳐 부호화 데이터 송신부(305) 및 P/B 픽쳐 부호화 데이터 송신부(306)에서, I 픽쳐 부호화 데이터를, 무선 전송로에서 더 높은 전력으로 송신하도록 설정한다.
수신자 A의 화상 데이터 수신 장치(308)와 수신자 B의 화상 데이터 수신 장치(308)가, 분배되는 동화상 데이터를 수신하고 있는 것으로 하고, 수신자 A의 화상 데이터 수신 장치(308)는 수신자 B의 화상 데이터 수신 장치(308)와 비교하여, 예를 들면 네트워크의 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호한 것으로 한다.
수신자 A의 화상 데이터 수신 장치(308)는, 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호하기 때문에, I 픽쳐 부호화 데이터와 P/B 픽쳐 부호화 데이터의 양방을 수신할 수 있어, 수신 환경의 양호함에 따른, 움직임이 매끄럽고, 고품질의 동화상 데이터를 재생할 수 있다.
수신자 B의 화상 데이터 수신 장치(308)는, 고우선도로 라우팅, 혹은 고전력으로 무선 분배된 I 픽쳐 부호화 데이터를 수신할 수 있고, 수신 환경이 뒤떨어지는 만큼, 수신자 A의 화상 데이터 수신 장치(308)보다 품질이 뒤떨어지지만, 동화상 데이터를 재생할 수 있다.
이 때, 예를 들면 수신자 A, B의 화상 데이터 수신 장치(308)가, 배터리/전지로 동작하는 경우와 같이, 전력에 제한이 있는 환경에서 사용되는 경우에는, 예를 들면, 수신자가 화질보다 장치의 사용 시간을 길게 유지하는 것을 바라는 것이면, P/B 픽쳐 부호화 데이터의 수신을 정지하여, 장치의 사용 시간을 가능한 한 길게 하도록 하여도 된다.
반대로, 화상 데이터 수신 장치(308)가, 대용량 배터리나 AC 전원이 접속된 경우에는, 모든 픽쳐의 부호화 데이터를 수신하도록 하여도 된다. 이와 같이, 이용 가능한 전력이나 수신 환경에 따라서, 데이터 수신의 유무를 제어할 수도 있다.
본 실시예에 있어서는, 이 수신 픽쳐 부호화 데이터의 종별을, 수신자가 화상 데이터 수신 장치(308)에 설정할 수 있도록 하여도 된다.
또한, 본래의 모든 픽쳐의 부호화 데이터를, 동일한 세션으로, 동일한 라우팅의 우선도 또는 동일한 전력으로 무선 분배하는 데 비하여, 트래픽의 부하가 높은 상황이나, 무선 자원이 한정된 상황이라도, 상황에 따른 유연한 우선도 설정이나, 전력 제어가 가능하고, 적은 품질 변동으로 동화상 데이터를 분배할 수 있다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, I 픽쳐 부호화 데이터 및 P/B 픽쳐 부호화 데이터, 및 이들의 화상 부호화에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 된다.
본 실시예에 있어서, I 픽처 부호화 데이터 및 P/B 픽쳐 부호화 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(301)에 있어서의, 분배 정보 송신부(302)와, 세션 정보 관리부(303)와, 화상 데이터 축적/생성부(304)와, I 픽쳐 부호화 데이터 송신부(305)와, P/B 픽쳐 부호화 데이터 송신부(306)에 대하여, 화상 데이터 분배 장치(301)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(308)에 있어서의, 세션 정보 수신부(309)와, I 픽쳐 부호화 데이터 수신부(310) 및 P/B 픽쳐 부호화 데이터 수신부(311)와, 부호화 데이터 재구성부(312)와, 디코더(313)에 대하여, 화상 데이터 수신 장치(308)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제4 실시 형태]
본 발명의 제4 실시 형태에서는, 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐 및 B 픽쳐 중, I/P 픽쳐와 그 이외의 픽쳐에서, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 포함하고 있다. 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 수신한 동화상 데이터를, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제4 실시예]
본 발명의 제4 실시예를 도면을 참조하면서 설명한다. 도 4는 본 발명의 제4 실시예의 구성을 도시한 도면이다. 도 4에 도시한 바와 같이 화상 데이터 분배 장치(401)와, 화상 데이터 수신 장치(408), 및 화상 부호화 데이터를 전송하기 위한 전송로(407)로 구성된다. 본 실시예에서는, 화상 데이터 분배 장치(401)는 IP망인 전송로(407)에 접속되어 있고, UDP/IP를 이용하여 화상 부호화 데이터를 분배하고, 화상 데이터 수신 장치(408)는, IP망에 접속되는 클라이언트 단말기인 것으로 한다. 또한, 여기서는 간단히 하기 위해, 분배하는 화상 데이터의 부호화 방식에는, I 픽쳐, P 픽쳐, B 픽쳐의 3개의 프레임 종별이 존재하는 것으로 하여 설명한다.
화상 데이터 분배 장치(401)는, 분배 정보 송신부(402)와, 세션 정보 관리부(403)와, 화상 데이터 축적/생성부(404)와, I/P 픽쳐 부호화 데이터 송신부(405)와, B 픽쳐 부호화 데이터 송신부(406)를 구비하고 있다.
화상 데이터 수신 장치(408)는, 세션 정보 수신부(409)와, I/P 픽쳐 부호화 데이터 수신부(410)와, B 픽쳐 부호화 데이터 수신부(411)와, 부호화 데이터 재구성부(412)와, 디코더(413)를 구비하고 있다. 이하, 화상 데이터 분배 장치(401), 화상 데이터 수신 장치(408)의 동작에 대하여 차례로 설명한다.
화상 데이터 분배 장치(401)는, 화상 데이터 축적/생성부(404)에서,
·미리 축적된 화상 데이터, 또는
·리얼타임으로 생성된 화상 데이터, 또는
·리얼타임으로 기존 화상 데이터를 변환하여 생성된 화상 데이터를,
세션 정보 관리부(403)에서 설정된, 세션마다의 전송로(407)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, I/P 픽쳐 부호화 데이터 송신부(405) 및 B 픽쳐 부호화 데이터 송신부(406)에 의해, 전송로(407) 경유로 송신한다.
또한, 세션 정보 관리부(403)에서, 각 세션으로부터 분배하는 픽쳐 정보를 관리하여, 분배 정보 송신부(402)로부터 화상 데이터 수신 장치(408)에 통지한다.
I/P 픽쳐 부호화 데이터 송신부(405) 및 B 픽쳐 부호화 데이터 송신부(406)는, 화상 수신 장치(408)에서, 수신한 데이터의 순서가 바뀌어 있더라도, 정확하게 재배열되도록, RTP에 상당하는 정보를 부가하는 기능을 갖는다.
화상 데이터 수신 장치(408)는, 화상 데이터 분배 장치(401)로부터 분배되는 화상 부호화에 관한 정보를, 세션 정보 수신부(409)에서 수신하고, 이 정보로부터, 전송로(407)로부터 수신한 화상 데이터의 픽쳐 종별을 안다.
또한, 세션 정보 관리부(403)는,
·부호화 데이터의 부호화 설정,
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·및/또는 SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(402)에 의해 화상 데이터 수신 장치(408)에 통지하거나, 혹은 이들 정보를, 미리 화상 데이터 분배 장치(401) 및 화상 데이터 수신 장치(408) 사이에서 설정해 두어도 된다.
수신한 I 픽쳐, P 픽쳐, B 픽쳐 부호화 데이터는, 부호화 데이터 재구성부(412)에서, RTP에 상당하는 기능, RTP 헤더의 시퀀스 번호, 페이로드 타입, SSRC나 CSRC, 및/또는 세션 정보 수신부(409)에서 수신된 정보에 기초하여 1개의 화상 데이터로 재구성하여, 디코더(413)에 출력한다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조는, 이하와 같은 것으로 된다.
I/P 픽쳐 부호화 데이터 송신부(405) 및 B 픽쳐 부호화 데이터 송신부(406)에서, I/P 픽쳐 부호화 데이터를, 전송로(407)에 있어서, B 픽쳐 부호화 데이터보다 높은 우선도로 라우팅되도록 설정한다. 혹은, I/B 픽쳐 부호화 데이터 송신부(405) 및 B 픽쳐 부호화 데이터 송신부(406)에서, I/P 픽쳐 부호화 데이터를, 무선 전송로에서 더 높은 전력으로 송신하도록 설정한다.
수신자 A의 화상 데이터 수신 장치(408)와 수신자 B의 화상 데이터 수신 장치(408)가, 분배되는 동화상 데이터를 수신하고 있는 것으로 하여, 수신자 A의 화상 데이터 수신 장치(408)는, 수신자 B의 화상 데이터 수신 장치(408)와 비교하여, 예를 들면 네트워크의 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호한 것으로 한다.
수신자 A의 화상 데이터 수신 장치(408)는, 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호하기 때문에, I/P 픽쳐 부호화 데이터와 B 픽쳐 부호화 데이터의 양방을 수신할 수 있어, 수신 환경의 양호함에 따른, 움직임이 매끄럽고, 고품질의 동화상 데이터를 재생할 수 있다.
수신자 B의 화상 데이터 수신 장치(408)는, 고우선도로 라우팅, 혹은 고전력으로 무선 분배된 I/P 픽쳐 부호화 데이터는 수신할 수 있고, 수신 환경이 뒤떨어지는 만큼, 수신자 A의 화상 데이터 수신 장치(408)보다 품질이 뒤떨어지지만, 동화상 데이터를 재생할 수 있다.
이때, 예를 들면 수신자 A, B의 화상 데이터 수신 장치(408)가, 배터리/전지로 동작하는 경우와 같이, 전력에 제한이 있는 환경에서 사용되는 경우에는, 예를 들면 수신자가 화질보다 장치의 사용 시간을 길게 유지하는 것을 바라는 것이면, B 픽쳐 부호화 데이터의 수신을 정지하여, 장치의 사용 시간을 가능한 한 길게 하도록 하여도 된다.
반대로, 화상 데이터 수신 장치(408)가 대용량 배터리나 AC 전원이 접속된 경우에는, 모든 픽쳐의 부호화 데이터를 수신하도록 하여도 된다. 이와 같이, 이용 가능한 전력이나 수신 환경에 따라서, 데이터 수신의 유무를 제어할 수도 있다.
본 실시예에 있어서는, 수신 픽쳐 부호화 데이터 종별을, 수신자가 화상 데이터 수신 장치(408)에 설정할 수 있도록 하여도 된다.
또한, 본래의 모든 픽쳐의 부호화 데이터를, 동일한 세션으로, 동일한 라우팅의 우선도 또는 동일한 전력으로 무선 분배하는 데 비하여, 트래픽의 부하가 높은 상황이나, 무선 자원이 한정된 상황이라도, 상황에 따른 유연한 우선도 설정이나, 전력 제어가 가능하고, 적은 품질 변동으로 동화상 데이터를 분배할 수 있다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, I/P 픽쳐 부호화 데이터 및 B 픽쳐 부호화 데이터, 및 이들의 화상 부호화에 관한 정보를 상이한 전송로에 의해 전송하는 구성으로 하여도 된다.
본 실시예에 있어서도, I/P 픽쳐 부호화 데이터 및 B 픽쳐 부호화 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(401)에 있어서의, 분배 정보 송신부(402)와, 세션 정보 관리부(403)와, 화상 데이터 축적/생성부(404)와, I/P 픽쳐 부호화 데이터 송신부(405)와, B 픽쳐 부호화 데이터 송신부(406)에 대하여, 화상 데이터 분배 장치(401)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(408)에 있어서의, 세션 정보 수신부(409)와, I/P 픽쳐 부호화 데이터 수신부(410) 및 B 픽쳐 부호화 데이터 수신부(411)와, 부호화 데이터 재구성부(412)와, 디코더(413)에 대하여, 화상 데이터 수신 장치(408)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제5 실시 형태]
본 발명의 제5 실시 형태에서는, 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 B 픽쳐 중, I 픽쳐, P 픽쳐, B 픽쳐에서, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과 수신한 동화상 데이터를, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제5 실시예]
다음으로 본 발명의 제5 실시예를 도면을 참조하면서 설명한다. 도 5는 본 발명의 제5 실시예의 구성의 일례를 도시하고 있다. 도 5에 도시한 바와 같이 화상 데이터 분배 장치(501)와, 화상 데이터 수신 장치(509), 및 화상 부호화 데이터를 전송하기 위한 전송로(508)로 구성된다. 본 실시예에서는, 화상 데이터 분배 장치(501)는 IP망인 전송로(508)에 접속되어 있고, UDP/IP를 이용하여 화상 부호화 데이터를 분배하고, 화상 데이터 수신 장치(509)는, IP망에 접속되는 클라이언트 단말기인 것으로 한다. 또한, 여기서는 간단히 하기 위해, 분배하는 화상 데이터의 부호화 방식에는, I 픽쳐, P 픽쳐, B 픽쳐의 3개의 프레임 종별이 존재하는 것으로 하여 설명한다.
화상 데이터 분배 장치(501)는, 분배 정보 송신부(502)와, 세션 정보 관리부(503)와, 화상 데이터 축적/생성부(504)와, I 픽쳐 부호화 데이터 송신부(505), P 픽쳐 부호화 데이터 송신부(506)와, B 픽쳐 부호화 데이터 송신부(507)를 구비하고 있다.
화상 데이터 수신 장치(509)는, 세션 정보 수신부(510)와, I 픽쳐 부호화 데이터 수신부(511), P 픽쳐 부호화 데이터 수신부(512), B 픽쳐 부호화 데이터 수신부(513), 부호화 데이터 재구성부(514)와, 디코더(515)를 구비하고 있다. 이하, 화상 데이터 분배 장치(501), 화상 데이터 수신 장치(509)의 동작에 대하여 차례로 설명한다.
화상 데이터 분배 장치(501)는, 화상 데이터 축적/생성부(504)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상 데이터를 변환하여 생성된 화상 데이터를,
세션 정보 관리부(503)에서 설정된, 세션마다의 전송로(508)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, I 픽쳐 부호화 데이터 송신부(505) 및 P 픽쳐 부호화 데이터 송신부(506), 및 B 픽쳐 부호화 데이터 송신부(507)에 의해, 전송로(508) 경유로 송신한다.
세션 정보 관리부(503)에서는, 각 세션으로부터 분배하는 픽쳐 정보를 관리하여, 분배 정보 송신부(502)로부터 화상 데이터 수신 장치(509)에 통지한다.
I 픽쳐 부호화 데이터 송신부(505), P 픽쳐 부호화 데이터 송신부(506), 및 B 픽쳐 부호화 데이터 송신부(507)는, 화상 데이터 수신 장치(509)에서, 수신한 데이터의 순서가 바뀌어 있더라도, 정확하게 재배열되도록, RTP에 상당하는 정보를 부가하는 기능을 갖는다.
화상 데이터 수신 장치(509)는, 화상 데이터 분배 장치(501)로부터의 화상 부호화에 관한 정보를, 세션 정보 수신부(510)에서 수신하고, 이 정보로부터, 전송로(508)로부터 수신한 화상 데이터의 픽쳐 종별을 안다.
또한, 세션 정보 관리부(503)는,
·부호화 데이터의 부호화 설정,
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(502)에 의해 화상 데이터 수신 장치(509)에 통지하거나, 혹은 이들 정보를, 미리 화상 데이터 분배 장치(501) 및 화상 데이터 수신 장치(509) 사이에서 설정해 두어도 된다.
수신한 I 픽쳐, P 픽쳐, B 픽쳐 부호화 데이터는, 부호화 데이터 재구성부(514)에서, RTP에 상당하는 기능, RTP 헤더의 시퀀스 번호, 페이로드 타입, SSRC나 CSRC, 및/또는 세션 정보 수신부(510)에서 수신된 정보에 기초하여, 1개의 화상 데이터로 재구성하여, 디코더(515)에 출력한다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조는, 이하와 같은 것으로 된다.
I 픽쳐 부호화 데이터 송신부(505), P 픽쳐 부호화 데이터 송신부(506), 및 B 픽쳐 부호화 데이터 송신부(507)에서, 전송로(508)에 있어서, I 픽쳐 부호화 데이터를 가장 높은 우선도로, P 픽쳐 부호화 데이터를 그 다음의 우선도로, B 픽쳐 부호화 데이터를 가장 낮은 우선도로 라우팅되도록 설정한다. 혹은, I 픽쳐 부호화 데이터 송신부(505), P 픽쳐 부호화 데이터 송신부(506), 및 B 픽쳐 부호화 데이터 송신부(507)에서, 무선 전송로에 있어서, I 픽쳐 부호화 데이터를 가장 높은 전력으로, P 픽쳐 부호화 데이터를 그 다음의 전력으로, B 픽쳐를 가장 낮은 전력으로 송신하도록 설정한다.
수신자 A와 수신자 B와 수신자 C의 각각의 화상 데이터 수신 장치(509)가, 분배되는 동화상 데이터를 수신하고 있는 것으로 하고, 수신자 A의 화상 데이터 수신 장치(509)는 수신자 B의 화상 데이터 수신 장치(509)보다, 수신자 B의 화상 데이터 수신 장치(509)는 수신자 C의 화상 데이터 수신 장치(509)보다, 예를 들면 네트워크의 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호한 것으로 한다.
수신자 A의 화상 데이터 수신 장치(509)는, 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호하기 때문에, I 픽쳐 부호화 데이터와, P 픽쳐 부호화 데이터와, B 픽쳐 부호화 데이터의 어느 것이나 수신할 수 있어, 수신 환경의 양호함에 따른, 움직임이 매끄럽고, 가장 고품질의 동화상 데이터를 재생할 수 있다.
수신자 B의 화상 데이터 수신 장치(509)는, 가장 높은 우선도와, 그 다음의 우선도로 라우팅, 혹은 가장 높은 전력과, 그 다음의 전력으로 무선 분배된 I 픽쳐 부호화 데이터와, P 픽쳐 부호화 데이터를 수신할 수 있고, 수신 환경이 뒤떨어지는 만큼, 수신자 A보다는 품질이 뒤떨어지지만, 비교적 매끄러운 움직임의 동화상 데이터는 재생할 수 있다.
수신자 C의 화상 데이터 수신 장치(509)에서는, 가장 높은 우선도로 라우팅, 혹은 가장 높은 전력으로 무선 분배된 I 픽쳐 부호화 데이터를 수신할 수 있고, 수신 환경이 뒤떨어지는 만큼, 수신자 A, 수신자 B의 화상 데이터 수신 장치(509)보다 품질이 뒤떨어지지만, 동화상 데이터를 재생할 수 있다.
이 때, 예를 들면 수신자 A, B, C의 화상 데이터 수신 장치(509)가, 배터리/전지로 동작하는 경우와 같이, 전력에 제한이 있는 환경에서 사용되는 경우에는, 예를 들면 수신자가 화질보다 장치의 사용 시간을 길게 유지하는 것을 바라는 것이면, 더 중요도가 낮은 데이터의 B 픽쳐 부호화 데이터의 수신을 정지하거나, 혹은 추가로 B 픽쳐 및 P 픽쳐의 수신을 정지함으로써, 장치의 사용 시간을 가능한 한 길게 하도록 하여도 된다.
반대로, 화상 데이터 수신 장치(509)가 대용량 배터리나 AC 전원이 접속된 경우에는, 더 중요도가 높은 부호화 데이터부터 수신을 하는 등, 이용 가능한 전력이나 수신 환경에 따라서, 데이터 수신의 유무를 제어할 수도 있다.
본 실시예에 있어서는, 이 수신 픽쳐 부호화 데이터 종별을, 수신자가 화상 데이터 수신 장치(509)에 설정할 수 있도록 하여도 된다.
또한, 본래의 모든 픽쳐의 부호화 데이터를, 동일한 세션으로, 동일한 라우팅의 우선도, 또는 동일한 전력으로 무선 분배하는 경우와 비교하여, 본 실시예에 있어서는, 트래픽의 부하가 높은 상황이나, 무선 자원이 한정된 상황이라도, 상황에 따른 유연한 우선도 설정이나, 전력 제어가 가능하게 되고, 적은 품질 변동으로 동화상 데이터를 분배할 수 있다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, I 픽쳐 부호화 데이터, B 픽쳐 부호화 데이터, 및 P 픽쳐 부호화 데이터, 이들의 화상 부호화에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 된다.
본 실시예에 있어서도, I 픽쳐 부호화 데이터 및 P 픽쳐 부호화 데이터, 및 B 픽쳐 부호화 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(501)에 있어서의, 분배 정보 송신부(502)와, 세션 정보 관리부(503)와, 화상 데이터 축적/생성부(504)와, I 픽쳐 부호화 데이터 송신부(505)와, P 픽쳐 부호화 데이터 송신부(506), B 픽쳐 부호화 데이터 송신부(507)에 대하여, 화상 데이터 분배 장치(501)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(509)에 있어서의, 세션 정보 수신부(510)와, I 픽쳐 부호화 데이터 수신부(511), P 픽쳐 부호화 데이터 수신부(512), B 픽쳐 부호화 데이터 수신부(513)와, 부호화 데이터 재구성부(514)와, 디코더(515)에 대하여, 화상 데이터 수신 장치(509)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제6 실시 형태]
본 발명의 제6 실시 형태에서는, 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 동화상의 부호화에 이용한 부호화 방식에 존재하는 경우에는 B 픽쳐, 및 동화상 데이터의 해당 프레임 중 적어도 일부를 인트라-매크로 블록(Intra-MB) 부호화한 부호화 데이터를, 각각 상이한 세션으로 분배하는 수단과, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 수신한 동화상 데이터 중, 화상 품질에 기초하여 데이터를 선택하여, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한, 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제6 실시예]
본 발명의 제6 실시예를 도면을 참조하면서 설명한다. 도 6은 본 발명의 제6 실시예의 구성을 도시한 도면이다. 도 6에 도시한 바와 같이 화상 데이터 분배 장치(601)와, 화상 데이터 수신 장치(610), 및 화상 부호화 데이터를 전송하기 위한 전송로(609)로 구성된다. 본 실시예에서는, 화상 데이터 분배 장치(601)는 IP망인 전송로(609)에 접속되어 있고, UDP/IP를 이용하여 화상 부호화 데이터를 분배하고, 화상 데이터 수신 장치(610)는, IP 망에 접속되는 클라이언트 단말기인 것으로 한다. 또한, 여기서는 간단히 하기 위해, 분배하는 화상 데이터의 부호화 방식에는, I 픽쳐, P 픽쳐, B 픽쳐의 3개의 프레임 종별이 존재하는 것으로 하여 설명한다.
화상 데이터 분배 장치(601)는, 분배 정보 송신부(602)와, 세션 정보 관리부(603)와, 화상 데이터 축적/생성부(604)와, I 픽쳐 부호화 데이터 송신부(605), P 픽쳐 부호화 데이터 송신부(606), B 픽쳐 부호화 데이터 송신부(607), 인트라-매크로 블록(Intra-MB) 부호화 데이터 송신부(608)를 구비하고 있다.
화상 데이터 수신 장치(610)는, 세션 정보 수신부(611)와, I 픽쳐 부호화 데이터 수신부(612), P 픽쳐 부호화 데이터 수신부(613), B 픽쳐 부호화 데이터 수신부(614), 인트라-매크로 블록(Intra-MB) 부호화 데이터 수신부(615)와, 부호화 데이터 재구성부(616)와, 디코더(617)를 구비하고 있다. 이하, 화상 데이터 분배 장치(601), 화상 데이터 수신 장치(610)의 동작에 대하여 차례로 설명한다.
화상 데이터 분배 장치(601)는, 화상 데이터 축적/생성부(604)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상을 변환하여 생성된 화상 데이터를,
세션 정보 관리부(603)에서 설정된, 세션마다의 전송로(609)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, I 픽쳐 부호화 데이터 송신부(605), P 픽쳐 부호화 데이터 송신부(606), B 픽쳐 부호화 데이터 송신 부(607), 및 Intra-MB 부호화 데이터 송신부(608)에 의해, 전송로(609) 경유로 송신한다.
세션 정보 관리부(603)에서, 각 세션으로부터 분배하는 픽쳐 정보를 관리하여, 분배 정보 송신부(602)로부터 화상 데이터 수신 장치(610)에 통지한다.
I 픽쳐 부호화 데이터 송신부(605), P 픽쳐 부호화 데이터 송신부(606), B 픽쳐 부호화 데이터 송신부(607), 및 Intra-MB 부호화 데이터 송신부(608)는, 화상 데이터 수신 장치(610)에서, 중복하는 복수의 화상 데이터가 수신된 경우에, 데이터의 선택을 할 수 있도록, 또한 수신한 데이터의 순서가 바뀌어 있더라도, 정확하게 재배열되도록, RTP에 상당하는 정보를 부가하는 기능을 갖는다. 이 때, 예를 들면 인트라-매크로 블록 부호화 데이터가 부호화하는 화상의 동일 부위의 I/P/B 픽쳐 부호화 데이터에, 동일한 RTP 시퀀스 번호를 부여하고, 또한 화상 부호화 데이터와 인트라-매크로 블록 중 어느 것인지를 나타내는 페이로드 타입 및/또는 SSRC 및/또는 CSRC를 부여하여도 된다.
또한, 송신시, I/P/B 픽쳐 부호화 데이터에 대하여, 인트라-매크로 블록 부호화 데이터를, 예를 들면 전송로(609)에서의 데이터의 오류 혹은 손실의 버스트 길이보다 길어지는 시간차를 두고 송신하면, 전송로에서 I/P/B 픽쳐 부호화 데이터와 인트라-매크로 블록 부호화 데이터가 양방 모두 오류 혹은 손실의 영향을 받을 가능성이 저하되고, 화상 데이터 수신 장치가 이 시간차 이상의 수신 버퍼를 구비하는 경우, 더 안정된 화상 데이터의 분배를 할 수 있다.
본 실시예에 있어서, 동일 화상의 복수의 화상 부호화 데이터의 송신의 시간차에 대하여, 세션 정보 관리부(603)에서 관리하여, 분배 정보 송신부(602)로부터 화상 데이터 수신 장치(610)에 통지하거나, 혹은 송신의 시간차에 대하여, 미리 화상 데이터 분배 장치(601) 및 화상 데이터 수신 장치(610) 사이에서 정해 두고, 그 시간차에 기초하여 화상 데이터 수신 장치(610)가 수신 버퍼량을 설정해도 된다.
화상 데이터 수신 장치(610)는, 화상 데이터 분배 장치(601)로부터의 화상 부호화에 관한 정보를, 세션 정보 수신부(611)에서 수신하고, 이 정보로부터, 전송로(609)로부터 수신한 화상 데이터의 픽쳐, 블록 종별을 안다.
또한, 세션 정보 관리부(603)는,
·부호화 데이터의 부호화 설정,
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(602)에 의해 화상 데이터 수신 장치(610)에 통지하거나, 혹은 이들 정보를, 미리 화상 데이터 분배 장치(601) 및 화상 데이터 수신 장치(609) 사이에서 설정해 두어도 된다.
수신한 I 픽쳐, P 픽쳐, B 픽쳐, 인트라-매크로 블록 부호화 데이터는, 부호화 데이터 재구성부(616)에서, RTP에 상당하는 기능, RTP 헤더의 시퀀스 번호, 페이로드 타입, SSRC나 CSRC, 및/또는 세션 정보 수신부(611)에서 수신된 정보에 기초하여, 1개의 화상 데이터로 재구성하여, 디코더(617)에 출력한다. 화상 데이터 는, 1개만 복호화하면 되기 때문에, 디코더(617)의 복호화 처리의 부담은 증가하지 않는다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조는, 이하와 같이 된다.
인트라-매크로 블록은, 부호화되는 프레임 중, 움직임 벡터가 큰 개소 등, 일부의 매크로 블록만을 선택하여 부호화하는 것으로 한다.
I 픽쳐 부호화 데이터 송신부(605), P 픽쳐 부호화 데이터 송신부(606), B 픽쳐 부호화 데이터 송신부(607), 및 Intra-MB 부호화 데이터 송신부(608)에서, 예를 들면, 전송로(609)에 있어서,
·I 픽쳐 부호화 데이터를 가장 높은 우선도로,
·P 픽쳐를 그 다음의 우선도로,
·B 픽쳐를 다시 그 다음의 우선도로,
·인트라-매크로 블록 부호화 데이터를 가장 낮은 우선도로
라우팅되도록 설정한다.
혹은, I 픽쳐 부호화 데이터 송신부(605), P 픽쳐 부호화 데이터 송신부(606), B 픽쳐 부호화 데이터 송신부(607), 및 Intra-MB 부호화 데이터 송신부(608)에서, 무선 전송로에 있어서,
·I 픽쳐 부호화 데이터를 가장 높은 전력으로,
·P 픽쳐 부호화 데이터를 그 다음의 전력으로,
·B 픽쳐 부호화 데이터를 다시 그 다음의 전력으로,
·인트라-매크로 블록 부호화 데이터를 가장 낮은 전력으로 송신하도록 설정한다.
수신자 A와 수신자 B와 수신자 C와 수신자 D의 각각의 화상 데이터 수신 장치(610)가, 분배되는 동화상 데이터를 수신하고 있는 것으로 하고,
·수신자 A의 화상 데이터 수신 장치(610)는 수신자 B의 화상 데이터 수신 장치(610)보다,
·수신자 B의 화상 데이터 수신 장치(610)는 수신자 C의 화상 데이터 수신 장치(610)보다,
·수신자 C의 화상 데이터 수신 장치(610)는 수신자 D의 화상 데이터 수신 장치(610)보다, 예를 들면 네트워크의 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호한 것으로 한다.
수신자 A의 화상 데이터 수신 장치(610)는, 트래픽에 여유가 있거나, 혹은 무선 수신 환경이 양호하기 때문에, I 픽쳐 부호화 데이터와, P 픽쳐 부호화 데이터와, B 픽쳐 부호화 데이터와, 인트라-매크로 블록 부호화 데이터의 어느 것이나 수신할 수 있고, 수신 환경의 양호함에 따른, 움직임이 매끄럽고, 가장 고품질의 동화상 데이터를 재생할 수 있다. 또한, 수신자 A의 화상 데이터 수신 장치(610)에서는, 만일 화상 부호화 데이터의 일부에 오류나 누락이 있었다고 해도, 해당 개소의 매크로 블록의 부호화 데이터를 인트라-매크로 블록 부호화 데이터로부터 수신할 수 있으면, 보완할 수 있거나, 혹은 오류나 누락에 의해 열화된 매크로 블록을, 보정할 수 있기 때문에, 수신 환경의 양호함에 따른, 안정된 동화상 데이터를 재생할 수 있다.
수신자 B의 화상 데이터 수신 장치(610)는, 가장 높은 우선도와, 그 다음의 우선도와, 다시 그 다음의 우선도로 라우팅, 혹은 가장 높은 전력과, 그 다음의 전력과, 다시 그 다음의 전력으로 무선 분배된 I 픽쳐 부호화 데이터와, P 픽쳐 부호화 데이터와, B 픽쳐 부호화 데이터를 수신할 수 있다. 수신자 B의 화상 데이터 수신 장치(610)에서는, 화상 부호화 데이터의 일부에 오류나 누락이 발생한 경우에는, 수신자 A의 화상 데이터 수신 장치(610)와 같은 데이터의 보완, 보정은 할 수 없기 때문에, 화질이 열화하지만, 그 이외의 경우는, 동등한 품질의 동화상 데이터를 재생할 수 있다.
수신자 C의 화상 데이터 수신 장치(610)는, 가장 높은 우선도와, 그 다음의 우선도로 라우팅, 혹은 가장 높은 전력과, 그 다음의 전력으로 무선 분배된 I 픽쳐 부호화 데이터와, P 픽쳐 부호화 데이터를 수신할 수 있고, 수신 환경이 뒤떨어지는 만큼, 수신자 A, 수신자 B의 화상 데이터 수신 장치(610)보다, 품질이 뒤떨어지지만, 비교적 매끄러운 움직임의 동화상 데이터는 재생할 수 있다.
수신자 D의 화상 데이터 수신 장치(610)는, 가장 높은 우선도로 라우팅, 혹은 가장 높은 전력으로 무선 분배된 I 픽쳐 부호화 데이터를 수신할 수 있고, 수신 환경이 뒤떨어지는 만큼, 수신자 A, 수신자 B, 수신자 C의 화상 데이터 수신 장치(610)보다 품질이 뒤떨어지지만, 동화상 데이터를 재생할 수 있다.
이 때, 예를 들면 수신자 A, B, C, D의 화상 데이터 수신 장치(610)가, 배터리/전지로 동작하는 경우와 같이, 전력에 제한이 있는 환경에서 사용되는 경우에, 예를 들면 수신자가 화질보다 장치의 사용 시간을 길게 유지하는 것을 바라는 것이면, 더 중요도가 낮은 데이터의 인트라-매크로 블록 부호화 데이터의 수신을 정지하고, 계속해서 B 픽쳐 부호화 데이터의 수신을 정지하고, 또한 P 픽쳐의 수신을 정지함으로써, 저소비 전력화를 도모하여, 장치의 사용 시간을 가능한 한 길게 하도록 하여도 된다.
반대로, 화상 데이터 수신 장치(610)가 대용량 배터리나 AC 전원이 접속된 경우에는, 더 중요도가 높은 부호화 데이터로부터 수신을 하는 등, 이용 가능한 전력이나 수신 환경에 따라서, 데이터 수신의 유무를 제어할 수도 있다.
본 실시예에 있어서는, 이 수신 픽쳐 부호화 데이터의 종별을, 수신자가, 화상 데이터 수신 장치(610)에 설정할 수 있는 구성으로 하여도 된다.
또한, 예를 들면 화상 부호화 데이터가 정확하게 수신되어 있는 경우라도, 그것이 P 픽쳐 혹은 B 픽쳐 부호화 데이터일 때, 부호화 데이터 재구성부(616)에서 주기적으로 반드시 인트라-매크로 블록 부호화 데이터를 선택하도록 하면, 전송로에서의 오류나 손실이 발생한 경우라도, MPEG-4 부호화 방식에서의 CIR(Cyclic Intra Refresh)과 마찬가지의 효과를 얻을 수 있고, 전송로에서의 오류나 손실에 의한 재생 화상 품질의 열화를 신속하게 회복시킴으로써, 이후의 프레임에의 품질 열화의 전파를 작게 억제할 수 있다.
또한, 본래의 모든 픽쳐의 부호화 데이터를, 동일한 세션으로, 동일한 라우팅의 우선도, 또는 동일한 전력으로 무선 분배하는 데 비하여, 트래픽의 부하가 높은 상황이나, 무선 자원이 한정된 상황이라도, 상황에 따른 유연한 우선도 설정이나 전력 제어가 가능하고, 적은 품질 변동으로 동화상 데이터를 분배할 수 있다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, I 픽쳐 부호화 데이터, B 픽쳐 부호화 데이터, P 픽쳐 부호화 데이터, 및 인트라-매크로 블록 부호화 데이터, 및 이들 데이터에 관한 정보가, 상이한 전송로를 통해 전송되는 구성으로 하여도 됨은 물론이다.
본 실시예에 있어서, I 픽쳐 부호화 데이터 및 P 픽쳐 부호화 데이터 및 B 픽쳐 부호화 데이터, 및 인트라-매크로 블록 부호화 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
화상 데이터 분배 장치(601)에 있어서의, 분배 정보 송신부(602)와, 세션 정보 관리부(603)와, 화상 데이터 축적/생성부(604)와, I 픽쳐 부호화 데이터 송신부(605)와, P 픽쳐 부호화 데이터 송신부(606), B 픽쳐 부호화 데이터 송신부(607), 인트라-매크로 블록 부호화 데이터 송신부(608)에 대하여, 화상 데이터 분배 장치(601)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(610)에 있어서의, 세션 정보 수신부(611)와, I 픽쳐 부호화 데이터 수신부(612), P 픽쳐 부호화 데이터 수신부(613), B 픽쳐 부호화 데이터 수신부(614), 인트라-매크로 블록 부호화 데이터 수신부(615)와, 부호화 데이터 재구성부(616)와, 디코더(617)에 대하여, 화상 데이터 수신 장치(610)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제7 실시 형태]
본 발명의 제7 실시 형태에 있어서, 화상 데이터 분배 장치는, 동일한 화상의 복수의 동화상 데이터(예를 들면 상이한 화상 품질의 동화상 데이터) 및 오류 정정 부호 데이터를, 각각 상이한 세션으로 분배하는 수단과, 적어도 1개의 세션으로, 데이터를 분배하는 세션마다, 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 화상 데이터 수신 장치측은, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 전송로에서의 오류나 손실에 의해 상실된 동화상 데이터를, 오류 정정 부호 데이터를 이용하여 복원하는 수단과, 수신한 동화상 데이터 및 복원된 동화상 데이터 중, 화상 품질에 기초하여 데이터를 선택하고, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다.
또한, 본 발명의 제7 실시 형태에 있어서, 화상 데이터 수신 장치는, 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제7 실시예]
본 발명의 제7 실시예를 도면을 참조하여 설명한다. 도 7은 본 발명의 제7 실시예의 구성을 도시하고 있다. 도 7에 도시한 바와 같이 화상 부호화 데이터를 분배하는 화상 데이터 분배 장치(701)와, 화상 데이터 수신 장치(708)와, 화상 부호화 데이터 및 오류 정정 부호 데이터를 전송하기 위한 전송로(707)를 구비하고 있고, 이들은, 상기 제1 실시예의 화상 데이터 분배 장치(101)와, 화상 데이터 수신 장치(108)와, 전송로(107)에 각각 대응하고 있다. 화상 데이터 분배 장치(701)를 구성하는 각 요소(702 내지 706), 화상 데이터 수신 장치(708)를 구성하는 각 요소(709 내지 713)는, 상기 제1 실시예의 각각 화상 데이터 분배 장치(101)의 각 요소(102 내지 106), 화상 데이터 수신 장치(108)의 각 요소(109 내지 113)에 대응하고 있다. 이하에서는, 상기 제1 실시예와 상이한 부분만 설명한다. 또한, 본 실시예에서는, 어디까지나 설명을 간단히 하기 위해, 분배하는 화상 데이터 수를 「2」로 하고, 1개의 부호화 데이터로부터 생성하는 오류 정정 부호 데이터 수를 「1」로서 설명하지만, 본 발명에 있어서 분배하는 화상 데이터 수가 「2」에, 오류 정정 부호 데이터 수가 「1」에 한정되는 것이 아님은 물론이다.
화상 데이터 분배 장치(701)는, 분배 정보 송신부(702)와, 세션 정보 관리부(703)와, 화상 데이터 축적/생성부(704)와, 화상 부호화 데이터 1 송신부(705)와, 화상 부호화 데이터 2 송신부(706)와, FEC(전방 오류 정정) 부호 데이터 송신부(714)를 구비하고 있다.
화상 데이터 수신 장치(708)는, 세션 정보 수신부(709)와, 화상 부호화 데이터 1 수신부(710), 화상 부호화 데이터 2 수신부(711), 부호화 데이터 재구성부(712)와, 디코더(713)와, FEC 부호 데이터 수신부(715)를 구비하고 있다.
화상 데이터 분배 장치(701)의 화상 데이터 축적/생성부(704)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 부호화하여 생성된 화상 부호화 데이터, 혹은
·리얼타임으로 기존 화상 부호화 데이터를 변환하여 생성된 화상 부호화 데이터와, 상기 중 어느 하나에 의한 화상 부호화 데이터로부터 생성된 오류 정정 부호 데이터를,
세션 정보 관리부(703)에서 설정된, 세션마다의 전송로(707)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, 화상 부호화 데이터 1 송신부(705) 및 화상 부호화 데이터 2 송신부(706) 및 FEC 부호 데이터 송신부(714)에 의해, 전송로(707) 경유로 송신한다. 여기서, 전방 오류 정정(FEC;Forwards Error Correction) 부호란, 리드 솔로몬 부호나 LDPC(Low Density parity check) 부호, 컨볼루션 부호 등이 있고, 본 발명에서는 이들 기존의 방법을 이용하기 때문에, 여기서의 자세한 설명은 생략한다.
세션 정보 관리부(703)에서는, 화상 부호화 데이터 1 및 화상 부호화 데이터 2의 화상 품질(압축률) 및 오류 정정 부호 데이터에 관한 정보를 관리하여, 분배 정보 송신부(702)로부터 화상 데이터 수신 장치(708)에 통지한다.
FEC 부호 데이터 송신부(714)는, 화상 부호화 데이터의 어느 부분의 오류 정정 부호 데이터인지 알 수 있도록, RTP에 상당하는 정보(예를 들면 RTP 헤더의 시퀀스 번호)를 부가하는 기능을 갖는다. 또한, 오류 정정 부호 데이터인 것을 나타내는, 페이로드 타입 및/또는 SSRC 및/또는 CSRC를 부여하여도 된다.
또한, 세션 정보 관리부(703)는,
·화상 부호화 데이터 1 및 화상 부호화 데이터 2의 부호화 설정,
·오류 정정 부호 종별,
·오류 정정 부호 설정(예를 들면 LDPC 부호에서의 검사 행렬 데이터, 혹은 이를 생성하기 위한 설정),
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터 및 오류 정정 부호를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(702)에 의해 화상 데이터 수신 장치(708)에 통지해도 되고, 또한 이들 정보를, 미리 화상 데이터 분배 장치(701) 및 화상 데이터 수신 장치(708) 사이에서 설정해 두어도 된다.
화상 데이터 부호화 데이터 1을 전송로에서의 오류 혹은 손실에 의해 수신할 수 없었던 경우, 부호화 데이터 재구성부(712)는, FEC 부호 데이터 수신부에서 수신한 오류 정정 부호 데이터를 이용하여 화상 부호화 데이터 1을 복원한다. 복원하여 얻은 화상 부호화 데이터 1을 포함하여, 화상 부호화 데이터 1과 화상 부호화 데이터 2 모두 수신 가능한 경우에 대해서는, 제1 실시예와 마찬가지이다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조도, 제1 실시예와 마찬가지이고, 수신 환경이 양호한 화상 데이터 수신 장치(708)는, 화상 부호화 데이터 1, 2 및 오류 정정 부호 데이터를 수신할 수 있어, 더 고품질로 안정된 동화상 데이터를 재생할 수 있다. 또한, 이들을 분배하는 세션마다 전송로에서의 라우팅의 우선도나, 무선 전송로에서의 송신 전력을 제어할 수 있기 때문에, 네트워크 자원을 고려한 분배를 행할 수 있다.
또한, 오류 정정 부호 데이터를 복수로 하는 경우, 오류 정정 부호화 데이터를, 전송로에서의 오류 혹은 손실의 몇 가지 패턴에 맞춰 생성하고, 콘텐츠 수신 장치(708)가, 수신 환경에 가장 적합한 오류 정정 부호 데이터에 의해, 전송로에서 잘못된/손실된 데이터를 복원함으로써, 더 높은 확률로 본래의 콘텐츠의 부호화 데이터를 얻을 수도 있다. 이 경우, 콘텐츠 분배 장치(701)가, 콘텐츠 수신 장치(708)에, 각각의 오류 정정 부호화 데이터가 적합한 전송로 상황을 통지하거나, 혹은 오류 정정 부호 데이터를 생성하기 위한 설정(예를 들면 LDPC 방식에서의 검사 행렬, 혹은 이를 생성하기 위한 설정 정보)을 통지하거나, 혹은 이것을 미리 콘텐츠 분배 장치(701)와 콘텐츠 수신 장치(708) 사이에서 정해 두어도 된다.
또한, 오류 정정 부호 데이터를 복수로 하는 경우, 오류 정정 부호 방식이 상이해도 되고, 콘텐츠 수신 장치(708)의 수신 환경이나 처리 능력에 따라, 복호가 가능한 오류 정정 부호 데이터를 선택하여도 된다. 이 경우, 콘텐츠 분배 장치(701)가, 콘텐츠 수신 장치(708)에, 각각의 오류 정정 부호 종별을 통지하거나, 혹은 이것을 미리 콘텐츠 분배 장치(701)와 콘텐츠 수신 장치(708) 사이에서 정해 두어도 된다.
상기한 것 이외에 대해서는, 상기 제1 실시예와 마찬가지이다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, 화상 부호화 데이터 1 및 화상 부호화 데이터 2, 오류 정정 부호 데이터, 및 이들의 화상 부호화에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 됨은 물론이다.
본 실시예에 있어서, 화상 부호화 데이터 1 및 화상 부호화 데이터 2 및 오류 정정 부호 데이터를 분배하는 세션은, 유니캐스트 방식으로 송신하도록 해도 되고, 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(701)에 있어서의, 분배 정보 송신부(702)와, 세션 정보 관리부(703)와, 화상 데이터 축적/생성부(704)와, 화상 부호화 데이터 1 송신부(705)와, 화상 부호화 데이터 2 송신부(706)와, FEC 부호 데이터 송신부(714)에 대하여, 화상 데이터 분배 장치(701)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(708)에 있어서의, 세션 정보 수신부(709)와, 화상 부호화 데이터 1 수신부(710) 및 화상 부호화 데이터 2 수신부(711)와, 부호화 데이터 재구성부(712)와, 디코더(713)와, FEC 부호 데이터 수신부(715)에 대하여, 화상 데이터 수신 장치(708)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제8 실시 형태]
본 발명의 제8 실시 형태에서는, 화상 데이터 분배 장치는, 동화상 데이터와, 동화상 데이터의 해당 프레임 중 적어도 일부를 인트라-매크로 블록 부호화한 부호화 데이터와, 오류 정정 부호 데이터를, 각각 상이한 세션으로 분배하는 수단과, 적어도 1개의 세션으로, 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 또한 화상 데이터 수신 장치측은, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 전송로에서의 오류나 손실에 의해 상실된 동화상 데이터를, 오류 정정 부호 데이터를 이용하여 복원하는 수단과, 수신한 동화상 데이터 중, 화상 품질에 기초하여 데이터를 선택하고, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한, 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제8 실시예]
다음으로 본 실시 형태의 실시예를, 본 발명의 제8 실시예로서 도면을 참조하면서 설명한다. 도 8은 본 발명의 제8 실시예의 구성을 도시한 도면이다. 도 8에 도시한 바와 같이 화상 데이터 분배 장치(801)와, 화상 데이터 수신 장치(808)와, 동화상 부호화 데이터 및 오류 정정 부호 데이터를 전송하기 위한 전송로(807)를 구비하고 있고, 이들은 각각 상기 제2 실시예의 화상 데이터 분배 장치(201)와, 화상 데이터 수신 장치(208)와, 전송로(207)에 대응하고 있다. 또한, 화상 데이터 분배 장치(801)를 구성하는 각 요소(802 내지 806), 화상 데이터 수신 장치(808)를 구성하는 각 요소(809 내지 813)는, 상기 제2 실시예의 화상 데이터 분배 장치(201)의 각 요소(202 내지 206), 화상 데이터 수신 장치(208)의 각 요소(209 내지 213)에 각각 대응하고 있다. 이하에서는, 제2 실시예와의 차이점에 대해서만 설명한다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 오류 정정 부호 데이터는, 화상 부호화 데이터로부터 생성하는 것으로 하고, 1개의 부호화 데이터로부터 생성하는 오류 정정 부호 데이터 수를 「1」로서 설명하지만, 오류 정정 부호 데이터 수가 「1」에 한정되는 것이 아님은 물론이다.
화상 데이터 분배 장치(801)는, 분배 정보 송신부(802)와, 세션 정보 관리부(803)와, 화상 데이터 축적/생성부(804)와, 화상 부호화 데이터 송신부(805)와, 인트라-매크로 블록(Intra-MB) 부호화 데이터 송신부(806)와, FEC 부호 데이터 송신부(814)를 구비하고 있다.
화상 데이터 수신 장치(808)는, 세션 정보 수신부(809)와, 화상 부호화 데이터 수신부(810), 인트라-매크로 블록(Intra-MB) 부호화 데이터 수신부(811), 부호화 데이터 재구성부(812)와, 디코더(813)와, FEC 부호 데이터 수신부(815)를 구비하고 있다.
또한, FEC의 방식에 대해서는, 제7 실시예와 마찬가지이다.
화상 데이터 분배 장치(801)는, 화상 데이터 축적/생성부(804)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 부호화하여 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상 데이터를 변환하여 생성된 화상 데이터와, 상기 중 어느 하나에 의한 화상 부호화 데이터로부터 생성된 오류 정정 부호 데이터를, 세션 정보 관리부(803)에서 설정된, 세션마다의 전송로(807)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, 화상 부호화 데이터 송신부(805), 인트라-매크로 블록(Intra-MB) 부호화 데이터 송신부(806), 및 FEC 부호 데이터 송신부(814)에 의해, 전송로(807) 경유로 송신한다. 또한, 오류 정정 부호에 대해서는, 제7 실시예와 마찬가지이다.
또한, 세션 정보 관리부(803)에서, 부호화 데이터의 종별 및 오류 정정 부호 데이터에 관한 정보를 관리하여, 분배 정보 송신부(802)로부터 화상 데이터 수신 장치(808)에 통지한다.
FEC 부호 데이터 송신부(814)는, 화상 부호화 데이터의 어느 부분의 오류 정정 부호 데이터인지 알 수 있도록, RTP에 상당하는 정보(예를 들면 RTP 헤더의 시퀀스 번호)를 부가하는 기능을 갖는다. 또한, 오류 정정 부호 데이터인 것을 나타내는, 페이로드 타입 및/또는 SSRC 및/또는 CSRC를 부여하여도 된다.
화상 데이터 수신 장치(808)는, 화상 데이터 분배 장치(801)로부터의 부호화 데이터 종별 및 오류 정정 부호 데이터에 관한 정보를, 세션 정보 수신부(809)에서 수신하고, 이 정보로부터, 전송로(807)로부터 수신한 데이터의 종별을 안다.
또한, 세션 정보 관리부(803)는,
·부호화 데이터의 부호화 설정,
·오류 정정 부호 종별,
·오류 정정 부호 설정(예를 들면 LDPC 부호에서의 검사 행렬 데이터, 혹은 이를 생성하기 위한 설정),
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터 및 오류 정정 부호를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하여, 분배 정보 송신부(802)에 의해 화상 데이터 수신 장치(808)에 통지해도 되고, 또한 이들 정보를, 미리 화상 데이터 분배 장치(801) 및 화상 데이터 수신 장치(808) 사이에서 설정해 두어도 된다.
화상 데이터 부호화 데이터를 전송로에서의 오류 혹은 손실에 의해 수신할 수 없었던 경우, 부호화 데이터 재구성부(812)는, FEC 부호 데이터 수신부(815)에서 수신한 오류 정정 부호 데이터를 이용하여 화상 부호화 데이터를 복원한다. 복원하여 얻은 화상 부호화 데이터를 포함하여, 화상 부호화 데이터와 인트라-매크로 블록 부호화 데이터 모두 수신할 수 있었던 경우에 대해서는, 제2 실시예와 마찬가지이다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조도, 제2 실시예와 마찬가지이고, 수신 환경이 양호한 화상 데이터 수신 장치(808)는, 화상 부호화 데이터, 인트라-매크로 블록 부호화 데이터, 및 오류 정정 부호 데이터를 수신할 수 있어, 더 고품질로 안정된 동화상 데이터를 재생할 수 있다. 또한, 이들을 분배하는 세션마다 전송로에서의 라우팅의 우선도나, 무선 전송로에서의 송신 전력을 제어할 수 있기 때문에, 네트워크 자원을 고려한 분배를 행할 수 있다.
또한, 오류 정정 부호 데이터를 복수로 하는 경우에 대해서는, 제7 실시예와 마찬가지이다.
상기한 것 이외에 대해서는, 상기 제2 실시예와 마찬가지이다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, 화상 부호화 데이터, 인트라-매크로 블록 부호화 데이터, 오류 정정 부호 데이터 및 이들 데이터에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 된다.
또한, 화상 부호화 데이터, 인트라-매크로 블록 부호화 데이터, 오류 정정 부호 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신 받아도, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(801)에 있어서의, 분배 정보 송신부(802)와, 세션 정보 관리부(803)와, 화상 데이터 축적/생성부(804)와, 화상 부호화 데이터 송신부(805)와, 인트라-매크로 블록 부호화 데이터 송신부(806)와, FEC 부호 데이터 송신부(814)에 대하여, 화상 데이터 분배 장치(801)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(808)에 있어서의, 세션 정보 수신부(809)와, 화상 부호화 데이터 수신부(810) 및 인트라-매크로 블록 부호화 데이터 수신부(811)와, 부호화 데이터 재구성부(812)와, 디코더(813)와, FEC 부호 데이터 수신부(815)에 대하여, 화상 데이터 수신 장치(808)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제9 실시 형태]
본 발명의 제9 실시 형태에서는, 화상 데이터 분배 장치측은, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 동화상의 부호화에 이용한 부호화 방식에 존재하는 경우에는 B 픽쳐 중, I 픽쳐와 그 이외의 픽쳐에서 각각 상이한 세션으로 분배하는 수단과, 오류 정정 부호 데이터를 분배하는 수단과, 적어도 1개의 세션으로, 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 화상 데이터 수신 장치측은, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 오류 정정 부호 데이터를 수신하는 수단과, 전송로에서의 오류나 손실에 의해 상실된 동화상 데이터를, 오류 정정 부호 데이터를 이용하여 복원하는 수단과, 수신한 동화상 데이터를, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제9 실시예]
본 발명의 제9 실시예를 도면을 참조하면서 설명한다. 도 9는 본 발명의 제9 실시예의 구성을 도시한 도면이다. 도 9에 도시한 바와 같이 화상 데이터 분배 장치(901)와, 화상 데이터 수신 장치(908)와, 화상 부호화 데이터 및 오류 정정 부호 데이터를 전송하기 위한 전송로(907)로 구성된다. 이들은, 각각 상기 제3 실시예의 화상 데이터 분배 장치(301)와, 화상 데이터 수신 장치(308)와, 전송로(307)에 대응하고 있다. 또한, 화상 데이터 분배 장치(901)를 구성하는 각 요소(902 내지 906), 화상 데이터 수신 장치(908)를 구성하는 각 요소(909 내지 913)도, 상기 제3 실시예의 화상 데이터 분배 장치(301)의 각 요소(302 내지 306), 화상 데이터 수신 장치(308)의 각 요소(309 내지 313)에 대응하고 있다. 이하에서는, 상기 제3 실시예와의 차이점에 대해서만 설명한다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 오류 정정 부호 데이터는, I 픽쳐 부호화 데이터로부터 생성하는 것으로서 설명하지만, 모든 픽쳐 부호화 데이터로부터 생성하고, 이들을 상이한 세션에 의해 분배해도 됨은 물론이다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 1개의 부호화 데이터로부터 생성하는 오류 정정 부호 데이터 수를 「1」로서 설명하지만, 오류 정정 부호 데이터 수가 「1」에 한정되는 것이 아님은 물론이다.
화상 데이터 분배 장치(901)는, 분배 정보 송신부(902)와, 세션 정보 관리부(903)와, 화상 데이터 축적/생성부(904)와, I 픽쳐 부호화 데이터 송신부(905)와, P/B 픽쳐 부호화 데이터 송신부(906)와, FEC 부호 데이터 송신부(914)를 구비하고 있다.
화상 데이터 수신 장치(908)는, 세션 정보 수신부(909)와, I 픽쳐 부호화 데이터 수신부(910), P/B 픽쳐 부호화 데이터 수신부(911)와, 부호화 데이터 재구성부(912)와, 디코더(913)와, FEC 부호 데이터 수신부(915)를 구비하고 있다.
또한, FEC의 방식에 대해서는, 제7 실시예와 마찬가지이다.
화상 데이터 분배 장치(901)는, 화상 데이터 축적/생성부(904)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상 데이터를 변환하여 생성된 화상 데이터와, 상기 중 어느 하나에 의한 화상 부호화 데이터로부터 생성된 오류 정정 부호 데이터를, 세션 정보 관리부(903)에서 설정된, 세션마다의 전송로(907)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, I 픽쳐 부호화 데이터 송신부(905) 및 P/B 픽쳐 부호화 데이터 송신부(906) 및 FEC 부호 데이터 송신 부(914)에 의해, 전송로(907) 경유로 송신한다.
또한, 세션 정보 관리부(903)에서는, 각 세션으로부터 분배하는 픽쳐 정보 및 오류 정정 부호 데이터를 관리하여, 분배 정보 송신부(902)로부터 화상 데이터 수신 장치(908)에 통지한다.
FEC 부호 데이터 송신부(914)는, I 픽쳐 부호화 데이터의 어느 부분의 오류 정정 부호 데이터인지 알 수 있도록, RTP에 상당하는 정보(예를 들면 RTP 헤더의 시퀀스 번호)를 부가하는 기능을 갖는다. 또한, 오류 정정 부호 데이터인 것을 나타내는, 페이로드 타입 및/또는 SSRC 및/또는 CSRC를 부여하여도 된다.
화상 데이터 수신 장치(908)는, 화상 데이터 분배 장치(901)로부터의 화상 부호화 및 오류 정정 부호 데이터에 관한 정보를, 세션 정보 수신부(909)에서 수신하고, 이 정보로부터, 전송로(907)로부터 수신한 화상 데이터의 픽쳐 종별 및 오류 정정 부호 데이터의 대상 부호화 데이터 종별을 안다.
또한, 세션 정보 관리부(903)는,
·부호화 데이터의 부호화 설정,
·오류 정정 부호 종별,
·오류 정정 부호 설정(예를 들면 LDPC 부호에서의 검사 행렬 데이터, 혹은 이를 생성하기 위한 설정),
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터 및 오류 정정 부호를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하여, 분배 정보 송신부(902)에 의해 화상 데이터 수신 장치(908)에 통지해도 되고, 또한 이들 정보를, 미리 화상 데이터 분배 장치(901) 및 화상 데이터 수신 장치(908) 사이에서 설정해 두어도 된다.
I 픽쳐 부호화 데이터를 전송로에서의 오류 혹은 손실에 의해 수신할 수 없었던 경우, 부호화 데이터 재구성부(912)는, FEC 부호 데이터 수신부(915)에서 수신한 오류 정정 부호 데이터를 이용하여 I 픽쳐 부호화 데이터를 복원한다. 복원하여 얻은 I 픽쳐 부호화 데이터를 포함하여, 화상 데이터의 재구성에 대해서는, 상기 제3 실시예와 마찬가지이다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조도, 제3 실시예와 마찬가지이고, 수신 환경이 양호한 화상 데이터 수신 장치(908)는, I 픽쳐 부호화 데이터, P/B 픽쳐 부호화 데이터 및 오류 정정 부호 데이터를 수신할 수 있어, 더 고품질로 안정된 동화상 데이터를 재생할 수 있다. 또한, 이들을 분배하는 세션마다 전송로에서의 라우팅의 우선도나, 무선 전송로에서의 송신 전력을 제어할 수 있기 때문에, 네트워크 자원을 고려한 분배를 행할 수 있다.
또한, 오류 정정 부호 데이터를 복수로 하는 경우에 대해서는, 제7 실시예와 마찬가지이다.
상기한 것 이외에 대해서는, 상기 제3 실시예와 마찬가지이다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, I 픽쳐 부호화 데이터, P/B 픽쳐 부호화 데이터, 오류 정정 부호 데이터 및 이들에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 된다.
본 실시예에 있어서, I 픽쳐 부호화 데이터 및 P/B 픽쳐 부호화 데이터 및 오류 정정 부호 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(901)에 있어서의, 분배 정보 송신부(902)와, 세션 정보 관리부(903)와, 화상 데이터 축적/생성부(904)와, I 픽쳐 부호화 데이터 송신부(905)와, P/B 픽쳐 부호화 데이터 송신부(906)와, FEC 부호 데이터 송신부(914)에 대하여, 화상 데이터 분배 장치(901)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(908)에 있어서의, 세션 정보 수신부(909)와, I 픽쳐 부호화 데이터 수신부(910) 및 P/B 픽쳐 부호화 데이터 수신부(911)와, 부호화 데이터 재구성부(912)와, 디코더(913)와, FEC 부호 데이터 수신부(915)에 대하여, 화상 데이터 수신 장치(908)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제10 실시 형태]
본 발명의 제10 실시 형태에서는, 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 B 픽쳐 중, I/P 픽쳐와 그 이외의 픽쳐에서, 각각 상이한 세션으로 분배하는 수단과, 오류 정정 부호 데이터를 분배하는 수단과, 적어도 1개의 세션으로, 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 포함하고 있다. 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 오류 정정 부호 데이터를 수신하는 수단과, 전송로에서의 오류나 손실에 의해 상실된 동화상 데이터를, 오류 정정 부호 데이터를 이용하여 복원하는 수단과, 수신한 동화상 데이터를, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한, 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제10 실시예]
본 발명의 제10 실시예를 도면을 참조하면서 설명한다. 도 10은 본 발명의 제10 실시예의 구성을 도시한 도면이다. 도 10에 도시한 바와 같이 화상 데이터 분배 장치(1001)와, 화상 데이터 수신 장치(1008)와, 화상 부호화 데이터 및 오류 정정 부호 데이터를 전송하기 위한 전송로(1007)로 구성된다. 이들은, 각각 상기 제4 실시예의 화상 데이터 분배 장치(401)와, 화상 데이터 수신 장치(408)와, 전송로(407)에 대응하고 있다. 화상 데이터 분배 장치(1001)를 구성하는 각 요소(1002 내지 1006), 화상 데이터 수신 장치(1008)를 구성하는 각 요소(1009 내지 1013)도, 상기 제4 실시예의 화상 데이터 분배 장치(401)의 각 요소(402 내지 406), 화상 데이터 수신 장치(408)의 각 요소(409 내지 413)에 각각 대응하고 있다. 이하에서는, 주로 상기 제4 실시예와의 차이점에 대해서만 설명한다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 오류 정정 부호 데이터는, I/B 픽쳐 부호화 데이터로부터 생성하는 것으로서 설명하지만, 모든 픽쳐 부호화 데이터로부터 생성하고, 이들을 상이한 세션에 의해 분배해도 됨은 물론이다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 1개의 부호화 데이터로부터 생성하는 오류 정정 부호 데이터 수를 「1」로서 설명하지만, 오류 정정 부호 데이터 수가 「1」에 한정되는 것이 아님은 물론이다.
화상 데이터 분배 장치(1001)는, 분배 정보 송신부(1002)와, 세션 정보 관리부(1003)와, 화상 데이터 축적/생성부(1004)와, I/P 픽쳐 부호화 데이터 송신부(1005)와, B 픽쳐 부호화 데이터 송신부(1006)와, FEC 부호 데이터 송신부(1014)를 구비하고 있다.
화상 데이터 수신 장치(1008)는, 세션 정보 수신부(1009)와, I/P 픽쳐 부호화 데이터 수신부(1010)와, B 픽쳐 부호화 데이터 수신부(1011)와, 부호화 데이터 재구성부(1012)와, 디코더(1013)와, FEC 부호 데이터 수신부(1015)를 구비하고 있다.
또한, FEC의 방식에 대해서는, 제7 실시예와 마찬가지이다.
화상 데이터 분배 장치(1001)는, 화상 데이터 축적/생성부(1004)에서,
·미리 축적된 화상 데이터, 또는
·리얼타임으로 생성된 화상 데이터, 또는
·리얼타임으로 기존 화상을 변환하여 생성된 화상 데이터와, 상기 중 어느 하나에 의한 화상 부호화 데이터로부터 생성된 오류 정정 부호 데이터를, 세션 정 보 관리부(1003)에서 설정된, 세션마다의 전송로(1007)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, I/P 픽쳐 부호화 데이터 송신부(1005) 및 B 픽쳐 부호화 데이터 송신부(1006) 및 FEC 부호 데이터 송신부(1014)에 의해, 전송로(1007) 경유로 송신한다.
또한, 세션 정보 관리부(1003)에서는, 각 세션으로부터 분배하는 픽쳐 정보 및 오류 정정 부호 데이터를 관리하여, 분배 정보 송신부(1002)로부터 화상 데이터 수신 장치(1008)에 통지한다.
FEC 부호 데이터 송신부(1014)는, I/P 픽쳐 부호화 데이터의 어느 부분의 오류 정정 부호 데이터인지 알 수 있도록, RTP에 상당하는 정보(예를 들면 RTP 헤더의 시퀀스 번호)를 부가하는 기능을 갖는다. 또한, 오류 정정 부호 데이터인 것을 나타내는, 페이로드 타입 및/또는 SSRC 및/또는 CSRC를 부여하여도 된다.
화상 데이터 수신 장치(1008)는, 화상 데이터 분배 장치(1001)로부터의 화상 부호화 및 오류 정정 부호 데이터에 관한 정보를, 세션 정보 수신부(1009)에서 수신하고, 이 정보로부터, 전송로(1007)로부터 수신한 화상 데이터의 픽쳐 종별 및 오류 정정 부호 데이터의 대상 부호화 데이터 종별을 안다.
또한, 세션 정보 관리부(1003)는,
·부호화 데이터의 부호화 설정,
·오류 정정 부호 종별,
·오류 정정 부호 설정(예를 들면 LDPC 부호에서의 검사 행렬 데이터, 혹은 이를 생성하기 위한 설정),
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터 및 오류 정정 부호를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하여, 분배 정보 송신부(1002)에 의해 화상 데이터 수신 장치(1008)에 통지해도 되고, 또한 이들 정보를, 미리 화상 데이터 분배 장치(1001) 및 화상 데이터 수신 장치(1008) 사이에서 설정해 두어도 된다.
I/P 픽쳐 부호화 데이터를 전송로에서의 오류 혹은 손실에 의해 수신할 수 없었던 경우, 부호화 데이터 재구성부(1012)는, FEC 부호 데이터 수신부(1015)에서 수신한 오류 정정 부호 데이터를 이용하여 I/P 픽쳐 부호화 데이터를 복원한다. 복원하여 얻은 I/P 픽쳐 부호화 데이터를 포함하여, 화상 데이터의 재구성에 대해서는, 상기 제4 실시예와 마찬가지이다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조도, 제4 실시예와 마찬가지이고, 수신 환경이 양호한 화상 데이터 수신 장치(1008)는, I/P 픽쳐 부호화 데이터, B 픽쳐 부호화 데이터 및 오류 정정 부호 데이터를 수신할 수 있어, 더 고품질로 안정된 동화상 데이터를 재생할 수 있다. 또한, 이들을 분배하는 세션마다 전송로에서의 라우팅의 우선도나, 무선 전송로에서의 송신 전력을 제어할 수 있기 때문에, 네트워크 자원을 고려한 분배를 행할 수 있다.
또한, 오류 정정 부호 데이터를 복수로 하는 경우에 대해서는, 제7 실시예와 마찬가지이다.
상기한 것 이외에 대해서는, 상기 제4 실시예와 마찬가지이다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, I/P 픽쳐 부호화 데이터, B 픽쳐 부호화 데이터, 및 오류 정정 부호 데이터, 이들 데이터에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 된다.
본 실시예에 있어서도, I/P 픽쳐 부호화 데이터 및 B 픽쳐 부호화 데이터 및 오류 정정 부호 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(1001)에 있어서의, 분배 정보 송신부(1002)와, 세션 정보 관리부(1003)와, 화상 데이터 축적/생성부(1004)와, I/P 픽쳐 부호화 데이터 송신부(1005)와, B 픽쳐 부호화 데이터 송신부(1006)와, FEC 부호 데이터 송신부(1014)에 대하여, 화상 데이터 분배 장치(1001)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(1008)에 있어서의, 세션 정보 수신부(1009)와, I/P 픽쳐 부호화 데이터 수신부(1010) 및 B 픽쳐 부호화 데이터 수신부(1011)와, 부호화 데이터 재구성부(1012)와, 디코더(1013)와, FEC 부호 데이터 수신부(1015)에 대하여, 화상 데이터 수신 장치(1008)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제11 실시 형태]
본 발명의 제11 실시 형태에서는, 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 B 픽쳐 중, I 픽쳐, P 픽쳐, B 픽쳐에서, 각각 상이한 세션으로 분배하는 수단과, 오류 정정 부호 데이터를 분배하는 수단과, 적어도 1개의 세션으로, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 오류 정정 부호 데이터를 수신하는 수단과, 전송로에서의 오류나 손실에 의해 상실된 동화상 데이터를, 오류 정정 부호 데이터를 이용하여 복원하는 수단과, 수신한 동화상 데이터를 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제11 실시예]
다음으로 본 발명의 제11 실시예를 도면을 참조하면서 설명한다. 도 11은 본 발명의 제11 실시예의 구성의 일례를 도시하고 있다. 도 11에 도시한 바와 같이 화상 데이터 분배 장치(1101)와, 화상 데이터 수신 장치(1109)와, 화상 부호화 데이터 및 오류 정정 부호 데이터를 전송하기 위한 전송로(1108)로 구성된다. 이들은, 각각 상기 제5 실시예의 화상 데이터 분배 장치(501)와, 화상 데이터 수신 장치(509)와, 전송로(508)에 대응하고 있다. 화상 데이터 분배 장치(1101)를 구성하는 각 요소(1102 내지 1107), 화상 데이터 수신 장치(1109)를 구성하는 각 요소(1110 내지 1115)도, 상기 제5 실시예의 화상 데이터 분배 장치(501)의 각 요소(502 내지 507), 화상 데이터 수신 장치(509)의 각 요소(510 내지 515)에 대응하고 있다. 이하에서는, 상기 제5 실시예와 상이한 부분만 설명한다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 오류 정정 부호 데이터는, I 픽쳐 부호화 데이터로부터 생성하는 것으로서 설명하지만, 모든 픽쳐 부호화 데이터로부터 생성하고, 이들을 상이한 세션에 의해 분배해도 됨은 물론이다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 1개의 부호화 데이터로부터 생성하는 오류 정정 부호 데이터 수를 「1」로서 설명하지만, 오류 정정 부호 데이터 수가 「1」에 한정되는 것이 아님은 물론이다.
화상 데이터 분배 장치(1101)는, 분배 정보 송신부(1102)와, 세션 정보 관리부(1103)와, 화상 데이터 축적/생성부(1104)와, I 픽쳐 부호화 데이터 송신부(1105), P 픽쳐 부호화 데이터 송신부(1106)와, B 픽쳐 부호화 데이터 송신부(1107)와, FEC 부호 데이터 송신부(1116)를 구비하고 있다.
화상 데이터 수신 장치(1109)는, 세션 정보 수신부(1110)와, I 픽쳐 부호화 데이터 수신부(1111), P 픽쳐 부호화 데이터 수신부(1112), B 픽쳐 부호화 데이터 수신부(1113), 부호화 데이터 재구성부(1114)와, 디코더(1115)와, FEC 부호 데이터 수신부(1117)를 구비하고 있다.
또한, FEC의 방식에 대해서는, 제7 실시예와 마찬가지이다.
화상 데이터 분배 장치(1101)는, 화상 데이터 축적/생성부(1104)에서,
·미리 축적된 화상 데이터, 혹은
·리얼타임으로 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상 데이터를 변환하여 생성된 화상 데이터와, 상기 중 어느 하나에 의한 화상 부호화 데이터로부터 생성된 오류 정정 부호 데이터를, 세션 정보 관리부(1103)에서 설정된, 세션마다의 전송로(1108)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, I 픽쳐 부호화 데이터 송신부(1105) 및 P 픽쳐 부호화 데이터 송신부(1106) 및 B 픽쳐 부호화 데이터 송신부(1107) 및 FEC 부호 데이터 송신부(1116)에 의해, 전송로(1108) 경유로 송신한다.
세션 정보 관리부(1103)에서는, 각 세션으로부터 분배하는 픽쳐 정보 및 오류 정정 부호 데이터를 관리하여, 분배 정보 송신부(1102)로부터 화상 데이터 수신 장치(1109)에 통지한다.
FEC 부호 데이터 송신부(1116)는, I 픽쳐 부호화 데이터의 어느 부분의 오류 정정 부호 데이터인지 알 수 있도록, RTP에 상당하는 정보(예를 들면 RTP 헤더의 시퀀스 번호)를 부가하는 기능을 갖는다. 또한, 오류 정정 부호 데이터인 것을 나타내는, 페이로드 타입 및/또는 SSRC 및/또는 CSRC를 부여하여도 된다.
화상 데이터 수신 장치(1109)는, 화상 데이터 분배 장치(1101)로부터의 화상 부호화 및 오류 정정 부호 데이터에 관한 정보를, 세션 정보 수신부(1110)에서 수신하고, 이 정보로부터, 전송로(1108)로부터 수신한 화상 데이터의 픽쳐 종별 및 오류 정정 부호 데이터의 대상 부호화 데이터 종별을 안다.
또한, 세션 정보 관리부(1103)는,
·부호화 데이터의 부호화 설정,
·오류 정정 부호 종별,
·오류 정정 부호 설정(예를 들면 LDPC 부호에서의 검사 행렬 데이터, 혹은 이를 생성하기 위한 설정),
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터 및 오류 정정 부호를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(1102)에 의해 화상 데이터 수신 장치(1109)에 통지해도 되고, 또한 이들 정보를, 미리 화상 데이터 분배 장치(1101) 및 화상 데이터 수신 장치(1109) 사이에서 설정해 두어도 된다.
I 픽쳐 부호화 데이터를 전송로에서의 오류 혹은 손실에 의해 수신할 수 없었던 경우, 부호화 데이터 재구성부(1114)는, FEC 부호 데이터 수신부(1117)에서 수신한 오류 정정 부호 데이터를 이용하여 I 픽쳐 부호화 데이터를 복원한다. 복원하여 얻은 I 픽쳐 부호화 데이터를 포함하여, 화상 데이터의 재구성에 대해서는, 상기 제5 실시예와 마찬가지이다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조도, 제5 실시예와 마찬가지이고, 수신 환경이 양호한 화상 데이터 수신 장치(1109)는, I 픽쳐 부호화 데이터, P 픽쳐 부호화 데이터, B 픽쳐 부호화 데이터 및 오류 정정 부호 데이터를 수신할 수 있어, 더 고품질로 안정된 동화상 데이터를 재생할 수 있다. 또한, 이들을 분배하는 세션마다 전송로에서의 라우팅의 우선도나, 무선 전송로에서의 송신 전력을 제어할 수 있기 때문에, 네트워크 자원을 고려한 분배를 행할 수 있다.
또한, 오류 정정 부호 데이터를 복수로 하는 경우에 대해서는, 제7 실시예와 마찬가지이다.
상기한 것 이외에 대해서는, 상기 제5 실시예와 마찬가지이다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, I 픽쳐 부호화 데이터, B 픽쳐 부호화 데이터, P 픽쳐 부호화 데이터 및 오류 정정 부호 데이터와, 이들 데이터에 관한 정보를, 상이한 전송로에 의해 전송하는 구성으로 하여도 된다.
본 실시예에 있어서도, I 픽쳐 부호화 데이터 및 P 픽쳐 부호화 데이터 및 B 픽쳐 부호화 데이터 및 오류 정정 부호 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한 화상 데이터 분배 장치(1101)에 있어서의, 분배 정보 송신부(1102)와, 세션 정보 관리부(1103)와, 화상 데이터 축적/생성부(1104)와, I 픽쳐 부호화 데이터 송신부(1105)와, P 픽쳐 부호화 데이터 송신부(1106), B 픽쳐 부호화 데이터 송신부(1107)와, FEC 부호 데이터 송신부(1116)에 대하여, 화상 데이터 분배 장치(1101)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(1109)에 있어서의, 세션 정보 수신부(1110)와, I 픽쳐 부호화 데이터 수신부(1111), P 픽쳐 부호화 데이터 수신부(1112), B 픽쳐 부호화 데이터 수신부(1113)와, 부호화 데이터 재구성부(1114)와, 디코더(1115)와, FEC 부호 데이터 수신부(1117)에 대하여, 화상 데이터 수신 장치(1109)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
[발명의 제12 실시 형태]
본 발명의 제12 실시 형태에서는, 화상 데이터 분배 장치는, 동화상 데이터의 I 픽쳐, P 픽쳐, 및 동화상의 부호화에 이용한 부호화 방식에 존재하는 경우에는 B 픽쳐, 및 동화상 데이터의 해당 프레임 중 적어도 일부를 인트라-매크로 블록(Intra-MB) 부호화한 부호화 데이터를, 각각 상이한 세션으로 분배하는 수단과, 오류 정정 부호 데이터를 분배하는 수단과, 적어도 1개의 세션으로, 동화상 데이터를 분배하는 세션마다 전송로에서의 라우팅의 우선도 제어나, 무선 전송로에서의 전력 제어를 설정하는 수단을 구비하고 있다. 화상 데이터 수신 장치는, 적어도 1개의 세션에 의해 분배된 데이터를 수신하는 수단과, 오류 정정 부호 데이터를 수신하는 수단과, 전송로에서의 오류나 손실에 의해 상실된 동화상 데이터를, 오류 정정 부호 데이터를 이용하여 복원하는 수단과, 수신한 동화상 데이터 중, 화상 품질에 기초하여 데이터를 선택하고, 1개의 동화상 데이터로 재구성하여 복호화하는 수단을 구비하고 있다. 또한, 적어도 1개의 세션의 수신의 유무를, 수신 데이터의 오류/손실률, 수신 장치의 이용 가능한 전력, 미리 정해진 설정 중의 적어도 1개에 기초하여, 선택하는 수단을 구비한 구성으로 하여도 된다.
[제12 실시예]
본 발명의 제12 실시예를 도면을 참조하면서 설명한다. 도 12는 본 발명의 제12 실시예의 구성을 도시하고 있다. 도 12에 도시한 바와 같이 화상 데이터 분배 장치(1201)와, 화상 데이터 수신 장치(1210)와, 화상 부호화 데이터 및 오류 정정 부호 데이터를 전송하기 위한 전송로(1209)로 구성된다. 이들은, 각각 상기 제6 실시예의 화상 데이터 분배 장치(601)와, 화상 데이터 수신 장치(610)와, 전송로(609)에 대응하고 있다. 화상 데이터 분배 장치(1201)를 구성하는 각 요소(1202 내지 1208), 화상 데이터 수신 장치(1210)를 구성하는 각 요소(1211 내지 1217)도, 상기 제6 실시예의 화상 데이터 분배 장치(601)의 각 요소(602 내지 608), 화상 데이터 수신 장치(610)의 각 요소(611 내지 617)에 각각 대응하고 있다. 이하에서는, 상기 제6 실시예와의 차이점에 대해서만 설명한다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 오류 정정 부호 데이터는, I 픽쳐 부호화 데이터로부터 생성하는 것으로서 설명하지만, 모든 픽쳐 부호화 데이터 및/또는 인트라-매크로 블록 부호 데이터로부터 생성하고, 이들을 상이한 세션에 의해 분배해도 됨은 물론이다. 또한, 본 실시예에서는, 설명을 간단히 하기 위해, 1개의 부호화 데이터로부터 생성하는 오류 정정 부호 데이터 수를 「1」로서 설명하지만, 오류 정정 부호 데이터 수가 「1」에 한정되는 것이 아님은 물론이다.
화상 데이터 분배 장치(1201)는, 분배 정보 송신부(1202)와, 세션 정보 관리부(1203)와, 화상 데이터 축적/생성부(1204)와, I 픽쳐 부호화 데이터 송신부(1205), P 픽쳐 부호화 데이터 송신부(1206), B 픽쳐 부호화 데이터 송신부(1207), 인트라-매크로 블록(Intra-MB) 부호화 데이터 송신부(1208), FEC 부호 데이터 송신부(1218)를 구비하고 있다.
화상 데이터 수신 장치(1210)는, 세션 정보 수신부(1211)와, I 픽쳐 부호화 데이터 수신부(1212), P 픽쳐 부호화 데이터 수신부(1213), B 픽쳐 부호화 데이터 수신부(1214), 인트라-매크로 블록(Intra-MB) 부호화 데이터 수신부(1215)와, 부호화 데이터 재구성부(1216)와, 디코더(1217)와, FEC 부호 데이터 수신부(1219)를 구비하고 있다.
또한, FEC의 방식에 대해서는, 제7 실시예와 마찬가지이다.
화상 데이터 분배 장치(1201)는, 화상 데이터 축적/생성부(1204)에서,
·미리 축적된 화상 데이터,
·리얼타임으로 생성된 화상 데이터, 혹은
·리얼타임으로 기존 화상을 변환하여 생성된 화상 데이터와, 상기 중 어느 하나에 의한 화상 부호화 데이터로부터 생성된 오류 정정 부호 데이터를, 세션 정보 관리부(1203)에서 설정된, 세션마다의 전송로(1209)에서의 라우팅의 우선도 정보 및/또는 무선 전송로의 전력 제어 정보에 기초하여, I 픽쳐 부호화 데이터 송신부(1205), P 픽쳐 부호화 데이터 송신부(1206), B 픽쳐 부호화 데이터 송신부(1207), Intra-MB 부호화 데이터 송신부(1208) 및 FEC 부호 데이터 송신부(1218)에 의해, 전송로(1209) 경유로 송신한다.
세션 정보 관리부(1203)에서는, 각 세션으로부터 분배하는 픽쳐 정보 및 오류 정정 부호 데이터를 관리하여, 분배 정보 송신부(1202)로부터 화상 데이터 수신 장치(1210)에 통지한다.
FEC 부호 데이터 송신부(1218)는, I 픽쳐 부호화 데이터의 어느 부분의 오류 정정 부호 데이터인지 알 수 있도록, RTP에 상당하는 정보(예를 들면 RTP 헤더의 시퀀스 번호)를 부가하는 기능을 갖는다. 또한, 오류 정정 부호 데이터인 것을 나타내는, 페이로드 타입 및/또는 SSRC 및/또는 CSRC를 부여하여도 된다.
화상 데이터 수신 장치(1210)는, 화상 데이터 분배 장치(1201)로부터의 화상 부호화 및 오류 정정 부호 데이터에 관한 정보를, 세션 정보 수신부(1211)에서 수신하고, 이 정보로부터, 전송로(1209)로부터 수신한 화상 데이터의 픽쳐, 블록 종별 및 오류 정정 부호 데이터의 대상 부호화 데이터 종별을 안다.
또한, 세션 정보 관리부(1203)는,
·부호화 데이터의 부호화 설정,
·오류 정정 부호 종별,
·오류 정정 부호 설정(예를 들면 LDPC 부호에서의 검사 행렬 데이터, 혹은 이를 생성하기 위한 설정),
·부호화 옵션(사용 툴),
·부호화 데이터의 페이로드·옵션,
·부호화 데이터 및 오류 정정 부호를 식별하는 RTP 헤더의 페이로드 타입에 상당하는 정보,
·SSRC, CSRC에 상당하는 정보
중 적어도 1개를 설정하고, 분배 정보 송신부(1202)에 의해 화상 데이터 수신 장치(1210)에 통지해도 되고, 또한 이들 정보를, 미리 화상 데이터 분배 장치(1201) 및 화상 데이터 수신 장치(1210) 사이에서 설정해 두어도 된다.
I 픽쳐 부호화 데이터를 전송로에서의 오류 혹은 손실에 의해 수신할 수 없었던 경우, 부호화 데이터 재구성부(1216)는, FEC 부호 데이터 수신부(1219)에서 수신한 오류 정정 부호 데이터를 이용하여 I 픽쳐 부호화 데이터를 복원한다. 복원하여 얻은 I 픽쳐 부호화 데이터를 포함하여, 화상 데이터의 재구성에 대해서는 상기 제6 실시예와 마찬가지이다.
수신 환경에 따라, 분배되는 화상 품질이 최적화되는 구조도, 제6 실시예와 마찬가지이고, 수신 환경이 양호한 화상 데이터 수신 장치(1210)는, I 픽쳐 부호화 데이터, P 픽쳐 부호화 데이터, B 픽쳐 부호화 데이터, 인트라-매크로 블록 부호화 데이터 및 오류 정정 부호 데이터를 수신할 수 있어, 더 고품질로 안정된 동화상 데이터를 재생할 수 있다. 또한, 이들을 분배하는 세션마다 전송로에서의 라우팅의 우선도나, 무선 전송로에서의 송신 전력을 제어할 수 있기 때문에, 네트워크 자원을 고려한 분배를 행할 수 있다.
또한, 오류 정정 부호 데이터를 복수로 하는 경우에 대해서는, 제7 실시예와 마찬가지이다.
상기한 것 이외에 대해서는, 상기 제6 실시예와 마찬가지이다.
또한, 본 실시예에 있어서, 전송로를 복수로 하고, I 픽쳐 부호화 데이터, B 픽쳐 부호화 데이터, P 픽쳐 부호화 데이터, 인트라-매크로 블록 부호화 데이터, 오류 정정 부호 데이터, 및 이들 데이터에 관한 정보가, 상이한 전송로를 통해 전 송되는 구성으로 하여도 됨은 물론이다.
본 실시예에 있어서, I 픽쳐 부호화 데이터 및 P 픽쳐 부호화 데이터 및 B 픽쳐 부호화 데이터, 인트라-매크로 블록 부호화 데이터 및 오류 정정 부호 데이터를 분배하는 세션은, 적어도 1개를 유니캐스트 방식으로 송신하도록 해도 되고, 적어도 1개를 멀티캐스트 혹은 브로드캐스트 방식으로 송신하도록 하여도 된다.
또한, 화상 데이터 분배 장치(1201)에 있어서의, 분배 정보 송신부(1202)와, 세션 정보 관리부(1203)와, 화상 데이터 축적/생성부(1204)와, I 픽쳐 부호화 데이터 송신부(1205)와, P 픽쳐 부호화 데이터 송신부(1206), B 픽쳐 부호화 데이터 송신부(1207), 인트라-매크로 블록 부호화 데이터 송신부(1208), FEC 부호 데이터 송신부(1218)에 대하여, 화상 데이터 분배 장치(1201)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다. 화상 데이터 수신 장치(1210)에 있어서의, 세션 정보 수신부(1211)와, I 픽쳐 부호화 데이터 수신부(1212), P 픽쳐 부호화 데이터 수신부(1213), B 픽쳐 부호화 데이터 수신부(1214), 인트라-매크로 블록 부호화 데이터 수신부(1215)와, 부호화 데이터 재구성부(1216)와, 디코더(1217)와, FEC 부호 데이터 수신부(1219)에 대하여, 화상 데이터 수신 장치(1210)를 구성하는 컴퓨터로 실행되는 프로그램 제어에 의해 각각의 기능 처리를 실현하도록 해도 됨은 물론이다.
이상 본 발명을 상기 각 실시예에 의거하여 설명했지만, 본 발명은, 상기 실시예의 구성에만 한정되는 것이 아니고, 특허 청구의 범위의 각 청구항의 발명의 범위 내에서 당업자라면 할 수 있는 각종 변형, 수정을 포함하는 것은 물론이다.
도 1은 본 발명의 제1 실시 형태의 구성의 일례를 도시한 도면이다.
도 2는 본 발명의 제2 실시 형태의 구성의 일례를 도시한 도면이다.
도 3은 본 발명의 제3 실시 형태의 구성의 일례를 도시한 도면이다.
도 4는 본 발명의 제4 실시 형태의 구성의 일례를 도시한 도면이다.
도 5는 본 발명의 제5 실시 형태의 구성의 일례를 도시한 도면이다.
도 6은 본 발명의 제6 실시 형태의 구성의 일례를 도시한 도면이다.
도 7은 본 발명의 제7 실시 형태의 구성의 일례를 도시한 도면이다.
도 8은 본 발명의 제8 실시 형태의 구성의 일례를 도시한 도면이다.
도 9는 본 발명의 제9 실시 형태의 구성의 일례를 도시한 도면이다.
도 10은 본 발명의 제10 실시 형태의 구성의 일례를 도시한 도면이다.
도 11은 본 발명의 제11 실시 형태의 구성의 일례를 도시한 도면이다.
도 12는 본 발명의 제12 실시 형태의 구성의 일례를 도시한 도면이다.

Claims (73)

  1. 동화상 부호화 데이터를 분배하는(distribute) 분배 수단을 구비하고, 상기 분배 수단이 상기 동화상 부호화 데이터가 분배되는 세션과는 다른 세션으로 오류 정정 부호 데이터를 분배하며, 상기 동화상 부호화 데이터에 UDP 헤더 및 RTP 헤더가 부가되어 있는 것을 특징으로 하는 화상 데이터 분배 장치.
  2. 제1항에 있어서,
    상기 분배 수단이 상기 동화상 부호화 데이터와 상기 오류 정정 부호 데이터를 식별하는 정보를 분배하는 것을 특징으로 하는 화상 데이터 분배 장치.
  3. 제1항 또는 제2항에 있어서,
    상기 분배 수단이 상기 오류 정정 부호의 종별의 설정에 이용되는 정보를 분배하는 것을 특징으로 하는 화상 데이터 분배 장치.
  4. 제1항 또는 제2항에 있어서,
    상기 분배 수단이 수신측의 사용 툴 및 상기 동화상 부호화 데이터의 페이로드·옵션을 분배하는 것을 특징으로 하는 화상 데이터 분배 장치.
  5. 동화상 부호화 데이터를 수신하는 수신 장치를 구비하고, 상기 수신 장치가 상기 동화상 부호화 데이터가 수신되는 세션과는 다른 세션으로 오류 정정 부호 데이터를 수신하며, 상기 동화상 부호화 데이터에 UDP 헤더 및 RTP 헤더가 부가되어 있는 것을 특징으로 하는 화상 데이터 수신 장치.
  6. 제5항에 있어서,
    상기 수신 장치가 상기 동화상 부호화 데이터와 상기 오류 정정 부호 데이터를 식별하는 정보를 수신하는 것을 특징으로 하는 화상 데이터 수신 장치.
  7. 제5항 또는 제6항에 있어서,
    상기 수신 장치가 상기 오류 정정 부호의 식별의 설정에 이용되는 정보를 수신하는 것을 특징으로 하는 화상 데이터 수신 장치.
  8. 제5항 또는 제6항에 있어서,
    상기 수신 장치가 자신의 사용 툴 및 상기 동화상 부호화 데이터의 페이로드·옵션을 수신하는 것을 특징으로 하는 화상 데이터 수신 장치.
  9. 동화상 부호화 데이터를 분배하는 분배 수단을 포함하는 것, 및
    상기 분배 수단이 상기 동화상 부호화 데이터가 분배되는 세션과는 다른 세션으로 오류 정정 부호 데이터를 분배하고, 상기 동화상 부호화 데이터에 UDP 헤더 및 RTP 헤더가 부가되어 있는 것을 특징으로 하는 화상 데이터 분배 방법.
  10. 제9항에 있어서,
    상기 분배 수단이 상기 동화상 부호화 데이터와 상기 오류 정정 부호 데이터를 식별하는 정보를 분배하는 것을 특징으로 하는 화상 데이터 분배 방법.
  11. 제9항 또는 제10항에 있어서,
    상기 분배 수단이 상기 오류 정정 부호의 종별의 설정에 이용되는 정보를 분배하는 것을 특징으로 하는 화상 데이터 분배 방법.
  12. 제9항 또는 제10항에 있어서,
    상기 분배 수단이 수신측의 사용 툴 및 상기 동화상 부호화 데이터의 페이로드·옵션을 분배하는 것을 특징으로 하는 화상 데이터 분배 방법.
  13. 동화상 부호화 데이터를 수신하는 수신 장치를 구비하고, 상기 수신 장치가 상기 동화상 부호화 데이터가 수신되는 세션과는 다른 세션으로 오류 정정 부호 데이터를 수신하며, 상기 동화상 부호화 데이터에 UDP 헤더 및 RTP 헤더가 부가되어 있는 것을 특징으로 하는 화상 데이터 수신 방법.
  14. 제13항에 있어서,
    상기 수신 장치가 상기 동화상 부호화 데이터와 상기 오류 정정 부호 데이터를 식별하는 정보를 수신하는 것을 특징으로 하는 화상 데이터 수신 방법.
  15. 제13항 또는 제14항에 있어서,
    상기 수신 장치가 상기 오류 정정 부호의 식별의 설정에 이용되는 정보를 수신하는 것을 특징으로 하는 화상 데이터 수신 방법.
  16. 제13항 또는 제14항에 있어서,
    상기 수신 장치가 자신의 사용 툴 및 상기 동화상 부호화 데이터의 페이로드·옵션을 수신하는 것을 특징으로 하는 화상 데이터 수신 방법.
  17. 분배 장치 및 분배 장치가 분배하는 동화상 부호화 데이터를 수신하는 수신 장치를 구비하는 통신 시스템에 있어서,
    상기 분배 장치가 상기 동화상 부호화 데이터가 분배되는 세션과는 다른 세션으로 오류 정정 부호 데이터를 분배하고,
    상기 수신 장치가 상기 동화상 부호화 데이터가 수신되는 세션과는 다른 세션으로 오류 정정 부호 데이터를 수신하며,
    상기 동화상 부호화 데이터에 UDP 헤더 및 RTP 헤더가 부가되어 있는
    통신 시스템.
  18. 제17항에 있어서,
    상기 분배 장치가 상기 동화상 부호화 데이터와 상기 오류 정정 부호 데이터를 식별하는 정보를 상기 수신 장치에 송신하는, 통신 시스템.
  19. 제17항 또는 제18항에 있어서,
    상기 분배 장치가 상기 오류 정정 부호의 종별의 설정에 이용되는 정보를 상기 수신 장치에 송신하는, 통신 시스템.
  20. 제17항 또는 제18항에 있어서,
    상기 분배 장치가 수신측의 사용 툴 및 상기 동화상 부호화 데이터의 페이로드·옵션을 상기 수신 장치에 송신하는, 통신 시스템.
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
  37. 삭제
  38. 삭제
  39. 삭제
  40. 삭제
  41. 삭제
  42. 삭제
  43. 삭제
  44. 삭제
  45. 삭제
  46. 삭제
  47. 삭제
  48. 삭제
  49. 삭제
  50. 삭제
  51. 삭제
  52. 삭제
  53. 삭제
  54. 삭제
  55. 삭제
  56. 삭제
  57. 삭제
  58. 삭제
  59. 삭제
  60. 삭제
  61. 삭제
  62. 삭제
  63. 삭제
  64. 삭제
  65. 삭제
  66. 삭제
  67. 삭제
  68. 삭제
  69. 삭제
  70. 삭제
  71. 삭제
  72. 삭제
  73. 삭제
KR1020087004072A 2003-02-21 2004-02-16 화상 데이터 분배 시스템, 장치, 및 방법 KR100977646B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2003044237 2003-02-21
JPJP-P-2003-00044237 2003-02-21
JP2003387993 2003-11-18
JPJP-P-2003-00387993 2003-11-18

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR20057015285A Division KR100949402B1 (ko) 2003-02-21 2004-02-16 화상 데이터 분배 시스템, 장치, 및 방법

Publications (2)

Publication Number Publication Date
KR20080024544A KR20080024544A (ko) 2008-03-18
KR100977646B1 true KR100977646B1 (ko) 2010-08-24

Family

ID=32911428

Family Applications (2)

Application Number Title Priority Date Filing Date
KR20057015285A KR100949402B1 (ko) 2003-02-21 2004-02-16 화상 데이터 분배 시스템, 장치, 및 방법
KR1020087004072A KR100977646B1 (ko) 2003-02-21 2004-02-16 화상 데이터 분배 시스템, 장치, 및 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR20057015285A KR100949402B1 (ko) 2003-02-21 2004-02-16 화상 데이터 분배 시스템, 장치, 및 방법

Country Status (6)

Country Link
US (1) US20060285149A1 (ko)
EP (2) EP1599044A4 (ko)
JP (2) JPWO2004075548A1 (ko)
KR (2) KR100949402B1 (ko)
CN (1) CN1754385B (ko)
WO (1) WO2004075548A1 (ko)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006038054A1 (en) * 2004-10-06 2006-04-13 Nokia Corporation Packet transmission using error correction of data packets
US8351363B2 (en) 2005-04-08 2013-01-08 Qualcomm Incorporated Method and apparatus for enhanced file distribution in multicast or broadcast
US8217803B2 (en) * 2008-04-22 2012-07-10 Srd Innovations Inc. Wireless data acquisition network and operating methods
US9128202B2 (en) * 2008-04-22 2015-09-08 Srd Innovations Inc. Wireless data acquisition network and operating methods
JP4626701B2 (ja) * 2008-10-21 2011-02-09 ソニー株式会社 表示装置
EP2200220A1 (en) * 2008-12-22 2010-06-23 Thomson Licensing Method and apparatus for reliable multicast streaming
US20110170443A1 (en) * 2010-01-13 2011-07-14 Ronald Gerald Murias Link sensitive aodv for wireless data transfer
US8949318B2 (en) * 2011-06-16 2015-02-03 Kodak Alaris Inc. Digital image communication
US20130182643A1 (en) * 2012-01-16 2013-07-18 Qualcomm Incorporated Method and system for transitions of broadcast dash service receptions between unicast and broadcast
US9178778B2 (en) 2012-03-23 2015-11-03 Avaya Inc. System and method for end-to-end RTCP
US9860296B2 (en) 2012-03-23 2018-01-02 Avaya Inc. System and method for end-to-end call quality indication
US9356917B2 (en) 2012-03-23 2016-05-31 Avaya Inc. System and method for end-to-end encryption and security indication at an endpoint
JP5979949B2 (ja) 2012-04-11 2016-08-31 キヤノン株式会社 画像データ送信装置及び画像データ受信装置
JP5979948B2 (ja) 2012-04-11 2016-08-31 キヤノン株式会社 画像データ送信装置及び画像データ受信装置
CN102665109A (zh) * 2012-04-19 2012-09-12 中兴通讯股份有限公司 一种多媒体视频数据的发送、接收方法及对应装置
WO2016080233A1 (ja) * 2014-11-17 2016-05-26 ソニー株式会社 送信装置、ハイダイナミックレンジ画像データ送信方法、受信装置、ハイダイナミックレンジ画像データ受信方法およびプログラム
JP7271080B2 (ja) * 2017-10-11 2023-05-11 エヌ・ティ・ティ・コミュニケーションズ株式会社 通信装置、通信システム、通信方法、及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11177628A (ja) * 1997-12-15 1999-07-02 Mitsubishi Electric Corp 広域環境用３次元仮想空間共有システム
KR20020048379A (ko) * 2000-05-29 2002-06-22 마츠시타 덴끼 산교 가부시키가이샤 멀티 캐리어 통신 장치 및 멀티 캐리어 통신 방법, 통신 단말 장치, 및 기지국 장치
JP2002353964A (ja) * 2001-05-30 2002-12-06 Sony Corp コンテンツ提供装置及びコンテンツ提供方法

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0744847B1 (fr) * 1995-05-23 2005-08-24 Koninklijke Philips Electronics N.V. Système de transmission d'information utilisant, en redondance, au moins deux canaux
JPH0923214A (ja) * 1995-07-05 1997-01-21 Hitachi Ltd ディジタル信号送受信装置
JPH1023380A (ja) * 1996-06-28 1998-01-23 Canon Inc 画像通信システム、画像通信装置、画像通信方法および媒体
JP3589532B2 (ja) * 1996-08-27 2004-11-17 松下電器産業株式会社 ディジタル映像通信システム
JPH10224746A (ja) 1997-02-05 1998-08-21 Kokusai Electric Co Ltd 画像伝送システム
JPH10294941A (ja) 1997-04-22 1998-11-04 Canon Inc 画像伝送システム、画像伝送装置、画像送信装置及び画像受信装置
US6014694A (en) * 1997-06-26 2000-01-11 Citrix Systems, Inc. System for adaptive video/audio transport over a network
US6148005A (en) * 1997-10-09 2000-11-14 Lucent Technologies Inc Layered video multicast transmission system with retransmission-based error recovery
JPH11127138A (ja) * 1997-10-24 1999-05-11 Sony Corp 誤り訂正符号化方法及びその装置並びにデータ伝送方法
JPH11187367A (ja) 1997-12-19 1999-07-09 Nec Corp 映像送信装置，映像受信装置及びこれらを用いた映像伝送システム
JPH11196072A (ja) * 1997-12-30 1999-07-21 Sony Corp 誤り訂正符号化方法及びその装置並びにデータ伝送方法
US6421387B1 (en) * 1998-05-15 2002-07-16 North Carolina State University Methods and systems for forward error correction based loss recovery for interactive video transmission
US6490705B1 (en) * 1998-10-22 2002-12-03 Lucent Technologies Inc. Method and apparatus for receiving MPEG video over the internet
JP2000295608A (ja) * 1999-04-06 2000-10-20 Matsushita Electric Ind Co Ltd 映像信号階層符号化伝送装置、映像信号階層復号化受信装置およびプログラム記録媒体
CN1160958C (zh) * 2000-01-08 2004-08-04 四川长虹电器股份有限公司 数字hdtv接收装置
JP3662473B2 (ja) * 2000-05-12 2005-06-22 株式会社エヌ・ティ・ティ・ドコモ マルチキャストサービス提供方法及び情報配信装置
GB2362531A (en) * 2000-05-15 2001-11-21 Nokia Mobile Phones Ltd Indicating the temporal order of reference frames in a video sequence
US7003794B2 (en) * 2000-06-27 2006-02-21 Bamboo Mediacasting, Inc. Multicasting transmission of multimedia information
JP2002077912A (ja) * 2000-08-29 2002-03-15 Brother Ind Ltd 画像符号化装置
JP4341161B2 (ja) * 2000-09-12 2009-10-07 ソニー株式会社 情報提供方法、情報提供装置及び情報記録媒体
US7072971B2 (en) * 2000-11-13 2006-07-04 Digital Foundation, Inc. Scheduling of multiple files for serving on a server
EP1217841A2 (en) * 2000-11-27 2002-06-26 Media Glue Corporation Bitstream separating and merging system, apparatus, method and computer program product
US20020073136A1 (en) * 2000-12-07 2002-06-13 Tomoaki Itoh Data reproduction method, data receiving terminal and data receiving method
US20020071052A1 (en) * 2000-12-07 2002-06-13 Tomoaki Itoh Transmission rate control method
JP2002251494A (ja) * 2000-12-20 2002-09-06 Victor Co Of Japan Ltd デジタルコンテンツデータ配信システム
US7103669B2 (en) * 2001-02-16 2006-09-05 Hewlett-Packard Development Company, L.P. Video communication method and system employing multiple state encoding and path diversity
EP1241821A1 (fr) * 2001-03-13 2002-09-18 Koninklijke Philips Electronics N.V. Procédé de protection de paquets de données contre des erreurs
EP1261204A2 (en) * 2001-03-29 2002-11-27 Matsushita Electric Industrial Co., Ltd. Method and apparatus for data reproduction
JP2003152544A (ja) * 2001-11-12 2003-05-23 Sony Corp データ通信システム、データ送信装置、データ受信装置、および方法、並びにコンピュータ・プログラム
US7020823B2 (en) * 2002-03-19 2006-03-28 Matsushita Electric Industrial Co., Ltd. Error resilient coding, storage, and transmission of digital multimedia data
US20060109901A1 (en) * 2002-12-19 2006-05-25 Koninklijke Philips Electronics N.V. System and method for drift-free fractional multiple description channel coding of video using forward error correction codes
FR2852179A1 (fr) * 2003-03-06 2004-09-10 Thomson Licensing Sa Procede de codage d'une image video
KR101191181B1 (ko) * 2005-09-27 2012-10-15 엘지전자 주식회사 디지털 방송의 송/수신 시스템 및 데이터 구조

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11177628A (ja) * 1997-12-15 1999-07-02 Mitsubishi Electric Corp 広域環境用３次元仮想空間共有システム
KR20020048379A (ko) * 2000-05-29 2002-06-22 마츠시타 덴끼 산교 가부시키가이샤 멀티 캐리어 통신 장치 및 멀티 캐리어 통신 방법, 통신 단말 장치, 및 기지국 장치
JP2002353964A (ja) * 2001-05-30 2002-12-06 Sony Corp コンテンツ提供装置及びコンテンツ提供方法

Also Published As

Publication number Publication date
KR100949402B1 (ko) 2010-03-24
KR20050103232A (ko) 2005-10-27
EP1599044A4 (en) 2010-05-12
KR20080024544A (ko) 2008-03-18
CN1754385A (zh) 2006-03-29
JP5533435B2 (ja) 2014-06-25
US20060285149A1 (en) 2006-12-21
EP1599044A1 (en) 2005-11-23
EP2538695A1 (en) 2012-12-26
JP2011010356A (ja) 2011-01-13
JPWO2004075548A1 (ja) 2006-06-01
CN1754385B (zh) 2010-07-21
WO2004075548A1 (ja) 2004-09-02

Similar Documents

Publication Publication Date Title
JP5533435B2 (ja) 画像データ配信制御方法及び装置とシステムならびにプログラム
CN102036061B (zh) 视频数据传输处理、发送处理方法、装置和网络系统
JP4659838B2 (ja) 一連のフレームを予測的にコード化する装置
KR100808306B1 (ko) 화상 데이터 배신 제어 방법 및 장치와 시스템
US7627184B2 (en) Content distribution/reception device, content transmission/reception method, and content distribution/reception program
JP4596164B2 (ja) 画像データ通信システムおよび画像データ通信方法
US8548030B2 (en) Relay apparatus
Chen et al. A qoe-based app layer scheduling scheme for scalable video transmissions over multi-rat systems?
Noh et al. Robust mobile video streaming in a peer-to-peer system
Khansari et al. A low-complexity error-resilient H. 263 coder
Saadawi et al. A transport level unequal error protection mechanism for wireless interactive video
Razzaq et al. A robust network coding scheme for SVC-based streaming over wireless mesh network
Peng et al. Error-resilient video transmission for short-range point-to-point wireless communication
Panahi et al. A novel schema for multipath video transferring over ad hoc networks
Huang et al. A novel unbalanced multiple description coder for robust video transmission over ad hoc wireless networks
Zhang et al. Cross-layer frame discarding for cellular video coding
Tan et al. Using SP-frames for error resilience in optimized video streaming
Park et al. Effective Relay Communication for Scalable Video Transmission
Abd et al. A cross-layer optimized error recovery mechanism for real-time video in ad-hoc networks
Zheng et al. 5 Streaming Video over Wireless Networks
Panahi Multipath Local Error Management Technique Over Ad Hoc Networks
Saadawi et al. A multi-path error control mechanism for interactive video in mobile wireless networks

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130719

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140722

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150716

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160720

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170719

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180718

Year of fee payment: 9