KR20110058841A - 동화상 데이터의 배신 방법 - Google Patents

동화상 데이터의 배신 방법 Download PDF

Info

Publication number
KR20110058841A
KR20110058841A KR1020117006683A KR20117006683A KR20110058841A KR 20110058841 A KR20110058841 A KR 20110058841A KR 1020117006683 A KR1020117006683 A KR 1020117006683A KR 20117006683 A KR20117006683 A KR 20117006683A KR 20110058841 A KR20110058841 A KR 20110058841A
Authority
KR
South Korea
Prior art keywords
data
terminal
transmission
information terminal
moving picture
Prior art date
Application number
KR1020117006683A
Other languages
English (en)
Other versions
KR101539812B1 (ko
Inventor
요시미츠 고토
도시아키 가키이
요이치 하타
야스히토 후지타
Original Assignee
스미토모덴키고교가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 스미토모덴키고교가부시키가이샤 filed Critical 스미토모덴키고교가부시키가이샤
Publication of KR20110058841A publication Critical patent/KR20110058841A/ko
Application granted granted Critical
Publication of KR101539812B1 publication Critical patent/KR101539812B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4424—Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4516—Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6373—Control signals issued by the client directed to the server or network components for rate control, e.g. request to the server to modify its transmission rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 시간 경과와 함께 변화하는 처리 부하의 편재 상황이나 접속되는 네트워크의 대역 상황에 영향받는 일 없이, 각 정보 단말의 처리 부하 증대를 억제하는 동화상 데이터의 배신 방법에 관한 것이다. 송신측 정보 단말(120, 130)로부터 수신측 정보 단말(110)로의 동화상 데이터의 배신 동작에 있어서, 수신측 정보 단말(110)은, 일정 시간 간격으로 동화상 데이터의 송신 요구를 송신측 정보 단말(120, 130)에 대하여 반복할 때, 수신 제한 정보로서, 자기의 화상 프레임 수신 가능량, 및 자기의 부하 허용량 중 적어도 어느 한쪽의 데이터량을 미리 계산한 후, 상기 데이터량, 및, 상기 데이터량의 산출 근거가 되는 데이터 구조 요소 중 적어도 어느 한쪽의 상한값을 송신측 정보 단말(120, 130)에 차례로 통지한다.

Description

동화상 데이터의 배신 방법{MOVING-PICTURE IMAGE DATA-DISTRIBUTION METHOD}
본 발명은 네트워크를 개재시켜 서로 접속된 복수의 정보 단말에 의해 구성되는 텔레비젼 회의 시스템 등의 양방향 데이터 통신 시스템에 적용되며, 각 정보 단말 사이에서 송수신되는 비주얼 정보에 포함되는 동화상 데이터의 배신 방법에 관한 것이다.
데이터 통신 회선에서의 통신 속도는, 최근, 비약적으로 빨라지고 있으며, 개인 소유의 퍼스널 컴퓨터(이하, PC라고 함) 등의 정보 단말 사이에서도, 일상적으로, 동화상 데이터, 음성 데이터 등을 포함하는 대용량의 비주얼 정보의 송수신이 행해지게 되어 왔다. 특히, 이러한 통신 환경에서는, 실시간으로의 양방향 데이터 통신을 실현하는 시스템이 간단하게 구축될 수 있다. 도 1의 (a)는, 텔레비젼 회의 시스템 등, 네트워크 회선 및 PC 등의 정보 단말 등, 기존의 네트워크·리소스를 이용하여 구축될 수 있는 양방향 데이터 통신 시스템의 구성을 나타내는 도면이다. 이 양방향 데이터 통신 시스템은, 네트워크(100)와, 상기 네트워크(100)에 각각에 접속된 복수의 정보 단말[단말 A(110), 단말 B(120), 및 단말 C(130)]에 의해 구성된다. 또한, 시스템의 일부를 구성하는 단말 A(110)와 단말 B(120) 사이에서는, 네트워크(100)를 통해 동화상 데이터 등의 비주얼 정보의 송수신(100a)(송신 요구와 데이터 배신(配信)이 포함됨)이 행해진다. 마찬가지로, 단말 A(110)와 단말 C(130) 사이에서도, 네트워크(100)를 통해 동화상 데이터 등의 비주얼 정보의 송수신(100b)이 행해진다. 단말 B(120)와 단말 C(130) 사이에서는, 네트워크(100)를 통해 동화상 데이터 등의 비주얼 정보의 송수신(100c)(송신 요구와 데이터 배신이 포함됨)이 행해진다. 또한, 단말 A(110)는 제어부(110a)(PC에서의 CPU에 상당)를 구비하고, 단말 B(120)는 제어부(120a)를 구비하며, 단말 C(130)는 제어부(130a)를 구비하고 있고, 실제의 통신 제어, 각종 디지털 처리는, 이들 제어부(110a∼130a)에서 행해진다.
그러나, 현재 상황에서 방대한 동화상 데이터를 한정된 네트워크·리소스를 이용하여 배신하는 경우, 각 정보 단말의 처리 능력, 네트워크의 회선 속도 등의 제한으로부터, 데이터량 자체를 적게 할 필요가 있다. 그 때문에, 배신되는 동화상 데이터나 음성 데이터를 압축하는 기술이 왕성하게 연구되고, 실용화되어 오고 있다. 예컨대, 특허문헌 1에는, 조작자나 각 정보 단말에 다대(多大)한 부담을 가하는 일 없이, 수신측 클라이언트의 단말 종별 등의 통신 환경에 알맞은 화상 데이터 송수신을 가능하게 하기 위한 화상 통신 기술이 개시되어 있다. 한편, 특허문헌 2에는, 해상도 방향에 대한 정보 갱신성을 실현하는 방식으로서, 스케일러빌리티를 이용한 부호화 장치, 그 방법, 프로그램 등이 개시되어 있다.
또한, 특허문헌 3에는, 서버와 수신측 클라이언트 사이의 각각의 통신 환경에 따른 데이터 통신을 가능하게 하는 기술이 개시되어 있다. 즉, 서버로부터 송신되는 화상 데이터의 품질에 대하여 서버와 수신측 클라이언트 사이의 회선 속도가 낮은 경우, 상기 수신측 클라이언트로부터의 요구에 따른 품질의 화상 데이터가, 서버로부터 수신측 클라이언트에 송신된다.
일본 특허 공개 제2006-174045호 공보 일본 특허 공개 제2005-094054호 공보 일본 특허 공개 평성11-161571호 공보
발명자들은 종래의 동화상 데이터의 배신 방법에 대해서 상세하게 검토한 결과, 이하와 같은 과제를 발견하였다.
즉, 복수의 정보 단말 사이에서 비주얼 정보의 송수신을 행하는 종래의 양방향 데이터 통신 시스템은, 브로드밴드를 활용한 PC 시스템으로 교체되고 있다. 단, 동화상 데이터나 음성 데이터의 배신 시에 이용되는 브로드밴드의 사용료가 비교적 저가이기 때문에, 배신되는 데이터량의 제어 등은 고려되고 있지 않은 실태가 있다. 이는, 일견 고속화되는 브로드밴드 환경에서 하등 문제가 없다고 생각된다. 그러나, 각 정보 단말의 데이터 처리 성능이 균일하지 않기 때문에, 다른 성능의 정보 단말 사이에서의 양방향 데이터 통신에 장해가 발생하기 쉬워져 있는 현재 상황은 간과한 수 없다. 예컨대, 처리 속도가 빠른 PC로부터 동화상 데이터가 처리 속도가 느린 PC에 배신된 경우, 그 처리 속도가 느린 PC에서는, 수신 데이터의 처리를 따라잡을 수 없게 되어 버린다.
또한, 최근 실용화되어 온 H.264(MPEG-4 AVC, 이하, 이들 차세대 화상 압축 기술을 포함하여 단순히 MPEG 방식이라고 함) 등의 동화상 배신 기술에서는, 송신측 정보 단말에 있어서 일정 시간에서의 프레임수를 변경하는 것이 가능이지만, 수신측 정보 단말의 요구에 따라 처리 가능 시에 프레임을 송신하면, 프레임수를 변경하여 송신하기까지의 지연이 발생하는 등, 실시간 처리를 할 수 없다.
보다 구체적으로는, 도 1의 (a)에 나타낸 바와 같은 개인 소유의 PC 등의 정보 단말(110∼130)을 기존의 네트워크(100)에 접속함으로써, 용이하게 복수인에 의한 양방향 데이터 통신 시스템을 구축할 수 있는 통신 환경 하에서는, 단순히 네트워크·리소스만의 부하 관리만으로는 스트레스 프리인 네트워크·커뮤니케이션을 할 수 없는 것은 경험적으로도 분명하다.
이것의 큰 원인으로서는, 각 정보 단말에서 백라운드의 처리가 양방향 데이터 통신과는 별도로 행해지고 있는 것에 기인하고 있다. 바꾸어 말하면, 도 1의 (b)에 나타낸 바와 같이, 네트워크(100)를 통해 서로 접속된 단말 A(110)∼단말 C(130) 각각에서의 처리 부하(CPU 가동율)가, 시간 경과와 함께 시시각각으로 변화하기 때문이다. 예컨대, 도 1의 (b)에서, 시각(T1)에서는, 단말 A(110)의 처리 부하는 저하 경향에 있으며, 어느 정도의 데이터 송수신 처리에 대한 부하를 허용할 수 있고, 단말 B(120)에 도달해서는 충분한 처리 부하를 허용할 수 있다. 한편, 시각(T1)에서의 단말 C(130)의 처리 부하는 매우 높고, 새롭게 데이터 송수신 처리의 부하를 허용할 수는 없는 상태가 되어 있다. 또한, 시각(T2)에서는, 단말 A(110)에서의 처리 부하는 높지만, 단말 B(120), 단말 C(130)에서의 처리 부하는 낮으며, 단말 A(110)의 처리 능력 저하가, 단말 A(110), 단말 B(120), 단말 C(130) 사이의 양방향 데이터 통신에서의 병목 현상이 되는 것은 명백하다. 또한, 시각(T3)에서는, 단말 A(110)에서의 처리 부하는 낮지만, 단말 B(120), 단말 C(130)에서의 처리 부하가 높게 되어 있다. 이 경우, 단말 B(120) 및 단말 C(130) 각각의 처리 능력 저하가, 단말 A(110), 단말 B(120), 단말 C(130) 사이의 양방향 데이터 통신에서의 병목 현상이 된다.
전술한 바와 같이, 네트워크를 통해 서로 접속된 단말 A(110), 단말 B(120), 단말 C(130) 각각에서의 부하 상태를 무시하고 일정량의 비주얼 정보의 양방향 데이터 통신이 행해지면, 병목 현상이 되는 정보 단말에서는 PC의 처리 능력을 오버하여 버려, 모니터에 표시되는 영상이나 스피커로부터 출력되는 음성의 흐트러짐 등이 발생하여 버린다. 즉, 수신측 단말에서의 화상 데이터나 음성 데이터의 처리 상황을 무시하고 송신측 단말이 데이터 송신을 계속하기 때문에, 수신측 정보 단말의 영상 재생 처리가 지연되어 버린다. 반대로, 송신측 정보 단말의 처리 부하가 커지는 경우도 수신측 정보 단말의 영상 재생 처리가 지연되어 버린다. 예컨대, 상기 특허문헌 3에서의 서버의 배신 대상이 되는 정보 단말의 수는 시간 경과와 함께 시시각각으로 변화한다. 따라서, 처리 피크(복수의 정보 단말로부터의 송신 요구가 있었던 경우)에서는, 서버의 처리 능력의 한계를 넘어 버려, 그 서버로부터의 화상 데이터의 송신 지연에 따라 수신측 정보 단말의 영상 재생 처리가 지연되어 버린다.
또한, 각 정보 단말에서의 처리 부하에는, 전술한 바와 같이 화상 프레임의 부호화, 복합화, 표시 처리 외에, 네트워크를 통해 수신한 데이터(일단, 통신용 버퍼에 저장됨)를 버퍼로부터 추출하는 처리 부하도 포함된다. 통상, PC 등의 정보 단말에서는, 네트워크를 통해 수신한 데이터가 소프트웨어에 의해 통신용 버퍼에 일단 저장되고, 그 저장된 데이터를 애플리케이션 소프트웨어가 추출하여 미리 결정된 처리를 행한다. 이때, 전기적으로 PC의 네트워크 카드 등, 통신용 I/O부에 도달한 패킷도, 그 정보 단말의 처리 부하가 증대하면 애플리케이션 소프트웨어가 추출할 때까지 시간이 걸린다. 이 경우, 실질적으로 버퍼 오버 플로우와 같은 상태가 되기 때문에, 수신 데이터의 미완료의 원인이 되어 버린다.
본 발명은 전술한 바와 같이 과제를 해결하기 위해 이루어진 것으로, 네트워크를 통해 서로 접속된 복수의 정보 단말 사이에서의 처리 부하의 편재(偏在)나 접속되는 네트워크의 대역 상황에 영향받는 일 없이, 실시간으로의 동화상 배신을 가능하게 하기 위한 구조를 구비한 동화상 데이터의 배신 방법을 제공하는 것을 목적으로 하고 있다.
본 발명에 따른 동화상 데이터의 배신 방법은, 네트워크를 통해 서로 접속된 복수의 정보 단말에 의해 구성된, 텔레비젼 회의 시스템 등의 양방향 데이터 통신 시스템에 적용된다. 따라서, 네트워크를 통해 서로 접속된 정보 단말의 각각은, 네트워크 상에 배신되는 동화상 데이터에 대하여 수신처로도 송신원으로도 될 수 있다.
여기서, 상기 양방향 데이터 통신 시스템에서 송수신되는 비주얼 정보는, 동화상 데이터나 각 정보 단말의 조작자 등의 음성 외에, 정지 화상 데이터, 텍스트 데이터도 포함하는 양방향 대화에 기여할 수 있는 정보를 포함한다. 특히, 비주얼 정보에 포함되는 동화상 데이터는, 각 정보 단말에서의 송수신 동작에서 부호화(데이터 압축) 및 복호화(데이터 신장)가 행해지기 때문에, 그 배신 동작의 효율화는 각 정보 단말의 데이터 처리 능력에 크게 의존하게 된다. 본 발명에 따른 동화상 데이터의 배신 방법에서는, 수신측 정보 단말에 의해 데이터 배신 동작을 제어하는 것을 특징으로 한다. 그 때문에, 상기 동화상 데이터의 배신 방법에서 적용되는 동화상 데이터는, 시간축 방향으로 압축되는 일 없이 각 화상 프레임이 인접하는 화상 프레임과는 독립적으로 압축/신장될 수 있는 프레임 구조를 갖거나, 또는 특정 화상 프레임군이 앞뒤의 화상 프레임군과는 독립적으로 재생 가능한 프레임 구조(하나의 프레임군을 구성하는 복수의 화상 프레임 사이에서는 프레임 간 예측에 따른 시간축 방향의 압축이 행해지고 있어도 문제 없음)를 갖는 동화상 데이터인 것이 바람직하다.
본 발명의 배신 대상이 될 수 있는 동화상 데이터로서는, 전술한 바와 같이 프레임 구조의 특징을 적극적으로 이용하기 때문에, 주로, 정지 화상의 압축 방식으로서 알려져 있는 JPEG(또는 JPEG2000) 규격에 따라 각 화상 프레임이 압축되는 Motion-JPEG(또는 Motion-JPEG2000) 방식의 동화상 데이터가 적합하다. 즉, 송수신되는 동화상 데이터의 전체 데이터량은, 데이터 구조 요소로서 단순히 송수신되는 화상 프레임의 수만으로 결정되는 것은 아니고, 「화상 프레임수」×「화상 해상도(사이즈)」×「1 화소를 표현하는 비트수」에 따라 결정된다. 그러나, 전체 데이터량의 증감에는, 화상 프레임수, 화상 해상도, 및 1 화소를 표현하는 비트수 중 적어도 어느 하나를 제어하면 되고, 특히, 화상 프레임수의 제어가 효과적이다. 그래서, 시간축 방향을 따라 압축되는 일 없이 각각의 화상 프레임에 대해서 압축/신장이 가능한 JPEG 방식의 동화상 데이터는, 임의로 화상 프레임을 누락시킨 경우라도, 남은 화상 프레임의 부호화에는 영향을 끼치는 일이 없기 때문에, 특히 유효하다.
단, 앞뒤에 인접하는 화상 프레임 사이의 차분 정보를 이용하는 등, 시간축 방향으로도 압축이 가능한 MPEG 방식도, 본 발명의 배신 대상이 될 수 있는 동화상 데이터에 포함된다. 예컨대, 프레임 간 예측에서의 참조 프레임으로서, 화상 프레임 각각이 개별로 부호화되는 I 프레임이 지정된 MPEG 방식의 동화상 데이터도 본 발명의 배신 대상이 될 수 있는 동화상 데이터에 포함된다. 또한, 프레임 간 예측에서의 참조 프레임으로서, I 프레임과 P 프레임의 조합이 지정된 것과 같은 경우에는, I 프레임 지정된 1장의 화상 프레임과, P 프레임 지정된 2장의 화상 프레임의 합계 3장의 화상 프레임에 의해, 하나의 취급 단위(송수신 단위)가 되는 프레임군으로 취급하는 것이 가능하고, 이러한 프레임군으로 이루어지는 프레임 구조의 동화상 데이터도, 본 발명의 배신 대상이 될 수 있다. 또한, MPEG 방식의 프레임 간 예측에서의 참조 프레임으로서는, 예컨대, 화상 프레임 각각이 개별로 부호화되는 I 프레임, 앞뒤 2장의 화상 프레임을 이용하여 부호화가 행해지는 B 프레임, 이전 화상 프레임을 이용하여 부호화가 행해지는 P 프레임을 지정할 수 있다.
또한, 전술한 바와 같이 Motion-JPEG(또는 Motion-JPEG2000) 방식의 동화상 데이터는, 시간축 방향으로는 압축되지 않기 때문에 MPEG 방식의 동화상 데이터와 비교하여 동일 비트 레이트로의 압축 효율은 나쁘지만, 임의의 화상 프레임을 다른 화상 프레임과 분리하여 개별로 편집하는 것을 가능하게 하는 등의 특징을 가지며, 개인용의 비디오 캡쳐 카드 등이 출력 형식으로서 채용되고 있다.
구체적으로, 본 발명에 따른 동화상 데이터의 배신 방법은, 네트워크를 통해 서로 접속된 복수의 정보 단말 사이에서, 전술한 바와 같이 동화상 데이터(시간축 방향을 따라 각각 독립적으로 재생 가능한 화상 프레임 또는 프레임군으로 이루어지는 프레임 구조를 갖는 동화상 데이터)의 송수신을 행한다. 예컨대, 본 발명에 따른 동화상 데이터의 배신 방법에서는, 복수의 정보 단말 사이에서의 양방향 데이터 통신의 일양태로서, 송신측 정보 단말로부터 수신측 정보 단말에의 동화상 데이터의 배신 동작에서, 수신측 정보 단말 및 송신측 정보 단말은, 서로의 처리 가능한 데이터량에 따라, 송신 요구 및 화상 프레임의 배신을 행한다.
즉, 수신측 정보 단말은, 미리 결정된 시간 간격, 예컨대 일정 시간 간격으로 동화상 데이터의 송신 요구를 송신원이 되는 송신측 정보 단말에 대하여 반복할 때, 송신 요구를 행하는 시점에서의 수신 가능 데이터량을 계산한다. 그 후, 수신측 정보 단말은, 수신 제한 정보로서, 계산된 데이터량, 및 상기 데이터량의 산출 근거가 되는 데이터 구조 요소 중 적어도 어느 한쪽의 상한값을, 송신측 정보 단말에 차례로 통지한다. 한편, 송신 요구를 받은 송신측 정보 단말은, 수신한 수신 제한 정보의 지시에 따라, 송신 요구를 받은 시점에서의 자기의 부하 허용 범위 내에 수습되는 데이터량, 및 수신측 정보 단말로부터 요구된 데이터량 중 적어도 한쪽, 바람직하게는 적은 쪽에 맞추어 그 데이터량이 제한된 동화상 데이터를, 송신 요구를 통지하여 온 수신측 정보 단말에 송신한다.
특히, 수신측 정보 단말에서 산출되는 수신 가능 데이터량은, 네트워크의 대역 제한에 기인하는 화상 프레임 수신 가능량, 및 자기의 화상 프레임 표시 처리의 부하 허용량 중 적어도 어느 한쪽의 데이터량인 것이 바람직하다. 보다 바람직하게는, 수신 가능 데이터량은, 상기 화상 프레임 수신 가능량, 및 상기 부하 허용량 중 적은 쪽의 데이터량이다. 이와 같이, 네트워크의 대역 제한과 정보 단말의 처리 능력 중 어느 쪽인가 적은 쪽을 선택 가능하게 함으로써, 상기 수신측 정보 단말의 부하 대책뿐만 아니라, 네트워크 부하의 상태에 대해서도 해당 발명이 유효하게 기능할 수 있기 때문이다.
또한, 동화상 데이터의 배신에 앞서, 수신측 정보 단말로부터 송신측 정보 단말에 송신되는 수신 제한 정보에는, 전술한 바와 같이, 네트워크의 대역 제한, 및 자기의 화상 프레임 표시 처리의 부하 허용 중 적어도 어느 한쪽을 고려하여 계산된 데이터량의 상한값, 및 상기 데이터량의 산출 근거가 된 프레임 구성 요소의 상한값 중 적어도 어느 한쪽이 포함된다. 또한, 프레임 구조 요소에는, 화상 프레임에 관한 송수신 단위의 단위 시간당의 수, 화상 해상도, 및 1 화소당의 비트수 중 적어도 어느 하나가 포함된다.
이와 같이 동화상 데이터의 배신 동작에서 수신측 정보 단말 및 송신측 정보 단말 양방의 처리 부하가 고려된 배신 대상인 동화상 데이터의 송수신 데이터량(화상 프레임수 등의 증감에 따라 제어됨)이 동적으로 결정되기 때문에, 네트워크를 통해 서로 접속된 복수의 정보 단말(각 정보 단말은, 수신측 및 송신측 정보 단말 중 어느 것으로도 될 수 있음)의 각각에서의 처리 부하의 저감으로 이어진다. 그러나, 송수신 데이터량을 화상 프레임수의 증감으로 제어하는 경우, 수신측 및 송신측 양방의 정보 단말에서의 처리 부하의 허용 한도 내에서 동화상 데이터가 배신되기 때문에, 수신측 정보 단말에서 동화상 표시될 때에는 도중의 화상 프레임이 수신되지 않는 경우가 있다. 또한, 송신측 정보 단말이 임의의 타이밍에 화상을 배신함으로써 도중의 화상 프레임이 송신되지 않는 경우(송신 동작을 스킵)도 있다. 본 발명에 따른 동화상 데이터의 배신 방법은, 이와 같이 수신측 및 송신측 양방의 정보 단말에서의 처리 상황에 기인하여 발생하는 화상 프레임의 누락을 미리 고려하여, 수신측 정보 단말에서의 영상 표시가 가능해지도록, H.264 등의 동화상 포맷이 아니라, 정지 화상 포맷(예컨대 JPEG2000 규격 등)의 프레임 구조를 갖는 동화상 데이터가 바람직하다.
그런데, 송신측 정보 단말로부터 수신측 정보 단말에 임의의 타이밍에 화상 프레임이 송신되는 경우, 단순히, 수신측 및 송신측 양방의 정보 단말에서의 처리 부하의 허용 한도 내의 화상 프레임수를 통지하는 것만으로는, 이들 복수의 정보 단말 사이에서의 동기는 취해지지 않고, 비동기의 상태로 각각의 정보 단말로부터 동화상 데이터가 송신될 가능성은 부정할 수 없다. 이러한 상황을 구체적으로 설명하기 위해, 예컨대, 도 2의 (a)에 나타낸 바와 같이, 단말 A(110)가, 단말 B(120), 단말 C(130) 각각에 대하여 동화상 데이터의 송신 요구를 행한 경우를 생각한다. 이때, 단말 A(110)로부터의 송신 요구를 수신한 단말 B(120), 단말 C(130) 각각이, 자기의 타이밍에 요구된 화상 프레임을 단말 A(110)에 송신해 가면, 수신측의 단말 A(110)에서는 수신 타이밍을 제어할 수 없다. 그 때문에, 도 2의 (b)에 나타낸 바와 같이, 타이밍(T5, T6)에서, 단말 A(110)의 처리 부하가 현저하게 증가하거나, 네트워크에서의 전송 충돌 상태가 될 가능성이 있다. 이 경우, 데이터 손실에 의해 표시 처리를 완료할 수 없는 상태가 되어 버린다. 그래서, 본 발명에 따른 동화상 데이터의 배신 방법에서는, 도 2의 (c)에 나타낸 바와 같이, 수신측 정보 단말에 동화상 데이터의 배신 타이밍의 제어권을 부여함으로써, 1대 다수의 데이터 송수신 양태에서의 동기를 확보한다.
구체적으로는, 복수의 정보 단말 사이에서의 양방향 데이터 통신의 일 양태(樣態)로서 2 이상의 송신측 정보 단말로부터 수신측 정보 단말에의 동화상 데이터의 배신 동작에서, 수신측 정보 단말은, 화상 프레임 표시 처리가 가능한 자기의 타이밍에, 2 이상의 송신측 정보 단말 중 적어도 어느 하나에 송신 요구 신호를 송신한다. 한편, 상기 2 이상의 송신측 정보 단말에서는, 수신측 정보 단말 자신의 타이밍에 발생된 송신 요구 신호를 수신한 송신측 정보 단말만이 상기 수신측 정보 단말로부터 요구된 데이터량의 동화상 데이터를 수신측 정보 단말에 송신한다. 이때, 자기에게의 송신 요구를 수신하지 않은 송신측 정보 단말은, 자기에게의 송신 요구를 수신할 때까지 동화상 데이터의 송신 대기 상태가 된다.
또한, 본 발명에 따른 동화상 데이터의 배신 방법에 있어서, 동화상 데이터가 시간축 방향으로 압축되는 일 없이 각각이 이전 화상 프레임과는 독립적으로 재생 가능한 화상 프레임으로 구성되어 있는 경우, 즉 동화상 데이터가 JPEG 방식, 또는 MPEG 방식이어도 프레임 간 예측에서 I 프레임 지정된 경우에는, 화상 프레임에 관한 송수신 단위는, 상기 동화상 데이터를 구성하는 각 화상 프레임에 상당한다. 여기서, 동화상 데이터란, 복수의 화상 프레임을 포함하며, 이들이 어떤 타이밍에서 순차 전환하여 가는 데이터군을 가리킨다. 따라서, 배신 대상이 될 수 있는 동화상 데이터에는, 파워포인트 등의 슬라이드쇼에서 슬라이드 전환용으로 준비되는 화상 데이터군도 포함된다.
또한, 동화상 데이터가, 각각이 복수의 화상 프레임을 포함하며 시간축 방향에서 보아 앞에 위치하는 화상 프레임과는 독립적으로 재생 가능한 복수의 프레임군으로 구성되어 있는 경우, 즉 I 프레임과 P 프레임의 조합, 또는 I 프레임, P 프레임 및 B 프레임의 조합에 의해 구성된 프레임군(인접하는 화상 프레임이란 독립적으로 재생 가능한 프레임군)의 경우에는, 화상 프레임에 관한 송수신 단위는, 상기 동화상 데이터를 구성하는 각 프레임군에 상당한다.
또한, 본 발명에 따른 동화상 데이터의 배신 방법에 있어서, 복수의 정보 단말 각각은, 화상 프레임에 관한 송수신 단위의 수에 대해서, 자기의 정보 단말이 상기 동화상 데이터의 송신원이 되었을 때의, 단위 시간당에 송신 가능한 상한값을 지시하는 송신 제한 정보를, 상기 동화상 데이터의 송신에 앞서, 미리 다른 정보 단말에 통지해 두는 것이 바람직하다. 이와 같이, 송신측 정보 단말이 될 수 있는 각 정보 단말에서 미리 송신 가능한 화상 프레임수 등의 상한을 설정 가능하게 해 둠으로써, 수신측 정보 단말은, 이 상한 이내에서 프레임수를 설정하게 된다. 그 때문에, 부하 상황을 무시하고 수신측 정보 단말에 동화상 데이터를 보내는 것에 따른 상기 수신측 정보 단말의 처리 부하 증가의 회피와 함께, 송신측 정보 단말에서의 처리 부하의 저감도 가능하게 된다. 또한, 수신측 정보 단말은 영상 표시하여야 할 화상 프레임수 이외에 자기의 데이터 처리(백그라운드에서의 데이터 처리)를 관리하면서, 송신측 정보 단말로부터 송신되는 동화상 데이터의 처리가 가능하다고 판단하였을 때에만 상기 송신측 정보 단말에 송신 요구를 행하는 등, 수신측 및 송신측 양방의 정보 단말이 능동적으로 동화상 데이터의 배신 동작을 관리할 수 있다.
또한, 본 발명에 따른 각 실시예는, 이하의 상세한 설명 및 첨부 도면에 의해 더욱 충분하게 이해될 수 있다. 이들 실시예는 단순히 예시를 위해 나타내는 것이며, 본 발명을 한정하는 것으로 생각해서는 안 된다.
또한, 본 발명의 추가적인 응용 범위는, 이하의 상세한 설명으로부터 분명해진다. 그러나, 상세한 설명 및 특정한 사례는 본 발명의 적합한 실시예를 나타내는 것이기는 하지만, 예시를 위해서만 나타내고 있는 것으로서, 본 발명의 범위에서의 여러가지 변형 및 개량은 이 상세한 설명으로부터 당업자에게는 자명한 것은 분명하다.
본 발명에 따른 동화상 데이터의 배신 방법에 따르면, 네트워크를 통해 서로 접속된 복수의 정보 단말 사이에서의 처리 부하의 편재 상황에 따라 배신되어야 하는 동화상 데이터의 화상 프레임수 등의 상한값을 동적으로 조정할 수 있다. 그 때문에, 이들 복수의 정보 단말 사이에서의 처리 부하의 편재에 영향받는 일 없이, 실시간으로의 동화상 데이터 배신이 가능해진다.
또한, 본 발명에 따른 동화상 데이터의 배신 방법에 있어서, 송수신되는 동화상 데이터로서는, JPEG 규격에 따라 화상 프레임이 압축/신장되는 Motion-JPEG 방식의 동화상 데이터로 대표되는 바와 같이, 시간축 방향으로 압축되는 일 없이 인접하는 화상 프레임과는 독립적으로 재생 가능한 화상 프레임, 또는 프레임군으로 구성된 동화상 데이터가 채용된다. 이러한 구성의 동화상 데이터가 송수신 대상으로서 채용됨으로써, 동화상 데이터를 구성하는 화상 프레임수 등의 증감이 빈번하게 발생한 경우라도, 각 정보 단말 사이에서의 실시간으로의 동화상 데이터 배신에의 영향은 적다. 따라서, 송수신되는 동화상 데이터의 단위 시간당의 화상 프레임수 등을 각 정보 단말에서의 처리 부하의 증감에 따라 동적으로 조절함으로써, 각 정보 단말 사이에서 스트레스 프리의 동화상 데이터 배신이 가능해진다.
도 1은 일반적인 복수 정보 단말 사이의 양방향 데이터 통신 시스템의 구성 및 각 정보 단말에서의 처리 부하의 시간 변화를 설명하기 위한 도면이다.
도 2는 본 발명에 따른 동화상 데이터의 배신 방법의 대표적인 효과의 하나를 개략적으로 설명하기 위한 도면이다.
도 3은 도 1에 나타낸 양방향 데이터 통신 시스템에 있어서 배신되는 비주얼 정보에 포함되는 동화상 데이터의 일례(예컨대, JPEG2000 규격의 화상 프레임으로 구성된 Motion-JPEG2000의 데이터 구조)를 설명하기 위한 도면이다.
도 4는 도 1에 나타낸 양방향 데이터 통신 시스템에서의 각 정보 단말 사이의 동화상 데이터 배신 순서를 설명하기 위한 블록도이다.
도 5는 도 1에 나타낸 양방향 데이터 통신 시스템에서의 각 정보 단말 사이의 통신 제어 시퀀스이다.
도 6은 본 발명에 따른 동화상 데이터의 배신 방법을, 각 정보 단말에 있어서의 처리 부하의 관점에서 설명하기 위한 도면이다.
도 7은 본 발명에 따른 동화상 데이터의 배신 방법에 있어서의 수신측 시퀀스를 설명하기 위한 흐름도이다.
도 8은 본 발명에 따른 동화상 데이터의 배신 방법에서의 송신측 시퀀스를 설명하기 위한 흐름도이다.
도 9는 본 발명에 따른 동화상 데이터의 배신 방법에서의 송신측 시퀀스를, 비주얼 정보, 특히 화상 프레임의 송신 매수 제어(부하 제어)의 관점에서 설명하기 위한 도면이다.
이하, 본 발명에 따른 비주얼 정보의 배신 방법의 각 실시형태를, 도 3∼도 9를 이용하여 상세하게 설명한다. 또한, 필요에 따라, 각 실시형태의 설명에 있어서 도 1 및 도 2도 참조한다. 또한, 도면의 설명에서 동일한 요소에는 동일 부호를 붙여 중복하는 설명을 생략한다.
본 발명에 따른 동화상 데이터의 배신 방법은, 도 1의 (a)에 나타낸 바와 같이, 네트워크에 접속된 복수의 정보 단말에 의해 구성된, 텔레비젼 회의 시스템 등의 양방향 데이터 통신 시스템에 적용된다. 이 양방향 데이터 통신 시스템은, 네트워크(100)와, 상기 네트워크(100)에 각각에 접속된 복수의 정보 단말을 구비한다. 또한, 이하의 설명에서는, 네트워크(100)에 접속된 정보 단말을, 각각 단말 A(110), 단말 B(120), 및 단말 C(130)로 나타낸다. 또한, 이와 같이 네트워크(100)를 통해 서로 접속된 단말 A(110), 단말 B(120), 단말 C(130)의 각각은, 상기 네트워크(100) 상에 배신되는 동화상 데이터에 대하여 수신처로도 송신원으로도 될 수 있다.
양방향 데이터 통신 시스템의 일부를 구성하는 단말 A(110)와 단말 B(120) 사이에서는, 네트워크(100)를 통해 동화상 데이터 등의 비주얼 정보의 송수신(100a)(송신 요구와 데이터 배신이 포함됨)이 행해진다. 마찬가지로, 단말 A(110)와 단말 C(130) 사이에서도, 네트워크(100)를 통해 동화상 데이터 등의 비주얼 정보의 송수신(100b)이 행해진다. 단말 B(120)와 단말 C(130) 사이에서는, 네트워크(100)를 통해 동화상 데이터 등의 비주얼 정보의 송수신(100c)(송신 요구와 데이터 배신이 포함됨)이 행해진다.
또한, 상기 동화상 데이터의 배신 방법에서 적용되는 동화상 데이터는, 시간축 방향으로 압축되는 일 없이 각 화상 프레임 또는 프레임군이, 인접하는 화상 프레임 또는 프레임군과는 독립적으로 압축/신장될 수 있는 프레임 구조를 갖지만, 이하, 간단하게 하기 위해, 이 동화상 데이터를 JPEG 방식의 동화상 데이터에 한정하여 각 실시형태를 설명하기로 한다.
도 1의 (a)에 나타낸 양방향 데이터 통신 시스템에서는, 각 단말 사이에서 비주얼 정보의 송수신이 행해진다. 여기서, 송수신되는 비주얼 정보는, 동화상 데이터나 각 정보 단말의 조작자 등의 음성 외에, 정지 화상 데이터, 텍스트 데이터도 포함하는 양방향 대화에 기여할 수 있는 정보를 포함한다. 특히, 비주얼 정보에 포함되는 동화상 데이터는, 도 3에 나타낸 바와 같이, 시간축(t)을 따른 방향으로 압축되는 일 없이 상기 시간축(t)을 따라 배치되며 각각이 개별로 압축/신장되는 화상 프레임으로서, 단위 시간(s)당 12장의 화상 프레임(f1∼f12)으로 구성된 동화상 데이터(D1)이다. 또한, 도 3은 도 1에 나타낸 양방향 데이터 통신 시스템에서 배신되는 비주얼 정보에 포함되는 동화상 데이터의 일례(예컨대, JPEG2000 규격의 화상 프레임으로 구성된 Motion-JPEG2000 의 데이터 구조)를 설명하기 위한 도면이다.
이러한 동화상 데이터(D1)는, 인접하는 화상 프레임 사이의 차분 정보를 이용하는 등, 시간축(t)의 방향으로도 압축이 가능하고, 배신 대상인 동화상 데이터(D1)로서는, 예컨대, Motion-JPEG(또는 Motion-JPEG2000) 방식의 동화상 데이터가 포함된다.
Motion-JPEG(또는 Motion-JPEG2000) 방식의 동화상 데이터는, MPEG 방식의 동화상 데이터와 비교하여 동일한 비트 레이트에서의 압축 효율은 나쁘지만, 임의의 화상 프레임을 다른 화상 프레임과 분리하여 개별적으로 편집하는 것을 가능하게 한다. 또한, 이러한 동화상 데이터는, 각 단말에서의 인코드·디코드 시의 부하가 가볍고, 비교적 간단한 설비로 실시간 인코딩을 가능하게 한다.
다음에, 본 발명에 따른 동화상 데이터의 배신 방법을, 도 4 및 도 5를 참조하면서 상세하게 설명한다. 또한, 도 4는 각 단말 사이에서의 동화상 데이터(D1)의 배신 순서를 설명하기 위한 블록도이다. 도 5는 각 단말 사이에서의 통신 시퀀스이다.
이하의 설명에서는, 단말 A(110)를 수신측 정보 단말(이하, 단순히 수신측 단말 A(110)로 나타냄)로 하는 한편, 단말 B(120) 및 단말 C(130)를 송신측 정보 단말(이하, 단순히 송신측 단말 B(120), 송신측 단말 C(130)로 나타냄)로 하고, 수신측 단말 A(110)가 수신 타이밍을 제어한다. 또한, 수신측 단말 A(110)는, 일정 시간 간격(T)으로 동화상 데이터의 송신 요구를 송신원이 되는 송신측 단말 B(120) 또는 송신측 단말 C(130)에 대하여 반복할 때, 수신 제한 정보로서, 송신 요구를 행하는 시점에서의 수신 가능 데이터량을 계산한다. 이러한 수신측 단말 A(110)에서의 수신 가능 데이터량은, 네트워크의 대역 제한에 기인하는 화상 프레임 수신 가능량, 및, 자기의 화상 프레임 표시 처리의 부하 허용량 중, 어느 쪽인가 적은 쪽의 데이터량으로 한다. 또한, 수신측 단말 A(110)로부터 송신측 단말[B(120), C(130)]에 송신되는 수신 제한 정보에는, 상기 데이터량의 산출 근거가 되는 데이터 구조 요소로서, 화상 프레임에 관한 송수신 단위의 단위 시간당의 수, 화상 해상도, 및 1 화소당의 비트수 중 적어도 어느 하나가 포함된다. 단, 이하의 설명에서는 간단하게 하기 위해, 단위 시간당에 송신하여야 할 화상 프레임수만을 수신 제한 정보로 한다.
본 발명에 따른 동화상 데이터의 배신 방법에서는, 송신측 단말 B(120)로부터 수신측 단말 A(110)로의 동화상 데이터의 배신 동작, 및 송신측 단말 C(130)로부터 수신측 단말 A(110)로의 동화상 데이터의 배신 동작에서, 서로 처리 가능한 프레임수에 따른 송신 요구 및 화상 프레임 배신이 행해진다.
구체적으로, 수신측 단말 A(110)는, 도 5에 나타낸 바와 같이, 일정 시간 간격(T)으로 동화상 데이터의 송신 요구를 송신원이 되는 송신측 단말 B(120) 또는 송신측 단말 C(130)에 대하여 반복한다. 그때, 수신 제한 정보로서, 현시점에서의 자기의 화상 프레임 표시 처리의 부하 허용 범위 내에서 처리 가능한 단위 시간(s)당의 프레임수(네트워크(100)의 대역 제한에 기초하여 산출하여도 좋음)를, 송신측 단말 B(120) 또는 송신측 단말 C(130)에 차례로 통지한다. 한편, 송신 요구를 받은 송신측 단말 B(120) 및 송신측 단말 C(130)는, 송신 요구를 받은 시점에서의 자기의 화상 프레임 송신 처리의 부하 허용 범위 내에 수습되는 단위 시간(s)당의 프레임수, 및 수신측 정보 단말로부터 요구된 단위 시간(s)당의 프레임수 중 적은 쪽의 프레임수의 동화상 데이터를, 송신 요구를 통지하여 온 수신측 단말 A(110)에 송신한다.
즉, 도 4에 나타낸 바와 같이, 수신측 단말 A(110)는, 우선, 현시점에서의 자기의 화상 프레임 표시 처리의 부하 허용 범위가 10 프레임/s인 것을 확인하고, 송신측 단말 B(120)에 대하여 송신 요구(송신 프레임수의 제한 통지를 포함함)를 차례로 통지한다. 수신측 단말 A(110)로부터 송신 요구가 통지된 송신측 단말 B(120)에서는, 송신 요구를 수신한 시점에서의 자기의 백그라운드 처리를 포함하는 부하 상태를 확인하고, 자기의 프레임 송신 능력을 설정한다. 예컨대, 도 4에 나타낸 케이스에 있어서, 송신측 단말 B(120)는, 수신측 단말 A(110)로부터 송신 요구를 받은 시점에서의 처리 능력으로서 송신 제한이 설정되어 있지 않기 때문에, 송신 요구가 있었던 10 프레임/s의 동화상 데이터를 수신측 단말 A(110)에 송신하게 된다.
한편, 수신측 단말 A(110)로부터 송신측 단말 C(130)에 대하여, 송신측 단말 B(120)와 마찬가지로, 10 프레임/s의 송신 요구(수신 가능한 프레임수의 제한)가 통지된 케이스에서, 송신측 단말 C(130)는, 송신 요구를 수신한 시점에서의 자기의 백그라운드 처리를 포함하는 부하 상태를 확인하고, 자기의 프레임 송신 능력을 설정한다. 예컨대, 도 4에 나타낸 케이스에 있어서, 송신측 단말 C(130)는, 수신측 단말 A(110)로부터 송신 요구를 받은 시점에서의 처리 능력으로서 5 프레임/s가 설정되어 있기 때문에, 송신 요구가 있었던 10 프레임/s에 대하여 5 프레임/s의 동화상 데이터를 수신측 단말 A(110)에 송신하게 된다.
이와 같이 동화상 데이터의 배신 동작에서, 수신측 단말 A(110), 송신측 단말 B(120), 및 송신측 단말 C(130) 각각의 처리 부하가 고려된 상태로 배신 대상인 동화상 데이터의 프레임수가 동적으로 결정된다. 그 때문에, 네트워크(100)를 통해 서로 접속된 수신측 단말 A(110), 송신측 단말 B(120), 및 송신측 단말 C(130)의 각각에서의 처리 부하의 저감으로 이어진다.
단, 수신측 단말 A(110), 송신측 단말 B(120), 및 송신측 단말 C(130)의 각각에서의 처리 부하의 허용 한도 내에서 동화상 데이터가 배신되기 때문에, 수신측 단말 A(110)에서 동화상 표시될 때에는 도중의 화상 프레임이 수신되지 않는 경우가 있다. 또한, 송신측 단말 B(120) 및 송신측 단말 C(130)가 임의의 타이밍에 화상을 배신함으로써 도중의 화상 프레임이 송신되지 않는 경우도 있다. 이러한 통신 환경하에서도, 송수신 대상인 동화상 데이터(D1)는, 수신측 단말 A(110)에서의 영상 표시가 가능해지도록, 예컨대 JPEG2000 규격 등, 동화상 포맷의 프레임 구조를 갖는 동화상 데이터(D1)가 채용되어 있다.
도 6은 도 4 및 도 5를 참조하면서 설명한 각 단말의 통신 제어 순서를 처리 부하의 관점에서 설명하기 위한 도면이다. 특히, 도 6의 (a)에는, 수신측 단말 A(110), 송신측 단말 B(120), 및 송신측 단말 C(130)의 각각에서의 정해진 시간(T)마다의 처리 능력의 변화를, 단위 시간당에 처리 가능한 화상 프레임의 프레임수로 나타내고 있다.
도 6의 (a)에 나타낸 바와 같이, 수신측 단말 A(110)의 처리 능력(프레임/s)은, 시간(t)의 경과와 함께 시시각각으로 변화한다. 마찬가지로, 송신측 단말 B(120) 및 송신측 단말 C(130)의 각각에서도, 처리 능력(프레임/s)은, 시간(t)의 경과와 함께 시시각각으로 변화한다. 또한, 이 도 6의 (a) 및 (b)에서, 수신측 단말 A(110)에서의 부하 산출의 타이밍은, 수신측 단말 A(110)로부터 송신측 단말 B(120) 또는 송신측 단말 C(130)로의 송신 요구의 타이밍과 대략 일치하고 있다. 또한, 송신측 단말 B(120) 및 송신측 단말 C(130)의 각각에서의 부하 산출의 타이밍은, 수신측 단말 A(110)로부터의 송신 요구의 수신 타이밍과 일치하고 있다.
도 6의 (b)는, 도 5에 나타낸 통신 제어 순서에 따라, 수신측 단말 A(110)가 송신측 단말 B(120) 및 송신측 단말 C(130)의 각각에 대하여 행하는 동화상 데이터의 배신 동작을 각 단말에서의 처리 부하의 관점에서 설명하기 위한 도면이다. 이 도 6의 (b)에 나타낸 바와 같이, 수신측 단말 A(110)은, 정해진 시간마다, 예컨대 일정 시간 간격(T)마다의 송신 요구를, 송신측 단말 B(120) 및 송신측 단말 C(130)의 쌍방에 교대로 송신하고 있다. 단, 영역(A1)은, 수신측 단말 A(110)로부터의 송신 요구가 있었던 프레임수와, 실제로 송신 요구에 응답하여 송신측 단말 B(120) 및 송신측 단말 C(130)의 양방으로부터 송신된 프레임수의 차(수신측 단말 A(110)에서는 영상 표시되지 않았던 처리 프레임수로서, 수신측 단말 A(110)에서의 화상 프레임 표시의 여력)를 나타내고 있다.
한편, 송신측 단말 B(120)에서는, 수신측 단말 A(110)로부터의 송신 요구를 받은 경우에, 그 동안만 자기의 처리 능력의 허용 범위 내에서 수신측 단말 A(110)로의 프레임 송신이 행해지고, 다른 시간대는 별도의 처리가 행해지고 있다. 프레임 송신 처리에 충분한 처리 능력을 확보할 수 있는 시간대이면, 송신측 단말 B(120)는, 수신측 단말 A(110)의 송신 요구에 따른 프레임수의 동화상 데이터를 배신한다. 그런데, 수신측 단말 A(110)로부터 자기의 처리 능력을 넘은 프레임수가 요구된 경우, 송신측 단말 B(120)은, 요구된 프레임수 이하여도 자기의 처리 능력의 범위 내에서 송신 가능한 프레임수의 동화상 데이터를 수신측 단말 A(110)에 송신한다. 영역(B1)은, 송신측 단말 B(120)로부터 수신측 단말 A(110)로의 프레임 송신에 있어서, 에러 송신(송신 동작을 스킵)의 처리 프레임수이다.
마찬가지로, 송신측 단말 C(130)에서도, 수신측 단말 A(110)로부터의 송신 요구를 받은 경우, 그 동안만 자기의 처리 능력의 허용 범위 내에서 수신측 단말 A(110)로의 프레임 송신이 행해지고, 다른 시간대는 별도의 처리가 행해지고 있다. 프레임 송신 처리에 충분한 처리 능력을 확보할 수 있는 시간대이면, 송신측 단말 C(130)는, 수신측 단말 A(110)의 송신 요구에 따른 프레임수의 동화상 데이터를 배신한다. 그런데, 수신측 단말 A(110)로부터 자기의 처리 능력을 넘은 프레임수가 요구된 경우, 송신측 단말 C(130)는, 요구된 프레임수 이하여도 자기의 처리 능력의 범위 내에서 송신 가능한 프레임수의 동화상 데이터를 수신측 단말 A(110)에 송신한다. 영역(C1)은, 송신측 단말 B(120)로부터 수신측 단말 A(110)로의 프레임 송신에 있어서, 에러 송신(송신 동작을 스킵)된 처리 프레임수이다.
다음에, 수신측 단말 A(110)에서의 수신측 시퀀스를, 도 7의 흐름도를 이용하여 구체적으로 설명한다. 실제의 수신측 시퀀스, 수신 처리 등은 제어부(110a)에서 실행된다.
본 발명에 따른 동화상 데이터의 배신 방법에서, 단말 A, 단말 B, 및 단말 C 각각에서는, 각각의 프레임 송신 제한이 미리 설정된다(단계 ST61). 즉, 단말 A, 단말 B, 및 단말 C 각각은, 자기의 단말이 동화상 데이터의 송신원이 되었을 때의, 단위 시간당의 송신 가능한 프레임수에 관한 송신 제한 정보를, 상기 동화상 데이터의 송신에 앞서, 미리 다른 단말에 통지해 둔다. 예컨대, 도 4에 나타낸 케이스의 경우, 미리 송신측 단말 B(120)는, 백그라운드에서의 처리 부하가 낮기 때문에 송신 제한이 설정되어 있지 않다. 한편, 송신측 단말 C(130)는, 처리 부하가 높기 때문에 5 프레임/s의 송신 제한이 미리 설정되고, 다른 단말 A(110), 단말 B(120)의 각각에 통지된다.
이와 같이, 송신측 단말 B(120) 및 송신측 단말 C(130)에서 미리 송신 가능한 화상 프레임수의 상한을 설정할 수 있게 해 둠으로써, 수신측 단말 A(110)는, 이 상한 이내에서 수신 프레임수를 설정하게 된다. 그 때문에, 부하 상황을 무시하고 수신측 단말 A(110)에 동화상 데이터를 보내는 것에 따른 상기 수신측 단말 A(110)의 처리 부하 증가의 회피와 함께, 송신측 정보 단말에서의 처리 부하의 저감도 가능하게 된다. 또한, 수신측 단말 A(110)는 영상 표시하여야 할 화상 프레임수 이외에 자기의 데이터 처리(백그라운드에서의 데이터 처리)를 관리하면서, 송신측 단말 B(120) 또는 송신측 단말 C(130)로부터 송신되는 동화상 데이터의 처리가 가능하다고 판단하였을 때에만 해당하는 송신측 단말에 송신 요구를 행하는 등, 수신측 및 송신측 양방의 단말이 능동적으로 동화상 데이터의 배신 동작을 관리할 수 있다.
계속해서, 수신측 단말 A(110)에서는, 동화상 데이터의 수신 타이밍시에(단계 ST62), 자기의 처리 능력을 확인한다(단계 ST63). 이때, 수신측 단말 A(110)이 수신 가능하다고 판단하면, 처리 가능 범위 내의 프레임수의 동화상 데이터의 송신 요구를, 송신측 단말 B(120) 또는 송신측 단말 C(130) 중 어느 하나에 통지한다(단계 ST64).
수신측 단말 A(110)는, 송신 요구를 통지한 송신측 단말 B(120) 또는 송신측 단말 C(130) 중 어느 하나로부터 정해진 프레임수의 동화상 데이터를 수신하면, 상기 수신된 동화상 데이터의 각 화상 프레임을 신장하면서 차례로 모니터에 표시하는 등, 미리 결정된 프레임 재생 처리를 행한다(단계 ST66). 또한, 이 프레임 재생 동작(단계 ST66)은, 송신 요구한 화상 프레임 전체의 수신 종료까지 반복된다(단계 ST67). 또한, 수신측 단말 A(110)이 송신측 단말 B(120) 또는 송신측 단말 C(130)로부터 송신된 화상 프레임의 수신 대기의 상태로 일정 시간 경과한 경우에는, 재차, 수신측 단말 A(110)로부터 송신측 단말 B(120) 또는 송신측 단말 C(130)에 송신 요구가 통지된다.
다음에, 송신측 단말 B(120) 및 송신측 단말 C(130)의 각각에서의 송신측 시퀀스 및 화상 프레임의 송신 처리를, 도 8의 흐름도 및 도 9를 참조하면서 구체적으로 설명한다. 실제의 송신측 시퀀스, 송신 처리 등은, 제어부(120a, 130a)에서 실행된다.
또한, 단말 A, 단말 B, 및 단말 C는, 자기의 단말이 동화상 데이터의 송신원이 되었을 때의, 단위 시간당의 송신 가능한 프레임수에 관한 송신 제한 정보를, 상기 동화상 데이터의 송신에 앞서, 미리 다른 단말에 통지해 둔다(단계 ST71). 도 4와 같은 실시형태에서는, 단말 B(120) 및 단말 C(130)가 송신원이기 때문에, 이들 송신측 단말 B(120) 및 송신측 단말 C(130)의 각각은, 다른 단말에 송신 제한을 통지하여, 수신측 단말 A(110)로부터의 송신 요구를 대기한다(단계 ST72).
예컨대, 수신측 단말 A(110)로부터 송신측 단말 B(120)에 송신 요구가 통지되었다고 하면, 송신측 단말 B(120)는, 우선, 자기의 처리 능력을 확인하고(단계 ST73), 계속해서, 수신측 단말 A(110)에 대하여 프레임 송신(단계 ST74) 또는 송신 스킵을 의미하는 에러 송신 처리(단계 ST75)가 행해진다. 또한, 이 프레임 송신 처리는, 도 9에 나타낸 바와 같이 행해진다. 이 도 9에 나타낸 프레임 송신 처리에서는, 수신측 단말 A(110)로부터 송신측 단말 B(120)에 대하여 5 프레임/s의 송신 요구가 통지되는 것으로 한다. 또한, 이때의 송신측 단말 B(120)에서의 송신 능력을 5 프레임/s로 한다.
구체적인 프레임 송신 처리(단계 ST73∼ST75)에서는, 우선, 도 9의 (a)에 나타낸 바와 같이, 송신측 단말 B(120)가, 자기의 프레임 송신 능력에 따라, 미리 준비되어 있는 동화상 데이터(D1)(12 프레임/S)를 구성하는 화상 프레임(f1∼f12)으로부터 에러 데이터(E1)로서 화상 프레임(f1, f6)을 배제함으로써 일단 처리 가능한 동화상 데이터(D2)(10 프레임/s)를 생성한다. 또한, 송신측 단말 B(120)는, 도 9의 (b)에 나타낸 바와 같이, 수신측 단말 A(110)로부터 통지된 송신 요구의 프레임제한에 대응하도록 자기가 송신 처리 가능한 동화상 데이터(D2)(화상 프레임(f2, …, f5, f7, …, f12))로부터, 에러 데이터(E2)로서 화상 프레임(f3, f4, f8, f9, f11)을 더 배제한다. 이에 따라, 송신용 동화상 데이터(D3)(화상 프레임(f2, f5, f7, f10, f12)에 의해 구성된 5 프레임/s의 동화상 데이터)가 생성되고, 송신측 단말 B(120)는 이 송신용 동화상 데이터(D3)를, 송신 요구를 통지하여 온 수신측 단말 A(110)에 송신한다.
송신측 단말 B(120)는, 이상의 프레임 송신 처리가 종료하면(단계 ST76), 다음 송신 요구가 통지될 때까지 대기한다(단계 ST72).
이상과 같이, 본 발명에 따른 동화상 데이터의 배신 방법에 따르면, 네트워크를 통해 서로 접속된 복수의 정보 단말 사이에서의 처리 부하의 편재(偏在) 상황이나 접속된 네트워크의 대역 상황에 따라 배신되어야 하는 동화상 데이터의 프레임수를 동적으로 조정할 수 있다. 그 때문에, 이들 복수의 정보 단말 사이에서의 처리 부하의 편재에 영향받는 일 없이, 실시간으로의 동화상 데이터 배신이 가능해진다. 또한, 송수신되는 동화상 데이터로서, Motion-JPEG 방식 등의 동화상 데이터가 채용됨으로써, 동화상 데이터를 구성하는 화상 프레임수의 증감이 빈번히 발생한 경우라도, 각 정보 단말 사이에서의 실시간으로의 동화상 데이터 배신에의 영향은 효과적으로 저감될 수 있다.
이상의 본 발명의 설명으로부터, 본 발명을 여러가지로 변형할 수 있는 것은 분명하다. 그와 같은 변형은, 본 발명의 사상 및 범위에서 일탈하는 것이라고는 볼 수 없고, 모든 당업자에게서 자명한 개량은, 이하의 청구의 범위에 포함되는 것이다.
100…네트워크 110, 120, 130…정보 단말(PC)
110a, 120a, 130a…제어부(CPU)

Claims (8)

  1. 복수의 화상 프레임으로 구성된 동화상 데이터를, 네트워크를 통해 서로 접속된 복수의 정보 단말 사이에서 송수신하기 위한 동화상 데이터의 배신(配信) 방법으로서,
    상기 복수의 정보 단말 사이에서의 양방향 데이터 통신의 일 양태(樣態)로서 송신측 정보 단말로부터 수신측 정보 단말로의 상기 동화상 데이터의 배신 동작에 있어서,
    상기 수신측 정보 단말은, 정해진 시간 간격으로 동화상 데이터의 송신 요구를 송신원이 되는 상기 송신측 정보 단말에 대하여 반복할 때, 상기 송신 요구를 행하는 시점에서의 상기 네트워크의 대역 제한에 기인하는 화상 프레임 수신 가능량, 및 자기의 화상 프레임 표시 처리의 부하 허용량 중 적어도 어느 한쪽의 데이터량을 미리 계산하고, 수신 제한 정보로서, 상기 데이터량, 및 상기 데이터량의 산출 근거가 되는 데이터 구조 요소 중 적어도 어느 한쪽의 상한값을, 상기 송신측 정보 단말에 차례로 통지하는 것을 특징으로 하는 동화상 데이터의 배신 방법.
  2. 제1항에 있어서, 상기 수신측 정보 단말로부터 송신 요구를 받은 상기 송신측 정보 단말은, 수신된 상기 수신 제한 정보에서 지시된 데이터 구조 요소에 대해서, 송신 요구를 받은 시점에서의 자기의 부하 허용 범위 내에 수습되는 데이터량, 및 상기 수신측 정보 단말로부터 요구된 데이터량 중 적어도 어느 한쪽에 맞추어 그 데이터량이 제한된 동화상 데이터를, 송신 요구를 통지하여 온 상기 수신측 정보 단말에 송신하는 것을 특징으로 하는 동화상 데이터의 배신 방법.
  3. 제1항에 있어서, 상기 복수의 정보 단말 사이에서의 양방향 데이터 통신의 일양태로서, 2 이상의 송신측 정보 단말로부터 수신측 정보 단말로의 상기 동화상 데이터의 배신 동작에 있어서,
    상기 수신측 정보 단말은, 화상 프레임 표시 처리가 가능한 자기의 타이밍에서, 상기 2 이상의 송신측 정보 단말 중 어느 하나에 송신 요구 신호를 송신하는 것을 특징으로 하는 동화상 데이터의 배신 방법.
  4. 제3항에 있어서, 상기 2 이상의 송신측 정보 단말 중 상기 타이밍에 발생한 송신 요구 신호를 수신한 송신측 정보 단말만이 상기 수신측 정보 단말로부터 요구된 데이터량의 동화상 데이터를 상기 수신측 정보 단말에 송신하는 한편, 남은 송신측 정보 단말은, 자기에게의 송신 요구를 수신할 때까지 동화상 데이터의 송신 대기 상태가 되는 것을 특징으로 하는 동화상 데이터의 배신 방법..
  5. 제1항 내지 제4항 중 어느 한 항에 있어서, 상기 데이터 구조 요소는, 화상 프레임에 관한 송수신 단위의 단위 시간당의 수, 화상 해상도, 및 1 화소당의 비트수 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 동화상 데이터의 배신 방법.
  6. 제5항에 있어서, 상기 동화상 데이터는, 시간축 방향으로 압축되는 일 없이 각각이 이전 화상 프레임과는 독립적으로 재생 가능한 화상 프레임으로 구성되어 있고,
    상기 화상 프레임에 관한 송수신 단위는, 상기 동화상 데이터를 구성하는 각 화상 프레임에 상당하는 것을 특징으로 하는 동화상 데이터의 배신 방법.
  7. 제5항에 있어서, 상기 동화상 데이터는, 각각이 복수의 화상 프레임을 포함하며, 시간축 방향에서 보아 앞에 위치하는 프레임군과는 독립적으로 재생 가능한 복수의 프레임군으로 구성되어 있고,
    상기 화상 프레임에 관한 송수신 단위는, 상기 동화상 데이터를 구성하는 각 프레임군에 상당하는 것을 특징으로 하는 동화상 데이터의 배신 방법.
  8. 제1항 내지 제7항 중 어느 한 항에 있어서, 상기 복수의 정보 단말 각각은, 화상 프레임에 관한 송수신 단위의 수에 대해서, 자기의 정보 단말이 상기 동화상 데이터의 송신원이 되었을 때의, 단위 시간당 송신 가능한 상한값을 지시하는 송신 제한 정보를, 상기 동화상 데이터의 송신에 앞서, 미리 다른 정보 단말에 통지해 두는 것을 특징으로 하는 동화상 데이터의 배신 방법.
KR1020117006683A 2008-08-28 2009-08-06 동화상 데이터의 배신 방법 KR101539812B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2008-220027 2008-08-28
JP2008220027 2008-08-28

Publications (2)

Publication Number Publication Date
KR20110058841A true KR20110058841A (ko) 2011-06-01
KR101539812B1 KR101539812B1 (ko) 2015-07-27

Family

ID=41721274

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020117006683A KR101539812B1 (ko) 2008-08-28 2009-08-06 동화상 데이터의 배신 방법

Country Status (8)

Country Link
US (1) US8839330B2 (ko)
EP (1) EP2323384A4 (ko)
JP (1) JP5664241B2 (ko)
KR (1) KR101539812B1 (ko)
CN (1) CN102138336B (ko)
BR (1) BRPI0918264A2 (ko)
CA (1) CA2735728A1 (ko)
WO (1) WO2010024102A1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140007647A (ko) * 2012-07-10 2014-01-20 삼성전자주식회사 영상 통신 시스템에서 컬러 정보를 교섭하는 방법 및 장치
JP5949326B2 (ja) * 2012-08-24 2016-07-06 住友電気工業株式会社 映像データ配信装置およびそれを含む双方向対話システム
WO2015133216A1 (ja) * 2014-03-05 2015-09-11 株式会社リコー データ伝送システム、端末装置、プログラムおよび方法
CN105337923B (zh) * 2014-05-26 2019-07-12 腾讯科技（北京）有限公司 数据分发方法和系统及数据发送装置和数据接收装置
EP3016383B1 (en) * 2014-11-03 2017-06-21 Axis AB Method, device, and system for pre-processing a video stream for subsequent motion detection processing
US10438395B2 (en) 2015-03-25 2019-10-08 Naver Corporation Apparatus, method and computer program for displaying cartoon content
KR101730114B1 (ko) * 2015-03-25 2017-04-25 네이버 주식회사 만화 데이터 표시 장치, 방법 및 컴퓨터 프로그램

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0774830A (ja) * 1993-06-22 1995-03-17 Canon Inc マルチメディア情報通信装置
JP3630474B2 (ja) * 1995-07-14 2005-03-16 沖電気工業株式会社 動画像伝送システム及び動画像伝送装置
KR100465553B1 (ko) * 1996-08-07 2005-06-21 마츠시타 덴끼 산교 가부시키가이샤 화상음성복호화장치와화상음성부호화장치및정보전송시스템
KR19990071821A (ko) 1996-10-02 1999-09-27 이데이 노부유끼 텔레비전수상기,수신채널을세트하는방법및화상표시방법
JPH11161571A (ja) 1997-11-27 1999-06-18 Fujitsu Ltd 適応的伝送制御システム
US6553423B1 (en) * 1999-05-27 2003-04-22 Cisco Technology, Inc. Method and apparatus for dynamic exchange of capabilities between adjacent/neighboring networks nodes
JP2001204002A (ja) * 2000-01-20 2001-07-27 Nec Eng Ltd 画像伝送方式
JP3948597B2 (ja) * 2000-03-08 2007-07-25 Ｋｄｄｉ株式会社 動画像圧縮符号化送信装置、受信装置および送受信装置
JP2003078893A (ja) * 2001-09-05 2003-03-14 Nec Corp 映像伝送機能付き携帯型端末装置、及びそれに適用される映像伝送方法
JP3912091B2 (ja) * 2001-12-04 2007-05-09 ソニー株式会社 データ通信システム、データ送信装置、データ受信装置、および方法、並びにコンピュータ・プログラム
JP4150951B2 (ja) * 2002-02-19 2008-09-17 ソニー株式会社 動画配信システム、動画配信装置および方法、並びにプログラム
US7340527B2 (en) * 2002-05-09 2008-03-04 Matsushita Electric Industrial Co., Ltd. Content distribution system that distributes line of stream data generated by splicing plurality of pieces of stream data
US7558323B2 (en) * 2002-11-27 2009-07-07 Hitachi Kokusai Electric Inc. Video data transmission method for changing transmission data amounts in accordance with a transmission speed and a transmission system therefor
JP2005094054A (ja) 2003-09-11 2005-04-07 Hiroshima Univ 画像符号化装置、その方法およびプログラム、並びにストリーム合成器、その方法およびプログラム
JP2005341347A (ja) * 2004-05-28 2005-12-08 Nippon Telegr & Teleph Corp <Ntt> 多地点接続装置および方法
JP2006174045A (ja) 2004-12-15 2006-06-29 Ntt Communications Kk 画像配信装置、プログラム及び方法
JP2005094045A (ja) 2004-12-21 2005-04-07 Matsushita Electric Ind Co Ltd プラズマエッチング装置およびプラズマエッチング方法
JP2006333254A (ja) * 2005-05-27 2006-12-07 Fujifilm Holdings Corp 動画像リアルタイム通信端末、動画像リアルタイム通信端末の制御方法及び動画像リアルタイム通信端末の制御プログラム
JP2007228412A (ja) * 2006-02-24 2007-09-06 Matsushita Electric Ind Co Ltd 携帯端末装置
US20080098123A1 (en) * 2006-10-24 2008-04-24 Microsoft Corporation Hybrid Peer-to-Peer Streaming with Server Assistance
EP2182728A4 (en) * 2007-08-01 2012-10-10 Nec Corp MOVEMENT DATA DISTRIBUTION SYSTEM, METHOD AND PROGRAM

Also Published As

Publication number Publication date
EP2323384A4 (en) 2013-03-13
US8839330B2 (en) 2014-09-16
KR101539812B1 (ko) 2015-07-27
WO2010024102A1 (ja) 2010-03-04
CA2735728A1 (en) 2010-03-04
EP2323384A1 (en) 2011-05-18
CN102138336B (zh) 2014-07-16
US20110239264A1 (en) 2011-09-29
JP5664241B2 (ja) 2015-02-04
BRPI0918264A2 (pt) 2015-12-15
CN102138336A (zh) 2011-07-27
JPWO2010024102A1 (ja) 2012-01-26

Similar Documents

Publication Publication Date Title
US8621532B2 (en) Method of transmitting layered video-coded information
US8890930B2 (en) Multi-channel video communication system and method for processing multi-channel video communication
Nightingale et al. HEVStream: a framework for streaming and evaluation of high efficiency video coding (HEVC) content in loss-prone networks
CA2737728C (en) Low latency video encoder
KR20110058841A (ko) 동화상 데이터의 배신 방법
CN101742289B (zh) 视频码流压缩方法、系统及装置
CN111147860B (zh) 一种视频数据的解码方法及装置
CN105635636A (zh) 一种视频会议系统及其实现视频图像传输控制的方法
CN104320716A (zh) 一种基于多终端协同的视频上行链路传输方法
US20080144505A1 (en) Method and Apparatus for Bitrate Reduction
US20220329883A1 (en) Combining Video Streams in Composite Video Stream with Metadata
US6157675A (en) Image transmission device and image transmission method
KR20080081407A (ko) 하이브리드 다시점 및 계층화 비디오 코딩 방법과 장치
KR101433168B1 (ko) 하이브리드 다시점 및 계층화 비디오 코딩 방법과 장치
CN101909194B (zh) 提供频道切换服务的方法、系统及频道切换服务器
US9363574B1 (en) Video throttling based on individual client delay
CN115209189A (zh) 一种视频流传输方法、系统、服务器及存储介质
JP4455405B2 (ja) 映像通信装置、映像配信サーバ、双方向映像通信システム、及びプログラム
CN103152545B (zh) 一种处理纠错请求的方法、视频服务器和视频会议系统
KR101291559B1 (ko) 실시간 다중 영상압축 장치 및 방법
Wang et al. Single-input-multiple-ouput transcoding for video streaming
EP1739970A1 (en) Method for encoding and transmission of real-time video conference data
Safaaldin et al. Design and implementation of a teleconferencing system using improved HEVC coding
WO2016032033A1 (ko) 클라우드 기반 4ｋ ｕｈｄ 콘텐츠 스트리밍 장치 및 방법
CN112492348A (zh) 多码流处理及输出方法、设备及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee