KR101726586B1 - 비디오 스트림을 송신하기 위한 방법 - Google Patents

비디오 스트림을 송신하기 위한 방법 Download PDF

Info

Publication number
KR101726586B1
KR101726586B1 KR1020157016382A KR20157016382A KR101726586B1 KR 101726586 B1 KR101726586 B1 KR 101726586B1 KR 1020157016382 A KR1020157016382 A KR 1020157016382A KR 20157016382 A KR20157016382 A KR 20157016382A KR 101726586 B1 KR101726586 B1 KR 101726586B1
Authority
KR
South Korea
Prior art keywords
video stream
frame
video
quality level
predetermined threshold
Prior art date
Application number
KR1020157016382A
Other languages
English (en)
Other versions
KR20150090139A (ko
Inventor
나탈리 줄리아흐
마랭 오스몽
Original Assignee
알까뗄 루슨트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 알까뗄 루슨트 filed Critical 알까뗄 루슨트
Publication of KR20150090139A publication Critical patent/KR20150090139A/ko
Application granted granted Critical
Publication of KR101726586B1 publication Critical patent/KR101726586B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/765Media network packet handling intermediate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • H04L65/605
    • H04L65/607
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

네트워크(5)에서 비디오 스트림을 송신하기 위한 방법이 개시되고, 상기 방법은 비디오 송신 디바이스(3)에 의해 수행되며, 상기 방법은: - 소스 통신 단말(2)로부터 제 1 비디오 스트림(VIN)을 수신하는 단계, - 상기 제 1 비디오 스트림(VIN)의 품질 레벨(Q)을 결정하는 단계, 및 - 상기 제 1 비디오 스트림(VIN)에 기초하여 제 2 비디오 스트림(VOUT)을 목적지 통신 단말(4)로 송신하는 단계를 포함하고, - 상기 품질 레벨(Q)이 미리 결정된 임계치를 초과하면, 제 2 비디오 스트림(VOUT)의 프레임은 상기 제 1 비디오 스트림(VIN)의 프레임을 포함하고, - 상기 품질 레벨(Q)이 상기 미리 결정된 임계치 미만이면, 방법은 품질 기준들을 충족시키는 상기 제 1 비디오 스트림(VIN)의 프레임의 부분, 상기 부분을 포함하는 제 2 비디오 스트림(VOUT)의 프레임 및 제 3 비디오 스트림(VSUB)의 프레임을 결정하는 단계를 포함한다.

Description

비디오 스트림을 송신하기 위한 방법{METHOD FOR TRANSMITTING A VIDEO STREAM}
본 발명은 네트워크에서 비디오 스트림들의 송신의 분야에 관한 것이다.
네트워크에서 비디오 스트림을 송신할 때, 몇몇 기술적인 해결책들은 품질의 레벨을 보장하거나 예상된 레벨이 더 이상 보장되지 않을 때 반응하는 것으로 공지된다. 예를 들면, IP 멀티미디어 서브시스템(IMS) 또는 LTE 네트워크에서, 호출 셋업 동안, 코덱들은 최종 이용자들과 네트워크 사이의 동의를 얻기 위해 협상된다(SDP 협상). 매체 서버(MRF 네트워크 요소, IMS의 매체 리소스 기능부) 내에 또는 최종 이용자 단말 그들 자신들에서, 품질의 원하는 레벨을 유지하기 위해 이용될 수 있는 일부 동기화 메커니즘들, 예측 또는 정정 알고리즘들이 공지된다. 예들은 실시간 제어 프로토콜(RTCP) 및 패킷 손실 은닉(PLC)을 이용하는 오디오 및 비디오 동기화이다. 그러나, 이들 다양한 기술적 해결책들은 네트워크의 물리적 용량에 의해 제한된다.
비디오 스트림의 품질이 불충분한 경우에, 가능한 반응은 비디오 스트림의 송신을 취소하거나(단지 오디오만 송신하고) 비디오 스트림을 미리 결정된 비디오 스트림 예를 들면, 아바타(avatar)로 대체하는 것이다. 그러나, 그 경우에, 이용자는 비디오 스트림에 관한 어떠한 정보도 갖지 않는다.
따라서, 본 발명의 실시예들의 목적은 네트워크에서 비디오 스트림을 송신하기 위한 개선된 방법을 제안하는 것이고, 상기 개선된 방법은 종래 기술의 방법들의 내재하는 단점들을 보여주지 않는다.
본 발명의 실시예들에 따라, 이 목적은 네트워크에서 비디오 스트림을 송신하기 위한 방법에 의해 성취되고, 상기 방법은 비디오 송신 디바이스에 의해 수행되며, 상기 방법은:
- 소스 통신 단말로부터 제 1 비디오 스트림을 수신하는 단계,
- 상기 제 1 비디오 스트림의 품질 레벨을 결정하는 단계, 및
- 상기 제 1 비디오 스트림에 기초하여 제 2 비디오 스트림을 목적지 통신 단말로 송신하는 단계를 포함하고,
- 상기 품질 레벨이 미리 결정된 임계치를 초과하면, 제 2 비디오 스트림의 프레임은 상기 제 1 비디오 스트림의 프레임을 포함하고,
- 상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 방법은 품질 기준들을 충족시키는 상기 제 1 비디오 스트림의 프레임의 부분, 상기 부분을 포함하는 제 2 비디오 스트림의 프레임 및 제 3 비디오 스트림의 프레임을 결정하는 단계를 포함한다.
대응적으로, 본 발명의 실시예들은 비디오 송신 디바이스에 관한 것이고, 상기 비디오 송신 디바이스는:
- 소스 통신 단말로부터 제 1 비디오 스트림을 수신하기 위한 수단,
- 상기 제 1 비디오 스트림의 품질 레벨을 결정하기 위한 수단,
- 상기 제 1 비디오 스트림에 기초하여 제 2 비디오 스트림을 목적지 통신 단말로 송신하기 위한 수단, 및
- 상기 품질 레벨이 상기 미리 결정된 임계치 미만이면 활성화된, 품질 기준들을 충족시키는 상기 제 1 비디오 스트림의 프레임의 부분을 결정하기 위한 수단을 포함하고,
- 상기 품질 레벨이 미리 결정된 임계치를 초과하면, 제 2 비디오 스트림의 프레임은 상기 제 1 비디오 스트림의 프레임을 포함하고,
- 상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 제 2 비디오 스트림의 프레임은 상기 부분 및 제 3 비디오 스트림의 프레임을 포함한다.
이 방식으로, 품질이 충분할 때, 제 1 비디오 스트림은 수정 없이 목적지 통신 단말로 송신될 수 있다. 반대로, 품질이 충분하지 않을 때, 제 1 비디오 스트림의 단지 한 부분이 대체 비디오 스트림과 조합하여, 목적지 통신 단말로 송신된다. 선택된 부분이 품질 기준들을 충족시키기 때문에, 품질 저하는 목적지 통신 단말의 이용자에게 (적어도 부분적으로) 숨겨질 수 있다. 게다가, 대체 비디오 스트림이 이용자에 제공되기 때문에, 이용자의 주의가 원래 비디오에 대한 감소된 크기의 부분(P)으로부터 다른 곳으로 돌려질 수 있다. 결과적으로, 이용자는 심지어 품질이 저하될 때 유동적으로 만족하는 뷰잉 경험을 즐길 수 있다.
일 실시예에서, 제 1 비디오 스트림은 프레임의 완전한 영역의 데이터를 포함하는 제 1 이미지 데이터 및 이전 프레임에 대한 프레임의 영역의 변화들에 따른 데이터를 포함하는 제 2 이미지 데이터를 포함하고, 상기 품질 기준들은, 제 2 이미지 데이터가 미리 결정된 지속기간 동안 영역에 대해 수신되었으면 상기 영역에 의해 충족된다.
상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 제 2 비디오 스트림의 상기 프레임은 제 3 비디오 스트림의 메타데이터에 의해 규정된 위치에서 상기 부분을 포함할 수 있다.
상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 제 2 비디오 스트림의 상기 프레임은 제 3 비디오 스트림의 분석에 의해 결정된 위치에서 상기 부분을 포함할 수 있다.
상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 제 2 비디오 스트림의 상기 프레임은 미리 결정된 위치에서 상기 부분을 포함할 수 있다.
3개의 상기 언급된 예들에서, 부분은 최소 관심 있는 영역에 위치될 수 있다.
제 3 비디오 스트림은 광고를 포함할 수 있다.
일 실시예에서, 제 3 비디오 스트림은 소스 통신 단말의 또는 목적지 통신 단말의 식별자의 기능으로 결정될 수 있다. 따라서, 개인화가 제공된다.
예를 들면, 제 3 비디오 스트림은 사회 네트워크 서비스로부터 이용가능한 상기 식별자에 관련된 데이터의 기능으로 결정될 수 있다.
일 실시예에서, 품질 기준들을 충족시키는 상기 제 1 비디오 스트림의 프레임의 부분을 결정하는 단계는 상기 제 1 비디오 스트림의 연속적인 프레임들에 대해 반복된다. 따라서, 결정된 부분은 연속적인 프레임들에 대해 시간에 따라 달라질 수 있다.
실시예들은 화상 회의 시스템(videoconferencing)에 관한 것이다. 따라서, 방법은:
- 각각의 통신 단말들로부터 복수의 제 1 비디오 스트림들을 수신하는 단계,
- 상기 제 1 비디오 스트림들 중 적어도 하나에 대한 품질 레벨을 결정하는 단계, 및
- 상기 제 1 비디오 스트림들에 기초하여 제 2 비디오 스트림을 상기 통신 단말들로 송신하는 단계를 포함하고,
- 상기 품질 레벨이 미리 결정된 임계치를 초과하면, 제 2 비디오 스트림의 프레임은 상기 제 1 비디오 스트림들 중 상기 적어도 하나의 프레임을 포함하고,
- 상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 방법은 품질 기준들을 충족시키는 상기 적어도 하나의 제 1 비디오 스트림의 프레임의 부분, 상기 부분을 포함하는 제 2 비디오 스트림의 프레임 및 제 3 비디오 스트림의 프레임을 결정하는 단계를 포함한다.
예를 들면, 제 2 비디오 스트림은 상기 제 1 비디오 스트림들에 기초한 모자이크(mosaic)일 수 있다. 또 다른 실시예에서, 제 2 비디오 스트림은 제 1 비디오 스트림들 중 하나 예를 들면, 참가자가 가장 크게 말하는 것을 선택함으로써 결정될 수 있다.
본 발명의 실시예들은 또한, 프로그램이 컴퓨터에 의해 실행될 때 본 발명의 일 실시예에 따른 방법을 실행하기 위한 지시들을 포함하는 예를 들면, 컴퓨터 판독가능한-매체 상의 상기 컴퓨터 프로그램에 관한 것이다.
본 발명의 상기 및 다른 목적들과 특징들은 더 명백하게 될 것이고 본 발명 그 자신은 첨부된 도면들과 결부하여 취해진 실시예들의 다음 설명을 참조함으로써 최상으로 이해될 것이다.
도 1은 본 발명의 일 실시예에 따른 비디오 스트림을 송신하기 위한 방법이 구현될 수 있는 시스템의 개략도.
도 2는 본 발명의 일 실시예에 따른 비디오 스트림을 송신하기 위한 방법의 흐름도.
도 3, 도 4 및 도 5는 비디오 스트림의 부분의 대체 비디오 스트림과의 조합의 다양한 예를 도시한 도면들.
도 6은 본 발명의 일 실시예에 따른 비디오 스트림을 송신하기 위한 방법이 구현될 수 있는 시스템의 개략도.
도 7은 도 6의 시스템에서, 비디오 스트림의 부분의 대체 비디오 스트림과의 조합의 일례를 도시한 도면.
도면들에 도시된 다양한 요소들의 기능들이 전용 하드웨어 뿐만 아니라, 적절한 소프트웨어와 연관된 소프트웨어를 실행할 수 있는 하드웨어의 이용을 통해 제공될 수 있음이 언급되어야 한다. 처리기에 의해 제공될 때, 기능들은 단일 전용 처리기에 의해, 단일 공유된 처리기에 의해, 또는 복수의 개별적인 처리기들에 의해 제공될 수 있고, 이들 중 일부는 공유될 수 있다. 게다가, 용어 "처리기" 또는 "제어기"의 명백한 이용은 오로지 소프트웨어를 실행할 수 있는 하드웨어를 언급하도록 해석되어서는 안되고, 무조건적으로 제한 없이, 디지털 신호 처리기(DSP) 하드웨어, 네트워크 처리기, 주문형 반도체(application specific integrated circuit; ASIC), 필드 프로그래밍가능한 게이트 어레이(FPGA), 소프트웨어를 저장하기 위한 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 및 비 휘발성 저장장치를 포함할 수 있다. 다른 하드웨어, 종래의 또는 맞춤형 하드웨어가 또한 포함될 수 있다. 그들의 기능은 프로그램 로직의 동작을 통해, 전용 로직을 통해, 프로그램 제어부 및 전용 로직의 상호작용을 통해, 또는 심지어 수동적으로 실행될 수 있고, 특정 기술은 문맥으로부터 더 구체적으로 이해되는 바와 같이 구현자에 의해 선택가능하다.
본 명세서에서의 임의의 블록도들이 본 발명의 원리들을 구현하는 예시적인 회로의 개념도들을 표현함이 당업자들에 의해 추가로 이해되어야 한다. 유사하게, 임의의 플로우 차트들(flow charts), 흐름도들, 상태 전이도들, 의사 코드 등이 컴퓨터 판독가능한 매체에 실질적으로 표현될 수 있는 다양한 처리들을 표현하고 따라서, 이러한 컴퓨터 또는 처리기가 명백하게 도시되든 아니든, 컴퓨터 또는 처리기에 의해 실행될 수 있음이 이해될 것이다.
도 1은 본 발명의 일 실시예에 따른 비디오 스트림을 송신하기 위한 방법이 구현될 수 있는 시스템(1)의 개략도이다. 시스템(1)은 통신 단말(2), 네트워크(5)에 의해 접속된, 비디오 송신 디바이스(3) 및 통신 단말(4)을 포함한다. 시스템(1)은 대체 비디오 서버(6) 및 비디오 품질 평가 디바이스(7)를 또한 포함할 수 있다.
시스템(1)은 비디오 송신 디바이스(3)를 통하여, 네트워크(5)를 통해, 소스 비디오 스트림(VS)을 (소스 단말의 역할을 하는) 통신 단말(2)로부터 (목적지 단말의 역할을 하는) 통신 단말(4)로 송신하는 것을 허용한다. 비디오 스트림(VS)의 송신은 세션 개시 프로토콜(SIP)을 이용하여, IP 멀티미디어 서브시스템에서 개시될 수 있다. 그러나, 본 발명의 실시예들은 이 예로 제한되지 않는다.
통신 단말(2)은 이용자들에 의해 요청될 수 있는 복수의 비디오 스트림들을 저장하는 멀티미디어 서버일 수 있다. 통신 단말(2)은 또한 이용자 단말 예를 들면, PC 또는 스마트폰과 같은 비디오 통신을 위해 네트워크를 통해 비디오를 획득하고 획득된 비디오를 방출할 수 있는 단말일 수 있다.
통신 단말(4)은 디스플레이될 비디오 스트림을 수신할 수 있는 이용자 단말 예를 들면, PC, 스마트폰, 셋톱 박스...일 수 있다.
비디오 송신 디바이스(3)는 통신 단말(2)과 통신 단말(4) 사이의 네트워크(5)에 위치된다. 비디오 송신 디바이스(3)에 의해 수신된 비디오 스트림(VIN)은 예를 들면, 네트워크(5)에서의 패킷 손실 또는 지연으로 인한 소스 비디오 스트림(VS)과 상이할 수 있다. 즉, 네트워크(5)에서 이용가능한 비디오 스트림(VIN)은 왜곡될 수 있고 즉, 품질이 감소될 수 있다.
가능한 품질 저하를 고려하기 위해, 비디오 송신 디바이스(3)는 비디오 스트림(VIN)의 품질 레벨(Q)을 결정한다. 일 실시예에서, 비디오 송신 디바이스(3)는 품질 레벨(Q) 그 자신을 평가한다. 또 다른 실시예에서, 도 1 상의 파선으로 도시된 바와 같이, 비디오 송신 디바이스(3)는 비디오 스트림(VIN)의 품질을 평가하기 위해 및 품질 레벨(Q)을 비디오 송신 디바이스(3)에 제공하기 위해 구성된 비디오 품질 평가 디바이스(7)를 컨설팅(consulting)함으로써 품질 레벨(Q)을 결정한다.
품질 레벨(Q)은 임의의 적합한 비디오 품질 평가 방법에 의해 평가될 수 있다. 소스 비디오 스트림(VS)이 (프레임의 완전한 영역의 데이터를 포함하는) I-슬라이스들 및 (이전 프레임에 대한 프레임의 영역의 변화들에 따른 데이터를 포함하는) P-슬라이스들에 기초하여 인코딩되는 일 실시예에서, P-슬라이스들이 미리 결정된 지속기간 동안 프레임의 영역에 대해 수신되었으면, 품질 레벨(Q)은 충분한 품질을 반영할 수 있고, 그렇지 않으면 불충분한 품질을 반영할 수 있다.
비디오 송신 디바이스(3)로부터 통신 단말(4)로 송신된 비디오 스트림(VOUT)은 결정된 품질 레벨(Q)에 의존한다:
- 품질 레벨(Q)이 미리 결정된 품질 임계치(Q0)를 초과하면, 비디오 스트림(VOUT)은 전체적으로 비디오 스트림(VIN)을 포함한다(예로서, 비디오 스트림(VOUT)은 비디오 스트림(Vin)과 같다).
- 품질 레벨(Q)이 미리 결정된 품질 임계치(Q0) 미만이면, 비디오 송신 디바이스(3)는 품질 기준들을 충족시키는 비디오 스트림(VIN)의 부분 및 대체 비디오 스트림(VSUB)을 조합함으로써 비디오 스트림(VOUT)을 구성한다. 이 조합에 대한 몇몇 가능성들은 도 3, 도 4 및 도 5를 참조하여 이하에 설명될 것이다.
대체 비디오 스트림(VSUB)은 비디오 송신 디바이스(3)에 저장된 비디오 일 수 있다. 또 다른 실시예에서, 도 1 상의 파선에 의해 도시된 바와 같이, 대체 비디오 스트림(VSUB)은 대체 비디오 서버(6)에 의해 비디오 송신 디바이스(3)에 제공된다.
대체 비디오 스트림(VSUB)은 광고를 포함할 수 있다. 그것은 통신 단말(2) 또는 통신 단말(4)의 이용자의 ID에 의존할 수 있다. 예를 들면, 대체 비디오 서버(6)는 선택된 광고가 이용자를 위해 적합함을 나타내는 프로파일 정보에 기초하여 광고를 선택한다. 대체 비디오 스트림(VSUB)은 개인 통화 연결음 기능의 비디오에 대한 애플리케이션과 유사한 방식으로, 통신 단말(2) 또는 통신 단말(4)의 이용자에 의해 미리 선택된 비디오를 또한 포함할 수 있다. 대체 비디오 스트림(VSUB)은 사회 네트워크 서비스로부터 이용가능한, 통신 단말(2 또는 4)의 이용자에 관련된 데이터에 기초하여 결정된 비디오를 또한 포함할 수 있다. 예를 들면, 통신 단말(2)의 이용자가 사회 네트워크 서비스 상의 비디오를 공유했으면, 이 비디오는 대체 비디오 스트림(VSUB)에 포함될 수 있다.
도 2는 비디오 송신 디바이스(3)에 의해 수행된, 비디오 스트림을 송신하기 위한 방법의 흐름도이다.
비디오 송신 디바이스(3)는 통신 단말(2)로부터 비디오 스트림(VIN)을 수신하고(단계(S1)), 비디오 스트림(VIN)의 품질 레벨(Q)을 결정한다(단계(S2)). 결정된 품질 레벨(Q)은 임계치(Q0)와 비교된다(단계(S3)).
Q>Q0(또는 Q≥Q0)이면, 비디오 송신 디바이스(3)는 비디오 스트림(VIN)을 출력 비디오 스트림(VOUT)으로서 이용한다(단계(S4)).
반대로, Q<Q0(또는 Q≤Q0)이면, 비디오 송신 디바이스(3)는 품질 기준들을 충족시키는 비디오 스트림(VIN)의 적어도 부분(P)을 결정하고(단계(S5)) 부분(P)을 대체 비디오 스트림(VSUB)과 조합함으로써 비디오 스트림(VOUT)을 구성한다(단계(S6)).
둘 모두의 경우들에서, 비디오 스트림(VOUT)은 통신 단말(4)로 송신된다(단계(S7)).
도 2 상의 단계(S7)로부터 단계(S1)까지 화살표에 의해 도시된 바와 같이, 단계들(S1 내지 S7)은 비디오 스트림을 송신하는 동안 지속적으로 수행된다. 결과적으로, 전체 비디오 스트림의 송신은 VIN의 품질이 Q≥Q0를 만족시키고 있고 VOUT이 VIN과 같은 시간 기간들 및 VIN의 품질이 Q<Q0를 만족시키지 않고 있고 VOUT이 VIN의 부분의 대체 비디오 스트림(VSUB)과의 조합의 결과인 다른 시간 간격들로 구성될 수 있다.
소스 비디오 스트림(VS)이 (프레임의 완전한 영역의 데이터를 포함하는) I-슬라이스들 및 (이전 프레임에 대한 프레임의 영역의 변화들에 따른 데이터를 포함하는) P-슬라이스들에 기초하여 인코딩될 때, 비디오 스트림(VIN)의 부분(P)을 결정하기 위해 이용된 품질 기준들은 다음과 같을 수 있다: 프레임의 영역은 하나의 시간(T)에 있는 경우, 품질 기준들을 충족시키는 부분(P)으로서 선택되고, 이 영역에 관한 P-슬라이스들은 2개의 완전한 이미지들(I-SLICE) 사이의 구성가능하고 시간 간격보다 낮은 복수의 밀리초들 이래로 정기적으로 수신되었다. P-슬라이스들이 몇몇 영역들에 대해 수신된 경우에, 가장 큰 영역이 선택될 수 있다. 물론, 다른 품질 기준들이 이용될 수 있다.
도 3은 비디오 스트림(VIN)의 부분을 대체 비디오 스트림(VSUB)과 조합함으로써 비디오 스트림(VOUT)을 구성하는 제 1 예를 도시한다. 도 3은 2개의 영역들(R1 및 R2)이 품질 기준들을 충족시키는 비디오 스트림(VIN)의 프레임(F1)을 보여준다. 가장 큰 영역(이 예에서 R1)은 비디오 스트림(VOUT)에 포함되도록 부분(P)으로서 선택된다. 도 3은 최소 관심 있는 영역(A)을 포함하는 대체 비디오 스트림(VSUB)의 프레임(F2)을 보여준다. 영역(A)은 예를 들면, 대체 비디오 스트림(VSUB)에 포함된 메타데이터에 의해 규정될 수 있다. 또 다른 예에서, 영역(A)은 예를 들면, 비디오 스트림(VIN)의 움직임 벡터들에 기초하여 비디오 송신 디바이스(3)에 의해 대체 비디오 스트림(VSUB)을 분석함으로써 결정될 수 있다. 마지막으로, 도 3은 영역(A)의 위치에서, 프레임(F1)의 부분(P)을 프레임(F2) 상에 중첩시킴으로써 구성된 비디오 스트림(VOUT)의 프레임(F3)을 보여준다. 영역(A) 및 부분(P)이 같은 크기를 갖지 않은 경우에, 이것은 부분(P)의 크기의 증가 또는 감소를 수반할 수 있다.
이 조합은 연속적인 프레임들에 대해 반복된다. 부분(P)은 각각의 프레임에 대해 개별적으로 결정될 수 있다. 따라서, 비디오 스트림(VOUT)에 포함된 비디오 스트림(VIN)의 부분(P)은 시간에 따라 달라질 수 있다. 예를 들면, P-슬라이스들이 영역(R2)에 대한 것이 아니라 영역(R1)에 대해 수신되도록 멈추면, 영역(R2)은 부분(P)으로서 영역(R1) 대신에 선택될 수 있고 비디오 스트림(VOUT)에 포함될 수 있다.
도 4는 비디오 스트림(VIN)의 부분을 대체 비디오 스트림(VSUB)과 조합함으로써 비디오 스트림(VOUT)을 구성하는 제 2 예를 도시한다. 도 4는 비디오 스트림(VOUT)에 포함되도록 선택된 부분(P)을 갖는 비디오 스트림(VIN)의 프레임(F4)을 도시한다. 도 4는 대체 비디오 스트림(VSUB)의 프레임(F5)을 도시한다. 마지막으로, 도 4는 배경 예를 들면, 배경 블록 상에 프레임(F4)의 부분(P) 및 프레임(F5)을 부가함으로써 구성된 비디오 스트림(VOUT)의 프레임(F6)을 보여준다. 이 예에서, 부분(P) 및 프레임(F5)은 프레임(F6)에서 부분적으로 중첩하지만, 그들은 중첩 없이 인접할 수 있다. 프레임들(F5 및 F6)의 상대적 크기에 의존하여, 프레임(F5)의 크기는 부분(P)을 위해 충분한 공간을 남기는 동안 프레임(F6)에 맞도록 감소될 수 있다.
도 5는 비디오 스트림(VIN)의 부분을 대체 비디오 스트림(VSUB)과 조합함으로써 비디오 스트림(VOUT)을 구성하는 제 3 예를 도시한다. 도 5는 비디오 스트림(VOUT)에 포함되도록 선택된 부분(P)을 갖는 비디오 스트림(VIN)의 프레임(F7)을 도시한다. 이 경우에, 부분(P)은 선택되지 않은 부분(P')을 제외하고 프레임(F7)의 대부분을 커버한다. 도 5는 대체 비디오 스트림(VSUB)의 프레임(F8)을 도시한다. 마지막으로, 도 5는 프레임(F7)의 선택되지 않은 부분(P')을 프레임(F8)으로 대체함으로써 구성된 비디오 스트림(VOUT)의 프레임(F9)을 보여준다. 선택되지 않은 부분(P') 및 프레임(F8)의 상대적 크기에 의존하여, 프레임(F8)의 크기는 선택되지 않은 부분(P')에 따라 맞도록 증가되거나 감소될 수 있다.
도 3 내지 도 5의 예들 각각은 개별적인 프레임들을 참조하여 설명되었다. 비디오 스트림(VOUT)의 연속적인 프레임들이, 비디오 스트림(VIN)의 품질이 저하되는 동안(Q<Q0) 유사한 방식으로 구성됨이 이해되어야 한다.
시스템(1)에서, 품질이 충분할 때(Q>Q0), 비디오 스트림(VIN)은 수정 없이 이용자 단말(4)로 송신된다. 반대로, 품질이 충분하지 않을 때(Q<Q0), 비디오 스트림(VIN)의 단지 부분이 대체 비디오 스트림(VSUB)과 조합하여, 통신 단말(4)로 송신된다. 선택된 부분이 품질 기준들을 충족시키기 때문에, 품질 저하는 통신 단말(4)의 이용자에게 (적어도 부분적으로) 숨겨질 수 있다. 게다가, 대체 비디오 스트림이 이용자에 제공되기 때문에, 이용자의 주의가 원래 비디오에 대한 감소된 크기의 부분(P)으로부터 다른 곳으로 돌려질 수 있다. 결과적으로, 통신 단말(4)의 이용자는 심지어 품질이 저하될 때 유동적으로 만족하는 뷰잉 경험을 즐길 수 있다.
지금까지, 통신 단말(2)로부터 통신 단말(4)로의 비디오 스트림의 송신이 설명되었다. 통신 단말들(2 및 4) 둘 모두가 비디오 스트림을 송신하고 수신할 수 있는 예를 들면, 양방향(2-ways) 비디오 대화를 위한 이용자 단말이고, 비디오 송신 디바이스(3)는 통신 단말(2)로 송신될 비디오 스트림을 결정하기 위해 통신 단말(4)로부터 수신된 비디오 스트림에 상기 설명된 것과 같은 방법을 적용할 수 있다.
도 1의 시스템(1)은 2개의 통신 단말들 사이의 통신을 참조하여 설명되었다. 그러나, 본 발명의 실시예들은 도 6에 도시된 바와 같이, 복수의(즉, 2개보다 많은) 통신 단말들 사이의 통신에 또한 적용된다. 도 6에서, 도 1에서와 같은 참조 부호들은 같거나 유사한 구성요소들을 지정한다.
도 6의 시스템(1)은 비디오 송신 디바이스(3)를 통하여 네트워크(5)를 통해 접속된, 복수의 통신 단말들(2a, 2b, 2c, 2d)을 포함한다.
각각의 통신 단말(2a, 2b, 2c, 2d)은 각각의 소스 비디오 스트림(VSa, VSb, VSc, VSd)을 비디오 송신 디바이스(3)로 전송한다. 예를 들면, 네트워크(5)에서의 패킷 손실 및 지연들로 인해, 비디오 송신 디바이스(3)에 의해 수신된 비디오 스트림들(VINa, VINb, VINc, VINd)은 소스 비디오 스트림(VSa, VSb, VSc, VSd)과 상이할 수 있고 즉, 품질은 저하될 수 있다.
비디오 송신 디바이스(3)는 비디오 회의 서버의 역할을 하고 비디오 스트림(VOUT _M)을 각각의 통신 단말(2a, 2b, 2c, 2d)로 송신한다.
하나의 실시예에서, 비디오 스트림(VOUT_M)은 예를 들면, 어떤 참석자가 가장 크게 말하는지에 기초하여 비디오 스트림들(VINa, VINb, VINc, VINd) 중 하나를 선택함으로써, 및 선택된 스트림에 도 2의 방법을 적용함으로써 결정된다.
도 6의 실시예에서, 비디오 송신 디바이스(3)는 같은 비디오 스트림(VOUT_M)을 각각의 통신 단말(2a, 2b, 2c, 2d)로 송신한다. 그러나, 또 다른 실시예에서, 상이한 비디오 스트림들은 각각의 통신 단말(2a, 2b, 2c, 2d)로 송신될 수 있다.
도 7 상에 도시되는 또 다른 실시예에서, 비디오 스트림(VOUT_M)은 비디오 스트림들(VINa, VINb, VINc, VINd) 중 적어도 하나에 도 2의 방법을 적용함으로써, 및 그 다음 결과적인 비디오 스트림들의 모자이크를 구성함으로써 결정된다. 바람직하게, 도 2의 방법은 비디오 스트림들(VINa, VINb, VINc, VINd) 중 각각의 하나에 동시에 적용된다. 따라서, 도 7의 예에서, 비디오 스트림들(VINa, VINc 및 VINd)의 품질 레벨이 충분히 판정된 반면에, 비디오 스트림(VINb)의 품질 레벨은 불충분하게 판정되었다. 결과적으로, 비디오 스트림(VOUT_M)의 모자이크는 비디오 스트림들(VINa, VINc 및 VINd) 각각의 전체 프레임들, 및 대체 비디오 스트림의 프레임과 조합된 비디오 스트림(VINb)의 프레임의 부분을 포함한다. 이 조합은 예를 들면, 도 3 내지 도 5 중 하나를 참조하여 상기 설명된 바와 같이 수행될 수 있다.
방법의 실시예들은 전용 하드웨어 및/또는 소프트웨어 또는 둘 모두의 임의의 조합에 의해 수행될 수 있다.
본 발명의 원리들이 특정 장치와 관련하여 상기 설명되었을지라도, 이 설명이 단지 예로서 행해지고 첨부된 청구항들에 정의된 바와 같이, 본 발명의 범위에 대해 제한하는 것으로서 행해지지 않음이 명백하게 이해되어야 한다.
1: 시스템 2, 4: 통신 단말
3: 비디오 송신 디바이스 5: 네트워크
6: 대체 비디오 서버 7: 비디오 품질 평가 디바이스

Claims (12)

  1. 비디오 송신 디바이스에 의해 수행되는, 네트워크에서 비디오 스트림을 송신하기 위한 방법에 있어서:
    - 소스 통신 단말로부터 제 1 비디오 스트림을 수신하는 단계,
    - 상기 제 1 비디오 스트림의 품질 레벨을 결정하는 단계, 및
    - 상기 제 1 비디오 스트림에 기초하여 제 2 비디오 스트림을 목적지 통신 단말로 송신하는 단계를 포함하고,
    - 상기 품질 레벨이 미리 결정된 임계치를 초과하면, 상기 제 2 비디오 스트림의 프레임은 상기 제 1 비디오 스트림의 프레임을 포함하고,
    - 상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 상기 방법은 품질 기준들을 충족시키는 상기 제 1 비디오 스트림의 프레임의 부분을 결정하는 단계; 및 상기 부분을 제 3 비디오 스트림의 프레임과 조합함으로써 상기 제 2 비디오 스트림의 프레임을 구성하는 단계를 포함하는, 비디오 스트림을 송신하기 위한 방법.
  2. 제 1 항에 있어서,
    상기 제 1 비디오 스트림은 프레임의 완전한 영역의 데이터를 포함하는 제 1 이미지 데이터 및 이전 프레임에 대한 프레임의 영역의 변화들에 따른 데이터를 포함하는 제 2 이미지 데이터를 포함하고, 상기 품질 기준들은, 제 2 이미지 데이터가 미리 결정된 지속기간 동안 프레임의 하나 이상의 영역들에 대해 수신되었으면 프레임의 상기 하나 이상의 영역들에 의해 충족되는, 비디오 스트림을 송신하기 위한 방법.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 상기 제 2 비디오 스트림의 상기 프레임은 상기 제 3 비디오 스트림의 메타데이터에 의해 규정된 위치에서 상기 부분을 포함하는, 비디오 스트림을 송신하기 위한 방법.
  4. 제 1 항 또는 제 2 항에 있어서,
    상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 상기 제 2 비디오 스트림의 상기 프레임은 상기 제 3 비디오 스트림의 분석에 의해 결정된 위치에서 상기 부분을 포함하는, 비디오 스트림을 송신하기 위한 방법.
  5. 제 1 항 또는 제 2 항에 있어서,
    상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 상기 제 2 비디오 스트림의 상기 프레임은 미리 결정된 위치에서 상기 부분을 포함하는, 비디오 스트림을 송신하기 위한 방법.
  6. 제 1 항 또는 제 2 항에 있어서,
    상기 제 3 비디오 스트림은 상기 소스 통신 단말의 또는 상기 목적지 통신 단말의 식별자의 기능으로 결정되는, 비디오 스트림을 송신하기 위한 방법.
  7. 제 6 항에 있어서,
    상기 제 3 비디오 스트림은 사회 네트워크 서비스로부터 이용가능한 상기 식별자에 관련된 데이터의 기능으로 결정되는, 비디오 스트림을 송신하기 위한 방법.
  8. 제 1 항 또는 제 2 항에 있어서,
    품질 기준들을 충족시키는 상기 제 1 비디오 스트림의 프레임의 부분을 결정하는 단계는 상기 제 1 비디오 스트림의 연속적인 프레임들에 대해 반복되는, 비디오 스트림을 송신하기 위한 방법.
  9. 비디오 송신 디바이스에 의해 수행되는, 네트워크에서 비디오 스트림을 송신하기 위한 방법에 있어서:
    - 각각의 통신 단말들로부터 복수의 제 1 비디오 스트림들을 수신하는 단계,
    - 상기 제 1 비디오 스트림들 중 적어도 하나에 대한 품질 레벨을 결정하는 단계, 및
    - 상기 제 1 비디오 스트림들에 기초하여 제 2 비디오 스트림을 상기 통신 단말들로 송신하는 단계를 포함하고,
    - 상기 품질 레벨이 미리 결정된 임계치를 초과하면, 상기 제 2 비디오 스트림의 프레임은 상기 제 1 비디오 스트림들 중 상기 적어도 하나의 프레임을 포함하고,
    - 상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 상기 방법은 품질 기준들을 충족시키는 상기 적어도 하나의 제 1 비디오 스트림의 프레임의 부분을 결정하는 단계; 및 상기 부분을 제 3 비디오 스트림의 프레임과 조합함으로써 상기 제 2 비디오 스트림의 프레임을 구성하는 단계를 포함하는, 비디오 스트림을 송신하기 위한 방법.
  10. 제 9 항에 있어서,
    상기 제 2 비디오 스트림은 상기 제 1 비디오 스트림들에 기초한 모자이크(mosaic)인, 비디오 스트림을 송신하기 위한 방법.
  11. 컴퓨터에 의해 실행될 때, 제 1 항 또는 제 2 항에 따른 방법을 실행하기 위한 지시들을 포함하는 컴퓨터 프로그램이 기록된, 컴퓨터 판독가능한 기록 매체.
  12. 비디오 송신 디바이스에 있어서:
    - 소스 통신 단말로부터 제 1 비디오 스트림을 수신하기 위한 수단,
    - 상기 제 1 비디오 스트림의 품질 레벨을 결정하기 위한 수단,
    - 상기 제 1 비디오 스트림에 기초하여 제 2 비디오 스트림을 목적지 통신 단말로 송신하기 위한 수단, 및
    - 상기 품질 레벨이 미리 결정된 임계치 미만이면 활성화된, 품질 기준들을 충족시키는 상기 제 1 비디오 스트림의 프레임의 부분을 결정하기 위한 수단을 포함하고,
    - 상기 품질 레벨이 미리 결정된 임계치를 초과하면, 상기 제 2 비디오 스트림의 프레임은 상기 제 1 비디오 스트림의 프레임을 포함하고,
    - 상기 품질 레벨이 상기 미리 결정된 임계치 미만이면, 상기 제 2 비디오 스트림의 프레임은 상기 부분 및 제 3 비디오 스트림의 프레임을 포함하는, 비디오 송신 디바이스.
KR1020157016382A 2012-11-20 2013-11-18 비디오 스트림을 송신하기 위한 방법 KR101726586B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP12306443.8 2012-11-20
EP12306443.8A EP2733903B1 (en) 2012-11-20 2012-11-20 Method for transmitting a video stream
PCT/EP2013/074023 WO2014079793A1 (en) 2012-11-20 2013-11-18 Method for transmitting a video stream

Publications (2)

Publication Number Publication Date
KR20150090139A KR20150090139A (ko) 2015-08-05
KR101726586B1 true KR101726586B1 (ko) 2017-04-13

Family

ID=47326019

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157016382A KR101726586B1 (ko) 2012-11-20 2013-11-18 비디오 스트림을 송신하기 위한 방법

Country Status (6)

Country Link
US (1) US9380098B2 (ko)
EP (1) EP2733903B1 (ko)
JP (1) JP6076494B2 (ko)
KR (1) KR101726586B1 (ko)
CN (1) CN104813633B (ko)
WO (1) WO2014079793A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6558071B2 (ja) * 2015-05-20 2019-08-14 富士通コネクテッドテクノロジーズ株式会社 無線通信装置、無線通信プログラム、及び無線通信方法
US11184648B2 (en) * 2019-08-30 2021-11-23 Rovi Guides, Inc. Systems and methods for providing content during reduced streaming quality
US11501752B2 (en) * 2021-01-20 2022-11-15 International Business Machines Corporation Enhanced reproduction of speech on a computing system
US11716531B2 (en) 2021-03-22 2023-08-01 International Business Machines Corporation Quality of multimedia
US11533427B2 (en) 2021-03-22 2022-12-20 International Business Machines Corporation Multimedia quality evaluation
US11483472B2 (en) * 2021-03-22 2022-10-25 International Business Machines Corporation Enhancing quality of multimedia

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008054926A1 (en) 2006-10-31 2008-05-08 Microsoft Corporation Dynamic modification of video properties

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2274181C (en) * 1996-12-10 2009-10-20 British Telecommunications Public Limited Company Digital video coding generating frames representing multiple playback modes
US6014694A (en) * 1997-06-26 2000-01-11 Citrix Systems, Inc. System for adaptive video/audio transport over a network
JP2003189310A (ja) * 2001-12-19 2003-07-04 Nef:Kk 画像符号化装置
US20040116183A1 (en) * 2002-12-16 2004-06-17 Prindle Joseph Charles Digital advertisement insertion system and method for video games
JP3913726B2 (ja) * 2003-10-30 2007-05-09 株式会社リコー 多地点テレビ会議制御装置及び多地点テレビ会議システム
JP2005244384A (ja) * 2004-02-25 2005-09-08 Nippon Telegr & Teleph Corp <Ntt> 受信品質通知方法、受信品質通知装置及び受信品質通知プログラム
JP3936708B2 (ja) * 2004-05-26 2007-06-27 日本電信電話株式会社 画像通信システム,通信会議システム,階層符号化装置,サーバ装置,画像通信方法,画像通信プログラムおよび画像通信プログラム記録媒体
FR2902266B1 (fr) 2006-06-13 2008-10-24 Canon Kk Procede et dispositif de repartition de la bande passante de communication
JP5455648B2 (ja) * 2007-01-09 2014-03-26 ヴィドヨ,インコーポレーテッド ビデオ通信システムに於けるエラー耐性の向上したシステム及びその方法
US9414110B2 (en) * 2007-10-15 2016-08-09 Thomson Licensing Preamble for a digital television system
FR2943879A1 (fr) * 2009-03-30 2010-10-01 Univ Nantes Procede et dispositif d'evaluation de la qualite visuelle d'une image ou d'une sequence d'images, mettant en oeuvre des indicateurs objectifs, et programme d'ordinateur correspondant.
JP5146491B2 (ja) * 2010-06-08 2013-02-20 パナソニック株式会社 移動端末およびサーバー

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008054926A1 (en) 2006-10-31 2008-05-08 Microsoft Corporation Dynamic modification of video properties

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"ORBit: an adaptive data shaping technique for robust wireless video clip communication" COnference Record of The 37th. ASILOMAR Conference on SIGNALS, Systems, & Computers November 2003

Also Published As

Publication number Publication date
US9380098B2 (en) 2016-06-28
CN104813633B (zh) 2018-04-10
KR20150090139A (ko) 2015-08-05
EP2733903B1 (en) 2017-02-15
JP2016504812A (ja) 2016-02-12
WO2014079793A1 (en) 2014-05-30
JP6076494B2 (ja) 2017-02-08
EP2733903A1 (en) 2014-05-21
CN104813633A (zh) 2015-07-29
US20150334156A1 (en) 2015-11-19

Similar Documents

Publication Publication Date Title
KR101726586B1 (ko) 비디오 스트림을 송신하기 위한 방법
Zhao et al. QoE in video transmission: A user experience-driven strategy
US9832369B2 (en) Interactive video conferencing
US10798386B2 (en) Video compression with generative models
US20220279254A1 (en) Facilitating Video Streaming and Processing By Edge Computing
CN105794204B (zh) 交互式视频会议
US7953283B2 (en) Portable terminal
CN108134915B (zh) 用于混合式拓扑媒体会议系统的方法和系统
WO2021074005A1 (en) Immersive viewport dependent multiparty video communication
EP3127285B1 (en) Method and systems for optimizing bandwidth utilization in a multi-participant full mesh peer-to-peer video session
CN107113397A (zh) 交互式视频会议
CN104685886A (zh) 用于视频处理的装置及其方法
CN107241564A (zh) 基于ims网络架构的多流视频会议方法、装置及系统
CN109803056A (zh) 一种视频彩铃播放的方法、装置及系统
Song et al. Understanding user experience of mobile video: framework, measurement, and optimization
Bakar et al. Motion-based rate adaptation in WebRTC videoconferencing using scalable video coding
US20220329883A1 (en) Combining Video Streams in Composite Video Stream with Metadata
CN112040234B (zh) 视频编码、解码方法和装置、电子设备及存储介质
CN114500914A (zh) 音视频转发方法、装置、终端与系统
US20220407899A1 (en) Real-time augmented reality communication session
US20240155072A1 (en) Three-dimensional visual communication sessions
EP4375947A1 (en) Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method
EP4383735A1 (en) Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method
US20230247069A1 (en) Systems and Methods for Adaptive Video Conferencing
Jiménez Herranz Design of an architecture and communication protocol for video transmission and videoconference

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant