KR101718186B1 - 로컬 미디어 렌더링 - Google Patents
로컬 미디어 렌더링 Download PDFInfo
- Publication number
- KR101718186B1 KR101718186B1 KR1020137019941A KR20137019941A KR101718186B1 KR 101718186 B1 KR101718186 B1 KR 101718186B1 KR 1020137019941 A KR1020137019941 A KR 1020137019941A KR 20137019941 A KR20137019941 A KR 20137019941A KR 101718186 B1 KR101718186 B1 KR 101718186B1
- Authority
- KR
- South Korea
- Prior art keywords
- media
- user equipment
- media stream
- client user
- client
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/765—Media network packet handling intermediate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/14—Charging, metering or billing arrangements for data wireline or wireless communications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1881—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast with schedule organisation, e.g. priority, sequence management
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
- H04L47/2408—Traffic characterised by specific attributes, e.g. priority or QoS for supporting different services, e.g. a differentiated services [DiffServ] type of service
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
- H04L65/4038—Arrangements for multi-party communication, e.g. for conferences with floor control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/52—Network services specially adapted for the location of the user terminal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/24—Negotiation of communication capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
- H04M3/568—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/18—Comparators
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
본 발명은, 바람직하게는 클라이언트 사용자 장비(1)에 의해 수행되는 다중-파티 호출의 로컬 미디어 렌더링을 포함한다. 미디어는, 호출 내의 각각의 파티에 의해 인코딩되고, 미디어 스트림으로서 미디어 서버(2)에 송신되는데, 미디어 서버는 클라이언트 사용자 장비로부터 미디어 스트림을 위한 요청을 수신하고, 요청 내의 각각의 미디어 스트림은 클라이언트 우선권과 연관된다. 미디어 서버는, 요청에 기반해서 각각의 클라이언트 사용자 장비에 송신되어, 다수의 스트림이, 예를 들어 이용 가능한 대역폭에 기반해서 결정된 최대 수를 초과하지 않도록 한다.
Description
본 발명은, 로컬 렌더링을 위해서 미디어 스트림을 클라이언트 사용자 장비에 전달하는 미디어 서버를 위한 방법과, 로컬 렌더링을 위해서 미디어 서버로부터 미디어 스트림을 수신하는 클라이언트 사용자 장비를 위한 방법에 관한 것이다. 또한, 본 발명은 미디어 서버 및 클라이언트 사용자 장비에 관한 것이다.
통상적으로, 다중-파티 호출의 기술적인 실행, 예를 들어 보이스 컨퍼런스(voice conference)는, 전형적으로 컨퍼런스의 참가자로부터 기원하는 미디어 스트림을, 참가하는 클라이언트마다 전달되는 미디어 타입당 하나의 미디어 스트림만으로 혼합하기 위한 중앙 혼합 장치(central mixing device)를 포함하여 구성된다. 보이스 컨퍼런스에 대해서, 이는 하나의 모노 미디어 스트림 또는 하나의 인공 스테레오 미디어 스트림에 대응한다. 하나의 미디어 스트림만을 각각의 참가자에 전달하기 위한 하나의 이유는, 제한된 액세스 대역폭이었다.
그런데, 예를 들어 VDSL2(Very high speed Digital Subscriber Line 2)와 같은 최근의 기술에 있어서는, 더 큰 액세스 대역폭이 이용 가능한데, 이는, 예를 들어 보이스 컨퍼런스와 같은 낮거나 알맞은 대역폭 요구조건을 갖는 애플리케이션에서, 적어도 대역폭 제한을 제거한다.
다중-파티 호출에 있어서, 트루 스테레오 또는 3D(3차원) 위치의 오디오를 각각의 참가자에 제공하기 위해서, 독특한 미디어 스트림은, 클라이언트의 배향 및 위치와 호출 내의 그 밖의 참가자의 위치 및 배향에 기반해서, 각각의 클라이언트에 대해서 렌더링해야 한다. 따라서, 중앙 렌더링 프레임워크는, 각각의 참가자의 위치 및 배향에 관한 정보를 필요로 하고, 각각의 클라이언트에 대해서 하나의 렌더링 엔진을 실행해야 한다. 더욱이, 이들 렌더링 엔진은 각각의 참가자에 대해서 위치 및 배향이 일정하게 갱신되어야 한다. 이는, 특히 가상 세계의 게임과 같은, 대규모의 더 다이내믹한 컨퍼런스 호출에서 도전이 되고 있다. 다중-파티 호출에 대규모의 참가자가 참여하는 이러한 진보된 오디오 혼합 시나리오에 있어서는, 중앙 보이스 혼합이 미디어 렌더링을 위한 복잡한 시스템 아키텍처를 이끌게 되어, 중앙 보이스 혼합 장치에서 대규모의 처리 능력을 요구하게 된다.
통상적인 중앙 렌더링에 있어서, 미디어 서버, 전형적으로 혼합기(mixer)를 포함하여 구성되는 컨퍼런스 브리지(conference bridge)는, 오디오 처리, 3D 위치의 오디오의 렌더링만 아니라 각각의 클라이언트를 위해 생성된 3D 위치의 오디오 신호의 인코딩을 포함하는, 기본적으로 모든 것을 핸들링한다. 각각의 참가자에 속하는 클라이언트 사용자 장비는, 각각의 인코딩된 신호만을 디코딩하고, 가능하게는 사용자에 대해서 GUI(Graphical User Interface)를 제공한다. 각각의 참가하는 클라이언트 사용자 장비에 대해서, 컨퍼런스 브리지는 3D 위치의 오디오 신호를 생성하는데, 이는 모든 참가자로부터 들어오는 보이스 신호의 3D 위치의 오디오 렌더링을 요구한다. 독특한 3D 위치의 오디오 신호가 각각의 참가자에 대해서 생성되므로, 인코딩하기 위한 출력 신호의 수가 참가자의 수에 대응하게 된다.
더욱이, 통상적인 중앙 렌더링에 있어서, 높은 인터액티브(interactive) 애플리케이션의 위치 정보의 래턴시(latency)는, 신뢰할 수 있는 보이스 렌더링을 불가능하게 하고, 따라서 사용자 경험을 악화시킨다.
로컬 렌더링에 있어서, 이와 반대로, 중앙 미디어 서버의 주요 임무는, 예를 들어 모든 참가자로부터 또는 대안적으로 소수의 활동적으로 말하는 참가자로부터의 미디어 스트림과 같은 로컬 렌더링을 위한 어느 클라이언트 사용자 장비에 다시 안내해야 하는 다중-파티 호출의 어느 미디어 스트림을 결정하는 것이다. 미디어 서버로부터 선택된 미디어 스트림을 수신함에 따라, 각각의 참가자의 클라이언트 사용자 장비는 로컬 미디어 렌더링을 수행하게 된다. 트랜스코딩(transcoding)이 미디어 서버에서 필요하지 않으면, 예를 들어 모든 클라이언트 사용자 장비가 모든 다른 클라이언트 사용자 장비의 코덱(codec)을 지원하면, 미디어 서버는 들어오는 미디어 스트림을 다시 안내해야 하고, 소정의 인코딩 또는 오디오 렌더링은 수행하지 않는다.
WO2009/092060호는 클라이언트에서 미디어를 국지적으로 렌더링하기 위한 시스템을 개시한다. 3D 위치의 오디오의 로컬 렌더링은, 중앙 장치, 예를 들어 미디어 서버에서의 낮은 처리 능력을 요구하고, 위치 정보의 래턴시를 감소시킨다. WO2009/092060호에 개시된 시스템에 있어서, 각각의 미디어 스트림은 미디어 데이터(예를 들어, 보이스) 및 위치 정보(예를 들어, 미디어 컴포넌트의 위치 및 에너지)를 포함한다. 더욱이, WO2009/092060호는, 모든 참가자의 위치 정보 및 미디어 스트림만 아니라 참가자와 관련된 로컬 정보를 액세스하는, 참가자의 "필터 컴포넌트"(예를 들어, 도 1의 111을 보자)를 개시한다. 그런데, 이 시스템의 실행은 비교적 복잡하다.
본 실시형태의 목적은, 상기된 개요의 적어도 몇몇 이슈를 해소하는 것이고, 이 목적 및 그 밖의 목적이 첨부된 독립청구항에 따른 방법 및 장치에 의해, 그리고 종속항에 따른 실시형태에 의해 달성되는 것이다.
제1측면에 따르면, 로컬 오디오 또는 비디오 미디어 렌더링을 위해, 다중-파티 호출로부터 수신된 미디어 스트림을 참가하는 클라이언트 사용자 장비에 전달하는 통신 네트워크의 미디어 서버를 위한 방법이 제공된다. 본 방법은, 클라이언트 사용자 장비와의 네고시에이션에 기반해서, 동시에 전달되는 최대 수의 미디어 스트림을 결정하는 미디어 서버를 포함하여 구성된다. 더욱이, 미디어 서버는, 클라이언트 사용자 장비로부터, 각각의 미디어 스트림에 대한 클라이언트 우선권을 가리키는, 미디어 스트림에 대한 갱신된 요청을 정기적으로 수신하게 된다. 미디어 서버는, 요청된 미디어 스트림의 클라이언트 우선권에 기반하고, 선택된 미디어 스트림의 수가 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반해서, 요청으로부터 미디어 스트림을 선택하게 되고, 다중-파티 호출의 로컬 렌더링을 위해, 선택된 미디어 스트림을 클라이언트 사용자 장비에 송신하게 된다.
제2측면에 따르면, 다중-파티 호출의 오디오 또는 비디오 미디어의 로컬 렌더링을 위해서 미디어 서버로부터 미디어 스트림을 수신하는 통신 네트워크의 클라이언트 사용자 장비를 위한 방법이 제공된다. 본 발명은, 각각의 미디어 스트림에 대한 클라이언트 우선권을 가리키는, 미디어 스트림을 위한 갱신된 요청을 미디어 서버로, 정기적으로 송신하는 클라이언트 사용자 장비를 포함하여 구성된다. 더욱이, 클라이언트 사용자 장비는, 요청된 미디어 스트림의 클라이언트 우선권에 기반하고, 미디어 스트림의 수가 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반해서, 미디어 서버에 의해 선택된 미디어 스트림을 미디어 서버로부터 수신하게 된다.
제3측면에 따르면, 통신 시스템에 접속 가능하고, 로컬 오디오 또는 비디오 미디어 렌더링을 위해 다중-파티 호출로부터 수신된 미디어 스트림을 참가하는 클라이언트 사용자 장비에 전달하도록 구성된 미디어 서버가 제공된다. 본 미디어 서버는, 클라이언트 사용자 장비와의 네고시에이션에 기반해서, 동시에 전달되는 최대 수의 미디어 스트림을 결정하기 위한 결정 유닛과; 클라이언트 사용자 장비로부터, 각각의 요청된 미디어 스트림에 대한 클라이언트 우선권을 가리키는, 미디어 스트림에 대한 갱신된 요청을 정기적으로 수신하기 위한 수신 유닛을 포함하여 구성된다. 더욱이, 미디어 서버는, 요청된 미디어 스트림의 클라이언트 우선권에 기반하고, 선택된 미디어 스트림의 수가 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반해서, 수신된 요청으로부터 미디어 스트림을 선택하기 위한 선택 유닛을 포함하여 구성된다. 미디어 서버는, 또한 다중-파티 호출의 로컬 렌더링을 위해, 선택된 미디어 스트림을 클라이언트 사용자 장비에 송신하기 위한 송신 유닛을 포함하여 구성된다.
제4측면에 다르면, 통신 네트워크에 접속 가능하고, 다중-파티 호출의 오디오 또는 비디오 미디어의 로컬 렌더링을 위해서 미디어 서버로부터 미디어 스트림을 수신하도록 구성된 클라이언트 사용자 장비가 제공된다. 클라이언트 사용자 장비는, 각각의 미디어 스트림에 대한 클라이언트 우선권을 가리키는, 미디어 스트림에 대한 요청을 생성하기 위한 요청 유닛과; 갱신된 요청을 미디어 서버로 정기적으로 송신하는 송신 유닛을 포함하여 구성된다. 더욱이, 클라이언트 사용자 장비는, 요청된 미디어 스트림의 클라이언트 우선권에 기반하고, 다수의 수신된 미디어 스트림이 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반해서, 미디어 서버에 의해 선택된 미디어 스트림을, 미디어 서버로부터 수신하기 위한 제1수신 유닛을 포함하여 구성된다.
예시적인 실시형태의 장점은, 고비용의 중앙 리소스 대신 저비용 및 사용하지 않은 클라이언트 리소스를 사용함으로써, 그리고 다른 정보로부터 분리해서 미디어 스트림을 전송함으로써, 대규모의 더 다이내믹한 컨퍼런스의 비교적 복잡하지 않은 로컬 렌더링을 제공한다.
이하의 첨부 도면을 참조해서, 본 발명의 예시적인 실시형태가 더 상세히 설명되는데:
도 1은 로컬 미디어 렌더링을 위한 예시적인 아키텍처를 개략적으로 도시한 도면;
도 2는 미디어 서버를 위한 예시적인 방법을 개략적으로 도시한 흐름도;
도 3은 예시적인 클라이언트 사용자 장비를 위한 방법을 개략적으로 도시하는 흐름도;
도 4 및 도 5는 예시적인 미디어 서버를 개략적으로 도시한 도면,
도 6 및 도 7은 예시적인 클라이언트 사용자 장비를 개략적으로 도시한 도면이다.
도 1은 로컬 미디어 렌더링을 위한 예시적인 아키텍처를 개략적으로 도시한 도면;
도 2는 미디어 서버를 위한 예시적인 방법을 개략적으로 도시한 흐름도;
도 3은 예시적인 클라이언트 사용자 장비를 위한 방법을 개략적으로 도시하는 흐름도;
도 4 및 도 5는 예시적인 미디어 서버를 개략적으로 도시한 도면,
도 6 및 도 7은 예시적인 클라이언트 사용자 장비를 개략적으로 도시한 도면이다.
이하의 상세한 설명에 있어서, 본 발명은 소정 실시형태 및 첨부 도면을 참조로 더 상세히 설명한다. 제한이 아닌 설명의 목적을 위해서, 본 발명의 완전한 이해를 제공하기 위해서, 특정 시나리오, 기술 등과 같은 특정한 세부 사항이 상세히 설명된다. 그런데, 당업자에 있어서는, 본 발명이 이들 특정한 세부 사항으로부터 출발하는 다른 실시형태로 실행될 수 있는 것은 명백하다.
더욱이, 본 기술 분야의 당업자는, 본 명세서에서 설명된 기능 및 수단이, 프로그램된 마이크로프로세서 또는 일반 목적 컴퓨터와 관련된 소프트웨어 기능을 사용해서 및/또는 ASIC(application specific integrated circuit)을 사용해서, 실행될 수 있는 것으로 이해한다. 또한, 본 발명은, 방법 및 장치 형태로 1차적으로 개시되는 한편, 본 발명은 컴퓨터 프로그램 프로덕트만 아니라 컴퓨터 프로세서 및 이 프로세서에 결합된 메모리에 내장될 수 있는 것으로 이해되어야 하고, 여기서 메모리는 본 명세서에 개시된 기능을 수행할 수 있는 하나 이상의 프로그램으로 인코딩된다.
이하 개시된 예시적인 실시형태에 따른 개념은, 미디어 스트림으로부터 분리해서 송신되는 렌더링 정보와 함께, 다중-파티 호출의 더 다이내믹한 로컬 미디어 렌더링을 제공한다. 예시적인 실시형태를 따르면, 참가하는 클라이언트 사용자 장비는, 데이터 서버 내의 미디어 애플리케이션으로부터 근방에 위치된 다른 참가하는 클라이언트 사용자 장비에 관한, 렌더링 정보, 예를 들어 지리적인 성질을 수신한다. 이에 의해, 미디어 서버는 이 정보를 가질 필요가 없게 된다.
대신, 각각의 참가하는 클라이언트 사용자 장비는, 전형적으로 합리적인 거리 내에 위치된 다른 참가하는 클라이언트 사용자 장비로부터의, 선택된 미디어-스트림을 전달하도록 미디어 서버에 요청한다. 또한, 요청은, 이하 클라이언트 우선권으로 나타내는, 각각의 미디어 스트림에 대한 우선권을 포함하고, 클라이언트 우선권은, 예를 들어 미디어 스트림의 "소스(source)"의 위치에 기반할 수 있고, 각각의 소스는 다른 참가하는 클라이언트 사용자 장비에 대응한다. 미디어 서버는, 예를 들어 요청된 미디어 스트림의 클라이언트 우선권에 기반해서, 각각의 클라이언트 사용자 장비에 대해서, 미디어 스트림을 전달할지를 결정하지만, 이 미디어 스트림은, 미디어 서버에 의해 가중되거나 우선권이 주어질 수 있다. 이 우선권은, 미디어 스트림의 하나 이상의 성질, 예를 들어 신호 강도에 기반하며, 이하 미디어 우선권으로 나타낸다. 더욱이, 미디어 스트림의 수는 클라이언트 사용자 장비에 동시에 송신될 수 있는 최대 수의 미디어 스트림을 초과하지 않아야 하며, 최대 수는 클라이언트 사용자 장비와의 네고시에이션에서, 정상적으로는 세션(session)의 시작에서, 결정된다.
도 1은, 데이터 서버(3)에 의해 제어될 수 있는, 미디어 애플리케이션을 구동하는 다수의 클라이언트 사용자 장비를 포함하여 구성되는, 상기된 로컬 렌더링을 위한 예시적인 아키텍처를 개략적으로 도시한다. 그런데, 하나의 클라이언트 사용자 장비(2)만이 도 1에 도시된다. 클라이언트 사용자 장비(2)에서는, 엔드-사용자에 의해 클라이언트 사용자 장비에 입력된 미디어를 인코딩(21)하는 단계와, 엔드-사용자에 출력하기 위해 미디어를 렌더링(22)하는 단계와, 미디어 서버(1)로부터 미디어 스트림을 요청(23)하는 단계가 더 도시되며, 요청(request)은 신호 S15로, 미디어 서버와 통신한다. 미디어 애플리케이션은, 예를 들어 리얼-타임 보이스 또는 비디오와 같은 미디어를 포함하며, 이 미디어는 미디어 서버(1)에 의해 클라이언트에 서브된다(served). 미디어 애플리케이션 내에 포함된 미디어는, 신호 S16으로, 데이터 서버로부터 수신된 정보를 렌더링함에 따라서, 단계 22에서 클라이언트 사용자 장비 내에서, 국지적으로 렌더링된다. 렌더링 정보는, 이 정보가 3D-렌더링을 위해 요청되므로, 예를 들어 참가하는 클라이언트 사용자 장비의 지리적인 성질을 포함하여 구성될 수 있다.
상기된 바와 같이, 클라이언트 사용자 장비(2) 및 미디어 서버(1)는, 미디어 서버로부터 클라이언트 사용자 장비로 동시에 전달될 수 있는 최대 수의 미디어 스트림을 결정하기 위해서, 세션의 수립에서 네고시에이트(negotiates)한다. 이 최대 수의 미디어 스트림은, 수신된 미디어 스트림을 처리하도록 클라이언트 사용자 장비의, 예를 들어 이용 가능한 대역폭 및/또는 능력에 기반해서 결정된다. 그런데, 결정된 수의 미디어 스트림은, 이것이 미디어 서버에 의해 요청되거나 또는 클라이언트 사용자 장비에 의해 요청되면, 세션 동안 다시-네코시에이트(re-negotiated)될 수 있다.
세션 동안, 클라이언트 사용자 장비는, 요청 단계 23에서, 미디어 스트림과 연관된, 예를 들어 각각의 미디어 스트림의 소스 클라이언트 사용자 장비와 연관된 요청 정보(메타-데이터)에 기반해서, 미디어 서버로부터 수신되길 원하는 미디어 스트림을, 계속해서 결정한다. 메타-데이터(31)는, 신호 S16으로 데이터 서버(3)에 의해 클라이언트 사용자 장비(2)에 제공되지만, 엔드-사용자(도 1에서 도시 생략됨)에 의해 제공될 수도 있다. 따라서, 요청 정보는, 예를 들어 데이터 서버에 의해 제공됨에 따라, 소스 클라이언트 사용자와 연관된 위치 정보와, 엔드-사용자에 의한 수동 입력과, 데이터 서버에 의해 제공된 애플리케이션-특정 정보 및/또는 각각의 참가하는 클라이언트 사용자 장비와 연관되며, 또한 데이터 서버에 의해 제공된 우선권을 포함하여 구성될 수 있다. 미디어 스트림의 소스인 다른 참가하는 클라이언트 사용자 장비 각각과 연관된 메타-데이터에 기반해서, 클라이언트 사용자 장비는 갱신된 요청을, 신호 S15로 미디어 서버로 정기적으로 송신해서, 선택된 미디어 스트림을 수신하게 한다. 미디어 스트림은, 소스, 예를 들어 클라이언트 사용자 장비의 식별(identity)의 리스트로서, 로컬 렌더링을 위해 미디어 스트림을 수신하기 원하는 어느 클라이언트 사용자 장비로부터의, 요청 내에서 가리켜질 수 있다. 더욱이, 이 리스트는, 각각의 미디어 스트림과 연관된 클라이언트 우선권을 포함하여 구성되는데, 이 클라이언트 우선권은, 상기된 요청 정보(메타-데이터)에 기반한, 미디어 스트림의 가중을 가리킨다.
하나의 클라이언트 및 하나의 신호만이 도 1에 도시되지만, 인코딩된 미디어 스트림은, 다중-파티 호출로, 참가하는 클라이언트 사용자 장비 모두로부터, 미디어 서버에 의해, 신호 S14로 수신된다. 클라이언트 사용자 장비로부터의 요청에 기반해서, 미디어 서버(1)는, 미디어 선택 단계(11)에서, 미디어 서버와 클라이언트 사용자 장비 간의 이용 가능한 미디어 스트림 상에서, 어떤 미디어 스트림이 각각의 클라이언트 사용자 장비에 전달되고, 신호 S13으로, 클라이언트 사용자 장비(2)에 송신되는 지를, 계속해서 결정한다. 미디어 서버에 의한 이 결정은, 클라이언트 사용자 장비로부터, 신호 S15로, 수신된 요청 내에서 가리켜진 클라이언트 우선권에 기반하지만, 이는 미디어 가중 단계(12)에서 미디어 서버에 의해 결정된 미디어 우선권에 기반할 수도 있다. 이 미디어 가중은, 미디어 스트림의 하나 이상의 성질, 예를 들어 신호 강도에 기반할 수 있다. 더욱이, 어느 미디어 스트림을 전달할 지의 선택은, 또한 클라이언트 사용자 장비에 동시에 송신될 수 있는 결정된 최대 수의 미디어 스트림에 기반한다.
따라서, 도 1에 있어서, 미디어 스트림 S13 및 S14는 실선으로 도시되는 반면, 정보 신호 S15 및 S16은 점선으로 도시되어, 미디어 스트림이 미디어의 렌더링을 위해 요구는 정보로부터 분리해서 송신되는 것을 강조한다.
예시적인 실시형태를 따르면, 본 미디어 서버는, 각각의 미디어 스트림에 대한 미디어 우선권을, 클라이언트 사용자 장비로부터 수신된 요청 내의 대응하는 클라이언트 우선권에 대해서 추가함으로써 그리고, 가장 높은 전체 우선권을 갖는 미디어 스트림을 선택함으로써, 그리고 미디어 스트림의 수가 미디어 스트림의 결정된 최대 수를 초과하지 않는 범위를 정함으로써, 선택을 실행할 수 있다.
소스 클라이언트 사용자 장비는, 임의의 글로벌 식별자에 의해서 요청에서 식별될 수 있는데, 이 식별자는 클라이언트 사용자 장비에, 예를 들어 RTP(Real-Time Protocol)의 SSRC에 의해 공지되며, 그 요청은 클라이언트 사용자 장비로부터, 적합한 프로토콜, 예를 들어 BFCP(Binary Floor Control Protocol)의 확장을 통해, 미디어 서버와 통신한다.
각각의 클라이언트 사용자 장비 간의 글로벌 식별자의 통신은, 전형적으로 데이터 서버(3)를 통해 수행된다.
도 2는 로컬 렌더링을 위해서 다중-파티 호출로부터 클라이언트 사용자 장비(2)로 미디어 스트림을 전달하는 미디어 서버(1)를 위한 방법의 예시적인 실시형태를 도시하는 흐름도이다. 단계 24에서, 세션의 시작 후, 미디어 서버는, 단계 25에서, 클라이언트 사용자 장비에 대해서 동시에 송신될 수 있는 최대 수의 미디어 스트림을 결정한다. 이 결정은 클라이언트 사용자 장비와의 네고시에이션에서 수행되고, 예를 들어 클라이언트 사용자 장비의 이용 가능한 대역폭 및 능력에 기반할 수 있다.
단계 26에서, 미디어 서버는 클라이언트 사용자 장비로부터의 요청을 수신하는데, 이 요청은 클라이언트 사용자 장비가 미디어 서버로부터 수신하기 원하는 미디어 스트림을 가리킨다. 요청 내의 각각의 미디어 스트림은, 미디어 스트림의 가중을 가리키는 클라이언트 우선권과 연관되어, 더 높은 우선권과 연관된 미디어 스트림이, 더 낮은 우선권과 연관된 미디어 스트림 전에, 클라이언트 사용자 장비에 송신하기 위해 선택되도록 한다. 요청 내에서 가리켜진 클라이언트 우선권은, 예를 들어 소스 클라이언트 사용자 장비의 지리적인 성질, 데이터 서버로부터 수신된 우선권, 애플리케이션-특정 정보 및/또는 엔드-사용자에 의한 선택에 기반할 수 있다.
단계 27에서, 미디어 서버는, 요청으로부터 다수의 스트림을 선택함으로써, 클라이언트 사용자 장비에 송신될 어느 미디어 스트림을 결정한다. 선택은, 요청에서 가리켜진 미디어 스트림의 클라이언트 우선권과, 미디어 스트림의 수가 클라이언트 사용자 장비에 송신될 수 있는 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반한다. 또 다른 실시형태에 따르면, 미디어 서버는, 예를 들어 신호 강도에 기반해서, 미디어 스트림의 가중을 수행하고, 결정 내에 포함되는, 미디어 우선권으로서 각각의 미디어 스트림을 가중과 연관시킨다. 다음에, 단계 28에서, 미디어 서버는 선택된 미디어 스트림을 클라이언트 사용자 장비에 송신한다.
클라이언트 사용자 장비가, 정기적으로 갱신된 요청을 미디어 서버로 송신하므로, 단계 26-28은 세션이 단계 29에서 종료될 때까지 반복된다.
도 3은 로컬 렌더링을 위해서 미디어 서버로부터 미디어 스트림을 수신하는 클라이언트 사용자 장비를 위한 방법의 예시적인 실시형태를 도시한 흐름도이다.
단계 32에서 세션이 시작된 후, 클라이언트 사용자 장비는, 단계 33에서, 예를 들어 이용 가능한 대역폭 및 클라이언트 사용자 장비의 능력에 기반해서, 미디어 서버로부터 동시에 수신할 수 있는 최대 수의 미디어 스트림을 결정하기 위해서 미디어 서버와 네고시에이트한다.
단계 34에서, 클라이언트 사용자 장비는 요청을 미디어 서버로 송신하는데, 이 요청은 클라이언트 사용자 장비가 미디어 서버로부터 수신하기 원하는 미디어 스트림을 가리킨다. 요청 내의 각각의 미디어 스트림은 미디어 스트림의 가중을 가리키는 클라이언트 우선권과 연관되어, 클라이언트 사용자 장비가, 더 낮은 우선권을 갖는 미디어 스트림 전에, 더 높은 우선권을 갖는 미디어 스트림을 수신하는 것을 선호하도록 한다. 요청 내에서 가리켜진 우선권은, 예를 들어 소스 클라이언트 사용자 장비의 지리적인 성질, 데이터 서버로부터 수신된 우선권 및/또는 엔드-사용자에 의한 선택에 기반할 수 있다.
단계 35에 있어서, 클라이언트 사용자 장비는, 요청으로부터 미디어 서버에 의해 선택됨에 따라, 미디어 서버로부터 미디어 스트림을 수신한다. 선택은, 요청에서 가리켜진 미디어 스트림의 클라이언트 우선권에 기반하고, 미디어 스트림의 수가 클라이언트 사용자 장비에 동시에 송신될 수 있는 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반한다. 또 다른 실시형태에 따라서, 미디어 서버는, 미디어 스트림의 가중을, 예를 들어 신호 강도에 기반해서 수행하고, 결정 내에 미디어 우선권으로서 포함한다.
미디어 스트림을 수신함에 따라, 클라이언트 사용자 장비는, 다중-파티 호출의 미디어의 로컬 렌더링을, 예를 들어 소스 클라이언트 사용자 장비의 지리적인 성질과 같은 적합한 렌더링 정보에 기반하여, 데이터 서버(3)로부터의 메타-데이터로서 미디어 스트림으로부터 분리해서 수신됨에 따라, 수행한다.
클라이언트 사용자 장비는, 세션 동안, 갱신된 요청을 미디어 서버로 정기적으로 송신하고, 단계 34-36은 단계 37에서 세션이 종료될 때까지, 반복된다.
도 4는 예시적인 실시형태에 따라서, 미디어 서버(1)를 개략적으로 도시한다. 미디어 서버는, 클라이언트 사용자 장비에 동시에 전달할 수 있는 최대 수의 미디어 스트림을 결정하기 위한 결정 유닛(41)을 포함하여 구성된다. 결정은 클라이언트 사용자 장비와의 네고시에이션에서 수행되고, 예를 들어 클라이언트 사용자 장비의 이용 가능한 대역폭 및/또는 능력에 기반한다.
더욱이, 미디어 서버는 클라이언트 사용자 장비와 통신하기 위해 제공되는데, 통신 유닛은 클라이언트 사용자 장비로부터 요청을 정기적으로 수신하기 위한 수신 유닛(42)을 포함하여 구성되며, 이 요청은, 미디어 스트림의 가중을 가리키는 클라이언트 우선권과 연관된 각각의 미디어 스트림과 함께, 클라이언트 사용자 장비가 수신하기 원하는 미디어 스트림의 지시를 포함하여 구성된다. 또한, 수신 유닛(42)은 참가하는 클라이언트 사용자 장비로부터 인코딩된 미디어 스트림을 수신하도록 구성될 수 있다. 그런데, 미디어 스트림은 요청으로부터 분리해서 수신되므로, 이들은 바람직하게는 개별적인 수신 유닛(도시 생략)에 의해 수신된다.
더욱이, 미디어 서버는, 요청으로부터, 클라이언트 사용자 장비로 송신하기 위해서, 미디어 스트림을 선택하기 위한 선택 유닛(43)을 포함하여 구성되는데, 이 선택은 요청 내에서 가리켜진 클라이언트 우선권에 기반하고, 또한 송신된 미디어 스트림의 수가 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것을 고려한다. 상기된 통신 유닛은, 또한 선택된 미디어 스트림을 클라이언트 사용자 장비에 송신하기 위한 송신 유닛(44)을 포함하여 구성된다.
또 다른 실시형태에 따르면, 선택 유닛은, 미디어 스트림의 성질, 예를 들어 신호 강도에 기반하고, 미디어 우선권으로서 각각의 미디어 스트림과 연관된, 미디어 서버에 의해 수행된 미디어 스트림의 가중에, 미디어 스트림의 선택이 기반하도록 구성된다.
도 5는, 도 4에 도시된 실시형태를 대안적 방식으로 개시한, 미디어 서버의 실시형태를 개략적으로 도시한다. 미디어 서버(1)는, 단일 유닛 또는 복수 유닛일 수 있는 처리 유닛(51)을 포함하여 구성된다. 더욱이, 미디어 서버(1)는, 예를 들어 EEPROM(Electrically Erasable Programmable Readonly Memory), 플래시 메모리 또는 디스크 드라이브와 같은 비휘발성 메모리 형태의 적어도 하나의 컴퓨터 프로그램 프로덕트(52)를 포함하여 구성된다. 컴퓨터 프로그램 프로덕트(52)는, 미디어 서버(1) 상에서 구동할 때, 미디어 서버 내의 처리 유닛(51)이 도 2와 연관해서 상기된 과정의 단계를 수행하도록 하는 코드 수단을 포함하여 구성되는, 컴퓨터 프로그램(53)을 포함하여 구성된다.
그런데, 도 5에 도시된 실시형태에 있어서는, 미디어 서버(1)의 컴퓨터 프로그램(53) 내의 코드 수단이, 결정 모듈(53a), 수신 모듈(53b), 선택 모듈(53c) 및 송신 모듈(53d)을 포함하여 구성된다. 기본적으로, 모듈(53a-53d)은 도 4에 개시된 미디어 서버를 에뮬레이트(emulate)하기 위해서, 도 2의 흐름의 단계를 수행한다. 즉, 다른 모듈(53a-53d)이 처리 유닛(51) 상에서 구동할 때, 이들은 도 4와 연관된 설명 문구와 연관해서 상기 설명된 도 4의 유닛(41, 42, 43, 44)에 대응한다.
도 5와 관련해서 상기된 실시형태에서의 코드 수단이, 미디어 서버(1) 상에서 구동할 때, 노드가 도 2와 관련해서 상기된 단계를 수행하도록 하는, 컴퓨터 프로그램 모듈로서 실행됨에도, 대안적인 실시형태에 있어서는, 하나 이상의 코드 수단이 적어도 부분적으로 하드웨어 회로로서 실행될 수 있다.
도 6은 예시적인 실시형태를 따라, 클라이언트 사용자 장비를 개략적으로 도시한다. 클라이언트 사용자 장비는, 미디어, 예를 들어 로컬 사용자로부터의 보이스를 인코딩하기 위한 코딩 유닛(61)과, 미디어 서버(1)로부터 수신된 미디어 스트림을 사용해서, 예를 들어 다중-파티 호출을 렌더링하고, 미디어 스트림으로부터 분리해서 수신된 정보를 렌더링하기 위한 렌더링 유닛(66)을 구비한다. 따라서, 클라이언트 사용자 장비는 미디어 서버로부터 렌더링을 위한 미디어 스트림을 수신하기 위한 제1수신 유닛(65)을 구비하는데, 미디어 스트림은 클라이언트 사용자 장비로부터 수신된 요청으로부터 미디어 서버에 의해 선택된다. 따라서, 클라이언트 사용자 장비는, 또한 미디어 서버에 대해서 요청을 생성하기 위한 요청 유닛(64)을 포함하여 구성되는데, 이 요청은 클라이언트 사용자 장비가 수신하기 원하는 미디어 스트림을 가리키며, 각각의 미디어 스트림은 미디어 스트림에 대한 클라이언트 우선권과 연관된다. 각각의 스트림에 대한 클라이언트 우선권은, 데이터 서버(3)로부터 수신됨에 따라, 예를 들어 위치 정보 애플리케이션-특정 정보에 기반해서, 또한 엔드-사용자에 의한 선택에 기반해서 결정될 수 있다. 갱신된 요청은, 인코딩된 미디어를 미디어 서버로 송신하기 위해 사용될 수도 있는 송신 유닛(62)에 의해, 정기적으로 미디어 서버로 송신된다. 그런데, 미디어 스트림은 요청으로부터 분리해서 송신되므로, 클라이언트 사용자 장비는, 바람직하게는 미디어 스트림(도시 생략)에 대한 개별적인 송신 유닛을 구비한다.
또 다른 예시적인 실시형태에 따르면, 클라이언트 사용자 장비는, 다중-파티 호출에 참가하는 다른 클라이언트 사용자 장비와 연관된, 예를 들어 지리적인 성질과 같은 미디어 스트림으로부터 분리해서, 데이터 서버로부터 메타-데이터를 수신하기 위한 제2수신 유닛(63)을 포함하여 구성된다. 이 메타-데이터는 요청을 생성하고, 요청된 미디어 스트림의 클라이언트 우선권을 결정하기 위해, 요청 유닛(64)에 의해 사용되지만, 또한 미디어 렌더링을 수행하기 위해 렌더링 유닛(66)에 의해서도 사용된다. 따라서, 데이터 서버로부터 수신된 메타-데이터는, 요청 정보 및 렌더링 정보 모두로서 클라이언트 사용자 장비에 의해 사용될 수 있다.
도 7은, 도 6에 도시된 실시형태의 대안적인 방법인 클라이언트 사용자 장비(2)의 실시형태를 개략적으로 나타낸다. 클라이언트 사용자 장비(2)는 단일 유닛 또는 복수 유닛일 수 있는 처리 유닛(71)을 포함하여 구성될 수 있다. 더욱이, 클라이언트 사용자 장비(2)는, 예를 들어 EEPROM(Electrically Erasable Programmable Read-Only Memory), 플래시 메모리 또는 디스크 드라이브와 같은 비휘발성 메모리 형태의 적어도 하나 컴퓨터 프로그램 프로덕트(72)를 포함하여 구성된다. 컴퓨터 프로그램 프로덕트(72)는, 클라이언트 사용자 장비(2) 상에서 구동할 때, 처리 유닛(71)이 도 3과 연관해서 상기된 과정의 단계를 수행하도록 하는 코드 수단을 포함하여 구성되는 컴퓨터 프로그램(73)을 포함하여 구성된다.
그러므로, 도 7에 도시한 실시형태에 있어서, 클라이언트 사용자 장비(2)의 컴퓨터 프로그램(73) 내의 코드 수단은, 코딩 모듈(73a), 송신 모듈(73b), 제2수신 모듈(73c), 요청 모듈(73d), 제1수신 모듈(73e) 및 렌더링 모듈(73f)을 포함하여 구성된다. 따라서, 코드 수단은 컴퓨터 프로그램 모듈 내에 구성된 컴퓨터 프로그램으로서 실행될 수 있다. 기본적으로, 모듈(73a-73f)은 도 6에 개시된 클라이언트 사용자 장비(2)를 에뮬레이트하기 위해서 도 3의 흐름의 단계를 수행한다. 즉, 다른 모듈(73a-73f)이 처리 유닛(71) 상에서 구동할 때, 이들은 도 6과 연관된 설명 문구와 연관해서 상기 설명된 도 6의 유닛(61, 62, 63, 64, 65, 66)에 대응한다.
도 7과 관련해서 상기된 실시형태에서의 코드 수단이, 클라이언트 사용자 장비(2) 상에서 구동할 때, 노드가 도 3과 관련해서 상기된 단계를 수행하도록 하는, 컴퓨터 프로그램 모듈로서 실행됨에도, 대안적인 실시형태에 있어서는, 하나 이상의 코드 수단이 적어도 부분적으로 하드웨어 회로로서 실행될 수 있다.
따라서, 상기된 바와 같이, 도 4 및 도 5에 도시된 미디어 서버(1), 도 6 및 도 7에 도시된 클라이언트 사용자 장비(2)가 프로그램된 마이크로프로세서 또는 일반 목적 컴퓨터와 연관된 소프트웨어 기능을 사용해서 및/또는 ASIC(application specific integrated circuit)을 사용해서, 물리적 또는 논리적인 엔티티에 의해 실행될 수 있다. 더욱이, 이들은 적합한 내부 및 외부 기억 장치만 아니라, 필요한 변조, 코딩, 필터링 등만 아니라 이러한 신호를 처리하기 위한 복조, 디코딩을 수행할 수 있는 하드웨어 및 소프트웨어를 포함하는, 적합한 통신 인터페이스를 포함할 수 있다.
상기된 실시형태는 예로서만 제시된 것으로, 본 발명을 제한하지 않는다. 수반되는 특허 청구범위 내에서 청구된 바와 같이, 본 발명의 범위 내에서의, 그 밖의 해결책, 사용, 목적 및 기능이, 본 기술 분야의 당업자에게는 명백하다.
1 - 서버,
2 - 클라이언트 사용자 장비,
3 - 데이터 서버.
2 - 클라이언트 사용자 장비,
3 - 데이터 서버.
Claims (22)
- 다중-파티 호출의 오디오 또는 비디오 미디어의 로컬 렌더링을 위해, 다중-파티 호출로부터 수신된 미디어 스트림을 클라이언트 사용자 장비에 전달하는 통신 네트워크의 미디어 서버(1)를 위한 방법으로서:
- 클라이언트 사용자 장비와의 네고시에이션에 기반해서, 동시에 전달되는 최대 수의 미디어 스트림을 결정(25)하는 단계와;
- 클라이언트 사용자 장비로부터, 각각의 미디어 스트림에 대한 클라이언트 우선권을 가리키는, 미디어 스트림에 대한 갱신된 요청을 정기적으로 수신(26)하는 단계와;
- 요청된 미디어 스트림의 클라이언트 우선권에 기반하고, 선택된 미디어 스트림의 수가 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반해서, 수신된 요청으로부터 미디어 스트림을 선택(27)하는 단계와;
- 로컬 렌더링을 위해, 선택된 미디어 스트림을 클라이언트 사용자 장비에 송신(28)하는 단계를 포함하여 구성되고,
로컬 렌더링은 미디어 서버(1)와 다른 서버로부터 송신되고, 다중-파티 호출 내에 포함된 클라이언트 사용자 장비의 위치 정보를 포함하는 렌더링 정보에 기반하는 것을 특징으로 하는 방법. - 제1항에 있어서,
미디어 우선권과 각각의 미디어 스트림을 연관시키는 미디어 서버를 더 포함하여 구성되고, 미디어 스트림의 선택(27)이 상기 미디어 우선권에 더 기반하는 것을 특징으로 하는 방법. - 제2항에 있어서,
미디어 스트림과 연관된 미디어 우선권이 수신된 미디어 스트림의 적어도 하나의 성질에 기반하는 것을 특징으로 하는 방법. - 제1항에 있어서,
최대 수의 미디어 스트림을 결정하는 단계는, 이용 가능한 대역폭에 기반하는 것을 특징으로 하는 방법. - 제1항에 있어서,
최대 수의 미디어 스트림을 결정하는 단계는, 클라이언트 사용자 장비의 능력에 기반하는 것을 특징으로 하는 방법. - 제1항에 있어서,
클라이언트 우선권은, 위치 정보, 애플리케이션-특정 정보 또는 엔드-사용자에 의한 선택 중 적어도 하나에 기반하는 것을 특징으로 하는 방법. - 다중-파티 호출의 오디오 또는 비디오 미디어의 로컬 렌더링을 위해서 미디어 서버(1)로부터 미디어 스트림을 수신하는 통신 네트워크의 클라이언트 사용자 장비(2)를 위한 방법으로서:
- 각각의 미디어 스트림에 대한 클라이언트 우선권을 가리키는, 미디어 스트림을 위한 갱신된 요청을 미디어 서버로, 정기적으로 송신(34)하는 단계와;
- 요청된 미디어 스트림의 클라이언트 우선권에 기반하고, 선택된 미디어 스트림의 수가 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반해서, 미디어 서버에 의해 선택된 미디어 스트림을 미디어 서버로부터 수신(35)하는 단계와;
미디어 서버(1)와 다른 서버로부터 수신되고, 다중-파티 호출 내에 포함된 클라이언트 사용자 장비의 위치 정보를 포함하는 렌더링 정보에 기반해서, 클라이언트 사용자 장비(2)에서, 다중-파티 호출의 미디어 스트림을, 국지적으로 렌더링(36)하는 단계를 포함하여 구성되는 것을 특징으로 하는 방법. - 제7항에 있어서,
수신된 미디어 스트림이, 미디어 서버에 의해 결정된 그리고, 미디어 스트림과 연관된 미디어 우선권에 더 기반해서, 미디어 서버에 의해 선택되는 것을 특징으로 하는 방법. - 제7항 또는 제8항에 있어서,
이용 가능한 대역폭에 기반해서, 미디어 서버와의 네고시에이션(33)에서, 최대 수의 미디어 스트림이 결정되는 것을 특징으로 하는 방법. - 제7항 또는 제8항에 있어서,
클라이언트 사용자 장비의 능력에 기반해서, 미디어 서버와의 네고시에이션(33)에서, 최대 수의 미디어 스트림이 결정되는 것을 특징으로 하는 방법. - 제7항 또는 제8항에 있어서,
클라이언트 우선권이, 위치 정보, 애플리케이션-특정 정보 또는 엔드-사용자에 의한 선택 중 적어도 하나에 기반하는 것을 특징으로 하는 방법. - 통신 시스템에 접속 가능하고, 다중-파티 호출의 오디오 또는 비디오 미디어의 로컬 렌더링을 위해 다중-파티 호출로부터 수신된 미디어 스트림을 클라이언트 사용자 장비(2)에 전달하도록 구성된 미디어 서버(1)로서:
- 클라이언트 사용자 장비와의 네고시에이션에 기반해서, 동시에 전달되는 최대 수의 미디어 스트림을 결정하기 위한 결정 유닛(41)과;
- 클라이언트 사용자 장비로부터, 각각의 요청된 미디어 스트림에 대한 클라이언트 우선권을 가리키는, 미디어 스트림에 대한 갱신된 요청을 정기적으로 수신하기 위한 수신 유닛(42)과;
- 요청된 미디어 스트림의 클라이언트 우선권에 기반하고, 선택된 미디어 스트림의 수가 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반해서, 수신된 요청으로부터 미디어 스트림을 선택하기 위한 선택 유닛(43)과;
- 로컬 렌더링을 위해, 선택된 미디어 스트림을 클라이언트 사용자 장비에 송신하기 위한 송신 유닛(44)을 포함하여 구성되고,
로컬 렌더링은 미디어 서버(1)와 다른 서버로부터 송신되고, 다중-파티 호출 내에 포함된 클라이언트 사용자 장비의 위치 정보를 포함하는 렌더링 정보에 기반하는 것을 특징으로 하는 미디어 서버. - 제12항에 있어서,
선택 유닛은, 각각의 미디어 스트림과 연관되고, 미디어 서버에 의해 결정된 미디어 우선권에 더 기반해서, 미디어 스트림을 선택하도록 더 구성되는 것을 특징으로 하는 미디어 서버. - 제13항에 있어서,
미디어 우선권이 수신된 미디어 스트림의 적어도 하나의 성질에 기반하는 것을 특징으로 하는 미디어 서버. - 제12항 내지 제14항 중 어느 한 항에 있어서,
결정 유닛은, 이용 가능한 대역폭에 최대 수의 미디어 스트림이 기반하도록 더 구성되는 것을 특징으로 하는 미디어 서버. - 제12항 내지 제14항 중 어느 한 항에 있어서,
결정 유닛은, 클라이언트 사용자 장비의 능력에 최대 수의 미디어 스트림이 기반하도록 더 구성되는 것을 특징으로 하는 미디어 서버. - 통신 네트워크에 접속 가능하고, 다중-파티 호출의 오디오 또는 비디오 미디어의 로컬 렌더링을 위해서 미디어 서버(1)로부터 미디어 스트림을 수신하도록 구성된 클라이언트 사용자 장비(2)로서:
- 각각의 미디어 스트림에 대한 클라이언트 우선권을 가리키는, 미디어 스트림에 대한 요청을 생성하기 위한 요청 유닛(64)과;
- 갱신된 요청을 미디어 서버로 정기적으로 송신하기 위한 송신 유닛(62)과;
- 요청된 미디어 스트림의 클라이언트 우선권에 기반하고, 다수의 수신된 미디어 스트림이 미디어 스트림의 결정된 최대 수를 초과하지 않게 되는 것에 기반해서, 미디어 서버에 의해 선택된 미디어 스트림을, 미디어 서버로부터 수신하기 위한 제1수신 유닛(65)과;
미디어 서버(1)와 다른 서버로부터 수신되고, 다중-파티 호출 내에 포함된 클라이언트 사용자 장비의 위치 정보를 포함하는 렌더링 정보에 기반 해서, 클라이언트 사용자 장비(2)에서, 다중-파티 호출의 미디어 스트림의 로컬 렌더링을 위한 렌더링 유닛(66)을 포함하여 구성되는 것을 특징으로 하는 클라이언트 사용자 장비. - 제17항에 있어서,
데이터 서버(3)로부터 메타-데이터를 수신하기 위한 제2수신 유닛(63)을 포함하여 구성되는 것을 특징으로 하는 클라이언트 사용자 장비. - 제17항 또는 제18항에 있어서,
클라이언트 사용자 장비 내에서 미디어-입력을 코딩하기 위한 코딩 유닛(61)을 더 포함하여 구성되는 것을 특징으로 하는 클라이언트 사용자 장비. - 제17항 또는 제18항에 있어서,
요청 유닛(64)은, 위치 정보, 애플리케이션-특정 정보 및 엔드-사용자에 의한 선택 중 적어도 하나에 클라이언트 우선권이 기반하도록 더 구성되는 것을 특징으로 하는 클라이언트 사용자 장비. - 삭제
- 삭제
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/SE2011/050003 WO2012093954A1 (en) | 2011-01-04 | 2011-01-04 | Local media rendering |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20130140836A KR20130140836A (ko) | 2013-12-24 |
KR101718186B1 true KR101718186B1 (ko) | 2017-03-20 |
Family
ID=46457617
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020137019941A KR101718186B1 (ko) | 2011-01-04 | 2011-01-04 | 로컬 미디어 렌더링 |
Country Status (7)
Country | Link |
---|---|
US (2) | US8994782B2 (ko) |
EP (1) | EP2661857B1 (ko) |
JP (1) | JP5815739B2 (ko) |
KR (1) | KR101718186B1 (ko) |
CN (1) | CN103283205B (ko) |
AU (1) | AU2011353795B2 (ko) |
WO (1) | WO2012093954A1 (ko) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2011353795B2 (en) * | 2011-01-04 | 2016-02-04 | Telefonaktiebolaget Lm Ericsson (Publ) | Local media rendering |
US9577974B1 (en) * | 2012-02-14 | 2017-02-21 | Intellectual Ventures Fund 79 Llc | Methods, devices, and mediums associated with manipulating social data from streaming services |
CN104010160B (zh) * | 2013-02-25 | 2017-10-13 | 杭州海康威视系统技术有限公司 | 视频监控系统的干线管理方法及其装置 |
CN105430459B (zh) * | 2015-11-16 | 2019-09-06 | 深圳Tcl数字技术有限公司 | 音频数据播放方法、装置及智能电视机 |
JP2020504557A (ja) | 2017-01-09 | 2020-02-06 | 華為技術有限公司Huawei Technologies Co.,Ltd. | メディアダウンリンク伝送制御方法及び関連するデバイス |
US11523157B2 (en) * | 2020-05-13 | 2022-12-06 | Samsung Electronics Co., Ltd | Method and mission critical server for handling reception of media streams in mission critical system |
JP7260569B2 (ja) * | 2021-01-20 | 2023-04-18 | 華為技術有限公司 | メディアダウンリンク伝送制御方法及び関連するデバイス |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004187170A (ja) * | 2002-12-05 | 2004-07-02 | Ntt Communications Kk | ビデオ会議システム |
US20040236593A1 (en) * | 2003-05-22 | 2004-11-25 | Insors Integrated Communications | Data stream communication |
JP2005341075A (ja) | 2004-05-26 | 2005-12-08 | Nippon Telegr & Teleph Corp <Ntt> | スケーラブル通信会議システム,サーバ装置,スケーラブル通信会議方法,スケーラブル通信会議制御方法,スケーラブル通信会議制御プログラムおよびそのプログラム記録媒体 |
WO2008121032A1 (en) * | 2007-03-29 | 2008-10-09 | Telefonaktiebolaget Lm Ericsson (Publ) | Media stream setup in a group communication system |
Family Cites Families (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6584493B1 (en) * | 1999-03-02 | 2003-06-24 | Microsoft Corporation | Multiparty conferencing and collaboration system utilizing a per-host model command, control and communication structure |
US6775247B1 (en) * | 1999-03-22 | 2004-08-10 | Siemens Information And Communication Networks, Inc. | Reducing multipoint conferencing bandwidth |
US6868444B1 (en) * | 2000-05-05 | 2005-03-15 | Interland, Inc. | Server configuration management and tracking |
US6760749B1 (en) * | 2000-05-10 | 2004-07-06 | Polycom, Inc. | Interactive conference content distribution device and methods of use thereof |
WO2002033954A2 (en) * | 2000-10-17 | 2002-04-25 | Digimarc Corporation | User control and activation of watermark enabled objects |
US20050021804A1 (en) * | 2001-05-08 | 2005-01-27 | Heino Hameleers | Method and system for controlling the transmission of media streams |
US6894715B2 (en) * | 2001-06-16 | 2005-05-17 | Eric Harold Henrikson | Mixing video signals for an audio and video multimedia conference call |
US7009971B2 (en) * | 2001-07-16 | 2006-03-07 | International Business Machines Corporation | Methods and arrangements for multicasting a data stream at different data rates to groups of subscribers |
US7304985B2 (en) * | 2001-09-24 | 2007-12-04 | Marvin L Sojka | Multimedia communication management system with line status notification for key switch emulation |
US7225459B2 (en) * | 2001-10-17 | 2007-05-29 | Numerex Investment Corproation | Method and system for dynamically adjusting video bit rates |
US20030174243A1 (en) * | 2002-03-13 | 2003-09-18 | Arbeiter James Henry | Network streaming system for providing a user with data defining imagecontent at a resolution that may be determined by the user |
US6731323B2 (en) * | 2002-04-10 | 2004-05-04 | International Business Machines Corporation | Media-enhanced greetings and/or responses in communication systems |
US7571210B2 (en) * | 2002-12-06 | 2009-08-04 | Insors Integrated Communications | Methods and systems for linking virtual meeting attendees over a network |
US7567270B2 (en) * | 2004-04-22 | 2009-07-28 | Insors Integrated Communications | Audio data control |
US20060291412A1 (en) * | 2005-06-24 | 2006-12-28 | Naqvi Shamim A | Associated device discovery in IMS networks |
US20060291487A1 (en) * | 2005-06-24 | 2006-12-28 | Aylus Networks, Inc. | IMS networks with AVS sessions with multiple access networks |
US9060047B2 (en) * | 2005-12-21 | 2015-06-16 | Genband Us Llc | Media stream management |
CN101026615B (zh) * | 2006-02-18 | 2011-09-14 | 华为技术有限公司 | 一种基于ims的流媒体网络系统 |
US8559646B2 (en) * | 2006-12-14 | 2013-10-15 | William G. Gardner | Spatial audio teleconferencing |
US8739234B1 (en) * | 2007-03-13 | 2014-05-27 | At&T Intellectual Property Ii, L.P. | Process and method of providing a shared experience with multimedia content |
US8547856B2 (en) * | 2007-08-21 | 2013-10-01 | Cisco Technology, Inc. | Communication system with state dependent parameters |
WO2009046758A1 (en) * | 2007-10-09 | 2009-04-16 | Telefonaktiebolaget Lm Ericsson (Publ) | Method, apparatuses and computer programs for linking information of a user between servers providing authentication assertions |
CA2711154A1 (en) * | 2008-01-04 | 2009-07-16 | Bandtones Llc | Methods and apparatus for delivering audio content to a caller placed on hold |
WO2009092060A2 (en) | 2008-01-17 | 2009-07-23 | Vivox Inc. | Scalable techniques for providing real-lime per-avatar streaming data in virtual reality systems thai employ per-avatar rendered environments |
US8542804B2 (en) * | 2008-02-08 | 2013-09-24 | Voxer Ip Llc | Voice and text mail application for communication devices |
US20090210491A1 (en) * | 2008-02-20 | 2009-08-20 | Microsoft Corporation | Techniques to automatically identify participants for a multimedia conference event |
US8494841B2 (en) * | 2008-10-09 | 2013-07-23 | Telefonaktiebolaget Lm Ericsson (Publ) | Common scene based conference system |
US8330794B2 (en) * | 2009-06-10 | 2012-12-11 | Microsoft Corporation | Implementing multiple dominant speaker video streams with manual override |
US8351589B2 (en) * | 2009-06-16 | 2013-01-08 | Microsoft Corporation | Spatial audio for audio conferencing |
CN101924903B (zh) * | 2009-06-17 | 2013-03-20 | 华为技术有限公司 | 实现视频通话的方法、装置和系统 |
US8296442B2 (en) * | 2009-11-18 | 2012-10-23 | Motorola Solutions, Inc. | Method and apparatus for minimizing bandwidth usage between a communication server and media device |
US8471890B1 (en) * | 2009-12-30 | 2013-06-25 | Insors Integrated Communications | Adaptive video communication channel |
US20110252083A1 (en) * | 2010-04-13 | 2011-10-13 | Rebelvox, Llc | Apparatus and method for transmitting media using either network efficient protocol or a loss tolerant transmission protocol |
AU2011353795B2 (en) * | 2011-01-04 | 2016-02-04 | Telefonaktiebolaget Lm Ericsson (Publ) | Local media rendering |
-
2011
- 2011-01-04 AU AU2011353795A patent/AU2011353795B2/en not_active Ceased
- 2011-01-04 KR KR1020137019941A patent/KR101718186B1/ko active IP Right Grant
- 2011-01-04 CN CN201180064172.XA patent/CN103283205B/zh active Active
- 2011-01-04 WO PCT/SE2011/050003 patent/WO2012093954A1/en active Application Filing
- 2011-01-04 US US13/977,074 patent/US8994782B2/en active Active
- 2011-01-04 EP EP11855116.7A patent/EP2661857B1/en active Active
- 2011-01-04 JP JP2013547396A patent/JP5815739B2/ja not_active Expired - Fee Related
-
2015
- 2015-02-25 US US14/630,698 patent/US9560096B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004187170A (ja) * | 2002-12-05 | 2004-07-02 | Ntt Communications Kk | ビデオ会議システム |
US20040236593A1 (en) * | 2003-05-22 | 2004-11-25 | Insors Integrated Communications | Data stream communication |
JP2005341075A (ja) | 2004-05-26 | 2005-12-08 | Nippon Telegr & Teleph Corp <Ntt> | スケーラブル通信会議システム,サーバ装置,スケーラブル通信会議方法,スケーラブル通信会議制御方法,スケーラブル通信会議制御プログラムおよびそのプログラム記録媒体 |
WO2008121032A1 (en) * | 2007-03-29 | 2008-10-09 | Telefonaktiebolaget Lm Ericsson (Publ) | Media stream setup in a group communication system |
Also Published As
Publication number | Publication date |
---|---|
CN103283205A (zh) | 2013-09-04 |
EP2661857A4 (en) | 2015-05-20 |
US9560096B2 (en) | 2017-01-31 |
US20150237086A1 (en) | 2015-08-20 |
CN103283205B (zh) | 2016-07-13 |
JP5815739B2 (ja) | 2015-11-17 |
JP2014507837A (ja) | 2014-03-27 |
US20140009567A1 (en) | 2014-01-09 |
AU2011353795A1 (en) | 2013-08-01 |
EP2661857B1 (en) | 2016-06-01 |
AU2011353795B2 (en) | 2016-02-04 |
KR20130140836A (ko) | 2013-12-24 |
EP2661857A1 (en) | 2013-11-13 |
US8994782B2 (en) | 2015-03-31 |
WO2012093954A1 (en) | 2012-07-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101718186B1 (ko) | 로컬 미디어 렌더링 | |
US10009389B2 (en) | Scalable conference bridge | |
CN104754284B (zh) | 一种视频会议直播方法、设备及系统 | |
US9538139B2 (en) | Multi-stream video switching with selective optimized composite | |
US8582474B2 (en) | Video conference system and method | |
US20080095079A1 (en) | Techniques for virtual conferencing servers | |
US20130215215A1 (en) | Cloud-based interoperability platform using a software-defined networking architecture | |
US20130282820A1 (en) | Method and System for an Optimized Multimedia Communications System | |
US20150188928A1 (en) | Private-public chat functionality | |
CN101030918A (zh) | 一种基于ip网络提供组播业务的方法、设备和系统 | |
CN102893603B (zh) | 一种视频会议的处理方法、装置和通信系统 | |
EP1875769A2 (en) | Multi-participant conferencing | |
CN108063911B (zh) | 一种视频会议扩容方法 | |
US9374232B2 (en) | Method and a device for optimizing large scaled video conferences | |
EP2130346A1 (en) | Media stream setup in a group communication system | |
WO2016082577A1 (zh) | 视频会议的处理方法及装置 | |
US9264662B2 (en) | Chat preauthorization | |
CN110460603B (zh) | 多媒体文件的传输方法、终端、服务器、系统及存储介质 | |
WO2015135408A1 (zh) | 一种对等网络会议接入方法、客户端及系统 | |
WO2016045496A1 (zh) | 一种媒体控制方法和设备 | |
US11770431B2 (en) | Network-adaptive live media encoding system | |
US20100225733A1 (en) | Systems and Methods for Managing Virtual Collaboration Systems | |
JP2015216646A (ja) | ローカルメディアレンダリング | |
KR20090020748A (ko) | 하이브리드 영상 컨퍼런싱 서비스 제공 시스템 및 그 제공방법 | |
WO2009134260A1 (en) | Event management system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
FPAY | Annual fee payment |
Payment date: 20200228 Year of fee payment: 4 |