KR101374408B1 - 터미널들의 출력을 동기화하기 위한 방법 및 시스템 - Google Patents

터미널들의 출력을 동기화하기 위한 방법 및 시스템 Download PDF

Info

Publication number
KR101374408B1
KR101374408B1 KR1020107010741A KR20107010741A KR101374408B1 KR 101374408 B1 KR101374408 B1 KR 101374408B1 KR 1020107010741 A KR1020107010741 A KR 1020107010741A KR 20107010741 A KR20107010741 A KR 20107010741A KR 101374408 B1 KR101374408 B1 KR 101374408B1
Authority
KR
South Korea
Prior art keywords
information
synchronization
terminals
delay
terminal
Prior art date
Application number
KR1020107010741A
Other languages
English (en)
Other versions
KR20100084659A (ko
Inventor
한스 마틴 스톡킹
마테이스 오스카 반 데벤테르
파비안 아더 발라벤
오마르 아지즈 니아무트
Original Assignee
네덜란제 오르가니자티에 포오르 토에게파스트-나투우르베텐샤펠리즈크 온데르조에크 테엔오
코닌클리즈케 케이피엔 엔.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to EP07023550A priority Critical patent/EP2068528A1/en
Priority to EP07023550.2 priority
Priority to EP08016109.4 priority
Priority to EP08016109A priority patent/EP2164224A1/en
Application filed by 네덜란제 오르가니자티에 포오르 토에게파스트-나투우르베텐샤펠리즈크 온데르조에크 테엔오, 코닌클리즈케 케이피엔 엔.브이. filed Critical 네덜란제 오르가니자티에 포오르 토에게파스트-나투우르베텐샤펠리즈크 온데르조에크 테엔오
Priority to PCT/EP2008/010355 priority patent/WO2009071321A1/en
Publication of KR20100084659A publication Critical patent/KR20100084659A/ko
Application granted granted Critical
Publication of KR101374408B1 publication Critical patent/KR101374408B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements or protocols for real-time communications
    • H04L65/80QoS aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J3/00Time-division multiplex systems
    • H04J3/02Details
    • H04J3/06Synchronising arrangements
    • H04J3/0635Clock or time synchronisation in a network
    • H04J3/0638Clock or time synchronisation among nodes; Internode synchronisation
    • H04J3/0658Clock or time synchronisation among packet nodes
    • H04J3/0661Clock or time synchronisation among packet nodes using timestamps
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J3/00Time-division multiplex systems
    • H04J3/02Details
    • H04J3/06Synchronising arrangements
    • H04J3/0635Clock or time synchronisation in a network
    • H04J3/0682Clock or time synchronisation in a network by delay compensation, e.g. by compensation of propagation delay or variations thereof, by ranging

Abstract

본 발명에 따른 방법은 터미널의 출력을 동기화하기 위해 설명된다. 본 발명에 따른 방법은 적어도 제 1 및 제 2 터미널로 패킷화된 스트림을 전송하는 스테이션을 포함하는 시스템 내에서 사용될 수 있다. 각 터미널은 가변 지연 유닛을 포함하고 지연 정보를 계산하기 위해 저지연 통신 채널을 통해 적어도 하나의 동기화 유닛과 연결된다. 더욱이, 각 터미널은 스트림으로부터 수신되는 미디어 유닛의 미디어 참조 정보를 정의할 수 있다. 본 발명에 따른 방법은 터미널들과 동기화 유닛(SU) 사이에 하나 이상의 저지연 통신 채널들을 제공하는 단계; 동기화 유닛이 하나 이상의 저지연 통신 채널들을 매개로 터미널들로부터 수신되는 동기화 정보를 기초로 지연 정보를 계산하는 단계; 및 터미널들의 출력이 실질적으로 동기화되도록 적어도 하나의 터미널이 그 출력을 지연시키는 것을 허용하는 터미널들 중 적어도 하나에 지연 정보를 전송하는 단계;를 포함한다.

Description

터미널들의 출력을 동기화하기 위한 방법 및 시스템{METHOD AND SYSTEM FOR SYNCHRONIZING THE OUTPUT OF TERMINALS}
본 발명은 터미널들의 출력을 동기화하기 위한 방법 및 시스템에 관한 것이다. 보다 상세하게는, 본 발명은 이러한 시스템에서 사용하기 위한 동기화 유닛(synchronization unit: SU) 및 터미널(terminal)에 관한 것이다.
보이스 오버 IP(Voice over IP: VoIP)와 같은 새로운 멀티미디어 기술들과 인터넷 프로토콜 텔레비전(IPTV)은 새로운 멀티미디어 서비스의 전체 범위를 넓혔다. 이러한 서비스들 중 하나의 타입은 직접 통신을 위한 세분화된 실시간 통신 채널(예컨대, VoIP)을 사용하는 문서, 오디오 및/또는 비디오를 매개로 서로 통신하는 동안 한 그룹의 사용자들이 따로따로 같은 TV를 시청하는 것을 가능하게 한다. 각 사용자가 동시간에 구체적인 TV 순간(예컨대, 라이브 축구 경기에서의 골 장면)을 경험하도록 하기 위해, 이러한 서비스들은 터미널들의 출력 신호가 그룹 내의 모든 사용자들에게 동시간에 전송되는 것을 요구한다. 즉, 예컨대, 텔레비전, PDA, PC 또는 그것들의 조합과 같은 그룹의 디스플레이 장치들의 출력들은 동기화되어야만 한다.
IPTV 시스템에 있어서, TV 채널 신호(signal)는 전형적으로 에지 라우터(edge routers)들 및 가입자들의 터미널들로의 엑세스 노드들(access nodes)을 매개로 운영자의 고-대역 IP 네트워크에 관한 하나 이상의 패킷화된 스트림들과 같이 이러한 서비스로 전송된다. 스트림들이 전송되는 동안, 패킷들은 전송 지연, 네트워크 루트(route) 내의 차이들 및 부호화와 복호화 지연 내의 차이들과 같은 네트워크 내의 알 수 없는 지연들에 걸리기 쉽다. 오디오 및 비디오 패킷들 사이의 시간 관계 때문에 스트림들은 하나의 터미널에서 수신되고 다른 터미널에서 수신된 스트림들은 디스터브될 것이다.
IPTV 콘텐트(content)를 터미널들로 스트리밍하기 위해 보통 실시간 전송 프로토콜(Real-time Transport Protocol(RTP))이 이용된다. RTP는 시퀀스 넘버링(sequence numbering) 및 타임 스탬핑(time stamping)을 제공한다. RTP를 사용함으로써 하나의 스트림(스트림 내(intra-stream) 동기화)과 연관된 스트림들(스트림간(inter-stream) 동기화) 사이의 시간 관계는 복원될 수 있다.
(상기에 관련된 대로 서비스들에 의해 요구될 때) 그룹-동기화 또는 목적지간(inter-destination) 동기화를 획득하기 위해 더 많은 수단들이 필요하다. 여러 기술들은 알려져 있고 전부가 타임 스탬핑과 터미널 내의 가변-지연(variable delay)을 사용한다. 가변 지연 버퍼는 소정 양의 시간을 위한 스트림을 지연시킬 수 있다.
누놈(Nunome) 등에 의해 기재된(IEICE trans. Commun. vol. 87, 2004, PP. 3057~3067) "연속적인 미디어 멀티 캐스팅을 위한 목적지간 동기화 스킴(scheme)들의 어플리케이션-레벨 QoS 비교" 라는 기사에서, 목적지간 동기화 스킴의 두가지 타입이 설명된다. 첫 번째 타입은 중앙 동기화 마스터(central synchronization master)를 사용하고, 이는 그룹 내의 모든 터미널들로부터 타이밍(timing) 정보를 수집하고, 제어 패킷들을 터미널들로 분할함으로써 출력 타이밍을 조절한다. 두 번째 타입은 분할된 제어 스킴과 관련되어 있고, 여기서 각 터미널은 그룹 내의 모든 다른 터미널들로 모든 타이밍 정보를 멀티캐스팅한다. 그러나 전형적인 IPTV 시스템 내의 이러한 스킴들의 실행은 소정의 문제들을 초래한다. 스킴들과 관련된 하나의 문제는 스트림들의 목적지간 동기화 전의 모든 로컬 클락(local clock)들을 동기화시키는 절대 또는 중앙 클락의 요구이다. 이러한 로컬 클락 동기화는 실제로 획득하기 어려울 수 있다. 종래 기술과 관련된 또 다른 문제는 제한된 스케일러빌러티(scalability)이다. 동기화 제어 패킷들은 제한된 자원인 전용 멀티캐스트 채널들을 사용하여 분할되고, 중앙 동기화 마스터는 단지 소정 수의 터미널들을 취급할 수 있다.
모든 시청자들이 동시간에 방송되는 프로그램을 시청할 수 있는 동기화된 네트워크 노드들로 예컨대, 셋톱 박스(set-top box)와 같은 터미널을 연결하기 위해, IPTV 시스템 내의 그룹-동기화를 얻기 위한 하나의 방법은 운영자의 네트워크 내의 네트워크 노드들의 동기화를 한다. 그런 식으로, 터미널들은 특정 서비스가 그룹-동기화를 요구하는지에 상관없이 항상 싱크(sync) 내에 있다. 관련된 유럽 특허 출원 번호 07020737.8 발명에 좀 더 상세히 설명된, 이러한 솔루션은 네트워크 내에서 네트워크 노드들의 적응을 요구한다.
제공자의 현존하는 네트워크 기반구조(infrastructure)의 변형 없이 특정 서비스들을 위한 그룹-동기화를 제공하는 것이 바람직하다.
본 발명은 상기한 문제점을 해결하는, 터미널들의 출력을 동기화시키는 방법 및 시스템을 제공하는 것을 목적으로 한다.
본 발명의 목적은 종래 기술에서 알려진 약점 중 적어도 하나를 제거하거나 감소시키는 것이다. 또한 본 발명의 첫 번째 특징은 적어도 두 개의 터미널들의 출력을 동기화시키기 위한 방법을 제공하는 것으로서, 방법은 터미널들과 동기화 유닛(SU) 사이에 하나 이상의 저지연(low delay) 통신 채널들을 제공하는 단계; 동기화 유닛이 하나 이상의 저지연 통신 채널들을 매개로 터미널들로부터 수신되는 동기화 정보를 기초로 지연 정보를 계산하는 단계; 및 터미널들의 출력이 실질적으로 동기화되도록 적어도 하나의 터미널이 그 출력을 지연시키는 것을 허용하는 터미널들 중 적어도 하나에 지연 정보를 전송하는 단계;를 포함한다.
본 발명은 한 그룹의 사용자들이 같은 TV 채널을 시청하는 동안에 문서, 오디오 및/또는 비디오를 매개로 서로 통신을 가능케 하는 소정 그룹의 서비스들이 종종 통신을 위한, 세분화된. 고화질의, 저지연 통신 채널을 사용할 수 있다는 통찰력에 기초하였다. 따라서, 저지연 통신 채널은 사용자들 그룹의 터미널들과 하나 이상의 동기화 유닛들 사이의 동기화 정보 교환을 위한 매우 효율적이고 상대적으로 빠른 연결을 제공한다. 본 발명에 따른 방법을 사용함으로써, 이러한 저지연 연결은 미디어 스트림의 목적지간 동기화에 앞서, 터미널들의 로컬(local) 클락들의 동기화를 위한 절대적인 클락의 사용을 제거한다. 더욱이, 방법은 제공자의 네트워크의 기반구조의 적응을 요구하지 않는 소정 IPTV 서비스들 내의 그룹-동기화를 위한 단순하고 저가의 솔루션을 제공한다. 방법은 단지 그룹-동기화를 진정으로 요구하는 터미널들만을 동기화한다.
일 실시예에 있어서, 본 발명에 의해 정의된 단계들은 동기화 유닛에 의해 수행된다.
또 다른 실시예에 있어서, 각 터미널이 멀티미디어 신호를 수신하기 위한 입력과 멀티미디어 신호를 정보 표현 유닛으로 전송하기 위한 출력을 갖추어 구성되고, 각 터미널이 출력 신호를 지연시키기 위한 가변 지연 유닛을 갖추어 구성되며, 방법이, 멀티미디어 스트림, 바람직하게는 미디어 유닛을 갖추어 이루어진 멀티미디어 스트림을 터미널들의 입력으로 전송하는 단계; 및 수신된 지연 정보에 따라 출력 신호를 지연시키는 단계;를 포함한다.
가변 지연 유닛들(버퍼들)을 가진 터미널들을 사용함으로써, 각 터미널은 부분적으로 출력을 지연시킬 수 있다. 이는 운영자의 네트워크의 전부가 모든 스트림들의 통로들 내에 가변 지연 버퍼들과 함께 갖춰질 필요가 있는 것은 아니라는 이점을 갖는다.
또 다른 실시예에 있어서, 방법은, 각 터미널이 저지연 통신 채널을 매개로, 바람직하게는 동기화 요구에 응답해서, 동기화 유닛으로 동기화 정보를 전송하는 단계;를 더 포함하고, 동기화 정보가 멀티미디어 스트림 내의 미디어 유닛의 위치를 나타내는 미디어 유닛 참조(MUR) 정보를 포함한다.
다른 실시예에 있어서, MUR 정보는 프레임 넘버 또는 시퀀스 넘버를 포함한다.
저지연 채널의 사용 때문에 동기화 유닛에 의해 동기화 정보의 수신 시간이 동기화 정보가 터미널에 의해 전송되고 정의되는 시간과 실질적으로 같다. 그러므로 로컬 클락들은 더이상 동기화 정보와 함께 수신되는 미디어 유닛의 타임 (스탬프) 정보를 제공할 필요가 없고 터미널들의 로컬 클락들은 종래 기술의 경우처럼 더이상 동기화되지 않는다. 단지 (MUR 정보에 의해 표현되는) 스트림 내의 미디어 유닛의 상대적인 위치에 대한 정보만이 터미널들로부터 요구된다.
또 다른 실시예에 있어서, 방법은 하나 이상의 타임 스탬프들을 터미널로부터 수신되는 MUR 정보에 더하는 단계; 터미널들에 의해 수신되는 멀티미디어 스트림의 프레임률(frame rate)에 대한 정보를 제공하는 단계; 프레임률 정보 및 타임 스탬핑된 MUR 정보에 기초하여 각 터미널에 대한 지연 정보를 계산하는 단계; 및 지연 정보를 터미널들 중 적어도 하나로 전송하는 단계;를 더 포함한다.
MUR 정보에 타임 스탬프들을 더함으로써, 그리고 스트림(들)의 프레임률이 제공되어 있음으로써, 동기화 유닛은 동기화에 포함되는 각 터미널을 위한 지연 정보(응용가능한 지연)를 계산할 수 있다. 이러한 지연들이 가장 느린 스트림(터미널)과 연관되어 있기 때문에, 단지 두 개의 터미널들만이 동기화에 포함될 때, 단 하나의 터미널이 참고로서 다른 터미널을 취하면서, 지연 정보가 갖추어져 있을 필요가 있다.
일 실시예에 있어서, 방법은 동기화 유닛이 하나 이상의 저지연 통신 채널들을 매개로, 바람직하게는 동시에, 터미널들로 동기화 요구를 전송하는 단계; 터미널들에 의해 수신되는 멀티미디어 스트림의 프레임률에 대한 정보를 제공하는 단계; 프레임률 정보 및 MUR 정보에 기초하여 각 터미널에 대한 지연 정보를 계산하는 단계; 및 지연 정보를 터미널들 중 적어도 하나로 전송하는 단계;를 더 포함한다.
동기화 프로세스는 터미널을 초기화시킬 수 있고 동기화 유닛을 초기화시킬 수 있다. 후자의 경우에 있어서, 동기화 유닛은 동기화 요구를 연결된 터미널들로 전송할 것이다. 요구가 저지연 채널을 매개로 동시에 연결된 모든 터미널들로 전송된다면 그리고 결과값(MUR 정보)들이 저지연 채널들을 매개로 터미널들로부터 동기화 유닛으로 되돌아 전송된다면, 모든 결과값들은 동시간에 실질적으로 도착할 것이다. 결론적으로, 요구되는 동기화의 수준에 의존하여, 타임 스탬프들을 더하는 단계는 없어질 수 있고 더 이상 지연 정보의 계산들 내에 필요하지 않다. 이는 클락의 사용과 타임 스탬핑을 위한 수단들이 프로세스와 사용되는 장비를 더 단순하게 그리고 더 효율적으로 만들면서, 더이상 동기화 유닛에 의해 필요하지 않을 수 있다는 이점을 갖는다.
또 다른 실시예에 있어서, 동기화 정보를 동기화 유닛으로 전송하기 위해 사용되는 저지연 통신 채널은, 통신 세션(session) 또는 방송 세션의 일부로서 설치되고, 더 바람직하게는 ETSI TS 182 027에서 정의된 대로 방송 세션의 일부로서 설치된다.
이는 현존하는 네트워크 자원의 보다 효율적인 사용이 본 발명에 따른 발명을 실행함으로써 제공된다는 이점을 갖는다.
또 다른 실시예에 있어서, 저지연 통신 채널은 보이스 오버 IP(VoIP) 채널, GSM, UMTS 또는 LTE 네트워크를 통하는 USSD 기초 채널, IMS 세션 내의 QoS-제어 채널, 통신 세션 또는 방송 세션 내의 전용 채널, 이더넷 VLAN 전용 채널, MPLS 전용 채널 또는 IP 디프서브(Diffserv) 스트림에 의해 사용되는 전용 채널이다.
일 실시예에 있어서, 동기화 정보는 저지연 통신 채널과 연관된 SIP 세션 내의 스트림에 의해 전송된다. 다른 실시예에 있어서 동기화 정보는 저지연 통신 채널과 연관된 RTP 프로토콜에 의해 전송되고 또는 오디오, 비디오 및/또는 문서를 위한 RTP 스트림들과 연관된 RTCP 프로토콜에 의해 전송되며, 오디오, 비디오 및/또는 문서를 위한 코덱들을 통해 전송된다.
방법은 동기화 정보가 터미널들이 연결된 그룹 내의 터미널들 사이에 저지연 통신 채널(또는 세션)을 유지하고 셋업하기 위해 사용되는 프로토콜에 의해 전송되는 것을 허용한다. 즉, 그룹 동기화를 제공하기 위한 하나 이상의 프로토콜들은 저지연 통신 채널을 유지하고 셋업하기 위해 사용되는 프로토콜들을 통해 피기백 방식으로 전송된다.
동기화 유닛은 서버 내에 위치할 수 있고, 바람직하게는 SIP 기초 어플리케이션 서버, 또는 선택적으로, 다른 실시예에 있어서, 제 1 터미널 및/또는 제 2 터미널 내에 위치할 수 있다.
다른 실시예에 있어서, 제 1 터미널 및 제 2 터미널은 제 1 및 제 2 동기화 유닛을 각각 포함하고, 여기서 각 터미널은 다른 터미널로 미디어 유닛 참조 정보를 통신하기 위한 수단들을 포함하며, 여기서 방법은 (i) 제 1 동기화 유닛이 저지연 통신 채널을 매개로 제 2 동기화 유닛에 의해 전송된 제 2 미디어 유닛 참조 정보를 수신하는 단계 (ii) 제 2 동기화 유닛이 저지연 통신 채널을 매개로 제 1 동기화 유닛에 의해 전송된 제 1 미디어 유닛 참조 정보를 수신하는 단계; 및 (iii) 제 1 및 제 2 동기화 유닛이 제 1 및 제 2 터미널 내의 가변 지연 유닛이 전송을 지연시키는 것을 가능케 함에 따라 터미널들의 그룹의 출력이 실질적으로 동기화되도록 제 1 및 제 2 미디어 유닛 참조 정보에 기초하여 제 1 및 제 2 지연을 각각 계산하는 단계;를 더 포함한다.
이런 식으로, 각 터미널은 동기화 유닛을 포함하고, 따라서 각 터미널이 각자에 의해 지연 정보를 정의하는 것이 가능하다.
다른 면에 있어서, 본 발명은 시스템이 하나 이상의 저지연 통신 채널들을 매개로 적어도 두 개의 터미널과 연결되는 동기화 유닛을 포함하고, 동기화 유닛이 하나 이상의 저지연 통신 채널들을 매개로 터미널들로부터 수신되는 동기화 정보에 기초하여 지연 정보를 계산하기 위해, 및 터미널들의 출력이 실질적으로 동기화되도록 각 터미널이 그 출력을 지연시키는 것을 허용하는 터미널들 중 적어도 하나에 지연 정보를 전송하기 위해 구성되는, 적어도 두 개의 터미널들의 출력을 동기화하기 위한 시스템과 관련되어 있다.
시스템의 일 실시예에 있어서, 각 터미널이 멀티미디어 신호를 수신하기 위한 입력과 멀티미디어 신호를 정보 표현 유닛으로 전송하기 위한 출력을 갖추어 구성되고, 각 터미널이 지연 정보에 따라 출력 신호를 지연시키기 위한 가변 지연 유닛을 갖추어 구성되며, 시스템이 미디어 유닛들을 포함하는 멀티미디어 스트림을 터미널들로 전송하는 스테이션(station)을 더 포함한다.
또 다른 면에 있어서, 본 발명은 상기한 바와 같이 시스템에서 사용하기 위한 동기화 유닛과 관련되어 있다. 유닛은 하나 이상의 저지연 통신 채널들을 매개로 터미널들로부터 동기화 정보를 수신하기 위한 수신기; 수신되는 동기화 정보에 기초하여 지연 정보를 계산하기 위해 구성되는 프로세서; 및 터미널들 중 적어도 하나로 지연 정보를 전송하기 위한 송신기;를 포함한다.
일 실시예에 있어서, 동기화 유닛은 서버 내에 위치하고, 바람직하게는 SIP 서버, 제 1 및/또는 제 2 터미널, 또는 회의 브릿지(confernce bridge) 내에 위치한다.
또 다른 면에 있어서, 본 발명은 상기한 바와 같이 시스템에서 사용하기 위한 터미널과 관련되어 있고, 여기서 터미널은 동기화 유닛으로부터 동기화 요구를 수신하기 위해 및 멀티미디어 스트림을 수신하기 위해 구성되는 수신기; 하나 이상의 저지연 통신 채널들을 매개로 동기화 유닛으로 전송하기 위해 및 멀티미디어 신호를 정보 표현 유닛으로 전송하기 위해 구성되는 송신기; 및 정보 표현 유닛으로 멀티미디어 신호의 전송을 지연시키기 위한 가변 지연 유닛;을 포함한다.
유리한 실시예에 있어서, 본 발명에 따른 터미널은 동기화 정보에 기초하여 지연 정보를 계산하기 위해 구성되는 동기화 유닛을 더 포함한다. 이는 중앙 관리 동기화 유닛에 대한 필요를 제거하고 동기화 서비스가 운영자에 의해 제공되지 않는 네트워크 환경들에서 사용할 수 있다.
예시적 실시예에 있어서, 터미널은 셋톱 박스(set-top box), 홈 컴퓨터, 모바일 장치, 또는 게임 콘솔이다.
본 발명은 하나 이상의 컴퓨팅 장치들(computing devices)의 메모리 내에서 동작할 때, 바람직하게는 하나 이상의 네트워크 서버들 또는 터미널들의 메모리 내에서 동작할 때, 상기한 대로 본 발명의 방법 단계들을 실행하기 위해 구성되는 소프트웨어 코드 부분들(software code portions)을 포함하는 컴퓨터 프로그램 생산품(product)과 관련되어 있다.
본 발명은 첨부된, 본 발명에 따른 실시예를 도식적으로 나타낸 도면과 관련하여 더 설명될 것이다. 본 발명이 이 구체적 실시예에 한정하는 어떠한 방법 내에 있는 것은 아니라고 이해되어야 한다.
도 1은 중앙 동기화 시스템의 예시적 실시예를 나타낸 도면,
도 2는 세 개의 터미널들과 중앙 동기화 유닛을 포함하는 본 발명에 따른 시스템 내의 정보의 흐름을 나타낸 도면,
도 3은 분할된 시스템의 예시적 실시예를 나타낸 도면,
도 4는 동기화 세션의 예시적 실시예를 나타낸 도면,
도 5는 본 발명을 실행하기 위해 구성된 시스템의 예시적 구조를 나타낸 도면,
도 6은 본 발명을 실행하기 위해 구성된 시스템의 예시적 구조 내의 정보의 흐름을 나타낸 도면이다.
도 1은 본 발명의 첫 번째 실시예에 따른 시스템(100)을 도시한다. 시스템은방송국(102)(broadcast station: BS)을 포함하고, 바람직하게는 예컨대, 고대역 IP 네트워크와 같은, 수많은 액세스 노드들로의 운영자의 네트워크(106)를 매개로 멀티미디어 콘텐트를 전송하는 예컨대, IMS-타입 구조(architecture)를 갖는 IPTV 시스템을 포함한다. 액세스 노드들의 예들은 디지털 가입자 라인 액세스 멀티플렉서(DSLAM), 케이블 모뎀 터미네이션 시스템(CMTS), 광 액세스 노드 또는 에지 라우터를 포함한다.
멀티미디어 콘텐트는 하나 이상의 멀티미디어 스트림들(104)을 매개로 액세스 노드들로 전송될 수 있다. 전형적으로, 멀티미디어 스트림들은 하나 이상의 패킷-교환 네트워크를 통해 콘텐트를 노드들로 전송하기 위해 멀티미디어 유닛들, 즉 전송 프로토콜에 의해 이용되는 데이터의 기초 유닛들로 분할된다. 일 실시예에 있어서, 멀티미디어 스트림은 패킷화된(MPEG) 전송 스트림일 수 있다.
스트림 내의 오디오, 비디오 및/또는 문자 콘텐트는 예컨대, MPEG-2, MPEG-4 또는 다른 적합한 멀티미디어 데이터 압축 기술을 사용하여 압축될 수 있다. 더욱이, 실시간 전송 프로토콜(RTP) 및 실시간 전송 제어 프로토콜(RTCP)과 같은 전송 프로토콜이 네트워크를 통해 IPTV 콘텐트를 스트리밍하는데 이용될 수 있다. RTCP는 RTP 흐름을 위한 대역외(out-of-band) 제어 정보를 제공한다. RTP에 의해 제공된 서비스들은 스트림 내의 연속적인 프레임들이 정확한 시간에서 및 정확한 시간 간격 내에서 실행되도록 하기 위해 하나의 스트림 및 연관된 스트림들 내의 패킷들의 동기화를 허용하는 시퀀스 넘버링, 타임 스탬핑, 및 인계 감시(delivery monitoring)를 포함한다.
각 액세스 노드는 하나 이상의 정보 표현 유닛들(information presentation units: 116a, 116b)과 각각 연결된, 한 세트의 터미널들(108a, 108b)과 연결된다. 일 실시예에 있어서, 터미널은 예컨대, 셋톱 박스 또는 그와 같은, 정보 표현 유닛과 연결된 조건부 액세스 유닛일 수 있다. 다른 실시예에 있어서, 터미널은 정보 표현 유닛 내에 위치하는 하드웨어 유닛 또는 조합된 하드웨어/소프트웨어 유닛일 수 있다. 터미널들의 세트들은 하나 이상의 IPTV 서비스들이 전송될 수 있는 터미널들의 그룹을 형성한다. 정보 표현 유닛은 텔레비전, PC, PDA, 또는 어떠한 다른 사용자에게 멀티미디어 콘텐트를 표현할 수 있는 장치일 수 있다. 터미널은 터미널로 멀티미디어 내의 TV 채널을 전송하는 액세스 노드를 요구하기 위해 인터넷 그룹 매니지먼트 프로토콜(Internet Group Management Protocol: IGMP)을 사용할 수 있다.
본 발명에 따른 방법의 제 1 단계에 있어서, 사용자들의 터미널들 사이의 통신 세션이 설립된다. 이 통신 세션은 하나 이상의 저지연 통신 채널들(110a, 110b)을 포함하고, 서비스의 사용자들 사이에 실시간 통신을 제공하는 특정 서비스에 의해 구성되며, 게다가 동시간에, 모든 사용자들이 실질적으로 동기화되는 방법으로 같은 TV 프로그램을 시청할 수 있게 한다.
서비스의 질(QoS) 요구사항 때문에, 이러한 통신 세션은 보이스(voice), 비디오, 및/또는 문서 데이터를 교환하기 위한 하나 이상의 저지연 통신 채널들을 이용한다. 본질적인 저지연 통신 채널은 단지 가장 좋은 효율의 QoS를 제공하는 대신에 구제적인 트래픽 플로우(traffic flows)들이 우선시되는 운영자-제어 네트워크에 의해 획득될 수 있다. 예컨대, 이러한 네트워크들에 있어서, VoIP 채널은 약 150ms의 QoS 하락 없이 최대로 허용가능한 (한-방향) 레이턴시(latency)를 가질 수 있다. 저지연 통신 채널들의 다른 예들은 QoS-제어 IMS 세션들이고, 그리고 이더넷 전용 VLAN(dedicated Ethernet virtual LAN(VLAN), 전용 멀티 프로토콜 라벨 스위칭(dedicated Multi Protocol Label Switching: MPLS) 통로, 전용 IP 디프서브 스트림(Diffserv stream)을 사용하여 설치될 수 있다. 선택적으로 저지연 통신 채널은 패킷화된 스트림의 채널과 완전히 독립된 전송 기반구조를 사용할 수 있다. 예컨대, 스트림이 DVB-H 및 저지연 통신 채널을 매개로 수신되는 모바일 TV 시나리오는 USSD(Unstructured Supplementary Service Data) 또는 GSM/UMTS 네트워크를 통한 다른 저지연 채널에 의해 제공된다. 이러한 저지연 통신 채널들은 전형적으로, 다른 루트들, 버퍼들 및 QoS 세팅들을 사용하고, 따라서 예컨대, 멀티캐스트 스트림들과 같은 TV 신호들의 위해 사용되는 통신 통로들은 네트워크 및 화질의 효율적인 사용을 위해 최적화된다. 전형적으로, SIP(Session Initiation Protocol)는 세션을 세팅하기 위해 이용된다. 더욱이, RTP 및 RTCP는 미디어 스트림들 및 연관된 대역외 제어 정보의 전송을 위해 이용된다.
세션 내의 터미널들 사이의 하나 이상의 저지연 통신 채널들은 또한 터미널들 사이의 동기화 정보를 교환하기 위해 이용될 수 있다. 이는 저지연 통신 채널들 내에 사용되는 하나 이상의 프로토콜들을 통해 동기화 프로토콜을 피기백(piggybacking) 방식으로 전송함으로써 달성될 수 있다. 예컨대, 동기화 정보는 SIP 세션 내의 RTP 스트림에 의해 전송된다.
선택적으로 동기화 프로토콜은 SIP 세션의 일부로서 그것의 고유한 전용 저지연 통신 채널을 사용할 수 있고, 또는 SIP 시그널링(signaling)이 저지연 통신 채널을 통해 전송된다면, SIP INFO 메세지와 같은 인-세션(in-session) SIP 시그널링을 사용할 수 있다.
일 실시예에 있어서, 저지연 통신 채널(110a, 110b)은 제 1 터미널(4a) 및 동기화 유닛을 포함하는 (IPTV) 서버 사이의 제 1 방송 세션(예컨대, ETSI TISPAN TS 182 027, 절 8.3.1 내에 설명된 대로의 방송 세션), 및 제 2 터미널 및 (IPTV) 서버 사이의 제 2 방송 세션의 일부로서 구성될 수 있다. 따라서, 동기화 정보는 방송 세션의 일부인 저지연 통신 채널에 의해 전송된다. 저지연 통신 채널이 방송된 IPTV 스트림으로서 같은 (방송) 세션의 일부임에도 불구하고, 그것은 요구되는 저지연 특성들을 실행시키기 위해 다른 QoS 특성들을 가질 수 있다.
선택적으로, 동기화 정보 패킷들은 통신 세션과 연관된 하나 이상의 RTP 스트림들 내에서 전송될 수 있다. 이 실시예에 있어서, SIP는 오디오, 비디오, 및/또는 문서 및 동기화 정보 패킷들을 위한 세분화된 RTP-스트림들을 생성한다. 더욱이, 동기화 정보는 하나 이상의 RTP 스트림들과 연관된 RTCP 스트림을 통해 또는, 선택적으로, 오디오, 비디오 및/또는 문서 스트림들을 부호화(복호화) 및/또는 압축(압축해제)시키기 위한 하나 이상의 코덱들을 통해 피기백 방식으로 전송될 수 있다.
이러한 실시예들 전부는 서비스의 사용자들간 실시간 통신을 제공하는 특정 서비스를 위한 현존하는 기반구조에 사용할 수 있고, 동시간에 서비스의 사용자들에 의해 시청되는 TV 프로그램들의 동기화에 사용할 수 있다.
동기화 정보를 교환하기 위한 저지연 통신 채널과 같은 하나 이상의 저지연 통신 채널들의 사용은 몇몇 선택적인 동기화 스킴들을 허용한다.
도 1을 참조하면, 사용자들 그룹으로 가는 터미널들의 출력의 동기화는 터미널들로 가는 하나 이상의 저지연 통신 채널들을 매개로 연결된 동기화 유닛(112)(SU)에 의해 실현된다. 동기화 유닛(SU)은 네트워크(106) 내에 예컨대, 어플리케이션(application) 서버 또는 전용 동기화 서버와 같은 서버 내의 기능 유닛(functional unit)으로서 위치할 수 있다. 터미널들이 네트워크(106) 내에서 네트워크 지연들을 위해 보상하는 것은 허용한다(예컨대, 네트워크 내의 프로세싱-(processing-), 큐잉-(queuing-), 전송(transission-) 및 전파 지연들(propagation delays)과 링크 또는 노드가 너무 많은 데이터를 전송할 때, 일어나는 네트워크 혼잡에 의해 발생되는 지연). 이를 위해, 각 터미널은 표현 유닛들(presentation units)로 전송되는 스트림의 전송을 지연시킬 수 있는 가변 지연 버퍼(114a, 114b)와 같은 가변-지연 유닛을 포함한다.
일 실시예에 있어서, 가변 지연 유닛과 동기화 유닛(SU)은 클라이언트-서버(client-server) 타입 모델 내에서 실행될 수 있고, 여기서 가변 지연 유닛은 동기화 클라이언트로서 기능하고 동기화 유닛은 동기화 서버로서 기능한다. 동기화 클라이언트(가변 지연 유닛)는 동기화 상태 정보기 동기화 서버(동기화 유닛)로 적합한 프로토콜을 사용하여 전송되는 것 및 동기화 세팅 명령들이 동기화 서버로부터 수신되는 것을 가능케 하는 프로토콜 소켓을 가질 수 있다. 동기화 상태 정보는 스트림 수신(즉, 어떤 미디어 유닛이 수신되는지)과 현재 지연 세팅들 상의 미디어 유닛 참조 정보(media unit reference information)를 포함할 수 있다.
미디어 유닛 참조 정보는 패킷화된 스트림 내에 구제적인 포인트로 지시어를 제공한다. 이 지시어는 프레임 넘버, 타임 스탬프들, 또는 시퀀스 넘버들을 포함할 수 있다. 미디어 유닛 참조 정보는 또한 수신된 미디어 스트림의 인지된 프레임률(시간 유닛당 프레임들)을 포함할 수 있다. 이런 식으로, 동기화 유닛은 심지어 다른 수신된 프레임률을 갖는 터미널들이 목적지간 동기화 내에 관여할 때에도 지연 정보를 계산할 수 있다.
동기화 세팅 명령들은 가변 지연 유닛을 세팅하는 명령들을 포함할 수 있다.
동기화 서버(동기화 유닛)와 동기화 클라이언트(가변 지연 유닛)는 동기화 세션들을 초기화 및 종료시키기 위해 구성된다. 동기화 세션은 동기화 클라이언트가 초대 메세지를 동기화 서버로, 또는 반대로 전송할 때 초기화된다. 동기화 세션 중에, 동기화 서버와 동기화 클라이언트는 동기화 상태 정보 및 동기화 세팅 명령들을 교환할 수 있다. 동기화 세션은 동기화 클라이언트가 종료 메세지를 동기화 서버로, 또는 반대로 전송할 때 종료된다. 동기화 서버와 동기화 클라이언트는 초대를 수락하는, 또는 동기화 세션의 종료를 확인하는 답신 메세지를 전송할 수 있다.
일반적으로 본 발명에 따른 동기화 방법과 관련된 상기 설명된 타입의 정보들 전부는 동기화 정보로서 관련될 수 있다.
도 1은 동기화 유닛(112)이 중심이 되어 저지연 통신 채널(110a, 110b)을 매개로 터미널들로부터 동기화 정보를 수집하고 각 터미널 내에서 가변 지연 버퍼를 위한 이러한 정보 지연 정보의 기초를 계산하는 동기화 스킴을 도시한다. 동기화 유닛들에 의해 이용되는 예시적인 알고리즘은 프레임률, 즉 스트리밍 콘텐트(예컨대, 비디오)의 초당 프레임들의 수가 알려져 있는 것으로 가정한다.
동기화 유닛(SU)과 터미널들(ET) 사이의 정보 전송은 도 2의 플로우 다이어그램(200)에 보다 상세하게 도시된다. 첫 번째 단계(202)에서, 동기화 유닛은, 바람직하게는 저지연 통신 채널을 매개로, 터미널들이 스트림 내의 특정 미디어 유닛(프레임)의 참조 정보를 동기화 유닛으로 되돌려 전송하는 것을 요구한다. 결론적으로 터미널들은 이러한 정보, 즉 전형적으로 터미널들에서 수신된 프레임 넘버를 포함하는 프레임의 RTP 정보를 저지연 통신 채널을 매개로 동기화 유닛으로 전송할 것이다(단계(204)). 다음으로, 동기화 유닛(112)은 타임 스탬프를 프레임 넘버에 더할 수 있고 프레임 넘버들 중 하나를 선택할 수 있으며, 바람직하게는 참조 프레임으로서 터미널들에 의해 보고된 가장 낮거나 가장 높은 넘버를 선택할 수 있고, 또한 각 터미널에 대해 알려진 프레임률을 사용하여 이 참조 프레임과 관련된 시간을 계산할 수 있다. 그런 다음, 동기화 유닛은 가장 "지연된(lagged)" 터미널을 정의하고 다른 터미널 또는 터미널들을 위해 지연들을 계산하고(단계(206)) 결론적으로 이러한 지연들을 전송하며, 바람직하게는 저지연 통신 라인을 매개로 터미널들로 지연들을 전송한다(단계(208)).
도 2를 참조하면, 동기화에 의해 수행되는 단계들 중 일부는 아래에 좀 더 상세하게 도시된다.
동기화 유닛(112)은 터미널 ET1, ET2 및 ET3으로부터 다음의 미디어 유닛 참조 정보를 수신한다.
ET1은 프레임 6389를 수신한다.
ET2는 프레임 6395를 수신한다.
ET3은 프레임 6375를 수신한다.
참조 정보 수신 중에 동기화 유닛(SU)은 타임 스탬프를 더한다.
ET1은 프레임 6389를 수신한다, 14:46:59.2645(T1)를 수신한다.
ET2는 프레임 6395를 수신한다, 14:47:05.4112(T2)를 수신한다.
ET3은 프레임 6375를 수신한다, 14:46:59.7600(T3)을 수신한다.
저지연 채널 때문에, 동기화 유닛의 타임 스탬프들은 각 시간의 좋은 대표값이 되고, 프레임들은 터미널들에 의해 실제로 수신된다. 일단 스트림의 미디어 유닛을 수신한 마지막 참조 정보가 정의되면, 바람직하게는 터미널들이 미디어 참조 정보를 동기화 유닛으로 되돌려 전송할 수 있다. 선택적으로 터미널들은 또한 추가적인 내부 지연 정보(예컨대, 미디어 유닛 참조 정보를 결정하는 단계 및 미디어 유닛 참조 정보를 전송하는 단계 사이의 지연)를 동기화 유닛으로 되돌려 전송할 수 있다.
따라서, 초당 25 프레임의 예시적인 프레임률이 주어진다면, 각 터미널에 대한 가장 낮은 프레임 넘버를 위한 클락 타임은, 즉 프레임 6375는 다음과 같이 동기화 유닛에 의해 계산될 수 있다.
제 1 터미널은 약 T1-(6389-6375)/25 = 14:46:58.7045 (T1')에서 프레임 6375를 수신하고, 제 2 터미널은 약 T2-(6395-6375)/25 = 14:47:04.6112 (T2')에서 프레임 6375를 수신하며 제 3 터미널은 약 T3 = 14:46:59.7600 (T3'=T3)에서 프레임 6375를 수신한다.
ET1은 14:46:58.7045 (T1')에서 프레임 6375를 수신한다.
ET2은 14:47:04.6112 (T2')에서 프레임 6375를 수신한다.
ET3은 14:46:59.7600 (T3'=T3)에서 프레임 6375를 수신한다.
가장 "지연된" 터미널, 즉 참조 프레임 6375를 마지막으로 수신한 터미널은 터미널 ET2이다. 최종적으로, 동기화 유닛은 각 터미널에 대한 지연들(D1, D2, D3)을 정의한다.
ET1에 대한 지연 D1 = T2' - T1' = 5.9067
ET2에 대한 지연 D2 = 0
ET3에 대한 지연 D3 = T2' - T3' = 4.8512
이러한 지연들은 결론적으로 터미널들로 전송되고, 바람직하게는 저지연 통신 채널을 매개로 전송되며 표현 유닛으로의 스트림 전송을 지연시키기 위한 가변 지연 버퍼에 의해 사용된다. 이런 식으로 본질적으로 전송된 스트림 내의 특정 프레임(미디어 유닛)의 콘텐트는 도 1에 도식적으로 지시된 것과 같이, 동시간 Tout에서 그룹 내의 모든 사용자들에게 전송된다.
실시예에 있어서, 동기화 유닛은 저지연 채널들을 매개로 목적지간 동기화와 연관된 모든 터미널들로부터 프레임 넘버들을 요구한다. 모든 터미널들은 요구를 수신하는 중에, 즉시 스트림 내에 마지막으로 수신된 미디어 유닛의 참조 정보를 정의하고, 요구된 미디어 유닛 참조 정보를 저지연 채널을 매개로 답신한다. 모든 미디어 유닛 참조 정보가 실질적으로 동시간에 정의됨에 따라 타임 스탬프들이 더이상 요구되지 않기 때문에, 동기화 유닛은 단지 프레임률과 수신된 프레임 넘버들만에 기초하여 지연들을 정의할 수 있다. 이는 동기화 유닛들 내의 클락의 사용을 제거하고 계산 프로세스 내의 단계들을 제거한다.
다른 실시예에 있어서, 많은 동기화 유닛들이 네트워크를 통해 분할될 때, 이용될 수 있다. 도 3은 이러한 분할된 시스템(300)의 예를 도시하고, 여기서 각 터미널(302, 304, 306)은 동기화 유닛(SU1, SU2, SU3)을 포함한다. 각 동기화 유닛은 하나 이상의 저지연 통신 채널들(308, 310)을 매개로 모든 다른 동기화 유닛들에게 미디어 유닛 참조 정보를 전송할 수 있다. 각 동기화 유닛은 가변 지연 유닛에 대한 적합한 지연 시간을 계산할 수 있고, 상기한 바와 유사한 방법으로 가변 지연 버퍼(312)를 사용하여 그것의 출력을 지연시킬 수 있다.
동기화 유닛은 예컨대, 소프트웨어 프로그램과 같은 동기화 함수를 호스팅(hosting)하는 네트워크 내의 서버일 수 있고, 또한 선택적으로 그것은 SIP 서버와 같은 서버 내의, 또는 하나 이상의 터미널들 내의, 또는 둘 이상의 터미널들의 미디어 스트림들을 연결하는 회의 브릿지 내의 기능 유닛일 수 있다.
실시예에 있어서, 계산된 지연 정보의 정확도를 더 개선하기 위해, 동기화 유닛은 예컨대, RTCP 정보 또는 왕복 시간을 주기적으로 폴링(polling)함으로써, 저지연 통신 채널 자신의 지연을 측정 또는 획득하고, 그리고 저지연 통신 채널에 의해 야기된 지연에 대한 스트림의 계산된 지연 정보를 조절한다.
도 4는 본 발명의 일 실시예에 따른 동기화 클라이언트(SC)와 동기화 서버(SynchS) 사이의 동기화 세션의 예시적 메세지 흐름을 도시한다. SC와 SynchS는 IMS-타입 구조 내에서 실행될 수 있고, 여기서 동기화 클라이언트는 사용자 장비(User Equipment: UE)의 대표적인 함수일 수 있고 동기화 서버(SynchS)는 ETSI 기술 명세서 TS 182 027에서 정의한 대로 IPTV 서비스 제어 함수(SCF)의 대표적 함수일 수 있다.
이 실시예에 있어서, 동기화 정보의 교환을 초기화, 유지 및 종료하기 위한 동기화 세션은 ETSI TISPAN (TS 182 027, 절 8.3.1)에 설명된 대로 방송 세션의 일부로서 설치된다. 즉, 동기화 세션을 셋업, 유지, 종료하기 위한 참조 포인트(인터페이스 또는 프로토콜)는 SCF와 함께 방송 세션을 구성하기 위해 UE에 의해 이용되는 Gm (TS 182 027, 절 6.3) 및 ISC (TS 182 027, 절 6.8) 참조 포인트들을 통해 전송된다. 동기화 세션 내의 동기화 정보의 교환은 동기화 세션 초기화의 일부로서 구성되는 저지연 통신 채널 내에서 전송된다.
방송 세션과 동기화 세션을 셋업하는 프로세스는 다음의 단계를 포함한다.
첫 번째 단계(400)에서, 방송 세션은 TS 182 027, 절 8.3.1에서 설명된 규정에 따라 UE(SC를 포함하는)와 SCF(SynchS를 포함하는) 사이에서 셋업된다. 두 번째 단계(402)에서, SC는 그것이 목적지간 동기화 프로세스에 관여하기 원한다는 것을 지시하면서 SynchS로 동기화 초기화 요구를 전송한다. 요구는 동기화되려고 하는 방송 채널의 BC서비스Id를 포함한다. 이 메세지와 모든 다음의 메시지들은 첫 번째 단계에서 설치된 방송 세션 내에서 전송된다. 세 번째 단계(404)에서 SynchS는 목적지간 동기화 프로세스 내의 SC의 관여를 확인한다. 네 번째 단계(406)에서, SC는 그것의 동기화 상태 정보를 SynchS로 전송한다. 다섯 번째 단계(408)에서 SynchS는 복수의 SC로부터 동기화 상태 정보를 합산하고 각 SC에 대한 적합한 동기화 세팅을 계산한다. 수집된 동기화 상태 정보로부터 동기화 세팅 명령들을 계산하기 위한 알고리즘의 예들은 도 2와 관련하여 상기한 바와 같은 알고리즘을 사용하여 계산될 수 있다. 여섯 번째 단계(410)에서, SynchS는 동기화 세팅 명령을 SC에 전송한다. 단계들(406~410)은 정기적인 시간 간격에서 반복될 수 있다. 세션이 종료되는 것이 요구될 때, 일곱 번째 단계(412)에서, SC는 그것이 목적지간 동기화 프로세스 내에서 더이상 동작하지 않을 것을 지시하면서, 동기화 종료 요구를 전송한다. 여덟 번째 단계(414)에서, SynchS는 목적지간 동기화 프로세스 내에서 SC의 관여의 종료를 확인한다.
선택적으로, SC는 방송 세션 내에서 연속적인 및/또는 동시에 복수의 동기화 세션들을 초기화 및 종료할 수 있다.
또 다른 실시예에 있어서, 어떻게 동기화 세션이 초기화될 수 있는지에 대한 다른 예는 도 5에 보다 상세하게 도시된다. 도 5는 ETST TISPAN에 의해 정의된 대로 예시적 IMS-기초 IPTV 구조를 도시한다. 예컨대, 구조는 시나리오에 이용될 수 있고, 여기서 IMS-기초 IPTV 서비스의 두 명의 가입자들은 동기화 방식으로 같은 TV 프로그램(예컨대, 축구 경기)을 시청하기를 원하고 동시간에 (비디오) 전화 또는 채팅에 의해 통신 하기를 원한다. 조건에 맞는 사용자 경험을 위해 두 TV 모두의 IPTV 스트림들은 실질적으로 동기화되어야 한다(예컨대, 당신이 TV 상에서 실제 골을 보기 전에 당신의 친구가 '골!'이라고 외치는 것을 피하기 위해).
필요한 동기화의 충분한 수준을 획득하기 위해, 도 6의 플로우 다이어그램(600)에 의해 도시된 다음의 단계들이 수행된다.
먼저, 사용자는 세션 변형을 요구함으로써 현존하는 동기화되지 않은 IPTV 방송 세션을 위한 동기화가 가능하기를 원할 수 있다(미디어 분할 함수(502)(MDF)가 전송 스테이션이고 IPTV 방송 세션(504)이 패킷화된 스트림인 경우)(단계(604)). 세션 변형은 (세션 설명 프로토콜(SDP)을 사용하는) 업데이트된 세션 설명을 포함하는 서비스 제어 함수(508)(SCF)로 또는 반대로 SIP INVITE 메세지를 전송하는 사용자 장비(UE)(506)(터미널)를 포함한다. 세션 설명은 (예컨대, BC서비스Id에 의해 지시되는) IPTV 스트림이 동기화되야 하는지에 대한 정보를 포함하고 동기화 세션과 관련된 UE들을 포함한다. SIP INVITE 메세지는 코어 IMS(512)(단계들(604, 608)) 내에 위치한 프록시 콜 세션 제어 함수(510)(Proxy Call Session Control Function: P-CSCF)를 매개로 라우팅되고, 여기서 P-CSCF는 동기화 정보를 위한 저지연 통신 채널을 보장하기 위해, 기초 전송 함수(516)(BTF) 내의 네트워크 자원들을 저장하는 자원 허용 및 제어 서브시스템(514)(Resources Admission and Control Subsystem: RACS)으로 세션 설명 정보를 전송한다(단계 (606)).
더욱이, SCF(508)(또는 SCF가 요구를 초기화했다면 UE)는 요구를 수락할 수 있고(단계(610)), 미디어 동기화 어플리케이션 서버(MSAS)(동기화 유닛)가 목적지간 동기화를 위한 동기화 세션을 시작하도록 명령할 수 있다. 이는 만약 MSAS가 SCF 내에 위치한다면, 인터넷 프로토콜을 이용하여 달성될 수 있고, 또는 선택적으로 예컨대, MSAS가 IMS 구조의 미디어 제어 함수(518)(MCF) 내에 위치한 때에는 SIP 프로토콜이 이용될 수 있다. MCF는 IPTV 미디어 함수(520)(MF)의 일부이다.
결론적으로, 변형된 방송 세션의 일부로서(현재 RACS에 의해 저장되는 저지연 통신 채널을 포함하면서) 목적지간 동기화(세션)에 관여하는 UE들은 그들의 (동기화될 스트림의 미디어 유닛 참조 정보를 포함하는)동기화 상태 정보를 MSAS에 전송한다(단계(612)).
그런 다음 MSAS는 각 UE를 위한 가변 지연 유닛 내의 사용을 위한 지연 정보를 계산하고 지연 정보(동기화 세팅 명령들)를 관여한 UE들에게 전송한다.
상기한 예시적 실시예에 있어서, (IPTC 방송과 같은) 패킷화된 스트림은 IMS-기초 IPTV 구조(TS 182 027)로부터 알려진 미디어 분할 함수(MDF)로 부터 멀티-캐스팅된 정규 방송 채널을 사용한다. 이 방송 채널은 패킷화된 스트림이 소스와 목적지 사이에서 겪는 다양한 조작들 때문에 상대적으로 느릴 수 있다. 더욱이, 그것은 전형적으로 단일 방향성을 갖는다. 방송 세션은 예컨대, 방송 채널을 위한 대역을 저장하기 위해 포트를 열고 충전을 가능케 하도록 셋업된다. 본 발명에 따른 동기화 세션을 포함하는 방송 세션은 바람직하게는 다른 통신 통로를 사용하는 동기화 정보를 교환하기 위한 저지연 채널을 가진 SIP 시그널링 세션이다. 정규 방송 채널과는 반대로, 이 다른 통신 통로는 (MSAS를 포함하는) 서비스 제어 함수와 (SC를 포함하는) UE 사이의 상대적으로 빠른 양 방향성을 갖는 저지연 통신 채널이다.
본 발명은 상기 설명한 실시예에 제한되지 않고, 함께 기재된 청구범위의 범위 내에서 변형될 수 있다.

Claims (16)

  1. 터미널들과 동기화 유닛(SU)(112) 사이에, 150ms 이하의 지연을 가지는 하나 이상의 통신 채널(110a, 110b)을 제공하는 단계;
    동기화 유닛이 상기 통신 채널을 매개로 터미널들 중의 적어도 하나로부터 수신되는 동기화 정보를 기초로 지연 정보를 계산하는 단계; 및
    터미널들의 출력이 동기화되도록 적어도 하나의 터미널이 그 출력을 지연시키는 것을 허용하는 터미널들 중 적어도 하나에 지연 정보를 전송하는 단계;를 포함하고,
    상기 통신 채널은 터미널들 사이의 통신 세션의 일부로서 설치되고,
    상기 동기화 유닛은 상기 터미널들 중의 하나에 위치하고,
    상기 동기화 정보는 상기 통신 채널에서 사용되는 RTCP, RTP, 또는 SIP 중 어느 하나인 프로토콜을 통해 피기백(piggybacking) 방식으로 전송되는 것을 특징으로 하는 적어도 두 개의 터미널들(108a, 108b)의 출력을 동기화하기 위한 방법.
  2. 제 1 항에 있어서,
    각 터미널이 멀티미디어 신호를 수신하기 위한 입력과 멀티미디어 신호를 정보 표현 유닛(116a, 116b)으로 전송하기 위한 출력을 갖추어 구성되고, 각 터미널이 출력 신호를 지연시키기 위한 가변 지연 유닛(114a, 114b)을 갖추어 구성되며, 방법이,
    멀티미디어 스트림을 터미널의 입력으로 전송하는 단계; 및
    수신된 지연 정보에 따라 출력 신호를 지연시키는 단계;를 더 포함하는 것을 특징으로 하는 방법.
  3. 제 1 항에 있어서,
    방법은, 각 터미널이 상기 통신 채널을 매개로 동기화 유닛으로 동기화 정보를 전송하는 단계;를 더 포함하고,
    동기화 정보가 멀티미디어 스트림 내의 미디어 유닛의 위치를 나타내는 미디어 유닛 참조(MUR) 정보를 포함하는 것을 특징으로 하는 방법.
  4. 제 3 항에 있어서,
    MUR 정보가 프레임 넘버(frame number) 또는 시퀀스 넘버(sequence number)를 포함하는 것을 특징으로 하는 방법.
  5. 제 3 항에 있어서,
    하나 이상의 타임 스탬프들(time stamps)을 터미널로부터 수신되는 MUR 정보에 더하는 단계;
    터미널들에 의해 수신되는 멀티미디어 스트림의 프레임률에 대한 정보를 제공하는 단계;
    프레임률 정보 및 타임 스탬핑된 MUR 정보에 기초하여 각 터미널에 대한 지연 정보를 계산하는 단계; 및
    지연 정보를 터미널들 중 적어도 하나로 전송하는 단계;를 더 포함하는 것을 특징으로 하는 방법.
  6. 제 3 항에 있어서,
    동기화 유닛이 상기 통신 채널을 매개로 터미널들로 동기화 요구를 전송하는 단계;
    터미널들에 의해 수신되는 멀티미디어 스트림의 프레임률에 대한 정보를 제공하는 단계;
    프레임률 정보 및 MUR 정보에 기초하여 각 터미널에 대한 지연 정보를 계산하는 단계; 및
    지연 정보를 터미널들 중 적어도 하나로 전송하는 단계;를 더 포함하는 것을 특징으로 하는 방법.
  7. 삭제
  8. 적어도 두 개의 터미널들의 출력을 동기화하기 위한 시스템으로서,
    상기 시스템은 적어도 두 개의 터미널 중의 적어도 하나에 위치한 동기화 유닛을 포함하고, 상기 동기화 유닛은 150ms 이하의 지연을 가지는 하나 이상의 통신 채널을 매개로 적어도 하나의 터미널과 연결되고,
    동기화 유닛이 상기 통신 채널을 매개로 터미널들로부터 수신되는 동기화 정보에 기초하여 지연 정보를 계산하기 위해, 및 터미널들의 출력이 동기화되도록 각 터미널이 그 출력을 지연시키는 것을 허용하는 터미널들 중 적어도 하나에 지연 정보를 전송하기 위해 구성되고,
    상기 통신 채널은 적어도 두 개의 터미널들 사이의 통신 세션의 일부로서 설치되고,
    상기 동기화 정보는 상기 통신 채널에서 사용되는 RTCP, RTP, 또는 SIP 중 어느 하나인 프로토콜을 통해 피기백 방식으로 전송되는 것을 특징으로 하는 적어도 두 개의 터미널들의 출력을 동기화하기 위한 시스템.
  9. 제 8 항에 있어서,
    각 터미널이 멀티미디어 신호를 수신하기 위한 입력과 멀티미디어 신호를 정보 표현 유닛으로 전송하기 위한 출력을 갖추어 구성되고, 각 터미널이 지연 정보에 따라 출력 신호를 지연시키기 위한 가변 지연 유닛을 갖추어 구성되며,
    시스템이 미디어 유닛들을 포함하는 멀티미디어 스트림을 터미널들로 전송하는 스테이션(station)을 더 포함하는 것을 특징으로 하는 시스템.
  10. 제 8 항에 따른 시스템에서 사용하기 위한 동기화 유닛으로서,
    150ms 이하의 지연을 가지는 하나 이상의 통신 채널을 매개로 터미널들로부터 동기화 정보를 수신하기 위한 수신기;
    수신되는 동기화 정보에 기초하여 지연 정보를 계산하기 위해 구성되는 프로세서; 및
    터미널들 중 적어도 하나로 지연 정보를 전송하기 위한 송신기;를 포함하고,
    상기 통신 채널은 터미널들 사이의 통신 세션의 일부로서 설치되고,
    상기 동기화 정보는 상기 통신 채널에서 사용되는 RTCP, RTP, 또는 SIP 중 어느 하나인 프로토콜을 통해 피기백 방식으로 전송되는 것을 특징으로 하는 동기화 유닛.
  11. 제 10 항에 따른 동기화 유닛을 포함하고, 제 8 항에 따른 시스템에서 사용하기 위한 터미널로서,
    상기 터미널은,
    동기화 유닛으로부터 동기화 요구를 수신하도록 구성되고, 그리고 멀티미디어 스트림을 수신하도록 구성되는 수신기;
    동기화 요구에 응답해서, 150ms 이하의 지연을 가지는 하나 이상의 통신 채널을 매개로 동기화 정보를 동기화 유닛으로 전송하도록 구성되고, 그리고 멀티미디어 신호를 정보 표현 유닛으로 전송하도록 구성되는 송신기; 및
    정보 표현 유닛으로 멀티미디어 신호의 전송을 지연시키기 위한 가변 지연 유닛;을 더 포함하고,
    상기 통신 채널은 상기 터미널과 적어도 하나의 다른 터미널 사이의 통신 세션의 일부로서 설치되고,
    상기 동기화 정보는 상기 통신 채널에서 사용되는 RTCP, RTP, 또는 SIP 중 어느 하나인 프로토콜을 통해 피기백 방식으로 전송되는 것을 특징으로 하는 터미널.
  12. 제 11 항에 있어서,
    터미널이 셋톱 박스(set-top box), 홈 컴퓨터, 모바일 장치, 또는 게임 콘솔인 것을 특징으로 하는 터미널.
  13. 삭제
  14. 하나 이상의 컴퓨팅 장치들(computing devices)의 메모리 내에서 동작할 때 제 1 항에 따른 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체.
  15. 삭제
  16. 삭제
KR1020107010741A 2007-12-05 2008-12-05 터미널들의 출력을 동기화하기 위한 방법 및 시스템 KR101374408B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
EP07023550A EP2068528A1 (en) 2007-12-05 2007-12-05 Method and system for synchronizing the output of end-terminals
EP07023550.2 2007-12-05
EP08016109.4 2008-09-12
EP08016109A EP2164224A1 (en) 2008-09-12 2008-09-12 Method and system for synchronizing the output of end-terminals
PCT/EP2008/010355 WO2009071321A1 (en) 2007-12-05 2008-12-05 Method and system for synchronizing the output of terminals

Publications (2)

Publication Number Publication Date
KR20100084659A KR20100084659A (ko) 2010-07-27
KR101374408B1 true KR101374408B1 (ko) 2014-05-14

Family

ID=40261467

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020107010741A KR101374408B1 (ko) 2007-12-05 2008-12-05 터미널들의 출력을 동기화하기 위한 방법 및 시스템

Country Status (6)

Country Link
US (1) US9237179B2 (ko)
EP (1) EP2232812B1 (ko)
JP (2) JP5529033B2 (ko)
KR (1) KR101374408B1 (ko)
CN (1) CN101889422B (ko)
WO (1) WO2009071321A1 (ko)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3949148B2 (ja) * 2005-09-06 2007-07-25 株式会社東芝 無線通信装置、受信装置、送信装置および通信制御プログラム
US9485467B2 (en) 2008-08-29 2016-11-01 Sony Corporation Information processing system and information processing devices
WO2011018368A1 (en) * 2009-08-12 2011-02-17 Koninklijke Kpn N.V. Dynamic rtcp relay
WO2011092244A1 (en) * 2010-01-27 2011-08-04 Koninklijke Kpn N.V. Method, system and device for synchronization of media streams
US8643696B2 (en) * 2011-01-19 2014-02-04 Broadcom Corporation Synchronizing media streams using time signal(s) from an independent time source
US8650324B2 (en) * 2011-04-27 2014-02-11 Skype System and method for reliable distributed communication with guaranteed service levels
CN103843356B (zh) * 2011-09-30 2018-06-08 英特尔公司 用于多流音频/视频同步的系统、方法和计算机可读存储介质
WO2013089430A1 (en) * 2011-12-12 2013-06-20 Samsung Electronics Co., Ltd. Method and apparatus for experiencing a multimedia service
FR2988254A1 (fr) * 2012-03-15 2013-09-20 Virdual Dispositif d'interactivite entre plusieurs medias
US9553756B2 (en) 2012-06-01 2017-01-24 Koninklijke Kpn N.V. Fingerprint-based inter-destination media synchronization
EP2704449A1 (en) * 2012-08-30 2014-03-05 Thomson Licensing Rendering time control
JP5978861B2 (ja) * 2012-08-31 2016-08-24 富士通株式会社 通信装置及び通信方法
CN102984678B (zh) * 2012-12-07 2015-07-29 华为技术有限公司 处理非结构化补充业务数据ussd业务的方法与装置
KR102020358B1 (ko) * 2013-03-14 2019-11-05 삼성전자 주식회사 단말 및 그 단말에서 애플리케이션 동기화 방법
JP6462230B2 (ja) * 2014-04-04 2019-01-30 Necプラットフォームズ株式会社 情報伝送における同時出力の方法、情報伝送における同時出力のシステム
EP3132613A1 (en) * 2014-04-15 2017-02-22 Telefonaktiebolaget LM Ericsson (publ) Synchronised social tv
US10129318B2 (en) * 2014-05-06 2018-11-13 Lattice Semiconductor Corporation Media stream data and control parameter synchronization
KR102202597B1 (ko) 2014-06-20 2021-01-13 삼성전자주식회사 이종망 기반 방송 서비스를 제공하는 방법 및 장치
US9992258B2 (en) * 2015-01-13 2018-06-05 Whatsapp Inc. Techniques for managing a remote web client from an application on a mobile device
DE102015001622A1 (de) * 2015-02-09 2016-08-11 Unify Gmbh & Co. Kg Verfahren zur Übertragung von Daten in einem Multimedia-System, sowie Softwareprodukt und Vorrichtung zur Steuerung der Übertragung von Daten in einem Multimedia-System
US9838571B2 (en) 2015-04-10 2017-12-05 Gvbb Holdings S.A.R.L. Precision timing for broadcast network
US9930627B2 (en) * 2015-06-29 2018-03-27 Ciena Corporation Metered interface
CN105338393A (zh) * 2015-10-29 2016-02-17 小米科技有限责任公司 媒体同步方法和装置
CN107968950A (zh) * 2016-10-20 2018-04-27 上海交通大学 一种基于异构网络的多媒体资源同步推送方法
CN109040208A (zh) * 2018-07-18 2018-12-18 广州多益网络股份有限公司 基于多客户端交互的数据同步方法、服务器、系统及介质

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6360271B1 (en) * 1999-02-02 2002-03-19 3Com Corporation System for dynamic jitter buffer management based on synchronized clocks
US6239793B1 (en) * 1999-05-20 2001-05-29 Rotor Communications Corporation Method and apparatus for synchronizing the broadcast content of interactive internet-based programs
JP2003235027A (ja) * 2002-02-12 2003-08-22 Matsushita Electric Ind Co Ltd 配信映像の同時再生方法、映像配信システムおよび端末装置
JP2005244605A (ja) * 2004-02-26 2005-09-08 Nippon Telegr & Teleph Corp <Ntt> ストリーミングコンテンツ配信制御システム、プログラム及び該プログラムを格納した記録媒体
US7539219B2 (en) * 2005-05-12 2009-05-26 Radioshack Corporation Method and apparatus for synchronization of digital multimedia packets
US7546118B2 (en) * 2005-10-20 2009-06-09 Sony Ericsson Mobile Communications Ab Coordinated distribution and playback of multimedia programs
CN100352270C (zh) * 2005-10-21 2007-11-28 西安交通大学 一种支持多源流媒体的同步播放控制方法
US8077707B2 (en) * 2005-11-18 2011-12-13 Sri International Systems and methods for digital stream denting
US8059662B2 (en) * 2006-04-18 2011-11-15 Harris Corporation System and method for controlling content and delivery of internet protocol television (IPTV) services
US20080022320A1 (en) * 2006-06-30 2008-01-24 Scientific-Atlanta, Inc. Systems and Methods of Synchronizing Media Streams
EP2053822A1 (en) 2007-10-23 2009-04-29 Koninklijke KPN N.V. Method and system for synchronizing the output of a group of end-terminals

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Yutaka Ishibashi and Shuji Tasaka, "A Group Synchronization Mechanism for Live Media in Multicast Communications," Proceedings of IEEE Globecom' 97, vol. 2, pp. 746-752 (1997.11.03.) *
Yutaka Ishibashi and Shuji Tasaka, "A Group Synchronization Mechanism for Live Media in Multicast Communications," Proceedings of IEEE Globecom' 97, vol. 2, pp. 746-752 (1997.11.03.)*

Also Published As

Publication number Publication date
US20100257280A1 (en) 2010-10-07
US9237179B2 (en) 2016-01-12
KR20100084659A (ko) 2010-07-27
CN101889422B (zh) 2014-07-09
JP5529033B2 (ja) 2014-06-25
JP2011509543A (ja) 2011-03-24
JP5788473B2 (ja) 2015-09-30
JP2014075831A (ja) 2014-04-24
WO2009071321A1 (en) 2009-06-11
EP2232812B1 (en) 2018-02-21
EP2232812A1 (en) 2010-09-29
CN101889422A (zh) 2010-11-17

Similar Documents

Publication Publication Date Title
US10034058B2 (en) Method and apparatus for distributing video
US10826958B2 (en) Content server media stream management
US10158577B2 (en) Devices, systems, and methods for adaptive switching of multicast content delivery to optimize bandwidth usage
US9854009B2 (en) Method and apparatus for enabling multimedia synchronization
US8831006B2 (en) Modification of live streams
US9832497B2 (en) Marker-based inter-destination media synchronization
EP2920938B1 (en) Processing of multimedia data
US10142387B2 (en) Distributed coordination of network elements for packet encapsulation
JP5497051B2 (ja) 信号の同期のための改善された方法、システム及び装置
CN101026572B (zh) 具有智能分组丢弃功能的视频分组复用器
CN1703087B (zh) 宽带电信系统及减少多媒体接收机信道切换延迟时间方法
CN101160900B (zh) 分组网络中多媒体实时传输的流同步方法及装置
EP2369840B1 (en) Channel switching method, device and system
Ishibashi et al. A group synchronization mechanism for stored media in multicast communications
US7665116B2 (en) Network architecture for real time delivery of video over lossy networks from remote locations
EP2158747B1 (en) Method and arrangement for improved media session management
US7079554B2 (en) System and method for synchronizing between communication terminals of asynchronous packets networks
US6987526B2 (en) Data transmission method and data transmission system
EP1606717B1 (en) Method and device for multimedia streaming
CA2674013C (en) Improved method, system and apparatus for synchronizing signals
US9973345B2 (en) Calculating and signaling segment availability times for segments of media data
US7084898B1 (en) System and method for providing video conferencing synchronization
EP3266218B1 (en) File format based streaming with dash formats based on lct
KR101054598B1 (ko) 무선 네트워크의 다중-사용자 서비스를 위한 리포팅
JP5270567B2 (ja) 複数のデバイスにわたるメディアストリームの同期方法およびシステム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
J201 Request for trial against refusal decision
AMND Amendment
E801 Decision on dismissal of amendment
B601 Maintenance of original decision after re-examination before a trial
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20120628

Effective date: 20131113

S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170224

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180223

Year of fee payment: 5