KR20090126733A

KR20090126733A - ＶｏＩＰ 단말을 위한 멀티미디어 링백 서비스 시스템 및그 방법

Info

Publication number: KR20090126733A
Application number: KR1020080052984A
Authority: KR
Inventors: 양재모; 나훈; 정양욱
Original assignee: 에스케이씨앤씨 주식회사
Priority date: 2008-06-05
Filing date: 2008-06-05
Publication date: 2009-12-09

Abstract

본 발명은 VoIP 단말을 위한 멀티미디어 링백 서비스 시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는 링백톤으로 송출할 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리하고, 분리된 오디오 및 비디오 데이터를 각각 RTP 규격에 따른 다양한 코덱별로 변환하여 연속적인 RTP 패킷으로 구성된 파일로 저장해두며, 발신 VoIP 단말기의 호 연결 요청시에 착신 VoIP 단말기의 서비스 가입자가 선택한 멀티미디어 컨텐츠의 오디오 및 비디오 파일을 각각 RTP 패킷 단위로 동기화하여 전송함으로써, 전송시의 시스템 부하를 줄이고 오디오/비디오 동기화를 효과적으로 구현할 수 있는 멀티미디어 링백 서비스 시스템 및 그 방법에 관한 것이다.

본 발명에 따른 VoIP 단말을 위한 멀티미디어 링백 서비스 시스템은, 인터넷망을 통해 컨텐츠 제공자로부터 제공받은 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리하고, 상기 분리된 오디오 및 비디오 데이터를 RTP 규격에 맞는 오디오 및 비디오 파일로 변환하여 저장하는 컨텐츠 관리부와; 상기 발신 VoIP 단말기로부터 상기 서비스 가입자의 착신 VoIP 단말기 측으로 호 연결 요청시, 상기 발신 VoIP 단말기 측으로 상기 서비스 가입자가 선택한 멀티미디어 컨텐츠를 구성하는 오디오 및 비디오 파일을 각각 RTP 패킷 단위로 스트리밍하는 컨텐츠 전송부;를 포함하여 구성되며, 상기 컨텐츠 전송부는, 상기 오디오 및 비디오 파일 각각에 대하여, 바로 이전에 전송된 RTP 패킷과 전송될 RTP 패킷 사이의 타임스탬프 차이로부터 슬립(sleep) 시간을 산출하고, 상기 산출된 슬립 시간에 따라 슬립(sleep)을 수 행한 후 RTP 패킷을 전송하는 점을 특징으로 한다.

VoIP, 링백, 멀티미디어 컨텐츠, 동기화, 스트리밍

Description

ＶｏＩＰ 단말을 위한 멀티미디어 링백 서비스 시스템 및 그 방법{A multimedia ring back service system for VoIP terminals and the method thereof}

VoIP(Voice over Internet Protocol)는 인터넷 프로토콜(IP)를 사용하여 음성정보를 전달하는 통신기술로서, 기존 인터넷망을 그대로 활용해 음성 데이터를 인터넷 프로토콜 상의 데이터 패킷 형태로 음성 신호를 전송하기 때문에, 사용자들이 시내전화 요금만으로 인터넷, 인트라넷 환경에서 시외 및 국제전화 서비스를 받 을 수 있으며, 음성 이외에도 동영상, 사진 등의 다양한 멀티미디어 정보를 주고받을 수 있는 장점이 있다.

VoIP 전화 서비스는 인터넷망을 통해 서로 연결되어 있는 다양한 VoIP 단말기(예를 들어, VoIP 응용 프로그램과 인터페이스가 장착되어 있는 통상의 컴퓨터 단말 또는 VoIP 서비스 전용으로 제작된 인터넷폰) 간의 음성 통신을 제공해주며, PSTN(Public Switched Telephone Network; 공중 전화 교환망) 또는 이동 통신망에 연결된 게이트웨이를 통하여 VoIP 단말기가 유선 전화나 이동통신단말기와 같은 다른 기종의 통신 기기와도 통신할 수 있도록 해준다.

VoIP 전화 서비스를 이용하여 통화하기 위해 발신단말기에서 착신단말기 측으로 다이얼링을 하면, 발신단말기에는 착신단말기의 사용자가 전화 벨소리를 듣고 전화를 받기까지 상대방에게 전화 호출신호가 가고 있다는 것을 알려주는 신호음이 울리게 된다. 이러한 신호음을 링백톤(Ring Back Tone) 혹은 통화 연결음이라고 하는데, 상대방이 전화를 받는 순간 발신단말기로의 링백톤 신호가 차단되면서 양 단말기 간의 통화로가 형성되어 서로간의 통화가 가능하게 된다.

최근들어서는 음성과 영상 정보를 모두 송수신할 수 있는 VoIP의 특성을 이용하여 음악 또는 음성 이외에, 아바타, 뮤직비디오, 동영상 광고 등의 다양한 멀티미디어 컨텐츠를 통화 대기 중인 발신단말기 측으로 제공하는 멀티미디어 링백 서비스가 개발되어 상용화되고 있는데, 사용자들의 취향이 점점 다양화되고 온라인 상에서 사용자 중심의 UCC에 대한 욕구가 증가하고 있는 상황을 고려해볼 때, 멀티미디어 링백 서비스는 앞으로 더욱더 각광을 받게될 것으로 예상되고 있다.

종래의 멀티미디어 링백 서비스로는 한국공개특허 제2005-07913호(발명의 명칭:세션 설정 프로토콜을 이용한 멀티미디어 링백 서비스 및 그 방법)가 있다. 상기 문헌에는 세션 설정 프로토콜을 지원하는 단말 간의 호 연결 과정에서 착신 단말의 가입자가 미리 설정한 다양한 멀티미디어 링백 컨텐츠를 발신 단말 측으로 송신해주는 멀티미디어 링백 서비스 제공 시스템 및 방법이 기재되어 있다.

그러나, 이러한 종래의 멀티미디어 링백 서비스는 멀티미디어 컨텐츠를 스트리밍하여 링백으로 송출하는 과정에서 기등록되어 있는 컨텐츠를 발신 단말의 미디어 재생 능력에 맞는 오디오/비디오 코덱으로 실시간으로 인코딩하는 과정이 요구되므로, 통화량이 많은 경우 스트리밍을 제공하는 서버에 큰 부하가 걸리게 되는 문제점이 있다.

또한, 종래의 멀티미디어 링백 서비스를 제공하는 서버는 통상적으로 실시간 OS(RTOS)가 아닌 LINUX 또는 SOLARIS 기반으로 구성되어 RTP(Real-time Transport Protocol) 패킷 간의 전송 간격을 10 ms 이하로 정확하게 제어할 수 없기 때문에, 멀티미디어 컨텐츠를 인코딩하여 오디오와 비디오 각각에 대한 RTP 패킷으로 변환하여 전송하는 과정에서 오디오/비디오의 동기화(syncronization)가 정확히 이루어지지 않을 수 있으며, 이로 인해 발신 VoIP 단말기 측에서 데이터 수신과 함께 멀티미디어 컨텐츠를 재생하는 과정에서 영상과 음성이 서로 일치하지 않아 사용자의 불편을 초래할 수 있는 문제점도 있다.

본 발명은 상기한 종래 기술에 따른 멀티미디어 링백 서비스의 문제점을 해결하기 위한 것이다. 즉, 본 발명의 목적은, 링백톤으로 송출할 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리하고, 분리된 오디오 및 비디오 데이터를 각각 RTP 규격에 따른 다양한 코덱별로 변환하여 연속적인 RTP 패킷으로 구성된 파일로 저장해둔 후, 발신 VoIP 단말기의 호 연결 요청시에 착신 VoIP 단말기의 서비스 가입자가 선택한 멀티미디어 컨텐츠의 오디오 및 비디오 파일을 별도의 인코딩 과정 없이 발신 VoIP 단말기 측으로 전송함으로써, 링백톤 전송시 소요되는 시스템 자원의 부하를 감소시키는 데에 있다.

또한, 멀티미디어 컨텐츠의 오디오 및 비디오 파일을 각각 RTP 패킷 단위로 동기화하여 전송함으로써, 실시간 OS를 지원하지 않는 시스템 상에서도 링백톤으로 제공되는 멀티미디어 컨텐츠의 오디오/비디오 동기화를 효과적으로 구현하는 데에 또 다른 목적이 있다.

상기의 목적을 달성하기 위한 기술적 사상으로서의 본 발명은, 인터넷망을 통해 컨텐츠 제공자로부터 제공받은 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리하고, 상기 분리된 오디오 및 비디오 데이터를 RTP 규격에 맞는 오디오 및 비디오 파일로 변환하여 저장하는 컨텐츠 관리부와; 상기 발신 VoIP 단말기로부터 상기 서비스 가입자의 착신 VoIP 단말기 측으로 호 연결 요청시, 상기 발신 VoIP 단말기 측으로 상기 서비스 가입자가 선택한 멀티미디어 컨텐츠를 구성하는 오디오 및 비디오 파일을 각각 RTP 패킷 단위로 스트리밍하는 컨텐츠 전송부;를 포함하여 구성되며, 상기 컨텐츠 전송부는, 상기 오디오 및 비디오 파일 각각에 대하여, 바로 이전에 전송된 RTP 패킷과 전송될 RTP 패킷 사이의 타임스탬프 차이로부터 슬립(sleep) 시간을 산출하고, 상기 산출된 슬립 시간에 따라 슬립(sleep)을 수행한 후 RTP 패킷을 전송하는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 시스템을 제공한다.

또한, 본 발명은 인터넷망을 통해 접속한 컨텐츠 제공자로부터 업로드된 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리한 후, 일련의 RTP 패킷(packet)으로 구성되는 오디오 및 비디오 파일로 각각 변환하여 저장하는 멀티미디어 컨텐츠 등록 단계와; 인터넷망을 통해 접속한 서비스 가입자에게 기등록되어 있는 멀티미디어 컨텐츠 목록을 제공하여, 서비스 가입자로부터 선택된 멀티미디어 컨텐츠의 식별 정보를 서비스 가입자의 정보와 함께 저장해두는 링백 컨텐츠 설정 단계와; 발신 VoIP 단말기로부터 서비스 가입자의 착신 VoIP 단말기 측으로의 호 연결 요청 메시지를 수신하면, 상기 링백 컨텐츠 설정 단계를 통해 서비스 가입자로부터 선택된 멀티미디어 컨텐츠를 발신 VoIP 단말기 측으로 제공하는 멀티미디어 컨텐츠 제공 단계;를 포함하여 구성되며, 상기 멀티미디어 컨텐츠 제공 단계는, 전송될 RTP 패킷의 타임스탬프 정보를 이용하여 첫번째 RTP 패킷 전송 시점으로부터 해당 RTP 패킷 전송 시점까지의 이론적 소요 시간을 산출하고, 실제 소요 시간이 상기 산출된 이론적 소요 시간과 동일하게 되도록 슬립(sleep)을 수행한 후 해당 RTP 패킷을 전송하는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 방법을 제공한다.

본 발명에 따른 VoIP 단말을 위한 멀티미디어 링백 서비스 시스템 및 그 방법은 발신 VoIP 단말기의 미디어 재생 능력에 따라 미리 저장된 오디오 및 비디오 파일 중에 적절한 코덱으로 변환된 파일을 선택하여 즉시 스트리밍하기 때문에, 링백 컨텐츠 전송시 실시간 인코딩에 따른 시스템 부하를 대폭 경감할 수 있는 효과가 있다.

또한, 멀티미디어 컨텐츠의 오디오 및 비디오 파일을 각각 RTP 패킷 단위로 동기화하여 전송함으로써, 실시간 OS를 지원하지 않는 시스템 상에서도 링백톤으로 제공되는 멀티미디어 컨텐츠의 오디오/비디오 동기화를 구현하여 사용자에게 양질의 서비스를 제공할 수 있는 효과도 있다.

이하, 본 발명의 바람직한 실시예를 첨부 도면에 의거하여 상세하게 설명하기로 한다.

도 1은 본 발명의 일실시예에 따른 멀티미디어 링백 서비스 시스템의 구성도이다.

도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 멀티미디어 링백 서비스 시스템은 컨텐츠 제공자의 PC(10) 및 서비스 가입자의 PC(20)와 인터넷망을 통해 연결되어, 컨텐츠 제공자로부터 멀티미디어 컨텐츠를 전송받고, 서비스 가입자 로부터 기저장된 멀티미디어 컨텐츠 목록중에서 링백톤으로 사용될 멀티미디어 컨텐츠를 선택받는 웹서버(100)와, 웹서버(100)로부터 컨텐츠 제공자가 제공한 멀티미디어 컨텐츠를 전송받아 등록하고, 전송된 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리하여 RTP 규격에 맞는 오디오 및 비디오 파일로 변환하여 저장하는 컨텐츠 관리부(200)와, 착신 VoIP 단말기(700)의 서비스 가입자가 선택한 멀티미디어 컨텐츠를 구성하는 오디오 및 비디오 파일을 서로 동기화하여 발신 VoIP 단말기(600) 측으로 스트리밍하는 컨텐츠 전송부(400)와, 발신 VoIP 단말기(600)와 착신 VoIP 단말기(700) 간의 호를 중계하는 호처리부(500)를 포함하여 구성된다.

웹서버(100)는 컨텐츠 제공자의 PC(10) 측으로 컨텐츠 업로드를 위한 웹페이지를 제공하여 컨텐츠 제공자로부터 멀티미디어 컨텐츠를 업로드받아 컨텐츠 관리부(200)로 전달해주며, 서비스 가입자의 PC(20) 측으로 컨텐츠 관리부(200)에 기저장되어 있는 멀티미디어 컨텐츠 목록을 제공하여 서비스 가입자의 선택에 따라 해당 가입자의 정보와 서비스 대상이 되는 멀티미디어 컨텐츠의 식별정보를 컨텐츠 관리부(200)에 저장한다. 여기서, 웹서버(100)에서 컨텐츠 제공자의 PC(10)로부터 제공받는 멀티미디어 컨텐츠는 3GP, AVI, MPEG4 등의 다양한 규격의 동영상 파일이 될 수 있다. 또한, 서비스 가입자가 자신이 제작한 멀티미디어 컨텐츠를 제공하는 컨텐츠 제공자가 될 수 있으며, 이 경우 서비스 가입자는 자신이 제작한 멀티미디어 컨텐츠를 업로드하여 이를 링백톤으로 설정할 수 있다.

컨텐츠 관리부(200)는 멀티미디어 컨텐츠 원본과 함께 컨텐츠 관리부(200)에 의해 분리 및 변환된 오디오 및 비디오 파일을 저장해두는 컨텐츠 DB(230)와, 서비 스 가입자 정보와 서비스 가입자별로 선택된 멀티미디어 컨텐츠에 대한 식별 정보를 저장해두는 서비스 정보 DB(240)와, 웹서버(100)를 통해 업로드된 멀티미디어 컨텐츠 파일을 신규 컨텐츠로 등록하고 이를 컨텐츠 DB(230)에 저장하는 컨텐츠 등록부(210)와, 컨텐츠 등록부(210)에 의해 등록된 멀티미디어 컨텐츠 파일을 오디오 파일과 비디오 파일로 분리한 후, 일련의 RTP 패킷(packet)으로 구성되는 오디오 및 비디오 파일로 변환하여 컨텐츠 DB(230)에 저장하는 컨텐츠 분리변환부(220)를 포함하여 구성된다. 여기서, 컨텐츠 분리변환부(220)에 의해 변환된 오디오 및 비디오 파일을 구성하는 RTP 패킷은 크게 헤더부와 페이로드부로 이루어지며, 헤더부 내에는 해당 패킷의 재생 시간 정보를 나타내는 타임스탬프(timestamp)가 포함되는데, RTP 패킷의 구조에 대한 좀 더 상세한 내용은 후술하여 상세히 설명하기로 한다.

컨텐츠 전송부(400)는 크게 비디오 처리부와 오디오 처리부로 구성되어, 발신 VoIP 단말로 전송하는 링백톤을 비디오 파일과 오디오 파일로 각각 나누어 전송함으로써, 스트리밍시 필요한 시스템 자원의 사용을 감소시키게 된다.

먼저, 비디오 처리부는 컨텐츠 DB(230)에 저장되어 있는 비디오 파일을 전송을 위해 임시 저장하는 비디오 메모리(420)와, 비디오 메모리(420)에 저장되어 있는 멀티미디어 컨텐츠의 비디오 파일을 RTP 패킷 단위로 스트리밍하여 발신 VoIP 단말기(600)로 전송해주는 비디오 통신부(430)와, 전송될 비디오 RTP 패킷에 포함된 타임스탬프 정보로부터 해당 비디오 RTP 패킷을 전송하기 전에 수행할 슬립(sleep) 시간을 산출하여 비디오 통신부(430)로 전달해주는 비디오 동기화 처리 부(410)로 구성된다. 한편, 오디오 처리부는 비디오 처리부와 유사하게, 컨텐츠 DB(230)에 저장되어 있는 오디오 파일을 전송을 위해 임시 저장하는 오디오 메모리(450)와, 오디오 메모리(450)에 저장되어 있는 멀티미디어 컨텐츠의 오디오 파일을 RTP 패킷 단위로 스트리밍하여 발신 VoIP 단말기(600)로 전송해주는 오디오 통신부(460)와, 전송될 오디오 RTP 패킷에 포함된 타임스탬프 정보로부터 해당 오디오 RTP 패킷을 전송하기 전에 수행할 슬립 시간을 산출하여 오디오 통신부(460)로 전달해주는 오디오 동기화 처리부(440)로 구성된다.

여기서, 비디오 동기화 처리부(410) 및 오디오 동기화 처리부(440)는 각각 바로 이전에 전송된 RTP 패킷과 이어서 전송할 RTP 패킷 사이의 타임스탬프 차이로부터 전송할 RTP 패킷에 대한 이론적인 전송 시작 시간을 구하고, 이로부터 실제 전송 시작까지의 슬립 시간을 산출하게 되며, 비디오 통신부(430) 및 오디오 통신부(460)는 각각 비디오 동기화 처리부(410) 및 오디오 동기화 처리부(440)에서 산출된 슬립 시간에 따라 RTP 패킷 전송 이전에 슬립을 수행함으로써 동일 시간대의 비디오 RTP 패킷과 오디오 RTP 패킷을 동기화하여 전송할 수 있다.

호처리부(500)는 발신 VoIP 단말기(600) 및 착신 VoIP 단말기(700)와 호 연결을 위한 접속설정프로토콜(Session Initiation Protocol; SIP) 메시지를 주고 받아 호 연결을 중계하며, 컨텐츠 전송부(400) 측으로 제어 메시지를 송신하여 발신 VoIP 단말기(600) 측으로 착신 VoIP 단말기(700)의 서비스 가입자가 설정한 링백 컨텐츠를 전송하도록 해준다.

도 2는 본 발명의 일실시예에 따른 멀티미디어 링백 서비스 절차를 나타내는 순서도이다.

이하, 도 2를 참조하여 앞서 설명한 멀티미디어 링백 서비스 시스템을 이용한 본 발명의 일실시예에 따른 멀티미디어 링백 서비스 방법을 설명하기로 한다.

먼저, 컨텐츠 제공자가 웹서버(100)에 접속하여 자신이 제작한 멀티미디어 컨텐츠를 업로드하면(S100), 웹서버(100)는 기저장되어 있는 멀티미디어 컨텐츠들과의 비교를 통하여 해당 컨텐츠가 신규 컨텐츠인지를 판단한다(S200).

상기 S200 단계에서 신규 컨텐츠가 아닌 경우, 즉 기존에 존재하는 멀티미디어 컨텐츠인것으로 판단되는 경우, 컨텐츠 제공자에게 해당 오류 내용을 통보하고(S400), 이하에서 설명할 링백 컨텐츠 설정 단계(S500)로 이동한다.

한편, 상기 S200 단계에서 신규 컨텐츠인 것으로 판단되는 경우, 컨텐츠 관리부(200)는 상기 업로드된 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리한 후, 일련의 RTP 패킷(packet)으로 구성되는 오디오 및 비디오 파일로 각각 변환하여 저장함으로써 해당 멀티미디어 컨텐츠를 등록한다(S300). 여기서, 멀티미디어 컨텐츠의 오디오와 비디오 데이터를 각각 일련의 RTP 패킷(packet)으로 구성되는 오디오 및 비디오 파일로 변환하여 저장하는 구체적인 과정에 대해서는 후술하여 상세히 설명하기로 한다.

이후, 서비스 가입자가 웹서버(100)에 접속하여 기등록되어 있는 멀티미디어 컨텐츠 목록중에서 링백톤으로 사용하고자 하는 멀티미디어 컨텐츠를 선택하면, 서비스 가입자의 정보와 상기 선택된 멀티미디어 컨텐츠의 식별 정보를 서비스 정보 로 저장해두는 링백 컨텐츠 설정 단계를 수행한다(S500).

이어서, 호처리부(500)가 발신 VoIP 단말기(600)로부터 호 연결 요청 메시지를 수신하면, 컨텐츠 전송부(400)는 호처리로부터 전달되는 제어 메시지에 따라 발신 VoIP 단말기(600) 측으로 착신 VoIP 단말기(700)의 서비스 가입자가 링백톤으로 설정한 멀티미디어 컨텐츠를 제공해준다(S600).

도 3은 도 2에 도시된 멀티미디어 컨텐츠 등록 단계를 통해 얻어지는 오디오 및 비디오 파일의 구조를 보여주는 도면이고, 도 4는 도 2에 도시된 멀티미디어 컨텐츠 등록 단계의 세부 절차를 나타내는 순서도이다.

앞서 설명한 바와 같이, 멀티미디어 컨텐츠 등록 단계(S300)에서는 업로드된 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리한 후, 오디오 및 비디오 데이터를 일련의 RTP 패킷으로 구성되는 오디오 및 비디오 파일로 각각 변환하게 되는데, 먼저, 도 3을 참조하여 RTP 패킷으로 이루어지는 오디오 및 비디오 파일의 데이터 구조에 대하여 설명하기로 한다.

멀티미디어 컨텐츠 등록 단계(S300)를 통해 얻어지는 오디오 및 비디오 파일은 각각, 도 3의 (a)에 도시된 바와 같이, 여러개의 RTP 패킷들이 연속적으로 이어져 하나의 파일로 구성되는데, 각각의 RTP 패킷은 발신 VoIP 단말기(600) 측으로 링백 컨텐츠 제공시 한번에 전송되는 전송 단위에 해당한다. RTP 패킷의 구조는, 도 3의 (b)에 도시된 MOD_RTP_PACKET 구조체와 같이, 크게 RTP 헤더(RTP Header)와 RTP 페이로드(RTP Payload)로 구성되는데, RTP 헤더에는 RTP 통신을 위한 정보가 저장되고, RTP 페이로드에는 해당 프레임의 오디오 및 비디오 데이터가 해당 코덱에 맞게 변환되어 저장된다. 여기서, RTP 헤더에는 해당 패킷의 재생 동기화를 위한 클록수를 나타내는 타임스탬프(timestamp) 값이 저장되는데, 본 발명에서는 이 값을 이용하여 패킷 전송시의 오디오/비디오 동기화를 달성하게 된다. RTP 헤더에 포함된 타임스탬프 값을 이용하여 오디오/비디오 데이터를 동기화시키는 과정에 대해서는 후술하여 상세히 설명하기로 한다.

이하, 도 4를 참조하여 멀티미디어 컨텐츠 등록 단계(S300)의 세부 단계를 설명하기로 한다.

먼저, 컨텐츠 제공자로부터 업로드된 멀티미디어 컨텐츠의 원본을 컨텐츠 DB(230)에 저장하고(S310), 해당 멀티미디어 컨텐츠의 정보를 분석하여 동영상 규격과, 비디오 및 오디오의 코덱 종류를 판별한다(S320). 여기서, 비디오 및 오디오의 코덱 종류에 따라 멀티미디어 컨텐츠로부터 분리되어 저장될 비디오 및 오디오 파일의 이름을 미리 설정하게 되며, 동영상 규격이 3GP 파일이 아닌 경우에는 해당 멀티미디어 컨텐츠를 H.263, H.264, MPEG4 등의 코덱을 포함하고 있는 3GP 규격의 파일로 변환하는 과정을 추가로 수행하는 것이 바람직하다.

이어서, 멀티미디어 컨텐츠로부터 오디오 및 비디오 데이터를 분리한다(S330). 여기서, 분리된 오디오 및 비디오 데이터는 버퍼 메모리에 임시 저장함으로써 이후의 파일 처리 작업을 보다 신속하게 수행할 수 있다.

이후, 상기 분리된 오디오 데이터를 프레임(frame) 단위로 분리하여 연속적인 RTP 패킷의 조합으로 변환하고(S340), 상기 변환된 RTP 패킷의 조합으로 구성된 오디오 파일을 저장한다(S350).

이 때, 상기 S340 단계에서 오디오 데이터를 코덱별, 해상도(resolution)별, 샘플링 레이트(sampling rate)별로 각각 RTP 패킷의 조합으로 변환하고, 상기 S350 단계에서는 상기 코덱별, 해상도별, 샘플링 레이트별로 따로 변환된 RTP 패킷의 조합들을 각각 별도의 파일 확장자를 가지는 파일들로 저장함으로써, 링백 컨텐츠 제공시의 부하를 경감시키도록 하는 것이 바람직하다. 즉, 다양한 기종의 발신 VoIP 단말기(600)에 대하여 링백 컨텐츠 제공시에 해당 단말기의 미디어 재생 능력에 맞는 코덱, 해상도 및 샘플링 레이트로 다시 인코딩할 필요 없이 미리 저장된 코덱별, 해상도별, 샘플링 레이트별 오디오 파일 중에 가장 적합한 파일을 선택하여 즉시 스트리밍함으로써, 실시간 변환에 따른 시스템 부하를 줄여줄 수 있다.

끝으로, 상기 분리된 비디오 데이터를 프레임 단위로 분리하여 연속적인 RTP 패킷의 조합으로 변환하고(S360), 상기 변환된 RTP 패킷의 조합으로 구성된 비디오 파일을 저장한다(S370). 이와 같은 비디오 데이터의 변환 및 저장 과정은 위에서 설명한 오디오 데이터의 변환 및 저장 과정과 동일하다.

도 5는 도 2에 도시된 링백 컨텐츠 제공 단계의 신호 흐름을 나타내는 신호흐름도이다.

이하, 도 5를 참조하여 앞서 설명한 링백 컨텐츠 제공 단계(S600)의 세부 단계를 설명하기로 한다.

먼저, 발신 VoIP 단말기(600)에서 착신 VoIP 단말기(700)로 전화를 걸면 발 신 VoIP 단말기(600)는 호처리부(500)로 호 연결 요청 메시지(Invite)를 전송한다(S611). 이 때, Invite 메시지 내에는 발신 VoIP 단말기(600)가 지원하는 모든 코덱에 대한 정보가 SDP(Session Description Protocal) 형태로 포함되어 있다.

이어서, 호처리부(500)는 발신 VoIP 단말기(600)로부터 받은 호 연결 요청 메시지를 착신 VoIP 단말기(700)로 전달한다(S612). 착신 VoIP 단말기(700)로 전달되는 호 연결 요청 메시지에는 발신 VoIP 단말기(600)의 IP 주소나 포트 번호가 호처리부(500)의 IP 주소나 포트(port) 번호로 대체된다.

이후, 호처리부(500)는 착신 VoIP 단말기(700)의 사용자가 멀티미디어 링백 서비스 가입자인지 확인하고 해당 가입자가 신청한 서비스 정보를 조회하라는 가입자 및 서비스 정보 조회 요청 메시지를 컨텐츠 관리부(200) 측으로 전송하고(S621), 컨텐츠 관리부(200)는 호처리부(500)로 가입 여부와 가입자의 링백톤으로 선택된 멀티미디어 컨텐츠의 식별자 정보가 포함된 가입자 및 서비스 정보 조회 응답 메시지를 전송한다(S622).

이어서, 호처리부(500)는 컨텐츠 전송부(400)에 멀티미디어 링백톤을 전송하기 위한 세션 할당을 요청하는 자원 할당 요청 메시지를 전송하는데(S631), 요청 메시지 내에는 발신 VoIP 단말기(600)의 SDP가 첨부된다.

그러면, 컨텐츠 전송부(400)는 멀티미디어 링백톤을 전송하기 위한 세션을 할당하고, 세션 할당이 완료되었음을 알리는 자원 할당 응답 메시지를 전송한다(S632). 이 때 컨텐츠 전송부(400)는 발신 VoIP 단말기(600)의 SDP를 해석하여 발신 VoIP 단말기(600)가 지원하는 코덱과 자체적으로 지원하는 코덱을 네고(Nego) 하며, 자원 할당 응답 메시지 내에 네고된 코덱 정보가 포함된 SDP를 첨부한다.

이후, 호처리부(500)는 컨텐츠 전송부(400)에서 네고된 코덱의 SDP가 첨부된 응답 메시지(200 OK)를 발신 VoIP 단말기(600)로 전송하고(S634), 발신 VoIP 단말기(600)는 이에 응답하는 액크(ACK) 메시지를 호처리부(500)로 전송한다(S635).

이어서, 호처리부(500)는 컨텐츠 전송부(400)로 멀티미디어 링백톤 전송을 요청하는데(S636), 이 때 S622 단계에서 컨텐츠 관리부(200)로부터 전송된 멀티미디어 컨텐츠 식별자 정보를 함께 전송하게 된다.

이에 응답하여 컨텐츠 전송부(400)는 호처리부(500)로부터 전송된 식별자 정보를 참조하여 해당 멀티미디어 컨텐츠 정보를 독출하고, 독출된 멀티미디어 컨텐츠의 링백톤을 발신 VoIP 단말기(600) 측으로 전송한다(S700). 여기서, 컨텐츠 전송부(400)는 독출된 멀티미디어 컨텐츠의 오디오 및 비디오 파일을 RTP 패킷 단위로 스트리밍하는 과정에서 RTP 패킷 내에 포함된 타임스탬프 정보를 이용하여 오디오/비디오 동기화를 구현하는데, 이에 대한 자세한 내용은 후술하여 설명하기로 한다.

착신 VoIP 단말기(700)의 사용자가 전화를 받으면, 착신 VoIP 단말기(700)는 호처리부(500)로 호 연결 응답 메시지(200 OK)를 전송하고(S811), 호처리부(500)는 이에 응답하여 착신 VoIP 단말기(700)로 액크(ACK) 메시지를 전송한다(S812)

이어서 호처리부(500)는 컨텐츠 전송부(400)에 멀티미디어 링백톤 전송 중지를 요청하며(S821), 컨텐츠 전송부(400)는 이에 응답하여 멀티미디어 링백톤 전송을 중지한다(S822).

이후, 호처리부(500)는 컨텐츠 전송부(400)에 링백톤 전송을 위해 설정된 세션을 해제하라는 자원 해제 요청 메시지를 전송하며(S823), 컨텐츠 전송부(400)는 이에 응답하여 세션을 해제하고 호처리부(500)로 자원 해제 응답 메시지를 전송한다(S824).

컨텐츠 전송부(400)의 자원 해제가 완료되면, 호처리부(500)는 착신 VoIP 단말기(700)로 발신 VoIP 단말기(600)의 IP 주소와 포트 정보가 포함된 SDP를 첨부하여 호 연결 재요청 메시지(RE-INVITE)를 전송하고(S831), 착신 VoIP 단말기(700)는 호 연결 재요청 메시지(RE-INVITE)에 대한 응답 메시지(200 OK)를 호처리부(500)로 전송한다(S832).

이후, 호처리부(500)는 착신 VoIP 단말기(700)의 IP 주소와 포트 정보가 포함된 SDP를 첨부하여 발신 VoIP 단말기(600)에 호 연결 재요청 메시지(RE-INVITE)를 전송하고(S833), S832 단계의 응답 메시지에 대한 액크(ACK) 메시지를 착신 VoIP 단말기(700)로 전송한다(S834).

발신 VoIP 단말기(600)가 호 연결 재요청 메시지(RE-INVITE)에 대한 응답 메시지(200 OK)를 호처리부(500)로 전송하면(S835), 호처리부(500)는 이에 대한 액크(ACK) 메시지를 발신 VoIP 단말기(600)로 전송하게 되며(S836), 최종적으로 발신 VoIP 단말기(600)와 착신 VoIP 단말기(700) 간의 호 연결이 이루어져 양 단말기 간의 화상 통화가 시작된다(S840).

도 6은 멀티미디어 링백톤 전송시에 RTP 패킷 전송 시간 오차에 따른 오디오 /비디오 동기화 문제를 나타내는 도면이고, 도 7은 도 5에 도시된 멀티미디어 링백톤 전송 단계의 세부 절차를 나타내는 순서도이다.

본 발명은 멀티미디어 컨텐츠를 오디오와 비디오로 각각 분리하여 미리 RTP 패킷 단위로 구성되는 파일로 변환하여 저장해두고, 링백톤 전송시에 오디오 및 비디오 데이터를 미리 저장된 RTP 패킷 단위로 즉시 전송하기 때문에 오디오와 비디오 데이터를 정확히 동기화할 수 있는 알고리즘이 요구된다. 즉, 컨텐츠 전송부(400)가 실시간 OS(RTOS)가 아닌 LINUX나 SOLARIS 기반으로 구성되는 경우 RTP(Real-time Transport Protocol) 패킷 간의 전송 간격을 10 ms 이하로 정확하게 제어할 수 없어, 스트리밍하는 과정에서 패킷을 차례로 전송함에 따라 전송 시간 간격에 오차가 누적되어 오디오/비디오의 동기화(syncronization)가 정확히 맞지 않는 문제가 발생할 수 있다. 예를 들어, 비디오 데이터의 경우 H.263을 코덱으로 사용하는 경우 33 ms 당 한 프레임이 전송되도록 설정되어 있는데, 도 6에 도시된 바와 같이, 실제로 4개의 패킷을 전송하는데 소요된 시간은 네트워크 지연 등의 이유로 이론적 소요시간인 99 ms보다 큰 110 ms가 되며, 마찬가지로 오디오 데이터의 경우에도 실제 전송 시간이 이론적 소요 시간인 120 ms보다 더 지연된 138 ms가 될 수 있다.

따라서, 본 실시예에서는 각 RTP 패킷 내에 포함된 타임스탬프 정보를 이용하여 이론적 소요시간을 산출한 다음 실제 소요시간이 이론적 소요시간과 일치하도록 슬립을 수행함으로써 오디오/비디오 동기화 문제를 해결하는데, 이하에서는 이와 같은 슬립 알고리즘을 이용하여 앞서 설명한 멀티미디어 링백톤 전송 단 계(S700)를 수행하는 세부 단계에 대하여, 도 7을 참조하여 설명하기로 한다.

먼저, 컨텐츠 전송부(400)는 링백톤으로 전송할 멀티미디어 컨텐츠의 오디오 및 비디오 파일을 컨텐츠 관리부(200)의 컨텐츠 DB(230)로부터 독출하여 메모리에 임시 저장한다(S710).

이후, 독출된 오디오 파일을 발신 VoIP 단말기(600) 측으로 RTP 전송하는 동시에(S720), 이와 독립적으로 비디오 파일을 발신 VoIP 단말기(600) 측으로 RTP 전송하는데(S730), 오디오 전송 단계(S720)과 비디오 전송 단계(S730)는 공통적으로 다음의 과정을 거치게 된다.

먼저, 메모리에서 첫번째 RTP 패킷을 독출하여 발신 VoIP 단말기(600)로 전송하고(S721, S731), 첫번째 RTP 패킷의 타임스탬프 및 전송시작시간을 저장해 둔다(S722, S732).

이후, 다음 전송될 RTP 패킷을 메모리에서 독출하고(S723, S733), 슬립 시간을 산출한다(S724, S734). 여기서, 전송될 RTP 패킷의 타임스탬프와 첫번째 RTP 패킷의 타임스탬프의 차이로부터 이론적인 소요 시간을 먼저 산출하고, 현재 시간과 첫번째 RTP 패킷의 전송시작시간의 차이, 즉 현재 소요 시간을 산출하여, 이론적 소요 시간과 현재 소요 시간의 차이 만큼을 슬립 시간으로 설정한다.

이어서, 상기 설정된 슬립 시간 만큼 슬립을 실행하고(S725, S735), 전송 대상이 되는 RTP 패킷을 전송한다(S726, S736). 이와 같이 슬립을 실행함으로써, 해당 RTP 패킷을 전송하는 순간까지의 실제 소요 시간이 이론적 소요 시간과 동일하게 조절하여 오디오/비디오 동기화를 구현하게 된다.

이후, 호처리부(500)로부터 전송 중지 요청이 있었는지를 판단하여(S727, S737), 전송 중지 요청이 있는 경우 RTP 전송을 중지하고 전송 과정을 완료하며, 전송 중지 요청이 없는 경우 현재 전송한 RTP 패킷이 마지막 패킷인지를 판단한다(S728, S738).

상기 마지막 패킷인지 판단하는 단계(S728, S738)에서 마지막 패킷으로 판별된 경우 RTP 전송을 중지하고 전송 과정을 완료하며, 마지막 패킷이 아닌 것으로 판별된 경우 상기 다음 전송될 RTP 패킷을 독출하는 단계(S723, S733)로 분기하여 그 이하의 단계를 반복적으로 수행한다.

이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것은 아니며, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하다는 것은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 명백하다 할 것이다.

도 1은 본 발명의 일실시예에 따른 멀티미디어 링백 서비스 시스템의 구성도.

도 2는 본 발명의 일실시예에 따른 멀티미디어 링백 서비스 절차를 나타내는 순서도.

도 3은 도 2에 도시된 멀티미디어 컨텐츠 등록 단계를 통해 얻어지는 오디오 및 비디오 파일의 구조를 보여주는 도면.

도 4는 도 2에 도시된 멀티미디어 컨텐츠 등록 단계의 세부 절차를 나타내는 순서도.

도 5는 도 2에 도시된 링백 컨텐츠 제공 단계의 신호 흐름을 나타내는 신호흐름도.

도 6은 멀티미디어 링백톤 전송시에 RTP 패킷 전송 시간 오차에 따른 오디오/비디오 동기화 문제를 나타내는 도면.

도 7은 도 5에 도시된 멀티미디어 링백톤 전송 단계의 세부 절차를 나타내는 순서도.

<도면의 주요 부분에 대한 부호의 설명>

10, 20 : PC 100 : 웹서버

200 : 컨텐츠 관리부 210 : 컨텐츠 등록부

220 : 컨텐츠 분리변환부 230 : 컨텐츠 DB

240 : 서비스 정보 DB 400 : 컨텐츠 전송부

410 : 비디오 동기화 처리부 420 : 비디오 메모리

430 : 비디오 통신부 440 : 오디오 동기화 처리부

450 : 오디오 메모리 460 : 오디오 통신부

500 : 호처리부 600 : 발신 VoIP 단말기

700 : 착신 VoIP 단말기

Claims

발신 VoIP 단말기로부터 착신 VoIP 단말기로의 호 연결 요청시 발신 VoIP 단말에 멀티미디어 링백 서비스를 제공하기 위한 시스템에 있어서,

인터넷망을 통해 컨텐츠 제공자로부터 제공받은 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리하고, 상기 분리된 오디오 및 비디오 데이터를 RTP 규격에 맞는 오디오 및 비디오 파일로 변환하여 저장하는 컨텐츠 관리부와;

상기 발신 VoIP 단말기로부터 상기 서비스 가입자의 착신 VoIP 단말기 측으로 호 연결 요청시, 상기 발신 VoIP 단말기 측으로 상기 서비스 가입자가 선택한 멀티미디어 컨텐츠를 구성하는 오디오 및 비디오 파일을 각각 RTP 패킷 단위로 스트리밍하는 컨텐츠 전송부;를 포함하여 구성되며,

상기 컨텐츠 전송부는,

상기 오디오 및 비디오 파일 각각에 대하여,

바로 이전에 전송된 RTP 패킷과 전송될 RTP 패킷 사이의 타임스탬프 차이로부터 슬립(sleep) 시간을 산출하고, 상기 산출된 슬립 시간에 따라 슬립을 수행한 후 RTP 패킷을 전송하는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 시스템.
제 1항에 있어서,

상기 컨텐츠 전송부는,

상기 컨텐츠 관리부에 저장되어 있는 멀티미디어 컨텐츠의 비디오 파일을 전송을 위해 임시 저장하는 비디오 메모리와, 상기 비디오 메모리에 저장되어 있는 비디오 파일을 RTP 패킷 단위로 스트리밍하여 발신 VoIP 단말기로 전송해주는 비디오 통신부와, 전송될 비디오 RTP 패킷에 포함된 타임스탬프 정보로부터 해당 비디오 RTP 패킷을 전송하기 전에 수행할 슬립 시간을 산출하여 상기 비디오 통신부로 전달해주는 비디오 동기화 처리부로 구성되는 비디오 처리부와;

상기 컨텐츠 관리부에 저장되어 있는 멀티미디어 컨텐츠의 오디오 파일을 전송을 위해 임시 저장하는 오디오 메모리와, 상기 오디오 메모리에 저장되어 있는 오디오 파일을 RTP 패킷 단위로 스트리밍하여 발신 VoIP 단말기로 전송해주는 오디오 통신부와, 전송될 오디오 RTP 패킷에 포함된 타임스탬프 정보로부터 해당 오디오 RTP 패킷을 전송하기 전에 수행할 슬립 시간을 산출하여 상기 오디오 통신부로 전달해주는 오디오 동기화 처리부로 구성되는 오디오 처리부;

로 구성되는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 시스템.
발신 VoIP 단말기로부터 착신 VoIP 단말기로의 호 연결 요청시 발신 VoIP 단말에 멀티미디어 링백 서비스를 제공하는 방법에 있어서,

인터넷망을 통해 접속한 컨텐츠 제공자로부터 업로드된 멀티미디어 컨텐츠를 오디오와 비디오 데이터로 분리한 후, 일련의 RTP 패킷으로 구성되는 오디오 및 비디오 파일로 각각 변환하여 저장하는 멀티미디어 컨텐츠 등록 단계와;

인터넷망을 통해 접속한 서비스 가입자에게 기등록되어 있는 멀티미디어 컨텐츠 목록을 제공하여, 서비스 가입자로부터 선택된 멀티미디어 컨텐츠의 식별 정보를 서비스 가입자의 정보와 함께 저장해두는 링백 컨텐츠 설정 단계와;

발신 VoIP 단말기로부터 서비스 가입자의 착신 VoIP 단말기 측으로의 호 연결 요청 메시지를 수신하면, 상기 링백 컨텐츠 설정 단계를 통해 서비스 가입자로부터 선택된 멀티미디어 컨텐츠를 구성하는 오디오 및 비디오 파일을 각각 RTP 패킷 단위로 발신 VoIP 단말기 측으로 전송하는 멀티미디어 컨텐츠 제공 단계;

를 포함하여 구성되며,

상기 멀티미디어 컨텐츠 제공 단계는,

전송될 RTP 패킷의 타임스탬프 정보를 이용하여 첫번째 RTP 패킷 전송 시점으로부터 해당 RTP 패킷 전송 시점까지의 이론적 소요 시간을 산출하고, 실제 소요 시간이 상기 산출된 이론적 소요 시간과 동일하게 되도록 슬립(sleep)을 수행한 후 해당 RTP 패킷을 전송하는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 방법.
제 3항에 있어서,

상기 멀티미디어 컨텐츠 등록 단계는,

컨텐츠 제공자로부터 업로드된 멀티미디어 컨텐츠의 원본을 저장하고, 해당 멀티미디어 컨텐츠의 정보를 분석하여 동영상 규격과, 비디오 및 오디오의 코덱 종류를 판별하는 단계와;

상기 업로드된 멀티미디어 컨텐츠로부터 오디오 및 비디오 데이터를 분리하는 단계와;

상기 분리된 오디오 데이터를 프레임(frame) 단위로 분리하여 연속적인 RTP 패킷의 조합으로 변환하고, 상기 변환된 오디오 데이터의 RTP 패킷의 조합으로 구성된 오디오 파일을 저장하는 오디오 파일 저장 단계와;

상기 분리된 비디오 데이터를 프레임 단위로 분리하여 연속적인 RTP 패킷의 조합으로 변환하고, 상기 변환된 비디오 데이터의 RTP 패킷의 조합으로 구성된 비디오 파일을 저장하는 비디오 파일 저장 단계;

로 구성되는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 방법.
제 4항에 있어서,

상기 오디오 파일 저장 단계 또는 비디오 파일 저장 단계는,

상기 분리된 오디오 데이터 또는 비디오 데이터를 코덱별, 해상도(resolution)별, 샘플링 레이트(sampling rate)별로 각각 RTP 패킷의 조합으로 변환하고, 상기 코덱별, 해상도별, 샘플링 레이트별로 따로 변환된 RTP 패킷의 조합들을 각각 별도의 파일 확장자를 가지는 파일들로 저장하는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 방법.
제 3항에 있어서,

상기 멀티미디어 컨텐츠 제공 단계는,

링백톤으로 전송할 멀티미디어 컨텐츠의 오디오 및 비디오 파일을 컨텐츠 DB에서 독출하여 메모리에 임시 저장하는 단계와;

상기 메모리에 임시 저장된 오디오 파일과 비디오 파일을 각각 독립적으로 발신 VoIP 단말기 측으로 RTP 패킷 단위로 전송하는 RTP 전송 단계;

로 구성되는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 방법.
제 6항에 있어서,

상기 RTP 전송 단계에서는, 상기 메모리에 임시 저장된 오디오 파일과 비디오 파일에 대하여 각각,

메모리에서 첫번째 RTP 패킷을 독출하여 발신 VoIP 단말기로 전송하고, 첫번째 RTP 패킷의 타임스탬프 및 전송시작시간을 저장해 두는 단계와;

다음 전송될 RTP 패킷을 메모리에서 독출하고, 상기 독출된 RTP 패킷에 대한 슬립 시간을 산출하는 단계와;

상기 산출된 슬립 시간 만큼 슬립을 실행하고, 상기 독출된 RTP 패킷을 전송하는 단계와;

호처리부로부터 전송 중지 요청이 있었는지를 판단하여, 전송 중지 요청이 있는 경우 RTP 전송을 중지하여 전송 과정을 완료하고, 전송 중지 요청이 없는 경우 현재 전송한 RTP 패킷이 마지막 패킷인지를 판단하는 단계와;

상기 마지막 패킷인지를 판단하는 단계에서 마지막 패킷으로 판별된 경우 RTP 전송을 중지하고 전송 과정을 완료하는 단계;

를 수행하는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 방법.
제 7항에 있어서,

상기 슬립 시간을 산출하는 단계는,

전송될 RTP 패킷의 타임스탬프와 첫번째 RTP 패킷의 타임스탬프의 차이로부터 이론적인 소요 시간을 먼저 산출하고, 현재 시간과 첫번째 RTP 패킷의 전송시작시간의 차이를 산출하여, 이론적 소요 시간과 현재 소요 시간의 차이 만큼을 슬립 시간으로 설정하는 것을 특징으로 하는 VoIP 단말을 위한 멀티미디어 링백 서비스 방법.