KR101451336B1 - 통화 서비스 수행시 영상 서비스를 제공하는 장치 및 방법 - Google Patents

통화 서비스 수행시 영상 서비스를 제공하는 장치 및 방법 Download PDF

Info

Publication number
KR101451336B1
KR101451336B1 KR1020130039690A KR20130039690A KR101451336B1 KR 101451336 B1 KR101451336 B1 KR 101451336B1 KR 1020130039690 A KR1020130039690 A KR 1020130039690A KR 20130039690 A KR20130039690 A KR 20130039690A KR 101451336 B1 KR101451336 B1 KR 101451336B1
Authority
KR
South Korea
Prior art keywords
video
terminal
service
video service
unit
Prior art date
Application number
KR1020130039690A
Other languages
English (en)
Other versions
KR20140055929A (ko
Inventor
이길수
Original Assignee
(주)티아이스퀘어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)티아이스퀘어 filed Critical (주)티아이스퀘어
Publication of KR20140055929A publication Critical patent/KR20140055929A/ko
Application granted granted Critical
Publication of KR101451336B1 publication Critical patent/KR101451336B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72484User interfaces specially adapted for cordless or mobile telephones wherein functions are triggered by incoming communication events
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/12Setup of transport tunnels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/18Service support devices; Network management devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 통화 서비스 수행시 영상 서비스를 제공하는 장치 및 방법에 관한 것으로서, 네트워크를 통해 데이터 경로 서버 및 영상 서비스 제공 시스템과 연결되며, 통신망을 통해 제2 단말과 통화 서비스를 수행하는 제1 단말에 포함되어 통화 서비스 수행시 영상 서비스를 제공하는 영상 서비스 제공 장치에 있어서, 통화 서비스 이벤트가 검출되는 경우 데이터 경로 서버로 경로 연결 요청 신호를 전송하는 데이터 경로 관리부-여기서, 상기 데이터 경로 서버는 통화 서비스의 상대방 단말인 제2 단말의 데이터 경로 관리부로부터 경로 연결 요청 신호를 수신하고 제1 단말과 제2 단말 사이에 데이터 경로를 형성함-; 통화 서비스 이벤트가 검출되는 경우 영상 서비스 인터페이스를 디스플레이부를 통해 제공하고 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 영상 서비스 수행부; 상기 영상 서비스 제공 시스템을 통해 통화 서비스의 제2 단말과 영상 서비스를 수행하기 위한 영상 세션을 설정하는 영상 세션 설정부; 상기 데이터 경로 관리부에 의해 형성된 데이터 경로 및 데이터 경로 서버를 통해 영상 서비스 설정 데이터를 제2 단말과 송수신함으로써 제2 단말과의 영상 서비스를 설정하는 영상 서비스 설정부; 및 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 영상 세션 설정부에 의해 형성된 영상 세션을 통해 제2 단말로 전송하거나, 제2 단말로부터 영상 서비스 데이터를 수신하는 영상 서비스 데이터 처리부를 포함하고, 상기 영상 서비스 수행부는, 상기 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터와 제2 단말로부터 수신한 영상 서비스 데이터 중 적어도 어느 하나에 기초하여 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 것을 특징으로 하는 영상 서비스 제공 장치 및 이를 이용한 방법을 제공한다.

Description

통화 서비스 수행시 영상 서비스를 제공하는 장치 및 방법{APPARATUS AND METHOD FOR PROVIDING VIDEO SERVICES DURING CALL SERVICES}
본 발명은 통화 서비스 수행시 영상 서비스를 제공하는 장치 및 방법에 관한 것으로서, 보다 상세하게는 통신 단말에 포함되며 통화 서비스를 수행하면서 통신 단말에서 영상 공유 서비스 또는 영상 통화 서비스와 같은 영상 서비스를 제공하는 장치 및 방법에 관한 것이다.
최근 이른바 스마트폰의 급속한 보급에 따라 단순한 통화 위주의 종래의 이동통신 서비스 환경이 데이터 통신 서비스 위주로 전환되고 있으며, 데이터 통신을 기반으로 하는 다양한 형태의 서비스가 제안되고 있다. 특히 인터넷을 이용하여 웹 페이지를 열람하거나 응용 프로그램(어플리케이션, application)을 설치하여 사용자가 원하는 서비스를 스마트폰을 통해 어디서나 제공 받을 수 있도록 하는 환경으로 변하고 있다.
그러나, 통신 단말의 통화 서비스와 관련되어서는 종래의 방식과 크게 차별화 되는 점이 없다. 즉, 사용자가 전화번호를 입력하거나 주소록에서 연락처를 선택하여 전화를 발신하고 착신 단말에서 전화를 수신하면 통화를 수행하는 기존의 통화 서비스는 기본적인 방식 및 사용자의 인터페이스 환경의 면에서 종래의 방식과 달라진 점이 없다.
한편, 종래의 영상 공유 또는 영상 통화 서비스는 주로 이동 통신망을 통해 이루어지고 있는데 이는 별도의 영상 통화 버튼을 눌러서 영상 통화를 수행하도록 하는 방법이 대부분이다. 그러나, 이러한 종래의 영상 서비스는 다음과 같은 문제점이 있다.
우선, 사용자가 별도의 영상 통화 버튼을 누르는 등의 방식으로 영상 통화를 수행해야 하고 이는 영상 통화 서비스를 제공하는 이동 통신망을 반드시 거쳐야 한다는 한계가 있다. 따라서, 예컨대 음성 통화를 통신망을 통해 수행하면서 이와 병행하여 영상 통화나 영상 공유와 같은 서비스를 동시에 제공할 수 없다는 한계점이 있다. 즉, 종래의 기술에 의하면, 영상 서비스와 음성 통화 서비스는 별도로 이루어져야 하므로, 음성 통화를 수행하면서 이와 병행하여 영상 서비스를 제공받을 수 있는 방법이 없다는 문제가 있다. 이러한 점에서 사용자가 통화서비스를 수행하면서 간편하게 영상 서비스를 제공받을 수 있도록 하는 방법의 개발이 요망되고 있다.
한편, 대한민국 공개특허공보 제10-2008-0095972호(2008.10.30.공개)를 참조하면, 이동 통신 영상 통화 제공이 가능한 디스플레이 기기 및 그 기기에서의 영상 통화 제공 방법이 개시되어 있다. 그러나, 여기에 개시된 방법은, 디스플레이 기기를 이용하여 영상 통화를 수행할 수 있다는 점에서만 특징이 있을 뿐 이 또한 기본적으로 영상 통화는 이동 통신망의 자원을 이용한 것이라는 점에서 마찬가지의 한계점이 있다.
대한민국 공개특허공보 제10-2008-0095972호(2008.10.30.공개)
본 발명은 상기한 바와 같은 한계점을 감안하여 안출된 것으로서, 통신 단말에서 통화 서비스 이벤트와 관련된 통신 신호를 자체적으로 감지하여 통화 서비스 이벤트에 상응하는 통화 서비스를 수행하면서 통신망과는 별도의 네트워크를 통해 영상 공유나 영상 통화와 같은 영상 서비스를 통신 단말로 제공할 수 있는 장치 및 방법을 제공하는 것을 목적으로 한다.
또한, 본 발명은 통신 단말을 사용하여 통화를 시도하는 순간부터 통화를 종료하는 시점까지의 통화 과정 중간에 영상 서비스를 제공받을 수 있도록 함으로써 사용자의 편의성과 흥미를 유발할 수 있는 장치 및 방법을 제공하는 것을 또 다른 목적으로 한다.
상기한 바와 같은 과제를 해결하기 위하여 본 발명은, 네트워크를 통해 데이터 경로 서버 및 영상 서비스 제공 시스템과 연결되며, 통신망을 통해 제2 단말과 통화 서비스를 수행하는 제1 단말에 포함되어 통화 서비스 수행시 영상 서비스를 제공하는 영상 서비스 제공 장치에 있어서, 통화 서비스 이벤트가 검출되는 경우 데이터 경로 서버로 경로 연결 요청 신호를 전송하는 데이터 경로 관리부-여기서, 상기 데이터 경로 서버는 통화 서비스의 상대방 단말인 제2 단말의 데이터 경로 관리부로부터 경로 연결 요청 신호를 수신하고 제1 단말과 제2 단말 사이에 데이터 경로를 형성함-; 통화 서비스 이벤트가 검출되는 경우 영상 서비스 인터페이스를 디스플레이부를 통해 제공하고 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 영상 서비스 수행부; 상기 영상 서비스 제공 시스템을 통해 통화 서비스의 제2 단말과 영상 서비스를 수행하기 위한 영상 세션을 설정하는 영상 세션 설정부; 상기 데이터 경로 관리부에 의해 형성된 데이터 경로 및 데이터 경로 서버를 통해 영상 서비스 설정 데이터를 제2 단말과 송수신함으로써 제2 단말과의 영상 서비스를 설정하는 영상 서비스 설정부; 및 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 영상 세션 설정부에 의해 형성된 영상 세션을 통해 제2 단말로 전송하거나, 제2 단말로부터 영상 서비스 데이터를 수신하는 영상 서비스 데이터 처리부를 포함하고, 상기 영상 서비스 수행부는, 상기 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터와 제2 단말로부터 수신한 영상 서비스 데이터 중 적어도 어느 하나에 기초하여 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 것을 특징으로 하는 영상 서비스 제공 장치를 제공한다.
여기에서, 상기 통화 서비스 이벤트는, 통화 연결을 요청하는 상태인 통화 연결 요청 이벤트, 통화 연결 요청을 수신하는 상태인 통화 응답 요청 이벤트, 통화 연결 중인 상태인 통화 연결중 이벤트 및 통화 종료 상태인 통화 종료 이벤트 중 어느 하나를 포함할 수 있다.
또한, 상기 데이터 경로 관리부에서 전송되는 경로 연결 요청 신호는 통화 서비스를 수행하는 상대방 단말인 제2 단말의 식별자를 포함할 수 있다.
또한, 통화 서비스 이벤트가 검출되는 경우 구동되어, 메뉴 선택 인터페이스를 디스플레이부를 통해 제공하는 메뉴 인터페이스 관리부를 더 포함하고, 상기 영상 서비스 수행부는, 상기 메뉴 선택 입력 인터페이스를 통해 사용자로부터 선택 입력 신호가 입력된 경우 영상 서비스 인터페이스를 디스플레이부를 통해 제공할 수 있다.
또한, 상기 메뉴 선택 인터페이스는, 디스플레이부의 통화 서비스 수행을 위해 제공되는 통화 서비스 인터페이스 위에 표시될 수 있다.
또한, 상기 메뉴 선택 인터페이스는, 통화 서비스 인터페이스의 일부 영역에 부분적으로 표시되도록 제공될 수 있다.
또한, 상기 영상 서비스 제공 시스템은, 제1 단말과 제2 단말 사이의 영상 세션을 설정하는 영상 세션 서버; 및 영상 세션 서버를 제어하고 영상 세션을 통한 영상 서비스 데이터 전송을 위한 리소스를 할당하고 관리하며, 제1 단말과 제2 단말로부터 수신되는 영상 서비스 데이터를 상대방 단말로 전송하는 멀티미디어 릴레이 서버를 포함하고, 상기 제1 단말의 영상 세션 설정부는, 상기 영상 세션 서버로 영상 세션 주소를 포함하는 영상 세션 요청 신호를 전송하고, 상기 영상 세션 서버는, 멀티미디어 릴레이 서버로 영상 세션을 릴레이할 릴레이 리소스를 할당해 줄 것을 요청하는 릴레이 리소스 할당 요청 신호를 전송하고, 멀티미디어 릴레이 서버는, 영상 세션을 릴레이할 리소스를 할당하고 할당된 리소스 주소를 영상 세션 서버로 전송하고, 영상 세션 서버는 제1 단말의 영상 세션 설정부로 상기 리소스 주소를 포함하는 영상 세션 응답 신호를 전송할 수 있다.
또한, 상기 제2 단말은, 통화 서비스 이벤트가 검출되는 경우 데이터 경로 서버로 경로 연결 요청 신호를 전송하는 데이터 경로 관리부-여기서, 상기 데이터 경로 서버는 통화 서비스의 상대방 단말인 제1 단말의 데이터 경로 관리부로부터 경로 연결 요청 신호를 수신하고 제1 단말과 제2 단말 사이에 데이터 경로를 형성함-; 영상 서비스를 수행할 것을 사용자가 선택한 경우 영상 서비스 인터페이스를 디스플레이부를 통해 제공하고 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 영상 서비스 수행부; 상기 영상 서비스 제공 시스템을 통해 통화 서비스의 제1 단말과 영상 서비스를 수행하기 위한 영상 세션을 설정하는 영상 세션 설정부; 상기 데이터 경로 관리부에 의해 형성된 데이터 경로 및 데이터 경로 서버를 통해 영상 서비스 설정 데이터를 제1 단말과 송수신함으로써 제1 단말과의 영상 서비스를 설정하는 영상 서비스 설정부; 및 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 영상 세션 설정부에 의해 형성된 영상 세션을 통해 제1 단말로 전송하거나, 제1 단말로부터 영상 서비스 데이터를 수신하는 영상 서비스 데이터 처리부를 포함하고, 상기 제2 단말의 영상 서비스 수행부는, 상기 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터와 제1 단말로부터 수신한 영상 서비스 데이터 중 적어도 어느 하나에 기초하여 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하되, 상기 제1 단말의 영상 세션 설정부가 영상 세션 응답 신호를 수신한 후, 상기 제1 단말의 영상 서비스 설정부는, 상기 데이터 경로 관리부에 의해 형성된 데이터 경로를 통해 데이터 경로 서버로 영상 서비스를 시작할 것을 요청하는 영상 서비스 실행 요청 신호를 전송하고, 데이터 경로 서버는 수신한 영상 서비스 실행 요청 신호를 제2 단말로 전송할 수 있다.
또한, 상기 제2 단말의 영상 세션 설정부는, 상기 영상 세션 서버로 영상 세션 주소를 포함하는 영상 세션 요청 신호를 전송하고, 상기 영상 세션 서버는, 멀티미디어 릴레이 서버로 상기 제1 단말 및 제2 단말의 영상 세션 주소를 멀티미디어 릴레이 서버로 전송하고, 제1 단말에 대해 할당한 리소스 주소를 포함하는 영상 세션 응답 신호를 제2 단말로 전송함으로써 제1 단말과 제2 단말 사이에 영상 세션이 설정될 수 있다.
또한, 제2 단말의 영상 서비스 설정부는, 영상 세션이 설정된 이후 데이터 경로 서버로 영상 서비스 실행 응답 신호를 전송하고, 데이터 경로 서버는 이를 제1 단말로 전송할 수 있다.
또한, 상기 제1 단말 및 제2 단말의 영상 서비스 데이터 처리부는, 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 멀티미디어 릴레이 서버의 리소스 주소로 전송하고 멀티미디어 릴레이 서버는 수신한 영상 서비스 데이터를 상대방 단말로 전송함으로써 영상 서비스를 제공할 수 있다.
본 발명의 다른 측면에 의하면, 네트워크를 통해 데이터 경로 서버 및 영상 서비스 제공 시스템과 연결되며, 통신망을 통해 제2 단말과 통화 서비스를 수행하는 제1 단말에 포함되어 통화 서비스 수행시 영상 서비스를 제공하는 영상 서비스 제공 장치에서 영상 서비스를 제공하는 방법에 있어서, 통화 서비스 이벤트가 검출되는 경우 데이터 경로 서버로 경로 연결 요청 신호를 전송하는 제1 단계-여기서, 상기 데이터 경로 서버는 통화 서비스의 상대방 단말인 제2 단말의 데이터 경로 관리부로부터 경로 연결 요청 신호를 수신하고 제1 단말과 제2 단말 사이에 데이터 경로를 형성함-; 영상 서비스 인터페이스를 디스플레이부를 통해 제공하고 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 제2 단계; 상기 영상 서비스 제공 시스템을 통해 통화 서비스의 제2 단말과 영상 서비스를 수행하기 위한 영상 세션을 설정하는 제3 단계; 상기 형성된 데이터 경로 및 데이터 경로 서버를 통해 영상 서비스 설정 데이터를 제2 단말과 송수신함으로써 제2 단말과의 영상 서비스를 설정하는 제4 단계; 및 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 형성된 영상 세션을 통해 제2 단말로 전송하거나, 제2 단말로부터 영상 서비스 데이터를 수신하는 제5 단계를 포함하고, 상기 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터와 제2 단말로부터 수신한 영상 서비스 데이터 중 적어도 어느 하나에 기초하여 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 것을 특징으로 하는 영상 서비스 제공 방법을 제공한다.
본 발명에 의하면, 통신 단말에서 통화 서비스 이벤트와 관련된 통신 신호를 자체적으로 감지하여 통화 서비스 이벤트에 상응하는 통화 서비스를 수행하면서 통신망과는 별도의 네트워크를 통해 영상 공유나 영상 통화와 같은 영상 서비스를 통신 단말로 제공할 수 있는 장치 및 방법을 제공할 수 있다.
또한, 본 발명은 통신 단말을 사용하여 통화를 시도하는 순간부터 통화를 종료하는 시점까지의 통화 과정 중간에 영상 서비스를 제공받을 수 있도록 함으로써 사용자의 편의성과 흥미를 유발할 수 있는 장치 및 방법을 제공할 수 있는 효과가 있다.
도 1은 본 발명에 의한 통화 서비스 수행시 영상 서비스를 제공하는 장치를 포함하는 통신 단말과 데이터 경로 서버 및 영상 서비스 제공 시스템의 연결 상태를 나타낸 도면이다.
도 2는 데이터 경로 서버(100)의 구성의 일실시예를 나타낸 도면이다.
도 3은 영상 서비스 제공 시스템(400)의 구성의 일실시예를 나타낸 도면이다.
도 4는 영상 세션 서버(410)의 내부 구성을 나타낸 도면이다.
도 5는 멀티미디어 릴레이 서버(420)의 구성을 나타낸 도면이다.
도 6은 본 발명에 의한 영상 서비스 제공 장치(500)의 구성의 일실시예를 나타낸 도면이다.
도 7은 본 발명에 의한, 도 1 내지 도 6에서 설명한 통신 단말(200,300)에 포함되는 영상 서비스 제공 장치(500)에서 통화 서비스 수행시 영상 서비스를 제공하는 방법의 일실시예를 나타낸 흐름도이다.
도 8 및 도 9는 본 발명에 의한 영상 서비스 제공 방법에 의해 영상 서비스가 이루어지는 경우의 화면의 실제 예이다.
도 10은 본 발명을 수행하기 위한 통신 단말(200,300)에 포함되는 영상 서비스 제공 장치(500)의 구성을 응용 프로그램(어플리케이션)에 의해 구현한 경우의 일예를 설명하기 위한 도면이다.
도 11은 응용 프로그램 관리부(52)의 내부 구성의 일예를 나타낸 도면이다.
이하, 첨부 도면을 참조하여 본 발명에 의한 실시예들을 상세하게 설명하기로 한다.
도 1은 본 발명에 의한 통화 서비스 수행시 영상 서비스를 제공하는 장치(500, 도 3 참조)를 포함하는 통신 단말과 데이터 경로 서버 및 영상 서비스 제공 시스템의 연결 상태를 나타낸 도면이다.
도 1을 참조하면, 본 발명에 의한 통화 서비스 수행시 영상 서비스를 제공하는 영상 서비스 제공 장치(500, 도 3 참조, 이하, 영상 서비스 제공 장치라 한다)는 통화 서비스를 수행하는 통신 단말(제1 단말(200), 제2 단말(300))에 포함된다. 통신 단말(200,300)은 통신망을 통해 통화 서비스를 수행하며, 또한 네트워크를 통해 데이터 경로 서버(100)와 연결된다.
여기에서, 도 1의 통신망은 공중 전화망(PSTN), 이동 통신망 및 인터넷망 중의 어느 하나 또는 이들의 결합에 의해 통신 서비스를 수행하는 종래의 네트워크를 의미하며, 실제 통신망은 교환기 및 HLR 등의 통신망의 자원을 포함한다. 이러한 통신망을 통해 제1 단말(200)과 제2 단말(300)은 종래의 기술에 의해 알려진 바와 같은 통화 서비스를 제공받게 된다.
한편 도 1에서 네트워크(network)라 함은, 공지의 유/무선 인터넷, 이동 통신망 또는 이들의 결합을 포함하는 개념으로서, 본 발명에서는 통화 서비스를 수행하는 통신망과 대비되는 개념으로 데이터 송수신만을 수행하는 데이터 패킷망을 의미한다.
통신 단말인 제1 단말 및 제2 단말(200,300)은 통신망을 통해 통화 서비스를 제공받기 위한 종래 널리 알려져 있는 바와 같은 공지의 수단으로서, 이동 통신 단말기 또는 유선 통신 단말기를 의미하며, 본 발명에서의 통신 단말(200,300)은 응용 프로그램(어플리케이션)을 설치하여 실행할 수 있으며 인터넷 접속 수단을 구비하는 이른바 "스마트폰"인 것이 바람직하다. 주지된 바와 같이, 통신 단말(200,300)은 터치 스크린 형태의 입력 및 출력 기능을 수행하는 디스플레이부(미도시)를 구비할 수 있다. 또한, 통신 단말(200,300)은 그 내부에 단말의 전체적인 운영을 관리하는 운영 시스템(operation system, OS)을 포함한다.
이러한 통신 단말(200,300)은 본 발명에 있어서 다음과 같은 점을 주요 특징으로 한다. 즉, 제1 단말(200)과 제2 단말(300)은 통신망을 통해 통화 서비스를 수행하면서 통화 연결전, 통화 연결 중 또는 통화 종료후 등과 같은 통화 서비스 이벤트 발생시 해당 통화 서비스 이벤트에 상응하는 통화 서비스를 수행하면서 데이터 경로 서버(100) 및 영상 서비스 제공 시스템(400)을 통해 통신 단말(200,300) 사이에서 영상 서비스 데이터를 전송함으로써 영상 공유 서비스 또는 영상 통화 서비스와 같은 영상 서비스를 통신 단말(200,300)로 제공하는 것을 주요 특징으로 한다.
데이터 경로 서버(100)는, 네트워크를 통해 통신 단말(200,300)과 연결되며, 통신 단말(200,300) 사이에서 통화 서비스 수행 도중 데이터 경로를 형성하고, 통신 단말(200,300)로부터 데이터 경로를 통해 영상 서비스의 실행이나 종료를 위한 영상 서비스 설정 데이터를 수신하고 이를 상대방 단말로 전송함으로써 영상 서비스 제공 시스템(400)을 통해 영상 서비스가 시작되도록 하거나 또는 종료할 수 있도록 하는 기능을 수행한다.
도 2는 데이터 경로 서버(100)의 구성의 일실시예를 나타낸 도면이다.
도 2를 참조하면, 데이터 경로 서버(100)는 경로 관리부(110)와 데이터 전송부(120)를 포함한다.
경로 관리부(110)는 통신 단말(200,300) 사이에서 데이터 경로를 형성하도록 하는 기능을 수행한다. 즉, 제1 단말(200)로부터 제1 경로 연결 요청 신호를 수신하고, 제2 단말(300)로부터 제2 경로 연결 요청 신호를 수신한 후, 이들 제1 및 제2 경로 연결 요청 신호에 기초하여 제1 단말(200)과 제2 단말(300) 간의 데이터 경로를 형성하도록 한다. 형성된 데이터 경로는 후술하는 바와 같이 영상 서비스 설정 데이터가 전송되는 경로(path)로서의 역할을 수행하게 된다.
여기에서, 제1 경로 연결 요청 신호는, 제1 단말(200)에서 통화 서비스 이벤트가 발생할 때 제1 단말(200)로부터 데이터 경로 서버(100)로 전송된다. 또한, 제2 경로 연결 요청 신호는, 제2 단말(300)에서 통화 서비스 이벤트가 발생할 때 제2 단말(300)로부터 데이터 경로 서버(100)로 전송된다.
여기에서, 통화 서비스 이벤트라 함은, 예컨대 제1 단말(200)이 통화 연결을 요청하는 발신 단말이고 제2 단말(300)이 통화 연결을 요청받는 착신 단말인 경우, 제1 단말(200)에서의 통화 서비스 이벤트는 제1 단말(200)에서 제2 단말(300)로 통화 연결을 요청하는 상태인 통화 연결 요청 이벤트, 제2 단말(300)과 통화 연결 중인 상태인 통화 연결 중 이벤트 및 제2 단말(300)과 통화가 종료된 상태인 통화 종료 이벤트 중 어느 하나일 수 있다. 한편, 제2 단말(300)에서의 통화 서비스 이벤트는, 제1 단말(200)로부터의 통화 연결을 요청받고 있는 상태인 통화 응답 요청 이벤트, 제1 단말(200)과 통화 연결 중인 상태인 통화 연결중 이벤트 및 제1 단말(200)과 통화가 종료된 상태인 통화 종료 이벤트 중 어느 하나일 수 있다.
이러한 통화 서비스 이벤트는 통신 단말(200,300)에 탑재되는 운영 시스템(Operating System, OS)에 포함되는 이벤트 검출부에서 검출될 수 있다.
예컨대, 제1 단말(200)이 제2 단말(300)로 통화 연결을 요청하는 경우 제1 단말(200)에서는 통화 연결 요청 이벤트가 발생하고 이에 따라 제1 경로 연결 요청 신호를 데이터 경로 서버(100)로 전송한다. 이러한 제1 단말(200)로부터 통화 연결을 요청받는 제2 단말(300)에서는 통화 응답 요청 이벤트가 발생하고 이에 따라 제2 경로 연결 요청 신호를 데이터 경로 서버(100)로 전송하게 된다.
경로 관리부(110)는 이와 같이 제1 및 제2 경로 연결 요청 신호를 제1 단말(200) 및 제2 단말(300)로부터 각각 수신하고 이에 기초하여 제1 단말(200)과 제2 단말(300) 사이에서 영상 서비스 설정 데이터를 송수신할 수 있도록 하는 데이터 경로를 형성하게 된다.
데이터 전송부(120)는 통신 단말(200,300) 사이에서 상기한 바와 같이 형성되는 데이터 경로를 통해 수신되는 영상 서비스 설정 데이터를 상대방 단말로 전송하는 기능을 수행한다. 앞서 설명한 바와 같이 경로 관리부(110)에 의해 제1 단말(200)과 제2 단말(300) 사이에 데이터 경로가 형성된 상태에서, 제1 단말(200)과 제2 단말(300) 중 적어도 어느 하나의 단말이 영상 서비스의 실행이나 종료를 위한 영상 서비스 설정 데이터를 데이터 경로 서버(100)로 전송할 수 있는데, 데이터 경로 서버(100)의 데이터 전송부(120)는 이를 수신하여 상대방 단말로 전송함으로서, 통신 단말(200,300)이 영상 서비스 제공 시스템(400)을 통해 영상 서비스를 시작하거나 종료할 수 있도록 하는 기능을 수행한다.
데이터 전송부(120)는 예컨대 제1 단말(200)에서 영상 서비스의 실행을 위한 영상 서비스 실행 요청 신호를 수신하고 이를 제2 단말(300)로 전송함으로써, 제1 단말(200)과 제2 단말(300)이 후술하는 영상 서비스 제공 시스템(400)을 통해 영상 서비스를 수행할 수 있도록 한다.
한편, 데이터 전송부(120)는 제1 단말(200)에서 영상 서비스를 종료하기 위한 영상 서비스 종료 요청 신호를 수신한 경우 이를 제2 단말(300)로 전송함으로써 제1 단말(200)과 제2 단말(300)이 후술하는 영상 서비스 제공 시스템(400)을 통해 제공받고 있던 영상 서비스를 종료할 수 있도록 하는 기능을 수행한다.
다시 도 1을 참조하여, 영상 서비스 제공 시스템(400)에 대하여 설명한다.
영상 서비스 제공 시스템(400)은, 네트워크를 통해 통신 단말(200,300)과 연결되며, 전술한 바와 같이 통화 서비스 이벤트 발생시 해당 통화 서비스 이벤트에 상응하는 통화 서비스를 수행하는 통신 단말(200,300) 사이에서 영상 서비스 데이터를 수신하고 이를 상대방 단말로 전송하는 기능을 수행한다.
도 3은 영상 서비스 제공 시스템(400)의 구성의 일실시예를 나타낸 도면이다.
도 3을 참조하면, 영상 서비스 제공 시스템(400)은, 영상 세션 서버(video session server, 410)와 멀티미디어 릴레이 서버(multimedia relay server, 420)를 포함한다.
영상 세션 서버(410)는, 통신 단말(200,300) 사이의 영상 세션을 설정하고 관리하는 기능을 수행한다. 도 4는 영상 세션 서버(410)의 내부 구성을 나타낸 도면이다.
도 4를 참조하면, 영상 세션 서버(410)는, 세션 설정부(411) 및 세션 관리부(412)를 포함한다.
세션 설정부(411)는 통신 단말(200,300)의 요청에 따라 영상 공유 또는 영상 통화 서비스를 위한 영상 세션을 멀티미디어 릴레이 서버(420)와 연동하여 제어하고 설정하는 기능을 수행하고, 세션 관리부(412)는 설정된 영상 세션을 관리하는 기능을 수행한다.
통신 단말(200,300) 중 어느 하나가 영상 공유 서비스 또는 영상 통화 서비스를 시작하고자 하는 경우 그 통신 단말(200,300)의 영상 세션 설정부(530, 도 6 참조)는 영상 세션 서버(410)로 영상 세션 주소를 포함하는 영상 세션 요청 신호를 전송한다.
영상 세션 서버(410)의 세션 설정부(411)는 영상 세션 요청 신호를 수신하고 멀티미디어 릴레이 서버(420)로 영상 세션을 릴레이할 릴레이 리소스(relay resource)를 할당해줄 것을 요청하는 릴레이 리소스 할당 요청 신호를 전송한다. 멀티미디어 릴레이 서버(420)는 영상 세션을 릴레이할 리소스를 할당하고 통신 단말(200,300)에서 사용할 리소스 주소를 영상 세션 서버(410)로 반환한다. 영상 세션 서버(410)는 영상 세션 요청 신호를 전송한 통신 단말(200,300)로 멀티미디어 릴레이 서버(420)로부터 수신한 할당된 리소스 주소를 포함하는 영상 세션 응답 신호를 전송한다.
한편, 영상 세션을 요청한 통신 단말(200,300)의 상대방 단말에서 후술하는 바와 같은 과정을 거쳐서 영상 세션 주소를 포함하는 영상 세션 요청 신호가 수신되면, 영상 세션 서버(410)의 세션 설정부(411)는 통신 단말(200,300)들의 영상 세션 주소를 멀티미디어 릴레이 서버(420)로 전송하고 영상 세션 서버(410)는 미리 할당되어 있던 릴레이 리소스 주소를 포함하는 영상 세션 응답 신호를 상대방 단말로 전송한다.
이러한 과정을 통해 통신 단말(200,300) 사이에는 영상 세션 서버(410) 및 멀티미디어 릴레이 서버(420)를 통해 영상 세션이 설정되고 이를 통해 통신 단말(200,300)은 영상 공유 서비스 또는 영상 통화 서비스와 같은 영상 서비스를 수행할 수 있다.
한편, 영상 서비스를 수행하는 도중 통신 단말(200,300) 중 어느 하나가 영상 서비스를 중지하고자 하는 경우 그 통신 단말(200,300)은 영상 세션 해제 요청 신호를 영상 세션 서버(410)의 세션 설정부(411)로 전송하고 세션 설정부(411)는 멀티미디어 릴레이 서버(420)로 릴레이 리소스를 해제할 것을 요청한다. 이에 의하여 멀티미디어 릴레이 서버(420)는 할당되어 있던 릴레이 리소스를 해제하고 해제되었음을 알리는 영상 세션 해제 응답 신호를 영상 세션 서버(410)로 전송한다. 이러한 과정에 의하여 통신 단말(200,300)간의 영상 세션은 종료되고 영상 서비스는 중지되게 된다.
멀티미디어 릴레이 서버(420)는, 영상 세션 서버(410)을 제어하고 영상 세션을 통한 영상 서비스 데이터 전송을 위한 리소스를 할당하고 관리하며, 통신 단말(200,300)로부터 수신되는 영상 서비스 데이터를 상대방 단말로 전송하는 기능을 수행한다.
도 5는 멀티미디어 릴레이 서버(420)의 구성을 나타낸 도면이다.
도 5를 참조하면, 멀티미디어 릴레이 서버(420)는 제어 처리부(421)와 영상 서비스 데이터 전송부(422)를 포함한다.
제어 처리부(421)는, 영상 세션 서버(410)의 제어를 처리하고 영상 서비스 데이터 전송 즉, 영상 세션을 릴레이할 릴레이 리소스인 영상 데이터 전송부(422)를 관리하는 기능을 수행한다. 즉, 제어 처리부(421)는, 전술한 바와 같이 영상 세션 서버(410)의 세션 설정부(411)로부터 영상 세션을 릴레이할 릴레이 리소스(relay resource)를 할당해줄 것을 요청하는 릴레이 리소스 할당 요청 신호가 수신되면 영상 세션을 릴레이할 릴레이 리소스인 영상 서비스 데이터 전송부(422)를 할당하고 해당 영상 서비스 데이터 전송부(422)의 리소스 주소를 영상 세션 서버(410)로 전송한다. 영상 세션 서버(410)는 전술한 바와 같이, 영상 세션 요청 신호를 전송한 통신 단말(200,300)로 멀티미디어 릴레이 서버(420)로부터 수신한 할당된 리소스 주소, 즉 영상 서비스 데이터 전송부(422)의 주소를 포함하는 영상 세션 응답 신호를 전송한다.
영상 데이터 전송부(422)는 통신 단말(200,300)로부터 전송되는 영상 서비스 데이터를 상대방 단말로 전송하는 기능을 수행한다. 영상 데이터 전송부(422)는 전술한 바와 같이, 제어 처리부(421)에서 통신 단말(200,300) 사이에서 영상 서비스를 수행할 때 영상 서비스 데이터가 전송될 영상 세션의 릴레이 리소스로서 동작하게 되며 이를 통해 통신 단말(200,300)간에 영상 서비스 데이터가 전송되게 된다.
상기 실시예에서 영상 세션 서버(410)와 멀티미디어 릴레이 서버(420)는 별도의 구성으로 설명하였으나, 이들은 통합 구성될 수도 있음은 물론이다. 즉, 영상 세션 서버(410)와 멀티미디어 릴레이 서버(420)는 본 발명을 수행하기 위하여 기능적으로 구분된 구성이므로 서로 통합되어 구성될 수도 있다.
도 6은 본 발명에 의한 영상 서비스 제공 장치(500)의 구성의 일실시예를 나타낸 도면이다.
도 6의 영상 서비스 제공 장치(500)는 통신 단말(200,300)에 포함되는데, 예컨대 통신 단말(200,300)의 운영 시스템(OS)의 일부로서 포함되거나 응용 프로그램(application)의 형태로 설치되어 포함될 수 있다. 또한, 통신 단말(200,300) 내부에 하드웨어적으로 구현할 수도 있다.
도 6에서 영상 서비스 제공 장치(500)는 통신 단말(200, 300)에 공통으로 구비된다. 도 6에서는 본 발명과 관련된 통신 단말(200,300)의 구성으로서 영상 서비스 제공 장치(500)만을 나타내었으며 통신 단말(200,300)의 기타 일반적인 구성은 생략하였음을 유의하여야 한다.
도 6을 참조하면, 영상 서비스 제공 장치(500)는, 데이터 경로 관리부(510), 영상 서비스 수행부(520), 영상 세션 설정부(530), 메뉴 인터페이스 관리부(540), 영상 서비스 설정부(550) 및 영상 서비스 데이터 처리부(560)를 포함한다.
우선, 데이터 경로 관리부(510)는, 데이터 경로 서버(100)와의 데이터 경로를 형성하기 위한 수단으로서, 통신 단말(200,300)에서 통화 서비스 이벤트가 검출되는 경우 데이터 경로 서버(100)로 경로 연결 요청 신호를 전송하고, 데이터 경로 서버(100)를 통해 통화 서비스의 상대방 단말과 데이터 경로를 형성하고 형성된 데이터 경로를 유지하고 관리하는 기능을 수행한다. 앞서 설명한 바와 같이, 예컨대 제1 단말(200)이 발신 단말이고 제2 단말(300)이 착신 단말이라 할 때, 제1 단말(200)에서 제2 단말(300)로 통화 연결을 요청하는 통화 연결 요청 이벤트가 발생하는 경우, 제1 단말(200)은 이벤트 검출부(미도시)에서 통화 연결 요청 이벤트가 발생하였음을 검출하고 제1 단말(200)의 데이터 경로 관리부(510)는 이에 따라 경로 연결 요청 신호(제1 경로 연결 요청 신호)를 데이터 경로 서버(100)로 전송한다. 한편, 이 때 데이터 경로 서버(100)는 통화 서비스의 상대방 단말 즉, 통화 연결 요청 신호를 수신하는 착신 단말인 제2 단말(300)로부터 또 다른 경로 연결 요청 신호(제2 경로 연결 요청 신호)를 수신하고, 데이터 경로 서버(100)는 통신 단말(200,300)들 사이에서 데이터 경로를 형성하게 된다.
전술한 바와 같이, 통화 서비스 이벤트는, 통화 연결을 요청하는 상태인 통화 연결 요청 이벤트, 통화 연결 요청을 수신하는 상태인 통화 응답 요청 이벤트, 통화 연결 중인 상태인 통화 연결중 이벤트 및 통화 종료 상태인 통화 종료 이벤트 중 어느 하나일 수 있다.
한편, 데이터 경로 관리부(510)에서 전송되는 경로 연결 요청 신호는 통화 서비스를 수행하는 상대방 단말인 식별자를 포함하는 것이 바람직하다. 또한, 경로 연결 요청 신호는 경로 연결 요청 신호를 전송하는 통신 단말(200,300) 자신의 식별자도 포함하는 것이 바람직하다. 여기에서, 식별자는 예컨대 전화 번호 또는 ID 등과 같은 것일 수 있다. 이러한 식별자는 데이터 경로 서버(100)에서 수신되는 경로 연결 요청 신호들에 의해 데이터 경로를 형성해야 할 단말들을 구분하는데 사용된다.
영상 서비스 수행부(520)는 통화 서비스 이벤트가 검출되는 경우 영상 서비스 인터페이스를 디스플레이부를 통해 제공하고 영상 서비스 화면을 구성하여 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 기능을 수행한다.
이를 위하여 영상 서비스 수행부(520)는 통신 단말(200,300)에 구비되는 카메라와 같은 영상 획득 수단에 의해 촬영되는 영상에 상응하는 영상 서비스 데이터에 기초하여 영상 서비스 화면을 구성하고 이를 영상 서비스 인터페이스를 통해 디스플레이부에 제공하게 된다.
또한, 영상 서비스 수행부(520)는, 전술한 바와 같이 영상 세션 서버(410) 및 멀티미디어 릴레이 서버(420)를 통해 상대방 단말로부터 수신되는 영상 서비스 데이터에 기초하여 영상 서비스 화면을 구성할 수도 있다.
또한, 영상 서비스 수행부(520)는 자신의 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터 및 상대방 단말로부터 수신되는 영상 서비스 데이터에 기초하여 영상 서비스 화면을 구성하고 이들을 하나의 영상 서비스 인터페이스를 통해 디스플레이부에 제공할 수도 있다.
한편, 영상 서비스 인터페이스라 함은, 영상 공유 서비스나 영상 통화 서비스와 같은 영상 서비스를 통신 단말(200,300) 사용자에게 제공할 수 있도록 하는 사용자 인터페이스를 의미하며, 종래 기술에 의해 알려진 바와 같이, 예컨대, 영상을 표시하기 위한 영상 표시부, 영상 서비스와 관련된 다양한 옵션이나 메뉴를 설정할 수 있도록 하는 선택부 등을 포함하며, 이러한 인터페이스의 구성은 종래 기술에 의해 알려진 것이므로 상세 설명은 생략한다.
한편, 영상 서비스 데이터라 함은, 영상 공유 서비스나 영상 통화 서비스와 같은 영상 서비스를 제공하기 위해 사용되는 데이터를 의미하는데, 카메라와 같은 영상 획득 수단에 의해 획득되는 영상을 영상 서비스 인터페이스를 통해 디스플레이부에 제공할 수 있도록 하는 데이터를 의미한다. 이와 같이 영상을 영상 서비스 인터페이스를 통해 디스플레이부에 제공할 수 있도록 통신 단말(200,300)은 영상 코덱부(미도시)를 더 포함할 수 있다. 이러한 영상 서비스 데이터는 영상 서비스가 어떠한 방식으로 구현되는가에 따라 다를 수 있으나 본 발명에서의 영상 서비스 자체는 전술한 바와 같이 종래 기술에 의해 알려진 방식을 이용할 수 있으며 본 발명은 영상 서비스 자체 및 영상 서비스를 구현하기 위한 영상 서비스 데이터 자체를 목적으로 하는 것은 아니므로 이에 대한 상세 설명 또한 생략한다. 즉, 본 발명에서의 영상 서비스 데이터는 영상 서비스를 단말(200,300)에서 제공할 수 있도록 하는 종래 기술에 의해 알려진 데이터를 의미하며, 종래 알려진 기술을 그대로 이용할 수 있다.
한편, 본 발명에 있어서, 영상 서비스로서, 영상 공유 서비스라 함은, 본 발명에 있어서는 영상을 공유하기 위한 서비스로서 통신 단말(200,300) 중의 어느 하나가 상대방 단말로 일방적으로 영상 서비스 데이터를 전송하여 영상을 공유하는 서비스를 의미하는 것으로 사용하고, 영상 통화 서비스라 함은 통신 단말(200,300)이 서로 영상 서비스 데이터를 상대방 단말로 양방향으로 송수신함으로써 영상 통화를 수행할 수 있도록 하는 서비스를 의미하는 것으로 사용한다.
한편, 영상 서비스 제공 장치(500)는, 메뉴 인터페이스 관리부(540)를 포함할 수 있는데, 메뉴 인터페이스 관리부(540)는, 통화 서비스 이벤트가 검출되는 경우 구동되어 메뉴 선택 인터페이스를 디스플레이부를 통해 제공하는 기능을 수행한다.
즉, 통화 서비스 이벤트가 발생하면, 전술한 바와 같이 데이터 경로 관리부(510)에 의해 데이터 경로를 형성하면서, 이와 함께 메뉴 인터페이스 관리부(540)에 의해 메뉴 선택 인터페이스를 디스플레이부를 통해 제공하고, 이를 통해 사용자가 영상 서비스를 수행할 것인지를 선택할 수 있도록 한다. 사용자가 이를 선택한 경우 영상 서비스 수행부(520)가 영상 서비스 인터페이스를 디스플레이부를 통해 제공하도록 할 수 있다.
한편, 상기 메뉴 선택 인터페이스는, 디스플레이부의 통화 서비스 수행을 위해 제공되는 통화 서비스 인터페이스 위에 예컨대 겹치도록(overlay) 표시할 수 있다. 여기에서, 메뉴 선택 인터페이스는, 통화 서비스 인터페이스의 일부 영역에 부분적으로 표시되도록 제공될 수도 있다.
영상 세션 설정부(530)는, 영상 서비스 제공 시스템(400)을 통해 통화 서비스의 상대방 단말과 영상 서비스를 수행하기 위한 영상 세션을 설정하는 기능을 수행하고, 영상 서비스 설정부(550)는 데이터 경로 관리부(510)에 의해 형성된 데이터 경로 및 데이터 경로 서버(100)를 통해 영상 서비스 설정 데이터를 상대방 단말과 송수신함으로써 통화 서비스를 수행하는 상대방 단말과의 영상 서비스를 설정하는 기능을 수행한다.
즉, 영상 세션 설정부(530)와 영상 서비스 설정부(550)는, 영상 서비스 제공 시스템(400)의 영상 세션 서버(410) 및 멀티미디어 릴레이 서버(420)를 통해 상대방 단말과의 영상 세션을 설정하는데, 구체적인 과정은 다음과 같다.
즉, 통신 단말(200,300) 중 어느 하나가 영상 공유 서비스 또는 영상 통화 서비스를 시작하고자 하는 경우 그 통신 단말(200,300)의 영상 세션 설정부(530)는 영상 세션 서버(410)로 영상 세션 주소를 포함하는 영상 세션 요청 신호를 전송한다. 영상 세션 서버(410)의 세션 설정부(411)는 영상 세션 요청 신호를 수신하고 멀티미디어 릴레이 서버(420)로 영상 세션을 릴레이할 릴레이 리소스(relay resource)를 할당해줄 것을 요청하는 릴레이 리소스 할당 요청 신호를 전송한다. 그리고, 멀티미디어 릴레이 서버(420)는 영상 세션을 릴레이할 리소스를 할당하고 통신 단말(200,300)에서 사용할 리소스 주소를 영상 세션 서버(410)로 반환한다. 이어서, 영상 세션 서버(410)는 영상 세션 요청 신호를 전송한 통신 단말(200,300)로 멀티미디어 릴레이 서버(420)로부터 수신한 할당된 리소스 주소를 포함하는 영상 세션 응답 신호를 전송한다.
이후, 영상 세션을 요청한 통신 단말(200,300)의 영상 세션 설정부(530)가 영상 세션 응답 신호를 수신하면, 영상 세션을 요청한 통신 단말(200,300)의 영상 서비스 설정부(550)는, 데이터 경로 관리부(510)에 의해 형성된 데이터 경로를 통해 데이터 경로 서버(100)로 영상 서비스를 시작할 것을 요청하는 영상 서비스 실행 요청 신호를 전송하고, 데이터 경로 서버(100)는 수신한 영상 서비스 실행 요청 신호를 영상 세션을 요청한 통신 단말(200,300)의 상대방 단말로 전송한다.
영상 세션을 요청한 통신 단말(200,300)의 상대방 단말의 영상 서비스 설정부(550)가 데이터 경로 서버(100)로부터 영상 서비스 실행 요청 신호를 수신하면, 영상 서비스 실행 요청 신호가 수신되었음을 디스플레이부를 통해 사용자에게 알리고 사용자가 영상 서비스를 실행할 것을 승낙하는 선택 입력 신호를 입력한 경우 상대방 단말의 영상 세션 설정부(530)는 자신의 영상 세션 주소를 포함하는 영상 세션 요청 신호를 영상 세션 서버(410)로 전송하고, 영상 세션 서버(410)의 세션 설정부(411)는 통신 단말(200,300)들의 영상 세션 주소를 멀티미디어 릴레이 서버(420)로 전송한다. 이후, 영상 세션 서버(410)는 미리 할당되어 있던 릴레이 리소스 주소를 포함하는 영상 세션 응답 신호를 상대방 단말로 전송한다.
다음으로, 상대방 단말의 영상 서비스 설정부(550)는 영상 서비스 실행 응답 신호를 데이터 경로 서버(100)로 전송하고, 데이터 경로 서버(100)는 이를 영상 세션을 요청한 통신 단말로 전송한다.
이러한 과정을 통해 통신 단말(200,300)의 영상 세션 설정부(530)는 영상 세션 서버(410) 및 멀티미디어 릴레이 서버(420)를 통해 영상 세션을 설정할 수 있게 되고 이를 통해 통신 단말(200,300)은 영상 공유 서비스 또는 영상 통화 서비스와 같은 영상 서비스를 수행할 수 있다.
한편, 영상 서비스를 수행하는 도중 통신 단말(200,300) 중 어느 하나가 영상 서비스를 중지하고자 하는 경우 그 통신 단말(200,300)의 영상 세션 설저부(530)는 영상 세션 해제 요청 신호를 영상 세션 서버(410)의 세션 설정부(411)로 전송하고 세션 설정부(411)는 멀티미디어 릴레이 서버(420)로 릴레이 리소스를 해제할 것을 요청한다. 이에 의하여 멀티미디어 릴레이 서버(420)는 할당되어 있던 릴레이 리소스를 해제하고 해제되었음을 알리는 영상 세션 해제 응답 신호를 영상 세션 서버(410)로 전송한다. 이러한 과정에 의하여 통신 단말(200,300)간의 영상 세션은 종료되고 영상 서비스는 중지되게 된다.
영상 서비스 데이터 처리부(560)는, 전술한 바와 같이 형성되는 영상 세션을 통해 상대방 단말로 영상 서비스 데이터를 전송하거나 상대방 단말로부터 영상 서비스 데이터를 수신하는 기능을 수행한다.
여기서 자신의 영상 서비스 데이터는 카메라와 같은 영상 획득 수단에 의해 획득되는 영상에 상응하는 데이터를 의미하고, 상대방 단말로부터 수신되는 영상 서비스 데이터는 상대방 단말의 영상 획득 수단에 의해 획득되는 영상에 상응하는 데이터를 의미한다.
즉, 통신 단말(200,300)의 영상 서비스 데이터 처리부(560)는, 영상 서비스 데이터를 멀티미디어 릴레이 서버(420)의 리소스 주소로 전송하고 멀티미디어 릴레이 서버(420)는 수신한 영상 서비스 데이터를 상대방 단말로 전송함으로써 영상 서비스를 제공하도록 한다.
한편, 여기에서 통화 서비스는 전술한 바와 같은 영상 서비스와 병행하여 이루어질 수 있다. 즉, 통화 서비스는 도 1에서 설명한 바와 같이 통화망을 통해 이루어지고 영상 서비스 데이터의 전송은 통화망과는 별도의 데이터 패킷망인 네트워크를 통해 영상 세션 서버 및 멀티미디어 릴레이 서버에 의해 형성되는 영상 세션을 통해 이루어지므로 통화 서비스와 영상 서비스 데이터의 전송은 동시에 이루어질 수 있다.
한편, 영상 서비스 제공 장치(500)는 영상 서비스 화면을 캡처하거나 녹화할 수 있는 영상 녹화부(미도시)를 포함할 수 있다.
도 7은 본 발명에 의한, 도 1 내지 도 6에서 설명한 통신 단말(200,300)에 포함되는 영상 서비스 제공 장치(500)에서 통화 서비스 수행시 영상 서비스를 제공하는 방법의 일실시예를 나타낸 흐름도이다.
도 7은 도 1 내지 도 6에서 설명한 통신 단말(200,300)과 데이터 경로 서버(100), 영상 세션 서버(410), 멀티미디어 릴레이 서버(420)를 통해 이루어지는 영상 서비스 제공 방법의 일실시예를 나타낸 흐름도로서, 도 7의 실시예는, 통화 서비스 이벤트로서 제1 단말(200)에서 제2 단말(300)로 통화 연결을 요청하는 통화 연결 요청 이벤트가 발생한 경우에 대한 것이다. 도 7에서 제1 단말(200)은 통화 연결을 요청하는 발신 단말이고, 제2 단말(300)은 제1 단말(200)로부터 통화 연결을 요청받는 착신 단말인 것으로 가정한다.
도 7을 참조하면, 우선 제1 단말(200)에서 제2 단말(300)로 통화 연결을 요청하게 되면, 제1 단말(200)에서 통화 연결 요청 이벤트가 발생하고, 제1 단말(200)의 이벤트 검출부(미도시)에서는 통화 연결 요청 이벤트가 발생하였음을 검출하고(S100), 통화 연결 요청 이벤트에 의하여 통화 연결 요청 신호가 발생하고 통화 연결 요청 신호는 통신망의 교환기 등의 자원을 통해 제2 단말(300)로 전달된다(S110).
제1 단말(200)에서 통화 연결 요청 이벤트가 발생하면, 제1 단말(200)의 데이터 경로 관리부(510)는 제1 경로 연결 요청 신호를 데이터 경로 서버(100)로 전송한다(S120). 이 때, 도면에는 나타내지는 않았으나 제1 단말(200)은 통화 연결 요청 이벤트가 발생하였음을 알리는 통화 서비스 상태 신호를 데이터 경로 서버(100)로 전송할 수 있다.
한편, 제2 단말(300)에서는 통화 연결 요청 신호를 수신함에 따라 예컨대 전화 벨이 울리면서 통화 응답 요청 이벤트가 발생하게 되고(S130), 이에 따라 제2 단말(300)의 데이터 경로 관리부(510)는 제2 경로 연결 요청 신호를 데이터 경로 서버(100)로 전송한다(S140).
한편, 데이터 경로 관리부(510)에서 전송되는 경로 연결 요청 신호는 통화 서비스 이벤트의 상대방 단말의 식별자, 예컨대 상대방 단말의 전화번호를 포함할 수 있다. 데이터 경로 서버(100)는 상대방 단말의 식별자를 수신하여 데이터 경로를 형성할 상대방 단말을 인식하고 인식된 상대방 단말로부터 경로 연결 요청 신호가 수신되는 경우에 데이터 경로를 형성하도록 할 수 있다. 이 경우, 경로 연결 요청 신호는 경로 연결 요청 신호를 전송하는 자신의 식별자, 예컨대 전화 번호를 포함하도록 하는 것이 바람직하다.
데이터 경로 서버(100)는 제1 및 제2 경로 연결 신호를 각각 수신하면 양 단말 사이에서 데이터 송수신 즉, 후술하는 위치 정보를 송수신하기 위한 데이터 경로를 네트워크를 통해 형성한다(S150). 데이터 경로 서버(100)는 전술한 바와 같이 단말(200,300)의 식별자에 기초하여 서로 연결된 데이터 경로를 식별하고 단말(200,300)간의 데이터 경로를 형성할 수 있다. 앞서 설명한 바와 같이 여기에서의 네트워크는 통신망과는 별도의 데이터 패킷망을 의미한다.
이러한 상태에서 제1 단말(200)의 디스플레이부에는 메뉴 인터페이스 관리부(540)에 의해 메뉴 선택 인터페이스가 제공된다(S160). 이 메뉴 선택 인터페이스에는 사용자가 본 발명에 의한 영상 서비스를 수행할 것인지를 선택할 수 있도록 하는 메뉴가 제공되고, 사용자가 이를 선택하면, 제1 단말(200)의 영상 서비스 수행부(520)는 제1 단말(200)의 디스플레이부에 영상 서비스 인터페이스를 제공한다(S170).
영상 서비스 인터페이스가 제공된 상태에서, 제1 단말(200)의 영상 세션 설정부(530)는 전술한 바와 같이 영상 세션 요청 신호를 영상 세션 서버(410)로 전송한다(S180). 이 영상 서비스 실행 요청 신호는 제1 단말(200)의 영상 세션 주소를 포함한다.
영상 세션 서버(410)의 세션 설정부(411)는 영상 세션 요청 신호를 수신하고 멀티미디어 릴레이 서버(420)로 영상 세션을 릴레이할 릴레이 리소스(relay resource)를 할당해줄 것을 요청하는 릴레이 리소스 할당 요청 신호를 전송한다(S190).
멀티미디어 릴레이 서버(420)는 영상 세션을 릴레이할 리소스를 할당하고 제1 단말(200) 및 제2 단말(300)이 영상 서비스 데이터 전송을 위해 사용할 리소스 주소를 릴레이 소스 할당 응답 신호로서 영상 세션 서버(410)로 전송한다(S200).
영상 세션 서버(410)는 영상 세션 요청 신호를 전송한 제1 단말(200)로 멀티미디어 릴레이 서버(420)로부터 수신한 할당된 리소스 주소를 포함하는 영상 세션 응답 신호를 전송한다(S210).
영상 세션을 요청한 제1 단말(200)의 영상 세션 설정부(530)가 영상 세션 응답 신호를 수신하면, 영상 세션을 요청한 제1 단말(200)의 영상 서비스 설정부(550)는, 단계(S100) 내지 단계(S150)을 통해 데이터 경로 관리부(510)에 의해 형성된 데이터 경로를 통해 데이터 경로 서버(100)로 영상 서비스를 시작할 것을 요청하는 영상 서비스 실행 요청 신호를 전송하고(S220), 데이터 경로 서버(100)는 수신한 영상 서비스 실행 요청 신호를 제2 단말(300)로 전송한다(S230).
제2 단말(300)의 영상 서비스 설정부(550)는 데이터 경로 서버(100)로부터 영상 서비스 실행 요청 신호를 수신하고, 영상 서비스 실행 요청 신호가 수신되었음을 디스플레이부를 통해 사용자에게 알리고 사용자가 영상 서비스를 실행할 것을 승낙하는 선택 입력 신호를 입력한 경우(S240), 제2 단말(300)의 영상 세션 설정부(530)는 자신의 영상 세션 주소를 포함하는 영상 세션 요청 신호를 영상 세션 서버(410)로 전송한다(S250). 이 영상 세션 요청 신호는 제2 단말(300)의 영상 세션 주소를 포함한다.
다음으로, 영상 세션 서버(410)의 세션 설정부(411)는 제1 및 제2 통신 단말(200,300)들의 영상 세션 주소를 멀티미디어 릴레이 서버(420)로 전송한다(S260). 이후, 영상 세션 서버(410)는 미리 할당되어 있던 릴레이 리소스 주소를 포함하는 영상 세션 응답 신호를 제2 단말(300)로 전송한다(S270).
다음으로, 제2 단말(300)의 영상 서비스 설정부(550)는 영상 서비스 실행 응답 신호를 데이터 경로 서버(100)로 전송하고(S280), 데이터 경로 서버(100)는 이를 영상 세션을 요청한 제1 단말(200)로 전송한다(S290).
이러한 과정을 통해 제1 및 제2 단말(200,300)의 영상 세션 설정부(530)는 영상 세션 서버(410) 및 멀티미디어 릴레이 서버(420)를 통해 영상 세션을 설정할 수 있게 되고 이를 통해 제1 및 제2 단말(200,300)은 영상 공유 서비스 또는 영상 통화 서비스와 같은 영상 서비스를 수행할 수 있다.
다음으로, 제1 단말(200) 및 제2 단말(300)의 영상 서비스 데이터 처리부(560)는 각각 영상 서비스 데이터 전송을 시작하여 전술한 바와 같은 과정을 통해 형성된 영상 세션을 통해 멀티미디어 릴레이 서버(420)에 의해 상대방 단말로 영상 서비스 데이터를 전송하거나 상대방 단말로부터 영상 서비스 데이터를 수신하게 된다(S300~S330).
제1 단말(200) 및 제2 단말(300)의 영상 서비스 데이터 처리부(560)는 상대방 단말로부터 수신한 영상 서비스 데이터를 영상 서비스 수행부(520)로 전달하고, 영상 서비스 수행부(520)는 상대방 단말로부터 수신한 영상 서비스 데이터와 자신의 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터 중 적어도 어느 하나에 의해 영상 서비스 화면을 구성하고 이를 영상 서비스 인터페이스를 통해 디스플레이부에 제공하게 된다(S340, S350). 여기에서, 영상 서비스 화면은 상대방 단말로부터 수신한 영상 서비스 데이터만으로 구성될 수도 있고 자신의 영상 서비스 데이터만으로 구성할 수도 있다. 또한, 이들 2 영상 서비스 데이터가 하나의 화면에 동시에 표시되도록 영상 서비스 화면을 구성할 수도 있다.
한편, 도 7에서는 영상 서비스로서 자신의 영상 서비스 데이터를 상대방 단말로 각각 전송하는 영상 통화 서비스를 수행하는 경우에 대해서 설명하였으나 통신 단말(200,300) 중 어느 하나만이 상대방 단말로 영상 서비스 데이터를 전송하는 영상 공유 서비스인 경우에도 기본적인 구성은 동일하되 다음과 같은 점에서만 차이가 있다.
예컨대, 제1 단말(200)이 영상 서비스 데이터를 전송하고 제2 단말(300)은 영상 서비스 데이터를 제1 단말(200)로 전송하지 않는 경우, 즉, 제1 단말(200)의 영상 서비스 데이터만이 제2 단말(300)로 공유되는 경우라고 하면, 단계(S100) 내지 단계(S290)까지는 동일하게 수행하고 제2 단말(300)에서는 단계(S310)을 수행하지 않고, 단계(S320) 및 단계(S330)에서 영상 서비스 데이터는 제1 단말(200)로부터 제2 단말(300) 방향으로만 전송된다는 점에서만 차이가 있다.
한편, 도 7에 도시하지는 않았으나, 영상 서비스를 수행하는 도중 통신 단말(200,300) 중 어느 하나가 영상 서비스를 중지하고자 하는 경우에는 전술한 영상 세션을 설정하는 과정과 유사하게 다음과 같은 과정으로 이루어질 수 있다.
즉, 영상 서비스를 중지하고자 하는 통신 단말(200,300)의 영상 세션 설정부(530)는 영상 세션 해제 요청 신호를 영상 세션 서버(410)의 세션 설정부(411)로 전송하고 세션 설정부(411)는 멀티미디어 릴레이 서버(420)로 릴레이 리소스를 해제할 것을 요청한다. 이에 의하여 멀티미디어 릴레이 서버(420)는 할당되어 있던 릴레이 리소스를 해제하고 해제되었음을 알리는 영상 세션 해제 응답 신호를 영상 세션 서버(410)로 전송한다. 이러한 과정에 의하여 통신 단말(200,300)간의 영상 세션은 종료되고 영상 서비스는 중지되게 된다.
한편, 전술한 바와 같이, 통화 서비스는 전술한 바와 같은 영상 서비스와 병행하여 이루어질 수 있다. 즉, 통화 서비스는 도 1에서 설명한 바와 같이 통화망을 통해 이루어지고 영상 서비스 데이터의 전송은 통화망과는 별도의 데이터 패킷망인 네트워크를 통해 영상 세션 서버 및 멀티미디어 릴레이 서버에 의해 형성되는 영상 세션을 통해 이루어지므로 통화 서비스와 영상 서비스 데이터의 전송은 동시에 이루어질 수 있다.
도 8은 본 발명에 의한 영상 서비스 제공 방법에 의해 영상 서비스가 이루어지는 경우의 화면의 실제 예로서, 제1 단말(200)이 발신 단말이고 제2 단말(300)이 착신 단말인 경우 제1 단말(200)과 제2 단말(300)이 통화 중인 경우(통화 연결중 이벤트) 제1 단말(200) 및 제2 단말(300)에서의 화면을 나타낸 것이다. 도 8의 예는 영상 서비스로서 영상 공유 서비스에 대한 것이며, 도 8에서 (a)~(c)는 제1 단말(200)의 화면이고, (d)~(f)는 제2 단말(300)의 화면을 나타낸 것이다.
우선, 도 8의 (a)에 나타낸 바와 같이, 제1 단말(200)이 제2 단말(300)과 통화 중인 경우 제1 단말(200)의 디스플레이부에 메뉴 선택 인터페이스가 제공되고(도 7의 단계(S160) 참조), 사용자가 해당 메뉴 선택 인터페이스로부터 "영상 공유"를 선택한 경우, 전술한 바와 같은 과정을 통해 제2 단말(300)과의 영상 세션이 설정되고 제2 단말(300)로 영상 서비스 실행 요청 신호가 전송되어 제2 단말(300)의 디스플레이부에 영상 서비스 실행 요청 신호가 수신되었음을 알리는 메뉴 인터페이스를 도 8의 (d)와 같이 표시된다. 이 상태에서 제2 단말(300) 사용자가 "영상 공유"를 선택하면 도 8의 (b)와 같이 제1 단말(200)의 영상 서비스 제공 장치(500)는 전술한 바와 같은 과정을 통해 제1 단말(200)의 영상 서비스 데이터에 기초한 영상 서비스 화면을 구성하여 영상 서비스 인터페이스를 통해 디스플레이부에 영상 서비스 화면을 제공한다.
이와 함께 제2 단말(300)의 영상 서비스 제공 장치(500)도 전술한 바와 같은 과정을 통해 제1 단말(200)로부터 수신하는 영상 서비스 데이터에 기초하여 영상 서비스 화면을 구성하여 영상 서비스 인터페이스를 통해 디스플레이부에 영상 서비스 화면을 제공한다.
이러한 상태에서, 도 8의 (c), (f)에 나타낸 바와 같이 제1 단말(200) 사용자가 화면의 "영상 종료" 버튼을 선택하면, 앞서 설명한 바와 같은 과정을 통해 영상 서비스가 종료되게 된다.
도 9는 본 발명에 의한 영상 서비스 제공 방법에 의해 영상 서비스가 이루어지는 경우의 화면의 또 다른 예를 나타낸 것으로서, 영상 서비스로서 영상 통화 서비스가 제공되는 경우를 나타낸 것이다. 도 9에서도 도 8과 마찬가지로, 제1 단말(200)이 발신 단말이고 제2 단말(300)이 착신 단말인 경우 제1 단말(200)과 제2 단말(300)이 통화 중인 경우(통화 연결중 이벤트) 제1 단말(200) 및 제2 단말(300)에서의 화면을 나타낸 것이다. 도 9에서 (a)~(c)는 제1 단말(200)의 화면이고, (d)~(f)는 제2 단말(300)의 화면을 나타낸 것이다.
도 8에서 설명한 바와 마찬가지로, 도 9의 (a)에 나타낸 바와 같이 제1 단말(200)이 제2 단말(300)과 통화 중인 경우 제1 단말(200)의 디스플레이부에 메뉴 선택 인터페이스가 제공되고, 사용자가 해당 메뉴 선택 인터페이스로부터 "영상 통화"를 선택한 경우, 전술한 바와 같은 과정을 통해 제2 단말(300)과의 영상 세션이 설정되고 제2 단말(300)로 영상 서비스 실행 요청 신호가 전송되어 제2 단말(300)의 디스플레이부에 영상 서비스 실행 요청 신호가 수신되었음을 알리는 인터페이스를 도 9의 (e)와 같이 표시한다. 이 상태에서 제2 단말(300) 사용자가 "수락"를 선택하면, 제1 단말(200)과 제2 단말(300)은 도 7에서 설명한 바와 같은 과정을 통해 영상 세션을 설정하고 이를 통해 각각 영상 서비스 데이터를 송수신하고 이들에 기초하여 영상 서비스 화면을 구성하여 도 9의 (c) 및 (f)와 같이 영상 서비스 인터페이스를 통해 디스플레이부에 제공하게 된다. 도 9의 (b)는 제2 단말(300)이 영상 통화를 수락하기 전에는 자신의 영상 서비스 데이터에 기초한 영상 서비스 화면을 구성하여 디스플레이부에 표시한 상태를 나타낸 화면이다. 이 상태에서 상대방 단말이 영상 통화를 수락하면 도 9의 (c)와 같은 화면으로 전환된다.
다음으로, 본 발명에 의한 영상 서비스 제공 장치(500)를 포함하는 통신 단말(200,300)을 실제 구현하는 방식에 대해서 도 10 및 도 11을 참조하여 설명한다.
우선, 본 발명을 수행하기 위한 도 3에 나타낸 바와 같은 통신 단말(200,300)에 포함되는 영상 서비스 제공 장치(500)는 통신 단말(200,300)에 포함되는 운영 시스템에 통합 포함되도록 구현될 수 있다. 다른 방법으로서, 사후적으로 통신 단말(200,300)에 응용 프로그램(어플리케이션, application)의 형태로 설치되어 구현되는 것도 가능하다. 특히, 예컨대 안드로이드(android)와 같은 운영 시스템은 단말기 제조사나 응용 프로그램 제조업체가 운영체제(OS)로부터 통화 서비스 이벤트를 수신하여 다양한 처리가 가능하도록 개방되어 있으므로 본 발명에 특히 적합하다. 예컨대, 안드로이드 운영 시스템에서 통화 연결 요청 이벤트가 발생하는 경우 통신 단말(200,300)의 운영 시스템의 이벤트 검출부에서 이를 검출한 후 응용 프로그램의 형태로 구현된 영상 서비스 제공 장치(500)를 동작시키도록 할 수 있다.
도 10은 본 발명을 수행하기 위한 통신 단말(200,300)에 포함되는 영상 서비스 제공 장치(500)의 구성을 응용 프로그램(어플리케이션)에 의해 구현한 경우의 일예를 설명하기 위한 도면이다.
도 10을 참조하면, 통신 단말(200,300)은 운영 시스템(OS) 내에 이벤트 전송부(51)와 응용프로그램 관리부(52)를 구비한다. 도 10의 구성은 안드로이드 운영 시스템을 실제 구성을 예시적으로 나타낸 것으로서 다른 운영 시스템에서도 용어의 차이가 있을 수 있으나 기본적인 원리는 유사하다.
이벤트 전송부(51)는 통신 단말(200,300)의 하드웨어 또는 응용 프로그램(어플리케이션)으로부터 발생하는 각종 이벤트를 수신하여 수신된 이벤트를 전송할 응용 프로그램을 응용 프로그램 관리부(52)에서 확인하고 확인된 응용 프로그램으로 이벤트가 발생하였음을 알려서 해당 응용 프로그램이 실행되도록 하는 기능을 수행한다.
응용 프로그램 관리부(52)는 이벤트의 종류에 따라 해당 이벤트를 수신할 응용 프로그램들의 목록을 미리 저장하고 있다. 이러한 응용 프로그램의 목록은 응용 프로그램을 설치할 때 응용 프로그램 관리부(52)에 등록된다.
도 11은 응용 프로그램 관리부(52)의 내부 구성의 일예를 나타낸 도면이다.
도 11을 참조하면, 응용 프로그램 관리부(52)는 이벤트의 종류(521) 및 해당 이벤트를 수신할 응용 프로그램의 목록(522)을 구비하고 있다. 도 11에서는 이벤트의 종류로서 "통화 연결 요청", "통화 종료" 이벤트를 예시적으로 나타내었다.
"통화 연결 요청" 이벤트는 전화를 발신하기 위한 이벤트로서 키패드에서의 전화 번호 입력, 주소록에서 연락처의 선택, 응용 프로그램에서 전화 발신 요청 등에 의해 발생할 수 있으며, 이러한 "통화 연결 요청" 이벤트가 발생하면 이벤트 검출부(미도시)가 이를 검출하여 이벤트 전송부(51)로 알리게 되고, 이벤트 전송부(51)는 해당 이벤트에 대해 설정된 응용 프로그램의 목록을 도 11에 도시된 바와 같은 응용 프로그램 목록(522)에서 확인하여 확인된 응용 프로그램을 실행하도록 한다.
도 11에서 "통화 연결 요청" 이벤트에 대해 등록되어 있는 응용 프로그램 목록은 응용 프로그램 #1, 응용 프로그램 #2의 2가지가 등록되어 있다. 응용 프로그램 관리부(52)는 "통화 연결 요청" 이벤트에 대해 응용 프로그램 #1, 응용 프로그램 #2이 등록되어 있음을 이벤트 전송부(51)로 알리고 이벤트 전송부(51)는 응용 프로그램 #1, 응용 프로그램 #2로 "통화 연결 요청"이벤트가 발생하였다는 알리는 신호를 전송한다.
여기에서 이벤트 전송부(51)는 이벤트를 응용 프로그램 #1, #2로 전송할 때 응용 프로그램 목록에 있는 응용 프로그램 전부에 대해 동시에 이벤트를 알릴 수도 있고 이들 중 어느 하나에 대해서만 우선 이벤트를 알리고 해당 응용 프로그램의 실행이 완료되거나 실행이 중지된 경우 다음 응용 프로그램으로 이벤트를 알리는 방식을 사용할 수도 있다. 이는 응용 프로그램 관리부(52) 내부에 어떠한 방식으로 이벤트를 알릴 것인가를 설정해 두는 것에 의해 가능하다.
예컨대, "통화 연결 요청" 이벤트의 경우 응용 프로그램 #1으로 먼저 이벤트를 알리도록 하고 응용 프로그램 #1의 실행이 종료된 경우 응용 프로그램 #2로 이벤트를 알리도록 할 수 있다. 이러한 경우 응용 프로그램 관리부(52)는 이벤트 전송부(51)로부터 확인 요청 신호가 수신되면 응용 프로그램 #1의 정보를 먼저 알려주게 된다. 이벤트 전송부(51)는 응용 프로그램 관리부(52)로부터 해당 이벤트에 대한 확인 응답 신호로서 응용 프로그램 #1의 정보를 수신하면 응용 프로그램 #1으로 이벤트를 전송하게 되고 응용 프로그램 #1은 이벤트의 수신에 따라 운영 시스템으로 로드되어 실행되게 된다.
한편, "통화 연결 요청" 이벤트의 경우 응용 프로그램 #1과 응용 프로그램 #2로 동시에 이벤트를 알리도록 할 수도 있다. 이 경우 응용 프로그램 관리부(52)는 이벤트 전송부(51)로부터 확인 요청 신호가 수신되면 응용 프로그램 #1 및 응용 프로그램 #2의 정보를 모두 알려주게 된다. 이벤트 전송부(51)는 응용 프로그램 #1 및 #2의 정보를 수신하고 응용 프로그램 #1 및 #2로 동시에 이벤트가 발생하였음을 알리고 응용 프로그램 #1 및 #2가 병행하여 함께 실행되게 된다.
도 1 내지 도 9에서 설명한 본 발명은 도 10 내지 도 11을 참조하여 설명한 원리에 기초하여 구현될 수 있는데, 도 6에 나타낸 바와 같은 데이터 경로 관리부(510), 영상 서비스 수행부(520), 영상 세션 설정부(530), 메뉴 인터페이스 관리부(540), 영상 서비스 설정부(550) 및 영상 서비스 데이터 처리부(560)를 구비하는 영상 서비스 제공 장치(500)를 하나의 응용 프로그램의 형태로 구현할 수 있다.
예컨대, 통화 연결 요청 이벤트가 발생하는 경우 통화 연결 과정을 수행하기 위하여 실행되는 통신 단말(200,300)에서의 일반적인 응용 프로그램을 예컨대 콜 매니저(call manager)라고 하면, 일반적인 경우에는 통화 연결 요청 이벤트가 발생하면 이러한 콜 매니저만이 도 10 및 도 11에서 나타낸 바와 같이 응용 프로그램 목록에서 응용 프로그램 #1으로 등록되어 실행되어 통화 연결 과정을 수행할 것이다.
한편, 데이터 경로 관리부(510), 영상 서비스 수행부(520), 영상 세션 설정부(530), 메뉴 인터페이스 관리부(540), 영상 서비스 설정부(550) 및 영상 서비스 데이터 처리부(560)를 구비하는 영상 서비스 제공 장치(500)를 응용 프로그램으로 구현하여 통신 단말(200,300)에 설치하면서 도 11의 응용 프로그램 목록(522)에서 응용 프로그램 #2로 등록할 수 있다. 이와 함께 앞서 설명한 바와 같이 응용 프로그램 목록에 있는 응용 프로그램을 실행할 순서를 동시에 실행하는 것으로 설정해 둔다.
즉, "통화 연결 요청" 이벤트의 경우 본 발명에 의한 영상 서비스 제공 장치(500)를 구현하기 위한 응용 프로그램이 응용 프로그램 #2로 등록되도록 하고 응용 프로그램 #1과 동시에 실행되도록 설정하면, 해당 이벤트가 발생하는 경우 응용 프로그램 #1과 응용 프로그램 #2가 동시에 실행될 수 있다.
이와 같이 하면, 이벤트 중의 하나로서 통화 요청 신호(통화 연결 요청 이벤트)가 발생하면, 이벤트 전송부(51)는 응용 프로그램 관리부(52)로 통화 요청 신호가 검출되었다는 이벤트에 대해 설정된 응용 프로그램의 정보를 요청하고 응용 프로그램 관리부(52)는 해당 이벤트에 대해 등록되어 있는 응용 프로그램 #1(기존 콜 매니저)과 본 발명에 의한 영상 서비스 제공 장치(500)가 구현된 응용 프로그램 #2의 정보를 동시에 이벤트 전송부(51)로 알려주고 이벤트 전송부(51)는 응용 프로그램 #1(콜 매니저)과 응용 프로그램 #2(본 발명에 의한 영상 서비스 제공 장치(500))를 동시에 실행하게 된다. 따라서, 도 1 내지 도 9에서 설명한 바와 같은 데이터 경로 관리부(510), 영상 서비스 수행부(520), 영상 세션 설정부(530), 메뉴 인터페이스 관리부(540), 영상 서비스 설정부(550) 및 영상 서비스 데이터 처리부(560)를 포함하는 응용 프로그램이 응용 프로그램 #2로서 실행되므로 도 1 내지 도 9에서 설명한 바와 같이 통신 단말(200,300)에서 통화 서비스를 수행하면서 본 발명에 의한 영상 서비스 제공 장치(500)가 실행되어 도 1 내지 도 9에서 설명한 바와 같이 통화 서비스를 수행하면서 영상 서비스를 제공할 수 있게 된다.
이상에서 본 발명의 바람직한 실시예를 설명하였으나 본 발명이 상기 실시예에 한정되지 아니하며 첨부된 특허청구범위 및 도면을 포함하여 본 명세서에 기재된 본 발명의 범위로부터 다양한 형태의 수정 및 변형 실시가 가능하다는 점을 유의해야 한다.
예컨대, 도 10 내지 도 11을 참조하여 설명한 응용 프로그램을 이용하여 본 발명을 구현하는 방식은 예시적인 것이며, 운영 시스템의 종류나 운영 시스템의 내부 구성에 따라 다른 방식을 사용할 수도 있음은 물론이다.
또한, 상기 실시예에서 통신 단말(200,300)은 이동 통신 단말기인 스마트폰에 한정되는 것은 아니다. 예컨대, 이동 통신 단말기는 아니면서 유선 전화 단말기이거나 mVoIP 서비스를 제공하기 위한 단말로서 응용 프로그램을 설치할 수 있는 기능을 제공하는 단말에도 적용될 수 있다. 또한 응용 프로그램을 설치할 수 없는 유선 단말인 경우에도 단말 내부의 운영 시스템에 통합 구현되거나 또는 별도의 하드웨어적인 구성으로 구현할 수도 있음은 물론이다.
100...데이터 경로 서버
200...제1 단말
300...제2 단말
400...영상 서비스 제공 시스템

Claims (12)

  1. 네트워크를 통해 데이터 경로 서버 및 영상 서비스 제공 시스템과 연결되며, 통신망을 통해 제2 단말과 통화 서비스를 수행하는 제1 단말에 포함되어 통화 서비스 수행시 영상 서비스를 제공하는 영상 서비스 제공 장치에 있어서,
    통화 서비스 이벤트가 검출되는 경우 데이터 경로 서버로 경로 연결 요청 신호를 전송하는 데이터 경로 관리부-여기서, 상기 데이터 경로 서버는 통화 서비스의 상대방 단말인 제2 단말의 데이터 경로 관리부로부터 경로 연결 요청 신호를 수신하고 제1 단말과 제2 단말 사이에 데이터 경로를 형성함-;
    통화 서비스 이벤트가 검출되는 경우 영상 서비스 인터페이스를 디스플레이부를 통해 제공하고 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 영상 서비스 수행부;
    상기 영상 서비스 제공 시스템을 통해 통화 서비스의 제2 단말과 영상 서비스를 수행하기 위한 영상 세션을 설정하는 영상 세션 설정부;
    상기 데이터 경로 관리부에 의해 형성된 데이터 경로 및 데이터 경로 서버를 통해 영상 서비스 설정 데이터를 제2 단말과 송수신함으로써 제2 단말과의 영상 서비스를 설정하는 영상 서비스 설정부; 및
    영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 영상 세션 설정부에 의해 형성된 영상 세션을 통해 제2 단말로 전송하거나, 제2 단말로부터 영상 서비스 데이터를 수신하는 영상 서비스 데이터 처리부
    를 포함하고,
    상기 영상 서비스 수행부는, 상기 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터와 제2 단말로부터 수신한 영상 서비스 데이터 중 적어도 어느 하나에 기초하여 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 것을 특징으로 하는 영상 서비스 제공 장치.
  2. 제1항에 있어서,
    상기 통화 서비스 이벤트는, 통화 연결을 요청하는 상태인 통화 연결 요청 이벤트, 통화 연결 요청을 수신하는 상태인 통화 응답 요청 이벤트, 통화 연결 중인 상태인 통화 연결중 이벤트 및 통화 종료 상태인 통화 종료 이벤트 중 어느 하나를 포함하는 것을 특징으로 하는 영상 서비스 제공 장치.
  3. 제1항에 있어서,
    상기 데이터 경로 관리부에서 전송되는 경로 연결 요청 신호는 통화 서비스를 수행하는 상대방 단말인 제2 단말의 식별자를 포함하는 것을 특징으로 하는 영상 서비스 제공 장치.
  4. 제1항에 있어서,
    통화 서비스 이벤트가 검출되는 경우 구동되어, 메뉴 선택 인터페이스를 디스플레이부를 통해 제공하는 메뉴 인터페이스 관리부
    를 더 포함하고,
    상기 영상 서비스 수행부는, 상기 메뉴 선택 인터페이스를 통해 사용자로부터 선택 입력 신호가 입력된 경우 영상 서비스 인터페이스를 디스플레이부를 통해 제공하는 것을 특징으로 하는 영상 서비스 제공 장치.
  5. 제4항에 있어서,
    상기 메뉴 선택 인터페이스는, 디스플레이부의 통화 서비스 수행을 위해 제공되는 통화 서비스 인터페이스 위에 표시되는 것을 특징으로 하는 영상 서비스 제공 장치.
  6. 제5항에 있어서,
    상기 메뉴 선택 인터페이스는, 통화 서비스 인터페이스의 일부 영역에 부분적으로 표시되도록 제공되는 것을 특징으로 하는 영상 서비스 제공 장치.
  7. 제1항에 있어서,
    상기 영상 서비스 제공 시스템은,
    제1 단말과 제2 단말 사이의 영상 세션을 설정하는 영상 세션 서버; 및
    영상 세션 서버를 제어하고 영상 세션을 통한 영상 서비스 데이터 전송을 위한 리소스를 할당하고 관리하며, 제1 단말과 제2 단말로부터 수신되는 영상 서비스 데이터를 상대방 단말로 전송하는 멀티미디어 릴레이 서버
    를 포함하고,
    상기 제1 단말의 영상 세션 설정부는, 상기 영상 세션 서버로 영상 세션 주소를 포함하는 영상 세션 요청 신호를 전송하고,
    상기 영상 세션 서버는, 멀티미디어 릴레이 서버로 영상 세션을 릴레이할 릴레이 리소스를 할당해 줄 것을 요청하는 릴레이 리소스 할당 요청 신호를 전송하고,
    멀티미디어 릴레이 서버는, 영상 세션을 릴레이할 리소스를 할당하고 할당된 리소스 주소를 영상 세션 서버로 전송하고,
    영상 세션 서버는 제1 단말의 영상 세션 설정부로 상기 리소스 주소를 포함하는 영상 세션 응답 신호를 전송하는 것을 특징으로 하는 영상 서비스 제공 장치.
  8. 제7항에 있어서,
    상기 제2 단말은,
    통화 서비스 이벤트가 검출되는 경우 데이터 경로 서버로 경로 연결 요청 신호를 전송하는 데이터 경로 관리부-여기서, 상기 데이터 경로 서버는 통화 서비스의 상대방 단말인 제1 단말의 데이터 경로 관리부로부터 경로 연결 요청 신호를 수신하고 제1 단말과 제2 단말 사이에 데이터 경로를 형성함-;
    영상 서비스를 수행할 것을 사용자가 선택한 경우 영상 서비스 인터페이스를 디스플레이부를 통해 제공하고 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 영상 서비스 수행부;
    상기 영상 서비스 제공 시스템을 통해 통화 서비스의 제1 단말과 영상 서비스를 수행하기 위한 영상 세션을 설정하는 영상 세션 설정부;
    상기 데이터 경로 관리부에 의해 형성된 데이터 경로 및 데이터 경로 서버를 통해 영상 서비스 설정 데이터를 제1 단말과 송수신함으로써 제1 단말과의 영상 서비스를 설정하는 영상 서비스 설정부; 및
    영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 영상 세션 설정부에 의해 형성된 영상 세션을 통해 제1 단말로 전송하거나, 제1 단말로부터 영상 서비스 데이터를 수신하는 영상 서비스 데이터 처리부
    를 포함하고,
    상기 제2 단말의 영상 서비스 수행부는, 상기 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터와 제1 단말로부터 수신한 영상 서비스 데이터 중 적어도 어느 하나에 기초하여 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하되,
    상기 제1 단말의 영상 세션 설정부가 영상 세션 응답 신호를 수신한 후, 상기 제1 단말의 영상 서비스 설정부는, 상기 데이터 경로 관리부에 의해 형성된 데이터 경로를 통해 데이터 경로 서버로 영상 서비스를 시작할 것을 요청하는 영상 서비스 실행 요청 신호를 전송하고, 데이터 경로 서버는 수신한 영상 서비스 실행 요청 신호를 제2 단말로 전송하는 것을 특징으로 하는 영상 서비스 제공 장치.
  9. 제8항에 있어서,
    상기 제2 단말의 영상 세션 설정부는, 상기 영상 세션 서버로 영상 세션 주소를 포함하는 영상 세션 요청 신호를 전송하고,
    상기 영상 세션 서버는, 멀티미디어 릴레이 서버로 상기 제1 단말 및 제2 단말의 영상 세션 주소를 멀티미디어 릴레이 서버로 전송하고, 제1 단말에 대해 할당한 리소스 주소를 포함하는 영상 세션 응답 신호를 제2 단말로 전송함으로써 제1 단말과 제2 단말 사이에 영상 세션이 설정되는 것을 특징으로 하는 영상 서비스 제공 장치.
  10. 제9항에 있어서,
    제2 단말의 영상 서비스 설정부는, 영상 세션이 설정된 이후 데이터 경로 서버로 영상 서비스 실행 응답 신호를 전송하고, 데이터 경로 서버는 이를 제1 단말로 전송하는 것을 특징으로 하는 영상 서비스 제공 장치.
  11. 제10항에 있어서,
    상기 제1 단말 및 제2 단말의 영상 서비스 데이터 처리부는, 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 멀티미디어 릴레이 서버의 리소스 주소로 전송하고 멀티미디어 릴레이 서버는 수신한 영상 서비스 데이터를 상대방 단말로 전송함으로써 영상 서비스를 제공하는 것을 특징으로 하는 영상 서비스 제공 장치.
  12. 네트워크를 통해 데이터 경로 서버 및 영상 서비스 제공 시스템과 연결되며, 통신망을 통해 제2 단말과 통화 서비스를 수행하는 제1 단말에 포함되어 통화 서비스 수행시 영상 서비스를 제공하는 영상 서비스 제공 장치에서 영상 서비스를 제공하는 방법에 있어서,
    통화 서비스 이벤트가 검출되는 경우 데이터 경로 서버로 경로 연결 요청 신호를 전송하는 제1 단계-여기서, 상기 데이터 경로 서버는 통화 서비스의 상대방 단말인 제2 단말의 데이터 경로 관리부로부터 경로 연결 요청 신호를 수신하고 제1 단말과 제2 단말 사이에 데이터 경로를 형성함-;
    영상 서비스 인터페이스를 디스플레이부를 통해 제공하고 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 제2 단계;
    상기 영상 서비스 제공 시스템을 통해 통화 서비스의 제2 단말과 영상 서비스를 수행하기 위한 영상 세션을 설정하는 제3 단계;
    상기 형성된 데이터 경로 및 데이터 경로 서버를 통해 영상 서비스 설정 데이터를 제2 단말과 송수신함으로써 제2 단말과의 영상 서비스를 설정하는 제4 단계; 및
    영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터를 상기 형성된 영상 세션을 통해 제2 단말로 전송하거나, 제2 단말로부터 영상 서비스 데이터를 수신하는 제5 단계
    를 포함하고,
    상기 영상 획득 수단에 의해 획득되는 영상에 상응하는 영상 서비스 데이터와 제2 단말로부터 수신한 영상 서비스 데이터 중 적어도 어느 하나에 기초하여 영상 서비스 화면을 구성하여 상기 영상 서비스 인터페이스를 통해 디스플레이부에 제공하는 것을 특징으로 하는 영상 서비스 제공 방법.
KR1020130039690A 2012-10-29 2013-04-11 통화 서비스 수행시 영상 서비스를 제공하는 장치 및 방법 KR101451336B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20120120479 2012-10-29
KR1020120120479 2012-10-29

Publications (2)

Publication Number Publication Date
KR20140055929A KR20140055929A (ko) 2014-05-09
KR101451336B1 true KR101451336B1 (ko) 2014-10-15

Family

ID=50887480

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130039690A KR101451336B1 (ko) 2012-10-29 2013-04-11 통화 서비스 수행시 영상 서비스를 제공하는 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101451336B1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160086559A (ko) * 2015-01-12 2016-07-20 엘지이노텍 주식회사 발광소자, 이를 포함하는 발광소자 패키지, 및 이를 포함하는 조명시스템
KR20170086869A (ko) 2016-01-19 2017-07-27 삼성전자주식회사 음성통화 중 영상을 전송하는 방법 및 장치
KR102044523B1 (ko) * 2017-08-22 2019-11-13 에스케이텔레콤 주식회사 근거리 무선 통신 장치 및 방법
KR102090800B1 (ko) * 2019-10-30 2020-03-18 에스케이텔레콤 주식회사 근거리 무선 통신 장치 및 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060021044A (ko) * 2004-09-02 2006-03-07 에스케이 텔레콤주식회사 이동전화에서 통화중 영상촬영 및 전송방법
KR20070103817A (ko) * 2006-04-20 2007-10-25 전익성 일반전화망과 인터넷망을 이용한 영상전화 서비스 방법
KR20090072761A (ko) * 2007-12-28 2009-07-02 엘지노텔 주식회사 영상 통화 시스템 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060021044A (ko) * 2004-09-02 2006-03-07 에스케이 텔레콤주식회사 이동전화에서 통화중 영상촬영 및 전송방법
KR20070103817A (ko) * 2006-04-20 2007-10-25 전익성 일반전화망과 인터넷망을 이용한 영상전화 서비스 방법
KR20090072761A (ko) * 2007-12-28 2009-07-02 엘지노텔 주식회사 영상 통화 시스템 및 방법

Also Published As

Publication number Publication date
KR20140055929A (ko) 2014-05-09

Similar Documents

Publication Publication Date Title
EP2798779B1 (en) Transferring of communication event
EP3185460A1 (en) Method and device for wireless connection establishment
KR101451336B1 (ko) 통화 서비스 수행시 영상 서비스를 제공하는 장치 및 방법
US11950302B2 (en) Method for data transmission and establishing unicast connection based on sidelink
WO2021042612A1 (zh) 无线投屏方法、装置、设备及存储介质
JP5133659B2 (ja) 仮想端末サーバ、移動通信端末、通信制御システム、及び通信制御方法
KR101466818B1 (ko) 통화 서비스 수행시 위치 정보를 제공하는 장치 및 방법
US10091635B2 (en) Method and apparatus for communication using IP address exchanged via NFC
KR101475323B1 (ko) 사용자 단말기에 포함되어 부가 서비스를 제공하는 부가 서비스 실행 장치 및 이를 이용한 부가 서비스 제공 방법
JP2007502565A (ja) 無線通信システム
WO2013042301A1 (ja) 通信システム、端末、通信方法および通信プログラム
KR101465516B1 (ko) 통신 단말에 포함되어 통화 서비스 수행 도중 멀티미디어 정보를 제공하는 장치 및 방법 및 이를 이용하여 멀티미디어 정보를 제공하는 시스템 및 방법
KR101455750B1 (ko) 통화 서비스 수행 중 부가 서비스를 제공하는 이동 통신 단말기와 통화 서비스 수행 도중 이동 통신 단말기에서 부가 서비스를 제공하는 방법
KR20140055892A (ko) 통신 단말에 포함되어 통화 서비스 수행 도중 url 정보 공유 서비스를 제공하는 장치 및 방법
KR101524497B1 (ko) 통화 서비스 수행시 긴급 알림 서비스를 제공하는 장치 및 방법
KR101465517B1 (ko) 통신 단말에 포함되어 메시지 서비스 수행시 부가 정보를 제공하는 부가 정보 제공 장치 및 부가 정보 제공 방법
KR101480884B1 (ko) 통화 서비스 수행시 전자 칠판 서비스를 제공하는 장치 및 방법
KR101485368B1 (ko) 통신망을 통해 통화 서비스를 수행하는 발신 단말과 착신 단말 사이에서 통화 서비스 수행시 메시지 서비스를 제공하는 방법 및 시스템 및 상기 시스템을 이용하여 메시지 서비스를 제공하는 통신 단말
KR101501972B1 (ko) 사용자 단말기 사이에서의 어플리케이션 구동 서비스 제공 시스템 및 방법 및 이를 위한 사용자 단말기
JP6501859B2 (ja) 受信機および通信方法、サーバー機器
KR101509038B1 (ko) 런처 에이전트를 이용한 회의 통화 서비스 제공 시스템 및 방법
KR101573486B1 (ko) 통화 중 메모 서비스 제공 시스템 및 방법
KR101614250B1 (ko) 웹 서버 없는 센서 게이트 웨이의 lte 모뎀을 이용한 양방향 tcp/ip 제어 방법 및 시스템
KR101373339B1 (ko) 이동통신단말기 및 그의 메시지 전송 방법
CN115299170A (zh) 通信方法、装置、存储介质、终端以及网络侧设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170904

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180919

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190919

Year of fee payment: 6