KR101026033B1 - System and method for providing video service interworking multipoint conference unit - Google Patents
System and method for providing video service interworking multipoint conference unit Download PDFInfo
- Publication number
- KR101026033B1 KR101026033B1 KR1020090025927A KR20090025927A KR101026033B1 KR 101026033 B1 KR101026033 B1 KR 101026033B1 KR 1020090025927 A KR1020090025927 A KR 1020090025927A KR 20090025927 A KR20090025927 A KR 20090025927A KR 101026033 B1 KR101026033 B1 KR 101026033B1
- Authority
- KR
- South Korea
- Prior art keywords
- video
- service server
- conference
- video conference
- video service
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/155—Conference systems involving storage of or access to video conference sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
Abstract
본 발명은 MCU와 연동된 영상 서비스 제공 방법 및 시스템에 관한 것으로서, 본 발명에 따른 영상 서비스 서버 및 하나 이상의 다자점 회의 장치를 포함하는 통신 시스템에서 영상 서비스를 제공하는 방법은, 상기 영상 서비스 서버가, 영상회의 서비스를 요청한 주관자 단말로부터 영상회의 참석자 정보를 수신하는 단계; 상기 영상 서비스 서버가, 특정 다자점 회의 장치로 영상회의 방 개설을 요청하여 이에 따른 영상회의 방의 개설 응답을 수신하는 단계; 상기 영상 서비스 서버가, 상기 영상회의 방과 1차 세션을 설정하는 단계; 상기 영상 서비스 서버가, 상기 주관자 단말 및 참석자 단말과 각각 2차 세션을 설정하는 단계; 및 상기 영상 서비스 서버가, 상기 1차 세션과 상기 2차 세션을 상호 연결시키는 단계;를 포함하는 것을 특징으로 한다.
본 발명은 MCU를 제어하는 서버에서 영상회의 서비스 시나리오를 저장하고, 상기 서버의 접근만을 통하여 손쉽게 영상회의 서비스 시나리오를 변경할 수 있는 편리함을 제공한다. 나아가, 본 발명은 종래의 MCU가 담당하던 영상회의 시나리오 전개를 상기 서버로 전이시킴으로써, MCU의 로드를 분산시키는 장점이 있다.
영상회의 서비스, MCU, 로드, 영상 서비스 서버
The present invention relates to a video service providing method and system interworking with an MCB, and a video service server providing a video service in a communication system including a video service server and at least one multi-point conference apparatus according to the present invention, Receiving the video conference attendee information from the host terminal requesting the video conference service; Requesting, by the video service server, to open a video conference room to a specific multi-point conference device, and receiving a response to establish a video conference room according to the video service server; Establishing, by the video service server, a primary session with the video conference room; Establishing, by the video service server, a secondary session with the host terminal and the attendee terminal, respectively; And interconnecting, by the video service server, the primary session and the secondary session.
The present invention provides the convenience of storing the videoconferencing service scenario in the server controlling the MCU, and can easily change the videoconferencing service scenario only through the access of the server. Furthermore, the present invention has the advantage of distributing the load of the MCU by transferring the video conferencing scenario development which was in charge of the conventional MCU to the server.
Video Conferencing Service, MCU, Load, Video Service Server
Description
본 발명은 영상 서비스 제공 기술에 관한 것으로서, 더욱 상세하게는 MCU(Multipoint Conference Unit)와 연동하여 가입자에게 영상 서비스를 제공하는 방법과 시스템에 관한 것이다.The present invention relates to a video service providing technology, and more particularly, to a method and a system for providing a video service to a subscriber in conjunction with a multipoint conference unit (MCU).
오늘날 통신 기술의 발전으로 인하여 사용자들은 매우 다양한 서비스를 제공받고 있으며, 이런 서비스 중에서 대표적으로 영상회의 서비스가 있다. 상기 영상회의 서비스는 다수의 단말을 통신 회선으로 연결하고, 그 연결된 통신 회선을 통하여 영상회의 참여자들의 화상 데이터와 음성 데이터를 송신하여 다자간에 영상회의를 진행시키는 서비스이다. Today, due to the development of communication technology, users are provided with a wide variety of services, and among them, there is a video conference service. The video conferencing service is a service that connects a plurality of terminals to a communication line and transmits video data and audio data of video conferencing participants through the connected communication line to proceed with the video conference.
이런 영상회의 서비스를 위하여 통신망에는 영상회의 서비스에 특화된 장치인 MCU(Multipoint Conference Unit)가 구축되며, 사용자들은 상기 MCU를 통해 양질의 영상회의 서비스를 제공받는다.For this video conferencing service, a multipoint conference unit (MCU), a device specialized for video conferencing services, is constructed in a communication network, and users are provided with a high quality video conferencing service through the MCU.
도 1은 MCU를 통한 종래의 영상회의 서비스 제공 방법을 설명하는 절차도이다.1 is a flowchart illustrating a conventional video conferencing service providing method through an MCU.
도 1을 참조하면, 영상회의 주관자 단말인 이동단말A는 영상회의 서비스 특별 번호(예컨대, 060-201-3355)로 호 연결을 시도함으로써, MCU로 영상회의 서비스를 요청한다(S101). 그러면, MCU는 저장된 영상회의 서비스 시나리오에 따라 영상회의 방을 개설한 후, 이동단말A로 참여자 정보를 요청하여 이동단말B, 이동단말C, 이동단말D의 식별정보가 포함된 참여자 정보를 수신한다(S103, S105, S107). Referring to FIG. 1, the mobile terminal A, which is a video conferencing terminal, requests a video conferencing service to the MCU by attempting to connect to a video conferencing service special number (eg, 060-201-3355) (S101). Then, after opening the video conference room according to the stored video conferencing service scenario, the MCU requests the participant information to the mobile terminal A and receives the participant information including the identification information of the mobile terminal B, the mobile terminal C, and the mobile terminal D. (S103, S105, S107).
이어서, MCU는 순차적으로 이동단말B, 이동단말C, 이동단말D를 호출하고, 그 호출한 이동단말B,C,D와 세션을 설정한다(S109, S111, S113). 그리고 MCU는 4분할된 영상회의 화면을 생성하고, 분할된 화면마다 각 이동단말의 영상 데이터를 디스플레이한다(S115). 다음으로, MCU는 상기 영상 화면과 이동단말의 음성 데이터를 영상회의에 참여한 이동단말A,B,C,D로 전송하여, 다자간의 영상회의를 진행시킨다(S117). Subsequently, the MCU sequentially calls the mobile terminal B, the mobile terminal C, and the mobile terminal D, and establishes a session with the called mobile terminals B, C, and D (S109, S111, and S113). The MCU generates a video segmented video conference screen and displays video data of each mobile terminal for each divided screen (S115). Next, the MCU transmits the video screen and the audio data of the mobile terminal to the mobile terminals A, B, C, and D participating in the video conference, and proceeds to the multi-party video conference (S117).
이와 같이, MCU는 영상회의 서비스 시나리오를 저장하고, 그 시나리오에 따라 사용자들에게 영상회의 서비스를 제공한다. 그런데 영상회의 서비스 시나리오를 변경하고자 할 경우, MCU 자체의 펌웨어 또는 소프트웨어가 변경되어야 하는 문제점이 있다. 물론, 통신 시스템에 MCU 하나만이 구축된 경우에 상기 MCU의 시나리오 변경은 간편하지만, 통신 시스템에 다수의 MCU가 구축된 경우에 모든 MCU의 펌웨어 또는 프르그램을 변경해야 되는 번거로움이 있다.As such, the MCU stores a videoconferencing service scenario and provides a videoconferencing service to users according to the scenario. However, if you want to change the video conferencing service scenario, there is a problem that the firmware or software of the MCU itself must be changed. Of course, when only one MCU is built in the communication system, the scenario change of the MCU is easy, but when a plurality of MCUs are built in the communication system, it is cumbersome to change the firmware or the program of all the MCUs.
도 1을 예를 들어 설명하면, MCU는 주관자 단말인 이동단말A로부터 영상회의 서비스를 요청받으면, 영상회의 방을 개설한 후에 참여자 정보를 요청하는 영상회의 서비스 시나리오를 진행한다. 하지만 영상회의 서비스 요청이 수신되자마자 즉 시 회의 방을 개설하지 않고, 참여자 정보를 수신한 후에 회의 방을 개설하는 영상회의 서비스 시나리오로 변경하고자 하는 경우, 통신망에 구축된 모든 MCU의 펌웨어 또는 소프트웨어는 상기 영상회의 서비스 시나리오에 따라 수정되어야 한다.Referring to FIG. 1 by way of example, when the MCU receives a video conference service request from the mobile terminal A, which is the host terminal, proceeds with a video conference service scenario for requesting participant information after opening a video conference room. However, if you do not want to open a meeting room as soon as a video conferencing service request is received, and you want to change to a video conferencing service scenario where you open a meeting room after receiving participant information, the firmware or software of all MCUs in the network It should be modified according to the video conferencing service scenario.
또한, MCU는 서비스 시나리오에 따라 영상회의 서비스를 진행시켜야 하기 때문에, 영상회의 서비스 진행시 로드가 많이 발생되는 문제점도 있다. 즉, MCU는 제 1 영상회의를 진행하고 있는 도중에, 제 2 영상회의 개설 요청을 이동단말로부터 수신하면, 서비스 시나리오에 따라 도 1의 프로세스를 진행해야 한다. 이에 따라, MCU는 영상회의 데이터 송수신 및 영상회의 서비스 시나리오 전개에 따른 이중 로드를 부과 받게 된다.In addition, since the MCU must proceed with the video conferencing service according to the service scenario, there is also a problem that a lot of load is generated during the video conferencing service. That is, when the MCU receives the second video conference establishment request from the mobile terminal while the first video conference is in progress, the MCU should proceed with the process of FIG. 1 according to the service scenario. Accordingly, the MCU is charged with a double load according to video conferencing data transmission and reception of video conferencing service scenarios.
본 발명은 이러한 종래의 문제점을 해결하기 위해 제안된 것으로, 영상회의 서비스 시나리오 변경과 MCU 확장이 용이한 영상 서비스 제공 방법 및 시스템을 제공하는데 그 목적이 있다.The present invention has been proposed to solve such a conventional problem, and an object thereof is to provide a video service providing method and system for easily changing a video conferencing service scenario and extending an MCU.
또한, 본 발명은 MCU의 로드를 분산시키는 영상 서비스 제공 방법 및 시스템을 제공하는데 다른 목적이 있다.In addition, another object of the present invention is to provide a video service providing method and system for distributing the load of the MCU.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.Other objects and advantages of the present invention can be understood by the following description, and will be more clearly understood by the embodiments of the present invention. Also, it will be readily appreciated that the objects and advantages of the present invention may be realized by the means and combinations thereof indicated in the claims.
상기 목적을 달성하기 위한 본 발명의 제 1 측면에 따른, 영상 서비스 서버 및 하나 이상의 다자점 회의 장치를 포함하는 통신 시스템에서 영상 서비스를 제공하는 방법은, (a) 상기 영상 서비스 서버가, 영상회의 서비스를 요청한 주관자 단말로부터 영상회의 참석자 정보를 수신하는 단계; (b) 상기 영상 서비스 서버가, 특정 다자점 회의 장치로 영상회의 방 개설을 요청하여 이에 따른 영상회의 방의 개설 응답을 수신하는 단계; (c) 상기 영상 서비스 서버가, 상기 영상회의 방과 1차 세션을 설정하는 단계; (d) 상기 영상 서비스 서버가, 상기 주관자 단말 및 참석자 단말과 각각 2차 세션을 설정하는 단계; 및 (e) 상기 영상 서비스 서버가, 상 기 1차 세션과 상기 2차 세션을 상호 연결시키는 단계;를 포함하는 것을 특징으로 한다.According to a first aspect of the present invention for achieving the above object, a method for providing a video service in a communication system comprising a video service server and one or more multi-point conference device, (a) the video service server, video conferencing Receiving video conference attendee information from the host device requesting the service; (b) requesting, by the video service server, to open a video conference room to a specific multi-point conference apparatus, and receiving a response to open a video conference room according to the video service server; (c) establishing, by the video service server, a primary session with the video conference room; (d) establishing, by the video service server, a secondary session with the host terminal and the attendee terminal, respectively; And (e) interconnecting the primary session and the secondary session by the video service server.
상기 목적을 달성하기 위한 본 발명의 제 2 측면에 따른, 통신망에서 영상 서비스를 제공하는 시스템은, 영상회의 방을 개설하고 그 개설된 방에 접속된 다수의 단말로 영상회의 데이터를 전송하는 하나 이상의 다자점 회의 장치; 및 영상회의 주관자 단말이 접속함에 따라 특정 다자점 회의 장치로 영상회의 방 개설을 요청하여 이에 따라 개설된 영상회의 방과 1차 세션을 설정하고, 상기 주관자 단말 및 참석대상 단말과 각각 2차 세션을 설정하여 상기 1차 세션과 상기 2차 세션을 상호 연결시키는 영상 서비스 서버;를 포함하는 것을 특징으로 한다.In accordance with a second aspect of the present invention for achieving the above object, a system for providing a video service in a communication network comprises: at least one videoconferencing room and transmitting videoconferencing data to a plurality of terminals connected to the opened room. Multi-point conference device; And requesting to open a video conference room with a specific multi-point conference device as the video conference organizer terminal accesses, and establishes a primary session with the video conference room opened accordingly, and sets a secondary session with the host terminal and the attending terminal. And a video service server interconnecting the primary session and the secondary session.
상기 목적을 달성하기 위한 본 발명의 제 3 측면에 따른, 통신 시스템에서 하나 이상의 다자점 회의 장치와 연동하여 영상 서비스를 제공하는 장치는, 각각의 다자점 회의 장치의 접속자 수용량 및 현 접속자 정보가 포함된 로드 정보를 저장하는 저장부; 영상회의 주관자 단말의 영상 서비스 요청시 상기 로드 정보를 토대로 어느 한 다자점 회의 장치를 선택하는 선택부; 및 상기 선택부로부터 다자점 회의 장치 정보를 획득하고, 그 획득된 다자점 회의 장치로 영상회의 방 개설을 요청하여 이에 따라 개설된 영상회의 방과 1차 세션을 설정하고, 상기 주관자 단말 및 참석대상 단말과 각각 2차 세션을 설정하여 상기 1차 세션과 상기 2차 세션을 상호 연결시키는 세션 설정부;를 포함하는 것을 특징으로 한다.In accordance with a third aspect of the present invention, a device for providing a video service in association with one or more multi-point conference devices in a communication system includes an accessor capacity and current accessor information of each multi-point conference device. A storage unit for storing the loaded load information; A selection unit for selecting one of the multi-point conference apparatuses based on the load information when a video service request is made by a video conference organizer terminal; And acquiring multi-point conference device information from the selection unit, requesting to establish a video conference room with the obtained multi-point conference device, setting up a primary session with a video conference room established accordingly, and managing the terminal and the attending terminal. And a session establishment unit configured to establish secondary sessions, respectively, to interconnect the primary session and the secondary session.
본 발명은 MCU를 제어하는 서버에서 영상회의 서비스 시나리오를 저장하고, 상기 서버의 접근만을 통하여 손쉽게 영상회의 서비스 시나리오를 변경할 수 있는 편리함을 제공한다. 나아가, 본 발명은 종래의 MCU가 담당하던 영상회의 시나리오 전개를 상기 서버로 전이시킴으로써, MCU의 로드를 분산시키는 장점이 있다. The present invention provides the convenience of storing the videoconferencing service scenario in the server controlling the MCU, and can easily change the videoconferencing service scenario only through the access of the server. Furthermore, the present invention has the advantage of distributing the load of the MCU by transferring the video conferencing scenario development which was in charge of the conventional MCU to the server.
또한, 본 발명은 통신망에 다수의 MCU 중에서 로드가 적은 MCU를 선택하여 영상회의 서비스를 제공함으로써, 영상회의 서비스의 제공 속도를 높일 수 있는 장점이 있다.In addition, the present invention has the advantage of increasing the speed of providing a video conferencing service by providing a video conferencing service by selecting a low load MCU among a plurality of MCU in the communication network.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하기로 한다.The foregoing and other objects, features and advantages of the present invention will become more apparent from the following detailed description of the present invention when taken in conjunction with the accompanying drawings, in which: There will be. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. Hereinafter, a preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings.
도 2는 본 발명의 일 실시예에 따른, MCU와 연동하여 영상 서비스를 제공하는 시스템의 구성을 나타내는 도면이다.2 is a diagram illustrating a configuration of a system for providing a video service in conjunction with an MCU according to an embodiment of the present invention.
도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 영상 서비스 제공 시스템은 영상 서비스 서버(130)와 MCU(Multipoint Conference Unit, 150)를 포함하며, 상기 영상 서비스 서버(130)와 다수의 이동단말(110)은 네트워크(200)를 통해 서로 통신한다. 상기 네트워크(200)는 이동통신망, 유무선 인터넷망을 포함하는 것으로, 본 발명에 있어서 주지의 관용 기술이므로 상세한 설명은 생략한다.As shown in FIG. 2, the video service providing system according to an exemplary embodiment of the present invention includes a
MCU(150)는 영상회의 방을 개설하여, 그 방에 접속한 다수의 이동단말(110)로 영상회의 서비스를 제공한다. 특히, 본 발명에 따른 MCU(150)는 서비스 시나리오 정보를 저장하지 않고, 영상 서비스 서버(130)의 제어를 통해 다수의 이동단말(110)과 세션을 설정하고 그 세션을 통하여 다수의 이동단말(110)로 영상회의 데이터를 전송한다.The MCU 150 establishes a video conference room and provides a video conference service to a plurality of mobile terminals 110 connected to the room. In particular, the MCU 150 according to the present invention establishes a session with a plurality of mobile terminals 110 through the control of the
영상 서비스 서버(130)는 영상회의 서비스 시나리오를 저장하고, 그 시나리오에 따라 이동단말(110)로 영상회의 서비스를 전개하는 역할을 수행한다. 또한, 영상 서비스 서버(130)는 MCU(150)를 제어하고 그 MCU(150)를 통해 개설된 영상회의 방에 참석 요청한 다수의 이동단말(110)을 접속시킨다.The
그럼, 도 3을 참조한 설명을 통하여 본 발명에 따른 영상 서비스 제공 시스템에서 영상회의 서비스를 제공하는 방법을 상세히 설명한다.Next, a method of providing a video conference service in a video service providing system according to the present invention will be described in detail with reference to FIG. 3.
도 3은 본 발명의 일 실시예에 따른, 영상 서비스 제공 시스템에서 MCU와 연동하여 영상 서비스를 제공하는 방법을 설명하는 절차도이다.3 is a flowchart illustrating a method of providing a video service in conjunction with an MCU in a video service providing system according to an exemplary embodiment of the present invention.
이하, 도 2의 110-1을 이동단말A, 110-2를 이동단말B, 110-3을 이동단말C로 지칭하여 설명한다. Hereinafter, 110-1 of FIG. 2 is referred to as mobile terminal A and 110-2 as mobile terminal B and 110-3 as mobile terminal C. FIG.
도 3을 참조하면, 영상 서비스 서버(130)는 영상회의 주관자 단말인 이동단말A(110-1)로부터 접속 요청을 수신한다(S301). 그러면, 영상 서비스 서버(130)는 영상회의 서비스 시나리오에 따라 '개설, 예약, 취소, 기타' 등의 세부 메뉴가 포 함된 영상 서비스 메뉴를 이동단말A(110-1)로 전송한다(S303). Referring to FIG. 3, the
다음으로, 영상 서비스 서버(130)는 상기 영상 서비스 메뉴를 수신한 이동단말A(110-1)로부터 영상회의 방의 개설을 요청받는다(S305). 그러면, 영상 서비스 서버(130)는 회의 참석자 정보를 이동단말A(110-1)로 요청하여 상기 영상회의 방에 참여하는 이동단말B(110-2)와 이동단말C(110-3)의 식별정보를 수신한다(S307. S309). Next, the
영상회의 참여자 정보를 수신한 영상 서비스 서버(130)는 MCU(150)로 영상회의 방의 개설을 요청한다(S311). 그러면, MCU(150)는 영상회의 방을 개설하고, 그 개설된 영상회의 방의 식별정보(예컨대, 영상회의 방 번호)를 영상 서비스 서버(130)로 전송한다(S313, S315). 이어서, 영상 서비스 서버(130)는 상기 영상회의 주관자 단말인 이동단말A(110-1)를 호출하여, 상기 개설된 영상회의 방으로 접속시킨다(S317, S319). 구체적으로, 영상 서비스 서버(130)는 이동단말A(110-1)를 호출하여 상기 이동단말A(110-1)와 세션을 설정하고, 영상회의 방의 식별정보를 토대로 MCU(150)가 개설한 영상회의 방과 추가적인 세션을 설정하여 상기 두 세션을 상호 연결시킴으로써 상기 이동단말A(110-1)를 MCU(150)에서 개설된 영상회의 방으로 접속시킨다.The
다음으로, 영상 서비스 서버(130)는 영상회의 참석자의 단말인 이동단말B(110-2)를 호출하여 상기 이동단말B(110-2)와 세션을 설정하고, 그 세션과 MCU(150)에서 개설된 영상회의 방의 세션을 상호 연결시켜, 이동단말B(110-2)을 상기 영상회의 방에 접속시킨다(S321, S323). 이어서, 영상 서비스 서버(130)는 이동 단말C(110-3)를 호출하여 상기 이동단말C(110-3)와 세션을 설정하고, 그 세션과 MCU(150)에서 개설된 영상회의 방의 세션을 상호 연결시킨다(S325, S327).Next, the
그러면, MCU(150)는 상기 참석한 이동단말(110) 수를 토대로, 영상회의 화면을 3분할하여, 그 분할된 화면에 영상회의 참여자들의 영상 데이터를 표시하여 이동단말A,B,C(110-1, 110-2, 110-3)로 전송한다. 또한, MCU(150)는 영상회의 참여자들의 음성 데이터를 수신하여 이동단말A,B,C(110-1, 110-2, 110-3)로 실시간 전송한다.Then, the MCU 150 divides the video conference screen into three parts based on the number of the mobile terminals 110 present, and displays the video data of the video conference participants on the divided screens. -1, 110-2, 110-3). In addition, the MCU 150 receives the voice data of the video conference participants and transmits them to the mobile terminals A, B, and C (110-1, 110-2, 110-3) in real time.
상술한 일 실시예와 같이, 영상 서비스 서버(130)는 영상 서비스 시나리오를 전개하여, 영상회의 주관자 단말인 이동단말A(110-1)로부터 영상회의 서비스에 필요한 정보를 취득한다. 또한, MCU(150)는 영상 서비스 서버(130)의 제어에 따라 영상회의 방을 개설하고 이동단말(110-1, 110-2, 110-3)과 세션을 설정한다.As in the above-described embodiment, the
한편, 통신 시스템에서 다수의 MCU(150)가 구축될 수 있으며, 이 경우 영상 서비스 서버(130)는 다수의 MCU(150) 중 어느 하나를 선택하여 영상회의 서비스를 제공해야 한다. 또한, MCU(150)는 기종에 따라 동시에 수용할 수 있는 사용자 수가 제한되며, 더불어 동일한 영상회의 방에 참석할 수 있는 사용자 수도 제한된다. 따라서, 영상 서비스 서버(130)는 다수의 MCU(150)가 구축된 경우, 총 접속자의 수용 용량 및 단일 영상회의 방에 참여 가능한 사용자 수를 고려하여 다수의 MCU(150) 중에서 어느 한 MCU(150)를 선택할 수 있어야 한다.Meanwhile, a plurality of
도 4는 본 발명의 다른 실시예에 따른, 다수의 MCU와 연동하여 영상 서비스를 제공하는 시스템의 구성을 나타내는 도면으로서, 도 4에 도시된 바와 같이 본 발명의 다른 실시예에 따른 영상 서비스 제공 시스템은 영상 서비스 서버(170)와 다수의 MCU(150)를 포함한다.4 is a diagram illustrating a configuration of a system for providing a video service in connection with a plurality of MCUs according to another embodiment of the present invention. As shown in FIG. 4, a video service providing system according to another embodiment of the present invention. Includes an
이하, 도 4 및 도 5를 참조한 설명에서는 도 2 및 3을 참조한 설명과 중복되는 부분은 요약하고, 차이점을 중심으로 설명한다. 또한, 도 4의 110-1을 이동단말A, 110-2를 이동단말B, 110-3을 이동단말C로 지칭하여 설명한다. In the following description with reference to FIGS. 4 and 5, portions overlapping with the descriptions with reference to FIGS. 2 and 3 will be summarized and described based on differences. In addition, 110-1 of FIG. 4 is referred to as mobile terminal A and 110-2 as mobile terminal B and 110-3 as mobile terminal C. FIG.
영상 서비스 서버(170)는 다수의 MCU(150)를 제어하고, 각각의 MCU(150)에서 수용 가능한 총 접속자 수, 동일한 영상회의 방에 참여 가능한 인원수, 현재 접속된 접속자 수 등의 로드 정보(도 6 참조)를 저장하고 관리한다. 특히, 영상 서비스 서버(170)는 이동단말(110)로부터 영상회의 서비스가 요청되면, 상기 로드 정보를 기초로 다수의 MCU(150) 중 어느 한 서비스 MCU(150)를 선택하여 영상회의 서비스를 진행한다.The
도 5는 본 발명의 다른 실시예에 따른, 다수의 MCU와 연동하여 영상 서비스를 제공하는 방법을 설명하는 절차도이다.5 is a flowchart illustrating a method of providing a video service in connection with a plurality of MCUs according to another embodiment of the present invention.
도 6은 본 발명의 다른 실시예에 따른, 영상 서비스 서버에서 저장하는 각 MCU의 로드 정보를 나타내는 도면이다.6 is a diagram illustrating load information of each MCU stored in a video service server according to another exemplary embodiment of the present invention.
도 5 및 도 6을 참조하면, 영상 서비스 서버(170)는 영상회의 주관자 단말인 이동단말A(110-1)로부터 접속 요청을 수신하고, 영상회의 서비스 시나리오에 따라 영상 서비스 메뉴를 이동단말A(110-1)로 전송한다(S501, S503). 5 and 6, the
다음으로, 영상 서비스 서버(130)는 이동단말A(110-1)로부터 영상회의 방의 개설을 요청받으면, 영상회의에 참석되는 인원수를 이동단말A(110-1)로 요청한 다(S505, S507). 부연하면, 영상 서비스 서버(130)는 도 3의 영상회의 서비스 시나리오와 다르게, 영상회의 방의 개설을 요청받으면 우선 참석 인원수를 영상회의 주관자 단말인 이동단말A(110-1)로 요청한다.Next, when the
이어서, 영상 서비스 서버(170)는 이동단말A(110-1)로부터 영상회의 참석 인원수를 수신한다(S509). 그러면, 영상 서비스 서버(170)는 저장된 각각의 MCU(150)의 로드 정보(도 6 참조)를 토대로, 어느 한 MCU(150)를 영상회의 서비스 제공 수단으로 선택한다(S511). 즉, 영상 서비스 서버(170)는 각 MCU(150)의 수용 가능한 총 접속자 수(610), 동일한 영상회의 방에 참여 가능한 최대 인원수(630) 및 현 접속자 수(650) 등의 로드 정보를 토대로, S509 단계에서 수신한 영상회의 참석 인원을 수용할 수 있는 MCU(150)를 선택한다. 바람직하게, 영상 서비스 서버(170)는 상기 로드 정보를 토대로, 로드가 가장 적고 상기 영상회의 참석 인원을 수용할 수 있는 MCU(150)를 선택한다. Subsequently, the
예를 들어, 영상 서비스 서버(170)에서 저장한 각 MCU(150)의 로드 정보가 도 6과 같다고 가정하자. 그러면, 영상 서비스 서버(170)는 S509 단계에서 수신한 참석 인원수가 주관자를 포함하여 총 3명임을 인지하여, 도 6의 로드 정보를 토대로 3명 이상의 참석자가 동일한 회의 방에 접속할 수 있는 MCU(150)가 MCU#1(150-1), MCU#2(150-2) 및 MCU#3(150-3)임을 확인한다. 이어서, 영상 서비스 서버(170)는 상기 확인한 세 MCU(150-1, 150-2, 150-3) 중에 부하율이 가장 작은 MCU#2(150-2)를 영상회의 서비스 MCU로 선정한다. 이때, 영상 서비스 서버(170)는 각 MCU(150)의 부하율을 '현재 접속자 수(650) ÷ 총 접속 용량(610)'의 공식을 통해 산출할 수 있다. 즉, 영상 서비스 서버(170)는 상기 공식을 이용하여 MCU#1(150-1)의 부하율=0.7, MCU#2(150-2)의 부하율=0.25, MCU#3(150-3)의 부하율=0.67을 산출하고, 이 중 부하율이 가장 작은 MCU#2(150-2)를 서비스 MCU(150)로 선택한다.For example, assume that load information of each
영상회의 서비스를 진행시킬 MCU(150)를 선택한 영상 서비스 서버(170)는 해당 MCU(150)로 영상회의 방의 개설을 요청한다(S513). 그러면, 상기 방 개설을 요청받은 MCU(150)는 영상회의 방을 개설하고, 그 개설된 영상회의 방의 식별정보를 영상 서비스 서버(170)로 전송한다(S515, S517). 다음으로, 영상 서비스 서버(170)는 회의 참석자 정보를 이동단말A(110-1)로 요청하여 상기 영상회의 방에 참여하는 이동단말B(110-2)와 이동단말C(110-3)의 식별번호를 수신한다(S519, S521). The
이어서, 영상 서비스 서버(170)는 상기 영상회의 주관자 단말인 이동단말A(110-1)를 호출하여 상기 이동단말A(110-1)와 세션을 설정하고, 영상회의 방의 식별정보를 토대로 MCU(150)가 개설한 영상회의 방과 추가적인 세션을 설정하여 상기 두 세션을 상호 연결시킴으로써 상기 이동단말A(110-1)를 영상회의 방으로 접속시킨다(S523, S525). 다음으로, 영상 서비스 서버(170)는 이동단말B(110-2)와 이동단말C(110-3)를 순차적으로 호출하여, 상기 이동단말들(110-2, 110-3)과 각각 세션을 설정하고, 그 세션과 MCU(150)에서 개설된 영상회의 방의 세션을 상호 연결시킴으로써 이동단말B(110-2)와 이동단말C(110-3)를 상기 영상회의 방에 접속시킨다(S527, S529, S531, S533). Subsequently, the
이렇게 영상회의 서비스를 제공한 영상 서비스 서버(170)는 S511 단계에서 선택된 MCU(150)의 현재 접속자 수가 증가됨에 따라, 상기 MCU(150)의 로드 정보를 갱신한다(S535). 예컨대, 영상 서비스 서버(170)는 S511 단계에서 MCU#2(150-2)를 영상회의 서비스 MCU(150)로 선택하고 S511 단계 이전에 상기 MCU#2(150-2)의 접속자 수가 50이면, 이동단말A(110-1)와 이동단말B(110-2) 그리고 이동단말C(110-3)의 접속이 MCU#2(150-2)에 추가됨에 따라 상기 MCU#2(150-1)의 현재 접속자 수(650)를 53으로 갱신한다.The
한편, 영상 서비스 서버(170)는 영상회의에 참석하는 인원수를 이동단말A(110-1)로 요청하지 않고, S521 단계의 회의 참여자 정보를 수신함으로써 회의 참여자의 총 인원수를 파악할 수 있다. 즉, 영상 서비스 서버(170)는 도 3와 같은 방법으로 이동단말A(110-1)로 회의 참석자 정보를 요청하고 수신하여, 그 수신된 참여자 정보를 토대로 영상회의에 참석하는 인원수를 파악함으로써 특정 MCU(150)를 서비스 MCU(150)로 선택할 수 있다. On the other hand, the
상술한 바와 같이, 본 발명에 따른 영상 서비스 서버(170)는 다수의 MCU(150)가 구축된 경우, 그 MCU(150) 중에서 로드가 적은 MCU(150)를 선택하여 영상회의 서비스를 이동단말(110)로 제공한다. 나아가, 본 발명은 종래의 MCU(150)가 담당하던 영상회의 시나리오 전개를 영상 서비스 서버(170)로 전이시킴으로써, MCU(170)의 로드를 분산시키는 장점이 있다. As described above, when a plurality of
또한, 본 발명은 영상회의 서비스 시나리오를 변경하기가 종래보다 편리하다. 구체적으로, 종래에는 영상회의 서비스 시나리오가 조금만 변경되더라도 구축된 모든 MCU(150)의 펌웨어 또는 소프트웨어를 변경해야 하지만, 본 발명은 도 3과 도 5를 참조한 설명에서와 같이 영상회의 서비스 시나리오를 영상 서비스 서 버(130, 170)에서 저장하고, 영상 서비스 서버(130, 170)의 접근만을 통하여 손쉽게 영상회의 서비스 시나리오를 변경할 수 있는 인터페이스를 제공한다. 특히, 본 발명은 다수의 MCU(150)를 영상 서비스 서버(170)에서 제어하기 때문에, 영상회의 서비스 사용량의 증가에 따른 영상회의 시스템 확장에도 용이하다. In addition, the present invention is more convenient than the prior art to change the video conferencing service scenario. In detail, although the firmware or software of all the
도 7은 본 발명의 일 실시예에 따른, 영상 서비스 서버의 구성을 나타내는 도면이다.7 is a diagram illustrating a configuration of a video service server according to an embodiment of the present invention.
도 7에 도시된 바와 같이, 본 발명의 바람직한 실시예에 따른 영상 서비스 서버(130, 170)는 저장부(710), 시나리오 전개부(730), MCU 선택부(750) 및 세션 설정부(770)를 포함한다.As shown in FIG. 7, the
저장부(710)는 다수의 MCU(150) 로드 정보를 저장한다. 즉, 저장부(710)는 각 MCU(150)의 수용 가능한 총 접속자 수(610), 동일한 영상회의 방에 참여 가능한 최대 인원수(630) 및 현 접속자 수(650) 등의 로드 정보를 저장한다.The
시나리오 전개부(730)는 관리자의 설정에 따라 영상 서비스 시나리오 정보를 저장하고, 그 영상 서비스 시나리오 정보를 토대로 이동단말(110)로 영상회의 서비스를 위한 프로세스를 전개한다. 또한, 시나리오 전개부(730)는 영상회의 방을 개설하기 위한 참석자 정보를 영상회의 주관자 단말(110-1)로 요청하여 수신할 수 있다.The
MCU 선택부(750)는 상기 저장부(710)의 로드 정보를 토대로 다수의 MCU(150) 중에서 부하가 작은 MCU(150)를 서비스 MCU(150)로 선택한다. 즉, MCU 선택부(750)는 시나리오 전개부(730)에서 수신한 회의 참여자 수를 수용할 수 있는 MCU(150) 중에서 부하율이 가장 적은 MCU(150)를 서비스 MCU(150)로 선택할 수 있다. 또한, MCU 선택부(750)는 이동단말(110)이 영상회의 방으로 접속하거나 접속 해제하면 저장부(710)에서 해당 MCU(150)의 로드 정보를 갱신한다. The
세션 설정부(770)는 시나리오 전개부(730)에서 영상회의 방 개설을 위한 참석자 정보를 수신하면, 특정 MCU(150)로 영상회의 방 개설을 요청하여 해당 MCU(150)로부터 영상회의 방 식별정보가 포함된 회의 방 개설 응답 정보를 수신한다. 이때, 세션 설정부(770)는 MCU 선택부(750)로 서비스 MCU(150)의 선택을 요청하고, 이에 따라 로드가 적은 MCU(150) 식별정보를 전달받아 그 MCU(150)로 영상회의 방 개설을 요청할 수 있다. When the
또한, 세션 설정부(770)는 상기 영상회의 방 식별정보에 해당하는 영상회의 방과 세션을 설정하고, 시나리오 전개부(730)에서 취득한 참석자 정보를 토대로 영상회의 주관자 단말(110-1), 영상회의 참석자 단말(110-2, 110-3)과 세션을 설정한 후, 상기 영상회의 방의 세션과 이동단말(110-1, 110-2, 110-3)의 세션을 상호 연결하여 각 이동단말(110-1, 110-2, 110-3)을 상기 영상회의 방에 접속시킨다.In addition, the
한편, 상술한 실시예들에서 영상회의 서비스를 제공받는 대상을 이동단말(110)인 것으로 설명하였지만, 당업자라면 이동단말(110) 이외에도 유선 전화기, 범용 컴퓨터 등의 영상회의 서비스를 지원하는 전자기기에 손쉽게 본 발명을 적용할 수 있음은 자명하다. 따라서, 본 발명은 유선 전화기, 범용 컴퓨터 등의 영상회의 서비스가 지원되는 전자기기에 적용되며, 더불어 그 전자기기로 영상회의 서비스를 제공하는 방법과 시스템을 포함하는 것으로 이해되어야 한다.Meanwhile, in the above-described embodiments, the target of receiving the video conferencing service has been described as the mobile terminal 110. However, those skilled in the art will appreciate that in addition to the mobile terminal 110, an electronic device supporting a video conferencing service such as a wired telephone and a general purpose computer may be used. It is obvious that the present invention can be easily applied. Accordingly, the present invention is to be understood that the present invention is applied to an electronic device supporting a videoconferencing service such as a wired telephone and a general purpose computer, and also includes a method and a system for providing a videoconferencing service to the electronic device.
본 명세서는 많은 특징을 포함하는 반면, 그러한 특징은 본 발명의 범위 또는 특허청구범위를 제한하는 것으로 해석되어서는 안 된다. 또한, 본 명세서에서 개별적인 실시예에서 설명된 특징들은 단일 실시예에서 결합되어 구현될 수 있다. 반대로, 본 명세서에서 단일 실시예에서 설명된 다양한 특징들은 개별적으로 다양한 실시예에서 구현되거나, 적절히 결합되어 구현될 수 있다.While this specification contains many features, such features should not be construed as limiting the scope of the invention or the claims. Also, the features described in the individual embodiments herein can be implemented in combination in a single embodiment. Conversely, various features described in a single embodiment herein can be implemented individually in various embodiments or in combination as appropriate.
도면에서 동작들이 특정한 순서로 설명되었으나, 그러한 동작들이 도시된 바와 같은 특정한 순서로 수행되는 것으로, 또는 일련의 연속된 순서, 또는 원하는 결과를 얻기 위해 모든 설명된 동작이 수행되는 것으로 이해되어서는 안 된다. 특정 환경에서 멀티태스킹 및 병렬 프로세싱이 유리할 수 있다. 아울러, 상술한 실시예에서 다양한 시스템 구성요소의 구분은 모든 실시예에서 그러한 구분을 요구하지 않는 것으로 이해되어야 한다. Although the operations are described in a particular order in the drawings, they should not be understood as being performed in a particular order as shown, or in a sequence of successive orders, or all described actions being performed to obtain a desired result. . In certain circumstances, multitasking and parallel processing may be advantageous. In addition, it should be understood that the division of various system components in the above-described embodiments does not require such division in all embodiments.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(시디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.The method of the present invention as described above may be implemented as a program and stored in a recording medium (CD-ROM, RAM, ROM, floppy disk, hard disk, magneto-optical disk, etc.) in a computer-readable form. Since this process can be easily implemented by those skilled in the art will not be described in more detail.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.The present invention described above is capable of various substitutions, modifications, and changes without departing from the technical spirit of the present invention for those skilled in the art to which the present invention pertains. It is not limited by the drawings.
도 1은 MCU를 통한 종래의 영상회의 서비스 제공 방법을 설명하는 절차도이다.1 is a flowchart illustrating a conventional video conferencing service providing method through an MCU.
도 2는 본 발명의 일 실시예에 따른, MCU와 연동하여 영상 서비스를 제공하는 시스템의 구성을 나타내는 도면이다.2 is a diagram illustrating a configuration of a system for providing a video service in conjunction with an MCU according to an embodiment of the present invention.
도 3은 본 발명의 일 실시예에 따른, 영상 서비스 제공 시스템에서 MCU와 연동하여 영상 서비스를 제공하는 방법을 설명하는 절차도이다.3 is a flowchart illustrating a method of providing a video service in conjunction with an MCU in a video service providing system according to an exemplary embodiment of the present invention.
도 4는 본 발명의 다른 실시예에 따른, 다수의 MCU와 연동하여 영상 서비스를 제공하는 시스템의 구성을 나타내는 도면이다.4 is a diagram illustrating a configuration of a system for providing a video service in connection with a plurality of MCUs according to another embodiment of the present invention.
도 5는 본 발명의 다른 실시예에 따른, 다수의 MCU와 연동하여 영상 서비스를 제공하는 방법을 설명하는 절차도이다.5 is a flowchart illustrating a method of providing a video service in connection with a plurality of MCUs according to another embodiment of the present invention.
도 6은 본 발명의 다른 실시예에 따른, 영상 서비스 서버에서 저장하는 각 MCU의 로드 정보를 나타내는 도면이다.6 is a diagram illustrating load information of each MCU stored in a video service server according to another exemplary embodiment of the present invention.
도 7은 본 발명의 일 실시예에 따른, 영상 서비스 서버의 구성을 나타내는 도면이다.7 is a diagram illustrating a configuration of a video service server according to an embodiment of the present invention.
<도면의 주요 부분에 대한 부호의 설명><Description of the symbols for the main parts of the drawings>
130, 170 : 영상 서비스 서버 150 : MCU130, 170: video service server 150: MCU
710 : 저장부 730 : 시나리오 전개부710: storage unit 730: scenario development unit
750 : MCU 선택부 770 : 세션 설정부750: MCU selection unit 770: session setting unit
Claims (11)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090025927A KR101026033B1 (en) | 2009-03-26 | 2009-03-26 | System and method for providing video service interworking multipoint conference unit |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020090025927A KR101026033B1 (en) | 2009-03-26 | 2009-03-26 | System and method for providing video service interworking multipoint conference unit |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20100107697A KR20100107697A (en) | 2010-10-06 |
KR101026033B1 true KR101026033B1 (en) | 2011-03-30 |
Family
ID=43129358
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020090025927A KR101026033B1 (en) | 2009-03-26 | 2009-03-26 | System and method for providing video service interworking multipoint conference unit |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101026033B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9998710B2 (en) | 2016-01-12 | 2018-06-12 | Electronics and Telecommunicaticns Research Institute | Apparatus and method for providing ultra high definition video conference |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108055497B (en) * | 2013-05-23 | 2020-08-14 | 华为技术有限公司 | Conference signal playing method and device, video conference terminal and mobile device |
KR101685466B1 (en) | 2014-08-28 | 2016-12-12 | 삼성에스디에스 주식회사 | Method for extending participants of video conference service |
KR20160062680A (en) | 2014-11-25 | 2016-06-02 | 한국전자통신연구원 | Multi-point video conference device and method thereof |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020159394A1 (en) * | 2000-03-01 | 2002-10-31 | Eran Decker | System and method for providing reservationless conferencing |
-
2009
- 2009-03-26 KR KR1020090025927A patent/KR101026033B1/en active IP Right Grant
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020159394A1 (en) * | 2000-03-01 | 2002-10-31 | Eran Decker | System and method for providing reservationless conferencing |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9998710B2 (en) | 2016-01-12 | 2018-06-12 | Electronics and Telecommunicaticns Research Institute | Apparatus and method for providing ultra high definition video conference |
Also Published As
Publication number | Publication date |
---|---|
KR20100107697A (en) | 2010-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8340272B2 (en) | Method and system for initiating a conference based on the proximity of a portable communication device | |
KR101696321B1 (en) | Video conference control system and method for reservation video conference | |
CN107409162A (en) | Communication system and the method using the communication system | |
CN100395998C (en) | Bandwidth control method, server, user terminal and program | |
US8175243B2 (en) | Systems and methods for facilitating teleconferencing without pre-reservation of conference resources | |
CN103155548A (en) | Control of user interface to display call participants auto focus | |
JP2007534266A (en) | System and method for including participants in a conference call | |
US11647157B2 (en) | Multi-device teleconferences | |
KR20140098573A (en) | Apparatus and Methd for Providing Video Conference | |
WO2016155262A1 (en) | Gate keep-based video conference system and method for convening video conference | |
JP3752932B2 (en) | Communication system and communication method | |
KR101026033B1 (en) | System and method for providing video service interworking multipoint conference unit | |
CN101083758A (en) | System and method for building audio/video conversation | |
CN105592042A (en) | Information Processing Apparatus, Information Processing System, And Non-Transitory Computer Readable Medium | |
CN105072126B (en) | Cut-in method, the apparatus and system of conference terminal | |
CN101047828B (en) | Distribution conference system | |
CN107079388B (en) | Meeting management system, conference management equipment, wireless terminal and conference management method | |
KR101627033B1 (en) | Apparatus and method for organizing conference call in distributed environment | |
WO2011010563A1 (en) | Video call system, master-side terminal, slave-side terminal, and program | |
KR19990025932A (en) | Multi video conference system | |
KR20070056747A (en) | Method for opening and controlling video conference by using web and record media recorded program for realizing the same | |
JPH08167895A (en) | Communication conference support method and communication conference terminal used therefor | |
US20080123633A1 (en) | Server apparatus | |
KR100563964B1 (en) | PDA for providing of multitude internet telephony and method thereof | |
CN111542034B (en) | Collaborative management method and device for binary configuration teleconference |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
N231 | Notification of change of applicant | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
J201 | Request for trial against refusal decision | ||
AMND | Amendment | ||
B701 | Decision to grant | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20140304 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20150304 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20160304 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20170322 Year of fee payment: 7 |