WO2016064139A1 - Large scale group communication method and system - Google Patents

Large scale group communication method and system Download PDF

Info

Publication number
WO2016064139A1
WO2016064139A1 PCT/KR2015/010942 KR2015010942W WO2016064139A1 WO 2016064139 A1 WO2016064139 A1 WO 2016064139A1 KR 2015010942 W KR2015010942 W KR 2015010942W WO 2016064139 A1 WO2016064139 A1 WO 2016064139A1
Authority
WO
WIPO (PCT)
Prior art keywords
dts
terminal
session
information
mps
Prior art date
Application number
PCT/KR2015/010942
Other languages
French (fr)
Korean (ko)
Inventor
남궁환식
권기훈
Original Assignee
(주)해든브릿지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020150019201A external-priority patent/KR101628071B1/en
Application filed by (주)해든브릿지 filed Critical (주)해든브릿지
Priority to US15/520,496 priority Critical patent/US10212391B2/en
Publication of WO2016064139A1 publication Critical patent/WO2016064139A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Definitions

  • the present invention relates to a large-scale group communication method and system, and more particularly, to a large-scale group communication method and system for providing services in real time without loss of quality in the same session to large-scale locally distributed access terminals. It is about.
  • terminals of different locations are connected to expensive MCUs, synthesized media from each terminal, and transmitted to the connected terminals to perform two-way video communication. Implemented in such a way as to achieve
  • the group communication method such as the conventional video conferencing has to rely on the performance and network bandwidth of the MCU in order to provide high quality communication while maintaining bidirectionality to the users communicating over the same session, due to this limitation
  • Korean Patent No. 10-1085063 (the name of the invention: a group communication method in a media server system having a distributed structure), which is a prior patent of the present applicant, has some similarities to the present invention in terms of using a distributed structure.
  • 6 is a flowchart illustrating a group communication method according to the registered patent.
  • the terminal imposes a heavy burden on the CPU for decoding the corresponding media data, and is limited by the number of terminals that can provide video or audio in the same session due to an increase in the reception network bandwidth. There is also a problem such as that. This is particularly difficult to apply due to the processing limitations of the CPU in mobile devices such as smart phones, which are becoming more common today.
  • Patent Document 1 Republic of Korea Patent Publication No. 10-2014-98573 (name of the invention: video conferencing service providing apparatus and method)
  • Patent Document 2 Korean Unexamined Patent Publication No. 10-2014-16154 (name of the invention: video conference method and system of various participating devices)
  • Patent Document 3 Korean Patent Publication No. 10-1085063 (Invention name: Group communication method in a media server system having a distributed structure)
  • the present invention has been made in view of the above-described problems, and an object of the present invention is to provide a large-scale group communication method and system for providing services in real time without loss of quality in the same session to large-scale locally distributed access terminals. There is this.
  • the present invention allows a large number of geographically distributed access terminals to access a plurality of distributed Data Transfer System (DTS) in the same session to transmit respective media data, so that the MPS (Media Processing System) burdens the terminal access processing.
  • DTS Data Transfer System
  • MPS Media Processing System
  • a large group communication system and method which is free from network centralization and performs a synthesizing function of media data, and terminals connected to different DTSs can maintain session synchronization of a data transmission system to maintain bidirectional communication. The purpose is to provide.
  • the large-scale group communication method of the present invention for achieving the above object comprises: a terminal connection step in which one or more terminals are connected to the DTS using optimal data transfer system (DTS) connection information provided from a connection management server; A first session object generating step of generating a first session object including list information of a terminal connected to a DTS in which terminal access is completed through the terminal access step; One or more DTSs having completed the creation of the first session object through the first session object generation step access the optimal MPS (Media Processing System) allocated from the connection management server and then transmit session information to the MPS and the access terminal.
  • DTS data transfer system
  • the terminal list information included in the first session object and the second session object may include image quality condition information (hereinafter, referred to as a stream type) for each terminal characteristic.
  • the media data of the terminal received from the DTS is encoded in one or more forms corresponding to the stream type by the MPS.
  • the DTS and the MPS may be configured to transmit performance index information including CPU usage information, memory capacity information, and network bandwidth usage information to the connection management server at regular intervals.
  • the MPS may be configured to provide a layout control function for arranging various images corresponding to the stream type of the terminal in the synthesis process of the media data included in the first media data transmission step.
  • large-scale group communication system the database; An access management server interworking with the database and managing resources of a group communication network and performing session synchronization; A plurality of terminals connected to the group communication network through an authentication procedure with the access management server; A DTS connected to a terminal group including the one or more terminals by assignment of the access management server, for relaying transmission and reception of media data to each terminal included in the terminal group; And an MPS receiving the media data of the terminal from the DTS, synthesizing and encoding the terminal, and transmitting the synthesized data to the respective terminals through the DTS.
  • the DTS may be configured to generate and manage a first session object including terminal list information included in a terminal group allocated by the access management server and a stream type of each terminal.
  • the MPS may be configured to generate and manage a second session object including the DTS list information, the terminal list information, and the stream type of each terminal, so as to correspond to the DTS first session object.
  • the MPS may be configured to encode media data of the terminal received from the DTS in one or more forms corresponding to the stream type.
  • the media processing apparatus may be configured to provide a layout control function for arranging various images of terminals in a process of synthesizing media data.
  • the access management server is configured to identify the real-time resource (resource) information for each session through interworking with the database, thereby assigning the most suitable DTS to the terminal, and to allocate the most suitable MPS to the DTS. Can be.
  • the DTS and the MPS may be configured to transmit performance index information including CPU usage information, memory capacity information, and network bandwidth usage information to the access management server at regular intervals.
  • a large number of geographically distributed access terminals via a plurality of distributed data transmission systems (DTS) and media processing systems (MPS) in the same session two-way video conferencing in a quality suitable for each communication environment It is effective to be able to receive the or of the two-way broadcast service.
  • DTS distributed data transmission systems
  • MPS media processing systems
  • the present invention enables the distributed data transmission system (DTS) to support the clustering structure to enable massive accessor processing in the same session, and the media processing system (MPS) and a plurality of such a large number of sessions can be serviced
  • DTS distributed data transmission system
  • MPS media processing system
  • the cascading structure it is possible to support stable service while maintaining the appropriate quality for each resource according to various terminal characteristics such as the efficient use of network bandwidth and bandwidth, so that two-way remote It can be applied to various fields such as entertainment, which requires education or broadcasting of two-way event events, two-way seminar relaying, and public sectors such as disaster and disaster response, and two-way home shopping, so that a large number of users can be processed in the same session.
  • FIG. 1 is a flowchart schematically showing a large group communication method according to an embodiment of the present invention.
  • FIG. 2 is an explanatory diagram conceptually illustrating a communication structure relationship between a terminal, a connection management server, a DTS, and an MPS in the large-scale group communication method of FIG.
  • FIG. 3 is an explanatory diagram schematically showing the configuration of a large-scale group communication system according to an embodiment of the present invention.
  • FIG. 4 is an explanatory diagram summarizing connection relations between respective UE groups, DTSs, and MPSs shown in FIG.
  • FIG. 5 is an exemplary diagram for describing the relationship between session object structure in DTS and MPS applied to FIGS. 1 to 3.
  • FIG. 6 is a flowchart illustrating a group communication method in a media server system having a distributed structure according to the prior art.
  • first and / or second may be used to describe various components, but the components are not limited to the terms. The terms are only for the purpose of distinguishing one component from other components, for example, without departing from the scope of the rights according to the inventive concept, the first component may be called a second component, and For example, the second component may also be referred to as a first component.
  • FIG. 1 is a flowchart schematically illustrating a large group communication method according to an embodiment of the present invention
  • FIG. 2 is a conceptual diagram illustrating a communication structure relationship between a terminal, a connection management server, a DTS, and an MPS in the large group communication method of FIG. It is explanatory drawing shown.
  • a terminal access step (S110), a first session object generation step (S120), a session information transmission step (S130), and a second session object It can be seen that it is configured to include the generation step (S140), the first media data transmission step (S150) and the second media data transmission step (S160).
  • the first step (1 in FIG. 2) represents a step in which a certain terminal group 10 to 80 logs in to the access management server 300 to receive the group communication service, and the second step thereafter is the access management server 300. Indicates a step of allowing service access through user authentication of the terminal.
  • the third step when a terminal group 10 to 80 that is allowed to access a service selects a random session, an optimum corresponding to each of the DTS (Data Transfer System) groups 100, 110, and 120 to which the connection management server 300 is registered is selected.
  • the fourth step includes accessing the DTSs to which the terminal groups 10 to 80 are allocated and delivering the respective session codes to be accessed, and the DTSs 100, 110, and 120 that have received the session codes correspond to the corresponding session objects.
  • the fifth step is constituted by a process in which a function such as identifying existence exists is performed.
  • a function of updating the terminal information to the session object and notifying the MPS may be performed.
  • the process of updating the session object can be performed as shown in the figure.
  • any terminal requests a session access that has not been established before, it is identified as a new session in which the session object does not exist in the DTS, and detailed information corresponding to the requested session code is obtained by the web service of the access management server 300.
  • a session object (first session object) including a list of access terminals, stream type (Stream Type) list according to the terminal characteristics, session information and access MPS, such as
  • the sixth step is accomplished by the same process.
  • the DTS (100, 110, 120) selects the optimal MPS from the database 400 through the web service of the access management server 300, the information of the selected MPS is also stored in the first session object.
  • the DTS (100, 110, 120) is connected to the socket of the optimal MPS (200, 210) to deliver the corresponding session information in the eighth step
  • the ninth step is the DTS list, terminal list, stream type in the MPS (200, 210) And a session object (second session object) including information and the like.
  • the MPS may replace the above process by updating the information of the DTS connected to the DTS list of the corresponding session object.
  • FIG. 5 For reference, an exemplary diagram for describing the structural relationship between session objects (first and second session objects) in the DTS and the MPS applied to FIGS. 1 and 2 is shown in FIG. 5.
  • the tenth step represents a step in which any of the terminal 10 to 80 media is transmitted to the MPS through the DTS through an encoding process by the terminal selection or the control authority of the corresponding session.
  • the MPS decodes the received media data and synthesizes the media according to the instruction of the session controller or the layout information selected by default, and performs the eleventh step of encoding the data for each stream type defined in the session information.
  • the MPS transmits the layout information and the encoded data to the DTS, and the DTS transmits the composite media data to the terminals according to the terminal list included in the session object, and the composite media received by the terminal from the DTS.
  • FIG. 3 is an explanatory diagram schematically showing the configuration of a large-scale group communication system according to an embodiment of the present invention.
  • a large-scale group communication system includes basic information of various resources (user, server, network, etc.), session information corresponding to each session purpose, and each system (DTS and MPS).
  • Database 400 storing system performance index information (CPU Usage, network bandwidth used, memory used, session object number and accessor number information, etc.) which are periodically received from the server, and resource registration by the administrator.
  • a connection management server that responds to a service request such as opening, joining, deleting, or changing a meeting (session) by terminal groups 10 to 80 distributed to a meeting area in a wide area (A, B, C).
  • the server 300 the DTS groups 100, 110, and 120 that are directly connected to the terminal in group communication and are responsible for control and media data transmission and reception; It can be seen that it is configured to include the MPS group (200, 210) for synthesizing and encoding the media data and transmits back to the terminals through the DTS.
  • the terminals 10 to 80 to be connected to are first divided into regions A (10, 20, 30), B (40, 50, 60), and C (70, 80).
  • the terminal groups 10, 20, and 30 of region A are composed of 1,500 terminals
  • the terminal groups 40, 50,60 is 2,000
  • C group 70,80 is 1,000, for example, a total of 4,500 geographically dispersed large terminals, such as the process of receiving a group communication service in the same session,
  • a plurality of sessions are conducted, the characteristics of the processes of distributed DTS and MPS groups will be described.
  • the access management server 300 is a server to which the terminals initially connect, and the service application calls and session-specific resources (resolution, frames per second, bandwidth, maximum number of users, maximum) through login processing and web socket communication through user authentication.
  • the DTS and MPS perform information providing functions to each terminal, DTS and MPS through a web service. It is responsible for delivering performance index information received from the MPS back to the database 400 through a web service.
  • the access management server 300 by using the information in the database 400, the terminal allocates the most suitable system among the distributed DTS group when requesting the participation of any session, and again to the DTS to process media data of the access terminals Has the ability to assign MPS.
  • the DTS and the MPS their respective performance index (CPU Usage, Memory Capability, Network Bandwidth Usage, service session number and number of users information, etc.) at regular intervals through the web service of the access management server 300, the database 400 It may be desirable to be configured to store in.
  • a method for recommending or allocating an optimal system using performance index information may be determined in various ways according to a policy of a service manager, and it may be natural that any method may be applied.
  • the DTS (100, 110, 120) to transmit the media data and control data, etc. from the terminals (10 ⁇ 80) to the MPS (200, 210) side in any session, to access the media data synthesized in the MPS (200, 210) to the session And a session object (first session object) for performing a function of transmitting to the terminals.
  • the first session object transfers the session code information acquired from the web to the corresponding DTS, and the DTS manages access to the detailed session information corresponding to the session code.
  • the DTS manages access to the detailed session information corresponding to the session code.
  • the access terminal information is registered in the terminal list information of the DTS, and is registered in the stream type list grouped according to the transmission / reception image quality condition for each terminal characteristic.
  • the DTS having selected the optimal MPS from the database 400 connects to the MPS through socket communication through the connection MPS property update process of the session object, and then transfers session information to the MPS.
  • the terminal additionally accesses the same DTS to access the session, it is possible to update the terminal list and the stream type list in the corresponding session object and inform the connected MPS.
  • the MPS receives session information from the corresponding DTS and generates a session object (second session object) corresponding thereto.
  • a session object second session object
  • FIG. 5 an exemplary diagram for describing the relationship between the session object structure in the DTS and the MPS applied to FIG. 3 is illustrated in FIG. 5.
  • the session object in the MPS may include a DTS list, a terminal list, a stream type list of the terminal, a mix object, and the like, connected to the corresponding session.
  • the mix object may include a function of decoding media data received from the terminal, a function of synthesizing the decoded media data, and a function of encoding differently depending on the stream type.
  • the data encoded in the MPS is transmitted to the access DTS groups 100, 110 and 120 managed by the DTS list.
  • the MPS may include a layout control function for supporting various image arrangement functions of the terminals in synthesizing the media data.
  • the applied layout information is transmitted to the corresponding access terminals through the DTS. Such information may be used for a purpose of displaying a tag on a component of a synthesized image or changing a layout in a terminal having a control right.
  • the terminal 10 to 80 will be described in detail the process of the group communication by connecting to any session (session 1, session 2, session 3).
  • a total of 4,500 terminals distributed in three regions receive three DTSs (100, 110, 120) and two MPSs to receive three sessions (session 1, session 2, and session 3). It can be seen that the configuration using (200,210) is shown.
  • DTS1 (100) is connected to the terminal group (10, 20) consisting of 500 in each region A
  • DTS2 (110) is connected to the terminal group 40 consisting of 500 in the region B is confirmed that the session 1
  • a total of 1,500 terminals are serving by a clustering structure of two DTSs 100 and 110, and the media synthesis process of session 1 is performed in the MPS1 200.
  • the DTS1 (100) is connected to the terminal group 30 consisting of 500 in the A region and the DTS2 (110) is connected to the terminal group 50 consisting of 1,000 in the B region to form a session 2, a total of 1,500 terminals
  • the service is formed by the clustering structure of the two DTSs 100 and 110, and it can be seen that the MPS2 210 is in charge of media composition processing.
  • the DTS3 120 is connected to the terminal group 60 consisting of 500 in the B region and the terminal group 70 and 80 consisting of 500 in the C region, respectively, to show that a total of 1,500 terminals form session 3.
  • Session 3 shows that DTS1 and DTS2 are already serving Sessions 1 and 2, so that service is provided by DTS3 using a cascading structure by Load Balancing. have.
  • the large-scale group communication method and system according to an embodiment of the present invention may be meaningless when synthesizing all media of all access terminals when a large-scale connection of hundreds of terminals or more is made in a single session.
  • the terminal for transmitting the media data may be determined according to the selection of. In this case, in order to transmit the media data by the selection of the corresponding terminal, it may be more preferable to be configured to receive permission of the MPS through the DTS in advance.
  • the number of media to be synthesized in the session is pre-defined, so it may be necessary to check whether or not it meets the criteria. If the predefined number of terminal media is saturated, a process or function may be additionally provided to notify the corresponding terminal requesting permission as a message through the DTS that the media cannot be transmitted.
  • the application may be configured to select one of the terminals that are being synthesized with the existing data, stop sending media of the terminal, and then send media of the newly applied terminal by applying various conventional regulations.
  • various conventional regulations such as a rule applied to the selection of the terminal to stop the media transmission, it is natural that any conventional method may be applied.
  • the configuration of the selective media data transmission allowance for some terminals as described above is just one embodiment of the present invention, and the present invention is not necessarily limited thereto.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer And Data Communications (AREA)

Abstract

The present invention relates to a large scale group communication method and system and, more specifically, to a large scale group communication method and system for providing, to locally distributed large scale connection terminals, a service on the same session without quality deterioration and in real time. To this end, the present invention provides a large scale group communication method comprising: a terminal connection step of enabling one or more terminals to be connected to a data transfer system (DTS) by using optimum DTS connection information provided from a connection management server; a first session object creation step of creating a first session object including list information of terminals connected to the DTS to which a terminal connection has been completed through the terminal connection step; a session information transmission step of enabling one or more DTSs, in which the creation of the first session object has been completed through the first session object creation step, to be connected to an optimum media processing system (MPS) allocated from the connection management server, and then to transmit session information to the MPS and the connection terminals; a second session object creation step of enabling the MPS, which has received the session information through the session information transmission step, to create a second session object including list information of connected DTSs and list information of terminals connected to the respective DTSs, by using the session information; a first media data transmission step of synthesizing and encoding media data of a terminal received from the DTS of which information is included in the second session object created through the second session object creation step, so as to transmit the synthesized and encoded media data to the DTS; and a second media data transmission step of transmitting the media data transmitted through the first media data transmission step to the respective terminals through the DTS.

Description

대규모 그룹통신 방법 및 시스템Large Group Communication Method and System
본 발명은 대규모 그룹통신 방법 및 시스템에 관한 것으로, 더욱 상세하게는, 지역적으로 분산된 대규모 접속 단말들에게 동일 세션 상에서 품질 손상 없이 실시간으로 서비스를 제공할 수 있도록 하기 위한 대규모 그룹통신 방법 및 시스템에 관한 것이다.The present invention relates to a large-scale group communication method and system, and more particularly, to a large-scale group communication method and system for providing services in real time without loss of quality in the same session to large-scale locally distributed access terminals. It is about.
IP(Internet Protocol) 네트워크 상에서 통상의 영상회의는, 고가(高價)의 MCU에 서로 다른 위치의 단말들이 접속하여 각 단말들로부터의 미디어를 합성함으로써, 이를 연결된 해당 단말들에게 송신하여 양방향 영상 통신을 이루도록 하는 방식에 의해 구현된다. In a video conferencing on an IP (Internet Protocol) network, terminals of different locations are connected to expensive MCUs, synthesized media from each terminal, and transmitted to the connected terminals to perform two-way video communication. Implemented in such a way as to achieve
그러나 이와 같은 방식은, 해당 세션에 많은 단말들이 접속하기 위해서는 MCU측에서 접속하려는 단말들 숫자와 비례하여 이를 처리하기 위한 리소스(resource) 부담과 더불어 통신 소켓을 구성하여야 하기 때문에, 합성된 미디어를 접속된 단말들에게 송신하기 위한 네트워크 대역폭이 집중될 수밖에 없다는 등의 문제점을 갖는다. However, in such a scheme, in order to access a large number of terminals in a corresponding session, a communication socket must be configured along with a resource burden for processing this in proportion to the number of terminals to be accessed on the MCU side. There is a problem that the network bandwidth for transmitting to the terminal is inevitably concentrated.
이러한 문제를 해결하기 위하여 MCU를 마스터(Master)와 슬레이브(Slave)로 나누어 단일 세션 상에서 지역적으로 분산된 많은 단말들을 하나의 세션에 접속할 수 있도록 하는 방식이 등장하였으나, 이는 슬레이브 MCU에서 이미 합성된 미디어를 마스터 MCU에서 다시 합성하는 방식으로, 영상의 레이아웃 처리에 있어 유연성 부족과 더불어 고가의 MCU 추가 부담 등과 같은 문제점을 갖는다. In order to solve this problem, a method of dividing the MCU into a master and a slave to enable a plurality of terminals distributed locally in a single session to a single session has been introduced. By re-compositing the master in the MCU, there is a problem such as lack of flexibility in the layout processing of the image and the burden of expensive MCU addition.
또 다른 방식으로는 릴레이 서버를 통하여 영상회의의 미디어 데이터를 스트리밍 중계하는 방법이 있으나, 이와 같은 릴레이 서버를 통하여 접속한 단말들은 양방향 통신에 참여할 수 없고 단지 중계된 미디어 데이터를 수신받는 단방향 서비스의 제공만이 가능할 뿐이다. As another method, there is a method of streaming relaying media data of a video conference through a relay server, but terminals connected through the relay server cannot participate in bidirectional communication and provide a one-way service that receives only relayed media data. Only it is possible.
다시 말해, 종래의 영상 회의와 같은 그룹통신 방법은, 동일한 세션 상에서 통신하는 접속자들에게 양방향성을 유지하면서 고품질의 통신을 제공하기 위해서는 MCU의 성능과 네트워크 대역폭에 의지할 수밖에 없었으며, 이러한 한계로 인하여 영상 레이아웃의 유연성을 가지며 세션 참가자 모두가 양방향 통신 상황을 유지한 채 접속 가능한 대규모 영상회의를 처리하기에는 한계가 있었다.In other words, the group communication method such as the conventional video conferencing has to rely on the performance and network bandwidth of the MCU in order to provide high quality communication while maintaining bidirectionality to the users communicating over the same session, due to this limitation The flexibility of the video layout and the limitations of handling large-scale video conferencing that are accessible to all session participants while maintaining two-way communication.
본원발명 출원인의 선행특허인 대한민국 등록특허 제10-1085063호(발명의 명칭: 분산구조를 가지는 미디어 서버 시스템에서의 그룹통신 방법)의 경우 분산구조를 이용한다는 측면에서 본 발명과 일부 유사성을 갖는다. 도 6에 상기 등록특허에 따른 그룹통신 방법을 설명하기 위한 순서도를 도시하였다.Korean Patent No. 10-1085063 (the name of the invention: a group communication method in a media server system having a distributed structure), which is a prior patent of the present applicant, has some similarities to the present invention in terms of using a distributed structure. 6 is a flowchart illustrating a group communication method according to the registered patent.
도 6을 참조하면, 상기 등록특허의 경우 분산구조인 데이터 전송 처리 시스템에 의하여 단순히 단말들 간의 미디어 데이터 및 제어 신호를 중계하는 구조이기 때문에, 영상이나 음성을 제공하는 단말들의 접속이 늘어남에 따라 동일 세션에 접속한 단말들이 데이터 전송 시스템으로부터 수신하게 되는 타 단말들의 영상이나 음성 데이터 양이 증가될 수밖에 없게 됨을 확인할 수 있다. Referring to FIG. 6, in the case of the registered patent, since it is simply a structure for relaying media data and control signals between terminals by a data transmission processing system having a distributed structure, the same as the connection of terminals providing video or audio increases. It can be seen that the terminals connected to the session are forced to increase the amount of video or audio data of other terminals that are received from the data transmission system.
그리고 이와 같은 구성상의 한계로 인해 단말에서 해당 미디어 데이터의 디코딩을 위해 CPU에 큰 부담을 주게 되며, 수신 네트워크 대역폭의 증가 등으로 동일 세션 상에서 영상이나 음성을 제공할 수 있는 단말들의 숫자에 제한을 받게 된다는 등의 문제점도 갖는다. 이는 특히 현재 보편화 되어 가는 스마트폰 등의 모바일 디바이스에 있어 CPU의 처리 한계 등으로 인해 적용이 어려운 구조임을 의미한다. In addition, due to such a configuration limitation, the terminal imposes a heavy burden on the CPU for decoding the corresponding media data, and is limited by the number of terminals that can provide video or audio in the same session due to an increase in the reception network bandwidth. There is also a problem such as that. This is particularly difficult to apply due to the processing limitations of the CPU in mobile devices such as smart phones, which are becoming more common today.
따라서, 레이아웃의 유연성을 확보하면서 동일 세션 상에서 양방향 통신을 유지하고 모바일 디바이스를 포함하는 대규모 접속 단말의 처리를 위하여, 종래의 MCU 방식과는 차별화 되는 새로운 단말 접속 처리 방식 등이 요구된다.Therefore, in order to maintain bidirectional communication on the same session while ensuring the flexibility of the layout, and to process a large access terminal including a mobile device, a new terminal access processing method that is different from the conventional MCU method is required.
(선행기술문헌)(Prior art document)
(특허문헌 1) 대한민국 공개특허공보 제 10-2014-98573호(발명의 명칭: 영상 회의 서비스 제공 장치 및 방법)(Patent Document 1) Republic of Korea Patent Publication No. 10-2014-98573 (name of the invention: video conferencing service providing apparatus and method)
(특허문헌 2) 대한민국 공개특허공보 제 10-2014-16154호(발명의 명칭: 다양한 참가 디바이스의 화상 회의 방법 및 시스템)(Patent Document 2) Korean Unexamined Patent Publication No. 10-2014-16154 (name of the invention: video conference method and system of various participating devices)
(특허문헌 3) 대한민국 등록특허공보 제 10-1085063호(발명의 명칭: 분산 구조를 가지는 미디어 서버 시스템에서의 그룹통신 방법)(Patent Document 3) Korean Patent Publication No. 10-1085063 (Invention name: Group communication method in a media server system having a distributed structure)
본 발명은 전술한 바와 같은 문제점을 해결하기 위한 것으로, 지역적으로 분산된 대규모 접속 단말들에게 동일 세션 상에서 품질 손상 없이 실시간으로 서비스를 제공할 수 있도록 하기 위한 대규모 그룹통신 방법 및 시스템을 제공하는 것에 목적이 있다.Disclosure of Invention The present invention has been made in view of the above-described problems, and an object of the present invention is to provide a large-scale group communication method and system for providing services in real time without loss of quality in the same session to large-scale locally distributed access terminals. There is this.
다시 말해, 본 발명은 지역적으로 분산된 대규모 접속 단말들이 동일 세션 상에서 다수의 분산된 DTS(Data Transfer System)에 접속하여 각각의 미디어 데이터를 송신하도록 함으로써, MPS(Media Processing System)는 단말 접속 처리 부담과 네트워크 집중화로부터 해방되어 미디어 데이터의 합성 기능을 수행할 수 있도록 하고, 서로 다른 DTS에 접속된 단말들은 데이터 전송 시스템의 세션 동기화를 유지하여 양방향 통신 상태를 유지할 수 있도록 하는 대규모 그룹통신 시스템 및 방법을 제공하는데 그 목적이 있다.In other words, the present invention allows a large number of geographically distributed access terminals to access a plurality of distributed Data Transfer System (DTS) in the same session to transmit respective media data, so that the MPS (Media Processing System) burdens the terminal access processing. And a large group communication system and method, which is free from network centralization and performs a synthesizing function of media data, and terminals connected to different DTSs can maintain session synchronization of a data transmission system to maintain bidirectional communication. The purpose is to provide.
아울러, 이 과정에서 서로 다른 그룹통신 환경에 존재하는 다양한 접속 단말들이 대규모 양방향 그룹통신을 수행하는 경우 해당 그룹통신 환경에 맞는 품질로 그룹통신을 제공할 수 있도록 하는 등의 부가적인 기능을 제공할 수 있다.In addition, in this process, when various access terminals in different group communication environments perform large-scale bidirectional group communication, additional functions such as providing group communication with a quality suitable for the corresponding group communication environment may be provided. have.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.The objects of the present invention are not limited to the above-mentioned objects, and other objects and advantages of the present invention which are not mentioned above can be understood by the following description, and will be more clearly understood by the embodiments of the present invention. Also, it will be readily appreciated that the objects and advantages of the present invention may be realized by the means and combinations thereof indicated in the claims.
상기 목적을 달성하기 위한 본 발명의 대규모 그룹통신 방법은, 접속 관리 서버로부터 제공된 최적의 DTS(Data Transfer System) 접속 정보를 이용하여 1 이상의 단말이 DTS에 접속되는 단말 접속 단계; 상기 단말 접속 단계를 통해 단말 접속이 완료된 DTS에 접속된 단말의 리스트 정보를 포함하는 제 1 세션 오브젝트(session object)가 생성되는 제 1 세션 오브젝트 생성 단계; 상기 제 1 세션 오브젝트 생성 단계를 통해 제 1 세션 오브젝트의 생성이 완료된 1 이상의 DTS가 상기 접속 관리 서버로부터 할당된 최적의 MPS(Media Processing System)에 접속한 후 세션 정보를 MPS 및 접속 단말에게 송신하는 세션 정보 송신 단계; 상기 세션 정보 송신 단계를 통해 세션 정보를 수신받은 MPS가 상기 세션 정보를 이용하여 접속된 DTS 리스트 정보 및 각각의 DTS에 접속된 단말 리스트 정보를 포함하는 제 2 세션 오브젝트를 생성하는 제 2 세션 오브젝트 생성 단계; 상기 제 2 세션 오브젝트 생성 단계를 통해 생성된 제 2 세션 오브젝트 내에 정보가 포함된 DTS로부터 수신된 단말의 미디어 데이터를 합성 및 인코딩하여 상기 DTS로 송신하는 제 1 미디어 데이터 송신 단계; 및 상기 제 1 미디어 데이터 송신 단계를 통해 송신된 미디어 데이터가 DTS를 통해 각각의 단말로 전송되는 제 2 미디어 데이터 송신 단계;를 포함하여 구성될 수 있다.The large-scale group communication method of the present invention for achieving the above object comprises: a terminal connection step in which one or more terminals are connected to the DTS using optimal data transfer system (DTS) connection information provided from a connection management server; A first session object generating step of generating a first session object including list information of a terminal connected to a DTS in which terminal access is completed through the terminal access step; One or more DTSs having completed the creation of the first session object through the first session object generation step access the optimal MPS (Media Processing System) allocated from the connection management server and then transmit session information to the MPS and the access terminal. Sending session information; Generating a second session object for the MPS receiving the session information through the session information transmitting step to generate a second session object including the connected DTS list information and the terminal list information connected to each DTS using the session information. step; A first media data transmission step of synthesizing, encoding, and transmitting the media data of the terminal received from the DTS including information in the second session object generated through the second session object generation to the DTS; And a second media data transmission step of transmitting the media data transmitted through the first media data transmission step to each terminal through the DTS.
여기서, 상기 제 1 세션 오브젝트 및 제 2 세션 오브젝트에 포함되는 단말 리스트 정보는, 단말 특성별 영상 품질 조건 정보(이하, 스트림 타입(stream type)이라 한다)를 포함하는 것이 좋다.In this case, the terminal list information included in the first session object and the second session object may include image quality condition information (hereinafter, referred to as a stream type) for each terminal characteristic.
이때, 상기 제 1 미디어 데이터 송신 단계에 있어, DTS로부터 수신된 단말의 미디어 데이터는 상기 MPS에 의해 상기 스트림 타입에 대응되는 1 이상의 형태로 인코딩되는 것이 바람직할 수 있다.At this time, in the first media data transmission step, it may be preferable that the media data of the terminal received from the DTS is encoded in one or more forms corresponding to the stream type by the MPS.
또한, 상기 DTS 및 MPS는, CPU 사용량 정보, 메모리 용량 정보 및 네트워크 대역폭 사용량 정보를 포함하는 성능지수 정보를 일정 주기마다 상기 접속 관리 서버에 전송하도록 구성되는 것이 바람직할 수 있다.The DTS and the MPS may be configured to transmit performance index information including CPU usage information, memory capacity information, and network bandwidth usage information to the connection management server at regular intervals.
또한 상기 MPS는, 상기 제 1 미디어 데이터 송신 단계에 포함되는 미디어 데이터의 합성 과정에서 단말의 스트림 타입에 대응되는 다양한 영상 배치를 위한 레이아웃 제어 기능을 제공하도록 구성될 수 있다.In addition, the MPS may be configured to provide a layout control function for arranging various images corresponding to the stream type of the terminal in the synthesis process of the media data included in the first media data transmission step.
한편, 본 발명의 실시예에 따른 대규모 그룹통신 시스템은, 데이터베이스; 상기 데이터베이스와 연동되며, 그룹통신망의 자원을 관리하고 세션 동기화를 수행하는 접속 관리 서버; 상기 접속 관리 서버와의 인증 절차를 통해 상기 그룹통신망에 접속되는 다수의 단말; 상기 접속 관리 서버의 할당에 의해 상기 1 이상의 단말을 포함하는 단말 그룹과 연결되며, 상기 단말 그룹에 포함된 각각의 단말에 미디어 데이터의 송수신을 중계하기 위한 DTS; 및 상기 DTS로부터 상기 단말의 미디어 데이터를 전달받아 합성 및 인코딩 한 후 상기 DTS를 통해 상기 각각의 단말로 전송하는 MPS;를 포함하여 구성될 수 있다.On the other hand, large-scale group communication system according to an embodiment of the present invention, the database; An access management server interworking with the database and managing resources of a group communication network and performing session synchronization; A plurality of terminals connected to the group communication network through an authentication procedure with the access management server; A DTS connected to a terminal group including the one or more terminals by assignment of the access management server, for relaying transmission and reception of media data to each terminal included in the terminal group; And an MPS receiving the media data of the terminal from the DTS, synthesizing and encoding the terminal, and transmitting the synthesized data to the respective terminals through the DTS.
여기서 상기 DTS는, 상기 접속 관리 서버에 의해 할당된 단말 그룹에 포함되는 단말 리스트 정보 및 각각의 단말의 스트림 타입을 포함하는 제 1 세션 오브젝트를 생성하여 관리하도록 구성되는 것이 바람직할 수 있다.In this case, the DTS may be configured to generate and manage a first session object including terminal list information included in a terminal group allocated by the access management server and a stream type of each terminal.
또한 상기 MPS는, 상기 DTS 제 1 세션 오브젝트에 대응되도록, DTS 리스트 정보, 단말 리스트 정보 및 각각의 단말의 스트림 타입을 포함하는 제 2 세션 오브젝트를 생성하여 관리하도록 구성되는 것이 바람직할 수 있다.In addition, the MPS may be configured to generate and manage a second session object including the DTS list information, the terminal list information, and the stream type of each terminal, so as to correspond to the DTS first session object.
이때, 상기 MPS는 상기 DTS로부터 수신된 단말의 미디어 데이터를 상기 스트림 타입에 대응되는 1 이상의 형태로 인코딩 할 수 있도록 구성되는 것이 좋다.In this case, the MPS may be configured to encode media data of the terminal received from the DTS in one or more forms corresponding to the stream type.
아울러, 상기 미디어 처리 장치는, 미디어 데이터의 합성 과정에서 단말들의 다양한 영상 배치를 위한 레이아웃 제어 기능을 제공하도록 구성되는 것이 좋다.In addition, the media processing apparatus may be configured to provide a layout control function for arranging various images of terminals in a process of synthesizing media data.
여기서, 상기 접속 관리 서버는, 상기 데이터베이스와의 연동을 통해 세션 별 실시간 리소스(resource) 정보를 파악함으로써, 이를 이용해 상기 단말에 가장 적합한 DTS를 할당하고, 상기 DTS에 가장 적합한 MPS를 할당하도록 구성될 수 있다.Here, the access management server is configured to identify the real-time resource (resource) information for each session through interworking with the database, thereby assigning the most suitable DTS to the terminal, and to allocate the most suitable MPS to the DTS. Can be.
또한, 상기 DTS 및 상기 MPS는, CPU 사용량 정보, 메모리 용량 정보 및 네트워크 대역폭 사용량 정보를 포함하는 성능지수 정보를 일정 주기마다 상기 접속 관리 서버에 전송하도록 구성되는 것이 바람직할 수 있다.The DTS and the MPS may be configured to transmit performance index information including CPU usage information, memory capacity information, and network bandwidth usage information to the access management server at regular intervals.
상기와 같은 본 발명에 의하면, 지역적으로 분산된 대규모 접속 단말들이 동일 세션 상에서 다수의 분산된 데이터 전송 시스템(DTS)들 및 미디어 처리 시스템(MPS)들을 통하여 각각의 해당 통신환경에 맞는 품질로 양방향 영상회의 또는 양방향 방송 서비스 등을 제공받을 수 있도록 한다는 효과가 있다.According to the present invention as described above, a large number of geographically distributed access terminals via a plurality of distributed data transmission systems (DTS) and media processing systems (MPS) in the same session, two-way video conferencing in a quality suitable for each communication environment It is effective to be able to receive the or of the two-way broadcast service.
또한, 본 발명은 분산된 데이터 전송 시스템(DTS)들이 클러스터링(Clustering) 구조를 지원함으로써 동일 세션에 대규모 접속자 처리가 가능하고, 이러한 대규모 세션이 복수로 서비스가 이루어질 수 있도록 미디어 처리 시스템(MPS)과 함께 캐스케이딩(Cascading) 구조를 지원하여 네트워크 대역폭의 효율적 사용 및 대역폭 등의 다양한 단말 특성에 따라 상호간 자신들의 리소스에 적합한 품질을 유지하면서 안정된 서비스를 제공받도록 지원할 수 있어, 리소스 상황에 맞는 쌍방향 원격교육이나 양방향 이벤트 행사 중계가 필요한 엔터테인먼트, 또는 양방향 세미나 중계, 재해 재난 대응과 같은 공공분야 및 양방향 홈쇼핑 등의 다양한 분야에 응용되어 동일 세션상에서 대규모 접속자 처리를 가능하도록 할 수 있다는 등의 효과가 있다.In addition, the present invention enables the distributed data transmission system (DTS) to support the clustering structure to enable massive accessor processing in the same session, and the media processing system (MPS) and a plurality of such a large number of sessions can be serviced In addition, by supporting the cascading structure, it is possible to support stable service while maintaining the appropriate quality for each resource according to various terminal characteristics such as the efficient use of network bandwidth and bandwidth, so that two-way remote It can be applied to various fields such as entertainment, which requires education or broadcasting of two-way event events, two-way seminar relaying, and public sectors such as disaster and disaster response, and two-way home shopping, so that a large number of users can be processed in the same session.
도 1은 본 발명의 일 실시예에 따른 대규모 그룹통신 방법을 개략적으로 나타낸 순서도이다.1 is a flowchart schematically showing a large group communication method according to an embodiment of the present invention.
도 2는 도 1의 대규모 그룹통신 방법에 있어 단말, 접속관리 서버, DTS 및 MPS 사이의 통신 구조 관계를 개념적으로 나타낸 설명도이다.FIG. 2 is an explanatory diagram conceptually illustrating a communication structure relationship between a terminal, a connection management server, a DTS, and an MPS in the large-scale group communication method of FIG.
도 3은 본 발명의 일 실시예에 따른 대규모 그룹통신 시스템의 구성을 개략적으로 나타낸 설명도이다.3 is an explanatory diagram schematically showing the configuration of a large-scale group communication system according to an embodiment of the present invention.
도 4는 도 3에 도시된 각각의 단말그룹, DTS 및 MPS 사이의 연결 관계와 이에 의해 서비스 되는 세션 관계를 정리한 설명도이다.FIG. 4 is an explanatory diagram summarizing connection relations between respective UE groups, DTSs, and MPSs shown in FIG.
도 5는 도 1 내지 3에 적용되는 DTS 및 MPS 내의 세션 오브젝트 구조 관계성을 설명하기 위한 예시도이다.FIG. 5 is an exemplary diagram for describing the relationship between session object structure in DTS and MPS applied to FIGS. 1 to 3.
도 6은 종래 기술에 따른 분산 구조를 가지는 미디어 서버 시스템에서의 그룹통신 방법을 나타낸 순서도이다.6 is a flowchart illustrating a group communication method in a media server system having a distributed structure according to the prior art.
상술한 본 발명의 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 실시예를 통하여 보다 분명해질 것이다. The objects, features, and advantages of the present invention described above will become more apparent through the following embodiments in conjunction with the accompanying drawings.
이하의 특정한 구조 내지 기능적 설명들은 단지 본 발명의 개념에 따른 실시예를 설명하기 위한 목적으로 예시된 것으로, 본 발명의 개념에 따른 실시예들은 다양한 형태로 실시될 수 있으며 본 명세서 또는 출원에 설명된 실시예들에 한정되는 것으로 해석되어서는 아니된다.The following specific structural to functional descriptions are merely illustrated for the purpose of describing embodiments in accordance with the concepts of the present invention, and embodiments in accordance with the concepts of the present invention may be embodied in various forms and may not be described in the specification or the application. It should not be construed as limited to the embodiments.
본 발명의 개념에 따른 실시예는 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있으므로 특정 실시예들은 도면에 예시하고 본 명세서 또는 출원에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시예들을 특정한 개시 형태에 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Embodiments in accordance with the concepts of the present invention can be variously modified and have a variety of forms specific embodiments will be illustrated in the drawings and described in detail in the specification or the application. However, this is not intended to limit the embodiments in accordance with the concept of the present invention to a specific disclosed form, it should be understood to include all changes, equivalents, and substitutes included in the spirit and scope of the present invention.
제1 및/또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 한정되지는 않는다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소들로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1 구성 요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소는 제1 구성 요소로도 명명될 수 있다. Terms such as first and / or second may be used to describe various components, but the components are not limited to the terms. The terms are only for the purpose of distinguishing one component from other components, for example, without departing from the scope of the rights according to the inventive concept, the first component may be called a second component, and For example, the second component may also be referred to as a first component.
어떠한 구성 요소가 다른 구성 요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성 요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떠한 구성 요소가 다른 구성 요소에 "직접 연결되어" 있다거나 또는 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성 요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성 요소들 간의 관계를 설명하기 위한 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 인접하는"과 "~에 직접 인접하는" 등의 표현도 마찬가지로 해석되어야 한다.When a component is referred to as being "connected" or "connected" to another component, it may be directly connected or connected to that other component, but it may be understood that other components may be present in the middle. Should be. On the other hand, when a component is said to be "directly connected" or "directly connected" to another component, it should be understood that no other component exists in the middle. Other expressions to describe the relationship between components, such as "between" and "immediately between" or "adjacent to" and "directly adjacent to", should be interpreted as well.
본 명세서에서 사용하는 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로서, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서 "포함하다" 또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular embodiments only and is not intended to be limiting of the invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. As used herein, the terms "comprise" or "have" are intended to indicate that there is a feature, number, step, action, component, part, or combination thereof that is described, and that one or more other features or numbers, It is to be understood that it does not exclude in advance the possibility of the presence or addition of steps, actions, components, parts or combinations thereof.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in the commonly used dictionaries should be construed as having meanings consistent with the meanings in the context of the related art, and are not construed in ideal or excessively formal meanings unless expressly defined herein. Do not.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로써 본 발명을 상세히 설명하도록 한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. Like reference numerals in the drawings denote like elements.
도 1은 본 발명의 일 실시예에 따른 대규모 그룹통신 방법을 개략적으로 나타낸 순서도이고, 도 2는 도 1의 대규모 그룹통신 방법에 있어 단말, 접속관리 서버, DTS 및 MPS 사이의 통신 구조 관계를 개념적으로 나타낸 설명도이다.1 is a flowchart schematically illustrating a large group communication method according to an embodiment of the present invention, and FIG. 2 is a conceptual diagram illustrating a communication structure relationship between a terminal, a connection management server, a DTS, and an MPS in the large group communication method of FIG. It is explanatory drawing shown.
먼저 도 1을 참조하면, 본 발명의 일 실시예에 따른 대규모 그룹통신 방법은, 단말 접속 단계(S110), 제 1 세션 오브젝트 생성 단계(S120), 세션 정보 송신 단계(S130), 제 2 세션 오브젝트 생성 단계(S140), 제 1 미디어 데이터 송신 단계(S150) 및 제 2 미디어 데이터 송신 단계(S160) 등을 포함하여 구성됨을 알 수 있다.First, referring to FIG. 1, in a large-scale group communication method according to an embodiment of the present invention, a terminal access step (S110), a first session object generation step (S120), a session information transmission step (S130), and a second session object It can be seen that it is configured to include the generation step (S140), the first media data transmission step (S150) and the second media data transmission step (S160).
이하 도 1 및 도 2를 참조하여 본 발명의 일 실시예에 따른 대규모 그룹통신 방법의 전 과정을 상세하게 설명하기로 한다.Hereinafter, the entire process of the large-scale group communication method according to an embodiment of the present invention will be described in detail with reference to FIGS. 1 and 2.
제 1 단계(도 2의 ①)는 임의의 단말 그룹(10~80)이 그룹통신 서비스를 받기 위해 접속관리서버(300)에 로그인하는 단계를 나타내며, 이후 제 2 단계는 접속 관리 서버(300)가 단말의 사용자 인증을 통하여 서비스 접근을 허용하는 단계를 나타낸다.The first step (1 in FIG. 2) represents a step in which a certain terminal group 10 to 80 logs in to the access management server 300 to receive the group communication service, and the second step thereafter is the access management server 300. Indicates a step of allowing service access through user authentication of the terminal.
제 3 단계는, 서비스 접근이 허용된 단말 그룹(10~80)이 임의의 세션을 선택하면, 접속 관리 서버(300)가 등록된 DTS(Data Transfer System) 그룹(100,110,120) 가운데 각각에 대응되는 최적의 DTS 접속 정보를 데이터베이스(400)로부터 선택하여 각 단말그룹(10~80)을 구성하고 있는 단말들에게 할당하는 단계를 나타내고 있다.In the third step, when a terminal group 10 to 80 that is allowed to access a service selects a random session, an optimum corresponding to each of the DTS (Data Transfer System) groups 100, 110, and 120 to which the connection management server 300 is registered is selected. The step of selecting the DTS connection information from the database 400 and allocating to the terminals constituting each terminal group (10 ~ 80).
이후 단말 그룹(10~80)이 할당된 DTS에 접속하여 각각의 접속하고자 하는 세션 코드를 전달하는 단계가 제 4 단계에 해당되며, 세션 코드를 전달받은 DTS(100,110,120)가 이애 해당하는 세션 오브젝트의 존재 여부를 파악하는 등의 기능이 이루어지는 과정에 의해 제 5 단계가 구성된다.  Thereafter, the fourth step includes accessing the DTSs to which the terminal groups 10 to 80 are allocated and delivering the respective session codes to be accessed, and the DTSs 100, 110, and 120 that have received the session codes correspond to the corresponding session objects. The fifth step is constituted by a process in which a function such as identifying existence exists is performed.
여기서, DTS 내에 이미 해당하는 세션 오브젝트가 생성되어 있는 경우 단말 정보를 세션 오브젝트에 업데이트하고 이를 MPS(Media Processing System; 200,210)측에 통보하는 기능이 수행될 수 있는데, 이 때에는 이에 대응되도록 MPS 역시 해당 세션 오브젝트를 업데이트 시키는 과정을 수행할 수 있음은 도면에 도시된 바와 같다.In this case, when a corresponding session object is already generated in the DTS, a function of updating the terminal information to the session object and notifying the MPS (Media Processing System; 200, 210) may be performed. The process of updating the session object can be performed as shown in the figure.
만일 임의의 단말이 이전 까지 개설되지 않은 세션 접속을 요청할 경우에는 DTS에 해당 세션 오브젝트가 존재하지 않는 신규 세션으로 파악하여, 요청된 세션 코드에 대응되는 상세 정보를 접속 관리 서버(300)의 웹서비스를 통해 데이터베이스(400)로부터 전달받아, 접속 단말 리스트, 단말 특성에 따른 스트림 타입(Stream Type) 리스트, 세션 정보 및 접속 MPS 등을 포함하는 세션 오브젝트(제 1 세션 오브젝트)를 형성할 수 있으며, 이와 같은 과정에 의해 제 6 단계가 이루어지게 된다.If any terminal requests a session access that has not been established before, it is identified as a new session in which the session object does not exist in the DTS, and detailed information corresponding to the requested session code is obtained by the web service of the access management server 300. Received from the database 400 through the through, to form a session object (first session object) including a list of access terminals, stream type (Stream Type) list according to the terminal characteristics, session information and access MPS, such as The sixth step is accomplished by the same process.
제 7 단계는, DTS(100,110,120))가 접속 관리 서버(300)의 웹서비스를 통하여 데이터베이스(400)로부터 최적의 MPS을 선택하는 단계로써, 선택된 MPS의 정보 역시 제 1 세션 오브젝트에 저장된다. In the seventh step, the DTS (100, 110, 120) selects the optimal MPS from the database 400 through the web service of the access management server 300, the information of the selected MPS is also stored in the first session object.
제 7 단계를 통해 DTS(100,110,120)가 최적의 MPS(200,210)로 소켓 접속하여 해당 세션 정보를 전달하는 과정이 제 8 단계이고, 제 9 단계는 MPS(200,210)에서 DTS 리스트, 단말 리스트, Stream Type 정보 등을 포함하는 세션 오브젝트(제 2 세션 오브젝트)를 생성하는 과정으로 이루어진다. 이때, DTS가 접속한 최적의 MPS에 이미 이와 대응되는 세션 오브젝트가 존재하는 경우, MPS는 해당 세션 오브젝트의 DTS 리스트에 접속된 DTS의 정보를 업데이트 하는 과정으로 상기의 과정을 대신할 수 있다.In the seventh step, the DTS (100, 110, 120) is connected to the socket of the optimal MPS (200, 210) to deliver the corresponding session information in the eighth step, the ninth step is the DTS list, terminal list, stream type in the MPS (200, 210) And a session object (second session object) including information and the like. In this case, when the session object corresponding to the DTS already exists in the optimal MPS connected to the DTS, the MPS may replace the above process by updating the information of the DTS connected to the DTS list of the corresponding session object.
참고로, 도 1 및 도 2에 적용되는 DTS 및 MPS 내의 세션 오브젝트(제 1 및 제 2 세션 오브젝트)의 구조 관계성을 설명하기 위한 예시도가 도 5에 도시되어 있다.For reference, an exemplary diagram for describing the structural relationship between session objects (first and second session objects) in the DTS and the MPS applied to FIGS. 1 and 2 is shown in FIG. 5.
제 10 단계는, 단말의 선택 또는 해당 세션의 제어권자 등에 의하여 임의의 단말(10~80) 미디어가 인코딩(Encoding) 과정을 거쳐 DTS를 통해 MPS로 송신되는 단계를 나타낸다. The tenth step represents a step in which any of the terminal 10 to 80 media is transmitted to the MPS through the DTS through an encoding process by the terminal selection or the control authority of the corresponding session.
그러면 MPS는 수신된 단말들의 미디어 데이터를 디코딩(Decoding)하고 세션 제어권자의 지시 또는 기본으로 선택된 레이아웃 정보 등에 따라 미디어를 합성하는 한편, 세션 정보에서 정의된 스트림 타입 별로 이를 인코딩 하는 제 11 단계를 수행한 후, MPS가 레이아웃 정보와 인코딩 된 데이터를 DTS에 송신하고, 해당 DTS는 세션 오브젝트에 포함된 단말 리스트에 따라 단말들에게 합성 미디어 데이터를 송신하는 제 12 단계와, 단말이 DTS로부터 수신한 합성 미디어 데이터를 디코딩 및 렌더링(Rendering)하는 제 13 단계를 통해, 본 발명의 일 실시예에 따른 대규모 그룹 통신 방법의 수행이 완료된다.Then, the MPS decodes the received media data and synthesizes the media according to the instruction of the session controller or the layout information selected by default, and performs the eleventh step of encoding the data for each stream type defined in the session information. After that, the MPS transmits the layout information and the encoded data to the DTS, and the DTS transmits the composite media data to the terminals according to the terminal list included in the session object, and the composite media received by the terminal from the DTS. Through the thirteenth step of decoding and rendering the data, the execution of the large-scale group communication method according to an embodiment of the present invention is completed.
도 3은 본 발명의 일 실시예에 따른 대규모 그룹통신 시스템의 구성을 개략적으로 나타낸 설명도이다.3 is an explanatory diagram schematically showing the configuration of a large-scale group communication system according to an embodiment of the present invention.
도 3을 참조하면, 본 발명의 일 실시예에 따른 대규모 그룹통신 시스템은, 각종 리소스(사용자, 서버, 네트워크 등)의 기본 정보 및 각 세션 목적에 부합하는 세션 정보와 각 시스템(DTS 및 MPS) 등으로부터 주기적으로 수신 받는 시스템 성능 지수 정보(CPU Usage, 사용되고 있는 네트워크 대역폭, 사용되고 있는 메모리, 처리하고 있는 세션 오브젝트 수 및 접속자 수 정보 등)를 저장하고 있는 데이터베이스(400), 관리자에 의한 리소스 등록을 비롯하여 광의 지역(A,B,C) 내에서 협의 지역으로 분산된 단말 그룹들(10~80)에 의한 회의(세션) 개설, 참가, 삭제, 변경 등의 서비스 요청에 대응하는 접속 관리 서버(웹서버; 300), 그룹통신에 있어 단말과 직접적으로 접속되어 제어 및 미디어 데이터 송수신 등을 담당하는 DTS 그룹(100,110,120) 그리고 DTS로부터 수신된 단말들의 미디어 데이터를 합성 및 인코딩하여 다시 DTS를 통해 단말들에게 송신하는 MPS 그룹(200,210) 등을 포함하여 구성됨을 확인할 수 있다.Referring to FIG. 3, a large-scale group communication system according to an embodiment of the present invention includes basic information of various resources (user, server, network, etc.), session information corresponding to each session purpose, and each system (DTS and MPS). Database 400 storing system performance index information (CPU Usage, network bandwidth used, memory used, session object number and accessor number information, etc.) which are periodically received from the server, and resource registration by the administrator. In addition, a connection management server that responds to a service request such as opening, joining, deleting, or changing a meeting (session) by terminal groups 10 to 80 distributed to a meeting area in a wide area (A, B, C). The server 300, the DTS groups 100, 110, and 120 that are directly connected to the terminal in group communication and are responsible for control and media data transmission and reception; It can be seen that it is configured to include the MPS group (200, 210) for synthesizing and encoding the media data and transmits back to the terminals through the DTS.
이하, 상기 각 구성요소들의 기능 및 동작 등에 대해 보다 상세히 설명하도록 한다.Hereinafter, the function and operation of each of the components will be described in more detail.
설명의 편의를 위하여, 먼저 접속하고자 하는 단말들(10~80)이 크게 지역 A(10,20,30), B(40,50,60) 및 C(70,80)로 나뉘어 분포되어 있고, 지역 A, B, C에 각각 분포되어 있는 복수의 단말 그룹들(10~80) 중 A 지역의 단말 그룹(10,20,30)은 1,500개의 단말로 구성되고, B 지역의 단말 그룹(40,50,60)은 2,000개, C 지역의 단말 그룹(70,80)은 1,000개 등, 도합 4,500개의 지역적으로 분산된 대규모 단말들을 예로 들어, 이들이 동일한 세션 상에서 그룹통신 서비스를 받는 과정과, 이와 같은 세션이 복수로 진행되었을 때 분산된 DTS 및 MPS 그룹들의 프로세스의 특징 등을 설명하도록 한다.For convenience of description, the terminals 10 to 80 to be connected to are first divided into regions A (10, 20, 30), B (40, 50, 60), and C (70, 80). Among the plurality of terminal groups 10 to 80 distributed in regions A, B, and C, the terminal groups 10, 20, and 30 of region A are composed of 1,500 terminals, and the terminal groups 40, 50,60 is 2,000, and C group 70,80 is 1,000, for example, a total of 4,500 geographically dispersed large terminals, such as the process of receiving a group communication service in the same session, When a plurality of sessions are conducted, the characteristics of the processes of distributed DTS and MPS groups will be described.
먼저, 접속 관 리서버(300)는 단말들이 최초 접속하는 서버로서, 사용자 인증을 거치는 로그인 처리와 웹 소켓 통신을 통하여 서비스 어플리케이션 호출 및 세션별 리소스(해상도, 초당 프레임, 대역폭, 최대 접속자 수, 최대 영상 개수 등) 설정, 사용자 계정과 각종 시스템 설정 데이터 등을 저장하고 있는 데이터베이스(400)와 연동됨으로써, 웹 서비스를 통해 각 단말, DTS 및 MPS에게 필요한 정보 제공 기능을 수행하는 한편, 각각의 DTS 및 MPS로부터 수신된 성능 지수 정보 등을 웹 서비스를 통해 다시 데이터베이스(400)로 전달하는 역할을 담당한다.First, the access management server 300 is a server to which the terminals initially connect, and the service application calls and session-specific resources (resolution, frames per second, bandwidth, maximum number of users, maximum) through login processing and web socket communication through user authentication. By interlocking with the database 400, which stores the number of images), user accounts and various system setting data, etc., the DTS and MPS perform information providing functions to each terminal, DTS and MPS through a web service. It is responsible for delivering performance index information received from the MPS back to the database 400 through a web service.
또한 접속 관리 서버(300)는, 데이터베이스(400)의 정보를 이용하여 단말이 임의의 세션 참가를 요청할 때 분산된 DTS 그룹 중 가장 적합한 시스템 할당하고, 다시 DTS에게 접속 단말들의 미디어 데이터를 처리할 최적의 MPS를 할당하는 기능을 갖는다. 이를 위해 DTS와 MPS는, 일정 주기마다 자신들의 성능 지수(CPU Usage, Memory Capability, Network Bandwidth Usage, 서비스 세션 개수 및 접속자 수 정보 등)를 접속 관리 서버(300)의 웹서비스를 통해 데이터베이스(400)에 저장하도록 구성되는 것이 바람직할 수 있다.In addition, the access management server 300, by using the information in the database 400, the terminal allocates the most suitable system among the distributed DTS group when requesting the participation of any session, and again to the DTS to process media data of the access terminals Has the ability to assign MPS. To this end, the DTS and the MPS, their respective performance index (CPU Usage, Memory Capability, Network Bandwidth Usage, service session number and number of users information, etc.) at regular intervals through the web service of the access management server 300, the database 400 It may be desirable to be configured to store in.
이때, 성능 지수 정보를 이용하여 최적의 시스템을 추천 또는 할당하기 위한 방식은 서비스 관리자의 정책 등에 따라 다양하게 정해질 수 있으며, 이를 위해 ㅌ통상의 어떠한 방식이 적용되더라도 무방할 수 있음은 당연하다.In this case, a method for recommending or allocating an optimal system using performance index information may be determined in various ways according to a policy of a service manager, and it may be natural that any method may be applied.
DTS(100,110,120)는 임의의 세션 상에서 단말들(10~80)로부터의 미디어 데이터 및 제어 데이터 등을 MPS(200,210) 측으로 전송하고, MPS(200,210)에서 합성된 미디어 데이터를 해당 세션에 접속하여 서비스 받고자 하는 단말들에게 전송하는 기능을 수행하기 위한 세션 오브젝트(제 1 세션 오브젝트)를 생성, 업데이트 및 삭제하는 등의 기능을 갖는다. The DTS (100, 110, 120) to transmit the media data and control data, etc. from the terminals (10 ~ 80) to the MPS (200, 210) side in any session, to access the media data synthesized in the MPS (200, 210) to the session And a session object (first session object) for performing a function of transmitting to the terminals.
제 1 세션 오브젝트는, 해당 세션을 처음 요청하는 단말이 접속하였을 때 해당 단말이 웹에서 획득한 세션 코드 정보를 접속한 해당 DTS에게 전달하면, DTS가 해당 세션 코드에 부합하는 상세 세션 정보를 접속 관리 서버(300)의 웹서비스를 통해 데이터베이스(400)로부터 읽어옴으로써 이에 적합하도록 생성 가능하다. When the first requesting session of the session is connected, the first session object transfers the session code information acquired from the web to the corresponding DTS, and the DTS manages access to the detailed session information corresponding to the session code. By reading from the database 400 through the web service of the server 300 can be generated to suit this.
이때 접속 단말 정보는 DTS의 단말 리스트 정보에 등록하는 한편, 단말 특성별 송수신 영상 품질 조건에 따라 그룹화하는 스트림 타입(Stream Type) 리스트에 등록한다. At this time, the access terminal information is registered in the terminal list information of the DTS, and is registered in the stream type list grouped according to the transmission / reception image quality condition for each terminal characteristic.
이어서, 데이터베이스(400)로부터 최적의 MPS를 선택한 DTS는 세션 오브젝트의 연결 MPS 프로퍼티 업데이트 과정 등을 통해, 소켓 통신으로 해당 MPS와 연결한 후 세션 정보를 MPS에 전달한다. 이를 통해, 단말들이 추가적으로 해당 세션에 접속하기 위하여 동일한 DTS에 접속하게 되면 해당 세션 오브젝트 내의 단말 리스트와 스트림 타입 리스트를 업데이트 하고 이를 연결된 MPS에게 알리는 기능을 수행할 수 있게 된다.Subsequently, the DTS having selected the optimal MPS from the database 400 connects to the MPS through socket communication through the connection MPS property update process of the session object, and then transfers session information to the MPS. Through this, when the terminal additionally accesses the same DTS to access the session, it is possible to update the terminal list and the stream type list in the corresponding session object and inform the connected MPS.
한편 MPS는, DTS가 신규 세션 오브젝트(제 1 세션 오브젝트) 생성 후 접속하게 되면 해당 DTS로부터 세션 정보를 전달받아 이에 대응되는 세션 오브젝트(제 2 세션 오브젝트)를 생성한다. 참고로, 도 3에 적용되는 DTS 및 MPS 내의 세션 오브젝트 구조 관계성을 설명하기 위한 예시도가 도 5에 도시되어 있다.Meanwhile, when the DTS connects after generating a new session object (first session object), the MPS receives session information from the corresponding DTS and generates a session object (second session object) corresponding thereto. For reference, an exemplary diagram for describing the relationship between the session object structure in the DTS and the MPS applied to FIG. 3 is illustrated in FIG. 5.
MPS 내의 세션 오브젝트는 해당 세션에 접속하는 DTS 리스트와 단말 리스트, 단말의 스트림 타입 리스트 및 믹스 오브젝트 등을 포함할 수 있다. 여기서 믹스 오브젝트란, 단말로부터 수신된 미디어 데이터를 디코딩 하는 기능, 디코딩 된 미디어 데이터를 합성하는 기능, 그리고 스트림 타입에 따라 조건을 달리하여 인코딩 하는 기능 등을 포함할 수 있다. The session object in the MPS may include a DTS list, a terminal list, a stream type list of the terminal, a mix object, and the like, connected to the corresponding session. Here, the mix object may include a function of decoding media data received from the terminal, a function of synthesizing the decoded media data, and a function of encoding differently depending on the stream type.
MPS에서 인코딩 된 데이터는 DTS 리스트에 의해 관리되는 접속 DTS 그룹(100,110,120)에게 송신된다. The data encoded in the MPS is transmitted to the access DTS groups 100, 110 and 120 managed by the DTS list.
이때 MPS는, 미디어 데이터를 합성하는 과정에서 단말들의 다양한 영상 배치 기능을 지원하기 위한 레이아웃 제어 기능을 포함할 수 있는데, 이 경우 적용된 레이아웃 정보는 DTS를 통해 해당 접속 단말들에게 전달된다. 이와 같은 정보는 합성된 영상의 구성 요소에 태그를 표시하거나 또는 제어권을 가진 단말에서 레이아웃을 변경할 수 있도록 하는 등의 용도를 위해 사용될 수 있다.In this case, the MPS may include a layout control function for supporting various image arrangement functions of the terminals in synthesizing the media data. In this case, the applied layout information is transmitted to the corresponding access terminals through the DTS. Such information may be used for a purpose of displaying a tag on a component of a synthesized image or changing a layout in a terminal having a control right.
이하, 단말들(10~80)이 임의 세션(세션1, 세션2, 세션3)에 접속하여 그룹통신 하는 과정을 상세하게 설명하기로 한다.Hereinafter, the terminal 10 to 80 will be described in detail the process of the group communication by connecting to any session (session 1, session 2, session 3).
도 3을 참조하면, 세 지역(A, B, C)에 분포된 총 4,500대 단말들이 세 개의 세션(세션1, 세션2, 세션3) 서비스를 받기 위해 3개의 DTS(100,110,120)와 2개의 MPS(200,210)를 이용하는 구성이 도시되었음을 확인할 수 있다. Referring to FIG. 3, a total of 4,500 terminals distributed in three regions (A, B, and C) receive three DTSs (100, 110, 120) and two MPSs to receive three sessions (session 1, session 2, and session 3). It can be seen that the configuration using (200,210) is shown.
즉, DTS1(100)에는 A 지역의 각 500개로 구성된 단말그룹(10,20)이 접속되고 DTS2(110)에는 B지역의 500개로 구성된 단말그룹(40)이 접속되어 세션1을 이루고 있음을 확인할 수 있는데, 총 1,500개의 단말이 2개의 DTS(100,110)의 클러스터링(Clustering) 구조에 의해 서비스를 이루고 있으며, 세션1의 미디어 합성 처리는 MPS1(200)에서 이루어지고 있음을 알 수 있다. That is, DTS1 (100) is connected to the terminal group (10, 20) consisting of 500 in each region A, and DTS2 (110) is connected to the terminal group 40 consisting of 500 in the region B is confirmed that the session 1 In this case, it can be seen that a total of 1,500 terminals are serving by a clustering structure of two DTSs 100 and 110, and the media synthesis process of session 1 is performed in the MPS1 200.
또한, DTS1(100)에는 A 지역의 500개로 구성된 단말그룹(30)이 접속되고 DTS2(110)에는 B 지역의 1,000개로 구성된 단말그룹(50)이 접속되어 세션2를 이룸으로써, 총 1,500개 단말이 2개의 DTS(100,110)의 클러스터링 구조로 서비스를 이루며, 이때 MPS2(210)가 미디어 합성 처리를 담당하고 있음을 확인할 수 있다. In addition, the DTS1 (100) is connected to the terminal group 30 consisting of 500 in the A region and the DTS2 (110) is connected to the terminal group 50 consisting of 1,000 in the B region to form a session 2, a total of 1,500 terminals The service is formed by the clustering structure of the two DTSs 100 and 110, and it can be seen that the MPS2 210 is in charge of media composition processing.
마지막으로 DTS3(120)에는 B지역의 500개로 구성된 단말그룹(60)과 C지역의 각각 500개로 구성된 단말그룹(70,80)이 접속됨으로써 총 1,500개의 단말들이 접속된 세션3를 이루고 있음을 보여주고 있다. 특히, 세션3는 DTS1 및 DTS2가 이미 세션1,2를 서비스 하고 있기 때문에, 로드 밸런싱(Load Balancing; 부하 분배) 기능에 의해 캐스케이딩(Cascading) 구조를 이용해 DTS3에 의하여 서비스가 이루어짐을 보여주고 있다.Finally, the DTS3 120 is connected to the terminal group 60 consisting of 500 in the B region and the terminal group 70 and 80 consisting of 500 in the C region, respectively, to show that a total of 1,500 terminals form session 3. Giving. In particular, Session 3 shows that DTS1 and DTS2 are already serving Sessions 1 and 2, so that service is provided by DTS3 using a cascading structure by Load Balancing. have.
이와 같은 각각의 단말그룹, DTS 및 MPS 사이의 연결 관계와 이에 의해 서비스 되는 세션 관계를 도 4를 통해 정리하였다.The connection relationship between each terminal group, the DTS and the MPS, and the session relationship serviced by the above are summarized through FIG. 4.
이때, 본 발명의 실시예에 따른 대규모 그룹통신 방법 및 시스템은, 단일 세션 내에 수백 단말 이상의 대규모 접속이 이루어지는 경우 모든 접속 단말들의 미디어를 모두 합성하는 것은 무의미할 수 있기 때문에, 회의 제어권자 또는 해당 단말의 선택 등에 따라 미디어 데이터를 송출하는 단말들이 정해지도록 구성될 수 있다. 이 경우, 해당 단말의 선택에 의해 미디어 데이터를 송출하기 위해서는 사전에 DTS를 통하여 MPS의 허락을 받도록 구성되는 것이 보다 바람직할 수 있다. In this case, the large-scale group communication method and system according to an embodiment of the present invention may be meaningless when synthesizing all media of all access terminals when a large-scale connection of hundreds of terminals or more is made in a single session. The terminal for transmitting the media data may be determined according to the selection of. In this case, in order to transmit the media data by the selection of the corresponding terminal, it may be more preferable to be configured to receive permission of the MPS through the DTS in advance.
이는 해당 세션에서 합성될 미디어의 개수가 사전 정의되도록 구성됨으로써, 이에 대한 기준에 적합한지 여부를 확인하는 과정이 필요할 수 있기 때문이다. 만일 사전 정의된 단말 미디어 개수가 포화 상태라면, 허락을 요구한 해당 단말에게 미디어를 송출할 수 없음을 DTS를 통해 메시지 등으로 통지하도록 하는 과정이나 기능 등이 추가로 구비될 수 있을 것이다. This is because the number of media to be synthesized in the session is pre-defined, so it may be necessary to check whether or not it meets the criteria. If the predefined number of terminal media is saturated, a process or function may be additionally provided to notify the corresponding terminal requesting permission as a message through the DTS that the media cannot be transmitted.
또는, 통상의 다양한 규정 등을 응용하여 기존 데이터 합성 중인 단말 중 하나를 선택해 해당 단말의 미디어 송출을 중지시킨 후, 새롭게 신청한 단말의 미디어를 송출하도록 구성되는 것도 가능할 수 있다. 이때, 미디어 송출이 중지되는 단말의 선택 등에 적용되는 규정으로 통상의 어떠한 방식이 적용되더라도 무방할 수 있음은 당연하다.Alternatively, the application may be configured to select one of the terminals that are being synthesized with the existing data, stop sending media of the terminal, and then send media of the newly applied terminal by applying various conventional regulations. At this time, as a rule applied to the selection of the terminal to stop the media transmission, it is natural that any conventional method may be applied.
하지만, 이상에서 설명한 바와 같은 일부 단말에 대한 선택적 미디어 데이터 송출 허용 등의 구성은 본 발명의 일 구현예일 뿐이며, 본 발명이 반드시 이에 한정되지 아니함은 당연하다.However, the configuration of the selective media data transmission allowance for some terminals as described above is just one embodiment of the present invention, and the present invention is not necessarily limited thereto.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능함은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명백할 것이다.The present invention described above is not limited to the above-described embodiment and the accompanying drawings, and various substitutions, modifications, and changes are possible within the scope without departing from the technical spirit of the present invention. It will be evident to those who have knowledge of.

Claims (12)

  1. 접속 관리 서버로부터 제공된 DTS(Data Transfer System) 접속 정보를 이용하여 1 이상의 단말이 DTS에 접속되는 단말 접속 단계;A terminal connection step of connecting one or more terminals to the DTS using data transfer system (DTS) connection information provided from a connection management server;
    상기 단말 접속 단계를 통해 단말 접속이 완료된 DTS에 접속된 단말의 리스트 정보를 포함하는 제 1 세션 오브젝트(session object)가 생성되는 제 1 세션 오브젝트 생성 단계;A first session object generating step of generating a first session object including list information of a terminal connected to a DTS in which terminal access is completed through the terminal access step;
    상기 제 1 세션 오브젝트 생성 단계를 통해 제 1 세션 오브젝트의 생성이 완료된 1 이상의 DTS가 상기 접속 관리 서버로부터 할당된 MPS(Media Processing System)에 접속한 후 세션 정보를 MPS 및 접속 단말에게 송신하는 세션 정보 송신 단계; Session information for transmitting the session information to the MPS and the access terminal after the one or more DTS that has completed the creation of the first session object through the first session object generation step accesses the MPS (Media Processing System) allocated from the connection management server. Transmitting step;
    상기 세션 정보 송신 단계를 통해 세션 정보를 수신받은 MPS가 상기 세션 정보를 이용하여 접속된 DTS 리스트 정보 및 각각의 DTS에 접속된 단말 리스트 정보를 포함하는 제 2 세션 오브젝트를 생성하는 제 2 세션 오브젝트 생성 단계; Generating a second session object for the MPS receiving the session information through the session information transmitting step to generate a second session object including the connected DTS list information and the terminal list information connected to each DTS using the session information. step;
    상기 제 2 세션 오브젝트 생성 단계를 통해 생성된 제 2 세션 오브젝트 내에 정보가 포함된 DTS로부터 수신된 단말의 미디어 데이터를 합성 및 인코딩하여 상기 DTS로 송신하는 제 1 미디어 데이터 송신 단계; 및A first media data transmission step of synthesizing, encoding, and transmitting the media data of the terminal received from the DTS including information in the second session object generated through the second session object generation to the DTS; And
    상기 제 1 미디어 데이터 송신 단계를 통해 송신된 미디어 데이터가 DTS를 통해 각각의 단말로 전송되는 제 2 미디어 데이터 송신 단계;를 포함하는 대규모 그룹통신 방법.And a second media data transmission step of transmitting the media data transmitted through the first media data transmission step to each terminal through a DTS.
  2. 제 1 항에 있어서,The method of claim 1,
    상기 제 1 세션 오브젝트 및 제 2 세션 오브젝트에 포함되는 단말 리스트 정보는, 단말 특성별 영상 품질 조건 정보(이하, 스트림 타입(stream type)이라 한다)를 포함하는 것을 특징으로 하는 대규모 그룹통신 방법.The terminal list information included in the first session object and the second session object includes video quality condition information (hereinafter referred to as a stream type) for each terminal characteristic.
  3. 제 2 항에 있어서,The method of claim 2,
    상기 제 1 미디어 데이터 송신 단계에 있어, DTS로부터 수신된 단말의 미디어 데이터는 상기 MPS에 의해 상기 스트림 타입에 대응되는 1 이상의 형태로 인코딩되는 것을 특징으로 하는 대규모 그룹통신 방법.In the first media data transmission step, the media data of the terminal received from the DTS is encoded by the MPS in one or more forms corresponding to the stream type.
  4. 제 1 항 내지 제 3 항 중 어느 한 항에 있어서,The method according to any one of claims 1 to 3,
    상기 DTS 및 MPS는, CPU 사용량 정보, 메모리 용량 정보 및 네트워크 대역폭 사용량 정보를 포함하는 성능지수 정보를 일정 주기마다 상기 접속 관리 서버에 전송하는 것을 특징으로 하는 대규모 그룹통신 방법.The DTS and MPS, the large-scale group communication method characterized in that for transmitting the performance index information, including CPU usage information, memory capacity information and network bandwidth usage information to the connection management server at regular intervals.
  5. 제 4 항에 있어서,The method of claim 4, wherein
    상기 MPS는, 상기 제 1 미디어 데이터 송신 단계에 포함되는 미디어 데이터의 합성 과정에서 단말의 스트림 타입에 대응되는 다양한 영상 배치를 위한 레이아웃 제어 기능을 제공하는 것을 특징으로 하는 대규모 그룹통신 방법.The MPS is a large-scale group communication method, characterized in that for providing a layout control function for a variety of video layout corresponding to the stream type of the terminal in the synthesis process of the media data included in the first media data transmission step.
  6. 데이터베이스;Database;
    상기 데이터베이스와 연동되며, 그룹통신망의 자원을 관리하고 세션 동기화를 수행하는 접속 관리 서버;An access management server interworking with the database and managing resources of a group communication network and performing session synchronization;
    상기 접속 관리 서버와의 인증 절차를 통해 상기 그룹통신망에 접속되는 다수의 단말;A plurality of terminals connected to the group communication network through an authentication procedure with the access management server;
    상기 접속 관리 서버의 할당에 의해 상기 1 이상의 단말을 포함하는 단말 그룹과 연결되며, 상기 단말 그룹에 포함된 각각의 단말에 미디어 데이터의 송수신을 중계하기 위한 DTS; 및A DTS connected to a terminal group including the one or more terminals by assignment of the access management server, for relaying transmission and reception of media data to each terminal included in the terminal group; And
    상기 DTS로부터 상기 단말의 미디어 데이터를 전달받아 합성 및 인코딩 한 후 상기 DTS를 통해 상기 각각의 단말로 전송하는 MPS;를 포함하는 대규모 그룹통신 시스템.MPS for receiving the media data of the terminal from the DTS, synthesized and encoded, and then transmitting the MPS to the respective terminals through the DTS.
  7. 제 6 항에 있어서,The method of claim 6,
    상기 DTS는, 상기 접속 관리 서버에 의해 할당된 단말 그룹에 포함되는 단말 리스트 정보 및 각각의 단말의 스트림 타입을 포함하는 제 1 세션 오브젝트를 생성하여 관리하는 것을 특징으로 하는 대규모 그룹통신 시스템.And the DTS generates and manages a first session object including terminal list information included in a terminal group allocated by the connection management server and a stream type of each terminal.
  8. 제 7 항에 있어서,The method of claim 7, wherein
    상기 MPS는, 상기 DTS 제 1 세션 오브젝트에 대응되도록, DTS 리스트 정보, 단말 리스트 정보 및 각각의 단말의 스트림 타입을 포함하는 제 2 세션 오브젝트를 생성하여 관리하는 것을 특징으로 하는 대규모 그룹통신 시스템.The MPS generates and manages a second session object including DTS list information, terminal list information, and stream type of each terminal so as to correspond to the DTS first session object.
  9. 제 8 항에 있어서,The method of claim 8,
    상기 MPS는 상기 DTS로부터 수신된 단말의 미디어 데이터를 상기 스트림 타입에 대응되는 1 이상의 형태로 인코딩 하는 것을 특징으로 하는 대규모 그룹통신 시스템.The MPS is a large-scale group communication system, characterized in that for encoding the media data of the terminal received from the DTS in one or more forms corresponding to the stream type.
  10. 제 6 항 내지 제 9 항 중 어느 한 항에 있어서,The method according to any one of claims 6 to 9,
    상기 미디어 처리 장치는, 미디어의 합성 과정에서 단말들의 다양한 영상 배치를 위한 레이아웃 제어 기능을 제공하는 것을 특징으로 하는 대규모 그룹통신 시스템.The media processing apparatus is a large-scale group communication system, characterized in that for providing a layout control function for arranging various images of the terminals in the synthesis of media.
  11. 제 10 항에 있어서,The method of claim 10,
    상기 접속 관리 서버는, 상기 데이터베이스와의 연동을 통해 세션 별 실시간 리소스(resource) 정보를 파악함으로써, 이를 이용해 상기 단말에 DTS를 할당하고, 상기 DTS에 MPS를 할당하는 것을 특징으로 하는 대규모 그룹통신 시스템.The access management server identifies the real-time resource information for each session through interworking with the database, thereby allocating a DTS to the terminal and assigning an MPS to the DTS. .
  12. 제 10 항에 있어서,The method of claim 10,
    상기 DTS 및 상기 MPS는, CPU 사용량 정보, 메모리 용량 정보 및 네트워크 대역폭 사용량 정보를 포함하는 성능지수 정보를 일정 주기마다 상기 접속 관리 서버에 전송하는 것을 특징으로 하는 대규모 그룹통신 시스템.And the DTS and the MPS transmit performance index information including CPU usage information, memory capacity information and network bandwidth usage information to the connection management server at regular intervals.
PCT/KR2015/010942 2014-10-21 2015-10-16 Large scale group communication method and system WO2016064139A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/520,496 US10212391B2 (en) 2014-10-21 2015-10-16 Method and system for providing large-scale group communications

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2014-0142345 2014-10-21
KR20140142345 2014-10-21
KR1020150019201A KR101628071B1 (en) 2014-10-21 2015-02-09 Method and system for large scaled group communication
KR10-2015-0019201 2015-02-09

Publications (1)

Publication Number Publication Date
WO2016064139A1 true WO2016064139A1 (en) 2016-04-28

Family

ID=55761124

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/010942 WO2016064139A1 (en) 2014-10-21 2015-10-16 Large scale group communication method and system

Country Status (1)

Country Link
WO (1) WO2016064139A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008225619A (en) * 2007-03-09 2008-09-25 Konica Minolta Holdings Inc Distributed information sharing server system
KR100953507B1 (en) * 2007-01-08 2010-04-20 (주)해든브릿지 System and method for communication in groups using a lot of Data Transferring Server
JP2010200273A (en) * 2009-02-27 2010-09-09 Oki Electric Ind Co Ltd Network control system, method and program
KR20100121376A (en) * 2009-05-08 2010-11-17 (주)해든브릿지 Group communication method in media server system with distributed structure
KR20140098573A (en) * 2013-01-31 2014-08-08 한국전자통신연구원 Apparatus and Methd for Providing Video Conference

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100953507B1 (en) * 2007-01-08 2010-04-20 (주)해든브릿지 System and method for communication in groups using a lot of Data Transferring Server
JP2008225619A (en) * 2007-03-09 2008-09-25 Konica Minolta Holdings Inc Distributed information sharing server system
JP2010200273A (en) * 2009-02-27 2010-09-09 Oki Electric Ind Co Ltd Network control system, method and program
KR20100121376A (en) * 2009-05-08 2010-11-17 (주)해든브릿지 Group communication method in media server system with distributed structure
KR20140098573A (en) * 2013-01-31 2014-08-08 한국전자통신연구원 Apparatus and Methd for Providing Video Conference

Similar Documents

Publication Publication Date Title
US6704769B1 (en) Media role management in a video conferencing network
WO2013180440A1 (en) A method and system for self-broadcasting in a social experience environment
JP4700977B2 (en) Multipoint conference system
WO2010135979A1 (en) Method and system for video conference control, network equipment and meeting places for video conference
CN111432158B (en) Load balancing method and device for media nodes, storage medium and electronic device
US9374232B2 (en) Method and a device for optimizing large scaled video conferences
WO2016184001A1 (en) Video monitoring processing method and apparatus
KR20140006221A (en) Method for selecting conferrence processing device and image conferrence system usnig the method
CN111953925A (en) Media stream processing method, device and system
CN112019792A (en) Conference control method, conference control device, terminal equipment and storage medium
JP2008306683A (en) Conference management server, and multipoint connection device
JP6387972B2 (en) COMMUNICATION METHOD, COMMUNICATION SYSTEM, AND COMMUNICATION PROGRAM
WO2016064139A1 (en) Large scale group communication method and system
KR20080001073A (en) System for sharing multilateral media, method for sharing and method for sharing control thereof
WO2012176985A2 (en) Iptv service device and method for providing continuous service
KR101628071B1 (en) Method and system for large scaled group communication
WO2019022332A1 (en) Video conference server capable of providing multi-screen video conference by using plurality of terminals for video conference, and method therefor
JPH06269004A (en) Method for controlling video conference communication in inter communicating system
JP5439938B2 (en) Communication control device
KR100755100B1 (en) Apparatus for versatile video service in multicast-based multi-party collaborative environments and method therefor
JP2004064394A (en) Television communication system
GB2403865A (en) Method for displaying a multimedia conference
CN114630071A (en) Live broadcast processing method and device, terminal equipment and storage medium
WO2017111183A1 (en) Portable radio device and method for providing real-time mirroring using same
CN113612964A (en) Interactive teaching processing method and device, computer equipment and storage medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15853484

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15520496

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 27.07.2017)

122 Ep: pct application non-entry in european phase

Ref document number: 15853484

Country of ref document: EP

Kind code of ref document: A1