KR102491792B1 - System and method for providing a video conferencing service in which various participation modes can be selected - Google Patents

System and method for providing a video conferencing service in which various participation modes can be selected Download PDF

Info

Publication number
KR102491792B1
KR102491792B1 KR1020210028030A KR20210028030A KR102491792B1 KR 102491792 B1 KR102491792 B1 KR 102491792B1 KR 1020210028030 A KR1020210028030 A KR 1020210028030A KR 20210028030 A KR20210028030 A KR 20210028030A KR 102491792 B1 KR102491792 B1 KR 102491792B1
Authority
KR
South Korea
Prior art keywords
participant
participation
conference room
participant terminal
terminal
Prior art date
Application number
KR1020210028030A
Other languages
Korean (ko)
Other versions
KR20220124434A (en
Inventor
송수연
Original Assignee
주식회사 라이노
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 라이노 filed Critical 주식회사 라이노
Priority to KR1020210028030A priority Critical patent/KR102491792B1/en
Publication of KR20220124434A publication Critical patent/KR20220124434A/en
Application granted granted Critical
Publication of KR102491792B1 publication Critical patent/KR102491792B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/155—Conference systems involving storage of or access to video conference sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1818—Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42684—Client identification by a unique number or address, e.g. serial number, MAC address, socket ID
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Power Engineering (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 화상 참여 모드, 청중 참여 모드 등 다양한 참여 모드의 선택과 변경이 자유로운 화상회의방 개설 기능을 제공하며, 또한 참여자 단말의 비디오 신호 및 오디오 신호를 분석하여 하울링 또는 노이즈를 발생시키는 참여자 단말의 오디오 신호를 차단하거나 혹은 퇴장시키는 기능을 통해 화상회의 진행에 방해가 되는 문제점을 시스템적으로 파악하고 이에 대해 해결 가능한 솔루션을 제공할 수 있는 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템 및 제공 방법에 관한 것이다.The present invention provides a function for opening a video conference room in which various participation modes, such as a video participation mode and an audience participation mode, can be freely selected and changed. A video conference service providing system and method capable of selecting various participation modes that can systematically identify problems that hinder the progress of video conferences through a function of blocking or leaving audio signals and provide solutions that can solve them. it's about

Description

다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템 및 제공 방법{SYSTEM AND METHOD FOR PROVIDING A VIDEO CONFERENCING SERVICE IN WHICH VARIOUS PARTICIPATION MODES CAN BE SELECTED}System and method for providing video conferencing service in which various participation modes can be selected

본 발명은 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템 및 제공 방법에 관한 것으로서, 보다 구체적으로는, 화상 참여 모드, 청중 참여 모드 등 다양한 참여 모드의 선택과 변경이 자유로운 화상회의방 개설 기능을 제공하며, 또한 참여자 단말의 비디오 신호 및 오디오 신호를 분석하여 하울링 또는 노이즈를 발생시키는 참여자 단말의 오디오 신호를 차단하거나 혹은 퇴장시키는 기능을 통해 화상회의 진행에 방해가 되는 문제점을 시스템적으로 파악하고 이에 대해 해결 가능한 솔루션을 제공함으로써, 원활한 화상회의가 진행될 수 있도록 하는 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템 및 제공 방법에 관한 것이다.The present invention relates to a system and method for providing a video conference service in which various participation modes can be selected, and more specifically, provides a video conference room opening function in which various participation modes such as a video participation mode and an audience participation mode can be freely selected and changed. In addition, by analyzing the video signal and audio signal of the participant's terminal, the function of blocking or exiting the audio signal of the participant's terminal that generates howling or noise is used to systematically identify problems that hinder the progress of the video conference and to deal with it. The present invention relates to a video conference service providing system and method in which various participation modes can be selected so that a video conference can be conducted smoothly by providing a solution that can be solved.

일반적으로, 화상회의 혹은 화상채팅의 진행 방식은 크게 참여자의 화상 참여 방식 또는 청중 참여 방식으로 나뉜다.In general, methods of conducting video conferences or video chatting are largely divided into video participation methods of participants or audience participation methods.

화상 참여 방식은 화상회의 혹은 화상채팅의 개설자가 개설한 방에 다수의 참여자들이 입장하여, 서로의 단말에 설치된 카메라를 통해 화상 커뮤니케이션을 진행하는 방식으로써, 참여자 간 발언, 전체 참여자를 대상으로 한 단체 채팅, 특정 참여자를 대상으로 한 1:1 채팅이 가능한 이점을 가진다. 다만, 화상 참여 방식은 개설자가 개설한 방에 직접 입장한 참여자들에 한해 화상 커뮤니케이션이 가능하다는 점에서 불특정 다수를 대상으로 한 중계가 불가하며, 참여자들의 단말에 문제가 생겨 중계 오류가 발생할 경우 이를 하드웨어적으로 제어할 방안이 없다는 단점이 있다.The video participation method is a method in which a number of participants enter a room opened by the creator of a video conference or video chat and conduct video communication through cameras installed on each other's terminals. It has the advantage of being able to chat and 1:1 chat for specific participants. However, in the video participation method, video communication is possible only for participants who directly enter the room opened by the creator, so relay for an unspecified number of people is not possible. The downside is that there is no way to control it in terms of hardware.

반면에, 청중 참여 방식은 회상회의 혹은 화상채팅의 개설자가 개설한 방(혹은 채널)에 접속하는 불특정 다수의 참여자 전체를 중계 대상으로 한다는 점에서, 화상 참여 방식에 비해 중계 대상의 제한이 없다는 이점과 전체 참여자를 대상으로 한 단체 채팅이 가능한 이점을 가진다. 다만, 청중 참여 방식의 경우 개설자에 한해 자신의 카메라를 통해 화면을 송출하게 되고, 그 외 참여자들은 해당 송출되는 화면을 일방적으로 확인할 수 밖에 없다는 점에서 참여자 간 화상 커뮤니케이션이나 화상을 통한 발언이 불가하고, 특정 참여자를 대상으로 한 1:1 채팅이 불가하며, 마찬가지로 참여자들의 단말에 문제가 생겨 중계 오류가 발생할 경우 이를 하드웨어적으로 제어할 방안이 없다는 단점이 있다.On the other hand, the audience participation method has the advantage that there is no restriction on the relay target compared to the video participation method in that it targets the entire number of unspecified participants who access the room (or channel) opened by the creator of the video conference or video chat. and group chatting for all participants. However, in the case of the audience participation method, only the creator transmits the screen through his/her camera, and other participants have no choice but to check the transmitted screen unilaterally, so video communication between participants or speech through video is not possible. , 1:1 chatting for a specific participant is not possible, and similarly, there is a disadvantage in that there is no way to control it hardware-wise when a relay error occurs due to a problem in the participant's terminal.

따라서, 본 출원인은 이러한 화상회의 혹은 화상채팅을 지원하는 종래 지원 방식에 대한 문제점 및 한계점을 해결하고자 본 발명을 개발하기에 이르렀다.Accordingly, the present applicant has developed the present invention to solve the problems and limitations of the conventional support method for supporting such a video conference or video chat.

한국등록특허 제10-1668702호Korean Patent Registration No. 10-1668702

본 발명은 상술된 문제점을 해결하기 위해 도출된 것으로서, 화상 참여 모드, 청중 참여 모드 등 다양한 참여 모드의 선택과 변경이 자유로운 화상회의방 개설 기능을 제공하며, 또한 참여자 단말의 비디오 신호 및 오디오 신호를 분석하여 하울링 또는 노이즈를 발생시키는 참여자 단말의 오디오 신호를 차단하거나 혹은 퇴장시키는 기능을 통해 화상회의 진행에 방해가 되는 문제점을 시스템적으로 파악하고 이에 대해 해결 가능한 솔루션을 제공할 수 있으며, 이를 통해 원활한 화상회의가 진행될 수 있도록 하는 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템 및 제공 방법을 제공하고자 한다.The present invention was derived to solve the above-mentioned problems, and provides a video conference room opening function in which various participation modes such as video participation mode and audience participation mode can be freely selected and changed, and also provides a video signal and audio signal of a participant terminal. Through the function of blocking or leaving the audio signal of the participant's terminal that generates howling or noise by analyzing it, it is possible to systematically identify problems that hinder the progress of video conferences and provide solutions that can solve them. An object of the present invention is to provide a video conference service providing system and method in which various participation modes can be selected so that a video conference can be conducted.

본 발명의 일 실시예에 따른 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템은 다수의 참여 모드를 지원하는 회의방을 개설하며, 각각의 참여 모드 별로 서로 다른 링크 주소 또는 회의방 ID를 생성하는 개설 지원부, 각각의 참여 모드 별 링크 주소 또는 회의방 ID를 하나 이상의 참여자 단말에 각각 제공하며, 참여자 단말 별로 선택되는 링크 주소 또는 회의방 ID에 따라 각 참여자 단말의 참여 모드를 결정한 후, 결정된 참여 모드 별로 각 참여자 단말이 상기 회의방에 참여되도록 하는 참여 지원부 및 상기 회의방에 참여한 각 참여자 단말 별 식별 정보를 기반으로 각 참여자 단말에 대한 최종 상태를 저장하는 상태 저장부를 포함하며, 상기 참여 지원부는 참여자 단말이 상기 회의방에서 퇴장 후 재 참여를 위해 기 제공된 링크 주소 또는 회의방 ID를 재 선택하는 경우, 해당 참여자 단말에 대해 상기 상태 저장부에 기 저장된 최종 상태를 확인한 후 해당 참여자 단말이 퇴장 전 참여 모드와 동일한 참여 모드로 상기 회의방에 재 참여되도록 하는 것을 특징으로 할 수 있다.A system for providing a video conference service in which various participation modes can be selected according to an embodiment of the present invention opens a conference room supporting a plurality of participation modes and creates a different link address or conference room ID for each participation mode. The support unit provides a link address or conference room ID for each participation mode to one or more participant terminals, determines the participation mode of each participant terminal according to the link address or conference room ID selected for each participant terminal, and then determines the participation mode for each participant terminal. A participation support unit for enabling each participant terminal to participate in the conference room and a state storage unit for storing a final state for each participant terminal based on identification information for each participant terminal participating in the conference room, wherein the participation support unit includes a participant terminal When re-selecting the previously provided link address or conference room ID for re-participation after leaving the conference room, the final state pre-stored in the state storage unit for the participant terminal is checked, and then the participant terminal is in the participation mode before exiting. It may be characterized in that re-participation in the conference room is performed in the same participation mode.

일 실시예에서, 상기 각 참여자 단말 별 식별 정보는 참여자 단말 별 ID 정보, IP 정보 및 맥 어드레스(Mac address) 정보 중 어느 하나 이상을 포함하는 것을 특징으로 할 수 있다.In one embodiment, the identification information for each participant terminal may include at least one of ID information, IP information, and Mac address information for each participant terminal.

일 실시예에서, 상기 참여 지원부는 특정 참여 모드로 상기 회의방에 참여한 참여자 단말로부터 참여 모드 변경 요청이 수신되는 경우 해당 참여자 단말의 참여 모드를 변경하게 되고, 상기 상태 저장부는 해당 참여자 단말에 대한 최종 상태를 갱신하여 저장하는 것을 특징으로 할 수 있다.In an embodiment, the participation support unit changes the participation mode of the corresponding participant terminal when a request for changing the participation mode is received from a participant terminal participating in the conference room in a specific participation mode, and the state storage unit changes the final participation mode for the corresponding participant terminal. It may be characterized in that the state is updated and stored.

일 실시예에서, 본 발명은 상기 회의방에 참여한 하나 이상의 참여자 단말 중, 하울링(howling) 또는 노이즈(noise)가 발생된 오디오 신호를 입력하는 하나 이상의 참여자 단말을 특정하는 제1 특정부, 상기 제1 특정부를 통해 특정된 하나 이상의 참여자 단말을 통해 입력되는 비디오 신호를 분석한 후, 화면 구성 및 배경 구성의 유사성을 토대로 서로 인접하게 위치하는 참여자 단말을 특정하는 제2 특정부 및 상기 제2 특정부를 통해 특정된 하나 이상의 참여자 단말 중에서, 타 참여자 단말로부터 출력되는 오디오 신호를 함께 입력하는 문제발생 참여자 단말을 파악한 후 상기 문제발생 참여자 단말에 대한 오디오 입력을 제한하거나, 또는 상기 문제발생 참여자 단말을 상기 회의방으로부터 퇴장시키는 오류 제어부를 더 포함하는 것을 특징으로 할 수 있다.In one embodiment, the present invention provides a first specific unit for specifying one or more participant terminals that input an audio signal in which a howling or noise is generated, among one or more participant terminals participating in the conference room; 1 After analyzing the video signal input through one or more participant terminals specified through the specific unit, a second specific unit for specifying participant terminals located adjacent to each other based on the similarity of screen configuration and background configuration and the second specific unit Among the one or more participant terminals specified through the above, after identifying a participant terminal with a problem that inputs an audio signal output from another participant terminal together, the audio input to the participant terminal with a problem is restricted, or the participant terminal with a problem is selected for the conference. It may further include an error control unit for exiting the room.

일 실시예에서, 상기 오류 제어부는 오디오 입력 제한 상태에 대한 안내 정보, 상기 회의방으로부터 퇴장된 상태에 대한 안내 정보 또는 타 참여자 단말로부터 출력되는 오디오 신호가 함께 입력되지 않도록 하는 조치에 대한 안내 정보를 별도의 알림 신호로써 생성 후 상기 문제발생 참여자 단말에 전송하여 알리는 것을 특징으로 할 수 있다.In one embodiment, the error control unit provides guide information on an audio input restriction state, guide information on a state of leaving the conference room, or guide information on measures to prevent audio signals output from other participant terminals from being input together. It may be characterized in that it is generated as a separate notification signal and then transmitted to the problem participant terminal to notify.

일 실시예에서, 상기 제1 특정부는 상기 회의방에 참여한 하나 이상의 참여자 단말을 통해 입력되는 오디오 신호에 대한 입력 형태를 분석하여, 각 참여자 단말 별 오디오 신호의 입력 수단을 종류 별로 분류하는 것을 특징으로 할 수 있다.In one embodiment, the first specific unit analyzes input types of audio signals input through one or more participant terminals participating in the conference room, and classifies audio signal input means for each participant terminal by type. can do.

본 발명의 다른 실시예에 따른 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 방법은 개설 지원부를 통해, 다수의 참여 모드를 지원하는 회의방을 개설하며 각각의 참여 모드 별로 서로 다른 링크 주소 또는 회의방 ID를 생성하는 단계, 참여 지원부를 통해, 각각의 참여 모드 별 링크 주소 또는 회의방 ID를 하나 이상의 참여자 단말에 각각 제공하며, 참여자 단말 별로 선택되는 링크 주소 또는 회의방 ID에 따라 각 참여자 단말의 참여 모드를 결정한 후, 결정된 참여 모드 별로 각 참여자 단말이 상기 회의방에 참여되도록 하는 단계, 상태 저장부를 통해, 상기 회의방에 참여한 각 참여자 단말 별 식별 정보를 기반으로 각 참여자 단말에 대한 최종 상태를 저장하는 단계, 제1 특정부를 통해, 상기 회의방에 참여한 하나 이상의 참여자 단말 중, 하울링(howling) 또는 노이즈(noise)가 발생된 오디오 신호를 입력하는 하나 이상의 참여자 단말을 특정하는 단계, 제2 특정부를 통해, 상기 하나 이상의 참여자 단말을 통해 입력되는 비디오 신호를 분석한 후, 화면 구성 및 배경 구성의 유사성을 토대로 서로 인접하게 위치하는 참여자 단말을 특정하는 단계 및 오류 제어부를 통해, 상기 하나 이상의 참여자 단말 중에서, 타 참여자 단말로부터 출력되는 오디오 신호를 함께 입력하는 문제발생 참여자 단말을 파악한 후 상기 문제발생 참여자 단말에 대한 오디오 입력을 제한하거나, 또는 상기 문제발생 참여자 단말을 상기 회의방으로부터 퇴장시키는 단계를 포함하며, 상기 각 참여자 단말이 상기 회의방에 참여되도록 하는 단계는 참여자 단말이 상기 회의방에서 퇴장 후 재 참여를 위해 기 제공된 링크 주소 또는 회의방 ID를 재 선택하는 경우, 상기 참여 지원부에서 해당 참여자 단말에 대해 상기 상태 저장부에 기 저장된 최종 상태를 확인한 후 해당 참여자 단말이 퇴장 전 참여 모드와 동일한 참여 모드로 상기 회의방에 재 참여되도록 하는 단계를 포함하는 것을 특징으로 할 수 있다.A method for providing a video conference service in which various participation modes can be selected according to another embodiment of the present invention opens a conference room supporting a plurality of participation modes through an establishment support unit, and has a different link address or conference room ID for each participation mode. generating a link address or conference room ID for each participation mode to one or more participant terminals through a participation support unit, and the participation mode of each participant terminal according to the link address or conference room ID selected for each participant terminal After determining, allowing each participant terminal to participate in the conference room according to the determined participation mode, storing a final state for each participant terminal based on identification information for each participant terminal participating in the conference room through a state storage unit Step, through a first specific unit, specifying one or more participant terminals that input an audio signal in which a howling or noise is generated, among one or more participant terminals participating in the conference room, through a second specific unit , After analyzing the video signal input through the one or more participant terminals, through the step of specifying the participant terminals located adjacent to each other based on the similarity of the screen configuration and the background configuration, and the error control unit, among the one or more participant terminals, Identifying a participant terminal with a problem that inputs an audio signal output from another participant terminal together, and then limiting audio input to the terminal of the participant with a problem, or leaving the participant terminal with a problem from the conference room, In the step of allowing each participant terminal to participate in the conference room, when the participant terminal reselects a previously provided link address or conference room ID for re-participation after leaving the conference room, the participation support unit for the corresponding participant terminal After checking the final state pre-stored in the state storage unit, it may be characterized in that it includes a step of allowing the corresponding participant terminal to rejoin the conference room in the same participation mode as the participation mode before leaving.

본 발명의 일 측면에 따르면, 화상 참여 모드, 청중 참여 모드 등 다양한 참여 모드의 선택과 변경이 자유로운 화상회의방 개설 기능을 제공함으로써, 참여자로 하여금 참여 상황에 따라 자유롭게 모드를 변경할 수 있도록 하는 이점을 가진다.According to one aspect of the present invention, by providing a function for opening a video conference room in which various participation modes such as video participation mode and audience participation mode can be freely selected and changed, the advantage of allowing participants to freely change the mode according to the participation situation is provided. have

특히, 참여자 단말 별 식별 정보를 기본으로 해당 참여자 단말의 최종 상태를 저장하고 있기 때문에, 해당 참여자가 퇴장후 재참여 시에도 기 저장된 최종 상태를 확인하여 퇴장 전과 동일한 참여 모드로 자동 변경 및 참여되도록 하는 이점을 가진다.In particular, since the final state of the participant's terminal is stored based on the identification information for each participant's terminal, even when the participant rejoins after leaving, the previously stored final state is checked to automatically change to the same participation mode as before leaving and participate have an advantage

또한 본 발명의 일 측면에 따르면, 참여자 단말들의 비디오 화면 분석을 통해 화면 구성 및 배경 구성의 유사성을 토대로 서로 인접한 위치의 참여자 단말을 특정할 수 있으며, 특히 참여자 단말의 비디오 신호 및 오디오 신호를 분석하여 하울링 또는 노이즈를 발생시키는 참여자 단말의 오디오 신호를 차단하거나 혹은 퇴장시키는 기능을 통해 화상회의 진행에 방해가 되는 문제점을 시스템적으로 파악하고 이에 대해 해결 가능한 솔루션을 제공함으로써, 원활한 화상회의가 진행될 수 있도록 하는 이점을 가진다.In addition, according to one aspect of the present invention, it is possible to specify participant terminals located adjacent to each other based on the similarity of screen configuration and background configuration through video screen analysis of the participant terminals, and in particular, by analyzing the video signal and audio signal of the participant terminal Through the function of blocking or leaving the audio signal of the participant's terminal that generates howling or noise, we systematically identify problems that hinder the progress of video conferences and provide solutions that can solve them, so that video conferences can proceed smoothly. has the advantage of

도 1은 본 발명의 일 실시예에 따른 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템(100)의 구성을 도시한 도면이다.
도 2는 도 1에 도시된 개설 지원부(110)를 통해 회의방이 개설되는 과정을 순서대로 도시한 도면이다.
도 3은 도 1에 도시된 참여 지원부(120)를 통해 하나 이상의 참여자 단말이 회의방에 참여되는 과정을 순서대로 도시한 도면이다.
도 4는 도 1에 도시된 상태 저장부(130)에서 각 참여자 단말에 대한 최종 상태를 저장하는 과정을 순서대로 도시한 도면이다.
도 5는 도 1에 도시된 참여 지원부(120)를 통해 기존 참여자 단말이 회의방에 재 참여되는 과정을 순서대로 도시한 도면이다.
도 6은 도 1에 도시된 제1 특정부(140), 제2 특정부(150) 및 오류 제어부(160)를 통해 문제발생 참여자 단말을 특정 및 오류를 제어하는 과정을 순서대로 도시한 도면이다.1 is a diagram showing the configuration of a video conference service providing system 100 capable of selecting various participation modes according to an embodiment of the present invention.
FIG. 2 is a diagram sequentially illustrating a process of opening a conference room through the establishment support unit 110 shown in FIG. 1 .
FIG. 3 is a diagram sequentially illustrating a process in which one or more participant terminals participate in a conference room through the participation support unit 120 shown in FIG. 1 .
FIG. 4 is a diagram sequentially illustrating a process of storing a final state for each participant terminal in the state storage unit 130 shown in FIG. 1 .
FIG. 5 is a diagram sequentially illustrating a process in which an existing participant terminal rejoins a conference room through the participation support unit 120 shown in FIG. 1 .
FIG. 6 is a diagram sequentially illustrating a process of specifying a participant terminal having a problem and controlling an error through the first specific unit 140, the second specific unit 150, and the error control unit 160 shown in FIG. .

이하, 본 발명의 이해를 돕기 위하여 바람직한 실시예를 제시한다. 그러나 하기의 실시예는 본 발명을 보다 쉽게 이해하기 위하여 제공되는 것일 뿐, 실시예에 의해 본 발명의 내용이 한정되는 것은 아니다.Hereinafter, a preferred embodiment is presented to aid understanding of the present invention. However, the following examples are only provided to more easily understand the present invention, and the content of the present invention is not limited by the examples.

도 1은 본 발명의 일 실시예에 따른 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템(100)의 구성을 도시한 도면이다.1 is a diagram showing the configuration of a video conference service providing system 100 capable of selecting various participation modes according to an embodiment of the present invention.

도 1을 살펴보면, 본 발명의 일 실시예에 따른 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템(100)은 크게 개설 지원부(110), 참여 지원부(120), 상태 저장부(130), 제1 특정부(140), 제2 특정부(150) 및 오류 제어부(160)를 포함하여 구성될 수 있다.Referring to FIG. 1 , a video conference service providing system 100 capable of selecting various participation modes according to an embodiment of the present invention includes an establishment support unit 110, a participation support unit 120, a state storage unit 130, a first It may be configured to include a specific unit 140, a second specific unit 150 and an error control unit 160.

먼저, 개설 지원부(110)는 화상회의 혹은 화상채팅을 개설하기 원하는 개설자에 대한 개설자 단말을 통해, 다수의 참여 모드를 지원하는 회의방이 개설되도록 하며, 각각의 참여 모드 별로 서로 다른 링크 주소 또는 회의방 ID를 생성하는 역할을 한다. 이에 관해서는 도 2를 통해 보다 구체적으로 살펴보기로 한다.First, the establishment support unit 110 allows a conference room supporting a plurality of participation modes to be opened through an establisher terminal for an establisher who wants to establish a video conference or video chat, and provides different link addresses or conference rooms for each participation mode. It plays a role in generating an ID. This will be examined in more detail with reference to FIG. 2 .

도 2는 도 1에 도시된 개설 지원부(110)를 통해 회의방이 개설되는 과정을 순서대로 도시한 도면이다.FIG. 2 is a diagram sequentially illustrating a process of opening a conference room through the establishment support unit 110 shown in FIG. 1 .

도 2를 살펴보면, 본 발명에서 참여 모드라 함은, 회의방에 참여(혹은 입장)하는 참여자가 자신의 참여자 단말에 탑재된 카메라를 이용하여 자신의 얼굴을 촬영한 실시간 스트리밍 영상을 송출하여 소통할 수 있는 화상 참여 모드와, 자신의 얼굴을 촬영하지는 않지만 참여자 단말에 탑재된 마이크를 통해 자신의 목소리를 오디오 신호로써 입력하고 스피커를 통해 오디오 신호를 들으면서 소통할 수 있는 청중 참여 모드로 나뉠 수 있다.Referring to FIG. 2, in the present invention, the participation mode means that a participant participating in (or entering) a conference room communicates by sending a real-time streaming video of his or her face using a camera mounted on a participant terminal. It can be divided into a video participation mode in which participants can participate, and an audience participation mode in which participants do not photograph their face, but input their voice as an audio signal through a microphone mounted on the participant's terminal and communicate while listening to the audio signal through a speaker.

즉, 화상 참여 모드는 개설자와 참여자 간에 서로 얼굴을 보며 소통하는 방식이고, 청중 참여 모드는 참여자가 개설자의 얼굴을 볼 수 있지만 개설자는 참여자를 얼굴을 볼 수 없는 소통 방식을 의미한다. 이때, 개설자의 경우에도 참여자와 마찬가지로 회의방을 개설 후, 해당 회의방에서 자신의 참여 모드를 자유롭게 변경할 수 있다.That is, the video participation mode is a method of communicating face-to-face between the creator and the participant, and the audience participation mode is a communication method in which the participant can see the creator's face but the creator cannot see the participant's face. At this time, even in the case of the creator, after opening the conference room like the participant, he/she can freely change his participation mode in the conference room.

따라서, 개설 지원부(110)에서는 개설자의 개설자 단말을 통해 회의방이 개설되도록 하고(S201), 이때 개설되는 회의방의 참여 모드를 화상 참여 모드로 설정할 것인지, 청중 참여 모드로 설정할 것인지, 또는 화상 참여와 청중 참여 모두가 가능한 모드로 설정한 것인지를 개설자 단말을 통해 입력받게 된다(S202).Therefore, the establishment support unit 110 allows a conference room to be opened through the establisher's terminal (S201), and at this time, whether to set the participation mode of the conference room to be a video participation mode, an audience participation mode, or a video participation and an audience participation mode. Whether the mode is set to allow all participation is received through the establisher terminal (S202).

다음으로 개설 지원부(110)에서는 회의방에 대한 참여 모드 별로, 서로 다른 링크 주소 혹은 회의방 ID를 생성하여 각 참여 모드 별로 부여하게 된다(S203). 예를 들어, 개설자에 의해 특정 회의방이 개설되는 경우, 개설 지원부(110)에서는 화상 참여 모드에 대한 링크 주소를 'A'로 부여하게 되고, 청중 참여 모드에 대한 링크 주소를 'B'로 부여하게 된다. 이렇게 부여된 링크 주소는 추후 참여자가 어느 링크 주소를 선택하느냐에 따라, 참여자 단말 별 회의방의 참여 모드가 결정될 수 있다. 이때, 링크 주소와 마찬가지로, 개설 지원부(110)에서는 회의방 ID에 대해서도 화상 참여 모드 및 청중 참여 모드에 따라 서로 다른 회의방 ID를 생성하여 각 참여 모드 별로 부여하게 된다.Next, the establishment support unit 110 generates different link addresses or conference room IDs for each participation mode of the conference room and assigns them to each participation mode (S203). For example, when a specific conference room is opened by an establisher, the establishment support unit 110 assigns 'A' as the link address for the video participation mode and 'B' as the link address for the audience participation mode. do. The participation mode of the conference room for each participant terminal may be determined depending on which link address is selected by the participant later. At this time, similar to the link address, the establishment support unit 110 generates different conference room IDs according to the video participation mode and the audience participation mode for the conference room ID and assigns them to each participation mode.

다시 도 1로 돌아와서, 참여 지원부(120)는 개설 지원부(110)를 통해 생성된 각 참여 모드 별 링크 주소 또는 회의방 ID를 참여자 단말 각각에 제공하고, 참여자 단말을 통해 선택되는 링크 주소 또는 회의방 ID에 따라 각 참여자 단말의 참여 모드를 결정한 후 결정된 참여 모드 별로 참여자 단말이 회의방에 참여되도록 한다. 이에 관해서는 도 3을 통해 보다 구체적으로 살펴보기로 한다.Returning to FIG. 1 again, the participation support unit 120 provides the link address or conference room ID for each participation mode generated through the establishment support unit 110 to each participant terminal, and the link address or conference room selected through the participant terminal. After determining the participation mode of each participant terminal according to the ID, the participant terminal is allowed to participate in the conference room according to the determined participation mode. This will be examined in more detail with reference to FIG. 3 .

도 3은 도 1에 도시된 참여 지원부(120)를 통해 하나 이상의 참여자 단말이 회의방에 참여되는 과정을 순서대로 도시한 도면이다.FIG. 3 is a diagram sequentially illustrating a process in which one or more participant terminals participate in a conference room through the participation support unit 120 shown in FIG. 1 .

도 3을 살펴보면, 먼저 참여 지원부(120)에서는 개설 지원부(110)를 통해 생성된 각 참여 모드 별 링크 주소 또는 회의방 ID를 참여자 단말 각각에 제공함으로써 참여자 단말을 통한 회의방 참여가 이루어지도록 한다(S301). 참여자들은 자신의 참여자 단말을 통해 해당 링크 주소 또는 회의방 ID을 확인한 후(S302), 자신이 원하는 참여 방식에 따라 화상 참여 모드에 대한 링크 주소나 회의방 ID를 선택할 수도 있고, 또는 청중 참여 모드에 대한 링크 주소나 회의방 ID를 선택할 수도 있다. 해당 링크 주소가 선택되거나, 또는 해당 회의방을 검색할 수 있는 웹 상 검색 공간에 회의방 ID를 입력함으로써, 해당 참여자 단말은 회의방에 참여(접속)할 수 있게 된다(S303). 이때, 참여자 단말을 통해 선택되는 각 참여 모드는, 추후 회의방 내에 참여자 단말의 참여 모드 변경 요청을 통해 얼마든지 변경이 가능하다.Referring to FIG. 3, first, the participation support unit 120 provides the link address or conference room ID for each participation mode generated through the establishment support unit 110 to each participant terminal so that participation in the conference room is performed through the participant terminal ( S301). After checking the link address or conference room ID through their participant terminals (S302), the participants may select the link address or conference room ID for the video participation mode according to the participation method they want, or enter the audience participation mode. You can also select the link address for the meeting room or the meeting room ID. When the corresponding link address is selected or the conference room ID is entered in a search space on the web where the corresponding conference room can be searched, the corresponding participant terminal can participate in (connect to) the conference room (S303). At this time, each participation mode selected through the participant terminal can be changed as much as desired through a participation mode change request of the participant terminal in the conference room later.

다시 도 1로 돌아와서, 상태 저장부(130)는 회의방에 참여한 각 참여자 단말 별 식별 정보를 기반으로 참여자 단말에 대한 최종 상태를 저장하게 되는데, 이에 대해서는 도 4를 통해 보다 구체적으로 살펴보기로 한다.Returning to FIG. 1 again, the state storage unit 130 stores the final state of the participant terminal based on identification information for each participant terminal participating in the conference room, which will be examined in more detail with reference to FIG. 4. .

도 4는 도 1에 도시된 상태 저장부(130)에서 각 참여자 단말에 대한 최종 상태를 저장하는 과정을 순서대로 도시한 도면이다.FIG. 4 is a diagram sequentially illustrating a process of storing a final state for each participant terminal in the state storage unit 130 shown in FIG. 1 .

도 4를 살펴보면, 상태 저장부(130)는 회의방에 참여자 단말이 참여(접속)하는 경우(S401), 참여한 각 참여자 단말에 대한 고유한 식별 정보(예를 들어, 참여자 단말 별 ID 정보, IP 정보 또는 맥 어드레스(Mac address) 정보 등)를 확인하고(S402), 확인된 식별 정보를 토대로 각 참여자 단말에 대한 최종 상태를 파악 및 저장하게 된다(S403).Referring to FIG. 4 , when a participant terminal participates (accesses) in a conference room (S401), the state storage unit 130 provides unique identification information (eg, ID information for each participant terminal, IP address) for each participating participant terminal. information or Mac address information, etc.) is checked (S402), and the final state of each participant terminal is identified and stored based on the identified identification information (S403).

여기에서, 각 참여자 단말에 대한 최종 상태라 함은, 각 참여자 단말이 참여한 회의방에 대한 정보(예를 들어, 회의방 ID, 개설자 단말에 대한 ID), 각 참여자 단말이 선택한 링크 주소 혹은 회의방 ID에 따라 결정된 참여 모드 등을 모두 포괄하는 정보를 의미한다.Here, the final state for each participant terminal refers to information on the conference room in which each participant terminal participated (eg, conference room ID, ID for the establisher terminal), link address selected by each participant terminal, or conference room This means information that encompasses all participation modes, etc. determined according to the ID.

만약, 회의방에 참여한 특정 참여자 단말이 참여 모드 변경을 위하여 참여 지원부(120)에 참여 모드 변경을 요청할 경우, 앞서 살펴본 참여 지원부(120)에서는 해당 참여자 단말에 대한 참여 모드를 변경하게 되고, 상태 저장부(130)는 해당 참여자 단말에 대한 참여 모드 변경 여부를 확인한 후, 해당 참여자 단말의 변경된 참여 모드를 기 저장된 최종 상태에 갱신 및 반영 후 저장하게 된다(S404).If a specific participant terminal participating in the conference room requests the participation support unit 120 to change the participation mode to change the participation mode, the participation support unit 120 as described above changes the participation mode for the corresponding participant terminal and saves the state. The unit 130 checks whether or not the participation mode of the corresponding participant terminal has changed, and then updates and reflects the changed participation mode of the corresponding participant terminal to the pre-stored final state, and then stores the changed participation mode (S404).

따라서, 상태 저장부(130)에는 각 참여자 단말의 최종 상태가 항시 실시간으로 갱신 및 반영되어 저장됨에 따라, 예기치 못한 접속 오류나 기타 연결 오류에 의해 특정 참여자 단말이 회의장으로부터 퇴장되는 경우에도, 특정 참여자 단말에 대한 최종 상태는 상태 저장부(130)에 저장되어있기 때문에, 참여 지원부(120)에서는 이를 기반으로 참여자 단말의 재 접속 시에도 기존에 참여하였던 내역과 동일하게 참여할 수 있도록 한다. 이에 관해서는 도 5를 통해 보다 구체적으로 살펴보기로 한다.Therefore, as the final state of each participant terminal is always updated and reflected in real time and stored in the state storage unit 130, even when a specific participant terminal is exited from the conference room due to an unexpected connection error or other connection error, a specific participant terminal Since the final state for is stored in the state storage unit 130, the participation support unit 120 enables participation in the same way as the previous participation details even when the participant terminal reconnects based on this. This will be examined in more detail with reference to FIG. 5 .

도 5는 도 1에 도시된 참여 지원부(120)를 통해 기존 참여자 단말이 회의방에 재 참여되는 과정을 순서대로 도시한 도면이다.FIG. 5 is a diagram sequentially illustrating a process in which an existing participant terminal rejoins a conference room through the participation support unit 120 shown in FIG. 1 .

도 5를 살펴보면, 먼저 특정 회의방에서 예기치 못한 접속 오류나 기타 연결 오류에 의해 특정 참여자 단말이 회의방에서 퇴장되었거나, 혹은 참여자의 요청에 의해 참여자 단말이 회의방에서 퇴장된 상태에서(S501), 해당 참여자 단말이 기존에 참여하였던 회의방에 대한 재 참여를 위해 기 제공되었던 링크 주소를 재 선택하거나 또는 회의방 ID를 재 입력하는 경우(S502), 참여 지원부(120)는 재 참여를 요청하는 참여자 단말에 대하여 상태 저장부(130)에 해당 참여자 단말의 기 저장된 최종 상태 확인을 요청하게 된다(S503).Referring to FIG. 5, first, in a state in which a specific participant terminal is exited from the conference room due to an unexpected connection error or other connection error in a specific conference room, or a participant terminal is exited from the conference room at the request of the participant (S501), the corresponding When the participant terminal re-selects the previously provided link address or re-enters the conference room ID for re-participation in the conference room it has previously participated in (S502), the participation support unit 120 returns the participant terminal requesting re-participation. For the state storage unit 130, a confirmation of the pre-stored final state of the participant terminal is requested (S503).

참여 지원부(120)는 해당 참여자 단말이 앞서 퇴장하였던 회의방에 대한 회의방 ID, 참여자 단말의 참여 모드 등을 확인한 후 참여자 단말이 퇴장 전 상태와 동일한 상태로 회의방에 재 참여될 수 있도록 한다(S504). 만약, 기 저장된 최종 상태가 확인되지 않거나, 최종 상태를 로딩하는 과정에서 오류가 발생될 경우, 해당 참여자 단말에게 회의방 재 참여 불가 안내와 함께 새로운 회의방을 추천하거나 참여할 수 있는 방법에 대한 안내를 하게 된다(S505).The participation support unit 120 checks the conference room ID for the conference room from which the corresponding participant terminal has previously exited, the participation mode of the participant terminal, etc., and allows the participant terminal to rejoin the conference room in the same state as before leaving ( S504). If the pre-stored final state is not confirmed or an error occurs in the process of loading the final state, information on how to recommend or participate in a new conference room is sent to the participant's device along with a notice that the conference room cannot be re-participated. It is done (S505).

다시 도 1로 돌아와서, 본원발명에서는 회의방에 참석한 참여자 단말들에 의해 발생되는 오류에 대하여 시스템 차원에서 참여자 단말의 하드웨어를 제어하여 원활한 회의가 진행되도록 할 수 있는데, 이에 대해서는 도 6을 통해 보다 구체적으로 살펴보기로 한다.Returning to FIG. 1, in the present invention, it is possible to control the hardware of the participant terminals at the system level for errors generated by the participant terminals participating in the conference room so that the conference can proceed smoothly. Let's take a look in detail.

도 6은 도 1에 도시된 제1 특정부(140), 제2 특정부(150) 및 오류 제어부(160)를 통해 문제발생 참여자 단말을 특정 및 오류를 제어하는 과정을 순서대로 도시한 도면이다.FIG. 6 is a diagram sequentially illustrating a process of specifying a participant terminal having a problem and controlling an error through the first specific unit 140, the second specific unit 150, and the error control unit 160 shown in FIG. .

도 1과 도 6을 함께 살펴보면, 먼저 제1 특정부(140)는 회의방에 참여한 하나 이상의 참여자 단말 중에서, 하울링(howling) 또는 노이즈(noise)가 발생된 오디오 신호를 입력하는 하나 이상의 참여자 단말을 특정한다(S601).Looking at FIGS. 1 and 6 together, first, the first specific unit 140 selects one or more participant terminals that input an audio signal in which a howling or noise is generated from among one or more participant terminals participating in a conference room. It is specified (S601).

개설자 단말에 의해 개설된 회의방에는 개설자 단말에 의해 설정된 참여 인원에 따라 1명부터 최대 n명까지 동시 참여(접속)가 가능하기 때문에, 수많은 참여자 단말 각각의 마이크를 통해 오디오 신호가 개별적으로 입력될 수 있고, 동시에 수많은 참여자 단말 각각의 스피커를 통해 오디오 신호가 개별적으로 출력될 수도 있다.Since one to a maximum of n people can simultaneously participate (access) in the conference room opened by the establisher terminal according to the number of participants set by the establisher terminal, audio signals can be individually input through the microphones of each of the numerous participant terminals. At the same time, audio signals may be individually output through speakers of each of a number of participant terminals.

수많은 참여자 단말 각각의 마이크를 통해 오디오 신호가 동시다발적으로 입력되는 상황에서 하울링이나 노이즈가 발생할 경우 회의방에 참여한 참여자들 모두에게 피해가 갈 수 있기 때문에, 하울링 또는 노이즈 발생을 유발하는 참여자 단말을 시스템적으로 선제적으로 특정하는 것이다.If howling or noise occurs in a situation where audio signals are simultaneously input through the microphones of each terminal of numerous participants, damage can be done to all participants in the conference room. It is systematically preemptively specified.

이때, 참여자 단말을 통해 입력되는 오디오 신호는 각 참여자 단말 별 입력 수단의 종류에 따라 구분될 수 있는데, 이를 위하여 제1 특정부(140)는 회의방에 참여한 각 참여자 단말을 통해 입력되는 오디오 신호에 대한 입력 형태를 분석함으로써, 각 참여자 단말 별 오디오 신호의 입력 수단을 종류 별로 분류할 수 있다.At this time, the audio signals input through the participant terminals may be classified according to the type of input means for each participant terminal. By analyzing the input type for each participant, it is possible to classify the audio signal input means for each participant terminal by type.

예를 들어, A 참여자 단말을 이용하는 참여자는 자신의 유선 이어폰에 내장된 마이크를 통해 오디오 신호를 입력할 수도 있고, B 참여자 단말을 이용하는 참여자는 블루투스 마이크를 통해 오디오 신호를 입력할 수도 있고, C 참여자 단말을 이용하는 참여자는 자신의 참여자 단말의 스피커폰 기능을 통해 오디오 신호를 입력할 수도 있다.For example, a participant using participant A's terminal may input an audio signal through a microphone built into his/her wired earphone, a participant using participant B's terminal may input an audio signal through a Bluetooth microphone, and participant C may input an audio signal through a Bluetooth microphone. A participant using a terminal may input an audio signal through a speaker phone function of his/her participant terminal.

이렇게 각 참여자 단말 별로 오디오 신호를 입력하는 유형, 그에 따라 입력되는 오디오 신호의 입력 형태가 모두 다를 수 있기 때문에, 제1 특정부(140)에서는 이를 토대로 각 참여자 단말 별 오디오 신호 입력 수단을 종류를 분석하여 분류하게 된다.Since the type of audio signal input for each participant terminal and the input form of the audio signal input accordingly can all be different, the first specific unit 140 analyzes the type of audio signal input means for each participant terminal based on this. to be classified.

다음으로, 제2 특정부(150)에서는 제1 특정부(140)를 통해 특정된 하나 이상의 참여자 단말(즉, 하울링 또는 노이즈 발생을 유발한다고 판단된 하나 이상의 참여자 단말)에 대하여, 각 참여자 단말을 통해 입력되는 비디오 신호를 분석하고, 이때 비디오 신호의 화면 구성 및 배경 구성의 유사성을 토대로 서로 인접한 위치에 있는 참여자 단말을 특정하게 된다(S602). 이는, 하울링 또는 노이즈가 발생하는 참여자 단말이 서로 인접하게 위치하고 있다는 것으로 파악될 수 있으므로, 실제 인접하게 위치하고 있는지 여부를 파악하기 위하여 제2 특정부(150)는 각 참여자 단말을 통해 입력되는 비디오 신호를 분석하여 화면 구성, 배경 구성, 구도 등을 토대로 서로 인접하여 하울링을 발생시키는 참여자 단말들을 특정하게 된다.Next, the second specific unit 150 determines each participant terminal for one or more participant terminals specified through the first specific unit 140 (ie, one or more participant terminals determined to cause howling or noise). The input video signal is analyzed, and participant terminals located adjacent to each other are specified based on the similarity of the screen configuration and the background configuration of the video signal (S602). Since it can be determined that the howling or noise-producing participant terminals are located adjacent to each other, the second specific unit 150 monitors the video signal input through each participant terminal in order to determine whether they are actually located adjacent to each other. By analyzing, based on the screen configuration, background configuration, composition, etc., participant terminals that are adjacent to each other and generate howling are specified.

예를 들어, 현재 특정 회의방에 A 참여자 단말을 시작으로 G 참여자 단말까지 참여(접속)한 상태에서, B 참여자 단말, C 참여자 단말, G 참여자 단말로부터 입력되는 오디오 신호에 하울링 또는 노이즈가 발생되는 것으로 판단되는 경우(이는 제1 특정부(140)에서 판단하게 됨), 제2 특정부(150)는 해당 B 참여자 단말, C 참여자 단말 및 G 참여자 단말 각각으로부터 입력되는 비디오 신호를 분석하여, B 참여자 단말, C 참여자 단말 및 G 참여자 단말 중 서로 인접하게 위치되거나 혹은 동일하게 위치된 참여자 단말을 특정하게 된다.For example, in a state where participant terminal A and participant terminal G are currently participating (connected) to a specific conference room, howling or noise is generated in audio signals input from participant terminals B, C, and G. If it is determined (this is determined by the first specific unit 140), the second specific unit 150 analyzes the video signals input from the B participant terminal, C participant terminal, and G participant terminal, respectively, and Participant terminals located adjacent to each other or identically located among the participant terminals, C participant terminals, and G participant terminals are specified.

왜냐하면, 하울링(howling)의 경우 스피커 장치와 마이크로폰 장치가 서로 접근하여 인접한 위치에 배치될 경우 스피커 장치의 오디오 신호가 마이크로폰 장치에 입력되어 증폭된 후 다시 스피커 장치를 통해 출력되는 식으로 정궤환의 귀환 루프가 형성되면서 발진 상태가 일어나 발생될 수 있기 때문에, 제2 특정부(150)는 이를 근거로 동일하거나 유사한 화면 구성, 혹은 배경 구성을 가지는 참여자 단말들을 서로 인접하게 위치한 참여자 단말로 특정하게 된다.Because, in the case of howling, when the speaker device and the microphone device approach each other and are placed adjacent to each other, the audio signal of the speaker device is input to the microphone device, amplified, and then output again through the speaker device, so that the positive feedback returns. Since an oscillation state may occur while a loop is formed, the second specific unit 150 specifies participant terminals having the same or similar screen configuration or background configuration as participant terminals located adjacent to each other based on this.

이렇게 제2 특정부(150)를 통해 특정된 참여자 단말에 있어서, 오류 제어부(160)는 다른 참여자 단말로부터 출력되는 오디오 신호를 함께 입력하는 참여자 단말(문제발생 참여자 단말)을 파악한 후, 해당 문제발생 참여자 단말에 대한 오디오 입력을 제한하거나, 또는 문제발생 참여자 단말을 회의방으로부터 강제로 퇴장시키게 된다(S603).In this way, in the participant terminal specified through the second specific unit 150, the error control unit 160 identifies the participant terminal (participant terminal having a problem) that inputs the audio signal output from the other participant terminal together, and then the problem occurs. Audio input to the participant terminal is restricted, or the participant terminal having a problem is forcibly removed from the conference room (S603).

보다 구체적으로, 오류 제어부(160)는 예를 들어 A 참여자 단말, B 참여자 단말, C 참여자 단말 중에서 C 참여자 단말의 스피커를 통해 출력되는 소리가 B 참여자 단말의 마이크를 통해 함께 입력된다고 판단되는 경우, B 참여자 단말을 문제발생 참여자 단말로 특정하게 되고, 이렇게 특정된 문제발생 참여자 단말을 통해서는 오디오 신호가 입력되지 못하도록 제한하게 된다. 또는, 해당 문제발생 참여자 단말을 회의방에서 강제로 퇴장시킬 수도 있다.More specifically, the error control unit 160 determines that, for example, among A participant terminal, B participant terminal, and C participant terminal, the sound output through the speaker of C participant terminal is input together through the microphone of B participant terminal, Participant terminal B is specified as a participant terminal having a problem, and an audio signal is restricted from being input through the terminal of the participant having a problem. Alternatively, the participant terminal having the problem may be forcibly removed from the conference room.

더 나아가, 오류 제어부(160)는 문제발생 참여자 단말에 대해, 오디오 입력 제한 상태에 대한 안내 정보, 회의방으로부터 퇴장된 상태 혹은 이유에 대한 안내 정보, 또는 타 참여자 단말로부터 출력되는 오디오 신호가 함께 입력되는 문제를 해결할 수 있도록 하는 조치 등에 대한 안내 정보를 별도의 알림 신호로써 생성 후 문제발생 참여자 단말에 전송함으로써 알릴 수 있다(S604). 이러한 안내 정보를 문제발생 참여자 단말의 화면 상에서 팝업 형식으로 출력됨으로써 참여자가 인지할 수 있도록 한다.Furthermore, the error control unit 160 inputs guide information on the restricted audio input state, guide information on the state or reason for leaving the conference room, or audio signals output from other participant terminals to the participant terminal that has a problem. Information on measures to solve the problem may be generated as a separate notification signal and then transmitted to the terminal of the participant with the problem (S604). This guide information is displayed in a pop-up format on the screen of the participant's terminal having a problem, so that the participant can recognize it.

살펴본 바와 같이, 본원발명에 따르면 참여자 단말을 통해 화상 참여 모드, 청중 참여 모드 등 다양한 참여 모드의 선택과 변경이 자유로우며, 또한 참여자 단말의 비디오 신호 및 오디오 신호를 분석하여 하울링 또는 노이즈를 발생시키는 참여자 단말의 오디오 신호를 차단하거나 혹은 퇴장시키는 기능을 통해 화상회의 진행에 방해가 되는 문제점을 시스템적으로 파악하고 이에 대해 해결 가능한 솔루션을 제공할 수 있어, 원활한 화상회의 진행이 가능한 이점을 가지게 된다.As described above, according to the present invention, a participant who freely selects and changes various participation modes such as a video participation mode and an audience participation mode through a participant terminal and generates howling or noise by analyzing the video signal and audio signal of the participant terminal Through the function of blocking or exiting the audio signal of the terminal, it is possible to systematically identify problems that hinder the progress of video conferences and provide solutions that can solve them, thus having the advantage of enabling smooth video conferences.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to preferred embodiments of the present invention, those skilled in the art can variously modify and change the present invention without departing from the spirit and scope of the present invention described in the claims below. You will understand that you can.

100: 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템
110: 개설 지원부
120: 참여 지원부
130: 상태 저장부
140: 제1 특정부
150: 제2 특정부
160: 오류 제어부100: Video conferencing service providing system capable of selecting various participation modes
110: Opening support department
120: participation support department
130: state storage unit
140: first specific unit
150: second specific unit
160: error control

Claims (7)

다수의 참여 모드를 지원하는 회의방을 개설하며, 각각의 참여 모드 별로 서로 다른 링크 주소 또는 회의방 ID를 생성하는 개설 지원부;
각각의 참여 모드 별 링크 주소 또는 회의방 ID를 하나 이상의 참여자 단말에 각각 제공하며, 참여자 단말 별로 선택되는 링크 주소 또는 회의방 ID에 따라 각 참여자 단말의 참여 모드를 결정한 후, 결정된 참여 모드 별로 각 참여자 단말이 상기 회의방에 참여되도록 하는 참여 지원부; 및
상기 회의방에 참여한 각 참여자 단말 별 식별 정보를 기반으로 각 참여자 단말에 대한 최종 상태를 저장하는 상태 저장부;를 포함하며,
상기 참여 지원부는,
참여자 단말이 상기 회의방에서 퇴장 후 재 참여를 위해 기 제공된 링크 주소 또는 회의방 ID를 재 선택하는 경우, 해당 참여자 단말에 대해 상기 상태 저장부에 기 저장된 최종 상태를 확인한 후 해당 참여자 단말이 퇴장 전 참여 모드와 동일한 참여 모드로 상기 회의방에 재 참여되도록 하되,
상기 회의방에 참여한 하나 이상의 참여자 단말 중, 하울링(howling) 또는 노이즈(noise)가 발생된 오디오 신호를 입력하는 하나 이상의 참여자 단말을 특정하는 제1 특정부;
상기 제1 특정부를 통해 특정된 하나 이상의 참여자 단말을 통해 입력되는 비디오 신호를 분석한 후, 화면 구성 및 배경 구성의 유사성을 토대로 서로 인접하게 위치하는 참여자 단말을 특정하는 제2 특정부; 및
상기 제2 특정부를 통해 특정된 하나 이상의 참여자 단말 중에서, 타 참여자 단말로부터 출력되는 오디오 신호를 함께 입력하는 문제발생 참여자 단말을 파악한 후 상기 문제발생 참여자 단말에 대한 오디오 입력을 제한하거나, 또는 상기 문제발생 참여자 단말을 상기 회의방으로부터 퇴장시키는 오류 제어부;를 더 포함하는 것을 특징으로 하는, 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템.
Opening support unit for opening a conference room supporting multiple participation modes and generating different link addresses or conference room IDs for each participation mode;
The link address or conference room ID for each participation mode is provided to one or more participant terminals, and the participation mode of each participant terminal is determined according to the link address or conference room ID selected for each participant terminal. a participation support unit allowing a terminal to participate in the conference room; and
A state storage unit for storing a final state for each participant terminal based on identification information for each participant terminal participating in the conference room;
The participation support department,
When a participant terminal leaves the conference room and reselects the provided link address or conference room ID for re-participation, after checking the final state pre-stored in the state storage unit for the participant terminal, before the participant terminal leaves the conference room. To re-join the conference room in the same participation mode as the participation mode,
a first specific unit for specifying one or more participant terminals that input an audio signal in which a howling or noise is generated, among one or more participant terminals participating in the conference room;
a second specific unit for analyzing video signals input through one or more participant terminals specified through the first specific unit, and then specifying participant terminals located adjacent to each other based on similarity of screen configuration and background configuration; and
Among the one or more participant terminals specified through the second specific unit, a problem-occurring participant terminal that inputs audio signals output from other participant terminals together is identified, and then audio input to the problem-occurring participant terminal is restricted, or the problem occurs. Characterized in that it further includes, a video conference service providing system capable of selecting various participation modes; error control unit for exiting the participant terminal from the conference room.
 제1항에 있어서,
상기 각 참여자 단말 별 식별 정보는,
참여자 단말 별 ID 정보, IP 정보 및 맥 어드레스(Mac address) 정보 중 어느 하나 이상을 포함하는 것을 특징으로 하는, 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템.
According to claim 1,
The identification information for each participant terminal,
A video conference service providing system capable of selecting various participation modes, characterized in that it includes any one or more of ID information, IP information, and MAC address information for each participant terminal.
 제1항에 있어서,
상기 참여 지원부는,
특정 참여 모드로 상기 회의방에 참여한 참여자 단말로부터 참여 모드 변경 요청이 수신되는 경우 해당 참여자 단말의 참여 모드를 변경하게 되고,
상기 상태 저장부는 해당 참여자 단말에 대한 최종 상태를 갱신하여 저장하는 것을 특징으로 하는, 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템.
According to claim 1,
The participation support department,
When a participation mode change request is received from a participant terminal participating in the conference room in a specific participation mode, the participation mode of the corresponding participant terminal is changed;
The system for providing a video conference service in which various participation modes can be selected, characterized in that the state storage unit updates and stores the final state for the corresponding participant terminal.
 삭제delete 제1항에 있어서,
상기 오류 제어부는,
오디오 입력 제한 상태에 대한 안내 정보, 상기 회의방으로부터 퇴장된 상태에 대한 안내 정보 또는 타 참여자 단말로부터 출력되는 오디오 신호가 함께 입력되지 않도록 하는 조치에 대한 안내 정보를 상기 문제발생 참여자 단말에 전송하여 알리는 것을 특징으로 하는, 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템.
According to claim 1,
The error control unit,
Guidance information on the audio input restriction state, guide information on the state of leaving the conference room, or guide information on measures to prevent audio signals output from other participant terminals from being input together to the problem participant terminal. Characterized in that, a video conference service providing system capable of selecting various participation modes.
 제1항에 있어서,
상기 제1 특정부는,
상기 회의방에 참여한 하나 이상의 참여자 단말을 통해 입력되는 오디오 신호에 대한 입력 형태를 분석하여, 각 참여자 단말 별 오디오 신호의 입력 수단을 종류 별로 분류하는 것을 특징으로 하는, 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 시스템.
According to claim 1,
The first specific part,
Characterized in that the audio signal input means for each participant terminal is classified by type by analyzing the input form of the audio signal input through one or more participant terminals participating in the conference room, and video conferences in which various participation modes can be selected service delivery system.
 개설 지원부를 통해, 다수의 참여 모드를 지원하는 회의방을 개설하며 각각의 참여 모드 별로 서로 다른 링크 주소 또는 회의방 ID를 생성하는 단계;
참여 지원부를 통해, 각각의 참여 모드 별 링크 주소 또는 회의방 ID를 하나 이상의 참여자 단말에 각각 제공하며, 참여자 단말 별로 선택되는 링크 주소 또는 회의방 ID에 따라 각 참여자 단말의 참여 모드를 결정한 후, 결정된 참여 모드 별로 각 참여자 단말이 상기 회의방에 참여되도록 하는 단계;
상태 저장부를 통해, 상기 회의방에 참여한 각 참여자 단말 별 식별 정보를 기반으로 각 참여자 단말에 대한 최종 상태를 저장하는 단계;
제1 특정부를 통해, 상기 회의방에 참여한 하나 이상의 참여자 단말 중, 하울링(howling) 또는 노이즈(noise)가 발생된 오디오 신호를 입력하는 하나 이상의 참여자 단말을 특정하는 단계;
제2 특정부를 통해, 상기 하나 이상의 참여자 단말을 통해 입력되는 비디오 신호를 분석한 후, 화면 구성 및 배경 구성의 유사성을 토대로 서로 인접하게 위치하는 참여자 단말을 특정하는 단계; 및
오류 제어부를 통해, 상기 하나 이상의 참여자 단말 중에서, 타 참여자 단말로부터 출력되는 오디오 신호를 함께 입력하는 문제발생 참여자 단말을 파악한 후 상기 문제발생 참여자 단말에 대한 오디오 입력을 제한하거나, 또는 상기 문제발생 참여자 단말을 상기 회의방으로부터 퇴장시키는 단계;를 포함하며,
상기 각 참여자 단말이 상기 회의방에 참여되도록 하는 단계는,
참여자 단말이 상기 회의방에서 퇴장 후 재 참여를 위해 기 제공된 링크 주소 또는 회의방 ID를 재 선택하는 경우, 상기 참여 지원부에서 해당 참여자 단말에 대해 상기 상태 저장부에 기 저장된 최종 상태를 확인한 후 해당 참여자 단말이 퇴장 전 참여 모드와 동일한 참여 모드로 상기 회의방에 재 참여되도록 하는 단계;를 포함하는 것을 특징으로 하는, 다양한 참여 모드 선택이 가능한 화상회의 서비스 제공 방법.Opening a conference room supporting a plurality of participation modes through an opening support unit and generating a different link address or conference room ID for each participation mode;
Through the participation support unit, the link address or conference room ID for each participation mode is provided to one or more participant terminals, and the participation mode of each participant terminal is determined according to the link address or conference room ID selected for each participant terminal. allowing each participant terminal to participate in the conference room for each participation mode;
storing, through a state storage unit, a final state for each participant terminal based on identification information for each participant terminal participating in the conference room;
specifying, through a first specific unit, one or more participant terminals that input an audio signal in which a howling or noise is generated, among one or more participant terminals participating in the conference room;
After analyzing the video signal input through the one or more participant terminals through a second specific unit, specifying participant terminals located adjacent to each other based on similarity of screen configuration and background configuration; and
Through the error control unit, among the one or more participant terminals, after identifying a participant terminal with a problem that inputs an audio signal output from another participant terminal together, the audio input to the participant terminal with a problem is restricted, or the participant terminal with a problem Including; leaving the conference room;
The step of allowing each participant terminal to participate in the conference room,
When a participant terminal leaves the conference room and then reselects the previously provided link address or conference room ID for re-participation, the participation support unit checks the final state of the participant terminal pre-stored in the state storage unit, and then selects the corresponding participant terminal. Re-joining the conference room in the same participation mode as the participation mode before leaving the terminal; characterized in that it includes, a video conference service providing method in which various participation modes can be selected.
KR1020210028030A 2021-03-03 2021-03-03 System and method for providing a video conferencing service in which various participation modes can be selected KR102491792B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210028030A KR102491792B1 (en) 2021-03-03 2021-03-03 System and method for providing a video conferencing service in which various participation modes can be selected

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210028030A KR102491792B1 (en) 2021-03-03 2021-03-03 System and method for providing a video conferencing service in which various participation modes can be selected

Publications (2)

Publication Number Publication Date
KR20220124434A KR20220124434A (en) 2022-09-14
KR102491792B1 true KR102491792B1 (en) 2023-01-26

Family

ID=83279272

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210028030A KR102491792B1 (en) 2021-03-03 2021-03-03 System and method for providing a video conferencing service in which various participation modes can be selected

Country Status (1)

Country Link
KR (1) KR102491792B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102511535B1 (en) 2022-12-30 2023-03-17 주식회사 유비케이솔루션 video conferencing system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101668702B1 (en) 2010-07-13 2016-10-24 엘지전자 주식회사 Video conference device and method for providing a video conference service
KR102051078B1 (en) * 2018-04-30 2020-01-08 옥철식 Messenger program having private information protect function and messenger service system including the same
KR102638580B1 (en) * 2019-04-12 2024-02-21 라인플러스 주식회사 Method, system, and non-transitory computer readable record medium for providing multiple group call in one chat room

Also Published As

Publication number Publication date
KR20220124434A (en) 2022-09-14

Similar Documents

Publication Publication Date Title
US9661270B2 (en) Multiparty communications systems and methods that optimize communications based on mode and available bandwidth
US9782675B2 (en) Systems and methods for interfacing video games and user communications
KR101685466B1 (en) Method for extending participants of video conference service
US20050207357A1 (en) Multipoint conferencing system employing IP network and its configuration method
US9485596B2 (en) Utilizing a smartphone during a public address system session
US20170048284A1 (en) Non-transitory computer readable medium, information processing apparatus, and information processing system
EP2642720B1 (en) System, method and carrier medium for managing data transmission
JP2015216569A (en) Connection control system, communication terminal, communication system, program and connection control method
US11521636B1 (en) Method and apparatus for using a test audio pattern to generate an audio signal transform for use in performing acoustic echo cancellation
KR102491792B1 (en) System and method for providing a video conferencing service in which various participation modes can be selected
CN108933809B (en) Communication control method and apparatus, telepresence robot, and recording medium
EP2658215B1 (en) Apparatus, system, and method of managing data transmission, and carrier medium storing transmission management program
JP7456162B2 (en) Programs, communication methods, communication terminals and communication systems
KR20220124435A (en) System and method for managing participants in video conferencing service in small groups
JP6610076B2 (en) Information processing apparatus, information processing system, program, and recording medium
JP2010093479A (en) Conference system and conference terminal device
JP2017519379A (en) Object-based teleconferencing protocol
JP4768578B2 (en) Video conference system and control method in video conference system
JPH06175942A (en) Multimedia electronic conference device
JP2003101981A (en) Electronic cooperative work system and program for cooperative work system
EP2677688B1 (en) Apparatus, system, and method of managing data transmission, data transmission management program, and recording medium
JP7363421B2 (en) Programs, communication methods, communication terminals and communication systems
CN111756723B (en) Audio processing method, device and equipment applied to multi-party call
WO2023223585A1 (en) Conference management device, conference management method, and program
JP2020191567A (en) Communication terminal, communication system, communication method, and program

Legal Events

Date Code Title Description
N231 Notification of change of applicant
GRNT Written decision to grant