KR100936830B1 - Relay system of video conference - Google Patents

Relay system of video conference Download PDF

Info

Publication number
KR100936830B1
KR100936830B1 KR1020070084735A KR20070084735A KR100936830B1 KR 100936830 B1 KR100936830 B1 KR 100936830B1 KR 1020070084735 A KR1020070084735 A KR 1020070084735A KR 20070084735 A KR20070084735 A KR 20070084735A KR 100936830 B1 KR100936830 B1 KR 100936830B1
Authority
KR
South Korea
Prior art keywords
camera
microphone
frequency
microphones
information
Prior art date
Application number
KR1020070084735A
Other languages
Korean (ko)
Other versions
KR20090020191A (en
Inventor
이석인
Original Assignee
(주)조아영상기술
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)조아영상기술 filed Critical (주)조아영상기술
Priority to KR1020070084735A priority Critical patent/KR100936830B1/en
Publication of KR20090020191A publication Critical patent/KR20090020191A/en
Application granted granted Critical
Publication of KR100936830B1 publication Critical patent/KR100936830B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/155—Conference systems involving storage of or access to video conference sessions
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/27—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the analysis technique
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/08—Mouthpieces; Microphones; Attachments therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

화상 회의 중계 시스템이 제공된다. 본 발명의 일 실시예에 따른 화상 회의 중계 시스템은, 하나 이상의 카메라, 다수의 마이크, 다수의 마이크로부터 입력되는 음성 신호에 대한 주파수 분석 기능을 수행하는 주파수 분석기, 주파수 분석기에 의해 분석된 음성 주파수 정보를 저장 관리하기 위한 메모리부, 메모리부에 저장된 주파수 정보에 해당하는 음성 신호가 입력되는 경우 이와 대응되는 마이크의 사용자에 대한 촬영을 수행하도록 카메라에 대한 제어를 수행하는 카메라 제어기 및 카메라 제어기에 의해 제어되는 카메라에 의한 촬영 영상 데이터를 전송하기 위한 데이터 전송부를 포함한다.A video conferencing relay system is provided. In a video conferencing relay system according to an embodiment of the present invention, a frequency analyzer for performing a frequency analysis function for a voice signal input from one or more cameras, a plurality of microphones, and a plurality of microphones, and voice frequency information analyzed by a frequency analyzer Memory unit for storing and managing the data, and controlled by a camera controller and a camera controller for controlling the camera to perform recording of a user of a microphone corresponding to the voice signal corresponding to the frequency information stored in the memory unit. And a data transmitter for transmitting the captured image data by the camera.

여기서, 본 발명의 실시예에 따른 화상 회의 중계 시스템은, 다수의 마이크 사용자 각각에 대한 자막 정보를 저장하며, 주파수 분석기에 의해 분석된 주파수 정보에 대응되는 마이크 사용자에 대한 자막 정보를 데이터 전송부를 통해 자동 제공하는 자막 정보 제공부를 더 포함할 수 있다.Here, the video conferencing relay system according to the embodiment of the present invention stores caption information for each of a plurality of microphone users, and the caption information for the microphone user corresponding to the frequency information analyzed by the frequency analyzer through the data transmission unit. It may further include a caption information providing unit for automatically providing.

또한, 다수의 마이크 가운데 어느 마이크로부터 음성 신호가 입력되는지 여부를 판단하기 위한 음향력계를 더 포함할 수 있다.The apparatus may further include an acousticometer for determining whether a microphone is input from which microphone among the plurality of microphones.

단, 이 경우 카메라 제어기는 주파수 분석기 및 음향력계의 상호 연동에 의해 카메라에 대한 동작 제어를 수행하도록 구성되는 것이 좋다.In this case, however, the camera controller may be configured to perform operation control on the camera by interworking with the frequency analyzer and the acousticometer.

화상 회의, 의사 중계, 주파수 분석, 음향력계, 자동 자막 Video conferencing, pseudo-relay, frequency analysis, acousticometer, automatic subtitles

Description

화상 회의 중계 시스템{Relay system of video conference}Relay system of video conference

본 발명은 화상 회의 중계 시스템에 관한 것으로, 더욱 상세하게는, 마이크 사용자의 음성 주파수 정보 등을 이용한 채널 별 모니터링을 통해 카메라 자동 제어 및 자동 자막 처리를 가능하도록 하는 개량된 화상 회의 중계 시스템에 관한 것이다.The present invention relates to a videoconferencing relay system, and more particularly, to an improved videoconferencing relay system for enabling automatic camera control and automatic subtitle processing through channel-by-channel monitoring using microphone user's voice frequency information. .

컴퓨터를 이용한 정보 처리 기술 및 인터넷 등을 이용한 방송 통신 기술의 눈부신 향상으로 인해 원거리 사용자 사이의 실시간 커뮤니케이션 (communication)은 일상적인 생활이 되어가고 있으며, 이에 따라, 인터넷 등의 통신망을 이용한 화상 회의나 의사 중계 역시 주변에서 흔히 찾아볼 수 있는 광경이 되었다.Due to the remarkable improvement of information processing technology using computer and broadcasting communication technology using internet, real-time communication between remote users is becoming a daily life. Accordingly, video conferencing or doctor using communication network such as Internet Relay also became a sight that can be found around.

종래의 화상 회의나 의사 중계 시스템은 각각의 사용자에 대해 할당된 다수의 마이크 및 적어도 하나 이상의 카메라를 구비하며, 사용자가 마이크를 이용해 발언을 할 경우 카메라 엔지니어에 의해 조작되는 카메라에 의해 촬영된 해당 발언자에 대한 영상 데이터가 통신망을 통해 전송되는 구성을 갖게 된다.Conventional video conferencing or pseudo relay systems have multiple microphones and at least one or more cameras assigned for each user, the speaker being photographed by a camera manipulated by a camera engineer when the user speaks using the microphone. The video data for is transmitted through a communication network.

이때, 카메라 엔지니어는 통상 2~3대의 카메라를 동시에 조작하는 경우가 많으며, 이렇게 획득된 촬영 데이터는 편집을 통해 현재 발언자에 대한 간략한 신상 정보 자막 등을 함께 송출하게 된다.In this case, the camera engineer usually operates two or three cameras at the same time, and the photographed data thus obtained is edited and sent together with brief information about the current speaker.

이에 따라, 이와 같은 종래의 화상 회의 또는 의사 중계 시스템은 카메라 엔지니어의 조작 실수로 인한 촬영 오류 등의 문제점이 발생될 소지가 상존하며, 동시에 다수 발언자가 존재하는 등의 경우 실시간 영상 편집에 어려움이 있고, 이로 인한 자막 오류 등이 발생될 수도 있다는 문제점을 갖는다.Accordingly, such a conventional video conferencing or pseudo-relay system may have a problem such as a shooting error due to a mistake in operation of a camera engineer. As a result, a subtitle error may occur.

따라서, 실시간 촬영, 편집 및 중계가 이루어지는 화상 회의 또는 의사 중계 등의 처리 시스템에 있어, 촬영이나 자막 등의 편집 오류를 방지할 수 있도록 하기 위한 방안이 요구되고 있다.Therefore, in a processing system such as video conferencing or pseudo-relay, where real-time shooting, editing, and relaying are performed, a method for preventing editing errors such as shooting and subtitles is required.

본 발명이 이루고자 하는 기술적 과제는, 마이크 사용자의 음성 주파수 정보 등을 이용한 채널 별 모니터링을 통해 카메라 자동 제어 및 자동 자막 처리를 가능하도록 하는 개량된 화상 회의 중계 시스템을 제공하는 것이다.SUMMARY OF THE INVENTION The present invention has been made in an effort to provide an improved video conferencing relay system that enables automatic camera control and automatic subtitle processing through channel-by-channel monitoring using voice frequency information of a microphone user.

본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해되어질 수 있을 것이다.The objects of the present invention are not limited to the above-mentioned objects, and other objects which are not mentioned will be clearly understood by those skilled in the art from the following description.

상기 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 화상 회의 중계 시스템은, 하나 이상의 카메라, 다수의 마이크, 다수의 마이크로부터 입력되는 음성 신호에 대한 주파수 분석 기능을 수행하는 주파수 분석기, 주파수 분석기에 의해 분석된 음성 주파수 정보를 저장 관리하기 위한 메모리부, 메모리부에 저장된 주파수 정보에 해당하는 음성 신호가 입력되는 경우 이와 대응되는 마이크의 사용자에 대한 촬영을 수행하도록 카메라에 대한 제어를 수행하는 카메라 제어기 및 카메라 제어기에 의해 제어되는 카메라에 의한 촬영 영상 데이터를 전송하기 위한 데이터 전송부를 포함한다.In order to achieve the above object, the video conferencing relay system according to an embodiment of the present invention, a frequency analyzer for performing a frequency analysis function for a voice signal input from one or more cameras, multiple microphones, multiple microphones, frequency analyzer A memory unit for storing and managing voice frequency information analyzed by the camera; and a camera performing control of the camera to perform recording of a user of a microphone corresponding to a voice signal corresponding to the frequency information stored in the memory unit. And a data transmitter for transmitting the captured image data by the camera controlled by the controller and the camera controller.

여기서, 본 발명의 실시예에 따른 화상 회의 중계 시스템은, 다수의 마이크 사용자 각각에 대한 자막 정보를 저장하며, 주파수 분석기에 의해 분석된 주파수 정보에 대응되는 마이크 사용자에 대한 자막 정보를 데이터 전송부를 통해 자동 제공하는 자막 정보 제공부를 더 포함할 수 있다.Here, the video conferencing relay system according to the embodiment of the present invention stores caption information for each of a plurality of microphone users, and the caption information for the microphone user corresponding to the frequency information analyzed by the frequency analyzer through the data transmission unit. It may further include a caption information providing unit for automatically providing.

또한, 다수의 마이크 가운데 어느 마이크로부터 음성 신호가 입력되는지 여부를 판단하기 위한 음향력계를 더 포함할 수 있는데, 이 경우 카메라 제어기는 주파수 분석기 및 음향력계의 상호 연동에 의해 카메라에 대한 동작 제어를 수행하도록 구성되는 것이 좋을 것이다.The apparatus may further include an acousticometer for determining whether a voice signal is input from a microphone among the plurality of microphones, in which case the camera controller performs an operation control on the camera by interworking with the frequency analyzer and the acousticometer. It would be good to be configured to do so.

이때, 주파수 분석기 또는 음향력계에 의해 음성 신호가 입력되는 마이크가 다수개로 판단되는 경우 카메라 제어기는 각각의 마이크에 해당하는 카메라에 의한 촬영 영상을 분할 화면 또는 순차적 화면으로 제공하도록 카메라에 대한 제어를 수행할 수 있으며, 나아가, 음성 신호가 입력되는 마이크가 존재하지 않는 것으로 판단되는 경우에는 전체 화면 영상을 제공하는 등의 방식으로 카메라가 동작하도록 제어를 수행하는 것도 가능할 것이다.At this time, when it is determined that a plurality of microphones to which the voice signal is input by the frequency analyzer or the acousticometer, the camera controller controls the camera to provide the divided images or the sequential screens of the cameras corresponding to the respective microphones. In addition, when it is determined that the microphone to which the voice signal is input does not exist, it may be possible to control the camera to operate in a manner of providing a full screen image.

상기한 바와 같은 본 발명의 화상 회의 중계 시스템에 따르면, 다수의 마이크에 대한 각각의 사용자 정보를, 해당 마이크를 통해 입력되는 음성 신호의 주파수 분석을 통해 식별할 수 있게 되었다.According to the video conferencing relay system of the present invention as described above, each user information for a plurality of microphones can be identified through frequency analysis of a voice signal input through the microphones.

이에 따라, 화상 회의의 중계에 있어 카메라의 자동 제어를 통해 현재 발언 중인 사용자에 대한 실시간 촬영이 가능할 수 있게 되었으며, 아울러 각각의 마이 크 사용자에 대한 간략한 소개 자막 등의 정보 역시 자동으로 송출 가능할 수 있게 됨으로써, 촬영 오류나 자막 오류 등의 발생을 방지할 수 있게 되었다는 장점이 있다.Accordingly, real-time shooting of users who are currently speaking can be enabled through automatic control of the camera in video conference relaying, and information such as a brief introduction caption for each microphone user can be automatically transmitted. By doing so, there is an advantage that it is possible to prevent the occurrence of photographing errors, caption errors, and the like.

또한, 화상 회의 중계 시스템을 관리하고 실시간 카메라 제어 및 자막 정보 제공 등의 업무를 수행하기 위한 엔지니어의 수를 획기적으로 감축시킬 수 있게 됨으로써, 이로 인해, 화상 회의 중계 시스템을 운용하는 데에 소요되는 유지 비용 절감 등의 효과를 제공할 수 있게 되었다는 추가적인 장점도 있다.In addition, it is possible to dramatically reduce the number of engineers who manage the videoconferencing relay system and perform tasks such as real-time camera control and subtitle information, thereby maintaining the maintenance required for operating the videoconferencing relay system. There is an additional advantage of being able to provide cost savings.

상기 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 화상 회의 중계 시스템은, 하나 이상의 카메라, 다수의 마이크, 다수의 마이크로부터 입력되는 음성 신호에 대한 주파수 분석 기능을 수행하는 주파수 분석기, 주파수 분석기에 의해 분석된 음성 주파수 정보를 저장 관리하기 위한 메모리부, 메모리부에 저장된 주파수 정보에 해당하는 음성 신호가 입력되는 경우 이와 대응되는 마이크의 사용자에 대한 촬영을 수행하도록 카메라에 대한 제어를 수행하는 카메라 제어기 및 카메라 제어기에 의해 제어되는 카메라에 의한 촬영 영상 데이터를 전송하기 위한 데이터 전송부를 포함한다.In order to achieve the above object, the video conferencing relay system according to an embodiment of the present invention, a frequency analyzer for performing a frequency analysis function for a voice signal input from one or more cameras, multiple microphones, multiple microphones, frequency analyzer A memory unit for storing and managing voice frequency information analyzed by the camera; and a camera performing control of the camera to perform recording of a user of a microphone corresponding to a voice signal corresponding to the frequency information stored in the memory unit. And a data transmitter for transmitting the captured image data by the camera controlled by the controller and the camera controller.

여기서, 본 발명의 실시예에 따른 화상 회의 중계 시스템은, 다수의 마이크 사용자 각각에 대한 자막 정보를 저장하며, 주파수 분석기에 의해 분석된 주파수 정보에 대응되는 마이크 사용자에 대한 자막 정보를 데이터 전송부를 통해 자동 제 공하는 자막 정보 제공부를 더 포함할 수 있다.Here, the video conferencing relay system according to the embodiment of the present invention stores caption information for each of a plurality of microphone users, and the caption information for the microphone user corresponding to the frequency information analyzed by the frequency analyzer through the data transmission unit. It may further include a caption information providing unit for automatically providing.

또한, 다수의 마이크 가운데 어느 마이크로부터 음성 신호가 입력되는지 여부를 판단하기 위한 음향력계를 더 포함할 수 있는데, 이 경우 카메라 제어기는 주파수 분석기 및 음향력계의 상호 연동에 의해 카메라에 대한 동작 제어를 수행하도록 구성되는 것이 좋을 것이다.The apparatus may further include an acousticometer for determining whether a voice signal is input from a microphone among the plurality of microphones, in which case the camera controller performs an operation control on the camera by interworking with the frequency analyzer and the acousticometer. It would be good to be configured to do so.

이때, 주파수 분석기 또는 음향력계에 의해 음성 신호가 입력되는 마이크가 다수개로 판단되는 경우 카메라 제어기는 각각의 마이크에 해당하는 카메라에 의한 촬영 영상을 분할 화면 또는 순차적 화면으로 제공하도록 카메라에 대한 제어를 수행할 수 있으며, 나아가, 음성 신호가 입력되는 마이크가 존재하지 않는 것으로 판단되는 경우에는 전체 화면 영상을 제공하는 등의 방식으로 카메라가 동작하도록 제어를 수행하는 것도 가능할 것이다.At this time, when it is determined that a plurality of microphones to which the voice signal is input by the frequency analyzer or the acousticometer, the camera controller controls the camera to provide the divided images or the sequential screens of the cameras corresponding to the respective microphones. In addition, when it is determined that the microphone to which the voice signal is input does not exist, it may be possible to control the camera to operate in a manner of providing a full screen image.

기타 실시예들의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Specific details of other embodiments are included in the detailed description and the drawings.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있을 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것으로, 본 발명은 청구항의 범주에 의해 정의될 뿐이 다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다. Advantages and features of the present invention and methods for achieving them will be apparent with reference to the embodiments described below in detail with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be embodied in various forms, and the present embodiments are merely provided to make the disclosure of the present invention complete and the general knowledge in the art to which the present invention belongs. It is provided to fully inform the person having the scope of the invention, the invention is only defined by the scope of the claims. Like reference numerals refer to like elements throughout.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 화상 회의 중계 시스템의 구성을 개략적으로 나타낸 설명도이다.1 is an explanatory diagram schematically showing a configuration of a video conference relay system according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 실시예에 따른 화상 회의 중계 시스템은 다수의 마이크(110), 주파수 분석기(120), 메모리(130), 카메라 제어기(140) 및 하나 이상의 카메라(150) 등을 포함하여 구성됨을 알 수 있다.Referring to FIG. 1, a video conferencing relay system according to an exemplary embodiment of the present invention may include a plurality of microphones 110, a frequency analyzer 120, a memory 130, a camera controller 140, and one or more cameras 150. It can be seen that it is configured to include.

마이크(110)는 사회자 및 회의 참여자 등의 사용자 각각에게 1대씩 할당되는 것이 바람직하며, 이때 각각의 마이크(110)는 고유의 식별기호(id)를 갖거나, 또는 각각의 마이크(110)에 따라 할당된 고유의 채널을 통해 음성신호가 입력되도록 하는 등의 구성을 갖는 것이 좋다.One microphone 110 is preferably assigned to each user such as a moderator and a conference participant, and each microphone 110 has a unique identifier (id), or according to each microphone 110. It is preferable to have a configuration such that a voice signal is input through an assigned unique channel.

주파수 분석기(120)는 각각의 마이크(110)로부터 입력되는 음성 신호에 대한 주파수 분석 기능을 수행한다. 인간의 음성은 통상 200 내지 3000㎐ 정도의 주파수 대역을 갖는데, 성별이나 연령에 따른 편차 이외에도 개개인마다의 음성 주파수가 조금씩 다르게 나타나는 것으로 알려져 있다.The frequency analyzer 120 performs a frequency analysis function on the voice signal input from each microphone 110. Human voices generally have a frequency band of about 200 to 3000 kHz, and it is known that voice frequencies vary slightly from individual to individuals, in addition to gender and age.

따라서, 본 발명의 실시예에 따른 화상 회의 중계 시스템은 주파수 분석기(120)를 통해 사용자들 마다의 고유한 음성 신호 주파수를 파악한 후 해당 정보를 마이크(110)의 식별기호 정보 또는 채널 정보 등과 함께 메모리(130)에 저장함 으로써, 최초 1~2회의 발언 과정에서 주파수 정보의 파악이 완료된 이후에는 입력되는 음성신호의 주파수 정보만으로 어느 마이크를 사용하는 어느 사용인지에 대한 자동 식별이 가능할 수 있게 된다.Accordingly, the video conferencing relay system according to an exemplary embodiment of the present invention identifies a unique voice signal frequency for each user through the frequency analyzer 120 and stores the corresponding information along with identification information or channel information of the microphone 110. By storing the information in 130, after the grasp of the frequency information is completed in the first one or two remarks, automatic identification of which microphone using which microphone can be made using only frequency information of the input voice signal.

그리고, 이와 같이 자동 식별된 사용자 정보에 따라 카메라 제어기(140)가 카메라(150)의 촬영 동작을 자동 제어하도록 함으로써, 별도의 엔지니어에 의한 조작이 없더라도 현재 발언중인 사용자 영상의 자동 촬영 및 전송 등이 가능할 수 있다는 장점을 갖는다.In addition, the camera controller 140 automatically controls the photographing operation of the camera 150 according to the user information automatically identified as described above. Has the advantage that it may be possible.

여기서, 본 발명의 실시예에 의한 화상 회의 중계 시스템은 다수의 마이크 사용자 각각에 대한 자막 정보를 저장하고 있어 주파수 분석기(120)에 의해 분석된 주파수 정보에 대응되는 마이크 사용자에 대한 자막 정보를 자동 제공할 수 있도록 하기 위한 자막 정보 제공부(도시되지 않음)를 더 포함할 수 있다.Here, the video conferencing relay system according to an embodiment of the present invention stores caption information for each of a plurality of microphone users, thereby automatically providing caption information for microphone users corresponding to the frequency information analyzed by the frequency analyzer 120. It may further include a caption information providing unit (not shown) to enable.

다시 말해, 자막 정보 제공부는 회의 참여자 및 사회자 등의 사용자에 대한 간략한 신상 정보와 같은 자막 정보를 기 저장하고 있으며, 주파수 분석기(120)에 의해 현재 발언자 식별이 이루어질 경우 해당 사용자에 대한 자막 정보를 자동으로 제공하는 기능을 수행하게 되는 것이다.In other words, the subtitle information providing unit pre-stores subtitle information such as brief personal information about the user such as a conference participant and a moderator. When the present speaker identification is made by the frequency analyzer 120, the subtitle information providing information is automatically stored. It will perform the functions provided by.

또한, 도 1에 도시되지는 않았지만, 본 발명의 실시예에 따른 화상 회의 중계 시스템은 마이크(110)에 음성 신호의 입력이 이루어지고 있는지 여부의 판단을 위한 음향력계를 더 포함할 수 있다.In addition, although not shown in FIG. 1, the videoconferencing relay system according to the embodiment of the present invention may further include an acousticometer for determining whether an audio signal is input to the microphone 110.

즉, 마이크(110)로부터 입력되는 음성 신호의 음향력이 일정 데시벨(㏈)을 초과하는 경우 해당 식별기호를 갖는 마이크(110)로부터 발언이 이루어지고 있는 것으로 판단함으로써, 이 정보를 이용하여 카메라 제어기(140)를 통한 카메라(150)의 동작을 제어하는 것이 가능하다.That is, when the sound power of the voice signal input from the microphone 110 exceeds a certain decibel, it is determined that the speech is made from the microphone 110 having the corresponding identification symbol, and the camera controller is used by using this information. It is possible to control the operation of the camera 150 through 140.

그리고, 이와 같이 음향력계가 추가로 구비되는 경우, 카메라 제어기(140)가 주파수 분석기(120) 및 음향력계의 상호 연동에 의해 카메라(150)에 대한 동작 제어를 수행하도록 구성될 수 있음은 당연하다.In addition, when the acousticometer is further provided in this manner, it is natural that the camera controller 140 may be configured to perform operation control on the camera 150 by interworking with the frequency analyzer 120 and the acousticometer. .

하지만, 이러한 음향력계를 통한 식별 정보는 기침, 재채기 등과 같은 비(非) 음성 신호나 주변 잡음 등에 대한 사용자 음성 신호와의 구별이 불가능할 수 있기 때문에, 음향력계는 상기 주파수 분석기(120)에 대한 보완적인 기능을 수행하도록 구비되는 것이 바람직할 것이다. However, since the identification information through the acousticometer may be indistinguishable from the non-voice signal such as coughing, sneezing, or the user's voice signal regarding ambient noise, the acousticometer is supplemented to the frequency analyzer 120. It would be desirable to be provided to perform a functional function.

단, 필터 장치의 적용이나 프로그래밍 등의 방법을 통해 일정 음향력(㏈) 이하의 음성신호에 대한 적절한 필터링 등이 수행될 수 있을 경우, 상기 음향력계는 주파수 분석기(120)의 대체 구성요소로써 적용이 가능할 수 있으며, 따라서 이때에는 주파수 분석기(120)나 음향력계에 대한 선택적 적용이 가능할 수 있음은 당연하다.However, when appropriate filtering of a voice signal below a certain acoustic power can be performed through application of a filter device or programming, the acousticometer is applied as an alternative component of the frequency analyzer 120. This may be possible, so it is natural that the selective application of the frequency analyzer 120 or the acousticometer may be possible at this time.

이때, 본 발명의 실시예에 따른 화상 회의 중계 시스템에 구비되는 카메라 제어기(140)는, 주파수 분석기(120) 또는 음향력계에 의해 음성 신호가 입력되는 마이크(110)가 다수개로 판단되는 경우, 각각의 마이크(110)에 해당하는 카메 라(150)에 의한 촬영 영상을 분할 화면 또는 순차적 화면으로 제공하도록 카메라(150)에 대한 제어를 수행할 수 있도록 구성되는 것이 좋다.At this time, the camera controller 140 provided in the video conferencing relay system according to an embodiment of the present invention, when it is determined that a plurality of microphones 110 to which a voice signal is input by the frequency analyzer 120 or an acoustic system, respectively, The camera 150 may be configured to perform a control on the camera 150 to provide a split screen or a sequential screen of the captured image by the camera 150 corresponding to the microphone 110.

아울러, 주파수 분석기(120) 또는 음향력계를 통한 분석 결과 음성 신호가 입력되는 마이크(110)가 존재하지 않는 것으로 판단되는 경우에는, 전체 화면 영상이나 사회자 영상 또는 관련 영상 자료 등을 제공하도록 카메라(150)의 동작을 제어할 수도 있을 것이다.In addition, when it is determined that the microphone 110 to which the audio signal is input does not exist as a result of analysis through the frequency analyzer 120 or the acousticometer, the camera 150 to provide a full screen image, a moderator image, or related image data. You can also control the operation of).

여기서, 도 1에는 도시되지 않았지만, 본 발명의 실시예에 따른 화상 회의 중계 시스템이 카메라 제어기(140)에 의해 제어되는 카메라(140)에 의한 촬영 영상을 편집하기 위한 영상 편집 수단이나, 이러한 영상 편집 수단 등에 의해 편집된 영상 데이터를 전송하기 위한 데이터 전송부 등을 추가로 구비할 수 있음은 당업자에 있어 자명할 것이다.Although not shown in FIG. 1, the video conferencing relay system according to the embodiment of the present invention may be image editing means for editing a captured image by the camera 140 controlled by the camera controller 140, or such image editing. It will be apparent to those skilled in the art that a data transmission unit or the like for transmitting the edited video data by means may be further provided.

지금까지 설명된 본 발명의 실시예에 따른 화상 회의 중계 시스템에 따르면, 사용자의 음성 신호에 대한 주파수 분석을 통한 자동 촬영 및 자동 자막 정보 제공 등이 가능할 수 있게 됨으로써, 촬영 오류 또는 자막 오류 등의 발생 없이 실시간 화상 회의 중계를 수행할 수 있게 된다는 등의 장점을 제공할 수 있다.According to the video conferencing relay system according to an embodiment of the present invention described above, it is possible to provide automatic shooting and automatic subtitle information through frequency analysis of a user's voice signal, thereby generating a shooting error or a subtitle error. It can provide advantages such as being able to perform real-time video conferencing relaying without.

이상 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수 적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해되어야만 한다.Although embodiments of the present invention have been described above with reference to the accompanying drawings, those skilled in the art to which the present invention pertains may implement the present invention in other specific forms without changing the technical spirit or essential features thereof. You will understand that. Therefore, the embodiments described above are to be understood in all respects as illustrative and not restrictive.

도 1은 본 발명의 일 실시예에 따른 화상 회의 중계 시스템의 구성을 개략적으로 나타낸 설명도이다.1 is an explanatory diagram schematically showing a configuration of a video conference relay system according to an embodiment of the present invention.

<도면의 주요 부분에 관한 부호의 설명><Explanation of symbols on main parts of the drawings>

110: 마이크 120: 주파수 분석기110: microphone 120: frequency analyzer

130: 메모리 140: 카메라 제어기130: memory 140: camera controller

150: 카메라150: camera

Claims (8)

하나 이상의 카메라;One or more cameras; 다수의 마이크;Multiple microphones; 상기 다수의 마이크로부터 입력되는 음성 신호에 대한 주파수 분석 기능을 수행하는 주파수 분석기;A frequency analyzer for performing a frequency analysis function on voice signals input from the plurality of microphones; 상기 주파수 분석기에 의해 분석된 음성 주파수 정보를 저장 관리하기 위한 메모리부; A memory unit for storing and managing voice frequency information analyzed by the frequency analyzer; 상기 메모리부에 저장된 주파수 정보에 해당하는 음성 신호가 입력되는 경우 이와 대응되는 마이크의 사용자에 대한 촬영을 수행하도록 상기 카메라에 대한 제어를 수행하는 카메라 제어기;A camera controller configured to control the camera to photograph a user of a microphone corresponding to a voice signal corresponding to frequency information stored in the memory unit; 상기 카메라 제어기에 의해 제어되는 카메라에 의한 촬영 영상 데이터를 전송하기 위한 데이터 전송부; 및A data transmitter for transmitting captured image data by the camera controlled by the camera controller; And 상기 다수의 마이크 사용자 각각에 대한 자막 정보를 저장하며, 상기 주파수 분석기에 의해 분석된 주파수 정보에 대응되는 마이크 사용자에 대한 자막 정보를 상기 데이터 전송부를 통해 자동 제공하는 자막 정보 제공부를 포함하는 화상 회의 중계 시스템.A video conferencing relay unit which stores subtitle information for each of the plurality of microphone users and automatically provides subtitle information for the microphone user corresponding to the frequency information analyzed by the frequency analyzer through the data transmission unit. system. 삭제delete 제 1 항에 있어서,The method of claim 1, 상기 다수의 마이크 가운데 어느 마이크로부터 음성 신호가 입력되는지 여부를 판단하기 위한 음향력계를 더 포함하며,A sound system for determining whether the voice signal is input from which of the plurality of microphones further, 상기 카메라 제어기는 상기 주파수 분석기 및 상기 음향력계의 상호 연동에 의해 상기 카메라에 대한 동작 제어를 수행하는 것을 특징으로 하는 화상 회의 중계 시스템.And the camera controller performs operation control on the camera by interworking of the frequency analyzer and the acousticometer. 제 3 항에 있어서,The method of claim 3, wherein 상기 다수의 마이크는 각각 고유의 식별기호(id) 또는 지정된 신호 채널을 갖도록 구성되고,The plurality of microphones are each configured to have a unique identifier (id) or a designated signal channel, 이 경우, 상기 메모리부는 상기 음성 주파수 정보를 상기 마이크의 식별기호 정보 또는 지정 채널 정보에 대응되도록 저장 관리하는 것을 특징으로 하는 화상 회의 중계 시스템.In this case, the memory unit stores and manages the voice frequency information so as to correspond to the identification code information or the designated channel information of the microphone. 제 3 항에 있어서,The method of claim 3, wherein 상기 주파수 분석기 또는 상기 음향력계에 의해 음성 신호가 입력되는 마이 크가 다수개로 판단되는 경우 상기 카메라 제어기는 각각의 마이크에 해당하는 카메라에 의한 촬영 영상을 분할 화면으로 제공하도록 상기 카메라에 대한 제어를 수행하는 것을 특징으로 하는 화상 회의 중계 시스템.When it is determined that the number of microphones to which a voice signal is input by the frequency analyzer or the acousticometer is performed, the camera controller performs control on the camera to provide a divided image of a camera corresponding to each microphone to a split screen. Video conferencing relay system, characterized in that. 제 3 항에 있어서,The method of claim 3, wherein 상기 주파수 분석기 또는 상기 음향력계에 의해 음성 신호가 입력되는 마이크가 다수개로 판단되는 경우 상기 카메라 제어기는 각각의 마이크에 해당하는 카메라에 의한 촬영 영상을 순차적으로 제공하도록 상기 카메라에 대한 제어를 수행하는 것을 특징으로 하는 화상 회의 중계 시스템.When it is determined that a plurality of microphones to which a voice signal is input by the frequency analyzer or the acousticometer is used, the camera controller performs control of the camera to sequentially provide a photographed image by a camera corresponding to each microphone. Video conferencing relay system. 제 3 항에 있어서,The method of claim 3, wherein 상기 주파수 분석기 또는 상기 음향력계에 의해 음성 신호가 입력되는 마이크가 존재하지 않는 것으로 판단되는 경우 상기 카메라 제어기는 전체 화면 영상을 제공하도록 카메라에 대한 제어를 수행하는 것을 특징으로 하는 화상 회의 중계 시스템.And if it is determined that there is no microphone to which a voice signal is input by the frequency analyzer or the acousticometer, the camera controller controls the camera to provide a full screen image. 삭제delete
KR1020070084735A 2007-08-23 2007-08-23 Relay system of video conference KR100936830B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070084735A KR100936830B1 (en) 2007-08-23 2007-08-23 Relay system of video conference

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070084735A KR100936830B1 (en) 2007-08-23 2007-08-23 Relay system of video conference

Publications (2)

Publication Number Publication Date
KR20090020191A KR20090020191A (en) 2009-02-26
KR100936830B1 true KR100936830B1 (en) 2010-01-14

Family

ID=40687689

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070084735A KR100936830B1 (en) 2007-08-23 2007-08-23 Relay system of video conference

Country Status (1)

Country Link
KR (1) KR100936830B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101132653B1 (en) * 2011-09-09 2012-04-03 (주) 대호아이앤티 Nameplate and monitoring system for conference and method thereof
KR101132745B1 (en) 2011-10-26 2012-04-06 (주)씨어스테크놀로지 Conference microphone system connected via ethernet

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000043318A (en) * 1998-12-28 2000-07-15 전주범 Screen dividing method of a video conference system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000043318A (en) * 1998-12-28 2000-07-15 전주범 Screen dividing method of a video conference system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101132653B1 (en) * 2011-09-09 2012-04-03 (주) 대호아이앤티 Nameplate and monitoring system for conference and method thereof
KR101132745B1 (en) 2011-10-26 2012-04-06 (주)씨어스테크놀로지 Conference microphone system connected via ethernet

Also Published As

Publication number Publication date
KR20090020191A (en) 2009-02-26

Similar Documents

Publication Publication Date Title
US10848889B2 (en) Intelligent audio rendering for video recording
EP2146340A1 (en) A system and method for controlling an image collecting device to carry out a target location
CN101313483B (en) Configuration of echo cancellation
CN102474424B (en) Systems and methods for switching between computer and presenter audio transmission during conference call
JP6179834B1 (en) Video conferencing equipment
EP3611897B1 (en) Method, apparatus, and system for presenting communication information in video communication
CN110691204B (en) Audio and video processing method and device, electronic equipment and storage medium
KR100608591B1 (en) Method and apparatus for generating multimedia meeting reports
CN111212032B (en) Audio processing method and device based on video network, electronic equipment and storage medium
KR100936830B1 (en) Relay system of video conference
JP2017034312A (en) Communication device, communication system, and program
CN109802968B (en) Conference speaking system
CN109714316B (en) Audio mixing processing method of video network and video network system
JP2000023130A (en) Video conference system
JP2000341659A (en) Remote presentation system, processor and recording medium
JP5340880B2 (en) Output control device for remote conversation system, method thereof, and computer-executable program
JP2019176375A (en) Moving image output apparatus, moving image output method, and moving image output program
CN115359796A (en) Digital human voice broadcasting method, device, equipment and storage medium
CN116472705A (en) Conference content display method, conference system and conference equipment
JP2000333150A (en) Video conference system
JP2003060792A (en) Device for recording and reproducing a plurality of voices
CN107272469A (en) A kind of intelligence system on video conference
JPWO2006121123A1 (en) Image switching system
JPH0591508A (en) Method of displaying speaker in television conference system
JP4768578B2 (en) Video conference system and control method in video conference system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130131

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20131231

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150106

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160211

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20170106

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20180108

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20191231

Year of fee payment: 11