KR19990060724A

KR19990060724A - Video conferencing system

Info

Publication number: KR19990060724A
Application number: KR1019970080967A
Authority: KR
Inventors: 김재헌
Original assignee: 전주범; 대우전자 주식회사
Priority date: 1997-12-31
Filing date: 1997-12-31
Publication date: 1999-07-26

Abstract

본 발명은 자동으로 화자를 선택하여 주기 위한 화상 회의 시스템에 관한 것으로, 마이크 및 외부 회선으로 부터 입력되는 각 화자의 음성 신호의 패턴을 인식하여 하나 또는 복수의 화자를 검출하는 음성 인식 수단, 상기 음성 인식 수단에서 검출된 복수의 화자 중 우선 순위를 결정하는 우선 순위 결정 수단, 상기 우선 순위 결정 수단에서 결정된 우선 순위 화자에 따라 입력되는 각 화자의 음성 신호 및 카메라와 외부 회선으로 부터 입력되는 영상 신호 중에서 하나를 선택하여 출력하는 제어 수단, 및 상기 제어 수단에서 선택된 화자의 음성 신호와 영상 신호를 출력 및 디스플레이하는 출력 수단을 포함하여 구성된다.The present invention relates to a video conferencing system for automatically selecting a speaker, voice recognition means for detecting one or more speakers by recognizing a pattern of a voice signal of each speaker input from a microphone and an external line, the voice Priority determining means for determining the priority among the plurality of speakers detected by the recognition means, among voice signals of each speaker input according to the priority speaker determined by the priority determining means, and video signals input from the camera and the external line. Control means for selecting and outputting one, and output means for outputting and displaying the audio signal and the video signal of the speaker selected by the control means.

본 발명은 별도로 설정된 의장 없이 대화자의 우선 순위에 따라 화자가 결정하여 자동으로 해당 화자의 음성 및 화상을 전송할 수 있도록 하는 효과가 있다.The present invention has the effect of allowing the speaker to automatically transmit the voice and image of the speaker according to the priority of the talker without a separate design.

Description

VIDEO CONFERENCE SYSTEM

본 발명은 화상 회의 시스템에 관한 것으로, 특히 자동으로 화자를 선택하여 주기 위한 화상 회의 시스템에 관한 것이다.The present invention relates to a video conference system, and more particularly, to a video conference system for automatically selecting a speaker.

일반적으로 화상 회의 시스템은 다양한 장소에 있는 각각의 대화자가 화면을 통해 상대방을 보면서 회의를 진행하는 것이다.In general, a video conferencing system is for each talker in various places to conduct a meeting while viewing the other party through the screen.

즉, 일반적인 화상 회의 시스템은 도 1 에 도시한 바와 같이 다수의 대화자(A, B, C, D)가 각각 다른 장소에 위치하고 발언권이 주어진 화자의 음성 및 영상이 다른 대화자의 모니터에 디스플레이되면서 음성이 출력된다.That is, in a general video conferencing system, as shown in FIG. 1, a plurality of talkers (A, B, C, D) are located in different places and voices and videos of a talker who are given a voice are displayed on a monitor of another talker. Is output.

이때, 종래의 화상 회의 시스템에서는 다수의 대화자 중에서 하나의 대화자가 의장이 되어 화자를 선택하여 발언권을 주어야 한다.At this time, in a conventional video conference system, one talker among a plurality of talkers should be the chairman to select a talker and give the right to speak.

예를들어 의장이 대화자(A)인 경우 의장(A)이 화자(B)에게 발언권을 주면 화자(B)와 연결된 통신 라인(a, d, e)만이 연결되고 나머지 통신 라인(b, c, f)은 연결되지 않게 되어 화자(B)와 각 대화자(A, C, D) 만이 연결되므로써, 각 대화자(A, C, D)는 화자(B)의 음성 및 영상을 수신하여 보고 듣게 된다.For example, if the chairman is the talker (A), when the chairman (A) gives the talker (B) a voice, only the communication lines (a, d, e) connected to the talker (B) are connected and the remaining communication lines (b, c, f) is not connected so that only the speaker B and each talker (A, C, D) is connected, each talker (A, C, D) receives and sees and hears the voice and video of the talker (B).

다음으로 의장(A)이 발언권을 화자(C)에게 주면 화자(C)와 연결된 통신 라인(c, d, f)만이 연결되고 나머지 통신 라인(a, b, e)은 연결되지 않게 되어 화자(C)와 각 대화자(A, B, D) 만이 연결되므로써, 각 대화자(A, B, D)는 화자(C)의 음성 및 영상을 수신하여 보고 듣게 된다.Next, when the chairman A gives the talker C, only the communication lines c, d and f connected to the speaker C are connected and the remaining communication lines a, b and e are not connected. By only connecting C) and each talker (A, B, D), each talker (A, B, D) receives and sees and hears the voice and video of the talker (C).

이와 같이 의장은 화자를 결정하여 해당하는 통신 라인만이 연결되도록 한다.In this way, the chairman determines the speaker so that only the corresponding communication line is connected.

즉, 종래의 화상 회의 시스템은 각 대화자가 발언권을 얻기 위해 의장에게 별도의 신호를 출력해야 하고 의장이 화자를 결정하기 위해 모든 대화자의 상태를 일일이 점검해야 한다. 따라서 종래의 화상 회의 시스템은 의장이 일일이 수동으로 화자를 결정해야 하므로 회의 진행이 번거로운 문제점이 있었다.In other words, the conventional video conferencing system has to output a separate signal to the chairman for each talker to speak and the chairman has to check the status of every talker in order to determine the talker. Therefore, the conventional video conferencing system has a problem that the meeting proceeding is cumbersome because the chairman must manually determine the speaker.

상기 문제점을 개선하기 위한 본 발명은 각 대화자에게 우선 순위를 두고 음성 인식을 통해 화자를 자동으로 선택하기 위한 화상 회의 시스템을 제공함에 그 목적이 있다.An object of the present invention is to provide a video conferencing system for automatically selecting a speaker through voice recognition with priority for each talker.

상기 목적을 달성하기 위해 본 발명은 마이크 및 외부 회선으로 부터 입력되는 각 화자의 음성 신호의 패턴을 인식하여 하나 또는 복수의 화자를 검출하는 음성 인식 수단, 상기 음성 인식 수단에서 검출된 복수의 화자 중 우선 순위를 결정하는 우선 순위 결정 수단, 상기 우선 순위 결정 수단에서 결정된 우선 순위 화자에 따라 입력되는 각 화자의 음성 신호 및 카메라와 외부 회선으로 부터 입력되는 영상 신호 중에서 하나를 선택하여 출력하는 제어 수단, 및 상기 제어 수단에서 선택된 화자의 음성 신호와 영상 신호를 출력 및 디스플레이하는 출력 수단을 포함하여 구성됨을 특징으로 하는 화상 회의 시스템을 제공한다.In order to achieve the above object, the present invention provides a voice recognition means for detecting one or more speakers by recognizing a pattern of a voice signal of each speaker input from a microphone and an external line, among a plurality of speakers detected by the voice recognition means. Priority determining means for determining the priority, Control means for selecting and outputting one of the voice signal of each speaker input according to the priority speaker determined in the priority determining means and a video signal input from the camera and the external line, And output means for outputting and displaying the audio signal and the video signal of the speaker selected by the control means.

도 1 은 일반적인 화상 회의 시스템을 설명하기 위한 구조도1 is a structural diagram for explaining a general video conferencing system

도 2 는 본 발명에 의한 화상 회의 시스템의 구성도2 is a block diagram of a video conference system according to the present invention;

* 도면의 주요 부분에 대한 부호의 설명 *Explanation of symbols on the main parts of the drawings

100 : 음성 인식부 101, 102, 103, 104 : 음성 패턴 인식기100: speech recognition unit 101, 102, 103, 104: speech pattern recognizer

110 : 우선 순위 결정부 120 : 우선 순위 저장부110: priority determining unit 120: priority storage unit

130 : 제어부 140 : 출력부130 control unit 140 output unit

150: 영상 처리부 160 : 카메라150: image processing unit 160: camera

이하 첨부한 도면을 참조하여 본 발명의 실시예를 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

본 발명에 의한 화상 회의 시스템은 음성 인식부(100), 우선 순위 결정부(110), 제어부(130), 출력부(140), 영상 처리부(150), 및 카메라(160)로 구성된다.The video conferencing system according to the present invention includes a voice recognition unit 100, a priority determining unit 110, a control unit 130, an output unit 140, an image processing unit 150, and a camera 160.

상기 음성 인식부(100)는 마이크(10) 및 외부 회선으로 부터 입력되는 각 화자의 음성 신호의 패턴을 인식하여 하나 또는 복수의 화자를 검출하는 것으로, 마이크 및 다수(n)의 외부 회선으로 부터 입력되는 다수의 화자의 음성 신호의 패턴을 기준 패턴과 비교하여 해당 화자가 발언을 하고 있는지의 여부를 판단하는 다수(n+1)의 음성 패턴 인식기(101, 102, 103, 104)로 이루어진다.The voice recognition unit 100 detects one or more speakers by recognizing a pattern of a voice signal of each speaker input from the microphone 10 and the external line, and from the microphone and the plurality of external lines. A plurality of (n + 1) speech pattern recognizers 101, 102, 103, and 104 are used to determine whether or not the speaker is speaking by comparing the patterns of the voice signals of the plurality of speakers to be compared with the reference pattern.

우선 순위 결정부(110)는 우선 순위에 해당하는 각 패턴이 저장된 우선 순위 저장부(120)를 이용하여 상기 음성 인식부(100)에서 검출된 복수의 화자 중 우선 순위를 결정한다.The priority determiner 110 determines a priority among a plurality of speakers detected by the speech recognition unit 100 using the priority storage unit 120 in which each pattern corresponding to the priority is stored.

상기 제어부(130)는 상기 우선 순위 결정부(110)에서 결정된 우선 순위 화자에 따라 입력되는 각 화자의 음성 신호 및 카메라와 외부 회선으로 부터 입력되는 영상 신호 중에서 하나를 선택하여 출력한다.The controller 130 selects and outputs one of a voice signal of each speaker input according to the priority speaker determined by the priority determiner 110 and a video signal input from a camera and an external line.

상기 출력부(140)는 상기 제어부(130)에서 선택된 화자의 음성 신호와 영상 신호를 출력 및 디스플레이하는 것으로, 모니터와 스피커로 이루어진다.The output unit 140 outputs and displays an audio signal and an image signal of the speaker selected by the controller 130, and includes a monitor and a speaker.

상기 영상 처리부(150)는 자기측 카메라(160)로 부터 출력되는 영상 신호와 외부 회선으로 부터 출력되는 영상 신호 중에서 상기 제어부(130)에서 선택된 화자의 영상 신호를 디스플레이할 수 있도록 처리하여 상기 출력부(140)로 출력한다.The image processor 150 processes the display unit to display an image signal of the speaker selected by the controller 130 among the image signal output from the own camera 160 and the image signal output from the external line. Output to 140.

이와 같이 구성된 본 발명에 의한 화상 회의 시스템의 동작을 설명한다.The operation of the video conference system according to the present invention configured as described above will be described.

먼저, 상기 각 음성 패턴 인식기(101, 102, 103, 104)에서는 마이크(10)로 부터 출력되는 자기측의 음성 신호와 외부 회선으로 부터 출력되는 각 대화자의 음성 신호를 입력으로 각 대화자 음성의 기준 패턴을 검출하여 저장한다.First, the voice pattern recognizers 101, 102, 103, and 104 each use the voice signal of the speaker side output from the microphone 10 and the voice signal of each speaker output from the external line. Detect and save the pattern.

그리고 사용자는 우선 순위 설정 신호를 이용하여 각 화자 중에서 우선 순위를 결정하고 우선 순위 저장부(120)에 저장한다.The user determines a priority among the speakers using the priority setting signal and stores the priority in the priority storage unit 120.

이와 같이 기준 패턴과 우선 순위를 결정하여 저장한후에는 화상 회의를 시작하는데, 이를 도 1 을 참조하여 설명한다.After determining and storing the reference pattern and the priority as described above, the video conference is started, which will be described with reference to FIG. 1.

상기 기준 패턴과 우선 순위는 각 화자의 시스템(A, B, C, D)에 동일하게 저장된다.The reference pattern and priority are equally stored in the system A, B, C, D of each speaker.

예를 들어 우선 순위가 대화자(A, B, C, D)의 순서로 결정되어 저장된 경우도 2의 시스템을 대화자(A)의 시스템이라 하고 동작을 설명한다.For example, when the priorities are determined and stored in the order of the talkers A, B, C, and D, the system of FIG. 2 is called the talker A's system and the operation will be described.

대화자(A, B, C, D) 중에서 화자(A)가 말을 하면 상기 음성 패턴 인식기(101)에서 이를 기준 패턴과 비교하여 화자(A)의 발언을 판단하게 된다. 화자(A)가 발언하면 상기 우선 순위 결정부(110)에서는 다른 화자(B, C, D)가 발언하지 않고 있으므로 상기 화자(A)에 해당하는 제어 신호를 상기 제어부(130)로 출력하게 된다.When the speaker A speaks among the speakers A, B, C, and D, the speech pattern recognizer 101 compares the speech pattern with the reference pattern to determine the speaker A's speech. When the speaker A speaks, the priority determiner 110 does not speak other speakers B, C, and D, and thus outputs a control signal corresponding to the speaker A to the controller 130. .

상기 제어부(130)에서는 마이크(10)로 부터 출력되는 음성 신호를 다른 대화자(B, C, D) 시스템으로 출력하고 상기 영상 처리부(150)에서는 카메라(160)로 부터 출력되는 영상 신호를 다른 대화자(B, C, D)로 출력하게 된다.The controller 130 outputs a voice signal output from the microphone 10 to another talker (B, C, D) system, and the image processor 150 outputs a video signal output from the camera 160 to another talker. The output will be (B, C, D).

다른 대화자(B, C, D) 시스템에서는 상기 화자(A)로 부터 출력되는 음성 및 영상 신호를 수신하여 스피커로 출력하고 모니터에 디스플레이하게 된다.In another system (B, C, D), the audio and video signals output from the speaker A are received, output to a speaker, and displayed on a monitor.

다음으로, 대화자(A, B, C, D) 중에서 화자(B)가 말을 하면 상기 음성 패턴 인식기(102)에서 이를 기준 패턴과 비교하여 화자(B)의 발언을 판단하게 된다. 화자(B)가 발언하면 상기 우선 순위 결정부(110)에서는 다른 화자(A, C, D)가 발언하지 않고 있으므로 상기 화자(B)에 해당하는 제어 신호를 상기 제어부(130)로 출력하게 된다.Next, when the speaker B speaks among the dialogers A, B, C, and D, the speech pattern recognizer 102 compares the speech pattern with the reference pattern to determine the speech of the speaker B. FIG. When the speaker B speaks, the priority determiner 110 does not speak other speakers A, C, and D, and thus outputs a control signal corresponding to the speaker B to the controller 130. .

상기 화자(A)의 제어부(130)에서는 상기 제어 신호에 따라 다수의 외부 회선 중에서 외부 회선(B)으로 부터 입력되는 음성 신호를 선택하여 출력부(140)를 통해 출력하고, 영상 처리부(150)로 입력되는 다수의 외부 회선의 영상 신호 중에서 외부 회선(B)을 통해 입력되는 영상 신호를 선택하여 출력부(140)를 통해 디스플레이한다.The controller 130 of the speaker A selects an audio signal input from an external line B from a plurality of external lines according to the control signal, and outputs the audio signal through the output unit 140, and the image processor 150. A video signal input through an external line B is selected from the video signals of a plurality of external lines input to the display, and displayed through the output unit 140.

다른 대화자 시스템(C, D)에서는 위와 같은 방법으로 대화자(B) 시스템으로 부터 출력되는 음성 및 영상 신호를 외부 회선으로 부터 수신하여 출력부를 통해 출력 및 디스플레이하게 된다.In another speaker system (C, D), the voice and video signals output from the speaker (B) system are received from an external line and output and displayed through an output unit.

또한, 대화자(A, B, C, D) 중에서 화자(B, C)가 말을 하면 상기 음성 패턴 인식기(102)에서 이를 기준 패턴과 비교하여 화자(B, C)의 발언을 판단하게 된다. 화자(B, C)가 발언하면 상기 우선 순위 결정부(110)에서는 이둘 화자(B, C) 중에서 우선 순위에 해당하는 우선 순위 화자(B)를 결정하여 상기 우선 순위 화자(B)에 해당하는 제어 신호를 상기 제어부(130)로 출력하게 된다.In addition, when the speaker B, C speaks among the talkers A, B, C, and D, the speech pattern recognizer 102 compares it with a reference pattern to determine the speech of the speakers B and C. FIG. When the speakers B and C speak, the priority determining unit 110 determines the priority speaker B corresponding to the priority among the two speakers B and C to correspond to the priority speaker B. The control signal is output to the controller 130.

이와 같은 방법으로 대화자(B, C, D)가 동시에 발언을 하는 경우에도 우선 순위를 결정하여 제어부(130)에서 해당하는 화자의 신호를 선택하여 출력할 수 있도록 하므로, 자동으로 우선 순위에 따라 화자를 선택하여 줄 수 있다.In this way, even when the talkers B, C, and D speak at the same time, the priority is determined and the control unit 130 selects and outputs a signal of the corresponding speaker. Can be selected.

이상에서 설명한 바와 같이 본 발명은 별도로 설정된 의장 없이 대화자의 우선 순위에 따라 화자가 결정하여 자동으로 해당 화자의 음성 및 화상을 전송할 수 있도록 하는 효과가 있다.As described above, the present invention has an effect of automatically determining the speaker according to the priority of the talker and automatically transmitting the speaker's voice and image without a separate design.

Claims

Voice recognition means (100) for detecting one or more speakers by recognizing a pattern of a voice signal of each speaker input from a microphone and an external line;

Priority determining means (110) for determining a priority among a plurality of speakers detected by the speech recognition means (100);

Control means (130) for selecting and outputting one of a voice signal of each speaker input according to the priority speaker determined by the priority determining means (110) and a video signal input from a camera and an external line; And

And output means (140) for outputting and displaying the audio signal and the video signal of the speaker selected by the control means (130).

The method of claim 1, wherein the speech recognition means 100

A plurality of voice pattern recognizers (n + 1) which determine whether the speaker is speaking by comparing the patterns of voice signals of a plurality of speakers input from a microphone and a plurality of external lines with a reference pattern ( 101, 102, 103, 104, characterized in that the video conferencing system.