KR20190064730A - 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템 - Google Patents

Abstract

본 발명은 통역시스템 및 청취자의 단말기와 통신을 수행하도록 하는 통신부; 청취자의 단말기가 통신부에 의한 통신을 통해서 동시통역 서비스를 제공받는데 필요한 인증을 받도록 하는 단말기인증부; 상기 통역시스템에 연사의 음성을 제공하여 미리 정한 언어로 통역한 음성이나 텍스트를 통신을 통해서 제공받아 상기 단말기인증부에 의해 인증된 상기 청취자의 단말기로 전송하도록 하는 통역내용중계부; 상기 통역시스템으로부터 통역한 내용을 상기 통역내용중계부에 의해 제공시, 언어별로 채널을 달리하여 제공하도록 다수의 채널을 생성하도록 하고, 상기 청취자의 단말기가 상기 다수의 채널 중 어느 하나의 채널을 선택하여 해당하는 언어의 통역을 듣거나 보도록 하는 채널관리부; 및 상기 청취자의 단말기와 관련된 정보 및 동작에 필요한 정보를 저장하는 데이터베이스부;를 포함하도록 한 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템에 관한 것이다.
본 발명에 따르면, 연사의 음성을 통역사에 의존하지 않고, 통역서버나 통역엔진 등과 같은 통역시스템을 이용하여 필요한 언어의 음성이나 텍스트로 원활하게 통역되도록 함으로써, 국제회의, 세미나, 포럼 등의 각종 회의나 학술대회, 수행통역, 여행가이드, 학교어학실, 야외단체행사, 서비스업, 비즈니스 등을 다국적으로 원활하면서도 경제적으로 추진할 수 있다.

Description

자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템{Simultaneous interpretation based interactive conference system using automatic interpretation system}

본 발명은 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템에 관한 것으로서, 보다 상세하게는 연사의 음성을 통역사에 의존하지 않고 필요한 언어의 음성이나 텍스트로 원활하게 통역되도록 함으로써, 국제회의, 세미나, 포럼 등의 각종 회의나 학술대회, 수행통역, 여행가이드, 학교어학실, 야외단체행사, 서비스업, 비즈니스 등을 다국적으로 원활하면서도 경제적으로 추진할 수 있도록 하는 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템에 관한 것이다.

일반적으로, 국제회의, 세미나, 포럼 등의 각종 회의나 학술대회, 수행통역, 여행가이드, 학교어학실, 야외단체행사, 서비스업, 비즈니스 등을 다국적으로 원활히 추진하는데 가장 큰 어려움 중 하나는 언어이다. 오랜 기간 외국어를 공부했다고 해서, 외국어로 발표하는 것은 쉬운 일이 아니므로, 모국어로 발표하고, 이를 통역사가 동시에 통역해 준다면, 훨씬 부담감이 줄어들 것이고, 질문에 대해 쉽게 답변이 가능하며, 나아가 비즈니스 측면에서 좋은 결과도 이끌어 낼 수 있다.

그러나, 동시통역사를 필요한 시기에 구하기 어렵고, 해당 장소에 동행해야 하며, 그것도 국외라면 상당한 비용이 소요된다. 따라서 이용자가 언제 어디서든지 동시통역 서비스를 제공받을 수 있는 이용자와 동시통역사간 실시간 동시통역 연계 기술이 필요하다.

종래 스마트 동시 통역과 관련된 기술로는 한국등록특허 제10-2017-0062681호의 "Wi-fi 기반의 스마트 동시통역시스템"이 제시된 바 있는데, 이는 통역사로부터 동시통역음성을 입력받아 디지털데이터로 변환하는 입력부와, 상기 입력부에 의하여 변환된 디지털데이터를 스트리밍데이터로 변환하여 AP장치부로 송신하는 서버부와, 상기 서버부로부터 전달된 스트리밍데이터를 무선 신호의 형태로 전송하는 AP장치부와, 상기 AP장치부로부터 송신된 동시통역음성 등의 정보를 수신하는 모바일기기부를 포함하고, 상기 서버부는, 상기 입력부에서 변환된 디지털데이터를 수신하여 스트리밍데이터로 변환하는 디지털신호수신모듈과, 상기 디지털신호수신모듈에 의하여 변환된 스트리밍데이터를 상기 AP장치부로 송신하는 스트리밍데이터송신모듈과, 상기 스트리밍데이터송신모듈에서 송신하는 방식을 선택하도록 하는 송신방식선택모듈을 포함하며, 상기 스트리밍데이터송신모듈은 유니캐스트 방식으로 스트리밍데이터를 송신하는 유니캐스트방식송신모듈과, 멀티캐스트 방식으로 스트리밍데이터를 송신하는 멀티캐스스방식송신모듈을 포함하고, 상기 송신방식선택모듈은 상기 유니캐스트방식송신모듈과 멀티캐스트방식송신모듈 중 어느 하나를 선택하여, 상황에 따른 송신방식의 설정이 가능하도록 한다.

그러나, 이와 같은 종래 기술은 다음과 같은 문제점을 가지고 있었다.

첫째, 종래 기술은 통역사를 반드시 필요로 함으로써, 통역사 이용에 대한 비용 증가와 통역사 이용에 대한 설비 및 장소에 대한 제한을 가짐으로써, 편의성 및 경제성을 크게 해치게 되는 문제점을 가지고 있었다.

둘째, 종래 기술은 여러 외국어로의 동시통역을 수행하는데 어려움이 따르는 문제점을 가지고 있었다.

셋째, 종래 기술은 동시통역 외에 소통을 원활하게 하는데 한계를 가지고, 이벤트적으로 사용하지 못하는 문제점을 가지고 있었다.

상기한 바와 같은 종래 기술의 문제점을 해결하기 위하여, 본 발명은 연사의 음성을 통역사에 의존하지 않고 필요한 언어의 음성이나 텍스트로 원활하게 통역되도록 함으로써, 국제회의, 세미나, 포럼 등의 각종 회의나 학술대회, 수행통역, 여행가이드, 학교어학실, 야외단체행사, 서비스업, 비즈니스 등을 다국적으로 원활하면서도 경제적으로 추진할 수 있도록 하고, 동시통역의 편의성을 향상시키며, 여러 외국어로의 동시통역을 원활하게 수행하도록 하고, 동시통역 외에도 상호간에 소통을 원활하게 하며, 이벤트적으로도 사용할 수 있도록 하는데 목적이 있다.

본 발명의 다른 목적들은 이하의 실시례에 대한 설명을 통해 쉽게 이해될 수 있을 것이다.

상기한 바와 같은 목적을 달성하기 위해, 본 발명의 일측면에 따르면, 통역시스템 및 청취자의 단말기와 통신을 수행하도록 하는 통신부; 청취자의 단말기가 통신부에 의한 통신을 통해서 동시통역 서비스를 제공받는데 필요한 인증을 받도록 하는 단말기인증부; 상기 통역시스템에 연사의 음성을 제공하여 미리 정한 언어로 통역한 음성이나 텍스트를 통신을 통해서 제공받아 상기 단말기인증부에 의해 인증된 상기 청취자의 단말기로 전송하도록 하는 통역내용중계부; 상기 통역시스템으로부터 통역한 내용을 상기 통역내용중계부에 의해 제공시, 언어별로 채널을 달리하여 제공하도록 다수의 채널을 생성하도록 하고, 상기 청취자의 단말기가 상기 다수의 채널 중 어느 하나의 채널을 선택하여 해당하는 언어의 통역을 듣거나 보도록 하는 채널관리부; 및 상기 청취자의 단말기와 관련된 정보 및 동작에 필요한 정보를 저장하는 데이터베이스부;를 포함하는, 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템이 제공된다.

상기 청취자의 단말기에서 오디오의 재생을 위하여, 상기 통역내용중계부를 통해서 오디오파일을 스트리밍 제공하는 미디어파일스트리밍부를 더 포함할 수 있다.

운영자의 단말기를 통해 업로딩되는 파일을 상기 청취자의 단말기에 제공하는 파일전송부;를 더 포함하고, 상기 통역내용중계부는, 상기 청취자의 단말기가 운영자의 단말기에 대하여 텍스트를 서로 주고 받도록 하고, 상기 청취자의 단말기 및 상기 운영자의 단말기로부터 제공되는 음성을 상기 통역시스템에 제공하여 동시통역되어 상기 청취자의 단말기 및 상기 운영자의 단말기에 제공되도록 할 수 있다.

상기 단말기인증부를 통해 인증되어 접속되는 상기 청취자의 단말기 리스트를 추출하는 접속리스트추출부; 및 상기 접속리스트추출부에 의해 추출되는 상기 청취자의 단말기 리스트로부터 정해진 개수의 청취자의 단말기를 랜덤 방식에 의해 추첨하고, 그 추첨 결과를 상기 청취자의 단말기 전체 또는 일부에 디스플레이되도록 제공하는 랜덤추첨부;를 더 포함할 수 있다.

상기 동시통역 서비스를 제공받는 청취자의 단말기를 더 포함하고, 상기 청취자의 단말기는, 상기 통신부와의 무선 통신을 수행하도록 하는 통신모듈; 오디오를 출력하는 오디오출력부; 음성이 수신되는 마이크; 다수의 채널 중 어느 하나의 채널을 선택하도록 하거나, 정보나 명령을 입력하도록 하는 입력부; 동작 상태나 정보를 외부로 디스플레이하도록 하는 디스플레이부; 상기 단말기인증부에 의한 인증 절차를 수행하도록 제어하고, 상기 통역내용중계부로부터 상기 입력부에 의해 입력된 채널을 통해서 제공되는 통역한 음성이나 텍스트 또는 미디어파일스트리밍부를 통해서 제공되는 오디오파일을 재생하여 상기 오디오출력부나 상기 디스플레이부를 통해서 출력하도록 제어하며, 상기 마이크에 수신되는 음성을 상기 통역내용중계부에 제공하도록 제어하고, 운영자의 단말기에 대하여 텍스트를 서로 주고 받음과 아울러, 주고 받은 텍스트가 상기 디스플레이부를 통해서 디스플레이되도록 제어하고, 상기 운영자의 단말기를 통해 업로딩되는 파일을 제공받도록 제어하며, 상기 단말기인증부를 통해 인증되어 접속되는 다른 청취자의 단말기 리스트를 접속리스트추출부로부터 제공받아 상기 디스플레이부를 통해 디스플레이되도록 제어하는 마이컴; 상기 텍스트에 대한 정보 및 상기 파일을 저장하고, 동작에 필요한 정보 및 어플리케이션을 저장하는 메모리부; 및 동작에 필요한 전원을 공급하는 전원공급부;를 포함할 수 있다.

본 발명에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템에 의하면, 연사의 음성을 통역사에 의존하지 않고, 통역서버나 통역엔진 등과 같은 통역시스템을 이용하여 필요한 언어의 음성이나 텍스트로 원활하게 통역되도록 함으로써, 국제회의, 세미나, 포럼 등의 각종 회의나 학술대회, 수행통역, 여행가이드, 학교어학실, 야외단체행사, 서비스업, 비즈니스 등을 다국적으로 원활하면서도 경제적으로 추진할 수 있고, 스마트폰 등의 단말기 사용을 통해서 통역을 위한 설비 및 장소에 대한 제한을 최소화하여, 동시통역의 편의성을 향상시킬 수 있으며, 여러 외국어로의 동시통역을 원활하게 수행할 수 있고, 동시통역 외에도 스마트폰을 통한 상호간에 음성 및 텍스트 질의와 파일 전송 등을 통해서 소통을 원활하게 할 수 있으며, 간편한 접속 리스트 추출을 통한 당첨 등과 같은 이벤트를 간편하게 제공할 수 있다.

도 1은 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템을 도시한 구성도이다.
도 2는 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템의 단말기를 도시한 구성도이다.
도 3은 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템의 통역과정을 도시한 흐름도이다.
도 4는 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템의 청취과정을 도시한 흐름도이다.
도 5는 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템의 동작화면을 나타낸 이미지다.
도 6은 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템에서 단말기의 화면을 나타낸 이미지이다.

본 발명은 다양한 변경을 가할 수 있고, 여러 가지 실시례를 가질 수 있는 바, 특정 실시례들을 도면에 예시하고, 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니고, 본 발명의 기술 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 식으로 이해되어야 하고, 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 하기 실시례에 한정되는 것은 아니다.

이하, 첨부된 도면을 참조하여 본 발명에 따른 실시례를 상세히 설명하며, 도면 부호에 관계없이 동일하거나 대응하는 구성요소에 대해서는 동일한 참조 번호를 부여하고, 이에 대해 중복되는 설명을 생략하기로 한다.

도 1은 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템을 도시한 구성도이다.

도 1을 참조하면, 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템(100)은 통신부(101), 단말기인증부(102), 통역내용중계부(103), 채널관리부(104) 및 데이터베이스부(105)를 포함할 수 있다.

통신부(101)는 통역시스템(200) 및 청취자의 단말기(300)와 통신을 수행하도록 하는데, 이를 위해, 무선이나 유선 통신을 위해 Wi-Fi, 3G, LTE 등을 비롯하여 다양한 통신 방식을 사용할 수 있으며, 다수의 통신방식을 사용할 경우, 우선순위를 정할 수 있다. 통신부(101)는 예컨대 정해진 장소 내의 통역전용의 무선랜(AP)을 사설 IP로 구성하여, 단말기(300,400)가 접속할 수 있도록 단말기 수량 및 채널 용량을 고려하여 무선네트워크를 구성할 수 있다. 단말기(300,400)는 예컨대 본 발명의 서비스를 위한 어플리케이션의 구동과 함께, 통역채널용 AP의 SSID(Service Set Identifier)를 수동 또는 자동 선택한다. 무선네트워크에서 동작하는 단말기(300,400)는 IP 주소를 사설 IP 가운데 액세스 포인트 전용으로 하나를 선택하여 사용할 수 있는데, 여기서 액세스 포인트는 무선 네트워킹에서 할당할 수 있는 범위 내에서 임의의 IP 주소를 지정할 수 있다.

통신부(101)는 예컨대 무선랜 모듈로서, MAC(Medium Access Control), Base Band, RF로 구성되어 MAC SAP(Service Access Point)를 통해 UDP/RTP(Real Time Protocol) 패킷을 입력받아 무선랜 데이터로 패킷화하여 무선 전송할 수 있는데, 무선랜을 스캐닝하여 통역용으로 할당된 SSID를 참조하여 해당 AP의 SSID에 자동 또는 수동으로 연결할 수 있으며, 오디오 스트림을 포함하는 UDP 패킷을 무선 네트워크에 스트리밍할 수 있다.

단말기인증부(102)는 청취자의 단말기(300)가 통신부(101)에 의한 통신을 통해서 동시통역 서비스를 제공받는데 필요한 인증을 받도록 한다. 단말기인증부(102)는 예컨대 데이터베이스부(105)에 저장된 인증 대상 단말기 정보로부터 인증을 결정하게 되는데, 이러한 정보와의 비교를 위하여 통신을 통해 접속되는 청취자의 단말기(300)로부터 전화번호나 미리 제공받은 컨퍼런스 아이디 등과 같은 식별을 위한 정보를 제공받을 수 있다.

또한 단말기인증부(102)는 청취자의 단말기(300) 뿐만 아니라, 연사의 단말기(20), 운영자의 단말기(400)에 대한 인증 절차를 각각 수행할 수 있다. 한편, 인증 대상의 단말기(20,300,400)에 대한 정보는 이미 인증절차를 마친 운영자의 단말기(400) 또는 운영자 계정에 의해 제공되어 데이터베이스부(105)에 저장될 수 있다.

통역내용전송부(103)는 통역시스템(200)에 연사의 음성을 제공하여 미리 정한 언어로 통역한 음성이나 텍스트를 통신을 통해서 제공받아 단말기인증부(102)에 의해 인증된 청취자의 단말기(300)로 전송하도록 한다. 여기서 통역내용중계부(103)는 연사의 음성이 연사의 단말기(20)에 입력되면, 연사의 단말기(20)를 통해서 연사의 음성을 수집하여 통역시스템(200)에 제공하여 통역을 수행하도록 할 수 있는데, 통역 내용은 통역시스템(200)으로부터 텍스트나 음성으로 직접 제공받아 이를 청취자의 단말기(300)에 제공하거나, 통역시스템(200)으로부터 텍스트를 TTS(Text to Speech)수행부(107)에 의해 변환된 음성을 청취자의 단말기(300)에 제공할 수 있다. 통역내용중계부(103)는 필요에 따라 통역 데이터의 디지털화를 위하여 DSP(Digital Signal Processing)수행부(112)를 포함할 수 있다. 여기서 통역시스템(200)은 구글이나 네이버 등의 포털서비스에서 제공하는 스트리밍 통역 api 연동 또는 통번역 엔진을 비롯하여, 다양한 스트리밍 통역 서비스 제공 시스템이 사용될 수 있다.

통역내용전송부(103)는 통역시스템(200)로부터 제공되는 통역 텍스트를 제공하거나, 통역 텍스트에 대한 TTS음성을 제공하거나, 통역시스템(200)으로부터 제공되는 통역 음성을 제공하는데, 통역 음성의 경우, 예컨대, G.711계열 및 SPEEX, OPUS코덱 등으로 인코딩하여 오디오 디지털 신호를 IP 패킷화하여, 브로드캐스팅할 수 있다. 통역채널이 여러 개일 경우, 청취자의 단말기(300)에서 채널정보를 수신하여 원하는 통역채널만 수신하도록 구성될 수도 있다. 통역 음성은 예컨대 OPUS코덱 등으로 인코딩하여 오디오 품질을 높일 수 있고, 압축 전송하므로 지연 시간을 최소화하고, 대역폭을 줄임으로써 여러 명이 동시에 접속하더라도 전송품질을 유지할 수 있다. 또한 오디오 코덱은 예컨대 SPEEX, OPUS코덱 등 압축 및 전송효율이 좋은 코덱을 사용할 수 있다. IEEE802.11a,b,g,n,ac 등의 통신부(101)에 의한 통신 네트워크는 SPEEX, OPUS 인코딩된 오디오를 전송하기에 충분한 대역폭을 제공할 수 있다. OPUS의 최대 요구 대역폭은 다중 통역채널을 가지는 경우에도 128kbps 이하로서, 청취자의 단말기(300)는 OPUS에서 전송품질이 낮은 네트워크에서는 8kbps로도 동작이 가능하고, 품질이 좋은 네트웍에서는 128kbps 전송 등 네트워크 환경에 따라 전송대역폭의 가변조정이 가능하다. 또한, 청취자의 단말기(300)는 예컨대 OPUS의 샘플링 레이트, 비트레이트를 조절하여 무선랜 네트워크에서 제공되는 대역폭에 맞게 필요한 오디오 요구 대역폭을 조절할 수 있다.

청취자의 단말기(300)에 설치된 동시통역용 어플리케이션은 청취자에게 통역채널을 선택하는 인터페이스를 제공하고, 인터페이스의 키 입력에 의해 오디오 통역채널을 선택하도록 한다. 청취자의 단말기(300)는 무선랜의 스테이션으로 동작하여 네트워크 접속, 데이터 수신 동작을 수행하여 선택된 통역채널의 오디오를 수신하여 출력한다. 무선랜의 스테이션으로 동작하는 청취자의 단말기(300)는 예컨대 무선통신망의 트래픽 분산을 위하여 통역단말에 대해 다수의 SSID를 감지할 수 있다. 이러한 동작은 다수 청취자의 단말기(300)가 동일한 무선채널에 연결되어 있을 때에도 가능하다. 다수 청취자의 단말기(300)가 동일 무선채널에 연결되어 있을 때, 해당 통역채널에 대해 다수의 동일한 SSID를 감지할 수 있고, 이러한 상황에서 정해진 규칙에 따라 SSID, 즉 무선 네트워크를 선택한다. 동일한 다수의 SSID가 존재할 경우 청취자의 단말기(300)는 예컨대 해당 SSID의 수신 신호 강도(RSSI: Received Signal Strength Indication, RCPI: Received Channel Power Indicator)를 이용하여, 가장 수신 신호 강도가 큰 액세스 포인트에 해당하는 무선랜 네트워크에 접속할 수 있다. 또한, 청취자의 단말기(300)는 동일한 SSID를 가진 다수의 무선 네트워크 사이에서 로밍/핸드오프를 수행하여 사용자의 움직임에 따라 알맞은 무선랜 네트워크에 접속하여 선택된 통역채널의 오디오를 수신 출력할 수 있다.

통역내용중계부(103)는 통역음성이 디지털로 변환된 디지털 오디오 신호를, 예컨대 OPUS 인코딩하여 오디오 스트림을 UDP/IP 패킷화하여 출력하고, 여러 통역채널 정보와 접속정보를 단말기(300,400)에 제공할 수 있는데, 이때 통신부(101)는 예컨대 UDP 패킷을 입력받아 무선랜 데이터로 패킷화하여 무선 전송하는 무선랜 모듈로 구성될 수 있다. 여기서 통역음성의 디지털화를 위해, 통역내용중계부(103)는 DSP수행부(112)에 의해 여러 마이크에 연결된 통역 아날로그 오디오 신호를 입력받아 샘플링하고, 양자화하여 디지털 오디오 신호를 출력할 수 있으며, 이러한 디지털 오디오 신호가 예컨대 OPUS 인코딩되어 오디오 스트림이 RTP/RTSP 패킷화되어 통신부(101)와 같은 통신모듈 등에 의해 무선 통신으로 출력되도록 할 수 있다.

채널관리부(104)는 통역시스템(200)으로부터 통역한 음성을 통역내용중계부(103)에 의해 제공시 언어별로 채널을 달리하여 제공하도록 다수의 채널을 생성하도록 하고, 청취자의 단말기(300)가 다수의 채널 중 어느 하나의 채널을 선택하여 해당하는 언어의 통역을 듣거나 보도록 한다.

데이터베이스부(105)는 청취자의 단말기(300)와 관련된 정보 및 동작에 필요한 정보를 저장하고, 그 밖에도 동시통역 등의 서비스 제공에 필요한 각종 정보 및 어플리케이션이나 프로그램 등을 저장하도록 한다.

본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템(100)은 미디어파일스트리밍부(106)를 더 포함할 수 있고, 나아가서 파일전송부(108)를 더 포함할 수 있다.

미디어파일스트리밍부(106)는 청취자의 단말기(300)에서 오디오의 재생을 위하여, 통역내용중계부(103)를 통해서 오디오파일을 스트리밍 제공한다. 따라서, 미디어파일스트리밍부(106)를 통해서 회의나 대회 등의 시작 전 또는 휴식시간 등에 청취자 등에게 음악 서비스를 제공하도록 할 수 있다.

파일전송부(108)는 운영자의 단말기(400)를 통해 업로딩되는 파일, 예컨대 회의나 대회 진행에 필요한 관련 자료 파일을 청취자의 단말기(300)에 제공하도록 할 수 있고, 이로 인해 운영자는 회의나 대회 등에 필요한 각종 서류나 정보에 대한 파일을 자신의 단말기(400)를 통해서 청취자에게 제공할 수 있는데, 청취자는 자신의 단말기(300)를 통해서 운영자가 제공하는 파일을 전송받거나, 자신이 정해진 경로를 통해서 직접 다운로드할 수 있다.

통역내용전송부(103)는 청취자의 단말기(300)가 운영자의 단말기(400)에 대하여 텍스트를 서로 주고 받도록 할 수 있다. 따라서, 청취자가 자신의 단말기(300)를 통해서 운영자에게 텍스트로 질의를 할 수 있도록 하고, 운영자는 자신의 단말기(400)를 통해서 청취자의 질의에 대해서 텍스트로 답변을 제공하도록 할 수 있다. 또한 통역내용중계부(103)는 청취자의 단말기(300) 및 운영자의 단말기(400)로부터 제공되는 음성을 통역시스템(200)에 제공하여 동시통역되어 청취자의 단말기(300) 및 운영자의 단말기(400)에 제공함으로써, 상이한 언어로도 청취자와 운영자가 질의 응답을 수행하도록 할 수 있다.

본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템(100)은 이벤트 제공을 위하여, 접속리스트추출부(109)와 랜덤추첨부(110)를 더 포함할 수 있다.

접속리스트추출부(109)는 단말기인증부(102)를 통해 인증되어 접속되는 청취자의 단말기(300) 리스트를 추출하도록 할 수 있다. 접속리스트추출부(109)는 추첨을 위하여 동시통역 서비스를 제공받기 위해 정해진 조건, 예컨대 설정된 시간이나 횟수 접속한 청취자의 단말기(300) 리스트를 제공하도록 추출하거나, 예컨대 청취자의 단말기(300) 및 운영자의 단말기(400) 등에 실시간 접속한 청취자의 단말기(300) 등의 리스트를 제공하도록 추출할 수 있다. 여기서, 청취자의 단말기(300) 리스트는 청취자의 단말기(300)에 대한 폰넘버, 컨퍼런스 아이디 또는 기타 식별정보의 리스트, 수작업 입력리스트가 해당될 수 있다.

랜덤추첨부(110)는 접속리스트추출부(109)에 의해 추출되는 청취자의 단말기(300) 리스트로부터 정해진 개수의 청취자의 단말기(300)를 랜덤 방식에 의해 추첨하고, 그 추첨 결과를 청취자의 단말기(300) 전체 또는 일부에 디스플레이되도록 할 수 있고, 나아가서, 이와 함께 경품 정보를 함께 제공할 수도 있다.

한편, 본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템(100)은 앞서 설명한 동시통역 서비스 등을 비롯한 상기한 동작을 하기 위한 제어를 수행하는 서버제어부(111)와 외부로부터 공급되는 전원을 동작에 필요한 전원으로 변환하여 제공하기 위한 파워서플라이 등이 마련될 수 있다. 즉 서버제어부(111)는 본 발명에서 설명한 동작 수행을 위하여, 통신부(101), 단말기인증부(102), 통역내용중계부(103), 채널관리부(104), 데이터베이스부(105), 미디어파일스트리밍부(106), TTS수행부(107), DSP수행부(112), 파일전송부(108), 접속리스트추출부(109) 및 랜덤추첨부(110) 등에 대한 제어를 각각 수행할 수 있다.

본 발명의 일 실시례에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템(100)은 나아가서, 청취자의 단말기(300) 및 운영자의 단말기(400)를 포함할 수 있는데, 이들은 본 발명에 따른 동시통역 서비스 등의 수행에 필요한 어플리케이션이나 프로그램의 실행과, 무선통신을 수행하도록 하는 스마트폰이나 태블릿 PC 뿐만 아니라, PC나 노트북 등과 같은 다양한 통신 및 정보처리 기기가 사용될 수 있다.

도 2를 참조하면, 청취자의 단말기(300)는 예컨대, 통신부(101)와의 Wi-Fi, 3G나 LTE 등의 무선 통신을 수행하도록 하는 통신모듈(301)과, 오디오를 출력하는 스피커나 이어폰 등의 오디오출력부(302)와, 음성이 수신되는 마이크(303)와, 다수의 채널 중 어느 하나의 채널을 선택하도록 하거나, 정보나 명령을 입력하도록 하는 입력부(304)와, 동작 상태나 정보를 외부로 디스플레이하도록 하는 디스플레이부(305)와, 단말기인증부(102)에 의한 인증 절차를 수행하도록 제어하고, 통역내용중계부(103)로부터 입력부(304)에 의해 입력된 채널을 통해서 제공되는 통역한 음성이나 미디어파일스트리밍부(106)를 통해서 제공되는 오디오파일을 재생하여 오디오출력부(302)를 통해서 출력하도록 제어하며, 마이크(303)에 수신되는 음성을 통역내용중계부(103)에 제공하도록 제어하고, 운영자의 단말기(400)에 대하여 텍스트를 서로 주고 받음과 아울러, 주고 받은 텍스트가 디스플레이부(305)를 통해서 디스플레이되도록 제어하고, 운영자의 단말기(400)를 통해 업로딩되는 파일을 제공받도록 제어하며, 단말기인증부(102)를 통해 인증되어 접속되는 다른 청취자의 단말기(300) 리스트를 접속리스트추출부(109)로부터 제공받아 디스플레이부(305)를 통해 디스플레이되도록 제어하는 마이컴(306)과, 텍스트에 대한 정보 및 파일을 저장하고, 동작에 필요한 정보 및 어플리케이션을 저장하는 메모리부(307)와, 동작에 필요한 전원을 공급하는 배터리 등의 전원공급부(308)를 포함할 수 있다.

이와 같은 본 발명에 따른 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템의 주요 동작을 일례로서 설명하기로 한다. 여기서 본 발명의 동작은 하나의 예시이므로, 그 순서나 내용을 변경하여 진행될 수 있음은 물론이다.

도 3을 참조하면, 먼저 연사가 자신의 단말기(20)에 연사용 해당 프로그램을 구동하고, 단말기인증부(1020에 의해 접속 인증을 하고(S11), 연사의 단말기(20) 및 운영자의 단말기(400)에 통역내용중계부(103)를 통한 여러 채널을 보여주며(S12), 운영자가 언어별 통역채널을 선택하고(S13), 연사가 자신의 단말기(20)에 음성을 입력하면(S14), 통역시스템(200) 연동에 의한 자동통역 및 통역 데이터를 수신하고(S15), 통역내용중계부(103)가 통신부(101)에 의한 통신을 통하여 통역 데이터 패킷의 브로드캐스팅을 통한 동시통역에 대한 스트리밍 서비스를 수행하도록 한다(S16).

도 4를 참조하면, 청취자는 자신의 단말기(300)를 통한 동시통역 서비스 제공용 어플리케이션의 구동한 다음(S21), 청취자의 단말기(300)에 대한 무선통신을 셋업하고(S22), 단말기인증부(102)에 의해 청취자의 단말기(300)에 대한 접속 인증 및 통역채널을 선택한 후(S23), 청취자의 단말기(300)를 통한 통역 음성 또는 통역 텍스트 수신을 통해서 통역 내용을 듣거나 볼 수 있도록 한다(S24).

도 5를 참조하면, 본 발명에 의한 동시통역 서비스 제공을 위한 디스플레이 화면으로서, 이에 따른 본 발명은 디스플레이 화면 구성 및 기능 구현에 의해, 서버에 설정된 통역채널이 국가별로 나타날 수 있고, 서버에서 채널 삭제시 자동으로 사라지도록 할 수 있으며, 각각의 채널에 괄호로서 현재 접속되어 있는 청취자 수를 보여줄 수 있고, 통역 채널 UI가 다수로 존재할 수 있으며, 채널 선택시 버튼의 활성화가 이루어지도록 할 수 있고, 방송중(ON AIR)에만 마이크로 입력되는 음성이 방송되도록 나타낼 수 있다. 또한 사운드에 대한 입력 콘트롤 및 출력 콘트롤에 대한 선택 내지 조절을 가능하도록 디스플레이할 수 있고, BGM(배경음악) 파일 업로드시 자동 재생 및 종료 기능을 선택할 수 있으며, BGM 파일(mp3)의 업로딩 기능을 제공할 수 있고, 파일공유를 위한 청취자 필요한 파일의 업로딩 등을 표시 및 제공할 수 있으며, 청취자(전화번호)의 접속 상태를 나타낼 수 있고, Q&A 게시판의 디스플레이와 함께 이와 관련된 채팅기능을 제공할 수 있으며, 녹음 기능 역시 부가적으로 제공할 수 있다. 또한 디스플레이 화면에서 C-Talk 부분에는 통역 텍스트가 계속적으로 제공되어 디스플레이되도록 할 수 있다.

도 6을 참조하면, 청취자의 단말기(300)의 디스플레이부(305)에는 컨퍼런스 주최 업체 대표이미지(①)가 디스플레이되는데, 이는 운영자가 자신의 단말기(400)를 통해서 데이터베이스부(105)에 등록 및 저장함으로써 청취자의 단말기(300)에 제공되도록 할 수 있다. 또한 청취자의 단말기(300)에 대한 인증에 필요한 컨퍼런스 아이디(②)는 예컨대 PIN 4자리로 구성될 수 있는데, 이 역시 운영자로부터 미리 제공받거나, 단말기인증부(102)에 의한 인증 당시 제공받을 수도 있는데, 이러한 컨퍼런스 아이디(②)는 내부 메모리부(307) 또는 전역 변수로서 저장이 필요하고, 채널 자동 로그인시 이 값을 사용할 수도 있다. 또한 디스플레이부(305)는 자신의 폰 넘버(③)가 사용자 관리를 위해 디스플레이될 수 있고, 컨퍼런스 입장을 위하여 메인 화면으로 이동을 위한 입장 버튼(④)이 디스플레이될 수 있으며, 채널 선택 메뉴(⑤)로서, 통역내용중계부(103)서 구성한 언어종류가 예컨대 최대 4개 생성될 수 있도록 하고, 언어 선택 시 해당 채널로 자동 조인(join)되도록 구성될 수 있으며, 언어 선택시 재생 및 스톱을 선택할 수 있고, 언어가 선택적 메뉴로서 다른 채널 이동시 자동 정지 및 재생이 가능하도록 할 수 있으며, 좌 또는 우로 스와이프시(⑥) 다양한 메뉴로 이동할 수 있는데, 음량 및 방송 수신의 시작과 정지(⑦)를 선택할 수 있다.

이와 같이, 본 발명에 따르면, 연사의 음성을 통역사에 의존하지 않고, 통역서버나 통역엔진 등과 같은 통역시스템을 이용하여 필요한 언어의 음성이나 텍스트로 원활하게 통역되도록 함으로써, 국제회의, 세미나, 포럼 등의 각종 회의나 학술대회, 수행통역, 여행가이드, 학교어학실, 야외단체행사, 서비스업, 비즈니스 등을 다국적으로 원활하면서도 경제적으로 추진할 수 있고, 스마트폰 등의 단말기 사용을 통해서 통역을 위한 설비 및 장소에 대한 제한을 최소화하여, 동시통역의 편의성을 향상시킬 수 있다.

또한 본 발명에 따르면, 여러 외국어로의 동시통역을 원활하게 수행할 수 있고, 동시통역 외에도 스마트폰을 통한 상호간에 음성 및 텍스트 질의와 파일 전송 등을 통해서 소통을 원활하게 할 수 있으며, 간편한 접속 리스트 추출을 통한 당첨 등과 같은 이벤트를 간편하게 제공할 수 있다.

이와 같이 본 발명에 대해서 첨부된 도면을 참조하여 설명하였으나, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 수정 및 변형이 이루어질 수 있음은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시례에 한정되어서는 아니되며, 후술하는 특허청구범위뿐만 아니라 이러한 특허청구범위와 균등한 것들에 의해 정해져야 한다.

20 : 연사의 단말기 100 : 인터렉티브 컨퍼런스 시스템
101 : 통신부 102 : 단말기인증부
103 : 통역내용중계부 104 : 채널관리부
105 : 데이터베이스부 106 : 미디어파일스트리밍부
107 : TTS수행부 108 : 파일전송부
109 : 접속리스트추출부 110 : 랜덤추첨부
111 : 서버제어부 112 : DSP수행부
200 : 통역시스템 300 : 청취자의 단말기
301 : 통신모듈 302 : 오디오출력부
303 : 마이크 304 : 입력부
305 : 디스플레이부 306 : 마이컴
307 : 메모리부 308 : 전원공급부
400 : 운영자의 단말기

Claims (5)

1. 통역시스템 및 청취자의 단말기와 통신을 수행하도록 하는 통신부;
   청취자의 단말기가 통신부에 의한 통신을 통해서 동시통역 서비스를 제공받는데 필요한 인증을 받도록 하는 단말기인증부;
   상기 통역시스템에 연사의 음성을 제공하여 미리 정한 언어로 통역한 음성이나 텍스트를 통신을 통해서 제공받아 상기 단말기인증부에 의해 인증된 상기 청취자의 단말기로 전송하도록 하는 통역내용중계부;
   상기 통역시스템으로부터 통역한 내용을 상기 통역내용중계부에 의해 제공시, 언어별로 채널을 달리하여 제공하도록 다수의 채널을 생성하도록 하고, 상기 청취자의 단말기가 상기 다수의 채널 중 어느 하나의 채널을 선택하여 해당하는 언어의 통역을 듣거나 보도록 하는 채널관리부; 및
   상기 청취자의 단말기와 관련된 정보 및 동작에 필요한 정보를 저장하는 데이터베이스부;
   를 포함하는, 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템.
2. 청구항 1에 있어서,
   상기 청취자의 단말기에서 오디오의 재생을 위하여, 상기 통역내용중계부를 통해서 오디오파일을 스트리밍 제공하는 미디어파일스트리밍부를 더 포함하는, 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템.
3. 청구항 1에 있어서,
   운영자의 단말기를 통해 업로딩되는 파일을 상기 청취자의 단말기에 제공하는 파일전송부;를 더 포함하고,
   상기 통역내용중계부는,
   상기 청취자의 단말기가 운영자의 단말기에 대하여 텍스트를 서로 주고 받도록 하고, 상기 청취자의 단말기 및 상기 운영자의 단말기로부터 제공되는 음성을 상기 통역시스템에 제공하여 동시통역되어 상기 청취자의 단말기 및 상기 운영자의 단말기에 제공되도록 하는, 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템.
4. 청구항 1에 있어서,
   상기 단말기인증부를 통해 인증되어 접속되는 상기 청취자의 단말기 리스트를 추출하는 접속리스트추출부; 및
   상기 접속리스트추출부에 의해 추출되는 상기 청취자의 단말기 리스트로부터 정해진 개수의 청취자의 단말기를 랜덤 방식에 의해 추첨하고, 그 추첨 결과를 상기 청취자의 단말기 전체 또는 일부에 디스플레이되도록 제공하는 랜덤추첨부;
   를 더 포함하는, 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템.
5. 청구항 1 내지 청구항 4 중 어느 한 항에 있어서,
   상기 동시통역 서비스를 제공받는 청취자의 단말기를 더 포함하고,
   상기 청취자의 단말기는,
   상기 통신부와의 무선 통신을 수행하도록 하는 통신모듈;
   오디오를 출력하는 오디오출력부;
   음성이 수신되는 마이크;
   다수의 채널 중 어느 하나의 채널을 선택하도록 하거나, 정보나 명령을 입력하도록 하는 입력부;
   동작 상태나 정보를 외부로 디스플레이하도록 하는 디스플레이부;
   상기 단말기인증부에 의한 인증 절차를 수행하도록 제어하고, 상기 통역내용중계부로부터 상기 입력부에 의해 입력된 채널을 통해서 제공되는 통역한 음성이나 텍스트 또는 미디어파일스트리밍부를 통해서 제공되는 오디오파일을 재생하여 상기 오디오출력부나 상기 디스플레이부를 통해서 출력하도록 제어하며, 상기 마이크에 수신되는 음성을 상기 통역내용중계부에 제공하도록 제어하고, 운영자의 단말기에 대하여 텍스트를 서로 주고 받음과 아울러, 주고 받은 텍스트가 상기 디스플레이부를 통해서 디스플레이되도록 제어하고, 상기 운영자의 단말기를 통해 업로딩되는 파일을 제공받도록 제어하며, 상기 단말기인증부를 통해 인증되어 접속되는 다른 청취자의 단말기 리스트를 접속리스트추출부로부터 제공받아 상기 디스플레이부를 통해 디스플레이되도록 제어하는 마이컴;
   상기 텍스트에 대한 정보 및 상기 파일을 저장하고, 동작에 필요한 정보 및 어플리케이션을 저장하는 메모리부; 및
   동작에 필요한 전원을 공급하는 전원공급부;
   를 포함하는, 자동통역 시스템을 이용한 동시통역 기반 인터렉티브 컨퍼런스 시스템.

Images