KR102412823B1 - 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템 - Google Patents

번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템 Download PDF

Info

Publication number
KR102412823B1
KR102412823B1 KR1020210169727A KR20210169727A KR102412823B1 KR 102412823 B1 KR102412823 B1 KR 102412823B1 KR 1020210169727 A KR1020210169727 A KR 1020210169727A KR 20210169727 A KR20210169727 A KR 20210169727A KR 102412823 B1 KR102412823 B1 KR 102412823B1
Authority
KR
South Korea
Prior art keywords
information
participant
meeting
online
establisher
Prior art date
Application number
KR1020210169727A
Other languages
English (en)
Inventor
최철순
이원찬
Original Assignee
(주)에이트원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)에이트원 filed Critical (주)에이트원
Priority to KR1020210169727A priority Critical patent/KR102412823B1/ko
Application granted granted Critical
Publication of KR102412823B1 publication Critical patent/KR102412823B1/ko

Links

Images

Classifications

    • G06Q50/30—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/401—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
    • H04L65/4015—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference where at least one of the additional parallel sessions is real time or time sensitive, e.g. white board sharing, collaboration or spawning of a subconference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H04L65/4046—Arrangements for multi-party communication, e.g. for conferences with distributed floor control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Tourism & Hospitality (AREA)
  • Operations Research (AREA)
  • Acoustics & Sound (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템은 개설자로부터 개설자 정보 및 개설 설정 정보를 입력받고, 온라인 회의실의 개설을 요청하는 개설 요청이 입력되면 상기 개설 설정 정보와 함께 개설 요청 신호를 송신하고, 상기 온라인 회의실에서 진행되는 온라인 미팅의 개최를 요청하는 개최 요청이 입력되면 개최 요청 신호를 송신하는 개설자 장치; 상기 개설 요청 신호가 수신되면 상기 개설 설정 정보에 기초하여 상기 온라인 회의실을 개설하고, 상기 개최 요청 신호가 수신되면 상기 온라인 미팅을 개최하는 회의 서버; 및 참여자로부터 참여자 정보를 입력받고, 상기 온라인 회의실에 입장을 요청하는 회의실 입장 요청이 입력되면 회의실 입장 요청 신호를 상기 회의 서버로 송신하는 참여자 장치;을 포함할 수 있다.

Description

번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템{System for online meeting with translation}
본 발명은 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 관한 것으로, 보다 구체적으로 온라인 회의실에서 개최된 온라인 미팅 동안 송수신되는 커뮤니케이션 정보를 번역하여 참여자에게 제공할 수 있는 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 관한 것이다.
화상 통신 시스템은 피씨나 스마트폰을 이용하여 회의나 교육에 참여한 사람들끼리 서로 간의 화상정보를 공유하면서, 원거리에서 통화를 수행할 수 있게 된다.
이와 같은 화상 통신 시스템은 화상 회의를 참여하는 사용자들간에 별도의 통신회선과 화상통신장비를 설치하여 사용하는 하드웨어 이용방식과, 피씨나 스마트폰에 소트프웨어를 설치한 후 네트워크를 통해 서버에서 화상정보를 공유하도록 스트리밍하는 소프트웨어적인 방식이 있다.
이 경우, 하드웨어 이용방식은 화상품질이 우수하기는 하나 설치비용이 매우 고가이고 화상통신 장비가 설치된 공간에서만 화상 회의나 교육을 수행해야하는 공간적 제약에 의해, 대부분의 화상 회의나 온라인 교육 시장에서는 스트리밍을 통한 소프트웨어적인 방식을 이용하고 있다.
그에 따라, 소트트웨어적인 화상 통신 시스템을 이용하여 화상 통신에 참여하고자 하는 이용자는 피씨나 스마트폰에 화상 통신 수행에 관한 캡처기능 및 스트리밍기능 등을 구비한 화상 통신 소프트웨어를 설치하여 이용하게 되는데, 이 경우, 화상 통신 소프트웨어는 이용자들의 통신장치에서 제공하는 캠 영상정보와 마이크신호를 네트워크 통신을 통해 화상서버로 전송되도록 하여 이용자들간에 화상 통신을 수행할 수 있도록 하게 된다.
한편, 종래 화상 통신 시스템은 별도의 번역 기능을 제공하지 않음으로써, 참여자 간 사용 언어가 상이한 경우, 별도의 통역자와 함께 화상 통신에 참여하거나 실시간으로 별도의 번역 장치를 이용하여 화상 통신을 수행하는 문제점이 있었다.
뿐만 아니라, 종래 화상 통신 시스템은 주최자가 화상 외에 별도의 영상, 자료 및 데이터를 공유하고자 하는 경우 화상을 촬영하는 카메라로 해당 공유 대상을 촬영하여 공유함으로써, 공유 대상의 공유 품질이 저하되고, 이미지, 동영상, 문서 데이터와 같은 참여자의 자료가 원할하게 공유되지 않은 문제점이 있다.
한국공개특허 제10-2009-0001801호
본 발명은 온라인 회의실에서 개최된 온라인 미팅 동안 송수신되는 커뮤니케이션 정보를 번역하여 참여자에게 제공할 수 있는 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템을 제공하는 것이다.
또한, 본 발명은 참여자 마다에 온라인 미팅의 기능을 제어하는 자격을 할당하여 일부 참여자가 온라인 미팅의 발표자가 되어 온라인 미팅을 수행하거나 일부 참여자가 회의의 종료, 녹화와 같은 기능을 제어도록 할 수 있는 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템을 제공하는 것이다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있고, 본 발명의 실시 예에 의해 보다 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
상기 기술적 과제를 해결하기 위한 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템은 개설자로부터 개설자 정보 및 개설 설정 정보를 입력받고, 온라인 회의실의 개설을 요청하는 개설 요청이 입력되면 상기 개설 설정 정보와 함께 개설 요청 신호를 송신하고, 상기 온라인 회의실에서 진행되는 온라인 미팅의 개최를 요청하는 개최 요청이 입력되면 개최 요청 신호를 송신하는 개설자 장치; 상기 개설 요청 신호가 수신되면 상기 개설 설정 정보에 기초하여 상기 온라인 회의실을 개설하고, 상기 개최 요청 신호가 수신되면 상기 온라인 미팅을 개최하는 회의 서버; 및 참여자로부터 참여자 정보를 입력받고, 상기 온라인 회의실에 입장을 요청하는 회의실 입장 요청이 입력되면 회의실 입장 요청 신호를 상기 회의 서버로 송신하는 참여자 장치;을 포함할 수 있다.
바람직하게, 상기 회의 서버는 상기 온라인 미팅의 기능을 제어할 수 있는 권한의 범위가 설정된 미팅 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정하고, 온라인 미팅이 수행되는 동안 송수신되는 커뮤니케이션 정보를 번역하여 번역 커뮤니케이션 정보를 생성하고, 상기 번역 커뮤니케이션 정보를 상기 개설자 장치 및 상기 참여자 장치로 송신할 수 있다.
바람직하게, 상기 회의 서버는 상기 미팅 자격 정보 중에서 미팅 발표 자료 및 상기 미팅 발표 자료에 대응되어 입력되는 주석 정보가 상기 개설자 장치 및 상기 참여자 장치에 표시되도록 하는 프리젠테이션 기능을 제어 가능한 발표자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정할 수 있다.
바람직하게, 상기 회의 서버는 상기 미팅 자격 정보 중에서 상기 개설자 장치 또는 상기 참여자 장치에 표시되는 화면이 다른 장치에 표시되도록 하는 화면 공유 기능을 제어 가능한 발표자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정할 수 있다.
바람직하게, 상기 회의 서버는 상기 미팅 자격 정보 중에서 복수의 설문 유형 중에서 어느 하나의 설문 유형에 대응되는 설문 조사가 상기 개설자 장치 및 상기 참여자 장치에서 수행되도록 하는 설문 조사 기능을 제어 가능한 상기 발표자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정할 수 있다.
바람직하게, 상기 회의 서버는 상기 미팅 자격 정보 중에서 상기 온라인 미팅이 수행되는 동안 송수신되는 영상과 음향을 기록하는 녹화 기능을 제어 가능한 주관자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정할 수 있다.
바람직하게, 상기 회의 서버는 상기 미팅 자격 정보 중에서 상기 온라인 미팅이 수행되는 동안 송수신 되는 음향 내 음성을 인식하여 텍스트로 변환하고, 변환된 텍스트를 미리 설정된 번역 언어 종류에 대응하여 번역 텍스트로 번역 및 생성하는 강의 노트 기능을 제어 가능한 주관자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정할 수 있다.
바람직하게, 상기 회의 서버는 상기 커뮤니케이션 정보를 미리 설정된 번역 언어 종류에 대응하여 번역 커뮤니케이션 정보로 번역 및 생성할 수 있다.
바람직하게, 상기 커뮤니케이션 정보는 상기 온라인 미팅이 수행되는 동안 상기 개설자 장치 및 상기 참여자 장치 간에 송수신되는 채팅 정보일 수 있다.
바람직하게, 상기 회의 서버는 상기 온라인 미팅이 수행되는 동안 상기 참여자 장치로부터 수신되는 커뮤니케이션 정보의 수신 빈도에 기초하여 상기 참여자 정보 별로 미팅 활동율 정보를 산출할 수 있다.
바람직하게, 상기 회의 서버는 상기 참여자 장치로부터 수신되는 영상으로부터 상기 참여자의 얼굴을 인식하고, 상기 얼굴 인식 결과에 기초하여 미팅 참석 여부 정보를 생성하고, 상기 온라인 미팅의 개최 횟수 및 상기 미팅 참석 여부 정보에 기초하여 미팅 참석율 정보를 산출할 수 있다.
바람직하게, 상기 회의 서버는 상기 참여자 장치로부터 수신되는 영상으로부터 상기 참여자의 안구를 인식하고, 상기 안구 인식 결과에 기초하여 시선 부동 시간 정보를 생성하고, 상기 시선 부동 시간 정보가 미리 설정된 기준 부동 시간을 초과하면 회의 집중 알림을 상기 참여자 장치로 송신할 수 있다.
본 발명에 따르면, 온라인 회의실에서 개최된 온라인 미팅 동안 송수신되는 커뮤니케이션 정보를 번역하여 참여자에게 제공함으로써, 별도의 통역사는 번역 장치 없이도 다양한 언어를 사용하는 참여자 간에 온라인 미팅을 원할하게 수행할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템의 구성도이다.
도 2는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 개설자 장치의 구성 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 회의 서버의 구성 블록도이다.
도 4는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 참여자 장치의 구성 블록도이다.
도 5는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 개설자 장치가 가상 회의실을 개설하는 과정을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 개설자 장치에 표시되는 가상 회의실을 도시한 도면이다.
도 7은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 개설자 장치에 표시되는 메인 화면을 도시한 도면이다.
도 8은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 온라인 회의실 및 온라인 미팅에 참여한 개설자 및 참여자 목록을 도시한 도면이다.
도 9는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 번역 커뮤니케이션 정보를 설명하기 위한 도면이다.
도 10은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 설문 기능을 설명하기 위한 도면이다.
도 11 및 도 12는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 프리젠테이션 기능을 설명하기 위한 도면이다.
도 13은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 음성 번역 기능을 설명하기 위한 도면이다.
이하, 본 발명의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 발명을 특정한 실시 형 태에 대해 한정하려는 것이 아니며, 본 발명의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대 해서는 유사한 참조 부호가 사용될 수 있다.
본 문서에서, "가진다", "가질 수 있다", "포함한다", 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 문서에서, "A 또는 B", "A 또는/및 B 중 적어도 하나", 또는 "A 또는/및 B 중 하나 또는 그 이상" 등의 표현 은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B", "A 및 B 중 적어도 하나", 또는 "A 또는 B 중 적어도 하나"는 (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 문서에서 사용된 "제1", "제2", "첫째", 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중 요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제1 사용자 기기와 제2 사용자 기기는 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 문서에 기재된 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성 요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합 한(suitable for)", "~하는 능력을 가지는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)", 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성(또는 설정)된"은 하드웨어적으로 "특별히 설계된(specifically designed to)"것 만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성 (또는 설정)된 제어부"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
특히, 본 명세서에서, “~장치” 및 “서버”는 중앙처리장치(Central Processing Unit (CPU)), 애플리케이션 프로세서(Application Processor (AP)) 및 커뮤니케이션 프로세서(Communication Processor (CP)) 중 하나 이상을 포함할 수 있다.
본 명세서에서, “~장치” 및 “서버”는 적어도 하나의 프로세서를 포함하는 모든 종류의 하드웨어 장치를 의미하는 것이고, 실시 예에 따라 해당 하드웨어 장치에서 동작하는 소프트웨어적 구성도 포괄하는 의미로서 이해될 수 있다. 예를 들어, “~장치” 및 “서버”는 스마트폰, 태블릿 PC, 데스크톱, 노트북 및 각 장치에서 구동되는 사용자 클라이언트 및 애플리케이션을 모두 포함하는 의미로서 이해될 수 있으며, 또한 이에 제한되는 것은 아니다.
본 문서에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한 정하려는 의도가 아닐 수 있다. 단수의 표현은 컨텍스트 상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 문서에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 문서에 사용된 용어들 중 일반적인 사전에 정의된 용어들은 관련 기술의 컨텍스트 상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 문서의 실시 예들을 배제하도록 해석될 수 없다.
도 1은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템의 구성도이고, 도 2는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 개설자 장치의 구성 블록도이고, 도 3은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 회의 서버의 구성 블록도이고, 도 4는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 참여자 장치의 구성 블록도이고, 도 5는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 개설자 장치가 가상 회의실을 개설하는 과정을 설명하기 위한 도면이고, 도 6은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 개설자 장치에 표시되는 가상 회의실을 도시한 도면이고, 도 7은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 포함된 개설자 장치에 표시되는 메인 화면을 도시한 도면이고, 도 8은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 온라인 회의실 및 온라인 미팅에 참여한 개설자 및 참여자 목록을 도시한 도면이고, 도 9는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 번역 커뮤니케이션 정보를 설명하기 위한 도면이고, 도 10은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 설문 기능을 설명하기 위한 도면이고, 도 11 및 도 12는 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 프리젠테이션 기능을 설명하기 위한 도면이고, 도 13은 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템에 의해 제공되는 음성 번역 기능을 설명하기 위한 도면이다.
도 1 내지 도 13을 참조하면, 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템은 개설자 장치(100), 회의 서버(200) 및 참여자 장치(300)를 포함할 수 있다.
이러한, 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템은 온라인 회의실을 개설하고, 온라인 회의실 내에서 온라인 미팅을 개설하며, 온라인 회의실에 입장한 참여자 간에 온라인 미팅을 수행하도록 온라인 플랫폼을 제공할 수 있다.
이때, 본 발명의 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템은 다양한 사용자에 의해 사용될 수 있으며, 이러한 사용자는 개설자 장치(100)를 통해 온라인 회의실을 개설하고 온라인 회의실 내에 온라인 미팅을 개최하는 개최자 및 복수의 참여자 장치(100) 각각을 통해 온라인 회의실에 접속하여 입장하고, 온라인 미팅에 참석하는 복수의 참여자로 구성될 수 있다.
즉, 개설자 장치(100)는 온라인 회의실을 개설하고, 온라인 회의실 내에서 온라인 미팅을 개최하는 개설자에 의해 제어되는 장치일 수 있다.
또한, 참여자 장치(300)는 개설된 온라인 회의실에 입장하고 온라인 미팅에 참석하는 참여자에 의해 제어되는 장치일 수 있다.
한편, 일 실시 예에서 온라인 미팅은 온라인 미팅에 참여한 사용자(개설자 및 참여자) 간에 사용자 각각의 화상과 음성을 송수신하고, 회의 자료를 공유하는 행위를 의미할 수 있다.
다른 실시 예에서, 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템은 개최자를 대신하여 온라인 수강실을 개설하고 온라인 수강실 내에 온라인 수업을 개최하는 강사에 의해 이용될 수 있으며, 참여자를 대신하여 온라인 수강실에 입장하여 온라인 수업에 참석하는 수강생에 의해 이용될 수 있다.
이때, 다른 실시 예에서, 온라인 수업은 온라인 미팅에 참여한 사용자(강사 및 수강생) 간에 사용자 각각의 화상과 음성을 송수신하고, 수업 자료를 공유하는 행위를 의미할 수 있다.
개설자 장치(100)는 개설자로부터 개설자 정보 및 개설 설정 정보를 입력받고, 온라인 회의실의 개설을 요청하는 개설 요청이 입력되면 개설 설정 정보와 함께 개설 요청 신호를 회의 서버(200)로 송신할 수 있다.
여기서, 개설자 정보를 개설자를 나타내는 개설자 식별 정보(예를 들어, 닉네임)일 수 있다.
구체적으로, 개설자 장치(100)는 개설자로부터 도 5에 도시된 바와 같이, 회의실 이름 정보(a1), 인증 코드 생성 여부 및 인증 코드 정보(a2), 사용자 참여 알림 여부 정보(a3), 회의실 입장 시 주관자 승인 필요 여부 정보(a4), 모든 참여자에게 온라인 미팅 개최 권한 부여 여부 정보(a5) 및 모든 참여자에게 주관자 권한 부여 여부 정보(a6)를 포함하는 개설 설정 정보를 입력받을 수 있다.
개설자 장치(100)는 개설 요청 신호의 응답으로 개설된 온라인 회의실에 대한 정보를 화면에 표시할 수 있다.
이때, 개설자 장치(100)는 도 6에 도시된 바와 같이, 온라인 회의실 이름 정보(b1) 및 온라인 회의실 입장 주소 정보(b2)를 표시할 수 있다.
한편, 개설자 장치(100)는 개설자의 입력에 따라 개설된 온라인 회의실 내에 온라인 미팅의 개최를 요청하는 개최 요청 신호를 회의 서버(200)로 송신할 수 있다.
구체적으로, 개설자 장치(100)는 온라인 회의실에서 진행되는 온라인 미팅의 개최를 요청하는 개최 요청이 입력되면 개최 요청 신호를 서버(200)로 송신할 수 있다.
즉, 온라인 회의실이 개설되더라도, 개설자 장치(100)에 의해 온라인 미팅이 개최되지 않는 경우, 참여자 장치(300)는 온라인 회의실에 입장이 가능하나 온라인 미팅에 참석할 수 없다.
이러한, 개설자 장치(100)는 상술된 기능을 수행하기 위해, 도 2에 도시된 바와 같이, 정보 및 데이터를 송수신하는 통신부(110), 정보 및 데이터를 표시하는 표시부(120), 정보 및 데이터를 입력받는 입력부(130), 정보 및 데이터를 저장하는 저장부(140) 및 단말의 구성요소를 제어하는 프로세서(150)를 포함할 수 있다.
프로세서(150)는 상술된 각 구성 요소의 작동을 수행할 수 있으며, 하나 이상의 코어(core, 미도시) 및 그래픽 처리부(미도시) 및/또는 다른 구성 요소와 신호를 송수신하는 연결 통로(예를 들어, 버스(bus) 등)를 포함할 수 있다.
프로세서(150)는 저장부(140)에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상술된 각 구성 요소의 작동을 수행하도록 구성될 수 있다.
저장부(140)에는 프로세서(150)의 처리 및 제어를 위한 프로그램들(하나 이상의 인스트럭션들)을 저장할 수 있다. 저장부(140)에 저장된 프로그램들은 기능에 따라 복수 개의 모듈들로 구분될 수 있다.
회의 서버(200)는 일 실시 예에 따른 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템을 운영하는 운영자에 의해 제어 및 운영될 수 있으며, 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템을 운영하는데 이용되는 서버 장치일 수 있다.
회의 서버(200)는 개설자 장치(100)에 의해 요청된 온라인 회의실의 개설과 온라인 미팅의 개최에 대응하여 온라인 회의실을 개설하고 온라인 미팅을 개최할 수 있다. 구체적으로, 회의 서버(200)는 개설자 장치(100)로부터 개설 요청 신호가 수신되면 개설 설정 정보에 기초하여 온라인 회의실을 개설할 수 있다.
상술한 바와 같이, 회의 서버(200)는 개설 설정 정보에 포함된 회의실 이름 정보(a1), 인증 코드 생성 여부 및 인증 코드 정보(a2), 사용자 참여 알림 여부 정보(a3), 회의실 입장 시 주관자 승인 필요 여부 정보(a4), 모든 참여자에게 온라인 미팅 개최 권한 부여 여부 정보(a5) 및 모든 참여자에게 주관자 권한 부여 여부 정보(a6)를 확인하고, 확인된 각각의 정보에 대응하여 온라인 회의실을 개설할 수 있다.
또한, 회의 서버(200)는 개최 요청 신호가 수신되면 개설 설정 정보 중에서 온라인 미팅에 적용가능한 정보를 적용하여 온라인 미팅을 개최할 수 있다.
회의 서버(200)는 개설 요청 신호의 응답으로 개설 요청된 온라인 회의실에 대응되는 온라인 회의실 입장 주소 정보를 생성하여 개설자 장치(100)로 송신할 수 있다.
참여자 장치(300)는 참여자로부터 참여자 정보를 입력받고, 온라인 회의실에 입장을 요청하는 회의실 입장 요청이 입력되면 회의실 입장 요청 신호를 회의 서버(200)로 송신할 수 있다.
여기서, 참여자 정보는 참여자를 나타내는 참여자 식별 정보(예를 들어, 닉네임)일 수 있다.
이러한, 참여자 장치(300)는 상술된 기능을 수행하기 위해, 도 4에 도시된 바와 같이, 정보 및 데이터를 송수신하는 통신부(310), 정보 및 데이터를 표시하는 표시부(320), 정보 및 데이터를 입력받는 입력부(330), 정보 및 데이터를 저장하는 저장부(340) 및 단말의 구성요소를 제어하는 프로세서(350)를 포함할 수 있다.
프로세서(350)는 상술된 각 구성 요소의 작동을 수행할 수 있으며, 하나 이상의 코어(core, 미도시) 및 그래픽 처리부(미도시) 및/또는 다른 구성 요소와 신호를 송수신하는 연결 통로(예를 들어, 버스(bus) 등)를 포함할 수 있다.
프로세서(350)는 저장부(340)에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상술된 각 구성 요소의 작동을 수행하도록 구성될 수 있다.
저장부(340)에는 프로세서(350)의 처리 및 제어를 위한 프로그램들(하나 이상의 인스트럭션들)을 저장할 수 있다. 저장부(340)에 저장된 프로그램들은 기능에 따라 복수 개의 모듈들로 구분될 수 있다.
구체적으로, 참여자 장치(300)는 온라인 회의실 입장 주소 정보를 이용하여 온라인 회의실의 입장을 요청하는 회의실 입장 요청 신호를 회의 서버(200)로 송신하고, 온라인 회의실을 입장하는 과정에서 회의 서버(200)로부터 참여자 정보 및 액세스 코드를 요청받으면 참여자로부터 참여자 정보 및 액세스 코드를 입력받아 회의 서버(200)로 송신할 수 있다.
개설자 장치(100) 및 참여자 장치(300)는 온라인 미팅에 참여하면 도 7에 도시된 바와 같이, 사용자 버튼(c1), 공개 채팅 버튼(c2), 설문 버튼(c3), 프리젠테이션 업로드 버튼(c4), 녹화 버튼(c5), 강의 노트 버튼(c6), 화면 공유 버튼(c7) 및 프리젠테이션 활성화 버튼(C8) 중 하나 이상을 화면에 표시할 수 있다.
이때, 회의 서버(200)는 온라인 미팅의 기능을 제어할 수 있는 권한의 범위가 설정된 미팅 자격 정보를 개설자 정보 및 참여자 정보에 설정할 수 있다.
이에 따라, 개설자 장치(100) 및 참여자 장치(300)는 미팅 자격 정보에 기초하여 미팅의 기능 중 일부 기능이 활성화되거나 비활성화될 수 있고, 미팅의 기능 각각의 활성화 여부에 따라 상술된 버튼(c1, …, c8)이 표시되거나 표시되지 않을 수 있다.
여기서, 미팅 자격 정보는 주관자 자격 정보, 발표자 자격 정보 및 관람자 자격 정보 중 어느 하나일 수 있으며, 회의 서버(200)는 온라인 회의에 참석한 사용자(개최자, 참여자) 중에서 미팅 자격 정보가 주관자 자격 정보인 사용자로부터 자격 변경 요청 신호가 수신되면, 자격 변경 요청 신호에 대응하여 사용자들의 미팅 자격 정보를 변경할 수 있다.
이를 위해, 개설자 장치(100) 및 참여자 장치(300)는 미팅 자격 정보가 주관자 자격 정보이면 도 8에 도시된 바와 같이, 온라인 미팅에 참석한 사용자(개최자, 참여자)의 미팅 자격 정보를 변경할 수 있는 인터페이스(d1, d2)를 제공할 수 있다.
각 미팅 자격 정보를 구체적으로 설명하도록 한다.
회의 서버(200)는 미팅 자격 정보 중에서 미팅 발표 자료 및 미팅 발표 자료에 대응되어 입력되는 주석 정보가 도 12에 도시된 바와 같이, 개설자 장치(100) 및 참여자 장치(300)에 표시되도록 하는 프리젠테이션 기능을 제어 가능한 발표자 자격 정보를 개설자 정보 및 참여자 정보에 설정할 수 있다.
여기서, 프리젠테이션 기능은 프리젠테이션에 이용되는 발표 자료가 개설자 장치(100) 및 참여자 장치(300)에 표시되도록 하며, 해당 발표 자료에 입력되는 주석 정보 또한 개설자 장치(100) 및 참여자 장치(300)에 표시되도록 하는 기능을 의미할 수 있다.
이때, 발표 자료는 개설자 장치(100) 및 참여자 장치(300)에 의해 도 11에 도시된 바와 같이, 업로드 인터페이스를 이용하여 회의 서버(200)에 업로드될 수 있다.
회의 서버(200)는 미팅 자격 정보 중에서 개설자 장치(100) 또는 참여자 장치(300)에 표시되는 화면이 다른 장치에 표시되도록 하는 화면 공유 기능을 제어 가능한 발표자 자격 정보를 개설자 정보 및 참여자 정보에 설정할 수 있다.
즉, 개설자 장치(100) 또는 참여자 장치(300)는 발표자 자격 정보가 설정되면 해당 장치에서 표시되는 화면을 다른 장치들에도 표시되도록 온라인 미팅의 기능을 제어할 수 있다.
회의 서버(200)는 미팅 자격 정보 중에서 복수의 설문 유형 중에서 어느 하나의 설문 유형에 대응되는 설문 조사가 도 10에 도시된 바와 같이, 개설자 장치(100) 및 참여자 장치(300)에서 수행되도록 하는 설문 조사 기능을 제어 가능한 발표자 자격 정보를 개설자 정보 및 참여자 정보에 설정할 수 있다.
여기서, 복수의 설문 유형은 도 10에 도시된 바와 같이, 선택할 수 있는 답변의 수에 따라 분류되는 유형이거나, “예” 또는 “아니오”로 분류되는 유형일 수 있다.
회의 서버(200)는 미팅 자격 정보 중에서 온라인 미팅이 수행되는 동안 송수신되는 영상과 음향을 기록하는 녹화 기능을 제어 가능한 주관자 자격 정보를 개설자 정보 및 참여자 정보에 설정할 수 있다.
즉, 개설자 장치(100) 또는 참여자 장치(300)는 주관자 자격 정보가 설정되면 회의 서버(200)를 통해 송수신되는 영상과 음향을 저장할 수 있다.
회의 서버(200)는 미팅 자격 정보 중에서 온라인 미팅이 수행되는 동안 송수신 되는 음향 내 음성을 인식하여 텍스트로 변환하고, 변환된 텍스트를 미리 설정된 번역 언어 종류에 대응하여 번역 텍스트로 번역 및 생성하는 강의 노트 기능을 제어 가능한 주관자 자격 정보를 개설자 정보 및 참여자 정보에 설정할 수 있다.
이에 따라, 개설자 장치(100) 또는 참여자 장치(300)는 주관자 자격 정보가 설정되면 도 13에 도시된 바와 같이, 실시간으로 장치간 송수신되는 음향으로부터 음성을 인식하고 텍스트 및 번역 텍스트로 생성하는 강의 노트 기능을 활성화시키거나 비활성화시킬 수 있다.
이때, 회의 서버(200)는 음향으로부터 음성을 인식하여 텍스트를 생성하고, 생성된 텍스트를 번역하여 번역 텍스트로 생성할 수 있으며, 이러한 텍스트 및 번역 텍스트 각각을 생성하는데 STT(Speech to Text) 모듈 및 기계학습 기반의 인공지능모델을 이용할 수 있다.
한편, 회의 서버(200)는 도 9에 도시된 바와 같이, 온라인 미팅이 수행되는 동안 송수신되는 커뮤니케이션 정보를 번역하여 번역 커뮤니케이션 정보를 생성하고, 번역 커뮤니케이션 정보를 개설자 장치(100) 및 참여자 장치(300)로 송신할 수 있다.
구체적으로, 회의 서버(200)는 커뮤니케이션 정보를 미리 설정된 번역 언어 종류에 대응하여 번역 커뮤니케이션 정보로 번역 및 생성할 수 있다.
여기서, 번역 커뮤니케이션 정보는 도 9에 도시된 바와 같이, 온라인 미팅이 수행되는 동안 개설자 장치(100) 및 참여자 장치(300) 간에 송수신되는 채팅 정보(TEXT)일 수 있다.
한편, 다른 실시 예에 따른, 회의 서버(200)는 온라인 미팅이 수행되는 동안 참여자 장치(300)로부터 수신되는 커뮤니케이션 정보의 수신 빈도에 기초하여 참여자 정보 별로 미팅 활동율 정보를 산출할 수 있다.
구체적으로, 다른 실시 예에 따른, 회의 서버(200)는 참여자 장치(300)로부터 수신되는 커뮤니케이션 정보의 단위 시간당 수신 횟수를 산출하고, 모든 참여자 장치(300)의 단위 시간당 수신 횟수의 수신 횟수 평균을 산출할 수 있다.
이후, 다른 실시 예에 따른, 회의 서버(200)는 수신 횟수 평균 대비 참여자 장치(300) 각각의 단위 시간당 수신 횟수의 비율을 미팅 활동율 정보로 산출할 수 있다.
다른 실시 예에 따른, 회의 서버(200)는 미팅 활동율 정보가 미리 설정된 기준 활동율 미만이면, 해당 참여자 장치(300)로 활동 독려 메시지를 송신할 수 있다.
이를 통해, 온라인 회의에 참석하여 활동이 저조한 참여자에게 활동을 독려할 수 있다.
다른 실시 예에 따른, 회의 서버(200)는 참여자 장치(300)로부터 수신되는 영상으로부터 참여자의 얼굴을 인식하고, 얼굴 인식 결과에 기초하여 미팅 참석 여부 정보를 생성할 수 있다.
구체적으로, 회의 서버(200)는 미리 저장된 참여자의 얼굴 이미지와 참여자 장치(300)로부터 수신되는 영상에서 인식된 얼굴 이미지를 비교하고, 비교 결과, 미리 저장된 참여자의 얼굴 이미지와 참여자 장치(300)로부터 수신되는 영상에서 인식된 얼굴 이미지가 동일하여 참여자의 얼굴이 인식되면 미팅 참석을 나타내는 미팅 참석 여부 정보를 생성할 수 있다.
이후, 미리 설정된 산정 기간 동안 개최된 온라인 미팅의 개최 횟수 대비 미팅 참석을 나타내는 미팅 참석 여부 정보의 개수 간의 비율을 미팅 참석율 정보로 산출할 수 있다.
이를 통해, 온라인 회의에 참석하는 참여자의 미팅 참석율을 별도의 확인과 기록없이 자동적으로 산출할 수 있다.
다른 실시 예에 따른, 회의 서버(200)는 참여자 장치(300)로부터 수신되는 영상으로부터 참여자의 안구를 인식하고, 안구의 움직임으로부터 참여자의 시선 이동 여부를 확인할 수 있다.
회의 서버(200)는 확인된 시선 이동 여부에 기초하여 참여자의 시선이 움직이지 않는 시간을 나타내는 시선 부동 시간 정보를 생성하고, 시선 부동 시간 정보가 미리 설정된 기준 부동 시간을 초과하면 회의 집중 알림을 참여자 장치(300)로 송신할 수 있다.
이러한, 회의 서버(200)는 상술된 기능을 수행하기 위해, 도 3에 도시된 바와 같이, 정보 및 데이터를 송수신하는 통신부(210), 정보 및 데이터를 저장하는 저장부(230) 및 다른 구성요소를 제어하는 프로세서(220)를 포함할 수 있다.
또 다른 실시 예에 따른, 회의 서버(200)는 온라인 회의에서 사용되는 언어의 종류의 사용 빈도 지수에 기초하여 메인 피번역 언어 종류 정보를 설정할 수 있다.
구체적으로, 또 다른 실시 예에 따른, 회의 서버(200)는 번역이 가능한 언어의 종류 별로 사용 빈도 지수를 산출하고, 사용 빈도 지수가 높은 순으로 미리 설정된 개수만큼의 언어의 종류를 메인 피번역 언어 종류 정보를 설정할 수 있다.
여기서, 메인 피번역 언어 종류 정보는 번역을 수행하는데 있어서, 피번역 언어의 종류를 나타내는 정보일 수 있다.
이를 위해, 또 다른 실시 예에 따른, 회의 서버(200)는 미팅 발표 자료에 사용된 언어의 종류를 확인하고 해당 언어의 종류의 사용 빈도 지수를 증가시켜 산출하고, 개설자 장치(100) 및 참여자 장치(300) 각각으로부터 수신된 사용 언어 종류 정보에 대응되는 언어의 종류의 사용 빈도 지수를 증가시켜 산출할 수 있다.
또 다른 실시 예에 따른, 회의 서버(200)는 온라인 회의에서 사용되는 커뮤니케이션 정보를 번역하는 경우, 커뮤니케이션 정보의 언어를 분석하여 언어의 종류를 확인하지 않고, 설정된 메인 피번역 언어 종류 정보에 기초하여 번역 모델을 선택하고, 선택된 번역 모델을 이용하여 커뮤니케이션 정보를 번역 커뮤니케이션 정보로 번역할 수 있다.
이를 통해, 다양한 종류의 언어가 사용되는 온라인 회의에서 번역을 수행할 때, 피번역 언어의 종류를 매번 확인하지 않고 사용 빈도가 다수인 언어의 종류를 나타내는 메인 피번역 언어 종류 정보에 대응하여 번역을 수행함으로써, 번역의 소요시간을 단축할 수 있다.
또 다른 실시 예에 따른, 회의 서버(200)는 참여자 장치(300)로부터 수신되는 영상 및 음향을 분석하여 참여자의 인원 수 정보를 생성하고, 상기 인원 수 정보가 나타내는 인원 수가 복수이면, 다른 참여자 장치(300) 및 개설자 장치(100)에서 번역 커뮤니케이션 정보를 참여자에 따라 구별하여 출력하도록 번역 커뮤니케이션 정보에 참여자 식별 정보를 매칭시킬 수 있다.
이에 따라, 다른 참여자 장치(300) 및 개설자 장치(100)는 하나의 참여자 장치(300)를 통해 복수의 참여자가 온라인 회의에 참여한 경우, 복수의 참여자 각각의 대화를 포함하는 커뮤니케이션 정보가 번역된 번역 커뮤니케이션 정보를 참여자 별로 다른 음색의 음향으로 출력하거나, 다른 글꼴 또는 다른 글자색의 텍스트로 출력할 수 있다.
이를 통해, 하나의 참여자 장치(300)를 통해 복수의 참여자가 온라인 회의에 참여하더라도, 개설자 및 다른 참여자가 하나의 참여자 장치(300)로 온라인 회의에 참석한 복수의 참여자 각각의 대화를 구별할 수 있다.
또 다른 실시 예에 따른 회의 서버(200)는 참여자 장치(300)로부터 수신되는 영상 및 음성에 기초하여 참여자의 회의 집중도 정보를 산출하고, 회의 집중도 정보가 기준 회의 집중도 정보 미만인 경우, 번역 커뮤니케이션 정보의 번역 비율을 감소시킬 수 있다.
여기서, 회의 집중도 정보는 참여자가 회의를 집중하는 정도를 나타내는 정보일 수 있고, 또 다른 실시 예에 따른 회의 서버(200)는 참여자 장치(300)로부터 수신되는 영상 내 해당 참여자의 안구 움직임 및 안면 움직임과 참여자 장치(300)로부터 수신되는 음성의 음성 발화 빈도를 이용하여 회의 집중도 정보를 산출할 수 있다.
또 다른 실시 예에 따른 회의 서버(200)는 회의 집중도 정보가 기준 회의 집중도 정보 미만인 경우, 참여자가 회의에 집중하지 못하는 것으로 판단하고, 번역 커뮤니케이션 정보의 번역 비율을 감소시킬 수 있다.
여기서 번역 비율은 복수의 참여자 각각의 대화를 포함하는 커뮤니케이션 정보 중에서 번역 커뮤니케이션 정보를 제공받는 참여자가 사용하는 언어 종류가 아닌 커뮤니케이션 정보의 양 대비 커뮤니케이션 정보를 제공받는 참여자가 사용하는 언어 종류로 번역되는 커뮤니케이션 정보의 양의 비율일 수 있다.
즉, 또 다른 실시 예에 따른 회의 서버(200)는 회의 집중도 정보가 기준 회의 집중도 정보 미만인 경우, 커뮤니케이션 정보 중에서 번역되지 않고 참여자에게 제공되는 정보의 양을 증가시킬 수 있다.
이에 따라, 또 다른 실시 예에 따른 회의 서버(200)는 회의에 집중하지 않는 참여자에게, 참여자가 사용하는 언어 종류와 다른 언어 종류의 커뮤니케이션 정보를 제공함으로써, 참여자가 회의에 집중하도록 유도할 수 있다.
프로세서(220)는 상술된 각 구성 요소의 작동을 수행할 수 있으며, 하나 이상의 코어(core, 미도시) 및 다른 구성 요소와 신호를 송수신하는 연결 통로(예를 들어, 버스(bus) 등)를 포함할 수 있다.
프로세서(220)는 저장부(230)에 저장된 하나 이상의 인스트럭션을 실행함으로써, 상술된 각 구성 요소의 작동을 수행하도록 구성될 수 있다.
저장부(230)에는 프로세서(220)의 처리 및 제어를 위한 프로그램들(하나 이상의 인스트럭션들)을 저장할 수 있다. 저장부(230)에 저장된 프로그램들은 기능에 따라 복수 개의 모듈들로 구분될 수 있다.
이제까지 본 발명에 대하여 바람직한 실시 예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.
이상과 같이, 본 발명은 비록 한정된 실시 예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상과 아래에 기재될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.
100: 개설자 장치
200: 회의 서버
300: 참여자 장치

Claims (8)

  1. 개설자로부터 개설자 정보 및 개설 설정 정보를 입력받고, 온라인 회의실의 개설을 요청하는 개설 요청이 입력되면 상기 개설 설정 정보와 함께 개설 요청 신호를 송신하고, 상기 온라인 회의실에서 진행되는 온라인 미팅의 개최를 요청하는 개최 요청이 입력되면 개최 요청 신호를 송신하는 개설자 장치;
    상기 개설 요청 신호가 수신되면 상기 개설 설정 정보에 기초하여 상기 온라인 회의실을 개설하고, 상기 개최 요청 신호가 수신되면 상기 온라인 미팅을 개최하는 회의 서버; 및
    참여자로부터 참여자 정보를 입력받고, 상기 온라인 회의실에 입장을 요청하는 회의실 입장 요청이 입력되면 회의실 입장 요청 신호를 상기 회의 서버로 송신하는 참여자 장치;를 포함하고,
    상기 회의 서버는
    상기 온라인 미팅의 기능을 제어할 수 있는 권한의 범위가 설정된 미팅 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정하고, 온라인 미팅이 수행되는 동안 송수신되는 커뮤니케이션 정보를 번역하여 번역 커뮤니케이션 정보를 생성하고, 상기 번역 커뮤니케이션 정보를 상기 개설자 장치 및 상기 참여자 장치로 송신하고,
    상기 회의 서버는
    상기 커뮤니케이션 정보를 미리 설정된 번역 언어 종류에 대응하여 번역 커뮤니케이션 정보로 번역 및 생성하고,
    상기 커뮤니케이션 정보는
    상기 온라인 미팅이 수행되는 동안 상기 개설자 장치 및 상기 참여자 장치 간에 송수신되는 채팅 정보이고,
    상기 회의 서버는
    상기 온라인 미팅이 수행되는 동안 상기 참여자 장치로부터 수신되는 커뮤니케이션 정보의 수신 빈도에 기초하여 상기 참여자 정보 별로 미팅 활동율 정보를 산출하고, 상기 미팅 활동율 정보에 기초하여 활동 독려 메시지를 상기 참여자 장치로 송신하고, 상기 참여자 장치로부터 수신되는 영상으로부터 상기 참여자의 안구를 인식하고, 상기 안구를 인식한 결과에 기초하여 시선 부동 시간 정보를 생성하고, 상기 시선 부동 시간 정보가 미리 설정된 기준 부동 시간을 초과하면 회의 집중 알림을 상기 참여자 장치로 송신하고,
    상기 회의 서버는
    미리 저장된 참여자의 제1 얼굴 이미지와 상기 참여자 장치로부터 수신되는 영상에서 인식된 제2 얼굴 이미지를 비교하고, 비교 결과, 상기 제1 얼굴 이미지와 상기 제2 얼굴 이미지가 동일하여 상기 참여자의 얼굴이 인식되면 상기 참여자의 미팅 참석을 나타내는 미팅 참석 여부 정보를 생성하고, 미리 설정된 산정 기간 동안 개최된 온라인 미팅의 개최 횟수 대비 미팅 참석을 나타내는 미팅 참석 여부 정보의 개수 간의 비율을 미팅 참석율 정보로 산출하고,
    상기 회의 서버는
    상기 참여자 장치로부터 수신되는 영상 및 음향을 분석하여 참여자의 인원 수 정보를 생성하고, 상기 인원 수 정보가 나타내는 인원 수가 복수이면, 다른 참여자 장치 및 상기 개설자 장치에서 상기 번역 커뮤니케이션 정보를 참여자에 따라 구별하여 출력하도록 번역 커뮤니케이션 정보에 참여자 식별 정보를 매칭시키고,
    상기 다른 참여자 장치 및 상기 개설자 장치는
    하나의 참여자 장치를 통해 복수의 참여자가 온라인 회의에 참여한 경우, 해당 복수의 참여자의 상기 번역 커뮤니케이션 정보를 참여자 별로 다른 음색의 음향으로 출력하거나, 다른 글꼴 또는 다른 글자색의 텍스트로 출력하고,
    상기 회의 서버는
    상기 참여자 장치로부터 수신되는 영상 및 음성에 기초하여 참여자의 회의 집중도 정보를 산출하고, 상기 회의 집중도 정보가 기준 회의 집중도 정보 미만인 경우, 해당 참여자 장치로 제공되는 번역 커뮤니케이션 정보의 번역 비율을 감소시키고,
    상기 번역 비율은
    복수의 참여자 각각의 대화를 포함하는 커뮤니케이션 정보 중에서 번역 커뮤니케이션 정보를 제공받는 참여자가 사용하는 언어 종류가 아닌 커뮤니케이션 정보의 양 대비 커뮤니케이션 정보를 제공받는 참여자가 사용하는 언어 종류로 번역되는 커뮤니케이션 정보의 양의 비율인 것을 특징으로 하는
    번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템.
  2. 제1항에 있어서,
    상기 회의 서버는
    상기 미팅 자격 정보 중에서 미팅 발표 자료 및 상기 미팅 발표 자료에 대응되어 입력되는 주석 정보가 상기 개설자 장치 및 상기 참여자 장치에 표시되도록 하는 프리젠테이션 기능을 제어 가능한 발표자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정하는 것을 특징으로 하는
    번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템.
  3. 제2항에 있어서,
    상기 회의 서버는
    상기 미팅 자격 정보 중에서 상기 개설자 장치 또는 상기 참여자 장치에 표시되는 화면이 다른 장치에 표시되도록 하는 화면 공유 기능을 제어 가능한 발표자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정하는 것을 특징으로 하는
    번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템.
  4. 제3항에 있어서,
    상기 회의 서버는
    상기 미팅 자격 정보 중에서 복수의 설문 유형 중에서 어느 하나의 설문 유형에 대응되는 설문 조사가 상기 개설자 장치 및 상기 참여자 장치에서 수행되도록 하는 설문 조사 기능을 제어 가능한 상기 발표자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정하는 것을 특징으로 하는
    번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템.
  5. 제1항에 있어서,
    상기 회의 서버는
    상기 미팅 자격 정보 중에서 상기 온라인 미팅이 수행되는 동안 송수신되는 영상과 음향을 기록하는 녹화 기능을 제어 가능한 주관자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정하는 것을 특징으로 하는
    번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템.
  6. 제5항에 있어서,
    상기 회의 서버는
    상기 미팅 자격 정보 중에서 상기 온라인 미팅이 수행되는 동안 송수신 되는 음향 내 음성을 인식하여 텍스트로 변환하고, 변환된 텍스트를 미리 설정된 번역 언어 종류에 대응하여 번역 텍스트로 번역 및 생성하는 강의 노트 기능을 제어 가능한 주관자 자격 정보를 상기 개설자 정보 및 상기 참여자 정보에 설정하는 것을 특징으로 하는
    번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템.
  7. 삭제
  8. 삭제
KR1020210169727A 2021-12-01 2021-12-01 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템 KR102412823B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210169727A KR102412823B1 (ko) 2021-12-01 2021-12-01 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210169727A KR102412823B1 (ko) 2021-12-01 2021-12-01 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템

Publications (1)

Publication Number Publication Date
KR102412823B1 true KR102412823B1 (ko) 2022-06-24

Family

ID=82216195

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210169727A KR102412823B1 (ko) 2021-12-01 2021-12-01 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템

Country Status (1)

Country Link
KR (1) KR102412823B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102564560B1 (ko) * 2022-09-23 2023-08-09 미디어젠(주) 투명 디스플레이를 이용한 양방향 통역 장치
KR102642263B1 (ko) * 2023-02-01 2024-02-29 김기환 실시간 레이어 공유가 가능한 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090001801A (ko) 2007-05-22 2009-01-09 시남근 교학 커뮤니티 제공시스템 및 그 방법
KR20160020924A (ko) * 2014-08-14 2016-02-24 (주)씨제이포유 멀티미디어 학습 평가 시스템
KR101768364B1 (ko) * 2016-03-22 2017-08-17 (주)유프리즘 진행 절차가 정의된 다자간 전자회의 방법
KR20190124848A (ko) * 2018-04-27 2019-11-06 유의식 다자간 온라인 미팅 시스템 및 그 미팅 방법
KR102306105B1 (ko) * 2020-11-13 2021-09-27 최현식 바이어 및 셀러의 자동 매칭을 통한 무역 솔루션 제공 방법 및 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090001801A (ko) 2007-05-22 2009-01-09 시남근 교학 커뮤니티 제공시스템 및 그 방법
KR20160020924A (ko) * 2014-08-14 2016-02-24 (주)씨제이포유 멀티미디어 학습 평가 시스템
KR101768364B1 (ko) * 2016-03-22 2017-08-17 (주)유프리즘 진행 절차가 정의된 다자간 전자회의 방법
KR20190124848A (ko) * 2018-04-27 2019-11-06 유의식 다자간 온라인 미팅 시스템 및 그 미팅 방법
KR102306105B1 (ko) * 2020-11-13 2021-09-27 최현식 바이어 및 셀러의 자동 매칭을 통한 무역 솔루션 제공 방법 및 시스템

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102564560B1 (ko) * 2022-09-23 2023-08-09 미디어젠(주) 투명 디스플레이를 이용한 양방향 통역 장치
WO2024063226A1 (ko) * 2022-09-23 2024-03-28 미디어젠 주식회사 투명 디스플레이를 이용한 양방향 통역 장치
KR102642263B1 (ko) * 2023-02-01 2024-02-29 김기환 실시간 레이어 공유가 가능한 시스템

Similar Documents

Publication Publication Date Title
US8243116B2 (en) Method and system for modifying non-verbal behavior for social appropriateness in video conferencing and other computer mediated communications
JP3930022B2 (ja) 遠隔教育システム、受講確認方法および受講確認プログラム
Ziegler et al. Present? Remote? Remotely present! New technological approaches to remote simultaneous conference interpreting
KR102412823B1 (ko) 번역 기능을 제공하는 실시간 양방향 온라인 회의 시스템
US20100253689A1 (en) Providing descriptions of non-verbal communications to video telephony participants who are not video-enabled
CN113170076A (zh) 用于通信会话的序列事件的动态策展
US11539920B1 (en) Sidebar conversations
CN111556279A (zh) 即时会话的监控方法和通信方法
KR20200043658A (ko) Vr 발표 및 면접 훈련 시스템
WO2022193635A1 (zh) 客服服务系统、方法、装置、电子设备及存储介质
CN111133426A (zh) 协作装置
CN117321984A (zh) 基于内容类型或参与者角色的视频会议电话中的空间音频
McDonnell et al. “Easier or Harder, Depending on Who the Hearing Person Is”: Codesigning Videoconferencing Tools for Small Groups with Mixed Hearing Status
JP2020136921A (ja) ビデオ通話システム、およびコンピュータプログラム
US20230291868A1 (en) Indication of Non-Verbal Cues Within a Video Communication Session
Tanaka et al. Appearance, motion, and embodiment: unpacking avatars by fine‐grained communication analysis
JP2023099309A (ja) アバターを通じて映像の音声を手話に通訳する方法、コンピュータ装置、およびコンピュータプログラム
US20220308825A1 (en) Automatic toggling of a mute setting during a communication session
KR102278162B1 (ko) 사용자와 상호작용하는 스피치 보조 로봇의 동작 방법
US20240154833A1 (en) Meeting inputs
US20180081352A1 (en) Real-time analysis of events for microphone delivery
US11830120B2 (en) Speech image providing method and computing device for performing the same
US20240094976A1 (en) Videoconference Automatic Mute Control System
US12035075B1 (en) Embodied interface for face-to-face communication between humans and artificial intelligence agents
JP7231301B2 (ja) オンライン会議サポートシステムおよびオンライン会議サポートプログラム

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant