KR101902464B1 - ＷｅｂＲＴＣ를 이용한 회의록 작성 방법 및 시스템 - Google Patents

ＷｅｂＲＴＣ를 이용한 회의록 작성 방법 및 시스템 Download PDF

Info

Publication number
KR101902464B1
KR101902464B1 KR1020160074048A KR20160074048A KR101902464B1 KR 101902464 B1 KR101902464 B1 KR 101902464B1 KR 1020160074048 A KR1020160074048 A KR 1020160074048A KR 20160074048 A KR20160074048 A KR 20160074048A KR 101902464 B1 KR101902464 B1 KR 101902464B1
Authority
KR
South Korea
Prior art keywords
data
server
webrtc
minutes
conference
Prior art date
Application number
KR1020160074048A
Other languages
English (en)
Other versions
KR20170141320A (ko
Inventor
이철우
이락규
박용성
박태진
Original Assignee
주식회사 두두원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 두두원 filed Critical 주식회사 두두원
Priority to KR1020160074048A priority Critical patent/KR101902464B1/ko
Publication of KR20170141320A publication Critical patent/KR20170141320A/ko
Application granted granted Critical
Publication of KR101902464B1 publication Critical patent/KR101902464B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • G06F17/21—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827—Network arrangements for conference optimisation or adaptation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1831—Tracking arrangements for later retrieval, e.g. recording contents, participants activities or behavior, network status

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 WebRTC를 이용한 화상 회의 서비스에 관한 것으로, WebRTC 기반 화상회의를 위해 WebRTC를 지원하는 웹 브라우저가 설치된 복수의 사용자 기기들 사이에 화상회의 채널을 할당하고, 상기 화상회의에 참여한 사용자 기기에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성 정보를 회의록 형태로 병합하여 WebRTC 서버에 기록(저장)한 후, 온라인을 통해 상기 기록(저장)된 회의록을 신속하게 검색하여 상기 사용자 기기들로 전송할 수 있는 WebRTC를 이용한 회의록 작성 방법 및 시스템을 제공할 수 있다.
이를 통해, 기록 또는 저장된 회의 내용을 언제든 검색 및 제공할 수 있어, 회의에 참여하지 못한 참가자도 쉽게 회의 내용을 리뷰할 수 있어 회의 내용 숙지 및 업무 파악이 가능한 장점이 있다.

Description

ＷｅｂＲＴＣ를 이용한 회의록 작성 방법 및 시스템{Method for making Conference Record File using WebRTC and system at the same}
본 발명은 WebRTC를 이용한 화상 회의 서비스에 관한 것으로, 더욱 상세하게는 기록 또는 저장된 회의 내용을 언제든 검색 및 제공할 수 있어, 회의에 참여하지 못한 참가자도 쉽게 회의 내용을 리뷰할 수 있어 회의 내용 숙지 및 업무 파악이 가능한 회의록 작성 방법 및 시스템에 관한 것이다.
본 발명은 미래창조과학부의 2014년 특구기술사업화 사업의 일환으로 수행한 연구로부터 도출된 것이다[과제고유번호 : 1711019812(세부번호 : 14DDI089), 과제명 : 웹 리얼타임 커뮤니케이션을 위한 협업 시스템의 개발 및 사업화].
최근 웹 브라우저에서의 음성통신, 화상회의 등의 실시간 통신을 위한 표준기술이 IETF(Internet Engineering Task Force)의 RTCWeb(Real-Time Communication in Web) 워킹 그룹을 통해 표준화되고 있으며, 게다가 Google 등에서 별도의 화상통화 서버나 어플리케이션 또는 소프트웨어 등을 사용하지 않고 화상통화 서비스에 대해 웹 브라우저만을 사용하여 클라이언트 간 화상통화 서비스를 제공해 주는 WebRTC(Web Real-Time Communication) 기술을 선보였다. 여기서, WebRTC란 웹 브라우저 간에 플러그인(Plug-in)의 도움없이 상호 통신 가능하도록 하는 API(Application Program Interface)를 의미하고, 음성은 물론 영상과 P2P(Peer-to-Peer) 파일 공유 등으로 활용 가능한 도구이다. 이를 활용하여 사용자는 시간과 장소의 제약 없이 인터넷이 연결되고, 웹 브라우저의 사용이 가능한 환경이면 상대방과 언제든지 실시간 화상통화가 가능하게 되었다.
도 1은 일반적인 WebRTC를 지원하는 브라우저에서의 실시간 멀티미디어 통신의 개념을 나타낸 도면이고, 현재 WebRTC를 지원하는 브라우저는 크롬(Chrome), 파이어폭스(firefox)가 있으며, WebRTC를 이용한 기능은 Javascript를 위한 HTML5로 구현되고 있다.
도 1을 참조하면, 음성, 영상 등의 멀티미디어 데이터는 웹 브라우저 간에 직접 연결을 통해 전송된다. 이에 비해 웹 브라우저 간의 세션 연결을 위한 신호 경로는 웹 서버와 같은 별도의 서버를 통해 이루어질 수 있다. 또한, 신호 프로토콜은 기존의 세션 제어 프로토콜(SIP : Session Initiation Protocol)이 사용될 수 있으며 그 밖에 XMPP(Extensible Messaging and Presence Protocol)등 다양한 프로토콜이 이용될 수 있다.
이러한 WebRTC 기반의 화상통화 서비스를 이용하면, 기존 화상회의 방식에 비하여 음성통화, 오디오 컨퍼런싱, 비디오 컨퍼런싱 비용을 대폭 절감할 수 있고 사용자들의 편의성이 증대되었으나, 각 사용자는 상대방 단말에 의해 촬영되는 영상만을 자신의 단말에 디스플레이하는 수준에 머물러 있고, 문자 메시지와 사진을 공유할 수는 있으나 특정 주제에 관하여 대화를 진행하는 사용자들의 회의 내용에 대하여 별도로 기억 내지 기록을 해야 한다는 문제점은 여전히 해소되지 않고 있다.
아울러 화상회에 참석하지 못한 사용자는 어떤 내용의 회의가 진행되었는지 알 수 없어 신속한 의사결정을 할 수 없다는 단점이 존재하고 있었다.
이에 선행특허 한국공개특허 제10-2015-0000225호는 "웹 기반 회의 보조 시스템의 문서 공유 방법 및 그 시스템"에 관한 발명으로, 공유하고자 하는 공유 문서 파일을 이미지로 변환한 후 이에 대한 URL 주소를 회의 보조 시스템 서버에 등록하고, 등록된 공유 문서 이미지 파일에 대한 URL 주소를 웹 기반 회의에 참가한 회의 개설자 및 회의 참가자와 공유하는 방식이다. 이를 경우, 공유 문서 이미지 파일을 통해 회의에 대한 내용을 용이하게 파악할 수 있으나, 특정 주제에 관하여 대화를 진행하는 사용자들의 회의 내용에 대하여 별도로 기억 내지 기록을 해야 한다는 문제점이 있다.
또한, 선행특허 한국등록특허 제10-1529254호는 "전자칠판 시스템을 이용한 회의록 작성 방법"에 관한 발명으로, 전자칠판에 국한된 것으로 원격지(remote)에서 인터넷을 통해 온라인으로 연결된 다수의 회의 참석자들 간 의사소통을 원활하게 하고 효율을 높이는 데에는 제약이 있다.
1. 한국공개특허 제10-2015-0000225호(2015년 01월 02일 공개) 2. 한국등록특허 제10-1529254호(2015년 06월 10일 등록)
본 발명은 전술한 문제점을 해결하기 위하여 안출한 것으로, WebRTC 기반의 화상회의 서비스를 제공함과 동시에 이를 이용하는 사용자들의 영상과 음성을 자동으로 병합하고 저장하여 사용자들이 언제라도 회의 내용을 공유하거나 리뷰(review)할 수 있는 회의록 작성 방법 및 시스템을 제공하는 것을 목적으로 한다.
상기의 목적을 달성하기 위하여, 본 발명의 일 태양에 따르면, WebRTC 기반 화상회의를 위해 WebRTC를 지원하는 웹 브라우저가 설치된 복수의 사용자 기기들 사이에 화상회의 채널을 할당하는 세션 관리 단계; 상기 화상회의에 참여한 사용자 기기에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성 정보를 일정 시간마다 수신하여 저장하는 수신 단계; 상기 반복 수신된 영상 및 음성 정보 파일을 최종으로 병합하여 WebRTC 서버에 기록(저장)하는 병합 단계; 및 상기 단계별 동작과 데이터 처리를 제어하는 제어 단계;를 포함하는 WebRTC를 이용한 회의록 작성 방법을 제공할 수 있다.
또한, 상기 수신 단계는 WebRTC를 이용하여 상기 사용자 기기에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성 정보를 일정 시간마다 WebRTC 서버에서 수신하여 저장할 수 있다. 물론, 상황에 따라 상기 수신된 영상 및 응성 정보 파일에 대한 URL 주소를 데이터베이스(DB)에 저장할 수도 있다.
또한, 상기 일정 시간마다 반복 저장되는 주기는 Javascript를 이용하여 HTML 문서에서 구현할 수 있다.
본 발명의 다른 태양에 따르면, WebRTC 기반 화상회의를 위해 WebRTC를 지원하는 웹 브라우저가 설치된 복수의 사용자 기기들 사이에 화상회의 채널을 할당하는 세션 관리부; 상기 화상회의에 참여한 사용자 기기에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성 정보를 일정 시간마다 수신하여 저장하는 수신부; 상기 반복 수신된 영상 및 음성 정보 파일을 최종으로 병합하여 WebRTC 서버에 기록(저장)하는 병합부; 상기 세션 관리부, 수신부 및 병합부의 동작과 데이터 처리를 제어하는 제어부;를 포함하는 WebRTC를 이용한 회의록 작성 시스템을 제공할 수 있다.
상술한 바와 같이, 본 발명에 따른 WebRTC를 이용한 회의록 작성 방법 및 시스템은 인터넷 기반 기술인 WebRTC를 이용하므로 웹 기반 회의 시스템에 광범위하게 적용할 수 있다.
또한, WebRTC를 지원하는 웹 브라우저가 설치된 사용자 기기들 사이에 화상회의 채널 할당을 통해 참가자 간 실시간 영상 회의를 진행하게 함으로써 참가자 간 의사소통 효율을 높일 수 있다.
또한, 참가자 단말에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성을 실시간 병합함으로써 실시간 회의록 작성이 가능하다는 이점이 있다.
또한, 기록 또는 저장된 회의 내용을 언제든 검색 및 제공할 수 있어, 회의에 참여하지 못한 참가자도 쉽게 회의 내용을 리뷰할 수 있어 회의 내용 숙지 및 업무 파악이 용이하다는 장점이 있다.
도 1은 일반적인 WebRTC 기반 실시간 멀티미디어 통신의 동작 구조를 나타낸 도면,
도 2는 본 발명의 바람직한 실시 예에 따른 WebRTC를 이용한 회의록 작성 시스템의 구성을 나타낸 도면,
도 3은 본 발명의 바람직한 실시 예에 따른 WebRTC 서버의 상세 구성을 도시한 블록도,
도 4는 본 발명의 바람직한 실시 예에 따라서, WebRTC를 이용한 회의록 작성 방법의 일 예를 설명하기 위한 개략적인 흐름도,
도 5는 도 4에서 적용된 회의방 개설과 세션 연결 과정(P2P)을 나타낸 흐름도,
도 6은 도 5에서 세션 연결 과정에서 서버와 클라이언트 단말 간의 시그널링 과정을 나타낸 도면,
도 7은 도 4에서의 회의록 데이터 저장 및 파일 최종 통합 과정을 나타낸 도면,
도 8 내지 도 9는 도 4의 회의록 작성 서비스의 웹 페이지 또는 앱 프로그램 화면의 일 예를 설명하기 위한 도면이다.
본 발명의 이점 및 특징, 그리고 그것을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 통해 설명될 것이다. 그러나 본 발명은 여기에서 설명되는 실시예들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 단지, 본 실시예들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 본 발명의 기술적 사상을 용이하게 실시할 수 있을 정도로 상세히 설명하기 위하여 제공되는 것이다.
도면들에 있어서, 본 발명의 실시예들은 도시된 특정 형태로 제한되는 것이 아니며 명확성을 기하기 위하여 과장된 것이다. 또한, 명세서 전체에 걸쳐서 동일한 참조번호로 표시된 부분들은 동일한 구성요소를 나타낸다.
본 명세서에서 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 또한, 명세서에서 사용되는 "포함한다" 또는 "포함하는"으로 언급된 구성요소, 단계, 동작 및 소자는 하나 이상의 다른 구성요소, 단계, 동작, 소자 및 장치의 존재 또는 추가를 의미한다.
이하에서 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예에 따른 WebRTC를 이용한 회의록 작성 시스템 및 서비스 과정을 상세히 설명한다.
도 2는 본 발명의 바람직한 실시 예에 따른 WebRTC를 이용한 회의록 작성 시스템(300)의 구성을 나타낸 도면이다.
도 2를 참조하면, 본 발명의 일 실시 예에 따른 WebRTC를 이용한 회의록 작성 시스템(300)은, WebRTC 서버(200)와, 유무선 인터넷 등의 네트워크로 연결된 복수의 사용자 단말(110, 120)을 포함한다. 또한, 상기 서버(200)와 네트워크 연결되어 수신된 데이터를 저장하거나 수신된 데이터에 대한 URL 주소를 저장하는 데이터베이스(DB)가 더 포함될 수 있다.
상기 사용자 단말(110, 120)는, 다시, WebRTC 기반 화상회의를 개설한 하나의 개설자 사용자 단말(110)과, 개설자 단말(110)의 회의에 참가하는 하나 이상의 참가자 사용자 단말(120)를 포함한다. 여기서, 사용자 단말(110, 120)는 컴퓨터, 노트북, 개인 휴대 단말기뿐만 아니라 모바일 단말기, 스마트폰 등 온라인 상태에서 WebRTC를 지원하는 웹 브라우저가 설치된 모든 기기를 포함할 수 있으며, 회의 참가자는 다수의 사용자 단말이 해당될 수 있다. 또한, 상기 WebRTC를 지원하는 웹 브라우저는 구글 크롬(Chrome), 파이어폭스(firefox) 등이 해당될 수 있다.
이때, 사용자 단말(110, 120)은 WebRTC 기반 화상회의 채널이 할당되어 화상의 중이며, 상기 사용자 단말 중 어느 하나에서, 회의록 저장 시작을 실행할 수 있다. 이하에서는 개설자 단말(110)에서 회의록 저장 시작을 실행하는 것으로 한다.
이에, 개설자 단말(110)의 회의록 저장 시작 실행과 동시에 사용자 단말(110)에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성 정보를 base64로 인코딩된 미디어 데이터 형태로 WebRTC를 지원하는 웹 브라우저 메모리에 저장하고, 일정 시간마다 상기 저장된 미디어 데이터를 WebRTC 서버(200)로 업로드 하며, 상기 회의 개설자 사용자 단말(110)의 회의록 저장 종료 실행시, 종료 직전까지 업로드된 시점부터 종료 실행 시점까지 상기 웹 브라우저 메모리에 저장된 미디어 데이터를 WebRTC 서버(200)로 업로드하며 회의록 저장을 종료한다.
상기 일정 주기는 Javascript를 이용하여 HTML 문서에서 구현할 수 있으며, Timer 기능을 이용하여 일정 주기마다 WebRTC를 지원하는 웹 브라우저 메모리에 저장된 미디어 데이터를 반복적으로 WebRTC 서버(200)로 업로드 한다.
본 발명에서, 상기 업로드는 Ajax(Asynchronous JavaScript and XML) 기술을 이용하여 구현할 수 있다. 여기서, Ajax에 대해 간략하게 설명하면 다음과 같다.
즉, javascript를 이용해 비동기적으로 서버와 브라우저가 데이터를 주고받는 기술로서, 웹 페이지 이동 없이 고속으로 화면이 전환되거나, 서버 처리를 기다리지 않는 비동기 요청이 가능하며, 서버 측 처리를 각 브라우저 기기로 분산이 가능하고, 송수신하는 데이터의 양을 줄일 수 있는 장점이 있다.
상기 송수신 데이터는 Ajax 환경에서 데이터 송수신에 많이 사용되는 JSON(JavaScript Object Notation) 포맷을 사용하여 구현하였으며, 상기 JSON은 경량의 데이터 교환 방식으로 javascript에서 숫자와 배열 등을 만드는 형식을 차용하여 다른 언어에서도 사용할 수 있도록 한 텍스트 형식이다.
물론, 본 발명은 WebRTC라는 인터넷 기반 기술을 이용하여 화상회의 참가자간 실시간 영상 및 음성을 공유할 수 있으며, 또 다른 인터넷 기반 기술인 HTML(Hyper Text Markup Language)을 포함할 수 있고, 바람직하게는 HTML5를 이용하여 WebRTC 기능을 구현할 수 있다.
HTML5에 대해 간략하게 설명하면 다음과 같다. 즉, 현재까지는 오디오를 활용하거나 비디오를 재생하는 등 무언가 사용자와 상호작용하는 서비스를 제공할 때는 플래시라는 Third-Party 플러그인을 이용한 형태로 가능하였지만, 지금 표준이 제정되고 있는 HTML5의 경우 표준을 지키는 브라우저라면 별도의 플러그인을 사용하지 않고도 사용자와 상호작용하는 서비스를 제공할 수 있다.
또한, 사용자 기기의 다양화를 고려할 때 어떠한 서비스를 모든 플랫폼에서 웹으로 제공한다면, 가장 비용 효율적인 개발이 가능하며, 복수의 기기를 지원할 때 복수의 기기별 복수 OS를 지원해야 하는 것과는 달리, 단 하나의 웹 어플리케이션으로 서비스를 제공할 수 있다는 장점이 있다.
특히, HTML5는 사용자 단말에 부착된 카메라 및 마이크도 제어할 수 있는 등, 기존 웹 어플리케이션의 한계를 뛰어넘는 작업을 할 수 있다.
따라서, WebRTC 서버(200)는 상기 회의 개설자 사용자 기기(110)로부터 회의록 저장이 개시되고 미디어 데이터가 수신되면, 수신된 미디어 데이터들을 저장하고, 상기 회의 개설자 사용자 기기(110)로부터 회의록 저장이 종료되면 상시 수신된 미디어 데이터들을 병합하여 하나의 회의록 파일을 생성하여 저장한다.
WebRTC 서버(200)는 Apache Tomcat를 이용하여 구성할 수 있으며, Javascript로 구현된 서버 기능은 HTML 문서에 임베딩하여 사용자 기기의 웹 페이지 내에서 서버와 상호작용 없이 데이터 처리에 사용된다.
본 발명은, WebRTC 기반 화상회의를 위해 WebRTC를 지원하는 웹 브라우저가 설치된 복수의 사용자 기기들 사이에 화상회의 채널을 할당하고, 상기 화상회의에 참여한 사용자 기기에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성 정보를 회의록 형태로 병합하여 WebRTC 서버에 기록(저장)한 후, 온라인을 통해 상기 기록(저장)된 회의록을 신속하게 검색하여 상기 사용자 기기들로 전송할 수 있는 WebRTC를 이용한 회의록 작성 방법 및 시스템을 제공할 수 있다.
이를 위해, WebRTC 서버(200)는 도 3에 도시된 바와 같이, 서버 통신부, 병합부, 세션관리부 및 제어부를 포함한다.
서버 통신부(210)는 개설자 단말(110) 또는 참가자 단말(120)로부터 회의록 저장 시작 시, 일정 시간 동안 반복적으로 미디어 데이터를 수신하는 구성으로, 전술한 바와 같이, 개설자 단말(110)로부터 전송된 미디어 데이터를 수신하여 WebRTC 서버(200)에 저장하는 것으로 한다.
물론, 상황에 따라 서버 통신부(210)는 상기 수신된 미디어 데이터를 저장한 파일에 대한 URL 주소를 데이터베이스(DB)에 저장할 수도 있다.
병합부(220)는 회의 개설자 사용자 단말(110)로부터 회의록 저장 종료 시, 상기 저장된 미디어 데이터를 하나의 회의록 형태로 병합하여 WebRTC 서버(200)에 저장하고, 저장된 회의록 파일에 대한 URL 주소를 데이터베이스(DB)에 저장한다.
상기 저장된 URL 주소는 향후 회의록 검색시 검색된 회의록 파일을 검색 단말로 전송할 때 사용될 수 있다.
본 발명에서, 상기 수신된 미디어 데이터들을 하나의 회의록 파일 형태로 병합하는 것은 HTML 예를 들어, HTML5 기능 자체로는 안되고, 다수의 미디어 데이터를 하나의 데이터 파일로 병합해 주는 작업이 선행되어야 하는데, 상기 병합부(220)에서 이와 같은 기능을 수행한다.
이때, 병합부(220)는 상기 다수의 미디어 데이터를 base64로 디코딩하여 WebRTC 서버(200)에 저장한다.
세션 관리부(230)는 WebRTC를 지원하는 웹 브라우저가 설치된 복수의 사용자 기기 중 어느 하나로부터 연결요청이 수신되면, 상기 연결요청에 대응하는 타 사용자 기기 사이에 화상회의 채널을 할당하여 화상회의를 진행할 수 있게 한다.
제어부(240)는 상기 세션 관리부, 서버 통신부 및 병합부의 동작과 데이터 처리를 제어한다.
WebRTC 서버(200)는 WebRTC 기반 화상회의 서비스를 제공하는 구성으로, 본 발명에서는 WebRTC를 지원하는 웹 브라우저가 설치된 복수의 사용자 기기 사이에 화상회의 채널을 할당하고, 상호 연결된 사용자 기기에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성 정보를 병합하여 하나의 회의록 형태로 제공한다.
이때, WebRTC 서버(200)는 WebRTC 기반 화상회의를 개설한 회의 방에 대한 정보들 예를 들어, 회의 방 이름, 회의 방 개설자, 회의 방 개설일, 참여 인원, 회의 방에 참가한 참가자 정보 등을 관리할 수 있고, 해당 회의 방과 해당 방에 대응하는 회의록 파일에 대한 URL 주소를 함께 관리할 수도 있다.
나아가, WebRTC 서버(200)는 회의록 파일에 대한 URL 주소를 WebRTC 서버에 접속하여 회의록 검색을 수행하는 하나 이상의 참가자 기기로 회의록 검색 결과로 제공할 수 있다.
이와 같은 본 발명의 시스템 구현을 위하여 서버-클라이언트 모델이 사용될 수 있으며, 사용자 인터페이스(UI)를 포함하는 웹 페이지 전송을 위해 일반적인 웹 서버 및 웹 브라우저를 사용한다.
나아가 본 발명에 따른 시스템의 실질적인 기능의 구현을 위해 HTML5, Ajax를 사용할 수 있으며, 클라이언트 상으로 전송된 웹 페이지와 웹 서버는 Ajax를 이용한 JSON 포맷을 통해서 데이터 송수신을 할 수 있다.
이때, WebRTC 서버(200)는 사용자 기기(110 내지 120)들의 접속에 따른 사용자 인증 절차, 회의 방 리스트 제공, 회의 방 접속 및 회의 녹화하기 등의 서비스 페이지 제공을 위한 준비를 수행할 수 있다.
이하에서, 도 2 및 도 3의 회의록 작성 시스템을 이용하여 본 발명에 따른 회의록 작성 서비스 과정을 도 4 내지 도 9를 참조하여 자세히 설명한다.
도 4는 본 발명의 바람직한 실시 예에 따른, WebRTC를 이용한 회의록 작성 방법의 개략적인 흐름도이고, 도 5는 도 4에서 적용된 회의방 개설과 세션 연결 과정(P2P)을 나타낸 흐름도이고, 도 6은 도 5에서 세션 연결 과정에서 서버와 클라이언트 단말 간의 시그널링 과정을 나타낸 도면이고, 도 7은 도 4에서의 회의록 데이터 저장 및 파일 최종 통합 과정을 나타낸 도면이고, 도 8 내지 도 9는 도 4의 회의록 작성 서비스의 웹 페이지 또는 앱 프로그램 화면의 일 예를 설명하기 위한 도면이다.
먼저, 사용자는 사용자 단말을 통해 서버에 접속하여 본 발명에 따른 WebRTC 기반 화상회의 서비스 회원으로 가입할 수 있고, WebRTC 기반 화상회의 서비스 프로그램을 다운로드 받아 설치하고 실행할 수 있다. 이때, 서버는 본 발명에 따른 화상회의 서비스 회원 가입과 사용자 인증을 위해 다수의 사용자 단말(110 또는120)들의 계정 등록을 위한 절차 수행을 지원할 수 있다.
또한, 서버는 각 사용자 단말(110 또는 120)의 접속 여부를 확인하고, 서비스 회원으로 가입한 다수의 사용자 중에서 어느 하나의 사용자 단말(110 또는 120)이 접속하면 입력된 사용자 계정 정보를 통해 해당 사용자에 대한 사용자 인증을 수행한다(S410). 이때, 사용자 계정정보는 시스템 로그인을 위한 아이디(ID), 패스워드(Pass word), 공인인증서 등의 로그인을 위한 정보가 해당될 수 있다.
이어, 각 사용자 단말(110 또는 120))의 화상 회의 참가 신청에 따라, WebRTC 서버(200)를 통해 개설자 단말(110) 및 참가자 단말(120)간에 화상 회의 채널이 할당되고, WebRTC 기반 화상 회의가 시작된다. 이에 대해서는 도 5 및 도 6을 참조하여 후술하면 다음과 같다.
도 5 및 도 6을 참조하면, 서버(200)가 개설자 단말(110) 또는 회의 참가자 단말(120)로부터 회의 참가 메시지를 수신받고(S610, S612)), WebRTC 기반 회의실을 개설한다(S510). 이어, 서버(200)는 회의 참석자 리스트를 조회하고, 조회 결과 참석자 리스트에 해당되면 해당 참석자, 즉 개설자 단말(110)에게 회의 참석자 리스트를 전송하거나(S611) 참가자 단말(120)에게 회의 참석자 리스트를 전송한다(613). 이어, 세션 연결(session connection)로 서버를 이용한 P2P 연결 구성과 파일 공유를 위한 시그널 처리 과정을 수행한다. 즉, 서버는 WebRT 시그널링 메시지를 수신하고(S530), 각 Offer 시그널링 메시지, Answer 시그널링 메시지, Candidate 메시지에 대해, 시그널 수신자를 조회하고(S540), 조회 결과 해당 참석자 단말에게 WebRTC 시그널링 메시지를 송신한다(S550). 이에 대해, 도 6을 참조하여, 보다 자세히 살펴보면, 서버(200)가 참가자 단말(120) 피어로부터 Offer 시그널링 메시지를 수신받으면(S620), 시그널 수신자 조회후 개설자 단말(110)로 수신받은 Offer 시그널링 메시지를 전송하여(621) 개설자 단말(110)에서 Answer 피어를 생성하고, 서버로 Answer 시그널링 메시지를 전송하고(622)하면, 서버(200)는 시그널 수신자 조회후 참가자 단말(120)로 수신받은 Answer 시그널링 메시지를 전송한다(S623). 참가자 단말(120)은 서버(200)에서 Offer 시그널링 메시지에 대한 응답으로 전송받은 메세지가 answer 라면, RTCPeerConnection은 원격지 SessionDescription을 설정하고 통신을 시작한다 만약, 개설자 단말(110)로부터 전송된 메시지가 Offer 시그널링 메시지라면, RTCPeerConnection는 원격지 SessionDescription을 설정하고 개설자 단말(110)에게 Answer 시그널링 메시지를 전송하고, RTCPeerConnection startIce()함수를 호출하여 연결을 시작하고, 개설자 단말(110)과 참가자 단말(120)은 서로를 발견하고 자신들의 기능에 대한 정보를 교환하고, 통화 세션을 초기화하고, 실시간 데이터 통신이 시작된다(S624 내지 S630).
도 5 및 도 6에 살펴본 바와 같이, 세션 연결(session connection)로 서버를 이용한 P2P 연결 구성과 파일 공유가 수행되면, 이어, 회의록 데이터 저장(S430) 내지 멀티미디어 데이터 병합 과정(S460)이 수행되는데, 도 7을 통해 자세히 살펴본다.
먼저, 430단계에서, 사용자 단말(110 또는 120) 중 어느 하나로부터 회의 개설을 위한 참석 메시지 요청으로 회의가 시작될 수 있으나, 이하에서는 개설자 단말(110)에서 회의록 저장 시작을 실행하면, 화상회의가 시작되고 도 8 및 도 9에 도시된 예시 화면이 나타난다(S710).
이어, 개설자 단말(110)은 회의록 저장 시작 실행과 동시에(S720), 사용자 단말(110)에 장착된 카메라에 의해 촬영된 영상 정보 및 마이크에 의해 녹음되는 음성 정보를 base64로 인코딩된 미디어 데이터 형태로 개설자 단말(110)의 웹 브라우저 메모리에 저장하고 WebRTC 서버(200)로 전송한다. 이때, 개설자 단말(110)은 녹화 종료까지 일정 주기마다 상기 저장된 미디어 데이터를 WebRTC 서버(200)로 전송한다(도 4의 S430 및 S440). 이를 통해, 서버(200)는 개설자 단말(110)의 회의록 저장을 시작한 이후 개설자 단말(110)에서 회의록 저장 종료 이벤트가 발생할 때까지 반복적으로 영상 및 음성의 멀티미디어 데이터를 저장하고 하나의 파일로 병합할 수 있다(S730 및 S740). 이때, 서버(200)는 상황에 따라 수신된 미디어 데이터를 저장한 파일에 대한 URL 주소를 데이터베이스(DB)에 저장할 수도 있다.
이때, 미디어 데이터 전송에 사용되는 JSON 메시지에는 비디오 및 오디오 인코딩 방식, 반복 회수, 종료 여부 및 미디어 데이터 이름을 포함하며 다음과 같은 구조를 가진다.
"video":"비디오 데이터에 대한 인코딩 방식",
"audio":"오디오 데이터에 대한 인코딩 방식",
"cnt":"반복 회수",
"complete":"종료 여부",
"name":"미디어 데이터 이름"
이어, 개설자 단말(110)로부터 회의록 저장 종료 실행시(S750, S450), 종료 직전까지 업로드된 시점부터 종료 실행 시점까지 상기 회의 개설자 사용자 단말(110)의 웹 브라우저 메모리에 저장된 나머지 멀티미디어 데이터를 WebRTC 서버(200)에서 수신하고 저장을 종료한다.
이때, 회의록 저장 종료에 사용되는 JSON 메시지에는 비디오 및 오디오 인코딩 방식, 반복 회수, 종료여부, 미디어 데이터 이름 및 회의록을 저장한 회의 방 식별자를 포함하며 다음과 같은 구조를 가진다.
"video":"비디오 데이터에 대한 인코딩 방식",
"audio":"오디오 데이터에 대한 인코딩 방식",
"cnt":"반복 회수",
"complete":"종료 여부",
"name":"미디어 데이터 이름",
"code":"회의 방 식별자",
이어, 개설자 단말(110)로부터 회의록 저장 종료 이벤트가 발생되면 상기 수신된 미디어 데이터들을 하나의 회의록 형태로 병합하여, WebRTC 서버(200)에 저장하고, 저장된 회의록 파일에 대한 URL 주소를 데이터베이스(DB)에 저장한다(S760, S460). 상기 저장된 URL 주소는 향후 회의록 검색시 검색된 회의록 파일을 검색 단말로 전송할 때 사용된다.
이제까지 본 발명에 대하여 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 따라서, 본 발명의 범위는 전술한 실시 예에 한정되지 않고 특허 청구범위에 기재된 내용 및 그와 동등한 범위 내에 있는 다양한 실시 형태가 포함되도록 해석되어야 할 것이다.
100, 110, 120: 사용자 단말
200: WebRTC 서버
210: 서버 통신부
220: 병합부
230: 세션 할당부
240: 제어부

Claims (9)

  1. 다수의 사용자 단말과 서버가 네트워크로 연결된 시스템에서,
    상기 사용자 단말은 WebRTC를 지원하는 웹 브라우저가 설치되고, 카메라 및 마이크를 장착하고,
    상기 서버는, 상기 사용자 단말 중 어느 하나와 통신하여 데이터를 송수신하는 서버 통신부; 상기 서버 통신부를 통해, 회의록 저장 시작 데이터 요청에 따라, 소정 주기마다 상기 사용자 단말로부터 전송된 회의록 데이터를 수신받아 상기 웹 브라우저 메모리에 저장하고, 상기 회의록 저장 종료 데이터 요청에 따라, 소정 주기마다 상기 서버 통신부로부터 수신된 다수의 멀티미디어 데이터들을 base64로 디코딩하여 하나의 회의록 데이터로 병합하여 저장하는 병합부; 상기 서버 통신부를 통해 상기 사용자 단말 중 어느 하나로부터 회의 참석 요청이 수신되면, 상기 참석 요청에 대응되는 타 사용자 단말 사이에 화상 회의 채널을 할당하여 상기 화상 회의를 진행하는 세션 관리부; 및 상기 세션 관리부, 서버 통신부 및 병합부 간의 동작 및 데이터 처리를 제어하는 제어부;를 포함하여,
    상기 서버는 다수의 사용자 단말 사이에 화상회의 채널을 할당하고, 회의 참석자 리스트를 조회하고, 조회 결과 참석자 리스트에 해당되면 상기 사용자 단말들 중에서 개설자 단말에게 회의 참석자 리스트를 전송하거나 참가자 단말에게 회의 참석자 리스트를 전송하고, 세션 연결로 상기 서버를 이용한 P2P 연결 구성과 파일 공유를 위한 시그널 처리 과정을 수행하여 상기 화상회의를 진행하고, 상기 화상회의에 참여한 사용자 단말에 장착된 카메라 및 마이크에 의해 촬영 및 녹음되는 영상 및 음성 정보를 회의록 형태로 병합하여 상기 서버에 저장한 후, 상기 네트워크를 통해 상기 저장된 회의록을 신속하게 검색하여 상기 사용자 단말들로 전송할 수 있게 하는 것을 특징으로 하는 WebRTC를 이용한 회의록 작성 시스템.
  2. 제1항에 있어서,
    상기 서버 통신부는 상기 수신된 멀티미디어 데이터를 저장한 파일에 대한 URL 주소를 DB에 저장하고,
    상기 사용자 단말로부터 상기 회의록 데이터 요청시에, 검색된 회의록 데이터와 함께 상기 URL 주소를 상기 사용자 단말로 제공하는 것을 특징으로 하는 WebRTC를 이용한 회의록 작성 시스템.
  3. 제1항에 있어서,
    업로드는 Ajax(Asynchronous JavaScript and XML) 기술을 이용하여 구현하고, 상기 Ajax 환경에서 데이터 송수신은 JSON(JavaScript Object Notation) 포맷을 사용하여 구현하고, 상기 WebRTC 기능은 HTML(Hyper Text Markup Language)을 이용하여 구현하는 것을 특징으로 하는 WebRTC를 이용한 회의록 작성 시스템.
  4. 삭제
  5. 다수의 사용자 단말과 서버가 네트워크로 연결된 시스템에서의 회의록 작성 방법에 있어서,
    (a) 상기 서버는 WebRTC 기반 화상회의를 위해 WebRTC를 지원하는 웹 브라우저가 설치된 사용자 단말들 간에 화상회의 채널을 할당하여 화상회의를 진행할 때에,
    상기 서버는 회의 참석자 리스트를 조회하고, 조회 결과 참석자 리스트에 해당되면 상기 사용자 단말들 중에서 개설자 단말에게 회의 참석자 리스트를 전송하거나 참가자 단말에게 회의 참석자 리스트를 전송하고, 세션 연결로 상기 서버를 이용한 P2P 연결 구성과 파일 공유를 위한 시그널 처리 과정을 수행하는 세션 관리 단계;
    (b) 상기 개설자 단말 또는 상기 참가자 단말 중 어느 하나로부터 회의록 데이터 저장 시작이 실행되면, 상기 사용자 단말의 회의록 저장 시작 실행과 동시에 상기 사용자 단말에 의해 촬영된 영상 정보 및 녹음되는 음성 정보를 base64로 인코딩된 미디어 데이터 형태로 상기 웹 브라우저 메모리에 저장하고, 일정 시간마다 상기 미디어 데이터 형태로 저장된 회의록 데이터를 상기 서버로 업로드하는 단계; 및
    (c) 상기 사용자 단말의 회의록 데이터 저장 종료가 실행되면, 종료 직전까지 업로드된 시점부터 종료 실행 시점까지 상기 웹 브라우저 메모리에 저장된 회의록 데이터를 상기 서버로 업로드하고 상기 서버는 저장된 회의록 데이터를 하나의 회의록 데이터로 병합하여 상기 회의록 데이터의 저장을 종료하는 단계를 포함하는 것을 특징으로 하는 WebRTC를 이용한 회의록 작성 방법.
  6. 제5항에 있어서,
    상기 회의록 데이터를 저장한 파일에 대한 URL 주소를 DB에 저장하고,
    상기 사용자 단말로부터 회의록 데이터 요청시에, 검색된 회의록 데이터와 함께 상기 URL 주소를 상기 사용자 단말로 제공하는 단계를 포함하는 것을 특징으로 하는 WebRTC를 이용한 회의록 작성 방법.
  7. 제5항에 있어서,
    상기 업로드는 Ajax(Asynchronous JavaScript and XML) 기술을 이용하여 구현하고, 상기 Ajax 환경에서 데이터 송수신은 JSON(JavaScript Object Notation) 포맷을 사용하여 구현하고, 상기 WebRTC 기능은 HTML(Hyper Text Markup Language)을 이용하여 구현하는 것을 특징으로 하는 WebRTC를 이용한 회의록 작성 방법.
  8. 제5항에 있어서,
    상기 (b)단계에서, 상기 서버에서 회의록 데이터의 저장 시작에 사용되는 제어 메시지는 "비디오 및 오디오 인코딩 방식, 반복 회수, 종료 여부 및 회의록 데이터 이름"의 데이터 구조를 갖는 것을 특징으로 하는 WebRTC를 이용한 회의록 작성 방법.
  9. 제5항에 있어서,
    상기 (c)단계에서, 상기 서버에서 회의록 데이터의 저장 종료에 사용되는 제어 메시지는 "비디오 및 오디오 인코딩 방식, 반복 회수, 종료 여부 및 회의록 데이터 이름, 회의방 식별자"의 데이터 구조를 갖는 것을 특징으로 하는 WebRTC를 이용한 회의록 작성 방법.
KR1020160074048A 2016-06-14 2016-06-14 ＷｅｂＲＴＣ를 이용한 회의록 작성 방법 및 시스템 KR101902464B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160074048A KR101902464B1 (ko) 2016-06-14 2016-06-14 ＷｅｂＲＴＣ를 이용한 회의록 작성 방법 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160074048A KR101902464B1 (ko) 2016-06-14 2016-06-14 ＷｅｂＲＴＣ를 이용한 회의록 작성 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20170141320A KR20170141320A (ko) 2017-12-26
KR101902464B1 true KR101902464B1 (ko) 2018-10-02

Family

ID=60936721

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160074048A KR101902464B1 (ko) 2016-06-14 2016-06-14 ＷｅｂＲＴＣ를 이용한 회의록 작성 방법 및 시스템

Country Status (1)

Country Link
KR (1) KR101902464B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110708497A (zh) * 2019-11-07 2020-01-17 上海赛连信息科技有限公司 智能会议通知的方法和装置
KR20220123957A (ko) 2021-03-02 2022-09-13 주식회사 가디언즈스타 WebRTC통신을 지원하는 웹 브라우저가 탑재된 컴퓨팅 장치에서 실행되는 실시간 전자문서 공유 시스템

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110113558B (zh) * 2019-04-03 2022-06-07 视联动力信息技术股份有限公司 数据处理方法、装置、系统及计算机可读存储介质
KR102191417B1 (ko) * 2019-07-05 2020-12-15 주식회사 디비아이엔씨 대면 녹취 서비스를 제공하는 방법 및 그 시스템
KR102414223B1 (ko) * 2020-12-09 2022-06-27 주식회사 디비아이엔씨 대면 녹취 시스템 및 그 방법, 인증 장치
CN113612956B (zh) * 2021-06-28 2024-04-05 武汉众智数字技术有限公司 一种基于WebRTC的录像存储和回放的系统和方法
CN114710461B (zh) * 2022-03-31 2024-03-12 中煤科工集团重庆智慧城市科技研究院有限公司 多端音视频即时通讯方法及系统
CN115037979B (zh) * 2022-07-13 2023-09-01 北京字跳网络技术有限公司 投屏方法及相关设备
KR20240054582A (ko) 2022-10-19 2024-04-26 주식회사 플리카 온라인 기반 가상 컨퍼런스 룸의 공간 중심 커뮤니케이션 환경을 지원하는 시스템 및 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002247538A (ja) * 2001-02-15 2002-08-30 Matsushita Electric Ind Co Ltd 会議サーバ装置及び多地点会議システム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002247538A (ja) * 2001-02-15 2002-08-30 Matsushita Electric Ind Co Ltd 会議サーバ装置及び多地点会議システム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110708497A (zh) * 2019-11-07 2020-01-17 上海赛连信息科技有限公司 智能会议通知的方法和装置
CN110708497B (zh) * 2019-11-07 2021-02-05 上海赛连信息科技有限公司 智能会议通知的方法和装置
KR20220123957A (ko) 2021-03-02 2022-09-13 주식회사 가디언즈스타 WebRTC통신을 지원하는 웹 브라우저가 탑재된 컴퓨팅 장치에서 실행되는 실시간 전자문서 공유 시스템

Also Published As

Publication number Publication date
KR20170141320A (ko) 2017-12-26

Similar Documents

Publication Publication Date Title
KR101902464B1 (ko) ＷｅｂＲＴＣ를 이용한 회의록 작성 방법 및 시스템
US10135881B2 (en) Virtual private meeting room
CA2977035C (en) System and method for video communication
CN101057519B (zh) 内容服务器和内容服务系统
CN108347337B (zh) 会议通信方法和装置
US9009225B2 (en) System and method for conference management
US20090181659A1 (en) Method and arrangement for management of virtual meetings
CN107409162A (zh) 通信系统和使用该通信系统的方法
US10057426B2 (en) Speaker priority for conference calls
CN102739635A (zh) 自动的会议重新加入
US8903905B2 (en) Method and system for automatically storing a communication session
TW201902209A (zh) 使用多個移動通信裝置建立視訊通話的方法
CN111405229B (zh) 视频会议处理方法、系统、客户端、电子设备及存储介质
JP5325953B2 (ja) 通信システム
WO2011010563A1 (ja) ビデオ通話システム、主側端末、従側端末、プログラム
JP2006304151A (ja) 電子会議設定プログラム、電子会議端末、電子会議設定方法
KR20130124115A (ko) 큐알코드를 이용하여 채팅 서비스를 제공하기 위한 시스템 및 그 방법
US9071681B1 (en) Inbound telephony orchestrator for hangout-based contact center platform
KR20070056747A (ko) 웹을 이용한 화상회의 개설 및 제어 장치 및 그 방법과이를 구현하기 위한 프로그램을 기록한 기록매체
CN112019791A (zh) 基于教育考试的多方音视频通话方法及系统
JP5420440B2 (ja) 電子会議制御装置、電子会議システム、電子会議制御方法、及びプログラム
JP7327119B2 (ja) 通信システム、通信端末、通信方法およびプログラム
Saseendran et al. Speak Out: Turns Your Smartphone into a Microphone
KR101458408B1 (ko) Ｓｉｐ 기반의 통화가 가능한 스마트 디바이스들을 이용하는 정보 공유 방법 및 시스템
KR20170100315A (ko) Dtmf 톤을 이용하여 컨퍼런스 콜 서비스를 제공하기 위한 시스템 및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant