KR20100129131A - 다자간 영상 통신 방법. - Google Patents

다자간 영상 통신 방법. Download PDF

Info

Publication number
KR20100129131A
KR20100129131A KR1020100006220A KR20100006220A KR20100129131A KR 20100129131 A KR20100129131 A KR 20100129131A KR 1020100006220 A KR1020100006220 A KR 1020100006220A KR 20100006220 A KR20100006220 A KR 20100006220A KR 20100129131 A KR20100129131 A KR 20100129131A
Authority
KR
South Korea
Prior art keywords
terminal
video
image data
speaker
server
Prior art date
Application number
KR1020100006220A
Other languages
English (en)
Inventor
남궁환식
Original Assignee
(주)해든브릿지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)해든브릿지 filed Critical (주)해든브릿지
Priority to KR1020100006220A priority Critical patent/KR20100129131A/ko
Publication of KR20100129131A publication Critical patent/KR20100129131A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H04W4/08User group management

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

영상 통신에 참가한 참여자의 수와 무관하게 일정한 대역폭을 유지하며 영상 통신을 수행할 수 있는 다자간 영상 통신 방법에 관한 기술이 개시된다. 이러한 기술에 따르면, 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 서버로부터 수신하는 단계; 상기 현재 발언자 이전에 상기 영상 발언권을 획득한 이전 발언자에 대한 영상 데이터를 상기 서버로부터 수신하는 단계; 및 상기 현재 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역에 재생하며, 상기 이전 발언자에 대한 영상 데이터를 상기 디스플레이 장치의, 상기 주영역보다 작은 부영역에 재생하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.

Description

다자간 영상 통신 방법.{METHOD FOR MULTIPOINT VIDEO COMMUNICATION}
본 발명은 다자간 영상 통신 방법에 관한 것으로, 보다 상세하게는 서버를 이용한 다자간 영상 통신 방법에 관한 것이다.
다자간 영상 통신 시스템이란 서로 멀리 떨어진 사람들이 서로의 영상을 보면서 음성 또는 텍스트 등을 송수신하며 통신하는 시스템이다. 다자간 영상 통신 시스템을 이용하여, 원격 영상 회의, 원격 교육, 원격 진단, 원격 세미나 등이 수행될 수 있다. WAN(Wide Area Network)과 같은 IP 네트워크 또는 무선 통신망 등과 같은 통신망을 이용해 다자간 영상 통신을 수행하는 시스템은 크게 MCU를 이용하는 시스템, 서버를 이용하는 시스템 및 P2P 방식을 이용하는 시스템으로 분류될 수 있다.
도 1은 MCU(107)를 이용하는 다자간 영상 통신 시스템을 나타내는 도면이다.
도 1에서, 네트워크를 통해 다자간 영상 통신에 참여하며, 카메라를 포함하는 하드웨어(101, 103, 105)는 하드웨어(101, 103, 105) 사용자의 영상 및 음성 데이터를 MCU(107, Multipoint Control Unit)로 전송한다. 도 1에서 점선의 화살표는 데이터의 흐름을 나타낸다. MCU(107)는 전송된 영상 및 음성 데이터를 수신하여 믹싱(mixing) 처리를 수행하고, 믹싱된 영상 및 음성 데이터를 하드웨어(101, 103, 105) 각각으로 전송한다. 따라서 모든 하드웨어(101, 103, 105) 사용자의 영상 및 음성 데이터가 하드웨어(101, 103, 105) 각각에서 재생될 수 있다.
MCU(107)를 이용하는 다자간 영상 통신 시스템의 경우, 영상 및 음성 데이터의 처리가 MCU(107)에 의해 수행됨으로써, 하드웨어(101, 103, 105)가 데이터를 처리하는 부담이 적은 장점이 있지만, MCU(107)의 구현이 어렵고 복잡하여, 다자간 영상 통신 시스템의 구축 비용이 증가하는 문제가 있다.
도 2는 P2P(Peer To Peer) 방식을 이용하는 다자간 영상 통신 시스템을 나타내는 도면이다.
도 2에서, 네트워크를 통해 다자간 영상 통신에 참여하는 단말(201, 203, 205), 예를 들어 노트북 컴퓨터, 듀얼 모니터 검퓨터 및 싱글 모니터 컴퓨터는 MCU나 서버 등을 이용하지 않고 P2P 방식으로 음성 및 영상 데이터를 교환한다. 도 2에서 실선의 화살표는 데이터의 흐름을 나타낸다. MCU를 이용하는 다자간 영상 통신 시스템과 같이, 모든 단말(201, 203, 205) 사용자의 영상 및 음성 데이터가 단말(201, 203, 205) 각각에서 재생된다.
P2P 방식을 이용하는 다자간 영상 통신 시스템의 경우, 서버나 MCU를 이용하지 않음에 따라 비용 측면에서 경제적인 장점이 있다. 그러나 단말(201, 203, 205) 간에 데이터가 직접 교환되므로 데이터 처리에 따른 단말(201, 203, 205)의 부담이 커지며, 단말(201, 203, 205)의 성능 및 단말(201, 203, 205)이 속한 지역의 방화벽 등에 따라 영상 통신 품질이 저하되는 문제가 있다.
도 3은 서버(307)를 이용하는 다자간 영상 통신 시스템을 나타내는 도면이다.
도 3에서, 네트워크를 통해 다자간 영상 통신에 참여하는 단말(301, 303, 305), 예를 들어 노트북 컴퓨터, 듀얼 모니터 검퓨터 및 싱글 모니터 컴퓨터는 단말(301, 303, 305) 사용자(다자간 영상 통신 시스템 참석자)의 영상 및 음성 데이터 등을 서버(307)로 전송한다. 도 3에서 점선의 화살표는 데이터의 흐름을 나타낸다. 그리고 서버(307)는 전송된 영상 및 음성 데이터를 단말(301, 303, 305)로 전송한다. 보다 자세히, 단말(301)은 서버(307)로 영상 및 음성 데이터를 전송하고, 서버(307)는 전송된 영상 및 음성 데이터를 단말(301)을 제외한 단말(303, 305)로 전송한다.
하지만 MUC가 이용되는 경우와 달리 서버(307)는 믹싱 처리를 수행하지 않기기 때문에 서버(307)는 단말(301)로부터 전송된 영상 및 음성 데이터를 단말(301)로 재전송하지 않는다. MCU를 이용하는 다자간 영상 통신 시스템과 같이, 모든 단말(301, 303, 305) 사용자의 영상 및 음성 데이터가 단말(301, 303, 305) 각각에서 재생된다.
서버(307)를 이용하는 다자간 영상 통신 시스템은 도 1 및 도 2에서 설명한 다자간 영상 통신 시스템의 장점이 적절히 혼합된 시스템으로서, 현재 다자간 영상 통신 시스템으로 가장 많이 이용되는 시스템이다. 즉, 서버(307)가 믹싱과 같이 별도의 데이터를 처리하지 않으므로 구현이 용이하며, P2P 방식과 비교하여, 단말(301, 303, 305)의 부담이 상대적으로 작다.
다만, 서버(307)가 필요로 하는 네트워크 대역폭은 영상 통신 시스템에 참여하는 참여자, 즉 단말의 수에 비례하여 증가하기 때문에, 영상 통신 시스템에 참여하는 참여자의 수가 증가함에 따라 서버(307)의 대역폭 부담이 증가하는 문제가 있다.
본 발명은 상기 문제점을 해결하기 위하여 제안된 것으로서, 다자간 영상 통신에 참여하는 참여자의 수와 무관하게 일정한 네트워크 대역폭으로 영상 통신을 수행할 수 있는 다자간 영상 통신 방법을 제공하는데 그 목적이 있다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있고, 본 발명의 실시예에 의해 보다 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
상기 목적을 달성하기 위한 본 발명은 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 서버로부터 수신하는 단계; 상기 현재 발언자 이전에 상기 영상 발언권을 획득한 이전 발언자에 대한 영상 데이터를 상기 서버로부터 수신하는 단계; 및 상기 현재 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역에 재생하며, 상기 이전 발언자에 대한 영상 데이터를 상기 디스플레이 장치의, 상기 주영역보다 작은 부영역에 재생하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.
또한 상기 목적을 달성하기 위한 본 발명은 제어 단말로부터 영상 발언권을 획득하는 단계; 상기 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 상기 현재 발언자에 대한 상기 영상 발언권이 유지될 때 서버로 전송하는 단계; 및 상기 제어 단말의 제어에 따라, 상기 현재 발언자의 영상 발언권이 종료되고, 상기 현재 발언자 이후에 상기 영상 발언권을 획득한 다음 발언자의 영상 발언권이 유지될 때 상기 현재 발언자에 대한 영상 데이터를 상기 서버로 전송하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.
또한 상기 목적을 달성하기 위한 본 발명은 영상 통신에 참여한 복수의 단말 중 제1단말을 영상 발언권 획득 단말로 선택하는 단계; 상기 복수의 단말 중 제2단말을 상기 영상 발언권 획득 단말로 변경하는 단계; 상기 제1단말이 상기 제1단말의 사용자에 대한 영상 데이터를 상기 제1단말 또는 제2단말의 영상 발언권이 유지될 때 전송하도록 제어하는 단계; 및 상기 제2단말이 상기 제2단말의 사용자에 대한 영상 데이터를 상기 제2단말의 영상 발언권이 유지될 때 전송하도록 제어하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.
또한 상기 목적을 달성하기 위한 본 발명은 영상 통신에 참여한 복수의 단말 중에서 영상 발언권을 획득한 제1단말로부터, 상기 제1단말의 사용자에 대한 영상 데이터를 수신하는 단계; 상기 복수의 단말 중에서 상기 제1단말 이후에 상기 영상 발언권을 획득한 제2단말의 영상 발언권이 유지될 때, 상기 제1단말 및 상기 제2단말 각각으로부터 상기 제1단말 및 상기 제2단말 각각의 사용자에 대한 영상 데이터를 수신하는 단계; 상기 제1단말로부터 수신된 영상 데이터를 상기 복수의 단말 중에서 상기 제1단말을 제외한 단말로 전송하는 단계; 및 상기 제2단말로부터 수신된 영상 데이터를 상기 복수의 단말 중에서 상기 제2단말을 제외한 단말로 전송하는 단계를 포함하는 다자간 영상 통신 방법을 제공한다.
본 발명에 따르면, 다자간 영상 통신에 참여하는 모든 참여자가 아닌, 영상 발언권을 부여받은 현재 발언자 및 상기 현재 발언자 이전에 상기 영상 발언권을 부여받은 이전 발언자의 영상을 수신하여 재생함으로써, 다자간 영상 통신에 참여한 참여자가 발언 내용의 연속성을 느낄 수 있음과 동시에 다자간 영상 통신에 참여하는 참여자가 증가하더라도 일정한 대역폭으로 영상 통신이 수행될 수 있는 효과가 있다.
도 1은 MCU(107)를 이용하는 다자간 영상 통신 시스템을 나타내는 도면,
도 2는 P2P(Peer To Peer) 방식을 이용하는 다자간 영상 통신 시스템을 나타내는 도면,
도 3은 서버(307)를 이용하는 다자간 영상 통신 시스템을 나타내는 도면,
도 4는 본 발명의 일실시예에 따른 다자간 영상 통신 시스템을 나타내는 도면,
도 5는 도 4의 제1 및 제2수신 단말(403, 404)가 영상 데이터를 디스플레이 장치(501)에 재생하는 화면을 나타내는 도면,
도 6은 본 발명의 제1실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도,
도 7은 본 발명의 제2실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도,
도 8은 본 발명의 제3실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도,
도 9는 본 발명의 제4실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도이다.
이하 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있도록 상세히 설명하기 위하여, 본 발명의 가장 바람직한 실시예를 첨부 도면을 참조하여 설명하기로 한다. 상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다.
도 4는 본 발명의 일실시예에 따른 다자간 영상 통신 시스템을 나타내는 도면이다.
도 4에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 시스템은 제1전송 단말(401), 제2전송 단말(402), 제1수신 단말(403), 제2수신 단말(404), 제어 단말(405) 및 서버(406)를 포함한다. 도 4에서는 설명의 편의를 위해 단말(401 내지 405)을 전송 단말, 수신 단말 및 제어 단말로 구분하였으나, 단말(401 내지 405) 각각은 전송 단말, 수신 단말 및 제어 단말의 기능을 모두 포함할 수 있다. 또한 도 4에서는 5개의 단말(401 내지 405)이 다자간 영상 통신 시스템에 참여하는 경우가 일실시예로서 설명된다.
먼저 본 발명에 따른 다자간 영상 통신 시스템의 개념을 설명하면 다음과 같다.
제1전송 단말(401), 제2전송 단말(402), 제1수신 단말(403), 제2수신 단말(404) 및 제어 단말(405)은 다자간 영상 통신에 참여한 단말이다. 단말(401 내지 405)이 서버(406)에 영상 통신 참여를 요청하면, 서버(406)와 단말(401 내지 405) 각각의 사이에는 세션이 설정될 수 있다. 각 단말(401 내지 405)의 사용자가 발언한 경우에, 각 단말(401 내지 405)의 음성 데이터는 서버(411)로 전송되며, 서버(411)는 전송된 음성 데이터를 단말(401 내지 405)로 전송한다.
상기된 바와 같이, 예를 들어 제1전송 단말(401)의 사용자가 발언한 경우에 제1전송 단말(401)은 음성 데이터를 서버(406)로 전송하고, 서버(406)는 전송된 음성 데이터를 제2전송 단말(402), 제1 및 제2수신 단말(403, 404), 제어 단말(405)로 전송한다. 또한 제1수신 단말(403)의 사용자가 발언한 경우에, 제1수신 단말(403)은 음성 데이터를 서버(406)로 전송하고, 서버(406)는 전송된 음성 데이터를 제1 및 제2전송 단말(401, 402), 제2수신 단말(404), 제어 단말(405)로 전송한다.
다만 본 발명에 따르면, 영상 발언권을 획득한 단말이, 단말의 사용자에 대한 영상 데이터를 서버(406)로 전송하며, 서버(406)는 영상 데이터를 전송한 단말을 제외한 단말로 전송된 영상 데이터를 전송한다. 여기서, 영상 발언권은 영상 데이터가 단말의 디스플레이 장치에 재생될 수 있는 권한으로서, 영상 발언권을 획득한 단말은 단말의 사용자에 대한 영상 데이터를 서버(406)로 전송한다. 본 발명에 따르면 종래와 달리 다자간 영상 통신에 참여한 참석자(단말)의 수에 무관하게 영상 발언권을 획득한 일정한 인원의 참석자에 대한 영상 데이터만이 서버(406)를 통해 송수신되므로, 일정한 네트워크 대역폭이 유지되면서 영상 통신이 수행될 수 있다.
본 발명에서 제1전송 단말(401)은 현재 영상 발언권을 획득한 단말이며, 제2전송 단말(402)은 제1전송 단말(401)이 영상 발언권을 획득하기 이전에 영상 발언권을 획득했던 단말이다. 도 4에서는 영상 발언권이 하나의 단말에만 부여되는 경우가 일실시예로서 설명되나, 영상 발언권은 동시에 일정한 복수개의 단말에 부여될 수도 있다.
한편, 본 발명에서는 다자간 영상 통신 시스템에 참여한 단말(401 내지 405)의 사용자가 발언 내용의 연속성을 느낄 수 있도록 하기 위하여, 현재 영상 발언권을 획득하기 직전에 영상 발언권을 획득했던 제2전송 단말(402) 역시 영상 데이터를 서버(406)로 전송하고, 서버(406)는 전송된 영상 데이터를 단말로 전송한다.
보다 자세히, 제1 및 제2전송 단말(401, 402) 중 하나 이상의 사용자에 대한 영상 데이터를 수신한 단말(401 내지 405)은 수신한 영상 데이터를 디스플레이 장치에 재생할 수 있다. 따라서 제1 및 제2전송 단말(401, 402)의 사용자 영상이 단말(401 내지 405)의 디스플레이 장치에 표시될 수 있다. 즉, 단말(401 내지 405)의 디스플레이 장치에는 제1전송 단말(401)의 사용자인 현재 발언자와 제2전송 단말(402)의 사용자인 이전 발언자가 표시됨으로써 다자간 영상 통신 시스템에 참여한 참여자, 즉 단말(401 내지 405)의 사용자가 발언 내용의 연속성을 느낄 수 있다.
예를 들어, 본 발명에 따른 다자간 영상 통신 시스템이 원격 화상 회의에 사용되며, 이전 발언자가 질문을 하고 현재 발언자가 답변을 하는 경우 이전 발언자와 현재 발언자가 모두 디스플레이 장치에 표시됨으로써 다자간 영상 통신 시스템에 참여한 참여자들은 발언 내용의 연속성을 느낄 수 있다.
한편, 본 발명에 따르면, 현재 발언자와 이전 발언자의 영상 데이터가 디스플레이 장치에 재생될 때, 현재 발언자에 대한 영상은 디스플레이 장치의 주영역에 표시되고, 이전 발언자의 영상은 디스플레이 장치의 부영역에 표시된다. 부영역은 주영역보다 작은 영역이다. 즉, 본 발명에 따르면 현재 및 이전 발언자의 영상을 함께 디스플레이 장치에 재생하여 발언 내용의 연속성을 유지하되, 이전 발언자보다는 현재 발언자의 발언이 현재 진행되는 것이므로 현재 발언자에 대한 영상을 주영역에 표시한다.
또한, 이전 발언자의 영상이 주영역보다 작은 부영역에서 재생됨에 따라, 이전 발언자에 대한 영상 데이터의 크기는 현재 발언자의 영상 데이터의 크기보다 작아도 무방하다. 따라서 이전 발언자에 대한 영상 데이터의 크기가 작은만큼 영상 데이터의 송수신에 필요한 대역폭 및 서버(406)의 리소스 부담 등을 줄일 수 있다.
이하, 본 발명에 따른 다자간 영상 통신 시스템에 대해 보다 자세히 설명하기로 한다.
제어 단말(405)은 다자간 영상 통신 시스템에 참여한 단말을 제어하며, 제1 및 제2전송 단말(401, 402)에 영상 발언권을 부여한다. 그리고 제1및 제2전송 단말(401, 402)의 사용자에 대한 영상 데이터의 전송을 제1 및 제2전송 단말(401, 402)로 요청한다. 다자간 영상 통신 시스템을 이용하여 영상 회의가 진행되는 경우, 제어 단말(405)은 회의 진행자의 역할을 한다고 볼 수 있다.
제1 및 제2전송 단말(401, 402)은 제어 단말(405)의 요청에 응답해 현재 발언자 및 이전 발언자에 대한 영상 데이터를 서버(406)로 전송한다. 여기서, 현재 발언자 다음에 영상 발언권을 획득하는 제3전송 단말의 사용자인 다음 발언자가 존재하는 경우에 본 발명에 따르면, 현재 발언자에 대한 영상 데이터는 다음 발언자에 대한 영상 발언권이 유지되는 동안 추가로 서버(406)로 전송됨을 알 수 있다.
제1 및 제2수신 단말(403, 404)은 서버(406)로부터 현재 발언자 및 이전 발언자에 대한 영상 데이터를 수신한다. 그리고 현재 발언자 및 이전 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역과 부영역에 각각 재생한다. 디스플레이 장치는 제1 및 제2수신 단말(403, 404)에 포함되거나 또는 제1 및 제2수신 단말(403, 404)과 케이블 등으로 연결된 모니터일 수 있다.
그리고 서버(406)는 상기된 바와 같이, 단말로부터 영상 또는 음성 데이터를 수신하여 단말로 전송하는 역할을 수행한다.
본 발명에 따른 다자간 영상 통신 시스템에 대해 다시 정리하면, 종래와 달리 본 발명은 영상 통신 시스템에 참여한 단말 중 일정 단말의 사용자 영상만이 디스플레이되도록 제어한다. 이 때 본 발명은 발언 내용의 연속성을 위해 현재 발언자 및 이전 발언자에 대한 사용자 영상이 디스플레이 되도록 제어할 수 있다. 따라서 본 발명에 따르면, 발언 내용의 연속성이 유지되되, 영상 데이터의 송수신에 따른 서버(406)의 대역폭 부담이 감소할 수 있다. 또한 영상 발언권 획득 및 요청 등이 서버가 아닌 제어 단말(405)을 통해 이루어지므로 서버(406)의 리소스 부담이 감소될 수 있으며, 단말의 업그레이드 등이 용이한 장점이 있다.
한편, 제어 단말(405)의 기능은 서버(406)의 성능 또는 시스템 설계 등에 따라 서버(406)가 수행할 수도 있다. 또한 상기된 바와 같이, 도 4에 도시된 단말(401 내지 405)은 모두 전송 단말(401, 402), 수신 단말(403, 404) 및 제어 단말(405)의 기능을 포함할 수 있으며, 제어 단말(405)에 설정된 세션이 종료되는 경우 제1 및 제2전송 단말(401, 402), 제1 및 제2수신 단말(403, 404) 중 하나가 제어 단말(405)의 기능을 수행할 수 있다.
도 5는 도 4의 제1수신 단말(403)이 영상 데이터를 디스플레이 장치(501)에 재생하는 화면을 나타내는 도면이다.
도 5에 도시된 바와 같이, 디스플레이 장치(501)의 주영역(503)에 현재 발언자의 영상이 표시되며, 부영역(505)에 이전 발언자의 영상이 표시된다. 그리고 추가적으로 로컬 영역(507)에 제1수신 단말(403)의 사용자에 대한 영상이 표시될 수 있다. 제1수신 단말(403)의 사용자에 대한 영상 데이터는 카메라를 통해 제1수신 단말(403)이 수신할 수 있으며, 제1수신 단말(403)은 로컬 영역(507)에 제1수신 단말(403)의 사용자에 대한 영상을 표시할 수 있다.
제1수신 단말(403)이 자신의 사용자에 대한 영상을 미리 수신받음으로써, 이후 제1수신 단말(403)이 영상 발언권을 획득할 경우 제1수신 단말(403)은 신속하게 영상 데이터를 서버(406)로 전송할 수 있다. 즉, 로컬 영역(507)에는 발언 대기자가 표시된다고 할 수 있다.
도 5를 이용하여, 도 4의 다자간 영상 통신 시스템을 설명하면 다음과 같다.
로컬 영역(507)에 표시된 제1수신 단말(403)의 사용자가 영상 발언권을 획득할 경우에, 제1수신 단말(403)의 사용자는 현재 발언자로서, 제1수신 단말(403)의 사용자에 대한 영상이 주영역(503)에 표시된다. 그리고 주영역(503)에 표시되던 현재 발언자에 대한 영상은 이전 발언자에 대한 영상이 되어 부영역(505)에 표시된다. 그리고 부영역(505)에 표시되던 이전 발언자에 대한 영상은 사라진다. 이후 다른 단말의 사용자가 영상 발언권을 획득한 경우, 제1수신 단말(403)의 사용자에 대한 영상은 이전 발언자에 대한 영상이 되어 부영역(505)에 표시된다.
한편, 디스플레이 장치(501)에 재생되는 발언자 즉, 단말의 사용자에 대한 영상에 대한 데이터는 일실시예로서 아바타 데이터일 수 있으며, 아바타 데이터는 미리 단말에 저장되어 있을 수 있다. 또한 도 5에 도시된 화면은 또한 제1 및 제2전송 단말(401, 402), 제2수신 단말(404), 제어 단말(405)의 디스플레이 장치에도 재생되는 화면이며, 이 때 로컬 영역(507)에는 제1 및 제2전송 단말(401, 402), 제2수신 단말(404), 제어 단말(405) 각각의 사용자 영상이 표시된다.
이하 도 4의 단말의 동작을 도 6 내지 도 9를 참조하여 자세히 설명하기로 한다.
도 6은 본 발명의 제1실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도로서, 수신 단말(403, 404)이 수행하는 다자간 영상 통신 방법을 나타내는 도면이다. 이하에서 발언자는 상기된 바와 같이, 다자간 영상 통신 시스템에 참여한 단말의 사용자이다.
도 6에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 방법은 단계 S601로부터 시작된다. 단계 S601에서 수신 단말(403, 404)은 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 수신한다.
다음 단계 S603에서 수신 단말(403, 404)은 서버(406)로부터 현재 발언자 이전에 영상 발언권을 획득한 이전 발언자에 대한 영상 데이터를 추가로 수신한다. 여기서, 이전 발언자는 현재 발언자가 영상 발언권을 획득하기 직전 차례에 영상 발언권을 획득한 발언자일 수 있다.
다음 단계 S605에서 수신 단말(403, 404)은 현재 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역(503)에 재생하며, 이전 발언자에 대한 영상 데이터를 디스플레이 장치의, 주영역보다 작은 부영역(505)에 재생한다. 이전 발언자에 대한 영상 데이터는 부영역(505)에 재생되므로 이전 발언자에 대한 영상 데이터의 크기는 현재 발언자에 대한 영상 데이터의 크기보다 작은 것이 바람직하다. 이전 발언자에 대한 영상 데이터의 크기가 작은 만큼 영상 데이터가 송수신되는데 필요한 대역폭은 감소될 수 있다.
한편, 본 발명에 따른 다자간 영상 통신 방법은 단계 S607, 단계 S609 및 단계 S611을 더 포함할 수 있다.
단계 S607에서 수신 단말(403, 404)은 식별자를 포함하며, 현재 발언자 이후에 영상 발언권을 획득한 다음 발언자에 대한 영상 데이터를 추가로 수신한다. 여기서, 다음 발언자는 현재 발언자의 영상 발언권이 종료된 직후의 차례에 영상 발언권을 획득한 발언자일 수 있다.
다음 단계 S609에서 수신 단말(403, 404)은 식별자를 인식한다.
다음 단계 S611에서 수신 단말(403, 404)은 식별자를 인식한 경우, 다음 발언자에 대한 영상 데이터를 주영역(503)에 재생하며, 현재 발언자에 대한 영상 데이터를 부영역(505)에 재생한다. 본 발명에 따르면, 수신 단말(403, 404)이 식별자를 인식한 경우에 디스플레이 장치의 영역의 영상을 교체함으로써 영상이 자연스럽게 교체될 수 있다. 예를 들어, 주영역(503)에 표시되고 있는 현재 발언자의 영상이 부영역(505)으로 이동되고, 다음 발언자의 영상이 주영역(503)에 표시되어야 할 경우 수신 단말(403, 404)은 식별자를 인식하여 다음 발언자의 영상 데이터가 수신 단말(403, 404)로 전송되고 있음을 인식할 수 있다. 따라서 수신 단말(403, 404)은 다음 발언자의 영상 데이터의 수신을 인식하고 디스플레이 장치의 영역의 영상을 교체함으로써 영상의 끊김 현상없이 영상을 교체할 수 있다.
단계 S605에서도 현재 발언자에 대한 영상 데이터에 식별자가 포함될 수 있다.
한편, 단계 S605에서 이전 발언자에 대한 영상 데이터는 현재 발언자에 대한 영상 데이터의 크기보다 작은 것이 바람직하다고 전술되었다. 따라서 단계 S611에서 현재 발언자의 영상이 주영역(503)에서 부영역(505)으로 이동되는 경우 현재 발언자에 대한 영상 데이터의 크기도 작아짐이 바람직하다.
그리고 도면에 도시되지는 않았지만 수신 단말(403, 404)은 서버(406)로부터 이전 발언자, 현재 발언자 및 다음 발언자에 대한 음성 데이터를 수신하여 재생할 수 있다. 또한 영상 발언권을 획득한 이전 발언자, 현재 발언자 및 다음 발언자 뿐만 아니라 일반 참여자에 대한 음성 데이터 역시 수신하여 재생할 수 있다.
도 7은 본 발명의 제2실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도로서, 제1전송 단말(401)이 수행하는 다자간 영상 통신 방법을 나타내는 도면이다.
도 7에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 방법은 단계 S701로부터 시작된다. 단계 S701에서 제1전송 단말(401)은 제어 단말(405)로부터 영상 발언권을 획득한다.
단계 S703에서 제1전송 단말(401)은 영상 발언권이 유지될 때, 현재 발언자에 대한 영상 데이터를 서버(406)로 전송한다. 여기서, 현재 발언자는 전술된 바와 같이, 제1전송 단말(401)의 사용자이다. 그리고 제1전송 단말(401)은 제어 단말(405)의 별도의 영상 데이터 전송 요청에 응답해 영상 데이터를 서버(406)로 전송하거나, 영상 발언권을 획득한 후에 영상 데이터를 서버(406)로 전송할 수 있다. 제1전송 단말(401)은 별도의 제어부를 포함할 수 있으며, 제어부가 전송 요청에 응답해 전송 단말(401)의 데이터 전송을 제어할 수 있다. 또한 제1전송 단말(401)은 수신 단말이 영상 데이터 전송을 인식할 수 있도록 식별자를 삽입하여 영상 데이터를 서버(406)로 전송할 수 있다.
단계 S705에서 제1전송 단말(401)은 제어 단말(405)의 제어에 따라, 기 설정된 기간에 현재 발언자에 대한 영상 데이터를 서버(406)로 전송한다. 여기서, 기 설정된 기간은 일실시예로서 현재 발언자의 영상 발언권이 종료되고 현재 발언자 이후에 영상 발언권을 획득한 다음 발언자의 영상 발언권이 유지될 때까지 일 수 있다. 즉, 제어 단말(405)은 다음 발언자의 영상 발언권이 유지되는 기간을 감지하고, 제1전송 단말(401)은 제어 단말(405)의 제어에 따라 영상 발언권 종료 후에도 현재 발언자에 대한 영상 데이터를 추가적으로 서버(406)로 전송한다. 그리고 추가적으로 전송된 영상 데이터는 부영역(507)에 재생되므로 단계 S707에서 전송되는 데이터의 크기는 단계 S705에서 전송되는 데이터의 크기보다 작은 것이 바람직하다.
한편, 본 발명에 따른 다자간 영상 통신 방법은 제1전송 단말(401)이, 현재 발언자의 영상 발언권이 유지되기 전부터 카메라로부터 현재 발언자에 대한 영상 데이터를 수신하는 단계를 더 포함할 수 있다. 따라서, 단계 S701에서 영상 발언권이 획득된 이후, 제1전송 단말(401)은 신속하게 영상 데이터를 서버(406)로 전송할 수 있다.
또한 상기된 바와 같이, 제1전송 단말(401)이 전송하는 영상 데이터는 현재 발언자에 대한 아바타일 수 있다.
도 8은 본 발명의 제3실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도로서, 제어 단말(405)이 수행하는 다자간 영상 통신 방법을 나타내는 도면이다.
도 8에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 방법은 단계 S801로부터 시작된다. 단계 S801에서 제어 단말(405)은 영상 통신에 참여한 복수의 단말 중 제1단말을 영상 발언권 획득 단말로 선택한다. 여기서, 제1단말은 도 4의 제1전송 단말(401)에 대응되며, 복수의 단말은 도 4에 도시된 단말(401 내지 405) 및 제3전송 단말을 포함하는 것에 대응된다. 단계 S801에서 제1단말에 영상 발언권이 부여되는 방법은 자세히 후술하기로 한다.
단계 S809에서 제어 단말(405)은 복수의 단말 중 제2단말을 영상 발언권 획득 단말로 변경한다. 여기서, 제2단말은 도 4에서 언급된 제3전송 단말에 대응될 수 있다. 보다 자세히, 단계 S809에서는 제1단말의 영상 발언권이 종료된 이후에 제2단말에 영상 발언권이 부여될 수 있다.
단계 S811에서 제어 단말(405)은 제1단말이 제1단말의 사용자에 대한 영상 데이터를 제1단말 또는 제2단말의 영상 발언권이 유지될 때 전송하도록 제어한다. 즉, 단계 S811에서 제1단말은 제1단말 또는 제2단말의 영상 발언권이 유지될 때 제1단말의 사용자에 대한 영상 데이터를 서버(406)로 전송한다.
제어 단말(405)은 제1단말에 영상 발언권을 부여하고 별도의 영상 데이터 전송을 요청할 수 있다. 또는 영상 발언권에 영상 데이터 전송 요청이 포함될 수 있다. 제어 단말(405)의 요청에 응답해 제1단말은 영상 데이터를 서버(406)로 전송한다. 그리고 제1단말은 제어 단말(405)의 제어에 따라 제2단말의 영상 발언권이 유지될 때 역시 영상 데이터를 서버(406)로 전송한다.
단계 S813에서 제어 단말(405)은 제2단말이 제2단말의 사용자에 대한 영상 데이터를 제2단말의 영상 발언권이 유지될 때 전송하도록 제어한다. 즉, 단계 S813에서 제2단말은 제2단말의 영상 발언권이 유지될 때 제2단말의 사용자에 대한 영상 데이터를 서버(406)로 전송한다.
본 발명에 따르면, 제1단말의 영상 발언권이 유지될 때 전송된 제1단말의 사용자에 대한 영상 데이터는 주영역(503)에 재생된다. 그리고 제2단말의 영상 발언권이 유지될 때 전송된 제1단말의 사용자에 대한 영상 데이터는 부영역(505)에 재생되며, 제2단말의 사용자에 대한 영상 데이터는 주영역(503)에 재생된다.
한편, 본 발명에 따르면, 단계 801은 단계 S803, 단계 S805 및 단계 S807을 포함할 수 있다.
단계 S803에서 제어 단말(405)은 복수의 단말로부터 음성 데이터를 수신한다.
단계 S805에서 제어 단말(405)은 단계 S803에서 수신된 음성 데이터의 음성 크기를 기 설정된 시간동안 판단한다. 복수의 단말과 서버간의 거리, 네트워크 상황 등에 따라 복수의 단말이 전송하는 음성 데이터가 제어 단말(405)로 전송되는 시간 등에 차이가 발생할 수 있기 때문에 제어 단말(405)은 기 설정된 시간동안 음성 크기를 판단한다.
단계 S807에서 제어 단말(405)은 단계 S805에서의 판단 결과 음성 크기가 가장 큰 음성 데이터에 대응되는 제1단말에 영상 발언권을 부여한다. 즉, 제어 단말(405)은 다자간 영상 통신 시스템에 참여한 복수의 단말의 사용자에 대한 음성 데이터를 분석하여, 음성 크기가 가장 큰 단말 사용자에게 영상 발언권을 부여할 수 있다.
그리고 단계 S809에서도 제어 단말(405)은 단계 S801과 같은 방법으로 제2단말에 영상 발언권을 부여할 수 있다.
한편, 제어 단말(405)은, 단계 S811에서의 요청에 따라 제1단말이 전송하는 영상 데이터의 수신 준비에 대한 요청을, 복수의 단말(401 내지 405) 중 제1단말을 제외한 단말로 할 수 있다. 그리고 제어 단말(405)의 기능은 서버(406)에 의해 수행될 수도 있다.
도 9는 본 발명의 제4실시예에 따른 다자간 영상 통신 방법을 나타내는 흐름도로서, 서버(406)가 수행하는 다자간 영상 통신 방법을 나타내는 도면이다.
도 9에 도시된 바와 같이, 본 발명에 따른 다자간 영상 통신 방법은 단계 S901로부터 시작된다. 단계 S901에서 서버(406)는 영상 통신에 참여한 복수의 단말(401 내지 405) 중에서 영상 발언권을 획득한 제1단말로부터, 제1단말의 사용자에 대한 영상 데이터를 수신한다. 여기서, 제1단말은 도 4의 제1전송 단말(401)에 대응되며, 복수의 단말은 도 4에 도시된 단말(401 내지 405) 및 제3전송 단말을 포함하는 것에 대응된다.
단계 S903에서 서버(406)는 복수의 단말 중에서 제1단말 이후에 영상 발언권을 획득한 제2단말의 영상 발언권이 유지될 때, 제1단말 및 제2단말 각각으로부터 제1단말 및 제2단말 각각의 사용자에 대한 영상 데이터를 수신한다. 여기서, 제2단말은 도 4에서 언급된 제3전송 단말일 수 있다. 그리고 제2단말의 영상 발언권이 유지될 때 전송되는 제1단말의 사용자에 대한 영상 데이터의 크기는 제1단말의 영상 발언권이 유지될 때 전송되는 상기 제1단말의 사용자에 대한 영상 데이터의 크기 보다 작은 것이 바람직하다.
단계 S905에서 서버(406)는 단계 S903에서 제1단말로부터 수신된 영상 데이터를 복수의 단말 중에서 제1단말을 제외한 단말로 전송한다. 예를 들어 제1전송 단말(401)이 영상 발언권을 획득하여 서버(406)로 영상 데이터를 전송하는 경우, 서버(406)는 수신한 영상 데이터를 제2전송 단말(402), 제1 및 제2수신 단말(403, 404), 제어 단말(405), 제3전송 단말로 전송한다.
단계 S907에서 서버(406)는 단계 S903에서 제2단말로부터 수신된 영상 데이터를 복수의 단말 중에서 제2단말을 제외한 단말로 전송한다. 예를 들어 제3전송 단말이 영상 발언권을 획득하여 서버(406)로 영상 데이터를 전송하는 경우, 서버(406)는 수신한 영상 데이터를 제1 및 제2전송 단말(401, 402), 제1 및 제2수신 단말(403, 404), 제어 단말(405)로 전송한다.
한편, 전술한 바와 같은 본 발명에 따른 다자간 영상 통신 방법은 컴퓨터 프로그램으로 작성이 가능하다. 그리고 상기 프로그램을 구성하는 코드 및 코드 세그먼트는 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 작성된 프로그램은 컴퓨터가 읽을 수 있는 기록매체(정보저장매체)에 저장되고, 컴퓨터에 의하여 판독되고 실행됨으로써 본 발명의 방법을 구현한다. 그리고 상기 기록매체는 컴퓨터가 판독할 수 있는 모든 형태의 기록매체(CD, DVD와 같은 유형적 매체뿐만 아니라 반송파와 같은 무형적 매체)를 포함한다.
본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상과 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.
401: 제1전송단말 402: 제2전송단말
403:제1수신단말 406: 서버
501: 디스플레이 장치 503:주영역
505;부영역 507:로컬영역

Claims (1)

  1. 영상 발언권을 획득한 현재 발언자에 대한 영상 데이터를 서버로부터 수신하는 단계;
    상기 현재 발언자 이전에 상기 영상 발언권을 획득한 이전 발언자에 대한 영상 데이터를 상기 서버로부터 수신하는 단계; 및
    상기 현재 발언자에 대한 영상 데이터를 디스플레이 장치의 주영역에 재생하며, 상기 이전 발언자에 대한 영상 데이터를 상기 디스플레이 장치의, 상기 주영역보다 작은 부영역에 재생하는 단계
    를 포함하는 다자간 영상 통신 방법.
KR1020100006220A 2010-01-22 2010-01-22 다자간 영상 통신 방법. KR20100129131A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100006220A KR20100129131A (ko) 2010-01-22 2010-01-22 다자간 영상 통신 방법.

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100006220A KR20100129131A (ko) 2010-01-22 2010-01-22 다자간 영상 통신 방법.

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020090046890A Division KR100953509B1 (ko) 2009-05-28 2009-05-28 다자간 영상 통신 방법.

Publications (1)

Publication Number Publication Date
KR20100129131A true KR20100129131A (ko) 2010-12-08

Family

ID=43505898

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100006220A KR20100129131A (ko) 2010-01-22 2010-01-22 다자간 영상 통신 방법.

Country Status (1)

Country Link
KR (1) KR20100129131A (ko)

Similar Documents

Publication Publication Date Title
KR101265294B1 (ko) 영상 회의 기반 실시간 양방향 원격교육 서비스 시스템 및 그 서비스 방법
AU2016213760B2 (en) Media negotiation method, device, and system for multi-stream conference
US8860776B2 (en) Conference terminal, conference server, conference system and data processing method
RU2533304C2 (ru) Способ управления конференц-связью и относящиеся к нему устройство и система
US20120017149A1 (en) Video whisper sessions during online collaborative computing sessions
US20140118468A1 (en) Method and system for adapting a television for multimedia conferencing
CN111478905B (zh) 通信数据的获取方法、装置、电子设备及存储介质
CN105763832A (zh) 一种视频互动、控制方法及装置
CN113411538B (zh) 视频会话处理方法、装置及电子设备
WO2016019775A1 (zh) 会议迁移的方法、装置及系统
WO2015154608A1 (zh) 一种视频会议资料共享方法、系统及装置
WO2015003532A1 (zh) 多媒体会议的建立方法、装置及系统
US20190089754A1 (en) System and method for providing audio conference between heterogenious networks
CN111246150A (zh) 视频会议的控制方法、系统、服务器和可读存储介质
WO2016026336A1 (zh) 音频视频会议中的远程互动方法、系统及mcu
US9013537B2 (en) Method, device, and network systems for controlling multiple auxiliary streams
KR100953509B1 (ko) 다자간 영상 통신 방법.
KR20130089979A (ko) 미디어 스트림 스위칭 기반의 양방향 강의 서비스 제공 방법 및 장치, 그리고 수신 방법 및 그 장치
JP2008236553A (ja) テレビ会議システムにおける端末装置、端末装置の制御方法、端末装置の制御プログラム
CN116320514A (zh) 一种音视频会议直播的方法、系统、电子设备和介质
CN105592286A (zh) 即时通信界面信息处理方法及装置
KR20100129131A (ko) 다자간 영상 통신 방법.
WO2016101623A1 (zh) 多点音频视频通信中远程互动的方法及设备
CN113726534A (zh) 会议控制方法、装置、电子设备及存储介质
KR20180091319A (ko) 사운드 공유 장치 및 방법

Legal Events

Date Code Title Description
A107 Divisional application of patent
WITN Withdrawal due to no request for examination