KR101636716B1 - 발언자를 구별하는 영상 회의 장치 및 방법 - Google Patents

발언자를 구별하는 영상 회의 장치 및 방법 Download PDF

Info

Publication number
KR101636716B1
KR101636716B1 KR1020090130490A KR20090130490A KR101636716B1 KR 101636716 B1 KR101636716 B1 KR 101636716B1 KR 1020090130490 A KR1020090130490 A KR 1020090130490A KR 20090130490 A KR20090130490 A KR 20090130490A KR 101636716 B1 KR101636716 B1 KR 101636716B1
Authority
KR
South Korea
Prior art keywords
participant
tone color
color information
speaker
participants
Prior art date
Application number
KR1020090130490A
Other languages
English (en)
Other versions
KR20110073758A (ko
Inventor
이준행
강병창
방정호
박근주
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090130490A priority Critical patent/KR101636716B1/ko
Priority to US12/851,595 priority patent/US8411130B2/en
Publication of KR20110073758A publication Critical patent/KR20110073758A/ko
Application granted granted Critical
Publication of KR101636716B1 publication Critical patent/KR101636716B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Abstract

영상 회의에서 발언자를 구별하여 표시하는 영상 데이터를 생성하고, 모바일 단말기에서 상기 발언자가 구별되는 상기 영상 데이터를 통해 영상 회의를 제공하는 시스템 및 방법이 개시된다. 이를 위해, 본 발명의 일실시예에 따른 영상 회의 장치는 복수의 참가자들로 구성되는 영상 회의에서 발언 중인 참가자를 판별하는 발언자 판별부와, 상기 판별된 참가자와, 상기 판별된 참가자를 제외한 상기 복수의 참가자들을 구별하여 표시하는 영상 데이터를 생성하는 영상 데이터 생성부를 포함할 수 있다.
영상 회의, 화자, 발언자, 발언자, 구별, 구분, 오브젝트

Description

발언자를 구별하는 영상 회의 장치 및 방법{APPARATUS OF VIDEO CONFERENCE FOR DISTINGUISH SPEAKER FROM PARTICIPANTS AND METHOD OF THE SAME}
영상 회의에서 발언자를 구별하여 표시하는 영상 데이터를 생성하고, 모바일 단말기에서 상기 발언자가 구별되는 상기 영상 데이터를 통해 영상 회의를 제공하는 시스템 및 방법이 개시된다.
원격회의는 여러 가지 단말과 회선으로 이루어지는 통신시스템을 이용하여 멀리 떨어져 있는 사람들 간에 영상화면으로 모습을 보아가며, 마치 동일한 회의실에 함께 있는 분위기로 회의를 진행하는 것을 말한다.
원격회의는 멀리 떨어져 있는 사람들 간에 회의 뿐만 아니라, 음성과 함께 참여자들의 모습과 관련된 정보 자료를 영상으로 나타낼 수 있기 때문에 영상 회의 또는 TV회의라고 한다.
원격회의를 위한 시스템은 기본적으로 회의를 하는 양쪽의 회의실에 카메라, 영상압축복원 코덱, 모니터, 마이크, 스피커를 설치하고 양자 간을 쌍방향 영상회선 및 음성회선, 또는 전용회선으로 연결하며, 1990년도에는 ITU-T에서 이를 위한 세계적인 표준규격을 정하여 사용을 권고하고 있다.
최근에는 개인용 컴퓨터로 회의를 할 수 있는 기능을 가진 제품도 있어, 컴퓨터 자료를 서로 공유해 가면서 회의를 진행할 수도 있고 쌍방의 모니터 화면에 전자펜으로 글씨나 그림을 그릴 수 있는 기능도 활용되고 있다.
또한, 인터넷을 이용하는 원격회의 시스템도 등장하여, 얼마간의 회의를 위하여 이동 시간의 낭비를 막아 시간을 유효하게 이용하고 관련비용을 절감하는 효과와 생산성을 높일 수 있으며 회의 진행과정을 화상정보로 보관할 수도 있다. 이를 응용하여 원격진료나 원격교육 등을 할 수 있는 계기가 마련되고 있다.　
기업의 본사와 지사간의 회의나 여러 회의장이 따로 떨어져 있어 한 장소에 모여서 회의를 진행하기 어려운 경우에 컴퓨터 네트워크를 이용하여 원격으로 진행할 수도 있다.
최근 출장, 현장근무, 재택근무 등의 증가함에 따라 회사 밖에 있을 때에도 모바일 단말을 이용하여 회의에 참석하고자 하는 요구가 커지고 있다.
그러나 모바일 단말기의 경우 이동성을 위하여 디스플레이 크기를 작게 만들기 때문에 본 회의실의 회의 장면이나 발표 자료 등을 공유하여 보는 것이 용이하지 않다.
본 발명의 일실시예에 따른 영상 회의 장치는 복수의 참가자들로 구성되는 영상 회의에서 발언 중인 참가자를 판별하는 발언자 판별부 및 상기 판별된 참가자와, 상기 판별된 참가자를 제외한 상기 복수의 참가자들을 구별하여 표시하는 영상 데이터를 생성하는 영상 데이터 생성부를 포함할 수 있다.
본 발명의 일실시예에 따른 영상 회의 방법은 복수의 참가자들로 구성되는 영상 회의에서 발언 중인 참가자를 판별하는 단계 및 상기 판별된 참가자와, 상기 판별된 참가자를 제외한 상기 복수의 참가자들을 구별하여 표시하는 영상 데이터를 생성하는 단계를 포함하는 것을 특징으로 한다.
본 발명의 일실시예에 따른 영상 회의 장치 및 방법은 모바일 단말기의 작은 디스플레이 상에 회의실에서 진행되는 회의 장면을 효율적으로 표시할 수 있다.
본 발명의 일실시예에 따른 영상 회의 장치 및 방법은 영상 회의에 대한 불필요한 화면 구성 요소를 표시하지 않고, 실제로 영상 회의에 필요한 영상 구성 요소, 즉 참가자에 대한 영상만을 추출하여 표시함으로써, 네트워크 리소스를 효율적으로 사용할 수 있다.
이하 첨부된 도면을 참조하여 본 발명의 일실시예에 영상 회의 장치 및 방법을 상세히 설명한다. 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성 에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고, 본 명세서에서 사용되는 용어(terminology)들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 사용자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일실시예에 따른 영상 회의 장치가 적용된 네트워크(100)를 설명하는 도면이다.
본 발명의 일실시예에 따른 영상 회의 장치는 촬영 수단(120)을 이용하여, 회의실에서 발생하는 회의 영상(140)을 촬영할 수 있다.
이에, 촬영된 회의 영상은 컨트롤러(130)에서 영상 처리될 수 있다.
본 발명의 일실시예에 따른 컨트롤러(130)는 영상 처리된 회의 영상에서 참가자들(110)에 대응하는 오브젝트를 추출할 수 있다. 상기 오브젝트는 상기 참가자들(110)에 대한 영상으로서, 무선 네트워크 장비(150)를 통해 실제로 모바일 단말기(160)에 표시되는 정보로 해석될 수 있다.
본 발명의 일실시예에 따른 영상 회의 장치가 적용된 네트워크(100)는 회의 영상(140)으로부터 모든 참가자들(110)의 오브젝트를 추출하여 참가자 오브젝트의 정보만을 포함하는 영상 데이터를 모바일 단말기(160)로 전송할 수 있다.
상기 참가자 오브젝트의 정보만을 포함하는 영상 데이터를 수신하는 모바일 단말기(160)는 전송된 참가자들(110)의 오브젝트를 화면상에 배열할 수 있다.
본 발명의 일실시예에 따른 상기 영상 데이터는 참가자들(110)의 오브젝트뿐만 아니라, 현재 발언 중인 참가자(이하 발언자라 함)에 대한 정보와, 상기 발언자의 영상을 강조할 수 있는 강조 이벤트 정보를 더 포함할 수 있다.
상기 강조 이벤트 정보의 경우, 발언자의 영상을 다른 참가자의 영상에 비해서 크게 한다거나, 테두리가 깜박이는 효과를 제공하는 등의 이벤트를 발생할 수 있다.
따라서, 모바일 단말기의 사용자는, 비교적 작은 모바일 단말기의 디스플레이 상에서 회의의 참가중인 참가자들(110) 중에서 발언자를 쉽게 확인할 수 있다.
예를 들어, 회의장이 다수개인 경우, 모바일 단말상에 각 지역의 참가자 오브젝트를 그룹화하여 표시하며, 다른 모바일 참가자도 오브젝트화 하여 표시할 수 있다.
즉, 본 발명의 일실시예에 따른 영상 회의 장치는 회의 참가 지역이 2개 이상일 경우 각 지역별로 참가자들의 오브젝트 영상을 그룹화하여 모바일 단말기의 디스플레이에 표시할 수 있다.
본 발명의 일실시예에 따른 영상 회의 장치는 영상(또는 음원)의 위치(또는 음색)의 분석을 통하여 현재 말하고 있는 사람이 누구인지를 파악하고 이 정보를 모바일 단말기로 보냄으로써, 효율적인 영상 회의가 진행될 수 있도록 한다.
다수의 참가자들(110) 중에서 발언자만을 분별하기 위해서, 회의장에 비치된 다수의 음성 획득 수단에서 얻은 음성 정보를 기반으로 상기 발언자의 대략적인 위치를 파악하고 이 위치 주변의 참가자들(110)의 영상 정보로부터 정확한 발언자를 파악할 수 있다.
다른 예로써, 다수의 참가자들(110) 중에서 발언자만을 분별하기 위해서, 등록된 참가자들(110)에 대한 음색 정보와 회의장에서의 각 참가자들(110)에 대한 위치를 미리 저장하고, 발언하는 참가자의 음색 정보를 분석하고 해당 참가자의 위치를 보다 빠르게 파악할 수도 있다.
본 발명의 일실시예에 따른 본 발명의 일실시예에 따른 영상 회의 장치는 모바일 단말기 상에 표시되는 특정 참가자를 선택하여 '비밀쪽지' 기능 등 참가자에 특화된 서비스를 제공할 수도 있다.
또한, 본 발명의 일실시예에 따른 본 발명의 일실시예에 따른 영상 회의 장치는 유무선 채널을 통하여 모바일 단말기에 연결된 외부 디스플레이에, 공유된 발표 자료를 선택적으로 표시되도록 할 수 있다.
결국, 본 발명의 일실시예에 따른 영상 회의 장치를 이용하면, 모바일 단말기의 작은 디스플레이 상에 회의실에서 진행되는 회의 장면을 효율적으로 표시할 수 있다.
뿐만 아니라, 본 발명의 일실시예에 따른 영상 회의 장치를 이용하면, 영상 회의에 대한 불필요한 화면 구성 요소, 예를 들어 배경을 표시하지 않을 수 있어, 실제로 영상 회의에 필요한 영상 구성 요소, 즉 참가자에 대한 영상만을 추출하여 표시함으로써, 네트워크 리소스를 효율적으로 사용할 수 있다.
도 2는 본 발명의 일실시예에 따른 영상 회의 장치(200)을 설명하기 위한 블록도이다.
본 발명의 일실시예에 따른 영상 회의 장치(200)은 발언자 판별부(210), 영상 데이터 생성부(220)를 포함한다.
먼저, 발언자 판별부(210)는 복수의 참가자들로 구성되는 영상 회의에서 발언 중인 참가자(발언자)를 판별할 수 있다.
본 발명의 일실시예에 따른 영상 회의 장치(200)은 발언자 판별부(210)가 발언자를 판별하는 것을 지원하기 위해, 음성정보 수집부(230)를 더 포함할 수 있다.
본 발명의 일실시예에 따른 음성정보 수집부(230)는 상기 복수의 참가자들 각각에 대응하는 복수의 음성 획득 수단들을 포함할 수 있다. 또한, 본 발명의 일실시예에 따른 음성정보 수집부(230)는 상기 복수의 음성 획득 수단들 중에서 음성정보가 수집되는 음성 획득 수단을 확인할 수 있다.
구체적인 예로써, 본 발명의 일실시예에 따른 음성정보 수집부(230)는 회의장의 서로 다른 위치에 2개 이상의 음성 획득 수단을 설치한 후 각 음성 획득 수단에서 나오는 전기신호의 위상차를 구하여 음성 획득 수단에 대한 음원의 방향을 판별할 수 있다.
예를 들어, 본 발명의 일실시예에 따른 음성정보 수집부(230)가 두 개의 음성 획득 수단(제1 음성 획득 수단 및 제2 음성 획득 수단)를 포함하는 경우, 제2 음성 획득 수단보다 제1 음성 획득 수단 쪽에 앉아 있는 참가자가 발언하는 음성이 제1 음성 획득 수단에 보다 빠르게 전달될 수 있다.
즉, 참가자가 발언을 하면, 음파의 전달 속도가 일정하다는 점에 기인하여 두 음성 획득 수단에 도달하는 시간에 대한 차이가 발생할 수 있다.
다시 말해, 참가자로부터 가까이 있는 제1 음성 획득 수단에서 전기신호가 먼저 나오고, 약간의 시간 지연 후 2번 음성 획득 수단에서 전기신호가 나올 수 있다. 이 경우, 두 전기 신호 간의 시간차이를 측정하면 소리가 나오는 방향을 알 수 있다.
소리가 나오는 방향을 알 수 있다면, 참가자들 중에서 발언 중인 참가자를 판별할 수가 있다.
또한, 본 발명의 일실시예에 따른 음성정보 수집부(230)는 음성 획득 수단에 입력되는 음성의 크기를 비교하여, 제1 음성 획득 수단 쪽에 위치하는 참가자 인지 제2 음성 획득 수단 쪽에 위치하는 참가지 인지 여부를 판별할 수도 있다.
본 발명의 다른 일실시예에 따른 영상 회의 장치(200)은 발언자 판별부(210)가 발언자를 판별하는 것을 지원하기 위하여, 발언 중인 참가자의 음성으로부터 발언자 음색정보를 추출하는 음색정보 추출부(240)와 상기 복수의 참가자들 중에서 적어도 하나의 참가자에 대한 음색정보를 저장하는 음색정보 저장부(250)를 포함할 수 있다.
예를 들어서, 음색정보 추출부(240)가 발언자로부터 음색 정보를 추출하는 경우, 상기 추출된 음색 정보가 음색정보 저장부(250)에 이미 저장되어 있거나, 저장되어 있지 아니한 두 가지의 경우라 구분할 수 있다.
이를 위해, 발언자 판별부(210)는 음성정보 추출부(240)가 추출한 상기 발 언자 음색정보에 매칭되는 음색정보가 음색정보 저장부(250)에 저장되어 있는지를 판단하고, 저장되어 있다면 음성정보 추출부(240)를 통해 상기 발언자의 위치를 확인할 수 있다.
즉, 발언자 판별부(210)는 상기 매칭되는 음색정보와 연관된 위치정보를 확인하여 상기 발언 중인 참가자를 판별할 수 있다.
본 발명의 일실시예에 따른 음색정보 저장부(250)는 상기 저장된 음색정보에 상응하는 참가자에 대한 위치정보를 더 저장할 수 있다.
먼저, 저장된 경우, 발언자 판별부(210)는 상기 음색정보 저장부(250)로부터 상기 추출된 음색 정보에 대응하는 상기 위치정보를 추출하여, 발언자의 위치를 판별할 수가 있다.
다음으로, 발언자 판별부(210)는 상기 추출된 발언자 음색정보에 매칭되는 음색정보가 음색정보 저장부(250)에 저장되어 있는지를 판단하고, 저장되지 않았다면 음성정보 수집부(230)를 이용하여 상기 발언자의 위치를 확인하도록 제어할 수 있다.
구체적으로, 발언자 판별부(210)는 상기 발언 중인 참가자의 음성이 입력되는 음성 획득 수단을 확인하고, 상기 확인된 음성 획득 수단에 상응하는 위치의 참가자를 상기 발언 중인 참가자로 판별할 수 있다.
또한, 발언자의 위치가 판별되면, 음색정보 저장부(250)는 상기 발언 중인 참가자의 음성으로부터 추출된 상기 발언자 음색정보 및 상기 발언 중인 참가자의 위치정보를 연관하여 저장할 수 있다.
발언자 판별부가 참가자들 중에서 발언자를 확인하면, 영상 데이터 생성부(220)는 상기 판별된 참가자와, 상기 판별된 참가자를 제외한 상기 복수의 참가자들을 구별하여 표시하는 영상 데이터를 생성할 수 있다.
이를 위해, 영상 데이터 생성부(220)는 촬영되는 회의실의 영상에서 참가자만들만을 오브젝트 영상으로서 추출하고, 추출된 참가자들의 오브젝트 영상 중에서 발언자의 오브젝트 영상을 부각시켜 영상 데이터로서 생성할 수 있다.
다시 말해, 상기 영상 데이터는 회의 영상에서 참가자들 각각의 특징점들을 이용하여 추출한, 참가자들 각각에 대응하는 오브젝트 영상일 수 있다.
구체적으로, 회의 영상의 엣지(edge) 분석, 즉 참가자 주변의 픽셀 간의 intensity의 변화를 계산하는 분석을 통해 사람의 신체구조를 닮은 오브젝트가 있는지를 판단하여 참가자를 찾을 수가 있다. 즉, 영상 데이터 생성부(220)는 촬영되는 회의 영상에서 머리와 몸통와 유사한 오브젝트가 있는지를 먼저 확인하여 있다면, 보다 정밀하게 검토할 수 있다.
만약, 머리와 몸통와 유사한 오브젝트가 있다면 영상 데이터 생성부(220)는 해당 위치에 눈, 코, 입, 귀, 목 등의 특징 점이 존재하는지를 면밀히 확인하여 있다면, 해당 부분을 참가자의 오브젝트 영상으로 추출할 수 있다.
추출되는 오브젝트 영상은 엣지 분석을 통해 테두리를 기준으로 바탕과, 실제 참가자의 영상이 되는 오브젝트 영상을 분리할 수 있다. 분리된 오브젝트 영상은 참가자에 대응하는 ID를 부여하여 관리할 수 있다.
엣지 분석을 통해서 회의실 내에 걸린 그림이나, 사진으로부터 오브젝트 영 상이 분리될 수도 있다.
따라서, 영상 데이터 생성부(220)는 엣지 분석과 함께 적외선을 이용하여 오브젝트 영상을 추출하는 대상체의 온도를 측정할 수도 있다.
즉, 영상 데이터 생성부(220)는 실제 사람이 아닌 경우에도 인물 사진 등을 참가자로 오인할 수도 있다. 이 경우, 영상 데이터 생성부(220)는 적외선 카메라를 이용하여 촬영되는 참가자들의 온도를 측정하고, 일정치 이상의 온도를 갖는 참가자들의 경우에만 실제로 회의에 참가한 사람이라고 판별할 수가 있다.
참가자들에 대하여 모든 오브젝트 영상이 분리되면, 영상 데이터 생성부(220)는 발언자 판별부(210)로부터 발언자에 대한 정보를 수신하고, 수신된 발언자에 대응하는 오브젝트 영상에 대해 선정된 이벤트 처리를 행할 수 있다. 이에, 영상 데이터 생성부(220)는 이벤트 처리된 발언자의 오브젝트 영상과, 다른 참가자들의 오브젝트 영상을 병합하여 모바일 단말기로 제공할 영상 데이터를 생성할 수 있다.
상기 영상 데이터는 모바일 단말기를 위한 모바일 영상 데이터의 포맷으로 가공될 수 있다.
상기 이벤트는, 발언 중인 참가자의 오브젝트 영상을 다른 참가자들의 오브젝트 영상들과 구분하기 위한 영상 처리의 한 방법으로 해석될 수 있다.
상기 이벤트는 도 3 내지 도 5를 통해서 구체적으로 설명한다.
도 3 내지 도 5는 본 발명의 일실시예에 따른 영상 회의 장치와 연동하는 모바일 단말기에서, 제공되는 다양한 영상 회의 서비스를 설명하는 도면이다.
먼저, 도 3을 살펴보면 이벤트가 반영되지 않은 영상 데이터로서, 회의 영상에서 추출된 오브젝트 영상들(310, 320, 330)이 모바일 단말기(300)의 디스플레이 상에 아무런 특이점 없이 표시되고 있다.
다음으로, 도 4를 살펴보면, 제1 참가자가 발언하는 경우 상기 제1 참가자에 대응하는 제1 오브젝트 영상(410)이 다른 오브젝트 영상들(420, 430)과 구분될 수 있다.
도 4에서는 모바일 단말기(400)가 제1 오브젝트 영상(410)에 테두리를 깜박거리게 하는 이벤트가 적용되어 다른 오브젝트 영상들(420, 430)과 구분하는 영상 데이터를 표시한다.
다음으로, 도 5를 살펴보면, 제1 참가자가 발언하는 경우 상기 제1 참가자에 대응하는 제1 오브젝트 영상(510)이 다른 오브젝트 영상들(520, 530)과 구분될 수 있다.
도 5에서는 모바일 단말기(500)가 제1 오브젝트 영상(510)의 크기가 다른 오브젝트 영상들(420, 430)과 확연히 구분되도록 확대하여 표시하는 영상 데이터를 표시한다.
도 6은 본 발명의 다른 일실시예에 따른 영상 회의 장치가 적용된 네트워크(600)를 설명하는 도면이다.
본 발명의 다른 일실시예에 따른 영상 회의 장치는 복수의 지역(site)에 회의장(610, 620)이 위치하고, 복수의 모바일 단말기들(630, 640)이 참여하는 영상회의도 서비스가 가능하다.
즉, 영상 회의 장치는 사전에 각각의 음성 획득 수단 및 참가자들에 대하여 식별 가능한 ID를 부여하고, 발언하는 참가자들을 상기 ID를 이용하여 판별할 수가 있다. 즉, 어느 지역의 회의장인지, 해당 회의장의 참가자들 중에서 어떤 참가자가 현재 발언 중인지를 판별하여 영상 데이터를 생성하여 각 회의장 및 모바일 단말기들에게 제공할 수 있다.
이를 위해, 영상 회의 장치는 각 회의장에서의 회의 영상으로부터 회의의 참가자들에 대한 오브젝트 영상을 추출해야만 한다. 또한, 각 지역별로 참가자들의 오브젝트 영상을 그룹화 하여 표시하며, 다른 모바일 참가자도 오브젝트 영상을 표시할 수 있다.
또한, 판별된 발언자의 경우 선정된 이벤트로써 다른 참가자들과 구분하는 영상 처리를 행하여, 영상 데이터를 생성할 수 있다.
결국, 본 발명의 일실시예에 따른 영상 회의 장치를 이용하면, 디스플레이가 작은 모바일 단말을 이용하여 원격 영상회의에 참석한 경우 본 회의실에 있는 참석자의 회의 장면을 보다 효과적으로 전달할 수 있다.
또한 발표 자료 등은 화면이 큰 외부 디스플레이에 선택적으로 포워딩 함으로써 보다 효과적으로 회의 내용을 알 수 있도록 해준다.
도 7은 본 발명의 일실시예에 따른 영상 회의 방법을 설명하기 위한 흐름도이다.
도 7을 참고하면, 본 발명의 일실시예에 따른 영상 회의 방법은 회의 영상으로부터 각 참가자들의 위치를 파악할 수 있다(단계 701). 이를 위해, 회의 전에 각 참가자들의 위치 정보를 수집할 수 있다.
다음으로, 본 발명의 일실시예에 따른 영상 회의 방법은 회의 영상으로부터 각 참가자들에 대한 오브젝트 영상을 추출할 수 있다(단계 702). 회의 영상으로부터 각 참가자들에 대한 오브젝트 영상은 엣지 분석을 통해서 추출할 수 있다.
다음으로, 본 발명의 일실시예에 따른 영상 회의 방법은 참가자들 중에서 발언하는 참가자로부터 음성정보를 검출하고, 검출되는 음성 정보가 수집되는 음성 획득 수단의 위치를 확인할 수 있다(703).
본 발명의 일실시예에 따른 음성 획득 수단은 마이크를 포함할 수 있다.
이를 위해, 본 발명의 일실시예에 따른 영상 회의 방법은 사전에 각 참가자들에 대응되는 적어도 하나 이상의 음성 획득 수단에 대한 위치를 확인하고, 각 마이크들을 고유 식별할 수 있는 ID를 부여할 수 있다.
다음으로, 본 발명의 일실시예에 따른 영상 회의 방법은 확인된 마이크의 위치에 상응하는 참가자의 실제 위치를 이용하여, 회의 영상에서 각 참가자의 위치를 파악할 수 있다(단계 704).
이로써, 본 발명의 일실시예에 따른 영상 회의 방법은 실제의 참가자의 위치와 추출된 참가자들의 오브젝트의 위치를 매칭시킬 수가 있다.
다음으로, 본 발명의 일실시예에 따른 영상 회의 방법은 판별된 발언 중인 참가자를 다른 참가자들과 구별하여 영상 데이터를 생성할 수 있다(단계 705).
상기 영상 데이터는 상기 발언 중인 참가자에 대한 오브젝트 영상과 다른 참가자들에 대한 오브젝트 영상들을 포함할 수 있다. 또한, 상기 영상 데이터는 상기 발언 중인 참가자에 대한 오브젝트 영상을 다른 참가자들에 대한 오브젝트 영상들과 구분하여 표시할 수 있다.
생성된 영상 데이터는 모바일 단말기 등으로 전송되어 표시될 수 있다.
도 8은 본 발명의 다른 일실시예에 따른 영상 회의 방법을 설명하기 위한 흐름도이다.
본 발명의 다른 일실시예에 따른 영상 회의 방법은 회의 영상으로부터 각 참가자의 위치를 파악할 수 있다(단계 801).
다음으로, 본 발명의 다른 일실시예에 따른 영상 회의 방법은 회의 영상으로부터 각 참가자의 오브젝트 영상을 추출할 수 있다(단계 802). 이어, 본 발명의 다른 일실시예에 따른 영상 회의 방법은 발생하는 음성정보를 검출하고(단계 803), 검출되는 음성정보에 상응하는 참가자(발언자)의 위치를 확인할 수 있다(단계 804).
다음으로, 본 발명의 다른 일실시예에 따른 영상 회의 방법은 금출되는 음성정보로부터 음색정보를 추출하고, 추출된 음색정보가 기저장된 음색정보인지의 여부를 판단할 수 있다(단계 805).
만약, 기저장된 음색정보가 아닌 경우, 본 발명의 다른 일실시예에 따른 영상 회의 방법은 추출된 음색정보를 저장하고(808), 단계 703으로 분기하여 음성정보가 수집되는 음성 획득 수단의 위치를 확인하여, 발언자의 위치를 확인할 수 있다.
다른 예로써, 기저장된 음색정보라면 본 발명의 다른 일실시예에 따른 영상 회의 방법은 상기 음색정보에 상응하는 위치 정보를 확인할 수 있다(단계 806).
이를 위해, 본 발명의 다른 일실시예에 따른 영상 회의 방법은 상기 음색정보와 상기 위치 정보를 연관지어 저장수단에 저장할 수 있다.
다음으로, 본 발명의 다른 일실시예에 따른 영상 회의 방법은 상기 위치 정보가 확인되면, 발언 중인 참가자를 구별하여 영상 데이터를 생성할 수 있다(단계 807).
마찬가지로, 구별되는 참가자에 대응하는 오브젝트 영상을 다른 참가자들의 오브젝트 영상들과 구분함으로써, 상기 영상 데이터를 생성할 수 있다.
모바일 단말기에서는 발언자의 오브젝트 영상에 테두리 반짝거림과 같은 특수 표시를 하여 모바일 단말기를 통해 영상 회의에 참여하는 사용자가 신속하게 발언자를 파악할 수 있도록 한다. 본 발명의 다른 일실시예에 따른 영상 회의 방법은 모바일 단말기상의 특정 참가자의 오브젝트 영상을 선택함으로써 비밀 쪽지 등 참가자에 특화된 서비스를 제공할 수 있다.
본 발명의 다른 일실시예에 따른 영상 회의 방법은 모바일 단말기가 유무선 채널을 통하여 외부 디스플레이와 연결이 되어, 공유된 발표 자료 윈도우만을 선택적으로 외부 디스플레이에 포워딩할 수 있도록 지원할 수도 있다.
본 발명의 일측에 따른 영상 회의 장치 및 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프 로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
본 발명의 일실시예에 따른 영상 회의 방법을 이용하면, 모바일 단말기의 작은 디스플레이 상에 회의실에서 진행되는 회의 장면을 효율적으로 표시할 수 있다. 뿐만 아니라, 본 발명의 일실시예에 따른 영상 회의 방법을 이용하면, 영상 회의에 대한 불필요한 화면 구성 요소, 예를 들어 배경을 표시하지 않을 수 있다.
즉, 본 발명의 일실시예에 따른 영상 회의 방법은 실제로 영상 회의에 필요한 영상 구성 요소, 즉 참가자에 대한 영상만을 추출하여 표시함으로써, 네트워크 리소스를 효율적으로 사용할 수 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통 상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명의 일실시예에 따른 영상 회의 장치가 적용된 네트워크를 설명하는 도면이다.
도 2는 본 발명의 일실시예에 따른 영상 회의 장치(200)을 설명하기 위한 블록도이다.
도 3 내지 도 5는 본 발명의 일실시예에 따른 영상 회의 장치와 연동하는 모바일 단말기에서, 제공되는 다양한 영상 회의 서비스를 설명하는 도면이다.
도 6은 본 발명의 다른 일실시예에 따른 영상 회의 장치가 적용된 네트워크를 설명하는 도면이다.
도 7은 본 발명의 일실시예에 따른 영상 회의 방법을 설명하기 위한 흐름도이다.
도 8은 본 발명의 다른 일실시예에 따른 영상 회의 방법을 설명하기 위한 흐름도이다.

Claims (17)

  1. 복수의 참가자들로 구성되는 영상 회의에서 발언 중인 참가자를 판별하는 발언자 판별부;
    상기 판별된 참가자와, 상기 판별된 참가자를 제외한 상기 복수의 참가자들을 구별하여 표시하는 영상 데이터를 생성하는 영상 데이터 생성부;
    상기 복수의 참가자들 각각에 대응하는 복수의 음성 획득 수단들을 포함하는 음성정보 수집부;
    상기 복수의 참가자들 중 적어도 하나의 참가자에 대한 음색정보를 저장하고, 상기 저장된 음색정보에 상응하는 참가자에 대한 위치정보를 저장하는 음색정보 저장부; 및
    상기 발언 중인 참가자의 음성으로부터 발언자 음색정보를 추출하는 음색정보 추출부
    를 포함하고
    상기 음성정보 수집부는 상기 복수의 음성 획득 수단들이 수집하는 음성정보의 차이에 기초하여 상기 발언 중인 참가자와 연관되는 음성 획득 수단을 확인하고, 상기 발언자 판별부는 상기 추출된 발언자 음색정보에 매칭되는 음색정보가 상기 음색정보 저장부에 저장되어 있는지를 판단하고, 판단 결과 상기 매칭되는 음색정보가 저장되어 있지 않으면, 상기 확인된 음성 획득 수단에 상응하는 위치의 참가자를 상기 발언 중인 참가자로 판별하고, 상기 영상 데이터 생성부는 상기 확인된 음성 획득 수단에 연관되는 회의 영상의 온도 데이터를 이용하여 상기 발언 중인 참가자의 오브젝트 영상을 생성하는
    영상 회의 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 발언자 판별부는,
    상기 확인된 음성 획득 수단에 상응하는 위치의 참가자를 상기 발언 중인 참가자로 판별하는 영상 회의 장치.
  4. 삭제
  5. 삭제
  6. 삭제
  7. 제1항에 있어서,
    상기 발언자 판별부는,
    상기 추출된 발언자 음색정보에 매칭되는 음색정보가 상기 음색정보 저장부에 저장되어 있는지를 판단하고, 판단 결과 상기 매칭되는 음색정보가 상기 음색정보 저장부에 저장되어 있으면 상기 매칭되는 음색정보와 연관된 위치정보를 확인하여 상기 발언 중인 참가자를 판별하는 영상 회의 장치.
  8. 삭제
  9. 제1항에 있어서,
    상기 음색정보 저장부는,
    상기 발언 중인 참가자의 음성으로부터 추출된 상기 발언자 음색정보 및 상기 발언 중인 참가자의 위치정보를 연관하여 저장하는 영상 회의 장치.
  10. 제1항에 있어서,
    상기 영상 데이터는 모바일 단말기를 위한 모바일 영상 데이터인 영상 회의 장치.
  11. 제10항에 있어서,
    상기 영상 데이터는 회의 영상에서 참가자들 각각의 특징점들을 이용하여 추출한, 참가자들 각각에 대응하는 오브젝트 영상인 영상 회의 장치.
  12. 제11항에 있어서,
    상기 영상 데이터는 발언 중인 참가자의 오브젝트 영상을 다른 참가자들의 오브젝트 영상들과 구분하여 표시하는 모바일 영상 데이터인 영상 회의 장치.
  13. 복수의 참가자들로 구성되는 영상 회의에서 발언 중인 참가자를 판별하는 단계; 및
    상기 판별된 참가자와, 상기 판별된 참가자를 제외한 상기 복수의 참가자들을 구별하여 표시하는 영상 데이터를 생성하는 단계
    를 포함하고
    상기 발언 중인 참가자를 판별하는 상기 단계는,
    복수의 음성 획득 수단들이 수집하는 음성정보의 차이에 기초하여 상기 발언 중인 참가자와 연관되는 음성 획득 수단을 확인하는 단계;
    상기 확인된 음성 획득 수단에 상응하는 위치의 참가자를 상기 발언 중인 참가자로 판별하는 단계;
    상기 복수의 참가자들 중에서 적어도 하나의 참가자에 대한 음색정보를 저장하고, 상기 저장된 음색정보에 상응하는 참가자에 대한 위치정보를 저장하는 단계; 및
    상기 발언 중인 참가자의 음성으로부터 발언자 음색정보를 추출하는 단계
    를 포함하고,
    상기 발언 중인 참가자를 판별하는 상기 단계는,
    상기 추출된 발언자 음색정보에 매칭되는 음색정보가 저장되어 있는지를 판단하고, 저장되어 있지 않은 경우에 상기 확인된 음성 획득 수단에 상응하는 위치의 참가자를 상기 발언 중인 참가자로 판별하는 단계를 더 포함하고,
    상기 영상 데이터를 생성하는 단계는,
    상기 확인된 음성 획득 수단에 연관되는 회의 영상의 온도 데이터를 이용하여 상기 발언 중인 참가자의 오브젝트 영상을 생성하는 단계를 더 포함하는
    영상 회의 방법.
  14. 삭제
  15. 삭제
  16. 제13항에 있어서,
    상기 발언 중인 참가자를 판별하는 상기 단계는,
    상기 추출된 발언자 음색정보에 매칭되는 음색정보가 저장되어 있는지를 판단하고, 저장되어 있는 경우에 상기 매칭되는 음색정보와 연관된 위치정보를 확인하여 상기 발언 중인 참가자를 판별하는 단계
    를 포함하는 영상 회의 방법.
  17. 삭제
KR1020090130490A 2009-12-24 2009-12-24 발언자를 구별하는 영상 회의 장치 및 방법 KR101636716B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020090130490A KR101636716B1 (ko) 2009-12-24 2009-12-24 발언자를 구별하는 영상 회의 장치 및 방법
US12/851,595 US8411130B2 (en) 2009-12-24 2010-08-06 Apparatus and method of video conference to distinguish speaker from participants

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090130490A KR101636716B1 (ko) 2009-12-24 2009-12-24 발언자를 구별하는 영상 회의 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20110073758A KR20110073758A (ko) 2011-06-30
KR101636716B1 true KR101636716B1 (ko) 2016-07-06

Family

ID=44187019

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090130490A KR101636716B1 (ko) 2009-12-24 2009-12-24 발언자를 구별하는 영상 회의 장치 및 방법

Country Status (2)

Country Link
US (1) US8411130B2 (ko)
KR (1) KR101636716B1 (ko)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130028443A1 (en) * 2011-07-28 2013-01-31 Apple Inc. Devices with enhanced audio
US20130109359A1 (en) * 2011-11-02 2013-05-02 Research In Motion Limited Combined pushcast and live conference
KR101978219B1 (ko) * 2013-03-15 2019-05-14 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
US9479730B1 (en) * 2014-02-13 2016-10-25 Steelcase, Inc. Inferred activity based conference enhancement method and system
CN105100677A (zh) * 2014-05-21 2015-11-25 华为技术有限公司 用于视频会议呈现的方法、装置和系统
US9357168B1 (en) 2014-08-25 2016-05-31 Google Inc. Facilitating video conferences
US10061467B2 (en) 2015-04-16 2018-08-28 Microsoft Technology Licensing, Llc Presenting a message in a communication session
CN106297809A (zh) * 2015-05-29 2017-01-04 杜比实验室特许公司 基于远端用户控制的音频信号处理
GB201520509D0 (en) 2015-11-20 2016-01-06 Microsoft Technology Licensing Llc Communication system
CN107465518A (zh) * 2017-08-16 2017-12-12 北京大生在线科技有限公司 一种基于网络的多人同时语音聊天方法及系统
KR101981049B1 (ko) * 2017-09-13 2019-08-28 (주)에어사운드 멀티 커넥션을 통한 회의록 생성 시스템 및 그 방법
EP3729799B1 (en) * 2017-12-20 2022-08-10 Huddle Room Technology S.r.l. Mobile terminal and hub apparatus for use in a video communication system
KR20190086205A (ko) 2018-01-12 2019-07-22 서울과학기술대학교 산학협력단 마이크 음성신호 분석을 통한 발언자 검출 시스템 및 방법
CN108737872A (zh) * 2018-06-08 2018-11-02 百度在线网络技术（北京）有限公司 用于输出信息的方法和装置
CN109068090B (zh) * 2018-10-12 2021-03-16 贵阳高新网用软件有限公司 无线视频会议系统
KR102345666B1 (ko) * 2020-09-28 2021-12-31 주식회사 어반컴플렉스 Ai를 이용한 무인 회의 영상 제공 시스템
US11431665B1 (en) * 2021-03-03 2022-08-30 Microsoft Technology Licensing, Llc Dynamically controlled permissions for managing the communication of messages directed to a presenter
KR102636238B1 (ko) * 2021-07-30 2024-02-14 주식회사 아모센스 음성 처리 장치를 포함하는 다중 그룹 수업 시스템
CN115881145A (zh) * 2021-09-30 2023-03-31 华为技术有限公司 语音处理和训练方法以及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100264035B1 (ko) * 1997-08-12 2000-08-16 구자홍 화상회의 시스템의 카메라 방향 조정 장치와 제어 방법
JP2003339034A (ja) * 2002-05-17 2003-11-28 Pioneer Electronic Corp ネットワーク会議システム、ネットワーク会議方法およびネットワーク会議プログラム
JP2005039461A (ja) * 2003-07-18 2005-02-10 Tamura Seisakusho Co Ltd 音声通信システム、方法及びプログラム並びに音声再生装置
JP2009182980A (ja) * 2009-04-06 2009-08-13 Ricoh Co Ltd 会議画像再生装置および会議画像再生方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2384932B (en) 2002-01-30 2004-02-25 Motorola Inc Video conferencing system and method of operation
FR2843516B1 (fr) 2002-08-12 2004-12-24 France Telecom Procede de diffusion en temps reel de fichiers multimedias au cours d'une visioconference, sans rupture de communication, et interface homme-machine pour la mise en oeuvre
KR20030096146A (ko) 2003-11-19 2003-12-24 (주)주앤아이시스템 무선 인터넷과 휴대용 정보통신 단말기를 이용한 모바일협업 시스템 및 그 구현 방법
JP2005197945A (ja) 2004-01-06 2005-07-21 Tietech Co Ltd テレビ会議システム
US20060055771A1 (en) 2004-08-24 2006-03-16 Kies Jonathan K System and method for optimizing audio and video data transmission in a wireless system
JP4997783B2 (ja) 2006-02-15 2012-08-08 富士ゼロックス株式会社 電子会議システム、電子会議支援プログラム、電子会議制御装置、情報端末機器、電子会議支援方法
KR100784971B1 (ko) 2006-07-06 2007-12-11 삼성전자주식회사 휴대 단말기 간 원격 제어 시스템과 이를 이용한업그레이드 시스템 및 방법
JP2008278166A (ja) 2007-04-27 2008-11-13 Hewlett-Packard Development Co Lp ビデオ会議視聴システム
US20090054107A1 (en) 2007-08-20 2009-02-26 Synaptics Incorporated Handheld communication device and method for conference call initiation
US20100085415A1 (en) * 2008-10-02 2010-04-08 Polycom, Inc Displaying dynamic caller identity during point-to-point and multipoint audio/videoconference
US20100309284A1 (en) * 2009-06-04 2010-12-09 Ramin Samadani Systems and methods for dynamically displaying participant activity during video conferencing

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100264035B1 (ko) * 1997-08-12 2000-08-16 구자홍 화상회의 시스템의 카메라 방향 조정 장치와 제어 방법
JP2003339034A (ja) * 2002-05-17 2003-11-28 Pioneer Electronic Corp ネットワーク会議システム、ネットワーク会議方法およびネットワーク会議プログラム
JP2005039461A (ja) * 2003-07-18 2005-02-10 Tamura Seisakusho Co Ltd 音声通信システム、方法及びプログラム並びに音声再生装置
JP2009182980A (ja) * 2009-04-06 2009-08-13 Ricoh Co Ltd 会議画像再生装置および会議画像再生方法

Also Published As

Publication number Publication date
US8411130B2 (en) 2013-04-02
KR20110073758A (ko) 2011-06-30
US20110157299A1 (en) 2011-06-30

Similar Documents

Publication Publication Date Title
KR101636716B1 (ko) 발언자를 구별하는 영상 회의 장치 및 방법
US9282284B2 (en) Method and system for facial recognition for a videoconference
US9064160B2 (en) Meeting room participant recogniser
CN107333090B (zh) 视频会议数据处理方法和平台
CN110139062B (zh) 一种视频会议记录的创建方法、装置及终端设备
CN112672095B (zh) 远程会议系统
CN111193890B (zh) 会议记录解析装置、方法和会议记录播放系统
CN110944143A (zh) 视频会议装置以及视频会议方法
EP3005690B1 (en) Method and system for associating an external device to a video conference session
US20160142462A1 (en) Displaying Identities of Online Conference Participants at a Multi-Participant Location
US11405584B1 (en) Smart audio muting in a videoconferencing system
JP2004129071A (ja) 双方向コミュニケーションシステム
US10979666B2 (en) Asymmetric video conferencing system and method
JP2016213674A (ja) 表示制御システム、表示制御装置、表示制御方法、及びプログラム
KR101077267B1 (ko) 얼굴인식 회의 속기 시스템 및 방법
KR20190016683A (ko) 마이크로폰 어레이를 이용한 회의록 자동작성장치
JP7206741B2 (ja) 健康状態判定システム、健康状態判定装置、サーバ、健康状態判定方法、及びプログラム
JP2017103641A (ja) 情報処理装置、会議システム、情報処理方法およびプログラム
WO2018173139A1 (ja) 撮影収音装置、収音制御システム、撮影収音装置の制御方法、及び収音制御システムの制御方法
JP2007251355A (ja) 対話システム用中継装置、対話システム、対話方法
CN114762039A (zh) 一种会议数据处理方法及相关设备
JP2023506468A (ja) 使用者端末、放送装置、それを含む放送システム、及びその制御方法
CN102263929A (zh) 会议视像信息实时发布系统和相应装置
JP7110669B2 (ja) ビデオ会議システム、ビデオ会議方法、およびプログラム
JP2020053882A (ja) コミュニケーション装置、コミュニケーションプログラム、及びコミュニケーション方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E601 Decision to refuse application
E801 Decision on dismissal of amendment
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190520

Year of fee payment: 4