KR101219457B1 - Video conference terminal and video display method in the video conference terminal - Google Patents

Video conference terminal and video display method in the video conference terminal Download PDF

Info

Publication number
KR101219457B1
KR101219457B1 KR1020120005107A KR20120005107A KR101219457B1 KR 101219457 B1 KR101219457 B1 KR 101219457B1 KR 1020120005107 A KR1020120005107 A KR 1020120005107A KR 20120005107 A KR20120005107 A KR 20120005107A KR 101219457 B1 KR101219457 B1 KR 101219457B1
Authority
KR
South Korea
Prior art keywords
video conference
screen
video
image
party
Prior art date
Application number
KR1020120005107A
Other languages
Korean (ko)
Inventor
이호석
Original Assignee
(주) 피디케이리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주) 피디케이리미티드 filed Critical (주) 피디케이리미티드
Priority to KR1020120005107A priority Critical patent/KR101219457B1/en
Priority to PCT/KR2012/001687 priority patent/WO2012124929A2/en
Priority to CN201210064892.2A priority patent/CN102685443B/en
Application granted granted Critical
Publication of KR101219457B1 publication Critical patent/KR101219457B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/74Projection arrangements for image reproduction, e.g. using eidophor
    • H04N5/7408Direct viewing projectors, e.g. an image displayed on a video CRT or LCD display being projected on a screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PURPOSE: A video conference terminal device and a video display method thereof are provided to display clearer and cleaner images through a screen by installing a projector near the back side of the screen and projecting an image on the back surface of the screen. CONSTITUTION: A transflective screen(102) is installed on a wall between a video conference space(160) and a projector installation space(170). A video processing terminal transmits image data to one or more other parties through a multilateral video conference server. The video processing terminal receives multilateral video conference image data about the other parties from the multilateral video conference server. The video processing terminal displays the multilateral video conference image data on the transflective screen through one or more projectors(121).

Description

화상 회의 단말장치 및 그 장치에서의 화상 표시 방법{Video conference terminal and video display method in the video conference terminal}Video conference terminal and video display method in the device {Video conference terminal and video display method in the video conference terminal}

본 발명은 프로젝터를 이용하는 화상 회의 시스템에 관한 것으로, 보다 상세하게는 프로젝터에서 스크린에 조사되는 영상이 빛에 영향을 받지 않도록 프로젝터를 스크린 전방의 화상 회의 공간과 차단된 스크린의 후방에 배치하여 스크린의 후면에 영상을 투사하는 화상 회의 시스템의 화상 회의 단말 장치 및 그 장치에서의 화상 표시 방법에 관한 것이다.
The present invention relates to a video conferencing system using a projector. More particularly, the present invention relates to a video conferencing system in which a projector is disposed behind a screen and a video conferencing space in front of the screen so that the image irradiated on the screen is not affected by light. A videoconferencing terminal apparatus of a videoconferencing system for projecting an image on the rear surface and an image display method in the apparatus.

최근 원격지에서 얼굴을 마주보며 회의를 할 수 있는 화상회의 시스템이 공공기관, 금융권, 교육, 통신사, 병원 및 기업 등으로 빠르게 공급되고 있으며, 최근 화상회의에 대한 인식변화, 화상회의 기술 발전, 솔루션의 다양화 및 고속 인터넷 등에 힘입어 국내 화상회의 시스템 시장이 급속히 커져가고 있다.Recently, the video conferencing system for face-to-face meetings in remote locations is rapidly being supplied to public institutions, financial institutions, education, telecommunication companies, hospitals, and companies. The domestic video conferencing system market is growing rapidly due to diversification and high speed internet.

도 1은 일반적인 화상회의 시스템의 구성을 나타낸 도면이고, 도 2는 일반적인 다자간 화상회의 시스템의 프로젝터 및 스크린의 설치 예를 나타낸 도면이다. 이하 도 1 및 도 2를 참조하여 설명한다.1 is a view showing the configuration of a general video conferencing system, Figure 2 is a view showing an installation example of a projector and a screen of a general multi-party video conferencing system. Hereinafter, a description will be given with reference to FIGS. 1 and 2.

일반적인 화상회의 시스템은 다자간 화상 회의 서버부(10)와 다자간 화상 회의를 할 수 있는 화상 회의 단말 장치(10)들로 구성된다. 화상 회의 시 대화자의 오디오 데이터도 전송되나, 본 발명은 영상에 관한 것이므로 이하의 설명에서는 영상 데이터 위주로 설명한다.A general video conferencing system is composed of a video conferencing server unit 10 and a video conferencing terminal device 10 capable of multi-party video conferencing. Audio data of the talker is also transmitted during the video conference. However, since the present invention relates to video, the following description focuses on video data.

상기 다자간 화상 회의 서버부(20)와 화상 회의 단말장치(10)들은 광역망(Wide Area Network: WAN), 근거리통신망(Local Area Network: LAN) 등과 같은 인터넷망 등의 네트워크(15)를 통해 연결된다.The multi-party video conferencing server unit 20 and the video conference terminal 10 are connected through a network 15 such as an internet network such as a wide area network (WAN), a local area network (LAN), or the like. do.

화상 회의 단말 장치(10)는 다수의 대화자들이 참여하여 화상회의에 참석할 수 있도록 적어도 하나 이상의 카메라(2)와 하나 이상의 디스플레이 장치들과 화상 처리 단말기(5)를 포함하여 구성된다. 상기 화상 회의 단말 장치(10)는 통상 실내(이하"화상 회의 공간"이라 함)에 설치된다.The video conferencing terminal device 10 is configured to include at least one or more cameras 2, one or more display devices and an image processing terminal 5 so that a plurality of talkers can participate in the video conference. The videoconferencing terminal apparatus 10 is usually installed indoors (hereinafter referred to as "video conferencing space").

카메라(2)는 하나 이상 구비되며, 스크린(1)을 바라보는 방향에 대향하는 방향으로 카메라 렌즈가 향하도록 구성되어, 동일한 화상 회의 공간에 있는 대화자들을 촬영하여 화상 처리 단말기(5)로 출력한다.One or more cameras 2 are provided, and the camera lens faces in a direction opposite to the direction of looking at the screen 1, and photographs the speakers in the same video conference space and outputs them to the image processing terminal 5. .

디스플레이장치는 도 1과 같이 스크린(1)과 프로젝터(3)로 구성된다. 디스플레이장치는 도 1과 같이 한 화면에 한 사람의 대화자에 대한 영상만을 표시하도록 구성될 수도 있고, 한 화면에 다수의 지역에 있는 대화자들 모두에 대한 영상이 표시되도록 구성될 수도 있다.As shown in FIG. 1, the display apparatus includes a screen 1 and a projector 3. As shown in FIG. 1, the display apparatus may be configured to display only an image of one person's talker on one screen, or may be configured to display images of all the talkers in a plurality of regions on one screen.

화상 처리 단말기(5)는 개인용 컴퓨터, 별도의 코덱 장치 등이 될 수 있으며, 상기 각 카메라(2)들을 통해 촬영된 대화자들 각각에 대한 영상데이터들을 파일로 포함하는 화상 회의 데이터를 네트워크를 통해 다자간 화상 회의 서버부(20)로 제공하고, 다자간 화상 회의 서버부(20)로부터 수신되는 상대측의 화상 회의 데이터로부터 각 대화자에 대응하는 영상데이터를 분리하여 해당 프로젝터(3)를 통해 스크린(1)에 표시한다.The image processing terminal 5 may be a personal computer, a separate codec device, or the like. The multi-party video conferencing data including image data of each of the talkers photographed through the cameras 2 as a file may be Provided to the video conferencing server unit 20, and separates the video data corresponding to each talker from the video conferencing data of the other party received from the multi-party video conferencing server unit 20 to the screen 1 through the projector 3 Display.

상기 화상 회의 단말 장치(10)의 프로젝터(3)는 도 2에서 보이는 바와 같이 영상이 벽면에 설치된 스크린(1)에 영상이 표시될 수 있도록 주로 천정이나 일정 높이의 탁자 위에 설치된다.As shown in FIG. 2, the projector 3 of the video conferencing terminal device 10 is mainly installed on a ceiling or a table of a certain height so that the image can be displayed on a screen 1 installed on a wall.

다자간 화상 회의 서버부(20)는 다자간 화상 회의 유닛(Multi Conference Unit: MCU) 서버 및/또는 웹서버 등을 포함하여 도 1과 같이 동일 지역의 화상 회의 단말 장치(10-1)와 다른 동일 지역의 화상 회의 단말 장치(10-2)와의 화상회의 채널을 형성하고 화상 회의 단말부(10-1) 및 화상 회의 단말부(10-2)로부터 송신되는 화상회의 데이터를 스위칭하여 상대 화상 회의 단말 장치(10)로 제공한다.The multi-party video conferencing server unit 20 includes a multi-conference unit (MCU) server and / or a web server, and the same area different from the video conferencing terminal device 10-1 in the same area as shown in FIG. 1. Establish a video conference channel with the video conference terminal device 10-2, and switch the video conference data transmitted from the video conference terminal unit 10-1 and the video conference terminal unit 10-2 to the counterpart video conference terminal device. Provided by (10).

상술한 바와 같이 종래 화상 회의 시스템은 화상 회의 단말 장치의 프로젝터가 도 2와 같이 조명이 구비되는 실내 공간인 화상 회의 공간에 설치되므로 조명을 켜는 경우 조명에서 조사되는 빛(12)이 스크린(1)의 전면에 투사되는 영상(11)에 영향을 주어 스크린(1)에 표시되는 영상(11)이 흐려져 잘 보이지 않고 가독성이 떨어지는 문제점이 있었다.As described above, in the conventional video conferencing system, since the projector of the video conferencing terminal device is installed in a video conferencing space, which is an indoor space in which lighting is provided, as shown in FIG. Influence on the image 11 projected on the front of the image 11 displayed on the screen 1 is blurred, there was a problem that the visibility is poor and readability is poor.

또한, 종래 화상 회의 시스템은 상기 조명(6)에서 조사되는 빛(12)의 영향을 줄이기 위해 조명(6)을 끄는 경우, 카메라(2)가 화상 회의 공간에 있는 대화자들을 촬영할 수 있는 밝기를 확보하지 못하여 상대측 화상 회의 단말 장치(10)의 스크린에 표시되는 영상이 어둡게 표시되는 문제점이 있었다. 또한, 이러한 문제점을 해결하기 위해 ISO(감도)가 좋은 카메라를 적용하는 경우 카메라의 가격이 상승하는 문제점이 있었으며, 또한 높은 ISO를 지원하는 카메라를 설치한다 할지라도 ISO를 높게 설정하여 촬영하는 경우에도 상대측에 표시되는 영상은 조명이 켜져 있을 경우의 영상보다 어둡고 화질이 나쁜 문제점이 있었다.
In addition, the conventional video conferencing system has a brightness that allows the camera 2 to take pictures of the talkers in the video conference space when the lighting 6 is turned off to reduce the influence of the light 12 emitted from the lighting 6. There was a problem that the image displayed on the screen of the counterpart video conferencing terminal 10 is dark. In addition, in order to solve this problem, there is a problem in that the price of the camera increases when a camera with a good ISO (sensitivity) is applied, and even when a camera that supports a high ISO is installed, even when shooting with a high ISO The image displayed on the other side has a problem that the image quality is darker than the image when the lighting is turned on and is bad.

따라서, 본 발명의 목적은 프로젝터에서 스크린에 조사되는 영상이 빛에 영향을 받지 않도록 프로젝터를 스크린 전방의 화상 회의 공간과 차단된 스크린의 후방에 배치하여 스크린의 후면에 영상을 조사하는 화상 회의 시스템의 화상 회의 단말 장치 및 그 장치에서의 화상 표시 방법을 제공하는 데 있다. Accordingly, an object of the present invention is to provide a video conferencing system for irradiating an image on the rear side of the screen by arranging the projector behind the screen and the video conferencing space in front of the screen so that the image irradiated on the screen from the projector is not affected by light. There is provided a video conference terminal device and a video display method in the device.

본 발명의 다른 목적은 임의의 대화자측에 표시되는 서로 다른 지역에 있는 다수의 대화자들의 배경화면을 한 장소에서 회의를 하는 것처럼 느낄 수 있도록 배경화면을 크로마키(Chroma Key)하여 디스플레이 하는 화상 회의 시스템의 화상 회의 단말 장치 및 그 장치에서의 화상 표시 방법을 제공하는 데 있다.Another object of the present invention is a video conferencing system for displaying a background screen of a chroma key (Chroma Key) so that the screen of a plurality of dialogers in different areas displayed on any side of the conversation can feel as if the meeting in one place A video conference terminal apparatus and a video display method in the apparatus are provided.

본 발명의 다른 목적은 굴곡형 스크린을 적용하고, 굴곡형 스크린에 일그러짐 없는 다자간 화상 회의 영상을 스크린의 후면에 투사하여 표시할 수 있는 화상 회의 시스템의 화상 회의 단말 장치 및 그 장치에서의 화상 표시 방법을 제공하는 데 있다.
Another object of the present invention is a video conferencing terminal apparatus of a video conferencing system and a method of displaying a video in a video conferencing system which can apply a curved screen and project and display a multi-party video conference image on the back of the screen without distortion on the curved screen. To provide.

상기와 같은 목적을 달성하기 위한 본 발명의 화상 회의 단말 장치는; 빛을 조사하는 조명을 구비하는 화상 회의 공간과 프로젝터 설치 공간의 사이의 벽면에 설치되어 상기 빛이 상기 프로젝터 설치 공간에 조사되는 것을 차단하고, 후면으로 투사되는 영상을 반투과시켜 전면에 표시시키는 반투과형 스크린과, 상기 스크린의 상, 하, 좌, 우 중 적어도 하나 이상 설치되어 상기 화상 회의 공간을 촬영하여 출력하는 카메라와, 상기 프로젝터 설치 공간에 설치되어 상기 반투과형 스크린의 후면으로 화상 회의 영상을 투사하는 적어도 하나 이상의 프로젝터와, 상기 카메라에서 촬영되어 입력되는 영상데이터들을 다자간 화상 회의 서버부를 통해 적어도 하나 이상의 상대측으로 송신하고, 상기 다자간 화상 회의 서버로부터 상기 상대측들에 대한 다자간 화상 회의 영상데이터를 수신받아 상기 프로젝터들을 통해 상기 반투과형 스크린에 표시시키는 화상 처리 단말기를 포함하는 것을 특징으로 한다.The video conference terminal device of the present invention for achieving the above object; It is installed on the wall between the video conferencing space and the projector installation space with illumination light to block the light from being irradiated to the projector installation space, and to semi-transparently project the image projected to the rear and display it on the front side. A transmissive screen, a camera installed at least one of the top, bottom, left, and right sides of the screen to photograph and output the video conference space; and a video conference image installed at the rear of the transflective screen installed in the projector installation space. Transmitting at least one projector and image data photographed and input by the camera to at least one counterpart through a multi-party video conferencing server unit, and receiving multi-party video conferencing video data for the counterparts from the multi-party video conferencing server Take the projector through the bantu It characterized in that it comprises an image processing device for displaying on a screen type.

상기 화상 처리 단말기는, 다자간 화상 회의 영상이 좌우 대칭 반전되도록 상기 다자간 화상 회의 영상 데이터를 좌우 대칭 반전 처리를 수행한 후 상기 프로젝터를 통해 상기 반투과형 스크린에 표시시키는 것을 특징으로 한다.The image processing terminal may be configured to display the multi-party video conference image data on the transflective screen through the projector after performing the left-right symmetric inversion process so that the multi-party video conference image is symmetrically reversed.

상기 반투과형 스크린은 굴곡형 스크린인 것을 특징으로 한다.The transflective screen is characterized in that it is a curved screen.

상기 프로젝터는 적어도 둘 이상 구비되고, 상기 화상 처리 단말기는, 상기 스크린의 굴곡면에 대응하도록 상기 다자간 화상 회의 영상데이터를 변환한 후 미리 설정되어 있는 상기 스크린 상에 표시되는 영상의 크기에 따라 상기 프로젝터들을 통해 상기 다자간 화상 회의 영상데이터를 분할하여 상기 스크린에 조사하는 것을 특징으로 한다.At least two projectors are provided, and the image processing terminal converts the multi-party video conference image data so as to correspond to the curved surface of the screen, and according to the size of an image displayed on the screen which is set in advance. The multi-party video conferencing video data is divided into the screens and irradiated to the screen.

상기 화상 처리 단말기는, 상기 스크린의 굴곡면에 대응하도록 상기 다자간 화상 회의 영상데이터를 워핑처리하여 변환하는 것을 특징으로 한다.The image processing terminal may warp and convert the multi-party video conference image data so as to correspond to the curved surface of the screen.

상기 화상 처리 단말기는, 상기 변환된 다자간 화상 회의 영상데이터를 상기 둘 이상의 프로젝터를 통해 상기 스크린상에 투사 시 중복되는 중첩영역을 자연스럽게 하기 위해 상기 중첩 영역을 블렌더링 처리하여 변환하는 것을 특징으로 한다.The image processing terminal may be configured to convert the overlapping region by blending the converted multilateral video conference image data in order to naturally overlap the overlapping region when projecting the screen through the two or more projectors.

상기 화상 처리 단말기는, 상기 다자간 화상 회의 영상데이터의 배경을 통일된 배경화면으로 크로마키 하여 변환하는 것을 특징으로 한다.The image processing terminal is characterized in that for converting the background of the multi-party video conferencing video data to a unified background screen.

상기와 같은 목적을 달성하기 위한 본 발명의 화상 회의 단말 장치의 화상 표시 방법은; 다자간 화상 회의 영상 데이터를 수신하는 수신과정과, 상기 다자간 화상 회의 영상 데이터에 대한 영상이 중앙을 기준으로 좌우가 반전되도록 상기 다자간 화상 회의 영상 데이터를 좌우 대칭 반전 처리하는 좌우 대칭 반전 과정과, 상기 좌우 대칭 반전 처리된 상기 다자간 화상 회의 영상 데이터를 미리 설정된 스크린 화면의 크기에 대응하여 프로젝터의 수로 분할하는 분할 과정과, 화상 회의 공간과 프로젝터 설치 공간 사이에 설치되는 반투과형 스크린의 후방 공간인 프로젝터 설치 공간에 설치된 해당 프로젝터를 통해 상기 분할된 다자간 화상 회의 영상 데이터 각각을 분할 다자간 화상 회의 영상으로 변환한 후 반투과형 스크린의 후면에 투사하여 표시시키는 표시과정을 포함하는 것을 특징으로 한다.An image display method of a video conference terminal device of the present invention for achieving the above object; A reception process of receiving a multi-party video conference video data, a left-right symmetric inversion process of symmetrically inverting the multi-party video conference video data such that an image of the multi-party video conference video data is inverted from the center, and the left and right A dividing process of dividing the symmetric inverted video conference video data into the number of projectors corresponding to a preset screen size, and a projector installation space that is a rear space of a transflective screen installed between the video conference space and the projector installation space; And converting each of the divided multi-party video conference image data into a divided multi-party video conference image through a corresponding projector installed in the projector, and projecting and displaying the divided multi-party video conference image on the back of the transflective screen.

상기 반투과형 스크린이 굴곡형 스크린인 경우, 상기 좌우 대칭 반전 과정 후, 상기 스크린의 굴곡면에 상기 화상 회의 영상 데이터를 상기 굴곡면에 따라 워핑 처리하여 변환하는 워핑 과정을 더 포함하는 것을 특징으로 한다.If the semi-transmissive screen is a curved screen, after the symmetric inversion process, further comprising a warping process of warping and converting the video conferencing image data on the curved surface of the screen according to the curved surface; .

상기 분할 과정 및 워핑 과정 후, 분리된 다자간 화상 회의 영상 데이터를 굴곡형 스크린에 표시 시 발생하는 중첩 영역을 자연스럽게 처리하기 위해 상기 분리된 다자간 화상 회의 영상 데이터를 블렌더링 처리하여 변환하는 블렌더링 과정을 더 포함하는 것을 특징으로 한다.After the dividing and warping processes, a blending process of blending and converting the separated multi-party video conference image data to naturally process the overlapping region generated when the separated multi-party video conference image data is displayed on the curved screen. It further comprises.

상기 수신과정 후, 상기 다자간 화상 회의 영상의 배경을 통일된 배경화면을 가지도록 상기 다자간 화상 회의 영상에 대한 다자간 화상 회의 영상 데이터를 크로마키 처리를 수행하는 크로마키 과정을 더 포함하는 것을 특징으로 한다.And after the receiving process, performing a chroma key process on the multi-party video conference image data of the multi-party video conference image so as to have a uniform background of the background of the multi-party video conference image. .

상기 크로마키 과정 후, 굴곡형 스크린의 굴곡면에 최적의 화상으로 표시될 수 있도록 상기 굴곡면에 따라 다자간 화상 회의 영상 데이터를 워핑 처리하여 변환하는 워핑 과정을 더 포함하는 것을 특징으로 한다.After the chroma key process, the method further includes a warping process of warping and converting the multi-party video conference image data according to the curved surface so as to display an optimal image on the curved surface of the curved screen.

상기 분할 과정 및 워핑 과정 후, 분리된 다자간 화상 회의 영상을 굴곡형 스크린에 표시 시 발생하는 중첩 영역을 자연스럽게 처리하기 위해 상기 분리된 다자간 화상 회의 영상 데이터를 블렌더링 처리하여 변환하는 블렌더링 과정을 더 포함하는 것을 특징으로 한다.
After the dividing process and the warping process, a blending process of blending and converting the separated multi-party video conference image data to naturally process an overlapping region generated when displaying the separated multi-party video conference image on a curved screen is further performed. It is characterized by including.

본 발명은 프로젝터가 화상 회의 공간과 차단된 스크린의 배후 공간에 설치되어 스크린의 후면에 영상을 투사하므로 대화자들이 있는 화상 회의 공간에 빛을 조사하는 조명의 영향을 받지 않으므로 스크린을 통해 보다 선명하고, 깨끗한 영상을 볼 수 있는 효과를 가진다.The present invention is more clear through the screen because the projector is installed in the video conferencing space and the space behind the screen to project the image on the back of the screen, so it is not affected by the illumination of the light irradiating the video conferencing space with the dialogue, It has the effect of seeing clean images.

본 발명은 프로젝터가 스크린의 배후에 설치되므로 화상 회의를 위해 대화자들이 있는 화상 회의 공간의 천정이나 테이블 위에 프로젝터를 설치하지 않아도 되므로 화상 회의 공간을 보다 심플하고 깨끗하게 구성할 수 있는 효과를 가진다.Since the projector is installed behind the screen, it is not necessary to install the projector on the ceiling or table of the video conferencing space where the conversers are used for video conferencing, so that the video conferencing space can be configured more simply and cleanly.

또한, 본 발명은 배경화면과 대화자들의 영상을 크로마키 하여 표시하므로 다양한 지역에 있는 대화자들이 동일한 장소에서 회의하는듯한 느낌을 줄 수 있는 효과를 가진다.In addition, the present invention has the effect that the background screen and the image of the dialog to the chroma key to give the feeling that the dialog in the various areas as if meeting in the same place.

또한, 본 발명은 굴곡형 스크린을 적용하여 다자간 화상 회의 데이터를 대화자를 중심으로 굴곡지게 표시하여 주므로 대화자가 화상 회의에 더 몰입할 수 있도록 할 수 있는 효과를 가진다.
In addition, the present invention has an effect that can be more immersed in the video conferencing by applying a curved screen to display the multi-party video conferencing data bent around the talker.

도 1은 일반적인 다자간 화상 회의 시스템의 구성을 나타낸 도면이다.
도 2는 일반적인 다자간 화상회의 시스템의 프로젝터 및 스크린의 설치 예를 나타낸 도면이다.
도 3은 본 발명에 따른 다자간 화상 회의 시스템의 구성을 나타낸 도면이다.
도 4는 본 발명에 따른 다자간 화상 회의 시스템의 화상 회의 단말부의 측면도를 나타낸 도면이다.
도 5는 본 발명에 따른 다자간 화상 회의 시스템의 화상 처리 단말기의 상세 블록 구성을 나타낸 도면이다.
도 6은 본 발명에 따른 다자간 화상 회의 시스템의 화상 회의 단말부가 설치된 화상 회의 공간의 평면도를 나타낸 도면이다.
도 7은 본 발명에 따른 굴곡형 스크린의 적용에 의한 화상 회의 영상의 워핑 및 블렌더링을 설명하기 위한 도면이다.
도 8은 본 발명에 따른 화상 회의 단말부에서의 다자간 화상 회의에 따른 화상 영상 표시 방법을 나타낸 흐름도이다.
1 is a diagram showing the configuration of a general multi-party video conferencing system.
2 is a diagram illustrating an installation example of a projector and a screen of a general multi-party video conferencing system.
3 is a diagram showing the configuration of a multi-party video conferencing system according to the present invention.
4 is a side view of a video conference terminal of a multi-party video conference system according to the present invention.
5 is a block diagram showing the detailed block configuration of the image processing terminal of the multi-party video conferencing system according to the present invention.
6 is a diagram showing a plan view of a video conference space provided with a video conference terminal of a multi-party video conference system according to the present invention.
7 is a diagram illustrating warping and blending of a video conference image by applying a curved screen according to the present invention.
8 is a flowchart illustrating a video image display method according to a multi-party video conference in a video conference terminal according to the present invention.

이하 도면을 참조하여 본 발명에 따른 화상 회의 시스템 및 그 동작을 설명하고, 상기 화상 회의 시스템에서의 영상 표시 방법을 설명한다.Hereinafter, a videoconferencing system and its operation according to the present invention will be described with reference to the drawings, and a video display method in the videoconferencing system will be described.

도 3은 본 발명에 따른 화상 회의 시스템의 구성을 나타낸 도면이고, 도 4는 본 발명에 따른 다자간 화상 회의 시스템의 화상 회의 단말 장치가 설치된 화상 회의 공간의 측면도를 나타낸 도면이다. 이하 도 3 및 도 4를 참조하여 설명한다.3 is a diagram showing the configuration of a video conferencing system according to the present invention, Figure 4 is a view showing a side view of a video conferencing space is provided with a video conferencing terminal device of a multi-party video conferencing system according to the present invention. This will be described below with reference to Figs. 3 and 4. Fig.

본 발명에 따른 화상 회의 시스템은 다수의 화상 회의 단말 장치(100)들과 다자간 화상 회의 서버부(200)로 구성된다.The video conferencing system according to the present invention includes a plurality of video conferencing terminal devices 100 and a multi-party video conferencing server unit 200.

상기 다수의 화상 회의 단말 장치(100)들과 다자간 화상 회의 서버부(200)는 광역망(Wide Area Network: WAN), 근거리통신망(Local Area Network: LAN) 등과 같은 인터넷망 등의 네트워크(15)를 통해 연결되어 TCP/IP 프로토콜 및/또는 UDP 프로토콜에 따른 데이터 통신을 수행한다.The plurality of video conferencing terminal devices 100 and the multi-party video conferencing server unit 200 may include a network 15 such as an Internet network such as a wide area network (WAN), a local area network (LAN), or the like. It is connected through to perform data communication according to TCP / IP protocol and / or UDP protocol.

화상 회의 단말 장치(100)는 스크린(102)과 프로젝터(121)와 카메라(130)와 화상 처리 단말기(110)를 포함한다.The video conferencing terminal device 100 includes a screen 102, a projector 121, a camera 130, and an image processing terminal 110.

도 4에 나타낸 바와 같이 화상 회의 단말 장치(100)가 구성되는 화상 회의 공간부는 화상 회의 공간(160)과 프로젝터 설치 공간(170)으로 구성된다.As shown in FIG. 4, the video conference space portion in which the video conference terminal device 100 is configured is configured with a video conference space 160 and a projector installation space 170.

상기 스크린(102)은 화상 회의 공간(160)과 프로젝터 설치 공간(170) 사이에 설치되며, 조명(6)에서 조사되는 빛이 프로젝터 설치 공간(170)으로 최대한 투과되지 않고, 후방에서 투사되는 영상이 반투과되어 전면 표면에 표시될 수 있도록 벽면과 일체로 설치된다. 상기 스크린(102)는 후방의 프로젝터(121)에서 투사되는 영상만 스크린의 전면 표면상에 표시되도록 영상을 반 투과시킬 수 있는 재질로 형성된다. 상기 스크린(102)의 재질로는 폴리카보네이트(Polycarbonate: PC) 계열의 플라스틱이 이용될 수 있다. 상기 스크린(102)의 형태로는 평면형이 적용될 수도 있고, 굴곡형(또는 "곡면형"이라 함)이 적용될 수도 있을 것이다. 그러나 본 발명에 따라 몰입감을 주기 위해 굴곡형을 적용하는 것이 바람직하다.The screen 102 is installed between the video conferencing space 160 and the projector installation space 170, and the light emitted from the illumination 6 is not transmitted to the projector installation space 170 as much as possible, but is projected from the rear. It is semi-transmissive and integrated with the wall so that it can be displayed on the front surface. The screen 102 is formed of a material capable of semi-transparent image so that only the image projected from the rear projector 121 is displayed on the front surface of the screen. As the material of the screen 102, polycarbonate (PC) -based plastic may be used. In the form of the screen 102, a flat type may be applied, or a curved type (or “curved” type) may be applied. However, it is desirable to apply a bend to give immersion in accordance with the present invention.

프로젝터(121)는 도 4에 나타낸 바와 같이 스크린(102)의 배후 공간인 프로젝터 설치 공간(140)에 적어도 하나 이상으로 구성되어 스크린(102)의 후면에 화상회의 영상을 투사한다.As shown in FIG. 4, the projector 121 is configured of at least one projector mounting space 140, which is a space behind the screen 102, to project a video conference image on the rear surface of the screen 102.

카메라(130)는 상기 스크린(102)의 전, 후, 좌, 우 측에 적어도 하나 이상 구비되어 화상 회의 공간(130)을 촬영한 영상을 화상 처리 단말기(110)로 출력한다. At least one camera 130 is provided at the front, rear, left, and right sides of the screen 102 to output an image of the video conference space 130 to the image processing terminal 110.

화상 회의 단말 장치(100)의 화상 처리 단말기(110)는 대화자에 의해 상기 다자간 화상 회의 서버부(200)에 접속하고, 상기 대화자가 입력하는 아이디 및 패스워드 등에 의해 로그인 한 후, 다자간 화상 회의 그룹에 참여하고, 다자간 화상 회의가 개시되면 적어도 하나 이상의 카메라(130)에 의해 화상 회의 공간을 촬영하여 해당 화상 회의 공간에 있는 대화자의 영상데이터를 다자간 화상 회의 서버부(200)로 제공한다. 또한 화상 회의 단말 장치(100)는 자신의 스크린(102)에 표시되는 다자간 화상 회의 영상의 크기 정보를 다자간 화상 회의 서버부(200)로 제공한다. 또한, 화상 처리 단말기(110)는 다자간 화상 회의 서버부(200)로부터 수신되는 다자간 화상 회의 영상 데이터를 구성된 프로젝터(121) 수에 따라 분할하고, 스크린(102)의 형태에 따라 변환하여 각 프로젝터(121)로 출력한다.The image processing terminal 110 of the video conferencing terminal device 100 connects to the multi-party video conferencing server unit 200 by a talker, logs in using an ID and password input by the talker, and then enters the multi-party video conferencing group. When the multi-party video conference is started, at least one camera 130 photographs the video conference space and provides video data of the talker in the video conference space to the multi-party video conference server 200. In addition, the video conferencing terminal device 100 provides the multi-party video conferencing server unit 200 with size information of the multi-party video conferencing image displayed on its screen 102. In addition, the image processing terminal 110 divides the multi-party video conferencing image data received from the multi-party video conferencing server unit 200 according to the number of configured projectors 121, converts them according to the shape of the screen 102, and converts each projector ( 121).

다자간 화상 회의 서버부(200)는 다자간 화상 회의 유닛(MCU)서버 및 웹서버로 구성될 수도 있고, MCU 서버가 웹서버의 기능까지 수행하도록 구성될 수도 있다. 이러한 다자간 화상 회의 서버부(200)는 다수의 화상 회의 단말 장치(100)들의 로그온 및 로그온 된 두 지역 이상의 서로 다른 장소에 위치하는 다수의 화상 회의 단말 장치(100)들이 다자간 화상 회의를 수행할 수 있도록 그룹핑 수단을 제공하고, 그룹핑된 화상 회의 단말부(100)들 각각으로부터 적어도 한 명 이상의 대화자에 대한 영상데이터를 수신하고, 상기 수신된 영상데이터를 전송한 화상 회의 단말부(100)의 화면 크기에 대응하도록 수신된 영상데이터들을 합성한 다자간 화상 회의 영상데이터를 생성하고 해당 화상 회의 단말 장치(100)로 송신한다. 이때, 상기 다자간 화상 회의 영상데이터에는 전송되는 화상 회의 단말 장치(100)의 대화자의 영상데이터는 합성되지 않는다.The multi-party video conferencing server unit 200 may be configured as a multi-party video conferencing unit (MCU) server and a web server, or may be configured such that the MCU server performs the function of the web server. The multi-conferencing video conferencing server unit 200 may perform multi-conference video conferencing by a plurality of video conferencing terminal devices 100 located at different places in two or more regions where the plurality of video conferencing terminal devices 100 are logged on and logged on. A screen size of the video conferencing terminal unit 100 that provides grouping means, receives video data for at least one or more talkers from each of the grouped video conferencing terminal units 100, and transmits the received video data. The multi-party video conference video data obtained by synthesizing the received video data corresponding to the video data is generated and transmitted to the video conference terminal 100. In this case, the video data of the talker of the video conference terminal apparatus 100, which is transmitted, is not synthesized.

도 5는 본 발명에 따른 다자간 화상 회의 시스템의 화상 처리 단말기의 상세 블록 구성을 나타낸 도면이고, 도 6은 본 발명에 따른 다자간 화상 회의 시스템의 화상 회의 단말부가 설치된 화상 회의 공간의 평면도를 나타낸 도면이며, 도 7은 본 발명에 따른 굴곡형 스크린의 적용에 의한 화상 회의 영상의 워핑 및 블렌더링을 설명하기 위한 도면이다. 이하 도 3 내지 도 7을 참조하여 설명한다.5 is a diagram showing a detailed block configuration of an image processing terminal of a multi-party video conferencing system according to the present invention, and FIG. 6 is a diagram showing a plan view of a video conferencing space provided with a video conferencing terminal of a multi-party video conferencing system according to the present invention. 7 is a view for explaining warping and blending of a video conference image by applying a curved screen according to the present invention. A description with reference to FIGS. 3 to 7 is as follows.

화상 처리 단말기(110)는 영상 획득부(111)와 통신부(112)와 영상 분리부(113)와 좌우 대칭 반전부(118)와 워핑부(114)와 블렌딩부(115)와 영상 출력부(116)와 크로마키 처리부(117)와 제어부(119)를 포함한다.The image processing terminal 110 may include an image acquisition unit 111, a communication unit 112, an image separation unit 113, a symmetric inversion unit 118, a warping unit 114, a blending unit 115, and an image output unit ( 116, a chroma key processing unit 117, and a control unit 119.

제어부(118)는 본 발명의 화상 처리 단말기(110)의 전반적인 동작을 제어한다. 특히 제어부(118)는 다자간 화상 회의 서버부(200)에 접속 시 로그온 정보를 입력받아 통신부를 통해 다자간 화상 회의 서버부(200)로 제공하고, 로그온 시, 다자간 화상 회의 그룹핑 시 또는 화상 회의 개시 시 영상 출력부(116)와 프로젝터(120)를 통해 스크린(101)에 표시될 영상의 크기 정보를 다자간 화상 회의 서버부(200)로 제공한다. 또한, 제어부(118)는 굴곡형 스크린(101)의 굴곡면의 굴곡 각도 정보, 영상 출력부(116)에 접속되어 있는 프로젝터(120) 수 등의 정보를 가지고 있다.The controller 118 controls the overall operation of the image processing terminal 110 of the present invention. In particular, the control unit 118 receives the logon information when accessing the multi-party video conferencing server unit 200 and provides the multi-channel video conferencing server unit 200 through a communication unit. The image output unit 116 and the projector 120 provide size information of the image to be displayed on the screen 101 to the multi-party video conferencing server unit 200. In addition, the control unit 118 has information such as the bending angle information of the curved surface of the curved screen 101, the number of the projectors 120 connected to the image output unit 116, and the like.

영상 획득부(111)는 카메라(120)를 통해 촬영되는 영상에 대한 영상데이터를 생성하여 출력한다.The image acquisition unit 111 generates and outputs image data of an image photographed by the camera 120.

통신부(112)는 네트워크(150)에 접속하여 상기 다자간 화상 회의 서버부(200)와 데이터 통신을 수행한다.The communication unit 112 connects to the network 150 and performs data communication with the multi-party video conferencing server unit 200.

크로마키 처리부(117)는 수신된 다자간 화상 회의 영상에서 대화자들만을 검출하고, 검출된 대화자의 영상과 제어부(118)로부터 입력되는 새로운 배경 영상을 합성하여 출력한다. 상기 배경 영상은 회의실 배경 영상 등이 될 수 있을 것이다.The chroma key processing unit 117 detects only the dialogues in the received multi-party video conference image, and outputs a synthesized image of the dialogue with the new background image input from the controller 118. The background image may be a background image of a conference room.

좌우 대칭 반전부(118)는 상기 크로마키 처리부(117)로부터 입력되는 다자간 화상 회의 영상을 좌우 반전시켜 출력한다. 이는 본 발명에 따른 프로젝터(121)가 스크린(102)의 배후에서 영상을 투사하기 때문에 영상을 보는 대화자 입장에서 좌우가 바뀌어 보이지 않도록 하기 위한 것이다. The left and right symmetry inversion unit 118 inverts and outputs the multi-party video conference image input from the chroma key processing unit 117. This is because the projector 121 according to the present invention projects the image behind the screen 102 so that the left and right sides of the projector are not changed from the perspective of the person viewing the image.

영상 분리부(113)는 제어부(118)의 제어를 받아 상기 크로마키 처리되고 좌우 반전된 다자간 화상 회의 영상데이터를 영상출력부(116)에 연결된 프로젝터(120)의 수만큼 분할하여 출력한다.Under the control of the controller 118, the image separator 113 divides and outputs the chroma key-processed and inverted multi-party video conference image data by the number of projectors 120 connected to the image output unit 116.

워핑부(114)는 상기 제어부(118)의 제어를 받아 상기 스크린(102)의 형태에 따라 스크린(102)에 표시되는 영상이 일그러지거나 찌그러짐이 없도록 영상의 일부분을 축소 또는 확대시켜 투영 환경, 즉 스크린(102)의 굴곡 각도 등의 환경에 알맞도록 영상을 변환하는 워핑(Warping) 처리를 수행하여 출력한다. 이를 위하여 워핑부(114)는 픽셀(Pixel) 단위의 화면 조정과 부분 영상 압축 방식을 적용한다. 예를 들어 굴곡형 스크린을 적용하고, 본원발명과 같이 스크린(102)의 배후에서 영상을 투사하는 경우, 스크린의 볼록한 면에 영상을 투사하게 된다. 따라 워핑부(114)는 스크린(102)의 볼록한 굴곡면의 굴곡 각도에 대응하도록 픽셀 단위의 화면 조정과 부분 영상 압축 방식을 적용하여 워핑 처리를 수행한다. 도 5에서는 워핑부(114)가 상기 영상 분리부(113) 후단에 구성되는 경우를 나타내었으나 영상 분리부(113) 전단에 구성될 수도 있을 것이다. 즉 워핑은 다자간 화상 회의 영상 데이터가 분할되기 전에 수행될 수도 있을 것이다. The warping unit 114 may reduce or enlarge a portion of the image under the control of the controller 118 so that the image displayed on the screen 102 is not distorted or distorted according to the shape of the screen 102. A warping process for converting an image to be suitable for an environment such as a bending angle of the screen 102 is performed and output. To this end, the warping unit 114 applies a pixel adjustment and a partial image compression method. For example, if a curved screen is applied and the image is projected behind the screen 102 as in the present invention, the image is projected onto the convex side of the screen. Accordingly, the warping unit 114 performs the warping process by applying the screen adjustment and the partial image compression method in units of pixels so as to correspond to the bending angle of the convex curved surface of the screen 102. 5 illustrates a case in which the warping unit 114 is configured at the rear end of the image separating unit 113, but may be configured in front of the image separating unit 113. That is, warping may be performed before multi-party video conferencing video data is divided.

블렌딩부(115)는 상기 분할되고 워핑된 다자간 화상 회의 영상데이터들이 복수의 프로젝터(121)를 통해 스크린(102)에 투사됨에 의해 발생하는 도 5 및 도 6의 의 중첩영역(103)을 없애기 위해 상기 중첩영역(103)들에 대해 블렌딩(Blending) 처리를 수행한 후 출력한다.The blending unit 115 removes the overlapped region 103 of FIGS. 5 and 6 generated by the divided and warped multi-party video conference image data projected onto the screen 102 through the plurality of projectors 121. The blending process is performed on the overlapping regions 103 and then output.

구체적으로 설명하면, 두 개 이상의 프로젝터(120)가 단일 화면으로 투사되는 경우에 중첩영역(103)이 발생하고, 이러한 중첩영역(103)은 두 개의 영상이 중첩되므로 밝기가 밝아져 도드라져 보이게 된다. 상기와 같이 밝아진 중첩영역(103)의 밝기(Brightness)와 콘트라스트(Contrast)를 조절하여 중첩영역(103)의 도드라짐을 없애는 처리를 블렌딩이라 한다.In detail, when two or more projectors 120 are projected on a single screen, an overlap region 103 is generated, and since the two images overlap each other, the overlap region 103 appears to be brighter and brighter. . The process of eliminating the drooping of the overlapping region 103 by adjusting the brightness and contrast of the overlapping region 103 which has been brightened as described above is called blending.

영상 출력부(116)는 상기 블렌딩부(115)에서 출력되는 분할된 다자간 화상 회의 영상데이터들을 해당 프로젝터(120)들을 통해 투사한다.The image output unit 116 projects the divided multi-party video conference image data output from the blending unit 115 through the projectors 120.

상기 도 3 내지 도 7에서는 하드웨어적인 구성을 설명하였다. 이하 도 8에서는 화상 회의 단말 장치(100)에서의 영상 표시 방법을 설명한다.3 to 7 described the hardware configuration. Hereinafter, a video display method of the video conference terminal device 100 will be described.

도 8은 본 발명에 따른 화상 회의 단말부에서의 다자간 화상 회의에 따른 화상 영상 표시 방법을 나타낸 흐름도이다.8 is a flowchart illustrating a video image display method according to a multi-party video conference in a video conference terminal according to the present invention.

화상 처리 단말기(110)는 화상 회의가 개시되면, 영상 획득부(111)를 통해 카메라(130)를 제어하여 대화자를 촬영하여 영상데이터를 획득하고, 획득된 영상데이터를 통신부(112)를 통해 다자간 화상 회의 서버부(200)로 전송하기 시작한다.When the video conference is started, the image processing terminal 110 controls the camera 130 through the image acquisition unit 111 to capture the dialogue person to acquire the image data, and the obtained image data through the communication unit 112 through the multi-party. Transmission to the video conferencing server unit 200 begins.

상기 영상데이터의 송신이 개시되면 화상 처리 단말기(110)는 다자간 화상 회의 서버부(200)로부터 다자간 화상 회의 영상데이터가 수신되는지를 검사한다(S811).When transmission of the video data is started, the image processing terminal 110 checks whether the multi-party video conference video data is received from the multi-party video conference server 200 (S811).

다자간 화상 회의 영상데이터가 수신되기 시작하면 화상 처리 단말기(110)는 상기 다자간 화상 회의 영상데이터의 배경을 통일된 배경 화면을 합성하는 크로마키 처리를 수행한다(S813).When the multi-party video conferencing video data starts to be received, the image processing terminal 110 performs chroma key processing for synthesizing the unified background screen with the background of the multi-party video conferencing video data (S813).

상기 크로마키 처리가 완료되면 화상 처리 단말기(110)는 크로마키 처리된 다자간 화상 회의 영상데이터를 좌우 반전시켜 출력한다(S815).When the chroma key processing is completed, the image processing terminal 110 inverts and outputs the chroma key processed multi-party video conference image data (S815).

상기 다자간 화상 회의 영상의 좌우 반전이 완료되면 화상 처리 단말기(110)는 영상 분리부(113)를 통해 프로젝터(120)의 수에 대응하도록 상기 다자간 화상 회의 영상데이터를 분할하여 출력한다(S817).When the left and right inversion of the multi-party video conference image is completed, the image processing terminal 110 divides and outputs the multi-party video conference image data to correspond to the number of projectors 120 through the image separation unit 113 (S817).

그리고 상기 분할된 다자간 화상 회의 영상데이터는 워핑부(114)에서 각각 워핑처리된(S819) 후 블렌딩부(115)에서 프로젝터(120)들에서 투사되는 영상들이 중첩되는 중첩영역(103)에 대한 블렌딩 처리를 수행한다(S821).The divided multi-party video conference image data are each warped by the warping unit 114 (S819) and then blended with respect to the overlapping region 103 where the images projected by the projectors 120 from the blending unit 115 overlap. Processing is performed (S821).

상기 블렌딩 처리가 완료되면 화상 처리 단말기(110)는 영상 출력부(116)를 통해 분할된 다자간 화상 회의 영상데이터들을 해당 프로젝터(120)를 통해 스크린(101)에 투사한다.When the blending process is completed, the image processing terminal 110 projects the multi-party video conference image data divided by the image output unit 116 to the screen 101 through the corresponding projector 120.

이와 같이 함으로써 도 5에서 보이는 바와 같이 화상 회의 공간(160)에 구성된 조명(6)으로부터 조사되는 빛이 프로젝터 설치 공가(170)으로 투사되지 않으므로 프로젝터(121)들로부터 스크린(102)의 배면으로 투사되는 영상에 영향을 끼치지 않는다. 따라서 스크린(102)의 전면에 표시되는 영상은 선명하고 깨끗할 것이다.By doing so, the light emitted from the illumination 6 configured in the video conferencing space 160 is not projected to the projector installation canal 170 as shown in FIG. 5, so that it is projected from the projectors 121 to the back of the screen 102. It does not affect the image being displayed. Therefore, the image displayed on the front of the screen 102 will be clear and clean.

또한, 화상 회의 공간(160)의 조명(6)을 끄지 않아도 되므로 카메라는 피사체를 촬상하기 위한 충분할 조도를 확보할 수 있으므로 상대측으로 선명하고 깨끗한 영상을 전송할 수 있다.In addition, since the illumination 6 of the video conference space 160 does not need to be turned off, the camera can secure sufficient illuminance for capturing a subject, thereby transmitting a clear and clean image to the counterpart.

한편, 본 발명은 전술한 전형적인 바람직한 실시예에만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 개량, 변경, 대체 또는 부가하여 실시할 수 있는 것임은 당해 기술분야에서 통상의 지식을 가진 자라면 용이하게 이해할 수 있을 것이다. 이러한 개량, 변경, 대체 또는 부가에 의한 실시가 이하의 첨부된 특허청구범위의 범주에 속하는 것이라면 그 기술사상 역시 본 발명에 속하는 것으로 보아야 한다.While the present invention has been described with reference to exemplary embodiments, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the appended claims. It will be easily understood. If such improvement, change, substitution or addition is carried out within the scope of the appended claims, the technical spirit should also be regarded as belonging to the present invention.

100: 화상 회의 단말 장치 102: 스크린
103: 분리 영상 중첩 영역 110: 화상 처리 단말기
111: 영상 획득부 112: 통신부
113: 영상 분리부 114: 워핑부
115: 블렌딩부 116: 영상 출력부
117: 크로마키 처리부 118: 좌우 대칭 반전부
121: 프로젝터 130: 카메라
150: 네트워크 160: 화상 회의 공간
170: 프로젝터 설치 공간 200: 다자간 화상 회의 서버부
100: video conference terminal 102: screen
103: separated image superimposition area 110: image processing terminal
111: image acquisition unit 112: communication unit
113: image separation unit 114: warping unit
115: blending unit 116: image output unit
117: chroma key processing unit 118: left and right symmetry inversion unit
121: Projector 130: Camera
150: network 160: video conference space
170: projector installation space 200: multi-party video conferencing server unit

Claims (13)

빛을 조사하는 조명을 구비하는 화상 회의 공간과 프로젝터 설치 공간의 사이의 벽면에 설치되어 상기 빛이 상기 프로젝터 설치 공간에 조사되는 것을 차단하고, 후면으로 투사되는 영상을 반투과시켜 전면에 표시시키는 반투과형 스크린과,
상기 스크린의 상, 하, 좌, 우 중 적어도 하나 이상 설치되어 상기 화상 회의 공간을 촬영하여 출력하는 카메라와,
상기 프로젝터 설치 공간에 설치되어 상기 반투과형 스크린의 후면으로 화상 회의 영상을 투사하는 적어도 하나 이상의 프로젝터와,
상기 카메라에서 촬영되어 입력되는 영상데이터들을 다자간 화상 회의 서버부를 통해 적어도 하나 이상의 상대측으로 송신하고, 상기 다자간 화상 회의 서버로부터 상기 상대측들에 대한 다자간 화상 회의 영상데이터를 수신받아 상기 프로젝터들을 통해 상기 반투과형 스크린에 표시시키는 화상 처리 단말기를 포함하는 것을 특징으로 하는 화상 회의 단말 장치.
It is installed on the wall between the video conferencing space and the projector installation space with illumination light to block the light from being irradiated to the projector installation space, and to semi-transparently project the image projected to the rear and display it on the front side. With a transmissive screen,
At least one of up, down, left, and right sides of the screen is installed to photograph and output the video conference space;
At least one projector installed in the projector installation space to project a video conference image to the rear of the transflective screen;
Transmitting video data captured by the camera to at least one counterpart through a multi-party video conferencing server unit, and receiving multi-party video conferencing video data for the counterparts from the multi-party video conferencing server and transmitting the video data through the projectors. And a video processing terminal for displaying on a screen.
제1항에 있어서,
상기 화상 처리 단말기는,
다자간 화상 회의 영상이 좌우 대칭 반전되도록 상기 다자간 화상 회의 영상 데이터를 좌우 대칭 반전 처리를 수행한 후 상기 프로젝터를 통해 상기 반투과형 스크린에 표시시키는 것을 특징으로 하는 화상 회의 단말 장치.
The method of claim 1,
The image processing terminal,
And performing the left-right symmetric inversion process so that the multi-party video conference image is symmetrically reversed, and then displaying the multi-party video conference image data on the transflective screen through the projector.
제1항 또는 제2항에 있어서,
상기 반투과형 스크린은 굴곡형 스크린인 것을 특징으로 하는 화상 회의 단말 장치.
The method according to claim 1 or 2,
And the transflective screen is a curved screen.
제3항에 있어서,
상기 프로젝터는 적어도 둘 이상 구비되고,
상기 화상 처리 단말기는, 상기 스크린의 굴곡면에 대응하도록 상기 다자간 화상 회의 영상데이터를 변환한 후 미리 설정되어 있는 상기 스크린 상에 표시되는 영상의 크기에 따라 상기 프로젝터들을 통해 상기 다자간 화상 회의 영상데이터를 분할하여 상기 스크린에 조사하는 것을 특징으로 하는 화상 회의 단말 장치.
The method of claim 3,
At least two projectors are provided,
The image processing terminal converts the multi-party video conference image data to correspond to the curved surface of the screen, and then converts the multi-party video conference image data through the projectors according to the size of the image displayed on the screen. And dividing and irradiating the screen.
제4항에 있어서,
상기 화상 처리 단말기는,
상기 스크린의 굴곡면에 대응하도록 상기 다자간 화상 회의 영상데이터를 워핑처리하여 변환하는 것을 특징으로 하는 화상 회의 단말 장치.
5. The method of claim 4,
The image processing terminal,
And a video conferencing video data corresponding to the curved surface of the screen by warping and converting the video conferencing video data.
제5항에 있어서,
상기 화상 처리 단말기는,
상기 변환된 다자간 화상 회의 영상데이터를 상기 둘 이상의 프로젝터를 통해 상기 스크린상에 투사 시 중복되는 중첩영역을 자연스럽게 하기 위해 상기 중첩 영역을 블렌더링 처리하여 변환하는 것을 특징으로 하는 화상 회의 단말 장치.
The method of claim 5,
The image processing terminal,
And converting the overlapped areas by blending the converted multi-party video conference image data so as to smoothly overlap the overlapped areas when projecting on the screen through the two or more projectors.
제4항에 있어서,
상기 화상 처리 단말기는,
상기 다자간 화상 회의 영상데이터의 배경을 통일된 배경화면으로 크로마키 하여 변환하는 것을 특징으로 하는 화상 회의 단말 장치.
5. The method of claim 4,
The image processing terminal,
And convert the background of the multi-party video conference video data into a uniform background screen to convert the multi-channel video conference video data.
다자간 화상 회의 영상 데이터를 수신하는 수신과정과,
상기 다자간 화상 회의 영상 데이터에 대한 영상이 중앙을 기준으로 좌우가 반전되도록 상기 다자간 화상 회의 영상 데이터를 좌우 대칭 반전 처리하는 좌우 대칭 반전 과정과,
상기 좌우 대칭 반전 처리된 상기 다자간 화상 회의 영상 데이터를 미리 설정된 스크린 화면의 크기에 대응하여 프로젝터의 수로 분할하는 분할 과정과,
화상 회의 공간과 프로젝터 설치 공간 사이에 설치되는 반투과형 스크린의 후방 공간인 프로젝터 설치 공간에 설치된 해당 프로젝터를 통해 상기 분할된 다자간 화상 회의 영상 데이터 각각을 분할 다자간 화상 회의 영상으로 변환한 후 반투과형 스크린의 후면에 투사하여 표시시키는 표시과정을 포함하는 것을 특징으로 하는 화상 회의 시스템의 화상 회의 단말 장치의 화상 표시 방법.

A receiving process of receiving multi-party video conference video data;
A symmetric inversion process of symmetrically inverting the multi-party video conference image data such that the image of the multi-party video conference image data is inverted from the center;
A division process of dividing the multilateral video conference image data subjected to the left-right symmetry inversion into a number of projectors corresponding to a preset screen size;
After converting each of the divided multi-party video conference image data into the divided multi-party video conference image through the corresponding projector installed in the projector installation space, which is a space behind the transflective screen installed between the video conference space and the projector installation space, And a display process of projecting the rear surface of the video conferencing system.

제8항에 있어서,
상기 반투과형 스크린이 굴곡형 스크린인 경우, 상기 좌우 대칭 반전 과정 후, 상기 스크린의 굴곡면에 상기 화상 회의 영상 데이터를 상기 굴곡면에 따라 워핑 처리하여 변환하는 워핑 과정을 더 포함하는 것을 특징으로 하는 화상 회의 시스템의 화상 회의 단말 장치의 화상 표시 방법.
9. The method of claim 8,
If the transflective screen is a curved screen, after the symmetrical inversion process, further comprising a warping process of warping and converting the video conference image data on the curved surface of the screen according to the curved surface; An image display method of a video conference terminal device of a video conference system.
제9항에 있어서,
상기 분할 과정 및 워핑 과정 후, 분리된 다자간 화상 회의 영상 데이터를 굴곡형 스크린에 표시 시 발생하는 중첩 영역을 자연스럽게 처리하기 위해 상기 분리된 다자간 화상 회의 영상 데이터를 블렌더링 처리하여 변환하는 블렌더링 과정을 더 포함하는 것을 특징으로 하는 화상 회의 시스템의 화상 회의 단말 장치의 화상 표시 방법.
10. The method of claim 9,
After the dividing and warping processes, a blending process of blending and converting the separated multi-party video conference image data to naturally process the overlapping region generated when the separated multi-party video conference image data is displayed on the curved screen. The video display method of the video conference terminal of the video conference system further comprising.
제8항에 있어서,
상기 수신과정 후, 상기 다자간 화상 회의 영상의 배경을 통일된 배경화면을 가지도록 상기 다자간 화상 회의 영상에 대한 다자간 화상 회의 영상 데이터를 크로마키 처리를 수행하는 크로마키 과정을 더 포함하는 것을 특징으로 하는 화상 회의 시스템의 화상 회의 단말 장치의 화상 표시 방법.
9. The method of claim 8,
And after the receiving process, performing a chroma key process on the multi-party video conference image data of the multi-party video conference image so as to have a uniform background of the background of the multi-party video conference image. An image display method of a video conference terminal device of a video conference system.
제11항에 있어서,
상기 크로마키 과정 후, 굴곡형 스크린의 굴곡면에 최적의 화상으로 표시될 수 있도록 상기 굴곡면에 따라 다자간 화상 회의 영상 데이터를 워핑 처리하여 변환하는 워핑 과정을 더 포함하는 것을 특징으로 하는 화상 회의 시스템의 화상 회의 단말 장치의 화상 표시 방법.
The method of claim 11,
And a warping process of warping and converting the multi-party video conference image data according to the curved surface to display an optimal image on the curved surface of the curved screen after the chroma key process. The video display method of the video conference terminal device.
제12항에 있어서,
상기 분할 과정 및 워핑 과정 후, 분리된 다자간 화상 회의 영상을 굴곡형 스크린에 표시 시 발생하는 중첩 영역을 자연스럽게 처리하기 위해 상기 분리된 다자간 화상 회의 영상 데이터를 블렌더링 처리하여 변환하는 블렌더링 과정을 더 포함하는 것을 특징으로 하는 화상 회의 시스템의 화상 회의 단말 장치의 화상 표시 방법.
The method of claim 12,
After the dividing process and the warping process, a blending process of blending and converting the separated multi-party video conference image data to naturally process an overlapping region generated when displaying the separated multi-party video conference image on a curved screen is further performed. An image display method of a video conference terminal apparatus of a video conference system, comprising:
KR1020120005107A 2011-03-17 2012-01-17 Video conference terminal and video display method in the video conference terminal KR101219457B1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020120005107A KR101219457B1 (en) 2012-01-17 2012-01-17 Video conference terminal and video display method in the video conference terminal
PCT/KR2012/001687 WO2012124929A2 (en) 2011-03-17 2012-03-08 System and method for a multipoint video conference
CN201210064892.2A CN102685443B (en) 2011-03-17 2012-03-13 System and method for a multipoint video conference

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120005107A KR101219457B1 (en) 2012-01-17 2012-01-17 Video conference terminal and video display method in the video conference terminal

Publications (1)

Publication Number Publication Date
KR101219457B1 true KR101219457B1 (en) 2013-01-11

Family

ID=47841352

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120005107A KR101219457B1 (en) 2011-03-17 2012-01-17 Video conference terminal and video display method in the video conference terminal

Country Status (1)

Country Link
KR (1) KR101219457B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05219501A (en) * 1991-05-31 1993-08-27 Nippon Telegr & Teleph Corp <Ntt> Picture communication system
KR101099369B1 (en) 2011-03-17 2011-12-29 (주) 피디케이리미티드 Multi-user video conference system and method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05219501A (en) * 1991-05-31 1993-08-27 Nippon Telegr & Teleph Corp <Ntt> Picture communication system
KR101099369B1 (en) 2011-03-17 2011-12-29 (주) 피디케이리미티드 Multi-user video conference system and method

Similar Documents

Publication Publication Date Title
US9225916B2 (en) System and method for enhancing video images in a conferencing environment
US8890922B2 (en) Video communication method, device and system
US8638354B2 (en) Immersive video conference system
US8228371B2 (en) Projection screen and camera array
US8624954B2 (en) Methods and systems for sharing content via a collaboration screen
US20100007773A1 (en) Video Processing and Telepresence System and Method
EP2290969A1 (en) Telepresence system, method and video capture device
EP3014872B1 (en) System and method for making a teleconference with realistic simulation of a direct conversation
US9679369B2 (en) Depth key compositing for video and holographic projection
US20110134205A1 (en) Imaging terminal
CA2746590C (en) Method and system for audio-video communications
KR101099369B1 (en) Multi-user video conference system and method
Tan et al. Connectboard: A remote collaboration system that supports gaze-aware interaction and sharing
US7190388B2 (en) Communication terminal and system
KR101219457B1 (en) Video conference terminal and video display method in the video conference terminal
KR101252762B1 (en) Apparatus and method for image synthesis in image conference terminal
WO2011071700A2 (en) Imaging terminal
US8421844B2 (en) Apparatus for correcting gaze, a method of videoconferencing and a system therefor
WO2012124929A2 (en) System and method for a multipoint video conference
US20100283826A1 (en) Audiovisual terminal
KR20180092469A (en) Method for presentation broadcasting using 3d camera and web real-time communication
JP2008054131A (en) Photographing system
CN118233590A (en) Video conference apparatus, system and method
CN108600688A (en) Video conferencing system
KR20120060997A (en) Projector system for video conference

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160105

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170103

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20171220

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190102

Year of fee payment: 7