JPH11103499A - Video conference system - Google Patents
Video conference systemInfo
- Publication number
- JPH11103499A JPH11103499A JP9261510A JP26151097A JPH11103499A JP H11103499 A JPH11103499 A JP H11103499A JP 9261510 A JP9261510 A JP 9261510A JP 26151097 A JP26151097 A JP 26151097A JP H11103499 A JPH11103499 A JP H11103499A
- Authority
- JP
- Japan
- Prior art keywords
- participant
- conference
- display device
- participants
- conference participants
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、遠隔地にいる対象
者と円滑に会議を進めるためのテレビ会議システムに関
する。[0001] 1. Field of the Invention [0002] The present invention relates to a video conference system for smoothly conducting a conference with a target person at a remote place.
【０００２】[0002]
【従来の技術】従来のテレビ会議システムの一例を頭上
から見た状態を図８（ａ）に示す。会議参加者１０８
Ａ、１０８Ｂ及び１０８Ｃの前方には、リアプロジェク
タ１０４が配置され、その上方、リアプロジェクタ１０
４と、天井との間にカメラ１０１が設置されている。ま
た、スピーカー１０５は、会議参加者１０８Ａ、１０８
Ｂ及び１０８Ｃの頭上の天井に埋め込まれており、マイ
クロフォン１０７Ａ、１０７Ｂ及び１０７Ｃが各参加者
１０８Ａ、１０８Ｂ及び１０８Ｃの前に置かれている。
図示していないが、同様のシステムが遠隔地にある相手
側の会議参加者の方にも配置されており、リアプロジェ
クタ１０４には相手側のカメラで撮影している会議室の
様子が表示されており、かつ、相手側の会議参加者の発
言は、相手側マイクロフォンで集音し、スピーカー１０
５から放送される。2. Description of the Related Art FIG. 8A shows an example of a conventional video conference system viewed overhead. Conference participants 108
A, 108B and 108C, a rear projector 104 is arranged in front of the rear projector 10
The camera 101 is installed between the camera 4 and the ceiling. Further, the speaker 105 is connected to the conference participants 108A and 108A.
Embedded in the ceiling above B and 108C, microphones 107A, 107B and 107C are placed in front of each participant 108A, 108B and 108C.
Although not shown, a similar system is also arranged for a remote participant's conference participant, and the rear projector 104 displays the state of the conference room taking a picture with the other party's camera. The speech of the conference participant on the other side is collected by the microphone on the other side, and the speaker 10
5 broadcast.
【０００３】同じシステムを参加者の背後から見た状態
を図８（ｂ）に示す。リアプロジェクタ１０４には、相
手側の会議参加者１０８Ｄ、１０８Ｅ及び１０８Ｆが映
っているが、これは１台のカメラで撮影されている映像
である。ここで、会議参加者はリアプロジェクタ１０４
に表示されている相手側参加者の画像に顔を向けている
ので、会議参加者１０８Ａ、１０８Ｂ及び１０８Ｃと、
表示されている参加者１０８Ｄ、１０８Ｅ及び１０８Ｆ
の視線が一致することはない。FIG. 8B shows the same system as viewed from behind a participant. The conference projectors 108D, 108E, and 108F of the other party are shown on the rear projector 104, and are images captured by one camera. Here, the conference participants are the rear projector 104
Face to the image of the other participant displayed in, the conference participants 108A, 108B and 108C,
Participants 108D, 108E and 108F being displayed
Are not the same.
【０００４】例えば、参加者１０８Ａが、相手側参加者
１０８Ｆの画像に向かって発言しているとき、カメラ１
０１は、参加者１０８Ａの向かって左側の顔を映してい
る。この画像を見る参加者１０８Ｆは、自分より右側に
参加者１０８Ａの視線が向いているので、自分に対して
発言していることが画像からは分かりにくく、臨場感に
欠ける。For example, when the participant 108A is speaking toward the image of the other participant 108F, the camera 1
01 shows the face on the left side of the participant 108A. Since the participant 108F who sees this image is looking to the right of the participant 108A to the right, it is difficult for the participant 108F to speak from him or her from the image, and lacks a sense of reality.
【０００５】一方、相手側各参加者の音声は、頭上のス
ピーカー１０５から放送されるので、当然ながら表示さ
れている画像位置と音像位置が一致せず、これも臨場感
に欠ける原因となる。On the other hand, since the voice of each participant on the other side is broadcast from the overhead speaker 105, the displayed image position and the sound image position do not naturally coincide with each other, which also causes a lack of realism.
【０００６】このような問題を解決する方法として、特
開平６−４３５４５号公報には、２方向から１枚のスク
リーンへの投影を、相互に干渉なく実現し、２つの方向
からの視野を独立に再現して臨場感の向上を図る技術が
開示されている。As a method for solving such a problem, Japanese Patent Application Laid-Open No. Hei 6-43545 discloses a technique of projecting a single screen from two directions without mutual interference, and independently controlling the fields of view from the two directions. To improve the sense of realism by reproducing the same.
【０００７】又、音声に関して、センターチャンネルの
音声を画面中央付近から反射することで、映像と音像の
一致を図る方法が、実開平６−７３９９７号公報に開示
されている。Japanese Patent Laid-Open Publication No. Hei 6-73997 discloses a method of reflecting the sound of the center channel from the vicinity of the center of the screen to match the image with the sound image.
【０００８】[0008]
【発明が解決しようとする課題】しかしながら、特開平
６−４３５４５号公報に開示された方法では、原理的に
２方向の映像にしか対応しておらず、臨場感が十分に向
上するとは言えない。また、音声については何ら記載さ
れておらず、音声を含めた臨場感は向上されていないと
いう問題がある。However, the method disclosed in Japanese Unexamined Patent Publication No. Hei 6-43545, in principle, only supports images in two directions, and it cannot be said that the realism is sufficiently improved. . In addition, there is a problem that no description is made regarding the sound, and the sense of presence including the sound is not improved.
【０００９】また、実開平６−７３９９７号公報に開示
された方法は、一つの音源を一人の視聴者の方向に向け
る提案であるため、多数の参加者に対応していないとい
う問題がある。The method disclosed in Japanese Utility Model Laid-Open Publication No. Hei 6-73997 has a problem in that it does not correspond to a large number of participants because it is a proposal in which one sound source is directed to one viewer.
【００１０】[0010]
【課題を解決するための手段】請求項１に記載のテレビ
会議システムは、上記のような課題を解決するために、
複数のこちら側の会議参加者を、遠隔地に居る複数の相
手側の会議参加者がこちら側に居ると仮想した位置か
ら、上記双方の会議参加者別に、同時に撮影する複数の
カメラと、複数の相手側の会議参加者を、複数のこちら
側の会議参加者がその場に居ると仮想した位置から、複
数の相手側カメラで、上記双方の会議参加者別に、同時
に撮影した複数の画像を表示する表示装置と、上記各々
の会議参加者の近くに設置され、上記会議参加者の発言
を集音する複数のマイクロフォンと、指向性を有し、左
右一対で動作する指向性スピーカとから構成され、上記
表示装置は、上記表示装置の法線方向と、上記表示装置
側の会議参加者の視線との成す角度に応じて、上記複数
の画像の中から、上記表示装置側の会議参加者の位置か
ら見えると想定される画像を、会議参加者別に同時に表
示すると共に、上記こちら側の会議参加者と、上記表示
装置に映される相手側の会議参加者の画像とで構成され
る仮想空間において、上記こちら側のカメラを、相手側
の会議参加者の存在する仮想位置近傍に配置する一方、
上記こちら側の左右一対の指向性スピーカの音量を制御
して、音像位置を上記仮想空間内の相手側発言者の仮想
位置に一致させ、離れた場所に居る会議参加者が、あた
かも同じ場所に居るような感覚を起こさせることを特徴
とする。According to the first aspect of the present invention, there is provided a video conference system for solving the above problems.
A plurality of near-end conference participants are imagined from a virtual location where a plurality of remote conference participants are located at a near site. The conference participants on the other side of the conference from a virtual position where a plurality of conference participants on this side are present at the same location, and a plurality of images taken simultaneously by It comprises a display device for displaying, a plurality of microphones installed near each of the conference participants and collecting sounds of the conference participants, and a directional speaker having directivity and operating as a pair of left and right. The display device may further include a conference participant on the display device side from the plurality of images according to an angle between a normal direction of the display device and a line of sight of the conference participant on the display device side. Is assumed to be visible from the position Images are simultaneously displayed for each conference participant, and in the virtual space composed of the conference participant on the near side and the image of the conference participant on the other side displayed on the display device, the camera on the near side is displayed. Is placed in the vicinity of the virtual location where the other conference participant exists,
By controlling the volume of the pair of directional speakers on this side, the sound image position is matched with the virtual position of the other speaker in the virtual space, and the conference participants who are far away are in the same place. It is characterized by giving a sense of being.
【００１１】上記構成によれば、上記会議参加者と、上
記表示装置に映された相手側参加者の画像で構成される
仮想的な空間において、カメラは相手側参加者の存在す
る仮想位置近傍に配置されるので、そのカメラが取り込
む画像は相手側参加者が現実にその位置に居れば見るこ
とができる画像と略一致する。一方、上記一対の指向性
スピーカの音量を制御して音声合成ベクトルの方向を、
上記表示装置に映し出された発言者の方向に合わせるこ
とで、音像位置を仮想空間内の発言者の位置に略一致さ
せることができる。[0011] According to the above configuration, in a virtual space composed of the conference participant and the image of the partner participant displayed on the display device, the camera is located near the virtual position where the partner participant exists. , The image captured by the camera substantially matches the image that can be seen if the other participant is actually at that position. On the other hand, the direction of the speech synthesis vector is controlled by controlling the volume of the pair of directional speakers,
By matching the direction of the speaker projected on the display device, the sound image position can be made to substantially match the position of the speaker in the virtual space.
【００１２】請求項２に記載のテレビ会議システムは、
上記のような課題を解決するために、請求項１に記載の
テレビ会議システムにおいて、上記表示装置に、レンチ
キュラレンズを備えている。上記構成によれば、複数の
画像を干渉することなく、所定の方向に映し出すことが
できる。[0012] The video conference system according to claim 2 is
In order to solve the above problem, in the video conference system according to claim 1, the display device includes a lenticular lens. According to the above configuration, a plurality of images can be projected in a predetermined direction without interference.
【００１３】請求項３に記載のテレビ会議システムは、
上記のような課題を解決するために、請求項１に記載の
テレビ会議システムにおいて、上記表示装置に、ホログ
ラムを備えている。上記構成によれば、複数の画像を干
渉することなく、所定の方向に映し出すことができ、さ
らに、表示装置を薄く、軽量に作製することができる。The video conference system according to claim 3 is
In order to solve the above-mentioned problem, in the video conference system according to claim 1, the display device includes a hologram. According to the above configuration, a plurality of images can be projected in a predetermined direction without interfering with each other, and the display device can be made thin and lightweight.
【００１４】請求項４に記載のテレビ会議システムは、
上記のような課題を解決するために、複数のこちら側の
会議参加者を、遠隔地に居る複数の相手側の会議参加者
がこちら側に居る仮想した位置から、上記双方の会議参
加者別に、同時に撮影する複数のカメラと、複数の相手
側の会議参加者を、複数のこちら側の会議参加者がその
場に居ると仮想した位置から、上記双方の会議参加者別
に、同時に複数の相手側カメラで撮影した画像を、こち
ら側の会議参加者別に投影する複数の投影機と、上記投
影機から投影される画像を反射する窮孔を有する膜と、
その膜の光入射側に設けられた光の入射方向と略同じ方
向に、光を出射する反射ビーズとから成るスクリーン
と、上記会議参加者の近くに設置され、上記会議参加者
の発言を集音する複数のマイクロフォンと、指向性を有
し、左右一対で動作する指向性スピーカとから構成さ
れ、上記こちら側の会議参加者と、上記複数の投影機か
ら、上記スクリーンに映される複数の相手側の会議参加
者の画像とで構成される仮想空間において、上記こちら
側のカメラは相手側の会議参加者の存在する仮想位置近
傍に配置する一方、上記こちら側の一対の指向性スピー
カの音量を制御して、音像位置を仮想空間内の相手側発
言者の位置に一致させ、離れた場所に居る会議参加者
が、あたかも同じ場所に居るような感覚を起こさせるこ
とを特徴とする。A video conference system according to claim 4 is
In order to solve the above-mentioned problems, a plurality of conference participants on the near side are separated from a virtual location where a plurality of conference participants on the remote side are located on the near side by each of the above two conference participants. Simultaneously, a plurality of cameras and a plurality of conference participants on the other side are simultaneously moved from a virtual position where a plurality of conference participants on the near side are present to the plurality of conference participants for each of the above conference participants. A plurality of projectors that project images taken by the side camera for each conference participant on this side, and a film having a hole that reflects an image projected from the projector,
A screen made of reflective beads for emitting light in substantially the same direction as the light incident direction provided on the light incident side of the film, and a screen installed near the conference participant and collecting the comments of the conference participant. It is composed of a plurality of microphones that make sound, a directional speaker having directivity and operating in a pair of right and left, and a conference participant on the near side and a plurality of projectors projected on the screen from the plurality of projectors. In the virtual space composed of the image of the conference participant on the other side, the camera on this side is arranged near the virtual position where the conference participant on the other side exists, while the pair of directional speakers on the other side The sound volume is controlled so that the position of the sound image matches the position of the other speaker in the virtual space, and a conference participant in a distant place is caused to feel as if they are in the same place.
【００１５】上記構成によれば、上記会議参加者と、上
記表示装置に映された相手側参加者の画像で構成される
仮想的な空間において、上記スクリーンは窮孔を有して
いるのでカメラをスクリーンの背後に配置して撮影して
もよく、カメラは相手側参加者の存在する仮想位置近傍
に配置されるので、そのカメラが取り込む画像は相手側
参加者が現実にその位置に居れば見ることができる画像
と略一致する。また、投影機は参加者の方角から上記ス
クリーンに投影し、上記スクリーン上の反射ビーズによ
って参加者の方角にのみ画像が反射される。一方、上記
一対の指向性スピーカの音量を制御して音声合成ベクト
ルの方向を、上記表示装置に映し出された発言者の方向
に合わせることで、音像位置を仮想空間内の発言者の位
置に略一致させることができる。According to the above arrangement, in a virtual space composed of the conference participant and the image of the other participant on the display device, the screen has a hole, so the camera May be placed behind the screen and photographed, and the camera is placed near the virtual position where the other participant exists, so the image captured by that camera is only available if the other participant is actually at that position. It almost matches the image you can see. The projector also projects onto the screen from the direction of the participant, and the reflective beads on the screen reflect the image only in the direction of the participant. On the other hand, by controlling the volume of the pair of directional speakers and adjusting the direction of the speech synthesis vector to the direction of the speaker projected on the display device, the sound image position is approximately equal to the position of the speaker in the virtual space. Can be matched.
【００１６】[0016]
【発明の実施の形態】本発明のテレビ会議システムの実
施形態を図１〜図７に基づいて説明する。 〔実施形態１〕図１は本発明のテレビ会議システムの実
施形態１を頭上から見た図である。図１に示すように、
上記テレビ会議システムは、カメラ１、２及び３、表示
装置４、スピーカ群５、６、会議参加者８Ａ、８Ｂ及び
８Ｃ、各々の前に設置されたマイクロフォン７Ａ、７Ｂ
及び７Ｃから構成される。同じ構成のテレビ会議システ
ムが、遠隔地にある相手側の会議参加者の方にも設置さ
れている。DESCRIPTION OF THE PREFERRED EMBODIMENTS An embodiment of a video conference system according to the present invention will be described with reference to FIGS. [Embodiment 1] FIG. 1 is a diagram of a video conference system according to Embodiment 1 of the present invention as viewed overhead. As shown in FIG.
The video conference system includes cameras 1, 2 and 3, a display device 4, speakers 5 and 6, conference participants 8A, 8B and 8C, and microphones 7A and 7B installed in front of the respective participants.
And 7C. A video conference system having the same configuration is also installed in a remote conference participant.
【００１７】また、上記テレビ会議システムを参加者８
Ａ、８Ｂ及び８Ｃの背後の少し上方から見た状態を図２
に示す。カメラ１、２及び３は、それぞれ参加者８Ａ、
８Ｂ及び８Ｃの前方で、表示装置４の少し上方に配置さ
れており、参加者のうち中央にいる人物、すなわち参加
者８Ｂが略画面中央になるようにその方向を定められて
いる。遠隔地の相手側の音声を出力するスピーカ群５、
６は、表示装置４の左右に配置されている。マイクロフ
ォン７Ａ、７Ｂ及び７Ｃは、参加者の陰になっているの
で図示していないが、各参加者の前のテーブルに一つず
つ埋め込まれている。表示装置４には、相手側の参加者
８Ｄ、８Ｅ及び８Ｆの画像が、参加者のうち中央にいる
参加者８Ｅを略画面中央にして映し出されている。In addition, the above-mentioned video conference system is connected to the participant 8
A, 8B and 8C, seen from slightly above, behind FIG.
Shown in Cameras 1, 2 and 3 each have a participant 8A,
It is arranged in front of 8B and 8C, slightly above the display device 4, and its direction is determined so that the person in the center among the participants, that is, the participant 8B is approximately at the center of the screen. A speaker group 5 for outputting the voice of the other party in the remote place,
6 are arranged on the left and right of the display device 4. The microphones 7A, 7B and 7C are not shown because they are behind the participants, but are embedded one by one in the table in front of each participant. On the display device 4, images of the participants 8D, 8E, and 8F on the other side are displayed with the participant 8E located at the center among the participants substantially at the center of the screen.
【００１８】図３は表示装置４を上方から見た断面図で
ある。図３を用いて詳細に説明する。表示装置４は、表
示面に所定の画素から入射した光を所定の方向に出射す
るレンチキュラレンズ群３２と、画素群３１及び図示し
ない画素制御部とから構成されている。前記画素制御部
によって制御された画像の光は、画素ａ1、ｂ1、ｃ1、
ａ2、ｂ2、ｃ2、ａ3、ｂ3、ｃ3からレンチキュラレンズ
群３２の方に出射される。各レンチキュラレンズに入射
した光は、レンチキュラレンズによって所定の方向に屈
折する。すなわち、画素ａ1、ａ2、ａ3から入った光
は、Ｄ1方向へ、画素ｂ1、ｂ2、ｂ3から入った光はＤ2
方向へ、画素ｃ1、ｃ2、ｃ3から入った光は、Ｄ3方向へ
向けて出射し、Ｄ1方向の光は参加者８Ａのみが、Ｄ2方
向の光は参加者８Ｂのみが、Ｄ3方向の光は参加者８Ｃ
のみが見ることができるのである。FIG. 3 is a sectional view of the display device 4 as viewed from above. This will be described in detail with reference to FIG. The display device 4 includes a lenticular lens group 32 that emits light incident on a display surface from a predetermined pixel in a predetermined direction, a pixel group 31, and a pixel control unit (not shown). The light of the image controlled by the pixel control unit includes pixels a 1 , b 1 , c 1 ,
The light is emitted toward the lenticular lens group 32 from a 2 , b 2 , c 2 , a 3 , b 3 , and c 3 . Light incident on each lenticular lens is refracted in a predetermined direction by the lenticular lens. That is, light entering from the pixels a 1 , a 2 , and a 3 goes in the direction D 1 , and light entering from the pixels b 1 , b 2 , and b 3 goes to D 2
Light coming from the pixels c 1 , c 2 , and c 3 in the direction is emitted toward the direction D 3 , and light in the direction D 1 is only the participant 8A, and light in the direction D 2 is only the participant 8B. , D 3 direction light is participant 8C
Only one can see.
【００１９】説明を理解しやすくするために、相手側の
システム構成を図４に示す。すなわち、カメラ２１、２
２及び２３、表示装置２４、スピーカ群２５、２６、会
議参加者８Ｄ、８Ｅ及び８Ｆ、各々の会議参加者の前に
設置されたマイクロフォン２７Ｄ、２７Ｅ及び２７Ｆか
ら構成される。カメラ２１、２２及び２３は、それぞれ
参加者８Ｄ、８Ｅ及び８Ｆの前方で、表示装置２４の少
し上方に配置されており、参加者のうち中央にいる人
物、すなわち参加者８Ｅが略画面中央になるようにその
方向を定められている。相手側の音声を出力するスピー
カ群２５、２６は表示装置２４の左右に配置されてい
る。マイクロフォン２７Ｄ、２７Ｅ及び２７Ｆは各参加
者の前のテーブルに一つずつ埋め込まれている。FIG. 4 shows the system configuration of the other party for easy understanding of the description. That is, the cameras 21, 2
2 and 23, a display device 24, speakers 25 and 26, conference participants 8D, 8E and 8F, and microphones 27D, 27E and 27F installed in front of each conference participant. The cameras 21, 22 and 23 are respectively arranged in front of the participants 8D, 8E and 8F and slightly above the display device 24, and the person at the center of the participants, that is, the participant 8E is approximately at the center of the screen. The direction is determined so that it becomes. Speaker groups 25 and 26 for outputting the voice of the other party are arranged on the left and right sides of the display device 24. Microphones 27D, 27E and 27F are embedded one at a time in the table in front of each participant.
【００２０】それぞれのカメラ１、２、３、２１、２２
及び２３は、各参加者が相手側を見るのと同じような役
割を果たしている。つまり、カメラ１は参加者８Ｆの視
野を、カメラ２は参加者８Ｅの視野を、カメラ３は参加
者８Ｄの視野を映し出し、カメラ２１は参加者８Ｃの視
野を、カメラ２２は参加者８Ｂの視野を、カメラ２３は
参加者８Ａの視野を映し出している。カメラ２３で取り
込んだ画像は、伝送されて図３における画素ａ1、ａ2、
ａ3・・・から出力されて参加者８Ａだけが見ることが
でき、カメラ２２で取り込んだ画像は、伝送されて画素
ｂ1、ｂ2、ｂ3・・・から出力されて参加者８Ｂだけが
見ることができる。以下、同様に各参加者に対応するカ
メラの映し出す画像は、その対応する参加者のみが見る
ことができるのである。Each camera 1, 2, 3, 21, 22
And 23 play the same role as each participant looking at the other side. That is, the camera 1 projects the field of view of the participant 8F, the camera 2 projects the field of view of the participant 8E, the camera 3 projects the field of view of the participant 8D, the camera 21 projects the field of view of the participant 8C, and the camera 22 projects the field of view of the participant 8B. The camera 23 reflects the field of view of the participant 8A. The image captured by the camera 23 is transmitted and pixels a 1 , a 2 ,
a 3 is output from ... can only participant 8A see, captured by the camera 22 images the participant 8B only is output from the transmission has been pixels b 1, b 2, b 3 ··· Can be seen. Hereinafter, similarly, the image projected by the camera corresponding to each participant can be viewed only by the corresponding participant.
【００２１】こうすることによって、臨場感が飛躍的に
向上するのである。例えば、参加者８Ａが表示装置４に
映し出された参加者８Ｅに向かって意見を述べるとき、
カメラ２は参加者８Ａの顔の正面を捕らえており、した
がって、参加者８Ｅが見る表示装置２４の画像の参加者
８Ａは、自分の方に顔を向けていることが認識される。
一方、カメラ１は参加者８Ａの顔の向かって右側を映し
ており、参加者８Ｆが見る表示装置２４の参加者８Ａ
は、自分の少し左方向、すなわち参加者８Ｅに顔を向け
ていることが分かる。参加者８Ｄについても同様にし
て、参加者８Ａが参加者８Ｅに顔を向けて話しているこ
とが画像から分かるので、実際に相手側が目の前にいる
ように感じるのである。By doing so, the sense of realism is dramatically improved. For example, when the participant 8A gives an opinion to the participant 8E displayed on the display device 4,
The camera 2 captures the front of the face of the participant 8A, and therefore, it is recognized that the participant 8A of the image of the display device 24 seen by the participant 8E faces his or her own face.
On the other hand, the camera 1 shows the right side of the face of the participant 8A, and the participant 8A of the display device 24 seen by the participant 8F.
Turns his face slightly to the left, that is, the participant 8E. Similarly, for the participant 8D, it can be seen from the image that the participant 8A is speaking face-to-face with the participant 8E, so that it is felt that the other party is actually in front of them.
【００２２】上述の説明において、表示装置４にレンチ
キュラレンズ群３２を配置していたが、ホログラム等同
様の効果を有するものであればよい。In the above description, the lenticular lens group 32 is disposed on the display device 4. However, any device having a similar effect such as a hologram may be used.
【００２３】次に音声の臨場感の向上について、図５に
基づいて説明する。スピーカ群５、６には、複数の指向
性スピーカが配置されている。ここで、指向性スピーカ
とは、スピーカから発音される音の強度が指向性を有
し、その指向方向からずれると極端に音量が小さくなる
ように設計されたスピーカである。スピーカ群５とスピ
ーカ群６の指向性スピーカは、各々一つずつで一対を成
し、各参加者に指向方向を向けて配置されている。図５
の例では３対のスピーカが、それぞれ参加者８Ａ、８Ｂ
及び８Ｃに向けて配置されているのである。各参加者の
発言は、それぞれの前に設置されたマイクロフォンで集
音されるので、集音された音の大きさを比較すれば、そ
れがだれの発言であるかは容易に判別できる。表示装置
４には、相手側参加者８Ｄ、８Ｅ及び８Ｆが、略ＳD、
ＳE及びＳFの位置に表示されている。Next, a description will be given, with reference to FIG. A plurality of directional speakers are arranged in the speaker groups 5 and 6. Here, the directional loudspeaker is a loudspeaker designed such that the intensity of sound emitted from the loudspeaker has directivity, and the volume is extremely reduced when the intensity deviates from the directional direction. The directional speakers of the loudspeaker group 5 and the loudspeaker group 6 form a pair by one each, and are arranged with the directional direction directed to each participant. FIG.
In this example, three pairs of loudspeakers correspond to participants 8A and 8B, respectively.
And 8C. Since the speech of each participant is collected by a microphone installed in front of each participant, by comparing the magnitude of the collected sound, it can be easily determined who the speech is. On the display device 4, the other participants 8D, 8E, and 8F display substantially SD ,
It is displayed at the position of S E and S F.
【００２４】例えば、参加者８Ｆが発言した場合、参加
者８Ａ、８Ｂ、８Ｃの位置における、スピーカ群５、６
から発音された音声の音声合成ベクトルが、ベクトルＡ
F、ＢF及びＣFとなるように制御され、表示装置４上の
音像位置は略ＳFに定位する。したがって、各参加者８
Ａ、８Ｂ、８Ｃには、表示装置４に写る参加者８Ｆの画
像の方向から音声が聞こえてくるように感じるので、さ
らに臨場感が高まるのである。このとき、こちらの方向
に向けられた指向性スピーカ以外のスピーカから発せら
れた音は、音量レベルが極端に落ちているので、ほとん
ど影響しない。For example, when the participant 8F speaks, the speaker groups 5, 6 at the positions of the participants 8A, 8B, 8C
The speech synthesis vector of the speech pronounced from
F , B F and C F are controlled, and the sound image position on the display device 4 is localized at approximately S F. Therefore, each participant 8
At A, 8B, and 8C, it is felt that sound is heard from the direction of the image of the participant 8F shown on the display device 4, so that the sense of reality is further enhanced. At this time, sound emitted from speakers other than the directional speaker directed in this direction has almost no effect because the volume level is extremely reduced.
【００２５】〔実施形態２〕本発明のテレビ会議システ
ムの実施形態２を図６を用いて説明する。参加者１８
Ａ、１８Ｂ及び１８Ｃの前には、反射ビーズ入りスクリ
ーン１４が設置され、また、各参加者の背後の少し上方
には、投影機１９Ａ、１１９Ｂ、１９Ｃが配置されてい
る。投影機１９Ａからは、遠隔地側の参加者１８Ａの視
野の画像を捕らえるカメラからの画像を投影し、同様に
投影機１９Ｂからは、参加者１８Ｂの視野の画像を、投
影機１９Ｃからは、参加者１８Ｃの視野の画像を投影し
ている。[Second Embodiment] A second embodiment of the video conference system of the present invention will be described with reference to FIG. Participant 18
In front of A, 18B and 18C, a screen 14 with reflective beads is installed, and projectors 19A, 119B, 19C are arranged slightly above each participant. From the projector 19A, an image from a camera that captures the image of the field of view of the remote participant 18A is projected. Similarly, from the projector 19B, an image of the field of view of the participant 18B is projected, and from the projector 19C, An image of the field of view of the participant 18C is projected.
【００２６】スクリーン１４の横断面図を図７に示す。
スクリーン１４は、窮孔を有する膜４２と、膜４２に接
着された反射ビーズ４１からなる。反射ビーズ４１と
は、道路標識等に使用するものと同様のもので、塗料に
混ぜて塗布すると、車のヘッドライトが入射したとき
に、略入射方向に出射させて、運転者に標識を見やすく
するものである。つまり、図７に示すように、反射ビー
ズ４１に入射した光４３ａ及び４３ｂは、反射ビーズ内
での屈折と反射によって、他の光の影響をうけることな
く入射方向と略同方向に出射させることができる。FIG. 7 shows a cross-sectional view of the screen 14.
The screen 14 includes a film 42 having a hole and reflective beads 41 adhered to the film 42. The reflective beads 41 are the same as those used for road signs and the like, and when mixed with paint and applied, when the headlights of a car enter, they are emitted in a substantially incident direction so that the driver can easily see the signs. Is what you do. That is, as shown in FIG. 7, the light 43a and 43b incident on the reflective bead 41 are emitted in the same direction as the incident direction without being affected by other light due to refraction and reflection in the reflective bead. Can be.
【００２７】したがって、投影機１９Ａからの投影光
は、略、参加者１８Ａの方向にのみ反射されて戻ってく
るので、参加者１８Ｂや１８Ｃがスクリーン１４上に見
ている画像に影響することはない。同様に、投影機１９
Ｂの投影光は、参加者１８Ｂのみが、投影機１９Ｃの投
影光は、参加者１８Ｃのみが見ることができ、他の画像
に影響しない。Therefore, since the projection light from the projector 19A is reflected and returned substantially only in the direction of the participant 18A, it does not affect the image viewed by the participants 18B and 18C on the screen 14. Absent. Similarly, the projector 19
The projection light of B can be seen only by the participant 18B, and the projection light of the projector 19C can be seen only by the participant 18C, and does not affect other images.
【００２８】又、カメラ１、２、３はスクリーン１４の
裏側に配置される。スクリーン１４には窮孔があるの
で、そこを通して参加者の画像を捕らえることができの
で、略参加者の目線高さと一致する高さにカメラを据え
ることができるのである。こうすることで、映される画
像は略視線が一致するので、さらに臨場感が高まるので
ある。以上、本発明の実施形態を説明したが、これに限
定されるものではなく、同様の効果を有するものであれ
ばよいことは言うまでもない。The cameras 1, 2, and 3 are arranged behind the screen 14. Since the screen 14 has a hole, the image of the participant can be captured through the hole, so that the camera can be set at a height substantially corresponding to the eye level of the participant. By doing so, the images to be projected have substantially the same line of sight, so that the sense of reality is further enhanced. As described above, the embodiment of the present invention has been described, but it is needless to say that the present invention is not limited to this, and may have the same effect.
【００２９】[0029]
【発明の効果】請求項１に記載の発明によれば、表示装
置に映し出された遠隔地の参加者は、こちら側の参加者
の誰の方に向かって発言しているのかがはっきり分か
り、しかも、画像の中の発言者の方向から音声が聞こえ
てくるように感じることができるので、遠隔地の相手側
の参加者があたかも目前にいるように臨場感を高めるこ
とができ、会議の進行がスムーズに流れるという効果を
有する。According to the first aspect of the present invention, the remote participant projected on the display device can clearly know to which participant on this side he is speaking. In addition, since the sound can be heard from the direction of the speaker in the image, it is possible to enhance the sense of presence as if the participant on the other side of the remote place is at hand, and proceed with the conference. Has the effect of flowing smoothly.
【００３０】請求項２に記載の発明によれば、請求項１
と同様の効果に加えて、複数の画像を干渉することな
く、所定の方向に映し出すことができるので、鮮明な画
像を見ることができるという効果を有する。According to the invention described in claim 2, according to claim 1
In addition to the same effect as described above, a plurality of images can be projected in a predetermined direction without interfering with each other, so that a clear image can be seen.
【００３１】請求項３に記載の発明によれば、請求項２
と同様の効果に加えて、表示装置を薄型、軽量にするこ
とができ、設置が容易になるという効果を有する。According to the invention of claim 3, according to claim 2,
In addition to the same effects as described above, there is an effect that the display device can be made thinner and lighter, and the installation becomes easier.
【００３２】請求項４に記載の発明によれば、請求項１
と同様の効果に加えて、目線も略一致するので、さらに
臨場感の高い会議を行うことができるという効果を有す
る。According to the invention described in claim 4, according to claim 1,
In addition to the same effect as described above, since the eyes also substantially match, there is an effect that a conference with a higher sense of reality can be held.
【図１】本発明のテレビ会議システムの実施形態１を示
す平面図である。FIG. 1 is a plan view showing a first embodiment of a video conference system of the present invention.
【図２】本発明のテレビ会議システムの実施形態１を後
方斜め上方からの見た図である。FIG. 2 is a diagram of the first embodiment of the video conference system of the present invention, as viewed from obliquely rearward and upward.
【図３】本発明のテレビ会議システムに係るレンチキュ
ラレンズを使った表示装置の水平断面図である。FIG. 3 is a horizontal sectional view of a display device using a lenticular lens according to the video conference system of the present invention.
【図４】本発明のテレビ会議システムの実施形態１に係
る相手側のシステムの平面図である。FIG. 4 is a plan view of the other party's system according to the first embodiment of the video conference system of the present invention.
【図５】本発明のテレビ会議システムに係る指向性スピ
ーカによる音声合成ベクトルの説明図である。FIG. 5 is an explanatory diagram of a speech synthesis vector by a directional speaker according to the video conference system of the present invention.
【図６】本発明のテレビ会議システムの実施形態２を示
す平面図である。FIG. 6 is a plan view showing Embodiment 2 of the video conference system of the present invention.
【図７】本発明のテレビ会議システムの実施形態２に係
るスクリーンの断面図である。FIG. 7 is a sectional view of a screen according to a second embodiment of the video conference system of the present invention.
【図８】従来のテレビ会議システムの一例を示す概略図
である。FIG. 8 is a schematic diagram showing an example of a conventional video conference system.
１、２、３ カメラ ４、２４ 表示装置 ５、６ 指向性スピーカ群 ７Ａ、７Ｂ、７Ｃ、２７Ｄ、２７Ｅ、２７Ｆ マイクロ
フォン １４ スクリーン １９Ａ、１９Ｂ、１９Ｃ 投影機1, 2, 3 Camera 4, 24 Display 5, 6, Directional Speaker Group 7A, 7B, 7C, 27D, 27E, 27F Microphone 14 Screen 19A, 19B, 19C Projector
───────────────────────────────────────────────────── フロントページの続き (72)発明者 赤羽 俊夫 大阪府大阪市阿倍野区長池町22番22号 シ ャープ株式会社内 (72)発明者 高濱 健吾 大阪府大阪市阿倍野区長池町22番22号 シ ャープ株式会社内 ──────────────────────────────────────────────────続 き Continuing on the front page (72) Inventor Toshio Akabane 22-22 Nagaikecho, Abeno-ku, Osaka-shi, Osaka Inside Sharp Corporation (72) Inventor Kengo Taka22-22-22 Nagaikecho, Abeno-ku, Osaka-shi, Osaka Inside the corporation
Claims (4)
に居る複数の相手側の会議参加者がこちら側に居ると仮
想した位置から、上記双方の会議参加者別に、同時に撮
影する複数のカメラと、 複数の相手側の会議参加者を、複数のこちら側の会議参
加者がその場に居ると仮想した位置から、複数の相手側
カメラで、上記双方の会議参加者別に、同時に撮影した
複数の画像を表示する表示装置と、 上記各々の会議参加者の近くに設置され、上記会議参加
者の発言を集音する複数のマイクロフォンと、 指向性を有し、左右一対で動作する指向性スピーカと、
から構成され、 上記表示装置は、上記表示装置の法線方向と、上記表示
装置側の会議参加者の視線との成す角度に応じて、上記
複数の画像の中から、上記表示装置側の会議参加者の位
置から見えると想定される画像を、会議参加者別に同時
に表示すると共に、上記こちら側の会議参加者と、上記
表示装置に映される相手側の会議参加者の画像とで構成
される仮想空間において、上記こちら側のカメラを、相
手側の会議参加者の存在する仮想位置近傍に配置する一
方、上記こちら側の左右一対の指向性スピーカの音量を
制御して、音像位置を上記仮想空間内の相手側発言者の
仮想位置に一致させ、離れた場所に居る会議参加者が、
あたかも同じ場所に居るような感覚を起こさせることを
特徴とするテレビ会議システム。1. A method of simultaneously photographing a plurality of conference participants on both sides from a virtual position where a plurality of conference participants on a remote site located at a remote site are present on both sides of the conference participants. Cameras and multiple remote conference participants from the virtual location where multiple local conference participants are present, and multiple remote cameras simultaneously capturing each of the above conference participants A plurality of microphones installed near each of the above-mentioned conference participants and collecting the speeches of the above-mentioned conference participants; Sex speaker,
The display device, the normal direction of the display device, according to the angle between the line of sight of the meeting participant on the display device side, from among the plurality of images, the display device side conference An image assumed to be visible from the position of the participant is displayed simultaneously for each conference participant, and is configured by the above-mentioned conference participant and the image of the other party to be displayed on the display device. In the virtual space, the near-side camera is arranged near the virtual position where the conference participant on the other side exists, while controlling the sound volume of the pair of left and right directional speakers on the near side to adjust the sound image position. Matching the virtual position of the other speaker in the virtual space, the conference participant
A video conferencing system that creates the sensation of being in the same place.
備えたことを特徴とする請求項１記載のテレビ会議シス
テム。2. The video conference system according to claim 1, wherein said display device includes a lenticular lens.
とを特徴とする請求項１記載のテレビ会議システム。3. The video conference system according to claim 1, wherein the display device includes a hologram.
に居る複数の相手側の会議参加者がこちら側に居る仮想
した位置から、上記双方の会議参加者別に、同時に撮影
する複数のカメラと、 複数の相手側の会議参加者を、複数のこちら側の会議参
加者がその場に居ると仮想した位置から、上記双方の会
議参加者別に、同時に複数の相手側カメラで撮影した画
像を、こちら側の会議参加者別に投影する複数の投影機
と、 上記投影機から投影される画像を反射する窮孔を有する
膜と、その膜の光入射側に設けられた光の入射方向と略
同じ方向に、光を出射する反射ビーズとから成るスクリ
ーンと、 上記会議参加者の近くに設置され、上記会議参加者の発
言を集音する複数のマイクロフォンと、 指向性を有し、左右一対で動作する指向性スピーカと、
から構成され、 上記こちら側の会議参加者と、上記複数の投影機から、
上記スクリーンに映される複数の相手側の会議参加者の
画像とで構成される仮想空間において、上記こちら側の
カメラは相手側の会議参加者の存在する仮想位置近傍に
配置する一方、上記こちら側の一対の指向性スピーカの
音量を制御して、音像位置を仮想空間内の相手側発言者
の位置に一致させ、離れた場所に居る会議参加者が、あ
たかも同じ場所に居るような感覚を起こさせることを特
徴とするテレビ会議システム。4. A plurality of conference participants on the same side are simultaneously photographed for each of the two conference participants from a virtual position where a plurality of remote conference participants are on the near side. Cameras and images of multiple conference participants at the same time for each of the two conference participants from a virtual position where multiple local conference participants are present. A, a plurality of projectors that project for each conference participant on this side, a film having a hole that reflects an image projected from the projector, and an incident direction of light provided on the light incident side of the film. A screen composed of reflective beads for emitting light in substantially the same direction; a plurality of microphones installed near the conference participant for collecting the speech of the conference participant; Directional speakers that work with ,
From the conference participants on the near side and the projectors,
In the virtual space composed of a plurality of images of the conference participants on the other side displayed on the screen, the camera on the near side is arranged near the virtual position where the conference participants on the other side exist, while Control the volume of the pair of directional loudspeakers on the side to match the sound image position with the position of the other speaker in the virtual space, so that the conferees in a remote location feel as if they are in the same location. A video conferencing system characterized by waking up.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9261510A JPH11103499A (en) | 1997-09-26 | 1997-09-26 | Video conference system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9261510A JPH11103499A (en) | 1997-09-26 | 1997-09-26 | Video conference system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11103499A true JPH11103499A (en) | 1999-04-13 |
Family
ID=17362914
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP9261510A Pending JPH11103499A (en) | 1997-09-26 | 1997-09-26 | Video conference system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11103499A (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005315994A (en) * | 2004-04-27 | 2005-11-10 | Ginga Net:Kk | Lecture device |
| JP2011215701A (en) * | 2010-03-31 | 2011-10-27 | Zenrin Datacom Co Ltd | Event participation support system and event participating support server |
| US9131109B2 (en) | 2013-03-11 | 2015-09-08 | Ricoh Company, Limited | Information processing device, display control system, and computer program product |
| US9473741B2 (en) | 2012-03-19 | 2016-10-18 | Ricoh Company, Limited | Teleconference system and teleconference terminal |
-
1997
- 1997-09-26 JP JP9261510A patent/JPH11103499A/en active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005315994A (en) * | 2004-04-27 | 2005-11-10 | Ginga Net:Kk | Lecture device |
| JP2011215701A (en) * | 2010-03-31 | 2011-10-27 | Zenrin Datacom Co Ltd | Event participation support system and event participating support server |
| US9473741B2 (en) | 2012-03-19 | 2016-10-18 | Ricoh Company, Limited | Teleconference system and teleconference terminal |
| US9131109B2 (en) | 2013-03-11 | 2015-09-08 | Ricoh Company, Limited | Information processing device, display control system, and computer program product |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8947500B1 (en) | Telepresence camera system | |
| US8692861B2 (en) | Telepresence system, telepresence method, and video collection device | |
| US8319819B2 (en) | Virtual round-table videoconference | |
| US6798441B2 (en) | Teleconference system with personal presence cells | |
| US8289367B2 (en) | Conferencing and stage display of distributed conference participants | |
| US9330589B2 (en) | Systems for facilitating virtual presence | |
| KR101856629B1 (en) | A studio and a system for life-size videoconferencing | |
| US11317057B2 (en) | Advanced telepresence environments | |
| WO2003098942A1 (en) | Information processing apparatus, information processing system, and dialogist displaying method | |
| US6643377B1 (en) | Audio output system and method therefor | |
| US9270933B1 (en) | System and method for face-to-face video communication | |
| US20220247971A1 (en) | Virtual Digital Twin Videoconferencing Environments | |
| JPH10145763A (en) | Conference system | |
| JP2005510142A5 (en) | ||
| US20230231970A1 (en) | Device for displaying images, and use of a device of this type | |
| JP2005510142A (en) | Modular audio-visual system that integrates local scenes with remote scenes | |
| JP2005510142A6 (en) | Modular audio-visual system that integrates local scenes with remote scenes | |
| WO2018228414A1 (en) | Video conference system utilizing transparent screen | |
| US7190388B2 (en) | Communication terminal and system | |
| JPH11103499A (en) | Video conference system | |
| JPH11234640A (en) | Communication control system | |
| CN213693932U (en) | Video conference system based on transparent display | |
| JP2002027419A (en) | Image terminal device and communication system using the same | |
| JP3431698B2 (en) | Display device and video display system | |
| JP2016072844A (en) | Video system |