JPH11187302A - Video telephone conference system and image forming method used therefor - Google Patents

Video telephone conference system and image forming method used therefor

Info

Publication number
JPH11187302A
JPH11187302A JP9353601A JP35360197A JPH11187302A JP H11187302 A JPH11187302 A JP H11187302A JP 9353601 A JP9353601 A JP 9353601A JP 35360197 A JP35360197 A JP 35360197A JP H11187302 A JPH11187302 A JP H11187302A
Authority
JP
Japan
Prior art keywords
signal
unit
conference system
camera
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP9353601A
Other languages
Japanese (ja)
Inventor
Kazuo Okamoto
和雄 岡本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP9353601A priority Critical patent/JPH11187302A/en
Publication of JPH11187302A publication Critical patent/JPH11187302A/en
Pending legal-status Critical Current

Links

Landscapes

  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To grasp position relation between the lens of an image pickup camera and a subject where a signal generating device for generating signals is mounted by comparing the strength of the signals detected by two sensors in two directions, that is, the vertical and the horizontal ones. SOLUTION: The upper right sensor 3a, the upper left sensor 3b and the lower left sensor 3c are fixed on the same plane of the image pickup camera 4 so as to be mutually at equal distance with respect to the center of the lens of the camera 4. A microcontroller part 8 judges that the upper right sensor 3a is more close to an infrared-ray signal generating device 5 than the upper left one 3b and the lower left one 3c when the strength of an infrared-ray signal which is detected by the upper right sensor 3a is larger than those detected by the sensors 3b and 3c in the horizontal direction. The microcontroller part 8 outputs a driving signal for driving the camera part 2 to the direction of the sensor with the detected larger strength to a control part 9. Thus, the camera part 2 is moved to a position where the strength detected by the respective sensors become equal so as to photograph the subject.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、双方向のデータ通
信が可能な通信回線と当該通信回線により接続された複
数の端末装置とを備えたテレビ電話会議システム、及び
それに用いられる画像形成方法に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a videophone conference system having a communication line capable of bidirectional data communication and a plurality of terminal devices connected by the communication line, and an image forming method used in the system. .

【0002】[0002]

【従来の技術】近年、コンピュータ技術とデジタル技術
の進歩に伴って、テレビカメラや撮像素子を含むカメラ
のインテリジェント化が進み、さらにこれらのカメラに
より撮影した光学像をデジタル形式の映像信号に変換
し、多種多様な用途に応じて変換したデジタルデータを
蓄積、処理することが行われている。一方、テレビ放送
と通信とを融合したテレビ放送システムに代表されるよ
うに、デジタルデータ化した動画像や静止画像を含む映
像信号、及び音声信号を既存の通信回線を利用してイン
タラクティブにデータ通信を行うことが確立されてい
る。テレビ電話会議システムは、上述のような技術を基
礎として構築されたシステムであり、例えば2つの地点
(場所)の間で会議を行うためのシステムである。詳細
に言えば、テレビ電話会議システムは、映像及び音声の
入出力装置を備えた複数の端末装置を通信回線により接
続し、それら端末装置の間で映像信号、及び音声信号の
送受信を行う。そして、テレビ電話会議システムは、映
像及び音声の再生を行い、それらの端末装置が設置され
た場所の間での会議を進める。尚、このようなテレビ電
話会議システムに用いられる通信回線は、有線方式や無
線方式に限定されるものではなく、例えば光ケーブルや
デジタル放送衛星などを用いた電話回線、またはLAN
(Local Area Network)、あるいは類似のコンピュータ
ネットワークにより構成されている。従来のテレビ電話
会議システムには、専用の通信回線を用いたテレビ電話
会議システム、PC(パーソナルコンピュータ)を使用
したテレビ電話会議システム、あるいは携帯端末を使用
したテレビ電話会議システムなどが知られている。
2. Description of the Related Art In recent years, with the advancement of computer technology and digital technology, television cameras and cameras including image pickup devices have become more intelligent, and optical images taken by these cameras are converted into digital video signals. 2. Description of the Related Art Digital data converted according to various uses is stored and processed. On the other hand, as represented by a television broadcasting system that combines television broadcasting and communication, video signals and audio signals including moving images and still images that have been converted into digital data are interactively communicated using existing communication lines. It has been established to do. The video conference system is a system constructed on the basis of the above-described technology, and is, for example, a system for holding a conference between two points (locations). More specifically, the video conference system connects a plurality of terminal devices provided with video and audio input / output devices via a communication line, and transmits and receives video signals and audio signals between the terminal devices. Then, the video conference system reproduces the video and the audio, and advances the conference between the places where the terminal devices are installed. The communication line used in such a video conference system is not limited to a wired system or a wireless system, and may be, for example, a telephone line using an optical cable or a digital broadcasting satellite, or a LAN.
(Local Area Network) or a similar computer network. As a conventional video conference system, a video conference system using a dedicated communication line, a video conference system using a PC (personal computer), a video conference system using a portable terminal, and the like are known. .

【0003】ここで、第1の従来例のテレビ電話会議シ
ステムに用いられた端末装置について、図10を参照し
て具体的に説明する。図10は、第1の従来例のテレビ
電話会議システムでの端末装置の構成を示すブロック図
である。図10において、第1の従来例のテレビ電話会
議システムは、一の端末装置のカメラ部75により撮
影、形成した映像、例えば会議の映像を音声とともに図
示しない通信回線によって他の端末装置に転送し、他の
端末装置にて再生、表示することにより会議の模様を聞
き手、または視聴者に伝えるものである。同図に示すよ
うに、この従来例での端末装置は、手元操作部70、前
記手元操作部70から指示信号を受信するコンソールパ
ネル71、前記コンソールパネル71に接続され、コン
ソールパネル71からの指示信号に基づいてカメラ部7
5での移動量を計算し、駆動信号として出力するマイク
ロコントローラ部72、前記マイクロコントローラ部7
2からの駆動信号を入力して、制御信号を出力する制御
部73、制御部73からの制御信号に基づいてカメラ部
75を駆動するアクチュエータ74、及び話し手などの
被写体を撮影するカメラ部75を備えている。
[0003] Here, a terminal device used in the video conference system of the first conventional example will be specifically described with reference to FIG. FIG. 10 is a block diagram showing a configuration of a terminal device in the video conference system of the first conventional example. In FIG. 10, a video conference system according to a first conventional example transfers an image captured and formed by a camera unit 75 of one terminal device, for example, a video of a conference together with audio to another terminal device via a communication line (not shown). This is to convey to the listener or the viewer the pattern of the conference by reproducing and displaying the same on another terminal device. As shown in FIG. 1, the terminal device in the conventional example includes a hand operation unit 70, a console panel 71 that receives an instruction signal from the hand operation unit 70, and is connected to the console panel 71. Camera unit 7 based on signal
A microcontroller unit 72 for calculating the amount of movement at 5 and outputting it as a drive signal;
2, a control unit 73 that receives a drive signal from the control unit 2 and outputs a control signal, an actuator 74 that drives a camera unit 75 based on the control signal from the control unit 73, and a camera unit 75 that captures a subject such as a speaker. Have.

【0004】手元操作部70は、話し手、またはカメラ
部75を操作するカメラオペレータが所持し、それらの
操作者がカメラ部75のレンズ(図示せず)のアングル
及びズームを遠隔操作するための指示信号を出力する。
具体的には、指示信号に応じて、カメラ部75は、その
撮影方向が図の矢印”75up”、”75dn”で示し
た上、下方向、図の矢印”75lt”、”75rt”で
示した左、右方向、及び図の矢印”75zh”、”75
zb”で示した被写体とカメラ部75とを結ぶズームの
方向に駆動される。尚、指示信号は、専用ケーブルを用
いた有線、あるいは赤外線信号などの無線によってコン
ソールパネル71に出力される。カメラ部75は、撮影
した光学像をデジタルデータに変換して、図示しない通
信回線を用いて他の端末装置に出力する。このことによ
り、カメラ部75によって形成された映像が他の端末装
置にて再生、表示される。このように、第1の従来例の
テレビ電話会議システムでは、話し手、またはカメラオ
ペレータが手元操作部70を用いてカメラ部75の遠隔
操作を行い、聞き手側の端末装置に表示する映像を変更
する。
[0004] The hand operation unit 70 is carried by a speaker or a camera operator who operates the camera unit 75, and an instruction for those operators to remotely control the angle and zoom of a lens (not shown) of the camera unit 75. Output a signal.
More specifically, in response to the instruction signal, the camera unit 75 has its shooting direction indicated by arrows “75up” and “75dn” in the figure, and upward and downward, and arrows “75lt” and “75rt” in the figure. Left, right, and arrows "75zh", "75"
The camera is driven in a zooming direction connecting the subject indicated by zb ″ to the camera unit 75. The instruction signal is output to the console panel 71 by wire using a dedicated cable or wirelessly such as an infrared signal. The unit 75 converts the photographed optical image into digital data and outputs the digital data to another terminal device using a communication line (not shown), whereby the image formed by the camera unit 75 is transmitted to the other terminal device. As described above, in the video conference system of the first conventional example, the speaker or the camera operator remotely controls the camera unit 75 using the local operation unit 70, and transmits the remote control to the terminal device on the listener side. Change the image to be displayed.

【0005】次に、第2の従来例のテレビ電話会議シス
テムについて図11を参照して具体的に説明する。図1
1は、第2の従来例のテレビ電話会議システムの構成を
示すブロック図である。この第2の従来例は、第1の従
来例のものと異なり、他の端末装置で視聴している聞き
手が指示信号を通信回線を経てカメラ部に出力、転送し
て、聞き手が所望する撮影方向、ズームにより被写体を
撮影するようカメラ部を駆動する。尚、以下の説明で
は、第1の従来例のものと異なる構成についてのみ説明
し、図10に示した第1の従来例のものと同一の構成に
は同一の符号を付してその重複した説明は省略する。図
11に示すように、この従来例の端末装置には、カメラ
部75の撮像カメラ75’からの映像信号と、マイク、
または類似装置により構成された音声入力装置76から
の音声信号とを入力し、それらの映像信号及び音声信号
のデータに所定のデータ処理を行う送信信号処理部7
7、前記送信信号処理部77からの出力データにプロト
コル変換を施す送信データ変換部78、及び前記送信デ
ータ変換部78からの出力データを通信回線80を介し
て他の端末装置に出力する送信部79が設けられてい
る。送信信号処理部77でのデータ処理には、公知のデ
ータ圧縮技法に基づいて入力したデータを圧縮するデー
タの圧縮処理、及びデータの順番を並べ替えるデータの
並べ替え処理が含まれている。
Next, a second conventional video conference system will be specifically described with reference to FIG. FIG.
FIG. 1 is a block diagram showing a configuration of a video conference system according to a second conventional example. The second conventional example is different from the first conventional example in that a listener who is watching on another terminal device outputs an instruction signal to a camera unit via a communication line and transfers the instruction signal to the camera unit to obtain a desired image. The camera unit is driven so as to photograph the subject by the direction and the zoom. In the following description, only the configuration different from that of the first conventional example will be described, and the same components as those of the first conventional example shown in FIG. Description is omitted. As shown in FIG. 11, a video signal from an imaging camera 75 'of a camera unit 75, a microphone,
Alternatively, a transmission signal processing unit 7 which receives an audio signal from an audio input device 76 constituted by a similar device and performs predetermined data processing on the data of the video signal and the audio signal.
7. A transmission data conversion unit 78 that performs protocol conversion on output data from the transmission signal processing unit 77, and a transmission unit that outputs output data from the transmission data conversion unit 78 to another terminal device via a communication line 80. 79 are provided. The data processing in the transmission signal processing unit 77 includes a data compression process for compressing input data based on a known data compression technique, and a data rearrangement process for rearranging the order of data.

【0006】さらに、この従来例の端末装置は、他の端
末装置の送信部から送信された出力データを通信回線8
0を介して受信する受信部81、前記受信部81からの
受信データにプロトコル変換を施す受信データ変換部8
2、及び前記受信データ変換部82からの出力データを
入力し所定のデータ処理を施す受信信号処理部83を備
えている。受信信号処理部83でのデータ処理には、入
力したデータを伸張するデータの伸張処理、及びデータ
を正しい順番に並べ替えるデータの並べ替え処理が含ま
れている。また、受信信号処理部83は、CRT、PC
のディスプレイ、または類似装置により構成された映像
表示装置84、スピーカにより構成された音声出力装置
85、及びマイクロコントローラ部72に接続され、上
記のようなデータ処理を施した後、信号の種類を判別し
て、映像信号、音声信号、及び指示信号を映像表示装置
84、音声出力装置85、及びマイクロコントローラ部
72にそれぞれ出力する。
Further, in this conventional terminal device, output data transmitted from a transmission unit of another terminal device is transmitted to a communication line 8.
0, a reception data conversion unit 8 for performing protocol conversion on the reception data from the reception unit 81
2, and a reception signal processing unit 83 which receives output data from the reception data conversion unit 82 and performs predetermined data processing. The data processing in the reception signal processing unit 83 includes data expansion processing for expanding input data, and data rearrangement processing for rearranging data in a correct order. Further, the reception signal processing unit 83 includes a CRT, a PC,
Is connected to a video display device 84 composed of a display or a similar device, an audio output device 85 composed of a speaker, and the microcontroller unit 72, and performs the data processing as described above to determine the type of signal. Then, the video signal, the audio signal, and the instruction signal are output to the video display device 84, the audio output device 85, and the microcontroller unit 72, respectively.

【0007】次に、この第2の従来例のテレビ電話会議
システムの動作について説明する。まず、話し手側の一
の端末装置から聞き手側の他の端末装置に話し手側の映
像、及び音声を伝達する動作について説明する。話し手
側に設置された端末装置は、その撮像カメラ75’によ
って取り込んだ映像信号を送信信号処理部77に出力す
る。送信信号処理部77は、撮像カメラ75’、及び音
声入力装置76からそれぞれ入力した映像信号、及び音
声信号のデータにデータの圧縮処理等を施して、送信デ
ータ変換部78に出力する。送信データ変換部78は、
後段の通信回線80でデータ通信を行うのに適した形式
に変換するプロトコル変換を入力したデータに施し、送
信部79に出力する。送信部79は、聞き手側に設けら
れた端末装置の受信部に映像信号、及び音声信号のデー
タを転送する。このことにより、聞き手側の端末装置に
おいて、その映像表示装置、及び音声出力装置が、話し
手側からの映像、及び音声をそれぞれ再生し表示、発音
する。
Next, the operation of the second conventional video telephone conference system will be described. First, an operation of transmitting a video and a voice of the speaker from one terminal device of the speaker to another terminal device of the listener will be described. The terminal device installed on the speaker side outputs the video signal captured by the imaging camera 75 ′ to the transmission signal processing unit 77. The transmission signal processing unit 77 performs data compression processing or the like on the video signal and audio signal data input from the imaging camera 75 ′ and the audio input device 76, respectively, and outputs the data to the transmission data conversion unit 78. The transmission data conversion unit 78
The input data is subjected to protocol conversion for conversion into a format suitable for performing data communication through the communication line 80 at the subsequent stage, and the result is output to the transmission unit 79. The transmission unit 79 transfers the data of the video signal and the audio signal to the reception unit of the terminal device provided on the listener side. Thus, in the terminal device on the listener side, the video display device and the audio output device reproduce, display, and sound the video and audio from the speaker side, respectively.

【0008】次に、聞き手が話し手側の撮像カメラ7
5’を駆動して、所望の映像を表示させる動作について
説明する。この場合、聞き手は端末装置を動作して、そ
の端末装置の送信部から通信回線80を介して指示信号
のデータを話し手側の端末装置の受信部81に出力す
る。受信部81は、入力した指示信号のデータを受信デ
ータ変換部82に出力する。受信データ変換部82は、
当該端末装置内でのデータ処理を行うのに適した形式に
変換するプロトコル変換を入力したデータに施し、受信
信号処理部83に出力する。受信信号処理部83は、入
力したデータにデータの伸張処理等を施した後、指示信
号としてマイクロコントローラ部72に出力する。マイ
クロコントローラ部72が入力した指示信号は、図10
に示した第1の従来例のものと同様に、制御部73、及
びアクチュエータ74を経てカメラ部75に伝えられ、
撮像カメラ75’は聞き手が所望する撮影方向、及びズ
ームに一致するように駆動される。このように、第2の
従来例のテレビ電話会議システムは、聞き手が端末装置
を動作して通信回線80を用いたデータ通信を行うこと
によって、話し手側のカメラ部75の遠隔操作を行うこ
とができ、聞き手が所望する映像に変更することができ
る。
[0008] Next, the listener is the imaging camera 7 on the speaker side.
An operation of driving 5 ′ to display a desired image will be described. In this case, the listener operates the terminal device, and outputs the data of the instruction signal from the transmission unit of the terminal device via the communication line 80 to the reception unit 81 of the terminal device on the speaker side. The receiving unit 81 outputs the data of the input instruction signal to the received data converting unit 82. The reception data conversion unit 82
The input data is subjected to protocol conversion for converting the data into a format suitable for performing data processing in the terminal device, and is output to the reception signal processing unit 83. The received signal processing unit 83 performs a data decompression process or the like on the input data, and then outputs the instruction data to the microcontroller unit 72 as an instruction signal. The instruction signal input by the microcontroller unit 72 is shown in FIG.
Is transmitted to the camera unit 75 via the control unit 73 and the actuator 74, similarly to the first conventional example shown in FIG.
The imaging camera 75 'is driven so as to match the imaging direction and zoom desired by the listener. As described above, in the video teleconferencing system of the second conventional example, the listener operates the terminal device to perform data communication using the communication line 80, thereby performing remote control of the camera unit 75 on the speaker side. It is possible to change to a video desired by the listener.

【0009】次に、第3の従来例のテレビ電話会議シス
テムについて説明する。この第3の従来例は、CCD
(Charge Coupled Device)センサやCMOS(Complem
entary Metal Oxide Semiconductor)センサなどの撮像
センサを用いて、静止画を撮影するカメラ部を構成した
ものである。尚、以下の説明では、CCDセンサを用い
たものについて説明する。また、カメラ部以外の構成
は、上述の第2の従来例のものと同様であるので、その
重複した説明は省略する。まず、図12、図13の
(a)、及び図13の(b)を参照して、CCDセンサ
について具体的に説明する。図12は、第3の従来例の
テレビ電話会議システムに用いられるCCDセンサのセ
ルの配列例を示す構造図である。図13の(a)は図1
2に示したCCDセンサのセルの構成を示す平面図であ
り、図13の(b)は図13の(a)のXIIIb−XIIIb
線で断面をとった断面図である。図12に示すように、
CCDセンサ86は、縦方向及び横方向にそれぞれ配列
したM×L個(M、Lは4の倍数)のセル86pにより
構成されている。セル86pは、イエロー、マゼンダ、
シアン、及びグリーンの4色のそれぞれの色の入射光を
検知する。尚、検知する入射光の色は、各セル86p内
に設けられ、特定波長の光のみを通過する補色カラーフ
ィルタ88(図13の(b))により定まる。また、上
述の4色の入射光をそれぞれ検知するセル86y,86
m,86c,86gは、互いに隣り合うように配列さ
れ、隣り合う4つのセル86y,86m,86c,86
gを1組として、1つの画素が構成される。このため、
M×L個のセル86pを縦横に配列したCCDセンサ8
6の場合、(M−1)×(L−1)個の画素が縦方向及
び横方向に構成され、1つの静止画面が形成される。
尚、図12の斜線部分sは、各セル86pでの有効面
積、つまり後述の受光部90aに入射する光を受ける有
効部分の面積を示すものであり、その総和有効面積Sに
よってCCDセンサ86の解像度が規定される。
Next, a third conventional video conference system will be described. This third conventional example uses a CCD
(Charge Coupled Device) sensors and CMOS (Complem
An image sensor, such as an entary metal oxide semiconductor (sensor) sensor, is used to configure a camera unit that captures a still image. In the following description, an example using a CCD sensor will be described. The configuration other than the camera unit is the same as that of the above-described second conventional example, and a duplicate description thereof will be omitted. First, the CCD sensor will be specifically described with reference to FIGS. 12, 13A and 13B. FIG. 12 is a structural diagram showing an example of an arrangement of cells of a CCD sensor used in a third conventional video conference system. FIG. 13A shows FIG.
FIG. 13B is a plan view showing the configuration of the cell of the CCD sensor shown in FIG. 2, and FIG. 13B shows XIIIb-XIIIb in FIG.
It is sectional drawing which took the cross section by the line. As shown in FIG.
The CCD sensor 86 is composed of M × L cells (M and L are multiples of 4) 86p arranged in the vertical and horizontal directions, respectively. Cell 86p is yellow, magenta,
The incident light of each of the four colors of cyan and green is detected. The color of the incident light to be detected is determined by the complementary color filter 88 (FIG. 13 (b)) provided in each cell 86p and passing only light of a specific wavelength. Cells 86y and 86 for detecting the above-mentioned four colors of incident light, respectively.
m, 86c, 86g are arranged so as to be adjacent to each other, and four adjacent cells 86y, 86m, 86c, 86
One pixel is configured with g as one set. For this reason,
CCD sensor 8 in which M × L cells 86p are arranged vertically and horizontally
In the case of 6, (M−1) × (L−1) pixels are configured in the vertical direction and the horizontal direction, and one still screen is formed.
The shaded portion s in FIG. 12 indicates the effective area of each cell 86p, that is, the area of the effective portion that receives light incident on the light receiving portion 90a described later. Resolution is specified.

【0010】図13の(a)、及び図13の(b)に示
すように、セル86pは、光の入射側から順番に配置さ
れたマイクロレンズ87、補色カラーフィルタ88、遮
光膜89、及びフォトダイオード90を備えている。フ
ォトダイオード90は、光を受光する受光部90a、p
形の半導体層90b、及びn形の半導体基板90cを有
している。遮光膜89は、マイクロレンズ87と補色カ
ラーフィルタ88とを通過した光のみを受光部90aに
入射するためのものであり、それ以外の光が受光部90
aに入射するのを防止する。このことにより、各セル8
6pは対応する色の入射光だけを検知することができ
る。このように構成されたCCDセンサ86では、周知
のように、各セル86pにて検知した対応する色の入射
光の検知信号に所定の信号処理を施すことにより、(M
−1)×(L−1)個の画素を有する静止画像を形成し
ている。また、静止画像を形成する際、上述の各画素で
の輝度Y、及び色差R−Yを下記の(1)式、及び
(2)式を用いてそれぞれ計算している。尚、(1)
式、及び(2)式では、4つのセル86y,86m,8
6c,86gにそれぞれ入射したイエロー、マゼンダ、
シアン、及びグリーンの各色の入射光の光量をYe,M
g,Cy,Gで示している。また、(1)式、及び
(2)式に示すR,Bは、赤、及び青色の光の光量を示
している。
As shown in FIGS. 13A and 13B, the cell 86p is composed of a microlens 87, a complementary color filter 88, a light-shielding film 89, and a microlens 87 arranged in order from the light incident side. A photodiode 90 is provided. The photodiode 90 includes a light receiving unit 90a, p for receiving light.
It has a semiconductor layer 90b of n-type and an n-type semiconductor substrate 90c. The light-shielding film 89 is for allowing only light that has passed through the microlens 87 and the complementary color filter 88 to be incident on the light receiving portion 90a, and the other light is not incident on the light receiving portion 90a.
a. As a result, each cell 8
6p can detect only the incident light of the corresponding color. In the CCD sensor 86 configured as described above, as is well known, by performing a predetermined signal processing on the detection signal of the incident light of the corresponding color detected in each cell 86p, (M
A still image having (-1) × (L-1) pixels is formed. When a still image is formed, the luminance Y and the color difference RY at each pixel are calculated using the following equations (1) and (2). In addition, (1)
In the formula and the formula (2), the four cells 86y, 86m, 8
6c, 86g, respectively, yellow, magenta,
The amounts of incident light of cyan and green are represented by Ye, M
g, Cy and G are shown. Also, R and B shown in the equations (1) and (2) indicate the amounts of red and blue light.

【0011】 (Ye+Mg)+(Cy+G) = 2R+3G+2B Y −−(1) (Ye+Mg)−(Cy+G) = 2R−G R−Y −−(2)(Ye + Mg) + (Cy + G) = 2R + 3G + 2B Y − (1) (Ye + Mg) − (Cy + G) = 2R−G RY − (2)

【0012】次に、図14、図15の(a)、図15の
(b)、及び図15の(c)を参照して、この従来例の
カメラ部91の構成について具体的に説明する。図14
は、第3の従来例のテレビ電話会議システムに用いられ
るカメラ部の構成を示すブロック図である。図15の
(a)は図14に示した縦プリズムからの出射光を示す
説明図であり、図15の(b)は図14に示した横プリ
ズムからの出射光を示す説明図である。図15の(c)
は、図14に示したCCDセンサでの4倍の解像度を有
する静止画像の画像形成方法を示す説明図である。図1
4に示すように、カメラ部91は、CCDセンサ86、
当該CCDセンサ86にて撮影される静止画像の解像度
を変更するための横プリズム92及び縦プリズム93、
及びカメラ部91の入射レンズであるレンズ94を備え
ている。入射光は、同図に示すように、レンズ94、縦
プリズム93、及び横プリズム92の順番に通過してC
CDセンサ86に入射する。横プリズム92及び縦プリ
ズム93は、図示しないムービングコイルにより、それ
ぞれ微少角度駆動される。詳細に言えば、縦プリズム9
3は、上記ムービングコイルによって駆動され、図15
の(a)の”93r”、及び”93l”で示した2つの
異なる方向の光路を構成する。同様に、横プリズム92
は、上記ムービングコイルによって駆動され、図15の
(b)の”92u”、及び”92d”で示した2つの異
なる方向の光路を構成する。このことにより、各セル8
6pに入射する入射光は、横プリズム92、及び縦プリ
ズム93の角度変化による4通りの光路のいずれかの1
つの光路を通って各セル86pに入射される。つまり、
図15の(c)に示すように、各セル86pは、実線の
円で囲んだ部分(93l,92u)の光路を通過した入
射光だけでなく、破線の円で囲んだ部分(93r,92
u)、(93r,92d)、及び(93l,92d)の
光路を通過した入射光の入射も検知していた。このよう
に、各セル86pにおいて4通りの入射光を検知するこ
とは、上述の総和有効面積Sを4倍である4Sとしたこ
とに相当することである。この従来例のカメラ部91
は、4通りの入射光に基づいてそれぞれ撮影、形成した
4つの静止画像を重ね合わせ、既知の信号処理を行うこ
とによって、4倍の解像度を持つ静止画像を形成してい
た。このように、第3の従来例のテレビ電話会議システ
ムでは、CCDセンサ86を用い静止画像を撮影、形成
するカメラ部91を構成して、さらに解像度を変更する
ための横プリズム92、及び縦プリズム93をレンズ9
4とCCDセンサ86との間に配置し横プリズム92、
及び縦プリズム93の各々の角度を変更することによ
り、カメラ部91で撮影される静止画像の解像度を向上
していた。
Next, with reference to FIGS. 14, 15A, 15B, and 15C, the configuration of the camera section 91 of this conventional example will be specifically described. . FIG.
FIG. 11 is a block diagram showing a configuration of a camera unit used in a video conference system of a third conventional example. FIG. 15A is an explanatory diagram showing light emitted from the vertical prism shown in FIG. 14, and FIG. 15B is an explanatory diagram showing light emitted from the horizontal prism shown in FIG. (C) of FIG.
FIG. 15 is an explanatory diagram showing an image forming method of a still image having four times the resolution of the CCD sensor shown in FIG. FIG.
As shown in FIG. 4, the camera unit 91 includes a CCD sensor 86,
A horizontal prism 92 and a vertical prism 93 for changing the resolution of a still image captured by the CCD sensor 86;
And a lens 94 that is an incident lens of the camera unit 91. The incident light passes through the lens 94, the vertical prism 93, and the horizontal prism 92 in this order as shown in FIG.
The light enters the CD sensor 86. The horizontal prism 92 and the vertical prism 93 are each driven by a small angle by a moving coil (not shown). Specifically, the vertical prism 9
3 is driven by the moving coil, and FIG.
In (a), optical paths in two different directions indicated by “93r” and “93l” are formed. Similarly, the horizontal prism 92
Are driven by the moving coil, and constitute optical paths in two different directions indicated by “92u” and “92d” in FIG. 15B. As a result, each cell 8
6p is incident on one of four optical paths due to a change in angle of the horizontal prism 92 and the vertical prism 93.
The light enters each cell 86p through one optical path. That is,
As shown in FIG. 15C, each cell 86p includes not only the incident light passing through the optical path of the portion (93l, 92u) surrounded by the solid line circle, but also the portion (93r, 92) surrounded by the broken line circle.
u), (93r, 92d), and (93l, 92d), the incidence of incident light passing through the optical path was also detected. Thus, detecting four types of incident light in each cell 86p is equivalent to setting the total effective area S to 4S, which is four times as large. This conventional camera section 91
Has formed a still image having four times the resolution by superimposing four still images, each of which has been photographed and formed based on four types of incident light, and performing known signal processing. As described above, in the video conference system according to the third conventional example, the camera unit 91 for photographing and forming a still image using the CCD sensor 86 is configured, and the horizontal prism 92 and the vertical prism 92 for further changing the resolution are formed. 93 to lens 9
4 and a CCD 92 and a horizontal prism 92
By changing the angle of each of the vertical prisms 93 and the angle of the vertical prism 93, the resolution of a still image captured by the camera unit 91 is improved.

【0013】[0013]

【発明が解決しようとする課題】第1の従来例のテレビ
電話会議システムでは、話し手、及びカメラオペレータ
がカメラ部を駆動、操作していたので、これらの操作者
は、他の端末装置で視聴している聞き手のことを考えて
カメラ部を操作し撮影する必要があった。特に、話し手
がカメラ部を操作する場合、話し手は説明と撮影方向、
及びズームの変更などのカメラ部の操作を同時に行う必
要があり、話し手に課せられる負担が増大するという問
題点を生じた。第2の従来例のテレビ電話会議システム
では、話し手、または聞き手がカメラ部を遠隔操作し撮
影していた。このため、第1の従来例のものと同様に、
話し手は説明とカメラ部の操作とを同時に行う必要があ
った。また、聞き手は端末装置に表示、再生される映
像、音声を視聴しながら、カメラ部の操作を行う必要が
あった。特に、聞き手が移動する被写体、例えば話し手
をその動きに応じてカメラ部により撮影する場合、聞き
手には大きな負担がかかった。さらに、聞き手がカメラ
部を操作する場合にも、話し手がそのカメラ部による映
像を確認しながら説明を行うことも要求される場合があ
った。第3の従来例のテレビ電話会議システムでは、静
止画像の解像度を向上するために、レンズ、プリズム、
及びムービングコイル等を設ける必要があり、カメラ部
を小型化することが困難であった。さらに、横長の静止
画像、いわゆるパノラマ画や縦長の静止画像を容易に撮
影、形成することができなかった。また、上述の第1乃
至第3の従来例のテレビ電話会議システムでは、一の端
末装置のカメラ部を用いて映像表示装置の画面、例えば
CRTやPCの画面を撮影して、他の端末装置の映像表
示装置に表示する場合、他の端末装置の映像表示装置に
表示される映像の画質が低下するという問題点があっ
た。具体的には、カメラ部に撮影された映像表示装置で
のブランキング期間が1本の水平の黒いすじとして他の
端末装置の映像表示装置に表示された。
In the first conventional video telephone conference system, a speaker and a camera operator drive and operate the camera unit, so that these operators can view and listen on another terminal device. It was necessary to operate the camera unit and take a picture in consideration of the listener who was doing it. In particular, when the speaker operates the camera unit, the speaker
In addition, it is necessary to simultaneously operate the camera unit, such as changing the zoom, and the like, which causes a problem that the burden imposed on the speaker increases. In the video conference system of the second conventional example, a speaker or a listener remotely operates a camera unit to take a picture. Therefore, similar to the first conventional example,
The speaker had to perform the explanation and the operation of the camera unit at the same time. Also, the listener has to operate the camera unit while watching the video and audio displayed and reproduced on the terminal device. In particular, in the case where an image is taken by a camera unit according to the movement of a subject to which the listener moves, for example, the speaker, a heavy burden is imposed on the listener. Furthermore, even when the listener operates the camera unit, there is a case where the speaker is required to give an explanation while checking the image by the camera unit. In a third conventional video conference system, a lens, a prism,
In addition, it is necessary to provide a moving coil and the like, and it is difficult to reduce the size of the camera unit. Further, a horizontally long still image, a so-called panoramic image or a vertically long still image, cannot be easily photographed and formed. In the above-described first to third conventional video conference systems, the screen of a video display device, for example, the screen of a CRT or a PC is photographed using the camera unit of one terminal device, and the other terminal device is photographed. However, when the image is displayed on the video display device, there is a problem that the image quality of the video displayed on the video display device of another terminal device is deteriorated. Specifically, the blanking period of the video display device photographed by the camera unit was displayed on the video display device of another terminal device as one horizontal black streak.

【0014】この発明は、上記のような問題点を解決す
るためになされたものであり、カメラ部により撮影され
る被写体が移動する場合でも、カメラ部が自動的に被写
体を追尾して撮影することができ、話し手及び聞き手に
負担を与えないテレビ電話会議システム、及びそれに用
いられる画像形成方法を提供することを目的とする。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-described problems. Even when a subject to be photographed by a camera moves, the camera automatically tracks the subject to photograph. It is an object of the present invention to provide a video conference system capable of giving a burden to a speaker and a listener, and an image forming method used for the video conference system.

【0015】[0015]

【課題を解決するための手段】本発明のテレビ電話会議
システムは、通信回線により接続された複数の端末装置
を備えたテレビ電話会議システムであって、前記複数の
各端末装置は、被写体を撮影するカメラ部、前記カメラ
部の方向を駆動するアクチュエータ、前記被写体に取り
付けられた信号発生装置、前記信号発生装置からの信号
を検知するセンサ、及び前記センサの検知結果に基づい
て、カメラ部を駆動する制御信号をアクチュエータに出
力する駆動制御部を備えている。このように構成するこ
とにより、被写体が移動する場合でも、ユーザが操作す
ることなく、カメラ部が自動的に被写体を追尾して撮影
することができる。
A video telephone conference system according to the present invention is a video telephone conference system including a plurality of terminal devices connected by a communication line, wherein each of the plurality of terminal devices captures an object. A camera unit, an actuator that drives the direction of the camera unit, a signal generator attached to the subject, a sensor that detects a signal from the signal generator, and a camera unit that is driven based on a detection result of the sensor. And a drive control unit for outputting a control signal to the actuator to the actuator. With this configuration, even when the subject moves, the camera section can automatically track and shoot the subject without any operation by the user.

【0016】別の観点による発明のテレビ電話会議シス
テムは、前記端末装置が、外部から映像信号及び音声信
号を入力する外部入力回路部、前記カメラ部と外部入力
回路部とに接続され、カメラ部から出力された映像信号
と外部入力回路部からの映像信号との同期をとり、駆動
制御部からの切り換え信号に基づいて、カメラ部、及び
外部入力回路部のいずれか一方からの映像信号を出力す
るスイッチ部、及び前記通信回線に接続され、スイッチ
部からの出力データを他の端末装置に送信し、他の端末
装置からの出力データを受信する送受信部を備えてい
る。このように構成することにより、外部入力回路部に
接続された外部の映像表示装置をカメラ部を用いて撮影
した場合でも、カメラ部が外部の映像表示装置のブラン
キング期間を撮影するのを防止することができる。
According to another aspect of the invention, there is provided a video conference system wherein the terminal device is connected to an external input circuit for inputting a video signal and an audio signal from the outside, the camera and the external input circuit, and Synchronizes the video signal output from the external control circuit with the video signal output from the external input circuit unit, and outputs the video signal from one of the camera unit and the external input circuit unit based on the switching signal from the drive control unit. And a transmission / reception unit connected to the communication line for transmitting output data from the switch unit to another terminal device and receiving output data from another terminal device. With this configuration, even when an external video display device connected to the external input circuit unit is captured using the camera unit, the camera unit prevents the external video display device from capturing a blanking period. can do.

【0017】別の観点による発明のテレビ電話会議シス
テムは、前記端末装置が、前記信号発生装置と異なる信
号を発生する別の信号発生装置、及び前記カメラ部から
の映像信号を処理して、別の信号発生装置からの信号を
検出する信号処理部を備えている。このように構成する
ことにより、被写体とカメラ部とを結ぶ方向でカメラ部
を駆動することができ、カメラ部のズームを最適、かつ
自動的に変更することができる。
According to another aspect of the present invention, there is provided a video conference system wherein the terminal device processes another signal generating device for generating a signal different from the signal generating device and a video signal from the camera section, and And a signal processing unit for detecting a signal from the signal generator. With this configuration, the camera unit can be driven in the direction connecting the subject and the camera unit, and the zoom of the camera unit can be optimally and automatically changed.

【0018】別の観点による発明のテレビ電話会議シス
テムは、前記端末装置が、被写体から発生する熱、及び
被写体からの特定の色の波長の少なくとも一方を検知す
るセンサを備えている。このように構成することによ
り、信号発生装置を用いることなく、被写体を追尾して
自動的に撮影することができる。
According to another aspect of the invention, the terminal device includes a sensor for detecting at least one of heat generated from the subject and a wavelength of a specific color from the subject. With this configuration, the subject can be tracked and automatically photographed without using a signal generator.

【0019】別の観点による発明のテレビ電話会議シス
テムは、前記アクチュエータが、0.1゜±0.01゜の
精度にてカメラ部の方向を駆動する高精度アクチュエー
タにより構成されている。このように構成することによ
り、解像度の向上、及び横長や縦長の静止画像を容易に
形成することができる。
According to another aspect of the invention, the actuator comprises a high-precision actuator that drives the direction of the camera unit with an accuracy of 0.1 {± 0.01}. With this configuration, it is possible to improve the resolution and easily form a horizontally long or vertically long still image.

【0020】本発明のテレビ電話会議システムに用いら
れる画像形成方法は、通信回線により接続された複数の
端末装置を備えたテレビ電話会議システムに用いられる
画像形成方法であって、被写体に取り付けた信号発生装
置からの信号を少なくとも2つのセンサにより検知する
工程、前記少なくとも2つのセンサにより検知したそれ
ぞれの信号の強度を比較する工程、及び前記比較する工
程での比較結果に基づいて、被写体とカメラ部との位置
関係を認識して、カメラ部の方向を駆動する工程を備え
ている。このように構成することにより、被写体が移動
する場合でも、ユーザが操作することなく、カメラ部が
自動的に被写体を追尾して撮影することができる。
An image forming method used in the video conference system according to the present invention is an image forming method used in a video conference system having a plurality of terminal devices connected by a communication line, and includes a signal attached to a subject. Detecting the signal from the generator by at least two sensors, comparing the intensities of the respective signals detected by the at least two sensors, and based on the comparison result in the comparing step, the subject and the camera unit And recognizing the positional relationship between the two and driving the direction of the camera unit. With this configuration, even when the subject moves, the camera section can automatically track and shoot the subject without any operation by the user.

【0021】別の観点による発明のテレビ電話会議シス
テムに用いられる画像形成方法は、通信回線により接続
された複数の端末装置を備えたテレビ電話会議システム
に用いられる画像形成方法であって、所望の解像度に基
づいて、静止画像を複数個の画面分に分割する工程、前
記分割する工程により分割した各画面に対応する被写体
の部分をカメラ部により撮影する工程、及び前記撮影す
る工程で撮影した被写体の各部分の映像信号を合成し
て、1つの静止画像を形成する工程を備えている。この
ように構成することにより、カメラ部を大型化すること
なく、形成する静止画像の解像度を容易に向上すること
ができる。
An image forming method used in a video conference system according to another aspect of the present invention is an image forming method used in a video conference system having a plurality of terminal devices connected by a communication line. A step of dividing a still image into a plurality of screens based on a resolution, a step of photographing a part of a subject corresponding to each screen divided by the dividing step by a camera unit, and a subject photographed in the photographing step And forming one still image by synthesizing the video signals of the respective portions. With this configuration, the resolution of the still image to be formed can be easily improved without increasing the size of the camera unit.

【0022】別の観点による発明のテレビ電話会議シス
テムに用いられる画像形成方法は、通信回線により接続
された複数の端末装置を備えたテレビ電話会議システム
に用いられる画像形成方法であって、カメラ部を一の方
向で水平に駆動するとともに、その駆動中に被写体を複
数回カメラ部により撮影する工程、及び前記撮影する工
程で撮影した被写体の各部分の映像信号を合成して、1
つの静止画像を形成する工程を備えている。このように
構成することにより、カメラ部を大型化することなく、
横長、及び縦長の静止画像を容易に形成することができ
る。
An image forming method used in a video conference system according to another aspect of the invention is an image forming method used in a video conference system having a plurality of terminal devices connected by a communication line, and includes a camera unit. Is driven horizontally in one direction, and a step of photographing the subject a plurality of times by the camera unit during the driving, and synthesizing the video signals of the respective parts of the subject photographed in the photographing step to obtain 1
Forming two still images. With such a configuration, without increasing the size of the camera unit,
Horizontal and vertical still images can be easily formed.

【0023】別の観点による発明のテレビ電話会議シス
テムに用いられる画像形成方法は、複数のカメラ部を用
いて、前記被写体の各部分の映像信号を形成することを
特徴とする。このように構成することにより、解像度の
向上、及び横長や縦長の静止画像を容易に形成すること
ができる。
An image forming method used in the video conference system according to another aspect of the invention is characterized in that a video signal of each portion of the subject is formed using a plurality of camera units. With this configuration, it is possible to improve the resolution and easily form a horizontally long or vertically long still image.

【0024】[0024]

【発明の実施の形態】以下、本発明のテレビ電話会議シ
ステムの好ましい実施例について、図面を参照しながら
説明する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A preferred embodiment of the video conference system according to the present invention will be described below with reference to the drawings.

【0025】《第1の実施例》図1は、本発明のテレビ
電話会議システムの全体構成を示すブロック図である。
図1に示すように、テレビ電話会議システムは、複数の
端末装置1とこれらの端末装置1を互いに接続した通信
回線100とにより構成されている。複数の各端末装置
1は、家庭、職場などの場所に設置され、映像、及び音
声の入出力装置と映像信号及び音声信号を含む信号のデ
ジタルデータの送受信を行うデータ処理装置などにより
構成されている(詳細は後述)。通信回線100は、光
ケーブル、電話回線、あるいはコンピュータネットワー
クなどの有線方式、あるいは衛星放送、地上無線局を利
用した無線方式のチャネルにより構成されている。各端
末装置1は、話し手や聞き手などのユーザにより操作さ
れ、通信回線100を用いた双方向のデータ通信を行う
ことにより、上述のデジタルデータを互いに転送して映
像、及び音声を再生する。このことにより、テレビ電話
会議システムは、端末装置1が設置された複数の場所を
つないで、例えば複数のユーザの間で会議を行うことを
可能とする。
<< First Embodiment >> FIG. 1 is a block diagram showing the overall configuration of a video conference system according to the present invention.
As shown in FIG. 1, the video conference system includes a plurality of terminal devices 1 and a communication line 100 connecting these terminal devices 1 to each other. Each of the plurality of terminal devices 1 is installed at a place such as a home or a work place, and is configured by a data processing device that transmits and receives video and audio input / output devices and digital data of signals including video and audio signals. (Details will be described later). The communication line 100 is configured by a channel of a cable system such as an optical cable, a telephone line, or a computer network, or a channel of a wireless system using a satellite broadcast or a terrestrial radio station. Each of the terminal devices 1 is operated by a user such as a speaker or a listener, and performs bidirectional data communication using the communication line 100, thereby transferring the above-described digital data to each other to reproduce video and audio. Thus, the video conference system enables a conference between a plurality of users, for example, by connecting a plurality of places where the terminal devices 1 are installed.

【0026】《端末装置の構成》次に、第1の実施例の
テレビ電話会議システムでの端末装置について、図2を
参照して具体的に説明する。図2は、本発明の第1の実
施例であるテレビ電話会議システムでの端末装置の構成
を示すブロック図である。図2に示すように、端末装置
1は、話し手などの被写体を撮影するカメラ部2、及び
被写体に取り付けられ、赤外線信号を所定の時間間隔で
発生する赤外線信号発生装置5を備えている。カメラ部
2は、上記赤外線信号発生装置5からの赤外線信号を検
知する赤外線センサ3、及び撮像素子あるいは類似装置
により構成され、被写体を撮影してデジタル形式の映像
信号(デジタルデータ)を出力する撮像カメラ4を有し
ている。尚、上記映像信号には、動画像及び静止画像の
ものが含まれている。また、端末装置1には、カメラ部
2を駆動する機構として、ユーザが保持する手元操作部
6、手元操作部6からの指示信号を受信するコンソール
パネル7、前記コンソールパネル7に接続され、コンソ
ールパネル7からの指示信号を入力するマイクロコント
ローラ部8、前記マイクロコントローラ部8に接続さ
れ、マイクロコントロール部8からの駆動信号を入力す
る制御部9、及び前記カメラ部2を保持し、制御部9か
らの制御信号を入力するアクチュエータ10が設けられ
ている。
<< Configuration of Terminal Device >> Next, a terminal device in the video conference system of the first embodiment will be specifically described with reference to FIG. FIG. 2 is a block diagram showing a configuration of a terminal device in the video conference system according to the first embodiment of the present invention. As shown in FIG. 2, the terminal device 1 includes a camera unit 2 for photographing a subject such as a speaker, and an infrared signal generator 5 attached to the subject and generating an infrared signal at predetermined time intervals. The camera unit 2 includes an infrared sensor 3 for detecting an infrared signal from the infrared signal generator 5 and an image sensor or similar device, and captures an image of a subject and outputs a digital video signal (digital data). It has a camera 4. The video signals include those of moving images and still images. Further, the terminal device 1 includes, as a mechanism for driving the camera unit 2, a hand operation unit 6 held by a user, a console panel 7 for receiving an instruction signal from the hand operation unit 6, and a console connected to the console panel 7. A microcontroller section 8 for inputting an instruction signal from the panel 7, a control section 9 connected to the microcontroller section 8 for inputting a drive signal from the microcontroller section 8, and a control section 9 for holding the camera section 2; An actuator 10 for inputting a control signal from the controller 10 is provided.

【0027】赤外線センサ3は、薄膜焦電型センサある
いは類似のセンサ素子により構成され、例えば3個のセ
ンサ、右上センサ3a、左上センサ3b、及び左下セン
サ3cを備えている。これらのセンサ3a,3b,3c
は、撮像カメラ4のレンズ4a(図3)の中心に対して
互いに等距離となるよう撮像カメラ4に固定され、検知
した赤外線信号の強度をマイクロコントローラ部8に出
力する。このことにより、カメラ部2は、赤外線信号発
生装置5を取り付けた被写体の動きに追従して駆動さ
れ、被写体を自動的に追尾して撮影することができる
(詳細は後述)。赤外線信号発生装置5は、GaAs赤
外ダイオード(ピーク波長、950nm)、または類似
素子を用いて構成され、例えば1次電池により1ミリ秒
毎に赤外線信号(インパルス)を発生する。赤外線信号
発生装置5は、例えば重量8g、寸法縦、横、高さがそ
れぞれ25mm,25mm,10mmの箱体状に構成さ
れ、上述のようにカメラ部2に撮影される被写体に取り
付けられている。より具体的に言えば、被写体が話し手
である場合、赤外線信号発生装置5はネクタイピンの構
造により話し手の顔近くの衣服に取り付けられる。ま
た、被写体がホワイトボード、あるいはOHP(Over H
ead Projector)のスクリーンなどである場合、赤外線
信号発生装置5は両面テープまたは磁石によりそれらの
ホワイトボードやOHPのスクリーンの中心に取り付け
られる。
The infrared sensor 3 is constituted by a thin film pyroelectric sensor or a similar sensor element, and includes, for example, three sensors, an upper right sensor 3a, an upper left sensor 3b, and a lower left sensor 3c. These sensors 3a, 3b, 3c
Are fixed to the imaging camera 4 so as to be equidistant from the center of the lens 4a (FIG. 3) of the imaging camera 4, and output the intensity of the detected infrared signal to the microcontroller unit 8. Accordingly, the camera unit 2 is driven to follow the movement of the subject to which the infrared signal generator 5 is attached, and can automatically track and photograph the subject (details will be described later). The infrared signal generator 5 is configured using a GaAs infrared diode (peak wavelength, 950 nm) or a similar element, and generates an infrared signal (impulse) every millisecond using, for example, a primary battery. The infrared signal generator 5 has a box shape with a weight of, for example, 8 g and dimensions of 25 mm, 25 mm, and 10 mm in height, width, and height, respectively, and is attached to the subject photographed by the camera unit 2 as described above. . More specifically, when the subject is a speaker, the infrared signal generator 5 is attached to clothes near the speaker's face by a tie-pin structure. If the subject is a whiteboard or OHP (Over H
In the case of an ead projector screen, the infrared signal generator 5 is attached to the center of the whiteboard or OHP screen by double-sided tape or a magnet.

【0028】手元操作部6は、ユーザがカメラ部2を遠
隔操作するための指示信号を入力する入力機器であり、
専用ケーブルを用いた有線、あるいは赤外線信号などの
無線によってコンソールパネル7に指示信号を出力す
る。また、手元操作部6を操作することにより、端末装
置1のユーザは通信回線100によって接続された他の
端末装置のカメラ部の遠隔操作、あるいは他の端末装置
のユーザにメッセージなどを送ることも可能である。さ
らに、上記カメラ部2の撮影モード、赤外線センサ3の
各センサ3a,3b,3cのバラツキの補正、撮像カメ
ラ4にて撮影される映像の画面上での中心、あるいは後
述のスイッチ部12への切り換え指示などについても、
入力、設定することができる。コンソールパネル7は、
上述の指示信号やメッセージなどを手元操作部6から受
信、入力するだけでなく、例えばキー入力部(図示せ
ず)を備え、ユーザがそれらの信号やメッセージを直接
的に入力できるよう構成されている。
The hand operation unit 6 is an input device for inputting an instruction signal for a user to remotely operate the camera unit 2.
An instruction signal is output to the console panel 7 by wire using a dedicated cable or wirelessly such as an infrared signal. By operating the hand operation unit 6, the user of the terminal device 1 can also remotely control the camera unit of another terminal device connected via the communication line 100 or send a message or the like to the user of another terminal device. It is possible. Further, the photographing mode of the camera unit 2, correction of variations of the sensors 3 a, 3 b, 3 c of the infrared sensor 3, the center of the image photographed by the photographing camera 4 on the screen, or the switch 12 For switching instructions, etc.
Can be entered and set. The console panel 7
In addition to receiving and inputting the above-mentioned instruction signals, messages, and the like from the hand operation unit 6, for example, a key input unit (not shown) is provided so that the user can directly input those signals and messages. I have.

【0029】マイクロコントローラ部8は、コンソール
パネル7からの指示信号に基づいてカメラ部2での移動
量を計算し、駆動信号として制御部9に出力する。同様
に、マイクロコントローラ部8は、後述の受信信号処理
部19等を経て入力した他の端末装置からの指示信号に
基づいてカメラ部2での移動量を計算し、駆動信号とし
て制御部9に出力する。さらに、被写体を自動的に追尾
して撮影するために、マイクロコントローラ部8は、上
述のように、赤外線センサ3の各センサ3a,3b,3
cが検知した赤外線信号の強度を入力する。マイクロコ
ントローラ部8は、入力した強度を比較することによ
り、赤外線信号発生装置5(被写体)と各センサ3a,
3b,3cとの位置関係を把握し、被写体の動きに追従
してカメラ部2を駆動し被写体を自動的に追尾して撮影
することができる。制御部9は、マイクロコントローラ
部8から駆動信号を入力して、アクチュエータ10を駆
動するための制御信号を出力する。また、制御部9は、
切り換え信号をスイッチ部12に出力して、ユーザが要
求する映像信号が出力されるようスイッチ部12を制御
する。アクチュエータ10は、制御部9からの制御信号
に基づいてカメラ部2を三次元的に駆動する。三次元的
というのは、アクチュエータ10が、カメラ部2を上下
方向、左右方向、及びカメラのレンズのズーム調整手段
(図示せず)による画角変化の方向(すなわち等価的に
被写体とカメラ部2との距離変化の)方向の3つの方向
に駆動し、撮像カメラ4のアングル(撮影方向)の二次
元的駆動と被写体とカメラ部2と間の距離の等価的変更
をする。尚、マイクロコントローラ部8及び制御部9
は、ユーザの指示、及び赤外線センサ3の検知結果に基
づいて、アクチュエータ10を用いてカメラ部2を駆動
する駆動制御部を構成するものである。また、上述の説
明では、マイクロコントローラ部8と制御部9とを別個
に構成した例について説明したが、1つのコンピュータ
を用いてマイクロコントローラ部8と制御部9とを一体
的に構成してもよい。
The microcontroller unit 8 calculates the amount of movement of the camera unit 2 based on an instruction signal from the console panel 7 and outputs the calculated amount to the control unit 9 as a drive signal. Similarly, the microcontroller unit 8 calculates the amount of movement of the camera unit 2 based on an instruction signal from another terminal device input via a later-described reception signal processing unit 19 and the like, and sends the movement amount to the control unit 9 as a drive signal. Output. Further, in order to automatically track and photograph the subject, the microcontroller unit 8 controls the sensors 3a, 3b, 3 of the infrared sensor 3 as described above.
Input the intensity of the infrared signal detected by c. The microcontroller unit 8 compares the input intensity with the infrared signal generator 5 (subject) and each sensor 3a,
By grasping the positional relationship between the camera 3b and 3c, the camera unit 2 can be driven by following the movement of the subject, and the subject can be automatically tracked and photographed. The control unit 9 receives a drive signal from the microcontroller unit 8 and outputs a control signal for driving the actuator 10. Also, the control unit 9
A switching signal is output to the switch unit 12, and the switch unit 12 is controlled so that a video signal requested by the user is output. The actuator 10 drives the camera unit 2 three-dimensionally based on a control signal from the control unit 9. Three-dimensionally means that the actuator 10 moves the camera unit 2 up and down, left and right, and the direction of the angle of view change by the zoom adjustment means (not shown) of the camera lens (that is, equivalently, the subject and the camera unit 2). In this case, the camera is driven in three directions (distance change), two-dimensional driving of the angle (photographing direction) of the imaging camera 4 and equivalently changing the distance between the subject and the camera unit 2. The microcontroller unit 8 and the control unit 9
Configures a drive control unit that drives the camera unit 2 using the actuator 10 based on a user's instruction and a detection result of the infrared sensor 3. In the above description, an example in which the microcontroller unit 8 and the control unit 9 are separately configured has been described. However, the microcontroller unit 8 and the control unit 9 may be integrally configured using one computer. Good.

【0030】また、端末装置1には、他の端末装置に映
像信号、音声信号、及び指示信号等を出力する機構とし
て、撮像カメラ4、制御部9、及び外部入力回路部11
に接続されたスイッチ部12、スイッチ部12と音声入
力装置14に接続された送信信号処理部13、前記送信
信号処理部13に接続された送信データ変換部15、及
び前記送信データ変換部15及び通信回線100に接続
された送信部16が設けられている。外部入力回路部1
1は、図示しない外部の映像表示装置、あるいは映像再
生装置等に接続され、それらの装置からの映像信号を入
力する。スイッチ部12は、制御部9からの切り換え信
号に基づいて、撮像カメラ4と外部入力回路部11から
の映像信号を切り換える。スイッチ部12は、撮像カメ
ラ4からの映像信号と外部入力回路部11からの映像信
号との同期をとり、制御部9から指定されたいずれかの
映像信号を送信信号処理部13に出力する。このように
同期をとることにより、本実施例のテレビ電話会議シス
テムでは、外部入力回路部11に接続された外部の映像
表示装置をカメラ部2を用いて撮影した場合でも、カメ
ラ部2が上記映像表示装置のブランキング期間を撮影す
るのを防止することができる。その結果、本実施例のテ
レビ電話会議システムでは、[発明が解決しようとする
課題]の欄に記載した他の端末装置の映像表示装置に表
示される映像の画質が低下するという従来の問題点を解
消することができる。また、このスイッチ部12では、
外部入力回路部11からの音声信号と後述の音声入力装
置14からの音声信号が重畳、またはいずれかを優先す
るように、外部入力回路部11からの音声信号を送信信
号処理部13に出力する。
The terminal device 1 includes an imaging camera 4, a control unit 9, and an external input circuit unit 11 as a mechanism for outputting a video signal, an audio signal, an instruction signal, and the like to another terminal device.
, A transmission signal processing unit 13 connected to the switch unit 12 and the voice input device 14, a transmission data conversion unit 15 connected to the transmission signal processing unit 13, and the transmission data conversion unit 15. A transmission unit 16 connected to the communication line 100 is provided. External input circuit 1
1 is connected to an external video display device or a video playback device (not shown), and inputs a video signal from those devices. The switch unit 12 switches a video signal from the imaging camera 4 and the external input circuit unit 11 based on a switching signal from the control unit 9. The switch unit 12 synchronizes the video signal from the imaging camera 4 with the video signal from the external input circuit unit 11 and outputs one of the video signals specified by the control unit 9 to the transmission signal processing unit 13. By synchronizing in this way, in the video conference system of the present embodiment, even when the external video display device connected to the external input circuit unit 11 is photographed using the camera unit 2, It is possible to prevent the image display device from photographing during the blanking period. As a result, in the video conference system according to the present embodiment, the conventional problem that the image quality of the image displayed on the image display device of another terminal device described in the column of [Problems to be Solved by the Invention] is reduced. Can be eliminated. Also, in this switch section 12,
The audio signal from the external input circuit unit 11 is output to the transmission signal processing unit 13 so that the audio signal from the external input circuit unit 11 and the audio signal from the audio input device 14 to be described later are superimposed, or one of them is prioritized. .

【0031】送信信号処理部13は、スイッチ部12か
らの映像信号と、マイク、または類似装置により構成さ
れた音声入力装置14からの音声信号とを入力し、それ
らの映像信号及び音声信号のデータに所定のデータ処理
を行う。送信信号処理部13でのデータ処理には、既知
のデータ圧縮技法に基づいて入力したデータを圧縮する
データの圧縮処理、及びデータの順番を並べ替えるデー
タの並べ替え処理が含まれている。送信データ変換部1
5は、通信回線100によって他の端末装置に送信信号
処理部13からの出力データを転送するために、送信信
号処理部13からの出力データにプロトコル変換を施し
て、送信部16に出力する。
The transmission signal processing unit 13 receives a video signal from the switch unit 12 and an audio signal from an audio input device 14 composed of a microphone or a similar device, and outputs data of the video signal and the audio signal. Performs predetermined data processing. The data processing in the transmission signal processing unit 13 includes a data compression process for compressing input data based on a known data compression technique, and a data rearrangement process for rearranging the order of data. Transmission data converter 1
5 performs protocol conversion on the output data from the transmission signal processing unit 13 to transfer the output data from the transmission signal processing unit 13 to another terminal device via the communication line 100 and outputs the data to the transmission unit 16.

【0032】さらに、端末装置1には、他の端末装置か
らの映像信号、音声信号、及び指示信号等を入力する機
構として、通信回線100に接続された受信部17、前
記受信部17に接続された受信データ変換部18、及び
前記受信データ変換部18に接続された受信信号処理部
19が設けられている。受信部17は、他の端末装置の
送信部から送信された出力データを通信回線100を介
して受信する。受信データ変換部18は、当該端末装置
1内で受信したデータを処理するために、受信部17か
らの受信データにプロトコル変換を施し、受信信号処理
部19に出力する。受信信号処理部19は、受信データ
変換部18から入力した信号のデータに所定のデータ処
理、例えば入力したデータを伸張するデータの伸張処理
あるいはデータを正しい順番に並べ替えるデータの並べ
替えなどのデータ処理を行う。さらに、受信信号処理部
19は、例えばCRT、PCのディスプレイ、または類
似装置である映像表示装置20、例えばスピーカである
音声出力装置21、及びマイクロコントローラ部8に接
続されている。受信信号処理部19は、上記のようなデ
ータ処理を施した後、入力した信号の種類を判別して、
映像信号、音声信号、及び指示信号を映像表示装置2
0、音声出力装置21、及びマイクロコントローラ部8
にそれぞれ出力する。
Further, the terminal device 1 has a receiving unit 17 connected to the communication line 100 as a mechanism for inputting video signals, audio signals, instruction signals, and the like from other terminal devices. The received data converter 18 is provided, and a received signal processor 19 connected to the received data converter 18 is provided. The receiving unit 17 receives the output data transmitted from the transmitting unit of another terminal device via the communication line 100. The reception data conversion unit 18 performs protocol conversion on the reception data from the reception unit 17 in order to process the data received in the terminal device 1 and outputs the data to the reception signal processing unit 19. The reception signal processing unit 19 performs predetermined data processing on the data of the signal input from the reception data conversion unit 18, such as data expansion processing for expanding the input data or data rearrangement for rearranging the data in a correct order. Perform processing. Further, the reception signal processing unit 19 is connected to a video display device 20 which is, for example, a CRT or a PC display or a similar device, an audio output device 21 which is a speaker, for example, and the microcontroller unit 8. After performing the data processing as described above, the reception signal processing unit 19 determines the type of the input signal,
The video signal, the audio signal, and the instruction signal are displayed on the video display device 2
0, audio output device 21, and microcontroller unit 8
Respectively.

【0033】《動作》以下、本実施例のテレビ電話会議
システムの動作について説明する。まず、話し手側の一
の端末装置から聞き手側の他の端末装置に話し手側の映
像、及び音声を伝達する動作について説明する。話し手
側に設置された端末装置1は、カメラ部2の撮像カメラ
4によって取り込んだ映像信号をスイッチ部12を経て
送信信号処理部13に出力する。送信信号処理部13
は、撮像カメラ4、及び音声入力装置14からそれぞれ
入力した映像信号、及び音声信号のデータにデータの圧
縮処理等を施して、送信データ変換部15に出力する。
送信データ変換部15は、後段の通信回線100でデー
タ通信を行うのに適した形式に変換するプロトコル変換
を入力したデータに施し、送信部16に出力する。送信
部16は、聞き手側に設けられた端末装置の受信部に映
像信号、及び音声信号のデータを転送する。このことに
より、聞き手側の端末装置において、その映像表示装
置、及び音声出力装置が、話し手側からの映像、及び音
声をそれぞれ再生し表示、発音する。
<< Operation >> The operation of the video conference system of the present embodiment will be described below. First, an operation of transmitting a video and a voice of the speaker from one terminal device of the speaker to another terminal device of the listener will be described. The terminal device 1 installed on the speaker side outputs the video signal captured by the imaging camera 4 of the camera unit 2 to the transmission signal processing unit 13 via the switch unit 12. Transmission signal processing unit 13
Performs data compression processing and the like on the video signal and audio signal data input from the imaging camera 4 and the audio input device 14, respectively, and outputs the data to the transmission data conversion unit 15.
The transmission data conversion unit 15 performs a protocol conversion for converting the input data into a format suitable for performing data communication through the communication line 100 at the subsequent stage, and outputs the data to the transmission unit 16. The transmitting unit 16 transfers the video signal and the audio signal data to the receiving unit of the terminal device provided on the listener side. Thus, in the terminal device on the listener side, the video display device and the audio output device reproduce, display, and sound the video and audio from the speaker side, respectively.

【0034】次に、聞き手が話し手側の撮像カメラ4を
駆動して、所望の映像を表示させる動作について説明す
る。この場合、聞き手は端末装置を動作して、その端末
装置の送信部から通信回線100を介して指示信号のデ
ータを話し手側の端末装置の受信部17に出力する。受
信部17は、入力した指示信号のデータを受信データ変
換部18に出力する。受信データ変換部18は、当該端
末装置1内でのデータ処理を行うのに適した形式に変換
するプロトコル変換を入力したデータに施し、受信信号
処理部19に出力する。受信信号処理部19は、入力し
たデータにデータの伸張処理等を施した後、指示信号と
してマイクロコントローラ部8に出力する。マイクロコ
ントローラ部8が入力した指示信号は、制御部9、及び
アクチュエータ10を経てカメラ部2に伝えられ、その
撮像カメラ4は聞き手が所望する撮影方向、及びズーム
に一致するように駆動される。
Next, an operation in which the listener drives the imaging camera 4 on the speaker side to display a desired image will be described. In this case, the listener operates the terminal device, and outputs the data of the instruction signal from the transmission unit of the terminal device to the reception unit 17 of the terminal device on the speaker side via the communication line 100. The receiving unit 17 outputs the data of the input instruction signal to the received data converting unit 18. The reception data conversion unit 18 performs a protocol conversion for converting the input data into a format suitable for performing data processing in the terminal device 1, and outputs the data to the reception signal processing unit 19. The received signal processing unit 19 subjects the input data to data expansion processing and the like, and then outputs it to the microcontroller unit 8 as an instruction signal. The instruction signal input by the microcontroller unit 8 is transmitted to the camera unit 2 via the control unit 9 and the actuator 10, and the imaging camera 4 is driven so as to match the photographing direction and zoom desired by the listener.

【0035】カメラ部2がマイクロコントローラ部8の
動作により、被写体を自動的に追尾して撮影する動作原
理について図3を参照して具体的に説明する。図3は、
図2に示したカメラ部の駆動方法の一例を示す説明図で
ある。図3において、右上センサ3a、左上センサ3
b、左下センサ3cは、撮像カメラ4のレンズ4aの中
心に対して互いに等距離となるように、撮像カメラ4の
同一平面(以下、”センサの設置面”という)上に固定
されている。これらのセンサ3a,3b,3cは、上述
のように、赤外線信号発生装置5からの赤外線信号を検
知して、検知した赤外線信号の強度をマイクロコントロ
ーラ部8(図2)に出力する。マイクロコントローラ部
8は、センサ3a,3b,3cから入力した強度を比較
することにより、図の矢印”H”にて示す左右方向、及
び図の矢印”V”にて示す上下方向の各方向において、
撮像カメラ4のレンズ4aと赤外線信号発生装置5を取
り付けた被写体との位置関係を把握、判断する。尚、上
記左右方向とは右上センサ3a及び左上センサ3bの各
中心を結ぶ直線と平行な方向であり、上下方向とは左上
センサ3b及び左下センサ3cの各中心を結ぶ直線と平
行な方向である。また、以下の説明では、赤外線センサ
3と赤外線信号発生装置5との位置関係について、例え
ば赤外線センサ3から赤外線信号発生装置5を見た方向
で赤外線センサ3と赤外線信号発生装置5とを結ぶ直線
が上記設置面に対してなす角度を用いて説明する。具体
的に言えば、例えば図3に示すように、左右方向におい
て、赤外線信号発生装置5が右上センサ3aの右方向で
60゜、かつ左上センサ3b及び左下センサ3cの右方
向で50゜に位置し、上下方向において、赤外線信号発
生装置5が右上センサ3a及び左上センサ3bの下方向
で85゜、かつ左下センサ3cの上方向で75゜に位置
している場合、マイクロコントローラ部8は上述のレン
ズ4aと被写体との位置関係を下記のように判断する。
マイクロコントローラ部8は、左右方向では、右上セン
サ3aによって検知された赤外線信号の強度が左上セン
サ3b及び左下センサ3cによって検知されたものより
大きいので、左上センサ3b及び左下センサ3cよりも
右上センサ3aの方が赤外線信号発生装置5に近いと判
断する。同様に、マイクロコントローラ部8は、上下方
向では、右上センサ3a及び左上センサ3bによって検
知された赤外線信号の強度が左下センサ3cによって検
知されたものより大きいので、左下センサ3cよりも右
上センサ3a及び左上センサ3bの方が赤外線信号発生
装置5に近いと判断する。そして、マイクロコントロー
ラ部8は、検知した強度の大きいセンサの方向にカメラ
部2を駆動する駆動信号を制御部9(図2)に出力す
る。その結果、カメラ部2は、アクチュエータ10によ
り、左右方向では右上センサ3aの方向に移動され、上
下方向では右上センサ3a及び左上センサ3bの方向に
移動される。カメラ部2は、各センサ3a,3b,3c
にて検知した強度が同じとなるまで移動され、被写体を
撮影する。
Referring to FIG. 3, the operation principle of the camera unit 2 for automatically tracking and photographing a subject by the operation of the microcontroller unit 8 will be specifically described. FIG.
FIG. 3 is an explanatory diagram illustrating an example of a driving method of the camera unit illustrated in FIG. 2. In FIG. 3, the upper right sensor 3a and the upper left sensor 3
b, the lower left sensor 3c is fixed on the same plane of the imaging camera 4 (hereinafter referred to as “sensor installation surface”) so as to be equidistant from the center of the lens 4a of the imaging camera 4. As described above, these sensors 3a, 3b, and 3c detect the infrared signal from the infrared signal generator 5, and output the intensity of the detected infrared signal to the microcontroller unit 8 (FIG. 2). The microcontroller unit 8 compares the intensities input from the sensors 3a, 3b, and 3c to determine the horizontal direction indicated by an arrow "H" in the figure and the vertical direction indicated by an arrow "V" in the figure. ,
The positional relationship between the lens 4a of the imaging camera 4 and the subject to which the infrared signal generator 5 is attached is grasped and determined. The left-right direction is a direction parallel to a straight line connecting the centers of the upper right sensor 3a and the upper left sensor 3b, and the up-down direction is a direction parallel to a straight line connecting the centers of the upper left sensor 3b and the lower left sensor 3c. . In the following description, the positional relationship between the infrared sensor 3 and the infrared signal generator 5 is described, for example, by a straight line connecting the infrared sensor 3 and the infrared signal generator 5 in the direction in which the infrared signal 3 is viewed from the infrared sensor 3. Will be described using an angle formed with respect to the installation surface. More specifically, as shown in FIG. 3, for example, in the horizontal direction, the infrared signal generator 5 is located at 60 ° in the right direction of the upper right sensor 3a and at 50 ° in the right direction of the upper left sensor 3b and the lower left sensor 3c. In the vertical direction, when the infrared signal generator 5 is located at an angle of 85 ° below the upper right sensor 3a and the upper left sensor 3b and at an angle of 75 ° above the lower left sensor 3c, the microcontroller unit 8 performs the above-described operation. The positional relationship between the lens 4a and the subject is determined as follows.
In the left-right direction, since the intensity of the infrared signal detected by the upper right sensor 3a in the left-right direction is greater than that detected by the upper left sensor 3b and the lower left sensor 3c, the upper right sensor 3a is higher than the upper left sensor 3b and the lower left sensor 3c. Is closer to the infrared signal generator 5. Similarly, in the vertical direction, the intensity of the infrared signal detected by the upper right sensor 3a and the upper left sensor 3b in the vertical direction is larger than that detected by the lower left sensor 3c. It is determined that the upper left sensor 3b is closer to the infrared signal generator 5. Then, the microcontroller unit 8 outputs a drive signal for driving the camera unit 2 in the direction of the detected sensor having a high intensity to the control unit 9 (FIG. 2). As a result, the camera unit 2 is moved by the actuator 10 in the left-right direction in the direction of the upper right sensor 3a, and in the up-down direction, in the direction of the upper right sensor 3a and the upper left sensor 3b. The camera unit 2 includes sensors 3a, 3b, 3c
Is moved until the detected intensity becomes the same, and the subject is photographed.

【0036】このように、本実施例のテレビ電話会議シ
ステムでは、マイクロコントローラ部8が上下方向、及
び左右方向の2つの各方向において、2つの赤外線セン
サ3にて検知した赤外線信号の強度を比較することによ
り、撮像カメラ4のレンズ4aと赤外線信号発生装置5
を取り付けた被写体との位置関係を把握する。そして、
マイクロコントローラ部8は、検知した強度の大きいセ
ンサの方向にカメラ部2を駆動している。このことによ
り、本実施例のテレビ電話会議システムでは、被写体が
移動する場合でも、ユーザが操作することなく、カメラ
部が自動的に被写体を追尾して撮影することができる。
As described above, in the video telephone conference system of the present embodiment, the microcontroller unit 8 compares the intensities of the infrared signals detected by the two infrared sensors 3 in the two directions of the vertical direction and the horizontal direction. By doing so, the lens 4a of the imaging camera 4 and the infrared signal generator 5
Understand the positional relationship with the subject to which is attached. And
The microcontroller unit 8 drives the camera unit 2 in the direction of the detected sensor having a high intensity. As a result, in the video conference system of the present embodiment, even when the subject moves, the camera unit can automatically track and shoot the subject without operation by the user.

【0037】尚、カメラ部2が赤外線信号発生装置5を
取り付けた被写体の動きに追従して自動的に追尾し撮影
する構成において、赤外線信号発生装置5と当該赤外線
信号発生装置5からの赤外線信号を検知する赤外線セン
サ3を用いた構成について説明したが、赤外線信号には
限定されない。つまり、被写体に取り付けられる信号発
生装置とこの信号発生装置からの信号を検知することが
できるセンサであればよい。また、レンズ4aの中心に
対して互いに等距離に配置した右上センサ3a、左上セ
ンサ3b、左下センサ3cを用いた構成について説明し
たが、左右、及び上下方向の各方向でレンズ中心4aを
挟むよう配置した複数のセンサであればよい。レンズ4
aの中心に対して互いに等距離に配置しない複数のセン
サを用いる場合、例えばマイクロコントローラ部8にて
演算を行うことにより、上述のレンズ4aと被写体との
位置関係を把握することができる。また、左右方向、上
下方向へ移動するカメラ部2を用いた構成について説明
したが、カメラ部2を中心軸として左右回転、上下回転
するカメラ部2であればよい。
In the configuration in which the camera section 2 automatically tracks and shoots the subject with the infrared signal generator 5 attached thereto, the infrared signal generator 5 and the infrared signal from the infrared signal generator 5 are provided. Although the configuration using the infrared sensor 3 for detecting the signal has been described, the invention is not limited to the infrared signal. That is, a signal generator attached to a subject and a sensor capable of detecting a signal from the signal generator may be used. Further, the configuration using the upper right sensor 3a, the upper left sensor 3b, and the lower left sensor 3c arranged at the same distance from the center of the lens 4a has been described, but the lens center 4a is sandwiched in each of the left, right, and up and down directions. What is necessary is just a plurality of arranged sensors. Lens 4
When a plurality of sensors that are not arranged at the same distance from each other with respect to the center of “a” are used, the positional relationship between the above-mentioned lens 4a and the subject can be grasped, for example, by performing calculations in the microcontroller unit 8. Further, the configuration using the camera unit 2 that moves in the left-right direction and the up-down direction has been described.

【0038】《第2の実施例》図4は、本発明の第2の
実施例であるテレビ電話会議システムでの端末装置の構
成を示すブロック図である。この実施例では、テレビ電
話会議システムの構成において、所定の信号を発生する
信号発生装置と、カメラ部からの映像信号を処理し、上
記信号発生装置の所定の信号を検出する信号処理部を設
けた。それ以外の各部は、第1の実施例のものと同様で
あるのでそれらの重複した説明は省略する。図4に示す
ように、本実施例のテレビ電話会議システムでの端末装
置31には、互いに異なる波長の赤外線信号を発生する
赤外線信号発生装置5a,5bが設けられ、さらに撮像
カメラ4からの映像信号を入力して赤外線信号発生装置
5bの赤外線信号を検出する信号処理部22が設けられ
ている。一方の赤外線信号発生装置5aは、第1の実施
例に示した赤外線信号発生装置5と同一のものであり、
発生した赤外線信号はカメラ部2の赤外線センサ3によ
り検知される。また、他方の赤外線信号発生装置5b
は、一方の赤外線信号発生装置5aと異なる時間間隔で
赤外線信号を発生する。具体的に言えば、例えば赤外線
信号発生装置5aは1ミリ秒毎に発生し、赤外線信号発
生装置5bは5ミリ秒毎に発生する。また、これらの赤
外線信号発生装置5a,5bは、第1の実施例の赤外線
信号発生装置5と同様に、被写体に取り付けられてい
る。
<< Second Embodiment >> FIG. 4 is a block diagram showing a configuration of a terminal device in a video conference system according to a second embodiment of the present invention. In this embodiment, in the configuration of the video conference system, a signal generating device for generating a predetermined signal and a signal processing unit for processing a video signal from a camera unit and detecting the predetermined signal of the signal generating device are provided. Was. The other parts are the same as those of the first embodiment, and the duplicated description thereof will be omitted. As shown in FIG. 4, the terminal device 31 in the video conference system of the present embodiment is provided with infrared signal generators 5a and 5b for generating infrared signals having different wavelengths. A signal processing unit 22 for inputting a signal and detecting an infrared signal of the infrared signal generator 5b is provided. One infrared signal generator 5a is the same as the infrared signal generator 5 shown in the first embodiment,
The generated infrared signal is detected by the infrared sensor 3 of the camera unit 2. The other infrared signal generator 5b
Generates an infrared signal at a time interval different from that of one infrared signal generator 5a. Specifically, for example, the infrared signal generator 5a generates every 1 millisecond, and the infrared signal generator 5b generates every 5 milliseconds. These infrared signal generators 5a and 5b are attached to the subject similarly to the infrared signal generator 5 of the first embodiment.

【0039】信号処理部22は、赤外線信号発生装置5
bの赤外線信号が撮像カメラ4からの映像信号に含まれ
ているかどうかについての検出処理を行う。信号処理部
22は、検出処理の結果に基づいて、アクチュエータ1
0を操作するための指令信号をマイクロコントローラ部
8に出力する。具体的には、上記赤外線信号が検出され
なかった場合、信号処理部22は被写体に対する撮像カ
メラ4のズームが適切なものでないと判断して、被写体
の光学像が大きくなるよう撮像カメラ4のレンズのズー
ムを変更する指令信号をマイクロコントローラ部8に出
力する。このことにより、アクチュエータ10がレンズ
のズームを調整する手段を駆動し、撮像カメラ4のズー
ムレンズの画角が変更される。そして、信号処理部22
が赤外線信号を検出するまで、ズームを変更する指令信
号をマイクロコントローラ部8に出力する。赤外線信号
を検出したとき、信号処理部22は撮像カメラ4のズー
ムが適当なものであると判断して、マイクロコントロー
ラ部8にアクチュエータ10の動作を停止する指令信号
を出力してズームを固定する。その結果、カメラ部2
は、被写体を最適な画角により撮影することができる。
また、ズームレンズの画角を最小のものに変更した場合
でも、信号処理部22が赤外線信号を検出できないとき
はアクチュエータ10の動作を停止してその最小のズー
ムにて固定する。尚、信号処理部22での検出処理は、
第1の実施例のものと同様に、赤外線信号発生装置5a
の赤外線信号が赤外線センサ3により検出され、カメラ
部2が被写体を中心とした映像を形成するよう移動され
た後に行われる。以上のように、本実施例のテレビ電話
会議システムでは、赤外線信号発生装置5bと信号処理
部22とを用いた構成により、撮像カメラ4のズームを
最適、かつ自動的に変更することができる。
The signal processing section 22 includes the infrared signal generator 5
A detection process is performed to determine whether or not the infrared signal b is included in the video signal from the imaging camera 4. The signal processing unit 22 determines whether the actuator 1
A command signal for operating 0 is output to the microcontroller unit 8. Specifically, when the infrared signal is not detected, the signal processing unit 22 determines that the zoom of the imaging camera 4 with respect to the subject is not appropriate, and sets the lens of the imaging camera 4 so that the optical image of the subject becomes large. A command signal for changing the zoom is output to the microcontroller unit 8. As a result, the actuator 10 drives the means for adjusting the zoom of the lens, and the angle of view of the zoom lens of the imaging camera 4 is changed. Then, the signal processing unit 22
Outputs a command signal for changing the zoom to the microcontroller unit 8 until the microcomputer detects an infrared signal. When detecting the infrared signal, the signal processing unit 22 determines that the zoom of the imaging camera 4 is appropriate, and outputs a command signal to stop the operation of the actuator 10 to the microcontroller unit 8 to fix the zoom. . As a result, the camera unit 2
Can photograph a subject at an optimum angle of view.
Even when the angle of view of the zoom lens is changed to the minimum, if the signal processing unit 22 cannot detect the infrared signal, the operation of the actuator 10 is stopped and the zoom is fixed at the minimum zoom. Note that the detection processing in the signal processing unit 22 is as follows.
As in the first embodiment, the infrared signal generator 5a
The infrared signal is detected by the infrared sensor 3 and is performed after the camera unit 2 is moved to form an image centered on the subject. As described above, in the video conference system of the present embodiment, the zoom of the imaging camera 4 can be optimally and automatically changed by the configuration using the infrared signal generator 5b and the signal processing unit 22.

【0040】《第3の実施例》図5は、本発明の第3の
実施例であるテレビ電話会議システムでの端末装置の構
成を示すブロック図である。この実施例では、テレビ電
話会議システムの構成において、被写体から発生する
熱、及び被写体からの特定の色の波長の少なくとも一方
を検知するセンサを用い、赤外線信号発生装置を用いる
ことなく、被写体を自動的に追尾する構成とした。それ
以外の各部は、第2の実施例のものと同様であるのでそ
れらの重複した説明は省略する。図5において、赤外線
センサ3の右上センサ3a、左上センサ3b、及び左下
センサ3cは、例えば松下電子部品株式会社製、薄膜焦
電型センサにより構成された高精度なセンサであり、被
写体23の表面温度を0.1度単位で検知できるセンサ
である。このようなセンサを用いたことにより、本実施
例のテレビ電話会議システムでの端末装置32では、例
えば被写体23である話し手の体温を検知することがで
き、第1の実施例のものと同様に、カメラ部2が話し手
を自動的に追尾して撮影することができる。尚、特定の
色の波長を検出するセンサを用いて、例えばホワイトボ
ード等の被写体を検知して撮影する構成としてもよい。
Third Embodiment FIG. 5 is a block diagram showing a configuration of a terminal device in a video conference system according to a third embodiment of the present invention. In this embodiment, in the configuration of the video conference system, a sensor that detects at least one of heat generated from a subject and a wavelength of a specific color from the subject is used, and the subject is automatically detected without using an infrared signal generator. It was configured to track manually. The other parts are the same as those of the second embodiment, and the duplicated description thereof will be omitted. In FIG. 5, the upper right sensor 3a, the upper left sensor 3b, and the lower left sensor 3c of the infrared sensor 3 are high-precision sensors composed of, for example, a thin-film pyroelectric sensor manufactured by Matsushita Electronic Components Co., Ltd. It is a sensor that can detect temperature in units of 0.1 degrees. By using such a sensor, the terminal device 32 of the video conference system according to the present embodiment can detect, for example, the body temperature of the speaker, which is the subject 23, as in the first embodiment. The camera unit 2 can automatically track and photograph the talker. Note that a configuration may be employed in which an object such as a whiteboard is detected and photographed using a sensor that detects the wavelength of a specific color.

【0041】次に、本実施例のテレビ電話会議システム
での端末装置32の動作について、具体的に説明する。
この端末装置32では、カメラ部2の撮影条件が手元操
作部6、コンソールパネル7、あるいは他の端末装置に
よる聞き手からの指示信号によって、マイクロコントロ
ーラ部8に予め設定される。具体的には、例えば話し手
(被写体23)の最も温度の高い箇所を中心とした映像
を形成する撮影条件、あるいは所定温度(例えば話し手
の体温、36.5度)以上の温度を有する被写体23を
追尾して映像を形成する撮影条件がマイクロコントロー
ラ部8に設定される。マイクロコントローラ部8は、設
定された撮影条件に基づいて、駆動信号を制御部9に出
力し、アクチュエータ10を駆動する。このことによ
り、カメラ部2は、上記撮影条件を満足した映像を形成
することができる。尚、撮影条件には、アクチュエータ
10の動作を規定する駆動モードが含まれている。より
具体的に言えば、この駆動モードには、アクチュエータ
10を左から右、左下、及び右下方向に順次駆動する駆
動モード、あるいは上下方向に駆動し、その上下方向に
駆動したときに赤外線センサ3にて検知した最も温度の
高い箇所まで戻して、右方向に最大限に駆動し次に左方
向に最大限に駆動して最も温度の高い箇所を見いだすと
いう駆動モードがある。さらに、最も温度の高い話し手
の部分を見いだした後、その話し手を自動的に追尾する
駆動モード、あるいは上記最も温度の高い部分が見いだ
されている限りカメラ部2を駆動しない駆動モードがあ
る。
Next, the operation of the terminal device 32 in the video conference system of the present embodiment will be specifically described.
In the terminal device 32, the shooting conditions of the camera unit 2 are preset in the microcontroller unit 8 by an instruction signal from the hand operation unit 6, the console panel 7, or a listener from another terminal device. More specifically, for example, shooting conditions for forming an image centered on the hottest point of the speaker (subject 23), or the subject 23 having a temperature equal to or higher than a predetermined temperature (for example, the body temperature of the speaker, 36.5 degrees) are selected. Shooting conditions for tracking and forming an image are set in the microcontroller unit 8. The microcontroller unit 8 outputs a drive signal to the control unit 9 based on the set imaging conditions, and drives the actuator 10. Accordingly, the camera unit 2 can form an image satisfying the above-described shooting conditions. Note that the photographing conditions include a drive mode that defines the operation of the actuator 10. More specifically, the driving mode includes a driving mode in which the actuator 10 is sequentially driven from left to right, a lower left, and a lower right, or an infrared sensor when the actuator 10 is driven in a vertical direction and the actuator is driven in the vertical direction. There is a drive mode in which the highest temperature detected in step 3 is returned, the rightmost drive is performed, and then the leftmost drive is performed to find the highest temperature. Further, there is a drive mode in which the speaker with the highest temperature is found and then the speaker is automatically tracked, or a drive mode in which the camera section 2 is not driven as long as the hottest part is found.

【0042】《第4の実施例》図6は、本発明の第4の
実施例であるテレビ電話会議システムでの端末装置の構
成を示すブロック図である。この実施例では、テレビ電
話会議システムの構成において、カメラ部の撮像カメラ
を駆動するアクチュエータに高精度な動作を行うことが
できる高精度アクチュエータを用いた。それ以外の各部
は、第3の実施例のものと同様であるのでそれらの重複
した説明は省略する。図6に示すように、本実施例のテ
レビ電話会議システムの端末装置33では、例えば0.
1゜±0.01゜の精度にてカメラ部2の撮像カメラ4
を駆動することができる高精度アクチュエータ24が用
いられている。この高精度アクチュエータ24は、具体
的例としては、松下電器産業株式会社製、超音波モータ
アクチュエータがある。このような高精度アクチュエー
タ24を用いたことにより、本実施例のテレビ電話会議
システムでの端末装置33では、カメラ部2を大型化す
ることなく、静止画像の解像度を容易に向上することが
でき、さらに横長の静止画像、いわゆるパノラマ画や縦
長の静止画像を容易に形成することができる。
Fourth Embodiment FIG. 6 is a block diagram showing a configuration of a terminal device in a video conference system according to a fourth embodiment of the present invention. In this embodiment, in the configuration of the video conference system, a high-precision actuator capable of performing a high-precision operation is used as an actuator for driving the imaging camera of the camera unit. The other parts are the same as those of the third embodiment, and the duplicated description thereof will be omitted. As shown in FIG. 6, in the terminal device 33 of the video conference system of the present embodiment, for example,
The imaging camera 4 of the camera unit 2 with an accuracy of 1 ゜ ± 0.01 ゜
Is used. As a specific example of the high-precision actuator 24, there is an ultrasonic motor actuator manufactured by Matsushita Electric Industrial Co., Ltd. By using such a high-precision actuator 24, the resolution of a still image can be easily improved without increasing the size of the camera unit 2 in the terminal device 33 in the video conference system of the present embodiment. Further, a horizontally long still image, that is, a so-called panoramic image or a vertically long still image can be easily formed.

【0043】ここで、本実施例のテレビ電話会議システ
ムでの端末装置33における画像形成方法について、具
体的に説明するまず、図7の(a)、図7の(b)、及
び図7の(c)を参照して、本実施例の端末装置33で
の高い解像度の静止画像を形成する画像形成方法につい
て、具体的に説明する。図7の(a)は図6に示した端
末装置での4倍の解像度の静止画像を形成するときの撮
影方法を示す説明図であり、図7の(b)は図6に示し
た端末装置での4倍の解像度の静止画像を形成する画像
形成方法を示す説明図である。図7の(c)は、図6に
示した端末装置での標準の解像度の静止画像を形成する
画像形成方法を示す説明図である。4倍の解像度の静止
画像を形成する場合、マイクロコントローラ部8(図
6)は、被写体である曲線40を含む静止画像41を撮
像カメラ4(図6)を用いて、図7の(a)に示すよう
に、4つの画面41A,41B,41C,41D分に静
止画像41を分解する。続いて、マイクロコントローラ
部8は、左右上下の4つの方向に微少量、高精度アクチ
ュエータ24(図6)を駆動して、各々4倍のズームに
よって画面41A,41B,41C,41Dに対応する
被写体の部分を撮像カメラ4(図6)により撮影する。
次に、撮像カメラ4、スイッチ部12(図6)、または
送信信号処理部13(図6)が、撮影した画面41
A’,41B’,41C’,41D’分の映像信号を合
成して、図7の(b)に示す静止画像41’を形成す
る。この静止画像41’は、図7の(c)に示した標準
の解像度で形成した静止画像43に比べて、解像度を4
倍に向上したものであり、図7の(b)、及び図7の
(c)にそれぞれ示すように、曲線40’は曲線42に
比べて多くの画素(ドット)により表されている。尚、
撮影した画面41A’,41B’,41C’,41D’
分の映像信号を合成する処理の具体例としては、4つの
画面41A,41B,41C,41Dのつなぎ目部分に
おいて、大きさと色合いとに変化が生じるのを防止する
つなぎ目の処理がある。さらに、静止画像41’の全体
部分での色調調整、及びコントラスト調整の処理があ
る。以上のように、本実施例のテレビ電話会議システム
では、マイクロコントローラ部8が所望の解像度に基づ
いて、静止画像を複数個の画面分に分割し、高精度アク
チュエータ24によって駆動したカメラ部2を用いて分
割した各画面に対応する被写体の部分を撮影する。その
後、撮影した被写体の各部分の映像信号を合成すること
により、所望の解像度の静止画像を形成している。この
ため、本実施例のテレビ電話会議システムでは、カメラ
部2の構成を大型化することなく、撮影、形成する静止
画像の解像度を容易に向上することができる。
Here, the image forming method in the terminal device 33 in the video conference system according to the present embodiment will be specifically described. First, FIG. 7A, FIG. 7B and FIG. With reference to (c), an image forming method for forming a high-resolution still image in the terminal device 33 of the present embodiment will be specifically described. FIG. 7A is an explanatory view showing a shooting method when forming a still image of 4 times resolution in the terminal device shown in FIG. 6, and FIG. 7B is a diagram showing the terminal device shown in FIG. FIG. 4 is an explanatory diagram illustrating an image forming method for forming a still image with four times resolution in the apparatus. FIG. 7C is an explanatory diagram showing an image forming method for forming a still image with a standard resolution in the terminal device shown in FIG. When forming a still image of 4 times resolution, the microcontroller unit 8 (FIG. 6) uses the imaging camera 4 (FIG. 6) to convert a still image 41 including the curve 40 as a subject using the imaging camera 4 (FIG. 6). , The still image 41 is decomposed into four screens 41A, 41B, 41C and 41D. Subsequently, the microcontroller unit 8 drives the high-precision actuator 24 (FIG. 6) in a small amount in the four directions of left, right, up, and down, and subjects the objects corresponding to the screens 41A, 41B, 41C, 41D by zooming four times each. Is photographed by the imaging camera 4 (FIG. 6).
Next, the imaging camera 4, the switch unit 12 (FIG. 6), or the transmission signal processing unit 13 (FIG. 6)
The video signals for A ', 41B', 41C ', and 41D' are combined to form a still image 41 'shown in FIG. 7B. This still image 41 'has a resolution of 4 compared to the still image 43 formed at the standard resolution shown in FIG.
The curve 40 'is represented by more pixels (dots) than the curve 42, as shown in FIGS. 7B and 7C, respectively. still,
Photographed screens 41A ', 41B', 41C ', 41D'
As a specific example of the process of synthesizing the video signals of the minutes, there is a seam process for preventing a change in size and color at a seam portion of the four screens 41A, 41B, 41C, 41D. Further, there is a process of color tone adjustment and contrast adjustment for the entire still image 41 '. As described above, in the video conference system of the present embodiment, the microcontroller unit 8 divides a still image into a plurality of screens based on a desired resolution, and controls the camera unit 2 driven by the high-precision actuator 24. The part of the subject corresponding to each of the divided screens is photographed. Thereafter, a still image having a desired resolution is formed by synthesizing the video signals of the respective portions of the photographed subject. Therefore, in the video conference system of the present embodiment, the resolution of a still image to be photographed and formed can be easily improved without increasing the size of the camera unit 2.

【0044】次に、図8の(a)、及び図8の(b)を
参照して、本実施例の端末装置33でのパノラマ画を形
成する画像形成方法について、具体的に説明する。図8
の(a)は図6に示した端末装置での標準のサイズの静
止画像を形成する画像形成方法を示す説明図であり、図
8の(b)は図6に示した端末装置での横長のサイズの
静止画像を形成する画像形成方法を示す説明図である。
図8の(a)、及び図8の(b)において、標準のサイ
ズの静止画像45を横(左右)方向に4倍に拡げた静止
画像47の形成が要求された場合、マイクロコントロー
ラ部8(図6)は、高精度アクチュエータ24(図6)
を横方向で水平に駆動する。このとき、撮像カメラ4
(図6)は、マイクロコントローラ部8の指示に基づい
て、被写体である曲線44を適切なズームによって互い
にずれた位置で4回撮影する。次に、撮像カメラ4、ス
イッチ部12(図6)、または送信信号処理部13(図
6)が、撮影した4回分の映像信号を合成して、横長の
静止画像47を形成する。この静止画像47では、標準
サイズでの曲線44が図8の(b)に示すように、横方
向で4倍に拡げられた曲線46として撮影されている。
尚、高精度アクチュエータ24を縦方向で水平に駆動
し、この駆動中に被写体を複数回撮影することにより、
縦長の静止画像も形成することができる。以上のよう
に、本実施例のテレビ電話会議システムでは、マイクロ
コントローラ部8が高精度アクチュエータ24を一の方
向で水平に駆動するとともに、その駆動中にカメラ部2
により被写体を複数回撮影する。その後、複数回撮影し
た被写体の各部分の映像信号を合成することにより、一
の方向で所望のサイズに拡げた静止画像を形成してい
る。このため、本実施例のテレビ電話会議システムで
は、カメラ部2の構成を大型化することなく、横長、及
び縦長の静止画像を容易に形成することができる。
Next, with reference to FIGS. 8A and 8B, an image forming method for forming a panoramic image on the terminal device 33 of this embodiment will be specifically described. FIG.
8A is an explanatory view showing an image forming method for forming a standard size still image in the terminal device shown in FIG. 6, and FIG. 8B is a horizontally long image in the terminal device shown in FIG. FIG. 4 is an explanatory diagram illustrating an image forming method for forming a still image having a size of FIG.
In FIGS. 8A and 8B, when it is requested to form a still image 47 in which a standard size still image 45 is expanded four times in the horizontal (left / right) direction, the microcontroller unit 8 is required. (FIG. 6) is a high-precision actuator 24 (FIG. 6).
Is driven horizontally in the horizontal direction. At this time, the imaging camera 4
In FIG. 6, based on an instruction from the microcontroller unit 8, the subject curve 44 is photographed four times at positions shifted from each other by appropriate zooming. Next, the imaging camera 4, the switch unit 12 (FIG. 6), or the transmission signal processing unit 13 (FIG. 6) combines the four captured video signals to form a horizontally long still image 47. In the still image 47, the curve 44 in the standard size is photographed as a curve 46 expanded four times in the horizontal direction, as shown in FIG.
Note that by driving the high-precision actuator 24 horizontally in the vertical direction and photographing the subject a plurality of times during this driving,
A vertically long still image can also be formed. As described above, in the video conference call system of the present embodiment, the microcontroller unit 8 drives the high-precision actuator 24 horizontally in one direction, and the camera unit 2
To photograph the subject a plurality of times. Thereafter, a still image enlarged to a desired size in one direction is formed by synthesizing the video signals of the respective portions of the subject photographed a plurality of times. For this reason, in the video conference system of the present embodiment, horizontally and vertically long still images can be easily formed without increasing the size of the camera unit 2.

【0045】《第6の実施例》図9は、本発明の第6の
実施例であるテレビ電話会議システムでの端末装置の構
成を示すブロック図である。この実施例では、テレビ電
話会議システムの構成において、複数組のカメラ部、信
号処理部、及び高精度アクチュエータを設けた。それ以
外の各部は、第5の実施例と同様であるのでそれらの重
複した説明は省略する。図9に示すように、本実施例の
端末装置34には、3組のカメラ部2,2’,2”、信
号処理部22,22’,22”、及び高精度アクチュエ
ータ24,24’24”が設けられている。カメラ部
2,2’,2”は、被写体23、23’23”をそれぞ
れ撮影する。このように構成することにより、本実施例
のテレビ電話会議システムでは、手元操作部6、コンソ
ールパネル7、あるいは他の端末装置による聞き手から
の指示信号によってスイッチ部12を操作して、カメラ
部2,2’,2”により撮影された映像を適宜切り換え
ることができる。また、本実施例のテレビ電話会議シス
テムでは、例えばカメラ部2,2’により撮影した2つ
の映像を合成して1つの画像を形成することも容易に行
うことができる。さらに、N個(Nは自然数)のカメラ
部にて撮影、形成したN個の画像を用いて、上記第5の
実施例のものと同様な映像信号を合成する処理を行うこ
とにより、解像度の向上、及び横長や縦長の静止画像を
容易に形成することができる。
<< Sixth Embodiment >> FIG. 9 is a block diagram showing a configuration of a terminal device in a video conference system according to a sixth embodiment of the present invention. In this embodiment, a plurality of camera units, signal processing units, and high-precision actuators were provided in the configuration of the video conference system. The other parts are the same as those of the fifth embodiment, and the duplicated description thereof will be omitted. As shown in FIG. 9, the terminal device 34 of the present embodiment includes three sets of camera units 2, 2 ′, 2 ″, signal processing units 22, 22 ′, 22 ″, and high-precision actuators 24, 24 ′ 24. Are provided. The camera units 2, 2 ', and 2 "respectively capture images of the subjects 23 and 23' and 23". With this configuration, in the video conference system of the present embodiment, the operation at hand is performed. By operating the switch unit 12 in response to an instruction signal from a listener via the unit 6, the console panel 7, or another terminal device, the images captured by the camera units 2, 2 ', 2 "can be appropriately switched. Further, in the video conference system of the present embodiment, it is possible to easily form one image by synthesizing two videos captured by the camera units 2 and 2 ′, for example. Furthermore, by using N (N is a natural number) camera units to perform a process of synthesizing a video signal similar to that of the fifth embodiment using the N images captured and formed, the resolution is improved. It is possible to easily form a horizontal or vertical still image.

【0046】[0046]

【発明の効果】本発明のテレビ電話会議システムは、マ
イクロコントローラ部が上下方向、及び左右方向の2つ
の各方向において、2つのセンサにて検知した信号の強
度を比較することにより、撮像カメラのレンズとその信
号を発生する信号発生装置を取り付けた被写体との位置
関係を把握する。マイクロコントローラ部は、検知した
強度の大きいセンサの方向にカメラ部を駆動している。
このことにより、本発明のテレビ電話会議システムで
は、被写体が移動する場合でも、ユーザが操作すること
なく、カメラ部が自動的に被写体を追尾して撮影するこ
とができる。他の観点の発明のテレビ電話会議システム
は、マイクロコントローラ部が所望の解像度に基づい
て、静止画像を複数個の画面分に分割し、高精度アクチ
ュエータによって駆動したカメラ部を用いて分割した各
画面に対応する被写体の部分を撮影する。その後、撮影
した被写体の各部分の映像信号を合成することにより、
所望の解像度の静止画像を形成している。このため、本
発明のテレビ電話会議システムでは、カメラ部の構成を
大型化することなく、撮影、形成する静止画像の解像度
を容易に向上することができる。他の観点の発明のテレ
ビ電話会議システムは、マイクロコントローラ部が高精
度アクチュエータを一の方向に水平に駆動するととも
に、その駆動中にカメラ部により被写体を複数回撮影す
る。その後、複数回撮影した被写体の各部分の映像信号
を合成することにより、一の方向で所望のサイズに拡げ
た静止画像を形成している。このため、本発明のテレビ
電話会議システムでは、カメラ部の構成を大型化するこ
となく、横長、及び縦長の静止画像を容易に形成するこ
とができる。
According to the video conference system of the present invention, the microcontroller unit compares the strengths of signals detected by the two sensors in two directions, that is, the vertical direction and the horizontal direction. The positional relationship between the lens and the subject to which the signal generator for generating the signal is attached is grasped. The microcontroller unit drives the camera unit in the direction of the detected sensor having a high intensity.
Thus, in the video conference system of the present invention, even when the subject moves, the camera unit can automatically track and shoot the subject without any operation by the user. According to another aspect of the present invention, there is provided a video conference system in which a microcontroller unit divides a still image into a plurality of screens based on a desired resolution, and uses a camera unit driven by a high-precision actuator to divide each screen. The part of the subject corresponding to is photographed. Then, by synthesizing the video signal of each part of the photographed subject,
A still image with a desired resolution is formed. For this reason, in the video conference system of the present invention, the resolution of a still image to be photographed and formed can be easily improved without increasing the size of the camera unit. In a video conference system according to another aspect of the present invention, the microcontroller unit drives the high-precision actuator horizontally in one direction, and captures an image of the subject a plurality of times by the camera unit during the driving. Thereafter, a still image enlarged to a desired size in one direction is formed by synthesizing the video signals of the respective portions of the subject photographed a plurality of times. Therefore, in the video conference system of the present invention, horizontally and vertically long still images can be easily formed without increasing the size of the camera section.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明のテレビ電話会議システムの全体構成を
示すブロック図
FIG. 1 is a block diagram showing the overall configuration of a video conference system according to the present invention;

【図2】本発明の第1の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図
FIG. 2 is a block diagram showing the configuration of a terminal device in the video conference system according to the first embodiment of the present invention;

【図3】図2に示したカメラ部の駆動方法の一例を示す
説明図
FIG. 3 is an explanatory diagram showing an example of a driving method of the camera unit shown in FIG. 2;

【図4】本発明の第2の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図
FIG. 4 is a block diagram showing a configuration of a terminal device in a video conference system according to a second embodiment of the present invention;

【図5】本発明の第3の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図
FIG. 5 is a block diagram showing a configuration of a terminal device in a video conference system according to a third embodiment of the present invention;

【図6】本発明の第4の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図
FIG. 6 is a block diagram showing a configuration of a terminal device in a video conference system according to a fourth embodiment of the present invention;

【図7】図6に示した端末装置での画像形成方法を示す
説明図
FIG. 7 is an explanatory diagram showing an image forming method in the terminal device shown in FIG. 6;

【図8】図6に示した端末装置での他の画像形成方法を
示す説明図
FIG. 8 is an explanatory view showing another image forming method in the terminal device shown in FIG. 6;

【図9】本発明の第5の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図
FIG. 9 is a block diagram illustrating a configuration of a terminal device in a video conference system according to a fifth embodiment of the present invention;

【図10】 第1の従来例のテレビ電話会議システ
ムでの端末装置の構成を示すブロック図
FIG. 10 is a block diagram showing a configuration of a terminal device in a video conference system according to a first conventional example;

【図11】第2の従来例のテレビ電話会議システムの構
成を示すブロック図
FIG. 11 is a block diagram showing a configuration of a video conference system according to a second conventional example.

【図12】第3の従来例のテレビ電話会議システムに用
いられるCCDセンサのセルの配列例を示す構造図
FIG. 12 is a structural diagram showing an example of an array of cells of a CCD sensor used in a third conventional video conference system;

【図13】図12に示したCCDセンサのセルの構成を
示す構造図
13 is a structural diagram showing a configuration of a cell of the CCD sensor shown in FIG.

【図14】第3の従来例のテレビ電話会議システムに用
いられるカメラ部の構成を示すブロック図
FIG. 14 is a block diagram showing a configuration of a camera unit used in a video conference system according to a third conventional example.

【図15】図12に示したCCDセンサでの4倍の解像
度を有する静止画像の画像形成方法を示す説明図
FIG. 15 is an explanatory diagram showing a method of forming a still image having four times the resolution of the CCD sensor shown in FIG. 12;

【符号の説明】[Explanation of symbols]

1、31、32、33、34 端末装置 2、2’、2” カメラ部 3 赤外線センサ 4 撮像カメラ 5、5a、5b 赤外線信号発生装置 8 マイクロコントローラ
部 9 制御部 10 アクチュエータ 11 外部入力回路部 12 スイッチ部 13 送信信号処理部 15 送信データ変換部 16 送信部 17 受信部 18 受信データ変換部 19 受信信号処理部 23、23’、23” 被写体 24、24’、24” 高精度アクチュエータ 100 通信回線
1, 31, 32, 33, 34 Terminal device 2, 2 ', 2 "camera unit 3 Infrared sensor 4 Imaging camera 5, 5a, 5b Infrared signal generator 8 Microcontroller unit 9 Control unit 10 Actuator 11 External input circuit unit 12 Switch unit 13 Transmission signal processing unit 15 Transmission data conversion unit 16 Transmission unit 17 Receiving unit 18 Received data conversion unit 19 Received signal processing unit 23, 23 ', 23 "Subject 24, 24', 24" High-precision actuator 100 Communication line

Claims (9)

【特許請求の範囲】[Claims] 【請求項1】 通信回線により接続された複数の端末装
置を備えたテレビ電話会議システムであって、 前記複数の各端末装置は、被写体を撮影するカメラ部、 前記カメラ部の方向を駆動するアクチュエータ、 前記被写体に取り付けられた信号発生装置、 前記信号発生装置からの信号を検知するセンサ、及び前
記センサの検知結果に基づいて、カメラ部を駆動する制
御信号をアクチュエータに出力する駆動制御部を具備す
ることを特徴とするテレビ電話会議システム。
1. A videophone conference system comprising a plurality of terminal devices connected by a communication line, wherein each of the plurality of terminal devices is a camera unit for photographing a subject, and an actuator for driving a direction of the camera unit. A signal generation device attached to the subject; a sensor for detecting a signal from the signal generation device; and a drive control unit for outputting a control signal for driving a camera unit to the actuator based on a detection result of the sensor. A video conference call system.
【請求項2】 前記端末装置が、外部から映像信号及び
音声信号を入力する外部入力回路部、 前記カメラ部と外部入力回路部とに接続され、カメラ部
から出力された映像信号と外部入力回路部からの映像信
号との同期をとり、駆動制御部からの切り換え信号に基
づいて、カメラ部、及び外部入力回路部のいずれか一方
からの映像信号を出力するスイッチ部、及び前記通信回
線に接続され、スイッチ部からの出力データを他の端末
装置に送信し、他の端末装置からの出力データを受信す
る送受信部を具備することを特徴とする請求項1に記載
のテレビ電話会議システム。
2. An external input circuit for inputting a video signal and an audio signal from outside, wherein the terminal device is connected to the camera and the external input circuit, and a video signal output from the camera and an external input circuit. A switch unit that synchronizes with a video signal from the unit and outputs a video signal from one of the camera unit and the external input circuit unit based on a switching signal from the drive control unit, and is connected to the communication line. The videophone conference system according to claim 1, further comprising a transmission / reception unit configured to transmit output data from the switch unit to another terminal device and receive output data from the other terminal device.
【請求項3】 前記端末装置が、前記信号発生装置と異
なる信号を発生する別の信号発生装置、及び前記カメラ
部からの映像信号を処理して、別の信号発生装置からの
信号を検出する信号処理部を具備することを特徴とする
請求項1または請求項2に記載のテレビ電話会議システ
ム。
3. The signal processing apparatus according to claim 1, wherein the terminal device processes another signal generating device that generates a signal different from the signal generating device, and detects a signal from another signal generating device by processing a video signal from the camera unit. 3. The video conference system according to claim 1, further comprising a signal processing unit.
【請求項4】 前記端末装置が、被写体から発生する
熱、及び被写体からの特定の色の波長の少なくとも一方
を検知するセンサを具備することを特徴とする請求項1
または請求項2に記載のテレビ電話会議システム。
4. The terminal device according to claim 1, wherein the terminal device includes a sensor that detects at least one of heat generated from the subject and a wavelength of a specific color from the subject.
Or the video conference system according to claim 2.
【請求項5】 前記アクチュエータが、0.1゜±0.0
1゜の精度にてカメラ部の方向を駆動する高精度アクチ
ュエータにより構成されたことを特徴とする請求項1ま
たは請求項2に記載のテレビ電話会議システム。
5. The apparatus according to claim 1, wherein the actuator is 0.1 ± 0.0.
3. The video conference system according to claim 1, comprising a high-precision actuator that drives the direction of the camera unit with an accuracy of 1 °.
【請求項6】 通信回線により接続された複数の端末装
置を備えたテレビ電話会議システムに用いられる画像形
成方法であって、 被写体に取り付けた信号発生装置からの信号を少なくと
も2つのセンサにより検知する工程、 前記少なくとも2つのセンサにより検知したそれぞれの
信号の強度を比較する工程、及び前記比較する工程での
比較結果に基づいて、被写体とカメラ部との位置関係を
認識して、カメラ部の方向を駆動する工程、 を具備することを特徴とするテレビ電話会議システムに
用いられる画像形成方法。
6. An image forming method used in a video conference system having a plurality of terminal devices connected by a communication line, wherein a signal from a signal generator attached to a subject is detected by at least two sensors. A step of comparing the intensities of the respective signals detected by the at least two sensors; and, based on a result of the comparison in the comparing step, recognizing a positional relationship between the subject and the camera unit, and Driving the image forming apparatus. An image forming method used in a video conference system.
【請求項7】 通信回線により接続された複数の端末装
置を備えたテレビ電話会議システムに用いられる画像形
成方法であって、 所望の解像度に基づいて、静止画像を複数個の画面分に
分割する工程、 前記分割する工程により分割した各画面に対応する被写
体の部分をカメラ部により撮影する工程、及び前記撮影
する工程で撮影した被写体の各部分の映像信号を合成し
て、1つの静止画像を形成する工程を具備することを特
徴とするテレビ電話会議システムに用いられる画像形成
方法。
7. An image forming method used in a video conference system having a plurality of terminal devices connected by a communication line, wherein a still image is divided into a plurality of screens based on a desired resolution. A step of photographing a part of the subject corresponding to each screen divided by the dividing step by a camera unit, and synthesizing a video signal of each part of the subject photographed in the photographing step to form one still image An image forming method for use in a video conference system, comprising a forming step.
【請求項8】 通信回線により接続された複数の端末装
置を備えたテレビ電話会議システムに用いられる画像形
成方法であって、 カメラ部を一の方向で水平に駆動するとともに、その駆
動中に被写体を複数回カメラ部により撮影する工程、及
び前記撮影する工程で撮影した被写体の各部分の映像信
号を合成して、1つの静止画像を形成する工程を具備す
ることを特徴とするテレビ電話会議システムに用いられ
る画像形成方法。
8. An image forming method for use in a video conference system having a plurality of terminal devices connected by a communication line, wherein the camera unit is driven horizontally in one direction and an object is driven during the driving. A videophone conference system comprising: a step of photographing a plurality of times by a camera unit; and a step of forming one still image by synthesizing video signals of respective portions of the subject photographed in the photographing step. Image forming method used for
【請求項9】 複数のカメラ部を用いて、前記被写体の
各部分の映像信号を形成することを特徴とする請求項7
または請求項8に記載のテレビ電話会議システムに用い
られる画像形成方法。
9. The video signal of each portion of the subject is formed by using a plurality of camera units.
An image forming method used in the video conference system according to claim 8.
JP9353601A 1997-12-22 1997-12-22 Video telephone conference system and image forming method used therefor Pending JPH11187302A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP9353601A JPH11187302A (en) 1997-12-22 1997-12-22 Video telephone conference system and image forming method used therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP9353601A JPH11187302A (en) 1997-12-22 1997-12-22 Video telephone conference system and image forming method used therefor

Publications (1)

Publication Number Publication Date
JPH11187302A true JPH11187302A (en) 1999-07-09

Family

ID=18431947

Family Applications (1)

Application Number Title Priority Date Filing Date
JP9353601A Pending JPH11187302A (en) 1997-12-22 1997-12-22 Video telephone conference system and image forming method used therefor

Country Status (1)

Country Link
JP (1) JPH11187302A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002290960A (en) * 2001-03-26 2002-10-04 Matsushita Electric Works Ltd Open space monitor system
JP2008543196A (en) * 2005-06-03 2008-11-27 フランス テレコム Method and apparatus for controlling movement in viewing direction, video conference system, terminal, and program for implementing this method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002290960A (en) * 2001-03-26 2002-10-04 Matsushita Electric Works Ltd Open space monitor system
JP2008543196A (en) * 2005-06-03 2008-11-27 フランス テレコム Method and apparatus for controlling movement in viewing direction, video conference system, terminal, and program for implementing this method

Similar Documents

Publication Publication Date Title
KR950014509B1 (en) Image sensing apparatus having plurality of optical systems
US8077194B2 (en) System and method for high resolution videoconferencing
US8467886B2 (en) Mobile object apparatus, mobile object system, imaging device and method, and alerting device and method
WO2009142332A1 (en) Hybrid video camera syste
JPH09130820A (en) Digital camera apparatus
KR20050051575A (en) Photographing apparatus and method, supervising system, program and recording medium
JP2011216948A (en) Camera system, video processing apparatus, and camera apparatus
JP2005517331A (en) Apparatus and method for providing electronic image manipulation in a video conference application
CN102077575A (en) Zoom by multiple image capture
US20050200726A1 (en) Digital camera and image signal generating method
JP2010171625A (en) Imaging apparatus, sound recorder, and motion picture photographing system
JPH09289631A (en) Image pickup control method and device, image pickup system and storage medium storing program to execute the method
JP2007288354A (en) Camera device, image processing apparatus, and image processing method
JP4019235B2 (en) Imaging device driving method and electronic camera
JP2006238326A (en) Camera device system and photographed moving image reproduction method
JPH05344408A (en) Method for magnifying and recording specific part and device therefor
JPH09233483A (en) Method and device for transmitting digital color video signal
JPH11187302A (en) Video telephone conference system and image forming method used therefor
JP2009027626A (en) Microphone device, video capturing device, and remote video capturing system
JPH0715646A (en) Network camera
JPH11220653A (en) Picture processor and camera system
JPH10290412A (en) Image pickup, storage, processing, display, reproduction transmitter and recording medium
JP4140006B2 (en) Composite image generation system
JP2013251617A (en) Camera
JP3256750B2 (en) Video signal transmission method in television intercom system and television intercom system using the same