JP2000115753A - Communication system and method, photographing device to be controlled and terminal - Google Patents

Communication system and method, photographing device to be controlled and terminal

Info

Publication number
JP2000115753A
JP2000115753A JP10283992A JP28399298A JP2000115753A JP 2000115753 A JP2000115753 A JP 2000115753A JP 10283992 A JP10283992 A JP 10283992A JP 28399298 A JP28399298 A JP 28399298A JP 2000115753 A JP2000115753 A JP 2000115753A
Authority
JP
Japan
Prior art keywords
image
information
unit
controlled
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP10283992A
Other languages
Japanese (ja)
Other versions
JP4182569B2 (en
Inventor
Hiroshi Ichiki
洋 一木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP28399298A priority Critical patent/JP4182569B2/en
Publication of JP2000115753A publication Critical patent/JP2000115753A/en
Application granted granted Critical
Publication of JP4182569B2 publication Critical patent/JP4182569B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To smoothly attain communication by transferring image and audio information in an area designated by a terminal. SOLUTION: The photographing device to be controlled consists of a camera 12 having a wide angle lens 11, a microphone group 13 consisting of microphones each having different directivity, a remote control terminal group 6 having a display section, a buffer memory 2, an optical distortion correction section 3 and a control unit 4. The remote control terminal group 6 generates control information to designate a prescribed image area and the control information and audio information are given to the control unit 4. The image in the area designated by the user is read from the buffer memory 2 and the optical distortion correction section 3 applies processing to correct optical distortion to the image information and applies magnification or reduction processing to the corrected image to obtain the image information in the prescribed area. Moreover, audio information in an area designated by the control information is selected and the audio information and the image information are transferred to the remote control terminal group 6.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、遠隔のビデオカ
メラにより撮影された映像とマイクロフォンにより集音
された音声とを通信を介して他地点に転送する通信シス
テムおよび方法、被制御撮影装置並びに端末装置に関す
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a communication system and method for transferring an image captured by a remote video camera and a sound collected by a microphone to another point via communication, a controlled imaging apparatus, and a terminal. Related to the device.

【0002】[0002]

【従来の技術】従来、遠隔操作が可能なカメラ装置が知
られている。このカメラ装置は、チルト/パン機能およ
びズーム機能を有し、チルト角(垂直方向)/パン角
(水平方向)およびズームが遠隔からの制御信号に応じ
て自在に制御され、任意の方向にカメラが向けられると
共に、所定の拡大率にて得られた所望の映像を遠隔地に
転送することが可能とされている。また、コミュニケー
ションを目的とし、遠隔地に音声や映像を伝送すること
が可能な各種装置およびシステムが提案されている。さ
らに、近年、通信方式のディジタル化に伴い、電話装置
においても各種サービスを受けることができ、然も、画
像等が送れる高機能な電話装置が実用化されている。
2. Description of the Related Art Conventionally, a camera device which can be remotely controlled has been known. This camera device has a tilt / pan function and a zoom function, and the tilt angle (vertical direction) / pan angle (horizontal direction) and zoom are freely controlled according to a control signal from a remote place, and the camera can be moved in any direction. And a desired image obtained at a predetermined magnification can be transferred to a remote place. Also, various devices and systems capable of transmitting audio and video to a remote location for communication have been proposed. Furthermore, in recent years, with the digitization of communication systems, various types of services have been provided to telephone devices, and high-performance telephone devices capable of transmitting images and the like have been put to practical use.

【0003】[0003]

【発明が解決しようとする課題】しかしながら、従来の
遠隔操作可能なカメラ装置においては、制御信号により
所定の方向にカメラを向けるのに時間遅れが発生すると
共に、カメラ制御の高速化を図っても構造的な限界があ
り、また、機構部を作動させるための電力が必要とされ
るばかりか、保守等の人手と手間が必要とされる問題点
があった。さらに、従来のカメラ装置においては、制御
系統が1系統とされているため、一度に1箇所からの映
像しか入手することができず、複数箇所の映像を同時に
入手するためには、複数セットのカメラ装置を設置する
と共に、制御に関しても複数系統を用意する必要があ
り、制御系が複雑となるばかりか、大規模なシステムと
なってしまう問題点があった。また、複数系統の音声を
一度に再生することに関しては従来の装置においても可
能とされているが、円滑に意思の疎通を図るためには、
複数の入力音声に対して選択あるいは音量制御して再生
することが望ましく、選択あるいは音量制御することが
可能とされた通信システムが要望されている。
However, in a conventional remote controllable camera device, a time delay occurs when the camera is pointed in a predetermined direction by a control signal, and the speed of camera control is increased. There are structural limitations, and there is a problem that not only power for operating the mechanism is required, but also labor and labor for maintenance and the like are required. Further, in the conventional camera device, since only one control system is provided, only one image can be obtained at a time. To obtain images from a plurality of places at the same time, a plurality of sets are required. In addition to installing a camera device, it is necessary to prepare a plurality of systems for control, which not only complicates the control system but also causes a large-scale system. In addition, although it is possible to reproduce the sound of a plurality of systems at once with a conventional device, in order to smoothly communicate,
It is desirable to reproduce a plurality of input voices by selecting or controlling the volume, and a communication system capable of selecting or controlling the volume is desired.

【0004】従って、この発明の目的は、機構部等の制
御を伴うことなく、電子的に同時に多方向の映像と音声
を複数の遠隔地からの要求に応じて転送することが可能
とされ、音声に関しても円滑にコミュニケーションを図
ることが可能とされた通信システムおよび方法、被制御
撮影装置並びに端末装置を提供することにある。
Accordingly, it is an object of the present invention to be able to electronically simultaneously transfer multi-directional video and audio in response to requests from a plurality of remote locations without control of a mechanism or the like. It is an object of the present invention to provide a communication system and method, a controlled imaging device, and a terminal device capable of smoothly communicating with respect to voice.

【0005】[0005]

【課題を解決するための手段】以上の問題を解決するた
めに、請求項1の発明は、広角レンズを有する撮像手段
と、撮像手段により撮像される範囲の略々全てを集音範
囲とするように、複数の指向性を有する複数の音声入力
手段と、撮像手段により撮像される画像を記憶する記憶
手段と、要求される所定領域に従って複数の音声入力手
段を切り換えるか、または、複数の音声入力手段の各々
の音量レベルを調整する音声制御手段と、要求される所
定領域の画像情報、および音声制御手段により制御され
た音声情報を遠隔の端末装置に対して転送する転送手段
とを備えた被制御撮影装置と、被制御撮影装置と伝送路
を介して接続され、撮像手段に対して遠隔から所定領域
の画像を要求する要求手段を有する端末装置とからなる
ことを特徴とする通信システムである。
In order to solve the above-mentioned problems, according to the first aspect of the present invention, an image pickup device having a wide-angle lens and substantially all of the range imaged by the image pickup device are set as a sound collection range. As described above, a plurality of voice input units having a plurality of directivities, a storage unit for storing an image captured by the imaging unit, and a plurality of voice input units are switched according to a required predetermined area. Audio control means for adjusting the volume level of each of the input means; and transfer means for transferring image information of a required predetermined area and audio information controlled by the audio control means to a remote terminal device. A controlled imaging device; and a terminal device connected to the controlled imaging device via a transmission path and having a request unit for remotely requesting an image of a predetermined area from the imaging unit. It is a trust system.

【0006】請求項2の発明は、広角レンズを有する撮
像手段と、撮像手段により撮像される範囲の略々全てを
集音範囲とするように、複数の指向性を有する複数の音
声入力手段と、撮像手段により撮像される画像を記憶す
る記憶手段と、遠隔の端末から要求される画像領域に応
じて複数の音声入力手段を切り換えるか、または、複数
の音声入力手段の各々の音量レベルを調整する音声制御
手段と、要求される画像領域の画像情報、および制御手
段により制御された音声情報を遠隔の端末装置へ転送す
る転送手段とを備えたことを特徴とする被制御撮影装置
である。
According to a second aspect of the present invention, there is provided an image pickup means having a wide-angle lens, and a plurality of sound input means having a plurality of directivities so that substantially all of the range imaged by the image pickup means is a sound collection range. A storage unit for storing an image captured by the imaging unit, and switching between a plurality of voice input units according to an image area requested from a remote terminal, or adjusting a volume level of each of the plurality of voice input units. A controlled image capturing apparatus, comprising: a voice control unit for performing a transfer operation; and a transfer unit configured to transfer image information of a required image area and voice information controlled by the control unit to a remote terminal device.

【0007】請求項3の発明は、広角レンズを有する撮
像手段と、撮像手段により撮像される範囲の略々全てを
集音範囲とするように、複数の指向性を有する複数の音
声入力手段と、撮像手段により撮像される画像を記憶す
る記憶手段と、要求される画像領域に応じて複数の音声
入力手段を切り換えるか、または、複数の音声入力手段
の各々の音量レベルを調整する音声制御手段と、要求さ
れる画像領域の画像、および制御手段により制御された
音声情報を所定の遠隔地に転送する転送手段とを備えた
被制御撮影装置と伝送路を介して接続される端末装置で
あって、被制御撮影装置から送信された画像情報を表示
する表示手段と、被制御撮影装置から送信された音声情
報を再生する手段と、被制御撮影装置に対して要求する
所定領域の画像を指定する要求手段と、所定領域の画像
を指定する情報を被制御撮影装置に転送する転送手段と
を備えたことを特徴とする端末装置である。
According to a third aspect of the present invention, there is provided an image pickup means having a wide-angle lens, and a plurality of voice input means having a plurality of directivities so that substantially all of the range imaged by the image pickup means is a sound collection range. Storage means for storing an image picked up by an image pickup means, and sound control means for switching between a plurality of sound input means or adjusting a volume level of each of the plurality of sound input means in accordance with a required image area And a transfer device for transferring the image of the required image area and the audio information controlled by the control device to a predetermined remote place. A display unit for displaying image information transmitted from the controlled imaging device; a unit for reproducing audio information transmitted from the controlled imaging device; and an image of a predetermined area requested to the controlled imaging device. And requesting means for constant, a terminal device which is characterized in that a transfer means for transferring to the controlled imaging device information specifying an image of a predetermined area.

【0008】請求項6の発明は、広角レンズを有する撮
像手段により撮像することによって画像情報を収集する
ステップと、複数の指向性を有する複数の音声入力手段
によって、撮像手段により撮像される範囲の略々全てを
集音範囲として、音声情報を収集するステップと、撮像
手段により撮像される画像を記憶するステップと、要求
される所定領域に従って複数の音声入力手段を切り換え
るか、または、複数の音声入力手段の各々の音量レベル
を調整する音声制御のステップと、要求される所定領域
の画像情報、および音声制御手段により制御された音声
情報を遠隔の端末装置に対して転送するステップと、撮
像手段に対して遠隔から所定領域の画像を要求するステ
ップとからなることを特徴とする通信方法。
According to a sixth aspect of the present invention, a step of collecting image information by capturing an image by an image capturing means having a wide-angle lens, and a step of obtaining a range of an image captured by the image capturing means by a plurality of voice input means having a plurality of directivities. Collecting audio information, storing an image captured by the imaging unit, switching between a plurality of audio input units according to a predetermined required area, or An audio control step of adjusting a volume level of each of the input means, a step of transferring image information of a required predetermined area and audio information controlled by the audio control means to a remote terminal device, Requesting an image of a predetermined area remotely from the communication method.

【0009】この発明では、広角レンズを有する撮像手
段と、広角レンズの視野角全体を集音範囲とする各々異
なる指向性を有する音声入力手段と、転送手段とを有す
る被制御撮影装置が設けられる。端末装置に設けられる
要求手段において、画像領域を指定する操作ボタンと、
画面の拡大/縮小率を指定する操作ボタンとの操作状態
に応じて形成された操作情報と、その要求手段の周辺の
音声情報とが制御手段に供給される。このように指定さ
れた所定領域の画像情報が記憶手段から読み出され、こ
の画像情報に対して光学歪みを補正する処理がなされる
と共に、拡大もしくは縮小処理がなされて所定領域の画
像情報とされる。得られた画像情報と、その領域の音声
情報とが選択されて端末装置側に送信される。このこと
で、撮像手段が一つしか設置されていないにもかかわら
ず、複数の端末装置に対して並列処理がなされていずれ
の端末装置においても撮像手段の設置地点のそれぞれ別
個の所定領域の画像情報と音声情報とが入手できる。
According to the present invention, there is provided a controlled photographing apparatus having an image pickup means having a wide-angle lens, voice input means having different directivities within a sound collection range of the entire viewing angle of the wide-angle lens, and transfer means. . An operation button for designating an image area, in request means provided in the terminal device,
Operation information formed in accordance with an operation state of an operation button for designating an enlargement / reduction ratio of a screen and audio information around the request unit are supplied to the control unit. The image information of the specified area designated in this way is read out from the storage means, and the image information is subjected to processing for correcting optical distortion, and is also subjected to enlargement or reduction processing to obtain image information of the predetermined area. You. The obtained image information and the audio information of the area are selected and transmitted to the terminal device side. In this way, even though only one imaging unit is installed, parallel processing is performed on a plurality of terminal devices, and in each of the terminal devices, the image of an individual predetermined area of the installation point of the imaging unit is obtained. Information and audio information are available.

【0010】[0010]

【発明の実施の形態】以下、この発明の一実施形態につ
いて図面を参照して説明する。図1は、この発明の一実
施形態の構成を示す。また、図2は、この発明の一実施
形態における遠隔操作端末の外観を示す。なお、図1お
よび図2において対応する箇所に関しては、同一の参照
符号が付されている。
DESCRIPTION OF THE PREFERRED EMBODIMENTS One embodiment of the present invention will be described below with reference to the drawings. FIG. 1 shows a configuration of an embodiment of the present invention. FIG. 2 shows an appearance of a remote control terminal according to an embodiment of the present invention. 1 and 2 are denoted by the same reference numerals.

【0011】図1に示すようにこの発明による通信シス
テムの被制御撮影部が撮影部1、バッファメモリ2、光
学歪み補正部3、制御ユニット4、伝送路5および遠隔
操作端末群6により構成される。撮影部1は、広角レン
ズ11を前面に有したカメラ12と、マイクロフォン群
13と、アンプ群14,17と、A/D変換器群15
と、D/A変換器群16と、スピーカ群18と、図示せ
ずも各部を収納する筐体等とにより構成されている。
As shown in FIG. 1, the controlled photographing section of the communication system according to the present invention comprises a photographing section 1, a buffer memory 2, an optical distortion correcting section 3, a control unit 4, a transmission line 5, and a remote control terminal group 6. You. The photographing unit 1 includes a camera 12 having a wide-angle lens 11 on the front surface, a microphone group 13, amplifier groups 14 and 17, and an A / D converter group 15.
, A D / A converter group 16, a speaker group 18, and a housing (not shown) for accommodating each part.

【0012】例えば、撮影部1の筐体には、アンプ群1
4,17と、A/D変換器群15と、D/A変換器群1
6等とが収納される。また、筐体の上部には、広角レン
ズ11を前面に有したカメラ12が取り付けられ、さら
に、筐体の外周面には、マイクロフォン群13と、スピ
ーカ群18とが広角レンズ11の視野角に応じて放射状
に取り付けられて一体化されている。つまり、各々異な
る指向性を有するマイクロフォン群13でカメラ12の
広角レンズ11の視野角全体から集音できるように構成
されると共に、各々異なる指向性を有するスピーカ群1
8でカメラ12の広角レンズ11の視野角全体に音声を
発するように構成されている。
For example, the housing of the photographing unit 1 includes an amplifier group 1
4, 17, an A / D converter group 15, and a D / A converter group 1
6 and the like are stored. A camera 12 having a wide-angle lens 11 on the front is attached to the upper part of the housing, and a microphone group 13 and a loudspeaker group 18 are provided on the outer peripheral surface of the housing at a viewing angle of the wide-angle lens 11. They are radially mounted and integrated accordingly. That is, the microphone groups 13 having different directivities are configured to collect sound from the entire viewing angle of the wide-angle lens 11 of the camera 12, and the speaker groups 1 having different directivities are provided.
At 8, the sound is emitted over the entire viewing angle of the wide-angle lens 11 of the camera 12.

【0013】広角レンズ11を前面に有したカメラ12
は、設置位置での略々180°にわたる映像を常に撮影
し、ディジタル画像信号を形成する。カメラ12におい
て形成されたディジタル画像信号がバッファメモリ2に
供給され、例えば、所定時間間隔で更新されながら一時
的に蓄積される。
A camera 12 having a wide-angle lens 11 on the front.
Always captures an image covering approximately 180 ° at the installation position and forms a digital image signal. The digital image signal formed by the camera 12 is supplied to the buffer memory 2 and temporarily stored while being updated at predetermined time intervals, for example.

【0014】バッファメモリ2には、後述するように制
御ユニット4において形成された制御情報が供給され
る。バッファメモリ2は、この制御情報に応じて所定領
域の画像を切り出す。バッファメモリ2において切り出
された所定領域の画像情報が光学歪み補正部3に供給さ
れる。
The buffer memory 2 is supplied with control information generated by the control unit 4 as described later. The buffer memory 2 cuts out an image in a predetermined area according to the control information. Image information of a predetermined area cut out in the buffer memory 2 is supplied to the optical distortion correction unit 3.

【0015】光学歪み補正部3にも、後述するように制
御ユニット4において形成された制御情報が供給され
る。光学歪み補正部3は、この制御情報に応じて所定領
域の画像に対して光学歪みの補正処理と拡大/縮小処理
を行う。つまり、制御ユニット4からの制御情報により
指示される画像の切り出し位置と切り出し寸法から歪み
の補正方法が決定され、この補正方法に則って補正処理
と拡大/縮小処理がなされる。従って、画像の拡大/縮
小処理によってあたかもズームイン/アウトがなされた
ような画像が形成されると共に、補正する画像のオフセ
ット値を変えることによってあたかもパン/チルトされ
たような画像が形成され、擬似的に所望の画像が再現さ
れる。光学歪み補正回路3において形成された所望の画
像情報が制御ユニット4に供給される。
The control information generated by the control unit 4 is also supplied to the optical distortion correction unit 3 as described later. The optical distortion correction unit 3 performs optical distortion correction processing and enlargement / reduction processing on an image in a predetermined area according to the control information. That is, a method for correcting distortion is determined from the cutout position and cutout size of the image specified by the control information from the control unit 4, and the correction processing and the enlargement / reduction processing are performed according to this correction method. Therefore, an image as if zoomed in / out is formed by the image enlargement / reduction processing, and an image as if panned / tilted by changing the offset value of the image to be corrected is formed. A desired image is reproduced. Desired image information formed in the optical distortion correction circuit 3 is supplied to the control unit 4.

【0016】また、カメラ12の広角レンズ11の視野
角全体を集音範囲とする各々異なる指向性を有するマイ
クロフォン群13は、例えば、m個のマイクロフォン1
31,132,・・・13mにより構成されている。マ
イクロフォン131,132,・・・13mで集音され
たmチャンネルの入力音声信号は、マイクロフォン13
1,132,・・・13mに対応して設けられたアンプ
141,142,・・・14mを介されることで増幅さ
れ、この増幅出力がA/D変換器151,152,・・
・15mのそれぞれに供給される。
The microphone groups 13 having different directivities, each having a sound collecting range covering the entire viewing angle of the wide-angle lens 11 of the camera 12, include, for example, m microphones 1
.., 13m. The input audio signals of m channels collected by the microphones 131, 132,.
, 13m are amplified by way of amplifiers 141, 142,... 14m provided corresponding to the 13m, and the amplified outputs are A / D converters 151, 152,.
・ Supplied to each of 15 m.

【0017】A/D変換器151,152,・・・15
mのそれぞれにおいて、ディジタル・アナログ変換がな
されることでディジタルの音声信号が形成され、mチャ
ンネルのディジタル音声信号が制御ユニット4に供給さ
れる。
A / D converters 151, 152,... 15
In each of m, digital-to-analog conversion is performed to form a digital audio signal, and the m-channel digital audio signal is supplied to the control unit 4.

【0018】さらに、カメラ12の広角レンズ11の視
野角全体に音声を発する各々異なる指向性を有するスピ
ーカ群18は、例えば、m個のスピーカ181,18
2,・・・18mにより構成されており、このスピーカ
群18に対応してアンプ171,172,・・・17m
およびD/A変換器161,162,・・・16mが設
けられている。後述するようにこれらmチャンネルの音
声再生系の中で所定のチャンネルにのみ制御ユニット4
からのディジタル音声信号が供給され、所定範囲に再生
音声が出力される。
Further, a group of speakers 18 having different directivities that emit sound over the entire viewing angle of the wide-angle lens 11 of the camera 12 is composed of, for example, m speakers 181, 18
, 18 m, and amplifiers 171, 172,.
And 16 m of D / A converters. As will be described later, the control unit 4 controls only a predetermined channel in the m-channel audio reproduction system.
, And a reproduced sound is output in a predetermined range.

【0019】一方、遠隔操作端末群6は、同一構成の例
えばn個の遠隔操作端末61,62,・・・6nにより
構成されている。遠隔操作端末61,62,・・・6n
のそれぞれには、図2に示すように正面の上側略々中央
には、例えば液晶表示板等からなる表示部71が設けら
れおり、正面の下側には、画像領域を指定する4個の操
作ボタン76,77,78,79と、画面の拡大/縮小
率を指定する操作ボタン74,75とが配設されてい
る。具体的には、操作ボタン76が画像領域を上方向に
移動させるUボタンであり、操作ボタン77が画像領域
を下方向に移動させるDボタンであり、操作ボタン78
が画像領域を左方向に移動させるLボタンであり、操作
ボタン79が画像領域を右方向に移動させるRボタンで
ある。また、操作ボタン74がズームアウトして画像を
縮小するTボタンであり、操作ボタン75がズームイン
して画像を拡大するWボタンである。こられの操作ボタ
ン74,75,76,77,78,79が利用者により
任意に操作されることにより撮影部1の設置地点におけ
る所望の画像が指定される。
On the other hand, the remote control terminal group 6 is composed of, for example, n remote control terminals 61, 62,... Remote control terminals 61, 62, ... 6n
2, a display unit 71 made of, for example, a liquid crystal display panel or the like is provided substantially at the center of the upper side of the front as shown in FIG. Operation buttons 76, 77, 78, and 79 and operation buttons 74 and 75 for specifying an enlargement / reduction ratio of the screen are provided. Specifically, the operation button 76 is a U button for moving the image area upward, the operation button 77 is a D button for moving the image area downward, and the operation button 78
Is an L button for moving the image area to the left, and the operation button 79 is an R button for moving the image area to the right. The operation button 74 is a T button for zooming out and reducing the image, and the operation button 75 is a W button for zooming in and enlarging the image. By operating these operation buttons 74, 75, 76, 77, 78, 79 arbitrarily by the user, a desired image at the installation point of the photographing unit 1 is designated.

【0020】また、遠隔操作端末61,62,・・・6
nの上側縁部には、図2に示すようにマイクロフォン7
2およびスピーカ73が配設されている。図示せずも遠
隔操作端末61,62,・・・6nのそれぞれは、その
内部に音声処理部、映像処理部および伝送処理部等を有
している。なお、音声処理部は、アンプ、A/D変換器
およびD/A変換器等により構成されており、音声信号
の入出力処理を行う。また、映像処理部は、D/A変換
器および信号処理回路等により構成されており、制御ユ
ニット4からの映像情報から表示信号を形成して表示部
71に供給し、所定の領域の画像を画面上に表示する。
さらに、伝送処理部は、ネットワークインターフェース
回路、伝送符号/復号器等により構成されており、マイ
クロフォン72を介して得られる音声信号と、画像領域
を指定する4個の操作ボタン76,77,78,79
と、画面の拡大/縮小率を指定する操作ボタン74,7
5との操作状態を検出して形成された操作情報とを伝送
媒体等に応じた伝送形態となるように変換し、得られた
情報を伝送路上に送出すると共に、その逆に供給される
制御ユニット4からの所定の伝送形態の情報から元の情
報を復元し、各部に供給する。
The remote control terminals 61, 62,...
n, a microphone 7 as shown in FIG.
2 and a speaker 73 are provided. Although not shown, each of the remote operation terminals 61, 62,... 6n has an audio processing unit, a video processing unit, a transmission processing unit, and the like inside. The audio processing unit includes an amplifier, an A / D converter, a D / A converter, and the like, and performs input / output processing of an audio signal. The video processing unit includes a D / A converter, a signal processing circuit, and the like. The video processing unit forms a display signal from video information from the control unit 4, supplies the display signal to the display unit 71, and converts an image of a predetermined area into an image. Display on the screen.
Further, the transmission processing unit is constituted by a network interface circuit, a transmission code / decoder, and the like. The audio signal obtained via the microphone 72 and the four operation buttons 76, 77, 78, and 79
And operation buttons 74 and 7 for designating a screen enlargement / reduction ratio
5 is converted into the transmission form corresponding to the transmission medium and the like, and the obtained information is sent out on the transmission line, and the control supplied to the other side is converted. The original information is restored from the information of the predetermined transmission form from the unit 4 and supplied to each unit.

【0021】上述した遠隔操作端末61,62,・・・
6nのそれぞれが例えばネットワーク/電話回線等の伝
送路51,52,・・・5nと接続され、n地点の遠隔
地と被制御撮影装置の制御ユニット4との間において互
いに情報の交換が可能な状態とされる。具体的には、遠
隔操作端末61,62,・・・6nのそれぞれにおい
て、画像領域を指定する4個の操作ボタン76,77,
78,79と、画面の拡大/縮小率を指定する操作ボタ
ン74,75との操作状態に応じて形成された操作情報
と、その遠隔操作端末61,62,・・・6nの周辺の
音声情報とが制御ユニット4に供給される。一方、制御
ユニット4からは、利用者によって指定された撮影部1
の設置箇所における所定領域の画像情報と、その領域の
音声情報とが遠隔操作端末61,62,・・・6nのそ
れぞれに供給される。つまり、撮影部1が一つしか設置
されていないにも係わらず、n個の遠隔操作端末61,
62,・・・6nに対して並列処理がなされ、いずれの
端末においても撮影部1の設置地点のそれぞれ別個の所
定領域の画像情報と音声情報とが入手される。
The above-mentioned remote control terminals 61, 62,...
6n are connected to transmission lines 51, 52,... 5n such as a network / telephone line, for example, so that information can be exchanged between a remote location at n points and the control unit 4 of the controlled photographing device. State. Specifically, in each of the remote operation terminals 61, 62,... 6n, four operation buttons 76, 77,
Operation information formed in accordance with the operation states of the operation buttons 78 and 79 and the operation buttons 74 and 75 for specifying the enlargement / reduction ratio of the screen, and audio information around the remote operation terminals 61, 62,. Are supplied to the control unit 4. On the other hand, from the control unit 4, the photographing unit 1 designated by the user
, 6n are supplied to each of the remote control terminals 61, 62,... 6n. In other words, n remote control terminals 61,
6n are subjected to parallel processing, and in each terminal, image information and audio information of a predetermined area different from each other at the installation location of the imaging unit 1 are obtained.

【0022】上述したように情報交換処理を行う制御ユ
ニット4は、例えば、映像処理部41、音声処理部42
および伝送処理部43等により構成されている。映像処
理部41は、遠隔操作端末群6からの各々の要求に対応
して制御情報を形成し、この制御情報をバッファメモリ
2および光学歪み補正部3のそれぞれに供給すること
で、所望の画像情報を複数入手し、この画像情報を伝送
処理部43に供給する。つまり、映像処理部41におい
て遠隔操作端末群6からの操作情報に応じ、画像の切り
出し位置と切り出し寸法を指示する制御情報が形成され
る。この映像処理部41において形成された制御情報が
バッファメモリ2および光学歪み補正部3のそれぞれに
供給されることで、光学歪み補正回路3において擬似的
に所望の画像が再現され、この所望の画像情報が制御ユ
ニット4に供給される。
As described above, the control unit 4 for performing the information exchange processing includes, for example, a video processing unit 41 and an audio processing unit 42.
And a transmission processing unit 43 and the like. The video processing unit 41 forms control information in response to each request from the remote operation terminal group 6 and supplies the control information to each of the buffer memory 2 and the optical distortion correction unit 3 so that a desired image is formed. A plurality of pieces of information are obtained, and this image information is supplied to the transmission processing unit 43. That is, in the video processing unit 41, control information for instructing a cutout position and a cutout size of an image is formed according to operation information from the remote operation terminal group 6. By supplying the control information formed in the video processing unit 41 to each of the buffer memory 2 and the optical distortion correction unit 3, a desired image is reproduced in the optical distortion correction circuit 3 in a pseudo manner. Information is supplied to the control unit 4.

【0023】また、音声処理部42は、遠隔操作群6か
らの操作情報に応じて遠隔操作端末群6からのそれぞれ
の音声情報を再生するスピーカをスピーカ群18の中か
ら決定し、その選択されたスピーカに対して音声情報を
出力すると共に、mチャンネルのディジタル音声信号の
中から遠隔操作群6からの操作情報に応じた所定の音声
信号を選択して、この選択したディジタル音声信号を伝
送処理部43に供給する。従って、音声処理部42にお
いて撮影部1の設置箇所の音声情報と、遠隔操作端末群
6の複数の設置箇所からの音声情報の交換がなされる。
なお、音声処理部42から出力されたディジタル音声信
号は、D/A変換器群16、アンプ群17およびスピー
カ群18の経路を介されることで音声として再生され
る。
The voice processing unit 42 determines a speaker for reproducing each voice information from the remote operation terminal group 6 from the speaker group 18 in accordance with the operation information from the remote operation group 6, and selects the selected speaker. Output audio information to the speaker and select a predetermined audio signal from the m-channel digital audio signal in accordance with the operation information from the remote operation group 6, and transmit the selected digital audio signal. It is supplied to the unit 43. Therefore, the voice processing unit 42 exchanges voice information of the installation location of the imaging unit 1 and voice information from a plurality of installation locations of the remote operation terminal group 6.
The digital audio signal output from the audio processing unit 42 is reproduced as audio by passing through the path of the D / A converter group 16, the amplifier group 17, and the speaker group 18.

【0024】伝送処理部43は、ネットワークインター
フェース回路、伝送符号/復号器等により構成されてお
り、音声処理部42からの音声情報と、映像処理部41
からの画像情報とを伝送媒体等に応じた伝送形態となる
ように変換し、得られた情報を要求先である遠隔操作端
末群6のいずれかに転送するように伝送路上に送出す
る。また、その逆に供給される遠隔操作端末群6からの
所定の伝送形態とされた情報から元の操作情報と音声情
報とを復元し、操作情報を映像処理部41および音声処
理42に供給すると共に、音声情報を音声処理部42に
供給する。
The transmission processing unit 43 is composed of a network interface circuit, a transmission code / decoder, etc., and outputs the audio information from the audio processing unit 42 and the video processing unit 41.
Is converted into a transmission form corresponding to a transmission medium or the like, and the obtained information is sent out on a transmission path so as to be transferred to one of the remote operation terminal groups 6 that are the request destinations. On the other hand, the original operation information and audio information are restored from the information in a predetermined transmission form supplied from the remote operation terminal group 6 and the operation information is supplied to the video processing unit 41 and the audio processing 42. At the same time, the audio information is supplied to the audio processing unit 42.

【0025】上述したようになされる遠隔操作に応じた
処理について更に詳細に説明する。図3にこの発明の一
実施形態における遠隔操作に応じた処理手順を概略化し
て示す。一例として遠隔操作端末61を用いてカメラ1
2を右にパンする場合を例に挙げ、その処理について説
明する。なお、画像の切り出し位置および切り出し寸法
に応じた光学歪みの値は、初期値が設定されているもの
とする。
The processing according to the remote operation performed as described above will be described in further detail. FIG. 3 schematically shows a processing procedure according to a remote operation in one embodiment of the present invention. As an example, a camera 1 using a remote control terminal 61
The process will be described with an example of panning 2 to the right. It is assumed that an initial value is set for the value of the optical distortion corresponding to the cutout position and the cutout size of the image.

【0026】遠隔操作端末61は、単位時間毎に操作情
報を制御ユニット4に送出する。先ず、Rボタン79が
押された場合(ステップS1)には、例えば、遠隔操作
端末61において「100000」といった6ビットの
操作情報が形成され、この操作情報が制御ユニット4に
供給される。
The remote operation terminal 61 sends operation information to the control unit 4 at every unit time. First, when the R button 79 is pressed (step S1), for example, 6-bit operation information such as “100000” is formed in the remote operation terminal 61, and this operation information is supplied to the control unit 4.

【0027】制御ユニット4の映像処理部41におい
て、端末側からの操作情報から操作者の押したボタンの
検出がなされ、それに応じた処理がなされる。この場合
においては、Rボタン79が押されているため、先ず、
ステップS11において現在のカメラ12の水平位置が
読み出される。
In the video processing section 41 of the control unit 4, the button pressed by the operator is detected from the operation information from the terminal side, and the processing corresponding thereto is performed. In this case, since the R button 79 has been pressed, first,
In step S11, the current horizontal position of the camera 12 is read.

【0028】そして、ステップS21において、画像の
切り出し位置を更新する必要があるかどうかが判定され
る。画像の切り出し位置を更新する必要がある場合に
は、ステップS31に移行し、既に切り出し位置が限度
一杯の右の端にあり画像の切り出し位置を更新する必要
がない場合には、ステップS34に移行する。
Then, in step S21, it is determined whether it is necessary to update the cutout position of the image. If it is necessary to update the cutout position of the image, the process proceeds to step S31. If the cutout position is already at the right end of the limit and it is not necessary to update the cutout position of the image, the process proceeds to step S34. I do.

【0029】ステップS21において、画像の切り出し
位置を更新する必要があると判定された場合には、ステ
ップS31において、画像の切り出し位置が右に移動さ
れ、更新処理がなされる。画像の切り出し位置の更新が
完了すると、ステップS33において、光学歪みの補正
方法が決定される。つまり、カメラのレンズ固有の光学
歪みは、画角中の位置によって一義的に決定されるた
め、この場合においては、前回操作により設定されてい
る切り出し寸法と新たな画像の切り出し位置に基づいて
所望の切り出し画像を形成するための歪み補正係数が決
定される。ステップS33の処理が完了すると、ステッ
プS34に移行する。
If it is determined in step S21 that the cutout position of the image needs to be updated, the cutout position of the image is moved to the right in step S31, and an update process is performed. When the update of the cutout position of the image is completed, in step S33, a correction method of the optical distortion is determined. That is, since the optical distortion inherent to the camera lens is uniquely determined by the position in the angle of view, in this case, the desired distortion is determined based on the cutout size set by the previous operation and the cutout position of the new image. The distortion correction coefficient for forming the cutout image is determined. Upon completion of the process in the step S33, the process shifts to a step S34.

【0030】一方、ステップS35において、カメラ1
2において形成されたディジタル画像信号がバッファメ
モリ2に供給され、例えば、所定時間間隔で更新されな
がら一時的に蓄積されている。従って、ステップS35
における初期段階の画像の更新処理が完了する度にステ
ップS34に移行し、所望の画像を形成するための歪み
補正係数に基づいた補正処理が光学歪み補正部3におい
てなされる。補正後の画像情報が新たな切り出し画像情
報として取り出され、この画像情報が制御部4の伝送処
理部43を介して端末側に転送される。なお、操作がな
されなかった場合(ステップS7)には、そのままステ
ップS34に移行し、前回と同様に所望の画像を形成す
るための歪み補正係数に基づいた補正処理が光学歪み補
正部3においてなされ、以下、同様とされる。
On the other hand, in step S35, the camera 1
The digital image signal formed in 2 is supplied to the buffer memory 2 and temporarily stored while being updated at a predetermined time interval, for example. Therefore, step S35
Each time the image update process in the initial stage is completed, the process proceeds to step S34, and the optical distortion correction unit 3 performs a correction process based on a distortion correction coefficient for forming a desired image. The corrected image information is extracted as new clipped image information, and the image information is transferred to the terminal via the transmission processing unit 43 of the control unit 4. If no operation has been performed (step S7), the process directly proceeds to step S34, and a correction process based on a distortion correction coefficient for forming a desired image is performed in the optical distortion correction unit 3 as in the previous case. The same applies hereinafter.

【0031】画像情報を受け取った遠隔操作端末61に
おいて、表示部71の表示画面の更新がなされる(ステ
ップS36)。このように遠隔操作端末61を操作する
ことで利用者は、撮影部1の設置箇所の所望の領域の画
像をその表示画面に表示することができ、この状態で以
て一連の処理が完了する。
In the remote control terminal 61 that has received the image information, the display screen of the display unit 71 is updated (step S36). By operating the remote control terminal 61 in this manner, the user can display an image of a desired area where the imaging unit 1 is installed on the display screen, and in this state, a series of processing is completed. .

【0032】なお、Lボタン78が押された場合(ステ
ップS2)に関しても上述したRボタン78が押された
場合と同様の処理がなされ、左方向の画像情報が新たな
切り出し画像情報として取り出される。
When the L button 78 is pressed (step S2), the same processing as when the R button 78 is pressed is performed, and the image information in the left direction is extracted as new clipped image information. .

【0033】また、Uボタン76およびDボタン77押
された場合(ステップS3およびステップS4)には、
先ず、ステップS12において現在のカメラ12の垂直
位置が読み出される。そして、ステップS22におい
て、画像の切り出し位置を更新する必要があるかどうか
が判定される。画像の切り出し位置を更新する必要があ
る場合には、ステップS31に移行し、画像の切り出し
位置を更新する必要がない場合には、ステップS34に
移行し、上述したRボタン78が押された場合と同様の
処理がなされる。
When the U button 76 and the D button 77 are pressed (steps S3 and S4),
First, in step S12, the current vertical position of the camera 12 is read. Then, in step S22, it is determined whether or not the cutout position of the image needs to be updated. When it is necessary to update the cutout position of the image, the process proceeds to step S31. When it is not necessary to update the cutout position of the image, the process proceeds to step S34, and when the above-described R button 78 is pressed. Is performed.

【0034】さらに、Tボタン74およびWボタン75
押された場合(ステップS5およびステップS6)に
は、先ず、ステップS13において現在のカメラ12の
画角が読み出される。そして、ステップS23におい
て、画像の切り出し寸法を更新する必要があるかどうか
が判定される。画像の切り出し寸法を更新する必要があ
る場合には、ステップS32に移行し、画像の切り出し
寸法を更新する必要がない場合には、ステップS34に
移行して上述したRボタン78が押された場合と同様の
処理がなされる。
Further, a T button 74 and a W button 75
When pressed (steps S5 and S6), first, the current angle of view of the camera 12 is read in step S13. Then, in step S23, it is determined whether or not the cutout size of the image needs to be updated. When it is necessary to update the cutout size of the image, the process proceeds to step S32. When it is not necessary to update the cutout size of the image, the process proceeds to step S34, and when the above-described R button 78 is pressed. Is performed.

【0035】ステップS23において、画像の切り出し
寸法を更新する必要があると判定された場合には、ステ
ップS32において、画像の切り出し寸法が拡大もしく
は縮小され、更新処理がなされる。画像の切り出し寸法
の更新が完了すると、ステップS33において、光学歪
みの補正方法が決定される。つまり、カメラのレンズ固
有の光学歪みは、画角中の位置によって一義的に決定さ
れるため、この場合においては、前回操作により設定さ
れている切り出し位置と新たな画像の切り出し寸法に基
づいて所望の切り出し画像を形成するための歪み補正係
数が決定される。ステップS33の処理が完了すると、
ステップS34に移行し、上述したRボタン78が押さ
れた場合と同様の処理がなされる。
If it is determined in step S23 that the cutout size of the image needs to be updated, in step S32, the cutout size of the image is enlarged or reduced, and an update process is performed. When the update of the cutout size of the image is completed, in step S33, a method for correcting optical distortion is determined. That is, since the optical distortion inherent to the camera lens is uniquely determined by the position in the angle of view, in this case, the desired distortion is determined based on the cutout position set by the previous operation and the cutout size of a new image. The distortion correction coefficient for forming the cutout image is determined. Upon completion of the process in the step S33,
The process proceeds to step S34, and the same processing as when the above-described R button 78 is pressed is performed.

【0036】上述した一実施形態における制御ユニット
4の動作について更に詳細に説明する。図4Aにこの発
明の一実施形態における撮影部1の一例としての構成と
その設置状況を示す。なお、図4Aに示す例の場合に
は、5個のマイクロフォン131〜135とスピーカ1
81〜185とがそれぞれに組み合わされて撮影部1の
筐体に等間隔に配設されている。
The operation of the control unit 4 in the above-described embodiment will be described in more detail. FIG. 4A shows a configuration as an example of the photographing unit 1 according to the embodiment of the present invention and the installation state thereof. In the example shown in FIG. 4A, the five microphones 131 to 135 and the speaker 1
81 to 185 are combined with each other and arranged at equal intervals on the housing of the imaging unit 1.

【0037】図4Aにおいて81で示されるのが撮影部
1が設置された被制御撮影装置側の利用者である。例え
ば、利用者81が地点a近傍に位置し、その領域の画像
が遠隔操作端末群6で指定された場合には、図中矢印9
1で示すように広角レンズ11を介して得られる領域の
画像が補正処理され、遠隔操作端末群6の要求先に転送
される。この時、マイクロフォン132およびスピーカ
182が制御ユニット4により選択される。従って、マ
イクロフォン132を介して取り込まれた音声情報も画
像情報と合わせて遠隔操作端末群6の要求先に転送され
ると共に、遠隔操作端末群6からの音声情報がスピーカ
182から再生される。このことにより撮影部1の設置
地点と、遠隔操作端末群6の前の複数の利用者との間に
おいて円滑にコミニュケーションが図られる。
In FIG. 4A, reference numeral 81 denotes a user on the controlled photographing apparatus side where the photographing unit 1 is installed. For example, when the user 81 is located in the vicinity of the point a and the image of the area is designated by the remote operation terminal group 6, the arrow 9 in FIG.
As shown by reference numeral 1, the image of the area obtained through the wide-angle lens 11 is subjected to correction processing, and is transferred to a request destination of the remote operation terminal group 6. At this time, the microphone 132 and the speaker 182 are selected by the control unit 4. Accordingly, the audio information captured via the microphone 132 is transferred to the request destination of the remote operation terminal group 6 together with the image information, and the audio information from the remote operation terminal group 6 is reproduced from the speaker 182. Accordingly, communication is smoothly performed between the installation location of the imaging unit 1 and a plurality of users in front of the remote operation terminal group 6.

【0038】なお、地点b近傍の領域の画像が遠隔操作
端末群6で指定された場合には、図中矢印92で示すよ
うに広角レンズ11を介して得られる領域の画像が補正
処理され、遠隔操作端末群6の要求先に転送される。こ
の時においては、マイクロフォン134およびスピーカ
184が制御ユニット4により選択される。
When the image of the area near the point b is designated by the remote operation terminal group 6, the image of the area obtained through the wide-angle lens 11 is corrected as shown by an arrow 92 in the figure. The request is transferred to the request destination of the remote operation terminal group 6. At this time, the microphone 134 and the speaker 184 are selected by the control unit 4.

【0039】また、図4Bにこの発明の一実施形態にお
ける撮影部1の他の例としての構成とその設置状況を示
す。なお、図4Bに示す例の場合には、スピーカ181
〜185のみが撮影部1の筐体に等間隔に配設されてい
る。
FIG. 4B shows another example of the configuration of the photographing unit 1 according to the embodiment of the present invention and its installation state. Note that in the case of the example shown in FIG.
185 are arranged at equal intervals on the housing of the photographing unit 1.

【0040】図4Bにおいて81で示されるのが撮影部
1の設置側の利用者であり、また、図4において82で
示されるのが別体に設けられた操作ユニットである。操
作ユニット82には、マイクロフォンが配設されると共
に、スピーカの選択用のスイッチが配設されている。例
えば、利用者81が地点a近傍に位置し、その領域の画
像が遠隔操作端末群6で指定された場合には、図中矢印
91で示すように広角レンズ11を介して得られる領域
の画像が補正処理され、遠隔操作端末群6の要求先に転
送される。この時、上述した例の場合においては、自動
的に制御ユニット4によりマイクロフォン131〜13
5およびスピーカ181〜185のいずれかが選択され
る。この例の場合においては、利用者81が手動にてマ
イクロフォンおよびスピーカの選択を行う。従って、操
作ユニット82の指定したマイクロフォンを介して取り
込まれた音声情報が画像情報と合わせて遠隔操作端末群
6に転送されると共に、遠隔操作端末群6からの音声情
報が利用者81により選択された所定のスピーカから再
生される。このことにより撮影部1の設置地点の利用者
81と、遠隔操作端末群6の前の複数の利用者の中の特
定の利用者との間において円滑にコミニュケーションが
図られる。
In FIG. 4B, reference numeral 81 indicates a user on the installation side of the photographing unit 1, and reference numeral 82 in FIG. 4 indicates an operation unit provided separately. The operation unit 82 is provided with a microphone and a switch for selecting a speaker. For example, when the user 81 is located near the point a and the image of the area is designated by the remote operation terminal group 6, the image of the area obtained through the wide-angle lens 11 as indicated by an arrow 91 in the figure Is corrected and transferred to the request destination of the remote operation terminal group 6. At this time, in the case of the above-described example, the microphones 131 to 13 are automatically controlled by the control unit 4.
5 and any of the speakers 181 to 185 are selected. In the case of this example, the user 81 manually selects a microphone and a speaker. Accordingly, the voice information taken in through the microphone designated by the operation unit 82 is transferred to the remote operation terminal group 6 together with the image information, and the voice information from the remote operation terminal group 6 is selected by the user 81. Is reproduced from a predetermined speaker. Thus, communication is smoothly performed between the user 81 at the installation location of the imaging unit 1 and a specific user among the plurality of users in front of the remote operation terminal group 6.

【0041】以下、この発明の一実施形態の実際の利用
方法について簡単に説明する。上述したように遠隔操作
端末群6の前の複数の利用者は、お互いを意識すること
なく撮影部1の設置箇所のカメラ12による所望の領域
の画像をみることができ、また、撮影部1の設置箇所の
利用者とお互いのマイクロフォンとスピーカを介して会
話することが可能とされているため、例えば、この発明
の一実施形態を通信販売に応用すれば遠隔地の利用者
は、カメラを操作して商品を自由に見ることができると
共に、必要に応じて店員などに話かけて商品の案内を容
易に受けることができ、効率化および簡素化が図られ
る。
Hereinafter, a practical use of the embodiment of the present invention will be briefly described. As described above, a plurality of users in front of the remote operation terminal group 6 can see an image of a desired area by the camera 12 at the installation location of the imaging unit 1 without being aware of each other. It is possible to have a conversation with the user at the installation location of each other via each other's microphone and speaker. For example, if one embodiment of the present invention is applied to mail-order sales, a user at a remote place can use the camera. The product can be viewed freely by operating it, and it is possible to talk to a clerk or the like as needed to easily receive information on the product, thereby achieving efficiency and simplification.

【0042】また、音声切り換えスイッチを設ける図4
Bに示す場合においては、撮影部1の設置地点の利用者
は、必要に応じて音声の接続に制限を加えることかで
き、遠隔操作端末群6側の複数の利用者の中で特定の利
用者以外が会話に参加できないようにできる。従って、
この発明の一実施形態を通信販売に応用すれば、撮影部
1の設置箇所の利用者は、必要に応じてカメラ12の前
で商品を手に取りながら効率良く、詳しく説明すること
が可能となる。
FIG. 4 is provided with an audio changeover switch.
In the case shown in B, the user at the installation location of the photographing unit 1 can limit the voice connection as necessary, and can use a specific user among the plurality of users on the remote operation terminal group 6 side. You can prevent others from participating in the conversation. Therefore,
If one embodiment of the present invention is applied to mail-order sales, it is possible for a user at the installation location of the imaging unit 1 to efficiently and in detail explain a product while picking up a product in front of the camera 12 as necessary. Become.

【0043】なお、上述した一実施形態の説明において
は、音声情報に関して異なる地点の情報を交換すること
が可能とされているが、遠隔操作端末群6側において
も、撮影部1、バッファメモリ2、光学歪み補正部3お
よび制御ユニット4を設けて双方向に映像情報に関して
も交換するようにして双方向通信システムを構成するよ
うにしても良い。
In the above description of one embodiment, it is possible to exchange information of different points with respect to audio information. However, the remote control terminal group 6 also has a photographing unit 1 and a buffer memory 2. Alternatively, an optical distortion correction unit 3 and a control unit 4 may be provided to exchange video information in both directions, thereby forming a two-way communication system.

【0044】また、上述した一実施形態の説明において
は、マイクロフォン群13およびスピーカ群18の中で
所定のものを選択して用いる場合について説明したが、
ゲインコントロール手段と加算手段等を用いて指定され
る所定領域に応じて音声の強調もしくは抑制処理を行う
ようにしても良い。
Further, in the description of the above-described embodiment, a case has been described in which predetermined ones are selected from the microphone group 13 and the speaker group 18 and used.
The voice emphasis or suppression processing may be performed according to a predetermined area specified by using the gain control means and the addition means.

【0045】さらに、上述した図4Aの例の説明におい
ては、マイクロフォン群13およびスピーカ群18を撮
影部1の筐体に取り付ける場合について説明したが、図
4Bに示すようにマイクロフォンを他の場所に設置して
も良く、また、スピーカに関しても分散配置しても良
い。
Further, in the above description of the example of FIG. 4A, the case where the microphone group 13 and the speaker group 18 are attached to the housing of the photographing unit 1 has been described. However, as shown in FIG. The speakers may be installed, and the speakers may be arranged in a distributed manner.

【0046】[0046]

【発明の効果】この発明に依れば、機構部等の制御を伴
うことなく、電子的に同時に多方向の映像と音声を複数
の遠隔地からの要求に応じて転送することが可能とさ
れ、音声に関しても円滑にコミュニケーションを図るこ
とが可能とされる。
According to the present invention, it is possible to electronically simultaneously transfer multi-directional video and audio in response to requests from a plurality of remote locations without control of a mechanism or the like. It is also possible to smoothly communicate with respect to voice.

【図面の簡単な説明】[Brief description of the drawings]

【図1】この発明の一実施形態の全体の構成を示すブロ
ック図である。
FIG. 1 is a block diagram showing an overall configuration of an embodiment of the present invention.

【図2】この発明の一実施形態における遠隔操作端末装
置の外観と情報交換の様子を示す略線図である。
FIG. 2 is a schematic diagram illustrating an appearance of a remote operation terminal device and a state of information exchange according to an embodiment of the present invention.

【図3】この発明の一実施形態の動作説明に用いる略線
図である。
FIG. 3 is a schematic diagram used for describing the operation of the embodiment of the present invention.

【図4】この発明の一実施形態における音声処理の一例
および他の例の説明に用いる略線図である。
FIG. 4 is a schematic diagram used for describing an example and another example of the audio processing according to the embodiment of the present invention;

【符号の説明】[Explanation of symbols]

1・・・撮影部、2・・・バッファメモリ、3・・・光
学歪み補正部、4・・・制御ユニット、11・・・広角
レンズ、12・・・カメラ、51,52,5n・・・伝
送路、61,62,6n・・・遠隔操作端末、131,
132,13n・・・マイクロフォン、181,18
2,18n・・・スピーカ
DESCRIPTION OF SYMBOLS 1 ... Photographing part, 2 ... Buffer memory, 3 ... Optical distortion correction part, 4 ... Control unit, 11 ... Wide angle lens, 12 ... Camera, 51, 52, 5n ... Transmission line, 61, 62, 6n remote control terminal, 131,
132, 13n: microphones, 181, 18
2, 18n ... speaker

───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5C054 AA02 CC05 DA09 EB05 EB07 FD00 FD07 GA04 GD09 HA24 5C064 AA01 AC02 AC06 AC07 AC12 AC16 5K015 AB01 JA00 5K101 KK07 KK11 NN06 NN07 NN14 NN18  ──────────────────────────────────────────────────続 き Continued on the front page F term (reference) 5C054 AA02 CC05 DA09 EB05 EB07 FD00 FD07 GA04 GD09 HA24 5C064 AA01 AC02 AC06 AC07 AC12 AC16 5K015 AB01 JA00 5K101 KK07 KK11 NN06 NN07 NN14 NN18

Claims (6)

【特許請求の範囲】[Claims] 【請求項1】 広角レンズを有する撮像手段と、 上記撮像手段により撮像される範囲の略々全てを集音範
囲とするように、複数の指向性を有する複数の音声入力
手段と、 上記撮像手段により撮像される画像を記憶する記憶手段
と、 要求される所定領域に従って上記複数の音声入力手段を
切り換えるか、または、上記複数の音声入力手段の各々
の音量レベルを調整する音声制御手段と、 要求される所定領域の画像情報、および上記音声制御手
段により制御された音声情報を遠隔の端末装置に対して
転送する転送手段とを備えた被制御撮影装置と、 上記被制御撮影装置と伝送路を介して接続され、上記撮
像手段に対して遠隔から上記所定領域の画像を要求する
要求手段を有する端末装置とからなることを特徴とする
通信システム。
An imaging unit having a wide-angle lens; a plurality of voice input units having a plurality of directivities so that substantially all of the range imaged by the imaging unit is a sound collection range; Storage means for storing an image picked up by the CPU, voice control means for switching between the plurality of voice input means in accordance with a required predetermined area, or adjusting a volume level of each of the plurality of voice input means, A controlled imaging device having a transfer unit for transferring image information of a predetermined area to be performed and audio information controlled by the audio control unit to a remote terminal device; And a terminal device connected via the terminal device and having a request unit for requesting the image pickup unit to remotely request an image of the predetermined area.
【請求項2】 広角レンズを有する撮像手段と、 上記撮像手段により撮像される範囲の略々全てを集音範
囲とするように、複数の指向性を有する複数の音声入力
手段と、 上記撮像手段により撮像される画像を記憶する記憶手段
と、 遠隔の端末から要求される画像領域に応じて上記複数の
音声入力手段を切り換えるか、または、上記複数の音声
入力手段の各々の音量レベルを調整する音声制御手段
と、 上記要求される画像領域の画像情報、および上記制御手
段により制御された音声情報を遠隔の端末装置へ転送す
る転送手段とを備えたことを特徴とする被制御撮影装
置。
2. An image pickup means having a wide-angle lens, a plurality of sound input means having a plurality of directivities so that substantially all of the range imaged by the image pickup means is a sound collection range, and the image pickup means Storage means for storing an image picked up by the user, and switching between the plurality of voice input means or adjusting the volume level of each of the plurality of voice input means in accordance with an image area requested from a remote terminal A controlled imaging apparatus comprising: voice control means; and transfer means for transferring image information of the requested image area and voice information controlled by the control means to a remote terminal device.
【請求項3】 広角レンズを有する撮像手段と、上記撮
像手段により撮像される範囲の略々全てを集音範囲とす
るように、複数の指向性を有する複数の音声入力手段
と、上記撮像手段により撮像される画像を記憶する記憶
手段と、要求される画像領域に応じて上記複数の音声入
力手段を切り換えるか、または、上記複数の音声入力手
段の各々の音量レベルを調整する音声制御手段と、上記
要求される画像領域の画像、および上記制御手段により
制御された音声情報を所定の遠隔地に転送する転送手段
とを備えた被制御撮影装置と伝送路を介して接続される
端末装置であって、 上記被制御撮影装置から送信された画像情報を表示する
表示手段と、 上記被制御撮影装置から送信された音声情報を再生する
手段と、 上記被制御撮影装置に対して要求する所定領域の画像を
指定する要求手段と、 上記所定領域の画像を指定する情報を上記被制御撮影装
置に転送する転送手段とを備えたことを特徴とする端末
装置。
3. An image pickup means having a wide-angle lens, a plurality of sound input means having a plurality of directivities so that substantially all of a range imaged by the image pickup means is a sound collection range, and the image pickup means A storage unit for storing an image captured by the control unit, and a voice control unit that switches between the plurality of voice input units according to a required image area or adjusts a volume level of each of the plurality of voice input units. A terminal device connected via a transmission path to a controlled imaging device having a transfer unit for transferring an image of the requested image area and audio information controlled by the control unit to a predetermined remote place. A display unit for displaying image information transmitted from the controlled imaging device; a unit for reproducing audio information transmitted from the controlled imaging device; and a request for the controlled imaging device. A terminal device comprising: a requesting unit that specifies an image of a predetermined region to be transferred; and a transfer unit that transfers information specifying the image of the predetermined region to the controlled imaging device.
【請求項4】 請求項1または3において、 上記要求手段は、画角情報を指示する操作部材を有し、
上記操作部材の状態に応じて所定領域を指定することを
特徴とする装置。
4. The method according to claim 1, wherein the requesting means has an operation member for instructing angle-of-view information.
An apparatus for designating a predetermined area according to a state of the operation member.
【請求項5】 請求項3において、 上記被制御撮影装置は、上記要求手段からの操作情報に
基づいて上記記憶手段から所定の画像領域を切り出して
光学歪みを補正すると共に、拡大もしくは縮小して上記
要求される上記所定領域の画像として出力することを特
徴とする通信システム。
5. The controlled photographing device according to claim 3, wherein the controlled imaging device cuts out a predetermined image area from the storage unit based on operation information from the requesting unit, corrects optical distortion, and enlarges or reduces the distortion. A communication system for outputting an image of the predetermined area as requested.
【請求項6】 広角レンズを有する撮像手段により撮像
することによって画像情報を収集するステップと、 複数の指向性を有する複数の音声入力手段によって、上
記撮像手段により撮像される範囲の略々全てを集音範囲
として、音声情報を収集するステップと、 上記撮像手段により撮像される画像を記憶するステップ
と、 要求される所定領域に従って上記複数の音声入力手段を
切り換えるか、または、上記複数の音声入力手段の各々
の音量レベルを調整する音声制御のステップと、 要求される所定領域の画像情報、および上記音声制御手
段により制御された音声情報を遠隔の端末装置に対して
転送するステップと、 上記撮像手段に対して遠隔から上記所定領域の画像を要
求するステップとからなることを特徴とする通信方法。
6. A step of collecting image information by picking up an image by an image pickup means having a wide-angle lens, and a step of collecting substantially all of a range imaged by the image pickup means by a plurality of voice input means having a plurality of directivities. Collecting voice information as a sound collection range; storing an image captured by the image capturing means; switching between the plurality of voice input means according to a required predetermined area; Means for adjusting the sound volume level of each of the means, transferring image information of a required predetermined area, and sound information controlled by the sound control means to a remote terminal device; Requesting an image of the predetermined area from the means remotely.
JP28399298A 1998-10-06 1998-10-06 COMMUNICATION SYSTEM AND METHOD, CONTROLLED PHOTOGRAPHING DEVICE, AND TERMINAL DEVICE Expired - Fee Related JP4182569B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP28399298A JP4182569B2 (en) 1998-10-06 1998-10-06 COMMUNICATION SYSTEM AND METHOD, CONTROLLED PHOTOGRAPHING DEVICE, AND TERMINAL DEVICE

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP28399298A JP4182569B2 (en) 1998-10-06 1998-10-06 COMMUNICATION SYSTEM AND METHOD, CONTROLLED PHOTOGRAPHING DEVICE, AND TERMINAL DEVICE

Publications (2)

Publication Number Publication Date
JP2000115753A true JP2000115753A (en) 2000-04-21
JP4182569B2 JP4182569B2 (en) 2008-11-19

Family

ID=17672894

Family Applications (1)

Application Number Title Priority Date Filing Date
JP28399298A Expired - Fee Related JP4182569B2 (en) 1998-10-06 1998-10-06 COMMUNICATION SYSTEM AND METHOD, CONTROLLED PHOTOGRAPHING DEVICE, AND TERMINAL DEVICE

Country Status (1)

Country Link
JP (1) JP4182569B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002281466A (en) * 2001-03-21 2002-09-27 Denso Corp Telephone system with camera
JP2003219389A (en) * 2002-01-18 2003-07-31 Nippon Telegr & Teleph Corp <Ntt> Video distribution method, system, and apparatus, user terminal, video distribution program, and storage medium storing the video distribution program
JP2007034238A (en) * 2005-07-29 2007-02-08 Kobe Steel Ltd On-site operation support system
WO2007119712A1 (en) 2006-04-13 2007-10-25 Opt Corporation Camera apparatus, and image processing apparatus and image processing method
WO2008059859A1 (en) * 2006-11-16 2008-05-22 Opt Corporation Device drive control server device, device drive control system, and device drive control method
JP2009218851A (en) * 2008-03-11 2009-09-24 Hitachi Ltd Video processing apparatus
WO2021261236A1 (en) * 2020-06-22 2021-12-30 ソニーグループ株式会社 Medical observation system, image processing method, and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0955925A (en) * 1995-08-11 1997-02-25 Nippon Telegr & Teleph Corp <Ntt> Picture system
JPH09202180A (en) * 1996-01-29 1997-08-05 Niles Parts Co Ltd On-board camera device
JPH09261522A (en) * 1996-03-27 1997-10-03 Nippon Telegr & Teleph Corp <Ntt> Video image distribution method and system to obtain variable area

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0955925A (en) * 1995-08-11 1997-02-25 Nippon Telegr & Teleph Corp <Ntt> Picture system
JPH09202180A (en) * 1996-01-29 1997-08-05 Niles Parts Co Ltd On-board camera device
JPH09261522A (en) * 1996-03-27 1997-10-03 Nippon Telegr & Teleph Corp <Ntt> Video image distribution method and system to obtain variable area

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002281466A (en) * 2001-03-21 2002-09-27 Denso Corp Telephone system with camera
JP2003219389A (en) * 2002-01-18 2003-07-31 Nippon Telegr & Teleph Corp <Ntt> Video distribution method, system, and apparatus, user terminal, video distribution program, and storage medium storing the video distribution program
JP2007034238A (en) * 2005-07-29 2007-02-08 Kobe Steel Ltd On-site operation support system
WO2007119712A1 (en) 2006-04-13 2007-10-25 Opt Corporation Camera apparatus, and image processing apparatus and image processing method
EP2009907A1 (en) * 2006-04-13 2008-12-31 Opt Corporation Camera apparatus, and image processing apparatus and image processing method
EP2009907A4 (en) * 2006-04-13 2009-05-06 Opt Corp Camera apparatus, and image processing apparatus and image processing method
WO2008059859A1 (en) * 2006-11-16 2008-05-22 Opt Corporation Device drive control server device, device drive control system, and device drive control method
JP2009218851A (en) * 2008-03-11 2009-09-24 Hitachi Ltd Video processing apparatus
WO2021261236A1 (en) * 2020-06-22 2021-12-30 ソニーグループ株式会社 Medical observation system, image processing method, and program

Also Published As

Publication number Publication date
JP4182569B2 (en) 2008-11-19

Similar Documents

Publication Publication Date Title
US6288742B1 (en) Video camera including multiple image sensors
US8390665B2 (en) Apparatus, system and method for video call
JP4182569B2 (en) COMMUNICATION SYSTEM AND METHOD, CONTROLLED PHOTOGRAPHING DEVICE, AND TERMINAL DEVICE
JP2000332865A (en) Mobile phone with camera
JP2003244482A (en) Production system
JP2849862B2 (en) Simultaneous image and audio transfer
JPH0965309A (en) Video conference equipment
JPH0758859A (en) Information transmitter and information receiver for conference
KR101143164B1 (en) Method and apparatus for managing audio input signal in case of photographing moving images in portable termination
KR19990084509A (en) Television with telephone and video communications
JPH08149345A (en) Camera system
JPH0937232A (en) Remote image monitor
JPH0575995A (en) Terminal device for video conference
KR100565184B1 (en) Volume Control Circuit of Collective Video Conference System
KR101969957B1 (en) Portable Broadcasting Integrated Control System and the method using it
JPH11308589A (en) Image transmitter and its method
JPH07298105A (en) Camera system
JPH07193798A (en) Video/acoustic communication equipment
JP2002118671A (en) Camera controller and video system using the same
JPH11187295A (en) Portable videophone and voice collection method
JPH09116802A (en) Image transmitter and image transmitting method
JP2014107826A (en) Document camera, audio visual output system, and audio visual output method
JP2560447B2 (en) Multipoint video conference system
JPH05176316A (en) Image communication system
KR20110045212A (en) CCTV camera remote control transceiver

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050826

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071204

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080204

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080812

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080825

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110912

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110912

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees