JPH0349385A - Codisplay type picture telephone system - Google Patents

Codisplay type picture telephone system

Info

Publication number
JPH0349385A
JPH0349385A JP1185187A JP18518789A JPH0349385A JP H0349385 A JPH0349385 A JP H0349385A JP 1185187 A JP1185187 A JP 1185187A JP 18518789 A JP18518789 A JP 18518789A JP H0349385 A JPH0349385 A JP H0349385A
Authority
JP
Japan
Prior art keywords
image
terminal
communication
terminals
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP1185187A
Other languages
Japanese (ja)
Other versions
JP2849119B2 (en
Inventor
Hajime Suzuki
元 鈴木
Yoshimasa Kimura
木村 義政
Mineo Masamitsu
峰夫 正満
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP1185187A priority Critical patent/JP2849119B2/en
Publication of JPH0349385A publication Critical patent/JPH0349385A/en
Application granted granted Critical
Publication of JP2849119B2 publication Critical patent/JP2849119B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Abstract

PURPOSE:To simultaneously realize conversation and information retrieval by interlocking and synchronizing picture data files stored in individual terminals remote from each other to display them together with operator's pictures as one body while electronically making conversation through a communication network. CONSTITUTION:When a terminal operator 8 or 9 retrieves a picture, contents of an indicated control signal are transmitted from his telephone and control part 2 to storage picture files 3 in both terminals through a communication network 1. Then, control contents executed in one terminal is simultaneously and synchronously executed in the other terminal. For example, a picture 6 retrieved and outputted from the storage picture file and a real-time operator's face picture 7 are collectively displayed on one display device. Thus, interlocking synchronous retrieval display of picture retrieval and coupling between the interlocking storage picture and real-time face picture communication are realized.

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は、端末に画像蓄積機能を持つとともに、複数の
他の端末の画像蓄積機能と、通信網を介I7て、連動し
て同期制御を行うことのできるテレビ電話方式に関する
ものである。
[Detailed Description of the Invention] [Field of Industrial Application] The present invention provides a terminal with an image storage function, and synchronized control in conjunction with the image storage function of a plurality of other terminals via a communication network. This relates to a videophone system that allows for

〔従来技術〕[Prior art]

従来、ディジタル通信網を活用した画像通信サービスと
しては、テレビ電話やビデオテックス等が、従来から研
究・開発されており、今後広範に普及するサービスとし
て期待されている。
BACKGROUND ART Conventionally, videophones, videotex, and the like have been researched and developed as image communication services utilizing digital communication networks, and these services are expected to become widespread in the future.

しかし、対面機能をねらいとしたテレビ電話に関しては
、利用者側からの経済性や画像品質等に関する厳しい要
求条件が予想される他、人間行動面からの心理的問題点
等も指摘されており、はたして本当に広範に普及しろる
か、疑問がある。
However, with regard to videophones aimed at face-to-face functionality, not only are users expected to have strict requirements regarding economy and image quality, but also psychological problems from the perspective of human behavior have been pointed out. There are doubts as to whether it will really become widespread.

また、通信網を介してセンタの画像データベースを端末
から検索するビデオテックスに関しても、放送形の情報
提供や、印刷物やパッケージメディアを用いた情報提供
に比べて、経済性、操作性の点で不利な面が多く、端末
を無料配布したフランス以外の各国とも、広範な普及に
まではいたっていない。
Furthermore, regarding videotex, which searches the center's image database from a terminal via a communication network, it is disadvantageous in terms of economy and operability compared to providing information in the form of broadcasting, or providing information using printed matter or packaged media. Due to many disadvantages, it has not reached the point of widespread adoption in any country other than France, where devices were distributed free of charge.

〔発明が解決しようとする課題〕[Problem to be solved by the invention]

1)従来形テレビ電話の問題点 従来のテレビ電話は、電話の音声会話通信に加えて、お
互いの顔画像を送受信することにより、対面会話機能の
実現をねらいとしたものである。
1) Problems with conventional videophones Conventional videophones aim to realize a face-to-face conversation function by transmitting and receiving images of each other's faces in addition to telephone voice conversation communication.

このような顔画像通信サービスの普及に関しては、以下
のような問題点が考えられる。
Regarding the spread of such facial image communication services, the following problems can be considered.

(A)相手の顔を見る効用に対する疑問がある。(A) There are doubts about the utility of seeing the other person's face.

顔画像通信の効用に対する許容費用(いくらなら利用す
るか)の調査結果では、電話料の高々2割アップと想定
されており、ユーザ側が顔画像通信に対して高い効用を
認めるかどうか疑問がある。
According to the results of a survey on the allowable cost (how much people would use it) relative to the effectiveness of facial image communication, it is assumed that telephone charges will increase by at most 20%, and it is questionable whether users will recognize the high utility of facial image communication. .

(B)顔を見られることに対する抵抗感がある。(B) There is a feeling of resistance to having one's face seen.

自分の顔や様子を、電子的に見られることに対しては、
プライバシーの侵害感、恥ずかしさ等の抵抗感がある。
Regarding being able to see your face and appearance electronically,
There is a feeling of resistance such as a feeling of invasion of privacy and embarrassment.

また、電話は顔を見られないから便利だという利用場面
は多いが、顔が見えたので便利という利用場面は少ない
Additionally, there are many situations in which a telephone is convenient because you cannot see your face, but there are few situations in which it is convenient because you can see your face.

(C)画像品質が不足である。(C) Image quality is insufficient.

64kb/5ISDNを介したテレビ電話の場合、通常
のテレビジョン放送に比べて、約171000に情報圧
縮されているため、動作や表情がギクシャクした画像品
質になり1通常のテレビジョン放送を見慣れているユー
ザに対して、非常に大きな違和感を生ずる。
In the case of a videophone call via 64kb/5ISDN, the information is compressed to about 171,000 compared to normal television broadcasting, so the image quality is such that movements and facial expressions are jerky. 1. This creates a very uncomfortable feeling for the user.

2)従来形ビデオテックスの問題点 ビデオテックスはセンタに蓄積された画像データベース
を、通信網を介して、端末側から検索するものであるた
め、以下のような、本質的問題点がある。
2) Problems with conventional Videotex Since Videotex searches an image database stored at a center from the terminal side via a communication network, it has the following essential problems.

(A)情報を見ている時間(通信時間)がががりすぎる
(A) The time spent viewing information (communication time) is too long.

ユーザが情報を探している間、通信回線が端末とセンタ
とを接続しているため情報を見ている時間だけ、通信時
間がかかることになり1通信費用がかさむ。
While the user is looking for information, a communication line connects the terminal and the center, so communication time is required for the time the user is looking for information, which increases communication costs.

(B)画面更新速度(通信速度)が遅い。(B) Screen update speed (communication speed) is slow.

ユーザの操作で画像情報の画面を更新していく速度は、
通信回線を介して情報を転送する速度で律速されるため
、64 k b / s程度の速度では、紙をめくるよ
うに素早く画像画面を切り替えることができない。
The speed at which the image information screen is updated by user operations is
Because the rate is determined by the speed at which information is transferred via a communication line, at a speed of about 64 kb/s, it is not possible to switch image screens as quickly as turning a sheet of paper.

本発明は、前記問題点を解決するためになされたもので
ある。
The present invention has been made to solve the above problems.

本発明の目的は、遠隔説得形のコミュニケーションの支
援をねらいとする新しい画像通信サービスとして、以下
の機能を統合した共電形画面電話を提供することにある
An object of the present invention is to provide a Kyodo screen phone that integrates the following functions as a new image communication service that aims to support remote persuasion type communication.

(i)音声による会話通信機能 (n)お互いの顔画像の実時間通信機能(iii)各端
末毎に配置されたインタラクティブな画像データベース
(蓄積画像)機能 (iv)分散配置された端末上の蓄積画像を通信網を介
して、連動・同期して表示制御する機能 (v)連動蓄積画像と、実時間通信画像(実時間画像)
とを合成表示して、遠隔の端末同士で、一体感のある供
覧画像空間を実現する機能 本発明の前記ならびにその他の目的と新規な特徴は、本
明細書の記述及び添付図面によって明らかになるであろ
う。
(i) Voice conversation communication function (n) Real-time communication function of mutual facial images (iii) Interactive image database (stored image) function located on each terminal (iv) Storage on distributed terminals Function to control the display of images in a linked and synchronized manner via a communication network (v) Linked storage images and real-time communication images (real-time images)
The above and other objects and novel features of the present invention will become clear from the description of this specification and the accompanying drawings. Will.

〔課題を解決するための手段〕[Means to solve the problem]

前記目的を達成するために1本発明は、画像データを端
末に蓄積する手段と、蓄積された端末画像データベース
を検索して引き出す手段と、通信網を介して接続された
複数の端末の互いに内容を同じくする複数の画像データ
ベースを連動して、各端末のいづれかから要求された検
索制御指示にしたがって接続されている全ての端末が同
期して、同じ画面を表示制御する手段と、端末相互間で
の人物画像を対象とする実時間画像通信の手段、実時間
人物画像と連動・同期して表示出力される端末蓄積画像
とを一つのデイスプレィ上に合成表示する手段とから構
成され、通信網を介して電子的に対面対話をしながら、
遠隔に離れた端末同士で、個々の端末に蓄積された画像
データファイルを、連動・同期させ、かつ、人物画像と
一体として表示することを最も主要な特徴とする。
In order to achieve the above object, the present invention provides a means for storing image data in a terminal, a means for searching and extracting the stored terminal image database, and a means for retrieving the contents of a plurality of terminals connected via a communication network. A means for controlling the display of the same screen by linking multiple image databases that share the same information, and synchronizing all connected terminals according to a search control instruction requested from one of the terminals, and controlling the display of the same screen. The communication network consists of means for real-time image communication for human images, and means for displaying the real-time human images and terminal accumulated images that are displayed and output in synchronization and synchronization on one display. While having face-to-face dialogue electronically through
The main feature is that the image data files stored on the individual terminals are linked and synchronized between remotely located terminals, and are displayed together with the person's image.

また、前記共覧形画面電話方式において、通信回線を介
して受信する人物画像に対して、人物部分と背景部分と
を分離する手段と、端末間で連動・同期して表示出力さ
れる端末蓄積画像を1分離した背景部分の画像に置き換
えて、人物部分と合成し、一つの画面として表示する手
段を有することを特徴とする。
In addition, in the shared screen telephone system, a means for separating a person part and a background part for a person image received via a communication line, and a terminal storage that is displayed and output in conjunction and synchronization between terminals. The present invention is characterized by having means for replacing the image with an image of a background part separated by one, composing it with a person part, and displaying it as one screen.

また、共覧形画面電話方式において、通信相手に対して
送信する自分の側の人物画像に対して5人物部分と背景
部分とを分離する手段と、通信相手から受信する人物画
像と自分の側の人物画像の両方の人物画像に対して、端
末間で連動・同期して表示出力される端末蓄積画像を、
分離した背景部分の画像に置き換えて、人物部分と合成
し、つの画面として表示する手段を有することを特徴と
する。
In addition, in the common screen telephone system, there is a means for separating a person part and a background part of a person's image from one's side to be sent to a communication partner, and a means for separating a person's image received from a communication partner from one's side. The terminal accumulated images that are displayed and output in conjunction and synchronization between terminals for both human images of
The present invention is characterized by having means for replacing the image of the separated background portion with the image of the person and displaying it as one screen.

〔作用〕[Effect]

前述の手段によれば、人間が何か情報を知りたいと思っ
て、行動する際、最も親しみのある方法は、それを知っ
ていそうな人に聞く事である。あるいは、情報探索をす
る際に、人間との対話による支援があると、非常に効果
的である。すなわち、情報を得ると同時に人間同士のコ
ミユニケージ五ンができる。あるいは、対話によるコミ
ュニケーションをしながら情報を得るという形態が、人
間にとって、最も親和性が良く、満足感が得られ、説得
力のある情報行動形態であると考えられる。
According to the above-mentioned method, when a person wants to know some information and takes action, the most familiar method is to ask someone who seems to know the information. Alternatively, when searching for information, it is extremely effective to have support through human interaction. In other words, you can get information and at the same time communicate with each other. Alternatively, the form of obtaining information while communicating through dialogue is considered to be the most compatible, satisfying, and persuasive form of information behavior for humans.

このことは、物を買う場合、あるいは教育場面等におい
て、店員と顧客、先生と生徒との対話行動の有無によっ
て、販売効果、教育効果が違ってくる事等からも、示唆
される。人間の心理は、対話と情報取得とを同時に実現
できた場合に、より高い満足感、説得力が得られるもの
と考えられる。
This is also suggested by the fact that, when purchasing goods or in educational situations, the effectiveness of sales and education differs depending on the presence or absence of dialogue between store clerks and customers, teachers and students. Human psychology is thought to provide greater satisfaction and persuasiveness when dialogue and information acquisition can be achieved at the same time.

このような観点から、本発明では1人間の情報活動を支
援する、人間との親和性の良い画像通信サービスとして
、対話用システム(テレビ電話等)と情報探索用システ
ム(ビデオテックス等)とが別々に提供される形態では
なく、両者を統合し、対話と情報探索の両方を、同時に
共在できるシステムとして実現している(対面対話機能
と情報探索機能との結合)。
From this perspective, the present invention provides an image communication service that supports one person's information activities and is compatible with humans by combining a dialogue system (video phone, etc.) and an information search system (videotex, etc.). Rather than being provided separately, the two are integrated to create a system that allows both dialogue and information search to coexist at the same time (combination of face-to-face dialogue function and information search function).

また、様々な人間のコミュニケーション活動の場面にお
いて、遠隔から見たいもの/見せたいものの主体は、対
話相手の顔画像ではなく、対話の対象物の画像である。
Furthermore, in various human communication activities, what people want to see/show from a distance is not the face image of the conversation partner, but the image of the object of the conversation.

すなわち、会議であれば資料画像、販売であれば商品見
本画像、教育であれば教材やお手本、報道であれば現場
風景等こそが、画像通信サービスの本来の効用ある対象
物画像である。
In other words, images of documents for meetings, product sample images for sales, teaching materials and models for education, on-site scenes for reporting, etc. are the target images that are originally useful for image communication services.

すなわち、画像通信サービスで扱う画像情報としては、
次の二種類がある。
In other words, the image information handled by the image communication service is
There are two types:

(イ)遠隔からの対話説明や説得をする際に必要な実時
間の原画面像 (ロ)対話、説得の主題となる対象物の画像これらから
れかるように顔画像と、対象物画像とは、利用目的や使
用形態が異なっている。特に、顔画像は実時間通信が必
須であるのに対し、対象物画像は、必ずしも実時間で送
信する必要は無く、対話通信の前にあらかじめ事前送信
して、端末に記憶しておく形態が適用できる。
(b) Real-time original screen image necessary for remote dialogue explanation and persuasion (b) Image of the object that is the subject of dialogue and persuasion From these, it can be seen that the face image and the object image are have different purposes and forms of use. In particular, while face images require real-time communication, object images do not necessarily need to be transmitted in real time, and can be sent in advance and stored in the terminal before conversational communication. Applicable.

また、顔画像の品質は、相手を認識できるレベルでも許
容されるが対象物画像は高品質を要求される。
Further, although the quality of a face image is acceptable at a level that allows recognition of the other party, high quality is required for an object image.

本発明では、この観点から、顔画像と対象物画像とをそ
れぞれ実時間画像および蓄積画像として、分けて取り扱
い、さらに、ユーザに画像情報を表示する際には、実時
間顔画像と蓄積された対象物画像の両者の画像を結合し
て、一体となった画面として提示することにより、蓄積
画像、実時間画像それぞれの特性への適合と、より高い
説得力の両方を実現している(顔画像と対象物画像の分
離・結合)。
From this point of view, the present invention handles face images and object images separately as real-time images and stored images, respectively, and furthermore, when displaying image information to the user, real-time face images and stored images are handled separately. By combining both images of the object and presenting them as a unified screen, it is possible to adapt to the characteristics of the stored image and real-time image, and to achieve higher persuasive power (face image). separation/combination of images and object images).

また、従来のテレビ電話やビデオテックスは、即時(実
時間)通信形で、端末での蓄積機能の無い形態の画像通
信であった。しかし、前記指摘したような対象物画像に
ついては、対話通信の前に。
Further, conventional videophones and videotexes are instant (real-time) communication types, and image communication without a storage function at the terminal. However, regarding the object image as pointed out above, before interactive communication.

あらかじめ事前送信して、端末に記憶しておく形態が適
用できる。
It is possible to send the information in advance and store it in the terminal.

すなわち、非即時通信・端末蓄積形とすることにより、
以下のメリットが生じ、従来のテレビ電話、ビデオテッ
クスでの問題点を解消できる(非即時通信・端末蓄積形
の画像通信機能)。
In other words, by adopting a non-instant communication/terminal storage type,
The following advantages occur and the problems with conventional videophones and Videotex can be solved (non-instantaneous communication/terminal storage type image communication function).

(i)非即時通信で、通信時間を長くかけることにより
、64kb/s回線でも、テレビジョン放送並みの画像
品質の対象物画像情報提示が可能である。
(i) By using non-real-time communication and taking a long communication time, it is possible to present object image information with an image quality comparable to that of television broadcasting even on a 64 kb/s line.

(n)端末蓄積を前提とすることにより、対象物画像を
送信する時間と、見る時間とを独立にできる。対象物画
像を見ている時間の通信費用は不用である。
(n) By assuming terminal storage, the time for transmitting the object image and the time for viewing it can be made independent. There is no need for communication costs during the time when viewing the object image.

(in)端末蓄積を前提とすることにより、対象物画像
の画面を更新操作する速度は1通信速度に依在せず、端
末ファイルのアクセス速度の限界まで早められ、操作性
が良くなる。
(in) By assuming terminal storage, the speed at which the screen of the object image is updated does not depend on the communication speed, but can be accelerated to the limit of the access speed of the terminal file, improving operability.

また、端末に蓄積された蓄積画像ファイルに対する。情
報探索等のアクセスは、通常5個々の端末(ユーザ)毎
に独立して、非同期に動作される。
Also, for stored image files stored on the terminal. Access such as information search is normally operated independently and asynchronously for each of the five terminals (users).

しかし、人間同士の対話、説得をしながら、対象物画像
を見る場合には、相手が見ている画面と。
However, when viewing an image of an object during dialogue or persuasion between humans, the screen that the other person is viewing is the same as the screen that the other person is viewing.

自分が見ている画面とが一致し、画面の更新動作が同期
していることが必要と考えられる。いわば、あたかも、
遠隔の離れた人間同士が、同一の場所に集まり、−冊の
本や画像ファイルを交互にめくっているように感じさせ
ることが、有効と考えられる。
It is considered necessary that the screen you are viewing matches the screen you are viewing and that the screen update operations are synchronized. So to speak, as if
It is thought to be effective to make people who are far apart gather in the same place and feel as if they are taking turns flipping through a book or image file.

本発明では、このような機能を、通信網を介して分散し
て配置された、複数の端末画像ファイルに対して、以下
のような連動制御を導入することで実現する(蓄積画像
の連動制御)。
In the present invention, such a function is realized by introducing the following interlocking control for multiple terminal image files distributed over a communication network (interlocking control of stored images). ).

(i)蓄積内容の同一性管理 (n)各端末における表示内容の同期制御以下1本発明
の一実施例を図面を用いて具体的に説明する。
(i) Identity management of stored content (n) Synchronization control of display content on each terminal One embodiment of the present invention will be specifically described below with reference to the drawings.

なお、実施例を説明するための全回において、同一機能
を有するものは同一符号を付け、その繰り返しの説明は
省略する。
Note that throughout the description of the embodiments, parts having the same functions are given the same reference numerals, and repeated explanations thereof will be omitted.

〔実施例1〕 第1図は、本発明の共覧形画面電話方式の実施例1を説
明するための図であり、1は通信網、2は端末の電話機
および制御部、3は蓄積画像ファイル、4はデイスプレ
ィ、5はカメラ、6はデイスプレィに表示された蓄積画
像、7はデイスプレィに表示された通信相手の実時間顔
画像、8.9は端末の操作者である。
[Embodiment 1] FIG. 1 is a diagram for explaining Embodiment 1 of the common screen telephone system of the present invention, in which 1 is a communication network, 2 is a terminal telephone and a control unit, and 3 is a stored image. 4 is a display, 5 is a camera, 6 is an accumulated image displayed on the display, 7 is a real-time face image of the communication partner displayed on the display, and 8.9 is the operator of the terminal.

次に、本実施例1の共覧形画面電話方式の動作を説明す
る。
Next, the operation of the common screen telephone system of the first embodiment will be explained.

先ず1通信網1を介して2台の共電形画面電話端末の接
続を行う6通信網1としては、64kb/5IsDN、
あるいは1.5Mb/s I SDN。
First, the 6 communication networks 1 for connecting two common electric screen telephone terminals via the 1 communication network 1 are 64kb/5IsDN,
Or 1.5Mb/s I SDN.

アナログ電話網等を用いることができる。共電形画面電
話端末は、電話機および制御部2、蓄積画像ファイル3
.デイスプレィ4.カメラ5等から構成され、以下のよ
うに動作する。
An analog telephone network or the like can be used. The Kyodo screen telephone terminal includes a telephone, a control section 2, and a stored image file 3.
.. Display 4. It consists of a camera 5, etc., and operates as follows.

[1]音音声語通信 通信網1、電話機および制御部2を用いて、音声入力、
音声出力、実時間音声信号通信の機能により、端末の操
作者8.9の間での会話音声通信を行う。
[1] Voice input using the voice-to-word communication network 1, telephone, and control unit 2;
Voice output and real-time voice signal communication functions allow conversational voice communication between terminal operators 8 and 9.

[2]対面画像通信 通信網1、電話機および制御部2、デイスプレィ4、カ
メラ5を用いて1画像入力1画像出力、実時間画像信号
通信の機能により、端末操作者8.9の間での人物顔画
像対面通信を行う。
[2] Face-to-face image communication communication network 1, telephone and control unit 2, display 4, and camera 5 are used to provide one-image input, one-image output, and real-time image signal communication functions to enable communication between terminal operators 8.9. Perform face-to-face communication using images of people's faces.

[3]端末画像データベースの検索 電話機および制御部2、蓄積画像ファイル3を用いて、
蓄積されている画像データの検索機能、画像出力機能に
より、端末操作者8.9が画像検索を行う。
[3] Searching the terminal image database Using the telephone, the control unit 2, and the stored image file 3,
The terminal operator 8.9 searches for images using the stored image data search function and image output function.

[4]蓄積画像表示の連動制御 4.1)蓄積内容の同一性管理 複数の共電形画面電話端末間で、蓄積画像表示の連動制
御を行うため1次項の表示内容の同期制御の前に、事前
に、接続した端末同士の、蓄積内容の同一性の検査、確
認を行う。
[4] Interlocking control of stored image display 4.1) Identity management of stored contents In order to perform interlocking control of stored image display between multiple common screen telephone terminals, before synchronizing control of display contents in the primary section. , In advance, check and confirm the identity of the stored contents between the connected terminals.

4.2)表示内容の同期制御 端末操作者8.9が[3コ項の画像検索を行う際、電話
機および制御部2から蓄積画像ファイル3に対して、指
示される制御信号の内容(どのような制御を行うか)が
、通信網1を介して相互の端末間で伝えられ、片方の側
の端末で実行される制御内容が、同時に同期して、別の
側の端末においても同じ内容で実行される。この機能に
より、見かけ上、両方の端末には、常に同じ蓄積画像が
表示され、同時に画面更新が行なわれているように見え
る。
4.2) Synchronization control of display contents When the terminal operator 8.9 performs the image search described in item 3, the contents of the control signal (which control) is transmitted between mutual terminals via communication network 1, and the control content executed on one terminal is simultaneously synchronized and the same content is executed on the other terminal. is executed. With this function, it appears that the same accumulated images are always displayed on both terminals, and the screens appear to be updated at the same time.

[5]共共電面合成制御 蓄積画像ファイルから、検索して出力した画像(蓄積画
像)6と、実時間の人物顔画像フとを、まとめて、一つ
のデイスプレィに表示する0表示の形式としては人物顔
画像と蓄積画像とを、画面分割により表示、あるいは蓄
積画像の表示画像の中に、小さなウィンドウを開いたよ
うな形式(マルチウィンドウ)で人物顔画像を表示する
[5] A display format in which the image (accumulated image) 6 searched and outputted from the co-electrode surface synthesis control accumulated image file and the real-time human face image are displayed together on one display. In this case, the human face image and the stored image are displayed by splitting the screen, or the human face image is displayed in a format that looks like a small window is opened (multi-window) within the displayed image of the stored image.

このような機能動作をすることにより、(a)画像検索
の連動同期形検索表示、および(b)連動蓄積画像と実
時間顔画像通信との結合が実現でき、従来に比べて、よ
り説得力のある対話形情報提供が実施できる。
By performing such functional operations, it is possible to realize (a) linked synchronous search display of image search, and (b) combination of linked stored images and real-time facial image communication, which is more persuasive than before. Interactive information provision can be implemented.

〔実施例2〕 第2図は、本発明の共覧形画面電話方式の実施例2の共
電形画面電話の端末のシステム構成を説明するための図
であり、11はパソコンを用いた制御部、12は操作指
示用のタッチパネル、13はデイスプレィ、14は画像
蓄積用の光ディスク、15は画像処理プロセッサ、16
はデータ通信制御部、17はカメラ、18は画像C0D
EC(Coder and Dec。
[Embodiment 2] FIG. 2 is a diagram for explaining the system configuration of a terminal of a common screen telephone according to a second embodiment of the common screen telephone system of the present invention, and reference numeral 11 indicates control using a personal computer. 12 is a touch panel for operation instructions, 13 is a display, 14 is an optical disk for image storage, 15 is an image processing processor, 16
is a data communication control unit, 17 is a camera, and 18 is an image C0D
EC (Coder and Dec.

der :符号器と復号器)、19はマイクロホン、2
0はスピーカ、21はエコーキャンセラー、22は音声
C0DEC123は回線制御部、24は通信回線である
der: encoder and decoder), 19 is a microphone, 2
0 is a speaker, 21 is an echo canceller, 22 is an audio CODEC 123 is a line control unit, and 24 is a communication line.

次に、本実施例2の共覧形画面電話方式の動作を説明す
る。
Next, the operation of the shared view screen telephone system of the second embodiment will be explained.

先ず、通信網の通信回線24を介して、第2図と同じ構
成の共電形画面電端末(以下、これを“端末″と略称す
る)2台を接続する。
First, two common electric screen terminals (hereinafter referred to as "terminals") having the same configuration as in FIG. 2 are connected via the communication line 24 of the communication network.

本実施例2の共覧形画面電話方式は、以下のようにして
動作を行う。
The common screen telephone system of the second embodiment operates as follows.

[1]音音声語通信 通信回線24を介して接続された2台の端末間の実時間
の音声会話通信を行うため、マイクロホン19から入力
された音声信号を、エコーキャンセラ21等のハウリン
グ防止デバイスを通した後、音声C0DEC22に入力
し音声信号の符号化を行い、回線制御部23から通信回
線24を通して、相手側の端末へ送信する。
[1] Voice communication In order to perform real-time voice conversation communication between two terminals connected via the communication line 24, the voice signal input from the microphone 19 is transmitted to a howling prevention device such as the echo canceller 21. After passing through the audio C0DEC 22, the audio signal is encoded and transmitted from the line control unit 23 to the other party's terminal through the communication line 24.

音声信号は、通信回線24を通して、回線制御部23へ
受信され、音声C0DEC22により音声の復号化を行
い、エコーキャンセラ21等のハウリング防止デバイス
を通した後、スピーカから出力される。
The audio signal is received by the line control unit 23 through the communication line 24, decoded by the audio CODEC 22, passed through a howling prevention device such as the echo canceller 21, and then output from the speaker.

[2]対面画像通信 通信回線24を介して接続された、2台の端末間の実時
間の対面画像通信を行うため、カメラ17から、撮像さ
れた画像信号を、画像C0DEC18に入力し、画像通
信の符号化を行い、回線制御部23から通信回線24を
通して、相手端末へ送信する6相手端末へ送られた画像
信号は、通信回線24を通して1回線制御部23へ受信
され、画像C0DEC18により、画像の復号化を行い
、画像処理プロセッサ15での表示画面合成処理を経て
、デイスプレィ13に表示される。
[2] Face-to-face image communication In order to perform real-time face-to-face image communication between two terminals connected via the communication line 24, the captured image signal is input from the camera 17 to the image C0DEC 18, and the image Communication is encoded and transmitted from the line control unit 23 to the other party terminal through the communication line 24.The image signal sent to the six other party terminals is received by the first line control unit 23 through the communication line 24, and the image C0DEC18 The image is decoded and displayed on the display 13 after being subjected to display screen synthesis processing by the image processing processor 15.

[3]端末画像データベースの検索 光デイスク14等の端末の画像蓄積デバイスに蓄積され
た画像データ(蓄積画像)を端末の操作者が検索する機
能を実現するため、操作者は、タッチパネル12等の入
力デバイスを用いて、検索や画面変更の操作を指示入力
し、その操作指示に基づいて、制御部11が光デイスク
14等の画像蓄積デバイスを制御し、表示する画像デー
タ(蓄積画像)を引き出し、画像処理プロセッサ15で
の表示画面合成処理を経て、デイスプレィ13に表示さ
れる。
[3] Searching the terminal image database In order to realize the function for the terminal operator to search the image data (stored images) accumulated in the image storage device of the terminal such as the optical disk 14, the operator uses the touch panel 12 etc. Using an input device, instructions for operations such as search and screen change are input, and based on the operation instructions, the control unit 11 controls an image storage device such as an optical disk 14 and retrieves image data (stored images) to be displayed. , and is displayed on the display 13 after being subjected to display screen synthesis processing in the image processing processor 15.

端末用の画像蓄積デバイスとしては、光ディスクの他、
磁気ハードディスク、追記形光ディスク、磁気テープ装
置等が利用できる。
In addition to optical discs, image storage devices for terminals include
Magnetic hard disks, write-once optical disks, magnetic tape devices, etc. can be used.

また、蓄積するデータとしては、画像のみならず、画像
と一緒に、音楽、音声、文字、グラフィックス等を、画
像と同様に扱って、蓄積・検索・表示の対象として、用
いることは容易であり、効果的である。
In addition, the data to be stored is not only images, but also music, audio, text, graphics, etc., which can easily be treated in the same way as images and used for storage, search, and display. Yes, and it is effective.

検索指示デバイスとしては、タッチパネルのほか、キー
ボード等の通常の入力デバイスも利用できる−1 [4]蓄積画像表示の連動制御 4.1)蓄積内容の同一性管理 複数の共電形画面電話端末間で、蓄積画像表示の連動制
御を行うため、次項の表示内容の同期制御の前に、事前
に接続した端末同士の蓄積内容の同一性の検査、確認を
行う、以下のような方法を単独または組み合わせて、同
一性の検査を行う。
In addition to touch panels, normal input devices such as keyboards can also be used as search instruction devices.-1 [4] Linked control of stored image display 4.1) Identity management of stored contents Between multiple common screen telephone terminals In order to perform interlocked control of stored image display, the following methods can be used alone or by checking and confirming the sameness of stored contents between connected terminals in advance, before performing synchronized control of display contents described in the next section. In combination, the identity test is performed.

(i)お互いの端末の蓄積内容の名称、バージョン識別
番号(改訂版番号)の整合性検査。
(i) Consistency check of names and version identification numbers (revised version numbers) of stored content on both terminals.

(n)お互いの端末の蓄積内容の改訂(書換え又は書き
加え)内容覆歴の整合性検査。
(n) Consistency check of history of revisions (rewrites or additions) to content stored on each other's terminals.

(足)お互いの端末の蓄積内容の、管理データ(個々の
蓄積画像の種別、識別番号、収容位置、検索キーワード
、等)の同一性、整合性の検査。
(Foot) Inspecting the identity and consistency of management data (types of individual stored images, identification numbers, storage locations, search keywords, etc.) of the content stored on each terminal.

(iv)お互いの端末の蓄積内容の画像データの実体(
画像信号データ)の同一性、整合性検査。
(iv) The substance of the image data of the content stored on each other's terminals (
Image signal data) identity and consistency inspection.

蓄積内容の同一性、あるいは整合性の不一致が見つかっ
た場合は、連動制御は実行できない。
If the sameness or inconsistency of stored contents is found, interlock control cannot be executed.

しかし、不整合の場合であっても、以下のような方法を
単独又は組み合わせて、蓄積内容の同一性を確保できる
場合には、連動制御を実行できる。
However, even in the case of mismatch, interlock control can be executed if the following methods can be used alone or in combination to ensure the sameness of the stored contents.

(a)不整合のデータ部分を、使用範囲から除外、又は
削除して、使用範囲を制限して、連動制御を行う。
(a) Excluding or deleting inconsistent data portions from the usage range to limit the usage range and perform interlock control.

(b)不整合のデータ部分を、お互いに、事前に転送し
、不整合部分を修正、更新してから、連動制御を行う。
(b) Inconsistent data portions are transferred to each other in advance, the inconsistent portions are corrected and updated, and then interlock control is performed.

4.2)表示内容の同期制御 通信網の通信回線24を介してつながった複数の端末の
間で、端末操作者が前記実施例2の[3]項の画像検索
を行う際、制御部11から光デイスク14等の蓄積画像
ファイルに対して、指示される制御信号の内容(どのよ
うな制御を行うか)が、通信網の通信回線24を介して
、相互の端末間で伝えられ1片方の側の端末で実行され
る制御内容が、同時に同期して、別の側の端末において
も同じ内容で実行される。この機能により、見かけ上5
両方の端末には、常に同じ蓄積画像が表示され、同時に
画面更新が行なわれているように見える。
4.2) Synchronous control of display contents When a terminal operator performs the image search described in item [3] of the second embodiment among a plurality of terminals connected via the communication line 24 of the communication network, the control unit 11 The content of the control signal (what kind of control to perform) is transmitted from one terminal to another via the communication line 24 of the communication network for the stored image file on the optical disk 14 or the like. The control content executed on one side of the terminal is simultaneously and synchronously executed with the same content on the other side of the terminal. This function makes it look like 5
The same accumulated images are always displayed on both terminals, and the screens appear to be updated at the same time.

このような表示内容の同期制御において、複数の端末か
ら制御要求が同時に出されて、衝突する場合の処理方法
として、以下のような、親子形の判断制御手順が有効で
ある。
In such synchronized control of display contents, the following parent-child judgment control procedure is effective as a processing method when control requests are issued simultaneously from a plurality of terminals and conflict with each other.

〈1〉連動対象となる複数端末から非同期に出される画
面更新制御要求の間の、優先判断や衝突判断を行う役割
を、一つの端末(親端末)に指定する。
<1> One terminal (parent terminal) is assigned the role of determining priority and determining conflicts among screen update control requests asynchronously issued from multiple terminals to be linked.

〈2〉親端末は、他の端末(子端末)から出された制御
要求を受信し、それらと自端末から出された制御要求を
含めて、優先判断を行う。
<2> The parent terminal receives control requests issued from other terminals (child terminals), and makes a priority judgment based on these and control requests issued from its own terminal.

〈3〉優先的に実行する制御命令を決めた後、全ての子
端末へ、実行命令を送信する。
<3> After determining the control command to be executed preferentially, the execution command is transmitted to all child terminals.

く4〉全ての子端末は、親端末の実行命令に従って画像
表示の制御を行う。
(4) All child terminals control image display according to the execution command from the parent terminal.

[5]共共電面合成制御 蓄積画像ファイルから、検索して出力した画像(蓄積画
像)と、実時間の人物顔画像とを、まとめて、一つのデ
イスプレィに表示する0表示の形式としては、人物顔画
像と蓄積画像とを、画面分割により表示、あるいは、蓄
積画像の表示画像の中に、小さなウィンドウを開いたよ
うな形式(マルチウィンドウ)で、人物顔画像を表示す
る方法が利用できる。
[5] Co-electrode surface synthesis control The image searched and output from the accumulated image file (accumulated image) and the real-time human face image are displayed together on one display as a zero display format. , it is possible to display a person's face image and a stored image by splitting the screen, or to display a person's face image in a format where a small window is opened within the displayed image of the stored image (multi-window). .

[6]非即時画像通信機能 光デイスク14等の画像蓄積ファイルに蓄えられた画像
データを、相手端末へ転送する方法としては、以下のよ
うな方法が利用できる。
[6] Non-real-time image communication function The following methods can be used to transfer image data stored in an image storage file such as the optical disk 14 to the other party's terminal.

く1〉物体転送 画像蓄積ファイルのデバイス自身を、複製のコピーを作
って郵送する方法である。この方法によれば、光ディス
ク等の小形デバイスは、容易にコピーを郵送することが
できる。この場合は、内容の同一性が確実に保証できる
(1) Object Transfer This is a method of making a duplicate copy of the image storage file device itself and mailing it. According to this method, copies of small devices such as optical discs can be easily mailed. In this case, the identity of the contents can be guaranteed.

〈2〉非即時通信転送 画像蓄積ファイルに蓄えられた画像データの中から転送
対象のものを選び、画像処理プロセッサ15を経て画像
C0DEC18により符号化し、非即時に時間をかけて
、回線制御部23から相手端末へ転送する。相手端末は
、このデータを受信し1画像C0DEC18により、復
号化して画像蓄積ファイルへ記録する。
<2> Non-immediate communication transfer The image data to be transferred is selected from among the image data stored in the image storage file, passed through the image processing processor 15, encoded by the image C0DEC 18, and transferred non-immediately over time to the line control unit 23. Transfer from to the other party's device. The other party's terminal receives this data, decodes it using the 1-image C0DEC 18, and records it in the image storage file.

このような機能動作をすることにより、(a)画像検索
の連動同期形検索表示、および(b)連動蓄積画像と実
時間顔画像通信との結合を実現でき、従来に比べて、よ
り説得力のある対話形情報提供が実施できる。
By performing such functional operations, it is possible to realize (a) linked synchronous search display of image search, and (b) combination of linked stored images and real-time facial image communication, which is more persuasive than before. Interactive information provision can be implemented.

〔実施例3〕 第3図は1本発明の共覧形画面電話方式の実施例3の共
電形画面電話端末における共電画面合成制御を説明する
ための図であり、31は背景板、32は人物、33はカ
メラ、34は送信制御部、35は通信網、36は受信制
御部、37は背景抽出分離部、38は画像蓄積デバイス
、39は画面分割合成部、40は背景置換合成部である
[Embodiment 3] FIG. 3 is a diagram for explaining the common screen composition control in the common screen telephone terminal according to the third embodiment of the common screen telephone system of the present invention, and 31 is a background plate; 32 is a person, 33 is a camera, 34 is a transmission control unit, 35 is a communication network, 36 is a reception control unit, 37 is a background extraction/separation unit, 38 is an image storage device, 39 is a screen division/synthesis unit, and 40 is a background replacement/synthesis unit. Department.

この実施例3では、一つの画面に複数の画像情報を一体
的、−覧的に表示する方法として、一体的表示の対象が
、実時間の人物顔画像表示と、端末蓄積された対象物画
像表示である点に着目し、人物顔画像の背景部分を対象
物画像に置き換えて合成表示する方法(略称: BAC
K法)を実現した。
In this third embodiment, as a method for integrally and visually displaying a plurality of image information on one screen, the objects of integral display are real-time human face image display and object images stored in the terminal. A method that focuses on a certain point in the display and replaces the background part of a person's face image with an object image for composite display (abbreviation: BAC)
K method) was realized.

本実施例3では、BACK法の表示制御を実現するため
、人物32の背景部分に、人物の色成分と異なる特定色
の背景板31を設置し、背景部の色特徴を利用したクロ
マキー処理により、背景抽出・合成を行っている。
In the third embodiment, in order to realize display control using the BACK method, a background plate 31 of a specific color different from the color components of the person is installed in the background of the person 32, and chromakey processing is performed using the color characteristics of the background. , performs background extraction and synthesis.

次に、本実施例3の共電形画面電話端末における共電画
面合成制御動作を説明する。
Next, a description will be given of the public screen composition control operation in the public screen telephone terminal according to the third embodiment.

第3図において、特定色の背景板31の前に位置した人
物32の画像を、カメラ33を用いて撮像し、送信制御
部34において符号化して送信する。送信情報は、通信
網35を介して、相手端末へ送られ、受信制御部36に
おいて、受信・復号化される。
In FIG. 3, an image of a person 32 positioned in front of a background board 31 of a specific color is captured using a camera 33, encoded by a transmission control unit 34, and transmitted. The transmission information is sent to the other party's terminal via the communication network 35, and is received and decoded by the reception control section 36.

受信した人物画像は、背景抽出分離部37において、背
景部分と人物部分とが、背景色の特徴に基づいて分離・
抽出される。
The background extraction and separation unit 37 separates the received human image into a background portion and a human portion based on the characteristics of the background color.
Extracted.

一方、相手端末の画像蓄積デバイス38(連動制御の対
象として、同期制御されている画像蓄積部)から、表示
対象画像として、引き出された蓄積画像は、操作メニュ
ー画像等の表示用画像と含めて、画面分割合成部39に
おいて、検索画像(表示用としての端末蓄積画像)とし
て用意される。
On the other hand, the stored image pulled out as the display target image from the image storage device 38 of the other party's terminal (the image storage section that is synchronously controlled as the target of interlock control) is included in the display image such as the operation menu image. , is prepared as a search image (terminal accumulated image for display) in the screen division and synthesis unit 39.

これら、背景分離された人物画像と画像データベースの
検索表示用として準備された検索画像(端末蓄積画像)
とが、背景置換合成部40において、特定色の置き換え
処理(クロマキー処理)を用いて合成され、共電画面用
の画像として出力される。
These are background-separated human images and search images prepared for search and display in the image database (terminal stored images).
are synthesized in the background substitution and synthesis section 40 using specific color substitution processing (chroma key processing), and output as an image for the public screen.

このような背景抽出1分離、置き換え、合成の処理方法
としては、前述のような背景に特有の色成分に着目した
クロマキー処理方式の他、背景の輝度が人物の輝度と違
うことを用いる分離合成処理方式、赤外線カメラを用い
人物と背景の温度の違いを用いた分離処理方式、超音波
カメラを用い人物と背景とのカメラからの距離の違いに
着目した分離処理方式等を利用することができる。
Processing methods for background extraction, separation, replacement, and composition include the chromakey processing method that focuses on color components unique to the background as described above, as well as separation and composition that uses the fact that the brightness of the background is different from the brightness of the person. A separation processing method that uses an infrared camera and uses the difference in temperature between the person and the background, a separation processing method that uses an ultrasonic camera and focuses on the difference in distance between the person and the background from the camera, etc. .

このような背景処理を用いた共電画面合成制御の実際の
画面の例を第4図に示す。
FIG. 4 shows an example of an actual screen for public screen synthesis control using such background processing.

このような背景処理(BACK法)による、共覧画面の
画面表現は、画面分割法やマルチウィンドウによる画面
表現と比べ、以下のような効果的な特徴がある。
Screen representation of a shared viewing screen using such background processing (BACK method) has the following effective features compared to screen representation using the screen splitting method or multi-window.

〈1〉人物が対象物画像の中を、自由に動き回ったり、
指し示したりできる。
<1> A person can move freely around the object image,
You can point it out.

〈2〉画像品質の高い蓄積画像を背景として1画像品質
の低い実時間顔画像が合成表示されることにより、見て
いる側は、高品質の背景部に視点が引きつけられるため
、実時間顔画像の画像品質の劣化が気にならない。
(2) A real-time face image with low image quality is compositely displayed against the background of a stored image with high image quality, and the viewer's viewpoint is drawn to the high-quality background, so that the real-time face image is displayed in a composite manner. You don't have to worry about deterioration in image quality.

く3〉背景部の対象物画像と一体となった臨場感がある
3) There is a sense of realism that is integrated with the object image in the background.

〔実施例4〕 第5図は、本発明の共覧形画面電話方式の実施例4の共
電形画面電話端末における共電画面合成制御を説明する
ための図であり、41は背景板、42は人物、43はカ
メラ、44は送信制御部、45は通信網、46は受信制
御部、47は背景分離合成部、48は画像蓄積部、49
は連動制御部、50はデイスプレィである この実施例4では、共電画面合成制御の対象とする人物
顔画像として、通信相手の人物顔画像に加えて、自分の
顔画像も合わせて、合成制御を行う。
[Embodiment 4] FIG. 5 is a diagram for explaining the common screen composition control in the common screen telephone terminal according to the fourth embodiment of the common screen telephone system of the present invention, and 41 is a background plate; 42 is a person, 43 is a camera, 44 is a transmission control unit, 45 is a communication network, 46 is a reception control unit, 47 is a background separation/synthesis unit, 48 is an image storage unit, 49
50 is an interlocking control unit, and 50 is a display. In this fourth embodiment, in addition to the person's face image of the communication partner, the person's own face image is also included in the synthesis control as the person's face image to be subjected to the communal screen synthesis control. I do.

次に、本実施例4の共電形画面電話端末における共電画
面合成制御動作を説明する。
Next, a description will be given of a public screen composition control operation in the public screen telephone terminal according to the fourth embodiment.

第5図において、特定色の背景板41の前に位置した人
物42の画像をカメラ43を用いて撮像し、送信制御部
44において符号化して送信する。送信情報は1通信網
45を介して相手端末へ送られ、相手の受信制御部46
において受信・復号化される。同様にして、相手から送
られてきた相手の人物顔画像が、自分の端末の受信制御
46に受信され、復号化される。
In FIG. 5, an image of a person 42 positioned in front of a background board 41 of a specific color is captured using a camera 43, encoded by a transmission control unit 44, and transmitted. The transmission information is sent to the other party's terminal via the first communication network 45, and is sent to the other party's reception control unit 46.
It is received and decoded at Similarly, the person's face image sent from the other party is received by the reception control 46 of one's own terminal and decoded.

一方、カメラ43で撮像された自分の顔画像と、相手か
ら受信した相手の顔画像の両方の顔画像が、背景分離合
成部47へ入力される。これらの両方の人物画像は、背
景分離合成部47において、背景部分と、人物部分とが
、背景色の特徴に基づいて分離・抽出される。
On the other hand, both the own face image captured by the camera 43 and the other party's face image received from the other party are input to the background separation and synthesis unit 47 . A background separation/synthesis unit 47 separates and extracts the background portion and the person portion of both of these person images based on the characteristics of the background color.

一方、端末の画像蓄積部48(連動制御の対象として、
連動制御部49により、相手端末の画像蓄積部48と同
期制御されている)がら、表示対象画像として、引き出
された蓄積画像と、前記の背景分離された人物画像とが
、背景分離合成部47において、特定色の置き換え処理
(クロマキー処理)を用いて合成され、共電画面用の画
像として出方される。 このような、自分と相手の両方
の人物顔画像を、蓄積画像と合成した、共電画面合成の
例を第6図に示す。
On the other hand, the image storage unit 48 of the terminal (as a target of interlocking control)
The linked control unit 49 synchronizes the image storage unit 48 of the partner terminal with the image storage unit 48 of the partner terminal), and the background separation and synthesis unit 47 uses the retrieved accumulated image and the background-separated person image as the display target image. , the images are combined using specific color replacement processing (chromakey processing) and displayed as an image for the public screen. FIG. 6 shows an example of such a shared screen composition in which human face images of both the user and the other person are combined with the stored image.

このような通信相手と自分と5両方の顔画像を一つの画
面に、端末に蓄積されている対象物画像を背景として合
成表示することにより、非常に高い対話の臨場感が実現
できる。これを応用すれば、離れた人同士で蓄積画像を
背景としてダンス等を楽しむ感覚を味わうこともでき、
対面対話の機能を拡張した大きな説得力を実現できる。
By displaying the facial images of both the communication partner and the user 5 on one screen with the target object image stored in the terminal as the background, an extremely high sense of realism in the dialogue can be achieved. By applying this, people who are far apart can experience the sensation of dancing with the stored images in the background.
It can achieve greater persuasive power by expanding the functions of face-to-face dialogue.

以上1本発明を実施例にもとづき具体的に説明したが、
本発明は、前記実施例に限定されるものではなく、その
要旨を逸脱しない範囲において種々変更可能であること
は言うまでもない。
The present invention has been specifically explained above based on examples, but
It goes without saying that the present invention is not limited to the embodiments described above, and can be modified in various ways without departing from the spirit thereof.

〔発明の効果〕〔Effect of the invention〕

以上、説明したように、本発明を用いれば、人物顔画像
通信と、端末蓄積画像データベース機能とを組み合わせ
た、非常に説得力のある、対話通信手段を提供できると
いう利点がある。
As described above, the present invention has the advantage of providing a highly persuasive interactive communication means that combines human face image communication and a terminal stored image database function.

【図面の簡単な説明】[Brief explanation of drawings]

第1図は1本発明の共覧形画面電話方式の実施例1を説
明するための図、 第2図は、本発明の共覧形画面電話方式の実施例2の共
電形画面電話の端末のシステム梼成を説明するための図
。 第3図は1本発明の共覧形画面電話方式の実施例3の共
電形画面電話端末における共電画面合成制御を説明する
ための図、 第4図は、背景処理を用いた共電画面合成制御の実際の
画面の例を示す図、 第5図は、本発明の共覧形画面電話方式の実施例4の共
電形画面電話端末における共電画面合成制御を説明する
ための図。 第6図は、自分と相手の両方の人物顔画像を、蓄積画像
と合成した共電画面合成の例を示す図である。 図中、1・・・通信網、2・・・端末の電話機および制
御部、3・・・蓄積画像ファイル、4・・・デイスプレ
ィ、5・・・カメラ、6・・・蓄積画像、7・・・通信
相手の実時間顔画像、8.9・・・操作者、11・・・
制御部、12・・・操作指示用のタッチパネル、13・
・・デイスプレィ、14・・画像蓄積用の光ディスク、
15・・・画像処理プロセッサ、16・・・データ通信
制御部、17・・・カメラ、18・・・画像GODEC
119・・・マイクロホン、20・・・スピーカ、21
・・・エコーキャンセラ、22・・・音声C0DEC1
23・・・回線制御部、24・・・通信回線、31.4
1・・・背景板。 32.42・・・人物、33.43・・・カメラ、34
.44・・・送信制御部、35.45・・・通信網、3
6.48・・・受信制御部、37・・・背景抽出分離部
、38・・・画像蓄積デバイス、39・・・画面分割合
成部、40・・・背景置換合成部、47・・・背景分離
合成部、48・・・画像蓄積部、49・・連動制御部、
50・・・デイスプレィ。
FIG. 1 is a diagram for explaining a first embodiment of the common screen telephone system of the present invention, and FIG. 2 is a diagram for explaining a common screen telephone according to a second embodiment of the common screen telephone system of the present invention. A diagram for explaining the system composition of a terminal. FIG. 3 is a diagram for explaining the public screen composition control in the public screen telephone terminal according to the third embodiment of the public screen telephone system of the present invention. FIG. 5 is a diagram showing an example of an actual screen for screen composition control. . FIG. 6 is a diagram illustrating an example of a shared screen composition in which facial images of both one's own face and the other's face are combined with a stored image. In the figure, 1... communication network, 2... terminal telephone and control unit, 3... accumulated image file, 4... display, 5... camera, 6... accumulated image, 7... ...Real-time face image of communication partner, 8.9...Operator, 11...
Control unit, 12... touch panel for operation instructions, 13.
...Display, 14...Optical disk for image storage,
15... Image processing processor, 16... Data communication control unit, 17... Camera, 18... Image GODEC
119...Microphone, 20...Speaker, 21
...Echo canceller, 22...Audio C0DEC1
23... Line control unit, 24... Communication line, 31.4
1...Background board. 32.42...Person, 33.43...Camera, 34
.. 44... Transmission control unit, 35.45... Communication network, 3
6.48... Reception control unit, 37... Background extraction separation unit, 38... Image storage device, 39... Screen division synthesis unit, 40... Background replacement synthesis unit, 47... Background Separation and synthesis unit, 48... image storage unit, 49... interlocking control unit,
50...Display.

Claims (3)

【特許請求の範囲】[Claims] (1)画像データを端末に蓄積する手段と、蓄積された
端末画像データベースを検索して引き出す手段と、通信
網を介して接続された複数の端末の互いに内容を同じく
する複数の画像データベースを連動して、各端末のいづ
れかから要求された検索制御指示にしたがって接続され
ている全ての端末が同期して、同じ画面を表示制御する
手段と、端末相互間での人物画像を対象とする実時間画
像通信の手段、実時間人物画像と連動・同期して表示出
力される端末蓄積画像とを一つのディスプレイ上に合成
表示する手段とから構成され、通信網を介して電子的に
対面対話をしながら、遠隔に離れた端末同士で、個々の
端末に蓄積された画像データファイルを、連動・同期さ
せ、かつ、人物画像と一体として表示することを特徴と
する共覧形画面電話方式。
(1) A means for storing image data in a terminal, a means for searching and retrieving the stored terminal image database, and a means for linking multiple image databases with the same content on multiple terminals connected via a communication network. A means for controlling the display of the same screen by synchronizing all connected terminals according to a search control instruction requested from one of the terminals, and a real-time method for displaying images of people between terminals. It consists of a means for image communication, a means for displaying a real-time human image and terminal stored images that are displayed and output in synchronization with each other on a single display, and allows face-to-face interaction electronically via a communication network. However, a co-view screen telephone system is characterized in that image data files stored in individual terminals are linked and synchronized between remotely separated terminals, and are displayed together with a person image.
(2)通信回線を介して受信する人物画像に対して、人
物部分と背景部分とを分離する手段と、端末間で連動・
同期して表示出力される端末蓄積画像を、分離した背景
部分の画像に置き換えて、入物部分と合成し、一つの画
面として表示する手段を有することを特徴とする請求項
第1項に記載の共覧形画面電話方式。
(2) A means for separating a person part and a background part for a person image received via a communication line, and an interlocking and
Claim 1, further comprising means for replacing the terminal accumulated image that is displayed and output in synchronization with the image of the separated background part, composing it with the container part, and displaying it as one screen. public screen telephone system.
(3)通信相手に対して送信する自分の側の人物画像に
対して、人物部分と背景部分とを分離する手段と、通信
相手から受信する人物画像と自分の側の人物画像の両方
の人物画像に対して、端末間で連動・同期して表示出力
される端末蓄積画像を、分離した背景部分の画像に置き
換えて、人物部分と合成し、一つの画面として表示する
手段を有することを特徴とする請求項第2項に記載の共
覧形画面電話方式。
(3) A means for separating a person part and a background part of a person image of one's side transmitted to a communication partner, and a means for separating a person part and a background part of a person image received from a communication partner and a person image of one's side. The device is characterized by having a means for replacing the terminal stored image, which is displayed and output in conjunction and synchronization between the terminals, with a separate background image, compositing it with the human figure, and displaying it as a single screen. A shared screen telephone system according to claim 2.
JP1185187A 1989-07-17 1989-07-17 Shared-view screen telephone system Expired - Lifetime JP2849119B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP1185187A JP2849119B2 (en) 1989-07-17 1989-07-17 Shared-view screen telephone system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP1185187A JP2849119B2 (en) 1989-07-17 1989-07-17 Shared-view screen telephone system

Publications (2)

Publication Number Publication Date
JPH0349385A true JPH0349385A (en) 1991-03-04
JP2849119B2 JP2849119B2 (en) 1999-01-20

Family

ID=16166373

Family Applications (1)

Application Number Title Priority Date Filing Date
JP1185187A Expired - Lifetime JP2849119B2 (en) 1989-07-17 1989-07-17 Shared-view screen telephone system

Country Status (1)

Country Link
JP (1) JP2849119B2 (en)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0549026A (en) * 1991-08-13 1993-02-26 Nippon Telegr & Teleph Corp <Ntt> Video edit reproduction method
JPH05137137A (en) * 1991-11-13 1993-06-01 Sony Corp Video conference system
JPH05168007A (en) * 1991-12-18 1993-07-02 Matsushita Electric Ind Co Ltd Pictorial communication equipment
JPH05207451A (en) * 1992-01-29 1993-08-13 Sony Corp Video conference system
JPH0646479A (en) * 1992-07-22 1994-02-18 Nippon Telegr & Teleph Corp <Ntt> Remote operation system
JPH06165173A (en) * 1992-11-17 1994-06-10 Nippon Telegr & Teleph Corp <Ntt> System for attaining virtual society
JPH06209475A (en) * 1993-01-11 1994-07-26 Toshiba Corp Multi-medium equipment
US5565911A (en) * 1991-11-13 1996-10-15 Sony Corporation Teleconference system with improved resolution of transmitted picture
JPH11289523A (en) * 1995-02-16 1999-10-19 Sumitomo Electric Ind Ltd Bidirectional interactive system
JPH11355747A (en) * 1998-06-10 1999-12-24 Nec Corp Video/sound communication equipment and video conference equipment using the same equipment
JP2000324463A (en) * 1999-05-12 2000-11-24 Nec Corp Video conference system
JP2001177813A (en) * 1999-12-16 2001-06-29 Oki Electric Ind Co Ltd Inter-device communication method
WO2002013525A1 (en) * 2000-08-04 2002-02-14 Ryuji Baba Product produced by customizing existing object through communication means and method for producing the same
JP2002247541A (en) * 2001-02-15 2002-08-30 Nippon Telegr & Teleph Corp <Ntt> Multi-spot video display control method and remote conference system in which multi-spot video display control is performed
GB2380629A (en) * 2001-09-27 2003-04-09 Hewlett Packard Co Display and manipulation of a pictorial image synchronously with a remote computer apparatus
JP2003284067A (en) * 2002-03-22 2003-10-03 Nippon Hoso Kyokai <Nhk> Image relay system, image transmitter and its program, and image receiver and its program
JP2004229086A (en) * 2003-01-24 2004-08-12 Kyocera Corp Image data communication device
JP2008271214A (en) * 2007-04-20 2008-11-06 Ipevo Corp Video transmission method

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010087907A (en) 2008-09-30 2010-04-15 Canon Inc Video combination and display, video display system and video display method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6253084A (en) * 1985-09-02 1987-03-07 Nec Corp Terminal equipment for remote conference system
JPS62226783A (en) * 1986-03-28 1987-10-05 Toshiba Corp Electronic conference system
JPH01101087A (en) * 1987-10-14 1989-04-19 Toshiba Corp Picture transmission equipment
JPH0244834A (en) * 1988-08-05 1990-02-14 Toshiba Corp Video conference equipment

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6253084A (en) * 1985-09-02 1987-03-07 Nec Corp Terminal equipment for remote conference system
JPS62226783A (en) * 1986-03-28 1987-10-05 Toshiba Corp Electronic conference system
JPH01101087A (en) * 1987-10-14 1989-04-19 Toshiba Corp Picture transmission equipment
JPH0244834A (en) * 1988-08-05 1990-02-14 Toshiba Corp Video conference equipment

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0549026A (en) * 1991-08-13 1993-02-26 Nippon Telegr & Teleph Corp <Ntt> Video edit reproduction method
JPH05137137A (en) * 1991-11-13 1993-06-01 Sony Corp Video conference system
US5565911A (en) * 1991-11-13 1996-10-15 Sony Corporation Teleconference system with improved resolution of transmitted picture
JPH05168007A (en) * 1991-12-18 1993-07-02 Matsushita Electric Ind Co Ltd Pictorial communication equipment
JPH05207451A (en) * 1992-01-29 1993-08-13 Sony Corp Video conference system
JPH0646479A (en) * 1992-07-22 1994-02-18 Nippon Telegr & Teleph Corp <Ntt> Remote operation system
JPH06165173A (en) * 1992-11-17 1994-06-10 Nippon Telegr & Teleph Corp <Ntt> System for attaining virtual society
JPH06209475A (en) * 1993-01-11 1994-07-26 Toshiba Corp Multi-medium equipment
JPH11289523A (en) * 1995-02-16 1999-10-19 Sumitomo Electric Ind Ltd Bidirectional interactive system
JPH11355747A (en) * 1998-06-10 1999-12-24 Nec Corp Video/sound communication equipment and video conference equipment using the same equipment
JP2000324463A (en) * 1999-05-12 2000-11-24 Nec Corp Video conference system
US6529231B1 (en) 1999-05-12 2003-03-04 Nec Corporation Television meeting system
JP2001177813A (en) * 1999-12-16 2001-06-29 Oki Electric Ind Co Ltd Inter-device communication method
WO2002013525A1 (en) * 2000-08-04 2002-02-14 Ryuji Baba Product produced by customizing existing object through communication means and method for producing the same
JP2002247541A (en) * 2001-02-15 2002-08-30 Nippon Telegr & Teleph Corp <Ntt> Multi-spot video display control method and remote conference system in which multi-spot video display control is performed
GB2380629A (en) * 2001-09-27 2003-04-09 Hewlett Packard Co Display and manipulation of a pictorial image synchronously with a remote computer apparatus
GB2380629B (en) * 2001-09-27 2005-09-28 Hewlett Packard Co Display and manipulation of pictorial images
JP2003284067A (en) * 2002-03-22 2003-10-03 Nippon Hoso Kyokai <Nhk> Image relay system, image transmitter and its program, and image receiver and its program
JP2004229086A (en) * 2003-01-24 2004-08-12 Kyocera Corp Image data communication device
JP2008271214A (en) * 2007-04-20 2008-11-06 Ipevo Corp Video transmission method

Also Published As

Publication number Publication date
JP2849119B2 (en) 1999-01-20

Similar Documents

Publication Publication Date Title
JPH0349385A (en) Codisplay type picture telephone system
KR100336091B1 (en) Communication system
AU2004248274B2 (en) Intelligent collaborative media
US20010044725A1 (en) Information processing apparatus, an information processing method, and a medium for use in a three-dimensional virtual reality space sharing system
Apers et al. Multimedia database in perspective
Manning Dramaturgy, politics and the axial media event
US7089505B2 (en) Information processing apparatus and information display method
JP2001313915A (en) Video conference equipment
JP2003509879A (en) Video conferencing using e-book viewer
JP2002109099A (en) System and device for recording data and video image/ voice, and computer readable recording medium
Manning Reflections: the visual as a mode of social control
EP0663771B1 (en) Method of transmitting signals between communication stations
Rasmussen Social interaction and the new media: The construction of communicative contexts
KR20070090535A (en) Video conference recording method and video conference terminal for the same
Agamanolis et al. Reflection of Presence: Toward more natural and responsive telecollaboration
US20020083091A1 (en) Seamless integration of video on a background object
JPH1155643A (en) Remote communication system using video conference device and communication equipment
Reisman Multimedia computing: preparing for the 21st century
JP2005260513A (en) System and method for processing content and computer program
Sohlenkamp et al. Dynamic Interfaces for Cooperative Activities
Murphy Juan Downey's Ethnographic Present
Weinstein et al. Beyond the telephone: New ways to communicate
Kacunko Immediacy of Image–Image of Immediacy. Live Media Art in Japan between Tradition and Hypermodernity. An historical and contemporary View
Vanes Useful Video in the Art Museum: Museum Education in Chicago and the Videos of Andrea Fraser
WO2004014059A2 (en) Method and apparatus for processing image-based events in a meeting management system

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071106

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081106

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091106

Year of fee payment: 11

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091106

Year of fee payment: 11