JP2003150931A - Image display system, image display terminal device, image display device, image display method, program and medium - Google Patents

Image display system, image display terminal device, image display device, image display method, program and medium

Info

Publication number
JP2003150931A
JP2003150931A JP2001351817A JP2001351817A JP2003150931A JP 2003150931 A JP2003150931 A JP 2003150931A JP 2001351817 A JP2001351817 A JP 2001351817A JP 2001351817 A JP2001351817 A JP 2001351817A JP 2003150931 A JP2003150931 A JP 2003150931A
Authority
JP
Japan
Prior art keywords
image
data
image data
index
stored
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2001351817A
Other languages
Japanese (ja)
Inventor
Katsuyuki Sakaniwa
克幸 坂庭
Takayuki Nakamura
貴之 中村
Hiroshi Saito
浩 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2001351817A priority Critical patent/JP2003150931A/en
Publication of JP2003150931A publication Critical patent/JP2003150931A/en
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • Digital Computer Display Output (AREA)

Abstract

PROBLEM TO BE SOLVED: To display an image at high speed without lowering of representation capability. SOLUTION: This image display system comprises a storage medium 8 for previously storing the whole or a part of an image representation data conversion table showing the correspondence relationship between modeling image data and an index, a storage medium 9 for storing the whole or a part of the modeling image data, an image representation data converting part 4 for interpreting designated text data to obtain an index, and an image generating part 5 for performing image display by using the stored modeling image data with reference to the stored correspondence relationship according to the interpreting result.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は、ネットワーク映像
表示システムなどに利用される画像表示システム、画像
表示端末装置、画像表示装置、画像表示方法、プログラ
ム、および媒体に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image display system, an image display terminal device, an image display device, an image display method, a program, and a medium used in a network video display system or the like.

【0002】[0002]

【従来の技術】映像データの転送量を減らす試みに関し
ては、MPEGのようにフレーム間圧縮をすることによ
り、その差分のみを転送する圧縮方式など圧縮方式に関
する取り組みがされている。なお、マルチキャスト用に
低ビットレートのデータを送り、ダウンロード用に高ビ
ットレートを送るなどビットレートの異なる映像データ
を用意し、用途に応じてこれら使い分けることで映像デ
ータの転送量を減らす試みもある。
2. Description of the Related Art In an attempt to reduce the transfer amount of video data, a compression method such as a compression method for transferring only the difference by performing inter-frame compression like MPEG has been undertaken. There is also an attempt to reduce the transfer amount of video data by preparing video data with different bit rates such as sending low bit rate data for multicast and sending high bit rate for download, and selectively using these depending on the application. .

【0003】また、映像データを操作するための特別な
コントロールやプログラム(特定の言語で記述された汎
用性の低いもの)などの制御信号を送る方式も考えられ
ている。
Also, a method of sending a control signal such as a special control or a program (which has a low versatility written in a specific language) for operating the video data has been considered.

【0004】[0004]

【発明が解決しようとしている課題】しかしながら、こ
のような方式では、コンテンツ作成者の負担が増える
上、既存のデータを利用しにくいことに、本発明者は気
付いた。
However, the present inventor has found that such a method increases the burden on the content creator and makes it difficult to use existing data.

【0005】より具体的に述べると、近年ネットワーク
の高速化やブロードバンド通信などが実現されようとし
ているが、ネットワークでの大容量データの転送にはま
だまだ大きな時間がかかり、たとえブロードバンド技術
が確立されたとしても、大容量のデータの受信にはかな
り時間がかかると考えられる。したがって、データ転送
量をより少なくしつつ同じ表現能力を持った映像を出力
することは非常に有効なことであり、コンテンツ作成者
やユーザーに負担をかけずにそれが実現されるのが望ま
しいことに、本発明者は気付いた。
More specifically, although the speeding up of networks and broadband communication are about to be realized in recent years, it takes a long time to transfer a large amount of data through a network, and even if broadband technology is established. Even so, it is considered that it takes a considerable time to receive a large amount of data. Therefore, it is very effective to output video with the same expression capability while reducing the amount of data transfer, and it is desirable that this be achieved without burdening content creators and users. Then, the inventor noticed.

【0006】本発明は、上記従来のこのような課題を考
慮し、表現能力を低下させることなく高速に映像を表示
することができる画像表示システム、画像表示端末装
置、画像表示装置、画像表示方法、プログラム、および
媒体を提供することを目的とするものである。
In consideration of the above-mentioned conventional problems, the present invention provides an image display system, an image display terminal device, an image display device, and an image display method capable of displaying an image at high speed without lowering the expression ability. , Programs, and media.

【0007】[0007]

【課題を解決するための手段】第一の本発明(請求項1
に対応)は、画像データとインデックスとの対応関係の
全部または一部をあらかじめ格納するための格納手段
と、前記画像データの全部または一部を記憶するための
記憶手段と、所定のテキストデータを解釈して前記イン
デックスを得るための解釈手段と、前記解釈の結果に基
づき、前記格納されている対応関係を見て、前記記憶さ
れている画像データを利用して画像表示を行うための表
示手段とを備えた画像表示システムである。
[Means for Solving the Problems] The first invention (Claim 1)
Corresponds to a storage means for storing in advance all or part of the correspondence relationship between the image data and the index, a storage means for storing all or part of the image data, and predetermined text data. Interpretation means for interpreting and obtaining the index, and display means for viewing the stored correspondence relationship based on the result of the interpretation and performing image display using the stored image data An image display system including and.

【0008】第二の本発明(請求項2に対応)は、前記
解釈手段は、言語解析を利用して前記解釈を行う第一の
本発明の画像表示システムである。
A second aspect of the present invention (corresponding to claim 2) is the image display system according to the first aspect of the present invention, wherein the interpretation means uses the language analysis to perform the interpretation.

【0009】第三の本発明(請求項3に対応)は、前記
インデックスは、所定の品詞である第二の本発明の画像
表示システムである。
A third aspect of the present invention (corresponding to claim 3) is the image display system according to the second aspect of the present invention, in which the index is a predetermined part of speech.

【0010】第四の本発明(請求項4に対応)は、前記
表示手段は、前記画像データを複数個合成しその合成の
結果に基づいて前記画像表示を行う第一の本発明の画像
表示システムである。
According to a fourth aspect of the present invention (corresponding to claim 4), the display means synthesizes a plurality of the image data and displays the image based on a result of the synthesis. System.

【0011】第五の本発明(請求項5に対応)は、前記
格納されている対応関係および/または前記記憶されて
いる画像データを所定の基準に基づいて更新するための
更新手段を備えた第一から第四の何れかの本発明の画像
表示システムである。
A fifth aspect of the present invention (corresponding to claim 5) comprises an updating means for updating the stored correspondence relationship and / or the stored image data based on a predetermined standard. The image display system according to any one of the first to fourth aspects of the present invention.

【0012】第六の本発明(請求項6に対応)は、前記
行われる画像表示の履歴に関する履歴データを作成する
ための履歴データ作成手段を備え、前記更新手段は、前
記作成された履歴データに基づいて前記更新を行う第五
の本発明の画像表示システムである。
According to a sixth aspect of the present invention (corresponding to claim 6), there is provided history data creating means for creating history data concerning the history of the image display to be performed, and the updating means comprises the created history data. An image display system according to the fifth aspect of the present invention, which performs the update based on the above.

【0013】第七の本発明(請求項7に対応)は、前記
格納されている対応関係および/または前記記憶されて
いる画像データの一部は、所定のネットワーク上のデー
タサーバに保存されている第一から第四の何れかの本発
明の画像表示システムである。
According to a seventh aspect of the present invention (corresponding to claim 7), the stored correspondence and / or a part of the stored image data is stored in a data server on a predetermined network. The image display system according to any one of the first to fourth aspects of the present invention.

【0014】第八の本発明(請求項8に対応)は、前記
テキストデータは、ユーザに対して表示され、前記表示
されるテキストデータの内の前記行われている画像表示
に応じた部分を指摘するための指摘手段を備えた第一か
ら第四の何れかの本発明の画像表示システムである。
In an eighth aspect of the present invention (corresponding to claim 8), the text data is displayed to a user, and a portion of the displayed text data corresponding to the image display being performed is displayed. The image display system according to any one of the first to fourth aspects of the present invention, which is provided with pointing means for pointing out.

【0015】第九の本発明(請求項9に対応)は、前記
テキストデータは、ユーザに対して表示され、前記表示
を見たユーザの指示に基づいて前記テキストデータの所
定部分を選択するための選択手段を備え、前記解釈手段
は、前記選択された所定部分に対して前記解釈を行う第
一から第四の何れかの本発明の画像表示システムであ
る。
In a ninth aspect of the present invention (corresponding to claim 9), the text data is displayed to a user, and a predetermined portion of the text data is selected based on an instruction of the user who saw the display. And the interpreting means is the image display system according to any one of the first to fourth aspects of the invention, which interprets the selected predetermined portion.

【0016】第十の本発明(請求項10に対応)は、画
像データの全部または一部を記憶するための記憶手段
と、所定のテキストデータを解釈してインデックスを得
るための解釈手段と、前記解釈の結果に基づき、前記画
像データと前記インデックスとのあらかじめ用意されて
いる対応関係を見て、前記記憶されている画像データを
利用して画像表示を行うための表示手段とを備えた画像
表示端末装置である。
According to a tenth aspect of the present invention (corresponding to claim 10), storage means for storing all or part of image data, and interpretation means for interpreting predetermined text data to obtain an index. An image provided with a display unit for displaying an image using the stored image data by looking at a corresponding correspondence between the image data and the index based on the result of the interpretation. It is a display terminal device.

【0017】第十一の本発明(請求項11に対応)は、
あらかじめ記憶されている画像データを利用して画像表
示を行うための画像表示装置であって、所定のテキスト
データを解釈してインデックスを得るための解釈手段
と、前記解釈の結果に基づき、前記画像データと前記イ
ンデックスとのあらかじめ用意されている対応関係を見
て、前記記憶されている画像データを利用して画像表示
を行うための表示手段とを備えた画像表示装置である。
The eleventh invention (corresponding to claim 11) is
An image display device for displaying an image using image data stored in advance, the interpreting means for interpreting predetermined text data to obtain an index, and the image based on a result of the interpretation. The image display device is provided with a display means for displaying an image by utilizing the stored image data by observing a previously prepared correspondence between the data and the index.

【0018】第十二の本発明(請求項12に対応)は、
画像データとインデックスとの対応関係の全部または一
部をあらかじめ格納するステップと、前記画像データの
全部または一部を記憶するステップと、所定のテキスト
データを解釈して前記インデックスを得るためのステッ
プと、前記解釈の結果に基づき、前記格納されている対
応関係を見て、前記記憶されている画像データを利用し
て画像表示を行うステップとを備えた画像表示方法であ
る。
The twelfth aspect of the present invention (corresponding to claim 12) is
Pre-storing all or part of the correspondence between the image data and the index, storing all or part of the image data, and interpreting predetermined text data to obtain the index. And, based on the result of the interpretation, looking at the stored correspondence, and displaying the image using the stored image data.

【0019】第十三の本発明(請求項13に対応)は、
画像データの全部または一部を記憶するステップと、所
定のテキストデータを解釈してインデックスを得るステ
ップと、前記解釈の結果に基づき、前記画像データと前
記インデックスとのあらかじめ用意されている対応関係
を見て、前記記憶されている画像データを利用して画像
表示を行うステップとを備えた画像表示方法である。
The thirteenth invention (corresponding to claim 13) is
A step of storing all or a part of the image data; a step of interpreting predetermined text data to obtain an index; and a correspondence relationship prepared in advance between the image data and the index based on a result of the interpretation. The image display method further includes a step of displaying an image by using the stored image data.

【0020】第十四の本発明(請求項14に対応)は、
あらかじめ記憶されている画像データを利用して画像表
示を行うための画像表示方法であって、所定のテキスト
データを解釈してインデックスを得るステップと、前記
解釈の結果に基づき、前記画像データと前記インデック
スとのあらかじめ用意されている対応関係を見て、前記
記憶されている画像データを利用して画像表示を行うス
テップとを備えた画像表示方法である。
The fourteenth invention (corresponding to claim 14) is
An image display method for displaying an image by using image data stored in advance, the step of interpreting predetermined text data to obtain an index, and the image data and the The image display method further comprises a step of displaying an image using the stored image data by observing a previously prepared correspondence with the index.

【0021】第十五の本発明(請求項15に対応)は、
第十二の本発明の画像表示方法の、画像データとインデ
ックスとの対応関係の全部または一部をあらかじめ格納
するステップと、前記画像データの全部または一部を記
憶するステップと、所定のテキストデータを解釈して前
記インデックスを得るためのステップと、前記解釈の結
果に基づき、前記格納されている対応関係を見て、前記
記憶されている画像データを利用して画像表示を行うス
テップとの全部または一部をコンピュータに実行させる
ためのプログラムである。
The fifteenth invention (corresponding to claim 15) is
In the image display method of the twelfth aspect of the present invention, a step of pre-storing all or part of the correspondence between the image data and the index, a step of storing all or part of the image data, and predetermined text data And the step of performing the image display using the stored image data by looking at the stored correspondence relationship based on the result of the interpretation. Alternatively, it is a program for causing a computer to execute a part.

【0022】第十六の本発明(請求項16に対応)は、
第十二の本発明の画像表示方法の、画像データとインデ
ックスとの対応関係の全部または一部をあらかじめ格納
するステップと、前記画像データの全部または一部を記
憶するステップと、所定のテキストデータを解釈して前
記インデックスを得るためのステップと、前記解釈の結
果に基づき、前記格納されている対応関係を見て、前記
記憶されている画像データを利用して画像表示を行うス
テップとの全部または一部をコンピュータに実行させる
ためのプログラムを担持した媒体であって、コンピュー
タにより処理可能な媒体である。
The sixteenth invention (corresponding to claim 16) is
In the image display method of the twelfth aspect of the present invention, a step of pre-storing all or part of the correspondence between the image data and the index, a step of storing all or part of the image data, and predetermined text data And the step of performing the image display using the stored image data by looking at the stored correspondence relationship based on the result of the interpretation. Alternatively, it is a medium that carries a program for causing a computer to execute a part of the computer and is a medium that can be processed by the computer.

【0023】第十七の本発明(請求項17に対応)は、
第十三の本発明の画像表示方法の、画像データの全部ま
たは一部を記憶するステップと、所定のテキストデータ
を解釈してインデックスを得るステップと、前記解釈の
結果に基づき、前記画像データと前記インデックスとの
あらかじめ用意されている対応関係を見て、前記記憶さ
れている画像データを利用して画像表示を行うステップ
との全部または一部をコンピュータに実行させるための
プログラムである。
The seventeenth invention (corresponding to claim 17) is
In the image display method according to the thirteenth aspect of the present invention, a step of storing all or a part of the image data, a step of interpreting predetermined text data to obtain an index, and the image data based on a result of the interpretation. It is a program for causing a computer to execute all or part of the step of displaying an image using the stored image data by observing a previously prepared correspondence with the index.

【0024】第十八の本発明(請求項18に対応)は、
第十三の本発明の画像表示方法の、画像データの全部ま
たは一部を記憶するステップと、所定のテキストデータ
を解釈してインデックスを得るステップと、前記解釈の
結果に基づき、前記画像データと前記インデックスとの
あらかじめ用意されている対応関係を見て、前記記憶さ
れている画像データを利用して画像表示を行うステップ
との全部または一部をコンピュータに実行させるための
プログラムを担持した媒体であって、コンピュータによ
り処理可能な媒体である。
The eighteenth invention (corresponding to claim 18) is
In the image display method according to the thirteenth aspect of the present invention, a step of storing all or a part of the image data, a step of interpreting predetermined text data to obtain an index, and the image data based on a result of the interpretation. A medium carrying a program for causing a computer to execute all or part of the step of displaying an image by using the stored image data by looking at a corresponding relationship prepared in advance with the index. It is a medium that can be processed by a computer.

【0025】第十九の本発明(請求項19に対応)は、
第十四の本発明の画像表示方法の、所定のテキストデー
タを解釈してインデックスを得るステップと、前記解釈
の結果に基づき、前記画像データと前記インデックスと
のあらかじめ用意されている対応関係を見て、前記記憶
されている画像データを利用して画像表示を行うステッ
プとの全部または一部をコンピュータに実行させるため
のプログラムである。
The nineteenth invention (corresponding to claim 19) is
In the image display method according to the fourteenth aspect of the present invention, a step of interpreting predetermined text data to obtain an index, and based on a result of the interpretation, a correspondence relationship prepared in advance between the image data and the index is checked. And a program for causing a computer to execute all or a part of the step of displaying an image using the stored image data.

【0026】第二十の本発明(請求項20に対応)は、
第十四の本発明の画像表示方法の、所定のテキストデー
タを解釈してインデックスを得るステップと、前記解釈
の結果に基づき、前記画像データと前記インデックスと
のあらかじめ用意されている対応関係を見て、前記記憶
されている画像データを利用して画像表示を行うステッ
プとの全部または一部をコンピュータに実行させるため
のプログラムを担持した媒体であって、コンピュータに
より処理可能な媒体である。
The twentieth invention of the present invention (corresponding to claim 20) is
In the image display method according to the fourteenth aspect of the present invention, a step of interpreting predetermined text data to obtain an index, and based on a result of the interpretation, a correspondence relationship prepared in advance between the image data and the index is checked. Then, it is a medium that carries a program for causing a computer to execute all or part of the step of displaying an image using the stored image data, and is a medium that can be processed by the computer.

【0027】[0027]

【発明の実施の形態】以下に、本発明にかかる実施の形
態について、図面を参照しつつ説明を行う。
BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described below with reference to the drawings.

【0028】(実施の形態1)はじめに、図1を主とし
て参照しながら、本実施の形態の映像表示システム(画
像表示システム)の構成および動作について説明する。
なお、本実施の形態の映像表示システムの動作について
説明しながら、本発明の画像表示方法の一実施の形態に
ついても説明する(以下の実施の形態についても同様で
ある)。
(Embodiment 1) First, the configuration and operation of a video display system (image display system) of the present embodiment will be described mainly with reference to FIG.
While describing the operation of the video display system of the present embodiment, an embodiment of the image display method of the present invention will also be described (the same applies to the following embodiments).

【0029】ネットワーク転送量を減らすためには、す
べての映像データを転送することは望ましくない。しか
し、映像データを操作するための特別なコントロールや
プログラムを送ることは、コンテンツ作成者にとって負
担であるとともに、すでにあるコンテンツを使いまわす
ことができず、汎用性という点で問題である。
In order to reduce the network transfer amount, it is not desirable to transfer all video data. However, sending a special control or program for operating the video data is a burden on the content creator, and the existing content cannot be reused, which is a problem in terms of versatility.

【0030】本実施の形態では、実質上、汎用性の高い
テキストデータをネットワーク転送するだけで、受信側
で動的に映像を生成し、表示する。
In the present embodiment, the receiving side dynamically generates and displays the image by simply transferring the highly versatile text data over the network.

【0031】つまり、映像のモデリングデータをローカ
ルストレージ上に記憶し(このようなモデリングデータ
のデフォルト部分は、あらかじめ書籍などの付録として
CD−ROMを利用して供給するなどしてもよい)、ネ
ットワークからはテキストコンテンツのみを転送するこ
とで転送量の低下を行い、テキストコンテンツから映像
を生成する仕組みを設ける。もちろん、テキストコンテ
ンツは、分野に限定して(たとえば製品を組み立てるた
めの手順書の表示などに限定して)作成者がカスタマイ
ズする必要がないようにしてもよい。
That is, the modeling data of the image is stored in the local storage (the default part of such modeling data may be supplied in advance by using a CD-ROM as an appendix of a book etc.), and the network. In order to reduce the transfer amount by transferring only the text contents, a mechanism for generating video from the text contents will be provided. Of course, the text content may not need to be customized by the creator in a limited field (for example, in the display of a procedure manual for assembling a product).

【0032】図1は、本実施の形態の映像表示システム
の概要を示す図である。
FIG. 1 is a diagram showing an outline of the video display system of the present embodiment.

【0033】ローカル上の記憶媒体8、9に映像表現デ
ータ変換テーブルと映像のモデリング画像データとをそ
れぞれ記憶する。
A video expression data conversion table and video modeling image data are stored in local storage media 8 and 9, respectively.

【0034】モデリング画像データとはCGでいうポリ
ゴンデータやアニメーションのスライドのように一枚の
画像を表現するための部品データのことである。映像表
現データ変換テーブルはテキストデータから映像へのマ
ッピングを取る辞書のような働きをする。
The modeling image data is part data for expressing one image like polygon data called CG or slide of animation. The video expression data conversion table works like a dictionary that takes a mapping from text data to video.

【0035】まず、ネットワークを通して送られたテキ
ストデータはテキスト表示部1により、モニタ(図示省
略)にテキストを表示する。(1)ユーザーの指定がな
い場合にはテキストの全部に対して、(2)ユーザーの
指定があった場合にはテキストのその指定に対応する部
分に対してインデックスの抽出を行い、映像表現データ
変換テーブルをもとに表現映像のための映像表現データ
への変換を行う。
First, the text data sent through the network is displayed on the monitor (not shown) by the text display unit 1. (1) If the user does not specify, the index is extracted for the entire text, and (2) If the user specifies, the index is extracted for the part corresponding to the specification, and the video expression data is extracted. Based on the conversion table, conversion to video expression data for expression video is performed.

【0036】映像生成部5では、この映像表現データと
モデリング画像データをもとに複数枚の画像を生成し、
その画像を時系列にそって表示することで映像表現デー
タからモニタに映像を表示する。
The video generation unit 5 generates a plurality of images based on the video expression data and the modeling image data,
By displaying the image in time series, the image is displayed on the monitor from the image expression data.

【0037】テキストポインティング部2では、テキス
ト表示部1で表示しているテキストを、表示されている
映像と同期を取るように強調表示やポインタにより指し
示すなどの処理を行うことにより、テキストのどの部分
が表現されているかを明示する。
In the text pointing unit 2, which part of the text is displayed by performing processing such as highlighting or pointing with a pointer so that the text displayed on the text display unit 1 is synchronized with the displayed video. Specify whether is expressed.

【0038】ユーザーが任意の個所を選択したい場合
は、テキスト選択部3によりユーザーからの選択を受け
入れ、選択されたテキストを映像表現データ変換部4へ
送ることにより、選択個所のみを映像表現する。
When the user wants to select an arbitrary part, the text selection part 3 accepts the selection from the user and sends the selected text to the image expression data conversion part 4 so that only the selected part is imaged.

【0039】なお、ローカル上のデータは時が経つにつ
れ、古くなり、表現できないことが増えてくることが予
想される。
It is expected that the local data will become older and cannot be expressed over time.

【0040】そのための対策として、ネットワークサー
バー(映像データサーバ、サーバーともいう)12上に
最新の映像表現データ変換テーブルと映像のモデリング
画像データを用意しておき、動的にそのデータを取得す
ることで最新の状態に保つことができる。
As a countermeasure for that, the latest video expression data conversion table and video modeling image data are prepared on a network server (also called a video data server or server) 12 and the data is dynamically acquired. You can keep up to date with.

【0041】つまり、ローカルデータを補完する形で、
ローカルにないデータをネットワークサーバー12から
取得することで常に最新の映像データを表示することが
可能である。また、常に最新情報である必要がない場合
は、定期的な更新をすることで十分な効果を得ることが
できる。
That is, in the form of complementing the local data,
It is possible to always display the latest video data by acquiring data that is not local from the network server 12. In addition, if it is not always necessary to keep the latest information, it is possible to obtain a sufficient effect by regularly updating.

【0042】もちろん、ローカル上のデータはすべての
表現に対応しているわけではなく、映像表現データ変換
テーブルに対応した表現が登録されていない場合や映像
のモデリング画像データがない場合などがありうるが、
ローカルの記憶容量には限界があるので、すべてのデー
タを読み込んでおくことは困難である。
Of course, the local data does not correspond to all expressions, and there may be cases where expressions corresponding to the video expression data conversion table are not registered or there is no video modeling image data. But,
It is difficult to read all the data because the local storage capacity is limited.

【0043】このときはサーバー12上にある映像表現
データ変換テーブルやモデリング画像データを使用する
ことで変換を行い、モニタに映像を表示する。
At this time, the conversion is performed by using the video expression data conversion table or modeling image data on the server 12, and the video is displayed on the monitor.

【0044】なお、サーバーへの問い合わせは時間がか
かるため、なるべくこの回数を減らすべきである。
Since it takes time to make an inquiry to the server, this number should be reduced as much as possible.

【0045】そのために、ユーザー履歴を用いることが
有効である。キーワード抽出部6において、ネットワー
クから取得したテキストのキーワードを抽出する。
Therefore, it is effective to use the user history. The keyword extracting unit 6 extracts the keyword of the text acquired from the network.

【0046】テキスト選択部3で選択されたテキストと
キーワードをもとにユーザー履歴作成部(ユーザー履歴
データ作成部ともいう)7ではユーザーの履歴(ユーザ
ー履歴データともいう)を作成し、記憶媒体(データベ
ース)10に記憶する。データ更新部11では、ユーザ
ー履歴データをもとに映像表現データ変換テーブルと映
像のモデリング画像データをサーバー12から取得し、
ローカル上のデータを更新する。これにより限られたロ
ーカル資源で効率的に映像を表示することが可能であ
る。
A user history creation unit (also called user history data creation unit) 7 creates a user history (also called user history data) based on the text and keywords selected by the text selection unit 3, and a storage medium ( Database) 10. The data updating unit 11 acquires a video expression data conversion table and video modeling image data from the server 12 based on the user history data,
Update local data. As a result, it is possible to display video efficiently with limited local resources.

【0047】なお、本実施の形態のモデリング画像デー
タは本発明の画像データに対応し、本実施の形態の映像
表現データ変換テーブルは本発明の画像データとインデ
ックスとの対応関係に対応し、記憶媒体8は本発明の格
納手段に対応し、記憶媒体9は本発明の記憶手段に対応
し、映像表現データ変換部4は本発明の解釈手段に対応
し、映像生成部5は本発明の表示手段に対応する。
The modeling image data of the present embodiment corresponds to the image data of the present invention, and the video expression data conversion table of the present embodiment corresponds to the correspondence relationship between the image data and the index of the present invention and is stored. The medium 8 corresponds to the storage means of the present invention, the storage medium 9 corresponds to the storage means of the present invention, the image representation data conversion unit 4 corresponds to the interpretation unit of the present invention, and the image generation unit 5 displays the image of the present invention. Corresponds to the means.

【0048】また、データ更新部11は本発明の更新手
段に対応し、映像データサーバ12は本発明のデータサ
ーバに対応し、テキスト選択部3は本発明の選択手段に
対応し、テキストポインティング部2は本発明の指摘手
段に対応する。
The data updating section 11 corresponds to the updating means of the present invention, the video data server 12 corresponds to the data server of the present invention, the text selecting section 3 corresponds to the selecting means of the present invention, and the text pointing section. 2 corresponds to the pointing means of the present invention.

【0049】(実施の形態2)つぎに、図2を主として
参照しながら、手話システムを例にとって、本実施の形
態の映像表示システムの構成および動作について説明す
る。
(Second Embodiment) Next, with reference mainly to FIG. 2, the configuration and operation of the video display system of the present embodiment will be described taking a sign language system as an example.

【0050】聾唖者にとっては、ネットワークから取得
したテキストデータをそのまま表示すればよいというも
のではない。文字が読めない場合もあるし、手話で表現
したほうがわかりやすいという場合もある。
The deaf person does not have to display the text data acquired from the network as it is. In some cases, the letters are not readable, and in other cases it is easier to understand in sign language.

【0051】図2は、手話の処理の過程を示した図であ
る。
FIG. 2 is a diagram showing a process of sign language processing.

【0052】コンテンツサーバ21からネットワークを
通じて取得したテキストデータはネットワークデータ受
信部22で受信し、テキスト表示部23と手話データ変
換部25へと送られる。テキスト表示部23では入力テ
キストをモニタ24へと表示する。手話データ変換部2
5では、記憶媒体27の手話データ変換テーブルを用い
てテキストデータを手話表現データへと変換する。
The text data obtained from the content server 21 via the network is received by the network data receiving section 22 and sent to the text display section 23 and the sign language data converting section 25. The text display unit 23 displays the input text on the monitor 24. Sign language data converter 2
In 5, the text data is converted into the sign language expression data using the sign language data conversion table of the storage medium 27.

【0053】なお、本実施の形態における手話システム
は、テキストデータから所定の品詞(インデックス)と
して名詞を抽出し、その抽出された名詞を手話通訳する
簡易型の手話システムである。また、手話データ変換テ
ーブルは、名詞からそれを表現するジェスチャを生成す
るためのマッピング演算用の辞書である。
The sign language system in the present embodiment is a simple sign language system that extracts a noun as a predetermined part of speech (index) from text data and interprets the extracted noun. In addition, the sign language data conversion table is a dictionary for mapping calculation for generating a gesture expressing it from a noun.

【0054】手話データ変換部25で変換されたデータ
は手話映像生成部26とテキストポインティング部29
へと送られる。手話映像生成部26では手話表現データ
と記憶媒体28の手話モデリング画像データから手話画
像を複数枚生成することで手話映像を生成する。手話モ
デリング画像データは図1におけるモデリング画像デー
タの一部と考えてもよい。
The data converted by the sign language data conversion unit 25 is the sign language video generation unit 26 and the text pointing unit 29.
Sent to. The sign language image generation unit 26 generates a sign language image by generating a plurality of sign language images from the sign language expression data and the sign language modeling image data in the storage medium 28. Sign language modeling image data may be considered as part of the modeling image data in FIG.

【0055】テキストポインティング部29では手話表
現データを参照し、手話映像と同期を取るようにテキス
ト表示部23で表示されたテキストをポイントする。こ
れによりどの部分を手話表現しているかを明示する。
The text pointing unit 29 refers to the sign language expression data and points the text displayed on the text display unit 23 so as to synchronize with the sign language video. This makes it clear which part is in sign language.

【0056】図3はこの具体的な表示イメージである。
図3では図を説明するようなテキストの例を示してい
る。この場合テキストを手話と連動してポイントするこ
とにより、どの図を説明しているかが明瞭になる上、全
体のコンテンツのどの位置にあたるかなどの情報もわか
るようになる。ここでは、コンテンツ表示において下線
を附された単語「乗用車」にポインタが合わせられ、手
話表示においてそれが説明つきで手話翻訳されている。
FIG. 3 shows a concrete display image.
FIG. 3 shows an example of text for explaining the figure. In this case, by pointing the text in conjunction with the sign language, it becomes clear which figure is being explained and information such as which position in the entire content is reached. Here, the pointer is set to the underlined word "passenger car" in the content display, and it is translated in sign language with the explanation in the sign language display.

【0057】図4は図2の変形である。コンテンツサー
バ21からネットワークを通じて取得したテキストデー
タはネットワークデータ受信部22で受信し、テキスト
表示部23へと送られる。ユーザーは表示されたテキス
トのうち手話通訳して欲しい部分を選択する。この選択
された部分を取得するのがテキスト選択部41である。
テキスト選択部41で選択されたテキストは、図2で示
したのと同じ手順により手話表現としてモニタ24に表
示される。
FIG. 4 is a modification of FIG. The text data acquired from the content server 21 through the network is received by the network data receiving unit 22 and sent to the text display unit 23. The user selects the part of the displayed text that the sign language interpreter wants. The text selecting unit 41 acquires the selected portion.
The text selected by the text selection unit 41 is displayed on the monitor 24 as a sign language expression by the same procedure as shown in FIG.

【0058】手話では意味がちゃんと伝わることが重要
であり、手話映像は女の人が手話をする映像であって
も、CGキャラクタが手話をする映像であってもかまわ
ない。ユーザーはモデリング画像データをサーバーから
ダウンロードするときに好きな映像のタイプを指定する
ことが可能である。
In sign language, it is important to convey the meaning properly, and the sign language image may be an image in which a woman is sign language or an image in which a CG character is sign language. The user can specify a desired video type when downloading the modeling image data from the server.

【0059】なお、本実施の形態の手話データは本発明
の画像データに対応し、本実施の形態の手話データ変換
テーブルは本発明の画像データとインデックスとの対応
関係に対応し、本実施の形態の手話データ変換テーブル
を記憶する記憶媒体27は本発明の格納手段に対応し、
本実施の形態の手話モデリング画像データを記憶する記
憶媒体28は本発明の記憶手段に対応し、本実施の形態
の手話データ変換部25は本発明の解釈手段に対応し、
本実施の形態の手話映像生成部26は本発明の表示手段
に対応する。
The sign language data of the present embodiment corresponds to the image data of the present invention, and the sign language data conversion table of the present embodiment corresponds to the correspondence relationship between the image data and the index of the present invention. The storage medium 27 for storing the sign language data conversion table in the form corresponds to the storage means of the present invention,
The storage medium 28 for storing the sign language modeling image data of the present embodiment corresponds to the storage means of the present invention, and the sign language data conversion unit 25 of the present embodiment corresponds to the interpretation means of the present invention.
The sign language video generation unit 26 of the present embodiment corresponds to the display means of the present invention.

【0060】また、本実施の形態のテキスト選択部41
は本発明の選択手段に対応し、本実施の形態のテキスト
ポインティング部29は本発明の指摘手段に対応する。
Further, the text selection section 41 of the present embodiment.
Corresponds to the selecting means of the present invention, and the text pointing unit 29 of the present embodiment corresponds to the pointing means of the present invention.

【0061】(実施の形態3)つぎに、図5を主として
参照しながら、前述した本実施の形態1〜2の映像表示
システムと類似した本実施の形態の映像表示システムの
構成および動作について説明する。
(Third Embodiment) Next, the configuration and operation of a video display system of the present embodiment similar to the video display systems of the first and second embodiments described above will be described with reference mainly to FIG. To do.

【0062】本実施の形態の映像表示システムは、テキ
スト情報を補う形で適切な映像を表示するという用途
(分野が特定された用途)に適している。ここではある
製品(具体的には収納ケース)を組み立てるための手順
書の説明映像について説明する。
The video display system of the present embodiment is suitable for the purpose of displaying an appropriate video in the form of supplementing the text information (the field is specified). Here, an explanation image of a procedure manual for assembling a certain product (specifically, a storage case) will be described.

【0063】ここでのテキストデータは、図6に示され
ているような、収納ケースの組立手順を説明するための
文書「(手順1)天板1の1a部分と右側板4の4a部
分とをネジ止めし、底板2の2a部分と右側板4の4b
部分とをネジ止めします。(手順2)天板1の1b部分
と左側板3の3a部分とをネジ止めし、底板2の2b部
分と左側板3の3b部分とをネジ止めします。(手順
3)天板1の1c部分と裏板5の5a部分とを接合し、
底板2の2c部分と裏板5の5b部分とを接合し、左側
板3の3c部分と裏板5の5c部分とを接合し、右側板
4の4c部分と裏板5の5d部分とを接合します。」で
ある。
The text data here is a document "(Procedure 1) 1a portion of the top plate 1 and 4a portion of the right side plate 4 for explaining the assembling procedure of the storage case as shown in FIG. Screw on the bottom plate 2a and the right side plate 4b.
Screw the part and. (Procedure 2) Screw the 1b part of the top plate 1 and the 3a part of the left side plate 3 with the screws, and the 2b part of the bottom plate 2 and the 3b part of the left side plate 3 with the screws. (Procedure 3) Join the 1c portion of the top plate 1 and the 5a portion of the back plate 5,
The 2c part of the bottom plate 2 and the 5b part of the back plate 5 are joined together, the 3c part of the left side plate 3 and the 5c part of the back plate 5 are joined together, and the 4c part of the right side plate 4 and the 5d part of the back plate 5 are joined together. To join. It is.

【0064】なお、図6は、本発明における実施の形態
3のテキストデータ、映像表現データ、および使用すべ
き画像データの説明図である。
FIG. 6 is an explanatory diagram of text data, video expression data, and image data to be used according to the third embodiment of the present invention.

【0065】テキストデータ中における収納ケースの部
材(天板1や右側板4など)、その部材の部位(1a部
分や4a部分など)、および部材や部位の接続を指定す
るための組立説明におけるキーワード(ネジ止めや接合
など)は、インデックスとして単語認識により抽出さ
れ、図6中においては、これらに下線を附した。もちろ
ん、部材や部位に関するデータは、図7に示されている
ような画像データ1〜5にも埋め込まれており、上述の
単語認識と平行して、図6に示されているような使用す
べき画像データの認識が行われる。
Keywords in the assembly instructions for designating members of the storage case (top plate 1, right side plate 4, etc.) in the text data, parts of the members (1a part, 4a part, etc.), and connections of the members and parts. (Screws, splices, etc.) were extracted by word recognition as indexes, and these are underlined in FIG. Of course, the data on the members and parts are also embedded in the image data 1 to 5 as shown in FIG. 7, and in parallel with the above-mentioned word recognition, they are used as shown in FIG. The image data to be recognized is recognized.

【0066】なお、図7は、本発明における実施の形態
3の画像データの説明図である。
FIG. 7 is an explanatory diagram of image data according to the third embodiment of the present invention.

【0067】そして、上述のようなテキストデータの解
析による解釈が行われ、図6に示されているような映像
表現データの生成が行われる。たとえば、「(手順1)
天板1の1a部分と右側板4の4a部分とをネジ止め
し、底板2の2a部分と右側板4の4b部分とをネジ止
めします。」は、「天板1の1a部分と右側板4の4a
部分とを矢印で結び、底板2の2a部分と右側板4の4
b部分とを矢印で結べ。」に変換される。もちろん、テ
キストデータは本来の自然言語を単にテキスト化したも
のであるが、映像表現データは実際にはプログラム言語
として生成されるものである。また、映像表現データに
おける、単語認識で抽出されたテキストデータ中の単語
に対応する部分には下線が附されているが、このような
対応関係は前述の映像表現データ変換テーブルを利用し
て生成されるわけである。
Then, the interpretation by the analysis of the text data as described above is performed, and the image expression data as shown in FIG. 6 is generated. For example, "(Procedure 1)
The 1a part of the top plate 1 and the 4a part of the right side plate 4 are screwed together, and the 2a part of the bottom plate 2 and the 4b part of the right side plate 4 are screwed together. Means "1a part of top plate 1 and 4a of right side plate 4"
2a of the bottom plate 2 and 4 of the right side plate 4 are connected to each other by an arrow.
Connect the part b with the arrow. Will be converted to. Of course, the text data is simply the original natural language converted into text, but the video expression data is actually generated as a programming language. Also, in the video expression data, the parts corresponding to the words in the text data extracted by word recognition are underlined, but such correspondence is generated using the above-mentioned video expression data conversion table. Is done.

【0068】かくして、生成された映像表現データに基
づいて複数個の使用すべき画像データが合成され、図8
〜10に示されているような画像表示がモニタを利用し
て行われる。ここでは、その画像表示に関連する部材の
部位(1a部分や4a部分など)のみが描出されて矢印
で結ばれるような表示仕様が適用された。
Thus, a plurality of pieces of image data to be used are combined based on the generated image expression data, and the image data shown in FIG.
The image display as shown in 10 to 10 is performed using the monitor. Here, a display specification is applied in which only the parts (1a part, 4a part, etc.) of members related to the image display are drawn and connected by arrows.

【0069】なお、図8は本発明における実施の形態3
の収納ケース組立手順(手順1)の画像表示の説明図で
あり、図9は本発明における実施の形態3の収納ケース
組立手順(手順2)の画像表示の説明図であり、図10
は本発明における実施の形態3の収納ケース組立手順
(手順3)の画像表示の説明図である。
FIG. 8 shows the third embodiment of the present invention.
10 is an explanatory view of an image display of the storage case assembly procedure (procedure 1) of FIG. 9, and FIG. 9 is an explanatory view of an image display of the storage case assembly procedure (procedure 2) of the third embodiment of the present invention, and FIG.
FIG. 13 is an explanatory diagram of an image display of a storage case assembly procedure (procedure 3) according to the third embodiment of the present invention.

【0070】つぎに、履歴データを利用してローカルデ
ータを更新する際における、製品を構成する部品に関す
る情報を取得する過程を図5に示す。ここでは、履歴デ
ータを利用してローカルデータを更新する際に必要とな
る手段について図示した。
Next, FIG. 5 shows a process of acquiring information about parts constituting a product when updating the local data using the history data. Here, the means required when updating the local data using the history data is illustrated.

【0071】キーワード抽出部61では部品情報からキ
ーワードを抽出する。収納ケースの組み立てであれば、
「収納ケース」、「天板」、「木製」などがキーワード
になる。ユーザー履歴データ作成部62ではこのキーワ
ードと部品情報からユーザー履歴データを作成して記憶
媒体65に書き込む。データ更新部66では、記憶媒体
65のユーザー履歴データのうち、記憶媒体63の映像
表現データ変換テーブルと記憶媒体64のモデリング映
像データにないものを映像データサーバー67から取得
し、ローカルデータを更新する。「天板」、「木製」に
関する情報がローカル上にない場合は、サーバー67か
らそれに関するモデリング画像データを取得するわけで
ある。
The keyword extracting section 61 extracts a keyword from the component information. If assembling the storage case,
The keywords are "storage case", "top plate", and "wooden". The user history data creation unit 62 creates user history data from this keyword and component information and writes it in the storage medium 65. The data updating unit 66 acquires, from the video data server 67, user history data of the storage medium 65 that is not in the video expression data conversion table of the storage medium 63 and the modeling video data of the storage medium 64, and updates the local data. . When the information regarding the "top plate" and "wooden" is not locally available, the modeling image data relating to the information is acquired from the server 67.

【0072】次にユーザーの選択した手順から図5で取
得したローカルデータを使用して説明映像を表示する。
しかし、ローカル上ではすべての表現に対応できるだけ
のデータを持っているわけではない。
Next, the explanation image is displayed using the local data acquired in FIG. 5 from the procedure selected by the user.
However, it does not have enough data to support all expressions locally.

【0073】「ネジ止めする」という表現は今まで一度
も使われたことがないため、ローカル上に持っていない
かもしれない。このときはサーバー67に直接問い合わ
せることで説明映像を生成する。
Since the expression "screw-fastened" has never been used, it may not be held locally. At this time, the explanation video is generated by directly inquiring the server 67.

【0074】さらに、選択された手順と図5の過程で得
たキーワードをもとにユーザー履歴データを更新する。
Further, the user history data is updated based on the selected procedure and the keyword obtained in the process of FIG.

【0075】「ネジ止めする」という表現がしばしば使
われるようであれば、サーバー67からデータをダウン
ロードし、次回からローカルの情報を参照することで高
速化をはかる。
If the expression "screw-fasten" is often used, the data can be downloaded from the server 67 and the local information can be referred to from the next time to increase the speed.

【0076】これにより、文章だけではわかりにくかっ
た手順書を理解するための手助けとして、説明映像を生
成し、組み立て作業を行うことができるようになるとと
もによく使われる表現が高速に表示されるようになる。
As a result, as an aid for understanding the procedure manual that was difficult to understand only with sentences, it becomes possible to generate explanatory videos and perform assembly work, and display frequently used expressions at high speed. become.

【0077】もちろん、これはある手順によって作業を
行うような料理のレシピや製品の取扱説明書などにも応
用できる。
Of course, this can also be applied to a recipe of a dish or an instruction manual of a product in which work is performed according to a certain procedure.

【0078】なお、ユーザー履歴データ作成部62は本
発明の履歴データ作成手段に対応する。
The user history data creating section 62 corresponds to the history data creating means of the present invention.

【0079】以上においては、本実施の形態1〜3につ
いて詳しく説明した。
In the above, the first to third embodiments have been described in detail.

【0080】なお、本発明の解釈手段は、上述された本
実施の形態においては、単語認識によりテキストデータ
から、所定の品詞(インデックス)として名詞を抽出し
たり、インデックスとしてキーワードを抽出したりする
手段であった。しかし、これに限らず、本発明の解釈手
段は、たとえば、形態素解析でテキストデータを単語単
位に分割し、その後の構文解析でテキストデータの文章
構造を分析することにより、高度な解釈を実行する手段
であってもよい。このような言語解析を行うことによ
り、文の構造や複数の文の間の関係などまで把握するこ
とで、難易度の高い内容を有するテキストデータに対し
ても的確な解釈を行え、手話通訳などの画像表示を高精
度で実現することが可能になる。
In the present embodiment described above, the interpreting means of the present invention extracts a noun as a predetermined part of speech (index) or a keyword as an index from the text data by word recognition. It was a means. However, not limited to this, the interpretation means of the present invention performs high-level interpretation by dividing text data into word units by morphological analysis and analyzing the sentence structure of text data by subsequent syntax analysis. It may be a means. By performing language analysis in this way, by grasping the structure of sentences and the relationships between multiple sentences, it is possible to accurately interpret even text data with highly difficult contents, such as sign language interpreter. It is possible to realize the image display of with high accuracy.

【0081】また、本発明の画像表示は、上述された本
実施の形態においては、手話通訳や製品の組立説明書な
どに利用された。しかし、これに限らず、本発明の画像
表示は、天気予報などに利用されてもよい。たとえば天
気予報においては、「晴れ」や「雨」などの単語と「太
陽マーク」や「傘マーク」などのイラストとを一対一対
応させる辞書を本発明の対応関係として用意しておけば
よく、テキストデータの内容なども比較的単純であるか
ら、構文解析などを大がかりに行わなくともその解釈を
行うことが十分に可能であると考えられる。
Further, the image display of the present invention was used as a sign language interpreter or a product assembly instruction in the above-mentioned embodiment. However, the present invention is not limited to this, and the image display of the present invention may be used for a weather forecast or the like. For example, in the weather forecast, a dictionary in which words such as "sunny" and "rain" are associated with illustrations such as "sun mark" and "umbrella mark" on a one-to-one basis may be prepared as the correspondence relationship of the present invention. Since the contents of text data are relatively simple, it is considered possible to interpret them without extensive parsing.

【0082】なお、画像データの全部または一部を記憶
するための記憶手段と、所定のテキストデータを解釈し
てインデックスを得るための解釈手段と、解釈の結果に
基づき、画像データとインデックスとのあらかじめ用意
されている対応関係を見て、記憶されている画像データ
を利用して画像表示を行うための表示手段とを備えた画
像表示端末装置も、本発明に含まれる。たとえば、映像
表現データ変換テーブルなどが全てネット上のデータサ
ーバなどに用意されていたとしても、モデリング画像デ
ータを全てダウンロードしなくて済むため、高速な映像
表示が可能となりデータ転送量も削減される。
A storage means for storing all or a part of the image data, an interpreting means for interpreting predetermined text data to obtain an index, and an image data and an index based on the result of the interpretation. The present invention also includes an image display terminal device provided with a display unit for displaying an image by using the stored image data by looking at the correspondence relationship prepared in advance. For example, even if the video expression data conversion table and the like are all prepared on a data server on the Internet, it is not necessary to download all the modeling image data, so high-speed video display is possible and the amount of data transfer is reduced. .

【0083】また、あらかじめ記憶されている画像デー
タを利用して画像表示を行うための画像表示装置であっ
て、所定のテキストデータを解釈してインデックスを得
るための解釈手段と、解釈の結果に基づき、画像データ
とインデックスとのあらかじめ用意されている対応関係
を見て、記憶されている画像データを利用して画像表示
を行うための表示手段とを備えた画像表示装置も、本発
明に含まれる。たとえば、映像表現データ変換テーブル
やモデリング画像データなどが全てネット上のデータサ
ーバなどに用意されていたとしても、データサイズの比
較的小さいテキストデータを利用して映像表示用のデー
タを画像表示装置側で生成するため、映像表示用のデー
タそのものをダウンロードするより、高速な映像表示が
可能となりデータ転送量も削減される。
An image display device for displaying an image using image data stored in advance, and an interpreting means for interpreting predetermined text data to obtain an index and an interpreting result. Based on the above, an image display device provided with a display means for displaying the prepared correspondence between the image data and the index and using the stored image data is also included in the present invention. Be done. For example, even if the video expression data conversion table and the modeling image data are all prepared in a data server on the net, the data for video display can be converted to the image display device side by using the text data having a relatively small data size. Since it is generated by, the image display data can be displayed at a higher speed and the data transfer amount can be reduced than downloading the data itself for image display.

【0084】なお、発明は、上述した本発明の画像表示
システム、画像表示端末装置、および画像表示装置の全
部または一部の手段(または、装置、素子、回路、部な
ど)の機能をコンピュータにより実行させるためのプロ
グラムであって、コンピュータと協働して動作するプロ
グラムである。もちろん、本発明のコンピュータは、C
PUなどの純然たるハードウェアに限らず、ファームウ
ェアやOS、さらに周辺機器を含むものであっても良
い。
According to the invention, the functions of all or a part of the image display system, the image display terminal device, and the image display device (or devices, elements, circuits, sections, etc.) of the invention described above are realized by a computer. A program to be executed, which is a program that operates in cooperation with a computer. Of course, the computer of the present invention is
The hardware is not limited to pure hardware such as PU, and may include firmware, OS, and peripheral devices.

【0085】また、本発明は、上述した本発明の画像表
示方法の全部または一部のステップ(または、工程、動
作、作用など)の動作をコンピュータにより実行させる
ためのプログラムであって、コンピュータと協働して動
作するプログラムである。
Further, the present invention is a program for causing a computer to execute all or some of the steps (or steps, operations, actions, etc.) of the above-described image display method of the present invention. It is a program that works together.

【0086】なお、本発明の一部の手段(または、装
置、素子、回路、部など)、本発明の一部のステップ
(または、工程、動作、作用など)は、それらの複数の
手段またはステップの内の幾つかの手段またはステップ
を意味する、あるいは一つの手段またはステップの内の
一部の機能または一部の動作を意味するものである。
Note that some means (or devices, elements, circuits, sections, etc.) of the present invention, and some steps (or steps, operations, actions, etc.) of the present invention are performed by a plurality of these means or It is meant to refer to some means or steps in a step, or to some functions or some operations in one means or step.

【0087】また、本発明の一部の装置(または、素
子、回路、部など)は、それら複数の装置の内の幾つか
の装置を意味する、あるいは一つの装置の内の一部の手
段(または、素子、回路、部など)を意味する、あるい
は一つの手段の内の一部の機能を意味するものである。
Further, some devices (or elements, circuits, parts, etc.) of the present invention mean some devices of the plurality of devices, or some means of one device. (Or, an element, a circuit, a part, etc.) or a part of the functions of one means.

【0088】また、本発明のプログラムを記録した、コ
ンピュータに読みとり可能な記録媒体も本発明に含まれ
る。また、本発明のプログラムの一利用形態は、コンピ
ュータにより読み取り可能な記録媒体に記録され、コン
ピュータと協働して動作する態様であっても良い。ま
た、本発明のプログラムの一利用形態は、伝送媒体中を
伝送し、コンピュータにより読みとられ、コンピュータ
と協働して動作する態様であっても良い。また、記録媒
体としては、ROM等が含まれ、伝送媒体としては、イ
ンターネット等の伝送媒体、光・電波・音波等が含まれ
る。
Further, the present invention also includes a computer-readable recording medium in which the program of the present invention is recorded. Further, one usage form of the program of the present invention may be a mode in which the program is recorded in a computer-readable recording medium and operates in cooperation with the computer. Further, one usage form of the program of the present invention may be a mode in which the program is transmitted through a transmission medium, read by a computer, and operates in cooperation with the computer. The recording medium includes a ROM and the like, and the transmission medium includes a transmission medium such as the Internet and light, radio waves, sound waves and the like.

【0089】なお、本発明の構成は、ソフトウェア的に
実現しても良いし、ハードウェア的に実現しても良い。
The configuration of the present invention may be realized by software or hardware.

【0090】また、発明は、上述した本発明の画像表示
システム、画像表示端末装置、および画像表示装置の全
部または一部の手段の全部または一部の機能をコンピュ
ータにより実行させるためのプログラムを担持した媒体
であり、コンピュータにより読み取り可能かつ読み取ら
れた前記プログラムが前記コンピュータと協動して前記
機能を実行する媒体である。
The invention also carries a program for causing a computer to execute all or part of the functions of all or part of the image display system, the image display terminal device, and the image display device of the present invention. And a computer-readable program that is readable by a computer and executes the function in cooperation with the computer.

【0091】また、本発明は、上述した本発明の画像表
示方法の全部または一部のステップの全部または一部の
動作をコンピュータにより実行させるためのプログラム
を担持した媒体であり、コンピュータにより読み取り可
能かつ読み取られた前記プログラムが前記コンピュータ
と協動して前記動作を実行する媒体である。
Further, the present invention is a medium that carries a program for causing a computer to execute all or some of the operations of all or some of the steps of the image display method of the present invention described above, and is readable by the computer. The read program is a medium that executes the operation in cooperation with the computer.

【0092】このように、本発明によれば、画像データ
をそのまま伝送するときに比べて、大幅に伝送量を削減
して画像データを再生することができる。
As described above, according to the present invention, it is possible to regenerate the image data by greatly reducing the transmission amount as compared with the case of transmitting the image data as it is.

【0093】テキストデータから画像データを再生する
ため、特別なデータ構造やコントロールを必要とせず、
コンテンツ作成者は対象を意識することないし、既存の
コンテンツを作り直す必要もない。
Since the image data is reproduced from the text data, no special data structure or control is required.
Content creators do not need to be aware of the target or recreate existing content.

【0094】さらにポインティング機構を使うことによ
りテキストデータとの同期を取ることができ、テキスト
データと映像データを相補することができる。このよう
な受動的な表示だけでなく、ユーザーが表現テキストを
選択することにより能動的な映像の表示が可能である。
Further, by using the pointing mechanism, it is possible to synchronize with the text data, and the text data and the video data can be complemented. In addition to such passive display, a user can select an expression text to actively display an image.

【0095】モデリングデータの最新版をネットワーク
上のサーバーに蓄積することで常に最新の情報に更新す
ることが可能であり、モデリングデータをローカルに持
っているからといって時代遅れになることなく、最新の
表現をすることが可能である。
By accumulating the latest version of the modeling data in the server on the network, it is possible to always update the latest information, and even if the modeling data is held locally, the latest information can be obtained. It is possible to express.

【0096】さらにユーザー履歴を使用することで限ら
れたローカルの容量で効率的に映像を表示することがで
きる。
Furthermore, by using the user history, it is possible to efficiently display an image with a limited local capacity.

【0097】[0097]

【発明の効果】以上述べたところから明らかなように、
本発明は、表現能力を低下させることなく高速に映像を
表示することができるという長所を有する。
As is apparent from the above description,
INDUSTRIAL APPLICABILITY The present invention has an advantage that an image can be displayed at high speed without deteriorating expression ability.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明における実施の形態1のシステム図であ
る。
FIG. 1 is a system diagram of a first embodiment according to the present invention.

【図2】本発明における実施の形態2のテキストポイン
ティングを行う手話通訳システムの処理手順を示す図で
ある。
FIG. 2 is a diagram showing a processing procedure of a sign language interpreting system for performing text pointing according to a second embodiment of the present invention.

【図3】本発明における実施の形態2の手話通訳システ
ムのイメージ画面を示す図である。
FIG. 3 is a diagram showing an image screen of a sign language interpreting system according to a second embodiment of the present invention.

【図4】本発明における実施の形態2のユーザー選択可
能な手話通訳システムの処理手順を示す図である。
FIG. 4 is a diagram showing a processing procedure of a user-selectable sign language interpreting system according to a second embodiment of the present invention.

【図5】本発明における実施の形態3の部品情報を取得
する処理手順を示す図である。
FIG. 5 is a diagram showing a processing procedure for acquiring component information according to the third embodiment of the present invention.

【図6】本発明における実施の形態3のテキストデー
タ、映像表現データ、および使用すべき画像データの説
明図である。
FIG. 6 is an explanatory diagram of text data, video expression data, and image data to be used according to the third embodiment of the present invention.

【図7】本発明における実施の形態3の画像データの説
明図である。
FIG. 7 is an explanatory diagram of image data according to the third embodiment of the present invention.

【図8】本発明における実施の形態3の収納ケース組立
手順(手順1)の画像表示の説明図である。
FIG. 8 is an explanatory diagram of an image display of a storage case assembly procedure (procedure 1) according to the third embodiment of the present invention.

【図9】本発明における実施の形態3の収納ケース組立
手順(手順2)の画像表示の説明図である。
FIG. 9 is an explanatory diagram of an image display of a storage case assembly procedure (procedure 2) according to the third embodiment of the present invention.

【図10】本発明における実施の形態3の収納ケース組
立手順(手順3)の画像表示の説明図である。
FIG. 10 is an explanatory diagram of image display of a storage case assembly procedure (procedure 3) according to the third embodiment of the present invention.

【符号の説明】[Explanation of symbols]

1 テキスト表示部 2 テキストポインティング部 3 テキスト選択部 4 映像表現データ変換部 5 映像生成部 6 キーワード抽出部 7 ユーザー履歴データ作成部 8〜10 記憶媒体 11 データ更新部 12 映像データサーバ 1 Text display section 2 Text pointing part 3 Text selection section 4 Video expression data converter 5 Video generation unit 6 keyword extraction unit 7 User history data creation section 8-10 storage medium 11 Data update section 12 Video data server

───────────────────────────────────────────────────── フロントページの続き (72)発明者 齋藤 浩 大阪府門真市大字門真1006番地 松下電器 産業株式会社内 Fターム(参考) 5B050 AA08 BA10 BA16 BA20 CA05 CA06 CA07 CA08 FA02 FA16 FA19 GA08 5B069 AA01 AA02 BA01 BA04    ─────────────────────────────────────────────────── ─── Continued front page    (72) Inventor Hiroshi Saito             1006 Kadoma, Kadoma-shi, Osaka Matsushita Electric             Sangyo Co., Ltd. F-term (reference) 5B050 AA08 BA10 BA16 BA20 CA05                       CA06 CA07 CA08 FA02 FA16                       FA19 GA08                 5B069 AA01 AA02 BA01 BA04

Claims (20)

【特許請求の範囲】[Claims] 【請求項1】 画像データとインデックスとの対応関係
の全部または一部をあらかじめ格納するための格納手段
と、 前記画像データの全部または一部を記憶するための記憶
手段と、 所定のテキストデータを解釈して前記インデックスを得
るための解釈手段と、 前記解釈の結果に基づき、前記格納されている対応関係
を見て、前記記憶されている画像データを利用して画像
表示を行うための表示手段とを備えた画像表示システ
ム。
1. A storage unit for storing in advance all or part of the correspondence between image data and an index, a storage unit for storing all or part of the image data, and predetermined text data. Interpretation means for interpreting to obtain the index, and display means for viewing the stored correspondence relationship based on the result of the interpretation and performing image display using the stored image data An image display system including and.
【請求項2】 前記解釈手段は、言語解析を利用して前
記解釈を行う請求項1記載の画像表示システム。
2. The image display system according to claim 1, wherein the interpretation means performs the interpretation by using language analysis.
【請求項3】 前記インデックスは、所定の品詞である
請求項2記載の画像表示システム。
3. The image display system according to claim 2, wherein the index is a predetermined part of speech.
【請求項4】 前記表示手段は、前記画像データを複数
個合成しその合成の結果に基づいて前記画像表示を行う
請求項1記載の画像表示システム。
4. The image display system according to claim 1, wherein the display unit combines a plurality of the image data and displays the image based on a result of the combination.
【請求項5】 前記格納されている対応関係および/ま
たは前記記憶されている画像データを所定の基準に基づ
いて更新するための更新手段を備えた請求項1から4の
何れかに記載の画像表示システム。
5. The image according to claim 1, further comprising update means for updating the stored correspondence relationship and / or the stored image data based on a predetermined standard. Display system.
【請求項6】 前記行われる画像表示の履歴に関する履
歴データを作成するための履歴データ作成手段を備え、 前記更新手段は、前記作成された履歴データに基づいて
前記更新を行う請求項5記載の画像表示システム。
6. The history data creating means for creating history data relating to the history of image display to be performed, wherein the updating means performs the update based on the created history data. Image display system.
【請求項7】 前記格納されている対応関係および/ま
たは前記記憶されている画像データの一部は、所定のネ
ットワーク上のデータサーバに保存されている請求項1
から4の何れかに記載の画像表示システム。
7. The stored correspondence and / or part of the stored image data is stored in a data server on a predetermined network.
The image display system according to any one of 1 to 4.
【請求項8】 前記テキストデータは、ユーザに対して
表示され、 前記表示されるテキストデータの内の前記行われている
画像表示に応じた部分を指摘するための指摘手段を備え
た請求項1から4の何れかに記載の画像表示システム。
8. The pointing means for displaying the text data to a user, and pointing out a portion of the displayed text data according to the image display being performed. The image display system according to any one of 1 to 4.
【請求項9】 前記テキストデータは、ユーザに対して
表示され、 前記表示を見たユーザの指示に基づいて前記テキストデ
ータの所定部分を選択するための選択手段を備え、 前記解釈手段は、前記選択された所定部分に対して前記
解釈を行う請求項1から4の何れかに記載の画像表示シ
ステム。
9. The text data is displayed to a user, and the text data includes a selection unit for selecting a predetermined portion of the text data based on an instruction of the user who has seen the display. The image display system according to claim 1, wherein the interpretation is performed on a selected predetermined portion.
【請求項10】 画像データの全部または一部を記憶す
るための記憶手段と、 所定のテキストデータを解釈してインデックスを得るた
めの解釈手段と、 前記解釈の結果に基づき、前記画像データと前記インデ
ックスとのあらかじめ用意されている対応関係を見て、
前記記憶されている画像データを利用して画像表示を行
うための表示手段とを備えた画像表示端末装置。
10. Storage means for storing all or part of image data, interpretation means for interpreting predetermined text data to obtain an index, and based on the result of the interpretation, the image data and the Looking at the correspondence that has been prepared in advance with the index,
An image display terminal device, comprising: a display unit for displaying an image using the stored image data.
【請求項11】 あらかじめ記憶されている画像データ
を利用して画像表示を行うための画像表示装置であっ
て、 所定のテキストデータを解釈してインデックスを得るた
めの解釈手段と、 前記解釈の結果に基づき、前記画像データと前記インデ
ックスとのあらかじめ用意されている対応関係を見て、
前記記憶されている画像データを利用して画像表示を行
うための表示手段とを備えた画像表示装置。
11. An image display device for displaying an image using image data stored in advance, the interpreting means for interpreting predetermined text data to obtain an index, and a result of the interpretation. On the basis of the above, looking at the previously prepared correspondence between the image data and the index,
An image display device, comprising: a display unit for displaying an image using the stored image data.
【請求項12】 画像データとインデックスとの対応関
係の全部または一部をあらかじめ格納するステップと、 前記画像データの全部または一部を記憶するステップ
と、 所定のテキストデータを解釈して前記インデックスを得
るためのステップと、 前記解釈の結果に基づき、前記格納されている対応関係
を見て、前記記憶されている画像データを利用して画像
表示を行うステップとを備えた画像表示方法。
12. A step of pre-storing all or part of the correspondence between image data and an index, a step of storing all or part of the image data, and a step of interpreting predetermined text data to store the index. An image display method comprising: a step of obtaining the image data; and a step of displaying an image using the stored image data by looking at the stored correspondence based on the result of the interpretation.
【請求項13】 画像データの全部または一部を記憶す
るステップと、 所定のテキストデータを解釈してインデックスを得るス
テップと、 前記解釈の結果に基づき、前記画像データと前記インデ
ックスとのあらかじめ用意されている対応関係を見て、
前記記憶されている画像データを利用して画像表示を行
うステップとを備えた画像表示方法。
13. A step of storing all or part of image data, a step of interpreting predetermined text data to obtain an index, and a step of preparing the image data and the index in advance based on a result of the interpretation. Look at the correspondence that is
And a step of displaying an image using the stored image data.
【請求項14】 あらかじめ記憶されている画像データ
を利用して画像表示を行うための画像表示方法であっ
て、 所定のテキストデータを解釈してインデックスを得るス
テップと、 前記解釈の結果に基づき、前記画像データと前記インデ
ックスとのあらかじめ用意されている対応関係を見て、
前記記憶されている画像データを利用して画像表示を行
うステップとを備えた画像表示方法。
14. An image display method for displaying an image using image data stored in advance, comprising: interpreting predetermined text data to obtain an index; and Looking at the prepared correspondence between the image data and the index,
And a step of displaying an image using the stored image data.
【請求項15】 請求項12記載の画像表示方法の、画
像データとインデックスとの対応関係の全部または一部
をあらかじめ格納するステップと、前記画像データの全
部または一部を記憶するステップと、所定のテキストデ
ータを解釈して前記インデックスを得るためのステップ
と、前記解釈の結果に基づき、前記格納されている対応
関係を見て、前記記憶されている画像データを利用して
画像表示を行うステップとの全部または一部をコンピュ
ータに実行させるためのプログラム。
15. The image display method according to claim 12, wherein all or part of the correspondence relationship between the image data and the index is stored in advance; step of storing all or part of the image data; For interpreting the text data to obtain the index, and for viewing the stored correspondence based on the result of the interpretation, and displaying the image using the stored image data. A program that causes a computer to execute all or part of the above.
【請求項16】 請求項12記載の画像表示方法の、画
像データとインデックスとの対応関係の全部または一部
をあらかじめ格納するステップと、前記画像データの全
部または一部を記憶するステップと、所定のテキストデ
ータを解釈して前記インデックスを得るためのステップ
と、前記解釈の結果に基づき、前記格納されている対応
関係を見て、前記記憶されている画像データを利用して
画像表示を行うステップとの全部または一部をコンピュ
ータに実行させるためのプログラムを担持した媒体であ
って、コンピュータにより処理可能な媒体。
16. The image display method according to claim 12, wherein all or part of the correspondence between the image data and the index is stored in advance; step of storing all or part of the image data; For interpreting the text data to obtain the index, and for viewing the stored correspondence based on the result of the interpretation, and displaying the image using the stored image data. A medium that carries a program for causing a computer to execute all or a part of the above, and is a computer-processable medium.
【請求項17】 請求項13記載の画像表示方法の、画
像データの全部または一部を記憶するステップと、所定
のテキストデータを解釈してインデックスを得るステッ
プと、前記解釈の結果に基づき、前記画像データと前記
インデックスとのあらかじめ用意されている対応関係を
見て、前記記憶されている画像データを利用して画像表
示を行うステップとの全部または一部をコンピュータに
実行させるためのプログラム。
17. An image display method according to claim 13, wherein all or a part of the image data is stored, a step of interpreting predetermined text data to obtain an index, and a step of storing the image data based on a result of the interpretation. A program for causing a computer to execute all or a part of the step of displaying an image using the stored image data by observing a previously prepared correspondence between the image data and the index.
【請求項18】 請求項13記載の画像表示方法の、画
像データの全部または一部を記憶するステップと、所定
のテキストデータを解釈してインデックスを得るステッ
プと、前記解釈の結果に基づき、前記画像データと前記
インデックスとのあらかじめ用意されている対応関係を
見て、前記記憶されている画像データを利用して画像表
示を行うステップとの全部または一部をコンピュータに
実行させるためのプログラムを担持した媒体であって、
コンピュータにより処理可能な媒体。
18. The image display method according to claim 13, wherein all or part of the image data is stored, the step of interpreting predetermined text data to obtain an index, and the step of storing the image data based on a result of the interpretation. A program for causing a computer to execute all or part of the step of displaying an image by using the stored image data by observing a previously prepared correspondence between the image data and the index is carried. Is a medium that
A computer-processable medium.
【請求項19】 請求項14記載の画像表示方法の、所
定のテキストデータを解釈してインデックスを得るステ
ップと、前記解釈の結果に基づき、前記画像データと前
記インデックスとのあらかじめ用意されている対応関係
を見て、前記記憶されている画像データを利用して画像
表示を行うステップとの全部または一部をコンピュータ
に実行させるためのプログラム。
19. The image display method according to claim 14, wherein the step of interpreting predetermined text data to obtain an index, and the prepared correspondence between the image data and the index based on a result of the interpretation. A program for causing a computer to execute all or part of the step of displaying an image by using the stored image data in view of the relationship.
【請求項20】 請求項14記載の画像表示方法の、所
定のテキストデータを解釈してインデックスを得るステ
ップと、前記解釈の結果に基づき、前記画像データと前
記インデックスとのあらかじめ用意されている対応関係
を見て、前記記憶されている画像データを利用して画像
表示を行うステップとの全部または一部をコンピュータ
に実行させるためのプログラムを担持した媒体であっ
て、コンピュータにより処理可能な媒体。
20. A step of interpreting predetermined text data to obtain an index in the image display method according to claim 14, and a correspondence between the image data and the index prepared in advance based on a result of the interpretation. A medium that carries a program for causing a computer to execute all or part of the step of displaying an image using the stored image data in view of the relationship, the medium being computer processable.
JP2001351817A 2001-11-16 2001-11-16 Image display system, image display terminal device, image display device, image display method, program and medium Pending JP2003150931A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001351817A JP2003150931A (en) 2001-11-16 2001-11-16 Image display system, image display terminal device, image display device, image display method, program and medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001351817A JP2003150931A (en) 2001-11-16 2001-11-16 Image display system, image display terminal device, image display device, image display method, program and medium

Publications (1)

Publication Number Publication Date
JP2003150931A true JP2003150931A (en) 2003-05-23

Family

ID=19164078

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001351817A Pending JP2003150931A (en) 2001-11-16 2001-11-16 Image display system, image display terminal device, image display device, image display method, program and medium

Country Status (1)

Country Link
JP (1) JP2003150931A (en)

Similar Documents

Publication Publication Date Title
US20220171915A1 (en) Automated augmentation of text, web and physical environments using multimedia content
US11917344B2 (en) Interactive information processing method, device and medium
US7054952B1 (en) Electronic document delivery system employing distributed document object model (DOM) based transcoding and providing interactive javascript support
US6829746B1 (en) Electronic document delivery system employing distributed document object model (DOM) based transcoding
US6725424B1 (en) Electronic document delivery system employing distributed document object model (DOM) based transcoding and providing assistive technology support
US8271512B2 (en) Presenting digitized content on a network using a cross-linked layer of electronic documents derived from a relational database
JP5449633B1 (en) Advertisement translation device, advertisement display device, and advertisement translation method
KR101552509B1 (en) System for multi language support for a Webtoon
KR20170014353A (en) Apparatus and method for screen navigation based on voice
WO2012000335A1 (en) Input method and device combined with application interfaces
KR101245665B1 (en) Search system for providing integrated multimedia contents and method thereof
US20230206564A1 (en) Video Processing Method, Electronic Device And Non-transitory Computer-Readable Storage Medium
JP2022518645A (en) Video distribution aging determination method and equipment
EP1686464A2 (en) Separating content data, style sheets data and soft keys data in XML user interfaces for mobile stations
JP2023549903A (en) Multimedia interaction methods, information interaction methods, devices, equipment and media
JP2000148748A (en) Japanese syllbary-to-chinese character conversion and image retrieval and display system
JP6840597B2 (en) Search result summarizing device, program and method
JP2009075977A (en) Portable terminal browsing document distribution server, portable terminal, and portable terminal browsing document distribution system
JP2004110427A (en) Web contents conversion method and system
JP2002268788A (en) Information communication system equipped with close-up function of web document and close-up method for the same web document using the same system and recording medium with the same method recorded
US10261979B2 (en) Method and apparatus for rendering a screen-representation of an electronic document
CN111782992B (en) Display control method, device, equipment and readable storage medium
JP2003150931A (en) Image display system, image display terminal device, image display device, image display method, program and medium
JPH10301944A (en) Www browser device
JP2024509824A (en) Document editing methods, equipment, devices and storage media