JP3526039B2 - 時系列画像情報処理方法および装置 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、時系列画像を表示
する時系列画像情報の処理方法および装置に関し、特
に、本発明は、利用者が指定した時刻（以下、これを基
準時刻という）の画像に加えてその前後の時刻に出現す
る画像情報を表示する際、基準時刻の画像とその前後に
出現する画像を容易に把握することができる時系列画像
情報処理方法および装置に関するものである。

【０００２】

【従来の技術】時系列画像情報を作成もしくは編集する
に際して、編集しようとしている時刻の画像だけでな
く、その前後の時刻に出現する画像を参照する必要が生
ずることがある。このような場合、従来は次の方式によ
り表示を行っていた。 基準時刻の画像のみを１枚ずつ表示する方式。 基準時刻の画像とその画像の前後の時刻に出現する
画像を単純に重ねて表示する方式。 画面を分割し基準時刻の画像およびその前後の時刻
に出現する画像を複数画面に表示する方式。 複数の表示装置を利用し、複数の表示装置に基準時
刻の画像とその画像の前後の時刻に出現する画像を表示
する方式。

【０００３】

【発明が解決しようとする課題】ところで、上記した従
来の方式においては、下記の欠点があった。すなわち、
上記の方式においては、基準時刻の画像とその前後の
時刻に出現する画像の関係が分かりにくく、また、の
方式においては、重なりの下にある画像が隠れてしま
い、また、画像間の関係も分かりにくい。

【０００４】の方式においては、分割された画面に各
画像が表示されるため、各画像が縮小され、細部が見に
くくなる。の方式においては、複数の表示装置が必要
であるともに、表示装置の数より多くの画像を同時に見
ることは出来ない。本発明は上記した従来技術の欠点を
改善するためになされたものであって、表示装置を増や
したり、画面を分割して縮小したりして表示する必要が
なく、基準時刻の画像とその前後の時刻の画像との関係
を容易に把握することが可能な時系列画像情報処理方法
および装置を提供することを目的とする。

【０００５】

【課題を解決するための手段】図１は本発明の原理ブロ
ック図である。同図において、１は基準時刻入力モジュ
ール、２は時系列画像情報の相対時刻を求める相対時刻
算出モジュール、３は記憶装置に格納された時系列画像
情報を読み出す画像読み出しモジュール、４は表示する
画像の基準時刻の前後の時刻に出現する画像情報と基準
時刻の画像情報を異なった色の濃さもしくは色合いとす
る色操作を行う色操作モジュール、５は記憶装置より読
み出された各時系列画像情報を重ね合わせる画像重ね合
わせモジュール、６は重ね合わせた時系列画像情報を表
示する画像表示モジュールである。

【０００６】同図に示すように本発明においては、次の
ようにして前記課題を解決する。本発明の請求項１の発
明は、時系列の画像として取り扱われる複数の異なる画
像を表示画面上で重ね合わせて表示するとともに、個々
の画像について、任意に設定された基準時刻における画
像の色合いまたは濃度を最も濃い度合いとし、前記基準
時刻よりも早い時刻における画像および前記基準時刻よ
りも遅い時刻における画像の色合いまたは濃度を、前記
基準時刻における画像の色合いまたは濃度よりも薄い度
合いとし、かつ前記基準時刻よりも相対的に遠く離れる
にしたがって、より薄い度合いに変化させていくように
したものである。

【０００７】本発明の請求項２の発明は、時系列画像情
報処理装置において、時系列の画像として取り扱われる
複数の異なる画像を表示部に重ね合わせて表示する表示
制御手段と、個々の画像について、任意に設定された基
準時刻における画像の色合いまたは濃度を最も濃い度合
いとし、前期基準時刻よりも早い時刻における画像およ
び前期基準時刻よりも遅い時刻における画像の色合いま
たは濃度を、前期基準時刻における画像の色合いまたは
濃度よりも薄い度合いとし、かつ前記基準時刻よりも相
対的に遠く離れるにしたがって、より薄い度合いに変化
させていく色操作手段を設けたものである。

【０００８】本発明の請求項１，２の発明においては、
時系列の画像として取り扱われる複数の異なる画像を表
示画面上で重ね合わせて表示するとともに、個々の画像
について、任意に設定された基準時刻における画像の色
合いまたは濃度を最も濃い度合いとし、前記基準時刻よ
りも早い時刻における画像および前記基準時刻よりも遅
い時刻における画像の色合いまたは濃度を、前記基準時
刻における画像の色合いまたは濃度よりも薄い度合いと
し、かつ前記基準時刻よりも相対的に遠く離れるにした
がって、より薄い度合いに変化させていくようにしたの
で、基準時刻に出現する画像とその前後の時刻に出現す
る画像を容易に区別することができ、画像の視認性を向
上することができる。

【０００９】

【発明の実施の形態】図２は本発明のシステム構成を示
す図であり、同図において、１１は画像処理を行うプロ
セッサ、１１ａはプロセッサ１において画像処理を行う
際使用される作業用メモリ、１２は画像の表示を制御す
るための表示制御装置、１２ａは表示される画像情報を
格納するビデオ・ラム、１３は画像を表示するための表
示装置、１４は画像情報を格納する外部記憶装置、１５
は外部記憶装置１４に格納されている時系列画像情報を
示し、外部記憶装置１４には時刻ｔ_- より時刻ｔ₊ まで
の画像情報が時間ｄごとに格納されている。

【００１０】また、１６はキーボード、１７はマウスで
ある。同図において、ユーザはキーボード１６、マウス
１７等を操作して、表示すべき画像情報を編集したり、
表示すべき画像およびその表示方法等を入力する。プロ
セッサ１１はキーボード１６、マウス１７等から入力さ
れた情報に基づき、外部記憶装置１４より時系列画像情
報１５を読み出し、作業用画像メモリ１１ａを用いて時
系列画像情報の重ね合わせ等を行い、表示制御装置１２
のビデオ・ラム１２ａに転送する。表示制御装置１２は
ビデオ・ラム１２ａに転送された画像情報を表示装置１
３に表示させる。

【００１１】図３は本発明の１実施例を示すフローチャ
ートであり、同図により、上記プロセッサ１１における
処理について説明する。ステップＳ１において、キーボ
ード１６、マウス１７等より入力された表示すべき画像
の基準時刻を読み出し、ｔ₀ を基準時刻とする。ステッ
プＳ２において、外部記憶装置１４に格納されている時
系列画像情報のの最も過去の画像情報の時刻ｔ_- をｔと
する。

【００１２】ステップＳ３において、外部記憶装置１４
に格納された時系列画像情報のうちｔ時点の画像情報を
取り出す。ステップＳ４において、上記時点ｔの基準時
刻ｔ₀ に対する相対時刻ｔ’を算出する。ステップＳ５
において、相対時刻ｔ’に応じて、外部記憶装置１４よ
り取り出された画像情報の色操作を行い、後述するよう
に、色の濃さを変えたり、色合いを変える。

【００１３】ステップＳ６において、ステップＳ５にお
いて色操作された画像情報を作業用メモリ１１ａ上で重
ね合わせる。ステップＳ７において、外部記憶装置１４
に格納された時系列画像情報の各画像の時間間隔ｄと上
記ｔを加算して次に重ね合わせる画像情報の時刻を求め
る。ステップＳ８において、ステップＳ７において算出
されたｔが外部記憶装置１４に格納されている最新の画
像情報の時刻ｔ₊ より小さいか否かを判定する。

【００１４】ステップＳ８において、ｔ≦ｔ₊ と判定さ
れた場合にはステップＳ３に戻り上記処理を繰り返す。
また、ｔ≦ｔ₊ でないと判定された場合には、ステップ
Ｓ９に行き、作業用メモリ１１ａに格納された重ね合わ
せ画像情報を表示制御装置１２のビデオ・ラム１２ａに
転送し、表示装置１３に表示する。図４は上記フローチ
ャートのステップＳ５，ステップＳ６における画像情報
の色操作と重ね合わせ処理の実施例を示す図である。

【００１５】同図において、２１は相対時刻「−２」の
画像情報、２２は相対時刻「−１」の画像情報、２３は
基準時刻の画像情報、２４は相対時刻「＋１」の画像情
報、２５は重ね合わせた画像情報である。本実施例は表
示する画像情報の濃さをその画像情報の時刻が基準時刻
より離れる程薄く表示する実施例を示したものである。

【００１６】すなわち、図３のフローチャートのステッ
プＳ４で算出した相対時刻ｔ’が「−２」の場合には、
ステップＳ５の色操作において、相対時刻「−２」の画
像情報の各画素をかなり薄く黄色みを帯びた表示色に変
換し、ステップＳ６において、作業用メモリ１１ａに格
納する。ついで、外部記憶装置１４より読み出された画
像情報の相対時刻が「−１」の場合には、同様にして、
その画像情報を少し薄く黄色みを帯びた表示色に変換
し、ステップＳ６において、作業用メモリ１１ａに格納
されている相対時刻「−２」の画像情報と各画素の
「Ｒ，Ｇ，Ｂ」値単位で加わえ合わせ、再び作業用メモ
リ１１ａに格納する。

【００１７】以下、同様な処理を行うことにより、基準
時刻の画像情報を元と同じ色、相対時刻「１」の画像情
報を少し薄く黄色みを帯びた表示色に変換し、作業用メ
モリ１１ａ上で重ね合わせる。その結果、表示装置１３
には、図４に示すように、表示される画像情報の相対時
刻に応じた色の濃さで時点の異なった画像情報が表示さ
れる。

【００１８】図５は上記色操作において、相対時刻と画
素の色の濃さの関係を示す図であり、横軸は相対時刻
ｘ、縦軸は各画素の「Ｒ」、「Ｇ」、「Ｂ」値を定める
関数ｆ（ｘ）の値である。図５に示すように、各画素の
「Ｒ，Ｇ，Ｂ」値の濃さを関数ｆ（ｘ）に基づき相対時
刻に応じて変化させることにより、図２に示す表示装置
１３には基準時刻からの時刻に応じて表示色が薄い画像
が表示され、ユーザは表示される画像の相対時刻を容易
に視認することができる。

【００１９】なお、上記色操作において、複数の時系列
画像情報のうち、特定の時刻の画像情報を非表示とする
場合には、非表示とする画像情報の相対時刻における関
数ｆ（ｘ）の値を「０」に設定する。これによって、必
要とする時刻の画像のみを表示させることができる。相
対時刻の大きさに応じて画像の色を薄い色で表示させる
方法として、図５に示したように各画素単位で色の濃さ
を変化させる方法以外に、次のように隣接する複数画素
を単位として色を重ね合わせる方法を用いることができ
る。

【００２０】図６は上記した隣接する複数画素を単位と
して色を重ね合わせることにより、視覚的に図５の方法
と類似した効果を得る実施例を示す図である。図６にお
いて、３１は相対時刻「−２」の画像情報、３２は相対
時刻「−１」の画像情報、３３は基準時刻の画像情報、
３４は相対時刻「＋１」の画像情報、３５は相対時刻
「＋２」の画像情報、３６は重ね合わせた画像情報であ
る。

【００２１】本実施例において、相対時刻「−２」の画
像情報の濃さを基準時刻の画像情報の色の濃さの「１／
８」で表示させ、相対時刻「−１」の画像情報の濃さを
基準時刻の画像情報の色の濃さの「３／８」で表示さ
せ、さらに、相対時刻「＋１」の画像情報の濃さを基準
時刻の画像情報の色の濃さの「３／８」で表示させ、相
対時刻「＋２」の画像情報の濃さを基準時刻の画像情報
の色の濃さの「１／８」で表示させている。本実施例に
おける色操作は次のように行う。

【００２２】すなわち、同図の重ね合わせた画像情報３
６に示すように、４×４＝１６個からなる画素を一つの
色の単位と考え、相対時刻「−２」の画像情報が上記１
６画素の中で占める割合を「１／１６」とする。同様
に、相対時刻「−１」の画像情報が上記１６画素の中で
占める割合を「３／１６」、基準時刻の画像情報が上記
１６画素の中で占める割合を「８／１６」、相対時刻
「＋１」の画像情報が上記１６画素の中で占める割合を
「３／１６」、相対時刻「＋２」の画像情報が上記１６
画素の中で占める割合を「１／１６」とする。

【００２３】上記のようにすることにより、視覚的には
相対時刻に応じて各画像の色の濃さが変化し、図５の実
施例の場合と同様な効果を得ることができる。本実施例
により各画像の色の濃さを変化させる場合には、図３の
フローチャートのステップＳ５，Ｓ６において、まず、
相対時刻「−２」の画像情報により１６画素中の１画素
について色操作を行い作業メモリ１１ａに書き込み、つ
いで、相対時刻「−１」の画像情報により１６画素中の
３画素について色操作を行って作業メモリ１１ａに書き
込む。この処理を相対時刻「＋２」の画像情報まで繰り
返すことにより、相対時刻に応じて色の濃さが変化した
重ね合わせ画像を得ることができる。

【００２４】なお、上記実施例においては、１６画素を
単位として色操作を行う例を示したが画素の数は適宜定
めることができる。また、各相対時刻における画素をど
の位置に配置するかについても、種々の方法を採用する
ことが可能である。また、上記実施例においては、相対
時刻に応じて色の濃さ変える例を示したが、その他、基
準時刻の画像情報を元と同じ色で表示し、基準時刻以外
の画像情報の色を、一様に、基準時刻の画像情報と異な
った濃さとして表示することもできる。

【００２５】さらに、上記のように、相対時刻に応じて
色の濃さを変えるかわりに、相対時刻に応じて色合いを
変えて表示したり、さらに、相対時刻に応じて色合いと
色の濃さの両方を変えて表示するようにすることができ
る。図７は上記色操作において、画像中の各画素の色合
いを相対時刻の大きさに応じて変化させる場合の第１の
実施例を示す図である。

【００２６】同図において、横軸は相対時刻ｘ、縦軸は
各画素の「Ｒ」、「Ｇ」、「Ｂ」値を定める関数ｆR
(X)、ｆG(X)、ｆB(X)の値を示し、同図は、各画素の
「Ｒ，Ｇ，Ｂ」の値を変化させることにより、基準時刻
から離れるほど、黄色みを帯びた色に変化させる例を示
している。図８は、図７と同様、画像中の各画素の色合
いを相対時刻の大きさに応じて変化させる場合の第２実
施例を示す図である。

【００２７】同図において、横軸は相対時刻ｘ、縦軸は
各画素の「Ｒ」値を定める関数ｆ(X) の値を示し、同図
は、各画素の「Ｒ」値のみを変化させ、基準時刻から離
れるほど、赤みを帯びた色に変化させる例を示してい
る。

【００２８】

【発明の効果】以上説明したことから明らかなように、
本発明においては、基準時刻の画像は元の色に近い色で
表示し、基準時刻以外の時刻の画像の色を薄くしたり、
色合いをかえたり、また、基準時刻との相対時刻に応じ
て、画像の濃さ、色合いを変化させて表示しているの
で、次の効果を得ることができる。 基準時刻の画像と、基準時刻以外の画像の区別を容
易に行うことができ、単純に各画像を重ね合わせた場合
と較べ、基準時刻の画像の視認性を向上させることがで
きる。 基準時刻から離れるにしたがって、画像の色の濃
さ、色合いを変化させることにより、重ねて表示された
画像までの時間的な距離を把握することができる。 表示装置の数を増やしたり、画面を分割し縮小して
表示することなく、基準時刻の画像と基準時刻前後の画
像との関係を把握することができ、時系列画像の作成、
編集を容易に行うことができる。

【図面の簡単な説明】

【図１】本発明の原理ブロック図である。

【図２】本発明の実施例のシステム構成を示す図であ
る。

【図３】本発明の実施例のフローチャートを示す図であ
る。

【図４】画像情報の色操作と重ね合わせ処理の実施例を
示す図である。

【図５】実施例における相対時刻と画素の色の濃さの関
係を示す図である。

【図６】隣接する複数画素を単位として色を重ね合わせ
る実施例を示す図である。

【図７】画像中の色合いを変化させる第１の実施例を示
す図である。

【図８】画像中の色合いを変化させる第２の実施例を示
す図である。

【符号の説明】

１ 基準時刻入力モジュール ２ 相対時刻算出モジュール ３ 画像読み出しモジュール ４ 色操作モジュール ６ 画像重ね合わせモジュール ７ 画像表示モジュール １１ プロセッサ １１ａ 作業用メモリ １２ 表示制御装置 １２ａ ビデオ・ラム １３ 表示装置 １４，１５ 外部記憶装置 １６ キーボード １７ マウス

───────────────────────────────────────────────────── フロントページの続き (72)発明者 紀伊 隆弘 神奈川県川崎市中原区上小田中1015番地 富士通株式会社内 (72)発明者 松本 均 神奈川県川崎市中原区上小田中1015番地 富士通株式会社内 (56)参考文献 特開 昭59−139770（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) G06T 1/00,5/00,13/00 G09G 5/00 - 5/06 G09G 5/36 - 5/42 H04N 5/91

Claims (2)

(57)【特許請求の範囲】
1. 【請求項１】 時系列の画像として取り扱われる複数の
   異なる画像を表示画面上で重ね合わせて表示するととも
   に、個々の画像について、任意に設定された基準時刻に
   おける画像の色合いまたは濃度を最も濃い度合いとし、 前記基準時刻よりも早い時刻における画像および前記基
   準時刻よりも遅い時刻における画像の色合いまたは濃度
   を、前記基準時刻における画像の色合いまたは濃度より
   も薄い度合いとし、かつ前記基準時刻よりも相対的に遠
   く離れるにしたがって、より薄い度合いに変化させてい
   くことを特徴とする時系列画像情報処理方法。
2. 【請求項２】 時系列の画像として取り扱われる複数の
   異なる画像を表示部に重ね合わせて表示する表示制御手
   段と、 個々の画像について、任意に設定された基準時刻におけ
   る画像の色合いまたは濃度を最も濃い度合いとし、前記
   基準時刻よりも早い時刻における画像および前記基準時
   刻よりも遅い時刻における画像の色合いまたは濃度を、
   前記基準時刻における画像の色合いまたは濃度よりも薄
   い度合いとし、かつ前記基準時刻よりも相対的に遠く離
   れるにしたがって、より薄い度合いに変化させていく色
   操作手段を有することを特徴とする時系列画像情報処理
   装置。