JP2002229535A

JP2002229535A - 映像処理装置

Info

Publication number: JP2002229535A
Application number: JP2001022833A
Authority: JP
Inventors: Yuko Okayama; 祐孝岡山; Hideji Ito; 秀二伊藤; Nobuyuki Sato; 信之佐藤; Masataka Kobayashi; 正隆小林
Original assignee: Hitachi Ltd; Hitachi ULSI Systems Co Ltd; Hitachi Micro Software Systems Inc
Current assignee: Hitachi Ltd; Hitachi Micro Software Systems Inc; Hitachi Solutions Technology Ltd
Priority date: 2001-01-31
Filing date: 2001-01-31
Publication date: 2002-08-16

Abstract

(57)【要約】【課題】本発明の課題は、映像蓄積配信システムを構成
する映像蓄積配信装置において、運用コストの低減およ
び効率的な映像配信を実現することである。【解決手段】映像入力装置２０から送信される映像情報
から、あらかじめ挿入された情報を検出して映像の蓄積
または圧縮または再圧縮の開始および終了を判定して、
自動的に映像を蓄積または圧縮または再圧縮するととも
に、インデックス(サムネイル)画像を抽出し、配信映像
を閲覧するクライアント端末３０ａ〜ｃからの要求に応
じて、クライアント端末が指示したインデックス画像の
位置以降の映像のみを配信する映像蓄積は甥新装置１
０。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ＶＴＲやビデオカ
メラから入力される映像を蓄積する映像蓄積装置に関す
る。この中でも特に、蓄積する映像を構成する画像の特
徴量から映像を抽出して出力する映像蓄積装置に関す
る。また、本発明は、蓄積された映像を構成する画像の
特徴量から映像を抽出して配信する映像配信装置にも関
する。

【０００２】

【従来の技術】従来の技術として、特開2000-36947号公
報には、映像データをファイル化する場合に、ファイル
化する映像データの開始画像と終了画像のタイムスタン
プを与え、タイムスタンプを用いて、その期間の映像デ
ータをファイル化する方法が記載されている。

【０００３】さらに、特開平11-232186号公報には、配
信映像を閲覧する情報処理(クライアント)端末からの要
求に応じて、配信される映像を構成する静止画像のうち
一定間隔かつ一定枚数の静止画像群を映像の代わりに配
信し、その後のクライアント端末からの映像閲覧を指示
する要求に応じて映像を配信する方法が記載されてい
る。

【０００４】

【発明が解決しようとする課題】特開2000-36947号公報
に記載の技術では、ＶＴＲやビデオカメラから入力され
る映像を1つ以上のファイルに格納することが可能であ
るが、あらかじめファイル化の開始と終了を示すタイム
スタンプを用意しておく必要があり、ファイル化(蓄積)
時に、蓄積装置に対しタイムスタンプを知らせる手段が
必要になる。

【０００５】また、特開平11-232186号公報に記載の技
術では、映像を構成する静止画像群を配信することによ
り、クライアント端末のユーザ(映像閲覧者)は該映像の
内容を大まかに把握することができるが、該映像の内容
を的確に表現する静止画像の抽出について考慮されてい
ない。例えば、映像内の1つ1つのシーンはそれぞれ異な
る長さで構成されることが多い。該映像から一定間隔の
静止画像を抽出する方法では、あるシーンでは数多くの
静止画像が抽出され、別のシーンでは１つも静止画像が
抽出されない可能性がある。静止画像の抽出方法とし
て、シーンの切り替わりの先頭画像を抽出する方法もあ
るが、シーンの先頭画像が映像の特徴的な画像であると
は言い難い。さらに、特開平11-232186号公報に記載の
技術では、配信される静止画像群を閲覧後、該映像を再
生することになるが、前記静止画像群のある静止画像の
位置から該映像を再生することは考慮されていない。

【０００６】本発明の目的は、ＶＴＲやビデオカメラ等
から入力される映像を蓄積または圧縮または再圧縮する
際、映像を構成する静止画像から特徴画像を抽出し、２
つの特徴画像に挟まれる静止画像群(映像)に対して蓄積
または圧縮または再圧縮するとともに、蓄積された映像
を配信する際、蓄積された映像からインデックス(サム
ネイル)画像を抽出して配信し、配信映像を閲覧するク
ライアント端末からの要求に応じて、クライアント端末
が指示したインデックス画像の近辺部分以降の映像を配
信することにより、効率的な映像の蓄積、配信を可能と
する映像蓄積配信装置を提供することにある。

【０００７】

【課題を解決するための手段】上記の目的を達成するた
めに、本発明は以下の構成をとる。本発明は、映像を構
成する画像のうち、所定の画像を検出し、検出された所
定の画像と所定の関係を有する画像に、予め定められた
処理を実行する画像蓄積装置である。所定の画像とは、
他の画像とは区別される特殊な画像であり、カラーバー
などが含まれる。なお、特殊な画像とは、検出するため
に特別な処置を加えた画像以外のものも含まれる。ま
た、所定の関係とは、時間的な関係が、検出された特殊
な画像の後に続くことが含まれる。また、予め定められ
た処理には、画像(映像)の蓄積、圧縮などが含まれる。
なお、画像蓄積装置には、映像を蓄積し他の装置に配信
する配信装置や送信された映像を蓄積するクライアント
装置などのコンピュータが含まれる。また、映像を受信
することができるＶＴＲ、ビデオカメラ、携帯電話が含
まれる。なお、より詳細な処理について、以下に記載す
る。

【０００８】本発明は、ＶＴＲやビデオカメラ等から入
力される映像を自動的に蓄積または圧縮または再圧縮す
るために画像検出手段を設ける。前記入力される映像に
は、前記映像のファイル化または圧縮または再圧縮の開
始、終了を指示するための特殊な画像をあらかじめ挿入
しておく。特殊な画像とは、例えば、一般的に表示色調
整用に使用されるカラーバーや、ビデオテープに録画さ
れた映像の最初と最後に挿入される全体が黒色の画面等
が考えられる。また、前記特殊な画像を目視するため
に、前記特殊な画像を一定時間挿入してもよい。さら
に、前記入力される映像の垂直帰先期間に、前記映像の
ファイル化または圧縮または再圧縮の開始、終了を指示
するためのコードを多重するようにしてもよい。

【０００９】前記画像検出手段は、前記入力される映像
から前記特殊な画像または前記コードを検出する。そし
て、前記画像検出手段を具備する映像蓄積配信装置は、
前記特殊な画像の後に表れる前記特殊な画像でない画像
からまたは前記コードが多重された画像から蓄積または
圧縮または再圧縮を開始する。さらに、映像を蓄積中ま
たは圧縮中または再圧縮中も前記画像検出手段は前記入
力される映像から前記特殊な画像または前記コードを検
出し、前記特殊な画像を検出した時点または前記コード
を検出した時点で蓄積または圧縮または再圧縮を終了す
る。

【００１０】本発明は、蓄積された映像からインデック
ス画像群を生成するインデックス画像生成手段を設け
る。好ましくは、前記インデックス生成手段は、前記蓄
積された映像から文字テロップが挿入された画像をイン
デックス画像として抽出する機能を有する。好ましく
は、前記抽出されたインデックス画像は、解像度を縮小
(小さく)して、前記映像蓄積装置とネットワークを介し
て接続されるクライアント端末に配信される。また、前
記蓄積された映像と前記抽出されたインデックス画像と
の関連情報を生成する。好ましくは、前記関連情報は、
映像中のインデックス画像の位置を示す情報、例えば、
フレーム番号または時間である。

【００１１】本発明は、映像配信手段を設け、前記クラ
イアント端末から配信されたインデックス画像を指示す
る情報が送られてくると、前記関連情報を参照し、該イ
ンデックス画像を含む映像を、該インデックス画像の位
置から前記クライアント端末へ配信する。好ましくは、
該インデックス画像の一定時間前の位置からの映像を配
信する。

【００１２】本発明によれば、映像を蓄積または圧縮ま
たは再圧縮する場合、あらかじめ挿入された情報を検出
して、該情報に基づいて映像の蓄積または圧縮または再
圧縮の開始終了を判定できるので、映像を蓄積または圧
縮または再圧縮する操作において人間による操作を必要
とせず、前記映像を蓄積または圧縮または再圧縮する映
像蓄積配信システムにおいて運用コストを低減すること
ができる。さらに、蓄積された映像を配信する場合、蓄
積された映像からインデックス(サムネイル)画像を抽出
して配信し、配信映像を閲覧するクライアント端末から
の要求に応じて、クライアント端末が指示したインデッ
クス画像の近辺部分以降の映像のみを配信することがで
きるので、効率的な映像配信が可能となるとともに、ク
ライアント端末のユーザが配信映像を閲覧するときの利
便性を向上することができる。

【００１３】

【発明の実施の形態】本発明の実施形態を図面を参照し
て説明する。図１は実施形態の映像蓄積配信装置を適用
した映像蓄積配信システムのシステム構成図である。

【００１４】図１において、１０は映像を蓄積し配信す
る映像蓄積配信装置、２０はＶＴＲ、ビデオカメラ、Ｎ
ＴＳＣカメラ等、映像を映像蓄積配信装置２０に入力す
るための映像入力装置、３０ａおよび３０ｂおよび３０
ｃは映像蓄積配信装置２０から配信される映像および画
像を受信して表示するためのクライアント端末、４０は
映像入力装置２０から映像蓄積配信装置１０へ映像を伝
送するためのケーブル、５０は有線あるいは無線を用い
た通信網（電話回線、光ファイバー等）である。通信網
５０は、公衆回線であってもよいし、専用回線であって
もよい。

【００１５】図１では、３０ａ〜３０ｃの３つのクライ
アント端末を図示したが、通信網５０に接続されるクラ
イアント端末数はこの限りではない。映像蓄積配信装置
１０は、映像入力装置２０から入力される映像をファイ
ル化し、内蔵するあるいは外部に接続される（図１に図
示していない）ストレージ装置に蓄積する。好ましく
は、前記入力される映像から少なくとも１つのファイル
を生成する。前記入力される映像は、ＭＰＥＧ等の映像
圧縮アルゴリズムを用いて圧縮されたデータであっても
よいし、非圧縮のデータであってもよい。好ましくは、
映像蓄積配信装置１０は、前記入力される映像が非圧縮
である場合、ＭＰＥＧ等で圧縮する。好ましくは、映像
蓄積配信装置１０は、前記入力される映像が圧縮されて
いる場合、異なる映像圧縮アルゴリズムを用いて再圧縮
するか、または同じ映像圧縮アルゴリズムを用いて異な
るビットレートに変換する。

【００１６】映像蓄積配信装置１０は、映像入力装置２
０から入力される映像から１つのファイルを作成して前
記ストレージ装置に蓄積し終えると、該ファイル化され
た映像のインデックス（サムネイル）画像を少なくとも
１つ生成して前記ストレージ装置に格納する。好ましく
は、インデックス画像は、前記蓄積された映像を構成す
る画像の解像度よりも小さい解像度に縮小され、ＪＰＥ
Ｇ等の静止画像圧縮アルゴリズムで圧縮される。

【００１７】映像蓄積配信装置１０は、クライアント端
末３０ａまたは３０ｂまたは３０ｃからある蓄積映像の
閲覧を示す要求を受け取ると、前記蓄積映像と前記蓄積
映像に関連するすべてのインデックス画像とを要求元で
ある前記クライアント端末に配信する。前記クライアン
ト端末では、受信した前記蓄積映像と前記蓄積映像に関
連するインデックス画像とを前記クライアント端末が具
備する表示装置に表示する。前記クライアント端末のユ
ーザは、前記表示されたインデックス画像から再生した
いインデックス画像を選択すると、該インデックス画像
を示す情報が映像蓄積装置１０に送られ、映像蓄積装置
１０は、該インデックス画像の位置以降の映像を前記ク
ライアント端末に配信する。好ましくは、該インデック
ス画像の位置から一定時間前の画像の位置以降の映像を
配信する。

【００１８】図２は、本実施形態を適応しうる映像蓄積
配信装置１０のハードウェア構成図である。図２に示す
ように、映像蓄積配信装置１０は、ＣＰＵ（Central Pr
ocessing Unit）１１と、主記憶１２と、ストレージ装
置１３と、画像入力装置１４と、通信制御装置１５とを
備える。そして、映像蓄積配信装置１０の各構成要素は
バス１６によって接続され、各構成要素間で必要な情報
が伝送可能なように構成されている。ＣＰＵ１１は、主
記憶１２やストレージ装置１３に、あらかじめ格納され
ているプログラムによって所定の処理を実行する。

【００１９】主記憶１２は、ワークエリアとして機能し
たり、必要なプログラムを格納するための手段であり、
例えば、前者に対してはＲＡＭ（Random Access Memor
y）、後者に対してはＲＯＭ（Read Only Memory）など
によって実現される。ストレージ装置１３は、映像入力
装置２０から入力される映像やインデックス画像を蓄積
したり、映像蓄積配信装置１０の動作を制御するための
プログラムを保存したりするための手段であり、例え
ば、ＲＡＩＤ（Redundant Array of Independent Disk
s）、ハードディスクドライブ、光ディスクドライブ（D
VD-RW （Digital Versatile Disc Rewritable）ドライ
ブ、DVR-Blueドライブ、CD-R（CD-Rewritable）ドライ
ブ、DVD‐RAMドライブ等）、磁気媒体ドライブ（フロッ
ピー（登録商標）ディスクドライブ等）、光磁気ディス
クドライブ（ＭＯ（Magneto-Optical Disk）ドライブ
等）などであるのが好ましいが、半導体記憶装置（ＲＯ
Ｍ、ＲＡＭ等）であってもよい。

【００２０】画像入力装置１４は、映像入力装置２０か
ら入力される映像を、該映像を構成する静止画像群とし
て主記憶１２やストレージ装置１３に取り込むための手
段であり、例えば、映像入力装置２０から入力される映
像がアナログデータである場合にはビデオキャプチャ装
置（アナログデジタル変換機能を含む）、映像入力装置
２０から入力される映像がデジタルデータである場合に
はデジタルビデオインターフェース装置等によって実現
される。

【００２１】通信制御装置１５は、電話線やＬＡＮ（Lo
cal Area Network）、ＷＡＮ（WideArea Network）など
の通信網５０を介して、同じく該通信網に接続される装
置と情報（データ）を送受信するための手段であり、例
えば、モデム、ネットワークアダプタ、無線送受信装置
などによって実現される。映像蓄積配信装置１０を構成
する各要素のうち、データやプログラムの入出力と直接
関係がない装置がある場合には、その装置を図２の構成
からはずすことができる。

【００２２】次に、映像蓄積配信装置１０上で動作する
プログラムで実現される映像蓄積方法について説明す
る。

【００２３】まず、本実施形態における映像蓄積方式を
実現する画像検出手段について説明する。映像入力装置
２０から入力される映像は、例えば、図３に示す静止画
像列（Ｐ１〜Ｐ１０）から構成される。図３において、
左の静止画像から右の静止画像に時間が流れているもの
とする。つまり、静止画像Ｐ１が時間的に一番早く現れ
る静止画像であり、静止画像Ｐ１０が時間的に一番遅く
現れる静止画像である。また、該映像中にはカラーバー
を表現する静止画像（Ｐ３、Ｐ４、Ｐ５、Ｐ９、Ｐ１
０）が含まれており、画像検出手段は、このカラーバー
を表現する静止画像を検出して、該映像のストレージ装
置１３への蓄積を制御することになる。図４に画像検出
手段の処理フローチャートを示す。本画像検出手段を実
現するプログラムは、主記憶１２やストレージ装置１３
に格納されており、ＣＰＵ１１が実行することによって
実現される。

【００２４】図４に示すように、画像検出手段は、ま
ず、本プログラム中で使用する変数を初期化する(ステ
ップＳ１１)。該変数の構成を図５に示す。

【００２５】図５に示すように、該変数は、前フレーム
８１と、現在フレーム８２と、蓄積フラグ８３とから構
成される。前フレーム８１および現在フレーム８２に
は、画像入力装置１４から取込んだ静止画像がカラーバ
ーを表現する画像であるかどうかを示す情報が保持され
る。本実施形態では、カラーバーを表現する画像である
場合には「カラーバー」、そうでない場合には「画像」
と表現する。現在フレーム８２には、画像入力装置１４
から取込んだ静止画像の情報が保持され、前フレーム８
１には、新たに静止画像を画像入力装置１４から取込ん
だときに現在フレーム８１の内容がコピーされる。つま
り、直前に取込んだ静止画像の情報が保持される。蓄積
フラグ８３には、画像入力装置１４から取込んだ静止画
像をストレージ装置１３に映像として蓄積するかどうか
を示す情報が保持される。本実施形態では、蓄積するの
であれば、「ＹＥＳ」、蓄積しないのであれば「ＮＯ」
と表現する。図４のステップＳ１１では、前フレーム８
１を「画像」、現在フレーム８２を「画像」、蓄積フラ
グ８３を「ＮＯ」という情報でそれぞれ初期化する。

【００２６】次に、画像検出手段は、画像入力装置１４
から１枚の静止画像を取得し、主記憶１２に格納する
(ステップＳ１２)。このとき、前記静止画像が圧縮され
ているならば伸張する。そして、主記憶１２に取込んだ
該静止画像がカラーバーを表現する画像かどうかを検出
する（ステップＳ１３）。このとき、画像入力装置１４
から取込まれる静止画像の色フォーマットはＹＵＶ
（Ｙ：輝度成分、ＵＶ：色差成分）形式で表現されてお
り、ＹＵＶ形式で表現されるデータをＨＳＶ（Ｈ：色相
成分、Ｓ：彩度成分、Ｖ：輝度成分）形式で表現される
データに変換する。ＹＵＶ形式からＨＳＶ形式への変換
は、（１）式と、（２）式と、（３）式とから与えられ
る。Ｈ＝ｔａｎ^−１（Ｖ／Ｕ）（１）式Ｓ＝ √（Ｖ^２＋Ｕ^２）（２）式Ｖ＝Ｙ（３）式（１）式によると、一般的なカラーバーを構成する色を
表現するデータは、おおよそ、赤（Ｈ＝１１３）、黄色
（Ｈ＝１７３）、緑（Ｈ＝２２５）、シアン（Ｈ＝２９
３）、青（Ｈ＝３５３）、マゼンダ（Ｈ＝４５）とな
り、前記静止画像を構成するピクセルデータのうち、複
数の任意の位置のピクセルデータを抽出し、該データ群
と前記カラーバーの色情報（Ｈの値）とを比較すること
により、カラーバーを検出することができる。色相成分
（Ｈの値）で色情報を判定する場合、ＲＧＢ（Ｒ：赤成
分、Ｇ：緑成分、Ｂ：青成分）形式やＹＵＶ形式で判定
するよりも確実に判定することができる。

【００２７】そして、画像検出手段は、ステップＳ１３
の判定結果をもとに前フレーム８１および現在フレーム
８２の内容を更新し（ステップＳ１４）、ステップＳ１
３の判定結果（現在フレーム８２の内容）が、「カラー
バー」であるかどうかを判断する（ステップＳ１５）。
このとき、カラーバーでなければ（「画像」であれ
ば）、前フレーム８１の内容を判定し（ステップＳ１
６）、「カラーバー」でなければ（「画像」であれ
ば）、蓄積フラグ８３の内容が「ＹＥＳ」であれば前記
静止画像を現在蓄積中のファイルの格納してストレージ
装置１３に蓄積し（ステップＳ１７）、前フレーム８１
の内容が「カラーバー」であれば、蓄積フラグ８３の内
容を「ＹＥＳ」に更新し、新規にファイルを作成して、
前記静止画像を前記新規に作成したファイルに格納して
ストレージ装置１３に蓄積する（ステップＳ１８）。ス
テップＳ１７およびステップＳ１８において、前記静止
画像をファイルに格納する前に、モーションＪＰＥＧや
ＭＰＥＧ−２、ＭＰＥＧ−４、ＤＶ（Digital Video）
等のアルゴリズムで圧縮して格納する。

【００２８】また、ステップＳ１５において、現在フレ
ーム８２の内容が「カラーバー」であれば、前フレーム
８１の内容を判定し（ステップＳ１９）、「カラーバ
ー」でなければ（「画像」であれば）、蓄積フラグ８３
の内容を「ＮＯ」に更新し、現在蓄積中のファイルを閉
じる（ステップＳ２０）。

【００２９】そして、映像入力装置２０から入力される
映像を構成する静止画像すべてについて処理を終了した
ならば（ステップＳ２１）処理を終了し、そうでなけれ
ば、ステップＳ１２〜ステップＳ２１の処理を繰り返
す。

【００３０】例えば、図３に示す静止画像列が画像入力
装置１４から取込まれる場合、ステップＳ２１における
前フレーム８１、現在フレーム８２、蓄積フラグ８３の
内容は、それぞれ図６に示すようになる。図６は、静止
画像Ｐ２、Ｐ３、Ｐ４、Ｐ６、Ｐ７、Ｐ９を処理中にお
ける各変数を示すものである。これにより、静止画像Ｐ
６〜Ｐ８の静止画像列が１つの映像ファイルとしてスト
レージ装置１３に圧縮されて蓄積されることになる。

【００３１】このように、本画像検出手段により、あら
かじめ映像に挿入された情報を自動的に検出して映像の
蓄積開始終了を判定できるので、映像を蓄積する装置に
おいて人間による操作を必要とせず、本映像蓄積配信装
置を含む映像蓄積配信システムにおいて運用コストを低
減することができるようになる。

【００３２】上述した実施形態では、あらかじめ映像に
挿入された情報をカラーバーとした場合について説明し
たが、前記情報は、画面全体が黒色の画像でも、文字テ
ロップを含む画像等でも、色情報で判別可能な画像であ
ればよい。また、前記情報は、映像の垂直帰先期間に多
重されたコードであってもよい。例えば、映像入力装置
１０から入力される一般的な映像を構成する静止画像
は、図７に示す構造を取る。

【００３３】図７において、映像データ８４の上部には
複数ラインで構成される垂直帰先期間データ８５が存在
する。この垂直帰先期間データ８５の任意のラインに蓄
積開始終了を示すコードをあらかじめ多重しておく。こ
の場合、例えば、映像入力装置２０から入力される映像
は、図８に示す静止画像列（Ｐ１１〜Ｐ１７）から構成
される。図８において、左の静止画像から右の静止画像
に時間が流れているものとする。つまり、静止画像Ｐ１
１が時間的に一番早く現れる静止画像であり、静止画像
Ｐ１７が時間的に一番遅く現れる静止画像である。ま
た、該映像中には垂直帰先期間の任意のラインに蓄積開
始終了を示すコード（情報）が多重されている静止画像
（Ｐ１３、Ｐ１６）が含まれており、このコードを検出
して、該映像のストレージ装置１３への蓄積を制御する
ようにする。

【００３４】垂直帰先期間の任意のラインに蓄積開始終
了を示すコードが多重されている場合の画像検出手段の
処理フローチャートを図９に示す。本画像検出手段を実
現するプログラムは、主記憶１２やストレージ装置１３
に格納されており、ＣＰＵ１１が実行することによって
実現される。

【００３５】図９に示すように、画像検出手段は、ま
ず、本プログラム中で使用する変数を初期化する(ステ
ップＳ２２)。本画像検出手段で使用する変数は蓄積フ
ラグ８３のみである。ステップＳ２２では「ＮＯ」を設
定する。次に、画像入力装置１４から１枚の静止画像を
取得し、主記憶１２に格納する(ステップＳ２３)。この
とき、前記静止画像が圧縮されているならば伸張する。
また、画像入力装置１４は、映像データ８４と垂直帰先
期間データ８５とを分離して取込む機能を有しているこ
とが望ましく、映像データ８４と垂直帰先期間データ８
５とを主記憶１２上の異なる領域にそれぞれ格納する。
そして、主記憶１２に取込んだ該静止画像の垂直帰先期
間データに蓄積開始終了コードが含まれているかどうか
を検出して、該コードを判定する（ステップＳ２４）。

【００３６】ステップＳ２４において、垂直帰先期間デ
ータに蓄積開始終了コードが含まれており、該コードが
蓄積開始を示すコードならば、蓄積フラグ８３の内容を
「ＹＥＳ」に更新し、新規にファイルを生成して前記静
止画像を新規に作成したファイルに格納してストレージ
装置１３に蓄積する（ステップＳ２５）。

【００３７】ステップＳ２４において、垂直帰先期間デ
ータに蓄積開始終了コードが含まれており、該コードが
蓄積終了を示すコードならば、蓄積フラグ８３の内容を
「ＮＯ」に更新し、前記静止画像を蓄積した後、現在蓄
積中のファイルを閉じる（ステップＳ２６）。

【００３８】ステップＳ２４において、垂直帰先期間デ
ータに蓄積開始終了コードが含まれていないならば、蓄
積フラグ８３の内容が「ＹＥＳ」ならば前記静止画像を
現在蓄積中のファイルに格納してストレージ装置１３に
蓄積する（ステップＳ２７）。

【００３９】ステップＳ２５、ステップＳ２６、ステッ
プＳ２７において、前記静止画像をファイルに格納する
際、モーションＪＰＥＧやＭＰＥＧ−２、ＭＰＥＧ−
４、ＤＶ（Digital Video）等のアルゴリズムで圧縮し
て格納する。

【００４０】最後に、映像入力装置２０から入力される
映像を構成する静止画像すべてについて処理を終了した
ならば（ステップＳ２８）処理を終了し、そうでなけれ
ば、ステップＳ２３〜ステップＳ２８の処理を繰り返
す。

【００４１】次に、本実施形態における映像蓄積方式を
実現するインデックス画像生成手段について説明する。
本インデックス画像生成手段は、図４におけるステップ
Ｓ２０または図９におけるステップＳ２６が実行された
後、実行される。

【００４２】図１０にインデックス画像生成手段の処理
フローチャートを示す。インデックス画像生成手段を実
現するプログラムは、主記憶１２やストレージ装置１３
に格納されており、ＣＰＵ１１が実行することによって
実現される。

【００４３】図１０に示すように、インデックス画像生
成手段は、まず、本プログラム中で使用する変数を初期
化する(ステップＳ３１)。該変数の構成を図１１に示
す。図１１に示すように、該変数は、前フレーム８６
と、現在フレーム８７とから構成される。前フレーム８
６および現在フレーム８７には、ステップＳ２０または
ステップＳ２６において閉じた映像ファイルを構成する
静止画像に文字テロップが挿入されているかどうかを示
す情報が保持される。本実施形態では、文字テロップが
挿入されている場合には「有」、そうでない場合には
「無」と表現する。現在フレーム８７には、現在処理中
の静止画像の情報が保持され、前フレーム８６には、前
記映像ファイルから新たに静止画像を取込んだときに現
在フレーム８７の内容がコピーされる。つまり、直前に
取込んだ静止画像の情報が保持される。図１０のステッ
プＳ３１では、前フレーム８６を「無」、現在フレーム
８７を「無」という情報でそれぞれ初期化する。

【００４４】次に、ステップＳ２０またはステップＳ２
６において閉じたファイルを読み込む（ステップＳ３
２）。そして、映像ファイル中の静止画像を１枚主記憶
１２に取り込み、該静止画像に文字テロップが含まれて
いるかどうかを判定する（ステップＳ３３）。このと
き、該映像ファイルの先頭の静止画像から順次取り込
み、該静止画像が圧縮されているならば伸張する。ま
た、文字テロップが含まれているかどうかの判断は、上
述したようなＨＳＶ形式の色相成分により判断できる。
つまり、あらかじめ挿入される文字テロップの色を与え
ることにより、文字テロップ色と前記静止画像との色相
成分比較で行う。

【００４５】次に、ステップＳ３３の判定結果をもとに
前フレーム８６および現在フレーム８７の内容を更新し
（ステップＳ３４）、ステップＳ３３の判定結果（現在
フレーム８７の内容）が「有」であるかどうかを判断す
る（ステップＳ３５）。このとき、「有」であれば、前
フレーム８６の内容を判定し（ステップＳ３６）、
「有」でなければ、前記静止画像をあらかじめ与えられ
た解像度に縮小し、さらに、ＪＰＥＧ等のアルゴリズム
で圧縮し、静止画像ファイルとしてストレージ装置１３
に蓄積する（ステップＳ３７）。そして、インデックス
関連情報テーブルに前記静止画像ファイルの情報を追加
する（ステップＳ３８）。インデックス関連情報テーブ
ル１００の内容を図１２に示す。

【００４６】図１２において、インデックス関連情報テ
ーブル１００は、配信映像ファイル名８８と、インデッ
クス画像ファイル名８９と、位置９０とから構成され
る。

【００４７】配信映像ファイル名８８には、後述する
（図１０におけるステップＳ３９で蓄積される）配信映
像ファイルのファイル名が設定される。インデックス画
像ファイル名８９には、ステップＳ３７で蓄積されたイ
ンデックス画像（静止画像）ファイルのファイル名が設
定される。位置９０には、インデックス画像ファイル名
８９が保持するインデックス画像ファイルの静止画像
の、配信映像ファイル名８８が保持する配信映像ファイ
ル中の位置が設定される。該位置は、配信映像ファイル
の先頭画像からの時間あるいはフレーム数で表現され
る。本実施形態では、時間（秒）として表現する。

【００４８】図１０に戻り、前記静止画像を配信用映像
ファイルとして前記ファイルとは異なるファイルに格納
し、ストレージ装置１３に蓄積する（ステップＳ３
９）。ここで、前記静止画像を前記配信用映像ファイル
に格納する際、配信映像用として、ＭＰＥＧ−４等のア
ルゴリズムで圧縮して格納する。

【００４９】そして、前記閉じたファイルの映像を構成
する静止画像すべてについて処理を終了したならば（ス
テップＳ４０）処理を終了し、そうでなければ、ステッ
プＳ３３〜ステップＳ４０の処理を繰り返す。

【００５０】例えば、ステップＳ３２において、図１３
に示す静止画像列（Ｐ２１〜Ｐ２９）が取込まれるとす
る。図１３において、左の静止画像から右の静止画像に
時間が流れているものとする。つまり、静止画像Ｐ２１
が時間的に一番早く現れる静止画像であり、静止画像Ｐ
２９が時間的に一番遅く現れる静止画像である。また、
該映像中には文字テロップが挿入されている静止画像
（Ｐ２２、Ｐ２３、Ｐ２６、Ｐ２７、Ｐ２８）が含まれ
ており、本インデックス画像生成手段により、静止画像
Ｐ２２およびＰ２６が抽出され、静止画像Ｐ２２および
Ｐ２６からインデックス画像が生成される。

【００５１】上述した実施形態では、インデックス画像
生成を、あらかじめ映像に挿入された文字テロップを検
出することで行ったが、インデックス画像生成は、映像
の垂直帰先期間にあらかじめ多重されたコードを検出す
るようにしてもよい。

【００５２】次に、本実施形態における映像配信方式を
実現する映像配信手段について説明する。本映像配信手
段は、映像蓄積配信装置１０がクライアント端末３０ａ
またはクライアント端末３０ｂまたはクライアント端末
３０ｃからストレージ装置１３に蓄積された配信映像の
再生要求を受け取ったときに実行される。

【００５３】図１４に映像配信手段の処理フローチャー
トを示す。映像配信手段を実現するプログラムは、主記
憶１２やストレージ装置１３に格納されており、ＣＰＵ
１１が実行することによって実現される。図１４に示す
ように、映像配信手段は、まず、クライアント端末３０
ａまたはクライアント端末３０ｂまたはクライアント端
末３０ｃからストレージ装置１３に蓄積された配信映像
の再生要求を受け取ると、該配信映像と該配信映像に関
連したインデックス画像を前記クライアント端末に配信
する（ステップＳ５１）。このとき、該配信映像を配信
せず、該配信映像に関連したインデックス画像のみを前
記クライアント端末に配信してもよい。また、前記クラ
イアント端末からの再生要求には該配信映像のファイル
名が含まれているので、インデックス関連情報テーブル
１００の内容から、前記ファイル名に関連したインデッ
クス画像ファイルを抽出することができる。

【００５４】前記クライアント端末は、例えば、ステッ
プＳ５１において配信された情報をもとに、図１５に示
すような画面を、前記クライアント端末が具備する表示
装置に表示する。

【００５５】図１５において、９１は前記配信された配
信映像を表示する領域であり、９２ａ、９２ｂ、９２ｃ
は前記配信されたインデックス画像である。ここで、前
記クライアント端末のユーザが、インデックス画像９２
ａまたは９２ｂまたは９２ｃを選択すると、その情報が
映像蓄積配信装置１０に送信される。

【００５６】図１４に戻り、映像配信手段は、次に、前
記クライアント端末からのインデックス画像選択情報を
受信したかどうかを判定し（ステップＳ５２）、受信し
たならば、前記配信映像において、前記インデックス画
像選択情報が示すインデックス画像の位置以降の部分
を、前記クライアント端末に配信する（ステップ５
３）。このとき、前記インデックス画像選択情報が示す
インデックス画像の位置から、あらかじめ与えられた時
間（またはフレーム数）分さかのぼった位置以降の部分
を配信するようにしてもよい。例えば、前記配信映像の
ファイル名が“eizou2.mpg”であり、前記インデックス
画像選択情報が“index3.jpg”であり、前記あらかじめ
与えられた時間が３０（秒）であるならば、前記配信映
像を、先頭から５０秒以降の部分を配信することにな
る。

【００５７】このように、インデックス画像生成手段お
よび映像配信手段により、蓄積された映像から1つ以上
のインデックス(サムネイル)画像を抽出して配信し、配
信映像を閲覧するクライアント端末からの要求に応じ
て、クライアント端末が指示したインデックス画像の近
辺部分以降の映像のみを配信することができるので、効
率的な映像配信が可能となるとともに、クライアント端
末のユーザが配信映像を閲覧するときの利便性を向上す
ることができる。

【００５８】本実施形態では、映像の蓄積と配信を１つ
の装置で行うように構成したが、映像の蓄積と配信を異
なる装置で行うように構成してもよい。このときの前記
映像蓄積配信システムのシステム構成図は図１６とな
る。映像蓄積配信装置１０の代わりに、映像蓄積装置６
０と映像配信装置７０とから構成される。また、映像蓄
積装置６０と映像配信装置７０とは、通信網８０（電話
回線、光ファイバー等）により接続される。通信網８０
は、通信網５０と同一であっても、異なる通信網でもよ
い。

【００５９】映像蓄積装置６０のハードウェア構成図を
図１７に示す。映像蓄積装置６０は、ＣＰＵ６１と、主
記憶６２と、ストレージ装置６３と、画像入力装置６４
と、ネットワーク制御装置６５とを備える。そして、映
像蓄積装置６０の各構成要素はバス６６によって接続さ
れ、各構成要素間で必要な情報が伝送可能なように構成
されている。

【００６０】ＣＰＵ６１、主記憶６２と、ストレージ装
置６３と、画像入力装置６４は、それぞれＣＰＵ１１、
主記憶１２と、ストレージ装置１３と、画像入力装置１
４と同一である。ネットワーク制御装置６５は、電話線
やＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area
Network）などの通信網８０を介して、同じく該通信網
に接続される映像配信装置と情報（データ）を送受信す
るための手段であり、例えば、モデム、ネットワークア
ダプタ、無線送受信装置などによって実現される。ま
た、通信網８０と通信網５０とが同一であれば、ネット
ワーク制御装置６５は、通信制御装置１５と同一であっ
てもよい。

【００６１】また、前記画像検出手段は映像蓄積装置６
０上で実行される。つまり、前記画像検出手段を実現す
るプログラムは、主記憶６２またはストレージ装置６３
に格納されており、ＣＰＵ６１により実行される。映像
配信装置７０のハードウェア構成図を図１８に示す。映
像配信装置７０は、ＣＰＵ７１と、主記憶７２と、スト
レージ装置７３と、ネットワーク制御装置７４と、通信
制御装置７５とを備える。そして、映像配信装置７０の
各構成要素はバス７５によって接続され、各構成要素間
で必要な情報が伝送可能なように構成されている。

【００６２】ＣＰＵ７１、主記憶７２と、ストレージ装
置７３と、通信制御装置７５は、それぞれＣＰＵ１１、
主記憶１２と、ストレージ装置１３と、通信制御装置１
５と同一である。ネットワーク制御装置７４は、ネット
ワーク制御装置６５と同一である。また、通信網８０と
通信網５０とが同一であれば、ネットワーク制御装置７
４と通信制御装置７５のうち、どちらか一方を具備して
いればよい。また、前記インデックス画像生成手段およ
び前記映像配信手段は映像配信装置７０上で実行され
る。つまり、前記インデックス画像生成手段および前記
映像配信手段を実現するそれぞれのプログラムは、主記
憶７２またはストレージ装置７３に格納されており、Ｃ
ＰＵ７１により実行される。また、図１０のステップＳ
３２においては、映像蓄積装置６０のストレージ装置６
３に蓄積された映像ファイルを、通信網８０を介して取
得することになる。

【００６３】また、図１においては、映像入力装置２０
と映像蓄積配信装置１０とは、ケーブル４０で接続する
構成としたが、図１９に示すように通信網９０（電話回
線、光ファイバー等）を介して接続するようにしてもよ
い。通信網９０は、通信網５０または通信網８０とは、
同一の通信網でも、異なる通信網でもよい。また、この
場合、図２および図１７における画像入力装置１４およ
び画像入力装置６４は、通信網９０を介して映像を受信
するための受信装置（例えば、ネットワークアダプタや
モデム等）となる。

【００６４】以上の実施の形態によれば、映像を蓄積ま
たは圧縮または再圧縮する場合、あらかじめ挿入された
情報を検出して映像の蓄積または圧縮または再圧縮の開
始および終了を判定できるので、映像を蓄積または圧縮
または再圧縮する操作において人間による操作を必要と
せず、前記映像を蓄積または圧縮または再圧縮する装置
を含む映像蓄積配信システムにおいて運用コストを低減
することができる。

【００６５】さらに、蓄積された映像を配信する場合、
蓄積された映像からインデックス(サムネイル)画像を抽
出して配信し、配信映像を閲覧するクライアント端末か
らの要求に応じて、クライアント端末が指示したインデ
ックス画像の近辺部分以降の映像のみを配信することが
できるので、効率的な映像配信が可能となるとともに、
クライアント端末のユーザが配信映像を閲覧するときの
利便性を向上することができる。

【００６６】

【発明の効果】本発明によれば、入力される画像をより
効率よく、蓄積等の処理することが可能になる。

【図面の簡単な説明】

【図１】本実施形態の映像蓄積配信システム構成図であ
る。

【図２】本実施形態の映像蓄積配信装置のハードウェア
構成図である。

【図３】本実施形態の画像検出手段における静止画像列
の説明図である。

【図４】本実施形態の画像検出手段の処理フローチャー
トを示す図である。

【図５】本実施形態の画像検出手段で使用する変数を示
す図である。

【図６】本実施形態の画像検出手段で使用する変数を示
す図である。

【図７】本実施形態の画像検出手段における静止画像構
成の説明図である。

【図８】本実施形態の画像検出手段における静止画像列
の説明図である。

【図９】本実施形態の画像検出手段の処理フローチャー
トを示す図である。

【図１０】本実施形態のインデックス画像生成手段の処
理フローチャートを示す図である。

【図１１】本実施形態のインデックス画像生成手段で使
用する変数を示す図である。

【図１２】本実施形態のインデックス関連情報テーブル
の内容を示す図である。

【図１３】本実施形態のインデックス画像生成手段にお
ける静止画像列の説明図である。

【図１４】本実施形態の映像配信手段の処理フローチャ
ートを示す図である。

【図１５】本実施形態のクライアント端末における表示
例の説明図である。

【図１６】本実施形態の映像蓄積配信システム構成図で
ある。

【図１７】本実施形態の映像蓄積装置のハードウェア構
成図である。

【図１８】本実施形態の映像配信装置のハードウェア構
成図である。

【図１９】本実施形態の映像蓄積配信システム構成図で
ある。

【符号の説明】

１０…映像蓄積配信装置、１１…ＣＰＵ、１２…主記
憶、１３…ストレージ装置、１４…画像入力装置、１５
…通信制御装置、１６…バス、２０…映像入力装置、３
０ａ…クライアント端末、３０ｂ…クライアント端末、
３０ｃ…クライアント端末、４０…ケーブル、５０…通
信網、６０…映像蓄積装置、６１…ＣＰＵ、６２…主記
憶、６３…ストレージ装置、６４…画像入力装置、６５
…ネットワーク制御装置、６６…バス、７０…映像配信
装置、７１…ＣＰＵ、７２…主記憶、７３…ストレージ
装置、７４…ネットワーク制御装置、７５…通信制御装
置、７６…バス、８０…通信網、９０…通信網

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｈ０４Ｎ 7/173 ６１０Ｈ０４Ｎ 5/91 Ｌ (72)発明者岡山祐孝神奈川県川崎市麻生区王禅寺1099番地株式会社日立製作所システム開発研究所内 (72)発明者伊藤秀二東京都小平市上水本町５丁目22番１号株式会社日立超エル・エス・アイ・システムズ内 (72)発明者佐藤信之東京都小平市上水本町５丁目22番１号株式会社日立超エル・エス・アイ・システムズ内 (72)発明者小林正隆神奈川県横浜市戸塚区吉田町292番地株式会社日立マイクロソフトウェアシステムズ内Ｆターム(参考） 5C052 AB04 AC08 CC11 DD04 DD08 DD10 5C053 FA05 FA07 FA14 GB36 GB38 HA29 LA14 5C064 BA07 BB05 BC10 BC18 BC25 BD08 BD13 5C082 AA01 AA34 BA02 BA12 BD06 CA51 CB06 DA86 DA89 MM02 MM07

Claims

【特許請求の範囲】

【請求項１】外部機器から送信され、複数の画像から構
成される映像を受信する受信手段と、前記複数の画像か
ら、所定の性質を有する所定の画像を検出し、検出され
た前記画像と所定の関係を有する画像に対して予め定め
られた処理を実行する処理手段とを有することを特徴と
する映像処理装置。
【請求項２】請求項１に記載の映像処理装置において、
前記所定の画像には、表示色調整に使用可能なカラーバ
ー画像、黒色の画像および処理の開始または終了を示す
コードが多重化された画像のうち少なくとも１つを含む
ことを特徴とする映像処理装置。
【請求項３】請求項１または２のいずれかに記載の映像
処理装置において、前記所定の関係を有する画像には、前
記所定の画像と時間的に後につながりる画像が含まれる
ことを特徴とする映像処理装置。
【請求項４】請求項１乃至３のいずれかに記載の映像処
理装置において、前記予め定められた処理には、当該映
像処理装置が有する記憶装置に前記所定の関係を有する
画像を蓄積するための処理、前記所定の関係を有する画
像に対して圧縮化する処理および前記所定の関係を有す
る画像を予め定められた装置に転送する処理のうち少な
くとも１つを含むことを特徴とする映像処理装置。
【請求項５】請求項１に記載の映像処理装置において、
前記所定の関係を有する画像を蓄積する蓄積手段と、前記蓄積された画像を、ネットワークを介して接続され
た映像処理装置に送信する送信手段をさらに有すること
を特徴とする映像処理装置。
【請求項６】請求項５に記載の映像処理装置において、
蓄積された前記画像から当該蓄積された画像を代表する
インデックス画像を生成するインデックス画像生成手段
をさらに有することを特徴とする映像処理装置。
【請求項７】請求項６に記載の映像処理装置において、
前記送信手段は、前記インデックス画像を、前記ネット
ワークを介して送信することを特徴とする映像処理装
置。
【請求項８】請求項６または７のいずれかに記載の映像
処理装置において、前記インデックス画像生成手段は、蓄積された前記画像
の少なくとも１つに対して解像度を縮小する処理を施す
ことにより、前記インデックス画像を生成することを特
徴とする映像処理装置。