JP2005223744A - 動画マニュアル - Google Patents

Abstract

【課題】 動画マニュアルの利用価値を高める。
【解決手段】 動画データと、動画データ中の領域についてその形状と位置とを時刻に関連付けて記録した領域データと、前記領域データに関連付けられ、所定の動作が定義された動作データとを有する、情報処理装置で閲覧可能な動画マニュアルであって、前記動画データに基づく動画を再生する動画再生手段と、前記領域データに基づいた領域を示す動画を生成する領域情報生成手段と、前記動画再生手段が再生する動画と、前記領域情報生成手段が生成する動画とを合成した動画を生成する動画合成手段とを前記情報処理装置に機能させ、前記領域情報生成手段は、前記動作データに基づく動作を、当該動作データに関連付けられた領域データに基づく領域を示す動画の生成とともに行なうことを特徴とする動画マニュアル。
【選択図】 図２

Description

本発明は、動画を含む電子マニュアルに関する。

製品一般、特に、パーソナルコンピュータ、プリンタ等をはじめとした電子機器には、購入者にその使用方法等を知らしめるためにマニュアルが添付されている。

従来、マニュアルは冊子等の紙を媒体とした形態で頒布されていたが、近年では、電子情報化されてＣＤ−ＲＯＭ等を媒体として頒布されることも多くなっている。そして、このＣＤ−ＲＯＭ等をパーソナルコンピュータ等の再生装置で再生することによりマニュアルを閲覧できるようになっている。

電子情報化されたマニュアルは、従来の紙ベースのマニュアルと同様に、主としてテキストデータと写真、イラスト等の静止画像データとから構成されていたが、近年では、静止画像に加え、動画を含んだ電子マニュアル（以下、「動画マニュアル」と称す）が実用化され、操作手順、説明対象物等を動画で示すことにより、マニュアルの内容が一層わかりやすくなっている。

上述のように、動画マニュアルでは、操作手順、説明対象物等を動画で示すことにより内容の理解を助けるようになっているが、この動画は、あらかじめ作成された動画を再生するのみであり、動画中にその他の情報を含めることは行なわれていなかった。

ところで、動画中に動画に関する説明等の各種の情報を含め、マニュアル閲覧者が必要な情報を取得できるようになれば、動画マニュアルの利用価値をさらに高めることができる。

本発明は、動画マニュアルの利用価値を高めることを目的とする。

上記課題を解決するため、本発明の第１の態様によれば、
動画データと、
動画データに基づく画像中の領域についてその形状と位置とを時刻に関連付けて記録した領域データと、
前記領域データに関連付けられ、所定の動作が定義された動作データとを有する、情報処理装置で閲覧可能な動画マニュアルであって、
前記動画データに基づく動画を再生する動画再生手段と、
前記領域データに基づいた領域を示す動画を生成する領域情報生成手段と、
前記動画再生手段が再生する動画と、前記領域情報生成手段が生成する動画とを合成した動画を生成する動画合成手段とを前記情報処理装置に機能させ、
前記領域情報生成手段は、前記動作データに基づく動作を、当該動作データに関連付けられた領域データに基づく領域を示す動画の生成とともに行なうことを特徴とする動画マニュアルが提供される。

また、上記課題を解決するため、本発明の第２の態様によれば、
動画データと、
動画データに基づく画像中の領域についてその形状と位置とを時刻に関連付けた情報および検索のための検索情報を記録した領域データとを有する、情報処理装置で閲覧可能な動画マニュアルであって、
前記動画データに基づく動画を再生する動画再生手段と、
前記領域データに基づいて領域を示す動画を生成する領域情報生成手段と、
前記動画再生手段が再生する動画と、前記領域情報生成手段が生成する動画とを合成した動画を生成する動画合成手段と、
マニュアル閲覧者から検索キーを受け付け、受け付けた検索キーを含む検索情報が記録された前記領域データを索出する検索手段とを前記情報処理装置に機能させることを特徴とする動画マニュアルが提供される。

本発明の実施の形態について図面を参照して説明する。

図１は、本発明の実施に適した動画マニュアル閲覧システムのハードウェア構成の一例を示すブロック図である。

本図に示すように動画マニュアル閲覧システムは、情報処理装置１０、モニタ装置等の表示装置１１、キーボード、マウス等の入力装置１２、ハードディスク装置等の記憶装置１３を備えて構成される。情報処理装置１０は、パーソナルコンピュータ、ワークステーションその他の汎用的なコンピュータを用いることができる。ただし、動画マニュアル閲覧システムのハードウェア構成はこれに限られない。例えば、動画マニュアル閲覧に特化した専用のシステムを用いて構成するようにしてもよい。あるいは、いわゆる情報家電に組み込まれた情報処理装置を用いて構成するようにしてもよい。

次に、上記構成で実現される本発明の第１の実施形態について説明する。

第１の実施形態において、記憶装置１３には、本システムを利用して閲覧するための動画マニュアル２００が格納されている。動画マニュアル２００は、テキストデータ・ページ情報等を含むマニュアル本文、動画マニュアル閲覧時等に動画として再生される動画データ２１０、動画中の説明対象物を含む領域に関する情報が記録された領域データ２２０、領域データに関連した動作を行なうための動作データ２３０、領域データと動作データとの関連情報が記録された動作対応データ２４０等を含んで構成される。これらの各種データは、動画マニュアル２００の作成者によってあらかじめ作成され、動画マニュアル２００に含められる。

動画データ２１０は、時刻とともに表示される画像が変化するデータであり、動画マニュアル２００の説明対象物の動き等をよりわかりやすくするために用いられる。動画マニュアル２００には、複数の動画データ２１０を含めることができる。動画データ２１０は、従来の技術を用いて作成することができ、任意のフォーマットを用いることができる。

図２（ａ）は、動画データ２１０を再生した場合に画像が変化していく様子を示す図である。

本図の例では、動画データ２１０は、時刻Ｔ１で開始し、時刻Ｔ７で終了するようになっている。そして、時刻Ｔ２において、説明対象物である顔マークが登場し、時刻Ｔ７にかけて画像内を連続的に移動している様子が示されている。

領域データ２２０は、動画データ２１０について説明対象物を含む領域を定義するためのデータである。ここで、説明対象物を含む領域とは、図２（ｂ）に一例を示すように、説明対象物である顔マークを囲む四角形の領域であり、説明対象物が表示されている領域を動画マニュアル閲覧システムが識別するために用いられる。また、領域データ２２０で定義される領域を動画データ２１０に合成して表示することにより、動画マニュアル２００の閲覧者にとっても説明対象物の認識が容易となる。

領域データ２２０で定義される領域は４角形に限られず、円形、多角形等であってもよい。例えば、説明対象物の輪郭に近似した多角形とすることができる。また、説明対象物の表示に合わせて、時刻とともに、その位置、形状、大きさ等を変化させることができる。

また、領域データ２２０は、動画データ２１０において、複数定義することができる。このとき、一つの説明対象物について複数の領域データ２２０を定義するようにしてもよいし、別の説明対象物について領域データ２２０を定義するようにしてもよい。一つの説明対象物について複数の領域データ２２０を定義する場合には、例えば、図２（ｂ）において、時刻Ｔ２〜Ｔ５における領域と、時刻Ｔ６〜Ｔ７における領域とを区別して定義するようにしてもよい。

図３は、領域データ２２０のデータフォーマットの一例を示す図である。

本図に示すように、領域データ２２０には、領域ＩＤ２２１および領域名２２２が付されて管理される。

そして、領域を定義するための領域定義情報２２３が設定される。領域定義情報は、時刻２２３１と領域形状２２３２とから構成され、時刻毎の領域の形状を定義している。ここで、領域形状２２３２は、種別とパラメータとにより領域の形状を定義している。種別は、領域の形状の種別を示し、例えば、四角形（Ｓｑｕａｒｅ）、円（Ｃｉｒｃｌｅ)、多角形（Ｐｏｌｙｇｏｎ）等とすることができる。パラメータは、その種別の具体的な形、大きさ、位置を表すもので、それぞれの個数・意味は、形状の種別に応じるものとする。例えば、種別が円の場合には、中心座標と半径とがパラメータで示され、種別が四角形の場合には、左上角と右下角の座標とがパラメータで示される。また、種別が多角形の場合には、頂点の個数と、各頂点の座標とがパラメータで示される。

図３に示した領域データ２２０の例では、時刻Ｔ２において、パラメータ（ｘ１、ｙ１）：（ｘ２，ｙ２）の四角形（Ｓｑｕａｒｅ）で示される領域が、説明対象物に合わせて、時刻Ｔ７にかけて移動する様子が記録されている。なお、領域データ２２０は、説明対象物が連続的に移動・変化している場合にも、離散的な時刻で定義しておくことができる。

動作データ２３０は、領域データ２２０と関連付けられるデータであり、領域データ２２０に関する動画マニュアル閲覧システムの動作を設定するためのデータである。

第１の実施形態において、領域データ２２０に関する動画マニュアル閲覧システムの動作は、領域データ２２０で定められる領域が表示された場合に行なう動作であり、付随情報の表示、他の動画データ２１０の再生、音声データの再生等とすることができる。

図４は、動作データ２３０のデータフォーマットの一例を示す図である。

本図に示すように、動作データ２３０は、動作ＩＤ２３１および動作名２３２が付されて管理される。

そして、動作を定義するための動作定義情報２３３が設定される。動作定義情報２３３に設定する項目は、例えば、その動作を示す情報と、具体的な内容とすることができる。具体的には、動作が付随情報の表示であれば、付随情報の表示である旨および表示内容とし、動作が他の動画データ２１０の再生であれば、動画の再生である旨および再生対象の動画データの識別子とすることができる。

動作対応データ２４０は、領域データ２２０と動作データ２３０とを関連付けるための情報が記録されたデータである。

図５は、動作対応データ２４０の一例を示す図である。本図に示すように、動作対応データ２４０は領域ＩＤと動作ＩＤとを対応付けて記録することにより、領域データ２２０と動作データ２３０との関連付けを行なう。

領域データ２２０と動作データ２３０との関連付けは、一つの領域データ２２０に対して複数の動作データ２３０を関連付けることができ、また、一つの動作データ２３０に複数の領域データ２２０を対応付けることができる。

次に、本発明の第１の実施形態における動画マニュアル閲覧システムの機能構成について図６のブロック図を参照して説明する。

本図に示すように、第１の実施形態における動画マニュアル閲覧システムは、制御部１００、動画再生部１１０、指示入力部１２０、領域情報処理部１３０、画像合成部１４０、画像表示部１５０とを備えて構成される。これらの機能部は、表示装置１１、入力装置１２、記憶装置１３を備えた情報処理装置１０を動画マニュアル閲覧システムとして機能させるためのコンピュータプログラム、マークアップ言語等に基づいて、情報処理装置１０上に実現される。

制御部１００は、以下に説明する機能部を制御し、動画マニュアル閲覧システムの各種処理を管理する。

動画再生部１１０は、動画マニュアル２００の閲覧者からの指示等に基づいて、動画データ２１０の再生を行なう。動画再生部１１０は、動画データ２１０の任意の時刻からの再生を行なうことができる。

指示入力部１２０は、動画マニュアル２００の閲覧者からの指示を受け付ける。動画マニュアル２００の閲覧者からの指示は、例えば、動画の再生指示等が挙げられる。これらの指示は、マウス、キーボード等の入力装置１２を介して受け付けることができる。

領域情報処理部１３０は、領域データ２２０、動作データ２３０、動作対応データ２４０を参照して、動画データ２１０に基づく動画に合成して表示するための画像を生成する。

画像合成部１４０は、動画再生部１１０が再生する動画データ２１０に基づく動画と、領域情報処理部１３０が生成する画像とを合成した動画を生成する。

画像表示部１５０は、画像合成部１４０が生成した動画を表示装置１１に表示するための処理を行なう。

上記機能構成により実現される本発明の第１の実施形態の処理について図７のフロー図を参照して説明する。

本実施形態では、動画データ２１０の再生時に、領域データ２２０で定義される領域を合成するとともに、領域データ２２０に関連付けられた動作データ２３０の動作を行なう。以下では、簡単のため、動作データ２３０で定義されている動作は、領域についての付随情報の表示とする。

本処理では、動画マニュアル閲覧者の指示等に基づいて動画再生部１１０が、動画データ２１０の再生を行ない（Ｓ１０１）、以下に示す処理を、所定の時間間隔で、動画データ２１０の再生が終了するまで繰り返す（Ｓ１０２）。

領域情報処理部１３０は、領域データ２２０を参照して、処理中の時刻において領域が定義されている領域データ２２０を抽出して、その時刻についての領域の形状と位置とを算出して、領域を示す画像、例えば、領域の輪郭の画像を生成する（Ｓ１０３）。領域データ２２０が複数抽出された場合には、それぞれの領域データ２２０について、領域の輪郭の画像を生成する。

なお、領域データ２２０は、離散的な時刻で領域が定義されているが、領域情報処理部１３０は、領域定義情報２２３で定義されている複数の時刻２２３１と領域形状２２３２とから、処理中の時刻における領域の形状と位置を補完して算出することができる。

処理中の時刻において領域が定義されている領域データ２２０を抽出すると、領域情報処理部１３０は、動作対応データ２４０を参照して、抽出された領域データ２２０に関連付けられている動作データ２３０を特定する（Ｓ１０４）。

そして、画像合成部１４０が、動画再生部１１０が再生する動画と、領域情報処理部１３０が算出した領域を示す画像と、特定した動作データ２３０で定義された付随情報とを合成した動画を生成する（Ｓ１０５）。本実施形態では、動作データ２３０で定義された付随情報は、関連付けられた領域データ２２０で定義された領域を示す画像の近辺に表示するようにする。したがって、領域が時刻とともに移動する場合には、付随情報も合わせて移動することになる。また、領域データ２２０に複数の動作データ２３０が関連付けられている場合には、それぞれの動作データ２３０で定義した動作を行なうようにする。

なお、処理中の時刻において領域が定義されていない場合には合成処理は不要であり、また、領域に関連付けられている動作データ２３０がない場合には、領域を示す画像のみを合成するようにする。

そして、このようにして合成された動画を、画像表示部１５０が表示装置１１に表示する（Ｓ１０６）。

図８は、表示装置１１の画面に表示される、説明対象物と、領域を示す輪郭と、領域についての付随情報とが合成された動画の位置例を示す図である。本図の例では、説明対象物としてＤＶＤレコーダが表示され、ＤＶＤレコーダを囲むような領域を示す輪郭と、ＤＶＤレコーダについての付随情報とが表示されている。

制御部１００は、動画データ２１０の再生終了時点、あるいは、領域を示す輪郭の表示終了時点等において、マニュアル閲覧者に対して、動画データ２１０の繰り返し再生、マニュアル閲覧の終了、他の動画データ２１０の再生等の各種指示内容を提示して、マニュアル閲覧者からの指示を受け付けるようにすることができる。

また、動画マニュアルの閲覧者は、動画再生部１１０を操作して、再生、早送り、一時停止等により、動画データ２１０の任意の場面を表示装置１１に表示させることができる。この際、領域情報処理部１３０、画像合成部１４０等により、領域データ２２０に基づく領域も合成されて表示装置１１に表示される。

次に、本発明の第２の実施形態について説明する。第１の実施形態では、領域データ２２０に関連付けられている動作データ２３０は、領域が表示されると定義されている動作を行なうようにしていた。第２の実施形態では、さらに、動作データ２３０が動作を行なう条件を考慮するようにする。

図９は、第２の実施形態における動作データ２３０のデータフォーマットの一例を示す図である。

本図に示すように、第２の実施形態における動作データ２３０は、第１の実施形態における動作データ２３０のデータフォーマットに加え、動作開始情報２３４を含んでいる。

動作開始情報２３４には、動作定義情報２３３で設定される動作を開始するための条件を設定することができる。動作開始情報２３４には、例えば、「クリック」「ポインティング」「表示」「表示の終了」等が設定される。「クリック」は、動作データ２３０に関連付けられている領域データ２２０で示される領域がクリックされた場合に動作を開始することを示し、「ポインティングは」、動作データ２３０に関連付けられている領域データ２２０で示される領域がポインティングされた場合に動作を開始することを示している。また、「表示」は、動作データ２３０に関連付けられている領域データ２２０で示される領域が表示された場合に動作を開始することを示し、「表示の終了」は、動作データ２３０に関連付けられている領域データ２２０で示される領域の表示が終了した場合に動作を開始することを示している。

さらに、動作開始情報２３４では、例えば、動作データ２３０に関連付けられている領域データ２２０で示される領域が表示されてから、５秒後に動作を開始するというような時刻の情報を含んだ設定を行なうこともできる。

なお、第２の実施形態においては、動作データ２３０以外のデータについては、第１の実施形態と同様とすることができる。また、第２の実施形態における動画マニュアル閲覧システムの機能構成についても、第１の実施形態と同様とすることができる。

本発明の第２の実施形態の処理について図１０のフロー図を参照して説明する。

本処理では、動画マニュアル閲覧者の指示等に基づいて動画再生部１１０が、動画データ２１０の再生を行ない（Ｓ２０１）、以下に示す処理を、所定の時間間隔で、動画データ２１０の再生が終了するまで繰り返す（Ｓ２０２）。

領域情報処理部１３０は、領域データ２２０を参照して、処理中の時刻において領域が定義されている領域データ２２０を抽出して、その時刻についての領域の形状と位置とを算出して、領域を示す画像、例えば、領域の輪郭の画像を生成する（Ｓ２０３）。領域データ２２０が複数抽出された場合には、それぞれの領域データ２２０について、領域の輪郭の画像を生成する。

処理中の時刻において領域が定義されている領域データ２２０を抽出すると、領域情報処理部１３０は、動作対応データ２４０を参照して、抽出された領域データ２２０に関連付けられている動作データ２３０を特定する（Ｓ２０４）。

そして、特定された動作データ２３０の動作開始情報２３４を参照して、開始のための条件が満たされているかどうかを判断する（Ｓ２０５）。例えば、動作開始情報２３４が「表示」であれば、即座に開始のための条件が満たされていると判断することができる。また、動作開始情報２３４が「クリック」「ポインティング」であれば、マウス等によりクリックあるいはポインティングされている箇所が抽出された領域データ２２０が示す領域に含まれているかどうかを調べることにより判断することができる。

ここで、マウス等によりクリックあるいはポインティングされている箇所が、抽出された領域データ２２０が示す領域に含まれているかどうかは、上述のように補完して算出することができる処理中の時刻における領域の形状および位置と、クリックあるいはポインティングされている箇所とを比較することにより判断することができる。

この結果、開始のための条件が満たされていると判断した場合には、画像合成部１４０が、動画再生部１１０が再生する動画と、領域情報処理部１３０が算出した領域を示す画像と、特定した動作データ２３０で定義された付随情報とを合成した動画を生成する（Ｓ２０６）。

一方、開始のための条件が満たされていないと判断した場合には、画像合成部１４０は、動作データ２３０で定義された付随情報は含めずに、動画再生部１１０が再生する動画と、領域情報処理部１３０が算出した領域を示す画像とを合成した動画を生成する（Ｓ２０６）。なお、処理中の時刻において領域が定義されていない場合には合成処理は不要である。

そして、このようにして合成された動画を、画像表示部１５０が表示装置１１に表示する（Ｓ２０７）。

次に、本発明の第３の実施形態について説明する。本実施形態では、領域データ２２０、動作データ２３０についてキーワード等による検索を可能とすることで、動画マニュアル２００の使用勝手を高めるようにする。

図１１は、第３の実施形態における領域データ２２０のデータフォーマットの一例を示す図である。

本図に示すように、第３の実施形態における領域データ２２０は、第２の実施形態における領域データ２２０のデータフォーマットに加え、キーワード２２４および注釈テキスト２２５を含んでいる。

キーワード２２４は、領域データ２２０が示す領域についてのキーワードであり、領域データ２２０毎に複数設定することができる。また、階層構造としてもよい。注釈テキスト２２５は、領域データ２２０が示す領域についての説明文である。キーワード２２４および注釈テキスト２２５は、動画マニュアル２００の作成者によってあらかじめ設定され、動画マニュアル２００に含められる。

図１２は、第３の実施形態における動作データ２３０のデータフォーマットの一例を示す図である。

本図に示すように、第３の実施形態における動作データ２３０は、第２の実施形態における動作データ２３０のデータフォーマットに加え、キーワード２３５および注釈テキスト２３６を含んでいる。

キーワード２３５は、動作データ２３０が定義する動作についてのキーワードであり、動作データ２３０毎に複数設定することができる。また、階層構造としてもよい。注釈テキスト２３６は、動作データ２３０が定義する動作についての説明文である。キーワード２３５および注釈テキスト２３６は、動画マニュアル２００の作成者によってあらかじめ設定され、動画マニュアル２００に含められる。

なお、第３の実施形態においては、領域データ２２０、動作データ２３０以外のデータについては、第１の実施形態と同様とすることができる。

次に、本発明の第３の実施形態における動画マニュアル閲覧システムの機能構成について図１３のブロック図を参照して説明する。

本図に示すように、第３の実施形態における動画マニュアル閲覧システムの機能構成は、第１の実施形態における機能構成に加え、検索処理部１６０を備えている。

検索処理部１６０は、指示入力部１２０を介して、動画マニュアルの閲覧者からキーワードを用いた検索指示を受け付けると、領域データ２２０、動作データ２３０から、受け付けたキーワードに対応するするデータを索出する。

本発明の第３の実施形態の処理について図１４のフロー図を参照して説明する。

本処理は、まず、動画マニュアルの閲覧者からキーワードの入力を受け付ける（Ｓ３０１）。

キーワードの入力の受け付け処理は、例えば、従来から行なわれているように、キーワード入力画面を表示装置１１に表示して、動画マニュアルの閲覧者からテキスト入力を受け付けることができる。

さらに、本実施形態では、領域データ２２０等に設定されているキーワードをリスト表示して、動画マニュアルの閲覧者からキーワードの選択を受け付けることができる。なお、キーワードの選択は、動画マニュアルの閲覧者からの指示に基づいて、検索を行なう検索モードに移行した上で受け付けるようにすることができる。

図１５は、領域データ２２０等に設定されているキーワードの選択を受け付けるための画面の一例を示す図である。ここでは、ＤＶＤレコーダを示す領域データ２２０のキーワード２２４に「ＸＸ-９９」「ＤＶＤ」「再生」「録画」というキーワードが設定されているものとする。

上述のように、動画マニュアルの閲覧者は、動画データ２１０の任意の場面を表示装置１１に表示させることができる。

この状態で、検索処理部１６０は、例えば、表示されている領域のクリックを受け付けると、本図に示すように、その領域に対応する領域データ２２０のキーワード２２４に設定されているキーワードをリスト表示する。また、付随情報が表示されている場合には、その付随情報のクリックを受け付けると、その付随情報に対応する動作データ２３０のキーワード２３５に設定されているキーワードをリスト表示する。

動画マニュアルの閲覧者は、リスト表示されているキーワードの中から、所望のキーワードを選択して入力することができる。

このキーワードの入力受け付け方法では、表示装置１１に表示されている説明対象物等に設定されているキーワードを用いて検索を行なえるため、検索に用いるキーワードがわからない場合、あるいは、表示されている説明対象物に関連する情報を検索するのに特に有効である。

動画マニュアルの閲覧者からキーワードの入力を受け付けると、検索処理部１６０は、領域データ２２０および動作データ２３０を検索して、入力を受け付けたキーワードに対応するデータを抽出する（Ｓ３０２）。ここで、本実施形態において、検索の対象は、領域データ２２０のキーワード２２４、注釈テキスト２２５、および、動作データ２３０のキーワード２３５、注釈テキスト２３６とする。すなわち、領域データ２２０および動作データ２３０について、入力されたキーワードに一致するキーワードが設定されているか、あるいは、入力されたキーワードを含む注釈テキストが設定されているを観点に検索を行なうようにする。ただし、これには限られない。例えば、動画データ２１０等の動画マニュアル２００に含まれるその他のデータにキーワード、注釈テキスト等を設定し、これらも検索対象とすることができる。

この結果、領域データ２２０および動作データ２３０のいずれも索出されなかった場合（Ｓ３０３：Ｎ）には、検索処理は終了する。この際、検索されなかったことを動画マニュアルの閲覧者に通知することが望ましい。動画マニュアルの閲覧者は、再度、別のキーワードを用いての検索が可能である。

一方、データが索出された場合（Ｓ３０３：Ｙ）には、その検索結果を表示装置１１に表示する（Ｓ３０４）。図１６は、検索結果画面の一例を示す図である。本図の例では、キーワードとして「再生」が入力された場合の検索結果を示している。

検索結果画面では、領域データ２２０が索出された場合には、動画データ２１０において、その領域が登場する場面を表示するようにする。これは、索出された領域データ２２０の領域定義情報２２３を参照することで求めることができる。例えば、索出された領域データ２２０が領域定義情報２２３で時刻Ｔ２から定義されているとすると、動画データ２１０の時刻Ｔ２における画像と、領域データ２２０のＴ２における領域とを合成した画像を生成して検索結果として表示する。

また、動作データ２３０が索出された場合には、動作対応データ２４０を参照して、その動作データ２３０に関連付けられている領域データ２２０について、その領域が登場する場面を表示するようにする。なお、索出された動作データ２３０の動作開始情報２３４で、関連付けられている領域データ２２０で示される領域が表示されてから、５秒後に動作を開始するというような設定がなされている場合には、その領域が登場してから５秒後における動画データ２１０の画像と領域データ２２０の領域とを合成した画像を生成して検索結果として表示する。

また、検索結果画面には、検索された領域データ２２０の領域名２２２および注釈テキスト２２５、あるいは、索出された動作データ２３０の動作名２３２および注釈テキスト２３６も表示するようにする。

検索処理部１６０は、検索結果画面で表示している検索結果のいずれかについて、マニュアル閲覧者からの選択を受け付けることができる（Ｓ３０５）。

いずれかの検索結果が選択されると、動画再生部１１０等は、選択された検索結果に対応する動画を再生する（Ｓ３０６）。ここで、検索結果に対応する動画の再生では、検索結果画面に表示されている動画の場面から再生を開始するようにする。すなわち、選択された検索結果が、動画データ２１０の時刻Ｔ２における画像と、領域データ２２０のＴ２における領域とを合成した画像である場合には、動画再生部１１０は、動画データ２１０を時刻Ｔ２から再生を開始し、また、領域情報処理部１３０は、領域データ２２０のＴ２からの領域画像を生成し、画像合成部１４０は、これらの画像を合成して画像表示部１５０に出力するようにする。

なお、検索の結果、索出されたデータが１件の場合には、検索結果画面で検索結果を表示することなく、索出されたデータについての検索結果の場面から動画を再生するようにしてもよい。

本発明の実施に適した動画マニュアル閲覧システムのハードウェア構成の一例を示すブロック図である。 動画データ２１０を再生した場合に画像が変化していく様子、および、領域を示す図である。 領域データ２２０のデータフォーマットの一例を示す図である。 動作データ２３０のデータフォーマットの一例を示す図である。 動作対応データ２４０の一例を示す図である。 第１の実施形態における動画マニュアル閲覧システムの機能構成を示すブロック図である。 第１の実施形態における動画マニュアル閲覧システムの処理を説明するフロー図である 表示装置１１の画面に表示される、説明対象物と、領域を示す輪郭と、領域についての付随情報とが合成された動画の位置例を示す図である。 第２の実施形態における動作データ２３０のデータフォーマットの一例を示す図である。 第２の実施形態における動画マニュアル閲覧システムの処理を説明するフロー図である。 第３の実施形態における領域データ２２０のデータフォーマットの一例を示す図である。 第３の実施形態における動作データ２３０のデータフォーマットの一例を示す図である。 第３の実施形態における動画マニュアル閲覧システムの機能構成を示すブロック図である。 第３の実施形態における動画マニュアル閲覧システムの処理を説明するフロー図である。 領域データ２２０等に設定されているキーワードの選択を受け付けるための画面の一例を示す図である。 検索結果画面の一例を示す図である。

符号の説明

１０…情報処理装置
１１…表示装置
１２…入力装置
１３…記憶装置
１００…制御部
１１０…動画再生部
１２０…指示入力部
１３０…領域情報処理部
１４０…画像合成部
１５０…画像表示部
１６０…検索処理部
２００…動画マニュアル
２１０…動画データ
２２０…領域データ
２３０…動作データ
２４０…動作対応データ

Claims (13)

1. 動画データと、
   動画データに基づく画像中の領域についてその形状と位置とを時刻に関連付けて記録した領域データと、
   前記領域データに関連付けられ、所定の動作が定義された動作データとを有する、情報処理装置で閲覧可能な動画マニュアルであって、
   前記動画データに基づく動画を再生する動画再生手段と、
   前記領域データに基づいた領域を示す動画を生成する領域情報生成手段と、
   前記動画再生手段が再生する動画と、前記領域情報生成手段が生成する動画とを合成した動画を生成する動画合成手段とを前記情報処理装置に機能させ、
   前記領域情報生成手段は、前記動作データに基づく動作を、当該動作データに関連付けられた領域データに基づく領域を示す動画の生成とともに行なうことを特徴とする動画マニュアル。
2. 請求項１に記載の動画マニュアルであって、
   前記動作データに定義された所定の動作には、関連付けられた領域データに関する付随情報の表示が含まれ、
   前記領域情報生成手段は、当該領域データに基づく領域の近傍に、前記付随情報を表示した動画を生成することを特徴とする動画マニュアル。
3. 請求項１に記載の動画マニュアルであって、
   前記動作データは、前記所定の動作を行なうための条件が記録され、
   前記領域情報生成手段は、前記条件が満たされた場合に、当該動作データに基づく動作を、当該動作データに関連付けられた領域データに基づく領域を示す動画の生成とともに行なうことを特徴とする動画マニュアル。
4. 請求項３に記載の動画マニュアルであって、
   前記動作データに記録された前記所定の動作を行なうための条件には、当該動作データに関連付けられた領域データに基づく領域についての、表示開始、表示終了、前記情報処理装置が備える入力手段による指示受け付けのいずれかが含まれることを特徴とする動画マニュアル。
5. 動画データと、
   動画データに基づく画像中の領域についてその形状と位置とを時刻に関連付けた情報および検索のための検索情報を記録した領域データとを有する、情報処理装置で閲覧可能な動画マニュアルであって、
   前記動画データに基づく動画を再生する動画再生手段と、
   前記領域データに基づいて領域を示す動画を生成する領域情報生成手段と、
   前記動画再生手段が再生する動画と、前記領域情報生成手段が生成する動画とを合成した動画を生成する動画合成手段と、
   マニュアル閲覧者から検索キーを受け付け、受け付けた検索キーを含む検索情報が記録された前記領域データを索出する検索手段とを前記情報処理装置に機能させることを特徴とする動画マニュアル。
6. 請求項５に記載の動画マニュアルであって、
   前記検索手段は、
   マニュアル閲覧者からテキスト入力により検索キーを受け付けることを特徴とする動画マニュアル。
7. 請求項５に記載の動画マニュアルであって、
   前記検索手段は、前記領域データに記録された検索のための検索情報の一部または全部を選択可能な状態で表示することでマニュアル閲覧者から検索キーを受け付けることを特徴とする動画マニュアル。
8. 請求項７に記載の動画マニュアルであって、
   前記検索手段は、前記領域データに基づく領域を示す画像について、前記情報処理装置が備える入力手段による指示を受け付けた場合に、当該領域データに記録された検索のための検索情報の一部または全部を選択可能な状態で表示することを特徴とする動画マニュアル。
9. 請求項５に記載の動画マニュアルであって、
   前記検索手段により領域データが索出された場合には、前記動画合成手段は、索出された領域データに基づく領域を示す動画の開始時刻から、前記動画再生手段が再生する動画と、前記領域情報生成手段が生成する動画とを合成した動画を生成することを特徴とする動画マニュアル。
10. 請求項９に記載の動画マニュアルであって、
    前記検索手段は、複数の領域データを索出した場合には、索出されたそれぞれの領域データに基づく領域を示す動画の開始時刻における前記動画データに基づく画像を選択可能な状態で表示することを特徴とする動画マニュアル。
11. 請求項１０に記載の動画マニュアルであって、
    前記動画合成手段は、選択された画像に対応する領域データに基づく領域を示す動画の開始時刻から、前記動画再生手段が再生する動画と、前記領域情報生成手段が生成する動画とを合成した動画を生成することを特徴とする動画マニュアル。
12. 請求項５に記載の動画マニュアルであって、
    前記領域データに関連付けられ、所定の動作が定義された動作データをさらに備え、
    前記領域情報生成手段は、前記動作データに基づく動作を、当該動作データに関連付けられた領域データに基づく領域を示す動画の生成とともに行なうことを特徴とする動画マニュアル。
13. 請求項１２に記載の動画マニュアルであって、
    前記動作データは、さらに、検索のための検索情報を記録しており、
    前記検索手段は、マニュアル閲覧者から検索キーを受け付けると、さらに、受け付けた検索キーを含む検索情報が記録された前記動作データを索出することを特徴とする動画マニュアル。

Images