JP2007059961A - 再生方法及び再生装置 - Google Patents

Abstract

【課題】 従来は、動画と静止画が混在する画像信号を高速再生する際に、音声を再生出力することは行われていない。
【解決手段】 記録媒体に記録されている静止画を記録再生部１４が、通常再生速度のｎ倍（ｎは１より大なる任意の数）の高速再生をする場合、記録媒体から再生された静止画は通常再生時の表示時間の１／ｎ倍の時間で再生すると共に、マイクロプロセッサ１７の制御によりデジタル音源２１から通常再生時の１／ｎ倍のテンポの静止画用音声信号（例えば、ＢＧＭ）を出力させる。これにより、静止画の高速再生時にも音声信号が出力されると共に、その音声信号のテンポにより高速再生であることがユーザに識別させることができる。
【選択図】 図１

Description

本発明は再生方法及び再生装置に係り、特に動画と静止画が混在する画像信号を高速再生する際に音声を出力する再生方法及び再生装置に関する。

以前より、記録媒体にファイルとして保存されている静止画を再生し、数秒間といった設定した時間間隔のコマ送りで自動的に切り換えて表示する「スライドショー」の機能は、デジタルカメラやパーソナルコンピュータ用の画像表示ソフトウェアにおいて一般的に行われている。

デジタルカメラにおいて、近年、動画撮影機能を有するものも多く、それらの中においては、動画と静止画のファイルが混在するときには、上記スライドショー機能において、動画ファイルについては動画像を再生し、静止画ファイルについては設定した時間その静止画を表示することで順次ファイルの内容を表示していくものもある。

また、ビデオテープレコーダやビデオディスクレコーダにおいては、動画像の高速再生機能は広く実施されている。その高速再生時には、特に１.５倍速等、倍速数があまり大きくない場合には、高速再生に合わせて動画に付随した音声も高速で出力するが、その際に音声のピッチは変えずに速度だけが速くなる様、変換処理して再生する技術も使用されている。

更に、動画区間と静止画区間とが混在した光ディスクを再生する際に、通常再生時には静止画区間における複数枚の静止画を、例えば、１０秒毎に切り換える表示を行う場合、Ｎ倍速の高速再生時には１０／Ｎ秒毎に静止画を切り換える表示を行い、音有り静止画の場合は、動画の特殊再生動作を合わせるため、音無し静止画として再生する再生装置が従来から知られている（例えば、特許文献１参照）。

特開２００２−０８４５０８号公報

しかし、上記スライドショー機能においては、画像を送る速度は予めユーザーが設定しておくのが一般的で、再生している最中の飛ばしたい部分を高速再生で早く先に進めるといったことは行われていなかったため、高速再生時の音声の扱いについても考えられていなかった。

また、特許文献１記載の従来の再生装置においては、音有り静止画を高速再生する場合は、動画の特殊再生では音声が出ないのに、静止画に入った途端、音声が再生されるという状況を防ぐために、音無し静止画として再生するようにしている。従って、以上より、従来の再生方法及び再生装置では、動画と静止画が混在する画像信号を高速再生する際に、音声を再生出力することは行われていない。

本発明は以上の点に鑑みなされたもので、動画に挿入して静止画を設定された時間表示するような一続きの再生において、高速再生を行ったときに、静止画部分についてもユーザーにとって高速再生を行っていることがわかりやすく認識できる様な音声を出力し得る画像再生方法及び画像再生装置を提供することを目的とする。

上記の目的を達成するため、本発明の再生方法は、動画像が音声信号と共に記録されると共に、静止画が記録された記録媒体から、任意の速度で動画像及び音声信号と静止画とを順次に再生する再生方法であり、通常再生するときは、動画像及び音声信号を通常速度で再生し、静止画は予め設定された期間、再生した静止画を表示すると共に予め定めたテンポの静止画用音声信号を出力する再生方法であって、
ｎ倍（ｎは１より大なる任意の数）の高速再生指示を行う第１のステップと、高速再生指示があったときは、記録媒体から動画像及び音声信号を通常速度のｎ倍の速度で再生し、記録媒体から静止画を再生して設定された期間の１／ｎ倍の期間表示すると共に、静止画用音声信号を予め定めたテンポのｎ倍のテンポで出力する第２のステップとを含むことを特徴とする。

また、上記の目的を達成するため、本発明の再生装置は、動画像が音声信号と共に記録されると共に、静止画が記録された記録媒体から、任意の速度で動画像及び音声信号と静止画とを順次に再生する再生装置であって、
再生速度を指示入力する再生速度指示手段と、静止画再生時に出力される静止画用音声信号を発生する音源と、再生速度指示手段により、通常速度再生を指示されたときは、記録媒体から動画像を通常速度で音声信号と共に再生し、記録媒体から静止画を再生して予め設定された期間表示すると共に、音源から静止画用音声信号を予め設定された通常再生時のテンポで出力させる通常再生手段と、再生速度指示手段により、ｎ倍（ｎは１より大なる任意の数）の高速再生を指示されたときは、記録媒体から動画像及び音声信号を通常速度のｎ倍の速度で再生し、記録媒体から静止画を再生して設定された期間の１／ｎ倍の期間表示すると共に、音源を制御して音源から静止画用音声信号を通常再生時のｎ倍のテンポで出力させる高速再生手段とを有することを特徴とする。

本発明の再生方法及び再生装置では、静止画を通常再生時のｎ倍の速度で再生する高速再生時には、静止画を再生して、通常再生時の表示期間の１／ｎ倍の期間表示すると共に、音源を制御して音源から静止画用音声信号を通常再生時のｎ倍のテンポで出力させるようにしたため、静止画の高速再生速度の倍率に応じたテンポで、静止画と共に音声を出力させることができる。

本発明によれば、静止画の高速再生速度の倍率に応じたテンポで、静止画と共に音声を出力させるようにしたため、静止画表示期間においても高速再生であることがユーザに認識でき、違和感が少ないという効果を得ることができ、また出力される音声のテンポで高速再生速度の倍率をある程度ユーザに認識させることができる。

次に、本発明の一実施の形態について図面と共に説明する。図１は本発明になる再生装置の一実施の形態のブロック図を示す。同図において、この実施の形態は、再生機能と記録機能の両方を有する記録再生装置であり、外部装置やこの記録再生装置に内蔵したカメラ部やマイクロホン（いずれも図示せず）から入来した画像信号及び音声信号が、それぞれ画像入力端子１１及び音声入力端子１２を介してコーデック部（ＣＯＤＥＣ）１３に供給される。

コーデック部１３において、画像信号及び音声信号は、高能率符号化処理や誤り訂正符号付加が行われた上、記録に適したフォーマットに整えられて、記録再生部１４へと供給され、公知の方法で記録媒体に記録される。これにより、記録媒体には動画像が音声信号と共に記録されると共に、静止画が記録される。記録媒体としては、ＤＶＤ（Digital Versatile Disc）等のリムーバブルディスクメディア、ハードディスク等の内蔵メディア、或いは半導体メモリカード等を用いればよい。ここで、本装置がカメラ一体型記録再生装置であれば、動画と静止画を場合に応じて撮影して記録していくことができ、それらを後述するように、動画と静止画を撮影順に繋げて再生することは便利である。

再生時においては、記録再生部１４により記録媒体から再生された映像信号及び音声信号は、コーデック部１３において記録のためのフォーマット化が解かれ、誤り訂正処理や高能率符号化のデコードが行われた後、再生された映像信号は映像出力部１５へ供給され、再生された音声信号はスイッチＳＷの可動端子１とピッチ変換部２０に供給される。ここで、スイッチＳＷは、切換機能を模式的に書いたものであるが、動画の通常再生時には可動端子１に接続され、動画の高速再生時には可動端子２に接続され、静止画再生時には、スイッチＳＷは可動端子３に接続される。従って、動画の通常再生時には、再生音声信号はスイッチＳＷを介してオーディオ出力部１６へ供給される。

ここで、アナログ信号として出力する場合には、映像出力部１５ではＮＴＳＣ方式等のアナログ映像信号方式への変換や、ＤＡ変換が行われ、オーディオ出力部１６ではＬチャンネル及びＲチャンネルについてそれぞれＤＡ変換されたアナログオーディオ信号が作成される。デジタル出力の場合には、画像信号と音声信号は別に出力するのではなくパケット化して多重化して出力したり、或いは映像信号は記録時にＭＰＥＧ（Moving Picture Experts Group）方式で圧縮されているのをデコードしないでＭＰＥＧ信号として出力したり、出力の方法は場合に応じて変形すればよい。

記録再生装置の各部は、マイクロプロセッサ１７と互いにバスで繋がっており、このマイクロプロセッサ１７により制御される。また、ユーザが操作を行うためのボタン等の操作部１８があり、ユーザはこの操作部１８を介して高速再生や通常再生の指令をマイクロプロセッサ１７に送ることで、所望の動作をさせることができる。設定された各種パラメータ等、制御に用いるデータは、メモリ１９に蓄積され、マイクロプロセッサ１７により適宜参照されて利用される。

マイクロプロセッサ１７は操作部１８からのユーザの指示する任意の再生速度に基づいて、メモリ１９に保存されているプログラムを実行し、記録再生部１４を指示された再生速度で記録媒体から映像信号及び音声信号を再生させる。上記の再生速度としては、記録時と同一速度である通常再生、記録時よりも高速の高速再生（例えば、１.５倍速、２倍速、３倍速）がある。

次に、本実施の形態における再生時の音声信号の処理法方法について説明する。記録媒体に動画像信号と共に記録されている動画像に付随した音声信号については、高速再生時には動画像信号の再生の進行に合わせて音声信号も高速で再生出力されるが、そのまま単に音の出力のスピードを上げたのでは音のピッチが高くなってしまうので、聞きづらくなる。そこで、本実施の形態では、コーデック部１３から出力された高速再生音声信号がピッチ変換部２０でピッチ変換されて音の高さ（音程）は通常再生時とほぼ変わらない様にされた後、可動端子２に接続されているスイッチＳＷを介してオーディオ出力部１６へ供給される。なお、ピッチ変換については既に多くの記録再生装置において実施されている公知の技術であるので、その詳細な説明は省略する。

また、静止画を再生する場合には、記録フォーマット上で静止画に付随する音声が定義されていてユーザが静止画に音声を付加することができる場合もあるが、本実施の形態では、この様な形で静止画には特定の静止画について音声は指定されていないものとする。静止画を表示する場合は無音とすることも考えられるが、それでは動画と静止画を混在させて再生するときには静止画を表示する所で急に音声が無くなり、再生の楽しさを損なうため、本実施の形態では、マイクロプロセッサ１７が静止画再生時にデジタル音源２１を駆動し、デジタル音源２１で合成されたＢＧＭ（バックグラウンドミュージック）の音声信号を、可動端子３に接続されているスイッチＳＷを介してオーディオ出力部１６へ供給させる。

デジタル音源２１としては、例えば携帯電話においてユーザが着信音を自由に作成することができるものが普及している。これは音の高さや長さの情報を一音ずつユーザが入力していくことで、いわば楽譜の情報を入力し、「四分音符＝８４」（四分音符の長さは１分間に８４拍の長さであることを示す）といったテンポ情報を入力して、このテンポで音を発生するものである。楽譜の情報はユーザが入力したものでなくても、携帯電話のメーカーで予め設定してメモリに蓄積しておいてもよい。本実施の形態においてもこれと同様の音源を用いることができ、デジタル音源２１から発生する楽曲のテンポは、通常再生か高速再生か、さらには高速再生の倍速数に応じて図１に示すように適宜設定される。

ここで、動画と静止画を時系列的に混在させて再生する例を図２に示す。例えば、カメラ一体型記録装置においては、動画は記録開始から記録停止までが一つのファイルとして記録媒体に記録され、静止画は静止画ファイルとして記録される。そして、どのファイルをどの順で再生するかは、プレイリストを作成することにより設定できる。ここで、記録媒体に記録されているファイルを、ある範囲で時間順に再生するプレイリストを自動的に作成する様にしてもよく、ユーザがファイルとその再生順を指定してプレイリストを作成する機能を設けてもよい。

いま、通常再生において図２（Ａ）に模式的に示す様に、動画カット００１、静止画００１、動画カット００２、静止画００２、静止画００３、動画カット００３の順で再生されるとする。ここで、横軸は時間を表し、動画についてはそのファイルを再生する時間を、静止画については一枚の静止画を表示し続ける時間を表している。静止画については、各静止画を例えば１０秒といった予め設定された時間の間表示することとしている。先に述べたデジタル音源２１によるＢＧＭは、静止画の表示時間で曲の中の区切りが現れるような楽曲とすることにより、静止画から動画へ移る際に曲の途中で突然切られる不自然さを防ぐことができる。

いま、この様な一続きの画像再生を２倍速の高速再生で再生するものとすると、図２（Ｂ）に示す様に、動画カット００１、同００２、同００３の動画部分は２倍速で再生されるため、各々の再生時間は同図（Ａ）の半分となる。一方、静止画についてもそれに合わせて、例えば通常再生で１０秒間表示していたとすると、２倍速ではその１／２の５秒間という様に、表示時間を短くして、静止画を含めた全体の再生時間が通常再生の１／２になる様にする。

ここで、静止画表示時のＢＧＭは、通常再生時が「四分音符＝８４」のテンポであったとすると、２倍速再生ではテンポを「四分音符＝１６８」として、２倍の速さで再生する様にする。一般に、通常再生時の一つの静止画の表示時間をｓとすると、ｍ倍速再生においては、静止画の表示時間はｓ／ｍとし、通常再生時の静止画のＢＧＭのテンポを「四分音符＝ｋ」とすると、ｍ倍速再生においては静止画のＢＧＭのテンポは「四分音符＝ｋ×ｍ」とする。これは、ユーザによりｍ倍速再生が操作部１８から指示されたのを受けて、マイクロプロセッサ１７がデジタル音源２１のテンポ設定を変更することにより行われる。

色々な倍速再生におけるテンポの一例を、図１のデジタル音源２１の右下の方に示す。この様に、高速再生に応じてＢＧＭのテンポを変えることにより、ユーザに静止画表示の期間においても高速再生であることを明確に知らせることができ、静止画表示の時間を短くするのに合わせてＢＧＭのテンポを速くした結果、高速再生においても曲の区切りが表示時間と一致するので、突然曲が中断する違和感を高速再生においても防ぐことができる。

次に、本発明になる再生方法の一実施の形態について説明する。図３は本発明になる再生方法の一実施の形態のフローチャートを示す。この例は、通常再生を行っている際の途中で高速再生の指示が行われた場合である。また、静止画表示中に高速再生指示が行われた例を、横軸を時間軸として表示時間を表した概略図を図４に示す。マイクロコンピュータ１７は操作部１８から高速再生指示が行われたときには、まず、今記録再生部１４が再生している記録媒体上の個所が静止画部分か否かを判定する（図３のステップＳ１）。

静止画再生中であれば、その静止画の表示終了時刻を再設定し（図３のステップＳ２）、先に述べた様にＢＧＭのテンポを再設定する（図３のステップＳ３）。ここで、静止画表示中に高速再生指示が行われたときには、この静止画の残りの表示時間を短縮して次の画像の表示へと移るがその詳細については後に述べる。このことに関連して、ステップＳ２においては、この静止画の表示の終了を、本装置に内蔵の時計での時刻でいつにするかを再設定することにより、静止画表示時間の短縮を行う。そして、静止画を表示しＢＧＭを流す（ステップＳ４）。

続いて、マイクロプロセッサ１７は、静止画表示期間が再設定した表示終了時刻に達したか否かを判定し（図３のステップＳ５）、まだ達していない場合にはステップＳ４に戻って静止画を表示し続けＢＧＭを流し続ける。もし達した場合には、この静止画の表示をやめ、その静止画ファイルがプレイリストの最後のファイルであるか否かを判定する（図３のステップＳ６）。最後のファイルである場合には再生を終了し、最後のファイルでない場合には次のファイルの再生へと移行する。

ここで、次のファイルの再生は、高速再生の中止指示が行われない限り、高速再生で行われる。ステップＳ１で記録再生部１４が再生している記録媒体上の個所が静止画部分でないと判定されたときには、マイクロプロセッサ１７が動画を再生していると判断し、その現在再生中の動画部分の高速再生を行う（図３のステップＳ７）。そして、その動画ファイルの再生が終わったか否かを判定し（図３のステップＳ８）、まだ終わっていない場合にはステップＳ７に戻って、動画部分の高速再生を継続し、終わった場合にはステップＳ６へと移行し、その動画ファイルが最後のファイルか否かを判定する。そして、最後のファイルである場合には再生を終了し、最後のファイルでない場合には次のファイルの再生へと移行する。

図４を例に説明すると、同図（Ａ）に模式的に示すように、通常再生では動画カット００２、静止画００２、静止画００３、動画カット００３と続く再生シーケンスの部分について、静止画００２の表示の途中で２倍速再生指示があったとする。この場合の再生動作は、図４（Ｂ）に模式的に示すように、２倍速再生指示が行われた時点ｔ４までは、動画カット００２の通常再生に続いて静止画００２の通常再生が行われている。

この静止画００２の通常再生の途中の時点ｔ４で２倍速再生が指示されると、本実施の形態では、静止画００２の通常再生の表示が本来終了するはずの時点ｔ２より前の、時点ｔ５で静止画００２の表示を止める。このｔ５は、ｔ４からｔ２までの時間の１／２の時間がｔ４から経過した時間に設定される。ｔ４からｔ５までの期間においては、ＢＧＭのテンポは通常再生時の２倍の速度とされる。

そして、次に表示する静止画００３は、通常再生では図４（Ａ）に示すようにｔ２からｔ３までの時間Ｔの間表示されるはずであったが、２倍速再生が指示されているので、同図（Ｂ）に示すように、その１／２の時間である、ｔ５からｔ６までの時間Ｔ／２で静止画００３の表示を行う。ｔ５からｔ６までの時間Ｔ／２においては、ＢＧＭのテンポは通常再生の２倍の速度とされる。静止画００３の表示後、時点ｔ６からは動画カット００３の２倍速再生画像の表示が開始される。

以上は２倍速再生指示の場合の例であったが、より一般的な再生動作について図５を用いて説明する。図５において、横軸は時間で、同図（Ａ１）は通常再生で一つの静止画を表示する期間ｓを表し、その最初からｔａだけ経過した時点でｍ倍速再生指示が行われたとき、通常再生を続けるとすると、残りの表示時間はｓ−ｔａだけ残っていることを示している。ところが、上向き三角印で示す時点でｍ倍速再生指示が行われたので、同図（Ｂ１）に示す様に、その後のこの静止画の表示期間は通常再生では残りｓ−ｔａであったのが、１／ｍに短縮されて（ｓーｔａ）／ｍの時間表示される。ｍ倍速再生指示以降は、ＢＧＭ音声は通常再生時のｍ倍のテンポで再生される。

次に、図５（２）を用いて、ｍ倍速再生を行っているときにおいて静止画表示の途中で通常再生指示が行われたときの動作を説明する。図５（Ａ２）は、ｍ倍速再生を続けるとすると、この静止画の表示はｓ／ｍの長さの期間だけ行われることを示している。ここで、その最初からｔｂだけ経過した時点で通常再生指示が行われたとしたとき、そのままｍ倍速再生を続けると、残りの表示時間は（ｓ／ｍ）−ｔｂであることを示している。

ところが、上向き三角印で示す時点で通常再生指示が行われたので、図５（Ｂ２）に示す様に、この後の静止画の表示期間はｍ倍速再生では（ｓ／ｍ）−ｔｂであったのが、ｍ倍とされて再生される。即ち、残りの表示時間はｓ−ｔｂ・ｍとなる。通常再生指示以降は、それまでのｍ倍速再生ではＢＧＭ音声は通常再生のｍ倍のテンポで再生されていたのが、その１／ｍ倍の通常再生のテンポで再生される。この様にすることにより、この静止画の表示期間で再生されるＢＧＭ音声は、通常再生時に期間ｓで発音出力されるのと同じ区切り分となるため、通常再生時においてｓの期間で曲の区切りが再生される様に曲を作っておけば、途中で高速再生を行っても画像表示の区切りとい音の区切りを合わせることができる。

図３は通常再生から高速再生へと移行するときのフローチャートであったが、高速再生から通常再生へと移行するときもこれに準じたフローチャートで処理を行えばよい。即ち、図３のステップＳ２、ステップＳ３においては、表示終了時刻やテンポの設定を、上記で図５（Ａ２）、（Ｂ２）と共に説明した様にすればよく、ステップＳ７は「動画を通常速度で再生」とすればよい。

なお、上記の実施の形態では、再生装置はカメラ一体型記録再生装置の様なハードウエア装置として説明したが、本発明は汎用のパーソナルコンピュータにおいてハードディスク等に保存した画像ファイルをプレイリストに基づいて、図５と共に説明したような再生を行わせるコンピュータプログラムも包含するものである。上記のコンピュータプログラムは、記録媒体に記録されていて記録媒体からコンピュータに取り込まれてもよいし、通信ネットワークを介して配信されてコンピュータにダウンロードされるようにしてもよく、更にはコンピュータにファームウェアとして組み込まれていてもよい。

本発明は、動画と静止画を再生可能な再生装置であれば、カメラ一体型記録再生装置の様な携帯型画像再生装置、家庭内で用いるＤＶＤプレーヤの様な据置型オーディオビジュアル装置、パーソナルコンピュータで用いられる画像再生ソフトウェアなど、幅広く適用できる。

本発明装置の一実施の形態のブロック図である。 動画と静止画を時系列的に混在させて再生する例を示す図である。 本発明方法の一実施の形態のフローチャートである。 本発明において静止画表示中に高速再生指示が行われたときの動作を説明するための、横軸を時間軸として表示時間を表した概略図である。 本発明における通常再生の途中で高速再生指示が行われたとき、又はその逆の指示が行われたときの動作説明用概略図である。

符号の説明

１１ 映像信号入力端子
１２ 音声信号入力端子
１３ コーデック部（ＣＯＤＥＣ）
１４ 記録再生部
１５ 映像出力部
１６ オーディオ出力部
１７ マイクロプロセッサ
１８ 操作部
１９ メモリ
２０ ピッチ変換部
２１ デジタル音源
ＳＷ スイッチ

Claims (2)

1. 動画像が音声信号と共に記録されると共に、静止画が記録された記録媒体から、任意の速度で前記動画像及び音声信号と前記静止画とを順次に再生する再生方法であり、通常再生するときは、前記動画像及び音声信号を通常速度で再生し、前記静止画は予め設定された期間、再生した静止画を表示すると共に予め定めたテンポの静止画用音声信号を出力する再生方法であって、
   ｎ倍（ｎは１より大なる任意の数）の高速再生指示を行う第１のステップと、
   前記高速再生指示があったときは、前記記録媒体から前記動画像及び音声信号を前記通常速度のｎ倍の速度で再生し、前記記録媒体から前記静止画を再生して前記設定された期間の１／ｎ倍の期間表示すると共に、前記静止画用音声信号を前記予め定めたテンポのｎ倍のテンポで出力する第２のステップと
   を含むことを特徴とする再生方法。
2. 動画像が音声信号と共に記録されると共に、静止画が記録された記録媒体から、任意の速度で前記動画像及び音声信号と前記静止画とを順次に再生する再生装置であって、
   再生速度を指示入力する再生速度指示手段と、
   静止画再生時に出力される静止画用音声信号を発生する音源と、
   前記再生速度指示手段により、通常速度再生を指示されたときは、前記記録媒体から前記動画像を通常速度で前記音声信号と共に再生し、前記記録媒体から前記静止画を再生して予め設定された期間表示すると共に、前記音源から前記静止画用音声信号を予め設定された通常再生時のテンポで出力させる通常再生手段と、
   前記再生速度指示手段により、ｎ倍（ｎは１より大なる任意の数）の高速再生を指示されたときは、前記記録媒体から前記動画像及び音声信号を前記通常速度のｎ倍の速度で再生し、前記記録媒体から前記静止画を再生して前記設定された期間の１／ｎ倍の期間表示すると共に、前記音源を制御して前記音源から前記静止画用音声信号を前記通常再生時のｎ倍のテンポで出力させる高速再生手段と
   を有することを特徴とする再生装置。
   
   

Images