JP4472213B2 - データ記録再生装置 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明はデータ記録再生装置に関し、より詳細には、撮像機能を備えたデータ記録再生装置に関するものである。
【０００２】
【従来の技術】
近年、音声信号をデジタルデータに変換した後、書換え可能な記憶媒体としてのフラッシュメモリに記憶し、該フラッシュメモリに記憶された音声データをアナログ化して再生する、携帯型の音声記録再生装置（以下、ＩＣレコーダと記す）が実用化されている。そして、これらＩＣレコーダの特徴として、所定の操作スイッチを操作することにより、録音、再生早送り及び早戻し等の各動作モードを選択的に機能させることができる。
【０００３】
例えば、録音動作の場合は、予め上記フラッシュメモリに設けられた音声データ領域及びインデックス情報領域に、デジタル信号に変換された音声データ、及び該音声データに関するインデックス情報（音声データのアドレス、録音日時等）が記憶されるようになっている。
【０００４】
一方、画像のみならず、音声も記録することのできる電子スチルカメラが実用化されている。
【０００５】
ところで、この種の電子スチルカメラに於いては、あくまで主たる記録要素は画像データであるため、限られた記憶容量の中で音声データに多くを割り当てることは難しい。具体的には、音声記録時間として考えると、１つの画像に対して数十秒程度とかなり短いものである。
【０００６】
そこで、この問題を解消するために、例えば、特開平６−２２２５８号公報の発明では、画像用の記録媒体とは別に音声専用の記録媒体を設けることにより、長時間の音声記録を可能とした技術が開示されている。また、当該特開平６−２２２５８号公報の発明では、画像を再生する際、この画像に対応する音声を瞬時に再生するために、音声記録を各画像の記録開始時点の絶対時間に対応付けるようにした技術が開示されている。
【０００７】
【発明が解決しようとする課題】
しかしながら、音声記録を主目的とした場合、例えば、インタビュー等では、複数の口述者の口述内容を長時間に渡って記録することがしばしば起こる。すなわち、実際の画像記録よりも音声記録の時間がオーバーし易くなる。
【０００８】
また、画像記録時の主要被写体が口述者であると考えれば、口述者が喋り始める時点または口述途上の画像のみを、しかも口述者が識別できる程度の解像度で撮影して記録できればよい。したがって、画像記録が主目的の電子スチルカメラを用いて音声記録を行うのは、機能的にも無駄が多く好ましいものではない。
【０００９】
更に、インタビューのような、口述者と対峙する場面に於いては、口述者が変わる毎にいちいちカメラを構えて撮影しなければならないので、上述した電子スチルカメラでは非常に使い勝手が悪いものであった。
【００１０】
したがって本発明は、上記課題に鑑みてなされたものであり、再生時に於いて口述内容を容易に確認することができるデータ記録再生装置を提供することを目的とする。
【００１１】
【課題を解決するための手段】
すなわち本発明は、音声データを記録媒体に記録する音声データ記録手段と、上記音声データの記録中に、画像データの撮像を行う撮像手段と、上記撮像が行われたときの上記音声データの位置情報に関連付けて、上記画像データを上記記録媒体に記録する画像記録手段と、該データ記録装置の動作状況を表示する表示手段と、上記音声データの再生中に上記音声データの再生位置が、上記画像データの関連付けられた位置となった場合には、上記位置に関連付けられた上記画像データを表示し、上記音声データ再生中で上記画像データの表示の停止を判定した場合は、上記音声データの再生状況を示す文字情報を含む表示を行う表示制御手段と、を具備することを特徴とする。
【００１３】
本発明のデータ記録再生装置にあっては、音声データ記録手段によって音声データが記録媒体に記録され、上記音声データの記録中に撮像手段により画像データの撮像が行われる。そして、上記撮像が行われたときの上記音声データの位置情報に関連付けて、上記画像データが画像記録手段によって上記記録媒体に記録される。該データ記録装置の動作状況は、表示手段で表示される。そして、上記音声データの再生中に上記音声データの再生位置が、上記画像データの関連付けられた位置となった場合には、上記位置に関連付けられた上記画像データが表示制御手段によって表示され、上記音声データ再生中で上記画像データの表示の停止を判定した場合は、上記音声データの再生状況を示す文字情報を含む表示が表示制御手段によって行われる。
【００１５】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
【００１６】
図１は、本発明のデータ記録再生装置の一実施の形態の概略構成を示したブロック図である。
【００１７】
図１に示されるように、本実施形態のデータ記録再生装置は、入力される信号を所定の符号化フォーマットのデータに符号化する符号化部１と、この符号化されたデータを記憶する記憶部２と、再生時に上記記憶部２から読出されたデータを所定の復号化フォーマットに従って復号化する復号化部３と、上記復号化された音声信号を音声として再生する音声再生部４と、を有している。
【００１８】
このデータ記録再生装置は、更に、複数の操作スイッチが設けられたスイッチ（ＳＷ）操作部６と、録音時に上記スイッチ操作部６のスイッチ操作により量子化された画像信号を選択的に上記符号化部１に入力する第１選択部５と、上記復号化された画像信号を画像として再生する画像再生部８と、上記音声データの記録経過時間に関連付けられた画像データのみを選択的に上記画像再生部８に入力する第２選択部７と、を有して成る。
【００１９】
また、本データ記録再生装置は、音声データを記憶する音声データ記憶領域と、画像データを記憶するときにのみ設けられる画像データ記憶領域と、更に上記各々の記憶領域に関するインデックス情報を記憶するインデックス記憶領域とが、上記記憶部２に設けられる。
【００２０】
更に、このデータ記録再生装置の外観上の特徴として、マイク配設面に画像撮影用の撮像レンズが設けられる（図示せず）。
【００２１】
このような構成に於いて、量子化された音声信号及び画像信号が、符号化部１にて所定の符号化フォーマットの音声データ及び画像データに符号化される。そして、上記音声データ及び上記音声データの記録経過時間に関連付けられた画像データは、それぞれ記憶部２に記憶される。
【００２２】
ここで、再生時には、上記記憶部２から読出された音声データ及び画像データのそれぞれが、復号化部３にて所定の復号化フォーマットに従って音声信号及び画像信号に復号化される。この復号化された音声信号は、音声再生部４より音声として再生される。また、上記音声データの記録経過時間に関連付けられた画像データのみが、第２選択部７によって画像再生部８に入力され、復号化された画像信号が画像として再生される。
【００２３】
更に、録音時は、スイッチ操作部６の特定のスイッチが操作されることにより、量子化された画像信号が第１選択部５により選択的に符号化部１に入力される。
【００２４】
次に、本実施の形態のデータ記録再生装置の、具体的な構成について説明する。
【００２５】
図２は、本発明の一実施の形態であるＩＣレコーダのブロック構成を示した図である。
【００２６】
図２に於いて、このＩＣレコーダは、画像を電気信号に変換する撮像素子（ＣＣＤ）１１と、音声を電気信号に変換するマイクロフォン（ＭＩＣ）１２と、画像入力部１３と、音声入力部１４とを有して構成される。
【００２７】
上記画像入力部１３は、撮像素子（ＣＣＤ）１１からの画像データが入力されるもので、図示されないアイリス、ゲイン、ホワイトバランス等の各制御回路、及びＡ／Ｄ変換器により構成されている。撮像素子（ＣＣＤ）１１から出力された各画素信号は、この画像入力部１３によりデジタル信号に変換される。
【００２８】
同様に、音声入力部１４は、上記マイクロフォン（ＭＩＣ）１２からの音声が入力されるもので、図示されないマイクアンプ、ローパスフィルタ、及びＡ／Ｄ変換器で構成されている。マイクアンプで増幅されたアナログの音声信号は、ローパスフィルタで不要な周波数帯域がカットされた後、Ａ／Ｄ変換器でデジタル信号に変換される。
【００２９】
上記画像及び音声の各デジタル信号は、デジタル信号処理部（ＤＳＰ）１５に入力される。このデジタル信号処理部（ＤＳＰ）１５は、録音時にはシステム制御部２１に制御されて上記各デジタル信号をフレーム単位で所定の符号化フォーマットの音声データ及び画像データに符号化（圧縮）する。符号化された各データは、一時的にシステム制御部２１の図示されないバッファメモリに記憶される。
【００３０】
一方、再生時の上記デジタル信号処理部（ＤＳＰ）１５は、システム制御部２１によっ制御されて、このシステム制御部２１の図示されないバッファメモリから音声データ及び画像データがフレーム単位で復号化（伸長）される処理が行われる。
【００３１】
そして、復号化された画像のデジタル信号は、画像再生部１７に入力される。この画像再生部１７は、図示されないビデオ制御回路及びＤ／Ａ変換器で構成されている。上記画像再生部１７によりアナログ信号に変換された画像信号は、例えばＴＦＴ−ＬＣＤ等で構成された画像表示部１８に画像として表示される。
【００３２】
同様に、復号化された音声のデジタル信号は、音声再生部１９に入力される。音声再生部１９は、図示されないＤ／Ａ変換器、ローパスフィルタ、及びパワーアンプで構成されている。上記Ｄ／Ａ変換器でアナログ信号に変換された音声信号は、ローパスフィルタで不要な周波数帯域がカットされた後、パワーアンプにより増幅される。そして、スピーカ（ＳＰ）２０から音声として出力される。
【００３３】
上記システム制御部２１はＣＰＵで構成されており、上記デジタル信号処理部１５以外に、表示部２３、記憶部（メモリ）２４及び操作部２５が接続されている。
【００３４】
上記記憶部（メモリ）２４は、不揮発性の半導体メモリ、例えばフラッシュメモリ等で構成されている。録音時は、上記デジタル信号処理部１５で符号化された音声データ及び画像データを、上記システム制御部２１の図示されないバッファメモリを介して記憶する。このとき、音声データ及び画像データに関するインデックス情報も記憶する。
【００３５】
操作部２５は、何れも図示されないが、録音スイッチ（ＲＥＣ）、再生スイッチ（ＰＬＡＹ）、停止スイッチ（ＳＴＯＰ）、早送りスイッチ（ＦＦ）、早戻しスイッチ（ＲＥＷ）、メニュースイッチ（ＭＥＮＵ）及びホールドスイッチ（ＨＯＬＤ）等の各種スイッチが機能別に配設されている。
【００３６】
上記表示部２３は、上記操作部２５の何れかのスイッチ操作により、所定のシーケンスが開始されたときの動作モード、またはその後の動作状況を表示するものである。例えば、録音スイッチ（ＲＥＣ）が押された場合は、録音の経過時間、録音可能な残り時間及びファイルナンバー等が表示される。また、メニュースイッチ（ＭＥＮＵ）が押された場合は、マイク感度（高／低）、録音モード（標準／ロング）及びアラーム（オン／オフ）等の機能選択に関連した表示が行われる。
【００３７】
更に、上記システム制御部２１が時計機能を有しているときは、現在日時の表示も行われる。これらの表示内容は、上記画像表示部１８に表示されるようにしてもよい。
【００３８】
次に、このように構成されたＩＣレコーダの動作について説明する。
【００３９】
図３は、本実施の形態のＩＣレコーダのメイン動作を説明するフローチャートである。
【００４０】
このＩＣレコーダのパワーがオンされると、先ず、ステップＳ１にて、システム制御部２１により所定の初期設定が行われ、次いでステップＳ２にて図示されないタイマがスタートされる。このタイマは、所定時間経過後にＩＣレコーダが通常の動作モードから待機モード（低消費電流モード）に入るための時間を計時するためのものである。
【００４１】
ＩＣレコーダが動作モードに入ると、ステップＳ３〜Ｓ９のスイッチ検出動作により、録音スイッチ（ＲＥＣ）、再生スイッチ（ＰＬＡＹ）、早送りスイッチ（ＦＦ）、早戻しスイッチ（ＲＥＷ）、停止スイッチ（ＳＴＯＰ）、メニュースイッチ（ＭＥＮＵ）、消去スイッチ（ＥＲＡＳＥ）の順に、オンされたスイッチがあるか否かが検出される。
【００４２】
すなわち、オンされたスイッチが録音スイッチ（ステップＳ３）であるならば、ステップＳ１０に移行して「録音処理」のサブルーチンが実行される。また、オンされたスイッチが再生スイッチ（ステップＳ４）であるならば、ステップＳ１１に移行して「再生処理」のサブルーチンが実行される。
【００４３】
同様に、オンされたスイッチが早送りスイッチ（ステップＳ５）であるならば、ステップＳ１２に移行して「早送り処理」のサブルーチンが実行される。オンされたスイッチが巻戻しスイッチ（ステップＳ６）であるならば、ステップＳ１３に移行して「早戻し処理」のサブルーチンが実行される。
【００４４】
そして、オンされたスイッチが停止スイッチ（ステップＳ７）であるならば、ステップ１４に移行して「停止処理」のサブルーチンが実行される。また、オンされたスイッチがメニュースイッチ（ステップＳ８）であるならば、ステップＳ１５に移行して「メニュー変更処理」のサブルーチンが実行される。更に、オンされたスイッチが消去スイッチ（ステップＳ９）であるならば、ステップＳ１６に移行して「消去処理」のサブルーチンが実行される。
【００４５】
上述したステップＳ１０〜Ｓ１６の各サブルーチンが実行された後は、上記ステップＳ２でスタートされたタイマがリセットされて再スタート（ステップＳ１７）される。その後、上記ステップＳ３へ移行する。
【００４６】
尚、上述したステップＳ１２〜Ｓ１６の「早送り処理」、「早戻し処理」、「停止処理」、「メニュー変更処理」及び「消去処理」の各処理は、周知の技術手段が用いられて実施されるものであり、また、本発明内容に直接関係しないので、ここでは詳細な説明は省略する。
【００４７】
上記ステップＳ３〜Ｓ９にて、全てのスイッチがオフされている場合は、ステップＳ１８に於いて、上記ステップＳ２で再スタートされたタイマの計時時間の判定が行われる。ここで、計時時間が所定時間内であれば、上記ステップＳ３へ移行して、再度スイッチの検出動作が行われる。一方、計時時間が所定時間をオーバすると、ステップＳ１９に移行して、「待機モード」のサブルーチンに入る。「待機モード」に入ると低消費電流動作になる。
【００４８】
具体的には、画像入力部１３、音声入力部１４、デジタル信号処理部（ＤＳＰ）１５、画像再生部１７、画像再生部１８、音声再生部１９、表示部２３及び記憶部２４の電源が遮断、若しくは各ブロックを構成する図示されないＩＣに設けられているチップイネーブル端子に、システム制御部２１から非選択信号が出力されることにより、低消費電流状態になる。
【００４９】
このとき、システム制御部２１内の図示されないＣＰＵは、自らも動作クロックを最も消費電流の少ない低速クロックに切換えて低消費電流状態になる。或いは、動作クロックをメインクロック（例えば、９．２８ＭＨｚ）からサブクロック（例えば、３２．７６８ｋＨｚ）に切換えて、その後スイッチ入力が検出されるまでメインクロックを完全に停止させてもよい。
【００５０】
次に、図４のフローチャートと、図２及び図５を参照して、図３のフローチャートに於けるステップＳ１０のサブルーチン「録音処理」の動作について説明する。
【００５１】
録音処理動作が開始されると、最初に、ステップＳ２１にて、マイク感度（高／低）、録音モード（標準／ロング）、ファイルナンバ及びこの音声データを記憶する音声データ記憶領域開始アドレス等の各種情報が、インデックス情報領域に記憶される。
【００５２】
次に、ステップＳ２２に於いて、録音時にのみ機能するレリーズスイッチ（ＲＥＬＳＷ）のオン／オフ状態が検出される。ここで、レリーズスイッチ（ＲＥＬＳＷ）がオンされていなければステップＳ２４に移行し、オンされている場合はステップＳ２３に移行して画像取得フラグがセットされた後、ステップＳ２４に移行する。
【００５３】
ステップＳ２４では、「画像取得処理」のサブルーチンが実行される。次いで、ステップＳ２５では、デジタル信号処理部（ＤＳＰ）１５により音声信号が符号化される。尚、符号化そのものはフレーム単位で行われ、ステップＳ２６に於いて、音声データが所定フレーム数になるまで連続的に行われる。
【００５４】
そして、システム制御部２１の図示されないバッファメモリに記憶された音声データが、予め決められた所定フレーム数に達したならば、ステップＳ２７に移行する。このステップＳ２７では、音声データが記憶部（メモリ）２４の音声データ記憶領域開始アドレスから順に書込まれて記憶される。
【００５５】
図５（ａ）に示されるように、音声データ領域Ａ及び音声データ領域Ｂは、た例えば音声データ領域の先頭アドレスから順に記憶されている。また、音声データ領域Ａ及び音声データ領域Ｂに対応する開始アドレスが、音声データ領域Ａの先頭アドレス及び音声データ領域Ｂの先頭アドレスとして、インデックス情報領域に記憶されている。同様に、音声データ領域Ｃ、音声データ領域Ｄ、と音声データ領域が確保される毎に、各音声データ領域の先頭アドレスがインデックス情報領域に記憶されるようにすればよい。
【００５６】
そして、ステップＳ２８では、画像取得フラグが検出される。ここで、画像取得フラグが０でなければ、上記ステップＳ２２に移行して、上述した処理が繰返される。また、画像取得フラグが０の場合は、ステップＳ２９に移行して、停止スイッチ（ＳＴＯＰＳＷ）の状態が検出される。
【００５７】
このステップＳ２９にて、停止スイッチ（ＳＴＯＰＳＷ）がオンされなければ、上記ステップＳ２２に移行して、以降の処理が繰返し行われる。一方、上記停止スイッチ（ＳＴＯＰＳＷ）がオンされたならば、ステップＳ３０に移行して録音終了処理が実行されて、録音が終了する。
【００５８】
次に、図６のフローチャートと、図２及び図５を参照して、図４のフローチャートに於けるステップＳ２４のサブルーチン「画像取得処理」の動作について説明する。
【００５９】
この「画像取得処理」のサブルーチンに入ると、先ず、ステップＳ４１にて画像取得フラグがセットされているか否かが検出される。ここで、上記画像取得フラグがセットされていなければ、通常の録音処理が実行される。一方、画像取得フラグがセットされている場合は、ステップＳ４２に移行してデジタル信号処理部（ＤＳＰ）１５により、画像信号の符号化が行われる。
【００６０】
符号化そのものは、音声データと同様にフレーム単位で行われる。そして、ステップＳ４３にて、画像データが所定フレーム数になるまで連続的に行われる。このステップＳ４３にて、システム制御部２１の図示されないバッファメモリに記憶された音声データが、予め決められた所定フレーム数になると、ステップＳ４４に移行して、音声データが記憶部（メモリ）２４の音声データ記憶領域開始アドレスから順に書込まれて記憶される。
【００６１】
図５（ａ）に示されるように、画像データ領域の開始アドレスは、例えば上記音声データ領域の最後のアドレスから順に記憶されている。また、画像データ領域Ｐ、画像データ領域Ｑ、及び画像データ領域Ｒに対応する開始アドレスが、画像データ領域Ｐの先頭アドレス、画像データ領域Ｑの先頭アドレス、及び画像データ領域Ｒの先頭アドレスとして、インデックス情報領域に記憶されている。これら画像データも、上記音声データと同様に画像データ領域が確保される毎に各画像データ領域の先頭アドレスがインデックス情報領域に記憶されるようにすればよい。
【００６２】
また、図５（ｂ）に示されるように、１つの音声データファイル（例えば、音声データ領域Ａに相当）に複数の画像データが関連付けられている場合は、各画像データＡ１〜Ａｎに対応する開始アドレスが、音声データ領域Ａに関連した画像データＡ１の先頭アドレス〜音声データ領域Ａに関連した画像データＡｎの先頭アドレスとして、インデックス情報領域に記憶されればよい。もちろん、音声データ領域Ｂ、音声データ領域Ｃ、…と音声データ領域が確保される毎に、各音声データ領域に関連付けられた画像データの先頭アドレスがインデックス情報領域に記憶されればよい。
【００６３】
尚、上記ステップＳ４１〜Ｓ４４は、ステップＳ４５に於いて画像取得が終了するまで、繰返し行われる。そして、ステップＳ４５の画像取得終了後は、ステップＳ４６にて音声データ関連付けフラグがセットされる。次いで、ステップＳ４７にて画像取得フラグがリセットされると、更にステップＳ４８にて画像取得時刻がメモリに記憶され、その後、本ルーチンが終了する。
【００６４】
尚、音声データ関連付けフラグに関しては、後述する「画像再生処理」のサブルーチンに於いて詳細に説明する。
【００６５】
次に、図７のフローチャート及び図２を参照して、図３のフローチャートに於けるステップＳ１１のサブルーチン「再生処理」の動作について説明する。
【００６６】
再生処理が開始されると、先ず、ステップＳ５１にて、選択された音声データ領域に関連した録音モード（標準／ロング）、ファイルナンバ、及びこの音声データが記憶された音声データ記憶領域開始アドレス等の各種情報が、インデックス情報領域から読出される。
【００６７】
次いで、後述するステップＳ５６の「画像再生処理」のサブルーチン実行前の処理として、ステップＳ５２にて、レジスタＲ０に録音開始時刻がセットされる。同様に、ステップＳ５４では、レジスタＲ１に画像データの取得総数がセットされ、続くステップＳ５４では、画像データ読出し中フラグがリセットされる。更に、ステップＳ５５では、再生中タイマの計時が開始される。
【００６８】
そして、ステップＳ５６にて、システム制御部２１により、「画像再生処理」のサブルーチンが実行される。その後、ステップＳ５７にて、上記音声データ記憶領域開始アドレスから順に、記憶部（メモリ）２４に記憶されている音声データが読出される。
【００６９】
更に、ステップＳ５８では、デジタル信号処理部（ＤＳＰ）１５により復号化される。復号化そのものはフレーム単位で行われるので、ステップＳ５９にて、音声データが所定フレーム数になるまで連続的に行われる。システム制御部２１の図示されないバッファメモリに順次記憶されながら、音声信号として音声再生部１９に出力される。
【００７０】
ステップＳ５９にて、音声データの復号化が所定フレーム数終了すると、続くステップＳ６０に於いて、画像表示中フラグの状態が判定される。ここで、画像表示中フラグがセットされている場合は、音声の再生開始と同時に表示部２３に画像表示が行われる。
【００７１】
通常、音声の再生に伴う口述者の認識は、画像表示開始から数秒間あれば十分なので、後述するサブルーチン「画像再生処理」で計時が開始された画像表示中タイマが、所定時間計時されてオーバフローしたか否かがステップＳ６１にて判定される。その結果、オーバフローしていなければ、上記ステップＳ５６〜Ｓ６０が繰返し行われる。一方、オーバフローしていれば、ステップＳ６２へ移行して画像表示中フラグがリセットされる。
【００７２】
更に、ステップＳ６３では、上記画像表示中タイマの計時が停止される。次いで、ステップＳ６４にて、通常の再生モード時の表示（録音時間、再生経過時間、録音モード（標準／ロング）、ファイルナンバ等）が行われる。
【００７３】
尚、上記ステップＳ５６〜Ｓ６０は、ステップＳ６５にて停止スイッチ（ＳＴＯＰＳＷ）がオンされるまで繰返し行われる。ステップＳ６５にて、停止スイッチ（ＳＴＯＰＳＷ）がオンされたならば、ステップＳ６６に移行して、再生終了処理が実行されて、再生が終了する。
【００７４】
次に、図８のフローチャートと図２及び図５（ｃ）を参照して、図７のフローチャートに於けるステップＳ５６のサブルーチン「画像再生処理」の動作について説明する。
【００７５】
例えば、先ずステップＳ７１に於いて、選択された音声データ領域Ａに音声データ関連付けフラグがセットされているか否かが検出される。ここで、セットされていなければ通常の再生処理が実行されるが、セットされている場合は、ステップＳ７２に移行して、画像データ読出し中フラグの状態が判定される。
【００７６】
このステップＳ７２にて、画像データ読出し中フラグがリセットされていない場合はステップＳ７７に移行し、リセットされている場合はステップＳ７３に移行する。このステップＳ７３では、上述したレジスタＲ０の値（録音開始時刻）に再生中タイマの計時値が加算される。そして、ステップＳ７４にて、各画像データＡ１〜Ａｎの取得時刻と上記Ｒ０の値とが比較される。
【００７７】
次いで、ステップＳ７５にて、一致時刻があるか否かが検出される。ここで、一致時刻がなければ通常の再生処理を続けるが、時刻が一致した場合は、ステップＳ７６に移行して画像データ読出し中フラグがセットされる。
【００７８】
そして、ステップＳ７７にて、上記画像データ記憶領域開始アドレスから順に記憶部（メモリ）２４に記憶されている画像データが読出される。この読出された画像データは、ステップＳ７８にて、デジタル信号処理部（ＤＳＰ）１５により復号化される。
【００７９】
復号化そのものは、音声データと同様にフレーム単位で行われるので、ステップＳ７９に於いて、画像データが所定フレーム数になるまで連続的に行われる。そして、システム制御部２１の図示されないバッファメモリに順次記憶されながら、画像信号として画像再生部１７に出力される。
【００８０】
上記ステップＳ７１〜Ｓ７９は、ステップＳ８０の画像再生が終了するまで繰返し行われれる。画像再生終了後は、ステップＳ８１に移行して、上述したレジスタＲ１の値（画像データの取得総数）がデクリメントされる。次いで、ステップＳ８２では、画像データ読出し中フラグがリセットされる。
【００８１】
更に、ステップＳ８３に於いて、上記レジスタＲ１の値が検出される。ここで、レジスタＲ１が“０”の場合は、ステップＳ８４に移行して音声データ領域Ａに関連する画像データＡ１〜Ａｎが全て再生されたと判断されて、以降、画像再生が行われないように画像データ関連付けフラグがリセットされる。その後、ステップＳ８５へ移行する。
【００８２】
一方、上記ステップＳ８３にて、レジスタＲ１の値が“０”でない場合は、音声データ領域Ａに関連する画像データＡ１〜Ａｎが全て再生されていない状態である。したがって、ステップＳ８５に移行して、画像表示中フラグがセットされる。続いて、ステップＳ８６にて、画像表示中タイマの計時が開始されて、通常の再生処理が続けられながら終了する。
【００８３】
図９は、上述した構成のＩＣレコーダの外観構成を示したもので、（ａ）は上面図、（ｂ）は録音時の操作表示部の状態を示した正面図である。
【００８４】
本実施の形態に於けるＩＣレコーダ３０の上面には、マイクロフォン孔３１、撮像レンズ３２、マイクジャック３３及びイヤフォンジャック３４が配設されている。そして、このＩＣレコーダ３０の内部で、上記マイクロフォン孔３１及び撮像レンズ３２と相対する位置には、図２に示されるマイクロフォン（ＭＩＣ）１２及び撮像素子（ＣＣＤ）１１が、それぞれが配設されている。このマイクロフォン１２の指向方向と、撮像レンズ３２の撮像方向とは略同一となるように配置されており、操作者が違和感無く、スムーズに録画時の画像取得を行うことができるようになっている。
【００８５】
また、このＩＣレコーダ３０の前面部には、画像表示部１８に対応する表示部３５が設けられている。そして、この表示部３５の下部にはレリーズスイッチ（ＲＥＬＳＷ）３７が、そして表示部３５の近傍でＩＣレコーダ３０の側面部には録音スイッチ（ＲＥＣＳＷ）３６が、それぞれ設けられている。
【００８６】
尚、上記録音スイッチ（ＲＥＣＳＷ）３６及びレリーズスイッチ（ＲＥＬＳＷ）３７以外のその他の操作スイッチは、特に図示していないが、操作し易いようにＩＣレコーダ３０の前面或いは側面側に配設されている。
【００８７】
更に、ＩＣレコーダ３０の前面の下方には、スピーカ孔３８が設けられている。そして、このＩＣレコーダ３０内部でスピーカ孔３８と相対する位置には、図２に示されるスピーカ（ＳＰ）２０が配設されている。
【００８８】
また、上述した操作スイッチは、通常タクティルプッシュスイッチ（Ｔａｃｔｉｌｅ Ｐｕｓｈ Ｓｗｉｔｃｈ）と称されるフェザータッチのスイッチが用いられている。
【００８９】
次に、このように構成されたＩＣレコーダを用いて、口述者の録音及びその音声・画像の再生を行う際の様子について、図１０を参照して説明する。
【００９０】
先ず、図１０（ａ）を参照して、ＩＣレコーダ３０の録音動作を説明する。
【００９１】
ＩＣレコーダ３０の録音スイッチ３６がオンにされると、録音が開始される。このとき、表示部３５には、録音開始初期の表示が現れ、現在録音動作状態であることが操作者に告知される。この状態に於いて、図１０（ａ）に示されるように、ＩＣレコーダ３０の上面を口述者４０に向けてレリーズスイッチ（ＲＥＬ）３７がオンされることにより、口述者の画像を取得することができる。
【００９２】
画像取得は、レリーズスイッチ（ＲＥＬ）３７がオンされる毎に行われる。したがって、複数の口述者を相手にするインタビュー等に於いても、口述内容に対応する口述者毎の画像を確実に記録することができる。
【００９３】
更に、画像を確実に記録するために、レリーズスイッチ（ＲＥＬ）３７がオンされてから斬らくの間は、図１０（ｂ）に示されるように、撮像レンズ３２で捕捉した画像が表示部３５に表示されるようにしてもよい。そして、被写体のフレーミングが決定された後、再びレリーズスイッチ（ＲＥＬ）３７がオンされることにより、画像取得が実行されるようにすればよい。
【００９４】
次に、図１０（ｂ）を参照して、このＩＣレコーダを用いた再生時の画像再生の様子について説明する。
【００９５】
ＩＣレコーダ３０の前面部、或いは側面側に配設された図示されない再生スイッチがオンにされると、再生が開始される。このとき、スピーカ３８からは、例えば、図１０（ｂ）の吹出しに示されるような音声が発音される。それと同時に、この音声に関連した口述者の画像４１が、表示部３５に表示される。このため、口述内容を聴きながら口述者自身を視覚的に確認することができるので、特にインタビュー等、複数の口述者の口述内容を口述者毎に録音して、後日ドキュメント化するような場合に非常に有効である。この場合、表示部３５には、口述者の画像４１と共に、録画時の日時等のデート情報４２が表示されるようにしてもよい。
【００９６】
また、表示部３５に表示される画像は、この画像に関連した音声の再生が終了するまで表示してもよく、もちろん上述したように再生開始から一定時間だけ表示するようにしてもよい。
【００９７】
更に、画像確認が不要ならば、全く表示しないようにしてもよい。例えば、音声に関連した画像が記録されていない場合は、通常の再生時の表示（録音時間、再生経過時間、録音モード（標準／ロング）、ファイルナンバ等）が行われる。
【００９８】
尚、本発明の上記実施の形態によれば、以下の如き構成を得ることができる。
【００９９】
すなわち、
（１） 音声データ及び該音声データに関連付けられた画像データの記録機能を備えるデータ記録再生装置に於いて、
音声データを記録する音声データ記録手段と、
上記音声データ記録手段による音声データの記録中に、当該音声データの記録経過時間に関連付けて上記画像データを記録することが可能な撮像手段と、
を具備することを特徴とするデータ記録再生装置。
【０１００】
（２） 音声データ及び該音声データに関連付けられた画像データの再生機能を備えるデータ記録再生装置に於いて、
音声データを再生する音声データ再生手段と、
上記音声データ再生手段による音声データの再生中に、当該音声データの再生状況を示す文字情報を含む第１の表示と、同再生中の音声データの記録経過時間に関連付けられた画像データを含む第２の表示とを選択的に表示することが可能な表示手段と、
を具備することを特徴とするデータ記録再生装置。
【０１０１】
（３） 再生中の上記表示手段は、画像データを関連付けした音声データの記録経過時間を検出する毎に、自動的に該表示手段に画像データを所定時間表示し、その後自動的に上記音声データの再生状況に切換えて表示することを特徴とする上記（２）に記載のデータ記録再生装置。
【０１０２】
【発明の効果】
以上のように本発明によれば、再生時に口述内容を容易に確認することができるデータ記録再生装置を得ることができる。
【図面の簡単な説明】
【図１】本発明のデータ記録再生装置の一実施の形態の概略構成を示したブロック図である。
【図２】本発明の一実施の形態であるＩＣレコーダのブロック構成を示した図である。
【図３】本発明の一実施の形態のＩＣレコーダのメイン動作を説明するフローチャートである。
【図４】図３のフローチャートに於けるステップＳ１０のサブルーチン「録音処理」の動作を説明するフローチャートである。
【図５】音声データ領域とインデックス情報領域との関係を示した図である。
【図６】図４のフローチャートに於けるステップＳ２４のサブルーチン「画像取得処理」の動作について説明するフローチャートである。
【図７】図３のフローチャートに於けるステップＳ１１のサブルーチン「再生処理」の動作について説明するフローチャートである。
【図８】図７のフローチャートに於けるステップＳ５６のサブルーチン「画像再生処理」の動作について説明するフローチャートである。
【図９】本発明の一実施の形態によるＩＣレコーダの外観構成を示したもので、（ａ）は上面図、（ｂ）は録音時の操作表示部の状態を示した正面図である。
【図１０】図９のＩＣレコーダを用いて、口述者の録音及びその音声・画像の再生を行う際の様子について説明するもので、（ａ）はＩＣレコーダ３０の録音動作を説明する図、（ｂ）はＩＣレコーダ３０の音声・画像の再生の様子を示した図である。
【符号の説明】
１ 符号化部、
２ 記憶部、
３ 復号化部、
４ 音声再生部、
５ 第１選択部、
６ スイッチ（ＳＷ）操作部、
７ 第２選択部、
８ 画像再生部、
１１ 撮像素子（ＣＣＤ）、
１２ マイクロフォン（ＭＩＣ）、
１３ 画像入力部、
１４ 音声入力部、
１５ デジタル信号処理部（ＤＳＰ）、
１７ 画像再生部、
１８ 画像表示部、
１９ 音声再生部、
２０ スピーカ（ＳＰ）、
２１ システム制御部、
２３ 表示部、
２４ 記憶部（メモリ）、
２５ 操作部、
３０ ＩＣレコーダ、
３１ マイクロフォン孔、
３２ 撮像レンズ、
３３ マイクジャック、
３４ イヤフォンジャック、
３５ 表示部、
３６ 録音スイッチ（ＲＥＣＳＷ）、
３７ レリーズスイッチ（ＲＥＬＳＷ）、
３８ スピーカ孔、
４０ 口述者、
４１ 口述者の画像、
４２ デート情報。

Claims (3)

1. 音声データを記録媒体に記録する音声データ記録手段と、
   上記音声データの記録中に、画像データの撮像を行う撮像手段と、
   上記撮像が行われたときの上記音声データの位置情報に関連付けて、上記画像データを上記記録媒体に記録する画像記録手段と、
   該データ記録装置の動作状況を表示する表示手段と、
   上記音声データの再生中に上記音声データの再生位置が、上記画像データの関連付けられた位置となった場合には、上記位置に関連付けられた上記画像データを表示し、上記音声データ再生中で上記画像データの表示の停止を判定した場合は、上記音声データの再生状況を示す文字情報を含む表示を行う表示制御手段と、
   を具備することを特徴とするデータ記録再生装置。
2. 上記文字情報を含む表示は、録音時間、再生経過時間、録音モード、及び記録媒体に記録されたファイル番号を表示することを特徴とする請求項１に記載のデータ記録再生装置。
3. 上記画像データを再生表示する表示時間を計時する計時手段を更に具備し、
   上記計時手段の計時結果から上記画像データの表示時間を判定することを特徴とする請求項１に記載のデータ記録再生装置。

Images