JP4013433B2 - Image reproducing apparatus and digital camera - Google Patents

Image reproducing apparatus and digital camera Download PDF

Info

Publication number
JP4013433B2
JP4013433B2 JP2000006428A JP2000006428A JP4013433B2 JP 4013433 B2 JP4013433 B2 JP 4013433B2 JP 2000006428 A JP2000006428 A JP 2000006428A JP 2000006428 A JP2000006428 A JP 2000006428A JP 4013433 B2 JP4013433 B2 JP 4013433B2
Authority
JP
Japan
Prior art keywords
image
sound
moving image
moving
playback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000006428A
Other languages
Japanese (ja)
Other versions
JP2001197414A (en
Inventor
岳志 三沢
敏多 原
公明 仲田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2000006428A priority Critical patent/JP4013433B2/en
Priority to US09/758,423 priority patent/US7145601B2/en
Publication of JP2001197414A publication Critical patent/JP2001197414A/en
Priority to US11/552,743 priority patent/US7710489B2/en
Application granted granted Critical
Publication of JP4013433B2 publication Critical patent/JP4013433B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は画像再生装置及びデジタルカメラに係り、特に音声付き画像の再生が可能な画像再生装置及びデジタルカメラに関する。
【0002】
【従来の技術】
近年、デジタルカメラにも動画撮影機能が付き、静止画及び動画の記録再生ができるようになってきている。
【0003】
この種のデジタルカメラにおいて、動画撮影時には音声も同時に記録することができ、動画再生時には動画とともに音声も同時に再生できるようになっている。
【0004】
また、デジタルカメラは携帯できるため、撮影した動画をどこでも再生することができるが、静粛な環境や電車の中などの公共の場所では音声付きの動画を再生するのは周囲の迷惑となる。
【0005】
そこで、デジタルカメラには音量調節機能やイヤホンジャックなどが設けられている。
【0006】
【発明が解決しようとする課題】
しかしながら、動画再生する際に、静粛な環境など音量を絞らずに音声付き動画を再生してしまうおそれがあり、また、イヤホンをいつも持ち歩いているとは限らない。また、動画撮影時に工事現場などの不快な音声が記録されている場合には、その動画再生時に音声の再生を希望しない場合もあるが、その都度、音量調節するのは煩雑であるという問題がある。
【0007】
本発明はこのような事情に鑑みてなされたもので、画像再生時に音声付き画像か、音声無し画像かを選択することができる画像再生装置及びデジタルカメラを提供することを目的とする。
【0008】
【課題を解決するための手段】
前記目的を達成するために、本願請求項1に係る画像再生装置は、静止画が記録されたファイルと動画が記録されたファイルとが混在して格納された記録媒体から任意のファイルを選択する選択手段と、前記選択手段によって選択されたファイルに静止画が記録されている場合には、その静止画を画像モニタに表示させる第1の表示制御手段と、前記選択手段によって選択されたファイルに動画が記録されている場合には、その動画の一部を前記静止画の表示形態と異ならせて再生し、動画であることを認識可能に表示させる第2の表示制御手段と、前記画像モニタに動画の一部が表示された状態時に動画再生を指示する動画再生指示手段であって、音声付き画像再生又は音声無し画像再生のいずれかを選択的に指示する動画再生指示手段と、前記動画再生指示手段によって音声付き画像再生又は音声無し画像再生が指示されると、前記画像モニタに一部が表示されている動画を連続再生させる第3の表示制御手段と、前記動画再生指示手段によって音声付き画像再生が指示されると、前記画像モニタに一部が表示されている動画の音声を再生し、音声無し画像再生が指示されると該動画の音声の再生を禁止する音声再生手段と、を備えたことを特徴としている。
【0009】
即ち、動画再生時に音声付きの動画再生か、音声無しの動画再生かを選択できるようにし、静粛な環境などでは動画の画像のみを再生できるようにしている。
【0010】
本願請求項2に示すように、前記音声再生手段は、前記選択手段によって音声付き動画のファイルが選択され、かつ前記動画再生指示手段によって音声付き画像再生が指示されたときのみ音声を再生することを特徴としている。また、本願請求項3に係る発明は、請求項2の画像再生装置を有し、静止画撮影モード又は動画撮影モードに応じて前記記録媒体に静止画又は動画を記録するデジタルカメラである。
【0011】
【発明の実施の形態】
以下添付図面に従って本発明に係る画像再生装置及びデジタルカメラの好ましい実施の形態について詳説する。
【0012】
図1及び図2はそれぞれ本発明に係るデジタルカメラの外観を示す正面図及び背面図である。
【0013】
これらの図面に示すように、このカメラは動画/静止画の記録再生が可能なデジタルカメラ1であり、カメラ前面には、図1に示すように撮影レンズ10、ファインダ窓12、及び補助光発光部14が設けられている。尚、補助光発光部14としては、静止画専用のカメラの場合にはストロボ装置が用いられ、動画静止画兼用のカメラの場合には白色の発光ダイオードもしくはランプなどが用いられる。
【0014】
一方、カメラ背面には、図2に示すように録画(時間)や日付、メモリの残りなどを表示する表示用パネル20、ファインダ接眼部22、ズームボタン24、メニューキー26、実行キー28、マルチファンクションの十字キー30、キャンセルキー32、画像モニタ34、及びスピーカ36が設けられている。
【0015】
また、カメラ上面には、図1及び図2に示すように電源スイッチ兼モード切換スイッチ40、及びシャッタボタン/録画開始終了ボタン42が設けられ、更に図1上のカメラ右側面には、イヤホーンジャック44及び記録メディア挿入部46が設けられている。
【0016】
上記電源スイッチ兼モード切換スイッチ40は、電源OFFとなる中立位置と、電源ON且つ静止画撮影モードとなる位置と、電源ON且つ動画撮影モードとなる位置と、電源ON且つ再生モードの4ポジションを切り換える。尚、電源スイッチ兼モード切換スイッチ40の代わりに電源ON/OFFのみのスイッチとし、前記静止画撮影モード、動画撮影モード、及び再生モードは他のモードダイヤル等で切り換えてもよい。
【0017】
図3は図1及び図2に示したデジタルカメラ1の内部構成を示すブロック図である。このデジタルカメラ1は、撮影レンズ10、補助光発光部14、画像モニタ34、マルチファンクションの十字キー30、電源スイッチ兼モード切換スイッチ40等の操作スイッチ群41、シャッタボタン/録画開始終了ボタン42、シャッター・絞り50、CCD等の撮像デバイス52、アナログ信号処理回路54、A/D変換器56、デジタル信号処理回路58、メモリ60、圧縮伸張回路62、内蔵メモリ又はメモリカード64、駆動回路66、及びCPU(中央処理装置)68等から構成されている。
【0018】
CPU68は、操作スイッチ群41、シャッタボタン/録画開始終了ボタン42等からの入力信号に基づいてカメラ全体の各回路を統括制御する。いま、電源スイッチ兼モード切換スイッチによって電源がONされ静止画撮影モード又は動画撮影モードが設定されると、シャッタボタン/録画開始終了ボタンの操作に基づいて静止画又は動画の撮影が行われ、一方、再生モードが設定されると、静止画又は動画の再生が行われる。
【0019】
さて、静止画撮影モード又は動画撮影モード時に撮影レンズ10、シャッタ・絞り50を通った光は、撮像デバイス52の上に焦点を結ぶ。ここで、シャッタは撮像デバイスから信号を読み出すときに光が撮像デバイス52に入射しスミアが発生するのを防止するものであるが、撮像デバイス52の構成により必ずしも必要なものではない。また、絞りも単一の絞りのものや、複数の絞りが切り換えできるようなものが考えられる。補助光発光部14は、低照度時に又は強制的に補助光を発光し、被写体を照明する。補助光発光部14はストロボ以外の補助光でも良いし、撮像デバイスの感度が高ければ省略することもできる。
【0020】
撮像デバイス52は、駆動回路66内のタイミング発生回路(図示せず)によって発生したタイミングで駆動され、画像信号を出力する。尚、駆動回路66は、撮影レンズ10、シャッタ・絞り50、補助光発光部14などの駆動回路も含む。
【0021】
撮像デバイス52から出力された画像信号は、アナログ信号処理回路54でアナログ信号処理された後、A/D変換器56でデジタル信号に変換されてデジタル信号処理回路58に加えられ、ここでデジタル処理が施される。デジタル処理された画像データは、メモリ60に一時的に記録される。ここで、メモリ60内の画像データを読み出し、画像モニタ34に出力することにより動画又は静止画を画像モニタ34に表示させることができる。また、撮影後の画像データは圧縮伸張回路62で圧縮され、内蔵メモリ又はメモリカード64に記録される。撮影モードによっては圧縮の過程を省いて記録されることもある。また、再生モード時には内蔵メモリ又はメモリカード64に記録されている画像データが圧縮伸張回路62によって伸張処理された後、メモリ60を介して画像モニタ34に出力され、画像モニタ34に再生画像が表示されるようになっている。
【0022】
上記構成のデジタルカメラ1において、静止画撮影モードが選択され、シャッタボタン/録画開始終了ボタン42が押下されると、1コマ分の画像が撮影され、その画像(静止画)にファイル名が付されて内蔵メモリ又はメモリカード64に記録される。一方、動画撮影モードが選択され、シャッタボタン/録画開始終了ボタン42が押下されると、再びシャッタボタン/録画開始終了ボタン42が押下されるまでの期間、所定のフレームレートで画像が連続撮影され、その連続画像(動画)にファイル名が付されて内蔵メモリ又はメモリカード64に記録される。
【0023】
尚、上記静止画が記録されたファイル及び動画が記録されたファイルは、静止画か動画にかかわらず撮影順にホルダーに格納される。また、動画撮影モード時には、図示しない音声録音手段によって音声も同時に記録でき、後述する再生モード時には音声付き動画として再生できるようになっている。
【0024】
次に、上記内蔵メモリ又はメモリカード64に記録された静止画や動画等を再生する場合について説明する。
【0025】
再生モードによる画像再生には、1コマ再生と、複数コマ(この実施の形態では4コマ)からなるインデックス画像を再生するインデックス再生と、1コマ再生時又はインデックス再生時に動画の1コマが表示された状態で、動画の再生が指示された場合に行われる動画再生とがある。尚、1コマ再生でのコマ送り時又はインデックス再生時に表示される動画の1コマとしては、動画の最初の1コマあるいは動画全体の長さの約1/2に位置する1コマが考えられる。
【0026】
さて、再生モードが選択されると、自動的に1コマ再生となり、最初のファイルの1コマが選択され画像モニタ34に再生される。尚、最後のファイルの1コマを画像モニタ34に再生させてもよい。ここで、別のコマの1コマ再生を行う場合には、マルチファンクションの十字キー30の左/右キーでコマ送りする。これにより、再生画が順次コマ送りされる。
【0027】
また、インデックス再生が指示されると、4コマからなるインデックス画像が表示される。このインデックス画像上で、十字キー30の上/下キー及び左/右キーで、再生したいコマを選択することができる。尚、選択されたコマは、縁取りがされ、他のコマと区別される。また、インデックス画像の範囲を越えて十字キー30の上/下キー及び左/右キーが操作されると、インデックス画面が切り換えられる。
【0028】
前述したように静止画が記録されたファイルと動画が記録されたファイルとは、撮影順に応じて混在して内蔵メモリ又はメモリカード64に格納されており、上記1コマ再生では、コマ送り時に静止画や動画の1コマとが混在して表示される。同様に、インデックス再生では、インデックス画像中に静止画と動画の1コマとが混在して表示される場合がある。
【0029】
そこで、1コマ再生又はインデックス再生時に静止画と動画の1コマとが直観的に区別できるように両者の表示形態を変えて表示するようにしている。
【0030】
図4乃至図6はそれぞれインデックス再生時に静止画と動画との表示形態を変えて表示されたインデックス画像を示す図である。
【0031】
図4に示す実施の形態では、インデックス画像中の静止画の画像70は、写真を連想させるように白枠付きの画像として表示され、一方、動画の1コマの画像72は、映画のフイルムを連想させるように1コマの左右両端にパーフォレーション72Aが合成された画像として表示される。これにより、インデックス画像中の各コマが静止画であるか、又は動画の1コマであるかを直観的に認識できるようにしている。
【0032】
図5に示す実施の形態では、インデックス画像中の静止画の画像70は、図4の場合と同様に白枠付きの画像として表示され、一方、動画を示す画像74は、画像に動きが生じるように動画を構成する数コマが繰り返し再生されている。尚、上記動画を構成する数コマは、動画の連続するコマに限らず、動きを強調するために比較的時間の離れたコマとしてもよい。
【0033】
図6に示す実施の形態では、インデックス画像中の静止画の画像76及び動画の1コマの画像78は、それぞれ白枠なしの画像として表示されているが、動画の1コマの画像78は、縦に振動するように表示されている。この振動は、ランダムに振動させると壊れているような印象を与えかねないので、8ミリなどの昔のフイルムを再生するときのように、細かく縦に振動させたり、時々大きく縦に振動させて動きに雰囲気を出すようにしてもよい。このように画面を振動させることにより、動画の1コマであることが認識できるようにしている。
【0034】
尚、図4の動画の1コマの画像72に合成したパーフォレーション72Aを、図5の動画を示す画像74や図6の動画の1コマの画像78に合成するようにしてもよく、また、この場合にパーフォレーションが縦に動くようにしてもよい。
【0035】
上記図4乃至図6では、それぞれインデックス画像上での静止画と動画の表示形態を示したが、1コマ再生時でも静止画と動画の1コマとが認識できるように上記のように静止画と動画とで表示形態を変えて表示される。
【0036】
また、1コマ再生時に静止画は1コマを表示し、動画は図7に示すように4画面マルチ画像の表示としてもよい。これによれば、1コマ再生時のコマ送り時に1コマが表示される場合には静止画、4画面マルチ画像が表示される場合には動画(動画中の4コマ)であることが認識できる。
【0037】
次に、動画を示す4画面マルチ画像の場合について説明する。
【0038】
この4画面マルチ画像は、図7に示すように動画を構成する全コマのうちの撮影の最初の方のコマ画像80A、中間のコマ画像80B、80C、及び最後の方のコマ画像80Dから構成されている。
【0039】
例えば、動画が400コマから構成されている場合には、400コマを4分割した1〜100コマ、101〜200コマ、201〜300コマ、及び301〜400コマの各コマ群からそれぞれ1コマずつ選択し、この選択した4コマから4画面マルチ画像を構成する。
【0040】
このように動画に関連する4画面マルチ画像を4コマ漫画のように表示することにより、動画再生する前に動画全体の内容を把握することができる。
【0041】
尚、この実施の形態では、4画面マルチ画像について説明したが、マルチ画面を構成するコマ数は4コマに限定されず、例えば、9画面マルチ画像としてもよい。この場合、9画面マルチ画像は、動画を構成する全コマを9等分し、9等分した各コマ群から1コマずつ取り出して構成する。
【0042】
また、動画撮影時にフレームインしたり、ワイプ表現した場合には、最初の1コマは意味をもたず、同様に最後の1コマも意味をもたない場合があるため、動画を構成する全コマから最初の複数コマ及び最後の複数コマを除いたコマからマルチ画像を構成してもよい。尚、上記マルチ画像は、予め作成しておき、その動画のファイルに関連付けて記録しておいてもよいし、インデックス画像として予めファイルと一体となっていても良い。
【0043】
更に、この実施の形態では、動画の全コマから適宜抽出した複数コマに基づいてマルチ画像を構成し、そのマルチ画像を表示するようにしたが、これに限らず、複数コマを所定のインターバルで繰り返しコマ送り表示するようにしてもよい。特に、インデックス再生時における1コマは小さいため、その1コマ内に複数コマをマルチ画面で表示するよりも順次表示する方が好ましい。
【0044】
次に、図8に示すフローチャートを参照しながら静止画及び動画の画像再生の手順について説明する。
【0045】
図8に示すように、再生モードが選択されて再生モードが開始されると(ステップS10)、前述したように自動的に1コマ再生となり、内蔵メモリ又はメモリカード64内の最初のファイル(最初のコマ)が選択される(ステップS12)。
【0046】
選択されたファイルが静止画のファイルか動画のファイルかを自動判別し(ステップS14)、静止画のファイルの場合には、そのファイルの画像データに基づいて静止画を画像モニタ34に表示させる(ステップS16)。その後、マルチファンクションの十字キー30の左/右キーの操作により、次のコマを表示させるか、前のコマを表示させるかが選択される(ステップS18)。そして、十字キー30の右キーが操作されると、次のファイル(次のコマ)が選択された後(ステップS20)、ステップS14に戻り、十字キー30の左キーが操作されると、前のファイル(前のコマ)が選択された後(ステップS22)、ステップS14に戻る。
【0047】
一方、選択されたファイルが動画のファイルの場合には、そのファイルの画像データに基づいて動画の一部を再生する(ステップS24)。この動画の一部再生により、動画の1コマにパーフォレーションが合成されて表示され(図4の画像72参照)、又は動画を構成する数コマが繰り返し表示され(図5の画像74参照)、又は動画の1コマが縦に振動するように表示され(図6の画像78参照)、又は動画中の4コマが4画面マルチ画像で表示される(図7参照)。
【0048】
ステップS24での動画の一部再生に基づいて、ユーザーはその一部再生された動画の全コマを再生させる動画再生を行うか、動画再生せずにコマ送りするかを選択する(ステップS26)。そして、動画再生が選択指示されると、選択された動画ファイルの画像データに基づいて動画の最初から最後まで連続再生する(ステップS28)。その後、ステップS30で、再度動画再生を行うか、コマ送りするかを選択される。
【0049】
ステップS26又はステップS30において、十字キー30の右キーが操作されると、次のコマが選択された後(ステップS20)、ステップS14に戻り、十字キー30の左キーが操作されると、前のコマが選択された後(ステップS22)、ステップS14に戻る。
【0050】
尚、ステップS24で動画の一部再生を行ったのち、動画再生の指示入力があった場合のみ動画再生させるようにしたのは、再生を希望する動画のみを選択的に動画再生できるようにするためである。また、動画再生が一旦開始されると、CPUの負荷が大きくなり、動画再生の中断のスイッチ指示を素早く反映させることができなくなり、動画再生が終了するまでコマ送りができなくなる等の不具合があるからである。
【0051】
次に、図9に示すフローチャートを参照しながら静止画及び動画の画像再生の手順について説明する。尚、図8に示すフローチャートと共通する部分には同一のステップ番号を付し、その詳細な説明は省略する。
【0052】
図9に示すフローチャートは、図8のフローチャートのステップS28の代わりに、ステップS40、S42、S44が設けられている点で相違する。
【0053】
図1等に示したデジタルカメラ1は、動画撮影時に音声付き動画として内蔵メモリ又はメモリカード64に記録するようにしている。図9のステップS40、S42、S44では、内蔵メモリ又はメモリカード64に記録された音声付き動画の再生時に、音声付き動画再生と音声無し動画再生とを適宜選択できるようにしている。
【0054】
即ち、デジタルカメラ1は、動画再生する際に音声付き動画再生か音声無し動画再生かを選択する選択手段を有している。この選択手段としては、図2に示すマルチファンクションの十字キー30の上/下キーが対応している。
【0055】
さて、ステップS24での動画の一部再生状態で、十字キー30の上キーが操作されると、音声付き動画再生が選択され(ステップS26、ステップS40)、動画が画像モニタ34に表示されるとともに、スピーカ36から音声が発生される(ステップS42)。一方、ステップS24での動画の一部再生状態で、十字キー30の下キーが操作されると、音声無し動画再生が選択され(ステップS26、ステップS40)、動画が画像モニタ34に表示されるが、音声の再生は禁止される(ステップS44)。
【0056】
尚、この実施の形態では、マルチファンクションの十字キー30の上/下キーによって音声付き動画再生と音声無し動画再生を選択するようにしたが、専用の選択スイッチを設けてもよく、また、音声を再生させるか否かを選択する選択スイッチと、動画を再生させるか否かを選択する選択スイッチとを別々に設けるようにしてもよい。更に、静止画撮影モード時にも音声が記録でき、静止画の1コマ再生時に音声を再生できる場合にも、音声付き静止画と音声無し静止画とを選択できるようにしてもよい。
【0057】
また、この実施の形態では、デジタルカメラについて説明したが、デジタルカメラに限らず、上述した画像再生機能を有する画像再生装置、又は該画像再生装置を含む装置であれば、如何なる装置でもよい。
【0058】
【発明の効果】
以上説明したように本発明によれば、画像再生時に音声付き画像か、音声無し画像かを選択できるようにしたため、静粛な環境などでは画像のみを再生することができ、周囲に迷惑をかけないようにすることができる。また、音量を調整する場合に比べて音声付き画像と音声無し画像とを簡単な選択操作で切り換えることができる。
【図面の簡単な説明】
【図1】本発明に係るデジタルカメラの外観を示す正面図
【図2】図1に示したデジタルカメラの背面図
【図3】図1に示したデジタルカメラの内部構成を示すブロック図
【図4】インデックス再生時に静止画と動画との表示形態を変えて表示したインデックス画像の一例を示す図
【図5】インデックス再生時に静止画と動画との表示形態を変えて表示したインデックス画像の他の例を示す図
【図6】インデックス再生時に静止画と動画との表示形態を変えて表示したインデックス画像の更に他の例を示す図
【図7】コマ送り再生時に動画を4画面マルチ画像で表示した図
【図8】静止画及び動画の画像再生の手順の一例を示すフローチャート
【図9】静止画及び動画の画像再生の手順の他の例を示すフローチャート
【符号の説明】
1…デジタルカメラ、10…撮影レンズ、30…マルチファンクションの十字キー、34…画像モニタ、36…スピーカ、40…電源スイッチ兼モード切換スイッチ、42…シャッタボタン/録画開始終了ボタン、44…イヤホーンジャック、46…記録メディア挿入部、52…撮像デバイス、54…アナログ信号処理回路、58…デジタル信号処理回路、64…内蔵メモリ又はメモリカード、68…CPU(中央処理装置)、70、76…静止画の画像、72、78…動画の1コマの画像、72A…パーフォレーション、74…動画を示す画像、80A〜80D…動画を示す4画面マルチ画像の各コマ画像
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image reproducing apparatus and a digital camera, and more particularly to an image reproducing apparatus and a digital camera that can reproduce an image with sound.
[0002]
[Prior art]
In recent years, digital cameras are also provided with a moving image shooting function, and it has become possible to record and reproduce still images and moving images.
[0003]
In this type of digital camera, voice can be recorded simultaneously when shooting a moving picture, and voice can be played back simultaneously with a moving picture when playing back a moving picture.
[0004]
In addition, since the digital camera can be carried, the captured video can be played anywhere, but playing a video with sound in a quiet environment or a public place such as a train is annoying to the surroundings.
[0005]
Therefore, the digital camera is provided with a volume control function and an earphone jack.
[0006]
[Problems to be solved by the invention]
However, when playing a moving image, there is a risk that a moving image with sound may be played without reducing the volume, such as in a quiet environment, and the earphones are not always carried around. In addition, when uncomfortable sounds such as construction sites are recorded at the time of moving image shooting, there is a case where it is not desired to reproduce the sound at the time of moving image reproduction, but each time there is a problem that it is troublesome to adjust the volume. is there.
[0007]
The present invention has been made in view of such circumstances, and an object thereof is to provide an image reproducing apparatus and a digital camera that can select an image with sound or an image without sound at the time of image reproduction.
[0008]
[Means for Solving the Problems]
In order to achieve the above object, an image reproducing apparatus according to claim 1 of the present application selects an arbitrary file from a recording medium in which a file in which a still image is recorded and a file in which a moving image is recorded are mixedly stored. a selection unit that, when the still image file selected by said selection means is recorded, a first display control means for displaying the still image on the image monitor, selected by the selection means When a moving image is recorded in the file, a second display control means for reproducing a part of the moving image differently from the display form of the still image and recognizing that it is a moving image; and Movie playback instruction means for instructing playback of a movie when a part of the movie is displayed on the image monitor, and movie playback instruction means for selectively instructing either image playback with sound or image playback without sound A third display control unit that continuously reproduces a moving image partially displayed on the image monitor when the moving image reproduction instructing unit instructs to reproduce an image with sound or an image without sound; and the moving image reproduction instruction unit Audio reproduction means for reproducing the sound of a moving image partially displayed on the image monitor when the reproduction of the image with sound is instructed by, and prohibiting the reproduction of the sound of the moving image when directed to reproduce the image without sound It is characterized by having a and.
[0009]
In other words, video playback or with audio during video playback, to be able to select a video or playback of free speech, in such quiet environment it is to be able to play only the image of the moving image.
[0010]
According to a second aspect of the present invention, the sound reproducing means reproduces sound only when a moving image file with sound is selected by the selecting means , and image reproduction with sound is instructed by the moving image reproduction instruction means. It is characterized by that. The invention according to the claims 3 has an image reproducing apparatus according to claim 2, wherein the still image recording medium or is a digital camera for recording a moving picture according to the still image shooting mode or the moving image shooting mode .
[0011]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, preferred embodiments of an image reproducing device and a digital camera according to the present invention will be described in detail with reference to the accompanying drawings.
[0012]
1 and 2 are a front view and a rear view, respectively, showing the appearance of the digital camera according to the present invention.
[0013]
As shown in these drawings, this camera is a digital camera 1 capable of recording / reproducing moving images / still images. On the front side of the camera is a photographing lens 10, a finder window 12, and auxiliary light emission as shown in FIG. A portion 14 is provided. As the auxiliary light emitting unit 14, a strobe device is used in the case of a camera dedicated to still images, and a white light emitting diode or lamp is used in the case of a camera that is also used as a moving image still image.
[0014]
On the other hand, on the rear side of the camera, as shown in FIG. 2, a display panel 20 for displaying recording (time), date, remaining memory, viewfinder eyepiece 22, zoom button 24, menu key 26, execution key 28, A multifunction cross key 30, a cancel key 32, an image monitor 34, and a speaker 36 are provided.
[0015]
As shown in FIGS. 1 and 2, a power switch / mode switch 40 and a shutter button / recording start / end button 42 are provided on the upper surface of the camera, and an earphone jack is provided on the right side of the camera in FIG. 44 and a recording medium insertion section 46 are provided.
[0016]
The power switch / mode switch 40 has four positions: a neutral position in which the power is turned off, a position in which the power is turned on and in the still image shooting mode, a position in which the power is turned on and in the video shooting mode, and a power on and playback mode. Switch. Instead of the power switch / mode change switch 40, the power ON / OFF switch may be used, and the still image shooting mode, the moving image shooting mode, and the playback mode may be switched using another mode dial or the like.
[0017]
FIG. 3 is a block diagram showing an internal configuration of the digital camera 1 shown in FIGS. The digital camera 1 includes a photographing lens 10, an auxiliary light emitting unit 14, an image monitor 34, a multifunction cross key 30, an operation switch group 41 such as a power switch / mode change switch 40, a shutter button / recording start / end button 42, Shutter / aperture 50, imaging device 52 such as CCD, analog signal processing circuit 54, A / D converter 56, digital signal processing circuit 58, memory 60, compression / decompression circuit 62, built-in memory or memory card 64, drive circuit 66, And a CPU (central processing unit) 68 and the like.
[0018]
The CPU 68 comprehensively controls each circuit of the entire camera based on input signals from the operation switch group 41, the shutter button / recording start / end button 42, and the like. Now, when the power is turned on by the power switch / mode switch and the still image shooting mode or the moving image shooting mode is set, the still image or moving image is shot based on the operation of the shutter button / recording start / end button. When the playback mode is set, a still image or a moving image is played back.
[0019]
Now, the light passing through the photographing lens 10 and the shutter / aperture 50 in the still image photographing mode or the moving image photographing mode is focused on the imaging device 52. Here, the shutter prevents light from entering the imaging device 52 and generating smear when reading a signal from the imaging device, but is not necessarily required depending on the configuration of the imaging device 52. In addition, the diaphragm can be a single diaphragm or a plurality of diaphragms that can be switched. The auxiliary light emitting unit 14 emits auxiliary light at low illuminance or forcibly to illuminate the subject. The auxiliary light emitting unit 14 may be auxiliary light other than the strobe light, or may be omitted if the sensitivity of the imaging device is high.
[0020]
The imaging device 52 is driven at a timing generated by a timing generation circuit (not shown) in the driving circuit 66 and outputs an image signal. The drive circuit 66 also includes drive circuits such as the photographing lens 10, the shutter / aperture 50, and the auxiliary light emitting unit 14.
[0021]
The image signal output from the imaging device 52 is subjected to analog signal processing by the analog signal processing circuit 54, then converted to a digital signal by the A / D converter 56, and added to the digital signal processing circuit 58, where digital processing is performed. Is given. The digitally processed image data is temporarily recorded in the memory 60. Here, by reading out the image data in the memory 60 and outputting it to the image monitor 34, a moving image or a still image can be displayed on the image monitor 34. The image data after photographing is compressed by the compression / decompression circuit 62 and recorded in the built-in memory or the memory card 64. Depending on the shooting mode, recording may be performed without the compression process. In the reproduction mode, the image data recorded in the built-in memory or the memory card 64 is decompressed by the compression / decompression circuit 62 and then output to the image monitor 34 via the memory 60, and the reproduced image is displayed on the image monitor 34. It has come to be.
[0022]
In the digital camera 1 configured as described above, when the still image shooting mode is selected and the shutter button / recording start / end button 42 is pressed, an image for one frame is shot, and a file name is assigned to the image (still image). And recorded in the built-in memory or memory card 64. On the other hand, when the moving image shooting mode is selected and the shutter button / recording start / end button 42 is pressed, images are continuously shot at a predetermined frame rate until the shutter button / recording start / end button 42 is pressed again. The file name is attached to the continuous image (moving image) and recorded in the built-in memory or the memory card 64.
[0023]
Note that the file in which the still image is recorded and the file in which the moving image is recorded are stored in the holder in the shooting order regardless of the still image or the moving image. In the moving image shooting mode, sound can be recorded simultaneously by a sound recording means (not shown), and in a playback mode described later, it can be reproduced as a moving image with sound.
[0024]
Next, a case where a still image or a moving image recorded in the built-in memory or the memory card 64 is reproduced will be described.
[0025]
For image playback in the playback mode, one frame playback, index playback for playing back an index image consisting of a plurality of frames (4 frames in this embodiment), and one frame of a movie during single-frame playback or index playback are displayed. In this state, there is a moving image reproduction performed when an instruction to reproduce a moving image is given. Note that one frame of the moving image displayed at the time of frame advancement or index reproduction during single frame playback may be the first frame of the moving image or one frame positioned about ½ of the entire length of the moving image.
[0026]
When the playback mode is selected, one-frame playback is automatically performed, and one frame of the first file is selected and played back on the image monitor 34. Note that one frame of the last file may be reproduced on the image monitor 34. Here, when performing one-frame playback of another frame, the frame is advanced by the left / right key of the multifunction cross key 30. As a result, the playback images are sequentially advanced.
[0027]
When index reproduction is instructed, an index image consisting of four frames is displayed. On the index image, the frame to be reproduced can be selected with the up / down key and the left / right key of the cross key 30. The selected frame is trimmed and distinguished from other frames. When the up / down key and the left / right key of the cross key 30 are operated beyond the range of the index image, the index screen is switched.
[0028]
As described above, the file in which the still image is recorded and the file in which the moving image is recorded are mixed and stored in the built-in memory or the memory card 64 in accordance with the shooting order. A single frame of a picture or video is displayed in a mixed manner. Similarly, in index reproduction, there are cases where a still image and a single frame of a moving image are mixedly displayed in the index image.
[0029]
In view of this, the display form of both images is changed so that a still image and a moving image frame can be intuitively distinguished during single frame reproduction or index reproduction.
[0030]
FIGS. 4 to 6 are diagrams showing index images displayed by changing display forms of still images and moving images during index reproduction.
[0031]
In the embodiment shown in FIG. 4, the still image 70 in the index image is displayed as an image with a white frame so as to be reminiscent of a photograph, while the one-frame image 72 of the movie is a movie film. As if reminiscent, it is displayed as an image in which perforations 72A are combined at the left and right ends of one frame. This makes it possible to intuitively recognize whether each frame in the index image is a still image or one frame of a moving image.
[0032]
In the embodiment shown in FIG. 5, the still image 70 in the index image is displayed as an image with a white frame as in the case of FIG. 4, while the image 74 showing the moving image has a motion. In this way, several frames constituting a moving image are repeatedly played. Note that the number of frames constituting the moving image is not limited to a continuous frame of the moving image, and may be a relatively long frame in order to emphasize the motion.
[0033]
In the embodiment shown in FIG. 6, the still image 76 and the single frame image 78 in the index image are displayed as images without white frames, but the single frame image 78 of the moving image is It is displayed to vibrate vertically. Since this vibration may give the impression of being broken if it is randomly vibrated, it can be vibrated finely or sometimes vertically, as when playing an old film such as 8 mm. You may make it give atmosphere to movement. By vibrating the screen in this way, it can be recognized that it is one frame of a moving image.
[0034]
The perforation 72A synthesized with the single frame image 72 of FIG. 4 may be combined with the single image 74 showing the moving image of FIG. 5 or the single frame image 78 of FIG. In some cases, the perforation may move vertically.
[0035]
FIGS. 4 to 6 show the display form of still images and moving images on the index images, respectively. However, as described above, still images and moving images can be recognized even during single-frame playback. And the video are displayed in different display forms.
[0036]
Further, at the time of one-frame playback, one frame may be displayed as a still image, and a moving image may be displayed as a four-screen multi-image as shown in FIG. According to this, when one frame is displayed during frame-by-frame playback, a still image can be recognized as a moving image (four frames in a moving image) when a four-screen multi-image is displayed. .
[0037]
Next, the case of a 4-screen multi-image showing a moving image will be described.
[0038]
As shown in FIG. 7, this four-screen multi-image is composed of the first frame image 80A, the middle frame images 80B and 80C, and the last frame image 80D of all the frames constituting the moving image. Has been.
[0039]
For example, if the moving image is composed of 400 frames, each frame is divided into 4 frames, each divided into 1 to 100 frames, 101 to 200 frames, 201 to 300 frames, and 301 to 400 frames. A 4-screen multi-image is constructed from the selected 4 frames.
[0040]
Thus, by displaying the 4-screen multi-image related to the moving image like a four-frame cartoon, the contents of the entire moving image can be grasped before the moving image is reproduced.
[0041]
In this embodiment, the four-screen multi-image has been described. However, the number of frames constituting the multi-screen is not limited to four, and for example, a nine-screen multi-image may be used. In this case, the nine-screen multi-image is formed by dividing all the frames constituting the moving image into nine equal parts, and taking out one frame from each of the nine divided frame groups.
[0042]
In addition, when a frame is framed or wiped during movie shooting, the first frame has no meaning, and the last frame may also have no meaning. A multi-image may be composed of frames obtained by removing the first plurality of frames and the last plurality of frames from the frames. The multi-image may be created in advance and recorded in association with the moving image file, or may be integrated with the file in advance as an index image.
[0043]
Furthermore, in this embodiment, a multi-image is configured based on a plurality of frames appropriately extracted from all the frames of the moving image, and the multi-image is displayed. However, the present invention is not limited to this, and a plurality of frames are displayed at a predetermined interval. Repeated frame advance display may be used. In particular, since one frame at the time of index reproduction is small, it is preferable to sequentially display a plurality of frames within one frame rather than displaying them on a multi-screen.
[0044]
Next, the procedure for reproducing images of still images and moving images will be described with reference to the flowchart shown in FIG.
[0045]
As shown in FIG. 8, when the playback mode is selected and the playback mode is started (step S10), as described above, one-frame playback is automatically performed, and the first file in the built-in memory or the memory card 64 (first Are selected (step S12).
[0046]
Whether the selected file is a still image file or a moving image file is automatically determined (step S14). If the selected file is a still image file, the still image is displayed on the image monitor 34 based on the image data of the file (step S14). Step S16). Thereafter, the operation of the left / right key of the multifunction cross key 30 selects whether to display the next frame or the previous frame (step S18). When the right key of the cross key 30 is operated, the next file (next frame) is selected (step S20), and then the process returns to step S14. When the left key of the cross key 30 is operated, the previous file is selected. Is selected (step S22), the process returns to step S14.
[0047]
On the other hand, if the selected file is a moving image file, a part of the moving image is reproduced based on the image data of the file (step S24). By partial playback of this moving image, perforation is synthesized and displayed on one frame of the moving image (see image 72 in FIG. 4), or several frames constituting the moving image are repeatedly displayed (see image 74 in FIG. 5), or One frame of the moving image is displayed so as to vibrate vertically (see image 78 in FIG. 6), or four frames in the moving image are displayed as a 4-screen multi-image (see FIG. 7).
[0048]
Based on the partial playback of the video in step S24, the user selects whether to perform video playback for playing back all the frames of the partially played video, or to perform frame advance without video playback (step S26). . When an instruction to select moving image playback is given, the moving image is continuously reproduced from the beginning to the end based on the image data of the selected moving image file (step S28). Thereafter, in step S30, it is selected whether to perform moving image reproduction again or frame-by-frame.
[0049]
In step S26 or step S30, when the right key of the cross key 30 is operated, after the next frame is selected (step S20), the process returns to step S14, and when the left key of the cross key 30 is operated, Is selected (step S22), the process returns to step S14.
[0050]
In addition, after the partial reproduction of the moving image in step S24, the moving image is reproduced only when the instruction for reproducing the moving image is input, so that only the moving image desired to be reproduced can be selectively reproduced. Because. In addition, once the video playback is started, the load on the CPU increases, and it is impossible to quickly reflect the switch instruction to stop the video playback, and there is a problem that frame advancement cannot be performed until the video playback ends. Because.
[0051]
Next, a procedure for reproducing images of still images and moving images will be described with reference to the flowchart shown in FIG. In addition, the same step number is attached | subjected to the part which is common in the flowchart shown in FIG. 8, and the detailed description is abbreviate | omitted.
[0052]
The flowchart shown in FIG. 9 is different in that steps S40, S42, and S44 are provided instead of step S28 in the flowchart of FIG.
[0053]
The digital camera 1 shown in FIG. 1 and the like is recorded in a built-in memory or a memory card 64 as a moving image with sound during moving image shooting. In steps S40, S42, and S44 in FIG. 9, when reproducing a moving image with sound recorded in the built-in memory or the memory card 64, it is possible to appropriately select moving image reproduction with sound and moving image reproduction without sound.
[0054]
That is, the digital camera 1 has selection means for selecting whether to play a moving image with sound or a moving image without sound when playing a moving image. The selection means corresponds to the up / down keys of the multifunction cross key 30 shown in FIG.
[0055]
When the upper key of the cross key 30 is operated in the state where the moving image is partially reproduced in step S24, the moving image reproduction with sound is selected (step S26, step S40), and the moving image is displayed on the image monitor 34. At the same time, sound is generated from the speaker 36 (step S42). On the other hand, when the lower key of the cross key 30 is operated in the state where the moving image is partially reproduced in step S24, the soundless moving image reproduction is selected (step S26, step S40), and the moving image is displayed on the image monitor 34. However, the reproduction of audio is prohibited (step S44).
[0056]
In this embodiment, the up / down key of the multi-function cross key 30 is used to select the video playback with audio and the video playback without audio. However, a dedicated selection switch may be provided. A selection switch for selecting whether or not to reproduce the video and a selection switch for selecting whether or not to reproduce the video may be provided separately. Furthermore, it is also possible to select a still image with sound and a still image without sound even when the sound can be recorded even in the still image shooting mode and the sound can be reproduced during single frame playback of the still image.
[0057]
In this embodiment, a digital camera has been described. However, the present invention is not limited to a digital camera, and any device may be used as long as it is an image playback device having the above-described image playback function or a device including the image playback device.
[0058]
【The invention's effect】
As described above, according to the present invention, since an image with sound or an image without sound can be selected at the time of image reproduction, only the image can be reproduced in a quiet environment and the like is not disturbed. Can be. In addition, it is possible to switch between an image with sound and an image without sound by a simple selection operation as compared with the case of adjusting the volume.
[Brief description of the drawings]
FIG. 1 is a front view showing an appearance of a digital camera according to the present invention. FIG. 2 is a rear view of the digital camera shown in FIG. 1. FIG. 3 is a block diagram showing an internal configuration of the digital camera shown in FIG. 4] A diagram showing an example of an index image displayed by changing the display mode of still images and moving images during index reproduction. [Fig. 5] Another index image displayed by changing the display mode of still images and moving images during index playback. FIG. 6 is a diagram showing still another example of an index image displayed by changing the display form of still images and moving images during index playback. FIG. 7 is a four-screen multi-image display during frame-by-frame playback. FIG. 8 is a flowchart showing an example of a procedure for reproducing an image of a still image and a moving image. FIG. 9 is a flowchart showing another example of a procedure for reproducing an image of a still image and a movie.
DESCRIPTION OF SYMBOLS 1 ... Digital camera, 10 ... Shooting lens, 30 ... Multi-function cross key, 34 ... Image monitor, 36 ... Speaker, 40 ... Power switch / mode switch, 42 ... Shutter button / recording start end button, 44 ... Earphone jack 46 ... Recording medium insertion section, 52 ... Imaging device, 54 ... Analog signal processing circuit, 58 ... Digital signal processing circuit, 64 ... Built-in memory or memory card, 68 ... CPU (central processing unit), 70,76 ... Still image 72, 78 ... one frame image of a movie, 72A ... perforation, 74 ... an image showing a movie, 80A-80D ... each frame image of a 4-screen multi-image showing a movie

Claims (3)

静止画が記録されたファイルと動画が記録されたファイルとが混在して格納された記録媒体から任意のファイルを選択する選択手段と、
前記選択手段によって選択されたファイルに静止画が記録されている場合には、その静止画を画像モニタに表示させる第1の表示制御手段と、
前記選択手段によって選択されたファイルに動画が記録されている場合には、その動画の一部を前記静止画の表示形態と異ならせて再生し、動画であることを認識可能に表示させる第2の表示制御手段と、
前記画像モニタに動画の一部が表示された状態時に動画再生を指示する動画再生指示手段であって、音声付き画像再生又は音声無し画像再生のいずれかを選択的に指示する動画再生指示手段と、
前記動画再生指示手段によって音声付き画像再生又は音声無し画像再生が指示されると、前記画像モニタに一部が表示されている動画を連続再生させる第3の表示制御手段と、 前記動画再生指示手段によって音声付き画像再生が指示されると、前記画像モニタに一部が表示されている動画の音声を再生し、音声無し画像再生が指示されると該動画の音声の再生を禁止する音声再生手段と、
を備えたことを特徴とする画像再生装置。
And any selection to that selection means a file from a recording medium in which a file and a video still image is recorded is recorded files are stored in a mixed manner,
If a still image is recorded in the file selected by the selection means, a first display control means for displaying the still image on an image monitor;
When a moving image is recorded in the file selected by the selection means, a part of the moving image is reproduced differently from the display form of the still image, and the second is displayed so that the moving image can be recognized. Display control means,
Movie playback instruction means for instructing playback of a movie when a part of the movie is displayed on the image monitor, wherein the movie playback instruction means selectively instructs either image playback with sound or image playback without sound. ,
A third display control unit that continuously reproduces a moving image partially displayed on the image monitor when the moving image reproduction instructing unit instructs to reproduce an image with sound or an image without sound; and the moving image reproduction instruction unit Audio reproduction means for reproducing the sound of a moving image partially displayed on the image monitor when the reproduction of the image with sound is instructed by, and prohibiting the reproduction of the sound of the moving image when directed to reproduce the image without sound When,
An image reproducing apparatus comprising:
前記音声再生手段は、前記選択手段によって音声付き動画のファイルが選択され、かつ前記動画再生指示手段によって音声付き画像再生が指示されたときのみ音声を再生することを特徴とする請求項1の画像再生装置。 The sound reproducing means reproduces sound only when a moving image file with sound is selected by the selecting means , and image reproduction with sound is instructed by the moving image reproduction instructing means. Image playback device. 請求項2の画像再生装置を有し、静止画撮影モード又は動画撮影モードに応じて前記記録媒体に静止画又は動画を記録することを特徴とするデジタルカメラ。And an image reproducing apparatus according to claim 2, digital camera and recording a still image or moving picture on the recording medium in accordance with the still image capturing mode or the moving image shooting mode.
JP2000006428A 2000-01-14 2000-01-14 Image reproducing apparatus and digital camera Expired - Fee Related JP4013433B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2000006428A JP4013433B2 (en) 2000-01-14 2000-01-14 Image reproducing apparatus and digital camera
US09/758,423 US7145601B2 (en) 2000-01-14 2001-01-12 Multi-modal reproducing apparatus and digital camera
US11/552,743 US7710489B2 (en) 2000-01-14 2006-10-25 Image reproducing apparatus and digital camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000006428A JP4013433B2 (en) 2000-01-14 2000-01-14 Image reproducing apparatus and digital camera

Publications (2)

Publication Number Publication Date
JP2001197414A JP2001197414A (en) 2001-07-19
JP4013433B2 true JP4013433B2 (en) 2007-11-28

Family

ID=18534960

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000006428A Expired - Fee Related JP4013433B2 (en) 2000-01-14 2000-01-14 Image reproducing apparatus and digital camera

Country Status (1)

Country Link
JP (1) JP4013433B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4706159B2 (en) * 2001-09-20 2011-06-22 株式会社ニコン Image reproducing apparatus and image reproducing method
JP4962018B2 (en) * 2007-01-25 2012-06-27 富士通株式会社 Information processing device
JP4513894B2 (en) 2008-05-16 2010-07-28 ソニー株式会社 Image processing apparatus, image processing method, image reproduction apparatus, image reproduction method, and program

Also Published As

Publication number Publication date
JP2001197414A (en) 2001-07-19

Similar Documents

Publication Publication Date Title
JP4550198B2 (en) Image reproducing apparatus, image reproducing method, image recording / reproducing method, and digital camera
US7710489B2 (en) Image reproducing apparatus and digital camera
JP4697078B2 (en) Imaging apparatus and program thereof
JP4352468B2 (en) Image reproducing apparatus, image reproducing method, image recording / reproducing method, and digital camera
JP2004193635A (en) Image reproducing apparatus
JP4562837B2 (en) Image reproducing apparatus, image reproducing method, image recording / reproducing method, and digital camera
JP2005117369A (en) Moving image recorder, moving image reproducer and digital camera
JP4654947B2 (en) Movie processing apparatus and program thereof
JP4013433B2 (en) Image reproducing apparatus and digital camera
JP4239997B2 (en) Imaging device, still image shooting method during movie shooting, and program
JP2007282279A (en) Information processing apparatus and recording medium
JP2007028331A (en) Image generating apparatus and program thereof
JP3918228B2 (en) Information processing apparatus and recording medium
JP2004120281A (en) Image editing apparatus
JP2007174278A (en) Image display device, and image displaying method
JP2006339728A (en) Imaging apparatus and program thereof
JP2005094133A (en) Photographing apparatus
JP2001257911A (en) Camera
JP4288681B2 (en) Image reproducing apparatus, image reproducing method, image recording / reproducing method, and digital camera
JP4161710B2 (en) Camera with music playback function
US20050024515A1 (en) Digital camera
JP2007222509A (en) Picture reproducing device and imaging apparatus
JP3978522B2 (en) Electronic camera
JP2006217111A (en) Moving image photographing apparatus and method
JP2008079324A (en) Image reproduction device, method of reproducing image, method of recording and reproducing image, and digital camera

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050825

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20061130

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070521

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070525

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070723

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070821

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070903

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100921

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4013433

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100921

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110921

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120921

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130921

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees