JP2002271667A - テレビ会議システムにおける画像入力に適したデジタルカメラ - Google Patents

テレビ会議システムにおける画像入力に適したデジタルカメラ

Info

Publication number
JP2002271667A
JP2002271667A JP2001062470A JP2001062470A JP2002271667A JP 2002271667 A JP2002271667 A JP 2002271667A JP 2001062470 A JP2001062470 A JP 2001062470A JP 2001062470 A JP2001062470 A JP 2001062470A JP 2002271667 A JP2002271667 A JP 2002271667A
Authority
JP
Japan
Prior art keywords
image
data
digital camera
moving image
still
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001062470A
Other languages
English (en)
Other versions
JP4564190B2 (ja
Inventor
Tatsutoshi Kitajima
達敏 北島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2001062470A priority Critical patent/JP4564190B2/ja
Priority to US10/087,955 priority patent/US7184077B2/en
Publication of JP2002271667A publication Critical patent/JP2002271667A/ja
Application granted granted Critical
Publication of JP4564190B2 publication Critical patent/JP4564190B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00283Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a television apparatus
    • H04N1/00299Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a television apparatus with a television transmission apparatus, e.g. a videophone, a teletext system or a digital television system
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • H04N1/212Motion video recording combined with still video recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00283Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a television apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/007Selecting or switching between a still picture apparatus or function and another apparatus or function

Abstract

(57)【要約】 【課題】 動画および静止画の撮影、静止画の蓄積並び
に動画および静止画のTV会議システムに適した形式で
の出力が可能なデジタルカメラを提供する。 【解決手段】 本デジタルカメラは、連続撮影により動
画を得たり、シャッターのレリーズにより静止画を撮影
して画像メモリに保存する通常の機能を有するほかに次
の手段を有する。所定の動作モードにおいて、動画を構
成する各フレームを圧縮して圧縮動画データを与える圧
縮・多重化部と、圧縮動画データを外部に適切な形式で
出力する通信インタフェースと、利用者が画像を選択す
るための画像選択手段とをさらに備える。圧縮・多重化
部は、利用者が画像を選択した場合、圧縮動画データの
代わりに選択画像を出力する。選択画像は、圧縮しない
か、動画より一般に低い圧縮率で圧縮する。動画の圧縮
には、圧縮符号化や画素の間引きを用いる。選択画像の
圧縮には、グレイスケール化または二値化を用いる。画
像の選択は、動画撮影中のレリーズボタン操作、または
画像メモリ若しくはメモリーカードなどの外部メモリに
保存された静止画の選択により行う。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、テレビ会議システ
ムの各議場において動画像および静止画像を取り込み、
且つその表示および送信を行うのに適した、動画および
静止画の撮影が可能なデジタルカメラに関する。
【0002】
【従来の技術】画像入力手段を接続したPC(パーソナ
ルコンピュータ)でネットワークを形成したTV(テレ
ビ)会議システムが既にいろいろ提案されている。例え
ば、特開平5−161136号には、各議場において1
台の電送装置に会議状況を伝える動画用カメラと静止画
を撮影する静止画用カメラとを別々に接続する方式が提
示されている。このように動画用と静止画用に別々のカ
メラを用いるのは、現在一般に使用される通信路にデー
タを転送する通信能力に限界があるために、動画像を構
成する各画像のデータ量を抑える必要があることから動
画用には解像度が低いカメラで十分であるのに対し、静
止画は印刷出力を求められることが多いため高い解像度
が必要となるからである。したがって、1台で動画と静
止画を取り込み、それぞれ適切なデータ量(または、デ
ータレート)で送信できるカメラを用いてTV会議シス
テムを構築できれば好都合である。一方、デジタルスチ
ールカメラやビデオカメラの普及に伴い、比較的短い期
間の動画も記録できるスチールカメラや、動画の指定し
たフレームをスチール再生する機能を備えたビデオカメ
ラが現在入手可能である。しかし、既存のカメラは、い
ずれもTV会議システムに使用することを考慮して製品
化されたものではないので、TV会議システムに適した
データレートや方式で動画と静止画を出力することはで
きない。
【0003】
【発明が解決しようとする課題】したがって、本発明
は、動画および静止画の撮影、少なくもと静止画の蓄
積、並びに動画および静止画のTV会議システムに適し
た形式での出力が可能なデジタルカメラを提供すること
を目的とする。
【0004】
【課題を解決するための手段】前述の目的を達成するた
め、請求項1は、TV会議システムに適したデジタルカ
メラを与える。本デジタルカメラ1は、連続撮影により
動画を得る動画撮影手段(10〜70,140,15
0)、およびシャッターのレリーズにより静止画を撮影
する静止画撮影手段(10〜70,140,150)と
該静止画を保存する画像保存手段(120)とからなる
静止画撮影保存手段を備えたデジタルカメラであり、所
定の動作モードにおいて、前記動画を構成する各フレー
ムを圧縮して圧縮動画データを与える圧縮手段(10
0)と、前記圧縮動画データを外部に適切な形式で出力
するインタフェース手段(110)と、利用者が画像を
選択することを可能とする画像選択手段(20,30,
80,85,120,2,130,150)とをさらに
備え、且つ前記圧縮手段が、利用者が前記画像選択手段
により画像を選択した場合、前記圧縮動画データの代わ
りに前記選択画像を圧縮せずそのまま与える選択画像出
力手段を含むことを特徴とする。請求項2記載のデジタ
ルカメラは、請求項1において、前記選択画像出力手段
が、前記圧縮手段の圧縮率より一般に低い静止画用圧縮
率で前記選択画像を圧縮する静止画圧縮手段を含むこと
により、前記選択画像を前記静止画用圧縮率で圧縮して
前記圧縮動画データの代わりに与えることを特徴とす
る。請求項3記載のデジタルカメラは、請求項1におい
て、前記圧縮動画データを与える前記圧縮手段が、前記
各フレームの画素を所定の要領で間引く画像縮小手段か
らなることを特徴とする。請求項4記載のデジタルカメ
ラは、請求項2において、前記選択画像出力手段が、カ
ラー画像データをグレイスケール化するグレイスケール
化手段と、利用者が前記選択画像の圧縮に前記静止画圧
縮手段および前記グレイスケール化手段の何れかを選択
できるようにする手段とをさらに備えたことを特徴とす
る。請求項5記載のデジタルカメラは、請求項2におい
て、前記選択画像出力手段が、画像データを二値化する
二値化手段と、利用者が前記選択画像の圧縮に前記静止
画圧縮手段および前記二値化手段の何れかを選択できる
ようにする手段とをさらに備えたことを特徴とする。
【0005】請求項6記載のデジタルカメラは、請求項
1において、前記画像選択手段が、シャッタと、シャッ
タのレリーズボタンと、前記所定の動作モードにおける
利用者による前記レリーズボタンの操作に関係付けて撮
影された画像を選択画像とする動画選択手段とからなる
ことを特徴とする。請求項7記載のデジタルカメラは、
請求項1において、前記画像選択手段が、利用者が前記
画像保存手段に保存された静止画から選択することを可
能とする手段からなることを特徴とする。請求項8記載
のデジタルカメラは、請求項7において、前記デジタル
カメラは、着脱可能な外部記憶装置と前記画像保存手段
との間のデータ転送を双方向に可能とする外部記憶装置
インタフェース手段をさらに備えたことを特徴とする。
請求項9記載のデジタルカメラは、請求項1または6に
おいて、前記静止画撮影手段および前記動画選択手段
は、時間的に連続して2枚撮影した画像を合成すること
により前記選択画像を得る手段を含むことを特徴とす
る。請求項10記載のデジタルカメラは、請求項1にお
いて、前記選択画像の出力開始から出力終了までの選択
画像出力期間の間に出力される前記選択画像と前記圧縮
動画データの総量(これを総転送量と称する)に対する
前記選択画像出力期間に出力される前記選択画像の量
(これを選択画像転送量と称する)の比率(これを選択
画像転送率と称する)を利用者が指定する選択ボタンを
前記デジタルカメラがさらに備え、且つ前記圧縮手段
が、前記選択ボタンにより前記選択画像転送率が100
%以外に指定されているときに利用者が前記画像選択手
段により画像を選択した場合、指定の選択画像転送率と
なるように前記選択画像を前記圧縮動画データと時分割
多重化して出力する手段をさらに備えたことを特徴とす
る。請求項11記載のデジタルカメラは、請求項1にお
いて、前記圧縮手段が、利用者が前記画像選択手段によ
り画像を選択した場合、前記選択画像を前記圧縮動画デ
ータと時分割多重化して出力する多重化手段をさらに備
え、且つ前記多重化手段が、前記選択画像のデータ量が
比較的小さい場合は、前記圧縮動画データの送信レート
を上げ、前記選択画像のデータ量が比較的大きい場合
は、前記圧縮動画データの送信レートを下げる手段を含
むことを特徴とする。
【0006】請求項12記載のデジタルカメラは、請求
項1において、画像を表示する画像表示手段と、外部か
ら画像データを受信する画像入力手段と、受信した画像
データから静止画(即ち、選択画像)を分離して前記画
像保存手段に保存する分離手段と、前記分離器を通った
画像データ(即ち、動画)を伸張する伸張手段と、前記
圧縮手段の出力と前記の受信した画像データとの何れを
表示するべきかを利用者が指定するための手段とをさら
に備えることにより、送信中の画像データと前記の受信
した画像データとを選択して見ることを可能とすること
を特徴とする。請求項13は、音声を音声データとして
入力し保存する音声入力保存手段、およびシャッターの
レリーズにより静止画を撮影する静止画撮影手段と該静
止画を保存する画像保存手段とからなる静止画撮影保存
手段を備え、TV会議システムに適したデジタルカメラ
である。本デジタルカメラは、所定の動作モードにおい
て前記音声データを適切な形式で外部に出力するインタ
フェース手段と、シャッターのレリーズによる静止画の
撮影または前記画像保存手段に保存されている画像の指
定の何れかにより利用者が画像を選択できるようにする
画像選択手段と、前記所定の動作モードにおいて利用者
が前記画像選択手段により画像を選択した場合、前記音
声データの代わりに前記選択画像を適切な形式で外部に
出力する手段を備えたことを特徴とする。
【0007】
【発明の実施の形態】以下、本発明の実施の形態例と添
付図面により本発明を詳細に説明する。 (実施の形態)図1は、本発明の一実施例によるデジタ
ルカメラの概念を示す略ブロック図である。図1のデジ
タルカメラ1は、レンズ部10;メカニカルシャッタ2
0;レンズ部10のレンズとシャッタ20を動かす各モ
ータを駆動するモータドライバ30;スチールカメラと
して十分な数(例えば、1280×960)の画素を備
えたCCD(電荷結合素子)40;CCD駆動回路5
0;CCD信号の相関二重サンプリング及びA/D変換
(アナログからデジタルへの変換)を行う信号処理部6
0;A/D変換されだデジタル信号を輝度Y、色差U,
V信号に変換する画像処理部70;撮影された動画およ
び蓄積・選択された静止画を表示するための画像表示制
御部80;画像表示制御部80の出力を表示する画像表
示部85;画像表示制御部80からの信号を外部のビデ
オモニタに出力するビデオ出力IF90;撮影された動
画を(実施例によっては、蓄積・選択された静止画もそ
れぞれ)指定されたデータレートで所定のフォーマット
に圧縮し、送信すべき静止画がある場合には圧縮された
動画と静止画とを多重化する圧縮・多重化部100;圧
縮・多重化部100からの画像出力信号を、他の議場と
の通信制御を行うPCまたは通信制御装置に出力するた
めの通信IF(インタフェース)110;静止画像を一
時的に記憶する画像メモリ120;画像を蓄積する着脱
可能な外部メモリ2を接続するための外部メモリIF1
30;カメラ1全体を制御する中央制御部140;およ
び利用者がカメラ1を操作するための各種スイッチ類を
備えた操作部150からなる。以上の構成要素のうち、
要素10〜90、画像メモリ120および外部メモリI
F130は、通常のビデオカメラまたはスチールカメラ
と同じであるから、詳細な説明は省略する。なお、必ず
外部表示装置へ接続することを前提とする場合は、画像
表示装置85を省略することができる。
【0008】また、カメラ1に接続するPCまたは通信
制御装置は、カメラ1からの画像出力を伸張し表示する
機能を持つので、TV会議の用途だけを考えれば、ビデ
オ出力IF90は不要であるが、通常のスチールカメラ
として使用することも考えれば、ビデオ出力IF90を
備える方が好ましい。図示しないPCまたは通信制御装
置は、図1のカメラ1のほか、図1以外の各議場のPC
または通信制御装置と通信手段で接続されていて、各議
場から送られる画像の表示を利用者の指示に従って制御
する。カメラ1とPCまたは通信制御装置との接続は、
有線で行っても無線で行ってもよい。有線の場合、例え
ばUSB(Universal Serial Bus)を用いることができ
る。カメラ1をPCまたは通信制御装置に接続してTV
会議に利用する場合、利用者は、まず操作部150の所
定のスイッチ(図示せず)によりTV会議モードに設定
する。
【0009】以下において、デジタルカメラ1のTV会
議モードの動作を説明する。カメラ1は、TV会議モー
ドでは通常、動画撮影を行い、撮影した各フレームを圧
縮・多重化部100で指定されたレートに圧縮し、圧縮
した画像データを通信IF110を通して出力する。し
かし、送信再生される画像は低解像であり、会議中にも
っと対象物の高解像なデータで打ち合わせ必要な場合か
出てくる。この場合、本発明によるTV会議モードで
は、動画の連続データを送信中であっても、利用者がレ
リーズボタンを押した瞬間の画像(これを選択画像と称
する)は、圧縮せずに画像メモリ120に保存すると同
時に、通信IF110を介して出力する。また、画像メ
モリ120に予め撮影・保存されていた静止画像の何れ
かを利用者が指定し場合も、指定された画像(これも選
択画像と称する)を通信IF110を介して出力する。
もちろん、外部メモリ2に保存されていた画像から選択
して出力することも可能である。また、画像の選択に
は、画像表示部85を利用して対話的に選択できるよう
にしてもよい。なお、通常のデジタルカメラはデータ保
護のため、記録媒体の藻イ検知用SWを常時チェックし
ており、記録媒体が無い場合や抜こうとした場合、これ
を検出してカメラ動作を停止するようになっている。本
発明は利用者設定により、カメラが撮像データを外部に
送信しているモード(TV会議モード)の最中は、記録
媒体の交換ができるように構成することが好ましい。こ
のようにすることにより、TV会議中でも外部メモリ2
を交換して必要な静止画を送信できるようになる。選択
画像の送信が終了すると同時に、圧縮・多重化部100
は、撮影中の動画の送信を再会する。この送信方法は、
動画の送信を一時中断して静止画(選択画像)1フレー
ムを一度に送信するので、静止画は素早く送信すること
ができるが、その間、動画が送信されないので、受信側
で動画像が途切れることになる。この点を解決するため
に、選択画像の送信開始から送信終了までの選択画像送
信期間の間に送信される選択画像と動画の総量(即ち、
総転送量)に対する同期間に送信される選択画像の量
(即ち、選択画像転送量)の比率(即ち、選択画像転送
率)を指定する選択ボタンを操作部150に設け、利用
者が選択画像転送率を選択できるようにしてもよい。こ
の割合が100%の場合が、既に述べた1フレームの選
択画像の一括送信に相当する。選択画像転送率が100
%以外の時は、圧縮・多重化部100は、指定の比率に
なるように1フレームの静止画を動画と時分割多重化し
て出力する。
【0010】また、選択画像転送率を利用者が指定する
代わりに、中央制御部140が自動的に制御することも
可能である。即ち、複数レベルの選択画像転送率を用意
し、選択画像のデータ量が小さい場合は、連続画像の送
信レートを高くし(即ち、選択画像転送率のレベルを下
げ)て滑らかな動画の動きを確保する。一方、選択画像
のデータ量が大きい場合は、連続データ送信レートを小
さくする(即ち、選択画像転送率のレベルを上げる)こ
とにより、動画はぎこちなくなるが、選択画像のデータ
送信時間をある一定の範囲内に納めるようにすることが
できる。なお、画像処理部70は、撮影された画像が静
止画の場合、動画と区別するためのコードまたはデータ
を画像の所定の位置に挿入することが望ましい。このよ
うにすることにより、静止画と動画を容易に区別できる
ので、カメラ1内部での再生でも送信先における再生で
も、静止画を示すコードを含む画像を受け取った場合、
その画像を繰り返し表示すればよい。さらに、静止画を
送ったカメラ1の画像処理部70は、その静止画の再生
を停止するタイミングの動画の所定の位置に静止画停止
を示すコードまたはデータを挿入するようにする。これ
により、静止画を再生中のカメラは、静止画停止を示す
コードまたはデータを含む動画を受信するまで静止画の
再生を繰り返せばよいことになる。
【0011】圧縮・多重化部100が、圧縮率を制御す
る機能がある場合、連続画像は高い圧縮率で圧縮し、静
止画または選択画像はより低い圧縮率で圧縮するように
してもよい。圧縮・多重化部100の圧縮方式として
は、例えば、動画に対してMPEGなどの高効率の圧縮
方式を用いるほか、次のような種々の圧縮方法を用いる
ことができる。 1)動画の画素を間引く:撮影したままのフル画像から
水平・垂直方向にライン数を減らし、例えば320×2
40画素程度に縮小する事ができる。この場合、撮影時
に垂直ラインを間引き、圧縮・多重化部100で水平ラ
インを間引くようにしてもよい。 2)選択画像をグレイスケール化または二値化する:撮
影された画像は処理されY(輝度)と、UおよびV(色
差)となる。Yは8bitデータで0〜255の値をと
る多値データである。静止画のうちカラーである必要の
ないものは、Yデータのみを出力することにより、カラ
ーの場合に比べてデータレートを下げることができる。
さらに、圧縮・多重化部100に二値化機能を持たせて
もよい。即ち、画面全体の平均輝度を閾値として各Yデ
ータを“1”、“0”の二値データに変換する。例え
ば、文書、図面、線画などのような二値画像でよいもの
は、選択画像として二値化して送れば、データレートを
グレイスケールよりさらに低減させることができる。以
上はデータレートを低減する技術を述べたが、高品質の
画像が必要な場合もある。このため、デジタルカメラ1
を次のように構成してもよい。即ち、撮影素子を上下に
移動できる圧電素子(図示せず)を備え、1枚撮影後
に、CCD40を上に1画素移動し、2枚めを撮影す
る。CCD40はRGBのフィルタが市松配列されてい
るため、各色の情報が全画素に対して得られるわけでは
ない。通常は補間により全画素の色情報を得ているが、
補間式はLPF(ローパスフィルタ)効果をもつため、
画像がぼける原因となる。そこで、1画素ずらした2枚
目の画像を用いれば、これからY信号に大きく寄与する
G信号が全ての画素について得られるため、Yに関して
補間を用いる必要がなく、高解像度の画像が得られる。
この画像データを送れば、CCD40の画素サイズ以上
の高品質なデータを送ることができる。したがって、例
えば、CCD自体は低画素で動画用であっても、解像度
の高い画像を作成し送ることができる。
【0012】デジタルカメラ1は、外部装置から画像デ
ータを受信する画像入力インタフェース(図示せず)、
受信した画像データから静止画(即ち、選択画像)を分
離して画像メモリ120に保存する分離器(図示せ
ず)、分離器を通った画像データ(即ち、動画)を伸張
する伸張器(図示せず)、および圧縮・多重化部100
の出力と受信した画像データとの何れを表示するべきか
を利用者が指定するための手段をさらに備えて、画像表
示部85に外部からの連続画像や選択画像を表示または
蓄積・表示できるように構成してもよい。カメラ1がこ
のような構造を持ち、且つ1個人に使用されるような場
合、外部のPCまたは通信制御装置自体は、画像を伸張
・表示する機能を持つ必要は無くなる。利用者は送信中
の連続画像と相手からの連続画像を選択して見ることが
できる。
【0013】<<音声通信機能を備えたデジタルカメラ>>
また、動画撮影機能に代わり又はこれに加えて、マイク
(図示せず)、マイク入力信号の帯域制限および増幅を
行うアナログ処理部(図示せず)、さらにアナログ処理
部の出力の符号する符号器を備えることにより、利用者
の音声を外部メモリ2に格納したり、通信インタフェー
スを介して出力することが可能となる。このような構成
の場合、テレビ会議モードでは、マイクから入力した音
声データは、通常、音声インタフェースを通して出力
し、利用者が画像を選択した場合、音声データの代わり
に選択された画像を通信インタフェース110を介して
外部に出力するようにしてもよい。あるいは、利用者が
画像を選択した場合、音声データと択された画像とを時
分割して出力してもよい。ここで、画像を選択する方法
としては、シャッターのレリーズにより静止画を撮影す
ること、及び画像メモリ120または外部メモリ2に保
存されている画像から選択することが考えられる。ま
た、通常は、連続的に動画を送信しているときに選択さ
れた静止画のデータ量が多い場合、動画を送信する代わ
りに、音声のみに切り換えて、静止画データの送信を早
期に終了させることも可能である。 上述の実施例にお
いては動画と静止画とを同一の通信路にて時分割で送信
したが、動画と静止画のそれぞれに対して、インタフェ
ースと通信路を設けてもよい。外部メモリ2としては、
現時点では何らかのメモリカードを用いることになる
が、将来、小型でアクセス速度が早く且つ大容量の光デ
ィスクが利用できるようになれば、外部メモリ2には、
静止画のみならず、ある程度の長さの動画であれば圧縮
した形で記録することが可能となる(この時点で、一般
ユーザ市場においては、ビデオカメラとデジタルスチー
ルカメラの区別は消滅する)。その場合、会議中の必要
な時に、撮影中の動画の代わりに外部メモリ2に記録さ
れた動画を選択して送信することも可能となる。
【0014】以上は、本発明の説明のために実施の形態
の例を掲げたに過ぎない。したがって、本発明の技術思
想または原理に沿って上述の実施の形態に種々の変更、
修正または追加を行うことは、当業者には容易である。
故に、本発明は、以上述べた実施の形態に捕らわれるこ
となく、ただ特許請求の範囲の記載に従って解釈するべ
きである。
【0015】
【発明の効果】請求項1によれば、低解像度だがリアル
タイム性のある連続データと必要に応じて詳細情報を含
む高解像度のデータを一台のカメラで簡単に、かつ動画
データを途切れさせることなく外部装置に送信でき、T
V会議システムなどに有用である。請求項2によれば、
装置内にデータ圧縮率制御機能を持つことで、請求項1
の低解像度データには高圧縮データを、また高解像度デ
ータには低圧縮率データを用いることができる。請求項
3によれば、装置内に画像サイズ変更機能を持つこと
で、請求項1の低解像度データには画像サイズ縮小デー
タを、また高解像度データには画像サイズ縮小なしのデ
ータを用いることができる。請求項4によれば、選択画
像をグレイスケール化することによりデータ量を減らす
ことができる。請求項5によれば、選択画像を二値化す
ることにより、さらにデータ量を減らすことができる。
請求項6によれば、撮影中の動画から選択画像を選ぶこ
とができる。請求項7によれば、画像保存手段に保存さ
れている静止画から選択画像を選ぶことができる。請求
項8によれば、TV会議中に着脱可能な外部メモリを交
換して、装着した外部メモリに保存されている静止画か
ら選択画像を選んで送信することができる。
【0016】請求項9によれば、CCD自体は低画素で
動画用であっても、解像度の高い画像を作成し送ること
ができる。請求項10によれば、カメラは動画データと
選択画像のレートを変更できることにより、リアルタイ
ム画像を重視して、ゆっくりバックグランドで選択画像
を送ったり、又は動画データレートを落とし、高速に選
択画像を送ることもできる。請求項11によれば、カメ
ラは選択画像のデータサイズをチェックし、選択画像転
送率を制御することでリアルタイムの動画データの品
位、及び選択画像の送信時間性能を確保できる。請求項
12によれば、カメラ本体に表示部を持ち、動画デー
タ、選択画像、及び外部からの受信データを選択的に表
示することにより、外部装置の表示によらない、カメラ
本体での操作性及び外部から受信したデータの情報視認
性を上げることができる。請求項13によれば、音声に
よる会議と平行して画像データを送ることも可能とな
る。
【図面の簡単な説明】
【図1】本発明の一実施例によるデジタルカメラの概念
を示す略ブロック図である。
【符号の説明】
1 本発明のデジタルカメラ、2 外部メモリ、10
レンズ部、20 メカニカルシャッター、30 モータ
ドライバ、40 CCD、50 CCD駆動回路、60
信号処理部、70 画像処理部、80 画像表示制御
部、85 画像表示部、90 ビデオ出力IF、100
画像圧縮部、110 通信IF、120画像メモリ、
130 外部メモリIF、140 中央制御部、150
操作部
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 5/93 H04N 5/91 L 7/08 R 7/081 5/92 H 7/15 630 5/93 Z // H04N 101:00 7/08 Z Fターム(参考) 5C022 AA13 AB68 AC01 AC52 AC69 AC78 5C023 AA14 AA37 AA38 CA01 CA04 CA08 DA04 5C053 FA05 FA08 FA10 GB17 GB28 HA29 JA01 KA04 KA08 KA26 LA01 LA06 LA14 5C063 AB03 AB05 AC01 AC02 AC05 CA11 CA12 CA20 5C064 AA02 AB03 AB04 AC04 AC06 AD01 AD14

Claims (13)

    【特許請求の範囲】
  1. 【請求項1】 連続撮影により動画を得る動画撮影手
    段、およびシャッターのレリーズにより静止画を撮影す
    る静止画撮影手段と該静止画を保存する画像保存手段と
    からなる静止画撮影保存手段を備えたデジタルカメラで
    あり、該デジタルカメラが、 所定の動作モードにおいて、前記動画を構成する各フレ
    ームを圧縮して圧縮動画データを与える圧縮手段と、 前記圧縮動画データを適切な形式で外部に出力するイン
    タフェース手段と、 シャッターのレリーズによる静止画の撮影または前記画
    像保存手段に保存されている画像の指定の何れかにより
    利用者が画像を選択できるようにする画像選択手段とを
    備え、 前記圧縮手段が、利用者が前記画像選択手段により画像
    を選択した場合、前記圧縮動画データの代わりに前記選
    択画像を圧縮せずそのまま与える選択画像出力手段を含
    むことを特徴とするTV会議システムに適したデジタル
    カメラ。
  2. 【請求項2】 前記選択画像出力手段が、前記圧縮手段
    の圧縮率より一般に低い静止画用圧縮率で前記選択画像
    を圧縮する静止画圧縮手段を含むことにより、前記選択
    画像を前記静止画用圧縮率で圧縮して前記圧縮動画デー
    タの代わりに与えることを特徴とする請求項1記載のデ
    ジタルカメラ。
  3. 【請求項3】 前記圧縮動画データを与える前記圧縮手
    段が、前記各フレームの画素を所定の要領で間引く画像
    縮小手段からなることを特徴とする請求項1記載のデジ
    タルカメラ。
  4. 【請求項4】 前記選択画像出力手段が、カラー画像デ
    ータをグレイスケール化するグレイスケール化手段と、
    利用者が前記選択画像の圧縮に前記静止画圧縮手段およ
    び前記グレイスケール化手段の何れかを選択できるよう
    にする手段とをさらに備えたことを特徴とする請求項2
    記載のデジタルカメラ。
  5. 【請求項5】 前記選択画像出力手段が、画像データを
    二値化する二値化手段と、利用者が前記選択画像の圧縮
    に前記静止画圧縮手段および前記二値化手段の何れかを
    選択できるようにする手段とをさらに備えたことを特徴
    とする請求項2記載のデジタルカメラ。
  6. 【請求項6】 前記画像選択手段が、シャッタと、シャ
    ッタのレリーズボタンと、前記所定の動作モードにおけ
    る利用者による前記レリーズボタンの操作に関係付けて
    撮影された画像を選択画像とする動画選択手段とからな
    ることを特徴とする請求項1記載のデジタルカメラ。
  7. 【請求項7】 前記画像選択手段が、利用者が前記画像
    保存手段に保存された静止画から選択することを可能と
    する手段からなることを特徴とする請求項1記載のデジ
    タルカメラ。
  8. 【請求項8】 前記デジタルカメラは、着脱可能な外部
    記憶装置と前記画像保存手段との間のデータ転送を双方
    向に可能とする外部記憶装置インタフェース手段をさら
    に備え、且つ前記外部記憶装置インタフェース手段は、
    前記所定の動作モードにおける前記外部記憶装置の着脱
    を可能とすることを特徴とする請求項7記載のデジタル
    カメラ。
  9. 【請求項9】 前記静止画撮影手段および前記動画選択
    手段は、時間的に連続して2枚撮影した画像を合成する
    ことにより前記選択画像を得る手段を含むことを特徴と
    する請求項1または6記載のデジタルカメラ。
  10. 【請求項10】 前記選択画像の出力開始から出力終了
    までの選択画像出力期間の間に出力される前記選択画像
    と前記圧縮動画データの総量(これを総転送量と称す
    る)に対する前記選択画像出力期間に出力される前記選
    択画像の量(これを選択画像転送量と称する)の比率
    (これを選択画像転送率と称する)を利用者が指定する
    選択ボタンを前記デジタルカメラがさらに備え、且つ前
    記圧縮手段が、前記選択ボタンにより前記選択画像転送
    率が100%以外に指定されているときに利用者が前記
    画像選択手段により画像を選択した場合、指定の選択画
    像転送率となるように前記選択画像を前記圧縮動画デー
    タと時分割多重化して出力する手段をさらに備えたこと
    を特徴とする請求項1記載のデジタルカメラ。
  11. 【請求項11】 前記圧縮手段が、利用者が前記画像選
    択手段により画像を選択した場合、前記選択画像を前記
    圧縮動画データと時分割多重化して出力する多重化手段
    をさらに備え、且つ前記多重化手段が、前記選択画像の
    データ量が比較的小さい場合は、前記圧縮動画データの
    送信レートを上げ、前記選択画像のデータ量が比較的大
    きい場合は、前記圧縮動画データの送信レートを下げる
    手段を含むことを特徴とする請求項1記載のデジタルカ
    メラ。
  12. 【請求項12】 画像を表示する画像表示手段と、 外部から画像データを受信する画像入力手段と、 受信した画像データから静止画(即ち、選択画像)を分
    離して前記画像保存手段に保存する分離手段と、前記分
    離器を通った画像データ(即ち、動画)を伸張する伸張
    手段と、 前記圧縮手段の出力と前記の受信した画像データとの何
    れを表示するべきかを利用者が指定するための手段とを
    さらに備えることにより、送信中の画像データと前記の
    受信した画像データとを選択して見ることを可能とする
    ことを特徴とする請求項1記載のデジタルカメラ。
  13. 【請求項13】 音声を音声データとして入力し保存す
    る音声入力保存手段、およびシャッターのレリーズによ
    り静止画を撮影する静止画撮影手段と該静止画を保存す
    る画像保存手段とからなる静止画撮影保存手段を備えた
    デジタルカメラであり、該デジタルカメラが、 所定の動作モードにおいて前記音声データを適切な形式
    で外部に出力するインタフェース手段と、 シャッターのレリーズによる静止画の撮影または前記画
    像保存手段に保存されている画像の指定の何れかにより
    利用者が画像を選択できるようにする画像選択手段と、 前記所定の動作モードにおいて利用者が前記画像選択手
    段により画像を選択した場合、前記音声データの代わり
    に前記選択画像を適切な形式で外部に出力する手段とを
    備えたことを特徴とするTV会議システムに適したデジ
    タルカメラ。
JP2001062470A 2001-03-06 2001-03-06 テレビ会議システムにおける画像入力に適したデジタルカメラ Expired - Fee Related JP4564190B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2001062470A JP4564190B2 (ja) 2001-03-06 2001-03-06 テレビ会議システムにおける画像入力に適したデジタルカメラ
US10/087,955 US7184077B2 (en) 2001-03-06 2002-03-05 Digital camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001062470A JP4564190B2 (ja) 2001-03-06 2001-03-06 テレビ会議システムにおける画像入力に適したデジタルカメラ

Publications (2)

Publication Number Publication Date
JP2002271667A true JP2002271667A (ja) 2002-09-20
JP4564190B2 JP4564190B2 (ja) 2010-10-20

Family

ID=18921601

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001062470A Expired - Fee Related JP4564190B2 (ja) 2001-03-06 2001-03-06 テレビ会議システムにおける画像入力に適したデジタルカメラ

Country Status (2)

Country Link
US (1) US7184077B2 (ja)
JP (1) JP4564190B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007143118A (ja) * 2005-09-12 2007-06-07 Victor Co Of Japan Ltd 撮像装置
JP2010124425A (ja) * 2008-11-21 2010-06-03 Sony Corp 情報処理装置、データ転送方法および通信システム
JP2013243531A (ja) * 2012-05-21 2013-12-05 Casio Comput Co Ltd 撮像装置、撮像処理方法、プログラム、撮像処理システム
KR20160058001A (ko) * 2014-11-14 2016-05-24 삼성전자주식회사 멀티미디어 클립을 생성하는 방법 및 시스템

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10210327B4 (de) * 2002-03-08 2012-07-05 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Digitale Laufbildkamera
DE10218313B4 (de) * 2002-04-24 2018-02-15 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Digitale Laufbildkamera
JP2004289631A (ja) * 2003-03-24 2004-10-14 Fuji Photo Film Co Ltd デジタルカメラ
KR101022470B1 (ko) * 2004-01-13 2011-03-15 삼성전자주식회사 영상신호를 기록 및 재생할 수 있는 디지털 카메라
KR20050090800A (ko) * 2004-03-10 2005-09-14 삼성전자주식회사 복합촬영장치 및 그것을 이용한 음향기록방법
JP3873994B2 (ja) * 2004-07-14 2007-01-31 コニカミノルタフォトイメージング株式会社 撮像装置、及び画像取得方法
JP4564810B2 (ja) * 2004-09-14 2010-10-20 キヤノン株式会社 撮像装置
TWI264544B (en) * 2005-02-16 2006-10-21 Delta Electronics Inc A real-time measurement system for a motor driver
JP2007158553A (ja) * 2005-12-02 2007-06-21 Sony Corp マルチコーデックカメラシステムおよび画像取得プログラム
FR2923339B1 (fr) * 2007-11-05 2009-12-11 Commissariat Energie Atomique Procede de lecture d'une matrice bidimensielle de pixels et dispositif pour la mise en oeuvre d'un tel procede
KR101487434B1 (ko) 2007-11-14 2015-01-29 삼성전자 주식회사 디스플레이장치 및 그 제어방법
KR20100089287A (ko) * 2009-02-03 2010-08-12 삼성전자주식회사 텔레비전 시스템 및 그 제어방법
KR20130076947A (ko) 2011-12-29 2013-07-09 삼성전자주식회사 영상장치 및 그 제어방법
US11949529B2 (en) * 2021-10-17 2024-04-02 Apple Inc. Camera format selection

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0260387A (ja) * 1988-08-26 1990-02-28 Mitsubishi Electric Corp 静止画テレビ電話伝送方式
JPH0623163A (ja) * 1992-07-07 1994-02-01 Janome Sewing Mach Co Ltd メモリーカードの着脱装置を備えたミシン
JPH08161465A (ja) * 1994-12-02 1996-06-21 Sony Corp 画像データファイル作成方法、記録媒体及び画像作成方法
JPH08168029A (ja) * 1994-12-14 1996-06-25 Canon Inc 画像入力装置
JPH08275098A (ja) * 1995-04-03 1996-10-18 Konica Corp ビデオカメラ
JPH0934685A (ja) * 1995-05-17 1997-02-07 Hitachi Ltd データ変換装置、データ変換装置を備えたネットワークシステムおよびデータ伝送方法
JPH09299722A (ja) * 1996-05-17 1997-11-25 Yasuyuki Imato 流体からの異物除去装置
JPH11308585A (ja) * 1998-04-20 1999-11-05 Fujitsu General Ltd テレビ電話システム
JP2001016491A (ja) * 1999-06-30 2001-01-19 Ricoh Co Ltd デジタルスチルカメラ

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US250129A (en) * 1881-11-29 Speaking-telephone
US220329A (en) * 1879-10-07 Improvement in pounder washing-machines
US5109249A (en) 1989-10-12 1992-04-28 Ricoh Company, Ltd. Camera with a function of preventing a hand moving blur
JPH05188435A (ja) 1991-05-28 1993-07-30 Ricoh Co Ltd カメラ
JPH05161136A (ja) 1991-12-05 1993-06-25 Nec Corp テレビ会議システム
JPH08227097A (ja) 1995-02-21 1996-09-03 Ricoh Co Ltd カメラ装置
JP3540485B2 (ja) 1995-04-13 2004-07-07 株式会社リコー 電子スチルカメラ
JPH08289156A (ja) 1995-04-18 1996-11-01 Ricoh Co Ltd 電子スチルカメラの画像信号符号化装置
JP3682353B2 (ja) 1996-02-29 2005-08-10 株式会社リコー 画像圧縮方法および画像圧縮装置
JPH09322191A (ja) 1996-03-29 1997-12-12 Ricoh Co Ltd 画像入力装置
US5959622A (en) * 1996-05-31 1999-09-28 Intel Corporation Still image capture under computer control in response to user-instructed trigger
JPH10126796A (ja) * 1996-09-12 1998-05-15 Eastman Kodak Co デュアル・モード・ソフトウェア処理を用いた動画・静止画像用デジタル・カメラ
JPH10108121A (ja) * 1996-09-25 1998-04-24 Nikon Corp 電子カメラ
US6058210A (en) * 1997-09-15 2000-05-02 Xerox Corporation Using encoding cost data for segmentation of compressed image sequences
JP3530372B2 (ja) * 1998-02-17 2004-05-24 三洋電機株式会社 画像記録再生装置
JP4191869B2 (ja) * 1999-12-20 2008-12-03 富士フイルム株式会社 ディジタルカメラを用いたコンピュータシステム
TW502532B (en) * 1999-12-24 2002-09-11 Sanyo Electric Co Digital still camera, memory control device therefor, apparatus and method for image processing
KR100314044B1 (ko) * 2000-01-21 2001-11-16 구자홍 다양한 기능을 갖는 피씨 카메라

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0260387A (ja) * 1988-08-26 1990-02-28 Mitsubishi Electric Corp 静止画テレビ電話伝送方式
JPH0623163A (ja) * 1992-07-07 1994-02-01 Janome Sewing Mach Co Ltd メモリーカードの着脱装置を備えたミシン
JPH08161465A (ja) * 1994-12-02 1996-06-21 Sony Corp 画像データファイル作成方法、記録媒体及び画像作成方法
JPH08168029A (ja) * 1994-12-14 1996-06-25 Canon Inc 画像入力装置
JPH08275098A (ja) * 1995-04-03 1996-10-18 Konica Corp ビデオカメラ
JPH0934685A (ja) * 1995-05-17 1997-02-07 Hitachi Ltd データ変換装置、データ変換装置を備えたネットワークシステムおよびデータ伝送方法
JPH09299722A (ja) * 1996-05-17 1997-11-25 Yasuyuki Imato 流体からの異物除去装置
JPH11308585A (ja) * 1998-04-20 1999-11-05 Fujitsu General Ltd テレビ電話システム
JP2001016491A (ja) * 1999-06-30 2001-01-19 Ricoh Co Ltd デジタルスチルカメラ

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007143118A (ja) * 2005-09-12 2007-06-07 Victor Co Of Japan Ltd 撮像装置
JP2010124425A (ja) * 2008-11-21 2010-06-03 Sony Corp 情報処理装置、データ転送方法および通信システム
JP2013243531A (ja) * 2012-05-21 2013-12-05 Casio Comput Co Ltd 撮像装置、撮像処理方法、プログラム、撮像処理システム
KR20160058001A (ko) * 2014-11-14 2016-05-24 삼성전자주식회사 멀티미디어 클립을 생성하는 방법 및 시스템
KR102392002B1 (ko) * 2014-11-14 2022-04-28 삼성전자주식회사 멀티미디어 클립을 생성하는 방법 및 시스템

Also Published As

Publication number Publication date
US20020126211A1 (en) 2002-09-12
US7184077B2 (en) 2007-02-27
JP4564190B2 (ja) 2010-10-20

Similar Documents

Publication Publication Date Title
JP3839526B2 (ja) ディジタルカメラ
JP3548191B2 (ja) カメラ
JP2002271667A (ja) テレビ会議システムにおける画像入力に適したデジタルカメラ
US8194143B2 (en) Digital camera apparatus and recording method thereof
US7986345B2 (en) Image pickup apparatus, image processing method, and program
JP2000253342A (ja) ディジタルカメラ
US6697106B1 (en) Apparatus for processing image signals representative of a still picture and moving pictures picked up
JP4245782B2 (ja) 撮像装置
JP2003134386A (ja) 撮像装置および撮像方法
JP2001024929A (ja) ディジタルカメラ
JP2003259161A (ja) 撮像装置および撮像方法
JP2003125331A (ja) 画像記録方法及び装置、並びに画像再生方法及び装置
JP5131954B2 (ja) ビデオレコーダ並びにカメラシステム
JP3109855B2 (ja) 電子カメラ、画像信号圧縮装置及びその方法
JP4185780B2 (ja) サムネイル画像作成装置及びサムネイル画像作成方法
JP2005039668A (ja) 撮像装置
KR100211839B1 (ko) 디지털 비디오 캠코더에서 화상 고효율 전송방법
JP2005191697A (ja) 動画撮影装置、動画記録方法、および、動画記録プログラム
JP2005159538A (ja) 撮像装置
JPH08297738A (ja) 撮像装置および画像入力装置
JPH09284755A (ja) デジタル撮像装置、デジタル画像インターフェース装置およびデジタル画像取り込み装置
JPH0923374A (ja) デジタルスチルカメラ、及びテレビ会議システム
JP2005136794A (ja) カメラのデータ記録方法
JP2002044521A (ja) 簡易画像合成装置及びその方法
JP2001275081A (ja) 動画像記録装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080222

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100326

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100720

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100730

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130806

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees