JP2003204470A - ハンドヘルド装置のマイクロカメラモジュールの画像安定化装置およびハンドヘルド装置のマイクロカメラモジュールを安定化させる方法 - Google Patents

ハンドヘルド装置のマイクロカメラモジュールの画像安定化装置およびハンドヘルド装置のマイクロカメラモジュールを安定化させる方法

Info

Publication number
JP2003204470A
JP2003204470A JP2002301025A JP2002301025A JP2003204470A JP 2003204470 A JP2003204470 A JP 2003204470A JP 2002301025 A JP2002301025 A JP 2002301025A JP 2002301025 A JP2002301025 A JP 2002301025A JP 2003204470 A JP2003204470 A JP 2003204470A
Authority
JP
Japan
Prior art keywords
handheld device
image sensor
lens
image
lens assembly
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002301025A
Other languages
English (en)
Other versions
JP3950399B2 (ja
Inventor
Dutta Amit
アミット ダッタ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Oyj
Original Assignee
Nokia Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Oyj filed Critical Nokia Oyj
Publication of JP2003204470A publication Critical patent/JP2003204470A/ja
Application granted granted Critical
Publication of JP3950399B2 publication Critical patent/JP3950399B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/685—Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145—Handheld terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Adjustment Of Camera Lenses (AREA)

Abstract

(57)【要約】 【課題】 マイクロカメラモジュールを備えるハンドヘ
ルド装置に画像安定化を提供する 【解決手段】 例えば携帯電話とし得るハンドヘルド装
置と一体のマイクロカメラの光学レンズによってキャプ
チャされた画像を安定化させるための方法およびハンド
ヘルド装置。モーションセンサが装置の動きを検出し、
検出された動きを実質的に補償するためにマイクロカメ
ラの移動を生じさせ、ハンドヘルド装置のディスプレイ
によって、または遠隔のディスプレイといった他の場所
で表示される安定した合焦画像を維持するために使用さ
れる。マイクロカメラは、カメラのレンズの軸にほぼ垂
直な水平面においてカメラを動かし、かつ／または、レ
ンズ軸を回転させるようにカメラを動かす、１つ以上の
モーションアクチュエータによって動かされる。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、画像安定化、詳細
には、画像を安定化させるための方法およびハンドヘル
ド装置に関する。
【０００２】
【従来の技術】モバイルまたはハンドヘルドターミナル
といったハンドヘルド装置は、伝統的な有線電話器に優
る極めて大きな融通性を提供する。これらのハンドヘル
ド装置は、住居、職場または公衆電話以外の場所でデー
タ、音声および／またはビデオの通信を可能にする。そ
うした情報の通信を増強するために、多くのハンドヘル
ド装置は、特別な構成要素および機能を備えてきた。例
えば、ハンドヘルド装置は、ビデオおよび画像を処理し
提供するためにマイクロカメラモジュールを備える。
【０００３】
【発明が解決しようとする課題】ビデオや画像を提供す
る際の１つの問題は、ハンドヘルド装置がわずかに動い
た場合にすでに合焦した画像を安定化させることであ
る。現在の画像安定化方法は、いくつかのレンズまたは
プリズムを有する通常のカメラを使用する。しかし、マ
イクロカメラモジュールは一般に大きさが小さく、例え
ばそれらはわずか数ミリメートルにすぎないこともあ
り、それらの大きさのため、単一のレンズを有するよう
に一般に制限される。そうしたものとして、複数のレン
ズまたはプリズムを必要とする現在の画像安定化機構
は、マイクロカメラモジュールを有するハンドヘルド装
置での使用に適切ではない。従って、マイクロカメラモ
ジュールを備えるハンドヘルド装置に画像安定化を提供
する必要性が当業には存在する。
【０００４】
【課題を解決するための手段】本発明は、ハンドヘルド
装置によってキャプチャされた画像を安定化させるため
の方法およびハンドヘルド装置に関する。ハンドヘルド
装置は、物体の合焦画像をキャプチャする光学レンズア
センブリおよび画像センサを有する。ハンドヘルド装置
の動きは、ハンドヘルド装置のモーションセンサによっ
て検出される。ハンドヘルド装置の検出された動きに応
答して、マイクロカメラモジュールまたは単にレンズお
よび画像センサは、検出された動きを補償するために動
かされ、以前に規定され合焦した画像を維持する。マイ
クロカメラモジュールまたは単にレンズおよび画像セン
サの動きは、回転／傾倒または並進としてよい。
【０００５】本発明の画像安定化装置および方法は多様
な用途を有する。特に、テレビ電話としての用途および
ビデオ画像の撮影の場合、一般にハンドヘルド装置の意
図しない動きに起因する動き、振動、ぼやけなどをほと
んど伴わないビデオ画像を提供できる。本発明のハンド
ヘルド装置はまた、画像安定化がカメラのシャッターの
操作に関係する手の動きの効果を補償するので、低速な
シャッタースピードで鮮鋭な静止画像を得ることができ
る。
【０００６】本発明の他の目的および特徴は、添付図面
と連係して考慮される以下の詳細な説明によって明白に
なるであろう。しかし、図面は、添付請求項を参照する
べきである本発明の制限の定義としてではなく、例示の
目的だけに意図されていることを理解しなければならな
い。
【０００７】図面において、同様の参照数字は数図にわ
たり同様の要素を表す。
【０００８】
【発明の実施の形態】図１は、本発明で使用され得る例
示的なハンドヘルド装置１００の正面図を示す。図示さ
れた特定のハンドヘルド装置１００は携帯電話である。
ハンドヘルド装置１００は、テキスト、音声、ビデオ音
響などの形態で情報を伝送するように機器構成されてい
る。ハンドヘルド装置１００は、外箱１０２、ディスプ
レイ１０４、アンテナ１０６、スピーカ１０８、マイク
ロホン１１０およびキーボード１１２を備える。外箱１
０２はハンドヘルド装置１００の外部構造を画成する。
ディスプレイ１０４は、様々な形態のテキストおよびビ
デオ情報を表示するように機器構成されている。例え
ば、ディスプレイ１０４は電話番号のリストまたは物体
の画像を表示することができる。
【０００９】アンテナ１０６は、ハンドヘルド装置１０
０との間での情報の送受信を可能にする。スピーカ１０
８は、可聴信号の形態で音響をハンドヘルド装置１００
の使用者に伝える。マイクロホン１１０は、ハンドヘル
ド装置１００の使用者から音声を受け取る。キーボード
１１２は、ハンドヘルド装置１００の操作を助成するた
めに１つ以上のボタンまたはスイッチよりなる。例え
ば、キーボード１１２は、ハンドヘルド装置１００の電
源をオンオフにするためのボタン、ハンドヘルド装置１
０２の特定の機能を作動させるためのボタン、および電
話番号をダイヤルするためのボタンを含む。
【００１０】図２は、物体２０８に焦点を合わせてキャ
プチャし、ディスプレイ１０４でキャプチャされた物体
２０８の画像を提示するためにマイクロカメラモジュー
ル２０２を含むハンドヘルド装置１００の平面図を示し
ている。マイクロカメラモジュール２０２は、ハンドヘ
ルド装置１１０に納まるように十分に小さく設計されて
おり、一般に単一のレンズ２０４だけを含むが、複数の
レンズを使用することもできる。レンズ２０４は、マイ
クロカメラモジュール２０２の画像センサ２０６上に物
体２０８の焦点を合わせるために使用される。画像セン
サ２０６はレンズ２０４を通じてキャプチャされる通り
物体を識別する。ハンドヘルド装置１００の様々な実施
形態は、図４および５に関してさらに説明する。
【００１１】図２に示された実施形態において、マイク
ロカメラモジュール２０２は、ディスプレイ１０４が設
けられている側部の反対側になるハンドヘルド装置１０
０の側に配置された物体２０８に焦点を合わせキャプチ
ャするために使用される。例えば使用者は、物体２０８
に指し向けて、ディスプレイ１０４で物体の画像を見る
ためにハンドヘルド装置１００を使用するであろう。し
かし、ハンドヘルド装置１００は必ずしも、ハンドヘル
ド装置１００のディスプレイ１０４と反対側に配置され
た物体を追跡することに限定されるわけではない。例え
ば、マイクロカメラモジュール２０２は、ハンドヘルド
装置の使用者をキャプチャして、テレビ会議のために使
用者の画像を作成することができ、例えばその画像はテ
レビ会議を提供することができる遠隔の表示装置に送ら
れる。
【００１２】図３は、本発明に従った画像の安定化を示
す。ハンドヘルド装置１００は、１つ以上の外力、例え
ばハンドヘルド装置１００を保持している手の揺動また
は振動、またはハンドヘルド装置１００の他の意図しな
い動きを受け、矢印３０４で示したように動かされる。
この動きは、ディスプレイ装置１０４に表示された画像
の位置を、例えば所望の画像がもはやディスプレイ１０
４の中心に位置しないように変化させる。画像の望まし
くない変化を防止するために、画像安定化が使用され
る。
【００１３】マイクロカメラモジュール２０２は当初、
第１の位置３０２にあり、レンズ２０４は物体２０８に
焦点を合わせ、画像センサ２０６は物体をキャプチャす
る。ハンドヘルド装置１００は、ハンドヘルド装置１０
０の意図しない動きまたは揺動などによって矢印３０４
で示した方向に第２の位置３０６に動かされ、その動き
の後のマイクロカメラモジュール２０２の位置は点線３
０８によって図示されている。物体２０８のほぼ同じビ
ューを維持するためには、マイクロカメラモジュール２
０２の少なくともレンズ２０４および画像センサ２０６
も、矢印３１０で示された方向に回転されなければなら
ない。マイクロカメラモジュール２０２の動きに応じ
て、ハンドヘルド装置１００内のマイクロカメラモジュ
ール２０２のそうした補償の動きは、同じくかつ／また
は代替的に、マイクロカメラモジュール２０２の横方向
並進よりなる。
【００１４】図４は、本発明のハンドヘルド装置１００
の一実施形態のブロック図を示す。この実施形態におい
て、ハンドヘルド装置１００は、マイクロカメラモジュ
ール２０２、モーションセンサアセンブリ４０２、コン
トローラ４０４、アクチュエータアセンブリ４０６およ
びディスプレイ１０４を含む。マイクロカメラモジュー
ル２０２は、ハンドヘルド装置１００内で超小型カメラ
を具体化するために適格な構成要素を有する。携帯電話
といった小型のハンドヘルド装置１００の場合、一般
に、装置には単一のレンズ２０４を収容するために十分
な空間しか存在しない。しかし、大きさが制約条件でな
ければ、レンズアセンブリの複数のレンズが使用され得
る。レンズ２０４は、既知のレンジ内の物体だけに焦点
が合うように設定位置にあってよいし、または、その位
置は、任意のレンジの視野内の物体に焦点を合わせるた
めにレンズを動かすオートフォーカスまたはマニュアル
フォーカス機構によって調整可能としてもよい。
【００１５】マイクロカメラモジュール２０２は、画像
センサ２０６およびカメラディジタルシグナルプロセッ
サ（Ｃ−ＤＳＰ）４１０も含む。画像センサ２０６は、
物体２０８の画像を形成またはキャプチャし、キャプチ
ャされた画像に対応する適切な電気信号を生成する。画
像センサ２０６の例には、ＣＣＤ（電荷結合素子）およ
びＣＭＯＳ系ＩＣ（集積回路）を含むが、これらに限定
されない。そのような画像センサ２０６は一般に約４×
４ｍｍの大きさである。カメラディジタルシグナルプロ
セッサ４１０は、画像センサ２０６に応答して電子信号
を生成し、その信号を、物体の可視画像を表示するディ
スプレイ１０４に送信する。
【００１６】レンズ２０４は一般に、約２〜４ｍｍのご
く短い焦点距離および約１〜３ｍｍの直径を有する。画
像センサ２０６は一般に、約４×４ｍｍの大きさであろ
う。これらの大きさは、ハンドヘルド装置１００の全体
の大きさおよび表示される画像の所望の品質に応じてそ
れらの要素の様々な大きさが可能であるので、単に例示
的なものである。
【００１７】モーションセンサアセンブリ４０２は、ハ
ンドヘルド装置１００の揺動、振動および／または回転
といったハンドヘルド装置１００の動きを検出する。モ
ーションセンサアセンブリ４０２は、ハンドヘルド装置
１００の動きを検出する１つ以上の電子モーションセン
サを含む。モーションセンサアセンブリ４０２はハンド
ヘルド装置１００の動きを検出する。モーションセンサ
アセンブリ４０２は、少なくとも２つ、好ましくは３つ
のほぼ直角に交わる方向でハンドヘルド装置１００の動
きを好適に検出する１つ以上のモーションセンサを含
む。ＭＥＭＳ（マイクロエレクトロメカニカルシステ
ム）センサ、電子モーションセンサ、微細加工モーショ
ンセンサなどといった、あらゆる形式のモーションセン
サが使用され得る。一般に、線加速度を検出し測定する
加速度計および、角回転を検出し測定するジャイロスコ
ープといった２形式のモーションセンサが存在する。画
像の不安定化は一般に、動きが本質的に回転であるハン
ドヘルド装置を保持している手の動きによって生じるの
で、回転を検出し測定するジャイロスコープ形式のモー
ションセンサを使用することが好ましい。
【００１８】コントローラ４０４は、物体２０８のビュ
ーを維持するようにハンドヘルド装置１００の動きを補
償するためにマイクロカメラモジュール２０２の所要の
動きを決定することによって、マイクロカメラモジュー
ル２０２の画像安定化を制御する。コントローラ４０４
は、制御信号の形態で所要の動きの量および方向をアク
チュエータアセンブリ４０６に送信する。コントローラ
４０４のメモリ４０８は、当業で公知の通り、ハンドヘ
ルド装置の測定された実際の動きを処理し、適切な補償
の動きを確定するために必要なデータ構造およびいずれ
かのソフトモジュールまたはアプリケーションを記憶す
る。
【００１９】アクチュエータアセンブリ４０６は、コン
トローラ４０４から受け取った命令に従ってマイクロカ
メラモジュール２０２を動かすためにハンドヘルド装置
に配置されている１つ以上のアクチュエータを含む。適
格なアクチュエータの例には、圧電アクチュエータ、Ｍ
ＥＭＳアクチュエータ、電気的バイアスに応答して長さ
が変化する形状記憶合金（ＳＭＡ）、および他の形式の
電気機械的アクチュエータを含む。約４ｍｍ×４ｍｍの
大きさの画像センサ２０６の場合、約２０〜５０マイク
ロメートルの並進および／または約０．２〜１．０°の
回転が、ハンドヘルド装置１００の動きを補償するため
に十分な画像安定化にとって一般に適正である。これら
の実施形態の例示的な具体化については、以下で詳細に
検討する図６(Ａ)、(Ｂ)、図７(Ａ)および(Ｂ)に関して
さらに図示説明する。
【００２０】図５は、本発明のハンドヘルド装置１００
の別の実施形態のブロック図を示す。この実施形態にお
いて、ハンドヘルド装置１００は、レンズ２０４および
画像センサ２０６を含むが、カメラディジタルシグナル
プロセッサ４１０をマイクロカメラモジュール２０２の
一部として有していない。モーションセンサアセンブリ
４０２およびコントローラ４０４は、図４に関して説明
した前の実施形態とほぼ同様にして動作する。アクチュ
エータアセンブリ４０６は、マイクロカメラモジュール
２０２のレンズ２０４および画像センサ２０６を動かす
ために、コントローラから信号を受信する。ディジタル
シグナルプロセッサ５０２が、ディスプレイ１０４に物
体の画像を生成させるために信号を生成する。図５の実
施形態の例示的な具体化については、以下で詳細に検討
する図８(Ａ)、(Ｂ)、図９(Ａ)および(Ｂ)に関してさら
に図示説明する。
【００２１】図６(Ａ)および(Ｂ)は、図４の実施形態の
第１の具体化の側面図および平面図をそれぞれ示してい
る。この具体化において、マイクロカメラモジュール２
０２のレンズ２０４の軸４０７は、図６(Ａ)の矢印で示
す通り、ハンドヘルド装置１００の動きに応答して回
転、傾倒または偏向される。軸４０７は、レンズ２０４
の曲率中心を通る線で表現されている。モーションセン
サアセンブリ４０２およびアクチュエータアセンブリ４
０６は、ハンドヘルド装置１００内に配設された回路基
板４０５といった共通平面に固定されている。レンズ２
０４は、マイクロカメラモジュール２０２の上に中央に
配置される。アクチュエータアセンブリ４０６は、回路
基板４０５においてカメラモジュール２０２を支持する
ためにマイクロカメラモジュール２０２の各隅の下に配
置された４つのアクチュエータ４０６Ｒを含む。アクチ
ュエータ４０６Ｒは、それらが伸縮することができ、回
路基板４０５に取り付けられた時に、図６(Ａ)の矢印で
示したように回路基板４０５に対してマイクロカメラモ
ジュール２０２を回転させることができるように選択さ
れる。アクチュエータ４０６Ｒによるカメラモジュール
２０２の動きは、コントローラ４０４からの信号に応答
して生じる。
【００２２】アクチュエータ４０６Ｒは、カメラモジュ
ール２０２の底部の隅に配置される代わりに、カメラモ
ジュール２０２の底縁部に沿ってまたはカメラモジュー
ルの完全に下に配置することもできる。さらに、４つの
アクチュエータ４０６Ｒが図示されているが、４つより
多いかまたは少ないアクチュエータを使用することがで
きる。例えば、一方のアクチュエータ４０６Ｒがカメラ
モジュール２０２の一隅に配置され、他方のアクチュエ
ータ４０６Ｒがカメラモジュール２０２の隣りの隅に配
置されれば、２つのアクチュエータ４０６Ｒだけが要求
される。その際カメラモジュール２０２は、カメラモジ
ュール２０２がアクチュエータ４０６Ｒの一方または両
方の作動時に回転し得るように、回路基板に取り付けら
れる。そのような取付は、弾性または蝶番部材によって
カメラモジュール２０２を第３の点で回路基板４０５に
付着させることによって行い得る。代替的に、２つのア
クチュエータ４０６Ｒをカメラモジュール２０２の隣接
する縁部に沿って取り付けることもできる。
【００２３】モーションセンサアセンブリ４０２は、Ｘ
方向モーションセンサ４０２ＸおよびＹ方向モーション
センサ４０２Ｙを含む。これらのモーションセンサ４０
２Ｘおよび４０２Ｙは、ほぼ直角に交わる方向でハンド
ヘルド装置１００の動きまたは移動を感知または検出
し、検出された動き情報をコントローラ４０４に供給す
る。コントローラ４０４はその後、受け取った動き情報
を使用して、ハンドヘルド装置１００の動きを補償する
ためにマイクロカメラモジュール２０２の位置の所要の
調整を決定し、マイクロカメラモジュール２０２によっ
てキャプチャされている画像を安定化させる。
【００２４】図７(Ａ)および(Ｂ)は、図４の実施形態の
第２の具体化の側面図および平面図をそれぞれ示してい
る。図７(Ａ)および(Ｂ)に図示された具体化は、マイク
ロカメラモジュール２０２が図７(Ａ)の矢印で示された
ように回路基板４０５に対して横方向に動かされること
以外、図６(Ａ)および(Ｂ)に示されたものとほぼ同一で
ある。アクチュエータアセンブリ４０６は、マイクロカ
メラモジュール２０２の各側部または外縁部の下に配置
された４つのアクチュエータ４０６Ｔを例示的に含む。
アクチュエータ４０６Ｔは、レンズ２０４の軸にほぼ垂
直な平面にある２つのほぼ直角に交わる方向でマイクロ
カメラモジュール２０２の並進を付与するように機器構
成されている。この並進を実行するために、アクチュエ
ータ４０６Ｔは、カメラモジュール２０２を、回路基板
４０５でのマイクロカメラモジュール２０２の移動平面
とほぼ平行に移動させるように選択および配置されてい
る。
【００２５】４つのアクチュエータ４０６Ｔは、カメラ
モジュール２０２の隅に配置されるものとして図示され
ているが、代替的に、それらはカメラモジュール２０２
の縁部に沿ってまたはカメラモジュール２０２の下に配
置することができる。さらに、４つより多いかまたは少
ないアクチュエータ４０６Ｔを使用することができる。
例えば、２つのアクチュエータ４０６Ｔだけが要求さ
れ、各々は、選択的に、弾性または滑動部材といった回
路基板４０５上へのカメラモジュール２０２の取付を安
定化させるための手段により、カメラモジュール２０２
の２つの隣接する縁部または隅に配置される。代替的
に、２つのアクチュエータをカメラモジュール２０２と
回路基板４０５との間に単に挿入することもできる。
【００２６】さらに、アクチュエータ４０６は、マイク
ロカメラモジュール２０２が図６(Ａ)および(Ｂ)に関し
て説明した態様で、かつ図７(Ａ)および(Ｂ)に関して説
明した態様で動かされ得るように、すなわち、マイクロ
カメラモジュール２０２のレンズの軸が回転し得るとと
もに、マイクロカメラモジュール２０２がマイクロカメ
ラモジュール２０２のレンズの軸にほぼ垂直な平面にお
いて移動できるように、選択、配置および配向され得
る。
【００２７】図８(Ａ)および(Ｂ)は、図５の実施形態の
第１の具体化の側面図および平面図をそれぞれ示してい
る。この具体化は、カメラモジュール２０２がカメラデ
ィジタルシグナルプロセッサを含まないこと以外、図６
(Ａ)および(Ｂ)に示されたものとほぼ同一である。代わ
りに、この場合ディジタルシグナルプロセッサ５０２で
あるシグナルプロセッサは、回路基板４０５に取り付け
られる。
【００２８】図９(Ａ)および(Ｂ)は、図５の実施形態の
第２の具体化の側面図および平面図をそれぞれ示してい
る。この具体化は、やはりカメラモジュール２０２がカ
メラディジタルシグナルプロセッサを含まないこと以
外、図８(Ａ)および(Ｂ)に示されたものとほぼ同一であ
る。代わりに、回路基板４０５に取り付けられたディジ
タルシグナルプロセッサ５０２が使用される。
【００２９】図１０は、カメラを有するハンドヘルド装
置１００により得られた画像を安定化させるための本発
明の方法を実施するための流れ図を示す。方法は、使用
者がキーボード１１２で１つのボタンまたは一連のボタ
ンを押すかまたは別様に選択することによって画像安定
化機能を選択した時点で始動する（ステップ１００
２）。物体がレンズ２０４を用いて合焦される（ステッ
プ１００４）。問い合わせは、ハンドヘルド装置１００
が動かされたかどうかを決定するためにモーションセン
サを確認する（ステップ１００６）。ハンドヘルド装置
１００のいかなる動きもなければ、方法はステップ１０
０６に戻り、その結果、ハンドヘルド装置１００の動き
が検出されるまでステップ１００８が繰り返される。ハ
ンドヘルド装置１００の動きが検出された場合、コント
ローラは、ハンドヘルド装置の動きを補償するためにア
クチュエータをどのように作動させるかを決定または計
算する（ステップ１００８）。アクチュエータはその
後、ハンドヘルド装置１００の動きを補償するためにマ
イクロカメラモジュール２０２（または妥当であれば、
レンズおよび画像センサ）を動かすように命令される。
ステップ１０１０の後、方法はステップ１００６に戻
る。
【００３０】画像安定化方法は、ハンドヘルド装置１０
０の動きが、ビューフレーム２０８に対して所定のしき
い値距離または角度の範囲内にある場合にのみ、適用さ
れる。
【００３１】従って、その好ましい実施形態に適用され
た本発明の基本的な新規の特徴を図示説明し指摘した
が、例示記載した装置の形態および細部における、また
それらの動作における、さらに説明した方法の形態およ
び細部における様々な省略、代替および変更が、本発明
の精神を逸脱することなく当業者によって行い得ること
が理解されるはずである。例えば、同じ結果を達成する
ために本質的に同様にして本質的に同一の機能を実行す
る、そうした要素および／または方法の全部の組合せ
は、本発明の範囲内にあることを明確に意図している。
また、記載した一実施形態から別のものへの要素の代替
も完全に意図し想定されている。また、図面は必ずしも
縮尺通りに描かれているわけではなく、それらは本質的
に概念的なものにすぎないことも理解するべきである。
従って、添付請求項の範囲によって指示されるところに
従ってのみ限定されることが意図である。
【図面の簡単な説明】
【図１】例示的なハンドヘルド装置の正面図を示す。
【図２】マイクロカメラモジュールを示している図１の
ハンドヘルド装置の平面図を示す。
【図３】本発明に従った画像の安定化を示す。
【図４】ハンドヘルド装置の一実施形態のブロック図を
示す。
【図５】ハンドヘルド装置の別の実施形態のブロック図
を示す。
【図６】(Ａ)は、図４の実施形態の第１の具体化の側面
図を示し、(Ｂ)は、(Ａ)の具体化の平面図を示す。
【図７】(Ａ)は、図４の実施形態の第２の具体化の側面
図を示し、(Ｂ)は、(Ａ)の具体化の平面図を示す。
【図８】(Ａ)は、図５の実施形態の第１の具体化の側面
図を示し、(Ｂ)は、(Ａ)の具体化の平面図を示す。
【図９】(Ａ)は、図５の実施形態の第２の具体化の側面
図を示し、(Ｂ)は、(Ａ)の具体化の平面図を示す。
【図１０】本発明に従った画像を安定化させる方法の流
れ図を示す。

Claims (27)

    【特許請求の範囲】
  1. 【請求項１】 物体の安定化された画像をキャプチャす
    るためのハンドヘルド装置であって、 光学レンズを含み、物体の画像を付与することができる
    光学レンズアセンブリと、 前記レンズアセンブリの前記レンズから物体の画像を受
    け取るように配置され、受け取った画像に対応する電子
    信号を生成する画像センサと、 少なくとも前記レンズアセンブリおよび前記画像センサ
    の動きを検出し、少なくとも前記レンズアセンブリおよ
    び前記画像センサの動きを指示する動き信号を生成する
    モーションセンサと、 前記レンズアセンブリおよび前記画像センサを動かすこ
    とができるように配置されたアクチュエータと、 前記モーションセンサおよび前記アクチュエータと動作
    可能に接続されており、前記モーションセンサから動き
    信号を受信し、それに応答して前記アクチュエータに信
    号を送信し、前記レンズアセンブリおよび前記画像セン
    サを動かし、前記レンズアセンブリおよび前記画像セン
    サの検出された動きを実質的に補正することによって物
    体の画像を実質的に維持するコントローラと、を含むこ
    とを特徴とするハンドヘルド装置。
  2. 【請求項２】 前記画像センサと動作可能に接続されて
    おり、前記画像センサによって生成された電子信号を処
    理し、画像を表示するためにディスプレイを駆動するこ
    とが可能な処理された電子信号を生成するディジタルシ
    グナルプロセッサをさらに含むことを特徴とする請求項
    １記載のハンドヘルド装置。
  3. 【請求項３】 前記ディジタルシグナルプロセッサと動
    作可能に接続されており、前記ディジタルシグナルプロ
    セッサからの処理された電子信号の受信に応答して画像
    を表示するディスプレイをさらに含むことを特徴とする
    請求項２記載のハンドヘルド装置。
  4. 【請求項４】 前記光学レンズアセンブリは、前記光学
    レンズを物体に合焦させる手段をさらに含むことを特徴
    とする請求項１記載のハンドヘルド装置。
  5. 【請求項５】 前記ハンドヘルド装置は携帯電話である
    ことを特徴とする請求項１記載のハンドヘルド装置。
  6. 【請求項６】 前記ハンドヘルド装置は携帯電話である
    ことを特徴とする請求項３記載のハンドヘルド装置。
  7. 【請求項７】 前記レンズは光軸を有しており、前記ア
    クチュエータは、前記レンズアセンブリおよび前記画像
    センサを、光軸を回転させるように動かすことができる
    ように配置および選択されることを特徴とする請求項１
    記載のハンドヘルド装置。
  8. 【請求項８】 前記ハンドヘルド装置は携帯電話である
    ことを特徴とする請求項７記載のハンドヘルド装置。
  9. 【請求項９】 前記レンズは光軸を有しており、前記ア
    クチュエータは、前記レンズアセンブリおよび前記画像
    センサを、前記レンズの光軸にほぼ垂直な平面において
    動かすことができるように配置および選択されることを
    特徴とする請求項１記載のハンドヘルド装置。
  10. 【請求項１０】 前記ハンドヘルド装置は携帯電話であ
    ることを特徴とする請求項９記載のハンドヘルド装置。
  11. 【請求項１１】 前記レンズは光軸を有しており、前記
    アクチュエータは、前記レンズアセンブリおよび前記画
    像センサを、光軸を回転させるように動かすことができ
    るように、かつ、前記レンズアセンブリおよび前記画像
    センサを、前記レンズの光軸にほぼ垂直な平面において
    動かすことができるように配置および選択されることを
    特徴とする請求項１記載のハンドヘルド装置。
  12. 【請求項１２】 前記ハンドヘルド装置は携帯電話であ
    ることを特徴とする請求項１１記載のハンドヘルド装
    置。
  13. 【請求項１３】 前記レンズアセンブリおよび前記画像
    センサはカメラモジュールを構成し、前記アクチュエー
    タは前記カメラモジュールを動かすことができるように
    配置されており、前記モーションセンサは前記カメラモ
    ジュールの動きを検出することを特徴とする請求項２記
    載のハンドヘルド装置。
  14. 【請求項１４】 ２つのモーションセンサが、少なくと
    も前記レンズアセンブリおよび前記画像センサの動きを
    ２つのほぼ直角に交わる方向で検出するように配向され
    ていることを特徴とする請求項１記載のハンドヘルド装
    置。
  15. 【請求項１５】 少なくとも２つのアクチュエータが存
    在することを特徴とする請求項１記載のハンドヘルド装
    置。
  16. 【請求項１６】 少なくとも２つのアクチュエータが存
    在することを特徴とする請求項７記載のハンドヘルド装
    置。
  17. 【請求項１７】 少なくとも２つのアクチュエータが存
    在することを特徴とする請求項９記載のハンドヘルド装
    置。
  18. 【請求項１８】 少なくとも２つのアクチュエータが存
    在することを特徴とする請求項１１記載のハンドヘルド
    装置。
  19. 【請求項１９】 ４つのアクチュエータが存在すること
    を特徴とする請求項１記載のハンドヘルド装置。
  20. 【請求項２０】 ４つのアクチュエータが存在すること
    を特徴とする請求項７記載のハンドヘルド装置。
  21. 【請求項２１】 ４つのアクチュエータが存在すること
    を特徴とする請求項９記載のハンドヘルド装置。
  22. 【請求項２２】 ４つのアクチュエータが存在すること
    を特徴とする請求項１１記載のハンドヘルド装置。
  23. 【請求項２３】 前記アクチュエータは、圧電アクチュ
    エータ、ＭＥＭＳアクチュエータおよび形状記憶合金の
    うちのいずれかを含むことを特徴とする請求項１記載の
    ハンドヘルド装置。
  24. 【請求項２４】 ハンドヘルド装置と一体のカメラによ
    ってキャプチャされた物体の画像を安定化させる方法で
    あって、前記カメラは、光学レンズを含み物体の画像を
    付与することができる光学レンズアセンブリと、レンズ
    アセンブリのレンズから物体の画像を受け取るように配
    置され、受け取った画像に対応する電子信号を生成する
    画像センサとを含み、 前記方法が、 少なくともレンズアセンブリおよび画像センサの動きを
    検出することと、 少なくともレンズアセンブリおよび画像センサの検出さ
    れた動きを指示する動き信号を生成することと、 動き信号に応答してレンズアセンブリおよび画像センサ
    を動かし、レンズアセンブリおよび画像センサの検出さ
    れた動きを実質的に補正することによって物体の画像を
    実質的に維持することとを含むことを特徴とする方法。
  25. 【請求項２５】 レンズアセンブリおよび画像センサは
    レンズの光軸を回転させるように動かされることを特徴
    とする請求項２４記載の方法。
  26. 【請求項２６】 レンズアセンブリおよび画像センサは
    レンズの光軸にほぼ垂直な平面において動かされること
    を特徴とする請求項２４記載の方法。
  27. 【請求項２７】 レンズアセンブリおよび画像センサ
    は、レンズの光軸を回転させるように動かされ、かつ、
    レンズの光軸にほぼ垂直な平面において動かされること
    を特徴とする請求項２４記載の方法。
JP2002301025A 2001-10-19 2002-10-15 ハンドヘルド装置のマイクロカメラモジュールの画像安定化装置およびハンドヘルド装置のマイクロカメラモジュールを安定化させる方法 Expired - Fee Related JP3950399B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/999020 2001-10-19
US09/999,020 US7307653B2 (en) 2001-10-19 2001-10-19 Image stabilizer for a microcamera module of a handheld device, and method for stabilizing a microcamera module of a handheld device

Publications (2)

Publication Number Publication Date
JP2003204470A true JP2003204470A (ja) 2003-07-18
JP3950399B2 JP3950399B2 (ja) 2007-08-01

Family

ID=25545789

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002301025A Expired - Fee Related JP3950399B2 (ja) 2001-10-19 2002-10-15 ハンドヘルド装置のマイクロカメラモジュールの画像安定化装置およびハンドヘルド装置のマイクロカメラモジュールを安定化させる方法

Country Status (3)

Country Link
US (1) US7307653B2 (ja)
EP (1) EP1304872A1 (ja)
JP (1) JP3950399B2 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006126712A (ja) * 2004-11-01 2006-05-18 Konica Minolta Photo Imaging Inc 手振れ補正システムおよび撮影装置
JP2008011506A (ja) * 2006-05-30 2008-01-17 Konica Minolta Opto Inc 光学ユニットおよび撮像装置
US7773119B2 (en) 2006-04-28 2010-08-10 Konica Minolta Opto, Inc. Drive apparatus, image pickup unit and image pickup apparatus
JP2012502323A (ja) * 2008-09-12 2012-01-26 ケンブリッジ メカトロニクス リミテッド 光学画像安定化
KR101172077B1 (ko) 2006-02-15 2012-08-10 엘지이노텍 주식회사 카메라 모듈
KR101338587B1 (ko) 2012-05-04 2013-12-06 엘지이노텍 주식회사 카메라 모듈
JP2017090809A (ja) * 2015-11-16 2017-05-25 ミツミ電機株式会社 レンズ駆動装置、カメラモジュール及びカメラ搭載装置
JP2021173996A (ja) * 2020-04-30 2021-11-01 新思考電機有限公司 ２軸傾動装置、カメラ装置、及び電子機器
US11932531B2 (en) 2022-01-13 2024-03-19 Taiwan Semiconductor Manufacturing Company, Ltd. Curved cantilever design to reduce stress in MEMS actuator

Families Citing this family (190)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7297856B2 (en) 1996-07-10 2007-11-20 Sitrick David H System and methodology for coordinating musical communication and display
US7989689B2 (en) 1996-07-10 2011-08-02 Bassilic Technologies Llc Electronic music stand performer subsystems and music communication methodologies
US20040201704A1 (en) * 2001-08-03 2004-10-14 Jen-Shou Tseng Vibration compensation device and scanning method
US7813634B2 (en) * 2005-02-28 2010-10-12 Tessera MEMS Technologies, Inc. Autofocus camera
US20040162637A1 (en) 2002-07-25 2004-08-19 Yulun Wang Medical tele-robotic system with a master remote station with an arbitrator
JP3917104B2 (ja) * 2003-04-25 2007-05-23 コニカミノルタフォトイメージング株式会社 撮像装置
US6751410B1 (en) 2003-07-10 2004-06-15 Hewlett-Packard Development Company, L.P. Inertial camera stabilization apparatus and method
US7813836B2 (en) 2003-12-09 2010-10-12 Intouch Technologies, Inc. Protocol for a remotely controlled videoconferencing robot
SE0401802D0 (sv) 2004-07-08 2004-07-08 Anoto Ab Mounting of imaging arrangements in optical systems
CN1918577B (zh) 2003-12-15 2010-09-01 阿诺托股份公司 用于电子笔的光学系统、分析系统和模块化单元
US7405750B2 (en) * 2004-02-27 2008-07-29 Hoya Corporation Position-detecting apparatus
US7477842B2 (en) * 2004-03-12 2009-01-13 Siimpel, Inc. Miniature camera
US10721405B2 (en) 2004-03-25 2020-07-21 Clear Imaging Research, Llc Method and apparatus for implementing a digital graduated filter for an imaging apparatus
US8331723B2 (en) 2004-03-25 2012-12-11 Ozluturk Fatih M Method and apparatus to correct digital image blur due to motion of subject or imaging device
US7525573B2 (en) * 2004-03-29 2009-04-28 Hoya Corporation Camera provided with tremble correcting function
JP4691326B2 (ja) * 2004-06-08 2011-06-01 Ｈｏｙａ株式会社 像ブレ補正装置
US8077963B2 (en) 2004-07-13 2011-12-13 Yulun Wang Mobile robot with a head-based movement mapping scheme
US20060014530A1 (en) * 2004-07-16 2006-01-19 Denenberg Lawrence A Personal server
US7679647B2 (en) * 2004-07-21 2010-03-16 Hewlett-Packard Development Company, L.P. Flexible suspension for image stabilization
US20060018643A1 (en) * 2004-07-21 2006-01-26 Stavely Donald J Magnet configuration for image stabilization
JP3952049B2 (ja) * 2004-08-12 2007-08-01 コニカミノルタフォトイメージング株式会社 振れ補正機構及びこれを用いた撮像装置
DE102004045430A1 (de) * 2004-09-18 2006-05-18 Deutsche Telekom Ag Vorrichtung zur Bildstabilisierung
JP2006128780A (ja) * 2004-10-26 2006-05-18 Konica Minolta Photo Imaging Inc デジタルカメラ
US7557854B2 (en) * 2004-11-03 2009-07-07 Aptina Imaging Corporation Auto-focus system using bubble technology
FR2882160B1 (fr) * 2005-02-17 2007-06-15 St Microelectronics Sa Procede de capture d'images comprenant une mesure de mouvements locaux
US20060215035A1 (en) * 2005-03-23 2006-09-28 Kulas Charles J Fast capture and transmission of information in a portable device
JP4735060B2 (ja) * 2005-06-06 2011-07-27 コニカミノルタオプト株式会社 駆動装置および手振れ補正システム
US7965317B2 (en) 2005-09-14 2011-06-21 Nokia Corporation System and method for implementation motion-driven multi-shot image stabilization
US20070076982A1 (en) * 2005-09-30 2007-04-05 Petrescu Doina I System and method for video stabilization
US9198728B2 (en) 2005-09-30 2015-12-01 Intouch Technologies, Inc. Multi-camera mobile teleconferencing platform
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
US7728866B2 (en) * 2005-11-03 2010-06-01 Broadcom Corp. Video telephony image processing
US7697024B2 (en) * 2005-11-03 2010-04-13 Broadcom Corp. Method and system of tracking and stabilizing an image transmitted using video telephony
US7777782B2 (en) * 2005-11-04 2010-08-17 Nokia Corporation Stabilization of an image produced by optics
US20070104479A1 (en) * 2005-11-10 2007-05-10 Akihiro Machida Correcting photographs obtained by a handheld device
US20090309982A1 (en) * 2005-11-30 2009-12-17 Jarkko Rouvinen Method and System for Image Stabilization
US8072502B2 (en) * 2005-12-12 2011-12-06 Sony Ericsson Mobile Communications Ab Multi-mega pixel resolution with small sensor
US8849679B2 (en) 2006-06-15 2014-09-30 Intouch Technologies, Inc. Remote controlled robot system that provides medical images
JP2008003182A (ja) * 2006-06-21 2008-01-10 Pentax Corp ブレ量検出装置
US7952612B2 (en) 2006-06-22 2011-05-31 Nokia Corporation Method and system for image construction using multiple exposures
EP2070321A1 (en) * 2006-09-27 2009-06-17 Koninklijke Philips Electronics N.V. Portable electronic device having a rotary camera unit
US7693408B1 (en) * 2006-10-13 2010-04-06 Siimpel Corporation Camera with multiple focus captures
US8619378B2 (en) 2010-11-15 2013-12-31 DigitalOptics Corporation MEMS Rotational comb drive Z-stage
US8768157B2 (en) 2011-09-28 2014-07-01 DigitalOptics Corporation MEMS Multiple degree of freedom actuator
US8462109B2 (en) 2007-01-05 2013-06-11 Invensense, Inc. Controlling and accessing content using motion processing on mobile devices
US7934423B2 (en) 2007-12-10 2011-05-03 Invensense, Inc. Vertically integrated 3-axis MEMS angular accelerometer with integrated electronics
US8250921B2 (en) 2007-07-06 2012-08-28 Invensense, Inc. Integrated motion processing unit (MPU) with MEMS inertial sensing and embedded digital electronics
US8952832B2 (en) 2008-01-18 2015-02-10 Invensense, Inc. Interfacing application programs and motion sensors of a device
GB0701300D0 (en) * 2007-01-24 2007-03-07 Dreampact Ltd An inspection device which may contain a payload device
US20080231714A1 (en) * 2007-03-22 2008-09-25 Texas Instruments Incorporated System and method for capturing images
EP1983740A1 (en) * 2007-04-16 2008-10-22 STMicroelectronics (Research & Development) Limited Image stabilisation method and apparatus
US9160783B2 (en) 2007-05-09 2015-10-13 Intouch Technologies, Inc. Robot system that operates through a network firewall
JP2008310169A (ja) * 2007-06-15 2008-12-25 Fujinon Corp 撮影装置、携帯機器
KR20090015251A (ko) * 2007-08-08 2009-02-12 삼성전자주식회사 이미지 센서를 구비한 카메라 모듈
US7946493B2 (en) * 2007-09-27 2011-05-24 Hand Held Products, Inc. Wireless bar code transaction device
US20100293940A1 (en) * 2008-01-23 2010-11-25 Konica Minolta Opto., Inc. Drive mechanism and drive device
US8154647B2 (en) 2008-03-05 2012-04-10 Applied Minds, Llc Automated extended depth of field imaging apparatus and method
US10875182B2 (en) 2008-03-20 2020-12-29 Teladoc Health, Inc. Remote presence system mounted to operating room hardware
CN101546090B (zh) * 2008-03-25 2011-09-28 鸿富锦精密工业（深圳）有限公司 成像装置
JP5439732B2 (ja) * 2008-03-31 2014-03-12 リコーイメージング株式会社 撮像装置
JP5439734B2 (ja) * 2008-03-31 2014-03-12 リコーイメージング株式会社 撮像装置
JP5439733B2 (ja) * 2008-03-31 2014-03-12 リコーイメージング株式会社 撮像装置
JP2009244492A (ja) * 2008-03-31 2009-10-22 Hoya Corp 撮像装置
JP5315751B2 (ja) * 2008-03-31 2013-10-16 ペンタックスリコーイメージング株式会社 撮像装置
JP5260115B2 (ja) * 2008-03-31 2013-08-14 ペンタックスリコーイメージング株式会社 撮像装置
US8179418B2 (en) 2008-04-14 2012-05-15 Intouch Technologies, Inc. Robotic based health care system
US8170241B2 (en) 2008-04-17 2012-05-01 Intouch Technologies, Inc. Mobile tele-presence system with a microphone system
US9193065B2 (en) 2008-07-10 2015-11-24 Intouch Technologies, Inc. Docking system for a tele-presence robot
US9842192B2 (en) 2008-07-11 2017-12-12 Intouch Technologies, Inc. Tele-presence robot system with multi-cast features
US8340819B2 (en) 2008-09-18 2012-12-25 Intouch Technologies, Inc. Mobile videoconferencing robot system with network adaptive driving
CH699707A2 (de) 2008-10-10 2010-04-15 Creaholic Sa Miniaturisierte angetriebene lagerungsvorrichtung.
US8996165B2 (en) 2008-10-21 2015-03-31 Intouch Technologies, Inc. Telepresence robot with a camera boom
US9138891B2 (en) 2008-11-25 2015-09-22 Intouch Technologies, Inc. Server connectivity control for tele-presence robot
US8463435B2 (en) 2008-11-25 2013-06-11 Intouch Technologies, Inc. Server connectivity control for tele-presence robot
US8908995B2 (en) 2009-01-12 2014-12-09 Intermec Ip Corp. Semi-automatic dimensioning with imager on a portable device
US8849680B2 (en) 2009-01-29 2014-09-30 Intouch Technologies, Inc. Documentation through a remote presence robot
US8570384B2 (en) * 2009-02-09 2013-10-29 Cambridge Mechatronics Limited Camera apparatus having an SMA actuator system
US8159363B2 (en) * 2009-02-16 2012-04-17 Research In Motion Limited Using gravity to direct a rotatable camera in a handheld electronic device
US8141473B2 (en) 2009-03-18 2012-03-27 Alliant Techsystems Inc. Apparatus for synthetic weapon stabilization and firing
US8897920B2 (en) 2009-04-17 2014-11-25 Intouch Technologies, Inc. Tele-presence robot system with software modularity, projector and laser pointer
US8786761B2 (en) * 2009-06-05 2014-07-22 Apple Inc. Continuous autofocus mechanisms for image capturing devices
WO2010151262A1 (en) * 2009-06-25 2010-12-29 Nikon Corporation Image apparatus with motion control
US8384755B2 (en) 2009-08-26 2013-02-26 Intouch Technologies, Inc. Portable remote presence robot
US11399153B2 (en) 2009-08-26 2022-07-26 Teladoc Health, Inc. Portable telepresence apparatus
IN2012DN02197A (ja) * 2009-08-26 2015-08-07 Intouch Technologies Inc
US11154981B2 (en) 2010-02-04 2021-10-26 Teladoc Health, Inc. Robot user interface for telepresence robot system
EP3629081A3 (en) 2010-02-26 2020-07-29 Cambridge Mechatronics Limited Sma actuation apparatus
US8670017B2 (en) 2010-03-04 2014-03-11 Intouch Technologies, Inc. Remote presence system including a cart that supports a robot face and an overhead camera
US10343283B2 (en) 2010-05-24 2019-07-09 Intouch Technologies, Inc. Telepresence robot system that can be accessed by a cellular phone
US10808882B2 (en) 2010-05-26 2020-10-20 Intouch Technologies, Inc. Tele-robotic system with a robot face placed on a chair
US9137429B2 (en) 2010-08-09 2015-09-15 Cambridge Mechatronics Limited Camera apparatus
US20120057035A1 (en) * 2010-09-02 2012-03-08 Voss Shane D Force compensation systems and methods
GB2497903B (en) 2010-09-22 2015-01-28 Cambridge Mechatronics Ltd Optical image stabilisation
US8605375B2 (en) 2010-11-15 2013-12-10 DigitalOptics Corporation MEMS Mounting flexure contacts
US8521017B2 (en) 2010-11-15 2013-08-27 DigitalOptics Corporation MEMS MEMS actuator alignment
US8941192B2 (en) 2010-11-15 2015-01-27 DigitalOptics Corporation MEMS MEMS actuator device deployment
US8430580B2 (en) 2010-11-15 2013-04-30 DigitalOptics Corporation MEMS Rotationally deployed actuators
US8608393B2 (en) 2010-11-15 2013-12-17 DigitalOptics Corporation MEMS Capillary actuator deployment
US8947797B2 (en) 2010-11-15 2015-02-03 DigitalOptics Corporation MEMS Miniature MEMS actuator assemblies
US8547627B2 (en) 2010-11-15 2013-10-01 DigitalOptics Corporation MEMS Electrical routing
US9515579B2 (en) 2010-11-15 2016-12-06 Digitaloptics Corporation MEMS electrical contact systems and methods
US9061883B2 (en) 2010-11-15 2015-06-23 DigitalOptics Corporation MEMS Actuator motion control features
US8358925B2 (en) 2010-11-15 2013-01-22 DigitalOptics Corporation MEMS Lens barrel with MEMS actuators
US8637961B2 (en) 2010-11-15 2014-01-28 DigitalOptics Corporation MEMS MEMS actuator device
US8803256B2 (en) 2010-11-15 2014-08-12 DigitalOptics Corporation MEMS Linearly deployed actuators
US9052567B2 (en) 2010-11-15 2015-06-09 DigitalOptics Corporation MEMS Actuator inside of motion control
US8884381B2 (en) 2010-11-15 2014-11-11 DigitalOptics Corporation MEMS Guard trench
US9352962B2 (en) 2010-11-15 2016-05-31 DigitalOptics Corporation MEMS MEMS isolation structures
US9019390B2 (en) 2011-09-28 2015-04-28 DigitalOptics Corporation MEMS Optical image stabilization using tangentially actuated MEMS devices
US8604663B2 (en) 2010-11-15 2013-12-10 DigitalOptics Corporation MEMS Motion controlled actuator
US8337103B2 (en) 2010-11-15 2012-12-25 DigitalOptics Corporation MEMS Long hinge actuator snubbing
US9264664B2 (en) 2010-12-03 2016-02-16 Intouch Technologies, Inc. Systems and methods for dynamic bandwidth allocation
KR101735311B1 (ko) 2010-12-10 2017-05-15 삼성전자 주식회사 3차원카메라장치 및 3차원카메라장치 제어방법
US9323250B2 (en) 2011-01-28 2016-04-26 Intouch Technologies, Inc. Time-dependent navigation of telepresence robots
US8718837B2 (en) 2011-01-28 2014-05-06 Intouch Technologies Interfacing with a mobile telepresence robot
TWI446690B (zh) 2011-03-02 2014-07-21 Largan Precision Co Ltd 致動器
US10769739B2 (en) 2011-04-25 2020-09-08 Intouch Technologies, Inc. Systems and methods for management of information among medical providers and facilities
US20140139616A1 (en) 2012-01-27 2014-05-22 Intouch Technologies, Inc. Enhanced Diagnostics for a Telepresence Robot
US9098611B2 (en) 2012-11-26 2015-08-04 Intouch Technologies, Inc. Enhanced video interaction for a user interface of a telepresence network
US8428451B2 (en) * 2011-07-25 2013-04-23 Hong Kong Applied Science And Technology Research Institute Co. Ltd. Interchangeable zoom lens actuator
US9350271B2 (en) 2011-09-28 2016-05-24 DigitalOptics Corporation MEMS Cascaded electrostatic actuator
US8855476B2 (en) 2011-09-28 2014-10-07 DigitalOptics Corporation MEMS MEMS-based optical image stabilization
US9281763B2 (en) 2011-09-28 2016-03-08 DigitalOptics Corporation MEMS Row and column actuator control
US8869625B2 (en) 2011-09-28 2014-10-28 DigitalOptics Corporation MEMS MEMS actuator/sensor
US8853975B2 (en) 2011-09-28 2014-10-07 DigitalOptics Corporation MEMS Electrostatic actuator control
US8571405B2 (en) 2011-09-28 2013-10-29 DigitalOptics Corporation MEMS Surface mount actuator
US8616791B2 (en) 2011-09-28 2013-12-31 DigitalOptics Corporation MEMS Rotationally deployed actuator devices
US8836751B2 (en) 2011-11-08 2014-09-16 Intouch Technologies, Inc. Tele-presence system with a user interface that displays different communication links
US9628711B2 (en) 2011-12-15 2017-04-18 Apple Inc. Motion sensor based virtual tripod method for video stabilization
US9251313B2 (en) 2012-04-11 2016-02-02 Intouch Technologies, Inc. Systems and methods for visualizing and managing telepresence devices in healthcare networks
US8902278B2 (en) 2012-04-11 2014-12-02 Intouch Technologies, Inc. Systems and methods for visualizing and managing telepresence devices in healthcare networks
US9779546B2 (en) 2012-05-04 2017-10-03 Intermec Ip Corp. Volume dimensioning systems and methods
US9007368B2 (en) 2012-05-07 2015-04-14 Intermec Ip Corp. Dimensioning system calibration systems and methods
CN104335095B (zh) 2012-05-09 2017-10-17 Lg伊诺特有限公司 音圈电机
US10007858B2 (en) 2012-05-15 2018-06-26 Honeywell International Inc. Terminals and methods for dimensioning objects
EP2852881A4 (en) 2012-05-22 2016-03-23 Intouch Technologies Inc GRAPHIC USER INTERFACES CONTAINING TOUCH PAD TOUCH INTERFACES FOR TELEMEDICINE DEVICES
US9361021B2 (en) 2012-05-22 2016-06-07 Irobot Corporation Graphical user interfaces including touchpad driving interfaces for telemedicine devices
KR101905150B1 (ko) * 2012-07-17 2018-10-08 엘지전자 주식회사 이동 단말기
US10321127B2 (en) 2012-08-20 2019-06-11 Intermec Ip Corp. Volume dimensioning system calibration systems and methods
US9939259B2 (en) 2012-10-04 2018-04-10 Hand Held Products, Inc. Measuring object dimensions using mobile computer
EP2722656A1 (en) 2012-10-16 2014-04-23 Hand Held Products, Inc. Integrated dimensioning and weighing system
US20140104413A1 (en) 2012-10-16 2014-04-17 Hand Held Products, Inc. Integrated dimensioning and weighing system
US9417666B2 (en) 2012-10-19 2016-08-16 Microsoft Technology Licesning, LLC User and device movement based display compensation
GB201220485D0 (en) 2012-11-14 2012-12-26 Cambridge Mechatronics Ltd Control of an SMA actuation apparatus
US9080856B2 (en) 2013-03-13 2015-07-14 Intermec Ip Corp. Systems and methods for enhancing dimensioning, for example volume dimensioning
CN103293824B (zh) * 2013-03-13 2016-02-17 香港应用科技研究院有限公司 具有自动对焦调整的可互换变焦透镜致动器
US10228452B2 (en) 2013-06-07 2019-03-12 Hand Held Products, Inc. Method of error correction for 3D imaging device
US9225885B2 (en) * 2013-06-14 2015-12-29 Microsoft Technology Licensing, Llc Reduced height camera module for small form factor applications
US9239950B2 (en) 2013-07-01 2016-01-19 Hand Held Products, Inc. Dimensioning system
US9464885B2 (en) 2013-08-30 2016-10-11 Hand Held Products, Inc. System and method for package dimensioning
US9823059B2 (en) 2014-08-06 2017-11-21 Hand Held Products, Inc. Dimensioning system with guided alignment
US10810715B2 (en) 2014-10-10 2020-10-20 Hand Held Products, Inc System and method for picking validation
US10775165B2 (en) 2014-10-10 2020-09-15 Hand Held Products, Inc. Methods for improving the accuracy of dimensioning-system measurements
US9779276B2 (en) 2014-10-10 2017-10-03 Hand Held Products, Inc. Depth sensor based auto-focus system for an indicia scanner
US10060729B2 (en) 2014-10-21 2018-08-28 Hand Held Products, Inc. Handheld dimensioner with data-quality indication
US9897434B2 (en) 2014-10-21 2018-02-20 Hand Held Products, Inc. Handheld dimensioning system with measurement-conformance feedback
US9557166B2 (en) 2014-10-21 2017-01-31 Hand Held Products, Inc. Dimensioning system with multipath interference mitigation
US9762793B2 (en) 2014-10-21 2017-09-12 Hand Held Products, Inc. System and method for dimensioning
US9752864B2 (en) 2014-10-21 2017-09-05 Hand Held Products, Inc. Handheld dimensioning system with feedback
US9786101B2 (en) 2015-05-19 2017-10-10 Hand Held Products, Inc. Evaluating image values
US10066982B2 (en) 2015-06-16 2018-09-04 Hand Held Products, Inc. Calibrating a volume dimensioner
US20160377414A1 (en) 2015-06-23 2016-12-29 Hand Held Products, Inc. Optical pattern projector
US9857167B2 (en) 2015-06-23 2018-01-02 Hand Held Products, Inc. Dual-projector three-dimensional scanner
US9835486B2 (en) 2015-07-07 2017-12-05 Hand Held Products, Inc. Mobile dimensioner apparatus for use in commerce
EP3118576B1 (en) 2015-07-15 2018-09-12 Hand Held Products, Inc. Mobile dimensioning device with dynamic accuracy compatible with nist standard
US10094650B2 (en) 2015-07-16 2018-10-09 Hand Held Products, Inc. Dimensioning and imaging items
US20170017301A1 (en) 2015-07-16 2017-01-19 Hand Held Products, Inc. Adjusting dimensioning results using augmented reality
US10249030B2 (en) 2015-10-30 2019-04-02 Hand Held Products, Inc. Image transformation for indicia reading
US10225544B2 (en) 2015-11-19 2019-03-05 Hand Held Products, Inc. High resolution dot pattern
US10285715B2 (en) * 2015-12-21 2019-05-14 Warsaw Orthopedic, Inc. Surgical instrument and method
US10025314B2 (en) 2016-01-27 2018-07-17 Hand Held Products, Inc. Vehicle positioning and object avoidance
JP7040896B2 (ja) * 2016-04-01 2022-03-23 台湾東電化股▲ふん▼有限公司 カメラモジュールおよびそれを制御する方法
US10339352B2 (en) 2016-06-03 2019-07-02 Hand Held Products, Inc. Wearable metrological apparatus
US9940721B2 (en) 2016-06-10 2018-04-10 Hand Held Products, Inc. Scene change detection in a dimensioner
US10163216B2 (en) 2016-06-15 2018-12-25 Hand Held Products, Inc. Automatic mode switching in a volume dimensioner
US10909708B2 (en) 2016-12-09 2021-02-02 Hand Held Products, Inc. Calibrating a dimensioner using ratios of measurable parameters of optic ally-perceptible geometric elements
DE102017000889A1 (de) 2017-01-27 2018-08-02 Christian Overmann Modulares optisches Aufnahmesystem
TWI781985B (zh) 2017-03-09 2022-11-01 美商康寧公司 具有自動對焦與光學圖像穩定功能的相機模組
US11047672B2 (en) 2017-03-28 2021-06-29 Hand Held Products, Inc. System for optically dimensioning
US11862302B2 (en) 2017-04-24 2024-01-02 Teladoc Health, Inc. Automated transcription and documentation of tele-health encounters
US10733748B2 (en) 2017-07-24 2020-08-04 Hand Held Products, Inc. Dual-pattern optical 3D dimensioning
US10483007B2 (en) 2017-07-25 2019-11-19 Intouch Technologies, Inc. Modular telehealth cart with thermal imaging and touch screen user interface
US11636944B2 (en) 2017-08-25 2023-04-25 Teladoc Health, Inc. Connectivity infrastructure for a telehealth platform
US10827123B1 (en) * 2018-01-05 2020-11-03 Gopro, Inc. Modular image capture systems
US10617299B2 (en) 2018-04-27 2020-04-14 Intouch Technologies, Inc. Telehealth cart that supports a removable tablet with seamless audio/video switching
US10584962B2 (en) 2018-05-01 2020-03-10 Hand Held Products, Inc System and method for validating physical-item security
KR102589379B1 (ko) 2018-08-27 2023-10-16 엘지이노텍 주식회사 센서 구동 장치 및 카메라 모듈
US11258951B2 (en) * 2019-06-27 2022-02-22 Motorola Mobility Llc Miniature camera device for stabilized video using shape memory alloy actuators
US11639846B2 (en) 2019-09-27 2023-05-02 Honeywell International Inc. Dual-pattern optical 3D dimensioning
US20240108204A1 (en) * 2022-09-30 2024-04-04 Karl Storz Imaging, Inc. Optical Image Stabilization and Active Alignment of Sensors in Endoscopic Camera Systems and Methods of Using the Same

Family Cites Families (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3942862A (en) * 1970-12-28 1976-03-09 Canon Kabushiki Kaisha Image stabilizing optical system having a variable prism
US4322128A (en) * 1978-11-23 1982-03-30 British Aerospace Control device for optical apparatus
JPH0815316B2 (ja) 1985-04-26 1996-02-14 キヤノン株式会社 像振れ防止装置
US4731669A (en) * 1985-06-18 1988-03-15 Matsushita Electric Industrial Co., Ltd. Camera apparatus with movably supported lens barrel
GB2239575B (en) * 1989-10-17 1994-07-27 Mitsubishi Electric Corp Motion vector detecting apparatus and image blur correcting apparatus, and video camera including such apparatus
DE59107923D1 (de) * 1990-10-30 1996-07-18 Eltro Gmbh Verfahren und Vorrichtung zur Harmonisierung für Offset und Responsivität bei einem elektrooptischen Zeilen- oder Mosaikdetektor
JP2890989B2 (ja) * 1992-07-29 1999-05-17 日本電気株式会社 宇宙航行体搭載用光学系の撮像素子位置調整装置
JPH09116910A (ja) * 1995-10-17 1997-05-02 Canon Inc 撮像装置
JPH10142646A (ja) 1996-11-14 1998-05-29 Olympus Optical Co Ltd カメラ用手ブレ防止装置
JPH10170971A (ja) 1996-12-10 1998-06-26 Olympus Optical Co Ltd 手持可能な光学装置の手ぶれ防止装置
JPH10191144A (ja) * 1996-12-20 1998-07-21 Nippon Samusun Kk 撮像装置の手振れ補正方法
US6747691B1 (en) * 1997-09-09 2004-06-08 Minolta Co., Ltd. Apparatus capable of determining shake of the apparatus relative to an object
EP0942309A3 (en) 1998-03-12 1999-12-22 Canon Kabushiki Kaisha Variable magnification lens having image stabilizing function
FI112573B (fi) * 1998-06-04 2003-12-15 Nokia Corp Kamerallinen matkaviestin
US6781622B1 (en) * 1998-06-26 2004-08-24 Ricoh Company, Ltd. Apparatus for correction based upon detecting a camera shaking
JP2000010141A (ja) * 1998-06-26 2000-01-14 Ricoh Co Ltd 手振れ補正機能付きデジタルカメラ
JP2000332225A (ja) * 1999-05-19 2000-11-30 Canon Inc 撮像装置
FR2809911B1 (fr) * 2000-06-06 2003-01-03 Centre Nat Etd Spatiales Dispositif de prise de vue embarque sur un engin spatial, engin spatial et procede de prise de vue le comprenant
JP3964612B2 (ja) * 2000-10-06 2007-08-22 株式会社東芝 静電アクチュエータ
US6611079B2 (en) * 2000-10-31 2003-08-26 Kabushiki Kaisha Toshiba Electrostatic actuator and camera module using the same
US7436435B2 (en) * 2001-10-01 2008-10-14 Minolta Co., Ltd. Image taking device having image-blur compensator
US20030076408A1 (en) * 2001-10-18 2003-04-24 Nokia Corporation Method and handheld device for obtaining an image of an object by combining a plurality of images
JP2005189654A (ja) * 2003-12-26 2005-07-14 Konica Minolta Photo Imaging Inc 手振れ補正機構を備えたカメラ
JP4540354B2 (ja) * 2004-01-30 2010-09-08 Ｈｏｙａ株式会社 像ブレ補正装置
US20050168585A1 (en) * 2004-01-30 2005-08-04 Pentax Corporation Anti-shake apparatus
JP2005241751A (ja) * 2004-02-24 2005-09-08 Pentax Corp ステージ装置及びこのステージ装置を利用したカメラの手振れ補正装置
US7405750B2 (en) * 2004-02-27 2008-07-29 Hoya Corporation Position-detecting apparatus
JP2005244725A (ja) * 2004-02-27 2005-09-08 Pentax Corp 像ブレ補正装置
US7495693B2 (en) * 2004-03-08 2009-02-24 Hoya Corporation Anti-shake apparatus
US7598981B2 (en) * 2004-03-08 2009-10-06 Hoya Corporation Anti-shake apparatus
TWI391776B (zh) * 2004-03-08 2013-04-01 Pentax Ricoh Imaging Co Ltd 防震裝置
US7528862B2 (en) * 2004-03-09 2009-05-05 Hoya Corporation Anti-shake apparatus with magnetic-field change detector arranged in driving coil
US7453494B2 (en) * 2004-03-09 2008-11-18 Hoya Corporation Anti-shake apparatus having magnetic position detectors positioned on one axis with common input circuitry
JP4530691B2 (ja) * 2004-03-17 2010-08-25 Ｈｏｙａ株式会社 像ブレ補正装置
JP2005283965A (ja) * 2004-03-30 2005-10-13 Pentax Corp ブレ量表示装置
JP2005326807A (ja) * 2004-04-12 2005-11-24 Konica Minolta Photo Imaging Inc 鏡胴内蔵型カメラ
JP2005331549A (ja) * 2004-05-18 2005-12-02 Konica Minolta Photo Imaging Inc 手振れ補正装置および位置検出装置
US7679647B2 (en) * 2004-07-21 2010-03-16 Hewlett-Packard Development Company, L.P. Flexible suspension for image stabilization
JP3952049B2 (ja) * 2004-08-12 2007-08-01 コニカミノルタフォトイメージング株式会社 振れ補正機構及びこれを用いた撮像装置
DE102004045430A1 (de) * 2004-09-18 2006-05-18 Deutsche Telekom Ag Vorrichtung zur Bildstabilisierung
KR100594149B1 (ko) * 2004-10-12 2006-06-28 삼성전자주식회사 카메라 렌즈 어셈블리의 손떨림 보정 장치
KR100594150B1 (ko) * 2004-10-18 2006-06-28 삼성전자주식회사 카메라 모듈의 떨림 보정 장치
KR100678268B1 (ko) * 2004-10-20 2007-02-02 삼성전자주식회사 카메라 렌즈 어셈블리의 손떨림 보정 장치
US7403295B2 (en) * 2004-10-25 2008-07-22 Hoya Corporation Position-detecting system
JP4736399B2 (ja) * 2004-10-28 2011-07-27 コニカミノルタオプト株式会社 駆動機構及び撮像装置
KR100630040B1 (ko) * 2004-11-03 2006-09-27 삼성전자주식회사 카메라 렌즈 어셈블리의 손떨림 보정 장치
JP2007100714A (ja) * 2005-09-30 2007-04-19 Alps Electric Co Ltd 防振装置及びこれを用いたカメラ装置
CN1955832B (zh) * 2005-10-28 2010-05-26 鸿富锦精密工业（深圳）有限公司 数码相机模组
JP2007139965A (ja) * 2005-11-16 2007-06-07 Konica Minolta Opto Inc 駆動装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006126712A (ja) * 2004-11-01 2006-05-18 Konica Minolta Photo Imaging Inc 手振れ補正システムおよび撮影装置
KR101172077B1 (ko) 2006-02-15 2012-08-10 엘지이노텍 주식회사 카메라 모듈
US7773119B2 (en) 2006-04-28 2010-08-10 Konica Minolta Opto, Inc. Drive apparatus, image pickup unit and image pickup apparatus
JP2008011506A (ja) * 2006-05-30 2008-01-17 Konica Minolta Opto Inc 光学ユニットおよび撮像装置
US8284263B2 (en) 2006-05-30 2012-10-09 Konica Minolta Opto, Inc. Optical unit and image pickup apparatus having an optical device and a polymer actuator for moving the optical device
JP2012502323A (ja) * 2008-09-12 2012-01-26 ケンブリッジ メカトロニクス リミテッド 光学画像安定化
KR101338587B1 (ko) 2012-05-04 2013-12-06 엘지이노텍 주식회사 카메라 모듈
JP2017090809A (ja) * 2015-11-16 2017-05-25 ミツミ電機株式会社 レンズ駆動装置、カメラモジュール及びカメラ搭載装置
WO2017086274A1 (ja) * 2015-11-16 2017-05-26 ミツミ電機株式会社 レンズ駆動装置、カメラモジュール及びカメラ搭載装置
JP2021173996A (ja) * 2020-04-30 2021-11-01 新思考電機有限公司 ２軸傾動装置、カメラ装置、及び電子機器
US11330186B2 (en) 2020-04-30 2022-05-10 New Shicoh Motor Co., Ltd. Biaxial tilting device, camera device, and electronic apparatus
JP7128314B2 (ja) 2020-04-30 2022-08-30 新思考電機有限公司 ２軸傾動装置、カメラ装置、及び電子機器
US11932531B2 (en) 2022-01-13 2024-03-19 Taiwan Semiconductor Manufacturing Company, Ltd. Curved cantilever design to reduce stress in MEMS actuator

Also Published As

Publication number Publication date
US7307653B2 (en) 2007-12-11
JP3950399B2 (ja) 2007-08-01
US20030076421A1 (en) 2003-04-24
EP1304872A1 (en) 2003-04-23

Similar Documents

Publication Publication Date Title
JP3950399B2 (ja) ハンドヘルド装置のマイクロカメラモジュールの画像安定化装置およびハンドヘルド装置のマイクロカメラモジュールを安定化させる方法
US8289406B2 (en) Image stabilization device using image analysis to control movement of an image recording sensor
TWI414815B (zh) Camera shake vibration correction device
US7430366B2 (en) Image capture device
US7783179B2 (en) Image blur correction apparatus, lens barrel, and image capture apparatus
US20140104453A1 (en) Image capturing apparatus
US8135266B2 (en) Mobile device
EP1795944A1 (en) Lens device and imager apparatus with image stabilizer
CN101324709B (zh) 成像设备
JP2008134329A (ja) 像ぶれ補正装置、レンズ鏡筒及び撮像装置
KR20070061394A (ko) 손떨림 보정기구, 렌즈 기기 및 촬상 장치
JPWO2006100804A1 (ja) 撮像装置
JP2008035308A (ja) 電子カメラ及びレンズユニット
JP2006300997A (ja) 像振れ防止機能を有する撮像装置
EP1916566B1 (en) Image blurring correction unit, image blurring correction apparatus, and imaging apparatus
JP2006295553A (ja) 像振れ防止機能を有する撮像装置
CN113711581A (zh) 相机模块及光学装置
JP2011160067A (ja) 手振れ補正装置及び方法、並びにカメラモジュール、携帯電話機
JP4609183B2 (ja) 撮像装置
US11258951B2 (en) Miniature camera device for stabilized video using shape memory alloy actuators
JP5009177B2 (ja) カメラ制振装置
CN100570467C (zh) 图像抖动补正单元、图像抖动补正装置、摄影装置以及便携式设备
JP2008107731A (ja) レンズ装置、撮像装置、デジタルカメラ及び携帯電話機
JP7184654B2 (ja) 撮影装置、画像補正方法、および画像補正プログラム
JP2006309081A (ja) ブレ補正装置およびそれを用いたカメラ付き携帯機器

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040422

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070305

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070327

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070420

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees