JP4253929B2

JP4253929B2 - Mouse with shooting function

Info

Publication number: JP4253929B2
Application number: JP15952999A
Authority: JP
Inventors: 久志重草; 忠雄野尻
Original assignee: Denso Corp
Current assignee: Denso Corp
Priority date: 1999-06-07
Filing date: 1999-06-07
Publication date: 2009-04-15
Anticipated expiration: 2019-06-07
Also published as: JP2000349985A

Description

【０００１】
【発明の属する技術分野】
本発明は、例えばコンピュータのディスプレイ上で、カーソル位置の指示に使用することができるマウスに関する。
【０００２】
【従来の技術】
従来より、コンピュータなどでは、処理対象となるデータの範囲や位置をディスプレイ上でカーソル（マウスカーソル）にて指示するために、マウスが広く使用されている。
【０００３】
このマウスは、通常、トラックボールと呼ばれる球状の回転体の回転量に応じたパルス信号を発生するパルス部と、処理を指示する信号を発生する複数のスイッチを備えている。
前記マウスには、コンピュータなどとケーブルで接続されるもの以外に、マウスに電池を内蔵して、コンピュータなどと赤外線などの無線通信手段で接続されるものがある。
【０００４】
更に、近年では、マウスに被写体の撮影が可能な光学的読取手段を組み込み、撮影した画像データをコンピュータに入力する技術が開示されている（特開平１１−７３５６号公報参照）。
この技術は、文書などの被写体の画像をコンピュータに取り込むために、マウスに文書などの表面を走査する１次元の光電変換素子（ＣＣＤリニアセンサ）を設け、マウスを文書などの表面に接触して移動させることにより、トラックボールの回転に伴って画像を走査して取り込むものである。
【０００５】
【発明が解決しようとする課題】
上述したマウスの光学系は、小さい体積で構成できるという利点があるが、その反面、文書などが接触するレンズ面（従ってマウスの底面）に焦点が固定されており、図９に示す様に、鮮明な画像が得られる距離の範囲（読取深度）が大変狭い（浅い）という問題がある。つまり、文書などの走査される面は、平坦でレンズ面に接していなければならないという制約がある。
【０００６】
このため、立体的な物体や、少し離れた位置にあって焦点位置を保つことが難しい対象物の画像の取り込みにおいて、いわゆるピンボケになり易いという問題があった。
更に、マウスのトラックボールは、紙などの面では滑り易く、画像を読み取る際に、移動距離に対応したパルスが正確に発生しないことがある。従って、２次元的な画像（例えば情報を２次元のマトリックスで示す２次元コード）を正確に捉えることが難しく、そのため、捉えた画像から２次元コードを解読することが容易ではないという問題があった。
【０００７】
本発明は、前記課題を解決するためになされたものであり、その目的は、被写体の画像の取り込みを確実に行うことができる撮影機能付きマウスを提供することにある。
【０００８】
【課題を解決するための手段及び発明の効果】
（１）請求項１の発明は、情報処理装置（例えばコンピュータ）の表示装置（例えばディスプレイ）上の処理対象に対する処理（例えばカーソル位置を示す処理）を指示するとともに、被写体（例えば２次元コード）を撮影してその画像を取り込むマウスであって、光を電気信号に変換する素子（例えばＣＣＤ素子）が２次元に配置され、結像した画像に対応した信号を出力するエリアセンサと、前記被写体の画像を前記エリアセンサ上に結像させる結像光学系と、を備えるとともに、前記結像光学系の光軸を、マウス底面と平行になるように構成し、且つ、前記結像光学系を保護する開閉可能なカバーであって、前記被写体の撮影の際に開状態とされる保護カバーを、前記マウスの側面に設けるとともに、前記保護カバーの内面側に反射光学系を設け、更に、前記保護カバー及び反射光学系を回転可能とすることにより、前記被写体の撮影方向を変更可能としたことを特徴とする撮影機能付きマウスを要旨とする。
【０００９】
本発明では、結像光学系の光軸を、マウス底面と平行になるように構成したので、従来の様に、光軸をマウス底面と垂直とした場合に比べて、読取深度を深くとることができる（図９（ｂ）参照）。それにより、立体的な物体や、少し離れた位置にあって焦点位置を保つことが難しい対象物の画像を取り込む場合でも、ピンボケになりにくいという効果がある。
【００１０】
また、本発明では、マウスのトラックボールの移動とは無関係に、被写体の画像をそのまま取り込むことができるので、画像を取り込む際の精度が向上する。従って、例えば２次元コードのような情報コードでも正確に捉えることができるので、捉えた画像から例えば２次元コードを精度良く解読することができる。
更に、本発明では、結像光学系を保護する開閉可能なカバーであって、被写体の撮影の際に開状態とされる保護カバーを備えているので、被写体の撮影を行わない場合には、保護カバーを閉状態とすることにより、マウス内の部品（特に結像光学系の部品）を保護することができる。
その上、本発明では、保護カバーをマウスの側面に設けるとともに、保護カバーの内面側に反射光学系（例えばプリズムや反射鏡）を設け、保護カバー及び反射光学系を回転可能とすることにより、被写体の撮影方向を変更可能としている。これにより、被写体の撮影方向を変更できるので、撮影の自由度が高まる。
【００１１】
尚、ここで、結像光学系とは、レンズ等のように、被写体からの光を（マウス内部にて）結像させる光学系であり、結像光学系の光軸とは、マウス内に取り入れられた光をエリアセンサに導くまでの光軸である。また、光軸がマウス内で例えば直角に曲がっている場合には、長い方の光軸（主な光軸）が、マウス底面と平行であることが望ましい。
また、反射光学系とは、マウスの外部にある被写体からの光を反射させて、結像光学系に導くための光学系である。
【００１２】
（２）請求項２の発明は、
前記マウスの処理動作を制御する制御部と、前記エリアセンサからの信号に対応した画像データを記憶するメモリと、を備えたことを特徴とする前記請求項１に記載の撮影機能付きマウスを要旨とする。
【００１３】
この制御部は、例えばＣＰＵ等を備えたマイクロコンピュータであり、この制御部によって、カーソル位置を指示したり、被写体の画像を取り込む処理等を行う。また、メモリに記憶した画像データは、例えば制御部の指令によってコンピュータに送信することができる。特に、この画像データが識別コードである場合は、制御部にて識別コードの解読を行って、解読したデータをコンピュータに送信することができる。
【００１４】
尚、メモリは、制御部内に設けられていてもよいが、別体であってもよい。
（３）請求項３の発明は、
前記結像光学系の光軸を、前記マウスの移動検出のＸ軸又はＹ軸と平行に配置したことを特徴とする前記請求項１又は２に記載の撮影機能付きマウスを要旨とする。
【００１５】
本発明は、結像光学系の光軸の向きを例示したものである。
【００２０】
（４）請求項４の発明は、前記保護カバーが略４５゜（例えば４５゜）回転して開くことで、前記マウスの側面側の下方にある前記被写体の画像を捉えるようにしたことを特徴とする前記請求項１〜３のいずれかに記載の撮影機能付きマウスを要旨とする。
【００２１】
本発明では、保護カバー及び反射光学系を例えば４５゜回転させることにより、マウスの側面側の下方の被写体の画像を取り込むことができる。この場合、被写体から反射光学系に至る光軸は、被写体と垂直（従ってマウスの底面の平面と垂直）であるが、反射光学系からエリアセンサに至る結像光学系の光軸は、マウスの底面と平行である。
【００２２】
尚、マウスの側面側の下方とは、マウスの側面側の近傍において、底面のある平面（底面平面）より下方のことであり、マウスの真下ではない。
（５）請求項５の発明は、前記保護カバーを、それが開いたときにマウスの側面から突出することにより、前記被写体の画像を捉える目安となるように構成したことを特徴とする前記請求項１〜４のいずれかに記載の撮影機能付きマウスを要旨とする。
【００２３】
本発明では、保護カバーが開いたときには、マウスの側面から突出するので、この保護カバーが被写体の画像を捉える目安となる。よって、画像の取り込みが容易になる。
（６）請求項６の発明は、前記結像光学系の焦点を、前記マウスの底面付近の距離にある前記被写体に対して設定したことを特徴とする前記請求項１〜５のいずれかに記載の撮影機能付きマウスを要旨とする。
【００２４】
これにより、明瞭な結像画像を得ることができる。つまり、本発明においても、そのレンズ面はマウス底面近傍に設定されているが、従来と比べて十分に光軸の長さを確保できるので、読取深度が深く、よって、各種の被写体に対しても、ピンボケを生ずることなく明瞭な画像が得られる。
【００２５】
（７）請求項７の発明は、前記結像光学系を、前記マウスに対して着脱可能に取り付けたことを特徴とする前記請求項１〜６のいずれかに記載の撮影機能付きマウスを要旨とする。
本発明では、必要に応じて、異なる性能を有する結像光学系（例えば焦点距離や倍率や絞りなどが異なるもの）を取り付けて使用することにより、用途にあった撮影を行うことができる。
【００２６】
（８）請求項８の発明は、前記被写体の撮影を指示するシャッタスイッチを備えたことを特徴とする前記請求項１〜７のいずれかに記載の撮影機能付きマウスを要旨とする。
従って、このシャッタスイッチを操作（例えば押す）ことにより、被写体の撮影を行って、その画像を取り込むことができる。また、この被写体が識別コードである場合には、画像の取り込みとともに、識別コードの解析を行ってもよい。
【００２７】
（９）請求項９の発明は、前記シャッタスイッチを、前記マウスの側面に設けたことを特徴とする前記請求項８に記載の撮影機能付きマウスを要旨とする。
シャッタスイッチがマウスの（好ましくは左側の）側面に設けられているので、通常の様にマウスの手のひらを載せた状態のままで、シャッタスイッチを操作することができる。
【００２８】
（１０）請求項１０の発明は、前記表示装置上の処理対象に対する処理を指示する際のマウスモードと、前記被写体の撮影を行う際のカメラモードと、を備えたことを特徴とする前記請求項１〜９のいずれかに記載の撮影機能付きマウスを要旨とする。
【００２９】
ここでは、マウスを使用する際のモードを例示している。前記マウスモードとは、例えばカーソル位置の指示等の通常のマウスの使用モードであり、一方、カメラモードとは、被写体を撮影して、その画像を取り込む際の使用モードである。このカメラモードの場合には、取り込んだ画像を示す画像データをメモリに記憶したり、コンピュータに送信することができ、更に、必要に応じて画像データの解読を行うことができる。
【００３０】
（１１）請求項１１の発明は、前記マウスモードと前記カメラモードとの切り替えは、前記情報処理装置からの指示により行うことを特徴とする前記請求項１０に記載の撮影機能を有するマウスを要旨とする。
【００３１】
ここでは、モードの切り替え方法を例示している。これにより、マウス側の構成を簡易化でき、また、マウスのモードをマウス外部のコンピュータ側の操作で制御することができる。更に、本発明では、コンピュータ側とマウス側におけるモード認識が食い違うことがないという利点がある。
【００３３】
（１２）請求項１２の発明は、前記カメラモードでは、前記エリアセンサによって得られた画像データを前記情報処理装置に出力し、前記表示装置上に前記被写体の画像を再生して表示し得るようにしたことを特徴とする前記請求項１０又は１１に記載の撮影機能付きマウスを要旨とする。
【００３４】
カメラモードでは、画像データを例えばコンピュータに送信するので、例えばディスプレイ上に撮影した画像を表示することができる。
【００３７】
（１３）請求項１３の発明は、前記カメラモードには、画像モードと解読モードとがあり、前記画像モードは、前記画像データを出力するモードであり、前記解読モードは、前記画像データを所定の規定に基づいて解読し、該解読したデータを出力するモードであることを特徴とする前記請求項１０〜１２のいずれかに記載の撮影機能付きマウスを要旨とする。
【００３８】
本発明は、カメラモードを更に２つのモードに区分している。従って、画像モードでは、取り込んだ画像の前記画像データを出力し、解読モードでは、画像データを解読した結果（例えば２次元コードの内容）を出力する。
（１４）請求項１４の発明は、前記解読モードでは、前記シャッタスイッチを操作した時に捉えた画像について、前記被写体の情報コード（例えば２次元コード）の解読を行うことを特徴とする前記請求項１３に記載の撮影機能付きマウスを要旨とする。
【００３９】
従って、解読モードでは、シャッタスイッチを操作するたびに、情報コードを解読することができる。
（１５）請求項１５の発明は、前記マウスに接続された前記情報処理装置からの指示により、前記画像モードと解読モードとを切り替えることを特徴とする前記請求項１２〜１４のいずれかに記載の撮影機能付きマウスを要旨とする。
【００４０】
ここでは、モードの切り替え方法を例示している。これにより、マウス側の構成を簡易化でき、また、マウスのモードをマウス外部のコンピュータ側の操作で制御することができる。
（１６）請求項１６の発明は、前記被写体が、情報コードの一種の２次元コードであることを特徴とする前記請求項１〜１５のいずれかに記載の撮影機能付きマウスを要旨とする。
【００４１】
本発明は、被写体の種類を例示したものである。本発明では、２次元コードの画像を精度良く取り込むことができるので、２次元コードの解読も確実に行うことができる。
【００４２】
【発明の実施の形態】
次に、本発明の撮影機能付きマウスの実施の形態の例（実施例１〜５）について、図面に基づいて説明する。
なお、実施例３、４は、参考例である。
（実施例１）
ここでは、コンピュータに接続され、そのディスプレイ上にてカーソル（マウスカーソル）の位置を指示することができ、更に被写体を撮影してその画像を取り込むことができる撮影機能付きマウス（以下単にマウスと記す）について説明する。
【００４３】
尚、前記被写体の撮影とは、被写体の画像からの光をマウス内に導き、その結像画像を画像データとして取り入れる処理を示す（以下画像の読み取りとも記す）。
ａ）まず、本実施例のマウスの基本構成について説明する。
【００４４】
尚、図１（ａ）はマウスの左側面を示し、図１（ｂ）はマウスの上面（平面）を示している。
図１（ｂ）に示す様に、本実施例のマウス１は、そのマウス本体３の上面側に、周知の右ボタン（右側操作スイッチ）５及び左ボタン（左側操作スイッチ）７と、カメラモードであることを示すカメラ状態表示ＬＥＤ９と、マウスモードであること示すマウス状態表示ＬＥＤ１１を備えている。また、マウス１の底面側には、トラックボール１３を備えている。
【００４５】
前記カメラモードとは、マウス１によって被写体を撮影してその画像を取り込む際のモードであり、マウスモードとは、例えばカーソル位置を指定する通常のマウス１として用いる際のモードである。
また、図１（ａ）に示す様に、マウス１の左側面には、後述する結像光学系の開口部１５を覆う保護カバー１７と、被写体の撮影（即ち被写体の画像の読み込みの開始）を指示するシャッタスイッチ１９が設けられている。
【００４６】
更に、図２に保護カバー１７を開いた状態を示す様に、マウス１の内部には、被写体の画像（例えばコード記録面２１に配置された２次元コード）を読み取るために、光学的読取装置２３が設けられている。尚、前記保護カバー１７は、矢印Ａ方向（図２（ｂ）参照）に回動可能である。
【００４７】
この光学的読取装置２３は、保護カバー１７の内側に配置されたプリズム２５（反射光学系Ｈ１）と、光を電気信号に変換するＣＣＤ素子が２次元的（平面状）に配置されたエリアセンサ２７と、エリアセンサ２７に画像を結像させる結像光学系Ｋ１とを備えている。
【００４８】
前記結像光学系Ｋ１とは、図２（ｃ）に示す様に、プリズム２５からエリアセンサ２７に到る光学系であり、被写体の画像をエリアセンサ２７に結像させるために、絞り２９やレンズ３１等の光学機器を備えている。尚、結像光学系Ｋ１は、マウスの底面付近の距離になる被写体の対して焦点が設定されている。
【００４９】
そして、前記保護カバー１７が開けられると、プリズム２５も回動し、プリズム２５は４５゜回転した位置で停止する。これにより、光軸は図の上下方向から左右方向に直角に屈曲する。尚、図２（ｃ）の左右方向の光軸が、マウス１の底面と平行な（結像光学系Ｋ１の）光軸である。
【００５０】
従って、被写体の撮影を行う場合には、被写体からの光は、プリズム２３にて反射されて図の右方向に曲がり、絞り２９及びレンズ３１を介して、エリアセンサ２７にて結像する。
この構成により、本実施例のマウス１は、マウス１の真下ではなくその側面近傍にて、マウス１の下方（底面方向）にある被写体を撮影することができる。
【００５１】
ｂ）次に、上述したマウス１の電気的構成等を説明する。
図３に示す様に、マウス１には、マウス１の動作を制御するために、周知のＣＰＵ、ＲＯＭ、ＲＡＭ等を備えたマイクロコンピュータである制御部４１が設けられ、制御部４１は、インターフェース４３を介して、別体のメインコンピュータ４５側と接続されている。
【００５２】
前記制御部４１には、上述した右側操作スイッチ５、左側操作スイッチ７、エリアセンサ２７、シャッタスイッチ１９が接続されるとともに、保護カバー１７の開閉状態を検出するカバー開閉検出器４７が接続されている。また、カメラモードの場合に点灯するカメラ状態表示ＬＥＤ９と、マウスモードの場合に点灯するマウス状態表示ＬＥＤ１１も接続されている。
【００５３】
尚、プリズム２５の近傍には、被写体に対して光を照射して、被写体の画像の読み取りが確実にできるように、例えばＬＥＤからなる投光部（図示せず）が設けられている。
従って、被写体の撮影を行う場合には、被写体の画像は、プリズム２５にて反射されて、絞り２９やレンズ３１等を介してエリアセンサ２７に結像するので、エリアセンサ２７では、その結像画像に対応した信号（画像信号を）を制御部４１に出力する。
【００５４】
制御部４１では、その画像信号を画像データとしてメモリ（図示せず）に記憶し、必要に応じて、インターフェース４３を介してホストコンピュータ４５側に送信する。
一方、このマウス１には、ディスプレイ５９上のカーソル位置を示すために、トラックボール１３の回転状態を検出するＸ軸回転検出器４９及び波形整形回路５１と、Ｙ軸回転検出器５３及び波形整形回路５５を備えており、制御部４１の制御により、インターフェース４３を介して、メインコンピュータ４５側にカーソル位置を示す信号を出力する。尚、前記結像光学系の光軸は前記Ｘ軸回転検出器４９で検出されるＸ軸と平行である。
【００５５】
また、本実施例では、メインコンピュータ４５側から電源を供給されるので、マウス１内に電源回路５７が設けられている。
尚、これとは別に、外部から電源供給を受けないように、マウス１内に電池を内蔵してもよい。また、ケーブル（有線）１ａによってマウス１とメインコンピュータ４５側とを接続するのではなく、赤外線などの無線通信によりデータの送受信を行ってもよい。
【００５６】
ｃ）次に、制御部４１にて行われる制御処理を説明する。
図４のフローチャートに示す様に、まず、ステップ１００にて、保護カバー１７の開閉状態をメインコンピュータ４５に送信する。
つまり、保護カバー１７が開かれた場合には、カバー開閉検出器４５がＯＮ（オン）となるので、カバー開閉検出器４５からの信号を制御部４１が受信すると、制御部４１から保護カバー１７の開閉状態を送信するのである。
【００５７】
従って、メインコンピュータ４５では、送信された信号に基づいて、マウスモードを設定する状態（例えばカーソル位置を指定する状態）であるか、又はカメラモードを設定する状態（画像の読み込みを行う状態）であるかを判断する。
よって、メインコンピュータ４５では、マウス１に対して、保護カバー１７が閉じている場合には、マウスモードに設定する旨の信号を出力し、一方、保護カバー１７が開いている場合には、カメラモードに設定する旨の信号を出力する。
【００５８】
続くステップ１１０では、メインコンピュータ４５からマウスモードに設定する旨の信号を受信したか否かを判定する。ここで肯定判断されるとステップ１２０に進み、一方否定判断されるとステップ１５０に進む。
ステップ１２０では、マウスモードに設定する。従って、この場合には、エリアセンサ２７などによる画像を読み込むための処理（カメラモードの処理）を実施しないようにしておく。
【００５９】
続くステップ１３０では、通常のマウスモードにおける処理、例えばトラックボール１３の回転に伴い、その回転量（移動量）に応じたパルス（移動パルス）を、メインコンピュータ４５に出力する等の処理を行う。
従って、メインコンピュータ４５では、マウス１から送信された信号に基づき、ディスプレイ５９上にて前記送信された信号に応じて例えばカーソルを移動させる。
【００６０】
続くステップ１４０では、電源がＯＦＦか否かを判定し、ＯＦＦの場合は、一旦本処理を終了し、そうでない場合は、前記ステップ１００に戻って同様な処理を繰り返す。
一方、前記ステップ１１０にて否定判断されて進むステップ１５０では、メインコンピュータ４５からカメラモードに設定する旨の信号を受信したか否かを判定する。ここで肯定判断されるとステップ１６０に進み、一方否定判断されると前記ステップ１００に戻る。
【００６１】
ステップ１６０では、カメラモードに設定する。従って、この場合には、トラックボール１３が回転しても、移動パルスの出力を禁止し、マウスモードの処理（例えばカーソル位置を指定するための処理等）を実施しないようにしておく。また、シャッタスイッチ１９の操作を有効とする処理を行う。
【００６２】
続くステップ１７０では、シャッタスイッチ１９が操作（ＯＮ）されたか否かを判定する。ここで肯定判断されるとステップ１８０に進み、一方否定判断されると前記ステップ１４０に進む。
ステップ１８０では、画像を読み込む処理、即ち画像データを取り込む処理を実施する。
【００６３】
具体的には、プリズム２５やレンズ３１等によって、エリアセンサ２７上には被写体の画像を写した画像（結像画像）が結像するので、エリアセンサ２７では、その結像画像に対応した電気信号（画像信号）を制御部４１に出力する。従って、制御部４１では、この画像信号を画像データとしてメモリに記憶する。
【００６４】
続くステップ１９０では、画像データを出力する処理を行って、前記ステップ１９０に進む。
つまり、制御部４１のメモリに記憶した画像データを、インターフェース４３を介して、メインコンピュータ４５に出力する処理を行う。
【００６５】
従って、メインコンピュータ４５では、ディスプレイ５９上に送信された画像データに基づいて画像を再生する。
この様に、本実施例では、光学的読取装置３の向きがＸ軸方向であり、結像光学系Ｋ１の光軸がマウス１の底面と平行であるので、従来と比べて、読取深度が深くなっている。このため、立体的な物体や、少し離れた位置にある画像の読み込みを行う場合に、画像がピンボケになり難いという効果がある。
【００６６】
また、マウス１のトラックボール１３の回転に応じて画像を取り込むのではなく、撮影した被写体の画像をそのまま取り込むことができるので、２次元的な画像を正確に捉えることができる。
よって、捉えた画像が２次元コード等の情報コードである場合には、画像データを受信したメインコンピュータ４５にて、その情報コードを正確に解読することができる。
【００６７】
更に、保護カバー１７はマウス１の側面に突出する構成であるので、被写体の位置と（それを撮影するための）プリズム２５の位置を、容易に且つ正確に合わせることができる。
（実施例２）
次に、実施例２について説明するが、前記実施例１と同様な箇所の説明は省略する。
【００６８】
本実施例は、前記実施例１と同様なハード構成を有するが、制御部にて行われる制御処理が異なる。以下、この制御処理について説明する。
図５のフローチャートに示す様に、まず、ステップ２００にて、保護カバー１７の開閉状態をメインコンピュータ４５に送信する。
【００６９】
続くステップ２１０では、メインコンピュータ４５からマウスモードに設定する旨の信号を受信したか否かを判定する。ここで肯定判断されるとステップ２２０に進み、一方否定判断されるとステップ２５０に進む。
ステップ２２０では、マウスモードに設定する。
【００７０】
続くステップ２３０では、通常のマウスモードにおける処理を行う。
続くステップ２４０では、電源がＯＦＦか否かを判定し、ＯＦＦの場合は、一旦本処理を終了し、そうでない場合は、前記ステップ２００に戻って同様な処理を繰り返す。
【００７１】
一方、前記ステップ２１０にて否定判断されて進むステップ２５０では、メインコンピュータ４５からカメラモードに設定する旨の信号を受信したか否かを判定する。ここで肯定判断されるとステップ２６０に進み、一方否定判断されると前記ステップ３００に進む。
【００７２】
ステップ２６０では、カメラモードに設定する。尚、解読モードでない場合は、このカメラモードは（画像を読み込む）画像モードを意味する。
続くステップ２７０では、シャッタスイッチ１９が操作（ＯＮ）されたか否かを判定する。ここで肯定判断されるとステップ２８０に進み、一方否定判断されると前記ステップ２４０に進む。
【００７３】
ステップ２８０では、結像画像の画像データを制御部４１に取り込む処理を実施する。
続くステップ２９０では、制御部４１からメインコンピュータ４５に画像データを出力する処理を行って、前記ステップ２４０に進む。
【００７４】
一方、前記ステップ２５０にて否定判断されて進むステップ３００では、メインコンピュータ４５から解読モードに設定する旨の信号を受信したか否かを判定する。ここで肯定判断されるとステップ３１０に進み、一方否定判断されると前記ステップ２４０に進む。
【００７５】
ステップ３１０では、解読モードに設定する。この解読モードとは、取り込んだ画像データを解読するモード、例えば２次元コードを示す画像データから２次元コードの意味する内容を解読するモードである。
続くステップ３２０では、シャッタスイッチ１９が操作（ＯＮ）されたか否かを判定する。ここで肯定判断されるとステップ３３０に進み、一方否定判断されると前記ステップ２４０に進む。
【００７６】
ステップ３３０では、結像画像の画像データを制御部４１に取り込むとともに、その取り込んだ画像データを解読する処理を実施する。
続くステップ３４０では、制御部４１からメインコンピュータ４５に解読したデータを出力する処理を行って、前記ステップ２４０に進む。
【００７７】
従って、メインコンピュータ４５では、ディスプレイ５９上にその解読したデータを表示することができる。
この様に、本実施例では、前記実施例１と同様な効果を奏するとともに、マウス１にて画像データの解読を行うので、メインコンピュータ４５に送信するデータを少なくすることができる。つまり、送受信のデータの負担を軽減することができる。
（実施例３）
次に、実施例３について説明するが、前記実施例１と同様な箇所の説明は省略する。
【００７８】
本実施例は、前記実施例１とはハード構成が異なり、マウスの底面にて被写体の撮影を行うものである。
図６に示す様に、本実施例のマウス６１では、マウス６１の底面と平行に（Ｘ軸方向に）、光学的読取装置６３が配置されている。
【００７９】
つまり、この光学的読取装置６３では、図６（ｃ）に示す様に、反射鏡６５（反射光学系Ｈ３）、（絞り６７、レンズ６９等からなる）結像光学系Ｋ３、エリアセンサ７１等が、マウス７１の底面と平行な光軸に沿って配置されている。
また、マウス１の底面には、図６（ａ）に示す様に、矢印Ｂ，Ｃ方向に摺動する保護カバー７３が配置されており、この保護カバー７３が矢印Ｂ方向に移動した場合（図示の状態）に、画像を読み込むための開口部７５が開く構成となっている。
【００８０】
従って、例えば被写体からの光は、図６（ｃ）に示す様に、反射鏡６５にて反射して、絞り６７やレンズ６９等を介して、エリアセンサ７１にて結像する。
この様に、本実施例では、マウス１の底面から被写体の画像を読み込む構成であるので、通常のカメラと同様に、マウス１を手で持ち上げて、少し離れたところにある被写体に向けて撮影する用途に適している。
（実施例４）
次に、実施例４について説明するが、前記実施例３と同様な箇所の説明は省略する。
【００８１】
本実施例は、前記実施例３とは、光学的読取装置の向きが異なる。
図７に示す様に、本実施例のマウス７１では、前記実施例２と同様に、マウス７１の底面と平行に光学的読取装置７３が配置されているが、光学的読取装置７３は、図の縦方向（Ｙ軸方向；左右の操作スイッチ７５，７７の配置方向と垂直の方向）となっている。
【００８２】
従って、このマウス７１では、図の上方から、反射鏡７９（反射光学系Ｈ４）、結像光学系Ｋ４、エリアセンサ８３の配置となっている。
この構成により、設計の自由度が向上するという利点がある。
（実施例５）
次に、実施例５について説明するが、前記実施例１と同様な箇所の説明は省略する。
【００８３】
本実施例は、前記実施例１とはハード構成が異なり、マウスの側面から画像を取り込むものである。
図８に示す様に、本実施例のマウス９１では、マウス９１の底面と平行に（Ｘ軸方向）、光学的読取装置９３が配置されている。
【００８４】
つまり、この光学的読取装置９３では、図８（ｃ）に示す様に、（絞り９５、レンズ９７等からなる）結像光学系Ｋ５、エリアセンサ９９等が、マウス９１の底面と平行な光軸に沿って配置されている。
特に、本実施例では、図８（ａ）に示す様に、マウス９１の側面には、画像を読み込むための開口部１０１が、前記光軸上に設けられて開口している。尚、開口部１０１の表面には、透明なカバーを設けてもよい。
【００８５】
従って、マウス１の側面側にある被写体からの光は、図６（ｃ）に示す様に、側面の開口部１０１から、直接に絞り９５やレンズ９７等を介して、エリアセンサ９９にて結像する。
この様に、本実施例では、マウス９１の側面側にて被写体を撮影してその画像を読み込む構成であるので、側面側にある各種の画像を取り込むことが容易であるという利点がある。
【００８６】
尚、本発明は前記実施例になんら限定されるものではなく、本発明を逸脱しない範囲において種々の態様で実施しうることはいうまでもない。
（１）例えば、光学的読取装置のうち、結像光学系の一部又は全体を、マウスに着脱可能に取り付けてもよい。これにより、例えば読取深度などを変更することができる。
【００８７】
（２）また、カメラモードにて、被写体の撮影を指示するシャッタスイッチを操作した後は、新たな操作を一旦無効とし、その後メインコンピュータから新たな撮影を許可する指示がある場合には、新たな操作を有効とすることが望ましい。これにより、確実に画像の読み込みを行うことができるという利点がある。
【図面の簡単な説明】
【図１】実施例１のマウスを示し、（ａ）はその左側面図、（ｂ）はその平面図である。
【図２】実施例１のマウスを示し、（ａ）はその平面図、（ｂ）はその正面図、（ｃ）はその光学系を示す説明図である。
【図３】実施例１のマウス等の基本構成を示す説明図である。
【図４】実施例１の制御処理を示すフローチャートである。
【図５】実施例２の制御処理を示すフローチャートである。
【図６】実施例３のマウスを示し、（ａ）はその底面図、（ｂ）はその平面図、（ｃ）はその光学系を示す説明図である。
【図７】実施例４のマウスの平面図である。
【図８】実施例５のマウスを示し、（ａ）はその左側面図、（ｂ）はその平面図、（ｃ）はその光学系を示す説明図である。
【図９】読取深度を示す説明図である。
【符号の説明】
１，６１，７１，９１…マウス
１７，７３…保護カバー
１９…シャッタスイッチ
２３，６３，７３，９３…光学的読取装置
２５…プリズム
２７，７１，８３，９９…エリアセンサ
６５，７９…反射鏡
Ｈ１，Ｈ３…反射光学系
Ｋ１，Ｋ３，Ｋ４，Ｋ５…結像光学系[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a mouse that can be used to indicate a cursor position on, for example, a computer display.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, in computers and the like, a mouse has been widely used to indicate a range and position of data to be processed with a cursor (mouse cursor) on a display.
[0003]
This mouse usually includes a pulse unit that generates a pulse signal corresponding to the amount of rotation of a spherical rotating body called a trackball, and a plurality of switches that generate signals instructing processing.
In addition to a mouse connected to a computer or the like by a cable, there is a mouse that has a built-in battery and is connected to a computer or the like by wireless communication means such as infrared rays.
[0004]
Furthermore, in recent years, a technique has been disclosed in which optical reading means capable of photographing a subject is incorporated in a mouse and photographed image data is input to a computer (see Japanese Patent Application Laid-Open No. 11-7356).
In this technology, in order to capture an image of a subject such as a document into a computer, a one-dimensional photoelectric conversion element (CCD linear sensor) that scans the surface of the document or the like is provided on the mouse, and the mouse contacts the surface of the document or the like. By moving it, the image is scanned and captured as the trackball rotates.
[0005]
[Problems to be solved by the invention]
The mouse optical system described above has the advantage that it can be configured with a small volume, but on the other hand, the focal point is fixed to the lens surface (and hence the bottom surface of the mouse) that the document contacts, as shown in FIG. There is a problem that the distance range (reading depth) at which a clear image can be obtained is very narrow (shallow). In other words, there is a restriction that the scanned surface of a document or the like must be flat and in contact with the lens surface.
[0006]
For this reason, there has been a problem that so-called out-of-focus is likely to occur when capturing an image of a three-dimensional object or an object that is located at a distance from each other and is difficult to maintain the focal position.
Further, the mouse trackball is slippery on paper or the like, and when the image is read, a pulse corresponding to the moving distance may not be generated accurately. Therefore, it is difficult to accurately capture a two-dimensional image (for example, a two-dimensional code indicating information in a two-dimensional matrix). Therefore, there is a problem that it is not easy to decode the two-dimensional code from the captured image. It was.
[0007]
The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a mouse with a photographing function that can reliably capture an image of a subject.
[0008]
[Means for Solving the Problems and Effects of the Invention]
  (1) The invention of claim 1 indicates processing (for example, processing indicating a cursor position) for a processing target on a display device (for example, display) of an information processing device (for example, a computer) and a subject (for example, a two-dimensional code). An area sensor that two-dimensionally arranges elements that convert light into electrical signals (for example, CCD elements) and outputs signals corresponding to the formed image, and the subject An imaging optical system that forms an image of the image on the area sensor, and the optical axis of the imaging optical system is configured to be parallel to the bottom surface of the mouse.And an openable and closable cover for protecting the imaging optical system, the protective cover being opened when the subject is photographed, provided on the side surface of the mouse and on the inner surface side of the protective cover A reflective optical system is provided, and further, the photographing direction of the subject can be changed by rotating the protective cover and the reflective optical system.The gist of this invention is a mouse with a photographing function.
[0009]
In the present invention, since the optical axis of the imaging optical system is configured to be parallel to the bottom surface of the mouse, the reading depth is deeper than in the conventional case where the optical axis is perpendicular to the bottom surface of the mouse. (See FIG. 9B). As a result, even when capturing an image of a three-dimensional object or an object that is located at a little distance and is difficult to maintain the focal position, there is an effect that the image is less likely to be out of focus.
[0010]
  Further, according to the present invention, the image of the subject can be captured as it is regardless of the movement of the mouse trackball, so that the accuracy when capturing the image is improved. Therefore, since an information code such as a two-dimensional code can be accurately captured, for example, the two-dimensional code can be accurately decoded from the captured image.
  Furthermore, in the present invention, the cover that can be opened and closed that protects the imaging optical system is provided with a protective cover that is opened when the subject is photographed. By closing the protective cover, it is possible to protect components in the mouse (particularly components of the imaging optical system).
In addition, in the present invention, a protective cover is provided on the side surface of the mouse, and a reflective optical system (for example, a prism or a reflective mirror) is provided on the inner surface side of the protective cover so that the protective cover and the reflective optical system can be rotated. The shooting direction of the subject can be changed. Thereby, since the shooting direction of the subject can be changed, the degree of freedom of shooting is increased.
[0011]
  Here, the imaging optical system is an optical system that forms an image of light from a subject (inside the mouse), such as a lens, and the optical axis of the imaging optical system is within the mouse. This is the optical axis until the taken-in light is guided to the area sensor. When the optical axis is bent at a right angle in the mouse, for example, it is desirable that the longer optical axis (main optical axis) is parallel to the bottom surface of the mouse.
  The reflective optical system is an optical system for reflecting light from a subject outside the mouse and guiding it to the imaging optical system.
[0012]
(2) The invention of claim 2
The mouse with a photographing function according to claim 1, further comprising: a control unit that controls a processing operation of the mouse; and a memory that stores image data corresponding to a signal from the area sensor. And
[0013]
This control unit is, for example, a microcomputer provided with a CPU or the like, and the control unit instructs a cursor position or performs processing for capturing an image of a subject. Further, the image data stored in the memory can be transmitted to the computer, for example, according to a command from the control unit. In particular, when the image data is an identification code, the control unit can decode the identification code and transmit the decoded data to the computer.
[0014]
The memory may be provided in the control unit, but may be a separate body.
(3) The invention of claim 3
The gist of the mouse with a photographing function according to claim 1 or 2, wherein the optical axis of the imaging optical system is arranged in parallel with the X axis or the Y axis of the movement detection of the mouse.
[0015]
  The present invention exemplifies the direction of the optical axis of the imaging optical system.The
[0020]
  (4Claim4The present invention is characterized in that the image of the subject under the side surface of the mouse is captured by opening the protective cover by rotating approximately 45 ° (for example, 45 °).Any one of 1-3The gist of the mouse with a photographing function described in 1.
[0021]
In the present invention, by rotating the protective cover and the reflective optical system, for example, by 45 °, an image of the subject below the side surface of the mouse can be captured. In this case, the optical axis from the subject to the reflective optical system is perpendicular to the subject (and thus perpendicular to the plane of the bottom surface of the mouse), but the optical axis of the imaging optical system from the reflective optical system to the area sensor is It is parallel to the bottom.
[0022]
  The lower side of the mouse on the side surface side is below the plane with the bottom surface (bottom surface plane) in the vicinity of the side surface side of the mouse and is not directly below the mouse.
  (5Claim5The present invention is characterized in that the protective cover is configured to project from the side surface of the mouse when the protective cover is opened, thereby serving as a guide for capturing the image of the subject.1-4The gist of the mouse with a photographing function according to any one of the above.
[0023]
  In the present invention, when the protective cover is opened, it protrudes from the side of the mouse, so this protective cover serves as a standard for capturing the image of the subject. Therefore, it is easy to capture an image.
  (6Claim6According to the invention, the focal point of the imaging optical system is set with respect to the subject at a distance near the bottom surface of the mouse.5The gist of the mouse with a photographing function according to any one of the above.
[0024]
As a result, a clear image can be obtained. In other words, in the present invention, the lens surface is set near the bottom surface of the mouse, but since the length of the optical axis can be sufficiently secured as compared with the conventional case, the reading depth is deep, and therefore, for various subjects. However, a clear image can be obtained without causing blurring.
[0025]
  (7Claim7The invention of claim 1 is characterized in that the imaging optical system is detachably attached to the mouse.6The gist of the mouse with a photographing function according to any one of the above.
  In the present invention, if necessary, an imaging optical system having different performances (for example, ones having different focal lengths, magnifications, apertures, etc.) can be attached and used to perform photographing suitable for the application.
[0026]
  (8Claim8The present invention further comprises a shutter switch for instructing photographing of the subject.7The gist of the mouse with a photographing function according to any one of the above.
  Therefore, by operating (for example, pressing) the shutter switch, the subject can be photographed and the image can be captured. Further, when the subject is an identification code, the identification code may be analyzed together with the image capture.
[0027]
  (9Claim9The present invention is characterized in that the shutter switch is provided on a side surface of the mouse.8The gist of the mouse with a photographing function described in 1.
  Since the shutter switch is provided on the side surface (preferably on the left side) of the mouse, the shutter switch can be operated with the palm of the mouse placed as usual.
[0028]
  (10Claim10The invention according to claim 1, further comprising: a mouse mode for instructing processing on a processing target on the display device; and a camera mode for photographing the subject.9The gist of the mouse with a photographing function according to any one of the above.
[0029]
Here, the mode when using a mouse is illustrated. The mouse mode is a normal mouse use mode such as an instruction of a cursor position, for example, while the camera mode is a use mode for photographing a subject and capturing the image. In the case of this camera mode, image data indicating the captured image can be stored in a memory or transmitted to a computer, and the image data can be decoded as necessary.
[0030]
  (11Claim11In the invention, the switching between the mouse mode and the camera mode is performed by an instruction from the information processing apparatus.10The gist of the mouse having the photographing function described in 1 above.
[0031]
Here, a mode switching method is illustrated. Thereby, the configuration on the mouse side can be simplified, and the mode of the mouse can be controlled by the operation on the computer side outside the mouse. Furthermore, the present invention has the advantage that mode recognition on the computer side and the mouse side do not conflict.
[0033]
  (12Claim12In the camera mode, the image data obtained by the area sensor can be output to the information processing apparatus, and the image of the subject can be reproduced and displayed on the display apparatus in the camera mode. Said claim10 or 11The gist of the mouse with a photographing function described in 1.
[0034]
  In the camera mode, image data is transmitted to a computer, for example, so that the captured image can be displayed on a display, for example.The
[0037]
  (13Claim13According to the invention, the camera mode includes an image mode and a decoding mode. The image mode is a mode for outputting the image data. The decoding mode decodes the image data based on a predetermined rule. And a mode for outputting the decrypted data.10-12The gist of the mouse with a photographing function according to any one of the above.
[0038]
  In the present invention, the camera mode is further divided into two modes. Therefore, in the image mode, the image data of the captured image is output, and in the decoding mode, the result of decoding the image data (for example, the contents of a two-dimensional code) is output.
  (14Claim14In the decoding mode, the information code (for example, a two-dimensional code) of the subject is decoded for an image captured when the shutter switch is operated.13The gist of the mouse with a photographing function described in 1.
[0039]
  Therefore, in the decoding mode, the information code can be decoded every time the shutter switch is operated.
  (15Claim15The present invention is characterized in that the image mode and the decoding mode are switched in accordance with an instruction from the information processing apparatus connected to the mouse.12-14The gist of the mouse with a photographing function according to any one of the above.
[0040]
  Here, a mode switching method is illustrated. Thereby, the configuration on the mouse side can be simplified, and the mode of the mouse can be controlled by an operation on the computer side outside the mouse.
  (16Claim16In the invention of claim 1, the subject is a kind of two-dimensional code of an information code.15The gist of the mouse with a photographing function according to any one of the above.
[0041]
The present invention exemplifies the types of subjects. In the present invention, since the image of the two-dimensional code can be captured with high accuracy, the two-dimensional code can be reliably decoded.
[0042]
DETAILED DESCRIPTION OF THE INVENTION
  Next, an example of an embodiment of a mouse with a photographing function of the present invention (Example1-5) Will be described with reference to the drawings.
  Examples3, 4Is a reference example.
  Example 1
  Here, a mouse with a shooting function (hereinafter simply referred to as a mouse) that is connected to a computer, can indicate the position of the cursor (mouse cursor) on the display, and can take a picture of the subject and capture the image. ).
[0043]
The photographing of the subject refers to a process of guiding light from the image of the subject into the mouse and taking the image formed as image data (hereinafter also referred to as image reading).
a) First, the basic configuration of the mouse of this embodiment will be described.
[0044]
FIG. 1A shows the left side of the mouse, and FIG. 1B shows the top (plane) of the mouse.
As shown in FIG. 1B, the mouse 1 according to the present embodiment has a well-known right button (right operation switch) 5 and left button (left operation switch) 7 on the upper surface side of the mouse body 3 and a camera mode. A camera status display LED 9 indicating that the mouse mode is selected, and a mouse status display LED 11 indicating the mouse mode. A trackball 13 is provided on the bottom side of the mouse 1.
[0045]
The camera mode is a mode for photographing a subject with the mouse 1 and capturing the image, and the mouse mode is a mode for use as a normal mouse 1 for specifying a cursor position, for example.
Further, as shown in FIG. 1A, on the left side surface of the mouse 1, a protective cover 17 that covers an opening 15 of an imaging optical system, which will be described later, and photographing of a subject (that is, starting reading of a subject image) are provided. A shutter switch 19 is provided for instructing.
[0046]
Further, as shown in FIG. 2 in which the protective cover 17 is opened, an optical reader is provided inside the mouse 1 for reading an image of a subject (for example, a two-dimensional code arranged on the code recording surface 21). 23 is provided. The protective cover 17 can be rotated in the direction of arrow A (see FIG. 2B).
[0047]
This optical reading device 23 is an area sensor in which a prism 25 (reflection optical system H1) disposed inside a protective cover 17 and a CCD element for converting light into an electric signal are disposed two-dimensionally (planar). 27 and an imaging optical system K1 that forms an image on the area sensor 27.
[0048]
As shown in FIG. 2C, the imaging optical system K1 is an optical system from the prism 25 to the area sensor 27. In order to form an image of a subject on the area sensor 27, the diaphragm 29 and the like An optical device such as a lens 31 is provided. In the imaging optical system K1, the focal point is set with respect to a subject having a distance near the bottom of the mouse.
[0049]
When the protective cover 17 is opened, the prism 25 also rotates, and the prism 25 stops at a position rotated by 45 °. As a result, the optical axis is bent at right angles from the vertical direction to the horizontal direction in the figure. 2C is the optical axis parallel to the bottom surface of the mouse 1 (of the imaging optical system K1).
[0050]
Therefore, when photographing a subject, light from the subject is reflected by the prism 23 and bends in the right direction in the figure, and is imaged by the area sensor 27 via the diaphragm 29 and the lens 31.
With this configuration, the mouse 1 according to the present embodiment can photograph a subject below the mouse 1 (bottom direction) not near the mouse 1 but in the vicinity of the side surface thereof.
[0051]
b) Next, the electrical configuration of the mouse 1 described above will be described.
As shown in FIG. 3, in order to control the operation of the mouse 1, the mouse 1 is provided with a control unit 41, which is a microcomputer having a well-known CPU, ROM, RAM, etc. It is connected to a separate main computer 45 side through 43.
[0052]
The control unit 41 is connected to the right operation switch 5, the left operation switch 7, the area sensor 27, and the shutter switch 19, and a cover open / close detector 47 that detects the open / close state of the protective cover 17. Yes. A camera status display LED 9 that is lit in the camera mode and a mouse status display LED 11 that is lit in the mouse mode are also connected.
[0053]
In the vicinity of the prism 25, a light projecting unit (not shown) made of, for example, an LED is provided so that the subject can be irradiated with light to reliably read the image of the subject.
Therefore, when photographing an object, the image of the object is reflected by the prism 25 and forms an image on the area sensor 27 through the diaphragm 29, the lens 31, and the like. A signal corresponding to the image (image signal) is output to the control unit 41.
[0054]
The control unit 41 stores the image signal as image data in a memory (not shown), and transmits it to the host computer 45 side via the interface 43 as necessary.
On the other hand, in order to indicate the cursor position on the display 59, the mouse 1 has an X-axis rotation detector 49 and a waveform shaping circuit 51 for detecting the rotation state of the trackball 13, a Y-axis rotation detector 53 and a waveform shaping. A circuit 55 is provided, and a signal indicating the cursor position is output to the main computer 45 side via the interface 43 under the control of the control unit 41. The optical axis of the imaging optical system is parallel to the X axis detected by the X axis rotation detector 49.
[0055]
In the present embodiment, since power is supplied from the main computer 45 side, a power circuit 57 is provided in the mouse 1.
In addition to this, a battery may be built in the mouse 1 so as not to receive power supply from the outside. Further, instead of connecting the mouse 1 and the main computer 45 side with the cable (wired) 1a, data may be transmitted and received by wireless communication such as infrared rays.
[0056]
c) Next, the control process performed in the control part 41 is demonstrated.
As shown in the flowchart of FIG. 4, first, in step 100, the open / close state of the protective cover 17 is transmitted to the main computer 45.
That is, when the protective cover 17 is opened, the cover open / close detector 45 is turned on, so that when the control unit 41 receives a signal from the cover open / close detector 45, the protective cover 17 is received from the control unit 41. The open / closed state of is transmitted.
[0057]
Accordingly, the main computer 45 is in a state in which the mouse mode is set (for example, a state in which the cursor position is designated) or in a state in which the camera mode is set (in which the image is read) based on the transmitted signal. Determine if there is.
Therefore, in the main computer 45, when the protective cover 17 is closed with respect to the mouse 1, a signal for setting the mouse mode is output. On the other hand, when the protective cover 17 is open, the camera is Outputs a signal to set the mode.
[0058]
In the following step 110, it is determined whether or not a signal for setting the mouse mode is received from the main computer 45. If an affirmative determination is made here, the process proceeds to step 120, while if a negative determination is made, the process proceeds to step 150.
In step 120, the mouse mode is set. Therefore, in this case, the processing (camera mode processing) for reading an image by the area sensor 27 or the like is not performed.
[0059]
In the subsequent step 130, processing in a normal mouse mode, for example, processing of outputting a pulse (movement pulse) corresponding to the rotation amount (movement amount) to the main computer 45 along with the rotation of the trackball 13 is performed.
Accordingly, the main computer 45 moves, for example, a cursor on the display 59 according to the transmitted signal based on the signal transmitted from the mouse 1.
[0060]
In the following step 140, it is determined whether or not the power is off. If the power is off, the process is temporarily terminated. If not, the process returns to step 100 and the same process is repeated.
On the other hand, in step 150, where the determination is negative in step 110, it is determined whether or not a signal indicating that the camera mode is set has been received from the main computer 45. If an affirmative determination is made here, the process proceeds to step 160, whereas if a negative determination is made, the process returns to step 100.
[0061]
In step 160, the camera mode is set. Therefore, in this case, even if the trackball 13 rotates, the output of the movement pulse is prohibited and the mouse mode processing (for example, processing for designating the cursor position) is not performed. Further, processing for enabling the operation of the shutter switch 19 is performed.
[0062]
In the following step 170, it is determined whether or not the shutter switch 19 has been operated (ON). If an affirmative determination is made here, the process proceeds to step 180. If a negative determination is made, the process proceeds to step 140.
In step 180, an image reading process, that is, an image data reading process is performed.
[0063]
Specifically, an image (imaging image) obtained by imaging an image of a subject is formed on the area sensor 27 by the prism 25, the lens 31, and the like. A signal (image signal) is output to the control unit 41. Therefore, the control unit 41 stores this image signal in the memory as image data.
[0064]
In the subsequent step 190, a process of outputting image data is performed, and the process proceeds to step 190.
That is, a process of outputting the image data stored in the memory of the control unit 41 to the main computer 45 through the interface 43 is performed.
[0065]
Accordingly, the main computer 45 reproduces an image based on the image data transmitted on the display 59.
In this way, in this embodiment, since the orientation of the optical reading device 3 is the X-axis direction and the optical axis of the imaging optical system K1 is parallel to the bottom surface of the mouse 1, the reading depth is larger than in the conventional case. It is deeper. For this reason, when reading a three-dimensional object or an image at a slightly separated position, there is an effect that the image is less likely to be out of focus.
[0066]
In addition, since the image of the photographed subject can be captured as it is instead of capturing an image according to the rotation of the trackball 13 of the mouse 1, a two-dimensional image can be captured accurately.
Therefore, when the captured image is an information code such as a two-dimensional code, the main computer 45 that has received the image data can accurately decode the information code.
[0067]
Furthermore, since the protective cover 17 protrudes from the side surface of the mouse 1, the position of the subject and the position of the prism 25 (for photographing it) can be easily and accurately matched.
(Example 2)
Next, the second embodiment will be described, but the description of the same parts as the first embodiment will be omitted.
[0068]
The present embodiment has the same hardware configuration as that of the first embodiment, but the control processing performed by the control unit is different. Hereinafter, this control process will be described.
As shown in the flowchart of FIG. 5, first, in step 200, the open / close state of the protective cover 17 is transmitted to the main computer 45.
[0069]
In the following step 210, it is determined whether or not a signal for setting the mouse mode is received from the main computer 45. If an affirmative determination is made here, the process proceeds to step 220, while if a negative determination is made, the process proceeds to step 250.
In step 220, the mouse mode is set.
[0070]
In the next step 230, processing in the normal mouse mode is performed.
In the following step 240, it is determined whether or not the power is off. If the power is off, the process is temporarily terminated. If not, the process returns to step 200 and the same process is repeated.
[0071]
On the other hand, in step 250, where the determination is negative in step 210, it is determined whether or not a signal for setting the camera mode is received from the main computer 45. If an affirmative determination is made here, the process proceeds to step 260, while if a negative determination is made, the process proceeds to step 300.
[0072]
In step 260, the camera mode is set. When the mode is not the decoding mode, this camera mode means an image mode (reading an image).
In the following step 270, it is determined whether or not the shutter switch 19 has been operated (ON). If an affirmative determination is made here, the process proceeds to step 280, whereas if a negative determination is made, the process proceeds to step 240.
[0073]
In step 280, a process of taking image data of the formed image into the control unit 41 is performed.
In the subsequent step 290, a process of outputting image data from the control unit 41 to the main computer 45 is performed, and the process proceeds to step 240.
[0074]
On the other hand, in step 300, which is determined to be negative in step 250, it is determined whether or not a signal indicating that the decoding mode is set is received from the main computer 45. If an affirmative determination is made here, the process proceeds to step 310, whereas if a negative determination is made, the process proceeds to step 240.
[0075]
In step 310, the decoding mode is set. The decoding mode is a mode for decoding the captured image data, for example, a mode for decoding the content of the two-dimensional code from the image data indicating the two-dimensional code.
In the following step 320, it is determined whether or not the shutter switch 19 has been operated (ON). If an affirmative determination is made here, the process proceeds to step 330, while if a negative determination is made, the process proceeds to step 240.
[0076]
In step 330, the image data of the formed image is taken into the control unit 41 and a process of decoding the taken image data is performed.
In subsequent step 340, the decoded data is output from the control unit 41 to the main computer 45, and the process proceeds to step 240.
[0077]
Therefore, the main computer 45 can display the decoded data on the display 59.
As described above, in this embodiment, the same effects as those of the first embodiment are obtained, and the image data is decoded by the mouse 1, so that data to be transmitted to the main computer 45 can be reduced. That is, the burden of transmission / reception data can be reduced.
(Example 3)
Next, although Example 3 will be described, description of the same parts as those in Example 1 will be omitted.
[0078]
The present embodiment is different from the first embodiment in hardware configuration and shoots a subject on the bottom surface of a mouse.
As shown in FIG. 6, in the mouse 61 of this embodiment, an optical reading device 63 is arranged in parallel to the bottom surface of the mouse 61 (in the X-axis direction).
[0079]
That is, in the optical reading device 63, as shown in FIG. 6C, the reflecting mirror 65 (reflection optical system H3), the imaging optical system K3 (comprising the diaphragm 67, the lens 69, etc.), the area sensor 71, etc. Are arranged along an optical axis parallel to the bottom surface of the mouse 71.
Further, as shown in FIG. 6A, a protective cover 73 that slides in the directions of arrows B and C is disposed on the bottom surface of the mouse 1, and when the protective cover 73 moves in the direction of arrow B ( In the state shown in the drawing, an opening 75 for reading an image is configured to open.
[0080]
Therefore, for example, the light from the subject is reflected by the reflecting mirror 65 and imaged by the area sensor 71 through the diaphragm 67 and the lens 69 as shown in FIG.
As described above, in this embodiment, the image of the subject is read from the bottom surface of the mouse 1, so that the mouse 1 is lifted by hand and is photographed toward the subject at a little distance, as in a normal camera. Suitable for use.
(Example 4)
Next, Example 4 will be described, but the description of the same parts as Example 3 will be omitted.
[0081]
This embodiment is different from the third embodiment in the direction of the optical reading device.
As shown in FIG. 7, in the mouse 71 of the present embodiment, an optical reading device 73 is disposed in parallel with the bottom surface of the mouse 71 as in the second embodiment. In the vertical direction (Y-axis direction; the direction perpendicular to the arrangement direction of the left and right operation switches 75 and 77).
[0082]
Therefore, in the mouse 71, the reflecting mirror 79 (the reflecting optical system H4), the imaging optical system K4, and the area sensor 83 are arranged from the top of the figure.
This configuration has the advantage that the degree of freedom in design is improved.
(Example 5)
Next, although Example 5 is demonstrated, description of the location similar to the said Example 1 is abbreviate | omitted.
[0083]
The present embodiment is different from the first embodiment in hardware configuration and captures an image from the side of the mouse.
As shown in FIG. 8, in the mouse 91 of the present embodiment, an optical reading device 93 is arranged in parallel with the bottom surface of the mouse 91 (X-axis direction).
[0084]
That is, in the optical reading device 93, as shown in FIG. 8C, the imaging optical system K5 (comprising the diaphragm 95, the lens 97, etc.), the area sensor 99, etc. Arranged along the axis.
In particular, in this embodiment, as shown in FIG. 8A, an opening 101 for reading an image is provided on the side surface of the mouse 91 so as to be opened on the optical axis. A transparent cover may be provided on the surface of the opening 101.
[0085]
Therefore, the light from the subject on the side surface of the mouse 1 is connected by the area sensor 99 directly from the side opening 101 through the diaphragm 95, the lens 97, etc., as shown in FIG. Image.
As described above, in this embodiment, since the subject is photographed on the side surface side of the mouse 91 and the image is read, there is an advantage that it is easy to capture various images on the side surface side.
[0086]
Needless to say, the present invention is not limited to the above-described embodiments, and can be implemented in various modes without departing from the scope of the present invention.
(1) For example, a part or the whole of the imaging optical system in the optical reading device may be detachably attached to the mouse. Thereby, for example, the reading depth can be changed.
[0087]
(2) In the camera mode, after operating the shutter switch for instructing photographing of a subject, a new operation is temporarily invalidated, and if there is an instruction from the main computer to permit new photographing, It is desirable to enable effective operations. Thus, there is an advantage that the image can be reliably read.
[Brief description of the drawings]
FIG. 1 shows a mouse of Example 1, wherein (a) is a left side view thereof and (b) is a plan view thereof.
2A is a plan view of the mouse according to the first embodiment, FIG. 2B is a front view thereof, and FIG. 2C is an explanatory diagram illustrating the optical system thereof.
FIG. 3 is an explanatory diagram illustrating a basic configuration of a mouse and the like according to the first embodiment.
FIG. 4 is a flowchart illustrating a control process according to the first embodiment.
FIG. 5 is a flowchart illustrating control processing according to the second embodiment.
6A and 6B show a mouse of Example 3, wherein FIG. 6A is a bottom view thereof, FIG. 6B is a plan view thereof, and FIG. 6C is an explanatory view showing an optical system thereof.
7 is a plan view of the mouse of Example 4. FIG.
8A and 8B show a mouse according to Example 5, wherein FIG. 8A is a left side view thereof, FIG. 8B is a plan view thereof, and FIG. 8C is an explanatory diagram showing the optical system thereof.
FIG. 9 is an explanatory diagram showing a reading depth.
[Explanation of symbols]
1, 61, 71, 91 ... mouse
17, 73 ... Protective cover
19 ... Shutter switch
23, 63, 73, 93 ... Optical reader
25 ... Prism
27, 71, 83, 99 ... area sensor
65, 79 ... Reflector
H1, H3 ... reflective optical system
K1, K3, K4, K5 ... Imaging optical system

Claims

A mouse for instructing processing on a display device of an information processing device and capturing an image of a subject,
An element that converts light into an electrical signal is two-dimensionally arranged and outputs a signal corresponding to the image formed;
An imaging optical system that forms an image of the subject on the area sensor;
With
The optical axis of the imaging optical system is configured to be parallel to the mouse bottom surface ,
In addition, a cover that can be opened and closed to protect the imaging optical system, and is provided on the side surface of the mouse and is reflected on the inner surface side of the protection cover. An optical system,
The mouse with a photographing function is characterized in that the photographing direction of the subject can be changed by making the protective cover and the reflecting optical system rotatable .

The mouse with a photographing function according to claim 1, further comprising: a control unit that controls a processing operation of the mouse; and a memory that stores image data corresponding to a signal from the area sensor.

The mouse with a photographing function according to claim 1 or 2, wherein an optical axis of the imaging optical system is arranged in parallel with an X axis or a Y axis of the movement detection of the mouse.

The photographing according to any one of claims 1 to 3, wherein the image of the subject under the side of the mouse is captured by opening the protective cover by rotating approximately 45 °. Function mouse.

The said protective cover was comprised so that it might become a standard which catches the image of the said subject by protruding from the side surface of a mouse | mouth when it opens, The said any one of Claims 1-4 characterized by the above-mentioned. Mouse with shooting function.

The focus of the imaging optical system, imaging function mouse according to any one of the claims 1-5, characterized in that set for the object at a distance of around the bottom of the mouse.

Wherein the imaging optical system, imaging function mouse according to any one of the claims 1-6, characterized in that removably attached to the mouse.

The mouse with a photographing function according to any one of claims 1 to 7 , further comprising a shutter switch for instructing photographing of the subject.

The mouse with a photographing function according to claim 8 , wherein the shutter switch is provided on a side surface of the mouse.

The mouse mode for instructing processing on a processing target on the display device and the camera mode for photographing the subject, The method according to any one of claims 1 to 9 , further comprising: Mouse with shooting function.

The mouse having a photographing function according to claim 10 , wherein switching between the mouse mode and the camera mode is performed according to an instruction from the information processing apparatus.

The image data obtained by the area sensor can be output to the information processing device in the camera mode, and the image of the subject can be reproduced and displayed on the display device. A mouse with a photographing function according to 10 or 11 .

The camera mode includes an image mode and a decryption mode. The image mode is a mode for outputting the image data. The decryption mode decrypts the image data based on a predetermined rule. The mouse with a photographing function according to any one of claims 10 to 12 , wherein the mouse is in a mode for outputting processed data.

14. The mouse with a photographing function according to claim 13 , wherein in the decoding mode, the information code of the subject is decoded for an image captured when the shutter switch is operated.

The mouse with a photographing function according to any one of claims 12 to 14 , wherein the image mode and the decoding mode are switched in accordance with an instruction from the information processing apparatus connected to the mouse.

The mouse with a photographing function according to any one of claims 1 to 15 , wherein the subject is a two-dimensional code of a kind of information code.