JP6080991B1 - 光学機器 - Google Patents

Abstract

【課題】光学機器の小型化を図る。【解決手段】撮像装置１は、ズーム機能およびピント調整機能を備える撮像部５と、利用者の顔近傍の生体電位信号を計測する電極３から得られた信号に基づき、撮像部５のズームおよびピントを調整する制御回路４と、撮像部５により撮像された画像を利用者の目の前に表示する視覚表示部６と、を有する。【選択図】図１

Description

本発明は光学機器に関する。

焦点距離を注視点距離に応じて変化させることができる眼鏡が知られている。

例えば、両眼がそれぞれどの方向を向いているかを検出して両眼が注視している位置までの距離の情報を推定する手段と焦点距離を調節できるレンズ系とを備え、前記検知された注視点までの距離情報に応じて前記レンズ系の焦点距離を自動的に調節するように構成するものが知られている。
また、咀嚼筋電を用いて、短時間でメニュー選択が可能にするインタフェースシステムが知られている。

特開２０００−２４９９０２号公報 国際公開第２０１０／００４７１０号

カメラを用いて目の動作をセンシングする場合、目の前にカメラを設置すると、カメラが視界を遮ったり、装置が大型化するという問題があった。
１つの側面では、本発明は、機器の小型化を図ることを目的とする。

上記目的を達成するために、開示の光学機器が提供される。この光学機器は、ズーム機能およびピント調整機能を備える撮像部と、利用者の顔近傍の生体電位信号を計測する電極から得られた信号に基づき、撮像部のズームおよびピントを調整する制御部と、撮像部により撮像された画像を利用者の目の前に表示する表示部と、を有する。

１態様では、機器の小型化を図ることができる。

第１の実施の形態の撮像装置を示す図である。 実施の形態の撮像装置の機能を説明する図である。 メモリに記憶される情報の一例を説明する図である。 変形例の撮像装置を示す図である。 第２の実施の形態の光学機器を示す図である。 実施の形態の光学機器を遠隔操作が可能なシステムに適用した場合を説明する図である。

以下、実施の形態の光学機器を、図面を参照して詳細に説明する。
＜第１の実施の形態＞

図１は、第１の実施の形態の撮像装置を示す図である。図１（ａ）は、実施の形態の撮像装置の正面図であり、図１（ｂ）は、実施の形態の撮像装置の背面図である。図１に示す撮像装置１は光学機器の一例である。

撮像装置１は、利用者が顔に取り付けるヘッドマウントディスプレイ(ＨＭＤ)タイプの装置であり、マウンタ２と、電極３と、制御回路４と、光学ズーム機能およびピント調整機能を備える撮像部５と、視覚表示部６とを有している。なお、図１では、撮像装置１を顔に固定する手段の図示を省略している。撮像装置１を顔に固定する手段としては、従来公知のものを用いることができる。

電極３は、マウンタ２に取り付けられている。より詳しくは、電極３は、撮像装置１の装着時に、撮像装置１の装着者（以下、単に「装着者」という）の顔面（例えば、目の下や、こめかみ付近等）に接触する位置に取り付けられている。

電極３は、装着者が目を細めたときや、歯を噛みしめたときに発生する生体電位信号を計測する。電極３の数は、図１に示すように複数でもよいし、１つでもよい。
制御回路４は、撮像装置１の処理全般を司る部分である。なお、制御回路４の配置位置は，図示のものに限定されない。

撮像部５は、イメージセンサを備えている。イメージセンサの種別としては、例えばＣＣＤ（Charged-coupled devices）や、ＣＭＯＳ（Complementary metal-oxide-semiconductor）等が挙げられる。

撮像部５は、ズーム機能およびピント調整機能を備えている。ピント調整については、アナログ方式とデジタル方式のいずれによって行うこともできる。アナログの場合は、測距モジュールで計測した対象物との距離と現在のズーム倍率から被写界深度を計算し、ピント調節を行う。デジタルの場合は画像処理技術を用いてピント調整を行う。
視覚表示部６には、撮像部５が撮像した画像が制御回路４を介して表示される。
装着者は、視覚表示部６を視認することにより、撮像部５により撮像された画像を見ることができる。

図２は、実施の形態の撮像装置の機能を説明する図である。
図１と同じ名称の部分には、同じ符号を付し、説明を省略する。
制御回路４は、信号処理回路４ａと、メモリ４ｂと、制御部４ｃとを備えている。
信号処理回路４ａは、電極３により計測された生体電位信号に平滑化等のフィルタ処理を行う。信号処理回路４ａは、フィルタ処理後の信号を制御部４ｃに送る。

メモリ４ｂには、事前に、強い瞬きや目を凝らす、または奥歯を噛みしめるといった顔面の特定の動作の信号パターンとズームイン・ズームアウト機能が対応付けられて記憶されている。記憶する信号パターンの特徴量としては、信号の強度およびその時系列変化を用いる。メモリ４ｂとしては、例えばフラッシュメモリ等の半導体記憶装置が挙げられる。
制御部４ｃは、ＣＰＵ（Central Processing Unit）を備えている。

制御部４ｃは、信号処理回路４ａから出力されたアナログ信号をデジタル信号に変換したのちパターンマッチングを行い、顔面の筋肉の動きを推定する。具体的には、制御部４ｃは、メモリ４ｂに記憶された情報を参照し、信号処理回路４ａから取得した信号に一致する信号パターンが存在するか否かを判断する。例えば、装着者が事前に目を凝らしたときに表れた信号パターンと同様のパターンが表れた場合は、装着者がズームインを希望しているものと判断する。
そして、一致する信号パターンが存在する場合、制御部４ｃは、ズーム操作やピント調整に関するデジタル信号を撮像部５に送る。
また、制御部４ｃは、撮像部５により撮像された画像を視覚表示部６に表示する。
撮像部５は、制御部４ｃから送られたデジタル信号を利用してズーム操作やピント調整を行う。
次に、撮像装置１の動作を説明する。

まず、電源投入時に撮像装置１は、キャリブレーションを実行する。具体的には、制御部４ｃがメモリ４ｂに記憶されている情報に基づき装着者に対して対象動作を行う旨の指示を視覚表示部６に表示する。対象動作としては、例えば、目を強くつぶる、目を凝らす、奥歯を噛みしめる、目をそらす等が挙げられる。
なお、撮像装置１にスピーカーを取り付け、制御部４ｃが対象動作を行う旨の指示を聴覚的に提示するようにしてもよい。

制御部４ｃは、視覚表示部６に表示された動作を装着者が行ったときに電極３が計測し、信号処理回路４ａにより平滑化された生体電位信号のパターン（生体電位信号パターン）を教示データとしてメモリ４ｂに記憶する。例えば、キャリブレーションの際に、装着者が任意の対象物を凝視する。このとき、制御部４ｃは、対象物が最も鮮明に見えるように撮像部５を調節する。制御部４ｃは、撮像部５から映像を取得し、視覚表示部６に出力する。また、制御部４ｃは、取得した生体電位信号パターンと、撮像部５のズームの速度や倍率などの情報およびピント調整状態を関連づけてメモリ４ｂに記憶する。

図３は、メモリに記憶される情報の一例を説明する図である。
図３ではメモリに記憶される情報をテーブル化して示している。図３に示すテーブルＴ１には、動作、生体電位信号パターン、ズーム、およびピントの欄が設けられている。横方向に並べられた情報同士が互いに関連づけられている。
動作の欄には、予め用意されたアクションが設定されている。

生体電位信号パターンの欄には、キャリブレーションの際に装着者が動作の欄に設定されたアクションを実行したときの信号パターンを識別できる情報が設定される。
ズームの欄には、キャリブレーションの際に装着者が動作の欄に設定されたアクションを実行したときのズームの速度や倍率が設定される。
ピントの欄には、キャリブレーションの際に装着者が動作の欄に設定されたアクションを実行したときのピント調整状態が設定される。

キャリブレーションが完了した後も、信号処理回路４ａは、電極３により計測された生体電位信号にフィルタ処理を行い、制御部４ｃに送り続ける。そして、制御部４ｃは、メモリ４ｂに記憶された生体電位信号パターンを、送られてきた生体電位信号パターンと対比する。そして、所定の生体電位信号パターンを検出すると、制御部４ｃは、検出に同期してメモリ４ｂに記憶された分だけ撮像部５のレンズをズームさせ、ピント調整を行う。
これにより、装着者は，手を使わず、現在向いている方向の映像を直感的にズームすることができ、人間の視覚情報を大きく拡張することが可能となる。

ところで、ズームを行った状態では、頭の微小な動きが視野に大きな影響を与える。そのため、撮像装置１ではリアルタイムでぶれ補正を行い、頭の動きによる影響を軽減する。

ぶれ補正には大きく分けて機械式、または電子式の手法が考えられるが、どちらの手法を用いてもよい。機械式の手法ではジャイロセンサなどで取得した撮像部５の姿勢を元に、レンズまたはイメージセンサ全体を移動させることで物理的に補正を行う。また、電子式の手法では撮像部５が取得した画像を逐次制御回路４が取り込み、各画像間でマッチングを行うことで撮像部５の姿勢変化量を計算し、その変化量を打ち消すように画像処理を行う。このようなぶれ補正を行うことで、装着者は不快感を覚えることなく撮像装置１を使用することができる。

このようなシステム構成により、目の周辺に発生する生体電位信号を用いて、視覚拡張デバイスのズームやピント調整操作をハンズフリーかつ直感的に行うことが可能となる。

なお、撮像部５、制御回路４、および視覚表示部６は、視覚拡張デバイスの一例である。視覚拡張デバイスの他の例として、双眼鏡、単眼鏡、顕微鏡、glass型コンピュータ、サバイバルゲームのスコープなどが挙げられる。

以上述べたように、撮像装置１によれば、電極３によって計測される生体電位信号は電位情報として計測されるため、カメラで計測した画像情報よりも、視覚拡張デバイスを操作するために必要な情報量が大きく低減する。
なお、本実施の形態では、両眼の前に視覚表示部６を配置する構成としたが、どちらか一方の目の前に視覚表示部６を配置する構成としてもよい。

図４は、変形例の撮像装置を示す図である。図１と同じ機能を備える箇所については同じ符号を付し、詳細な説明を省略する。
図４に示す撮像装置１ａは、左目の前に視覚表示部６を配置する構成であり、マウンタ２ａに電極３、制御回路４（図示せず）および撮像部５がマウントされている。なお、図４では、撮像装置１ａを顔に固定する手段の図示を省略している。撮像装置１ａを顔に固定する手段としては、従来公知のものを用いることができる。

＜第２の実施の形態＞
次に、第２の実施の形態の光学機器について説明する。
以下、第２の実施の形態の光学機器について、前述した第１の実施の形態との相違点を中心に説明し、同様の事項については、その説明を省略する。

図５は、第２の実施の形態の光学機器を示す図である。
図５に示す単眼鏡１ｂは、利用者がアイピース７を覗き込んだときに、利用者のこめかみ部分に接触する部位にガード７ａが設けられている。このガード７ａには、電極３ａが取り付けられている。
単眼鏡１ｂを覗き込む際に、電極３ａが皮膚に接触し、生体電位信号を計測することができる。単眼鏡１ｂによれば、電極３ａなどの付属品をあらかじめ皮膚上に装着する手間が必要なく、ズーム・ピント機能を操作することが可能となる。

この単眼鏡１ｂは、利用者の目の周辺に発生する生体電位信号を顔に接触させた電極３ａにより検出し、それと同期して単眼鏡１ｂが備える撮像部（図示せず）のズーム倍率を操作する。その後、カメラの撮影映像とコントラストオートフォーカス技術を利用して自動でピント調節を行う。なお、ピント調節方法は、これに限らず、測距モジュールなどを用いてレンズ間距離を変更するアナログ式の手法を用いてもよい。また、人間の目でピント調整できる場合は、ピント調整機能を設けなくても良い。

さらに単眼鏡１ｂによれば、電極３ａが皮膚に接触しているか否かをセンシングすることで、利用者が単眼鏡１ｂから目を離した事を検知して、ズーム倍率を初期状態に戻す処理を組み込むことが可能である。

これにより、単眼鏡１ｂの利用を開始する際に単眼鏡１ｂをのぞき込んだ場合には、視野角が広い視覚情報が提示される。注目したい領域がある場合には、利用者が生体電位信号を用いてズーム操作を行うことができる。

人が遠くのものを見る際には、視界全体を大まかに捉えた後に、注目したい領域に目を凝らす動作を行っている。単眼鏡１ｂは、これと同様な認知プロセスを再現しているため、ユーザビリティの向上に寄与する。

また、単眼鏡１ｂが一度ズームをした後に利用者が目標物を見失う状況が考えられる。この場合、利用者は一度アイピース７から顔を外し、目標物を確認した後に再度アイピース７を覗き込むことが考えられる。このため、単眼鏡１ｂは、電極３ａからの生体電位信号パターンを検出できなくなってからも所定時間ズーム倍率を初期状態に戻さず、所定時間が経過した後に、ズーム倍率を初期状態に戻すようにしてもよい。
なお、図５では単眼鏡を例に説明したが、双眼鏡や、顕微鏡、スコープ等にも前述した機能を適用することができる。
第２の実施の形態の単眼鏡１ｂを用いることにより、例えばバードウォッチングやスポーツ観戦、サバイバルゲームなどをより楽しむことが可能となる。
なお、撮像装置１、撮像装置１ａ、および単眼鏡１ｂが行った処理が、複数の装置によって分散処理されるようにしてもよい。以下、具体例を用いて説明する。

図６は、実施の形態の光学機器を遠隔操作が可能なシステムに適用した場合を説明する図である。
以下に、ロボットに適用した例を説明するが、ウェブカメラなどに用いてもよい。
光学システム１ｃは、マウンタ２ｂと、撮像部５ａと、ロボット８とを備えている。
マウンタ２ｂは、撮像装置１ａのマウンタ２ａが備える機能から撮像部５ａが独立したものである。
また、マウンタ２ｂおよび撮像部５ａは、それぞれデータをやりとりする送受信部を備えている。通信手段としては、特に限定されないが、例えばＢｌｕｅｔｏｏｔｈ（登録商標）や、Ｗｉ−Ｆｉ（登録商標）等の通信手段が挙げられる。

撮像部５ａは、ロボット８に搭載されている。ロボット８は、光学ズーム機能およびピント調整機能を備える。この光学ズーム機能およびピント調整機能は、制御回路４により遠隔操作される。

撮像部５ａが撮像した映像は、マウンタ２ｂに内蔵された制御回路４に送られ、その後視覚表示部６に表示されることにより、利用者に提示される。なお、図６では信号の流れを点線で示している。
この光学システム１ｃの動作を説明する。

利用者の目の周辺に発生する生体電位信号を電極３により検出し、制御部４ｃが所定の生体電位信号パターンを検出すると、検出に同期して送受信部を介してロボット８に制御信号が送られる。

その後、ロボット８は制御信号に応じて撮像部５ａのズーム調整を行い、デジタル式またはアナログ式のピント調節を行う。これにより、利用者は，手を使わず、ロボット８に搭載された撮像部５ａのズーム調節とピント調節を行うことができる。
光学システム１ｃを使用することで、利用者は遠隔地の詳細な映像をより直感的に得ることが可能となる。

さらに、現在のテレイグジスタンスシステムでは撮像部の操作だけでなく、移動やマニピュレーションなど多くの操作を手で行う必要がある。光学システム１ｃにより、撮像部操作をハンズフリーで行うことが可能となり、より利便性の高いテレイグジスタンスシステムが実現できる。

以上、本発明の光学機器を、図示の実施の形態に基づいて説明したが、本発明はこれに限定されるものではなく、各部の構成は、同様の機能を有する任意の構成のものに置換することができる。また、本発明に、他の任意の構成物や工程が付加されていてもよい。
また、本発明は、前述した各実施の形態のうちの、任意の２以上の構成（特徴）を組み合わせたものであってもよい。

１、１ａ 撮像装置
１ｂ 単眼鏡
１ｃ 光学システム
２、２ａ、２ｂ マウンタ
３、３ａ 電極
４ 制御回路
４ａ 信号処理回路
４ｂ メモリ
４ｃ 制御部
５、５ａ 撮像部
６ 視覚表示部
７ アイピース
８ ロボット
Ｔ１ テーブル

Claims (3)

1. ズーム機能およびピント調整機能を備える撮像部と、
   利用者の顔近傍の生体電位信号を計測する電極から得られた信号に基づき、顔面の筋肉の動きを推定して利用者のズームイン・ズームアウトの意思を判断し、前記撮像部のズームおよびピントを調整する制御部と、
   前記撮像部により撮像された画像を利用者の目の前に表示する表示部と、
   を有することを特徴とする光学機器。
2. 前記表示部近傍に覗き口を備え、生体が前記覗き口をのぞき込む際に、前記電極が前記生体のこめかみ部分に接触する部位に配置されている請求項１に記載の光学機器。
3. 前記制御部は、電極から得られた信号に基づき生体が接触状態から非接触状態に移行したと判断したとき、前記撮像部の接触状態におけるズームおよびピントを解除する請求項１または２に記載の光学機器。

Images