JP2018137697A - 電子機器 - Google Patents

Abstract

【課題】センサによって検出された情報を有効に活用する電子機器を提供する。
【解決手段】電子機器は、撮像部と、センサと、記憶部と、表示部と、制御部と、を備える。制御部は、撮像部が撮像した撮像画像にセンサによって取得した動的なセンサ情報をオーバーレイしたプレビュー画像を表示部に表示させ、撮像画像に動的なセンサ情報をオーバーレイしたプレビュー画像をオーバーレイ静止画像として記憶部に記憶する。
【選択図】図３

Description

本開示は、電子機器に関する。

従来、画像とともに該画像に関連する日付情報を表示する電子機器が知られている。例えば、特許文献１には、表示部に画像を表示させるとともに、日付情報を表示部に表示させることが開示されている。

また、従来、様々なセンサを備えた電子機器が知られている。例えば、特許文献２には、加速度センサ、気圧センサによって検出された情報に基づいて自機の状態を算出する電子機器が開示されている。

特開２０１１−１９３２０８号公報 特開２０１５−１２１４８１号公報

電子機器が備える様々なセンサによって検出された情報を有効に活用することが望まれている。

かかる点に鑑みてなされた本開示の目的は、センサによって検出された情報を有効に活用する電子機器を提供することにある。

本開示の電子機器は、撮像部と、センサと、記憶部と、表示部と、制御部と、を備える。前記制御部は、前記撮像部が撮像した撮像画像に前記センサによって取得した動的なセンサ情報をオーバーレイしたプレビュー画像を前記表示部に表示させ、前記撮像画像に前記動的なセンサ情報をオーバーレイしたプレビュー画像をオーバーレイ静止画像として前記記憶部に記憶する。

本開示の一実施形態に係る電子機器によれば、センサによって検出された情報を有効に活用することができる。

本開示の一実施形態に係る電子機器の外観図である。 図１に示す電子機器を取り付けた自転車の外観図である。 図１に示す電子機器の概略構成を示す機能ブロック図である。 図３に示す表示部に表示される設定画面の例を示す図である。 図３に示す設定テーブルの例を示す図である。 図３に示す表示部に示される設定画面の他の例を示す図である。 図３に示す表示部に表示されるプレビュー画像の例を示す図である。 オーバーレイ動画像を記憶するための処理中に、図３に示す表示部に表示されるプレビュー画像の例を示す図である。 図３に示す表示部に移動経路情報を示す方法について説明するための模式図である。 図３に示す制御部のオーバーレイ処理における動作の一例を説明するフローチャートである。

以下、本開示の実施形態について、図面を参照して説明する。

まず、本実施形態と先行技術文献に記載の発明との対比について説明する。特許文献１に記載の発明は、画像とともに日付情報を表示部に表示させる。また、特許文献２に記載の発明は、加速度センサ、気圧センサによって検出された情報に基づいて自機の状態を算出する。

これに対して、本実施形態に係る電子機器は、センサによって取得した動的なセンサ情報を撮像画像にオーバーレイさせた撮像画像を形成し、プレビュー画像としてディスプレイに表示する。また、本実施形態に係る電子機器は、ディスプレイに表示されたプレビュー画像をオーバーレイ画像として記憶部８に記憶する。特許文献１に記載のように、日付情報を画像とともに表示することは一般的であったが、特許文献２に記載のようなセンサによって検出された情報を画像とともに表示するという発想はなかった。これに対し、本実施形態に係る電子機器は、撮像画像が撮像されたときに、該撮像画像に、取得されたセンサ情報をオーバーレイさせる。さらに、本実施形態に係る電子機器は、センサ情報がオーバーレイされた画像を記憶する。したがって、本実施形態に係る電子機器によれば、ユーザは、センサ情報が所望の形（位置、大きさ等）でオーバーレイされた撮像画像を視認したうえで、該撮像画像をリアルタイムで確実に記憶させることができる。

図１を参照して、本実施形態に係る電子機器１の外観について説明する。図１は、本実施形態に係る電子機器１の外観図である。

図１に示すように、本実施形態に係る電子機器１は、ハウジング２と、タッチスクリーンディスプレイ３と、操作ボタン４と、撮像部５とを備える。電子機器１は、例えば、スマートフォンとすることができるが、この限りではない。電子機器１は、例えばフィーチャーフォンタイプの携帯電話またはタブレット等としてもよい。また、電子機器１は、例えば、通信機能およびセンサを搭載した撮像装置であってもよい。

図１（ａ）に示すように、タッチスクリーンディスプレイ３と、操作ボタン４とは、ハウジング２の一方の面（以降、「正面」という）に配置される。また、図１（ｂ）に示すように、撮像部５は、ハウジング２の正面とは反対側の面（以降、「背面」という）に配置される。撮像部５は、図１（ａ）に示すように、ハウジング２の正面側にも配置されてよい。

電子機器１は、例えば、図２に示すように、自転車１００のハンドルに取り付けられた状態で用いられてもよい。この場合、電子機器１は、撮像部５が、利用者が所望する任意の方向、例えば自転車１００の進行方向を撮像するように取り付けられる。また、電子機器１は、利用者がタッチスクリーンディスプレイ３を視認することができるように取り付けられる。これにより、ユーザは、自転車１００に乗りながら、撮像部５が撮像した撮像画像をリアルタイムで視認することができる。

タッチスクリーンディスプレイ３は、表示部３Ａと、入力部３Ｂとを有する。表示部３Ａは、液晶ディスプレイ（Liquid Crystal Display）、有機ＥＬパネル（Organic Electro-Luminescence Panel）、又は無機ＥＬパネル（Inorganic Electro-Luminescence Panel）等の表示デバイスを備える。表示部３Ａは、文字、画像、記号、又は図形等を表示する。表示部３Ａにおいて表示を行うために必要な情報は、後述する制御部６から送信される。また、表示部３Ａは、適宜、バックライトなどを含んで構成してもよい。

入力部３Ｂは、タッチスクリーンディスプレイ３を操作するユーザの指、又はスタイラスペン等の接触を検出する。入力部３Ｂは、指、又はスタイラスペン等が入力部３Ｂに接触した位置を検出することができる。入力部３Ｂの検出方式は、静電容量方式、抵抗膜方式、表面弾性波方式（又は超音波方式）、赤外線方式、電磁誘導方式、および荷重検出方式等の任意の方式とすることができる。入力部３Ｂが検出した信号は、制御部６に出力される。

操作ボタン４は、ユーザに操作されると、該操作を検出する。操作ボタン４は、操作を検出すると検出信号を制御部６に出力する。操作ボタン４に対する操作は、例えば、クリック、ダブルクリック、プッシュ、ロングプッシュ、マルチプッシュであるが、これに限られない。

撮像部５は、撮像画像を撮像するカメラである。撮像部５は、少なくとも光学系と撮像素子とを含んで構成される。撮像素子は、光学系を介して受光面上に結像される被写体の像を画像信号に変換することにより撮像画像を撮像する。撮像素子としては、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサ又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等が用いられる。また、撮像部５が撮像した撮像画像は、制御部６に出力される。

次に、図３を参照して、本実施形態に係る電子機器１の機能構成について説明する。図３は、電子機器１の概略構成を示す機能ブロック図である。電子機器１は、図１に示した各機能部の他に、図３に示すように、制御部６と、センサ７と、記憶部８とを備える。これらの機能部は、それぞれ、図１に示すハウジング２の内部に配置される。

制御部６は、例えば、ＣＰＵ（Central Processing Unit）である。制御部６は、通信センサ７Ａ等の他の構成要素が統合されたＳｏＣ（System-on-a-Chip）等の集積回路であってもよい。制御部６は、複数の集積回路を組み合わせて構成されていてもよい。制御部６は、電子機器１の各機能部を制御するとともに、電子機器１の動作を統括的に制御して各種の機能を実現する。本実施形態における制御部６の動作は、追って詳細に後述される。

センサ７は、該センサ７を搭載した電子機器１に関する検出対象の情報を動的なセンサ情報８Ｃとして検出する。センサ７は、連続的に検出対象を検出することによって検出対象の変化を動的なセンサ情報８Ｃとして検出することができる。また、センサ７は、検出した動的なセンサ情報８Ｃを制御部６に出力する。

動的なセンサ情報８Ｃは、自機の状態の変化によって時間とともに変化する情報である。すなわち、動的なセンサ情報８Ｃには、例えば、日付等の所定の時間内に変動がない又は変動が見込まれない情報は含まれない。動的なセンサ情報８Ｃは、例えば、速度情報、距離情報、標高情報、重力加速度情報、気圧情報、位置情報、移動経路情報、風速情報、方位情報である。また、センサ情報８Ｃは、上述の情報に限られず、例えば、天気情報、地点情報、山天気情報、海天気/波関連情報、雪関連情報、日出/日入情報、潮汐、スタンプ、歩数情報等をさらに含んでもよい。

センサ７は、通信センサ７Ａと、位置情報取得センサ７Ｂと、方位センサ７Ｃと、加速度センサ７Ｄと、気圧センサ７Ｅとを含む。また、センサ７は、通信センサ７Ａを含まずに、自機の状態を検出するセンサである、位置情報取得センサ７Ｂと、方位センサ７Ｃと、加速度センサ７Ｄと、気圧センサ７Ｅとを含んでもよい。

通信センサ７Ａは、通信ネットワークを介して、情報を送受信する。通信センサ７Ａによる情報の送受信に用いられる通信方式は、無線通信規格である。例えば、無線通信規格として、２Ｇ（2nd Generation）、３Ｇ（3rd Generation）、４Ｇ（4th Generation）等の規格がある。例えば、無線通信規格として、ＬＴＥ（Long Term Evolution）、Ｗ−ＣＤＭＡ、ＣＤＭＡ２０００、ＰＤＣ、ＧＳＭ（登録商標）、ＰＨＳ（Personal Handy-phone System）等がある。例えば、無線通信規格として、ＷｉＦｉ（The Standard for Wireless Fidelity）、ＷｉＭＡＸ（Worldwide Interoperability for Microwave Access）、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ（Infrared Data Association）、ＮＦＣ（Near Field radio Communication）等がある。通信センサ７Ａは、上述した通信規格の１つ以上をサポートしていてもよい。

通信センサ７Ａは、外部のサーバ等から、電子機器１の位置における風速を示す風速情報を取得し、該風速情報をセンサ情報８Ｃとして制御部６に出力する。また、通信センサ７Ａは、天気情報、地点情報、山天気情報、海天気/波関連情報、雪関連情報、日出/日入情報、潮汐、スタンプ、歩数情報等をセンサ情報８Ｃとして取得し、制御部６に出力してもよい。

位置情報取得センサ７Ｂは、ＧＰＳ衛星から該ＧＰＳ衛星の位置、信号の発信時刻等を示すＧＰＳ信号を受信し、該ＧＰＳ信号に基づいて電子機器１の位置を示す位置情報を取得する。また、位置情報取得センサ７Ｂは、位置情報を連続的に取得して、該位置情報が示す位置の履歴に基づいて移動経路情報を取得する。また、位置情報取得センサ７Ｂは、単位時間当たりの位置の変化を電子機器１の速度として算出し、算出した速度を示す速度情報を取得する。また、位置情報取得センサ７Ｂは、位置の変化に基づいて算出した電子機器１の移動距離を示す距離情報を取得する。また、位置情報取得センサ７Ｂは、取得した位置情報、移動経路情報、速度情報、および距離情報をそれぞれセンサ情報８Ｃとして制御部６に出力する。

方位センサ７Ｃは、例えば、磁気センサ、ジャイロセンサ等である。方位センサ７Ｃは、地磁気の変化に基づいて方位を示す方位情報を取得する。また、方位センサ７Ｃは、取得した方位情報を制御部６に出力する。

加速度センサ７Ｄは、電子機器１の重力加速度を示す重力加速度情報を取得する。また、加速度センサ７Ｄは、重力加速度情報をセンサ情報８Ｃとして制御部６に出力する。

気圧センサ７Ｅは、電子機器１の周囲環境の気圧を示す気圧情報を取得する。また、気圧センサ７Ｅは、気圧に基づいて電子機器１の周囲環境の標高を示す標高情報を取得する。また、気圧センサ７Ｅは、気圧情報および標高情報をそれぞれセンサ情報８Ｃとして制御部６に出力する。

記憶部８は、プログラムおよび情報を記憶する。また、記憶部８は、制御部６の処理結果を一時的に記憶する作業領域としても利用される。記憶部８は、半導体記憶デバイス、および磁気記憶デバイス等の任意の記憶デバイスを含んでよい。また、記憶部８は、複数の種類の記憶デバイスを含んでよい。また、記憶部８は、メモリカード等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。

具体的には、記憶部８は、例えば、制御プログラム８Ａと、オーバーレイアプリケーション８Ｂと、センサ情報８Ｃと、設定情報８Ｄと、設定テーブル８Ｅと、オーバーレイ静止画像８Ｆと、オーバーレイ動画像８Ｇとを記憶する。制御プログラム８Ａおよびオーバーレイアプリケーション８Ｂは、通信センサ７Ａによる無線通信、又は記憶媒体を介して記憶部８にインストールされてもよい。本明細書においては、「アプリケーション」は、アプリケーションプログラムの略記である。

制御プログラム８Ａは、電子機器１に各種機能を実行させるためのプログラムである。具体的には、制御部６が制御プログラム８Ａに従って、例えば、各機能部を制御することによって各種機能を実行する。

オーバーレイアプリケーション８Ｂは、制御部６が、オーバーレイ処理を行うためのアプリケーションである。オーバーレイ処理とは、撮像部５によって撮像された撮像画像に、センサ７から出力されたセンサ情報８Ｃをオーバーレイしたプレビュー画像を形成する処理を含む。また、オーバーレイ処理は、設定情報８Ｄおよび設定テーブル８Ｅに基づいて、プレビュー画像をオーバーレイ静止画像８Ｆ又はオーバーレイ動画像８Ｇとして記憶部８に記憶する処理を含む。

ここで、制御部６がオーバーレイアプリケーション８Ｂに従って実行するオーバーレイ処理について詳細に説明する。

本実施形態のオーバーレイ処理の開始に先だって、制御部６は、ユーザの操作に基づいて、撮像部５が撮像した撮像画像に動的なセンサ情報８Ｃをオーバーレイするためのメニューを設定する。

具体的には、まず、制御部６は、表示部３Ａに、メニューを表示する。メニューは、例えば、電子機器１の用途とすることができる。この場合、図４に示すように、設定画面には、メニューとしての各用途と該用途に対応するラジオボタンとが表示される。用途は、オーバーレイ処理の実行に伴う利用者の活動を示すものであり、例えば、「サーフィン・マリンスポーツ」、「登山」、「スキー・スノーボード」、「自転車」、「釣り」、「トレッキング」が含まれる。この場合、制御部６は、いずれかのラジオボタンへのタッチを検出すると、タッチされたラジオボタンに対応する用途が選択されたことを示す設定情報８Ｄを記憶部８に記憶する。

これにより、制御部６は、以降のオーバーレイ処理において、設定テーブル８Ｅを用いて撮像画像にオーバーレイしたプレビュー画像を形成する。設定テーブル８Ｅは、例えば、図５に示すような、用途に対応してセンサ情報８Ｃを記憶しているテーブルである。制御部６は、上述のように選択画面で用途が選択されると、センサ７によって検出されたセンサ情報８Ｃのうち、設定テーブル８Ｅで選択された用途に対応しているセンサ情報８Ｃを撮像画像にオーバーレイする。制御部６は、センサ情報８Ｃの他に、現在日時情報、後述するオーバーレイ動画像８Ｇを記憶するための処理開始してからの経過時間情報等を撮像画像にオーバーレイしてもよい。

設定画面には、ラジオボタンの代わりにチェックボックスが表示されてもよい。このとき、利用者は１つ以上の用途を選択することができ、制御部６は選択された１つ以上の用途にそれぞれ対応する情報を撮像画像にオーバーレイする。

他の例として、メニューは、撮像画像にオーバーレイするセンサ情報８Ｃとしてもよい。この場合、図６に示すように、設定画面には、利用者に選択させるために、メニューとしての各センサ情報８Ｃと、センサ情報８Ｃにそれぞれ対応するチェックボックスとが表示される。制御部６は、いずれか１つ以上のチェックボックスへのタッチを検出すると、タッチされたチェックボックスにそれぞれ対応するセンサ情報８Ｃが選択されたことを示す設定情報８Ｄを記憶部８に記憶させる。これにより、制御部６は、以降のオーバーレイ処理において、選択されたセンサ情報８Ｃを撮像画像にオーバーレイする。

制御部６は、センサ情報８Ｃの種類が設定された後、オーバーレイ処理の開始を命令する所定の操作が行われると、撮像部５を制御して撮像画像を撮像させる。また、制御部６は、センサ７から出力された情報に基づいてセンサ情報８Ｃを取得する。所定の操作は、予め定められた操作ボタン４の押下でもよいし、タッチスクリーンディスプレイ３に表示される所定のオブジェクトへのタッチでもよい。

オーバーレイ処理の開始が命令されると、制御部６は、センサ７から出力された各種のセンサ情報８Ｃを取得する。

具体的には、制御部６は、通信センサ７Ａから出力された風速情報を取得する。また、制御部６は、位置情報取得センサ７Ｂから出力された位置情報、移動経路情報、速度情報、および距離情報を取得する。また、制御部６は、方位センサ７Ｃから出力された方位情報を取得する。また、制御部６は、加速度センサ７Ｄから出力された重力加速度情報を取得する。また、制御部６は、気圧センサ７Ｅから出力された気圧情報、標高情報を取得する。

また、制御部６は、設定情報８Ｄに基づいてセンサ情報８Ｃを、撮像画像にオーバーレイしたプレビュー画像を形成する。

制御部６がセンサ情報８Ｃをオーバーレイする撮像画像上の領域は、撮像画像において利用者の関心度が低いと見込まれる領域であることが好ましい。一般に、センサ情報８Ｃがオーバーレイされたプレビュー画像を動画像として記憶させようとする利用者は、進行方向手前側を表す領域より、先の方を表す領域についての関心度が高い。すなわち、進行方向を向いて設置された撮像部５が撮像した撮像画像において、利用者の関心度は下側ほど低いと考えられる。また、利用者は、自身が通過すると見込まれる領域を表す中央部分の範囲に対する関心が高く、左右端近傍の範囲に対しての関心は比較的低い。したがって、制御部６は、図７（ａ）に示すように、撮像画像の下部または左右端近傍にセンサ情報８Ｃを表示する。これにより、プレビュー画像における関心度の高い領域にセンサ情報８Ｃが表示されて、ユーザが撮像画像を視認しにくくなるのを防ぐことができる。

また、制御部６は、形成されたプレビュー画像を表示部３Ａに表示する。図７に示す例では、制御部６は、撮像画像に、速度情報Ｄ１、距離情報Ｄ２、標高情報Ｄ３、重力加速度情報Ｄ４、および現在日時情報Ｄ５をそれぞれ示す画像をオーバーレイしたプレビュー画像を表示している。該プレビュー画像は、撮像画像にセンサ情報８Ｃがオーバーレイされるたびに、表示部３Ａに連続的に表示される。すなわち、表示部３Ａには、連続した複数フレームのプレビュー画像が表示される。このとき、制御部６は、プレビュー画像を、画面横縦比が１６：９の、いわゆるワイド画面で表示させてもよい。この場合、特に、ユーザが屋外で活動している場合、ユーザは臨場感の高い画像を視認することができる。

制御部６は、プレビュー画像を表示させるとともに、静止画像記憶オブジェクトＯ１を表示部３Ａに表示する。静止画像記憶オブジェクトＯ１は、制御部６にプレビュー画像をオーバーレイ静止画像８Ｆとして記憶させる命令を、利用者に入力させるためのオブジェクトである。制御部６は、静止画像記憶オブジェクトＯ１へのタッチを検出すると、表示部３Ａに表示されているプレビュー画像をオーバーレイ静止画像８Ｆとして記憶部８に記憶する。

また、制御部６は、動画像記憶オブジェクトＯ２を表示部３Ａに表示する。動画像記憶オブジェクトＯ２は、制御部６がオーバーレイ動画像８Ｇの記憶を開始する命令を、利用者に入力させるためのオブジェクトである。制御部６は、動画像記憶オブジェクトＯ２へのタッチを検出すると、オーバーレイ動画像８Ｇを記憶部８へ記憶するための処理を開始する。

制御部６は、オーバーレイ動画像８Ｇを記憶するための処理を開始すると、オーバーレイ動画像８Ｇの記憶が終了するまで、図８に示すように、経過時間情報Ｄ６を撮像画像にオーバーレイしてもよい。

また、制御部６は、オーバーレイ動画像８Ｇを記憶するための処理を開始してから、最高速度情報Ｄ７を撮像画像にオーバーレイしてもよい。最高速度情報Ｄ７が示す速度は、オーバーレイ動画像８Ｇの記憶が開始してから取得され、記憶部８に記憶されている速度情報が示す速度のうち最高の速度である。

また、制御部６は、オーバーレイ動画像８Ｇを記憶するための処理を開始してから、最大重力加速度情報Ｄ８を撮像画像にオーバーレイしてもよい。最大重力加速度情報Ｄ８が示す最大重力加速度は、オーバーレイ動画像８Ｇの記憶が開始してから取得され、記憶部８に記憶されている重力加速度情報Ｄ４が示す重力加速度のうち最大の重力加速度である。

また、制御部６はオーバーレイ動画像８Ｇを記憶するための処理を開始してからの移動経路情報Ｄ９を撮像画像にオーバーレイしてもよい。ここで、制御部６が移動経路情報Ｄ９を表示する詳細な方法について図９を参照して説明する。

制御部６は、位置情報取得センサ７Ｂによって所定の時間毎に取得された位置情報に基づいて、移動経路情報Ｄ９を移動経路表示範囲Ｒにオーバーレイする。

制御部６は、移動経路情報Ｄ９のオーバーレイに際し、実空間での移動経路の出発点を画像空間内での所定の位置（始点ＳＰ）に対応させる。図９（ｂ）に示すように、始点ＳＰは、移動経路表示範囲Ｒの中心とすることができるが、これに限られない。また、制御部６は、出発点から移動が開始された直後における実空間での進行方向を、画像空間の鉛直上方に対応させる。制御部６は、実空間での所定の方向、例えば北の方向を画像空間の鉛直上方に対応させてもよい。

制御部６は、所定の時間ごとに取得された位置情報が示す、実空間での位置の履歴を所定の縮尺で縮小した移動経路情報Ｄ９を撮像画像にオーバーレイする。このとき、制御部６は、実空間での変化方向に対応した、画像空間での方向に移動経路情報Ｄ９をオーバーレイする。所定の縮尺は、オーバーレイ動画像８Ｇの記憶が開始された時点での初速度に基づいて決定されてもよい。所定の縮尺は、移動経路情報をオーバーレイする処理中にユーザが移動すると見込まれる実空間での範囲に対応する画像空間での範囲が、移動経路表示範囲Ｒに含まれるよう適宜設計される。このとき所定の縮尺は、移動経路情報ができるだけ大きく表示されるように設計されるのがよい。

制御部６は、画像空間内での移動経路情報の少なくとも一部が移動経路表示範囲Ｒの所定の範囲（例えば、図９（ｂ）に示す太線の矩形内）の外側に表示されると、移動経路情報Ｄ９の縮尺を、上記の所定の縮尺から変更する。具体的には、制御部６は、図９（ｃ）に示すように、移動経路情報Ｄ９の全てが移動経路表示範囲Ｒ内に含まれるように実空間における経路に対する、画像空間内での経路を縮小して表示する。すなわち、制御部６は、実空間における経路に対する、画像空間内での経路の縮尺を大きくする。図９（ｃ）に示す例では、移動経路情報の縮尺を図９（ｂ）に示す場合の縮尺の２倍とする。すなわち、制御部６は、移動経路情報Ｄ９の面積を図９（ｂ）に示す場合の１／４にする。さらに、制御部６は、移動経路情報Ｄ９が所定の範囲の端部に到達すると、該端部に隣接する領域に移動経路表示範囲Ｒを広げる。図９（ｂ）に示す例では、移動経路情報Ｄ９が到達した所定の範囲の端部は始点ＳＰの右下に位置する。この場合、制御部６は、図９（ｃ）に示すように、移動経路表示範囲Ｒを左下、右上、右下の領域に広げる。なお、図９（ｃ）に示す例では、制御部６は、縮尺の変更に伴い、始点ＳＰの位置を変更しているが、始点ＳＰの位置を変更せずに移動経路情報Ｄ９の縮尺を変更してもよい。

図７に戻って、制御部６は、動画像記憶オブジェクトＯ２へのタッチを検出し、オーバーレイ動画像８Ｇを記憶するための処理を開始すると、図８に示すように、プレビュー画像とともに終了オブジェクトＯ３を表示部３Ａに表示する。終了オブジェクトＯ３は、オーバーレイ動画像８Ｇの記憶を終了する命令を利用者に入力させるためのオブジェクトである。制御部６は、動画像記憶オブジェクトＯ２へのタッチを検出すると、表示部３Ａに連続して表示されているプレビュー画像をオーバーレイ動画像８Ｇとして記憶部８に記憶する処理を開始する。制御部６は、終了オブジェクトＯ３へのタッチを検出すると、オーバーレイ動画像８Ｇの記憶部８への記憶を終了する。

また、制御部６は、撮像部５の撮像モードを示すモードオブジェクトＯ４、および既に撮像されて記憶部８に記憶されているオーバーレイ静止画像８Ｆ又はオーバーレイ動画像８Ｇの一部を示す画像オブジェクトＯ５を併せて表示部３Ａに表示してもよい。なお、これらのオブジェクトＯ１からＯ５は、オーバーレイ静止画像８Ｆおよびオーバーレイ動画像８Ｇのいずれにもオーバーレイされない。

続いて、図１０に示すフローチャートを参照して、本実施形態に係る電子機器１の動作の一例について説明する。電子機器１は、該電子機器１に対して所定の操作が行われると、オーバーレイ処理を開始する。

まず、制御部６は、撮像部５が撮像した撮像画像を取得する（ステップＳ１）。

また、制御部６は、センサ７が検出した情報を、センサ情報８Ｃとして取得する（ステップＳ２）。

ステップＳ１で画像が取得され。ステップＳ２でセンサ情報８Ｃが取得されると、制御部６は、設定情報８Ｄが示すメニューに対応するセンサ情報８Ｃを撮像画像にオーバーレイしたプレビュー画像を形成する（ステップＳ３）。

ステップＳ３でプレビュー画像が形成されると、制御部６は、表示部３Ａにプレビュー画像を表示する（ステップＳ４）。

ステップＳ４でプレビュー画像が表示されると、制御部６は、静止画像記憶オブジェクトＯ１へのタッチを検出したか否かを判定する（ステップＳ５）。

ステップＳ５で静止画像記憶オブジェクトＯ１へのタッチが検出されると、制御部６は、タッチが検出されたときに表示されていたプレビュー画像をオーバーレイ静止画像８Ｆとして記憶部８に記憶する（ステップＳ６）。

ステップＳ６でオーバーレイ静止画像８Ｆが記憶されると、オーバーレイ処理の終了操作を検出したか否かを判定する（ステップＳ７）。

ステップＳ７で終了操作が検出されると、制御部６は、オーバーレイ処理を終了する。

ステップＳ７で終了操作が検出されないと、制御部６は、ステップＳ１に戻って、以降の処理を繰り返す。

ステップＳ５で静止画像記憶オブジェクトＯ１へのタッチが検出されないと、制御部６は、動画像記憶オブジェクトＯ２へのタッチが検出されたか否かを判定する（ステップＳ８）。

ステップＳ８で動画像記憶オブジェクトＯ２へのタッチが検出されると、制御部６は、再び、撮像部５が撮像した撮像画像を取得する（ステップＳ９）

また、制御部６は、センサ７が検出した情報を、センサ情報８Ｃとして取得する（ステップＳ１０）

ステップＳ９で画像が取得され。ステップＳ１０でセンサ情報８Ｃが取得されると、制御部６は、記憶部８に記憶されている設定情報８Ｄが示すメニューに対応するセンサ情報８Ｃを撮像画像にオーバーレイしたプレビュー画像を形成する（ステップＳ１１）。

ステップＳ１１でプレビュー画像が形成されると、制御部６は、表示部３Ａにプレビュー画像を表示する（ステップＳ１２）。

また、ステップＳ１１でプレビュー画像が形成されると、制御部６は、記憶部８にプレビュー画像を記憶する（ステップＳ１３）。

ステップＳ１３でプレビュー画像が記憶されると、制御部６は、終了オブジェクトＯ３へのタッチを検出したか否かを判定する（ステップＳ１４）。

ステップＳ１４で終了オブジェクトＯ３へのタッチが検出されないと、制御部６は、ステップＳ９に戻って、以降の処理を繰り返す。

ステップＳ１４で終了オブジェクトＯ３へのタッチが検出されると、制御部６は、ステップＳ９からステップＳ１４までの処理の繰り返しによって記憶された１フレーム以上のプレビュー画像からオーバーレイ動画像８Ｇを形成する（ステップＳ１５）。

ステップＳ１５でオーバーレイ動画像８Ｇが形成されると、制御部６は、形成されたオーバーレイ動画像８Ｇを記憶部８に記憶する（ステップＳ１６）。

ステップＳ１６でオーバーレイ動画像８Ｇが記憶されると、制御部６は、ステップＳ７に戻って以降の処理を繰り返す。

以上、本実施形態によれば、電子機器１は、撮像部５が撮像した撮像画像にセンサ７から取得した動的なセンサ情報８Ｃをオーバーレイしたプレビュー画像を表示部３Ａに表示させる。このため、ユーザは、撮像部５が撮像した撮像画像をセンサ情報８Ｃとともに確認することができる。また、ユーザは、撮像画像にセンサ情報８Ｃがどのようにオーバーレイされているかを、該センサ情報８Ｃを取得してすぐに確認することができる。また、電子機器１は、表示部３Ａに表示されているプレビュー画像をオーバーレイ静止画像８Ｆとして記憶部８に記憶する。このため、ユーザは、撮像画像の撮像とともに取得されたセンサ情報８Ｃがオーバーレイされている状態をリアルタイムで確認してから、所望のプレビュー画像を記憶することができる。さらに、ユーザは、撮像部５が撮像したタイミングで表示されたプレビュー画像と同一の画像を撮像後に視認することができる。

また、本実施形態によれば、電子機器１は、撮像部５が撮像した撮像画像にセンサ７によって取得した動的なセンサ情報８Ｃをオーバーレイしたプレビュー画像を表示部３Ａに表示させる。このため、撮像部５が撮像した撮像画像をセンサ情報８Ｃとともに確認することができる。また、撮像画像にセンサ情報８Ｃがどのようにオーバーレイされているかを、該センサ情報８Ｃを取得してすぐに確認することができる。また、電子機器１は、表示部３Ａに表示されているプレビュー画像をオーバーレイ動画像８Ｇとして記憶部８に記憶する。このため、ユーザは、撮像画像の撮像とともに取得されたセンサ情報８Ｃがオーバーレイされている状態をリアルタイムで確認してから、所望の期間の連続した複数フレームのプレビュー画像をオーバーレイ動画像８Ｇとして記憶することができる。さらに、ユーザはプレビュー画像を動画として視認し、オーバーレイ動画像８Ｇとして記憶することによって、撮影中及び撮影後において臨場感を楽しむことができる。

また、本実施形態によれば、センサ７は、周囲環境の変化を検出することができる。センサ情報８Ｃは周囲環境の変化によって時間とともに変わる動的な情報である。周囲環境の影響を受ける活動をしているユーザにとって周囲環境の変化を定量的に把握することは重要である。周囲環境の変化を示すセンサ情報８Ｃを撮像画像にオーバーレイすることによって、ユーザは、周囲の環境を示す画像を視認しながら変化を定量的に把握し、自身にとって有効な行動をとるべく判断をすることができる場合がある。

また、本実施形態によれば、電子機器１は、撮像画像が撮像される毎に、撮像画像に動的なセンサ情報８Ｃをオーバーレイするため、特別なチップを要することなく、一般的なＣＰＵ及びメモリを用いて簡易に撮像画像にセンサ情報８Ｃをオーバーレイすることができる。

また、本実施形態によれば、撮影前に入力部３Ｂによって動的なセンサ情報８Ｃを撮像画像にオーバーレイするためのメニューが選択されると、当該メニューに対応する少なくとも１つの動的なセンサ情報８Ｃを撮像画像にオーバーレイする。このため、電子機器１は、センサ情報８Ｃのうちの、ユーザが所望するセンサ情報８Ｃのみを撮像画像にオーバーレイさせることができる。したがって、ユーザは、自身が所望しないセンサ情報８Ｃを視認する必要はなく、所望するセンサ情報８Ｃのみを迷うことなく認識することができる。また、用途に対応して予めセンサ情報８Ｃが記憶されているため、ユーザはひとつずつセンサ情報８Ｃを選択する手間を省き、用途に応じて所望されると見込まれるセンサ情報８Ｃを撮像画像にオーバーレイする設定を簡易に行うことができる。

また、本実施形態によれば、電子機器１は、位置情報取得センサ７Ｂによって所定の時間毎に取得された自機の位置情報に基づき、自機の移動経路情報を表示部３Ａに表示する。自身の移動を主たる目的としているユーザにとって、どのように移動してきたかの履歴を示す移動経路情報を把握することは重要である。移動経路情報を撮像画像にオーバーレイすることによって、ユーザは、周囲の環境を示す画像を視認しながら移動経路情報を確認することができる。また、移動経路情報は移動経路の履歴を示す情報であるため、出発地点からどの程度離れた位置まで移動するのか、出発時点で予測することは困難である。そのため、表示部３Ａの移動経路表示範囲Ｒに所定の縮尺で移動経路情報を表示させると、該移動経路情報の全てが移動経路表示範囲Ｒ内に含まれない場合もある。移動経路情報が所定の範囲の端部に到達すると、移動経路情報の表示を縮小することによって、該移動経路情報の全てが移動経路表示範囲Ｒ内に含まれる。これによって、ユーザは適切に移動経路情報を認識することができる。

上述の実施形態は代表的な例として説明したが、本開示の趣旨および範囲内で、多くの変更および置換ができることは当業者に明らかである。従って、本開示は、上述の実施形態によって制限するものと解するべきではなく、特許請求の範囲から逸脱することなく、種々の変形や変更が可能である。例えば、実施形態に記載の複数の構成ブロックを１つに組合せたり、あるいは１つの構成ブロックを分割したりすることが可能である。

また、上記の実施形態において、制御部６は、プレビュー画像を表示部３Ａに表示するとき、静止画像記憶オブジェクトＯ１および動画像記憶オブジェクトＯ２を併せて表示するとしたが、この限りではない。例えば、制御部６は、利用者の選択により設定された用途に基づいて静止画像記憶オブジェクトＯ１および動画像記憶オブジェクトＯ２のいずれかを表示してもよい。制御部６は、設定された用途が、例えば、「サーフィン・マリンスポーツ」、「登山」、「スキー・スノーボード」、「自転車」である場合、動画像記憶オブジェクトＯ２のみをプレビュー画像とともに表示することができる。また、制御部６は、設定された用途が、例えば、「釣り」、「トレッキング」である場合、静止画像記憶オブジェクトＯ１のみをプレビュー画像とともに表示することができる。

一般に、「サーフィン・マリンスポーツ」、「登山」、「スキー・スノーボード」、「自転車」を選択した利用者には動きが多く、動きの過程で観察される風景、風景の変化に伴うセンサ情報８Ｃの変化等に大きな関心がもたれる。そのため、これらの用途を選択した利用者は、静止画像ではなく動画像を記憶しようとすることが多い。したがって、この場合に予め動画像記憶オブジェクトＯ２のみを表示することによって、利用者は、プレビュー画像を記憶させるための操作を迷うことなくスムーズに行うことができる。すなわち、利用者の利便性が高まる。

一方、「釣り」、「トレッキング」を選択した利用者には、これらの行動に伴ってもたらされる、例えば、釣果のような結果と該結果が得られたときのセンサ情報８Ｃに大きな関心がもたれる。そのため、これらの用途を選択した利用者は、動画像ではなく静止画像を記憶しようとすることが多い。したがって、この場合に予め静止画像記憶オブジェクトＯ１のみを表示することによって、利用者は、プレビュー画像を記憶させるための操作を迷うことなくスムーズに行うことができる。すなわち、利用者の利便性が高まる。

１ 電子機器
２ ハウジング
３ タッチスクリーンディスプレイ
３Ａ 表示部
３Ｂ 入力部
４ 操作ボタン
５ 撮像部
６ 制御部
７ センサ
７Ａ 通信センサ
７Ｂ 位置情報取得センサ
７Ｃ 方位センサ
７Ｄ 加速度センサ
７Ｅ 気圧センサ
８ 記憶部
８Ａ 制御プログラム
８Ｂ オーバーレイアプリケーション
８Ｃ センサ情報
８Ｄ 設定情報
８Ｅ 設定テーブル
８Ｆ オーバーレイ静止画像
８Ｇ オーバーレイ動画像
１００ 自転車
Ｄ１ 速度情報
Ｄ２ 距離情報
Ｄ３ 標高情報
Ｄ４ 重力加速度情報
Ｄ５ 時刻情報
Ｄ６ 経過時間情報
Ｄ７ 最高速度情報
Ｄ８ 最大重力加速度情報
Ｄ９ 移動経路情報

また、本開示の電子機器は、撮像部と、センサと、記憶部と、表示部と、制御部と、を備える。前記制御部は、前記撮像部が撮像した撮像画像に前記センサによって取得した動的なセンサ情報をオーバーレイしたプレビュー画像を前記表示部に表示させ、前記撮像画像に前記動的なセンサ情報をオーバーレイしたプレビュー画像をオーバーレイ動画像として前記記憶部に記憶する。前記制御部は、前記センサとしての位置情報取得センサによって所定の時間毎に取得された自機の位置情報に基づき、前記動的なセンサ情報の１つとして自機の移動経路情報を前記撮像画像にオーバーレイし、前記移動経路情報が前記表示部内の所定の範囲の外側に表示されると、前記移動経路情報を縮小する。

Claims (6)

1. 撮像部と、センサと、記憶部と、表示部と、制御部と、を備え、
   前記制御部は、
   前記撮像部が撮像した撮像画像に前記センサによって取得した動的なセンサ情報をオーバーレイしたプレビュー画像を前記表示部に表示させ、
   前記撮像画像に前記動的なセンサ情報をオーバーレイしたプレビュー画像をオーバーレイ静止画像として前記記憶部に記憶する、
   ことを特徴とする電子機器。
2. 撮像部と、センサと、記憶部と、表示部と、制御部と、を備え、
   前記制御部は、
   前記撮像部が撮像した撮像画像に前記センサによって取得した動的なセンサ情報をオーバーレイしたプレビュー画像を前記表示部に表示させ、
   前記撮像画像に前記動的なセンサ情報をオーバーレイしたプレビュー画像をオーバーレイ動画像として前記記憶部に記憶する、
   ことを特徴とする電子機器。
3. 前記センサとは、自機に関する検出対象の変化を検出できるセンサであり
   前記動的なセンサ情報は、前記自機に関する検出対象の変化によって時間とともに変わる、
   ことを特徴とする請求項１または２に記載の電子機器。
4. 前記撮像画像は、所定の時間毎に撮像され、
   前記制御部は、
   前記撮像画像が撮像される毎に、当該撮像画像に前記動的なセンサ情報をオーバーレイしたプレビュー画像を前記表示部に表示し、
   オーバーレイ動画像を記憶している際、表示部に当該プレビュー画像を表示する、
   ことを特徴とする請求項２に記載の電子機器。
5. 入力部をさらに備え、
   前記制御部は、
   撮影前に前記入力部によって前記動的なセンサ情報を前記撮像画像にオーバーレイするためのメニューが選択されると、当該メニューに対応する少なくとも１つの前記動的なセンサ情報を、前記撮像画像にオーバーレイする、
   ことを特徴とする請求項１または２に記載の電子機器。
6. 前記センサとして位置情報取得センサを備え、
   前記制御部は、
   前記位置情報取得センサによって所定の時間毎に取得された自機の位置情報に基づき、前記動的なセンサ情報の１つとして自機の移動経路情報を前記撮像画像にオーバーレイし、
   前記移動経路情報が前記表示部内の所定の範囲の外側に表示されると、前記移動経路情報を縮小する、
   ことを特徴とする請求項２に記載の電子機器。

Images