JP6702100B2 - Information processing apparatus, information processing method, and program - Google Patents
Information processing apparatus, information processing method, and program Download PDFInfo
- Publication number
- JP6702100B2 JP6702100B2 JP2016175620A JP2016175620A JP6702100B2 JP 6702100 B2 JP6702100 B2 JP 6702100B2 JP 2016175620 A JP2016175620 A JP 2016175620A JP 2016175620 A JP2016175620 A JP 2016175620A JP 6702100 B2 JP6702100 B2 JP 6702100B2
- Authority
- JP
- Japan
- Prior art keywords
- acceleration
- determination result
- information
- determination
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Details Of Cameras Including Film Mechanisms (AREA)
Description
本発明は、情報処理装置、情報処理方法、及び、プログラムに関する。 The present invention relates to an information processing device, an information processing method, and a program.
従来より、利用者が頭部に撮像装置を装着して、自身の視線の先にあるものを撮像する撮像装置が提案されている(例えば、特許文献1参照)。このような撮像装置は、安定した姿勢で撮像することが想定されておらず、姿勢が安定したタイミングで自動的に撮像することが考えられている。 2. Description of the Related Art Conventionally, an imaging device has been proposed in which a user wears the imaging device on his/her head and images an object in front of his/her line of sight (for example, refer to Patent Document 1). Such an image pickup apparatus is not supposed to take an image in a stable posture, and it is considered to automatically take an image at a timing when the posture is stable.
しかしながら、上述したような撮像方法が採用される場合、撮像装置の姿勢が安定しない間は撮像が行われないため、周期的に撮像が必要となるような撮像方法には適用することができないという問題がある。 However, when the above-described image pickup method is adopted, image pickup is not performed while the posture of the image pickup apparatus is not stable, so that it cannot be applied to an image pickup method that requires periodic image pickup. There's a problem.
本願発明はこのような問題点に鑑みてなされたもので、姿勢が安定しない場合においても周期的な撮像を可能とすることを目的とする。 The present invention has been made in view of such problems, and an object thereof is to enable periodic imaging even when the posture is not stable.
上記目的を達成するために、本発明に係る情報処理装置は、
重力加速度を含む3次元空間の各方向の加速度の変化を逐次検出する加速度検出手段と、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、前記各方向の加速度が安定しているか否かを判定する判定手段と、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、情報取得装置の姿勢に関する情報に含まれる前記重力加速度に基づき、撮像時方向である水平方向と垂直方向を判定する方向判定手段と、
前記方向判定手段の判定結果を保持する保持手段と、
前記判定手段によって安定していると判定され、前記方向判定手段による判定結果が前記保持手段に保持されている前回の判定結果と所定時間にわたって同じ場合は、前記保持されている前回の判定結果を今回の判定結果に更新して、前記今回の判定結果を適用し、前記判定手段によって安定していないと判定された場合は、前記保持手段に保持されている前回の判定結果を更新せずに、前記前回の判定結果を適用するよう制御する制御手段と、
撮像部により情報を取得する情報取得手段と、
前記情報取得手段による情報取得時に前記保持手段に保持されている判定結果を取得するよう制御する取得制御手段と、
を備えることを特徴とする。
In order to achieve the above object, the information processing apparatus according to the present invention is
Acceleration detecting means for sequentially detecting a change in acceleration in each direction of a three-dimensional space including gravitational acceleration;
Determination means for determining whether or not the acceleration in each direction is stable from the magnitude of the change in the acceleration in each direction detected by the acceleration detection means,
From the magnitude of change in the acceleration in each direction detected by the acceleration detecting means,-out based on the gravitational acceleration included in the information about the attitude information acquisition device, it determines the horizontal and vertical Direction is the direction during imaging Direction determining means to
Holding means for holding the determination result of the direction determining means,
If it is determined that the determination means is stable, and the determination result by the direction determination means is the same as the previous determination result held in the holding means for a predetermined time , the held previous determination result is If the determination result is updated by updating to the determination result of this time and the determination result is not stable, the previous determination result held in the holding unit is not updated. , Control means for controlling to apply the previous determination result ,
An information acquisition means for acquiring information by the imaging unit,
Acquisition control means for controlling to acquire the determination result held in the holding means when the information is acquired by the information acquisition means,
It is characterized by including.
本発明によれば、姿勢が安定しない場合においても周期的な撮像が可能となる。 According to the present invention, periodical imaging can be performed even when the posture is not stable.
(第1の実施の形態)
以下、本発明の第1の実施の形態に係る情報処理装置としての撮像装置について説明する。本発明の第1の実施の形態に係る撮像装置100は、図1に示すように、制御部102、メモリ104、操作部106、加速度センサ110、レンズ光学系111、撮像素子112、アナログ/デジタル(A/D:Analogue/digital)変換部113、画像処理部114、オートフォーカス(AF:Auto Focus)制御部115、レンズ駆動部116、表示部120を含んで構成される。撮像装置100は、例えば利用者の頭部に装着され、当該利用者の前方を撮像する。
(First embodiment)
Hereinafter, the image pickup apparatus as the information processing apparatus according to the first embodiment of the present invention will be described. As shown in FIG. 1, the
制御部102は、CPU(Central Processing Unit)を備え、メモリ104に格納されているプログラムに従ってソフトウェア処理を実行し、撮像装置100が具備する機能である、撮像制御部122、画像取得部124及び姿勢判定部126等を実現する。
The
制御部102内の撮像制御部122は、利用者による操作部106の操作等に応じて撮像を制御し、AF制御部115に対して、合焦制御やズーム制御等の撮像制御の指示を行う。画像取得部124は、画像処理部114から入力される画像データであるフレームを取得する。姿勢判定部126は、加速度センサ110からの撮像装置100に生じる加速度に基づいて、撮像装置100の撮像時の方向を判定する。制御部102による撮像時の処理については後述する。
The imaging control unit 122 in the
メモリ104は、不揮発性メモリと揮発性メモリとにより構成される。不揮発性メモリは、撮像装置100における制御等に用いられる各種情報(プログラム等)や、後述する撮像時方向の判定結果等を記憶する。一方、揮発性メモリは、例えば、ワークエリアとなる。
The
操作部106は、ユーザの操作内容を入力するために用いられるインタフェースである。操作部106は、例えばユーザが操作するキーを備える。
The
加速度センサ110は、撮像装置100の移動に伴って生じる加速度を逐次検出する。例えば、加速度センサ110は、3次元空間におけるX軸、Y軸、Z軸の各方向の加速度を検出している。加速度センサ110は、検出した加速度のデータを制御部102へ出力する。加速度のデータはメモリ104に記憶される。なお、この3次元空間におけるX軸が示す方向は、撮像装置100におけるレンズ光学系111の光軸方向に直交した、水平方向(又は左右方向)を示す。また、Y軸が示す方向は、撮像装置100におけるレンズ光学系111の光軸方向に直交した垂直方向(又は上下方向)を示す。更に、Z軸が示す方向は、撮像装置100におけるレンズ光学系111の光軸方向(または前後方向)を示す。
The
AF制御部115は、制御部102内の撮像制御部122や画像処理部114による合焦制御やズーム制御等の撮像制御の指示に応じて、レンズ駆動部116を制御する。レンズ駆動部116は、レンズ光学系111を移動させるためのモータを内蔵する。レンズ駆動部116は、AF制御部115の制御に応じて、合焦制御やズーム制御等のためにレンズ光学系111を移動させる。
The
レンズ光学系111は、ズームレンズ等により構成される。レンズ光学系111は、レンズ駆動部116の制御により移動する。レンズ光学系111の移動によって撮像する際の画角や光学像が制御される。
The lens optical system 111 is composed of a zoom lens or the like. The lens optical system 111 moves under the control of the
撮像素子112は、受光面に規則的に二次元配列された複数の受光素子やサンプルホールド回路等により構成される。受光素子は、例えば、フォトダイオード、ベイヤー配列のカラーフィルタ、CCD(Charge Coupled Device)、CMOS(Complementary Metal Oxide Semiconductor)等の撮像デバイスである。撮像素子112は、レンズ光学系111を介して入光された光学像を撮像(受光)し、アナログの画像信号をA/D変換部113へ出力する。
The
A/D変換部113は、撮像素子112からのアナログ画像信号をデジタルデータに変換して出力する。
The A/
画像処理部114は、カラープロセス回路、JPEG(Joint Photographic Experts Group)回路、デジタルビデオエンコーダ等を含んで構成される。画像処理部114は、A/D変換部113からのデジタルデータを入力して、画像データであるフレームを生成する。画像処理部114は、生成したフレームを制御部102内の画像取得部124へ出力する。また、画像処理部114は、生成したフレームを解析して合焦制御が必要か否かを判定し、必要な場合には、AF制御部115に対して合焦制御の指示を行う。
The
表示部120は、例えば、LCD(Liquid Crystal Display)、PDP(Plasma Display Panel)、EL(Electro-Luminescence)ディスプレイ等によって構成され、フレームに対応する画像を表示する。
The
次に、撮像装置100による撮像処理の詳細を説明する。図2は、撮像処理の動作を示すフローチャートである。
Next, the details of the imaging process performed by the
撮像装置100の電源がオンになり起動すると(ステップS100)。制御部102内の姿勢判定部126は、メモリ104内の不揮発性メモリに予め記憶されている撮像時方向の判定結果を読み出して、撮像時方向判定結果の初期値として設定する(ステップS101)。ここでメモリ104に記憶されている撮像時方向の判定結果は、過去の撮像時方向の判定処理(後述するステップS102の処理)において判定された撮像装置100の撮像時方向のうち、保持することが決定された最新の撮像時方向である。
When the power of the
次に、姿勢判定部126は、撮像時方向の判定処理を行う(ステップS102)。図3は、撮像装置100における撮像時方向判定処理の動作を示すフローチャートである。
Next, the
姿勢判定部126は、加速度センサ110から逐次入力される加速度が安定しているか否かを判定する(ステップS201)。
The
図4及び図5は、撮像装置100に生じる加速度の遷移の一例を示す図である。上述したように、加速度センサ110は、3次元空間におけるX軸、Y軸、Z軸の各方向の加速度を検出している。図4では、X軸方向及びZ軸方向の加速度は0[G]付近で変化が小さく、Y軸方向の加速度は1[G]付近で変化が小さくなっており、安定している。Y軸方向の加速度は1[G]付近であるのはY軸方向に重力加速度が生じているためである。一方、図5では、X軸、Y軸、Z軸の何れの方向も加速度が大きく変化しており、安定しておらず、重力加速度の方向も判別不能である。ステップS201において、姿勢判定部126は、所定時間(例えば100[ms])内における加速度の変化が所定範囲内である場合には、加速度が安定していると判定し、所定範囲を超える場合には、加速度が安定していないと判定する。
4 and 5 are diagrams showing an example of transition of acceleration occurring in the
加速度が安定していない場合(ステップS201;NO)、姿勢判定部126は、撮像時方向が不定である(判定NG)と判定し(ステップS202)、メモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を更新しない(ステップS203)。
When the acceleration is not stable (step S201; NO), the
一方、加速度が安定している場合(ステップS201;YES)、次に、姿勢判定部126は、加速度に基づいて、撮像装置100の撮像時方向、具体的には、レンズ光学系111が向いている方向を判定する(ステップS204)。
On the other hand, when the acceleration is stable (step S201; YES), the
具体的には、姿勢判定部126は、加速度センサ110からの加速度の変化に基づいて重力加速度の方向を判別する。次に、姿勢判定部126は、当該重力加速度の方向を垂直方向、当該重力加速度の方向と直交する方向を水平方向と判別する。更に、姿勢判定部126は、レンズ光学系111についての垂直方向(Y軸方向)の向きを当該垂直方向の加速度に基づいて求めるとともに、水平方向(X軸方向)の向きを当該水平方向の加速度に基づいて求める。この際、姿勢判定部126は、レンズ光学系111が向いている方向が、垂直方向の向き及び水平方向の向きのそれぞれについて、4方向(0°(正立)、90 °(右90°回転)、180°(180°回転)、270°(左90°回転))の何れであるかを判別し、撮像時方向を求める。
Specifically, the
次に、姿勢判定部126は、ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果であるか否かを判定する(ステップS205)。具体的には、姿勢判定部126は、撮像時方向判定結果の初期値とステップS204により判定した撮像時方向判定結果とを比較して、同一であるか否かを判定する。
Next, the
ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果である場合(ステップS205;YES)、姿勢判定部126は、同一の結果がn回(例えば、20[ms]周期で5回)以上継続しているか否かを判定する(ステップS206)。例えば、メモリ104内には、ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果となる毎に1増加するカウンタが設けられている。姿勢判定部126は、ステップS205において、ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果であると判定する毎にカウンタを1増加させ、同一の結果でないと判定した場合にはカウンタをリセットする。更に、姿勢判定部126は、ステップS206において、カウンタの値がn以上であるか否かを判定する。
When the determination result of the image capturing direction determined in step S204 is the same result as the previous image capturing direction (step S205; YES), the
同一の結果がn回以上継続している場合(ステップS206;YES)、姿勢判定部126は、撮像時方向が確定している(判定OK)と判定し(ステップS207)、メモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を、ステップS204において判定した撮像時方向の判定結果に更新する(つまり、今回の判定結果として適用する)(ステップS208)。
When the same result continues n times or more (step S206; YES), the
一方、同一の結果がn回以上継続していない場合(ステップS206;NO)、姿勢判定部126は、撮像時方向を判定中である(判定NG)と判定し(ステップS209)、メモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を更新しない(ステップS210)。
On the other hand, when the same result has not continued for n times or more (step S206; NO), the
また、ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果でない場合(ステップS205;NO)、姿勢判定部126は、撮像時方向判定結果の初期値を、ステップS204により判定した撮像時方向の判定結果に更新する(ステップS211)。
Further, when the determination result of the image capturing direction determined in step S204 is not the same result as the previous image capturing direction (step S205; NO), the
次に、姿勢判定部126は、撮像時方向を判定中である(判定NG)と判定し(ステップS212)、メモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を更新しない(ステップS213)。
Next, the
再び、図2に戻って説明する。ステップS102における撮像時方向判定処理の後、制御部102内の撮像制御部122は、利用者によって操作部106が操作されて撮像の要求が行われたか否かを判定する(ステップS103)。
Returning to FIG. 2 again, description will be made. After the imaging time direction determination process in step S102, the imaging control unit 122 in the
撮像の要求が行われていない場合(ステップS103;NO)、ステップS102における撮像時方向判定処理が繰り返される。一方、撮像の要求が行われた場合(ステップS103;YES)、画像取得部124は、撮像装置100の姿勢判別のためにメモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を取得し、この撮像時方向を採用する(ステップS104)。更に、画像取得部124は、取得した撮像時方向の判定結果を用いて撮像処理を行う(ステップS105)。具体的には、画像取得部124は、取得した撮像時方向の判定結果とフレームとを対応付けてメモリ104に記憶しておく。フレームの再生時には対応付けられた撮像時方向の判定結果を用いてフレームのブレ補正等が行われる。
When the image capturing request is not made (step S103; NO), the image capturing direction determination process in step S102 is repeated. On the other hand, when an image capturing request is made (step S103; YES), the
その後、制御部102は、利用者による操作部106の操作により、撮像装置100の電源のオフが要求されたか否かを判定する(ステップS106)。電源のオフが要求された場合には(ステップS106;YES)、撮像装置100の電源がオフになり(ステップS107)、一連の動作が終了する。一方、電源のオフが要求されていない場合には(ステップS106;NO)、ステップS102における撮像時方向判定処理が繰り返される。
After that, the
以上説明したように、第1の実施の形態に係る撮像装置100では、撮像装置100に生じる加速度が安定し、且つ、加速度に基づく撮像時方向の判定結果が同一の結果で継続する場合には、撮像時方向の判定結果が最新のものに更新されて、再生時にフレームのブレ補正等に用いられる。一方、撮像装置100に生じる加速度が安定しない場合や、加速度に基づく撮像時時方向の判定結果が同一の結果で継続しない場合には、撮像時方向の判定結果が更新されず、過去の撮像時方向の判定結果が保持されて、再生時にフレームのブレ補正等に用いられる。
As described above, in the
これにより、撮像装置100の姿勢が安定しない間に周期的に撮像が行われる場合においても、過去の撮像時方向の判定結果を用いて再生時にフレームのブレ補正等を行うことができる。
Accordingly, even when images are taken periodically while the posture of the
(第2の実施の形態)
上記第1の実施の形態では、撮像時に撮像時方向の判定結果をフレームと対応付けてメモリ104に記憶しておくようにしたが、再生時に撮像時方向の判定結果を行うようにしても良い。
(Second embodiment)
In the first embodiment, the image pickup direction determination result is stored in the
図6は、この場合の再生処理の動作を示すフローチャートである。当該再生処理は、上記第1の実施の形態の撮像装置100が行うものとするが、第2の実施の形態において機能する回路部は、制御部102、メモリ104、操作部106、表示部120、画像取得部124、及び、姿勢判定部126である。なお、メモリ104の不揮発性メモリには、撮像装置100における制御等に用いられる各種情報(プログラム等)、撮像時方向の判定結果の他、記録された静止画ファイル及び動画ファイルが記録されており、また動画ファイルには、記録時に加速度センサ110で計測され撮影時方向判定処理が適用される前の当該撮像装置100の撮像時方向が、記録経過時間とともに記録されているものとする。
FIG. 6 is a flowchart showing the operation of the reproduction process in this case. The reproduction process is performed by the
撮像装置100の電源がオンになり操作部106が所定操作を検出すると、再生モードに移行し、制御部102は、メモリ104に記録されている再生対象となる動画ファイルの読み出しを行う(ステップS300)。次いで、制御部102は、この動画ファイルのメタデータとして記録されている撮像時方向データの読み出しを行う(ステップS301)。
When the power of the
そして、制御部102は、操作部106からの再生開始指示を検出するまで待機する(ステップS302)。制御部102は、再生指示を検出しない場合(ステップS303;NO)、ステップS302で待機を継続するが、再生指示を検出すると(ステップS303;YES)、この時点で撮影時方向判定処理を実行する(ステップS304)。
Then, the
この撮影時方向判定処理は、上記第1の実施の形態のステップS102及び図3と同様に行われる。但し、上記第1の実施例では姿勢判定部126は、加速度センサ110から逐次入力される加速度が安定しているか否かを判定したが、第2の実施の形態においては、姿勢判定部126は、再生対象の動画ファイルに記録されている加速度情報に基づいて、撮像時の撮像装置100が安定した状態で動画を記録したか否かを判定するものとする。
This photographing direction determination process is performed in the same manner as step S102 and FIG. 3 of the first embodiment. However, in the first embodiment, the
また、第2の実施の形態においても図3のフローチャートを適用するが、このフローチャートにおいて、姿勢判定部126は、加速度センサ110から逐次入力され、動画とともに記録されたX軸、Y軸、Z軸の加速度からなる加速度情報を判定処理に用いることで、再生処理の過程において撮像時方向の判定処理を行うものとする。
The flowchart of FIG. 3 is also applied to the second embodiment, but in this flowchart, the
そして、ステップS304における撮像時方向判定処理が終了すると、制御部102は、再生対象フレームに判定結果を反映させて動画再生処理をする(ステップS305)。その後、制御部102は、再生処理が終了したか否かを判定する(ステップS306)。再生処理の終了を検出した場合には(ステップS306;YES)、本処理を終了する。一方、再生処理の終了が要求されていない場合には(ステップS306;NO)、ステップS305における再生処理が継続される。
Then, when the imaging direction determination process in step S304 ends, the
以上、本発明の好ましい実施形態について説明したが、本発明は係る特定の実施形態に限定されるものではなく、本発明には、特許請求の範囲に記載された発明とその均等の範囲が含まれる。以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。 Although the preferred embodiment of the present invention has been described above, the present invention is not limited to the specific embodiment, and the present invention includes the invention described in the claims and an equivalent range thereof. Be done. The inventions described in the initial claims of the present application will be additionally described below.
(付記1)
複数の情報取得時の、夫々の情報取得装置の姿勢に関する情報を取得する姿勢情報取得手段と、
前記姿勢情報取得手段によって取得された前記姿勢に関する情報の内容に応じて、当該情報取得時の姿勢に関する情報として、当該情報取得時以外に取得された情報を適用するよう制御する制御手段と、
を備えることを特徴とする情報処理装置。
(Appendix 1)
Attitude information acquisition means for acquiring information about the attitude of each information acquisition device at the time of acquiring a plurality of information,
According to the content of the information about the posture acquired by the posture information acquisition unit, as the information about the posture at the time of acquiring the information, a control unit that controls to apply the information acquired at a time other than the time of acquiring the information,
An information processing apparatus comprising:
(付記2)
前記姿勢に関する情報は時間的に連続して取得されたものであり、
前記姿勢に関する情報の内容には、時間的に連続して取得された前記姿勢に関する情報の変化が含まれ、
前記制御手段は、前記姿勢に関する情報の変化が所定の条件を満たすか否かに応じて、当該情報取得時以外に取得された情報を適用するよう制御することを特徴とする付記1に記載の情報処理装置。
(Appendix 2)
The information on the posture is obtained continuously in time,
The content of the information regarding the posture includes a change in the information regarding the posture acquired continuously in time,
The control unit controls to apply the information acquired except when the information is acquired, according to whether or not the change in the information on the posture satisfies a predetermined condition. Information processing device.
(付記3)
前記所定の条件とは、前記姿勢に関する情報の変化の度合いが所定の範囲内であることを特徴とする付記2に記載の情報処理装置。
(Appendix 3)
The information processing apparatus according to
(付記4)
前記情報取得装置が安定している時の前記姿勢に関する情報を保持する保持手段を更に備え、
前記制御手段は、前記姿勢に関する情報の変化が所定の条件を満たさないと判断したとき、当該情報取得時以外に取得された情報として、前記保持手段に保持された姿勢に関する情報を適用するよう制御することを特徴とする付記2に記載の情報処理装置。
(Appendix 4)
Further comprising holding means for holding information regarding the posture when the information acquisition device is stable,
When the control unit determines that the change in the information regarding the posture does not satisfy a predetermined condition, the control unit applies the information regarding the posture held by the holding unit as the information acquired at a time other than the time when the information is acquired. The information processing apparatus according to
(付記5)
前記複数の情報を取得する取得手段を更に備えるとともに、前記姿勢情報取得手段は、当該取得手段による複数の情報の取得時の、夫々の当該情報取得装置の姿勢に関する情報を検出する検出手段を含むことを特徴とする付記4に記載の情報処理装置。
(Appendix 5)
The attitude information acquiring means further includes an acquiring means for acquiring the plurality of information, and the attitude information acquiring means includes a detecting means for detecting information about the attitude of each of the information acquiring devices at the time of acquiring the plurality of information by the acquiring means. The information processing apparatus according to appendix 4, characterized in that.
(付記6)
前記取得手段は、撮像手段を含むことを特徴とする付記5に記載の情報処理装置。
(Appendix 6)
The information processing apparatus according to appendix 5, wherein the acquisition unit includes an imaging unit.
(付記7)
前記撮像手段は、所定の周期で撮像を行うことを特徴とする付記6に記載の情報処理装置。
(Appendix 7)
7. The information processing apparatus according to appendix 6, wherein the image capturing unit captures an image at a predetermined cycle.
(付記8)
前記保持手段は、前記撮像手段により所定の周期で撮像された画像に対応づけて前記姿勢に関する情報を保持することを特徴とする付記7に記載の情報処理装置。
(Appendix 8)
8. The information processing apparatus according to appendix 7, wherein the holding unit holds information regarding the posture in association with an image captured by the image capturing unit in a predetermined cycle.
(付記9)
複数の情報取得時の、夫々の情報取得装置の姿勢に関する情報を取得する姿勢情報取得ステップと、
前記姿勢情報取得ステップにて取得された前記姿勢に関する情報の内容に応じて、当該情報取得時の姿勢に関する情報として、当該情報取得時以外に取得された情報を適用するよう制御する制御ステップと、
を含むことを特徴とする情報処理方法。
(Appendix 9)
An attitude information acquisition step of acquiring information about the attitude of each information acquisition device at the time of acquiring a plurality of information;
Depending on the content of the information regarding the posture acquired in the posture information acquisition step, as the information regarding the posture at the time of acquiring the information, a control step of controlling to apply the information obtained at a time other than the time of acquiring the information,
An information processing method comprising:
(付記10)
前記姿勢に関する情報は時間的に連続して取得されたものであり、
前記姿勢に関する情報の内容には、時間的に連続して取得された前記姿勢に関する情報の変化が含まれ、
前記制御ステップは、前記姿勢に関する情報の変化が所定の条件を満たすか否かに応じて、当該情報取得時以外に取得された情報を適用するよう制御することを特徴とする付記9に記載の情報処理方法。
(Appendix 10)
The information regarding the posture is obtained continuously in time,
The content of the information on the posture includes a change in the information on the posture acquired continuously in time,
The control step is controlled to apply information acquired at a time other than when the information is acquired, according to whether or not a change in the information on the posture satisfies a predetermined condition. Information processing method.
(付記11)
前記所定の条件とは、前記姿勢に関する情報の変化の度合いが所定の範囲内であることを特徴とする付記10に記載の情報処理方法。
(Appendix 11)
11. The information processing method according to appendix 10, wherein the predetermined condition is that the degree of change in information regarding the posture is within a predetermined range.
(付記12)
前記情報取得装置が安定している時の前記姿勢に関する情報を保持する保持ステップを更に含み、
前記制御ステップは、前記姿勢に関する情報の変化が所定の条件を満たさないと判断したとき、当該情報取得時以外に取得された情報として、前記保持ステップにて保持された姿勢に関する情報を適用するよう制御することを特徴とする付記10に記載の情報処理方法。
(Appendix 12)
Further comprising a holding step of holding information regarding the posture when the information acquisition device is stable,
When it is determined that the change in the information on the posture does not satisfy a predetermined condition, the control step applies the information on the posture held in the holding step as the information acquired except when the information is acquired. 11. The information processing method according to appendix 10, characterized by controlling.
(付記13)
前記複数の情報を取得する取得ステップを更に含むとともに、前記姿勢情報取得ステップは、当該取得ステップにおける複数の情報の取得時の、夫々の当該情報取得装置の姿勢に関する情報を検出する検出ステップを含むことを特徴とする付記12に記載の情報処理方法。
(Appendix 13)
The method further includes an acquisition step of acquiring the plurality of pieces of information, and the attitude information acquisition step includes a detection step of detecting information regarding the attitude of each of the information acquisition devices at the time of acquisition of the plurality of information in the acquisition step. 13. The information processing method according to appendix 12, which is characterized in that
(付記14)
コンピュータを、
複数の情報取得時の、夫々の情報取得装置の姿勢に関する情報を取得する姿勢情報取得手段、
前記姿勢情報取得手段によって取得された前記姿勢に関する情報の内容に応じて、当該情報取得時の姿勢に関する情報として、当該情報取得時以外に取得された情報を適用するよう制御する制御手段、
として機能させることを特徴とするプログラム。
(Appendix 14)
Computer,
Attitude information acquisition means for acquiring information about the attitude of each information acquisition device at the time of acquiring a plurality of information,
According to the content of the information about the attitude acquired by the attitude information acquisition unit, as the information about the attitude at the time of acquiring the information, a control unit that controls to apply the information acquired at a time other than the time of acquiring the information,
A program characterized by making it function as.
(付記15)
前記姿勢に関する情報は時間的に連続して取得されたものであり、
前記姿勢に関する情報の内容には、時間的に連続して取得された前記姿勢に関する情報の変化が含まれ、
前記制御手段は、前記姿勢に関する情報の変化が所定の条件を満たすか否かに応じて、当該情報取得時以外に取得された情報を適用するよう制御することを特徴とする付記14に記載のプログラム。
(Appendix 15)
The information regarding the posture is obtained continuously in time,
The content of the information on the posture includes a change in the information on the posture acquired continuously in time,
15. The control unit controls to apply the information acquired except when the information is acquired, according to whether or not the change in the information on the posture satisfies a predetermined condition. program.
(付記16)
前記所定の条件とは、前記姿勢に関する情報の変化の度合いが所定の範囲内であることを特徴とする付記15に記載のプログラム。
(Appendix 16)
16. The program according to appendix 15, wherein the predetermined condition is that the degree of change in the information regarding the posture is within a predetermined range.
(付記17)
前記情報取得装置が安定している時の前記姿勢に関する情報を保持する保持手段として更に機能し、
前記制御手段は、前記姿勢に関する情報の変化が所定の条件を満たさないと判断したとき、当該情報取得時以外に取得された情報として、前記保持手段に保持された姿勢に関する情報を適用するよう制御することを特徴とする付記15に記載のプログラム。
(Appendix 17)
The information acquisition device further functions as a holding unit that holds information about the posture when the device is stable,
When the control unit determines that the change in the information regarding the posture does not satisfy a predetermined condition, the control unit applies the information regarding the posture held by the holding unit as the information acquired at a time other than the time when the information is acquired. 16. The program according to appendix 15, characterized by:
(付記18)
前記複数の情報を取得する取得手段として更に機能させるとともに、前記姿勢情報取得手段は、当該取得手段による複数の情報の取得時の、夫々の当該情報取得装置の姿勢に関する情報を検出する検出手段として更に機能することを特徴とする付記17に記載のプログラム。
(Appendix 18)
While further functioning as an acquisition unit that acquires the plurality of information, the posture information acquisition unit serves as a detection unit that detects information regarding the posture of each of the information acquisition devices when the plurality of information is acquired by the acquisition unit. 18. The program according to appendix 17, which further functions.
100…撮像装置、102…制御部、104…メモリ、106…操作部、110…加速度センサ、111…レンズ光学系、112…撮像素子、113…アナログ/デジタル変換部、114…画像処理部、115…オートフォーカス制御部、116…レンズ駆動部、120…表示部、122…撮像制御部、124…画像取得部、126…姿勢判定部 100... Imaging device, 102... Control part, 104... Memory, 106... Operation part, 110... Acceleration sensor, 111... Lens optical system, 112... Imaging element, 113... Analog/digital conversion part, 114... Image processing part, 115 ... auto-focus control section, 116... lens drive section, 120... display section, 122... imaging control section, 124... image acquisition section, 126... posture determination section
Claims (7)
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、前記各方向の加速度が安定しているか否かを判定する判定手段と、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、情報取得装置の姿勢に関する情報に含まれる前記重力加速度に基づき、撮像時方向である水平方向と垂直方向を判定する方向判定手段と、
前記方向判定手段の判定結果を保持する保持手段と、
前記判定手段によって安定していると判定され、前記方向判定手段による判定結果が前記保持手段に保持されている前回の判定結果と所定時間にわたって同じ場合は、前記保持されている前回の判定結果を今回の判定結果に更新して、前記今回の判定結果を適用し、前記判定手段によって安定していないと判定された場合は、前記保持手段に保持されている前回の判定結果を更新せずに、前記前回の判定結果を適用するよう制御する制御手段と、
撮像部により情報を取得する情報取得手段と、
前記情報取得手段による情報取得時に前記保持手段に保持されている判定結果を取得するよう制御する取得制御手段と、
を備えることを特徴とする情報処理装置。 Acceleration detecting means for sequentially detecting a change in acceleration in each direction of a three-dimensional space including gravitational acceleration;
From the magnitude of the change in acceleration in each direction detected by the acceleration detection means, a determination means for determining whether or not the acceleration in each direction is stable,
From the magnitude of change in the acceleration in each direction detected by the acceleration detecting means,-out based on the gravitational acceleration included in the information about the attitude information acquisition device, it determines the horizontal and vertical Direction is the direction during imaging Direction determining means to
Holding means for holding the determination result of the direction determining means,
When it is determined that the determination means is stable and the determination result by the direction determination means is the same as the previous determination result held in the holding means for a predetermined time , the held previous determination result is If the determination result is updated to the current determination result and the determination result is not stable, the previous determination result held in the holding unit is not updated. , Control means for controlling to apply the previous determination result ,
An information acquisition means for acquiring information by the imaging unit,
Acquisition control means for controlling to acquire the determination result held in the holding means when the information is acquired by the information acquisition means,
An information processing apparatus comprising:
前記制御手段は、前記カウント手段によってカウントされた判定結果の回数に基づいて、前記保持手段に保持されている前回の判定結果の更新を制御することを特徴とする請求項1乃至4の何れか1項に記載の情報処理装置。 When the determination result by the direction determining means is the same as the previous determination result held in the holding means, further comprising a counting means for counting the number of times determined to be the same,
Said control means, based on the number of times counted by the determination result by said counting means, any one of claims 1 to 4, characterized in that to control the updating of the previous determination result held in said holding means The information processing device according to item 1.
前記加速度検出部に対し逐次加速度検出させる加速度検出ステップと、
前記加速度検出ステップにて検出された各方向の加速度の変化の大きさから、前記各方向の加速度が安定しているか否かを判定する判定ステップと、
前記加速度検出ステップにて検出された各方向の加速度の変化の大きさから、情報取得装置の姿勢に関する情報に含まれる前記重力加速度に基づき、撮像時方向である水平方向と垂直方向を判定する方向判定ステップと、
前記方向判定ステップによる判定結果を保持部に保持させる保持ステップと、
前記判定ステップにて安定していると判定され、前記方向判定ステップの判定結果が前記保持ステップにて保持されている前回の判定結果と所定時間にわたって同じ場合は、前記保持されている前回の判定結果を今回の判定結果に更新して、前記今回の判定結果を適用し、前記判定ステップにて安定していないと判定された場合は、前記保持されている前回の判定結果を更新せずに、前記前回の判定結果を適用するよう制御する制御ステップと、
撮像部により情報を取得する情報取得ステップと、
前記情報取得ステップによる情報取得時に前記保持ステップにより保持されている判定結果を取得するよう制御する取得制御ステップと、
を含むことを特徴とする情報処理方法。 An information processing method executed by an information processing device including an acceleration detection unit that detects a change in acceleration in each direction of a three-dimensional space including gravitational acceleration,
An acceleration detection step of sequentially detecting acceleration by the acceleration detection unit;
From the magnitude of the change in acceleration in each direction detected in the acceleration detection step, a determination step of determining whether or not the acceleration in each direction is stable,
From the magnitude of variation of said acceleration detecting acceleration in each direction detected in step-out based on the gravitational acceleration included in the information about the attitude information acquisition device, the horizontal and vertical Direction is the direction during imaging A direction determining step for determining,
A holding step of holding the determination result of the direction determination step in a holding part,
If the determination result of the direction determination step is stable in the determination step and the determination result of the direction determination step is the same as the previous determination result held in the holding step for a predetermined time , the previous determination held Update the result to this time's judgment result, apply this time's judgment result, and if it is judged in the judgment step that it is not stable, do not update the held previous judgment result. , A control step of controlling to apply the previous determination result ,
An information acquisition step of acquiring information by the imaging unit,
An acquisition control step of controlling to acquire the determination result held by the holding step when the information is acquired by the information acquisition step,
An information processing method comprising:
前記加速度検出部に対し逐次加速度検出させる加速度検出手段、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、前記各方向の加速度が安定しているか否かを判定する判定手段、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、情報取得装置の姿勢に関する情報に含まれる前記重力加速度に基づき、撮像時方向である水平方向と垂直方向を判定する方向判定手段、
前記方向判定手段による判定結果を保持部に保持させる保持手段、
前記判定手段によって安定していると判定され、前記方向判定手段の判定結果が前記保持手段にて保持されている前回の判定結果と所定時間にわたって同じ場合は、前記保持されている前回の判定結果を今回の判定結果に更新して、前記今回の判定結果を適用し、前記判定手段によって安定していないと判定された場合は、前記保持されている前回の判定結果を更新せずに、前記前回の判定結果を適用するよう制御する制御手段、
撮像部により情報を取得する情報取得手段、
前記情報取得手段による情報取得時に前記保持手段に保持されている判定結果を取得するよう制御する取得制御手段、
として機能させることを特徴とするプログラム。 A computer provided with an information processing apparatus including an acceleration detection unit that detects a change in acceleration in each direction of a three-dimensional space including gravitational acceleration,
Acceleration detecting means for sequentially detecting acceleration by the acceleration detecting section;
Determination means for determining whether or not the acceleration in each direction is stable from the magnitude of the change in acceleration in each direction detected by the acceleration detection means,
From the magnitude of change in the acceleration in each direction detected by the acceleration detecting means,-out based on the gravitational acceleration included in the information about the attitude information acquisition device, it determines the horizontal and vertical Direction is the direction during imaging Direction determining means,
Holding means for holding the determination result by the direction determining means in a holding portion,
If the determination result of the determination unit is stable and the determination result of the direction determination unit is the same as the previous determination result held by the holding unit for a predetermined time , the previous determination result held To the determination result of this time, the determination result of this time is applied, and when it is determined that the determination means is not stable, the previous determination result held is not updated, Control means for controlling to apply the previous judgment result ,
Information acquisition means for acquiring information by the imaging unit,
Acquisition control means for controlling to acquire the determination result held in the holding means at the time of information acquisition by the information acquisition means,
A program characterized by making it function as.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/268,999 US10097758B2 (en) | 2015-11-18 | 2016-09-19 | Data processing apparatus, data processing method, and recording medium |
CN201610898792.8A CN106973214B (en) | 2015-11-18 | 2016-10-14 | Data processing equipment and data processing method |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015226104 | 2015-11-18 | ||
JP2015226104 | 2015-11-18 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017098940A JP2017098940A (en) | 2017-06-01 |
JP6702100B2 true JP6702100B2 (en) | 2020-05-27 |
Family
ID=58817442
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016175620A Active JP6702100B2 (en) | 2015-11-18 | 2016-09-08 | Information processing apparatus, information processing method, and program |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6702100B2 (en) |
CN (1) | CN106973214B (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018193895A1 (en) | 2017-04-17 | 2018-10-25 | 株式会社ブリヂストン | Vibration dampening device |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04277728A (en) * | 1991-03-06 | 1992-10-02 | Nikon Corp | Vibration-proof device for camera |
JP5920863B2 (en) * | 2011-06-03 | 2016-05-18 | 株式会社ソニー・インタラクティブエンタテインメント | Image processing device |
CN103621056A (en) * | 2011-06-23 | 2014-03-05 | 株式会社尼康 | Imaging device |
US20150181123A1 (en) * | 2013-12-19 | 2015-06-25 | Lyve Minds, Inc. | Image orientation adjustment based on camera orientation |
CN104750969B (en) * | 2013-12-29 | 2018-01-26 | 刘进 | The comprehensive augmented reality information superposition method of intelligent machine |
CN104978476B (en) * | 2014-04-14 | 2019-06-25 | 李巍岳 | Indoor map scene, which is carried out, using smart phone mends the method surveyed |
-
2016
- 2016-09-08 JP JP2016175620A patent/JP6702100B2/en active Active
- 2016-10-14 CN CN201610898792.8A patent/CN106973214B/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017098940A (en) | 2017-06-01 |
CN106973214B (en) | 2019-12-03 |
CN106973214A (en) | 2017-07-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4341613B2 (en) | Control apparatus, photographing apparatus, photographing apparatus control method, and control program | |
JP5014661B2 (en) | Imaging device | |
JP6312460B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
US10097758B2 (en) | Data processing apparatus, data processing method, and recording medium | |
JP6548211B2 (en) | Imaging apparatus and imaging method | |
US9621799B2 (en) | Imaging apparatus | |
JP6702100B2 (en) | Information processing apparatus, information processing method, and program | |
JP2014016451A (en) | Imaging device, method for calculating camera shake correction amount, and program for calculating camera shake correction amount | |
JP5735759B2 (en) | IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
JP2012013778A (en) | Imaging apparatus | |
JP2007147803A (en) | Imaging apparatus, control method and control program | |
JP2012095206A (en) | Imaging device and control method of the same | |
JP5423204B2 (en) | Imaging device | |
JP2009171362A (en) | Photographing apparatus, and photographing method | |
JP2004271693A (en) | Digital camera | |
JP2011193329A (en) | Image pickup device | |
JP4876952B2 (en) | Camera shake correction apparatus and program | |
JP6833381B2 (en) | Imaging equipment, control methods, programs, and storage media | |
US20240022706A1 (en) | Evaluation method of image blur correction capability of image capturing apparatus, image capturing apparatus, and recording medium | |
JP2009081780A (en) | Camera apparatus | |
JP2008257033A (en) | Camera, lens barrel, manufacturing method for camera, and manufacturing method for lens barrel | |
JP2009300784A (en) | Camera shake correction device and camera shake correction method, and imaging device | |
JP2007194813A (en) | Imaging apparatus, control method, and control program | |
JP2009244434A (en) | Camera shake preventing device, electronic device, camera shake preventing method and camera shake preventing program | |
JP2007181177A (en) | Controller, photographing equipment, control method of photographing equipment, and control program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180703 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190516 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190521 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190722 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191210 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200129 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200407 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200420 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6702100 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |