JP6702100B2 - Information processing apparatus, information processing method, and program - Google Patents

Information processing apparatus, information processing method, and program Download PDF

Info

Publication number
JP6702100B2
JP6702100B2 JP2016175620A JP2016175620A JP6702100B2 JP 6702100 B2 JP6702100 B2 JP 6702100B2 JP 2016175620 A JP2016175620 A JP 2016175620A JP 2016175620 A JP2016175620 A JP 2016175620A JP 6702100 B2 JP6702100 B2 JP 6702100B2
Authority
JP
Japan
Prior art keywords
acceleration
determination result
information
determination
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016175620A
Other languages
Japanese (ja)
Other versions
JP2017098940A (en
Inventor
祐 武藤
祐 武藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to US15/268,999 priority Critical patent/US10097758B2/en
Priority to CN201610898792.8A priority patent/CN106973214B/en
Publication of JP2017098940A publication Critical patent/JP2017098940A/en
Application granted granted Critical
Publication of JP6702100B2 publication Critical patent/JP6702100B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)

Description

本発明は、情報処理装置、情報処理方法、及び、プログラムに関する。   The present invention relates to an information processing device, an information processing method, and a program.

従来より、利用者が頭部に撮像装置を装着して、自身の視線の先にあるものを撮像する撮像装置が提案されている(例えば、特許文献1参照)。このような撮像装置は、安定した姿勢で撮像することが想定されておらず、姿勢が安定したタイミングで自動的に撮像することが考えられている。   2. Description of the Related Art Conventionally, an imaging device has been proposed in which a user wears the imaging device on his/her head and images an object in front of his/her line of sight (for example, refer to Patent Document 1). Such an image pickup apparatus is not supposed to take an image in a stable posture, and it is considered to automatically take an image at a timing when the posture is stable.

特開2009−267792号公報JP, 2009-267792, A

しかしながら、上述したような撮像方法が採用される場合、撮像装置の姿勢が安定しない間は撮像が行われないため、周期的に撮像が必要となるような撮像方法には適用することができないという問題がある。   However, when the above-described image pickup method is adopted, image pickup is not performed while the posture of the image pickup apparatus is not stable, so that it cannot be applied to an image pickup method that requires periodic image pickup. There's a problem.

本願発明はこのような問題点に鑑みてなされたもので、姿勢が安定しない場合においても周期的な撮像を可能とすることを目的とする。   The present invention has been made in view of such problems, and an object thereof is to enable periodic imaging even when the posture is not stable.

上記目的を達成するために、本発明に係る情報処理装置は、
重力加速度を含む3次元空間の各方向の加速度の変化を逐次検出する加速度検出手段と、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、前記各方向の加速度が安定しているか否かを判定する判定手段と、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、情報取得装置の姿勢に関する情報に含まれる前記重力加速度に基づき、撮像時方向である水平方向と垂直方向を判定する方向判定手段と、
前記方向判定手段の判定結果を保持する保持手段と、
前記判定手段によって安定していると判定され、前記方向判定手段による判定結果が前記保持手段に保持されている前回の判定結果と所定時間にわたって同じ場合は、前記保持されている前回の判定結果を今回の判定結果に更新して、前記今回の判定結果を適用し、前記判定手段によって安定していないと判定された場合は、前記保持手段に保持されている前回の判定結果を更新せずに、前記前回の判定結果を適用するよう制御する制御手段と、
撮像部により情報を取得する情報取得手段と、
前記情報取得手段による情報取得時に前記保持手段に保持されている判定結果を取得するよう制御する取得制御手段と、
を備えることを特徴とする。
In order to achieve the above object, the information processing apparatus according to the present invention is
Acceleration detecting means for sequentially detecting a change in acceleration in each direction of a three-dimensional space including gravitational acceleration;
Determination means for determining whether or not the acceleration in each direction is stable from the magnitude of the change in the acceleration in each direction detected by the acceleration detection means,
From the magnitude of change in the acceleration in each direction detected by the acceleration detecting means,-out based on the gravitational acceleration included in the information about the attitude information acquisition device, it determines the horizontal and vertical Direction is the direction during imaging Direction determining means to
Holding means for holding the determination result of the direction determining means,
If it is determined that the determination means is stable, and the determination result by the direction determination means is the same as the previous determination result held in the holding means for a predetermined time , the held previous determination result is If the determination result is updated by updating to the determination result of this time and the determination result is not stable, the previous determination result held in the holding unit is not updated. , Control means for controlling to apply the previous determination result ,
An information acquisition means for acquiring information by the imaging unit,
Acquisition control means for controlling to acquire the determination result held in the holding means when the information is acquired by the information acquisition means,
It is characterized by including.

本発明によれば、姿勢が安定しない場合においても周期的な撮像が可能となる。   According to the present invention, periodical imaging can be performed even when the posture is not stable.

本発明の第1の実施形態に係る撮像装置の構成を示す図である。It is a figure which shows the structure of the imaging device which concerns on the 1st Embodiment of this invention. 同実施形態に係る撮像装置における撮像処理の動作を示すフローチャートである。6 is a flowchart showing an operation of an image pickup process in the image pickup apparatus according to the same embodiment. 同実施形態に係る撮像装置における撮像時方向判定処理の動作を示すフローチャートである。7 is a flowchart showing an operation of a direction determination process during image capturing in the image capturing apparatus according to the same embodiment. 同実施形態に係る撮像装置に生じる加速度の遷移の一例を示す図である。It is a figure which shows an example of the transition of the acceleration which arises in the imaging device which concerns on the same embodiment. 同実施形態に係る撮像装置に生じる加速度の遷移の一例を示す図である。It is a figure which shows an example of the transition of the acceleration which arises in the imaging device which concerns on the same embodiment. 本発明の第2の実施形態に係る撮像装置における再生処理の動作を示すフローチャートである。8 is a flowchart showing an operation of a reproduction process in the image pickup apparatus according to the second embodiment of the present invention.

(第1の実施の形態)
以下、本発明の第1の実施の形態に係る情報処理装置としての撮像装置について説明する。本発明の第1の実施の形態に係る撮像装置100は、図1に示すように、制御部102、メモリ104、操作部106、加速度センサ110、レンズ光学系111、撮像素子112、アナログ/デジタル(A/D:Analogue/digital)変換部113、画像処理部114、オートフォーカス(AF:Auto Focus)制御部115、レンズ駆動部116、表示部120を含んで構成される。撮像装置100は、例えば利用者の頭部に装着され、当該利用者の前方を撮像する。
(First embodiment)
Hereinafter, the image pickup apparatus as the information processing apparatus according to the first embodiment of the present invention will be described. As shown in FIG. 1, the image pickup apparatus 100 according to the first embodiment of the present invention includes a control unit 102, a memory 104, an operation unit 106, an acceleration sensor 110, a lens optical system 111, an image pickup element 112, and an analog/digital unit. It is configured to include an (A/D: Analogue/digital) conversion unit 113, an image processing unit 114, an auto focus (AF: Auto Focus) control unit 115, a lens drive unit 116, and a display unit 120. The imaging device 100 is mounted on, for example, the head of a user and images the front of the user.

制御部102は、CPU(Central Processing Unit)を備え、メモリ104に格納されているプログラムに従ってソフトウェア処理を実行し、撮像装置100が具備する機能である、撮像制御部122、画像取得部124及び姿勢判定部126等を実現する。   The control unit 102 includes a CPU (Central Processing Unit), executes software processing according to a program stored in the memory 104, and is a function included in the imaging apparatus 100. The imaging control unit 122, the image acquisition unit 124, and the posture. The determination unit 126 and the like are realized.

制御部102内の撮像制御部122は、利用者による操作部106の操作等に応じて撮像を制御し、AF制御部115に対して、合焦制御やズーム制御等の撮像制御の指示を行う。画像取得部124は、画像処理部114から入力される画像データであるフレームを取得する。姿勢判定部126は、加速度センサ110からの撮像装置100に生じる加速度に基づいて、撮像装置100の撮像時の方向を判定する。制御部102による撮像時の処理については後述する。   The imaging control unit 122 in the control unit 102 controls imaging according to the user's operation of the operation unit 106 and the like, and instructs the AF control unit 115 to perform imaging control such as focusing control and zoom control. . The image acquisition unit 124 acquires a frame that is image data input from the image processing unit 114. The attitude determination unit 126 determines the direction of the image capturing apparatus 100 at the time of image capturing based on the acceleration generated in the image capturing apparatus 100 from the acceleration sensor 110. The processing at the time of image capturing by the control unit 102 will be described later.

メモリ104は、不揮発性メモリと揮発性メモリとにより構成される。不揮発性メモリは、撮像装置100における制御等に用いられる各種情報(プログラム等)や、後述する撮像時方向の判定結果等を記憶する。一方、揮発性メモリは、例えば、ワークエリアとなる。   The memory 104 is composed of a non-volatile memory and a volatile memory. The non-volatile memory stores various information (programs and the like) used for control and the like in the image pickup apparatus 100, a determination result of an image pickup time direction described later, and the like. On the other hand, the volatile memory serves as a work area, for example.

操作部106は、ユーザの操作内容を入力するために用いられるインタフェースである。操作部106は、例えばユーザが操作するキーを備える。   The operation unit 106 is an interface used to input the operation content of the user. The operation unit 106 includes keys operated by the user, for example.

加速度センサ110は、撮像装置100の移動に伴って生じる加速度を逐次検出する。例えば、加速度センサ110は、3次元空間におけるX軸、Y軸、Z軸の各方向の加速度を検出している。加速度センサ110は、検出した加速度のデータを制御部102へ出力する。加速度のデータはメモリ104に記憶される。なお、この3次元空間におけるX軸が示す方向は、撮像装置100におけるレンズ光学系111の光軸方向に直交した、水平方向(又は左右方向)を示す。また、Y軸が示す方向は、撮像装置100におけるレンズ光学系111の光軸方向に直交した垂直方向(又は上下方向)を示す。更に、Z軸が示す方向は、撮像装置100におけるレンズ光学系111の光軸方向(または前後方向)を示す。   The acceleration sensor 110 sequentially detects the acceleration generated as the imaging device 100 moves. For example, the acceleration sensor 110 detects acceleration in each direction of the X axis, the Y axis, and the Z axis in the three-dimensional space. The acceleration sensor 110 outputs the detected acceleration data to the control unit 102. The acceleration data is stored in the memory 104. The direction indicated by the X-axis in this three-dimensional space is the horizontal direction (or the left-right direction) orthogonal to the optical axis direction of the lens optical system 111 in the imaging device 100. Further, the direction indicated by the Y axis indicates the vertical direction (or the vertical direction) orthogonal to the optical axis direction of the lens optical system 111 in the image pickup apparatus 100. Furthermore, the direction indicated by the Z-axis indicates the optical axis direction (or front-back direction) of the lens optical system 111 in the image pickup apparatus 100.

AF制御部115は、制御部102内の撮像制御部122や画像処理部114による合焦制御やズーム制御等の撮像制御の指示に応じて、レンズ駆動部116を制御する。レンズ駆動部116は、レンズ光学系111を移動させるためのモータを内蔵する。レンズ駆動部116は、AF制御部115の制御に応じて、合焦制御やズーム制御等のためにレンズ光学系111を移動させる。   The AF control unit 115 controls the lens driving unit 116 according to an instruction of image pickup control such as focusing control and zoom control by the image pickup control unit 122 and the image processing unit 114 in the control unit 102. The lens driving unit 116 has a built-in motor for moving the lens optical system 111. The lens drive unit 116 moves the lens optical system 111 for focusing control, zoom control, and the like according to the control of the AF control unit 115.

レンズ光学系111は、ズームレンズ等により構成される。レンズ光学系111は、レンズ駆動部116の制御により移動する。レンズ光学系111の移動によって撮像する際の画角や光学像が制御される。   The lens optical system 111 is composed of a zoom lens or the like. The lens optical system 111 moves under the control of the lens driving unit 116. By moving the lens optical system 111, the angle of view and the optical image at the time of imaging are controlled.

撮像素子112は、受光面に規則的に二次元配列された複数の受光素子やサンプルホールド回路等により構成される。受光素子は、例えば、フォトダイオード、ベイヤー配列のカラーフィルタ、CCD(Charge Coupled Device)、CMOS(Complementary Metal Oxide Semiconductor)等の撮像デバイスである。撮像素子112は、レンズ光学系111を介して入光された光学像を撮像(受光)し、アナログの画像信号をA/D変換部113へ出力する。   The image pickup element 112 is composed of a plurality of light receiving elements regularly arranged two-dimensionally on the light receiving surface, a sample hold circuit, and the like. The light receiving element is an imaging device such as a photodiode, a Bayer array color filter, a CCD (Charge Coupled Device), or a CMOS (Complementary Metal Oxide Semiconductor). The image pickup device 112 picks up (receives) an optical image that has entered through the lens optical system 111, and outputs an analog image signal to the A/D conversion unit 113.

A/D変換部113は、撮像素子112からのアナログ画像信号をデジタルデータに変換して出力する。   The A/D converter 113 converts the analog image signal from the image sensor 112 into digital data and outputs it.

画像処理部114は、カラープロセス回路、JPEG(Joint Photographic Experts Group)回路、デジタルビデオエンコーダ等を含んで構成される。画像処理部114は、A/D変換部113からのデジタルデータを入力して、画像データであるフレームを生成する。画像処理部114は、生成したフレームを制御部102内の画像取得部124へ出力する。また、画像処理部114は、生成したフレームを解析して合焦制御が必要か否かを判定し、必要な場合には、AF制御部115に対して合焦制御の指示を行う。   The image processing unit 114 includes a color process circuit, a JPEG (Joint Photographic Experts Group) circuit, a digital video encoder, and the like. The image processing unit 114 inputs the digital data from the A/D conversion unit 113 and generates a frame which is image data. The image processing unit 114 outputs the generated frame to the image acquisition unit 124 in the control unit 102. Further, the image processing unit 114 analyzes the generated frame to determine whether or not focus control is necessary, and if necessary, instructs the AF control unit 115 to perform focus control.

表示部120は、例えば、LCD(Liquid Crystal Display)、PDP(Plasma Display Panel)、EL(Electro-Luminescence)ディスプレイ等によって構成され、フレームに対応する画像を表示する。   The display unit 120 is composed of, for example, an LCD (Liquid Crystal Display), a PDP (Plasma Display Panel), an EL (Electro-Luminescence) display, or the like, and displays an image corresponding to a frame.

次に、撮像装置100による撮像処理の詳細を説明する。図2は、撮像処理の動作を示すフローチャートである。   Next, the details of the imaging process performed by the imaging device 100 will be described. FIG. 2 is a flowchart showing the operation of the image pickup process.

撮像装置100の電源がオンになり起動すると(ステップS100)。制御部102内の姿勢判定部126は、メモリ104内の不揮発性メモリに予め記憶されている撮像時方向の判定結果を読み出して、撮像時方向判定結果の初期値として設定する(ステップS101)。ここでメモリ104に記憶されている撮像時方向の判定結果は、過去の撮像時方向の判定処理(後述するステップS102の処理)において判定された撮像装置100の撮像時方向のうち、保持することが決定された最新の撮像時方向である。   When the power of the image pickup apparatus 100 is turned on and activated (step S100). The posture determination unit 126 in the control unit 102 reads the determination result of the image capturing direction stored in advance in the nonvolatile memory of the memory 104 and sets it as the initial value of the image capturing direction determination result (step S101). Here, the determination result of the image capturing direction stored in the memory 104 is retained among the image capturing direction of the image capturing apparatus 100 determined in the past image capturing direction determining process (the process of step S102 described later). Is the latest imaging direction determined.

次に、姿勢判定部126は、撮像時方向の判定処理を行う(ステップS102)。図3は、撮像装置100における撮像時方向判定処理の動作を示すフローチャートである。   Next, the posture determination unit 126 performs the determination process of the image capturing direction (step S102). FIG. 3 is a flowchart showing the operation of the image pickup direction determination process in the image pickup apparatus 100.

姿勢判定部126は、加速度センサ110から逐次入力される加速度が安定しているか否かを判定する(ステップS201)。   The posture determination unit 126 determines whether or not the acceleration sequentially input from the acceleration sensor 110 is stable (step S201).

図4及び図5は、撮像装置100に生じる加速度の遷移の一例を示す図である。上述したように、加速度センサ110は、3次元空間におけるX軸、Y軸、Z軸の各方向の加速度を検出している。図4では、X軸方向及びZ軸方向の加速度は0[G]付近で変化が小さく、Y軸方向の加速度は1[G]付近で変化が小さくなっており、安定している。Y軸方向の加速度は1[G]付近であるのはY軸方向に重力加速度が生じているためである。一方、図5では、X軸、Y軸、Z軸の何れの方向も加速度が大きく変化しており、安定しておらず、重力加速度の方向も判別不能である。ステップS201において、姿勢判定部126は、所定時間(例えば100[ms])内における加速度の変化が所定範囲内である場合には、加速度が安定していると判定し、所定範囲を超える場合には、加速度が安定していないと判定する。   4 and 5 are diagrams showing an example of transition of acceleration occurring in the image pickup apparatus 100. As described above, the acceleration sensor 110 detects the acceleration in each direction of the X axis, the Y axis, and the Z axis in the three-dimensional space. In FIG. 4, the accelerations in the X-axis direction and the Z-axis direction are small in the vicinity of 0 [G], and the accelerations in the Y-axis direction are small in the vicinity of 1 [G] and are stable. The acceleration in the Y-axis direction is around 1 [G] because gravitational acceleration occurs in the Y-axis direction. On the other hand, in FIG. 5, the acceleration changes greatly in any of the X-axis, Y-axis, and Z-axis directions and is not stable, and the direction of gravitational acceleration cannot be determined. In step S201, the posture determination unit 126 determines that the acceleration is stable when the change in the acceleration within a predetermined time (for example, 100 [ms]) is within the predetermined range, and when the change exceeds the predetermined range. Determines that the acceleration is not stable.

加速度が安定していない場合(ステップS201;NO)、姿勢判定部126は、撮像時方向が不定である(判定NG)と判定し(ステップS202)、メモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を更新しない(ステップS203)。   When the acceleration is not stable (step S201; NO), the posture determination unit 126 determines that the image capturing direction is indefinite (determination NG) (step S202) and is stored in the nonvolatile memory in the memory 104. The determination result of the image capturing direction is not updated (step S203).

一方、加速度が安定している場合(ステップS201;YES)、次に、姿勢判定部126は、加速度に基づいて、撮像装置100の撮像時方向、具体的には、レンズ光学系111が向いている方向を判定する(ステップS204)。   On the other hand, when the acceleration is stable (step S201; YES), the posture determination unit 126 then determines, based on the acceleration, the image capturing direction of the image capturing apparatus 100, specifically, the lens optical system 111. The direction in which it is located is determined (step S204).

具体的には、姿勢判定部126は、加速度センサ110からの加速度の変化に基づいて重力加速度の方向を判別する。次に、姿勢判定部126は、当該重力加速度の方向を垂直方向、当該重力加速度の方向と直交する方向を水平方向と判別する。更に、姿勢判定部126は、レンズ光学系111についての垂直方向(Y軸方向)の向きを当該垂直方向の加速度に基づいて求めるとともに、水平方向(X軸方向)の向きを当該水平方向の加速度に基づいて求める。この際、姿勢判定部126は、レンズ光学系111が向いている方向が、垂直方向の向き及び水平方向の向きのそれぞれについて、4方向(0°(正立)、90 °(右90°回転)、180°(180°回転)、270°(左90°回転))の何れであるかを判別し、撮像時方向を求める。   Specifically, the posture determination unit 126 determines the direction of gravitational acceleration based on the change in acceleration from the acceleration sensor 110. Next, the posture determination unit 126 determines that the direction of the gravitational acceleration is the vertical direction and the direction orthogonal to the direction of the gravitational acceleration is the horizontal direction. Further, the posture determination unit 126 obtains the vertical direction (Y axis direction) of the lens optical system 111 based on the vertical acceleration, and determines the horizontal direction (X axis direction) of the horizontal acceleration. Based on. At this time, the posture determination unit 126 determines that the lens optical system 111 is oriented in four directions (0° (upright), 90° (rotated 90° right) in each of the vertical direction and the horizontal direction. ), 180° (rotated 180°), 270° (rotated 90° left)), and the image capturing direction is obtained.

次に、姿勢判定部126は、ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果であるか否かを判定する(ステップS205)。具体的には、姿勢判定部126は、撮像時方向判定結果の初期値とステップS204により判定した撮像時方向判定結果とを比較して、同一であるか否かを判定する。   Next, the posture determination unit 126 determines whether the determination result of the image capturing direction determined in step S204 is the same result as the previous image capturing direction (step S205). Specifically, the posture determination unit 126 compares the initial value of the image capturing direction determination result with the image capturing direction determination result determined in step S204 to determine whether they are the same.

ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果である場合(ステップS205;YES)、姿勢判定部126は、同一の結果がn回(例えば、20[ms]周期で5回)以上継続しているか否かを判定する(ステップS206)。例えば、メモリ104内には、ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果となる毎に1増加するカウンタが設けられている。姿勢判定部126は、ステップS205において、ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果であると判定する毎にカウンタを1増加させ、同一の結果でないと判定した場合にはカウンタをリセットする。更に、姿勢判定部126は、ステップS206において、カウンタの値がn以上であるか否かを判定する。   When the determination result of the image capturing direction determined in step S204 is the same result as the previous image capturing direction (step S205; YES), the posture determination unit 126 determines that the same result is n times (for example, 20 [ms]). It is determined whether or not the cycle continues five times or more (step S206). For example, the memory 104 is provided with a counter that increments by 1 each time the determination result in the image capturing direction determined in step S204 is the same as the previous image capturing direction. At step S205, the posture determination unit 126 increments the counter by 1 each time the determination result of the image capturing direction determined at step S204 is the same result as the previous image capturing direction, and determines that the result is not the same. If it does, the counter is reset. Further, the posture determination unit 126 determines in step S206 whether or not the value of the counter is n or more.

同一の結果がn回以上継続している場合(ステップS206;YES)、姿勢判定部126は、撮像時方向が確定している(判定OK)と判定し(ステップS207)、メモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を、ステップS204において判定した撮像時方向の判定結果に更新する(つまり、今回の判定結果として適用する)(ステップS208)。   When the same result continues n times or more (step S206; YES), the posture determination unit 126 determines that the image capturing direction has been determined (determination OK) (step S207), and the nonvolatile state in the memory 104 is determined. The determination result of the imaging direction stored in the property memory is updated to the determination result of the imaging direction determined in step S204 (that is, applied as the determination result of this time) (step S208).

一方、同一の結果がn回以上継続していない場合(ステップS206;NO)、姿勢判定部126は、撮像時方向を判定中である(判定NG)と判定し(ステップS209)、メモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を更新しない(ステップS210)。   On the other hand, when the same result has not continued for n times or more (step S206; NO), the posture determination unit 126 determines that the image capturing direction is being determined (determination NG) (step S209), and the memory 104 is stored. The determination result of the imaging direction stored in the non-volatile memory is not updated (step S210).

また、ステップS204により判定した撮像時方向の判定結果が前回の撮像時方向と同一の結果でない場合(ステップS205;NO)、姿勢判定部126は、撮像時方向判定結果の初期値を、ステップS204により判定した撮像時方向の判定結果に更新する(ステップS211)。   Further, when the determination result of the image capturing direction determined in step S204 is not the same result as the previous image capturing direction (step S205; NO), the posture determination unit 126 sets the initial value of the image capturing direction determination result to step S204. It is updated to the determination result of the imaging time direction determined by (step S211).

次に、姿勢判定部126は、撮像時方向を判定中である(判定NG)と判定し(ステップS212)、メモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を更新しない(ステップS213)。   Next, the posture determination unit 126 determines that the image capturing direction is being determined (determination NG) (step S212), and does not update the image capturing direction determination result stored in the non-volatile memory in the memory 104. (Step S213).

再び、図2に戻って説明する。ステップS102における撮像時方向判定処理の後、制御部102内の撮像制御部122は、利用者によって操作部106が操作されて撮像の要求が行われたか否かを判定する(ステップS103)。   Returning to FIG. 2 again, description will be made. After the imaging time direction determination process in step S102, the imaging control unit 122 in the control unit 102 determines whether or not the user has operated the operation unit 106 to make a request for imaging (step S103).

撮像の要求が行われていない場合(ステップS103;NO)、ステップS102における撮像時方向判定処理が繰り返される。一方、撮像の要求が行われた場合(ステップS103;YES)、画像取得部124は、撮像装置100の姿勢判別のためにメモリ104内の不揮発性メモリに記憶されている撮像時方向の判定結果を取得し、この撮像時方向を採用する(ステップS104)。更に、画像取得部124は、取得した撮像時方向の判定結果を用いて撮像処理を行う(ステップS105)。具体的には、画像取得部124は、取得した撮像時方向の判定結果とフレームとを対応付けてメモリ104に記憶しておく。フレームの再生時には対応付けられた撮像時方向の判定結果を用いてフレームのブレ補正等が行われる。   When the image capturing request is not made (step S103; NO), the image capturing direction determination process in step S102 is repeated. On the other hand, when an image capturing request is made (step S103; YES), the image acquiring unit 124 determines the image capturing direction stored in the non-volatile memory of the memory 104 for determining the attitude of the image capturing apparatus 100. Is acquired, and this imaging direction is adopted (step S104). Further, the image acquisition unit 124 performs an image capturing process using the acquired determination result of the image capturing direction (step S105). Specifically, the image acquisition unit 124 stores the acquired determination result of the image capturing direction and the frame in the memory 104 in association with each other. When the frame is reproduced, the blurring correction or the like of the frame is performed using the determination result of the associated image capturing direction.

その後、制御部102は、利用者による操作部106の操作により、撮像装置100の電源のオフが要求されたか否かを判定する(ステップS106)。電源のオフが要求された場合には(ステップS106;YES)、撮像装置100の電源がオフになり(ステップS107)、一連の動作が終了する。一方、電源のオフが要求されていない場合には(ステップS106;NO)、ステップS102における撮像時方向判定処理が繰り返される。   After that, the control unit 102 determines whether or not the user has operated the operation unit 106 to turn off the power of the imaging device 100 (step S106). When the power-off is requested (step S106; YES), the power of the image pickup apparatus 100 is turned off (step S107), and the series of operations ends. On the other hand, when the power-off is not requested (step S106; NO), the imaging direction determination process in step S102 is repeated.

以上説明したように、第1の実施の形態に係る撮像装置100では、撮像装置100に生じる加速度が安定し、且つ、加速度に基づく撮像時方向の判定結果が同一の結果で継続する場合には、撮像時方向の判定結果が最新のものに更新されて、再生時にフレームのブレ補正等に用いられる。一方、撮像装置100に生じる加速度が安定しない場合や、加速度に基づく撮像時時方向の判定結果が同一の結果で継続しない場合には、撮像時方向の判定結果が更新されず、過去の撮像時方向の判定結果が保持されて、再生時にフレームのブレ補正等に用いられる。   As described above, in the imaging device 100 according to the first embodiment, when the acceleration generated in the imaging device 100 is stable and the determination result of the imaging time direction based on the acceleration continues with the same result, , The determination result of the direction at the time of image capturing is updated to the latest one, and is used for frame blur correction and the like during reproduction. On the other hand, when the acceleration generated in the image capturing apparatus 100 is not stable or when the determination result in the image capturing time direction based on the acceleration does not continue with the same result, the image capturing time direction determination result is not updated, and the previous image capturing time The direction determination result is held and used for frame blur correction and the like during reproduction.

これにより、撮像装置100の姿勢が安定しない間に周期的に撮像が行われる場合においても、過去の撮像時方向の判定結果を用いて再生時にフレームのブレ補正等を行うことができる。   Accordingly, even when images are taken periodically while the posture of the image pickup apparatus 100 is not stable, it is possible to perform the shake correction of the frame at the time of reproduction using the determination result of the past image pickup direction.

(第2の実施の形態)
上記第1の実施の形態では、撮像時に撮像時方向の判定結果をフレームと対応付けてメモリ104に記憶しておくようにしたが、再生時に撮像時方向の判定結果を行うようにしても良い。
(Second embodiment)
In the first embodiment, the image pickup direction determination result is stored in the memory 104 in association with the frame at the time of image pickup, but the image pickup direction determination result may be made at the time of reproduction. .

図6は、この場合の再生処理の動作を示すフローチャートである。当該再生処理は、上記第1の実施の形態の撮像装置100が行うものとするが、第2の実施の形態において機能する回路部は、制御部102、メモリ104、操作部106、表示部120、画像取得部124、及び、姿勢判定部126である。なお、メモリ104の不揮発性メモリには、撮像装置100における制御等に用いられる各種情報(プログラム等)、撮像時方向の判定結果の他、記録された静止画ファイル及び動画ファイルが記録されており、また動画ファイルには、記録時に加速度センサ110で計測され撮影時方向判定処理が適用される前の当該撮像装置100の撮像時方向が、記録経過時間とともに記録されているものとする。   FIG. 6 is a flowchart showing the operation of the reproduction process in this case. The reproduction process is performed by the imaging device 100 according to the first embodiment, but the circuit unit that functions in the second embodiment includes a control unit 102, a memory 104, an operation unit 106, and a display unit 120. The image acquisition unit 124 and the posture determination unit 126. In addition, in the nonvolatile memory of the memory 104, various types of information (programs and the like) used for control and the like in the image capturing apparatus 100, the determination result of the image capturing direction, and recorded still image files and moving image files are recorded. Further, it is assumed that the moving image file stores the image capturing direction of the image capturing apparatus 100 measured by the acceleration sensor 110 at the time of recording and before the image capturing direction determination process is applied, together with the recording elapsed time.

撮像装置100の電源がオンになり操作部106が所定操作を検出すると、再生モードに移行し、制御部102は、メモリ104に記録されている再生対象となる動画ファイルの読み出しを行う(ステップS300)。次いで、制御部102は、この動画ファイルのメタデータとして記録されている撮像時方向データの読み出しを行う(ステップS301)。   When the power of the image pickup apparatus 100 is turned on and the operation unit 106 detects a predetermined operation, the operation mode shifts to the reproduction mode, and the control unit 102 reads the moving image file to be reproduced recorded in the memory 104 (step S300). ). Next, the control unit 102 reads the image capturing time direction data recorded as the metadata of the moving image file (step S301).

そして、制御部102は、操作部106からの再生開始指示を検出するまで待機する(ステップS302)。制御部102は、再生指示を検出しない場合(ステップS303;NO)、ステップS302で待機を継続するが、再生指示を検出すると(ステップS303;YES)、この時点で撮影時方向判定処理を実行する(ステップS304)。   Then, the control unit 102 waits until it detects a reproduction start instruction from the operation unit 106 (step S302). When the reproduction instruction is not detected (step S303; NO), the control unit 102 continues the standby in step S302, but when the reproduction instruction is detected (step S303; YES), the photographing direction determination process is executed at this point. (Step S304).

この撮影時方向判定処理は、上記第1の実施の形態のステップS102及び図3と同様に行われる。但し、上記第1の実施例では姿勢判定部126は、加速度センサ110から逐次入力される加速度が安定しているか否かを判定したが、第2の実施の形態においては、姿勢判定部126は、再生対象の動画ファイルに記録されている加速度情報に基づいて、撮像時の撮像装置100が安定した状態で動画を記録したか否かを判定するものとする。   This photographing direction determination process is performed in the same manner as step S102 and FIG. 3 of the first embodiment. However, in the first embodiment, the posture determination unit 126 determines whether or not the acceleration sequentially input from the acceleration sensor 110 is stable. However, in the second embodiment, the posture determination unit 126 does not Based on the acceleration information recorded in the moving image file to be played back, it is determined whether or not the moving image is recorded in a stable state by the image pickup apparatus 100 at the time of image pickup.

また、第2の実施の形態においても図3のフローチャートを適用するが、このフローチャートにおいて、姿勢判定部126は、加速度センサ110から逐次入力され、動画とともに記録されたX軸、Y軸、Z軸の加速度からなる加速度情報を判定処理に用いることで、再生処理の過程において撮像時方向の判定処理を行うものとする。   The flowchart of FIG. 3 is also applied to the second embodiment, but in this flowchart, the posture determination unit 126 receives X-axis, Y-axis, and Z-axis sequentially input from the acceleration sensor 110 and recorded together with a moving image. By using the acceleration information composed of the acceleration of 1 in the determination process, the determination process of the imaging direction is performed in the process of the reproduction process.

そして、ステップS304における撮像時方向判定処理が終了すると、制御部102は、再生対象フレームに判定結果を反映させて動画再生処理をする(ステップS305)。その後、制御部102は、再生処理が終了したか否かを判定する(ステップS306)。再生処理の終了を検出した場合には(ステップS306;YES)、本処理を終了する。一方、再生処理の終了が要求されていない場合には(ステップS306;NO)、ステップS305における再生処理が継続される。   Then, when the imaging direction determination process in step S304 ends, the control unit 102 reflects the determination result in the reproduction target frame and performs the moving image reproduction process (step S305). After that, the control unit 102 determines whether or not the reproduction process is completed (step S306). When the end of the reproduction process is detected (step S306; YES), this process ends. On the other hand, when the end of the reproduction process is not requested (step S306; NO), the reproduction process in step S305 is continued.

以上、本発明の好ましい実施形態について説明したが、本発明は係る特定の実施形態に限定されるものではなく、本発明には、特許請求の範囲に記載された発明とその均等の範囲が含まれる。以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。   Although the preferred embodiment of the present invention has been described above, the present invention is not limited to the specific embodiment, and the present invention includes the invention described in the claims and an equivalent range thereof. Be done. The inventions described in the initial claims of the present application will be additionally described below.

(付記1)
複数の情報取得時の、夫々の情報取得装置の姿勢に関する情報を取得する姿勢情報取得手段と、
前記姿勢情報取得手段によって取得された前記姿勢に関する情報の内容に応じて、当該情報取得時の姿勢に関する情報として、当該情報取得時以外に取得された情報を適用するよう制御する制御手段と、
を備えることを特徴とする情報処理装置。
(Appendix 1)
Attitude information acquisition means for acquiring information about the attitude of each information acquisition device at the time of acquiring a plurality of information,
According to the content of the information about the posture acquired by the posture information acquisition unit, as the information about the posture at the time of acquiring the information, a control unit that controls to apply the information acquired at a time other than the time of acquiring the information,
An information processing apparatus comprising:

(付記2)
前記姿勢に関する情報は時間的に連続して取得されたものであり、
前記姿勢に関する情報の内容には、時間的に連続して取得された前記姿勢に関する情報の変化が含まれ、
前記制御手段は、前記姿勢に関する情報の変化が所定の条件を満たすか否かに応じて、当該情報取得時以外に取得された情報を適用するよう制御することを特徴とする付記1に記載の情報処理装置。
(Appendix 2)
The information on the posture is obtained continuously in time,
The content of the information regarding the posture includes a change in the information regarding the posture acquired continuously in time,
The control unit controls to apply the information acquired except when the information is acquired, according to whether or not the change in the information on the posture satisfies a predetermined condition. Information processing device.

(付記3)
前記所定の条件とは、前記姿勢に関する情報の変化の度合いが所定の範囲内であることを特徴とする付記2に記載の情報処理装置。
(Appendix 3)
The information processing apparatus according to appendix 2, wherein the predetermined condition is that the degree of change in the information regarding the posture is within a predetermined range.

(付記4)
前記情報取得装置が安定している時の前記姿勢に関する情報を保持する保持手段を更に備え、
前記制御手段は、前記姿勢に関する情報の変化が所定の条件を満たさないと判断したとき、当該情報取得時以外に取得された情報として、前記保持手段に保持された姿勢に関する情報を適用するよう制御することを特徴とする付記2に記載の情報処理装置。
(Appendix 4)
Further comprising holding means for holding information regarding the posture when the information acquisition device is stable,
When the control unit determines that the change in the information regarding the posture does not satisfy a predetermined condition, the control unit applies the information regarding the posture held by the holding unit as the information acquired at a time other than the time when the information is acquired. The information processing apparatus according to appendix 2, wherein:

(付記5)
前記複数の情報を取得する取得手段を更に備えるとともに、前記姿勢情報取得手段は、当該取得手段による複数の情報の取得時の、夫々の当該情報取得装置の姿勢に関する情報を検出する検出手段を含むことを特徴とする付記4に記載の情報処理装置。
(Appendix 5)
The attitude information acquiring means further includes an acquiring means for acquiring the plurality of information, and the attitude information acquiring means includes a detecting means for detecting information about the attitude of each of the information acquiring devices at the time of acquiring the plurality of information by the acquiring means. The information processing apparatus according to appendix 4, characterized in that.

(付記6)
前記取得手段は、撮像手段を含むことを特徴とする付記5に記載の情報処理装置。
(Appendix 6)
The information processing apparatus according to appendix 5, wherein the acquisition unit includes an imaging unit.

(付記7)
前記撮像手段は、所定の周期で撮像を行うことを特徴とする付記6に記載の情報処理装置。
(Appendix 7)
7. The information processing apparatus according to appendix 6, wherein the image capturing unit captures an image at a predetermined cycle.

(付記8)
前記保持手段は、前記撮像手段により所定の周期で撮像された画像に対応づけて前記姿勢に関する情報を保持することを特徴とする付記7に記載の情報処理装置。
(Appendix 8)
8. The information processing apparatus according to appendix 7, wherein the holding unit holds information regarding the posture in association with an image captured by the image capturing unit in a predetermined cycle.

(付記9)
複数の情報取得時の、夫々の情報取得装置の姿勢に関する情報を取得する姿勢情報取得ステップと、
前記姿勢情報取得ステップにて取得された前記姿勢に関する情報の内容に応じて、当該情報取得時の姿勢に関する情報として、当該情報取得時以外に取得された情報を適用するよう制御する制御ステップと、
を含むことを特徴とする情報処理方法。
(Appendix 9)
An attitude information acquisition step of acquiring information about the attitude of each information acquisition device at the time of acquiring a plurality of information;
Depending on the content of the information regarding the posture acquired in the posture information acquisition step, as the information regarding the posture at the time of acquiring the information, a control step of controlling to apply the information obtained at a time other than the time of acquiring the information,
An information processing method comprising:

(付記10)
前記姿勢に関する情報は時間的に連続して取得されたものであり、
前記姿勢に関する情報の内容には、時間的に連続して取得された前記姿勢に関する情報の変化が含まれ、
前記制御ステップは、前記姿勢に関する情報の変化が所定の条件を満たすか否かに応じて、当該情報取得時以外に取得された情報を適用するよう制御することを特徴とする付記9に記載の情報処理方法。
(Appendix 10)
The information regarding the posture is obtained continuously in time,
The content of the information on the posture includes a change in the information on the posture acquired continuously in time,
The control step is controlled to apply information acquired at a time other than when the information is acquired, according to whether or not a change in the information on the posture satisfies a predetermined condition. Information processing method.

(付記11)
前記所定の条件とは、前記姿勢に関する情報の変化の度合いが所定の範囲内であることを特徴とする付記10に記載の情報処理方法。
(Appendix 11)
11. The information processing method according to appendix 10, wherein the predetermined condition is that the degree of change in information regarding the posture is within a predetermined range.

(付記12)
前記情報取得装置が安定している時の前記姿勢に関する情報を保持する保持ステップを更に含み、
前記制御ステップは、前記姿勢に関する情報の変化が所定の条件を満たさないと判断したとき、当該情報取得時以外に取得された情報として、前記保持ステップにて保持された姿勢に関する情報を適用するよう制御することを特徴とする付記10に記載の情報処理方法。
(Appendix 12)
Further comprising a holding step of holding information regarding the posture when the information acquisition device is stable,
When it is determined that the change in the information on the posture does not satisfy a predetermined condition, the control step applies the information on the posture held in the holding step as the information acquired except when the information is acquired. 11. The information processing method according to appendix 10, characterized by controlling.

(付記13)
前記複数の情報を取得する取得ステップを更に含むとともに、前記姿勢情報取得ステップは、当該取得ステップにおける複数の情報の取得時の、夫々の当該情報取得装置の姿勢に関する情報を検出する検出ステップを含むことを特徴とする付記12に記載の情報処理方法。
(Appendix 13)
The method further includes an acquisition step of acquiring the plurality of pieces of information, and the attitude information acquisition step includes a detection step of detecting information regarding the attitude of each of the information acquisition devices at the time of acquisition of the plurality of information in the acquisition step. 13. The information processing method according to appendix 12, which is characterized in that

(付記14)
コンピュータを、
複数の情報取得時の、夫々の情報取得装置の姿勢に関する情報を取得する姿勢情報取得手段、
前記姿勢情報取得手段によって取得された前記姿勢に関する情報の内容に応じて、当該情報取得時の姿勢に関する情報として、当該情報取得時以外に取得された情報を適用するよう制御する制御手段、
として機能させることを特徴とするプログラム。
(Appendix 14)
Computer,
Attitude information acquisition means for acquiring information about the attitude of each information acquisition device at the time of acquiring a plurality of information,
According to the content of the information about the attitude acquired by the attitude information acquisition unit, as the information about the attitude at the time of acquiring the information, a control unit that controls to apply the information acquired at a time other than the time of acquiring the information,
A program characterized by making it function as.

(付記15)
前記姿勢に関する情報は時間的に連続して取得されたものであり、
前記姿勢に関する情報の内容には、時間的に連続して取得された前記姿勢に関する情報の変化が含まれ、
前記制御手段は、前記姿勢に関する情報の変化が所定の条件を満たすか否かに応じて、当該情報取得時以外に取得された情報を適用するよう制御することを特徴とする付記14に記載のプログラム。
(Appendix 15)
The information regarding the posture is obtained continuously in time,
The content of the information on the posture includes a change in the information on the posture acquired continuously in time,
15. The control unit controls to apply the information acquired except when the information is acquired, according to whether or not the change in the information on the posture satisfies a predetermined condition. program.

(付記16)
前記所定の条件とは、前記姿勢に関する情報の変化の度合いが所定の範囲内であることを特徴とする付記15に記載のプログラム。
(Appendix 16)
16. The program according to appendix 15, wherein the predetermined condition is that the degree of change in the information regarding the posture is within a predetermined range.

(付記17)
前記情報取得装置が安定している時の前記姿勢に関する情報を保持する保持手段として更に機能し、
前記制御手段は、前記姿勢に関する情報の変化が所定の条件を満たさないと判断したとき、当該情報取得時以外に取得された情報として、前記保持手段に保持された姿勢に関する情報を適用するよう制御することを特徴とする付記15に記載のプログラム。
(Appendix 17)
The information acquisition device further functions as a holding unit that holds information about the posture when the device is stable,
When the control unit determines that the change in the information regarding the posture does not satisfy a predetermined condition, the control unit applies the information regarding the posture held by the holding unit as the information acquired at a time other than the time when the information is acquired. 16. The program according to appendix 15, characterized by:

(付記18)
前記複数の情報を取得する取得手段として更に機能させるとともに、前記姿勢情報取得手段は、当該取得手段による複数の情報の取得時の、夫々の当該情報取得装置の姿勢に関する情報を検出する検出手段として更に機能することを特徴とする付記17に記載のプログラム。
(Appendix 18)
While further functioning as an acquisition unit that acquires the plurality of information, the posture information acquisition unit serves as a detection unit that detects information regarding the posture of each of the information acquisition devices when the plurality of information is acquired by the acquisition unit. 18. The program according to appendix 17, which further functions.

100…撮像装置、102…制御部、104…メモリ、106…操作部、110…加速度センサ、111…レンズ光学系、112…撮像素子、113…アナログ/デジタル変換部、114…画像処理部、115…オートフォーカス制御部、116…レンズ駆動部、120…表示部、122…撮像制御部、124…画像取得部、126…姿勢判定部 100... Imaging device, 102... Control part, 104... Memory, 106... Operation part, 110... Acceleration sensor, 111... Lens optical system, 112... Imaging element, 113... Analog/digital conversion part, 114... Image processing part, 115 ... auto-focus control section, 116... lens drive section, 120... display section, 122... imaging control section, 124... image acquisition section, 126... posture determination section

Claims (7)

重力加速度を含む3次元空間の各方向の加速度の変化を逐次検出する加速度検出手段と、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、前記各方向の加速度が安定しているか否かを判定する判定手段と、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、情報取得装置の姿勢に関する情報に含まれる前記重力加速度に基づき、撮像時方向である水平方向と垂直方向を判定する方向判定手段と、
前記方向判定手段の判定結果を保持する保持手段と、
前記判定手段によって安定していると判定され、前記方向判定手段による判定結果が前記保持手段に保持されている前回の判定結果と所定時間にわたって同じ場合は、前記保持されている前回の判定結果を今回の判定結果に更新して、前記今回の判定結果を適用し、前記判定手段によって安定していないと判定された場合は、前記保持手段に保持されている前回の判定結果を更新せずに、前記前回の判定結果を適用するよう制御する制御手段と、
撮像部により情報を取得する情報取得手段と、
前記情報取得手段による情報取得時に前記保持手段に保持されている判定結果を取得するよう制御する取得制御手段と、
を備えることを特徴とする情報処理装置。
Acceleration detecting means for sequentially detecting a change in acceleration in each direction of a three-dimensional space including gravitational acceleration;
From the magnitude of the change in acceleration in each direction detected by the acceleration detection means, a determination means for determining whether or not the acceleration in each direction is stable,
From the magnitude of change in the acceleration in each direction detected by the acceleration detecting means,-out based on the gravitational acceleration included in the information about the attitude information acquisition device, it determines the horizontal and vertical Direction is the direction during imaging Direction determining means to
Holding means for holding the determination result of the direction determining means,
When it is determined that the determination means is stable and the determination result by the direction determination means is the same as the previous determination result held in the holding means for a predetermined time , the held previous determination result is If the determination result is updated to the current determination result and the determination result is not stable, the previous determination result held in the holding unit is not updated. , Control means for controlling to apply the previous determination result ,
An information acquisition means for acquiring information by the imaging unit,
Acquisition control means for controlling to acquire the determination result held in the holding means when the information is acquired by the information acquisition means,
An information processing apparatus comprising:
前記情報取得手段により取得された情報と、前記取得制御手段により取得された判定結果とを対応づけて記憶手段に記憶させる記憶制御手段を更に備えることを特徴とする請求項に記載の情報処理装置。 The information processing according to claim 1 , further comprising a storage control unit that stores the information acquired by the information acquisition unit and the determination result acquired by the acquisition control unit in a storage unit in association with each other. apparatus. 前記判定手段は、前記加速度検出手段によって検出された各方向の加速度の変化により前記重力加速度の方向が判定不能になった場合に、前記各方向の加速度が安定していないと判定することを特徴とする請求項1又は2に記載の情報処理装置。 The determining means determines that the acceleration in each direction is not stable when the direction of the gravitational acceleration cannot be determined due to a change in acceleration in each direction detected by the acceleration detecting means. The information processing device according to claim 1 or 2 . 前記判定手段は、前記加速度検出手段によって検出された各方向の加速度の変化が所定の範囲を超えた場合に、前記各方向の加速度が安定していないと判定することを特徴とする請求項1乃至の何れか1項に記載の情報処理装置。 The determination means determines that the acceleration in each direction is not stable when the change in the acceleration in each direction detected by the acceleration detection means exceeds a predetermined range. 4. The information processing device according to any one of 3 to 3 . 前記方向判定手段による判定結果が前記保持手段に保持されている前回の判定結果と同じ場合、その同じと判定された回数をカウントするカウント手段を更に備え、
前記制御手段は、前記カウント手段によってカウントされた判定結果の回数に基づいて、前記保持手段に保持されている前回の判定結果の更新を制御することを特徴とする請求項1乃至の何れか1項に記載の情報処理装置。
When the determination result by the direction determining means is the same as the previous determination result held in the holding means, further comprising a counting means for counting the number of times determined to be the same,
Said control means, based on the number of times counted by the determination result by said counting means, any one of claims 1 to 4, characterized in that to control the updating of the previous determination result held in said holding means The information processing device according to item 1.
重力加速度を含む3次元空間の各方向の加速度の変化を検出する加速度検出部を備える情報処理装置が実行する情報処理方法であって、
前記加速度検出部に対し逐次加速度検出させる加速度検出ステップと、
前記加速度検出ステップにて検出された各方向の加速度の変化の大きさから、前記各方向の加速度が安定しているか否かを判定する判定ステップと、
前記加速度検出ステップにて検出された各方向の加速度の変化の大きさから、情報取得装置の姿勢に関する情報に含まれる前記重力加速度に基づき、撮像時方向である水平方向と垂直方向を判定する方向判定ステップと、
前記方向判定ステップによる判定結果を保持部に保持させる保持ステップと、
前記判定ステップにて安定していると判定され、前記方向判定ステップの判定結果が前記保持ステップにて保持されている前回の判定結果と所定時間にわたって同じ場合は、前記保持されている前回の判定結果を今回の判定結果に更新して、前記今回の判定結果を適用し、前記判定ステップにて安定していないと判定された場合は、前記保持されている前回の判定結果を更新せずに、前記前回の判定結果を適用するよう制御する制御ステップと、
撮像部により情報を取得する情報取得ステップと、
前記情報取得ステップによる情報取得時に前記保持ステップにより保持されている判定結果を取得するよう制御する取得制御ステップと、
を含むことを特徴とする情報処理方法。
An information processing method executed by an information processing device including an acceleration detection unit that detects a change in acceleration in each direction of a three-dimensional space including gravitational acceleration,
An acceleration detection step of sequentially detecting acceleration by the acceleration detection unit;
From the magnitude of the change in acceleration in each direction detected in the acceleration detection step, a determination step of determining whether or not the acceleration in each direction is stable,
From the magnitude of variation of said acceleration detecting acceleration in each direction detected in step-out based on the gravitational acceleration included in the information about the attitude information acquisition device, the horizontal and vertical Direction is the direction during imaging A direction determining step for determining,
A holding step of holding the determination result of the direction determination step in a holding part,
If the determination result of the direction determination step is stable in the determination step and the determination result of the direction determination step is the same as the previous determination result held in the holding step for a predetermined time , the previous determination held Update the result to this time's judgment result, apply this time's judgment result, and if it is judged in the judgment step that it is not stable, do not update the held previous judgment result. , A control step of controlling to apply the previous determination result ,
An information acquisition step of acquiring information by the imaging unit,
An acquisition control step of controlling to acquire the determination result held by the holding step when the information is acquired by the information acquisition step,
An information processing method comprising:
重力加速度を含む3次元空間の各方向の加速度の変化を検出する加速度検出部を備える情報処理装置が備えるコンピュータを、
前記加速度検出部に対し逐次加速度検出させる加速度検出手段、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、前記各方向の加速度が安定しているか否かを判定する判定手段、
前記加速度検出手段によって検出された各方向の加速度の変化の大きさから、情報取得装置の姿勢に関する情報に含まれる前記重力加速度に基づき、撮像時方向である水平方向と垂直方向を判定する方向判定手段、
前記方向判定手段による判定結果を保持部に保持させる保持手段、
前記判定手段によって安定していると判定され、前記方向判定手段の判定結果が前記保持手段にて保持されている前回の判定結果と所定時間にわたって同じ場合は、前記保持されている前回の判定結果を今回の判定結果に更新して、前記今回の判定結果を適用し、前記判定手段によって安定していないと判定された場合は、前記保持されている前回の判定結果を更新せずに、前記前回の判定結果を適用するよう制御する制御手段、
撮像部により情報を取得する情報取得手段、
前記情報取得手段による情報取得時に前記保持手段に保持されている判定結果を取得するよう制御する取得制御手段、
として機能させることを特徴とするプログラム。
A computer provided with an information processing apparatus including an acceleration detection unit that detects a change in acceleration in each direction of a three-dimensional space including gravitational acceleration,
Acceleration detecting means for sequentially detecting acceleration by the acceleration detecting section;
Determination means for determining whether or not the acceleration in each direction is stable from the magnitude of the change in acceleration in each direction detected by the acceleration detection means,
From the magnitude of change in the acceleration in each direction detected by the acceleration detecting means,-out based on the gravitational acceleration included in the information about the attitude information acquisition device, it determines the horizontal and vertical Direction is the direction during imaging Direction determining means,
Holding means for holding the determination result by the direction determining means in a holding portion,
If the determination result of the determination unit is stable and the determination result of the direction determination unit is the same as the previous determination result held by the holding unit for a predetermined time , the previous determination result held To the determination result of this time, the determination result of this time is applied, and when it is determined that the determination means is not stable, the previous determination result held is not updated, Control means for controlling to apply the previous judgment result ,
Information acquisition means for acquiring information by the imaging unit,
Acquisition control means for controlling to acquire the determination result held in the holding means at the time of information acquisition by the information acquisition means,
A program characterized by making it function as.
JP2016175620A 2015-11-18 2016-09-08 Information processing apparatus, information processing method, and program Active JP6702100B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US15/268,999 US10097758B2 (en) 2015-11-18 2016-09-19 Data processing apparatus, data processing method, and recording medium
CN201610898792.8A CN106973214B (en) 2015-11-18 2016-10-14 Data processing equipment and data processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015226104 2015-11-18
JP2015226104 2015-11-18

Publications (2)

Publication Number Publication Date
JP2017098940A JP2017098940A (en) 2017-06-01
JP6702100B2 true JP6702100B2 (en) 2020-05-27

Family

ID=58817442

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016175620A Active JP6702100B2 (en) 2015-11-18 2016-09-08 Information processing apparatus, information processing method, and program

Country Status (2)

Country Link
JP (1) JP6702100B2 (en)
CN (1) CN106973214B (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018193895A1 (en) 2017-04-17 2018-10-25 株式会社ブリヂストン Vibration dampening device

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04277728A (en) * 1991-03-06 1992-10-02 Nikon Corp Vibration-proof device for camera
JP5920863B2 (en) * 2011-06-03 2016-05-18 株式会社ソニー・インタラクティブエンタテインメント Image processing device
CN103621056A (en) * 2011-06-23 2014-03-05 株式会社尼康 Imaging device
US20150181123A1 (en) * 2013-12-19 2015-06-25 Lyve Minds, Inc. Image orientation adjustment based on camera orientation
CN104750969B (en) * 2013-12-29 2018-01-26 刘进 The comprehensive augmented reality information superposition method of intelligent machine
CN104978476B (en) * 2014-04-14 2019-06-25 李巍岳 Indoor map scene, which is carried out, using smart phone mends the method surveyed

Also Published As

Publication number Publication date
JP2017098940A (en) 2017-06-01
CN106973214B (en) 2019-12-03
CN106973214A (en) 2017-07-21

Similar Documents

Publication Publication Date Title
JP4341613B2 (en) Control apparatus, photographing apparatus, photographing apparatus control method, and control program
JP5014661B2 (en) Imaging device
JP6312460B2 (en) IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
US10097758B2 (en) Data processing apparatus, data processing method, and recording medium
JP6548211B2 (en) Imaging apparatus and imaging method
US9621799B2 (en) Imaging apparatus
JP6702100B2 (en) Information processing apparatus, information processing method, and program
JP2014016451A (en) Imaging device, method for calculating camera shake correction amount, and program for calculating camera shake correction amount
JP5735759B2 (en) IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
JP2012013778A (en) Imaging apparatus
JP2007147803A (en) Imaging apparatus, control method and control program
JP2012095206A (en) Imaging device and control method of the same
JP5423204B2 (en) Imaging device
JP2009171362A (en) Photographing apparatus, and photographing method
JP2004271693A (en) Digital camera
JP2011193329A (en) Image pickup device
JP4876952B2 (en) Camera shake correction apparatus and program
JP6833381B2 (en) Imaging equipment, control methods, programs, and storage media
US20240022706A1 (en) Evaluation method of image blur correction capability of image capturing apparatus, image capturing apparatus, and recording medium
JP2009081780A (en) Camera apparatus
JP2008257033A (en) Camera, lens barrel, manufacturing method for camera, and manufacturing method for lens barrel
JP2009300784A (en) Camera shake correction device and camera shake correction method, and imaging device
JP2007194813A (en) Imaging apparatus, control method, and control program
JP2009244434A (en) Camera shake preventing device, electronic device, camera shake preventing method and camera shake preventing program
JP2007181177A (en) Controller, photographing equipment, control method of photographing equipment, and control program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180703

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190516

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190521

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190722

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200129

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200407

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200420

R150 Certificate of patent or registration of utility model

Ref document number: 6702100

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150