WO2018088042A1 - 情報処理装置 - Google Patents

情報処理装置 Download PDF

Info

Publication number
WO2018088042A1
WO2018088042A1 PCT/JP2017/034515 JP2017034515W WO2018088042A1 WO 2018088042 A1 WO2018088042 A1 WO 2018088042A1 JP 2017034515 W JP2017034515 W JP 2017034515W WO 2018088042 A1 WO2018088042 A1 WO 2018088042A1
Authority
WO
WIPO (PCT)
Prior art keywords
acceleration
detection
unit
information processing
processing apparatus
Prior art date
Application number
PCT/JP2017/034515
Other languages
English (en)
French (fr)
Inventor
功誠 山下
秀年 椛澤
象 村越
智宏 松本
雅博 瀬上
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US16/349,171 priority Critical patent/US20190265270A1/en
Priority to JP2018550055A priority patent/JP6888632B2/ja
Priority to CN201780067485.8A priority patent/CN109906425B/zh
Publication of WO2018088042A1 publication Critical patent/WO2018088042A1/ja

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116Determining posture transitions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1123Discriminating type of movement, e.g. walking or running
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • G01P15/02Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses
    • G01P15/08Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values
    • G01P15/09Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values by piezoelectric pick-up
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • G01P15/02Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses
    • G01P15/08Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values
    • G01P15/12Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values by alteration of electrical resistance
    • G01P15/123Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values by alteration of electrical resistance by piezo-resistive elements, e.g. semiconductor strain gauges
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • G01P15/18Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration in two or more dimensions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • G01P15/02Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses
    • G01P15/08Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values
    • G01P2015/0805Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values being provided with a particular type of spring-mass-system for defining the displacement of a seismic mass due to an external acceleration
    • G01P2015/0822Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values being provided with a particular type of spring-mass-system for defining the displacement of a seismic mass due to an external acceleration for defining out-of-plane movement of the mass
    • G01P2015/084Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values being provided with a particular type of spring-mass-system for defining the displacement of a seismic mass due to an external acceleration for defining out-of-plane movement of the mass the mass being suspended at more than one of its sides, e.g. membrane-type suspension, so as to permit multi-axis movement of the mass
    • G01P2015/0842Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration by making use of inertia forces using solid seismic masses with conversion into electric or magnetic values being provided with a particular type of spring-mass-system for defining the displacement of a seismic mass due to an external acceleration for defining out-of-plane movement of the mass the mass being suspended at more than one of its sides, e.g. membrane-type suspension, so as to permit multi-axis movement of the mass the mass being of clover leaf shape

Definitions

  • This technology relates to an information processing device applied to, for example, user behavior recognition technology.
  • a behavior recognition technique for recognizing a user's behavior using a detection value of an acceleration sensor or the like mounted on a mobile device or a wearable device that is carried or worn by the user has been developed (see, for example, Patent Document 1). It is assumed that such a mobile device or wearable device is carried around by putting the mobile device in a trouser pocket, for example, a wristband type wearable device, etc. There are many things.
  • an object of the present technology is to provide an information processing apparatus that can accurately grasp the movement of a detection target even when a sensor having a variable distance between the detection target and the sensor is carried. There is.
  • An information processing apparatus includes a control unit.
  • the controller controls the dynamic acceleration with respect to the static acceleration component based on the dynamic acceleration component and the static acceleration component of the detection target extracted from the acceleration in the three-axis direction of the detection target moving in space.
  • the time change of the component is calculated, and the movement of the detection target is determined based on the time change of the dynamic acceleration component.
  • control unit is configured to calculate a time change of the dynamic acceleration component with respect to the static acceleration component of the acceleration, and determine a motion of the detection target based on the time change of the dynamic acceleration component. Therefore, the movement of the detection target can be grasped more accurately.
  • the control unit may include a calculation unit and a pattern recognition unit.
  • the calculation unit calculates a normalized dynamic acceleration obtained by normalizing the dynamic acceleration component in the direction of gravity.
  • the pattern recognition unit determines the movement of the detection target based on the normalized dynamic acceleration.
  • the calculation unit may further calculate the posture angle of the detection target based on information related to the angular velocity around the three axes.
  • the pattern recognition unit determines the movement of the detection target based on the normalized dynamic acceleration and the posture angle.
  • the pattern recognition unit may be configured to determine the action class of the detection target based on the movement of the detection target.
  • the information processing apparatus may further include a detection unit that is attached to the detection target and detects the acceleration.
  • the detection unit may include an acceleration calculation unit.
  • the acceleration calculation unit is based on a first detection signal having an AC waveform corresponding to the acceleration and a second detection signal having an output waveform in which an AC component corresponding to the acceleration is superimposed on a DC component.
  • a dynamic acceleration component and a static acceleration component are extracted for each of the three axis directions.
  • the acceleration calculation unit may include a calculation circuit that extracts the static acceleration component from the acceleration based on a difference signal between the first detection signal and the second detection signal.
  • the acceleration calculation unit may further include a gain adjustment circuit that adjusts the gain of each signal so that the first detection signal and the second detection signal have the same level.
  • the acceleration calculation unit further includes a correction circuit that calculates a correction coefficient based on the difference signal and corrects one of the first detection signal and the second detection signal using the correction coefficient. May be.
  • the detection unit may be configured to be portable to the detection target without being fixed.
  • the detection unit may include a sensor element.
  • the sensor element includes an element main body having a movable portion that can move by receiving an acceleration, and a piezoelectric type first that outputs a first detection signal including information related to acceleration in three axial directions acting on the movable portion. And a non-piezoelectric second acceleration detection unit that outputs a second detection signal including information related to the acceleration in the three-axis directions acting on the movable unit.
  • the second acceleration detection unit may include a piezoresistive acceleration detection element provided in the movable unit.
  • the second acceleration detection unit may include a capacitance type acceleration detection element provided in the movable unit.
  • FIG. 1 is a block diagram illustrating a schematic configuration of an action pattern recognition system according to an embodiment of the present technology.
  • FIG. 2 is a schematic diagram illustrating an application example of the behavior pattern recognition system.
  • the behavior pattern recognition system 1 includes a sensor device 1A having a detection unit 40 and a control unit 50 and a terminal device 1B having a display unit 407, as shown in FIG.
  • the behavior pattern recognition system 1 is configured to record or display, for example, a behavior history of a detection target as a kinematic physical quantity of the detection target that moves in space.
  • the sensor device 1A is configured to be non-fixable to a detection target and portable.
  • the terminal device 1B is configured to be able to communicate with the sensor device 1A wirelessly or by wire, and is typically configured by a portable information terminal such as a smart phone, a mobile phone, or a notebook PC (personal computer).
  • the sensor device 1A is used to detect the movement of the detection target.
  • a detection unit and a controller mounted on the sensor device 1A may be mounted on the terminal device 1B.
  • the pendant head of the pendant 3 that is placed on the neck of the user to be detected is the sensor device 1A.
  • the sensor device 1 ⁇ / b> A is carried by the user unfixed so that the distance from the detection target can be changed by shaking with the user's movement.
  • the sensor device 1A is configured to extract a kinematic physical quantity to be detected at predetermined time intervals or continuously and transmit it to the terminal device 1B.
  • information (behavior history) in which an action class, position information, and time information as kinematic physical quantities are associated is transmitted from the sensor device 1A to the terminal device 1B.
  • the terminal device 1B is configured to record and notify the user of the action class, position information, and time information acquired from the sensor device 1A.
  • the action class for example, the user's walking motion, running motion, stationary state, jumping motion, boarding or non-boarding of a train, boarding of an elevator or escalator, etc. Status, working status, etc.
  • the information transmitted to the terminal device 1B is recorded by the terminal device 1B and can be displayed so that the user can visually recognize it in a desired display form.
  • a of sensor devices are provided with the housing
  • the detecting unit 40 detects speed-related information and angular velocity related to a temporal change in velocity in the directions of three orthogonal axes (x, y, and z axes in FIG. 7) of the local coordinate system.
  • the control unit 50 calculates the kinematic physical quantity of the user from the detected speed-related information and the angular velocity, generates this kinematic physical quantity as a control signal, and outputs it. Specifically, in the present embodiment, the control unit 50 detects the user's behavior pattern from the speed-related information and the angular velocity information, determines the behavior pattern using a determination model generated in advance, and classifies the classification. (Pattern recognition)
  • the method for carrying the sensor device 1A is not limited to this embodiment.
  • the sensor device may be attached to a neck-type holder.
  • the sensor device 1A may be carried in a shirt chest pocket or a bag always held by the user.
  • the function of the sensor device may be incorporated in a mobile terminal such as a smart phone.
  • the terminal device 1B has a display unit 407 and can display a user's action history and the like on the display unit 407 based on the control signal.
  • FIG. 3 is a system configuration diagram of the behavior pattern recognition system 1
  • FIG. 4 is a block diagram showing a basic configuration of its main part.
  • the behavior pattern recognition system 1 includes a sensor device 1A and a terminal device 1B.
  • the sensor device 1A includes a detection unit 40, a control unit 50, a transmission / reception unit 101, an internal power supply 102, a memory 103, and a power switch (not shown).
  • the detection unit 40 is an inertial sensor having the inertial sensor unit 2 and the controller 20.
  • the inertial sensor unit 2 has an acceleration sensor element 10 and an angular velocity sensor element 30.
  • the acceleration sensor element 10 detects acceleration in three orthogonal directions (x, y, and z axes in FIG. 7) in the local coordinate system.
  • the angular velocity sensor element 30 detects the angular velocity around the three axes.
  • the controller 20 processes the output from the inertial sensor unit 2.
  • the acceleration sensor and the angular velocity sensor of each axis are individually configured.
  • the present invention is not limited to this, and the acceleration sensor and the angular velocity sensor are single sensors that can simultaneously detect acceleration and angular velocity in three axes.
  • the sensor may be used.
  • the angular velocity may be detected using the acceleration sensor element 10 without providing the angular velocity sensor element 30.
  • dynamic acceleration components Acc-x, Acc-y, Acc-z
  • Static acceleration components Gr-x, Gr-y, Gr-z
  • angular velocity signals ⁇ -x, ⁇ -y, ⁇ -z
  • the controller 20 In the detection unit 40, the controller 20 generates an acceleration detection signal including a dynamic acceleration component and a static acceleration component around the three axes of the sensor device 1A detected from the acceleration sensor element 10 by the controller 20.
  • x, Acc-y, Acc-z) and static acceleration components Gr-x, Gr-y, Gr-z. Details of the configuration of the acceleration sensor element 10 and the separation of the dynamic velocity component and the static acceleration component performed by the controller 20 will be described later.
  • the detection unit 40 sends the controller 20 to the controller 20 based on the angular velocity detection signals (Gyro-x, Gyro-y, Gyro-z) around the three axes of the user U (sensor device 1A) detected from the angular velocity sensor element 30.
  • the angular velocity signals ( ⁇ -x, ⁇ -y, ⁇ -z) around the three axes are calculated respectively.
  • the angular velocity sensor element 30 detects angular velocities around the x, y, and z axes (hereinafter also referred to as angular velocity components in the local coordinate system).
  • a vibration type gyro sensor is typically used. However, other than this, a rotary top gyro sensor, a laser ring gyro sensor, a gas rate gyro sensor, or the like may be used.
  • the control unit 50 Based on the dynamic acceleration component and the static acceleration component of the detection target extracted from the acceleration in the three-axis direction of the detection target (pendant 3) that moves in space, the control unit 50 The time change of the dynamic acceleration component is calculated, and the movement of the detection target is determined based on the time change of the dynamic acceleration component.
  • control unit 50 uses a learning model obtained by supervised learning based on the velocity-related information including the dynamic acceleration component and the static acceleration component output from the detection unit 40 and the angular velocity signal. Using the recognized pattern recognition, the user's behavior pattern is classified and the behavior class is determined.
  • supervised learning for example, there are learning methods using learning models such as template matching, NN (Neural Network), HMM (Hidden Markov Model).
  • NN Neuron
  • HMM Hidden Markov Model
  • supervised learning learning data of a category belonging to (belonging to) a class is given for each class by giving information called a correct answer label to which class learning data (data used for learning) belongs. Learning is done.
  • supervised learning learning data used for learning is prepared for each predetermined category, and a learning model used for learning (a learning model for learning learning data of each category) is also determined in a predetermined class. Prepared for each.
  • pattern recognition using a learning model obtained by supervised learning for a certain recognition target data, a correct template label that best matches the recognition target data is output as a recognition result.
  • pattern recognition processing using a learning model teaching data that is a set of input data and output data to be subjected to learning processing is prepared in advance.
  • the control unit 50 includes an attitude angle calculation unit 51, a vector rotation unit 52 (calculation unit), a pattern recognition unit 53, a time information acquisition unit 54, a position sensor 55, and a GIS information acquisition unit 56. Yes.
  • the attitude angle calculation unit 51 calculates the rotation angle components ( ⁇ x , ⁇ y , ⁇ z ) from the angular velocity components ( ⁇ x , ⁇ y , ⁇ z ) in the local coordinate system output from the angular velocity sensor element 30, and Is output to the vector rotation unit 52.
  • the vector rotation unit 52 rotates the input dynamic acceleration components (Acc-x, Acc-y, Acc-z) and rotation angle components ( ⁇ x , ⁇ y , ⁇ z ) with respect to the direction of gravity as a reference.
  • Normalized dynamic acceleration motion acceleration
  • normalized posture angle that is a posture angle that is not affected by gravity are calculated and pattern recognition is performed.
  • the normalized dynamic acceleration and the normalized posture angle are information related to the user's motion in which the component related to the motion such as the shaking of the sensor device 1A itself is substantially canceled.
  • the vector rotation unit 52 converts the dynamic acceleration components (Acc-x, Acc-y, Acc-z) output from the detection unit 40 into a global coordinate system (see FIG. 2 may be converted into dynamic acceleration components (Acc-X, Acc-Y, Acc-Z) in the direction of X, Y and Z axes.
  • the rotation angle components ( ⁇ x , ⁇ y , ⁇ z ) input to the vector rotation unit 52 may be referred to.
  • calibration processing may be executed when the detection unit 40 is stationary. Thereby, the rotation angle of the detection unit 40 with respect to the direction of gravity can be detected with high accuracy.
  • the pattern recognition unit 53 detects the user's movement or behavior pattern based on the normalized dynamic acceleration and the normalized posture angle, classifies the user U's behavior pattern, and determines the behavior class. Information in which the class of the behavior pattern (behavior class) that is the determined kinematic physical quantity is associated with the time information and the position information is transmitted to the transmission / reception unit 101.
  • the time information acquisition unit 54 acquires time information, day information, holiday information, year / month / day information, and the like as detected by the detection unit 40 of the sensor device 1A. Output to.
  • the position sensor 55 continuously or intermittently acquires position information indicating the user's whereabouts (hereinafter, current position). For example, the position information of the current location is expressed by latitude, longitude, altitude, and the like.
  • the current position information acquired by the position sensor 55 is input to the GIS information acquisition unit 56.
  • the GIS information acquisition unit 56 acquires GIS (Geographic Information System) information. And the GIS information acquisition part 56 detects the attribute of the present location using the acquired GIS information.
  • the GIS information includes, for example, various additional information obtained by map information, artificial satellites, field surveys, and the like.
  • the GIS information acquisition unit 56 expresses the attribute of the current location using identification information called a geo category code, for example.
  • the geo category code is a classification code for classifying the type of information related to the place, and is set according to, for example, the type of building, the shape of the terrain, geographical characteristics, regionality, and the like.
  • the GIS information acquisition unit 56 refers to the acquired GIS information, identifies the current location and buildings around the current location, extracts a geo category code corresponding to the building, etc., and outputs it to the pattern recognition unit 53. .
  • the pattern recognition unit 53 includes a movement / state recognition unit 531 and an action pattern determination unit 532.
  • the “movement / state” means an action performed by the user in a relatively short time of several seconds to several minutes.
  • the movement may include actions such as walking, running, jumping, resting, pausing, changing posture, raising, and lowering.
  • Examples of the state include trains, escalators, elevators, bicycles, cars, stairs, slopes, and flat grounds.
  • “Behavior” is a daily behavior that the user performs over a longer time than “movement / state”.
  • the action includes eating, shopping, sports, work, moving to a destination, and the like.
  • the movement / state recognition unit 531 detects a behavior pattern using the input normalized dynamic acceleration and the normalized posture angle, and inputs the behavior pattern to the behavior pattern determination unit 532.
  • the behavior pattern is input from the movement / situation recognition unit 531, the geo category code is input from the GIS information acquisition unit 56, and the time information is input from the time information acquisition unit 54 to the behavior pattern determination unit 532.
  • the behavior pattern determination unit 532 determines a behavior pattern class using a determination process based on a learning model.
  • the behavior pattern determination unit 532 generates information associating a behavior pattern class (behavior class), position information, time information, and the like as a control signal, and outputs the control signal to the transmission / reception unit 101.
  • a determination model for determining an action pattern is generated using a machine learning algorithm, and an action pattern corresponding to input data is determined using the generated determination model.
  • k-means method for example, k-means method, Nearest Neibor method, SVM (Support Vector Matching), HMM (Hidden Markov Model), Boosting, Deep learning, etc. can be used.
  • the transmission / reception unit 101 includes, for example, a communication circuit and an antenna, and constitutes an interface for communication with the terminal device 1B (transmission / reception unit 404).
  • the transmission / reception unit 101 is configured to be able to transmit an output signal including a control signal including information associated with the action class, position information, time information, and the like determined by the control unit 50 to the terminal device 1B.
  • the transmission / reception unit 101 is configured to be able to receive setting information and the like of the control unit 50 transmitted from the terminal device 1B.
  • Wireless communication may be communication using electromagnetic waves (including infrared rays) or communication using electric fields. Specific methods include “Wi-Fi (registered trademark)”, “Zigbee (registered trademark)”, “Bluetooth (registered trademark)”, “Bluetooth Low Energy”, “ANT (registered trademark)”, “ANT + ( Examples of the communication method using a band of several hundred MHz (megahertz) to several GHz (gigahertz), such as “registered trademark” and “EnOcean (registered trademark)”. Near field communication such as NFC (Near Field Communication) may be used.
  • NFC Near Field Communication
  • the internal power supply 102 supplies power necessary for driving the sensor device 1A.
  • a power storage element such as a primary battery or a secondary battery may be used, or an energy harvesting technique including a power generation element such as vibration power generation or solar power generation, or a non-feeding means may be used.
  • an energy harvesting device such as a vibration power generation device is suitable as the internal power source 102.
  • the memory 103 includes a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and controls the sensor device 1A by the control unit 50 such as a program for generating a trajectory image signal (control signal) from speed-related information. Stores programs, various parameters or data.
  • ROM Read Only Memory
  • RAM Random Access Memory
  • the terminal device 1B is typically composed of a portable information terminal, and includes a CPU 401, a memory 402, an internal power supply 403, a transmission / reception unit 404, a camera 405, and a position information acquisition unit (GPS (Global Positioning System) device). 406 and a display portion 407.
  • the CPU 401 controls the overall operation of terminal device 1B.
  • the memory 402 includes a ROM, a RAM, and the like, and stores a program for executing control of the terminal device 1B by the CPU 401, various parameters, and data.
  • the internal power supply 403 is for supplying electric power necessary for driving the terminal device 1B, and typically includes a rechargeable secondary battery.
  • the transmission / reception unit 404 includes a communication circuit and an antenna that can communicate with the transmission / reception unit 101.
  • the transmission / reception unit 404 is further configured to be able to communicate with other portable information terminals, servers, and the like using a wireless LAN or a 3G or 4G network N for mobile communication.
  • the display unit 407 includes, for example, an LCD (Liquid Crystal Display) or an OLED (Organic Light Emitting Diode), and displays various menus, GUI (Graphic User Interface), and the like of applications.
  • the display unit 407 includes a touch sensor, and is configured to be able to input predetermined setting information to the sensor device 1A via the CPU 401 and the transmission / reception unit 404 by a user's touch operation.
  • the display unit 407 displays a user's action history and the like based on the control signal from the sensor device 1A received via the transmission / reception unit 404.
  • the sensor device 1A When the sensor device 1A is a neck type as in the present embodiment, a pendulum movement and other complicated movements occur in the sensor device 1A itself as the user moves, and the sensor device 1A detects in addition to the movement of the person. It also detects complex movements including the pendulum movement of the club itself.
  • the sensor device 1A by normalizing the dynamic acceleration and the posture angle in the direction of gravity, it is possible to obtain a normalized dynamic acceleration and a normalized posture angle in which the movement of the sensor device 1A itself is substantially canceled.
  • the gravity direction captured by the sensor device 1A is directly shaken in the attitude of the sensor device 1A.
  • a normalized dynamic acceleration in which the movement of the sensor device 1A itself is substantially canceled can be obtained.
  • the behavior pattern detected using the normalized dynamic acceleration and the normalized posture angle is a behavior pattern with a lot of user motion components, pattern recognition is facilitated and pattern recognition can be performed with high accuracy.
  • the acceleration component of the pendulum motion which is a regular motion of the sensor device 1A
  • the acceleration component of the pendulum motion should be canceled as noise during pattern recognition. Can do. That is, although the motion of the sensor device 1A itself accompanies acceleration, it is impossible to see the motion of the person who is the user by looking only at the posture of the sensor device 1A. The acceleration component of the pendulum motion of the device 1A can be canceled as noise.
  • FIG. 5 shows a time waveform of detected acceleration in the X-axis direction, for example, detected by the acceleration sensor element when the user carries a sensor device having the acceleration sensor element.
  • FIG. 5A is a comparative example, and shows a case where the user carries the sensor device 100A around the neck without being fixed, and the user is in an exercise state.
  • detection detected by the sensor device as in the present embodiment Normalization of the dynamic acceleration component extracted from the acceleration is not performed.
  • the sensor device 100A detects a detected acceleration in which a complex motion including the pendulum motion of the sensor device 100A itself and the user's motion are combined, and FIG. 5A shows the time waveform as an irregular wavy line. ing.
  • the graph in the lower part of the figure shows the frequency characteristics of acceleration detected by the sensor device 100A. From this graph, it can be seen that the acceleration detected by the sensor device 100A includes an acceleration component in which the rotation of the axis is added to the frequency of the pendulum movement and the movement of the user.
  • FIG. 5B is a comparative example, showing a case where the user carries the sensor device 1A fixed to the body and the user is in an exercise state, and the sensor device 1A itself has no shaking such as a pendulum movement.
  • the irregular wavy line shown in FIG. 5B is a time waveform of the acceleration related to the user's movement.
  • the dynamic acceleration component extracted from the detected acceleration detected from the acceleration sensor element 10 of the sensor device 1A is converted into the vector rotation.
  • the time waveform of acceleration when normalization is performed is shown.
  • FIG. 5B shows that the sensor device 1A is fixed, and that a dynamic acceleration component is extracted from the acceleration detection signal, and this is vector-rotated to normalize in the direction of gravity. It is different.
  • the graph in the lower part of the figure shows the frequency characteristics of the acceleration detected by the sensor device 1A, and shows the frequency characteristics related to the user's movement.
  • FIG. 5C is an example according to the present embodiment, and shows a case where the user carries the sensor device 1A around the neck without being fixed, and the user is in an exercise state, and the sensor device 1A has a pendulum of the sensor device 1A itself. Complex movements including movement are occurring.
  • the irregular wavy line shown in FIG. 5C is extracted from the detected acceleration in which the complex motion including the pendulum motion of the sensor device 1A itself detected from the acceleration sensor element 10 of the sensor device 1A and the acceleration related to the user's motion are combined. It is a time waveform of the normalized dynamic acceleration obtained by normalizing the obtained dynamic acceleration component by vector rotation. Compared to FIG. 5A, FIG.
  • 5C differs in that a dynamic acceleration component is extracted from the acceleration detection signal, and this is vector-rotated to normalize in the direction of gravity.
  • the graph at the bottom of the figure shows the frequency characteristics of normalized dynamic acceleration. From this graph, it can be seen that the frequency of the normalized dynamic acceleration includes the frequency related to the pendulum motion and the user's motion.
  • the respective time waveforms are not similar.
  • the time waveforms are similar, and the frequency characteristics differ only in that the frequency of the pendulum motion is superimposed in FIG.
  • the frequency characteristics according to are substantially the same.
  • the sensor device 1A even when the sensor device 1A is not fixed to the user's body and the distance between the sensor device 1A and the user is variably carried by the user, the user's movement is almost accurately grasped. It is possible. Therefore, it is not necessary to fix the sensor device 1A to the body to be detected, and the degree of freedom of wearing of the sensor device 1A is expanded.
  • FIG. 6 is a block diagram illustrating a configuration of the detection unit (inertial sensor) 40 according to an embodiment of the present technology.
  • the detection unit (inertial sensor) 40 includes an acceleration sensor element 10, an angular velocity sensor element 30, and a controller 20.
  • the acceleration sensor element 10 and the controller 20 will be mainly described.
  • the acceleration sensor element 10 of the present embodiment is configured as an acceleration sensor that detects acceleration in three axial directions in the local coordinate system (x, y, and z axes).
  • the acceleration sensor element 10 of the present embodiment is configured to be able to extract a dynamic acceleration component and a static acceleration component from the accelerations in the three axis directions.
  • the dynamic acceleration component typically means the AC component of the acceleration, and typically corresponds to the motion acceleration (translational acceleration, centrifugal acceleration, tangential acceleration, etc.) of the object.
  • the static acceleration component means a DC component of the acceleration and typically corresponds to gravitational acceleration or acceleration estimated as gravitational acceleration.
  • the acceleration sensor element 10 includes two types of acceleration detection units (a first acceleration detection unit 11 and a second acceleration detection unit 12) that respectively detect information related to acceleration in three axis directions.
  • the angular velocity sensor element 30 has an angular velocity detector 31.
  • the first acceleration detection unit 11 is a piezoelectric acceleration sensor, and includes a signal (Acc-AC-x) including information related to acceleration parallel to the x-axis direction and information related to acceleration parallel to the y-axis direction. And a signal (Acc-AC-z) including information related to acceleration parallel to the z-axis direction. These signals (first detection signals) have an AC waveform corresponding to the acceleration of each axis.
  • the second acceleration detection unit 12 is a non-piezoelectric acceleration sensor, and a signal (Acc-DC-x) including information related to acceleration parallel to the x-axis direction and acceleration parallel to the y-axis direction.
  • a signal (Acc-DC-y) including related information and a signal (Acc-DC-z) including information related to acceleration parallel to the z-axis direction are output.
  • These signals (second detection signals) have an output waveform in which an AC component corresponding to the acceleration of each axis is superimposed on the DC component.
  • the controller 20 moves from the acceleration in the three-axis direction.
  • the acceleration calculation unit 200 for extracting the dynamic acceleration component and the static acceleration component, respectively, and the angular velocity detection signals (Gyro-x, Gyro-y, Gyro-z) around the three axes.
  • the angular velocity calculation unit 300 calculates ( ⁇ -x, ⁇ -y, ⁇ -z) (third detection signal).
  • the controller 20 can be realized by hardware elements and necessary software used in a computer such as a CPU (Central Processing Unit), a RAM (Random Access Memory), and a ROM (Read Only Memory).
  • a CPU Central Processing Unit
  • RAM Random Access Memory
  • ROM Read Only Memory
  • PLD Programmable Logic Device
  • FPGA Field Programmable Gate Array
  • DSP Digital Signal Processor
  • acceleration sensor element Next, details of the acceleration sensor element 10 constituting the detection unit (inertial sensor) 40 will be described.
  • FIG. 7 to 9 are a front perspective view, a rear perspective view, and a front plan view schematically showing the configuration of the acceleration sensor element 10, respectively.
  • the acceleration sensor element 10 includes an element body 110, a first acceleration detection unit 11 (first detection elements 11x1, 11x2, 11y1, 11y2), and a second acceleration detection unit 12 (second detection elements 12x1, 12x2). , 12y1, 12y2).
  • the element body 110 has a main surface portion 111 parallel to the xy plane and a support portion 114 on the opposite side.
  • the element body 110 is typically composed of a SOI (Silicon On On InsUlator) substrate, and includes an active layer (silicon substrate) that forms the main surface portion 111 and a frame-shaped support layer (silicon substrate) that forms the support portion 114. It has the laminated structure.
  • the main surface portion 111 and the support portion 114 have different thicknesses, and the support portion 114 is formed thicker than the main surface portion 111.
  • the element body 110 has a movable plate 120 (movable part) capable of moving under acceleration.
  • the movable plate 120 is provided at the center of the main surface portion 111 and is formed by processing the active layer forming the main surface portion 111 into a predetermined shape. More specifically, the movable plate 120 having a plurality of (four in this example) blade portions 121 to 124 having a symmetrical shape with respect to the central portion of the main surface portion 111 is constituted by the plurality of groove portions 112 formed in the main surface portion 111. Is done.
  • the peripheral edge portion of the main surface portion 111 constitutes a base portion 115 that faces the support portion 114 in the z-axis direction.
  • the support portion 114 is formed in a frame shape having a rectangular recess 113 that opens the back surface of the movable plate 120.
  • the support part 114 is configured as a bonding surface bonded to a support substrate (not shown).
  • the support substrate may be formed of a circuit board that electrically connects the sensor element 10 and the controller 20, or may be formed of a relay board or a package board that is electrically connected to the circuit board.
  • the support portion 114 may be provided with a plurality of external connection terminals that are electrically connected to the circuit board, the relay board, and the like.
  • the blade portions 121 to 124 of the movable plate 120 are each constituted by a plate piece having a predetermined shape (in this example, a substantially hexagonal shape), and are arranged at 90 ° intervals around the central axis parallel to the Z axis.
  • the thickness of each of the blade portions 121 to 124 corresponds to the thickness of the active layer constituting the main surface portion 111.
  • the blade portions 121 to 124 are integrally connected to each other at the central portion 120C of the movable plate 120, and are integrally supported so as to be movable relative to the base portion 115.
  • the movable plate 120 further includes a weight portion 125 as shown in FIG.
  • the weight portion 125 is integrally provided on the back surface of the central portion of the movable plate 120 and the back surfaces of the blade portions 121 to 124.
  • the size, thickness, and the like of the weight portion 125 are not particularly limited, and are set to appropriate sizes that can obtain the desired vibration characteristics of the movable plate 120.
  • the weight portion 125 is formed, for example, by processing the support layer forming the support portion 114 into a predetermined shape.
  • the movable plate 120 is connected to the base portion 115 via a plurality (four in this example) of bridge portions 131 to 134.
  • the plurality of bridge portions 131 to 134 are provided between the blade portions 121 to 124, respectively, and are formed by processing the active layer forming the main surface portion 111 into a predetermined shape.
  • the bridge portion 131 and the bridge portion 133 are arranged to face each other in the x-axis direction, and the bridge portion 132 and the bridge portion 134 are arranged to face each other in the y-axis direction.
  • the bridge portions 131 to 134 constitute a part of the movable portion that can move relative to the base portion 115, and elastically support the central portion 120C of the movable plate 120.
  • Each of the bridge portions 131 to 134 has the same configuration, and includes a first beam portion 130a, a second beam portion 130b, and a third beam portion 130c, as shown in FIG.
  • the first beam portion 130a extends linearly from the peripheral edge portion of the central portion 120C of the movable plate 120 in the x-axis direction and the y-axis direction, and is disposed between the blade portions 121 to 124 adjacent to each other.
  • the second beam portion 130b extends linearly in the x-axis direction and the y-axis direction, respectively, and connects between the first beam portion 130a and the base portion 115, respectively.
  • the third beam portion 130c extends linearly in the directions intersecting the x-axis direction and the y-axis direction, respectively, an intermediate portion between the first beam portion 130a and the second beam portion 130b, a base portion 115, Are connected to each other.
  • Each of the bridge portions 131 to 134 includes two third beam portions 130c, and is configured such that two third beam portions 130c sandwich one second beam portion 130b in the xy plane.
  • the rigidity of the bridging portions 131 to 134 is set to an appropriate value that can stably support the movable plate 120 that moves.
  • the bridging portions 131 to 134 are set to have appropriate rigidity capable of being deformed by the weight of the movable plate 120, and the magnitude of the deformation can be detected by the second acceleration detecting unit 12 described later. If it is, it will not be specifically limited.
  • the movable plate 120 is supported on the base portion 115 of the element main body 110 via the four bridge portions 131 to 134, and the base is provided with the bridge portions 131 to 134 as fulcrums by the inertial force according to the acceleration. It is configured to be movable (movable) relative to the portion 115.
  • FIGS. 10A to 10C are schematic side sectional views for explaining the movement of the movable plate 120, where A is when no acceleration is applied, B is when acceleration occurs along the x-axis direction, and C is z-axis direction. The time of acceleration occurrence along is shown.
  • a solid line indicates a state when acceleration occurs in the left direction on the paper surface
  • a solid line in FIG. 10C indicates a state when acceleration occurs in the upward direction on the paper surface.
  • the movable plate 120 When no acceleration is generated, the movable plate 120 is maintained in a state parallel to the surface of the base portion 115 as shown in FIGS. 7 and 10A. In this state, for example, when acceleration along the x-axis direction occurs, the movable plate 120 tilts counterclockwise around the bridge portions 132 and 134 extending in the y-axis direction as shown in FIG. 10B. As a result, the bridge portions 131 and 133 facing each other in the x-axis direction receive bending stresses in opposite directions along the z-axis direction.
  • the movable plate 120 tilts counterclockwise (or clockwise) about the bridge portions 131 and 133 extending in the x-axis direction, although not shown.
  • the bridge portions 132 and 134 facing each other in the axial direction receive bending stresses in opposite directions along the z-axis direction.
  • the first acceleration detection unit 11 and the second acceleration detection unit 12 are provided in the bridge portions 131 to 134, respectively.
  • the detecting unit (inertial sensor) 40 detects the deformation caused by the bending stress of the bridge portions 131 to 134 by the acceleration detecting units 11 and 12, thereby measuring the direction and magnitude of the acceleration acting on the sensor element 10.
  • the first acceleration detection unit 11 includes a plurality (four in this example) of first detection elements 11x1, 11x2, 11y1, and 11y2.
  • the detection elements 11x1 and 11x2 are provided on the axial centers of the surfaces of the two bridge portions 131 and 133 that face each other in the x-axis direction, and one detection element 11x1 is provided on the first beam portion 130a in the bridge portion 131.
  • the other detection element 11x2 is disposed on the first beam portion 130a of the bridge portion 133, respectively.
  • the detection elements 11y1 and 11y2 are provided on the axial centers of the surfaces of the two bridge portions 132 and 134 that face each other in the y-axis direction, and one detection element 11y1 is the first in the bridge portion 132.
  • the other detection element 11y2 is arranged on the first beam portion 130a of the bridge portion 134 in the beam portion 130a.
  • the first detection elements 11x1 to 11y2 have the same configuration.
  • the first detection elements 11x1 to 11y2 are formed of rectangular piezoelectric detection elements having long sides in the axial direction of the first beam portion 130a.
  • the first detection elements 11x1 to 11y2 are each composed of a laminate of a lower electrode layer, a piezoelectric film, and an upper electrode layer.
  • the piezoelectric film is typically made of lead zirconate titanate (PZT), but is not limited to this.
  • the piezoelectric film generates a potential difference between the upper electrode layer and the lower electrode layer according to the bending deformation amount (stress) in the z-axis direction of the first beam portion 130a (piezoelectric effect).
  • the upper electrode layers are electrically connected to the relay terminals 140 provided on the surface of the base portion 115 via wiring layers (not shown) formed on the bridge portions 131 to 134, respectively.
  • the relay terminal 140 may be configured as an external connection terminal electrically connected to the support substrate. For example, the other end of a bonding wire whose one end is connected to the support substrate is connected.
  • the lower electrode layer is typically connected to a reference potential such as a ground potential.
  • the first acceleration detection unit 11 configured as described above outputs only when there is a stress change due to the characteristics of the piezoelectric film, and does not output when the stress value is not changed even if stress is applied. Therefore, the magnitude of the motion acceleration acting on the movable plate 120 is mainly detected. Therefore, the output (first detection signal) of the first acceleration detector 11 mainly includes an output signal having an AC waveform that is a dynamic component (AC component) corresponding to the motion acceleration.
  • AC component dynamic component
  • the second acceleration detection unit 12 includes a plurality (four in this example) of second detection elements 12x1, 12x2, 12y1, and 12y2.
  • the detection elements 12x1 and 12x2 are provided on the axial centers of the surfaces of the two bridge portions 131 and 133 that face each other in the x-axis direction, and one detection element 12x1 is provided on the second beam portion 130b in the bridge portion 131.
  • the other detection element 12x2 is disposed on the second beam portion 130b of the bridge portion 133, respectively.
  • the detection elements 12y1 and 12y2 are provided on the axial centers of the surfaces of the two bridge portions 132 and 134 facing each other in the y-axis direction, and one detection element 12y1 is the second in the bridge portion 132.
  • the other detection element 12y2 is arranged on the second beam portion 130b of the bridge portion 134 in the beam portion 130b.
  • the second detection elements 12x1 to 12y2 have the same configuration.
  • the second detection elements 12x1 to 12y2 are configured by piezoresistive detection elements having long sides in the axial direction of the second beam portion 130b.
  • the second detection elements 12x1 to 12y2 each include a resistance layer and a pair of terminal portions connected to both ends in the axial direction.
  • the resistance layer is, for example, a conductor layer formed by doping an impurity element on the surface (silicon layer) of the second beam portion 130b, and the amount of bending deformation of the second beam portion 130b in the z-axis direction ( A resistance change corresponding to the stress is generated between the pair of terminal portions (piezoresistance effect).
  • the pair of terminal portions are electrically connected to the relay terminals 140 provided on the surface of the base portion 115 via wiring layers (not shown) formed on the bridge portions 131 to 134, respectively.
  • the second acceleration detector 12 configured as described above determines not only the motion acceleration acting on the movable plate 120 but also the movable plate 120 because the resistance value is determined by an absolute stress value due to the characteristics of the piezoresistance. It also detects the acting gravitational acceleration. Therefore, in the output (second detection signal) of the second acceleration detector 11, the dynamic component (AC component) corresponding to the motion acceleration is superimposed on the gravitational acceleration or a static component (DC component) corresponding thereto. Has an output waveform.
  • the second detection elements 12x1 to 12y2 are not limited to the example configured with the piezoresistive type detection elements, and other non-piezoelectric detection elements that can detect the acceleration of the DC component, such as an electrostatic type. It may be constituted by.
  • the electrostatic type the movable electrode portion and the fixed electrode portion constituting the electrode pair are arranged to face each other in the axial direction of the second beam portion 130b, and according to the amount of bending deformation of the second beam portion 130b. It is comprised so that the opposing distance between both electrode parts may change.
  • the first acceleration detector 11 detects acceleration detection signals (Acc-AC-x, Acc-AC-) in the x-axis direction, the y-axis direction, and the z-axis direction based on the outputs of the first detection elements 11x1 to 11y2.
  • y, Acc-AC-z is output to the controller 20 (see FIG. 5).
  • the acceleration detection signal (Acc-AC-x) in the x-axis direction corresponds to a difference signal (ax1-ax2) between the output (ax1) of the detection element 11x1 and the output (ax2) of the detection element 11x2.
  • the acceleration detection signal (Acc-AC-y) in the y-axis direction corresponds to a difference signal (ay1-ay2) between the output (ay1) of the detection element 11y1 and the output (ay2) of the detection element 11y2.
  • the acceleration detection signal (Acc-AC-z) in the z-axis direction corresponds to the sum (ax1 + ax2 + ay1 + ay2) of the outputs of the detection elements 11x1 to 11y2.
  • the second acceleration detector 12 detects acceleration detection signals (Acc-DC-x, Acc) in the x-axis direction, the y-axis direction, and the z-axis direction based on the outputs of the second detection elements 12x1 to 12y2.
  • -DC-y, Acc-DC-z are output to the controller 20 (see FIG. 5).
  • the acceleration detection signal (Acc-DC-x) in the x-axis direction corresponds to a difference signal (bx1-bx2) between the output (bx1) of the detection element 12x1 and the output (bx2) of the detection element 12x2.
  • the acceleration detection signal (Acc-DC-y) in the y-axis direction corresponds to a differential signal (by1-by2) between the output (by1) of the detection element 12y1 and the output (by2) of the detection element 12y2.
  • the acceleration detection signal (Acc-DC-z) in the z-axis direction corresponds to the sum (bx1 + bx2 + by1 + by2) of the outputs of the detection elements 12x1 to 12y2.
  • the calculation processing of the acceleration detection signals in the respective axis directions may be executed in the previous stage of the control unit 50 or may be executed in the control unit 50.
  • controller Next, the controller (signal processing circuit) 20 will be described.
  • the controller 20 is electrically connected to the acceleration sensor element 10.
  • the controller 20 may be mounted inside the device in common with the acceleration sensor element 10, or may be mounted on an external device different from the above device.
  • the controller 20 may be mounted on a circuit board on which the acceleration sensor element 10 is mounted, or mounted on a board different from the circuit board via a wiring cable or the like.
  • the controller 20 is configured to be able to communicate with the acceleration sensor element 10 wirelessly or by wire, for example.
  • the controller 20 includes an acceleration calculation unit 200, an angular velocity calculation unit 300, a serial interface 201, a parallel interface 202, and an analog interface 203.
  • the controller 20 is electrically connected to control units of various devices that receive the output of the detection unit (inertial sensor) 40.
  • the acceleration calculation unit 200 generates dynamic acceleration components (Acc-x, Acc-y, Acc) based on the acceleration detection signals in the respective axial directions output from the first acceleration detection unit 11 and the second acceleration detection unit 12. -z) and static acceleration components (Gr-x, Gr-y, Gr-z) are extracted.
  • the acceleration calculation unit 200 is realized by loading a program recorded in a ROM, which is an example of a non-transitory computer-readable recording medium, into a RAM or the like and executing it by the CPU.
  • the angular velocity calculation unit 300 generates angular velocity signals ( ⁇ -x, ⁇ -y, ⁇ -z) around three axes based on angular velocity detection signals (Gyro-x, Gyro-y, Gyro-z) around three axes. Each is calculated and output to the outside via the serial interface 201, the parallel interface 202, or the analog interface 203.
  • the angular velocity calculation unit 300 may be configured separately from the acceleration calculation unit 200 or may be configured by a calculation unit 230 common to the acceleration calculation unit 200.
  • the serial interface 201 is configured to sequentially output the dynamic and static acceleration components of each axis generated by the acceleration calculation unit 200 and the angular velocity signal of each axis generated by the angular velocity calculation unit 300 to the control unit.
  • the parallel interface 202 is configured to be able to output the dynamic and static acceleration components of each axis generated in the acceleration calculation unit 200 to the control unit in parallel.
  • the controller 20 may be provided with at least one of the serial interface 201 and the parallel interface 202, or may be selectively switched according to a command from the control unit.
  • the analog interface 203 is configured to be able to output the outputs of the first and second acceleration detectors 11 and 12 to the control unit as they are, but may be omitted as necessary.
  • reference numeral 204 denotes a converter that performs AD (Analog-Digital) conversion on the acceleration detection signals of the respective axes.
  • FIG. 11 is a circuit diagram showing a configuration example of the acceleration calculation unit 200.
  • the acceleration calculation unit 200 includes a gain adjustment circuit 21, a sign inversion circuit 22, an addition circuit 23, and a correction circuit 24. These circuits 21 to 24 have a common configuration for each of the x, y, and z axes, and by performing a common calculation process on each axis, the dynamic acceleration component (motion acceleration) of each axis and A static acceleration component (gravity acceleration) is extracted.
  • FIG. 12 shows a processing block for extracting a static acceleration component from the acceleration detection signal in the x-axis direction.
  • the gain adjustment circuit 21 includes a first acceleration detection signal (Acc-AC-x) related to the X-axis direction output from the first acceleration detection unit 11 (11x1, 11x2), and a second acceleration detection unit 12 (12x1). , 12x2), the gain of each signal is adjusted so that the second acceleration detection signal (Acc-DC-x) in the x-axis direction outputted from 12x2) has the same level.
  • the gain adjustment circuit 21 includes an amplifier that amplifies the output (Acc-AC-x) of the first acceleration detection unit 11 and the output (Acc-DC-x) of the second acceleration detection unit 12.
  • the output sensitivity and dynamic range of an acceleration sensor differ depending on the detection method.
  • a piezoelectric acceleration sensor is more sensitive than a non-piezoelectric (piezoresistive, electrostatic) acceleration sensor.
  • the first acceleration detector 11 corresponds to a piezoelectric acceleration sensor
  • the second acceleration detector 12 corresponds to a piezoresistive acceleration sensor.
  • the gain adjustment circuit 21 sets the outputs (first and second acceleration detection signals) of the acceleration detection units 11 and 12 to N times and M so that the outputs of the acceleration detection units 11 and 12 are at the same level. Amplify twice.
  • the amplification factors N and M are positive numbers and satisfy the relationship N ⁇ M.
  • the values of the amplification factors N and M are not particularly limited, and may be set as coefficients that also serve as temperature compensation for the acceleration detection units 11 and 12 depending on the use environment (use temperature) of the detection unit (inertial sensor) 40. .
  • FIG. 14 is an example of output characteristics of the first acceleration detection signal and the second acceleration detection signal, and shows a comparison between the output characteristics before gain adjustment and the output characteristics after gain adjustment.
  • the horizontal axis indicates the frequency of acceleration acting on the detection unit (inertial sensor) 40
  • the vertical axis indicates the output (sensitivity) (the same applies to FIGS. 15 to 19).
  • the output sensitivity of the acceleration component in the low frequency region of 0.5 Hz or less is higher than the acceleration component in the higher frequency region.
  • the output sensitivity is substantially 0 particularly in a stationary state (motion acceleration is 0).
  • the second acceleration detection signal (Acc-DC-x) of the piezoresistive method has a constant output sensitivity in the entire frequency range, so the acceleration component in a stationary state (that is, the static acceleration component) is also constant.
  • the output sensitivity can be detected. Therefore, the gain adjustment circuit 21 amplifies the first acceleration detection signal and the second acceleration detection signal at a predetermined magnification such that the first acceleration detection signal and the second acceleration detection signal have the same output level. Can be extracted.
  • the sign inverting circuit 22 and the adding circuit 23 are configured to generate accelerations in the respective axial directions based on a difference signal between the first acceleration detection signal (Acc-AC-x) and the second acceleration detection signal (Acc-DC-x).
  • a differential operation circuit that extracts a static acceleration component (DC component) from the above is configured.
  • the sign inversion circuit 22 has an inverting amplifier (amplification factor: ⁇ 1) for inverting the sign of the first acceleration detection signal (Acc-AC-x) after gain adjustment.
  • FIG. 15 shows an example of output characteristics of the first acceleration detection signal (Acc-AC-x) after sign inversion.
  • the case where the sensor element 10 detects 1 G acceleration in the x-axis direction is shown as an example.
  • the second acceleration detection signal (Acc-DC-x) is output to the subsequent addition circuit 23 without its sign being inverted.
  • the sign inversion circuit 22 may be configured in common with the gain adjustment circuit 21 in the preceding stage.
  • the addition circuit 23 adds the first acceleration detection signal (Acc-AC-x) and the second acceleration detection signal (Acc-DC-x) output from the sign inversion circuit 22 to obtain a static acceleration component. Is output.
  • FIG. 16 shows an example of output characteristics of the adder circuit 23. Since the first and second acceleration detection signals are adjusted to the same level in the gain adjustment circuit 21, the net static acceleration component (Gr-x) is extracted by obtaining these difference signals. Become.
  • This static acceleration component typically corresponds to a gravitational acceleration component or an acceleration component including gravitational acceleration.
  • the piezoelectric detection type first acceleration detection unit 11 has a low detection sensitivity in the vicinity of a low frequency, and the generation of other axis sensitivity causes an axis direction other than the target axis (here, the y axis direction and the z axis For example, the acceleration component in the direction) inevitably overlaps, so that the dynamic acceleration component in the frequency domain indicated by hatching in FIG.
  • the present embodiment includes a correction circuit 24 for canceling the error based on the output of the adder circuit 23.
  • the correction circuit 24 includes a triaxial composite value calculation unit 241 and a low frequency sensitivity correction unit 242.
  • the correction circuit 24 calculates a correction coefficient ⁇ based on the output of the addition circuit 23 (difference signal between the first and second acceleration detection signals), and uses the correction coefficient ⁇ to generate the first acceleration detection signal (Acc ⁇ AC-x) is corrected.
  • the 3-axis composite value calculation unit 241 is provided in common for processing blocks that extract all static acceleration components in the x-axis, y-axis, and z-axis directions, and outputs (first and second) of the adder circuit 23 for each axis.
  • the correction coefficient ⁇ is calculated using the total value of the difference signal of the acceleration detection signal.
  • the values of the static acceleration components (Gr-x, Gr-y, Gr-z) in each of the three axial directions vary depending on the attitude of the acceleration sensor element 10, and sometimes change depending on the attitude change of the acceleration sensor element 10. It changes every moment. For example, when the z-axis direction of the acceleration sensor element 10 coincides with the gravitational direction (vertical direction), the z-axis rather than the static acceleration components (Gr-x, Gr-y) in the x-axis direction and the y-axis direction.
  • the direction static acceleration component (Gr-z) shows the largest value. In this way, it is possible to estimate the direction of gravity of the acceleration sensor element 10 at that time from the values of the static acceleration components (Gr-x, Gr-y, Gr-z) in the three axial directions.
  • the low-frequency sensitivity correction unit 242 has a multiplier that multiplies the first acceleration detection signal (Acc-AC-x) whose sign is inverted by the correction coefficient ⁇ .
  • the first acceleration detection signal is input to the adder circuit 23 in a state where the low-frequency sensitivity error is attenuated. Therefore, the adder circuit 23 outputs an acceleration signal having a frequency characteristic as shown in FIG. As described above, as a result of outputting only the static acceleration component corresponding to the gravitational acceleration, the accuracy of extracting the gravitational acceleration component is improved.
  • the correction circuit 24 is configured to execute a process of multiplying the first acceleration detection signal by the correction coefficient ⁇ when calculating the static acceleration component.
  • a process of multiplying the detection signal (Acc-DC-x) by the correction coefficient ⁇ may be executed, or the acceleration detection signal to be corrected is the first acceleration detection signal according to the magnitude of the acceleration change.
  • the second acceleration detection signal may be switched.
  • the correction circuit 24 corrects the first acceleration detection signal using the correction coefficient ⁇ when the acceleration change of one of the first acceleration detection signal and the second acceleration detection signal is greater than or equal to a predetermined value. Composed. The greater the change in acceleration (the higher the applied frequency), the higher the rate at which the error component leaks into the first acceleration detection signal, so that the error component can be efficiently reduced. This configuration is particularly effective when the motion acceleration is relatively large, such as in motion analysis applications.
  • the correction circuit 24 corrects the second acceleration detection signal using the correction coefficient ⁇ when the change in acceleration of one of the first acceleration detection signal and the second acceleration detection signal is equal to or less than a predetermined value.
  • a predetermined value Configured as follows. The smaller the acceleration change (the lower the applied frequency), the higher the rate at which the error component leaks into the second acceleration detection signal, so that the error component can be efficiently reduced. This configuration is particularly effective when the motion acceleration is relatively small, such as a leveling operation of a digital camera.
  • the static acceleration component in each axial direction is extracted as described above, and the dynamic acceleration components (Acc-x, Acc-y, Acc-z) in each axial direction are extracted as shown in FIG.
  • the first acceleration detection signals (Acc-AC-x, Acc-AC-y, Acc-AC-z) that have been gain-adjusted in the gain adjustment circuit 21 are referred to.
  • the first acceleration detection signal may be used as it is for extracting the dynamic acceleration component.
  • a part of the dynamic acceleration component may leak into the static acceleration component.
  • the acceleration component is reduced, making it difficult to detect with high accuracy. Therefore, by correcting the first acceleration detection signal using the correction coefficient ⁇ calculated by the correction circuit 24, it is possible to improve the detection accuracy of the dynamic acceleration component.
  • the correction circuit 24 uses the reciprocal (1 / ⁇ ) of the correction coefficient ⁇ acquired by the triaxial composite value calculation unit 241 as the first acceleration.
  • a multiplier for multiplying the signals (Acc-AC-x, Acc-AC-y, Acc-AC-z) is included.
  • the low-frequency sensitivity component of the first acceleration signal is compensated, so that the extraction accuracy of the dynamic acceleration components (Acc-x, Acc-y, Acc-z) is improved.
  • FIG. 18 schematically shows the output characteristics of the dynamic acceleration component.
  • the correction circuit 24 is configured to execute a process of multiplying the first acceleration detection signal by the reciprocal (1 / ⁇ ) of the correction coefficient when calculating the dynamic acceleration component.
  • the second acceleration detection signal (Acc-DC-x, Acc-DC-y, Acc-DC-z) may be configured to execute a process of multiplying the reciprocal (1 / ⁇ ) of the correction coefficient.
  • the acceleration detection signal to be corrected is switched between the first acceleration detection signal and the second acceleration detection signal in accordance with the magnitude of the acceleration change. May be.
  • the dynamic acceleration component and static acceleration component correction processing by the low-frequency sensitivity correction unit 242 is performed when the composite value calculated by the triaxial composite value calculation unit 241 is other than 1G (G: gravitational acceleration). It is considered effective.
  • G gravitational acceleration
  • combination value becomes less than 1G the case where the sensor element 10 is falling freely is mentioned, for example.
  • the first acceleration detection signal detected by the piezoelectric method has a high-pass filter (HPF) output characteristic, and an output below the cutoff frequency is output to the output of the adder circuit 23 as an error component of low-frequency sensitivity. It remains (see FIG. 16).
  • the error component is attenuated by an arithmetic method using the correction circuit 24.
  • the cut-off frequency is lower in order to improve the accuracy of canceling the error component.
  • a piezoelectric body having a relatively large capacitance and internal resistance may be used as the piezoelectric film of the detection elements (11x1, 11x2, 11y1, and 11y2) constituting the first acceleration detection unit 11.
  • the cut-off frequency of the low-frequency sensitivity can be lowered to around 0 Hz as much as possible, so that the error component of the low-frequency sensitivity can be minimized.
  • the movable plate 120 moves in the manner shown in FIGS. 10A to 10C with respect to the base portion 115 in accordance with the direction of acceleration.
  • the first acceleration detection unit 11 detection elements 11x1, 11x2, 11y1, 11y2
  • the second acceleration detection unit 12 detection elements 12x1, 12x2, 12y1, 12y2
  • a corresponding detection signal is output to the controller 20.
  • FIG. 20 is a flowchart illustrating an example of a processing procedure of an acceleration detection signal in the controller 20 (acceleration calculation unit 200).
  • the controller 20 acquires the first acceleration detection signal (Acc-AC-x, Acc-AC-y, Acc-AC-z) of each axis from the first acceleration detection unit 11 at a predetermined sampling interval.
  • the second acceleration detection unit 12 receives (acquires) the second acceleration detection signals (Acc-DC-x, Acc-DC-y, Acc-DC-z) for each axis (steps 101 and 102). .
  • the detection signals may be acquired simultaneously (in parallel) or sequentially (in series).
  • the controller 20 adjusts the gain of each detection signal in the gain adjustment circuit 21 so that the first and second acceleration detection signals have the same level for each axis (FIG. 14, steps 103 and 104). If necessary, correction for the purpose of temperature compensation of the first and second acceleration detection signals is performed for each axis (steps 105 and 106).
  • the controller 20 uses the first acceleration detection signal (Acc-AC-x, Acc-AC-y, Acc-AC-z) of each axis as a dynamic acceleration calculation system (motion acceleration system) and static acceleration. Branches to the calculation system (gravity acceleration system), respectively (steps 107 and 108).
  • the first acceleration detection signal branched to the static acceleration calculation system is input to the addition circuit 23 after the sign is inverted in the sign inversion circuit 22 (step 109 in FIG. 15).
  • the controller 20 uses the first acceleration detection signal (Acc-AC-x, Acc-AC-y, Acc-AC-z) whose sign is inverted and the second acceleration detection signal for each axis. (Acc-DC-x, Acc-DC-y, Acc-DC-z) are added to calculate the static acceleration components (Gr-x, Gr-y, Gr-z) (FIG. 16, step 110). ). Further, the controller 20 calculates the three-axis combined value of these static acceleration components in the three-axis combined value calculation unit 241 (step 111). If the value is other than 1G, the low-frequency sensitivity correction unit 242 calculates the combined value.
  • the controller 20 outputs the calculated gravitational acceleration component (static acceleration component) to the outside (step 114). Note that the present invention is not limited thereto, and the calculated gravitational acceleration component (static acceleration component) may be output to the outside every time the composite value is calculated.
  • the controller 20 uses the first acceleration detection signal (Acc-AC-x, Acc) obtained by branching the reciprocal (1 / ⁇ ) of the calculated correction coefficient ⁇ to the motion acceleration system. -AC-y, Acc-AC-z) is executed (steps 112 and 115).
  • the controller 20 outputs the calculated motion acceleration component (dynamic acceleration component) to the outside (step 116). Note that the present invention is not limited thereto, and the calculated motion acceleration component (dynamic acceleration component) may be output to the outside each time the composite value is calculated.
  • the detection unit (inertial sensor) 40 uses the difference in detection method between the first and second acceleration detection units 11 and 12, so that dynamic acceleration components and static And a general acceleration component. Thereby, the movement acceleration which acts on the user U who is a detection target can be measured with high accuracy.
  • the gravitational acceleration component can be accurately extracted from the output of the detection unit (inertial sensor) 40, the posture of the detection target with respect to the gravitational direction can be detected with high accuracy. Thereby, for example, a horizontal posture of a detection target such as a flying object can be stably maintained.
  • a piezoelectric acceleration sensor is employed for the first acceleration detector 11, and a non-piezoelectric (piezoresistive or electrostatic capacitance) acceleration sensor is used as the second acceleration detector 12. Therefore, an inertial sensor having a wide dynamic range and high sensitivity in a low frequency region can be obtained.
  • FIG. FIG. 21 is a flowchart for explaining an operation example of the behavior pattern recognition system 1.
  • the sensor device 1A When the system is activated by power-on or the like, the sensor device 1A causes the detection unit (inertial sensor) 40 to cause a gravitational acceleration component (static acceleration component) and a motion acceleration component (dynamic acceleration component) in the local coordinate system of the sensor device 1A. And angular velocity components ( ⁇ x , ⁇ y , ⁇ z ) are detected (step 201). The detected gravitational acceleration component, motion acceleration component, and angular velocity component are output to the control unit 50.
  • a gravitational acceleration component static acceleration component
  • a motion acceleration component dynamic acceleration component
  • angular velocity components ⁇ x , ⁇ y , ⁇ z
  • step 201 the gravitational acceleration component (static acceleration component) and the motion acceleration component (dynamic acceleration component) are detected by using the first and second acceleration detection signals detected by the acceleration sensor element 10 as the gravitational acceleration component ( The static acceleration component) and the motion acceleration component (dynamic acceleration component) are separated, and this separation is performed by the processing method described above with reference to FIG.
  • the angular velocity component is detected by the angular velocity sensor element 30.
  • the separation or extraction of the dynamic acceleration component and the static acceleration component may be executed inside the control unit 50.
  • the angular velocity signals ( ⁇ -x, ⁇ -y, ⁇ -z) supplied to the control unit 50 are input to the attitude angle calculation unit 51.
  • the posture angle calculation unit 51 calculates posture angles ( ⁇ x , ⁇ y , ⁇ z ) from the angular velocity signals ( ⁇ -x, ⁇ -y, ⁇ -z) (step 202).
  • the calculated posture angles ( ⁇ x , ⁇ y , ⁇ z ) are input to the vector rotation unit 52.
  • the dynamic acceleration components (Acc-x, Acc-y, Acc-z) supplied to the control unit 50 are input to the vector rotation unit 52.
  • the vector rotation unit 52 rotates the input dynamic acceleration components (Acc-x, Acc-y, Acc-z) and rotation angle components ( ⁇ x , ⁇ y , ⁇ z ) with respect to the direction of gravity as a reference. Normalized motion acceleration that is not affected by gravity (dynamic acceleration) and normalized posture angle that is not affected by gravity, and calculates these values 53 (step 203).
  • the time information acquisition unit 54 acquires the time detected by the detection unit 40 of the sensor device 1A, day information, holiday information, date information, and the like, and outputs these information to the pattern recognition unit 53 ( Step 204). Further, the GIS information acquisition unit 56 acquires GIS (Geographic Information System) information, extracts a geo category code based on the GIS information, and outputs it to the pattern recognition unit 53 (step 205).
  • GIS Geographic Information System
  • the movement / state recognition unit 531 detects an action pattern based on information such as normalized dynamic acceleration, normalized posture angle, and time input to the pattern recognition unit 53. This behavior pattern is input to the behavior pattern determination unit 532.
  • the behavior pattern determination unit 532 determines a behavior pattern class using a determination process based on a learning model based on the behavior pattern input from the movement / situation recognition unit 531 and classifies the behavior pattern (step 206).
  • the pattern recognition unit 53 generates, as a control signal, information that associates the determined action class, the geo category code input from the GIS information acquisition unit 56, and the time information input from the time information acquisition unit 54. And output to the transmitting / receiving unit 101.
  • the terminal device 1B records the control signal input to the terminal device 1B via the transmission / reception unit 404 of the terminal device 1B, and further causes the display unit 407 to display the control signal in a predetermined form, for example, an action history form (step 207). .
  • the movement direction and posture angle of the sensor device in a moving state are detected as relative values with respect to the gravity direction, the movement and posture of the detection target are not affected by gravity. Is detected with high accuracy, and the pattern recognition of the movement of the detection target is facilitated. Thereby, the characteristic movement of the user's action can be captured from the movement of the sensor device 1A.
  • the dynamic acceleration component can be selectively extracted. Then, by normalizing the dynamic acceleration component and the posture angle extracted in this way with respect to the direction of gravity, the normalized dynamic acceleration and the normalized posture angle that are not affected by gravity can be obtained. .
  • the normalized dynamic acceleration and the normalized attitude angle reflect the movement of the user whose movement of the sensor device 1A is almost canceled. Accordingly, the detection target behavior pattern detected based on the normalized dynamic acceleration and the normalized attitude angle is such that the shaking of the sensor device 1A itself is substantially canceled. Accordingly, it is possible to perform pattern recognition with high accuracy. As described above, according to the present embodiment, it is possible to almost accurately grasp only the movement of the detection target regardless of whether the sensor device 1A is fixed to the detection target or not.
  • the senor device 1A (pendant 3) is described as being suspended from the user's neck.
  • the present invention is not limited to this. It may be worn by the user or placed in a breast pocket. Even in such a case, the user's action recognition can be determined with high accuracy. Further, even when the sensor device 1A is embedded in clothes or attached to a hair band or a hair tip, the same effect as described above can be obtained.
  • the sensor device 1A may be placed in the user's bag. Even when the bag is placed in a bicycle cage or the like, it can be recognized that the user is riding the bicycle according to the inclination of the bicycle.
  • the sensor device 1A may be mounted in a logistics cargo. In this case, it is possible to trace the posture, the force (acceleration) applied, etc. during transportation.
  • the acceleration sensor element 10 shown in FIGS. 7 to 9 is used as the sensor element.
  • the configuration is not particularly limited as long as the acceleration in the three-axis direction can be detected.
  • the calculation method for extracting the dynamic acceleration component and the static acceleration component from the acceleration acting on the sensor element is not limited to the above example, and an appropriate calculation method can be adopted.
  • this technique can also take the following structures.
  • (1) Based on the dynamic acceleration component and static acceleration component of the detection target extracted from the acceleration in the three-axis direction of the detection target moving in space, the dynamic acceleration component of the static acceleration component
  • An information processing apparatus comprising: a control unit that calculates a time change and determines the movement of the detection target based on the time change of the dynamic acceleration component.
  • the controller is A calculation unit for calculating a normalized dynamic acceleration obtained by normalizing the dynamic acceleration component in the direction of gravity; A pattern recognition unit that determines a motion of the detection target based on the normalized dynamic acceleration.
  • the calculation unit further calculates a posture angle of the detection target based on information related to an angular velocity around the three axes,
  • the pattern recognition unit determines a motion of the detection target based on the normalized dynamic acceleration and the posture angle.
  • the pattern recognition unit determines an action class of the detection target based on the movement of the detection target.
  • An information processing apparatus further comprising a detection unit attached to the detection target and detecting the acceleration.
  • the detection unit is configured based on the first detection signal having an AC waveform corresponding to the acceleration and the second detection signal having an output waveform in which an AC component corresponding to the acceleration is superimposed on a DC component. It has an acceleration calculation part which extracts a dynamic acceleration component and a static acceleration component about each axial direction. Information processing device.
  • the acceleration calculation unit includes an arithmetic circuit that extracts the static acceleration component from the acceleration based on a difference signal between the first detection signal and the second detection signal.
  • the acceleration calculation unit further includes a gain adjustment circuit that adjusts a gain of each signal so that the first detection signal and the second detection signal have the same level.
  • the acceleration calculation unit further includes a correction circuit that calculates a correction coefficient based on the difference signal and corrects one of the first detection signal and the second detection signal using the correction coefficient. Processing equipment.
  • the information processing apparatus according to any one of (5) to (9) above, The information processing apparatus, wherein the detection unit is non-fixable and portable with respect to the detection target.
  • the detector is An element main body having a movable part that can move by receiving acceleration, a piezoelectric first acceleration detection part that outputs a first detection signal including information related to acceleration in three axial directions acting on the movable part; And a non-piezoelectric second acceleration detection unit that outputs a second detection signal including information related to the acceleration in the three-axis directions acting on the movable unit.
  • the second acceleration detection unit includes a capacitance type acceleration detection element provided in the movable unit.

Abstract

本技術の一形態に係る情報処理システムは、制御部を具備する。上記制御部は、空間内で運動する検出対象の3軸方向の加速度から抽出された前記検出対象の動的加速度成分と静的加速度成分とに基づいて、前記静的加速度成分に対する前記動的加速度成分の時間変化を算出し、前記動的加速度成分の時間変化に基づいて前記検出対象の動きを判定する。

Description

情報処理装置
 本技術は、例えばユーザの行動認識技術に適用される情報処理装置に関する。
 ユーザが携帯または装着するモバイル装置またはウェアラブル装置に搭載された加速度センサなどの検出値を利用して、ユーザの行動を認識する行動認識技術が開発されている(例えば特許文献1参照)。このようなモバイル装置又はウェアラブル装置は、ズボンのポケットにモバイル装置をいれて携帯したり、例えばリストバンドタイプのウェアラブル装置であったりと、ユーザの身体にほぼ固定して携帯されることが前提となっているものが多い。
特開2016-6611号公報
 近年、センサの装着性の自由度が求められている。センサがユーザの身体に固定されない装着形態、例えば、首からぶら下げるタイプのセンサでは、ユーザの動きに加え、センサ自身の振り子運動を含む複雑な動きを検出する。このため、正確なユーザの動きを把握することが困難であった。
 以上のような事情に鑑み、本技術の目的は、検出対象とセンサとの距離が可変なセンサが携帯される場合においても検出対象の動きを正確に把握することができる情報処理装置を提供することにある。
 本技術の一形態に係る情報処理装置は、制御部を具備する。
 上記制御部は、空間内で運動する検出対象の3軸方向の加速度から抽出された前記検出対象の動的加速度成分と静的加速度成分とに基づいて、上記静的加速度成分に対する上記動的加速度成分の時間変化を算出し、上記動的加速度成分の時間変化に基づいて上記検出対象の動きを判定する。
 上記情報処理装置において、制御部は、加速度の静的加速度成分に対する動的加速度成分の時間変化を算出し、上記動的加速度成分の時間変化に基づいて検出対象の動きを判定するように構成されているため、検出対象の動きをより正確に把握することができる。
 上記制御部は、演算部と、パターン認識部とを有してもよい。上記演算部は、上記動的加速度成分を重力方向で正規化した正規化動的加速度を算出する。上記パターン認識部は、上記正規化動的加速度に基づいて上記検出対象の動きを判定する。
 上記演算部は、上記3軸まわりの角速度に関連する情報に基づいて、上記検出対象の姿勢角度をさらに算出してもよい。この場合、上記パターン認識部は、上記正規化動的加速度と上記姿勢角度とに基づいて上記検出対象の動きを判定する。
 上記パターン認識部は、上記検出対象の動きに基づいて上記検出対象の行動クラスを判定するように構成されてもよい。
 上記情報処理装置は、上記検出対象に取り付けられ上記加速度を検出する検出部をさらに具備してもよい。
 上記検出部は、加速度演算部を有してもよい。上記加速度演算部は、上記加速度に応じた交流波形を有する第1の検出信号と、上記加速度に応じた交流成分が直流成分に重畳した出力波形を有する第2の検出信号とに基づいて、上記3軸方向各々について動的加速度成分および静的加速度成分を抽出する。
 上記加速度演算部は、上記第1の検出信号と上記第2の検出信号との差分信号に基づいて、上記加速度から上記静的加速度成分を抽出する演算回路を有してもよい。
 上記加速度演算部は、上記第1の検出信号と上記第2の検出信号とが同一レベルとなるように各信号のゲインを調整するゲイン調整回路をさらに有してもよい。
 上記加速度演算部は、上記差分信号に基づいて補正係数を算出し、上記補正係数を用いて上記第1の検出信号および上記第2の検出信号のいずれか一方を補正する補正回路をさらに有してもよい。
 上記検出部は、上記検出対象に非固定で携帯可能に構成されてもよい。
 上記検出部は、センサ素子を含んでもよい。上記センサ素子は、加速度を受けて運動可能な可動部を有する素子本体と、上記可動部に作用する3軸方向の加速度に関連する情報を含む第1の検出信号を出力する圧電型の第1の加速度検出部と、上記可動部に作用する上記3軸方向の加速度に関連する情報を含む第2の検出信号を出力する非圧電型の第2の加速度検出部と、を有する。
 上記第2の加速度検出部は、上記可動部に設けられたピエゾ抵抗式の加速度検出素子を含んでもよい。
 あるいは、上記第2の加速度検出部は、上記可動部に設けられた静電容量式の加速度検出素子を含んでもよい。
 以上のように、本技術によれば、検出部の動きを正確に把握することができる。
 なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本技術の一実施形態に係る行動パターン認識システムの概略構成を示すブロック図である。 上記行動パターン認識システムの適用例を説明する模式図である。 上記行動パターン認識システムの構成図である。 上記行動パターン認識システムの主要部分の基本構成を示すブロック図である。 上記行動パターン認識システムにより得られる時間波形を説明する図である。 上記行動パターン認識システムに用いられる検出部(慣性センサ)における加速度演算部の一構成例を示す回路図である。 上記慣性センサにおける加速度センサ素子の表面側の概略斜視図である。 上記加速度センサ素子の裏面側の概略斜視図である。 上記加速度センサ素子の平面図である。 上記センサ素子の要部の運動の様子を説明する概略側断面図であり、加速度無印加時を示している。 上記センサ素子の要部の運動の様子を説明する概略側断面図であり、x軸方向に沿った加速度発生時を示している。 上記センサ素子の要部の運動の様子を説明する概略側断面図であり、z軸方向に沿った加速度発生時を示している。 上記慣性センサにおける加速度演算部の一構成例を示す回路図である。 上記加速度演算部における一軸方向についての処理ブロックを示す図である。 検出方式の異なる複数の加速度センサの出力特性を説明する図である。 上記加速度演算部の一作用を説明する図である。 上記加速度演算部の一作用を説明する図である。 上記加速度演算部の一作用を説明する図である。 上記加速度演算部の一作用を説明する図である。 上記加速度演算部の一作用を説明する図である。 上記加速度演算部の一作用を説明する図である。 上記加速度演算部の処理手順の一例を示すフローチャートである。 上記行動パターン認識システムの動作例を説明するフローチャートである。
 以下、本技術に係る実施形態を、図面を参照しながら説明する。本技術は、いわゆる行動認識システム等に適用可能なものであり、検出対象である人やその他の動く物体に携帯させたセンサからの情報から検出対象の運動学的物理量を計測し、その運動学的物理量、例えば検出対象の行動の履歴を記録、表示するものである。
[装置概要]
 図1は、本技術の一実施形態に係る行動パターン認識システムの概略構成を示すブロック図である。図2は、行動パターン認識システムの適用例を説明する模式図である。
 本実施形態の行動パターン認識システム1は、図1に示すように、検出部40と制御部50とを有するセンサデバイス1Aと、表示部407を有する端末装置1Bとにより構成される。行動パターン認識システム1は、空間内で運動する検出対象の運動学的物理量としての例えば検出対象の行動履歴を記録や表示するように構成される。
 センサデバイス1Aは、検出対象に非固定可能で携帯可能に構成される。端末装置1Bは、センサデバイス1Aと無線や有線で通信可能に構成され、典型的には、スマートホンや携帯電話、ノート型PC(パーソナルコンピュータ)等の携帯情報端末で構成される。
 本実施形態においては、検出対象の動きの検出にセンサデバイス1Aを用いているが、センサデバイス1Aに搭載される検出部及びコントローラを端末装置1Bに搭載させてもよく、例えばスマートホン1台で、検出対象の動きの検出及びその検出結果を基にして求められる検出対象の行動履歴等の記録や表示を行うことができる。
 本実施形態では例えば図2に示すように、検出対象であるユーザの首にかけられたペンダント3のペンダントヘッドがセンサデバイス1Aとなっている。センサデバイス1Aは、ユーザの運動に伴って揺れて検出対象からの距離が可変可能にユーザに非固定で携帯される。センサデバイス1Aは、検出対象の運動学的物理量を所定時刻ごとに又は連続的に抽出して端末装置1Bへ送信するように構成される。例えば本実施形態では、センサデバイス1Aから端末装置1Bへ、運動学的物理量としての行動クラス、位置情報及び時刻情報とが対応づけられた情報(行動履歴)が送信される。
 端末装置1Bは、センサデバイス1Aから取得される行動クラス、位置情報及び時刻情報を記録及びユーザへ報知するように構成される。行動クラスには、例えばユーザの歩行動作、走行動作、静止状態、跳躍動作、電車の搭乗や非搭乗、エレベータやエスカレータ等の搭乗、非搭乗、上昇、下降、階段の昇降、スポーツをしている状態、仕事をしている状態などがあげられる。端末装置1Bへ送信された情報は、端末装置1Bで記録され、ユーザが所望の表示形態で視認できるよう表示可能となっている。
 センサデバイス1Aは、筐体と、当該筐体の内部に収容された検出部40と制御部50を備える。
 検出部40は、ローカル座標系の直交3軸(図7におけるx、y及びz軸)方向における速度の時間変化に関連する速度関連情報及び角速度を検出する。
 制御部50は、検出された速度関連情報及び角速度からユーザの運動学的物理量を算出し、この運動学的物理量を制御信号として生成し、出力する。具体的には、本実施形態では、制御部50は、速度関連情報及び角速度情報からユーザの行動パターンを検出し、この行動パターンを予め生成している判定モデルを用いて判定し、クラス分けをする(パターン認識)。
 センサデバイス1Aの携帯方法としては、本実施形態に限定されない。例えば、首かけ式のホルダにセンサデバイスを装着可能としてもよい。また、ワイシャツの胸ポケットやユーザが常に所持する鞄にセンサデバイス1Aをいれて携帯してもよい。また、スマートホンなどの携帯端末にセンサデバイスの機能が組み込まれていてもよい。
 端末装置1Bは表示部407を有し、制御信号に基づきユーザの行動履歴等を表示部407に表示することが可能となっている。
 以下、本実施形態に係る行動パターン認識システム1の詳細について説明する。
[基本構成]
 図3は、行動パターン認識システム1のシステム構成図であり、図4はその主要部分の基本構成を示すブロック図である。行動パターン認識システム1は、センサデバイス1Aと端末装置1Bとを含む。
(センサデバイス)
 センサデバイス1Aは、検出部40と、制御部50と、送受信部101と、内部電源102と、メモリ103と、電源スイッチ(図示略)を有する。
 検出部40は、慣性センサユニット2と、コントローラ20とを有する慣性センサである。
 慣性センサユニット2は、加速度センサ素子10と角速度センサ素子30を有する。加速度センサ素子10は、ローカル座標系における直交3軸方向(図7におけるx、y及びz軸)の加速度を検出する。角速度センサ素子30は、上記3軸まわりの角速度を検出する。コントローラ20は、慣性センサユニット2からの出力を処理する。
 本実施形態の慣性センサユニット2では、各軸の加速度センサ及び角速度センサを個別に構成したが、これに限らず、加速度センサ及び角速度センサは、3軸方向の加速度及び角速度を同時に検出できる単一のセンサでもよい。また、角速度センサ素子30を設けずに加速度センサ素子10を用いて角速度を検出する構成としてもよい。
 検出部40では、慣性センサユニット2の検出結果を基に、速度関連情報として、所定のサンプリング周期で取得したローカル座標系における動的加速度成分(Acc-x、Acc-y、Acc-z)、静的加速度成分(Gr-x、Gr-y、Gr-z)及び角速度信号(ω-x、ω-y、ω-z)をコントローラ20にて算出し、制御部50へ逐次出力する。
 検出部40では、加速度センサ素子10から検出されたセンサデバイス1Aの3軸まわりの、動的加速度成分と静的加速度成分とを含む加速度検出信号を、コントローラ20にて動的加速度成分(Acc-x、Acc-y、Acc-z)と静的加速度成分(Gr-x、Gr-y、Gr-z)とに分離する。加速度センサ素子10の構成及びコントローラ20で行われる動的速度成分と静的加速度成分の分離の詳細については後述する。
 また、検出部40では、角速度センサ素子30から検出されたユーザU(センサデバイス1A)の3軸まわりの角速度検出信号(Gyro-x、Gyro-y、Gyro-z)に基づいて、コントローラ20にて3軸まわりの角速度信号(ω-x、ω-y、ω-z)をそれぞれ算出する。角速度センサ素子30は、x、y及びz軸まわりの角速度(以下、ローカル座標系における角速度成分ともいう)をそれぞれ検出する。角速度センサ素子30には、典型的には振動型ジャイロセンサが用いられるが、これ以外にも、回転コマジャイロセンサ、レーザリングジャイロセンサ、ガスレートジャイロセンサ等が用いられてもよい。
 制御部50は、空間内で運動する検出対象(ペンダント3)の3軸方向の加速度から抽出された検出対象の動的加速度成分と静的加速度成分とに基づいて、上記静的加速度成分に対する上記動的加速度成分の時間変化を算出し、上記動的加速度成分の時間変化に基づいて検出対象の動きを判定する。
 本実施形態において制御部50は、検出部40から出力される動的加速度成分および静的加速度成分を含む速度関連情報と、角速度信号とに基づいて、教師あり学習によって得られた学習モデルを用いたパターン認識を用いて、ユーザの行動パターンをクラス分けし、行動クラスを判定する。
 教師あり学習の学習方法としては、例えばテンプレートマッチング、NN(Neural Network)、HMM(Hidden Markov Model)などの学習モデルを用いた学習方法がある。教師あり学習では、各パターンの学習データ(学習に利用されるデータ)がどのクラスに属するかの正解ラベルと呼ばれる情報を与えて、クラスごとに、そのクラスに属する(属させる)カテゴリの学習データの学習が行われる。
 教師あり学習では、学習に利用する学習データが、予め決められたカテゴリ毎に用意されるとともに、学習に利用する学習モデル(各カテゴリの学習データを学習させる学習モデル)も、予め決められたクラス毎に用意される。教師あり学習によって得られた学習モデルを用いたパターン認識では、ある認識対象のデータに対し、その認識対象のデータに最も適合するテンプレートの正解ラベルを、認識結果として出力する。学習モデルを用いたパターン認識処理では、学習処理の対象となる入力データ及び出力データのセットである教示データが予め用意される。
 制御部50は、姿勢角計算部51と、ベクトル回転部52(演算部)と、パターン認識部53と、時刻情報取得部54と、位置センサ55と、GIS情報取得部56とを有している。
 姿勢角計算部51は、角速度センサ素子30から出力されるローカル座標系における角速度成分(ωx、ωy、ωz)から回転角成分(θx、θy、θz)を算出し、これをベクトル回転部52に出力する。
 ベクトル回転部52は、入力された動的加速度成分(Acc-x、Acc-y、Acc-z)及び回転角成分(θx、θy、θz)を、重力方向を基準としてベクトル回転させて正規化し、重力の影響を受けていない動的加速度(運動加速度)である正規化動的加速度と、重力の影響を受けていない姿勢角度である正規化姿勢角度を算出し、これらをパターン認識部53へ出力する。正規化動的加速度と正規化姿勢角度は、センサデバイス1A自身の揺れ等の動きに係る成分がほぼキャンセルされたユーザの動きに係る情報である。
 ベクトル回転部52は、正規化動的加速度を算出するに際して、検出部40から出力された動的加速度成分(Acc-x、Acc-y、Acc-z)を、実空間におけるグローバル座標系(図2におけるX,Y及びZ軸)方向の動的加速度成分(Acc-X、Acc-Y、Acc-Z)に変換してもよい。この場合、ベクトル回転部52へ入力される回転角成分(θx、θy、θz)が参照されてもよい。また、上記回転角成分(θx、θy、θz)の算出に際しては、例えば検出部40の静止時にキャリブレーション処理が実行されてもよい。これにより重力方向に対する検出部40の回転角を精度よく検出することができる。
 パターン認識部53は、正規化動的加速度と正規化姿勢角度に基づいてユーザの動きあるいは行動パターンを検出し、ユーザUの行動パターンをクラス分けして行動クラスを判定する。判定された運動学的物理量である行動パターンのクラス(行動クラス)と、時刻情報及び位置情報が対応づけられた情報は、送受信部101に送信される。
 時刻情報取得部54は、センサデバイス1Aの検出部40により検出されたときの時刻の情報、曜日の情報、祝日の情報、年月日の情報等を取得し、これらの情報をパターン認識部53に出力する。
 位置センサ55は、ユーザの居場所(以下、現在地)を示す位置情報を連続的又は間欠的に取得する。例えば、現在地の位置情報は、緯度・経度・高度等により表現される。位置センサ55により取得された現在地の位置情報は、GIS情報取得部56に入力される。
 GIS情報取得部56は、GIS(Geographic Information System)情報を取得する。そして、GIS情報取得部56は、取得したGIS情報を用いて現在地の属性を検出する。GIS情報は、例えば地図情報や、人工衛星や現地踏査などで得られた様々な付加情報を含む。GIS情報取得部56は、例えばジオカテゴリコードと呼ばれる識別情報を利用して現在地の属性を表現する。ジオカテゴリコードは場所に関連する情報の種別を分類するための分類コードであり、例えば建造物の種別、地形の形状、地理的特性、地域性等に応じて設定される。
 GIS情報取得部56は、取得したGIS情報を参照し、現在地及び現在地周辺にある建造物などを特定して、その建造物等に対応するジオカテゴリコードを抽出し、パターン認識部53へ出力する。
 パターン認識部53は、動き・状態認識部531と行動パターン判定部532とを有する。ここで、「動き・状態」は、数秒から数分程度の比較的短時間にユーザが行う行動を意味する。例えば、動きとしては、歩き、走り、跳躍、静止、一時停止、姿勢変化、上昇、下降等の行為があげられる。状態としては、例えば、電車、エスカレータ、エレベータ、自転車、車、階段、坂道、平地等があげられる。「行動」は、「動き・状態」よりも長い時間かけてユーザが行う生活行動である。例えば、行動としては、食事、買い物、スポーツ、仕事、目的地への移動等があげられる。
 動き・状態認識部531は、入力された正規化動的加速度と正規化姿勢角度を用いて行動パターンを検出し、これを行動パターン判定部532に入力する。
 行動パターン判定部532には、動き・状況認識部531から行動パターンが入力され、GIS情報取得部56からジオカテゴリコードが入力され、時刻情報取得部54から時刻情報が入力される。行動パターン判定部532は、これらの情報が入力されると、学習モデルに基づく判定処理を利用して行動パターンのクラスを判定する。行動パターン判定部532は、行動パターンのクラス(行動クラス)、位置情報及び時刻情報等を対応づけさせた情報を制御信号として生成し、送受信部101へ出力する。
 学習モデル判定では、機械学習アルゴリズムを用いて行動パターンを判定するための判定モデルを生成し、生成した判定モデルを用いて入力データに対応する行動パターンを判定する。
 機械学習アルゴリズムとしては、例えばk-means法、Nearest Neibor法、SVM(Support Vector Maching)、HMM(Hiden Markov Model)、Boosting、Deep learning等が利用可能である。
 送受信部101は、例えば通信回路及びアンテナを含み、端末装置1B(送受信部404)との通信のためのインタフェースを構成する。送受信部101は、制御部50において判定された行動クラス、位置情報、時刻情報等が対応づけられた情報からなる制御信号を含む出力信号を端末装置1Bへ送信することが可能に構成される。また送受信部101は、端末装置1Bから送信される制御部50の設定情報等を受信することが可能に構成される。
 送受信部101と端末装置1Bの送受信部404との間で行われる通信は、無線でもよく有線であってもよい。無線の通信は、電磁波(赤外線を含む)を利用した通信や、電界を利用した通信でもよい。具体的な方式としては、「Wi-Fi(登録商標)」、「Zigbee(登録商標)」、「Bluetooth(登録商標)」、「Bluetooth Low Energy」、「ANT(登録商標)」、「ANT+(登録商標)」、「EnOcean(登録商標)」などの数百MHz(メガヘルツ)から数GHz(ギガヘルツ)帯を利用する通信方式を例示することができる。NFC(Near Field Communication)等の近接無線通信でもよい。
 内部電源102は、センサデバイス1Aの駆動に必要な電力を供給する。内部電源102には、一次電池や二次電池等の蓄電素子が用いられてもよいし、振動発電や太陽発電等の発電素子、無給電手段をも含むエネルギーハーベスティング技術が用いられてもよい。特に本実施形態では、動きのある検出対象を測定対象とするものであるから、内部電源102として振動発電デバイス等の環境発電デバイスが好適である。
 メモリ103は、ROM(Read Only Memory)及びRAM(Random Access Memory)等を有し、速度関連情報から軌跡画像信号(制御信号)を生成するためのプログラム等の制御部50によるセンサデバイス1Aの制御を実行するためのプログラム、各種パラメータあるいはデータを記憶する。
(端末装置)
 端末装置1Bは、典型的には携帯情報端末で構成され、CPU401と、メモリ402と、内部電源403と、送受信部404と、カメラ405と、位置情報取得部(GPS(Global Positioning System)装置)406と、表示部407とを有する。
 CPU401は、端末装置1Bの全体の動作を制御する。メモリ402は、ROM及びRAM等を有し、CPU401による端末装置1Bの制御を実行するためのプログラムや各種パラメータあるいはデータを記憶する。内部電源403は、端末装置1Bの駆動に必要な電力を供給するためのもので、典型的には、充放電可能な二次電池で構成される。
 送受信部404は、送受信部101と通信可能な通信回路及びアンテナを含む。送受信部404はさらに、無線LANや移動通信用の3Gや4GのネットワークNを用いて、他の携帯情報端末やサーバ等と通信可能に構成される。
 表示部407は、例えばLCD(Liquid Crystal Display)やOLED(Organic Light Emitting Diode)で構成され、各種メニューやアプリケーションのGUI(Graphic User Interface)等を表示する。典型的には、表示部407は、タッチセンサを有し、ユーザのタッチ操作により、CPU401及び送受信部404を介してセンサデバイス1Aへ所定の設定情報を入力することが可能に構成される。
 表示部407には、送受信部404を介して受信したセンサデバイス1Aからの制御信号に基づいてユーザの行動履歴等が表示される。
 本実施形態のように、センサデバイス1Aが首掛けタイプの場合、ユーザの動きに伴いセンサデバイス1A自身には振り子運動及びその他の複雑な動きが生じ、センサデバイス1Aは人の動きに加えて検出部自身の振り子運動を含む複雑な動きをも検出する。本実施形態においては、重力方向で動的加速度及び姿勢角度を正規化することにより、センサデバイス1A自身の動きがほぼキャンセルされた、正規化動的加速度と正規化姿勢角度を得ることができる。
 すなわち、センサデバイス1Aの傾きと重力方向とは相関が高いと考えると、センサデバイス1Aが捉える重力方向がそのままセンサデバイス1Aの姿勢の揺れとなるので、センサデバイス1Aが検出する検出加速度から重力加速度成分(静的加速度成分)を差し引き、これを重力方向で正規化することにより、センサデバイス1A自身の動きがほぼキャンセルされた正規化動的加速度を得ることができる。
 従って、センサデバイス1A自身の動きがほぼキャンセルされた正規化動的加速度及び正規化姿勢角度から、ユーザの動きを正確に把握することが可能となる。そして、正規化動的加速度及び正規化姿勢角度を用いて検出される行動パターンは、ユーザの動き成分の多い行動パターンとなるので、パターン認識しやすくなり精度の高いパターン認識を行うことができる。
 また、上述の正規化動的加速度には、センサデバイス1Aの規則的な運動である振り子運動の加速度成分は残ってしまうが、この振り子運動の加速度成分はパターン認識の際にノイズとしてキャンセルすることができる。すなわち、センサデバイス1A自身の動きは加速度を伴うが、それはセンサデバイス1Aの姿勢だけをみると、ユーザである人の動きとしてはあり得ない動きをするので、パターン認識をすることにより、このセンサデバイス1Aの振り子運動の加速度成分をノイズとしてキャンセルすることができる。
 次に、本実施形態のように動的加速度成分を正規化することにより得られる時間波形について図5を用いて比較例と比較しながら説明する。
[時間波形]
 図5の各図は、加速度センサ素子を有するセンサデバイスをユーザが携帯した場合の加速度センサ素子が検出する、例えばX軸方向の検出加速度の時間波形等を示す。
 図5Aは比較例であり、ユーザがセンサデバイス100Aを首掛けにして非固定で携帯し、ユーザが運動状態である場合を示し、ここでは、本実施形態のようにセンサデバイスで検出される検出加速度から抽出された動的加速度成分の正規化が行われていない。この場合では、センサデバイス100A自身の振り子運動を含む複雑な動きと、ユーザの動きとが複合した検出加速度がセンサデバイス100Aによって検出され、図5Aにはその時間波形が不規則な波線で示されている。また、図の下段にあるグラフは、センサデバイス100Aが検出する加速度の周波数特性である。このグラフから、センサデバイス100Aが検出する加速度には、振り子運動及びユーザの動きの周波数に軸の回転が加わっている加速度成分が含まれていることがわかる。
 図5Bは比較例であり、ユーザがセンサデバイス1Aを身体に固定した状態で携帯し、ユーザが運動状態である場合を示し、センサデバイス1A自身の振り子運動等の揺れが発生していない。図5Bに示される不規則な波線は、ユーザの動きに係る加速度の時間波形であり、ここではセンサデバイス1Aの加速度センサ素子10から検出された検出加速度から抽出した動的加速度成分を、ベクトル回転して正規化を施した場合の加速度の時間波形を示している。図5Aと比較して、図5Bは、センサデバイス1Aが固定されている点と、加速度検出信号から動的加速度成分を抽出し、これをベクトル回転して重力方向に正規化を施している点で異なる。また、図の下段にあるグラフは、センサデバイス1Aが検出する加速度の周波数特性であり、ユーザの動きに係る周波数特性が示されている。
 図5Cは、本実施形態に係る例であり、ユーザがセンサデバイス1Aを首掛けにして非固定で携帯し、ユーザが運動状態である場合を示し、センサデバイス1Aにはセンサデバイス1A自身の振り子運動を含む複雑な動きが発生している。図5Cに示される不規則な波線は、センサデバイス1Aの加速度センサ素子10から検出されるセンサデバイス1A自身の振り子運動を含む複雑な動きとユーザの動きに係る加速度とが複合した検出加速度から抽出した動的加速度成分をベクトル回転して正規化を施した正規化動的加速度の時間波形である。図5Aと比較して、図5Cは、加速度検出信号から動的加速度成分を抽出し、これをベクトル回転して重力方向に正規化を施している点で異なる。また、図の下段にあるグラフは、正規化動的加速度の周波数特性である。このグラフから、正規化動的加速度の周波数には、振り子運動及びユーザの動きに係る周波数が含まれていることがわかる。
 図5A及び図5Bに示すように、それぞれの時間波形は類似していない。これに対し、図5B及び図5Cに示すように、それぞれの時間波形は類似しており、更に、周波数特性においては、振り子運動の周波数が図5Cでは重畳するという点だけが異なり、ユーザの動きに係る周波数特性はほぼ同じである。
 これにより、抽出した動的加速度成分を正規化処理していない図5Aの場合では機械学習でパターン認識をするのは困難であるのに対し、抽出した動的加速度成分を正規化処理した図5Cの場合では機械学習でパターン認識をすることが容易であることがわかる。
 したがって、正規化動的加速度を基に検出した行動パターンは、ユーザの動き成分の多い行動パターンとなるので、パターン認識しやすくなり精度の高いパターン認識を行うことができる。
 このように、本実施形態においては、センサデバイス1Aがユーザの身体に非固定で、センサデバイス1Aとユーザとの距離が可変にユーザに携帯されていても、ユーザの動きをほぼ正確に把握することが可能である。したがって、センサデバイス1Aを検出対象の身体に固定する必要がなく、センサデバイス1Aの装着性の自由度が広がる。
[検出部の構成]
 次に、本実施形態に係る検出部(慣性センサ)40の詳細について説明する。図6は、本技術の一実施形態に係る検出部(慣性センサ)40の構成を示すブロック図である。
 図4に示すように、検出部(慣性センサ)40は、加速度センサ素子10と角速度センサ素子30とコントローラ20を有する。ここでは、加速度センサ素子10とコントローラ20について主に説明する。
 本実施形態の加速度センサ素子10は、ローカル座標系(x、y及びz軸)における3軸方向の加速度を検出する加速度センサとして構成される。
 特に本実施形態の加速度センサ素子10は、上記3軸方向の加速度から動的加速度成分と静的加速度成分とをそれぞれ抽出することが可能に構成される。
 ここで、動的加速度成分とは、典型的には、上記加速度のAC成分を意味し、典型的には、上記物体の運動加速度(並進加速度、遠心加速度、接線加速度など)に相当する。一方、静的加速度成分とは、上記加速度のDC成分を意味し、典型的には、重力加速度あるいは重力加速度と推定される加速度に相当する。
 図6に示すように、加速度センサ素子10は、3軸方向の加速度に関連する情報をそれぞれ検出する2種類の加速度検出部(第1の加速度検出部11、第2の加速度検出部12)を有する。角速度センサ素子30は、角速度検出部31を有する。
 第1の加速度検出部11は圧電型の加速度センサであって、x軸方向に平行な加速度に関連する情報を含む信号(Acc-AC-x)、y軸方向に平行な加速度に関連する情報を含む信号(Acc-AC-y)およびz軸方向に平行な加速度に関連する情報を含む信号(Acc-AC-z)をそれぞれ出力する。これらの信号(第1の検出信号)は、各軸の加速度に応じた交流波形を有する。
 一方、第2の加速度検出部12は非圧電型の加速度センサであって、x軸方向に平行な加速度に関連する情報を含む信号(Acc-DC-x)、y軸方向に平行な加速度に関連する情報を含む信号(Acc-DC-y)およびz軸方向に平行な加速度に関連する情報を含む信号(Acc-DC-z)をそれぞれ出力する。これらの信号(第2の検出信号)は、各軸の加速度に応じた交流成分が直流成分に重畳した出力波形を有する。
 コントローラ20は、第1の加速度検出部11の出力(第1の検出信号)と第2の加速度検出部12の出力(第2の検出信号)とに基づいて、上記3軸方向の加速度から動的加速度成分と静的加速度成分とをそれぞれ抽出する加速度演算部200と、3軸まわりの角速度検出信号(Gyro-x、Gyro-y、Gyro-z)に基づいて、3軸まわりの角速度信号(ω-x、ω-y、ω-z)(第3の検出信号)をそれぞれ算出する角速度演算部300を有する。
 なお、コントローラ20は、CPU(Central Processing Unit)、RAM(Random Access Memory)、ROM(Read Only Memory)等のコンピュータに用いられるハードウェア要素および必要なソフトウェアにより実現され得る。CPUに代えて、またはこれに加えて、FPGA(Field Programmable Gate Array)等のPLD(Programmable Logic Device)、あるいは、DSP(Digital Signal Processor)等が用いられてもよい。
(加速度センサ素子)
 続いて、検出部(慣性センサ)40を構成する加速度センサ素子10の詳細について説明する。
 図7~図9はそれぞれ、加速度センサ素子10の構成を概略的に示す表面側の斜視図、裏面側の斜視図、および表面側の平面図である。
 加速度センサ素子10は、素子本体110と、第1の加速度検出部11(第1の検出素子11x1,11x2,11y1,11y2)と、第2の加速度検出部12(第2の検出素子12x1,12x2,12y1,12y2)とを有する。
 素子本体110は、xy平面に平行な主面部111と、その反対側の支持部114とを有する。素子本体110は、典型的には、SOI(Silicon On InsUlator)基板で構成され、主面部111を形成する活性層(シリコン基板)と支持部114を形成する枠状の支持層(シリコン基板)との積層構造を有する。主面部111と支持部114とは厚みが相互に異なり、支持部114が主面部111よりも厚く形成される。
 素子本体110は、加速度を受けて運動することが可能な可動板120(可動部)を有する。可動板120は、主面部111の中央部に設けられ、主面部111を形成する上記活性層を所定形状に加工することで形成される。より具体的に、主面部111に形成された複数の溝部112により、主面部111の中心部に関して対称な形状の複数(本例では4つ)のブレード部121~124を有する可動板120が構成される。主面部111の周縁部は、支持部114とz軸方向に対向するベース部115を構成する。
 支持部114は、図8に示すように、可動板120の裏面を開放する矩形の凹部113を有する枠状に形成される。支持部114は、図示しない支持基板に接合される接合面として構成される。上記支持基板は、センサ素子10とコントローラ20とを電気的に接続する回路基板で構成されてもよいし、当該回路基板と電気的に接続される中継基板あるいはパッケージ基板で構成されてもよい。あるいは、支持部114には当該回路基板や中継基板等と電気的に接続される複数の外部接続端子が設けられてもよい。
 可動板120の各ブレード部121~124は、それぞれ所定形状(本例では概略六角形状)の板片で構成され、Z軸平行な中心軸のまわりに90°間隔で配置される。各ブレード部121~124の厚みは、主面部111を構成する上記活性層の厚みに相当する。各ブレード部121~124は、可動板120の中央部120Cにおいて相互に一体的に接続され、それぞれが一体となって、ベース部115に対して相対移動可能に支持される。
 可動板120は、図8に示すように、重錘部125をさらに有する。重錘部125は、可動板120の中央部裏面および各ブレード部121~124の裏面に一体的に設けられる。重錘部125の大きさ、厚さ等は特に限定されず、可動板120の所望とする振動特性が得られる適宜の大きさに設定される。重錘部125は、例えば、支持部114を形成する上記支持層を所定形状に加工することで形成される。
 可動板120は、図7および図9に示すように、複数(本例では4つ)の橋梁部131~134を介してベース部115に接続される。複数の橋梁部131~134は、ブレード部121~124の間にそれぞれ設けられ、主面部111を形成する上記活性層を所定形状に加工することで形成される。橋梁部131および橋梁部133は、x軸方向に相互に対向して配置され、橋梁部132および橋梁部134は、y軸方向に相互に対向して配置される。
 橋梁部131~134は、ベース部115に対して相対運動可能な可動部の一部を構成し、可動板120の中央部120Cを弾性的に支持する。橋梁部131~134は、それぞれ同一の構成を有し、図9に示すように、第1の梁部130aと、第2の梁部130bと、第3の梁部130cとをそれぞれ有する。
 第1の梁部130aは、可動板120の中央部120Cの周縁部からx軸方向およびy軸方向にそれぞれ直線的に延び、相互に隣接するブレード部121~124の間にそれぞれ配置される。第2の梁部130bは、x軸方向およびy軸方向にそれぞれ直線的に延び、第1の梁部130aとベース部115との間をそれぞれ連結する。
 第3の梁部130cは、x軸方向およびy軸方向にそれぞれ交差する方向にそれぞれ直線的に延び、第1の梁部130aと第2の梁部130bとの中間部と、ベース部115との間をそれぞれ連結する。各橋梁部131~134は、第3の梁部130cを2つずつ有しており、xy平面内において2つの第3の梁部130cが1つの第2の梁部130bを挟み込むように構成される。
 橋絡部131~134の剛性は、運動する可動板120を安定に支持することができる適度な値に設定される。特に、橋絡部131~134は、可動板120の自重で変形することができる適宜の剛性に設定され、その変形の大きさは、後述する第2の加速度検出部12によって検出することが可能であれば、特に限定されない。
 以上のように可動板120は、素子本体110のベース部115に対して4つの橋梁部131~134を介して支持されており、加速度に応じた慣性力によって橋梁部131~134を支点としてベース部115に対して相対的に運動(移動)可能に構成される。
 図10A~Cは、可動板120の運動の様子を説明する概略側断面図であり、Aは加速度無印加時を、Bはx軸方向に沿った加速度発生時を、そしてCはz軸方向に沿った加速度発生時を、それぞれ示している。なお、図10Bにおいて実線は、紙面左方向に加速度が発生したときの様子を示し、図10Cにおいて実線は、紙面上方向に加速度が発生したときの様子を示している。
 加速度が発生していないとき、可動板120は、図7および図10Aに示すようにベース部115の表面と平行な状態に維持される。この状態で、例えばx軸方向に沿った加速度が発生すると、可動板120は、図10Bに示すようにy軸方向に延びる橋梁部132,134を中心として反時計まわりに傾斜する。これにより、x軸方向に相互に対向する橋梁部131,133は、それぞれz軸方向に沿って互いに反対方向への曲げ応力を受ける。
 同様に、y軸方向に沿った加速度が発生すると、図示せずとも、可動板120は、x軸方向に延びる橋梁部131,133を中心として反時計まわり(又は時計まわり)に傾斜し、y軸方向に相互に対向する橋梁部132,134は、それぞれz軸方向に沿って互いに反対方向への曲げ応力を受ける。
 一方、z軸方向に沿った加速度が発生すると、可動板120は、図10Cに示すようにベース部115に対して昇降し、各橋梁部131~134は、それぞれz軸方向に沿って同一方向への曲げ応力を受ける。
 第1の加速度検出部11および第2の加速度検出部12は、橋梁部131~134にそれぞれ設けられる。検出部(慣性センサ)40は、橋梁部131~134の曲げ応力に起因する変形を加速度検出部11,12で検出することで、センサ素子10に作用する加速度の向きと大きさを測定する。
 以下、加速度検出部11,12の詳細について説明する。
 第1の加速度検出部11は、図9に示すように、複数(本例では4つ)の第1の検出素子11x1,11x2、11y1、11y2を有する。
 検出素子11x1,11x2は、x軸方向に相互に対向する2つの橋梁部131,133の表面の軸心上に設けられ、一方の検出素子11x1は橋梁部131における第1の梁部130aに、他方の検出素子11x2は橋梁部133における第1の梁部130aにそれぞれ配置される。これに対して、検出素子11y1,11y2は、y軸方向に相互に対向する2つの橋梁部132,134の表面の軸心上に設けられ、一方の検出素子11y1は橋梁部132における第1の梁部130aに、他方の検出素子11y2は橋梁部134における第1の梁部130aにそれぞれ配置される。
 第1の検出素子11x1~11y2は、それぞれ同一の構成を有しており、本実施形態では、第1の梁部130aの軸心方向に長辺を有する矩形の圧電型検出素子で構成される。第1の検出素子11x1~11y2は、下部電極層と、圧電膜と、上部電極層との積層体で構成される。
 圧電膜は、典型的には、チタン酸ジルコン酸鉛(PZT)で構成されるが、勿論これに限られない。圧電膜は、第1の梁部130aのz軸方向への曲げ変形量(応力)に応じた電位差を上部電極層と下部電極層との間に生じさせる(圧電効果)。上部電極層は、橋梁部131~134上に形成された図示しない配線層を介して、ベース部115の表面に設けられた中継端子140にそれぞれ電気的に接続される。中継端子140は、上記支持基板に電気的に接続される外部接続端子として構成されてもよく、例えば、上記支持基板に一端が接続されるボンディングワイヤの他端が接続される。下部電極層は、典型的には、グランド電位等の基準電位に接続される。
 以上のように構成される第1の加速度検出部11は、圧電膜の特性上応力変化が有った時のみ出力し、応力が掛かっていても、応力値が変化していない状態では出力しない為、主として、可動板120に作用する運動加速度の大きさを検出する。したがって、第1の加速度検出部11の出力(第1の検出信号)は、運動加速度に応じた動的成分(AC成分)である交流波形を有する出力信号を主として含む。
 一方、第2の加速度検出部12は、図9に示すように、複数(本例では4つ)の第2の検出素子12x1,12x2,12y1,12y2を有する。
 検出素子12x1,12x2は、x軸方向に相互に対向する2つの橋梁部131,133の表面の軸心上に設けられ、一方の検出素子12x1は橋梁部131における第2の梁部130bに、他方の検出素子12x2は橋梁部133における第2の梁部130bにそれぞれ配置される。これに対して、検出素子12y1,12y2は、y軸方向に相互に対向する2つの橋梁部132,134の表面の軸心上に設けられ、一方の検出素子12y1は橋梁部132における第2の梁部130bに、他方の検出素子12y2は橋梁部134における第2の梁部130bにそれぞれ配置される。
 第2の検出素子12x1~12y2は、それぞれ同一の構成を有しており、本実施形態では、第2の梁部130bの軸心方向に長辺を有するピエゾ抵抗型検出素子で構成される。第2の検出素子12x1~12y2は、抵抗層と、その軸方向の両端に接続された一対の端子部とを有する。
 抵抗層は、例えば、第2の梁部130bの表面(シリコン層)に不純物元素をドーピングすることで形成された導体層であり、第2の梁部130bのz軸方向への曲げ変形量(応力)に応じた抵抗変化を上記一対の端子部間に生じさせる(ピエゾ抵抗効果)。一対の端子部は、橋梁部131~134上に形成された図示しない配線層を介して、ベース部115の表面に設けられた中継端子140にそれぞれ電気的に接続される。
 以上のように構成される第2の加速度検出部12は、ピエゾ抵抗の特性上、絶対的応力値で抵抗値が決定する為、可動板120に作用する運動加速度だけでなく、可動板120に作用する重力加速度をも検出する。したがって、第2の加速度検出部11の出力(第2の検出信号)は、運動加速度に応じた動的成分(AC成分)が、重力加速度あるいはそれに相当する静的成分(DC成分)に重畳した出力波形を有する。
 なお、第2の検出素子12x1~12y2は、ピエゾ抵抗型の検出素子で構成される例に限られず、例えば静電型のようにDC成分の加速度を検出可能な他の非圧電式の検出素子で構成されてもよい。静電型の場合、電極対を構成する可動電極部および固定電極部は、第2の梁部130bの軸方向に対向して配置され、第2の梁部130bの上記曲げ変形量に応じて両電極部間の対向距離が変化するように構成される。
 第1の加速度検出部11は、第1の検出素子11x1~11y2の出力に基づいて、x軸方向、y軸方向およびz軸方向各々の加速度検出信号(Acc-AC-x、Acc-AC-y、Acc-AC-z)をコントローラ20へそれぞれ出力する(図5参照)。
 x軸方向の加速度検出信号(Acc-AC-x)は、検出素子11x1の出力(ax1)と検出素子11x2の出力(ax2)との差分信号(ax1-ax2)に相当する。y軸方向の加速度検出信号(Acc-AC-y)は、検出素子11y1の出力(ay1)と検出素子11y2の出力(ay2)との差分信号(ay1-ay2)に相当する。そして、z軸方向の加速度検出信号(Acc-AC-z)は、検出素子11x1~11y2の出力の総和(ax1+ax2+ay1+ay2)に相当する。
 同様に、第2の加速度検出部12は、第2の検出素子12x1~12y2の出力に基づいて、x軸方向、y軸方向およびz軸方向各々の加速度検出信号(Acc-DC-x、Acc-DC-y、Acc-DC-z)をコントローラ20へそれぞれ出力する(図5参照)。
 x軸方向の加速度検出信号(Acc-DC-x)は、検出素子12x1の出力(bx1)と検出素子12x2の出力(bx2)との差分信号(bx1-bx2)に相当する。y軸方向の加速度検出信号(Acc-DC-y)は、検出素子12y1の出力(by1)と検出素子12y2の出力(by2)との差分信号(by1-by2)に相当する。そして、z軸方向の加速度検出信号(Acc-DC-z)は、検出素子12x1~12y2の出力の総和(bx1+bx2+by1+by2)に相当する。
 上記各軸方向の加速度検出信号の演算処理は、制御部50の前段で実行されてもよいし、制御部50において実行されてもよい。
(コントローラ)
 続いて、コントローラ(信号処理回路)20について説明する。
 コントローラ20は、加速度センサ素子10と電気的に接続されている。コントローラ20は、加速度センサ素子10と共通に機器の内部に搭載されてもよいし、上記機器とは異なる外部機器に搭載されてもよい。前者の場合、コントローラ20は、例えば、加速度センサ素子10が実装される回路基板上に実装されてもよいし、配線ケーブル等を介して上記回路基板とは異なる基板上に実装される。後者の場合、コントローラ20は、例えば、加速度センサ素子10と無線または有線で通信可能に構成される。
 コントローラ20は、加速度演算部200と、角速度演算部300と、シリアルインタフェース201と、パラレルインタフェース202と、アナログインタフェース203とを有する。コントローラ20は、検出部(慣性センサ)40の出力を受信する各種機器の制御ユニットに電気的に接続される。
 加速度演算部200は、第1の加速度検出部11および第2の加速度検出部12から出力される各軸方向の加速度検出信号に基づいて、動的加速度成分(Acc-x、Acc-y、Acc-z)および静的加速度成分(Gr-x、Gr-y、Gr-z)をそれぞれ抽出する。
 なお、加速度演算部200は、非一過性のコンピュータ読み取り可能な記録媒体の一例であるROMに記録されたプログラムをRAM等にロードしてCPUが実行することにより実現される。
 角速度演算部300は、3軸まわりの角速度検出信号(Gyro-x、Gyro-y、Gyro-z)に基づいて、3軸まわりの角速度信号(ω-x、ω-y、ω-z)をそれぞれ算出し、シリアルインタフェース201、パラレルインタフェース202あるいはアナログインタフェース203を介して外部へ出力する。角速度演算部300は、加速度演算部200と別個に構成されてもよいし、加速度演算部200と共通の演算部230で構成されてもよい。
 シリアルインタフェース201は、加速度演算部200において生成された各軸の動的および静的加速度成分、角速度演算部300において生成された各軸の角速度信号を上記制御ユニットへ逐次的に出力可能に構成される。パラレルインタフェース202は、加速度演算部200において生成された各軸の動的および静的加速度成分を上記制御ユニットへ並列的に出力可能に構成される。コントローラ20は、シリアルインタフェース201およびパラレルインタフェース202のうち、少なくとも一方だけ備えていてもよいし、上記制御ユニットからの指令によって選択的に切り替えてもよい。アナログインタフェース203は、第1および第2の加速度検出部11,12の出力をそのまま上記制御ユニットへ出力可能に構成されるが、必要に応じて省略されてもよい。なお、図5において符号204は、上記各軸の加速度検出信号をAD(Analog-Digital)変換するコンバータである。
 図11は、加速度演算部200の一構成例を示す回路図である。
 加速度演算部200は、ゲイン調整回路21と、符号反転回路22と、加算回路23と、補正回路24とを有する。これらの回路21~24は、x、yおよびzの各軸について共通の構成を有しており、各軸において共通の演算処理を行うことで、各軸の動的加速度成分(運動加速度)および静的加速度成分(重力加速度)が抽出される。
 以下、代表的に、x軸方向の加速度検出信号の処理回路を例に挙げて説明する。図12に、x軸方向の加速度検出信号から静的加速度成分を抽出する処理ブロックを示す。
 ゲイン調整回路21は、第1の加速度検出部11(11x1,11x2)から出力されるX軸方向に関する第1の加速度検出信号(Acc-AC-x)と、第2の加速度検出部12(12x1,12x2)から出力されるx軸方向に関する第2の加速度検出信号(Acc-DC-x)とが相互に同一レベルとなるように各信号のゲインを調整する。ゲイン調整回路21は、第1の加速検出部11の出力(Acc-AC-x)および第2の加速度検出部12の出力(Acc-DC-x)を増幅する増幅器を有する。
 一般に、加速度センサの出力感度およびダイナミックレンジは検出方式によって相違し、例えば図13に示すように、圧電方式の加速度センサにおいては、非圧電方式(ピエゾ抵抗方式、静電方式)の加速度センサよりも、出力感度が高く、ダイナミックレンジが広い(大きい)。本実施形態において、第1の加速度検出部11は圧電方式の加速度センサに相当し、第2の加速度検出部12はピエゾ抵抗方式の加速度センサに相当する。
 そこでゲイン調整回路21は、これら加速度検出部11,12各々の出力が同一レベルとなるように各加速度検出部11,12の出力(第1および第2の加速度検出信号)をそれぞれN倍およびM倍に増幅する。増幅率N,Mは正数であり、N<Mの関係を満たす。増幅率N,Mの値は特に限定されず、検出部(慣性センサ)40の使用環境(使用温度)によっては、各加速度検出部11,12の温度補償をも兼ねる係数として設定されてもよい。
 図14は、第1の加速度検出信号および第2の加速度検出信号の出力特性の一例であって、ゲイン調整前の出力特性とゲイン調整後の出力特性とを比較して示している。図において横軸は、検出部(慣性センサ)40に作用する加速度の周波数を、縦軸は出力(感度)をそれぞれ示す(図15~図19についても同様)。
 同図に示すように、圧電方式の第1の加速度検出信号(Acc-AC-x)では、0.5Hz以下の低周波数領域の加速度成分の出力感度は、それよりも高い周波数領域の加速度成分の出力感度よりも低く、特に静止状態(運動加速度0)のときの出力感度はほぼ0である。これに対して、ピエゾ抵抗方式の第2の加速度検出信号(Acc-DC-x)は、全周波数領域において一定の出力感度を有するため、静止状態における加速度成分(つまり静的加速度成分)も一定の出力感度で検出することができる。したがって、ゲイン調整回路21において第1の加速度検出信号および第2の加速度検出信号をそれぞれ同一の出力レベルとなるように各々所定の倍率で増幅することで、後述する差分演算回路において静的加速度成分を抽出することが可能となる。
 符号反転回路22および加算回路23は、第1の加速度検出信号(Acc-AC-x)と第2の加速度検出信号(Acc-DC-x)との差分信号に基づいて、各軸方向の加速度から静的加速度成分(DC成分)を抽出する差分演算回路を構成する。
 符号反転回路22は、ゲイン調整後の第1の加速度検出信号(Acc-AC-x)の符号を反転する反転増幅器(増幅率:-1)を有する。図15に、符号反転後の第1の加速度検出信号(Acc-AC-x)の出力特性の一例を示す。ここでは、センサ素子10がx軸方向に1Gの加速度を検出する場合を例に挙げて示す。
 なお、第2の加速度検出信号(Acc-DC-x)は、その符号が反転されることなく、後段の加算回路23へ出力される。符号反転回路22は、その前段のゲイン調整回路21と共通に構成されてもよい。
 加算回路23は、符号反転回路22から出力される第1の加速度検出信号(Acc-AC-x)と第2の加速度検出信号(Acc-DC-x)とを加算して、静的加速度成分を出力する。図16に、加算回路23の出力特性の一例を示す。ゲイン調整回路21において第1および第2の加速度検出信号が同一レベルに調整されているため、これらの差分信号を得ることで、正味の静的加速度成分(Gr-x)が抽出されることになる。この静的加速度成分は、典型的には、重力加速度成分、あるいは重力加速度を含む加速度成分に相当する。
 加算回路23から出力される静的加速度成分が重力加速度のみである場合、理論的には図17に示すように、0Hz付近にのみ有意の加速度成分の出力が現れることなる。しかし実際には、圧電検出型の第1の加速度検出部11の低周波付近での検出感度が低いこと、他軸感度の発生により対象軸以外の軸方向(ここでは、y軸方向およびz軸方向)の加速度成分が不可避的に重畳すること等の理由により、図16においてハッチングで示す周波数領域の動的加速度成分が誤差成分として加算回路23の出力に漏れ込む。そこで本実施形態では、加算回路23の出力に基づいて当該誤差分をキャンセルするための補正回路24を有する。
 補正回路24は、3軸合成値演算部241と、低域感度補正部242とを有する。補正回路24は、加算回路23の出力(第1および第2の加速度検出信号の差分信号)に基づいて補正係数βを算出し、この補正係数βを用いて第1の加速度検出信号(Acc-AC-x)を補正する。
 3軸合成値演算部241は、x軸、y軸およびz軸方向すべての静的加速度成分を抽出する処理ブロックについて共通に設けられ、各軸における加算回路23の出力(第1および第2の加速度検出信号の差分信号)の合計値を用いて補正係数βを算出する。
 具体的に、3軸合成値演算部241は、3軸方向の静的加速度成分(Gr-x、Gr-y、Gr-z)の合成値(√((Gr-x)+(Gr-y)+(Gr-z)))を算出し、その合成値が1を超える分を、低域感度誤差分(図15におけるハッチングで示す領域)とみなして、上記合成値の逆数に相当する補正係数βを算出する。
  β=1/(√((Gr-x)+(Gr-y)+(Gr-z)))
 なお、3軸方向各々の静的加速度成分(Gr-x、Gr-y、Gr-z)の値は、加速度センサ素子10の姿勢によって異なり、また、加速度センサ素子10の姿勢変化に応じて時々刻々と変化する。例えば、加速度センサ素子10のz軸方向が重力方向(鉛直方向)と一致する場合には、x軸方向およびy軸方向の静的加速度成分(Gr-x、Gr-y)よりも、z軸方向の静的加速度成分(Gr-z)が最も大きな値を示す。このように3軸方向各々の静的加速度成分(Gr-x、Gr-y、Gr-z)の値から、その時刻における加速度センサ素子10の重力方向を推定することが可能となる。
 低域感度補正部242は、補正係数βを符号反転された第1の加速度検出信号(Acc-AC-x)に乗ずる乗算器を有する。これにより第1の加速度検出信号は、低域感度誤差が減殺された状態で加算回路23へ入力されるため、加算回路23から図17に示すような周波数特性の加速度信号が出力される。このように重力加速度に相当する静的加速度成分のみが出力される結果、重力加速度成分の抽出精度が向上する。
 本実施形態において補正回路24は、静的加速度成分の演算に際して、第1の加速度検出信号に補正係数βを乗ずる処理を実行するように構成されているが、これに限られず、第2の加速度検出信号(Acc-DC-x)に補正係数βを乗ずる処理を実行するように構成されてもよいし、加速度変化の大きさに応じて、補正すべき加速度検出信号が第1の加速度検出信号と第2の加速度検出信号との間で切り替えられてもよい。
 補正回路24は、第1の加速度検出信号および第2の加速度検出信号のいずれか一方の加速度変化が所定以上の場合には、補正係数βを用いて第1の加速度検出信号を補正するように構成される。加速度変化が大きい(印加周波数が高い)ほど、第1の加速度検出信号に誤差成分が漏れ込む割合が高まるため、当該誤差成分を効率よく減殺することができる。当該構成は、例えば運動解析用途のように、運動加速度が比較的大きい場合に特に有効である。
 一方、補正回路24は、第1の加速度検出信号および第2の加速度検出信号のいずれか一方の加速度変化が所定以下の場合には、補正係数βを用いて第2の加速度検出信号を補正するように構成される。加速度変化が小さい(印加周波数が低い)ほど、第2の加速度検出信号に誤差成分が漏れ込む割合が高まるため、当該誤差成分を効率よく減殺することができる。当該構成は、例えばデジタルカメラの水平出し動作のように、運動加速度が比較的小さい場合に特に有効である。
 各軸方向の静的加速度成分は以上のようにして抽出されるが、各軸方向の動的加速度成分(Acc-x、Acc-y、Acc-z)の抽出には、図11に示すように、ゲイン調整回路21においてゲイン調整された第1の加速度検出信号(Acc-AC-x、Acc-AC-y、Acc-AC-z)が参照される。
 ここで、動的加速度成分の抽出に第1の加速度検出信号がそのまま用いられてもよいが、上述のように動的加速度成分の一部が静的加速度成分に漏れ込む場合があるため、動的加速度成分が目減りして高精度な検出が困難になる。そこで、補正回路24において算出される補正係数βを用いて、第1の加速度検出信号を補正することで、動的加速度成分の検出精度を図ることが可能となる。
 より具体的に、補正回路24(低域感度補正部242)は、図11に示すように、3軸合成値演算部241で取得した補正係数βの逆数(1/β)を第1の加速度信号(Acc-AC-x、Acc-AC-y、Acc-AC-z)に乗ずる乗算器を有する。これにより、第1の加速度信号の低域感度成分が補償されるため、動的加速度成分(Acc-x、Acc-y、Acc-z)の抽出精度が向上する。図18に、その動的加速度成分の出力特性を模式的に示す。
 本実施形態において補正回路24は、動的加速度成分の演算に際して、第1の加速度検出信号に補正係数の逆数(1/β)を乗ずる処理を実行するように構成されているが、これに限られず、第2の加速度検出信号(Acc-DC-x、Acc-DC-y、Acc-DC-z)に補正係数の逆数(1/β)を乗ずる処理を実行するように構成されてもよい。あるいは、上述の静的加速度成分の演算手法と同様に、加速度変化の大きさに応じて、補正すべき加速度検出信号が第1の加速度検出信号と第2の加速度検出信号との間で切り替えられてもよい。
 低域感度補正部242による動的加速度成分および静的加速度成分の補正処理は、典型的には、3軸合成値演算部241で算出される合成値が1G(G:重力加速度)以外の場合に有効とされる。なお、上記合成値が1G未満となる場合としては、例えばセンサ素子10が自由落下しているときなどが挙げられる。
 なお、圧電方式で検出された第1の加速度検出信号は、ハイパスフィルタ(HPF)的な出力特性を有し、そのカットオフ周波数以下の出力が低域感度の誤差成分として加算回路23の出力に残存する(図16参照)。本実施形態では補正回路24を用いた演算的な手法で上記誤差成分が減殺されるが、当該誤差成分のキャンセリング精度を高める上で上記カットオフ周波数は低いほど好ましい。
 そこで、第1の加速度検出部11を構成する検出素子(11x1,11x2,11y1,11y2)の圧電膜として、例えば、容量および内部抵抗が比較的大きい圧電体が用いられてもよい。これにより、例えば図19において一点鎖線で示すように、低域感度のカットオフ周波数を極力0Hz付近まで低くすることができるため、低域感度の誤差成分を極力小さくすることが可能となる。
 次に、以上のように構成される加速度演算部200における加速度信号の処理方法について説明する。
 加速度センサ素子10に加速度が作用すると、可動板120はベース部115に対して加速度の方向に応じて図10A~Cに示す態様で運動する。第1の加速度検出部11(検出素子11x1,11x2,11y1,11y2)および第2の加速度検出部12(検出素子12x1,12x2,12y1,12y2)は、橋梁部131~134の機械的変形量に応じた検出信号をコントローラ20へ出力する。
 図20は、コントローラ20(加速度演算部200)における加速度検出信号の処理手順の一例を示すフローチャートである。
 コントローラ20は、所定のサンプリング間隔で、第1の加速度検出部11からは各軸の第1の加速度検出信号(Acc-AC-x、Acc-AC-y、Acc-AC-z)を取得し、第2の加速度検出部12からは各軸の第2の加速度検出信号(Acc-DC-x、Acc-DC-y、Acc-DC-z)を受信(取得)する(ステップ101,102)。これら検出信号の取得は、同時に(並列的に)行われてもよいし、順次的に(直列的に)行われてもよい。
 続いてコントローラ20は、各軸について第1および第2の加速度検出信号が同一レベルとなるように各検出信号のゲインをゲイン調整回路21において調整する(図14、ステップ103,104)。また必要に応じて、各軸について第1および第2の加速度検出信号の温度補償等を目的とした補正が行われる(ステップ105,106)。
 次に、コントローラ20は、各軸の第1の加速度検出信号(Acc-AC-x、Acc-AC-y、Acc-AC-z)を動的加速度算出系統(運動加速度系統)と静的加速度算出系統(重力加速度系統)とにそれぞれ分岐する(ステップ107,108)。静的加速度算出系統に分岐した第1の加速度検出信号は、符号反転回路22において符号が反転された後、加算回路23に入力される(図15、ステップ109)。
 コントローラ20は、加算回路23において、各軸について、符号反転された第1の加速度検出信号(Acc-AC-x、Acc-AC-y、Acc-AC-z)と、第2の加速度検出信号(Acc-DC-x、Acc-DC-y、Acc-DC-z)とを加算して静的加速度成分(Gr-x、Gr-y、Gr-z)を算出する(図16、ステップ110)。さらにコントローラ20は、3軸合成値演算部241においてこれら静的加速度成分の3軸合成値を演算し(ステップ111)、その値が1G以外の場合は、低域感度補正部242において上記合成値の逆数である補正係数βを上記符号反転された第1の加速度検出信号(Acc-AC-x、Acc-AC-y、Acc-AC-z)に乗ずる処理を実行する(ステップ112,113)。コントローラ20は、上記合成値が1Gのとき、算出された重力加速度成分(静的加速度成分)を外部へ出力する(ステップ114)。なおこれに限られず、上記合成値を算出する毎に、算出された重力加速度成分(静的加速度成分)が外部へ出力されてもよい。
 一方、コントローラ20は、上記合成値が1G以外のとき、算出された補正係数βの逆数(1/β)を、運動加速度系統に分岐した第1の加速度検出信号(Acc-AC-x、Acc-AC-y、Acc-AC-z)に乗じる処理を実行する(ステップ112、115)。コントローラ20は、上記合成値が1Gのとき、算出された運動加速度成分(動的加速度成分)を外部へ出力する(ステップ116)。なおこれに限られず、上記合成値を算出する毎に、算出された運動加速度成分(動的加速度成分)が外部へ出力されてもよい。
 以上のように本実施形態の検出部(慣性センサ)40は、第1および第2の加速度検出部11,12の検出方式の違いを利用することで、これらの出力から動的加速度成分と静的加速度成分とを抽出するように構成される。これにより、検出対象であるユーザUに作用する運動加速度を精度よく測定することができる。
 また、本実施形態によれば、検出部(慣性センサ)40の出力から重力加速度成分を精度よく抽出することができるため、重力方向に対する検出対象の姿勢を高精度に検出することができる。これにより、例えば飛行体のような検出対象の水平姿勢を安定に維持することができるようになる。
 さらに本実施形態によれば、第1の加速度検出部11に圧電型の加速度センサが採用され、第2の加速度検出部12として非圧電型(ピエゾ抵抗型あるいは静電容量型)の加速度センサが採用されているため、ダイナミックレンジが広く、しかも低周波領域での感度が高い慣性センサを得ることができる。
[行動パターン認識システムの動作]
 続いて、以上のように構成される行動パターン認識システム1の典型的な動作について図20及び図21を用いて説明する。図21は、行動パターン認識システム1の動作例を説明するフローチャートである。
 電源投入等によりシステムが起動すると、センサデバイス1Aは、検出部(慣性センサ)40によって、センサデバイス1Aのローカル座標系における重力加速度成分(静的加速度成分)と運動加速度成分(動的加速度成分)と角速度成分(ωx、ωy、ωz)を検出する(ステップ201)。検出された重力加速度成分、運動加速度成分及び角速度成分は制御部50へ出力される。
 ステップ201において、重力加速度成分(静的加速度成分)と運動加速度成分(動的加速度成分)の検出は、加速度センサ素子10で検出される第1及び第2の加速度検出信号を、重力加速度成分(静的加速度成分)と運動加速度成分(動的加速度成分)とに分離して行われ、この分離は、上述で図20を用いて説明した処理方法により行われる。また、角速度成分は、角速度センサ素子30で検出される。なお、これら動的加速度成分と静的加速度成分の分離あるいは抽出は、制御部50の内部で実行されてもよい。
 制御部50へ供給された角速度信号(ω-x、ω-y、ω-z)は姿勢角計算部51に入力される。姿勢角計算部51は、角速度信号(ω-x、ω-y、ω-z)から姿勢角度(θx、θy、θz)を算出する(ステップ202)。算出された姿勢角度(θx、θy、θz)はベクトル回転部52へ入力される。
 制御部50へ供給された動的加速度成分(Acc-x、Acc-y、Acc-z)はベクトル回転部52に入力される。ベクトル回転部52は、入力された動的加速度成分(Acc-x、Acc-y、Acc-z)及び回転角成分(θx、θy、θz)を、重力方向を基準としてベクトル回転させて正規化し、重力の影響を受けていない運動加速度(動的加速度)である正規化動的加速度と重力の影響を受けていない姿勢角度である正規化姿勢角度を算出し、これらをパターン認識部53へ出力する(ステップ203)。
 時刻情報取得部54は、センサデバイス1Aの検出部40により検出された時刻、曜日の情報、祝日の情報、年月日の情報等を取得し、これらの情報をパターン認識部53に出力する(ステップ204)。さらに、GIS情報取得部56は、GIS(Geographic Information System)情報を取得し、これを基にジオカテゴリコードを抽出し、パターン認識部53へ出力する(ステップ205)。
 パターン認識部53に入力された正規化動的加速度及び正規化姿勢角度、時刻等の情報を基に、動き・状態認識部531によって行動パターンが検出される。この行動パターンは行動パターン判定部532へ入力される。行動パターン判定部532は、動き・状況認識部531から入力された行動パターンを基に学習モデルに基づく判定処理を利用して行動パターンのクラスを判定し、クラス分けをする(ステップ206)。パターン認識部53は、判定された行動クラスと、GIS情報取得部56から入力されたジオカテゴリコードと、時刻情報取得部54から入力された時刻情報を対応づけさせた情報を制御信号として生成し、送受信部101へ出力する。
 端末装置1Bは、端末装置1Bの送受信部404を介して端末装置1Bに入力された制御信号を記録し、更に、表示部407に所定の形態、例えば行動履歴の形態で表示させる(ステップ207)。
 以上のように本実施形態においては、動いている状態のセンサデバイスの運動方向および姿勢角度が重力方向との相対値として検出されるので、重力の影響を受けることなく、検出対象の動きや姿勢が高精度に検出されるとともに、検出対象の動きのパターン認識が容易となる。これにより、センサデバイス1Aの動きからユーザの行動の特徴的な運動をとらえることができる。
 本実施形態によれば、動的加速度成分と静的加速度成分とがほぼ分離できる検出部(慣性センサ)40を備えているので、動的加速度成分を選択的に抽出することができる。そして、このように抽出された動的加速度成分と姿勢角度をそれぞれ重力方向を基準として正規化することにより、重力の影響を受けていない正規化動的加速度及び正規化姿勢角度を求めることができる。
 正規化動的加速度及び正規化姿勢角度には、センサデバイス1A自身の動きがほぼキャンセルされたユーザの動きが反映されたものとなっている。したがって、このような正規化動的加速度及び正規化姿勢角度を基に検出される検出対象の行動パターンは、センサデバイス1A自身の揺れがほぼキャンセルされたものとなっている。従って、精度のよいパターン認識をすることが可能となる。このように本実施形態によれば、センサデバイス1Aの検出対象への固定、非固定といった形態にかかわらず、検出対象の動きのみをほぼ正確に把握することができる。
 以上、本技術の実施形態について説明したが、本技術は上述の実施形態にのみ限定されるものではなく、種々変更を加え得ることは勿論である。
 例えば以上の実施形態では、センサデバイス1A(ペンダント3)をユーザの首にぶら下げる形態を例に挙げて説明したが、これに限られず、ストラップを介して腰元からぶら下げたり、ユーザの衣服へクリップ等で装着したり、胸ポケットに入れたりしてもよく、このような場合でもユーザの行動認識を高い精度で判定することができる。また、センサデバイス1Aを衣服へ埋め込んだり、ヘアバンドや髪先に装着したりした場合でも、上述と同様の作用効果を得ることができる。
 あるいは、センサデバイス1Aはユーザの鞄の中に入れられてもよい。当該鞄が自転車のかご等に入れられた場合でも、自転車の傾きに応じて、自転車に乗っていることを認識することができる。
 また、センサデバイス1Aは物流貨物の中に装着されてもよい。この場合、運搬中にどういう姿勢になったか、どういう力(加速度)が加わったか等をトレースすることができる。
 さらに以上の実施形態では、センサ素子として、図7~9に示した加速度センサ素子10が用いられたが、3軸方向の加速度を検出できるものであれば、構成は特に限定されない。同様に、センサ素子に作用する加速度から動的加速度成分および静的加速度成分を抽出する演算方法も上述の例に限定されず、適宜の演算手法が採用可能である。
 なお、本技術は以下のような構成もとることができる。
(1) 空間内で運動する検出対象の3軸方向の加速度から抽出された前記検出対象の動的加速度成分と静的加速度成分とに基づいて、前記静的加速度成分に対する前記動的加速度成分の時間変化を算出し、前記動的加速度成分の時間変化に基づいて前記検出対象の動きを判定する制御部
 を具備する情報処理装置。
(2)上記(1)に記載の情報処理装置であって、
 前記制御部は、
 前記動的加速度成分を重力方向で正規化した正規化動的加速度を算出する演算部と、
 前記正規化動的加速度に基づいて前記検出対象の動きを判定するパターン認識部と、を有する
 情報処理装置。
(3)上記(2)に記載の情報処理装置であって、
 前記演算部は、前記3軸まわりの角速度に関連する情報に基づいて、前記検出対象の姿勢角度をさらに算出し、
 前記パターン認識部は、前記正規化動的加速度と前記姿勢角度とに基づいて前記検出対象の動きを判定する
 情報処理装置。
(4)上記(2)又は(3)に記載の情報処理装置であって、
 前記パターン認識部は、前記検出対象の動きに基づいて前記検出対象の行動クラスを判定する
 情報処理装置。
(5)上記(1)~(4)のいずれか1つに記載の情報処理装置であって、
 前記検出対象に取り付けられ前記加速度を検出する検出部をさらに具備する
 情報処理装置。
(6)上記(5)に記載の情報処理装置であって、
 前記検出部は、前記加速度に応じた交流波形を有する第1の検出信号と、前記加速度に応じた交流成分が直流成分に重畳した出力波形を有する第2の検出信号とに基づいて、前記3軸方向各々について動的加速度成分および静的加速度成分を抽出する加速度演算部を有する。
 情報処理装置。
(7)上記(6)に記載の情報処理装置であって、
 前記加速度演算部は、前記第1の検出信号と前記第2の検出信号との差分信号に基づいて、前記加速度から前記静的加速度成分を抽出する演算回路を有する
 情報処理装置。
(8)上記(7)に記載の情報処理装置であって、
 前記加速度演算部は、前記第1の検出信号と前記第2の検出信号とが同一レベルとなるように各信号のゲインを調整するゲイン調整回路をさらに有する
 情報処理装置。
(9)上記(7)又は(8)に記載の情報処理装置であって、
 前記加速度演算部は、前記差分信号に基づいて補正係数を算出し、前記補正係数を用いて前記第1の検出信号および前記第2の検出信号のいずれか一方を補正する補正回路をさらに有する
 情報処理装置。
(10)上記(5)~(9)のいずれか1つに記載の情報処理装置であって、
 前記検出部は、前記検出対象に非固定可能で携帯可能である
 情報処理装置。
(11)上記(5)~(10)のいずれか1つに記載の情報処理装置であって、
 前記検出部は、
 加速度を受けて運動可能な可動部を有する素子本体と、前記可動部に作用する3軸方向の加速度に関連する情報を含む第1の検出信号を出力する圧電型の第1の加速度検出部と、前記可動部に作用する前記3軸方向の加速度に関連する情報を含む第2の検出信号を出力する非圧電型の第2の加速度検出部と、を有するセンサ素子を含む
 情報処理装置。
(12)上記(11)に記載の情報処理装置であって、
 前記第2の加速度検出部は、前記可動部に設けられたピエゾ抵抗式の加速度検出素子を含む
 情報処理装置。
(13)上記(11)に記載の情報処理装置であって、
 前記第2の加速度検出部は、前記可動部に設けられた静電容量式の加速度検出素子を含む
 情報処理装置。
 1…行動パターン認識システム(情報処理システム)
 1A…センサデバイス
 1B…端末装置
 3…ペンダント
 10…加速度センサ素子
 11…第1の加速度検出部
 12…第2の加速度検出部
 40…検出部(慣性センサ)
 50…制御部
 20…コントローラ
 110…素子本体
 120…可動板(可動部)
 200…加速度演算部

Claims (13)

  1.  空間内で運動する検出対象の3軸方向の加速度から抽出された前記検出対象の動的加速度成分と静的加速度成分とに基づいて、前記静的加速度成分に対する前記動的加速度成分の時間変化を算出し、前記動的加速度成分の時間変化に基づいて前記検出対象の動きを判定する制御部
     を具備する情報処理装置。
  2.  請求項1に記載の情報処理装置であって、
     前記制御部は、
     前記動的加速度成分を重力方向で正規化した正規化動的加速度を算出する演算部と、
     前記正規化動的加速度に基づいて前記検出対象の動きを判定するパターン認識部と、を有する
     情報処理装置。
  3.  請求項2に記載の情報処理装置であって、
     前記演算部は、前記3軸まわりの角速度に関連する情報に基づいて、前記検出対象の姿勢角度をさらに算出し、
     前記パターン認識部は、前記正規化動的加速度と前記姿勢角度とに基づいて前記検出対象の動きを判定する
     情報処理装置。
  4.  請求項2に記載の情報処理装置であって、
     前記パターン認識部は、前記検出対象の動きに基づいて前記検出対象の行動クラスを判定する
     情報処理装置。
  5.  請求項1に記載の情報処理装置であって、
     前記検出対象に取り付けられ前記加速度を検出する検出部をさらに具備する
     情報処理装置。
  6.  請求項5に記載の情報処理装置であって、
     前記検出部は、前記加速度に応じた交流波形を有する第1の検出信号と、前記加速度に応じた交流成分が直流成分に重畳した出力波形を有する第2の検出信号とに基づいて、前記3軸方向各々について動的加速度成分および静的加速度成分を抽出する加速度演算部を有する
     情報処理装置。
  7.  請求項6に記載の情報処理装置であって、
     前記加速度演算部は、前記第1の検出信号と前記第2の検出信号との差分信号に基づいて、前記加速度から前記静的加速度成分を抽出する演算回路を有する
     情報処理装置。
  8.  請求項7に記載の情報処理装置であって、
     前記加速度演算部は、前記第1の検出信号と前記第2の検出信号とが同一レベルとなるように各信号のゲインを調整するゲイン調整回路をさらに有する
     情報処理装置。
  9.  請求項7に記載の情報処理装置であって、
     前記加速度演算部は、前記差分信号に基づいて補正係数を算出し、前記補正係数を用いて前記第1の検出信号および前記第2の検出信号のいずれか一方を補正する補正回路をさらに有する
     情報処理装置。
  10.  請求項5に記載の情報処理装置であって、
     前記検出部は、前記検出対象に非固定で携帯可能に構成される
     情報処理装置。
  11.  請求項5に記載の情報処理装置であって、
     前記検出部は、
     加速度を受けて運動可能な可動部を有する素子本体と、前記可動部に作用する3軸方向の加速度に関連する情報を含む第1の検出信号を出力する圧電型の第1の加速度検出部と、前記可動部に作用する前記3軸方向の加速度に関連する情報を含む第2の検出信号を出力する非圧電型の第2の加速度検出部と、を有するセンサ素子を含む
     情報処理装置。
  12.  請求項11に記載の情報処理装置であって、
     前記第2の加速度検出部は、前記可動部に設けられたピエゾ抵抗式の加速度検出素子を含む
     情報処理装置。
  13.  請求項11に記載の情報処理装置であって、
     前記第2の加速度検出部は、前記可動部に設けられた静電容量式の加速度検出素子を含む
     情報処理装置。
PCT/JP2017/034515 2016-11-11 2017-09-25 情報処理装置 WO2018088042A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US16/349,171 US20190265270A1 (en) 2016-11-11 2017-09-25 Information processing apparatus
JP2018550055A JP6888632B2 (ja) 2016-11-11 2017-09-25 情報処理装置
CN201780067485.8A CN109906425B (zh) 2016-11-11 2017-09-25 信息处理设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016220962 2016-11-11
JP2016-220962 2016-11-11

Publications (1)

Publication Number Publication Date
WO2018088042A1 true WO2018088042A1 (ja) 2018-05-17

Family

ID=62110578

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/034515 WO2018088042A1 (ja) 2016-11-11 2017-09-25 情報処理装置

Country Status (4)

Country Link
US (1) US20190265270A1 (ja)
JP (1) JP6888632B2 (ja)
CN (1) CN109906425B (ja)
WO (1) WO2018088042A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021060245A1 (ja) * 2019-09-24 2021-04-01 国立大学法人電気通信大学 心理評価装置、心理評価方法、プログラム、加速度測定システムおよび加速度測定方法
CN117781994A (zh) * 2024-02-27 2024-03-29 南京新紫峰电子科技有限公司 旋变传感器的测试方法、装置、介质

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018115978A (ja) * 2017-01-19 2018-07-26 ソニー株式会社 車両制御装置
AU2018285963A1 (en) * 2017-06-16 2020-02-06 Soter Analytics Pty Ltd Method and system for monitoring core body movements
JP7406340B2 (ja) * 2019-10-18 2023-12-27 株式会社小松製作所 加速度検出装置、作業機械および加速度検出方法
CN112305263A (zh) * 2020-10-27 2021-02-02 南京东奇智能制造研究院有限公司 一种基于惯性传感器的加速度信号测量方法及装置
KR20220102436A (ko) * 2021-01-13 2022-07-20 삼성전자주식회사 웨어러블 전자 장치의 가속도 센서를 이용하여 사용자의 자세를 판단하는 방법 및 그 전자 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010043929A (ja) * 2008-08-12 2010-02-25 Yamaha Corp モーションセンサ
JP3158583U (ja) * 2010-01-26 2010-04-08 株式会社ワコー 加速度と角速度との双方を検出するセンサ
JP2015064348A (ja) * 2013-08-26 2015-04-09 能美防災株式会社 センサ取付ベース、およびセンサ取付ベースを用いた構造物劣化診断システム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3438921A1 (de) * 1984-10-24 1986-04-24 Schwerionenforsch Gmbh Getaktete stromversorgung
IL163796A0 (en) * 2004-08-30 2005-12-18 Gribova Orna A Device for detecting changes in blood glucose level or dardiovacular condition
JP2008046073A (ja) * 2006-08-21 2008-02-28 Fujifilm Corp 角度計測装置、撮影装置、及び角度計測方法
JP2008190931A (ja) * 2007-02-02 2008-08-21 Wacoh Corp 加速度と角速度との双方を検出するセンサ
CN102608351B (zh) * 2012-02-14 2014-12-17 三一重工股份有限公司 机械臂三维姿态的检测方法和系统、及控制其运行的系统
JP2014238812A (ja) * 2013-05-10 2014-12-18 株式会社リコー 情報処理装置、動作特定方法及び動作特定プログラム
US10336605B2 (en) * 2013-11-21 2019-07-02 Samsung Electro-Mechanics Co., Ltd. Micro electro mechanical systems sensor
US20170188895A1 (en) * 2014-03-12 2017-07-06 Smart Monitor Corp System and method of body motion analytics recognition and alerting
CN103984416B (zh) * 2014-06-10 2017-02-08 北京邮电大学 一种基于加速度传感器的手势识别方法
US11408978B2 (en) * 2015-07-17 2022-08-09 Origin Wireless, Inc. Method, apparatus, and system for vital signs monitoring using high frequency wireless signals
CN105319393A (zh) * 2014-07-31 2016-02-10 立锜科技股份有限公司 具有共构微机电感测单元的微机电系统元件
JP6446922B2 (ja) * 2014-09-02 2019-01-09 カシオ計算機株式会社 計測装置、計測方法及びプログラム
CN105356879B (zh) * 2015-09-29 2018-12-21 北京航天长征飞行器研究所 一种高g值加速度传感器信号调理电路

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010043929A (ja) * 2008-08-12 2010-02-25 Yamaha Corp モーションセンサ
JP3158583U (ja) * 2010-01-26 2010-04-08 株式会社ワコー 加速度と角速度との双方を検出するセンサ
JP2015064348A (ja) * 2013-08-26 2015-04-09 能美防災株式会社 センサ取付ベース、およびセンサ取付ベースを用いた構造物劣化診断システム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
IKETANI, NAOKI ET AL.: "6 Kinds of Means of Migration Recognizer with 3-Axis Accelerometer", DEIM FORUM 2010, 25 May 2010 (2010-05-25), Retrieved from the Internet <URL:htt.://db-event.jpn.org/deim2010/proceedings/files/F10-4.pdf> *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021060245A1 (ja) * 2019-09-24 2021-04-01 国立大学法人電気通信大学 心理評価装置、心理評価方法、プログラム、加速度測定システムおよび加速度測定方法
US11761979B2 (en) 2019-09-24 2023-09-19 The University Of Electro-Communications Psychological evaluation device, psychological evaluation method, program, acceleration measurement system, and acceleration measurement method
CN117781994A (zh) * 2024-02-27 2024-03-29 南京新紫峰电子科技有限公司 旋变传感器的测试方法、装置、介质
CN117781994B (zh) * 2024-02-27 2024-05-07 南京新紫峰电子科技有限公司 旋变传感器的测试方法、装置、介质

Also Published As

Publication number Publication date
CN109906425A (zh) 2019-06-18
CN109906425B (zh) 2022-05-27
JP6888632B2 (ja) 2021-06-16
JPWO2018088042A1 (ja) 2019-09-26
US20190265270A1 (en) 2019-08-29

Similar Documents

Publication Publication Date Title
JP6888632B2 (ja) 情報処理装置
CN109891251B (zh) 信息处理设备
US10504031B2 (en) Method and apparatus for determining probabilistic context awareness of a mobile device user using a single sensor and/or multi-sensor data fusion
US10962989B2 (en) Attitude control device, flying object, attitude control method, and program
US10371714B2 (en) Teeter-totter type MEMS accelerometer with electrodes on circuit wafer
CN109983345B (zh) 信号处理设备、惯性传感器、加速度测量方法、电子设备和程序
CN111024126B (zh) 一种行人导航定位中的自适应零速修正方法
US20150341756A1 (en) Systems and methods for determining position using a geofeature
WO2016016731A2 (en) Method and apparatus for categorizing device use case
US20180273374A1 (en) Inferring ambient atmospheric temperature
US10969662B2 (en) Posture control apparatus, holding apparatus, posture control method, and program
CN109891250B (zh) 传感器元件、惯性传感器和电子设备
US20200039818A1 (en) Sensing thermal gradients within a microelectromechanical device
Elhoushi et al. Using portable device sensors to recognize height changing modes of motion
Sang et al. A self-developed indoor three-dimensional pedestrian localization platform based on MEMS sensors
CN109540119A (zh) 物理量传感器和传感器器件、电子设备、便携式电子设备及移动体
JP2019052883A (ja) 物理量センサー、移動体測位装置、携帯型電子機器、電子機器および移動体
US10766764B2 (en) MEMS sensor compensation for off-axis movement
Aljeroudi et al. MOBILITY DETERMINATION AND ESTIMATION BASED ON SMARTPHONES-REVIEW OF SENSING AND SYSTEMS
Lee et al. An Indoor Positioning System Using Vision aided Advanced PDR technology without image DB and with motion recognition
JP2019039833A (ja) 角速度検出回路、角速度検出装置、慣性計測装置、センサーモジュール、移動体測位装置、携帯型電子機器、電子機器及び移動体
JP2019060733A (ja) 駆動回路、角速度検出装置、慣性計測装置、移動体測位装置、携帯型電子機器、電子機器及び移動体
JP2019039832A (ja) 角速度検出回路、角速度検出装置、慣性計測装置、センサーモジュール、移動体測位装置、携帯型電子機器、電子機器及び移動体
JP2019060690A (ja) 物理量検出装置、慣性計測装置、移動体測位装置、携帯型電子機器、電子機器及び移動体

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17869823

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018550055

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17869823

Country of ref document: EP

Kind code of ref document: A1