WO2006057237A1 - 情報処理方法、情報処理装置及び情報処理プログラム - Google Patents

情報処理方法、情報処理装置及び情報処理プログラム Download PDF

Info

Publication number
WO2006057237A1
WO2006057237A1 PCT/JP2005/021425 JP2005021425W WO2006057237A1 WO 2006057237 A1 WO2006057237 A1 WO 2006057237A1 JP 2005021425 W JP2005021425 W JP 2005021425W WO 2006057237 A1 WO2006057237 A1 WO 2006057237A1
Authority
WO
WIPO (PCT)
Prior art keywords
information processing
measurement value
conversion
shape
sensor
Prior art date
Application number
PCT/JP2005/021425
Other languages
English (en)
French (fr)
Inventor
Hirohisa Kusuda
Daisuke Tsujino
Jun Yamazaki
Yasuhiro Nishide
Original Assignee
Vodafone K.K.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vodafone K.K. filed Critical Vodafone K.K.
Priority to JP2006527207A priority Critical patent/JP4011101B2/ja
Priority to EP05809686A priority patent/EP1768013A4/en
Publication of WO2006057237A1 publication Critical patent/WO2006057237A1/ja
Priority to US11/585,893 priority patent/US8041532B2/en

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1615Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • G06F1/162Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position changing, e.g. reversing, the face orientation of the screen with a two degrees of freedom mechanism, e.g. for folding into tablet PC like position or orienting towards the direction opposite to the user to show to a second user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/0206Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings
    • H04M1/0208Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings characterized by the relative motions of the body parts
    • H04M1/021Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings characterized by the relative motions of the body parts using combined folding and rotation motions
    • H04M1/0212Portable telephones comprising a plurality of mechanically joined movable body parts, e.g. hinged housings characterized by the relative motions of the body parts using combined folding and rotation motions with a two degrees of freedom mechanism, i.e. folding around a first axis and rotating around a second axis perpendicular to the first
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725Cordless telephones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Definitions

  • the present invention relates to an information processing method, an information processing apparatus, and an information processing program. More specifically, the present invention relates to an information processing method using a sensor that measures an exercise state, an information processing apparatus using the method, and an information processing apparatus using the information processing method. The present invention relates to an information processing program for executing a method.
  • a mobile phone terminal that functions as a pedometer by providing an accelerometer (for example, see Non-Patent Document 1).
  • a mobile communication terminal for example, see Patent Document 1
  • an acceleration sensor for example, an acceleration sensor
  • an angular velocity which is equipped with an accelerometer or the like and can input characters by grasping the motion of the information processing device in detail.
  • a mobile phone terminal that includes a sensor and is used for games and other controls for example, see Patent Document 2 has already been disclosed.
  • Non-Patent Document 1 "Raku-Raku Hong III F672i ' ⁇ [online], NTT DoCoMo, [Nov. 5, 2004 Searching], Internet ⁇ Internet URL: http: / 1 www.nttdocomo.co.jp/ p_s / products / keitai / uniqu e /! B72i / iB72i2.html>
  • Patent Document 1 Japanese Unexamined Patent Application Publication No. 2002-169645
  • Patent Document 2 JP 2001-272413 A
  • Telephone terminals change shape.
  • a mobile phone terminal that changes its shape, depending on the sensor mounting position, even if the user intends to move the information processing device in the same manner, the measurement result obtained by the sensor It will change according to the shape of.
  • the present invention has been made in view of the above circumstances. Even in an information processing device whose shape changes, a sensor for detecting the movement of the information processing device is used as an input device regardless of the shape. It is an object to provide an information processing method, an information processing apparatus using the method, and an information processing program.
  • a sensor that measures a motion state of the information processing device includes a motion state measurement step in which the motion state is measured; and a shape state value that depends on a shape of the information processing device. And a measured value conversion step of converting an exercise state measured value corresponding to the value measured by the sensor.
  • a sensor that measures the motion state of the information processing apparatus measures the motion state.
  • This sensor includes not only an accelerometer that directly measures the motion state, but also a sensor such as a magnetic sensor that measures a value necessary to finally calculate a value representing the motion state.
  • the measured value conversion step based on the shape state value that depends on the shape of the information processing device, the motion state measurement value that depends on the value measured by the sensor is converted.
  • the “shape state value depending on the shape of the information processing device” refers to a value representing a folded state or an open state in the case of a foldable information processing device, for example. Means.
  • the “movement state measurement value corresponding to the value measured by the sensor” includes not only the value measured by the sensor itself but also a value calculated based on the value measured by the sensor.
  • the information processing apparatus whose shape changes is used.
  • a sensor that detects the movement of the information processing device can be used as the input device regardless of the shape.
  • the conversion in the measurement value conversion step may be coordinate conversion.
  • the converted measurement value is used.
  • the value in the coordinate system required by the application to be used can be used.
  • this coordinate conversion includes conversion that results in the same conversion as when coordinate conversion is performed even if the conversion is not coordinate conversion.
  • the coordinate conversion in the measurement value conversion step is performed by a display device that is an output device of the information processing device from a sensor coordinate system fixed to the sensor.
  • This can be a coordinate conversion to the display unit coordinate system in which the direction of the display surface is one axis direction.
  • the coordinate system can be converted based on the direction of the display surface, so that the user can exercise while looking at the display screen without considering the shape change.
  • a sensor that detects this can be used as an input device.
  • the coordinate system with “the direction of the display surface as one axis direction” means a coordinate system in which the direction of the display surface is the direction of one coordinate axis, and the origin of the coordinate system is the display surface. It does not mean that it is fixed to
  • the motion state measurement values may be acceleration values and posture angle values of the information processing apparatus.
  • the value measured by the sensor or the motion state measurement value that is the value calculated by the sensor is used as the acceleration value and the posture angle value, thereby further
  • the information processing method of the present invention can be used by using the measured value of the motion state that represents the motion state in detail.
  • the conversion of the movement state measurement value in the measurement value conversion step may be performed by middleware in the software configuration of the information processing apparatus.
  • the measurement value conversion process is performed by so-called middleware below the application, and the application that uses the conversion measurement value is used.
  • a sensor that detects motion without burdening the processing can be used as an input device.
  • each application that uses the conversion measurement value can be developed without taking into account the shape change of each information processing device, and the development burden can be reduced. it can.
  • the measurement value conversion process can be performed at a higher speed than by using an intermediate language such as JAVA (registered trademark) by processing it with middleware that uses machine language.
  • a sensor unit including a sensor that measures a motion state of the information processing device itself; and depends on the shape of the information processing device
  • a measurement value conversion unit that converts a movement state measurement value corresponding to a value measured by the sensor based on a shape state value
  • a measurement value utilization application that uses the converted measurement value converted by the measurement value conversion unit
  • the sensor unit includes a sensor that measures the movement of the information processing apparatus itself.
  • This sensor measures not only the accelerometer that directly measures the motion state, but also the values that are ultimately required to calculate the value that represents the motion state, as described in the information processing method described above. Sensors such as magnetic sensors are also included.
  • the measurement value conversion unit converts the motion state measurement value depending on the value measured by the sensor based on the shape state value depending on the shape of the information processing device.
  • the shape state value depending on the shape of the information processing device means that, for example, in the case of a foldable information processing device, a folded state value is the same as the description in the information processing method described above. It means a value indicating a folded state or an opened state.
  • the “measurement value corresponding to the value measured by the sensor” means not only the value measured by the sensor but also the value measured by the sensor, as described in the information processing method described above. Values calculated based on this are also included.
  • the measurement value utilization application unit uses the converted measurement value converted by the measurement value conversion unit.
  • “use conversion measurement value” means, for example, that it is used by the application program for display processing according to the value of the conversion measurement value! It means that it is used for control processing and data processing.
  • the measurement value using application unit may be an application program that is directly activated by a user and used, or may be a program that is used internally.
  • a sensor that detects motion can be used as an input device.
  • the conversion in the measurement value conversion unit may be coordinate conversion.
  • the converted measurement value is used by converting the movement state measurement value into a fixed coordinate system fixed to a certain part of the information terminal device or an absolute coordinate system not fixed to the information terminal device.
  • the value in the coordinate system required by the application to be used can be used.
  • this coordinate conversion includes conversion that results in the same conversion as when coordinate conversion is performed even if the conversion is not coordinate conversion.
  • the coordinate conversion in the measurement value conversion unit is performed by changing a direction of a display surface of a display device as an output device from a sensor coordinate system fixed to the sensor. It can be said to be coordinate transformation to the display unit coordinate system with one axis direction. In this case, before and after the shape change, conversion to the coordinate system based on the direction of the display surface can be performed, so that the user can exercise while viewing the display screen without considering the shape change.
  • a sensor to be detected can be used as an input device.
  • the coordinate system with “the direction of the display surface as one axis direction” means a coordinate system in which the direction of the display surface is the direction of one coordinate axis, and the origin of the coordinate system is the display It does not mean that it is fixed to the surface.
  • the information processing apparatus may further include a wireless communication unit for communicating with a base station of a mobile communication network.
  • the information processing apparatus of the present invention can be used even when the terminal apparatus is capable of mobile communication.
  • a measurement value acquisition procedure for acquiring a motion state measurement value that depends on a value measured by a sensor that measures a motion state; and a shape that depends on the shape of the information processing device
  • a measurement value conversion procedure for converting an exercise state measurement value based on the state value; and using the converted measurement value converted by the measurement value conversion procedure.
  • an exercise state measurement value corresponding to a value measured by a sensor that measures the exercise state is acquired.
  • This sensor is not only an accelerometer that directly measures the motion state, but also a magnetic sensor that ultimately measures the value necessary to calculate the motion state, as described in the information processing method described above. Such sensors are also included.
  • the “movement state measurement value corresponding to the value measured by the sensor” is based on the value measured by the sensor as well as the value measured by the sensor, as described in the information processing method described above. The calculated value is also included.
  • the motion state measurement value is converted based on the shape state value depending on the shape of the information processing apparatus.
  • the “shape state value depending on the shape of the information processing device” means, for example, in the case of a foldable information processing device, the folded state or When it has an open biaxial hinge and it has an orthogonal biaxial hinge, it means a value that represents a state in which the display surface is oriented in the same direction as the operation surface or in the opposite direction.
  • the converted converted measurement value notification procedure the converted converted measurement value is notified to a program that uses the converted measurement value.
  • the “program that uses the conversion measurement value” refers to a program that performs hardware control processing and data processing, such as performing display processing according to the value of the conversion measurement value in the application program. Meaning, it may be an application program that is used directly by a user, or may be a program that is used internally.
  • a sensor that detects the motion of the information processing apparatus can be used as an input apparatus even in the information processing apparatus whose shape changes.
  • the information processing apparatus using the method, and the information processing program, even in the information processing apparatus whose shape changes, information If a sensor that detects the movement of the processing device can be used as an input device, there will be an effect!
  • FIG. 1A is a diagram schematically showing a front side appearance of a first shape of a mobile phone terminal 10 according to an embodiment of the present invention.
  • FIG. 1B is a diagram schematically showing a rear-side appearance in the first shape of the mobile phone terminal 10 according to the embodiment of the present invention.
  • FIG. 2A is a diagram schematically showing a front side appearance of the second shape of the mobile phone terminal 10 according to the embodiment of the present invention.
  • FIG. 2B is a diagram schematically showing the back side appearance of the second shape of the mobile phone terminal 10 according to the embodiment of the present invention.
  • FIG. 3A is a diagram schematically showing a front side appearance of the third shape of the mobile phone terminal 10 according to one embodiment of the present invention.
  • FIG. 3B is a diagram schematically showing the rear side appearance of the third shape of the mobile phone terminal 10 according to the embodiment of the present invention.
  • FIG. 4A is a diagram schematically showing a front-side appearance in a fourth shape of the mobile phone terminal 10 according to one embodiment of the present invention.
  • FIG. 4B is a diagram schematically showing the back side appearance of the fourth shape of the mobile phone terminal 10 according to the embodiment of the present invention.
  • FIG. 5 is a diagram showing a configuration of an internal system 15 of the mobile phone terminal 10 of FIGS.
  • FIG. 6 is a diagram showing the configuration of the software program unit 27 of FIG.
  • FIG. 7 is a sequence diagram for explaining an information processing method of the mobile phone terminal 10 of FIGS.
  • FIG. 8 is a flowchart for explaining a measured value conversion process 40 of FIG.
  • FIGS. 1 to 4 show the external configuration of each shape that the mobile phone terminal 10 can take.
  • FIG. 1A and FIG. 1B show the shape when the mobile phone terminal 10 is normally used.
  • a front view and a rear view of an external configuration in a certain first shape are respectively shown.
  • the mobile phone terminal 10 includes a first portion 11 and a second portion 12 that can rotate with respect to the first portion 11 with the axis AX1 as a rotation axis. It has.
  • the second portion 12 includes a base portion 13 disposed on the first portion 11 side, and a display portion 14 that can rotate with respect to the base portion 13 about the axis AX2. Yes.
  • the first part 11 includes (a) an operation unit 16 on which operation keys such as numeric keys are arranged, and (b) a microphone 19 for inputting voice during a call.
  • the display unit 14 includes (c) a display device 17 that is a liquid crystal display device that displays operation guidance, operation status, received messages, and the like, and (d) an audio signal sent from a communication partner during a call.
  • a speaker for call 18 to be played is arranged.
  • the first portion 11 includes (e) a guidance speaker 20 for generating ringtones and guidance sounds, and (f) a wireless communication between the base station.
  • a motion detection sensor unit 24 is provided.
  • the central force of the motion detection sensor unit 24 of the first part 11 is the X axis in the left direction on the paper surface, the Y axis in the upward direction, and the back surface of the paper surface. Force in table
  • the sensor coordinate system X Y Z fixed to the first part is defined as the Z axis in the direction of the direction.
  • the display unit coordinate system X Y Z is fixed at the same position as the sensor coordinate system, and the axis is
  • FIG. 2A, FIG. 3A, and FIG. 4A show the same as in FIG. 1A, regardless of whether the display surface of the display device 17 is visible or invisible.
  • the figure with the display surface in front is shown as a front view. 2B, FIG. 3B, and FIG. 4B are rear views corresponding to the front views of FIG. 2A, FIG. 3A, and FIG. 4A. Therefore, the direction of each coordinate axis of the display unit coordinate system XYZ is the same direction in FIGS. 1A, 2A, 3A, and 4A.
  • Fig. 1B The direction of each coordinate axis in the display unit coordinate system X Y Z is shown in Fig. 1B, Fig. 2B, Fig. 3B, and Fig. 4B.
  • FIG. 2A and FIG. 2B show that the display surface of the display device 17 faces the operation surface of the operation unit 16 and overlaps with the mobile phone terminal 10 as the first shape force of FIG.
  • the sensor coordinate system XYZ has the same X direction as the right direction on the page.
  • the Y direction is the downward direction of the page, and the Z direction is the reverse force.
  • the display unit coordinate system X Y Z has the same origin as the sensor coordinate system X Y Z.
  • FIGS. 3A and 3B show that the display surface of the display device 17 and the operation surface of the operation unit 16 are opposite to each other with the mobile phone terminal 10 as the first shape force of FIG.
  • the sensor coordinate system X Y Z does not change the Y direction from the top of the page.
  • the X direction is the left side of the page, and the Z direction is from the back.
  • D D D is the origin of the sensor coordinate system X Y Z
  • FIGS. 4A and 4B show that the display surface of the display device 17 and the operation unit 16 face the same direction with the mobile phone terminal 10 as the third shape force of FIG. 3 and the axis AX1 as the rotation axis.
  • the Z direction is the same as the direction in which the front force is applied to the back.
  • the X direction is the left direction of the page. Also occasionally
  • the Y direction is the downward direction of the page.
  • the display unit coordinate system X Y Z is the downward direction of the page.
  • the origin is the same as the sensor coordinate system X Y Z, and the directions of the X, Y, and Z axes are shown in Figure 1A.
  • the direction is the same as in the case of.
  • the internal system 15 of the mobile phone terminal 10 includes (i) a control unit 21 that performs overall control of the operation of the mobile phone terminal 10 and (ii) an antenna 22. And (iii) two accelerometers in the X-axis and Y-axis directions, and X
  • An open / closed state detection unit (FSD) 25 that is rotated by XI and detects an open state that is open as shown in FIG. 1 or FIG. 3 and a closed state that is closed as shown in FIG. 2 or FIG. , (V) display
  • the part 14 is rotated with respect to the base part 13 on the axis AX2, and is in a rotational state such as the third shape or the fourth shape, and is not rotated as shown in FIG. 1 or FIG.
  • a display unit rotation state detection unit (DRD) 26 for detecting the state.
  • control unit 21 has a software program unit 27 which is a program for processing by a central processing unit (CPU), and the software program unit 27 is (i) as shown in FIG.
  • the application unit 31 having various application software used in the mobile phone terminal 10 and (ii) various hardwares such as the operation unit 16 are controlled, and the information of the hardware is easily processed and converted into a format.
  • It is located between the application unit 31 and the device driver unit 32, and requests each device driver to perform a process or request a process from the device driver.
  • a middleware unit 33 that converts information into information that can be easily processed by the application and notifies the application.
  • the application unit 31 includes a measurement value use application (MUA) 34 that performs processing based on the values measured by the motion detection sensor unit 24.
  • the device driver unit 32 includes the motion detection sensor unit 24, A sensor driver unit (SDR) 35 including device drivers for the open / close state detection unit 25 and the display unit rotation state detection unit 26 is provided.
  • SDR sensor driver unit
  • the middleware unit 33 is notified of the open Z closed state from the open / close state detection unit 25 and the rotation Z non-rotation state from the display unit rotation state detection unit 26 via the sensor driver unit 35.
  • Measurement value that converts the measurement values measured by the shape state management unit (FSM) 37 and the motion detection sensor unit 24 into a format that can be used by the measurement value application 34.
  • a conversion unit (MVC) 36 is provided.
  • the measurement value conversion process performed by the measurement value conversion unit 36 is a shape in which the sensor measurement value measured by the motion detection sensor unit 24 is converted according to the shape state managed by the shape state management unit 37.
  • Absolute conversion to state conversion and motion state values in a coordinate system (hereinafter referred to as “absolute coordinate system”) having a vertical axis, a north direction, and an east direction in the relative coordinate system fixed to the terminal. Coordinate system conversion.
  • the sensor coordinate system X Y Z is converted to the display unit coordinate system X Y Z.
  • the display device 17 is a second shape that is a shape that does not appear on the outer surface side. Do not convert. Specifically, the sensor measurement values in the sensor coordinate system XYZ and after conversion
  • the sensor measurement values in a display coordinate system XYZ are (X, y, Z ) and (X, y, Z ), respectively.
  • the transformation for the third shape is a transformation that rotates 180 ° about the Y axis as the rotation axis.
  • Equation (2) As shown in Fig. 4, this is a transformation that rotates 180 ° around the Z axis. In the case of the first shape and the second shape, no conversion is performed.
  • X is a sensor measurement value that has undergone shape state conversion.
  • the absolute coordinate system shows the acceleration value in the D-axis direction and the magnetic flux density values in the X-, Y-, and Z-axis directions.
  • control unit 21 includes a digital signal processing device (DSP), nonvolatile and volatile storage devices, etc. in addition to the above-described central processing unit (CPU). It is now possible to control the operation of the selected function.
  • DSP digital signal processing device
  • CPU central processing unit
  • the motion detection sensor unit 24 measured the state of the first shape.
  • the sensor measurement value is notified to the measurement value conversion unit 36 via the sensor driver unit 35.
  • the measurement value conversion unit 36 notified of the sensor measurement value performs measurement value conversion processing.
  • the measurement value conversion unit 36 inquires of the shape state management unit 37 about the shape state in step S11.
  • the shape state is the first shape If it is confirmed, the process moves to step S12, and the shape state conversion process is terminated without converting the value. Subsequently, in step S16, the absolute coordinate system conversion process described above is performed, and the measurement value conversion process is terminated.
  • the converted measurement value is notified to the measurement value utilization application 34, and the measurement value utilization application 34 displays the processing result on the display device 17.
  • the display unit rotation state detection unit 26 detects the rotation state, and the sensor driver unit 35 is It is notified to the shape state management unit 37 via.
  • the shape state management unit 37 notified of the rotation state changes the shape state to the third shape.
  • the motion detection sensor unit 24 measures the motion
  • the measured sensor measurement value is notified to the measurement value conversion unit 36 via the sensor driver unit 35 as in the case of the first shape, and the measurement value
  • the conversion unit 36 performs measurement value conversion processing.
  • step SI 1 of FIG. 8 the measurement value conversion unit 36 inquires of the shape state management unit 37 about the shape state. When it is confirmed that the shape state is the third shape, the process proceeds to step S14, where the process of rotating 180 ° on the Y axis is performed, and the shape state conversion process is completed.
  • step S16 the absolute coordinate system conversion process described above is performed, and the measured value conversion process ends.
  • the converted measurement value is notified to the measurement value utilization application 34, and the measurement value utilization application 34 displays the processing result on the display device 17.
  • the open / close state detection unit 25 detects the closed state and passes through the sensor driver unit 35.
  • the shape state management unit 37 is notified.
  • the shape state management unit 37 notified of the closed state changes the shape state to the fourth shape.
  • the motion detection sensor unit 24 measures the motion, as in the case of the first shape, the measured sensor measurement value is notified to the measurement value conversion unit 36 via the sensor driver unit 35, and
  • the measurement value conversion unit 36 performs measurement value conversion processing.
  • the measurement value conversion unit 36 inquires of the shape state management unit 37 about the shape state in step S11 of FIG. When it is confirmed that the shape state is the fourth shape, the process proceeds to step S14, where the process of rotating 180 ° on the Z axis is performed, and the shape state conversion process is completed.
  • step S16 the absolute coordinate system conversion process described above is performed, and the calculation is performed.
  • the measurement conversion process ends.
  • the measured acceleration and the posture angle that is the converted measurement value are notified to the measurement value utilization application 34, and the measurement value utilization application 34 displays the processing result on the display device 17.
  • the display device 17 in the second shape, the display device 17 is hidden inside, and the user cannot check the display device 17. Therefore, it is not possible to use the measurement value utilization application 34. Can not. Therefore, as described above, in this embodiment, when it is confirmed in step S11 in FIG. 8 that the shape is the second shape, no conversion is performed in the shape state conversion.
  • the absolute coordinate system conversion process is performed on the sensor measurement value in the measurement value conversion process. Only done.
  • the third shape in the measurement value conversion process, a shape state conversion process that rotates 180 ° on the Y axis with respect to the sensor measurement value, and an absolute coordinate system
  • the motion detection sensor unit 24 that detects the motion can be used as an input device.
  • the measurement value conversion unit 36 in the middleware unit 33 each application that uses the converted measurement value can be processed without taking into account the shape change of each information processing device. The burden of processing can be reduced.
  • the shape state conversion process is assumed to be performed before the absolute coordinate system conversion process.
  • the shape state conversion process is performed as an absolute coordinate conversion process. It may be performed later.
  • shape state conversion processing is performed for these posture angles.
  • the second shape may be subjected to a force that is not subjected to the conversion process according to the shape.
  • the mobile phone terminal 10 of the present embodiment includes one display device 17. It was.
  • a display device other than the display device 17 such as a sub display is provided. It is also possible to perform coordinate transformation with the direction of the display surface as one axis direction. Further, depending on the shape of the information processing device, coordinate conversion may be performed in which the direction of the display surface of another display device such as a sub display is set as one axial direction.
  • the value measured by the motion detection sensor unit 24 is X
  • the magnetic flux density value in the direction may be used, and it can be applied even when the axial direction that can be measured is smaller. Furthermore, sensor measurement values can be applied even if they are values other than acceleration values and magnetic flux density values.
  • the motion state measurement value may be a motion state value other than the acceleration value and the magnetic flux density value.
  • the motion detection sensor unit 24 may be located on the base portion 13 or the display unit 14 of the second portion, which is assumed to be located on the first portion 11.
  • the mobile phone terminal of the orthogonal biaxial hinge type is used as the information processing apparatus in which other shapes such as a clamshell type, a slide type, and a revolver type are changed.
  • the conversion is performed based on the shape state values in the first to fourth shapes.
  • conversion may be performed using shape state values such as an angle representing the shape in the middle. For example, when the first shape force of the present embodiment is deformed to the third shape, the shape obtained by rotating the first shape by an angle ⁇ may be converted as shown in Equation (3).
  • the directions of the Y axis and the X axis may be changed depending on the force shape fixed to the vertical and horizontal directions of the display surface of the display device 17.
  • the fourth shape in Figure 4 is a fourth shape in Figure 4
  • the Y-axis direction of the display unit coordinate system X Y Z is the lower side of the page than the upper side of the page.
  • coordinate conversion is performed, but the conversion is not based on the coordinate conversion but based on the shape state value.
  • a mobile phone terminal is used as the information processing apparatus, but other information processing apparatuses such as a portable information terminal and a game machine may be used.
  • the information processing method of the present invention can be applied to information processing using a sensor that measures a motion state.
  • the information processing apparatus of the present invention can be applied to an information processing apparatus including a sensor that measures a motion state.
  • the information processing program of the present invention can be applied to information processing using a sensor that measures a motion state.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mathematical Physics (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Length Measuring Devices With Unspecified Measuring Means (AREA)

Abstract

 計測値変換処理では、センサ計測値に対して、形状状態変換処理と絶対座標系変換処理(S16)が行われる。形状状態変換処理では、携帯電話が形状1又は形状2である場合には、変換処理は行われない(S12、S13)。形状3である場合には、YS軸で180°回転する変換処理が行われる(S14)。また、形状4である場合には、ZS軸で180°回転する変換処理が行われる(S15)。このため、形状が変化する情報処理装置においても、形状にかかわらず、情報処理装置の運動を検知するセンサを入力装置として用いることができる。

Description

明 細 書
情報処理方法、情報処理装置及び情報処理プログラム
技術分野
[0001] 本発明は、情報処理方法、情報処理装置及び情報処理プログラムに係り、より詳し くは、運動状態を計測するセンサを利用した情報処理方法、その方法を利用した情 報処理装置及びその方法を実行させるための情報処理プログラムに関する。
背景技術
[0002] 従来から、移動通信端末装置をはじめとする様々な情報処理装置が普及している 。これらの情報処理装置は、ますます高機能化、多機能化し、多くの機能を利用する 利用者にとっては大変便利な装置となって 、る。これらの多機能化のひとつとして、 加速度計等の情報処理装置自身の運動を計測することにより、そのデータを処理す る情報処理装置が現れて 、る。
[0003] これらの情報処理装置自身の運動を計測する情報処理装置として、加速度計を備 えることにより、歩数計として機能する携帯電話端末がある (例えば、非特許文献 1参 照)。また、この他にも、加速度計等を備え、情報処理装置の運動を詳細に把握する ことにより、文字を入力することができる移動通信端末 (例えば、特許文献 1参照)や、 加速度センサ又は角速度センサを備え、ゲームやその他の制御に用いる携帯電話 端末 (例えば、特許文献 2参照)について、既に開示がされている。
非特許文献 1 : "らくらくホン III F672i'\ [online], NTT DoCoMo, [平成 16年 11月 5日 恢索」、インタ ~~ネットく URL: http:/ 1 www.nttdocomo.co.jp/ p_s/ products/keitai/ uniqu e/!B72i/iB72i2.html>
特許文献 1 :特開 2002— 169645号公報
特許文献 2 :特開 2001— 272413号公報
発明の開示
発明が解決しょうとする課題
[0004] 上述したように、加速度計等の運動を検知するセンサを用いることにより、情報処理 装置の運動を検知し、運動の様子を把握することにより、入力装置として利用する情 報処理装置が開示されている。
[0005] ところで、近年普及して!/、る折りたたみ可能なクラムシェル型をはじめ、スライド型、 リボルバー型、及び、折りたたみ軸と直交する軸により表示部が回転する直交ニ軸ヒ ンジ型の携帯電話端末は、形状が変化する。こうした形状が変化する携帯電話端末 の場合には、センサの搭載位置によっては、利用者が情報処理装置に同一態様で 運動させたつもりでも、センサによって得られる計測結果が、そのときどきの情報処理 装置の形状に応じて変化することになる。
[0006] 本発明は、上記の事情を鑑みてなされたものであり、形状が変化する情報処理装 置においても、形状にかかわらず、情報処理装置の運動を検知するセンサを入力装 置として用いることができる情報処理方法、その方法を使用した情報処理装置及び 情報処理プログラムを提供することを目的とする。
課題を解決するための手段
[0007] 本発明は、第 1の観点からすると、情報処理装置の運動状態を計測するセンサが、 運動状態を計測する運動状態計測工程と;前記情報処理装置の形状に依存する形 状状態値に基づ!、て、前記センサにより計測された値に対応する運動状態計測値を 変換する計測値変換工程と;を備えることを特徴とする情報処理方法である。
[0008] この情報処理方法では、まず、運動状態計測工程にお!、て、情報処理装置の運動 状態を計測するセンサがその運動状態を計測する。このセンサには、直接運動状態 を計測する加速度計等はもちろん、最終的に運動状態を表す値を計算するのに必 要な値を計測する磁気センサ等のセンサも含まれる。次に、計測値変換工程におい て、情報処理装置の形状に依存する形状状態値に基づいて、センサにより計測され た値に依存する運動状態計測値を変換する。
[0009] ここで、「情報処理装置の形状に依存する形状状態値」とは、例えば、折りたたみ可 能な情報処理装置の場合には、折りたたまれた状態又は開 、た状態を表す値のこと を意味する。また、「センサにより計測された値に対応する運動状態計測値」とは、セ ンサにより計測された値そのものはもちろん、センサにより計測された値に基づいて 算出された値も含まれる。
[0010] したがって、本発明の情報処理方法によれば、形状が変化する情報処理装置にお いても、形状にかかわらず、情報処理装置の運動を検知するセンサを入力装置とし て用いることができる。
[0011] また、本発明の情報処理方法では、前記計測値変換工程における変換は座標変 換である、とすることができる。この場合には、運動状態計測値を、情報端末装置の ある部分に固定された固定座標系や、情報端末装置に固定されないその他の座標 系に変換して利用することにより、その変換計測値を利用するアプリケーション等が 必要とする座標系での値を用いることができる。また、この座標変換には、座標変換 でない変換であっても、結果として座標変換を行った場合と同じ変換になる変換を含 むものとする。
[0012] また、本発明の情報処理方法では、前記計測値変換工程における前記座標変換 は、前記センサに対して固定されたセンサ座標系から、前記情報処理装置の出力装 置である表示装置の表示面の方向を 1つの軸方向とする表示部座標系への座標変 換である、とすることができる。この場合には、形状の変化の前後において、表示面 の方向を基準とした座標系への変換ができるため、利用者は、形状の変化を考慮す ることなく、表示画面を見ながら、運動を検知するセンサを入力装置として用いること ができる。ここで、「表示面の方向を 1つの軸方向とする」座標系とは、表示面の向い ている方向が 1つの座標軸の方向である座標系を意味し、その座標系の原点が表示 面に固定されて 、る等を意味するものではな 、。
[0013] また、本発明の情報処理方法では、前記運動状態計測値は、前記情報処理装置 の加速度値及び姿勢角値である、とすることができる。この場合には、センサにより計 測された値、又は、センサにより計測された値力 算出された値である運動状態計測 値を、加速度値及び姿勢角値とすることにより、より情報処理装置の運動状態を詳細 に表した運動状態計測値を用いて、本発明の情報処理方法を使用することができる
[0014] また、本発明の情報処理方法では、前記計測値変換工程における前記運動状態 計測値の変換は、前記情報処理装置のソフトウェア構成のうち、ミドルウェアにより行 われる、とすることができる。この場合には、計測値変換工程をアプリケーションより下 位のいわゆるミドルウェアで行うことになり、変換計測値を利用するアプリケーションに 処理の負担をさせることなぐ運動を検知するセンサを入力装置として用いることがで きる。
[0015] また、ミドルウェアで行うことにより、変換計測値を利用する各アプリケーションは情 報処理装置ごとの形状変化を考慮に入れることなく開発することが可能であり、開発 の負担を少なくすることができる。また、計測値変換工程を、機械語を使用するミドル ウェアで処理することにより、 JAVA (登録商標)等の中間言語を使用するアプリケー シヨンで行うより、高速に処理をすることができる。
[0016] 本発明は、第 2の観点力 すると、形状が変化する情報処理装置において、情報処 理装置自体の運動状態を計測するセンサを備えるセンサ部と;前記情報処理装置の 形状に依存する形状状態値に基づいて、前記センサにより計測された値に対応する 運動状態計測値を変換する計測値変換部と;前記計測値変換部により変換された変 換計測値を利用する計測値利用アプリケーション部と;を備えることを特徴とする情報 処理装置である。
[0017] この情報処理装置では、センサ部は情報処理装置自体の運動を計測するセンサを 備える。このセンサには、前述した情報処理方法での記述と同様に、直接運動状態 を計測する加速度計等はもちろんのこと、最終的に運動状態を表す値を計算するの に必要な値を計測する磁気センサ等のセンサも含まれる。また、計測値変換部は、 情報処理装置の形状に依存する形状状態値に基づいて、センサにより計測された値 に依存する運動状態計測値を変換する。
[0018] ここで、「情報処理装置の形状に依存する形状状態値」とは、前述した情報処理方 法での記述と同様に、例えば、折りたたみ可能な情報処理装置の場合には、折りた たまれた状態又は開いた状態を表す値のことを意味する。また、「センサにより計測さ れた値に対応する運動状態計測値」とは、前述した情報処理方法での記述と同様に 、センサにより計測された値そのものはもちろん、センサにより計測された値に基づい て算出された値も含まれる。
[0019] また、計測値利用アプリケーション部は、計測値変換部により変換された変換計測 値を利用する。ここで、「変換計測値を利用」とは、例えば、アプリケーションプロダラ ムにお!/、てその変換計測値の値に応じた表示処理に利用するなど、ハードウェアの 制御処理やデータ処理に利用することを意味する。この計測値利用アプリケーション 部は、利用者により直接起動されて使用されるアプリケーションプログラムであっても よいし、内部的に使用されるプログラムであってもよい。
[0020] したがって、本発明の情報処理装置によれば、形状が変化する場合においても、 運動を検知するセンサを入力装置として用いることができる。
[0021] また、本発明の情報処理装置では、前記計測値変換部における変換は座標変換 である、とすることができる。この場合には、運動状態計測値を、情報端末装置のある 部分に固定された固定座標系や、情報端末装置に固定されない絶対座標系に変換 して利用することにより、その変換計測値を利用するアプリケーション等が必要とする 座標系での値を用いることができる。また、この座標変換には、座標変換でない変換 であっても、結果として座標変換を行った場合と同じ変換になる変換を含むものとす る。
[0022] また、本発明の情報処理装置では、前記計測値変換部における前記座標変換は、 前記センサに対して固定されたセンサ座標系から、出力装置である表示装置の表示 面の方向を 1つの軸方向とする表示部座標系への座標変換である、とすることができ る。この場合には、形状の変化の前後において、表示面の方向を基準とした座標系 への変換ができるため、利用者は、形状の変化を考慮することなぐ表示画面を見な がら、運動を検知するセンサを入力装置として用いることができる。ここで、「表示面の 方向を 1つの軸方向とする」座標系とは、表示面の向いている方向が 1つの座標軸の 方向である座標系を意味し、その座標系の原点が、表示面に固定されている等を意 味するものではない。
[0023] また、本発明の情報処理装置では、移動通信網の基地局と通信するための無線通 信部を更に備える、とすることができる。この場合には、移動通信可能な端末装置で ある場合にも、本発明の情報処理装置を利用することができる。
[0024] 本発明は、第 3の観点力 すると、運動状態を計測するセンサにより計測された値 に依存する運動状態計測値を取得する計測値取得手順と;情報処理装置の形状に 依存する形状状態値に基づ!ヽて、運動状態計測値を変換する計測値変換手順と; 前記計測値変換手順により変換された変換計測値を、前記変換計測値を利用する プログラムに通知する変換計測値通知手順と;を情報処理装置に実行させることを特 徴とする情報処理プログラムである。
[0025] この情報処理プログラムでは、まず、計測値取得手順にぉ 、て、運動状態を計測 するセンサにより計測された値に対応する運動状態計測値を取得する。このセンサ には、前述した情報処理方法での記述と同様に、直接運動状態を計測する加速度 計等はもちろん、最終的に運動状態を表す値を計算するのに必要な値を計測する 磁気センサ等のセンサも含まれる。また、「センサにより計測された値に対応する運動 状態計測値」とは、前述した情報処理方法での記述と同様に、センサにより計測され た値そのものはもちろん、センサにより計測された値に基づいて算出された値も含ま れる。
[0026] 次に、計測値変換手順にお!、て、情報処理装置の形状に依存する形状状態値に 基づいて、運動状態計測値を変換する。ここで、「情報処理装置の形状に依存する 形状状態値」とは、前述した情報処理方法での記述と同様に、例えば、折りたたみ可 能な情報処理装置の場合には、折りたたまれた状態又は開いた状態を表し、直交二 軸ヒンジを有する場合には、更に表示面が操作面と同一方向を向く状態又は反対方 向を向く状態を表す値のことを意味する。
[0027] 引き続き、変換計測値通知手順において、変換された変換計測値を、変換計測値 を利用するプログラムに通知する。ここで、「変換計測値を利用するプログラム」とは、 例えば、アプリケーションプログラムにお 、てその変換計測値の値に応じた表示処理 を行うなど、ハードウェアの制御処理やデータ処理をするプログラムを意味し、利用 者により直接起動されて使用されるアプリケーションプログラムであってもよいし、内 部的に使用されるプログラムであってもよい。
[0028] したがって、本発明の情報処理プログラムによれば、形状が変化する情報処理装 置においても、情報処理装置の運動を検知するセンサを入力装置として用いることが できる。
発明の効果
[0029] 以上説明したように、本発明の情報処理方法、その方法を使用した情報処理装置 及び情報処理プログラムによれば、形状が変化する情報処理装置においても、情報 処理装置の運動を検知するセンサを入力装置として用いることができると!/、う効果を 奏する。
図面の簡単な説明
[0030] [図 1A]本発明の一実施形態に係る携帯電話端末 10の第 1形状における正面側外 観を概略的に示す図である。
[図 1B]本発明の一実施形態に係る携帯電話端末 10の第 1形状における背面側外観 を概略的に示す図である。
[図 2A]本発明の一実施形態に係る携帯電話端末 10の第 2形状における正面側外 観を概略的に示す図である。
[図 2B]本発明の一実施形態に係る携帯電話端末 10の第 2形状における背面側外観 を概略的に示す図である。
[図 3A]本発明の一実施形態に係る携帯電話端末 10の第 3形状における正面側外 観を概略的に示す図である。
[図 3B]本発明の一実施形態に係る携帯電話端末 10の第 3形状における背面側外観 を概略的に示す図である。
[図 4A]本発明の一実施形態に係る携帯電話端末 10の第 4形状における正面側外 観を概略的に示す図である。
[図 4B]本発明の一実施形態に係る携帯電話端末 10の第 4形状における背面側外観 を概略的に示す図である。
[図 5]図 1〜図 4の携帯電話端末 10の内部システム 15の構成を示す図である。
[図 6]図 5のソフトウェアプログラム部 27の構成を示す図である。
[図 7]図 1〜図 4の携帯電話端末 10の情報処理方法を説明するためのシーケンス図 である。
[図 8]図 7の計測値変換処理 40を説明するためのフローチャートである。
発明を実施するための最良の形態
[0031] 以下、本発明の一実施形態を、図 1〜図 8を参照しつつ説明する。
[0032] 図 1〜図 4には、携帯電話端末 10のとり得る各形状における外観構成が示されて いる。ここで、図 1A及び図 1Bには、携帯電話端末 10を通常使用するときの形状で ある第 1形状における外観構成の正面図及び背面図が、それぞれ示されている。
[0033] 図 1A及び図 1Bに示されるように、携帯電話端末 10は、第 1部分 11と、該第 1部分 11に対して、軸 AX1を回転軸として回動可能な第 2部分 12とを備えている。そして、 第 2部分 12は、第 1部分 11側に配置された基台部 13と、当該基台部 13に対して、 軸 AX2を回転軸として回動可能な表示部 14とを有している。
[0034] 図 1Aに示されるように、第 1部分 11には、(a)テンキー等の操作キーが配列された 操作部 16と、(b)通話時に音声を入力するためのマイクロフォン 19とが配置され、表 示部 14には、(c)操作案内、動作状況、受信メッセージ等を表示する液晶表示装置 である表示装置 17と、(d)通話時に通信相手から送られてきた音声信号を再生する 通話用スピーカ 18とが配置されている。
[0035] また、図 1Bに示されるように、第 1部分 11には、(e)着信音や案内音を発生するた めの案内用スピーカ 20と、 (f)基地局との間で無線信号を授受するためのアンテナ 2 2とを備え、(g)第 1部分 11の内部には、後述するセンサ座標系 X Y Zにおいて、 X
S S S S
軸及び Y軸方向の 2つの加速度計、並びに X軸、 Y軸及び Z軸方向の磁力計を有
S S S S
する運動検知センサ部 24が備えられて 、る。
[0036] なお、携帯電話端末 10では、図 1Bの背面図において、第 1部分 11の運動検知セ ンサ部 24の中央力 紙面左方向に X軸、上方向に Y軸、そして、紙面の裏力 表に
S S
向かう方向に Z軸として、第 1部分に固定されたセンサ座標系 X Y Zが定義される。
S S S S
また、表示部座標系 X Y Zは、原点がセンサ座標系と同じ位置で固定され、軸は、
D D D
表示面の向き及び縦横に依存する座標系として定義され、図 1においては、センサ 座標系と同一の座標系である。
[0037] 図 2A〜図 4Bにおいては、図 2A、図 3A及び図 4Aには、表示装置 17の表示面が 可視であるか不可視であるかにかかわらず、図 1Aの場合と同様に、該表示面を正面 にした図を正面図として示されている。また、図 2B、図 3B及び図 4Bには、図 2A、図 3A及び図 4Aの正面図に対する背面図を示されている。したがって、表示部座標系 X Y Zの各座標軸の方向は、図 1A、図 2A、図 3A及び図 4Aで同じ方向である。ま
D D D
た、表示部座標系 X Y Zの各座標軸の方向は、図 1B、図 2B、図 3B及び図 4Bで
D D D
同じ方向である。 [0038] 図 2A及び図 2Bには、携帯電話端末 10を図 1の第 1形状力も軸 AX1を回転軸とし て、表示装置 17の表示面が操作部 16の操作面に向かい合って重なるように折りた たんだ形状である第 2形状の外観構成の正面図及び背面図が、それぞれ示されて いる。図 2Aにおいて、センサ座標系 X Y Zは、 X方向は紙面右方向と変わらないが
S S S S
、折りたたまれているため、 Y方向は紙面下方向となり、 Z方向は裏力 表に向かう
S S
方向となる。一方、表示部座標系 X Y Zは、原点をセンサ座標系 X Y Zと同一とし
D D D S S S
、 X軸、 Y軸及び Z軸の各々方向は図 1Aの場合と同じ方向となる。
D D D
[0039] 図 3A及び図 3Bには、携帯電話端末 10を図 1の第 1形状力も軸 AX2を回転軸とし て、表示装置 17の表示面と操作部 16の操作面が反対向きとなるように 180度回転さ せた形状である第 3形状の外観構成の正面図及び背面図が、それぞれ示されている 。図 3Aにおいて、センサ座標系 X Y Zは、 Y方向は紙面上方向と変わらないが、軸
S S S S
AX2で 180度回転されているため、 X方向は紙面左方向となり、 Z方向は裏から表
S S
に向かう方向となる。一方、表示部座標系 X Y Z
D D Dは、原点をセンサ座標系 X Y Z
S S Sと 同一とし、 X軸、 Y軸及び Z軸の各々方向は図 1Aの場合と同じ方向となる。
D D D
[0040] 図 4A及び図 4Bには、携帯電話端末 10を図 3の第 3形状力も軸 AX1を回転軸とし て、表示装置 17の表示面と操作部 16とが、同一の方向を向くように折りたたんだ形 状である第 4形状の外観構成の正面図及び背面図が、それぞれ示されている。図 4 Aにおいて、センサ座標系 X Y Zは、 Z方向は表力 裏に向力う方向と変わらない。
S S S S
しかし、軸 AX2で 180度回転されているため、 X方向は紙面左方向となる。また、折
S
りたたまれているため、 Y方向は紙面下方向となる。一方、表示部座標系 X Y Zは
S D D D
、原点をセンサ座標系 X Y Zと同一とし、 X軸、 Y軸及び Z軸の各々方向は図 1A
S S S D D D
の場合と同じ方向となる。
[0041] また、図 5に示されるように、携帯電話端末 10の内部システム 15には、(i)携帯電 話端末 10全体の動作を統括制御する制御部 21と、(ii)アンテナ 22を介して、無線 通信をおこなう送受信部 23と、(iii) X軸及び Y軸方向の 2つの加速度計、並びに X
S S S
軸、 Y軸及び Z軸方向の磁力計を備えた運動検知センサ部(MDS) 24と、 (iv)軸 A
S S
XIで回転され、図 1又は図 3のように開いた状態である開状態、及び、図 2又は図 4 のように閉じた状態である閉状態を検出する開閉状態検出部 (FSD) 25と、(V)表示 部 14が、軸 AX2で基台部 13に対して回転された、第 3形状又は第 4形状のような形 状である回転状態、及び、図 1又は図 2のように回転状態でない非回転状態を検出 する表示部回転状態検出部(DRD) 26とを備えている。
[0042] ここで、制御部 21は中央処理装置(CPU)で処理させるためのプログラムであるソ フトウェアプログラム部 27を有し、ソフトウェアプログラム部 27は、図 6に示されるように 、(i)携帯電話端末 10で利用される様々な応用ソフトウェアを備えるアプリケーション 部 31と、(ii)操作部 16等の様々なハードウェアを制御すると共に、それらのハードウ エアの情報を処理しやす 、形式に変換するデバイスドライバ部 32と、 (iii)アプリケー シヨン部 31とデバイスドライバ部 32の間にあり、アプリケーションの要求を各ハードウ エアに行わせるため、各デバイスドライバへ処理を要求したり、デバイスドライバから の情報をアプリケーションが処理しやすい情報に変換し、アプリケーションに通知した りするミドルウェア部 33と、を備えている。
[0043] また、アプリケーション部 31は、運動検知センサ部 24で計測された値に基づいた 処理を行う計測値利用アプリケーション (MUA) 34を有し、デバイスドライバ部 32は 、運動検知センサ部 24、開閉状態検出部 25及び表示部回転状態検出部 26のデバ イスドライバを備えるセンサドライバ部(SDR) 35を有する。
[0044] 更に、ミドルウェア部 33は、センサドライバ部 35を介して、開閉状態検出部 25から 開 Z閉状態、及び、表示部回転状態検出部 26から回転 Z非回転状態が通知され、 第 1〜4形状を判定し、その状態を管理する形状状態管理部 (FSM) 37と、運動検 知センサ部 24が計測した計測値を計測値利用アプリケーション 34で利用できるよう な形式に変換する計測値変換部 (MVC) 36を備える。
[0045] ここで、計測値変換部 36が行う計測値変換処理は、運動検知センサ部 24で計測さ れたセンサ計測値を、形状状態管理部 37で管理される形状状態により変換する形 状状態変換と、端末に固定された相対座標系でなぐ鉛直上方向、北方向及び東方 向をそれぞれ座標軸にもつ座標系(以下、「絶対座標系」という。)での運動状態値に 変換する絶対座標系変換である。
[0046] 形状状態変換では、センサ座標系 X Y Zから表示部座標系 X Y Zに変換するが
S S S D D D
、本実施形態では、表示装置 17が外面側に表れていない形状である第 2形状での 変換を行わない。具体的には、センサ座標系 X Y Zのセンサ計測値及び変換後で
S S S
ある表示部座標系 X Y Zのセンサ計測値をそれぞれ (X , y , Z )、(X , y , Z )とす
D D D S S S D D D
ると、第 3形状の場合の変換は、式(1)に示されるように、 Y軸を回転軸として 180° 回転する変換であり、第 4形状の場合の変換には、式(2)に示されるように、 Z軸を回 転軸として 180° 回転する変換である。また、第 1形状及び第 2形状の場合には変換 を行わない。
[0047] [数 1]
ί-ι 0 、
0 1 0 … ひ)
ZDノ , ο 0 - 1 . ζ¾
[0048] [数 2]
Figure imgf000013_0002
Figure imgf000013_0001
[0049] 絶対座標系変換では、形状状態変換されたセンサ計測値である、 X
D軸及び Y
D軸 方向の加速度値、並びに X軸、 Y軸及び Z軸方向の磁束密度値を、絶対座標系
D D D
における X軸周り、 Y軸周り及び Z軸周りの姿勢角に変換する。
[0050] なお、本実施形態においては、制御部 21は、上述の中央処理装置 (CPU)の他、 デジタル信号処理装置 (DSP)、不揮発性及び揮発性の記憶装置等を備えており、 上述した機能の動作制御を行うようになって 、る。
[0051] 次に、上記のように構成された携帯電話端末 10の形状を変化させた場合における 、運動状態値を使用するための情報処理方法について説明する。
[0052] 図 7に示されるように、まず、携帯電話端末 10の形状状態管理部 37において、第 1 形状の状態が管理されて 、る場合にぉ 、て、運動検知センサ部 24が計測したセン サ計測値は、センサドライバ部 35を経由して、計測値変換部 36に通知される。セン サ計測値を通知された計測値変換部 36は、計測値変換処理を行う。
[0053] 計測値変換処理では、図 8に示されるように、計測値変換部 36はステップ S11にお いて、形状状態を形状状態管理部 37に問い合わせる。ここで、形状状態が第 1形状 であることが確認されるとステップ S12に移り、値の変換をすることなく形状状態変換 処理を終了する。引き続き、ステップ S16において、上述した絶対座標系変換処理を 行い、計測値変換処理を終了する。図 7に戻り、変換された計測値は、計測値利用 アプリケーション 34に通知され、計測値利用アプリケーション 34は、処理結果を表示 装置 17に表示する。
[0054] 次に、利用者が表示部 14を、軸 AX2を中心軸として基台部 13に対して回転させる と、表示部回転状態検出部 26が回転状態を検出し、センサドライバ部 35を経由して 形状状態管理部 37に通知される。回転状態を通知された形状状態管理部 37は、形 状状態を第 3形状に変更する。引き続き、運動検知センサ部 24が運動を計測すると 、第 1形状の場合と同様に、計測されたセンサ計測値は、センサドライバ部 35を経由 して、計測値変換部 36に通知され、計測値変換部 36は、計測値変換処理を行う。
[0055] 計測値変換処理では、図 8のステップ SI 1にお 、て、計測値変換部 36は形状状態 管理部 37に形状状態を問い合わせる。形状状態が第 3形状であることが確認される とステップ S14に移り、 Y軸で 180° 回転する処理を行い、形状状態変換処理を終
S
了する。引き続き、ステップ S16において、上述した絶対座標系変換処理を行い、計 測値変換処理を終了する。図 7に戻り、変換された計測値は、計測値利用アプリケー シヨン 34に通知され、計測値利用アプリケーション 34は処理結果を表示装置 17に表 示する。
[0056] 更に、利用者が第 2部分 12を、軸 AX1を中心軸として第 1部分 11に対して回転さ せると、開閉状態検出部 25が閉状態を検出し、センサドライバ部 35を経由して形状 状態管理部 37に通知される。閉状態を通知された形状状態管理部 37は、形状状態 を第 4形状に変更する。引き続き、運動検知センサ部 24が運動を計測すると、第 1形 状の場合と同様に、計測されたセンサ計測値は、センサドライバ部 35を経由して、計 測値変換部 36に通知され、計測値変換部 36は、計測値変換処理を行う。
[0057] 計測値変換処理では、図 8のステップ S11において、計測値変換部 36が形状状態 管理部 37に形状状態を問い合わせる。形状状態が第 4形状であることが確認される とステップ S14に移り、 Z軸で 180° 回転する処理を行い、形状状態変換処理を終
S
了する。引き続き、ステップ S16において、上述した絶対座標系変換処理を行い、計 測値変換処理を終了する。図 7に戻り、計測された加速度及び変換された計測値で ある姿勢角は、計測値利用アプリケーション 34に通知され、計測値利用アプリケーシ ヨン 34は処理結果を表示装置 17に表示する。
[0058] なお、本実施形態において第 2形状では、表示装置 17が内側に隠れてしまい、利 用者が表示装置 17を確認することができないことから、計測値利用アプリケーション 34を使用することはできない。したがって、先に説明したように、本実施形態では図 8 のステップ S11において、第 2形状であることが確認された場合には、形状状態変換 では何の変換も行わな 、こととして 、る。
[0059] 以上説明したように、本実施形態では、携帯電話端末 10が第 1形状又は第 2形状 である場合には、計測値変換処理において、センサ計測値に対して絶対座標系変 換処理のみが行われる。また、第 3形状である場合には、計測値変換処理において 、センサ計測値に対して、 Y軸で 180° 回転する形状状態変換処理と、絶対座標系
S
変換処理が行われる。また、第 4形状である場合には、計測値変換処理において、セ ンサ計測値に対して、 Z軸で 180° 回転する形状状態変換処理と、絶対座標系変
S
換処理が行われる。
[0060] したがって、本実施形態によれば、形状が変化する携帯電話端末 10において、そ の運動を検知する運動検知センサ部 24を入力装置として用いることができる。また、 計測値変換部 36をミドルウェア部 33に備えることにより、変換計測値を利用する各ァ プリケーシヨンは情報処理装置ごとの形状変化を考慮に入れることなく処理すること が可能であり、開発及び処理の負担を少なくすることができる。
[0061] なお、本実施形態においては、説明を簡単にするために、形状状態変換処理は絶 対座標系変換処理の前に行うこととして ヽたが、形状状態変換処理を絶対座標変換 処理の後に行うこととしてもよい。この場合には、絶対座標系における X軸周り、 Y軸 周り及び Z軸周りの姿勢角に変換した後、これらの姿勢角について、形状状態変換 処理を行うこととなる。
[0062] また、本実施形態にぉ 、ては、第 2形状にぉ 、て、形状による変換処理を行わな!/ヽ こととした力 行うこととしてもよい。
[0063] また、本実施形態の携帯電話端末 10においては、 1つの表示装置 17を備えること とした。これに対して、例えば携帯電話端末 10において、表示装置 17の表示面の裏 面にサブディスプレイを備える等、複数の表示装置を備える情報処理装置において 、サブディスプレイ等、表示装置 17以外の表示装置の表示面の方向を 1つの軸方向 とする座標変換を行うこととしてもよい。更に、情報処理装置の形状により、サブディス プレイ等別の表示装置の表示面の方向を 1つの軸方向とする座標変換を行うこととし てもよい。
[0064] また、本実施形態にぉ 、ては、運動検知センサ部 24にお 、て計測される値は、 X
S
軸及び Y軸方向の加速度値、並びに X軸、 Y軸及び Z軸方向の磁束密度値とした
S S S S
。これに対して、 X軸、 Y軸及び Z軸方向の加速度値、並びに X軸、 Y軸及び Z軸
S S S S S S
方向の磁束密度値としてもよいし、逆に計測できる軸方向がより少ない場合であって も適用できる。更に、センサ計測値は、加速度値や磁束密度値以外の値であっても 適用できる。
[0065] また、本実施形態にお!ヽては、運動状態計測値は、加速度値及び磁束密度値とし た力 これ以外の運動状態値としてもよいのは勿論である。
[0066] また、本実施形態においては、運動検知センサ部 24は第 1部分 1 1にあることとした 力 第 2部分の基台部 13や表示部 14にあることとしてもよい。
[0067] また、本実施形態においては、直交二軸ヒンジ型の携帯電話端末としたが、クラム シェル型、スライド型及びリボルバー型等の他の形状が変化する情報処理装置として ちょい。
[0068] また、本実施形態においては、第 1〜4形状における形状状態値により変換を行う こととした。これに対して、これらの形状変化の途中の形状においても、途中の形状を 表す角度等の形状状態値を用いて変換を行うこととしてもよい。例えば、本実施形態 の第 1形状力 第 3形状に変形する場合において、第 1形状から角度 α回転させた 形状では、式 (3)のような変換を行うこととしてもよい。
[0069] [数 3]
Figure imgf000016_0001
[0070] また、本実施形態においては、表示部座標系 X Y Zの Y軸及び X軸のそれぞれ
D D D D D
の軸の方向は、表示装置 17の表示面の縦横方向に固定されることとした力 形状に より Y軸及び X軸の方向を変えることとしてもよい。例えば、図 4の第 4形状において
D D
、表示装置 17における画面表示の方向を、紙面上側を下として表示する場合などに は、表示部座標系 X Y Zの Y軸方向は、紙面上方向ではなぐ紙面下方向とする
D D D D
こととしてちよい。
[0071] また、本実施形態においては、座標変換を行うこととしたが、座標変換でなくとも、 形状状態値に基づく変換であればょ ヽ。
[0072] また、本実施形態においては、情報処理装置として携帯電話端末を用いたが、そ の他の携帯情報端末やゲーム機等の情報処理装置であってもよい。
産業上の利用可能性
[0073] 以上説明したように本発明の情報処理方法は、運動状態を計測するセンサを利用 した情報処理に適用することできる。また、本発明の情報処理装置は運動状態を計 測するセンサを備える情報処理装置に適用することができる。また、本発明の情報処 理プログラムは、運動状態を計測するセンサを利用した情報処理に適用することが出 来る。

Claims

請求の範囲
[1] 情報処理装置の運動状態を計測するセンサが、運動状態を計測する運動状態計 測工程と;
前記情報処理装置の形状に依存する形状状態値に基づいて、前記センサにより計 測された値に対応する運動状態計測値を変換する計測値変換工程と;を備える情報 処理方法。
[2] 前記計測値変換工程における変換は座標変換である、ことを特徴とする請求項 1に 記載の情報処理方法。
[3] 前記計測値変換工程における前記座標変換は、前記センサに対して固定されたセ ンサ座標系から、前記情報処理装置の出力装置である表示装置の表示面の方向を 1つの軸方向とする表示部座標系への座標変換である、ことを特徴とする請求項 2に 記載の情報処理方法。
[4] 前記運動状態計測値は、前記情報処理装置の加速度値及び姿勢角値である、こ とを特徴とする請求項 1に記載の情報処理方法。
[5] 前記計測値変換工程における前記運動状態計測値の変換は、前記情報処理装置 のソフトウェア構成のうち、ミドルウェアにより行われる、ことを特徴とする請求項 1に記 載の情報処理方法。
[6] 形状が変化する情報処理装置において、
情報処理装置自体の運動状態を計測するセンサを備えるセンサ部と; 前記情報処理装置の形状に依存する形状状態値に基づいて、前記センサにより計 測された値に対応する運動状態計測値を変換する計測値変換部と;
前記計測値変換部により変換された変換計測値を利用する計測値利用アプリケー シヨン部と;を備える情報処理装置。
[7] 前記計測値変換部における変換は座標変換である、ことを特徴とする請求項 6に記 載の情報処理装置。
[8] 前記計測値変換部における前記座標変換は、前記センサに対して固定されたセン サ座標系から、出力装置である表示装置の表示面の方向を 1つの軸方向とする表示 部座標系への座標変換である、ことを特徴とする請求項 7に記載の情報処理装置。
[9] 移動通信網の基地局と通信するための無線通信部を更に備える、ことを特徴とする 請求項 6に記載の情報処理装置。
[10] 運動状態を計測するセンサにより計測された値に対応する運動状態計測値を取得 する計測値取得手順と;
情報処理装置の形状に依存する形状状態値に基づ!、て、前記運動状態計測値を 変換する計測値変換手順と;
前記計測値変換手順により変換された変換計測値を、前記変換計測値を利用する プログラムに通知する変換計測値通知手順と;を情報処理装置に実行させるための 情報処理プログラム。
PCT/JP2005/021425 2004-11-24 2005-11-22 情報処理方法、情報処理装置及び情報処理プログラム WO2006057237A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2006527207A JP4011101B2 (ja) 2004-11-24 2005-11-22 情報処理方法、情報処理装置及び情報処理プログラム
EP05809686A EP1768013A4 (en) 2004-11-24 2005-11-22 INFORMATION PROCESSING, INFORMATION PROCESSOR AND INFORMATION PROCESSING PROGRAM
US11/585,893 US8041532B2 (en) 2004-11-24 2006-10-25 Method for information processing, information processing apparatus, and computer program for information processing

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2004-338412 2004-11-24
JP2004338412 2004-11-24

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US11/585,893 Continuation US8041532B2 (en) 2004-11-24 2006-10-25 Method for information processing, information processing apparatus, and computer program for information processing

Publications (1)

Publication Number Publication Date
WO2006057237A1 true WO2006057237A1 (ja) 2006-06-01

Family

ID=36497974

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2005/021425 WO2006057237A1 (ja) 2004-11-24 2005-11-22 情報処理方法、情報処理装置及び情報処理プログラム

Country Status (6)

Country Link
US (1) US8041532B2 (ja)
EP (1) EP1768013A4 (ja)
JP (1) JP4011101B2 (ja)
KR (1) KR100869735B1 (ja)
CN (1) CN100583015C (ja)
WO (1) WO2006057237A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012142867A (ja) * 2011-01-05 2012-07-26 Nec Corp 携帯端末および動作制御方法

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8996332B2 (en) 2008-06-24 2015-03-31 Dp Technologies, Inc. Program setting adjustments based on activity identification
US8194001B2 (en) * 2009-03-27 2012-06-05 Microsoft Corporation Mobile computer device display postures
US8797358B1 (en) 2010-11-02 2014-08-05 Google Inc. Optimizing display orientation
US8471869B1 (en) * 2010-11-02 2013-06-25 Google Inc. Optimizing display orientation
US9327177B2 (en) * 2011-10-14 2016-05-03 Dunlop Sports Co. Ltd. Tennis swing analysis method
CN103721393B (zh) * 2012-10-12 2018-08-31 住友橡胶工业株式会社 网球挥拍分析装置以及分析方法
JP6207343B2 (ja) * 2013-10-30 2017-10-04 京セラ株式会社 電子機器、判定方法、及びプログラム
US10474590B2 (en) * 2017-09-06 2019-11-12 Roland Corporation Storage medium storing device driver, peripheral device, and information processing system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001272413A (ja) 2000-03-27 2001-10-05 Microstone Corp 運動センサ付き携帯電話機
JP2002169645A (ja) 2000-12-01 2002-06-14 Toshiba Corp 移動通信端末
JP2003330590A (ja) * 2002-03-08 2003-11-21 Sony Corp 携帯型情報処理装置および方法、記録媒体、並びにプログラム
WO2004066615A1 (en) 2003-01-22 2004-08-05 Nokia Corporation Image control
EP1467539A2 (en) 2003-04-09 2004-10-13 Nec Corporation Mobile terminal

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3597598A (en) * 1964-12-14 1971-08-03 North American Rockwell Method and means for transforming the acceleration signals generated by accelerometers in a first coordinate system into acceleration signals in a second coordinate system
US7031875B2 (en) * 2001-01-24 2006-04-18 Geo Vector Corporation Pointing systems for addressing objects
JP3801501B2 (ja) * 2001-12-18 2006-07-26 三菱電機株式会社 符号化装置及び復号装置及び符号化・復号装置及び符号化方法及び復号方法及び符号化・復号方法及びプログラム
JP2003330698A (ja) 2002-03-08 2003-11-21 Sony Corp 携帯型情報処理装置および方法、記録媒体、並びにプログラム
KR100582349B1 (ko) * 2002-12-12 2006-05-22 주식회사 팬택 단말기에 있어서 움직임에 의한 기능 설정 장치 및 방법
US20040125073A1 (en) * 2002-12-30 2004-07-01 Scott Potter Portable electronic apparatus and method employing motion sensor for function control
KR100987289B1 (ko) * 2003-02-26 2010-10-12 삼성전자주식회사 화면의 회전 배치 상태에 따라 데이터를 정방향으로표시할 수 있는 휴대용 단말기 및 그 방법
KR20050095326A (ko) * 2004-03-26 2005-09-29 주식회사 지테크인터내셔날 운동량측정센서가 내장된 핸드폰

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001272413A (ja) 2000-03-27 2001-10-05 Microstone Corp 運動センサ付き携帯電話機
JP2002169645A (ja) 2000-12-01 2002-06-14 Toshiba Corp 移動通信端末
JP2003330590A (ja) * 2002-03-08 2003-11-21 Sony Corp 携帯型情報処理装置および方法、記録媒体、並びにプログラム
WO2004066615A1 (en) 2003-01-22 2004-08-05 Nokia Corporation Image control
EP1467539A2 (en) 2003-04-09 2004-10-13 Nec Corporation Mobile terminal

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
NTT DOCOMO, RAKU RAKU PHONE III F672I, 5 November 2004 (2004-11-05), Retrieved from the Internet <URL:URL: http://www. nttdocomo. co.jp/p_s/products/keitai/unique/f672i/f672i2.html>
See also references of EP1768013A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012142867A (ja) * 2011-01-05 2012-07-26 Nec Corp 携帯端末および動作制御方法

Also Published As

Publication number Publication date
JPWO2006057237A1 (ja) 2008-06-05
CN100583015C (zh) 2010-01-20
EP1768013A4 (en) 2011-12-21
KR20070085095A (ko) 2007-08-27
US8041532B2 (en) 2011-10-18
US20070129909A1 (en) 2007-06-07
CN1989483A (zh) 2007-06-27
EP1768013A1 (en) 2007-03-28
KR100869735B1 (ko) 2008-11-21
JP4011101B2 (ja) 2007-11-21

Similar Documents

Publication Publication Date Title
JP4011101B2 (ja) 情報処理方法、情報処理装置及び情報処理プログラム
JP5434591B2 (ja) 制御装置、入力装置、制御システム、ハンドヘルド型情報処理装置、及び制御方法
EP1785854B1 (en) Electronic appliance
WO2006008946A1 (ja) 電子機器
JP2005292893A (ja) 携帯情報端末装置
WO2005039154A1 (ja) 移動体通信端末及びアプリケーションプログラム
WO2006004063A1 (ja) 電子機器
JP4377863B2 (ja) 運動軌跡情報処理方法及び携帯情報装置
KR20140098511A (ko) 이동 단말기, 및 그 동작방법
JP2006031515A (ja) 移動体通信端末、アプリケーションプログラム、画像表示制御装置及び画像表示制御方法
JP2005192206A (ja) 移動体通信端末
JP3959393B2 (ja) 移動体通信端末
JP2008070884A (ja) 移動体通信端末
JP2008160886A (ja) 移動体通信端末
JP2007303945A (ja) センサデータ補正方法及び移動情報装置
JP4149893B2 (ja) 移動体通信端末及びアプリケーションプログラム
JP4394742B2 (ja) 移動体通信端末及びアプリケーションプログラム
JP4179607B2 (ja) 移動体通信端末
JP4669751B2 (ja) 無線通信機能付き方位計測装置、方位計測方法、及び、プログラム
JP4331239B2 (ja) 移動体通信端末及びアプリケーションプログラム
JP2005242283A (ja) 移動体通信端末
CN103857063A (zh) 基于移动终端的空间状态建立连接的方法和装置
JP5310595B2 (ja) 電子機器、その制御方法及び制御プログラム
JP4950156B2 (ja) 携帯電子機器
JP5291818B2 (ja) 携帯電子機器

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 2006527207

Country of ref document: JP

AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KM KN KP KR KZ LC LK LR LS LT LU LV LY MA MD MG MK MN MW MX MZ NA NG NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SM SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IS IT LT LU LV MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 11585893

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 1020067022809

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 2005809686

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 200580025139.0

Country of ref document: CN

WWP Wipo information: published in national office

Ref document number: 2005809686

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE

WWP Wipo information: published in national office

Ref document number: 11585893

Country of ref document: US