WO2018051676A1 - 情報処理装置、情報処理方法およびプログラム - Google Patents

情報処理装置、情報処理方法およびプログラム Download PDF

Info

Publication number
WO2018051676A1
WO2018051676A1 PCT/JP2017/028445 JP2017028445W WO2018051676A1 WO 2018051676 A1 WO2018051676 A1 WO 2018051676A1 JP 2017028445 W JP2017028445 W JP 2017028445W WO 2018051676 A1 WO2018051676 A1 WO 2018051676A1
Authority
WO
WIPO (PCT)
Prior art keywords
vibration
information
information processing
processing apparatus
notification
Prior art date
Application number
PCT/JP2017/028445
Other languages
English (en)
French (fr)
Inventor
猛史 荻田
山野 郁男
亜由美 中川
諒 横山
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US16/325,427 priority Critical patent/US10901814B2/en
Priority to DE112017004628.9T priority patent/DE112017004628T5/de
Publication of WO2018051676A1 publication Critical patent/WO2018051676A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/542Event management; Broadcasting; Multicasting; Notifications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M19/00Current supply arrangements for telephone systems
    • H04M19/02Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone
    • H04M19/04Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone the ringing-current being generated at the substations

Definitions

  • the present invention relates to an information processing apparatus such as a mobile device, an information processing method, and a program.
  • Some mobile devices such as smartphones, mobile phones, and portable music players are configured to transmit notifications such as information and operation responses to users by vibration.
  • a technique is known in which a feedback operation is responded to a user by vibration of a vibration device such as a vibration motor when a determination operation by pressing the operation surface of the mobile device is detected by a pressure sensor (see Patent Document 1).
  • an object of the present technology is to provide an information processing apparatus, an information processing method, and a program capable of improving the operability of the user regarding information notification to the user.
  • an information processing apparatus detects a vibration device that generates vibration and a user's tap operation for instructing information notification, and when the tap operation is detected, And a control unit that generates notification information, converts the generated notification information into a vibration waveform, and vibrates the vibration device with the vibration waveform.
  • the control unit is configured to determine whether or not the information processing apparatus is stored in a user's pocket and to start detecting the tap operation when it is determined that the information processing apparatus is stored. It may be.
  • the control unit may be configured to convert the notification information into at least one vibration waveform that can be identified by at least vibration time.
  • the information processing apparatus further includes a pressure-sensitive sensor that detects a pressure applied to the information processing apparatus, and the control unit increases the vibration intensity as the detected pressure is lower. It may be configured to control the vibration device.
  • control unit may be configured to acquire information on a noise level and control the vibration device so that a vibration intensity increases as the noise level increases.
  • control unit acquires location information, searches a database in which noise level information for each location is stored from the acquired location information, and information on the noise level corresponding to the acquired location information May be configured to obtain
  • control unit may be configured to determine whether or not the information processing apparatus is moving, and to control the vibration device so that vibration intensity becomes high when the information processing apparatus is moving. Good.
  • the control unit may be configured to convert the notification information into one or more vibration waveforms that can be identified by the vibration time and the vibration amplitude.
  • the control unit may be configured to convert the notification information into a sequence of one or more vibration waveforms that can be identified by vibration time and vibration frequency.
  • the control unit detects a user tap operation for instructing information notification to an information processing apparatus having a vibration device that generates vibration, and the tap operation is performed. When detected, it generates notification information, converts the generated notification information into a vibration waveform, and vibrates the vibration device with the vibration waveform.
  • a program detects a user's tap operation for instructing information notification to an information processing apparatus having a vibration device that generates vibration, and notifies when the tap operation is detected.
  • Information is generated, the generated notification information is converted into a vibration waveform, and the computer is operated as a control unit that vibrates the vibration device with the vibration waveform.
  • an information processing apparatus detects a user tap operation for instructing information notification to an information processing terminal having a vibration device that generates vibration, and when the tap operation is detected
  • the present embodiment relates to an information processing apparatus such as a portable mobile device, and in particular, the present technology is applied to a smartphone that a user can store and carry in a pocket or bag of clothes. .
  • FIG. 1 is a block diagram illustrating a hardware configuration of the information processing apparatus according to the first embodiment of the present technology.
  • the information processing apparatus 100 includes an arithmetic processing unit 1, a display 2, a camera unit 3, an acceleration sensor 4, a proximity sensor 5, a gyro sensor 6, a GPS processing circuit 7, a vibration device 8, and a vibration device drive.
  • the arithmetic processing unit 1 includes a CPU (Central Processing Unit), a RAM (Random Access Memory), a ROM (Read Only Memory), a flash ROM, and the like.
  • the CPU executes arithmetic processing for executing the operating system and application programs loaded from the ROM and flash ROM to the main memory area of the RAM. Specifically, the CPU performs display control of the display 2 connected to the arithmetic processing unit 1, processing of an image captured by the camera unit 3, processing of acceleration data generated by the acceleration sensor 4, and proximity sensor 5. Processing of the generated proximity data, processing of angular acceleration data generated by the gyro sensor 6, processing of GPS information obtained by the GPS processing circuit 7, and the like are performed. Further, the CPU controls the vibration device driving circuit 9 so as to vibrate the vibration device 8 with a target vibration waveform.
  • the display 2 includes a panel-type display that displays an image and a display drive circuit that generates a signal to be output to the display based on the display data supplied from the arithmetic processing unit 1.
  • the display device of the display 2 may be provided with a touch sensor panel that generates coordinate signals touched by the user and supplies them to the arithmetic processing unit 1.
  • the camera unit 3 includes an optical system such as an objective lens and an imaging lens, and an imaging device such as a CMOS (Complementary Metal Oxide Semiconductor) sensor or a CCD (Charge Coupled Device) image sensor that converts light captured through the optical system into an electrical signal. And a video signal processing circuit that generates video data from a signal imaged by the imaging device and supplies the video data to the arithmetic processing unit 1.
  • an imaging device such as a CMOS (Complementary Metal Oxide Semiconductor) sensor or a CCD (Charge Coupled Device) image sensor that converts light captured through the optical system into an electrical signal.
  • CMOS Complementary Metal Oxide Semiconductor
  • CCD Charge Coupled Device
  • the acceleration sensor 4 is a sensor that detects acceleration in the triaxial direction (xyz axial direction) applied to the information processing apparatus 100.
  • the vertical and horizontal two-axis directions on the screen of the display 2 of the information processing apparatus 100 are defined as the x-axis direction and the y-axis direction, and the direction orthogonal to the x-axis direction and the y-axis direction is defined as the z-axis direction.
  • the arithmetic processing unit 1 is configured to detect a tap operation of tapping an information processing apparatus 100 placed in a user's clothes pocket with a hand from the top of clothes based on a detection signal from the acceleration sensor 4 or the like. ing.
  • the proximity sensor 5 is a sensor for detecting that an object has approached the surface of the information processing apparatus 100 on the display 2 side.
  • the arithmetic processing unit 1 turns off the display 2 or turns off the operation of the touch sensor panel.
  • the information processing apparatus 100 is installed in such a direction as to close the objective lens of the camera unit 3 or when the information processing apparatus 100 is stored in a pocket or bag, a proximity object is detected by the proximity sensor 5.
  • the proximity sensor 5 for example, an infrared proximity sensor configured by a pair of a light emitting element that emits infrared light from the display 2 side surface of the information processing apparatus 100 and a light receiving element that receives reflected light of the infrared light is used. .
  • the gyro sensor 6 is a sensor that detects angular accelerations around the three axes (xyz axes) given to the information processing apparatus 100.
  • the angular acceleration data detected by the gyro sensor 6 is used in the arithmetic processing unit 1 for processing such as posture detection and camera shake correction of the information processing apparatus 100, for example.
  • the GPS processing circuit 7 performs processing for receiving GPS information.
  • the arithmetic processing unit 1 acquires external information such as the noise level of the place indicated by the GPS information obtained by the GPS processing circuit 7 by accessing the Internet, for example, and obtains a suitable vibration intensity for the acquired noise level. It is also possible to perform processing such as determination.
  • the vibration device 8 is a device that causes the information processing apparatus 100 to generate vibration.
  • the vibration device 8 having a structure capable of generating an arbitrary vibration waveform with a high degree of freedom by changing the vibration time, the vibration frequency, the vibration amplitude, and the like is used.
  • a vibrating device 8 such as a linear vibrator or a piezo element is used.
  • the vibration device drive circuit 9 is a circuit that applies a drive signal to the vibration device 8 so as to vibrate the vibration device 8 with the vibration waveform determined by the arithmetic processing unit 1.
  • the information processing apparatus 100 is configured to notify the user of information by vibration by vibrating the vibration device 8 with an arbitrary vibration waveform. As a result, the user can receive notification of information while the information processing apparatus 100 is put in a pocket of clothes.
  • FIG. 2 is a flowchart showing an information notification operation using a vibration waveform in the information processing apparatus 100 according to the present embodiment.
  • the arithmetic processing unit 1 starts the packet inside / outside determination as to whether or not the information processing apparatus 100 is in the pocket (step S101). This inside / outside pocket determination is performed based on proximity data obtained by the proximity sensor 5, for example. When the information processing apparatus 100 is in the pocket, the display 2 side surface of the information processing apparatus 100 and the fabric surface in the pocket are close to each other, so that the arithmetic processing unit 1 determines that the information processing apparatus 100 is in the pocket from the proximity data. Can be determined.
  • the inside / outside determination of the pocket is performed from the brightness value such as the average luminance of the video obtained by the camera unit 3. It may be done. Alternatively, the pocket inside / outside determination may be performed using both the proximity data and the image brightness value.
  • the pocket inside / outside determination may be performed in consideration of the data detected by the acceleration sensor 4. That is, even when a proximity object is detected based on proximity data from the proximity sensor 5 and the brightness value of the image is low, the information processing apparatus 100 is simply placed on a desk or the like. When it is estimated from the acceleration data, the information processing apparatus 100 is not determined to be in the pocket.
  • the arithmetic processing unit 1 subsequently starts detecting a tap operation (step S103).
  • the “tap operation” is an operation in which the user taps the housing of the information processing apparatus 100 with a hand or the like.
  • the acceleration sensor 4 of the information processing apparatus 100 causes the screen of the display 2 to be displayed.
  • the acceleration in the orthogonal axial direction (z-axis direction) is mainly detected.
  • the arithmetic processing unit 1 detects that a tap operation has been performed (YES in step S104).
  • the detection condition of the tap operation for example, as shown in FIG. 4, after the acceleration reaches the threshold value A, it falls below the threshold value A within a predetermined time Ta.
  • This detection condition is determined based on a difference from a change in acceleration detected when the user changes the direction with the information processing apparatus 100. That is, as shown in FIG. 5, the acceleration detected when the user changes the direction with the information processing apparatus 100 becomes equal to or greater than the threshold A, and at least exceeds the threshold A that is sufficiently longer than the predetermined time Ta. The state continues. Compared with this, the period when the acceleration at the time of the tap operation exceeds the threshold A is temporary, and the tap operation is detected with high accuracy from the movement of the user operating the information processing apparatus 100 from the difference in the temporal transition. Can do.
  • the axial direction of the acceleration to be evaluated is not limited to the z-axis direction, and the accelerations in the x-axis direction and the y-axis direction may be evaluated together.
  • the arithmetic processing unit 1 When the arithmetic processing unit 1 detects a tap operation, it generates notification information by an application program. Here, it is assumed that the notification information is time. The arithmetic processing unit 1 converts the generated time information into vibration waveform information (step S105). The conversion from the notification information to the vibration waveform will be described later. The arithmetic processing unit 1 supplies control information including information on the generated vibration waveform to the vibration device drive circuit 9. The vibration device drive circuit 9 drives the vibration device 8 in accordance with control information including vibration waveform information (step S106).
  • a trigger is that a specific movement of the information processing apparatus 100 other than the tap, such as an operation (shake) in which the user shakes the information processing apparatus 100 in the pocket, is detected.
  • the trigger is that a specific switch button provided in the information processing apparatus 100 is pressed.
  • a trigger is that specific location information is determined based on GPS information obtained by the GPS processing circuit 7. For example, a location where it is desirable for the user to perform information notification using a vibration waveform is registered in a flash ROM or the like in the arithmetic processing unit 1, and the fact that it is determined that the user is in that location is indicated as a trigger. A method of notifying the user of information with a vibration waveform is available.
  • a trigger may be set when a predetermined condition is established from a combination of the above location information and specific user data. For example, when a place where settlement is possible using Osaifu-Keitai (registered trademark) such as a ticket gate at a station, the arithmetic processing unit 1 checks the balance of the Osaifu-Keitai (registered trademark) and the balance is insufficient. It is also possible to notify the user of the information indicating that by using the vibration waveform as a trigger (if it is lower than the predetermined amount).
  • Osaifu-Keitai registered trademark
  • the arithmetic processing unit 1 checks the balance of the Osaifu-Keitai (registered trademark) and the balance is insufficient. It is also possible to notify the user of the information indicating that by using the vibration waveform as a trigger (if it is lower than the predetermined amount).
  • the vibration device 8 may be caused to vibrate when a warning information such as rainfall, snowfall, lightning, or the like occurs in a place where the user is present from the weather forecast information acquired from the outside and the above location information. At this time, the vibration device 8 may be vibrated with a vibration waveform corresponding to the type of weather such as rainfall, snowfall, and thunder.
  • the arithmetic processing unit 1 may notify the information by the vibration waveform when various conditions for information notification are satisfied. For example, the arithmetic processing unit 1 can perform notification of the set time, notification that the remaining battery level is low, notification of reception of mail and SNS messages, and the like.
  • a plurality of types of vibration waveforms to which individual information is assigned are generated based on factors such as vibration time, vibration frequency, and vibration amplitude.
  • three types of vibration waveforms are used as a base, and one or more vibration waveforms selected from these three types of vibration waveforms, or a time period sandwiching a non-vibration period of a plurality of vibration waveforms to be selected.
  • Ten types of numbers from “0” to “9” are assigned to the various sequences. Note that the vibration frequency and vibration amplitude of the three types of vibration waveforms having different vibration times may be the same or different.
  • a 0.1 second vibration waveform, a 0.2 second vibration waveform, and a 0.5 second vibration waveform are adopted as three types of vibration waveforms having different vibration times.
  • “0” among 10 numbers is assigned to the 0.1 second vibration waveform.
  • the 0.2 second vibration waveform is assigned a number from “1” to “4” corresponding to the number of times.
  • two 0.2 second vibration waveforms mean the number “2”.
  • “5” is assigned to the 0.5 second vibration waveform.
  • the numbers “6” to “9” are expressed by a temporal arrangement of a 0.5 second vibration waveform and one or more 0.2 second vibration waveforms.
  • “7” is expressed by a “0.5 second vibration waveform” and two 0.2 second vibration waveforms.
  • the first no-vibration time for temporally separating the front and rear vibration waveforms is inserted between the respective vibration waveforms.
  • the first vibration-free time may be about 0.1 to 0.2 seconds, for example.
  • a second no-vibration time is inserted between the vibration waveforms representing the numbers of each digit.
  • the second no-vibration time is preferably a time sufficiently longer than the first no-vibration time, for example, about 0.5 seconds, for discrimination from the first no-vibration time.
  • the two-digit number “25” represents two 0.2 second vibration waveforms 21 a and 21 b meaning “2”, a no-vibration time 22 for the second time, and “ Expressed by vibration 23 for 0.5 seconds meaning 5 ".
  • a first no-vibration time 24 is inserted between the two 0.2-second vibration waveforms 21a and 21b, which means “2”.
  • Such notification information using numbers includes the time, the number of emails, the remaining battery level (remaining time), the remaining amount notification of Osaifu-Keitai (registered trademark), and the like.
  • FIG. 7A is a diagram showing a vibration waveform representing a time of “7:31”.
  • the numbers “7 o'clock” and “31 minutes” are converted into corresponding vibration waveforms.
  • “7 o'clock” is represented by an array of a 0.5 second vibration waveform 31 meaning “5” and two 0.2 second vibration waveforms 32a and 32b meaning “2”. Between each vibration waveform 31, 32a, 32b, no vibration time 33a, 33b for the first time is inserted.
  • “31 minutes” means three 0.2 second vibration waveforms 32c, 32d, 32e meaning “3", no vibration time 34 for the second time, and one 0 .0 means “1". It is expressed by a 2-second vibration waveform 32f. Between each of the three 0.2 second vibration waveforms 32c, 32d, and 32e that mean “3”, the non-vibration times 33c and 33d for the first time are inserted. The vibration waveform indicating “7 o'clock” and the vibration waveform indicating “31 minutes” are separated from each other by, for example, inserting a non-vibration time 35 corresponding to the third time.
  • the third time is preferably a time sufficiently longer than the second time, for example, about 1 second.
  • vibration waveform representation of the number of emails For example, when the number of mail transmissions is “125”, “125” is converted into vibration waveforms corresponding to the numbers “1”, “2”, and “5”. A digit shift is expressed by inserting a non-vibration time for a second time between the vibration waveforms of the respective numbers. In this case, “125 cases” may be rounded to “120 cases” and converted into vibration waveforms. Further, “1571 cases” may be rounded to “1500 cases”.
  • the last part of the vibration waveform becomes a 0.1 second vibration waveform and the time length of the entire vibration waveform is reduced. Since it becomes short, a user's burden at the time of recognizing notification information from a vibration waveform can be reduced.
  • the number of numbers that can be recognized relatively easily from the arrangement of vibration waveforms is about two. This number may be appropriately set by the user according to the user's preference and the degree of familiarity with recognizing the notification information from the vibration waveform.
  • the same vibration waveform expression can be used for information notification such as notification of remaining battery level (remaining time) and notification of the remaining amount of Osaifu-Keitai (registered trademark).
  • a vibration waveform based on a combination of vibration time and vibration frequency or a vibration waveform based on a combination of vibration time and vibration amplitude may be used.
  • the vibration waveform based on the combination of the vibration time and the vibration frequency can be used for notification of information obtained by rounding the “minute” of the time, for example.
  • FIG. 8 is a diagram showing an example of a vibration waveform assigned to each time range obtained by dividing the time (0-60 minutes) into four equal parts every 15 minutes.
  • a 0.5 second vibration waveform of 100 Hz is assigned as the first vibration waveform.
  • an array of the first vibration waveform and the immediately following 150 Hz 0.5 second vibration waveform is assigned as the second vibration waveform.
  • a second vibration waveform and a 200-second 0.5-second vibration waveform immediately following this are allocated as a third vibration waveform.
  • the arrangement of the third vibration waveform and the immediately following 250 Hz 0.5 second vibration waveform is assigned as the fourth vibration waveform.
  • Such a vibration waveform allows the user to recognize the minute range of the time from the number of times the vibration frequency has changed with the vibration time. The user can recognize the minute range of the time more easily and more accurately than by recognizing only the vibration time.
  • each of the above vibration frequencies is an example, and the discriminability of each vibration waveform by the user can be enhanced by further widening the interval between the frequencies.
  • the time may be expressed by being broken down into a finer range, for example, every 10 minutes or every 12 minutes.
  • the vibration frequency may be changed for each information. That is, for the first 0-15 minutes range, the 100 Hz 0.5 second vibration waveform, for the next 15-30 minutes range, the 150 Hz 0.5 second vibration waveform, and the next 30-45 minutes range. For example, a 0.5 second vibration waveform at 200 Hz may be assigned, and a 0.5 second vibration waveform at 250 Hz may be assigned to the 45-60 minute range.
  • the vibration waveform based on the combination of vibration time and vibration frequency can be used for various other information notifications.
  • it can be used as a vibration waveform for notifying information on weather forecasts.
  • the level of the vibration frequency is related to the comfort (badness) that humans feel when receiving the vibration, and it is generally known that the higher the frequency, the more comfortable the vibration is. Therefore, by assigning the vibration frequency to the type of the weather forecast result, the user can easily recognize the result of the weather forecast meaning the vibration.
  • a vibration waveform in which a high frequency (for example, 300 Hz) vibration of 0.5 seconds continues for a plurality of times with a non-vibration time of 0.2 seconds is assigned.
  • a vibration waveform in which a vibration of 0.5 seconds at a slightly lower frequency (for example, 200 Hz) continues several times with a non-vibration time of 0.2 seconds is assigned.
  • a continuous vibration having a slightly lower frequency (for example, 200 Hz) is assigned to “rain”.
  • a vibration waveform in which vibration at a low frequency (for example, 100 Hz) of 0.5 seconds continues for a plurality of times with a non-vibration time of 0.2 seconds is assigned.
  • a low frequency for example, 100 Hz
  • continuous vibrations of low frequency eg 100 Hz
  • the assignment relationship between the weather and the vibration waveform and the vibration waveform are merely examples, and various other modifications are possible.
  • the navigation information may be notified to the user by associating the direction (left and right back and forth) with the vibration waveform based on the combination of the vibration time and the vibration frequency.
  • a vibration waveform in which a vibration of 0.5 seconds at a predetermined frequency (for example, 200 Hz) continues for a plurality of times with a non-vibration time of 0.5 seconds is assigned to “front”.
  • a vibration of 0.5 seconds at a predetermined frequency for example, 200 Hz
  • two vibrations of 0.2 seconds at a predetermined frequency for example, 200 Hz
  • a vibration waveform is assigned.
  • a process is assumed in which a scheduled date and time is set by the user and the remaining time until the scheduled date and time is notified to the user with a vibration waveform.
  • a vibration waveform having a larger total vibration energy as the remaining time until the scheduled date and time is shorter, the user is alerted at a higher intensity.
  • FIG. 9 is a diagram illustrating an example of an allocation relationship between a vibration waveform based on a combination of vibration time and vibration amplitude and the remaining time until the scheduled date and time.
  • a vibration waveform based on a combination of vibration time and vibration amplitude and the remaining time until the scheduled date and time.
  • a 0.2 second vibration waveform having a relatively small amplitude Wa is assigned as the first vibration waveform.
  • a 0.2 second vibration waveform having an amplitude Wb larger than the first vibration waveform is assigned as the second vibration waveform.
  • the 0.4 second vibration waveform having the same amplitude Wb as the second vibration waveform and the vibration time being longer than the second vibration waveform is the third. Assigned as a vibration waveform. Note that it is desirable that there is a sufficient difference between the amplitude Wa and the amplitude Wb in order to make the user sense the difference in vibration intensity with certainty. For example, it is desirable that the ratio is at least twice.
  • the shorter the remaining time until the scheduled date and time the stronger the vibration is given to the user by generating a vibration waveform having a larger total vibration energy. Thereby, the user can intuitively grasp the extent of the remaining time until the scheduled date and time.
  • the vibration waveform based on the combination of the vibration time and the vibration amplitude is a vibration waveform indicating information such as the remaining time until the scheduled date and time, but information may be assigned only to the vibration amplitude.
  • the vibration amplitude may be varied in three or more stages.
  • the vibration time may be varied in three or more stages.
  • the information processing apparatus 100 of the present embodiment described above performs information processing using the vibration waveform transmitted from the information processing apparatus 100 without looking at the screen of the display 2 while the information processing apparatus 100 is placed in the pocket of the user's clothes. Notification information output from the apparatus 100 can be received.
  • a tap on the information processing apparatus 100 allows notification information to be transmitted to the information processing apparatus 100 using a vibration waveform while the information processing apparatus 100 is kept in a user's clothes pocket.
  • Output instructions can be given. Therefore, a series of user interfaces from the notification information output instruction to the notification information being given to the user is achieved with the information processing apparatus 100 still stored in the pocket of the user's clothes.
  • ⁇ Modification 1> Control of vibration intensity according to the pressure applied to the information processing device
  • the degree of vibration transmitted to the human body varies depending on the location of the pocket. For example, in the case of being stored in a side pocket of a jacket and in the case of being stored in a chest pocket or a pants pocket, generally, the former is less likely to transmit vibration to the human body. This can be said that the information processing apparatus stored in the breast pocket or the pants pocket is more likely to receive pressure from the human body on a regular basis than when stored in the side pocket of the jacket. For this reason, when the information processing apparatus is stored in the side pocket of the jacket, vibrations are not sufficiently transmitted to the user, and there is a possibility that information notification using the vibration waveform may fail.
  • the information processing apparatus of Modification 1 includes a pressure-sensitive sensor for detecting a pressure applied from the outside to the housing.
  • the arithmetic processing unit is configured to control the vibration intensity according to the pressure applied to the housing of the information processing device.
  • the arithmetic processing unit performs control so as to generate stronger vibration (vibration having a larger amplitude) in the vibration device as the detected pressure is lower. This increases the possibility that the vibration waveform is transmitted to the user even when the information processing apparatus is housed in a place where the vibration is difficult to be transmitted to the user, such as a side pocket of the jacket.
  • the information processing apparatus 100 is stored in a pocket where vibration is difficult to be transmitted to the human body, such as a side pocket of an outer jacket, information based on the vibration waveform can be well notified to the user.
  • the vibration intensity is varied by changing the amplitude of the vibration.
  • the total vibration by the vibration waveform can be changed by changing the vibration time or the number of repetitions of the vibration waveform.
  • the energy may be varied.
  • control of the vibration intensity according to the pressure applied to the information processing apparatus is also effective when the information processing apparatus is stored in a bag. If the information processing device is tightly stored in the bag together with other items, the vibration of the information processing device is transmitted to the bag as a whole, so that the user can easily feel the vibration. When stored, the vibration is absorbed in the bag and is difficult to be transmitted to the user. When the information processing device is stored in the bag with sufficient margin, the pressure detected by the pressure sensor will be low, so the processing unit will compensate for the vibration absorption in the bag by increasing the vibration intensity. Is possible.
  • ⁇ Modification 2> Control of vibration intensity according to the noise level of the user's location
  • the information processing apparatus according to the second modification is configured such that the arithmetic processing unit optimally controls the vibration intensity according to the noise level of the user's location.
  • Examples of methods for obtaining the noise level of the user's location include the following. 1.
  • the arithmetic processing unit calculates the noise level by collecting environmental sounds from the microphone of the information processing apparatus. 2.
  • the noise level associated with the location information calculated by the arithmetic processing unit based on the GPS information obtained from the GPS processing circuit is acquired from a database in which the location information and the statistically obtained noise level information are associated. .
  • the database may be constructed on a server on the Internet, or may be provided in a storage in the information processing apparatus.
  • the vibration device to vibrate with a low vibration intensity in places where the noise level is relatively low, such as a library or a conference room, and a high vibration intensity in places where the noise level is relatively high, such as a shopping area or an amusement area. Vibrate the vibrating device. Thereby, even in a place where the noise level is high, the probability that the information by the vibration waveform can be notified to the user is improved.
  • ⁇ Modification 3> Control of vibration intensity according to user's static state
  • the arithmetic processing unit determines whether the user is moving or stationary based on the detection data of the acceleration sensor, and stops the vibration intensity when moving. Configured to be higher than time. Thereby, even if the user is moving, the probability that the user can grasp the vibration waveform generated from the information processing apparatus can be increased.
  • ⁇ Modification 4> (Application to wristband type wearable device)
  • the information notification by the vibration waveform can be applied to a wristband type wearable device 200 that can be worn on the wrist 230 of the user, for example, as shown in FIG.
  • the present invention can also be applied to wearable devices that can be attached to various attachment parts capable of obtaining a sense of touch such as the neck, ankle, torso, and head.
  • FIG. 11 is a cross-sectional view of the wristband type wearable device 200 of the fourth modification.
  • the wristband type wearable device 200 includes a belt body 201 and a device body 210.
  • the pair of both ends of the device body 210 are connected to both ends of the belt body 201 in the longitudinal direction so that the belt body 201 and the device body 210 have an annular shape as a whole.
  • the apparatus main body 210 includes a display 211 with a touch sensor panel, an arithmetic processing unit 212, and two vibration devices 213 and 214.
  • the device main body 210 is provided with a microphone, an acceleration sensor, a proximity sensor, a GPS processing circuit, and the like.
  • the two vibration devices 213 and 214 are disposed in the vicinity of one connecting portion with the belt body 201 of the apparatus main body 210 and in the vicinity of the other connecting portion.
  • the two vibration devices 213 and 214 are driven with vibration waveforms synchronized with each other, and the both ends of the belt body 201 connected to the device main body 213 are connected to the device main body 213 side by the length corresponding to the amplitude amount of each vibration.
  • only one vibration device may be provided in one of the vicinity of one connecting portion with the belt body 201 of the apparatus main body 210 and the vicinity of the other connecting portion.
  • FIG. 12 is a cross-sectional view showing a wristband type wearable device including a plurality of vibration devices.
  • the wristband type wearable device 300 includes a belt body 301, a device main body 310, and four vibration devices 311, 312, 313, and 314.
  • the device main body 310 includes a display with a touch sensor panel, an arithmetic processing unit, a microphone, an acceleration sensor, a proximity sensor, a GPS processing circuit, and the like.
  • one vibration device 311 is disposed in the apparatus main body 310.
  • the other three vibrating devices 312, 313, and 314 are disposed on the belt body 301.
  • the four vibrating devices 311, 312, 313, and 314 are arranged at substantially equal intervals in the circumferential direction of the ring formed by the belt body 301 and the device main body 310 when being worn on the wrist 230 of the user.
  • the vibration direction of the four vibration devices 311, 312, 313, and 314 may be a direction in which pressure is efficiently applied to the user's wrist 230 from the outside, for example.
  • the user wearing the wristband type wearable device 300 having such a configuration on the wrist 230 vibrates by grasping the position of the vibration device 311, 312, 313, 314 with vibration by tactile sense.
  • Information pre-assigned to the vibration devices 311, 312, 313, and 314 at the position can be acquired as notification information.
  • the information can be notified also by a combination of a plurality of vibrating devices 311, 312, 313, 314, or an order of the vibrating devices 311, 312, 313, 314 that are vibrating.
  • present technology can be applied not only to smartphones and wristband type wearable devices, but also to neckline wearable devices and head mounted displays.
  • the processing by the arithmetic processing unit 1 of the information processing apparatus 100 can be performed by a control unit of a cloud server (information processing apparatus) on the network.
  • the arithmetic processing unit 1 of the information processing apparatus 100 transmits detection data necessary for tap detection such as the acceleration sensor 4 to a cloud server on the network.
  • the control unit of the cloud server detects the tap operation based on the detection data. If the tap operation is detected, the cloud server control unit generates notification information to the user of the information processing apparatus 100 and uses the notification information as information processing.
  • the information is converted into vibration waveform information of the vibration device 8 of the apparatus 100 and transmitted to the information processing apparatus 100.
  • the arithmetic processing unit 1 of the information processing apparatus 100 drives the vibration device 8 by outputting control information including vibration waveform information received from the cloud server to the vibration device drive circuit 9.
  • the present technology can have the following configurations.
  • a vibration device that generates vibration
  • a user tap operation for instructing information notification is detected, and when the tap operation is detected, notification information is generated, the generated notification information is converted into a vibration waveform, and the vibration device is converted into the vibration waveform.
  • An information processing apparatus comprising: a control unit that vibrates.
  • the control unit is configured to determine whether or not the information processing apparatus is stored in a user's pocket and to start detecting the tap operation when it is determined that the information processing apparatus is stored. apparatus.
  • the information processing apparatus configured to convert the notification information into one or more vibration waveforms that can be identified by at least vibration time.
  • the information processing apparatus according to any one of (1) to (3), A pressure sensor for detecting pressure applied to the information processing apparatus; The information processing apparatus configured to drive the vibration device with a higher vibration intensity as the detected pressure is lower.
  • the information processing apparatus configured to acquire information on a noise level and drive the vibrating device with higher vibration intensity as the noise level is higher.
  • the information processing apparatus acquires location information, searches a database storing noise level information for each location from the acquired location information, and acquires the noise level information corresponding to the acquired location information
  • An information processing apparatus configured to perform.
  • the information processing apparatus configured to determine whether or not the information processing apparatus is moving, and to control the vibration device so that vibration intensity becomes high when the control unit is moving.
  • the information processing apparatus configured to convert the notification information into one or more vibration waveforms that can be identified by the vibration time and the vibration amplitude.
  • the information processing apparatus configured to convert the notification information into a sequence of one or more vibration waveforms that can be identified by vibration time and vibration frequency.
  • the control unit detects a user tap operation for instructing information notification to an information processing apparatus having a vibration device that generates vibration, and generates notification information when the tap operation is detected, An information processing method for converting generated notification information into a vibration waveform and vibrating the vibration device with the vibration waveform.
  • the control unit determines whether the information processing apparatus is stored in a user's pocket, and starts detecting the tap operation when it is determined that the information processing apparatus is stored.
  • the control unit converts the notification information into at least one vibration waveform that can be identified by at least a vibration time.
  • the control unit acquires location information, searches a database storing noise level information for each location from the acquired location information, and acquires the noise level information corresponding to the acquired location information Information processing method.
  • the control unit determines whether or not the information processing apparatus is moving, and controls the vibration device so that a vibration intensity becomes high when the information processing apparatus is moving.
  • the information processing method according to any one of (10), (11), (13) to (16),
  • the control unit converts the notification information into one or more vibration waveforms that can be identified by the vibration time and the vibration amplitude.
  • the information processing method according to any one of (10), (11), (13) to (16),
  • the control unit converts the notification information into a sequence of one or more vibration waveforms that can be identified by vibration time and vibration frequency.
  • a user's tap operation for instructing information notification to an information processing apparatus having a vibration device that generates vibration is detected, and when the tap operation is detected, notification information is generated, and the generated notification is generated.
  • the control unit determines whether or not the information processing apparatus is stored in a user's pocket, and when it is determined that the information processing apparatus is stored, a program for operating a computer to start detection of the tap operation .
  • the control unit is a program for operating a computer to convert the notification information into at least one vibration waveform that can be identified by at least vibration time.
  • the information processing apparatus has a pressure-sensitive sensor that detects a pressure applied to the information processing apparatus,
  • the control unit is a program for operating a computer so that the vibration device is driven with higher vibration intensity as the detected pressure is lower.
  • the control unit obtains noise level information, and causes the computer to operate so as to drive the vibration device with higher vibration intensity as the noise level is higher.
  • the control unit acquires location information, searches a database storing noise level information for each location from the acquired location information, and acquires the noise level information corresponding to the acquired location information
  • the control unit determines whether or not the information processing apparatus is moving, and causes the computer to operate so as to control the vibration device so that vibration intensity becomes high when the information processing apparatus is moving.
  • the program according to any one of (19), (20), (22) to (25),
  • the control unit is a program for operating a computer to convert the notification information into one or more vibration waveforms that can be identified by the vibration time and the vibration amplitude.
  • the control unit is a program for operating a computer to convert the notification information into a sequence of one or more vibration waveforms that can be identified by vibration time and vibration frequency.
  • (28) Receive output information of the sensor transmitted from an information processing terminal including a vibration device that generates vibration and a sensor that detects acceleration, and notify the information based on the received output information of the sensor Detecting the user's tap operation for instructing the information processing terminal, and generating the notification information when the tap operation is detected, and converting the generated notification information into the vibration waveform information of the vibration device.
  • An information processing apparatus comprising: a control unit that performs control to convert and transmit the converted vibration waveform information to the information processing terminal.
  • the information processing apparatus determines whether or not the information processing apparatus is stored in a user's pocket, and when it is determined that the information processing apparatus is stored, the control unit causes the information processing terminal to start detecting the tap operation.
  • An information processing device configured to instruct.
  • the information processing apparatus configured to convert the notification information into one or more vibration waveforms that can be identified by at least vibration time.
  • the information processing apparatus according to any one of (28) to (30), The control unit receives, from the information processing terminal, data of pressure applied to the information processing terminal detected by a pressure-sensitive sensor of the information processing terminal, and the lower the received pressure, the higher the vibration intensity.
  • An information processing apparatus configured to instruct the information processing terminal to drive a vibration device.
  • the information processing apparatus according to any one of (28) to (31),
  • the control unit is configured to acquire information on a noise level of the location of the information processing terminal, and to instruct the information processing terminal to drive the vibration device with higher vibration intensity as the noise level is higher.
  • Information processing device is configured to acquire information on a noise level of the location of the information processing terminal, and to instruct the information processing terminal to drive the vibration device with higher vibration intensity as the noise level is higher.
  • the information processing apparatus configured to determine whether or not the information processing terminal is moving and to instruct the vibration intensity of the vibration device to increase when the control unit is moving.
  • the information processing apparatus according to any one of (28), (29), (31) to (33), The information processing apparatus configured to convert the notification information into one or more vibration waveforms that can be identified by the vibration time and the vibration amplitude.
  • the information processing apparatus configured to convert the notification information into a sequence of one or more vibration waveforms that can be identified by vibration time and vibration frequency.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

【課題】モバイル機器によるユーザへの情報通知に関して、ユーザの操作性を向上させる。 【解決手段】この情報処理装置は、振動デバイスと、情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる制御部とを具備する。

Description

情報処理装置、情報処理方法およびプログラム
 本発明は、例えばモバイル機器などの情報処理装置、情報処理方法およびプログラムに関する。
 スマートフォン、携帯電話、携帯音楽プレーヤなどのモバイル機器には、情報や操作応答などの通知を振動でユーザに伝えるように構成されたものがある。例えば、モバイル機器の操作面の押し込みによる決定操作を感圧センサーにより検知すると、振動モータなどの振動デバイスの振動によりユーザにフィードバッグを応答する技術などが知られる(特許文献1参照)。
 特開2011-59821号公報(段落[0052])
 モバイル機器などの情報処理装置から様々な情報の通知をユーザが受け取るためには、典型的には、ディスプレイをユーザが見て、表示された通知情報を確認する行為が伴う。しかしながら、状況によっては、ユーザがディスプレイを見ることが困難であるなどの理由により、通知情報をユーザが即座受け取ることができないおそれがあるなど、改善すべき点が残されている。
 以上のような事情に鑑み、本技術の目的は、ユーザへの情報通知に関して、ユーザの操作性を向上させることのできる情報処理装置、情報処理方法およびプログラムを提供することにある。
 上記の課題を解決するために、本技術に係る情報処理装置は、振動を発生させる振動デバイスと、情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる制御部とを具備する。
 前記制御部は、前記情報処理装置がユーザのポケット内に収納されているかどうかを判定し、収納されていることが判定された場合に前記タップ操作の検出を開始するように構成されたものであってよい。
 前記制御部は、前記通知情報を、少なくとも振動時間によって識別可能な1以上の振動波形に変換するように構成されたものであってよい。
 さらに、本技術に係る情報処理装置は、前記情報処理装置に加わった圧力を検出する感圧センサーをさらに具備し、前記制御部は、前記検出された圧力が低いほど振動強度が高くなるように前記振動デバイスを制御するように構成されたものであってもよい。
 さらに、本技術に係る情報処理装置において、前記制御部は、騒音レベルの情報を取得し、前記騒音レベルが高いほど振動強度が高くなるように前記振動デバイスを制御するように構成されてもよい。
 また、前記制御部は、場所情報を取得し、前記取得した場所情報から、場所毎の騒音レベルの情報が格納されたデータベースを検索して、前記取得した場所情報に対応する前記騒音レベルの情報を取得するように構成されてもよい。
 あるいは、前記制御部は、前記情報処理装置が移動中であるかどうかを判定し、移動中であるとき振動強度が高くなるように前記振動デバイスを制御するように構成されたものであってもよい。
 前記制御部は、前記通知情報を、前記振動時間と前記振動振幅によって識別可能な1以上の振動波形に変換するように構成されたものであってよい。
 前記制御部は、前記通知情報を、振動時間と振動周波数によって識別可能な1以上の振動波形の並びに変換するように構成されたものであってよい。
 また、本技術にかかる他の形態の情報処理方法は、制御部が、振動を発生させる振動デバイスを有する情報処理装置に情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させることを有する。
 さらに、本技術にかかる他の形態のプログラムは、振動を発生させる振動デバイスを有する情報処理装置に情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる制御部としてコンピュータを動作させる。
 また、本技術にかかる他の形態の情報処理装置は、振動を発生させる振動デバイスを有する情報処理端末に情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を、前記振動デバイスの振動波形の情報に変換し、前記変換された振動波形の情報を前記情報処理端末に送信するように制御を行う制御部を具備する。
 以上のように、本技術によれば、ユーザへの情報通知に関して、ユーザの操作性を向上させることができる。
本技術に係る第1の実施形態の情報処理装置のハードウェアの構成を示すブロック図である。 本実施形態の情報処理装置における振動波形による情報通知の動作を示すフローチャートである。 情報処理装置に対するユーザによるタップ操作を示す図である。 タップ操作の検出条件を示すグラフである。 ユーザが情報処理装置を持って向きを変える際に検出される加速度の変化の推移を示すグラフである。 2桁の数字を表す振動波形の例を示す図である。 時刻を表す振動波形の例を示す図である。 時刻を丸めて表す振動波形の例を示す図である。 時刻の分(0-60分)を15分ずつ4等分した各々の時間範囲に割り当てられた振動波形の例を示す図である。 振動時間と振動振幅との組み合わせによる振動波形と予定日時までの残り時間との割り当て関係の例を示す図である。 本技術を用いた変形例4であるリストバンド型ウェアラブル機器を示す斜視図である。 変形例4のリストバンド型ウェアラブル機器の断面図である。 本技術を用いた変形例5である複数の振動デバイスを備えるリストバンド型ウェアラブル機器を示す断面図である。
 以下、本技術の実施の形態を図面をもとに説明する。
 <第1の実施形態>
 本実施形態は、携帯型のモバイル機器のような情報処理装置に関するものであり、特に、ユーザが衣服のポケットやバッグに収納して携帯することが可能なスマートフォンに本技術を応用したものである。
 [情報処理装置の構成]
 図1は、本技術に係る第1の実施形態の情報処理装置のハードウェアの構成を示すブロック図である。
 同図に示すように、この情報処理装置100は、演算処理ユニット1、ディスプレイ2、カメラユニット3、加速度センサー4、近接センサー5、ジャイロセンサー6、GPS処理回路7、振動デバイス8、振動デバイス駆動回路9などを有する。
 演算処理ユニット1は、CPU(Central Processing Unit)、RAM(Random Access Memory)、ROM(Read Only Memory)およびフラッシュROMなどで構成される。CPUは、ROMおよびフラッシュROMからRAMのメインメモリ領域にロードされたオペレーティングシステムおよびアプリケーションプログラムを実行するための演算処理を実行する。具体的には、CPUは、演算処理ユニット1に接続されたディスプレイ2の表示制御や、カメラユニット3によって撮像された映像の処理、加速度センサー4により生成された加速度データの処理、近接センサー5により生成された近接データの処理、ジャイロセンサー6により生成された角加速度データの処理、GPS処理回路7により得られたGPS情報の処理などを行う。さらに、CPUは、振動デバイス8を目的の振動波形で振動させるように振動デバイス駆動回路9を制御する。
 ディスプレイ2は、画像を表示するパネル型の表示器と、演算処理ユニット1から供給された表示データをもとに表示器に出力をする信号を生成する表示駆動回路とを有する。なお、ディスプレイ2の表示器には、ユーザによりタッチされた座標信号を生成して演算処理ユニット1に供給するタッチセンサーパネルが設けられてもよい。
 カメラユニット3は、対物レンズおよび撮像レンズなどの光学系と、この光学系を通じて取り込んだ光を電気的信号に変換するCMOS(Complementary Metal Oxide Semiconductor)センサー、CCD(Charge Coupled Device)イメージセンサーなどの撮像素子と、この撮像素子により撮像された信号から映像データを生成して演算処理ユニット1に供給する映像信号処理回路とを有する。
 加速度センサー4は、情報処理装置100に加えられた3軸方向(xyz軸方向)の加速度を検出するセンサーである。情報処理装置100のディスプレイ2の画面における縦横の2軸方向をx軸方向およびy軸方向、x軸方向およびy軸方向に対して直交する方向をz軸方向とする。演算処理ユニット1は、ユーザの衣服のポケットなどに入れた情報処理装置100を衣服の上から手で軽く叩くタップ操作を、加速度センサー4などからの検出信号をもとに検出するように構成されている。
 近接センサー5は、情報処理装置100のディスプレイ2側の面に物体が近接したことを検出するためのセンサーである。演算処理ユニット1は、近接センサー5によって近接物体が検出されたときに、例えば、ディスプレイ2の表示をオフにしたり、タッチセンサーパネルの動作をオフにしたりする。また、情報処理装置100がカメラユニット3の対物レンズを塞ぐような向きで設置されているときや、情報処理装置100がポケットやバッグに収納されているときも近接センサー5によって近接物体が検出される。近接センサー5として、例えば、情報処理装置100のディスプレイ2側の面より赤外線を出射する発光素子と、その赤外線の反射光を受光する受光素子とのペアで構成される赤外線近接センサーなどが用いられる。
 ジャイロセンサー6は、情報処理装置100に与えられた3軸(xyz軸)の個々の軸回り方向の角加速度を検出するセンサーである。ジャイロセンサー6によって検出された角加速度データは、演算処理ユニット1において、例えば、情報処理装置100の姿勢の検出や手振れ補正などの処理で用いられる。
 GPS処理回路7は、GPS情報を受信する処理を行う。演算処理ユニット1は、GPS処理回路7によって得られたGPS情報が示す場所の騒音レベルなどの外部情報を例えばインターネットにアクセスするなどして取得し、取得した騒音レベルに対して好適な振動強度を決定するなどの処理を行うことも可能とされている。
 振動デバイス8は、情報処理装置100に振動を発生させるデバイスである。本実施形態では、振動時間、振動周波数、振動振幅などを可変して任意の振動波形を高い自由度で発生させることが可能な構造をもつ振動デバイス8が用いられる。例えば、リニア・バイブレーター、ピエゾ素子などの振動デバイス8が用いられる。
 振動デバイス駆動回路9は、演算処理ユニット1で決定された振動波形で振動デバイス8を振動させるように振動デバイス8に駆動信号を印加する回路である。
 [振動波形による情報通知]
 スマートフォンなどのモバイル機器は、ユーザの衣服のポケットやバッグなどに収納されて持ち運ばれることが多い。スマートフォンなどのモバイル機器では、一般的にはディスプレイを通して様々な通知情報がユーザに提示される。このため、例えば、ユーザの衣服のポケットにモバイル機器を入れているときユーザが時刻などの情報を確認したい場合、ユーザはポケットからモバイル機器を取り出し、ディスプレイの画面を見るといった動作が必要となる。
 これに対し、本実施形態の情報処理装置100は、振動デバイス8を任意の振動波形で振動させることによって、ユーザに振動で情報を通知するように構成される。これにより、ユーザは衣服のポケットなどに情報処理装置100を入れたまま情報の通知を受けることができる。
 図2は本実施形態の情報処理装置100における振動波形による情報通知の動作を示すフローチャートである。
 演算処理ユニット1は、情報処理装置100がポケット内にあるかどうかのパケット内外判定を開始する(ステップS101)。このポケット内外判定は、例えば、近接センサー5によって得た近接データなどをもとにして行われる。情報処理装置100がポケット内にあるとき情報処理装置100のディスプレイ2側の面とポケット内の布地表面とが接近するので、演算処理ユニット1は近接データから情報処理装置100がポケット内にあることを判定することができる。
 また、情報処理装置100がポケット内にあるときカメラユニット3の撮像素子が受ける光の量は著しく少なくなるので、カメラユニット3により得た映像の平均輝度などの明るさの値からポケット内外判定が行われてもよい。あるいは、近接データと映像の明るさの値の両方を用いてポケット内外判定を行うようにしてもよい。
 さらに、加速度センサー4による検出データを加味してポケット内外判定を行うようにしてもよい。すなわち、近接センサー5による近接データをもとに近接物体が検出され、かつ、映像の明るさの値が低い場合であっても、情報処理装置100が机の上などにただ置かれた状態にあることが加速度データから推定される場合には、情報処理装置100がポケット内にあるとは判定されないようにする。
 情報処理装置100がポケット内にあることが判定された場合(ステップS102のYES)、演算処理ユニット1は続いてタップ操作の検出を開始する(ステップS103)。ここで「タップ操作」とは、情報処理装置100の筐体をユーザが手などで軽く叩く操作ことである。例えば、図3に示すように、ユーザUの衣服のポケットPに入った情報処理装置100の筐体をユーザがタップ操作すると、情報処理装置100の加速度センサー4によって、ディスプレイ2の画面に対して直交する軸方向(z軸方向)の加速度が主に検出される。検出された加速度が所定の条件を満たすとき、演算処理ユニット1はタップ操作が行われたことを検出する(ステップS104のYES)。
 ここで、タップ操作の検出条件としては、例えば、図4に示すように、加速度が閾値Aに達した後、一定時間Ta内に閾値A未満に落ちたことなどが挙げられる。この検出条件は、ユーザが情報処理装置100を持って向きを変える際に検出される加速度の変化の推移との違いから決められる。すなわち、図5に示すように、ユーザが情報処理装置100を持って向きを変える際に検出される加速度は閾値A以上となってから、少なくとも上記一定時間Taよりも十分長い時間閾値A以上の状態が連続する。これに比べ、タップ操作時の加速度が閾値Aを超える期間は一時的であり、この時間的推移の違いから情報処理装置100をユーザが操作する動きの中からタップ操作を高い精度で検出することができる。
 なお、評価対象である加速度の軸方向はz軸方向のみに限らず、x軸方向およびy軸方向の各加速度についても併せて評価を行ってもよい。
 演算処理ユニット1は、タップ操作を検出すると、アプリケーションプログラムによって通知情報を生成する。ここで通知情報が時刻である場合を想定する。演算処理ユニット1は、生成された時刻の情報を振動波形の情報に変換する(ステップS105)。この通知情報から振動波形への変換については後で説明する。演算処理ユニット1は、生成された振動波形の情報を含む制御情報を振動デバイス駆動回路9に供給する。振動デバイス駆動回路9は、振動波形の情報を含む制御情報に従って振動デバイス8を駆動する(ステップS106)。
 上の記載では情報処理装置100のタップ操作が検出されたことをトリガとして振動波形による情報通知が行われることとしたが、その他のトリガとして以下のようなものがある。
 1.情報処理装置100をユーザがポケット内で振る操作(シェイク)など、タップ以外の情報処理装置100の特定の動きが検出されたことをトリガとする。
 2.情報処理装置100に設けられた特定のスイッチボタンが押されたことをトリガとする。
 3.GPS処理回路7によって得られたGPS情報をもとに特定の場所情報が判定されたことをトリガとする。例えば、ユーザが、振動波形による情報通知を行うことが望ましい場所を演算処理ユニット1内のフラッシュROMなどに登録しておき、その場所に居ることが判定されたことをトリガとして、その旨を示す情報を振動波形でユーザに通知する方法などが挙げられる。
 4.上記の場所情報と特定のユーザデータとの組み合わせから所定の条件が成立した場合をトリガとしてもよい。例えば、駅の改札など、おサイフケータイ(登録商標)を利用して清算が可能な場所が判定されたとき、演算処理ユニット1がおサイフケータイ(登録商標)の残高を確認し、残高が不足している(所定の金額より低い)ことをトリガとして、その旨を示す情報を振動波形でユーザに通知するようにしてもよい。
 5.外部より取得した天気予報の情報と上記の場所情報とから、ユーザの居る場所で例えば降雨、降雪、雷などの注意情報が発生した場合をトリガとして振動デバイス8を振動させてもよい。この際、降雨、降雪、雷などの天気の種類に応じた振動波形で振動デバイス8を振動させてもよい。
 演算処理ユニット1は、その他、情報通知のための様々な条件が成立した場合に振動波形による情報を通知するようにしてもよい。例えば、演算処理ユニット1は、設定時刻の通知、バッテリー残量が残り少ないことの通知、メールやSNSメッセージの受信の通知などを行うことが可能である。
 次に、振動波形と、振動波形に対する情報の割り当て方について説明する。
 本実施形態の情報処理装置100では、振動時間、振動周波数、振動振幅などの要素によって、各々個別の情報が割り当てられた複数の種類の振動波形が生成される。
 (振動波形による数字表現)
 時刻など、様々な場面での情報の表現に用いられる数字を通知情報とする場合、"0"から"9"の10種類の数字に固有の振動波形を割り当てても、これら10種類の振動波形をユーザが正確に判別できるとは限らない。ユーザが容易かつ正確に判別できる振動波形の種類はせいぜい3種類程度であると考えられる。
 本実施形態では、3種類の振動波形をベースとして用い、これら3種類の振動波形の中から選択される1以上の振動波形、あるいは選択される複数の振動波形の無振動期間を挟んだ時間的な並びに対して"0"から"9"の10種類の数字を割り当てることとした。なお、振動時間が異なる3種類の振動波形の振動周波数および振動振幅は同じであっても異なってもかまわない。
 ここでは、振動時間が異なる3種類の振動波形を用いて10種類の数字を表現する場合について述べるが、振動周波数あるいは振動振幅が異なる3種類の振動波形を用いた場合でも同様である。
 振動時間が異なる3種類の振動波形として、0.1秒振動波形、0.2秒振動波形、0.5秒振動波形が採用された場合を想定する。
 0.1秒振動波形には10種類の数字のうち"0"が割り当てられる。
 0.2秒振動波形は、その回数に対応して"1"から"4"の数字が割り当てられる。例えば、2回の0.2秒振動波形は"2"の数字を意味する。
 0.5秒振動波形には"5"が割り当てられる。"6"から"9"の数字は0.5秒振動波形と1回以上の0.2秒振動波形との時間的な並びによって表現される。例えば、"7"は"0.5秒振動波形と2回の0.2秒振動波形とによって表現される。
 各々の振動波形間には、前後の振動波形を時間的に分離するための第1の無振動時間が挿入される。第1の無振動時間は例えば0.1~0.2秒程度でよい。
 複数桁の数字を表現する場合、各々の桁の数字を意味する振動波形間には、第2の無振動時間が挿入される。第2の無振動時間は、第1の無振動時間との識別のため第1の無振動時間よりも十分長い時間例えば0.5秒程度がよい。
 したがって、"25"という2桁の数字は、図6に示すように、"2"を意味する2回の0.2秒間振動波形21a、21b、第2の時間分の無振動時間22、"5"を意味する0.5秒間振動23によって表現される。"2"を意味する2回の0.2秒間振動波形21a、21bの間には第1の無振動時間24が挿入される。
 このように数字を用いた通知情報には、時刻、メール件数、バッテリー残量(残り時間)、おサイフケータイ(登録商標)の残額通知などが挙げられる。
 (時刻の振動波形表現)
 図7Aは"7時31分"という時刻を表す振動波形を示す図である。
 この場合、"7時"と"31分"の数字が各々対応する振動波形に変換される。
 "7時"は"5"を意味する0.5秒振動波形31と、"2"を意味する2回の0.2秒振動波形32a、32bとの並びで表現される。各々の振動波形31、32a、32b間には第1の時間分の無振動時間33a、33bが挿入される。
 "31分"は"3"を意味する3回の0.2秒振動波形32c、32d、32eと、第2の時間分の無振動時間34と、"1"を意味する1回の0.2秒振動波形32fで表現される。"3"を意味する3回の0.2秒振動波形32c、32d、32eの各々の間には第1の時間分の無振動時間33c、33dが挿入される。
 そして、"7時"を示す振動波形と"31分"を示す振動波形との間には、例えば、第3の時間分の無振動時間35が挿入されることによって互いに分離される。第3の時間は、例えば、第2の時間よりも十分長い時間、例えば1秒程度が好ましい。
 なお、"7時31分"を"7時30分"のように丸めて振動波形に変換してもよい。これにより、図7Bに示すように、振動波形が短縮され、ユーザによる通知情報の判別精度が向上する。
 (メール件数の振動波形表現)
 例えば、メールの送信件数が"125件"である場合、"125"は"1"、"2"、"5"の各数字が対応する振動波形に変換される。各々の数字の振動波形間には第2の時間分の無振動時間が挿入されることによって桁のシフトが表現される。
 なお、この場合も、"125件"を"120件"のように丸めて振動波形に変換してもよい。また、「1571件」を「1500件」に丸めてもよい。
 このように、振動波形による情報通知においては、複雑かつ長時間の振動波形を避けるべきである。上記のように下1桁や下2桁などの下位の桁の数字を"0"に丸めることによって、振動波形の最後の部分が0.1秒振動波形となって振動波形全体の時間長が短くなるので、振動波形から通知情報を認識する際のユーザの負担を低減することができる。多くのユーザにおいて、振動波形の並びから比較的容易に認識できる数字の数は2つ程度である。この数はユーザの好みや、振動波形から通知情報を認識することの慣れの程度に応じて、ユーザが適宜設定できるようにしてもよい。
 バッテリー残量(残り時間)の通知、おサイフケータイ(登録商標)の残額通知などの情報通知においても同様の振動波形表現を用いることができる。
 ここまで、振動時間によって特徴付けられた3種類の振動波形を用いて10種類の数字を表現する場合について述べたが、振動の周波数あるいは振幅が異なる3種類の振動波形を用いた場合でも同様である。
 また、振動時間と振動周波数との組み合わせによる振動波形、あるいは、振動時間と振動振幅との組み合わせによる振動波形を用いてもよい。
 (振動時間と振動周波数との組み合わせによる振動波形について)
 次に、振動時間と振動周波数とを組み合わせによる振動波形と、これに割り当てられることが好適な通知情報について説明する。
 振動時間と振動周波数との組み合わせによる振動波形は、例えば、時刻の"分"を丸めた情報の通知に利用できる。
 図8は、時刻の分(0-60分)を15分ずつ4等分した各々の時間範囲に割り当てられた振動波形の例を示す図である。
 この例では、最初の0-15分範囲に対しては、100Hzの0.5秒振動波形が第1の振動波形として割り当てられる。次の15-30分範囲に対して、第1の振動波形とこの直後に続く150Hzの0.5秒振動波形の並びが第2の振動波形として割り当てられる。次の30-45分範囲に対しては、第2の振動波形とこの直後に続く200Hzの0.5秒振動波形との並び第3の振動波形として割り当てられる。そして45-60分範囲に対しては、第3の振動波形とこの直後に続く250Hzの0.5秒振動波形との並びが第4の振動波形として割り当てられる。
 このような振動波形によって、ユーザは振動時間とともに振動周波数が変化した回数から時刻の分範囲を認識することができる。ユーザは振動時間だけで認識するよりも容易かつ正確に時刻の分範囲を認識することができる。
 なお、上記の各振動周波数は例であり、各周波数の間隔をさらに広げることによってユーザによる各振動波形の判別性を高めることが可能である。あるいは、振動周波数の可変数をさらに増やすことによって、時刻の分を例えば10分刻みや12分刻みのように、さらに細かい範囲に分解して表現してもよい。
 また、情報毎に振動周波数のみを変えてもよい。すなわち、最初の0-15分範囲に対しては100Hzの0.5秒振動波形、次の15-30分範囲に対しては150Hzの0.5秒振動波形、次の30-45分範囲に対しては200Hzの0.5秒振動波形、そして45-60分範囲に対しては250Hzの0.5秒振動波形が割り当てられてもよい。
 振動時間と振動周波数との組み合わせによる振動波形は、その他、様々な情報の通知に利用できる。例えば、天気予報の情報などを通知する振動波形として利用可能である。特に振動周波数の高低は人間がその振動を受けた際に感じる心地良さ(悪さ)と関係があり、一般的には高い周波数ほど心地良い振動であることが知られている。そこで、天気予報の結果の種類に対して振動周波数を割り当てることによって、振動の意味する天気予報の結果をユーザに容易に認識させることができる。
 以下に、天気予報の結果と振動波形との割り当ての関係の一例を説明する。
 "晴れ"に対して、高い周波数(例えば300Hz)の0.5秒の振動が0.2秒間の無振動時間を挟んで複数回連続する振動波形が割り当てられる。
 "曇り"に対して、少し低目の周波数(例えば200Hz)の0.5秒の振動が0.2秒間の無振動時間を挟んで複数回連続する振動波形が割り当てられる。
 "雨"に対して、少し低目の周波数(例えば200Hz)の連続振動が割り当てられる。
 "雪"に対して、低い周波数(例えば100Hz)の0.5秒の振動が0.2秒間の無振動時間を挟んで複数回連続する振動波形が割り当てられる。
 "雷および嵐"に対して、低い周波数(例えば100Hz)の連続振動が割り当てられる。
 なお、これらの天気と振動波形との割り当て関係や振動波形は一例にすぎず、その他、様々な変形が可能である。
 さらに、振動時間と振動周波数との組み合わせによる振動波形に方向(左右前後)を対応付けて、ナビゲーション情報をユーザに通知するようにしてもよい。
 以下に、方向と振動波形との割り当て関係の一例を説明する。
 "前方"に対して、所定の周波数(例えば200Hz)の0.5秒の振動が0.5秒間の無振動時間を挟んで複数回連続する振動波形が割り当てられる。
 "右"に対しては、0.2秒の間隔を挟んで所定の周波数(例えば200Hz)の0.2秒の2回の振動が0.5秒間の無振動時間を挟んで複数回連続する振動波形が割り当てられる。
 "左"に対しては、0.2秒の間隔を挟んで所定の周波数(例えば200Hz)の0.2秒の3回の振動が0.5秒間の無振動時間を挟んで複数回連続する振動波形が割り当てられる。
 "後方"に対しては、所定の周波数(例えば200Hz)で連続する振動波形、あるいは数秒間連続する振動波形が割り当てられる。
 なお、これらの天気と振動波形との割り当て関係や振動波形は一例にすぎず、その他、様々な変形が可能である。
 (振動時間と振動振幅との組み合わせによる振動波形について)
 次に、振動時間と振動振幅との組み合わせによる振動波形と、これに割り当てられることが好適な通知情報について説明する。
 例えば、情報処理装置100を用いたユーザのスケジュール管理において、予定日時がユーザにより設定され、その予定日時まの残り時間を振動波形でユーザに通知する処理を想定する。予定日時までの残り時間が短いほどトータルの振動エネルギーが大きい振動波形を発生させることによって、より高い強度でユーザに注意喚起が与えられる。
 図9は振動時間と振動振幅との組み合わせによる振動波形と予定日時までの残り時間との割り当て関係の例を示す図である。
 この例では、予定日時までの残り時間が30分以上である場合に対して、比較的小さい振幅Waの0.2秒振動波形が第1の振動波形として割り当てられる。予定日時までの残り時間が15分以上30分未満である場合に対して、第1の振動波形よりも大きい振幅Wbを有する0.2秒振動波形が第2の振動波形として割り当てられる。そして予定日時までの残り時間が15分未満である場合に対して、第2の振動波形と同じ振幅Wbを有し第2の振動波形よりも振動時間が長い0.4秒振動波形が第3の振動波形として割り当てられる。
 なお、振動強度の差をユーザに確実に感受させるために振幅Waと振幅Wbとの間には十分な差があることが望ましい。例えば少なくとも2倍程度であることが望ましい。
 このように、予定日時までの残り時間が短いほど、トータルの振動エネルギーが大きい振動波形を発生させることによって、より刺激の強い振動がユーザに与えられる。これにより、ユーザは予定日時までの残り時間の程度を直感的に把握することができる。
 なお、本例では、振動時間と振動振幅との組み合わせによる振動波形を予定日時までの残り時間などの情報を示す振動波形としたが、振動振幅のみに情報を割り当ててもよい。また、振動振幅は3段階以上に可変させてもよい。振動時間についても3段階以上に可変させてもよい。
 [本実施形態の効果]
 以上説明した本実施形態の情報処理装置100は、本情報処理装置100をユーザの衣服のポケットに入れたまま、ディスプレイ2の画面を見なくても、情報処理装置100から伝わる振動波形によって情報処理装置100から出力される通知情報を受け取ることができる。
 また、本実施形態の情報処理装置100によれば、情報処理装置100に対するタップによって、情報処理装置100をユーザの衣服のポケットに入れたまま、情報処理装置100に対して振動波形による通知情報の出力指示を与えることができる。したがって、通知情報の出力指示から通知情報がユーザに与えられるまでの一連のユーザインタフェースが、情報処理装置100をユーザの衣服のポケットに収納したままの状態で達成される。
 <変形例1>
 (情報処理装置に加わった圧力に応じた振動強度の制御)
 情報処理装置がユーザの衣服のポケットに収納される場合、ポケットの場所などによって人体に振動が伝わる度合に違いが出てくる。例えば、上着のサイドポケットに収納された場合と胸ポケットやズボンのポケットに収納された場合とでは、一般的には前者の方が人体に振動が伝わりにくい。これは、胸ポケットやズボンのポケットに収納された情報処理装置は、上着のサイドポケットに収納された場合よりも、定常的に人体側からの圧を受けやすいからと言える。このため、上着のサイドポケットに情報処理装置が収納されているときはユーザに振動が十分に伝わらず、振動波形による情報通知に失敗する可能性がある。
 このような点を鑑みて、本変形例1の情報処理装置は、筐体に外部から加わった圧力を検出するための感圧センサーを備える。演算処理ユニットは、情報処理装置の筐体に加わった圧力に応じて振動強度を制御するように構成される。演算処理ユニットは、検出された圧力が低い程、振動デバイスに強い振動(振幅の大きい振動)を発生させるように制御を行う。これにより、例えば上着のサイドポケットなど、ユーザに振動が伝わりにくい場所に情報処理装置が収納されている場合であっても、振動波形がユーザに伝わる可能性が増大する。
 これにより、例えば上着のサイドポケットなど、人体に振動が伝わりにくいポケットに情報処理装置100が収納されている場合であっても、振動波形による情報をユーザに良好に通知することができる。
 なお、ここでは、振動の振幅を変化させて振動強度を可変させることとしたが、振動時間を可変したり、振動波形の繰り返しの回数を可変したりすることなどによって、振動波形によるトータルの振動エネルギーを可変させてもよい。
 また、上記の情報処理装置に加わった圧力に応じた振動強度の制御は、情報処理装置がバッグに収納されている場合にも有効である。バッグ内に情報処理装置が他の収納物とともに密に収納されていれば、情報処理装置の振動がバッグに全体的に伝わるのでユーザは振動を感じやすいが、バッグ内に情報処理装置が余裕をもって収納されている場合には振動がバッグ内で吸収されてユーザに伝わり難くなる。バッグ内に情報処理装置が余裕をもって収納されている場合、感圧センサーによって検出される圧力が低くなるので、演算処理ユニットは振動強度を高くすることによって、バッグ内での振動吸収分を補うことが可能となる。
 <変形例2>
 (ユーザの居場所の騒音レベルに応じた振動強度の制御)
 ユーザの居場所によっては、情報処理装置から発せられる振動が周囲の騒音にかき消されてユーザに十分伝わらないことが考えられる。本変形例2の情報処理装置は、演算処理ユニットが、ユーザの居場所の騒音レベルに応じて振動強度を最適に制御するように構成される。
 ユーザの居場所の騒音レベルを得る方法には例えば以下がある。
 1.情報処理装置のマイクから環境音を集めて演算処理ユニットが騒音レベルを算出する。
 2.場所情報と統計的に得られた騒音レベル情報とを紐付けたデータベースから、演算処理ユニットがGPS処理回路から得たGPS情報をもとに算出した場所情報に紐付けられた騒音レベルを取得する。データベースは、インターネット上のサーバに構築されたものであってもよいし、情報処理装置内のストレージに設けられたものであってもよい。
 これにより、例えば、図書館、会議室など、騒音レベルが比較的低い場所においては低い振動強度で振動デバイスを振動させ、ショッピングエリア、アミューズメントエリアなど、騒音レベルが比較的高い場所においては、高い振動強度で振動デバイスを振動させる。これにより、騒音レベルが高い場所であっても、ユーザに振動波形による情報を通知できる確率が向上する。
 <変形例3>
 (ユーザの静動状態に応じた振動強度の制御)
 本変形例3の情報処理装置において、演算処理ユニットは、加速度センサーの検出データをもとにユーザが移動中であるか静止中であるかを判別し、移動中である場合は振動強度を停止時よりも高くするように構成される。これにより、ユーザが移動中であっても情報処理装置から発せられる振動波形をユーザが捉えられる確率を高めることができる。
 <変形例4>
 (リストバンド型ウェアラブル機器への応用)
 振動波形による情報通知は、例えば、図10に示すように、ユーザの手首230に装着可能なリストバンド型ウェアラブル機器200にも応用され得る。また、その他、首、足首、胴体、頭部など、触覚を得ることが可能な様々な被装着部に装着可能なウェアラブル機器にも適用可能である。
 図11は、変形例4のリストバンド型ウェアラブル機器200の断面図である。
 図10および図11に示すように、このリストバンド型ウェアラブル機器200は、ベルト体201と機器本体210とを備える。ベルト体201と機器本体210は、全体として円環状となるように、機器本体210の一対の両端部がベルト体201の長尺方向の両端に各々連結される。機器本体210はタッチセンサーパネル付きのディスプレイ211、演算処理ユニット212、および2つの振動デバイス213、214などで構成される。機器本体210には、その他、マイク、加速度センサー、近接センサー、GPS処理回路などが設けられる。
 2つの振動デバイス213、214は、機器本体210のベルト体201との一方の連結部付近と他方の連結部付近に配設される。2つの振動デバイス213、214は互いに同期した振動波形で駆動され、各々の振動の振幅量に対応する長さの分だけ、機器本体213に連結されたベルト体201の両端を機器本体213の側に同時に引き寄せたり同時に戻したりするように構成される。これにより、このリストバンド型ウェアラブル機器200を装着したユーザの手首230に間欠的な圧迫感が与えられ、ユーザに振動波形による情報が通知される。
 なお、振動デバイスは、機器本体210のベルト体201との一方の連結部付近と他方の連結部付近のうち一方に1つだけ設けられてもよい。
 <変形例5>
 (複数の振動デバイスを備えるリストバンド型ウェアラブル機器)
 図12は、複数の振動デバイスを備えるリストバンド型ウェアラブル機器を示す断面図である。
 このリストバンド型ウェアラブル機器300は、ベルト体301と、機器本体310と、4つの振動デバイス311、312、313、314とを備える。機器本体310はタッチセンサーパネル付きのディスプレイ、演算処理ユニット、マイク、加速度センサー、近接センサー、GPS処理回路などを有する。
 4つの振動デバイス311、312、313、314のうち、1つの振動デバイス311は機器本体310に配設される。他の3つの振動デバイス312、313、314はベルト体301に配設される。4つの振動デバイス311、312、313、314は、ユーザの手首230に装着されているときベルト体301と機器本体310とで形成される円環の円周方向において略等間隔に配置される。4つの振動デバイス311、312、313、314の振動方向は、例えば、ユーザの手首230に外側から効率的に圧が加わる方向であればよい。
 このような構成を有するリストバンド型ウェアラブル機器300を手首230に装着したユーザは、どの位置の振動デバイス311、312、313、314が振動しているかを触覚で捉えることによって、その振動している位置の振動デバイス311、312、313、314に対して予め割り当てられている情報を通知情報として取得することができる。あるいは、振動している複数の振動デバイス311、312、313、314の組み合わせや、振動している複数の振動デバイス311、312、313、314の順番などによっても、情報を通知することができる。
 なお、本技術は、スマートフォン、リストバンド型ウェアラブル機器に限らず、首掛け型のウェアラブル機器や、ヘッドマウントディスプレイなどにも適用することができる。
 <変形例6>
 さらに、本技術は、上記の情報処理装置100(情報処理端末)の演算処理ユニット1による処理は、ネットワーク上のクラウドサーバ(情報処理装置)の制御部にて行うことが可能である。上記の情報処理装置100の演算処理ユニット1は、加速度センサー4などのタップ検出に必要な検出データをネットワーク上のクラウドサーバに送信する。クラウドサーバの制御部は、この検出データをもとにタップ操作検出を行い、タップ操作が検出されたならば、情報処理装置100のユーザへの通知情報を生成し、この通知情報を、情報処理装置100の振動デバイス8の振動波形の情報に変換し、情報処理装置100に送信する。情報処理装置100の演算処理ユニット1は、クラウドサーバより受信した振動波形の情報を含む制御情報を振動デバイス駆動回路9に出力することによって、振動デバイス8を駆動する。
 さらに、本技術は以下のような構成もとることができる。
(1)振動を発生させる振動デバイスと、
 情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる制御部と
 を具備する情報処理装置。
(2)上記(1)に記載の情報処理装置であって、
 前記制御部は、前記情報処理装置がユーザのポケット内に収納されているかどうかを判定し、収納されていることが判定された場合に前記タップ操作の検出を開始するように構成された
 情報処理装置。
(3)上記(1)または(2)に記載の情報処理装置であって、
 前記制御部は、前記通知情報を、少なくとも振動時間によって識別可能な1以上の振動波形に変換するように構成された
 情報処理装置。
(4)上記(1)ないし(3)のいずれかに記載の情報処理装置であって、
 前記情報処理装置に加わった圧力を検出する感圧センサーをさらに具備し、
 前記制御部は、前記検出された圧力が低いほど高い振動強度で前記振動デバイスを駆動させるように構成された
 情報処理装置。
(5)上記(1)ないし(4)のいずれかに記載の情報処理装置であって、
 前記制御部は、騒音レベルの情報を取得し、前記騒音レベルが高いほど高い振動強度で前記振動デバイスを駆動させるように構成された
 情報処理装置。
(6)上記(1)ないし(5)のいずれかに記載の情報処理装置であって、
 前記制御部は、場所情報を取得し、前記取得した場所情報から、場所毎の騒音レベルの情報が格納されたデータベースを検索して、前記取得した場所情報に対応する前記騒音レベルの情報を取得するように構成された
 情報処理装置。
(7)上記(1)ないし(6)のいずれかに記載の情報処理装置であって、
 前記制御部は、前記情報処理装置が移動中であるかどうかを判定し、移動中であるとき振動強度が高くなるように前記振動デバイスを制御するように構成された
 情報処理装置。
(8)上記(1)、(2)、(4)ないし(7)のいずれかに記載の情報処理装置であって、
 前記制御部は、前記通知情報を、前記振動時間と前記振動振幅によって識別可能な1以上の振動波形に変換するように構成された
 情報処理装置。
(9)上記(1)、(2)、(4)ないし(7)のいずれかに記載の情報処理装置であって、
 前記制御部は、前記通知情報を、振動時間と振動周波数によって識別可能な1以上の振動波形の並びに変換するように構成された
 情報処理装置。
(10)制御部が、振動を発生させる振動デバイスを有する情報処理装置に情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる
 情報処理方法。
(11)上記(10)に記載の情報処理方法であって、
 前記制御部は、前記情報処理装置がユーザのポケット内に収納されているかどうかを判定し、収納されていることが判定された場合に前記タップ操作の検出を開始する
 情報処理方法。
(12)上記(10)または(11)に記載の情報処理方法であって、
 前記制御部は、前記通知情報を、少なくとも振動時間によって識別可能な1以上の振動波形に変換する
 情報処理方法。
(13)上記(10)ないし(12)のいずれかに記載の情報処理方法であって、
 前記制御部は、感圧センサーによって検出された前記情報処理装置に加わった圧力が低いほど高い振動強度で前記振動デバイスを駆動させる
 情報処理方法。
(14)上記(10)ないし(13)のいずれかに記載の情報処理方法であって、
 前記制御部は、騒音レベルの情報を取得し、前記騒音レベルが高いほど高い振動強度で前記振動デバイスを駆動させる
 情報処理方法。
(15)上記(10)ないし(14)のいずれかに記載の情報処理方法であって、
 前記制御部は、場所情報を取得し、前記取得した場所情報から、場所毎の騒音レベルの情報が格納されたデータベースを検索して、前記取得した場所情報に対応する前記騒音レベルの情報を取得する
 情報処理方法。
(16)上記(10)ないし(15)のいずれかに記載の情報処理方法であって、
 前記制御部は、前記情報処理装置が移動中であるかどうかを判定し、移動中であるとき振動強度が高くなるように前記振動デバイスを制御する
 情報処理方法。
(17)上記(10)、(11)、(13)ないし(16)のいずれかに記載の情報処理方法であって、
 前記制御部は、前記通知情報を、前記振動時間と前記振動振幅によって識別可能な1以上の振動波形に変換する
 情報処理方法。
(18)上記(10)、(11)、(13)ないし(16)のいずれかに記載の情報処理方法であって、
 前記制御部は、前記通知情報を、振動時間と振動周波数によって識別可能な1以上の振動波形の並びに変換する
 情報処理方法。
(19)振動を発生させる振動デバイスを有する情報処理装置に情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる制御部として
 コンピュータを動作させるプログラム。
(20)上記(19)に記載のプログラムであって、
 前記制御部は、前記情報処理装置がユーザのポケット内に収納されているかどうかを判定し、収納されていることが判定された場合に前記タップ操作の検出を開始するように
 コンピュータを動作させるプログラム。
(21)上記(19)または(20)に記載のプログラムであって、
 前記制御部は、前記通知情報を、少なくとも振動時間によって識別可能な1以上の振動波形に変換するように
 コンピュータを動作させるプログラム。
(22)上記(19)ないし(21)のいずれかに記載のプログラムであって、
 前記情報処理装置は、この情報処理装置に加わった圧力を検出する感圧センサーを有し、
 前記制御部は、前記検出された圧力が低いほど高い振動強度で前記振動デバイスを駆動させるように
 コンピュータを動作させるプログラム。
(23)上記(19)ないし(22)のいずれかに記載のプログラムであって、
 前記制御部は、騒音レベルの情報を取得し、前記騒音レベルが高いほど高い振動強度で前記振動デバイスを駆動させるように
 コンピュータを動作させるプログラム。
(24)上記(19)ないし(23)のいずれかに記載のプログラムであって、
 前記制御部は、場所情報を取得し、前記取得した場所情報から、場所毎の騒音レベルの情報が格納されたデータベースを検索して、前記取得した場所情報に対応する前記騒音レベルの情報を取得するように
 コンピュータを動作させるプログラム。
(25)上記(19)ないし(24)のいずれかに記載のプログラムであって、
 前記制御部は、前記情報処理装置が移動中であるかどうかを判定し、移動中であるとき振動強度が高くなるように前記振動デバイスを制御するように
 コンピュータを動作させるプログラム。
(26)上記(19)、(20)、(22)ないし(25)のいずれかに記載のプログラムであって、
 前記制御部は、前記通知情報を、前記振動時間と前記振動振幅によって識別可能な1以上の振動波形に変換するように
 コンピュータを動作させるプログラム。
(27)上記(19)、(20)、(22)ないし(25)のいずれかに記載のプログラムであって、
 前記制御部は、前記通知情報を、振動時間と振動周波数によって識別可能な1以上の振動波形の並びに変換するように
 コンピュータを動作させるプログラム。
(28)振動を発生させる振動デバイスと、加速度を検出するセンサーとを具備する情報処理端末から送信された前記センサーの出力情報を受信し、前記受信したセンサーの出力情報をもとに、情報通知を前記情報処理端末に指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を、前記振動デバイスの振動波形の情報に変換し、前記変換された振動波形の情報を前記情報処理端末に送信するように制御を行う制御部
 を具備する情報処理装置。
(29)上記(28)に記載の情報処理装置であって、
 前記制御部は、前記情報処理装置がユーザのポケット内に収納されているかどうかを判定し、収納されていることが判定された場合に前記タップ操作の検出を開始するように前記情報処理端末に指示するように構成された
 情報処理装置。
(30)上記(28)または(29)に記載の情報処理装置であって、
 前記制御部は、前記通知情報を、少なくとも振動時間によって識別可能な1以上の振動波形に変換するように構成された
 情報処理装置。
(31)上記(28)ないし(30)のいずれかに記載の情報処理装置であって、
 前記制御部は、前記情報処理端末より、前記情報処理端末の感圧センサーによって検出された、前記情報処理端末に加わった圧力のデータを受信し、前記受信した圧力が低いほど高い振動強度で前記振動デバイスを駆動させるように前記情報処理端末に指示するように構成された
 情報処理装置。
(32)上記(28)ないし(31)のいずれかに記載の情報処理装置であって、
 前記制御部は、前記情報処理端末の居場所の騒音レベルの情報を取得し、前記騒音レベルが高いほど高い振動強度で前記振動デバイスを駆動させるように前記情報処理端末に指示するように構成された
 情報処理装置。
(33)上記(28)ないし(32)のいずれかに記載の情報処理装置であって、
 前記制御部は、前記情報処理端末が移動中であるかどうかを判定し、移動中であるとき前記振動デバイスの振動強度が高くなるように指示するように構成された
 情報処理装置。
(34)上記(28)、(29)、(31)ないし(33)のいずれかに記載の情報処理装置であって、
 前記制御部は、前記通知情報を、前記振動時間と前記振動振幅によって識別可能な1以上の振動波形に変換するように構成された
 情報処理装置。
(35)上記(28)、(29)、(31)ないし(33)のいずれかに記載の情報処理装置であって、
 前記制御部は、前記通知情報を、振動時間と振動周波数によって識別可能な1以上の振動波形の並びに変換するように構成された
 情報処理装置。
 その他、本技術は、上述の実施形態にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
 1…演算処理ユニット
 2…ディスプレイ
 3…カメラユニット
 4…加速度センサー
 5…近接センサー
 6…ジャイロセンサー
 7…GPS処理回路
 8…振動デバイス
 9…振動デバイス駆動回路
 100…情報処理装置

Claims (12)

  1.  振動を発生させる振動デバイスと、
     情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる制御部と
     を具備する情報処理装置。
  2.  請求項1に記載の情報処理装置であって、
     前記制御部は、前記情報処理装置がユーザのポケット内に収納されているかどうかを判定し、収納されていることが判定された場合に前記タップ操作の検出を開始するように構成された
     情報処理装置。
  3.  請求項2に記載の情報処理装置であって、
     前記制御部は、前記通知情報を、少なくとも振動時間によって識別可能な1以上の振動波形に変換するように構成された
     情報処理装置。
  4.  請求項3に記載の情報処理装置であって、
     前記情報処理装置に加わった圧力を検出する感圧センサーをさらに具備し、
     前記制御部は、前記検出された圧力が低いほど高い振動強度で前記振動デバイスを駆動させるように構成された
     情報処理装置。
  5.  請求項4に記載の情報処理装置であって、
     前記制御部は、騒音レベルの情報を取得し、前記騒音レベルが高いほど高い振動強度で前記振動デバイスを駆動させるように構成された
     情報処理装置。
  6.  請求項5に記載の情報処理装置であって、
     前記制御部は、場所情報を取得し、前記取得した場所情報から、場所毎の騒音レベルの情報が格納されたデータベースを検索して、前記取得した場所情報に対応する前記騒音レベルの情報を取得するように構成された
     情報処理装置。
  7.  請求項6に記載の情報処理装置であって、
     前記制御部は、前記情報処理装置が移動中であるかどうかを判定し、移動中であるとき振動強度が高くなるように前記振動デバイスを制御するように構成された
     情報処理装置。
  8.  請求項2に記載の情報処理装置であって、
     前記制御部は、前記通知情報を、前記振動時間と前記振動振幅によって識別可能な1以上の振動波形に変換するように構成された
     情報処理装置。
  9.  請求項2に記載の情報処理装置であって、
     前記制御部は、前記通知情報を、振動時間と振動周波数によって識別可能な1以上の振動波形の並びに変換するように構成された
     情報処理装置。
  10.  制御部が、振動を発生させる振動デバイスを有する情報処理装置に情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる
     情報処理方法。
  11.  振動を発生させる振動デバイスを有する情報処理装置に情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を振動波形に変換し、前記振動波形で前記振動デバイスを振動させる制御部として
     コンピュータを動作させるプログラム。
  12.  振動を発生させる振動デバイスを有する情報処理端末に情報通知を指示するためのユーザのタップ操作を検出し、前記タップ操作が検出されたとき、通知情報を生成し、前記生成された通知情報を、前記振動デバイスの振動波形の情報に変換し、前記変換された振動波形の情報を前記情報処理端末に送信するように制御を行う制御部
     を具備する情報処理装置。
PCT/JP2017/028445 2016-09-14 2017-08-04 情報処理装置、情報処理方法およびプログラム WO2018051676A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/325,427 US10901814B2 (en) 2016-09-14 2017-08-04 Information processing apparatus and information processing method
DE112017004628.9T DE112017004628T5 (de) 2016-09-14 2017-08-04 Informationsverarbeitungsvorrichtung, Informationsverarbeitungsverfahren und Programm

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016179485A JP2018045434A (ja) 2016-09-14 2016-09-14 情報処理装置、情報処理方法およびプログラム
JP2016-179485 2016-09-14

Publications (1)

Publication Number Publication Date
WO2018051676A1 true WO2018051676A1 (ja) 2018-03-22

Family

ID=61618829

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/028445 WO2018051676A1 (ja) 2016-09-14 2017-08-04 情報処理装置、情報処理方法およびプログラム

Country Status (4)

Country Link
US (1) US10901814B2 (ja)
JP (1) JP2018045434A (ja)
DE (1) DE112017004628T5 (ja)
WO (1) WO2018051676A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11610459B2 (en) * 2020-04-13 2023-03-21 Google Llc Factory and user calibration of haptic systems

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11331407A (ja) * 1998-05-11 1999-11-30 Nec Shizuoka Ltd 信号変換装置
JP2000180565A (ja) * 1998-12-18 2000-06-30 Rhythm Watch Co Ltd バイブレーション時計
JP2001069235A (ja) * 1999-08-26 2001-03-16 Seiko Epson Corp 携帯端末およびその制御方法
JP2013045303A (ja) * 2011-08-24 2013-03-04 Sharp Corp 携帯型電子機器、携帯型電子機器の制御方法、制御プログラム、およびコンピュータ読み取り可能な記録媒体
JP2015207242A (ja) * 2014-04-23 2015-11-19 富士通株式会社 電子機器
US20160212710A1 (en) * 2015-01-15 2016-07-21 Mediatek Inc. Power Saving Mechanism for In-Pocket Detection

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8373549B2 (en) * 2007-12-31 2013-02-12 Apple Inc. Tactile feedback in an electronic device
JP5278259B2 (ja) 2009-09-07 2013-09-04 ソニー株式会社 入力装置、入力方法及びプログラム
US9729730B2 (en) * 2013-07-02 2017-08-08 Immersion Corporation Systems and methods for perceptual normalization of haptic effects
US10185396B2 (en) * 2014-11-12 2019-01-22 Immersion Corporation Haptic trigger modification system
JP2018531442A (ja) * 2015-09-22 2018-10-25 イマージョン コーポレーションImmersion Corporation 圧力ベースのハプティクス
US10212119B2 (en) * 2016-01-13 2019-02-19 Pooja Bisarya Method and system for enabling messaging between users
US10061385B2 (en) * 2016-01-22 2018-08-28 Microsoft Technology Licensing, Llc Haptic feedback for a touch input device
DK179823B1 (en) * 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
DK201670728A1 (en) * 2016-09-06 2018-03-19 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button
US10635255B2 (en) * 2017-04-18 2020-04-28 Google Llc Electronic device response to force-sensitive interface

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11331407A (ja) * 1998-05-11 1999-11-30 Nec Shizuoka Ltd 信号変換装置
JP2000180565A (ja) * 1998-12-18 2000-06-30 Rhythm Watch Co Ltd バイブレーション時計
JP2001069235A (ja) * 1999-08-26 2001-03-16 Seiko Epson Corp 携帯端末およびその制御方法
JP2013045303A (ja) * 2011-08-24 2013-03-04 Sharp Corp 携帯型電子機器、携帯型電子機器の制御方法、制御プログラム、およびコンピュータ読み取り可能な記録媒体
JP2015207242A (ja) * 2014-04-23 2015-11-19 富士通株式会社 電子機器
US20160212710A1 (en) * 2015-01-15 2016-07-21 Mediatek Inc. Power Saving Mechanism for In-Pocket Detection

Also Published As

Publication number Publication date
JP2018045434A (ja) 2018-03-22
US10901814B2 (en) 2021-01-26
US20190213059A1 (en) 2019-07-11
DE112017004628T5 (de) 2019-06-13

Similar Documents

Publication Publication Date Title
US20220058935A1 (en) Context-Based Alerts for an Electronic Device
CN106462240B (zh) 用于提供触觉反馈以辅助捕获图像的系统和方法
CN107106907B (zh) 用于确定用户手指位置的信号生成和检测器系统以及方法
US20190087007A1 (en) Providing Haptic Output Based on a Determined Orientation of an Electronic Device
CN105814510B (zh) 具有触觉响应的带体附接机构
JP6344032B2 (ja) ジェスチャ入力装置、ジェスチャ入力方法、およびジェスチャ入力プログラム
CN110495819A (zh) 机器人的控制方法、机器人、终端、服务器及控制系统
CN110109539A (zh) 一种手势控制方法、穿戴式设备及计算机可读存储介质
US10667585B2 (en) Electronic bead string and counting method thereof
CN109690690B (zh) 用于辅助用户专注于执行个人护理活动的系统和方法
KR20160025687A (ko) 웨어러블 워치 및 그것의 디스플레이 방법
US11300998B2 (en) Wearable device to stimulate sense organs in the skin of a user, wearable device system, and method for controlling wearable device
US20180120930A1 (en) Use of Body-Area Network (BAN) as a Kinetic User Interface (KUI)
WO2018051676A1 (ja) 情報処理装置、情報処理方法およびプログラム
US10877524B2 (en) Information processing apparatus and information processing method
WO2016017616A1 (ja) 運動支援装置および運動支援方法
US20180292917A1 (en) Finger computer display and controller device
JP6306074B2 (ja) 運動支援装置および運動支援方法
JP6380149B2 (ja) 視線誘導システム、および視線誘導装置
US20090160666A1 (en) System and method for operating and powering an electronic device
US11216233B2 (en) Methods and systems for replicating content and graphical user interfaces on external electronic devices
JPWO2018179472A1 (ja)
JP6024184B2 (ja) システム、電子機器、およびプログラム
JP2016192136A (ja) 表示制御装置
Chen et al. VPER-A Visual HelPER Device for the Visually Impaired Users

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17850582

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 17850582

Country of ref document: EP

Kind code of ref document: A1