WO2012073698A1 - 音により移動する方向をマッピングする方法、装置及びコンピュータプログラム - Google Patents

音により移動する方向をマッピングする方法、装置及びコンピュータプログラム Download PDF

Info

Publication number
WO2012073698A1
WO2012073698A1 PCT/JP2011/076433 JP2011076433W WO2012073698A1 WO 2012073698 A1 WO2012073698 A1 WO 2012073698A1 JP 2011076433 W JP2011076433 W JP 2011076433W WO 2012073698 A1 WO2012073698 A1 WO 2012073698A1
Authority
WO
WIPO (PCT)
Prior art keywords
sound
moving
specifying
directions
predetermined
Prior art date
Application number
PCT/JP2011/076433
Other languages
English (en)
French (fr)
Inventor
丞 原田
智恵子 浅川
Original Assignee
インターナショナル・ビジネス・マシーンズ・コーポレーション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by インターナショナル・ビジネス・マシーンズ・コーポレーション filed Critical インターナショナル・ビジネス・マシーンズ・コーポレーション
Priority to JP2012546764A priority Critical patent/JP5506949B2/ja
Priority to DE112011103419.9T priority patent/DE112011103419B4/de
Priority to GB1311213.1A priority patent/GB2500343B/en
Priority to CN201180062834.XA priority patent/CN103282872B/zh
Publication of WO2012073698A1 publication Critical patent/WO2012073698A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/003Maps
    • G09B29/006Representation of non-cartographic information on maps, e.g. population distribution, wind direction, radiation levels, air and sea routes
    • G09B29/007Representation of non-cartographic information on maps, e.g. population distribution, wind direction, radiation levels, air and sea routes using computer methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H3/00Appliances for aiding patients or disabled persons to walk about
    • A61H3/06Walking aids for blind persons
    • A61H3/061Walking aids for blind persons with electronic detecting or guiding means
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3629Guidance using speech or audio output, e.g. text-to-speech
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5007Control means thereof computer controlled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5023Interfaces to the user
    • A61H2201/5048Audio interfaces, e.g. voice or music controlled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5058Sensors or detectors
    • A61H2201/5064Position sensors

Definitions

  • the present invention relates to a method, an apparatus, and a computer program for mapping a moving direction using sound.
  • a movement instruction regarding a distance and a direction to travel from a current position to a target position is based on information about the surrounding environment, for example, information acquired by hearing, smell, touch, or the like. Is generated.
  • Non-Patent Document 1 by using the stereo effect using two or more sound sources, even visually impaired person can be informed of accurate position information. It is considered effective for the visually handicapped person to guide in the direction of movement by sound.
  • the conventional technology can only express each direction one-dimensionally using sound and emits a sound indicating an arbitrary direction.
  • a word indicating a one-dimensional direction is intermittently repeated such as “right, front, right, front,... . Therefore, the cumbersome to instruct the fine direction, it is difficult to hear the movement instruction correctly when overlap other sounds.
  • An object of the present invention is to provide a method, an apparatus, and a computer program for mapping a moving direction by sound.
  • the method according to the first aspect of the present invention is a method of mapping a direction in which a moving object moves by superimposing and outputting a plurality of sounds from a device that outputs sound, and predetermined in three or more directions.
  • a step of storing a plurality of different sound information in association with a direction, a step of specifying a current position of the movement target, a step of specifying a direction in which the movement target moves, and a predetermined direction And outputting a sound obtained by superimposing the two sounds at a ratio corresponding to the direction in which the two sounds are moved, based on the sound information associated with the two adjacent directions sandwiching the moving direction.
  • the predetermined directions are four directions of front, right, rear and left, and are associated with two adjacent directions sandwiching the moving direction.
  • the sound corresponding to the sound information is superimposed and output at a ratio corresponding to the moving direction.
  • the sound corresponding to the sound information in the first or second invention is a voice that utters a vowel.
  • the method according to the fourth invention is the method according to any one of the first to third inventions, wherein the shortest route to the predetermined route viewed from the current position of the moving object is calculated each time the predetermined route is traveled a predetermined distance.
  • the method according to a fifth aspect of the present invention is the method according to any one of the first to fourth aspects, wherein the step of specifying the direction in which the moving object moves is a target point that moves according to the moving speed of the moving object. And a step of specifying a direction from the current position toward the target point as a moving direction, and the higher the moving speed, the greater the distance from the current position to the target point.
  • the step of specifying the direction in which the moving object moves includes a start point for starting movement of a predetermined route and an end of movement.
  • the device maps a direction in which a moving object moves by superimposing and outputting a plurality of sounds, and corresponds to a predetermined direction of three or more directions.
  • a sound information storage unit for storing a plurality of different sound information, a current position specifying unit for specifying the current position of the moving target, a moving direction specifying unit for specifying the direction in which the moving target moves, and a predetermined direction
  • a sound output unit that outputs a sound in which the two sounds are superimposed at a ratio according to the direction in which the two sounds are moved, based on the sound information associated with the two adjacent directions across the specified moving direction.
  • the device is the apparatus according to the seventh aspect, wherein the predetermined directions are four directions of front, right, rear and left, and the sound output unit includes two adjacent directions sandwiching the moving direction. The sound corresponding to the sound information associated with the direction is superimposed and output at a ratio corresponding to the moving direction.
  • the sound corresponding to the sound information is a voice that utters a vowel.
  • the shortest path to the predetermined path as viewed from the current position of the movement target is calculated each time the predetermined path is traveled a predetermined distance.
  • a shortest path calculation unit that performs the determination, and a determination unit that determines whether the calculated length of the shortest path exceeds a predetermined value.
  • the sound output The unit outputs colored noise.
  • the apparatus is the device according to any one of the seventh to tenth aspects, wherein the moving direction specifying unit specifies a target point that moves according to a moving speed of the moving object. And a specifying unit that specifies the direction from the current position toward the target point as a moving direction, and the distance from the current position to the target point increases as the moving speed increases.
  • An apparatus is the device according to any one of the seventh to tenth aspects, wherein the moving direction specifying unit specifies a starting point for starting movement of a predetermined route and an ending point for ending movement.
  • a computer program is a computer program that can be executed by a device that maps a direction in which a moving object moves by superimposing and outputting a plurality of sounds.
  • Sound information storage means for storing a plurality of different sound information in association with predetermined directions of three or more directions
  • current position specifying means for specifying the current position of the moving object
  • direction in which the moving object moves And a ratio according to the direction in which the two sounds are moved based on the sound information associated with the two adjacent directions sandwiching the specified moving direction among the predetermined directions. It functions as a sound output means for outputting the superimposed sound.
  • the predetermined directions are four directions of front, right, rear, and left
  • the sound output means is adjacent to 2 across the moving direction. It is made to function as a means for superposing and outputting sounds corresponding to sound information associated with one direction at a ratio according to the moving direction.
  • the computer program according to the fifteenth aspect of the invention is the voice according to the thirteenth or fourteenth aspect, wherein the sound corresponding to the sound information is a vowel.
  • a computer program according to a sixteenth aspect of the present invention is the computer program according to any one of the thirteenth to fifteenth aspects, wherein the device is moved to a predetermined route viewed from the current position of the moving object every time a predetermined route is traveled along the predetermined route.
  • the sound output means functions as a means for outputting colored noise.
  • a computer program according to a seventeenth aspect of the present invention is the computer program product according to any one of the thirteenth to sixteenth aspects, wherein the moving direction specifying means specifies a target point that moves according to a moving speed of the moving object. It functions as a specifying unit and a specifying unit that specifies a direction from the current position toward the target point as a moving direction, and the target point specifying unit moves from the current position to the target point as the moving speed increases. Function as a means to increase
  • the computer program according to an eighteenth aspect of the invention is the computer program product according to any one of the thirteenth to sixteenth aspects of the invention, wherein the moving direction specifying means specifies a starting point for starting movement of a predetermined route and an ending point for ending movement.
  • Start point / end point specifying means position specification receiving means for receiving designation of a position between the start point and the end point, and specifying means for specifying the direction in which the moving object moves at the position where the designation is accepted.
  • the direction in which a moving object for example, a device main body, a virtual object on the screen moves
  • a moving object for example, a device main body, a virtual object on the screen moves
  • Fluctuations can be expressed as continuous sound changes.
  • the present invention is implemented as a computer program that can be partially executed by a computer. be able to. Accordingly, the present invention provides a hardware embodiment, a software embodiment, or a software-to-hardware embodiment that is a device for mapping a moving direction of a moving object by superimposing and outputting a plurality of sounds. Combination embodiments can be taken.
  • the computer program can be recorded on any computer-readable recording medium such as a hard disk, DVD, CD, optical storage device, magnetic storage device or the like.
  • the direction of movement can be expressed two-dimensionally using sound, and the change in the direction of movement can be expressed by a continuous change in sound. Further, even when the superposition of other voice information on the information about the direction of movement, it is possible to recognize the direction in which while recognizing the contents of the voice information, moving. Furthermore, it is not necessary to prepare a plurality of sound sources, and it is possible to correctly guide, for example, a visually impaired person in a direction to move at a low cost.
  • FIG. 1 is a block diagram schematically showing the configuration of an information processing apparatus according to an embodiment of the present invention.
  • the information processing apparatus 1 includes at least a CPU (Central Processing Unit) 11, a memory 12, a storage device 13, an I / O interface 14, a video interface 15, a portable disk drive 16, a communication interface 17, and
  • the internal bus 18 connects the hardware described above.
  • the CPU 11 is connected to the above-described hardware units of the information processing apparatus 1 via the internal bus 18, controls the operation of the above-described hardware units, and follows the computer program 100 stored in the storage device 13. Perform various software functions.
  • the memory 12 is composed of a volatile memory such as SRAM or SDRAM, and a load module is expanded when the computer program 100 is executed, and stores temporary data generated when the computer program 100 is executed.
  • the storage device 13 includes a built-in fixed storage device (hard disk), a ROM, and the like.
  • the computer program 100 stored in the storage device 13 is downloaded by the portable disk drive 16 from a portable recording medium 90 such as a DVD or CD-ROM in which information such as programs and data is recorded, and from the storage device 13 at the time of execution.
  • the program is expanded into the memory 12 and executed.
  • a computer program downloaded from an external computer connected via the communication interface 17 may be used.
  • the communication interface 17 is connected to an internal bus 18 and can transmit / receive data to / from an external computer or the like by connecting to an external network such as the Internet, a LAN, or a WAN.
  • the I / O interface 14 is connected to input devices such as a keyboard 21 and a mouse 22 and receives data input. Further, it is also connected to a sound output device 24 such as a speaker and outputs a desired sound in accordance with an instruction from the CPU 11.
  • the video interface 15 is connected to a display device 23 such as a CRT display or a liquid crystal display, and displays a predetermined image.
  • FIG. 2 is a functional block diagram of the information processing apparatus 1 according to the embodiment of the present invention.
  • the sound information storage unit 201 of the information processing device 1 stores a plurality of different sound information in the storage device 13 in association with predetermined directions of three or more directions.
  • FIG. 3 is an exemplary diagram of directions in which sound information is stored in association with a predetermined direction.
  • the mark ⁇ indicates the current position of the moving subject.
  • the “moving subject” means a person who moves while holding a device (information processing device 1) that outputs sound.
  • FIG. 4 is a view showing an example of sound information stored in the storage device 13 of the information processing apparatus 1 according to the embodiment of the present invention. As shown in FIG. 4A, sound information is stored in association with each of the four directions of the forward direction, the right direction, the backward direction, and the left direction.
  • the sound of the instrument is stored in association with each of the four directions as sound information.
  • the “flute” sound in the forward direction (#), the “violin” sound in the right direction (%), the “oboe” sound in the backward direction ($), and the left direction (&) Stores the sound of “cello” in association with each other.
  • the intermediate direction for example, the right front direction, is expressed by outputting a sound obtained by superimposing the sound in the front direction and the sound in the right direction at 1: 1. Specifically, by outputting a sound obtained by superimposing a “flute” sound and a “violin” sound at a ratio of 1: 1, it can be determined that the movement is rightward.
  • voices that utter vowels are stored in association with each of the four directions.
  • the sound of “D” in the forward direction (#) the sound of “A” in the right direction (%)
  • the sound of “U” in the backward direction ($) the left direction
  • the sound of “I” is stored in association with (&).
  • the intermediate direction for example, the right front direction, is expressed by outputting a sound in which the sound in the front direction and the sound in the right direction are superimposed at a ratio of 1: 1.
  • the intermediate sound between “A” and “E”, which is a 1: 1 superposition of “D” and “A” is determined to be moving forward to the right. can do.
  • FIG. 5 is an exemplary diagram of sound information output for a predetermined route.
  • FIG. 5A shows a movement path, where the ⁇ mark indicates the current position of the movement target and moves along the path in the direction of the arrow.
  • FIG. 5B shows sound information corresponding to the output sound with symbols indicating continuous directions. ⁇ for a while from the mark it is moving in the forward direction, but are represented by described in succession the symbol "#" indicating the forward movement thereof. This is because, as shown in FIG. 4, shows that the sound corresponding to the forward sound information stored in association with (#) is continuously output.
  • the right direction (%), the rear direction ($), the left direction (&), the rear direction ($), the right direction (%), and the front direction (#) are stored in association with each other.
  • the sound corresponding to the sound information is output.
  • the current position specifying unit 202 specifies the movement target, for example, the current position of the information processing apparatus 1.
  • Current position specifying may be an absolute position such as the coordinate values using the GPS or the like, may be a relative location such as a displacement from a predetermined reference point.
  • the moving direction specifying unit 203 specifies the direction of movement from the current position specified by the current position specifying unit 202 to the next target point to be moved.
  • the target point to move next is specified according to the moving speed. Therefore, the direction of movement at any time varies.
  • the sound output unit 204 stores in association with two adjacent directions sandwiching the specified moving direction among the forward direction (#), the right direction (%), the backward direction ($), and the left direction (&). Sound information is extracted, and based on the extracted sound information, the two sounds are superimposed and output at a ratio corresponding to the moving direction. For example, when the moving direction is the right front direction, the sound corresponding to the sound information stored in association with the front direction (#) and the right direction (%) is transmitted in two adjacent directions across the moving direction. Overlaid at a ratio proportionally distributed between them.
  • FIG. 6 is a flowchart showing a processing procedure of the CPU 11 of the information processing apparatus 1 according to the embodiment of the present invention.
  • the CPU 11 of the information processing apparatus 1 stores a plurality of different sound information in the storage device 13 in association with predetermined directions of three or more directions (step S601).
  • the CPU 11 identifies the movement target, for example, the current position of the information processing apparatus 1 (step S602).
  • Current position specifying may be an absolute position such as the coordinate values using the GPS or the like, may be a relative location such as a displacement from a predetermined reference point.
  • the CPU 11 specifies the direction of movement from the identified current position to the next target point to move (step S603).
  • the target point to move next is specified according to the moving speed. Therefore, the direction of movement along the predetermined route varies from time to time.
  • the CPU 11 stores the sound stored in association with two adjacent directions sandwiching the specified moving direction among the forward direction (#), the right direction (%), the rear direction ($), and the left direction (&).
  • Information is extracted (step S604), and based on the extracted sound information, two sounds are superimposed and output at a ratio corresponding to the moving direction (step S605).
  • the moving direction specifying unit 203 specifies the direction from the current position specified by the current position specifying unit 202 toward the target point that moves according to the moving speed as the moving direction. This is because the direction of movement along the predetermined route can be changed at any time. For this purpose, the faster the moving speed, the greater the distance from the current position to the target point. This is because the amount of movement per unit time is large.
  • FIG. 7 is a functional block diagram showing a configuration of the moving direction specifying unit 203 according to the embodiment of the present invention.
  • a target point specifying unit 701 specifies a target point that moves according to the moving speed.
  • FIG. 8 is an exemplary diagram showing a method of specifying the target point according to the moving speed.
  • FIG. 8A is a specific example of a target point when the moving speed is slow. As shown in FIG. 8A, when the moving speed of the current position 81 to be moved is slow, the moving amount (distance) of the current position 81 is small and the target point 83 moves only to the target point 84. Therefore, the direction 85 from the current position 81 toward the target point 84 is specified as the moving direction.
  • FIG. 8B is a specific example of the target point when the moving speed is fast. As shown in FIG. 8B, when the moving speed of the current position 81 to be moved is fast, the moving amount (distance) of the current position 81 is large, and the target point 83 also moves greatly to the target point 86. Therefore, the direction 87 from the current position 81 toward the target point 86 is specified as the moving direction.
  • the direction specifying unit (specifying unit) 702 specifies the direction from the current position toward the target point as the moving direction. Accordingly, relatively fast in the path of moving linearly, relatively slow in the curve many paths, by moving each can move without deviating far the predetermined path.
  • FIG. 9 is a flowchart showing a procedure for specifying the moving direction of the CPU 11 of the information processing apparatus 1 according to the embodiment of the present invention.
  • the CPU 11 of the information processing apparatus 1 detects the moving speed in step S603 of FIG. 6 (step S901), and specifies the distance from the current position of the moving target to the target point according to the detected speed. (Step S902).
  • the CPU 11 specifies a target point on a predetermined route based on the specified distance (step S903), specifies a direction from the current position of the movement target toward the target point as a moving direction (step S904), and performs processing.
  • step S604 of step 6 the above-described processing is repeated.
  • the shortest path calculating unit 205 shown in FIG. 2 each time the unit moving distance of the predetermined path, to calculate the shortest path to a given path seen from the current position of the moving object.
  • the determination unit 206 determines whether or not the calculated length of the shortest path exceeds a predetermined value. When the determination unit 206 determines that the predetermined value is exceeded, the sound output unit 204 outputs colored noise.
  • FIG. 10 is an exemplary diagram showing an outline of processing when colored noise is output.
  • a perpendicular line is drawn from the current position 101 to be moved to the predetermined path 102 to calculate a linear distance 103. If the length of the linear distance 103 is greater than the predetermined value 104 from the predetermined path 102, it is determined that deviates significantly current position 101 outputs colored noise 105.
  • FIG. 11 is a flowchart showing the procedure of the colored noise output process of the CPU 11 of the information processing apparatus 1 according to the embodiment of the present invention.
  • the CPU 11 of the information processing apparatus 1 calculates the shortest route from the current position of the movement target to the predetermined route after step S603 in FIG. 6 (step S1101), and the length of the shortest route is a predetermined value. It is determined whether it is larger (step S1102).
  • step S1102 determines that the value is equal to or less than the predetermined value (step S1102: NO)
  • the CPU 11 advances the process to step S604 in FIG. If the CPU 11 determines that the value is larger than the predetermined value (step S1102: YES), the CPU 11 outputs colored noise (step S1103), and the process proceeds to step S604 in FIG.
  • the sound output unit 204 is not limited to outputting a fixed sound, and when various spots exist on the route, a sound corresponding to the feature of the spot may be output. .
  • FIG. 12 is an exemplary diagram in the case where the sound to be output is changed in accordance with the feature of the spot existing on the route.
  • FIG. 12 is basically the same as FIG. What is different is that there are a crossing 121, a signal 122, and a store 126 on the route, and the road width on the route varies.
  • FIG. 12 (a) shows the movement route, and the ⁇ mark indicates the current position of the movement target, and the vehicle moves along the route in the direction of the arrow.
  • FIG. 12B shows the sound information corresponding to the output sound with symbols indicating continuous directions.
  • the presence of the railroad crossing 121, the signal 122, etc. in the course of the movement route is output by outputting a sound that does not exist in the real world, for example, a beeping sound, by the so-called earcons 123, 124 shown in FIG. Judgment can be made.
  • the presence of the store 126 can be determined by outputting a store name or the like using synthesized speech by a so-called spearcon 127 shown in FIG.
  • FIG. 12 (b) the fact that the pitch, magnitude, etc. of the sound fluctuate in the section 125 is shown in bold. That is, the change in the width of the road on the route can be determined by changing the pitch, loudness, etc. of the sound as shown in the section 125.
  • the present embodiment it is possible to two-dimensionally express the moving direction of the moving object using sound, and to express the change in the moving direction as a continuous sound change. Can do. Further, even when other audio information is superimposed on the information related to the moving direction, the moving direction can be recognized while recognizing the contents of the audio information. Furthermore, it is not necessary to prepare a plurality of sound sources, and it is possible to correctly guide, for example, a visually impaired person in a direction to move at a low cost.
  • a sound may be output in order to grasp a predetermined route in advance.
  • FIG. 13 is a functional block diagram showing the configuration of the moving direction specifying unit 203 according to the embodiment of the present invention for moving path confirmation.
  • a start point / end point specifying unit 131 specifies a start point for starting movement of a predetermined route and an end point for ending movement.
  • the position designation accepting unit 132 accepts designation of an arbitrary position on the route from the start point to the end point.
  • the direction specifying unit (specifying unit) 133 specifies the direction of movement at the position where the designation is received. Specifically, the direction from the current position of the movement target toward the target point is specified as the movement direction. As a result, the moving direction from an arbitrary position on the route can be confirmed by sound, so that the approximate contour of the route can be reliably grasped.
  • FIG. 14 is a flowchart showing the procedure of the confirmation process of the movement route of the CPU 11 of the information processing apparatus 1 according to the embodiment of the present invention.
  • the CPU 11 of the information processing apparatus 1 specifies the start point and the end point on a predetermined route after step S ⁇ b> 601 in FIG. 6 (step S ⁇ b> 1401), and accepts designation of an arbitrary position on the route (step S ⁇ b> 1402). ).
  • the method for accepting the designation of the position is not particularly limited, and any method can be used as long as the designation of an arbitrary position on the route can be accepted by a slider or the like.
  • the CPU 11 specifies the moving direction at the position where the designation is accepted (step S1403), and advances the processing to step S604 in FIG. Thereby, the moving direction at an arbitrary position can be confirmed by sound, and the approximate outline of the route can be easily grasped.
  • the object to be moved may be a virtual object displayed on the screen.
  • a sound indicating the moving direction may be output according to the position of the finger on the touch panel.
  • Information processing apparatus CPU DESCRIPTION OF SYMBOLS 12 Memory 13 Storage device 14 I / O interface 15 Video interface 16 Portable disk drive 17 Communication interface 18 Internal bus 24 Sound output device 90 Portable recording medium 100 Computer program

Abstract

移動する方向を、音情報により多次元的、特に二次元的に表現することができ、視覚障害者の移動を効果的に支援することができる、視覚障害者のための音により移動する方向をマッピングする方法、装置及びコンピュータプログラムを提供する。

Description

音により移動する方向をマッピングする方法、装置及びコンピュータプログラム
 本発明は、音により移動する方向をマッピングする方法、装置及びコンピュータプログラムに関する。
 近年、視覚障害者が健常者と同様の行動ができるように支援するシステムが多々開発されている。例えば、視覚障害者の視覚以外で取得する情報、例えば聴覚、嗅覚、触覚等で取得する情報によって、視覚障害者がどの方向へ向かって移動しているのか、判断することができるシステムも存在する。
 進行方向を指し示す技術、道案内をする技術等は、既に数多く開示されている。例えば特許文献1に示すナビゲーション装置では、現在の位置から目的とする位置まで進むための距離と方向とに関する移動指示を、周囲の環境に関する情報、例えば聴覚、嗅覚、触覚等で取得する情報に基づいて生成している。
 また、音を用いて方向と距離とを特定することも考えられている。例えば非特許文献1では、2以上の音源を用いたステレオ効果を利用することにより、視覚障害者であっても正確な位置情報を知らせることができる。視覚障害者に対しては、特に音により移動する方向へ誘導することは効果的であると考えられている。
米国特許第7620493号公報 米国特許第7039522号公報 特開2005-215739号公報 特開2003-067885号公報 中国特許出願公開第101385677号公報 特開2001-004396号公報 米国特許第5806017号公報
ツーバ ナジール(Tooba Nasir)、ジョナサン シー. ロバーツ(Jonathan C. Roberts)、「ソニフィケイション オブ スペイシャル データ(Sonification of spatial data)」、第13回聴覚表示国際会議、モントリオール(カナダ)、2007年6月26-29日
 しかし、視覚障害者にとって音による誘導が効果的であるとしても、従来の技術では、音を用いて、それぞれ方向を一次元的にしか表現することができず、任意の方向を示す音を発することが困難であるという問題点があった。例えば移動指示として意味のある言葉を発する場合、斜め45度右方向へ進むときには、「右、前、右、前、・・・」というように一次元的な方向を示す言葉を断続的に繰り返す。したがって、細かい方向を指示するには煩雑であるとともに、他の音が重なり合った場合には移動指示を正しく聞き取ることが困難になる。
 また、ステレオ効果を利用することにより正確な位置情報を知らせることはできるが、そのためには、音源を2以上準備する必要があり、システムが大掛かりになることから、システム構築の総コストを低減することが困難であるという問題点もあった。
 本発明は斯かる事情に鑑みてなされたものであり、移動する方向を音情報により多次元的、特に二次元的に表現することができ、視覚障害者等の移動を効果的に支援することができる、音により移動する方向をマッピングする方法、装置及びコンピュータプログラムを提供することを目的とする。
 上記目的を達成するために第1発明に係る方法は、音を出力する装置から、複数の音を重ね合わせて出力して、移動対象が移動する方向をマッピングする方法において、3方向以上の所定の方向に対応付けて複数の異なる音情報を記憶する工程と、前記移動対象の現在位置を特定する工程と、前記移動対象が移動する方向を特定する工程と、所定の方向のうち、特定した移動する方向を挟む隣接する2つの方向に対応付けてある音情報に基づいて、2つの音を移動する方向に応じた比率で重ね合わせた音を出力する工程とを含む。
 また、第2発明に係る方法は、第1発明において、前記所定の方向は、前、右、後、左の4つの方向であり、移動する方向を挟む隣接する2つの方向に対応付けてある音情報に対応する音を、移動する方向に応じた比率で重ね合わせて出力する。
 また、第3発明に係る方法は、第1又は第2発明において、音情報に対応する音が母音を発声する音声である。
 また、第4発明に係る方法は、第1乃至第3発明のいずれか1つにおいて、所定の経路を一定距離進む都度、前記移動対象の現在位置から見た所定の経路への最短経路を算出する工程と、算出した最短経路の長さが所定値を超えているか否かを判断する工程と、所定値を超えていると判断した場合、有色雑音を出力する工程とを含む。
 また、第5発明に係る方法は、第1乃至第4発明のいずれか1つにおいて、前記移動対象が移動する方向を特定する工程は、前記移動対象が移動する速度に応じて移動する目標点を特定する工程と、前記現在位置から前記目標点へ向かう方向を移動する方向として特定する工程とを含み、移動する速度が速いほど前記現在位置から前記目標点までの距離が大きくなる。
 また、第6発明に係る方法は、第1乃至第4発明のいずれか1つにおいて、前記移動対象が移動する方向を特定する工程は、所定の経路の移動を開始する始点と移動を終了する終点とを特定する工程と、前記始点から前記終点までの間の位置の指定を受け付ける工程と、指定を受け付けた位置において前記移動対象が移動する方向を特定する工程とを含む。
 次に、上記目的を達成するために第7発明に係る装置は、複数の音を重ね合わせて出力して、移動対象が移動する方向をマッピングする装置において、3方向以上の所定の方向に対応付けて複数の異なる音情報を記憶する音情報記憶部と、前記移動対象の現在位置を特定する現在位置特定部と、前記移動対象が移動する方向を特定する移動方向特定部と、所定の方向のうち、特定した移動する方向を挟む隣接する2つの方向に対応付けてある音情報に基づいて、2つの音を移動する方向に応じた比率で重ね合わせた音を出力する音出力部とを備える。
 また、第8発明に係る装置は、第7発明において、前記所定の方向は、前、右、後、左の4つの方向であり、前記音出力部は、移動する方向を挟む隣接する2つの方向に対応付けてある音情報に対応する音を、移動する方向に応じた比率で重ね合わせて出力するようにしてある。
 また、第9発明に係る装置は、第7又は第8発明において、音情報に対応する音が母音を発声する音声である。
 また、第10発明に係る装置は、第7乃至第9発明のいずれか1つにおいて、所定の経路を一定距離進む都度、前記移動対象の現在位置から見た所定の経路への最短経路を算出する最短経路算出部と、算出した最短経路の長さが所定値を超えているか否かを判断する判断部とを備え、該判断部が所定値を超えていると判断した場合、前記音出力部は、有色雑音を出力するようにしてある。
 また、第11発明に係る装置は、第7乃至第10発明のいずれか1つにおいて、前記移動方向特定部は、前記移動対象が移動する速度に応じて移動する目標点を特定する目標点特定部と、前記現在位置から前記目標点へ向かう方向を移動する方向として特定する特定部とを備え、移動する速度が速いほど前記現在位置から前記目標点までの距離が大きくなるようにしてある。
 また、第12発明に係る装置は、第7乃至第10発明のいずれか1つにおいて、前記移動方向特定部は、所定の経路の移動を開始する始点と移動を終了する終点とを特定する始点・終点特定部と、前記始点から前記終点までの間の位置の指定を受け付ける位置指定受付部と、指定を受け付けた位置において前記移動対象が移動する方向を特定する特定部とを備える。
 次に、上記目的を達成するために第13発明に係るコンピュータプログラムは、複数の音を重ね合わせて出力して、移動対象が移動する方向をマッピングする装置で実行することが可能なコンピュータプログラムにおいて、前記装置を、3方向以上の所定の方向に対応付けて複数の異なる音情報を記憶する音情報記憶手段、前記移動対象の現在位置を特定する現在位置特定手段、前記移動対象が移動する方向を特定する移動方向特定手段、及び所定の方向のうち、特定した移動する方向を挟む隣接する2つの方向に対応付けてある音情報に基づいて、2つの音を移動する方向に応じた比率で重ね合わせた音を出力する音出力手段として機能させる。
 また、第14発明に係るコンピュータプログラムは、第13発明において、前記所定の方向は、前、右、後、左の4つの方向であり、前記音出力手段を、移動する方向を挟む隣接する2つの方向に対応付けてある音情報に対応する音を、移動する方向に応じた比率で重ね合わせて出力する手段として機能させる。
 また、第15発明に係るコンピュータプログラムは、第13又は第14発明において、音情報に対応する音が母音を発声する音声である。
 また、第16発明に係るコンピュータプログラムは、第13乃至第15発明のいずれか1つにおいて、前記装置を、所定の経路を一定距離進む都度、前記移動対象の現在位置から見た所定の経路への最短経路を算出する最短経路算出手段、及び算出した最短経路の長さが所定値を超えているか否かを判断する判断手段として機能させ、該判断手段が所定値を超えていると判断した場合、前記音出力手段を、有色雑音を出力する手段として機能させる。
 また、第17発明に係るコンピュータプログラムは、第13乃至第16発明のいずれか1つにおいて、前記移動方向特定手段を、前記移動対象が移動する速度に応じて移動する目標点を特定する目標点特定手段、及び前記現在位置から前記目標点へ向かう方向を移動する方向として特定する特定手段として機能させ、前記目標点特定手段を、移動する速度が速いほど前記現在位置から前記目標点までの距離を大きくさせる手段として機能させる。
 また、第18発明に係るコンピュータプログラムは、第13乃至第16発明のいずれか1つにおいて、前記移動方向特定手段を、所定の経路の移動を開始する始点と移動を終了する終点とを特定する始点・終点特定手段、前記始点から前記終点までの間の位置の指定を受け付ける位置指定受付手段、及び指定を受け付けた位置において前記移動対象が移動する方向を特定する特定手段として機能させる。
 本発明によれば、音を用いて、移動対象、例えば装置本体、画面上の仮想的なオブジェクト等が移動する方向を多次元的、特に二次元的に表現することができ、移動する方向の変動を連続的な音の変化で表現することができる。また、移動する方向に関する情報に他の音声情報を重ね合わせた場合であっても、音声情報の内容を認識しつつ、移動する方向を認識することができる。さらに、音源を複数準備する必要がなく、低いコストで、例えば視覚障害者を移動するべき方向へと正しく誘導することが可能となる。
本発明の実施の形態に係る情報処理装置の構成を模式的に示すブロック図である。 本発明の実施の形態に係る情報処理装置の機能ブロック図である。 音情報を対応付けて記憶しておく方向の例示図である。 本発明の実施の形態に係る情報処理装置の記憶装置に記憶する音情報の例示図である。 所定の経路に対して出力される音情報の例示図である。 本発明の実施の形態に係る情報処理装置のCPUの処理手順を示すフローチャートである。 本発明の実施の形態に係る移動方向特定部の構成を示す機能ブロック図である。 移動する速度に応じた目標点の特定方法を示す例示図である。 本発明の実施の形態に係る情報処理装置のCPUの移動する方向の特定処理の手順を示すフローチャートである。 有色雑音を出力する場合の処理の概要を示す例示図である。 本発明の実施の形態に係る情報処理装置のCPUの有色雑音の出力処理の手順を示すフローチャートである。 経路上に存在するスポットに応じて出力する音を変える場合の例示図である。 経路確認のための、本発明の実施の形態に係る移動方向特定部の構成を示す機能ブロック図である。 本発明の実施の形態に係る情報処理装置のCPUの移動経路の確認処理の手順を示すフローチャートである。
 以下、本発明の実施の形態に係る、複数の音を重ね合わせて出力して、移動対象の移動する方向をマッピングする装置について、図面に基づいて具体的に説明する。以下の実施の形態は、特許請求の範囲に記載された発明を限定するものではなく、実施の形態の中で説明されている特徴的事項の組み合わせの全てが解決手段の必須事項であるとは限らないことは言うまでもない。
 また、本発明は多くの異なる態様にて実施することが可能であり、実施の形態の記載内容に限定して解釈されるべきものではない。実施の形態を通じて同じ要素には同一の符号を付している。
 以下の実施の形態では、コンピュータシステムにコンピュータプログラムを導入した装置について説明するが、当業者であれば明らかな通り、本発明はその一部をコンピュータで実行することが可能なコンピュータプログラムとして実施することができる。したがって、本発明は、複数の音を重ね合わせて出力して、移動対象の移動する方向をマッピングする装置というハードウェアとしての実施の形態、ソフトウェアとしての実施の形態、又はソトウェアとハードウェアとの組み合わせの実施の形態をとることができる。コンピュータプログラムは、ハードディスク、DVD、CD、光記憶装置、磁気記憶装置等の任意のコンピュータで読み取ることが可能な記録媒体に記録することができる。
 本発明の実施の形態によれば、音を用いて、移動する方向を二次元的に表現することができ、移動する方向の変動を連続的な音の変化で表現することができる。また、移動する方向に関する情報に他の音声情報を重ね合わせた場合であっても、音声情報の内容を認識しつつ、移動する方向を認識することができる。さらに、音源を複数準備する必要がなく、低いコストで、例えば視覚障害者を移動するべき方向へと正しく誘導することが可能となる。
 図1は、本発明の実施の形態に係る情報処理装置の構成を模式的に示すブロック図である。本発明の実施の形態に係る情報処理装置1は、少なくともCPU(中央演算装置)11、メモリ12、記憶装置13、I/Oインタフェース14、ビデオインタフェース15、可搬型ディスクドライブ16、通信インタフェース17及び上述したハードウェアを接続する内部バス18で構成されている。
 CPU11は、内部バス18を介して情報処理装置1の上述したようなハードウェア各部と接続されており、上述したハードウェア各部の動作を制御するとともに、記憶装置13に記憶されたコンピュータプログラム100に従って、種々のソフトウェア的機能を実行する。メモリ12は、SRAM、SDRAM等の揮発性メモリで構成され、コンピュータプログラム100の実行時にロードモジュールが展開され、コンピュータプログラム100の実行時に発生する一時的なデータ等を記憶する。
 記憶装置13は、内蔵される固定型記憶装置(ハードディスク)、ROM等で構成されている。記憶装置13に記憶されたコンピュータプログラム100は、プログラム及びデータ等の情報を記録したDVD、CD-ROM等の可搬型記録媒体90から、可搬型ディスクドライブ16によりダウンロードされ、実行時には記憶装置13からメモリ12へ展開して実行される。もちろん、通信インタフェース17を介して接続されている外部コンピュータからダウンロードされたコンピュータプログラムであっても良い。
 通信インタフェース17は内部バス18に接続されており、インターネット、LAN、WAN等の外部のネットワークに接続されることにより、外部コンピュータ等とデータ送受信を行うことが可能となっている。
 I/Oインタフェース14は、キーボード21、マウス22等の入力装置と接続され、データの入力を受け付ける。また、スピーカ等の音出力装置24とも接続され、CPU11の指示に応じて所望の音を出力する。ビデオインタフェース15は、CRTディスプレイ、液晶ディスプレイ等の表示装置23と接続され、所定の画像を表示する。
 図2は、本発明の実施の形態に係る情報処理装置1の機能ブロック図である。図2において、情報処理装置1の音情報記憶部201は、3方向以上の所定の方向に対応付けて複数の異なる音情報を記憶装置13に記憶する。
 3方向以上となっているのは、移動する方向を二次元的に表現するためである。すなわち、2つの所定の方向に2つの異なる音情報を対応付けて記憶しておくだけでは、出力された音を聞いても、前方向なのか後方向なのか、あるいは右方向なのか左方向なのか、的確に判断することができず、例えば言葉の意味等、他の情報の助けが必要となる。
 一方、3方向以上の所定の方向に複数の異なる音情報を対応付けて記憶しておく場合、出力された音の重ね合わせ状態から、どの方向へ移動するべきか一意的に判断することができる。図3は、音情報を所定の方向に対応付けて記憶しておく方向の例示図である。図3において●印は、移動主体の現在位置を示すものとする。なお、「移動主体」とは、音を出力する装置(情報処理装置1)を保持して移動する者を意味する。
 図3(a)に示すように2方向に対応付けて記憶しておく場合、前方向であるか後方向であるかを判断することはできても、右方向であるか左方向であるかを判断することはできない。もちろん、矢印を90度回転した場合には、右方向であるか左方向であるかを判断することはできても、前方向であるか後方向であるかを判断することはできない。したがって、2方向の音情報だけでは、どの方向へ移動するべきか一意的に判断することができない。
 図3(b)に示すように3方向に対応付けて記憶しておく場合、前方向であるか後方向であるかを判断することも、右方向であるか左方向であるかを判断することもできる。どの音情報又は音情報の重ね合わせであるかを判断すれば足りるからである。
 なお、通常は、移動するべき方向を判断することが容易であるように、図3(c)に示すように4方向にするか、図3(d)に示すように8方向にすることが望ましい。日常生活における方向感覚と一致しているため、判断が早くなると考えられるからである。
 図4は、本発明の実施の形態に係る情報処理装置1の記憶装置13に記憶する音情報の例示図である。図4(a)に示すように、前方向、右方向、後方向、左方向の4方向について、それぞれ音情報を対応付けて記憶する。
 例えば図4(b)では、音情報として、4方向それぞれに楽器の音を対応付けて記憶している。図4(b)の例では、前方向(#)に「フルート」の音を、右方向(%)に「バイオリン」の音を、後方向($)に「オーボエ」の音を、左方向(&)に「チェロ」の音を、それぞれ対応付けて記憶してある。中間方向、例えば右前方向については、前方向の音と右方向の音とを1:1で重ね合わせた音を出力することで表現する。具体的には「フルート」の音と「バイオリン」の音とを1:1で重ね合わせた音を出力することにより、右前方向への移動であると判断することができる。
 同様に、図4(c)では、音情報として、4方向それぞれに母音を発声する音声を対応付けて記憶している。図4(c)の例では、前方向(#)に「エ」の音声を、右方向(%)に「ア」の音声を、後方向($)に「ウ」の音声を、左方向(&)に「イ」の音声を、それぞれ対応付けて記憶してある。中間方向、例えば右前方向については、前方向の音と右方向の音声とを1:1で重ね合わせた音声を出力することで表現する。具体的には「エ」の音声と「ア」の音声とを1:1で重ね合わせた「ア」と「エ」との中間音声を出力することにより、右前方向への移動であると判断することができる。
 母音を発声する音声を用いる場合、2つの母音を発声する音声を重ね合わせることにより、普段聞きなれている母音を出力することが多い。したがって、楽器等の他の音を用いる場合よりも、ユーザにとっては聞き分けやすく、連続的な音の変化に対しても鋭敏に変化を察知することが可能となる。
 図5は、所定の経路に対して出力される音情報の例示図である。図5(a)は移動経路を示しており、●印は移動対象の現在位置を示し、矢印の方向へ経路に沿って移動する。
 図5(b)は、出力される音に対応する音情報を、連続した方向を示す記号で示している。●印からしばらくは前方向へ移動しているが、その移動を前方向を示す記号「#」を連続して記載することで表現している。これは、図4に示すように、前方向(#)に対応付けて記憶してある音情報に対応する音が連続して出力されていることを示している。
 同様に、以下、右方向(%)、後方向($)、左方向(&)、後方向($)、右方向(%)、前方向(#)と順次移動する方向に対応付けて記憶してある音情報に対応する音を出力する。
 図2に戻って、現在位置特定部202は、移動対象、例えば情報処理装置1の現在位置を特定する。特定する現在位置は、GPS等を用いた座標値のような絶対位置であっても良いし、所定の基準点からの変位のような相対位置であっても良い。
 移動方向特定部203は、現在位置特定部202で特定した現在位置から、次に移動する目標点まで移動する方向を特定する。次に移動する目標点は、移動する速度に応じて特定する。したがって、随時移動する方向は変動する。
 音出力部204は、前方向(#)、右方向(%)、後方向($)、左方向(&)のうち、特定した移動する方向を挟む隣接する2つの方向に対応付けて記憶してある音情報を抽出し、抽出した音情報に基づいて、2つの音を移動する方向に応じた比率で重ね合わせて出力する。例えば、移動する方向が右前方向である場合、前方向(#)及び右方向(%)に対応付けて記憶してある音情報に対応する音を、移動する方向を挟む隣接する2つの方向の間で比例配分した比率で重ね合わせて出力する。
 図6は、本発明の実施の形態に係る情報処理装置1のCPU11の処理手順を示すフローチャートである。図6において、情報処理装置1のCPU11は、3方向以上の所定の方向に対応付けて複数の異なる音情報を記憶装置13に記憶する(ステップS601)。
 CPU11は、移動対象、例えば情報処理装置1の現在位置を特定する(ステップS602)。特定する現在位置は、GPS等を用いた座標値のような絶対位置であっても良いし、所定の基準点からの変位のような相対位置であっても良い。
 CPU11は、特定した現在位置から、次に移動する目標点まで移動する方向を特定する(ステップS603)。次に移動する目標点は、移動する速度に応じて特定する。したがって、所定の経路に沿って随時移動する方向は変動する。
 CPU11は、前方向(#)、右方向(%)、後方向($)、左方向(&)のうち、特定した移動する方向を挟む隣接する2つの方向に対応付けて記憶してある音情報を抽出し(ステップS604)、抽出した音情報に基づいて、2つの音を移動する方向に応じた比率で重ね合わせて出力する(ステップS605)。
 なお、移動方向特定部203は、現在位置特定部202で特定した現在位置から、移動する速度に応じて移動する目標点へ向かう方向を、移動する方向として特定することが好ましい。所定の経路に沿って随時移動する方向を変更することができるからである。そのためには、移動する速度が速いほど、現在位置から目標点までの距離が大きくなる必要がある。単位時間当たりの移動量が大きいからである。
 図7は、本発明の実施の形態に係る移動方向特定部203の構成を示す機能ブロック図である。図7において、目標点特定部701は、移動する速度に応じて移動する目標点を特定する。
 図8は、移動する速度に応じて目標点を特定する方法を示す例示図である。図8(a)は、移動する速度が遅い場合の目標点の特定例である。図8(a)に示すように、移動対象の現在位置81が移動する速度が遅い場合、現在位置81の移動量(距離)が小さく、目標点83も目標点84までしか移動しない。したがって、現在位置81から目標点84へ向かう方向85を移動する方向として特定する。
 図8(b)は、移動する速度が速い場合の目標点の特定例である。図8(b)に示すように、移動対象の現在位置81が移動する速度が速い場合、現在位置81の移動量(距離)が大きく、目標点83も目標点86まで大きく移動する。したがって、現在位置81から目標点86へ向かう方向87を移動する方向として特定する。
 図7に戻って、方向特定部(特定部)702は、現在位置から目標点へ向かう方向を移動する方向として特定する。これにより、直線的に移動する経路では比較的速く、曲線が多い経路では比較的遅く、それぞれ移動することにより、所定の経路を大きく外れることなく移動することができる。
 図9は、本発明の実施の形態に係る情報処理装置1のCPU11の移動する方向の特定処理の手順を示すフローチャートである。図9において、情報処理装置1のCPU11は、図6のステップS603において、移動する速度を検出し(ステップS901)、検出した速度に応じて移動対象の現在位置から目標点までの距離を特定する(ステップS902)。CPU11は、特定した距離に基づいて所定の経路上に目標点を特定し(ステップS903)、移動対象の現在位置から目標点へ向かう方向を移動する方向として特定し(ステップS904)、処理を図6のステップS604へ戻して上述した処理を繰り返す。
 なお、移動対象の現在位置が所定の経路から大きく外れた場合、警告する意味で有色雑音を出力することが好ましい。この場合、図2に示す最短経路算出部205は、所定の経路を一定距離進む都度、移動対象の現在位置から見た所定の経路への最短経路を算出する。判断部206は、算出した最短経路の長さが所定値を超えているか否かを判断する。判断部206が、所定値を超えていると判断した場合、音出力部204は、有色雑音を出力する。
 図10は、有色雑音を出力する場合の処理の概要を示す例示図である。図10において、現在位置101が所定の経路102からどの程度外れているのかを知るために、移動対象の現在位置101から所定の経路102へ垂線を下ろし、直線距離103を算出する。直線距離103の長さが所定の経路102からの所定値104を超えている場合、現在位置101は大きく外れているものと判断し、有色雑音105を出力する。
 図11は、本発明の実施の形態に係る情報処理装置1のCPU11の有色雑音の出力処理の手順を示すフローチャートである。図11において、情報処理装置1のCPU11は、図6のステップS603の次に、移動対象の現在位置から所定の経路への最短経路を算出し(ステップS1101)、最短経路の長さが所定値より大きいか否かを判断する(ステップS1102)。
 CPU11が、所定値以下であると判断した場合(ステップS1102:NO)、CPU11は、処理を図6のステップS604へ進める。CPU11が、所定値より大きいと判断した場合(ステップS1102:YES)、CPU11は、有色雑音を出力し(ステップS1103)、処理を図6のステップS604へ進める。
 音出力部204からは、一定の音を出力することに限定されるものではなく、経路上に様々なスポットが存在する場合には、スポットの特徴に応じた音を出力するようにしても良い。
 図12は、経路上に存在するスポットの特徴に応じて出力する音を変える場合の例示図である。図12は、基本的に図5と同様である。異なっているのは、経路上に踏切121、信号122、店舗126が存在すること、経路上における道幅が変動している点である。
 図12(a)は移動経路を示しており、●印は移動対象の現在位置を示し、矢印の方向へ経路に沿って移動する。図12(b)は、出力される音に対応する音情報を、連続した方向を示す記号で示している。移動経路途上における踏切121、信号122等の存在は、図12(b)に示すいわゆるイヤコン(earcon)123、124により、現実世界に存在しない音、例えば「ピッ」という音等を出力することで判断することができる。店舗126の存在は、図12(b)に示すいわゆるスピヤコン(spearcon)127により、合成音声による店舗名等を出力することで判断することができる。
 また、図12(b)では、区間125において、音のピッチ、大きさ等が変動していることを太字で示している。すなわち、経路上における道幅の変動は、区間125に示すように、音のピッチ、大きさ等を変動させることにより判断することができる。
 以上のように本実施の形態によれば、音を用いて、移動対象の移動する方向を二次元的に表現することができ、移動する方向の変動を連続的な音の変化で表現することができる。また、移動する方向に関する情報に他の音声情報を重ね合わせた場合であっても、音声情報の内容を認識しつつ、移動する方向を認識することができる。さらに、音源を複数準備する必要がなく、低いコストで、例えば視覚障害者を移動するべき方向へと正しく誘導することが可能となる。
 なお、視覚障害者を移動するべき方向へと誘導するのではなく、所定の経路を事前に把握するために音を出力しても良い。この場合、所定の経路の始点・終点を確認し、途中の経路がどうなっているのかを移動する方向を示す音により確認することが好ましい。
 図13は、移動経路確認のための、本発明の実施の形態に係る移動方向特定部203の構成を示す機能ブロック図である。図13において、始点・終点特定部131は、所定の経路の移動を開始する始点と移動を終了する終点とを特定する。
 位置指定受付部132は、始点から終点までの間における、経路上での任意の位置の指定を受け付ける。方向特定部(特定部)133は、指定を受け付けた位置において移動する方向を特定する。具体的には、移動対象の現在位置から目標点へ向かう方向を移動する方向として特定する。これにより、経路上の任意の位置からの、移動する方向を音により確認することができるので、経路のおおよその輪郭を確実に把握することができる。
 図14は、本発明の実施の形態に係る情報処理装置1のCPU11の移動経路の確認処理の手順を示すフローチャートである。図14において、情報処理装置1のCPU11は、図6のステップS601の次に、所定の経路における始点及び終点を特定し(ステップS1401)、経路上での任意の位置の指定を受け付ける(ステップS1402)。位置の指定を受け付ける方法は特に限定されるものではなく、スライダ等により経路上の任意の位置の指定を受け付けることができる方法であれば何でも良い。
 CPU11は、指定を受け付けた位置における移動する方向を特定し(ステップS1403)、処理を図6のステップS604へ進める。これにより、任意の位置における移動する方向を音により確認することができ、経路のおおよその輪郭を容易に把握することができる。
 なお、本発明は上記実施例に限定されるものではなく、本発明の趣旨の範囲内であれば多種の変更、改良等が可能である。例えば移動対象として、画面上に表示される仮想的なオブジェクトであっても良く、この場合、例えばタッチパネル上における指の位置に応じて移動する方向を示す音を出力すれば良い。
 1 情報処理装置
 11 CPU
 12 メモリ
 13 記憶装置
 14 I/Oインタフェース
 15 ビデオインタフェース
 16 可搬型ディスクドライブ
 17 通信インタフェース
 18 内部バス
 24 音出力装置
 90 可搬型記録媒体
 100 コンピュータプログラム

Claims (18)

  1.  音を出力する装置から、複数の音を重ね合わせて出力して、移動対象が移動する方向をマッピングする方法において、
     3方向以上の所定の方向に対応付けて複数の異なる音情報を記憶する工程と、
     前記移動対象の現在位置を特定する工程と、
     前記移動対象が移動する方向を特定する工程と、
     所定の方向のうち、特定した移動する方向を挟む隣接する2つの方向に対応付けてある音情報に基づいて、2つの音を移動する方向に応じた比率で重ね合わせた音を出力する工程と
     を含む方法。
  2.  前記所定の方向は、前、右、後、左の4つの方向であり、
     移動する方向を挟む隣接する2つの方向に対応付けてある音情報に対応する音を、移動する方向に応じた比率で重ね合わせて出力する請求項1記載の方法。
  3.  音情報に対応する音が母音を発声する音声である請求項1記載の方法。
  4.  所定の経路を一定距離進む都度、前記移動対象の現在位置から見た所定の経路への最短経路を算出する工程と、
     算出した最短経路の長さが所定値を超えているか否かを判断する工程と、
     所定値を超えていると判断した場合、有色雑音を出力する工程と
     を含む請求項1記載の方法。
  5.  前記移動対象が移動する方向を特定する工程は、
     前記移動対象が移動する速度に応じて移動する目標点を特定する工程と、
     前記現在位置から前記目標点へ向かう方向を移動する方向として特定する工程と
     を含み、
     移動する速度が速いほど前記現在位置から前記目標点までの距離が大きくなる請求項1記載の方法。
  6.  前記移動対象が移動する方向を特定する工程は、
     所定の経路の移動を開始する始点と移動を終了する終点とを特定する工程と、
     前記始点から前記終点までの間の位置の指定を受け付ける工程と、
     指定を受け付けた位置において前記移動対象が移動する方向を特定する工程と
     を含む請求項1記載の方法。
  7.  複数の音を重ね合わせて出力して、移動対象が移動する方向をマッピングする装置において、
     3方向以上の所定の方向に対応付けて複数の異なる音情報を記憶する音情報記憶部と、 前記移動対象の現在位置を特定する現在位置特定部と、
     前記移動対象が移動する方向を特定する移動方向特定部と、
     所定の方向のうち、特定した移動する方向を挟む隣接する2つの方向に対応付けてある音情報に基づいて、2つの音を移動する方向に応じた比率で重ね合わせた音を出力する音出力部と
     を備える装置。
  8.  前記所定の方向は、前、右、後、左の4つの方向であり、
     前記音出力部は、移動する方向を挟む隣接する2つの方向に対応付けてある音情報に対応する音を、移動する方向に応じた比率で重ね合わせて出力するようにしてある請求項7記載の装置。
  9.  音情報に対応する音が母音を発声する音声である請求項7記載の装置。
  10.  所定の経路を一定距離進む都度、前記移動対象の現在位置から見た所定の経路への最短経路を算出する最短経路算出部と、
     算出した最短経路の長さが所定値を超えているか否かを判断する判断部と
     を備え、
     該判断部が所定値を超えていると判断した場合、前記音出力部は、有色雑音を出力するようにしてある請求項7記載の装置。
  11.  前記移動方向特定部は、
     前記移動対象が移動する速度に応じて移動する目標点を特定する目標点特定部と、
     前記現在位置から前記目標点へ向かう方向を移動する方向として特定する特定部と
     を備え、
     移動する速度が速いほど前記現在位置から前記目標点までの距離が大きくなるようにしてある請求項7記載の装置。
  12.  前記移動方向特定部は、
     所定の経路の移動を開始する始点と移動を終了する終点とを特定する始点・終点特定部と、
     前記始点から前記終点までの間の位置の指定を受け付ける位置指定受付部と、
     指定を受け付けた位置において前記移動対象が移動する方向を特定する特定部と
     を備える請求項7記載の装置。
  13.  複数の音を重ね合わせて出力して、移動対象が移動する方向をマッピングする装置で実行することが可能なコンピュータプログラムにおいて、
     前記装置を、
     3方向以上の所定の方向に対応付けて複数の異なる音情報を記憶する音情報記憶手段、 前記移動対象の現在位置を特定する現在位置特定手段、
     前記移動対象が移動する方向を特定する移動方向特定手段、及び
     所定の方向のうち、特定した移動する方向を挟む隣接する2つの方向に対応付けてある音情報に基づいて、2つの音を移動する方向に応じた比率で重ね合わせた音を出力する音出力手段
     として機能させるコンピュータプログラム。
  14.  前記所定の方向は、前、右、後、左の4つの方向であり、
     前記音出力手段を、移動する方向を挟む隣接する2つの方向に対応付けてある音情報に対応する音を、移動する方向に応じた比率で重ね合わせて出力する手段として機能させる請求項13記載のコンピュータプログラム。
  15.  音情報に対応する音が母音を発声する音声である請求項13記載のコンピュータプログラム。
  16.  前記装置を、
     所定の経路を一定距離進む都度、前記移動対象の現在位置から見た所定の経路への最短経路を算出する最短経路算出手段、及び
     算出した最短経路の長さが所定値を超えているか否かを判断する判断手段
     として機能させ、
     該判断手段が所定値を超えていると判断した場合、前記音出力手段を、有色雑音を出力する手段として機能させる請求項13記載のコンピュータプログラム。
  17.  前記移動方向特定手段を、
     前記移動対象が移動する速度に応じて移動する目標点を特定する目標点特定手段、及び 前記現在位置から前記目標点へ向かう方向を移動する方向として特定する特定手段
     として機能させ、
     前記目標点特定手段を、移動する速度が速いほど前記現在位置から前記目標点までの距離を大きくさせる手段として機能させる請求項13記載のコンピュータプログラム。
  18.  前記移動方向特定手段を、
     所定の経路の移動を開始する始点と移動を終了する終点とを特定する始点・終点特定手段、
     前記始点から前記終点までの間の位置の指定を受け付ける位置指定受付手段、及び
     指定を受け付けた位置において前記移動対象が移動する方向を特定する特定手段
     として機能させる請求項13記載のコンピュータプログラム。
PCT/JP2011/076433 2010-11-30 2011-11-16 音により移動する方向をマッピングする方法、装置及びコンピュータプログラム WO2012073698A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2012546764A JP5506949B2 (ja) 2010-11-30 2011-11-16 音により移動する方向をマッピングする方法、装置及びコンピュータプログラム
DE112011103419.9T DE112011103419B4 (de) 2010-11-30 2011-11-16 Verfahren, Einheit und Computerprogramm zum Abbilden einer Bewegungsrichtung durch Töne
GB1311213.1A GB2500343B (en) 2010-11-30 2011-11-16 Method, device and computer program for mapping moving direction by sounds
CN201180062834.XA CN103282872B (zh) 2010-11-30 2011-11-16 用于借助于声音来映射移动方向的方法和设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010265981 2010-11-30
JP2010-265981 2010-11-30

Publications (1)

Publication Number Publication Date
WO2012073698A1 true WO2012073698A1 (ja) 2012-06-07

Family

ID=46127185

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/076433 WO2012073698A1 (ja) 2010-11-30 2011-11-16 音により移動する方向をマッピングする方法、装置及びコンピュータプログラム

Country Status (6)

Country Link
US (1) US8589067B2 (ja)
JP (1) JP5506949B2 (ja)
CN (1) CN103282872B (ja)
DE (1) DE112011103419B4 (ja)
GB (1) GB2500343B (ja)
WO (1) WO2012073698A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014118986A1 (ja) * 2013-02-04 2014-08-07 パイオニア株式会社 経路区間選択装置、経路区間選択方法及び経路区間選択プログラム

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9037400B2 (en) * 2012-06-26 2015-05-19 Jonathan Louis Tolstedt Virtual walking stick for the visually impaired
US8878043B2 (en) * 2012-09-10 2014-11-04 uSOUNDit Partners, LLC Systems, methods, and apparatus for music composition
EP3156765A1 (de) * 2015-10-16 2017-04-19 Inventio AG Wegeleitung von personen mit akustischen signalen
EP3673240A1 (en) * 2017-09-27 2020-07-01 Apple Inc. Spatial audio navigation
CN107888896B (zh) * 2017-10-20 2020-01-03 宁波天坦智慧电子科技股份有限公司 一种用于导盲眼镜的障碍判断与提醒方法及一种导盲眼镜

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10255193A (ja) * 1997-03-07 1998-09-25 Railway Technical Res Inst 誘導案内システム
JP2000292197A (ja) * 1999-04-07 2000-10-20 Nippon Telegr & Teleph Corp <Ntt> 位置情報提供装置
JP2001084484A (ja) * 1999-09-13 2001-03-30 Tamotsu Okazawa 景色認識装置及び景色認識方法
JP2002257581A (ja) * 2001-03-02 2002-09-11 Denso Corp 携帯型誘導案内装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5806017A (en) 1996-08-19 1998-09-08 Board Of Regents The University Of Texas System Electronic autorouting navigation system for visually impaired persons
US6320496B1 (en) * 1999-04-29 2001-11-20 Fuji Xerox Co., Ltd Systems and methods providing tactile guidance using sensory supplementation
JP2001004396A (ja) 1999-06-23 2001-01-12 Matsushita Electric Ind Co Ltd 音声道路案内ナビゲーションシステム
US6671226B1 (en) * 2001-06-01 2003-12-30 Arizona Board Of Regents Ultrasonic path guidance for visually impaired
JP2003067885A (ja) 2001-08-28 2003-03-07 Toshiba Corp 歩行者支援システム
US7446669B2 (en) * 2003-07-02 2008-11-04 Raanan Liebermann Devices for use by deaf and/or blind people
US7039522B2 (en) 2003-11-12 2006-05-02 Steven Landau System for guiding visually impaired pedestrian using auditory cues
JP2005215739A (ja) 2004-01-27 2005-08-11 Hiroyuki Moriyama 歩行監視誘導システム
US7267281B2 (en) * 2004-11-23 2007-09-11 Hopkins Billy D Location, orientation, product and color identification system for the blind or visually impaired
US20060129308A1 (en) * 2004-12-10 2006-06-15 Lawrence Kates Management and navigation system for the blind
US7620493B2 (en) 2005-06-10 2009-11-17 The Board Of Regents, The University Of Texas System System, method and apparatus for providing navigational assistance
US7299034B2 (en) * 2005-06-21 2007-11-20 Lawrence Kates System and method for wearable electronics
US20070016425A1 (en) * 2005-07-12 2007-01-18 Koren Ward Device for providing perception of the physical environment
CN1952602A (zh) * 2005-10-18 2007-04-25 国际商业机器公司 在空间中为用户定向的方法和装置
US20070221731A1 (en) * 2006-03-24 2007-09-27 Prime Technology Llc Using markers to identify objects for visually-impaired people
US8588464B2 (en) * 2007-01-12 2013-11-19 International Business Machines Corporation Assisting a vision-impaired user with navigation based on a 3D captured image stream
US20080309913A1 (en) * 2007-06-14 2008-12-18 James John Fallon Systems and methods for laser radar imaging for the blind and visually impaired
US7788032B2 (en) * 2007-09-14 2010-08-31 Palm, Inc. Targeting location through haptic feedback signals
US20090122648A1 (en) * 2007-11-12 2009-05-14 Trustees Of Boston University Acoustic mobility aid for the visually impaired
CN101385677A (zh) 2008-10-16 2009-03-18 上海交通大学 基于运动物体跟踪的导盲方法及装置
US8606316B2 (en) * 2009-10-21 2013-12-10 Xerox Corporation Portable blind aid device
US8797386B2 (en) * 2011-04-22 2014-08-05 Microsoft Corporation Augmented auditory perception for the visually impaired
CN102188319B (zh) 2011-05-26 2013-07-03 武济群 膝下按摩装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10255193A (ja) * 1997-03-07 1998-09-25 Railway Technical Res Inst 誘導案内システム
JP2000292197A (ja) * 1999-04-07 2000-10-20 Nippon Telegr & Teleph Corp <Ntt> 位置情報提供装置
JP2001084484A (ja) * 1999-09-13 2001-03-30 Tamotsu Okazawa 景色認識装置及び景色認識方法
JP2002257581A (ja) * 2001-03-02 2002-09-11 Denso Corp 携帯型誘導案内装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014118986A1 (ja) * 2013-02-04 2014-08-07 パイオニア株式会社 経路区間選択装置、経路区間選択方法及び経路区間選択プログラム

Also Published As

Publication number Publication date
US8589067B2 (en) 2013-11-19
US20120136569A1 (en) 2012-05-31
GB2500343A (en) 2013-09-18
CN103282872B (zh) 2016-05-25
JP5506949B2 (ja) 2014-05-28
JPWO2012073698A1 (ja) 2014-05-19
CN103282872A (zh) 2013-09-04
DE112011103419T5 (de) 2013-07-11
GB201311213D0 (en) 2013-08-14
DE112011103419B4 (de) 2014-01-09
GB2500343B (en) 2014-02-12

Similar Documents

Publication Publication Date Title
JP5506949B2 (ja) 音により移動する方向をマッピングする方法、装置及びコンピュータプログラム
US10126823B2 (en) In-vehicle gesture interactive spatial audio system
JP6195843B2 (ja) ジェスチャ制御音声ユーザインタフェース
KR101384528B1 (ko) 입체 음향을 이용한 방향 안내 처리 방법 및 그를 적용한네비게이션 시스템
JP2006284218A (ja) ナビゲーション装置
JP2007263954A (ja) ナビゲーションシステムにおける対象点の格納および視覚化
EP3040837B1 (en) Text entry method with character input slider
JP2009139544A (ja) 入力装置
WO2005090916A1 (ja) ナビゲーション装置、ナビゲーション方法、ナビゲーションプログラムおよびコンピュータ読み取り可能な記録媒体
JP4457970B2 (ja) ナビゲーション装置及びその地図表示制御プログラム
WO2019198123A1 (ja) ナビゲーション装置及びナビゲーション方法
JP2010127837A (ja) ナビゲーション装置
JP2008191055A (ja) ナビゲーション装置
JP2008032629A (ja) ナビゲーション装置
WO2005085760A1 (ja) インタラクティブ経路案内装置
JP2008185452A (ja) ナビゲーション装置
Sanchez Recognizing shapes and gestures using sound as feedback
JP2006010509A (ja) ナビゲーションシステム
JP2015046103A (ja) 対話型インタフェース及び情報処理装置
JP2008310643A (ja) 情報処理装置及び画像表示制御方法
JP4655268B2 (ja) 音声出力システム
JP2010190773A (ja) ナビゲーション装置およびナビゲーション方法
WO2017168543A1 (ja) 音声案内装置及び音声案内方法
JP2006227434A (ja) 音声案内装置、音声案内方法及び音声案内プログラム
JP2016211982A (ja) ナビゲーション装置およびナビゲーション方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11846036

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 112011103419

Country of ref document: DE

Ref document number: 1120111034199

Country of ref document: DE

ENP Entry into the national phase

Ref document number: 2012546764

Country of ref document: JP

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 1311213

Country of ref document: GB

Kind code of ref document: A

Free format text: PCT FILING DATE = 20111116

WWE Wipo information: entry into national phase

Ref document number: 1311213.1

Country of ref document: GB

122 Ep: pct application non-entry in european phase

Ref document number: 11846036

Country of ref document: EP

Kind code of ref document: A1