CN103282872B - 用于借助于声音来映射移动方向的方法和设备 - Google Patents

用于借助于声音来映射移动方向的方法和设备 Download PDF

Info

Publication number
CN103282872B
CN103282872B CN201180062834.XA CN201180062834A CN103282872B CN 103282872 B CN103282872 B CN 103282872B CN 201180062834 A CN201180062834 A CN 201180062834A CN 103282872 B CN103282872 B CN 103282872B
Authority
CN
China
Prior art keywords
sound
moving direction
moving
acoustic information
moving target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201180062834.XA
Other languages
English (en)
Other versions
CN103282872A (zh
Inventor
原田丞
浅川智惠子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN103282872A publication Critical patent/CN103282872A/zh
Application granted granted Critical
Publication of CN103282872B publication Critical patent/CN103282872B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/003Maps
    • G09B29/006Representation of non-cartographic information on maps, e.g. population distribution, wind direction, radiation levels, air and sea routes
    • G09B29/007Representation of non-cartographic information on maps, e.g. population distribution, wind direction, radiation levels, air and sea routes using computer methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H3/00Appliances for aiding patients or disabled persons to walk about
    • A61H3/06Walking aids for blind persons
    • A61H3/061Walking aids for blind persons with electronic detecting or guiding means
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3629Guidance using speech or audio output, e.g. text-to-speech
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5007Control means thereof computer controlled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5023Interfaces to the user
    • A61H2201/5048Audio interfaces, e.g. voice or music controlled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5058Sensors or detectors
    • A61H2201/5064Position sensors

Abstract

提供一种用于借助声音来为视觉上受损的人员映射移动方向的方法、设备和计算机程序,利用该方法、设备和计算机程序,有可能通过借助声音信息而多维地、具体为二维地表示移动方向,并且有可能有效地辅助在视觉上受损的人员的移动。

Description

用于借助于声音来映射移动方向的方法和设备
技术领域
本发明涉及一种用于通过使用声音来映射移动方向的方法、设备和计算机程序。
背景技术
近年来,已经开发许多系统用于辅助具有视觉损伤的人士以可与无视觉损伤的人士相当的方式参加活动和处理信息。例如存在能够估计基于在视觉上受损的人士通过使用除了光之外的感知、例如听觉、嗅觉、触觉等感知获取的信息估计具有视觉损伤的人员移动的方向的系统。
针对指示行进方向的技术、导航技术等已经公开了许多技术。例如专利文献1中所示的导航装置基于关于周围环境的信息、例如通过使用听觉、嗅觉、触觉等感知获取的信息生成关于用于从当前位置移向目标位置的距离和方向的移动指令。
另外,也已经提出用于通过使用声音来指定方向和距离的技术。例如在非专利文献1中,甚至可以使用两个或者更多声源通过使用立体声效果向具有视觉损伤的人员通知准确位置信息。认为使用声音在朝着动态改变的方向指导具有视觉损伤的人员时尤其有效。
[引用列表]
[专利文献]
[专利文献1]第7620493号美国专利
[专利文献2]第7039522号美国专利
[专利文献3]公开号为2005-215739的日本专利申请
[专利文献4]公开号为2003-067885的日本专利申请
[专利文献5]公开号为101385677的中国专利申请
[专利文献6]公开号为2001-004396的日本专利申请
[专利文献7]第5806017号美国专利
[非专利文献]
[非专利文献1]ToobaNasir,JonathanC.Roberts,“Sonificationofspatialdata”,the13thInternationalConferenceonAuditoryDisplay,Montreal(Canada),June26-29,2007
发明内容
[技术问题]
然而即使通过使用声音来指导具有视觉损伤的人员是有效的,常规技术仍然仅能一维地表达方向,并且因此在产生指示所需方向的声音时有困难。例如在通过说出有意义单词来提供移动指令的情况下,间断地重复各自指示一维方向的单词。具体而言,为了提供用于在45度角向右前移的指令,重复单词“向右”和“向前”为“向右、向前、向右、向前...”。因而提供具体方向的指令过于复杂,并且如果移动指令与另一声音重叠则难以让具有视觉损伤的人士正确地理解指令。
另外,虽然可以通过使用立体声效果来通知准确位置信息,但是这一技术需要必需预备两个或者更多声源的大规模系统,并且因此具有难以减少用于系统构造的总成本这样的问题。
已经鉴于上述境况而进行本发明,并且本发明的目的在于提供一种用于通过使用声音来映射移动方向的方法、设备和计算机程序,利用该方法、设备和计算机程序,可以通过使用声音信息来多维地、尤其是二维地表达移动方向,并且可以在导航任务中有效辅助具有视觉损伤的人士等。
[对问题的解决方案]
为了实现上述目的,本发明的第一方面提供一种通过从声音输出设备输出组合在一起的多个声音来映射移动目标的移动方向的方法。该方法包括:分别与三个或者更多个预定方向相关联地存储多个不同的声音信息片;标识移动目标的当前位置;指定移动目标的移动方向;以及基于分别与在预定方向中将指定的移动方向夹在中间的两个相邻方向相关联的多个声音信息片,输出通过根据指定的移动方向按照比率组合两个声音来获得的声音。
根据本发明的第二方面的方法,在本发明的第一方面中,预定方向是前、右、后和左这四个方向,并且输出分别对应于所述声音信息片的声音,所述声音根据所述移动方向按照所述比率进行组合,所述声音信息片分别与将移动方向夹在中间的两个相邻方向相关联。
根据本发明的第三方面的方法,在本发明的第一或者第二方面中,与多个声音信息片中的每个声音信息片相对应的声音是发元音的语音。
根据本发明的第四方面的方法,在本发明的第一至第三方面中的任一方面中,该方法包括:每当移动目标在沿着预定路径移动的尝试中移动某个距离时,计算从移动目标的当前位置到预定路径的最短路径;判断计算的最短路径的长度是否在预定值以上;以及在判断长度在预定值以上时输出有色噪声。
根据本发明的第五方面的方法,在本发明的第一至第四方面中的任一方面中,指定移动目标的移动方向包括:根据移动目标的移动速度指定移动目标将移向的目标点;以及将指定从当前位置到目标点的方向指定作为移动方向。另外,将从当前位置到目标点的距离设置为随着移动速度变得更快而更大。
根据本发明的第六方面的方法,在本发明的第一至第四方面中的任一方面中,指定移动目标的移动方向包括:标识预定路径中的移动起点和移动终点;接收位于起点与终点之间的某个位置的指明;以及指定移动目标从接收的指明的位置的移动方向。
接着,为了实现上述目的,本发明的第七方面提供一种用于通过输出组合在一起的多个声音来映射移动目标的移动方向的设备。该设备包括:声音信息存储单元,被配置用于分别与三个或者更多个预定方向相关联地存储多个不同的声音信息片;当前位置标识单元,被配置用于标识移动目标的当前位置;移动方向指定单元,被配置用于指定移动目标的移动方向;以及声音输出单元,被配置用于基于分别与在预定方向中将指定的移动方向夹在中间的两个相邻方向相关联的声音信息片,输出通过根据指定的移动方向按照比率组合两个声音来获得的声音。
根据本发明的第八方面的设备,在本发明的第七方面中,预定方向是前、右、后和左这四个方向,并且声音输出单元被配置用于输出分别对应于所述声音信息片的声音,所述声音根据所述移动方向按照所述比率进行组合,所述声音信息片分别与将移动方向夹在中间的两个相邻方向相关联。
根据本发明的第九方面的设备,在本发明的第七或者第八方面中,与声音信息片中的每个声音信息片相对应的声音是发元音的语音。
根据本发明的第十方面的设备,在本发明的第七至第九方面中的任一方面中,该设备包括:最短路径计算单元,被配置用于每当移动目标在沿着预定路径移动的尝试中移动某个距离时,计算从移动目标的当前位置到预定路径的最短路径;以及判断单元,被配置用于判断计算的最短路径的长度是否在预定值以上。另外,声音输出单元在判断单元判断长度在预定值以上时输出有色噪声。
根据本发明的第十一方面的设备,在本发明的第七至第十方面中的任一方面中,移动方向指定单元包括:目标点指定单元,被配置用于根据移动目标的移动速度指定移动目标将移向的目标点;以及指定单元,被配置用于将从当前位置到目标点的方向指定作为移动方向。另外,将从当前位置到目标点的距离设置为随着移动速度变得更快而更大。
根据本发明的第十二方面的设备,在本发明的第七至第十方面中的任一方面中,该设备包括:起点/终点标识单元,被配置用于标识预定路径中的移动起点和移动终点;位置指明接收单元,被配置用于接收位于起点与终点之间的某个位置的指明;以及指定单元,被配置用于指定移动目标从接收的指明的位置的移动方向。
接着,为了实现上述目的,本发明的第十三方面提供一种可由设备执行的计算机程序,所述计算机程序用于通过输出组合在一起的多个声音来映射移动目标的移动方向。该计算机程序使该设备充当以下装置:声音信息存储装置,用于分别与三个或者更多个预定方向相关联地存储多个不同的声音信息片;当前位置标识装置,用于标识移动目标的当前位置;移动方向指定装置,用于指定移动目标的移动方向;以及声音输出装置,用于基于分别与在预定方向中将指定的移动方向夹在中间的两个相邻方向相关联的多个声音信息片,输出通过根据指定的移动方向按照比率组合两个声音来获得的声音。
根据本发明的第十四方面的设备,在本发明的第十三方面中,预定方向是前、右、后和左这四个方向,并且声音输出装置充当用于输出分别对应于所述声音信息片的声音的装置,所述声音根据所述移动方向按照所述比率进行组合,所述声音信息片分别与将所述移动方向夹在中间的所述两个相邻方向相关联。
根据本发明的第十五方面的设备,在本发明的第十三或者十四方面中,与多个声音信息片中的每个声音信息片相对应的声音是发元音的语音。
根据本发明的第十六方面的设备,在本发明的第十三至十五方面中的任一方面中,该计算机程序使该设备充当以下装置:最短路径计算装置,用于每当移动目标沿着预定路径移动的尝试中移动某个距离时,计算从移动目标的当前位置到预定路径的最短路径;以及判断装置,用于判断计算的最短路径的长度是否在预定值以上。另外,声音输出装置充当用于在判断装置判断长度在预定值以上时输出有色噪声的装置。
根据本发明的第十七方面的设备,在本发明的第十三至第十六方面中的任一方面中,该计算机程序使移动方向指定装置充当以下装置:目标点指定装置,用于根据移动目标的移动速度指定移动目标将移向的目标点;以及指定装置,用于将从当前位置到目标点的方向指定作为移动方向。另外,目标点指定装置充当用于将从当前位置到目标点的距离设置为随着移动速度变得更快而更大的装置。
根据本发明的第十八方面的设备,在本发明的第十三至第十六方面中的任一方面中,该计算机程序使移动方向指定装置充当以下装置:起点/终点标识装置,用于标识预定路径中的移动起点和移动终点;位置指明接收装置,用于接收位于起点与终点之间的某个位置的指明;以及指定装置,用于指定移动目标从接收的指明的位置的移动方向。
[本发明的有利效果]
根据本发明,可以通过使用声音来多维地、尤其是二维地表达移动目标、例如设备主体、在屏幕上的假想对象等的移动方向,并且可以通过改变相继输出的声音来表达移动方向的改变。另外,即使在关于移动方向的信息与另一音频信息重叠时,用户仍然可以在理解音频信息的内容之时标识移动方向。另外,由于无需预备多个声源,所以例如低成本地实现了例如向具有视觉损伤的人员将移动的方向恰当指导人员。
附图说明
[图1]图1是示意地示出根据本发明的一个实施例的信息处理器的配置的框图。
[图2]图2是根据本发明的实施例的信息处理器的功能框图。
[图3A至3D]图3A至3D是各自示出分别与声音信息片关联的方向的示例的视图。
[图4A至4C]图4A至4C是示出根据本发明的实施例的信息处理器的存储装置中存储的声音信息片的示例的视图。
[图5A和5B]图5A和5B是示出针对给定的路径输出的声音信息片的视图。
[图6]图6是示出根据本发明的实施例的信息处理器的CPU执行的处理过程的流程图。
[图7]图7是示出根据本发明的实施例的移动方向指定单元的配置的功能框图。
[图8A和8B]图8A和8B是示出根据移动速度指定目标点的方法的示例的视图。
[图9]图9是示出根据本发明的实施例的信息处理器的CPU执行的用于指定移动方向的处理过程的流程图。
[图10]图10是示出在输出有色噪声(noise)的情况下执行的处理的概况的示例的视图。
[图11]图11是示出根据本发明的实施例的信息处理器的CPU执行的用于输出有色噪声的处理过程的流程图。
[图12A和12B]图12A和12B是示出将针对位于路径中的每个部位改变待输出的声音这样的情况的示例的视图。
[图13]图13是示出根据本发明的实施例的用于检查路径的移动方向指定单元的配置的功能框图。
[图14]图14是示出根据本发明的实施例的信息处理器的CPU执行的用于检查移动路径的处理过程的流程图。
具体实施方式
下文基于附图将给出对根据本发明的一个实施例的用于通过输出组合在一起的多个声音来映射移动目标的移动方向的设备的具体描述。自然而言,下文将给出的实施例不会限制在权利要求的范围中描述的本发明,并且在实施例中描述的有特点的特征的并非所有组合是解决手段所必需的。
此外,本发明可以由过许多不同实施例实现并且因此不应被理解为限于在实施例中描述的内容。贯穿实施例,相同部件带有相同标号。
在以下实施例中,将给出对如下设备的描述,在该设备中,在计算机系统中安装计算机程序。然而如本领域技术人员清楚的那样,可以将本发明执行为如下计算机程序,该计算机程序的部分可以由计算机执行。因而可以在一个实施例中实现本发明为作为用于通过输出组合在一起的多个声音来映射移动目标的移动方向的设备来服务的硬件、在一个实施例中为软件而在一个实施例中为软件与硬件的组合。可以在任何计算机可读记录介质、比如硬盘、DVD、CD、光学存储装置、磁存储装置等中记录计算机程序。
根据本发明的实施例,可以通过使用声音来二维地表达移动方向,并且可以通过改变相继输出的声音来表达移动方向的改变。另外,即使在移动方向的信息与不同音频信息组合时,移动主体仍然可以在理解音频信息的内容之时标识移动方向。另外,由于无需预备多个声源,所以以低成本实现了例如恰当地引导视觉上受损的人员到要移动的方向。
图1是示意地示出根据本发明的一个实施例的信息处理器的配置的框图。根据本发明的实施例的信息处理器1至少包括中央处理单元(CPU)11、存储器12、存储装置13、I/O接口14、视频接口15、便携盘驱动16、通信接口17和相互连接上述硬件单元的内部总线18。
CPU11经由内部总线18连接到信息处理器1的上述硬件单元并且被配置用于在根据存储装置13中存储的计算机程序100执行各种软件功能之时控制上述硬件单元的操作。使用易失性存储器、比如SRAM、SDRAM等作为存储器12,并且在执行计算机程序100时向存储器12中载入加载模块。存储器12被配置用于存储在执行计算机程序100时生成的临时数据等。
使用内置静止存储装置(硬盘)、ROM等作为存储装置13。便携盘驱动16从其中记录程序、数据等的便携记录介质90、比如DVD、CD-ROM等下载存储装置13中存储的计算机程序100,并且从存储装置13向存储器12中加载计算机程序100以待执行。自然而言,可以代之以使用经由通信接口17从连接到硬件单元的外部计算机下载的计算机程序。
通信接口17连接到内部总线18,并且能够通过连接到外部网络(比如因特网、LAN、WAN等)来与外部计算机等交换数据。
I/O接口14连接到输入设备、比如键盘21、鼠标22等并且被配置用于接收数据输入。另外,I/O接口14也连接到音频输出设备24、比如扬声器等并且被配置用于基于CPU11的指令输出所需声音。视频接口15连接到显示器23、比如CRT显示器、液晶显示器等并且被配置用于显示所需图像。
图2是根据本发明的实施例的信息处理器1的功能框图。在图2中,信息处理器1的声音信息存储单元201分别与三个或者更多预定方向关联地在存储装置13中存储多个不同的声音信息片。
这里,将预定方向的数目定义为三个或者更多,并且这实现移动方向的二维表达。具体而言,在分别与两个预定方向相关联地存储仅两个不同的声音信息片的情况下,听见输出的声音的人员在准确标识声音是否指示向前方向、向后方向、向右方向或者向左方向时遇到困难并且需要不同信息(例如具有意义的单词等)的辅助。
另一方面,在分别与三个或者更多预定方向相关联地存储多个不同的声音信息片的情况下,人员可以基于输出的声音的组合唯一确定移动方向。图3A至3D是各自分别示出与声音信息片相关联存储的预定方向的示例的视图。在图3A至3D中,标记●指示移动主体的当前位置。这里,术语“移动主体”意味着人员在持有声音输出设备(信息处理器1)之时移动。
如图3A中所示,在分别与两个方向相关联地存储声音信息片时,人员可以能够确定移动方向是向前还是向后、但是不能确定向右还是向左。自然而言,如果每个箭头转动90°,则人员可以确定移动方向是向右还是向左、但是接下来不能确定向前或者向后。因此不可能通过使用仅两个方向的声音信息来唯一确定移动方向。
在分别与三个方向相关联地存储声音信息片时,如图3B中所示,人员可以确定移动方向是向前还是向后,并且也可以确定移动方向是向右还是向左。在这一情况下,人员可以仅通过识别声音信息片或者声音信息片的组合来确定移动方向。
一般而言,为了支持人员确定移动方向,希望使用如图3C中所示四个方向或者如图3D中所示八个方向。四个或者八个方向被认为是与日常生活中的方向感知一致并且因此允许快速确定。
图4A至图4C示出根据本发明的实施例的信息处理器1的存储装置13中存储的声音信息片的示例。如图4A中所示,分别与四个方向、即向前方向、向右方向、向后方向和向左方向相关联地存储声音信息片。
例如在图4B中,分别与四个方向相关联地存储乐器声音作为声音信息片。在图4B的示例中,分别与向前方向(#)、向右方向(%)、向后方向($)和向左方向(&)相关联地存储“长笛”的声音、“小提琴”的声音、“双簧管”的声音和“大提琴”的声音。在上述方向中的两个方向之间的方向、例如右前方向是通过输出通过按比率1∶1组合用于向前方向的声音与用于向右方向的声音而获得的声音来表达的。具体而言,在输出通过按比率1∶1组合“长笛”的声音与“小提琴”的声音来获得的声音时,移动主体可以识别他/她将在右前方向上移动。
类似地,在图4C中,分别与四个方向相关联地存储分别发元音的语音作为声音信息片。在图4C的示例中,分别与向前方向(#)、向右方向(%)、向后方向($)和向左方向(&)相关联地存储“e”的语音、“a”的语音、“u”的语音和“i”的语音。在上述方向中的两个方向之间的方向、例如右前方向是通过输出通过按比率1∶1组合用于向前方向的语音与用于向右方向的语音而获得的语音来表达的。具体而言,在输出通过按比率1∶1组合“e”的语音与“a”的语音来获得的语音(也即发出“a”与“e”之间的语音)时,移动主体可以识别他/她将在右前方向上移动。
在使用分别发元音的语音的情况下,通过组合发两个元音的语音来输出的元音经常是用户用来在他的/她的日常生活中听见的元音。出于这一原因,在这样的情况下,与使用其它类型的声音、比如乐器声音等的情况比较,用户可以在两个语音之间容易区分并且可以快速察觉相继声音的改变。
图5A和图5B示出针对给定的路径输出的声音信息片的示例的视图。图5A示出移动路径,其中标记●指示移动目标的当前位置,并且移动主体在箭头指示的方向上沿着路径移动。
图5B通过使用分别指示方向的系列符号来示出分别与待输出的声音对应的声音信息片。移动主体在从标记●出发之后在向前方向上移动一会儿,并且通过示出指示向前方向的系列符号“#”来表达这一移动。这意味着与向前方向(#)相关联地存储的声音信息片相对应的声音被相继输出。
然后类似地,依次输出与移动方向、即向右方向(%)、向后方向($)、向左方向(&)、向后方向($)、向右方向(%)、然后向前方向(#)相关联地存储的声音信息片相对应的声音。
返回图2,当前位置标识单元202标识移动目标(例如信息处理器1)的当前位置。标识的当前位置可以是诸如基于GPS的坐标值等之类的绝对位置,或者可以是示出从预定参考点的相对位移的相对位置。
移动方向指定单元203指定从由当前位置标识单元202标识的当前位置到将移向的下一目标点的移动方向。根据移动速度来指定将移向的下一目标点。因此,按照需要改变移动方向。
声音输出设备204提取分别与在向前方向(#)、向右方向(%)、向后方向($)和向左方向(&)之中的将指定的移动方向夹在中间的两个相邻方向相关联地存储的声音信息片,并继而基于提取的声音信息片输出按照根据移动方向的比率组合的两个声音。例如在移动方向是右前方向时,声音输出设备204输出分别与向前方向(#)和向右方向(%)相关联地存储的声音信息片相对应的声音,是按照基于将移动方向夹在中间的两个相邻方向的比例分布的比率来组合的。
图6是示出根据本发明的实施例的信息处理器1的CPU11执行的处理过程的流程图。在图6中,信息处理器1的CPU11在存储装置13中与三个或者更多预定方向相关联地存储多个不同的声音信息片(步骤S601)。
CPU11标识移动目标(例如信息处理器1)的当前位置(步骤S602)。标识的当前位置可以是绝对位置、比如基于GPS的坐标值等或者可以是示出从预定参考点的相对位移的相对位置。
CPU11指定从标识的当前位置到将移向的下一目标点的移动方向(步骤S603)。根据移动速度指定将移向的下一目标点。因此,沿着预定路径按照需要改变移动方向。
CPU11提取分别与在向前方向(#)、向右方向(%)、向后方向($)和向左方向(&)之中的将指定的移动方向夹在中间的两个相邻方向相关联地存储的声音信息片(步骤S604),并继而基于提取的声音信息片输出按照根据移动方向的比率组合的两个声音(步骤S605)。
这里优选的是移动方向指定单元203指定从当前位置标识单元202标识的当前位置到根据移动速度的将移向的目标点的方向作为移动方向。这一配置使得有可能沿着预定路径根据需要改变移动方向。在这一情况下,从当前位置到目标点的距离需要随着移动速度变得更快而更大,因为每单位时间移动量更大。
图7是示出根据本发明的实施例的移动方向指定单元203的配置的功能框图。在图7中,目标点指定单元701根据移动速度指定将移向的目标点。
图8A和图8B是示出根据移动速度标识目标点的方法的示例的视图。图8A是在移动速度慢时指定目标点的示例。如图8A中所示,在移动目标的当前位置81的移动速度慢时,当前位置81的移动量(距离)小,并且目标点83仅移向目标点84。因而指定从当前位置81到目标点84的方向85作为移动方向。
图8B是在移动速度快时指定目标点的位置的示例。如图8B中所示,在移动目标的当前位置81的移动速度快时,当前位置81的移动量(距离)大,并且因此目标点83向目标点86移动更长距离。因而指定从当前位置81到目标点86的方向87作为移动方向。
返回图7,方向指定单元(指定单元)702指定从当前位置到目标点的方向作为移动方向。利用这一配置,通知移动主体在线性路径中相对快速移动而在包括许多弯曲的路径中相对慢速移动并且可以由此移动而未从预定路径大量偏离。
图9是示出根据本发明的实施例的信息处理器1的CPU11执行的用于指定移动方向的处理过程的流程图。在图9中,信息处理器1的CPU11在图6中的步骤S603检测移动速度(步骤S901),并且根据检测到的速度指定从移动目标的当前位置到目标点的距离(步骤S902)。然后,CPU11使处理返回到图6中的步骤S604并且重复上述处理。
这里可优选的是如果移动目标的当前位置从预定路径大量偏离则输出有色噪声作为报警。为了支持这一点,图2中所示最短路径计算单元205每当移动目标移动某个距离以便沿着预定路径移动时计算从移动目标的当前位置到预定路径的最短路径。判断单元206判断计算的最短路径的长度是否在预定值以上。在判断单元206判断长度在预定值以上时,声音输出单元204输出有色噪声。
图10是示出在输出有色噪声的情况下执行的处理的概况的示例的视图。在图10中,为了看见当前位置101从预定路径102偏离多少,从移动目标的当前位置101绘制与预定路径102的正交线,并且计算线性距离103。如果线性距离103的值在从预定路径102的距离的预定值104以上,则判断当前位置101大量偏离,因此输出有色噪声105。
图11是示出根据本发明的实施例的信息处理器的CPU11执行的用于输出有色噪声的处理过程的流程图。在图11中,在图6中的步骤S603之后,信息处理器1的CPU11计算从移动目标的当前位置到预定路径的最短路径(步骤S1101)、并继而判断最短路径的长度是否在预定值以上(步骤S1102)。
在判断长度等于预定值或者在预定值以下时(步骤S1102:否),CPU11将处理前进到图6中的步骤S604。在判断长度在预定值以上时(步骤S1102:是),CPU11输出有色噪声(步骤S1103)并且使处理前进到图6中的步骤S604。
从声音输出单元204输出的声音不限于固定声音。如果在路径中存在各种部位(spot),则声音输出单元204可以输出与每个部位的特性对应的声音。
图12A和图12B是示出其中根据位于路径的部位的特性输出不同声音的示例的视图。图12A和图12B与图5A和图5B基本上相同。不同在于在图12A和12B的情况下在路径中有铁路路口121、交通灯122和商店126并且路径的宽度变化。
图12A示出移动路径,其中标记●示出移动目标的当前位置,并且移动主体在箭头指示的方向上沿着路径移动。图12B通过各自指示方向的系列符号示出分别与待输出的声音对应的声音信息片。图12B中所示所谓耳听信号123和124分别输出的在现实世界中不存在的声音、例如“蜂鸣”等通知存在铁路路口121、交通灯122等。图12B中所示所称的口述信号127输出的合成语音发声的商店名称等可以通知商店126的存在。
此外,在图12B中,通过粗体示出符号来表达用于分节125的声音的音调、音量等的改变。具体而言,如分节125中所示声音的音调、音量等的改变可以通知路径的宽度变化。
如上文描述的那样,根据本发明的实施例,可以通过使用声音来二维地表达移动目标的移动方向,并且可以通过改变相继输出的声音来表达移动方向的改变。另外,即使在关于移动方向的信息与另一音频信息重叠时,移动主体仍然可以在理解音频信息的内容之时标识移动方向。另外,由于无需预备多个声源,所以以低成本支持例如恰当地引导视觉上受损的人员到该人员将移动的方向。
这里,可以出于向在视觉上受损的人员预先通知预定路径、而不是引导视觉上受损的人员到将移动的方向的目的而输出声音。在这一情况下,优选的是标识预定路径的起点和终点并且指示移动方向的声音向人员通知在点之间的路径。
图13是示出根据本发明的实施例的用于检查移动路径的移动方向指定单元203的配置的功能框图。在图13中,起点/终点指定单元131指定预定路径中的将从其开始移动的起点和将在其完成移动的终点。
位置指明接收单元132接收对路径中的位于起点与终点之间的某个位置的指明。方向指定单元(指定单元133)指定从指明的位置的移动方向。具体而言,方向指定单元133指定从移动目标的当前位置到目标点的方向作为移动方向。以这一方式,移动主体可以通过侦听声音来检查从路径中的任何位置的移动方向并且因此可以确定地理解路径的近似轮廓。
图14是示出根据本发明的实施例的信息处理器1的CPU11执行的用于检查移动路径的处理过程的流程图。在图14中,在图16中的步骤S601之后,信息处理器1的CPU11指定预定路径的起点和终点(步骤S1401)、并继而接收路径中的对某个位置的指明(步骤S1402)。接收某个位置的指明的方法不限于任何具体方法并且只要可以通过使用滑块等来接收对路径中的某个位置的指明即可以是任何方法,。
CPU11指定从接收的指明的位置的移动方向(步骤S1403)并且使处理前进到图6中的步骤S604。以这一方式,移动主体可以通过侦听声音来检查从某个位置的移动方向并且可以容易理解路径的近似轮廓。
将注意本发明不限于上述实施例并且各种变更、改进等在本发明的精神实质的范围内是可能的。例如移动目标可以是在屏幕上显示的假想对象。在这一情况下,可以例如关于手指在触屏上的位置输出指示移动方向的声音。
[标号列表]
1信息处理器
11CPU
12存储器
13存储装置
14I/O接口
15视频接口
16便携盘驱动
17通信接口
18内部总线
24声音输出设备
90便携记录介质
100计算机程序

Claims (12)

1.一种通过从声音输出设备输出组合在一起的多个声音来映射移动目标的移动方向的方法,所述方法包括:
存储多个不同的声音信息片,多个声音信息片分别与三个或者更多预定方向相关联;
标识所述移动目标的当前位置;
指定所述移动目标的移动方向;以及
利用分别与在所述预定方向中将指定的移动方向夹在中间的两个相邻方向相关联的声音信息片,输出通过根据所述指定的移动方向按照比率组合两个声音来获得的声音,其中输出的所述声音是将所述指定的移动方向夹在中间的两个相邻方向的比例分布的比率来组合的。
2.根据权利要求1所述的方法,其中:
所述预定方向是前、右、后和左这四个方向,并且
输出分别对应于所述声音信息片的声音,所述声音根据所述移动方向按照所述比率进行组合,所述声音信息片分别与将所述移动方向夹在中间的所述两个相邻方向相关联。
3.根据权利要求1所述的方法,其中与所述声音信息片中的每个声音信息片相对应的声音是发元音的语音。
4.根据权利要求1所述的方法,包括:
每当所述移动目标在沿着预定路径移动的尝试中移动某个距离时,计算从所述移动目标的所述当前位置到所述预定路径的最短路径;
判断所计算的最短路径的长度是否在预定值以上;以及
在判断所述长度在所述预定值以上时输出有色噪声。
5.根据权利要求1所述的方法,其中:
指定所述移动目标的移动方向包括:
根据所述移动目标的移动速度指定所述移动目标将移向的目标点;以及
将从所述当前位置到所述目标点的方向指定作为所述移动方向,以及
将从所述当前位置到所述目标点的距离设置为随着所述移动速度变得更快而更大。
6.根据权利要求1所述的方法,其中:
指定所述移动目标的移动方向包括:
标识预定路径中的移动起点和移动终点;
接收位于所述起点与所述终点之间的某个位置的指明;以及
指定所述移动目标从所述接收的指明的位置的移动方向。
7.一种用于通过输出组合在一起的多个声音来映射移动目标的移动方向的设备,所述设备包括:
声音信息存储单元,被配置用于存储多个不同的声音信息片,多个声音信息片分别与三个或者更多预定方向相关联;
当前位置标识单元,被配置用于标识所述移动目标的当前位置;
移动方向指定单元,被配置用于指定所述移动目标的移动方向;以及
声音输出单元,被配置用于利用分别与在所述预定方向中将指定的移动方向夹在中间的两个相邻方向相关联的声音信息片,输出通过根据所述指定的移动方向按照比率组合两个声音来获得的声音,其中输出的所述声音是将所述指定的移动方向夹在中间的两个相邻方向的比例分布的比率来组合的。
8.根据权利要求7所述的设备,其中:
所述预定方向是前、右、后和左这四个方向,并且
所述声音输出单元被配置用于输出分别对应于所述声音信息片的声音,所述声音根据所述移动方向按照所述比率进行组合,所述声音信息片分别与将所述移动方向夹在中间的所述两个相邻方向相关联。
9.根据权利要求7所述的设备,其中与所述声音信息片中的每个声音信息片相对应的声音是发元音的语音。
10.根据权利要求7所述的设备,包括:
最短路径计算单元,被配置用于每当所述移动目标在沿着预定路径移动的尝试中移动某个距离时,计算从所述移动目标的所述当前位置到所述预定路径的最短路径;以及
判断单元,被配置用于判断所计算的最短路径的长度是否在预定值以上,其中
所述声音输出单元在所述判断单元判断所述长度在所述预定值以上时输出有色噪声。
11.根据权利要求7所述的设备,其中:
所述移动方向指定单元包括:
目标点指定单元,被配置用于根据所述移动目标的移动速度指定所述移动目标将移向的目标点;以及
指定单元,被配置用于将从所述当前位置到所述目标点的方向指定作为所述移动方向,以及
将从所述当前位置到所述目标点的距离设置为随着所述移动速度变得更快而更大。
12.根据权利要求7所述的设备,包括:
起点/终点标识单元,被配置用于标识预定路径中的移动起点和移动终点;
位置指明接收单元,被配置用于接收位于所述起点与所述终点之间的某个位置的指明;以及
指定单元,被配置用于指定所述移动目标从所述接收的指明的位置的移动方向。
CN201180062834.XA 2010-11-30 2011-11-16 用于借助于声音来映射移动方向的方法和设备 Active CN103282872B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010-265981 2010-11-30
JP2010265981 2010-11-30
PCT/JP2011/076433 WO2012073698A1 (ja) 2010-11-30 2011-11-16 音により移動する方向をマッピングする方法、装置及びコンピュータプログラム

Publications (2)

Publication Number Publication Date
CN103282872A CN103282872A (zh) 2013-09-04
CN103282872B true CN103282872B (zh) 2016-05-25

Family

ID=46127185

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180062834.XA Active CN103282872B (zh) 2010-11-30 2011-11-16 用于借助于声音来映射移动方向的方法和设备

Country Status (6)

Country Link
US (1) US8589067B2 (zh)
JP (1) JP5506949B2 (zh)
CN (1) CN103282872B (zh)
DE (1) DE112011103419B4 (zh)
GB (1) GB2500343B (zh)
WO (1) WO2012073698A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9037400B2 (en) * 2012-06-26 2015-05-19 Jonathan Louis Tolstedt Virtual walking stick for the visually impaired
US8878043B2 (en) * 2012-09-10 2014-11-04 uSOUNDit Partners, LLC Systems, methods, and apparatus for music composition
WO2014118986A1 (ja) * 2013-02-04 2014-08-07 パイオニア株式会社 経路区間選択装置、経路区間選択方法及び経路区間選択プログラム
EP3156765A1 (de) * 2015-10-16 2017-04-19 Inventio AG Wegeleitung von personen mit akustischen signalen
JP7053855B2 (ja) * 2017-09-27 2022-04-12 アップル インコーポレイテッド 空間オーディオナビゲーション
CN107888896B (zh) * 2017-10-20 2020-01-03 宁波天坦智慧电子科技股份有限公司 一种用于导盲眼镜的障碍判断与提醒方法及一种导盲眼镜

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101204072A (zh) * 2005-06-21 2008-06-18 L·凯茨 可佩戴的电子设备的系统和方法

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5806017A (en) 1996-08-19 1998-09-08 Board Of Regents The University Of Texas System Electronic autorouting navigation system for visually impaired persons
JP3745074B2 (ja) * 1997-03-07 2006-02-15 財団法人鉄道総合技術研究所 誘導案内システム
JP3527131B2 (ja) * 1999-04-07 2004-05-17 日本電信電話株式会社 位置情報提供装置
US6320496B1 (en) * 1999-04-29 2001-11-20 Fuji Xerox Co., Ltd Systems and methods providing tactile guidance using sensory supplementation
JP2001004396A (ja) 1999-06-23 2001-01-12 Matsushita Electric Ind Co Ltd 音声道路案内ナビゲーションシステム
JP2001084484A (ja) * 1999-09-13 2001-03-30 Tamotsu Okazawa 景色認識装置及び景色認識方法
JP2002257581A (ja) * 2001-03-02 2002-09-11 Denso Corp 携帯型誘導案内装置
US6671226B1 (en) * 2001-06-01 2003-12-30 Arizona Board Of Regents Ultrasonic path guidance for visually impaired
JP2003067885A (ja) 2001-08-28 2003-03-07 Toshiba Corp 歩行者支援システム
US7446669B2 (en) * 2003-07-02 2008-11-04 Raanan Liebermann Devices for use by deaf and/or blind people
US7039522B2 (en) 2003-11-12 2006-05-02 Steven Landau System for guiding visually impaired pedestrian using auditory cues
JP2005215739A (ja) 2004-01-27 2005-08-11 Hiroyuki Moriyama 歩行監視誘導システム
US7267281B2 (en) * 2004-11-23 2007-09-11 Hopkins Billy D Location, orientation, product and color identification system for the blind or visually impaired
US20060129308A1 (en) * 2004-12-10 2006-06-15 Lawrence Kates Management and navigation system for the blind
US7620493B2 (en) 2005-06-10 2009-11-17 The Board Of Regents, The University Of Texas System System, method and apparatus for providing navigational assistance
US20070016425A1 (en) * 2005-07-12 2007-01-18 Koren Ward Device for providing perception of the physical environment
CN1952602A (zh) * 2005-10-18 2007-04-25 国际商业机器公司 在空间中为用户定向的方法和装置
US20070221731A1 (en) * 2006-03-24 2007-09-27 Prime Technology Llc Using markers to identify objects for visually-impaired people
US8588464B2 (en) * 2007-01-12 2013-11-19 International Business Machines Corporation Assisting a vision-impaired user with navigation based on a 3D captured image stream
US20080309913A1 (en) * 2007-06-14 2008-12-18 James John Fallon Systems and methods for laser radar imaging for the blind and visually impaired
US7788032B2 (en) * 2007-09-14 2010-08-31 Palm, Inc. Targeting location through haptic feedback signals
US20090122648A1 (en) * 2007-11-12 2009-05-14 Trustees Of Boston University Acoustic mobility aid for the visually impaired
CN101385677A (zh) 2008-10-16 2009-03-18 上海交通大学 基于运动物体跟踪的导盲方法及装置
US8606316B2 (en) * 2009-10-21 2013-12-10 Xerox Corporation Portable blind aid device
US8797386B2 (en) * 2011-04-22 2014-08-05 Microsoft Corporation Augmented auditory perception for the visually impaired
CN102188319B (zh) 2011-05-26 2013-07-03 武济群 膝下按摩装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101204072A (zh) * 2005-06-21 2008-06-18 L·凯茨 可佩戴的电子设备的系统和方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于听觉显示的电子行走辅助技术研究;张丽红;《中国优秀硕士学位论文全文数据库》;20050615(第2期);第45页第4-12行,第47页第1-2行,第48页第14-15行 *

Also Published As

Publication number Publication date
US8589067B2 (en) 2013-11-19
DE112011103419T5 (de) 2013-07-11
GB201311213D0 (en) 2013-08-14
US20120136569A1 (en) 2012-05-31
GB2500343A (en) 2013-09-18
JP5506949B2 (ja) 2014-05-28
CN103282872A (zh) 2013-09-04
JPWO2012073698A1 (ja) 2014-05-19
DE112011103419B4 (de) 2014-01-09
WO2012073698A1 (ja) 2012-06-07
GB2500343B (en) 2014-02-12

Similar Documents

Publication Publication Date Title
CN103282872B (zh) 用于借助于声音来映射移动方向的方法和设备
EP2737727B1 (en) Method and apparatus for processing audio signals
JP5735128B2 (ja) 拡張現実システム
EP2891955B1 (en) In-vehicle gesture interactive spatial audio system
CN104335268B (zh) 用于为地图视图改变提供三维过渡动画的方法、系统和装置
CN107924392A (zh) 基于姿势的注释
CN110334352A (zh) 引导信息显示方法、装置、终端及存储介质
EP1903432A3 (en) Audible computer user interface method and apparatus
CN107727103A (zh) 导航方法、终端及计算机可读介质
CN107067834A (zh) 具有口语评测功能的点读系统
CN106154231A (zh) 虚拟现实中声场定位的方法
WO2009057564A1 (ja) 情報提示システム、情報信号処理装置、情報信号処理方法及び記録媒体
CN106139536A (zh) 一种提醒方法和装置
EP4235458A3 (en) Systems and methods for identifying and providing information about semantic entities in audio signals
CN106463119A (zh) 用于支持改进语音识别的对视觉内容的修改
CN107182011A (zh) 音频播放方法及系统、移动终端、WiFi耳机
Etter et al. Melodious walkabout: Implicit navigation with contextualized personal audio contents
KR101855292B1 (ko) 오디오 컨텐츠 제공 방법 및 장치, 사용자 단말과 컴퓨터로 읽을 수 있는 기록 매체
CN114693890A (zh) 一种增强现实交互方法及电子设备
CN109726380A (zh) 表格编辑方法及装置
CN108196675A (zh) 用于触控终端的交互方法、装置及触控终端
US9472113B1 (en) Synchronizing playback of digital content with physical content
CN105139865A (zh) 一种确定左右声道音频相关系数的方法及装置
CN105043373A (zh) 一种用户端动态定位语音导游方法及其系统
CN107995583A (zh) 声音播放方法、系统及其非暂态计算机可读取记录媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant