CN1171650C - 声音识别装置、声音识别方法及应用该装置和方法的游戏机 - Google Patents

声音识别装置、声音识别方法及应用该装置和方法的游戏机 Download PDF

Info

Publication number
CN1171650C
CN1171650C CNB971908834A CN97190883A CN1171650C CN 1171650 C CN1171650 C CN 1171650C CN B971908834 A CNB971908834 A CN B971908834A CN 97190883 A CN97190883 A CN 97190883A CN 1171650 C CN1171650 C CN 1171650C
Authority
CN
China
Prior art keywords
voice recognition
voice
sound
state
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB971908834A
Other languages
English (en)
Other versions
CN1197404A (zh
Inventor
�е���Ҳ
中岛拓也
滨田和彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sega Corp
Original Assignee
SEGAYUNTAPURAIZES CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SEGAYUNTAPURAIZES CO Ltd filed Critical SEGAYUNTAPURAIZES CO Ltd
Publication of CN1197404A publication Critical patent/CN1197404A/zh
Application granted granted Critical
Publication of CN1171650C publication Critical patent/CN1171650C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/424Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving acoustic input signals, e.g. by using the results of pitch or rhythm extraction or voice recognition
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/23Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/215Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1025Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals details of the interface with the game device, e.g. USB version detection
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1081Input via voice recognition
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6063Methods for processing data by generating or executing the game program for sound processing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Abstract

为了用声音来玩游戏,提供用作外设机器的声音识别装置及声音识别方法。具备声音输入装置(7);游戏机用控制部分(2b);以及采用对声音输入装置(7)的声音信号输出和预定的声音识别用词典(61b)、(61c)的数据进行比较的办法,识别游戏者的声音的同时,根据识别结果和控制部分(2b)的输出信号,生成与游戏有关的控制信号的声音识别部分(61)。

Description

声音识别装置、声音识别方法及应用该装置和方法的游戏机
本发明涉及识别输入的声音的声音识别装置、声音识别方法及应用了该装置和方法的游戏机。
随着近年来计算机技术的进步,应用了计算机图形学技术的视频游戏已开始广为利用。由于近年来开发了多种多样的游戏软件,这种家庭用的视频游戏装置作为一种娱乐非常受人欢迎。在这种视频游戏机中采用操作控制器的按键的办法,或者使角色动作,或者切换游戏画面。
这样一来,在现有的视频游戏机中,是让游戏的指示完全通过游戏者操作控制器的开关来执行。
然而,对于人来说,最自然的通信手段是声音。因此,进行了各种企图识别人的声音并根据该识别结果来控制机械的尝试。例如,企图用人的声音控制车或机器人等,或企图用声音所发出的指示控制各种电子装置。
但是,在企图把现有的声音识别装置应用到视频游戏机中的情况下,与一般的电子装置的情况不同,必须是与游戏机的特性相适应的装置,不能原样照搬地应用。例如,在按下游戏机的控制器的按键时,不是仅仅按下一次,必须采用或者是按下时间长或者是反复按下的办法来改变角色的动作程度,或者是采用与别的按键同时按下的办法使之进行特别的动作。此外,要有好的响应也是重要的。另一方面,也有这样的情况:对某些游戏机的种类,识别的精度并不太重要,装置本身不能很好地识别游戏者的声音反而使游戏更好玩。
总之,如想使游戏者享受玩游戏的快乐,就必须具备与现有的声音识别装置的情况不同的特有的特性和功能。满足这样的要求的声音识别装置,以前是没有的。
本发明就是为解决上述课题而发明出来的,其目的是提供一种适合于游戏的声音识别装置和声音识别方法。
此外,本发明的另一目的是提供应用了上述声音识别装置或声音识别方法的游戏机。
一种用作游戏机的外设装置的声音识别装置,其特征是包括:声音输入装置,接收游戏者的声音并输出声音信号;声音识别部分,通过比较从所述声音输入装置输出的声音信号和来自预定声音识别词典的数据识别游戏者的声音,产生识别结果;和连接到所述声音识别部分的游戏机控制部分,根据所述识别结果产生第一控制信号;其中所述声音识别部分的所述识别结果和所述游戏机控制部分的所述第一控制信号在所述声音识别部分中被组合,产生与游戏有关的第二控制信号,以便根据所述游戏机控制部分的所述第一控制信号和所述声音识别部分的所述识别结果之间的关系来确定对游戏的控制;所述声音识别部分输出表示从所述声音输入装置输出的声音信号的状态的值和表示所述声音信号和所述声音识别词典的内容的类似程度的类似度,所述声音识别部分具有第一操作模式和第二操作模式,在第一操作模式中,根据声音信号的状态和类似度进行声音识别,以选择游戏动作的种类,而在第二操作模式中,不进行声音识别而测定所述声音信号的状态,以选择游戏动作的状态;在所述第二操作模式中,所述声音识别部分根据所述声音信号的状态确定声音的类型,并根据声音的类型设定游戏动作的状态。
本发明的声音识别装置的上述声音识别部分,包括作为所述声音识别词典的为非特定说话者事先设定的非特定说话者声音识别词典和由游戏者设定的特定说话者声音识别词典,所述声音识别装置在其初始状态中选择所述非特定说话者声音识别词典。
本发明的声音识别装置的上述声音识别部分,包括分别与多个游戏者对应的多个特定说话者声音识别词典,根据游戏者的操作从这些特定说话者声音识别词典中选择用于声音识别处理的词典。
本发明的声音识别装置,上述游戏机控制部分输出的第一控制信号进行通常动作的控制,所述声音识别部分生成的第二控制信号进行特殊动作的控制。
本发明的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音信号的一部分或者全部的平均音量,并根据该平均音量电平设定动作的状态。
本发明的声音识别装置,在所述第二操作模式中,所述声音信号的状态作为声音信号的峰值音量电平,并且根据该峰值音量电平设定动作的状态。
本发明的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音信号的上升时间,并根据该上升时间设定动作的状态。
本发明的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音信号的持续时间,并根据该持续时间设定动作的状态。
本发明的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音的种类,并根据该声音的种类设定动作的状态。
本发明的声音识别装置,上述声音识别部分输出表示从所述声音输入装置输出的声音信号和所述声音识别词典的内容的类似程度的类似度以及相应的音量电平,并根据事先设定的拒绝电平来评价该音量电平,再根据评价结果拒绝所述声音识别部分的识别结果。
本发明的声音识别装置,对每一游戏种类或每一游戏阶段设定所述拒绝电平。
本发明的声音识别装置,上述声音识别部分,根据表示从所述声音输入装置输出的声音信号和所述声音识别词典的内容的类似程度的类似度进行识别,并响应所述类似度,根据由识别结果生成的第一控制信号改变游戏中的动作状态。
本发明的游戏机,作为控制用外设机器,具备上述的声音识别装置作为外设控制装置。
本发明的声音识别方法其特征是包括以下步骤:
步骤1,接收游戏者的声音信号;
步骤2,通过对所述声音信号与来自事先设定的声音识别词典的数据进行比较而识别游戏者的声音,产生识别结果;
步骤3,根据步骤2的所述识别结果,生成第一控制信号;和
步骤4,组合所述步骤2的识别结果和所述步骤3的第一控制信号而生成与游戏有关的第二控制信号,从而根据步骤3的第一控制数据和步骤2的识别结果之间的关系而确定对游戏的控制;
在所述步骤2中,输出表示声音信号的状态的值以及表示所述声音信号和声音识别词典的内容之间的类似程度的类似度,从而在第一操作模式中,根据类似度进行声音识别,以选择游戏动作的种类,而在第二操作模式中,不进行声音识别而测定所述声音信号的状态,以选择游戏动作的状态;
在第二操作模式中,根据声音信号的状态确定声音的类型,并根据声音的类型设定游戏动作的状态。
附图的简单说明
图1是应用了本发明的实施例1的视频游戏机的游戏系统的外观图;
图2是本发明的实施例1的视频游戏机的功能块图;
图3是本发明的实施例1的声音识别部分的功能块图;
图4是应用了本发明的实施例1的视频游戏机的游戏系统的使用状态的说明图;
图5是用来说明本发明的实施例1的声音识别部分的操作的流程图;
图6是用来说明本发明的实施例1的声音识别部分的操作的声音波形的示意图;以及
图7是用来说明本发明的实施例1的声音识别部分的操作的声音波形的示意图。
优选实施例
实施例1
图1是应用了本发明的实施例1的视频游戏机的游戏系统的外观图。在该图中,视频游戏机主机1构成为简略箱式,其内部设有游戏处理用的基板等。此外,在视频游戏机主体1的前表面上,设有2个插座2a,在其中的一个插座2a上,通过电缆2c连接着游戏操作用的小键盘2b。在另一个插座2a上连接着声音识别部分6。在声音识别部分6上,与小键盘2b一起,连接着用来听取游戏者的声音的麦可风7。在2个游戏者一块玩游戏的情况下,就使用2个小键盘2b。图1的麦可风7是头置型的,但也可以是其它的形式的麦可风。此外,也可以在两个插座2a上都连接声音识别部分6。
在视频游戏机主机1的上部,设有作为存储游戏程序、声音识别操作的存储媒体的ROM盒式磁盘连接用的盒式磁盘接口I/F1a、CD-ROM读取用的CD-ROM驱动器1b。在视频游戏机主机1的背面上,虽然没有画出来,设有视频输出端子和音频输出端子。该视频输出端子通过电缆4a连接到TV接收机5的视频输入端子上,同时,音频输出端子则通过电缆4b连接到TV接收机5的音频输入端子上。在这样的游戏机中,用户通过操作小键盘2b就可以边看着在TV接收机5上映出的画面边进行游戏。
图2是表示本实施例的TV接收机的概要的框图。此外,在图2中,已略去了声音识别部分6和麦可风7的表示。该图象处理装置由对装置进行整体控制的CPU模块10,对游戏画面进行显示控制的视频模块11,生成效果声等的音响模块12,进行CD-ROM的读出的子系统13等构成。
CPU模块10由系统控制单元SCU(System Control Unit)100,主CPU101,RAM102,ROM103,盒式磁盘接口I/F 1a,副CPU104,CPU总线105等构成。主CPU101进行整个装置的控制。该主CPU101在内部具备与数字信号处理器DSP(Digital Signal Processor)相同的运算功能,可以高速地执行应用软件。RAM102用作主CPU101的工作区。ROM103中已写入了初始化处理用的初始化程序。SCU100采用控制总线105、106、107的办法,圆滑地进行主CPU101,VDP120、130,DSP140,CPU141等之间的数据的输入输出。此外,SCU100在内部具备DMA控制器,可以把游戏中的分离(split)数据传送到视频模块11内的VRAM中去。这样,就可以高速地执行游戏等的应用软件。盒式磁盘接口I/F1a用来输入以ROM盒式磁盘的形态供给的应用软件。
副CPU104被称之为系统管理和外设控制SMPC(System Manager&Periphal Control),根据来自主CPU101的要求,具备通过插座2a从小键盘2b收集外设数据的功能等。主CPU101根据从副CPU104接受到的外设数据,进行例如使游戏画面中的外场手移动等的处理。在插座2a上可以连接小键盘,手柄,键盘等之内的任意的外设。副CPU104具备自动识别已连接到插座2a(主机一侧端子)上的外设的种类,  并根据与外设的种类相对应的通信方式收集外设数据的功能。
视频模块11具备进行视频游戏的由多角形数据构成的角色等的描画的视频显示处理器VDP(Video Display Processor)120,进行背景的描画、多角形图象数据和背景图象的合成及限幅处理等的VDP130。VDP120被连接到VRAM121和帧缓冲器122、123上。表示视频游戏机的角色的多角形的描画数据通过SCU100从主CPU101送往VDP120,写入到VRAM121中。已写入到VRAM121中的描画数据,例如,以16位或8位/象素的形式被描画到描画用的帧缓冲器122或123中。被描画后的帧缓冲器122或123的数据被送往VDP130中去。控制描画的信息,从主CPU101通过SCU100提供给VDP120。接着,VDP120根据该指示执行描画处理。
VDP130被构成为连接到VRAM131上,从VDP130输出的图象数据,通过存储器132输出到编码器160中去。编码器160采用给该图象数据加上同步信号的办法,生成图象信号,并输出到TV接收机5上。这样一来,就在TV接受机5上显示规定的游戏的画面。
音响模块12由根据PCM方式或FM方式进行声音合成的DSP140,和对该DSP140进行控制等的CPU141构成。由DSP140生成的声音数据在用D/A转换器170转换成双声道的信号后,输出到扬声器5b上去。
子系统13由CD-ROM驱动器1b、CD I/F 180、CPU181、MPEGAUDIO182和MPEG VIDEO183等构成。该子系统13具备进行以CD-ROM的形态供给的应用软件的读取,动画的回放等功能。CD-ROM驱动器1b从CD-ROM中读取数据。CPU181进行CD-ROM驱动器1b的控制,已读取的数据的错误修正等处理。从CD-ROM中读取的数据,通过CD I/F180,总线106,SCU100供给主CPU101,被利用作应用软件。此外,MPEG AUDIO182,MPEG VIDEO183是复原用MPEG(Motion Picture Expert Group)规格压缩后的数据的器件。采用用这些MPEG AUDIO182,MPEG VIDEO183把已写入到CD-ROM中的MPEG压缩数据进行复原的办法,就可以进行动画的回放。
图3是表示声音识别部分6的内部构成的框图。声音识别部分6是一种不需要登录自己的声音,与不论是谁的声音都可以识别的非特定说话者对应的带有词准确定位(word spotting)功能的离散单词(太阳、大海等可单独用的单词)的声音识别子系统。在该图中,插头62通过电缆2c被连接图2的插座2a上。此外,插头63、64上分别连接小键盘2b和麦可风7。插头62~64已连接上声音识别LSI61(型号RL5C288,株式会社理光生产)。声音识别LSI61根据从麦可风7输入的声音信号进行声音识别处理,同时,把来自小键盘2b的数据传送到主机一侧的CPU模块10上去。此外,还进行使小键盘2b的控制数据与声音识别结果融合的处理。还有,采用把对应的外设连接到扩展端口(插座63)上的办法,可以同时进行声音和手动的操作。声音识别LSI61具备存储声音处理的参数数据的数据寄存器61a和存储用于进行声音识别的标准图形的标准图形存储器61b以及用于进行特定说话者的声音识别的特定图形存储器61c。
声音识别部分6预先按每一单词,对多数说话者的频谱系列进行分类(分组化),把各个组的中心或属于各个组的声音平均频谱系列作为标准图形(多模板)保存下来。对于输入声音进行与所有的标准图形的匹配,计算类似度。所谓类似度,就是含于识别结果中的数据,表示使用者所发出的声音与识别结果之间的距离。值越大就类似。把类似度高的标准图形的单词作为识别结果进行输出。标准图形的词典数据由游戏机1一侧下载。此外,作为识别结果与单词的类似度一起还输出音量取得值。音量取得值是表示输入声音电平的值,用该值可以测量使用者所发出的声音的大小。值越大则音量越大。
声音识别部分6具有下述的特征。
识别类型:离散发声单词,说话者类型:非特定说话者,特征量:梅尔对数倒频谱,识别方式:DST模式,识别单词数:对非特定说话者标准30单词(但是,由于莫拉(mora)总数,识别单词将变化),识别处理时间:发声结束后,0.2秒以上(由于应用,有可能变更),单词发声长度:0.15~2.00秒(包括不要的单词),分组方式:位分配方式,分组数:最大16,拒绝电平:8级(0(低电平)~7(高电平)),词连接法:最少30种(但是,由于莫拉数,组合会有变化),麦可风放大器增益:可变。
图4是使用了本游戏机1和声音识别部分6的系统的构成例。细节将在后边讲解,游戏者(player)或者是边看着TV接收机的画面,边操作小键盘2b,或者是向着麦可风发指令,以进行种种的操作。
图5是声音识别的基本处理的流程图。此外,在以下的说明中,所谓‘单词’并不表示文法上的严格的意义上的单词,包括人的名字和数字等短的词语,文字或文章等的长的词语在内,把声音识别时的一个单位标记为一个‘单词’。
首先,把识别指令设置于数据寄存器61a中(步骤S10)。
其次,一直等到从声音识别LSI161中输出识别结果为止(步骤S11)。
接受到识别指令的声音识别LSI61,当规定电平以上的音量的声音继续一定的时间时,就把识别结果存放到数据寄存器61a中,同时,通知游戏机主机10,已输出了识别结果。
当输出了识别结果时,就从数据寄存器61a中读出多个标准图形中判断为最为相似的识别1位的单词作为识别得分(步骤S12)。所谓识别得分,就是用以表现输入声音与识别1位的单词的类似度。识别得分越高,就表明越与输入声音类似。
其次判断是否需要更为详细的数据(步骤S13),若不需要数据则返回步骤S10。
若需要数据,则把下一个指令设置到数据寄存器61a中去(步骤S14)。借助于下一个指令,声音识别LSI61把识别2位的单词的识别得分存放到数据寄存器61a中去。游戏机主机10从数据寄存器61a中读出音量数据(步骤S15)。
其次,判断是否需要更为详细的数据(步骤S16),若不需要数据,则返回步骤S10。
若需要数据,则把下一个指令设置到数据寄存器61a中去(步骤S17)。借助于下一个指令,识别LSI61把识别2位的单词和识别得分存放到数据寄存器61a中去。游戏机主机10从数据寄存器61a中读出识别2位的单词和识别得分(步骤S18)。
其次,判断是否需要更为详细的数据(步骤S19),若不需要数据,则返回步骤S10。
若需要数据,则把下一个指令设置到数据寄存器61a中去(步骤S20)。借助于下一个指令,识别LSI61把识别3位的单词和识别得分存放到数据寄存器61a中去。游戏机主机10从数据寄存器61a中读出识别3位的单词和识别得分(步骤S21)。
这样,就可以从声音识别LSI61中作为识别结果得到识别1位的单词和识别得分,并可以根据需要用下一个指令得到更详细的识别结果的数据。
根据以上的声音识别处理,声音识别部分6具有下述的功能。
·默认非特定说话者声音识别功能
声音识别部分6以规定的顺序对默认识别模式和常规识别模式(后述)进行切换。默认识别模式是一种在装置加上电源后立即进行显示的、以用声音操作用来操作CD-ROM等的初始画面为目的模式。在内藏于声音识别LSI61的未画出的ROM中,具有与小键盘2b的各个按键对应的单词词典,在对应的单词被识别的情况下,使与各个按键对应的位变成有效(0)。用这种模式可以或者在电源加上后马上进行初始设定,或者通过声音使应用了CD-ROM的游戏机开始动作等。
以下,给出单词词典与对应按键的关系。
默认单词词典与对应按键的关系
小键盘按键                单词词典
Right                     无
Left                      无
Down                      无
Start                     ‘游戏开始’
A按键                     ‘ymc定’
C按键                     ‘按键C’
B按键                     ‘取消’
R按键              ‘前进’
X按键              ‘反复’
Y按键              ‘停止’
Z按键              ‘回放’
L按键              ‘后退’
·常规非特定说话者声音识别功能
这是以用游戏机1的CD-ROM装入词典,并在进行识别的游戏中的使用为目的的模式。采用发出词典数据装入指令,把词典从CD-ROM中装入声音识别LSI61内的图中未画出的RAM中去,发出识别开始指令(需要设定后边要讲的拒绝电平和使用分组)的办法,使识别操作开始。用发出识别停止指令的办法,可以使识别操作停止。
在这种情况下,词典数据的下载也可以这样处理,使得在上电或复位时自动地进行。当给声音识别部分6加上上电复位时,就自动从CD-ROM中向系统内藏RAM里传送数据。之后,进行与标准小键盘数据之间的置换。当象这样地自动地进行下载时,由于不需要外部操作,即便是在使用了未对应的应用时也可以在应用中使用标准数据。此外,采用把标准数据事先备于系统中进行公用的办法,可以减少各种应用的数据量和减轻应用编制者的负担。
·字分离功能
声音识别部分6具有字分离功能,可以从‘啊-拳打’的含有‘啊-’等不需要的多余的话中分离出词典中存在的单词。
·捕捉新词(catch up)功能
声音识别部分6根据标准图形存储器61b采用非特定说话者声音识别。但是,对发出个性强的发音的用户或特定的单词,也许有时候会难于识别。于是,也可以采用把难于识别的单词置换为进行用户个别声音登录的办法来提高识别率。在这样的情况下,将变成为特定说话者声音识别。
具体的步骤可以如下进行。向数据寄存器61a发出声音数据传送指令。其次,向麦可风7输入所希望的声音。接着,把已输入的声音存放到特定图形存储器61c中。
·麦可风增益变更功能
可以变更麦可风的增益。采用向数据寄存器61a发出增益设定指令的办法进行设定。用这一功能就可以根据说话者的发声音量和周围的噪音等进行恰当的识别。
·实时音量输出功能
在常规识别模式中,有2种模式:实时(每20ms)地输出声音电平的声音开关模式和进行通常的声音识别的识别模式。在前者的实时音量输出模式中,由于仅仅输出声音电平,故可以极其高速地进行处理。采用发出模式音量输出指令的办法,输出8位(0~255)的声音电平信号。
作为该模式的用途,可以考虑如下。
来自麦可风7或小键盘2b的指令输入后,用声音电平信号决定该指令的操作程度。例如,在命令画面上的角色‘前进’后,为了加快其移动速度使游戏者喊叫“快点,快点”。或者在给画面上的角色加上哭笑等的表情时,要由游戏者的‘啊!’的喊叫声的大小来决定变成何等程度激动的表情。或者在画面上的角色正在危险地带行走时,或出现敌方角色突然出现的突发性危险状态时,在游戏者发出‘危险!’或‘哎哟’等的叫声时,与其大小相对应地或是减慢角色的活动速度,或是使之有精神准备,或是使之降低姿势,或是使之假死。
此外不仅可以用声音电平来改变程度,还可以改变动作的种类。例如,在向画面上的角色发出‘前进’的命令后,在用小的声音发出‘走!’的命令时,角色就出发,而在大声喊‘走!!’时,角色就或是跳,或是在天空中飞(如果有飞行能力)。
总之,可以考虑用声音电平进行控制以便增加和减少动作的程度,或者用是否超过了某一阈值来改变动作的种类。
·拒绝功能
这是一种在声音识别时,在从声音识别LSI61,与类似度一起输出的得分(电平)低于一定电平时,就放弃该识别结果的功能。例如,在得分<(拒绝电平+1)*8时,就不输出其识别1位的类似度的结果。拒绝电平,例如为2左右。用该功能,例如可以防止因说话者以外的人的声音或噪声招致错误地识别。
·分组功能
这是一种采用把一个场面的30个单词分成最大16组,选择任意的组(可选择多个)进行识别的办法,来提高识别率和识别速度的功能。
例如,为了识别在角色比赛游戏(RPG-role playing game)的战斗场面中经常使用的咒语等,对每一咒语的种类都要作成攻击魔法(分组1),恢复魔法(分组2),直接攻击(分组3),其它(分组4),职业种类(分组5)这样的分组。接着,对每一战斗场面的经过都要顺序地选择适当的分组。
在战斗开始之前,要识别是职业种类(分组5)中的哪一个词汇。如识别的结果是‘战士’,则由于其次当然是用武器进行直接攻击,所以要从直接攻击(分组3)开始进行识别。另一方面,如职业种类的识别结果是‘使用魔法’,则从攻击魔法(分组4)开始进行识别。
这样一来,根据上一次的识别结果,选择对每一场面关联深的适当的分组,来判定声音信号是这一被选分组中的哪一个词汇。倘采用本方法,就不会有误识别为完全无关系的词汇的危险,在提高识别的可靠性的同时,由于把进行求类似度的识别处理的对象限定于被选分组内,故可以减少处理运算次数,因此在处理速度这一点上也是有利的。
·字连接功能
这是把连续发声的2个单词作为一组来输出识别结果的功能。把第1个单词的类似度和第2个单词的类似度的合计输出高的类似度。在这种情况下,需要预先把2个单词的结合数据放到词典中去。
例如,假定在词典中存在有猿、攻击、雉、防御、犬、魔法、鬼、逃跑、桃太郎的语汇,那么,作为接合数据,假定已存有猿-攻击、猿-防御、猿-逃跑、雉-攻击、雉-防御、雉-逃跑、犬-攻击、犬-防御、犬-逃跑等。这样,在词典内就存好了单词和它们的结合数据。
在这种情况下,如果用户发声为‘猿攻击’(留有若干空白)则这时的声音识别部分6的动作(从9个词中选3个词时的顺序×2种之内的)例如变成为下述情况。
情况1
第1单词类似度  第2单词类似度    识别结果
1位   猿       1位  攻击
2位   雉       2位  魔法        猿-攻击
3位   鬼       3位  逃跑
情况2
第1单词类似度  第2单词类似度    识别结果
1位   雉       1位  攻击
2位   猿       2位  魔法        雉-攻击
3位   鬼       3位  逃跑
情况3
第1单词类似度  第2单词类似度    识别结果
1位   鬼       1位  攻击
2位   猿       2位  魔法        猿-攻击
3位   犬       3位  逃跑
情况4
第1单词类似度  第2单词类似度    识别结果
1位   鬼       1位  魔法
2位   猿       2位  攻击        猿-攻击
3位   犬       3位  逃跑
在使用以上的字连接功能时,声音识别部分6从类似度1~3位的候补之内选择输出。使第1单词类似度1、2、3位的单词和第2单词类似度1、2、3位的组合并选择合计类似度大的组合。但是,象情况3、4那样,在类似度1位中不存在结合数据的单词时,则放弃它而优先输出结合数据。
其次,对使用了声音识别部分的游戏机的操作进行说明。
这种的游戏机,虽然通常用小键盘2b的按键进行操作,但也可以采用不用该方法或将它与声音识别装置一起使用的办法,来使用新方法。如果能识别音量差的要因,则可以采用使它与声音识别进行组合的办法,使用新的玩游戏的方法。
如果是普通的声音识别,则虽然仅仅进行所发出的声音与识别数据是否一致的判断,并输出其结果,但是,如果再加上所发出的声音是大于还是小于某一基准的判断结果,则可以扩展应用范围。关于其具体例子,将在后边讲述。
所发出的声音,通过麦可风7送往进行声音和音量识别的声音识别部分6,在那里进行识别数据的比较和音量基准值的比较,将其结果送往游戏机主机1。在游戏机主机1中,根据其结果进行种种的动作。此外,还可以用游戏极主机1对声音识别部分6进行音量基准值的设置。还有,音量基准值还具有可调整的默认值。
其次,对由声音识别和音量值的组合所产生的操作的具体例子进行说明。
用声音电平控制动作的程度
例如,在对画面上的角色发出‘前进’的命令后,为了加快其移动速度,使游戏者喊‘快点,快点’。或者,在给画面上的角色加上哭笑等的表情时,要由游戏者的‘啊!’的喊叫声的大小来决定变成何等程度激动的表情。或者在画面上的角色正在危险地带行走时,或出现敌方角色突然出现的突发性危险状态时,在游戏者发出‘危险!’或‘哎哟’等的叫声时,与其大小相对应地或是减慢角色的活动速度,或是使之有精神准备,或是使之降低姿势,或是使之假死。或者根据音量选择使之进行强踢打,或者进行弱踢打。
然而,作为音量电平的意义可以有互不相同的若干选择的可能。游戏者的声音的发出方法虽然也各种各样,但若概念性地选取,则可以考虑图6和图7的例子。这些图的纵轴是音量电平,横轴是时间。在图6中,最初的音量最大,然后渐渐下降。‘哎哟’这一声悲鸣般的兴奋状态的声音,就被认为是这样的进行变化。对此,在图7中,音量渐渐变大,很快达到了峰值,之后,音量渐渐变小。人们认为,通常的声音就是这样地变化。
(1)平均音量
求对于图6和图7的信号全体的平均,并把它作为(平均)音量。具体地说来,只要对麦可风的输入信号应用积分电路即可。由于平均音量与声速是通常的状态还是兴奋状态无关地表示声的全体(音量×持续时间)的值,所以就象角色的活动速度那样适合于对比较单纯的动作的程度进行控制的那种用途。
(2)峰值音量
求信号的峰值(图6和图7的点P)的电平Δy,以之作为峰值音量。具体地说,用采样保持电路边对信号进行采样边继续保持最大值即可。由于峰值音量表示最大音量,所以适合于在多个游戏者间比赛声的大小的那些用途。
(3)上升时间
求信号到达峰值为止的时间(图6和图7),以之作为上升时间。采用弄清楚上述的峰值保持电路的保持时刻的办法,就可以简单地求到。或者,也可以用上升边的角度θ、Δy/Δt来定义上升时间。这可以用微分电路实现。上升时间由于被认为与所谓的声音的紧迫度相对应,例如,在上升边陡峭的时候,要使角色或者是有精神准备或者是进行躲避,在上升边不陡峭的时候,被认为是使角色快速前进。
(4)持续时间
求信号的持续时间(图6和图7),以之为持续时间。具体地说,用没有画出来的定时器,测量在声速信号之内大于预定的阈值电平的持续时间。持续时间适合于单纯地比赛声的长短的情况。
用声音电平控制动作的种类
用声音电平不仅可改变程度,还可以改变动作的种类。例如,例如,在向画面上的角色发出‘前进’的命令后,在用小的声音发出‘走!’的命令时,角色就出发,而在大声喊‘走!!’时,角色就或是跳,或是在天空中飞(如果有飞行能力)。
总之,可以考虑用声音电平进行控制以便增加和减少动作的程度,或者用是否超过了某一阈值来改变动作的种类。
用声音的种类控制动作的种类
还可以区别孩子的声音和大人的声音,或者男性的声音和女性的声音,并根据其结果改变操作。例如,在混合存在着孩子角色和大人角色时,根据声音的种类来仅仅操作孩子或大人角色。男性和女性的情况下也是相同的。若这样地进行控制,即便是多个游戏者同发出了声音的时候,仍可以玩游戏,使得在游戏中出现了伸缩余地。
可是,孩子的声音和大人的声音,由于在其频率分布这一点上不同,故可以进行识别。例如,采用进行富利叶变换求频率分布的办法,或者简单比较多个滤波器的输出的办法,就可以识别。男性和女性的声音由于也是在频率分布这一点上不同,所以也可以用同样的手段进行识别。
其它
也可以用上述的声音电平或/和声音的种类和操作小键盘2b的按键操作之间的组合来进行特有的动作。例如,人们考虑用大的声音+A按键的操作进行控制以便重复当时的同一技巧。此外,在同时按下多个按键的情况下,在进行作出某一必杀技巧那样的打斗游戏之类的情况下,把某一按键分配给声音输入,把其他的按键分配给通常的小键盘输入,则用声音与小键盘输入的组合,与仅用小键盘的键输入比较,可以用更为简单的输入进行同样的输入。
此外,在应用上述声音电平的情况下,也可以用上述的实时音量输出功能。就是说,可以使声音识别模式和实时音量输出模式进行组合。首先,在进行声音识别并进行对应的动作后,进入实时音量输出模式,仅输出音量电平。这样一来,响应将变得非常之好。
如上所述,倘采用本发明的实施例,则可以根据发声音量进行动作的程度控制,使得对于发出小声的语言进行小动作,对于发声音量大的语言进行大动作。此外,还可以根据发声音量控制动作的种类。还有,可以根据声音的种类控制动作的种类。
实施例2
上述发明的实施例1的装置,除现有的控制装置的小键盘外,还采用组合声音识别装置的办法使操作具有纵深度的装置。对此,也可以用声音识别装置置换小键盘。
图3的声音识别部分6,如上述那样,具有默认非特定说话者声音识别功能和常规非特定说话者声音识别功能。因此,即便是在加上电源后的默认状态下由于规定的声音与小键盘的按键相对应,所以即便是不与声音识别对应的软件也可以利用声音识别装置。此外,采用发出常规非特定说话者声音识别功能的词典数据装入指令,从CD-ROM中下载词典的办法,对小键盘的按键与声音识别结果之间的关系还可以采用该软件所特有的对应。
其次,对应用了常规特定说话者声音识别功能时的处理操作进行说明。
首先,声音识别部分6采用发出词典数据装入指令的办法,从CD-ROM中下载词典数据。
其次,根据词典数据,决定小键盘2b的按键与规定的声音的对应关系。首先,在最初,把与主机的键开关对应的声音定义到声音数据RAM中去。例如,定义为当输入‘前进’这一声音时,使之输出表明‘上’的键数据。在这样的状态下,当由图1的构成的麦可风输入‘前进’的声音时,在其数据作为数字数据被取入到声音比较部分中去后,就判定在声音数据RAM中是否存在同一数据。如果,存在由麦可风输入的声音和在声音数据RAM中存在同一数据,则遵照该数据,把表明‘上’的数据发送到游戏机主机1中去。
声音信号输入后,声音识别部分6识别声音,并根据上述的对应关系把与通常的游戏小键盘操作对应的键数据向游戏机主机1输出。例如,如说‘游戏开始’则输出与按开始按键时相同的信号。此外,还可以对于小键盘上的各个按键登录游戏者所喜爱的声音。例如,只要输入用于这一目的的专用的指令并选择和输入每一小键盘数据所希望的单词后进行登录即可。这时,若在TV画面上选择文字,则就可以进行非特定说话者识别,若从麦可风7输入所希望单词,则可以进行特定说话者声音识别(捕捉新词功能)。
在迄今为止的游戏机输入数据装置中,采用用手和手指按下装在游戏小键盘上的开关的办法进行向游戏机主机的数据输入,但如果应用以上的方法,则即便是用声音输入也可以同样地控制游戏。
此外,若利用声音识别部分6,则可以进行与用游戏小键盘时不同的游戏玩法。通常,在打斗游戏等中,在进行难度高的技巧时,要求高级的小键盘操作,在用声音识别部分6的情况下,若不进行高级的声音输入(说得快和进行难的发音等)则技巧就发挥不出来。此外,也可以使上述的声音电平或声音种类的识别进行组合。
这样一来,采用使用声音进行键输入的办法,就可以使得对游戏更为亲近。例如,在拳击游戏中,可以这样地进行键分配:A按键为左拳,B按键为右拳。这时,比起用A、B按键出拳来,用‘左,右’这样的声音出拳会使游戏白热化。
实施例3
声音识别部分6,在声音识别后,输出识别单词序号和类似度。但是,在发出识别开始指令时,在已设定了拒绝电平的情况下,有可能不输出识别结果的类似度比设定值还低时的结果。用这一功能,例如,可以防止由于说话者以外的人的声音或噪声等招致误识别。
除防止误识别外,拒绝电平还有下述用法。
·随场面的状况来改变拒绝电平
例如,在冒险游戏中,若发生什么误识别,则在游戏局死掉,游戏局结束这样的场面下,就把拒绝电平设定得高。若这样,即便是牺牲响应速度,也要提高输出结果的确实性。
另一方面,采用在游戏进行中降低无关部分的拒绝电平的办法,尽管会降低输出结果的确实性,却可以改善响应。
由于这样的设定的方法可由游戏开发者任意地设定,所以与用小键盘的情况比,可以进行各种各样的控制。
实施例4
声音识别部分6,在声音识别后,输出识别单词序号和类似度。因此,也可以利用类似度控制动作的程度或动作的种类。
例如,在已对某一单词进行了识别时,根据声音识别部分6所输出的类似度的大小,给响应加上差异。例如,使类似度为80分的拳的威力为强力,使类似度为10分的拳的威力为弱力。这样,就用类似度使拳的威力变得不同。这样一来,在进行非特定说话者声音识别的情况下,就随用游戏者的发音使角色的动作、游戏的进行变得不同,对游戏者与标准数据的声音吻合的一方有利。也可以从这样的观点(看谁能进行最标准的发音,看谁可以发出适合于声音识别的发音等)欣赏游戏。因此游戏的玩法就有了深度。
此外,对于在实施例1中已说明过的、在声音电平的关系中已说明过的具体例子,也可以应用由本实施例4的类似度进行控制的思考方法。
实施例5
在以上的实施例中以声音识别部分6为中心进行了说明,下边对用该声音识别部分进行的游戏进行说明。
(1)动物驯服支援行为(assist action)游戏
这是一种使用声音识别,进行与狗、猫、马等动物之间的通信的欣赏游戏。
这是一种若不仅操作一个角色,而是搞成可以直接和间接地操作多个角色的声音识别的游戏。若用按键操作来玩这种游戏就没有意思,而适合于与实际一样地进行‘发出声音’这样的操作。
此外,在实际的驯服中,常常会有动物很不听话的情况。即便是声音识别不能顺利的进行,这时的令人不耐烦劲本身也包含游戏性,所以反而增加了好玩劲。召唤时的角色的动态的多采性非常有意思。
或者,也可以认为是游戏者随便地使所喂养的猿,雉,狗等的动物转圈子的行为游戏。如桃太郎故事所述,游戏者通过与在场地上的动物们实际上说话而可以成为好朋友。例如,要想与动物成为好朋友,则在想成为朋友的动物出现在游戏者的角色中的时候,则不论角什么都行,要叫它。例如,要是狗的话,你‘小不点!小不点!小不点!’地叫它若干次,则它就对这种声音作出反应。接着给它东西吃,则该动物就会成为游戏者的好朋友。
当游戏者走的时候,动物将在后边跟着你,当看到什么感兴趣的东西时,或是站住或是向该方向走去。在这种情况下,通过叫它:‘小不点,快来!’则就跑回来。
动物们常常会作各种动作。当游戏者对动物的某一动作若干次地说同一句话时,则动物对该句话肯定会作某一动作。这样地日积月累起来,游戏者就渐渐可以操纵动物了。
或者,还可以考虑不断通过陷阱,危害物的动作游戏。这是羊倌赶羊群之类的游戏。
在这样的游戏中,虽然准备了各种各样的陷阱,但是游戏者通过对动物进行操作,不断通过陷阱。即便是游戏者看似简单的的那样的陷阱,由于动物也会在中途受阻,所以也要教给它们。成群的动物越多就越难。为了通过陷阱前进,游戏者考虑哪一种动物应如何使用。
或者,还可以考虑饲养热带鱼的游戏,饲养花鲤鱼的游戏等。不仅仅限于声音,还可以用拍手等的动作来集合鱼群。通过对拍手的拍法动一番脑筋,若能够给鱼作各种各样的动作编程,则将成为一种有趣的娱乐方法。
(2)多人抢答智力测验
这是在游戏机上进行的智力测验节目。是一种有多个参加者,游戏按顺序提出问题,在参加者之间比赛得分的游戏。在这种游戏中,由于答案的词汇限于(1)(2)…或(甲)(乙)…等等,所以在处理速度这一点上是有利的。
(3)儿童的教育游戏
使儿童角色记住语言,或者教他礼貌待人。这种游戏目的是通信,倘使用声音,则更为有趣。
(4)战斗模拟游戏
如果选择武器等的装备和向副驾驶员发指令都用声音识别部分,则更为具有实感。
(5)麻将游戏
通过发出某些麻将专用叫法,可以选择手。
(6)其它
还可以考虑日本将棋游戏(投了,2六银等),乒乓球游戏,宴会游戏(不用鼠标,对话式游戏),难波游戏(她,不喝茶,OK等),驱动游戏(无线的收发),角色比赛游戏的短截,对话式模拟家庭游戏(老人用),战国模拟等。
此外,所谓记录媒体指的是用一种不管什么物理手段记录信息(主要是数字数据,程序)的,已说过的CD-ROM,盒式磁盘等,可以使计算机、专用处理器等的处理装置进行规定的功能的媒体。总之,只要是用一种什么手段把程序下载到计算机中,使之执行规定的功能的媒体就行。
例如,包括软盘、硬盘、磁带、光磁盘、CD-ROM、DVD、ROM盒式磁盘、带后备电池的RAM存储器盒式磁盘、闪速存储器盒式磁盘、非易失性RAM盒式磁盘等。
此外,还包括电话线路等有线通信媒体、微波线路等无线通信媒体等通信媒体、互连网等通信媒体记录媒体。
工业上利用的可能性
如上所述,倘采用本发明,由于是一种用作游戏机的外设装置的声音识别装置,且具备声音输入装置,和采用对上述声音输入装置的声音输出信号同事先设定的声音识别词典的数据进行比较的办法,来识别游戏者的声音的同时,根据识别结果生成与游戏有关的控制信号的声音识别部分,所以游戏的游戏者可以用声音玩游戏。
此外,倘采用本发明,由于上述声音识别部分,作为上述声音识别词典具备事先设定为非特定说话者用的非特定说话者声音识别词典和由游戏者设定的特定说话者声音识别词典,在动作的初始状态中选择上述非特定说话者声音识别词典,所以即便是不可能与特定说话者对应的游戏软件,也可以借助于非特定说话者声音识别,用声音玩游戏。不限于专用软件,可以与许多软件对应,扩展了该装置的应用范围。
此外,倘采用本发明,由于上述声音识别部分具备与多个游戏者分别对应的多个特定说话者声音识别词典,借助于游戏者的操作从这些特定说话者声音识别词典中选择识别处理中所使用的词典,所以,可以用适当的词典进行特定说话者声音识别,改善了声音识别的精度。
此外,倘采用本发明,由于具备连接到上述声音识别部分上的游戏机用的控制部分,上述声音识别部分,使声音的识别结果与上述控制部分的控制信号组合起来生成与游戏机有关的控制信号,所以可以使通常的小键盘等与声音识别进行组合,进行种种的操作,加深趣味性。
此外,倘采用本发明,由于上述控制部分输出进行通常动作的控制信号,上述声音识别部分生成进行特殊动作的控制信号,所以,易于执行用通常的小键盘等难于进行的特殊动作。
此外,倘采用本发明,由于上述声音识别部分,输出表示上述声音输入装置的声音信号输出和上述声音识别词典的内容的类似程度的类似度和表示上述声音信号的状态的值,同时,它具备为了选择游戏中的动作种类,根据上述类似度进行声音识别的第一动作模式和,为了设定动作的状态,不进行声音识别,测定上述声音信号的状态的第二动作模式,可以高速地进行第二动作模式的处理,所以响应变快,对游戏的操作是有利的。
此外,倘采用本发明,由于上述声音识别部分输出表示上述声音输入装置的声音信号输出和上述声音识别词典的内容的类似程度的类似度和音量电平,并根据预定的拒绝电平来评价该音量,再根据评价结果拒绝上述声音识别部分的识别结果,所以可以避免不能恰当地识别时的识别以减少错误的识别。
此外,倘采用本发明,由于对每一游戏种类或每一游戏阶段(stage)设定上述拒绝电平,所以可以根据场面设定适当的拒绝电平,在游戏的玩法上是便利的。
此外,倘采用本发明,由于上述声音识别部分根据表示上述声音输入装置的声音信号输出和上述声音识别词典的内容的类似程度的类似度进行识别的同时,使根据识别结果生成的控制信号进行的游戏中的动作的状态相应于上述类似度进行变化,所以借助于游戏者的发音使得角色的动作、游戏的进行变得不同,更加深了游戏的欣赏方式。

Claims (20)

1.一种用作游戏机的外设装置的声音识别装置,其特征是包括:
声音输入装置,接收游戏者的声音并输出声音信号;
声音识别部分,通过比较从所述声音输入装置输出的声音信号和来自预定声音识别词典的数据识别游戏者的声音,产生识别结果;和
连接到所述声音识别部分的游戏机控制部分,根据所述识别结果产生第一控制信号;
其中所述声音识别部分的所述识别结果和所述游戏机控制部分的所述第一控制信号在所述声音识别部分中被组合,产生与游戏有关的第二控制信号,以便根据所述游戏机控制部分的所述第一控制信号和所述声音识别部分的所述识别结果之间的关系来确定对游戏的控制;
所述声音识别部分输出表示从所述声音输入装置输出的声音信号的状态的值和表示所述声音信号和所述声音识别词典的内容的类似程度的类似度,所述声音识别部分具有第一操作模式和第二操作模式,在第一操作模式中,根据声音信号的状态和类似度进行声音识别,以选择游戏动作的种类,而在第二操作模式中,不进行声音识别而测定所述声音信号的状态,以选择游戏动作的状态;
在所述第二操作模式中,所述声音识别部分根据所述声音信号的状态确定声音的类型,并根据声音的类型设定游戏动作的状态。
2.权利要求1所述的声音识别装置,其中所述声音识别部分包括作为所述声音识别词典的为非特定说话者事先设定的非特定说话者声音识别词典和由游戏者设定的特定说话者声音识别词典,所述声音识别装置在其初始状态中选择所述非特定说话者声音识别词典。
3.权利要求2所述的声音识别装置,其中所述声音识别部分包括分别与多个游戏者对应的多个特定说话者声音识别词典,根据游戏者的操作从这些特定说话者声音识别词典中选择用于声音识别处理的词典。
4.权利要求3所述的声音识别装置,其中所述游戏机控制部分产生的第一控制信号进行通常动作的控制,所述声音识别部分产生的第二控制信号进行特殊动作的控制。
5.权利要求1所述的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音信号的一部分或者全部的平均音量,并根据该平均音量电平设定动作的状态。
6.权利要求1所述的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音信号的峰值音量电平,并根据该峰值音量电平设定动作的状态。
7.权利要求1所述的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音信号的上升时间,并根据该上升时间设定动作的状态。
8.权利要求1所述的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音信号的持续时间,并根据该持续时间设定动作的状态。
9.权利要求1所述的声音识别装置,在所述第二操作模式中,所述声音信号的状态为声音的种类,并根据该声音的种类设定动作的状态。
10.权利要求1所述的声音识别装置,其中所述声音识别部分输出表示从所述声音输入装置输出的声音信号和所述声音识别词典的内容的类似程度的类似度以及相应的音量电平,并根据事先设定的拒绝电平来评价该音量电平,再根据评价结果拒绝所述声音识别部分的识别结果。
11.权利要求10所述的声音识别装置,其中对每一游戏种类或每一游戏阶段设定所述拒绝电平。
12.权利要求1所述的声音识别装置,其中所述声音识别部分根据表示从所述声音输入装置输出的声音信号和所述声音识别词典的内容的类似程度的类似度进行识别,并响应所述类似度,根据由识别结果生成的第一控制信号改变游戏中的动作状态。
13.一种游戏机,其特征是包括如权利要求1~12中的任意一项所述的声音识别装置作为外设控制装置。
14.一种在控制游戏操作中使用的声音识别方法,其特征是包括以下步骤:
步骤1,接收游戏者的声音信号;
步骤2,通过对所述声音信号与来自事先设定的声音识别词典的数据进行比较而识别游戏者的声音,产生识别结果;
步骤3,根据步骤2的所述识别结果,生成第一控制信号;和
步骤4,组合所述步骤2的识别结果和所述步骤3的第一控制信号而生成与游戏有关的第二控制信号,从而根据步骤3的第一控制数据和步骤2的识别结果之间的关系而确定对游戏的控制;
在所述步骤2中,输出表示声音信号的状态的值以及表示所述声音信号和声音识别词典的内容之间的类似程度的类似度,从而在第一操作模式中,根据类似度进行声音识别,以选择游戏动作的种类,而在第二操作模式中,不进行声音识别而测定所述声音信号的状态,以选择游戏动作的状态;
在第二操作模式中,根据声音信号的状态确定声音的类型,并根据声音的类型设定游戏动作的状态。
15.权利要求14所述的声音识别方法,其中所述事先设定的声音识别词典包括对于非特定说话者而事先设定的非特定说话者声音识别词典,和由游戏者设定的特定说话者声音识别词典,一开始选择所述非特定说话者声音识别词典。
16.权利要求14所述的声音识别方法,其中所述事先设定的声音识别词典包括多个特定说话者声音识别词典,并且游戏者从这些特定说话者声音识别词典中选择用于声音识别处理的词典。
17.权利要求14所述的声音识别方法,其中在步骤3中第一控制信号用于执行通常动作,而在步骤4中第二控制信号用于执行特殊动作。
18.权利要求14所述的声音识别方法,其中在步骤2中输出并评价音量电平,使得在步骤3中当音量电平超过期望的期望电平时拒绝声音信号。
19.权利要求18所述的声音识别方法,其中对每一游戏种类或每一游戏阶段设定所述拒绝电平。
20.权利要求14所述的声音识别方法,其中响应所述类似度,根据由识别结果生成的第一控制信号改变所述游戏动作的状态。
CNB971908834A 1996-07-11 1997-07-11 声音识别装置、声音识别方法及应用该装置和方法的游戏机 Expired - Fee Related CN1171650C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP182495/1996 1996-07-11
JP182495/96 1996-07-11
JP18249596 1996-07-11

Publications (2)

Publication Number Publication Date
CN1197404A CN1197404A (zh) 1998-10-28
CN1171650C true CN1171650C (zh) 2004-10-20

Family

ID=16119296

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB971908834A Expired - Fee Related CN1171650C (zh) 1996-07-11 1997-07-11 声音识别装置、声音识别方法及应用该装置和方法的游戏机

Country Status (8)

Country Link
US (1) US6529875B1 (zh)
EP (1) EP0850673B1 (zh)
JP (1) JP3933698B2 (zh)
KR (1) KR100534502B1 (zh)
CN (1) CN1171650C (zh)
DE (1) DE69725270D1 (zh)
TW (1) TW356548B (zh)
WO (1) WO1998002223A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101648077A (zh) * 2008-08-11 2010-02-17 巍世科技有限公司 语音指令游戏控制装置及其方法

Families Citing this family (200)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3899498B2 (ja) * 1997-11-12 2007-03-28 株式会社セガ ゲーム機
KR100374465B1 (ko) * 1998-07-02 2003-03-04 가부시키가이샤 세가 게임을 실행하는 방법 및, 이것을 실시하는 게임 장치
US20060058848A1 (en) * 1998-11-20 2006-03-16 Medtronic Emergency Response Systems, Inc. AED with user inputs in response to prompts
US6334070B1 (en) * 1998-11-20 2001-12-25 Medtronic Physio-Control Manufacturing Corp. Visual and aural user interface for an automated external defibrillator
US7168086B1 (en) * 1998-11-30 2007-01-23 Microsoft Corporation Proxy for video on demand server control
US6804825B1 (en) * 1998-11-30 2004-10-12 Microsoft Corporation Video on demand methods and systems
JP4513143B2 (ja) * 1999-07-16 2010-07-28 株式会社セガ 映像表示システム
JP2001195593A (ja) 1999-10-22 2001-07-19 Sony Computer Entertainment Inc エンタテインメントシステム、エンタテインメント装置、記録媒体及びプログラム
KR20010073719A (ko) * 2000-01-19 2001-08-01 정우협 머드게임의 음성인식 동작(조절작동)방법
KR20010073718A (ko) * 2000-01-19 2001-08-01 정우협 네트워크게임의 음성인식 동작(조절작동)방법
KR100505281B1 (ko) * 2000-02-18 2005-08-04 (주)아이콤 소프트 비디오게임 론칭 서버와 이를 이용한 네트워크를 통한비디오게임 시스템 및 방법
US7240093B1 (en) * 2000-02-29 2007-07-03 Microsoft Corporation Use of online messaging to facilitate selection of participants in game play
WO2002009093A1 (en) * 2000-07-20 2002-01-31 Koninklijke Philips Electronics N.V. Feedback of recognized command confidence level
JP3419754B2 (ja) * 2000-10-30 2003-06-23 株式会社ソニー・コンピュータエンタテインメント 入力音声をキャラクタの動作に反映させるエンタテインメント装置、方法および記憶媒体
JP2002177642A (ja) * 2000-12-12 2002-06-25 Taito Corp 麻雀ゲームにおける音声やり取り方式
JP2002248261A (ja) * 2000-12-22 2002-09-03 Sony Computer Entertainment Inc オブジェクト表示プログラム、オブジェクト表示プログラムを記憶したコンピュータ読み取り可能な記憶媒体、オブジェクト表示プログラムを実行するプログラム実行装置、キャラクタ戦闘表示プログラム、キャラクタ戦闘表示プログラムを記憶したコンピュータ読み取り可能な記憶媒体、キャラクタ戦闘表示プログラムを実行するプログラム実行装置
JP2002282538A (ja) * 2001-01-19 2002-10-02 Sony Computer Entertainment Inc 音声制御プログラム、音声制御プログラムを記録したコンピュータ読み取り可能な記憶媒体、音声制御プログラムを実行するプログラム実行装置、音声制御装置及び音声制御方法
US7085722B2 (en) 2001-05-14 2006-08-01 Sony Computer Entertainment America Inc. System and method for menu-driven voice control of characters in a game environment
KR100762588B1 (ko) * 2001-06-26 2007-10-01 엘지전자 주식회사 화자적응과 오입력 거절을 결합한 음성인식 방법
US7452273B2 (en) 2001-12-12 2008-11-18 Cantor Index, Llc Method and apparatus for providing advice regarding gaming strategies
US8734226B2 (en) 2001-12-12 2014-05-27 Bgc Partners, Inc. Systems and methods for assisting in game play and wagering
NZ520069A (en) * 2002-07-09 2004-04-30 Canterbury Distr Health Board Symbols-scanning test and symbols-and-tracking dual-task test
US20040116969A1 (en) 2002-08-26 2004-06-17 Owen James M. Pulse detection using patient physiological signals
JP3500383B1 (ja) 2002-09-13 2004-02-23 コナミ株式会社 ゲーム装置、ゲーム装置の制御方法及びプログラム
US6993120B2 (en) * 2002-10-23 2006-01-31 International Business Machines Corporation System and method for copying and transmitting telephony conversations
US20040203621A1 (en) * 2002-10-23 2004-10-14 International Business Machines Corporation System and method for queuing and bookmarking tekephony conversations
US7133831B2 (en) 2002-10-23 2006-11-07 International Business Machines Corporation System and method for processing personal telephony recorder commands
US7191129B2 (en) * 2002-10-23 2007-03-13 International Business Machines Corporation System and method for data mining of contextual conversations
US7065198B2 (en) * 2002-10-23 2006-06-20 International Business Machines Corporation System and method for volume control management in a personal telephony recorder
US7391763B2 (en) * 2002-10-23 2008-06-24 International Business Machines Corporation Providing telephony services using proxies
US7003286B2 (en) * 2002-10-23 2006-02-21 International Business Machines Corporation System and method for conference call line drop recovery
US7371175B2 (en) 2003-01-13 2008-05-13 At&T Corp. Method and system for enhanced audio communications in an interactive environment
US20040254794A1 (en) * 2003-05-08 2004-12-16 Carl Padula Interactive eyes-free and hands-free device
US7303474B2 (en) * 2003-06-24 2007-12-04 At&T Bls Intellectual Property, Inc. Methods and systems for establishing games with automation using verbal communication
US20050009604A1 (en) * 2003-07-11 2005-01-13 Hsien-Ta Huang Monotone voice activation device
EP1498163A1 (en) * 2003-07-16 2005-01-19 Hsien-Ta Huang Device for game control using voice recognition
JP4206332B2 (ja) 2003-09-12 2009-01-07 株式会社バンダイナムコゲームス 入力装置、ゲームシステム、プログラムおよび情報記憶媒体
JP4206015B2 (ja) 2003-09-12 2009-01-07 任天堂株式会社 ゲーム機用操作装置
US8133115B2 (en) 2003-10-22 2012-03-13 Sony Computer Entertainment America Llc System and method for recording and displaying a graphical path in a video game
US20050169252A1 (en) * 2004-02-03 2005-08-04 Andrew Riggs Game controller including an integrated communicator
FR2869436B1 (fr) * 2004-04-27 2006-07-14 Xkapad Sa Systeme informatique comprenant une pluralite d'accessoires de commande, notamment pour les jeux video
JP2005345616A (ja) * 2004-06-01 2005-12-15 Canon Inc 情報処理装置及び情報処理方法
WO2006019987A2 (en) * 2004-07-15 2006-02-23 Mad Doc Software, Llc Audio visual games and computer programs embodying interactive speech recognition and methods related thereto
US20060046845A1 (en) * 2004-08-26 2006-03-02 Alexandre Armand Device for the acoustic control of a game system and application
US20060071933A1 (en) 2004-10-06 2006-04-06 Sony Computer Entertainment Inc. Application binary interface for multi-pass shaders
US20060095257A1 (en) * 2004-11-03 2006-05-04 Yuan-Horng Tsai Method of generating program parameters according to decibel levels of voice signals
JP3734823B1 (ja) 2005-01-26 2006-01-11 任天堂株式会社 ゲームプログラムおよびゲーム装置
JP4406615B2 (ja) * 2005-02-23 2010-02-03 任天堂株式会社 コマンド処理装置およびコマンド処理プログラム
US7925022B2 (en) 2005-05-23 2011-04-12 The Invention Science Fund I, Llc Device pairing via device to device contact
US8699944B2 (en) * 2005-06-10 2014-04-15 The Invention Science Fund I, Llc Device pairing using device generated sound
US9743266B2 (en) 2005-05-23 2017-08-22 Invention Science Fund I, Llc Device pairing via device to device contact
US7865140B2 (en) 2005-06-14 2011-01-04 The Invention Science Fund I, Llc Device pairing via intermediary device
US7636126B2 (en) * 2005-06-22 2009-12-22 Sony Computer Entertainment Inc. Delay matching in audio/video systems
US20070055528A1 (en) * 2005-08-30 2007-03-08 Dmitry Malyshev Teaching aid and voice game system
US7880746B2 (en) * 2006-05-04 2011-02-01 Sony Computer Entertainment Inc. Bandwidth management through lighting control of a user environment via a display device
US7965859B2 (en) 2006-05-04 2011-06-21 Sony Computer Entertainment Inc. Lighting control of a user environment via a display device
WO2008004486A1 (fr) * 2006-07-06 2008-01-10 Panasonic Corporation Dispositif d'entrée vocale
US7706499B2 (en) * 2006-08-30 2010-04-27 General Electric Company Acquisition and reconstruction of projection data using a stationary CT geometry
JP5088050B2 (ja) * 2007-08-29 2012-12-05 ヤマハ株式会社 音声処理装置およびプログラム
US9108108B2 (en) 2007-09-05 2015-08-18 Sony Computer Entertainment America Llc Real-time, contextual display of ranked, user-generated game play advice
US9126116B2 (en) 2007-09-05 2015-09-08 Sony Computer Entertainment America Llc Ranking of user-generated game play advice
US20090098920A1 (en) * 2007-10-10 2009-04-16 Waterleaf Limited Method and System for Auditing and Verifying User Spoken Instructions for an Electronic Casino Game
EP2154678A1 (en) * 2008-08-13 2010-02-17 Weistech Technology Co., Ltd. Voice command game controlling apparatus and method of the same
US20100041479A1 (en) * 2008-08-15 2010-02-18 Wei Hsu Voice command game controlling apparatus and method of the same
GB2463121A (en) * 2008-09-09 2010-03-10 Skype Ltd Communications system with game playing facility
CN101377797A (zh) * 2008-09-28 2009-03-04 腾讯科技(深圳)有限公司 一种应用语音控制游戏系统的方法和游戏系统
FR2940497B1 (fr) * 2008-12-23 2011-06-24 Voxler Procede de pilotage d'une application a partir d'un signal de voix et dispositif associe pour sa mise en oeuvre.
JP5399966B2 (ja) * 2010-03-30 2014-01-29 株式会社コナミデジタルエンタテインメント ゲーム装置、ゲーム装置の制御方法、及びプログラム
US10786736B2 (en) 2010-05-11 2020-09-29 Sony Interactive Entertainment LLC Placement of user information in a game space
US8384770B2 (en) 2010-06-02 2013-02-26 Nintendo Co., Ltd. Image display system, image display apparatus, and image display method
EP2395767B1 (en) 2010-06-11 2014-11-12 Nintendo Co., Ltd. Image display program, image display system, and image display method
CN101961553B (zh) * 2010-08-23 2013-06-05 福建捷联电子有限公司 一种用于发泄情绪的装置
JP2012050791A (ja) * 2010-09-03 2012-03-15 Konami Digital Entertainment Co Ltd キャラクター表示装置、キャラクター表示方法、ならびに、プログラム
JP5739674B2 (ja) 2010-09-27 2015-06-24 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法
US8854356B2 (en) * 2010-09-28 2014-10-07 Nintendo Co., Ltd. Storage medium having stored therein image processing program, image processing apparatus, image processing system, and image processing method
US8775190B2 (en) * 2011-02-04 2014-07-08 Ryohei Tanaka Voice-operated control circuit and method for using same
US9317729B2 (en) 2011-02-09 2016-04-19 West Affum Holdings Corp. RFID-based sensing of changed condition
US9237858B2 (en) 2011-02-09 2016-01-19 West Affum Holdings Corp. Detecting loss of full skin contact in patient electrodes
CN102671383A (zh) * 2011-03-08 2012-09-19 德信互动科技(北京)有限公司 基于声控的游戏实现装置和方法
US9342817B2 (en) 2011-07-07 2016-05-17 Sony Interactive Entertainment LLC Auto-creating groups for sharing photos
US9132354B2 (en) * 2011-12-22 2015-09-15 Microsoft Technology Licensing, Llc Game having a plurality of engines
KR20130133629A (ko) 2012-05-29 2013-12-09 삼성전자주식회사 전자장치에서 음성명령을 실행시키기 위한 장치 및 방법
CN102799408A (zh) * 2012-07-09 2012-11-28 上海斐讯数据通信技术有限公司 具有声控解锁功能的移动终端及移动终端声控解锁的方法
US10155110B2 (en) 2012-08-10 2018-12-18 West Affum Holdings Corp. Controlling functions of wearable cardiac defibrillation system
US8838235B2 (en) 2012-08-10 2014-09-16 Physio-Control. Inc. Wearable defibrillator system communicating via mobile communication device
US9155903B2 (en) 2012-09-24 2015-10-13 West Affum Holdings Corp. Wearable cardiac defibrillator receiving inputs by being deliberately tapped and methods
US9604070B2 (en) 2012-10-10 2017-03-28 West Affum Holdings Corp. External defibrillation with automatic post-shock anti-tachycardia (APSAT) pacing
US9087402B2 (en) 2013-03-13 2015-07-21 Microsoft Technology Licensing, Llc Augmenting images with higher resolution data
US9833707B2 (en) 2012-10-29 2017-12-05 Sony Interactive Entertainment Inc. Ambient light control and calibration via a console
US8918406B2 (en) 2012-12-14 2014-12-23 Second Wind Consulting Llc Intelligent analysis queue construction
US9345898B2 (en) 2013-01-23 2016-05-24 West Affum Holdings Corp. Wearable cardiac defibrillator system controlling conductive fluid deployment
US9895548B2 (en) 2013-01-23 2018-02-20 West Affum Holdings Corp. Wearable cardiac defibrillator (WCD) system controlling conductive fluid deployment per impedance settling at terminal value
TWI469814B (zh) * 2013-02-07 2015-01-21 Univ Southern Taiwan Sci & Tec Voice - based and brain waves, supplemented by the role of video game control system Methods and methods
US10543377B2 (en) 2013-02-25 2020-01-28 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system making shock/no shock determinations by aggregating aspects of patient parameters
US10500403B2 (en) 2013-02-25 2019-12-10 West Affum Holdings Corp. WCD system validating detected cardiac arrhythmias thoroughly so as to not sound loudly due to some quickly self-terminating cardiac arrhythmias
US9592403B2 (en) 2013-02-25 2017-03-14 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system making shock/no shock determinations from multiple patient parameters
US9757579B2 (en) 2013-02-25 2017-09-12 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system informing patient that it is validating just-detected cardiac arrhythmia
US20150328472A1 (en) 2014-05-13 2015-11-19 Physio-Control, Inc. Wearable cardioverter defibrillator components discarding ecg signals prior to making shock/no shock determination
US9827431B2 (en) 2013-04-02 2017-11-28 West Affum Holdings Corp. Wearable defibrillator with no long-term ECG monitoring
US10016613B2 (en) 2013-04-02 2018-07-10 West Affum Holdings Corp. Wearable cardiac defibrillator system long-term monitoring alternating patient parameters other than ECG
CN103458287A (zh) * 2013-09-02 2013-12-18 四川长虹电器股份有限公司 基于数字电视遥控技术实现对游戏语音控制的系统及方法
KR102274317B1 (ko) 2013-10-08 2021-07-07 삼성전자주식회사 디바이스 정보에 기초하여 음성 인식을 수행하는 방법 및 장치
US9757576B2 (en) 2014-03-18 2017-09-12 West Affum Holdings Corp. Reliable readiness indication for a wearable defibrillator
US9352166B2 (en) 2014-03-19 2016-05-31 West Affum Holdings Corp. Wearable cardiac defibrillator system sounding to bystanders in patient's own voice
US9393437B2 (en) 2014-04-02 2016-07-19 West Affum Holdings Corp. Pressure resistant conductive fluid containment
US9402988B2 (en) 2014-05-06 2016-08-02 West Affum Holdings Corp. Wearable medical system with stretch-cable assembly
US10449370B2 (en) 2014-05-13 2019-10-22 West Affum Holdings Corp. Network-accessible data about patient with wearable cardiac defibrillator system
CN105204749A (zh) * 2014-06-18 2015-12-30 腾讯科技(深圳)有限公司 一种应用的操控方法及终端设备
USD764670S1 (en) 2014-12-22 2016-08-23 West Affum Holdings Corp. Portable defibrillator
CN104219382B (zh) * 2014-08-18 2016-09-14 上海卓易科技股份有限公司 一种解锁控制处理方法、终端及系统
US11540762B2 (en) 2014-10-30 2023-01-03 West Affum Holdings Dac Wearable cardioverter defibrtillator with improved ECG electrodes
US9833607B2 (en) 2014-10-30 2017-12-05 West Affum Holdings Corp. Wearable cardiac defibrillation system with flexible electrodes
KR20160079367A (ko) 2014-12-26 2016-07-06 에릭슨엘지엔터프라이즈 주식회사 스마트 기기의 제어 방법 및 장치
US9901741B2 (en) 2015-05-11 2018-02-27 Physio-Control, Inc. Wearable cardioverter defibrillator (WCD) system using sensor modules with reassurance code for confirmation before shock
US10293260B1 (en) * 2015-06-05 2019-05-21 Amazon Technologies, Inc. Player audio analysis in online gaming environments
US10105547B2 (en) 2015-11-02 2018-10-23 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) causing patient's QRS width to be plotted against the heart rate
CN105405273A (zh) * 2015-11-30 2016-03-16 无锡觅睿恪科技有限公司 无人机用声控遥控器
US10179246B2 (en) 2015-12-04 2019-01-15 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system using security NFC tag for uploading configuration data
US10322291B2 (en) 2015-12-04 2019-06-18 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system with isolated patient parameter component
EP3182737B1 (en) * 2015-12-15 2017-11-29 Axis AB Method, stationary device, and system for determining a position
CN106056989B (zh) * 2016-06-23 2018-10-16 广东小天才科技有限公司 一种语言学习方法及装置、终端设备
US11077310B1 (en) 2016-10-04 2021-08-03 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system detecting QRS complexes in ECG signal by matched difference filter
US10940323B2 (en) 2016-10-04 2021-03-09 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) with power-saving function
EP3312832A1 (en) * 2016-10-19 2018-04-25 Mastercard International Incorporated Voice catergorisation
US11052241B2 (en) 2016-11-03 2021-07-06 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system measuring patient's respiration
CN106599110A (zh) * 2016-11-29 2017-04-26 百度在线网络技术(北京)有限公司 基于人工智能的语音搜索方法及装置
JP6877995B2 (ja) 2016-12-27 2021-05-26 任天堂株式会社 振動制御システム、振動制御装置、振動制御プログラムおよび振動制御方法
US11154230B2 (en) 2017-01-05 2021-10-26 West Affum Holdings Corp. Wearable cardioverter defibrillator having reduced noise prompts
US11938333B2 (en) 2017-01-05 2024-03-26 West Affum Holdings Dac Detecting walking in a wearable cardioverter defibrillator system
US11083906B2 (en) 2017-01-05 2021-08-10 West Affum Holdings Corp. Wearable cardioverter defibrillator having adjustable alarm time
US11400303B2 (en) 2018-01-05 2022-08-02 West Affum Holdings Corp. Detecting walking in a wearable cardioverter defibrillator system
US10926080B2 (en) 2017-01-07 2021-02-23 West Affum Holdings Corp. Wearable cardioverter defibrillator with breast support
US11235143B2 (en) 2017-02-03 2022-02-01 West Affum Holdings Corp. Wearable cardiac defibrillator systems and methods and software for contacting non-witnessing responders
US10967193B2 (en) 2017-02-03 2021-04-06 West Affum Holdings Corp. WCD with pacing analgesia
JP6594920B2 (ja) 2017-03-01 2019-10-23 任天堂株式会社 ゲームシステム、ゲーム装置、ゲームプログラム、およびゲーム処理方法
US10960220B2 (en) 2017-03-16 2021-03-30 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system evaluating its ECG signals for noise according to tall peak counts
US10589109B2 (en) 2017-04-10 2020-03-17 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system computing patient heart rate by multiplying ECG signals from different channels
US10940324B2 (en) 2017-05-03 2021-03-09 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system computing heart rate from noisy ECG signal
US10561942B2 (en) 2017-05-15 2020-02-18 Sony Interactive Entertainment America Llc Metronome for competitive gaming headset
US10946207B2 (en) 2017-05-27 2021-03-16 West Affum Holdings Corp. Defibrillation waveforms for a wearable cardiac defibrillator
CN107360440B (zh) * 2017-06-16 2020-08-21 北京米可世界科技有限公司 基于直播流中引入游戏进程的深度交互系统及交互方法
US10283117B2 (en) * 2017-06-19 2019-05-07 Lenovo (Singapore) Pte. Ltd. Systems and methods for identification of response cue at peripheral device
US11103717B2 (en) 2017-07-28 2021-08-31 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system reacting to high-frequency ECG noise
US11364387B2 (en) 2017-07-28 2022-06-21 West Affum Holdings Corp. Heart rate calculator with reduced overcounting
US10737104B2 (en) 2017-07-28 2020-08-11 West Affum Holdings Corp. WCD system outputting human-visible indication and proximate programming device with screen reproducing the human-visible indication in real time
US10918879B2 (en) 2017-07-28 2021-02-16 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system reacting to high-amplitude ECG noise
US10128914B1 (en) 2017-09-06 2018-11-13 Sony Interactive Entertainment LLC Smart tags with multiple interactions
KR102427236B1 (ko) * 2017-09-07 2022-07-29 주식회사 엔씨소프트 사용자 음성 정보 기반 온라인 게임 내 유저 인터페이스 제어 방법 및 장치
US11207538B2 (en) 2017-09-12 2021-12-28 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system warning ambulatory patient by weak alerting shock
US11844954B2 (en) 2017-11-09 2023-12-19 West Affum Holdings Dac WCD monitor supporting serviceability and reprocessing
US11260237B1 (en) 2017-11-09 2022-03-01 West Affum Holdings Corp. Wearable defibrillator with output stage having diverting resistance
US11065463B2 (en) 2017-11-10 2021-07-20 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system having WCD mode and also AED mode
US11058885B2 (en) 2017-11-29 2021-07-13 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system detecting ventricular tachycardia and/or ventricular fibrillation using variable heart rate decision threshold
US11278730B2 (en) 2017-12-04 2022-03-22 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system making shock/no shock determinations from patient's rotational motion
US11471693B1 (en) 2018-02-14 2022-10-18 West Affum Holdings Dac Wearable cardioverter defibrillator (WCD) system choosing to consider ECG signals from different channels per QRS complex widths of the ECG signals
US11160990B1 (en) 2018-02-14 2021-11-02 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) alarms
US11865354B1 (en) 2018-02-14 2024-01-09 West Affum Holdings Dac Methods and systems for distinguishing VT from VF
US11724116B2 (en) 2018-02-15 2023-08-15 West Affum Holdings Dac Wearable cardioverter defibrillator latching connector
US20190247671A1 (en) 2018-02-15 2019-08-15 West Affum Holdings Corp. Wearable cardioverter defibrillator latching connector
US11040214B2 (en) 2018-03-01 2021-06-22 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system having main UI that conveys message and peripheral device that amplifies the message
US11000691B2 (en) 2018-04-24 2021-05-11 West Affum Holdings Corp. Substantially-median-based determination of long-term heart rates from ECG data of wearable cardioverter defibrillator (WCD) system
US11298556B2 (en) 2018-04-25 2022-04-12 West Affum Holdings Corp. WCD user interface response to a change in device orientation
US11331508B1 (en) 2018-04-25 2022-05-17 West Affum Holdings Corp. Wearable cardioverter defibrillator with a non-invasive blood pressure monitor
US11534615B2 (en) 2018-04-26 2022-12-27 West Affum Holdings Dac Wearable Cardioverter Defibrillator (WCD) system logging events and broadcasting state changes and system status information to external clients
US11324960B2 (en) 2018-04-26 2022-05-10 West Affum Holdings Corp. Permission-based control of interfacing components with a medical device
US11058884B2 (en) 2018-04-26 2021-07-13 West Affum Holding Corp Wearable medical (WM) system monitoring ECG signal of ambulatory patient for heart condition
US11198015B2 (en) 2018-04-26 2021-12-14 West Affum Holdings Corp. Multi-sensory alarm for a wearable cardiac defibrillator
US11260238B2 (en) 2018-04-26 2022-03-01 West Affum Holdings Corp. Wearable medical device (WMD) implementing adaptive techniques to save power
US11698927B2 (en) 2018-05-16 2023-07-11 Sony Interactive Entertainment LLC Contextual digital media processing systems and methods
JP6953354B2 (ja) * 2018-05-24 2021-10-27 グリー株式会社 ゲーム処理プログラム、ゲーム処理方法、および、ゲーム処理装置
US11833360B2 (en) 2018-05-29 2023-12-05 West Affum Holdings Dac Carry pack for a wearable cardioverter defibrillator
US11804222B2 (en) * 2018-07-19 2023-10-31 Black & Decker Inc. System and method for controlling jobsite products
US11247041B2 (en) 2018-08-10 2022-02-15 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) with ECG preamp having active input capacitance balancing
CN110838211A (zh) * 2018-08-14 2020-02-25 阿里巴巴集团控股有限公司 语音抢答方法、装置和系统
JP7116398B2 (ja) 2018-09-11 2022-08-10 国立研究開発法人農業・食品産業技術総合研究機構 落花生の脱莢機構および自走式拾い上げ脱莢機
KR101935585B1 (ko) * 2018-10-02 2019-04-05 넷마블 주식회사 게임 커맨드 인식 방법 및 장치
CN109324561A (zh) * 2018-11-29 2019-02-12 奥克斯空调股份有限公司 厨房电器的监控方法、监控系统及厨房系统
US11334826B2 (en) 2019-01-18 2022-05-17 West Affum Holdings Corp. WCD system prioritization of alerts based on severity and/or required timeliness of user response
US11191971B2 (en) 2019-03-07 2021-12-07 West Affum Holdings Corp. Wearable cardioverter defibrillator (WCD) system with active ECG cable shielding
US11063378B2 (en) 2019-03-07 2021-07-13 West Affum Holdings Corp. Printed circuit board cable clip for signal sensitive applications
JP6993382B2 (ja) * 2019-04-26 2022-02-04 ファナック株式会社 ロボット教示装置
US11672996B2 (en) 2019-06-24 2023-06-13 West Affum Holdings Dac Wearable cardioverter defibrillator with AI-based features
US11793440B2 (en) 2019-08-09 2023-10-24 West Affum Holdings Dac Method to detect noise in a wearable cardioverter defibrillator
US10957453B2 (en) 2019-08-15 2021-03-23 West Affum Holdings Corp. WCD system alert issuance and resolution
US11484271B2 (en) 2019-08-20 2022-11-01 West Affum Holdings Dac Alert presentation based on ancillary device conditions
US11730418B2 (en) 2019-08-22 2023-08-22 West Affum Holdings Dac Cardiac monitoring system with supraventricular tachycardia (SVT) classifications
US11771360B2 (en) 2019-08-22 2023-10-03 West Affum Holdings Dac Cardiac monitoring system with normally conducted QRS complex identification
US11344718B2 (en) 2019-12-12 2022-05-31 West Affum Holdings Corp. Multichannel posture dependent template based rhythm discrimination in a wearable cardioverter defibrillator
US11717687B2 (en) 2020-01-06 2023-08-08 West Affum Holdings Dac Asystole and complete heart block detection
US11904176B1 (en) 2020-01-27 2024-02-20 West Affum Holdings Dac Wearable defibrillator system forwarding patient information based on recipient profile and/or event type
US11679253B2 (en) 2020-02-16 2023-06-20 West Affum Holdings Dac Wearable medical device with integrated blood oxygen saturation level device
US11819704B2 (en) 2020-08-21 2023-11-21 West Affum Holdings Dac Positive system alerts
US11819703B2 (en) 2020-09-17 2023-11-21 West Affum Holdings Dac Electrocardiogram (ECG) electrode with deposited ink resistive element
US11698385B2 (en) 2020-11-11 2023-07-11 West Affum Holdings Dac Walking intensity detection and trending in a wearable cardioverter defibrillator
US11793469B2 (en) 2020-11-17 2023-10-24 West Affum Holdings Dac Identifying reliable vectors
US11950174B2 (en) 2020-12-02 2024-04-02 West Affum Holdings Dac Detailed alarm messages and support
US11730968B2 (en) 2020-12-14 2023-08-22 West Affum Holdings Dac Wearable medical device with temperature managed electrodes
US11712573B2 (en) 2020-12-16 2023-08-01 West Affum Holdings Dac Managing alerts in a WCD system
KR102643796B1 (ko) * 2022-01-11 2024-03-06 한국과학기술연구원 사용자 명령에 기초한 캐릭터 행동 생성 시스템 및 방법과 이를 위한 컴퓨터 프로그램
CN114931747B (zh) * 2022-07-25 2022-10-14 深圳市景创科技电子股份有限公司 一种游戏控制器和智能语音控制方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4569026A (en) * 1979-02-05 1986-02-04 Best Robert M TV Movies that talk back
US4357488A (en) * 1980-01-04 1982-11-02 California R & D Center Voice discriminating system
US4704696A (en) * 1984-01-26 1987-11-03 Texas Instruments Incorporated Method and apparatus for voice control of a computer
DE3819178A1 (de) * 1987-06-04 1988-12-22 Ricoh Kk Spracherkennungsverfahren und -einrichtung
JP2804265B2 (ja) * 1987-07-17 1998-09-24 株式会社リコー 音声認識方式
JPH0751433B2 (ja) 1988-06-30 1995-06-05 株式会社日立ビルシステムサービス 併設エレベータの改造工法
JPH0213587U (zh) * 1988-07-08 1990-01-29
US5149104A (en) * 1991-02-06 1992-09-22 Elissa Edelstein Video game having audio player interation with real time video synchronization
JPH04276280A (ja) * 1991-03-04 1992-10-01 Sony Corp 音声信号の処理装置
JP3179626B2 (ja) * 1993-05-07 2001-06-25 株式会社リコー 音声ゲーム機
JPH07175567A (ja) * 1993-12-17 1995-07-14 Nippon Steel Corp 入力装置
JP3407382B2 (ja) * 1994-02-16 2003-05-19 株式会社セガ 入出力装置
WO1995031264A1 (en) * 1994-05-16 1995-11-23 Lazer-Tron Corporation Speech enhanced game apparatus and method therefor
GB9416463D0 (en) * 1994-08-15 1994-10-05 Farrington Jonathan S Sound control device
US5583965A (en) * 1994-09-12 1996-12-10 Sony Corporation Methods and apparatus for training and operating voice recognition systems
JPH08123448A (ja) * 1994-10-18 1996-05-17 Sega Enterp Ltd 音声信号の波形解析を用いた画像処理装置
US5842168A (en) * 1995-08-21 1998-11-24 Seiko Epson Corporation Cartridge-based, interactive speech recognition device with response-creation capability
US5893064A (en) * 1997-05-14 1999-04-06 K2 Interactive Llc Speech recognition method and apparatus with voice commands and associated keystrokes
US6038534A (en) * 1997-09-11 2000-03-14 Cowboy Software, Inc. Mimicking voice commands as keyboard signals
US6175820B1 (en) * 1999-01-28 2001-01-16 International Business Machines Corporation Capture and application of sender voice dynamics to enhance communication in a speech-to-text environment

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101648077A (zh) * 2008-08-11 2010-02-17 巍世科技有限公司 语音指令游戏控制装置及其方法

Also Published As

Publication number Publication date
JP3933698B2 (ja) 2007-06-20
EP0850673B1 (en) 2003-10-01
KR19990044544A (ko) 1999-06-25
CN1197404A (zh) 1998-10-28
EP0850673A4 (en) 2000-02-23
DE69725270D1 (de) 2003-11-06
KR100534502B1 (ko) 2006-11-10
EP0850673A1 (en) 1998-07-01
US6529875B1 (en) 2003-03-04
TW356548B (en) 1999-04-21
WO1998002223A1 (fr) 1998-01-22

Similar Documents

Publication Publication Date Title
CN1171650C (zh) 声音识别装置、声音识别方法及应用该装置和方法的游戏机
US7785197B2 (en) Voice-to-text chat conversion for remote video game play
CN1244875C (zh) 音乐游戏机通信系统
CN1913944A (zh) 消息输出装置、消息控制方法、程序以及信息记录媒体
CN1577372A (zh) 网络游戏系统以及网络游戏处理方法
CN1255874A (zh) 电子宠物的显示控制装置、显示控制方法与记录介质
CN1657125A (zh) 游戏装置、游戏控制方法、程序及记录媒体
CN1606023A (zh) 用于显示演示视频的游戏机和程序产品
CN1921916A (zh) 游戏方法和游戏系统
EP1270049A3 (en) Video game apparatus, game progress method and game progress program
EP1082983A3 (en) Game system
CN101039728A (zh) 游戏装置、游戏系统、其程序和记录介质
US20060063573A1 (en) Game device, game device control method, program, program distribution device, information storage medium
US20020099539A1 (en) Method for outputting voice of object and device used therefor
CN1301771C (zh) 麻将游戏机及其控制方法
JP2002085834A (ja) ゲーム装置
CN1977291A (zh) 图像生成装置、速度表现方法和程序
JP7051728B2 (ja) 対話型ロボット及びその制御装置
JP2022081279A (ja) ゲームプログラム、記録媒体、ゲーム処理方法、情報処理装置
JP2001314649A (ja) 音声遊技方法、装置および記録媒体
JP2006102270A (ja) 情報処理方法および情報処理端末
KR102443399B1 (ko) 게임 진행 정보 생성 시스템, 기억 매체, 및 제어 방법
JP7140996B2 (ja) ゲーム関連サービス提供プログラムならびにサーバ装置
US20160078776A1 (en) Tongue twister game and method of play
GB2621873A (en) Content display system and method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee

Owner name: SEGA CO., LTD.

Free format text: FORMER NAME OR ADDRESS: SEGA ENTERPRISES LTD.

CP01 Change in the name or title of a patent holder

Address after: Tokyo, Japan

Patentee after: Sega Enterprises, Ltd.

Address before: Tokyo, Japan

Patentee before: Segayuntapuraizes Co., Ltd.

C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20041020

Termination date: 20100711