CN110390239A - 包括用于残疾人的通信系统的车辆及通信系统的控制方法 - Google Patents
包括用于残疾人的通信系统的车辆及通信系统的控制方法 Download PDFInfo
- Publication number
- CN110390239A CN110390239A CN201811293339.XA CN201811293339A CN110390239A CN 110390239 A CN110390239 A CN 110390239A CN 201811293339 A CN201811293339 A CN 201811293339A CN 110390239 A CN110390239 A CN 110390239A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- character
- unit
- voice
- sign language
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004891 communication Methods 0.000 title claims abstract description 50
- 238000000034 method Methods 0.000 title claims abstract description 15
- 230000033001 locomotion Effects 0.000 claims abstract description 36
- 238000013519 translation Methods 0.000 claims description 14
- 230000009471 action Effects 0.000 claims description 4
- 206010011878 Deafness Diseases 0.000 description 28
- 238000010586 diagram Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 239000000446 fuel Substances 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000003208 petroleum Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
- B60K35/265—Voice
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/50—Instruments characterised by their means of attachment to or integration in the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
- B60K35/654—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
- B60K35/656—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being a passenger
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/80—Arrangements for controlling instruments
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/90—Calibration of instruments, e.g. setting initial or reference parameters; Testing of instruments, e.g. detecting malfunction
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
- B60R16/0231—Circuits relating to the driving or the functioning of the vehicle
- B60R16/0232—Circuits relating to the driving or the functioning of the vehicle for measuring vehicle parameters and indicating critical, abnormal or dangerous conditions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
- G09B21/009—Teaching or communicating with deaf persons
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/146—Instrument input by gesture
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/146—Instrument input by gesture
- B60K2360/1464—3D-gesture
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/148—Instrument input by voice
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/741—Instruments adapted for user detection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L2021/065—Aids for the handicapped in understanding
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Chemical & Material Sciences (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Social Psychology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Business, Economics & Management (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- General Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Telephonic Communication Services (AREA)
- Traffic Control Systems (AREA)
Abstract
一种包括用于残疾人的通信系统的车辆及通信系统的控制方法,该车辆可以包括:动作捕捉单元,其识别车辆的乘客的手语;输入单元,其接收来自乘客的语音或字符;存储手语信息的数据库;控制单元,其通信地耦接到动作捕捉单元和输入单元,所述控制单元被配置为使用存储在数据库中的手语信息翻译由所述动作捕捉单元识别的手语,并将通过输入单元接收到的语音转换为字符;以及输出单元,其通信地耦接到所述控制单元,所述输出单元被配置为将由所述控制单元翻译的手语输出为语音或字符,并将由所述控制单元转换的语音输出为字符。
Description
技术领域
本公开涉及一种包括用于残疾人的通信系统的车辆以及一种控制该通信系统的方法。更具体地,本公开涉及一种包括用于残疾人的能够实现非残疾人和聋哑人之间的通信的通信系统的车辆,并涉及一种控制该通信系统的方法。
背景技术
目前,许多残疾人驾驶或乘坐车辆以进行交通运输。由于车辆的大多数与便利相关的功能是为非残疾人提供的,因此,残疾人在驾驶或乘坐车辆时往往是不方便的。
例如,当聋哑人在非残疾人拥有的车辆中时,他们必须使用手语彼此交流。问题是,大多数非残疾人无法理解手语,即使他们可以,同时驾驶和使用手语也是不安全的。
此外,当车辆出现问题时,许多车辆通过生成警报来通知驾驶员该问题。然而,聋哑人听不到警报,因此很难识别车辆是否有问题。因此,他们可能会暴露在不安全的条件下。
发明内容
本公开的一个方面是提供一种包括用于残疾人的通信系统的车辆以及控制该通信系统的方法,该车辆使得非残疾人和聋哑人之间能够顺畅地交流,并且还通过利用显示器等可视地输出车辆中是否存在问题使聋哑人能够容易地识别出车辆是否存在问题。
根据本公开的实施例,包括用于残疾人的通信系统的车辆可以包括:动作捕捉单元,其识别车辆的乘客的手语;输入单元,其接收来自乘客的语音或字符;数据库,存储手语信息;控制单元,其通信地耦接到动作捕捉单元和输入单元,所述控制单元被配置为使用存储在数据库中的手语信息翻译由所述动作捕捉单元识别的手语,并将通过输入单元接收到的语音转换为字符;以及输出单元,其通信地耦接到所述控制单元,所述输出单元被配置为将由所述控制单元翻译的手语输出为语音或字符,并将由所述控制单元转换的语音输出为字符。
所述车辆还可包括终端,所述终端包括识别乘客的手语的终端动作捕捉单元、从乘客接收语音或字符的终端输入单元、以及输出所述语音或字符的终端输出单元。
所述终端可以为乘客的移动终端,并且所述终端可以通信地耦接到所述控制单元。
所述控制单元可以使用存储在数据库中的手语信息翻译由所述终端识别的手语,并且可以将通过所述终端输入的语音转换为字符。
所述控制单元可以通过所述输出单元将由所述终端识别和翻译的手语输出为语音或字符。
所述车辆可包括多个终端。在这种情况下,所述控制单元可以控制所述输出单元,以便将由多个终端中的一个终端识别和翻译的手语输出为语音或字符。
所述控制单元可以控制所述终端以将通过输入单元输入的语音或字符输出为字符。
所述车辆可包括多个终端。在这种情况下,所述控制单元可以控制所述输出单元以将由多个终端中的一个终端识别和转换的语音输出为语音或字符。
所述车辆可包括多个终端。在这种情况下,所述控制单元可以与多个终端中的一个或多个特定终端通信。
所述车辆还可包括故障感测单元,其感测车辆中是否存在故障。
当所述故障感测单元感测到车辆的故障时,所述控制单元可以控制所述输出单元以可视地输出故障的信息。
此外,根据本公开的实施例,一种控制用于车辆中的残疾人的通信系统的方法可以包括:通过车辆的动作捕捉单元或乘客的移动终端识别车辆的乘客的手语;通过车辆的输入单元或移动终端接收来自乘客的语音或字符;通过车辆的控制单元使用存储在数据库中的手语信息翻译手语;通过所述控制单元将接收到的语音转换为字符;通过所述车辆的输出单元或移动终端将翻译后的手语输出为语音或字符;通过所述输出单元或移动终端将转换后的语音输出为字符。
根据本公开的实施例,由于控制单元使用存储在数据库中的手语信息来翻译由运动捕获单元识别和发送的手语,并且将由输入单元输入并发送的语音转换为字符并通过车辆的输出单元或终端将字符输出为语音或字符,可以促进非残疾人和聋哑人之间的交流。
此外,由于故障感测单元可以感测车辆中的故障,并且输出单元可以可视地输出故障的信息,因此聋哑人可以在驾驶车辆时容易地识别出故障。
附图说明
根据以下结合附图的详细描述,本公开的上述和其他方面、特征和优点将变得更加显而易见,其中:
图1为示出根据本公开的实施例的包括用于残疾人的通信系统的车辆的配置的示意图;
图2为示意性地示出根据本公开的实施例的包括用于残疾人的通信系统的车辆中的通信系统的第一示例操作模式的示意图;
图3为示意性地示出根据本公开的实施例的包括用于残疾人的通信系统的车辆中的通信系统的第二示例操作模式的示意图;
图4为示意性地示出根据本公开的实施例的包括用于残疾人的通信系统的车辆中的通信系统的第三示例操作模式的示意图;
图5为示意性地示出根据本公开的实施例的当在用于残疾人的通信系统中的故障感测单元感测到问题时通过输出单元输出对应信息的过程的示意图;
图6为示出根据本公开的实施例的包括用于残疾人的通信系统的车辆的终端的配置的示意图;
图7为示出根据本公开的实施例的控制用于残疾人的通信系统的方法的流程图。
应当理解,上述附图不一定按比例绘制,其呈现了说明本公开的基本原理的各种优选特征的略微简化的表示。本公开的具体设计特征,包括例如具体的尺寸、取向、位置和形状将部分地由特定预期的应用和使用环境来确定。
具体实施方式
在下文中,将参考附图详细描述本公开的实施例。本领域技术人员应当认识到,可以在不脱离本公开的精神或范围的情况下以各种不同方式修改所描述的实施例。此外,在整个本说明书中,相同的附图标记指代相同的元件。
本文使用的术语仅用于描述特定实施例的目的,而不意图限制本公开。如本文所用,除非上下文另外清楚地指出,否则单数形式“一”、“一个”和“该”旨在也包括复数形式。应进一步理解,当在本说明书中使用时,术语“包括”和/或“包含”指定所述特征、整体、步骤、操作、元件和/或部件的存在,但不排除一个或多个其他特征、整体、步骤、操作、元件、部件和/或其组合的存在或添加。如本文所使用的,术语“和/或”包括相关所列项目中的一者或多者的任何和所有结合。
应当理解,本文使用的术语“交通工具”或“车辆”或其他类似术语包括一般的机动车辆(例如包括运动型多功能车(SUV)、公共汽车、卡车、各种商用车辆的乘用车)、包括各种船舶和船只的水运工具、飞机等,并且包括混合动力车辆、电动车辆、插电式混合动力电动车辆、氢动力车辆和其他替代燃料车辆(例如,来自石油以外的资源的燃料)。如本文所提到的,混合动力车辆为具有两个或更多动力源的车辆,例如汽油动力车辆和电动车辆。
另外,应当理解,以下方法或其方面中的一者或多者可以由至少一个控制单元执行。术语“控制单元”可以指的是包括存储器和处理器的硬件装置。存储器被配置成存储程序指令,并且处理器被具体编程为执行程序指令以执行下面进一步描述的一个或多个过程。如本文所述,控制单元可以控制单元、模块、部件等的操作。此外,应当理解,下面的方法可以由包括控制单元结合一个或多个其它部件的设备执行,如本领域普通技术人员应理解的。
将在本文参考附图来描述根据本公开的实施例的包括用于残疾人的通信系统的车辆。
图1为示出根据本公开的实施例的包括用于残疾人的通信系统的车辆的配置的示意图。如图1所示,根据本公开的实施例的包括用于残疾人的通信系统的车辆10包括:动作捕捉单元100,其识别车辆中的乘客的手语;输入单元200,其接收来自乘客的一个语音(或多个语音)和/或字符;数据库300,存储与手语(即手语信息)相对应的语音或字符信息;控制单元400,其连接到动作捕捉单元100以及输入单元200以用于通信,使用数据库300中的信息翻译由动作捕捉单元100识别和发送的手语,并将通过输入单元200输入并发送的一个语音(或多个语音)转换为字符;以及输出单元500,连接到控制单元400以用于通信,输出由控制单元400翻译为语音或字符的手语并输出由控制单元400转换为字符的语音。
在一些情况下,车辆还可包括一个或多个终端600(例如,乘客的移动终端),其包括识别车辆中的乘客的手语的终端动作捕捉单元610,从乘客接收语音或字符的终端输入单元620,以及输出语音或字符的终端输出单元630。下面详细描述根据本公开的实施例的包括用于残疾人的通信系统的车辆的详细配置的特征。
动作捕捉单元100识别车辆的乘客的手语。例如,动作捕捉单元100可以为能够识别聋哑人的手语的摄像头,并且可以被提供给车辆10中的一个或多个座位。然而,摄像头仅是可以用作根据本公开的实施例的动作捕捉单元100的一个示例。各种装置可以用作根据本公开的实施例的动作捕捉单元100,只要它们能够识别车辆中的乘客的手语。
动作捕捉单元100可以以各种方式识别手语。例如,它可以基于诸如乘客的手和关节的角度以及手和关节的距离和运动速度之类的信息来识别车辆中乘客的手语。由于动作捕捉单元100通信地耦接到控制单元400,因此它可以将以上述方式识别的手语发送到控制单元400。动作捕捉单元100对手语的识别不限于这种方式,并且可以以各种方式实现。
输入单元200从车辆的乘客接收一个语音(或多个语音)和/或字符。例如,在一些情况下,输入单元200可以为从车辆中的乘客接收语音的麦克风,或者可以为能从乘客接收字符的音频、视频和导航(AVN)系统。由于输入单元200通信地耦接到控制单元400,因此它可以将从乘客输入的字符或语音信息发送到控制单元400。
数据库300存储对应于手语(即,手语信息)的语音或字符。详细地,手部动作是指手语中的元音或辅音,并且手语通过组合以产生词组或句子的多个手部动作来实现。对应于元音和辅音的手语信息以及与手语信息相对应的语音或字符可以被存储在数据库300中。
控制单元400通信地耦接到动作捕捉单元100和输入单元200、使用保存在数据库300中的信息翻译由动作捕捉单元100识别和发送的手语、并将通过输入单元200输入和发送的语音转换为字符。也就是说,控制单元400可以通过将由动作捕捉单元100识别的手语的手部动作与预先存储在数据库300中的手语的手部动作进行比较,而将手语的手部动作或手部动作的组合翻译为对应的词组或句子。控制单元400可以将车辆中的乘客通过输入单元200输入的语音转换为字符。因为聋哑乘客不能听到非残疾乘客的声音,所以控制单元400将通过输入单元200输入的语音转换为字符,以使聋哑乘客能够通过将非残疾乘客的声音转换为字符来可视地看到字符。
输出单元500通信地耦接到控制单元400、输出由控制单元400翻译为语音或字符的手语并输出由控制单元400转换为字符的语音。例如,输出单元500可以包括能够在车辆中输出声音的扬声器、可以输出字符的平视显示器(HUD)以及音频、视频和导航(AVN)系统。
终端600可以为乘客的移动终端,并且可以包括识别车辆中的乘客的手语的终端动作捕捉单元610、从乘客接收语音或字符的终端输入单元620、以及输出语音或字符的终端输出单元630。也就是说,根据本公开的实施例的终端600可以为智能电话、PDA、平板电脑、PC等,其配备有识别车辆乘客的手语的摄像头、可以识别乘客的语音的麦克风、从乘客接收字符的小键盘或触摸输入装置、输出语音的扬声器以及输出字符的显示装置。终端600可以连接到控制单元400以进行通信,因此它可以将由终端动作捕捉单元610识别的手语和通过终端输入单元620输入的语音或字符信息发送到控制单元400。
控制单元400可以基于预先存储在数据库300中的手语信息翻译由终端600识别和发送的手语、可以将由终端600输入和发送的语音转换为字符、并且可以通过车辆的输出单元500将由终端600识别和翻译的手语输出为语音或字符。当存在多个终端600时,控制单元400可以通过车辆的输出单元500或其他终端600将由所述终端中的一个终端识别和翻译的手语输出为语音或字符。此外,控制单元400可以通过终端600将通过输入单元200输入的字符或语音输出为字符。当存在多个终端600时,控制单元400可以通过车辆的输出单元500或其他终端600将由所述终端中的一个终端识别和转换的语音输出为字符。
当存在多个终端600时,控制单元400可以被设定为使得在连接到控制单元400以用于通信的多个终端的特定终端之间进行通信。例如,当第一终端、第二终端和第三终端连接到控制单元400以用于通信时,控制单元400可以被设定为使得仅在除第一终端之外的第二终端和第三终端之间执行通信。在这种情况下,通过第二终端和第三终端输入的手语、字符或语音可以不通过第一终端输出。
下面参考图2至4通过各种示例操作模式详细描述根据本公开的用于残疾人的通信系统的操作。
详细地,图2示意性地示出了通信系统的第一示例操作模式,其中,包括聋哑人和非残疾人的两个乘客在非残疾人驾驶的车辆中。如图2所示,控制单元400通过输入单元200接收来自非残疾人的语音输入,并将语音转换为字符并通过输出单元500可视地输出字符,使得聋哑人可以理解非残疾人所说的话。此外,控制单元400接收由动作捕捉单元100识别的聋哑人的手语,并将手语翻译为语音或字符,并通过输出单元500输出语音或字符,使得非残疾人可以理解聋哑人的手语。
根据本公开的实施例,如上所述,由于控制单元使用数据库中的手语信息翻译由动作捕捉单元识别和发送的聋哑人的手语,并通过车辆输出单元将手语输出为语音或者字符,非残疾人可以理解聋哑人的手语。此外,由于控制单元将从输入单元输入和发送的非残疾人的语音转换为字符并通过车辆的输出单元可视地输出字符,因此聋哑人可以理解非残疾人所说的话。因此,可以使非残疾人和聋哑人能够在车辆中顺畅地相互交流。
图3示意性地示出了通信系统的第二示例操作模式,其中,包括具有移动终端的聋哑人和非残疾人的两个乘客在非残疾人驾驶的车辆中。如图3所示,控制单元400通过输入单元200接收来自非残疾人的语音输入,并将语音转换为字符并通过终端600可视地输出字符,使得聋哑人可以理解非残疾人所说的话。此外,控制单元400接收由终端600识别的聋哑人的手语,将手语翻译成语音或字符,并通过车辆的输出单元500输出语音或字符,使得非残疾人可以理解聋哑人的手语。
图4示意性地示出了通信系统的第三示例操作模式,其中,包括各自具有移动终端的两个聋哑人和非残疾人的三个乘客在非残疾人驾驶的车辆中。在这种情况下,如图4所示,控制器400通过输入单元200接收来自非残疾人的语音输入,将语音转换为字符,并通过聋哑人的两个终端600可视地输出字符,使得聋哑人可以理解非残疾人所说的话。此外,控制器400通过终端接收聋哑人的手语,将手语翻译为语音或字符,并通过车辆的输出单元500或其他终端输出语音或字符,使得三名乘客之间可以顺畅地进行交流。
在一个示例中,根据本公开的实施例的包括用于聋哑人的通信系统的车辆还可包括故障感测单元700,其感测车辆中是否存在故障。故障感测单元700可以连接到控制单元400以用于通信。
如图5所示,当故障感测单元700感测到车辆的故障时,控制单元400可以通过车辆的输出单元500可视地输出故障的信息。根据本公开的实施例,如上所述,当故障感测单元感测到故障时,控制单元通过车辆的输出单元可视地输出故障的信息。因此,当聋哑人驾驶车辆时,他/她可以容易地识别出车辆的故障。
图7为示出根据本公开的实施例的控制用于残疾人的通信系统的方法的流程图。如图7所示,根据本公开的实施例的控制用于残疾人的通信系统的方法可以包括:通过动作捕捉单元或终端识别车辆中的乘客的手语或者通过输入单元或终端从车辆中的乘客接收语音或字符;通过控制单元基于数据库中的信息翻译由动作捕捉单元或终端识别和发送的手语并将输入单元或终端输入和发送的语音转换为字符;以及通过车辆的输出单元或终端将翻译后的手语输出为语音或字符并将转换后的语音输出为字符。
这些步骤中的详细技术特征与包括用于上述残疾人的通信系统的车辆的技术特征相同,因此不再详细描述。
虽然已经结合目前被认为是示例性实施例的内容描述了本公开的内容,但是应当理解,本公开不限于所公开的实施例,而是相反,旨在涵盖包括在所附权利要求的精神和范围内的各种修改和等同布置。
Claims (12)
1.一种包括用于残疾人的通信系统的车辆,所述车辆包括:
动作捕捉单元,识别所述车辆的乘客的手语;
输入单元,接收来自乘客的语音或字符;
数据库,存储手语信息;
控制单元,通信地耦接到所述动作捕捉单元和所述输入单元,所述控制单元被配置为,使用存储在所述数据库中的所述手语信息翻译由所述动作捕捉单元识别的手语,并将通过所述输入单元接收到的语音转换为字符;以及
输出单元,通信地耦接到所述控制单元,所述输出单元被配置为,将由所述控制单元翻译的手语输出为语音或字符,并将由所述控制单元转换的语音输出为字符。
2.根据权利要求1所述的包括用于残疾人的通信系统的车辆,所述车辆还包括终端,所述终端包括识别乘客的手语的终端动作捕捉单元、从乘客接收语音或字符的终端输入单元、以及输出语音或字符的终端输出单元。
3.根据权利要求2所述的包括用于残疾人的通信系统的车辆,其中,所述终端为乘客的移动终端,并且所述终端通信地耦接到所述控制单元。
4.根据权利要求3所述的包括用于残疾人的通信系统的车辆,其中,所述控制单元使用存储在所述数据库中的所述手语信息来翻译由所述终端识别的手语,并将通过所述终端输入的语音转换为字符。
5.根据权利要求4所述的包括用于残疾人的通信系统的车辆,其中,所述控制单元通过所述输出单元将由所述终端识别和翻译的手语输出为语音或字符。
6.根据权利要求4所述的包括用于残疾人的通信系统的车辆,所述车辆还包括多个终端,
其中,所述控制单元控制所述输出单元,以便将由所述多个终端中的一个终端识别和翻译的手语输出为语音或字符。
7.根据权利要求4所述的包括用于残疾人的通信系统的车辆,其中,所述控制单元控制所述终端,以便将通过所述输入单元输入的语音或字符输出为字符。
8.根据权利要求4所述的包括用于残疾人的通信系统的车辆,所述车辆还包括多个终端,
其中,所述控制单元控制所述输出单元,以便将由所述多个终端中的一个终端识别和转换的语音输出为语音或字符。
9.根据权利要求3所述的包括用于残疾人的通信系统的车辆,所述车辆还包括多个终端,
其中,所述控制单元与所述多个终端中的一个或多个特定终端进行通信。
10.根据权利要求1所述的包括用于残疾人的通信系统的车辆,所述车辆还包括故障感测单元,所述故障感测单元感测所述车辆中是否存在故障。
11.根据权利要求10所述的包括用于残疾人的通信系统的车辆,其中,当所述故障感测单元感测到故障时,所述控制单元控制所述输出单元以便可视地输出故障的信息。
12.一种控制用于车辆中的残疾人的通信系统的方法,所述方法包括:
通过所述车辆的动作捕捉单元或乘客的移动终端识别所述车辆的乘客的手语;
通过所述车辆的输入单元或所述移动终端接收来自乘客的语音或字符;
通过所述车辆的控制单元使用存储在数据库中的手语信息来翻译手语;
通过所述控制单元将接收到的语音转换为字符;
通过所述车辆的输出单元或所述移动终端将翻译后的手语输出为语音或字符;以及
通过所述输出单元或所述移动终端将转换后的语音输出为字符。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180044633A KR102554934B1 (ko) | 2018-04-17 | 2018-04-17 | 장애인을 위한 커뮤니케이션 시스템이 구비된 차량 및 장애인을 위한 커뮤니케이션 시스템 제어방법 |
KR10-2018-0044633 | 2018-04-17 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110390239A true CN110390239A (zh) | 2019-10-29 |
Family
ID=68161326
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811293339.XA Pending CN110390239A (zh) | 2018-04-17 | 2018-11-01 | 包括用于残疾人的通信系统的车辆及通信系统的控制方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10926635B2 (zh) |
KR (1) | KR102554934B1 (zh) |
CN (1) | CN110390239A (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102019204054A1 (de) * | 2019-03-25 | 2020-10-01 | Volkswagen Aktiengesellschaft | Verfahren zur Bereitstellung eines Sprachdialogs in Gebärdensprache bei einem Sprachdialog-System für ein Fahrzeug |
US11507758B2 (en) * | 2019-10-30 | 2022-11-22 | Ford Global Technologies, Llc | Vehicle-based sign language communication systems and methods |
US11475873B2 (en) * | 2020-07-01 | 2022-10-18 | International Business Machines Corporation | Translating inputs for voice communication |
KR102460553B1 (ko) * | 2021-12-16 | 2022-10-31 | 주식회사 디블렌트 | 차량 내 신경망을 이용한 수어 응답 제공 방법, 장치 및 컴퓨터 프로그램 |
US11501091B2 (en) * | 2021-12-24 | 2022-11-15 | Sandeep Dhawan | Real-time speech-to-speech generation (RSSG) and sign language conversion apparatus, method and a system therefore |
US11914914B2 (en) * | 2022-04-29 | 2024-02-27 | Ford Global Technologies, Llc | Vehicle interface control |
Citations (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09319297A (ja) * | 1996-05-29 | 1997-12-12 | Hitachi Ltd | 音声筆談器 |
JP2004274258A (ja) * | 2003-03-06 | 2004-09-30 | Takada Informex Co Ltd | 多地点同時コミュニケーションシステム |
US20060074624A1 (en) * | 2002-09-17 | 2006-04-06 | Nozomu Sahashi | Sign language video presentation device , sign language video i/o device , and sign language interpretation system |
US7181407B1 (en) * | 2000-11-06 | 2007-02-20 | International Business Machines Corporation | Network of portable, wireless communication devices |
KR20080004756A (ko) * | 2006-07-06 | 2008-01-10 | 주식회사 한국스테노 | 청각장애 및 난청인용 상황별 인식장치 |
CN101527092A (zh) * | 2009-04-08 | 2009-09-09 | 西安理工大学 | 特定会话场景下的计算机辅助手语交流方法 |
CN101594434A (zh) * | 2009-06-16 | 2009-12-02 | 中兴通讯股份有限公司 | 移动终端的手语处理方法和手语处理移动终端 |
CN101605158A (zh) * | 2008-06-13 | 2009-12-16 | 鸿富锦精密工业(深圳)有限公司 | 聋哑人专用手机 |
KR20100026701A (ko) * | 2008-09-01 | 2010-03-10 | 한국산업기술대학교산학협력단 | 수화 번역기 및 그 방법 |
CN102333387A (zh) * | 2011-06-17 | 2012-01-25 | 华南理工大学 | 基于盲文编码和振动感知的听力障碍者通信方法及装置 |
CN102509494A (zh) * | 2011-11-21 | 2012-06-20 | 天津三星光电子有限公司 | 一种手语图像输出装置 |
US20140171036A1 (en) * | 2009-11-18 | 2014-06-19 | Gwendolyn Simmons | Method of communication |
CN203819120U (zh) * | 2013-11-19 | 2014-09-10 | 浙江吉利汽车研究院有限公司 | 一种聋哑人乘车辅助装置 |
CN104361787A (zh) * | 2014-11-10 | 2015-02-18 | 西安酷派软件科技有限公司 | 信号转换系统和信号转换方法 |
US20150121215A1 (en) * | 2013-10-29 | 2015-04-30 | At&T Intellectual Property I, Lp | Method and system for managing multimedia accessiblity |
CN204334711U (zh) * | 2015-01-08 | 2015-05-13 | 江苏三棱科技发展有限公司 | 一种基于zigbee的盲聋哑人使用的手机系统 |
CN105489088A (zh) * | 2016-01-13 | 2016-04-13 | 宋纪元 | 一种语音仿生手语双向翻译系统 |
CN105957514A (zh) * | 2016-07-11 | 2016-09-21 | 吉林宇恒光电仪器有限责任公司 | 一种便携式聋哑人交流设备 |
KR20160125024A (ko) * | 2015-04-21 | 2016-10-31 | 손석영 | 청각장애인용 차량 안전보조 시스템 |
KR101723423B1 (ko) * | 2016-01-05 | 2017-04-05 | 주식회사 수현테크 | 스마트 귀마개 및 이를 이용한 알림 메시지 전달 시스템 |
CN106570473A (zh) * | 2016-11-03 | 2017-04-19 | 深圳量旌科技有限公司 | 基于机器人的聋哑人手语识别交互系统 |
KR20170082113A (ko) * | 2016-01-05 | 2017-07-13 | 주식회사 수현테크 | 스마트 귀마개 |
US20170236450A1 (en) * | 2016-02-11 | 2017-08-17 | Electronics And Telecommunications Research Institute | Apparatus for bi-directional sign language/speech translation in real time and method |
CN206909897U (zh) * | 2017-05-27 | 2018-01-23 | 韦婷舒 | 一种聋哑人专用的智能手环 |
CN107785017A (zh) * | 2016-08-24 | 2018-03-09 | 南京乐朋电子科技有限公司 | 一种基于手语识别的交互系统 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003141547A (ja) * | 2001-10-31 | 2003-05-16 | Matsushita Electric Ind Co Ltd | 手話翻訳装置および手話翻訳方法 |
US8577593B2 (en) * | 2005-08-18 | 2013-11-05 | General Motors Llc | Navigation system for hearing-impaired operators |
US8345827B2 (en) * | 2006-12-18 | 2013-01-01 | Joshua Elan Liebermann | Sign language public addressing and emergency system |
US8848970B2 (en) * | 2011-04-26 | 2014-09-30 | Digimarc Corporation | Salient point-based arrangements |
KR102129536B1 (ko) * | 2013-08-06 | 2020-07-03 | 삼성전자주식회사 | 모바일 단말기 및 그의 제어 방법 |
US9905061B2 (en) * | 2013-11-25 | 2018-02-27 | Honda Motor Co., Ltd. | Vehicle state monitoring system, and portable terminal device |
WO2017200553A1 (en) * | 2016-05-20 | 2017-11-23 | Ford Global Technologies, Llc | Sign language inputs to a vehicle user interface |
-
2018
- 2018-04-17 KR KR1020180044633A patent/KR102554934B1/ko active IP Right Grant
- 2018-10-09 US US16/155,294 patent/US10926635B2/en active Active
- 2018-11-01 CN CN201811293339.XA patent/CN110390239A/zh active Pending
Patent Citations (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09319297A (ja) * | 1996-05-29 | 1997-12-12 | Hitachi Ltd | 音声筆談器 |
US7181407B1 (en) * | 2000-11-06 | 2007-02-20 | International Business Machines Corporation | Network of portable, wireless communication devices |
US20060074624A1 (en) * | 2002-09-17 | 2006-04-06 | Nozomu Sahashi | Sign language video presentation device , sign language video i/o device , and sign language interpretation system |
JP2004274258A (ja) * | 2003-03-06 | 2004-09-30 | Takada Informex Co Ltd | 多地点同時コミュニケーションシステム |
KR20080004756A (ko) * | 2006-07-06 | 2008-01-10 | 주식회사 한국스테노 | 청각장애 및 난청인용 상황별 인식장치 |
CN101605158A (zh) * | 2008-06-13 | 2009-12-16 | 鸿富锦精密工业(深圳)有限公司 | 聋哑人专用手机 |
KR20100026701A (ko) * | 2008-09-01 | 2010-03-10 | 한국산업기술대학교산학협력단 | 수화 번역기 및 그 방법 |
CN101527092A (zh) * | 2009-04-08 | 2009-09-09 | 西安理工大学 | 特定会话场景下的计算机辅助手语交流方法 |
CN101594434A (zh) * | 2009-06-16 | 2009-12-02 | 中兴通讯股份有限公司 | 移动终端的手语处理方法和手语处理移动终端 |
US20140171036A1 (en) * | 2009-11-18 | 2014-06-19 | Gwendolyn Simmons | Method of communication |
CN102333387A (zh) * | 2011-06-17 | 2012-01-25 | 华南理工大学 | 基于盲文编码和振动感知的听力障碍者通信方法及装置 |
CN102509494A (zh) * | 2011-11-21 | 2012-06-20 | 天津三星光电子有限公司 | 一种手语图像输出装置 |
US20150121215A1 (en) * | 2013-10-29 | 2015-04-30 | At&T Intellectual Property I, Lp | Method and system for managing multimedia accessiblity |
CN203819120U (zh) * | 2013-11-19 | 2014-09-10 | 浙江吉利汽车研究院有限公司 | 一种聋哑人乘车辅助装置 |
CN104361787A (zh) * | 2014-11-10 | 2015-02-18 | 西安酷派软件科技有限公司 | 信号转换系统和信号转换方法 |
CN204334711U (zh) * | 2015-01-08 | 2015-05-13 | 江苏三棱科技发展有限公司 | 一种基于zigbee的盲聋哑人使用的手机系统 |
KR20160125024A (ko) * | 2015-04-21 | 2016-10-31 | 손석영 | 청각장애인용 차량 안전보조 시스템 |
KR101723423B1 (ko) * | 2016-01-05 | 2017-04-05 | 주식회사 수현테크 | 스마트 귀마개 및 이를 이용한 알림 메시지 전달 시스템 |
KR20170082113A (ko) * | 2016-01-05 | 2017-07-13 | 주식회사 수현테크 | 스마트 귀마개 |
CN105489088A (zh) * | 2016-01-13 | 2016-04-13 | 宋纪元 | 一种语音仿生手语双向翻译系统 |
US20170236450A1 (en) * | 2016-02-11 | 2017-08-17 | Electronics And Telecommunications Research Institute | Apparatus for bi-directional sign language/speech translation in real time and method |
CN105957514A (zh) * | 2016-07-11 | 2016-09-21 | 吉林宇恒光电仪器有限责任公司 | 一种便携式聋哑人交流设备 |
CN107785017A (zh) * | 2016-08-24 | 2018-03-09 | 南京乐朋电子科技有限公司 | 一种基于手语识别的交互系统 |
CN106570473A (zh) * | 2016-11-03 | 2017-04-19 | 深圳量旌科技有限公司 | 基于机器人的聋哑人手语识别交互系统 |
CN206909897U (zh) * | 2017-05-27 | 2018-01-23 | 韦婷舒 | 一种聋哑人专用的智能手环 |
Also Published As
Publication number | Publication date |
---|---|
KR20190121102A (ko) | 2019-10-25 |
US20190315227A1 (en) | 2019-10-17 |
KR102554934B1 (ko) | 2023-07-12 |
US10926635B2 (en) | 2021-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110390239A (zh) | 包括用于残疾人的通信系统的车辆及通信系统的控制方法 | |
US9679557B2 (en) | Computer-implemented method for automatic training of a dialogue system, and dialogue system for generating semantic annotations | |
US11289074B2 (en) | Artificial intelligence apparatus for performing speech recognition and method thereof | |
WO2020247018A1 (en) | Systems and methods for virtual assistant routing | |
KR20180102871A (ko) | 이동단말기 및 이동단말기의 차량 제어 방법 | |
JP2006154926A (ja) | キャラクタ表示を利用した電子機器操作システム及び電子機器 | |
CN108242236A (zh) | 对话处理装置及其车辆和对话处理方法 | |
WO2013090868A1 (en) | Interacting with a mobile device within a vehicle using gestures | |
CN102039898A (zh) | 情绪咨询系统 | |
CN105989841A (zh) | 车载语音控制方法及装置 | |
CN104620257A (zh) | 基于深度的语境识别 | |
CN111092988A (zh) | 控制装置、智能体装置以及计算机可读存储介质 | |
US11682388B2 (en) | Artificial intelligence apparatus for recognizing speech including multiple languages, and method for the same | |
CN104786911A (zh) | 一种基于语音控制的车载表情显示系统及方法 | |
US11270700B2 (en) | Artificial intelligence device and method for recognizing speech with multiple languages | |
US20200320997A1 (en) | Agent apparatus, agent apparatus control method, and storage medium | |
CN111192583B (zh) | 控制装置、智能体装置以及计算机可读存储介质 | |
US20220180666A1 (en) | Method to Provide a Speech Dialog in Sign Language in a Speech Dialog System for a Vehicle | |
CN107818783A (zh) | 一种基于声纹技术的人机多模态车载安全性交互的方法及装置 | |
CN114550713A (zh) | 对话系统、车辆以及对话系统的控制方法 | |
US11518398B2 (en) | Agent system, agent server, method of controlling agent server, and storage medium | |
CN103747376A (zh) | 语控蓝牙耳机、汽车定位及智能语音服务平台和实现方法 | |
KR102371513B1 (ko) | 대화 시스템 및 대화 처리 방법 | |
US20200178073A1 (en) | Vehicle virtual assistance systems and methods for processing and delivering a message to a recipient based on a private content of the message | |
US11518399B2 (en) | Agent device, agent system, method for controlling agent device, and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |