KR101086605B1 - Many languages voice recognition elevator and method for controlling the same - Google Patents

Many languages voice recognition elevator and method for controlling the same Download PDF

Info

Publication number
KR101086605B1
KR101086605B1 KR1020100047468A KR20100047468A KR101086605B1 KR 101086605 B1 KR101086605 B1 KR 101086605B1 KR 1020100047468 A KR1020100047468 A KR 1020100047468A KR 20100047468 A KR20100047468 A KR 20100047468A KR 101086605 B1 KR101086605 B1 KR 101086605B1
Authority
KR
South Korea
Prior art keywords
elevator
voice
information
multilingual
unit
Prior art date
Application number
KR1020100047468A
Other languages
Korean (ko)
Inventor
유재혁
Original Assignee
유재혁
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 유재혁 filed Critical 유재혁
Priority to KR1020100047468A priority Critical patent/KR101086605B1/en
Application granted granted Critical
Publication of KR101086605B1 publication Critical patent/KR101086605B1/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00—Control systems of elevators in general
    • B66B1/24—Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration
    • B66B1/28—Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration electrical
    • B66B1/30—Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration electrical effective on driving gear, e.g. acting on power electronics, on inverter or rectifier controlled motor
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B2201/00—Aspects of control systems of elevators
    • B66B2201/40—Details of the change of control mode
    • B66B2201/46—Switches or switchgear
    • B66B2201/4607—Call registering systems
    • B66B2201/4638—Wherein the call is registered without making physical contact with the elevator system
    • B66B2201/4646—Wherein the call is registered without making physical contact with the elevator system using voice recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Indicating And Signalling Devices For Elevators (AREA)
  • Elevator Control (AREA)

Abstract

PURPOSE: A multi-lingual voice recognition elevator and a control method thereof are provided to improve the convenience of foreigners using an elevator through recognition of various languages. CONSTITUTION: A multi-lingual voice recognition elevator comprises a plurality of sensors(110), a controller(140), a multi-lingual voice recognition part(120), a voice output part(150), and an operation control part(160). The sensors are installed inside an elevator hall and an elevator car and detect a passenger getting on the elevator car. The controller outputs a multi-lingual voice guide signal for voice recognition if a passenger is detected by the sensors and outputs a recognition resultant signal on the passenger's voice and an elevator operation control signal. The multi-lingual voice recognition part compares the passenger's voice with preset multi-lingual voice information, determines the corresponding country, extracts keywords from the voice to recognize information on a desired floor, and outputs an elevator operation control signal based on information about the recognized floor to the controller and a voice signal in the language of the corresponding country.

Description

다국어 음성 인식 엘리베이터 및 이의 제어 방법 {MANY LANGUAGES VOICE RECOGNITION ELEVATOR AND METHOD FOR CONTROLLING THE SAME} Multilingual Speech Recognition Elevator and its Control Method {MANY LANGUAGES VOICE RECOGNITION ELEVATOR AND METHOD FOR CONTROLLING THE SAME}

본 발명은 엘리베이터에 관한 발명으로서, 더욱 상세하게는 다양한 언어를 사용하는 사용자들로부터 입력되는 엘리베이터의 운행 층에 대한 정보를 음성 인식하여 엘리베이터가 동작되도록 하는 다국어 음성 인식 엘리베이터와 이의 제어 방법에 관한 것이다.
The present invention relates to an elevator, and more particularly, to a multilingual voice recognition elevator and a control method thereof, in which an elevator is operated by voice recognition of information on an operating floor of an elevator input from users who use various languages. .

일반적으로, 엘리베이터는 다층으로 된 건축물의 층마다 구성되는 홀에 엘리베이터의 위치를 표시하는 표시창과 엘리베이터를 호출하는 홀 부름 버튼이 마련되며 엘리베이터의 내부에는 운행할 층수를 지정하기 위한 층 선택 버튼이 구비되어 있다. In general, an elevator is provided with a display window for indicating the location of the elevator and a hall call button for calling the elevator in halls formed on each floor of a multi-story building, and a floor selection button for designating the number of floors to operate in the elevator. It is.

도 1은 일반적인 엘리베이터의 구성을 나타낸 사시도로서, 도 1에 도시된 바와 같이, 엘리베이터(10)는 건물의 일측에 탑승자가 상기 엘리베이터(10)에 탑승하거나 또는 하차할 수 있도록 대기하는 엘리베이터 홀(11)이 마련되어 있고, 상기 엘리베이터 홀(11)에는 사각형상의 엘리베이터 탑승부(20)가 엘리베이터 도어(21)를 사이에 두고 배치된다.1 is a perspective view showing the configuration of a general elevator, as shown in Figure 1, the elevator 10 is an elevator hall 11 waiting for the occupant to get on or off the elevator 10 on one side of the building Is provided, and a rectangular elevator boarding portion 20 is disposed in the elevator hall 11 with the elevator door 21 interposed therebetween.

상기 엘리베이터 홀(11)의 일측에는 상기 엘리베이터(10)를 호출하기 위한 홀 부름 버튼(22)이 설치되고, 상기 탑승부(20)의 내측에는 엘리베이터의 운행을 제어하기 위한 제어 패널(23)이 다수의 층 선택 버튼(24)과 함께 설치된다.One side of the elevator hall 11 is provided with a hall call button 22 for calling the elevator 10, and a control panel 23 for controlling the operation of the elevator inside the boarding unit 20. Installed with multiple floor selection buttons 24.

따라서, 엘리베이터의 탑승을 원하는 승객은 상기 홀 부름 버튼(22)을 눌러 엘리베이터(10)를 호출하고, 호출된 엘리베이터(10)에 탑승한 승객은 엘리베이터 내부의 층 선택 버튼(24)을 눌러 자신이 원하는 층을 지정하여 해당 층으로 이동할 수 있다.Therefore, the passenger who wants to board the elevator calls the elevator 10 by pressing the hall call button 22, and the passenger who boards the called elevator 10 presses the floor selection button 24 inside the elevator to You can move to that floor by specifying the desired floor.

그러나, 종래의 엘리베이터(10)는 사람이 많이 탑승한 경우 엘리베이터 내부에서 층 선택 버튼(24)을 누르기가 매우 불편하였다. 이러한 문제점을 해결하기 위하여 대형 엘리베이터인 경우 이동하고자 하는 층의 선택을 위한 버튼이 엘리베이터 내부에 2 세트가 구비되어 있는 경우도 있다.However, the conventional elevator 10 is very inconvenient to press the floor selection button 24 in the elevator when a lot of people boarded. In order to solve this problem, in the case of a large elevator, two sets of buttons may be provided inside the elevator for selecting a floor to be moved.

한편, 병원, 공항, 터미널 등과 같이 많은 인원이 사용하는 엘리베이터인 경우 많은 사람이 버튼을 누르기 때문에 층수 입력버튼에는 많은 병원균, 세균 등이 묻어 있어서, 공중 위생상 좋지 않으며, 항상 청결을 유지하기 위해 청소와 관리가 정기적으로 이루어져야만 했다.On the other hand, in the case of elevators used by a large number of people, such as hospitals, airports, terminals, etc., many people press the button, so the floor input button contains many pathogens and germs. And management had to be done regularly.

또한, 앞을 볼 수 없는 장애인은 이동하고자 하는 층의 선택을 위해 홀 부름 버튼이나 층 선택 버튼에 구비된 점자를 찾기 위해 버튼을 더듬어야 하는 불편함이 있었고, 버튼을 더듬다가 잘못된 층을 눌러 선택하게 되는 문제점이 있다.In addition, the handicapped person who cannot see in front has the inconvenience of having to flick the button to find the braille provided in the hall call button or the floor selection button to select the floor to move to, and then press the wrong floor to select the floor. There is a problem.

또한, 최근에는 국내를 찾는 외국인의 증가로 공항이나, 호텔, 터미널, 기차역, 쇼핑센터 등에서 한국어 이외의 다른 나라 언어의 사용이 증가하고 있는 실정이고, 만원이 상태의 엘리베이터에 외국인이 동승할 경우 언어의 소통 불량으로 인한 잘못된 층 선택이 이루어지는 문제점이 있다.In recent years, the use of languages other than Korean has been increasing at airports, hotels, terminals, train stations, shopping centers, etc. due to an increase in the number of foreigners visiting Korea. There is a problem that the wrong floor selection is made due to poor communication.

또한, 2010년 3월 31일 출입국관리소의 통계에 의하면 국내에는 미국인, 영국인 일본인, 중국인 등 약 197만명의 외국인이 거주하고 있어 이들을 위한 다국어 음성 인식 제어 엘리베이터가 필요하게 되었다.
In addition, according to the statistics of the immigration office on March 31, 2010, about 1.97 million foreigners, including Americans, British, Japanese, and Chinese, live in Korea, and multilingual voice recognition control elevators are needed for them.

이러한 문제점을 해결하기 위하여, 본 발명은 다양한 언어를 사용하는 사용자들로부터 입력되는 엘리베이터의 운행 층에 대한 정보를 음성 인식하여 엘리베이터가 동작하도록 제어하는 다국어 음성인식 엘리베이터와 이의 제어 방법을 제공하는 것을 목적으로 한다.
In order to solve this problem, it is an object of the present invention to provide a multilingual voice recognition elevator and a control method thereof for controlling the elevator operation by voice recognition of information on the floor of the elevator input from users using various languages. It is done.

상기한 목적을 달성하기 위하여 본 발명은 엘리베이터를 탑승하기 위한 홀과 상기 엘리베이터의 내부에 설치되어 엘리베이터 탑승자를 검출하는 복수의 센서부; 상기 복수의 센서부 중 적어도 어느 하나로부터 탑승자가 검출되면 음성 인식을 위한 다국어 음성 안내 신호가 출력되도록 하고, 상기 탑승자로부터 발화(發話)된 음성의 인식 결과 신호와 엘리베이터의 운행 제어 신호를 출력하는 제어부; 상기 탑승자로부터 발화된 음성과 미리 설정된 다국어 음성 정보를 대비하여 해당국의 언어를 판단하고, 상기 음성으로부터 핵심어를 검출하여 운행층의 정보를 인식하며, 상기 제어부로 상기 인식된 운행층 정보에 기초한 엘리베이터의 운행 제어 신호와 상기 판단된 해당국의 언어로 상기 인식 결과의 음성 신호를 출력하는 다국어 음성 인식부; 상기 엘리베이터 홀과 엘리베이터 내부에 설치되어 상기 제어부로부터 출력되는 다국어 음성 안내 신호와 상기 인식의 결과를 출력하는 음성 출력부; 및 상기 제어부로부터 출력되는 운행 제어 신호에 따라 엘리베이터의 운행을 제어하는 엘리베이터 운행 제어부를 포함한다.In order to achieve the above object, the present invention provides a hall for boarding an elevator and a plurality of sensor units installed inside the elevator to detect an elevator occupant; A controller for outputting a multilingual voice guidance signal for voice recognition when a passenger is detected from at least one of the plurality of sensor units, and outputting a recognition result signal of a voice uttered from the passenger and an operation control signal of an elevator. ; The language of the corresponding country is determined by comparing the voice spoken by the occupant with the preset multilingual voice information, the key word is detected from the voice to recognize the information on the driving floor, and the elevator based on the recognized driving floor information by the controller. A multilingual voice recognition unit for outputting a voice signal of the recognition result in a driving control signal of the determined language of the corresponding station; A voice output unit installed in the elevator hall and the elevator and outputting a multilingual voice guide signal output from the controller and a result of the recognition; And an elevator operation control unit controlling the operation of the elevator according to the operation control signal output from the control unit.

또한, 본 발명에 따른 상기 다국어 음성 인식부는 상기 탑승자의 음성을 검출하여 녹취하고, 상기 녹취된 음성의 노이즈 제거 및 필터링을 수행한 음성 정보를 출력하는 음성 입력부; 상기 음성 입력부로부터 출력되는 음성의 단어, 음소(音素)를 검출하여 음성 주파수를 고주파 및 저주파 대역으로 필터링하며 핵심 주파수를 검출 및 분석하여 증폭한 음성 정보의 특징을 검출하고, 상기 검출된 음성 정보의 특징을 다국어 음성 정보와 대비하여 어느 나라의 언어인지 판단과 엘리베이터의 운행에 필요한 운행 정보인 핵심어를 검출하는 다국어 음성 인식 제어부; 및 상기 엘리베이터의 운행에 필요한 명령어의 판독과, 상기 엘리베이터의 운행에 필요한 각 나라의 음성 정보가 저장되고, 상기 저장된 정보들을 상기 다국어 음성 인식 제어부로 제공하는 다국어 음성 정보 DB를 포함하는 것을 특징으로 한다.The multilingual speech recognition unit may further include: a voice input unit configured to detect and record a voice of the occupant, and output voice information through noise removal and filtering of the recorded voice; Detects words and phonemes of voice output from the voice input unit, filters voice frequencies into high and low frequency bands, detects and analyzes key frequencies, and detects amplified features of voice information. A multilingual speech recognition controller for determining a language of the country by comparing the feature with multilingual speech information and detecting a key word which is driving information necessary for operation of an elevator; And a multilingual voice information DB that reads commands required for driving the elevator and stores voice information of each country required for driving the elevator, and provides the stored information to the multilingual voice recognition controller. .

또한, 본 발명에 따른 상기 다국어 음성 인식 제어부는 반음소(anti-phoneme)에 의한 비인식단어 및 음소 제거를 통해 탑승자의 발화 검증을 수행하는 것을 특징으로 한다.In addition, the multilingual speech recognition control unit according to the present invention is characterized in that the utterance verification of the occupant is performed by removing the non-recognized word and the phoneme by the anti-phoneme.

또한, 본 발명은 상기 엘리베이터 홀과 상기 엘리베이터의 내부에 설치되어 상기 탑승자로부터 엘리베이터의 호출 신호 및 운행 제어 신호를 검출하는 다수의 버튼부; 및 상기 버튼부에 의해 상기 호출 신호 및 운행 제어 신호가 입력되었는지 여부를 표시하는 표시부를 더 포함하고, 상기 제어부는 상기 버튼부로 상기 호출 신호 및 운행 제어 신호가 검출되면, 해당 버튼부의 표시부로 표시 신호를 출력하고, 상기 다국어 음성 인식부 및 버튼부 중 적어도 어느 하나로부터 입력되는 운행 제어 신호에 따라 상기 엘리베이터의 운행을 제어하는 것을 특징으로 한다.In addition, the present invention provides a plurality of button units installed in the elevator hall and the elevator to detect a call signal and a driving control signal of the elevator from the occupant; And a display unit which displays whether the call signal and the driving control signal are input by the button unit, and the control unit displays a display signal to the display unit of the corresponding button unit when the call signal and the driving control signal are detected by the button unit. It outputs, and characterized in that for controlling the operation of the elevator according to the driving control signal input from at least one of the multilingual speech recognition unit and the button unit.

또한, 본 발명은 다국어 음성 인식을 이용한 엘리베이터의 제어 방법으로서, (a) 센서부가 엘리베이터 홀 및 엘리베이터 내부 중 적어도 어느 하나에서 탑승자를 감지하면, 제어부가 엘리베이터 홀 또는 엘리베이터 내부로 음성 인식을 위한 다국어 음성 안내 신호를 출력하는 단계; (b) 다국어 음성 인식부는 상기 탑승자로부터 음성이 발화(發話)된 경우 상기 발화된 음성과 다국어 음성 정보 DB에 저장된 다국어 음성 정보를 대비하여 해당국의 언어를 판단하고, 상기 음성으로부터 핵심어를 검출하여 운행 층의 정보를 인식하며, 상기 제어부로 상기 인식된 운행층 정보에 기초한 엘리베이터의 운행 제어 신호와 상기 판단된 해당국의 언어로 상기 인식 결과의 음성 신호를 출력하는 단계; 및 (c) 상기 제어부는 상기 다국어 음성 인식부로부터 인식된 결과의 음성 신호를 상기 엘리베이터 홀 및 엘리베이터 내부로 출력하며, 상기 인식의 결과로 운행층 정보가 결정되면 엘리베이터가 운행되도록 상기 운행층 정보에 기초하여 엘리베이터의 운행 제어 신호를 엘리베이터 운행 제어부로 출력하는 단계를 포함한다.In addition, the present invention is a control method of an elevator using multilingual voice recognition, (a) when the sensor detects a passenger in at least one of the elevator hall and the interior of the elevator, the control unit multilingual voice for voice recognition into the elevator hall or the elevator interior Outputting a guide signal; (b) The multilingual speech recognition unit determines the language of the corresponding country by comparing the spoken voice with the multilingual voice information stored in the multilingual voice information DB when a voice is uttered from the passenger, and detects a key word from the voice. Recognizing information on a driving floor and outputting, by the control unit, a driving control signal of the elevator based on the recognized driving floor information and a voice signal of the recognition result in the determined language of the corresponding station; And (c) the control unit outputs a voice signal of the result recognized by the multilingual speech recognition unit to the elevator hall and the elevator, and if the floor information is determined as the result of the recognition, the elevator operates to the floor information. And outputting a driving control signal of the elevator to the elevator driving controller.

또한, 본 발명의 상기 (b) 단계는 반음소에 의한 비인식단어 및 음소 제거를 통해 탑승자의 발화를 검증하는 단계를 더 포함하는 것을 특징으로 한다.In addition, the step (b) of the present invention is characterized in that it further comprises the step of verifying the utterance of the occupant through the non-recognized word and phoneme removal by the semi-phoneme.

또한, 본 발명의 (b-1) 상기 (b) 단계는 음성 입력부를 통해 검출되는 상기 탑승자의 음성을 검출하여 녹취하고, 상기 녹취된 음성의 노이즈 제거 및 필터링을 수행한 음성 정보로부터 단어 및 음소를 검출하는 단계; 및 (b-2) 상기 검출된 단어 및 음소와 다국어 음성 정보 DB에 저장된 다국어 음성 정보와 대비하고, 상기 단어 및 음소로부터 음성 주파수를 고주파 및 저주파 대역으로 필터링하여 핵심 주파수를 검출 및 분석하여 증폭한 음성 정보의 특징을 탐색하여 어느 나라의 언어인지 판단하며, 상기 판단된 결과와 탐색된 음성 정보의 특징들로부터 엘리베이터의 운행에 필요한 운행 정보인 핵심어를 검출하는 단계를 포함하는 것을 특징으로 한다.Also, in the step (b-1), the step (b) of the present invention detects and records the voice of the passenger detected through the voice input unit, and removes the words and phonemes from the voice information from which the noise of the recorded voice is removed and filtered. Detecting; And (b-2) contrasting the detected words and phonemes with multilingual voice information stored in a multilingual voice information DB, filtering voice frequencies from the words and phonemes into high and low frequency bands to detect, analyze and amplify core frequencies. Searching for the features of the voice information to determine the language of which country, characterized in that it comprises the step of detecting a key word that is the driving information necessary for the operation of the elevator from the determined results and the features of the searched voice information.

또한, 본 발명에 따른 상기 (b) 단계는 상기 탑승자의 발화 없이 버튼부를 통해 상기 엘리베이터의 운행 정보가 검출되면, 상기 제어부는 상기 검출된 운행 정보에 기초하여 엘리베이터가 운행되도록 상기 엘리베이터 운행 제어 신호를 출력하는 단계를 포함하는 것을 특징으로 한다.
In addition, in the step (b) according to the present invention, when the operation information of the elevator is detected through the button unit without the ignition of the occupant, the controller may control the elevator operation control signal to operate the elevator based on the detected operation information. It characterized in that it comprises a step of outputting.

본 발명은 다양한 국가의 언어에 대한 음성 인식이 가능하여 외국인의 엘리베이터 사용 편의성을 향상시킬 수 있는 장점이 있다.The present invention has the advantage that it is possible to improve the ease of use of elevators of foreigners by speech recognition for languages of various countries.

또한, 본 발명은 엘리베이터 홀이나 엘리베이터 내부에서 엘리베이터의 운행을 제어할 경우 탑승자가 별도의 버튼을 누르지 않고 엘리베이터를 사용할 수 있는 장점이 있다.In addition, the present invention has the advantage that the passenger can use the elevator without pressing a separate button when controlling the operation of the elevator in the elevator hall or inside the elevator.

또한, 본 발명은 음성 인식에 의한 엘리베이터 운행 제어가 가능하여 시각 장애인, 어린이, 노약자 등도 쉽게 엘리베이터를 사용할 수 있는 장점이 있다.In addition, the present invention has the advantage that it is possible to control the operation of the elevator by voice recognition so that the visually impaired, children, the elderly and the like can easily use the elevator.

또한, 본 발명은 다양한 국가의 언어를 인식하여 엘리베이터의 운행 제어가 가능하므로 해외에서도 사용할 수 있는 장점이 있다.
In addition, the present invention has the advantage that can be used abroad because it is possible to control the operation of the elevator to recognize the language of various countries.

도 1 은 일반적인 엘리베이터의 구성을 나타낸 사시도.
도 2 는 본 발명에 따른 다국어 음성 인식 엘리베이터의 구성을 나타낸 블록도.
도 3 은 도 2의 다국어 음성 인식부 구성을 나타낸 블록도.
도 4 는 본 발명에 따른 다국어 음성 인식 엘리베이터의 배치를 나타낸 블록도.
도 5 는 본 발명에 따른 다국어 음성 인식 엘리베이터의 동작 과정을 나타낸 흐름도.
도 6 은 도 5에 따른 다국어 음성 인식부의 동작 과정을 나타낸 흐름도.1 is a perspective view showing the configuration of a general elevator.
Figure 2 is a block diagram showing the configuration of a multilingual speech recognition elevator according to the present invention.
FIG. 3 is a block diagram illustrating a configuration of a multilingual speech recognition unit of FIG. 2.
4 is a block diagram showing an arrangement of a multilingual speech recognition elevator in accordance with the present invention.
5 is a flow chart showing the operation of the multilingual speech recognition elevator according to the present invention.
6 is a flowchart illustrating an operation process of a multilingual speech recognition unit according to FIG. 5.

이하, 첨부된 도면을 참조하여 본 발명에 따른 다국어 음성 인식 엘리베이터의 바람직한 실시예를 상세하게 설명한다.Hereinafter, exemplary embodiments of a multilingual speech recognition elevator according to the present invention will be described in detail with reference to the accompanying drawings.

도 2는 본 발명에 따른 다국어 음성 인식 엘리베이터의 구성을 나타낸 블록도이고, 도 3은 도 2의 다국어 음성 인식부 구성을 나타낸 블록도이며, 도 4는 본 발명에 따른 다국어 음성 인식 엘리베이터의 배치를 나타낸 블록도이다.Figure 2 is a block diagram showing the configuration of a multilingual speech recognition elevator according to the present invention, Figure 3 is a block diagram showing the configuration of a multilingual speech recognition unit of Figure 2, Figure 4 is a layout of a multilingual speech recognition elevator according to the present invention The block diagram shown.

도 2 내지 도 4에 도시한 바와 같이, 본 발명에 따른 다국어 음성 인식 엘리베이터(100)는 복수의 센서부(110)와, 다국어 음성 인식부(120)와, 버튼부(130)와, 제어부(140)와, 음성 출력부(150)와, 엘리베이터 운행 제어부(160)와 표시부(170)를 포함한다.2 to 4, the multilingual speech recognition elevator 100 according to the present invention includes a plurality of sensor units 110, a multilingual speech recognition unit 120, a button unit 130, and a controller ( 140, an audio output unit 150, an elevator driving control unit 160, and a display unit 170.

상기 복수의 센서부(110)는 승객이 엘리베이터를 탑승하거나 상기 엘리베이터로부터 하차하기 위한 홀(200)과 상기 엘리베이터의 내부(300)에 설치되어 엘리베이터 탑승자를 검출하여 제공하는 구성으로서, 상기 센서부(110)는 적외선 센서, 초음파 센서, 압력 센서 중 어느 하나로 이루어진다.The plurality of sensor units 110 are installed in the hall 200 for passengers to get on or off the elevator and the interior 300 of the elevator, and detect and provide an elevator occupant. 110 is made of any one of an infrared sensor, an ultrasonic sensor, a pressure sensor.

또한, 상기 센서부(110)는 상기 엘리베이터 홀(200)의 바닥 및 홀 부름 버튼부(131) 등에 설치되는 제 1 센서부(110a)와, 상기 엘리베이터 내부(300)의 천정, 측벽면 바닥면 또는 층 선택 버튼부(132)가 설치된 제어 패널(미도시) 중 적어도 어느 하나에 설치되는 제 2 센서부(110b)로 이루어진다.In addition, the sensor unit 110 may include a first sensor unit 110a installed at the bottom of the elevator hall 200, a hole call button unit 131, and the like, and a ceiling and a sidewall bottom surface of the inside of the elevator 300. Alternatively, the second sensor unit 110b may be installed on at least one of a control panel (not shown) provided with the floor selection button unit 132.

상기 다국어 음성 인식부(120)는 음성 입력부(121)와, 마이크(122)와, 필터부(123)와 다국어 음성 인식 제어부(124)와, 다국어 음성 정보 DB(125)로 이루어진다.The multilingual voice recognition unit 120 includes a voice input unit 121, a microphone 122, a filter unit 123, a multilingual voice recognition control unit 124, and a multilingual voice information DB 125.

상기 다국어 음성 인식부(120)는 상기 엘리베이터의 내부(300)에 설치된 운행 제어 패널(미도시) 또는 엘리베이터의 운행을 제어하는 운행 제어부(160) 중 어느 하나에 설치되며, 상기 탑승자로부터 발화된 음성과 미리 설정된 다국어 음성 정보를 대비하여 해당국의 언어를 판단하고, 상기 음성으로부터 핵심어를 검출하여 운행 층의 정보를 인식하며, 상기 제어부(140)로 상기 인식된 운행 층의 정보에 기초한 엘리베이터의 운행 제어 신호와 상기 판단된 해당국의 언어로 상기 인식 결과의 음성 신호를 출력한다.The multilingual voice recognition unit 120 is installed in any one of a driving control panel (not shown) installed in the interior 300 of the elevator or a driving control unit 160 for controlling the operation of the elevator, and the voice spoken by the passenger And determining the language of the corresponding country in preparation for the preset multilingual voice information, detecting key words from the voice, recognizing information on the driving floor, and operating the elevator based on the recognized driving floor information to the controller 140. A voice signal of the recognition result is output in a control signal and the determined language of the corresponding station.

상기 음성 입력부(121)는 상기 엘리베이터 홀 및 엘리베이터 내부에 설치된 마이크(122)를 통해 탑승자의 음성을 검출하여 메모리(미도시) 등의 저장수단에 녹취되도록 하고, 상기 녹취된 음성을 필터부(123)에서 노이즈 제거 및 증폭과, 음성 주파수를 고주파 및 저주파 대역으로 필터링하여 핵심 주파수를 분석 및 검출하여 증폭한 음성 정보를 출력한다.The voice input unit 121 detects a passenger's voice through the microphone 122 installed in the elevator hall and the elevator to be recorded in a storage means such as a memory (not shown), and the recorded voice is filtered through the filter unit 123. ) To remove noise and amplify and to filter the voice frequencies into high and low frequency bands to analyze and detect the core frequencies and output the amplified voice information.

상기 다국어 음성 인식 제어부(124)는 상기 음성 입력부(121)로부터 출력되는 음성의 단어, 음소를 검출하여 음성의 특징을 다국어 음성 정보 DB(125)에 저장된 음성 정보와 대비하여 음성의 특징과 수학적으로 분석한 음소, 묵음, 언어적 특징들에 따른 해당 국가의 언어를 판단하고, 상기 판단 결과에 따라 인식된 해당 국가의 언어에 대응하는 상기 엘리베이터의 운행에 필요한 음성 정보 즉 핵심어를 추출하여 판독하게 된다.The multilingual voice recognition controller 124 detects words and phonemes of the voice output from the voice input unit 121 and compares the features of the voice with the voice information stored in the multilingual voice information DB 125 to mathematically identify the features of the voice. The language of the corresponding country is determined according to the analyzed phonemes, silences, and linguistic features, and voice information, that is, key words, required for operating the elevator corresponding to the recognized language of the corresponding country is extracted and read according to the determined result. .

상기 핵심어는 상기 엘리베이터의 운행을 제어하기 위한 음성 정보로서, 예를 들면 홀 부름의 경우 "올라가", "상행", "하행" 또는 "내려가" 등의 승하강과 관련된 단어이고, 층 선택의 경우 "로비", "1층", 지하 1층" 또는 "5층" 등과 같이 운행하고자 하는 층을 나타내는 단어이다.The key word is voice information for controlling the operation of the elevator, for example, a word associated with the ascending and descending such as "up", "up", "down" or "down" in the case of a hall call, and "in the case of floor selection". "Lobby", "1st floor", 1st basement floor "or" 5th floor "is a word indicating the floor to be operated.

따라서, 상기 다국어 음성 인식 제어부(124)는 탑승자의 음성 입력 정보와 상기 다국어 음성 정보 DB(125)에 저장된 건물의 층수에 관한 각 국가의 언어 정보중에서 주파수 대역이나 길이가 동일 또는 유사한 음성 정보를 검색하여 대비함으로써, 탑승자의 음성을 인식하게 된다.Accordingly, the multilingual voice recognition control unit 124 retrieves voice information having the same or similar frequency band or length from each other's voice input information and language information of each country regarding the number of floors of a building stored in the multilingual voice information DB 125. By contrast, the voice of the passenger is recognized.

또한, 상기 다국어 음성 인식 제어부(124)는 음성 인식기 프로그램에서 해당 음성 신호를 인식하여, 이를 거절 또는 인식(승인)하는 발화 검증을 수행한다. In addition, the multilingual speech recognition controller 124 recognizes the speech signal in the speech recognizer program, and performs speech verification to reject or recognize (accept) the speech signal.

즉 상기 다국어 음성 인식 DB(125)에 저장된 음성 정보를 분석하여 비인식어 또는 비핵심어와 핵심어를 판단하고, 상기 음성 인식기 프로그램에서 발생할 수 있는 오동작을 제거하기 위해 음향이나 대화음 등을 함께 인식한다.That is, the voice information stored in the multilingual speech recognition DB 125 is analyzed to determine non-recognized or non-core words and key words, and to recognize a sound or a dialogue sound to remove malfunctions that may occur in the voice recognizer program.

상기 인식된 음성들은 반음소(anti-phoneme)에 의한 비인식단어 및 음소 제거를 통해 실제로 엘리베이터 운행에 필요한 핵심어(운행 명령어)를 탑승자가 발화하였는지 검증을 수행하여 신뢰성을 점검하게 된다.The recognized voices are checked for reliability by performing verification that an occupant actually utters a key word (operation command) necessary for driving an elevator through non-recognized words and phoneme removal by anti-phoneme.

따라서, 검증을 통해 인식된 핵심어(운행 명령어)의 신뢰도가 높으면 인식을 수행하여 해당 운행 정보가 제공되며, 상기 인식된 핵심어의 신뢰도가 낮으면 인식을 수행하지 않고 운행 정보는 제공되지 않으며 음성 인식의 오류를 표시하는 신호를 출력한다.Therefore, if the reliability of the key word (operation command) recognized through the verification is high, the corresponding driving information is provided. If the reliability of the recognized key word is low, the driving information is not performed and the driving information is not provided. Outputs a signal indicating an error.

한편, 상기 다국어 음성 인식 제어부(124)는 상기 제어부(140)로부터 탑승자에게 음성 인식 안내를 위한 신호가 입력되면, 상기 다국어 음성 정보 DB(125)에 저장된 음성 인식 안내 정보를 로딩하여 상기 제어부(140)로 제공한다.On the other hand, the multilingual voice recognition control unit 124, when a signal for voice recognition guidance is input to the occupant from the control unit 140, and loads the voice recognition guide information stored in the multilingual voice information DB 125, the control unit 140 )

상기 다국어 음성 정보 DB(125)는 상기 엘리베이터의 운행에 필요한 운행 명령어(핵심어)의 판독과, 그에 관련된 각 나라 예를 들면, 한국어, 영어, 일본어, 중국어, 프랑스어 등의 음성 정보(주파수 대역, 길이 등)가 저장되고, 상기 저장된 정보들은 상기 다국어 음성 인식 제어부(124)로 제공된다.The multilingual voice information DB 125 reads a driving command (core language) necessary for the operation of the elevator, and voice information (frequency band, length, etc., for example, Korean, English, Japanese, Chinese, and French, for each country related thereto). Etc.), and the stored information is provided to the multilingual speech recognition controller 124.

상기 버튼부(130)는 상기 엘리베이터 홀(200)과 엘리베이터 내부(300)에 설치되어 탑승자가 엘리베이터의 사용을 위해 누름을 통해 엘리베이터의 호출 신호 및 운행 제어 신호를 검출하는 구성으로, 엘리베이터를 호출하는 홀 부름 버튼부(131)와 엘리베이터가 해당 층으로 이동하기 위한 운행 정보를 제공하는 문 열림, 문 닫힘 기능을 포함한 층 선택 버튼부(132)로 이루어진다.The button unit 130 is installed in the elevator hall 200 and the inside of the elevator 300 is configured to detect the call signal and the operation control signal of the elevator by the passenger pressed for the use of the elevator, calling the elevator The hall call button part 131 and the floor selection button part 132 including a door opening and a door closing function for providing driving information for moving the elevator to the floor.

상기 제어부(140)는 상기 다국어 음성 인식부(120)로부터 제공되는 인식 결과 신호와 엘리베이터의 운행 제어 정보들에 근거하여 엘리베이터의 운행을 제어한다.The controller 140 controls the operation of the elevator based on the recognition result signal provided from the multilingual speech recognition unit 120 and the operation control information of the elevator.

또한, 상기 제어부(140)는 상기 제 1 및 제 2 센서부(110a 및 110b) 중 적어도 어느 하나의 센서부로부터 탑승자 검출 신호가 입력되면 상기 다국어 음성 인식부(120)에서 제공되는 음성 인식을 위한 다국어 음성 안내 신호가 미리 설정된 국가의 언어 순서(예를 들면, 한국어->영어->일본어->중국어->프랑스어)로 상기 음성 출력부(150)를 통해 출력되도록 한다.In addition, the controller 140 may recognize the voice provided by the multilingual voice recognition unit 120 when a passenger detection signal is input from at least one of the first and second sensor units 110a and 110b. The multilingual voice guidance signal may be output through the voice output unit 150 in a language order (eg, Korean-> English-> Japanese-> Chinese-> French) of a preset country.

즉 한국어의 경우 "이 엘리베이터는 음성으로 인식되어 운행되는 엘리베이터 입니다"라는 안내 방송이 출력되도록 하고, 영어->일본어->중국어->프랑스어 순으로 동일한 의미의 안내 방송이 음성 출력부(150)를 통해 출력되도록 한다.That is, in the case of Korean, the announcement "This elevator is an elevator that is recognized and operated by voice" is outputted, and the announcement of the same meaning in the order of English-> Japanese-> Chinese-> French outputs the voice output unit 150. Output through

또한, 상기 제어부(140)는 상기 제 1 센서부(110a)가 예를 들면, 적외선 센서인 경우 상기 센서를 통해 출력되는 승객의 검출 신호가 엘리베이터를 탑승하기 위한 승객인지 또는 단순히 엘리베이터 홀을 지나가는 사람인지 여부를 판단하기 위해 상기 제 1 센서부(110a)에서 검출된 신호가 일정 시간 이상 유지되는지 여부를 판단하고, 상기 유지된 시간에 따라 엘리베이터 탑승자인지 여부를 판단한다.In addition, when the first sensor unit 110a is, for example, an infrared sensor, the controller 140 indicates whether a passenger's detection signal output through the sensor is a passenger for boarding an elevator or a person who simply passes an elevator hall. In order to determine whether or not it is determined whether the signal detected by the first sensor unit 110a is maintained for a predetermined time or more, it is determined whether or not the passenger occupant according to the maintained time.

또한, 상기 제어부(140)는 상기 제 1 및 제 2 센서부(110a 및 110b)가 예를 들면, 압력 센서인 경우 엘리베이터 도어(미도시)의 개폐 이후에 엘리베이터 홀(200)에서 엘리베이터 내부(300)로 승객이 탑승하게 되면 엘리베이터 홀(200)로부터 엘리베이터 내부(300)로의 무게 이동을 검출할 수 있고, 이에 근거하여 승객이 엘리베이터에 탑승하였는지 여부를 정확하게 검출할 수 있다.In addition, the control unit 140 is inside the elevator 300 in the elevator hall 200 after opening and closing the elevator door (not shown) when the first and second sensor units 110a and 110b are, for example, pressure sensors. When the passenger boards the passenger, the weight movement from the elevator hall 200 to the inside of the elevator 300 can be detected, and based on this, it is possible to accurately detect whether the passenger is in the elevator.

또한, 상기 제어부(140)는 상기 음성 인식을 위한 다국어 음성 안내 신호가 출력된 후 상기 다국어 음성 인식부(120)로부터 출력되는 음성 인식 결과 신호와 엘리베이터 운행 제어 신호를 분석하고, 분석된 결과에 따라 상기 음성 인식을 위한 다국어 음성 안내 신호를 재출력하거나 정상적으로 인식된 결과에 대한 음성 정보가 상기 음성 출력부를 통해 출력되도록 함과 동시에 상기 엘리베이터가 명령어(핵심어)에 의한 운행 층으로 운행되도록 엘리베이터 제어 신호를 출력한다.In addition, the controller 140 analyzes the voice recognition result signal and the elevator driving control signal output from the multilingual voice recognition unit 120 after the multilingual voice guide signal for the voice recognition is output, and according to the analyzed result. The elevator control signal is output so that the multilingual voice guide signal for the voice recognition is output again or voice information on the normally recognized result is output through the voice output unit and the elevator is driven to the driving floor by a command (core word). Output

또한, 상기 제어부(140)는 상기 음성 인식을 위한 다국어 음성 안내가 출력된 후 상기 다국어 음성 인식부(120) 이외에 상기 버튼부(130)를 통해 엘리베이터의 운행 제어 신호가 입력되면, 해당 버튼부(130)에 의한 선택을 표시하는 표시부(170)로 점등 표시 신호를 출력하며, 상기 버튼부(130)에 의해 입력된 운행 제어 신호에 의해 엘리베이터가 운행되도록 제어 신호를 출력한다.In addition, the controller 140 outputs a multi-language voice guide for voice recognition and then inputs a driving control signal of an elevator through the button unit 130 in addition to the multi-language voice recognition unit 120. A lighting display signal is output to the display unit 170 indicating the selection by 130, and a control signal is output so that the elevator is driven by the driving control signal input by the button unit 130.

상기 음성 출력부(150)는 상기 엘리베이터 홀(200)과 엘리베이터 내부(300)에 설치되어 상기 제어부(140)로부터 출력되는 다국어 음성 안내 신호와 상기 인식의 결과를 출력하는 구성으로 바람직하게 스피커로 이루어진다.The voice output unit 150 is installed in the elevator hall 200 and the inside of the elevator 300 and is configured to output a multilingual voice guide signal output from the controller 140 and a result of the recognition. .

상기 운행 제어부(160)는 엘리베이터의 운행을 제어하는 구성으로 건물의 옥상 등에 설치되어 상기 제어부로부터 출력되는 운행 제어 신호에 따라 상기 엘리베이터가 동작되도록 한다.The operation control unit 160 is configured to control the operation of the elevator is installed on the roof of a building, etc. to operate the elevator in accordance with the operation control signal output from the control unit.

상기 표시부(170)는 상기 버튼부(130)에 의해 엘리베이터의 호출 신호 및 운행 제어 신호가 입력되었는지 여부를 표시하는 구성으로 상기 제어부(140)로부터 출력되는 표시 신호에 의해 나타나도록 하며, LED, LCD 등의 디스플레이수단으로 이루어진다.
The display unit 170 is configured to display whether the call signal and the driving control signal of the elevator by the button unit 130 is displayed by the display signal output from the control unit 140, LED, LCD And display means.

도 5는 본 발명에 따른 다국어 음성 인식 엘리베이터의 동작 과정을 나타낸 흐름도이고, 도 6은 도 5에 따른 다국어 음성 인식부의 동작 과정을 나타낸 흐름도이다.5 is a flowchart illustrating an operation process of the multilingual speech recognition elevator according to the present invention, and FIG. 6 is a flowchart illustrating an operation process of the multilingual speech recognition unit according to FIG. 5.

도 2 내지 도 6을 참조하여 본 발명에 따른 다국어 음성 인식 엘리베이터의 동작을 설명한다.The operation of the multilingual speech recognition elevator according to the present invention will be described with reference to FIGS. 2 to 6.

엘리베이터 홀(200)에 설치된 제 1 센서부(110a) 및 엘리베이터 내부(300)에 설치된 제 2 센서부(110b) 중 적어도 어느 하나의 센서부에서 탑승자를 감지하면(S100), 제어부(140)가 엘리베이터 홀(200)에 설치된 음성 출력부(150) 또는 엘리베이터 내부(300)에 설치된 음성 출력부(150)로 음성 인식을 위한 다국어 음성 안내 신호를 출력한다(S200).When at least one of the first sensor unit 110a installed in the elevator hall 200 and the second sensor unit 110b installed in the elevator 300 detects a passenger (S100), the controller 140 may detect the occupant. The multilingual voice guide signal for voice recognition is output to the voice output unit 150 installed in the elevator hall 200 or the voice output unit 150 installed in the elevator 300 (S200).

상기 S100 단계에서 상기 제 1 센서부(110a)로부터 검출되는 신호는 일정 시간 이상 유지되는지 여부를 판단하고, 일정 시간 이상 검출 신호가 유지되면 음성 안내 신호를 출력하고, 일정 시간 이하로 검출 신호가 유지되면 상기 음성 안내 신호를 출력하지 않는다.In operation S100, it is determined whether the signal detected from the first sensor unit 110a is maintained for a predetermined time or more. If the detection signal is maintained for a predetermined time or more, a voice guide signal is output and the detection signal is maintained for a predetermined time or less. If the voice guide signal is not output.

상기 S200 단계를 수행한 후 상기 제어부(140)는 탑승자로부터 음성 인식을 위한 음성 입력이 검출되었는지 여부를 판단하고(S300), 상기 탑승자에 의한 음성 입력이 검출되면 다국어 음성 인식부(120)에서 상기 탑승자에 의해 발화된 음성과 미리 설정된 다국어 음성 정보를 대비하여 해당국의 언어를 판단하고, 상기 음성으로부터 핵심어를 검출하여 운행층의 정보를 인식하며, 상기 제어부로 상기 인식된 운행층 정보에 기초한 엘리베이터의 운행 제어 신호와 상기 판단된 해당국의 언어로 상기 인식 결과의 음성 신호를 출력하는 다국어 음성 인식 과정을 수행한다(S400).After performing step S200, the controller 140 determines whether a voice input for voice recognition has been detected from the occupant (S300), and when the voice input by the occupant is detected, the multilingual voice recognition unit 120 detects the voice input. The language of the corresponding country is determined by comparing the voice spoken by the occupant with the preset multilingual voice information, the key word is detected from the voice to recognize the information on the driving floor, and the elevator based on the recognized driving floor information by the controller. The multi-language speech recognition process of outputting the speech signal of the recognition result in the driving control signal and the determined language of the corresponding station is performed (S400).

상기 S400 단계를 더욱 상세하게 설명하면, 상기 다국어 음성 인식부(120)에 구성된 음성 입력부(121)의 마이크(122)를 통해 상기 탑승자의 음성을 검출하여 녹취하고, 상기 녹취된 음성의 노이즈 제거 및 필터링을 수행한 음성 정보로부터 단어 및 음소를 검출하고(S410), 상기 검출된 단어 및 음소들은 다국어 음성 인식 제어부(124)로 제공된다.The step S400 will be described in more detail, by detecting and recording the voice of the passenger through the microphone 122 of the voice input unit 121 configured in the multilingual voice recognition unit 120, and removing noise of the recorded voice. Words and phonemes are detected from the filtered speech information (S410), and the detected words and phonemes are provided to the multilingual speech recognition controller 124.

상기 다국어 음성 인식 제어부(124)는 상기 S410 단계에서 검출된 단어 및 음소와 다국어 음성 정보 DB(125)에 저장된 다국어 음성 정보와 대비하고(S420), 상기 단어 및 음소로부터 음성의 특징을 탐색하여(S430) 어느 나라의 언어인지 판단하며, 상기 판단된 결과 및 음성의 특징들로부터 엘리베이터의 운행에 필요한 운행 정보인 핵심어를 검출한다(S440).The multilingual voice recognition control unit 124 compares the words and phonemes detected in step S410 with the multilingual voice information stored in the multilingual voice information DB 125 (S420), and searches for features of voice from the words and phonemes ( S430) It is determined that the language of the country, and detects the key word that is the driving information necessary for the operation of the elevator from the determined results and features of the voice (S440).

상기 다국어 음성 인식 제어부(124)는 상기 S400 단계를 수행한 후 엘리베이터 운행에 필요한 운행 명령어인 핵심어가 검출되었는지 판단한다(S500).The multilingual voice recognition control unit 124 determines whether a key word, which is a driving command necessary for operating an elevator, is detected after performing step S400 (S500).

상기 S500 단계에서 상기 핵심어가 검출되지 않으면 상기 S200 단계를 다시 수행하고, 상기 핵심어가 검출되면 반음소에 의한 비인식단어 및 음소 제거를 통해 탑승자의 발화를 검증한다(S600).If the key word is not detected in step S500, the step S200 is performed again. If the key word is detected, the utterance of the occupant is verified by removing the non-recognized word and the phoneme by the half phoneme (S600).

즉 인식대상으로 등록된 단어에 대해서만 인식을 하고 그 외의 단어에 대해서는 인식을 거절(rejection)하여 인식된 핵심어(명령어)가 정확한지 여부를 확인하여 최종적으로 인식을 수행할지 여부를 결정하게 된다.That is, only the words registered as recognition targets are recognized and other words are rejected (rejection) to check whether the recognized key words (command words) are correct to determine whether to perform the final recognition.

상기 S600 단계를 수행한 후 상기 제어부(140)는 상기 다국어 음성 인식부(120)로부터 인식된 결과를 안내하기 위한 음성 신호와, 그에 따른 운행 제어 정보를 검출한다(S700).After performing the step S600, the control unit 140 detects a voice signal for guiding a result recognized by the multilingual voice recognition unit 120 and driving control information according thereto (S700).

즉 상기 S600 단계에서 인식이 거절된 경우 재입력을 요청하는 안내 음성이 음성 출력부(150)를 통해 출력되도록 하고, 인식이 결정된 경우 인식된 결과 예를 들면 "로비", "1층", "상행", "하행" 등의 인식된 음성이 출력되도록 하며, 이에 대응한 엘리베이터의 운행 층, 홀 부름 등의 정보를 검출하고(S700), 상기 검출한 운행 정보가 표시부(170)를 통해 예를 들면 "로비", "1층" 등의 문자가 디스플레이되도록 하거나 1층, 5층, 상행 표시등 또는 하행 표시등과 같은 표시등의 점등을 통해 표시되도록 한다.That is, when the recognition is rejected in step S600, the guide voice requesting re-input is output through the voice output unit 150. When the recognition is determined, the recognized result is, for example, "lobby", "first floor", " Recognized voice such as "upward", "downward", etc. are outputted, and information corresponding to the elevator floor and hall call of the elevator corresponding thereto is detected (S700), and the detected driving information is displayed on the display unit 170. For example, characters such as "lobby" and "first floor" may be displayed or displayed through lighting of an indicator such as a first floor, a fifth floor, an uphill light or a downlight.

상기 S700 단계에서 검출된 운행 정보에 따라 상기 제어부(140)는 엘리베이터가 운행되도록 상기 운행 정보에 기초하여 엘리베이터의 운행 제어 신호를 엘리베이터 운행 제어부(160)로 출력한다(S800).According to the driving information detected in step S700, the control unit 140 outputs a driving control signal of the elevator to the elevator driving control unit 160 based on the driving information so that the elevator runs (S800).

한편, 상기 S300 단계에서 상기 탑승자가 음성을 발화하지 않고 엘리베이터 홀(200) 또는 엘리베이터 내부(300)에 설치된 버튼부(130)를 통해 홀 부름(131) 또는 층 선택(132)을 누르면(S900), 상기 제어부(140)는 검출된 정보에 따라 엘리베이터가 운행되도록 엘리베이터 운행 제어부(160)로 운행 제어 신호를 출력한다(S800).
Meanwhile, in step S300, the occupant presses the hall call 131 or the floor selection 132 through the button unit 130 installed in the elevator hall 200 or the inside of the elevator 300 without uttering a voice (S900). The controller 140 outputs a driving control signal to the elevator driving controller 160 to operate the elevator according to the detected information (S800).

상기와 같이, 본 발명의 바람직한 실시 예를 참조하여 설명하였지만 해당 기술 분야의 숙련된 당업자라면 하기의 특허청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those of ordinary skill in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. It can be understood that

100 : 다국어 음성 인식 엘리베이터 110 : 센서부
110a : 제 1 센서부 110b : 제 2 센서부
120 : 다국어 음성 인식부 121 : 음성 입력부
122 : 마이크 123 : 필터부
124 : 다국어 음성 인식 제어부 125 : 다국어 음성 정보 DB
130 : 버튼부 131 : 홀 부름
132 : 층 선택 140 : 제어부
150 : 음성 출력부 160 : 엘리베이터 운행 제어부
170 : 표시부 200 : 엘리베이터 홀
300 : 엘리베이터 내부100: multilingual voice recognition elevator 110: sensor unit
110a: first sensor unit 110b: second sensor unit
120: multilingual voice recognition unit 121: voice input unit
122: microphone 123: filter unit
124: multilingual voice recognition control unit 125: multilingual voice information DB
130: button portion 131: hole calling
132: floor selection 140: control unit
150: audio output unit 160: elevator operation control unit
170: display unit 200: elevator hall
300: inside the elevator

Claims (8)

엘리베이터를 탑승하기 위한 홀과 상기 엘리베이터의 내부에 설치되어 엘리베이터 탑승자를 검출하는 복수의 센서부(110);
상기 복수의 센서부 중 적어도 어느 하나로부터 탑승자가 검출되면 음성 인식을 위한 다국어 음성 안내 신호가 출력되도록 하고, 상기 탑승자로부터 발화(發話)된 음성의 인식 결과 신호와 엘리베이터의 운행 제어 신호를 출력하는 제어부(140);
상기 탑승자로부터 발화된 음성과 미리 설정된 다국어 음성 정보를 대비하여 해당국의 언어를 판단하고, 상기 음성으로부터 핵심어를 검출하여 운행 층의 정보를 인식하며, 상기 제어부로 상기 인식된 운행 층의 정보에 기초한 엘리베이터의 운행 제어 신호와 상기 판단된 해당국의 언어로 상기 인식 결과의 음성 신호를 출력하는 다국어 음성 인식부(120);
상기 엘리베이터 홀과 엘리베이터 내부에 설치되어 상기 제어부로부터 출력되는 다국어 음성 안내 신호와 상기 인식의 결과를 출력하는 음성 출력부(150); 및
상기 제어부로부터 출력되는 운행 제어 신호에 따라 엘리베이터의 운행을 제어하는 엘리베이터 운행 제어부(160)를 포함하는 다국어 음성 인식 엘리베이터.A plurality of sensor units 110 installed in a hall for boarding the elevator and inside the elevator to detect an elevator occupant;
A controller for outputting a multilingual voice guidance signal for voice recognition when a passenger is detected from at least one of the plurality of sensor units, and outputting a recognition result signal of a voice uttered from the passenger and an operation control signal of an elevator. 140;
The language of the corresponding country is determined in comparison with the voice spoken by the passenger and preset multilingual voice information, the key word is detected from the voice to recognize the information on the driving floor, and the controller controls the information on the driving floor. A multilingual speech recognition unit 120 for outputting a driving control signal of an elevator and a speech signal of the recognition result in the determined language of the corresponding country;
A voice output unit 150 installed in the elevator hall and the elevator to output a multilingual voice guide signal output from the controller and a result of the recognition; And
Elevator elevator control unit for controlling the operation of the elevator according to the operation control signal output from the control unit. 제 1 항에 있어서,
상기 다국어 음성 인식부(120)는 상기 탑승자의 음성을 검출하여 녹취하고, 상기 녹취된 음성의 노이즈 제거 및 필터링을 수행한 음성 정보를 출력하는 음성 입력부(121);
상기 음성 입력부로부터 출력되는 음성의 단어, 음소(音素)를 검출하여 음성 주파수를 고주파 및 저주파 대역으로 필터링하며 핵심 주파수를 검출 및 분석하여 증폭한 음성 정보의 특징을 검출하고, 상기 검출된 음성 정보의 특징을 다국어 음성 정보와 대비하여 어느 나라의 언어인지 판단과 엘리베이터의 운행에 필요한 운행 정보인 핵심어를 검출하는 다국어 음성 인식 제어부(124); 및
상기 엘리베이터의 운행에 필요한 명령어의 판독과, 상기 엘리베이터의 운행에 필요한 각 나라의 음성 정보가 저장되고, 상기 저장된 정보들을 상기 다국어 음성 인식 제어부로 제공하는 다국어 음성 정보 DB(125)를 포함하는 것을 특징으로 하는 다국어 음성 인식 엘리베이터.The method of claim 1,
The multilingual voice recognition unit 120 detects and records the voice of the occupant, and outputs voice information obtained by performing noise removal and filtering of the recorded voice;
Detects words and phonemes of voice output from the voice input unit, filters voice frequencies into high and low frequency bands, detects and analyzes key frequencies, and detects amplified features of voice information. A multilingual speech recognition control unit 124 for determining a language of the country by comparing the feature with multilingual speech information and detecting a key word which is driving information necessary for operation of an elevator; And
And a multilingual voice information DB 125 for reading the instructions necessary for the operation of the elevator and storing the voice information of each country for the operation of the elevator and providing the stored information to the multilingual voice recognition controller. Multilingual speech recognition elevator. 제 2 항에 있어서,
상기 다국어 음성 인식 제어부(124)는 반음소(anti-phoneme)에 의한 비인식단어 및 음소 제거를 통해 탑승자의 발화 검증을 수행하는 것을 특징으로 하는 다국어 음성 인식 엘리베이터.The method of claim 2,
The multilingual speech recognition control unit 124 performs a multilingual speech recognition elevator characterized in that the utterance verification of the occupant is performed by removing a non-recognized word and a phoneme by an anti-phoneme. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
상기 엘리베이터 홀과 상기 엘리베이터의 내부에 설치되어 상기 탑승자로부터 엘리베이터의 호출 신호 및 운행 제어 신호를 검출하는 다수의 버튼부(130); 및
상기 버튼부에 의해 상기 호출 신호 및 운행 제어 신호가 입력되었는지 여부를 표시하는 표시부(170)를 더 포함하고,
상기 제어부(140)는 상기 버튼부(130)로 상기 호출 신호 및 운행 제어 신호가 검출되면, 해당 버튼부의 표시부(170)로 표시 신호를 출력하고, 상기 다국어 음성 인식부(120) 및 버튼부(130) 중 적어도 어느 하나로부터 입력되는 운행 제어 신호에 따라 상기 엘리베이터의 운행을 제어하는 것을 특징으로 하는 다국어 음성 인식 엘리베이터.The method according to any one of claims 1 to 3,
A plurality of button units 130 installed in the elevator hall and the elevator to detect call signals and driving control signals of the elevator from the occupant; And
And a display unit 170 which displays whether the call signal and the driving control signal are input by the button unit.
When the call signal and the driving control signal are detected by the button unit 130, the control unit 140 outputs a display signal to the display unit 170 of the corresponding button unit, and the multilingual voice recognition unit 120 and the button unit ( 130) Multilingual speech recognition elevator characterized in that for controlling the operation of the elevator in accordance with the operation control signal input from at least one of. 다국어 음성 인식을 이용한 엘리베이터의 제어 방법으로서,
(a) 센서부(110)가 엘리베이터 홀 및 엘리베이터 내부 중 적어도 어느 하나에서 탑승자를 감지하면, 제어부(140)가 엘리베이터 홀 또는 엘리베이터 내부로 음성 인식을 위한 다국어 음성 안내 신호를 출력하는 단계;
(b) 다국어 음성 인식부(120)는 상기 탑승자로부터 음성이 발화(發話)된 경우 상기 발화된 음성과 다국어 음성 정보 DB(125)에 저장된 다국어 음성 정보를 대비하여 해당국의 언어를 판단하고, 상기 음성으로부터 핵심어를 검출하여 운행층의 정보를 인식하며, 상기 제어부(140)로 상기 인식된 운행층 정보에 기초한 엘리베이터의 운행 제어 신호와 상기 판단된 해당국의 언어로 상기 인식 결과의 음성 신호를 출력하는 단계; 및
(c) 상기 제어부(140)는 상기 다국어 음성 인식부(120)로부터 인식된 결과의 음성 신호를 상기 엘리베이터 홀 및 엘리베이터 내부로 출력하며, 상기 인식의 결과로 운행층 정보가 결정되면 엘리베이터가 운행되도록 상기 운행층 정보에 기초하여 엘리베이터의 운행 제어 신호를 엘리베이터 운행 제어부(160)로 출력하는 단계를 포함하는 다국어 음성 인식 엘리베이터의 제어 방법.An elevator control method using multilingual speech recognition,
(a) when the sensor unit 110 detects the occupant in at least one of the elevator hall and the inside of the elevator, the controller 140 outputting a multilingual voice guide signal for voice recognition into the elevator hall or the inside of the elevator;
(b) when the voice is uttered from the passenger, the multilingual voice recognition unit 120 determines the language of the corresponding country by comparing the spoken voice with the multilingual voice information stored in the multilingual voice information DB 125, The key word is detected from the voice to recognize the information of the driving floor, and the control unit 140 receives the driving control signal of the elevator based on the recognized driving floor information and the voice signal of the recognition result in the determined language of the corresponding country. Outputting; And
The control unit 140 outputs a voice signal of the result recognized by the multilingual speech recognition unit 120 to the elevator hall and the elevator, and when the floor information is determined as a result of the recognition, the elevator operates. And outputting an operation control signal of the elevator to the elevator operation control unit based on the driving floor information. 제 5 항에 있어서,
(d) 상기 (b) 단계는 반음소에 의한 비인식단어 및 음소 제거를 통해 탑승자의 발화를 검증하는 단계를 더 포함하는 것을 특징으로 하는 다국어 음성 인식 엘리베이터의 제어 방법.The method of claim 5, wherein
(d) step (b) further comprises the step of verifying the utterance of the occupant by removing the non-recognized word and the phoneme by the semi-phoneme. 제 5 항 또는 제 6 항에 있어서,
(b-1) 상기 (b) 단계는 음성 입력부를 통해 검출되는 상기 탑승자의 음성을 검출하여 녹취하고, 상기 녹취된 음성의 노이즈 제거 및 필터링을 수행한 음성 정보로부터 단어 및 음소를 검출하는 단계; 및
(b-2) 상기 검출된 단어 및 음소와 다국어 음성 정보 DB에 저장된 다국어 음성 정보와 대비하고, 상기 단어 및 음소로부터 음성 주파수를 고주파 및 저주파 대역으로 필터링하여 핵심 주파수를 검출 및 분석하여 증폭한 음성 정보의 특징을 탐색하여 어느 나라의 언어인지 판단하며, 상기 판단된 결과와 탐색된 음성 정보의 특징들로부터 엘리베이터의 운행에 필요한 운행 정보인 핵심어를 검출하는 단계를 포함하는 것을 특징으로 하는 다국어 음성 인식 엘리베이터의 제어 방법.The method according to claim 5 or 6,
(b-1) the step (b) includes detecting and recording the voice of the passenger detected through the voice input unit, and detecting words and phonemes from the voice information from which the noise of the recorded voice is removed and filtered; And
(b-2) Contrast the detected words and phonemes with the multilingual voice information stored in the multilingual voice information DB, and filter the voice frequencies from the words and phonemes into high and low frequency bands to detect and analyze key frequencies to amplify the voice. Determining a language of a country by searching for a feature of the information, and detecting a key word, which is driving information necessary for the operation of the elevator, from the determined result and the found features of the searched voice information. Control method of the elevator. 제 5 항 또는 제 6 항에 있어서,
상기 (b) 단계는 상기 탑승자의 발화 없이 버튼부(130)를 통해 상기 엘리베이터의 운행 정보가 검출되면, 상기 제어부(140)는 상기 검출된 운행 정보에 기초하여 엘리베이터가 운행되도록 상기 엘리베이터 운행 제어 신호를 출력하는 단계를 포함하는 것을 특징으로 하는 다국어 음성 인식 엘리베이터의 제어 방법.The method according to claim 5 or 6,
In the step (b), when the operation information of the elevator is detected through the button unit 130 without ignition of the occupant, the controller 140 controls the elevator operation control signal to operate the elevator based on the detected operation information. Control method of a multilingual speech recognition elevator comprising the step of outputting.
KR1020100047468A 2010-05-20 2010-05-20 Many languages voice recognition elevator and method for controlling the same KR101086605B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100047468A KR101086605B1 (en) 2010-05-20 2010-05-20 Many languages voice recognition elevator and method for controlling the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100047468A KR101086605B1 (en) 2010-05-20 2010-05-20 Many languages voice recognition elevator and method for controlling the same

Publications (1)

Publication Number Publication Date
KR101086605B1 true KR101086605B1 (en) 2011-11-23

Family

ID=45398157

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100047468A KR101086605B1 (en) 2010-05-20 2010-05-20 Many languages voice recognition elevator and method for controlling the same

Country Status (1)

Country Link
KR (1) KR101086605B1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102031893B1 (en) * 2018-05-04 2019-10-15 대림통상 주식회사 The method for operating bidet with speech recognition funtion
KR102031888B1 (en) * 2018-05-04 2019-10-15 대림통상 주식회사 The method for operating bidet having speech recognition funtion
KR20200098302A (en) * 2019-02-12 2020-08-20 조희경 Educational Robots, Foreign Language Learning Method Using Educational Robots, and Media Recorded with Program Executing Foreign Language Learning Method
EP4095849A1 (en) * 2021-05-28 2022-11-30 Otis Elevator Company Usage of voice recognition confidence levels in a passenger interface
KR20230019728A (en) 2021-08-02 2023-02-09 주식회사 디앤씨 Voice control device that does not change the operating system of elevator and the method thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004035131A (en) 2002-07-01 2004-02-05 Mitsubishi Electric Corp Annunciating device for elevator
KR100636940B1 (en) 2005-02-18 2006-10-19 미쓰비시덴키 가부시키가이샤 Elevator monitor system and computer-readable recording medium in which elevator monitor program has been stored
JP2007168957A (en) 2005-12-21 2007-07-05 Mitsubishi Electric Corp Annunciating device for elevator

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004035131A (en) 2002-07-01 2004-02-05 Mitsubishi Electric Corp Annunciating device for elevator
KR100636940B1 (en) 2005-02-18 2006-10-19 미쓰비시덴키 가부시키가이샤 Elevator monitor system and computer-readable recording medium in which elevator monitor program has been stored
JP2007168957A (en) 2005-12-21 2007-07-05 Mitsubishi Electric Corp Annunciating device for elevator

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102031893B1 (en) * 2018-05-04 2019-10-15 대림통상 주식회사 The method for operating bidet with speech recognition funtion
KR102031888B1 (en) * 2018-05-04 2019-10-15 대림통상 주식회사 The method for operating bidet having speech recognition funtion
KR20200098302A (en) * 2019-02-12 2020-08-20 조희경 Educational Robots, Foreign Language Learning Method Using Educational Robots, and Media Recorded with Program Executing Foreign Language Learning Method
KR102236604B1 (en) 2019-02-12 2021-04-05 조희경 Educational Robots, Foreign Language Learning Method Using Educational Robots, and Media Recorded with Program Executing Foreign Language Learning Method
EP4095849A1 (en) * 2021-05-28 2022-11-30 Otis Elevator Company Usage of voice recognition confidence levels in a passenger interface
KR20230019728A (en) 2021-08-02 2023-02-09 주식회사 디앤씨 Voice control device that does not change the operating system of elevator and the method thereof

Similar Documents

Publication Publication Date Title
KR101010211B1 (en) Elevator with variable protocol and method for controlling the same
KR101045842B1 (en) Apparatus for recogniging voice of elevator and method for controling the same
KR101086605B1 (en) Many languages voice recognition elevator and method for controlling the same
US5255341A (en) Command input device for voice controllable elevator system
KR20060081076A (en) Elevator assign a floor with voice recognition
WO2010038304A1 (en) Destination-floor registration device of elevator
JP2006327739A (en) Landing call registering device of elevator
CN112607536B (en) Elevator control method, device, computer equipment and storage medium
JPS6310073B2 (en)
JPH0373775A (en) Information input device for elevator
CN104692198A (en) Elevator voice calling landing register device
CN102730497A (en) Voice identification operation control device of elevator
JP2002128404A (en) Device for registering call for elevator
JP2007001758A (en) Elevator control device
JPS6044225B2 (en) elevator
JPH061549A (en) Audio guide apparatus for elevator
JPH03284589A (en) Voice register device of elevator
CN1394802A (en) Speech recognition elevator floor selection system
JP5423884B2 (en) Elevator call registration device
KR101026730B1 (en) Apparatus of operating elevator for the blind
JP2647207B2 (en) Elevator call registration device
KR101114145B1 (en) Apparatus for a providing elevator ten key operation guide
JP2014005126A (en) Call registration device of elevator
JP3082618B2 (en) Elevator voice input device
KR100448869B1 (en) An apparatus for controling service of elevator by recognize voice

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150818

Year of fee payment: 4

R401 Registration of restoration
FPAY Annual fee payment

Payment date: 20160817

Year of fee payment: 5

R401 Registration of restoration
FPAY Annual fee payment

Payment date: 20170516

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20171011

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20181024

Year of fee payment: 8