KR101433506B1 - Operation method of energy management system using an isolated language voice recognition - Google Patents

Operation method of energy management system using an isolated language voice recognition Download PDF

Info

Publication number
KR101433506B1
KR101433506B1 KR1020130009961A KR20130009961A KR101433506B1 KR 101433506 B1 KR101433506 B1 KR 101433506B1 KR 1020130009961 A KR1020130009961 A KR 1020130009961A KR 20130009961 A KR20130009961 A KR 20130009961A KR 101433506 B1 KR101433506 B1 KR 101433506B1
Authority
KR
South Korea
Prior art keywords
voice
isolated
command
management system
energy management
Prior art date
Application number
KR1020130009961A
Other languages
Korean (ko)
Other versions
KR20140096844A (en
Inventor
이승주
Original Assignee
엘에스산전 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘에스산전 주식회사 filed Critical 엘에스산전 주식회사
Priority to KR1020130009961A priority Critical patent/KR101433506B1/en
Publication of KR20140096844A publication Critical patent/KR20140096844A/en
Application granted granted Critical
Publication of KR101433506B1 publication Critical patent/KR101433506B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/063—Training
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • G10L15/063—Training
    • G10L2015/0631—Creating reference templates; Clustering
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Selective Calling Equipment (AREA)

Abstract

에너지 관리 시스템의 운전 조작에 필요한 기능을 실행시키기 위한 음성 제어 명령별 고립어 음성 DB를 구축하는 단계; 음성명령을 인식하기 위한 기능키가 입력되면 마이크를 통해 음성 명령을 수신하고, 음성의 시작과 끝 포인트를 수집하는 단계; 상기 수신된 음성 명령에 대하여 고립어 인식을 수행하여 음성 제어 명령을 추출하는 단계; 및 상기 고립어 음성 DB에 기반하여 상기 추출된 음성 제어 명령에 해당하는 운전 조작을 실행하고, 상기 음성 제어 명령에 따라 실행되는 단계별 화면 또는 요약화면을 제공하는 단계를 포함하는 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법이 제공된다.Constructing an isolated speech voice DB for each voice control command for executing functions necessary for driving operation of the energy management system; Receiving a voice command through a microphone when a function key for recognizing a voice command is input, and collecting start and end points of the voice; Extracting a voice control command by performing isolated word recognition on the received voice command; And a step of executing a driving operation corresponding to the extracted voice control command based on the isolated voice DB and providing a step-by-step screen or a summary screen executed in accordance with the voice control command, A method of operating the system is provided.

Description

고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법{OPERATION METHOD OF ENERGY MANAGEMENT SYSTEM USING AN ISOLATED LANGUAGE VOICE RECOGNITION}TECHNICAL FIELD [0001] The present invention relates to a method for operating an energy management system using isolated word speech recognition,

본 발명은 고립어 음성 인식을 이용한 에너지 관리 시스템(Energy Management System, 이하 EMS)에 관한 것으로, 상세하게는 에너지 관리 시스템에서 감시해야 하는 수많은 장치의 모니터링/제어 부분을 고립어 음성 입력을 통해서 빠른 화면 디스플레이 및 원하는 포인트를 손쉽게 검색할 수 있게 함으로써 급전원이 마우스, 키보드를 이용하여 여러 번 조작해야 하는 번거로움을 개선한 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법 및 이를 위한 에너지 관리 시스템에 관한 것이다.The present invention relates to an energy management system (hereinafter, referred to as " EMS ") using isolated speech recognition, and more particularly to a system and method for monitoring / controlling a large number of devices to be monitored in an energy management system, And more particularly, to a method of operating an energy management system using isolated speech recognition, which improves the troublesomeness required to operate the power source several times using a mouse and a keyboard, and an energy management system therefor.

각 전력 시스템은 EMS 시스템과 통신 네트워크로 연결되어 있다. 따라서, EMS 시스템을 운영하는 급전원은 EMS 관리 콘솔 화면에서 실시간으로 데이터를 확인하거나 제어 명령을 실행하거나 알람이 발생했을 경우 알람에 대한 후속 조치를 처리한다.Each power system is connected to the EMS system by a communication network. Therefore, the power source that operates the EMS system processes the data in real time on the EMS management console screen, executes the control command, or takes action for the alarm in case of alarm occurrence.

종래의 EMS 시스템에서 급전원의 모든 조작은 키보드, 마우스와 같은 입력 장치를 이용한다. 급전원이 장치에 제어 명령을 실행하기 위해서는 키보드, 마우스 조작을 통해 관리 콘솔에서 제어 화면 실행 프로그램을 구동시킨다. 사용자 인터페이스 화면을 마우스로 조작하고 제어 컨트롤을 찾은 후 급전원이 원하는 제어 명령을 마우스 조작으로 선택한다. 키보드 입력으로 제어 명령을 실행한다.In a conventional EMS system, all operations of the power supply are performed using input devices such as a keyboard and a mouse. In order to execute the control command to the device, the control screen execution program is started from the management console through keyboard and mouse operation. Operate the user interface screen with the mouse, find the control control, and select the desired control command with mouse operation. Execute control command with keyboard input.

한편, 음성 인식 기술은 차세대 HMI(Human Machine Interface)의 핵심 기술이다. 이 기술은 고속 또는 실시간으로 정보를 처리해야 하는 원격 제어 및 감시(SCADA), EMS 시스템에 적합하며 신속하게 정보를 입력하고 복잡한 절차를 손쉽게 처리 할 수 있다는 점에서 향후 중요한 기술 분야임에 틀림없다. On the other hand, speech recognition technology is the core technology of the next generation Human Machine Interface (HMI). This technology is suitable for remote control and surveillance (SCADA) and EMS systems that need to process information at high speed or in real time, and it is an important technical field in the future because it can input information quickly and handle complex procedures easily.

본 발명이 해결하고자 하는 과제는 에너지 관리 시스템에서는 감시해야 하는 수많은 장치의 모니터링/제어 부분을 고립어 음성 입력을 통해서 빠른 화면 디스플레이 및 원하는 포인트를 손쉽게 검색할 수 있게 하는 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법을 제공하는데 있다. SUMMARY OF THE INVENTION The present invention has been made in view of the above problems, and it is an object of the present invention to provide an energy management system using isolated speech recognition, which enables quick screen display and easy searching of desired points through voice input, And to provide a driving method.

본 발명의 일실시예에 의하면, 에너지 관리 시스템의 운전 조작에 필요한 기능을 실행시키기 위한 음성 제어 명령별 고립어 음성 DB를 구축하는 단계; 음성명령을 인식하기 위한 기능키가 입력되면 마이크를 통해 음성 명령을 수신하고, 음성의 시작과 끝 포인트를 수집하는 단계; 상기 수신된 음성 명령에 대하여 고립어 인식을 수행하여 음성 제어 명령을 추출하는 단계; 상기 고립어 음성 DB에 기반하여 상기 추출된 음성 제어 명령에 해당하는 운전 조작을 실행하고, 상기 음성 제어 명령에 따라 실행되는 단계별 화면 또는 요약 화면을 제공하는 단계를 포함하는 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법이 제공된다.According to an embodiment of the present invention, there is provided a method for controlling an energy management system, the method comprising: Receiving a voice command through a microphone when a function key for recognizing a voice command is input, and collecting start and end points of the voice; Extracting a voice control command by performing isolated word recognition on the received voice command; Performing a driving operation corresponding to the extracted voice control command based on the isolated voice DB and providing a step-by-step screen or a summary screen executed in accordance with the voice control command; Is provided.

상기 음성 제어 명령별 고립어 음성 DB를 구축하는 단계는, 사람의 음소를 수집하여 수집된 음소를 모델링하여 음소 DB를 구축하는 단계; 및 상기 에너지 관리 시스템의 운전 조작에 사용될 제어 명령에 해당하는 고립어를 입력받아 상기 음소 DB에 기반하여 고립어 음성 DB를 구축하는 단계를 포함할 수 있다.The step of constructing the isolated voice DB for each voice control command includes: building a phoneme database by modeling phonemes collected by collecting phonemes of a person; And an isolated word corresponding to a control command to be used in a driving operation of the energy management system, and constructing a isolated speech DB based on the phoneme DB.

상기 음성 제어 명령별 고립어 음성 DB를 구축하는 단계는, 상기 에너지 관리 시스템의 운전 조작에 필요한 기능을 카테고리별로 구분하여 고립어 음성 DB를 구축하는 단계를 더 포함할 수 있다.The step of constructing the isolated voice DB for each voice control command may further include constructing a voice database by classifying the functions required for driving operation of the energy management system by category.

상기 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법은 상기 에너지 관리 시스템의 감시 화면 정보를 제공하는 단계; 상기 감시 화면 정보가 제공되면 마이크를 통해 음성 명령이 입력되는지 여부를 주기적으로 판단하는 단계; 및 음성 명령이 입력되면 해당 음성 명령을 수신하고 고립어 인식을 수행하여 음성 제어 명령을 추출하는 단계를 더 포함할 수 있다.A method of operating an energy management system using isolated language speech recognition, comprising: providing monitoring screen information of the energy management system; If the monitoring screen information is provided, periodically determining whether a voice command is inputted through a microphone; And receiving the voice command when the voice command is input, and performing the isolated word recognition to extract the voice control command.

본 발명의 다른 측면에 의하면, 에너지 관리 시스템의 운전 조작에 필요한 기능을 실행시키기 위한 음성 제어 명령별 고립어 음성 DB를 저장하는 데이터 저장부; 설정된 기능키가 실행되면 마이크를 통해 음성 명령을 수신하고, 상기 수신된 음성 명령에 대하여 고립어 인식을 수행하여 음성 제어 명령을 추출하는 음성 처리부; 상기 고립어 음성 DB에 기반하여 상기 추출된 음성 제어 명령에 해당하는 운전 조작을 실행하는 운전 조작부; 및 운전 조작 실행 화면 정보를 제공하는 화면 정보 처리부를 포함하는 고립어 음성 인식을 이용한 에너지 관리 시스템이 제공된다.According to another aspect of the present invention, there is provided an energy management system comprising: a data storage unit for storing an isolated speech voice DB for each voice control command for executing a function required for a driving operation of an energy management system; A voice processing unit for receiving a voice command through a microphone when the set function key is executed and performing a lone recognition on the voice command to extract a voice control command; A driving operation unit for executing a driving operation corresponding to the extracted voice control command based on the isolated voice DB; And a screen information processing unit for providing driving operation execution screen information, is provided.

본 발명에 의하면, 에너지 관리 시스템에서는 감시해야 하는 수많은 장치의 모니터링/제어 부분을 고립어 음성 입력을 통해서 빠른 화면 디스플레이 및 원하는 포인트를 손쉽게 검색할 수 있게 함으로써 마우스, 키보드를 이용하여 여러 번 조작해야 하는 번거로움을 개선할 수 있다.According to the present invention, in the energy management system, the monitoring / controlling part of a large number of devices to be monitored can be easily searched through a quick voice display and a desired point through a voice input, Can be improved.

본 발명에 의하면, 고립어를 이용한 음성인식은 다른 사용자 인터페이스의 입력 방식과 차별화된 강점으로 기능이 다양한 기기를 조작할 때 사용될 수 있다. 고립어를 이용한 음성인식은 인간에게 친숙한 정보 전달 방법이기 때문에 별도의 학습이나 훈련이 없어도 기기를 손쉽게 사용할 수 있어 사용자에게 편리함을 제공할 수 있다.According to the present invention, speech recognition using isolated words can be used when operating a variety of devices with different strengths from other user interface input methods. Since the speech recognition using isolated words is a method of communicating information familiar to humans, it is possible to easily use the device without any learning or training, thereby providing convenience to the user.

또한, 고립어를 이용한 음성인식은 실시간 정보 처리에 유용하다. 고립어를 이용한 음성인식을 이용하여 제어 명령을 하달하면 입력 속도가 타자에 비해 빠르기 때문에 고속 또는 실시간으로 정보를 처리해야 하는 경우에 신속하게 정보를 입력하거나 특정 절차를 수행할 수 있다.In addition, speech recognition using isolated words is useful for real-time information processing. Since the input speed is faster than the typing speed when the control command is issued using speech recognition using isolated words, information can be promptly inputted or a specific procedure can be performed in case of processing information at high speed or real time.

도 1은 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템을 설명하기 위한 도면이다.
도 2는 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법을 설명하기 위한 흐름도이다.
도 4 내지 도 6은 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법을 설명하기 위한 화면도이다.1 is a diagram for explaining an energy management system using isolated speech recognition according to an embodiment of the present invention.
2 is a flowchart illustrating a method of operating an energy management system using isolated speech recognition according to an embodiment of the present invention.
3 is a flowchart illustrating a method of operating an energy management system using isolated speech recognition according to an embodiment of the present invention.
4 to 6 are diagrams for explaining a method of operating an energy management system using isolated speech recognition according to an embodiment of the present invention.

이하, 첨부한 도면들을 참조하여 본 발명의 실시예들을 상세히 설명하기로 한다. 다음에 소개되는 실시예들을 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 예로서 제공되는 것이다. 따라서, 본 발명은 이하 설명되는 실시예들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 그리고, 도면들에 있어서, 구성요소의 폭, 길이, 두께 등은 편의를 위하여 과장되어 표현될 수 있다. 명세서 전체에 걸쳐서 동일한 참조번호들은 동일한 구성요소들을 나타낸다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The following embodiments are provided by way of example so that those skilled in the art can fully understand the spirit of the present invention. Therefore, the present invention is not limited to the embodiments described below, but may be embodied in other forms. In the drawings, the width, length, thickness, and the like of the components may be exaggerated for convenience. Like reference numerals designate like elements throughout the specification.

도 1은 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템을 설명하기 위한 도면이다.1 is a diagram for explaining an energy management system using isolated speech recognition according to an embodiment of the present invention.

도 1을 참조하면, 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템은 데이터 저장부(110), 마이크(120), 음성 처리부(130), 운전 조작부(140), 화면 정보 처리부(150)를 포함하여 구성된다.Referring to FIG. 1, an energy management system using isolated speech recognition according to an embodiment includes a data storage unit 110, a microphone 120, a voice processing unit 130, a driving operation unit 140, a screen information processing unit 150, .

데이터 저장부(110)는 에너지 관리 시스템의 운전 조작에 필요한 기능을 실행시키기 위한 음성 제어 명령별 고립어 음성 DB를 저장할 수 있다.The data storage unit 110 may store an isolated speech voice DB for each voice control command for executing a function required for a driving operation of the energy management system.

마이크(120)는 급전원의 음성 명령을 수신하는 기능을 수행한다.The microphone 120 functions to receive a voice command of the power source.

음성 처리부(130)는 설정된 기능키가 실행되면 마이크를 통해 음성 명령을 수신하고, 그 수신된 음성 명령에 대하여 고립어 인식을 수행하여 음성 제어 명령을 추출할 수 있다.When the set function key is executed, the voice processing unit 130 receives the voice command through the microphone and performs isolated word recognition on the received voice command to extract the voice control command.

음성 처리부(130)는 EMS 플랫폼 화면 인터페이스에 상응하여 동작하는 음성인식 엔진을 포함할 수 있다. 음성 처리부(130)는 음성 인식 엔진으로부터 음성 명령을 전달하고 음성 정보에 대한 매칭 전처리 작업을 거친 후 미리 정해 둔 고립어 정보를 음성 DB로부터 조회하여 음성 명령에 대한 결과를 사용자 GUI에 화면으로 제공할 수 있다.The voice processing unit 130 may include a voice recognition engine that operates in accordance with the EMS platform screen interface. The voice processing unit 130 transmits a voice command from the voice recognition engine and performs a matching preprocessing operation on the voice information. Then, the voice processor 130 inquires of the voice DB about the predetermined alien language information and provides the result of the voice command to the user GUI have.

운전 조작부(140)는 데이터 저장부에 저장된 고립어 음성 DB에 기반하여 추출된 음성 제어 명령에 해당하는 운전 조작을 실행할 수 있다.The driving operation unit 140 can execute a driving operation corresponding to the voice control command extracted based on the isolated voice DB stored in the data storage unit.

화면 정보 처리부(150)는 운전 조작 실행 화면 정보를 제공한다.The screen information processing unit 150 provides driving operation execution screen information.

도 2는 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법을 설명하기 위한 흐름도이다.2 is a flowchart illustrating a method of operating an energy management system using isolated speech recognition according to an embodiment of the present invention.

도 2를 참조하면, 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법은 고립어 음성 DB를 구축하는 단계(S1), 음성 명령을 수신하는 단계(S2), 음성 명령을 추출하는 단계(S3), 운전 조작 실행 및 화면 정보 제공 단계(S4)를 포함할 수 있다.Referring to FIG. 2, a method of operating an energy management system using isolated speech recognition according to an embodiment of the present invention includes constructing a isolated speech DB (S1), receiving a voice command (S2) (S3), a driving operation execution, and a screen information providing step (S4).

고립어 음성 DB 구축 단계(S1)는 에너지 관리 시스템의 운전 조작에 필요한 기능을 실행시키기 위한 음성 제어 명령별 고립어 음성 DB를 구축할 수 있다.The isolated-speech DB construction step S1 can construct a isolated-speech voice DB for each voice control command for executing functions necessary for driving operation of the energy management system.

음성인식기술을 적용하기 위해서는 음성인식 구조가 시스템에 적용되어야 한다. 이를 위해 음성 DB가 구축되어야 한다. In order to apply the speech recognition technology, the speech recognition structure must be applied to the system. For this purpose, a voice DB should be constructed.

음성 제어 명령별 고립어 음성 DB를 구축하는 것은 음소 DB 구축과 고립어 음성 DB 구축을 포함할 수 있다. The construction of the isolated speech DB for each voice control command may include a phonemic DB construction and an isolated voice DB construction.

음소 DB 구축은 다양한 사람들의 음소를 수집하여 수집된 음소를 모델링하여 음소 DB를 구축하는 것을 포함할 수 있다.The phoneme database construction may include building a phoneme database by modeling phonemes collected by collecting phonemes of various people.

그 다음 EMS 시스템에서 주로 사용될 고립어를 미리 입력하여 음성 DB가 구축될 수 있다. 고립어 음성 DB 구축은 에너지 관리 시스템의 운전 조작에 주로 사용될 제어 명령에 해당하는 고립어를 입력받아 음소 DB에 기반하여 고립어 음성 DB를 구축하는 것을 포함할 수 있다.Then, the voice DB can be constructed by preliminarily inputting isolated words to be used mainly in the EMS system. The construction of the isolated word DB may include constructing the isolated word speech DB based on the phoneme DB by inputting the isolated word corresponding to the control command to be used mainly in the driving operation of the energy management system.

음성 제어 명령별 고립어 음성 DB를 구축하는 것은 에너지 관리 시스템의 운전 조작에 필요한 기능을 카테고리별로 구분하여 고립어 음성 DB를 구축하는 것을 포함할 수 있다.The construction of the isolated voice DB for each voice control command may include building a voice DB for the isolated voice by classifying functions necessary for driving operation of the energy management system into categories.

음성 명령 수신 단계(S2)는 고립어 음성 설정된 기능키가 실행되면 마이크를 통해 음성 명령을 수신하는 것을 포함할 수 있다.The voice command receiving step S2 may include receiving a voice command through the microphone when the function key set as the isolated voice is executed.

음성 제어 명령 추출 단계(S3)는 상기 수신된 음성 명령에 대하여 고립어 인식을 수행하여 음성 제어 명령을 추출하는 것을 포함할 수 있다.The voice control command extraction step S3 may include extracting a voice control command by performing isolated recognition on the received voice command.

운전 조작 실행 및 화면 정보 제공 단계(S4)는 고립어 음성 DB에 기반하여 추출된 음성 제어 명령에 해당하는 운전 조작을 실행하고, 운전 조작 실행 화면 정보를 제공하는 것을 포함할 수 있다. 즉, 급전원의 음성이 마이크를 통해 입력되면 음성의 시작과 끝 포인트를 수집하고 음성을 데이터 패킷화하여 미리 정의된 음성 DB와 데이터를 비교 분석하여 시스템이 원하는 동작을 지시하게 된다.The driving operation execution and screen information providing step S4 may include executing a driving operation corresponding to the voice control command extracted based on the isolated voice DB and providing driving operation execution screen information. That is, when the voice of the power source is input through the microphone, the start and end points of the voice are collected and the voice is data packetized, and the system compares and analyzes the predefined voice DB and instructs the desired operation.

도 3은 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법을 설명하기 위한 흐름도이다.3 is a flowchart illustrating a method of operating an energy management system using isolated speech recognition according to an embodiment of the present invention.

도 3을 참조하면, 고립어 음성 인식을 이용한 에너지 관리를 위해 에너지 관리 시스템의 감시 화면 정보를 제공하는 단계가 수행될 수 있다(S11).Referring to FIG. 3, a step of providing monitoring screen information of the energy management system for energy management using isolated speech recognition can be performed (S11).

EMS 시스템(100)에서 급전원은 미리 설정되어 정의된 키워드(이하, 고립어)를 음성 입력 장치를 이용하여 사용자 정의 인터페이스를 손쉽게 실행할 수 있다. 그리고 원격에서 운영 중인 장치(RTU, IED)의 모니터링 및 제어 화면 조작을 할 수 있다.In the EMS system 100, the power supply can easily execute a user-defined interface by using a predetermined keyword to define a keyword (hereinafter referred to as an isolated word) using a voice input device. You can also monitor and control the remote devices (RTU, IED).

감시 화면 정보가 제공되면 마이크를 통해 음성 명령이 입력되는지 여부를 주기적으로 판단하는 단계가 수행될 수 있다(S12).If the monitoring screen information is provided, a step of periodically determining whether a voice command is inputted through the microphone may be performed (S12).

음성 명령이 입력되면 해당 음성 명령을 수신하고 고립어 인식을 수행하여 급전원의 음성 명령을 추출하는 단계가 수행될 수 있다(S13).When the voice command is input, a step of receiving the voice command and performing isolated word recognition to extract a voice command of the power source may be performed (S13).

즉, 급전원의 음성이 마이크를 통해 입력되면 음성의 시작과 끝 포인트를 수집하고 음성을 데이터 패킷화하여 미리 정의된 음성 DB와 데이터를 비교 분석하여 시스템이 원하는 운전 조작을 실행하고 화면 정보를 제공한다(S14).That is, when the voice of the power source is inputted through the microphone, the start and end points of the voice are collected and the voice is data packetized, and the system compares and analyzes the predefined voice DB, (S14).

즉, 기존의 마우스, 키보드 조작이 음성으로 입력된 키워드를 해석하여 해당 화면을 실행시키고 제어 명령을 전달하는 일련의 과정을 EMS 시스템의 내부적인 처리 로직으로 수행된다.That is, a series of processes of interpreting a keyword inputted by a voice of an existing mouse and keyboard operation and executing a corresponding screen and transmitting a control command are performed by the internal processing logic of the EMS system.

음성인식 처리 단계에서 음성명령을 인식하기 위해 Push Button, Keyword Wake-Up, Stand-By 방식이 사용될 수 있다. 본 발명의 일실시예에서는 Push Button 방식을 적용할 수 있다. Push Button 방식의 경우, 시스템에 미리 설정된 기능키를 누르면 음성 입력이 가능한 모드로 전환될 수 있다. 인식된 고립어에 따라 발음이 완료되면 자동적으로 다음 입력을 위한 모드로 전환되거나 음성 명령에 대한 기능이 수행될 수 있다. Push Button, Keyword Wake-Up, and Stand-By methods can be used to recognize a voice command in the speech recognition processing step. In an embodiment of the present invention, a push button method can be applied. In the case of the push button method, the mode can be switched to a voice input mode by pressing a function key preset in the system. When the pronunciation is completed according to the recognized isolated word, it is automatically switched to the mode for the next input or the function for the voice command can be performed.

이러한 방식을 적용한 이유는 Keyword Wake-Up, Stand-By 방식은 사용자가 한 번의 키 입력을 줄일 수 있으나 지속적으로 음성 입력을 체크하는 프로세스가 시스템에 동작해야 하므로 CPU의 부하가 많아지고 오인식의 위험이 많아질 수 있기 때문이다.This method is applied because Keyword Wake-Up and Stand-By methods can reduce the number of keystrokes by one user but the process of continuously checking the voice input must be operated on the system, This is because it can increase.

고립어 관리에서는 특정 파일에 이미 지정한 [Input, Output, Category] 형태의 데이터 DB를 구축하여 Input은 음소, Output은 명령에 대한 액션, Category는 EMS 시스템에서 동작 중인 프로세스 ID와 같은 데이터를 DB화하여 생성할 수 있다.In the isolated word management, the data DB of [input, output, category] type that is already specified in the specific file is constructed, the input is the phoneme, the output is the action for the command, and Category is the data of the process ID can do.

음소 DB는 예를 들어, PWSTT_MODEL2012.bin 이라는 음소 DB를 적용하여 수 많은 사람들의 음소 정보를 수집한 DB를 시스템에 별도의 프로세스로 동작을 시킬 수 있다. 한국어뿐 만 아니라 외국어 음소를 별도의 동적 라이브러리 형태로 구축하여 런 타임(Run Time)에 적절한 라이브러리를 로딩하여 실행시킬 수 있다. 예를 들어, 실시간 그래픽 화면과 음성인식 엔진과의 연계를 위한 예를 들어 PowerSTT라는 개발용 SDK를 이용하여 시스템이 구현될 수 있다.For example, a phoneme database called PWSTT_MODEL2012.bin may be applied to a phoneme database, and a DB that collects a large number of people's phoneme information can be operated as a separate process in the system. In addition to Korean, foreign language phonemes can be constructed as separate dynamic libraries to load and run the appropriate library for run time. For example, the system can be implemented using a development SDK called PowerSTT for linkage with a real-time graphic screen and a speech recognition engine.

도 4 내지 도 6은 본 발명의 일실시예에 따른 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법을 설명하기 위한 화면도이다.4 to 6 are diagrams for explaining a method of operating an energy management system using isolated speech recognition according to an embodiment of the present invention.

도 4 내지 도 6을 참조하여, 에너지 관리 시스템에서 조류 계산과 그에 따른 음성 인식 화면의 전개를 설명하도록 한다.With reference to Figs. 4 to 6, the description will be made of development of algae calculation and corresponding speech recognition screen in the energy management system.

에너지 관리 시스템(100)에서의 조류 계산은 사용자가 지정한 해석옵션으로 조류계산을 수행하여 각 모선 및 노드의 전압크기와 각도를 계산할 수 있다. 에너지 관리 시스템(100)은 이러한 연산을 통해 각 선로의 조류(유효전력, 무효전력) 및 관리처별, 지역별 조류 량을 계산하며 알람/위반 결과를 보여 줄 수 있다.The algae calculation in the energy management system 100 can calculate the voltage magnitude and angle of each bus and node by performing algae calculation with user-specified analysis option. The energy management system 100 can calculate the algae (active power, reactive power) of each line and the management amount and the amount of algae per region through the calculation, and can display alarm / violation results.

이러한 단계를 음성 명령으로 수행할 경우에는 우선 시스템이 동작 중이고 콘솔 화면이 실행이 이미 되어 있는 상태에서 푸쉬 버튼(Push Button) 방식으로 음성 명령을 내린다. When this step is performed by a voice command, a voice command is issued by a push button method while the system is in operation and the console screen has already been executed.

예를 들어, 에너지 관리 시스템(100)은 화면에 도 4에 도시된 바와 같은 음성 명령 입력 화면을 출력한다. 이에 따라, 급전원은 음성 명령을 지시한다. 즉 음성인식으로 수행 시 일련의 단계를 마이크 입력 장치로 이미 정의된 음성 입력 명령(ex, 조류 계산 수행)이 전달되면, 에너지 관리 시스템(100)은 도 5에 도시되어 있는 조류 계산을 위한 단계별 화면을 제공하고 도 6에 도시되어 있는 최종 조류 계산된 요약 화면을 출력할 수 있다. 매크로 프로그램처럼 미리 지정된 절차대로 컨트롤이 동작하고 화면 전환이 이루어지는 것이다. 에너지 관리 시스템(100)은 계통 요약 화면으로 조류 계산 이전/후의 조류 량과 변전소 전류량을 출력할 수 있다. 에너지 관리 시스템(100)은 HVDC 선로에 대한 상세 정보를 제공하고 C/S간의 연결 정보와 조류계산 이전/후의 조류량과 DC라인의 전류량을 확인할 수 있는 화면을 제공할 수 있다.For example, the energy management system 100 outputs a voice command input screen as shown in FIG. 4 on the screen. Thus, the power supply instructs voice commands. That is, when a voice input command (ex, execution of algae calculation) already defined in the microphone input device is transmitted in a series of steps when performing voice recognition, the energy management system 100 displays a step-by- And output the final bird-calculated summary screen shown in FIG. Like the macro program, the control is operated according to a predetermined procedure and the screen switching is performed. The energy management system 100 can output the amount of the algae before and after the algae calculation and the amount of the substation current by the system summary screen. The energy management system 100 provides detailed information on the HVDC line and can provide a screen for checking the connection information between C / S, the amount of the bird before and after the calculation of the tide, and the amount of current of the DC line.

본 발명의 다른 실시예에서는 도 5에 도시된 조류 계산을 위한 단계별 화면을 생략하고, 도 6에 도시되어 있는 최종 조류 계산 요약 화면만을 최종적으로 제공할 수도 있다.In another embodiment of the present invention, it is also possible to omit the step-by-step screen for calculating the algae shown in Fig. 5 and to finally provide only the final algae calculation summary screen shown in Fig.

따라서, 본 발명에 의한 에너지 관리 시스템에 의하면, 음성 입력 장치를 이용하여 명령을 수행하면 바로 원하는 화면을 실행시킬 수 있다. 이렇게 함으로써 현장 설비 감시를 위한 모니터링 화면을 키보드와 마우스를 이용하여 몇 번의 조작으로 사용자 인터페이스를 실행시켜야 하는 종래의 번거로운 과정을 해결할 수 있다.Therefore, according to the energy management system of the present invention, when a command is performed using a voice input device, a desired screen can be immediately executed. By doing so, it is possible to solve the conventional troublesome process of executing the user interface with a few operations by using the keyboard and the mouse as the monitoring screen for monitoring the on-site facilities.

특히, 알람 화면과 같은 EMS 시스템에서 중요한 제어 화면을 손쉽고 빠르게 실행이 가능하다. 시스템에서는 감시해야 하는 장치의 모니터링 정보 확인/제어 명령에 대한 처리를 음성 명령을 통해서 수행하면 빠른 화면 전개와 원하는 포인트를 손쉽게 검색할 수 있으므로 기존의 마우스, 키보드를 이용하여 여러 번 조작해야 하는 번거로움이 없어진다.Especially, it is possible to execute important control screen easily and quickly in EMS system such as alarm screen. In the system, if the monitoring information check / control command of the device to be monitored is processed through the voice command, it is possible to quickly search for a desired screen and easily search for a desired point. Therefore, it is troublesome to operate it by using a conventional mouse and keyboard .

Claims (4)

에너지 관리 시스템의 운전 조작에 필요한 기능을 실행시키기 위한 음성 제어 명령별 고립어 음성 DB를 구축하는 단계;
음성명령을 인식하기 위한 기능키가 입력되면 마이크를 통해 음성 명령을 수신하는 단계;
상기 수신된 음성 명령에 대하여 고립어 인식을 수행하여 음성 제어 명령을 추출하는 단계;
상기 고립어 음성 DB에 기반하여 상기 추출된 음성 제어 명령에 해당하는 운전 조작을 실행하고, 상기 음성 명령에 따라 실행되는 단계별 화면 또는 요약화면을 제공하는 단계를 포함하는 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전전 방법.Constructing an isolated speech voice DB for each voice control command for executing functions necessary for driving operation of the energy management system;
Receiving a voice command via a microphone when a function key for recognizing a voice command is input;
Extracting a voice control command by performing isolated word recognition on the received voice command;
Performing a driving operation corresponding to the extracted voice control command on the basis of the isolated voice DB and providing a step-by-step screen or a summary screen executed in accordance with the voice command; Before driving. 제1 항에 있어서, 상기 음성 제어 명령별 고립어 음성 DB를 구축하는 단계는,
사람의 음소를 수집하여 수집된 음소를 모델링하여 음소 DB를 구축하는 단계; 및
상기 에너지 관리 시스템의 운전 조작에 사용될 제어 명령에 해당하는 고립어를 입력받아 상기 음소 DB에 기반하여 고립어 음성 DB를 구축하는 단계를 포함하는 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법.2. The method of claim 1, wherein the step of constructing the isolated-
Constructing a phoneme database by modeling phonemes collected by collecting phonemes of a person; And
And a step of constructing an isolated speech DB based on the phonemic database by receiving an isolated word corresponding to a control command to be used in a driving operation of the energy management system. 제1 항에 있어서,
상기 음성 제어 명령별 고립어 음성 DB를 구축하는 단계는, 상기 에너지 관리 시스템의 운전 조작에 필요한 기능을 카테고리별로 구분하여 고립어 음성 DB를 구축하는 단계를 더 포함하는 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법.The method according to claim 1,
Wherein the step of constructing the isolated voice DB for each voice control command further comprises the step of constructing an isolated voice DB by classifying functions necessary for driving operation of the energy management system by category, Way. 제1 항에 있어서,
상기 에너지 관리 시스템의 감시 화면 정보를 제공하는 단계;
상기 감시 화면 정보가 제공되면 마이크를 통해 음성 명령이 입력되는지 여부를 주기적으로 판단하는 단계; 및
음성 명령이 입력되면 해당 음성 명령을 수신하고 고립어 인식을 수행하여 음성 제어 명령을 추출하는 단계를 더 포함하는 고립어 음성 인식을 이용한 에너지 관리 시스템의 운전 방법.The method according to claim 1,
Providing monitoring screen information of the energy management system;
If the monitoring screen information is provided, periodically determining whether a voice command is inputted through a microphone; And
Further comprising the steps of: receiving a voice command and extracting a voice control command by receiving the voice command and recognizing the isolated word; and operating the energy management system using the isolated voice recognition.
KR1020130009961A 2013-01-29 2013-01-29 Operation method of energy management system using an isolated language voice recognition KR101433506B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130009961A KR101433506B1 (en) 2013-01-29 2013-01-29 Operation method of energy management system using an isolated language voice recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130009961A KR101433506B1 (en) 2013-01-29 2013-01-29 Operation method of energy management system using an isolated language voice recognition

Publications (2)

Publication Number Publication Date
KR20140096844A KR20140096844A (en) 2014-08-06
KR101433506B1 true KR101433506B1 (en) 2014-08-22

Family

ID=51744615

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130009961A KR101433506B1 (en) 2013-01-29 2013-01-29 Operation method of energy management system using an isolated language voice recognition

Country Status (1)

Country Link
KR (1) KR101433506B1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108447475A (en) * 2018-03-02 2018-08-24 国家电网公司华中分部 A kind of method for building up of the speech recognition modeling based on electric power dispatching system
CN110807574B (en) * 2019-10-09 2022-08-02 广东电网有限责任公司广州供电局 Intelligent power dispatching method, device and system
CN117079652B (en) * 2023-10-16 2024-01-30 明度智云(浙江)科技有限公司 SCADA system voice control method, SCADA system voice control device and SCADA system server

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2708566B2 (en) * 1989-09-06 1998-02-04 株式会社日立製作所 Voice recognition control device
JP2007171963A (en) * 2005-12-20 2007-07-05 Karl Storz Endoskop Produktions Gmbh Simultaneous support of isolated and connected phrase command recognition in automatic speech recognition systems
KR101059813B1 (en) 2004-08-13 2011-08-26 삼성전자주식회사 Electric equipment with voice recognition function and control method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2708566B2 (en) * 1989-09-06 1998-02-04 株式会社日立製作所 Voice recognition control device
KR101059813B1 (en) 2004-08-13 2011-08-26 삼성전자주식회사 Electric equipment with voice recognition function and control method
JP2007171963A (en) * 2005-12-20 2007-07-05 Karl Storz Endoskop Produktions Gmbh Simultaneous support of isolated and connected phrase command recognition in automatic speech recognition systems

Also Published As

Publication number Publication date
KR20140096844A (en) 2014-08-06

Similar Documents

Publication Publication Date Title
KR102677454B1 (en) Event argument extraction method, event argument extraction apparatus and electronic device
CN111429915A (en) Scheduling system and scheduling method based on voice recognition
CN104899002A (en) Conversation forecasting based online identification and offline identification switching method and system for robot
CN110517685A (en) Audio recognition method, device, electronic equipment and storage medium
CN106504748A (en) Voice control method and device
CN113314106A (en) Electric power information query and regulation function calling method based on voice and intention recognition
CN106356057A (en) Speech recognition system based on semantic understanding of computer application scenario
CN112632288A (en) Power dispatching system and method based on knowledge graph
CN108470568A (en) intelligent device control method and device, storage medium and electronic device
CN111179928A (en) Intelligent control method for power transformation and distribution station based on voice interaction
KR101433506B1 (en) Operation method of energy management system using an isolated language voice recognition
CN112669842A (en) Man-machine conversation control method, device, computer equipment and storage medium
CN113516964B (en) Speech synthesis method and readable storage medium
CN109766451A (en) A kind of cloud computing platform and its scheduling, data analysing method
CN113140219A (en) Regulation and control instruction generation method and device, electronic equipment and storage medium
CN111555247A (en) Switching operation control method, device, equipment and medium for power equipment
CN114694644A (en) Voice intention recognition method and device and electronic equipment
CN112908328B (en) Device control method, system, computer device and storage medium
CN112802460B (en) Space environment forecasting system based on voice processing
CN104679733A (en) Voice conversation translation method, device and system
CN106372203A (en) Information response method and device for smart terminal and smart terminal
CN106782546A (en) Audio recognition method and device
CN113470650A (en) Operation ticket anti-error method based on voice recognition
CN115713936A (en) Voice control method and device based on smart home
CN115470798A (en) Training method of intention recognition model, intention recognition method, device and equipment

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170703

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180702

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190701

Year of fee payment: 6