KR101398434B1 - Voice command method editing method for universal remocon app - Google Patents

Voice command method editing method for universal remocon app Download PDF

Info

Publication number
KR101398434B1
KR101398434B1 KR1020130169426A KR20130169426A KR101398434B1 KR 101398434 B1 KR101398434 B1 KR 101398434B1 KR 1020130169426 A KR1020130169426 A KR 1020130169426A KR 20130169426 A KR20130169426 A KR 20130169426A KR 101398434 B1 KR101398434 B1 KR 101398434B1
Authority
KR
South Korea
Prior art keywords
command
voice
editing
screen
input
Prior art date
Application number
KR1020130169426A
Other languages
Korean (ko)
Inventor
이성섭
Original Assignee
주식회사 서비전자
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 서비전자 filed Critical 주식회사 서비전자
Priority to KR1020130169426A priority Critical patent/KR101398434B1/en
Application granted granted Critical
Publication of KR101398434B1 publication Critical patent/KR101398434B1/en
Priority to PCT/KR2014/012183 priority patent/WO2015102258A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/38Creation or generation of source code for implementing user interfaces
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

Disclosed is a method for editing a voice command for a universal remote application, which is capable of improving the recognition rate of the voice command by enabling a user to add a desired command to voice commands for the universal remote application installed on a smart device or to edit a voice command. A process of operating the universal remote application according to the present invention comprises the steps of: determining whether the editing of a voice command is selected in the configuration; guiding the selection of a device to be controlled for the editing of the voice command when the editing of the voice command is selected; providing a popup screen to select a type of the voice command, set to control an operation of a device to be controlled, and an editing form of the voice command when the device to be controlled is selected for the editing of the voice command; providing a popup screen to input a voice command using a text when the editing form of the voice command is selected by an input of the text, and the voice command to be edited is selected; and registering an edited lower command under a basic command when a new voice command is inputted by a text on the popup screen, and an input of a check button is detected.

Description

통합리모콘 앱의 음성명령어 편집방법{VOICE COMMAND METHOD EDITING METHOD FOR UNIVERSAL REMOCON APP}VOICE COMMAND METHOD EDITING METHOD FOR UNIVERSAL REMOCON APP -

본 발명은 통합리모콘 앱의 음성명령어 편집방법에 관한 것으로, 보다 더 상세하게는 스마트기기에 설치되는 통합리모콘 앱의 음성명령어를 사용자가 원하는 명령어로 추가 및 편집할 수 있도록 하여 음성명령어의 인식율 향상을 제공할 수 있도록 하는 통합리모콘 앱의 음성명령어 편집방법에 관한 것이다.The present invention relates to a method of editing a voice command in an integrated remote control application, and more particularly, to a voice command editing method in an integrated remote control app installed in a smart device, And to provide a method for editing a voice command of a integrated remote control app.

최근 들어 스마트 폰, 스마트 패드, 태블릿 PC 등을 포함하는 스마트기기의 보급이 빠른 속도로 진행되어 사람들마다 적어도 한 대 이상의 스마트기기를 보유하고 있다.In recent years, the spread of smart devices including smart phones, smart pads, and tablet PCs has progressed at a rapid pace, and each person has at least one smart device.

스마트기기는 주변의 전기/전자기기를 블루투스(Bluetooth)통신이나 와이파이(WiFi)통신 혹은 NFC(Near Field Communication) 통신 중 어느 하나의 무선통신으로 접속하여 키보드 기능, 마우스 기능, 터치 기능 등을 포함하는 다양한 기능에 대하여 인터페이스를 제공할 수 있다.The smart device connects the surrounding electric / electronic device with any one of Bluetooth communication, WiFi communication, or Near Field Communication (NFC) communication and includes a keyboard function, a mouse function, a touch function, You can provide an interface for various functions.

스마트기기는 앱 스토어(App Store) 혹은 안드로이드 마켓(Android Market) 등에서 다양한 개발자가 제공하는 리모콘 앱(APP)을 다운로드받아 설치한 다음 리모콘 앱을 실행시켜 가정이나 사무실내에 설치된 전기/전자기기의 동작을 제어할 수 있다.Smart devices download and install a remote control app (APP) provided by various developers in the App Store or Android Market, and then run the remote control app to operate the electric / electronic devices installed in the home or office. Can be controlled.

이와 같이 개인용 스마트기기의 보급이 보편화됨에 따라 전기/전자기기의 제어와 각종 생활정보에 대한 접근성이 용이하게 되었고, 스마트기기에 탑재된 음성 인식기능의 성능이 향상됨에 따라 음성 인식기능의 활용도가 점점 높아지고 있다.As the spread of personal smart devices becomes widespread, the control of electric / electronic devices and access to various living information become easy, and the performance of the voice recognition function mounted on the smart device is improved, It is getting higher.

스마트기기에 탑재된 음성인식 기능은 일률적인 음성명령어만을 인식할 수 있으므로 억양(사투리), 음성 명령어의 형식, 국가별 언어 등이 변경되면 음성명령어를 인식할 수 없게 된다.Since the voice recognition function installed in the smart device can recognize only a uniform voice command, the voice command can not be recognized when the accent (dialect), the format of the voice command, and the language of the country are changed.

따라서, 억양(사투리), 음성명령어의 형식, 국가별 언어에 따라 음성모델을 새로 개발하여야 하므로 과도한 시간과 비용이 들어가는 문제점이 발생될 수 있다.Therefore, it is necessary to develop a speech model according to the intonation (accent), the form of voice command, and the language of each country, which may cause an excessive time and cost.

그리고, 사용자가 음성명령어를 직접 선택 및 편집할 수 없으며, 사용자 개인별 발음, 높낮이, 억양 및 국가별 언어의 장벽을 극복하는데 많은 어려운 한계가 발생될 수 있다.In addition, the user can not directly select and edit voice commands, and there are many difficult limitations in overcoming the user's individual pronunciation, height, intonation, and language barrier.

본 발명은 이러한 문제점을 해결하고자 개발된 것으로, 그 목적은 스마트기기에 설치되는 통합리모콘 앱의 음성명령어를 사용자 자신의 발음이나 억양 등을 감안하여 인식하기 편리한 음성명령어로 추가 및 편집할 수 있도록 하여 음성 명령어의 인식율 향상을 제공하고자 한다.The present invention has been developed in order to solve such a problem, and it is an object of the present invention to add and edit a voice command of an integrated remote control app installed in a smart device with a voice command easy to recognize in consideration of a user's own pronunciation or intonation And to improve the recognition rate of voice commands.

본 발명의 실시예에 따르는 특징은 통합리모콘 앱의 운용 프로세스는 환경 설정에서 음성명령어 편집이 선택되는지 판단하는 과정; 음성명령어 편집이 선택되면 음성명령어 편집을 위한 제어대상기기 선택을 안내하는 과정; 음성명령어 편집을 위한 제어대상기기가 선택되면 동작을 제어하기 위해 설정된 음성명령어의 종류와 음성명령어의 편집 형식을 선택하는 팝업화면을 제공하는 과정; 상기 음성명령어의 편집 형식이 텍스트의 입력으로 선택되고, 편집하고자 하는 음성명령어가 선택되면 음성명령어를 텍스트로 입력할 수 있는 팝업화면을 제공하는 과정; 상기 팝업화면에 새로운 음성명령어가 텍스트로 입력되고 확인버튼 입력이 검출되면 기본명령어 아래에 편집된 하위 명령어를 등록하는 과정을 포함하는 통합리모콘 앱의 음성명령어 편집방법이 제공된다.According to an embodiment of the present invention, the operation process of the integrated remote control application may include determining whether voice command editing is selected in an environment setting; Selecting a control target device for editing a voice command when voice command editing is selected; Providing a pop-up screen for selecting a type of a voice command set for controlling an operation and an editing format of a voice command when a control target device for voice command editing is selected; Providing a pop-up screen capable of inputting a voice command as text when an editing format of the voice command is selected as an input of text and a voice command to be edited is selected; And registering the sub-command edited under the basic command when a new voice command is input as text and a confirmation button input is detected on the pop-up screen.

상기 음성명령어의 편집 형식을 선택하는 팝업화면은 음성명령어의 편집을 텍스트의 입력으로 실행할 것인지 음성입력으로 실행할 것인지를 선택할 수 있다.The pop-up screen for selecting the editing format of the voice command can be selected by editing the voice command by executing text input or voice input.

상기 음성명령어를 편집하는 팝업화면은 기본명령어를 제공하는 화면과 편집되는 새로운 음성명령어를 텍스트로 입력하는 화면을 포함할 수 있다.The pop-up screen for editing the voice command may include a screen for providing a basic command and a screen for inputting a new voice command to be edited as text.

상기 팝업화면에 텍스트로 입력되는 새로운 명령어는 사용자의 발음, 억양, 사투리, 사용자의 기억력이 적용되는 음성명령어로 편집될 수 있다.A new command entered as text on the pop-up screen can be edited with voice commands that are applied to the user's pronunciation, intonation, dialect, and user's memory.

상기 기본명령어 아래에 편집된 하위 명령어에 대하여 재편집이 실행되면 기본명령어 아래에 편집된 하위 명령어가 등록되고, 편집된 하위 명령어 아래에 재편집된 새로운 명령어가 등록될 수 있다.When the reediting is performed on the subordinate command edited under the basic command, the edited subordinate command is registered under the basic command, and a new command reedited under the edited subordinate command can be registered.

상기 팝업화면에서 음성명령어의 편집이 음성 입력으로 선택되고, 편집하고자 하는 음성명령어가 선택되면 음성입력을 검출하는 팝업화면을 제공하는 과정; 상기 음성입력이 검출되면 인식된 입력음성을 팝업화면으로 제공하고, 인식된 음성입력이 맞거나 원하는 명령어인지를 확인 요청하는 과정; 상기 인식된 음성입력이 맞거나 원하는 명령어의 입력으로 확인되면 기본명령어 아래에 음성인식으로 편집된 하위 명령어를 등록하는 과정을 포함할 수 있다.Providing a pop-up screen for detecting a voice input when the voice command is edited on the pop-up screen and the voice command to be edited is selected; Providing a recognized input voice as a pop-up screen when the voice input is detected, and requesting confirmation of whether the recognized voice input is correct or a desired command; And registering the sub-command edited by the speech recognition under the basic command if the recognized voice input is correct or the input of the desired command is confirmed.

상기 인식된 음성입력이 맞거나 원하는 명령어의 입력인지의 확인 요청은 사투리나 발음의 문제로 인식 결과물인 문자 텍스트가 틀리더라로 기본명령어 아래에 음성인식으로 편집된 하위 명령어를 등록될 수 있다.A request to confirm whether the recognized voice input is correct or an input of a desired command may be registered as a sub-command edited by speech recognition under a basic command because the character text, which is a recognition result, is wrong due to a problem of dialect or pronunciation.

상기 기본명령어 아래에 편집되는 하위 명령어는 편집 및 추가에 따라 기본 명령어 + n 개로 구성될 수 있다.The subcommands edited under the basic commands can be composed of + n basic commands according to editing and addition.

상기 통합리모콘 앱의 운용 프로세스는 환경설정에서 방송사 바로가기 채널의 편집이 선택되면 방송사 바로가기 채널의 편집 형식을 선택할 수 있는 팝업화면을 제공하는 과정; 상기 방송사 바로가기 채널의 편집이 텍스트 입력으로 선택되면 텍스트의 입력으로 방송사 바로가기 채널을 편집할 수 있는 팝업화면으로 제공하는 과정; 상기 팝업화면을 통해 텍스트가 입력되어 방송사 바로가기 채널이 편집되면 새로운 방송사 바로가기 채널로 등록 저장하는 과정을 포함할 수 있다.Wherein the operation process of the integrated remote control application comprises the steps of: providing a pop-up screen capable of selecting an editing format of a broadcaster shortcut channel when editing of a broadcaster shortcut channel is selected in an environment setting; Providing a pop-up screen for editing a shortcut channel of a broadcaster by inputting a text if editing of the shortcut channel of the broadcaster is selected as a text input; And inputting text through the pop-up screen and editing a shortcut channel of the broadcast station, the program being registered as a new channel shortcut channel.

상기 방송사 바로가기 채널을 편집할 수 있는 팝업화면에는 특정 방송사의 이름을 텍스트로 입력할 수 있는 편집화면; 특정 방송사의 채널번호를 텍스트로 입력할 수 있는 편집화면; 특성 방송사 채널이 케이블 방송에서 사용되는 채널번호로 입력할 수 있는 편집화면을 포함할 수 있다.A pop-up screen for editing the shortcut channel of the broadcaster, an edit screen for inputting the name of a specific broadcaster as text; An editing screen capable of inputting a channel number of a specific broadcasting company as text; The characteristic broadcasting channel may include an editing screen that can be input by the channel number used in the cable broadcasting.

상기 방송사 바로가기 채널을 편집할 수 있는 팝업화면에 채널 업/다운 버튼을 제공하여 선국되는 채널을 확인하면서 방송사 바로가기 채널의 설정을 제공할 수 있다.A channel up / down button may be provided on a pop-up screen for editing the broadcast station shortcut channel to provide a setting of a broadcast station shortcut channel while confirming the selected channel.

상기 환경설정에서 방송사 바로가기 채널의 편집이 선택되고, 방송사 바로가기 채널의 편집이 음성입력으로 선택되면 음성 입력을 검출하는 팝업화면을 제공하는 과정; 상기 음성입력이 검출되면 인식된 입력음성을 팝업화면으로 제공하고, 인식된 음성입력이 맞거나 원하는 명령어인지를 확인 요청하는 과정; 상기 인식된 음성입력이 맞거나 원하는 명령어로 확인되면 음성 인식된 방송사 정보, 방송사의 채널번호, 케이블 방송에서 사용되는 채널번호로 제공하고, 편집 완료에 따라 새로운 방송사 바로가기 채널로 등록 저장하는 과정을 포함할 수 있다.Providing a pop-up screen for detecting a voice input when editing of a broadcast station shortcut channel is selected in the environment setting, editing of a broadcast channel shortcut channel is selected as voice input; Providing a recognized input voice as a pop-up screen when the voice input is detected, and requesting confirmation of whether the recognized voice input is correct or a desired command; If the recognized voice input is correct or confirmed by a desired command, the process of providing the recognized voice information, the channel number of the broadcasting company, and the channel number used in the cable broadcasting, .

또한, 본 발명의 다른 실시예에 따르는 특징은 음성명령어 편집이 선택되면 음성명령어 편집을 위한 제어대상기기 선택을 안내하는 과정; 제어대상기기가 선택되면 음성명령어의 편집 형식을 선택하는 팝업화면을 제공하는 과정; 상기 음성명령어의 편집 형식이 텍스트의 입력으로 선택되고, 편집하고자 하는 음성명령어가 선택되면 음성명령어를 텍스트로 입력할 수 있는 팝업화면을 제공하는 과정; 상기 팝업화면에 새로운 음성명령어가 텍스트로 입력되고 확인버튼 입력이 검출되면 기본명령어 아래에 편집된 하위 명령어를 등록하는 과정; 상기 음성명령어의 편집 형식이 음성 입력으로 선택되고, 편집하고자 하는 음성입력이 검출되면 인식된 입력음성을 팝업화면으로 제공함과 동시에 인식된 음성입력이 맞거나 원하는 명령어인지를 확인 요청하는 과정; 상기 인식된 음성입력이 맞거나 원하는 명령어의 입력으로 확인되면 기본명령어 아래에 음성인식으로 편집된 하위 명령어를 등록하는 과정을 포함하는 통합리모콘 앱의 음성명령어 편집방법이 제공된다.According to another aspect of the present invention, there is provided a method for editing a voice command, the method comprising: guiding selection of a control target device for editing a voice command when voice command editing is selected; Providing a pop-up screen for selecting an editing format of a voice command when a control target device is selected; Providing a pop-up screen capable of inputting a voice command as text when an editing format of the voice command is selected as an input of text and a voice command to be edited is selected; Registering a subordinate command edited under a basic command when a new voice command is input as text and a confirmation button input is detected on the pop-up screen; A step of providing a recognized input voice as a pop-up screen and confirming whether a recognized voice input is correct or a desired command, when an edit form of the voice command is selected as a voice input and a voice input to be edited is detected; And registering the sub-command edited by the voice recognition under the basic command if the recognized voice input is correct or the input of the desired command is confirmed, a voice command editing method of the integrated remote control app is provided.

이와 같이 본 발명은 스마트기기에서 통합리모콘 앱의 음성명령어를 사용자자신의 발음이나 사투리, 억양, 인식하기 편한 음성명령어로 추가 및 편집할 수 있어 음성명령어의 인식율 향상을 제공할 수 있는 효과가 있다.As described above, according to the present invention, the voice command of the integrated remote controller app can be added and edited by the user's own pronunciation, dialect, intonation, and easy-to-recognize voice command in the smart device, thereby improving the recognition rate of the voice command.

도 1은 본 발명의 실시예에 따른 통합리모콘 앱의 음성명령어 편집장치의 개략적인 구성도이다.
도 2는 본 발명의 실시예에 따른 통합리모콘 앱의 실행 화면을 개략적으로 도시한 도면이다.
도 3은 본 발명의 제1실시예에 따른 통합리모콘 앱의 음성명령어 편집절차를 개략적으로 도시한 도면이다.
도 4는 본 발명의 제2실시예에 따른 통합리모콘 앱의 음성명령어 편집절차를 개략적으로 도시한 도면이다.
도 5는 본 발명의 제3실시예에 따른 통합리모콘 앱의 음성명령어 편집절차를 개략적으로 도시한 도면이다.
도 6은 본 발명의 제4실시예에 따른 통합리모콘 앱의 음성명령어 편집절차를 개략적으로 도시한 도면이다.
FIG. 1 is a schematic block diagram of a voice command editing apparatus of an integrated remote control app according to an embodiment of the present invention.
FIG. 2 is a view schematically showing an execution screen of a combined remote control app according to an embodiment of the present invention.
FIG. 3 is a diagram schematically illustrating a procedure of editing a voice command in the integrated remote controller app according to the first embodiment of the present invention.
FIG. 4 is a diagram schematically illustrating a procedure of editing a voice command in the integrated remote controller app according to the second embodiment of the present invention.
FIG. 5 is a diagram schematically illustrating a procedure of editing a voice command in the integrated remote controller app according to the third embodiment of the present invention.
FIG. 6 is a diagram schematically illustrating a procedure of editing a voice command in the integrated remote controller app according to the fourth embodiment of the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 실시예를 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세하게 설명하면 다음과 같다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention.

본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다.The present invention may be embodied in many different forms and is not limited to the embodiments described herein.

본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 동일 또는 유사한 구성요소에 대해서는 동일한 참조 부호를 부여한다.In order to clearly illustrate the present invention, parts not related to the description are omitted, and the same or similar components are given the same reference numerals throughout the specification.

또한, 도면에서 나타난 각 구성은 설명의 편의를 위해 임의로 나타내었으므로, 본 발명이 반드시 도면에 도시된 바에 한정되지 않는다.In addition, since the components shown in the drawings are arbitrarily shown for convenience of explanation, the present invention is not necessarily limited to those shown in the drawings.

도 1은 본 발명의 실시예에 따른 통합리모콘 앱의 음성명령어 편집장치를 개략적으로 도시한 구성도이다. 1 is a block diagram schematically showing an apparatus for editing a voice command of an integrated remote control app according to an embodiment of the present invention.

도 1을 참조하면, 본 발명은 스마트기기(100)와, 스마트기기(100)와 데이터 채널로 접속되는 중계장치(300), 중계장치(300)와 제어채널로 접속되는 제어대상장치(500)를 포함한다.1, the present invention includes a smart device 100, a relay device 300 connected to a smart device 100 through a data channel, a relay device 300 and a control target device 500 connected to the smart device 100 through a control channel, .

상기 스마트기기(100)는 스마트 폰이나 스마트 패드, 태블릿 PC 중 어느 하나로 구성될 수 있으며, 통상적인 스마트기기와 동일하므로 구체적인 구성의 설명은 생략한다.The smart device 100 may be configured as any one of a smart phone, a smart pad, and a tablet PC, and is the same as a typical smart device, so that a detailed description of the configuration is omitted.

상기 스마트기기(100)와 중계장치(300)의 데이터 채널은 와이파이 통신이나 블루투스 통신 혹은 NFC 통신 중 어느 하나의 통신방식이 적용될 수 있다.The data channel of the smart device 100 and the relay device 300 may be one of a Wi-Fi communication mode, a Bluetooth communication mode, and an NFC communication mode.

상기 스마트기기(100)에는 앱 스토어 혹은 안드로이드 마켓 등에서 제공하는 통합리모콘 앱이 다운로드 되어 설치되며, 바탕화면에 통합리모콘 앱의 바로가기 아이콘이 설치된다.The smart device 100 is provided with an integrated remote control application provided in the app store or the Android market, and a shortcut icon of the integrated remote control application is installed on the desktop.

상기 앱 스토어 혹은 안드로이드 마켓 등에서 제공되는 통합리모콘 앱은 본 발명의 출원인이 개발하여 제공한 앱을 의미한다.The integrated remote control app provided in the above-mentioned app store or the Android market refers to an app developed and provided by the applicant of the present invention.

상기 스마트기기(100)에 설치된 통합리모콘 앱은 바탕화면에 제공되는 바로가기 아이콘의 터치에 따라 활성화되고, 통합리모콘 앱에는 제어대상장치(500)를 이루는 전기/전자기기 별로 리모콘이 구성되고, 각 전기/전자기기별로 구성되는 리모콘의 키에는 약정된 키 값들이 대응되어 설정된다. The integrated remote control application installed in the smart device 100 is activated according to a touch of a shortcut icon provided on the desktop, and a remote controller is configured for each electric / electronic device constituting the controlled device 500 in the integrated remote control app, The key values of the remote controller that are configured for each electric / electronic device correspond to the set key values.

상기 스마트기기(100)에 설치된 통합리모콘 앱에는 음성명령어 인식기능이 제공되며, 음성명령어 인식기능이 활성화된 후 일정시간 이내에 음성명령어의 입력이 검출되면 음성명령어의 특징 벡터를 추출하여 음성명령어를 인식한다.A voice command recognizing function is provided in the integrated remote control app installed in the smart device 100. When an input of a voice command is detected within a predetermined time after the voice command recognizing function is activated, a feature vector of the voice command is extracted to recognize a voice command do.

상기 스마트기기(100)에 설치된 통합리모콘 앱은 스마트기기(100)의 설정을 통해 음성명령어를 사용자 자신의 발음이나 억양, 사투리 및 인식하기 편리한 형태로 추가 혹은 편집할 수 있는 기능을 제공한다.The integrated remote control application installed in the smart device 100 provides a function of adding or editing a voice command in a convenient form of pronunciation, intonation, accent, and recognition through the setting of the smart device 100.

상기 스마트기기(100)에 설치된 통합리모콘 앱에서 추가 및 편집되는 새로운 음성명령어는 기본 명령어의 아래에 하위 음성명령어로 확장되어 설정된다.New voice commands added and edited in the integrated remote control app installed in the smart device 100 are extended and set as lower voice commands under the basic commands.

상기 스마트기기(100)에 설치된 통합리모콘 앱에서 음성명령의 추가 및 편집은 사용자가 직접 텍스트를 입력하는 방식, 사용자가 음성명령어로 입력하는 방식이 적용될 수 있다.In the integrated remote controller app installed in the smart device 100, a method of inputting text directly by a user or a method of inputting a voice command by a user may be applied to voice command addition and editing.

상기 중계장치(300)와 제어대상장치(500)의 제어채널은 IR통신이나 RF통신, 와이파이 통신, 블루투스 통신, 지그비(Zigbee), 지 웨이브 통신 중 어느 하나로 접속될 수 있다.The control channel of the relay device 300 and the control target device 500 may be connected by any one of IR communication, RF communication, Wi-Fi communication, Bluetooth communication, Zigbee, and geo-wave communication.

상기 중계장치(300)는 통합리모콘의 제어코드가 메모리 영역에 테이블로 설정되고, 상기 스마트기기(100)에서 전송된 데이터 패킷을 분석하여 약정된 키 값을 추출하고, 데이터베이스에 저장된 통합리모콘의 제어코드에서 대응되는 키 값에 대응되는 제어코드를 엑세스하여 매칭시킨다.The relay device 300 analyzes the data packet transmitted from the smart device 100, extracts the agreed key value, and controls the control of the integrated remote controller stored in the database The control code corresponding to the corresponding key value in the code is accessed and matched.

상기 중계장치(300)는 인식된 제어 명령어에 대응되는 제어코드가 매칭되면 제어대상장치(500)를 무선통신으로 접속하고, 제어코드를 송출시켜 제어대상장치(500)를 작동시킨다.When the control code corresponding to the recognized control command is matched, the relay device 300 connects the control target device 500 by wireless communication, and transmits the control code to operate the control target device 500.

상기 제어대상장치(500)는 가정이나 사무실 등에 설치되는 텔레비전(501), 셋탑박스(502), DVD(503), 에어컨디셔너(504), 전등(505), 커튼(506) 등을 포함하는 다양한 형태의 전기/전자기기로 구성된다.The control target device 500 may be installed in various forms including a television set 501 installed in a home or office, a set top box 502, a DVD 503, an air conditioner 504, a lamp 505, a curtain 506, Of electrical / electronic equipment.

본 발명은 앱 스토어 혹은 안드로이드 마켓으로부터 다운로드되어 스마트기기(100)에 설치된 통합리모콘 앱에서 음성명령어를 스마트기기의 환경에서 추가 및 편집할 수 있는 발명이므로, 이에 대해서만 설명한다.The present invention is an invention that can be added and edited in the environment of the smart device in the integrated remote control app downloaded from the app store or the Android market and installed in the smart device 100,

도 3은 본 발명의 제1실시예에 따른 통합리모콘 앱의 음성명령어 편집절차를 개략적으로 도시한 도면으로, 텍스트의 입력으로 음성명령어를 편집하는 절차이다.FIG. 3 is a diagram schematically illustrating a voice command editing procedure of the integrated remote controller app according to the first embodiment of the present invention, and is a procedure for editing a voice command by inputting text.

본 발명이 적용되는 스마트 폰이나 스마트 패드, 태블릿 PC 등을 포함하는 스마트기기(100)의 바탕화면에서 통합리모콘 앱이 선택되면 통합리모콘 앱이 활성화되어 예를 들어 도 2와 같이 통합리모콘의 화면을 제공한다.When the integrated remote control application is selected on the desktop of the smart device 100 including the smartphone, the smart pad, the tablet PC, and the like to which the present invention is applied, the integrated remote control application is activated, to provide.

상기 스마트기기(100)의 화면에 도 2와 같이 제공되는 통합리모콘 앱의 운용 프로세스는 설정(환경 설정)버튼의 입력이 선택되는지 판단하고, 설정(환경 설정)버튼의 입력이 검출되면 운용 프로세스는 도 3의 (a)와 같이 통합리모콘 앱을 구성하는 어플레케이션 정보, 지원모델, 음성명령편집, 음성명령목록, 음성명령채널 등으로 구성되는 설정정보(110)를 제공한다.The operation process of the integrated remote control application provided as shown in FIG. 2 on the screen of the smart device 100 determines whether the input of the setting (configuration) button is selected. When the input of the setting (configuration) As shown in FIG. 3 (a), there is provided configuration information 110 including application information, a support model, a voice command edit, a voice command list, and a voice command channel that constitute a combined remote control application.

상기 통합리모콘 앱의 운용 프로세서는 도 3의 (a) 화면에서 음성명령어 편집(111)이 선택되면 음성명령어 편집모드로 진입하여 도 3의 (b)와 같이 음성명령어를 편집할 수 있는 제어대상기기(500)의 종류를 선택할 수 있는 화면과 제어대상기기를 선택하라는 안내 메시지(121)를 제공한다.When the voice command editing (111) is selected on the screen of FIG. 3 (a), the operating processor of the integrated remote controller app enters the voice command editing mode and the control target device A screen for selecting the type of the control object 500 and a guidance message 121 for selecting the control target device.

상기 통합리모콘 앱의 운용 프로세서는 도 3의 (b) 화면에서 예를 들어 음성명령어를 편집하고자 하는 제어대상기기의 종류로 텔레비전(120)이 선택되면 도 3의 (c)와 같이 텔레비전의 각종 동작을 제어하기 위해 설정된 음성명령어의 종류(130)와 음성명령어의 추가 혹은 편집 형식을 선택할 수 있는 팝업화면(140)을 제공한다.The operation processor of the integrated remote control application displays various kinds of operations of the television as shown in FIG. 3 (c) when the television 120 is selected as the type of control target device for editing voice commands, for example, And a pop-up screen 140 for selecting a voice command to be added or edited.

그리고, 음성명령어를 추가 혹은 편집 형식을 선택할 수 있는 팝업화면(140)은 음성명령어의 추가 및 편집을 텍스트(141)의 입력으로 실행할 것인지 음성입력(142)으로 실행할 것인지를 선택할 수 있도록 한다.The pop-up screen 140, in which a voice command is added or an editing format can be selected, allows the user to select whether to add or edit a voice command by inputting text 141 or voice input 142.

상기 통합리모콘 앱의 운용 프로세스는 도 3의 (c) 화면에서 음성명령어의 편집이 텍스트(141)의 입력으로 선택되고, 편집 혹은 추가하고자 하는 음성명령어로 채널위로(150)가 선택되면 도 3의 (d)와 같이 채널위로(150)에 대하여 음성명령어를 편집 혹은 추가할 수 있도록 활성화시킨다.The operation process of the integrated remote control application is such that editing of a voice command is selected as an input of text 141 on the screen of FIG. 3 (c), and when the channel 150 is selected as a voice command to be edited or added, (d) so that voice commands can be edited or added to the channel top 150.

상기 통합리모콘 앱의 운용 프로세서는 도 3의 (d) 화면에서 편집버튼(151)의 입력이 검출되면 도 3의 (e)와 같이 텍스트의 입력으로 음성명령어를 편집할 수 있는 팝업화면(160)을 제공한다.When the input of the edit button 151 is detected on the screen of FIG. 3 (d), the operation processor of the integrated remote control application displays a pop-up screen 160 on which a voice command can be edited by inputting text as shown in FIG. 3 (e) .

상기 통합리모콘 앱의 운용 프로세서는 음성명령어를 편집할 수 있는 팝업화면(160)으로 기본명령어 정보, 예를 들어 "채널위로"를 제공하는 화면(161)과 기본명령어에 대응하여 추가 혹은 편집하고자 하는 새로운 음성명령어를 텍스트로 입력할 수 있는 화면(162)이 제공된다.The operating processor of the integrated remote control application is a pop-up screen 160 in which voice commands can be edited. A screen 161 for providing basic command information, for example, "up channel" A screen 162 for inputting a new voice command as text is provided.

상기 새로운 명령어를 입력할 수 있는 화면(162)에는 사용자의 발음, 억양, 사투리, 혹은 사용자가 편리하게 기억하고 명령할 수 있는 형태의 음성명령어로 추가할 수 있다.The new command can be entered on the screen 162 using voice commands of the user's pronunciation, intonation, dialect, or a form that the user can conveniently memorize and command.

상기 통합리모콘 앱의 운용 프로세서는 음성명령어를 편집할 수 있는 팝업화면(160)에서 새로운 음성명령어로 "채널올려"가 입력되고 확인버튼(163)의 입력이 검출되면 도 3의 (f)와 같이 기본명령어인 채널위로(150)의 아래에 새로이 추가 혹은 편집된 하위 명령어로 채널올려(170)가 등록된다.The operation processor of the integrated remote control application can notify the user of the operation of the integrated remote controller app that when the "channel up" is inputted as a new voice command on the pop-up screen 160 where the voice command can be edited, and the input of the confirmation button 163 is detected, A channel up 170 is registered with the newly added or edited sub-command below the basic command 150 as the channel.

통합리모콘 앱의 프로세스는 상기한 절차의 반복으로 모든 음성명령어에 대하여 추가 및 편집이 제공될 수 있다.The process of the integrated remote control app may be provided with the addition and editing of all voice commands by repeating the above procedure.

그리고, 통합리모콘 앱의 운용 프로세스는 전술한 절차에 따라 예를 들어 "채널위로"에 대하여 추가된 음성명령어인 "채널올려"에 대하여 재편집이 실행되는 경우 도 3의 (g)와 같이 기본명령어인 "채널위로"의 하위 명령어로 "채널올려"가 설정되고, 하위 명령어인 "채널올려"의 하위 명령어로 재편집된 "채널 업"이 설정된다.Then, the operation process of the integrated remote control application is performed in accordance with the above-described procedure, for example, when re-editing is performed on the voice command "channel up" added to the "channel up" Quot; channel up "is set as a sub command of" channel up ", and the reedited "channel up" is set as a sub command of the sub command "channel up ".

도 4는 본 발명의 제2실시예에 따른 통합리모콘 앱의 음성명령어 편집절차를 개략적으로 도시한 도면으로, 음성입력으로 음성명령어를 편집하는 절차이다.FIG. 4 is a diagram schematically illustrating a voice command editing procedure of the integrated remote control app according to the second embodiment of the present invention, in which voice commands are edited by voice input.

본 발명이 적용되는 스마트 폰이나 스마트 패드, 태블릿 PC 등을 포함하는 스마트기기(100)의 바탕화면에서 통합리모콘 앱이 선택되면 통합리모콘 앱이 활성화되어 예를 들어 도 2와 같이 통합리모콘의 화면을 제공한다.When the integrated remote control application is selected on the desktop of the smart device 100 including the smartphone, the smart pad, the tablet PC, and the like to which the present invention is applied, the integrated remote control application is activated, to provide.

상기 스마트기기(100)의 화면에 도 2와 같이 제공되는 통합리모콘 앱의 운용 프로세스는 설정(환경 설정)버튼의 입력이 선택되는지 판단하고, 설정(환경 설정)버튼의 입력이 검출되면 운용 프로세스는 도 4의 (a)와 같이 통합리모콘 앱을 구성하는 어플레케이션 정보, 지원모델, 음성명령편집, 음성명령목록, 음성명령채널 등으로 구성되는 설정정보(110)를 제공한다.The operation process of the integrated remote control application provided as shown in FIG. 2 on the screen of the smart device 100 determines whether the input of the setting (configuration) button is selected. When the input of the setting (configuration) As shown in FIG. 4 (a), there is provided configuration information 110 including application information, a support model, a voice command edit, a voice command list, and a voice command channel that constitute the integrated remote control application.

상기 통합리모콘 앱의 운용 프로세서는 도 4의 (a) 화면에서 음성명령어 편집(111)이 선택되면 음성명령어 편집모드로 진입하여 도 4의 (b)와 같이 음성명령어를 편집할 수 있는 제어대상기기의 종류를 선택할 수 있는 화면과 제어대상기기를 선택하라는 안내 메시지(121)를 제공한다.When the voice command editing (111) is selected on the screen of FIG. 4 (a), the operating processor of the integrated remote controller app enters the voice command editing mode and the control target apparatus And a guide message 121 for selecting a control target device.

상기 통합리모콘 앱의 운용 프로세서는 도 4의 (b) 화면에서 예를 들어 음성명령어를 편집하고자 하는 제어대상기기의 종류로 텔레비전(120)이 선택되면 도 4의 (c)와 같이 텔레비전의 각종 동작을 제어하기 위해 설정된 음성명령어의 종류(130)와 음성명령어의 추가 혹은 편집 형식을 선택할 수 있는 팝업화면(140)을 제공한다.The operation processor of the integrated remote control application displays various kinds of operations of the television as shown in FIG. 4 (c), for example, when the television 120 is selected as the type of control target device for editing voice commands, And a pop-up screen 140 for selecting a voice command to be added or edited.

그리고, 음성명령어를 추가 혹은 편집 형식을 선택할 수 있는 팝업화면(140)은 음성명령어의 추가 및 편집을 텍스트(141)의 입력으로 실행할 것인지 음성입력(142)으로 실행할 것인지를 선택할 수 있도록 한다.The pop-up screen 140, in which a voice command is added or an editing format can be selected, allows the user to select whether to add or edit a voice command by inputting text 141 or voice input 142.

상기 통합리모콘 앱의 운용 프로세스는 도 4의 (c) 화면에서 음성명령어의 편집이 음성(142) 입력으로 선택되고, 편집 혹은 추가하고자 하는 음성명령어로 소리크게(155)가 선택되면 도 4의 (d)와 같이 소리크게(155)에 대하여 음성명령어를 편집 혹은 추가할 수 있도록 활성화시킨다.The operation process of the integrated remote control application is such that editing of the voice command is selected as the input of the voice 142 in the screen of FIG. 4C and the voice enlargement 155 is selected as the voice command to be edited or added, d) to enable editing or addition of a voice command to the voice enlargement 155. [

상기 통합리모콘 앱의 운용 프로세서는 도 4의 (d) 화면에서 편집버튼(151)의 입력이 검출되면 도 4의 (e)와 같이 음성 입력을 검출하는 팝업화면(210)을 제공한다.When the input of the edit button 151 is detected on the screen (d) of FIG. 4, the operation processor of the integrated remote control application provides a pop-up screen 210 for detecting the voice input as shown in (e) of FIG.

상기 통합리모콘 앱의 운용 프로세서는 도 4의 (e)와 같이 제공되는 팝업화면(210)을 통해 입력된 음성이 인식되면 도 4의 (f)와 같이 음성입력으로 인식된 명령어를 팝업화면(220)으로 제공하고, 팝업화면(220)에 인식된 명령어가 맞거나 원하는 명령어의 입력인지를 확인 요청하는 버튼으로 재시도 버튼(221)과 확인버튼(222)을 제공한다.When the voice input through the pop-up screen 210 provided as shown in (e) of FIG. 4 is recognized, the operation processor of the integrated remote control application transmits a command recognized as a voice input to the pop-up screen 220 And provides a retry button 221 and an OK button 222 to the pop-up screen 220 as a button for requesting confirmation of whether the recognized command is correct or an input of a desired command.

상기 통합리모콘 앱의 운용 프로세스는 도 4의 (f)에서 팝업화면(220)으로 제공되는 음성입력으로 인식된 명령어가 "소리올려"이고, 확인버튼(222)의 입력이 검출되면 도 4의 (g)와 같이 기본명령어인 소리크게(155)의 아래에 새로이 추가 혹은 편집된 하위 명령어로 소리올려(157)가 등록된다.The operation process of the integrated remote control application is such that the command recognized as the voice input provided on the pop-up screen 220 in FIG. 4F is "sound up" and the input of the confirmation button 222 is detected g) is added to the basic command (155), and a new command (157) is added to the newly added or edited subcommand.

통합리모콘 앱의 프로세스는 상기한 절차의 반복으로 모든 음성명령어에 대하여 추가 및 편집이 제공될 수 있다.The process of the integrated remote control app may be provided with the addition and editing of all voice commands by repeating the above procedure.

상기 인식된 음성입력이 맞거나 원하는 명령어의 입력인지를 확인 요청하는 팝업은 사투리나 발음의 문제로 인식 결과물인 문자 텍스트가 틀리더라로 기본명령어 아래에 음성인식으로 편집된 하위 명령어를 등록할 수 있도록 한다.The pop-up requesting confirmation of whether the recognized voice input is correct or an input of a desired command may be performed in such a manner that a sub-command edited by speech recognition under the basic command can be registered do.

상기 하위 명령어는 많은 기본 명령어들 중에서 커튼 제어를 예를 들면 기기 선택은 커튼이고 기본 명령어는 “커튼닫아”의 음성인식 결과물은 “커튼다다”로 인식되어 기기의 제어를 실패하게 된다, The subcommand is used for controlling the curtain among many basic commands. For example, the apparatus selection is a curtain, and the basic command is recognized as " curtain closing "

음성인식 결과물인 “커튼다다”를 하위 명령어로 등록하여 편집을 완료하면 기본 명령어인 “커튼닫아”와 하위 명령어 “커튼다다”도 같은 명령어로 기능의 제어를 가능케 하며, 하위 명령어를 계속 등록하여 편집하는(기본 명령어 + n 개) 기능이 제공될 수 있다.After completing editing by registering the result of speech recognition "curtain dada" as a sub-command, the basic command "close the curtain" and the sub-command "curtain dada" enable the control of the function by the same command. (Basic command + n) functions can be provided.

상기 기본 명령어는 앱 상에서 제공되는 모든 명령어 들를 포함 하며 각각의 명령어에 대하여 편집 및 등록 기능이 제공된다. The basic command includes all the commands provided on the application, and an editing and registering function is provided for each command.

도 5는 본 발명의 제3실시예에 따른 통합리모콘 앱의 음성명령어 편집절차를 개략적으로 도시한 도면으로, 텍스트의 입력으로 방송사 바로가기 채널의 편집을 실행하는 절차이다.FIG. 5 is a diagram schematically illustrating a procedure for editing a voice command in an integrated remote control application according to a third embodiment of the present invention.

본 발명이 적용되는 스마트 폰이나 스마트 패드, 태블릿 PC 등을 포함하는 스마트기기(100)의 바탕화면에서 통합리모콘 앱이 선택되면 통합리모콘 앱이 활성화되어 예를 들어 도 2와 같이 통합리모콘의 화면을 제공한다.When the integrated remote control application is selected on the desktop of the smart device 100 including the smartphone, the smart pad, the tablet PC, and the like to which the present invention is applied, the integrated remote control application is activated, to provide.

상기 스마트기기(100)의 화면에 도 2와 같이 제공되는 통합리모콘 앱의 운용 프로세스는 설정(환경 설정)버튼의 입력이 선택되는지 판단하고, 설정(환경 설정)버튼의 입력이 검출되면 운용 프로세스는 도 5의 (a)와 같이 통합리모콘 앱을 구성하는 어플레케이션 정보, 지원모델, 음성명령편집, 음성명령목록, 음성명령채널 등으로 구성되는 설정정보(110)를 제공한다.The operation process of the integrated remote control application provided as shown in FIG. 2 on the screen of the smart device 100 determines whether the input of the setting (configuration) button is selected. When the input of the setting (configuration) As shown in FIG. 5 (a), configuration information 110 including application information, a supported model, a voice command edit, a voice command list, and a voice command channel constituting the integrated remote control application is provided.

상기 통합리모콘 앱의 운용 프로세서는 도 5의 (a) 화면에서 방송사 바로가기 채널을 편집하기 위해 음성명령채널(110)이 선택되면 음성명령채널 편집모드로 진입하여 도 5의 (b)와 같이 방송사 바로가기 채널을 편집할 수 있는 화면을 제공한다.5A, when the voice command channel 110 is selected to edit the broadcasting channel shortcut channel, the integrated processor of the integrated remote controller application enters the voice command channel editing mode and enters into the voice command channel editing mode as shown in FIG. It provides a screen for editing shortcut channels.

상기 통합리모콘 앱의 운용 프로세서는 도 5의 (b) 화면에서 예를 들어 방송사 바로가기 채널을 편집하고자 하는 채널(310)이 선택되면 도 5의 (c)와 같이 방송사 바로가기 채널을 추가 혹은 편집 형식을 선택할 수 있는 팝업화면(320)을 제공한다.The operation processor of the integrated remote control application may add or edit a broadcast station shortcut channel as shown in FIG. 5 (c) if a channel 310 for editing a broadcast station shortcut channel is selected on the screen of FIG. 5 (b) And provides a pop-up screen 320 in which a format can be selected.

상기 방송사 바로가기 채널을 추가 혹은 편집 형식을 선택할 수 있는 팝업화면(320)은 방송사 채널의 추가 및 편집을 텍스트(321)의 입력으로 실행할 것인지 음성입력(322)으로 실행할 것인지를 선택할 수 있도록 한다.The pop-up screen 320 allows the user to select whether to add or edit a broadcasting channel shortcut channel or to add or edit a broadcasting channel by executing the input of the text 321 or the voice input 322.

상기 통합리모콘 앱의 운용 프로세스는 도 5의 (c) 화면에서 방송사 바로가기 채널의 편집이 텍스트(321)의 입력으로 선택되면 도 5의 (d)와 같이 텍스트의 입력으로 방송사 바로가기 채널를 편집할 수 있는 팝업화면(330)을 제공한다.The operation process of the integrated remote control application is such that if the edit of the broadcast station shortcut channel is selected as the input of the text 321 in the screen of FIG. 5C, the broadcast channel shortcut channel is edited by the text input as shown in FIG. 5D A pop-up screen 330 is provided.

상기 통합리모콘 앱의 운용 프로세서는 방송사 바로가기 채널을 편집할 수 있는 팝업화면(330)으로 특정 방송사의 이름을 텍스트로 입력할 수 있는 편집화면(331)과 특정 방송사의 채널번호를 텍스트로 입력할 수 있는 편집화면(332), 특성 방송사의 채널이 케이블 방송에서 사용되는 채널번호를 텍스트로 입력할 수 있는 편집화면(333)을 제공한다.The operating processor of the integrated remote control application includes a pop-up screen 330 for editing a broadcasting station shortcut channel, an editing screen 331 for inputting the name of a specific broadcasting station as text, and a channel number of a specific broadcasting station as text And an editing screen 333 in which the channels of the characteristic broadcasters can input the channel numbers used in cable broadcasting as texts.

상기 통합리모콘 앱의 운용 프로세스는 방송사 바로가기 채널을 편집하는 과정에서 사용자에게 편의성을 제공하기 위해 팝업화면(330)에 채널 업/다운 버튼(334)를 제공할 수 있다.The operation process of the integrated remote control application may provide a channel up / down button 334 on the pop-up screen 330 to provide convenience to the user in editing the channel shortcut channel.

따라서, 채널 업/다운 버튼(334)의 입력에 따라 채널 신호를 송출하고, 선국되는 채널을 확인하면서 음성명령채널의 설정이 가능하도록 한다.Accordingly, a channel signal is transmitted according to the input of the channel up / down button 334, and a voice command channel can be set while confirming a channel to be selected.

상기한 절차에 따라 음성명령채널의 설정이 완료되면 도 5의 (e)와 같이 음성명령채널의 편집 및 추가가 완료된다.When the setting of the voice command channel is completed according to the above procedure, editing and addition of the voice command channel are completed as shown in (e) of FIG.

도 6은 본 발명의 제4실시예에 따른 통합리모콘 앱의 음성명령어 편집절차를 개략적으로 도시한 도면으로, 음성입력으로 방송사 바로가기 채널 편집을 실행하는 절차이다.FIG. 6 is a diagram schematically illustrating a procedure of editing a voice command in the integrated remote controller app according to the fourth embodiment of the present invention.

본 발명이 적용되는 스마트 폰이나 스마트 패드, 태블릿 PC 등을 포함하는 스마트기기(100)의 바탕화면에서 통합리모콘 앱이 선택되면 통합리모콘 앱이 활성화되어 예를 들어 도 2와 같이 통합리모콘의 화면을 제공한다.When the integrated remote control application is selected on the desktop of the smart device 100 including the smartphone, the smart pad, the tablet PC, and the like to which the present invention is applied, the integrated remote control application is activated, to provide.

상기 스마트기기(100)의 화면에 도 2와 같이 제공되는 통합리모콘 앱의 운용 프로세스는 설정(환경 설정)버튼의 입력이 선택되는지 판단하고, 설정(환경 설정)버튼의 입력이 검출되면 운용 프로세스는 도 6의 (a)와 같이 통합리모콘 앱을 구성하는 어플레케이션 정보, 지원모델, 음성명령편집, 음성명령목록, 음성명령채널 등으로 구성되는 설정정보를 제공한다.The operation process of the integrated remote control application provided as shown in FIG. 2 on the screen of the smart device 100 determines whether the input of the setting (configuration) button is selected. When the input of the setting (configuration) As shown in FIG. 6 (a), configuration information including application information, support model, voice command editing, voice command list, and voice command channel constituting the integrated remote control application is provided.

상기 통합리모콘 앱의 운용 프로세서는 도 6의 (a) 화면에서 음성명령채널(310)이 선택되면 방송사 바로가기 채널 편집모드로 진입하여 도 6의 (b)와 같이 방송사 채널을 편집할 수 있는 화면을 제공한다.6A, when the voice command channel 310 is selected on the screen of FIG. 6A, the operating processor of the integrated remote control application enters a broadcasting station shortcut channel editing mode and displays a screen for editing a broadcasting channel, .

상기 통합리모콘 앱의 운용 프로세서는 도 6의 (b) 화면에서 예를 들어 방송사 바로가기 채널을 편집하고자 하는 채널(311)이 선택되면 도 6의 (c)와 같이 방송사 바로가기 채널을 추가 혹은 편집 형식을 선택할 수 있는 팝업화면(320)을 제공한다.The operation processor of the integrated remote control application may add or edit a broadcast station shortcut channel as shown in FIG. 6 (c) if a channel 311 for editing a broadcast station shortcut channel is selected on the screen of FIG. 6 (b) And provides a pop-up screen 320 in which a format can be selected.

상기 방송사 바로가기 채널을 추가 혹은 편집 형식을 선택할 수 있는 팝업화면(320)은 방송사 바로가기 채널의 추가 및 편집을 텍스트(321)의 입력으로 실행할 것인지 음성입력(322)으로 실행할 것인지를 선택할 수 있도록 한다.The pop-up screen 320, which allows the user to select whether to add or edit the broadcast channel shortcut channel, allows the user to select whether to add or edit a broadcast channel shortcut channel by inputting text 321 or voice input 322 do.

상기 통합리모콘 앱의 운용 프로세스는 도 6의 (c) 화면에서 방송사 바로가기 채널의 편집이 음성(322) 입력으로 선택되면 도 6의 (d)와 같이 음성입력을 검출하는 팝업화면(410)을 제공한다.6 (c), if the editing of the broadcaster shortcut channel is selected as the input of the voice 322, a pop-up screen 410 for detecting voice input as shown in FIG. 6 (d) to provide.

상기 통합리모콘 앱의 운용 프로세서는 도 6의 (d)와 같이 제공되는 팝업화면(410)을 통해 입력된 음성이 인식되면 도 6의 (e)와 같이 음성입력으로 인식된 방송사 바로가기 채널, 예를 들어 'MBC'를 팝업화면(520)으로 제공하고, 팝업화면(520)에 인식된 방송사 채널이 맞거나 원하는 명령어인지를 확인 요청하는 버튼으로 재시도 버튼(511)과 확인버튼(512)을 제공한다.When the voice inputted through the pop-up screen 410 provided as shown in (d) of FIG. 6 is recognized, the operation processor of the integrated remote control application displays the And a confirmation button 512 is displayed on the pop-up screen 520 with a button for confirming whether the recognized broadcasting channel is correct or a desired command, to provide.

상기 통합리모콘 앱의 운용 프로세서는 도 6의 (e) 화면에서 확인버튼(522)의 입력이 검출되면 방송사 바로가기 채널을 편집할 수 있는 팝업화면(530)으로 특정 방송사의 이름을 텍스트로 입력할 수 있는 편집화면(531)과 특정 방송사의 채널번호를 텍스트로 입력할 수 있는 편집화면(532), 특성 방송사의 채널이 케이블 방송에서 사용되는 채널번호를 텍스트로 입력할 수 있는 편집화면(533)을 제공한다.When the input of the OK button 522 is detected on the screen of FIG. 6E, the operation processor of the integrated remote control application inputs a name of a specific broadcaster as a text into a pop-up screen 530 for editing the channel shortcut channel An edit screen 532 for inputting the channel number of a specific broadcaster as text, an edit screen 533 for inputting the channel number used in the cable broadcast by the channel of the characteristic broadcaster as text, .

상기 통합리모콘 앱의 운용 프로세스는 방송사 바로가기 채널을 편집하는 과정에서 사용자에게 편의성을 제공하기 위해 팝업화면(530)에 채널 업/다운 버튼(534)를 제공할 수 있다.The operation process of the integrated remote control application may provide a channel up / down button 534 on the pop-up screen 530 in order to provide convenience to the user in editing the channel shortcut channel.

따라서, 채널 업/다운 버튼(534)의 입력에 따라 채널 신호를 송출하고, 선국되는 채널을 확인하면서 방송사 바로가기 채널의 설정이 가능하도록 한다.Accordingly, a channel signal is transmitted according to the input of the channel up / down button 534, and a broadcasting station shortcut channel can be set while confirming a channel to be selected.

통합리모콘 앱의 운용 프로세스는 상기한 절차에 따라 방송사 바로가기 채널의 설정이 완료되고 확인버튼(536)의 입력이 검출되면 도 6의 (g)와 같이 방송사 바로가기 채널의 추가 및 편집을 완료한다.The operation of the integrated remote control application completes the setting of the broadcast station shortcut channel according to the above procedure and the addition and editing of the broadcast station shortcut channel is completed as shown in (g) of FIG. 6 when the input of the confirmation button 536 is detected .

이상과 같이, 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술 사상과 아래에 기재될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. It will be understood that various modifications and changes may be made without departing from the scope of the appended claims.

100 : 스마트기기 300 : 중계장치
500 : 제어대상장치
100: smart device 300: relay device
500: Controlled device

Claims (13)

통합리모콘 앱의 운용 프로세스는 환경 설정에서 음성명령어 편집이 선택되는지 판단하는 과정;
음성명령어 편집이 선택되면 음성명령어 편집을 위한 제어대상기기 선택을 안내하는 과정;
음성명령어 편집을 위한 제어대상기기가 선택되면 동작을 제어하기 위해 설정된 음성명령어의 종류와 음성명령어의 편집 형식을 선택하는 팝업화면을 제공하는 과정;
상기 음성명령어의 편집 형식이 텍스트의 입력으로 선택되고, 편집하고자 하는 음성명령어가 선택되면 음성명령어를 텍스트로 입력할 수 있는 팝업화면을 제공하는 과정;
상기 팝업화면에 새로운 음성명령어가 텍스트로 입력되고 확인버튼 입력이 검출되면 기본명령어 아래에 편집된 하위 명령어를 등록하는 과정;
을 포함하는 통합리모콘 앱의 음성명령어 편집방법.
The operation process of the integrated remote control app is a process of determining whether voice command editing is selected in the environment setting;
Selecting a control target device for editing a voice command when voice command editing is selected;
Providing a pop-up screen for selecting a type of a voice command set for controlling an operation and an editing format of a voice command when a control target device for voice command editing is selected;
Providing a pop-up screen capable of inputting a voice command as text when an editing format of the voice command is selected as an input of text and a voice command to be edited is selected;
Registering a subordinate command edited under a basic command when a new voice command is input as text and a confirmation button input is detected on the pop-up screen;
The method comprising the steps of:
제1항에 있어서,
상기 음성명령어의 편집 형식을 선택하는 팝업화면은 음성명령어의 편집을 텍스트의 입력으로 실행할 것인지 음성입력으로 실행할 것인지를 선택할 수 있도록 하는 통합리모콘 앱의 음성명령어 편집방법.
The method according to claim 1,
Wherein the pop-up screen for selecting the editing format of the voice command allows the user to select whether to edit the voice command by inputting text or voice input.
제1항에 있어서,
상기 음성명령어를 편집하는 팝업화면은 기본명령어를 제공하는 화면과 편집되는 새로운 음성명령어를 텍스트로 입력하는 화면을 포함하는 통합리모콘 앱의 음성명령어 편집방법.
The method according to claim 1,
Wherein the pop-up screen for editing the voice command includes a screen for providing a basic command and a screen for inputting a new voice command to be edited as text.
제1항에 있어서,
상기 팝업화면에 텍스트로 입력되는 새로운 명령어는 사용자의 발음, 억양, 사투리, 사용자의 기억력이 적용되는 음성명령어로 편집되는 통합리모콘 앱의 음성명령어 편집방법.
The method according to claim 1,
Wherein the new command entered as text on the pop-up screen is edited with a voice command that is applied to a user's pronunciation, intonation, dialect, or user's memory.
제1항에 있어서,
상기 기본명령어 아래에 편집된 하위 명령어에 대하여 재편집이 실행되면 기본명령어 아래에 편집된 하위 명령어가 등록되고, 편집된 하위 명령어 아래에 재편집된 새로운 명령어가 등록되는 통합리모콘 앱의 음성명령어 편집방법.
The method according to claim 1,
When the re-editing is executed for the subcommand edited under the basic command, the edited subcommand is registered under the basic command and a new command re-edited under the edited subcommand is registered. .
제1항에 있어서,
상기 팝업화면에서 음성명령어의 편집이 음성 입력으로 선택되고, 편집하고자 하는 음성명령어가 선택되면 음성입력을 검출하는 팝업화면을 제공하는 과정;
상기 음성입력이 검출되면 인식된 입력음성을 팝업화면으로 제공하고, 인식된 음성입력이 맞거나 원하는 명령어인지를 확인 요청하는 과정;
상기 인식된 음성입력이 맞거나 원하는 명령어의 입력으로 확인되면 기본명령어 아래에 음성인식으로 편집된 하위 명령어를 등록하는 과정;
을 포함하는 통합리모콘 앱의 음성명령어 편집방법.
The method according to claim 1,
Providing a pop-up screen for detecting a voice input when the voice command is edited on the pop-up screen and the voice command to be edited is selected;
Providing a recognized input voice as a pop-up screen when the voice input is detected, and requesting confirmation of whether the recognized voice input is correct or a desired command;
Registering a sub-command edited by speech recognition under a basic command if the recognized voice input is correct or confirmed as an input of a desired command;
The method comprising the steps of:
제6항에 있어서,
상기 인식된 음성입력이 맞거나 원하는 명령어의 입력인지의 확인 요청은 사투리나 발음의 문제로 인식 결과물인 문자 텍스트가 틀리더라로 기본명령어 아래에 음성인식으로 편집된 하위 명령어를 등록될 수 있도록 하는 통합리모콘 앱의 음성명령어 편집방법.
The method according to claim 6,
A request to confirm whether the recognized voice input is correct or an input of a desired command is made by integrating the subordinate command edited by speech recognition under the basic command so that the character text which is a recognition result is wrong due to a problem of dialect or pronunciation How to edit voice commands in the remote control app.
제1항에 있어서,
상기 기본명령어 아래에 편집되는 하위 명령어는 편집 및 추가에 따라 기본 명령어 + n 개로 구성되는 통합리모콘 앱의 음성명령어 편집방법.
The method according to claim 1,
The subcommand edited under the basic command is composed of + n basic commands in accordance with editing and addition.
제1항에 있어서,
상기 통합리모콘 앱의 운용 프로세스는 환경설정에서 방송사 바로가기 채널의 편집이 선택되면 방송사 바로가기 채널의 편집 형식을 선택할 수 있는 팝업화면을 제공하는 과정;
상기 방송사 바로가기 채널의 편집이 텍스트 입력으로 선택되면 텍스트의 입력으로 방송사 바로가기 채널을 편집할 수 있는 팝업화면으로 제공하는 과정;
상기 팝업화면을 통해 텍스트가 입력되어 방송사 바로가기 채널이 편집되면 새로운 방송사 바로가기 채널로 등록 저장하는 과정;
을 포함하는 통합리모콘 앱의 음성명령어 편집방법.
The method according to claim 1,
Wherein the operation process of the integrated remote control application comprises the steps of: providing a pop-up screen capable of selecting an editing format of a broadcast station shortcut channel when editing of a broadcast station shortcut channel is selected in an environment setting;
Providing a pop-up screen for editing a shortcut channel of a broadcaster by inputting a text if editing of the shortcut channel of the broadcaster is selected as a text input;
When a text is inputted through the pop-up screen and a broadcasting station shortcut channel is edited, registration and saving as a new broadcasting company shortcut channel;
The method comprising the steps of:
제9항에 있어서,
상기 방송사 바로가기 채널을 편집할 수 있는 팝업화면에는 특정 방송사의 이름을 텍스트로 입력할 수 있는 편집화면; 특정 방송사의 채널번호를 텍스트로 입력할 수 있는 편집화면; 특성 방송사 채널이 케이블 방송에서 사용되는 채널번호로 입력할 수 있는 편집화면을 포함하는 통합리모콘 앱의 음성명령어 편집방법.
10. The method of claim 9,
A pop-up screen for editing the shortcut channel of the broadcaster, an edit screen for inputting the name of a specific broadcaster as text; An editing screen capable of inputting a channel number of a specific broadcasting company as text; A method of editing a voice command in an integrated remote control app, the channel including an edit screen that can be input by a channel number used in a cable broadcast.
제9항에 있어서,
상기 방송사 바로가기 채널을 편집할 수 있는 팝업화면에 채널 업/다운 버튼을 제공하여 선국되는 채널을 확인하면서 방송사 바로가기 채널의 설정을 제공하는 통합리모콘 앱의 음성명령어 편집방법.
10. The method of claim 9,
And providing a channel up / down button on a pop-up screen capable of editing the broadcast channel shortcut channel to provide a setting of a broadcast station shortcut channel while checking a channel to be tuned.
제9항에 있어서,
상기 환경설정에서 방송사 바로가기 채널의 편집이 선택되고, 방송사 바로가기 채널의 편집이 음성입력으로 선택되면 음성 입력을 검출하는 팝업화면을 제공하는 과정;
상기 음성입력이 검출되면 인식된 입력음성을 팝업화면으로 제공하고, 인식된 음성입력이 맞거나 원하는 명령어인지를 확인 요청하는 과정;
상기 인식된 음성입력이 맞거나 원하는 명령어로 확인되면 음성 인식된 방송사 정보, 방송사의 채널번호, 케이블 방송에서 사용되는 채널번호로 제공하고, 편집 완료에 따라 새로운 방송사 바로가기 채널로 등록 저장하는 과정;
을 포함하는 통합리모콘 앱의 음성명령어 편집방법.
10. The method of claim 9,
Providing a pop-up screen for detecting a voice input when editing of a broadcast station shortcut channel is selected in the environment setting, editing of a broadcast channel shortcut channel is selected as voice input;
Providing a recognized input voice as a pop-up screen when the voice input is detected, and requesting confirmation of whether the recognized voice input is correct or a desired command;
If the recognized voice input is correct or confirmed by a desired command, providing the recognized voice information, the channel number of the broadcasting company, and the channel number used in the cable broadcasting, and registering and storing the new broadcasting channel as a new broadcasting channel upon completion of editing;
The method comprising the steps of:
음성명령어 편집이 선택되면 음성명령어 편집을 위한 제어대상기기 선택을 안내하는 과정;
제어대상기기가 선택되면 음성명령어의 편집 형식을 선택하는 팝업화면을 제공하는 과정;
상기 음성명령어의 편집 형식이 텍스트의 입력으로 선택되고, 편집하고자 하는 음성명령어가 선택되면 음성명령어를 텍스트로 입력할 수 있는 팝업화면을 제공하는 과정;
상기 팝업화면에 새로운 음성명령어가 텍스트로 입력되고 확인버튼 입력이 검출되면 기본명령어 아래에 편집된 하위 명령어를 등록하는 과정;
상기 음성명령어의 편집 형식이 음성 입력으로 선택되고, 편집하고자 하는 음성입력이 검출되면 인식된 입력음성을 팝업화면으로 제공함과 동시에 인식된 음성입력이 맞거나 원하는 명령어인지를 확인 요청하는 과정;
상기 인식된 음성입력이 맞거나 원하는 명령어의 입력으로 확인되면 기본명령어 아래에 음성인식으로 편집된 하위 명령어를 등록하는 과정;
을 포함하는 통합리모콘 앱의 음성명령어 편집방법.
Selecting a control target device for editing a voice command when voice command editing is selected;
Providing a pop-up screen for selecting an editing format of a voice command when a control target device is selected;
Providing a pop-up screen capable of inputting a voice command as text when an editing format of the voice command is selected as an input of text and a voice command to be edited is selected;
Registering a subordinate command edited under a basic command when a new voice command is input as text and a confirmation button input is detected on the pop-up screen;
A step of providing a recognized input voice as a pop-up screen and confirming whether a recognized voice input is correct or a desired command, when an edit form of the voice command is selected as a voice input and a voice input to be edited is detected;
Registering a sub-command edited by speech recognition under a basic command if the recognized voice input is correct or confirmed as an input of a desired command;
The method comprising the steps of:
KR1020130169426A 2013-12-31 2013-12-31 Voice command method editing method for universal remocon app KR101398434B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130169426A KR101398434B1 (en) 2013-12-31 2013-12-31 Voice command method editing method for universal remocon app
PCT/KR2014/012183 WO2015102258A1 (en) 2013-12-31 2014-12-11 Voice command editing method for universal remote control application

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130169426A KR101398434B1 (en) 2013-12-31 2013-12-31 Voice command method editing method for universal remocon app

Publications (1)

Publication Number Publication Date
KR101398434B1 true KR101398434B1 (en) 2014-05-28

Family

ID=50895010

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130169426A KR101398434B1 (en) 2013-12-31 2013-12-31 Voice command method editing method for universal remocon app

Country Status (2)

Country Link
KR (1) KR101398434B1 (en)
WO (1) WO2015102258A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101994780B1 (en) * 2018-10-08 2019-09-30 넷마블 주식회사 Method and apparatus for registering shortcut key and excuting the shortcut key
US10679619B2 (en) 2014-06-30 2020-06-09 Samsung Electronics Co., Ltd Method of providing voice command and electronic device supporting the same

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10448762B2 (en) 2017-09-15 2019-10-22 Kohler Co. Mirror
US10887125B2 (en) 2017-09-15 2021-01-05 Kohler Co. Bathroom speaker
US11093554B2 (en) 2017-09-15 2021-08-17 Kohler Co. Feedback for water consuming appliance
US11099540B2 (en) 2017-09-15 2021-08-24 Kohler Co. User identity in household appliances
US11314215B2 (en) 2017-09-15 2022-04-26 Kohler Co. Apparatus controlling bathroom appliance lighting based on user identity

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR200217327Y1 (en) * 2000-10-31 2001-03-15 주식회사엑트밸리 Remote controller capable of speech command
JP2002191080A (en) 2000-12-22 2002-07-05 Corona Corp Remote control unit
KR20030085268A (en) * 2002-04-30 2003-11-05 장준현 Remote Controller Having User Interface expressed in Icon Format

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100877614B1 (en) * 2006-11-09 2009-01-07 주식회사 서비전자 Code setup method of universal remote controller

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR200217327Y1 (en) * 2000-10-31 2001-03-15 주식회사엑트밸리 Remote controller capable of speech command
JP2002191080A (en) 2000-12-22 2002-07-05 Corona Corp Remote control unit
KR20030085268A (en) * 2002-04-30 2003-11-05 장준현 Remote Controller Having User Interface expressed in Icon Format

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10679619B2 (en) 2014-06-30 2020-06-09 Samsung Electronics Co., Ltd Method of providing voice command and electronic device supporting the same
US11114099B2 (en) 2014-06-30 2021-09-07 Samsung Electronics Co., Ltd. Method of providing voice command and electronic device supporting the same
US11664027B2 (en) 2014-06-30 2023-05-30 Samsung Electronics Co., Ltd Method of providing voice command and electronic device supporting the same
KR101994780B1 (en) * 2018-10-08 2019-09-30 넷마블 주식회사 Method and apparatus for registering shortcut key and excuting the shortcut key

Also Published As

Publication number Publication date
WO2015102258A1 (en) 2015-07-09

Similar Documents

Publication Publication Date Title
KR101398434B1 (en) Voice command method editing method for universal remocon app
KR102245747B1 (en) Apparatus and method for registration of user command
US10254937B2 (en) Graphical user interface and data transfer methods in a controlling device
JP6482911B2 (en) Device control method and electric device
US20160098154A1 (en) Display apparatus and control method thereof
CN104461346B (en) A kind of method of visually impaired people's Touch Screen, device and intelligent touch screen mobile terminal
KR102339657B1 (en) Electronic device and control method thereof
KR20190088945A (en) Electronic device, server and control methods thereof
EP4276819A2 (en) Electronic device and voice recognition method thereof
EP2830321A1 (en) Display apparatus and method for providing personalized service thereof
CN103914234A (en) Interactive server, control method thereof, and interactive system
US10616636B2 (en) Setting integrated remote controller of display device
KR20140144104A (en) Electronic apparatus and Method for providing service thereof
CN107077845A (en) A kind of speech output method and device
KR101465230B1 (en) Method for device control using smart device and control system the same
JP2005500591A (en) Information processing apparatus and method, and program
JP2020028129A (en) Electronic device, server and method of controlling the same
KR20060020163A (en) Remote control unit and information processing system
CN105242552A (en) Installation guide method and device
KR102257772B1 (en) Display apparatus and controlling method thereof
KR101968669B1 (en) Method for providing call service and computer program for executing the method
BR112015021110B1 (en) METHOD FOR CONFIGURING A GRAPHIC PROGRAM GUIDE USER INTERFACE ON A PORTABLE DEVICE
CN105009205A (en) Method and system for voice recognition input on network-enabled devices
CN103383627B (en) Method and apparatus for inputting text in portable terminal
KR20220005590A (en) Display device and method of operation thereof

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee