KR102131724B1 - Method for controlling alarm of user terminal and method for determining alarm off mission of server - Google Patents

Method for controlling alarm of user terminal and method for determining alarm off mission of server Download PDF

Info

Publication number
KR102131724B1
KR102131724B1 KR1020180158296A KR20180158296A KR102131724B1 KR 102131724 B1 KR102131724 B1 KR 102131724B1 KR 1020180158296 A KR1020180158296 A KR 1020180158296A KR 20180158296 A KR20180158296 A KR 20180158296A KR 102131724 B1 KR102131724 B1 KR 102131724B1
Authority
KR
South Korea
Prior art keywords
user
voice signal
user terminal
alarm
server
Prior art date
Application number
KR1020180158296A
Other languages
Korean (ko)
Other versions
KR20200070783A (en
Inventor
고민삼
Original Assignee
주식회사 딜라이트룸
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 딜라이트룸 filed Critical 주식회사 딜라이트룸
Priority to KR1020180158296A priority Critical patent/KR102131724B1/en
Priority to KR1020200034875A priority patent/KR102419990B1/en
Publication of KR20200070783A publication Critical patent/KR20200070783A/en
Application granted granted Critical
Publication of KR102131724B1 publication Critical patent/KR102131724B1/en

Links

Images

Classifications

    • H04M1/72522—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/34—Microprocessors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/38—Displays

Abstract

사용자 단말의 알람 제어 방법 및 알람 제어 시스템이 개시된다. 본 발명의 실시 예에 따른 사용자 단말의 알람 제공 방법은 미리 설정된 알람 시각에 알람을 출력하며 예문을 사용자에게 제시하는 단계, 사용자 음성신호를 수신하는 단계, 및 상기 예문에 대응하는 기준음성신호와 상기 사용자 음성신호가 일치하면 상기 알람을 해제하는 단계를 포함한다.Disclosed is an alarm control method and an alarm control system of a user terminal. According to an embodiment of the present invention, a method for providing an alarm of a user terminal outputs an alarm at a preset alarm time and presents an example sentence to a user, receiving a user voice signal, and a reference voice signal corresponding to the example sentence and the And canceling the alarm when the user voice signals match.

Description

사용자 단말의 알람 제어 방법 및 서버의 알람 해제 미션 결정 방법{METHOD FOR CONTROLLING ALARM OF USER TERMINAL AND METHOD FOR DETERMINING ALARM OFF MISSION OF SERVER}How to control the alarm of the user terminal and how to determine the alarm cancellation mission of the server{METHOD FOR CONTROLLING ALARM OF USER TERMINAL AND METHOD FOR DETERMINING ALARM OFF MISSION OF SERVER}

본 발명은 사용자 단말의 알람 제어 방법 및 서버의 알람 해제 미션 결정 방법에 관한 것으로, 특히, 사용자의 음성 신호에 의해 제어되는 알람 제어 방법 및 알람 제어 시스템에 관한 것이다.The present invention relates to an alarm control method of a user terminal and a method for determining an alarm release mission of a server, and more particularly, to an alarm control method and an alarm control system controlled by a user's voice signal.

오늘날 무선 통신 기술 등의 발전에 따라 스마트 폰과 같은 사용자 단말이 사용자의 생활 전반에 활용되고 있다. 예를 들어, 사용자는 사용자 단말의 알람에 의해 하루를 시작하고는 한다.2. Description of the Related Art With the development of wireless communication technology, user terminals such as smart phones are being used throughout the user's life. For example, the user starts the day by the alarm of the user terminal.

초기의 사용자 단말은 미리 지정된 알람 시각에 알람이 출력하고 사용자의 간단한 조작에 의해 상기 알람을 해제하였는데, 최근에 들어서는 사용자를 확실히 깨울 수 있는 다양한 알람 해제 방법이 개발되고 있다. 예를 들어, 사용자 단말이 알람을 출력하며 게임을 실행시키고 사용자가 실행된 게임의 특정 미션을 달성하면 알람을 해제하는 방법이 있고, 사용자 단말이 수학 문제를 제시하고 사용자가 제시된 수학 문제의 정답을 입력하면 알람을 해제하는 방법이 있다.In the initial user terminal, an alarm was output at a predetermined alarm time and the alarm was released by a simple operation by the user. Recently, various alarm cancellation methods have been developed that can certainly wake the user. For example, there is a method of disabling the alarm when the user terminal outputs an alarm and runs the game, and when the user achieves a specific mission of the executed game, the user terminal presents a math problem and the user answers the correct answer of the proposed math problem. There is a way to clear the alarm by typing.

한편, 여러 사람의 참여로 데이터를 생성 또는 가공하는 등 집단지성(Collective Intelligence)을 활용할 수 있는 방법이 다양하게 연구되고 있다. 집단 지성을 활용하기 위해서는 다양한 사용자들이 목표 과제를 수행하여야 하는데, 이를 유도하기 위해 과제 수행시 현금이나 현금과 같이 사용가능한 포인트를 제공하는 보상을 지급하거나 다른 목적, 예를 들어, 회원가입을 위해서 반드시 과제를 수행하도록 하고 있다.On the other hand, various methods of utilizing collective intelligence, such as generating or processing data with the participation of several people, have been studied. In order to utilize the collective intelligence, various users must perform the target task, in order to induce it, pay rewards that provide points that can be used, such as cash or cash, when performing the task, or for other purposes, such as membership registration The task is to be performed.

본 발명이 이루고자 하는 기술적인 과제는 사용자를 확실히 깨우는 알람의 기본적인 기능을 수행하며 다양한 사용자들의 음성 신호를 수집할 수 있는 사용자 단말의 알람 제어 방법 및 서버의 알람 해제 미션 결정 방법을 제공하는 것이다. The technical problem to be achieved by the present invention is to provide an alarm control method of a user terminal and a method of determining an alarm release mission of a server capable of collecting the voice signals of various users while performing a basic function of an alarm that definitely wakes the user.

본 발명의 일 실시 예에 따른 사용자 단말의 알람 제어 방법은 미리 설정된 알람 시각에 알람을 출력하며 예문을 사용자에게 제시하는 단계, 사용자 음성신호를 수신하는 단계 및 상기 예문에 대응하는 기준음성신호와 상기 사용자 음성신호가 일치하면 상기 알람을 해제하는 단계를 포함한다.The alarm control method of the user terminal according to an embodiment of the present invention outputs an alarm at a preset alarm time and presents an example sentence to a user, receiving a user voice signal, and a reference voice signal corresponding to the example sentence and the And canceling the alarm when the user voice signals match.

상기 예문은 상기 사용자 단말의 디스플레이에 표시될 수 있다.The example sentence may be displayed on the display of the user terminal.

상기 예문은 상기 사용자 단말의 스피커를 통해 출력될 수 있다.The example sentence may be output through the speaker of the user terminal.

상기 알람 제어 방법은 상기 기준음성신호와 상기 사용자 음성신호가 일치하면 상기 사용자 음성신호를 서버로 송신하는 단계를 더 포함할 수 있다.The alarm control method may further include transmitting the user voice signal to a server when the reference voice signal and the user voice signal match.

상기 알람을 중단하는 단계는 상기 사용자 음성신호로부터 특징 계수들을 추출하는 단계, 상기 특징 계수들과 상기 기준음성신호에 대응하는 기준음성값의 유사도를 계산하는 단계 및 상기 유사도가 알람 해제 기준 값보다 높으면 상기 알람을 해제하는 단계를 포함할 수 있다.The stopping of the alarm may include extracting feature coefficients from the user voice signal, calculating similarity between the feature coefficients and a reference voice value corresponding to the reference voice signal, and if the similarity is higher than the alarm release reference value And canceling the alarm.

상기 알람을 중단하는 단계는 상기 유사도가 송신 기준 값보다 높으면 상기 사용자 음성신호를 서버로 송신하는 단계를 더 포함할 수 있다.The step of stopping the alarm may further include transmitting the user voice signal to a server when the similarity is higher than a transmission reference value.

상기 알람 해제 기준 값은 상기 송신 기준 값보다 높거나 같을 수 있다.The alarm cancellation reference value may be higher than or equal to the transmission reference value.

본 발명의 다른 실시 예에 따른 사용자 단말의 알람 제어 방법은 미리 설정된 알람 시각에 알람을 출력하며 검증대상음성신호를 출력하는 단계, 사용자의 텍스트 입력을 수신하는 단계 및 상기 텍스트 입력과 상기 검증대상음성신호에 대응하는 예문이 일치하면 상기 알람을 해제하는 단계를 포함한다.According to another embodiment of the present invention, an alarm control method of a user terminal outputs an alarm at a preset alarm time and outputs a verification target voice signal, receiving a user's text input, and the text input and the verification target voice And if the example sentence corresponding to the signal matches, canceling the alarm.

상기 검증대상음성신호가 출력되는 동안, 상기 알람의 소리 크기는 감소될 수 있다.While the voice signal to be verified is output, the volume of the alarm may be reduced.

상기 알람 제어 방법은 상기 텍스트 입력의 횟수가 소정의 알람 해제 기준 값을 초과하면 상기 알람을 해제하는 단계를 더 포함할 수 있다.The alarm control method may further include releasing the alarm when the number of times the text input exceeds a predetermined alarm release reference value.

본 발명의 실시 예에 따른 서버의 알람 해제 미션 결정 방법은 예문 데이터베이스에서 문장을 선택하는 단계 및 상기 선택된 문장에 대해 수집된 음성신호들의 수가 기준개수 미만이면 상기 선택된 문장을 예문으로 결정하고 상기 예문을 모바일 단말로 송신하는 단계를 포함한다.According to an embodiment of the present invention, a method for determining an alarm release mission of a server includes selecting a sentence from an example sentence database and determining the selected sentence as an example sentence if the number of voice signals collected for the selected sentence is less than a reference number and determining the example sentence And transmitting to the mobile terminal.

상기 알람 해제 미션 결정 방법은 상기 수집된 음성신호들의 수가 상기 기준개수 이상이면 상기 수집된 음성신호들 중 어느 하나를 검증대상음성신호로 선택하고 상기 검증대상음성신호에 대응하는 검증문장과 상기 검증대상음성신호를 상기 사용자 단말로 송신하는 단계를 더 포함할 수 있다.The alarm cancellation mission determination method selects any one of the collected voice signals as a verification target voice signal when the number of the collected speech signals is greater than or equal to the reference number, and a verification sentence corresponding to the verification target speech signal and the verification target The method may further include transmitting a voice signal to the user terminal.

상기 알람 해제 미션 결정 방법은 상기 수집된 음성신호들의 수가 기준개수 이상이고 상기 수집된 음성신호들에 대한 검증횟수가 기준횟수 이상이면 상기 예문 데이터베이스에서 문장을 재선택하는 단계를 더 포함할수 있다.The method for determining the alarm cancellation mission may further include re-selecting a sentence in the example sentence database when the number of the collected voice signals is greater than or equal to a reference number and the number of verification of the collected voice signals is greater than or equal to the reference number.

본 발명의 실시 예에 따른 사용자 단말의 알람 제어 방법 및 서버의 알람 해제 미션 결정 방법은 사용자를 확실히 깨우는 알람의 기본적인 기능을 수행함과 동시에 다양한 사용자들의 음성신호를 수집할 수 있는 효과가 있다. 또한, 사용자들 간의 교차 검증을 통해 수집된 데이터의 정확성이 향상될 수 있다.The alarm control method of the user terminal and the method of determining the alarm release mission of the server according to an embodiment of the present invention have the effect of collecting the voice signals of various users while performing the basic function of the alarm that definitely wakes the user. In addition, the accuracy of the collected data can be improved through cross-validation between users.

본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 상세한 설명이 제공된다.
도 1은 본 발명의 실시 예에 따른 알람 제어 시스템의 개념도이다.
도 2는 도 1에 도시된 알람 제어 시스템에서의 데이터 흐름을 나타낸다.
도 3는 도 1에 도시된 서버의 동작을 설명하기 위한 플로우 차트(flow chart)이다.
도 4는 도 1에 도시된 사용자 단말이 수행하는 음성신호 수집 프로세스의 일 실시 예를 설명하기 위한 플로우 차트이다.
도 5는 도 1에 도시된 사용자 단말이 수행하는 음성신호 수집 프로세스의 다른 실시 예를 설명하기 위한 플로우 차트이다.
도 6는 도 1에 도시된 사용자 단말이 수행하는 음성신호 검증 프로세스의 일 실시 예를 설명하기 위한 플로우 차트이다.In order to better understand the drawings cited in the detailed description of the present invention, a detailed description of each drawing is provided.
1 is a conceptual diagram of an alarm control system according to an embodiment of the present invention.
FIG. 2 shows data flow in the alarm control system shown in FIG. 1.
FIG. 3 is a flow chart for explaining the operation of the server illustrated in FIG. 1.
FIG. 4 is a flow chart for explaining an embodiment of a voice signal collection process performed by the user terminal shown in FIG. 1.
5 is a flowchart illustrating another embodiment of a voice signal collection process performed by the user terminal illustrated in FIG. 1.
FIG. 6 is a flow chart for explaining an embodiment of a voice signal verification process performed by the user terminal shown in FIG. 1.

본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시 예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시 예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시 예들은 다양한 형태들로 실시될 수 있으며 본 명세서에 설명된 실시 예들에 한정되지 않는다.Specific structural or functional descriptions of the embodiments according to the concept of the present invention disclosed in this specification are exemplified only for the purpose of explaining the embodiments according to the concept of the present invention, and the embodiments according to the concept of the present invention It can be implemented in various forms and is not limited to the embodiments described herein.

본 발명의 개념에 따른 실시 예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시 예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예들을 특정한 개시 형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물, 또는 대체물을 포함한다.Embodiments according to the concept of the present invention can be applied to various changes and can have various forms, so the embodiments will be illustrated in the drawings and described in detail herein. However, this is not intended to limit the embodiments according to the concept of the present invention to specific disclosure forms, and includes all changes, equivalents, or substitutes included in the spirit and scope of the present invention.

제1 또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1구성요소는 제2구성요소로 명명될 수 있고, 유사하게 제2구성요소는 제1구성요소로도 명명될 수 있다.Terms such as first or second may be used to describe various components, but the components should not be limited by the terms. The above terms are only for the purpose of distinguishing one component from other components, for example, without departing from the scope of rights according to the concept of the present invention, the first component may be referred to as the second component, and similarly The second component may also be referred to as the first component.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.When an element is said to be "connected" or "connected" to another component, it is understood that other components may be directly connected or connected to the other component, but other components may exist in the middle. It should be. On the other hand, when a component is said to be "directly connected" or "directly connected" to another component, it should be understood that no other component exists in the middle. Other expressions describing the relationship between the components, such as “between” and “just between” or “neighboring to” and “directly neighboring to” should be interpreted similarly.

본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in this specification are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this specification, terms such as “include” or “have” are intended to indicate that a feature, number, step, action, component, part, or combination thereof described is present, and one or more other features or numbers. It should be understood that it does not preclude the existence or addition possibility of steps, actions, components, parts or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by a person skilled in the art to which the present invention pertains. Terms such as those defined in a commonly used dictionary should be interpreted as having meanings consistent with meanings in the context of related technologies, and should not be interpreted as ideal or excessively formal meanings unless explicitly defined herein. Does not.

이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다.Hereinafter, the present invention will be described in detail by explaining preferred embodiments of the present invention with reference to the accompanying drawings.

도 1은 본 발명의 실시 예에 따른 알람 제어 시스템의 개념도이다. 도 2는 도 1에 도시된 알람 제어 시스템에서의 데이터 흐름을 나타낸다.1 is a conceptual diagram of an alarm control system according to an embodiment of the present invention. FIG. 2 shows data flow in the alarm control system shown in FIG. 1.

도 1 및 도 2를 참조하면, 알람 제어 시스템(10)은 사용자 단말(100)과 서버(200)를 포함한다. 도 1에서는 설명의 편의를 위하여 하나의 사용자 단말(100)를 도시하였으나 알람 제어 시스템(10)은 복수의 사용자 단말들을 포함할 수 있다.1 and 2, the alarm control system 10 includes a user terminal 100 and a server 200. 1 illustrates one user terminal 100 for convenience of description, but the alarm control system 10 may include a plurality of user terminals.

사용자 단말(100)과 서버(200)는 다양한 유무선 네트워크를 통하여 데이터를 송수신할 수 있다. 사용자 단말(100)은 사용자가 알람 해제 미션을 수행하면서 입력한 음성신호를 서버(200)로 전송한다. 서버(200)는 사용자 단말(100)로부터 수신된 음성신호를 음성신호 데이터베이스(미도시)에 저장한다. The user terminal 100 and the server 200 may transmit and receive data through various wired and wireless networks. The user terminal 100 transmits the input voice signal to the server 200 while the user performs an alarm release mission. The server 200 stores the voice signal received from the user terminal 100 in a voice signal database (not shown).

서버(200)는 수신된 음성신호를 사용자의 연령 또는 성별, 지역 등에 따라 구분하여 저장할 수 있다. 구체적으로, 서버(200)는 연령 또는 성별, 지역 등에 따라 복수의 사용자 그룹들을 생성하고, 수신된 음성신호를 상기 사용자의 개인 정보에 대응하는 사용자 그룹에 저장할 수 있다.The server 200 may classify and store the received voice signal according to the user's age, gender, or region. Specifically, the server 200 may generate a plurality of user groups according to age, gender, region, etc., and store the received voice signal in a user group corresponding to the user's personal information.

사용자 단말(100)은 서버(200)로 사용자에 대한 기초정보를 송신할 수 있다(S100). 예를 들어, 사용자 단말(100)은 상기 사용자의 연령 및 성별, 지역 중 적어도 어느 하나에 대응하는 개인 정보를 서버(200)로 송신할 수 있다. 사용자 단말(100)은 상기 사용자에 의해 미리 설정된 알람 시각 정보를 서버(200)로 송신할 수 있다. 서버(200)는 사용자 단말(100)로부터 수신된 상기 기초정보를 사용자 데이터베이스(미도시)에 저장할 수 있다.The user terminal 100 may transmit basic information about the user to the server 200 (S100). For example, the user terminal 100 may transmit personal information corresponding to at least one of the user's age, gender, and region to the server 200. The user terminal 100 may transmit alarm time information preset by the user to the server 200. The server 200 may store the basic information received from the user terminal 100 in a user database (not shown).

서버(200)는 예문을 선택하고, 알람 해제 미션의 종류를 결정할 수 있다(S200). 서버(200)는 예문 데이터베이스(미도시)에 저장된 복수의 문장들 중에서 어느 하나를 로드(load)하여 예문으로 선택할 수 있다. 서버(200)는 다양한 기준에 따라 예문을 선택할 수 있다. 서버(200)는 사용자 데이터베이스(미도시)에 저장된 사용자의 기초정보에 기초하여 예문을 선택할 수 있다. 예를 들어, 서버(200)는 사용자가 해당하는 사용자 그룹에서 수집된 음성신호의 개수가 가장 적은 문장을 예문으로 선택할 수 있다.The server 200 may select an example sentence and determine the type of the alarm release mission (S200). The server 200 may load any one of a plurality of sentences stored in the example sentence database (not shown) and select the example sentence. The server 200 may select example sentences according to various criteria. The server 200 may select an example sentence based on the basic information of the user stored in the user database (not shown). For example, the server 200 may select a sentence having the smallest number of voice signals collected from a user group corresponding to the user as an example sentence.

서버(200)는 음성신호 수집 프로세스 및 음성신호 검증 프로세스 중 어느 하나를 알람 해제 미션으로 결정할 수 있다. 서버(200)는 예문에 대해 수집된 음성신호들의 개수 및/또는 상기 수집된 음성신호들에 대한 검증횟수에 기초하여 알람 해제 미션의 종류를 결정할 수 있다.The server 200 may determine one of a voice signal collection process and a voice signal verification process as an alarm release mission. The server 200 may determine the type of the alarm release mission based on the number of voice signals collected for example sentences and/or the number of verifications for the collected voice signals.

서버(200)가 예문을 선택하고 알람 해제 미션의 종류를 결정하는 방법은 도 3에서 보다 상세히 설명될 것이다.The method in which the server 200 selects an example sentence and determines the type of the alarm release mission will be described in more detail in FIG. 3.

서버(200)는 예문과 함께 기준음성신호 또는 검증대상음성신호를 사용자 단말(100)로 송신할 수 있다(S300). 구체적으로, 음성신호 수집 프로세스가 알람 해제 미션으로 결정되면, 서버(200)는 예문과 기준음성신호를 사용자 단말(100)로 송신할 수 있다. 반대로, 음성신호 검증 프로세스가 알람 해제 미션으로 결정되면, 서버(200)는 예문과 검증대상음성신호를 사용자 단말(100)로 송신할 수 있다.The server 200 may transmit a reference voice signal or a verification target voice signal to the user terminal 100 together with an example sentence (S300 ). Specifically, if the voice signal collection process is determined as an alarm release mission, the server 200 may transmit example sentences and a reference voice signal to the user terminal 100. Conversely, if the voice signal verification process is determined as an alarm release mission, the server 200 may transmit the example sentence and the voice signal to be verified to the user terminal 100.

사용자 단말(100)은 음성신호 수집 프로세스 또는 음성신호 검증 프로세스를 수행할 수 있다(S400). The user terminal 100 may perform a voice signal collection process or a voice signal verification process (S400).

예문과 기준음성신호가 수신되면, 사용자 단말(100)은 음성신호 수집 프로세스를 수행할 수 있다. 사용자 단말(100)은 알람 시각에 사용자에게 상기 예문을 제시하고 사용자의 음성 입력을 기다릴 수 있다. 사용자의 음성이 입력되면, 사용자 단말(100)은 사용자의 음성신호와 기준음성신호를 비교할 수 있다. 상기 음성신호와 상기 기준음성신호가 일치하면 사용자 단말(100)은 알람을 해제할 수 있다. 사용자 단말(100)이 음성신호 수집 프로세스를 수행하는 방법은 도 4 또는 도 5를 통해 보다 상세히 설명될 것이다.When the example sentence and the reference voice signal are received, the user terminal 100 may perform a voice signal collection process. The user terminal 100 may present the example sentence to the user at an alarm time and wait for the user's voice input. When the user's voice is input, the user terminal 100 may compare the user's voice signal with a reference voice signal. When the voice signal and the reference voice signal match, the user terminal 100 may release the alarm. The method in which the user terminal 100 performs the voice signal collection process will be described in more detail through FIG. 4 or FIG. 5.

예문과 검증대상음성신호가 수신되면, 사용자 단말(100)은 음성신호 검증 프로세스를 수행할 수 있다. 사용자 단말(100)은 알람 시각에 사용자에게 상기 검증대상음성신호를 출력하고 사용자의 텍스트 입력을 기다릴 수 있다. 사용자가 텍스트를 입력하면 사용자 단말(100)은 입력된 텍스트와 상기 예문을 비교할 수 있다. 상기 입력된 텍스트와 상기 예문이 일치하면 사용자 단말(100)은 알람을 해제할 수 있다. 사용자 단말(100)이 음성신호 검증 프로세스를 수행하는 방법은 도 6을 통해 보다 상세히 설명될 것이다.When an example sentence and a voice signal to be verified are received, the user terminal 100 may perform a voice signal verification process. The user terminal 100 may output the voice signal to be verified to the user at an alarm time and wait for the user to input text. When the user inputs text, the user terminal 100 may compare the input text with the example sentence. When the input text and the example sentence match, the user terminal 100 may release the alarm. The method for the user terminal 100 to perform the voice signal verification process will be described in more detail with reference to FIG. 6.

음성신호 수집 프로세스 또는 음성신호 검증 프로세스가 종료되면, 사용자 단말(100)은 사용자의 음성신호 또는 검증결과를 서버(200)로 송신할 수 있다. 음성신호 수집 프로세스가 수행된 경우, 사용자 단말(100)은 사용자의 음성신호를 서버(200)로 송신할 수 있다. 음성신호 검증 프로세스가 수행된 경우, 사용자 단말(100)은 검증결과를 서버(200)로 송신할 수 있다.When the voice signal collection process or the voice signal verification process ends, the user terminal 100 may transmit the user's voice signal or verification result to the server 200. When the voice signal collection process is performed, the user terminal 100 may transmit the user's voice signal to the server 200. When the voice signal verification process is performed, the user terminal 100 may transmit the verification result to the server 200.

서버(200)는 사용자 단말(100)로부터 수신된 음성신호 또는 검증결과를 저장할 수 있다(S600). 서버(200)는 상기 음성신호를 사용자의 연령 및/또는 성별, 지역에 따라 구분하여 음성신호 데이터베이스(미도시)에 저장할 수 있다.The server 200 may store a voice signal or verification result received from the user terminal 100 (S600). The server 200 may classify the voice signal according to the user's age, and/or gender, and region, and store the voice signal in a voice signal database (not shown).

서버(200)는 수신된 검증결과를 반영하여 검증대상음성신호에 대한 평가점수를 변화시킬 수 있다. 검증결과가 성공, 즉, 사용자에 의해 입력된 텍스트와 예문이 일치한 경우, 서버(200)는 대응하는 검증대상음성신호에 대한 평가점수를 상승시킬 수 있다. 반대로, 검증결과가 실패, 즉, 사용자에 의해 입력된 텍스트와 예문이 일치하지 않은 경우, 서버(200)는 대응하는 검증대상음성신호에 대한 평가점수를 하락시킬 수 있다. 상기 평가점수는 수집된 음성신호들을 필요에 따라 분류할 때 사용될 수 있다.The server 200 may change the evaluation score for the voice signal to be verified by reflecting the received verification result. If the verification result is successful, that is, the text input by the user and the example sentence match, the server 200 may increase the evaluation score for the corresponding verification target voice signal. Conversely, if the verification result fails, that is, the text input by the user and the example sentence do not match, the server 200 may degrade the evaluation score for the corresponding verification target voice signal. The evaluation score may be used when classifying the collected voice signals as necessary.

도 3는 도 1에 도시된 서버의 동작을 설명하기 위한 플로우 차트(flow chart)이다.FIG. 3 is a flow chart for explaining the operation of the server illustrated in FIG. 1.

도 3을 참조하면, 서버(200)는 예문 데이터베이스(미도시)에 저장된 문장들 중 어느 하나를 예문으로 선택한다(S210). 서버(200)는 다양한 기준에 따라 예문을 선택할 수 있다. 실시 예에 따라, 서버(200)는 랜덤하게 예문을 선택할 수 있다. Referring to FIG. 3, the server 200 selects any one of sentences stored in the example sentence database (not shown) as an example sentence (S210 ). The server 200 may select example sentences according to various criteria. According to an embodiment, the server 200 may randomly select example sentences.

다른 실시 예에 따라, 서버(200)는 미리 정해진 우선 순위에 따라 예문을 선택할 수 있다. 예를 들어, 관리자가 목적에 따라 예문에 우선 순위를 설정하면, 서버(200)는 설정된 우선 순위에 따라 예문을 선택할 수 있다.According to another embodiment, the server 200 may select example sentences according to a predetermined priority. For example, if the administrator sets the priority for example sentences according to the purpose, the server 200 may select the example sentences according to the set priority.

또 다른 실시 예에 따라, 서버(200)는 사용자의 특징, 예를 들어, 상기 사용자의 연령 및/또는 성별, 지역 등에 따라 예문을 선택할 수 있다. 구체적으로, 특정 문장에 상기 사용자에 대응하는 사용자 그룹으로 수집된 음성신호들의 개수가 상대적으로 적다면, 상기 특정 문장을 상기 예문으로 선택할 수 있다. 예를 들어, 상기 사용자가 30대 여성이고 상기 특정 문장에 대해 30대 여성 사용자 그룹으로 수집된 음성신호들의 개수가 적다면, 서버(200)는 상기 사용자에게 송신할 예문으로 상기 특정 문장을 선택할 수 있다.According to another embodiment, the server 200 may select example sentences according to a user's characteristics, for example, the user's age and/or gender, region, and the like. Specifically, if the number of voice signals collected by the user group corresponding to the user is relatively small in a specific sentence, the specific sentence may be selected as the example sentence. For example, if the user is a woman in her 30s and the number of voice signals collected as a female user group in her 30s is small for the specific sentence, the server 200 may select the specific sentence as an example sentence to be transmitted to the user. have.

서버(200)는 선택된 예문에 대해 수집된 음성신호들의 개수에 따라 음성신호 수집 프로세스를 수행할 것인지 여부를 결정할 수 있다(S220). 실시 예에 따라, 서버(200)는 음성신호들의 개수가 관리자가 설정한 목표치 미만일 때 음성신호 수집 프로세스를 진행하는 것으로 결정할 수 있다.The server 200 may determine whether to perform a voice signal collection process according to the number of voice signals collected for the selected example sentence (S220). According to an embodiment, the server 200 may determine to proceed with a voice signal collection process when the number of voice signals is less than a target value set by the administrator.

다른 실시 예에 따라, 서버(200)는 사용자가 속하는 사용자 그룹에 대해 수집된 음성신호들의 개수가 목표치 미만일 때 음성신호 수집 프로세스를 진행하는 것으로 결정할 수 있다. 예를 들어, 사용자가 속하는 사용자 그룹이 서울에 거주하는 30대 여성이고 예문에 대해 수집되어 있는 서울에 거주하는 30대 여성의 음성신호의 개수가 목표치 미만이면 서버(200)는 음성신호 수집 프로세스를 진행하는 것으로 결정할 수 있다.According to another embodiment, the server 200 may determine to proceed with a voice signal collection process when the number of voice signals collected for a user group to which the user belongs is less than a target value. For example, if the user group to which the user belongs is a woman in her 30s living in Seoul and the number of voice signals of a woman in her 30s living in Seoul collected for example sentences is less than the target value, the server 200 performs a voice signal collection process. You can decide to proceed.

음성신호 수집 프로세스를 진행하는 것으로 결정되는 경우, 서버(200)는 예문과 상기 예문에 대응하는 기준음성신호를 사용자 단말(100)로 전송한다(S240).When it is determined to proceed with the voice signal collection process, the server 200 transmits an example sentence and a reference voice signal corresponding to the example sentence to the user terminal 100 (S240).

실시 예에 따라, 예문에 대해 수집된 음성신호들의 개수가 충분한 경우, 즉, 소정의 기준개수 이상인 경우, 서버(200)는 예문 데이터베이스(미도시)에 저장된 문장들 중 다른 하나를 예문으로 재선택할 수 있다(S260).According to an embodiment, when the number of voice signals collected for the example sentence is sufficient, that is, when the number of voice signals is greater than or equal to a predetermined reference number, The server 200 may reselect another one of the sentences stored in the example sentence database (not shown) as an example sentence (S260 ).

다른 실시 예에 따라, 서버(200)는, 예문에 대해 수집된 음성신호들의 개수가 소정의 기준개수 이상인 경우, 수집된 음성신호들 중에서 어느 하나를 검증대상음성신호로 선택하고 검증대상음성신호에 대해 음성신호 검증 프로세스를 진행할 것인지 여부를 결정할 수 있다(S230). According to another embodiment, when the number of voice signals collected for the example sentence is greater than or equal to a predetermined reference number, the server 200 selects any one of the collected voice signals as the voice signal to be verified and adds it to the voice signal to be verified. It can be determined whether or not to proceed with the voice signal verification process (S230).

서버(200)는 음성신호들 각각에 대하여 검증 횟수를 저장하고, 저장된 검증 횟수가 기준값 미만일 때 음성신호 검증 프로세스를 진행하는 것으로 결정할 수 있다.The server 200 may store the number of verifications for each of the speech signals, and determine that the verification process is performed when the number of verifications stored is less than a reference value.

또는, 서버(200)는 음성신호들 각각에 대하여 검증 점수를 저장하고, 저장된 검증 점수가 기준범위 이내 때 음성신호 검증 프로세스를 진행하는 것으로 결정할 수 있다. 예를 들어, 서버(200)는 음성신호 검증 프로세스 수행 후 사용자 단말(100)로부터 수신된 검증 결과에 따라 검증대상음성신호에 대한 검증 점수를 변경하고, 상기 검증 점수가 상기 기준범위 이내일 때 음성신호 검증 프로세스를 진행하는 것으로 결정할 수 있다. 상기 검증 점수가 상기 기준범위의 상한값을 초과하면, 상기 검증대상음성신호는 충분한 검증을 통해 상기 예문에 대응하는 음성신호로 확인된 것을 의미할 수 있다. 반대로, 상기 검증 점수가 상기 기준범위의 하한값 미만이면, 상기 검증대상음성신호는 상기 예문에 대응하지 않는 음성신호로 확인된 것을 의미할 수 있다.Alternatively, the server 200 may store a verification score for each of the speech signals, and determine that the speech signal verification process is performed when the stored verification score is within a reference range. For example, after performing the voice signal verification process, the server 200 changes the verification score for the verification target voice signal according to the verification result received from the user terminal 100, and when the verification score is within the reference range, voice You can decide to go through the signal verification process. If the verification score exceeds the upper limit of the reference range, it may mean that the verification target voice signal is identified as a voice signal corresponding to the example sentence through sufficient verification. Conversely, if the verification score is less than the lower limit of the reference range, it may mean that the verification target voice signal is identified as a speech signal that does not correspond to the example sentence.

음성신호 검증 프로세스를 진행하는 것으로 결정되는 경우, 서버(200)는 예문과 검증대상음성신호를 사용자 단말(100)로 전송한다(S250).If it is determined to proceed with the voice signal verification process, the server 200 transmits an example sentence and a voice signal to be verified to the user terminal 100 (S250).

검증대상음성신호에 대한 검증이 충분한 것으로 판단된 경우, 즉, 상기 검증대상음성신호에 대한 검증횟수가 기준횟수 이상인 경우, 서버(200)는 예문 데이터베이스(미도시)에 저장된 문장들 중 다른 하나를 예문으로 재선택하고, S220 및/또는 S230의 판단 과정을 재수행할 수 있다(S260).If it is determined that verification of the verification target voice signal is sufficient, that is, when the verification frequency for the verification target voice signal is greater than or equal to the reference number, the server 200 selects another one of the sentences stored in the example sentence database (not shown). It may be reselected as an example sentence, and the determination process of S220 and/or S230 may be performed again (S260).

도 4는 도 1에 도시된 사용자 단말이 수행하는 음성신호 수집 프로세스의 일 실시 예를 설명하기 위한 플로우 차트이다.4 is a flow chart for explaining an embodiment of the voice signal collection process performed by the user terminal shown in FIG. 1.

도 4를 참조하면, 서버(200)로부터 예문과 기준음성신호를 수신되면, 사용자 단말(100)은 음성신호 수집 프로세스를 수행한다. 이때 기준음성신호는 음성으로 변환할 수 있는 데이터이거나 예문에 대응하는 특정 계수들로 이루어질 수 있다.Referring to FIG. 4, when an example sentence and a reference voice signal are received from the server 200, the user terminal 100 performs a voice signal collection process. At this time, the reference voice signal may be data that can be converted into speech or may be composed of specific coefficients corresponding to example sentences.

사용자 단말(100)은 미리 설정된 알람 시각에 알람을 출력하면서 서버(200)로부터 수신된 예문을 사용자에게 제시할 수 있다(S410). 실시 예에 따라, 상기 예문은 사용자 단말(100)의 디스플레이에 표시될 수 있다. The user terminal 100 may present an example sentence received from the server 200 to the user while outputting an alarm at a preset alarm time (S410). According to an embodiment, the example sentence may be displayed on the display of the user terminal 100.

다른 실시 예에 따라, 상기 예문은 사용자 단말(100)의 스피커를 통해 음성 형태로 제시될 수 있다. 이 경우, 사용자에게 정확한 음성을 제시하기 위해 알람이 일시적으로 음소거되거나 알람의 음량이 감소되거나 알람의 종류가 변경(예를 들어, 소리에서 진동으로)될 수 있다.According to another embodiment, the example sentence may be presented in a voice form through a speaker of the user terminal 100. In this case, in order to present the correct voice to the user, the alarm may be temporarily muted, the volume of the alarm may be reduced, or the type of alarm may be changed (for example, from sound to vibration).

사용자 단말(100)은 예문 제시 후 사용자의 음성을 수신한다(S420). 구체적으로, 사용자 단말(100)은 예문을 제시한 후 일정시간 동안 사용자 단말(100)의 마이크를 통해 입력되는 소리를 수신하고 사용자의 음성이 입력되면 음성신호로 변환하여 저장한다.The user terminal 100 receives the user's voice after the example is presented (S420). Specifically, the user terminal 100 receives the sound input through the microphone of the user terminal 100 for a period of time after the example is presented, and when the user's voice is input, it is converted into a voice signal and stored.

사용자 단말(100)은 사용자의 음성을 분석하여 예문과 일치하는지 여부를 판단한다(S430). 구체적으로, 사용자 단말(100)은 사용자의 음성신호와 서버(200)로부터 수신된 기준음성신호를 비교하고, 두 신호들 사이의 일치도가 기준값보다 높을 때 사용자의 음성이 예문과 일치하는 것으로 판단할 수 있다. 반대로, 상기 일치도가 기준값 이하일 때 사용자의 음성이 예문과 일치하지 않는 것으로 판단할 수 있다.The user terminal 100 analyzes the user's voice to determine whether it matches the example sentence (S430). Specifically, the user terminal 100 compares the user's voice signal with the reference voice signal received from the server 200 and determines that the user's voice matches the example sentence when the agreement between the two signals is higher than the reference value. Can. Conversely, it may be determined that the user's voice does not match the example sentence when the matching degree is lower than the reference value.

사용자 단말(100)은 사용자 음성신호로부터 특징 계수들을 추출하고, 추출된 특징 계수들과 기준음성신호에 대응하는 기준음성값 사이의 유사도를 계산하며, 계산된 유사도를 기준으로 사용자의 음성과 예문의 일치 여부를 판단할 수 있다.The user terminal 100 extracts feature coefficients from the user voice signal, calculates the similarity between the extracted feature coefficients and a reference voice value corresponding to the reference voice signal, and uses the user's voice and example questions based on the calculated similarity. Matching can be judged.

사용자 단말(100)은 주파수 영역 스펙트럼 분석을 통해 기준음성신호와 사용자의 음성신호의 일치 여부를 판단할 수 있다. 예를 들어, 사용자 단말(100)은 선형 예측 분석(Linear Predictive Analysis) 또는 고속 푸리에 변환(Fast Fourier Transform)을 이용한 파워 스펙트럼 분석(Power Spectral Analysis), RASTA(Relative Spectral Filtering of Log Domain Coefficient), MEL(Mel Scale Cepstral Analysis) 등과 같은 다양한 오디오 특징 추출 방법을 이용해 사용자의 음성신호의 특징을 추출하고 추출된 특징과 기준음성신호에 대응하는 기준음성값을 비교하여 기준음성신호와 사용자의 음성신호의 일치 여부를 판단할 수 있다.The user terminal 100 may determine whether the reference voice signal matches the user's voice signal through frequency domain spectrum analysis. For example, the user terminal 100 is a power spectrum analysis (Linear Predictive Analysis) or a fast Fourier transform (Fast Fourier Transform) Power Spectral Analysis (Relative Spectral Filtering of Log Domain Coefficient), MEL Using various audio feature extraction methods such as (Mel Scale Cepstral Analysis), the characteristics of the user's voice signal are extracted, and the extracted features are compared with the reference voice value corresponding to the reference voice signal to match the reference voice signal with the user's voice signal Can determine whether

예를 들어, 사용자 단말(100)은 사용자의 음성신호를 MFC(mel-frequency cepstrum) 계수들로 변환하고 변환된 계수들과 기준음성신호에 대응하는 기준음성값의 일치도를 계산하여 사용자의 음성이 예문과 일치하는지 여부를 판단할 수 있다.For example, the user terminal 100 converts the user's voice signal into mel-frequency cepstrum (MFC) coefficients and calculates the degree of agreement between the converted coefficients and a reference voice value corresponding to the reference voice signal, so that the user's voice You can judge whether it matches the example sentence.

사용자 단말(100)은 입력된 음성을 파싱을 통해 사용자의 음성이 예문과 일치하는지 판단할 수 있다.The user terminal 100 may determine whether the user's voice matches the example sentence through parsing the input voice.

구체적으로, 사용자 단말(100)은 사용자 음성신호로부터 특징 계수들을 추출하고, 추출된 특징 계수들과 기준음성신호에 대응하는 기준음성값 사이의 유사도를 계산하고, 산출된 유사도가 미리 설정된 임계값 이상이면 사용자의 음성이 예문과 일치하는 것으로 판단할 수 있다. Specifically, the user terminal 100 extracts feature coefficients from the user voice signal, calculates the similarity between the extracted feature coefficients and a reference voice value corresponding to the reference voice signal, and the calculated similarity is greater than or equal to a preset threshold value. If it is, it can be determined that the user's voice matches the example sentence.

사용자 단말(100)은 산출된 유사도가 미리 설정된 임계값 미만이면, 사용자 단말은 사용자의 음성신호를 파싱하여 복수의 단위 음성신호를 생성하고, 기준음성신호를 파싱하여 복수의 단위 기준음성값을 생성할 수 있다. If the calculated similarity is less than a preset threshold, the user terminal 100 parses the user's voice signal to generate a plurality of unit voice signals, and parses the reference voice signal to generate a plurality of unit reference voice values. can do.

사용자 단말은 단위 음성신호와 단위 기준음성값으로부터 추출된 특징 계수들을 단위 음성신호 별로 유사도를 계산하고, 계산된 유사도가 미리 설정된 임계값 미만인 단위 음성신호를 재입력 신호로 분류하고, 예문에서 재입력 신호에 대응되는 부분을 추출하여 재입력 예문을 생성한다. 이때, 임계값은 예문 전체의 유사도 판단시에 사용된 임계값과 상이할 수 있다.The user terminal calculates similarity for each unit speech signal from feature coefficients extracted from the unit speech signal and the unit reference speech value, classifies the unit speech signal having the calculated similarity below a preset threshold value as a re-input signal, and re-enters it in an example sentence The part corresponding to the signal is extracted to generate a re-entry example sentence. At this time, the threshold value may be different from the threshold value used in determining similarity of the entire example sentence.

사용자 단말(100)은 재입력 예문을 표시하여 사용자로부터 재입력 예문에 대한 음성신호를 다시 입력 받고, 다시 입력된 재입력 음성신호의 특징들과 재입력 예문에 대응되는 단위 기준음성값의 특징들의 유사도를 산출하고, 산출된 유사도가 임계값보다 크면 사용자의 음성이 일치하는 것으로 판단할 수 있다. The user terminal 100 displays the re-entry example sentence, receives the voice signal for the re-entry example sentence again from the user, and re-enters the characteristics of the re-entered voice signal and the unit reference voice values corresponding to the re-entry example sentence. The similarity is calculated, and if the calculated similarity is greater than a threshold value, it may be determined that the user's voice is consistent.

예컨대, 예문이 “아침 사과는 건강에 좋다”의 기준음성값과 사용자 음성 신호로부터 추출된 특징 계수들의 유사도가 미리 설정된 임계값 미만이면, 사용자 단말(100)은 각 단어별로 음성신호와 기준음성신호를 파싱한다.For example, if the similarity between the reference voice value of "Morning apple is good for health" and the feature coefficients extracted from the user voice signal is less than a preset threshold, the user terminal 100 performs a voice signal and a reference voice signal for each word. Parse.

사용자 단말(100)은 파싱된 단위 음성신호와 단위 기준음성신호에서 추출된 특징 계수의 유사도를 산출하고, 유사도가 미리 설정된 임계값보다 낮은 단위 음성신호에 대응되는 “사과는”을 재입력 신호를 결정하고, 이에 대응되도록 “사과는”을 재입력 예문으로 생성하여 표시할 수 있다. The user terminal 100 calculates the similarity between the parsed unit speech signal and the feature coefficients extracted from the unit reference speech signal, and re-enters the "apple" corresponding to the unit speech signal whose similarity is lower than a preset threshold. Decision and “Apple” can be generated and displayed as a re-entry example to respond to this.

사용자가 재입력 예문에 대한 음성 신호를 입력하면, 사용자 단말(100)은 재입력 음성 신호와 이에 대응되는 단위기준음성신호의 특징을 비교하여, 임계값이상이면 사용자의 음성이 예문과 일치하는지 여부를 판단할 수 있다.When the user inputs the voice signal for the re-entry example sentence, the user terminal 100 compares the characteristics of the re-input voice signal and the corresponding unit reference voice signal, and if the threshold is greater than or equal to the threshold, whether the user's voice matches the example sentence Can judge.

사용자의 음성이 예문과 일치하는 것으로 판단되는 경우, 사용자 단말(100)은 알람을 해제하고 음성신호를 서버(200)로 송신할 수 있다(S440). 반대로 사용자의 음성이 예문과 일치하지 않는 것으로 판단되는 경우, 사용자 단말(100)은 알람을 유지하면서 다시 사용자의 음성을 수신할 수 있다(S430의 No 브랜치).If it is determined that the user's voice matches the example sentence, the user terminal 100 may release the alarm and transmit the voice signal to the server 200 (S440). Conversely, if it is determined that the user's voice does not match the example sentence, the user terminal 100 may receive the user's voice again while maintaining the alarm (No branch in S430).

도 5는 도 1에 도시된 사용자 단말이 수행하는 음성신호 수집 프로세스의 다른 실시 예를 설명하기 위한 플로우 차트이다. 도 5에 기재된 S410 및 S420 단계는 도 4에 기재된 S410 및 S420 단계와 동일한 바, 중복되는 설명은 생략한다.5 is a flowchart illustrating another embodiment of a voice signal collection process performed by the user terminal illustrated in FIG. 1. Steps S410 and S420 described in FIG. 5 are the same as steps S410 and S420 described in FIG. 4, and overlapping descriptions are omitted.

도 5를 참조하면, 음성신호를 서버(200)로 송신할 지 여부를 판단하는 기준과 음성신호의 예문 일치 여부를 판단하는 기준이 서로 다르게 설정될 수 있다. 이를 통해 관리자는 음성신호 송신 기준을 알람 해제 기준 보다 유연하게 설정하여 보다 많은 음성신호를 수집하도록 설정할 수 있다.Referring to FIG. 5, a criterion for determining whether to transmit a voice signal to the server 200 and a criterion for determining whether an example sentence of the voice signal match may be set differently. Through this, the administrator can set the voice signal transmission criterion more flexibly than the alarm release criterion to collect more voice signals.

사용자 단말(100)은 사용자의 음성과 예문의 유사도를 계산할 수 있다(S450). 구체적으로, 사용자 단말(100)은 사용자의 음성신호와 서버(200)로부터 수신된 기준음성신호 사이의 유사도를 수치화할 수 있다. 예를 들어, 사용자 단말(100)은 두 신호들 간의 진폭 분석, 주파수 분석 등을 통해 유사도를 수치화할 수 있다.The user terminal 100 may calculate the similarity between the user's voice and the example sentence (S450). Specifically, the user terminal 100 may quantify the similarity between the user's voice signal and the reference voice signal received from the server 200. For example, the user terminal 100 may quantify similarity through amplitude analysis and frequency analysis between two signals.

사용자 단말(100)은 상기 유사도와 제1 기준값을 비교할 수 있다(S460). 상기 유사도가 상기 제1 기준값 이하이면 사용자 단말(100)은 해당 음성신호가 불필요한 것으로 판단하고 사용자의 음성을 다시 수신할 수 있다(S460의 No 브랜치). 반대로, 상기 유사도가 상기 제1 기준값을 초과하면 사용자 단말(100)은 해당 음성신호를 서버(200)로 송신할 수 있다. 이때, 사용자 단말(100)은 상기 유사도 정보를 해당 음성신호와 함께 서버(200)로 송신할 수 있다(S470).The user terminal 100 may compare the similarity and the first reference value (S460). If the similarity is less than the first reference value, the user terminal 100 may determine that the corresponding voice signal is unnecessary and receive the user's voice again (No branch in S460). Conversely, when the similarity exceeds the first reference value, the user terminal 100 may transmit the corresponding voice signal to the server 200. At this time, the user terminal 100 may transmit the similarity information to the server 200 together with the corresponding voice signal (S470).

사용자 단말(100)은 상기 유사도와 제2 기준값을 비교할 수 있다(S480). 상기 유사도가 상기 제2 기준값 이하이면 사용자 단말(100)은 추가적인 음성신호 수집을 위해 사용자의 음성을 다시 수신할 수 있다(S480의 No 브랜치). 반대로, 상기 유사도가 상기 제2 기준값을 초과하면 사용자 단말(100)은 알람을 해제할 수 있다(S490).The user terminal 100 may compare the similarity and the second reference value (S480). If the similarity is less than the second reference value, the user terminal 100 may receive the user's voice again for additional voice signal collection (No branch in S480). Conversely, if the similarity exceeds the second reference value, the user terminal 100 may release the alarm (S490).

도 6는 도 1에 도시된 사용자 단말이 수행하는 음성신호 검증 프로세스의 일 실시 예를 설명하기 위한 플로우 차트이다.FIG. 6 is a flow chart for explaining an embodiment of a voice signal verification process performed by the user terminal shown in FIG. 1.

도 6을 참조하면, 서버(200)로부터 예문과 검증대상음성신호가 수신되면, 사용자 단말(100)은 음성신호 검증 프로세스를 수행한다.Referring to FIG. 6, when an example sentence and a voice signal to be verified are received from the server 200, the user terminal 100 performs a voice signal verification process.

사용자 단말(100)은 알람을 출력하며 사용자에게 검증대상음성신호를 제시할 수 있다(S1410). 예를 들어, 사용자 단말(100)은 알람을 출력하던 중 알람의 소리 크기를 감소시킨후 검증대상음성신호를 출력하고, 검증대상음성신호 출력 이후 다시 알람의 소리 크기를 증가시킬 수 있다.The user terminal 100 outputs an alarm and can present a voice signal to be verified to the user (S1410). For example, while outputting an alarm, the user terminal 100 may reduce the sound level of the alarm and then output a verification target voice signal, and then increase the sound level of the alarm again after outputting the verification target voice signal.

사용자 단말(100)은 검증대상음성신호의 출력 이후 일정시간 동안 사용자의 텍스트 입력을 기다린다(S1420). 사용자가 텍스트를 입력하면, 입력된 텍스트와 예문을 비교한다(S1430). 입력된 텍스트와 예문이 일치하면, 사용자 단말(100)은 알람을 해제하고 검증성공결과를 서버(200)로 송신한다.The user terminal 100 waits for a user to input text for a certain period of time after the verification target voice signal is output (S1420). When the user inputs text, the input text is compared with the example sentence (S1430). If the input text and the example sentence match, the user terminal 100 releases the alarm and transmits the verification success result to the server 200.

반대로, 입력된 텍스트와 예문이 일치하지 않으면, 사용자 단말(100)은 사용자의 텍스트 입력을 다시 기다린다. 다만, 예문과 검증대상음성신호가 실제로 일치하지 않는 경우를 대비하여, 사용자 단말(100)은 사용자의 텍스트 입력 횟수와 알람 종료 기준 값을 비교한다(S1450).Conversely, if the input text and the example sentence do not match, the user terminal 100 waits for the user to input the text again. However, in case the example sentence and the voice signal to be verified do not actually match, the user terminal 100 compares the number of text inputs of the user with the alarm end reference value (S1450).

사용자의 텍스트 입력 횟수가 알람 종료 기준 값 이하이면, 사용자 단말(100)은 사용자의 텍스트 입력을 다시 기다린다(S1450의 No 브랜치). 반대로, 사용자의 텍스트 입력 횟수가 알람 종료 기준 값보다 크면, 사용자 단말(100)은 알람을 해제하고 검증실패결과를 서버(200)로 송신한다.If the number of times the user inputs text is equal to or less than the alarm end reference value, the user terminal 100 waits for the text input of the user again (No branch in S1450). Conversely, when the number of text inputs by the user is greater than the alarm end reference value, the user terminal 100 releases the alarm and transmits the verification failure result to the server 200.

본 발명은 도면에 도시된 일 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.The present invention has been described with reference to one embodiment shown in the drawings, but this is only exemplary, and those skilled in the art will understand that various modifications and other equivalent embodiments are possible therefrom. Therefore, the true technical protection scope of the present invention should be determined by the technical spirit of the appended claims.

10; 알람 제어 시스템
100; 사용자 단말
200; 서버10; Alarm control system
100; User terminal
200; server

Claims (13)

삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 예문 데이터베이스에서 문장을 선택하는 단계;
상기 선택된 문장에 대해 수집된 음성신호들의 개수가 기준개수 미만이면, 상기 선택된 문장을 예문으로 결정하고 상기 예문을 사용자 단말로 송신하는 단계;
상기 수집된 음성신호들의 상기 개수가 상기 기준개수 이상이고 상기 수집된 음성신호들에 대한 검증횟수가 기준횟수 미만이면, 상기 수집된 음성신호들 중 어느 하나를 검증대상음성신호로 선택하고 상기 검증대상음성신호에 대응하는 검증문장과 상기 검증대상음성신호를 상기 사용자 단말로 송신하는 단계; 및
상기 수집된 음성신호들의 상기 개수가 상기 기준개수 이상이고 상기 수집된 음성신호들에 대한 상기 검증횟수가 상기 기준횟수 이상이면, 상기 예문 데이터베이스에서 문장을 재선택하는 단계를 포함하는 서버의 알람 해제 미션 결정 방법.Selecting a sentence from the example sentence database;
If the number of voice signals collected for the selected sentence is less than a reference number, determining the selected sentence as an example sentence and transmitting the example sentence to a user terminal;
If the number of the collected voice signals is greater than or equal to the reference number and the number of verification of the collected voice signals is less than the reference number, select one of the collected voice signals as a verification target speech signal and select the verification target Transmitting a verification sentence corresponding to a voice signal and the verification target voice signal to the user terminal; And
And re-selecting a sentence in the example sentence database when the number of the collected voice signals is greater than or equal to the reference number and the number of verification of the collected voice signals is greater than or equal to the reference number. How to decide. 삭제delete 삭제delete
KR1020180158296A 2018-12-10 2018-12-10 Method for controlling alarm of user terminal and method for determining alarm off mission of server KR102131724B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020180158296A KR102131724B1 (en) 2018-12-10 2018-12-10 Method for controlling alarm of user terminal and method for determining alarm off mission of server
KR1020200034875A KR102419990B1 (en) 2018-12-10 2020-03-23 Method for controlling alarm of user terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180158296A KR102131724B1 (en) 2018-12-10 2018-12-10 Method for controlling alarm of user terminal and method for determining alarm off mission of server

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020200034875A Division KR102419990B1 (en) 2018-12-10 2020-03-23 Method for controlling alarm of user terminal

Publications (2)

Publication Number Publication Date
KR20200070783A KR20200070783A (en) 2020-06-18
KR102131724B1 true KR102131724B1 (en) 2020-07-08

Family

ID=71143306

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180158296A KR102131724B1 (en) 2018-12-10 2018-12-10 Method for controlling alarm of user terminal and method for determining alarm off mission of server

Country Status (1)

Country Link
KR (1) KR102131724B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220106633A (en) 2021-01-22 2022-07-29 박주형 Inducing game participation using alarm in smart phone and the compensation method and system accordingly
KR102500381B1 (en) 2021-02-02 2023-02-14 박주형 Method for memorizing foreign words using smart phone alarm

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011047734A (en) * 2009-08-26 2011-03-10 Kyocera Corp Electronic device and alarm output method
JP2013153338A (en) * 2012-01-25 2013-08-08 Asahi Kasei Electronics Co Ltd Alarm device, portable terminal, and method of stopping alarm sound
JP2018013387A (en) * 2016-07-20 2018-01-25 ヤフー株式会社 Information processing device, information processing system, terminal device, information processing method and information processing program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120044606A (en) * 2010-10-28 2012-05-08 에스케이텔레콤 주식회사 Supporting method and system for language learning

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011047734A (en) * 2009-08-26 2011-03-10 Kyocera Corp Electronic device and alarm output method
JP2013153338A (en) * 2012-01-25 2013-08-08 Asahi Kasei Electronics Co Ltd Alarm device, portable terminal, and method of stopping alarm sound
JP2018013387A (en) * 2016-07-20 2018-01-25 ヤフー株式会社 Information processing device, information processing system, terminal device, information processing method and information processing program

Also Published As

Publication number Publication date
KR20200070783A (en) 2020-06-18

Similar Documents

Publication Publication Date Title
CN108831439B (en) Voice recognition method, device, equipment and system
US11250843B2 (en) Speech recognition method and speech recognition device
CN107810529A (en) Language model sound end determines
CN103280216B (en) Improve the speech recognition device the relying on context robustness to environmental change
US11657800B2 (en) Electronic device with wakeup word determined multi-mode operation
CN113168832A (en) Alternating response generation
US11276403B2 (en) Natural language speech processing application selection
US11348601B1 (en) Natural language understanding using voice characteristics
CN113314119B (en) Voice recognition intelligent household control method and device
KR102585231B1 (en) Speech signal processing mehtod for speaker recognition and electric apparatus thereof
KR102131724B1 (en) Method for controlling alarm of user terminal and method for determining alarm off mission of server
US20230215425A1 (en) User-system dialog expansion
US11580182B2 (en) Content generation framework
CN109462482A (en) Method for recognizing sound-groove, device, electronic equipment and computer readable storage medium
KR102594838B1 (en) Electronic device for performing task including call in response to user utterance and method for operation thereof
US11893310B2 (en) System command processing
CN115171731A (en) Emotion category determination method, device and equipment and readable storage medium
CN114708869A (en) Voice interaction method and device and electric appliance
CN112329431B (en) Audio and video data processing method, equipment and storage medium
US11145295B1 (en) Natural language command routing
US10978069B1 (en) Word selection for natural language interface
KR102419990B1 (en) Method for controlling alarm of user terminal
CN113724693B (en) Voice judging method and device, electronic equipment and storage medium
US11430435B1 (en) Prompts for user feedback
JP7348818B2 (en) dialogue device

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant