KR20150088532A - Apparatus for providing service during call and method for using the apparatus - Google Patents

Apparatus for providing service during call and method for using the apparatus Download PDF

Info

Publication number
KR20150088532A
KR20150088532A KR1020140008975A KR20140008975A KR20150088532A KR 20150088532 A KR20150088532 A KR 20150088532A KR 1020140008975 A KR1020140008975 A KR 1020140008975A KR 20140008975 A KR20140008975 A KR 20140008975A KR 20150088532 A KR20150088532 A KR 20150088532A
Authority
KR
South Korea
Prior art keywords
call
application
user
command
event
Prior art date
Application number
KR1020140008975A
Other languages
Korean (ko)
Inventor
이병근
Original Assignee
이병근
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이병근 filed Critical 이병근
Priority to KR1020140008975A priority Critical patent/KR20150088532A/en
Publication of KR20150088532A publication Critical patent/KR20150088532A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/40Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/74Details of telephonic subscriber devices with voice recognition means

Abstract

Disclosed are an apparatus and method for providing a service during a call. The apparatus for providing a service during a call comprises: a conversation content recording unit for recording conversation content between a caller and a callee by using a user terminal and converting the recorded content into text; a command extraction unit for extracting a command for running an application to be activated during a call, based on an event generated in accordance with selection of at least one application which can be activated during a call by a caller, or output of an activation command; and a command execution unit for simultaneously activating the application during a call by processing the command for running the application based on the conversation content which is converted into text. Thus, the present invention can provide a user with the convenience of using the user terminal.

Description

통화 중 서비스 제공 장치 및 이를 이용하는 방법{APPARATUS FOR PROVIDING SERVICE DURING CALL AND METHOD FOR USING THE APPARATUS}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a service providing apparatus,

본 발명은 사용자 단말 제어 기술에 관한 것으로, 더욱 상세하게는, 통화 중인 사용자에 의해 발생되는 이벤트를 처리하여 사용자 단말에서 통화와 동시에 애플리케이션을 제공하는 통화 중 서비스 제공 장치 및 이를 이용하는 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a user terminal control technology, and more particularly, to a service provision apparatus for providing a communication service with a user terminal by processing an event generated by a busy user.

최근 정보 통신 기술의 발달로 스마트폰(Smart Phone), 태블릿 PC, 스마트 가전과 같이 통신 기능이 부여된 다양한 사용자 단말의 보급이 대중화됨에 따라 사용자는 적어도 하나 이상의 사용자 단말을 운용할 수 있게 되었다.BACKGROUND ART [0002] With the recent development of information communication technologies, popularization of various user terminals having communication functions such as a smart phone, a tablet PC, and a smart home appliance has become popular, so that a user can operate at least one user terminal.

그리하여, 사용자는 사용자 단말을 이용하여 장소와 시간의 구애없이 타인과 통화하거나 메시지를 송수신하고 인터넷을 통해 원하는 정보를 검색할 수 있으며, 사용자 단말에 탑재된 위치 센서를 이용하여 타인과 위치를 공유하는 등의 다양한 서비스를 제공받을 수 있다.Thus, the user can use the user terminal to talk to another person without any place and time, send / receive a message, search desired information through the Internet, and share the location with the other person using the position sensor mounted on the user terminal And the like can be provided.

초기의 사용자 단말은 하드웨어 성능의 제약으로 인해 다수의 애플리케이션을 동시에 수행하는 것에 한계가 있었으나, 최근 사용자 단말의 하드웨어 성능이 발달하여 정보 처리 속도가 향상되고 메모리의 용량이 커짐에 따라 사용자 단말에 설치된 다수의 애플리케이션을 동시에 실행할 수 있는 멀티태스킹(multi-tasking)이 가능하게 되었다.However, as the hardware performance of the user terminal has been improved and the information processing speed has been improved and the capacity of the memory has been increased, a large number of users installed in the user terminal Multi-tasking capable of simultaneously executing applications of the present invention.

이에 따라, 멀티태스킹에 기반한 사용자 단말 제어 기술이 활발하게 연구되고 있으며 특히, 통화 중인 사용자에게 통화와 동시에 다양한 서비스가 제공되도록 하는 기술이 개발되어 상용화되고 있는 추세이다.Accordingly, a technique for controlling user terminals based on multitasking has been actively researched, and in particular, a technology for providing various services simultaneously with a call to a busy user has been developed and commercialized.

예를 들어, 대한민국 공개특허공보 제10-2008-0101561호(2008.11.21. 공개)에 따르면, 호 제어권을 획득한 서비스 제공서버에서 서비스 가입 유무를 확인하고 서비스에 가입된 사용자에 한하여 이동 통신망을 통해 콘텐츠를 전송함으로써 통화 중 실시간으로 통화자의 요구에 따른 콘텐츠를 제공하고자 하였다.For example, according to Korean Patent Laid-Open Publication No. 10-2008-0101561 (published on November 21, 2008), it is possible to confirm whether or not a service is subscribed to a service providing server that has acquired a call control right, To provide contents according to the caller's demands in real time during the call.

그러나, 상술한 종래의 기술은 통화 중 실시간으로 컨텐츠를 제공하는데 있어 서비스 가입 유무를 확인하기 위한 호 처리 과정이 필수적으로 요구되어 시스템이 복잡해질 수 있다는 점에서 사용자 단말 사용에 대한 효율성이 떨어질 수 있다.However, in the above-described conventional technology, in order to provide contents in real time during a call, a call processing procedure for checking whether a service is added is indispensable, and the system may become complicated, .

또한, 이동 통신망을 통해 컨텐츠를 전송하므로 네트워크 상황에 따라 서비스의 지연이 발생할 수 있다는 점에서 사용자의 불편을 야기할 수 있으며, 제공할 수 있는 서비스가 콘텐츠에 한정된다는 점에서 한계가 있다.In addition, since contents are transmitted through a mobile communication network, service delays may occur depending on network conditions, which may cause inconveniences for a user, and there is a limitation in that services that can be provided are limited to contents.

상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 통화 중인 사용자의 동작 또는 발화에 의해 발생되는 이벤트를 처리하여 통화의 중단없이 사용자 단말에 설치된 애플리케이션을 실시간으로 제공함으로써 사용자에게 사용자 단말 사용에 대한 편리함을 제공할 수 있는 통화 중 서비스 제공 장치를 제공하는 데 있다.It is an object of the present invention to solve the above problems and to provide a method and apparatus for handling an event generated by an operation or an utterance of a user during a call and providing an application installed in the user terminal without interruption, And to provide a service providing apparatus in the middle of a call capable of providing convenience.

또한, 본 발명의 다른 목적은, 사용자 단말에 설치된 애플리케이션에 대한 멀티태스킹(multi-tasking)이 가능하므로 사용자 단말을 효율적으로 사용할 수 있는 통화 중 서비스 제공 방법을 제공하는 데 있다.It is another object of the present invention to provide a method for providing a busy service in a multi-tasking application for an application installed in a user terminal.

상기 목적을 달성하기 위한 본 발명의 일 측면에 따른 통화 중 서비스 제공 장치는, 사용자에 의해 운용되는 사용자 단말에 의해 구현되며 사용자 단말을 이용하여 통화 중인 사용자와 통화 상대방 간의 음성 통화 내용을 녹음하여 텍스트로 변환하는 통화 내용 녹음부, 통화 중인 사용자에 의해 통화 중 실행 가능한 적어도 하나의 애플리케이션이 선택되거나 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 실행 명령어가 발화됨에 따라 발생되는 이벤트를 기반으로 통화 중 실행될 애플리케이션의 수행 명령을 추출하는 명령 추출부 및 텍스트로 변환된 음성 통화 내용을 기반으로 추출된 애플리케이션의 수행 명령을 처리하여 통화 중 애플리케이션을 동시에 수행하는 명령 수행부를 포함한다.According to an aspect of the present invention, there is provided an apparatus for providing a service during a call, the apparatus being implemented by a user terminal operated by a user and recording voice call contents between a user and a call recipient using a user terminal, An application to be executed during a call based on an event that is generated as a result of selection of at least one application executable during a call by a user in a call or execution command for at least one application executable during a call, And a command execution unit for processing an execution command of the extracted application on the basis of the voice conversation contents converted into the text and simultaneously executing the application during the call.

여기에서, 통화 내용 녹음부는 텍스트로 변환된 음성 통화 내용을 사용자 단말 내의 데이터베이스 또는 적어도 하나의 사용자 단말의 사용을 실시간으로 모니터링하는 외부의 서버에 미리 설정된 기간 동안 임시 저장하여 애플리케이션의 수행 명령에 대한 처리에 이용될 수 있다.Here, the call content recording unit temporarily stores the voice call conversation contents converted into text into a database in the user terminal or an external server that monitors the use of at least one user terminal in real time for a preset period of time, Lt; / RTI >

여기에서, 통화 중 서비스 제공 장치는 통화 중인 사용자에 의해 선택되도록 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 리스트를 표시하거나, 애플리케이션의 수행 명령에 대한 처리 결과를 표시하는 디스플레이부를 더 포함할 수 있다.Here, the on-the-call service providing apparatus may further include a display unit for displaying a list of at least one application executable during a call so as to be selected by a busy user, or displaying a processing result of an execution command of the application.

여기에서, 적어도 하나의 애플리케이션에 대한 리스트는 통화 중인 사용자의 위치 전송, 통화 상대방의 위치 수신, 통화 중인 사용자와 통화 상대방 간의 거리 차, 통화 전 사용된 애플리케이션 실행, 정보 검색, 메모 작성 및 통화 중 실행 가능한 애플리케이션 종류 보기 중 적어도 하나를 포함할 수 있다.Here, the list of at least one application includes at least one of a location transfer of a user in a call, a location reception of a call destination, a distance difference between a calling user and a calling party, execution of an application used before a call, information retrieval, And a possible application type view.

여기에서, 이벤트는 디스플레이부에 표시된 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 리스트 중 통화 중인 사용자에 의해 선택된 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함하여 발생될 수 있다.Here, the event may be generated including a start event and an end event for an application selected by a busy user among a list of at least one application executable among calls displayed on the display unit.

여기에서, 이벤트는 통화 중인 사용자에 의해 통화 중 실행 가능한 적어도 하나의 애플리케이션 각각에 대해 미리 등록한 시작 명령어 및 종료 명령어를 포함하는 실행 명령어가 발화됨에 따라 발생될 수 있다.Here, the event may be generated as the execution command including the start instruction and the end instruction registered in advance for each of at least one application executable by the busy user is communicated.

여기에서, 명령 추출부는 통화 중인 사용자에 의해 선택된 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함하여 통화 중 실행될 애플리케이션의 수행 명령을 추출하거나, 통화 중인 사용자에 의해 발화된 시작 명령어 및 종료 명령어를 포함하여 통화 중 실행될 애플리케이션의 수행 명령을 추출할 수 있다.Here, the command extraction unit may extract an execution command of an application to be executed during a call, including a start event and an end event for an application selected by a user in a call, or may include a start command and an end command, It is possible to extract an execution command of the application to be executed.

여기에서, 명령 수행부는 시작 이벤트와 종료 이벤트 간의 시간에 해당하는 텍스트로 변환된 음성 통화 내용을 이용하여 통화 중 실행될 애플리케이션의 수행 명령을 처리하거나 발화된 시작 명령어와 종료 명령어 간의 시간에 해당하는 텍스트로 변환된 음성 통화 내용을 이용하여 통화 중 실행될 애플리케이션의 수행 명령을 처리할 수 있다.Here, the command execution unit may process the execution command of the application to be executed during the call using the voice conversation contents converted into the text corresponding to the time between the start event and the end event, or may be a text corresponding to the time between the uttered start command and the end command It is possible to process an execution command of an application to be executed during a call using the converted voice call content.

또한, 상기 목적을 달성하기 위한 본 발명의 다른 측면에 따른 통화 중 서비스 제공 방법은, 사용자 단말의 통화 중 서비스 제공 장치에서 수행되며 사용자 단말을 이용하여 통화 중인 사용자와 통화 상대방 간의 음성 통화 내용을 녹음하여 텍스트로 변환하는 단계, 통화 중인 사용자에 의해 통화 중 실행 가능한 적어도 하나의 애플리케이션이 선택되거나 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 실행 명령어가 발화됨에 따라 발생되는 이벤트를 기반으로 통화 중 실행될 애플리케이션의 수행 명령을 추출하는 단계 및 텍스트로 변환된 음성 통화 내용을 기반으로 추출된 애플리케이션의 수행 명령을 처리하여 통화와 동시에 애플리케이션을 수행하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method for providing a service during a call, the method comprising the steps of: recording a voice call between a user and a calling party using a user terminal, Converting at least one application executable during a call by a user in a call to a text based on an event generated as an execution instruction for at least one application executable during a call is selected, Extracting a performance command, and processing an execution command of the extracted application based on the voice conversation converted into text, thereby executing the application concurrently with the call.

상술한 바와 같은 본 발명의 실시예에 따른 통화 중 서비스 제공 장치 및 이를 이용하는 방법에 따르면, 통화 중인 사용자의 동작 또는 발화에 의해 발생되는 이벤트를 처리하여 통화의 중단없이 사용자 단말에 설치된 애플리케이션을 실시간으로 제공함으로써 사용자에게 사용자 단말 사용에 대한 편리함을 제공할 수 있다.According to the apparatus for providing a service during a call and the method for using the same according to an embodiment of the present invention, an event generated by an operation or an utterance of a user during a call is processed, So that it is possible to provide convenience to the user in using the user terminal.

또한, 사용자 단말에 설치된 애플리케이션에 대한 멀티태스킹(multi-tasking)이 가능하므로 사용자 단말을 효율적으로 사용할 수 있다.In addition, since multi-tasking can be performed for an application installed in the user terminal, the user terminal can be efficiently used.

도 1은 본 발명의 실시예에 따른 통화 중 서비스 제공 장치를 나타내는 블록도이다.
도 2는 본 발명의 실시예에 따른 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 리스트와 애플리케이션의 수행 명령에 대한 처리 결과를 디스플레이부에 표시하는 것을 설명하는 예시도이다.
도 3은 본 발명의 실시예에 따른 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대하여 미리 등록한 실행 명령어를 설명하는 예시도이다.
도 4는 본 발명의 실시예에 따른 통화 중 서비스 제공 방법을 설명하는 흐름도이다.
1 is a block diagram illustrating an apparatus for providing a service during a call according to an embodiment of the present invention.
FIG. 2 is a diagram illustrating an example of displaying a list of at least one application executable during a call according to an exemplary embodiment of the present invention and a processing result of an application execution command on a display unit. FIG.
3 is an exemplary diagram illustrating an execution command registered in advance for at least one application executable during a call according to an embodiment of the present invention.
4 is a flowchart illustrating a method for providing a service during a call according to an embodiment of the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. While the invention is susceptible to various modifications and alternative forms, specific embodiments thereof are shown by way of example in the drawings and will herein be described in detail. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention. Like reference numerals are used for like elements in describing each drawing.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다. The terms first, second, A, B, etc. may be used to describe various elements, but the elements should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component. And / or < / RTI > includes any combination of a plurality of related listed items or any of a plurality of related listed items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. It is to be understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, . On the other hand, when an element is referred to as being "directly connected" or "directly connected" to another element, it should be understood that there are no other elements in between.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used in this application is used only to describe a specific embodiment and is not intended to limit the invention. The singular expressions include plural expressions unless the context clearly dictates otherwise. In the present application, the terms "comprises" or "having" and the like are used to specify that there is a feature, a number, a step, an operation, an element, a component or a combination thereof described in the specification, But do not preclude the presence or addition of one or more other features, integers, steps, operations, elements, components, or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in commonly used dictionaries are to be interpreted as having a meaning consistent with the contextual meaning of the related art and are to be interpreted as either ideal or overly formal in the sense of the present application Do not.

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시예에 따른 통화 중 서비스 제공 장치를 나타내는 블록도이고, 도 2는 본 발명의 실시예에 따른 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 리스트와 애플리케이션의 수행 명령에 대한 처리 결과를 디스플레이부에 표시하는 것을 설명하는 예시도이다. FIG. 1 is a block diagram illustrating an apparatus for providing a service during a call according to an embodiment of the present invention. FIG. 2 illustrates a list of at least one application executable during a call according to an exemplary embodiment of the present invention, And displaying the result on the display unit.

또한, 도 3은 본 발명의 실시예에 따른 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대하여 미리 등록한 실행 명령어를 설명하는 예시도이다.3 is an exemplary diagram illustrating an execution command registered in advance for at least one application executable during a call according to an embodiment of the present invention.

도 1 내지 도 3을 참조하면, 통화 중 서비스 제공 장치(100)는 사용자에 의해 운용되는 사용자 단말에서 구현되어 통화 중 적어도 하나의 애플리케이션을 사용자에게 동시에 제공할 수 있다.1 to 3, the on-the-call service providing apparatus 100 may be implemented in a user terminal operated by a user to simultaneously provide at least one application of a call to a user.

여기에서, 사용자 단말은 컴퓨터, 노트북, 스마트폰(smart phone), 태블릿 PC(tablet PC)와 같은 정보 처리 장치를 의미할 수 있으나 이에 한정되지 않고, 사용자의 동작 또는 음성을 인식할 수 있는 각종 센서와 유무선 네트워크를 통해 정보를 송수신할 수 있는 통신 장치, 정보를 표시하는 디스플레이 장치 및 인식된 사용자의 동작 또는 음성을 처리하는 정보 처리 기능을 구비한 각종 기기를 포함할 수 있다.Here, the user terminal may mean an information processing device such as a computer, a notebook, a smart phone, or a tablet PC, but the present invention is not limited thereto. Various sensors, A communication device capable of transmitting / receiving information through a wired / wireless network, a display device for displaying information, and various devices having an information processing function for processing an operation or voice of a recognized user.

이 때, 사용자 단말은 다른 사용자 단말과 와이파이(WiFi: Wireless Fidelity), 3G(3Generation), LTE(Long Term Evolution) 등의 다양한 통신 인터페이스로 연결되어 통화 서비스를 제공할 수 있다. 또한, 사용자 단말에 설치된 적어도 하나의 애플리케이션을 실행하여 사용자에게 다양한 서비스를 제공할 수 있다.At this time, the user terminal can be connected to other user terminals through various communication interfaces such as WiFi (Wireless Fidelity), 3G (3G), and LTE (Long Term Evolution) to provide a call service. In addition, it is possible to provide various services to the user by executing at least one application installed in the user terminal.

최근에는 사용자 단말에 탑재되는 하드웨어 성능이 발달하여 멀티태스킹(multi-tasking)이 가능함에 따라 다수의 애플리케이션을 동시에 실행하여 사용자에게 다수의 서비스를 동시에 제공할 수 있다.In recent years, since the hardware performance of a user terminal has been improved and multi-tasking is possible, a plurality of applications can be simultaneously executed and a plurality of services can be simultaneously provided to a user.

특히, 본 발명에서는 사용자 단말을 이용하여 통화 중인 사용자에게 통화와 동시에 사용자가 요청하는 서비스를 제공할 수 있는 통화 중 서비스 제공 장치(100)를 제안한다.In particular, the present invention proposes an on-the-call service providing apparatus 100 capable of providing a service requested by a user simultaneously with a call to a user using a user terminal.

그리하여, 본 발명에 따른 통화 중 서비스 제공 장치(100)는 통화 내용 녹음부(110), 명령 추출부(120) 및 명령 수행부(130)를 포함할 수 있으며, 디스플레이부(140)를 더 포함할 수 있다.Thus, the on-the-call service providing apparatus 100 according to the present invention may include a call content recording unit 110, an instruction extraction unit 120, and an instruction execution unit 130, and may further include a display unit 140 can do.

통화 내용 녹음부(110)는 사용자 단말을 이용하여 통화 중인 사용자와 통화 상대방 간의 음성 통화 내용을 녹음하여 텍스트로 변환할 수 있다. 여기에서, 텍스트로 변환된 음성 통화 내용은 사용자 단말 내의 데이터베이스 또는 적어도 하나의 사용자 단말의 사용을 실시간으로 모니터링하는 외부의 서버에 미리 설정된 기간 동안 임시 저장할 수 있다.The call content recording unit 110 may record the voice call content between the user and the call party using the user terminal and convert the voice call content into text. Here, the voice conversation contents converted into the text may be temporarily stored in a database in the user terminal or in an external server that monitors the use of the at least one user terminal in real time for a predetermined period.

예를 들어, 미리 설정된 기간이 24시간인 경우, 사용자가 통화 상대방과의 통화가 모두 종료된 이후로부터 24시간 동안 텍스트로 변환된 음성 통화 내용이 임시 저장될 수 있다. 그리하여, 애플리케이션의 수행 명령을 처리하기 위해 텍스트로 변환된 음성 통화 내용이 요구되는 경우에 이용될 수 있다. 이 때, 미리 설정된 24시간이 지난 후, 임시 저장된 음성 통화 내용은 사용자가 다른 통화를 진행하여 새로운 음성 통화 내용이 텍스트로 변환됨에 따라 갱신되거나 자동으로 삭제될 수 있다.For example, in the case where the predetermined period is 24 hours, the contents of the voice conversation converted into the text for 24 hours from the end of the communication with the calling party can be temporarily stored. Thus, it can be used when a voice conversation content converted to text is required to process an execution command of an application. At this time, after the preset 24 hours, the temporarily stored voice call contents may be updated or automatically deleted as the user proceeds another call and the new voice call contents are converted into text.

이와 같이 텍스트로 변환하여 임시 저장된 음성 통화 내용을 이용하면 녹음된 음성 통화 내용을 일일히 듣지 않고도 키워드 검색을 통해 필요한 내용을 용이하게 검색할 수 있다. 또한, 텍스트로 변환하여 임시 저장된 음성 통화 내용에 사용자에 의해 미리 등록된 주요 키워드가 포함되는 경우 통화 종료 후 주요 키워드의 사용 내용 또는 주요 키워드의 사용 빈도를 메시지로 생성하여 제공할 수 있으나 이에 한정되는 것은 아니다.In this way, by using the temporarily stored voice call contents converted into text, it is possible to easily search contents necessary for keyword search without listening to recorded voice call contents. In addition, if the main keyword registered in advance by the user is included in the temporarily stored voice call conversation, the usage content of the main keyword or the usage frequency of the main keyword may be generated and provided as a message after termination of the call. It is not.

따라서, 통화 내용 녹음부(110)는 텍스트로 변환된 음성 통화 내용이 식별될 수 있도록 사용자 단말의 식별 정보와 사용자의 통화 상대방에 의해 운용되는 단말에 대한 식별 정보, 통화 날짜, 통화 시작 시간, 종료 시간 및 녹음 시간 중 적어도 하나의 식별 정보를 포함하는 헤더(header) 또는 태그(tag)를 텍스트로 변환된 음성 통화 내용에 부가할 수 있으나, 이에 한정되는 것은 아니다.Accordingly, the call content recording unit 110 may include identification information of the user terminal, identification information of the terminal operated by the user's call partner, call date, call start time, A header or a tag including identification information of at least one of a time and a recording time may be added to the voice conversation converted into the text, but the present invention is not limited thereto.

통화 중인 사용자에 의해 애플리케이션이 요청되면 사용자 단말은 요청된 애플리케이션에 상응하는 이벤트를 발생시킬 수 있다. 여기에서, 애플리케이션(application)이란 사용자 단말에서 기본적으로 제공하는 메시지 송수신 기능, 정보 검색 기능, 컨텐츠 재생 기능, 메모 작성 기능, 카메라 기능뿐만 아니라, 사용자에 의해 추가적으로 설치되는 다양한 프로그램을 의미할 수 있으나 이에 한정되지 않고 사용자 단말에서 통화와 동시에 수행 가능한 모든 소프트웨어를 포함할 수 있다.When an application is requested by a busy user, the user terminal can generate an event corresponding to the requested application. Here, the application may mean not only a message transmission / reception function, an information search function, a content reproduction function, a memo writing function, and a camera function, which are basically provided in a user terminal, but also various programs additionally installed by a user, But may include all software that can be performed simultaneously with a call at a user terminal without limitation.

사용자 단말에서 이벤트는 통화 중인 사용자가 디스플레이부(140)에 표시된 통화 중 실행 가능한 애플리케이션의 리스트 중에서 애플리케이션을 선택함에 따라 발생될 수 있다.The event at the user terminal may be generated as a busy user selects an application from among a list of executable applications among calls displayed on the display unit 140. [

보다 구체적으로, 도 2 (a)에 도시된 바와 같이 사용자 단말(10)의 디스플레이부(140)에 표시된 애플리케이션에 대한 리스트 중에서 통화 중인 사용자가 터치를 통해 통화 중 필요한 애플리케이션을 선택함에 따라 이벤트가 발생될 수 있다.More specifically, as shown in FIG. 2 (a), when a user in a call selects an application required during a call from a list of applications displayed on the display unit 140 of the user terminal 10, .

여기에서, 애플리케이션에 대한 리스트는 사용자의 현재 위치 전송, 통화 상대방의 현재 위치 수신, 통화 중인 사용자와 통화 상대방 간의 거리 차, 통화 전 사용된 애플리케이션 실행, 정보 검색, 메모 작성 및 통화 중 실행 가능한 애플리케이션 종류 보기 중 적어도 하나를 포함할 수 있다.Here, the list of applications includes a user's current location transmission, reception of the current location of the calling party, difference in distance between the calling user and the calling party, application execution before the call, information retrieval, And / or a view.

이 때, 이벤트는 통화 중인 사용자가 선택한 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함할 수 있다. 예를 들어, 통화 중인 사용자가 애플리케이션이 표시된 디스플레이부(140)를 짧게 한 번 터치하거나 일정 시간 길게 터치하는 경우 애플리케이션을 실행시키는 시작 이벤트가 발생될 수 있으며, 디스플레이부(140)를 연속으로 두 번 이상 터치하거나 일정 방향으로 길게 터치가 인식되는 경우 통화 중 실행되었던 애플리케이션을 종료하는 이벤트가 발생될 수 있으나 이에 한정되는 것은 아니다.At this time, the event may include a start event and a termination event for the application selected by the busy user. For example, when a user in a call touches the display unit 140 displayed with the application once briefly or touches the display unit 140 for a predetermined time, a start event may be generated to execute the application, and the display unit 140 may be continuously operated twice An event may be generated to terminate an application that has been executed during a call, but the present invention is not limited thereto.

명령 추출부(120)는 통화 중인 사용자에 의해 선택된 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함하여 통화 중 실행될 애플리케이션의 수행 명령을 추출할 수 있다.The command extracting unit 120 may extract an execution command of an application to be executed during a call, including a start event and an end event for an application selected by a user in a call.

또한, 명령 수행부(130)는 텍스트로 변환된 음성 통화 내용을 기반으로 추출된 애플리케이션의 수행 명령을 처리하여 통화 중 애플리케이션을 동시에 수행시킬 수 있다.In addition, the command execution unit 130 may process an application execution command extracted based on the voice call conversions converted to text, thereby simultaneously executing an application during a call.

예를 들어, 도 2 (a)와 같이 디스플레이부(140)에 표시된 애플리케이션에 대한 리스트 중, 통화 중인 사용자에 의해 약속 장소 위치 전송 애플리케이션(A)이 선택되는 경우, 명령 추출부(120)는 통화 중인 사용자의 동작에 따라 발생되는 약속 장소 위치 전송 애플리케이션(A)의 시작 이벤트 및 종료 이벤트를 포함하는 애플리케이션 수행 명령을 추출할 수 있다.For example, when the appointment place location transmission application A is selected by the user in the call from the list of the applications displayed on the display unit 140 as shown in FIG. 2A, the instruction extraction unit 120 extracts, The application execution command including the start event and the end event of the appointment place location transmission application A generated in accordance with the operation of the user in charge.

그리하여, 명령 수행부(130)는 명령 추출부(120)에서 추출된 애플리케이션 수행 명령의 시작 이벤트가 발생된 시간부터 종료 이벤트가 발생된 시간까지의 시간에 해당하는 텍스트로 변환된 음성 통화 내용을 분석하여 사용자와 통화 상대방 간의 약속장소를 파악한 후, 도 2 (b)에 도시된 바와 같이 파악된 약속 장소의 위치를 지도에 표시(B)하여 사용자 단말과 통화 상대방의 단말의 디스플레이부(140)에 표시함으로써 통화 중 약속장소 위치 전송 애플리케이션을 동시에 수행할 수 있다.Thus, the command execution unit 130 analyzes the contents of the voice conversation converted into the text corresponding to the time from the time when the start event of the application execution command extracted by the command extraction unit 120 is generated until the time when the end event is generated And displays the position of the appointed appointment place as shown in FIG. 2 (b) on the map (B), and displays the position of the appointed appointment place on the display unit 140 of the user terminal and the terminal of the communication partner By doing so, it is possible to carry out the busy place transfer application simultaneously.

또한, 이벤트는 사용자 단말을 이용하여 통화 중인 사용자에 의해 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 실행 명령어가 발화됨에 따라 발생될 수 있다. 이 때, 애플리케이션에 대한 실행 명령어는 도 3에 도시된 바와 같이 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대해 미리 등록한 시작 명령어 및 종료 명령어를 포함할 수 있다.The event may also be generated as the execution command for at least one application executable by the user in the call using the user terminal during a call is uttered. At this time, the execution command for the application may include a start command and an end command pre-registered for at least one application executable during a call as shown in Fig.

예를 들어, 통화 중인 사용자가 “메모”, “현재 위치 전송”, “상대방 위치 수신”, “거리 차”, “약속 장소”, “약속 장소 전송”, “검색”, “연락처 전송”, “전체 앱 보기” 등의 미리 등록한 시작 명령어를 발화함에 따라 시작 명령어에 상응하는 애플리케이션이 통화 중에 시작되고, “끝”, “종료”, “완료”, “종료” 등의 미리 등록한 종료 명령어 발화되면 실행 중인 애플리케이션을 종료시킬 수 있다.For example, when a user in a call is in a "call" mode, the "current location transfer", the "incoming call destination", "the distance difference", "appointment place", "appointment place transfer" The application corresponding to the start command is initiated during the call and the execution is terminated when a previously registered end command such as "end", "end", "completion", "end" The application being terminated.

명령 추출부(120)는 통화 중인 사용자에 의해 발화된 애플리케이션에 대한 시작 명령어 및 종료 명령어를 포함하여 통화 중 실행될 애플리케이션의 수행 명령을 추출할 수 있다.The instruction extracting unit 120 may extract an execution command of an application to be executed during a call, including a start instruction and an end instruction for an application uttered by a user in a call.

또한, 명령 수행부(130)는 텍스트로 변환된 음성 통화 내용을 기반으로 추출된 애플리케이션의 수행 명령을 처리하여 통화 중 애플리케이션을 동시에 수행시킬 수 있다.In addition, the command execution unit 130 may process an application execution command extracted based on the voice call conversions converted to text, thereby simultaneously executing an application during a call.

구체적으로 예를 들어, 통화 중인 사용자에 의해 미리 등록한 시작 명령어인 “메모”가 발화될 수 있다. 이에 따라, 명령 추출부(120)는 통화 중인 사용자에 의해 발화된 시작 명령어 “메모”와 종료 명령어 “끝”을 포함하여 통화 중 실행될 애플리케이션의 수행 명령을 추출할 수 있다.Specifically, for example, a " memo " as a start command registered in advance by a busy user can be uttered. Accordingly, the command extracting unit 120 can extract an execution command of an application to be executed during a call, including a start command " memo " uttered by a user in a call and an end command " end ".

그리하여, 명령 수행부(130)는 명령 추출부(120)에서 추출된 시작 명령어가 발화된 시간부터 종료 명령어가 발화된 시간까지 텍스트로 변환된 음성 통화 내용을 통화 내용 녹음부(110)로부터 수신한 후, 사용자 단말의 디스플레이부(140)에 표시함으로써 통화 중 메모 애플리케이션을 동시에 수행할 수 있다.Thus, the command execution unit 130 receives the voice conversation content converted from text from the time when the start command extracted by the command extraction unit 120 is uttered until the time when the end command is uttered, from the call content recording unit 110 The user can simultaneously perform the on-the-call memo application by displaying it on the display unit 140 of the user terminal.

이와 같이, 디스플레이부(140)는 통화 중인 사용자에 의해 선택되도록 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 리스트를 표시하거나, 애플리케이션의 수행 명령에 대한 처리 결과를 표시할 수 있다.As described above, the display unit 140 may display a list of at least one application executable during a call so as to be selected by a user in a call, or may display a processing result of an execution command of the application.

도 4는 본 발명의 실시예에 따른 통화 중 서비스 제공 방법을 설명하는 흐름도이다.4 is a flowchart illustrating a method for providing a service during a call according to an embodiment of the present invention.

도 4를 참조하면, 통화 중 서비스 제공 방법은 통화 중인 사용자와 통화 상대방 간의 음성 통화 내용을 녹음하여 텍스트로 변환하는 단계(S100), 통화 중인 사용자에 의해 발생되는 이벤트를 기반으로 통화 중 실행될 애플리케이션의 수행 명령을 추출하는 단계(S200) 및 텍스트로 변환된 음성 통화 내용을 기반으로 애플리케이션의 수행 명령을 처리하는 단계(S300)를 포함할 수 있다.Referring to FIG. 4, a method of providing a service during a call includes steps of recording a voice call content between a calling user and a calling party and converting the voice call into text (S100) Extracting an execution command (S200), and processing an execution command of an application (S300) based on the voice conversation converted into text.

이 때, 통화 중 서비스 제공 방법은 사용자에 의해 운용되는 사용자 단말의 통화 중 서비스 제공 장치에서 수행되어 통화 중 적어도 하나의 애플리케이션을 사용자에게 동시에 제공할 수 있다. At this time, the service provision method during communication is performed in the service provision apparatus during the communication of the user terminal operated by the user, so that at least one application of the calls can be simultaneously provided to the user.

여기에서, 애플리케이션(application)이란 사용자 단말에서 기본적으로 제공하는 메시지 송수신 기능, 정보 검색 기능, 컨텐츠 재생 기능, 메모 작성 기능, 카메라 기능뿐만 아니라, 사용자에 의해 추가적으로 설치되는 다양한 프로그램을 의미할 수 있으나 이에 한정되지 않고 사용자 단말에서 통화와 동시에 수행 가능한 모든 소프트웨어를 포함할 수 있다.Here, the application may mean not only a message transmission / reception function, an information search function, a content reproduction function, a memo writing function, and a camera function, which are basically provided in a user terminal, but also various programs additionally installed by a user, But may include all software that can be performed simultaneously with a call at a user terminal without limitation.

사용자 단말은 컴퓨터, 노트북, 스마트폰(smart phone), 태블릿 PC(tablet PC)와 같은 정보 처리 장치를 의미할 수 있으나 이에 한정되지 않고, 사용자의 동작 또는 음성을 인식할 수 있는 각종 센서와 유무선 네트워크를 통해 정보를 송수신할 수 있는 통신 장치, 정보를 표시하는 디스플레이 장치 및 인식된 사용자의 동작 또는 음성을 처리하는 정보 처리 기능을 구비한 각종 기기를 포함할 수 있다.The user terminal may refer to an information processing device such as a computer, a notebook, a smart phone, or a tablet PC, but may include various sensors capable of recognizing user's actions or voices, A display device for displaying information, and various devices having an information processing function for processing an operation or a voice of a recognized user.

또한, 사용자 단말은 다른 사용자 단말과 와이파이(WiFi: Wireless Fidelity), 3G(3Generation), LTE(Long Term Evolution) 등의 다양한 통신 인터페이스로 연결되어 통화 서비스를 제공할 수 있다. 또한, 사용자 단말에 설치된 적어도 하나의 애플리케이션을 실행하여 사용자에게 다양한 서비스를 제공할 수 있다.Also, the user terminal can be connected to other user terminals through various communication interfaces such as WiFi (Wireless Fidelity), 3G (3G), and LTE (Long Term Evolution) to provide a call service. In addition, it is possible to provide various services to the user by executing at least one application installed in the user terminal.

통화 중 적어도 하나의 애플리케이션을 사용자에게 동시에 제공하기 위해서는 먼저, 통화 중인 사용자와 통화 상대방 간의 음성 통화 내용을 녹음하여 텍스트로 변환할 수 있다(S100).In order to simultaneously provide at least one application of the call to the user, the voice call content between the calling user and the calling party can be recorded and converted into text (S100).

여기에서, 텍스트로 변환된 음성 통화 내용은 사용자 단말 내의 데이터베이스 또는 적어도 하나의 사용자 단말의 사용을 실시간으로 모니터링하는 외부의 서버에 미리 설정된 기간 동안 임시 저장할 수 있으며, 텍스트로 변환된 음성 통화 내용이 식별될 수 있도록 사용자 단말의 식별 정보와 사용자의 통화 상대방에 의해 운용되는 단말에 대한 식별 정보, 통화 날짜, 통화 시작 시간, 종료 시간 및 녹음 시간 중 적어도 하나의 식별 정보를 포함하는 헤더(header) 또는 태그(tag)를 텍스트로 변환된 음성 통화 내용에 부가할 수 있으나 이에 한정되는 것은 아니다.Here, the voice conversation contents converted into the text may be temporarily stored in a database in the user terminal or in an external server monitoring in real time the use of the at least one user terminal for a predetermined period, A header or a tag including identification information of a user terminal and identification information of a terminal operated by the user of the call destination, at least one of a call date, a call start time, an end time, and a recording time, (tag) may be added to the voice conversation converted into text, but the present invention is not limited thereto.

이와 같이 텍스트로 변환하여 임시 저장된 음성 통화 내용을 이용하면 녹음된 음성 통화 내용을 일일히 듣지 않고도 키워드 검색을 통해 필요한 내용을 용이하게 검색할 수 있다. 또한, 텍스트로 변환하여 임시 저장된 음성 통화 내용에 사용자에 의해 미리 등록된 주요 키워드가 포함되는 경우 통화 종료 후 주요 키워드의 사용 내용 또는 주요 키워드의 사용 빈도를 메시지로 생성하여 제공할 수 있다.In this way, by using the temporarily stored voice call contents converted into text, it is possible to easily search contents necessary for keyword search without listening to recorded voice call contents. In addition, if the main keyword previously registered by the user is included in the temporarily stored voice call conversation, the content of the main keyword or the usage frequency of the main keyword may be generated and provided as a message after the call is terminated.

통화 중인 사용자에 의해 애플리케이션이 요청되면 사용자 단말은 요청된 애플리케이션에 상응하는 이벤트를 발생시킬 수 있다. 즉, 이벤트는 통화 중인 사용자가 디스플레이부에 표시된 통화 중 실행 가능한 애플리케이션의 리스트 중에서 애플리케이션을 선택함에 따라 발생될 수 있다. 보다 구체적으로, 이벤트는 통화 중인 사용자의 동작에 따라 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함할 수 있다.When an application is requested by a busy user, the user terminal can generate an event corresponding to the requested application. That is, the event may be generated as a user in a call selects an application from a list of executable applications among calls displayed on the display unit. More specifically, the event may include a start event and an end event for the application depending on the behavior of the user in the call.

여기에서, 애플리케이션에 대한 리스트는 사용자의 현재 위치 전송, 통화 상대방의 현재 위치 수신, 통화 중인 사용자와 통화 상대방 간의 거리 차, 통화 전 사용된 애플리케이션 실행, 정보 검색, 메모 작성 및 통화 중 실행 가능한 애플리케이션 종류 보기 중 적어도 하나를 포함할 수 있으나 이에 한정되는 것은 아니다.Here, the list of applications includes a user's current location transmission, reception of the current location of the calling party, difference in distance between the calling user and the calling party, application execution before the call, information retrieval, Examples include, but are not limited to, at least one of the following examples.

또한, 이벤트는 사용자 단말을 이용하여 통화 중인 사용자에 의해 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 실행 명령어가 발화됨에 따라 발생될 수 있다. 이 때, 애플리케이션에 대한 실행 명령어는 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대해 미리 등록한 시작 명령어 및 종료 명령어를 포함할 수 있다.The event may also be generated as the execution command for at least one application executable by the user in the call using the user terminal during a call is uttered. At this time, the execution command for the application may include a start command and an end command pre-registered for at least one application executable during a call.

이와 같이 통화 중인 사용자에 의해 통화 중 실행 가능한 적어도 하나의 애플리케이션이 선택되거나 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 실행 명령어가 발화됨에 따라 발생되는 이벤트를 기반으로 통화 중 실행될 애플리케이션의 수행 명령을 추출할 수 있다(S200).In this manner, at least one application executable during the call is selected by the user in the call or an execution command of the application to be executed during the call is extracted based on the event generated as the execution command for at least one application executable during the call is uttered (S200).

먼저, 디스플레이부를 통해 통화 중 실행될 애플리케이션이 선택된 경우, 통화 중인 사용자에 의해 선택된 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함하여 통화 중 실행될 애플리케이션의 수행 명령을 추출할 수 있다. First, when an application to be executed during a call is selected through a display unit, an execution command of an application to be executed during a call can be extracted including a start event and an end event for an application selected by a user in a call.

반면, 통화 중인 사용자에 의해 통화중 실행될 애플리케이션이 발화된 경우, 애플리케이션에 대한 시작 명령어 및 종료 명령어를 포함하여 통화 중 실행될 애플리케이션의 수행 명령을 추출할 수 있다.On the other hand, when an application to be executed during a call is uttered by a busy user, an execution command of an application to be executed during a call can be extracted including a start command and an end command for the application.

그리하여, 텍스트로 변환된 음성 통화 내용을 기반으로 추출된 애플리케이션의 수행 명령을 처리할 수 있다(S300). 즉, 애플리케이션 수행 명령의 시작 이벤트와 종료 이벤트 간의 발생 기간에 해당하는 텍스트로 변환된 음성 통화 내용을 분석하여 추출된 애플리케이션의 수행 명령을 처리함으로써 통화 중 애플리케이션을 동시에 수행할 수 있다.Thus, it is possible to process an execution command of the extracted application based on the voice conversation contents converted into the text (S300). That is, the voice call contents converted into the text corresponding to the generation period between the start event and the end event of the application execution command are analyzed, and the execution command of the extracted application is processed to simultaneously perform the application during the call.

또한, 추출된 시작 명령어가 발화된 시간부터 종료 명령어가 발화된 시간까지 텍스트로 변환된 음성 통화 내용을 수신하여 추출된 애플리케이션의 수행 명령을 처리함으로써, 사용자 단말의 디스플레이부에 표시함으로써 통화 중 메모 애플리케이션을 동시에 수행할 수 있다.
In addition, by receiving the voice communication contents converted into text from the time when the extracted start command is uttered until the time when the end command is uttered, and processing the execution command of the extracted application to display on the display unit of the user terminal, Can be performed simultaneously.

상술한 바와 같은 본 발명의 실시예에 따른 통화 중 서비스 제공 장치 및 이를 이용하는 방법에 따르면, 통화 중인 사용자의 동작 또는 발화에 의해 발생되는 이벤트를 처리하여 통화의 중단없이 사용자 단말에 설치된 애플리케이션을 실시간으로 제공함으로써 사용자에게 사용자 단말 사용에 대한 편리함을 제공할 수 있다.According to the apparatus for providing a service during a call and the method for using the same according to an embodiment of the present invention, an event generated by an operation or an utterance of a user during a call is processed, So that it is possible to provide convenience to the user in using the user terminal.

또한, 사용자 단말에 설치된 애플리케이션에 대한 멀티태스킹(multi-tasking)이 가능하므로 사용자 단말을 효율적으로 사용할 수 있다.
In addition, since multi-tasking can be performed for an application installed in the user terminal, the user terminal can be efficiently used.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the present invention as defined by the following claims It can be understood that

10: 사용자 단말 100: 통화 중 서비스 제공 장치
110: 통화 내용 녹음부 120: 명령 추출부
130: 명령 수행부 140: 디스플레이부
10: user terminal 100:
110: call content recording unit 120: command extracting unit
130: command execution unit 140: display unit

Claims (15)

사용자에 의해 운용되는 사용자 단말에 있어서,
상기 사용자 단말을 이용하여 통화 중인 사용자와 통화 상대방 간의 음성 통화 내용을 녹음하여 텍스트로 변환하는 통화 내용 녹음부;
상기 통화 중인 사용자에 의해 통화 중 실행 가능한 적어도 하나의 애플리케이션이 선택되거나 상기 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 실행 명령어가 발화됨에 따라 발생되는 이벤트를 기반으로 통화 중 실행될 애플리케이션의 수행 명령을 추출하는 명령 추출부; 및
상기 텍스트로 변환된 음성 통화 내용을 기반으로 상기 추출된 애플리케이션의 수행 명령을 처리하여 통화 중 상기 애플리케이션을 동시에 수행하는 명령 수행부를 포함하는 통화 중 서비스 제공 장치.
In a user terminal operated by a user,
A call content recording unit for recording the voice call content between the user and the call destination using the user terminal and converting the voice call content into text;
Extracting an execution command of an application to be executed during a call based on an event that is generated as a result of selection of at least one executable executable executable instruction for at least one application executable by the user in the call An instruction extractor; And
And an instruction execution unit for processing the execution command of the extracted application based on the voice conversation contents converted into the text to simultaneously execute the application during a call.
청구항 1에 있어서,
상기 통화 내용 녹음부는,
상기 텍스트로 변환된 음성 통화 내용을 상기 사용자 단말 내의 데이터베이스 또는 적어도 하나의 사용자 단말의 사용을 실시간으로 모니터링하는 외부의 서버에 미리 설정된 기간 동안 임시 저장하여 상기 애플리케이션의 수행 명령에 대한 처리에 이용되는 것을 특징으로 하는 통화 중 서비스 제공 장치.
The method according to claim 1,
The call content recording unit,
The voice communication contents converted into the text are temporarily stored in a database in the user terminal or in an external server monitoring in real time the use of the at least one user terminal for a preset period of time and used for processing the execution command of the application Wherein the service providing apparatus comprises:
청구항 1에 있어서,
상기 통화 중인 사용자에 의해 선택되도록 상기 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 리스트를 표시하거나, 상기 애플리케이션의 수행 명령에 대한 처리 결과를 표시하는 디스플레이부를 더 포함하는 것을 특징으로 하는 통화 중 서비스 제공 장치.
The method according to claim 1,
Further comprising a display unit for displaying a list of at least one application executable during the call so as to be selected by the user in the call or displaying a processing result of an execution command of the application, .
청구항 3에 있어서,
상기 적어도 하나의 애플리케이션에 대한 리스트는,
상기 통화 중인 사용자의 위치 전송, 상기 통화 상대방의 위치 수신, 상기 통화 중인 사용자와 상기 통화 상대방 간의 거리 차, 통화 전 사용된 애플리케이션 실행, 정보 검색, 메모 작성 및 상기 통화 중 실행 가능한 애플리케이션 종류 보기 중 적어도 하나를 포함하는 것을 특징으로 하는 통화 중 서비스 제공 장치.
The method of claim 3,
Wherein the list for the at least one application comprises:
A position difference between the calling user and the calling party, execution of the application used before the call, information search, memo creation, and viewing of the application types executable during the communication Wherein the service providing apparatus comprises:
청구항 4에 있어서,
상기 이벤트는,
상기 디스플레이부에 표시된 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 리스트 중, 상기 통화 중인 사용자에 의해 선택된 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함하여 발생되는 것을 특징으로 하는 통화 중 서비스 제공 장치.
The method of claim 4,
In the event,
And a start event and an end event for the application selected by the busy user among the list of at least one application executable among the calls displayed on the display unit.
청구항 5에 있어서,
상기 이벤트는,
상기 통화 중인 사용자에 의해 상기 통화 중 실행 가능한 적어도 하나의 애플리케이션 각각에 대해 미리 등록한 시작 명령어 및 종료 명령어를 포함하는 실행 명령어가 발화됨에 따라 발생되는 것을 특징으로 하는 통화 중 서비스 제공 장치.
The method of claim 5,
In the event,
Wherein an execution command including a start command and an end command registered in advance for each of at least one application executable during the call is generated by the calling user.
청구항 6에 있어서,
상기 명령 추출부는,
상기 통화 중인 사용자에 의해 선택된 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함하여 상기 통화 중 실행될 애플리케이션의 수행 명령을 추출하거나,
상기 통화 중인 사용자에 의해 발화된 상기 시작 명령어 및 상기 종료 명령어를 포함하여 상기 통화 중 실행될 애플리케이션의 수행 명령을 추출하는 것을 특징으로 하는 통화 중 서비스 제공 장치.
The method of claim 6,
Wherein the instruction extracting unit comprises:
Extracting an execution command of an application to be executed during the call, including a start event and an end event for an application selected by the busy user,
And extracts an execution command of an application to be executed during the call including the start command and the end command issued by the user in the call.
청구항 7에 있어서,
상기 명령 수행부는,
상기 시작 이벤트와 상기 종료 이벤트 간의 시간에 해당하는 상기 텍스트로 변환된 음성 통화 내용을 이용하여 상기 통화 중 실행될 애플리케이션의 수행 명령을 처리하거나,
상기 발화된 시작 명령어와 상기 종료 명령어 간의 시간에 해당하는 상기 텍스트로 변환된 음성 통화 내용을 이용하여 상기 통화 중 실행될 애플리케이션의 수행 명령을 처리하는 것을 특징으로 하는 통화 중 서비스 제공 장치.
The method of claim 7,
Wherein the command execution unit comprises:
Processing the execution command of the application to be executed during the call using the voice call conversation converted into the text corresponding to the time between the start event and the end event,
Wherein the processing unit is configured to process an execution command of an application to be executed during the call using the voice conversation contents converted into the text corresponding to the time between the ignited start command and the end command.
사용자 단말의 통화 중 서비스 제공 장치에서 수행되는 방법에 있어서,
상기 사용자 단말을 이용하여 통화 중인 사용자와 통화 상대방 간의 음성 통화 내용을 녹음하여 텍스트로 변환하는 단계;
상기 통화 중인 사용자에 의해 통화 중 실행 가능한 적어도 하나의 애플리케이션이 선택되거나 상기 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 실행 명령어가 발화됨에 따라 발생되는 이벤트를 기반으로 통화 중 실행될 애플리케이션의 수행 명령을 추출하는 단계; 및
상기 텍스트로 변환된 음성 통화 내용을 기반으로 상기 추출된 애플리케이션의 수행 명령을 처리하여 통화와 동시에 애플리케이션을 수행하는 단계를 포함하는 통화 중 서비스 제공 방법.
A method performed in a service providing apparatus during communication of a user terminal,
Recording a voice call content between a calling party and a calling party using the user terminal and converting the voice call content into text;
Extracting an execution command of an application to be executed during a call based on an event that is generated as a result of selection of at least one executable executable executable instruction for at least one application executable by the user in the call step; And
And processing an execution command of the extracted application based on the voice call conversions converted to the text to perform an application at the same time as a call.
청구항 9에 있어서,
상기 텍스트로 변환하는 단계는,
상기 텍스트로 변환된 음성 통화 내용을 상기 사용자 단말 내의 데이터베이스 또는 적어도 하나의 사용자 단말의 사용을 실시간으로 모니터링하는 외부의 서버에 미리 설정된 기간 동안 임시 저장하여 상기 애플리케이션의 수행 명령에 대한 처리에 이용되는 것을 특징으로 하는 통화 중 서비스 제공 방법.
The method of claim 9,
The method of claim 1,
The voice communication contents converted into the text are temporarily stored in a database in the user terminal or in an external server monitoring in real time the use of the at least one user terminal for a preset period of time and used for processing the execution command of the application Wherein said method comprises the steps of:
청구항 9에 있어서,
상기 이벤트는,
상기 통화 중 실행 가능한 적어도 하나의 애플리케이션에 대한 리스트 중, 상기 통화 중인 사용자에 의해 선택된 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함하여 발생되는 것을 특징으로 하는 통화 중 서비스 제공 방법.
The method of claim 9,
In the event,
And a start event and an end event for the application selected by the busy user among the list of at least one application executable during the call.
청구항 11에 있어서,
상기 적어도 하나의 애플리케이션에 대한 리스트는,
상기 통화 중인 사용자의 위치 전송, 상기 통화 상대방의 위치 수신, 상기 통화 중인 사용자와 상기 통화 상대방 간의 거리 차, 통화 전 사용된 애플리케이션 실행, 정보 검색, 메모 작성 및 상기 통화 중 실행 가능한 애플리케이션 종류 보기 중 적어도 하나를 포함하는 것을 특징으로 하는 통화 중 서비스 제공 방법.
The method of claim 11,
Wherein the list for the at least one application comprises:
A position difference between the calling user and the calling party, execution of the application used before the call, information search, memo creation, and viewing of the application types executable during the communication Wherein the method comprises the steps of:
청구항 11에 있어서,
상기 이벤트는,
상기 통화 중인 사용자에 의해 상기 통화 중 실행 가능한 적어도 하나의 애플리케이션 각각에 대해 미리 등록한 시작 명령어 및 종료 명령어를 포함하는 실행 명령어가 발화됨에 따라 발생되는 것을 특징으로 하는 통화 중 서비스 제공 방법.
The method of claim 11,
In the event,
Wherein an execution command including a start command and an end command registered in advance for each of at least one application executable during the call is generated by the user in the call.
청구항 13에 있어서,
상기 통화 중 실행될 애플리케이션의 수행 명령을 추출하는 단계는,
상기 통화 중인 사용자에 의해 선택된 애플리케이션에 대한 시작 이벤트 및 종료 이벤트를 포함하여 상기 통화 중 실행될 애플리케이션의 수행 명령을 추출하거나,
상기 통화 중인 사용자에 의해 발화된 상기 시작 명령어 및 상기 종료 명령어를 포함하여 상기 통화 중 실행될 애플리케이션의 수행 명령을 추출하는 것을 특징으로 하는 통화 중 서비스 제공 방법.
14. The method of claim 13,
Wherein the extracting of the execution command of the application to be executed during the call comprises:
Extracting an execution command of an application to be executed during the call, including a start event and an end event for an application selected by the busy user,
And extracting an execution command of an application to be executed during the call including the start command and the end command uttered by the user in the call.
청구항 14에 있어서,
상기 애플리케이션을 수행하는 단계는,
상기 시작 이벤트와 상기 종료 이벤트 간의 시간에 해당하는 상기 텍스트로 변환된 음성 통화 내용을 이용하여 상기 통화 중 실행될 애플리케이션의 수행 명령을 처리하거나,
상기 발화된 시작 명령어와 상기 종료 명령어 간의 시간에 해당하는 상기 텍스트로 변환된 음성 통화 내용을 이용하여 상기 통화 중 실행될 애플리케이션의 수행 명령을 처리하는 것을 특징으로 하는 통화 중 서비스 제공 방법.
15. The method of claim 14,
The step of performing the application comprises:
Processing the execution command of the application to be executed during the call using the voice call conversation converted into the text corresponding to the time between the start event and the end event,
Wherein the execution command of the application to be executed during the call is processed using the voice conversation content converted into the text corresponding to the time between the ignited start command and the end command.
KR1020140008975A 2014-01-24 2014-01-24 Apparatus for providing service during call and method for using the apparatus KR20150088532A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140008975A KR20150088532A (en) 2014-01-24 2014-01-24 Apparatus for providing service during call and method for using the apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140008975A KR20150088532A (en) 2014-01-24 2014-01-24 Apparatus for providing service during call and method for using the apparatus

Publications (1)

Publication Number Publication Date
KR20150088532A true KR20150088532A (en) 2015-08-03

Family

ID=53872927

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140008975A KR20150088532A (en) 2014-01-24 2014-01-24 Apparatus for providing service during call and method for using the apparatus

Country Status (1)

Country Link
KR (1) KR20150088532A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170084551A (en) * 2016-01-12 2017-07-20 네이버 주식회사 apparatus and method of processing the task for call
KR20190021120A (en) * 2017-08-22 2019-03-05 에스케이텔레콤 주식회사 Terminal apparatus for providing artificial intelligence service while the line is busy
KR102147619B1 (en) * 2020-01-20 2020-08-25 아틀라스 가이드, 인코퍼레이션. Method for managing phone calls and artificial intelligence assistant system for performing the same

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170084551A (en) * 2016-01-12 2017-07-20 네이버 주식회사 apparatus and method of processing the task for call
KR20190021120A (en) * 2017-08-22 2019-03-05 에스케이텔레콤 주식회사 Terminal apparatus for providing artificial intelligence service while the line is busy
KR102147619B1 (en) * 2020-01-20 2020-08-25 아틀라스 가이드, 인코퍼레이션. Method for managing phone calls and artificial intelligence assistant system for performing the same

Similar Documents

Publication Publication Date Title
KR102265931B1 (en) Method and user terminal for performing telephone conversation using voice recognition
US10091643B2 (en) Method and apparatus for displaying associated information in electronic device
EP3051782B1 (en) Method and system for sending contact information in call process
KR20130112885A (en) Methods and apparatus for providing input to a speech-enabled application program
KR101944416B1 (en) Method for providing voice recognition service and an electronic device thereof
AU2012376879B2 (en) Method for managing calls and mobile terminal using the same
CN104253910A (en) Interaction method and interaction system for voice service calls
US9172795B1 (en) Phone call context setting
US11379183B2 (en) System and method for providing a response to a user query using a visual assistant
CN105404401A (en) Input processing method, apparatus and device
CN104134442A (en) Method and device for starting voice services
CN103701994A (en) Automatic responding method and automatic responding device
KR20120136552A (en) Information providing method and mobile telecommunication terminal therefor
CN104967719A (en) Contact information prompting method and terminal
EP3157175A1 (en) Voice data transmission processing method, terminal, and computer storage medium
KR20150088532A (en) Apparatus for providing service during call and method for using the apparatus
KR20150103855A (en) Method and system of providing voice service using interoperation between application and server
CN105159181A (en) Control method and device for intelligent equipment
US20160373504A1 (en) Method for sharing a digital content during communication
KR20130131059A (en) Method for providing phone book service including emotional information and an electronic device thereof
WO2016187962A1 (en) Method and device for reminding contact information
KR101379405B1 (en) Method of processing voice communication and mobile terminal performing the same
US10938978B2 (en) Call control method and apparatus
CN109491655A (en) A kind of incoming event processing method and processing device
CN106465087B (en) Communication message transfer method and related device

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination