KR20150115436A

KR20150115436A - Method and apparatus for providing relay communication service

Info

Publication number: KR20150115436A
Application number: KR1020140040487A
Authority: KR
Inventors: 이종운
Original assignee: 주식회사 엘지유플러스
Priority date: 2014-04-04
Filing date: 2014-04-04
Publication date: 2015-10-14
Also published as: KR102117993B1

Abstract

The present invention relates to a method and an apparatus for providing a relay call service. According to an embodiment of the present invention, the method comprises the following steps: setting a first call channel in accordance with a call request from a first terminal; displaying a predetermined relay mode selection screen, and acquiring relay type identification information selected by a user through the relay mode selection screen; transmitting a predetermined relay request message including a phone number of the first terminal and the relay type identification information to a relay server; and setting a second call channel corresponding to the relay type identification information with the relay server. It is possible to have a call with the first terminal using at least one among the first call channel and the second call channel. Therefore, the present invention can more effectively provide the relay call service for a handicapped person.

Description

[0001] The present invention relates to a method and apparatus for providing a brokerage service,

본 발명은 중개 통화 서비스 제공 방법 및 그 장치에 관한 것으로서, 상세하게, 청각 및 발화 장애인을 위한 통화 중개 서비스를 제공하는 것이 가능한 중개 통화 서비스 제공 방법 및 그 장치에 관한 것이다.The present invention relates to a method and apparatus for providing a brokered call service, and more particularly, to a method and apparatus for providing a brokered call service capable of providing a call brokering service for a hearing-impaired person.

일반적으로 청각 장애인들을 위해 현재 많은 방송 프로그램에서 자막 방송을 제공하고 있다. 이러한 자막 방송은 청각 장애인들을 위한 문자 방송 서비스로 일반적으로 자막 방송은 가수가 노래할 때 가사를 자막으로 보여주는 오픈 캡션(open captioning)과, 청각 장애인을 위하여 본 방송과는 별도로 오디오를 자막으로 처리하여 부가 방송 형태로 제공되는 클로스드 캡션(closed captioning)이 있다.Generally, for many people with hearing impairments, many broadcast programs offer closed captioning. Such closed caption broadcasting is a text broadcasting service for the hearing impaired. In general, closed captioning is an open captioning which shows the lyrics as a subtitle when the singer is singing, and audio caption processing for the hearing- There is a closed captioning provided in an additional broadcast format.

보통 자막 방송은 클로스드 캡션을 말한다. 자막 방송을 수신하기 위해서는 자막 방송 수신 기능이 있는 수상기나 셋톱 박스로 캡션 기능을 선택할 때 볼 수 있다. 자막 처리 방법은 사전 처리 방법과 실시간으로 속기사나 음성 인식 시스템으로 처리하는 방법이 있다.Normally closed caption broadcast is closed caption. In order to receive closed caption broadcasting, it can be seen when a caption function is selected by a receiver or a set-top box having a closed caption broadcasting reception function. The subtitle processing method is a preprocessing method and a method of processing in a real time by a stenographer or a speech recognition system.

또한, 법원 또는 회의에는 재판 또는 회의 과정을 증거로 남기기 위하여 속기사가 참석하여 기록을 하게 된다.In addition, the court or the meeting shall be recorded by the stenographer in order to testify the trial or conference process.

컴퓨터의 보급이 일반화되기 이전에는 직접 기술하는 방법을 사용하였으나, 현재는 컴퓨터를 이용하여 작성하고, 전자화하여 저장하는 방법이 주로 사용되고 있다.Before the dissemination of computers became common, a method of direct description was used. Currently, a method of creating and storing electronic data by using a computer is mainly used.

최근에는 상술한 자막 방송이나 재판 또는 회의 과정을 증거로 남기기 위한 속기를 이용하여 청각 장애인에게 수업이나 강의시 문자 중계를 제공할 수 있는 시스템이 개발되었다. 이러한 문자 중계 시스템은 청각 장애인 옆에 속기사가 위치하고, 수업이나 강의 내용을 듣고 속기사가 자신의 컴퓨터에 속기를 입력하면, 컴퓨터의 속기 프로그램은 이를 수신하여 문자로 변환하고, 변환된 문자는 청각 장애인이 소지한 컴퓨터에 전송되어 디스플레이됨으로써, 청각 장애인도 수업 또는 강의를 들을 수 있도록 하는 것이다. 부가적으로 속기사 이외의 수화를 통해서도 수업이나 강의 내용을 청각 장애인에게 전달할 수 있다. In recent years, a system has been developed that can provide text relaying for classes or lectures to persons with hearing impairments using shorthand broadcasting, or shorthand for leaving trial or trial sessions as evidence. In such a character relay system, when a stenographer is located next to a hearing-impaired person, and when a stenographer enters shorthand on his or her computer after hearing the contents of a class or lecture, the stenograph program of the computer receives it and converts it into a character, And transmitted to and displayed on a computer with a computer, so that hearing-impaired people can listen to lessons or lectures. In addition, it is possible to deliver lessons and lectures to people with hearing disabilities through sign language other than stenographers.

그러나 이러한 종래의 문자 중계 방법은 항상 속기사 또는 수화자가 청각 장애인 옆에 위치하여야 하며, 문자중계의 경우에도 고가의 프로그램이 탑재된 컴퓨터를 구비한 청각 장애인에게만 문자 중계를 제공할 수밖에 없는 문제점이 있었다.However, in the conventional character relaying method, the stenographer or the receiver must be located next to the hearing-impaired person, and in the case of the character relay, the character relay is provided only to the hearing-impaired person having the computer equipped with the expensive program.

최근에는 이동 통신 기술이 발전함에 따라 기존의 음성 통화뿐만 아니라 영상 통화가 일반화되고 있다. 특히, 최근 출시되는 스마트폰은 고성능 카메라와 고속의 영상 프로세서를 구비함으로써, 보다 빠르고 선명한 영상 통화을 제공하고 있다.Recently, as the mobile communication technology develops, not only existing voice calls but also video calls are becoming common. In particular, recently launched smart phones are equipped with high-performance cameras and high-speed image processors, providing faster and clearer video calls.

특히, 최근에는 청각이나 언어 장애를 가지고 있는 사람이 비장애인과의 전화 통화를 통해 의사 소통을 할 수 있도록 지원하는 실시간 전화 중계 서비스가 출시되었다. 일 예로, ‘한국정보화진흥원’에서 운영하고 있는 ‘107 손말이음센터’가 있다.Recently, a real-time telephone relay service has been launched to help people with hearing or speech impairments communicate via telephone calls with non-disabled persons. For example, there is the '107 Handwriting Center' operated by 'Korea Information Technology Promotion Agency'.

‘107 손말이음센터'는 청각 장애인이 비장애인에게 전화를 거는 경우, 청각 장애인은 중계사에게 비장애인의 연락처를 전달하면, 중계사는 해당 연락처로 음성 통화를 연결한다. 청각 장애인은 중계사와 설정된 채팅 창을 통해 문자로 의사를 전달하면, 중계사가 이를 음성으로 변환하여 비장애인에게 전달한다. 반대로, 비장애인이 청각 장애인에게 전화를 거는 경우, 비장애인은 '107'번으로 전화를 걸어 중계사와 연결될 수 있다. 이때, 비장애인이 청각 장애인의 연락처를 구두로 알려주면 중계사가 해당 연락처로 청각 장애인과 영상 통화를 설정한다. 이 후, 중개사는 청각 장애인과 영상 통화 채널을 통해 수화로 의사 소통을 하고, 비장애인에게 수화 내용을 음성으로 번역하여 전달한다.If the hearing impaired person calls the non-disabled person, the hearing impaired person delivers the non-disabled person's contact information to the transit agency, and the transit agency connects the voice call to the contact. When the hearing impaired person communicates with the transcriber through a chat window, the transcriber converts it to speech and delivers it to the non-disabled. Conversely, if a non-disabled person is calling a hearing-impaired person, the non-disabled person can dial the '107' number and be connected to the relay company. At this time, if the non-disabled person verbally notifies the contact of the deaf, the transit agency sets up a video call with the deaf person as the contact. Thereafter, the agent communicates with a deaf person through sign language through a video channel and translates the sign language into a voice to the non-disabled.

상기한‘107 손말이음센터’의 존재에도 불구하고 청각 장애인의 통화 서비스에 대한 접근성은 하기의 이유들로 획기적으로 나아지지 않고 있는 실정이다.Despite the existence of the '107 Hand Hearing Center' mentioned above, the accessibility of the hearing-impaired handset to the call service has not been improved remarkably for the following reasons.

첫째, ‘107번’ 번호에 대한 홍보 부족이다. 현재, 107번은 ‘손말이음센터’ 번호로 지정되어있지만 대다수의 국민들의 인지 부족으로 평소에 청각 장애인에게 전화 연결을 시도할 때 원래의 연락처(집 전화번호 또는 핸드폰 번호)로 전화를 거는 경우가 일반적이다.First, there is a lack of publicity for the '107' number. Currently, number 107 is assigned as the "Son Hearing Center" number, but due to the lack of awareness of the majority of people, when you try to make a phone call to a deaf or hard of hearing person, you are calling the original contact (home phone or cell phone number). It is common.

둘째, 청각 장애인은 직접 걸려오는 전화를 받지 못하는 경우가 많다. 이는 첫 번째 이유와 직결되어있으며, ‘107손말이음센터’의 가장 치명적인 단점일 수 있다. 청각 장애인에게 수신되는 많은 전화가 중 ‘107번’을 통해서 수신되는 경우는 극히 제한적이다. 따라서, 청각 장애인은 걸려온 전화를 끊고 SMS(Short Message Service) 메시지 등으로 “본인은 청각 장애가 있으니 문자로 연락바랍니다.” 또는 “107번을 통해서 연락주십시오” 라고 보낼 수 있다. 하지만, 그 이후에 메시지 수신자로부터 회신 연락이 없는 경우가 일반적이다.Second, hearing impaired people often do not receive direct incoming calls. This is directly related to the first reason, and it can be the most fatal disadvantage of the '107 Hands-on Center'. The number of calls received by a hearing impaired person is very limited, Therefore, the hearing impaired person can hang up the phone and send an SMS (Short Message Service) message saying, "I have a hearing impairment so I can contact you by letter" or "Please contact me through 107". However, it is common for there to be no reply from the recipient of the message thereafter.

셋째, 발화가 유창한 청각 장애인에게는 활용성이 낮은 문제점이 있다. 구화를 사용하는 청각 장애인은 듣지는 못하지만 발음이 비교적 정확한 편이다. 따라서, 음성 통화 중 상대방에게 본인의 음성을 그대로 전달하기를 원하는 경우가 많다. 하지만, ‘107 손말이음센터’는 중계사를 통해 의사 소통이 이루어지기 때문에 전달 지연이 발생하고 화자의 감정을 그대로 전달하기가 어려운 문제점이 있었다.Third, there is a problem in that the usability is low for hearing - impaired people who have fluent speech. People with hearing impairments who use speech are not able to listen, but their pronunciation is relatively accurate. Therefore, in many cases, it is desirable to transmit the voice of the user to the other party during voice communication. However, there is a problem in that the '107 Son Malyum Center' is delayed due to the communication through the relay company, and it is difficult to convey the feelings of the speaker as it is.

본 발명은 상술한 종래 기술의 문제점을 해결하기 위해 고안된 것으로, 본 발명의 목적은 장애 타입에 따라 적응적으로 통화 채널을 설정하는 것이 가능한 중개 통화 서비스 제공 방법 및 장치를 제공하는 것이다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a method and apparatus for providing a mediating call service in which a call channel can be set adaptively according to a failure type.

본 발명의 다른 목적은 발화 가능 청각 장애인과 비장애인 사이의 직접 통화 연결을 제공하는 것이 가능한 중개 통화 서비스 제공 방법 및 장치를 제공하는 것이다.It is another object of the present invention to provide a method and apparatus for providing a brokered call service capable of providing a direct call connection between an ignorable hearing impaired person and a non-disabled person.

본 발명의 또 다른 목적은 상기 방법들을 지원하는 장치 및 기록 매체를 제공하는 것이다.It is still another object of the present invention to provide an apparatus and a recording medium that support the above methods.

본 발명의 또 다른 목적은 간단한 단말 조작을 통해 3자 통화 설정이 가능한 중개 통화 서비스 제공 방법 및 그 시스템을 제공하는 것이다.It is still another object of the present invention to provide a method and system for providing an intermediate call service capable of setting a three-party call through a simple terminal operation.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.It is to be understood that both the foregoing general description and the following detailed description are exemplary and explanatory and are not restrictive of the invention, unless further departing from the spirit and scope of the invention as defined by the appended claims. It will be possible.

본 발명은 중개 통화 서비스 제공 방법 및 장치를 제공한다.The present invention provides a method and apparatus for providing a brokered call service.

본 발명의 일 실시예에 따른 단말에서의 중계 통화 서비스를 제공하는 방법은A method for providing a relay call service in a terminal according to an embodiment of the present invention includes:

제1 단말로부터의 통화 요청에 따라 제1 통화 채널을 설정하는 단계와 소정 중계 모드 선택 화면을 표시하고, 상기 중계 모드 선택 화면을 통해 사용자에 의해 선택된 중계 타입 식별 정보를 획득하는 단계와 상기 제1 단말의 전화 번호 및 상기 중계 타입 식별 정보를 포함하는 소정 중계 요청 메시지를 중계 서버에 전송하는 단계와 상기 중계 타입 식별 정보에 상응하는 제2 통화 채널을 상기 중계 서버와 설정하는 단계를 포함하되, 상기 제1 통화 채널, 상기 제2 통화 채널 중 적어도 하나를 이용하여 상기 제1 단말과 통화할 수 있다.The method comprising: setting a first call channel in response to a call request from a first terminal; displaying a relay mode selection screen and obtaining relay type identification information selected by a user on the relay mode selection screen; Transmitting a predetermined relay request message including the telephone number of the terminal and the relay type identification information to the relay server and setting a second call channel corresponding to the relay type identification information to the relay server, The first call channel, the second call channel, and the second call channel.

또한, 상기 중개 통화 서비스 제공 방법은 소정 환경 설정 메뉴 화면을 통해 통신 중계 모드를 활성화시키는 단계를 더 포함하되, 상기 통신 중계 모드가 활성화된 경우, 상기 중계 모드 선택 화면이 표시될 수 있다.The method further includes activating a communication relay mode through a predetermined configuration menu screen. When the communication relay mode is activated, the relay mode selection screen may be displayed.

여기서, 상기 제2 통화 채널은 상기 중계 타입 식별 정보에 따라 음성 통화, 영상 통화, 패킷 데이터 통신 중 어느 하나를 제공할 수 있다.Here, the second call channel may provide one of voice call, video call, and packet data communication according to the relay type identification information.

또한, 상기 중계 타입 식별 정보는 장애 타입에 따라 미리 정의되는 중계 통화 서비스 제공 방법.The relay type identification information is predefined according to the failure type.

여기서, 상기 장애 타입은 발화 장애 여부, 청각 장애 여부, 난청 여부 중 적어도 하나의 장애 요소를 조합하여 정의될 수 있다.Here, the type of the fault may be defined by a combination of at least one obstacle factor, such as whether it is a speech disorder, a hearing disorder, or a hearing loss.

또한, 상기 장애 타입이 발화 장애 및 청각 장애인 경우, 상기 제2 통화 채널은 영상 통화 채널일 수 있다.In addition, if the type of the fault is an ignition failure or hearing loss, the second call channel may be a video call channel.

여기서, 상기 영상 통화 채널을 통해 수화 영상이 전송될 수 있다.Here, a sign language video image may be transmitted through the video call channel.

또한, 상기 장애 타입이 발화 장애 및 청각 장애인 경우, 상기 설정된 제1 통화 채널이 해제될 수 있다.In addition, if the type of the fault is an ignition failure or a hearing loss, the set first call channel may be released.

또한, 상기 장애 타입이 발화 장애 및 청각 정상이거나 발화 정상 및 청각 장애인 경우, 상기 제2 통화 채널은 문자 채팅을 위한 패킷 데이터 통신 채널일 수 있다.In addition, if the type of the fault is an ignited and audible state, a normal speech state, and a hearing impairment, the second call channel may be a packet data communication channel for text chatting.

또한, 상기 장애 타입이 발화 장애 및 청각 정상이거나 발화 정상 및 청각 장애인 경우, 상기 제1 통화 채널은 음성 통화 채널일 수 있다.The first call channel may be a voice call channel if the type of the handicap is malfunctioning, auditory, normal, or hearing impaired.

또한, 상기 장애 타입이 난청인 경우, 상기 제2 통화 채널은 음성 통화 채널이되, 상기 제1 단말로부터 수신된 음성 데이터 신호가 상기 중계 서버에 의해 증폭되어 상기 음성 통화 채널을 통해 수신될 수 있다.In addition, when the failure type is the hearing loss, the second call channel is a voice call channel, and the voice data signal received from the first terminal may be amplified by the relay server and received through the voice call channel .

또한, 상기 중계 서버와 상기 제1 단말 사이에 제3 통화 채널이 설정될 수 있다.In addition, a third communication channel may be established between the relay server and the first terminal.

여기서, 상기 제3 통화 채널은 음성 통화 채널이되, 상기 제2 통화 채널을 통해 전송되는 수화 영상 또는 문자가 음성으로 변환되어 상기 제3 통화 채널을 통해 상기 제1 단말에 전송될 수 있다. Here, the third call channel is a voice call channel, and a sign language image or character transmitted through the second call channel may be converted into voice and transmitted to the first terminal through the third call channel.

본 발명의 다른 일 실시예에 따른 단말에서의 중계 통화 서비스 제공 방법은 소정의 사용자 인터페이스 화면을 통해 제1 단말 전화 번호를 입력 받는 단계와 소정 중계 모드 선택 화면을 표시하고, 상기 중계 모드 선택 화면을 통해 사용자에 의해 선택된 중계 타입 식별 정보를 획득하는 단계와 상기 제1 단말 전화 번호 및 상기 중계 타입 식별 정보를 포함하는 소정 중계 요청 메시지를 중계 서버에 전송하는 단계와 상기 중계 타입 식별 정보에 상응하여 상기 제1 단말, 상기 중계 서버 중 적어도 하나와 통화 채널을 설정하는 단계와 상기 적어도 하나의 통화 채널을 이용하여 상기 제1 단말과 통화하는 단계를 포함할 수 있다.A method for providing a relay call service in a terminal according to another embodiment of the present invention includes receiving a first terminal phone number through a predetermined user interface screen and displaying a relay mode selection screen, The method comprising the steps of: acquiring relay type identification information selected by a user through a first terminal telephone number and a relay terminal identification information; transmitting a relay request message including the first terminal telephone number and the relay type identification information to a relay server; Setting a communication channel with at least one of the first terminal and the relay server, and communicating with the first terminal using the at least one communication channel.

본 발명의 또 다른 일 실시예에 따른 중계 서버에서의 중계 통화 서비스 제공 방법은 제1 단말 전화 번호 및 중계 타입 식별 정보를 포함하는 소정 중계 요청 메시지를 제2 단말로부터 수신하는 단계와 상기 제1 단말 전화 번호를 이용하여 상기 제1 단말과 제1 통화 채널을 설정하는 단계와 상기 중계 타입 식별 정보에 상응하는 제2 통화 채널을 상기 제2 단말과 설정하는 단계와 상기 중계 타입 식별 정보에 따라 상기 제1 통화 채널 및 상기 제2 통화 채널을 통해 수신되는 데이터를 변환하여 전송하는 단계를 포함할 수 있다.A method of providing a relay call service in a relay server according to another embodiment of the present invention includes receiving a relay request message including a first terminal phone number and relay type identification information from a second terminal, Setting a first communication channel with the first terminal using a telephone number, setting a second communication channel corresponding to the relay type identification information with the second terminal, And converting and transmitting data received through one call channel and the second call channel.

또한, 상기 중계 타입 식별 정보는 장애 타입에 따라 미리 정의될 수 있다.In addition, the relay type identification information may be defined in advance according to the failure type.

또한, 상기 장애 타입은 발화 장애 여부, 청각 장애 여부, 난청 여부 중 적어도 하나의 장애 요소를 조합하여 정의될 수 있다.In addition, the type of the disorder may be defined by a combination of at least one obstacle factor, such as whether it is a speech disorder, a hearing disorder, or a hearing loss.

여기서, 상기 장애 타입이 발화 장애 및 청각 장애인 경우, 상기 제2 통화 채널은 영상 통화 채널일 수 있다.Here, the second call channel may be a video call channel if the failure type is a malfunctioning or hearing impairment.

또한, 상기 영상 통화 채널을 통해 수화 영상이 전송되되, 상기 제2 단말로부터 수신되는 상기 수화 영상이 음성 데이터로 변환되어 상기 제1 단말에 전송되거나 상기 제1 단말로부터 수신되는 음성 데이터가 상기 수화 영상으로 변환되어 상기 제2 단말에 전송될 수 있다. In addition, a sign language video is transmitted through the video call channel, the sign language video received from the second terminal is converted into voice data and transmitted to the first terminal or the voice data received from the first terminal is converted into the sign language video And may be transmitted to the second terminal.

또한, 상기 장애 타입이 상기 발화 장애 및 청각 정상인 경우, 상기 제2 통화 채널을 통해 수신된 문자를 음성 데이터 신호로 변화하고, 상기 변환된 문자를 상기 제1 통화 채널을 통해 전송할 수 있다.In addition, when the fault type is the ignition failure and the auditory normal, the character received through the second call channel may be converted into a voice data signal, and the converted character may be transmitted through the first call channel.

또한, 상기 장애 타입이 상기 발화 정상 및 청각 장애인 경우, 상기 제1 통화 채널을 통해 수신된 음성 데이터 신호를 문자로 변화하고, 상기 변환된 문자를 상기 제2 통화 채널을 통해 전송할 수 있다.In addition, when the fault type is the normal or hearing impairment, the voice data signal received through the first call channel may be changed to a character, and the converted character may be transmitted through the second call channel.

또한, 상기 장애 타입이 상기 난청인 경우, 상기 제1 통화 채널을 통해 수신된 음성 데이터 신호를 증폭하고, 상기 증폭된 음성 데이터 신호를 상기 제2 통화 채널을 통해 전송할 수 있다.In addition, when the fault type is the hearing loss, it is possible to amplify the voice data signal received through the first call channel and transmit the amplified voice data signal through the second call channel.

본 발명의 또 다른 일 실시예는 상기 기재된 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공할 수 있다. Another embodiment of the present invention can provide a computer-readable recording medium on which a program for executing the above-described method is recorded.

본 발명의 또 다른 일 실시예에 따른 중계 서버와 연동하여 중계 통화 서비스를 제공하는 단말은 제1 단말로부터의 통화 요청에 따라 제1 통화 채널을 설정하는 수단과 소정 중계 모드 선택 화면을 표시하고, 상기 중계 모드 선택 화면을 통해 사용자에 의해 선택된 중계 타입 식별 정보를 획득하는 수단과 상기 제1 단말의 전화 번호 및 상기 중계 타입 식별 정보를 포함하는 소정 중계 요청 메시지를 상기 중계 서버에 전송하는 수단과 상기 중계 타입 식별 정보에 상응하는 제2 통화 채널을 상기 중계 서버와 설정하는 수단과 상기 제1 통화 채널, 상기 제2 통화 채널 중 적어도 하나를 이용하여 상기 제1 단말과 통화하는 수단을 포함할 수 있다.A terminal providing a relay call service in cooperation with a relay server according to another embodiment of the present invention displays means for setting a first call channel in response to a call request from a first terminal and a relay mode selection screen, Means for obtaining the relay type identification information selected by the user through the relay mode selection screen, means for transmitting to the relay server a predetermined relay request message including the telephone number of the first terminal and the relay type identification information, Means for establishing a second call channel corresponding to the relay type identification information with the relay server, and means for communicating with the first terminal using at least one of the first call channel and the second call channel .

본 발명의 또 다른 일 실시예에 따른 중계 서버와 연동하여 중계 통화 서비스를 제공하는 단말은 소정 사용자 인터페이스 화면을 통해 제1 단말 전화 번호를 입력 받는 수단과 소정 중계 모드 선택 화면을 표시하고, 상기 중계 모드 선택 화면을 통해 사용자에 의해 선택된 중계 타입 식별 정보를 획득하는 수단과 상기 제1 단말 전화 번호 및 상기 중계 타입 식별 정보를 포함하는 소정 중계 요청 메시지를 상기 중계 서버에 전송하는 수단과 상기 중계 타입 식별 정보에 상응하여 상기 제1 단말, 상기 중계 서버 중 적어도 하나와 통화 채널을 설정하는 수단과 상기 적어도 하나의 통화 채널을 이용하여 상기 제1 단말과의 통화를 제공하는 수단을 포함할 수 있다.A terminal providing a relay call service in cooperation with a relay server according to another embodiment of the present invention displays means for receiving a first terminal phone number through a predetermined user interface screen and a relay mode selection screen, Means for obtaining a relay type identification information selected by a user through a mode selection screen, means for transmitting a relay request message including the first terminal telephone number and the relay type identification information to the relay server, Means for establishing a call channel with at least one of the first terminal and the relay server in accordance with the information and means for providing a call with the first terminal using the at least one call channel.

본 발명의 또 다른 일 실시예에 따른 중계 서버는 제1 단말 전화 번호 및 중계 타입 식별 정보를 포함하는 소정 중계 요청 메시지를 제2 단말로부터 수신하는 수단과 상기 제1 단말 전화 번호를 이용하여 상기 제1 단말과 제1 통화 채널을 설정하는 수단과 상기 중계 타입 식별 정보에 상응하는 제2 통화 채널을 상기 제2 단말과 설정하는 수단과 상기 중계 타입 식별 정보에 따라 상기 제1 통화 채널 및 상기 제2 통화 채널을 통해 수신되는 데이터를 변환하여 전송하는 수단을 포함할 수 있다.The relay server according to another embodiment of the present invention includes means for receiving a relay request message including a first terminal telephone number and relay type identification information from a second terminal, Means for setting a first call channel with the first terminal, means for setting a second call channel corresponding to the relay type identification information with the second terminal, means for setting the first call channel and the second And means for converting and transmitting the data received via the communication channel.

상기 본 발명의 양태들은 본 발명의 바람직한 실시예들 중 일부에 불과하며, 본원 발명의 기술적 특징들이 반영된 다양한 실시예들이 당해 기술분야의 통상적인 지식을 가진 자에 의해 이하 상술할 본 발명의 상세한 설명을 기반으로 도출되고 이해될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, And can be understood and understood.

본 발명에 따른 방법 및 장치에 대한 효과에 대해 설명하면 다음과 같다.Effects of the method and apparatus according to the present invention will be described as follows.

첫째, 본 발명은 발화 가능 청각 장애인의 음성 통화에 대한 접근성을 향상시키는 효과가 있다.First, the present invention has an effect of improving the accessibility to a voice call of a firing-capable hearing-impaired person.

둘째, 본 발명은 장애 타입에 따라 적응적으로 통화 채널을 설정함으로써 보다 효과적으로 통화 중개 서비스를 제공하는 장점이 있다.Second, the present invention has an advantage of providing a call mediation service more effectively by adaptively setting a call channel according to a failure type.

셋째, 본 발명을 통해 청각 장애인의 삶의 질을 향상시키는 효과를 기대할 수 있다.Third, the present invention can be expected to improve the quality of life of the hearing impaired person.

넷째, 본 발명은 전달 지연을 최소화하여 청각 장애인과 비장애인 사이에 보다 실시간으로 의사 소통을 가능하게 하는 장점이 있다.Fourth, the present invention has the advantage of enabling more real-time communication between a hearing-impaired person and a non-disabled person by minimizing transmission delay.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects obtained by the present invention are not limited to the above-mentioned effects, and other effects not mentioned can be clearly understood by those skilled in the art from the following description will be.

이하에 첨부되는 도면들은 본 발명에 관한 이해를 돕기 위한 것으로, 상세한 설명과 함께 본 발명에 대한 실시예들을 제공한다. 다만, 본 발명의 기술적 특징이 특정 도면에 한정되는 것은 아니며, 각 도면에서 개시하는 특징들은 서로 조합되어 새로운 실시예로 구성될 수 있다.
도 1은 본 발명의 일 실시예에 따른 중계 통화 서비스 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 이동 단말의 내부 구성도이다.
도 3은 본 발명의 일 실시예에 따른 중계 서버의 내부 구성도이다.
도 4는 본 발명의 일 실시예에 따른 청각 장애인(발신인)과 비장애인(수신인) 사이의 중계 통화 서비스 절차를 설명하기 위한 개념도이다.
도 5는 본 발명의 일 실시예에 따른 비장애인(발신인)과 청각 장애인(수신인) 사이의 중계 통화 서비스 절차를 설명하기 위한 개념도이다.
도 6은 본 발명의 일 실시예에 따른 착신호에 대한 중계 모드 선택 절차를 설명하기 위한 사용자 인터페이스 화면이다.
도 7은 본 발명의 일 실시예에 따른 발신호에 대한 중계 모드 선택 절차를 설명하기 위한 사용자 인터페이스 화면이다.
도 8은 본 발명의 일 실시예에 따른 문자 중계 모드에서의 사용자 인터페이스 화면이다.
도 9는 본 발명의 일 실시예에 따른 영상 중계 모드에서의 사용자 인터페이스 화면이다.
도 10은 본 발명의 일 실시예에 따른 발화 장애 및 청각 장애를 가진 장애인 단말에서의 착신호에 대한 중계 방법을 설명하기 위한 흐름도이다.
도 11은 본 발명의 일 실시예에 따른 발화 장애 및 청각 장애를 가진 장애인 단말에서의 발신호에 대한 중계 방법을 설명하기 위한 흐름도이다.
도 12는 본 발명의 일 실시예에 따른 발화 장애이고 청각 정상인 장애인 단말에서의 착신호에 대한 중계 방법을 설명하기 위한 흐름도이다.
도 13은 본 발명의 일 실시예에 따른 발화 장애이고 청각 정상인 장애인 단말에서의 발신호에 대한 중계 방법을 설명하기 위한 흐름도이다.
도 14는 본 발명의 일 실시예에 따른 발화 정상이고 청각 장애를 가진 장애인 단말에서의 착신호에 대한 중계 방법을 설명하기 위한 흐름도이다.
도 15는 본 발명의 일 실시예에 따른 발화 정상이고 청각 장애를 가진 장애인 단말에서의 발신호에 대한 중계 방법을 설명하기 위한 흐름도이다.
도 16은 본 발명의 일 실시예에 따른 발화 정상이고 난청인 장애인 단말에서의 착신호에 대한 중계 방법을 설명하기 위한 흐름도이다.
도 17은 본 발명의 일 실시예에 따른 발화 정상이고 난청인 장애인 단말에서의 발신호에 대한 중계 방법을 설명하기 위한 흐름도이다.
도 18은 본 발명의 일 실시예에 따른 이동 단말에서의 중계 통화 서비스 제공 절차를 설명하기 위한 순서도이다.
도 19는 본 발명의 일 실시예에 따른 중계 서버에서의 중계 통화 서비스 제공 절차를 설명하기 위한 순서도이다.BRIEF DESCRIPTION OF THE DRAWINGS The accompanying drawings, which are included to provide a further understanding of the invention and are incorporated in and constitute a part of this specification, illustrate embodiments of the invention and, together with the description, serve to explain the principles of the invention. It is to be understood, however, that the technical features of the present invention are not limited to the specific drawings, and the features disclosed in the drawings may be combined with each other to constitute a new embodiment.
1 is a configuration diagram of a relay call service system according to an embodiment of the present invention.
2 is an internal configuration diagram of a mobile terminal according to an embodiment of the present invention.
3 is an internal configuration diagram of a relay server according to an embodiment of the present invention.
4 is a conceptual diagram for explaining a relay call service procedure between a deaf person (sender) and a non-disabled person (recipient) according to an embodiment of the present invention.
FIG. 5 is a conceptual diagram for explaining a relay call service procedure between a non-disabled person (sender) and a hearing impaired person (recipient) according to an embodiment of the present invention.
6 is a user interface screen for explaining a relay mode selection procedure for an incoming call according to an embodiment of the present invention.
7 is a user interface screen for explaining a relay mode selection procedure for an outgoing call according to an embodiment of the present invention.
8 is a user interface screen in the character relay mode according to an embodiment of the present invention.
9 is a user interface screen in the video relay mode according to an embodiment of the present invention.
FIG. 10 is a flowchart illustrating a method for relaying an incoming call in a terminal having a malfunctioning and hearing impairment according to an exemplary embodiment of the present invention.
FIG. 11 is a flowchart illustrating a method for relaying an outgoing call in a terminal having a malfunctioning and hearing impairment according to an exemplary embodiment of the present invention.
FIG. 12 is a flowchart for explaining a method for relaying an incoming call in a terminal having a disordered speech and a normal hearing according to an embodiment of the present invention.
FIG. 13 is a flowchart for explaining a method for relaying an outgoing call in a terminal having a disordered speech and a normal hearing according to an embodiment of the present invention.
FIG. 14 is a flowchart for explaining a relay method for an incoming call in a terminal having a normal speaking utterance and having a hearing impairment according to an embodiment of the present invention.
FIG. 15 is a flowchart for explaining a method for relaying an outgoing call in a terminal having a normal speaking utterance and having a hearing impairment according to an embodiment of the present invention.
16 is a flowchart for explaining a method for relaying an incoming call in a terminal having a disordered hearing and hearing loss according to an embodiment of the present invention.
FIG. 17 is a flowchart for explaining a method for relaying an outgoing call in a terminal having a normal speaking and hearing impaired according to an embodiment of the present invention.
18 is a flowchart illustrating a procedure for providing a relay call service in a mobile terminal according to an embodiment of the present invention.
19 is a flowchart illustrating a procedure of providing a relay call service in a relay server according to an embodiment of the present invention.

이하, 본 발명의 실시예들이 적용되는 장치 및 다양한 방법들에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, an apparatus and various methods to which embodiments of the present invention are applied will be described in detail with reference to the drawings. The suffix "module" and " part "for the components used in the following description are given or mixed in consideration of ease of specification, and do not have their own meaning or role.

본 명세서에서 설명되는 이동 단말(mobile device)로 휴대폰(mobile phone), 스마트폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등이 사용될 수 있다. 그러나, 본 명세서에 기재된 실시예에 따른 구성은 이동 가능한 단말기에만 적용 가능한 경우를 제외하면, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기에도 적용될 수 있음을 주의해야 한다.A mobile phone, a smart phone, a laptop computer, a digital broadcast terminal, a PDA (Personal Digital Assistants), a PMP (Portable Multimedia Player), a PDA Navigation and the like can be used. It should be noted, however, that the configuration according to the embodiments described herein can be applied to fixed terminals such as digital TVs, desktop computers, and the like, except when applicable only to mobile terminals.

또한, 본 발명에 따른 이동 단말(이하, 간단히 "단말"이라 명함)은 음성 통화, 영상 통화, 다자 통화, 문자 메시지 전송을 위한 패킷 데이터 통화 등이 적용되는 다양한 이동 통신 규격에 적합하도록 설계될 수 있다. 예를 들면, 단말은 3GPP(3^rdGeneration Partnership Project)의 표준에 따른 LTE(Long Term Evolusion)/ LTE-A(Advanced) 접속 수단, IEEE 802.16e 및 IEEE 802.20 표준 규격을 만족하는 무선 인터넷 접속 수단-예를 들면, Wimax 접속 수단 등을 포함함-이 탑재될 수 있다.Further, the mobile terminal according to the present invention (hereinafter simply referred to as "terminal") can be designed to conform to various mobile communication standards to which a voice call, a video call, a multi- have. For example, the terminal may be a LTE (Long Term Evolution) / LTE-A (Advanced) connection means conforming to 3GPP (3 ^rd Generation Partnership Project) standard, a wireless Internet access means satisfying IEEE 802.16e and IEEE 802.20 standard, For example, a Wimax connection means, and the like.

이하에서는, 본 발명에 따른 무선망 시스템의 일 예로서 3GPP LTE/LTE-A 시스템 구조를 간단히 설명하기로 한다.Hereinafter, a structure of a 3GPP LTE / LTE-A system will be briefly described as an example of a wireless network system according to the present invention.

LTE 시스템의 무선 액세스 네트워크는 차세대 기지국(Evolved Node B, 이하, ENB, Node B 또는 기지국)과 MME(Mobility Management Entity) 및 S-GW(Serving-Gateway)를 포함한다. 사용자 단말(User Equipment, 이하 UE 또는 단말)은 ENB 및 SGW를 통해 외부 네트워크에 접속한다.The radio access network of the LTE system includes an Evolved Node B (hereinafter, referred to as an ENB, a Node B or a base station), an MME (Mobility Management Entity) and an S-GW (Serving-Gateway). A user equipment (hereinafter, a UE or a terminal) accesses an external network through an ENB and an SGW.

ENB는 3GPP의 또 다른 무선망 시스템인 UMTS(Universal Mobile Telecommunications System) 시스템에 포함되는 NodeB에 대응될 수 있다. ENB는 UE와 무선 채널로 연결되며 기존 NodeB에 비해 보다 복잡한 역할을 수행한다. LTE 시스템에서는 인터넷 프로토콜을 통한 VoIP(Voice over IP)와 같은 실시간 음성 통화 서비스, 영상 통화 서비스 및 패킷 데이터 서비스 등을 위한 모든 사용자 트래픽이 공용 채널(shared channel)을 통해 서비스 되므로, UE들의 버퍼 상태, 가용 전송 전력 상태, 채널 상태 등의 상태 정보를 취합해서 스케줄링을 하는 장치가 필요하며, 이를 ENB가 담당한다. 하나의 ENB는 통상 다수의 셀들을 제어할 수 있다. 또한, 100 Mbps의 전송 속도를 구현하기 위해서 LTE 시스템은 20 MHz 대역폭에서 직교 주파수 분할 다중 방식(Orthogonal Frequency Division Multiplexing, 이하 OFDM이라 한다)을 무선 접속 기술로 사용한다.ENB may correspond to a NodeB included in a Universal Mobile Telecommunications System (UMTS) system which is another wireless network system of 3GPP. The ENB is connected to the UE over a radio channel and plays a more complex role than the existing NodeB. In the LTE system, since all user traffic for a real-time voice call service, a video call service, and a packet data service such as VoIP (Voice over IP) over the Internet protocol is serviced through a shared channel, A device for scheduling by collecting state information such as available transmission power state, channel state, and the like is required, which is managed by the ENB. One ENB can normally control a plurality of cells. Also, in order to realize a transmission rate of 100 Mbps, the LTE system uses Orthogonal Frequency Division Multiplexing (OFDM) as a radio access technology in a 20 MHz bandwidth.

S-GW는 데이터 베어러를 제공하는 장치이며, MME의 제어에 따라서 데이터 전송에 사용되는 베어러를 할당하거나 제거한다. 또한, MME는 단말에 대한 이동성 관리 기능은 물론 각종 제어 기능을 담당하는 장치로 복수의 ENB들과 연동될 수 있다.The S-GW is a device that provides a data bearer and allocates or removes a bearer used for data transmission under the control of the MME. In addition, the MME can be interworked with a plurality of ENBs as an apparatus that performs various control functions as well as a mobility management function for a terminal.

도 1은 본 발명의 일 실시예에 따른 중계 통화 서비스 시스템의 구성도이다.1 is a configuration diagram of a relay call service system according to an embodiment of the present invention.

도 1을 참조하면, 본 발명에 따른 중계 통화 서비스 시스템은 제1 단말(10), 제2 단말(20), 중계 서버(30), 무선망 시스템(40)을 포함하여 구성될 수 있다.Referring to FIG. 1, a relay call service system according to the present invention may include a first terminal 10, a second terminal 20, a relay server 30, and a wireless network system 40.

여기서, 제1 단말(10)은 비장애인에 의해 사용되는 단말이고, 제2 단말(20)은 청각/언어 장애를 가진 사람에 의해 사용되는 단말일 수 있다.Here, the first terminal 10 may be a terminal used by a non-disabled person, and the second terminal 20 may be a terminal used by a person with a hearing / speech impairment.

제1 내지 제2 단말(10 내지 20)은 무선망 시스템을 통해 음성/영상/패킷 통신 서비스를 제공 받을 수 있다. 또한, 제1 내지 제2 단말(10 내지 20)은 무선망 시스템을 통해 중계 서버(30)와 다자 통화 채널을 설정할 수 있으며, 설정된 통화 세션을 통해 중계 서버(30)로부터 통화 중계 서비스를 제공 받을 수 있다. 여기서, 통화 중계 서비스는 단말 사용자에 의해 선택에 따라 문자 중계 모드 또는 영상 중계 모드로 설정될 수 있다.The first and second terminals 10 to 20 may receive voice / video / packet communication services through a wireless network system. Also, the first and second terminals 10 to 20 can set up a multi-party call channel with the relay server 30 through the wireless network system and receive a call relay service from the relay server 30 through the established call session . Here, the call relay service can be set to the character relay mode or the video relay mode according to the selection by the terminal user.

중계 서버(30)는 단말의 중계 요청에 따라 필요한 통화 채널을 무선망 시스템을 통해 설정하고, 설정된 통화 채널을 통해 제1 단말(10)과 제2 단말(20) 사이의 중계 통화 서비스를 제공할 수 있다. 특히, 중계 서버(30)는 중계 요청 메시지에 포함된 소정 중계 타입 식별자에 따라 적응적으로 통화 채널을 설정할 수 있다. 중계 서버(30)에는 전화 번호 또는 IP 주소가 미리 할당될 수 있으며, 단말은 해당 중계 서버(30)에 대응되는 전화 번호 또는 IP 주소를 이용하여 중계 요청 메시지를 전송할 수 있다. The relay server 30 establishes a necessary communication channel through the wireless network system according to the relay request of the terminal and provides a relay communication service between the first terminal 10 and the second terminal 20 through the established communication channel . In particular, the relay server 30 may adaptively set up a call channel according to a predetermined relay type identifier included in the relay request message. A telephone number or an IP address may be assigned to the relay server 30 in advance and the terminal may transmit the relay request message using the telephone number or the IP address corresponding to the relay server 30.

일 예로, 중계 서버(30)는 제2 단말(20)에 의해 제1 단말(10)로의 영상 중계가 요청된 경우, 제2 단말(20)과 영상 통화 채널을 설정하고 제1 단말(10)과는 음성 통화 채널을 설정할 수 있다. 이 후, 중계 서버(30)는 설정된 영상 통화 채널 및 음성 통화 채널을 통해 제2 단말(20)과 제1 단말(10) 사이의 수화/음성 변환 서비스를 제공할 수 있다.The relay server 30 sets a video call channel with the second terminal 20 and transmits the video call channel to the first terminal 10 when the video relay to the first terminal 10 is requested by the second terminal 20, And a voice call channel can be set. Thereafter, the relay server 30 may provide a sign language / voice conversion service between the second terminal 20 and the first terminal 10 through the established video call channel and the voice call channel.

중계 서버(30)의 다양한 통화 중계 서비스는 하기의 도면들 및 설명을 통해 보다 명확해질 것이다.The various call relay services of the relay server 30 will become more apparent through the following drawings and the description.

도 2는 본 발명의 일 실시예에 따른 단말의 내부 구성도이다.2 is an internal configuration diagram of a terminal according to an embodiment of the present invention.

도 2를 참조하면, 본 발명에 따른 단말(10 내지 20)은 크게 제어부(200)와 무선 통신부(210), 센싱부(220), 전원 공급부(230), 외부 인터페이스부(240), 출력부(250), A/V(Audio/Video) 입력부(260), 메모리부(270), 입력 키 모듈(280) 등을 포함하는 하부 모듈로 구성될 수 있다. 도 2에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성 요소들을 갖는 단말이 구현될 수도 있다.2, the terminals 10 to 20 according to the present invention include a control unit 200, a wireless communication unit 210, a sensing unit 220, a power supply unit 230, an external interface unit 240, An audio / video input unit 260, a memory unit 270, an input key module 280, and the like. The components shown in Fig. 2 are not essential, and a terminal having more or fewer components may be implemented.

제어부(200)는 통상적으로 단말(10 내지 20)의 전반적인 동작을 제어한다. The control unit 200 typically controls the overall operation of the terminals 10-20.

예를 들면, 제어부(200)는 음성 통화, 패킷 데이터 통신, 영상 통화 등을 포함한 통신 기능뿐만 아니라 응용 프로그램, 위젯의 설치 및 구동을 제어할 수 있다. For example, the control unit 200 can control the installation and operation of application programs and widgets as well as communication functions including voice calls, packet data communications, video calls, and the like.

또한, 제어부(200)는 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.In addition, the control unit 200 can perform a pattern recognition process for recognizing handwriting input or drawing input performed on the touch screen as characters and images, respectively.

특히, 제어부(200)는 하부 모듈로부터 수신되는 각종 제어 신호에 따라, 입력 및 출력을 제어하고, 그에 따른 사용자 인터페이스 화면을 구성하여 제공할 수 있다. In particular, the control unit 200 can control the input and the output according to various control signals received from the lower module, and configure and provide a user interface screen accordingly.

무선 통신부(210)는 단말(10 내지 20)과 무선망 시스템(40) 사이 또는 단말(10 내지 20)과 특정 무선 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(210)는 이동통신 모듈(211), 무선 인터넷 모듈(213) 등을 포함할 수 있다. The wireless communication unit 210 may include one or more modules for enabling wireless communication between the terminals 10 to 20 and the wireless network system 40 or between the terminals 10 to 20 and a specific wireless network. For example, the wireless communication unit 210 may include a mobile communication module 211, a wireless Internet module 213, and the like.

상기한 도 2에는 도시되어 있지 않으나, 무선 통신부(210)는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(UltraWideband), ZigBee 등의 근거리 통신 수단을 제공하는 근거리 통신 모듈 및 측위 위성을 통해 수신된 신호를 이용하여 단말(10 내지 20)의 위치 정보를 확인하거나, 획득하기 위한 GPS(Global Positioning System) 수신 모듈, 소정 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신하는 방송 수신 모듈 등을 더 포함할 수도 있다.Although not shown in FIG. 2, the wireless communication unit 210 may be a wireless communication unit such as Bluetooth, Radio Frequency Identification (RFID), IrDA (Infrared Data Association), UltraWideband (UWB) A Global Positioning System (GPS) receiving module for confirming or acquiring positional information of the terminals 10 to 20 using a signal received through the provided local communication module and a positioning satellite, A broadcast receiving module for receiving broadcast signals and / or broadcast-related information from the server, and the like.

이동 통신 모듈(211)은 이동 통신망의 무선 인터페이스를 통해 기지국(NodeB, ENB 등을 포함함), 중계기, 리피터, 펨토셀 등과 무선 신호를 송/수신하는 기능을 수행한다. 여기서, 무선 신호는 음성 통화 신호, 영상 통화 신호, 문자/멀티미디어 메시지 송수신을 위한 다양한 형태의 데이터 신호 등을 포함할 수 있다.The mobile communication module 211 performs a function of transmitting / receiving a radio signal with a base station (including a NodeB, an ENB, etc.), a repeater, a repeater, a femtocell, and the like through a radio interface of a mobile communication network. Here, the wireless signal may include a voice call signal, a video call signal, various types of data signals for transmitting / receiving a text / multimedia message, and the like.

무선 인터넷 모듈(213)은 무선 인터넷 접속을 위한 송/수신 모듈을 의미하며, 무선 인터넷 모듈(213)은 단말(10 내지 20)에 내장되거나 소정의 인터페이스 단자를 통해 외장될 수도 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wirelessbroadband), Wimax(World Interoperability for Microwave Access) 등이 이용될 수 있다.The wireless Internet module 213 refers to a transmission / reception module for wireless Internet access, and the wireless Internet module 213 may be built in the terminals 10 to 20 or may be externally connected through a predetermined interface terminal. WLAN (Wireless LAN) (Wi-Fi), Wibro (Wireless Broadband), Wimax (World Interoperability for Microwave Access) and the like can be used as wireless Internet technologies.

센싱부(220)에 의해 수집되는 센싱 정보는 단말(10 내지 20)의 개폐 상태 정보, 단말(10 내지 20)의 위치 정보, 사용자 접촉 유무 정보, 단말(10 내지 20)의 방위 및 고도 정보, 단말(10 내지 20)의 회전 및 움직임 정보, 단말(10 내지 20)의 속도/가속도/감속 정보, 단말(10 내지 20) 외부의 온도/습도/광도 정보, 주변 기기 연결 감지 정보-예를 들면, 이어폰 연결 및 제거-, 주변 소리 정보, 외부 통신 기기와의 연결 정보 등과 같이 단말(10 내지 20)의 내/외부의 현재 상태를 감지하여 동작을 제어하기 위한 정보들을 포함할 수 있다. The sensing information collected by the sensing unit 220 may include information on the open / close states of the terminals 10 to 20, position information of the terminals 10 to 20, presence or absence of user contact information, orientation and altitude information of the terminals 10 to 20, Speed / acceleration / deceleration information of the terminals 10 to 20, temperature / humidity / brightness information outside the terminals 10 to 20, peripheral device connection detection information such as the rotation / motion information of the terminals 10 to 20, , Connection and removal of an earphone, peripheral sound information, connection information with an external communication device, and the like.

전원 공급부(230)는 제어부(200)의 제어에 의해 외부의 전원, 내부의 전원을 인가 받아 각 구성 요소들의 동작에 필요한 전원을 공급한다.The power supply unit 230 receives external power and internal power under the control of the controller 200 and supplies power required for operation of the respective components.

외부 인터페이스부(240)는 단말(10 내지 20)에 연결되는 모든 외부기기와의 인터페이스를 제공한다. 외부 인터페이스부(240)는 외부 기기로부터 데이터를 전송받거나 전원을 공급받아 단말(10 내지 20) 내부의 각 구성 요소에 전달하거나 단말(10 내지 20) 내부의 데이터가 외부 기기로 전송되도록 한다. The external interface unit 240 provides interfaces with all external devices connected to the terminals 10-20. The external interface unit 240 receives data from an external device or receives power from the external device 240 to transmit the data to each component in the terminals 10 to 20 or to transmit data in the terminals 10 to 20 to an external device.

예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 단말(10 내지 20)에 포함될 수 있다.For example, a wired / wireless headset port, an external charger port, a wired / wireless data port, a memory card port, a port for connecting a device having an identification module, an audio I / O port, A video input / output (I / O) port, an earphone port, and the like may be included in the terminals 10-20.

출력부(250)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로서, 디스플레이 모듈(251), 음향 출력 모듈(253), 알람부(255) 및 햅틱 모듈(257) 등이 포함될 수 있다.The output unit 250 may include a display module 251, an audio output module 253, an alarm unit 255, a haptic module 257, and the like, for generating an output related to a visual, auditory or tactile sense.

디스플레이 모듈(251)은 단말(10 내지 20)에서 처리되는 정보를 표시 출력한다. 예를 들어, 단말(10 내지 20)가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시할 수 있다. 단말(10 내지 20)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.The display module 251 displays and outputs information processed by the terminals 10-20. For example, when the terminals 10 to 20 are in the call mode, a UI (User Interface) or GUI (Graphic User Interface) related to the call can be displayed. When the terminals 10 to 20 are in the video communication mode or the photographing mode, the photographed and / or received video or UI and GUI are displayed.

특히, 본 발명에 따른 디스플레이 모듈(251)은 제어부(200)의 제어 신호에 따라 해당 단말의 환경 설정이 통신 중계 모드로 설정된 경우, 착/발신 통화에 대응되는 소정 중계 모드 선택 화면이 화면을 표시할 수 있다. 이때, 단말 사용자는 중계 모드 선택 화면을 통해 원하는 중계 모드를 선택할 수 있다. In particular, when the environment setting of the terminal is set to the communication relay mode according to the control signal of the controller 200, the display module 251 according to the present invention displays a predetermined relay mode selection screen corresponding to the incoming / can do. At this time, the terminal user can select a desired relay mode through the relay mode selection screen.

디스플레이 모듈(251)은 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.The display module 251 may be a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, a three-dimensional display 3D display).

이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 투명 LCD 등이 있다. 디스플레이 모듈(251)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말의 바디 중 디스플레이 모듈(251)이 차지하는 영역을 통해 후방에 위치한 사물을 볼 수 있다.Some of these displays may be transparent or light transmissive so that they can be seen through. This may be referred to as a transparent display. A typical example of the transparent display is a transparent LCD or the like. The rear structure of the display module 251 may also be of a light transmission type. With this structure, the user can view objects located in the rear through the area occupied by the display module 251 among the body of the terminal.

단말(10 내지 20)의 구현 형태에 따라 디스플레이 모듈(251)이 2개 이상 존재할 수 있다. 예를 들어, 단말(10 내지 20)에는 복수의 디스플레이 모듈들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.At least two display modules 251 may exist depending on the implementation of the terminals 10-20. For example, in the terminals 10 to 20, a plurality of display modules may be spaced apart or arranged integrally on one surface, and may be disposed on different surfaces, respectively.

디스플레이 모듈(251)과 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 약칭함)에, 디스플레이 모듈(251)은 출력 장치 이외에 입력 장치로도 사용될 수 있다.In a case where a display module 251 and a sensor for detecting a touch operation (hereinafter, referred to as a 'touch sensor') have a mutual layer structure (hereinafter referred to as a 'touch screen' It can also be used as an input device.

터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.The touch sensor may have the form of, for example, a touch film, a touch sheet, a touch pad, or the like.

터치 센서는 디스플레이 모듈(251)의 특정 부위에 가해진 압력 또는 디스플레이 모듈(251)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력 신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다.The touch sensor may be configured to convert a change in a pressure applied to a specific portion of the display module 251 or a capacitance generated in a specific portion of the display module 251 into an electrical input signal. The touch sensor can be configured to detect not only the position and area to be touched but also the pressure at the time of touch.

터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(200)로 전송한다. 이로써, 제어부(200)는 디스플레이 모듈(251)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.If there is a touch input to the touch sensor, the corresponding signal (s) is sent to the touch controller. The touch controller processes the signal (s) and then transmits the corresponding data to the control unit 200. Thus, the control unit 200 can know which area of the display module 251 is touched or the like.

음향 출력 모듈(253)은 호신호 수신, 통화 모드 또는 녹음 모드, 음성 인식 모드, 방송 수신 모드 등에서 무선 통신부(210)로부터 수신되거나 메모리부(270)에 저장된 오디오 데이터를 출력할 수도 있다. 음향 출력 모듈(253)은 단말(10 내지 20)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(253)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다. 또한, 음향 출력 모듈(253)은 단말의 일측에 구비된 이어폰잭을 통해 음향을 출력할 수 있다.The audio output module 253 may output audio data received from the wireless communication unit 210 or stored in the memory unit 270 in a call signal reception mode, a call mode or a recording mode, a voice recognition mode, a broadcast reception mode, The sound output module 253 outputs sound signals related to functions (e.g., call signal reception tones, message reception tones, etc.) performed in the terminals 10-20. The sound output module 253 may include a receiver, a speaker, a buzzer, and the like. Also, the sound output module 253 can output sound through the earphone jack provided at one side of the terminal.

본 발명의 일 실시예에 따른 음향 출력 모듈(253)은 장애 타입이 난청인 경우, 제어부(200)의 제어 신호에 따라 인가된 음성 신호를 증폭하여 출력할 수도 있다. 또한, 음향 출력 모듈(253)은 제어부(200)의 제어 신호에 따라 음성 신호의 출력(재생) 속도를 제어할 수도 있다. 따라서, 난청 장애를 가진 사용자가 보다 명확하게 상대방의 음성 신호를 인지할 수 있다.The sound output module 253 according to the embodiment of the present invention may amplify and output the voice signal applied according to the control signal of the controller 200 when the fault type is the hearing loss. Also, the sound output module 253 may control the output (reproduction) speed of the voice signal in accordance with the control signal of the controller 200. [ Therefore, a user with a hearing impairment can more clearly recognize the other party's voice signal.

알람 모듈(255)은 단말 사용자에게 이벤트 발생을 알리기 위한 신호를 출력한다. 단말에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람 모듈(255)은 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 비디오 신호나 오디오 신호는 디스플레이 모듈(251)이나 음향 출력 모듈(253)을 통해서도 출력될 수 있다.The alarm module 255 outputs a signal for informing the terminal user of the occurrence of the event. Examples of events that occur in the terminal include call signal reception, message reception, key signal input, touch input, and the like. The alarm module 255 may output a signal for informing occurrence of an event in a form other than a video signal or an audio signal, for example, vibration. The video signal or the audio signal may also be output through the display module 251 or the sound output module 253. [

햅틱 모듈(haptic module)(267)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(257)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(257)이 발생시키는 진동의 세기와 패턴 등은 소정의 사용자 인터페이스를 통해 설정 가능하다. 예를 들어, 햅틱 모듈(257)은 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.The haptic module 267 generates various tactile effects that the user can feel. A typical example of the haptic effect generated by the haptic module 257 is vibration. The intensity and pattern of the vibration generated by the hit module 257 can be set through a predetermined user interface. For example, the haptic module 257 may synthesize and output different vibrations or sequentially output the vibrations.

A/V(Audio/Video) 입력부(260)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로서, 카메라(261)와 마이크(263) 등이 포함될 수 있다. The A / V (Audio / Video) input unit 260 is for inputting an audio signal or a video signal, and may include a camera 261 and a microphone 263.

카메라(261)는 영상 통화 모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이 모듈(251)에 표시될 수 있다.The camera 261 processes an image frame such as a still image or a moving image obtained by the image sensor in the video communication mode or the photographing mode. The processed image frame may be displayed on the display module 251. [

카메라(261)에서 처리된 화상 프레임은 메모리부(270)에 저장되거나 무선 통신부(210)를 통하여 외부로 전송될 수 있다. 카메라(261)는 단말의 구성 태양에 따라 2개 이상이 구비될 수도 있다.The image frame processed by the camera 261 may be stored in the memory unit 270 or may be transmitted to the outside via the wireless communication unit 210. [ The camera 261 may be equipped with two or more cameras according to the configuration of the terminal.

마이크(263)는 통화 모드 또는 녹음 모드, 음성 인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 변환한다. 변환된 음성 데이터는 통화 모드인 경우 이동 통신 모듈(211)에 의해 무선 신호로 변환되어 무선상에 출력될 수 있다. The microphone 263 receives an external sound signal by a microphone in a communication mode, a recording mode, a voice recognition mode, or the like, and converts it into electrical voice data. The converted voice data may be converted into a radio signal by the mobile communication module 211 and outputted on the radio in the communication mode.

마이크(263)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.The microphone 263 may be implemented with various noise reduction algorithms for eliminating noise generated in receiving an external sound signal.

메모리부(270)는 제어부(200)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 주소록, 메시지, 정지영상, 동영상, 응용 프로그램 등)을 임시 저장할 수도 있다. 여기서, 응용 프로그램은 지도, 게임, 채팅, 웹 서핑 일정관리, 금융, 사전 등을 포함할 수 있다. 일반적으로, 스마트 폰 등에서 사용되는 응용 프로그램 또는 응용 소프트웨어를 "앱"이라 명한다. 이하에서는, 설명의 편의를 위해 응용 프로그램 또는 응용 소프트웨어와 "앱"을 혼용해서 사용하기로 한다.The memory unit 270 may store a program for the operation of the controller 200 and temporarily store input / output data (e.g., an address book, a message, a still image, a moving picture, an application program, etc.). Here, the application program may include a map, a game, a chat, a web surfing schedule, a finance, a dictionary, and the like. Generally, an application program or application software used in a smart phone or the like is referred to as an "app ". Hereinafter, for convenience of explanation, an application program or application software and an "app" are used in combination.

메모리부(270)는 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.The memory unit 270 may store data related to vibrations and sounds of various patterns that are output upon touch input on the touch screen.

메모리부(270)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장 매체를 포함할 수 있다.The memory unit 270 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory) (Random Access Memory), SRAM (Static Random Access Memory), ROM (Read Only Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM A disk, and / or an optical disk.

입력 키 모듈(280)은 사용자가 단말의 동작 제어를 위한 입력 데이터를 발생시킨다. 입력 키 모듈(280)은 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다.The input key module 280 generates input data for a user to control operation of the terminal. The input key module 280 may include a key pad dome switch, a touch pad (static / static), a jog wheel, a jog switch, and the like.

도 3은 본 발명의 일 실시예에 따른 중계 서버의 내부 구성도이다.3 is an internal configuration diagram of a relay server according to an embodiment of the present invention.

도 3에 도시된 바와 같이, 본 발명에 따른 중계 서버(30)는 크게 제어부(300)와 통신부(310), 변환부(320), 출력부(330), A/V 입력부(340), 메모리부(350), 입력 키 모듈(360) 등의 하부 모듈을 포함하여 구성될 수 있다. 여기서, 출력부(330), A/V 입력부(340), 입력 키 모듈(360) 등은 복수개가 구비될 수도 있음을 주의해야 한다.3, the relay server 30 according to the present invention includes a control unit 300, a communication unit 310, a conversion unit 320, an output unit 330, an A / V input unit 340, An input module 350, an input key module 360, and the like. It should be noted that a plurality of output units 330, A / V input unit 340, input key module 360, and the like may be provided.

따라서, 하나의 중계 서버(30)에는 다수의 중개인이 접속하여 통화 중계 서비스를 제공할 수도 있다. Accordingly, a plurality of brokers may access the one relay server 30 to provide a call relay service.

본 발명의 다른 일 실시예에 따른 중계 서버(30)는 중계인의 도움 없이, 내부 구비된 변환부(320)를 통해 자동으로 비장애인과 청각/언어 장애인 사이의 통화 중계 서비스를 제공할 수도 있다.The relay server 30 according to another embodiment of the present invention may automatically provide the call relay service between the non-handicapped person and the hearing / speech impaired person through the internally provided conversion unit 320 without the help of the relay person .

통신부(310)는 중계 서버(30)와 무선망 시스템(40) 사이의 무선 또는 유선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 통신부(310)는 이동 통신 모듈(311), 무선 인터넷 모듈(313), 유선 통신 모듈(315) 등을 포함할 수 있다.The communication unit 310 may include one or more modules for enabling wireless or wired communication between the relay server 30 and the wireless network system 40. [ For example, the communication unit 310 may include a mobile communication module 311, a wireless Internet module 313, a wired communication module 315, and the like.

이동 통신 모듈(311)은 이동 통신망의 무선 인터페이스를 통해 무선망 시스템(40)의 기지국(NodeB, ENB 등을 포함함), 중계기, 리피터, 펨토셀 등과 무선 신호를 송/수신하는 기능을 수행한다. 여기서, 무선 신호는 음성 통화 신호, 영상 통화 신호, 문자/멀티미디어 메시지 송수신을 위한 다양한 형태의 데이터 신호 등을 포함할 수 있다.The mobile communication module 311 transmits and receives a radio signal with a base station (including a NodeB, an ENB, etc.), a repeater, a repeater, a femtocell, and the like of the radio network system 40 through a radio interface of a mobile communication network. Here, the wireless signal may include a voice call signal, a video call signal, various types of data signals for transmitting / receiving a text / multimedia message, and the like.

무선 인터넷 모듈(313)은 무선 인터넷 접속을 위한 송/수신 모듈을 의미하며, 무선 인터넷 모듈(313)은 중계 서버(30)에 내장되거나 소정의 인터페이스 단자를 통해 외장될 수도 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wirelessbroadband), Wimax(World Interoperability for Microwave Access) 등이 이용될 수 있다.The wireless Internet module 313 refers to a transmission / reception module for wireless Internet access. The wireless Internet module 313 may be embedded in the relay server 30 or may be externally connected through a predetermined interface terminal. WLAN (Wireless LAN) (Wi-Fi), Wibro (Wireless Broadband), Wimax (World Interoperability for Microwave Access) and the like can be used as wireless Internet technologies.

유선 통신 모듈(315)은 을 동축 케이블 또는 광케이블 등의 유선 매체상의 전기 신호를 소정 유선 인터페이스 단자를 통해 송/수신함으로써 무선망 시스템(40)과의 유선 통신 연결을 제공할 수 있다. 여기서, 유선상의 전송 프로토콜은 ATM(Asynchronous Transfer Mode), IP-LAN(Internet Protocol based Local Area Network), B-ISDN(Broadband Integrated Service Data Network) 등을 포함할 수 있다.The wired communication module 315 can provide a wired communication connection with the wireless network system 40 by transmitting / receiving an electric signal on a wired medium such as a coaxial cable or an optical cable through a predetermined wired interface terminal. The wired transmission protocol may include Asynchronous Transfer Mode (ATM), Internet Protocol based Local Area Network (IP-LAN), Broadband Integrated Services Data Network (B-ISDN), and the like.

따라서, 중계 서버(30)는 무선망 시스템(40)과 무선 연결 및(또는) 유선 연결을 제공할 수 있다.Accordingly, the relay server 30 may provide a wireless connection and / or a wired connection to the wireless network system 40. [

변환부(320)는 외부로부터 수신된 신호를 단말에 의해 요청된 중계 타입에 따라 그에 상응하는 신호로 변환하는 기능을 수행한다. 일 예로, 변환부(320)는 수화/음성 변환 모듈(321), 음성/문자 변환 모듈(323), 음성 증폭 모듈(325) 등을 포함할 수 있다.The conversion unit 320 converts a signal received from the outside into a signal corresponding to the relay type requested by the terminal. For example, the conversion unit 320 may include a hydration / voice conversion module 321, a voice / character conversion module 323, a voice amplification module 325, and the like.

수화/음성 변환 모듈(321)은 외부로부터 수신된 수화 영상을 음성 신호로 변화하거나 외부로부터 수신된 음성 신호를 수화 영상으로 변환하는 기능을 수행한다. 이때, 외부로부터 수신된 음성 신호는 일차적으로 문자로 변환될 수 있으며, 변환된 문자는 디스플레이 모듈(331)을 통해 화면상에 표시될 수 있다.The sign language / voice conversion module 321 converts a sign language image received from the outside into a voice signal or converts a voice signal received from the outside into a sign language image. At this time, the voice signal received from the outside can be converted into a character, and the converted character can be displayed on the screen through the display module 331.

디스플레이 모듈(331)에 표시된 문자에 대응하는 수화 영상이 카메라(341)를 통해 입력되면, 입력된 수화 영상은 미리 설정된 영상 통화 채널을 통해 해당 수신 단말에 전송될 수 있다. 만약, 외부로부터 수화 영상이 수신된 경우, 수화/음성 변환 모듈(312)은 수신된 수화 영상을 디스플레이 모듈(331)을 통해 표시할 수 있으며, 중개인은 표시된 수화 영상에 대응하는 문자 또는 음성을 입력 키 모듈(360) 또는 A/V 입력부(340)를 통해 입력할 수 있다. 입력된 문자 또는 음성은 미리 설정된 패킷 데이터 채널 또는 음성 통화 채널을 통해 해당 수신 단말에 전송될 수 있다.When the sign language video corresponding to the character displayed on the display module 331 is inputted through the camera 341, the input sign language video image can be transmitted to the corresponding receiving terminal through the preset video call channel. If the sign language video image is received from the outside, the sign language / voice conversion module 312 can display the received sign language image through the display module 331, and the intermediary can input a character or voice corresponding to the sign language video image Key module 360 or the A / V input unit 340 through the input / The inputted character or voice may be transmitted to the corresponding receiving terminal through a predetermined packet data channel or a voice communication channel.

본 발명의 다른 일 실시예에 따른 수화/음성 변화 모듈(321)은 음성을 수화로 변환하거나 수화를 음성으로 변환해 줄 중개인이 존재하지 않는 경우, 메모리부(350)에 미리 저장된 수화 매핑 테이블을 참조하여 수신된 음성 신호에 대응하는 수화 이미지를 추출하여 제어부(300)에 전달할 수 있다. 제어부(300)는 수신된 수화 이미지를 미리 설정된 영상 통화 채널을 통해 해당 수신 단말에 전송할 수 있다.The sign language / voice change module 321 according to another embodiment of the present invention converts a sign language to a sign language or a sign language mapping table previously stored in the memory unit 350 when there is no intermediary for converting sign language into speech And outputs the sign language image corresponding to the received voice signal to the control unit 300. The control unit 300 can transmit the received sign language image to the corresponding receiving terminal through the preset video call channel.

상세하게, 수화/음성 변화 모듈(321)은 음성 신호가 수신되면, 수신된 음성 신호를 음절 또는 단어 단위로 분리하여 문자로 변환할 수 있다. 이 후, 수화/음성 변화 모듈(321)은 변환된 문자에 대응되는 수화 이미지를 수화 매핑 테이블을 참조하여 추출할 수 있다. 추출된 수화 이미지는 하나의 문장 단위로 그룹화될 수 있으며, 그룹화된 수화 이미지는 연속된 프레임으로 구성된 하나의 수화 영상으로 재구성될 수 있다. 재구성된 수화 영상은 미리 설정된 영상 통화 채널을 통해 해당 수신 단말로 전송될 수 있다. In detail, when a voice signal is received, the sign language / voice change module 321 can separate the received voice signal into syllables or words and convert the characters into characters. Thereafter, the sign language / voice change module 321 can extract the sign language image corresponding to the converted character by referring to the sign language mapping table. The extracted sign language images can be grouped into one sentence unit, and the grouped sign language images can be reconstructed into one sign language image composed of consecutive frames. The reconstructed sign language video can be transmitted to the corresponding receiving terminal through a preset video call channel.

음성/문자 변환 모듈(323)은 외부로부터 수신된 음성 신호를 문자로 변환하거나 외부로부터 수신된 문자를 음성으로 변환하는 기능을 수행한다. The voice / character conversion module 323 converts a voice signal received from the outside into a character or converts a character received from the outside into voice.

음성 증폭 모듈(325)은 외부로부터 수신된 음성 신호의 수신 단말이 난청 장애를 가진 사용자의 단말인 경우, 수신된 음성 신호를 소정 레벨로 증폭하는 기능을 제공한다.The voice amplification module 325 provides a function of amplifying the received voice signal to a predetermined level when the receiving terminal of the voice signal received from the outside is a terminal of a user with a hearing loss disorder.

본 발명의 다른 일 실시예에 따른 변화부(320)는 외부 수신된 음성 신호에 대해, 해당 음성 신호의 수신 대상인 난청인 장애인의 단말인 경우, 수신된 음성 신호를 증폭함과 동시에 문자로 변환할 수 있다. 이 후, 증폭된 음성 신호 및 변환된 문자가 동시에 해당 수신 단말에 전송될 수도 있다. 따라서, 중계 서버(30)는 난청인 장애인과 비장애인 사이의 보다 명확한 의사 소통을 지원할 수 있다.The changing unit 320 according to another embodiment of the present invention amplifies a received voice signal and converts it into a character when the received voice signal is a terminal of a disabled person who is a target of audible reception of the voice signal . Thereafter, the amplified voice signal and the converted character may be simultaneously transmitted to the corresponding receiving terminal. Therefore, the relay server 30 can support more clear communication between the disabled person and the non-disabled person with the hearing loss.

출력부(330)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로서, 디스플레이 모듈(331), 음향 출력 모듈(333) 등을 포함할 수 있다.The output unit 330 may include a display module 331, an audio output module 333, and the like for generating an output related to a visual, auditory, or tactile sense.

디스플레이 모듈(331)은 중계 서버(30)에서 처리되는 정보를 표시 출력한다. 예를 들어, 중계 서버(30)가 영상 중계 모드인 경우 중계 대상 단말과의 영상 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시할 수 있다. 중계 서버(30)가 문자 중계 모드인 경우에는 외부로부터 수신된 음성 신호를 문자로 변환하고, 변환된 문자가 소정 UI 또는 GUI를 통해 표시될 수 있다.The display module 331 displays and outputs the information processed by the relay server 30. For example, when the relay server 30 is in the video relay mode, a UI (User Interface) or a GUI (Graphic User Interface) related to a video call with the relay target terminal can be displayed. When the relay server 30 is in the character relay mode, the voice signal received from the outside is converted into characters, and the converted characters can be displayed through a predetermined UI or GUI.

디스플레이 모듈(331)은 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.The display module 331 may be a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, a three-dimensional display 3D display).

음향 출력 모듈(333)은 중계 요청 메시지 수신, 중계 시작 및 종료 시점 또는 녹음 시작 및 종료 시점 등에서 메모리부(350)에 저장된 오디오 데이터를 읽어와서 출력할 수도 있다. 음향 출력 모듈(333)은 중계 서버(30)에서 수행되는 기능(예를 들어, 호 신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력할 수도 있다. 이러한 음향 출력 모듈(333)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다. 또한, 음향 출력 모듈(333)은 중계 서버(30)의 일측에 구비된 이어폰잭을 통해 음향을 출력할 수도 있다. The audio output module 333 may read and output the audio data stored in the memory unit 350 at the time of receiving the relay request message, starting and ending the relay, or starting and ending the recording. The sound output module 333 may output an acoustic signal related to a function performed by the relay server 30 (for example, a call signal reception sound, a message reception sound, etc.). The sound output module 333 may include a receiver, a speaker, a buzzer, and the like. In addition, the sound output module 333 may output sound through the earphone jack provided at one side of the relay server 30.

A/V(Audio/Video) 입력부(340)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로서, 카메라(341)와 마이크(343) 등이 포함될 수 있다. The A / V (Audio / Video) input unit 340 is for inputting an audio signal or a video signal, and may include a camera 341 and a microphone 343.

카메라(341)는 영상 통화 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이 모듈(331)에 표시될 수 있다.The camera 341 processes an image frame such as a still image or a moving image obtained by the image sensor in the video communication mode. The processed image frame may be displayed on the display module 331. [

카메라(341)에서 처리된 화상 프레임은 메모리부(350)에 저장되거나 통신부(310)를 통하여 외부로 전송될 수 있다. 카메라(341)는 중계 서버(30)의 구성 태양에 따라 2개 이상이 구비될 수도 있다.The image frame processed by the camera 341 may be stored in the memory unit 350 or may be transmitted to the outside through the communication unit 310. [ The camera 341 may be provided in two or more according to the configuration of the relay server 30.

마이크(343)는 중계인에 의한 통화 중계 서비스 시 중계인의 음성을 마이크로폰(Microphone)을 통해 입력 받아 전기적인 음성 데이터로 변환할 수 있다. 변환된 음성 데이터는 통신부(310)를 통해 해당 수신 단말에 전송될 수 있다. 마이크(343)는 중계 서버(30)의 구성 태양에 따라 2개 이상이 구비될 수도 있다.The microphone 343 can receive the voice of the relay person in the call relay service by the relay person through the microphone and convert it into the electric voice data. The converted voice data can be transmitted to the corresponding receiving terminal through the communication unit 310. More than two microphones 343 may be provided according to the configuration of the relay server 30. [

메모리부(350)는 제어부(300)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 송/수신 제어 메시지, 문자 메시지, 화상 통화 영상, 수화 이미지 등)을 임시 저장할 수도 있다. 특히, 본 발명의 일 실시예에 따른 메모리부(350)는 특정 단어에 매핑되는 수화 이미지가 소정의 테이블 또는 데이터베이스 형태로 구성되어 저장될 수 있다.The memory unit 350 may store a program for the operation of the control unit 300 and temporarily store input / output data (e.g., a transmission / reception control message, a text message, a video call image, It can also be saved. In particular, in the memory unit 350 according to an embodiment of the present invention, a sign language image mapped to a specific word may be stored in a predetermined table or database form.

메모리부(350)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장 매체를 포함할 수 있다.The memory unit 350 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory) (Random Access Memory), SRAM (Static Random Access Memory), ROM (Read Only Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM A disk, and / or an optical disk.

입력 키 모듈(350)은 사용자가 중계 서버(30)의 동작 제어를 위한 입력 데이터 및 중계인에 의한 입력 데이터를 발생시킨다. 입력 키 모듈(350)은 키 보드(key board), 마우스(Mouse) 등을 포함할 수 있다.The input key module 350 generates the input data for the operation control of the relay server 30 and the input data by the relay node. The input key module 350 may include a key board, a mouse, and the like.

도 4는 본 발명의 일 실시예에 따른 청각 장애인(발신인)과 비장애인(수신인) 사이의 중계 통화 서비스 절차를 설명하기 위한 개념도이다.4 is a conceptual diagram for explaining a relay call service procedure between a deaf person (sender) and a non-disabled person (recipient) according to an embodiment of the present invention.

도 4를 참조하면, 청각 장애인 단말(20)은 그룹 통화 요청을 통해 중계 서버(30) 및 비장애인 단말(10)과의 3자 통화 세션을 설정할 수 있다. 이때, 중계 서버(30)는 청각 장애인 단말(20)로부터 비장애인 단말(10) 전화 번호를 포함하는 그룹 통화 요청 또는 중계 요청을 수신하면 비장애인 단말(10)과의 음성 통화 채널을 설정할 수 있다. 또한, 청각 장애인 단말(20)과 중계 서버(30) 사이에는 문자 또는 영상 중계를 위한 패킷 데이터 채널 또는 영상 통화 채널이 설정될 있으며, 청각 장애인 단말(20)과 비장애인 단말(10) 사이에는 음성 통화 채널이 설정될 수 있다.Referring to FIG. 4, the hearing impaired terminal 20 can establish a three-party call session with the relay server 30 and the non-impaired terminal 10 through a group call request. At this time, if the relay server 30 receives the group call request or the relay request including the telephone number of the non-malfunctioning terminal 10 from the hearing-impaired terminal 20, the relay server 30 can set a voice communication channel with the terminal 10 that is malfunctioning . A packet data channel or a video call channel for relaying characters or images is set between the terminal 20 and the relay server 30 between the hearing impaired terminal 20 and the relay server 30, A call channel can be set.

만약, 청각 장애인이 발화 가능하고 청각 장애가 있는 경우, 청각 장애인은 음성 통화 채널을 자신의 음성을 비장애인에게 직접 전달할 수 있다. 반면, 비장애인의 음성은 비장애인 단말(10)과 중계 서버(30) 사이에 설정된 음성 통화 채널을 통해 중계 서버(30)에 전송된 후, 중계 서버(30)가 이를 문자로 변환하여 청각 장애인 단말(20)에 전송할 수 있다.If a deaf person is capable of speaking and has a hearing impairment, the hearing impaired may direct the voice channel to his or her non-disabled person. On the other hand, the voice of the non-disabled person is transmitted to the relay server 30 through the voice communication channel established between the non-disabled terminal 10 and the relay server 30, To the terminal 20.

만약, 청각 장애인이 발화가 불가능하고 청각이 정상인 경우, 상기한 예에서, 청각 장애인 단말(20)과 중계 서버(30) 사이에는 영상 통화 채널이 설정될 수 있다. 이때, 청각 장애인 단말(20)은 영상 통화 채널을 통해 청각 장애인의 수화 영상을 중개 서버(30)에 전송할 수 있으며, 중개 서버(30)는 수신된 수화 영상을 음성으로 변환하여 비장애인 단말(10)에 전달 수 있다. 비장애인의 음성은 청각 장애인 단말(20)과 비장애인 단말(10) 사이에 설정된 음성 통화 채널을 통해 직접 청각 장애인 단말(20)에 전송될 수 있다.If the hearing impaired person is unable to speak and the hearing is normal, a video call channel may be established between the deaf terminal 20 and the relay server 30 in the above example. At this time, the hearing impaired terminal 20 can transmit the sign language video of the deaf person to the mediation server 30 through the video communication channel, and the mediation server 30 converts the received sign language video into speech, ). The voice of the non-disabled person can be directly transmitted to the hearing-impaired terminal 20 through the voice communication channel established between the deaf-mute terminal 20 and the non-disabled terminal 10. [

도 5는 본 발명의 일 실시예에 따른 비장애인(발신인)과 청각 장애인(수신인) 사이의 중계 통화 서비스 절차를 설명하기 위한 개념도이다.FIG. 5 is a conceptual diagram for explaining a relay call service procedure between a non-disabled person (sender) and a hearing impaired person (recipient) according to an embodiment of the present invention.

도 5를 참조하면, 청각 장애인 단말(20)은 비장애인 단말(10)로부터 전화가 걸려오면, 중계 서버(30)로 비장애인 전화 번호를 포함하는 소정 중계 요청 또는 그룹 통화 요청 메시지를 전송한다. 이 후, 중계 서버(30)는 수신된 비장애인 전화 번호를 이용하여 비장애인 단말(10)과의 음성 통화 채널을 설정할 수 있다.Referring to FIG. 5, when a call is received from the non-malicious terminal 10, the terminal 20 transmits a predetermined relay request or a group call request message including a non-malfunctioning telephone number to the relay server 30. Thereafter, the relay server 30 can set up a voice communication channel with the terminal 10 that is malfunctioning using the received non-working telephone number.

이때, 청각 장애인은 자신의 장애 타입에 따라 문자 중계 또는 영상 중계를 중계 서버(30)에 요청할 수 있으며, 중계 서버(30)는 청각 장애인 단말(20)의 중계 요청에 따라 문자 중계를 위한 패킷 데이터 통신 채널을 설정하거나 수화 중계를 위한 영상 통화 채널을 설정할 수 있다. 여기서, 장애 타입은 청각 장애 여부, 발화 장애 여부, 난청 여부 등의 장애 요소 중 적어도 하나를 조합하여 정의될 수 있다.At this time, the hearing impaired person may request the relay server 30 for character relay or video relay according to the type of the fault, and the relay server 30 may transmit the packet data for character relay You can set the communication channel or set the video communication channel for sign language relay. Here, the type of the disorder can be defined by a combination of at least one of the disturbance factors such as the hearing impairment, the speech disorder, and the hearing loss.

만약, 청각 장애인이 발화가 가능하고 듣기가 불가능한 경우-즉, 장애 타입이 발화 가능 및 청각 장애임-, 중계 서버(30)는 비장애인 단말(10)로부터 음성 신호를 문자로 변화하여 청각 장애인 단말(20)에 전송할 수 있다. 이때, 청각 장애인의 음성은 기 설정된 음성 통화 채널을 통해 비장애인 단말(10)에 직접 전송될 수 있다.If the hearing impaired person is able to speak and is unable to listen to, i.e., the type of the impairment is feasible and the hearing impairment, the relay server 30 changes the voice signal from the non-impaired terminal 10 to a letter, (20). At this time, the voice of the hearing impaired person can be directly transmitted to the terminal 10 which is non-functional through the predetermined voice communication channel.

만약, 청각 장애인이 발화 및 청각에 모두 장애가 있는 경우, 중계 서버(30)와 청각 장애인 단말(20) 사이에는 수화 중계를 위한 영상 통화 채널이 설정되고, 중계 서버(30)와 비장애인 단말(20) 사이에는 음성 중계를 위한 음성 통화 채널이 설정될 수 있다. 이때, 비장애인 단말(10)과 청각 장애인 단말(20) 사이에는 직접적인 통신 연결이 존재하지 않을 수 있다. 상기한 예에서, 청각 장애인의 수화 영상은 중계 서버(30)에 의해 음성으로 변환되어 비장애인에게 전달될 수 있으며, 비장애인의 음성은 중계 서버(30)에 의해 수화 영상으로 변환되어 청각 장애인에게 전달될 수 있다.A video communication channel for sign language relay is set up between the relay server 30 and the hearing impaired terminal 20 and the relay server 30 and the non-impaired terminal 20 A voice communication channel for voice relay can be set. At this time, there may be no direct communication connection between the non-malicious terminal 10 and the hearing-impaired terminal 20. [ In the above example, the sign language image of the hearing impaired person can be converted to speech by the relay server 30 and delivered to the non-disabled person, and the voice of the non-disabled person is converted into the sign language image by the relay server 30, Lt; / RTI >

본 발명의 다른 일 실시예는 비장애인(발신인)이 청각장애인(수신인)에게 전화를 거는 경우에 있어서, 비장애인(발신인) 단말(10)이 청각장애인(수신인) 단말(20)에게 일반 통화를 요청하면 하나의 세션이 형성될 수 있다. 그 상태에서 청각장애인(수신인) 단말(20)은 상기 형성된 세션에 중계인을 초대 하기 위해 중계 서버(30)로 그룹통화를 요청할 수 있다. 이때, 중계 서버(30)는 비장애인 단말(10)을 상기 형성된 세션에 초대할 수 있다. 이를 통해, 비장애인 단말(10), 청각장애인 단말(20) 및 중계 서버(30)는 모두 하나의 그룹통화 세션에 동시에 존재할 수 가 있다. In another embodiment of the present invention, a non-disabled (originator) terminal 10 sends a general call to a hearing-impaired (recipient) terminal 20 when a non-disabled person (caller) If requested, one session can be formed. In this state, the hearing-impaired (recipient) terminal 20 can request a group call to the relay server 30 to invite the relay person to the formed session. At this time, the relay server 30 may invite the non-disabled terminal 10 to the formed session. Accordingly, the non-disabled terminal 10, the hearing impaired terminal 20, and the relay server 30 can all exist in one group talk session at the same time.

상기한 그룹통화 세션이 형성되면, 비장애인의 음성을 중계사가 듣고 이를 문자 또는 수화 영상으로 통역하여 청각장애인에게 제공할 수 있다. 만약, 청각장애인이 발화가 가능한 경우, 상기 형성된 그룹통화 세션을 통해 직접 비장애인에게 의사전달을 하는 것도 가능하다. 반면, 발화가 어려운 청각장애인의 경우, 문자 또는 수화 영상을 통해 중계사에게 의사가 전달될 수 있으며, 중계사는 이를 음성으로 통역하여 비장애인에게 전달할 수 있다. When the group talk session is formed, the voice of the non-disabled person can be heard by the relay company, interpreted as a character or sign language video image, and provided to the hearing-impaired person. If the hearing impaired person is able to speak, it is also possible to communicate directly to the non-disabled person through the formed group call session. On the other hand, in the case of a hearing-impaired person having difficulty in speaking, the doctor can be delivered to the relay company through a character or a sign language video image, and the relay company can interpret the speech and deliver it to the non-disabled person.

도 6은 본 발명의 일 실시예에 따른 발신호에 대한 중계 모드 선택 절차를 설명하기 위한 사용자 인터페이스 화면이다.6 is a user interface screen for explaining a relay mode selection procedure for an outgoing call according to an exemplary embodiment of the present invention.

도 6을 참조하면, 단말 사용자가 소정의 환경 설정 화면을 통해 통신 중계 모드를 ON으로 설정한 경우(도면 번호 620), 수신자 전화 번호가 입력되면, 도면 번호 610에 도시된 바와 같이 소정 중계 모드 선택 화면이 표시될 수 있다. 단말 사용자는 자신의 장애 타입에 따라 중계 모드-여기서, 중계 모드는 문자 중계 및 영상 중계 포함함-를 선택할 수 있다.Referring to FIG. 6, when the terminal user sets the communication relay mode to ON on the predetermined environment setting screen (reference numeral 620), when the receiver's telephone number is input, as shown in the reference numeral 610, A screen may be displayed. The terminal user can select the relay mode according to the type of failure of the terminal, and the relay mode includes the character relay and the image relay.

중계 모드가 선택되고, 통화 버튼(630)이 클릭되면, 사용자에 의해 선택된 통화 중계 서비스가 개시될 수 있다.When the relay mode is selected and the call button 630 is clicked, the call relay service selected by the user can be started.

도 7은 본 발명의 일 실시예에 따른 착신호에 대한 중계 모드 선택 절차를 설명하기 위한 사용자 인터페이스 화면이다.7 is a user interface screen for explaining a relay mode selection procedure for an incoming call according to an embodiment of the present invention.

도 7을 참조하면, 단말 사용자가 소정의 환경 설정 화면을 통해 통신 중계 모드를 ON으로 설정한 경우(도면 번호 720), 외부로부터 전화-예를 들면, 음성 통화-가 걸려오면, 도면 번호 710에 도시된 바와 같이 소정 중계 모드 선택 화면이 표시될 수 있다. 단말 사용자는 자신의 장애 타입에 따라 중계 모드-여기서, 중계 모드는 문자 중계 및 영상 중계 포함함-를 선택할 수 있다.Referring to FIG. 7, when a terminal user sets a communication relay mode to ON on a predetermined environment setting screen (reference numeral 720) and receives a call from outside, for example, a voice call, A certain relay mode selection screen may be displayed as shown in FIG. The terminal user can select the relay mode according to the type of failure of the terminal, and the relay mode includes the character relay and the image relay.

중계 모드가 선택되고, 통화 버튼(730)이 클릭되면, 사용자에 의해 선택된 통화 중계 서비스가 개시될 수 있다.When the relay mode is selected and the call button 730 is clicked, the call relay service selected by the user can be started.

상기한 도 6 및 도 7을 참조하면, 중계 모드 선택 화면상에서 선택 가능한 중계 타입이 문자 중계와 영상 중계만을 포함하는 것으로 도시되어 있으나, 이는 하나의 실시예에 불과하며, 본 발명의 다른 일 실시예는 보다 세분화된 장애 타입에 따라 중계 타입이 정의될 수도 있다. 세분화된 중계 타입은 후술할 도 10 내지 도 17의 설명을 통해 보다 명확해질 것이다.6 and 7, it is shown that the relay type that can be selected on the relay mode selection screen includes only the character relay and the video relay, but this is merely one embodiment, and in another embodiment of the present invention A relay type may be defined according to a more specific fault type. The subdivided relay type will become more apparent through the description of FIG. 10 to FIG. 17 to be described later.

도 8은 본 발명의 일 실시예에 따른 문자 중계 모드에서의 사용자 인터페이스 화면이다. 상세하게, 도 8은 걸려온 전화(착신호)에 대한 문자 중계 모드에서의 단말 사용자 인터페이스 화면을 설명하기 위한 도면이다.8 is a user interface screen in the character relay mode according to an embodiment of the present invention. 8 is a diagram for explaining a terminal user interface screen in a character relay mode for an incoming call (incoming call).

도 8을 참조하면, 문자 중계 모드에서의 단말 사용자 인터페이스 화면은 중계사 정보 표시 영역(810), 대화창(820), 발신자 정보 표시 영역(830), 문자 입력창(840), 보내기 버튼(845), 통화 추가 버튼(850), 통화 종료 버튼(860), 다이얼 버튼(870) 중 적어도 하나를 포함하여 구성될 수 있다.8, the terminal user interface screen in the character relay mode includes a relay company information display area 810, a dialog window 820, a caller information display area 830, a character input window 840, a send button 845, A call addition button 850, a call end button 860, and a dial button 870. [

중계사 정보 표시 영역(810)에는 현재 중계사의 사진 및 이름 등의 정보가 표시될 수 있다. 만약, 중계사가 필요하지 않은 자동 중계 서비스인 경우, 중계사 정보는 표시되지 않을 수도 있다.Information such as a photograph and name of the current relay company can be displayed in the relay company information display area 810. [ If the relay service is an automatic relay service that does not require a relay company, the relay company information may not be displayed.

대화창(820)은 비장애인과 청각 장애인 사이의 문자 통신 내역이 실시간으로 표시되는 대화 표시 영역이다.The dialog window 820 is a dialog display area in which text communication details between the non-disabled and the hearing impaired are displayed in real time.

발신자 정보 표시 영역(830)은 착신호에서의 발신인의 정보-예를 들면, 발신인 전화 번호, 발신인 이름 등을 포함함-가 표시되는 영역이다. 도 8에는 발신인 전화 번호만이 표시되어 있으나, 만약, 주소록에 발신인에 대한 정보가 존재하는 경우, 발신인의 이름이 더 표시될 수도 있다.The sender information display area 830 is an area in which information of the sender in the incoming call (for example, including the sender's telephone number, sender's name, etc.) is displayed. In FIG. 8, only the sender's telephone number is displayed. However, if information on the sender exists in the address book, the sender's name may be further displayed.

문자 입력창(840)은 사용자가 문자를 입력하기 위해 사용되는 영역으로서, 문자 입력창(840)의 일측에 입력된 문자를 전송하기 위한 보내기 버튼(845)을 포함할 수 있다.The character input window 840 is an area used by a user to input a character, and may include a send button 845 for transmitting a character input to one side of the character input window 840.

통화 추가 버튼(850)은 대화 대상을 추가하고자 하는 경우에 사용되는 버튼으로서, 주소록과 바로 연결될 수 있다. 사용자는 주소록상의 연락처를 선택하여 대화 상대를 추가할 수도 있다.The call addition button 850 is a button used when a conversation target is to be added, and can be directly connected to the address book. The user can also add a contact by selecting a contact on the address book.

통화 종료 버튼(860)는 연결된 통화를 해제하기 위한 버튼이고, 다이얼 버튼(870)은 다이얼 키 패드가 표시하기 위한 버튼이다. 사용자는 다이얼 버튼(870)을 터치하여 직접 추가할 대화 상대의 전화 번호를 입력할 수 있다.The call end button 860 is a button for releasing a connected call, and the dial button 870 is a button for displaying a dial key pad. The user can touch the dial button 870 to input the telephone number of the communication party to be directly added.

도 9는 본 발명의 일 실시예에 따른 영상 중계 모드에서의 사용자 인터페이스 화면이다.9 is a user interface screen in the video relay mode according to an embodiment of the present invention.

도 9를 참조하면, 영상 중계 모드에서의 단말 사용자 인터페이스 화면은 중계사 정보 표시 영역(910), 중계 영상 표시 영역(920), 발신자 정보 표시 영역(930), 본인 영상 표시 영역(940), 통화 추가 버튼(950), 통화 종료 버튼(960), 다이얼 버튼(970) 중 적어도 하나를 포함하여 구성될 수 있다.9, the terminal user interface screen in the video relay mode includes a relay company information display area 910, a relay video display area 920, a caller information display area 930, a personal video display area 940, A button 950, a call end button 960, and a dial button 970. [

중계 영상 표시 영역(920)은 비장애인의 음성 영상을 수화로 통역한 내용이 표시되는 영역으로서, 중계사에 의해 실시간으로 통역된 수화 영상이거나 중계 서버(30)에 의해 기계적으로 변환된 수화 영상일 수 있다. The relayed video display area 920 is an area in which the contents interpreted by the sign language interpretation of the audio image of the non-disabled person are displayed. The relayed video display area 920 is a sign language image interpreted in real time by the relay company or a sign language video image converted mechanically by the relay server 30 have.

본인 영상 표시 영역(920)은 중계 영상 표시 영역(920)의 일측에 구성될 수 있으며, 단말 카메라에 의해 촬영된 영상이 표시되는 영역이다.The user's image display area 920 can be configured at one side of the relayed image display area 920 and is an area in which images photographed by the terminal camera are displayed.

중계사 정보 표시 영역(910), 발신자 정보 표시 영역(930), 통화 추가 버튼(950), 통화 종료 버튼(960) 및 다이얼 버튼(970)은 상기한 도 8의 중계사 정보 표시 영역(810), 발신자 정보 표시 영역(830), 통화 추가 버튼(850), 통화 종료 버튼(860) 및 다이얼 버튼(870)의 설명으로 대체한다. The relay company information display area 910, the caller information display area 930, the call addition button 950, the call termination button 960 and the dial button 970 correspond to the abovementioned relay history information display area 810, The information display area 830, the call addition button 850, the call end button 860, and the dial button 870.

도 10은 본 발명의 일 실시예에 따른 발화 장애 및 청각 장애를 가진 장애인 단말에서의 착신호에 대한 중계 방법을 설명하기 위한 흐름도이다. FIG. 10 is a flowchart illustrating a method for relaying an incoming call in a terminal having a malfunctioning and hearing impairment according to an exemplary embodiment of the present invention.

도 10을 참조하면, 제1 단말(10)은 소정의 제어 절차를 통해 제2 단말(20)과 제1 음성 호를 설정한다(S1001). 이때, 제2 단말(20)은 소정의 중계 모드 선택 화면을 표시할 수 있으며, 제2 단말(20) 사용자는 자신의 장애 타입(발화 장애 및 청각 장애)에 상응하는 영상 중계를 선택할 수 있다(S1003). 이때, 제2 단말(20)은 제1 단말(10)의 전화 번호-이하, 제1 단말 번호-를 임시 저장할 수 있다.Referring to FIG. 10, the first terminal 10 sets a first voice call with the second terminal 20 through a predetermined control procedure (S1001). At this time, the second terminal 20 can display a predetermined relay mode selection screen, and the user of the second terminal 20 can select the video relay corresponding to the type of his / her fault (ignition failure and hearing impairment) S1003). At this time, the second terminal 20 may temporarily store the telephone number of the first terminal 10 (hereinafter referred to as the first terminal number).

제2 단말(20)은 영상 중계가 선택되면, 기 설정된 제1 음성 호를 해제하고(S1005), 제1 단말 번호 및 중계 타입 식별 정보-여기서, 중계 타입 식별 정보는 영상 중계임-를 포함하는 소정 중계 요청 메시지를 중계 서버(30)에 전송한다(S1007).When the video relay is selected, the second terminal 20 releases the predetermined first voice call (S1005), and the first terminal number and the relay type identification information (here, the relay type identification information is the video relay) And transmits a predetermined relay request message to the relay server 30 (S1007).

연이어, 중계 서버(30)는 제2 단말(20)과 영상 호를 설정하고, 제1 단말(20)과는 제2 음성 호를 설정할 수 있다(S1009 내지 S1011).Subsequently, the relay server 30 sets up a video call with the second terminal 20 and sets a second voice call with the first terminal 20 (S1009 to S1011).

이 후, 중계 서버(30)는 제2 음성 호를 통해 제1 단말(10)로부터 음성 데이터를 수신하면(S1003), 수신된 음성 데이터를 수화 영상으로 변환하고(S1015), 변환된 수화 영상을 기 설정된 영상 호를 통해 제2 단말(20)에 전송할 수 있다(S1017).Thereafter, when the relay server 30 receives the voice data from the first terminal 10 through the second voice call (S1003), the relay server 30 converts the received voice data into the received image (S1015) To the second terminal 20 through the preset video call (S1017).

또한, 중계 서버(30)는 기 설정된 영상 호를 통해 제2 단말(20)로부터 수화 영상을 수신하면, 수신된 수화 영상을 음성 데이터로 변화하고, 변환된 음성 데이터를 기 설정된 제2 음성 호를 통해 제1 단말(10)에 전송할 수 있다(S1019 내지 S1023). When the relay server 30 receives a sign language video image from the second terminal 20 via the predetermined video call, the relay server 30 converts the received sign language video image into voice data, converts the converted voice data into a predetermined second voice call To the first terminal 10 (S1019 to S1023).

도 11은 본 발명의 일 실시예에 따른 발화 장애 및 청각 장애를 가진 장애인 단말에서의 발신호에 대한 중계 방법을 설명하기 위한 흐름도이다. FIG. 11 is a flowchart illustrating a method for relaying an outgoing call in a terminal having a malfunctioning and hearing impairment according to an exemplary embodiment of the present invention.

도 11을 참조하면, 제2 단말(20)의 통신 중계 모드가 ON으로 설정한 경우(도면 번호 620), 소정 사용자 인터페이스 화면을 통해 제1 단말(10)에 대응하는 수신 전화 번호-이하, 제1 단말 번호-가 입력되면(S1101), 도면 번호 610에 도시된 바와 같이 소정 중계 모드 선택 화면이 표시될 수 있다. 제2 단말(20) 사용자는 자신의 장애 타입(발화 장애 및 청각 장애)에 상응하는 영상 중계를 선택할 수 있다(S1103). 11, when the communication relay mode of the second terminal 20 is set to ON (620), a received telephone number corresponding to the first terminal 10 through the predetermined user interface screen, 1 terminal number " is input (S1101), a certain relay mode selection screen may be displayed as shown in reference numeral 610. [ The user of the second terminal 20 can select a video relay corresponding to his / her fault type (ignition failure and hearing impairment) (S1103).

제2 단말(20)은 영상 중계가 선택되면, 제1 단말 번호 및 중계 타입 식별 정보-여기서, 중계 타입 식별 정보는 영상 중계임-를 포함하는 소정 중계 요청 메시지를 중계 서버(30)에 전송한다(S1105).When the video relay is selected, the second terminal 20 transmits to the relay server 30 a predetermined relay request message including the first terminal number and the relay type identification information (here, the relay type identification information is video relay) (S1105).

이 후 절차에 대한 설명은 상기한 도 10의 1011 단계 내지 1023 단계의 내용으로 대체한다.The following description of the procedure is replaced with the contents of steps 1011 to 1023 of FIG.

도 12는 본 발명의 일 실시예에 따른 발화 장애이고 청각 정상인 장애인 단말에서의 착신호에 대한 중계 방법을 설명하기 위한 흐름도이다.FIG. 12 is a flowchart for explaining a method for relaying an incoming call in a terminal having a disordered speech and a normal hearing according to an embodiment of the present invention.

도 12를 참조하면, 제1 단말(10)은 소정의 제어 절차를 통해 제2 단말(20)과 제1 음성 호를 설정한다(S1201). 이때, 제2 단말(20)의 통신 중계 모드가 ON으로 설정된 경우(도면 번호 720), 제2 단말(20)은 소정의 중계 모드 선택 화면을 표시할 수 있으며, 제2 단말(20) 사용자는 자신의 장애 타입(발화 장애 및 청각 정상)에 상응하는 발화 장애 문자 중계를 선택할 수 있다(S1203). 이때, 제2 단말(20)은 제1 단말(10)의 전화 번호-이하, 제1 단말 번호-를 임시 저장할 수 있다.Referring to FIG. 12, the first terminal 10 sets a first voice call with the second terminal 20 through a predetermined control procedure (S1201). At this time, if the communication relay mode of the second terminal 20 is set to ON (reference numeral 720), the second terminal 20 can display a predetermined relay mode selection screen, and the user of the second terminal 20 It is possible to select the repetition of the ignition failure character corresponding to the type of the obstacle (the ignition failure and the auditory normal) (S1203). At this time, the second terminal 20 may temporarily store the telephone number of the first terminal 10 (hereinafter referred to as the first terminal number).

제2 단말(20)은 발화 장애 문자 중계가 선택되면, 제1 단말 번호 및 중계 타입 식별 정보-여기서, 중계 타입 식별 정보는 발화 장애 문자 중계임-를 포함하는 소정 중계 요청 메시지를 중계 서버(30)에 전송한다(S1205).The second terminal 20 transmits a predetermined relay request message including the first terminal number and the relay type identification information, in which the relay type identification information is the ignition failure character relay, to the relay server 30 (S1205).

연이어, 중계 서버(30)는 문자 중계를 위해 제2 단말(20)과 패킷 데이터 호를 설정하고(S1207), 제1 단말(10)과는 제2 음성호를 설정할 수 있다(S1209). 여기서, 패킷 데이터 호는 채팅 문자를 송/수신하기 위한 채팅 응용 프로그램과 연동되는 패킷 데이터 호일 수 있다. 일 예로, 채팅 응용 프로그램은 조인(Join), 카카오톡, 라인 등과 같은 인스턴트 메시징(Instant Messaging) 프로그램일 수 있다. 일반적으로, 인스턴트 메시징 프로그램은 SMS(Short Message Service)에 비해 전송 속도가 빠르고 경제적인 장점이 있다.Subsequently, the relay server 30 establishes a second voice call with the first terminal 10 (S1209), sets up a packet data call with the second terminal 20 for character relay (S1207). Here, the packet data call may be a packet data call associated with a chat application program for sending / receiving chat characters. As an example, the chat application may be an Instant Messaging program such as Join, KakaoTalk, Line, and the like. In general, an instant messaging program has advantages of faster transmission speed and economical efficiency than SMS (Short Message Service).

이 후, 제2 단말(20)은 제1 음성 호를 통해 직접 제1 단말(10)의 음성 데이터를 수신할 수 있다(S1211). 또한, 발화가 불가능한 제2 단말(20) 사용자는 패킷 데이터 호를 통해 문자를 중계 서버(30)에 전송하고, 중계 서버(30)는 수신된 문자를 음성 데이터로 변환하여 제2 음성 호를 통해 제1 단말(10)에 전송할 수 있다(S1213 내지 S1217).Thereafter, the second terminal 20 can directly receive the voice data of the first terminal 10 through the first voice call (S1211). In addition, the user of the second terminal 20, which is incapable of speech, transmits a character to the relay server 30 via the packet data call, and the relay server 30 converts the received character into voice data, To the first terminal 10 (S1213 to S1217).

도 13은 본 발명의 일 실시예에 따른 발화 장애이고 청각 정상인 장애인 단말에서의 발신호에 대한 중계 방법을 설명하기 위한 흐름도이다.FIG. 13 is a flowchart for explaining a method for relaying an outgoing call in a terminal having a disordered speech and a normal hearing according to an embodiment of the present invention.

제2 단말(20)의 통신 중계 모드가 ON으로 설정된 경우(도면 번호 620), 소정 사용자 인터페이스 화면을 통해 제1 단말(10)에 대응하는 수신 전화 번호-이하, 제1 단말 번호-가 입력되면(S1301), 도면 번호 610에 도시된 바와 같이 소정 중계 모드 선택 화면이 표시될 수 있다. 제2 단말(20) 사용자는 자신의 장애 타입(발화 장애 및 청각 정상)에 상응하는 발화 장애 문자 중계를 선택할 수 있다(S1303).When the communication relay mode of the second terminal 20 is set to ON (reference numeral 620), a received telephone number corresponding to the first terminal 10 (hereinafter referred to as a first terminal number) is input through a predetermined user interface screen (S1301), a certain relay mode selection screen may be displayed as shown in the drawing 610. [ The user of the second terminal 20 can select the repetition of the utterance failure corresponding to the type of his / her disability (the utterance disorder and the hearing abnormality) (S1303).

제2 단말(20)은 발화 장애 문자 중계가 선택되면, 제1 단말(10)과 제1 음성 호를 설정하고, 제1 단말 번호 및 중계 타입 식별 정보-여기서, 중계 타입 식별 정보는 발화 장애 문자 중계임-를 포함하는 소정 중계 요청 메시지를 중계 서버(30)에 전송한다(S1305 내지 S1307).The second terminal 20 establishes a first voice call with the first terminal 10 when the ignited failure character relay is selected, and transmits the first terminal number and the relay type identification information, To the relay server 30 (S1305 to S1307).

이 후 절차에 대한 설명은 상기한 도 12의 1207 단계 내지 1217 단계의 내용으로 대체한다.The description of the procedure thereafter is replaced with the contents of steps 1207 to 1217 of FIG. 12 described above.

도 14는 본 발명의 일 실시예에 따른 발화 정상이고 청각 장애를 가진 장애인 단말에서의 착신호에 대한 중계 방법을 설명하기 위한 흐름도이다.FIG. 14 is a flowchart for explaining a relay method for an incoming call in a terminal having a normal speaking utterance and having a hearing impairment according to an embodiment of the present invention.

도 14를 참조하면, 제1 단말(10)은 소정의 제어 절차를 통해 제2 단말(20)과 제1 음성 호를 설정한다(S1401). 이때, 제2 단말(20)의 통신 중계 모드가 ON으로 설정된 경우(도면 번호 720), 제2 단말(20)은 소정의 중계 모드 선택 화면을 표시할 수 있으며, 제2 단말(20) 사용자는 자신의 장애 타입(발화 정상 및 청각 장애)에 상응하는 청각 장애 문자 중계를 선택할 수 있다(S1403). 이때, 제2 단말(20)은 제1 단말(10)의 전화 번호-이하, 제1 단말 번호-를 임시 저장할 수 있다.Referring to FIG. 14, the first terminal 10 establishes a first voice call with the second terminal 20 through a predetermined control procedure (S1401). At this time, if the communication relay mode of the second terminal 20 is set to ON (reference numeral 720), the second terminal 20 can display a predetermined relay mode selection screen, and the user of the second terminal 20 A hearing-impaired character relay corresponding to his / her disability type (normal speech and hearing impairment) can be selected (S1403). At this time, the second terminal 20 may temporarily store the telephone number of the first terminal 10 (hereinafter referred to as the first terminal number).

제2 단말(20)은 청각 장애 문자 중계가 선택되면, 제1 단말 번호 및 중계 타입 식별 정보-여기서, 중계 타입 식별 정보는 청각 장애 문자 중계임-를 포함하는 소정 중계 요청 메시지를 중계 서버(30)에 전송한다(S1405).The second terminal 20 transmits a predetermined relay request message including the first terminal number and the relay type identification information, which is the relay type identification information, to the hearing-impaired character relay, to the relay server 30 (S1405).

연이어, 중계 서버(30)는 문자 중계를 위해 제2 단말(20)과 패킷 데이터 호를 설정하고(S1407), 제1 단말(10)과는 제2 음성호를 설정할 수 있다(S1409). Subsequently, the relay server 30 sets up a second voice call with the first terminal 10 (S1409), sets up a packet data call with the second terminal 20 for character relay (S1407).

중계 서버(30)는 제2 음성 호를 통해 제1 단말(10)로부터 음성 데이터가 수신되면, 수신된 음성 데이터를 문자로 변환하고, 변환된 패킷 데이터 호를 통해 제2 단말(20)에 전송한다(S1411 내지 S1415).When the voice data is received from the first terminal 10 through the second voice call, the relay server 30 converts the received voice data into characters and transmits the converted voice data to the second terminal 20 via the converted packet data call (S1411 to S1415).

제1 단말(20)은 제1 음성 호를 통해 제2 단말(10)의 음성 데이터를 직접 수신할 수 있다(S1417).The first terminal 20 can directly receive the voice data of the second terminal 10 through the first voice call (S1417).

도 15는 본 발명의 일 실시예에 따른 발화 정상이고 청각 장애를 가진 장애인 단말에서의 발신호에 대한 중계 방법을 설명하기 위한 흐름도이다.FIG. 15 is a flowchart for explaining a method for relaying an outgoing call in a terminal having a normal speaking utterance and having a hearing impairment according to an embodiment of the present invention.

도 15를 참조하면, 제2 단말(20)의 통신 중계 모드가 ON으로 설정된 경우(도면 번호 620), 소정 사용자 인터페이스 화면을 통해 제1 단말(10)에 대응하는 수신 전화 번호-이하, 제1 단말 번호-가 입력되면(S1501), 도면 번호 610에 도시된 바와 같이 소정 중계 모드 선택 화면이 표시될 수 있다. 제2 단말(20) 사용자는 자신의 장애 타입(발화 정상 및 청각 장애)에 상응하는 청각 장애 문자 중계를 선택할 수 있다(S1503).15, when the communication relay mode of the second terminal 20 is set to ON (620), a received telephone number corresponding to the first terminal 10 through the predetermined user interface screen, When the terminal number - is inputted (S1501), a certain relay mode selection screen can be displayed as shown in reference numeral 610. [ The user of the second terminal 20 may select the hearing-impaired character relay corresponding to his / her fault type (normal speaking and hearing impairment) (S1503).

제2 단말(20)은 청각 장애 문자 중계가 선택되면, 제1 단말(10)과 제1 음성 호를 설정하고, 제1 단말 번호 및 중계 타입 식별 정보-여기서, 중계 타입 식별 정보는 청각 장애 문자 중계임-를 포함하는 소정 중계 요청 메시지를 중계 서버(30)에 전송한다(S1505 내지 S1507).The second terminal 20 sets a first voice call with the first terminal 10 when a deaf or hearing impaired character relay is selected, and a first terminal number and relay type identification information, To the relay server 30 (S1505 to S1507).

이 후 절차에 대한 설명은 상기한 도 14의 1407 단계 내지 1417 단계의 내용으로 대체한다.The description of the procedure thereafter is replaced with the contents of steps 1407 to 1417 of FIG.

도 16은 본 발명의 일 실시예에 따른 발화 정상이고 난청인 장애인 단말에서의 착신호에 대한 중계 방법을 설명하기 위한 흐름도이다.16 is a flowchart for explaining a method for relaying an incoming call in a terminal having a disordered hearing and hearing loss according to an embodiment of the present invention.

도 16을 참조하면, 제2 단말(20)은 제1 단말(10)로부터 걸려온 통화 요청에 따라 제1 음성 호를 설정한다(S1601). 이때, 제2 단말(20)의 통신 중계 모드가 ON으로 설정된 경우(도면 번호 720), 제2 단말(20)은 소정의 중계 모드 선택 화면을 표시할 수 있으며, 제2 단말(20) 사용자는 자신의 장애 타입(발화 정상 및 난청)에 상응하는 난청 중계를 선택할 수 있다(S1603). 이때, 제2 단말(20)은 제1 단말(10)의 전화 번호-이하, 제1 단말 번호-를 임시 저장할 수 있다.Referring to FIG. 16, the second terminal 20 sets a first voice call in response to a call request from the first terminal 10 (S1601). At this time, if the communication relay mode of the second terminal 20 is set to ON (reference numeral 720), the second terminal 20 can display a predetermined relay mode selection screen, and the user of the second terminal 20 It is possible to select a deafness relay corresponding to the type of his / her own impairment (normal speech and hearing loss) (S1603). At this time, the second terminal 20 may temporarily store the telephone number of the first terminal 10 (hereinafter referred to as the first terminal number).

제2 단말(20)은 난청 중계가 선택되면, 제1 단말 번호 및 중계 타입 식별 정보-여기서, 중계 타입 식별 정보는 난청 중계임-를 포함하는 소정 중계 요청 메시지를 중계 서버(30)에 전송한다(S1605).The second terminal 20 transmits to the relay server 30 a predetermined relay request message including the first terminal number and the relay type identification information (here, the relay type identification information is the hearing loss relay) when the deaf terminal is selected (S1605).

연이어, 중계 서버(30)는 난청 중계를 위해 제2 단말(20)과 제2 음성 호를 설정하고(S1607), 제1 단말(10)과는 제3 음성호를 설정할 수 있다(S1609). Subsequently, the relay server 30 establishes a second voice call with the second terminal 20 (S1607) and sets a third voice call with the first terminal 10 (S1609).

중계 서버(30)는 제3 음성 호를 통해 제1 단말(10)로부터 음성 데이터가 수신되면, 수신된 음성 데이터를 난청 장애인이 잘 들을 수 있는 소정 레벨로 증폭하고, 증폭된 음성 데이터를 제2 음성 호를 통해 제2 단말(20)에 전송한다(S1611 내지 S1615).When the voice data is received from the first terminal 10 through the third voice call, the relay server 30 amplifies the received voice data to a predetermined level that the hearing impaired person can hear well, and transmits the amplified voice data to the second To the second terminal 20 through a voice call (S1611 to S1615).

본 발명의 다른 일 실시예에 따른 중계 서버(30)는 제1 단말(10) 사용자의 발화 속도가 느려지도록 수신된 음성 데이터의 전송 속도를 제어할 수도 있다.The relay server 30 according to another embodiment of the present invention may control the transmission rate of the received voice data so that the speaking speed of the user of the first terminal 10 is slow.

또한, 제1 단말(20)은 제1 음성 호를 통해 제2 단말(10)의 음성 데이터를 직접 수신할 수 있다(S1617).Also, the first terminal 20 can directly receive the voice data of the second terminal 10 through the first voice call (S1617).

상기한 도 16의 예에서는 중계 서버(30)가 비장애인의 음성을 증폭하고 비장애인의 음성의 재생 속도를 제어할 수 있는 것으로 설명하고 있으나, 이는 하나의 예에 불과하며, 본 발명의 또 다른 실시예는 난청 장애의 경우, 별도의 중계 과정을 거치지 않고, 제2 단말(20)에서 제1 단말(10)로부터 수신된 음성 데이터에 대해 내부적으로 증폭하고 재생 속도를 제어할 수도 있다. In the example of FIG. 16, the relay server 30 amplifies the voice of the non-disabled person and controls the reproduction speed of the voice of the non-disabled person. However, this is only one example, The embodiment may internally amplify voice data received from the first terminal 10 at the second terminal 20 and control the reproduction speed without a separate relay process in the case of a deafness.

도 17은 본 발명의 일 실시예에 따른 발화 정상이고 난청인 장애인 단말에서의 발신호에 대한 중계 방법을 설명하기 위한 흐름도이다.FIG. 17 is a flowchart for explaining a method for relaying an outgoing call in a terminal having a normal speaking and hearing impaired according to an embodiment of the present invention.

도 17을 참조하면, 제2 단말(20)의 통신 중계 모드가 ON으로 설정된 경우(도면 번호 620), 소정 사용자 인터페이스 화면을 통해 제1 단말(10)에 대응하는 수신 전화 번호-이하, 제1 단말 번호-가 입력되면(S1701), 도면 번호 610에 도시된 바와 같이 소정 중계 모드 선택 화면이 표시될 수 있다. 제2 단말(20) 사용자는 자신의 장애 타입(발화 정상 및 청각 장애)에 상응하는 난청 중계를 선택할 수 있다(S1703).17, when a communication relay mode of the second terminal 20 is set to ON (620), a received telephone number corresponding to the first terminal 10 through a predetermined user interface screen, When the terminal number - is inputted (S1701), a certain relay mode selection screen can be displayed as shown in the drawing 610. [ The user of the second terminal 20 can select the deafness relay corresponding to his / her fault type (normal speech and hearing impairment) (S1703).

제2 단말(20)은 난청 중계가 선택되면, 제1 단말(10)과 제1 음성 호를 설정하고, 제1 단말 번호 및 중계 타입 식별 정보-여기서, 중계 타입 식별 정보는 난청 중계임-를 포함하는 소정 중계 요청 메시지를 중계 서버(30)에 전송한다(S1705 내지 S1707).The second terminal 20 sets a first voice call with the first terminal 10 and selects a first terminal number and relay type identification information (here, the relay type identification information is a deaf-blind relay) To the relay server 30 (S1705 to S1707).

이 후 절차에 대한 설명은 상기한 도 16의 1607 단계 내지 1617 단계의 내용과 동일하므로 생략하기로 한다.Hereinafter, the description of the procedure is the same as that in steps 1607 to 1617 of FIG. 16, and therefore, the description will be omitted.

도 18은 본 발명의 일 실시예에 따른 단말에서의 중계 통화 서비스 제공 방법을 설명하기 위한 순서도이다.18 is a flowchart illustrating a method for providing a relay call service in a terminal according to an embodiment of the present invention.

상세하게, 도 18은 청각 및(또는) 발화 장애를 가진 장애인의 단말-이하, 제2단말(20)-에서 비장애인 단말-이하, 제1 단말(10)-로부터의 통화 요청에 따라 통화 중계 서비스를 설정하는 방법을 설명하기 위한 순서도이다.18 is a flowchart illustrating a method of transmitting a call in response to a call request from a terminal of a disabled person having an auditory and / or speech disorder (hereinafter, referred to as a non-malicious terminal in the second terminal 20) A flowchart for explaining a method of setting a service.

도 18을 참조하면, 제2 단말(20) 사용자는 소정 환경 설정 메뉴 화면상의 통신 중계 설정 메뉴를 선택하여 통신 중계 모드를 활성화(ON)시킬 수 있다(S1805).Referring to FIG. 18, the user of the second terminal 20 can turn on the communication relay mode by selecting the communication relay setting menu on the predetermined configuration menu screen (S1805).

제2 단말(20)은 제1 단말(10)로부터의 통화 요청에 따라 제1 통화 채널을 설정할 수 있다(S1810).The second terminal 20 can set a first communication channel according to a call request from the first terminal 10 (S1810).

제2 단말(20)은 제1 단말(10)로부터 통화 요청을 수신하면, 소정 중계 모드 선택 화면-이때, 중계 모드 선택 화면은 팝업 창으로 구성될 수 있음-을 표시하고, 중계 모드 선택 화면상에서의 사용자 선택에 따른 중계 타입 식별 정보를 획득한다(S1815).When the second terminal 20 receives the call request from the first terminal 10, the second terminal 20 displays a predetermined relay mode selection screen (in this case, the relay mode selection screen can be configured as a pop-up window) (Step S1815).

연이어, 제2 단말(20)은 제1 단말 전화 번호 및 중계 타입 식별 정보를 포함하는 소정 중계 요청 메시지를 중계 서버(30)로 전송한다(S1820).Subsequently, the second terminal 20 transmits a predetermined relay request message including the first terminal telephone number and the relay type identification information to the relay server 30 (S1820).

이 후, 중계 타입 식별 정보에 상응하는 제2 통화 채널이 제2 단말(20)과 중계 서버(30) 사이에 설정되며, 제2 단말(20)은 제1 통화 채널, 제2 통화 채널 중 적어도 하나를 이용하여 제1 단말(10)과의 통화가 이루어질 수 있다(S1830 내지 S1840).Thereafter, a second call channel corresponding to the relay type identification information is set up between the second terminal 20 and the relay server 30, and the second terminal 20 sets at least one of the first and second call channels, The first terminal 10 can communicate with the first terminal 10 (S1830 to S1840).

여기서, 상기한 제1 통화 채널 및 제2 통화 채널은 음성 통화, 영상 통화, 패킷 데이터 통화 중 어느 하나를 제공할 수 있다. Here, the first and second call channels may provide one of voice call, video call, and packet data call.

일 예로, 중계 타입 식별 정보가 청각 장애 및 발화 장애인 경우, 제1 통화 채널은 음성 통화를 제공하고, 제2 통화 채널은 영상 통화를 제공할 수 있다. 반면, 중계 타입 식별 정보가 발화 장애 및 청각 정상인 경우, 제1 통화 채널은 음성 통화를 제공하고 제2 통화 채널은 패킷 데이터 통화를 제공할 수 있다.In one example, if the relay type identification information is deaf or hearing impaired, the first call channel may provide a voice call and the second call channel may provide a video call. On the other hand, if the relay type identification information is a speech failure and audible normal, the first call channel may provide a voice call and the second call channel may provide a packet data call.

도 19는 본 발명의 일 실시예에 따른 중계 서버에서의 중계 통화 서비스 제공 방법을 설명하기 위한 순서도이다.19 is a flowchart illustrating a method for providing a relay call service in a relay server according to an embodiment of the present invention.

상세하게, 도 19는 중계 서버(30)에서 제2 단말(20)로부터 제1 단말(10)과의 중계 요청이 수신된 경우, 중계 통화 서비스를 제공하는 방법을 설명하기 위한 순서도이다.19 is a flowchart illustrating a method of providing a relay call service when a relay request from the second terminal 20 to the first terminal 10 is received in the relay server 30. [

중계 서버(30)는 제2 단말(20)로부터 제1 단말 전화 번호 및 중계 타입 식별 정보를 포함하는 소정 중계 요청 메시지를 수신한다(S1910).The relay server 30 receives a relay request message including the first terminal phone number and the relay type identification information from the second terminal 20 (S1910).

중계 서버(30)는 중계 타입 식별 정보에 상응하는 제1 통화 채널을 제2 단말(20)과 설정한다(S1920).The relay server 30 sets a first communication channel corresponding to the relay type identification information to the second terminal 20 (S1920).

연이어, 중계 서버(30)는 중계 타입 식별 정보에 상응하는 제2 통화 채널을 제1 단말과 설정한다(S1930).Subsequently, the relay server 30 sets a second communication channel corresponding to the relay type identification information to the first terminal (S1930).

이 후, 중계 서버(30)는 제1 통화 채널 및 제2 통화 채널을 이용하여 제1 단말(10)과 제2 단말(20) 사이의 중계 통화 서비스를 제공한다(S1940).Thereafter, the relay server 30 provides a relay call service between the first terminal 10 and the second terminal 20 using the first call channel and the second call channel (S1940).

본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다. It will be apparent to those skilled in the art that the present invention may be embodied in other specific forms without departing from the spirit or essential characteristics thereof.

따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.Accordingly, the above description should not be construed in a limiting sense in all respects and should be considered illustrative. The scope of the present invention should be determined by rational interpretation of the appended claims, and all changes within the scope of equivalents of the present invention are included in the scope of the present invention.

10: 제1 단말 20: 제2 단말
30: 중계 서버 40: 무선망 시스템
320: 변환부 610: 중계 모드 선택 화면10: first terminal 20: second terminal
30: Relay server 40: Wireless network system
320: Conversion part 610: Relay mode selection screen

Claims

A method for providing a relay call service in a terminal,
Establishing a first call channel in response to a call request from a first terminal;
Displaying a predetermined relay mode selection screen and obtaining relay type identification information selected by a user through the relay mode selection screen;
Transmitting a relay request message including the telephone number of the first terminal and the relay type identification information to a relay server; And
Setting a second call channel corresponding to the relay type identification information with the relay server
Wherein the first call channel and the second call channel communicate with the first terminal using at least one of the first call channel and the second call channel.

The method according to claim 1,
Further comprising the step of activating a communication relay mode through a predetermined configuration menu screen, wherein, when the communication relay mode is activated, the relay mode selection screen is displayed.

The method according to claim 1,
Wherein the second call channel provides one of voice call, video call, and packet data communication according to the relay type identification information.

The method according to claim 1,
Wherein the relay type identification information is predefined according to the failure type.

5. The method of claim 4,
Wherein the failure type is defined by a combination of at least one obstacle factor, such as whether or not an obstacle is a malfunction, a hearing disorder, or a hearing loss.

5. The method of claim 4,
Wherein the second call channel is a video call channel when the failure type is an ignition failure and a hearing impairment.

The method according to claim 6,
And the sign language video is transmitted through the video call channel.

5. The method of claim 4,
Wherein the set first call channel is released when the type of the fault is a speech disorder and a hearing impairment.

5. The method of claim 4,
Wherein the second call channel is a packet data communication channel for text chat when the failure type is a hearing loss, a hearing abnormality, a normal speech, or a hearing impairment.

5. The method of claim 4,
Wherein the first call channel is a voice call channel when the type of the fault is an ignited disorder, an auditory cancellation, a normal speech, and a hearing impairment.

5. The method of claim 4,
Wherein the second call channel is a voice call channel and the voice data signal received from the first terminal is amplified by the relay server and is received through the voice call channel, Way.

The method according to claim 1,
And a third call channel is established between the relay server and the first terminal.

11. The method of claim 10,
Wherein the third call channel is a voice call channel and the sign language video or character transmitted through the second call channel is converted into voice and transmitted to the first terminal through the third call channel.

A method for providing a relay call service in a terminal,
Receiving a first terminal telephone number;
Displaying a predetermined relay mode selection screen and obtaining relay type identification information selected by a user through the relay mode selection screen;
Transmitting a relay request message including the first terminal telephone number and the relay type identification information to a relay server;
Setting a communication channel with at least one of the first terminal and the relay server according to the relay type identification information; And
Communicating with the first terminal using the at least one call channel;
And transmitting the relay call service request to the mobile terminal.

A method of providing a relay call service in a relay server,
Receiving a relay request message including a first terminal telephone number and relay type identification information from a second terminal;
Setting a first call channel with the first terminal using the first terminal phone number;
Setting a second communication channel corresponding to the relay type identification information with the second terminal; And
And converting and transmitting data received through the first and second call channels according to the relay type identification information
And transmitting the relay call service request to the mobile terminal.

16. The method of claim 15,
Wherein the second call channel provides one of voice call, video call, and packet data communication according to the relay type identification information.

16. The method of claim 15,
Wherein the relay type identification information is predefined according to the failure type.

18. The method of claim 17,
Wherein the failure type is defined by a combination of at least one obstacle factor, such as whether or not an obstacle is a malfunction, a hearing disorder, or a hearing loss.

18. The method of claim 17,
Wherein the second call channel is a video call channel when the failure type is an ignition failure and a hearing impairment.

20. The method of claim 19,
Wherein the sign language video is transmitted through the video call channel and the sign language video received from the second terminal is converted into voice data and transmitted to the first terminal or the voice data received from the first terminal is converted into the sign language video And transmitted to the second terminal.

18. The method of claim 17,
Wherein the second call channel is a packet data communication channel for text chat when the failure type is a hearing loss, a hearing abnormality, a normal speech, or a hearing impairment.

22. The method of claim 21,
And changing the character received through the second call channel to a voice data signal and transmitting the converted character through the first call channel when the failure type is the ignition failure and the hearing abnormality.

22. The method of claim 21,
Changing a voice data signal received through the first call channel to a character and transmitting the converted character via the second call channel when the failure type is the normal speaking and hearing impairment.

18. The method of claim 17,
And amplifying the voice data signal received through the first call channel and transmitting the amplified voice data signal through the second call channel when the failure type is the hearing loss.

A computer-readable recording medium storing a program for executing the method according to any one of claims 1 to 24.

A terminal for providing a relay call service in cooperation with a relay server,
Means for establishing a first call channel in response to a call request from a first terminal;
Means for displaying a predetermined relay mode selection screen and acquiring relay type identification information selected by a user on the relay mode selection screen;
Means for transmitting a relay request message including the telephone number of the first terminal and the relay type identification information to the relay server; And
And means for setting a second call channel corresponding to the relay type identification information with the relay server, wherein the terminal is in communication with the first terminal using at least one of the first call channel and the second call channel.

A terminal for providing a relay call service in cooperation with a relay server,
Means for receiving a first terminal telephone number through a predetermined user interface screen;
Means for displaying a predetermined relay mode selection screen and acquiring relay type identification information selected by a user on the relay mode selection screen;
Means for transmitting to the relay server a predetermined relay request message including the first terminal telephone number and the relay type identification information;
Means for establishing a call channel with at least one of the first terminal and the relay server corresponding to the relay type identification information; And
Means for providing a call with the first terminal using the at least one call channel
.

Means for receiving a relay request message from a second terminal, the relay request message including a first terminal telephone number and relay type identification information;
Means for establishing a first call channel with the first terminal using the first terminal telephone number;
Means for establishing a second call channel with the second terminal corresponding to the relay type identification information; And
And means for converting and transmitting data received through the first and second call channels according to the relay type identification information
.