KR20180099535A - System for providing communication services in device things using id - Google Patents

System for providing communication services in device things using id Download PDF

Info

Publication number
KR20180099535A
KR20180099535A KR1020180023455A KR20180023455A KR20180099535A KR 20180099535 A KR20180099535 A KR 20180099535A KR 1020180023455 A KR1020180023455 A KR 1020180023455A KR 20180023455 A KR20180023455 A KR 20180023455A KR 20180099535 A KR20180099535 A KR 20180099535A
Authority
KR
South Korea
Prior art keywords
service
user terminal
voice
server
call
Prior art date
Application number
KR1020180023455A
Other languages
Korean (ko)
Other versions
KR102014817B1 (en
Inventor
이길수
Original Assignee
(주)티아이스퀘어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to KR1020170026722 priority Critical
Priority to KR20170026722 priority
Application filed by (주)티아이스퀘어 filed Critical (주)티아이스퀘어
Publication of KR20180099535A publication Critical patent/KR20180099535A/en
Application granted granted Critical
Publication of KR102014817B1 publication Critical patent/KR102014817B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72522

Abstract

The present invention relates to a system for providing communication services in device things by using ID, which comprises: a service server which forms a control session between device things or between the device thing and a user terminal by being combined with the device thing and the user terminal through a network, and conducts a call processing function for transmitting and receiving voice or video call services and messages through the control session; and a media server which forms a media session between device things or between the device thing and a user terminal by being combined with the device thing and the user terminal through a network. In addition, the device thing registers a set ID in an address book of an account of a user of the device thing, which is stored in the service server, while the service server stores the address book of the account of the user of the device thing by synchronizing the address book with another device thing and the user terminal. Is this state, the system for providing a call service in a device thing can conduct a call service by selecting a device thing or a user terminal which conducts a call service based on the ID stored in the address book; transmitting and receiving a control signal through the control session formed by the service server; and transmitting and receiving a voice, video, or message signal for voice or video call services and message transmitting and receiving services with the selected device thing or user terminal through the media session formed by the media server.

Description

ID를 이용하여 장치 사물에서 통신 서비스를 제공하는 시스템{SYSTEM FOR PROVIDING COMMUNICATION SERVICES IN DEVICE THINGS USING ID}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a system for providing a communication service in an apparatus using an ID,
본 발명은 ID를 이용하여 장치 사물에서 통신 서비스를 제공하는 시스템에 관한 것으로서, 보다 상세하게는 장치 사물 사이 또는 장치 사물과 사용자 단말기 사이에서 ID에 기반하여 간편하고 효율적으로 다양한 통신 서비스를 제공할 수 있는 시스템에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a system for providing a communication service in an apparatus using an ID, and more particularly, to a system for providing various communication services between apparatus objects or between a device object and a user terminal, Lt; / RTI >
종래의 전통적인 통신 서비스는, 유무선 통신사 및 케이블사 등에서 구축한 통신망을 중심으로 가정 및 기업 고객이 가입함으로써 전화 통화 등의 통신 서비스를 이용할 수 있었으며 예컨대, 02, 031 및 070 등 유선 전화 번호 방식으로 서비스가 이루어져왔다. 이를 통해 통신사는 가입한 고객으로부터 설치비, 단말가격 및 통신 요금 등의 다양한 BM(Business Model)을 가지고 전통적인 통신 사업을 해오고 있다. In the conventional conventional communication service, home and business customers have been able to use a communication service such as a telephone call by using a communication network constructed by wired / wireless communication companies and cable companies, etc., by using a wired telephone number system such as 02, 031, and 070 . As a result, telecom operators have been engaged in traditional telecommunication business with a variety of BM (Business Models) such as installation cost, terminal price and telecommunication fee from subscribed customers.
한편, 최근에는 사물 인터넷(IoT) 기술 보급이 확대됨에 따라 사물 인터넷을 이용한 다양한 디바이스들과 이러한 디바이스를 이용한 다양한 부가 서비스가 제안되고 있다.In recent years, as the diffusion of Internet (IoT) technology has been expanded, various devices using the object Internet and various additional services using such devices have been proposed.
한편, 유선 및 인터넷 기반의 전화의 경우 기존의 전화 번호 기반으로 통화 서비스가 만들어지므로, ID에 기반하여 가정이나 기업에서 통화 서비스를 제공할 수 있는 위한 디바이스는 아직 존재하지 않았으며, 스마트폰 등 모바일과의 연계도 이루어질 수 없었다는 한계가 있다.On the other hand, in the case of wired and Internet-based phones, a call service is created based on the existing telephone number. Therefore, there is not yet a device for providing a call service at home or business based on the ID, It is not possible to link it with.
본 발명은 상기한 바와 같은 한계점을 극복하기 위한 것으로서, 다양한 형태의 AI 디바이스와 IoT 디바이스와 같은 장치 사물(Device Things)를 이용하여 ID에 기반하여 통신 서비스를 수행할 수 있도록 하는 시스템을 제공하는 것을 목적으로 한다.SUMMARY OF THE INVENTION The present invention has been made to overcome the above-mentioned problems, and it is an object of the present invention to provide a system capable of performing communication services based on IDs by using device objects such as various AI devices and IoT devices The purpose.
또한, 본 발명은 스마트폰의 어플리케이션과 AI(Artificial Intelligence) 디바이스 또는 IoT(Internet of Thing) 디바이스간에 ID(Identification)를 이용하여 단방향(Half Duplex) PTT 음성/영상 통화 서비스, 양방향(FullDuplex) 음성/영상 통화 서비스, 메시지 송수신 서비스를 제공하는 것을 목적으로 한다.The present invention also relates to a method and apparatus for providing a half-duplex PTT voice / video call service, a FullDuplex voice / video communication service using an ID (Identification) between an application of a smart phone and an artificial intelligence (AI) device or an Internet of Thing Video call service, and message transmission / reception service.
또한, 본 발명은 전화 번호가 없어도 AI 디바이스 및 IoT 디바이스)에 ID를 부여함으로써, 스마트폰과 AI/IoT 디바이스들 간의 다양한 커뮤니케이션을 제공할 수 있는 시스템을 제공하는 것을 또 다른 목적으로 한다.It is another object of the present invention to provide a system capable of providing various communication between a smartphone and AI / IoT devices by giving an ID to an AI device and an IoT device without a telephone number.
상기한 바와 같은 과제를 해결하기 위하여 본 발명은, ID를 이용하여 장치 사물에서의 통신 서비스를 제공하는 시스템으로서, 장치 사물 및 사용자 단말기와 네트워크를 통해 결합하여 장치 사물 사이 또는 장치 사물과 사용자 단말기 사이에서 제어 세션을 형성하고, 상기 제어 세션을 통한 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 호 처리 기능을 수행하는 서비스 서버; 및 장치 사물 및 사용자 단말기와 네트워크를 통해 결합하여 장치 사물 사이 또는 장치 사물과 사용자 단말기 사이에서 미디어 세션을 형성하는 미디어 서버를 포함하고, 상기 장치 사물은 설정된 ID를 상기 서비스 서버에 저장된 장치 사물 사용자의 계정의 주소록에 등록하고, 상기 서비스 서버는 상기 장치 사물 사용자의 계정의 주소록을 다른 장치 사물 및 사용자 단말기와 동기화하여 저장하도록 한 상태에서, 장치 사물 및 사용자 단말기는 주소록에 저장된 ID에 기초하여 통화 서비스를 수행할 장치 사물 또는 사용자 단말기를 선택하고, 상기 서비스 서버를 통해 형성된 제어 세션을 통해 제어 신호를 송수신하고 또한 상기 미디어 서버를 통해 형성되는 미디어 세션을 통해 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 음성, 영상 또는 메시지 신호를 상기 선택된 장치 사물 또는 사용자 단말기와 송수신함으로써 통화 서비스를 수행하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템을 제공한다.According to an aspect of the present invention, there is provided a system for providing a communication service in an apparatus using an ID, the system comprising: a communication unit for communicating with an apparatus object and a user terminal through a network, A service server for performing a call processing function for a voice or video call service and a message transmission / reception service through the control session; And a media server coupled to the device object and the user terminal via a network to form a media session between the device objects or between the device object and the user terminal, And the service server stores the address book of the account of the device user in synchronization with another device object and the user terminal so that the device object and the user terminal can register the address book of the account of the device user on the basis of the ID stored in the address book, And transmits the control signal through the control session formed through the service server and transmits the control signal through the media session formed through the media server for voice or video call service and message transmission / Voice, video Provides the call service provider system in the device object, characterized in that to perform the call service by transmitting and receiving device with the selected object or a user terminal a message signal.
여기에서, 상기 장치 사물 사용자의 계정의 주소록은 미리 설정된 허락된 친구 관계인 다른 장치 사물 및 사용자 단말기들과만 동기화할 수 있다.Here, the address book of the device object user's account can only be synchronized with other device objects and user terminals, which are preset allowable friendships.
또한, 상기 장치 사물 또는 사용자 단말기는, 서비스 수행 장치를 구동시켜서 음성 또는 영상 통화를 수행할 상대방 장치 사물 또는 사용자 단말기의 ID를 선택하고 선택된 ID를 포함하는 음성 또는 영상 통화 요청 신호를 서비스 서버로 전송할 수 있다.In addition, the device object or the user terminal drives the service performing device to select an object of the counterpart device or an ID of the user terminal to perform a voice or video call, and transmits a voice or video call request signal including the selected ID to the service server .
또한, 상기 서비스 서버는 미디어 서버로 미디어 자원 할당 요청 신호를 전송하고, 미디어 서버는 미디어 자원을 할당하고 자원 할당 응답 신호를 서비스 서버로 전송하고, 상기 서비스 서버는 상기 자원 할당 응답 신호를 음성 또는 영상 통화를 요청한 발신측 장치 사물 또는 사용자 단말기로 전송하고, 발신측 장치 사물 또는 사용자 단말기는 상기 자원 할당 응답 신호에 포함된 미디어 자원 정보에 기초하여 미디어 세션을 미디어 서버와 형성할 수 있다.In addition, the service server transmits a media resource allocation request signal to the media server, the media server allocates media resources, and transmits a resource allocation response signal to the service server. The calling party device object or the user terminal can form a media session with the media server based on the media resource information included in the resource allocation response signal.
또한, 상기 서비스 서버는, 착신측 장치 사물 또는 사용자 단말기의 ID를 확인하고 이에 기초하여 해당 장치 사물 또는 사용자 단말기로 통화 요청 신호를 전송하고, 착신측 장치 사물 또는 사용자 단말기가 통화를 수락한 경우 상기 서비스 서버는 미디어 서버로 미디어 자원 할당 요청 신호를 전송하고 미디어 서버는 미디어 자원을 할당하고 자원 할당 응답 신호를 서비스 서버로 전송하고, 상기 서비스 서버는 상기 자원 할당 응답 신호를 착신측 장치 사물 또는 사용자 단말기로 전송하고, 착신측 장치 사물 또는 사용자 단말기는 상기 자원 할당 응답 신호에 포함된 미디어 자원 정보에 기초하여 미디어 세션을 미디어 서버와 형성하고, 발신측 및 착신측 장치 사물 또는 사용자 단말기는 상기 미디어 서버를 통해 형성된 미디어 세션을 통해 음성 또는 영상 통화 서비스를 위한 음성 또는 영상 신호를 송수신함으로써 통화 서비스를 수행할 수 있다.Also, the service server confirms the destination apparatus object or the ID of the user terminal, and transmits a call request signal to the apparatus object or the user terminal based on the ID of the destination apparatus object or the user terminal. When the destination apparatus object or the user terminal accepts the call, The service server transmits a media resource allocation request signal to the media server, the media server allocates the media resource, and transmits a resource allocation response signal to the service server. The service server transmits the resource allocation response signal to the destination apparatus object or the user terminal And the destination apparatus object or the user terminal forms a media session with the media server based on the media resource information included in the resource allocation response signal, and the source and destination apparatus objects or the user terminal send the media server Lt; RTI ID = 0.0 > and / or < A call service can be performed by transmitting / receiving a voice or video signal for a video call service.
또한, 상기 음성 또는 영상 통화 서비스는 PTT(Push To Talk) 서비스를 포함할 수 있다.In addition, the voice or video call service may include a PTT (Push To Talk) service.
또한, 상기 장치 사물 또는 사용자 단말기는, 서비스 수행 장치를 구동시켜서 메시지 송신 서비스를 수행할 상대방 장치 사물 또는 사용자 단말기의 ID를 선택하고 선택된 ID를 포함하는 메시지 송신 서비스 신호를 서비스 서버로 전송할 수 있다.In addition, the device object or the user terminal can select the object of the counterpart device or the user terminal to perform the message transmission service by driving the service performing device, and transmit a message transmission service signal including the selected ID to the service server.
또한, 상기 서비스 서버는, 착신측 장치 사물 또는 사용자 단말기로 메시지가 수신되었음을 알리는 신호를 전송하고, 착신측 장치 사물 또는 사용자 단말기는 미리 설정된 출력모드에 따라 수신한 메시지를 음성 신호로 변환하여 출력할 수 있다.In addition, the service server transmits a signal indicating that a message has been received to the destination apparatus object or the user terminal, and the destination apparatus object or the user terminal converts the received message into a voice signal according to a preset output mode and outputs the voice signal .
또한, 상기 장치 사물은, 장치 사물의 사용자로부터 입력되는 음성 명령을 수신하여 음성 인식부를 통해 음성 명령을 해석하여 텍스트 정보로 변환하여 변환된 텍스트 정보를 포함하는 메시지를 서비스 서버로 전송할 수 있다.In addition, the apparatus object may receive a voice command input from a user of the apparatus, interpret the voice command through the voice recognition unit, convert the voice command into text information, and transmit the message including the converted text information to the service server.
또한, 스팸 정보 또는 보이스 피싱 정보를 저장하고 있으며 서비스 서버로부터의 스팸 질의 요청 신호를 수신하여 스팸 여부 또는 보이스 피싱 여부를 판단하여 그 결과를 서비스 서버로 전송하는 스팸 차단 시스템을 더 포함할 수 있다.The system may further include a spam blocking system that stores spam information or voice phishing information, receives a spam query request signal from the service server, determines whether the spam is spam or voice phishing, and transmits the result to the service server.
또한, 인터넷에 기반하여 어플리케이션에 의해 통신 서비스를 제공하는 기타 통신 시스템을 더 포함하고, 상기 장치 사물은 상기 기타 통신 시스템의 어플리케이션과 연동하여 장치 사물에 대해 설정된 ID를 기타 통신 시스템에 저장된 장치 사물 사용자의 계정의 주소록에 등록함으로써 상기 장치 사물은 기타 통신 시스템의 어플리케이션의 주소록에 동기화될 수 있다.The apparatus may further include a communication system for providing communication services by an application based on the Internet, wherein the apparatus object is configured to interwork with an application of the other communication system to transmit an ID set for the apparatus object to a device object user The device object can be synchronized with the address book of the application of the other communication system.
본 발명에 의하면, 다양한 형태의 AI 디바이스와 IoT 디바이스와 같은 장치 사물(Device Things)를 이용하여 ID에 기반하여 통신 서비스를 수행할 수 있도록 하는 시스템을 제공할 수 있다.According to the present invention, it is possible to provide a system that enables communication services based on IDs by using device objects such as various AI devices and IoT devices.
또한, 본 발명은 스마트폰의 어플리케이션과 AI(Artificial Intelligence) 디바이스 또는 IoT(Internet of Thing) 디바이스간에 ID(Identification)를 이용하여 단방향(Half Duplex)PTT 음성/영상 통화 서비스, 양방향(FullDuplex) 음성/영상 통화 서비스, 메시지 송수신 서비스를 제공할 수 있다.The present invention also relates to a method and apparatus for providing a half-duplex PTT voice / video call service, a FullDuplex voice / video communication service using an ID (Identification) between an application of a smart phone and an artificial intelligence (AI) device or an Internet of Thing Video call service, and message transmission / reception service.
또한, 본 발명에 의하면 다음과 같은 장점이 있다.Further, the present invention has the following advantages.
1) 본 발명은 기존 통신사 및 유선 기반의 케이블 방송사 등에서 제공되는 유료 방식의 인터넷 전화 서비스와 가입비 또는 별도의 통신료없이 사용이 가능한 무료 기반의 유.무선 인터넷 서비스이다. 1) The present invention is a free-based wireless Internet service that can be used without a subscription fee or a separate communication fee, which is provided by existing communication companies and cable-based cable broadcasting companies.
2) 본 발명은 가정 및 기업내에서 사용하는 AI 및 IoT 장치(Thing)내에 본 발명의 통신 모듈을 탑재하고, 이를 처리하기 위한 본 발명의 시스템을 제공함으로써, 긍극적으로 스마트폰과 AI 또는 IoT 장치(Thing)들과의 다양한 무료 통신 방식을 제공함으로써, 기존의 카카오톡, Line, WeChat, Facebook 메신저 등에서 제공하는 모바일 스마트폰 App간에만 제공하던 무료 통화 방식을 AI 및 IoT 장치(Thing)까지 확장하고, 이들 AI 및 IoT 장치(Thing)까지 가입자로 확산할 수 있다.2) The present invention provides a system of the present invention for mounting the communication module of the present invention in an AI and IoT device (Thing) used in home and enterprise, By providing various free communication methods with devices, free calling method that was provided only between mobile smartphone apps provided by existing KakaoTalk, Line, WeChat, and Facebook Messenger extends to AI and IoT device (Thing) And spread these AI and IoT devices (Thing) to subscribers.
3) 기존 통신사 또는 케이블사의 망을 이용하지 않고, 유.무선 인터넷을 통하여 인터넷이 연결될 수 있는 세계 어떤 곳이라도 AI 또는 IoT 장치(Thing)를 설치하게 되면, 스마트폰과 AI 및 IoT 장치(Thing) 연동이 가능하므로 이를 통하여 단방향 서비스인 PTT 서비스, 양방향 음성/영상 통화 서비스 및 메시징 서비스에 대한 무료 서비스 제공이 가능하므로, 기존 전세계 통신사, 케이블사 위주의 통신 방식에서 벗어나 새로운 통신 방식으로 PTT, 음성/영상 통화 및 메시징 송/수신 등에 대한 서비스를 제공하는 새로운 통신 패러다임을 창조할 수 있다.3) If AI or IoT device (Thing) is installed anywhere in the world where internet can be connected through wired and wireless Internet without using existing network of telecommunication company or cable company, smart phone, AI and IoT device (Thing) It is possible to provide PTT service, bidirectional voice / video call service, and messaging service as a one-way service, thereby providing a free service. Therefore, PTT, voice / A new communication paradigm can be created that provides services for video call and messaging transmission / reception.
4) 본 발명에 의하면, 가정 및 사업체에서 가지고 있는 AI 또는 IoT(예, Home용 CCTV 등) 장치에 유선 인터넷 전화 번호를 갖고 있지 않더라도, 해당 AI/IoT 장치에 대한 ID를 설정함으로써 현재 많은 고객을 확보하고 있는 SKT의 T전화를 사용하는 고객, Kakao Talk 및 Naver의 Line 메신저 App을 사용하는 고객이 가정에 설치되어 있는 AI 및 IoT 단말기기(장치, Thing)에 유선 전화 번호(예, 070 등)를 갖고 있지 않더라도, 고객과 유.무선 인터넷으로 연결되어 있는 AI/IoT 단말간의 의 다양한 통화(PTT서비스, 음성/영상 통화 서비스) 및 문자 관련 서비스를 제공할 수 있다.4) According to the present invention, by setting the ID for the AI / IoT device, even if the home or business does not have a wired Internet phone number in the AI or IoT (eg, home CCTV) device, Customers using SKT's T-phone, Kakao Talk, and Naver's Line Messenger app will be able to use the landline phone number (eg, 070) in their home AI and IoT terminal (Thing) (PTT service, voice / video call service) and text-related services between AI / IoT terminals connected to a customer and a wired / wireless Internet,
5) 본 발명에 의하면, AI 또는 IoT 장치(Thing)에 착신되는 전화에 대해서 AI 또는 IoT 장치(Thing)내에 저장되어 있는 주소록에 등록되어 있지 않은 수신전화에 대하여, 이를 AI/IoT 단말 고객에게 알려줘서 선택적으로 전화를 수신할 수 있도록 할 수 있다.5) According to the present invention, the AI / IoT terminal notifies the AI / IoT terminal customer of an incoming call that is not registered in the address book stored in the AI or IoT device (Thing) So that the user can selectively receive a telephone call.
6) 또한 본 발명을 이용하게 되면 기존의 스팸/보이스피싱 차단 시스템과 연동하여 스팸 전화 또는 보이스피싱 관련 전화 번호에 대하여 수신 시에 이를 알려ㅈ줄 수 있는 장점이 있다.6) Further, the present invention has an advantage in that it can notify a spam phone or a voice phishing related phone number when receiving, in cooperation with an existing spam / voice phishing blocking system.
7) 또한 본 발명은 기존의 전화 또는 메신저 서비스 시스템과 연동하여 AI/IoT 장치(Thing)을 연락처 및 친구에 등록할 수 있어, 기존 통화 App(예, T전화) 및 메신저 App(Kakao Talk, Line, Wechat, Facebook Messenger, Google Messenger 등)과 연동하여 음성/영상 PTT, 통화 서비스 및 문자 채팅 서비스를 이용할 수 있다.7) In addition, the present invention can register an AI / IoT device (Thing) in a contact and a friend in cooperation with a conventional telephone or messenger service system, , Wechat, Facebook Messenger, Google Messenger, etc.) to use voice / video PTT, call service, and text chat service.
도 1은 본 발명에 의한 ID를 이용하여 장치 사물에서의 통신 서비스를 제공하는 시스템(100)의 전체 구성을 나타낸 도면이다.
도 2는 시스템(100)의 내부 구성을 나타낸 도면이다.
도 3은 장치 사물(200)과 사용자 단말기(300)에 포함된 서비스 수행 장치(600)의 내부 구성을 나타낸 도면이다.
도 4는 엔진 처리부(620)의 일실시예를 나타낸 도면이다.
도 5는 장치 사물(200)과 시스템(100) 및 사용자 단말기(300) 간의 셋업 절차를 설명하기 위한 도면이다.
도 6은 본 발명에 의한 시스템(100)에서 수행되는 통신 서비스로서 사용자 단말기(300)에서 장치 사물(200)로 음성 또는 영상 통화 서비스를 수행하는 경우를 설명하기 위한 도면이다.
도 7은 본 발명에 의한 시스템(100)에서 수행되는 통신 서비스로서 사용자 단말기(300)에서 장치 사물(200)로 음성 또는 영상 통화 서비스를 수행할 때 시스템(100)에서의 상세 호 설정 과정을 나타낸 것이다.
도 8은 도 6 및 도 7에서 설명한 바와 같이 사용자 단말기(300)로부터 장치 사물(200)로 음성 호(Incoming Voice Call)가 착신되었을 때, 장치 사물(200)의 서비스 수행 장치(600)의 내부 연동 절차를 나타낸 것이다.
도 9는 도 6 및 도 7에서 설명한 바와 같이 사용자 단말기(300)로부터 장치 사물(200)로 영상 호(Incoming Video Call)가 착신되었을 때, 장치 사물(200)의 서비스 수행 장치(600)의 내부 연동 절차를 나타낸 것이다.
도 10은 본 발명에 의한 시스템(100)에서 수행되는 통신 서비스로서 장치 사물(200)에서 사용자 단말기(300) 또는 다른 장치 사물(200)로 음성 또는 영상 통화 서비스를 수행하는 경우를 설명하기 위한 도면이다.
도 11은, 본 발명에 의한 시스템(100)에서 수행되는 통신 서비스로서 장치 사물(200)에서 다른 장치 사물(200) 또는 사용자 단말기(300)로 음성 또는 영상 통화 서비스를 수행할 때 시스템(100)에서의 상세 호 설정 과정을 나타낸 것이다.
도 12는 도 10 및 도 11에서 설명한 바와 같이 장치 사물(200)로부터 다른 장치 사물(200) 또는 사용자 단말기(300)로 음성 호(Incoming Voice Call)가 착신되었을 때, 장치 사물(200)의 서비스 수행 장치(600)의 내부 연동 절차를 나타낸 것이다.
도 13은 도 10 및 도 11에서 설명한 바와 같이 장치 사물(200)로부터 다른 장치 사물(200) 또는 사용자 단말기(300)로 영상 호(Incoming Video Call)가 착신되었을 때, 장치 사물(200)의 서비스 수행 장치(600)의 내부 연동 절차를 나타낸 것이다.
도 14는 사용자 단말기(300)에서 장치 사물(200)로 음성/영상 PTT(Push To Talk) 서비스를 수행하는 경우를 설명하기 위한 도면이다.
도 15는 장치 사물(200)에서 다른 장치 사물(200) 또는 사용자 단말기(300)로 음성/영상 PTT(Push To Talk) 서비스를 수행하는 경우를 설명하기 위한 도면이다.
도 16은 사용자 단말기(300)에서 장치 사물(200)로 메시지 송수신 서비스의 하나로서 문자 채팅 서비스 절차를 수행하는 경우를 설명하기 위한 도면이다.
도 17은 장치 사물(200)로 문자가 수신되는 내부 절차를 나타낸 것이다.
도 18은 장치 사물(200)을 이용하여 문자를 발신하는 경우에 대한 내부 절차를 나타낸 것이다.
도 19는 장치 사물(200)에서 사용자 단말기(300) 또는 다른 장치 사물(200)로 메시지 송수신 서비스의 하나로서 문자 채팅을 위한 서비스 절차를 나타낸 것이다.
도 20은 사용자 단말기(300) 또는 장치 사물(200)로부터 착신측 장치 사물(200)로 수신되는 음성/영상 호(Incoming Call)에 대하여 외부 스팸 차단을 하기 위한 서비스 절차를 나타낸 것이다.
도 21은 수신측 장치 사물(200)이 전원 오프(Power Off), 통화중 또는 무응답일 경우 수신된 음성/영상 호 및 메시지에 대한 서비스 절차를 나타낸 것이다.
도 22는 OTT 사업자 또는 통신 사업자가 사용하고 있는 어플리케이션에 적용을 할 경우의 화면 예시를 나타낸 것으로서, 사용자 단말기(스마트폰)에서 장치 사물(200)로 통화를 위한 사용자 인터페이스의 예시를 나타낸 것이다.
도 23은 기존의 메시징 어플리케이션에 본 발명을 적용한 경우를 설명하기 위한 도면으로서, 널리 사용되고 있는 카카오톡 어플리케이션에 본 발명을 적용한 경우이다.
도 24는 통신사에서 제공하고 있는 통화 어플리케이션(예컨대, 에스케이 텔레콤의 T 전화)에 본 발명을 적용한 경우를 나타낸 것이다.
1 is a diagram showing the overall configuration of a system 100 for providing communication services in an apparatus using an ID according to the present invention.
2 is a diagram showing an internal configuration of the system 100. As shown in FIG.
3 is a diagram illustrating an internal configuration of an apparatus object 200 and a service performing apparatus 600 included in the user terminal 300. As shown in FIG.
4 is a view showing an embodiment of the engine processing unit 620. As shown in FIG.
5 is a diagram for explaining a setup procedure between the apparatus object 200 and the system 100 and the user terminal 300.
6 is a diagram for explaining a case where a voice or video communication service is performed from a user terminal 300 to a device object 200 as a communication service performed in the system 100 according to the present invention.
7 is a flowchart illustrating a detailed call setup process in the system 100 when a voice or video call service is performed from the user terminal 300 to the device object 200 as a communication service performed in the system 100 according to the present invention. will be.
8 is a diagram illustrating an example of a configuration of the service execution apparatus 600 of the device object 200 when an incoming call is received from the user terminal 300 to the device object 200 as illustrated in FIGS. It shows the interworking procedure.
9 is a diagram illustrating an example of a case where an incoming call is received from the user terminal 300 to the device object 200 as illustrated in FIGS. 6 and 7, It shows the interworking procedure.
10 is a diagram for explaining a case where a voice or video communication service is performed from a device object 200 to a user terminal 300 or another device object 200 as a communication service performed in the system 100 according to the present invention to be.
11 is a block diagram of a system 100 for performing voice or video call service from a device object 200 to another device object 200 or a user terminal 300 as a communication service performed in the system 100 according to the present invention. The detailed call setup procedure in FIG.
12 is a diagram illustrating a service of the device object 200 when an incoming call is received from the device object 200 to another device object 200 or the user terminal 300 as described in FIGS. 6 shows an internal interlocking procedure of the execution device 600. [
13 is a diagram illustrating a service of the device object 200 when an incoming video call is received from the device object 200 to another device object 200 or the user terminal 300 as illustrated in FIGS. 6 shows an internal interlocking procedure of the execution device 600. [
FIG. 14 is a diagram for explaining a case where a user terminal 300 performs a voice / video PTT service to a device object 200. FIG.
FIG. 15 is a diagram for explaining a case where a voice / video PTT service is performed from an apparatus object 200 to another apparatus object 200 or a user terminal 300.
16 is a diagram for explaining a case where a text chat service procedure is performed as one of message transmission / reception services from the user terminal 300 to the device object 200. [
17 shows an internal procedure in which a character is received by the device object 200. Fig.
18 shows an internal procedure for transmitting a character using the device object 200. [
FIG. 19 shows a service procedure for text chatting as one of a message sending / receiving service from the device object 200 to the user terminal 300 or another device object 200.
20 shows a service procedure for blocking an external spam against a voice / video call (incoming call) received from the user terminal 300 or the apparatus object 200 to the destination apparatus object 200. FIG.
FIG. 21 shows a service procedure for a received voice / video call and a message when the receiving-side apparatus object 200 is powered off, busy, or no answer.
FIG. 22 shows an example of a screen when applying to an application used by an OTT provider or a communication service provider. FIG. 22 shows an example of a user interface for a call from the user terminal (smart phone) to the device object 200.
FIG. 23 is a diagram for explaining a case where the present invention is applied to an existing messaging application, in which the present invention is applied to a widely used KakaoTalk application.
FIG. 24 shows a case where the present invention is applied to a communication application provided by a communication company (for example, a T telephone of SKY Telecom).
이하, 첨부 도면을 참조하여 본 발명에 의한 실시예를 상세하게 설명하기로 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명에 의한 ID를 이용하여 장치 사물에서의 통신 서비스를 제공하는 시스템(100, 이하 간단히 "통신 서비스 제공 시스템(100)" 또는 "시스템(100)"이라 한다)의 전체 구성을 나타낸 도면이다.1 shows an overall configuration of a system 100 (hereinafter, simply referred to as "communication service providing system 100" or "system 100") for providing a communication service in an apparatus object using an ID according to the present invention FIG.
도 1을 참조하면, 시스템(100)은, 인터넷 등과 같은 네트워크를 통해 장치 사물(200), 사용자 단말기(300), 기타 통신 시스템(400) 및 스팸 차단 시스템(500)과 연결되어 있으며, 장치 사물(200) 간 또한 장치 사물(200)과 사용자 단말기(300) 간에 ID를 기반으로 음성 통화, 영상 통화, 문자 서비스, 채팅 서비스, PTT 서비스 등과 같은 다양한 통신 서비스를 제공한다.1, the system 100 is connected to the device object 200, the user terminal 300, the other communication system 400 and the spam blocking system 500 via a network such as the Internet, And provides various communication services such as voice call, video call, text service, chat service, and PTT service based on the ID between the device object 200 and the user terminal 300 between the device 200 and the user terminal 300.
특히, 본 발명은, 후술하는 바와 같이, 장치 사물(200)에 대해 설정된 ID를 시스템(100)에 저장된 장치 사물(200) 사용자의 계정의 주소록에 등록하고, 시스템(100)은 장치 사물(200) 사용자의 계정의 주소록을 다른 장치 사물(2020) 및 사용자 단말기(300)와 동기화하여 저장하도록 한 상태에서, 장치 사물(200) 및 사용자 단말기(200)는 주소록에 저장된 ID에 기초하여 통화 서비스를 수행할 장치 사물(200) 또는 사용자 단말기(300)를 선택하고, 시스템(100)을 통해 형성된 제어 세션 및 미디어 세션을 통해 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 음성, 영상 또는 메시지 신호를 상기 선택된 장치 사물 또는 사용자 단말기와 송수신함으로써 통화 서비스를 수행하는 것을 특징으로 한다.In particular, the present invention registers the ID set for the device object 200 in the address book of the account of the user of the device object 200 stored in the system 100, and the system 100 registers the device object 200 The device object 200 and the user terminal 200 can receive the call service based on the ID stored in the address book in a state in which the address book of the user's account is synchronized with the other device objects 2020 and the user terminal 300 Selects a device object (200) or a user terminal (300) to be performed, and transmits a voice, image, or message signal for a voice or video call service and a message transmission / reception service through a control session and a media session formed through the system And performs a call service by transmitting / receiving the selected device object or the user terminal.
여기에서, 장치 사물(Device Things, 200)이라 함은, 통신 기능을 구비하여 네트워크에 연결될 수 있는 모든 종류의 사물(Things)을 의미하며, 이른바 사물 인터넷(Internet of Things, IoT)에서의 사물과 같은 개념이다. 여기에서, 네트워크라 함은 주지된 바와 같이 인터넷, LTE-M, LoRa 등과 같은 IoT 망, LTE와 같은 이동 통신망 등과 같이 종래 알려져 있는 모든 종류를 포함하는 개념이며 장치 사물(200)은 이러한 네트워크에 연결되어 각종 데이터를 송수신할 수 있는 디바이스(Device)를 의미하는 것으로 정의한다. 예컨대, 장치 사물(200)은 IoT(Internet of Things) 디바이스 또는 AI(Artificial Intelligence) 디바이스와 같은 것일 수 있다. Here, the term 'Device Things' refers to all kinds of things that can be connected to a network by having a communication function. The term 'Device Things' refers to things in the so-called Internet of Things (IOT) The same concept. Here, the network is a concept including all kinds known in the past such as Internet, IoT network such as LTE-M and LoRa, mobile communication network such as LTE, etc., and the device object 200 is connected to such a network (Device) capable of transmitting and receiving various data. For example, the device object 200 may be an Internet of Things (IoT) device or an AI (Artificial Intelligence) device.
IoT 디바이스(IoT(Internet of Things) Device)는 주지된 바와 같이, IoT(Internet of Things), 즉, 사물 인터넷에 기반하여 데이터를 송수신할 수 있는 디바이스를 의미하며, 본 발명에 있어서의 IoT 디바이스는, 음성 통화, 영상 통화, 문자 서비스, 채팅 서비스, PTT 서비스 등과 같은 본 발명에 의한 다양한 통신 서비스를 위한 데이터를 시스템(100)을 통해 송수신할 수 있는 장치이다. 이러한 IoT 디바이스는, TV, 냉장고, 스피커 등과 같이 별도의 장치로 구현하거나 예컨대 스피커, 확성기, 마이크, 카메라, 디스플레이 등과 같은 장치에 연동시키거나 이러한 장치들에 내장형으로 포함되도록 할 수 있다. 또한, 드론(Drone) 등과 같은 소형 무인 항공기에 부착하거나 내장형으로 포함되도록 할 수도 있다.As is well known, an IoT device (Internet of Things) device means a device capable of transmitting and receiving data based on the Internet of Things (IoT), that is, the Internet of things, and the IoT device And can transmit and receive data for various communication services according to the present invention through the system 100 such as voice call, video call, text service, chat service, PTT service, and the like. Such an IoT device may be implemented as a separate device such as a TV, a refrigerator, a speaker, or the like, or may be incorporated into a device such as a speaker, a loudspeaker, a microphone, a camera, a display, or the like. It may also be attached to or embedded in a small unmanned aerial vehicle such as a drone.
한편, AI 디바이스(AI(Artificial Intelligence) Device)는 인공 지능(AI)에 기반하여 예컨대 음성을 인식하거나 동작을 인식함으로써 사용자의 명령을 실행하거나 정보를 제공할 수 있는 기능을 포함하는 IoT 디바이스를 의미하는 것으로 정의한다. 최근 AI 디바이스로서 인공 지능에 기반하여 음성 인식을 수행하는 스피커가 제안되고 있다. 이러한 AI 디바이스는 디바이스 내에 인공 지능 모듈을 포함하거나 외부의 인공 지능 서버를 통해 인공 지능 기능을 수행한다.On the other hand, an AI device (AI (Artificial Intelligence) Device) means an IoT device including a function of executing a user's command or providing information by recognizing a voice or recognizing an operation based on an AI . Speakers that perform speech recognition based on artificial intelligence have recently been proposed as AI devices. These AI devices include artificial intelligence modules within the device or perform artificial intelligence functions through an external artificial intelligence server.
이러한 IoT 디바이스 또는 AI 디바이스 자체는 종래 기술에 의해 알려져 있는 것이므로 이들에 대한 상세 설명은 생략한다.Since the IoT device or the AI device itself is known from the prior art, detailed description thereof will be omitted.
한편, 사용자 단말기(300)는, 종래 알려져 있는 스마트폰 또는 컴퓨터로서, 사용자 단말기(300)와 장치 사물(200)은 본 발명을 수행하기 위한 서비스 수행 장치(600)를 각각 포함한다. 여기서, 서비스 수행 장치(600)는 어플리케이션(application)의 형태로 구현된다. 서비스 수행 장치(600)는 도 3을 참조하여 아래에서 설명한다.Meanwhile, the user terminal 300 is a known smart phone or a computer, and the user terminal 300 and the device object 200 each include a service performing device 600 for carrying out the present invention. Here, the service performing apparatus 600 is implemented in the form of an application. The service performing apparatus 600 will be described below with reference to Fig.
기타 통신 시스템(400)은 기존의 유무선 통신망이 아닌 인터넷에 기반하여 어플리케이션 등에 의해 통신 서비스를 제공하는 시스템을 말한다. 이러한 기타 통신 시스템(400)은 예컨대 카카오톡, 라인, T 전화 시스템 등과 같은 메시징 또는 통화 서비스 어플리케이션을 이용하여 인터넷에 기반한 통신 서비스를 제공한다. 기타 통신 시스템(400)은 인터넷을 통해 시스템(100)과 연결되고, 시스템(100)은 기타 통신 시스템(400)과 연동하여 본 발명에 의한 다양한 통신 서비스를 기타 통신 시스템(400)에서 제공되는 어플리케이션을 이용하여 제공할 수 있다.The other communication system 400 refers to a system that provides a communication service based on the Internet rather than an existing wired / wireless communication network by an application or the like. These other communication systems 400 provide Internet based communication services using messaging or call service applications such as, for example, KakaoTalk, line, T phone systems, and the like. The other communication system 400 is connected to the system 100 through the Internet and the system 100 is connected to the other communication system 400 to transmit various communication services according to the present invention to an application Can be provided.
후술하는 바와 같이, 장치 사물(200)이 새로 등록될 때 기타 통신 시스템(400)의 어플리케이션과 연동하도록 함으로써 장치 사물(200)에 대해 설정된 ID를 기타 통신 시스템(400)에 저장된 장치 사물(200) 사용자의 계정의 주소록에 등록하도록 할 수 있고, 이에 의해 장치 사물(200)은 기타 통신 시스템(400)의 어플리케이션의 사용자의 주소록에 자동으로 동기화될 수 있다.When the device object 200 is newly registered, the ID of the device object 200 is synchronized with the application of the other communication system 400, so that the device ID 200 stored in the device object 200 stored in the other communication system 400, The device object 200 can be automatically registered in the address book of the user's account so that the device object 200 can be automatically synchronized with the address book of the user of the application of the other communication system 400. [
스팸 차단 시스템(500)은 스팸 정보(또는 보이스 피싱 정보)를 저장하고 있으며 시스템(100)으로부터의 스팸 질의 요청 신호를 수신하여 스팸 여부(또는 보이스 피싱 여부)를 판단하여 그 결과를 시스템(100)으로 전송하는 기능을 수행한다. 여기서, 스팸 정보는 통화 서비스, 문자 서비스가 이루어질 때 발신자의 ID, 이름 등과 같은 정보에 대응하여 기존의 스팸 신고 여부에 따른 데이터를 축적하여 저장해 둔 데이터베이스를 의미하며, 스팸 차단 시스템(500)은 시스템(100)으로부터 스팸 질의 요청 신호에 포함된 정보를 데이터베이스에서 조회하여 스팸 여부를 판단하고 그 결과를 시스템(100)으로 전송하는 기능을 수행한다.The spam protection system 500 stores spam information (or voice phishing information), receives a spam query request signal from the system 100 to determine whether the spam is spam (or whether voice phishing) As shown in FIG. Here, the spam information refers to a database in which data corresponding to existing spam reports are accumulated and stored in response to information such as caller ID, name, etc., when a call service or text service is performed, The information included in the spam query request signal is inquired from the database 100 to determine whether the spam is spam, and the result is transmitted to the system 100.
도 2는 시스템(100)의 내부 구성을 나타낸 도면이다.2 is a diagram showing an internal configuration of the system 100. As shown in FIG.
도 2를 참조하면, 시스템(100)은, 서비스 서버(110) 및 미디어 서버(120)를 포함한다. 또한, 시스템(100)은 MGF 서버(130), OAM 서버(140) 및 DB 서버(150)를 포함할 수 있다.Referring to FIG. 2, the system 100 includes a service server 110 and a media server 120. In addition, the system 100 may include an MGF server 130, an OAM server 140, and a DB server 150.
서비스 서버(110)는, 장치 사물(200) 및 사용자 단말기(300)와 네트워크를 통해 결합하여 장치 사물(200) 사이 또는 장치 사물(200)과 사용자 단말기(300) 사이에서 제어 세션을 형성하고, 제어 세션을 통한 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 각종 제어 신호를 송수신함으로써 장치 사물(200) 사이 또는 장치 사물(200)과 사용자 단말기(300) 사이에서의 다양한 호 처리 기능을 수행한다.The service server 110 forms a control session between the device object 200 and the device object 200 and the user terminal 300 through a network connection with the device object 200 and the user terminal 300, And performs various call processing functions between the device objects 200 or between the device object 200 and the user terminal 300 by transmitting / receiving various control signals for a voice or video call service and a message transmission / reception service through a control session.
구체적으로, 서비스 서버(110)는, 어플리케이션 서버(AS(Application Server), 111) 및 SCF 서버(Session Control Function Server, 112)를 포함한다.Specifically, the service server 110 includes an application server (AS) 111 and an SCF server (Session Control Function Server) 112.
어플리케이션 서버(111)와 SCF 서버(112)는 미디어 서버(120)와 함께 연동하여 장치 사물(200) 사이 또는 장치 사물(200)과 사용자 단말기(300) 사이에서 제어 세션을 형성하고, 제어 세션을 통해 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 제어 신호를 송수신함으로써 이들간의 다양한 호 처리 기능을 수행하고, 미디어 서버(120)를 통해 미디어 세션이 형성될 수 있도록 하는 기능을 수행한다.The application server 111 and the SCF server 112 form a control session between the device objects 200 or between the device object 200 and the user terminal 300 in cooperation with the media server 120, And performs a variety of call processing functions among them by transmitting / receiving a control signal for a voice or video call service and a message transmission / reception service, so that a media session can be formed through the media server 120.
미디어 서버(120)는 장치 사물(200) 및 사용자 단말기(300)와 네트워크를 통해 결합하여 장치 사물(200) 사이 또는 장치 사물(200)과 사용자 단말기(300) 사이에서 미디어 세션을 형성하고 미디어 세션을 통해 장치 사물(200) 사이 또는 장치 사물(200)과 사용자 단말기(300) 사이에서 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 음성, 영상 또는 메시지 신호를 송수신한다.The media server 120 is connected to the device object 200 and the user terminal 300 through a network to form a media session between the device objects 200 or between the device object 200 and the user terminal 300, Video or message signals for voice or video call services and message transmission / reception services between the device objects 200 or between the device objects 200 and the user terminal 300 via the network 200. [
MGF 서버(Media Gateway Function Server, 130)는 미디어 세션을 통해 송수신되는 음성, 영상 또는 메시지 신호를 녹음, 녹화하는 기능을 수행한다.An MGF server (Media Gateway Function Server) 130 records and records voice, video or message signals transmitted and received through a media session.
OAM 서버(Operation & Management Server, 140)는 본 발명에 의한 서비스를 전체적으로 운용하고 관리하는 기능을 담당한다.The OAM server (Operation & Management Server) 140 manages the overall operation and management of the service according to the present invention.
DB 서버(Database Server, 150)는 본 발명에 의한 서비스를 수행하기 위해 필요한 각종 데이터를 저장하는 수단이다.The DB server 150 is a means for storing various data necessary for performing the service according to the present invention.
도 3은 장치 사물(200)과 사용자 단말기(300)에 포함된 서비스 수행 장치(600)의 내부 구성을 나타낸 도면이다.3 is a diagram illustrating an internal configuration of an apparatus object 200 and a service performing apparatus 600 included in the user terminal 300. As shown in FIG.
서비스 수행 장치(600)는 어플리케이션의 형태로 구현되어 장치 사물(200) 및 사용자 단말기(300)에 설치되며, 도 3에 나타낸 바와 같이, 어플리케이션 관리부(610)와 엔진 처리부(620)를 포함한다.The service performing apparatus 600 is installed in the apparatus object 200 and the user terminal 300 in the form of an application and includes an application managing unit 610 and an engine processing unit 620 as shown in FIG.
어플리케이션 관리부(610)는 어플리케이션으로 구현된 서비스 수행 장치(600)를 전체적으로 제어하고 관리하는 기능을 수행하며, 이를 위하여 도 3에 나타낸 바와 같이 서비스 제어부(611), TTS/오디오 플레이어(612), 음성인식부(613) 및 데이터 저장부(614)를 포함한다.3, the application management unit 610 includes a service control unit 611, a TTS / audio player 612, a voice control unit 610, A recognition unit 613, and a data storage unit 614.
서비스 제어부(611)는 다른 구성 요소들과 연동하여 서비스 수행 장치(600)의 실행을 위한 전체적인 시나리오 및 로직(Logic)을 제어하여 본 발명에 의한 서비스가 장치 사물(200) 및 사용자 단말기(300)에서 수행될 수 있도록 하는 기능을 담당한다.The service control unit 611 controls the entire scenario and logic for execution of the service performing apparatus 600 in cooperation with other components so that the service according to the present invention can be performed by the apparatus object 200 and the user terminal 300. [ To be performed in the < / RTI >
TTS/오디오 플레이어(612) 텍스트 정보를 음성 신호로 변환하여 출력하는 기능과, 저장되어 있는 음성 파일을 재생하는 기능을 수행한다.A function of converting the TTS / audio player 612 text information into a voice signal and outputting the voice information, and a function of reproducing the stored voice file.
음성인식부(613)는 사용자로부터 입력되는 음성을 인식하고 입력된 음성을 텍스트 정보로 변환하는 기능을 수행한다.The speech recognition unit 613 recognizes the speech inputted from the user and converts the inputted speech into text information.
데이터 저장부(614)는 음성 녹음 파일, 연락처 및 환경 설정값 등을 저장 및 관리하는 기능을 담당한다.The data storage unit 614 stores and manages voice recording files, contacts, environment setting values, and the like.
한편, 엔진 처리부(620)는 프로토콜 엔진(621) 및 미디어 엔진(622)를 포함한다.On the other hand, the engine processing unit 620 includes a protocol engine 621 and a media engine 622.
프로토콜 엔진(621)은 시스템(100) 및 서비스 제어부(611)와 연동하여 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 프로토콜 제어 기능을 수행한다.The protocol engine 621 performs a protocol control function for a voice or video call service and a message transmission / reception service in cooperation with the system 100 and the service control unit 611.
미디어 엔진(622)는 서비스 제어부(611)와 연동하여 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 입출력 장치 제어 및 음성, 영상 또는 메시지 신호의 미디어 세션을 통한 송수신 프로토콜을 제어하는 기능을 수행한다.The media engine 622 controls an input / output device control for a voice or video call service, a message transmission / reception service, and a transmission / reception protocol through a media session of voice, video or message signals in cooperation with the service control unit 611.
도 4는 엔진 처리부(620)의 일실시예를 나타낸 도면이다.4 is a view showing an embodiment of the engine processing unit 620. As shown in FIG.
도 4를 참조하면, 프로토콜 엔진(621)은, 어플리케이션 인터페이스(Application Interface), 세션 매니저(Session Manager), 챗 파서/생성기(Chat Parser/Generator), 프로토콜 파서/생성기(Protocol Parser/Generator), 연결 매니저(Connection Manager) 및 트랜스포트(Transport(TCP/TLS)) 등으로 구성된다.4, the protocol engine 621 includes an Application Interface, a Session Manager, a Chat Parser / Generator, a Protocol Parser / Generator, A manager (Connection Manager) and a transport (Transport (TCP / TLS)).
어플리케이션 인터페이스(Application Interface)는 서비스 제어부(611) 및 세션 매니저(Session manager)와 연동하며, API 제공 및 이벤트를 전달하는 역할을 수행하며, 세션 매니저(Session Manager)는 미디어 세션을 통해 형성되는 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 각각의 세션에 대한 상태를 관리하는 역할을 수행한다.The application interface is interlocked with the service control unit 611 and the session manager and serves to provide the API and deliver the event. The Session Manager is a voice or data And manages the state of each session for video call service and message transmission / reception service.
프로토콜 파서/생성기(Protocol Parser/Generator)는 본 발명에 있어서의 장치 사물(200), 사용자 단말기(300)와 시스템(100)간의 단말-서버 시그널링 연동 규격을 준수하는 메시지 생성 및 분석 처리 역할을 수행하며, 챗 파서/생성기(Chat Parser/Generator)는 본 발명에 있어서의 단말-서버 메시지 송수신 서비스 연동 규격을 준수하는 메시지 생성 및 분석 처리를 수행한다.The protocol parser / generator plays a role of message generation and analysis processing that conforms to the device object 200, the terminal-server signaling interworking standard between the user terminal 300 and the system 100 in the present invention And a chat parser / generator performs message generation and analysis processing that conforms to the interworking standard of the terminal-server message transmission / reception service according to the present invention.
연결 매니저(Connection Manager)는 시스템(100)과의 제어 세션의 연결 상태를 관리하는 기능을 수행하고, 트랜스포트(Transport)는 TCP(Transmission Control Protocol)/TLS(Transport Layer Security) 기반 서버 연동 통로 역할을 수행한다.The Connection Manager manages the connection state of the control session with the system 100 and the Transport plays a role of a Transmission Control Protocol (TCP) / Transport Layer Security (TLS) .
한편, 미디어 엔진(622)는 비디오 처리부, 오디오 처리부 및 MBCP(Media BurstControl Protocol) 처리부로 구성되며, 이들 각각에 공통으로 사용되는 RTP/RTCP Source는 RTP/RTCP 수신 컴포넌트이며, RTP/RTCP Sink는 RTP(Realtime Transport Protocol)/RTCP(RTP Control Protocol) 송신 컴포넌트이며, Jitter Buffer는 RTP 수신 Jitter를 보정하는 기능을 수행한다.The RTP / RTCP Source is a RTP / RTCP receiving component, and the RTP / RTCP sink is a RTP / RTCP receiving component. The RTP / (Realtime Transport Protocol) / RTCP (RTP Control Protocol) transmission component, and the jitter buffer functions to correct the RTP reception jitter.
비디오 처리부는, 비디오(영상)을 처리하기 위해서 이미지 포맷 변경(미디어엔진 <-> 입출력 포맷) 역할을 수행하는 Color Space Converter, 카메라 영상에 대해 회전 확대 잘라내기 등을 처리하는 Image Process, H.264(또는 VP8)에 대한 Encoding/Decoding을 처리하는 Video Encoder/Decoder, 영상 입력을 처리하는 Camera Source, 영상 출력을 처리하는 Video Sink를 포함한다.The video processing unit includes a color space converter that performs an image format change (media engine <-> input / output format) to process video (image), an image process that processes rotation enlargement / A Video Encoder / Decoder for processing Encoding / Decoding for the video signal (or VP8), a Camera Source for processing video input, and a Video Sink for processing video output.
오디오 처리부는, 오디오를 처리하기 위해서 음성 패킷 유실 및 묵음 상태에 대한 오디오 출력 처리를 수행하는 CNG(Comport Noise Generation) 및 PLC(Packet Loss Concealment), 마이크 에코 제거, 음량 보정, 노이즈 제거 등의 오디오 처리를 하는 AEC(Acoustic Echo Cancellation), AGC(Automaticgain control) 및 VAD(Voice activity detection), 마이크 음성 대신 별도 음원(사이렌 등)을 송출하는 Selector, 음성 Opus/AMR/PCM 등 코덱 암호화/복호화 기능을 수행하는 AudioEncoder/Decoder, 음성 입력장치인 AudioSource, 음성 출력 장치인 AudioSink로 구성되어 진다.The audio processing unit includes an audio processing unit such as a CNG (Comport Noise Generation) and a PLC (Packet Loss Concealment) for performing audio output processing on audio packet loss and silence status in order to process audio, a microphone echo elimination, a volume correction, AEC (Acoustic Echo Cancellation) An audio encoder / decoder that performs codec encryption / decryption functions such as automatic gain control (AGC) and voice activity detection (VAD), a selector that sends a separate sound source (siren, etc.) instead of a microphone voice, a speech Opus / AMR / PCM AudioSource, and AudioSink, which are audio output devices.
또한 PTT 서비스를 처리하기 위한 기능중 MBCP(Media BurstControl Protocol) 처리부는, 응용 UI Interface를 통하여 이벤트를 수신하여, MBCP 메시지의 송수신 및 상태 제어를 위한 MBCP State Machine 및 RTCP Source/Sink를 포함한다.Among the functions for processing the PTT service, the MBCP (Media Burst Control Protocol) processing unit includes an MBCP state machine and an RTCP Source / Sink for receiving an event via the application UI interface and transmitting / receiving and controlling the state of the MBCP message.
다음으로, 도 5 이하를 참조하여, 시스템(100)을 통해 장치 사물(200) 사이 또는 장치 사물(200)과 사용자 단말기(300) 사이에서 이루어지는 통화 서비스의 동작을 상세하게 설명하기로 한다.The operation of the call service between the device objects 200 through the system 100 or between the device object 200 and the user terminal 300 will now be described in detail with reference to FIG.
도 5는 장치 사물(200)과 시스템(100) 및 사용자 단말기(300) 간의 셋업 절차를 설명하기 위한 도면이다.5 is a diagram for explaining a setup procedure between the apparatus object 200 and the system 100 and the user terminal 300.
도 5를 참조하여 설명하면 다음과 같다.Referring to FIG. 5, the following will be described.
1. 장치 사물(200)의 서비스 수행 장치(600)가 구동되어 유무선 인터넷에 연결되면 장치 사물(200)은 자신의 서비스 제어 접속 정보를 네트워크에 브로드캐스팅을 시작한다.1. When the service performing device 600 of the device object 200 is driven and connected to the wired and wireless Internet, the device object 200 starts broadcasting its service control access information to the network.
2. 장치 사물(200)을 셋업하기 위한 별도의 설정 장치(예컨대, 사용자의 스마트폰)는 장치 사물(200)의 서비스 수행 장치(600)를 구동하여 장치 사물(200)을 검색하고 장치 사물(200)이 브로드캐스팅하는 메시지(서비스 제어 접속 정보)를 수신한 후 장치 사물(200)의 서비스 제어 접속 정보를 확인한다(Discovery 절차). 2. A separate setting device (e.g., a user's smartphone) for setting up the device object 200 drives the service performing device 600 of the device object 200 to search for the device object 200, (Discovery procedure) after receiving a message (service control connection information) broadcast by the device 200 (FIG.
3. 서비스 제어 접속 정보를 확인하면, 설정 장치는 장치 사물(200)에 접속하여 장치 사물(200)이 본 발명에 의한 서비스 등록을 위해 필요한 ID 및 암호와 기타 필요한 정보를 설정한다. 기타 필요한 정보로서는 후술하는 허락할 친구 정보와 시스템(100)으로의 접속을 위한 접속 정보를 포함한다.3. Upon confirming the service control connection information, the setting device connects to the device object 200 so that the device object 200 sets an ID and a password necessary for service registration according to the present invention and other necessary information. Other necessary information includes friend information to be described later and connection information for connection to the system 100.
4. 장치 사물(200)에 대한 정보 설정이 완료되면, 설정 장치는 장치 사물(200)의 사용자 계정에 장치 사물(200)이 추가되었음을 알리고 장치 사물(200)과의 통신 서비스를 허락할 친구 정보를 저장하기 위해 시스템(100)과 주소록 동기화를 실행한다. 여기에서, 허락할 친구 정보란 장치 사물(200)의 사용자 계정의 주소록에 있는 사람들 중에서 장치 사물(200)과의 본 발명에 의한 통화 서비스를 할 수 있도록 허락하는 사람들을 의미하며 이는 보안 기능을 위한 것이다. 4. When the setting of information on the device object 200 is completed, the setting device notifies the user account of the device object 200 that the device object 200 has been added, and notifies the friend information Address book synchronization with the system 100 to store the address book. Here, the friend information to be allowed means the person who permits to perform the call service according to the present invention with the device object 200 among the persons in the address book of the user account of the device object 200, will be.
5. 한편, 장치 사물(200)은 저장된 접속 정보를 이용하여 시스템(100)에 접속하여 등록 절차를 완료하고 시스템(100)에 저장되어 있는 사용자의 주소록을 시스템(100)과 동기화하여 장치 사물(200)내에 저장한다.5. The device object 200 accesses the system 100 using the stored connection information and completes the registration procedure and synchronizes the address book of the user stored in the system 100 with the system 100, 200).
6. 등록된 장치 사물(200) 사용자와 허락된 친구 관계인 다른 장치 사물(200) 또는 사용자 단말기(300)에 대해 자동으로 또는 수동으로 주소록을 동기화하여 장치 사물(200)을 주소록에 추가한다.6. Adds the device object 200 to the address book by automatically or manually synchronizing the address book with respect to the other device object 200 or the user terminal 300, which is a friend relationship with the registered device object 200 user.
이러한 과정에 의해 장치 사물(200) 사용자와 허락된 친구 관계인 사용자들(다른 장치 사물(200), 사용자 단말기(300) 등)과 네트워크를 통해 ID를 기반으로 연결될 수 있으며, 이때부터 자동으로 장치 사물(200)과 시스템(100)을 통한 본 발명에 의한 통신 서비스를 제공할 수 있다.Through this process, the user can be connected based on the ID via the network with the user of the device object 200 and the user (the other device object 200, the user terminal 300, etc.) that is allowed to be friends. It is possible to provide the communication service according to the present invention through the system 200 and the system 100.
도 5에서 시스템(100)에서 수행되는 절차는 서비스 서버(110), OAM 서버(140) 및 DB 서버(150)를 통해 이루어진다.The procedure performed in the system 100 in FIG. 5 is performed through the service server 110, the OAM server 140, and the DB server 150.
도 6은 본 발명에 의한 시스템(100)에서 수행되는 통신 서비스로서 사용자 단말기(300)에서 장치 사물(200)로 음성 또는 영상 통화 서비스를 수행하는 경우를 설명하기 위한 도면이다.6 is a diagram for explaining a case where a voice or video communication service is performed from a user terminal 300 to a device object 200 as a communication service performed in the system 100 according to the present invention.
도 6을 참조하여 설명하면 다음과 같다.Referring to FIG. 6, the following will be described.
1. 우선, 사용자 단말기(300)의 사용자는 사용자 단말기(300)에 저장되어 있는 연락처에서 앞서 설명한 바와 같이 등록되어 있는 장치 사물(200)의 ID를 선택하고 해당 ID에 상응하는 장치 사물(200)과 음성 또는 영상 통화를 수행하기 위해 해당 ID를 포함하는 음성 또는 영상 통화 요청 신호를 시스템(100)으로 전송한다.1. First, the user of the user terminal 300 selects the ID of the device object 200 registered as described above in the contact stored in the user terminal 300 and selects the device object 200 corresponding to the ID, And transmits a voice or video call request signal including the corresponding ID to the system 100 in order to perform a voice or video call.
2. 시스템(100)은 음성 또는 영상 통화 요청 신호를 수신하면, 음성 또는 영상 통화 요청 신호에 포함된 해당 장치 사물(200)의 ID를 확인하고, 해당 장치 사물(200)이 현재 제어 세션을 연결한 상태인지의 여부를 확인하고 제어 세션이 연결된 상태인 경우 통화 요청이 수신되었음을 알리는 메시지를 장치 사물(200)로 전송하고, 제어 세션이 연결되지 않은 상태인 경우 통화 요청이 수신되었음을 알리는 푸쉬 신호(PUSH Notification)을 장치 사물(200)로 전송한다.2. Upon receiving the voice or video call request signal, the system 100 confirms the ID of the device object 200 included in the voice or video call request signal, and the device object 200 connects the current control session If the control session is not connected, a message indicating that a call request has been received is transmitted to the device object 200. If the control session is not connected, a push signal (&quot; PUSH Notification) to the device object 200.
3. 장치 사물(200)은 통화 수신 알림을 음성 또는 영상으로 출력하여 사용자에게 통보한 후 응답 모드에 따라, 자동 응답인 경우 즉시 통화를 수락하고(자동 응답), 수동 응답인 경우 사용자의 음성 명령을 대기한 후 통화를 수락한다. 여기에서, 자동 응답 및 수동 응답은 장치 사물(200)에서 설정해 둘 수 있다.3. The apparatus object 200 outputs a call reception notification as a voice or image and notifies the user of the call reception notification. Then, the apparatus object 200 accepts the call immediately (automatic response) in response to the automatic response, And then accepts the call. Here, the automatic response and the manual response can be set in the apparatus object 200. [
4. 통화가 수락되면, 통화 세션 연결을 위해 장치 사물(200)은 시스템(100)으로 미디어 세션 연결을 실행한다. 만일 제어 세션이 연결되지 않은 경우 제어 세션을 연결한 후 미디어 세션 연결을 실행한다.4. If the call is accepted, the device object 200 for the call session connection performs a media session connection to the system 100. [ If the control session is not connected, the control session is connected and the media session connection is executed.
5. 시스템(100)은 장치 사물(200)과의 미디어 세션 연결 정보를 사용자 단말기(300)로 전송하여 미디어 세션이 연결되었음을 알리고, 사용자 단말기(300)와 장치 사물(200)은 시스템(100)을 통해 형성된 미디어(음성 또는 영상) 세션을 통해 통신 서비스를 수행한다.5. The system 100 transmits media session connection information with the device object 200 to the user terminal 300 to notify that the media session is connected and the user terminal 300 and the device object 200 to the system 100, (Voice or video) session formed through the network.
도 7은 본 발명에 의한 시스템(100)에서 수행되는 통신 서비스로서 사용자 단말기(300)에서 장치 사물(200)로 음성 또는 영상 통화 서비스를 수행할 때 시스템(100)에서의 상세 호 설정 과정을 나타낸 것이다.7 is a flowchart illustrating a detailed call setup process in the system 100 when a voice or video call service is performed from the user terminal 300 to the device object 200 as a communication service performed in the system 100 according to the present invention. will be.
도 7을 참조하면, 사용자 단말기(300)의 사용자는 사용자 단말기(300)에 어플리케이션 형태로 구현되어 있는 서비스 수행 장치(600)를 구동시켜서 음성 또는 영상 통화를 수행할 장치 사물(200)의 ID를 선택하고 해당 ID를 포함하는 음성 또는 영상 통화 요청 신호를 시스템(100)으로 전송한다(S100). 이 때, 사용자 단말기(300)와 장치 사물(200)은 모두 시스템(100)과 제어 세션이 미리 연결되어 있는 것으로 가정한다. 만약, 제어 세션이 연력되어 있지 않다면 제어 세션을 먼저 연결한 후 다음 절차를 진행한다.7, the user of the user terminal 300 operates the service performing device 600 implemented in the form of an application in the user terminal 300 to obtain the ID of the device object 200 to perform a voice or video call And transmits a voice or video call request signal including the corresponding ID to the system 100 (S100). At this time, it is assumed that both the user terminal 300 and the device object 200 are connected to the system 100 in advance of a control session. If the control session is not connected, connect the control session first and proceed to the next step.
시스템(100)의 어플리케이션 서버(AS,111)는 사용자 단말기(300)로부터의 통화 요청 신호를 수신하여 1:1 통화를 위한 리소스를 할당하고, 통화 ID를 생성하여 사용자 단말기(300)로 응답한다(S101).The application server AS 111 of the system 100 receives a call request signal from the user terminal 300, allocates resources for 1: 1 call, generates a call ID, and responds to the user terminal 300 (S101).
사용자 단말기(300)의 서비스 수행 장치(600)는 통화 ID를 수신하고 SCF 서버(112)로 통화 요청 신호를 전송한다(S102).The service performing apparatus 600 of the user terminal 300 receives the call ID and transmits a call request signal to the SCF server 112 (S102).
SCF 서버(112)는 유효한 서비스 수행 장치(600)로부터의 요청인지를 확인하고, 어플리케이션 서버(111)로 통화 요청 신호를 전달한다(S103).The SCF server 112 confirms whether the request is from a valid service performing apparatus 600, and transmits a call request signal to the application server 111 (S103).
어플리케이션 서버(111)는 사용자 단말기(300)와 통신할 자원을 할당하기 위해 자원 할당 요청 신호(SIP/INVITE 메시지)를 미디어 서버(120)로 전송한다(S104).The application server 111 transmits a resource allocation request signal (SIP / INVITE message) to the media server 120 to allocate resources to communicate with the user terminal 300 (S104).
미디어 서버(120)는 자원 할당 요청 신호에 따라 미디어 자원을 할당하고 자원 할당 응답 신호(SIP/200 OK)를 어플리케이션 서버(111)로 전송하고(S105), 어플리케이션 서버(111)는 SIP/INVITE 트랜잭션 완료를 위해 SIP/ACK 메시지를 미디어 서버(120)로 전송한다(S106).The media server 120 allocates a media resource according to a resource allocation request signal and transmits a resource allocation response signal (SIP / 200 OK) to the application server 111 (S105). The application server 111 performs a SIP / INVITE transaction And transmits a SIP / ACK message to the media server 120 for completion (S106).
그리고, 어플리케이션 서버(111)는, 미디어 서버(120)에서 수신한 미디어 자원 정보를 SCF 서버(112)로 전송한다(S107).Then, the application server 111 transmits the media resource information received by the media server 120 to the SCF server 112 (S107).
SCF 서버(112)는 미디어 자원 정보를 수신하고 통화를 요청한 사용자 단말기(300)로 미디어 자원 정보를 포함하는 자원 할당 성공 신호(TCP/OK)를 전달한다(S108).The SCF server 112 receives the media resource information and transmits a resource allocation success signal (TCP / OK) including media resource information to the user terminal 300 requesting the call (S108).
사용자 단말기(300)의 서비스 수행 장치(600)는 SCF 서버(112)로부터 수신한 미디어 자원 정보에 기초하여 음성/영상 미디어 송수신을 위한 미디어 세션(RTP)을 미디어 서버(120)와 형성한다(S109).The service performing apparatus 600 of the user terminal 300 forms a media session (RTP) for audio / video media transmission / reception with the media server 120 based on the media resource information received from the SCF server 112 (S109 ).
한편, 어플리케이션 서버(111)는 사용자 단말기(300)가 통화를 요청한 통화 상대방인 장치 사물(200)의 정보(ID)를 확인하고 장치 사물(200)로 통화 알림 기능을 수행하는데, 이는 다음과 같이 이루어진다.Meanwhile, the application server 111 confirms the information (ID) of the device object 200, which is the communication partner with which the user terminal 300 requested the call, and performs a call notification function with the device object 200, .
어플리케이션 서버(111)는 장치 사물(200)에 통화 알림 메시지를 전달하기 위해 SCF 서버(112)로 통화 요청 메시지(TCP/call notify)를 전송하고(S110), SCF 서버(112)는 장치 사물(200)로 사용자 단말기(300)로부터 통화 요청이 이루어졌음을 알리는 통화 요청 메시지(TCP/call notify)를 전송한다(S111).The application server 111 transmits a call request message (TCP / call notify) to the SCF server 112 in order to deliver the call notification message to the device object 200 (S110), and the SCF server 112 transmits the call notification message 200) transmits a call request message (TCP / call notify) informing that the call request has been made from the user terminal 300 (S111).
장치 사물(200)은 설정에 따라 자동 수락하거나 수동으로 전화 요청을 수락하고(S112), 장치 사물(200)은 SCF 서버(112)로 통화 수락 메시지를 전송한다(S113).The device object 200 automatically accepts the call request according to the setting or accepts the call request manually (S112), and the device object 200 transmits a call acceptance message to the SCF server 112 (S113).
SCF 서버(112)는 통화 수락 메시지를 어플리케이션 서버(111)로 전달하고(S114), 어플리케이션 서버(111)는 장치 사물(200)로 미디어 자원을 할당하기 위해 자원 할당 요청 신호(SIP/INVITE 메시지)를 미디어 서버(120)로 전송한다(S115).The SCF server 112 transmits a call admission message to the application server 111 in step S114 and the application server 111 transmits a resource allocation request signal (SIP / INVITE message) to allocate media resources to the device object 200. [ To the media server 120 (S115).
미디어 서버(120)는 자원 할당 요청 신호에 따라 미디어 자원을 할당하고 자원 할당 응답 신호(SIP/200 OK)를 어플리케이션 서버(111)로 전송하고(S116), 어플리케이션 서버(111)는 SIP/INVITE 트랜잭션 완료를 위해 SIP/ACK 메시지를 미디어 서버(120)로 전송한다(S117).The media server 120 allocates a media resource according to a resource allocation request signal and transmits a resource allocation response signal (SIP / 200 OK) to the application server 111 (S116). The application server 111 performs a SIP / INVITE transaction And transmits a SIP / ACK message to the media server 120 for completion (S117).
그리고, 어플리케이션 서버(111)는, 미디어 서버(120)에서 수신한 미디어 자원 정보를 SCF 서버(112)로 전송한다(S118).Then, the application server 111 transmits the media resource information received from the media server 120 to the SCF server 112 (S118).
SCF 서버(112)는 미디어 자원 정보를 수신하고 통화 상대방인 장치 사물(200)로 미디어 자원 정보를 포함하는 자원 할당 성공 신호(TCP/OK)를 전달한다(S119).The SCF server 112 receives the media resource information and transmits a resource allocation success signal (TCP / OK) including the media resource information to the device object 200 as a communication partner (S119).
장치 사물(200)의 서비스 수행 장치(600)는 SCF 서버(112)로부터 수신한 미디어 자원 정보에 기초하여 음성/영상 미디어 송수신을 위한 미디어 세션(RTP)을 미디어 서버(120)와 형성한다(S120).The service performing apparatus 600 of the device object 200 forms a media session (RTP) for audio / video media transmission / reception with the media server 120 based on the media resource information received from the SCF server 112 ).
그리고, 어플리케이션 서버(111)는 장치 사물(200)의 수락 상태를 사용자 단말기(300)로 전달하기 위해 SCF 서버(112)로 알림 이벤트를 전송하고(S121), SCF 서버(112)는 알림 이벤트를 사용자 단말기(300)로 전달한다(S122).The application server 111 transmits a notification event to the SCF server 112 in order to deliver the acceptance status of the device object 200 to the user terminal 300 in step S121. The SCF server 112 transmits a notification event To the user terminal 300 (S122).
이후, 사용자 단말기(300)와 장치 사물(200)은 시스템(100)을 통해 형성된 미디어 세션을 이용하여 음성 또는 영상 통화 서비스를 위한 음성 또는 영상 신호를 송수신함으로써 통화 서비스를 수행한다(S123).Thereafter, the user terminal 300 and the device object 200 perform a call service by transmitting and receiving a voice or video signal for a voice or video call service using a media session formed through the system 100 (S123).
도 8은 도 6 및 도 7에서 설명한 바와 같이 사용자 단말기(300)로부터 장치 사물(200)로 음성 호(Incoming Voice Call)가 착신되었을 때, 장치 사물(200)의 서비스 수행 장치(600)의 내부 연동 절차를 나타낸 것이다.8 is a diagram illustrating an example of a configuration of the service execution apparatus 600 of the device object 200 when an incoming call is received from the user terminal 300 to the device object 200 as illustrated in FIGS. It shows the interworking procedure.
도 8을 참조하여 설명하면 다음과 같다.Referring to FIG. 8, the following will be described.
1. 사용자 단말기(300)에서 발신하고, 시스템(100)을 통해 전송된 음성 통화 요청은 서비스 수행 장치(600)의 프로토콜 엔진(621)에서 수신되어 미디어 엔진(622)에서 사용할 오디오 자원을 할당한 후 어플리케이션 관리부(610)의 서비스 제어부(611)로 전달된다.1. A voice call request originating from the user terminal 300 and transmitted through the system 100 is received by the protocol engine 621 of the service performing apparatus 600 and allocated to the audio engine 622 for use by the media engine 622 And then transferred to the service control unit 611 of the application management unit 610.
2. 서비스 제어부(611)는 음성 통화가 수신되었음을 사용자에게 알린다.2. The service control unit 611 notifies the user that a voice call has been received.
3. 서비스 제어부(611)는 음성 통화를 위해 미디어 엔진(622)의 오디오 모듈을 설정한다.3. The service control unit 611 sets up the audio module of the media engine 622 for voice communication.
4. 서비스 제어부(611)는 음성 통화 연결을 위한 응답 신호를 시스템(100)으로 전송한다.4. The service control unit 611 transmits a response signal to the system 100 for voice call connection.
5. 사용자 단말기(300)로부터의 상대방 음성 신호는 오디오 모듈을 통해 수신되어 스피커로 송출되고, 마이크로 인입되는 장치 사물(200) 사용자의 음성은 오디오 모듈을 통해 시스템(100)을 통해 사용자 단말기(300)로 전송한다.5. The other party's voice signal from the user terminal 300 is received through the audio module and sent out to the speaker and the voice of the user of the device object 200 to be micro-entered is transmitted through the audio module to the user terminal 300 ).
도 9는 도 6 및 도 7에서 설명한 바와 같이 사용자 단말기(300)로부터 장치 사물(200)로 영상 호(Incoming Video Call)가 착신되었을 때, 장치 사물(200)의 서비스 수행 장치(600)의 내부 연동 절차를 나타낸 것이다.9 is a diagram illustrating an example of a case where an incoming call is received from the user terminal 300 to the device object 200 as illustrated in FIGS. 6 and 7, It shows the interworking procedure.
도 9를 참조하여 설명하면 다음과 같다.Referring to FIG. 9, the following will be described.
1. 사용자 단말기(300)에서 발신하고, 시스템(100)을 통해 전송된 영상 통화 요청은 프로토콜 엔진(621)에서 수신되어 미디어 엔진(622)에서 사용할 오디오/비디오 자원을 할당한 후 어플리케이션 관리부(610)의 서비스 제어부(611)로 전달된다.1. A video call request originating from the user terminal 300 and transmitted through the system 100 is received by the protocol engine 621 and allocated to audio / video resources to be used by the media engine 622, To the service control unit 611.
2. 서비스 제어부(611)는영상 통화가 수신되었음을 사용자에게 알린다.2. The service control unit 611 notifies the user that the video call has been received.
3. 서비스 제어부(611)는 영상 통화를 위해 미디어 엔진(622)의 오디오/비디오 모듈을 설정한다. 3. The service control unit 611 sets up the audio / video module of the media engine 622 for video call.
4. 서비스 제어부(611)는 영상 통화 연결을 위한 응답 신호를 시스템(100)으로 전송한다.4. The service control unit 611 transmits a response signal to the system 100 for video call connection.
5. 사용자 단말기(300)로부터의 상대방 음성 신호는 오디오 모듈을 통해 수신되어 스피커로 송출되고, 마이크로 인입되는 장치 사물(200) 사용자의 음성은 오디오 모듈을 통해 시스템(100)을 통해 사용자 단말기(300)로 전송한다. 한편, 사용자 단말기(300)로부터의 상대방 영상 신호는 비디오 모듈을 통해 수신되어 디스플레이부에 표시되고 카메라로 캡쳐되는 장치 사물(200) 사용자의 영상은 비디오 모듈을 통해 시스템(100)을 통해 사용자 단말기(300)로 전송한다.5. The other party's voice signal from the user terminal 300 is received through the audio module and sent out to the speaker and the voice of the user of the device object 200 to be micro-entered is transmitted through the audio module to the user terminal 300 ). On the other hand, the video signal of the user of the device object 200, which is received through the video module and displayed on the display unit and captured by the camera, is transmitted through the video module to the user terminal 300).
도 10은 본 발명에 의한 시스템(100)에서 수행되는 통신 서비스로서 장치 사물(200)에서 사용자 단말기(300) 또는 다른 장치 사물(200)로 음성 또는 영상 통화 서비스를 수행하는 경우를 설명하기 위한 도면이다.10 is a diagram for explaining a case where a voice or video communication service is performed from a device object 200 to a user terminal 300 or another device object 200 as a communication service performed in the system 100 according to the present invention to be.
도 10을 참조하면, 우선 장치 사물(200)의 사용자는 음성 명령을 통해 장치 사물(200)로 음성/영상 통화 발신을 요청한다.Referring to FIG. 10, the user of the device object 200 requests the device object 200 to make a voice / video call using voice commands.
도 10을 참조하여 설명하면 다음과 같다.Referring to FIG. 10, the following will be described.
1. 장치 사물(200)의 사용자는 음성 명령을 통해 장치 사물(200)로 음성/영상 통화 발신을 요청한다.1. A user of the device object 200 requests a voice / video call origination to the device object 200 through a voice command.
2. 장치 사물(200)은 사용자의 음성 명령에서 통화 상대방 이름 또는 아이디를 인식하고 이를 포함하는 통화 발신 요청 신호를 시스템(100)으로 전송한다.2. The device object 200 recognizes the caller's name or ID in a voice command of the user and transmits a call origination request signal including the caller's request command to the system 100. [
3. 시스템(100)은 통화 발신 요청 신호를 수신하여, 통화 상대방인 장치 사물(200) 또는 사용자 단말기(200)의 ID를 조회한다.3. The system 100 receives the call origination request signal and inquires the ID of the device object 200 or the user terminal 200, which is the communication partner.
4. 시스템(100)은 조회된 ID의 장치 사물(200) 또는 사용자 단말기(300)의 제어 세션 연결 상태에 따라 통화 요청 알림 PUSH 또는 메시지를 전송한다.4. The system 100 transmits a call request notification PUSH or a message according to the control session connection status of the device object 200 or the user terminal 300 of the inquired ID.
5. 장치 사물(200) 또는 사용자 단말기(300)는 통화 수신 알림을 사용자에게 통보하고 응답 모드를 수행한 후 통화 세션 연결을 위해 시스템(100)으로 세션 연결을 실행한다. 만일 제어 세션이 연결되지 않은 경우 제어 세션을 연결한 후 세션연결을 실행한다.5. The device object 200 or the user terminal 300 notifies the user of the call reception, performs a response mode, and then performs a session connection to the system 100 for a call session connection. If the control session is not connected, the control session is connected and the session connection is executed.
6. 시스템(100)에서는 장치 사물(200) 또는 사용자 단말기(200)의 세션 연결 정보를 발신측 장치 사물(200)로 전송하여 세션이 연결되었음을 알린다.6. The system 100 transmits session connection information of the device object 200 or the user terminal 200 to the calling device object 200 to notify that the session is connected.
7. 발신측 장치 사물(200)과 착신 장치 사물(200) 또는 사용자 단말기(300)간에 수립된 통화 세션을 통해 통신을 시작한다.7. Start communication via the call session established between the calling party device object 200 and the destination device object 200 or the user terminal 300.
도 11은, 본 발명에 의한 시스템(100)에서 수행되는 통신 서비스로서 장치 사물(200)에서 다른 장치 사물(200) 또는 사용자 단말기(300)로 음성 또는 영상 통화 서비스를 수행할 때 시스템(100)에서의 상세 호 설정 과정을 나타낸 것이다.11 is a block diagram of a system 100 for performing voice or video call service from a device object 200 to another device object 200 or a user terminal 300 as a communication service performed in the system 100 according to the present invention. The detailed call setup procedure in FIG.
도 11을 참조하면, 장치 사물(200)의 사용자는 장치 사물(200)에 어플리케이션 형태로 구현되어 있는 서비스 수행 장치(600)를 구동시켜서 음성 또는 영상 통화를 수행할 상대방 장치 사물(200) 또는 사용자 단말기(300)의 ID를 선택하고 상기 선택된 ID를 포함하는 음성 또는 영상 통화 요청 신호를 시스템(100)으로 전송한다(S200). 이 때, 사용자 단말기(300)와 장치 사물(200)은 모두 시스템(100)과 제어 세션이 미리 연결되어 있는 것으로 가정한다.11, a user of the device object 200 may operate a service performing device 600 implemented in an application form on the device object 200 to allow the user of the partner device 200 or the user 200 Selects an ID of the terminal 300 and transmits a voice or video call request signal including the selected ID to the system 100 (S200). At this time, it is assumed that both the user terminal 300 and the device object 200 are connected to the system 100 in advance of a control session.
시스템(100)의 어플리케이션 서버(AS,111)는 통화 요청 신호를 수신하여 1:1 통화를 위한 리소스를 할당하고, 통화 ID를 생성하여 장치 사물(200)로 응답한다(S101).The application server AS 111 of the system 100 receives a call request signal, allocates resources for 1: 1 call, generates a call ID, and responds to the device object 200 (S101).
장치 사물(200)의 서비스 수행 장치(600)는 통화 ID를 수신하고 SCF 서버(112)로 통화 요청 신호를 전송한다(S202).The service performing device 600 of the device object 200 receives the call ID and transmits a call request signal to the SCF server 112 (S202).
SCF 서버(112)는 유효한 서비스 수행 장치(600)로부터의 요청인지를 확인하고, 어플리케이션 서버(111)로 통화 요청 신호를 전달한다(S203).The SCF server 112 confirms whether the request is from the valid service performing apparatus 600, and transmits a call request signal to the application server 111 (S203).
어플리케이션 서버(111)는 장치 사물(200)과 통신할 자원을 할당하기 위해 자원 할당 요청 신호(SIP/INVITE 메시지)를 미디어 서버(120)로 전송한다(S204).The application server 111 transmits a resource allocation request signal (SIP / INVITE message) to the media server 120 in order to allocate resources to communicate with the device object 200 (S204).
미디어 서버(120)는 자원 할당 요청 신호에 따라 미디어 자원을 할당하고 자원 할당 응답 신호(SIP/200 OK)를 어플리케이션 서버(111)로 전송하고(S205), 어플리케이션 서버(111)는 SIP/INVITE 트랜잭션 완료를 위해 SIP/ACK 메시지를 미디어 서버(120)로 전송한다(S206).The media server 120 allocates a media resource according to a resource allocation request signal and transmits a resource allocation response signal (SIP / 200 OK) to the application server 111 (S205), and the application server 111 performs a SIP / INVITE transaction And transmits a SIP / ACK message to the media server 120 for completion (S206).
그리고, 어플리케이션 서버(111)는, 미디어 서버(120)에서 수신한 미디어 자원 정보를 SCF 서버(112)로 전송한다(S207).Then, the application server 111 transmits the media resource information received by the media server 120 to the SCF server 112 (S207).
SCF 서버(112)는 미디어 자원 정보를 수신하고 통화를 요청한 장치 사물(200)로 미디어 자원 정보를 포함하는 자원 할당 성공 신호(TCP/OK)를 전달한다(S208).The SCF server 112 receives the media resource information and transmits a resource allocation success signal (TCP / OK) including the media resource information to the device object 200 requesting the call (S208).
장치 사물(200)의 서비스 수행 장치(600)는 SCF 서버(112)로부터 수신한 미디어 자원 정보에 기초하여 음성/영상 미디어 송수신을 위한 미디어 세션(RTP)을 미디어 서버(120)와 형성한다(S209).The service performing apparatus 600 of the device object 200 forms a media session (RTP) for audio / video media transmission / reception with the media server 120 based on the media resource information received from the SCF server 112 (S209 ).
한편, 어플리케이션 서버(111)는 장치 사물(200)이 통화를 요청한 통화 상대방인 장치 사물(200) 또는 사용자 단말기(300)의 정보(ID)를 확인하고 해당 장치 사물(200) 또는 사용자 단말기(300)로 통화 알림 기능을 수행하는데, 이는 다음과 같이 이루어진다.Meanwhile, the application server 111 confirms the information (ID) of the device object 200 or the user terminal 300, which is the communication partner with which the device object 200 requested to make a call, and identifies the device object 200 or the user terminal 300 ), Which is performed as follows.
어플리케이션 서버(111)는 통화를 수신하는 상대방 장치 사물(200) 또는 사용자 단말기(300)에 통화 알림 메시지를 전달하기 위해 SCF 서버(112)로 통화 요청 메시지(TCP/call notify)를 전송하고(S210), SCF 서버(112)는 장치 사물(200)로부터 통화 요청이 이루어졌음을 알리는 통화 요청 메시지(TCP/call notify)를 착신 장치 사물(200) 또는 사용자 단말기(300)로 전송한다(S211).The application server 111 transmits a call request message (TCP / call notify) to the SCF server 112 to deliver the call notification message to the counterpart apparatus 200 or the user terminal 300 that receives the call (S210 , The SCF server 112 transmits a call request message (TCP / call notify) indicating that a call request has been made from the device object 200 to the destination apparatus object 200 or the user terminal 300 (S211).
수신측 장치 사물(200) 또는 사용자 단말기(300)는 설정에 따라 자동 수락하거나 수동으로 전화 요청을 수락하고(S212), SCF 서버(112)로 통화 수락 메시지를 전송한다(S213).The receiving-side apparatus object 200 or the user terminal 300 accepts the telephone request automatically according to the setting or accepts the telephone request manually (S212), and transmits a call acceptance message to the SCF server 112 (S213).
SCF 서버(112)는 통화 수락 메시지를 어플리케이션 서버(111)로 전달하고(S214), 어플리케이션 서버(111)는 착신측 장치 사물(200) 또는 사용자 단말기(300)로 미디어 자원을 할당하기 위해 자원 할당 요청 신호(SIP/INVITE 메시지)를 미디어 서버(120)로 전송한다(S215).The SCF server 112 transmits a call admission message to the application server 111 in step S214 and the application server 111 assigns a media resource to the destination apparatus object 200 or the user terminal 300 (SIP / INVITE message) to the media server 120 (S215).
미디어 서버(120)는 자원 할당 요청 신호에 따라 미디어 자원을 할당하고 자원 할당 응답 신호(SIP/200 OK)를 어플리케이션 서버(111)로 전송하고(S216), 어플리케이션 서버(111)는 SIP/INVITE 트랜잭션 완료를 위해 SIP/ACK 메시지를 미디어 서버(120)로 전송한다(S217).The media server 120 allocates a media resource according to a resource allocation request signal and transmits a resource allocation response signal (SIP / 200 OK) to the application server 111 (S216). The application server 111 transmits a SIP / And transmits a SIP / ACK message to the media server 120 for completion (S217).
그리고, 어플리케이션 서버(111)는, 미디어 서버(120)에서 수신한 미디어 자원 정보를 SCF 서버(112)로 전송한다(S218).Then, the application server 111 transmits the media resource information received by the media server 120 to the SCF server 112 (S218).
SCF 서버(112)는 미디어 자원 정보를 수신하고 착신측 장치 사물(200) 또는 사용자 단말기(300)로 미디어 자원 정보를 포함하는 자원 할당 성공 신호(TCP/OK)를 전달한다(S219).The SCF server 112 receives the media resource information and transmits a resource allocation success signal (TCP / OK) including media resource information to the destination apparatus object 200 or the user terminal 300 (S219).
착신측 장치 사물(200) 또는 사용자 단말기(300)의 서비스 수행 장치(600)는 SCF 서버(112)로부터 수신한 미디어 자원 정보에 기초하여 음성/영상 미디어 송수신을 위한 미디어 세션(RTP)을 미디어 서버(120)와 형성한다(S220).The destination apparatus object 200 or the service performing apparatus 600 of the user terminal 300 transmits a media session (RTP) for voice / video media transmission / reception to the media server 300 based on the media resource information received from the SCF server 112 (Step S220).
그리고, 어플리케이션 서버(111)는 착신측 장치 사물(200) 또는 사용자 단말기(300)의 수락 상태를 발신측 장치 사물(200)로 전달하기 위해 SCF 서버(112)로 알림 이벤트를 전송하고(S221), SCF 서버(112)는 알림 이벤트를 사용자 단말기(300)로 전달한다(S222).The application server 111 transmits a notification event to the SCF server 112 in order to deliver the acceptance state of the destination apparatus object 200 or the user terminal 300 to the originating apparatus 200 at step S221, , The SCF server 112 transmits a notification event to the user terminal 300 (S222).
이후, 발신측 장치 사물(200)과 착신측 장치 사물(200) 또는 사용자 단말기(300)는 시스템(100)을 통해 형성된 미디어 세션을 이용하여 음성 또는 영상 통화 서비스를 위한 음성 또는 영상 신호를 송수신함으로써 통화 서비스를 수행한다(S223).Thereafter, the source device 200, the destination device 200, or the user terminal 300 transmits and receives voice or video signals for voice or video call service using the media session formed through the system 100 And performs call service (S223).
도 12는 도 10 및 도 11에서 설명한 바와 같이 장치 사물(200)로부터 다른 장치 사물(200) 또는 사용자 단말기(300)로 음성 호(Incoming Voice Call)가 착신되었을 때, 장치 사물(200)의 서비스 수행 장치(600)의 내부 연동 절차를 나타낸 것이다.12 is a diagram illustrating a service of the device object 200 when an incoming call is received from the device object 200 to another device object 200 or the user terminal 300 as illustrated in FIGS. 6 shows an internal interlocking procedure of the execution device 600. [
도 12를 참조하여 설명하면 다음과 같다.Referring to FIG. 12, the following will be described.
1. 장치 사물(200) 사용자가 음성 명령을 통해 음성 통화 발신을 요청한다. 1. The device object 200 requests a user to make a voice call through a voice command.
2. 장치 사물(200)의 서비스 수행 장치(600)의 서비스 제어부(Application Logics,611)는 사용자로부터의 음성 명령을 수신하고, 장치 사물(200)의 서비스 수행 장치(600) 내에 있는 음성 인식부(613, SR(Speech Recognition))을 통하여 입력된 음성을 판단한다. 만일 인식이 안된 경우는 외부의 별도 음성 인식 서버에게 명령의 종류를 판단 요청한다.2. The service control unit 611 of the service performing apparatus 600 of the apparatus object 200 receives the voice command from the user and transmits the voice command to the voice recognition unit 600 in the service performing apparatus 600 of the apparatus object 200. [ (Speech Recognition) (613). If it is not recognized, it requests the external speech recognition server to judge the kind of command.
3. 서비스 제어부(611)는 음성 인식부(613) 또는 음성 인식 서버로부터의 음성 인식 결과에 의해 프로토콜 엔진(621)의 음성 통화 발신 API를 호출한다.3. The service control unit 611 calls the voice call origination API of the protocol engine 621 according to the speech recognition result from the speech recognition unit 613 or the speech recognition server.
4. 프로토콜 엔진(621)은 미디어 엔진(622)에서 사용할 오디오 자원을 할당한 후 시스템(100)으로 발신 요청을 전달한다. 4. The protocol engine 621 allocates audio resources to be used by the media engine 622 and then forwards the origination request to the system 100. [
5. 시스템(100)에서 전달한 음성통화 응답은 프로토콜 엔진(621)에서 수신되어 서비스 제어부(611)로 전달된다.5. The voice call response transmitted from the system 100 is received by the protocol engine 621 and transmitted to the service control unit 611. [
6. 서비스 제어부(611)는 음성 통화를 위해 미디어 엔진(622)의 오디오 모듈을 설정한다. 6. The service control unit 611 sets up the audio module of the media engine 622 for voice communication.
7. 상대방 음성은 오디오 모듈을 통해 수신되어 스피커로 송출되고 마이크로 인입된 음성은 오디오 모듈을 통해 시스템(100)을 통해 상대방에게 전송한다.7. The other party's voice is received through the audio module and sent to the speaker, and the micro-entered voice is transmitted to the other party through the audio module through the system 100. [
도 13은 도 10 및 도 11에서 설명한 바와 같이 장치 사물(200)로부터 다른 장치 사물(200) 또는 사용자 단말기(300)로 영상 호(Incoming Video Call)가 착신되었을 때, 장치 사물(200)의 서비스 수행 장치(600)의 내부 연동 절차를 나타낸 것이다.13 is a diagram illustrating a service of the device object 200 when an incoming video call is received from the device object 200 to another device object 200 or the user terminal 300 as illustrated in FIGS. 6 shows an internal interlocking procedure of the execution device 600. [
도 13을 참조하여 설명하면 다음과 같다.Referring to FIG. 13, the following will be described.
1. 장치 사물(200)의 사용자가 음성 명령을 통해 영상 통화 발신을 요청한다.1. A user of the device object 200 requests a video call origination through a voice command.
2. 서비스 제어부(611)에서 음성 명령을 수신하여, 장치 사물(200)의 서비스 수행 장치(600) 내에 있는 음성 인식부(SR(Speech Recognition),613)을 통하여 입력된 음성을 판단하고, 만일 음성 인식부(613)에서 인식이 안된 경우는 외부의 별도 음성 인식 서버에게 명령의 종류를 판단 요청한다.2. The service control unit 611 receives the voice command and judges the voice inputted through the speech recognition unit (SR) 613 in the service performing apparatus 600 of the device object 200, If the voice recognition unit 613 does not recognize the type of the command, the external voice recognition server requests the external voice recognition server to determine the type of the command.
3. 음성 인식부(613)의 인식 결과 또는 음성 인식 서버의 응답에 의해 서비스 제어부(611)는 프로토콜 엔진(621)의 영상 통화 발신 API를 호출한다. 3. The service control unit 611 calls the video call origination API of the protocol engine 621 based on the recognition result of the speech recognition unit 613 or the response of the speech recognition server.
4. 프로토콜 엔진(621)은 미디어 엔진(622)에서 사용할 오디오/비디오 자원을 할당한 후 시스템(100)으로 영상 통화 발신 요청 신호를 전달한다. 4. The protocol engine 621 allocates audio / video resources to be used by the media engine 622 and then transmits a video call origination request signal to the system 100. [
5. 시스템(100)에서 전달한 영상 통화 응답은 프로토콜 엔진(621)에서 수신되어 서비스 제어부(611)로 전달된다.5. The video call response transmitted from the system 100 is received by the protocol engine 621 and transmitted to the service control unit 611.
6. 서비스 제어부(611)는 영성 통화를 위해 미디어 엔진(622)의 오디오/비디오 모듈을 설정한다.6. Service control unit 611 sets the audio / video module of media engine 622 for spiritual talk.
7. 상대방 음성은 오디오 모듈을 통해 수신되어 스피커로 송출되고, 마이크로 인입되는 음성은 오디오 모듈을 통해 상대방에게 전송된다. 상대방 영상은 비디오 모듈을 통해 수신되어 화면에 표시되고 카메라로 캡쳐된 영상은 비디오 모듈을 통해 상대방에게 전송한다.7. The other party's voice is received through the audio module and sent to the speaker, and the micro-incoming voice is transmitted to the other party through the audio module. The other party image is received through the video module and displayed on the screen, and the image captured by the camera is transmitted to the other party through the video module.
도 14는 사용자 단말기(300)에서 장치 사물(200)로 음성/영상 PTT(Push To Talk) 서비스를 수행하는 경우를 설명하기 위한 도면이다.FIG. 14 is a diagram for explaining a case where a user terminal 300 performs a voice / video PTT service to a device object 200. FIG.
도 14를 참조하여 설명하면 다음과 같다.Referring to FIG. 14, the following will be described.
1. 사용자 단말기(300)의 사용자가 사용자 단말기(300)의 연락처에서 기 등록되어 있는 장치 사물(200)의 ID를 선택하여 시스템(100)으로 PTT 서비스 요청 신호를 전송한다. PTT 서비스 요청 신호는 선택된 장치 사물(200)의 ID를 포함한다.1. The user of the user terminal 300 selects the ID of the device object 200 already registered in the contact of the user terminal 300 and transmits the PTT service request signal to the system 100. The PTT service request signal includes the ID of the selected device object 200.
2. 시스템(100)은 PTT 서비스 요청 신호를 수신하고, 착신측 장치 사물(200)이 현재 제어 세션을 연결한 상태인지 확인한 후, 제어 세션이 연결된 상태인 경우 통화 요청이 수신되었음을 알리는 메시지를 전송하고, 만일 제어 세션이 연결되지 않은 상태인 경우 통화 요청이 수신되었음을 알리는 푸쉬 메시지를 전송한다.2. The system 100 receives the PTT service request signal and confirms whether the destination apparatus 200 has connected the current control session. If the control session is connected, the system 100 transmits a message indicating that the call request has been received And sends a push message indicating that the call request has been received if the control session is not connected.
3. 장치 사물(200)은 PTT 서비스를 위한 미디어 세션 연결을 위해 시스템(100)으로 미디어 세션 연결을 실행한다. 만일 제어세션이 연결되지 않은 경우 제어 세션을 연결한 후 미디어 세션 연결을 실행한다.3. The device object 200 executes a media session connection to the system 100 for media session connection for the PTT service. If the control session is not connected, the control session is connected and the media session connection is executed.
4. 시스템(100)에서는 장치 사물(200)의 세션 연결 정보를 발신측 사용자 단말기(300)로 전송하여 PTT 서비스를 위한 미디어 세션이 연결되었음을 알린다.4. The system 100 transmits the session connection information of the device object 200 to the calling user terminal 300 to inform that the media session for the PTT service is connected.
5. 사용자 단말기(300)는 발언권 획득을 요청한다.5. The user terminal 300 requests to obtain a floor.
6. 시스템(100)은 사용자 단말기(300)가 발언권을 획득했음을 PTT 세션에 참여한 장치 사물(200)로 통지한다.6. The system 100 notifies the device object 200 participating in the PTT session that the user terminal 300 has acquired the floor.
7. 장치 사물(200)은 상대방이 발언권을 획득했음을 사용자에게 알림음을 통하여 통지한다.7. The device object 200 notifies the user that the other party has acquired the voice via a sound.
8. 장치 사물(200)은 발언권 획득 통지 응답을 전송한다.8. The device object 200 transmits a floor acquisition notification response.
9. 시스템(100)은 사용자 단말기(300)로 발언권이 수락되었음을 통지한다.9. The system 100 notifies the user terminal 300 that the voice has been accepted.
10. 사용자 단말기(300)는 발언권 획득을 사용자에게 알림음 등을 통하여 통지한다. 10. The user terminal 300 notifies the user of voice acquisition through a notification tone or the like.
11. 사용자 단말기(300)는 사용자로부터 입력되는 음성 또는 영상 신호를 PTT 서비스를 위한 미디어 세션을 통해 시스템(100)으로 전송하고 시스템(100)은 장치 사물(200)들로 이를 전송한다.11. The user terminal 300 transmits a voice or video signal input from the user to the system 100 through a media session for the PTT service and the system 100 transmits the voice or video signal to the device objects 200. [
도 15는 장치 사물(200)에서 다른 장치 사물(200) 또는 사용자 단말기(300)로 음성/영상 PTT(Push To Talk) 서비스를 수행하는 경우를 설명하기 위한 도면이다.FIG. 15 is a diagram for explaining a case where a voice / video PTT service is performed from an apparatus object 200 to another apparatus object 200 or a user terminal 300.
도 15를 참조하여 설명하면 다음과 같다.Referring to FIG. 15, the following will be described.
1. 장치 사물(200) 사용자는 음성 명령을 통해 발신 장치 사물(200)로 음성/영상 PTT 서비스를 요청한다.1. The user of the apparatus object 200 requests the voice / video PTT service to the calling apparatus object 200 through a voice command.
2. 발신측 장치 사물(200)은 PTT 서비스의 통화 상대방 이름 또는 ID를 포함하는 PTT 발신 요청 신호를 시스템(100)으로 전송한다.2. The calling side apparatus object 200 transmits to the system 100 a PTT origination request signal including the calling party name or ID of the PTT service.
3. 시스템(100)은 PTT 서비스의 상대방인 착신측 장치 사물(200) 또는 사용자 단말기(300)의 ID를 조회한다.3. The system 100 inquires the ID of the destination apparatus object 200 or the user terminal 300 that is the other party of the PTT service.
4. 시스템(100)은 조회된 ID에 해당하는 장치 사물(200) 또는 사용자 단말기(300)의 제어 세션 연결 상태에 따라 PTT 서비스 요청 알림 푸쉬 또는 메시지를 전송한다.4. The system 100 transmits a PTT service request notification push or message according to the control session connection state of the device object 200 or the user terminal 300 corresponding to the inquired ID.
5. 착신측 장치 사물(200) 또는 사용자 단말기(300)는 PTT 세션 연결을 위해 시스템(100)으로 미디어 세션 연결을 실행한다. 만일 제어 세션이 연결되지 않은 경우 제어 세션을 연결한 후 미디어 세션 연결을 실행한다.5. The destination apparatus object 200 or the user terminal 300 executes a media session connection to the system 100 for PTT session connection. If the control session is not connected, the control session is connected and the media session connection is executed.
6. 시스템(100)에서는 착신측 장치 사물(200) 또는 사용자 단말기(300)의 세션연결 정보를 발신측 장치 사물(200)로 전송하여 PTT 서비스를 위한 미디어 세션이 연결되었음을 알린다.6. The system 100 transmits the session connection information of the destination apparatus object 200 or the user terminal 300 to the calling apparatus object 200 to notify that the media session for the PTT service is connected.
7. 발신측 장치 사물(200)은 PTT 세션이 연결되었음을 사용자에게 알림음 등을 통하여 통지한다.7. The calling side apparatus object 200 notifies the user that the PTT session is connected through a sound or the like.
8. 사용자는 음성 명령을 통해 발언권 획득을 요청한다.8. The user requests voice acquisition via voice command.
9. 장치 사물(200)은 시스템(100)으로 발언권 획득을 요청한다.9. The device object 200 requests the system 100 to obtain a floor.
10. 시스템(100)은 장치 사물(200)이 발언권을 획득했음을 PTT 세션 참여 상대방측 장치 사물(200) 또는 사용자 단말기(300)로 통지한다.10. The system 100 notifies the PTT session participant counterpart device 200 or the user terminal 300 that the device object 200 has acquired the voice.
11. 착신측 장치 사물(300) 또는 사용자 단말기(200)는 상대방이 발언권을 획득했음을 사용자에게 일림음 등을 통하여 통지한다.11. The destination apparatus object 300 or the user terminal 200 notifies the user that the other party has acquired the floor by way of example.
12. 장치 사물(200) 또는 사용자 단말기(300)는 발언권 획득 통지 응답을 시스템(100)으로 전송한다.12. The apparatus object 200 or the user terminal 300 transmits a voice acquisition notification response to the system 100. [
13. 시스템(100)은 발신측 장치 사물(200)로 발언권이 수락되었음을 통지한다. 13. The system 100 notifies the calling party device 200 that the floor has been accepted.
14. 발신측 장치 사물(200)은 발언권 획득을 사용자에게 알림음 등을 통하여 통지한다.14. The calling side apparatus object 200 notifies the user of voice acquisition through a notification sound or the like.
15. 발신측 장치 사물(200)은 발언권 획득 후 음성/영상을 PTT 미디어 세션을 통해 시스템(100)으로 전송하고, 시스템(100)은 이를 착신측 장치 사물(200) 또는 사용자 단말기(300)로 전송한다.15. The calling side apparatus object 200 transmits the voice / video to the system 100 via the PTT media session after obtaining the voice and the system 100 transmits the voice / video to the destination apparatus object 200 or the user terminal 300 send.
도 16은 사용자 단말기(300)에서 장치 사물(200)로 메시지 송수신 서비스의 하나로서 문자 채팅 서비스 절차를 수행하는 경우를 설명하기 위한 도면이다.16 is a diagram for explaining a case where a text chat service procedure is performed as one of message transmission / reception services from the user terminal 300 to the device object 200. [
도 16을 참조하여 설명하면 다음과 같다.Referring to FIG. 16, the following will be described.
1. 사용자 단말기(300)에서 문자 채팅 대상 장치 사물(200)의 ID로 문자를 전송한다.1. A character is transmitted from the user terminal 300 to the ID of the text chatting target object 200. [
2. 시스템(100)은 문자 전송 요청(메시지 송신 서비스 신호)을 수신하여, 해당 장치 사물(200)이 현재 제어 세션을 연결한 상태인지 확인한 후, 제어 세션이 연결된 상태인 경우 문자가 수신되었음을 알리는 메시지를 전송하고, 만일 제어 세션이 연결되지 않은 상태인 경우 문자가 수신되었음을 알리는 PUSH를 전송한다.2. The system 100 receives a character transmission request (message transmission service signal) and confirms whether the device object 200 has connected the current control session. If the control session is connected, the system 100 notifies that the character is received Transmits a PUSH indicating that a character has been received if the control session is not connected.
3. 착신측 장치 사물(200)은 문자 수신 알림을 수신한 후 전송 확인 알림을 전송한다. 만일 제어 세션이 연결되지 않은 경우 제어 세션을 연결한 후 전송확인 알림을 전송한다.3. The destination apparatus object 200 transmits a transmission confirmation notice after receiving the character reception notification. If the control session is not connected, the control session is connected and a transmission acknowledgment is transmitted.
4. 착신측 장치 사물(200)은 미리 설정된 출력모드에 따라 자동출력인 경우 즉시 수신한 문자 내용을 TTS를 통하여 음성으로 출력하고, 수동출력인 경우 사용자의 음성명령에 의해 문자 내용을 음성(TTS : Text To speech)으로 출력한다.4. The destination apparatus object 200 outputs the character contents immediately received in the case of automatic output according to the preset output mode through the TTS by voice, and outputs the character contents to the voice (TTS : Text To Speech).
5. 착신측 장치 사물(200)은 문자 내용을 출력한 후 출력 확인 알림을 시스템(100)으로 전송한다.5. The destination apparatus object 200 outputs the text content and then sends an output confirmation notification to the system 100. [
6. 시스템(100)은 문자를 발신한 사용자 단말기(300)의 제어 세션 연결상태에 따라, 제어 세션이 연결된 경우 출력 확인 알림을 전송하고, 제어 세션이 연결되지 않은 경우 출력확인 알림을 데이터베이스에 저장하고 이후 제어세션이 연결되면 저장된 출력확인 알림을 사용자 단말기(300)로 전송한다.6. The system 100 transmits an output confirmation notification when the control session is connected according to the control session connection state of the user terminal 300 that has sent the character, and when the control session is not connected, And transmits a stored output confirmation notification to the user terminal 300 when the control session is connected.
도 17은 장치 사물(200)로 문자가 수신되는 내부 절차를 나타낸 것이다.17 shows an internal procedure in which a character is received by the device object 200. Fig.
도 17을 참조하여 설명하면 다음과 같다.Referring to FIG. 17, the following will be described.
1. 시스템(100)에서 전송한 문자는 착신측 장치 사물(200)의 서비스 수행 장치(600)의 프로토콜 엔진(621)에서 수신되어 서비스 제어부(611,Application Logics)로 전달된다.1. The characters transmitted from the system 100 are received by the protocol engine 621 of the service performing apparatus 600 of the destination apparatus object 200 and transmitted to the service controller 611 (Application Logics).
2. 서비스 제어부(611)는 수신 확인 신호를 시스템(100)으로 전달하기 위해 프로토콜 엔진(621)의 수신 확인 API를 호출한다.2. The service control unit 611 calls the acknowledgment API of the protocol engine 621 to transmit an acknowledgment signal to the system 100. [
3. 프로토콜 엔진(621)은 시스템(100)으로 문자 수신 확인 신호를 전송한다.3. The protocol engine 621 sends a text acknowledgment signal to the system 100. [
4. 서비스 제어부(611)는 오디오 플레이어(612,Audio Player)를 이용하여 문자 착신 음을 출력한다.4. The service control unit 611 outputs a character incoming tone using the audio player 612 (Audio Player).
5. 서비스 제어부(611)는 데이터 저장부(614,contacts, Settings)에서 수신 문자 출력모드를 확인한다.5. The service control unit 611 confirms the reception character output mode in the data storage unit 614 (contacts, Settings).
5`. 출력모드가 수동인 경우 사용자의 음성명령을 대기한다.5`. If the output mode is manual, the user's voice command is awaited.
6. 사용자의 음성 명령이 수신되거나 출력 모드가 자동인 경우 서비스 제어부(611)는 음성 녹음 파일 및 TTS를 이용하여 문자 내용을 음성으로 변환한 후 오디오 플레이어(612)를 통해 음성으로 출력한다. 6. When the user's voice command is received or the output mode is automatic, the service control unit 611 converts the contents of the text into voice using the voice recording file and the TTS, and outputs the voice through the audio player 612.
도 18은 장치 사물(200)을 이용하여 문자를 발신하는 경우에 대한 내부 절차를 나타낸 것이다.18 shows an internal procedure for transmitting a character using the device object 200. [
도 18을 참조하여 설명하면 다음과 같다.Referring to FIG. 18, the following will be described.
1. 장치 사물(200)의 사용자가 음성 명령을 통해 문자 발신을 요청한다. 1. A user of the device object 200 requests a character transmission via a voice command.
2. 서비스 제어부(611, Application Logics)는 사용자로부터의 음성 명령을 수신하여, 음성 인식부(613)를 통해 입력된 음성을 판단한다. 만일 음성 인식부(613)에서 음성 인식이 안된 경우는 외부의 별도 음성 인식 서버에게 명령의 종류를 판단 요청한다.2. The service control unit 611 (Application Logics) receives the voice command from the user and judges the voice input through the voice recognition unit 613. [ If the voice recognition unit 613 does not recognize the voice, it requests the external voice recognition server to determine the type of the command.
3. 음성 인식부 또는 음성 인식 서버의 응답에 의해 서비스 제어부(611)는 사용자로부터 입력된 음성을 문자(텍스토)로 변환한다.3. The service control unit 611 converts the voice inputted by the user into a text (text) in response to the voice recognition unit or the voice recognition server.
4. 서비스 제어부(611)는, 변환된 문자 발신을 위해 프로토콜 엔진(621)의 문자 발신 API를 호출한다.4. The service control unit 611 calls the character sending API of the protocol engine 621 for transmitting the converted character.
5. 프로토콜 엔진(621)은 해당 API에 의해 문자를 발신할 것을 시스템(100)으로 요청한다. 시스템(100)에서 전달한 문자 발신 결과는 프로토콜 엔진(621)에서 수신되어 서비스 제어부(611)로 전달된다.5. The protocol engine 621 requests the system 100 to send a character by the API. The character transmission result transmitted from the system 100 is received by the protocol engine 621 and transmitted to the service control unit 611.
도 19는 장치 사물(200)에서 사용자 단말기(300) 또는 다른 장치 사물(200)로 메시지 송수신 서비스의 하나로서 문자 채팅을 위한 서비스 절차를 나타낸 것이다.FIG. 19 shows a service procedure for text chatting as one of a message sending / receiving service from the device object 200 to the user terminal 300 or another device object 200.
도 19를 참조하면 다음과 같다.Referring to FIG.
1) 장치 사물(200) 사용자는 음성 명령을 통해 장치 사물(200)로 문자 발신을 요청한다.1) The user of the device object 200 requests the device object 200 to send a character through a voice command.
2) 발신측 장치 사물(200)의 서비스 수행 장치(600)는 사용자의 음성 입력 내용을 STT(Speech To Text)를 통하여 문자 메시지로 변환한다.2) The service performing apparatus 600 of the calling side apparatus object 200 converts the voice input contents of the user into a text message through STT (Speech To Text).
3) 발신측 장치 사물(200)은 문자 전달을 위하여 착신자 대상 이름 또는 ID를 포함하는 문자 발신 요청 데이터를 시스템(100)으로 전송한다.3) The originating device object 200 transmits to the system 100 the character origination request data including the destination name or the ID for the character transmission.
4) 시스템(100)에서는 문자 발신 요청을 수신하여, 문자를 전송할 대상인 착신측 장치 사물(200) 또는 사용자 단말기(300)의 ID를 조회한다.4) The system 100 receives the character transmission request and inquires the ID of the destination apparatus object 200 or the user terminal 300 to which the character is to be transmitted.
5) 시스템(100)은 조회된 ID에 상응하는 장치 사물(200) 또는 사용자 단말기(300)의 제어 세션 연결 상태에 따라 문자 수신 알림 PUSH 또는 메시지를 전송한다.5) The system 100 transmits a character reception notification PUSH or a message according to the control session connection state of the device object 200 or the user terminal 300 corresponding to the inquired ID.
6) 착신측 장치 사물(200) 또는 사용자 단말기(300)는 문자 수신 알림을 수신한 후 전송 확인 알림을 시스템(100)을 통해 장치 사물(200)로 전송한다. 만일 제어 세션이 연결되지 않은 경우 제어세션을 연결한 후 전송확인 알림을 발신측 장치 사물(200)에게 전송한다.6) The destination apparatus object 200 or the user terminal 300 transmits a transmission confirmation notification to the device object 200 through the system 100 after receiving the character reception notification. If the control session is not connected, the control session is connected and the transmission confirmation notice is transmitted to the calling device object 200.
7) 착신측 장치 사물(200) 또는 사용자 단말기(300)는 문자 내용을 출력한다. 이때 착신측이 장치 사물(200)인 경우에는 설정된 출력 모드에 따라 음성으로 출력하고, 사용자 단말기(300)인 경우 사용자의 조작에 따라 화면에 출력한다.7) The destination apparatus object 200 or the user terminal 300 outputs text contents. At this time, if the called party is the device object 200, it outputs voice according to the set output mode, and outputs it to the screen according to the user's operation in case of the user terminal 300. [
8) 착신측 장치 사물(200) 또는 사용자 단말기(300)는 문자 내용을 출력한 후 출력확인 알림을 발신측 장치 사물(100)로 시스템(100)을 통해 전송한다.8) The destination apparatus object 200 or the user terminal 300 transmits the output confirmation notice to the calling party apparatus object 100 through the system 100 after outputting the text contents.
도 20은 사용자 단말기(300) 또는 장치 사물(200)로부터 착신측 장치 사물(200)로 수신되는 음성/영상 호(Incoming Call)에 대하여 외부 스팸 차단을 하기 위한 서비스 절차를 나타낸 것이다.20 shows a service procedure for blocking an external spam against a voice / video call (incoming call) received from the user terminal 300 or the apparatus object 200 to the destination apparatus object 200. FIG.
도 20을 참조하여 설명하면 다음과 같다.Referring to FIG. 20, the following will be described.
1) 사용자 단말기(300)의 연락처에서 기 등록된 착신측 장치 사물(200) 의 ID를 선택하여 음성/영상 통화를 요청한다.1) Select an ID of the destination apparatus object 200 registered in the contact of the user terminal 300 to request a voice / video call.
2) 시스템(100)에서는 통화 요청을 수신하여, 착신측 장치 사물(200)이 현재 제어 세션을 연결한 상태인지 확인하고 제어세션이 연결된 상태인 경우 통화 요청이 수신되었음을 알리는 메시지를 전송하고, 그렇지 않을 경우 만일 제어세션이 연결되지 않은 상태인 경우 통화 요청이 수신되었음을 알리는 PUSH Notification을 전송한다. 2) The system 100 receives a call request, confirms whether the destination apparatus 200 has connected the current control session, and transmits a message informing that the call request has been received when the control session is connected. Otherwise Otherwise, if the control session is not connected, a PUSH Notification is sent informing that the call request has been received.
3) 시스템(100)은 외부의 별도 스팸 차단 시스템(500)과 연동하여 착신측 전화 번호 또는 ID가 스팸 또는 보이스 피싱 정보로 등록되어 있는지 스팸 차단 시스템(500)에 질의하고 그 결과값을 수신한다.3) The system 100 interlocks with an external separate spam protection system 500 to inquire whether the called party's phone number or ID is registered as spam or voice phishing information, and receives the resultant value from the spam blocking system 500 .
4) 시스템(100)은 수신측 장치 사물(200)에게 발신호 정보가 Spam 전화인지 아닌지에 대한 스팸 정보를 전송한다.4) The system 100 transmits the spam information to the reception-side apparatus object 200 as to whether the outgoing call information is a Spam phone or not.
5) 장치 사물(200)은 발신 호가 스팸 전화일 경우 사용자에게 “스팸전화가 의심되는 전화입니다"라는 음성멘트를 전달하고, 통화 수신알림을 음성 또는 영상으로 출력하여 사용자에게 통보한 후 응답모드에 따라, 자동응답인 경우 즉시 통화를 수락하고(자동 응답), 수동응답인 경우 사용자의 음성명령을 대기한 후 통화를 수락한다. 이 때, 스팸의심전화 수신 거부로 설정되어 있으면, 수신호와의 통화 연결을 종료할 수 있다. 만일 그렇지 않을 경우 자동 응답 및 수동 응답설정에 따라 호 처리가 진행된다.5) When the outgoing call is a spam phone, the device object 200 delivers a voice message of &quot; a spam phone is suspected to be a phone call &quot;, notifies the user of the call reception notification by voice or video, Accordingly, if the answer is an automatic answer, the call is immediately accepted (automatic answer). If the answer is a manual answer, the call is accepted after waiting for the user's voice command. At this time, if the spam suspicious call reception rejection is set, the call connection with the receiver can be terminated. If not, the call processing proceeds according to the automatic response and manual response setting.
6) 통화를 수락하면 통화 세션연결을 위해 시스템(100)으로 미디어 세션 연결을 실행한다. 만일 제어세션이 연결되지 않은 경우 제어세션을 연결한 후 미디어 세션 연결을 실행한다.6) Accepting the call initiates a media session connection to the system 100 for a call session connection. If the control session is not connected, the control session is connected and the media session connection is executed.
7) 시스템(100)에서는 장치 사물(200)의 미디어 세션 연결정보를 발신측인 사용자 단말기(300)로 전송하여 세션이 연결되었음을 알린다.7) The system 100 transmits the media session connection information of the device object 200 to the user terminal 300, which is the calling party, to notify that the session is connected.
8) 사용자 단말기(300)와 장치 사물(200)은 미디어 세션을 통해 음성 또는 영상 통화 서비스를 수행한다.8) The user terminal 300 and the device object 200 perform a voice or video call service through a media session.
도 21은 수신측 장치 사물(200)이 전원 오프(Power Off), 통화중 또는 무응답일 경우 수신된 음성/영상 호 및 메시지에 대한 서비스 절차를 나타낸 것이다.FIG. 21 shows a service procedure for a received voice / video call and a message when the receiving-side apparatus object 200 is powered off, busy, or no answer.
도 21을 참조하여 설명하면 다음과 같다.Referring to FIG. 21, the following will be described.
1) 사용자 단말기(300)의 연락처에서 기 등록된 장치 사물(200)의 ID를 선택하여 음성/영상 통화 또는 메시지 전송을 요청한다.1) Select an ID of the device object 200 registered in the contact of the user terminal 300 to request a voice / video call or a message transmission.
2) 시스템(100)에서는 통화/문자 요청을 수신하여, 해당 장치 사물(200)이 현재 제어 세션을 연결한 상태인지 확인하고 제어세션이 연결된 상태인 경우 통화 요청이 수신되었음을 알리는 메시지를 전송하고, 그렇지 않을 경우 만일 제어세션이 연결되지 않은 상태인 경우 통화 요청이 수신되었음을 알리는 PUSH Notification을 전송한다. 2) The system 100 receives a call / character request, checks whether the device object 200 is connected to the current control session, transmits a message indicating that the call request is received when the control session is connected, Otherwise, if the control session is not connected, send a PUSH Notification indicating that the call request has been received.
만일 수신 장치 사물(200)이 전원 오프(Power Off) 상태일 경우, 문자 메시지일 경우는 시스템(100)에 저장하고, 만일 음성/영상 전화(또는 PTT)일 경우 6)으로 이동하여 발신자에게 음성/영상 메시지를 녹음/녹화할 수 있도록 한다.If the receiving device 200 is in the power off state, it is stored in the system 100 if it is a text message. If the receiving device 200 is a voice / video telephone (or PTT), it moves to 6) / Allows you to record video messages.
3) 장치 사물(200)은 사용자에게 인입호 또는 메시지가 수신되었음을 알린다. 이때 수신측 장치 사물(200)이 통화중이거나, 수신 명령 대기 시간이 미리 ㅅ설정해 둔 T/O(Time out)인지를 판단한다(장치 사물(200)이 외출 모드로 설정 또는 통화중 상태)3) The device object 200 notifies the user that an incoming call or message has been received. At this time, it is determined whether the reception-side apparatus object 200 is busy or the reception command waiting time is T / O (Time out) previously set (the apparatus object 200 is set to the outgoing mode or in the busy state)
4) 장치 사물(200)은 시스템(100)으로 착신 상태가 무응답 또는 통화중임을 알린다.4) The device object 200 informs the system 100 that the incoming state is unresponsive or busy.
5) 시스템(100)은 음성/영상 호(Call)일 경우에는 발신측에 음성 안내멘트를 재생하여 음성/영상 녹음을 할 수 있도록 한다. 만일 문자일 경우에는 나중에 수신자가 수신 문자를 확인할 수 있도록 수신측에 문자가 수신되었음을 알린다. 5) When the system 100 is a voice / video call, the voice announcement is reproduced on the calling side so that voice / video recording can be performed. If it is a character, it informs the receiving side that the character has been received so that the receiver can confirm the received character later.
6) 발신측은 안내멘트에 따라 수신자에게 음성/영상 메시지를 녹음/녹화한다.6) The calling party records the voice / video message to the recipient according to the announcement message.
7) 시스템(100)은 녹음/녹화가 완료된 후에, 수신 측에 수신 음성/영상 메시지가 있음을 알린다.7) The system 100 notifies the receiving side that there is a received audio / video message after the recording / recording is completed.
8) 수신측 장치 사물(200)은 예컨대 LED 등에 메시지가 수신되었음을 표시하고, 이를 인지한 사용자는 음성 명령 또는 장치 사물(200)을 조작하여 수신 메시지 청취를 요청한다.8) The receiving-side apparatus object 200 indicates that a message has been received, for example, on an LED, and a user who recognizes the message displays a voice command or requests the apparatus 200 to listen to the received message.
9) 수신측 장치 사물(200)은 시스템(100)에 수신 저장된 음성/영상/문자 메시지를 수신 요청하고, 장치 사물(200)을 통해 재생한다.9) The receiving-side apparatus object 200 requests reception of the voice / video / text message received and stored in the system 100, and reproduces it through the apparatus object 200.
도 22는 OTT 사업자 또는 통신 사업자가 사용하고 있는 어플리케이션에 적용을 할 경우의 화면 예시를 나타낸 것으로서, 사용자 단말기(스마트폰)에서 장치 사물(200)로 통화를 위한 사용자 인터페이스의 예시를 나타낸 것이다.FIG. 22 shows an example of a screen when applying to an application used by an OTT provider or a communication service provider. FIG. 22 shows an example of a user interface for a call from the user terminal (smart phone) to the device object 200.
도 22의 좌측을 참조하면, 장치 사물(200)의 ID가 표시되어 있음을 알 수 있고 이를 선택하면 우측에 나타낸 바와 같이 통화 요청 및 통화 중의 상태의 화면으로 변경됨을 알 수 있다.Referring to the left side of FIG. 22, it can be seen that the ID of the device object 200 is displayed, and when it is selected, the screen is changed to the screen of a call request and a busy state as shown on the right side.
도 23은 기존의 메시징 어플리케이션에 본 발명을 적용한 경우를 설명하기 위한 도면으로서, 널리 사용되고 있는 카카오톡 어플리케이션에 본 발명을 적용한 경우이다.FIG. 23 is a diagram for explaining a case where the present invention is applied to an existing messaging application, in which the present invention is applied to a widely used KakaoTalk application.
도 23의 좌측을 참조하면, 장치 사물(200)의 ID가 메시징 어플리케이션의 연락처(친구 목록)에 등록되어 있음을 알 수 있다.Referring to the left side of FIG. 23, it can be seen that the ID of the device object 200 is registered in the contact (friend list) of the messaging application.
이러한 상태에서, 사용자가 해당 장치 사물(200)의 ID를 터치하면 장치 사물(200)에 대한 정보를 표시해 주고, 통화 버튼을 누르면 해당 장치 사물(200)로 음성 통화를 발신하고 통화가 이루어지는 상태를 확인할 수 있다.In this state, when the user touches the ID of the device object 200, information on the device object 200 is displayed. When the user presses the call button, a voice call is made to the device object 200 and a state Can be confirmed.
도 24는 통신사에서 제공하고 있는 통화 어플리케이션(예컨대, 에스케이 텔레콤의 T 전화)에 본 발명을 적용한 경우를 나타낸 것이다.FIG. 24 shows a case where the present invention is applied to a communication application provided by a communication company (for example, T telephone of SKY Telecom).
도 24에 나타낸 바와 같이, 해당 통화 어플리케이션의 연락처에 장치 사물(200)의 ID가 등록되어 있으며 이를 선택한 경우 통화 발신 화면, 통화중 화면으로 변경된다.As shown in FIG. 24, when the ID of the device object 200 is registered in the contact of the corresponding call application and the selected device is selected, the screen is changed to a call originating screen and a busy screen.
이상에서, 본 발명의 바람직한 실시예를 참조하여 본 발명을 설명하였으나 본 발명은 상기 실시예에 한정되는 것이 아님을 유의해야 한다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments.
예컨대, 장치 사물(200)은 IoT 디바이스, AI 디바이스 이외에도 기타 다양한 디바이스를 포함할 수 있음은 물론이다.For example, the device object 200 may include various other devices in addition to the IoT device, the AI device, and the like.
100...ID를 이용하여 장치 사물에서의 통신 서비스를 제공하는 시스템
200...장치 사물
300...사용자 단말기
400...기타 통신 시스템
500...스팸 차단 시스템
100 ... A system for providing communication services in an apparatus using an ID
200 ... device things
300 ... user terminal
400 ... Other communication systems
500 ... Spam protection system

Claims (11)

  1. ID를 이용하여 장치 사물에서의 통신 서비스를 제공하는 시스템으로서,
    장치 사물 및 사용자 단말기와 네트워크를 통해 결합하여 장치 사물 사이 또는 장치 사물과 사용자 단말기 사이에서 제어 세션을 형성하고, 상기 제어 세션을 통한 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 호 처리 기능을 수행하는 서비스 서버; 및
    장치 사물 및 사용자 단말기와 네트워크를 통해 결합하여 장치 사물 사이 또는 장치 사물과 사용자 단말기 사이에서 미디어 세션을 형성하는 미디어 서버
    를 포함하고,
    상기 장치 사물은 설정된 ID를 상기 서비스 서버에 저장된 장치 사물 사용자의 계정의 주소록에 등록하고, 상기 서비스 서버는 상기 장치 사물 사용자의 계정의 주소록을 다른 장치 사물 및 사용자 단말기와 동기화하여 저장하도록 한 상태에서, 장치 사물 및 사용자 단말기는 주소록에 저장된 ID에 기초하여 통화 서비스를 수행할 장치 사물 또는 사용자 단말기를 선택하고, 상기 서비스 서버를 통해 형성된 제어 세션을 통해 제어 신호를 송수신하고 또한 상기 미디어 서버를 통해 형성되는 미디어 세션을 통해 음성 또는 영상 통화 서비스 및 메시지 송수신 서비스를 위한 음성, 영상 또는 메시지 신호를 상기 선택된 장치 사물 또는 사용자 단말기와 송수신함으로써 통화 서비스를 수행하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    A system for providing communication services in an apparatus object using an ID,
    A control session is established between the device object and the user terminal and between the device objects or between the device object and the user terminal through the network to perform a call processing function for voice or video call service and message transmission / Service server; And
    A media server that forms a media session between device objects and between device objects and a user terminal,
    Lt; / RTI &gt;
    The apparatus object registers the set ID in the address book of the account of the device user stored in the service server and the service server stores the address book of the account of the device user in synchronization with other device objects and the user terminal The device object and the user terminal select a device object or a user terminal to perform the call service based on the ID stored in the address book, send and receive a control signal through the control session formed through the service server, And transmitting a voice, image, or message signal for voice or video call service and message transmission / reception service through the media session to the selected device object or the user terminal. .
  2. 제1항에 있어서,
    상기 장치 사물 사용자의 계정의 주소록은 미리 설정된 허락된 친구 관계인 다른 장치 사물 및 사용자 단말기들과만 동기화하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    The method according to claim 1,
    Wherein the address book of the account of the device user is synchronized only with other device objects and user terminals that are a preset friend relationship.
  3. 제1항에 있어서,
    상기 장치 사물 또는 사용자 단말기는, 서비스 수행 장치를 구동시켜서 음성 또는 영상 통화를 수행할 상대방 장치 사물 또는 사용자 단말기의 ID를 선택하고 선택된 ID를 포함하는 음성 또는 영상 통화 요청 신호를 서비스 서버로 전송하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    The method according to claim 1,
    The device object or the user terminal may be configured to operate the service performing device to select an object of the counterpart device or an ID of the user terminal to perform a voice or video call and transmit a voice or video call request signal including the selected ID to the service server Characterized in that the communication service providing system in the apparatus object.
  4. 제3항에 있어서,
    상기 서비스 서버는 미디어 서버로 미디어 자원 할당 요청 신호를 전송하고, 미디어 서버는 미디어 자원을 할당하고 자원 할당 응답 신호를 서비스 서버로 전송하고,
    상기 서비스 서버는 상기 자원 할당 응답 신호를 음성 또는 영상 통화를 요청한 발신측 장치 사물 또는 사용자 단말기로 전송하고, 발신측 장치 사물 또는 사용자 단말기는 상기 자원 할당 응답 신호에 포함된 미디어 자원 정보에 기초하여 미디어 세션을 미디어 서버와 형성하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    The method of claim 3,
    The service server transmits a media resource allocation request signal to the media server, the media server allocates media resources, transmits a resource allocation response signal to the service server,
    Wherein the service server transmits the resource allocation response signal to a source apparatus object or a user terminal requesting a voice or video call, and the source apparatus object or the user terminal transmits the resource allocation response signal to the media And forms a session with a media server.
  5. 제4항에 있어서,
    상기 서비스 서버는, 착신측 장치 사물 또는 사용자 단말기의 ID를 확인하고 이에 기초하여 해당 장치 사물 또는 사용자 단말기로 통화 요청 신호를 전송하고, 착신측 장치 사물 또는 사용자 단말기가 통화를 수락한 경우 상기 서비스 서버는 미디어 서버로 미디어 자원 할당 요청 신호를 전송하고 미디어 서버는 미디어 자원을 할당하고 자원 할당 응답 신호를 서비스 서버로 전송하고,
    상기 서비스 서버는 상기 자원 할당 응답 신호를 착신측 장치 사물 또는 사용자 단말기로 전송하고, 착신측 장치 사물 또는 사용자 단말기는 상기 자원 할당 응답 신호에 포함된 미디어 자원 정보에 기초하여 미디어 세션을 미디어 서버와 형성하고,
    발신측 및 착신측 장치 사물 또는 사용자 단말기는 상기 미디어 서버를 통해 형성된 미디어 세션을 통해 음성 또는 영상 통화 서비스를 위한 음성 또는 영상 신호를 송수신함으로써 통화 서비스를 수행하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    5. The method of claim 4,
    The service server confirms the destination apparatus object or the ID of the user terminal, and transmits a call request signal to the apparatus object or the user terminal based on the ID of the destination apparatus object or the user terminal. When the destination apparatus object or the user terminal accepts the call, The media server transmits a media resource allocation request signal to the media server, the media server allocates media resources, transmits a resource allocation response signal to the service server,
    The service server transmits the resource allocation response signal to the destination apparatus object or the user terminal, and the destination apparatus object or the user terminal forms a media session with the media server based on the media resource information included in the resource allocation response signal and,
    Wherein the calling party and the called party device or the user terminal perform a call service by transmitting or receiving a voice or video signal for voice or video call service through a media session formed through the media server. Delivery system.
  6. 제1항에 있어서,
    상기 음성 또는 영상 통화 서비스는 PTT(Push To Talk) 서비스를 포함하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    The method according to claim 1,
    Wherein the voice or video call service includes a PTT (Push To Talk) service.
  7. 제1항에 있어서,
    상기 장치 사물 또는 사용자 단말기는, 서비스 수행 장치를 구동시켜서 메시지 송신 서비스를 수행할 상대방 장치 사물 또는 사용자 단말기의 ID를 선택하고 선택된 ID를 포함하는 메시지 송신 서비스 신호를 서비스 서버로 전송하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    The method according to claim 1,
    Wherein the device object or the user terminal drives a service performing device to select a counterpart device object or an ID of a user terminal to perform a message transmission service and transmit a message transmission service signal including the selected ID to the service server A system for providing call service in an apparatus.
  8. 제7항에 있어서,
    상기 서비스 서버는, 착신측 장치 사물 또는 사용자 단말기로 메시지가 수신되었음을 알리는 신호를 전송하고, 착신측 장치 사물 또는 사용자 단말기는 미리 설정된 출력모드에 따라 수신한 메시지를 음성 신호로 변환하여 출력하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    8. The method of claim 7,
    The service server transmits a signal indicating that a message has been received to the destination apparatus object or the user terminal, and the destination apparatus object or the user terminal converts the received message into a voice signal according to a predetermined output mode and outputs the voice signal A call service providing system in an apparatus object.
  9. 제7항에 있어서,
    상기 장치 사물은, 장치 사물의 사용자로부터 입력되는 음성 명령을 수신하여 음성 인식부를 통해 음성 명령을 해석하여 텍스트 정보로 변환하여 변환된 텍스트 정보를 포함하는 메시지를 서비스 서버로 전송하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    8. The method of claim 7,
    Wherein the apparatus object receives a voice command input from a user of the apparatus, analyzes the voice command through the voice recognition unit, converts the voice command into text information, and transmits the message including the converted text information to the service server A system for providing call service in an object.
  10. 제1항에 있어서,
    스팸 정보 또는 보이스 피싱 정보를 저장하고 있으며 서비스 서버로부터의 스팸 질의 요청 신호를 수신하여 스팸 여부 또는 보이스 피싱 여부를 판단하여 그 결과를 서비스 서버로 전송하는 스팸 차단 시스템을 더 포함하는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    The method according to claim 1,
    Further comprising a spam blocking system that stores spam information or voice phishing information, receives a spam query request signal from a service server, determines whether the spam is spam or voice phishing, and transmits the result to a service server A system for providing call service in an object.
  11. 제1항에 있어서,
    인터넷에 기반하여 어플리케이션에 의해 통신 서비스를 제공하는 기타 통신 시스템을 더 포함하고,
    상기 장치 사물은 상기 기타 통신 시스템의 어플리케이션과 연동하여 장치 사물에 대해 설정된 ID를 기타 통신 시스템에 저장된 장치 사물 사용자의 계정의 주소록에 등록함으로써 상기 장치 사물은 기타 통신 시스템의 어플리케이션의 주소록에 동기화되는 것을 특징으로 하는 장치 사물에서의 통화 서비스 제공 시스템.
    The method according to claim 1,
    Further comprising a communication system for providing a communication service by an application based on the Internet,
    The apparatus object is synchronized with the address book of the application of the other communication system by registering the ID set for the apparatus object in the address book of the account of the apparatus object user stored in the other communication system in cooperation with the application of the other communication system Characterized in that the communication service providing system in the apparatus object.
KR1020180023455A 2017-02-28 2018-02-27 System for providing communication services in device things using id KR102014817B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020170026722 2017-02-28
KR20170026722 2017-02-28

Publications (2)

Publication Number Publication Date
KR20180099535A true KR20180099535A (en) 2018-09-05
KR102014817B1 KR102014817B1 (en) 2019-08-27

Family

ID=63594837

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180023455A KR102014817B1 (en) 2017-02-28 2018-02-27 System for providing communication services in device things using id

Country Status (1)

Country Link
KR (1) KR102014817B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040064587A (en) * 2003-06-13 2004-07-19 오준수 A wireless system for transmitting and receiving multimedia data free of charge and a method therefor
KR20140062256A (en) * 2012-11-14 2014-05-23 엘지전자 주식회사 Mobile terminal and operationg method thereof
KR20150121113A (en) * 2013-02-25 2015-10-28 퀄컴 인코포레이티드 Context aware actions among heterogeneous internet of things (iot) devices
KR101676432B1 (en) * 2015-06-29 2016-11-17 주식회사 두두원 Discovery and Access System of Internet of Things board and Application Server under wireless WiFi Environment and method at the same
KR101690968B1 (en) * 2016-04-18 2016-12-29 (주)케이사인 Method of federating internet of things platforms

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040064587A (en) * 2003-06-13 2004-07-19 오준수 A wireless system for transmitting and receiving multimedia data free of charge and a method therefor
KR20140062256A (en) * 2012-11-14 2014-05-23 엘지전자 주식회사 Mobile terminal and operationg method thereof
KR20150121113A (en) * 2013-02-25 2015-10-28 퀄컴 인코포레이티드 Context aware actions among heterogeneous internet of things (iot) devices
KR101676432B1 (en) * 2015-06-29 2016-11-17 주식회사 두두원 Discovery and Access System of Internet of Things board and Application Server under wireless WiFi Environment and method at the same
KR101690968B1 (en) * 2016-04-18 2016-12-29 (주)케이사인 Method of federating internet of things platforms

Also Published As

Publication number Publication date
KR102014817B1 (en) 2019-08-27

Similar Documents

Publication Publication Date Title
EP2862342B1 (en) Notification of communication events
US7668515B2 (en) Portable telephone for conveying real time walkie-talkie streaming audio-video
EP1578084A2 (en) Systems and methods for videoconference and/or data collaboration initiation
US20070263604A1 (en) Ring back notification system and method therefor
EP1968293A1 (en) Speech response method and speech server
US20060087971A1 (en) Method for reserving of PT system
US20120275444A1 (en) Push-to-multimedia method and system for sharing multimedia information
EP2862343B1 (en) Notification of communication events
US20090310762A1 (en) System and method for instant voice-activated communications using advanced telephones and data networks
US9025587B2 (en) Auto answer in voice over internet protocol
JP2013539625A (en) Web-based access to video content associated with voicemail
EP2293291B1 (en) User identity identifying method, device and call center system
KR101790896B1 (en) Apparatus for message processing and control method thereof
KR20180099535A (en) System for providing communication services in device things using id
CN105519148B (en) System and method for controlling conversion and output of called ring by calling party
WO2018001229A1 (en) Method, application server and system for realizing call park
KR101875722B1 (en) System and method for providing voice and video usisng iot devices
KR20090072761A (en) System and method for performing video communicaiton
KR100630125B1 (en) Method for mediating call of push to talk
US20160044175A1 (en) Preconfigured Sender Communication
EP1892934A1 (en) Simulated ring tone comprising the caller&#39;s voice in real time
CN101453702B (en) Method, system and equipment for providing inter-session information
KR102056807B1 (en) Remote video conference system
KR101924073B1 (en) System and Method for Visitor Call and IoT Device Control based on Internet of Things
WO2009006830A1 (en) Method, device and system for implementing communication between the user terminals

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant