KR20120092251A - Computing module connected with stb for iptv and method for controlling the same - Google Patents
Computing module connected with stb for iptv and method for controlling the same Download PDFInfo
- Publication number
- KR20120092251A KR20120092251A KR1020110012164A KR20110012164A KR20120092251A KR 20120092251 A KR20120092251 A KR 20120092251A KR 1020110012164 A KR1020110012164 A KR 1020110012164A KR 20110012164 A KR20110012164 A KR 20110012164A KR 20120092251 A KR20120092251 A KR 20120092251A
- Authority
- KR
- South Korea
- Prior art keywords
- computing module
- stb
- message
- video
- transmitting
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1101—Session protocols
- H04L65/1104—Session initiation protocol [SIP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Computer Networks & Wireless Communication (AREA)
- Telephonic Communication Services (AREA)
Abstract
Description
본 발명은 IPTV(Internet Protocol TeleVision) 및 STB(Set Top Box)와 관련된 기술에 대한 것으로서, 보다 상세하게는 IPTV를 위한 STB와 커넥티드된 컴퓨팅 모듈, STB와 연결된 IPTV에서 영상 통화 서비스 중 발신을 위한 호 신호를 처리하는 제어 방법, 그리고 STB와 연결된 IPTV에서 영상 통화 서비스 중 착신을 위한 호 신호를 처리하는 제어 방법에 관한 것이다.The present invention relates to technologies related to Internet Protocol TeleVision (IPTV) and Set Top Box (STB), and more particularly, to a computing module connected to an STB for an IPTV, and for transmitting a video call service in an IPTV connected to an STB. A control method for processing a call signal, and a control method for processing a call signal for an incoming call during a video call service in the IPTV connected to the STB.
최근 기술 동향에 의하면, IPTV를 이용하여 사용자에게 다양한 기능을 제공하는 시도가 있다. 또한, IPTV 서비스를 위하여 수많은 STB들이 각 가정에 공급되어 있는 실정이다.According to recent technology trends, there are attempts to provide various functions to users using IPTV. In addition, a number of STBs are provided to each home for IPTV service.
그러나, 첫째, 종래 기술에 의한 IPTV STB은 예컨대 1080i 급의 HD급 영상데이터를 출력하는 것이 메인 기능이었기 때문에 음성 및 영상데이터를 STB에서 압축을 하여 상대방 디바이스로 전송 할 수가 없는 문제점이 있었다.First, however, the conventional IPTV STB has a problem in that audio and video data cannot be compressed and transmitted to the counterpart device because the main function is to output, for example, 1080i HD video data.
또한, 둘째, 이미 많은 수의 STB가 배포된 상황에서 이들을 회수하여 영상 통화 서비스가 가능한 STB를 추가 배포한다면, 자원 효율면에서 뿐만 아니라 시간면에서 모두 로스(loss)가 될 수 밖에 없는 기술적 상황이다.Secondly, if a number of STBs are already distributed and the STBs capable of collecting and retrieving video telephony services are additionally distributed, it is a technical situation that can not only be lost in terms of resource efficiency but also in terms of time. .
그리고, 셋째, 영상 통화 서비스를 위한 별도의 STB를 제작한다면, 기존 STB와의 호환성 문제에 직면하는 단점이 있다.And, thirdly, if a separate STB is manufactured for a video call service, there is a disadvantage in facing compatibility with the existing STB.
본 발명의 일실시예는, IPTV STB를 이용하여 고화질의 영상 통화가 가능하도록 별도의 컴팩트한 컴퓨팅 모듈을 추가적으로 정의하고자 한다.An embodiment of the present invention is to further define a separate compact computing module to enable a high-definition video call using the IPTV STB.
또한, 본 발명의 다른 일실시예는, 가능한 기존 STB를 이용하여 영상 통화 서비스를 구현하는 과정에서, 자원 효율성 및 시간 효율성을 모두 제고하고자 한다.In addition, another embodiment of the present invention, in the process of implementing a video call service using the existing STB as possible, to improve both resource efficiency and time efficiency.
나아가, 본 발명의 또 다른 일실시예는, 기존의 STB와의 호환성을 유지하면서 영상 통화 서비스가 가능하도록 컴퓨팅 모듈을 설계하고자 한다.Furthermore, another embodiment of the present invention is to design a computing module to enable a video call service while maintaining compatibility with the existing STB.
그리고, 본 발명의 또 다른 일실시예는, 새롭게 정의된 컴퓨팅 모듈을 포함한 IPTV 시스템의 변경되는 신호 흐름(call flow)에 대한 프로토콜을 정의하고자 한다.In addition, another embodiment of the present invention is to define a protocol for a changed call flow of an IPTV system including a newly defined computing module.
본 발명의 일실시예에 의한 STB와 연결된 IPTV에서 영상 통화 서비스 중 발신을 위한 호 신호를 처리하는 제어 방법은, 상기 STB 로부터 상기 STB와 커넥티드된 컴퓨팅 모듈로, 콜 셋업 요청 메시지를 전송하는 제1단계와, 상기 컴퓨팅 모듈로부터 SIP 서버로, 인바이트 메시지를 전송하는 제2단계와, 상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 영상 통화가 시도되고 있음을 알리는 메시지를 전송하는 제3단계와, 상기 컴퓨팅 모듈로부터 상기 STB로, 상기 영상 통화가 시도되고 있음을 알리는 메시지를 포워딩 하는 제4단계와, 상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 상기 영상 통화 서비스의 상대방 디바이스가 콜 요청을 수락하였음을 표시하는 메시지를 전송하는 제5단계와, 상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상기 제5단계의 메시지에 대한 컨펌 메시지를 전송하는 제6단계와, 상기 컴퓨팅 모듈로부터 상기 STB로, 콜 세션이 정상적으로 이루어 졌음을 표시하는 메시지를 전송하는 제7단계와, 그리고 상기 컴퓨팅 모듈에 의해 인코딩된 비디오 데이터를 미디어 서버로 전송하는 제8단계를 포함한다.In a control method of processing a call signal for an outgoing video call service in an IPTV connected to an STB according to an embodiment of the present invention, a call setup request message is transmitted from the STB to a computing module connected to the STB. Step 1, a second step of sending an invite message from the computing module to the SIP server, a third step of sending a message indicating that a video call is being attempted from the SIP server to the computing module, and A fourth step of forwarding a message indicating that the video call is being attempted from a computing module to the STB; and indicating that a counterpart device of the video call service has accepted a call request from the SIP server to the computing module. A fifth step of transmitting a message and a confirmation message for the message of the fifth step from the computing module to the SIP server A sixth step of transmitting, a seventh step of transmitting a message indicating that a call session is normally performed from the computing module to the STB, and a method of transmitting video data encoded by the computing module to a media server. Includes eight steps.
또한, 본 발명의 일실시예에 의한 STB와 연결된 IPTV에서 영상 통화 서비스 중 착신을 위한 호 신호를 처리하는 제어 방법은, SIP 서버로부터 상기 STB와 커넥티드된 컴퓨팅 모듈로, 인바이트 메시지를 전송하는 제1단계와, 상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상대방 디바이스에 의해 영상 통화가 시도되고 있음을 알리는 메시지를 전송하는 제2단계와, 상기 컴퓨팅 모듈로부터 상기 STB로, 콜 요청 메시지를 전송하는 제3단계와, 상기 STB로부터 상기 컴퓨팅 모듈로, 상기 콜 요청을 수락하였음을 표시하는 메시지를 전송하는 제4단계와, 상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상기 제4단계의 메시지를 포워딩 하는 제5단계와, 상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 상기 제5단계의 메시지에 대한 컨펌 메시지를 전송하는 제6단계와, 상기 컴퓨팅 모듈로부터 상기 STB로, 콜 세션이 정상적으로 이루어 졌음을 표시하는 메시지를 전송하는 제7단계와, 그리고 상기 컴퓨팅 모듈에 의해 인코딩된 비디오 데이터를 미디어 서버로 전송하는 제8단계를 포함한다.In addition, a control method for processing a call signal for an incoming call during a video call service in an IPTV connected to the STB according to an embodiment of the present invention, transmitting an invite message from a SIP server to the computing module connected to the STB A first step of transmitting a message indicating that a video call is being attempted by a counterpart device from the computing module to the SIP server, and transmitting a call request message from the computing module to the STB. A third step of transmitting a message indicating that the call request has been accepted from the STB to the computing module, and a fifth step of forwarding the message of the fourth step from the computing module to the SIP server; And a sixth step of transmitting a confirmation message for the message of the fifth step from the SIP server to the computing module. To the STB, a seventh step of transmitting a message indicating that a call session is normally completed, and an eighth step of transmitting video data encoded by the computing module to a media server.
그리고, 본 발명의 일실시예에 의한 IPTV(Internet Protocol TeleVision) 를 위한 STB(Set Top Box) 와 커넥티드된 컴퓨팅 모듈은, 영상 통화 서비스의 초기화 프로세스를 처리하는 SIP 스택(Session Initiation Protocol stack)과, 상기 IPTV 주변에 위치한 적어도 하나 이상의 사용자를 촬영하는 카메라 모듈과, 상기 카메라 모듈에 의해 촬영된 적어도 하나 이상의 사용자에 대응하는 제1비디오 데이터를 제2비디오 데이터로 인코딩 하는 비디오 인코더와, 그리고 상기 영상 통화 서비스에서 사용되기 위한 상기 인코딩된 제2비디오 데이터를 상기 STB로 전송하며, 상기 STB로부터 컨트롤 신호를 수신하는 제1인터페이스를 포함한다.In addition, the computing module connected to the STB (Set Top Box) for IPTV (Internet Protocol TeleVision) according to an embodiment of the present invention, the SIP stack (Session Initiation Protocol stack) for processing the initialization process of the video call service and A camera module for capturing at least one user located near the IPTV, a video encoder for encoding first video data corresponding to at least one user captured by the camera module into second video data, and the video. And a first interface for transmitting the encoded second video data for use in a call service to the STB and receiving a control signal from the STB.
본 발명의 일실시예에 의하면, IPTV STB를 이용하여 고화질의 영상 통화가 가능하도록 별도의 컴팩트한 컴퓨팅 모듈을 추가적으로 정의함으로써, 자원 효율성 및 시간 효율성을 모두 제고하는 효과가 있다.According to an embodiment of the present invention, an additional compact computing module is additionally defined to enable high-definition video call using IPTV STB, thereby improving both resource efficiency and time efficiency.
또한, 본 발명의 다른 일실시예에 의하면, 기존의 STB와의 호환성을 유지하면서 영상 통화 서비스가 가능하도록 컴퓨팅 모듈을 설계하는 장점이 있다.In addition, according to another embodiment of the present invention, there is an advantage of designing a computing module to enable a video call service while maintaining compatibility with the existing STB.
그리고, 본 발명의 또 다른 일실시예에 의하면, 새롭게 정의된 컴퓨팅 모듈을 포함한 IPTV 시스템의 변경되는 신호 흐름(call flow)에 대한 프로토콜을 구체적으로 정의하는 효과가 있다.Further, according to another embodiment of the present invention, there is an effect of specifically defining a protocol for a changed call flow of an IPTV system including a newly defined computing module.
보다 구체적인 발명의 효과에 대해서는, 이하 목차에서 상세히 후술하도록 하겠다.More specific effects of the invention will be described later in detail in the table of contents.
도 1은 일반적인 영상 통화 기술을 설명하고 있는 도면이다.
도 2는 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함하는 전체 시스템을 도시한 도면이다.
도 3은 본 발명의 일실시예에 의한 컴퓨팅 모듈 및 STB의 계층 구조(Architecture layer)를 도시한 도면이다.
도 4는 본 발명의 일실시예에 의한 컴퓨팅 모듈의 하드웨어 구조를 도시한 도면이다.
도 5는 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함한 전체 시스템의 제1 call flow 를 도시한 플로우 차트이다.
도 6은 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함한 전체 시스템의 제2 call flow 를 도시한 플로우 차트이다.
도 7은 도 6에 도시된 신호 흐름을, 각 구성요소들의 관점에서 도시한 도면이다.
도 8은 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함한 전체 시스템의 제3 call flow 를 도시한 플로우 차트이다.
도 9는 도 8에 도시된 신호 흐름을, 각 구성요소들의 관점에서 도시한 도면이다.
도 10 내지 도 12는 본 발명의 일실시예에 의한 컴퓨팅 모듈을 이용하여 상대방 디바이스에 발신 전화를 거는 유저 인터페이스(User Interface)를 도시한 도면이다.
도 13 내지 도 15는 본 발명의 일실시예에 의한 컴퓨팅 모듈을 이용하여 상대방 디바이스로부터 착신 전화를 받는 유저 인터페이스(User Interface)를 도시한 도면이다.1 illustrates a general video call technique.
2 is a diagram illustrating an entire system including a computing module according to an embodiment of the present invention.
3 is a diagram illustrating an architecture layer of a computing module and an STB according to an embodiment of the present invention.
4 is a diagram illustrating a hardware structure of a computing module according to an embodiment of the present invention.
5 is a flowchart illustrating a first call flow of an entire system including a computing module according to an embodiment of the present invention.
6 is a flowchart illustrating a second call flow of the entire system including the computing module according to an embodiment of the present invention.
FIG. 7 is a view showing the signal flow shown in FIG. 6 in terms of the respective components.
8 is a flowchart illustrating a third call flow of the entire system including the computing module according to an embodiment of the present invention.
FIG. 9 is a view illustrating the signal flow shown in FIG. 8 in terms of components.
10 to 12 illustrate a user interface for making an outgoing call to a counterpart device using a computing module according to an embodiment of the present invention.
13 to 15 illustrate a user interface for receiving an incoming call from a counterpart device using a computing module according to an embodiment of the present invention.
이하에서는 도면을 참조하여 본 발명을 더욱 상세하게 설명한다. Hereinafter, the present invention will be described in more detail with reference to the drawings.
이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함을 고려하여 부여되는 것으로서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.The suffix "module" and " part "for components used in the following description are given merely for ease of description, and the" module "and" part "
나아가, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시 예를 상세하게 설명하지만, 본 발명이 실시 예들에 의해 제한되거나 한정되는 것은 아니다. Furthermore, although an embodiment of the present invention will be described in detail with reference to the accompanying drawings and the contents described in the accompanying drawings, the present invention is not limited or restricted by the embodiments.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.As used herein, terms used in the present invention are selected from general terms that are widely used in the present invention while taking into account the functions of the present invention, but these may vary depending on the intention or custom of a person skilled in the art or the emergence of new technologies. In addition, in certain cases, there may be a term arbitrarily selected by the applicant, in which case the meaning thereof will be described in the description of the corresponding invention. Therefore, it is intended that the terminology used herein should be interpreted based on the meaning of the term rather than on the name of the term, and on the entire contents of the specification.
도 1은 일반적인 영상 통화 기술을 설명하고 있는 도면이다. 이하, 도 1을 참조하여 일반적인 영상 통화 기술 및 현재 STB 등의 문제점 등을 고찰해 보도록 하겠다.1 illustrates a general video call technique. Hereinafter, with reference to FIG. 1, the general video call technology and the current STB, etc. will be considered.
IPTV의 주요 관련 기술은 네트워크에서 발생할 수 있는 패킷 손실과 지연을 완충해 주는 스트리밍 기술, 콘텐츠 지적재산권을 보호하기 위한 접근 제어 및 복호화 기술, IPTV 서비스를 일관성 있게 표현하고 이를 검색 하고 선택할 수 있게 하는 콘텐츠 브라우징 기술, 사용자에게 멀티미디어 비디오 음성을 표현해 주는 AV 기술 등이 있다.The main related technologies of IPTV are streaming technology that buffers packet loss and delays that may occur in the network, access control and decryption technology to protect content intellectual property rights, and content that provides a consistent representation, search and selection of IPTV services. Browsing technology, AV technology to express the multimedia video voice to the user.
현재 일반적인 IPTV 플랫폼의 기술적인 초점은 1080i 급의 고화질 영상데이터를 TV에 표출해 주는 것에 맞추어져 있다. 따라서, 종래 기술에 의한 STB는, 1080i급의 HD 비디오 및 음성 데이터를 MPEG2TS over UDP 전송 계층을 통하여 사용자에게 전달 하여 TV에 무리 없이 표현해 주기 위한 H/W Decoder 가 핵심기술로 이루어져 있다. The technical focus of the current IPTV platform is to display 1080i high definition image data on TV. Therefore, the STB according to the prior art has a H / W decoder to deliver 1080i-class HD video and audio data to the user through the MPEG2TS over UDP transport layer without difficulty.
나아가, 영상통화의 주요 관련 기술은 IP망에서 미디어를 송수신하기 위한 프로토콜 스택 기술인 RTP 기술과 전화를 연결시켜 주기 위한 SIP/SDP 기술과 이를 연동 시켜 주기 위한 Proxy/Server 기술로 이루어져 있다. Furthermore, the main related technologies of video call consist of RTP technology, which is a protocol stack technology for transmitting and receiving media in IP network, and SIP / SDP technology for connecting a telephone, and Proxy / Server technology for interworking it.
도 1에 도시된 바와 같이, 영상통화의 주요 요소인 SIP는 사용자들간에 세션을 초기화하는 프로토콜이며, 주된 기능은 사용자 위치 서비스와 호설정, 호 사용자 관리 등으로서, SIP에는 어떤 세션에 대하여 특별한 타입을 정의해 두고 있지 않으며 쉽게 상호적인 세션을 설정 하게 하는데 목적이 있다. 그리고, SDP를 이용하여 멀티미디어 세션을 기술하여 코덱간의 상호 연동성을 유지 시켜 주도록 한다.As shown in Fig. 1, SIP, which is a major element of a video call, is a protocol for initiating a session between users, and its main functions are user location service, call setup, call user management, and the like. It is not defined and is intended to make it easy to establish interactive sessions. In addition, the multimedia session is described using SDP to maintain interoperability between codecs.
그러나, IPTV에서의 영상통화는 IPTV의 핵심 적인 기술 대부분이 디코더 기반으로 이루어져 있기 때문에, 상대방 디바이스로 압축된 영상을 실시간으로 전송 하는 영상통화 기술을 접목하기 어려운 문제점이 있었다.However, since video calls in IPTV are mostly based on decoders, most of IPTV's core technologies are decoder-based, which makes it difficult to incorporate video call technology that transmits compressed video to a counterpart device in real time.
따라서, 이와 같은 종래 기술에 의한 IPTV STB의 문제점을 해결하기 위하여, H/W 비디오 인코더와 카메라, SIP 스택 등이 내장된 별도의 컴퓨팅 모듈을 도입하여, 종래 기술에 따른 한계를 극복하고 IPTV 에서 영상 통화가 실시간으로 신속히 이루어 지는 솔루션을 제시하고자 한다. 이하 설명하도록 하겠다.Therefore, in order to solve the problems of the conventional IPTV STB, by introducing a separate computing module with a built-in H / W video encoder, a camera, a SIP stack, and the like overcoming the limitations of the prior art and the image in IPTV I would like to present a solution that allows calls to be made in real time. I will explain below.
도 2는 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함하는 전체 시스템을 도시한 도면이다. 이하, 도 2를 참조하여 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함하는 전체 시스템을 개략적으로 설명하면 다음과 같다.2 is a diagram illustrating an entire system including a computing module according to an embodiment of the present invention. Hereinafter, the overall system including the computing module according to an embodiment of the present invention will be described with reference to FIG. 2 as follows.
전술하여 설명한 바와 같이, 기존 STB는 압축된 영상을 실시간으로 전송하는 인코딩 기능이 없으므로 도 2에 도시된 바와 같이 STB(210)와 인터페이스로 연결된 별도의 컴퓨팅 모듈(220)을 추가 정의한다. 상기 컴퓨팅 모듈(220)는 영상 통화 서비스 과정에서 카메라로 촬영된 사용자의 영상에 대한 비디오 데이터를 고압축하여 미디어 서버(240)로 전송하는 역할을 담당한다. 상기 미디어 서버(240)와 상기 컴퓨팅 모듈(220)은 SIP(Session Initiation Protocl) 프로토콜 통신이 가능하도록 세션이 설정된다.As described above, since the existing STB does not have an encoding function for transmitting a compressed image in real time, as shown in FIG. 2, an
한편, 도 2에서는 상기 미디어 서버(240)가 제1비디오 데이터 등의 미디어를 상기 STB(210)로 전송하고, 상기 컴퓨팅 모듈(220)이 제2비디오 데이터 등의 미디어를 상기 미디어 서버(240)로 전송하는 것으로 도시하였으나, 반드시 이에 한정하는 것은 아니다. 즉, 본 발명의 다른 일실시예에 의한 상기 컴퓨팅 모듈(220)이 상기 STB(210)에 임베디드된 하나의 형태(230)로 설계하여 영상 통화 서비스를 구현하는 것도 가능하다.In FIG. 2, the
도 3은 본 발명의 일실시예에 의한 컴퓨팅 모듈 및 STB의 계층 구조(Architecture layer)를 도시한 도면이다. 이하, 도 3을 참조하여 본 발명의 일실시예에 의한 컴퓨팅 모듈과 STB의 외관 및 계층 구조를 구체적으로 설명하면 다음과 같다.3 is a diagram illustrating an architecture layer of a computing module and an STB according to an embodiment of the present invention. Hereinafter, the appearance and hierarchy of the computing module and the STB according to an embodiment of the present invention will be described in detail with reference to FIG. 3.
우선, 도 3의 (a)에 도시된 바와 같이, 본 발명의 일실시예에 의한 컴퓨팅 모듈(320)은 STB(310)와 인터페이스로 연결된다. 상기 컴퓨팅 모듈(320)은 상기 STB(310)와 USB 인터페이스 또는 네트워크 인터페이스로 연결될 수도 있으며, 다른 일실시예에 의하면 상기 STB(310)에 임베디드된 형태로 설계할 수도 있다.First, as shown in FIG. 3A, the
나아가, 도 3의 (b)에 도시된 바와 같이, 전술한 STB(310) 내부에 설계되는 계층 구조는 예컨대 미들웨어(311), 영상 호 API(312), IP 테이블 변환 레이어(313), 그리고 USB CDC(Communication Device Class)(314) 등을 포함한다.Furthermore, as shown in FIG. 3B, the hierarchical structure designed in the above-described
상기 IP 테이블 변환 레이터(313)는, STB 커널 기능 및 네트워크 변환(Network Transition) 기능 등을 담당하며, 상기 API(312)는, Preview, Call Control, Conference Control 기능 등을 담당하도록 설계한다.The IP
또한, 도 3의 (b)에 도시된 바와 같이, 전술한 컴퓨팅 모듈(320) 내부에 설계되는 계층 구조는 예컨대 카메라/콜 매니저(321), SIP/미디어 코덱(322), 그리고 USB CDC(323) 등을 포함한다.In addition, as shown in FIG. 3B, the hierarchical structure designed inside the above-described
즉, 본 발명의 일실시예에 의하면, IPTV의 STB(310)은 기본적인 영상 호 API(312)를 통하여 STB의 메뉴구조 내에서 영상통화를 할 수 있는 API를 제공 하며, 카메라/콜 매니저(321)가 내장된 컴퓨팅 모듈(320)의 SIP/미디어 코덱(322) 등을 이용하여, IPTV에서의 영상통화를 구현하였다.That is, according to an embodiment of the present invention, the
그리고, 미디어 표출을 STB(310)에서 할 수 있도록 전송 프로토콜을 영상통화 기술의 RTP 대신 IPTV에서의 전송 표준 프로토콜인 MPEG2TS를 통하여 구현하였다.In addition, the transport protocol is implemented through the MPEG2TS, which is the transport standard protocol in IPTV, instead of the RTP of the video call technology, so that the media can be expressed in the
다시 정리하여 설명하면, 본 발명의 일실시예에 의한 컴퓨팅 모듈(320)은 IPTV를 위한 STB(310)와 커넥티드 되어 있는 것으로 가정한다.In summary, it is assumed that the
나아가, 상기 컴퓨팅 모듈(320)은, 영상 통화 서비스의 초기화 프로세스를 처리하는 SIP 스택(Session Initiation Protocol stack)(322)과, 상기 IPTV 주변에 위치한 적어도 하나 이상의 사용자를 촬영하는 카메라 모듈(321)과, 상기 카메라 모듈(321)에 의해 촬영된 적어도 하나 이상의 사용자에 대응하는 제1비디오 데이터를 제2비디오 데이터로 인코딩 하는 비디오 인코더(322)와, 그리고 상기 영상 통화 서비스에서 사용되기 위한 상기 인코딩된 제2비디오 데이터를 상기 STB(310)로 전송하며, 상기 STB로부터 컨트롤 신호를 수신하는 제1USB 인터페이스(Universal Serial Bus interface)(323)를 포함한다.Further, the
또한, 상기 STB(310)는, 상기 영상 통화 서비스의 호 처리를 실행하는 적어도 하나 이상의 API(Application Programming Interface)(312)와, 그리고 상기 컴퓨팅 모듈(320)로부터 전송된 상기 인코딩된 제2비디오 데이터를 수신하고, 상기 컴퓨팅 모듈로 컨트롤 신호를 전송하는 제2USB 인터페이스(314)를 포함한다.The
상기 인코딩된 제2비디오 데이터는, 예컨대 MPEG2-TS(Moving Picture Experts Group 2-Transport Stream) 형태로 외부 미디어 서버로 전송된다. 나아가, 상기 외부 미디어 서버는, 예컨대 상기 영상 통화 서비스의 상대방 IPTV 의 STB와 네트워크로 연결되어 있다.The encoded second video data is transmitted to an external media server, for example, in the form of Moving Picture Experts Group 2-Transport Stream (MPEG2-TS). Furthermore, the external media server is connected to the STB of the other party's IPTV of the video call service through a network.
따라서, 본 발명의 일실시예에 의한 컴퓨팅 모듈(320)을 이용하는 경우, 영상 통화 과정에서 720x480, SD, H.264, MPEG4, 30fps 등의 비디오 인코딩이 실시간으로 이루어질 수 있으며, SIP Signaling 및 AAC 등의 오디오 인코딩(Audio Encoding)도 가능하다. 그리고, 영상 통화를 위한 별도의 STB를 추가 제작할 필요가 없는 특유의 효과 및 장점이 있다.Therefore, when using the
도 4는 본 발명의 일실시예에 의한 컴퓨팅 모듈의 하드웨어 구조를 도시한 도면이다. 이하, 도 4를 참조하여 본 발명의 일실시예에 의한 컴퓨팅 모듈의 하드웨어 구조를 보다 구체적으로 설명하면 다음과 같다. 다만, 도 4는 본 발명의 일실시예이며, 본 발명의 권리범위는 원칙적으로 특허청구범위에 의해 정해져야 함은 명백하다.4 is a diagram illustrating a hardware structure of a computing module according to an embodiment of the present invention. Hereinafter, a hardware structure of a computing module according to an embodiment of the present invention will be described in detail with reference to FIG. 4. However, Figure 4 is an embodiment of the present invention, it is obvious that the scope of the present invention should be determined in principle by the claims.
도 4에 도시된 바와 같이, 본 발명의 일실시예에 의한 컴퓨팅 모듈(400)은 카메라(401), 마이크(402), 인코더(403), 네트워크 인터페이스(404), 그리고 컨트롤러(405) 등을 포함하여 이루어 진다.As shown in FIG. 4, the
상기 카메라(401)는 영상 통화 서비스를 위하여 IPTV를 사용하는 유저를 촬영하여 비디오 데이터를 디텍트 하는 기능을 담당하며, 상기 마이크(402)는 영상 통화 서비스 구현과정에서 상기 유저의 음성 등 오디오 데이터를 디텍트 하는 역할을 담당한다.The camera 401 is responsible for detecting a video data by photographing a user who uses an IPTV for a video call service, and the
또한, 상기 인코더(403)는 상기 디텍트된 비디오 데이터 및 오디오 데이터를 인코딩 하는 기능을 수행한다. 보다 구체적으로 예를 들면, AAC(Advanced Audio Coding) 인코더, H.264 인코더, MPEG4 인코더 중 적어도 하나 이상을 결합하여 설계할 수도 있다.In addition, the
그리고, 상기 네트워크 인터페이스(404)는 STB와 연결되기 위한 하드웨어 구조로서 USB 인터페이스 등이 사용될 수 있으며, 상기 컨트롤러(405)는 컴퓨팅 모듈(400)의 전체 구성요소들을 제어하는 역할을 수행한다.In addition, the
도 5는 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함한 전체 시스템의 제1 call flow 를 도시한 플로우 차트이다. 이하, 도 5를 참조하여 본 발명의 일실시예에 의한 제1 컴퓨팅 모듈, 제1 STB, 업데이트 서버, SIP 서버, 단말 정보 서버, 미디어 서버, 제2 STB, 그리고 제2 컴퓨팅 모듈간 신호 흐름을 설명하면 다음과 같다.5 is a flowchart illustrating a first call flow of an entire system including a computing module according to an embodiment of the present invention. Hereinafter, a signal flow between a first computing module, a first STB, an update server, a SIP server, a terminal information server, a media server, a second STB, and a second computing module according to an embodiment of the present invention will be described with reference to FIG. 5. The explanation is as follows.
도 5는 전술하여 설명한 컴퓨팅 모듈을 이용하여 영상 통화 서비스를 제공하는 전체적인 프로세스를 도시하고 있다. 다만, 도 5는 본 발명의 일실시예이며, 본 발명의 권리범위는 원칙적으로 특허청구범위에 의해 정해져야 한다.5 shows an overall process for providing a video call service using the computing module described above. However, Figure 5 is an embodiment of the present invention, the scope of the present invention should be determined in principle by the claims.
제1컴퓨팅 모듈은, 부팅 후 업데이트 서버(UPDATE SERVER)에 UPDATE_CHECK 메시지를 전송한다(S501).The first computing module transmits an UPDATE_CHECK message to the update server (UPDATE SERVER) after booting (S501).
업데이트가 필요한 경우, 상기 제1컴퓨팅 모듈은 업데이트 서버로부터 바이너리와 CONF 파일을 다운받는다(S502). 다운받은 바이너리로 수정 후 메인 모듈을 실행한다.If an update is needed, the first computing module downloads the binary and the CONF file from the update server (S502). After modifying the downloaded binary, run the main module.
상기 제1컴퓨팅 모듈은, 상기 제1STB에게 RESOURCE_REQ 를 전송한다(S503). RESOURCE_REQ 메시지를 전송할 때 SUBS_ID(가입자 정보)를 같이 넘겨준다.The first computing module transmits RESOURCE_REQ to the first STB (S503). When sending a RESOURCE_REQ message, the SUBS_ID (subscriber information) is passed along.
RESOURCE_REQ 메시지를 수신한 제1STB는 자신의 IP, MAC, STB_SERIALNUMBER 정보 등을 RESOURCE_RES에 실어 제1컴퓨팅 모듈에 전달한다(S504). 상기 제1컴퓨팅 모듈은, 전달 받은 정보로 SIP STACK를 초기화 한다. 이때 지원하는 코덱 리스트(CODEC LIST)는 CONF파일에 저장된 정보를 사용한다.Receiving the RESOURCE_REQ message, the first STB transfers its IP, MAC, STB_SERIALNUMBER information, and the like to the RESOURCE_RES to the first computing module (S504). The first computing module initializes the SIP STACK with the received information. At this time, the supported codec list uses the information stored in the CONF file.
상기 제1컴퓨팅 모듈은, 가지고 있던 SUBS_ID와 상기 제1STB로부터 받은 STB_SERIALNUMBER 정보로 REGISTER 메시지를 구성하여 상기 SIP 서버로 전송한다(S505).The first computing module constructs a REGISTER message with the SUBS_ID and the STB_SERIALNUMBER information received from the first STB and transmits the message to the SIP server (S505).
상기 SIP 서버는 단말 정보 서버에게 인가된 사용자인지 아닌지를 구분하기 위한 PERMISSION_CHECK 요청을 한다(S506).The SIP server makes a PERMISSION_CHECK request to distinguish whether or not the user is authorized to the terminal information server (S506).
상기 단말 정보 서버는 해당 사용자가 인가된 사용자인지를 판단하여 PERMISSION_CHECK에 대한 OK/NOK 응답을 전달한다(S507).The terminal information server determines whether the corresponding user is an authorized user and transmits an OK / NOK response to PERMISSION_CHECK (S507).
정상적으로 인가된 사용자일 경우, SIP 서버는 제1컴퓨팅 모듈에 200 OK 메시지를 전송한다(S508). 반면, SIP 서버가 인증에 실패하게 되면 NOK 응답을 전송한다.If the user is normally authorized, the SIP server transmits a 200 OK message to the first computing module (S508). On the other hand, if the SIP server fails authentication, it sends a NOK response.
상기 제1컴퓨팅 모듈은, REGISTER의 OK/NOK여부를 ATTACH_NOTIFY 메시지로 상기 제1STB로 전달한다(S509). 나아가, NOK의 경우 실패 이유도 포함하도록 설계한다(예를 들어, 인가되지 않은 사용자, SIP 서버에 전송실패 등등)The first computing module transmits the OK / NOK of the register to the first STB in an ATTACH_NOTIFY message (S509). Furthermore, the NOK is designed to include the reason for failure (eg unauthorized user, transmission failure to SIP server, etc.).
ATTACH_NOTIFY 메시지를 수신한 후 초기 상태에 따라 CHANGE_TERM_STATE 메시지가 전송된다(S510). 초기 상태가 착신 가능한 상태일 경우 TRUE를, 착신 불가능한 상태일 경우 FALSE를 전송한다. After receiving the ATTACH_NOTIFY message, the CHANGE_TERM_STATE message is transmitted according to the initial state (S510). TRUE is sent if the initial state is available. If the call is impossible, FALSE is sent.
제1컴퓨팅 모듈은, 상기 제1STB에게 CHANGE_TERM_STATE 메시지에 대한 응답으로 OK/NOK를 전송한다(S511). 따라서, 사용자는 호 대기 메뉴로 진입할 수가 있다(S512).The first computing module transmits OK / NOK to the first STB in response to the CHANGE_TERM_STATE message (S511). Therefore, the user can enter the call waiting menu (S512).
사용자가 호 대기 메뉴를 선택한 경우, 상기 제1STB는, 상기 제1컴퓨팅 모듈에게 CHANGE_TERM_STATE(TRUE) 메시지를 전송함으로써, 상기 제1STB가 착신 가능 상태로 변경되었음을 알려준다(S513).When the user selects the call waiting menu, the first STB transmits a CHANGE_TERM_STATE (TRUE) message to the first computing module, thereby notifying that the first STB has changed to a callable state (S513).
상기 제1컴퓨팅 모듈은, 이전에 수신하였던 권한 정보를 상기 제1STB 에 전달하고(S514), 상기 제1STB는 사용자의 권한이 없을 경우, ‘권한이 없습니다’ 등의 메시지를 보여줄 수 있다. 반면, 권한이 있을 경우 대기 화면으로 바뀌고 콜 요청이 들어올 때까지 대기한다.The first computing module transmits the previously received authority information to the first STB (S514), and when the first STB has no authority of the user, the first computing module may display a message such as “no authority”. On the other hand, if you have permission, it goes to the standby screen and waits for a call request.
사용자는 리모콘의 ‘전화걸기’ 단축 버튼을 클릭하고, 상기 제1STB는 이전의 동작중이던 모드는 모두 종료 한 뒤 발신 화면으로 이동한다. 상기 제1STB는 상기 제1컴퓨팅 모듈에 CALL_SETUP_REQ 메시지를 전송하고(S515), 상기 메시지는 SUBS_ID, RECV IP, RECV PORT, RECV TS정보(예를 들어, program number, audio stream id, audio stream type, video stream id, video stream type) 등을 포함한다.The user clicks the 'dial' button on the remote controller, and the first STB moves to the calling screen after all previous modes are terminated. The first STB transmits a CALL_SETUP_REQ message to the first computing module (S515), and the message includes SUBS_ID, RECV IP, RECV PORT, and RECV TS information (eg, program number, audio stream id, audio stream type, video). stream id, video stream type).
RINGING 메시지를 수신한 상기 제1STB는 화면에 ‘전화연결중입니다’ 라는 메시지가 보여진다. 상기 제1STB는 상기 제1컴퓨팅 모듈에게 PREVIEW_REQ 메시지를 전송한다(S516).Upon receiving the RINGING message, the first STB displays the message 'Phone connection is in progress' on the screen. The first STB transmits a PREVIEW_REQ message to the first computing module (S516).
상기 제1컴퓨팅 모듈은 상기 제1STB에 PREVIEW_OK 메시지를 전송하고(S517), PREVIEW 화면 전송을 시작한다. 상기 제1STB의 대기화면에는 PREVIEW영상이 보여진다.The first computing module transmits a PREVIEW_OK message to the first STB (S517), and starts to transmit a PREVIEW screen. A PREVIEW image is shown on the standby screen of the first STB.
상기 제1컴퓨팅 모듈은, 상기 제1STB에게 받은 정보들로 INVITE메시지를 구성해 SIP 서버에 전달한다(S518). 상기 SIP 서버는 INVITE 메시지를 미디어 서버로 전달한다. 다만, 상기 미디어 서버를, dispatcher 서버로 명명할 수도 있다.The first computing module constructs an INVITE message with the information received from the first STB and transmits the INVITE message to the SIP server (S518). The SIP server forwards the INVITE message to the media server. However, the media server may be called a dispatcher server.
상기 미디어 서버는 INVITE 메시지를 받은 후 SDP 수정 등의 작업을 거쳐 다시 SIP 서버에 메시지를 전달한다(S519).After receiving the INVITE message, the media server delivers the message back to the SIP server through SDP modification and the like (S519).
상기 SIP 서버는 INVITE 메시지를 상대편 컴퓨팅 모듈인 제2 컴퓨팅 모듈에 전달한다(S520).The SIP server transmits the INVITE message to the second computing module that is the opposite computing module (S520).
상기 제2컴퓨팅 모듈은, INVITE 메시지를 받고 착신 가능 상태일 경우 바로 180 RINGING 메시지를 SIP 서버로 전송하며, 상기 메시지를 받은 SIP 서버는 해당 메시지를 발신 측 모듈인 제1컴퓨팅 모듈에 전달한다(S521).When receiving the INVITE message and receiving the INVITE message, the second computing module immediately transmits the 180 RINGING message to the SIP server, and the SIP server receiving the message transmits the message to the first computing module which is the calling module (S521). ).
180 RINGING메시지를 내보낸 상기 제2컴퓨팅 모듈은 상기 제2STB에게 CALL_REQUEST 메시지를 전송하고, 180 RINGING 메시지를 수신 한 제1컴퓨팅 모듈은 RINGING 메시지를 상기 제1STB에 전달한다(S522). 또한, 상기 CALL_REQUEST 메시지는 예컨대, 상대방의 SUBS_ID를 포함하고 있다. The second computing module that sends the 180 RINGING message transmits a CALL_REQUEST message to the second STB, and the first computing module that receives the 180 RINGING message transmits a RINGING message to the first STB (S522). In addition, the CALL_REQUEST message includes the counterpart's SUBS_ID, for example.
사용자가 전화 요청을 수락하면 상기 제2STB는 상기 제2컴퓨팅 모듈에 CALL_CATCH 메시지를 전달한다(S523). 상기 CALL_CATCH 메시지는 예컨대, RECV_IP, RECV_PORT, RECV_TS정보(예를 들어, program number, audio stream id, audio stream type, video stream id, video stream type) 등을 포함하고 있다.If the user accepts the call request, the second STB transfers a CALL_CATCH message to the second computing module (S523). The CALL_CATCH message includes, for example, RECV_IP, RECV_PORT, and RECV_TS information (eg, program number, audio stream id, audio stream type, video stream id, video stream type), and the like.
상기 제2컴퓨팅 모듈은, 상기 제2STB 로부터 CALL_CATCH 메시지를 받고, SIP 서버에 200 OK 메시지를 전송한다(S524).The second computing module receives a CALL_CATCH message from the second STB and transmits a 200 OK message to a SIP server (S524).
상기 SIP 서버는 200 OK 메시지를 미디어 서버로 전달 해 SDP 수정 등의 작업을 거치고, 상기 제2STB는 CALL_CATCH 메시지로 전화 요청을 수락한 후 PREVIEW_REQ 메시지로 상기 제2컴퓨팅 모듈에 PREVIEW 영상을 요청한다(S525).The SIP server delivers a 200 OK message to the media server, undergoes an SDP modification, and the like, and the second STB requests a PREVIEW image to the second computing module with a PREVIEW_REQ message after accepting a call request with a CALL_CATCH message (S525). ).
상기 미디어 서버는 200 OK의 메시지를 수정 해 SIP 서버로 전달하고 SIP 서버는 발신 측 제1컴퓨팅 모듈에 200 OK를 전달한다. 나아가, 수신측 제2컴퓨팅 모듈은 상기 제2STB에 PREVIEW_OK 메시지를 전송하고 PREVIEW 화면 전송을 시작한다(S526). 상기 제2STB의 대기화면에는 PREVIEW 영상이 보여진다.The media server modifies the 200 OK message and delivers it to the SIP server, and the SIP server delivers 200 OK to the originating first computing module. In operation S526, the receiving side second computing module transmits a PREVIEW_OK message to the second STB. A PREVIEW image is shown on the standby screen of the second STB.
200 OK를 받은 발신 측 제1컴퓨팅 모듈은 ACK 메시지를 SIP 서버에 전송한다. SIP 서버는 ACK를 수신 측 제2컴퓨팅 모듈에 전달한다(S527). The first computing module receiving the 200 OK transmits an ACK message to the SIP server. The SIP server transmits the ACK to the receiving side second computing module (S527).
발신 측 제1컴퓨팅 모듈은 상기 제1STB에 CALL_ESTABLISHED 메시지를 전송해 콜 세션이 성립되었음을 알려준다. 또한 ACK 메시지를 수신한 수신 측 제2컴퓨팅 모듈은 수신 측 상기 제2STB에 CALL_ESTABLISHED 메시지를 전달하여 콜 세션이 성립되었음을 알려준다.The originating first computing module sends a CALL_ESTABLISHED message to the first STB to inform that the call session is established. In addition, the receiving side second computing module receiving the ACK message transmits a CALL_ESTABLISHED message to the receiving side second STB to inform that the call session is established.
도 6은 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함한 전체 시스템의 제2 call flow 를 도시한 플로우 차트이다. 이하, 도 6을 참조하여, STB와 연결된 IPTV에서 영상 통화 서비스 중 발신을 위한 호 신호를 처리하는 제어 방법을 설명하면 다음과 같다.6 is a flowchart illustrating a second call flow of the entire system including the computing module according to an embodiment of the present invention. Hereinafter, referring to FIG. 6, a control method of processing a call signal for an outgoing video call service in an IPTV connected to an STB will be described.
본 발명의 일실시예에 의하면, STB 로부터 상기 STB와 커넥티드된 컴퓨팅 모듈로, 콜 셋업 요청 메시지를 전송한다(제1단계). 또한, 상기 컴퓨팅 모듈로부터 SIP 서버로, 인바이트 메시지를 전송한다(제2단계).According to an embodiment of the present invention, a call setup request message is transmitted from the STB to the computing module connected to the STB (step 1). In addition, an invite message is transmitted from the computing module to the SIP server (step 2).
상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 영상 통화가 시도되고 있음을 알리는 메시지를 전송한다(제3단계). 상기 컴퓨팅 모듈로부터 상기 STB로, 상기 영상 통화가 시도되고 있음을 알리는 메시지를 포워딩 한다(제4단계).In step 3, a message indicating that a video call is being attempted is transmitted from the SIP server to the computing module. Step 4, forwarding a message indicating that the video call is being attempted from the computing module to the STB.
상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 상기 영상 통화 서비스의 상대방 디바이스가 콜 요청을 수락하였음을 표시하는 메시지를 전송한다(제5단계). 상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상기 제5단계의 메시지에 대한 컨펌 메시지를 전송한다(제6단계).In step 5, a message indicating that the counterpart device of the video call service has accepted the call request is transmitted from the SIP server to the computing module. The confirmation message for the message of step 5 is transmitted from the computing module to the SIP server (step 6).
상기 컴퓨팅 모듈로부터 상기 STB로, 콜 세션이 정상적으로 이루어 졌음을 표시하는 메시지를 전송한다(제7단계). 그리고, 상기 컴퓨팅 모듈에 의해 인코딩된 비디오 데이터를 미디어 서버로 전송한다(제8단계). 상기 제8단계는, 전술한 컴퓨팅 모듈 또는 STB 에서 실행될 수도 있다.In step 7, a message indicating that a call session is normally made is transmitted from the computing module to the STB. Then, the video data encoded by the computing module is transmitted to the media server (step 8). The eighth step may be executed in the above-described computing module or STB.
본 발명의 다른 일실시예에 의하면, 상기 제1단계는, 상기 STB로부터 상기 컴퓨팅 모듈로, 상기 영상 통화 서비스의 실행 전 대기 화면을 요청하는 메시지를 전송하고(제1-2단계), 그리고 상기 컴퓨팅 모듈로부터 상기 STB로, 상기 영상 통화 서비스의 실행 전 대기 화면의 비디오 데이터를 전송한다(제1-3단계).According to another embodiment of the present invention, in the first step, the STB transmits a message requesting a standby screen before executing the video call service from the STB to the computing module (steps 1-2), and The video data of the standby screen before the execution of the video call service is transmitted from the computing module to the STB (steps 1-3).
또한, 본 발명의 또 다른 일실시예에 의하면, 상기 제2단계는, 상기 인바이트 메시지의 수신 IP 주소를 상기 미디어 서버의 IP 주소로 변경하고(제2-2단계), 그리고 상기 인바이트 메시지를 상기 변경된 IP 주소로 전송한다(제2-3단계).According to another embodiment of the present invention, the second step may include changing a received IP address of the invite message to an IP address of the media server (step 2-2), and the invite message. Transmit to the changed IP address (step 2-3).
나아가, 상기 STB와 커넥티드된 컴퓨팅 모듈은, 상기 영상 통화 서비스의 초기화 프로세스를 처리하는 SIP 스택과, 카메라 모듈에 의해 촬영된 적어도 하나 이상의 사용자에 대응하는 제1비디오 데이터를 제2비디오 데이터로 인코딩 하는 비디오 인코더와, 그리고 상기 영상 통화 서비스에서 사용되기 위한 상기 인코딩된 제2비디오 데이터를 상기 STB로 전송하며, 상기 STB로부터 컨트롤 신호를 수신하는 USB 인터페이스를 포함한다. 이는 전술하여 설명한 도 3 및 도 4를 참조하여 이해할 수가 있다.In addition, the computing module connected to the STB may encode the first video data corresponding to at least one user captured by the camera module and the SIP stack for processing the initialization process of the video call service into second video data. And a USB interface for transmitting the encoded second video data for use in the video telephony service to the STB and receiving a control signal from the STB. This can be understood with reference to FIGS. 3 and 4 described above.
한편, 도 6을 참조하여 전술하여 설명한 단계들을 보다 구체적으로 설명하면 다음과 같다.Meanwhile, the steps described above with reference to FIG. 6 will be described in more detail.
사용자는 리모콘의 ‘전화걸기’ 단축 버튼을 클릭하고, STB는 이전의 동작중이던 모드는 모두 종료 한 뒤 발신 화면으로 이동한다. 상기 STB는 컴퓨팅 모듈에 CALL_SETUP_REQ메시지를 전송하고(S601), 메시지는 예를 들어, SUBS_ID, RECV IP, RECV PORT, RECV TS정보(예컨대, program number, audio stream id, audio stream type, video stream id, video stream type) 등을 포함한다.The user clicks the 'Call' shortcut button on the remote control, and the STB exits all previous modes and moves to the calling screen. The STB transmits a CALL_SETUP_REQ message to the computing module (S601), and the message includes, for example, SUBS_ID, RECV IP, RECV PORT, RECV TS information (eg, program number, audio stream id, audio stream type, video stream id, video stream type).
즉, 상기 STB는 수신 포트(RECEIVE PORT)를 예약(RESERVE) 하고, CALL_SETUP_REQ 메시지를 전송한다.That is, the STB reserves a RECEIVE PORT and transmits a CALL_SETUP_REQ message.
RINGING 메시지를 수신한 상기 STB는 화면에 ‘전화연결중입니다’ 라는 메시지를 출력하고, 상기 STB는 상기 컴퓨팅 모듈에게 PREVIEW_REQ 메시지를 전송한다(S602). 즉, 프리뷰 포트(PREVIEW PORT)를 예약(RESERVE)하고 PREVIEW_REQ 메시지를 전송한다.The STB that has received the RINGING message outputs a message 'Phone connection is in progress' on the screen, and the STB transmits a PREVIEW_REQ message to the computing module (S602). That is, it reserves a preview port and transmits a PREVIEW_REQ message.
상기 컴퓨팅 모듈은, 상기 STB에 PREVIEW_OK 메시지를 전송하고 PREVIEW 화면 전송을 시작한다(S603). 따라서, 상기 STB의 대기화면에는 PREVIEW 영상이 보여진다. The computing module transmits a PREVIEW_OK message to the STB and starts to transmit a PREVIEW screen (S603). Therefore, the PREVIEW image is shown on the standby screen of the STB.
상기 컴퓨팅 모듈은, 상기 STB에게 받은 정보들로 INVITE메시지를 구성해 SIP 서버에 전달한다(S604). 만약, 상기 SIP 서버로부터 100 TRYING 메시지가 오지 않을 경우 (예를 들어, SIP 서버가 제대로 동작하지 않거나, 상대편 단말기가 네트워크 연결이 끊어진 경우 등) 소정의 시간 경과 후 재시도(RETRY) 한다.The computing module constructs an INVITE message based on the information received from the STB and transmits the INVITE message to the SIP server (S604). If the 100 TRYING message does not come from the SIP server (for example, the SIP server does not operate properly or the other terminal is disconnected from the network, etc.), a retry is performed after a predetermined time elapses.
SDP는 SIP 서버에서 미디어 서버와 작업 후 내용이 변경된다. SIP 서버 변경된 SDP를 상대방 컴퓨팅 모듈에 전달한다. 또한, 상기 INVITE메시지의 수신 IP 주소는 미디어 서버의 IP 주소로 변경된다.SDP changes contents after working with media server in SIP server. The SIP server delivers the changed SDP to the counterpart computing module. In addition, the received IP address of the INVITE message is changed to the IP address of the media server.
상기 컴퓨팅 모듈은, SIP 서버로부터 180 RINGING 메시지를 수신한다(S605). 만약, 상대방이 착신 불가 상태일 경우, 예컨대 not reachable/Temporarily Unavailable 메시지가 180 RINGING 메시지 대신 들어오고 콜이 종료된다.The computing module receives a 180 RINGING message from a SIP server (S605). If the other party is not available, for example, a not reachable / Temporarily Unavailable message comes in place of the 180 RINGING message and the call is terminated.
상기 컴퓨팅 모듈은, 상기 STB에 상대편 벨이 울리고 있음을 RINGING 메시지로 알려준다(S606). 상기 RINGING 메시지는 상대방 SUBS_ID를 포함한다.The computing module informs the STB in a RINGING message that the other party is ringing (S606). The RINGING message includes the counterpart SUBS_ID.
상대방이 콜 요청을 받아들인 경우, 상기 컴퓨팅 모듈은 SIP 서버로부터 200 OK 메시지를 전송받는다(S607). 만약, 200 OK 메시지가 약 1분 30초 안에 오지 않으면 호 타임아웃으로 콜이 종료된다.If the other party accepts the call request, the computing module receives a 200 OK message from the SIP server (S607). If the 200 OK message does not arrive in about one minute and thirty seconds, the call ends with the call timeout.
200 OK 메시지를 받은 상기 컴퓨팅 모듈은 ACK 메시지를 전송하여 INVITE transaction을 완성한다(S608).The computing module receiving the 200 OK message transmits an ACK message to complete the INVITE transaction (S608).
상기 컴퓨팅 모듈은, 상기 STB에 CALL_ESTABLISHED 메시지를 전송하여 콜 세션이 정상적으로 맺어졌음을 알려준다(S609). The computing module sends a CALL_ESTABLISHED message to the STB to inform that the call session is normally established (S609).
그리고, 상기 컴퓨팅 모듈은 미디어 서버에게 비디오 데이터 등의 미디어를 전송하고, 상기 미디어 서버는 상대방 컴퓨팅 모듈에 전송한 미디어를, 상기 STB에 전달한다(S610).The computing module transmits media such as video data to a media server, and the media server delivers the media transmitted to the counterpart computing module to the STB (S610).
나아가, 본 발명의 다른 일실시예에 의하면, 수신측에서 전화를 받지 않을 경우, 서버의 timer 동작을 개시하여, 양쪽 컴퓨팅 모듈 측에 cancel 관련 메시지를 전송하도록 설계한다.Furthermore, according to another embodiment of the present invention, when the receiver does not answer the call, the server starts a timer operation and transmits a cancel related message to both computing modules.
도 7은 도 6에 도시된 신호 흐름을, 각 구성요소들의 관점에서 도시한 도면이다. 이하, 도 7을 참조하여 각 구성요소들의 관점에서 신호 흐름을 설명하면 다음과 같다.FIG. 7 is a view showing the signal flow shown in FIG. 6 in terms of the respective components. Hereinafter, the signal flow from the perspective of each component will be described with reference to FIG. 7.
도 7에 도시된 컴퓨팅 모듈(710), STB(720), SIP 서버(740) 그리고 미디어 서버(750)는 도 6에 도시된 각 구성요소에 대응하며, 동일한 call flow 를 가진다. 나아가, 상기 컴퓨팅 모듈(710)이 상기 STB(720)에 임베디드된 하나의 하드웨어(730)를 가지도록 설계한 경우, 외부 디바이스(SIP 서버 또는 미디어 서버 등)와의 데이터 송수신은 컴퓨팅 모듈(710) 또는 STB(720) 중 어느 하나가 선택적으로 수행할 수도 있다.The
도 8은 본 발명의 일실시예에 의한 컴퓨팅 모듈을 포함한 전체 시스템의 제3 call flow 를 도시한 플로우 차트이다. 이하, 도 8을 참조하여, STB와 연결된 IPTV에서 영상 통화 서비스 중 착신을 위한 호 신호를 처리하는 제어 방법을 설명하면 다음과 같다.8 is a flowchart illustrating a third call flow of the entire system including the computing module according to an embodiment of the present invention. Hereinafter, referring to FIG. 8, a control method of processing a call signal for an incoming call during a video call service in an IPTV connected to an STB will be described.
본 발명의 일실시예에 의하면, SIP 서버로부터 상기 STB와 커넥티드된 컴퓨팅 모듈로, 인바이트 메시지를 전송한다(제1단계). 또한, 상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상대방 디바이스에 의해 영상 통화가 시도되고 있음을 알리는 메시지를 전송한다(제2단계).According to an embodiment of the present invention, an invite message is transmitted from the SIP server to the computing module connected with the STB (step 1). In addition, a message informing that the video call is being attempted by the counterpart device is transmitted from the computing module to the SIP server (step 2).
상기 컴퓨팅 모듈로부터 상기 STB로, 콜 요청 메시지를 전송하고(제3단계), 상기 STB로부터 상기 컴퓨팅 모듈로, 상기 콜 요청을 수락하였음을 표시하는 메시지를 전송한다(제4단계). 상기 제4단계에서 포워딩 되는 메시지는, 예컨대 상기 메시지를 수신하는 SIP 서버의 IP 주소 및 포트 정보를 포함한다.A call request message is transmitted from the computing module to the STB (step 3), and a message indicating that the call request has been accepted from the STB to the computing module (step 4). The message forwarded in the fourth step includes, for example, IP address and port information of the SIP server that receives the message.
상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상기 제4단계의 메시지를 포워딩 하고(제5단계), 상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 상기 제5단계의 메시지에 대한 컨펌 메시지를 전송한다(제6단계).Forwarding the message of the fourth step from the computing module to the SIP server (step 5), and transmitting a confirmation message for the message of the fifth step from the SIP server to the computing module (step 6). ).
그리고, 상기 컴퓨팅 모듈로부터 상기 STB로, 콜 세션이 정상적으로 이루어 졌음을 표시하는 메시지를 전송하고(제7단계), 상기 컴퓨팅 모듈에 의해 인코딩된 비디오 데이터를 미디어 서버로 전송한다(제8단계). 상기 제8단계는, 예를 들어 전술하여 설명한 컴퓨팅 모듈 또는 STB 에서 실행되도록 설계한다.Then, a message indicating that a call session is normally made is transmitted from the computing module to the STB (step 7), and the video data encoded by the computing module is transmitted to the media server (step 8). The eighth step is designed to be executed in, for example, the above-described computing module or STB.
본 발명의 다른 일실시예에 의하면, 상기 제5단계는, 상기 STB로부터 상기 컴퓨팅 모듈로, 상기 영상 통화 서비스의 실행 전 대기 화면을 요청하는 메시지를 전송하는 제5-2단계 및 상기 컴퓨팅 모듈로부터 상기 STB로, 상기 영상 통화 서비스의 실행 전 대기 화면의 비디오 데이터를 전송하는 제5-3단계를 더 포함한다.According to another embodiment of the present invention, the fifth step may include: from step 5-2 and the computing module transmitting a message requesting a standby screen before execution of the video call service from the STB to the computing module; And transmitting, to the STB, video data of a standby screen before execution of the video call service.
그리고, 본 발명의 또 다른 일실시예에 의하면, 상기 STB와 커넥티드된 컴퓨팅 모듈은, 상기 영상 통화 서비스의 초기화 프로세스를 처리하는 SIP 스택과, 카메라 모듈에 의해 촬영된 적어도 하나 이상의 사용자에 대응하는 제1비디오 데이터를 제2비디오 데이터로 인코딩 하는 비디오 인코더와, 그리고 상기 영상 통화 서비스에서 사용되기 위한 상기 인코딩된 제2비디오 데이터를 상기 STB로 전송하며, 상기 STB로부터 컨트롤 신호를 수신하는 USB 인터페이스를 포함한다. 이는 전술하여 설명한 도 3 및 도 4를 참조하여 이해할 수가 있다.In addition, according to another embodiment of the present invention, the computing module connected to the STB, the SIP stack for processing the initialization process of the video call service, corresponding to at least one or more users photographed by the camera module A video encoder for encoding first video data into second video data, and a USB interface for transmitting the encoded second video data for use in the video telephony service to the STB and receiving a control signal from the STB. Include. This can be understood with reference to FIGS. 3 and 4 described above.
한편, 도 8을 참조하여 전술하여 설명한 단계들을 보다 구체적으로 설명하면 다음과 같다.Meanwhile, the steps described above with reference to FIG. 8 will be described in more detail.
상기 컴퓨팅 모듈은, SIP 서버로부터 INVITE메시지를 수신한다(S701). 만약 STB가 착신 가능 상태가 아닐 경우 상기 컴퓨팅 모듈은 예컨대 not reachable/Temporarily Unavailable 메시지를 전송하고 콜은 종료된다.The computing module receives an INVITE message from a SIP server (S701). If the STB is not in a callable state, the computing module sends a not reachable / Temporarily Unavailable message, for example, and the call ends.
상기 컴퓨팅 모듈은, 상기 STB가 착신 가능 상태일 경우 SIP 서버에게 180 RINGING 메시지를 전송한다(S702).The computing module, when the STB is in a callable state, transmits a 180 RINGING message to a SIP server (S702).
상기 컴퓨팅 모듈은, 상기 STB가 착신 가능 상태일 경우 상기 STB에 CALL_REQUEST 메시지를 전송한다(S703). 상기 CALL_REQUEST메시지는 예컨대 상대방의 SUBS_ID 등을 포함하고 있다. 또한, 상대방의 SUBS_ID를 이용해 ‘XXX에게 전화 요청이 왔습니다’ 등의 정보를 보여줄 수 있도록 설계한다.When the STB is in a callable state, the computing module transmits a CALL_REQUEST message to the STB (S703). The CALL_REQUEST message includes the counterpart's SUBS_ID, for example. In addition, it is designed to show information such as ‘a call to XXX has been received’ using the other party's SUBS_ID.
사용자가 전화 요청을 수락하면 상기 STB는 상기 컴퓨팅 모듈에게 CALL_CATCH 메시지를 전달한다(S704). 상기 CALL_CATCH 메시지는, 예를 들어 RECV_IP, RECV_PORT, RECV_TS정보(예컨대, program number, audio stream id, audio stream type, video stream id, video stream type) 등을 포함하고 있다.If the user accepts the call request, the STB delivers a CALL_CATCH message to the computing module (S704). The CALL_CATCH message includes, for example, RECV_IP, RECV_PORT, RECV_TS information (eg, program number, audio stream id, audio stream type, video stream id, video stream type), and the like.
상기 컴퓨팅 모듈은, 상기 STB 로부터 CALL_CATCH 메시지를 받고, SIP 서버에게 200 OK 메시지를 전송한다(S705).The computing module receives a CALL_CATCH message from the STB and transmits a 200 OK message to a SIP server (S705).
상기 STB는 상기 컴퓨팅 모듈에게 PREVIEW_REQ 메시지를 전송한다(S706).The STB transmits a PREVIEW_REQ message to the computing module (S706).
상기 컴퓨팅 모듈은, 상기 STB에 PREVIEW_OK 메시지를 전송하고 PREVIEW 화면 전송을 시작한다(S707). 상기 STB의 대기화면에는 PREVIEW영상이 보여진다.The computing module transmits a PREVIEW_OK message to the STB and starts to transmit a PREVIEW screen (S707). The PREVIEW image is shown on the standby screen of the STB.
상기 SIP 서버는, 상기 컴퓨팅 모듈에게 ACK 메시지를 전송한다(S708).The SIP server transmits an ACK message to the computing module (S708).
상기 컴퓨팅 모듈은, ACK 메시지를 수신하고 상기 STB에 CALL_ESTABLISHED 메시지를 전송함으로써, 콜 세션이 성립되었음을 알려준다(S709).The computing module informs that a call session is established by receiving an ACK message and transmitting a CALL_ESTABLISHED message to the STB (S709).
그리고, ACK를 전송 받은 상기 컴퓨팅 모듈은 비디오 데이터 등의 미디어를 미디어 서버에 전송하고, 상기 STB는 상기 미디어 서버로부터 해당 미디어를 수신한다(S710).The computing module receiving the ACK transmits media such as video data to a media server, and the STB receives the media from the media server (S710).
도 9는 도 8에 도시된 신호 흐름을, 각 구성요소들의 관점에서 도시한 도면이다. 이하, 도 9를 참조하여 각 구성요소들의 관점에서 신호 흐름을 설명하면 다음과 같다.FIG. 9 is a view illustrating the signal flow shown in FIG. 8 in terms of components. Hereinafter, the signal flow from the viewpoint of each component with reference to FIG. 9 will be described.
도 9에 도시된 컴퓨팅 모듈(910), STB(920), SIP 서버(940) 그리고 미디어 서버(950)는 도 8에 도시된 각 구성요소에 대응하며, 동일한 call flow 를 가진다. 나아가, 상기 컴퓨팅 모듈(910)이 상기 STB(920)에 임베디드된 하나의 하드웨어(930)를 가지도록 설계한 경우, 외부 디바이스(SIP 서버 또는 미디어 서버 등)와의 데이터 송수신은 컴퓨팅 모듈(910) 또는 STB(920) 중 어느 하나가 선택적으로 수행할 수도 있다.The computing module 910, the STB 920, the
도 10 내지 도 12는 본 발명의 일실시예에 의한 컴퓨팅 모듈을 이용하여 상대방 디바이스에 발신 전화를 거는 유저 인터페이스(User Interface)를 도시한 도면이다. 이하, 도 10 내지 도 12를 참조하여, 본 발명의 일실시예에 의한 컴퓨팅 모듈을 이용하여 상대방 디바이스에 발신 전화를 거는 프로세스를 유저 인터페이스 관점에서 설명하면 다음과 같다.10 to 12 illustrate a user interface for making an outgoing call to a counterpart device using a computing module according to an embodiment of the present invention. Hereinafter, referring to FIGS. 10 to 12, a process of making an outgoing call to a counterpart device using a computing module according to an embodiment of the present invention will be described as follows.
우선, 도 10에 도시된 바와 같이, 본 발명의 일실시예에 의한 IPTV(1000)는 STB(1010) 및 컴퓨팅 모듈(1020)을 구비하고 있다. 상기 STB(1010) 및 컴퓨팅 모듈(1020)에 대해서는 이전 설명을 참조하여 해석할 수도 있다.First, as shown in FIG. 10, the
상기 IPTV(1000)를 사용하는 유저(1040)가 핫키나 메뉴 버튼을 이용하여, 특정 상대방에게 전화를 시도할 수 있으며, 이 경우 상기 특정 상대방에게 전화를 걸지 여부를 문의하는 OSD 창(1030)이 디스플레이 된다. 다만, 상기 OSD 창(1030)은 현재 시청 중인 IPTV 방송 프로그램과 함께 PIP 형식으로 출력될 수도 있다. A
도 10에 도시된 유저(1040)가 영상 통화에 대한 컨펌을 한 경우, 도 11에 도시된 바와 같이 IPTV(1100)는 calling 신호 대기 중임을 안내하는 OSD 창(1130)을 출력한다. 이 때, 기존 시청 중이었던 IPTV 방송 프로그램의 출력을 중지한다.When the
나아가, STB(1110)와 커넥티드된 컴퓨팅 모듈(1120)은 전술한 바와 같이 카메라 모듈을 구비하고 있으므로, 상기 컴퓨팅 모듈(1120)의 카메라 모듈은 영상 통화의 당사자인 유저(1140)를 디텍트 및 촬영한다.Furthermore, since the
만약 상기 특정 상대방이 영상 통화에 대한 승낙을 한 경우, 도 12에 도시된 바와 같이 IPTV(1200)는 변경된 화면을 출력한다. 즉, STB(1210)와 커넥티드된 컴퓨팅 모듈(1220)에 의해 촬영된 사용자(1250)의 비디오 데이터를 스크린의 제1영역(1230)에 출력하고, 상기 STB(1210)를 통해 상대방 디바이스로부터 수신된 비디오 데이터를 상기 스크린의 제2영역(1240)에 출력한다.If the specific counterpart accepts the video call, as shown in FIG. 12, the
따라서, 도 10 내지 도 12에 도시된 바와 같이, 기존 IPTV 및 STB를 이용하는 사용자도 본 발명의 일실시예에 의한 컴퓨팅 모듈만 간단히 사용하는 것만으로, 상대방과 고화질의 영상 통화를 할 수 있는 본 발명 특유의 효과가 있다.Thus, as shown in Figure 10 to 12, the user using the existing IPTV and STB, the present invention that can make a high-definition video call with the other party simply by using only the computing module according to an embodiment of the present invention Has a unique effect.
도 13 내지 도 15는 본 발명의 일실시예에 의한 컴퓨팅 모듈을 이용하여 상대방 디바이스로부터 착신 전화를 받는 유저 인터페이스(User Interface)를 도시한 도면이다. 이하, 도 13 내지 도 15를 참조하여, 본 발명의 일실시예에 의한 컴퓨팅 모듈을 이용하여 상대방 디바이스로부터 착신된 전화를 처리하는 프로세스를 유저 인터페이스 관점에서 설명하면 다음과 같다.13 to 15 illustrate a user interface for receiving an incoming call from a counterpart device using a computing module according to an embodiment of the present invention. Hereinafter, referring to FIGS. 13 to 15, a process of processing a call received from a counterpart device using a computing module according to an embodiment of the present invention will be described as follows.
우선, 도 13에 도시된 바와 같이, 본 발명의 일실시예에 의한 IPTV(1300)는 STB(1310) 및 컴퓨팅 모듈(1320)을 구비하고 있다. 상기 STB(1310) 및 컴퓨팅 모듈(1320)에 대해서는 이전 설명을 참조하여 해석할 수도 있다.First, as shown in FIG. 13, an
상기 IPTV(1300)의 유저(1340)가 일반 IPTV 방송 프로그램을 시청하다가, 상대방 디바이스로부터 영상 통화 착신 요청 신호를 수신한 경우, 상기 상대방 디바이스를 인디케이트 하는 메시지(1330)가 디스플레이 된다. 다만, 상기 메시지(1330)는 예컨대 현재 시청 중인 IPTV 방송 프로그램과 함께 PIP 형식으로 출력될 수도 있다. When the
도 13에 도시된 유저(1340)가 영상 통화에 대한 컨펌을 한 경우, 도 14에 도시된 바와 같이 IPTV(1400)는 calling 신호 대기 중임을 안내하는 OSD 창(1430)을 출력한다. 이 때, 기존 시청 중이었던 IPTV 방송 프로그램의 출력을 중지하지 않고, 영상 통화 화면으로 넘어가기 전까지 상기 IPTV 방송 프로그램 출력을 유지할 수도 있다. 나아가, 도 11 또는 도 14에 도시된 UI 중 어느 하나를 선택하는 옵션을 사용자에게 제공하여, 사용자 편의성을 제고하는 것도 본 발명의 일실시예이다.When the
나아가, STB(1410)와 커넥티드된 컴퓨팅 모듈(1420)은 전술한 바와 같이 카메라 모듈을 구비하고 있으므로, 상기 컴퓨팅 모듈(1420)의 카메라 모듈은 영상 통화의 당사자인 유저(1440)를 디텍트 및 촬영한다.Furthermore, since the
만약 상기 유저(1440)가 영상 통화에 대한 승낙을 한 경우, 도 15에 도시된 바와 같이 IPTV(1500)는 변경된 화면을 출력한다. 즉, STB(1510)와 커넥티드된 컴퓨팅 모듈(1520)에 의해 촬영된 사용자(1550)의 비디오 데이터를 스크린의 제1영역(1530)에 출력하고, 상기 STB(1510)를 통해 상대방 디바이스로부터 수신된 비디오 데이터를 상기 스크린의 제2영역(1540)에 출력한다.If the
따라서, 도 13 내지 도 15에 도시된 바와 같이, 기존 IPTV 및 STB를 이용하는 사용자도 본 발명의 일실시예에 의한 컴퓨팅 모듈만 간단히 사용하는 것만으로, 상대방과 고화질의 영상 통화를 할 수 있는 본 발명 특유의 효과가 있다.Thus, as shown in Figures 13 to 15, the user using the existing IPTV and STB, the present invention that can make a high-definition video call with the other party simply by using only the computing module according to an embodiment of the present invention Has a unique effect.
그리고, 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양발명의 설명은 보충적으로 적용될 수가 있다.In this specification, both the invention and the invention of the method are explained, and the description of the two inventions can be supplementarily applied as necessary.
본 발명에 따른 방법 발명은 모두 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다. Method invention according to the present invention are all implemented in the form of program instructions that can be executed by various computer means can be recorded on a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined not only by the claims below but also by the equivalents of the claims.
210 : STB (Set Top Box)
220 : 컴퓨팅 모듈 (Computing Module)
240 : 미디어 서버 (Media Server)210: STB (Set Top Box)
220: Computing Module
240: Media Server
Claims (18)
상기 STB 로부터 상기 STB와 커넥티드된 컴퓨팅 모듈로, 콜 셋업 요청 메시지를 전송하는 제1단계;
상기 컴퓨팅 모듈로부터 SIP 서버로, 인바이트 메시지를 전송하는 제2단계;
상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 영상 통화가 시도되고 있음을 알리는 메시지를 전송하는 제3단계;
상기 컴퓨팅 모듈로부터 상기 STB로, 상기 영상 통화가 시도되고 있음을 알리는 메시지를 포워딩 하는 제4단계;
상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 상기 영상 통화 서비스의 상대방 디바이스가 콜 요청을 수락하였음을 표시하는 메시지를 전송하는 제5단계;
상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상기 제5단계의 메시지에 대한 컨펌 메시지를 전송하는 제6단계;
상기 컴퓨팅 모듈로부터 상기 STB로, 콜 세션이 정상적으로 이루어 졌음을 표시하는 메시지를 전송하는 제7단계; 그리고
상기 컴퓨팅 모듈에 의해 인코딩된 비디오 데이터를 미디어 서버로 전송하는 제8단계
를 포함하는 것을 특징으로 하는 제어 방법.A control method of processing a call signal for outgoing video call service in an IPTV connected to an STB,
Transmitting a call setup request message from the STB to a computing module connected with the STB;
A second step of sending an invite message from the computing module to a SIP server;
Transmitting from the SIP server to the computing module a message indicating that a video call is being attempted;
A fourth step of forwarding a message indicating that the video call is being attempted from the computing module to the STB;
A fifth step of transmitting from the SIP server to the computing module a message indicating that the counterpart device of the video call service has accepted a call request;
Transmitting a confirmation message for the message of the fifth step from the computing module to the SIP server;
A seventh step of transmitting from the computing module to the STB a message indicating that a call session has been normally made; And
An eighth step of transmitting the video data encoded by the computing module to a media server
Control method comprising a.
상기 제1단계는,
상기 STB로부터 상기 컴퓨팅 모듈로, 상기 영상 통화 서비스의 실행 전 대기 화면을 요청하는 메시지를 전송하는 제1-2단계; 그리고
상기 컴퓨팅 모듈로부터 상기 STB로, 상기 영상 통화 서비스의 실행 전 대기 화면의 비디오 데이터를 전송하는 제1-3단계
를 더 포함하는 것을 특징으로 하는 제어 방법.The method of claim 1,
In the first step,
Transmitting a message requesting a standby screen before execution of the video call service from the STB to the computing module; And
A first to third step of transmitting video data of a standby screen before execution of the video call service from the computing module to the STB;
Control method characterized in that it further comprises.
상기 제2단계는,
상기 인바이트 메시지의 수신 IP 주소를 상기 미디어 서버의 IP 주소로 변경하는 제2-2단계; 그리고
상기 인바이트 메시지를 상기 변경된 IP 주소로 전송하는 제2-3단계
를 더 포함하는 것을 특징으로 하는 제어 방법.
The method of claim 1,
The second step comprises:
Step 2-2 of changing the received IP address of the invite message to the IP address of the media server; And
Step 2-3 of transmitting the invite message to the changed IP address;
Control method characterized in that it further comprises.
상기 제8단계는,
상기 컴퓨팅 모듈 또는 상기 STB 에서 실행되는 것을 특징으로 하는 제어 방법.The method of claim 1,
The eighth step,
And run in the computing module or the STB.
상기 STB와 커넥티드된 컴퓨팅 모듈은,
상기 영상 통화 서비스의 초기화 프로세스를 처리하는 SIP 스택;
카메라 모듈에 의해 촬영된 적어도 하나 이상의 사용자에 대응하는 제1비디오 데이터를 제2비디오 데이터로 인코딩 하는 비디오 인코더; 그리고
상기 영상 통화 서비스에서 사용되기 위한 상기 인코딩된 제2비디오 데이터를 상기 STB로 전송하며, 상기 STB로부터 컨트롤 신호를 수신하는 USB 인터페이스
로 구성되는 것을 특징으로 하는 제어 방법.The method of claim 1,
The computing module connected with the STB,
A SIP stack configured to process an initialization process of the video call service;
A video encoder for encoding first video data corresponding to at least one user captured by the camera module into second video data; And
A USB interface for transmitting the encoded second video data for use in the video call service to the STB and receiving a control signal from the STB
Control method characterized in that consisting of.
SIP 서버로부터 상기 STB와 커넥티드된 컴퓨팅 모듈로, 인바이트 메시지를 전송하는 제1단계;
상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상대방 디바이스에 의해 영상 통화가 시도되고 있음을 알리는 메시지를 전송하는 제2단계;
상기 컴퓨팅 모듈로부터 상기 STB로, 콜 요청 메시지를 전송하는 제3단계;
상기 STB로부터 상기 컴퓨팅 모듈로, 상기 콜 요청을 수락하였음을 표시하는 메시지를 전송하는 제4단계;
상기 컴퓨팅 모듈로부터 상기 SIP 서버로, 상기 제4단계의 메시지를 포워딩 하는 제5단계;
상기 SIP 서버로부터 상기 컴퓨팅 모듈로, 상기 제5단계의 메시지에 대한 컨펌 메시지를 전송하는 제6단계;
상기 컴퓨팅 모듈로부터 상기 STB로, 콜 세션이 정상적으로 이루어 졌음을 표시하는 메시지를 전송하는 제7단계; 그리고
상기 컴퓨팅 모듈에 의해 인코딩된 비디오 데이터를 미디어 서버로 전송하는 제8단계
를 포함하는 것을 특징으로 하는 제어 방법.A control method for processing a call signal for an incoming call during a video call service in an IPTV connected to an STB,
A first step of sending an invite message from a SIP server to the computing module connected to the STB;
A second step of transmitting from the computing module to the SIP server a message indicating that a video call is being attempted by a counterpart device;
Transmitting a call request message from the computing module to the STB;
Transmitting from the STB to the computing module a message indicating that the call request has been accepted;
A fifth step of forwarding the message of the fourth step from the computing module to the SIP server;
Transmitting a confirmation message for the message of the fifth step from the SIP server to the computing module;
A seventh step of transmitting from the computing module to the STB a message indicating that a call session has been normally made; And
An eighth step of transmitting the video data encoded by the computing module to a media server
Control method comprising a.
상기 제4단계에서 포워딩 되는 메시지는,
상기 메시지를 수신하는 SIP 서버의 IP 주소 및 포트 정보를 포함하고 있는 것을 특징으로 하는 제어 방법.The method of claim 6,
The message forwarded in the fourth step,
And IP address and port information of the SIP server for receiving the message.
상기 제5단계는,
상기 STB로부터 상기 컴퓨팅 모듈로, 상기 영상 통화 서비스의 실행 전 대기 화면을 요청하는 메시지를 전송하는 제5-2단계; 그리고
상기 컴퓨팅 모듈로부터 상기 STB로, 상기 영상 통화 서비스의 실행 전 대기 화면의 비디오 데이터를 전송하는 제5-3단계
를 더 포함하는 것을 특징으로 하는 제어 방법.The method of claim 6,
In the fifth step,
A step 5-2 of transmitting a message requesting a standby screen before execution of the video call service from the STB to the computing module; And
Step 5-3 of transmitting video data of a standby screen before execution of the video call service from the computing module to the STB;
Control method characterized in that it further comprises.
상기 제8단계는,
상기 컴퓨팅 모듈 또는 상기 STB 에서 실행되는 것을 특징으로 하는 제어 방법.The method of claim 6,
The eighth step,
And run in the computing module or the STB.
상기 STB와 커넥티드된 컴퓨팅 모듈은,
상기 영상 통화 서비스의 초기화 프로세스를 처리하는 SIP 스택;
카메라 모듈에 의해 촬영된 적어도 하나 이상의 사용자에 대응하는 제1비디오 데이터를 제2비디오 데이터로 인코딩 하는 비디오 인코더; 그리고
상기 영상 통화 서비스에서 사용되기 위한 상기 인코딩된 제2비디오 데이터를 상기 STB로 전송하며, 상기 STB로부터 컨트롤 신호를 수신하는 USB 인터페이스
로 구성되는 것을 특징으로 하는 제어 방법.
The method of claim 6,
The computing module connected with the STB,
A SIP stack configured to process an initialization process of the video call service;
A video encoder for encoding first video data corresponding to at least one user captured by the camera module into second video data; And
A USB interface for transmitting the encoded second video data for use in the video call service to the STB and receiving a control signal from the STB
Control method characterized in that consisting of.
영상 통화 서비스의 초기화 프로세스를 처리하는 SIP 스택(Session Initiation Protocol stack);
상기 IPTV 주변에 위치한 적어도 하나 이상의 사용자를 촬영하는 카메라 모듈;
상기 카메라 모듈에 의해 촬영된 적어도 하나 이상의 사용자에 대응하는 제1비디오 데이터를 제2비디오 데이터로 인코딩 하는 비디오 인코더; 그리고
상기 영상 통화 서비스에서 사용되기 위한 상기 인코딩된 제2비디오 데이터를 상기 STB로 전송하며, 상기 STB로부터 컨트롤 신호를 수신하는 제1인터페이스
를 포함하여 이루어 지는 것을 특징으로 하는 컴퓨팅 모듈.In the computing module connected with the STB (Set Top Box) for IPTV (Internet Protocol TeleVision),
A Session Initiation Protocol stack (SIP) stack that handles an initialization process of a video call service;
A camera module for photographing at least one user located near the IPTV;
A video encoder for encoding first video data corresponding to at least one user captured by the camera module into second video data; And
A first interface for transmitting the encoded second video data for use in the video call service to the STB and receiving a control signal from the STB
Computing module, characterized in that comprises a.
상기 STB 는,
상기 영상 통화 서비스의 호 처리를 실행하는 적어도 하나 이상의 API(Application Programming Interface); 그리고
상기 컴퓨팅 모듈로부터 전송된 상기 인코딩된 제2비디오 데이터를 수신하고, 상기 컴퓨팅 모듈로 컨트롤 신호를 전송하는 제2인터페이스
를 포함하여 이루어 지는 것을 특징으로 하는 컴퓨팅 모듈.
The method of claim 11,
The STB is,
At least one API (Application Programming Interface) for executing call processing of the video call service; And
A second interface for receiving the encoded second video data transmitted from the computing module and transmitting a control signal to the computing module
Computing module, characterized in that comprises a.
상기 제1인터페이스 및 상기 제2인터페이스는,
USB(Universal Serial Bus), UWB(Ultra-WideBand), 또는 BT(BlueTooth) 중 어느 하나의 근거리 통신 기술에 기반하여 설계되어 있는 것을 특징으로 하는 컴퓨팅 모듈.The method of claim 12,
The first interface and the second interface,
Computing module, characterized in that it is designed based on the short-range communication technology of any one of Universal Serial Bus (USB), Ultra-WideBand (UWB), or BT (BlueTooth).
상기 인코딩된 제2비디오 데이터는, MPEG2-TS(Moving Picture Experts Group 2-Transport Stream) 형태로 외부 미디어 서버로 전송되는 것을 특징으로 하는 컴퓨팅 모듈.The method of claim 11,
The encoded second video data is transmitted to an external media server in the form of Moving Picture Experts Group 2-Transport Stream (MPEG2-TS).
상기 외부 미디어 서버는, 상기 영상 통화 서비스의 상대방 IPTV 의 STB와 네트워크로 연결되어 있는 것을 특징으로 하는 컴퓨팅 모듈.15. The method of claim 14,
The external media server is connected to the network STB of the other party IPTV of the video call service computing module.
상기 컴퓨팅 모듈은, 상기 STB에 임베디드(embedded)된 형태로 설계되어 있는 것을 특징으로 하는 컴퓨팅 모듈.The method of claim 11,
The computing module, characterized in that designed in the form (embedded) in the STB.
상기 IPTV와 1차적으로 커넥티드 되어 있는 STB(Set Top Box); 그리고
상기 STB와 2차적으로 커넥티드 되어 있는 컴퓨팅 모듈을 포함하며,
상기 컴퓨팅 모듈은,
상기 영상 통화 서비스의 초기화 프로세스를 처리하는 SIP 스택(Session Initiation Protocol stack),
상기 IPTV 주변에 위치한 적어도 하나 이상의 사용자를 촬영하는 카메라 모듈,
상기 카메라 모듈에 의해 촬영된 적어도 하나 이상의 사용자에 대응하는 제1비디오 데이터를 제2비디오 데이터로 인코딩 하는 미디어 인코더, 그리고
상기 영상 통화 서비스에서 사용되기 위한 상기 인코딩된 제2비디오 데이터를 상기 STB로 전송하며, 상기 STB로부터 컨트롤 신호를 수신하는 제1인터페이스로 구성되며,
상기 STB는,
상기 컴퓨팅 모듈로부터 전송된 상기 인코딩된 제2비디오 데이터를 수신하고, 상기 컴퓨팅 모듈로 컨트롤 신호를 전송하는 제2인터페이스, 그리고
상기 영상 통화 서비스의 호 처리를 실행하는 적어도 하나 이상의 API(Application Programming Interface)로 구성되는 것을 특징으로 하는 IPTV의 영상 통화 서비스를 위한 시스템.In the system for video telephony service of IPTV (Internet Protocol TeleVision),
A set top box (STB) primarily connected to the IPTV; And
Computing module is secondly connected to the STB,
The computing module,
Session Initiation Protocol stack (SIP) stack for processing the initialization process of the video call service,
A camera module for photographing at least one user located near the IPTV;
A media encoder for encoding first video data corresponding to at least one user captured by the camera module into second video data, and
A first interface for transmitting the encoded second video data for use in the video call service to the STB and receiving a control signal from the STB,
The STB,
A second interface for receiving the encoded second video data transmitted from the computing module and transmitting a control signal to the computing module, and
System for the video call service of IPTV, characterized in that composed of at least one API (Application Programming Interface) for executing the call processing of the video call service.
상기 미디어 인코더는,
상기 영상 통화 서비스가 개시된 이후 감지된 제1오디오 데이터를 제2오디오 데이터로 인코딩 하는 오디오 인코더를 더 포함하며,
상기 제1인터페이스는,
상기 인코딩된 제2오디오 데이터를 상기 STB로 전송하는 것을 특징으로 하는 IPTV의 영상 통화 서비스를 위한 시스템.18. The method of claim 17,
The media encoder,
And an audio encoder for encoding the first audio data detected after the video call service is started to the second audio data.
The first interface,
And transmit the encoded second audio data to the STB.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020110012164A KR101185931B1 (en) | 2011-02-11 | 2011-02-11 | Computing module connected with stb for iptv and method for controlling the same |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020110012164A KR101185931B1 (en) | 2011-02-11 | 2011-02-11 | Computing module connected with stb for iptv and method for controlling the same |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20120092251A true KR20120092251A (en) | 2012-08-21 |
| KR101185931B1 KR101185931B1 (en) | 2012-09-26 |
Family
ID=46884317
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020110012164A KR101185931B1 (en) | 2011-02-11 | 2011-02-11 | Computing module connected with stb for iptv and method for controlling the same |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101185931B1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101455365B1 (en) * | 2013-12-24 | 2014-10-27 | 주식회사 케이티 | Apparatus and method for transmitting data of video confference |
-
2011
- 2011-02-11 KR KR1020110012164A patent/KR101185931B1/en active IP Right Grant
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101455365B1 (en) * | 2013-12-24 | 2014-10-27 | 주식회사 케이티 | Apparatus and method for transmitting data of video confference |
Also Published As
| Publication number | Publication date |
|---|---|
| KR101185931B1 (en) | 2012-09-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2319206B1 (en) | System and method for transmitting and receiving a call on a home network | |
| US20100082824A1 (en) | Program network recording method, media processing server and network recording system | |
| US20150341413A1 (en) | Apparatus and method for providing media programming | |
| EP2132637B1 (en) | Communication terminal, method for controlling communication terminal | |
| KR20080014329A (en) | Apparatus for image display and control method thereof | |
| EP3996355B1 (en) | Method for transferring media stream and user equipment | |
| KR20140020733A (en) | Image capturing method and local endpoint host device | |
| US20140267578A1 (en) | Video injection for video communication | |
| CN101472235A (en) | Multi-terminal communication method, system and device | |
| CN103327374B (en) | A kind of monitoring method and network television-set top-set-box | |
| CN101888516A (en) | Method and system for realizing video communication | |
| CN101909192A (en) | Television terminal and communication method thereof | |
| WO2013167001A2 (en) | Session mode switching control method, device and terminal | |
| JP4405305B2 (en) | Information communication device, information communication program, and recording medium recording information communication program | |
| KR101863218B1 (en) | Video call device and method using webrtc | |
| RU2526710C2 (en) | Method and system for call forwarding based on sip using set-top box | |
| US9054891B2 (en) | Distributing session initiation protocol content to universal plug and play devices in a local network | |
| CN105122761B (en) | The local control of the additional media session of packet-based calling | |
| CN103581607A (en) | Method for transmitting video stream to local endpoint host using remote camera device | |
| KR100695388B1 (en) | System and method for providing the alternative multimedia contents during communication in SIP | |
| KR101185931B1 (en) | Computing module connected with stb for iptv and method for controlling the same | |
| JP4939095B2 (en) | Content providing system and content switching method | |
| CN102082961A (en) | Method and system for realizing voice talkback of set top box | |
| KR101260391B1 (en) | Method for providing interactive channel service or video call conference in iptv and system for controlling the same | |
| KR100695393B1 (en) | System and method for providing the additional multimedia contents during communication in SIP |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| N231 | Notification of change of applicant | ||
| E701 | Decision to grant or registration of patent right | ||
| N231 | Notification of change of applicant | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20150915 Year of fee payment: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20160919 Year of fee payment: 5 |
|
| FPAY | Annual fee payment |
Payment date: 20170906 Year of fee payment: 6 |
|
| FPAY | Annual fee payment |
Payment date: 20190902 Year of fee payment: 8 |