KR102050416B1 - Network camera apparatus and method of providing image streaming thereof. - Google Patents

Network camera apparatus and method of providing image streaming thereof. Download PDF

Info

Publication number
KR102050416B1
KR102050416B1 KR1020140016278A KR20140016278A KR102050416B1 KR 102050416 B1 KR102050416 B1 KR 102050416B1 KR 1020140016278 A KR1020140016278 A KR 1020140016278A KR 20140016278 A KR20140016278 A KR 20140016278A KR 102050416 B1 KR102050416 B1 KR 102050416B1
Authority
KR
South Korea
Prior art keywords
camera
streaming
user terminal
image
unit
Prior art date
Application number
KR1020140016278A
Other languages
Korean (ko)
Other versions
KR20150095142A (en
Inventor
이한웅
Original Assignee
한화테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화테크윈 주식회사 filed Critical 한화테크윈 주식회사
Priority to KR1020140016278A priority Critical patent/KR102050416B1/en
Publication of KR20150095142A publication Critical patent/KR20150095142A/en
Application granted granted Critical
Publication of KR102050416B1 publication Critical patent/KR102050416B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 일 실시예는 제1 카메라 및 제2 카메라를 포함하는 네트워크 카메라 장치에 있어서, 상기 제1 카메라는, 사용자 단말에 사용자 인터페이스(UI, user interface)를 제공하고 사용자 단말로부터 제1 프로파일의 영상 스트리밍을 요청하는 메시지를 획득하는 UI부; 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행할 것인가의 여부를 결정하는 릴레이 결정부; 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행하는 것으로 결정되는 경우, 상기 제1 프로파일의 영상을 상기 사용자 단말로 스트리밍하는 스트리밍부; 및 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행하지 않는 것으로 결정되는 경우, 상기 사용자 단말의 정보와 상기 제1 프로파일의 영상을 상기 제2 카메라로 전송하는 릴레이 전송부;를 포함하고, 상기 제2 카메라는 상기 제1 카메라로부터 전송된 상기 사용자 단말의 정보를 참조하여, 상기 제1 카메라로부터 전송된 상기 제1 프로파일의 영상을 상기 사용자 단말로 스트리밍하는 릴레이 스트리밍부;를 포함하는 네트워크 카메라 장치를 개시한다.An embodiment of the present invention provides a network camera device including a first camera and a second camera, wherein the first camera provides a user interface (UI) to the user terminal and provides a first profile of the first profile. A UI unit for obtaining a message for requesting video streaming; A relay determination unit that determines whether the first camera performs the requested video streaming; A streaming unit configured to stream the video of the first profile to the user terminal when it is determined that the first camera performs the requested video streaming; And a relay transmitter configured to transmit information of the user terminal and an image of the first profile to the second camera when it is determined that the first camera does not perform the requested video streaming. The camera may include a relay streaming unit configured to stream an image of the first profile transmitted from the first camera to the user terminal by referring to the information of the user terminal transmitted from the first camera. To start.

Description

네트워크 카메라 장치 및 이의 영상 스트리밍 제공 방법{Network camera apparatus and method of providing image streaming thereof.}Network camera apparatus and method for providing video streaming thereof

네트워크 카메라 장치 및 이의 영상 스트리밍 제공 방법에 관한 것이다.The present invention relates to a network camera device and a video streaming providing method thereof.

기술의 발전에 따라 원격지에 네트워크 카메라를 설치하고 인터넷을 통하여 상기 네트워크 카메라가 촬영한 영상을 실시간으로 스트리밍 받을 수 있는 기술이 등장하고 있다. 이러한 네트워크 카메라 기술은 원격지 감시 또는 교통정보 제공 등의 다양한 분야에 이용되고 있다. 네트워크 카메라는 사용자 단말과 1:1로 연결될 수도 있으나, 다수의 사용자 단말과 연결되어 다수의 사용자 단말에게 영상을 전송할 수도 있다. 이 경우 카메라의 성능 제한으로 인한 스트리밍 품질 저하가 문제된다.In accordance with the development of the technology, a technology for installing a network camera at a remote location and receiving the image captured by the network camera in real time through the Internet has emerged. Such network camera technology is used in various fields such as remote monitoring or providing traffic information. The network camera may be connected 1: 1 with the user terminal, but may be connected with the plurality of user terminals to transmit images to the plurality of user terminals. In this case, the streaming quality is deteriorated due to the camera's performance limitation.

한편, 한국 공개특허공보 제2005-0093071호에서는 보안이 강화된 네트워크 카메라를 통한 영상 스트리밍 제공 기술이 개시되어 있다.On the other hand, Korean Laid-Open Patent Publication No. 2005-0093071 discloses a video streaming providing technology through a security enhanced network camera.

한국 공개특허공보 제2005-0093071호Korean Unexamined Patent Publication No. 2005-0093071

본 발명의 실시예들은 네트워크 카메라 장치 및 이의 영상 스트리밍 제공 방법을 제공한다. 본 실시예들이 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 이하의 실시예들로부터 또 다른 기술적 과제들이 유추될 수 있다. Embodiments of the present invention provide a network camera device and a method for providing video streaming thereof. Technical problems to be achieved by the present embodiments are not limited to the above-described technical problems, and other technical problems may be inferred from the following embodiments.

본 발명의 일 실시예는 제1 카메라 및 제2 카메라를 포함하는 네트워크 카메라 장치에 있어서, 상기 제1 카메라는 사용자 단말에 사용자 인터페이스(UI, user interface)를 제공하고, 사용자 단말로부터 제1 프로파일의 영상 스트리밍을 요청하는 메시지를 획득하는 UI부; 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행할 것인가의 여부를 결정하는 릴레이 결정부; 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행하는 것으로 결정되는 경우, 상기 제1 프로파일의 영상을 상기 사용자 단말로 스트리밍하는 스트리밍부; 및 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행하지 않는 것으로 결정되는 경우, 상기 사용자 단말의 정보와 상기 제1 프로파일의 영상을 상기 제2 카메라로 전송하는 릴레이 전송부;를 포함하고, 상기 제2 카메라는 상기 제1 카메라로부터 전송된 상기 사용자 단말의 정보를 참조하여, 상기 제1 카메라로부터 전송된 상기 제1 프로파일의 영상을 상기 사용자 단말로 스트리밍하는 릴레이 스트리밍부;를 포함하는 네트워크 카메라 장치를 개시한다.An embodiment of the present invention provides a network camera apparatus including a first camera and a second camera, wherein the first camera provides a user interface (UI) to a user terminal and provides a first profile of the first profile. A UI unit for obtaining a message for requesting video streaming; A relay determination unit that determines whether the first camera performs the requested video streaming; A streaming unit configured to stream the video of the first profile to the user terminal when it is determined that the first camera performs the requested video streaming; And a relay transmitter configured to transmit information of the user terminal and an image of the first profile to the second camera when it is determined that the first camera does not perform the requested video streaming. The camera may include a relay streaming unit configured to stream an image of the first profile transmitted from the first camera to the user terminal by referring to the information of the user terminal transmitted from the first camera. To start.

본 실시예에 있어서, 상기 릴레이 결정부는 상기 제1 카메라의 상태 및 상기 제1 프로파일의 영상을 스트리밍 하는데 요구되는 부하를 고려하여, 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행할 것인가의 여부를 결정할 수 있다.In the present embodiment, the relay determiner determines whether the first camera performs the requested video streaming in consideration of the state of the first camera and the load required for streaming the video of the first profile. You can decide.

본 실시예에 있어서, 상기 스트리밍부는 인코딩된 영상을 패킷화하고, 패킷화된 상기 영상을 복수의 사용자 단말로 스트리밍하는 SIMO(single input, multiple output) 방식을 이용하고, 상기 릴레이 결정부는 상기 스트리밍부에 연결된 사용자 단말의 수를 고려하여, 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행할 것인가의 여부를 결정할 수 있다.In the present embodiment, the streaming unit uses a SIMO (single input, multiple output) scheme for packetizing the encoded video, and streaming the packetized video to a plurality of user terminals, the relay determination unit is the streaming unit The first camera may determine whether to perform the requested video streaming by considering the number of user terminals connected to the.

본 실시예에 있어서, 상기 릴레이 전송부는, 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행할 수 없는 경우, 요청된 상기 영상 스트리밍을 수행할 수 있는 다른 카메라를 탐색하는 릴레이 탐색부; 요청된 상기 영상 스트리밍을 수행할 수 있는 다른 카메라가 없는 경우, 사용자 단말로 스트리밍 실패 메시지를 출력하는 메시지 출력부; 및 요청된 상기 영상 스트리밍을 수행할 수 있는 제2 카메라가 탐색되는 경우, 상기 사용자 단말의 정보와 상기 제1 프로파일의 영상을 상기 제2 카메라로 전송하거나, 상기 사용자 단말의 정보와 상기 제1 프로파일의 영상을 상기 제2 카메라로 전송하기 위한 제어 신호를 생성하는 전송부;를 포함할 수 있다.In one embodiment, the relay transmitter may include: a relay search unit for searching for another camera capable of performing the requested video streaming when the first camera cannot perform the requested video streaming; A message output unit which outputs a streaming failure message to a user terminal when there is no other camera capable of performing the requested video streaming; And when a second camera capable of performing the requested video streaming is found, the information of the user terminal and the image of the first profile are transmitted to the second camera, or the information and the first profile of the user terminal. And a transmitter configured to generate a control signal for transmitting the image of the camera to the second camera.

본 실시예에 있어서, 상기 UI부는 상기 릴레이 스트리밍부에 의해 상기 사용자 단말로의 스트리밍이 제공되는 동안 상기 사용자 단말에 사용자 인터페이스를 제공할 수 있다.In the present embodiment, the UI unit may provide a user interface to the user terminal while streaming to the user terminal is provided by the relay streaming unit.

본 발명의 다른 실시예는 제1 카메라 및 제2 카메라를 포함하는 네트워크 카메라 장치의 영상 스트리밍 제공 방법에 있어서, 상기 제1 카메라가 사용자 단말로부터 제1 프로파일의 영상 스트리밍을 요청하는 메시지를 획득하는 단계; 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행할 것인가의 여부를 결정하는 단계; 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행하는 것으로 결정되는 경우, 상기 제1 카메라가 상기 제1 프로파일의 영상을 상기 사용자 단말로 스트리밍하는 단계; 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행하지 않는 것으로 결정되는 경우, 상기 제1 카메라가 상기 사용자 단말의 정보와 상기 제1 프로파일의 영상을 상기 제2 카메라로 전송하는 단계; 상기 제2 카메라가 상기 제1 카메라로부터, 상기 사용자 단말의 정보와 상기 제1 프로파일의 영상을 전송받는 단계; 및 상기 제2 카메라가 상기 사용자 단말의 정보를 참조하여, 상기 제1 프로파일의 영상을 상기 사용자 단말로 스트리밍하는 단계;를 포함하는 영상 스트리밍 제공 방법을 개시한다.Another embodiment of the present invention provides a method for providing video streaming of a network camera apparatus including a first camera and a second camera, the first camera obtaining a message requesting the video streaming of the first profile from the user terminal ; Determining whether the first camera performs the requested video streaming; If it is determined that the first camera performs the requested video streaming, the first camera streaming the video of the first profile to the user terminal; When it is determined that the first camera does not perform the requested video streaming, the first camera transmitting information of the user terminal and an image of the first profile to the second camera; Receiving, by the second camera, information of the user terminal and an image of the first profile from the first camera; And streaming, by the second camera, the image of the first profile to the user terminal with reference to the information of the user terminal.

전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해질 것이다. 이러한 일반적이고 구체적인 측면이 시스템, 방법, 컴퓨터 프로그램, 또는 어떠한 시스템, 방법, 컴퓨터 프로그램의 조합을 사용하여 실시될 수 있다.Other aspects, features, and advantages other than those described above will become apparent from the following drawings, claims, and detailed description of the invention. These general and specific aspects may be practiced using systems, methods, computer programs, or any combination of systems, methods, computer programs.

본 발명의 실시예들에 관한 네트워크 카메라 장치 및 이의 영상 스트리밍 제공 방법은 복수의 네트워크 카메라를 이용하여 효율적이고 안정적인 영상 스트리밍을 제공할 수 있다.The network camera apparatus and its video streaming providing method according to embodiments of the present invention can provide efficient and stable video streaming using a plurality of network cameras.

도 1은 본 발명의 일 실시예에 따른 네트워크 카메라 시스템을 나타낸 것이다.
도 2는 네트워크 카메라 장치(10)에 구비되는 카메라의 구성을 나타낸 블록도이다.
도 3은 일 실시예에 따른 제1 카메라(110)와 제2 카메라(120)의 구성을 나타낸 블록도이다.
도 4는 일 실시예에 따른 제어부(116)의 구성을 나타낸 블록도이다.
도 5는 일 실시예에 따른 네트워크 카메라 시스템의 영상 스트리밍 제공 방법의 흐름도이다.1 shows a network camera system according to an embodiment of the present invention.
2 is a block diagram showing the configuration of a camera included in the network camera device 10.
3 is a block diagram illustrating a configuration of the first camera 110 and the second camera 120 according to an embodiment.
4 is a block diagram illustrating a configuration of the controller 116 according to an embodiment.
5 is a flowchart illustrating a video streaming providing method of a network camera system according to an exemplary embodiment.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 발명의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다. As the invention allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description. Effects and features of the present invention, and methods of achieving them will be apparent with reference to the embodiments described below in detail together with the drawings. However, the present invention is not limited to the embodiments disclosed below but may be implemented in various forms.

이하, 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, and the same or corresponding components will be denoted by the same reference numerals, and redundant description thereof will be omitted. .

이하의 실시예에서, 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다. 이하의 실시예에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 이하의 실시예에서, 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징들 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다. In the following embodiments, the terms first, second, etc. are used for the purpose of distinguishing one component from other components rather than a restrictive meaning. In the following examples, the singular forms "a", "an" and "the" include plural forms unless the context clearly indicates otherwise. In the following examples, the terms including or having have meant that there is a feature or component described in the specification and does not preclude the possibility of adding one or more other features or components.

도 1은 본 발명의 일 실시예에 따른 네트워크 카메라 시스템을 나타낸 것이다. 도 1을 참조하면, 본 발명의 일 실시예에 따른 네트워크 카메라 장치는 네트워크 카메라 장치(10), 사용자 단말(20), 및 통신망(30)을 포함한다.1 shows a network camera system according to an embodiment of the present invention. Referring to FIG. 1, a network camera device according to an embodiment of the present invention includes a network camera device 10, a user terminal 20, and a communication network 30.

일 실시예에 따른 네트워크 카메라 시스템은 영상 스트리밍 서비스를 제공할 수 있다. 네트워크 카메라 장치(10)는 촬영되는 영상을 통신망(30)을 통해 사용자 단말(20)에 제공할 수 있다. 예를 들어, 네트워크 카메라 장치(10)는 촬영되는 영상을 스트리밍 기능을 이용하여 사용자 단말(20)에 제공할 수 있다. 여기서, 스트리밍 기능은 통신망을 통해 음성이나 동영상 등을 실시간으로 재생할 수 있도록 전송하는 기술을 의미한다. 이하에서 '스트리밍한다'는 용어는 스트리밍 기능을 이용하여 전송한다는 의미로 사용한다.The network camera system according to an embodiment may provide a video streaming service. The network camera device 10 may provide the captured image to the user terminal 20 through the communication network 30. For example, the network camera device 10 may provide the captured image to the user terminal 20 using a streaming function. Here, the streaming function refers to a technology for transmitting voice or video in real time through a communication network. Hereinafter, the term 'streaming' is used to mean transmission using a streaming function.

일 실시예에 따른 네트워크 카메라 장치(10)는 복수의 카메라를 포함할 수 있다. 도 1을 참조하면, 네트워크 카메라 장치(10)는 제1 카메라(110)와 제2 카메라(120)를 포함한다. 도 1에는 2개의 카메라가 도시되었으나, 네트워크 카메라 장치(10)는 3개 이상의 카메라를 포함할 수 있다. The network camera device 10 according to an embodiment may include a plurality of cameras. Referring to FIG. 1, the network camera device 10 includes a first camera 110 and a second camera 120. Although two cameras are shown in FIG. 1, the network camera device 10 may include three or more cameras.

일 실시예에 따른 사용자 단말(20)은 유무선 통신 환경에서 웹 서비스를 이용할 수 있는 통신 단말기를 의미한다. 여기서 사용자 단말(20)은 사용자의 퍼스널 컴퓨터일 수도 있고, 휴대용 단말일 수도 있다. 도 1에서는 휴대용 단말(20)이 스마트폰(smart phone)으로 도시되었지만, 본 발명의 사상은 이에 제한되지 아니하며, 상술한 바와 같이 웹 브라우징이 가능한 애플리케이션을 탑재한 단말은 제한 없이 차용될 수 있다.The user terminal 20 according to an embodiment means a communication terminal capable of using a web service in a wired / wireless communication environment. The user terminal 20 may be a user's personal computer or a portable terminal. Although the portable terminal 20 is illustrated as a smart phone in FIG. 1, the spirit of the present invention is not limited thereto, and a terminal equipped with an application capable of web browsing as described above may be used without limitation.

한편, 사용자 단말(20)은 화면을 표시하는 표시부 및 사용자로부터 데이터를 입력받는 입력 장치를 구비한다. 입력 장치는 예를 들어, 키보드, 마우스, 트랙볼, 마이크, 버튼, 터치패널 등을 포함할 수 있으나, 이에 한정하지 않는다.Meanwhile, the user terminal 20 includes a display unit for displaying a screen and an input device for receiving data from a user. The input device may include, for example, a keyboard, a mouse, a trackball, a microphone, a button, a touch panel, but is not limited thereto.

일 실시예에 따른 통신망(30)은 사용자 단말(20)과 네트워크 카메라 장치(10)를 연결하는 역할을 수행한다. 예를 들어, 통신망(30)은 사용자 단말(20)이 네트워크 카메라 장치(10)에 접속한 후 패킷 데이터를 송수신할 수 있도록 접속 경로를 제공한다. The communication network 30 according to an embodiment performs a role of connecting the user terminal 20 and the network camera device 10. For example, the communication network 30 provides a connection path so that the user terminal 20 can transmit and receive packet data after connecting to the network camera device 10.

도 2는 네트워크 카메라 장치(10)에 구비되는 카메라의 구성을 나타낸 블록도이다. 도 2를 참조하면, 일 실시예에 따른 카메라(110)는 센서부(111), 영상 처리부(112), 엔코더(113), 스트리밍부(114), UI부(115), 및 제어부(116)를 포함할 수 있다.2 is a block diagram showing the configuration of a camera included in the network camera device 10. Referring to FIG. 2, the camera 110 according to an embodiment may include a sensor 111, an image processor 112, an encoder 113, a streaming unit 114, a UI unit 115, and a controller 116. It may include.

일 실시예에 따른 센서부(111)는 렌즈를 통과한 피사체의 영상광을 촬상하여 전기적인 신호를 생성하는 촬상소자를 포함한다. 촬상소자는 예를 들어 CCD(charge coupled device) 센서, CMOS(complementary metal oxide semiconductor) 센서 등을 사용할 수 있다. 센서부(111)는 촬상소자로부터 생성된 전기적인 신호를 출력할 수 있다.The sensor unit 111 according to an embodiment includes an image pickup device that generates an electrical signal by imaging the image light of the subject passing through the lens. The imaging device may be, for example, a charge coupled device (CCD) sensor, a complementary metal oxide semiconductor (CMOS) sensor, or the like. The sensor unit 111 may output an electrical signal generated from the imaging device.

일 실시예에 따른 영상 처리부(112)는 센서부(111)로부터 출력된 전기 신호로부터 디지털 영상신호를 생성한다. 일 실시예에 따른 영상 처리부(112)는 생성된 영상신호에 대하여 감마 보정 등의 일련의 영상처리를 더 수행할 수 있다. The image processor 112 according to an exemplary embodiment generates a digital image signal from an electrical signal output from the sensor unit 111. The image processor 112 according to an exemplary embodiment may further perform a series of image processing such as gamma correction on the generated image signal.

일 실시예에 따른 엔코더(113)는 미리 설정된 엔코딩 프로파일에 따라 영상 처리부(112)로부터 출력된 영상 신호를 암호화(encoding)한다. 엔코더(113)는 미리 설정된 엔코딩 프로파일에 따라 영상신호를 암호화할 수 있다. 여기서, 프로파일이라는 것은 영상신호를 처리하는 일종의 파라미터들을 포함하는 것으로써, 영상의 사양을 나타내는 것일 수 있다. 프로파일은 복수의 파라미터를 포함할 수 있는데 예를 들어, 영상의 해상도, 코덱, 프레임레이트, 비트레이트 등의 파라미터를 포함할 수 있다.The encoder 113 according to an embodiment encodes an image signal output from the image processor 112 according to a preset encoding profile. The encoder 113 may encrypt an image signal according to a preset encoding profile. Here, the profile includes a kind of parameters for processing the video signal and may indicate a specification of the video. The profile may include a plurality of parameters. For example, the profile may include parameters such as a resolution, a codec, a frame rate, and a bit rate of an image.

도 2에 도시된 것과 같이 일 실시예에 따른 엔코더(113)는 복수의 세부 엔코더들을 포함할 수 있다. 예를 들어 도 2에 도시된 엔코더(113)는 제1 엔코더(1131)와 제2 엔코더(1132)를 포함할 수 있다. 제1 엔코더(1131) 및 제2 엔코더(1132)는 개별적으로 설정된 엔코딩 프로파일에 따라 영상신호를 암호화한다. 본 실시예에 따른 엔코더(113)는 동일한 영상신호를 복수의 프로파일에 따라 가공함으로써 서로 다른 사양의 영상을 제공할 수 있게 된다.As shown in FIG. 2, the encoder 113 according to an exemplary embodiment may include a plurality of detailed encoders. For example, the encoder 113 shown in FIG. 2 may include a first encoder 1131 and a second encoder 1132. The first encoder 1131 and the second encoder 1132 encrypt the video signal according to the separately set encoding profile. The encoder 113 according to the present exemplary embodiment may provide images having different specifications by processing the same image signal according to a plurality of profiles.

일 실시예에 따른 스트리밍부(114)는 엔코더(113)로부터 출력된 암호화된 영상신호를 외부로 전송한다. 스트리밍부(114)는 영상신호를 외부로 전송함에 있어서 스트리밍 기능을 이용할 수 있다. The streaming unit 114 according to an embodiment transmits the encrypted video signal output from the encoder 113 to the outside. The streaming unit 114 may use a streaming function in transmitting the video signal to the outside.

도 2에 도시된 것과 같이 일 실시예에 따른 스트리밍부(114)는 복수의 세부 스트리밍부들을 포함할 수 있다. 예를 들어 도 2에 도시된 스트리밍부(114)는 제1 스트리밍부(1141)와 제2 스트리밍부(1142)를 포함할 수 있다. 제1 스트리밍부는 제1 엔코더(1131)에 대응되고, 제2 스트리밍부는 제2 엔코더(1132)에 대응되는 것일 수 있다. 제1 스트리밍부(1141)는 제1 엔코더(1131)로부터 영상 신호를 입력받고, 제2 스트리밍부(1142)는 제2 엔코더(1132)로부터 영상 신호를 입력받는다. 즉, 스트리밍부와 엔코더는 일대일 대응될 수 있다. 각 스트리밍부(1141, 1142)는 인코딩된 영상을 입력받고 이를 패킷화하여 사용자 단말로 스트리밍한다. 일 실시예에 따라, 각 스트리밍부(1141, 1142)는 영상을 패킷화하여 복수의 사용자 단말로 스트리밍하는 SIMO(single input, multiple output) 방식을 이용하여, 동일한 영상을 복수의 사용자 단말로 제공할 수 있다. As shown in FIG. 2, the streaming unit 114 according to an embodiment may include a plurality of detailed streaming units. For example, the streaming unit 114 shown in FIG. 2 may include a first streaming unit 1141 and a second streaming unit 1142. The first streaming unit may correspond to the first encoder 1131, and the second streaming unit may correspond to the second encoder 1132. The first streaming unit 1141 receives an image signal from the first encoder 1131, and the second streaming unit 1142 receives an image signal from the second encoder 1132. That is, the streaming unit and the encoder may correspond one-to-one. Each of the streaming units 1141 and 1142 receives an encoded image and packetizes it and streams it to a user terminal. According to an embodiment, each of the streaming units 1141 and 1142 may provide the same image to a plurality of user terminals by using a SIMO (single input, multiple output) method of packetizing and streaming the image to a plurality of user terminals. Can be.

일 실시예에 따른 UI부(115)는 사용자 단말에 사용자 인터페이스(UI; user interface)를 제공한다. 예를 들어, 일 실시예에 따른 UI부(115)는 사용자 단말로부터 메시지를 입력받을 수 있고 영상을 표시할 수 있는 인터페이스 환경을 제공할 수 있다. 일 실시예에 따른 UI부(115)는 사용자 단말로부터 입력된 메시지를 획득하고, 획득된 메시지를 제어부(116)로 출력할 수 있다. 예를 들어, UI부(115)는 사용자 단말(20)로부터 영상 스트리밍을 요청하는 메시지를 획득할 수 있다. 상기 메시지는 특정 프로파일의 영상 스트리밍의 요청을 포함할 수 있다. According to an embodiment, the UI unit 115 provides a user interface (UI) to a user terminal. For example, the UI unit 115 may provide an interface environment for receiving a message from a user terminal and displaying an image. According to an exemplary embodiment, the UI unit 115 may obtain a message input from a user terminal and output the obtained message to the controller 116. For example, the UI unit 115 may obtain a message for requesting video streaming from the user terminal 20. The message may include a request for video streaming of a specific profile.

일 실시예에 따른 제어부(116)는 UI부(115)로부터 획득된 사용자 입력 메시지에 기초하여 카메라 제어 신호를 생성한다. 예를 들어, 사용자 단말(20)로부터 제1 프로파일의 영상 스트리밍이 요청된 경우, 제어부(116)는 스트리밍 목적지가 되는 사용자 단말(20)의 정보 및 사용자 단말(20)로부터 요청된 제1 프로파일 정보를 UI부(115)로부터 획득하고, 상기 정보에 기초하여 제1 카메라(110)가 사용자 단말(20)로 제1 프로파일의 영상을 제공하도록 제1 카메라(110)를 제어한다. 일 실시예에 따른 제어부(116)는 제1 카메라(110)가 영상 스트리밍을 제공할 수 있는 상태인가의 여부를 결정하고, 결정 결과에 따라 제1 카메라(110)를 제어할 수 있다. The control unit 116 generates a camera control signal based on a user input message obtained from the UI unit 115. For example, when the video streaming of the first profile is requested from the user terminal 20, the controller 116 controls information of the user terminal 20 as a streaming destination and the first profile information requested from the user terminal 20. Is obtained from the UI unit 115, and the first camera 110 controls the first camera 110 to provide an image of the first profile to the user terminal 20 based on the information. The controller 116 according to an embodiment may determine whether the first camera 110 is capable of providing video streaming, and control the first camera 110 according to the determination result.

사용자 단말(20)로부터 제1 프로파일의 영상 스트리밍이 요청된 경우 제어부(116)는 제1 프로파일에 해당하는 영상을 스트리밍하는 제1 스트리밍부(1141)로, 스트리밍 목적지가 되는 사용자 단말(20)의 정보를 전송할 수 있다. 스트리밍부(114)는 제어부(116)의 제어에 따라, 사용자 단말(20)로 제1 프로파일에 해당하는 영상을 스트리밍한다. When the video streaming of the first profile is requested from the user terminal 20, the controller 116 is a first streaming unit 1141 that streams the video corresponding to the first profile, and the user terminal 20 is a streaming destination. Information can be sent. The streaming unit 114 streams an image corresponding to the first profile to the user terminal 20 under the control of the controller 116.

도 3은 일 실시예에 따른 제1 카메라(110)와 제2 카메라(120)의 구성을 나타낸 블록도이다. 도 4는 일 실시예에 따른 제어부(116)의 구성을 나타낸 블록도이다. 본 발명의 일 실시예에 따른 제어부(116)는 카메라의 스트리밍 서비스를 제어하는 역할을 수행하며, 적어도 하나 이상의 프로세서(processor)에 해당하거나, 적어도 하나 이상의 프로세서를 포함할 수 있다. 도 4를 참조하면, 제어부(116)는 릴레이 결정부(1161) 및 릴레이 전송부(1162)를 포함할 수 있다. 도 4에는 제1 카메라(120)의 제어부(116)의 예가 도시되었으나, 제2 카메라(120)의 제어부(126)를 포함하여 네트워크 카메라 장치(10)에 포함된 카메라의 제어부 역시 도 4에 도시된 제어부(116)와 동일하게 구성될 수 있다. 3 is a block diagram illustrating a configuration of the first camera 110 and the second camera 120 according to an embodiment. 4 is a block diagram illustrating a configuration of the controller 116 according to an embodiment. The control unit 116 according to an embodiment of the present invention performs a role of controlling a streaming service of a camera, and may correspond to at least one or more processors or include at least one or more processors. Referring to FIG. 4, the controller 116 may include a relay determiner 1161 and a relay transmitter 1162. Although FIG. 4 illustrates an example of the controller 116 of the first camera 120, the controller of the camera included in the network camera device 10 including the controller 126 of the second camera 120 is also illustrated in FIG. 4. The control unit 116 may be configured in the same manner.

상술한 것과 같이 본 발명의 일 실시예에 따른 각 카메라는 복수의 엔코더 및 각각의 엔코더에 대응되는 스트리밍부를 포함할 수 있으나, 도 3에서는 설명의 편의를 위하여 하나의 카메라에 하나의 엔코더와 하나의 스트리밍부를 도시하였다. 따라서 도 3에 도시된 제1 카메라(110)와 제2 카메라(120)는 도면에 도시된 하나의 엔코더와 하나의 스트리밍부 외에도 엔코더 및 스트리밍부를 더 포함할 수 있다.As described above, each camera according to an embodiment of the present invention may include a plurality of encoders and a streaming unit corresponding to each encoder, but in FIG. 3, one encoder and one encoder are included in one camera for convenience of description. The streaming part is shown. Accordingly, the first camera 110 and the second camera 120 illustrated in FIG. 3 may further include an encoder and a streaming unit in addition to one encoder and one streaming unit illustrated in the drawing.

이하에서는 도 3 및 도 4를 함께 참조하여 본 실시예를 설명하기로 한다.Hereinafter, this embodiment will be described with reference to FIGS. 3 and 4.

일 실시예에 따라 제1 카메라(110)의 UI부(115)는 사용자 단말(20)로부터 영상 스트리밍 요청 메시지를 수신할 수 있다. 상기 메시지는 영상 프로파일 정보를 포함할 수 있다. 예를 들어, 상기 메시지는 엔코더(113)에서 제공되는 제1 프로파일의 정보를 포함할 수 있고, 이 때 상기 메시지는 제1 프로파일의 영상 스트리밍을 요청하는 메시지일 수 있다. According to an embodiment, the UI unit 115 of the first camera 110 may receive an image streaming request message from the user terminal 20. The message may include image profile information. For example, the message may include information of the first profile provided by the encoder 113, wherein the message may be a message for requesting video streaming of the first profile.

UI부(115)는 사용자 단말(20)로부터 수신된 메시지 또는 상기 메시지에 포함된 정보를 제어부(116)에 전송한다. 제어부(116)는 제1 카메라(110)가 사용자 단말(20)로 영상 스트리밍을 제공할 수 있는 상태인지 판단한다. 예를 들어, 제어부(116)의 릴레이 결정부(1161)는 사용자 단말(20)로부터 요청된 영상 스트리밍을 제1 카메라(110)가 수행할 수 있는가의 여부를 결정한다. The UI unit 115 transmits a message received from the user terminal 20 or information included in the message to the controller 116. The controller 116 determines whether the first camera 110 can provide video streaming to the user terminal 20. For example, the relay determiner 1161 of the controller 116 determines whether the first camera 110 can perform the video streaming requested from the user terminal 20.

한편 상술한 것과 같이 스트리밍부(114)는 복수의 대상에게 스트리밍을 제공할 수 있다. 스트리밍부(114)에서 제공되는 스트리밍의 성능에는 한계가 있으므로, 릴레이 결정부(1161)는 스트리밍부(114)의 현재 상태를 고려하여 제1 카메라(110)가 사용자 단말(20)로 스트리밍을 제공할 것인가의 여부를 판단할 수 있다. Meanwhile, as described above, the streaming unit 114 may provide streaming to a plurality of targets. Since the performance of the streaming provided by the streaming unit 114 is limited, the relay determination unit 1161 may provide the first camera 110 to the user terminal 20 in consideration of the current state of the streaming unit 114. You can decide whether or not to do so.

일 실시예에 따른 릴레이 결정부(1161)는 사용자 단말(20)로부터 요청된 제1 프로파일의 영상을 출력하는 엔코더(113)에 대응되는 스트리밍부(114)의 현재 상태를 고려하여, 제1 카메라(110)가 사용자 단말(20)로 스트리밍을 제공할 것인가의 여부를 판단할 수 있다.The relay determiner 1161 according to an embodiment may consider the current state of the streaming unit 114 corresponding to the encoder 113 for outputting an image of the first profile requested from the user terminal 20, and thus may include a first camera. 110 may determine whether to provide streaming to the user terminal 20.

일 실시예에 따른 릴레이 결정부(1161)는 제1 카메라(110)의 실시간 상태 및 스트리밍부(114)가 제1 프로파일의 영상을 스트리밍 하기 위해 요구되는 부하를 고려하여, 사용자 단말(20)로부터 요청된 영상 스트리밍을 제1 카메라(110)가 수행할 수 있는가의 여부를 판단하고, 이에 따라 제1 카메라(110)가 스트리밍을 제공할 것인가의 여부를 결정할 수 있다. The relay determiner 1161 according to an embodiment takes the load from the real-time state of the first camera 110 and the load required for the streaming unit 114 to stream the image of the first profile, from the user terminal 20. It may be determined whether the first camera 110 can perform the requested video streaming, and accordingly, the first camera 110 may determine whether to provide the streaming.

여기서, 제1 카메라(110)의 상태는 엔코더(113)의 성능, 스트리밍부(114)가 패킷을 만드는데 사용가능한 자원, 스트리밍부(114)의 통신 대역폭, 및 현재 사용되고 있는 대역폭 중 적어도 하나를 포함할 수 있다. 여기서, 스트리밍에 요구되는 부하는 사용자 단말(20)로부터 요청된 스트리밍에 요구되는 자원, 및 통신 대역폭 중 적어도 하나를 포함할 수 있다.Here, the state of the first camera 110 includes at least one of the performance of the encoder 113, the resources available to the streaming unit 114 to make a packet, the communication bandwidth of the streaming unit 114, and the bandwidth currently being used. can do. Here, the load required for streaming may include at least one of a resource required for streaming requested from the user terminal 20 and a communication bandwidth.

한편, 일 실시예에 따른 릴레이 결정부(1161)는 미리 설정된 부하 분산 정책에 기초하여 제1 카메라(110)가 스트리밍을 제공할 것인가의 여부를 결정할 수 있다. 예를 들어, 제1 카메라(110)에서 추가로 사용 가능한 통신 대역폭의 여유가 있는 경우라도, 현재 사용중인 통신 대역폭이 기설정된 기준치를 초과하는 경우에는 제1 카메라(110)에서 스트리밍을 제공하지 않는 것으로 결정할 수 있다. Meanwhile, the relay determiner 1161 according to an embodiment may determine whether the first camera 110 provides streaming based on a preset load balancing policy. For example, even if there is a margin of communication bandwidth additionally available in the first camera 110, the first camera 110 does not provide streaming when the currently used communication bandwidth exceeds a preset reference value. Can be determined.

일 실시예에 따른 릴레이 결정부(1161)는 스트리밍부(114)에 연결된 스트리밍 대상의 수를 고려하여, 요청된 영상 스트리밍을 제1 카메라(110)가 수행할 수 있는가의 여부를 판단할 수 있다. 예를 들어, 부하 분산 정책에 따라 하나의 카메라에 연결 가능한 스트리밍 대상의 최대 개수가 지정되어 있는 경우, 릴레이 결정부(1161)는 스트리밍부(114)에 현재 연결된 스트리밍 대상의 수가 상기 최대 개수와 동일하거나 상기 최대 개수를 초과하는 경우, 요청된 영상 스트리밍을 제1 카메라(110)가 수행할 수 없는 것으로 결정할 수 있다.The relay determiner 1161 according to an embodiment may determine whether the first camera 110 can perform the requested video streaming in consideration of the number of streaming targets connected to the streaming unit 114. . For example, when the maximum number of streaming targets that can be connected to one camera is specified according to the load balancing policy, the relay determination unit 1161 determines that the number of streaming targets currently connected to the streaming unit 114 is equal to the maximum number. Or, if the maximum number is exceeded, it may be determined that the first camera 110 cannot perform the requested video streaming.

릴레이 결정부(1161)에 의해 제1 카메라(110)가 스트리밍을 제공하는 것으로 결정되는 경우, 스트리밍부(114)는 제어부(116)의 제어 신호에 따라 제1 프로파일의 영상을 사용자 단말(20)로 제공할 수 있다.When it is determined by the relay determination unit 1161 that the first camera 110 provides streaming, the streaming unit 114 displays the image of the first profile according to the control signal of the control unit 116. Can be provided as

릴레이 결정부(1161)에 의해 제1 카메라(110)가 스트리밍을 제공하지 않는 것으로 결정되는 경우, 릴레이 전송부(1162)는 스트리밍 목적지가 되는 사용자 단말(20)의 정보와 제1 프로파일의 영상을 제2 카메라(120)로 전송하도록 제1 카메라(110)를 제어한다. 제1 카메라(110)로부터 사용자 단말(20) 정보와 제1 프로파일의 영상이 제2 카메라(120)로 전송되는 방법은 엔코더(113)에서 출력된 영상이 별도의 통신 인터페이스를 통하여 전송되거나, 스트리밍부(114)를 통하여 전송되거나, 릴레이 전송부(1162)가 전송하는 등 다양한 방법이 적용 될 수 있다. 도 3에서는 사용자 단말(20) 정보 및 제1 프로파일의 영상이 스트리밍부(114)로부터 제2 카메라(120)로 전송되는 예가 도시되었으나, 본 발명의 실시예들이 특정 예에 한정되지 않는다.If it is determined by the relay determination unit 1161 that the first camera 110 does not provide streaming, the relay transmission unit 1162 may display information of the user terminal 20 as the streaming destination and the image of the first profile. The first camera 110 is controlled to transmit to the second camera 120. In the method of transmitting the user terminal 20 information and the image of the first profile from the first camera 110 to the second camera 120, the image output from the encoder 113 is transmitted through a separate communication interface or streamed. Various methods may be applied, such as transmitted through the unit 114 or transmitted by the relay transmitter 1162. 3 illustrates an example in which the user terminal 20 information and the image of the first profile are transmitted from the streaming unit 114 to the second camera 120, but embodiments of the present invention are not limited to the specific example.

일 실시예에 따른 릴레이 전송부(1162)는 제1 카메라(110)에 요청된 영상 스트리밍을 다른 카메라로 릴레이하기 위하여, 스트리밍의 제공이 가능한 다른 카메라를 탐색할 수 있다. 이를 위하여, 일 실시예에 따른 릴레이 전송부(1162)는 요청된 영상 스트리밍을 제1 카메라(110)가 수행할 수 없는 경우, 요청된 영상 스트리밍을 수행할 수 있는 다른 카메라를 탐색하는 릴레이 탐색부, 요청된 영상 스트리밍을 수행할 수 있는 다른 카메라가 없는 경우, 사용자 단말(20)로 스트리밍 실패 메시지를 출력하는 메시지 출력부, 및 요청된 영상 스트리밍을 수행할 수 있는 제2 카메라(120)가 탐색되는 경우, 사용자 단말(20)의 정보와 제1 프로파일의 영상을 제2 카메라(120)로 전송하는 전송부를 포함할 수 있다. 상기 스트리밍 실패 메시지는 UI부(115)를 통해 사용자 단말(20)에 전송될 수 있다.The relay transmitter 1162 according to an embodiment may search for another camera capable of providing streaming in order to relay the video streaming requested by the first camera 110 to another camera. To this end, when the first camera 110 cannot perform the requested video streaming, the relay transmitter 1162 may search for another camera capable of performing the requested video streaming. When there is no other camera capable of performing the requested video streaming, the message output unit outputs a streaming failure message to the user terminal 20, and the second camera 120 capable of performing the requested video streaming is searched. If so, it may include a transmission unit for transmitting the information of the user terminal 20 and the image of the first profile to the second camera 120. The streaming failure message may be transmitted to the user terminal 20 through the UI unit 115.

일 실시예에 따르면, 제1 카메라(110)의 스트리밍을 릴레이할 수 있는 다른 카메라의 목록이 미리 저장될 수 있다. 예를 들어, 일 실시예에 따른 네트워크 카메라 시스템이 시작될 때, 네트워크 카메라 시스템에 포함된 각각의 카메라는 자신의 스트리밍을 릴레이할 수 있는 다른 카메라를 검색하고, 검색된 카메라의 목록을 저장할 수 있다. 이 경우 릴레이 전송부(1162)의 릴레이 탐색부는 기저장된 목록에 포함된 카메라의 부하 상태를 확인하거나, 새로운 카메라를 검색 및 등록한 후 부하 상태를 확인할 수 있다. According to an embodiment, a list of other cameras capable of relaying streaming of the first camera 110 may be stored in advance. For example, when a network camera system according to an embodiment is started, each camera included in the network camera system may search for another camera capable of relaying its own streaming, and store a list of found cameras. In this case, the relay search unit of the relay transmitter 1162 may check a load state of a camera included in a pre-stored list, or search and register a new camera to check the load state.

릴레이 전송부(1162)에 의해 사용자 단말(20)의 정보 및 상기 사용자 단말(20)로부터 제1 카메라(110)에 요청된 제1 프로파일의 영상이 제2 카메라(120)로 전송되는 경우, 제2 카메라(120)의 스트리밍부(124)는 제1 카메라(110)로부터 전송된 사용자 단말(20)의 정보를 참조하여, 제1 카메라(110)로부터 전송된 제1 프로파일의 영상을 사용자 단말(20)로 스트리밍할 수 있다. When the information of the user terminal 20 and the image of the first profile requested by the relay terminal 1162 to the first camera 110 from the user terminal 20 are transmitted to the second camera 120, The streaming unit 124 of the second camera 120 refers to the information of the user terminal 20 transmitted from the first camera 110, and displays an image of the first profile transmitted from the first camera 110. 20).

일 실시예에 따르면, 사용자 단말(20)에 의해 제1 카메라(110)로 요청된 영상 스트리밍이 제2 카메라(120)로 릴레이되어 제2 카메라(120)에 의해 제공되는 동안, 제1 카메라(110)의 UI부(115)는 사용자 단말(20)에 여전히 사용자 인터페이스 환경을 제공할 수 있다. 사용자 단말(20)은 제1 카메라(110)와 연결된 사용자 인터페이스 환경을 통해 메시지를 송수신하면서, 제2 카메라(120)와 연결된 세션을 통해 영상 스트리밍을 수신할 수 있다.According to an embodiment, while the video streaming requested by the user terminal 20 to the first camera 110 is relayed to the second camera 120 and provided by the second camera 120, the first camera ( The UI unit 115 of 110 may still provide a user interface environment to the user terminal 20. The user terminal 20 may receive a video stream through a session connected with the second camera 120 while transmitting and receiving a message through a user interface environment connected with the first camera 110.

다른 실시예에 따르면, 사용자 단말(20)은 제1 카메라(110)의 영상 스트리밍 요청 메시지를 제2 카메라(120)에 전송하고, 제2 카메라(120)는 전송된 메시지를 제1 카메라(110)로 전달하거나, 전송된 메시지를 참조하여 제1 카메라(110)의 영상을 사용자 단말(20)에 제공할 수 있을 것이다. 다만 본 실시예의 경우, 복수의 카메라 간에 기설정된 권한 정보가 참고되는 것이 바람직하다 할 것이다. 본 실시예에 따르면, 사용자 단말(20)은 하나의 카메라에 접속하는 것 만으로도 다른 카메라에서 제공되는 프로파일의 영상을 스트리밍받을 수 있게 된다. 기설정된 권한 정보에 따라 사용자 단말(20)은 하나의 카메라를 통해 전체 시스템을 관리할 수도 있을 것이다.According to another exemplary embodiment, the user terminal 20 transmits an image streaming request message of the first camera 110 to the second camera 120, and the second camera 120 transmits the transmitted message to the first camera 110. ), Or may provide an image of the first camera 110 to the user terminal 20 with reference to the transmitted message. However, in the present embodiment, it will be preferable to refer to the authority information preset between the plurality of cameras. According to the present exemplary embodiment, the user terminal 20 may receive an image of a profile provided from another camera only by connecting to one camera. According to preset authority information, the user terminal 20 may manage the entire system through one camera.

한편, 제2 카메라(120) 역시 UI부(125) 및 제어부(126)를 포함할 수 있으며, 제1 카메라(110)의 UI부(115) 및 제어부(116)와 동일한 역할을 수행할 수 있다.The second camera 120 may also include a UI unit 125 and a controller 126, and may play the same role as the UI unit 115 and the controller 116 of the first camera 110. .

도 3에는 제1 카메라(110) 및 제2 카메라(120)만 도시되었으나, 일 실시예에 따른 네트워크 카메라 장치는 다른 카메라 예컨대 제3 카메라를 더 포함할 수 있다. 이 경우, 제1 카메라(110)는 제1 프로파일의 스트리밍을 제2 카메라(120)에 릴레이하고, 제2 프로파일의 스트리밍을 제3 카메라(미도시)에 릴레이하는 등, 복수의 카메라에 영상 스트리밍 릴레이를 요청할 수 있다.Although only the first camera 110 and the second camera 120 are illustrated in FIG. 3, the network camera apparatus according to an embodiment may further include other cameras such as a third camera. In this case, the first camera 110 relays the streaming of the first profile to the second camera 120 and relays the streaming of the second profile to the third camera (not shown). You can request a relay.

도 5는 일 실시예에 따른 네트워크 카메라 시스템의 영상 스트리밍 제공 방법의 흐름도이다.5 is a flowchart illustrating a video streaming providing method of a network camera system according to an exemplary embodiment.

도 5를 참조하면 단계 51에서 제1 카메라(110)의 UI부(115)는 제1 카메라(110)가 사용자 단말(20)로부터 제1 프로파일의 영상 스트리밍을 요청하는 메시지를 획득한다.Referring to FIG. 5, in step 51, the UI unit 115 of the first camera 110 obtains a message for requesting the video streaming of the first profile from the user terminal 20 by the first camera 110.

단계 52에서 제1 카메라(110)의 제어부(116)는 요청된 영상 스트리밍을 제1 카메라(110)가 수행할 것인가의 여부를 결정한다.In operation 52, the controller 116 of the first camera 110 determines whether the first camera 110 performs the requested video streaming.

단계 52에서 요청된 영상 스트리밍을 제1 카메라(110)가 수행하는 것으로 결정되는 경우, 단계 53으로 진행한다. 단계 53에서 제1 카메라(110)의 스트리밍부(114)는 요청된 제1 프로파일의 영상을 사용자 단말(20)로 스트리밍한다.If it is determined in step 52 that the first camera 110 performs the requested video streaming, the process proceeds to step 53. In operation 53, the streaming unit 114 of the first camera 110 streams the image of the requested first profile to the user terminal 20.

단계 52에서 요청된 영상 스트리밍을 제1 카메라(110)가 수행하지 않는 것으로 결정되는 경우, 단계 54로 진행한다. 단계 54에서 제어부(116)는 사용자 단말(20)의 정보와 제1 프로파일의 영상을 제2 카메라(120)로 전송하도록 제1 카메라(110)를 제어한다. 상기 전송은 제1 카메라(110)의 통신 인터페이스, 스트리밍부(114) 또는 엔코더(113)로부터 전송 가능하나 본 발명의 실시예들은 특정 예에 한정되지 않는다.If it is determined in step 52 that the first camera 110 does not perform the requested video streaming, the process proceeds to step 54. In operation 54, the controller 116 controls the first camera 110 to transmit the information of the user terminal 20 and the image of the first profile to the second camera 120. The transmission may be transmitted from the communication interface of the first camera 110, the streaming unit 114 or the encoder 113, but embodiments of the present invention are not limited to a specific example.

단계 55에서 제2 카메라(120)의 스트리밍부(124)는 제1 카메라(110)로부터 사용자 단말(20)의 정보와 제1 프로파일의 영상을 전송받는다.In operation 55, the streaming unit 124 of the second camera 120 receives information of the user terminal 20 and an image of the first profile from the first camera 110.

단계 56에서 제2 카메라(120)의 스트리밍부(124)는 사용자 단말(20)의 정보를 참조하여 제1 프로파일의 영상을 사용자 단말(20)로 스트리밍한다.In operation 56, the streaming unit 124 of the second camera 120 refers to the information of the user terminal 20 to stream an image of the first profile to the user terminal 20.

한편, 전술한 것과 같이 제1 카메라(110)에 요청된 영상 스트리밍이 제2 카메라(120)에 의해 수행되는 동안에도, 제1 카메라(110)는 사용자 단말(20)에 인터페이스 환경을 제공할 수 있다. 상기 인터페이스 환경을 통해 사용자 단말은 새로운 프로파일의 영상을 요청하는 메시지를 제1 카메라(110)에 전송할 수 있다. 사용자 단말(20)로부터 새로운 영상 스트리밍 요청 메시지가 획득되면 단계 51 내지 단계 56이 반복될 수 있다.Meanwhile, as described above, even while the video streaming requested by the first camera 110 is performed by the second camera 120, the first camera 110 may provide an interface environment to the user terminal 20. have. The user terminal may transmit a message for requesting an image of a new profile to the first camera 110 through the interface environment. When a new video streaming request message is obtained from the user terminal 20, steps 51 to 56 may be repeated.

한편, 도 5에 도시된 영상 스트리밍 제공 방법은 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드 디스크, 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.On the other hand, the video streaming providing method shown in Figure 5 can be written in a program that can be executed in a computer, it can be implemented in a general-purpose digital computer to operate the program using a computer-readable recording medium. The computer readable recording medium may include a storage medium such as a magnetic storage medium (eg, a ROM, a floppy disk, a hard disk, etc.), an optical reading medium (eg, a CD-ROM, a DVD, or the like).

전술된 본 발명의 실시예들에 따르면, 복수의 카메라를 이용하여 효율적이고 안정적인 스트리밍 서비스를 제공하는 네트워크 카메라 시스템이 개시된다. 전술한 본 발명의 실시예들에 따르면, 제1 카메라의 영상 스트리밍이 제2 카메라로 릴레이되는 경우, 제2 카메라는 제1 카메라에서 엔코딩이 완료된 영상 신호를 전송받아 스트리밍 서비스만을 제공하므로, 영상의 실시간성이 확보된다. 또한, 통신 부하 외에는 제2 카메라에 요구되는 부하가 적기 때문에 제2 카메라에 큰 부담이 되지 않는다.According to the embodiments of the present invention described above, a network camera system for providing an efficient and stable streaming service using a plurality of cameras is disclosed. According to the above-described embodiments of the present invention, when the video streaming of the first camera is relayed to the second camera, the second camera receives only the encoded video signal from the first camera and provides only the streaming service. Real time is secured. In addition, since the load required for the second camera other than the communication load is small, it is not a big burden on the second camera.

전술된 본 발명의 실시예들에 따르면, 제1 카메라의 영상 스트리밍이 제2 카메라로 릴레이되는 경우에도 제1 카메라는 사용자 단말에 사용자 인터페이스를 제공하므로, 사용자 단말은 영상 스트리밍을 위해 연결된 카메라에 상관 없이 동일한 서비스를 경험할 수 있다.According to the embodiments of the present invention described above, even when the video streaming of the first camera is relayed to the second camera, since the first camera provides a user interface to the user terminal, the user terminal may be connected to a camera connected for video streaming. You can experience the same service without it.

전술된 본 발명의 실시예들에 있어서 사용자 인터페이스는 웹, 또는 통합관리 소프트웨어(CMS) 상에서 제공될 수 있으나, 이에 한정하지 않는다.In the above-described embodiments of the present invention, the user interface may be provided on the web or integrated management software (CMS), but is not limited thereto.

이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.So far I looked at the center of the preferred embodiment for the present invention. Those skilled in the art will appreciate that the present invention can be implemented in a modified form without departing from the essential features of the present invention. Therefore, the disclosed embodiments should be considered in descriptive sense only and not for purposes of limitation. The scope of the present invention is shown in the claims rather than the foregoing description, and all differences within the scope will be construed as being included in the present invention.

10: 네트워크 카메라 장치
20: 사용자 단말
30: 통신망
110: 제1 카메라
120: 제2 카메라
111, 121: 센서부
112, 122: 영상 처리부
113, 123: 엔코더
114, 124: 스트리밍부
115, 125: UI부
116, 126: 제어부
1161: 릴레이 결정부
1162: 릴레이 전송부10: network camera device
20: user terminal
30: network
110: first camera
120: second camera
111, 121: sensor unit
112, 122: image processing unit
113, 123: encoder
114, 124: streaming part
115, 125: UI section
116, 126: control unit
1161: relay determination unit
1162: relay transmission unit

Claims (6)

제1 카메라 및 제2 카메라를 포함하는 네트워크 카메라 장치에 있어서,
상기 제1 카메라는
사용자 단말에 사용자 인터페이스(UI, user interface)를 제공하고, 사용자 단말로부터 상기 제1 카메라가 획득한 영상으로써, 제1 프로파일인 제1 영상의 영상 스트리밍을 요청하는 메시지를 획득하는 UI부;
상기 제1 영상의 스트리밍을 상기 제1 카메라가 수행할 것인가의 여부를 결정하는 릴레이 결정부;
상기 제1 영상의 스트리밍을 상기 제1 카메라가 수행하는 것으로 결정된 경우, 상기 제1 영상을 상기 사용자 단말로 스트리밍하는 스트리밍부; 및
상기 제1 영상의 스트리밍을 상기 제1 카메라가 수행하지 않는 것으로 결정된 경우, 상기 사용자 단말의 정보와 상기 제1 영상을 상기 제2 카메라로 전송하여, 상기 사용자 단말에 대한 상기 제1 영상의 스트리밍을 상기 제2 카메라가 수행하도록 하는 릴레이 전송부;를 포함하는,
네트워크 카메라 장치.In the network camera device including a first camera and a second camera,
The first camera
A UI unit which provides a user interface (UI) to a user terminal and obtains a message for requesting video streaming of a first image, which is a first profile, as an image acquired by the first camera from a user terminal;
A relay determination unit determining whether the first camera performs the streaming of the first image;
A streaming unit configured to stream the first image to the user terminal when it is determined that the first camera performs the streaming of the first image; And
If it is determined that the first camera does not perform the streaming of the first image, the information of the user terminal and the first image are transmitted to the second camera to perform streaming of the first image to the user terminal. It includes; a relay transmission unit for performing the second camera,
Network camera device. 삭제delete 제1 항에 있어서,
상기 스트리밍부는
인코딩된 영상을 패킷화하고, 패킷화된 상기 영상을 복수의 사용자 단말로 스트리밍하는 SIMO(single input, multiple output) 방식을 이용하고,
상기 릴레이 결정부는
상기 제1 카메라의 상태, 상기 제1 프로파일의 영상을 스트리밍 하는데 요구되는 부하 및 상기 스트리밍부에 연결된 사용자 단말의 수 중 적어도 하나를 고려하여, 요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행할 것인가의 여부를 결정하는
네트워크 카메라 장치.According to claim 1,
The streaming unit
Packetizing the encoded video, and using a SIMO (single input, multiple output) scheme for streaming the packetized video to a plurality of user terminals,
The relay determination unit
The first camera performs the requested video streaming in consideration of at least one of the state of the first camera, the load required for streaming the video of the first profile, and the number of user terminals connected to the streaming unit. To determine whether
Network camera device. 제1 항에 있어서,
상기 릴레이 전송부는,
요청된 상기 영상 스트리밍을 상기 제1 카메라가 수행할 수 없는 경우, 요청된 상기 영상 스트리밍을 수행할 수 있는 다른 카메라를 탐색하는 릴레이 탐색부;
요청된 상기 영상 스트리밍을 수행할 수 있는 다른 카메라가 없는 경우, 사용자 단말로 스트리밍 실패 메시지를 출력하는 메시지 출력부; 및
요청된 상기 영상 스트리밍을 수행할 수 있는 제2 카메라가 탐색되는 경우, 상기 사용자 단말의 정보와 상기 제1 프로파일의 영상을 상기 제2 카메라로 전송하거나, 상기 사용자 단말의 정보와 상기 제1 프로파일의 영상을 상기 제2 카메라로 전송하기 위한 제어 신호를 생성하는 전송부;를 포함하는
네트워크 카메라 장치.According to claim 1,
The relay transmission unit,
A relay search unit for searching for another camera capable of performing the requested video streaming when the first camera cannot perform the requested video streaming;
A message output unit that outputs a streaming failure message to a user terminal when there is no other camera capable of performing the requested video streaming; And
When a second camera capable of performing the requested video streaming is found, the information of the user terminal and the image of the first profile are transmitted to the second camera, or the information of the user terminal and the first profile And a transmitter configured to generate a control signal for transmitting the image to the second camera.
Network camera device. 삭제delete 삭제delete
KR1020140016278A 2014-02-12 2014-02-12 Network camera apparatus and method of providing image streaming thereof. KR102050416B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140016278A KR102050416B1 (en) 2014-02-12 2014-02-12 Network camera apparatus and method of providing image streaming thereof.

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140016278A KR102050416B1 (en) 2014-02-12 2014-02-12 Network camera apparatus and method of providing image streaming thereof.

Publications (2)

Publication Number Publication Date
KR20150095142A KR20150095142A (en) 2015-08-20
KR102050416B1 true KR102050416B1 (en) 2019-11-29

Family

ID=54058254

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140016278A KR102050416B1 (en) 2014-02-12 2014-02-12 Network camera apparatus and method of providing image streaming thereof.

Country Status (1)

Country Link
KR (1) KR102050416B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102076732B1 (en) * 2018-10-12 2020-02-12 주식회사 님버스 Video transmission system based on two kinds of wireless network and method thereof

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050093071A (en) 2004-03-18 2005-09-23 에스케이 텔레콤주식회사 System and method for providing video with network camera apparatus
KR101199498B1 (en) * 2005-03-31 2012-11-09 삼성전자주식회사 Apparatus for encoding or generation of multi-view video by using a camera parameter, and a method thereof, and a recording medium having a program to implement thereof
KR20130031994A (en) * 2011-09-22 2013-04-01 주식회사 케이티 Server and method for providing video data captured by video camara, and device for reproducing the video data

Also Published As

Publication number Publication date
KR20150095142A (en) 2015-08-20

Similar Documents

Publication Publication Date Title
EP2785070B1 (en) Method and apparatus for improving quality of experience in sharing screen among devices, and recording medium therefor
US10079867B2 (en) Apparatus, system, and method of controlling output of content data, and recording medium
US10855996B2 (en) Encoder selection based on camera system deployment characteristics
JP5888417B2 (en) Communication system, method and program
US9344678B2 (en) Information processing apparatus, information processing method and computer-readable storage medium
EP3059945A1 (en) Method and system for video surveillance content adaptation, and central server and device
US9445142B2 (en) Information processing apparatus and control method thereof
US10306173B2 (en) Imaging apparatus, imaging method, and program
JP2016178356A (en) Communication device, communication system, reception control method and program
US10015395B2 (en) Communication system, communication apparatus, communication method and program
WO2015085873A1 (en) Video code stream obtaining method and apparatus
JP2013012833A (en) Transmission apparatus and control method for transmission apparatus
JP6193569B2 (en) RECEPTION DEVICE, RECEPTION METHOD, AND PROGRAM, IMAGING DEVICE, IMAGING METHOD, AND PROGRAM, TRANSMISSION DEVICE, TRANSMISSION METHOD, AND PROGRAM
CN113259729B (en) Data switching method, server, system and storage medium
KR102050416B1 (en) Network camera apparatus and method of providing image streaming thereof.
JP2015171044A (en) Imaging apparatus, and control method of the imaging apparatus
JP2015119335A (en) Terminal, system, program and method to thin out frame of photographed moving image in accordance with movement change amount
US9118803B2 (en) Video conferencing system
JP6515436B2 (en) Transmission system, transmission terminal, and program
US11470234B2 (en) Wireless camera and method of video streaming
JP6400163B2 (en) Reception device, reception method, transmission device, transmission method, and program
WO2018123078A1 (en) Monitoring camera system
JP6862977B2 (en) Communication control program, communication control method, and communication control device
JP2015103851A (en) Imaging apparatus, external device, imaging system, control method of imaging apparatus, control method of external device, control method of imaging system, and program
JP6455121B2 (en) Information processing apparatus, information processing method, and program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant