WO2017116157A1 - 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법 - Google Patents

무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법 Download PDF

Info

Publication number
WO2017116157A1
WO2017116157A1 PCT/KR2016/015467 KR2016015467W WO2017116157A1 WO 2017116157 A1 WO2017116157 A1 WO 2017116157A1 KR 2016015467 W KR2016015467 W KR 2016015467W WO 2017116157 A1 WO2017116157 A1 WO 2017116157A1
Authority
WO
WIPO (PCT)
Prior art keywords
door phone
image
wireless door
data stream
command signal
Prior art date
Application number
PCT/KR2016/015467
Other languages
English (en)
French (fr)
Inventor
이왕기
최신대
Original Assignee
주식회사 경동원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 경동원 filed Critical 주식회사 경동원
Publication of WO2017116157A1 publication Critical patent/WO2017116157A1/ko

Links

Images

Classifications

    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05F—DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00—Power-operated mechanisms for wings
    • E05F15/70—Power-operated mechanisms for wings with automatic actuation
    • E05F15/77—Power-operated mechanisms for wings with automatic actuation using wireless control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/02—Telephonic communication systems specially adapted for combination with other electrical systems with bell or annunciator systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/06—Simultaneous speech and data transmission, e.g. telegraphic transmission over the same conductors

Definitions

  • the door phone system which is installed at an entrance of a home or a work space and checks the visitor's identity through video and audio, and controls the opening and closing of the entrance, has been widely used for a long time.
  • the mobile device receiving the image captured by the wireless door phone camera may partially break the image or drop in time due to the small number of frames per second. It can happen that normal conversations and user identification are not possible.
  • the present invention has been conceived in response to the request as described above, the wireless door phone, stream control device and control method of the wireless door phone to control the quality of the video and audio stream transmitted from the wireless door phone in response to the situation of the wireless bandwidth
  • the purpose is to provide.
  • the wireless door phone the video recorded in the camera unit and the voice recorded in the microphone unit in real time, the data including the encoded image and the encoded voice
  • a stream processor for generating a stream;
  • the image captured by the camera unit after receiving the first command signal is encoded to be encoded at a lower resolution than the encoded image before receiving the first command signal.
  • a control unit which controls the stream processing unit and controls the stream processing unit so that the data stream includes only a voice recorded by the microphone unit after receiving the second command signal when the second command signal is received from the remote server. ;
  • a communication unit transmitting the data stream to the remote server and receiving the command signal from the remote server.
  • a stream control apparatus for a wireless door phone including: a frame calculator configured to calculate a number of frames per unit time of an image included in a data stream received from the wireless door phone and compare the number of frames with a reference frame; And a control unit transmitting a first command signal to the wireless door phone through a communication unit to instruct to lower the resolution of the encoded image when the number of frames per unit time is less than the reference frame number.
  • a method for controlling a stream of a wireless door phone the wireless door phone encoding a video recorded by a camera unit and a voice recorded by a microphone unit in real time; Generating, by the wireless door phone, a data stream including an encoded image and an encoded voice; And transmitting, by the wireless door phone, the data stream to the remote server, and when receiving the first command signal from the remote server, after the wireless door phone receives the first command signal,
  • the image captured by the camera is encoded at a lower resolution than the encoded image before receiving the first command signal, and when receiving the second command signal from the remote server, after receiving the second command signal
  • the data stream is generated to include only the voice recorded by the microphone unit.
  • a method for controlling a stream of a wireless door phone comprising: receiving a data stream from a wireless door phone; If the data stream includes an image, calculating, by the remote server, the number of frames per unit time of the image and comparing the number of frames with a reference frame; And when the number of frames per unit time is less than the reference frame number, transmitting, by the remote server, the first command signal to lower the resolution of the encoded image to the wireless door phone.
  • the wireless door phone system for controlling the quality of the video and audio stream transmitted from the wireless door phone by adapting to the situation of the wireless bandwidth has an effect that can be implemented You can get it.
  • FIG. 1 is a diagram illustrating an example of a wireless door phone system including a wireless door phone, a remote server, and a mobile device;
  • FIG. 2 is a block diagram showing in more detail the wireless door phone of Figure 1,
  • FIG. 4 is a block diagram illustrating the mobile device of FIG. 1 in more detail
  • FIG. 5 is a flowchart showing an example of a stream control method for a wireless door phone
  • FIG. 6 is a flowchart illustrating another example of a method for controlling a stream of a wireless door phone
  • FIG. 7 is a flowchart illustrating still another example of a method for controlling a stream of a wireless door phone
  • FIG. 8 is a flowchart illustrating still another example of a method for controlling a stream of a wireless door phone.
  • FIG. 1 is a diagram illustrating an example of a wireless door phone system including a wireless door phone, a remote server, and a portable device.
  • the wireless door phone system includes a wireless door phone 1, a remote server 2, and a portable device 3 connected to each other using a communication network such as the Internet.
  • the wireless doorphone 1 encodes such video and audio to a suitable predefined standard to generate a data stream.
  • This data stream is transmitted to the remote server 2 via the communication network. If the data stream is transmitted to the remote server 2 side, the remote server 2 may store the data stream directly or deliver the data stream to the portable device 3.
  • the data stream referred to in this document is defined as being a data stream containing both video data and audio data.
  • the remote server 2 calculates the number of frames per second of the image included in the transmitted data stream and determines whether or not the reference value (for example, 30 frames per second) set as the normal operating range is exceeded. If the calculated number of image frames per second is less than the reference value, the wireless door phone side is requested to transmit a data stream to have a low resolution image having a smaller amount of data. This is because a higher number of frames per second may be obtained when the data stream is transmitted to have a low resolution image having a relatively small amount of data.
  • the reference value for example, 30 frames per second
  • the wireless door phone 1 When the wireless door phone 1 receives a request from the remote server 2 to transmit a data stream as a low resolution image, the wireless door phone 1 encodes the image to have a lower resolution image than the image set as a default for subsequent data streams. Transfer to remote server (2). For example, when transmitting a video having a resolution (high resolution) of 1980x1080 pixels as a default, and receiving a signal requesting to transmit a relatively low resolution image from the remote server 2, the resolution of 1280x720 pixels ( Video may be transmitted to have a medium resolution. Furthermore, it is possible to transmit an image having a lower resolution in stages or to reduce the size of the data stream in an extreme case by including only an audio in some cases without an image.
  • the mobile device 3 controls the quality and amount of video data included in the data stream by allowing the remote server 2 to adapt to the situation of the wireless communication environment between the wireless door phone 1 and the remote server 2.
  • the image captured by the wireless door phone 1 may be relayed without breaking or dripping.
  • the wireless door phone 1 and the remote server 2 are connected through the wireless internet, and the wireless door phone 1 and the remote server 2 are connected to the internet for indoor wireless internet connection.
  • the data stream may be transmitted further via a router, a wireless repeater and / or an internet modem.
  • the data stream may be transmitted between the remote server 2 and the portable device 3 through various wireless communication networks such as a Wi-Fi network, a 3G data communication network, and an LTE data communication network.
  • various wireless communication networks such as a Wi-Fi network, a 3G data communication network, and an LTE data communication network.
  • FIG. 2 is a block diagram illustrating the wireless door phone of FIG. 1 in more detail.
  • the wireless door phone 1 includes a camera unit 10, a microphone unit 11, a memory unit 12, a control unit 13, a video audio processing unit 14, and a communication unit 15. do. Furthermore, the opening and closing part 16 may be further included.
  • the camera unit 10 captures an image of a place where the wireless door phone 1 is installed, for example, an image of a visitor.
  • Any imaging apparatus capable of capturing a moving image may be variously used to implement the camera unit 10 even if the imaging apparatus includes a CMOS, a CCD, or any other imaging device.
  • the microphone unit 11 records the sound of the place where the wireless door phone 1 is installed, for example, the voice of the visitor and / or the sound of the surroundings. If the microphone device capable of recording, a microphone device including a dynamic microphone, a condenser microphone, and any other acoustic sensor may be variously used to implement the microphone unit 11.
  • the memory unit 12 stores any firmware or software necessary for the operation of the wireless door phone 1 and various temporary files generated during the execution of the firmware or software.
  • Various temporary files include source image data taken by the camera unit 10 and analog-to-digital converted source image data and image data encoded by an appropriate standard, source audio data recorded by the microphone unit 11 and analog-digital converted, and Audio data encoded in an appropriate standard, data to be encoded and encoded to the remote server 2, and the like.
  • data relating to various setting values necessary for the operation of the wireless door phone 1 are also stored in the memory unit 12.
  • the memory unit 12 may be used in various ways such as RAM, ROM, EEPROM, flash memory, hard disk, SSD, any other storage device within the limit that is suitable for the nature and capacity of the data to be stored, two or more storage devices together It can also be used.
  • the control unit 13 controls the operations of the camera unit 10, the microphone unit 11, the memory unit 12, the video audio processing unit 14, the communication unit 15, and the opening and closing unit 16 of the wireless door phone 1. As a result, the normal operation of the wireless door phone 1 is controlled. In addition, the control unit 13 interprets the command signal transmitted from the remote server 2, so that the video audio processing unit 14 adjusts the resolution of the video down to encode.
  • the control unit 13 may be a general-purpose processor as long as it can perform the functions of the control unit 13, and a processor specifically designed may be used.
  • the image sound processor 14 processes the image captured by the camera unit 10 and the voice (sound) recorded by the microphone unit 11 in a form suitable for transmission to the remote server 2 side.
  • the image sound processing unit 14 performs analog-to-digital conversion on an analog image photographed by the camera unit 10, and then encodes the image to have a resolution, a bitrate, and a codec indicated by the control unit 13. do.
  • encoding is performed to have a bitrate and a codec indicated by the control unit.
  • a data stream is generated so that video data and audio data can be streamed to the remote server 2 side.
  • the audio processing unit 14 can perform the above operation, it may be implemented as separate dedicated hardware and software, or may be variously implemented as software executed on a general purpose processor.
  • the communication unit 15 performs the bidirectional communication with the remote server 2 by transmitting stream data from the wireless door phone 1 to the remote server 2 and receiving a command signal transmitted from the remote server 2.
  • the communicator 15 may basically be an RF communication module capable of performing Wi-Fi communication.
  • other communication modules capable of performing wireless data communication between the door phone and a remote server may be variously applied.
  • the opening and closing unit 16 is an opening and closing device (not shown) connected to the door phone 1, and opens and closes the entrance and exit in accordance with a control signal of the control unit 13.
  • the control unit 13 transmits a signal for opening or closing the opening / closing unit 16 when receiving a signal for opening / closing the doorway from the portable device 3 or the like, or when the opening / closing device should be operated according to other predetermined rules. .
  • FIG. 3 is a block diagram illustrating the remote server of FIG. 1 in more detail.
  • the remote server 2 includes a communication unit 20, a frame calculation unit 21, a memory unit 22, a stream transmission unit 23, and a control unit 24.
  • the communication unit 20 performs a bidirectional communication with the wireless door phone 1 by receiving a data stream transmitted from the wireless door phone 1 and transmitting a command signal to the wireless door phone 1 side.
  • the communication unit 20 may be variously applied as long as it is a communication module capable of performing bidirectional data communication based on an internet protocol.
  • the memory unit 22 may be used in various ways such as RAM, ROM, EEPROM, flash memory, hard disk, SSD, and any other storage devices within the limits that are suitable for the nature and capacity of the data to be stored. It can also be used.
  • the stream transmission unit 23 receives a data stream transmission request from the portable device 3 and relays the data stream received from the wireless door phone 1 to the portable device 3 in response to the transmission request.
  • the stream transmission unit 23 may be a remote server 2 side application program for processing a transmission request from the portable device 3.
  • the control unit 24 controls the normal operation of the remote server 2 by controlling the communication unit 20, the frame calculating unit 21, the memory unit 22 and the stream transmission unit 23. In addition, the control unit 24 transmits a light signal about the change of the image resolution to the wireless door phone 1 so that the data stream can be adapted to the communication environment.
  • FIG. 4 is a block diagram illustrating the portable device of FIG. 1 in more detail.
  • the portable device 3 includes a communication unit 30, a memory unit 31, a stream processing unit 32, an image display unit 33, an audio output unit 34, and a control unit 35. .
  • the portable device 3 may be a general-purpose mobile phone or tablet PC installed with an application capable of processing video streams relayed from a remote server and playing video and audio.
  • the communication unit 30 transmits a signal for requesting a data stream to the remote server 2 through the communication network, and receives the data stream from the remote server 2.
  • the memory unit 31 includes any firmware or software necessary for the operation of the portable device 3 and various temporary files generated during execution of the firmware or software and streaming data received from the remote server 2.
  • data relating to various setting values necessary for the operation of the portable device 3 are also stored in the memory unit 22.
  • the stream processing unit 32 decodes the video data and the audio data from the data stream received from the remote server 2 so that it can be reproduced on the portable device 3.
  • the stream processor 32 may include a software decoder as well as a hardware decoder.
  • the voice output unit 34 outputs decoded voice data from the stream processor 32 to reproduce the voice (sound) recorded by the microphone unit 11 of the door phone.
  • the voice output unit 34 may be, for example, a speaker of the mobile device 3.
  • FIG. 5 is a flowchart illustrating an example of a stream control method of the wireless door phone.
  • FIG 5 shows a flow in which the remote server 2 controls the stream of the wireless door phone by requesting a low resolution image to the wireless door phone 1 side.
  • the remote server 2 receives a data stream from the wireless door phone 1 (40).
  • the remote server 2 receiving the data stream calculates the number of image frames per unit time (per second) in the received data stream (42), and determines whether the calculated number of image frames per second exceeds the reference value (e.g. 30 fps). Determine (44).
  • the image is in a state capable of being naturally reproduced, and thus the data stream is transmitted to the mobile device 3 (46).
  • the remote server 2 transmits the data stream to the wireless door phone 1 to include the "low resolution image.” Transmit a signal requesting "48".
  • the wireless door phone 1 In response to the request signal, the wireless door phone 1 will generate a data stream to include a video having a lower resolution and transmit it to the remote server 2, so that it repeats until the number of video frames per second satisfies the reference value (40). After 42, 44 proceeds, step 46 is entered.
  • FIG. 6 is a flowchart illustrating another example of a method for controlling a stream of a wireless door phone.
  • FIG. 6 shows a flow in which the remote server 2 controls the stream of the wireless door phone by the remote server 2 by requesting a low resolution image to the wireless door phone 1 as in the embodiment of FIG. 5. have.
  • the first image transmitted by the remote door phone in the first stage is 1920x1080 pixels (high resolution) image
  • the second stage is 1280x720 pixels (medium resolution)
  • the third stage is 720x480 pixels (low resolution).
  • the fourth step is 640 x 480 pixels (minimum resolution).
  • the remote server 2 calculates the number of image frames per unit time (per second) in the received data stream (52), and determines whether the calculated number of image frames per second exceeds a reference value (e.g., 30 fps). Determine (54).
  • a reference value e.g. 30 fps
  • the remote server 2 determines whether the wireless door phone can generate a lower resolution image (58).
  • the wireless door phone 1 transmits a signal requesting "send a data stream to include a low resolution image".
  • the wireless door phone 1 In response to the request signal, the wireless door phone 1 will generate a data stream to include a video of a lower resolution and transmit it to the remote server 2, so if the number of image frames per second does not satisfy the reference value, the wireless door phone 1 ), The medium resolution image, the low resolution image and the lowest resolution image are sequentially included in the data stream and transmitted.
  • step 58 the remote server 2 transmits the data stream to the mobile device 3 in the state of the lowest resolution image. Will be sent.
  • FIG. 7 is a flowchart illustrating another example of a method for controlling a stream of a wireless door phone.
  • the stream of the wireless door phone is controlled by the remote server 2 by requesting a low resolution image from the remote server 2 to the wireless door phone 1 as in the embodiments of FIGS. 5 and 6. It shows the flow.
  • FIG. 5 and 6 differ from the embodiments of FIG. 5 and 6 in that a limit is placed on the low resolution image, and the stream is transmitted to the mobile device when the number of image frames per second does not reach the reference value even when the lowest resolution image is transmitted. Is to terminate the operation without doing so.
  • the remote server 2 receives a data stream from the wireless door phone 1 (50).
  • the remote server 2 calculates the number of image frames per unit time (per second) in the received data stream (52), and determines whether the calculated number of image frames per second exceeds a reference value (e.g., 30 fps). Determine (54).
  • a reference value e.g. 30 fps
  • the remote server 2 determines whether the wireless door phone can generate a lower resolution image (58).
  • the wireless door phone 1 transmits a signal requesting "send a data stream to include a low resolution image".
  • the wireless door phone 1 In response to the request signal, the wireless door phone 1 will generate a data stream to include a video of a lower resolution and transmit it to the remote server 2, so if the number of image frames per second does not satisfy the reference value, the wireless door phone 1 ), The medium resolution image, the low resolution image and the lowest resolution image are sequentially included in the data stream and transmitted.
  • step 57 the remote server 2 transmits the data stream instead of transmitting the stream to the mobile device 3.
  • a command signal may be transmitted to the wireless door phone 1 and / or the portable device 3 so as to display a guide indicating that the communication state is poor and try again later.
  • FIG. 8 is a flowchart illustrating still another example of a method for controlling a stream of a wireless door phone.
  • the remote server 2 requests a low resolution image to the wireless door phone 1 so that the stream of the wireless door phone can be made by the remote server 2. This controlled flow is shown.
  • the first image transmitted by the remote door phone in the first stage is 1920x1080 pixels (high resolution) image
  • the second stage is 1280x720 pixels (medium resolution)
  • the third stage is 720x480 pixels (low resolution).
  • the fourth stage is 640 x 480 pixels (minimum resolution)
  • the lowest resolution image of the fourth stage is less than the frame rate per second, a stream containing only voice is generated from the wireless door phone 1 and the remote server Can be sent to (2).
  • the remote server 2 receives a data stream from the wireless door phone 1 (60).
  • the remote server 2 that has received the data stream determines whether image data is included in the received data stream (61).
  • the remote server 2 calculates the number of image frames per unit time (per second) in the received data stream (62), and calculates the number of image frames per second based on a reference value (for example, 30 fps). It is determined whether or not (64).
  • the remote server 2 determines whether the wireless door phone is capable of generating an image having a lower resolution (67). If it is possible, the wireless door phone 1 transmits a signal for requesting "send a data stream to include a low resolution image" (68).
  • the wireless door phone 1 In response to the request signal, the wireless door phone 1 will generate a data stream to include a video of a lower resolution and transmit it to the remote server 2, so if the number of image frames per second does not satisfy the reference value, the wireless door phone 1 ), The medium resolution image, the low resolution image and the lowest resolution image are sequentially included in the data stream and transmitted.
  • the remote server 2 transmits a signal for requesting to transmit the videoless stream. (69).
  • the remote server 2 passes through steps 60 and 61 and the data stream includes only voice. It will be transmitted to the mobile device (66).

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Telephonic Communication Services (AREA)

Abstract

무선 대역폭의 상황에 적응하여 무선 도어폰으로부터 전송되는 영상 및 음성 스트림의 품질을 제어하는 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법이 개시된다. 발명의 일 측면에 따른 무선 도어폰은, 카메라부에서 촬영되는 영상 및 마이크부에서 녹음되는 음성을 실시간으로 인코딩하고, 인코딩된 영상과 인코딩된 음성을 포함하는 데이터 스트림을 생성하는 스트림처리부; 원격 서버로부터 제1 명령 신호를 수신한 경우, 상기 제1 명령 신호를 수신한 이후에 상기 카메라부에서 촬영되는 영상에 대해서는 상기 제1 명령 신호를 수신하기 전에 인코딩된 영상보다 낮은 해상도로 인코딩하도록 상기 스트림처리부를 제어하고, 상기 원격 서버로부터 제2 명령 신호를 수신한 경우, 상기 제2 명령 신호를 수신한 이후에는 상기 데이터 스트림이 상기 마이크부에서 녹음되는 음성만을 포함하도록 상기 스트림처리부를 제어하는 제어부; 및 상기 데이터 스트림을 상기 원격 서버로 전송하고, 상기 원격 서버로부터 상기 명령 신호를 수신하는 통신부;를 포함한다.

Description

무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법
본 발명은 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법에 관한 것으로서, 보다 상세하게는 무선 대역폭의 상황에 적응하여 무선 도어폰으로부터 전송되는 영상 및 음성 스트림의 품질을 제어하는 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법에 관한 것이다.
가정이나 업무공간 등의 출입구에 설치되어 방문자의 신원을 영상 및 음성을 통하여 확인하고, 나아가 출입구의 개폐를 제어하는 도어폰 시스템은 오랜 동안 널리 사용되어 왔다.
나아가, 와이파이(WiFi) 기술 등 무선 통신 기술이 폭넓게 보급됨에 따라, 출입구측에 고정 설치된 도어폰의 카메라를 통하여 촬영된 영상을 실내의 특정 벽면 등에 매립된 수신기가 아니라 무선 인터넷을 통하여 연결된 휴대기기에서 확인하고, 그 휴대기기에서 출입구의 개폐상태를 제어하는 형태의 무선 도어폰 시스템 또한 최근 보급되고 있다.
이와 관련하여, 대한민국 등록특허공보 제10-1353617호 (명칭: 와이파이모듈을 구비한 비디오폰을 이용한 원격제어장치)는, 사용자가 시간과 장소에 구애를 받지 않고 데스크탑, 스마트폰 또는 노트북 등으로 원격서버에서 제공하는 웹프로그램을 통해 비디오폰과 연결된 유선 또는 무선의 가정내의 스마트기기의 상태정보를 확인하고, 상기 스마트기기에 대한 제어를 수행할 수 있어, 사용자 부주의로 인한 스마트기기의 설정상의 오류 또는 스마트기기의 고장 등을 실시간으로 확인하여 사용자의 스마트기기에 대한 유지 및 관리에 소요되는 비용을 줄일 수 있는 원격서버로부터 인증된 사용자가 원격 서버에 이더넷으로 연결된 무선공유기를 통하여 가정내의 와이파이 모듈, 무선의 RF모듈 및 유선의 RS485모듈을 탑재한 비디오폰에 접속하여 RF모듈을 탑재한 무선스마트기기와 RS485모듈을 탑재한 유선스마트기기에 제어명령을 전송하여 인증된 사용자가 외부에서 편리하게 가정내의 스마트기기를 제어하고, 관리하는 와이파이모듈을 구비한 비디오폰을 이용한 원격제어장치에 관한 발명을 개시하고 있다.
그러나, 기존의 무선 도어폰은 단일한 해상도를 갖도록 촬영되어 인코딩된 영상데이터를 원격 서버 또는 휴대기기로 전송하는 방식을 사용하고 있다.
이 경우, 무선 속도와 상관없이 해상도가 고정됨으로써, 무선 환경에 따라서 정상적인 사용이 곤란해지는 경우가 있다.
예컨대, 만약 무선 대역폭(bandwidth)이 데이터 스트림에 비하여 작은 경우에는 무선 도어폰 카메라를 통하여 촬영된 영상을 수신하는 휴대기기에서 영상이 부분적으로 깨지거나 초당 프레임 수가 적어져 시간적으로 뚝뚝 끊기는 등의 현상이 발생하여 정상적인 대화 및 사용자 신원 확인을 할 수 없게 되는 경우가 발생할 수 있다.
이러한 현상은 인터넷 환경이 고르지 못한 해외에서 영상을 확인하거나, 또는 트래픽이 폭주하는 시간대에 무선 도어폰을 사용하는 경우, 또는 실내에서 인터넷 액세스포인트(즉, 무선 인터넷공유기)와 무선 도어폰 간의 거리가 멀어 통신 품질이 열악해지는 경우 등에 발생하게 된다.
따라서, 무선 대역폭의 상황에 적응하여 무선 도어폰으로부터 전송되는 영상 및 음성 스트림의 품질을 제어하는 무선 도어폰의 스트림 제어 기술에 관한 요청이 제기되어 왔다.
본 발명은 상기와 같은 요청에 부응하여 착안된 것으로서, 무선 대역폭의 상황에 적응하여 무선 도어폰으로부터 전송되는 영상 및 음성 스트림의 품질을 제어하는 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법을 제공하는 것을 목적으로 한다.
상기와 같은 목적을 달성하기 위하여, 발명의 일 측면에 따른 무선 도어폰은, 카메라부에서 촬영되는 영상 및 마이크부에서 녹음되는 음성을 실시간으로 인코딩하고, 인코딩된 영상과 인코딩된 음성을 포함하는 데이터 스트림을 생성하는 스트림처리부; 원격 서버로부터 제1 명령 신호를 수신한 경우, 상기 제1 명령 신호를 수신한 이후에 상기 카메라부에서 촬영되는 영상에 대해서는 상기 제1 명령 신호를 수신하기 전에 인코딩된 영상보다 낮은 해상도로 인코딩하도록 상기 스트림처리부를 제어하고, 상기 원격 서버로부터 제2 명령 신호를 수신한 경우, 상기 제2 명령 신호를 수신한 이후에는 상기 데이터 스트림이 상기 마이크부에서 녹음되는 음성만을 포함하도록 상기 스트림처리부를 제어하는 제어부; 및 상기 데이터 스트림을 상기 원격 서버로 전송하고, 상기 원격 서버로부터 상기 명령 신호를 수신하는 통신부;를 포함한다.
발명의 다른 측면에 따른 무선 도어폰의 스트림 제어장치는, 무선 도어폰으로부터 수신한 데이터 스트림에 포함된 영상의 단위시간당 프레임 수를 계산하여 기준 프레임 수와 비교하는 프레임계산부; 및 상기 단위시간당 프레임 수가 상기 기준 프레임 수보다 적은 경우, 인코딩되는 영상의 해상도를 낮출 것을 지시하는 제1 명령 신호를 통신부를 통하여 상기 무선 도어폰으로 전송하는 제어부;를 포함한다.
발명의 또 다른 측면에 따른 무선 도어폰의 스트림 제어방법은, 무선 도어폰이 카메라부에서 촬영되는 영상 및 마이크부에서 녹음되는 음성을 실시간으로 인코딩하는 단계; 상기 무선 도어폰이 인코딩된 영상과 인코딩된 음성을 포함하는 데이터 스트림을 생성하는 단계; 및 상기 무선 도어폰이 상기 데이터 스트림을 상기 원격 서버로 전송하는 단계;를 포함하며, 원격 서버로부터 제1 명령 신호를 수신한 경우, 상기 무선 도어폰이 상기 제1 명령 신호를 수신한 이후에 상기 카메라부에서 촬영되는 영상에 대해서는 상기 제1 명령 신호를 수신하기 전에 인코딩된 영상보다 낮은 해상도로 인코딩하고, 상기 원격 서버로부터 제2 명령 신호를 수신한 경우, 상기 제2 명령 신호를 수신한 이후에는 상기 마이크부에서 녹음되는 음성만을 포함하도록 상기 데이터 스트림을 생성한다.
발명의 또 다른 측면에 따른 무선 도어폰의 스트림 제어방법은, 원격 서버가 무선 도어폰으로부터 데이터 스트림을 수신하는 단계; 상기 데이터 스트림에 영상이 포함된 경우, 상기 원격 서버가 영상의 단위시간당 프레임 수를 계산하여 기준 프레임 수와 비교하는 단계; 및 상기 단위시간당 프레임 수가 상기 기준 프레임 수보다 적은 경우, 인코딩되는 영상의 해상도를 낮출 것을 지시하는 제1 명령 신호를 상기 원격 서버가 상기 무선 도어폰으로 전송하는 단계;를 포함한다.
본 발명에 따른 무선 도어폰의 스트림 제어장치 및 제어방법을 이용하면, 무선 대역폭의 상황에 적응하여 무선 도어폰으로부터 전송되는 영상 및 음성 스트림의 품질을 제어하는 무선 도어폰 시스템을 구현할 수 있는 효과를 얻을 수 있다.
도 1은 무선 도어폰과 원격 서버 및 휴대기기를 포함하는 무선 도어폰 시스템의 일례를 나타낸 도면,
도 2는 도 1의 무선 도어폰을 더욱 상세히 나타낸 블록도,
도 3은 도 1의 원격 서버를 더욱 상세히 나타낸 블록도,
도 4는 도 1의 휴대기기를 더욱 상세히 나타낸 블록도,
도 5는 무선 도어폰의 스트림 제어방법의 일례를 나타낸 흐름도,
도 6은 무선 도어폰의 스트림 제어방법의 다른 예를 나타낸 흐름도,
도 7은 무선 도어폰의 스트림 제어방법의 또 다른 예를 나타낸 흐름도,
도 8은 무선 도어폰의 스트림 제어방법의 또 다른 예를 나타낸 흐름도이다.
아래에서는 첨부된 도면을 참조하여 무선 도어폰의 스트림 제어장치 및 제어방법을 더욱 상세히 설명하기로 한다.
도 1은 무선 도어폰과 원격 서버 및 휴대기기를 포함하는 무선 도어폰 시스템의 일례를 나타낸 도면이다.
도 1에서 나타낸 바와 같이, 무선 도어폰 시스템은 통신 네트워크, 예컨대 인터넷 등을 이용하여 서로 연결되어 있는 무선 도어폰(1)과 원격 서버(2) 및 휴대기기(3)를 포함하여 이루어진다.
예컨대 방문자의 영상과 음성이 무선 도어폰(1)의 카메라 및 마이크를 통하여 촬영 및 녹음되는 경우, 무선 도어폰(1)은 이러한 영상 및 음성을 미리 정의된 적절한 규격으로 인코딩하여 데이터 스트림을 생성하고, 이 데이터 스트림을 통신 네트워크를 경유하여 원격 서버(2)로 전송한다. 만약 원격 서버(2)측으로 데이터 스트림이 전송되는 경우에는 원격 서버(2)는 데이터 스트림을 직접 저장할 수도 있고, 휴대기기(3)로 그 데이터 스트림을 전달할 수도 있다.
특별히 달리 정의하지 않는 한, 이 문서에서 언급되는 데이터 스트림은 영상 데이터 및 음성 데이터를 모두 포함하는 데이터 스트림인 것으로 정의한다.
원격 서버(2)는 전송된 데이터 스트림에 포함된 영상의 초당 프레임 수를 계산하여, 정상적인 동작 범위인 것으로 설정한 기준값(예컨대, 초당 30프레임)을 상회하는지 여부를 판단한다. 만약 계산된 초당 영상 프레임의 수가 기준값에 못미친다면, 이보다 적은 데이터량을 갖는 저해상도의 영상을 갖도록 데이터 스트림을 전송할 것을 무선 도어폰측에 요청한다. 상대적으로 적은 데이터량을 갖는 저해상도의 영상을 갖도록 데이터 스트림이 전송되는 경우에는 더욱 높은 초당 프레임 수를 얻을 수 있을 것이기 때문이다.
무선 도어폰(1)은 원격 서버(2)로부터 저해상도의 영상으로 데이터 스트림을 전송하도록 요청을 받은 경우, 이후의 데이터 스트림에 대해서는 기본값(default)으로 설정된 영상보다 저해상도의 영상을 갖도록 영상을 인코딩하여 원격 서버(2)로 전송을 한다. 예컨대, 기본값으로서 1980ㅧ1080픽셀의 해상도(고해상도)를 갖는 영상을 전송하다가, 원격 서버(2)로부터 상대적으로 낮은 해상도의 영상으로 전송할 것을 요청하는 신호를 수신한 경우에는 1280ㅧ720픽셀의 해상도(중해상도)를 갖도록 영상을 전송할 수 있다. 나아가, 단계적으로 이보다 더 낮은 해상도를 갖는 영상을 전송하도록 하거나, 경우에 따라서는 영상을 포함하지 않고 음성만을 포함하도록 함으로써 극단적으로 데이터 스트림의 크기를 줄여서 전송하도록 하는 것도 가능하다.
이처럼 무선 도어폰(1)과 원격 서버(2) 간의 무선 통신환경의 상황에 적응하여 원격 서버(2)가 데이터 스트림에 포함된 영상 데이터의 품질과 데이터량을 제어하도록 함으로써, 휴대기기(3)측으로 무선 도어폰(1)에서 촬영된 영상이 깨지거나 뚝뚝 끊어지는 일 없이 중계될 수 있다.
한편, 도 1의 실시예에서 무선 도어폰(1)과 원격 서버(2)는 무선 인터넷을 통하여 연결되며, 무선 도어폰(1)과 원격 서버(2)의 사이에서는 옥내 무선인터넷 연결을 위한 인터넷 공유기, 무선 중계기 및/또는 인터넷 모뎀 등을 더 경유하여 데이터 스트림이 전송될 수 있다.
마찬가지로, 원격 서버(2)와 휴대기기(3)의 사이에서도 와이파이(WiFi) 네트워크, 3G 데이터통신 네트워크, LTE 데이터통신 네트워크 등 다양한 무선 통신네트워크를 통하여 데이터 스트림이 전송될 수 있다.
도 2는 도 1의 무선 도어폰을 더욱 상세히 나타낸 블록도이다.
도 2에서 나타낸 바와 같이, 무선 도어폰(1)은 카메라부(10), 마이크부(11), 메모리부(12), 제어부(13), 영상음성처리부(14) 및 통신부(15)를 포함한다. 나아가, 개폐부(16)를 더 포함할 수 있다.
카메라부(10)는 무선 도어폰(1)이 설치된 장소의 영상, 예컨대 방문자의 영상을 촬영한다. 동영상을 촬영할 수 있는 촬상장치라면 CMOS, CCD, 기타 어떠한 촬상소자를 포함하는 촬상장치라도 카메라부(10)를 구현하기 위하여 다양하게 사용될 수 있다.
마이크부(11)는 무선 도어폰(1)이 설치된 장소의 음향, 예컨대 방문자의 음성 및/또는 주변의 음향을 녹음한다. 녹음을 할 수 있는 마이크 장치라면 다이나믹 마이크, 콘덴서 마이크, 기타 어떠한 음향 센서를 포함하는 마이크 장치라도 마이크부(11)를 구현하기 위하여 다양하게 사용될 수 있다.
메모리부(12)는 무선 도어폰(1)의 작동을 위하여 필요한 일체의 펌웨어나 소프트웨어 및 펌웨나 소프트웨어의 실행 중에 발생하는 각종 임시파일 등을 저장한다. 각종 임시파일에는 카메라부(10)에서 촬영되어 아날로그-디지털 변환된 소스 영상 데이터 및 소스 영상 데이터가 적정한 규격으로 인코딩된 영상 데이터, 마이크부(11)에서 녹음되어 아날로그-디지털 변환된 소스 음성 데이터 및 소스 영상 데이터가 적정한 규격으로 인코딩된 음성 데이터, 인코딩된 영상 데이터와 인코딩된 음성 데이터가 결합되어 원격 서버(2)측으로 스트리밍될 데이터 등이 포함된다. 또한, 무선 도어폰(1)의 작동을 위하여 필요한 각종 설정값에 관한 데이터 또한 메모리부(12)에 저장된다.
메모리부(12)는 저장되는 데이터의 성격과 용량에 적합하다는 한도 내에서 RAM, ROM, EEPROM, 플래시메모리, 하드디스크, SSD, 기타 어떠한 저장장치라도 다양하게 사용될 수 있으며, 2 이상의 저장장치를 함께 사용하는 것도 무방하다.
제어부(13)는 무선 도어폰(1)의 카메라부(10), 마이크부(11), 메모리부(12), 영상음성처리부(14), 통신부(15) 및 개폐부(16)의 작동을 제어함으로써 무선 도어폰(1)의 정상적인 동작을 제어한다. 또한, 제어부(13)는 원격 서버(2)로부터 전송되는 명령 신호를 해석하여, 영상음성처리부(14)가 영상의 해상도를 하향조정하여 인코딩을 하도록 한다.
제어부(13)는 제어부(13)의 기능을 수행할 수 있다면 범용의 프로세서이어도 무방하며 전용으로 설계된 프로세서가 사용될 수도 있다.
영상음성처리부(14)는 카메라부(10)에서 촬영된 영상과 마이크부(11)에서 녹음된 음성(음향)을 원격 서버(2)측에 전송되기에 적절한 형태로 처리한다.
예컨대, 영상의 경우 영상음성처리부(14)는 카메라부(10)에서 촬영된 아날로그 영상을 아날로그-디지털 변환한 후, 제어부(13)가 지시하는 해상도 및 비트율(bitrate)과 코덱을 갖도록 인코딩을 수행한다. 마찬가지로, 음성의 경우, 마이크부(11)에서 녹음된 아날로그 음성(음향)을 아날로그-디지털 변환한 후, 제어부가 지시하는 비트율(bitrate)과 코덱을 갖도록 인코딩을 수행한다. 또한, 영상 데이터와 음성 데이터가 원격 서버(2)측으로 스트리밍될 수 있도록 데이터 스트림을 생성한다.
영상음성처리부(14)는 위와 같은 동작을 수행할 수 있다면 별도의 전용 하드웨어와 소프트웨어로도 구현될 수 있고, 범용 프로세서 상에서 수행되는 소프트웨어로도 다양하게 구현될 수 있다.
통신부(15)는 무선 도어폰(1)으로부터 원격 서버(2)로 스트림 데이터를 전송하고, 원격 서버(2)로부터 전송되는 명령 신호를 수신하는 등 원격 서버(2)와의 양방향 통신을 수행한다.
통신부(15)는 기본적으로 와이파이(WiFi) 통신을 수행할 수 있는 RF통신 모듈이 될 수 있다. 그 밖에 도어폰과 원격 서버 간의 무선 데이터 통신을 수행할 수 있는 타 통신 모듈도 다양하게 적용될 수 있다.
개폐부(16)는 도어폰(1)과 연결된 개폐장치(도면에 나타내지 않음)로서, 제어부(13)의 제어신호에 따라 출입구를 개폐한다. 제어부(13)는 휴대기기(3) 등으로부터 출입구의 개폐에 관한 신호를 받는 경우, 또는 그 밖의 정해진 규칙에 따라 개폐장치를 동작시켜야 하는 경우 개폐부(16)를 열거나 닫을 수 있는 신호를 전송한다.
도 3은 도 1의 원격 서버를 더욱 상세히 나타낸 블록도이다.
도 3에서 나타낸 바와 같이, 원격 서버(2)는 통신부(20), 프레임계산부(21), 메모리부(22), 스트림전송부(23) 및 제어부(24)를 포함한다.
통신부(20)는 무선 도어폰(1)으로부터 전송되는 데이터 스트림을 수신하고, 무선 도어폰(1)측으로 명령 신호를 전송하는 등 무선 도어폰(1)과의 양방향 통신을 수행한다. 통신부(20)는 인터넷 프로토콜 등에 기반하여 양방향 데이터 통신을 수행할 수 있는 통신 모듈이라면 다양하게 적용될 수 있다.
프레임계산부(21)는 무선 도어폰(1)으로부터 전송된 데이터 스트림에 포함된 영상의 단위시간당 프레임 수를 계산하여, 정상적인 범위 내의 프레임 수인지 여부를 판단한다. 예컨대, 프레임계산부(21)는 영상의 초당 프레임 수(frame per second)를 계산하여, 계산된 초당 프레임수가 기준 프레임수인 초당 30프레임(30fps)을 넘는지 밑도는지를 제어부(23)에 알려준다.
메모리부(22)는 원격 서버(2)의 작동을 위하여 필요한 일체의 펌웨어나 소프트웨어 및 펌웨나 소프트웨어의 실행 중에 발생하는 각종 임시파일 및 무선 도어폰(1)으로부터 수신된 스트리밍 데이터를 포함한다. 또한, 원격 서버(2)의 작동을 위하여 필요한 각종 설정값에 관한 데이터 또한 메모리부(22)에 저장된다.
메모리부(22)는 저장되는 데이터의 성격과 용량에 적합하다는 한도 내에서 RAM, ROM, EEPROM, 플래시메모리, 하드디스크, SSD, 기타 어떠한 저장장치라도 다양하게 사용될 수 있으며, 2 이상의 저장장치를 함께 사용하는 것도 무방하다.
스트림전송부(23)는 휴대기기(3)로부터 데이터 스트림의 전송 요청을 수신하고, 전송 요청에 대응하여 무선 도어폰(1)으로부터 전송받은 데이터 스트림을 휴대기기(3)로 중계한다.
스트림전송부(23)는 휴대기기(3)로부터의 전송 요청을 처리하기 위한 원격 서버(2)측 응용프로그램이 될 수 있다.
제어부(24)는 통신부(20), 프레임계산부(21), 메모리부(22) 및 스트림전송부(23)를 제어함으로써 원격 서버(2)의 정상적인 동작을 제어한다. 또한, 제어부(24)는 무선 도어폰(1)으로 영상 해상도의 변경에 관한 명렁 신호를 전송함으로써 통신 환경에 데이터 스트림이 적응될 수 있도록 한다.
도 4는 도 1의 휴대기기를 더욱 상세히 나타낸 블록도이다.
도 4에서 나타낸 바와 같이, 휴대기기(3)는 통신부(30), 메모리부(31), 스트림처리부(32), 영상표시부(33), 음성출력부(34) 및 제어부(35)를 포함한다.
예컨대 휴대기기(3)는 원격 서버로부터 중계되는 데이터 스트림을 처리하여 영상 및 음성을 재생할 수 있는 애플리케이션이 설치되어 있는 범용의 휴대전화나 태블릿PC 등이 될 수 있다.
통신부(30)는 통신 네트워크를 통하여 원격 서버(2)로 데이터 스트림을 요청하는 신호를 전송하며, 원격 서버(2)로부터의 데이터 스트림을 수신한다.
메모리부(31)는 휴대기기(3)의 작동을 위하여 필요한 일체의 펌웨어나 소프트웨어 및 펌웨나 소프트웨어의 실행 중에 발생하는 각종 임시파일 및 원격 서버(2)로부터 수신된 스트리밍 데이터를 포함한다. 또한, 휴대기기(3)의 작동을 위하여 필요한 각종 설정값에 관한 데이터 또한 메모리부(22)에 저장된다.
스트림처리부(32)는 원격 서버(2)로부터 수신한 데이터 스트림으로부터 영상 데이터 및 음성 데이터를 디코딩함으로써 휴대기기(3)상에서 재생될 수 있도록 한다. 스트림처리부(32)에는 하드웨어 디코더는 물론 소프트웨어 디코더도 널리 포함될 수 있다.
영상표시부(33)는 스트림처리부(32)에서 디코드된 영상 데이터를 표시하여 사용자로 하여금 도어폰의 카메라부(10)에서 촬영된 영상을 확인할 수 있도록 디스플레이한다. 영상표시부(33)는 예컨대 휴대기기(3)의 디스플레이 장치가 될 수 있다.
음성출력부(34)는 스트림처리부(32)에서 디코드된 음성 데이터를 출력하여 사용자로 하여금 도어폰의 마이크부(11)에서 녹음된 음성(음향)을 확인할 수 있도록 재생한다. 음성출력부(34)는 예컨대 휴대기기(3)의 스피커가 될 수 있다.
도 5는 무선 도어폰의 스트림 제어방법의 일례를 나타낸 흐름도이다.
도 5의 실시예는 원격 서버(2)가 무선 도어폰(1)측으로 저해상도의 영상을 요청함으로써 원격 서버(2)에 의하여 무선 도어폰의 스트림이 제어되는 흐름을 나타내고 있다.
먼저 원격 서버(2)는 무선 도어폰(1)으로부터 데이터 스트림을 수신한다(40).
데이터 스트림을 수신한 원격 서버(2)는, 수신된 데이터 스트림에서 단위시간당(초당) 영상 프레임의 수를 계산하고(42), 계산된 초당 영상 프레임수가 기준값(예: 30fps)을 넘는지 여부를 판단한다(44).
만약 계산된 초당 영상 프레임 수가 기준값을 상회한다면, 영상이 자연스럽게 재생될 수 있는 상태인 것이므로 데이터 스트림을 휴대기기(3)로 전달한다(46).
그러나, 만약 계산된 초당 영상 프레임 수가 기준값에 미치지 않는다면, 영상이 깨지거나 뚝뚝 끊기는 상태인 것이므로, 원격 서버(2)는 무선 도어폰(1)측에 "저해상도의 영상을 포함하도록 데이터 스트림을 전송할 것"을 요청하는 신호를 전송한다(48).
이러한 요청 신호에 대응하여 무선 도어폰(1)은 한 단계 낮은 해상도의 영상을 포함하도록 데이터 스트림을 생성하여 원격 서버(2)측으로 전송할 것이므로, 초당 영상 프레임 수가 기준값을 만족할 때까지 반복하여 단계(40, 42, 44)가 진행된 이후, 단계(46)로 진입하게 된다.
도 6은 무선 도어폰의 스트림 제어방법의 다른 예를 나타낸 흐름도이다.
도 6 의 실시예도 도 5의 실시예에서와 마찬가지로 원격 서버(2)가 무선 도어폰(1)측으로 저해상도의 영상을 요청함으로써 원격 서버(2)에 의하여 무선 도어폰의 스트림이 제어되는 흐름을 나타내고 있다.
다만 도 5의 실시예와 다른 점은, 저해상도 영상의 단계에 한계를 부여하여, 가장 낮은 해상도의 영상이 전송된 경우에도 초당 영상 프레임수가 기준값에 미치지 못하는 경우에는 가장 낮은 해상도의 영상이 포함된 데이터 스트림을 휴대기기(3)로 전송한다는 점이다.
이는 아무리 여러 단계로 해상도의 수준을 구분하더라도, 낮아질 수 있는 해상도에는 한계가 존재한다는 점에 착안한 것이다. 예컨대, 원격 도어폰이 최초에 전송하는 제1단계의 기본 영상이 1920ㅧ1080픽셀(고해상도) 영상이고, 제2단계가 1280ㅧ720픽셀(중해상도), 제3단계가 720ㅧ480픽셀(저해상도), 제4단계가 640ㅧ480픽셀(최저해상도)인 경우를 생각할 수 있다.
먼저 원격 서버(2)는 무선 도어폰(1)으로부터 데이터 스트림을 수신한다(50).
데이터 스트림을 수신한 원격 서버(2)는, 수신된 데이터 스트림에서 단위시간당(초당) 영상 프레임의 수를 계산하고(52), 계산된 초당 영상 프레임수가 기준값(예: 30fps)을 넘는지 여부를 판단한다(54).
만약 계산된 초당 영상 프레임 수가 기준값을 상회한다면, 영상이 자연스럽게 재생될 수 있는 상태인 것이므로 데이터 스트림을 휴대기기(3)로 전달한다(56).
그러나, 만약 계산된 초당 영상 프레임 수가 기준값에 미치지 않는다면, 영상이 깨지거나 뚝뚝 끊기는 상태인 것이므로, 원격 서버(2)는 무선 도어폰이 한 단계 낮은 해상도의 영상을 생성할 수 있는지를 판단한 후(58), 무선 도어폰(1)측에 "저해상도의 영상을 포함하도록 데이터 스트림을 전송할 것"을 요청하는 신호를 전송한다(59).
이러한 요청 신호에 대응하여 무선 도어폰(1)은 한 단계 낮은 해상도의 영상을 포함하도록 데이터 스트림을 생성하여 원격 서버(2)측으로 전송할 것이므로, 초당 영상 프레임 수가 기준값을 만족하지 않는다면 무선 도어폰(1)으로부터는 중해상도 영상, 저해상도 영상 및 최저해상도 영상이 순차적으로 데이터 스트림에 포함되어 전송된다.
그런데, 최저해상도 영상이 수신된 경우, 이보다 한 단계 더 낮은 해상도의 영상은 생성될 수 없으므로, 단계(58)에서 원격 서버(2)는 최저해상도 영상의 상태로 휴대기기(3)에 데이터 스트림을 전송하게 된다.
도 7은 무선 도어폰의 스트림 제어방법의 다른 예를 나타낸 흐름도이다.
도 7의 실시예도 도 5 및 도 6의 실시예에서와 마찬가지로 원격 서버(2)가 무선 도어폰(1)측으로 저해상도의 영상을 요청함으로써 원격 서버(2)에 의하여 무선 도어폰의 스트림이 제어되는 흐름을 나타내고 있다.
다만 도 5 및 도 6의 실시예와 다른 점은, 저해상도 영상의 단계에 한계를 부여하여, 가장 낮은 해상도의 영상이 전송된 경우에도 초당 영상 프레임수가 기준값에 미치지 못하는 경우에는 휴대기기로 스트림을 전송하지 않고 동작을 종료한다는 점이다.
이는 아무리 영상의 해상도를 낮추어 영상을 전송하더라도 초당 영상 프레임 수가 기준값이 미치지 않는다면, 정상적인 통신이 불가능한 상황이라고 판단하여 더 이상의 진행을 하지 않는 편이 바람직할 수도 있다는 점에 착안한 것이다.
도 7의 실시예에 따르면, 이처럼 동작이 종료된 다음, 시간이 경과함에 따라 통신환경이 개선된 이후, 다시 도어폰으로부터 제1단계의 기본 영상(고해상도) 스트림의 수신을 재개할 수 있게 된다. 먼저 원격 서버(2)는 무선 도어폰(1)으로부터 데이터 스트림을 수신한다(50).
데이터 스트림을 수신한 원격 서버(2)는, 수신된 데이터 스트림에서 단위시간당(초당) 영상 프레임의 수를 계산하고(52), 계산된 초당 영상 프레임수가 기준값(예: 30fps)을 넘는지 여부를 판단한다(54).
만약 계산된 초당 영상 프레임 수가 기준값을 상회한다면, 영상이 자연스럽게 재생될 수 있는 상태인 것이므로 데이터 스트림을 휴대기기(3)로 전달한다(56).
그러나, 만약 계산된 초당 영상 프레임 수가 기준값에 미치지 않는다면, 영상이 깨지거나 뚝뚝 끊기는 상태인 것이므로, 원격 서버(2)는 무선 도어폰이 한 단계 낮은 해상도의 영상을 생성할 수 있는지를 판단한 후(58), 무선 도어폰(1)측에 "저해상도의 영상을 포함하도록 데이터 스트림을 전송할 것"을 요청하는 신호를 전송한다(59).
이러한 요청 신호에 대응하여 무선 도어폰(1)은 한 단계 낮은 해상도의 영상을 포함하도록 데이터 스트림을 생성하여 원격 서버(2)측으로 전송할 것이므로, 초당 영상 프레임 수가 기준값을 만족하지 않는다면 무선 도어폰(1)으로부터는 중해상도 영상, 저해상도 영상 및 최저해상도 영상이 순차적으로 데이터 스트림에 포함되어 전송된다.
그런데, 최저해상도 영상이 수신된 경우, 이보다 한 단계 더 낮은 해상도의 영상은 생성될 수 없으므로, 단계(57)에서 원격 서버(2)는 휴대기기(3)로 스트림을 전송하는 대신 데이터 스트림의 전송 절차를 종료하게 된다. 이 경우, 무선 도어폰(1) 및/또는 휴대기기(3)측으로 "통신상태가 불량하므로 나중에 다시 시도하라"는 내용의 안내가 표시되도록 하는 명령 신호를 전송할 수도 있다.
도 8은 무선 도어폰의 스트림 제어방법의 또 다른 예를 나타낸 흐름도이다.
도 8의 실시예도 도 5, 도 6 및 도 7의 실시예에서와 마찬가지로 원격 서버(2)가 무선 도어폰(1)측으로 저해상도의 영상을 요청함으로써 원격 서버(2)에 의하여 무선 도어폰의 스트림이 제어되는 흐름을 나타내고 있다.
다만 도 5, 도 6 및 도 7의 실시예와 다른 점은, 저해상도 영상의 단계에 한계를 부여하여, 가장 낮은 해상도의 영상이 전송된 경우에도 초당 영상 프레임수가 기준값에 미치지 못하는 경우에는 영상 없이 음성만이 포함된 데이터 스트림을 휴대기기(3)로 전송한다는 점이다.
이는 아무리 낮은 해상도의 영상을 전송하더라도 정상적인 재생이 불가능한 경우에는 음성만이라도 전달할 수 있도록 할 필요가 있다는 점에 착안한 것이다. 예컨대, 원격 도어폰이 최초에 전송하는 제1단계의 기본 영상이 1920ㅧ1080픽셀(고해상도) 영상이고, 제2단계가 1280ㅧ720픽셀(중해상도), 제3단계가 720ㅧ480픽셀(저해상도), 제4단계가 640ㅧ480픽셀(최저해상도)인 경우, 제4단계의 최저해상도 영상도 초당 프레임 수가 기준값을 밑도는 경우에는 음성만을 포함하는 스트림이 무선 도어폰(1)에서 생성되어 원격 서버(2)로 전송되도록 할 수 있다.
먼저 원격 서버(2)는 무선 도어폰(1)으로부터 데이터 스트림을 수신한다(60).
데이터 스트림을 수신한 원격 서버(2)는, 수신된 데이터 스트림에 영상 데이터가 포함되어 있는지 여부를 판단한다(61).
데이터 스트림에 영상 데이터가 포함된 경우, 원격 서버(2)는 수신된 데이터 스트림에서 단위시간당(초당) 영상 프레임의 수를 계산하고(62), 계산된 초당 영상 프레임수가 기준값(예: 30fps)을 넘는지 여부를 판단한다(64).
만약 계산된 초당 영상 프레임 수가 기준값을 상회한다면, 영상이 자연스럽게 재생될 수 있는 상태인 것이므로 데이터 스트림을 휴대기기(3)로 전달한다(66).
그러나, 만약 계산된 초당 영상 프레임 수가 기준값에 미치지 않는다면, 영상이 깨지거나 뚝뚝 끊기는 상태인 것이므로, 원격 서버(2)는 무선 도어폰이 한 단계 낮은 해상도의 영상의 생성이 가능한지를 판단한 후(67), 가능한 경우 무선 도어폰(1)측에 "저해상도의 영상을 포함하도록 데이터 스트림을 전송할 것"을 요청하는 신호를 전송한다(68).
이러한 요청 신호에 대응하여 무선 도어폰(1)은 한 단계 낮은 해상도의 영상을 포함하도록 데이터 스트림을 생성하여 원격 서버(2)측으로 전송할 것이므로, 초당 영상 프레임 수가 기준값을 만족하지 않는다면 무선 도어폰(1)으로부터는 중해상도 영상, 저해상도 영상 및 최저해상도 영상이 순차적으로 데이터 스트림에 포함되어 전송된다.
그런데, 단계(67)에서 최저해상도 영상이 수신된 경우, 이보다 한 단계 더 낮은 해상도의 영상은 생성될 수 없으므로, 원격 서버(2)는 무영상 스트림을 전송할 것을 요청하는 신호를 무선 도어폰(1)으로 전송한다(69).
이러한 요청에 따라 무선 도어폰(1)이 영상 데이터를 포함하지 않는 음성 데이터만의 스트림을 전송하는 경우, 단계(60) 및 단계(61)를 거쳐 원격 서버(2)는 음성만을 포함하는 데이터 스트림을 휴대기기로 전송하게 된다(66).
이상 첨부된 도면을 참조하여 본 발명의 실시 예들을 설명하였지만, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 그 기술적 사상이나 필수적인 특징들이 변경되지 않고서 다른 구체적인 형태로 실시될 수 있다는 것으로 이해할 수 있을 것이다. 그러므로, 이상에서 기술한 실시 예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
1 . . . . . . 무선 도어폰
2 . . . . . . 원격 서버
3 . . . . . . 휴대기기
10 . . . . . . 카메라부
11 . . . . . . 마이크부
12 . . . . . . 메모리부
13 . . . . . . 제어부
14 . . . . . . 스트림처리부
15 . . . . . . 통신부
16 . . . . . . 개폐부
20 . . . . . . 통신부
21 . . . . . . 프레임계산부
22 . . . . . . 메모리부
23 . . . . . . 스트림전송부
24 . . . . . . 제어부
30 . . . . . . 통신부
31 . . . . . .메모리부
32 . . . . . . 스트림처리부
33 . . . . . . 영상표시부
34 . . . . . . 음성출력부
35 . . . . . . 제어부

Claims (13)

  1. 카메라부에서 촬영되는 영상 및 마이크부에서 녹음되는 음성을 실시간으로 인코딩하고, 인코딩된 영상과 인코딩된 음성을 포함하는 데이터 스트림을 생성하는 스트림처리부;
    원격 서버로부터 제1 명령 신호를 수신한 경우, 상기 제1 명령 신호를 수신한 이후에 상기 카메라부에서 촬영되는 영상에 대해서는 상기 제1 명령 신호를 수신하기 전에 인코딩된 영상보다 낮은 해상도로 인코딩하도록 상기 스트림처리부를 제어하고, 상기 원격 서버로부터 제2 명령 신호를 수신한 경우, 상기 제2 명령 신호를 수신한 이후에는 상기 데이터 스트림이 상기 마이크부에서 녹음되는 음성만을 포함하도록 상기 스트림처리부를 제어하는 제어부; 및
    상기 데이터 스트림을 상기 원격 서버로 전송하고, 상기 원격 서버로부터 상기 명령 신호를 수신하는 통신부;를 포함하는 무선 도어폰.
  2. 제1항에 있어서,
    상기 제1 명령 신호는, 인코딩되는 영상의 해상도를 낮출 것을 지시하는 신호인 것으로 정의되는 무선 도어폰.
  3. 제1항에 있어서,
    상기 제2 명령 신호는, 상기 데이터 스트림이 인코딩된 음성만을 포함할 것을 지시하는 신호인 것으로 정의되는 무선 도어폰.
  4. 제1항에 있어서,
    상기 제어부의 제어 신호에 따라 개폐되는 개폐장치;를 더 포함하는 무선 도어폰.
  5. 무선 도어폰으로부터 수신한 데이터 스트림에 포함된 영상의 단위시간당 프레임 수를 계산하여 기준 프레임 수와 비교하는 프레임계산부; 및
    상기 단위시간당 프레임 수가 상기 기준 프레임 수보다 적은 경우, 인코딩되는 영상의 해상도를 낮출 것을 지시하는 제1 명령 신호를 통신부를 통하여 상기 무선 도어폰으로 전송하는 제어부;를 포함하는 무선 도어폰의 스트림 제어장치.
  6. 제5항에 있어서,
    상기 데이터 스트림에 포함된 영상의 해상도가 더 낮아질 수 없는 상태인 경우, 상기 데이터 스트림이 인코딩된 음성만을 포함할 것을 지시하는 제2 명령 신호를 상기 통신부를 통하여 상기 무선 도어폰으로 전송하는 무선 도어폰의 스트림 제어장치.
  7. 제5항에 있어서,
    휴대기기의 요청에 대응하여 상기 데이터 스트림을 상기 휴대기기로 전송하는 스트림 전송부;를 더 포함하는 무선 도어폰의 스트림 제어장치.
  8. 무선 도어폰이 카메라부에서 촬영되는 영상 및 마이크부에서 녹음되는 음성을 실시간으로 인코딩하는 단계;
    상기 무선 도어폰이 인코딩된 영상과 인코딩된 음성을 포함하는 데이터 스트림을 생성하는 단계; 및
    상기 무선 도어폰이 상기 데이터 스트림을 상기 원격 서버로 전송하는 단계;를 포함하며,
    원격 서버로부터 제1 명령 신호를 수신한 경우, 상기 무선 도어폰이 상기 제1 명령 신호를 수신한 이후에 상기 카메라부에서 촬영되는 영상에 대해서는 상기 제1 명령 신호를 수신하기 전에 인코딩된 영상보다 낮은 해상도로 인코딩하고, 상기 원격 서버로부터 제2 명령 신호를 수신한 경우, 상기 제2 명령 신호를 수신한 이후에는 상기 마이크부에서 녹음되는 음성만을 포함하도록 상기 데이터 스트림을 생성하는, 무선 도어폰의 스트림 제어방법.
  9. 제8항에 있어서,
    상기 무선 도어폰이 상기 인코딩된 영상, 상기 인코딩된 음성 및 상기 데이터 스트림 중 적어도 하나를 메모리부에 저장하는 단계;를 더 포함하는 무선 도어폰의 스트림 제어방법.
  10. 원격 서버가 무선 도어폰으로부터 데이터 스트림을 수신하는 단계;
    상기 데이터 스트림에 영상이 포함된 경우, 상기 원격 서버가 영상의 단위시간당 프레임 수를 계산하여 기준 프레임 수와 비교하는 단계;
    상기 단위시간당 프레임 수가 상기 기준 프레임 수보다 적은 경우, 인코딩되는 영상의 해상도를 낮출 것을 지시하는 제1 명령 신호를 상기 원격 서버가 상기 무선 도어폰으로 전송하는 단계;를 포함하는 무선 도어폰의 스트림 제어방법.
  11. 제10항에 있어서,
    상기 데이터 스트림에 포함된 영상의 해상도가 더 낮아질 수 없는 상태인지 여부를 판단하는 단계;를 더 포함하는 무선 도어폰의 스트림 제어방법.
  12. 제11항에 있어서,
    상기 데이터 스트림에 포함된 영상의 해상도가 더 낮아질 수 없는 상태인 경우, 상기 데이터 스트림이 인코딩된 음성만을 포함할 것을 지시하는 제2 명령 신호를 상기 통신부를 통하여 상기 무선 도어폰으로 전송하는 단계;를 더 포함하는 무선 도어폰의 스트림 제어방법.
  13. 제10항에 있어서,
    휴대기기의 요청에 대응하여 상기 데이터 스트림을 상기 휴대기기로 전송하는 단계;를 더 포함하는 무선 도어폰의 스트림 제어방법.
PCT/KR2016/015467 2015-12-31 2016-12-29 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법 WO2017116157A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150191413A KR20170080156A (ko) 2015-12-31 2015-12-31 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법
KR10-2015-0191413 2015-12-31

Publications (1)

Publication Number Publication Date
WO2017116157A1 true WO2017116157A1 (ko) 2017-07-06

Family

ID=59225181

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/015467 WO2017116157A1 (ko) 2015-12-31 2016-12-29 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법

Country Status (2)

Country Link
KR (1) KR20170080156A (ko)
WO (1) WO2017116157A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010020498A (ko) * 1997-06-26 2001-03-15 사이트릭스 시스템스, 인크. 네트웍을 통한 적합한 비디오/오디오의 전송을 위한 시스템
US20060168178A1 (en) * 2004-12-21 2006-07-27 Electronics And Telecommunications Research Institute Platform-independent system for remotely controlling home devices and method thereof
KR20100067887A (ko) * 2008-12-12 2010-06-22 김동희 현관문 외부 감시장치
JP2011010200A (ja) * 2009-06-29 2011-01-13 Aiphone Co Ltd インターホン装置、及びカメラ付玄関子機
KR101353617B1 (ko) * 2012-10-04 2014-01-23 주식회사 경동원 와이파이모듈을 구비한 비디오폰을 이용한 원격제어장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010020498A (ko) * 1997-06-26 2001-03-15 사이트릭스 시스템스, 인크. 네트웍을 통한 적합한 비디오/오디오의 전송을 위한 시스템
US20060168178A1 (en) * 2004-12-21 2006-07-27 Electronics And Telecommunications Research Institute Platform-independent system for remotely controlling home devices and method thereof
KR20100067887A (ko) * 2008-12-12 2010-06-22 김동희 현관문 외부 감시장치
JP2011010200A (ja) * 2009-06-29 2011-01-13 Aiphone Co Ltd インターホン装置、及びカメラ付玄関子機
KR101353617B1 (ko) * 2012-10-04 2014-01-23 주식회사 경동원 와이파이모듈을 구비한 비디오폰을 이용한 원격제어장치

Also Published As

Publication number Publication date
KR20170080156A (ko) 2017-07-10

Similar Documents

Publication Publication Date Title
KR101583658B1 (ko) 도어폰을 이용한 도어감시 시스템
WO2014157889A1 (en) Method and apparatus for improving quality of experience in sharing screen among devices, and recording medium thereof
KR101760095B1 (ko) 암호키 기반의 하드웨어 보안모듈을 이용한 cctv 보안 감시 장치 및 그 방법
US20070185989A1 (en) Integrated video surveillance system and associated method of use
WO2010120078A2 (en) Channel adaptive video transmission method, apparatus using the same, and system providing the same
KR101260167B1 (ko) 다채널 영상 분배 방법 및 장치, 이를 이용한 영상 관제 시스템
WO2017175924A1 (en) Surveillance system and control method thereof
EP2152004A2 (en) Image providing apparatus, image displaying apparatus, image transmitting system and image transmitting method using the same
KR101738334B1 (ko) 클라우드 컴퓨팅 환경을 이용한 cctv 보안 감시 장치 및 그 방법
US20030067543A1 (en) Camera server system
KR101904050B1 (ko) 프록시 ap카메라 및 이를 이용한 감시 시스템
WO2017116157A1 (ko) 무선 도어폰, 무선 도어폰의 스트림 제어장치 및 제어방법
JP2004040272A (ja) ネットワークカメラ及びこれを用いた遠隔監視／制御システム及び制御方法
JP2008271378A (ja) 映像監視装置
WO2021020600A1 (ko) 멀티미디어 서비스 제공 장치 및 멀티미디어 서비스 제공 방법
KR20140146429A (ko) 스마트 디바이스를 이용한 cctv 영상 획득 및 관리 시스템 및 그 방법
KR20020092601A (ko) 에이디에스엘 전송방식을 이용한 원격 보안감시 장치
JP2009055362A (ja) 映像送信装置
JP5199621B2 (ja) 映像送信装置
KR101440131B1 (ko) 모바일 클라이언트 단말기에서 다채널 CCTV 관제를 위한 Qos 영상처리 시스템 및 Qos 영상 처리 방법
JP5330661B2 (ja) インターホン親機
KR100858444B1 (ko) 이진부호분할다중접속 무선통신기반 웹 카메라시스템
JP2003102076A (ja) 監視システム
JP2009055367A (ja) 映像伝送システム
KR20110133160A (ko) 실시간 멀티채널 영상 기반 감시 및 보안 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16882109

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16882109

Country of ref document: EP

Kind code of ref document: A1