KR102227517B1 - IoT 기반의 IP 카메라 시스템 및 그의 제어 방법 - Google Patents

IoT 기반의 IP 카메라 시스템 및 그의 제어 방법 Download PDF

Info

Publication number
KR102227517B1
KR102227517B1 KR1020190049254A KR20190049254A KR102227517B1 KR 102227517 B1 KR102227517 B1 KR 102227517B1 KR 1020190049254 A KR1020190049254 A KR 1020190049254A KR 20190049254 A KR20190049254 A KR 20190049254A KR 102227517 B1 KR102227517 B1 KR 102227517B1
Authority
KR
South Korea
Prior art keywords
terminal
image information
server
camera
camera device
Prior art date
Application number
KR1020190049254A
Other languages
English (en)
Other versions
KR20200125246A (ko
Inventor
조영상
Original Assignee
조영상
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 조영상 filed Critical 조영상
Priority to KR1020190049254A priority Critical patent/KR102227517B1/ko
Publication of KR20200125246A publication Critical patent/KR20200125246A/ko
Application granted granted Critical
Publication of KR102227517B1 publication Critical patent/KR102227517B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4753—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for user identification, e.g. by entering a PIN or password
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H04N5/23206—

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)
  • Alarm Systems (AREA)

Abstract

본 발명은 IoT 기반의 IP 카메라 시스템 및 그의 제어 방법을 개시한다. 즉, 본 발명은 이동 수단이 구비된 IP 카메라가 임의의 장소 내에 구비된 복수의 디바이스/가전제품과 사물형 인터넷을 통해 연결되며, 원격에 위치한 단말의 사용자 제어 또는 미리 설정된 이벤트 발생 시, 상기 임의의 장소 내의 특정 영역에 대한 영상 정보를 획득하고, 상기 획득된 특정 영역에 대한 영상 정보를 상기 단말에 제공함으로써, 원격지에 위치한 사용자가 관심 장소에 대한 다양한 영상 정보를 확인할 수 있어 보안 기능을 강화하고, 사용자의 만족도를 높일 수 있다.

Description

IoT 기반의 IP 카메라 시스템 및 그의 제어 방법{System with IP camera based on Internet of Things and control method thereof}
본 발명은 IoT 기반의 IP 카메라 시스템 및 그의 제어 방법에 관한 것으로서, 특히 이동 수단이 구비된 IP 카메라가 임의의 장소 내에 구비된 복수의 디바이스/가전 제품과 사물형 인터넷을 통해 연결되며, 원격에 위치한 단말의 사용자 제어 또는 미리 설정된 이벤트 발생 시, 상기 임의의 장소 내의 특정 영역에 대한 영상 정보를 획득하고, 상기 획득된 특정 영역에 대한 영상 정보를 상기 단말에 제공하는 IoT 기반의 IP 카메라 시스템 및 그의 제어 방법에 관한 것이다.
IP 카메라는 유무선으로 인터넷에 연결하여 사용하는 카메라로서 카메라 모듈, 디코더, 영상 압축 칩, CPU, 네트워크 전송 칩 등으로 구성되어 카메라 모듈로부터 입수된 아날로그 신호를 디코더에 의하여 디지털 신호로 변경하고 압축하여 외부로 전송하며, 네트워크 비디오 레코더(Network video recorder: NVR)는 네트워크상에 설치된 카메라나 비디오 서버의 영상 녹화, 모니터링, 이벤트 관리, 재생 등을 위한 전용 PC 서버로서 아이피 카메라의 전용 저장장치이다. 근래에 들어 상기와 같이 구성되는 IP 카메라와 NVR을 이용한 보안시스템은 비교적 자유로운 확장성과 별도의 케이블 연결을 위한 작업들을 최소화할 수 있는 장점 등으로 인하여 널리 활용되고 있다.
하지만, 이러한 IP 카메라는 특정 장소에 고정된 상태로 설치되어 있어, 해당 특정 장소에서 처리할 수 있는 관심 영역에 대한 영상 정보만을 제공할 수 있어, 상기 특정 장소 중 관심 영역을 제외한 나머지 영역이 사각지대에 놓이고 있다.
한국등록특허 제10-1728435호 [제목: IP카메라 네트워크 환경에 열감지 기능을 탑재한 열상카메라 및 이를 이용한 CCTV시스템]
본 발명의 목적은 이동 수단이 구비된 IP 카메라가 임의의 장소 내에 구비된 복수의 디바이스/가전제품과 사물형 인터넷을 통해 연결되며, 원격에 위치한 단말의 사용자 제어 또는 미리 설정된 이벤트 발생 시, 상기 임의의 장소 내의 특정 영역에 대한 영상 정보를 획득하고, 상기 획득된 특정 영역에 대한 영상 정보를 상기 단말에 제공하는 IoT 기반의 IP 카메라 시스템 및 그의 제어 방법을 제공하는 데 있다.
본 발명의 실시예에 따른 IoT 기반의 IP 카메라 시스템은 미리 설정된 이벤트가 발생할 때, 상기 이벤트에 대응하여 특정 장소로 이동한 후, 상기 특정 장소에 대응하는 특정 영역에 대한 영상 정보를 획득하고, 상기 획득된 영상 정보를 전송하는 IP 카메라 장치; 상기 IP 카메라 장치로부터 전송되는 영상 정보를 수신하고, 상기 IP 카메라 장치에 대응하여 미리 등록된 단말의 식별 정보를 확인하고, 상기 확인된 단말의 식별 정보에 대응하는 단말이 인증된 상태인지 여부를 판단하고, 상기 판단 결과, 상기 단말이 인증된 상태일 때, 상기 수신된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하는 서버; 및 상기 서버로부터 전송되는 영상 정보를 출력하는 상기 단말을 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 이벤트는, 사물형 인터넷을 통해 연결된 복수의 가전제품 중에서 특정 가전제품의 동작 상태가 변경되는 경우, 미리 등록된 객체가 미리 설정된 시간 이상 상기 IP 카메라 장치를 통해 감지되지 않는 경우 및 미리 설정된 데시벨 이상의 소리가 감지되는 경우 중 적어도 하나를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 서버는, 상기 판단 결과, 상기 단말이 인증되지 않은 상태일 때 상기 수신된 영상 정보 내에서 사용자에 대응하는 객체가 감지되는지 여부를 확인하고, 상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지될 때, 상기 영상 정보를 수정하여 새롭게 수정된 영상 정보를 생성하고, 상기 생성된 수정된 영상 정보를 상기 단말의 식별 정보에 대응하는 상기 단말로 전송하며, 상기 단말은, 상기 서버로부터 전송되는 수정된 영상 정보를 출력할 수 있다.
본 발명과 관련된 일 예로서 상기 수정된 영상 정보는, 상기 영상 정보에 포함된 사용자에 대응하는 객체를 마스킹 처리하여 생성된 영상 정보, 상기 영상 정보에 포함된 사용자에 대응하는 객체를 삭제하고 상기 삭제된 객체의 위치에 미리 설정된 아바타를 추가하여 생성된 영상 정보 및 상기 영상 정보에 포함된 사용자에 대응하는 객체 위에 상기 아바타를 오버레이 처리하여 생성된 영상 정보 중 어느 하나일 수 있다.
본 발명의 실시예에 따른 IoT 기반의 IP 카메라의 제어 방법은 IP 카메라 장치에 의해, 미리 설정된 이벤트가 발생할 때, 상기 이벤트에 대응하여 특정 장소로 이동한 후, 상기 특정 장소에 대응하는 특정 영역에 대한 영상 정보를 획득하는 단계; 서버에 의해, 상기 IP 카메라 장치로부터 전송되는 영상 정보를 수신하고, 상기 IP 카메라 장치에 대응하여 미리 등록된 단말의 식별 정보를 확인하는 단계; 상기 서버에 의해, 상기 확인된 단말의 식별 정보에 대응하는 단말이 인증된 상태인지 여부를 판단하는 단계; 상기 판단 결과, 상기 단말이 인증된 상태일 때, 상기 서버에 의해, 상기 수신된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하는 단계; 및 상기 단말에 의해, 상기 서버로부터 전송되는 영상 정보를 출력하는 단계를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 판단 결과, 상기 단말이 인증되지 않은 상태일 때, 상기 서버에 의해, 상기 수신된 영상 정보 내에서 사용자에 대응하는 객체가 감지되는지 여부를 확인하는 단계; 상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되지 않을 때, 상기 서버에 의해, 상기 수신된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하는 단계; 및 상기 단말에 의해, 상기 서버로부터 전송되는 영상 정보를 출력하는 단계를 더 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지될 때, 상기 서버에 의해, 상기 수신된 영상 정보에 포함된 사용자에 대응하는 객체를 마스킹 처리하거나 또는, 상기 객체를 삭제하고 상기 삭제된 객체의 위치에 미리 설정된 아바타를 추가하거나 또는, 상기 객체 위에 상기 아바타를 오버레이 처리하여, 수정된 영상 정보를 생성하는 단계; 상기 서버에 의해, 상기 수정된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하는 단계; 및 상기 단말에 의해, 상기 서버로부터 전송되는 수정된 영상 정보를 출력하는 단계를 더 포함할 수 있다.
본 발명은 이동 수단이 구비된 IP 카메라가 임의의 장소 내에 구비된 복수의 디바이스/가전제품과 사물형 인터넷을 통해 연결되며, 원격에 위치한 단말의 사용자 제어 또는 미리 설정된 이벤트 발생 시, 상기 임의의 장소 내의 특정 영역에 대한 영상 정보를 획득하고, 상기 획득된 특정 영역에 대한 영상 정보를 상기 단말에 제공함으로써, 원격지에 위치한 사용자가 관심 장소에 대한 다양한 영상 정보를 확인할 수 있어 보안 기능을 강화하고, 사용자의 만족도를 높일 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 IoT 기반의 IP 카메라 시스템의 구성을 나타낸 블록도이다.
도 2는 본 발명의 실시예에 따른 IP 카메라 장치의 구성을 나타낸 블록도이다.
도 3은 본 발명의 실시예에 따른 단말의 구성을 나타낸 블록도이다.
도 4는 본 발명의 실시예에 따른 IoT 기반의 IP 카메라 시스템의 제어 방법을 나타낸 흐름도이다.
본 발명에서 사용되는 기술적 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서 "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.
도 1은 본 발명의 실시예에 따른 IoT 기반의 IP 카메라 시스템(10)의 구성을 나타낸 블록도이다.
도 1에 도시한 바와 같이, IoT 기반의 IP 카메라 시스템(10)은 가전제품(100), IP 카메라 장치(200), 서버(300) 및 단말(400)로 구성된다. 도 1에 도시된 IoT 기반의 IP 카메라 시스템(10)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 IoT 기반의 IP 카메라 시스템(10)이 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 IoT 기반의 IP 카메라 시스템(10)이 구현될 수도 있다.
상기 가전제품(또는 디바이스/장치)(100)은 사무실, 주택 등에 구비(또는 설치/배치)되는 다양한 전자 제품으로, 냉장고, 세탁기, 건조기, 인덕션, 가스레인지, 전자레인지, 에어컨, 탁상 시계 등을 포함한다.
또한, 상기 가전제품(100)은 SK의 누구(NUGU), KT의 기가 지니(GiGA Genie), 네이버의 클로바, 카카오프렌즈의 카카오 미니 등과 같은 AI 스피커 등을 포함할 수 있다. 이때, 상기 AI 스피커를 통해 상기 가전제품(100)에 포함되는 다른 전자 제품을 제어할 수도 있다.
또한, 상기 가전제품(100)은 사물 인터넷(Internet of Things: IoT) 등을 통해 상호 통신하거나, 상기 IP 카메라 장치(200), 상기 서버(300), 상기 단말(400) 등과 통신할 수 있다.
또한, 상기 가전제품(100)은 해당 가전제품의 동작 상태에 대한 정보를 실시간으로 상기 서버(300)에 전송한다. 여기서, 상기 가전제품의 동작 상태에 대한 정보는 해당 가전제품(100)이 온 상태에서 오프 상태로 전환되는 정보, 오프 상태에서 온 상태로 전환되는 정보, 도어가 닫힘 상태에서 열림 상태로 전환되는 정보, 도어가 열림 상태에서 닫힘 상태로 전환되는 정보 등을 포함한다.
상기 IP 카메라 장치(200)는 상기 가전제품(100)이 구비된 사무실, 주택 등에 구비(또는 설치/배치)된다.
도 2에 도시한 바와 같이, IP 카메라 장치(200)는 본체(210), 통신부(220), 저장부(230), IP 카메라(240) 및 제어부(250)로 구성된다. 도 2에 도시된 IP 카메라 장치(200)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 2에 도시된 구성 요소보다 많은 구성 요소에 의해 IP 카메라 장치(200)가 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 IP 카메라 장치(200)가 구현될 수도 있다.
상기 본체(210)는 내부 일측에 상기 통신부(220), 상기 저장부(230), 상기 IP 카메라(240) 및 상기 제어부(250)가 수납되는 공간(또는 영역)을 포함한다.
또한, 상기 본체(210)의 일측에는 상기 제어부(250)에 의해 구동 제어되는 복수의 바퀴(미도시) 및 모터(미도시)가 형성될 수 있다.
이에 따라, 상기 본체(210)는 상기 제어부(250)의 제어에 의해 상기 모터가 구동하여 상기 복수의 바퀴의 회전에 따라 임의의 방향으로 이동할 수 있다.
상기 통신부(220)는 상기 본체(210)의 일측에 형성한다.
또한, 상기 통신부(220)는 유/무선 통신망을 통해 내부의 임의의 구성 요소 또는 외부의 임의의 적어도 하나의 단말기와 통신 연결한다. 이때, 상기 외부의 임의의 단말기는 상기 가전제품(100), 상기 서버(300), 상기 단말(400) 등을 포함할 수 있다. 여기서, 무선 인터넷 기술로는 무선랜(Wireless LAN: WLAN), DLNA(Digital Living Network Alliance), 와이브로(Wireless Broadband: Wibro), 와이맥스(World Interoperability for Microwave Access: Wimax), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), IEEE 802.16, 롱 텀 에볼루션(Long Term Evolution: LTE), LTE-A(Long Term Evolution-Advanced), 광대역 무선 이동 통신 서비스(Wireless Mobile Broadband Service: WMBS) 등이 있으며, 상기 통신부(210)는 상기에서 나열되지 않은 인터넷 기술까지 포함한 범위에서 적어도 하나의 무선 인터넷 기술에 따라 데이터를 송수신하게 된다. 또한, 근거리 통신 기술로는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association: IrDA), UWB(Ultra Wideband), 지그비(ZigBee), 인접 자장 통신(Near Field Communication: NFC), 초음파 통신(Ultra Sound Communication: USC), 가시광 통신(Visible Light Communication: VLC), 와이 파이(Wi-Fi), 와이 파이 다이렉트(Wi-Fi Direct) 등이 포함될 수 있다. 또한, 유선 통신 기술로는 전력선 통신(Power Line Communication: PLC), USB 통신, 이더넷(Ethernet), 시리얼 통신(serial communication), 광/동축 케이블 등이 포함될 수 있다.
또한, 상기 통신부(220)는 유니버설 시리얼 버스(Universal Serial Bus: USB)를 통해 임의의 단말과 정보를 상호 전송할 수 있다.
또한, 상기 통신부(220)는 이동통신을 위한 기술표준들 또는 통신방식(예를 들어, GSM(Global System for Mobile communication), CDMA(Code Division Multi Access), CDMA2000(Code Division Multi Access 2000), EV-DO(Enhanced Voice-Data Optimized or Enhanced Voice-Data Only), WCDMA(Wideband CDMA), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등)에 따라 구축된 이동 통신망 상에서 기지국, 상기 가전제품(100), 상기 서버(300), 상기 단말(400) 등과 무선 신호를 송수신한다.
또한, 상기 통신부(220)는 상기 제어부(250)의 제어에 의해, 상기 복수의 가전제품(100)으로부터 전송되는 복수의 가전제품의 동작 상태에 대한 정보, 상기 단말(400)로부터 전송되는 제어 신호 등을 수신한다.
상기 저장부(230)는 상기 본체(210)의 일측에 형성한다.
또한, 상기 저장부(230)는 다양한 사용자 인터페이스(User Interface: UI), 그래픽 사용자 인터페이스(Graphic User Interface: GUI) 등을 저장한다.
또한, 상기 저장부(230)는 상기 IP 카메라 장치(200)가 동작하는데 필요한 데이터와 프로그램 등을 저장한다.
즉, 상기 저장부(230)는 상기 IP 카메라 장치(200)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), IP 카메라 장치(200)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한, 이러한 응용 프로그램 중 적어도 일부는 IP 카메라 장치(200)의 기본적인 기능을 위하여 출고 당시부터 IP 카메라 장치(200) 상에 존재할 수 있다. 한편, 응용 프로그램은 상기 저장부(230)에 저장되고, IP 카메라 장치(200)에 설치되어, 제어부(250)에 의하여 상기 IP 카메라 장치(200)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
또한, 상기 저장부(230)는 플래시 메모리 타입(Flash Memory Type), 하드 디스크 타입(Hard Disk Type), 멀티미디어 카드 마이크로 타입(Multimedia Card Micro Type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 자기 메모리, 자기 디스크, 광디스크, 램(Random Access Memory: RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory: ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 중 적어도 하나의 저장매체를 포함할 수 있다. 또한, IP 카메라 장치(200)는 인터넷(internet)상에서 저장부(230)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영하거나, 또는 상기 웹 스토리지와 관련되어 동작할 수도 있다.
또한, 상기 저장부(230)는 상기 제어부(250)의 제어에 의해 상기 수신된 복수의 가전제품(100)으로부터 전송되는 복수의 가전제품의 동작 상태에 대한 정보, 상기 단말(400)로부터 전송되는 제어 신호 등을 저장한다.
상기 IP 카메라(또는 네트워크 카메라/일반 카메라)(240)는 상기 본체(210)의 일측에 형성한다.
또한, 상기 IP 카메라(240)는 상기 본체(210)의 일측에 형성된 확장 연결 부재(미도시)에 배치된(또는 연결된/설치된) 상태일 수 있다.
이에 따라, 상기 제어부(250)의 제어에 의해 상기 확장 연결 부재가 길이 방향으로 시프트하여 상기 본체(210) 외부로 상기 확장 연결 부재가 늘어나는 경우, 상기 IP 카메라(240)는 상기 본체(210) 외부로 노출되어, 특정 영역에 근접해서 해당 특정 영역에 대한 영상 정보를 획득할 수 있다.
또한, 상기 제어부(250)의 제어에 의해 상기 확장 연결 부재가 길이 방향의 반대로 시프트하여 상기 본체(210) 외부에 위치해 있던 상기 확장 연결 부재가 다시 상기 본체(210) 내부로 진입하는 경우, 상기 IP 카메라(240)는 상기 본체(210)의 일면 상에 위치하거나 상기 본체(210) 내부로 삽입된 상태에서 특정 영역에 대한 영상 정보를 획득할 수도 있다.
또한, 상기 IP 카메라(240)는 상기 제어부(250)의 제어에 의해 이미지 센서(카메라 모듈 또는 카메라)에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 즉, 코덱(CODEC)에 따라 상기 이미지 센서에 의해 얻어지는 해당 화상 데이터들을 각 규격에 맞도록 인코딩/디코딩한다. 상기 처리된 화상 프레임(또는 영상 정보)은 상기 서버(300)에 전송된다.
이와 같이, 상기 IP 카메라(240)는 상기 IP 카메라(240)가 위치한 지역(또는 영역)에 대한 영상 정보를 획득(또는 촬영)하고, 상기 획득된 영상 정보(또는 영상/감시 영역과 관련한 영상) 상기 서버(300)에 전송한다.
상기 제어부(controller, 또는 MCU(microcontroller unit)(250)는 상기 IP 카메라 장치(200)의 전반적인 제어 기능을 실행한다.
또한, 상기 제어부(250)는 상기 저장부(230)에 저장된 프로그램 및 데이터를 이용하여 IP 카메라 장치(200)의 전반적인 제어 기능을 실행한다. 상기 제어부(250)는 RAM, ROM, CPU, GPU, 버스를 포함할 수 있으며, RAM, ROM, CPU, GPU 등은 버스를 통해 서로 연결될 수 있다. CPU는 상기 저장부(230)에 액세스하여, 상기 저장부(230)에 저장된 O/S를 이용하여 부팅을 수행할 수 있으며, 상기 저장부(230)에 저장된 각종 프로그램, 콘텐츠, 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
또한, 상기 제어부(250)는 복수의 가전제품(100)으로부터 전송되는 복수의 가전제품의 동작 상태에 대한 정보, 상기 단말(400)로부터 전송되는 제어 신호 등을 상기 통신부(220)를 통해 수신한다.
또한, 상기 단말(400)로부터 전송되는 제어 신호를 수신하는 경우 또는 미리 설정된 이벤트가 발생하는 경우, 상기 제어부(250)는 상기 제어 신호 또는 상기 이벤트에 대응하여 상기 IP 카메라 장치(200)가 위치한 임의의 장소 내의 특정 장소로 이동하도록 상기 본체(210)(또는 상기 본체(210)의 일측에 형성된 모터 및 복수의 바퀴)를 제어한다. 이때, 상기 제어 신호는 상기 특정 장소에 대한 위치 정보(또는 상기 임의의 장소 내에 위치하는 복수의 가전제품(또는 디바이스)(200) 중 특정 가전제품(100)에 대응하는 위치 정보) 등을 포함한다. 또한, 상기 이벤트는 사물형 인터넷(IOT)을 통해 연결된 복수의 가전제품(100) 중에서 특정 가전제품(100)의 동작 상태가 변경되는 경우(예를 들어 온/오프 상태 전환, 도어 열림/닫힘 등 포함), 미리 등록된 객체가 미리 설정된 시간 이상 상기 IP 카메라 장치(200)를 통해 감지되지 않는 경우(예를 들어 미리 등록된 노령의 가족 얼굴이 10시간 이상 감지되지 않는 경우 등 포함), 미리 설정된 데시벨 이상의 소리가 감지되는 경우(예를 들어 비명소리, 애완동물의 울음 소리 등 포함) 등을 포함한다.
또한, 상기 본체(210)가 상기 특정 장소로 이동한 경우, 상기 제어부(250)는 상기 IP 카메라(240)를 제어하여 상기 특정 장소에 대응하는 특정 영역에 대한 영상 정보를 획득한다. 이때, 상기 획득되는 영상 정보는 해당 특정 영역의 주변을 포함하는 영상 정보이거나 또는, 해당 특정 영역 중심으로 확대된 영상 정보일 수 있다.
또한, 상기 제어부(250)는 상기 획득된 영상 정보, 상기 IP 카메라 장치(200)에 대응하여 미리 등록된 단말(400)의 식별 정보 등을 상기 통신부(220)를 통해 상기 서버(300)에 전송한다. 여기서, 상기 단말(400)의 식별 정보는 MDN(Mobile Directory Number), 모바일 IP, 모바일 MAC, Sim(subscriber identity module: 가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.
또한, 상기 전송되는 영상 정보에 대해서 상기 단말(400)로부터 전송되는 추가 제어 신호(예를 들어 해당 특정 영역에 대한 확대/축소를 위한 정보, 다른 영역에 대한 영상 정보 요청 신호 등 포함)를 상기 통신부(220)를 통해 수신하는 경우, 상기 제어부(250)는 상기 수신된 추가 제어 신호에 대응하는 영상 정보를 상기 IP 카메라(240)를 통해 획득하고, 상기 획득된 추가 제어 신호에 대응하는 영상 정보를 상기 통신부(220)를 통해 상기 서버(300)를 경유하여 상기 단말(400)에 제공한다.
또한, 상기 제어부(250)는 상기 IP 카메라(240)를 통해 획득되는 영상 정보를 분석하여, 미리 등록된 노령의 가족 얼굴을 감지(또는 인식)한다. 이때, 상기 제어부(250)는 공지된 다양한 얼굴 인식 프로그램을 이용하여 상기 영상 정보 내에서 객체의 얼굴을 감지할 수 있다.
또한, 상기 제어부(250)는 상기 노령의 가족 얼굴을 마지막으로 감지한 이후부터 미리 설정된 시간(예를 들어 10시간)이 지날 때까지 추가로 해당 노령의 가족 얼굴이 실시간으로 획득되는 영상 정보 내에서 감지되지 않은 경우, 상기 본체(210)를 이동시켜가면서, 상기 IP 카메라(240)를 통해 영상 정보를 획득한다.
또한, 상기 제어부(250)는 상기 IP 카메라 장치(200)가 위치한 전체 영역 내의 이동 중에 획득되는 영상 정보에서 상기 노령의 가족 얼굴이 인식되는지 여부를 판단한다.
상기 판단 결과, 상기 IP 카메라 장치(200)가 이동 중에 획득되는 영상 정보에서 상기 노령의 가족 얼굴이 인식되는 경우, 상기 제어부(250)는 해당 가족 주변의 영상 정보를 획득하고, 상기 획득된 가족 주변의 영상 정보를 상기 통신부(220)를 통해 상기 서버(300)에 전송한다.
이때, 상기 노령의 가족이 일정 시간 이상 상기 IP 카메라 장치(200)에 의해 감지되지 않은 상태에서 상기 IP 카메라 장치(200)의 이동에 따라 상기 노령의 가족에 대한 영상 정보가 획득되는 경우, 상기 제어부(250)는 해당 가족의 상태를 원격지에 위치한 단말(400)의 사용자가 확인할 수 있도록 해당 단말(400)의 인증 여부에 상관없이 상기 노령의 가족 주변의 영상 정보를 원본 그대로 상기 서버(300)를 경유하여 상기 단말(400)에 제공할 수도 있다. 여기서, 상기 제어부(250)는 해당 노령의 가족 주변의 영상 정보가 응급 상황에 따른 영상 정보임을 나타내기 위한 특정 태그(또는 특정 식별자/고유 코드)를 해당 영상 정보와 함께 상기 서버(300)에 전송하여, 상기 서버(300)에서 해당 영상 정보를 수신할 단말(400)의 인증 여부 판단 및 해당 영상 정보 내에서의 객체 감지 여부 확인을 생략하고, 바로 해당 영상 정보를 상기 단말(400)에 전송할 수도 있다. 또한, 상기 서버(300)는 상기 특정 태그가 함께 전송되지 않은 영상 정보에 대해서는 앞서 설명한 해당 영상 정보를 수신할 단말(400)의 인증 여부 판단 및 해당 영상 정보 내에서의 객체 감지 여부 확인하는 과정을 수행한 후, 판단 및/또는 확인 결과에 따라 영상 정보 또는 수정된 영상 정보를 상기 단말(400)에 제공할 수 있다.
또한, 상기 판단 결과, 상기 IP 카메라 장치(200)가 이동 중에 획득되는 영상 정보에서 상기 노령의 가족 얼굴이 인식되지 않는 경우(또는 상기 IP 카메라 장치(200)가 위치한 장소 내에서 해당 노령의 가족이 존재하지 않은 것으로 판단되는 경우), 상기 제어부(250)는 해당 가족의 상태를 확인할 수 없는 응급 상태로 판단하고, 해당 가족이 특정 장소에 위치하지 않은 상태가 10시간이 지난 상태임을 나타내는 정보를 포함하는 응급 신호를 상기 서버(300)를 경유하여 해당 IP 카메라 장치(200)에 대응하여 미리 등록된 상기 단말(400)로 전송한다.
이에 따라, 상기 단말(400)은 해당 가족의 상태 정보를 확인하고, 그에 따른 조치를 취할 수 있다.
또한, 상기 제어부(250)는 상기 IP 카메라(240)를 통해 획득되는 영상 정보를 분석하여, 개나 고양이 등의 애완 동물을 인식한다.
또한, 상기 인식된 애완동물이 상기 IP 카메라 장치(200)로부터 미리 설정된 거리 이내(예를 들어 1미터)로 접근하는 경우, 상기 제어부(250)는 해당 IP 카메라 장치(200)의 훼손이나 고장을 방지하기 위해서, 미리 설정된 이종이 동물 소리를 스피커(미도시)를 통해 출력한다.
또한, 상기 제어부(250)에서 상기 애완동물 등이 상기 IP 카메라 장치(200)로 인접하는 등의 위험을 감지하는 경우, 상기 제어부(250)는 상기 IP 카메라(240)가 상기 확장 연결 부재에 의해 상기 본체(210) 밖으로 노출되어 있으면, 해당 IP 카메라(240)의 훼손 등을 방지하기 위해서, 상기 IP 카메라(240)를 상기 본체(210) 내부로(또는 상기 본체(210)의 일측에 노출되도록) 이동하도록 제어한다.
또한, 상기 애완동물의 울음소리, 특정 소리가 감지되는 경우, 상기 제어부(250)는 해당 소리가 감지되는 방향으로 상기 IP 카메라 장치(200)를 이동시키도록 제어하고, 해당 장소로 이동하면서 상기 IP 카메라(240)를 통해 획득되는 영상 정보를 상기 통신부(220)를 통해 상기 서버(300)에 전송할 수도 있다.
또한, 상기 IP 카메라 장치(200)는 해당 IP 카메라 장치(200)에 인접한 임의 객체의 움직임을 감지하기 위한 동작 인식 센서(미도시), 소리 등을 감지하기 위한 센서부(미도시), 가스 누출 여부를 감지하기 위한 가스 감지 센서(미도시), 화재 발생 여부를 감지하기 위한 화재 감지 센서(미도시), 미세먼지 농도를 측정하여 제공하기 위한 미세먼지 측정 센서(미도시) 등을 추가로 포함할 수 있다.
상기 서버(300)는 상기 가전제품(100), 상기 IP 카메라 장치(200), 상기 단말(400) 등과 통신한다.
또한, 상기 서버(300)는 상기 단말(400)을 구성하는 단말 통신부(410), 단말 저장부(420), 단말 표시부(430), 단말 음성 출력부(440) 및 단말 제어부(450)에 대응하는 각 구성 요소를 포함하여 구성할 수 있다.
또한, 상기 서버(300)는 상기 단말(400) 등의 사용자에 대한 회원 가입 절차 등을 수행한다.
또한, 상기 서버(300)는 상기 단말(400) 등의 사용자와 관련한 개인 정보를 등록한다. 이때, 상기 서버(300)는 해당 개인 정보 등을 DB 서버(미도시)에 등록(또는 관리)할 수 있다.
또한, 상기 서버(300)는 상기 단말(400) 등의 사용자에 대한 회원 관리 기능을 수행한다.
또한, 상기 서버(300)는 영상 정보 등을 제공하는 전용 앱 및/또는 웹 사이트를 상기 IP 카메라 장치(200), 상기 단말(400) 등에 제공한다.
또한, 상기 서버(300)는 상기 단말(400)로부터 전송되는 제어 신호를 수신한다.
또한, 상기 서버(300)는 상기 단말(400)과 관련한 IP 카메라 장치(200)로 상기 제어 신호를 전송(또는 전달)한다.
또한, 상기 서버(300)는 상기 IP 카메라 장치(200)로부터 전송되는 상기 영상 정보, 상기 단말(400)의 식별 정보 등을 수신한다.
또한, 상기 서버(300)는 상기 수신된 단말(400)의 식별 정보에 대응하는 단말(400)이 인증된 상태인지 여부를 판단(또는 확인)한다.
즉, 상기 서버(300)는 상기 단말(400)의 식별 정보에 대응하는 단말(400)의 사용자가 개인 정보 등이 포함된 상태일 수 있는 영상 정보를 확인할 수 있도록 인증된 상태인지를 판단하기 위해서, 상기 단말(400)의 식별 정보에 대응하는 단말(400)이 인증된 상태인지 여부를 판단(또는 확인)한다.
이때, 상기 서버(300)에서 상기 IP 카메라 장치(200)로부터 전송되는 상기 영상 정보만을 수신하는 경우, 상기 서버(300)는 해당 서버(300)에 미리 등록된 IP 카메라 장치별 단말(400)의 식별 정보 중에서 상기 영상 정보를 전송한 IP 카메라 장치(200)에 대응하는 단말(400)의 식별 정보를 확인하고, 상기 확인된 단말(400)의 식별 정보에 대응하는 단말(400)이 인증된 상태인지 여부를 판단할 수도 있다.
상기 판단 결과, 상기 단말(400)이 인증되지 않은 상태인 경우, 상기 서버(300)는 상기 수신된 영상 정보 내에서 사용자에 대응하는 객체(또는 객체의 움직임)가 감지되는지 여부(또는 상기 영상 정보 내에 상기 객체가 포함된 상태인지 여부)를 확인한다. 여기서, 상기 객체는 사람만을 포함하며, 다른 장치나 애완동물 등은 제외한다.
상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되지 않은 경우, 상기 서버(300)는 상기 수신된 영상 정보를 상기 단말(400)의 식별 정보에 대응하는 해당 단말(400)에 전송(또는 제공)한다.
이때, 상기 단말(400)이 인증되지 않은 상태에서, 상기 서버(300)에서 상기 IP 카메라 장치(200)로부터 실시간으로 전송되는 영상 정보를 상기 단말(400)에 전송하는 도중에, 해당 영상 정보 내에서 사용자에 대응하는 객체가 감지되는 경우, 상기 서버(300)는 상기 수신된 영상 정보에 포함된 사용자에 대응하는 객체를 마스킹 처리(또는 블라인드 처리)하거나 또는, 해당 객체를 삭제하고 상기 삭제된 객체의 위치에 미리 설정된 아바타/이모티콘을 추가하거나 또는, 해당 객체 위에 상기 아바타/이모티콘을 오버레이 처리하여 수정된 영상 정보를 생성하고, 상기 생성된 수정된 영상 정보를 상기 단말(400)의 식별 정보에 대응하는 해당 단말(400)에 전송할 수도 있다. 여기서, 상기 마스킹(masking) 처리는 타인이 온전한 데이터를 봐서는(또는 확인해서는) 안될 때, 해당 온전한 데이터를 쉽게 노출되지 않게 하기 위해서 '*' 등과 같은 특수문자를 데이터에 포함하여 노출시키거나, 해당 온전한 데이터가 위치한 영역을 검은색으로 채워 노출시키는 등의 보안 처리 방식을 나타낸다.
또한, 상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되는 경우, 상기 서버(300)는 상기 수신된 영상 정보에 포함된 사용자에 대응하는 객체(또는 해당 객체가 포함되는 영역)를 마스킹 처리하거나 또는, 해당 객체(또는 해당 객체가 포함되는 영역)를 삭제하고 상기 삭제된 객체의 위치에 미리 설정된 아바타(또는 이모티콘)를 추가하거나(또는 해당 객체를 삭제하고 해당 객체의 위치에 상기 아바타를 추가하거나) 또는, 상기 객체 위에 상기 아바타를 오버레이 처리하여, 수정된 영상 정보를 생성한다. 이때, 상기 객체를 대체하여 상기 아바타를 추가하거나 상기 객체 위에 상기 아바타(또는 이모티콘)를 오버레이 처리하는 경우, 상기 서버(300)는 제 3 자가 상기 객체를 확인하지 못하게 하기 위해서 해당 객체(또는 객체에 대응하는 사람의 얼굴)를 가리도록 해당 아바타(또는 이모티콘)의 크기를 조정할 수 있다.
또한, 상기 서버(300)는 상기 생성된 수정된 영상 정보를 상기 단말(400)의 식별 정보에 대응하는 해당 단말(400)에 전송(또는 제공)한다.
이와 같이, 상기 단말(400)이 인증되지 않은 상태에서 영상 정보 내에 사람이 포함된 경우, 상기 서버(300)는 개인 정보 보호, 사생활 노출 방지 등을 위해서 사람을 확인할 수 없도록 영상 정보를 처리(또는 수정)(예를 들어 마스킹 처리, 대체 처리, 오버레이 처리 등 포함)한 후, 처리된(또는 수정된) 영상 정보를 해당 단말(400)에 전송할 수 있다.
또한, 상기 판단 결과, 상기 단말(400)이 인증된 상태인 경우, 상기 서버(300)는 상기 수신된 영상 정보를 상기 단말(400)의 식별 정보에 대응하는 해당 단말(400)에 전송(또는 제공)한다.
이와 같이, 상기 서버(300)는 상기 수신된 영상 정보 내에서의 사람 포함 여부 및/또는 상기 영상 정보를 제공받는 단말(400)의 사전 인증 여부에 따라, 상기 수신된 영상 정보를 그대로 해당 단말(400)에 제공하거나 또는, 상기 수신된 영상 정보를 수정한 영상 정보를 해당 단말(400)에 제공할 수 있다.
또한, 인증되지 않은 단말(400)에서 해당 수정된 영상 정보를 제공받는 와중에 실시간으로 인증을 상기 서버(300)에 요청하는 경우, 상기 서버(300)는 해당 단말(400)과 연동하여, 인증 절차를 수행할 수 있다.
또한, 인증이 정상적으로 완료되는 경우, 상기 서버(300)는 상기 수정된 영상 정보 대신에 상기 IP 카메라 장치(200)로부터 제공받는 영상 정보(또는 원본 영상 정보)를 그대로 상기 단말(400)에 제공할 수도 있다.
상기 단말(400)은 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 폴더블 단말기(Foldable Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), PMP(Portable Multimedia Player) 단말기, 텔레매틱스(Telematics) 단말기, 내비게이션(Navigation) 단말기, 개인용 컴퓨터(Personal Computer), 노트북 컴퓨터, 슬레이트 PC(Slate PC), 태블릿 PC(Tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(Wearable Device, 예를 들어, 워치형 단말기(Smartwatch), 글래스형 단말기(Smart Glass), HMD(Head Mounted Display) 등 포함), 와이브로(Wibro) 단말기, IPTV(Internet Protocol Television) 단말기, 스마트 TV, 디지털방송용 단말기, AVN(Audio Video Navigation) 단말기, A/V(Audio/Video) 시스템, 플렉시블 단말기(Flexible Terminal), 디지털 사이니지 장치 등과 같은 다양한 단말기에 적용될 수 있다.
도 3에 도시한 바와 같이, 상기 단말(400)은 단말 통신부(410), 단말 저장부(420), 단말 표시부(430), 단말 음성 출력부(440) 및 단말 제어부(450)로 구성된다. 도 3에 도시된 단말(400)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 3에 도시된 구성 요소보다 많은 구성 요소에 의해 단말(400)이 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 단말(400)이 구현될 수도 있다.
상기 단말 통신부(410)는 유/무선 통신망을 통해 내부의 임의의 구성 요소 또는 외부의 임의의 적어도 하나의 단말기와 통신 연결한다. 이때, 상기 외부의 임의의 단말기는 상기 가전제품(100), 상기 IP 카메라 장치(200), 상기 서버(300) 등을 포함할 수 있다. 여기서, 무선 인터넷 기술로는 무선랜(WLAN), DLNA, 와이브로(Wibro), 와이맥스(Wimax), HSDPA, HSUPA, IEEE 802.16, 롱 텀 에볼루션(LTE), LTE-A, 광대역 무선 이동 통신 서비스(WMBS) 등이 있으며, 상기 단말 통신부(410)는 상기에서 나열되지 않은 인터넷 기술까지 포함한 범위에서 적어도 하나의 무선 인터넷 기술에 따라 데이터를 송수신하게 된다. 또한, 근거리 통신 기술로는 블루투스, RFID, 적외선 통신(IrDA), UWB, 지그비, 인접 자장 통신(NFC), 초음파 통신(USC), 가시광 통신(VLC), 와이 파이, 와이 파이 다이렉트 등이 포함될 수 있다. 또한, 유선 통신 기술로는 전력선 통신(PLC), USB 통신, 이더넷, 시리얼 통신, 광/동축 케이블 등이 포함될 수 있다.
또한, 상기 단말 통신부(410)는 유니버설 시리얼 버스(USB)를 통해 임의의 단말과 정보를 상호 전송할 수 있다.
또한, 상기 단말 통신부(410)는 이동통신을 위한 기술표준들 또는 통신방식(예를 들어, GSM, CDMA, CDMA2000, EV-DO, WCDMA, HSDPA, HSUPA, LTE, LTE-A 등)에 따라 구축된 이동 통신망 상에서 기지국, 상기 가전제품(100), 상기 IP 카메라 장치(200), 상기 서버(300) 등과 무선 신호를 송수신한다.
또한, 상기 단말 통신부(410)는 상기 단말 제어부(450)의 제어에 의해, 사용자 입력(또는 사용자 선택/제어)에 대응하는 제어 신호를 상기 서버(300)를 경유하여 상기 IP 카메라 장치(200)에 전송한다.
상기 단말 저장부(420)는 다양한 사용자 인터페이스(UI), 그래픽 사용자 인터페이스(GUI) 등을 저장한다.
또한, 상기 단말 저장부(420)는 상기 단말(400)이 동작하는데 필요한 데이터와 프로그램 등을 저장한다.
즉, 상기 단말 저장부(420)는 상기 단말(400)에서 구동되는 다수의 응용 프로그램, 단말(400)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한, 이러한 응용 프로그램 중 적어도 일부는 단말(400)의 기본적인 기능을 위하여 출고 당시부터 단말(400) 상에 존재할 수 있다. 한편, 응용 프로그램은 상기 단말 저장부(420)에 저장되고, 단말(400)에 설치되어, 단말 제어부(450)에 의하여 상기 단말(400)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
또한, 상기 단말 저장부(420)는 플래시 메모리 타입, 하드 디스크 타입, 멀티미디어 카드 마이크로 타입, 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 자기 메모리, 자기 디스크, 광디스크, 램(RAM), SRAM, 롬(ROM), EEPROM, PROM 중 적어도 하나의 저장매체를 포함할 수 있다. 또한, 단말(400)은 인터넷상에서 단말 저장부(420)의 저장 기능을 수행하는 웹 스토리지를 운영하거나, 또는 상기 웹 스토리지와 관련되어 동작할 수도 있다.
또한, 상기 단말 저장부(420)는 상기 단말 제어부(450)의 제어에 의해 상기 제어 신호 등을 저장한다.
상기 단말 표시부(또는 디스플레이부)(430)는 상기 단말 제어부(450)의 제어에 의해 상기 단말 저장부(420)에 저장된 사용자 인터페이스 및/또는 그래픽 사용자 인터페이스를 이용하여 다양한 메뉴 화면 등과 같은 다양한 콘텐츠를 표시할 수 있다. 여기서, 상기 단말 표시부(430)에 표시되는 콘텐츠는 다양한 텍스트 또는 이미지 데이터(각종 정보 데이터 포함)와 아이콘, 리스트 메뉴, 콤보 박스 등의 데이터를 포함하는 메뉴 화면 등을 포함한다. 또한, 상기 단말 표시부(430)는 터치 스크린 일 수 있다.
또한, 상기 단말 표시부(430)는 액정 디스플레이(Liquid Crystal Display: LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display: TFT LCD), 유기 발광 다이오드(Organic Light-Emitting Diode: OLED), 플렉시블 디스플레이(Flexible Display), 3차원 디스플레이(3D Display), 전자잉크 디스플레이(e-ink display), LED(Light Emitting Diode) 중에서 적어도 하나를 포함할 수 있다.
또한, 상기 단말 표시부(430)는 상기 단말 제어부(450)의 제어에 의해 상기 제어 신호 등을 표시한다.
상기 단말 음성 출력부(440)는 상기 단말 제어부(450)에 의해 소정 신호 처리된 신호에 포함된 음성 정보를 출력한다. 여기서, 상기 단말 음성 출력부(440)에는 리시버(receiver), 스피커(speaker), 버저(buzzer) 등이 포함될 수 있다.
또한, 상기 단말 음성 출력부(440)는 상기 단말 제어부(450)에 의해 생성된 안내 음성을 출력한다.
또한, 상기 단말 음성 출력부(440)는 상기 제어부(450)의 제어에 의해, 상기 제어 신호 등에 대응하는 음성 정보(또는 음향 효과)를 출력한다.
상기 단말 제어부(450)는 상기 단말(400)의 전반적인 제어 기능을 실행한다.
또한, 상기 단말 제어부(450)는 상기 단말 저장부(420)에 저장된 프로그램 및 데이터를 이용하여 단말(400)의 전반적인 제어 기능을 실행한다. 상기 단말 제어부(450)는 RAM, ROM, CPU, GPU, 버스를 포함할 수 있으며, RAM, ROM, CPU, GPU 등은 버스를 통해 서로 연결될 수 있다. CPU는 상기 단말 저장부(420)에 액세스하여, 상기 단말 저장부(420)에 저장된 O/S를 이용하여 부팅을 수행할 수 있으며, 상기 단말 저장부(420)에 저장된 각종 프로그램, 콘텐츠, 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
또한, 상기 단말 제어부(450)는 상기 서버(300)와의 연동에 의해, 상기 서버(300)에서 제공하는 전용 앱 및/또는 웹 사이트를 통해 해당 단말(400)과 대응하는 IP 카메라 장치(200)로부터 제공되는 영상 정보를 제공받기 위한 사용자로 회원 가입하며, 개인 정보 등을 상기 서버(300)에 등록한다.
또한, 상기 단말 제어부(450)는 해당 단말(400)의 사용자가 가입한 SNS 계정 정보를 이용하여 상기 서버(300)에 사용자로 회원 가입할 수도 있다. 여기서, 상기 SNS 계정은 페이스북, 트위터, 카카오 스토리 등과 관련한 정보일 수 있다.
또한, 회원 가입 절차 수행 시, 상기 단말 제어부(450)는 본인 인증 수단(예를 들어 이동 전화, 신용카드, 아이핀 등 포함)을 통한 인증 기능을 완료해야 상기 서버(300)에 대한 회원 가입 절차를 정상적으로 완료할 수 있다.
이와 같이, 상기 서버(300)와 연동하여 회원 가입 절차를 정상적으로 완료하거나 본인 인증 과정을 정상적으로 완료한 경우에 한해서, 상기 단말 제어부(450)는 상기 서버(300)를 경유하여 상기 IP 카메라 장치(200)로부터 전송되는 원본 형태의 영상 정보(또는 원본 영상 정보)를 수신할 수 있다.
또한, 회원 가입이 완료된 후, 상기 단말 제어부(450)는 상기 서버(300)에서 제공하는 서비스를 이용하기 위해서, 상기 서버(300)로부터 제공되는 전용 앱(또는 애플리케이션/응용 프로그램/특정 앱)을 해당 단말(400)에 설치한다. 이때, 상기 전용 앱은 상기 IP 카메라 장치(200)로부터 제공되는 영상 정보를 수신 및 표시하고, 해당 IP 카메라 장치(200)의 동작을 제어하기 위한 제어 정보 전송 기능 등을 수행하기 위한 앱일 수 있다.
또한, 상기 단말 제어부(450)는 해당 단말(400)과 관련한 IP 카메라 장치(200)의 동작을 제어하기 위한 정보, 특정 영역에 대한 영상 정보를 요청하기 위한 특정 영역에 대한 위치 정보 등을 포함하는 제어 신호를 생성한다.
또한, 상기 단말 제어부(450)는 상기 생성된 제어 신호, 상기 단말(400)의 식별 정보 등을 상기 단말 통신부(410)를 통해 상기 서버(300)에 전송한다.
또한, 상기 서버(300)에서의 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되지 않은 경우, 상기 단말 제어부(450)는 상기 전송된 제어 신호 또는 상기 이벤트에 대응하여 상기 서버(300)로부터 전송되는 상기 영상 정보를 상기 단말 통신부(410)를 통해 수신한다.
또한, 상기 단말 제어부(450)는 상기 수신된 영상 정보를 상기 단말 표시부(430) 및/또는 상기 단말 음성 출력부(440)를 통해 출력한다.
또한, 상기 서버(300)에서의 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되는 경우, 상기 단말 제어부(450)는 상기 전송된 제어 신호 또는 상기 이벤트에 대응하여 상기 서버(300)로부터 전송되는 상기 수정된 영상 정보를 상기 단말 통신부(410)를 통해 수신한다. 이때, 상기 수정된 영상 정보는 상기 IP 카메라 장치(200)에서 상기 서버(300)에 전송한 영상 정보에 대해서 해당 서버(300)에서 상기 영상 정보에 포함된 사용자에 대응하는 객체(또는 해당 객체가 포함되는 영역)를 마스킹 처리하거나 또는, 해당 객체(또는 해당 객체가 포함되는 영역)를 삭제하고 상기 삭제된 객체의 위치에 미리 설정된 아바타(또는 이모티콘)를 추가하거나(또는 해당 객체를 삭제하고 해당 객체의 위치에 상기 아바타를 추가하거나) 또는, 상기 객체 위에 상기 아바타를 오버레이 처리한 영상 정보일 수 있다.
또한, 상기 단말 제어부(450)는 상기 수신된 수정된 영상 정보를 상기 단말 표시부(430) 및/또는 상기 단말 음성 출력부(440)를 통해 출력한다.
이와 같이, 상기 단말(400)이 인증되지 않아 원본 영상 정보 대신에 상기 수정된 영상 정보를 수신하는 경우, 상기 단말 제어부(450)는 상기 서버(300)와 연동하여, 인증 절차를 수행하고, 인증 완료 후 상기 서버(300)로부터 제공되는 수정되지 않은 상태의 영상 정보(또는 원본 영상 정보)를 상기 단말 표시부(430) 및/또는 상기 단말 음성 출력부(440)를 통해 출력할 수도 있다.
또한, 상기 서버(300)에서의 판단 결과, 상기 단말(400)이 인증된 상태인 경우, 상기 단말 제어부(450)는 상기 전송된 제어 신호 또는 상기 이벤트에 대응하여 상기 서버(300)로부터 전송되는 상기 영상 정보를 상기 단말 통신부(410)를 통해 수신한다.
또한, 상기 단말 제어부(450)는 상기 수신된 영상 정보를 상기 단말 표시부(430) 및/또는 상기 단말 음성 출력부(440)를 통해 출력한다.
또한, 상기 단말 제어부(450)는 상기 서버(300)를 경유하여 상기 IP 카메라 장치(200)에 추가 제어 신호(예를 들어 확대/축소/줌인/줌아웃 등을 위한 제어 정보, IP 카메라(240)의 팬/틸트(pan/tilt)를 제어하기 위한 제어 정보 등 포함)를 상기 단말 통신부(410)를 통해 전송하고, 상기 추가 제어 신호에 응답하여 상기 IP 카메라 장치(200)로부터 전송되는 추가 영상 정보(예를 들어 확대된/축소된/줌인된/줌아웃된 영상 정보, 팬/틸트가 조정된 영상 정보 등 포함)를 상기 단말 표시부(430) 및/또는 상기 단말 음성 출력부(440)를 통해 출력할 수도 있다.
본 발명의 실시예에서는 상기 단말(400)에서 전용 앱 형태로 상기 IP 카메라 장치(200)로부터 제공되는 영상 정보를 출력하는 것을 설명하고 있으나, 이에 한정되는 것은 아니며, 상기 전용 앱 이외에도 상기 서버(300)에서 제공하는 웹 사이트 등을 통해 상기 IP 카메라 장치(200)로부터 제공되는 영상 정보를 출력할 수도 있다.
이와 같이, 이동 수단이 구비된 IP 카메라가 임의의 장소 내에 구비된 복수의 디바이스/가전제품과 사물형 인터넷을 통해 연결되며, 원격에 위치한 단말의 사용자 제어 또는 미리 설정된 이벤트 발생 시, 상기 임의의 장소 내의 특정 영역에 대한 영상 정보를 획득하고, 상기 획득된 특정 영역에 대한 영상 정보를 상기 단말에 제공할 수 있다.
이하에서는, 본 발명에 따른 IoT 기반의 IP 카메라 시스템의 제어 방법을 도 1 내지 도 4를 참조하여 상세히 설명한다.
도 4는 본 발명의 실시예에 따른 IoT 기반의 IP 카메라 시스템의 제어 방법을 나타낸 흐름도이다.
먼저, IP 카메라 장치(200)는 단말(400)로부터 전송되는 제어 신호를 수신하는 경우 또는 미리 설정된 이벤트가 발생하는 경우, 상기 제어 신호 또는 상기 이벤트에 대응하여 상기 IP 카메라 장치(200)가 위치한 임의의 장소 내의 특정 장소로 이동하여, 해당 특정 장소에 대응하는 특정 영역에 대한 영상 정보를 획득한다. 이때, 상기 제어 신호는 상기 특정 장소에 대한 위치 정보(또는 상기 임의의 장소 내에 위치하는 복수의 가전제품(또는 디바이스)(200) 중 특정 가전제품(100)에 대응하는 위치 정보) 등을 포함한다. 또한, 상기 이벤트는 사물형 인터넷(IOT)을 통해 연결된 복수의 가전제품(100) 중에서 특정 가전제품(100)의 동작 상태가 변경되는 경우(예를 들어 온/오프 상태 전환, 도어 열림/닫힘 등 포함), 미리 등록된 객체가 미리 설정된 시간 이상 상기 IP 카메라 장치(200)를 통해 감지되지 않는 경우(예를 들어 미리 등록된 노령의 가족 얼굴이 10시간 이상 감지되지 않는 경우 등 포함), 미리 설정된 데시벨 이상의 소리가 감지되는 경우(예를 들어 비명소리, 애완동물의 울음 소리 등 포함) 등을 포함한다.
또한, 상기 IP 카메라 장치(200)는 상기 획득된 영상 정보, 상기 IP 카메라 장치(200)에 대응하여 미리 등록된 단말(400)의 식별 정보 등을 서버(300)에 전송한다. 여기서, 상기 단말(400)의 식별 정보는 MDN, 모바일 IP, 모바일 MAC, Sim(가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.
일 예로, 제 1 IP 카메라 장치(200)에서 제 1 단말(400)로부터 전송되는 제 1 제어 신호를 수신할 때, 상기 제 1 IP 카메라 장치는 상기 제 1 제어 신호를 근거로 영아가 누워있는 거실 침대 위치로 이동하고, 해당 거실 침대 주변에 대한 제 1 영상 정보를 실시간으로 획득(또는 촬영)한다. 또한, 상기 제 1 IP 카메라 장치는 상기 획득된 제 1 영상 정보, 상기 제 1 단말의 식별 정보 등을 상기 서버(300)로 전송한다.
다른 일 예로, 주방에 위치한 가전제품인 인덕션(300)이 오프 상태에서 온 상태로 전환될 때, 제 2 IP 카메라 장치(200)는 해당 인덕션이 위치한 주방으로 이동하고, 해당 인덕션 주변에 대한 제 2 영상 정보를 실시간으로 획득한다. 또한, 상기 제 2 IP 카메라 장치는 상기 획득된 제 2 영상 정보를 상기 서버(300)로 전송한다.
또 다른 일 예로, 노령의 할아버지가 거주 중인 주택 내에서 제 3 IP 카메라 장치(200)를 통해 해당 할아버지가 미리 설정된 10시간 이상 감지되지 않은 상태일 때, 상기 제 3 IP 카메라 장치는 상기 주택 내를 이동하며, 해당 주택 내의 여러 장소별로 제 3 영상 정보를 실시간으로 획득한다. 또한, 상기 제 3 IP 카메라 장치는 상기 획득된 제 3 영상 정보를 상기 서버(300)로 전송한다(S410).
이후, 상기 서버(300)는 상기 IP 카메라 장치(200)로부터 전송되는 상기 영상 정보, 상기 단말(400)의 식별 정보 등을 수신한다.
또한, 상기 서버(300)는 상기 수신된 단말(400)의 식별 정보에 대응하는 단말(400)이 인증된 상태인지 여부를 판단(또는 확인)한다.
즉, 상기 서버(300)는 상기 단말(400)의 식별 정보에 대응하는 단말(400)의 사용자가 개인 정보 등이 포함된 상태일 수 있는 영상 정보를 확인할 수 있도록 인증된 상태인지를 판단하기 위해서, 상기 단말(400)의 식별 정보에 대응하는 단말(400)이 인증된 상태인지 여부를 판단(또는 확인)한다.
이때, 상기 서버(300)에서 상기 IP 카메라 장치(200)로부터 전송되는 상기 영상 정보만을 수신하는 경우, 상기 서버(300)는 해당 서버(300)에 미리 등록된 IP 카메라 장치별 단말(400)의 식별 정보 중에서 상기 영상 정보를 전송한 IP 카메라 장치(200)에 대응하는 단말(400)의 식별 정보를 확인하고, 상기 확인된 단말(400)의 식별 정보에 대응하는 단말(400)이 인증된 상태인지 여부를 판단할 수도 있다.
일 예로, 상기 서버(300)는 상기 제 1 IP 카메라 장치로부터 전송되는 제 1 영상 정보, 상기 제 1 단말의 식별 정보 등을 수신하고, 상기 수신된 제 1 단말의 식별 정보에 대응하는 제 1 단말이 인증된 상태인지 여부를 판단한다.
다른 일 예로, 상기 서버(300)는 상기 제 2 IP 카메라 장치로부터 전송되는 제 2 영상 정보 등을 수신하고, 상기 제 2 영상 정보를 전송한 제 2 IP 카메라 장치에 대응하여 해당 서버(300)에 미리 등록된 제 2 단말(400)의 식별 정보를 확인하고, 상기 확인된 제 2 단말의 식별 정보에 대응하는 제 2 단말이 인증된 상태인지 여부를 판단한다.
또 다른 일 예로, 상기 서버(300)는 상기 제 3 IP 카메라 장치로부터 전송되는 제 3 영상 정보 등을 수신하고, 상기 제 3 영상 정보를 전송한 제 3 IP 카메라 장치에 대응하여 해당 서버(300)에 미리 등록된 제 3 단말(400)의 식별 정보를 확인하고, 상기 확인된 제 3 단말의 식별 정보에 대응하는 제 3 단말이 인증된 상태인지 여부를 판단한다(S420).
상기 판단 결과, 상기 단말(400)이 인증되지 않은 상태인 경우, 상기 서버(300)는 상기 수신된 영상 정보 내에서 사용자에 대응하는 객체(또는 객체의 움직임)가 감지되는지 여부를 확인한다. 여기서, 상기 객체는 사람만을 포함하며, 다른 장치나 애완 동물 등은 제외한다.
일 예로, 상기 판단 결과, 상기 제 1 단말이 인증되지 않은 상태일 때, 상기 서버(300)는 상기 제 1 영상 정보 내에서 사용자에 대응하는 객체가 감지되는지 여부를 확인한다(S430).
상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되지 않은 경우, 상기 서버(300)는 상기 수신된 영상 정보를 상기 단말(400)의 식별 정보에 대응하는 해당 단말(400)에 전송(또는 제공)한다.
일 예로, 상기 확인 결과, 상기 제 1 영상 정보 내에서 사용자에 대응하는 객체가 감지되지 않을 때, 상기 서버(300)는 상기 수신된 제 1 영상 정보를 상기 제 1 단말의 식별 정보에 대응하는 해당 제 1 단말에 전송한다(S440).
이후, 상기 단말(400)은 상기 전송된 제어 신호 또는 상기 이벤트에 대응하여 상기 서버(300)로부터 전송되는 상기 영상 정보를 수신한다.
또한, 상기 단말(400)은 상기 수신된 영상 정보를 출력한다.
일 예로, 상기 제 1 단말은 앞서 전송된 제 1 제어 신호에 응답하여 상기 서버(300)를 경유하여 상기 제 1 IP 카메라로부터 전송되는 제 1 영상 정보를 수신하고, 상기 수신된 제 1 영상 정보를 출력한다(S450).
또한, 상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되는 경우, 상기 서버(300)는 상기 수신된 영상 정보에 포함된 사용자에 대응하는 객체(또는 해당 객체가 포함되는 영역)를 마스킹 처리하거나 또는, 해당 객체(또는 해당 객체가 포함되는 영역)를 삭제하고 상기 삭제된 객체의 위치에 미리 설정된 아바타(또는 이모티콘)를 추가하거나(또는 해당 객체를 삭제하고 해당 객체의 위치에 상기 아바타를 추가하거나) 또는, 상기 객체 위에 상기 아바타를 오버레이 처리하여, 수정된 영상 정보를 생성한다. 이때, 상기 객체를 대체하여 상기 아바타를 추가하거나 상기 객체 위에 상기 아바타(또는 이모티콘)를 오버레이 처리하는 경우, 상기 서버(300)는 제 3 자가 상기 객체를 확인하지 못하게 하기 위해서 해당 객체(또는 객체에 대응하는 사람의 얼굴)를 가리도록 해당 아바타(또는 이모티콘)의 크기를 조정할 수 있다.
또한, 상기 서버(300)는 상기 생성된 수정된 영상 정보를 상기 단말(400)의 식별 정보에 대응하는 해당 단말(400)에 전송(또는 제공)한다.
이와 같이, 상기 단말(400)이 인증되지 않은 상태에서 영상 정보 내에 사람이 포함된 경우, 상기 서버(300)는 개인 정보 보호, 사생활 노출 방지 등을 위해서 사람을 확인할 수 없도록 영상 정보를 처리(또는 수정)(예를 들어 마스킹 처리, 대체 처리, 오버레이 처리 등 포함)한 후, 처리된(또는 수정된) 영상 정보를 해당 단말(400)에 전송할 수 있다.
일 예로, 상기 확인 결과, 상기 제 1 영상 정보 내에서 사용자에 대응하는 객체가 감지될 때, 상기 서버(300)는 상기 수신된 제 1 영상 정보에 포함된 객체 위에 미리 설정된 제 1 아바타의 크기를 조정하여 오버레이 상태로 삽입하여, 수정된 제 1 영상 정보를 생성한다.
또한, 상기 서버(300)는 상기 생성된 수정된 제 1 영상 정보를 상기 제 1 단말의 식별 정보에 대응하는 해당 제 1 단말에 전송한다(S460).
이후, 상기 단말(400)은 상기 전송된 제어 신호 또는 상기 이벤트에 대응하여 상기 서버(300)로부터 전송되는 상기 수정된 영상 정보를 수신한다.
또한, 상기 단말(400)은 상기 수신된 수정된 영상 정보를 출력한다.
일 예로, 상기 제 1 단말은 앞서 전송된 제 1 제어 신호에 응답하여 상기 서버(300)로부터 전송되는 상기 수정된 제 1 영상 정보를 수신하고, 상기 수신된 수정된 제 1 영상 정보를 출력한다(S470).
또한, 상기 판단 결과, 상기 단말(400)이 인증된 상태인 경우, 상기 서버(300)는 상기 수신된 영상 정보를 상기 단말(400)의 식별 정보에 대응하는 해당 단말(400)에 전송(또는 제공)한다.
일 예로, 상기 판단 결과, 상기 제 2 단말이 인증된 상태일 때, 상기 서버(300)는 상기 제 2 영상 정보를 상기 제 2 단말의 식별 정보에 대응하는 해당 제 2 단말에 전송한다(S480).
이후, 상기 단말(400)은 상기 전송된 제어 신호 또는 상기 이벤트에 대응하여 상기 서버(300)로부터 전송되는 상기 영상 정보를 수신한다.
또한, 상기 단말(400)은 상기 수신된 영상 정보를 출력한다.
일 예로, 상기 제 2 단말은 상기 주방에 위치한 가전제품인 인덕션이 오프 상태에서 온 상태로 전환됨에 따라 상기 서버(300)를 경유하여 상기 제 2 IP 카메라로부터 전송되는 제 2 영상 정보를 수신하고, 상기 수신된 제 2 영상 정보를 출력한다(S490).
본 발명의 실시예는 앞서 설명된 바와 같이, 이동 수단이 구비된 IP 카메라가 임의의 장소 내에 구비된 복수의 디바이스/가전제품과 사물형 인터넷을 통해 연결되며, 원격에 위치한 단말의 사용자 제어 또는 미리 설정된 이벤트 발생 시, 상기 임의의 장소 내의 특정 영역에 대한 영상 정보를 획득하고, 상기 획득된 특정 영역에 대한 영상 정보를 상기 단말에 제공하여, 원격지에 위치한 사용자가 관심 장소에 대한 다양한 영상 정보를 확인할 수 있어 보안 기능을 강화하고, 사용자의 만족도를 높일 수 있다.
전술된 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
10: IoT 기반의 IP 카메라 시스템 100: 가전제품
200: IP 카메라 장치 300: 서버
400: 단말 210: 본체
220: 통신부 230: 저장부
240: IP 카메라 250: 제어부
410: 단말 통신부 420: 단말 저장부
330: 단말 표시부 440: 단말 음성 출력부
450: 단말 제어부

Claims (7)

  1. 사물형 인터넷을 통해 연결된 복수의 가전제품 중에서 특정 가전제품의 동작 상태가 변경되는 경우, 또는 미리 등록된 객체가 미리 설정된 시간 이상 감지되지 않는 경우, 또는 미리 설정된 데시벨 이상의 소리가 감지되는 경우, 중에서 적어도 하나의 이벤트가 발생할 때, 상기 이벤트에 대응하여 특정 장소로 이동한 후, 상기 특정 장소에 대응하는 특정 영역에 대한 영상 정보를 획득하고, 상기 획득된 영상 정보를 전송하는 IP 카메라 장치;
    상기 IP 카메라 장치로부터 전송되는 영상 정보를 수신하고, 상기 IP 카메라 장치에 대응하여 미리 등록된 단말의 식별 정보를 확인하고, 상기 확인된 단말의 식별 정보에 대응하는 단말이 인증된 상태인지 여부를 판단하고,
    상기 판단 결과, 상기 단말이 인증된 상태일 때, 상기 수신된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하고,
    상기 판단 결과, 상기 단말이 인증되지 않은 상태일 때, 상기 수신된 영상 정보 내에서 사용자에 대응하는 객체가 감지되는지 여부를 확인하고,
    상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되지 않을 때, 상기 수신된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하고,
    상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지될 때, 상기 영상 정보를 수정하여 새롭게 수정된 영상 정보를 생성하고, 상기 생성된 수정된 영상 정보를 상기 단말의 식별 정보에 대응하는 상기 단말로 전송하는 서버; 및
    상기 서버로부터 전송되는 영상 정보 또는 수정된 영상 정보를 출력하는 상기 단말
    을 포함하며,
    상기 IP 카메라 장치는,
    애완동물이 상기 IP 카메라 장치로부터 미리 설정된 거리 이내로 접근하는 경우, 미리 설정된 이종의 동물소리를 출력하고, 상기 IP 카메라 장치로 인접하는 위험을 감지하는 경우, 해당 IP 카메라를 본체 내부로 이동시키는 것을 특징으로 하고,
    상기 수정된 영상 정보는,
    상기 영상 정보에 포함된 사용자에 대응하는 객체를 마스킹 처리하여 생성된 영상 정보, 상기 영상 정보에 포함된 사용자에 대응하는 객체를 삭제하고 상기 삭제된 객체의 위치에 미리 설정된 아바타를 추가하여 생성된 영상 정보 및 상기 영상 정보에 포함된 사용자에 대응하는 객체 위에 상기 아바타를 오버레이 처리하여 생성된 영상 정보 중 어느 하나인
    것을 특징으로 하는 IoT 기반의 IP 카메라 시스템.
  2. 제 1 항에 있어서,
    상기 IP 카메라 장치는,
    상기 본체의 일측에 형성된 확장 연결 부재의 길이방향 또는 그 반대방향으로 상기 IP카메라를 이동하며,
    상기 IP 카메라 장치에 인접한 임의 객체의 움직임을 감지하기 위한 동작 인식 센서, 소리 등을 감지하기 위한 센서, 가스 누출 여부를 감지하기 위한 가스 감지 센서, 화재 발생 여부를 감지하기 위한 화재 감지 센서, 미세먼지 농도를 측정하여 제공하기 위한 미세먼지 측정 센서를 더 포함하는 것을 특징으로 하는 IoT 기반의 IP 카메라 시스템.
  3. 삭제
  4. 삭제
  5. 애완동물이 미리 설정된 거리 이내로 접근하는 경우, 미리 설정된 이종의 동물소리를 출력하고, 노출되어 있는 IP 카메라에 인접하는 위험을 감지하는 경우, 해당 IP 카메라를 본체 내부로 이동시키는 것을 특징으로 하는 IP 카메라 장치에 의해, 사물형 인터넷을 통해 연결된 복수의 가전제품 중에서 특정 가전제품의 동작 상태가 변경되는 경우, 또는 미리 등록된 객체가 미리 설정된 시간 이상 감지되지 않는 경우, 또는 미리 설정된 데시벨 이상의 소리가 감지되는 경우, 중에서 적어도 하나의 이벤트가 발생할 때, 상기 이벤트에 대응하여 특정 장소로 이동한 후, 상기 특정 장소에 대응하는 특정 영역에 대한 영상 정보를 획득하는 단계;
    서버에 의해, 상기 IP 카메라 장치로부터 전송되는 영상 정보를 수신하고, 상기 IP 카메라 장치에 대응하여 미리 등록된 단말의 식별 정보를 확인하는 단계;
    상기 서버에 의해, 상기 확인된 단말의 식별 정보에 대응하는 단말이 인증된 상태인지 여부를 판단하는 단계;
    상기 판단 결과, 상기 단말이 인증된 상태일 때, 상기 서버에 의해, 상기 수신된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하고,
    상기 판단 결과, 상기 단말이 인증되지 않은 상태일 때, 상기 서버에 의해, 상기 수신된 영상 정보 내에서 사용자에 대응하는 객체가 감지되는지 여부를 확인하는 단계와, 상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지되지 않을 때, 상기 서버에 의해, 상기 수신된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하는 단계; 및
    상기 단말에 의해, 상기 서버로부터 전송되는 영상 정보를 출력하는 단계
    를 포함하며,
    상기 확인 결과, 상기 영상 정보 내에서 사용자에 대응하는 객체가 감지될 때, 상기 서버에 의해, 상기 수신된 영상 정보에 포함된 사용자에 대응하는 객체를 마스킹 처리하거나 또는, 상기 객체를 삭제하고 상기 삭제된 객체의 위치에 미리 설정된 아바타를 추가하거나 또는, 상기 객체 위에 상기 아바타를 오버레이 처리하여, 수정된 영상 정보를 생성하는 단계와, 상기 서버에 의해, 상기 수정된 영상 정보를 상기 단말의 식별 정보에 대응하는 단말로 전송하고, 상기 단말에 의해, 상기 서버로부터 전송되는 수정된 영상 정보를 출력하는 단계를 더 포함하는
    것을 특징으로 하는 IoT 기반의 IP 카메라 시스템의 제어 방법.
  6. 제 5 항에 있어서,
    상기 IP 카메라 장치는,
    상기 본체의 일측에 형성된 확장 연결 부재의 길이방향 또는 그 반대방향으로 상기 IP카메라를 이동하며,
    상기 IP 카메라 장치에 인접한 임의 객체의 움직임을 감지하기 위한 동작 인식 센서, 소리 등을 감지하기 위한 센서, 가스 누출 여부를 감지하기 위한 가스 감지 센서, 화재 발생 여부를 감지하기 위한 화재 감지 센서, 미세먼지 농도를 측정하여 제공하기 위한 미세먼지 측정 센서를 더 포함하는
    것을 특징으로 하는 IoT 기반의 IP 카메라 시스템의 제어 방법.
  7. 삭제
KR1020190049254A 2019-04-26 2019-04-26 IoT 기반의 IP 카메라 시스템 및 그의 제어 방법 KR102227517B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190049254A KR102227517B1 (ko) 2019-04-26 2019-04-26 IoT 기반의 IP 카메라 시스템 및 그의 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190049254A KR102227517B1 (ko) 2019-04-26 2019-04-26 IoT 기반의 IP 카메라 시스템 및 그의 제어 방법

Publications (2)

Publication Number Publication Date
KR20200125246A KR20200125246A (ko) 2020-11-04
KR102227517B1 true KR102227517B1 (ko) 2021-03-12

Family

ID=73571696

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190049254A KR102227517B1 (ko) 2019-04-26 2019-04-26 IoT 기반의 IP 카메라 시스템 및 그의 제어 방법

Country Status (1)

Country Link
KR (1) KR102227517B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113504831A (zh) * 2021-07-23 2021-10-15 电光火石(北京)科技有限公司 基于人脸图像特征识别的iot设备控制方法、iot及终端设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140009561A1 (en) 2010-11-12 2014-01-09 Crosswing Inc. Customizable robotic system
KR101881391B1 (ko) 2018-03-09 2018-07-25 한화에어로스페이스 주식회사 객체의 특성 정보를 반영하여 프라이버시 마스킹을 수행하는 영상 마스킹 장치

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101320350B1 (ko) * 2009-12-14 2013-10-23 한국전자통신연구원 보안관제서버 및 보안관제서버의 영상데이터 관리 방법
KR101728435B1 (ko) 2016-11-17 2017-04-19 미르텍 주식회사 Ip카메라 네트워크 환경에 열감지 기능을 탑재한 열상카메라 및 이를 이용한 cctv시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140009561A1 (en) 2010-11-12 2014-01-09 Crosswing Inc. Customizable robotic system
KR101881391B1 (ko) 2018-03-09 2018-07-25 한화에어로스페이스 주식회사 객체의 특성 정보를 반영하여 프라이버시 마스킹을 수행하는 영상 마스킹 장치

Also Published As

Publication number Publication date
KR20200125246A (ko) 2020-11-04

Similar Documents

Publication Publication Date Title
US9521239B2 (en) Apparatus and method for automatic discovery and suggesting personalized gesture control based on user's habit and context
CN107786794B (zh) 向应用提供由图像传感器获取的图像的电子装置和方法
US10540884B1 (en) Systems and methods for operating remote presence security
EP3232715A1 (en) Method and apparatus for accessing wireless access point
US20150350611A1 (en) Methods and systems for monitoring environments using smart devices
US20170017531A1 (en) Application operating method and electronic device using the same
EP3131302B1 (en) Method and device for generating video content
KR20130003886A (ko) 보안 서비스 서버 및 스마트 보안 방법
US10827318B2 (en) Method for providing emergency service, electronic device therefor, and computer readable recording medium
KR20170083431A (ko) 무선 통신 시스템에서 위조 광고자 검출 장치 및 방법
KR102386893B1 (ko) 이미지 데이터의 보안 방법 및 이를 지원하는 전자 장치
KR20210125468A (ko) 조건부 액션에 대한 정보를 공유하기 위한 방법 및 그 전자 장치
WO2018124775A1 (ko) 외부 장치를 연결하는 방법 및 이를 지원하는 전자 장치
KR20210049729A (ko) 홈 네트워크 기반의 양방향 모니터링 시스템의 동작방법
EP3119095A1 (en) Method for sharing content information and electronic device thereof
KR102227517B1 (ko) IoT 기반의 IP 카메라 시스템 및 그의 제어 방법
JP6159576B2 (ja) 制御装置及びプログラム
KR20150040138A (ko) 디스플레이 장치 및 그 영상정보 유출방지 방법
EP3519931A1 (en) Electronic device and method for creating shortcut to web page in electronic device
US9749464B2 (en) Method for providing information and an electronic device thereof
KR101683747B1 (ko) 알람 출력용 복수의 디지털 출력을 가진 네트워크 카메라 및 그의 제어 방법
KR20200119412A (ko) 흡연 검출을 위한 서비스 제공 시스템 및 장치, 그리고 방법 및 컴퓨터 프로그램이 기록된 비휘발성 기록매체
CN105308948A (zh) 取景器工具
KR20160115620A (ko) 출입 기기를 이용한 세대 상황 알림 장치
CN105100621B (zh) 输出拍摄视频的方法、装置及终端

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant