KR102003691B1 - 소품 등록 시스템 - Google Patents

소품 등록 시스템 Download PDF

Info

Publication number
KR102003691B1
KR102003691B1 KR1020170097052A KR20170097052A KR102003691B1 KR 102003691 B1 KR102003691 B1 KR 102003691B1 KR 1020170097052 A KR1020170097052 A KR 1020170097052A KR 20170097052 A KR20170097052 A KR 20170097052A KR 102003691 B1 KR102003691 B1 KR 102003691B1
Authority
KR
South Korea
Prior art keywords
unit
small
user
props
recognized
Prior art date
Application number
KR1020170097052A
Other languages
English (en)
Other versions
KR20190013071A (ko
Inventor
황신환
Original Assignee
코닉오토메이션 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 코닉오토메이션 주식회사 filed Critical 코닉오토메이션 주식회사
Priority to KR1020170097052A priority Critical patent/KR102003691B1/ko
Priority to US16/045,777 priority patent/US20190034876A1/en
Priority to CN201810855270.9A priority patent/CN109344680A/zh
Publication of KR20190013071A publication Critical patent/KR20190013071A/ko
Application granted granted Critical
Publication of KR102003691B1 publication Critical patent/KR102003691B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • G06Q10/0875—Itemisation or classification of parts, supplies or services, e.g. bill of materials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/40—Software arrangements specially adapted for pattern recognition, e.g. user interfaces or toolboxes therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10009—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves
    • G06K7/10366—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves the interrogation device being adapted for miscellaneous applications
    • G06K7/10415—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves the interrogation device being adapted for miscellaneous applications the interrogation device being fixed in its position, such as an access control device for reading wireless access cards, or a wireless ATM
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/94—Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Abstract

소품 등록 시스템에 관한 기술이 개시된다. 일 실시예에 따른 소품 등록 시스템은 소품 정보를 저장하는 데이터베이스를 포함하는 관리서버와 네트워크에 연결되고, 대상 공간에 설치된 적어도 하나의 촬영부와 입력된 영상으로부터 소품을 인식하고 등록여부를 판별하는 소품 인식부와 인식된 소품의 위치를 추적하는 위치 추적부와 소품 이미지, 최종위치를 포함하는 소품 정보를 관리서버의 데이터베이스에 저장하는 소품 관리부를 포함하는 제어부를 포함한다. 소품 등록 시스템은 대상 공간에 진입하는 소품을 등록할 수 있고 등록된 소품에 대한 정보를 계속 수집하고 소품의 위치를 추적할 수 있다.

Description

소품 등록 시스템{ITEM REGISTRY SYSTEM}
컴퓨팅 장치에 관한 것으로, 특히 제한된 공간 안에 있는 소품들을 데이터베이스에 등록하여 관리하는 소품 등록 시스템이 개시된다.
다양한 센서를 활용하는 지능을 갖춘 가정용 기기들이 인터넷과 연결되어 널리 보급되고 있는 추세이다. 또한 이러한 기기들 중에는 물건에 태그를 부착하고 보관장소에서 물건이 이탈하는 지 감지하는 장치들도 포함되어 있다.
국내등록특허 제10-1624848호는 스마트 기기를 기반으로 하는 책장 형태의 보관함 모니터링 시스템을 개시하고 있다. 이 시스템은 접촉 센서나 적외선 센서 등을 이용하여 보관함에 있는 물건의 이탈을 감지하고 그 물건에 부착된 태그를 이용하여 보관 위치를 관리하여 물건을 찾도록 도와준다. 그러나 이 장치의 경우 물건에 태그를 부착해야 하는 불편함이 존재한다.
제안된 발명은 한정된 공간내의 소품을 인식하여 자동으로 등록하고 관리하는 것을 목적으로 한다.
나아가 제안된 발명은 등록된 소품의 위치를 추적하고 표시하는 수단을 구비하여 등록된 소품의 위치를 검색하고 표시하는 기능을 제공하는 것을 또 다른 목적으로 한다.
나아가 제안된 발명은 사용자별 소품의 사용행태를 수집하고 이를 CRM (Customer Relationship Management) 데이터로 생성하여 제공하는 것을 또 다른 목적으로 한다.
나아가 제안된 발명은 등록된 소품의 등록 후 경과 시간을 산출하여 관리하고 경고 표시하는 것을 또 다른 목적으로 한다.
본 발명의 목적을 달성하기 위한 일 양상에 따른 소품 등록 시스템은 관리서버와, 적어도 하나의 촬영부와, 제어부를 포함한다. 관리서버는 소품 정보를 저장하는 데이터베이스를 포함한다. 촬영부는 네트워크에 연결되고, 적어도 하나이상 설치된다. 제어부는 소품 인식부와, 위치 추적부와, 소품 관리부를 포함하여 소품을 인식하고 위치를 추적하여 관리한다.
일 양상에 따르면, 소품 관리부는 등록되지 않은 소품에 대하여 소품 이미지, 최종위치를 포함하는 소품정보를 저장하며 등록한다.
또한, 등록된 소품에 대하여 소품 관리부는 소품 사용시마다 촬영된 소품 이미지를 저장하며 소품정보를 축적한다.
또한, 등록된 소품에 대하여 소품 관리부는 위치 추적부에 의해 추적된 소품의 최종위치를 갱신한다.
또다른 양상에 따르면, 소품 인식부는 소품 인식 시 비교대상 소품을 인식 대상 소품 주변에 위치하는 등록된 소품으로 한정하여 소품을 인식할 수 있다.
또다른 양상에 따르면, 소품 인식부는 복수의 촬영부로부터 복수 시점의 영상을 입력 받아 소품을 인식하고 소품 관리부는 복수 시점의 소품 이미지를 저장하며 소품정보를 축적할 수 있다.
또다른 양상에 따르면, 제어부는 사용자 인식부와, 사용자 관리부를 더 포함할 수 있다. 사용자 인식부는 사용자와 사용자 위치를 인식할 수 있다. 사용자 관리부는 사용자 이미지를 포함하는 사용자 정보를 관리서버의 데이터베이스에 저장하고 지속적으로 촬영된 사용자 이미지를 저장하며 사용자 정보를 축적한다.
또다른 양상에 따르면, 제어부는 사용행태 인식부를 더 포함할 수 있다. 사용행태 인식부는 사용자의 소품 사용행태가 설정된 소품 사용행태인지 판별할 수 있다. 이때 소품 관리부는 설정된 소품 사용행태로 판별된 사용행태에 대하여 사용자 정보 및 사용시간을 포함하는 소품 사용행태 정보를 생성하고 저장할 수 있다.
또다른 양상에 따르면, 소품 등록 시스템은 환경센서부를 더 포함할 수 있다. 환경센서부는 온도 및 습도를 포함하는 환경정보를 감지할 수 있다. 이때 소품 관리부는 소품 사용행태 정보에 환경정보를 포함하여 저장하고 관리할 수 있다.
또다른 양상에 따르면, 소품 등록 시스템은 사용자 단말기와, 포인팅부를 더 포함할 수 있다. 또한, 제어부는 위치 지시부를 더 포함할 수 있다. 사용자 단말기는 네트워크에 연결되어 소품 검색에 사용될 수 있다. 포인팅부는 소품의 위치를 표시할 수 있다. 위치 지시부는 사용자 단말기로 검색한 소품에 대하여 포인팅부를 제어하여 소품의 위치를 표시할 수 있다.
또다른 양상에 따르면, 위치 지시부는 사용자 인식부에 의해 인식된 사용자 위치를 반영하여 복수의 포인팅부 중 위치 표시할 포인팅부를 선택하여 소품의 위치를 표시할 수 있다.
또다른 양상에 따르면, 소품 등록 시스템은 프로젝션부를 더 포함할 수 있다. 또한, 제어부는 소품정보 제공부를 더 포함할 수 있다. 프로젝션부는 소품에 대한 부가정보를 투사하여 제공한다. 소품정보 제공부는 프로젝션부를 제어하여 인식된 소품에 대한 부가정보를 제공할 수 있다.
또다른 양상에 따르면, 제어부는 동작 인터페이스부를 더 포함할 수 있다. 동작 인터페이스부는 사용자의 동작을 분석하여 제어명령인지 판별하고 그 결과에 따라 설정된 대응기능을 수행할 수 있다.
또다른 양상에 따르면, 소품 등록 시스템은 오디오입력부를 더 포함할 수 있다. 또한, 제어부는 음성 인터페이스부를 더 포함할 수 있다. 음성 인터페이스부는 오디오입력부로 입력된 사용자의 음성을 분석하여 제어명령인지 판별하고 그 결과에 따라 설정된 대응기능을 수행할 수 있다.
또다른 양상에 따르면, 사용자 단말기는 대상 공간에 등록된 소품의 리스트를 표시할 수 있다.
또다른 양상에 따르면, 제어부는 경과시간 관리부를 더 포함할 수 있다. 경과시간 관리부는 인식된 소품의 등록시점부터 경과시간을 산출하고 설정된 시간을 초과할 때 경고를 표시할 수 있다.
또다른 양상에 따르면, 경과시간 관리부는 인쇄된 사용기한이 인식된 소품에 대하여 그 사용기한을 반영하여 경과시간을 관리할 수 있다.
제안된 발명은 소품을 자동으로 등록하고 등록된 소품을 검색하여 그 위치를 표시할 수 있다.
나아가 제안된 발명은 소품 사용시마다 위치를 추적하고 관리할 수 있다.
나아가 제안된 발명은 사용자별 소품의 사용행태를 수집하고 이를 CRM 데이터로 생성하여 제공할 수 있다.
나아가 제안된 발명은 등록된 소품의 등록 경과 시간을 산출하여 관리하고 경고 표시하여 기한내 소품을 사용할 수 있도록 한다.
도 1은 일 실시예에 따른 소품 등록 시스템의 구성을 나타내는 개념도이다.
도 2는 일 실시예에 따른 소품 등록 시스템의 기능적 구성을 나타내는 블록도이다.
도 3은 또다른 실시예에 따른 서재를 대상 공간으로 하는 소품 등록 시스템의 소품 검색의 예시를 나타내는 개념도이다.
전술한, 그리고 추가적인 양상들은 첨부된 도면을 참조하여 설명하는 실시예들을 통해 구체화된다. 각 실시예들의 구성 요소들은 다른 언급이나 상호간에 모순이 없는 한 실시예 내에서 다양한 조합이 가능한 것으로 이해된다. 블럭도의 각 블럭은 어느 경우에 있어서 물리적인 부품을 표현할 수 있으나 또다른 경우에 있어서 하나의 물리적인 부품의 기능의 일부 혹은 복수의 물리적인 부품에 걸친 기능의 논리적인 표현일 수 있다. 때로는 블럭 혹은 그 일부의 실체는 프로그램 명령어들의 집합(set)일 수 있다. 이러한 블럭들은 전부 혹은 일부가 하드웨어, 소프트웨어 혹은 이들의 결합에 의해 구현될 수 있다.
도 1은 일 실시예에 따른 소품 등록 시스템의 구성을 나타내는 개념도이다.
일 양상에 따른 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하여 소품을 인식하고 소품의 위치를 추적하여 관리하며 소품을 등록한다.
관리서버(100)는 소품 정보를 저장하는 데이터베이스를 포함한다. 관리서버(100)는 대상 공간의 크기, 관리되는 소품의 수 등에 따라 서버의 사양이 결정된다. 가정에 설치된 퍼스널 컴퓨터일 수 있으며, 다수의 사용자를 대상으로 다수의 대상 공간을 관리하는 경우에는 데이터 센터에 설치되는 다수의 물리적 서버로 구성될 수 있다. 관리서버(100)는 물론 네트워크와 연결되므로 네트워크를 통해 접근이 가능하다. 관리서버(100)가 대상 공간에 설치된 경우에는 로컬 네트워크를 통해서 접근이 가능하고 외부 공간에 설치된 경우, 예를 들어 서비스 제공자 영역에 설치된 경우에는 인터넷을 통해서 접근이 가능하다.
촬영부(200)는 네트워크에 연결되고, 대상 공간에 설치되며 하나이상 설치될 수 있다. 촬영부(200)는 렌즈, 이미지 센서, 프로세서, 메모리 및 무선 또는 유선 네트워크 인터페이스를 포함하여 구성되는 IP 카메라이다. 네트워크와 유선으로 연결되는 경우에는 PoE(Power of Ethernet)를 지원할 수 있으며 이때 연결되는 스위치 장비도 역시 PoE를 지원하여야 한다. IP 카메라와 PoE는 알려진 기술로 이에 대한 상세한 설명은 생략한다.
설치되는 촬영부(200)의 수는 대상 공간의 크기, 공간의 사각지대를 포함하는 요소들을 고려하여 경험적으로 정할 수 있다.
제어부(300)는 하드웨어 측면에서 보면 프로세서와 메모리를 포함하는 콘트롤러 또는 퍼스널 컴퓨터 또는 서버일 수 있다. 따라서 대상 공간의 크기, 관리되는 소품의 수 등에 따라 IP 카메라 내부에 위치하거나 독립된 컴퓨터나 별도의 서버 내부에 위치할 수 있다. 또한 관리서버(100) 내에 위치할 수도 있다. 제어부(300)가 IP 카메라 내부에 위치하는 경우에는 IP 카메라의 네트워크 인터페이스를 통해서 네트워크에 연결되고, 독립된 컴퓨터나 별도의 서버 또는 관리서버(100) 내부에 위치하는 경우에는 컴퓨터나 서버의 유선 또는 무선 네트워크 인터페이스를 통해서 네트워크에 연결된다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하고 환경센서부(400)를 더 포함할 수 있다. 환경센서부(400)는 소품 등록 시스템이 설치된 대상 공간에 설치되어 온도 및 습도를 포함하는 환경정보를 감지할 수 있다.
환경센서부(400)는 온도센서와 습도센서를 별도로 제작하여 모듈 형태로 구성할 수도 있고 온도센서와 습도센서를 일체화하여 One-Chip 또는 둘을 패키징한 Two-Chip 복합센서로 구성할 수도 있다. 또다른 양상에 따르며, 환경센서부(400)는 센싱 데이터를 가공하여 네트워크를 통해 제어부(300)로 전달할 수 있도록 IoT(Internet of Things) 센서일 수 있다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하고 사용자 단말기(600)와, 적어도 하나의 포인팅부(500)를 더 포함할 수 있다.
사용자 단말기(600)는 네트워크에 연결되어 관리서버(100)에 접속할 수 있다. 사용자 단말기(600)는 스마트 폰, 태블릿 컴퓨터, 노트북 컴퓨터 등을 포함할 수 있다. 또다른 양상에 따르면, 사용자 단말기(600)는 등록 소품의 목록을 확인하는 용도로 사용될 수 있다.
포인팅부(500)는 찾고자 하는 소품의 위치를 표시하는 장치이다. 레이저 포인터가 사용될 수 있다. 레이저 포인터는 레이저 빔을 방사하여 특정 목표를 가르킨다. 레이저 포인터는 잘 알려진 기술로 이에 대한 상세한 설명은 생략한다.
설치되는 포인팅부(500)의 수는 대상 공간의 크기, 공간의 사각지대를 포함하는 요소들을 고려하여 경험적으로 정할 수 있다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하고 프로젝션부(700)를 더 포함할 수 있다. 프로젝션부(700)는 대상 공간에 설치되어 영상을 투사한다. 이때의 영상은 소품에 대한 부가정보이다. 프로젝션부(700)는 소형의 빔 프로젝터인 피코 프로젝터가 사용될 수 있다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하고 오디오입력부(800)를 더 포함할 수 있다. 오디오입력부(800)는 대상 공간에 설치되는 마이크로 사용자 음성을 입력받아 제어부(300)로 전달한다. 마이크는 널리 알려진 기술로 자세한 설명은 생략한다.
도 2는 일 실시예에 따른 소품 등록 시스템의 기능적 구성을 나타내는 블록도이다.
일 양상에 따르면, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함한다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)를 포함한다.
제어부(300)는 소프트웨어 측면에서 보면 프로그램 명령어 세트로 구성되는 여러 기능 블럭 들의 집합으로 볼 수 있다. 또한, 제어부(300)는 네트워크에 연결되며 네트워크를 통해 촬영부(200)와 관리서버(100) 등과 연결된다.
소품 인식부(310)는 제어부(300)에 포함되어 입력된 영상으로부터 소품을 인식하고 등록여부를 판별한다. 소품 인식부(310)는 프로그램 명령어 세트로 구성될 수 있다. 촬영부(200)로부터 입력되는 영상에서 소품을 특정하여 인식하고 인식된 소품을 이미 등록된 소품들과 비교하여 등록여부를 판단한다. 또다른 발명에 양상에 따르면, 비교하는 등록된 소품들을 인식된 소품 주변의 소품들로 한정할 수 있다.
위치 추적부(330)는 제어부(300)에 포함되어 인식된 소품의 위치를 추적한다. 위치 추적부(330)는 프로그램 명령어 세트로 구성될 수 있다. 위치 추적부(330)는 촬영부(200)로부터 입력된 영상을 분석하여 사용자에 의해 사용되고 있는 인식된 소품의 위치를 계속하여 추적하고 최종적으로 소품이 놓여진 위치를 기억한다.
소품 관리부(320)는 제어부(300)에 포함되어 촬영된 소품 이미지, 소품의 최종위치를 포함하는 소품 정보를 관리서버(100)의 데이터베이스에 저장한다. 소품 관리부(320)는 프로그램 명령어 세트로 구성될 수 있다. 소품 관리부(320)는 촬영부(200)로부터 촬영되어 계속 수집된 소품 이미지들과 위치 추적부(330)에 의해 추적된 소품의 최종위치를 포함하는 소품정보를 데이터베이스에 저장한다.
일 양상에 따르면, 소품 관리부(320)는 등록되지 않은 소품에 대하여 소품 이미지, 최종위치를 포함하는 소품정보를 저장하며 등록한다.
소품 인식부(310)는 촬영부(200)로부터 입력되는 영상을 분석하여 소품을 특정하고 특정된 소품을 인식하고 인식된 소품을 이미 등록된 소품들과 비교하여 등록여부를 판단한다. 등록된 소품들에서 인식된 소품과 동일한 소품을 찾지 못하면 미등록 소품으로 판단한다. 위치 추적부(330)는 인식된 소품의 위치를 추적하여 위치를 관리한다. 그때까지 수집된 소품 이미지들과 추적된 소품의 위치를 포함하는 소품정보를 데이터베이스에 저장하며 관리서버(100)에 등록한다.
미등록 소품의 경우, 최초 촬영된 이미지로 소품을 정확히 특정하지 못하더라도 촬영된 이지미와 소품의 위치를 저장하여 등록하고 이후 소품을 계속 사용할 때마다 보다 정확한 정보를 축적하여 특정할 수 있다.
일 양상에 따르면, 소품 관리부(320)는 등록된 소품에 대하여 소품 사용시마다 촬영된 소품 이미지를 저장하며 소품정보를 축적한다.
소품 인식부(310)는 촬영부(200)로부터 입력되는 영상을 분석하여 소품을 특정한다. 소품 인식부(310)는 특정된 소품을 인식한다. 소품 인식부(310)는 인식된 소품을 이미 등록된 소품들과 비교하여 등록여부를 판단한다.
등록된 소품들에서 인식된 소품과 동일한 소품을 찾으면 등록된 소품으로 판단하고 보다 정확한 인식을 위하여 소품을 계속 촬영하여 소품 이미지 정보들을 축적할 수 있다.
이미 등록된 소품이라도 계속 촬영하여 다양한 소품 이미지를 확보하는 것은 소품의 식별 수준을 높이기 위한 것으로 그 수준에 따라 단순 이미지, 소품이름, 상표, 모델 등을 인식하여 소품정보로 관리할 수 있다.
촬영된 소품 이미지는 소품과 촬영부(200)와의 거리에 따라 근접한 위치에서 촬영된 소품의 상세한 이미지일 수도 있고 원거리에서 촬영된 흐릿한 이미지일 수 있다.
소품정보는 소품의 식별을 위해 소품의 특징들이 구분되는 영역별로 세분화되고 인식 수준에 따라 낮은 수준에서 높은 수준으로 계층적으로 구조화된 트리형태로 축적된다.
소품의 각 특징들이 저해상도 이미지에서 고해상도 이미지로 계층적으로 구조화되어 축적될 수 있으며 또한 전체적인 윤곽이나 전체적인 색조 등을 포함하는 개략적인 정보에서 부분별 상세 이미지나 컬러 및 패턴 등을 포함하는 상세한 정보로 계층적으로 구조화되어 축적될 수 있다. 또한 문자의 배치를 인식하는 수준에서 문자의 내용을 인식하는 수준으로 계층적으로 구조화되어 축적될 수 있다.
이러한 소품의 특징들은 소품 인식부에서 소품을 인식하기 위해 등록된 소품에서 검색할 때 사용되어 현재 촬영된 소품 이미지에 따라 각 계층별로 검색할 수 있도록 한다. 예를 들어, 소품에 인쇄된 문자 부분만 인식된 경우 문자 특징에서 현재 촬영된 이미지의 수준에 따라 계층의 단계를 높이거나 낮춰가며 검색하여 소품을 인식할 수 있다.
일 양상에 따르면, 위치 추적부(330)는 등록된 소품에 대하여 소품 사용시마다 위치를 추적하고 최종위치를 갱신한다. 예를 들어, 위치 추적부(330)는 소품위치를 파악하기 위하여 대상 공간을 작은 구역으로 나누고 구역마다 식별 값을 부여한 뒤 소품이 위치하는 구역의 식별 값을 위치정보로 사용할 수 있고, 소품과 촬영부(200)들과의 거리, 각도 등을 계산하고 이들을 이용하여 파악할 수도 있다. 다만, 이에 한정되는 것은 아니다.
또다른 양상에 따르면, 소품 인식부(310)는 소품 인식 시 비교대상 소품을 인식 대상 소품 주변에 위치하는 등록된 소품으로 한정하여 소품을 인식할 수 있다. 사용자가 사용하는 소품을 인식하기 위해 촬영된 소품 이미지를 가지고 이미 등록된 소품들과 비교한다. 이때 그 비교대상을 사용하는 소품 주변에 위치하는 등록소품으로 한정하면 효율적으로 소품을 인식할 수 있게 된다.
비교대상을 소품 주변에 위치하는 등록소품으로 한정하더라도 사용하는 소품과 동일한 소품을 찾지 못했다면 바로 등록을 시도하지 않고 전체 등록된 소품과 비교하여 중복 등록을 방지할 수 있다.
또다른 양상에 따르면, 소품 인식부(310)는 대상 공간에 설치된 복수의 촬영부(200)로부터 복수 시점의 영상을 입력 받아 소품을 인식하고 소품 관리부(320)는 복수 시점의 소품 이미지를 저장하며 소품정보를 축적할 수 있다.
복수의 촬영부(200)를 사용함으로써 대상 공간의 사각지대를 없앨 수 있다. 따라서 소품이 대상 공간의 어느 위치에 있더라도 소품을 인식할 수 있고 위치를 추적할 수 있다.
설치되는 촬영부(200)의 수는 대상 공간의 크기, 공간의 사각지대를 포함하는 요소들을 고려하여 경험적으로 정할 수 있다.
복수의 촬영부(200)를 사용하여 복수 시점의 소품 이미지를 촬영하고 저장함으로써 소품 이미지에 대하여 보다 정확한 정보 수집이 가능하며 이로 인해 소품의 식별 수준을 향상시킬 수 있다. 다양한 각도에서 소품 이미지를 촬영하므로 3D 입체형상에 가까운 정보를 획득할 수도 있다. 또한 다양한 부분 이미지에 대한 정보도 축적할 수 있다.
추가적 양상에 따르면, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함할 수 있다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)를 포함하고 사용자 인식부(340)와, 사용자 관리부(350)를 더 포함할 수 있다.
사용자 인식부(340)는 제어부(300)에 포함되어 사용자와 사용자 위치를 인식한다. 사용자 인식부(340)는 프로그램 명령어 세트로 구성될 수 있다. 사용자 인식부(340)는 촬영부(200)로부터 입력되는 영상에서 사용자를 특정하여 인식할 수 있다.
사용자 인식부(340)는 사용자 위치도 인식할 수 있다. 예를 들어, 사용자 인식부(340)는 사용자의 위치를 파악하기 위하여 대상 공간을 작은 구역으로 나누고 구역마다 식별 값을 부여한 뒤 사용자가 위치하는 구역의 식별 값을 위치정보로 사용할 수 있고, 사용자와 촬영부(200)들과의 거리, 각도 등을 계산하고 이들을 이용하여 파악할 수도 있다. 다만, 이에 한정되는 것은 아니다.
이때, 인식되는 사용자는 대상 공간을 지속적으로 이용하는 사람 또는 애완동물일 수 있다.
사용자 관리부(350)는 제어부(300)에 포함되어 사용자 이미지를 포함하는 사용자 정보를 관리서버(100)의 데이터베이스에 저장한다. 또한 사용자 관리부(350)는 지속적으로 촬영된 사용자 이미지를 저장하며 사용자 정보를 축적할 수 있다. 사용자 관리부(350)는 프로그램 명령어 세트로 구성될 수 있다.
사용자 관리부(350)는 대상 공간을 지속적으로 사용하는 사람 또는 애완동물에 대하여 사용자 정보를 저장하고 관리한다. 사용자에 대한 이미지를 지속적으로 축적하여 사용자의 성별, 연령 등의 정보를 인식할 수 있다.
또다른 양상에 따라 소품 등록 시스템의 사용자 인식부(340)는 촬영부(200)로부터 입력된 영상을 분석하여 사용자를 특정한다. 사용자 인식부(340)는 특정된 사용자를 인식한다. 또한 사용자 인식부(340)는 인식된 사용자의 위치도 파악하여 인식한다. 사용자 관리부(350)는 사용자 이미지를 지속적으로 촬영하여 정보를 수집한다. 사용자 관리부(350)는 촬영된 사용자 이미지를 포함하는 사용자 정보를 관리서버(100)의 데이터베이스에 저장한다.
추가적 양상에 따르면, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함할 수 있다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)와, 사용자 인식부(340)와, 사용자 관리부(350)를 포함하고 사용행태 인식부(360)를 더 포함할 수 있다.
사용행태 인식부(360)는 제어부(300)에 포함되어 인식된 사용자의 소품 사용행태가 설정된 소품 사용행태인지 판별할 수 있다. 사용행태 인식부(360)는 프로그램 명령어 세트로 구성될 수 있다.
설정된 소품 사용행태는 특정 소품에 대하여 기대되는 소품의 사용형태로 소품의 종류에 따라 미리 정해져 있거나 설정될 수 있다. 예를 들어, 인식된 소품이 가정용 진공청소기라면 대상 공간을 진공청소기를 이용하여 청소를 하는 것이 미리 정해져 있거나 설정된 소품 사용행태가 된다.
사용행태 인식부(360)는 사용행태가 설정된 소품에 대하여 사용자의 사용행태가 설정된 소품 사용행태인지 판별하고, 설정된 소품 사용행태에 해당하면 어느 사용자가, 언제, 얼마의 시간동안, 어느 위치에서 사용했는 지에 대하여 정보를 수집한다.
소품 관리부(320)는 설정된 소품 사용행태로 판별된 사용행태에 대하여 사용자 정보 및 사용시간을 포함하는 소품 사용행태 정보를 생성하고 저장할 수 있다. 사용행태 인식부(360)에 의해 수집된 소품 사용행태 정보를 해당 소품에 대하여 저장한다. 이렇게 저장된 정보는 CRM 데이터로 축적하여 필요시 CRM 데이터를 제공할 수 있다.
또다른 양상에 따라, 소품 인식부(310)는 촬영부(200)로부터 입력되는 영상을 분석하여 소품을 특정한다. 소품 인식부(310)는 특정된 소품을 인식한다. 소품 인식부(310)는 인식된 소품을 이미 등록된 소품들과 비교하여 등록된 소품들에서 인식된 소품과 동일한 소품을 찾으면 등록된 소품으로 판단한다.
사용자 인식부(340)는 촬영부(200)로부터 입력된 영상을 분석하여 사용자를 특정한다. 사용자 인식부(340)는 특정된 사용자를 인식한다. 또한 사용자 인식부(340)는 인식된 사용자의 위치도 파악하여 인식한다.
사용행태 인식부(360)는 인식된 사용자의 소품 사용행태를 인식한다. 사용행태 인식부(360)는 인식된 사용자의 소품 사용행태가 설정된 소품 사용행태인지 판별하고, 설정된 소품 사용행태에 해당하면 어느 사용자가, 언제, 얼마의 시간동안, 어느 위치에서 사용했는 지에 대하여 정보를 수집한다.
소품 관리부(320)는 소품 사용행태에 대하여 사용자 정보 및 사용시간을 포함하는 소품 사용행태 정보를 해당 소품에 대하여 관리서버(100)의 데이터베이스에 저장한다.
추가적 양상에 따라, 소품 등록 시스템은 적어도 관리서버(100)와, 하나의 촬영부(200)와, 제어부(300)를 포함하고 환경센서부(400)를 더 포함할 수 있다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)와, 사용자 인식부(340)와, 사용자 관리부(350)와, 사용행태 인식부(360)를 포함할 수 있다.
소품 관리부(320)가 소품 사용행태 정보에 환경센서부(400)에 의해 수집된 환경정보를 포함하여 저장하고 관리할 수 있다. 소품 관리부(320)는 환경정보를 포함하여 소품 사용에 대한 CRM 데이터를 생성하고 축적할 수 있다.
추가적 양상에 따르면, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하고 사용자 단말기(600)와, 포인팅부(500)를 더 포함할 수 있다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)를 포함하고 위치 지시부(370)를 더 포함할 수 있다.
사용자 단말기(600)는 네트워크에 연결되어 관리서버(100)에 접속하여 소품의 위치를 검색할 수 있다.
설치되는 포인팅부(500)의 수는 대상 공간의 크기, 공간의 사각지대를 포함하는 요소들을 고려하여 경험적으로 정할 수 있다.
위치 지시부(370)는 제어부(300)에 포함되어 포인팅부(500)를 제어하여 소품의 위치를 표시할 수 있다. 위치 지시부(370)는 프로그램 명령어 세트로 구성될 수 있다.
이때 포인팅부(500)가 가리키는 위치는 위치 추적부(330)에 추적되어 저장된 소품의 최종위치이다. 따라서 사용자가 사용자 단말기(600)로 소품을 검색하여 소품을 찾으면 관리서버(100)의 데이터베이스에서 저장된 소품의 최종위치를 파악한 후 위치 지시부(370)가 검색된 소품의 위치를 표시하도록 포인팅부(500)를 제어한다.
또다른 양상에 따라, 사용자는 사용자 단말기(600)로 관리서버(100)에 접속한다. 관리서버(100)는 사용자 단말기(600)에 소품을 검색할 수 있는 UI(User Interface)를 제공한다. 사용자는 제공된 UI를 통해 찾고자 하는 소품을 검색한다. 검색에 성공하면 위치 지시부(370)는 포인팅부(500)을 제어하여 레이저 빔으로 소품의 위치를 표시한다.
또한, 추가적 양상에 따라 제어부(300)는 사용자 인식부(340)를 더 포함할 수 있다. 사용자 인식부(340)가 소품을 검색하는 사용자의 위치를 인식한다.
이때 위치 지시부(370)는 인식된 사용자의 위치를 반영하여 복수의 포인팅부(500) 중 소품의 위치를 표시할 포인팅부(500)를 선택하여 위치를 표시할 수 있다. 즉, 소품의 위치를 검색한 사용자를 인식하고 그 위치를 파악한 후 그 사용자의 위치에서 지시가 용이한 포인팅부(500)를 선택하고 그 포인팅부(500)에서 레이저 빔으로 포인팅하게 할 수 있다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하고 프로젝션부(700)를 더 포함할 수 있다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)를 포함하고 소품정보 제공부(380)를 더 포함할 수 있다.
소품정보 제공부(380)는 프로젝션부(700)를 제어하여 인식된 소품에 대한 부가정보를 영상을 투사하여 제공할 수 있다. 소품정보 제공부(380)는 프로그램 명령어 세트로 구성될 수 있다. 또다른 양상에 따라, 제공되는 부가정보는 소품의 등록일, 사용자, 사용자별 사용시간, 소품의 위치 등의 정보를 포함할 수 있다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함한다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)를 포함하고 동작 인터페이스부(385)를 더 포함할 수 있다.
동작 인터페이스부(385)는 제어부(300)에 포함되고 사용자의 동작을 분석하여 제어명령인지 판별하고 그 결과에 따라 설정된 대응기능을 수행할 수 있다. 동작 인터페이스부(385)는 프로그램 명령어 세트일 수 있다.
사용자가 미리 설정된 제스쳐를 취하면 동작 인터페이스부(385)가 이를 인식하고 인식된 동작이 이미 설정된 인터페이스 동작인지 판별하고 인터페이스 동작에 해당하면 그 동작에 맞는 제어명령을 수행하여 대응하는 기능을 제공할 수 있다. 예를 들어, 또다른 양상에 따르면 손가락의 동작을 인식하여 제공되는 부가정보 화면을 확대하거나 축소하는 명령을 수행할 수 있다. 또한, 추가적 양상에 따라 음성 출력부를 더 포함하여 사용자의 손가락이 지시하는 소품에 대한 정보를 음성으로 출력할 수도 있다.
제어 명령에 해당하는 제스쳐는 시스템 설치 시 일부 설정되어 있을 수 있으며 사용자가 사용 중 추가할 수 있다.
또다른 양상에 따르면, 동작 인터페이스부(385)는 촬영부(200)의 영상으로부터 사용자 동작을 분석하여 동작을 인식한다. 동작 인터페이스부(385)는 인식된 동작이 미리 설정된 인터페이스 동작인지 즉, 제어명령인지 판단한다. 인터페이스 동작으로 판별되면 해당 제어명령에 대응하는 기능을 수행한다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하고 오디오입력부(800)를 더 포함할 수 있다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)를 포함하고 음성 인터페이스부(390)를 더 포함할 수 있다.
오디오입력부(800)는 사용자 음성을 입력받아 제어부(300)로 전달한다.
음성 인터페이스부(390)는 오디오입력부(800)를 통해 입력된 사용자의 음성을 분석하여 제어명령인지 판별하고 그 결과에 따라 설정된 대응기능을 수행할 수 있다.
사용자 미리 설정된 명령어를 말하면 음성 인터페이스부(390)가 인식하고 인식된 음성이 이미 설정된 명령어인지 판별하고 명령어에 해당하면 그 명령에 맞는 제어명령을 수행하여 대응하는 기능을 제공할 수 있다. 예를 들어, 또다른 양상에 따르면 사용자가 소품을 사용 중에 부가정보 라고 말하면 소품의 부가정보를 프로젝션부(700)를 통해 투사할 수 있다. 또한, 추가적 양상에 따라 음성 출력부를 더 포함하여 사용자가 사용하는 소품에 대한 정보를 음성 명령어로 지시하면 소품의 정보를 프로젝션부(700)를 통해 투사하는 것과 동시에 음성 출력부로 소품에 대한 정보를 출력할 수 있다.
제어 명령에 해당하는 음성 명령어는 멀티미디어 장치 제조 시 일부 설정되어 있을 수 있으며 사용자가 사용 중 추가할 수 있다.
또다른 양상에 따르면, 음성 인터페이스부(390)는 오디오입력부(800)로부터 입력된 오디오를 분석하여 사용자 음성을 인식한다. 음성 인터페이스부(390)는 인식된 사용자 음성이 미리 설정된 제어 명령어인지 판단한다. 제어명령으로 판별되면 해당 제어명령에 대응하는 기능을 수행한다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 제어부(300)를 포함하고 사용자 단말기(600)를 더 포함할 수 있다. 이때, 사용자 단말기(600)는 대상 공간에 등록된 소품의 리스트를 표시하여 등록된 소품을 확인할 수 있다.
추가적 양상에 따라, 소품 등록 시스템은 관리서버(100)와, 적어도 하나의 촬영부(200)와, 사용자 단말기(600)와, 제어부(300)를 포함한다. 이때 제어부(300)는 소품 인식부(310)와, 위치 추적부(330)와, 소품 관리부(320)를 포함하고 경과시간 관리부(395)를 더 포함할 수 있다.
경과시간 관리부(395)는 인식된 소품의 등록시점부터 경과시간을 산출하고 설정된 시간을 초과할 때 경고를 표시할 수 있다. 경과시간 관리부(395)는 프로그램 제어명령어 세트로 구성될 수 있다.
경고를 표시하기 위해 설정하는 시간은 대상 공간의 종류에 따라 경험적으로 설정할 수 있다. 또한, 인식되는 소품에 따라서 다르게 설정할 수도 있다. 예를 들어, 대상 공간이 냉장고인 경우 인식된 소품인 식재료의 신선도가 유지될 수 있는 기간을 설정할 수 있다.
등록시점부터 산출된 경과시간이 설정된 시간을 초과하면 사용자 단말기(600)에 경고를 표시할 수 있다. 또다른 양상에 따르면, 등록된 소품 리스트를 사용자 단말기(600)에 표시할 때 경과시간을 함께 표시할 수 있다. 또다른 양상에 따르면, 설정된 시간을 초과한 소품 사용시 프로젝션부(700)를 통해 경고 메시지를 투사할 수도 있다.
또다른 양상에 따르면, 소품 인식부(310)는 촬영부(200)에서 입력된 영상을 분석하여 사용자가 사용하고 있는 소품을 특정한다. 소품 인식부(310)는 특정된 소품을 인식한다. 인식된 소품을 이미 등록된 소품들과 비교하여 등록여부를 판단한다. 등록된 소품들에서 인식된 소품과 동일한 소품을 찾지 못하면 미등록 소품으로 판단한다. 경과시간 관리부(395)는 미등록 소품의 경우 소품의 반입 시간을 저장한다. 이때 저장된 반입 시간을 기준으로 경과시간을 산출한다. 경과시간 관리부(395)는 주기적으로 등록된 소품들에 대한 경과시간을 산출한다. 경과시간을 산출하는 주기는 일 단위, 시간 단위 등 사용자가 경험적으로 설정할 수 있다. 경과시간 관리부(395)는 경과시간 산출 후 설정된 경과시간이 초과한 소품들에 대하여 경고를 표시한다.
또한, 또다른 양상에 따르면, 경과시간 관리부(395)가 사용기한이 인쇄된 소품에 대하여 사용기한을 인식하고 그 소품에 대하여 사용기한을 반영하여 경과시간을 관리할 수 있다. 소품 인식부(310)가 사용기한이 인쇄된 소품에서 사용기한을 인식하는 경우 인식된 사용기한을 고려하여 경과시간 초과여부를 판단하고 경고 표시할 수 있다.
도 3은 또다른 실시예에 따른 서재를 대상 공간으로 하는 소품 등록 시스템의 소품 검색의 예시를 나타내는 개념도이다.
도 3에 도시된 바와 같이 서재를 대상 공간으로 하는 소품 등록 시스템의 경우 등록된 소품이 책장에 비치된 책들일 수 있다. 도 3은 사용자가 등록된 책들 중 사용자 단말기(600)를 사용하여 관리서버(100)를 통해 제공되는 검색 UI를 통해 찾고자 하는 책의 제목을 입력하고, 위치 지시부(370)는 포인팅부(500)를 제어하여 해당 책의 위치를 레이저 빔을 통하여 표시하는 예시를 나타낸 것이다.
또다른 실시예로 매장을 대상 공간으로 설정하면 매장으로 반입되는 상품을 등록하고 매장 내 상품 위치를 추적하여 관리할 수 있다. 또한 상품에 대하여 지속적으로 촬영된 이미지로 상품정보를 가격, 제조사, 입고일, 유통기한 등을 포함하는 상세한 정보들도 인식하여 정보로 축적하여 활용할 수 있다. 또한 소비자가 찾는 상품의 위치를 포인팅할 수도 있으며 상품에 대한 세부 정보를 빔 프로젝터로 투사하여 보여줄 수도 있다.
이와 같이 소품 등록 시스템은 대상 공간을 한정하지 않고 사무실, 학교, 매장, 거실, 침실, 주방, 창고 등 다양한 공간에서 사용될 수 있다.
이상에서 본 발명을 첨부된 도면을 참조하는 실시예들을 통해 설명하였지만 이에 한정되는 것은 아니며, 이들로부터 당업자라면 자명하게 도출할 수 있는 다양한 변형예들을 포괄하도록 해석되어야 한다. 특허청구범위는 이러한 변형예들을 포괄하도록 의도되었다.
100 : 관리서버
200 : 촬영부
300 : 제어부
310: 소품 인식부 320: 소품 관리부
330: 위치 추적부 340: 사용자 인식부
350: 사용자 관리부 360: 사용행태 인식부
370: 위치 지시부 380: 소품정보 제공부
385: 동작 인터페이스부 390: 음성 인터페이스부
395: 경과시간 관리부
400 : 환경센서부
500 : 포인팅부
600 : 사용자 단말기
700 : 프로젝션부
800 : 오디오입력부

Claims (17)

  1. 소품 정보를 저장하는 데이터베이스를 포함하는 관리서버;
    네트워크에 연결되고, 대상 공간에 설치된 적어도 하나의 촬영부; 및
    입력된 영상으로부터 소품을 인식하고 등록여부를 판별하는 소품 인식부와 인식된 소품의 위치를 추적하는 위치 추적부와 소품 이미지, 최종위치를 포함하는 소품 정보를 관리서버의 데이터베이스에 저장하는 소품 관리부를 포함하는 제어부;
    를 포함하되,
    대상 공간에 설치된 적어도 하나의 포인팅부를 더 포함하고,
    상기 제어부가 상기 포인팅부를 제어하여 소품의 위치를 표시하는 위치 지시부를 더 포함하는 소품 등록 시스템.
  2. 제 1 항에 있어서,
    등록되지 않은 소품에 대하여 상기 소품 관리부가 소품 이미지, 최종위치를 포함하는 소품정보를 저장하며 등록하는 소품 등록 시스템.
  3. 제 1 항에 있어서,
    등록된 소품에 대하여 상기 소품 관리부가 소품 사용시마다 촬영된 소품 이미지를 저장하며 소품정보를 축적하는 소품 등록 시스템.
  4. 제 3 항에 있어서,
    등록된 소품에 대하여 상기 위치 추적부가 소품 사용시마다 소품이 인식된 위치를 갱신하며 소품의 위치를 추적하고 최종적으로 소품이 놓여진 최종위치를 저장하는 소품 등록 시스템.
  5. 제 3 항에 있어서,
    상기 소품 인식부가 소품 인식 시 비교대상 소품을 인식 대상 소품 주변에 위치하는 등록된 소품으로 한정하여 소품을 인식하는 소품 등록 시스템.
  6. 제 1 항에 있어서,
    상기 소품 인식부가 대상 공간에 설치된 복수의 촬영부로부터 복수 시점의 영상을 입력 받아 각각의 촬영부에서 촬영된 소품 이미지를 등록된 소품 이미지와 비교하여 인식하고 상기 소품 관리부가 복수 시점의 소품 이미지를 저장하며 소품정보를 축적하는 소품 등록 시스템.
  7. 제 1 항에 있어서,
    상기 제어부가 촬영부로부터 입력되는 영상에서 사용자를 특정하고, 특정된 사용자를 인식하고, 인식된 사용자의 위치를 인식하는 사용자 인식부와 사용자 이미지를 포함하는 사용자 정보를 관리서버의 데이터베이스에 저장하는 사용자 관리부를 더 포함하고,
    상기 사용자 관리부가 지속적으로 촬영된 사용자 이미지를 저장하며 사용자 정보를 축적하되,
    사용자 인식부는 대상 공간을 작은 구역으로 나누어 사용자가 위치하는 구역의 위치 정보로 사용자의 위치를 인식하거나 인식된 사용자와 촬영부와의 계산된 거리 및 각도 정보를 이용하여 사용자의 위치를 인식하는 소품 등록 시스템.
  8. 제 7 항에 있어서,
    상기 제어부가 촬영부로부터 입력되는 영상에서 인식된 사용자의 소품 사용행태가 인식된 소품의 종류에 대하여 기대되는 미리 설정된 소품 사용행태와 비교하여 설정된 소품 사용행태인지 판별하는 사용행태 인식부를 더 포함하고,
    상기 소품 관리부가 설정된 소품 사용행태로 판별된 사용행태에 대하여 사용자 정보 및 사용시간을 포함하는 소품 사용행태 정보를 생성하고 저장하는 소품 등록 시스템.
  9. 제 8 항에 있어서,
    상기 시스템이 대상 공간에 설치되어 온도 및 습도를 포함하는 환경정보를 감지하는 환경센서부를 더 포함하고,
    상기 소품 관리부가 소품 사용행태 정보에 환경정보를 포함하여 저장하고 관리하는 소품 등록 시스템.
  10. 제 1 항에 있어서,
    상기 시스템이 네트워크에 연결되는 사용자 단말기;를 더 포함하고,
    상기 사용자 단말기로 소품을 검색하면 상기 위치 지시부가 검색된 소품의 위치를 표시하는 소품 등록 시스템
  11. 제 10 항에 있어서,
    상기 제어부가 사용자와 사용자 위치를 인식하는 사용자 인식부를 더 포함하고,
    상기 위치 지시부가 인식된 사용자 위치를 반영하여 복수의 포인팅부 중 소품의 위치를 표시할 포인팅부를 선택하여 위치를 표시하는 소품 등록 시스템.
  12. 제 1 항에 있어서,
    상기 시스템이 대상 공간에 설치된 프로젝션부;를 더 포함하고,
    상기 제어부가 상기 프로젝션부를 제어하여 인식된 소품에 대한 부가정보를 제공하는 소품정보 제공부를 더 포함하는 소품 등록 시스템.
  13. 제 1 항에 있어서,
    상기 제어부가 촬영부로부터 입력되는 영상에서 인식된 사용자의 동작을 미리 설정된 인터페이스 동작과 비교하여 제어명령에 해당하는지 판별하고 그 결과에 따라 설정된 대응기능을 수행하는 동작 인터페이스부를 더 포함하는 소품 등록 시스템.
  14. 제 1 항에 있어서,
    상기 시스템이 대상 공간에 설치된 오디오입력부;를 더 포함하고,
    상기 제어부가 입력된 사용자의 음성을 인식하고 인식된 음성을 미리 설정된 명령어와 비교하여 제어명령에 해당하는지 판별하고 그 결과에 따라 설정된 대응기능을 수행하는 음성 인터페이스부를 더 포함하는 소품 등록 시스템.
  15. 제 1 항에 있어서,
    상기 시스템이 네트워크에 연결되는 사용자 단말기;를 더 포함하고,
    상기 사용자 단말기가 대상 공간에 등록된 소품의 리스트를 표시하는 소품 등록 시스템
  16. 제 15 항에 있어서,
    상기 제어부가 인식된 소품의 등록시점부터 경과시간을 산출하고 설정된 시간을 초과할 때 경고를 표시하는 경과시간 관리부를 더 포함하는 소품 등록 시스템
  17. 제 16 항에 있어서,
    상기 경과시간 관리부가 인쇄된 사용기한이 인식된 소품에 대하여 그 사용기한을 반영하여 경과시간을 관리하는 소품 등록 시스템.

KR1020170097052A 2017-07-31 2017-07-31 소품 등록 시스템 KR102003691B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020170097052A KR102003691B1 (ko) 2017-07-31 2017-07-31 소품 등록 시스템
US16/045,777 US20190034876A1 (en) 2017-07-31 2018-07-26 Item registry system
CN201810855270.9A CN109344680A (zh) 2017-07-31 2018-07-31 物品登记系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170097052A KR102003691B1 (ko) 2017-07-31 2017-07-31 소품 등록 시스템

Publications (2)

Publication Number Publication Date
KR20190013071A KR20190013071A (ko) 2019-02-11
KR102003691B1 true KR102003691B1 (ko) 2019-07-25

Family

ID=65037963

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170097052A KR102003691B1 (ko) 2017-07-31 2017-07-31 소품 등록 시스템

Country Status (3)

Country Link
US (1) US20190034876A1 (ko)
KR (1) KR102003691B1 (ko)
CN (1) CN109344680A (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220083596A1 (en) * 2019-01-17 2022-03-17 Sony Group Corporation Information processing apparatus and information processing method
CN110097724B (zh) * 2019-04-24 2021-06-29 苏州浪潮智能科技有限公司 一种基于fpga的物品自动看护方法及系统
CN110403369B (zh) * 2019-07-31 2022-04-08 邵美琪 一种专利证书智能存放柜
CN110472541A (zh) * 2019-08-05 2019-11-19 福州大学 基于树莓派的服装识别系统及方法
CN113464016B (zh) * 2021-06-30 2023-04-07 重庆工业职业技术学院 监控控制系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101227883B1 (ko) * 2011-05-30 2013-01-30 김호진 사용자 동작／음성 기반 제어장치 및 이에 적용되는 사용자 동작／음성 기반 제어방법

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7168618B2 (en) * 2004-08-12 2007-01-30 International Business Machines Corporation Retail store method and system
KR20060036592A (ko) * 2004-10-26 2006-05-02 에스케이 텔레콤주식회사 이미지 데이터를 이용한 검색 서비스 제공 방법
US8429004B2 (en) * 2005-04-13 2013-04-23 Store Eyes, Inc. Method and system for automatically measuring retail store display compliance
KR100796266B1 (ko) * 2005-12-02 2008-01-21 주식회사 비전라이드 주차 관제 시스템
US7922085B2 (en) * 2007-04-13 2011-04-12 Aps Technology Group, Inc. System, method, apparatus, and computer program product for monitoring the transfer of cargo to and from a transporter
JP4422792B1 (ja) * 2008-07-08 2010-02-24 パナソニック株式会社 物品推定装置及び物品位置推定装置、物品推定方法、並びに、物品推定プログラム
CN101547344B (zh) * 2009-04-24 2010-09-01 清华大学深圳研究生院 基于联动摄像机的视频监控装置及其跟踪记录方法
TWI424146B (zh) * 2011-05-03 2014-01-21 Ind Tech Res Inst 追蹤系統與方法
CN102915638A (zh) * 2012-10-07 2013-02-06 复旦大学 基于监控视频的智能停车场管理系统
KR20150097274A (ko) * 2014-02-18 2015-08-26 홍익대학교 산학협력단 자주식 공간이동 카메라를 이용한 피사체 추종 촬영 시스템 및 방법
CN104102991A (zh) * 2014-08-07 2014-10-15 深圳市众辉达物流有限公司 货物运输过程管控实现方法、终端及系统
CN106780850A (zh) * 2016-10-27 2017-05-31 王泽楷 一种摄像头智能识别车辆管理门禁系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101227883B1 (ko) * 2011-05-30 2013-01-30 김호진 사용자 동작／음성 기반 제어장치 및 이에 적용되는 사용자 동작／음성 기반 제어방법

Also Published As

Publication number Publication date
CN109344680A (zh) 2019-02-15
KR20190013071A (ko) 2019-02-11
US20190034876A1 (en) 2019-01-31

Similar Documents

Publication Publication Date Title
KR102003691B1 (ko) 소품 등록 시스템
US20230017398A1 (en) Contextually aware customer item entry for autonomous shopping applications
US10391633B1 (en) Systems and methods for inventorying objects
US9473594B1 (en) Projection of interactive map data
CN114040153B (zh) 用于在环境内计算机视觉驱动应用的系统
CN101233540B (zh) 用于监控对目标感兴趣的人的装置及其方法
CN109993045B (zh) 物品查找方法及查找装置、查找系统和机器可读存储介质
US20120327119A1 (en) User adaptive augmented reality mobile communication device, server and method thereof
US20160021342A1 (en) Device and method for determination
CN106031165B (zh) 管理视频监视系统的方法、系统和计算机可读介质
KR20130126545A (ko) 쇼핑 경험에서 가상 및 실제 이미지들의 비교
CN105376121A (zh) 图像触发配对
CN102542249A (zh) 视频内容中的脸部识别
KR20210137592A (ko) 냉장고 및 냉장고의 물품 관리 방법
US20240095674A1 (en) Storage-retrieval management device, storage-retrieval management system, and storage-retrieval management method
TWI712903B (zh) 商品資訊查詢方法和系統
JP2019174920A (ja) 物品管理システム、及び物品管理プログラム
KR101969262B1 (ko) 사물인터넷 기반의 창고 관리 방법 및 시스템
JP2005056213A5 (ko)
US20160295039A1 (en) Mobile device and method for controlling the same
Chen et al. Low-cost asset tracking using location-aware camera phones
CN109426842A (zh) 一种物品管理系统
US20170262795A1 (en) Image in-stock checker
CN109101900B (zh) 一种对象分布信息的确定方法、装置和电子设备
JP2021047660A (ja) 商品情報通知システム、商品情報通知方法、プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right