KR101926748B1 - 상태 판정 시스템 - Google Patents

상태 판정 시스템 Download PDF

Info

Publication number
KR101926748B1
KR101926748B1 KR1020167030465A KR20167030465A KR101926748B1 KR 101926748 B1 KR101926748 B1 KR 101926748B1 KR 1020167030465 A KR1020167030465 A KR 1020167030465A KR 20167030465 A KR20167030465 A KR 20167030465A KR 101926748 B1 KR101926748 B1 KR 101926748B1
Authority
KR
South Korea
Prior art keywords
image
color information
information
specific
state
Prior art date
Application number
KR1020167030465A
Other languages
English (en)
Other versions
KR20160140870A (ko
Inventor
마사토 오와다
켄고 다나카
Original Assignee
비클릭 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 비클릭 가부시키가이샤 filed Critical 비클릭 가부시키가이샤
Publication of KR20160140870A publication Critical patent/KR20160140870A/ko
Application granted granted Critical
Publication of KR101926748B1 publication Critical patent/KR101926748B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3055—Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06398—Performance of employee with respect to a job function
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/32—Determination of transform parameters for the alignment of images, i.e. image registration using correlation-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Development Economics (AREA)
  • Educational Administration (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Game Theory and Decision Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Processing Or Creating Images (AREA)

Abstract

모니터 화면으로부터 그 화면상의 상태 정보를 쉽고 확실하게 취득하는 것이 가능한 상태 판정 시스템을 제공한다. 상태 판정 시스템(1)은, 모니터 X의 화면을 어댑터 장치 W를 통해 캡쳐하여 영상으로서 취득하는 영상 취득 수단(10)과, 해당 영상이 상태 정보를 취득해야 할 영상인지를 판정하는 영상 판정 수단(20)과, 해당 영상이 상태 정보를 취득해야 할 영상이라고 판정된 경우에 해당 영상의 특정 포인트의 색채 정보를 취득하는 색채 정보 취득 수단(30)과, 취득된 특정 포인트의 색채 정보를 상태 정보로 변환하는 상태 변환 수단(40)을 포함한다.

Description

상태 판정 시스템{STATUS DETERMINATION SYSTEM}
본 발명은 모니터 화면상의 상태 정보를 취득하는 상태 판정 시스템에 관한 것이다.
종래, 이런 종류의 상태 정보 시스템으로서는 하기 특허문헌 1에 나타난 바와 같이, 숙박시설의 각 방의 식별 정보에 대응해 그 방의 이용 상황에 관한 정보를 기억하는 방 상황 파일을 마련하고, 이 방 상황 파일의 기억 정보에 기초하여 방 마다 공실, 재실, 예약됨 등의 이용 상황을 결정하고 컬러 모니터 화면에 각 방의 식별 정보를 열거함과 동시에, 각 식별 정보를 개별적으로 둘러싼 테두리 내의 색을 다르게 해 컬러 모니터 화면에 표시시키는 프런트 업무 처리 장치가 알려져 있다.
일본 특개평10-40292호 공보
여기서 종래의 상태 정보 시스템에서는, 이미 상태 정보가 그 시스템에서 인식되어, 그 정보가 모니터 화면상에 표시되어 있다. 따라서 굳이 모니터 화면상의 특정 정보를 상태 정보로서 취득하거나 그 상태를 판정하거나 할 필요는 없다.
그렇지만 모니터 화면상에 표시되는 것만에 있어서, 그 시스템에 있어서는 인식되지 않은 정보(예를 들면, 단지 제어반을 촬영한 것뿐인 아날로그 화면상의 정보)나 그 시스템에서는 인식되어 있어도 다른 시스템으로 전달할 수 없는 정보(예를 들면, 인터페이스를 구비하지 않기 때문에 다른 시스템으로 전송할 수 없는 정보)도 존재한다.
그 점에서, 본 발명은 모니터 화면에서 그 화면상의 상태 정보를 쉽고 확실하게 취득할 수 있는 상태 판정 시스템을 제공하는 것을 목적으로 한다.
제 1 발명의 상태 판정 시스템은, 모니터 화면상의 상태 정보를 취득하는 상태 판정 시스템에 있어서, 상기 모니터 화면을 캡쳐하여 영상으로서 연속적으로 취득하는 영상 취득 수단; 상기 영상 취득 수단에 의해 취득된 상기 영상에 대해서, 상기 영상이 상태 정보를 취득해야 하는 영상인지를 판정하는 영상 판정 수단; 상기 영상 판정 수단에 의해 상기 영상이 상태 정보를 취득해야 할 영상이라고 판정된 경우에, 상기 영상의 특정 포인트의 색채 정보를 취득하는 색채 정보 취득 수단; 및 상기 색채 정보 취득 수단에 의해 취득된 상기 특정 포인트의 색채 정보를 상태 정보로 변환하는 상태 변환 수단을 포함하고, 상기 상태 변환 수단은, 상기 특정 포인트의 색채 정보가 상기 연속적으로 취득한 영상간에서 동일할 경우에, 상기 색채 정보 취득 수단에 의해 취득된 상기 특정 포인트의 색채 정보를 상태 정보로 변환하는 것을 특징으로 한다.
제 1 발명의 상태 판정 시스템에 의하면, 영상 취득 수단이 모니터 화면을 캡쳐하여 영상으로서 취득한다. 이것에 의해, 모니터 화면에 표시되는 것이면 모두 영상으로서 취득 가능해지기 때문에, 모니터 화면에 표시되는 것만으로 해당 시스템에 있어서는 인식되어 있지 않은 정보나 해당 시스템에서는 인식되어 있어도 다른 시스템으로 전달할 수 없는 정보도 (그 영상 상의 의미는 일단 불명확하더라도) 영상으로서 취득된다.
여기서 취득된 영상에는 다양한 것이 포함될 수 있다. 예를 들면, 모니터 화면상에는 상태 판정을 해야 할 화면 외에 다른 조작 화면 등이 표시된다. 거기서 영상 판정 수단에 의해 취득된 영상이 상태 정보를 취득해야 할 영상인지를 판정함으로써, 상태 판정을 해야 할 영상을 특정할 수 있다.
그리고 상태 판정을 해야 할 영상일 경우에 취득한 영상의 특정 포인트(모니터 화면의 특정 포인트와 같다)의 색채 정보를 취득하고, 그 색채 정보를 상태 정보로 변환함으로써 모니터 화면상에 표시된 영상으로부터 상태 정보를 쉽고 확실하게 취득할 수 있다.
이와 같이 제 1 발명의 상태 판정 시스템에 의하면, 모니터 화면에서 그 화면상의 상태 정보를 쉽고 확실하게 취득할 수 있다.
제 2 발명의 상태 판정 시스템은, 제 1 발명에 있어서, 상기 영상 판정 수단이 상기 영상 취득 수단에 의해 취득된 상기 모니터 화면의 영상에 대하여 미리 좌표 위치로서 설정 가능한 특정 제외 포인트의 색채 정보를 취득하고, 상기 특정 제외 포인트의 색채 정보에 기초하여 상기 영상이 상태 정보를 취득해야 할 영상인지를 판정하는 것을 특징으로 한다.
제 2 발명의 상태 판정 시스템에 의하면, 영상 판정 수단은, 예를 들면 모니터 화면상에 표시되는 다른 조작 화면 등에 특징적인 특정 제외 포인트가 영상 상에서 미리 설정 가능하게 구성되고, 이러한 특정 제외 포인트의 색채 정보를 취득한다. 그리고 특정 제외 포인트의 색채 정보에 기초하여 해당 모니터 화면의 영상이 상태 정보를 취득해야 할 영상인지를 판정함으로써, 상태 판정을 해야 할 영상을 쉽고 확실하게 특정할 수 있다.
이와 같이 제 2 발명의 상태 판정 시스템에 의하면, 모니터 화면의 영상이 상태 정보를 취득해야 할 영상인지를 쉽고 확실하게 판정할 수 있고, 나아가 모니터 화면에서 그 화면상의 상태 정보를 쉽고 확실하게 취득할 수 있다.
제 3 발명의 상태 판정 시스템은, 제 1 또는 제 2 발명에 있어서, 상기 색채 정보 취득 수단이 상기 특정 포인트를 좌표 위치로서 미리 설정 가능하게 하고, 상기 좌표 위치의 특정 색채 정보와 상기 좌표 위치를 둘러싸는 주변 좌표의 주변 색채 정보를 취득하며, 상기 상태 변환 수단이 상기 특정 색채 정보와 상기 주변 색채 정보에 기초하여 상태 정보로 변환을 하는 것을 특징으로 한다.
제 3 발명의 상태 판정 시스템에 의하면, 미리 설정한 특정 포인트의 좌표 위치의 특정 색채 정보뿐만 아니라 이것을 둘러싸는 주변 좌표의 주변 색채 정보를 취득하고, 특정 색채 정보와 상기 주변 색채 정보에 기초하여 상태 정보로 변환을 함으로써, 예를 들면 아날로그 화면 등에서 발생하는 색 번짐이 있어도, 주변 색채 정보로 보완하여 확실하게 상태 정보로 변환을 할 수 있다.
이와 같이 제 3 발명의 상태 판정 시스템에 의하면, 모니터 화면에서 확실하게 상태 정보로 변환을 할 수 있고, 모니터 화면에서 그 화면상의 상태 정보를 쉽고 확실하게 취득할 수 있다.
제 4 발명의 상태 판정 시스템은, 제1 발명에 있어서, 상기 영상 취득 수단에 의해 취득된 상기 모니터 화면의 영상에 대해서 일정 색 수로 변환하는 필터 처리를 실시한 다음, 미리 좌표 위치로서 설정 가능한 특정 제외 포인트 및 특정 포인트의 각각의 색채 정보와 상기 좌표 위치를 둘러싸는 주변 좌표의 주변 색채 정보를 취득하고, 상기 색채 정보와 상기 주변 색채 정보에 기초하여 상기 특정 제외 포인트 및 상기 특정 포인트의 색채를 결정하는 영상 처리 수단을 구비하고, 상기 영상 판정 수단이 상기 영상 처리 수단에 의해 결정된 특정 제외 포인트의 색채에 기초하여 상기 영상이 상태 정보를 취득해야 할 영상인지 판정하며, 상기 상태 변환 수단이 상기 영상 처리 수단에 의해 결정된 특정 포인트의 색채에 기초하여 상태 정보로 변환을 하는 것을 특징으로 한다.
제 4 발명의 상태 판정 시스템에 의하면, 영상 처리 수단에 의해, 영상 취득 수단에 의해 취득된 모니터 화면의 영상에 대하여, 미리 (1) 일정 색 수로 변환하는 필터 처리를 실시하고, (2) 좌표 위치로서 설정 가능한 특정 제외 포인트 및 특정 포인트의 각각의 색채 정보와 상기 좌표 위치를 둘러싸는 주변 좌표의 주변 색채 정보를 취득하고, 색채 정보와 주변 색채 정보에 기초하여 특정 제외 포인트 및 상기 특정 포인트의 색채로 함으로써, 일괄처리에 의한 처리 효율의 향상을 실현하면서, 영상 판정 수단에 의한 영상 판정 처리 및 상태 변환 수단에 의한 상태 변환 처리 정밀도를 향상시킬 수 있다.
이와 같이 제 4 발명의 상태 판정 시스템에 의하면, 효율과 정밀도가 높아 모니터 화면에서 그 화면상의 상태 정보를 쉽고 확실하게 취득할 수 있다.
도 1은 본 발명의 일 실시예에 따른 상태 판정 시스템의 개요를 나타내는 시스템 구성도이다.
도 2는 도 1의 상태 판정 시스템의 처리 내용을 나타내는 흐름도이다.
도 3a 및 도 3b는 도 1의 상태 판정 시스템의 처리 내용을 나타내는 설명도이다.
도 1에 나타난 바와 같이, 본 실시 형태의 상태 판정 시스템(1)은 모니터 X화면상의 상태 정보를 취득하는 시스템으로서, 영상 취득 수단(10)과 영상 처리 수단(15)와 영상 판정 수단(20)과 색채 정보 취득 수단(30)과 상태 변환 수단(40)과 상태 정보 송신 수단(50)을 구비한다.
판정 대상이 되는 모니터 X의 화면은, 예를 들면 숙박시설의 프런트 컴퓨터 Y의 화면으로서, 예를 들면 화면상에는 방마다 구획된 영역에 「재실」, 「공실」, 「청소」, 「예약」 등이 분류해서 표시된다(도 3a 및 도 3b 참조).
영상 취득 수단(10)은 어댑터 장치 W를 통해 모니터 X 상의 화면을 캡쳐하여 취득한다. 어댑터 장치 W는 프런트 컴퓨터 Y와 그 모니터 X를 접속하는 모니터 케이블(VGA 케이블) Z의 아날로그 영상 신호를 일정한 주기로 샘플링한 영상 데이터로서 상태 판정 시스템(1)에 출력한다.
어댑터 장치 W는, 예를 들면 VGA 비디오 캡쳐 보드 외에, 비디오 캡쳐 보드와 아울러 VGA 분배 케이블로서의 기능을 구비하고 있어도 좋다. 또한 어댑터 장치 W는 VGA 케이블로부터의 비디오 캡쳐에 한정되는 것이 아니고 비디오(S-Video 방식 또는 composite 방식) 입출력 케이블에서 캡쳐를 하는 비디오 캡쳐 보드, 디지털 디스플레이용 DVI 캡쳐 보드, 업무용 비디오나 방범 카메라용 SDI 캡쳐 보드, 영상 기기 일반의 HDMI(등록상표) 캡쳐 보드 등이라도 좋다.
영상 처리 수단(15)는 어댑터 장치 W를 통해 취득한 캡쳐 영상(실제로는 소정의 주기로 출력되는 각 캡쳐 영상)에 대해서 필터 처리를 실시한다.
필터 처리는 예를 들면 RGBA 변환으로서, 캡쳐 영상을 특정 색 수에 의한 영상으로 변환한다. 또한, 필터 처리는 RGBA 변환 외, 색 수가 적은 PNG 변환 등이라도 좋다.
영상 판정 수단(20)은 영상 처리 수단(15)에 의해 필터 처리가 실시된 캡쳐 영상이 상태 정보를 취득해야 할 화면인지를 판정한다.
구체적으로, 영상 판정 수단(20)은 필터 처리가 실시된 캡쳐 영상 상의 특정 제외 포인트의 색채 정보에 기초하여 해당 캡쳐 영상이 상태 정보를 취득해야 할 영상인지를 판정한다.
또한, 특정 제외 포인트는 영상 상의 좌표 위치(X, Y)로서 미리 설정 가능하며, 이러한 좌표 위치의 색채 정보(RGB 데이터)를 영상 판정 수단(20)이 취득하고, 이러한 색채 정보(RGB 데이터)가 제외 색(특정 범위의 RGB 성분)일 경우에는 상태 정보를 취득해야 할 영상이 아니라고 판정된다.
색채 정보 취득 수단(30)은 영상 판정 수단(20)에 의해 캡쳐 영상이 상태 정보를 취득해야 할 영상으로 판정된 경우에 해당 캡쳐 영상의 특정 포인트의 색채 정보를 취득한다.
또한, 색채 정보 취득 수단(30)에 의한 (캡쳐 영상 상의) 특정 포인트의 색채 정보 취득 기법에 대해서는 상세 내용을 후술한다.
상태 변환 수단(40)은 색채 정보 취득 수단(30)에 의해 취득된 특정 포인트의 색채 정보(RGB 데이터)를 변환 테이블 등에 의해 상태 정보(「재실」, 「공실」, 「청소」, 「예약」 등)으로 변환한다.
또한, 상태 변환 수단(40)에 의한 색채 데이터에서 상태 정보로의 변환은 상태의 코드 정보로 변환이라도 좋다.
상태 정보 송신 수단(50)은 상태 변환 수단(40)에 의해 변환된 상태 정보(「재실」, 「공실」, 「청소」, 「예약」 등)을 인터넷 등의 네트워크 NW를 통해 외부 서버 등으로 송신한다.
이상의 구성에 있어서 상태 판정 시스템(1)은 예를 들면 CPU(Central Processing Unit), ROM(Read Only memory), RAM(Random Access Memory) 등의 하드웨어에 의해 구성되고 상기 처리 수단(10~50)에 의한 처리를 실행하는 프로그램을 메모리(도시하지 않음)에 기억하여 보유하고, 그 프로그램을 실행함으로써, 상기 제어 처리를 실행하기 위한 연산 장치(시퀀서)로서 기능한다.
다음으로 도 2를 참조하여, 이상과 같이 구성된 상태 판정 시스템(1)에 의한 상태 정보의 취득 처리 방법에 대해서 설명한다.
우선, 상태 판정 시스템(1)은 영상 취득 수단(10)에 의해 어댑터 장치 W를 통해 모니터 X 상의 화면을 캡쳐한 영상(실제로는 일정 주기로 캡쳐한 연속 영상)으로서 취득한다(STEP10/도 2).
다음으로, 상태 판정 시스템(1)은 영상 처리 수단(15)에 의해 STEP10로 취득한 캡쳐 영상에 대해서 필터 처리를 실시하고, 캡쳐 영상을 특정 색 수의 RGB 데이터로 변환한다(STEP15/도 2).
이어서 상태 판정 시스템(1)은 영상 판정 수단(20)에 의해 STEP15로 필터 처리를 실시한 캡쳐 영상(RGBA 데이터 변환이 끝난 상태)에 대해서 그 캡쳐 영상(정확하게는 연속하는 캡쳐 영상의 하나의 프레임 영상)이 상태 정보를 취득해야 할 화면인지를 판정한다(STEP20/도 2).
구체적으로 영상 판정 수단(20)은 도 3a 및 도 3b에 도시된, 특정 제외 포인트(III)의 색채 정보를 취득하고, 취득한 색채 정보(RGB 데이터)가 제외 색(특정 범위의 RGB 성분)인지 판정하며, 제외 색(특정 범위의 RGB 성분)이 아닌 경우에는 상태 정보를 취득해야 할 화면이라고 판정한다(STEP20로 YES/도 2).
예를 들면 도 3a의 경우에는 특정 제외 포인트(III)의 색채 정보에는 다른 조작 화면 등에 특징적인 제외 색이 없기 때문에 상태 정보를 취득해야 할 화면이라고 판정된다.
한편, 영상 판정 수단(20)은 특정 제외 포인트(III)의 색채 정보(RGB 데이터)가 제외 색(특정 범위의 RGB 성분)일 경우에는 상태 정보를 취득해야 할 영상이 아니라고 판정한다(STEP20로 NO/도 2).
예를 들면 도 3b의 경우에는 특정 제외 포인트(III)의 색채 정보에는 다른 조작 화면 등에 특징적인 제외 색이 포함되기 때문에, 상태 정보를 취득해야 할 영상이 아니라고 판정된다.
이와 같이 특정 제외 포인트의 색채 정보에 기초하여 해당 모니터 화면의 영상이 상태 정보를 취득해야 할 영상인지를 판정함으로써, 상태 판정을 해야 할 영상을 쉽고 확실하게 특정할 수 있다.
또한, 특정 제외 포인트는 영상 상의 좌표 위치(X, Y)로서 미리 설정 가능하지만, 특정 제외 포인트는 1점이라도 좋지만 판정 정밀도를 향상시키기 위해서는 복수의 특정 제외 포인트를 설정하고, 복수의 특정 제외 포인트에 색채 정보에 기초하여 상태 정보를 취득해야 할 영상인지를 판정하는 것이 바람직하다.
이것에 의해, 예를 들면 복수의 특정 포인트의 색채 정보 1부에 제외 색이 포함되어 있으면 이것을 상태 정보를 취득해야 할 영상이 아니라고 판정할 수 있고, 다른 조작 화면이 영상 상의 일부에 중첩적으로 표시되어 있을 경우에도 이것을 확실하게 제외할 수 있다.
다음으로 영상 판정 수단(20)에 의해 캡쳐 영상이 상태 정보를 취득해야 할 화면이라고 판정된 경우에는(STEP20로 YES/도 2) 색채 정보 취득 수단(30)에 의해 캡쳐 영상의 특정 포인트의 색채 정보를 취득한다(STEP30/도 2). 예를 들면, 도 3a의 경우에는 특정 포인트(I), (II)의 색채 정보를 취득한다.
한편, 영상 판정 수단(20)에 의해 캡쳐 영상이 상태 정보를 취득해야 할 화면이 아니라고 판정된 경우에는(STEP20로 NO/도 2) STEP10로 리턴한다.
여기서 색채 정보 취득 수단(30)은 미리 201호실 및 202호실에 대응하는 특정 포인트(I) 및 (II)로서 설정된 영상 상의 좌표 위치(X, Y)의 화소(픽셀)의 색채 정보(RGB 데이터)와 함께 그 주위 화소의 색채 정보(RGB 데이터)를 취득한다.
예를 들면 색채 정보 취득 수단(30)은 특정 포인트의 좌표 위치(Xn, Yn)의 색채 정보와 함께 이것을 둘러싼다(Xn-1, Yn-1), (Xn, Yn-1), (Xn+1, Yn-1), (Xn-1, Yn), (Xn+1, Yn), (Xn-1, Yn+1), (Xn, Yn+1), (Xn+1, Yn+1)의 8점의 화소 색채 정보(RGB 데이터)도 취득한다.
다음으로 색채 정보 취득 수단(30)은 취득한 특정 포인트 및 그 주위 색채 정보(RGB 데이터)에 대해서 색채 정보 처리를 실시한다(STEP35/도 2).
여기에서의 색채 정보 처리는 취득한 특정 포인트 및 그 주위 색채 정보(RGB 데이터)에서 그 특정 포인트의 색채(RGB)를 종합적으로 결정하는 것이다.
예를 들면, STEP30로 특정 포인트의 좌표 위치(Xn, Yn)의 색채 정보와 함께 이것을 둘러싼다 (Xn-1, Yn-1), (Xn, Yn-1), (Xn+1, Yn-1), (Xn-1, Yn), (Xn+1, Yn), (Xn-1, Yn+1), (Xn, Yn+1), (Xn+1, Yn+1)의 8점의 화소 주변 색채 정보(RGB 데이터)를 취득하고 있을 경우에는, 이들 9점의 색채 정보(RGB 데이터)를 평균화한 평균 색(RGB)을 산출한다.
이와 같이, 미리 설정한 특정 포인트의 좌표 위치의 특정 색채 정보뿐만 아니라 이것을 둘러싸는 주변 좌표의 주변 색채 정보를 취득하고, 특정 색채 정보와 주변 색채 정보에 기초하여 다음 상태 정보로의 변환을 함으로써, 예를 들면 아날로그 화면 등에서 발생하는 색 번짐이 있어도, 주변 색채 정보로 보완하여 확실하게 상태 정보로 변환을 할 수 있다.
다음으로 상태 변환 수단(40)은 STEP35로 색채 정보 처리가 실시된 특정 포인트의 색채 정보(RGB 데이터)를 상태 정보(「재실」, 「공실」, 「청소」, 「예약」 등)으로 변환한다(STEP40/도 2).
구체적으로는 색채 정보(RGB 데이터)에서 상태 정보로의 변환은 변환 테이블에 의해 실행된다.
예를 들면 변환 테이블은 색채 정보(RGB 데이터)에 따라 빨간색의 경우에는 숙박, 노란색의 경우에는 휴식, 파란색의 경우에는 공실, 녹색의 경우에는 청소 중, 물색의 경우에는 청소 대기, 분홍색의 경우는 유도·회계와 같이 대응 관계가 형성되어 있다.
게다가, 변환 테이블은 위에서 설명한 바와 같이 1 단계의 변환 테이블이라도 좋지만, 일단 변환한 상태를 2 단계에서 재변환하도록 해도 좋다. 예를 들면, 2 단계의 재변환 테이블은, 숙박과 휴식과의 경우는 합쳐서 재실, 청소 중과 청소 대기의 경우는 합쳐서 청소 중과 같이 대응 관계가 형성된다.
이것에 의해 상태의 종류를 적게 할 수 있고 외부 송신할 때 그 종류를 한정할 수 있다.
예를 들면 도 3a의 경우에는, 이러한 변환 테이블에 의해 201호실에 대응하는 특정 포인트(I)에 대해서는, (영상 상 녹색의 영역이며), 대응하는 상태로서 「청소」 또는 그 코드 정보로 변환된다. 동일하게, 202호실에 대응하는 특정 포인트(II)에 대해서는, (영상 상 빨간색의 영역이며), 대응하는 상태로서 「재실」 또는 그 코드 정보로 변환된다.
또한, 상태 변환 수단(40)은 그 캡쳐 영상(정확하게는 연속하는 캡쳐 영상의 1개의 프레임 영상)에 대해서 상태 정보로 변환을 해도 좋지만, 상태 정보가 프레임 주기로 생성되는 것부터 연속하는 캡쳐 영상(예를 들면 10 프레임)의 특정 포인트(I), (II) 가 동일한 경우에만 상태 변환 처리를 실행하도록 하는 것이 바람직하다.
또한, 본 실시 형태에서는 특정 색채(빨간색, 노란색, 파란색, ...)에서 변환 테이블에 의해 대응하는 상태로 변환을 했지만, 이것에 한정되는 것이 아니고 색 값의 차이에 의한 비교 검사 방법을 적용해도 좋다.
이 경우, 색의 불균형 성분(255 단계)으로 인정하는 임계값을 A로 하고, 판정용 테이블의 RGB 각 성분을 RC·GC·BC로 하고, 취득한 RGB값의 각 성분을 RGB로 한다.
그리고,
(R+A)< RC
(R-A)> RC
(G+A)< GC
(G-A)> GC
(B+A)< BC
(B-A)> BC
의 6개의 조건이 모두 참인 경우에 취득한 RGB는 판정용 테이블 RGB에 일치한다고 판정하고 변환을 하도록 해도 좋다. 이것에 의해, 논리식 연산뿐이기 때문에, 처리를 고속화시킬 수 있다.
마지막으로 상태 정보 송신 수단(50)은 STEP40에 의해 변환된 상태 정보(「재실」, 「공실」, 「청소」, 「예약」 등) 또는 그 코드 정보를 특정 포인트(201호실, 202호실)와 관련시켜 인터넷 등의 네트워크 NW를 통해 외부 서버 등으로 송신해(STEP50/도 2), STEP10에 리턴한다.
이상이 상태 판정 시스템(1)에 의한 상태 정보의 취득 처리 방법의 상세이고, 이러한 상태 판정 시스템(1)에 의하면 모니터 X의 화면에서 그 화면상의 상태 정보를 쉽고 확실하게 취득할 수 있다.
또한, 본 실시 형태에서는 판정 대상이 되는 모니터 X의 화면으로서 숙박시설의 프런트 컴퓨터 Y의 화면 예에 대해서 설명했지만, 이것에 한정되는 것이 아니다.
예를 들면 각종 제어 시스템의 모니터 화면이나 주차장의 주차 구획이나 홀 내의 좌석을 촬영한 카메라의 촬영 영상 등에 적용할 수 있다.
또한, 본 실시 형태에서는 STEP35로 특정 포인트 및 그 주위의 색채 정보(RGB 데이터)에 대해서 색채 정보 처리를 실시할 경우에 대해서 설명했지만 이것에 한정되는 것이 아니고, 영상 처리 수단(15)에 의해 (1) STEP15의 필터 처리를 실시함과 동시에, (2) 필터 처리 후의 영상에 대해서 미리 (i) 특정 포인트 및 그 주위 색채 정보와 함께 (ii) 특정 제외 포인트 및 그 주위 색채 정보를 취득하고, 각각에 대해서 색채 정보 처리를 실시하도록 해도 좋다.
이 경우, STEP35의 색채 정보 처리를 영상 처리 수단(15)에 의한 필터 처리와 합쳐서 일괄적으로 수행하게 되어, 처리 효율을 향상시킬 수 있음과 동시에, 특정 제외 포인트에 의한 STEP20의 상태 정보를 취득해야 할 화면인지 아닌지의 판정 정밀도를 향상시킬 수 있다.
1: 상태 판정 시스템
10: 영상 취득 수단
20: 영상 판정 수단
30: 색채 정보 취득 수단
40: 상태 변환 수단
50: 상태 정보 송신 수단
X: 모니터 화면
Y: 프런트 컴퓨터
Z: 모니터 케이블
W: 어댑터 장치
NW: 네트워크

Claims (5)

  1. 모니터 화면상의 상태 정보를 취득하는 상태 판정 시스템에 있어서,
    상기 모니터 화면을 캡쳐하여 영상으로서 연속적으로 취득하는 영상 취득 수단;
    상기 영상 취득 수단에 의해 취득된 상기 영상에 대하여, 상기 영상이 상태 정보를 취득해야 할 영상인지를 판정하는 영상 판정 수단;
    상기 영상 판정 수단에 의해 상기 영상이 상태 정보를 취득해야 할 영상이라고 판정된 경우에, 상기 영상의 특정 포인트의 색채 정보를 취득하는 색채 정보 취득 수단; 및
    상기 색채 정보 취득 수단에 의해 취득된 상기 특정 포인트의 색채 정보를 상태 정보로 변환하는 상태 변환 수단을 포함하고,
    상기 상태 변환 수단은,
    상기 특정 포인트의 색채 정보가 상기 연속적으로 취득한 복수 개의 영상 간에 동일한 경우에만, 상기 색채 정보 취득 수단에 의해 취득된 상기 특정 포인트의 색채 정보를 대응하는 상태 정보로 변환하는 것을 특징으로 하는 상태 판정 시스템.
  2. 제 1 항에 있어서,
    상기 영상 판정 수단은,
    상기 영상 취득 수단에 의해 취득된 상기 모니터 화면의 영상에 대해서, 미리 좌표 위치로서 설정 가능한 특정 제외 포인트의 색채 정보를 취득하고, 상기 특정 제외 포인트의 색채 정보에 기초하여 상기 영상이 상태 정보를 취득해야 할 영상인지를 판정하는 것을 특징으로 하는 상태 판정 시스템.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 색채 정보 취득 수단은, 상기 특정 포인트를 좌표 위치로서 미리 설정 가능하며, 상기 좌표 위치의 특정 색채 정보와 상기 좌표 위치를 둘러싸는 주변 좌표의 주변 색채 정보를 취득하고,
    상기 상태 변환 수단은, 상기 주변 색채 정보에 기초하여 상기 특정 색채 정보를 보완하여 상태 정보로 변환을 하는 것을 특징으로 하는 상태 판정 시스템.
  4. 제 1 항에 있어서,
    상기 영상 취득 수단에 의해 취득된 상기 모니터 화면의 영상에 대하여, 일정 색 수로 변환하는 필터 처리를 실시한 다음, 미리 좌표 위치로서 설정 가능한 특정 제외 포인트 및 특정 포인트의 각각의 색채 정보와 상기 좌표 위치를 둘러싸는 주변 좌표의 주변 색채 정보를 취득하고, 상기 주변 색채 정보에 기초하여 상기 색채 정보를 보완하여 상기 특정 제외 포인트 및 상기 특정 포인트의 색채를 결정하는 영상 처리 수단을 구비하고,
    상기 영상 판정 수단은, 상기 영상 처리 수단에 의해 결정된 특정 제외 포인트의 색채에 기초하여 상기 영상이 상태 정보를 취득해야 하는 영상인지를 판정하며,
    상기 상태 변환 수단은, 상기 영상 처리 수단에 의해 결정된 특정 포인트의 색채에 기초하여 상태 정보로 변환을 하는 것을 특징으로 하는 상태 판정 시스템.
  5. 제 1 항에 있어서,
    상기 상태 변환 수단은,
    상기 색채 정보 취득 수단에 의해 취득된 상기 특정 포인트의 색채 정보를 미리 설정된 변환 테이블을 이용하여 대응하는 상태 정보로 변환하거나, 또는
    상기 색채 정보 취득 수단에 의해 취득된 상기 특정 포인트의 색채 정보의 성분값과 임계값과의 차이를 판정용 테이블의 성분값과 비교함으로써 대응하는 상태 정보로 변환하는 것을 특징으로 하는 상태 판정 시스템.
KR1020167030465A 2015-01-28 2015-12-28 상태 판정 시스템 KR101926748B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2015-014475 2015-01-28
JP2015014475A JP5818050B1 (ja) 2015-01-28 2015-01-28 ステータス判定システム
PCT/JP2015/086512 WO2016121288A1 (ja) 2015-01-28 2015-12-28 ステータス判定システム

Publications (2)

Publication Number Publication Date
KR20160140870A KR20160140870A (ko) 2016-12-07
KR101926748B1 true KR101926748B1 (ko) 2018-12-07

Family

ID=54602150

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167030465A KR101926748B1 (ko) 2015-01-28 2015-12-28 상태 판정 시스템

Country Status (7)

Country Link
US (1) US9934593B2 (ko)
EP (1) EP3252711A4 (ko)
JP (1) JP5818050B1 (ko)
KR (1) KR101926748B1 (ko)
CN (1) CN106255991B (ko)
SG (1) SG11201609127XA (ko)
WO (1) WO2016121288A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6226352B1 (ja) 2017-02-28 2017-11-08 ビックリック株式会社 遠隔操作システム
JP2019153073A (ja) * 2018-03-02 2019-09-12 東芝テック株式会社 情報処理装置、及び情報処理プログラム
JP7051147B1 (ja) 2020-12-17 2022-04-11 株式会社コンフォール 宿泊施設の客室管理システム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002183720A (ja) * 2000-12-19 2002-06-28 Koito Ind Ltd 乗車状況判定装置
JP2008218737A (ja) * 2007-03-05 2008-09-18 Denso Corp 画像処理装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1040292A (ja) 1996-07-26 1998-02-13 Tec Corp 宿泊施設におけるフロント業務処理装置
EP1758002B1 (en) * 2000-03-17 2009-07-29 Digital Electronics Corporation Control server, control terminal, control system, and recording medium storing control communication program
US6774908B2 (en) * 2000-10-03 2004-08-10 Creative Frontier Inc. System and method for tracking an object in a video and linking information thereto
EP1288860A1 (de) * 2001-09-03 2003-03-05 Agfa-Gevaert AG Verfahren zur Verarbeitung digitaler fotografischer Bilddaten, welches ein Verfahren zum automatischen Erkennen von rote-Augen-Defekten umfasst
US7346210B2 (en) * 2001-12-28 2008-03-18 Nikon Corporation Image processing device and image processing program for determining similarity factors of pixels
JP2003337848A (ja) * 2002-05-17 2003-11-28 Dainippon Ink & Chem Inc 色指定サーバ，色指定受発注システム，色指定方法，色指定受発注方法及びそのプログラム
WO2008015903A1 (fr) * 2006-08-04 2008-02-07 Konica Minolta Medical & Graphic, Inc. procédé d'affichage d'image et dispositif d'affichage d'image
JP2009294925A (ja) * 2008-06-05 2009-12-17 Nippon Telegr & Teleph Corp <Ntt> 属性推定システムおよび属性推定方法
US20100049664A1 (en) * 2008-08-21 2010-02-25 Yi-Hsuan Kuo Method and system for user-defined alerting of securities information
JP5471749B2 (ja) * 2010-04-09 2014-04-16 ソニー株式会社 コンテンツ検索装置および方法、並びにプログラム
DE102010036290A1 (de) * 2010-08-27 2012-03-01 Siemens Aktiengesellschaft Vorrichtung zur graphischen Visualisierung von Systemzuständen
EP2688033B1 (en) * 2011-03-18 2017-12-20 Mitsubishi Electric Corporation In-train information display device, in-train information display system and advertisement display results assessment method
US20120258436A1 (en) * 2011-04-08 2012-10-11 Case Western Reserve University Automated assessment of cognitive, fine-motor, and memory skills
JP6279825B2 (ja) * 2011-05-18 2018-02-14 ソニー株式会社 画像処理装置、画像処理方法、プログラムおよび撮像装置
JP4922472B1 (ja) * 2011-09-29 2012-04-25 楽天株式会社 情報処理装置、情報処理方法、情報処理装置用プログラム、および、記録媒体
CN102663743B (zh) * 2012-03-23 2016-06-08 西安电子科技大学 一种复杂场景中多摄影机协同的人物追踪方法
JP5729345B2 (ja) * 2012-04-10 2015-06-03 株式会社デンソー 感情モニタリングシステム
US10147025B2 (en) * 2012-07-17 2018-12-04 Shockwatch, Inc. Visual indicator status recognition
US20150026718A1 (en) * 2013-07-19 2015-01-22 United Video Properties, Inc. Systems and methods for displaying a selectable advertisement when video has a background advertisement
CN103761941B (zh) * 2014-01-29 2016-05-18 京东方科技集团股份有限公司 一种减少影像残留方法、装置及显示装置
CN103955938B (zh) * 2014-05-15 2017-03-08 安徽农业大学 一种基于移动互联网模式和叶片颜色分析的小麦生长状态诊断方法
EP3146493A4 (en) * 2014-05-23 2017-11-15 Neumitra Inc. Operating system with color-based health state themes

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002183720A (ja) * 2000-12-19 2002-06-28 Koito Ind Ltd 乗車状況判定装置
JP2008218737A (ja) * 2007-03-05 2008-09-18 Denso Corp 画像処理装置

Also Published As

Publication number Publication date
JP2016139317A (ja) 2016-08-04
SG11201609127XA (en) 2016-12-29
EP3252711A4 (en) 2018-06-13
CN106255991B (zh) 2019-03-12
KR20160140870A (ko) 2016-12-07
JP5818050B1 (ja) 2015-11-18
EP3252711A1 (en) 2017-12-06
CN106255991A (zh) 2016-12-21
US20170046853A1 (en) 2017-02-16
US9934593B2 (en) 2018-04-03
WO2016121288A1 (ja) 2016-08-04

Similar Documents

Publication Publication Date Title
US10699473B2 (en) System and method for generating a virtual viewpoint apparatus
CN108293105B (zh) 监控装置、监控系统以及监控方法
US20110081087A1 (en) Fast Hysteresis Thresholding in Canny Edge Detection
CN110503725B (zh) 图像处理的方法、装置、电子设备及计算机可读存储介质
US20140340515A1 (en) Image processing method and system
US20150278996A1 (en) Image processing apparatus, method, and medium for generating color image data
KR101926748B1 (ko) 상태 판정 시스템
US20120113238A1 (en) Drawn image sharing apparatus, drawn image sharing system, and drawn image sharing method
US20190246048A1 (en) Image processing apparatus, image processing method, and storage medium
JP6191160B2 (ja) 画像処理プログラムおよび画像処理装置
WO2019210707A1 (zh) 一种图像清晰度评测方法、装置及电子设备
KR20170107269A (ko) Rgbd 카메라의 깊이 영상 필터링 장치 및 방법
JPWO2017013986A1 (ja) 情報処理装置、端末、遠隔通信システム、および、情報処理プログラム
JP2019091169A (ja) 画像処理装置、画像処理装置の制御方法及びプログラム
US20210190594A1 (en) Personal electronic device with built-in visible camera and thermal sensor with thermal information available in the visible camera user interface and display
US20220294983A1 (en) Imaging apparatus, operation method of imaging apparatus, program, and imaging system
US20180114367A1 (en) Computer-readable recording medium, imaging control method, and information processing apparatus
US20180061135A1 (en) Image display apparatus and image display method
CN112702586B (zh) 基于可见光的投影仪虚拟触控跟踪方法、装置及系统
CN107517367B (zh) 拜尔域图像插值方法、装置、图像处理芯片及存储装置
CN113870768A (zh) 显示补偿方法和装置
JPWO2019167277A1 (ja) 画像収集装置、画像収集システム、画像収集方法、画像生成装置、画像生成システム、画像生成方法、およびプログラム
JP2016072939A (ja) ユーザの撮影を支援する方法、携帯式電子機器およびコンピュータ・プログラム
KR101280840B1 (ko) 프리젠테이션 시스템의 스크린상에서 레이저 포인트 위치 좌표 인식 방법
US9336586B2 (en) Image processing apparatus and image processing method using compressed image data or partial image data

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant