KR20240043054A

KR20240043054A - 판매 데이터 처리 장치 및 회계 장치

Info

Publication number: KR20240043054A
Application number: KR1020230072066A
Authority: KR
Inventors: 다쿠야 다카스
Original assignee: 도시바 테크 가부시키가이샤
Priority date: 2022-09-26
Filing date: 2023-06-05
Publication date: 2024-04-02
Also published as: CN117765671A; EP4343656A1; US20240104538A1; JP2024046874A

Abstract

조작 미스나 부정 행위를 검지하기 위한 카메라의 촬상 내용이 이상한 경우에 판매 데이터 처리에 대한 문제의 발생을 방지한다.
판매 데이터 처리 장치는, 거래 대상인 상품의 정보를 소정의 기억부에 기억시키는 등록 처리를 행하는 등록부와, 상기 등록부가 등록한 상품의 결제에 관련한 결제 처리를 행하는 결제부와, 조작자에 의한 조작을 접수하는 조작부와, 카메라에 의해 상기 조작자가 비치는 범위를 촬상한 화상의 해석에 의해 얻어지는 정보이며 상기 카메라의 촬상 방향이 기준으로부터 어긋나 있는 것을 나타내는 정보를 취득하는 취득부와, 상기 취득부가 상기 정보를 취득하면, 조작자에 의한 부정한 조작을 방지하기 위한 대책 처리를 행하는 대책부를 구비한다.

Description

판매 데이터 처리 장치 및 회계 장치{SALES DATA PROCESSOR AND ACCOUNTING DEVICE}

본 발명의 실시 형태는 판매 데이터 처리 장치 및 회계 장치에 관한 것이다.

종래, 쇼핑객이 조작자가 되어 상품의 등록 처리나 결제 처리에 관련한 조작을 행하는 셀프 타입의 POS(Point Of Sales) 단말기나, 상품 등록의 후의 결제 처리에 관련한 조작을 쇼핑객이 조작자가 되어 행하는 세미 셀프 타입의 POS 단말기가 알려져 있다. 이러한 POS 단말기에는, 조작자를 촬상하는 카메라를 구비하고, 카메라가 출력하는 화상으로부터 조작자의 조작 미스나 부정 행위를 발견 가능하게 하고 있는 것이 있다. 이러한 카메라는 POS 단말기의 메인 하우징에 내장되지 않는 경우, 예를 들어 메인 하우징의 상방으로부터 촬상하도록 배치되는 경우가 많다. 또한, 그러한 카메라는 촬상 방향을 적절히 조절 가능하게 구성된다.

상술한 바와 같은 구성의 POS 단말기가 사용된 점포에 있어서, 악의적인 고객 등이, 부정 행위가 비치지 않도록 카메라의 방향을 변경해 버리는 경우가 있다. 또한, 지진의 영향으로 카메라의 방향이 어긋나버리는 일도 생각된다.

여기서, 특허문헌 1은 감시 카메라의 촬상 위치가 바뀐 것을 검지해서 이상을 알리는 시스템을 개시하고 있다. 또한, 이 시스템의 감시 대상은 POS 단말기에의 조작에 한정되지 않는다.

일본특허공개 제2001-359086호 공보

본 발명이 해결하고자 하는 과제는 조작 미스나 부정 행위를 검지하기 위한 카메라의 촬상 내용이 이상한 경우에 판매 데이터 처리에의 문제(비정상적인 현상 등)의 발생을 방지 가능한 판매 데이터 처리 장치나 회계 장치를 제공하는 것이다.

실시 형태의 판매 데이터 처리 장치는, 거래 대상인 상품의 정보를 소정의 기억부에 기억시키는 등록 처리를 행하는 등록부와, 상기 등록부가 등록한 상품의 결제에 관련한 결제 처리를 행하는 결제부와, 조작자에 의한 조작을 접수하는 조작부와, 카메라에 의해 상기 조작자가 비치는 범위를 촬상한 화상의 해석에 의해 얻어지는 정보이며 상기 카메라의 촬상 방향이 기준으로부터 어긋나 있는 것을 나타내는 정보를 취득하는 취득부와, 상기 취득부가 상기 정보를 취득하면, 조작자에 의한 부정한 조작을 방지하기 위한 대책 처리를 행하는 대책부를 구비한다.

도 1은 실시 형태에 따른 셀프 POS 단말기의 조작자측에서 본 외관의 일례를 도시하는 사시도이다.
도 2는 실시 형태에 따른 셀프 POS 단말기의 하드웨어 구성의 일례를 나타내는 도면이다.
도 3은 실시 형태에 따른 셀프 POS 단말기 및 서버의 기능 구성의 일례를 도시하는 도면이다.
도 4는 실시 형태에 따른 카메라의 촬상 화상의 일례를 도시하는 도면이다.
도 5는 실시 형태에 따른 카메라의 촬상 화상의 일례를 도시하는 도면이다.
도 6은 실시 형태에 따른 셀프 POS 단말기에 있어서 실행되는 처리의 일례를 나타내는 흐름도이다.

(제1 실시 형태)

실시 형태에 대해서 도면을 사용해서 설명한다. 도 1은 실시 형태에 따른 셀프 POS 단말기(10)의 조작자측에서 본 외관의 일례를 도시하는 사시도이다. 셀프 POS 단말기(10)는 상품의 등록이나 결제에 관련한 처리를 쇼핑객이 조작자가 되어 행하는 셀프 타입의 POS(Point Of Sales) 단말기이며, 판매 데이터 처리 장치의 일례이다.

또한, 실시 형태에 따른 기술은, 상품 등록 후의 결제 처리에 관련한 조작을 쇼핑객이 조작자가 되어 행하는 세미 셀프 타입의 POS 단말기(회계 장치의 일례)에 대하여 적용할 수도 있다. 여기에서의 결제 처리에 앞서는 등록 처리는, 예를 들어 통상의 POS 단말기에의 점원의 조작에 의해 행해진다. 또한, 등록 처리는, 쇼핑객 자신에 의해 행해지는 경우도 있다. 쇼핑객은, 예를 들어 쇼핑객이 소지한 스마트폰으로 기동된 POS 애플리케이션이나, 카트 POS(점포 내 비치된 카트에 부속된 단말기)에의 쇼핑객의 조작 등에 의해, 상품의 등록을 행한다.

셀프 POS 단말기(10)는 본체(11), 바구니 거치대(12), 봉투 포장대(13)를 갖는다. 본체(11)는 바구니 거치대(12) 및 봉투 포장대(13) 사이에 마련된다. 바구니 거치대(12)는 거래 대상의 상품이 들어간 바구니 등을 놓기 위한 보관대이다. 봉투 포장대(13)는 쇼핑백을 개방한 상태에서 걸 수 있는 보관대이다. 쇼핑백에는, 등록이 끝난 상품을 넣을 수 있다. 즉 봉투 포장대(13)에는 등록된 상품이 적재된다.

봉투 포장대(13)는 받침대(131), 봉투걸이 훅(132) 및 일시 거치대(133)를 갖는다. 봉투걸이 훅(132) 및 일시 거치대(133)는 받침대(131)에 마련된 지주(134)에 지지되어, 받침대(131)의 상방에 마련되어 있다. 봉투걸이 훅(132)은 등록 후의 상품을 넣는 봉투를 현수하는 훅이다. 받침대(131)는 봉투의 바닥을 지지하거나, 예를 들어 봉투보다 커서 봉투에 넣기에 적합하지 않은 등의 상품이 적재되는 대이다. 일시 거치대(133)는, 예를 들어 깨지기 쉽다는 등의 이유로 봉투 포장에 주의를 요하는 상품을 일시적으로 적재하는 대이다.

셀프 POS 단말기(10)는, 더욱 계량부(14), 입출금부(15), 스캐너(16), 터치 패널 디스플레이(17), 표시등(18), 카드 리더(19), 프린터(20), 카메라(21)를, 구비하고 있다.

계량부(14)는 봉투 포장대(13)에 마련되어 있다. 계량부(14)는 내장한 중량 센서의 출력에 기초하여, 봉투 포장대(13)에 적재된 상품 등의 물품의 중량을 계량한다. 예를 들어, 계량부(14)는 봉투 포장대(13)에 세트된 봉투나, 봉투 안에 넣어진 상품 등의 합계 중량을, 계량한다. 중량 센서는, 예를 들어 받침대(131)의 하방에 마련되어, 받침대(131)를 지지하고, 받침대(131)가 받는 부하에 따른 신호를 출력한다.

입출금부(15)는, 예를 들어 본체(11)의 상하 방향 중앙부에 마련되어 있다. 입출금부(15)는 쇼핑객이 지불하는 경화나 지폐의 투입을 접수하고, 거스름돈 등을 배출한다. 또한, 예를 들어 셀프 POS 단말기(10)가 현금을 취급하지 않는 캐시리스 단말기로서 구성되는 경우 등에는, 입출금부(15)는 마련되지 않아도 상관없다.

스캐너(16)는, 예를 들어 본체(11)의 상부에 마련되어 있다. 스캐너(16)는, 판독 창(161)을 갖는다. 스캐너(16)는, 예를 들어 판독 창(161)에 찍힌 상품에 부착되어 있는 무선 태그나 바코드 등의 코드 심볼로부터 상품 정보를 판독한다. 무선 태그는, RF(Radio Frequency) 태그 등의 전자 태그이다. 무선 태그는, 정보를 기억하는 IC(Integrated Circuit) 칩과 안테나를 갖는다. 무선 태그는, 무선 태그 판독 장치로부터 수신한 전파에 따라서 IC 칩에 기억되어 있는 태그 정보를 송신한다. 예를 들어, 무선 태그에는 무선 태그가 부착되어 있는 상품에 관한 상품 정보가 기억되어 있다. 상품 정보에는, 예를 들어 상품을 식별 가능한 상품 코드가 포함되어 있다.

또한, 스캐너(16)는, 예를 들어 판독 창(161)에 찍힌 상품을 촬상하도록 구성된 카메라를 갖고 있어도 된다. 스캐너(16)의 카메라는, 예를 들어 CMOS(Complementary Metal-Oxide Semiconductor), CCD(Charge Coupled Device) 등의 촬상 소자를 포함한다. 판독 창(161)은, 스캐너(16)의 카메라에 의해 촬상되는 광을 투과 가능하다. 스캐너(16)의 카메라가 촬상한 상품의 화상 데이터는, 화상 처리 장치에 의한 오브젝트 인식 처리에 제공된다. 이에 의해, 화상 데이터에 포함되는 상품이 특정되어, 등록된다. 또한, 화상 처리 장치는, 예를 들어 통신 I/F(interface, 인터페이스)를 통해 셀프 POS 단말기(10)와 통신 가능하게 접속된 외부 장치이다. 또한, 오브젝트 인식 처리는, 셀프 POS 단말기(10)에 의해 실행되어도 상관없다.

터치 패널 디스플레이(17)는, 예를 들어 본체(11)의 상방에 마련되어 있다. 터치 패널 디스플레이(17)는, 조작자용 각종 정보를 화면에 표시하고, 쇼핑객에 의한 조작을 접수한다.

표시등(18)은, 예를 들어 본체(11)의 후방에 마련되어 있다. 표시등(18)은, 셀프 POS 단말기(10)에 이상이 발생한 것 등을 점원에게 통지하는 전등이다.

카드 리더(19)는, 예를 들어 본체(11)에 있어서 스캐너(16)의 측방에 마련되어 있다. 카드 리더(19)는 크레디트 카드 등의 카드가 기억하는 정보를 판독한다.

프린터(20)는, 예를 들어 본체(11)의 하우징의 내부에 마련되어 있다. 프린터(20)는, 한 거래의 명세가 표시된 리시트나, 상품의 할인 등의 쿠폰을 리시트 용지 등에 인자하는 인자 장치이다. 프린터(20)는 본체(11)의 정면에, 리시트 배출부를 갖는다. 리시트 배출부는 프린터(20)가 발행한 리시트 등을 셀프 POS 단말기(10)의 외부로 배출하는 배출구이다. 리시트 배출부는, 예를 들어 본체(11)에 있어서 입출금부(15)와 스캐너(16) 사이에 마련되어 있다.

카메라(21)는 셀프 POS 단말기(10)의 조작자가 비치는 범위를 촬상하도록 구성된 카메라이다. 카메라(21)는, 예를 들어 CMOS, CCD 등의 촬상 소자를 포함한다. 카메라(21)가 촬상한 화상 데이터는, 화상 처리부에 의한 해석 처리(후술)에 제공된다.

도 2는 실시 형태에 따른 셀프 POS 단말기(10)의 하드웨어 구성의 일례를 도시하는 도면이다. 셀프 POS 단말기(10)는, 더욱 모터(22), CPU(Central Processing Unit)(101), ROM(Read Only Memory)(102), RAM(Random Access Memory)(103), 기억부(104) 및 통신 I/F(interface, 인터페이스)(105)를, 구비하고 있다.

계량부(14), 입출금부(15), 스캐너(16), 터치 패널 디스플레이(17), 표시등(18), 카드 리더(19), 프린터(20), 카메라(21), 모터(22), CPU(101), ROM(102), RAM(103), 기억부(104) 및 통신 I/F(105)는 데이터 버스나 어드레스 버스 등의 시스템 버스(109)를 통해 서로 접속된다.

모터(22)(카메라(21)의 촬상 방향을 바꾸는 구동부의 일례)는, 전력으로 가동해서 회전하는 것이며, 당해 회전은 카메라(21)의 방향을 조정 가능하게 지지하는 지지부에 전달된다. 모터(22)의 제어에 의해, 카메라(21)의 촬상 각도는 자동적으로 변경 가능하다. 카메라(21)의 방향이 바뀌는 것에 의해, 촬상되는 범위가 변한다.

기억부(104)는 HDD(Hard Disk Drive)나 SSD(Solid State Drive), 플래시 메모리 등의 기억 장치이다. 기억부(104)는 제어 프로그램이나 상품 마스터 등을 기억한다. 제어 프로그램은 오퍼레이팅 시스템이나, 셀프 POS 단말기(10)가 갖는 각종 기능을 발휘시키기 위한 프로그램이다.

상품 마스터는 상품을 식별 가능한 식별 정보인 상품 코드에 연관지어, 상품의 정보(상품 정보)를 기억하고 있다. 상품 정보는, 예를 들어 상품의 명칭이나, 가격, 상품의 중량값 등이다. 또한, 셀프 POS 단말기(10)에 있어서 오브젝트 인식 처리가 실행되는 경우, 상품 마스터에, 상품 정보로서, 대조용 특징량의 정보가 관련지어져 있어도 된다. 대조용 특징량은, 상품의 외관 특징을 나타내는 대조용 정보이다. 대조용 특징량은 상품의 표준적인 형상, 표면의 색조, 모양, 요철 상황 등의 외관의 특징을 파라미터화한 것이다.

CPU(101)는 프로세서이다. ROM(102)은 각종 프로그램이나 데이터를 기억하는 기억 매체이다. RAM(103)은 각종 프로그램이나 각종 데이터를 일시적으로 기억하는 기억 매체이다. CPU(101)는 RAM(103)을 워크 에어리어(작업 영역)로서 ROM(102) 또는 기억부(104) 등이 기억하는 각종 프로그램을 실행함으로써, 제어부(110)(도 3 참조, 후술)를 실현한다. 제어부(110)는 셀프 POS 단말기(10)의 각 부를 통괄적으로 제어한다.

또한, 제어부(110)의 프로세서로서는, CPU(101)에 한하지 않고, GPU(Graphics Processing Unit)나 ASIC(Application Specific Integrated Circuit), FPGA(Field Programmable Gate Array) 등의 다른 프로세서가 이용되어도 상관없다.

통신 I/F(105)는 셀프 POS 단말기(10)가 네트워크를 통해서 외부 장치와 통신하기 위한 인터페이스이다.

외부 장치의 일례는 서버(300)이다. 서버(300)는 CPU나 ROM, RAM, 기억부 등을 구비하는 컴퓨터 구성의 장치이다. 서버(300)의 CPU는 ROM이나 기억부에 기억된 프로그램을 실행함으로써, 제어부(310)(도 3 참조, 후술)를 실현한다.

또한, 기타 외부 장치로서, 예를 들어 셀프 POS 단말기(10)를 관리하는 점원 등의 관리자가 조작하는 정보 처리 장치(이하, 관리 장치로 한다)가 있다. 관리 장치는, 예를 들어 PC(Personal Computer, 퍼스널 컴퓨터)나 태블릿형 단말기, 스마트폰 등이다. 관리 장치는, 예를 들어 복수의 셀프 POS 단말기(10)에 접속되어 있다. 또한, 네트워크를 통해서 서로 접속된 복수의 셀프 POS 단말기(10) 중 임의인 셀프 POS 단말기(10)를 관리 장치로서 이용할 수도 있다. 관리 장치는 셀프 POS 단말기(10)로부터의 통보 정보에 기초하여 부정 검지를 점원에게 통보한다.

또 다른 외부 장치로서는, 예를 들어 오브젝트 인식 처리 등의 화상 처리를 실행하는 화상 처리 장치가 있을 수 있다.

도 3은 실시 형태에 따른 셀프 POS 단말기(10) 및 서버(300)의 기능 구성의 일례를 도시하는 도면이다.

셀프 POS 단말기(10)의 제어부(110)는 판독부(111), 등록부(112), 조작부(113), 결제부(114), 촬상부(115), 취득부(116), 대책부(117) 등의 각종 기능부로서 기능한다. 또한, 서버(300)의 제어부(310)는 화상 처리부(311)로서 기능한다.

또한, 본 실시 형태에서 셀프 POS 단말기(10)의 제어부(110)가 실현하는 기능의 일부 또는 전부는, 셀프 POS 단말기(10)의 외부 장치와의 협동에 의해 실현되어도 되고, 셀프 POS 단말기(10)에 탑재된 전용 회로 등의 하드웨어 구성에 의해 실현되어도 상관없다.

판독부(111)는, 스캐너(16)를 통해, 상품에 부착된 무선 태그나 바코드 등의 코드 심볼로부터 상품 코드를 판독하고, 이것을 출력한다. 또한, 판독부(111)는 스캐너(16)의 카메라가 촬상한 화상 데이터에 기초한 오브젝트 인식에 의해 상품을 특정해도 된다.

등록부(112)는 판독부(111)가 출력한 상품 코드에 기초하여 상품 마스터로부터 정보(상품 정보)를 취득하고, 취득한 상품 정보를 등록한다. 여기서, 등록이란, 취득한 상품 정보를, 소정의 기억 영역(예를 들어 기억부(104)에 마련된다)에, 판매 데이터로서 기억시키는 것이다. 또한, 등록부(112)는 판독부(111)가 출력하는 상품 정보에 구애받지 않고, 터치 패널 디스플레이(17)로의 조작 입력에 의해 특정된 상품을 등록해도 된다.

조작부(113)는 조작자에 의한 조작을 접수한다. 보다 구체적으로는, 조작부(113)는, 터치 패널 디스플레이(17)가 받은 조작 입력에 따른 신호를 출력한다.

결제부(114)는 등록부(112)가 등록한 상품의 결제에 관련한 처리(결제 처리)를 행한다. 예를 들어, 결제부(114)는 등록부(112)가 등록한 상품의 가격의 합계액을 산출한다. 또한, 결제부(114)는 입출금부(15)에 투입된 금액으로부터 상기 합계액을 감산하여, 거스름돈을 산출한다. 그리고, 결제부(114)는 입출금부(15)에 거스름돈을 배출시킨다.

촬상부(115)는 카메라(21)에 의해 셀프 POS 단말기(10)의 조작자가 비치는 범위를 촬상해서 화상을 출력한다. 보다 구체적으로는, 촬상부(115)는 카메라(21)를 제어하고, 카메라(21)가 출력하는 촬상 화상을 서버(300) 등으로 출력(송신)한다. 또한, 셀프 POS 단말기(10)의 조작자가 비치는 범위란, 조작자가 있다고 상정되는 위치를 포함하는 범위이며, 조작부(113)의 맞은편 근처에서, 셀프 POS 단말기(10)의 정면측이다.

서버(300)의 화상 처리부(311)는, 카메라(21)의 촬상 화상을 해석하는 처리(해석 처리)를 실행한다. 해석 처리에 있어서, 화상 처리부(311)는, 예를 들어 특징점을 사용해서 촬상 화상을 해석하고, 그 결과(해석 결과)로부터, 촬상 방향이 기준으로부터 어긋난 것인지 여부를 판단하고, 그 결과(판단 결과)를 나타내는 정보를, 셀프 POS 단말기(10)로 출력(송신)한다.

특징점을 사용한 화상 해석에 대해서 개략적으로 설명한다. 특징점의 추출이나 비교에는, 예를 들어 SIFT(Scale-Invariant Feature Transform, 스케일 불변의 특징 변환)를 사용한다. 또한, 특징점의 추출이나 비교는, 템플릿 매칭이나 딥 러닝 등의 다른 방법에 의해 행해져도 상관없다.

해석 처리에 있어서, 화상 처리부(311)는, 예를 들어 먼저, 촬상 화상으로부터 특징점을 복수 개소 선출하고, 그들 특징점의 좌표 및 패턴 등의 특징량을 기록한다. 해석 처리의 대상으로 하는 촬상 화상은, 기준의 것과, 운용 중인 것이다. 기준이 되는 촬상 화상은, 셀프 POS 단말기(10)의 설치 시의 것이나, 혹은 개점 전의 기동 시 등의 것이다. 또한, 운용 중인 촬상 화상은, 등록 처리나 결제 처리가 행해지고 있는 동안의 것이다.

다음에 화상 처리부(311)는 기준이 되는 촬상 화상으로부터 추출된 특징점의 좌표 및 패턴 등의 특징량과, 운용 중인 촬상 화상으로부터 추출된 특징점의 좌표 및 패턴 등의 특징량을 비교한다. 비교에 의해, 화상 처리부(311)는, 특징점의 대조(매칭)를 행한다. 대조에 있어서 화상 처리부(311)는, 패턴이 비슷한지의 정도를 수치(유사도)로 반영하여, 유사도가 높은 특징점을 대응하는 것이라고 판단한다.

다음에 화상 처리부(311)는 상기 대조에 관련한 처리에 있어서 대응한다고 여겨진 특징점의 좌표가, 기준이 되는 촬상 화상의 것과 운용 중인 촬상 화상의 것에서 다른지를 판단하여, 다르면, 그 정도를 판단한다.

예를 들어 화상 처리부(311)는, 좌표의 위치의 차가 역치를 초과하는지의 여부를 판단한다. 역치는 어긋남을 허용하는 한계의 값으로서 적합한 값이며, 미리 설정되고, 소정의 기억 영역(예를 들어 기억부(104))에 기억되어 있다. 다음에 화상 처리부(311)는 특징점의 좌표의 위치의 차가 역치를 초과한 경우, 카메라(21)의 방향이 어긋나 있다고 판단한다.

상기 처리를, 도면을 참조하여 설명한다. 도 4 및 도 5는 실시 형태에 따른 카메라(21)의 촬상 화상의 일례를 도시하는 도면이며, 도 4는 기준이 되는 촬상 화상(510)의 일례이고, 도 5는 운용 중인 촬상 화상(520)의 일례이다. 도 4 및 도 5가 나타내는 촬상 화상(510, 520)에는, 점포 안의 모습이 비치고 있다. 운용 중인 촬상 화상(520)은, 기준이 되는 촬상 화상(510)보다도, 방향에 있어서 약간 좌측의 범위를 비춘 것으로 되어 있다. 즉, 운용 중인 카메라(21)의 방향은, 기준 시보다, 약간 왼쪽으로 어긋나 있다.

도 4에 도시한 바와 같이, 기준이 되는 촬상 화상(510)으로부터, 특징점 A 내지 E가 선출되어 있다고 하자. 또한, 도 5에 도시한 바와 같이, 운용 중인 촬상 화상(520)으로부터는, 기준이 되는 촬상 화상(510)의 것과 대응하는 특징점 A, C, D가 선출되어 있다. 이와 같이, 특징점의 대응지음은, 기준인 촬상 화상(510)이 포함하는 모든 특징점이 운용 중인 촬상 화상(520)에도 포함되어 있을 필요는 없고, 몇 가지가 포함되어 있으면 충분한다.

이 경우, 양 촬상 화상(510, 520)에 있어서의 특징점 A, C, D의 좌표의 위치의 차를 산출하고, 역치와 비교한다. 차가 역치를 초과한 경우에는, 어긋남을 허용하는 한계를 초과했다고 판단할 수 있으므로, 화상 처리부(311)는 카메라(21)의 촬상 방향이 기준으로부터 어긋나 있다고 판단한다. 이와 같이, 화상 처리부(311)는 카메라(21)의 촬상 화상을 해석함으로써, 카메라(21)의 기준 시로부터의 어긋남을 검지할 수 있다.

그리고, 판단을 종료한 화상 처리부(311)는 카메라(21)의 촬상 방향이 기준으로부터 어긋나 있는지 여부를 나타내는 정보를, 셀프 POS 단말기(10)로 송신한다.

도 3으로 되돌아가서, 취득부(116)는 서버(300)로부터 화상 처리부(311)가 출력하는 상술한 판단 결과를 수신함으로써, 카메라(21)의 촬상 방향이 기준으로부터 어긋나 있는지 여부를 나타내는 정보를 취득한다. 판단 결과가, 촬상 방향이 기준으로부터 어긋나 있는 것을 나타내는 정보였던 경우, 취득부(116)는 대책부(117)에 대책을 의뢰하는 정보(신호)를 출력한다.

대책부(117)는 취득부(116)가 카메라(21)의 촬상 방향이 기준으로부터 어긋나 있는 것을 나타내는 정보를 취득하면, 조작자에 의한 부정한 조작을 방지하기 위한 대책 처리를 행한다. 대책 처리에 있어서, 구체적으로는, 대책부(117)는, 예를 들어 이하를 실행한다.

대책부(117)는 등록부(112)에 의한 등록 처리의 진행이나, 결제부(114)에 의한 결제 처리의 진행을, 정지시킨다. 보다 상세하게는, 대책부(117)는 등록부(112)에 의한 등록 처리가 미실행이면 등록 처리를 실행 불가능하게 하고, 등록부(112)에 의한 등록 처리가 실행 중이면 등록 처리를 일시 정지 또는 중지한다. 또한, 대책부(117)는 결제부(114)에 의한 결제 처리가 미실행이면 결제 처리를 실행 불가능하게 하고, 결제부(114)에 의한 결제 처리가 실행 중이면 결제 처리를 일시 정지 또는 중지한다.

또한, 대책부(117)는 점원이 참조 가능한 장치(관리 장치)에, 카메라(21)의 촬상 방향이 기준으로부터 어긋나 있는 것을 알리는 통지를, 송신한다. 이것을 받은 점원은 필요에 따른 대처를 행한다.

또한, 대책부(117)는 모터(22)를 제어함으로써, 카메라(21)의 촬상 방향을 바꾸어, 기준에 가깝게 하도록 해도 된다.

이하, 도면을 참조하여, 실시 형태에 따른 셀프 POS 단말기(10)로 실행되는 처리의 흐름에 대해서 설명한다. 도 6은 실시 형태에 따른 셀프 POS 단말기(10)에 있어서 실행되는 처리의 일례를 나타내는 흐름도이다.

제어부(110)는 카메라(21)로 촬상하면(스텝 S1), 화상 처리로 진행한다(스텝 S2). 본 실시 형태에서는 화상 처리는 서버(300)로 행하므로, 제어부(110)는, 촬상 화상을 서버(300)에 출력한다.

다음에 제어부(110)는, 화상 처리의 결과를 취득한다(스텝 S3). 본 실시 형태에서는 화상 처리는 서버(300)로 행하므로, 제어부(110)는, 화상 처리 결과를 서버(300)로부터 수신한다. 화상 처리 결과는, 화상 처리에 의한 해석의 결과이며, 구체예로서는 카메라(21)의 촬상 방향이 기준으로부터 어긋나 있는 것을 나타내는 정보이다.

다음에 제어부(110)는, 스텝 S3에서 취득한 정보에 기초하여, 카메라(21)의 촬상 방향의 어긋남의 유무를 판단한다(스텝 S4). 어긋남이 없다고 판단되는 경우(스텝 S4의 아니오), 제어부(110)는 처리를 처음으로 되돌린다.

스텝 S4에 있어서 카메라(21)의 촬상 방향에 어긋남이 있다고 판단되는 경우(스텝 S4의 예), 제어부(110)는 대책 처리를 행한다(스텝 S5). 대책 처리에서, 제어부(110)(대책부(117))는, 예를 들어 등록부(112)에 의한 등록 처리의 진행의 정지나, 결제부(114)에 의한 결제 처리의 진행의 정지, 또한 관리 장치에의 통지 송신 등을 행한다.

또한, 등록 처리나 결제 처리는, 예를 들어 셀프 POS 단말기(10)를 확인한 점원의 정지 해제의 조작을 받고, 재개된다. 또한, 제어부(110)(대책부(117))가 모터(22)를 제어해서 카메라(21)의 촬상 방향을 자동 수정하는 것이 아닌 경우, 셀프 POS 단말기(10)를 확인에 온 점원이, 수동으로 카메라(21)의 촬상 방향을 수정한 후에, 등록 처리 및 결제 처리를 재개하는 조작을 행한다.

이상과 같은 실시 형태에 따르면, 카메라(21)의 촬상 방향이 기준의 것으로부터 변경되었을 경우에 이것을 검지해서 이상하다고 할 수 있다. 또한, 상기 실시 형태에 따르면, 카메라(21)의 촬상 내용이 이상한 경우에, 등록 처리나 결제 처리의 진행을 정지할 수 있으므로, 판매 데이터 처리에 대한 문제의 발생을 방지할 수 있다. 이에 의해, 카메라(21)에 의한 조작 미스나 부정 행위의 검지가, 적절하게 행해지도록 할 수 있다.

또한, 상기 실시 형태에서는, 화상 처리부(311)는 취득부(116)에, 촬상 방향이 기준으로부터 어긋나 있는지의 여부의 판단 결과를 나타내는 정보를 출력하고 있지만, 실시에 있어서는, 화상 처리부(311)는 이하와 같은 다른 정보를 출력하는 것이어도 된다.

예를 들어, 화상 처리부(311)는 판단 결과가 아니고, 촬상 화상을 해석한 결과(해석 결과) 그 자체를 나타내는 정보를, 셀프 POS 단말기(10)에 출력해도 된다. 이 경우, 셀프 POS 단말기(10)의 취득부(116)는, 해석 결과에 기초하여, 촬상 방향이 기준으로부터 어긋난 것인지 여부의 판단을 행하고, 판단 결과를 얻는다(취득한다).

또한, 화상 처리부(311)는 촬상 방향이 기준으로부터 어긋나 있다고 판단한 경우만, 그 취지를 나타내는 정보를 출력해도 된다. 즉, 화상 처리부(311)의 판단 결과 중, 카메라(21)의 촬상 방향은 기준으로부터 어긋나 있지 않았다고 하는 내용의 정보는, 취득부(116)에 출력하는 것으로부터 제외되어도 된다.

또한, 해석 처리를 행하는 화상 처리부(311)를, 셀프 POS 단말기(10)가 구비해도 상관없다.

또한, 상기 실시 형태에서는, 카메라(21)를 1대 구비하는 셀프 POS 단말기(10)를 예로 들어 설명했지만, 판매 데이터 처리 장치나 회계 장치에는, 2대 이상의 카메라(21)를 구비하는 것도 있다. 그래서, 실시에 있어서는, 2대 이상의 카메라(21)를 구비하는 장치에 실시 형태의 기술을 적용해도 상관없다. 그 경우에는, 카메라(21) 전체 대수에 상기 실시 형태의 기술을 적용해도 되고, 혹은 일부의 카메라(21)에 적용해도 된다.

또한, 2대 이상의 카메라(21)를 구비하는 판매 데이터 처리 장치나 회계 장치에 있어서는, 각 카메라(21)의 촬상 범위는, 예를 들어 1대는 조작자의 주변을 촬상하고, 다른 1대는 조작자의 얼굴을 촬상하고, 다른 1대는 점포 안을 촬상한다고 하는 것처럼, 각각 다르게 해서 설정되어 있는 것으로 생각된다. 그러한 경우에도, 상기 실시 형태에 따르면, 각 카메라(21)에 대해서, 기준이 되는 촬상 화상(510)을 준비하고, 운용 중인 촬상 화상(520)을 해석하면, 카메라(21)의 어긋남의 유무를 판단할 수 있다.

또한, 카메라(21)나 촬상부(115), 모터(22)가, 셀프 POS 단말기(10)에 포함되지 않는 별체의 감시 카메라를 구성하는 것이어도, 마찬가지로, 대책부(117)에 의한 대책 처리를 행하게 해도 된다.

또한, 상기 실시 형태의 셀프 POS 단말기(10)는 입출금부(15)를 구비한 것이지만, 예를 들어 셀프 POS 단말기(10)가 현금을 취급하지 않는 캐시리스 단말기로서 구성되는 경우 등에는, 입출금부(15)는 마련되지 않아도 상관없다.

상술한 실시 형태는, 상술한 각 장치가 갖는 구성 또는 기능의 일부를 변경함으로써, 적절하게 변형해서 실시하는 것도 가능하다. 그래서, 이하에서는, 상술한 실시 형태에 따른 몇 가지의 변형예를 다른 실시 형태로서 설명한다. 또한, 이하에서는, 상술한 실시 형태와 상이한 점을 주로 설명하는 것으로 하고, 이미 설명한 내용과 공통되는 점에 대해서는 동일 부호를 사용하여, 상세한 설명을 생략한다. 또한, 이하에서 설명하는 변형예는, 개별로 실시되어도 되고, 적절히 조합하여 실시되어도 된다.

(제2 실시 형태)

본 실시 형태에서는, 세미 셀프 타입의 POS 단말기(이하, 세미 셀프 POS 단말기로 한다)에, 상기 실시 형태의 기술을 적용한 예에 대해서 설명한다. 세미 셀프 POS 단말기는, 상품 등록의 후의 결제 처리에 관련한 조작을 쇼핑객이 조작자가 되어 행하는 장치이며, 회계 장치의 일례이다.

본 실시 형태에 있어서, 결제 처리에 앞서는 등록 처리는, 예를 들어 통상의 POS 단말기에의 점원의 조작에 의해 행해진다. 또한, 등록 처리는 쇼핑객 자신에 의해 행해지는 경우도 있다. 쇼핑객은, 예를 들어 쇼핑객이 소지한 스마트폰으로 기동된 POS 애플리케이션(스마트폰 POS)이나, 카트 POS(점포 안에 비치된 카트에 부속된 단말기)로의 쇼핑객의 조작 등에 의해, 상품의 등록을 행한다.

세미 셀프 POS 단말기는, 상기 실시 형태에 있어서의 셀프 POS 단말기(10)로부터, 스캐너(16), 판독부(111), 등록부(112) 등을 제외한 구성의 것이다. 혹은, 셀프 POS 단말기(10)에 있어서 그들(스캐너(16), 판독부(111), 등록부(112) 등)이 비가동 상태로 설정됨으로써, 셀프 POS 단말기(10)가 세미 셀프 POS 단말기로서 가동하는 것이어도 된다.

본 실시 형태에 있어서도, 도 6에 도시한 흐름도와 같이, 제어부(110)가 기능한다. 본 실시 형태에 있어서의 대책 처리(스텝 S5)에 있어서, 제어부(110)는, 결제부(114)에 의한 결제 처리의 진행 정지 외에, 필요에 따라, 관리 장치에의 통지 송신이나, 모터(22)를 제어한 카메라(21)의 촬상 방향의 자동 수정을 행한다.

이와 같이, 제2 실시 형태의 세미 셀프 POS 단말기에 의하면, 제1 실시 형태와 마찬가지로, 조작 미스나 부정 행위를 검지하기 위한 카메라(21)의 촬상 내용이 이상한 경우에 판매 데이터 처리에 대한 문제의 발생을 방지할 수 있다.

상기 실시 형태의 각 장치에서 실행되는 프로그램은, 상술한 각 부(판독부(111), 등록부(112), 조작부(113), 결제부(114), 촬상부(115), 취득부(116), 대책부(117), 화상 처리부(311))를 필요에 따라서 포함하는 모듈 구성으로 되어 있다. CPU(프로세서)는 상기 기억 매체로부터 프로그램을 읽어내서 실행함으로써, 상기 각 부를 주기억 장치 상에 로드한다. 이에 의해, 판독부(111), 등록부(112), 조작부(113), 결제부(114), 촬상부(115), 취득부(116), 대책부(117), 화상 처리부(311)가, 주기억 장치 상에 생성된다.

상술한 실시 형태의 각 장치에서 실행되는 프로그램은, ROM 등에 미리 내장되어 제공된다. 상술한 실시 형태의 각 장치에서 실행되는 프로그램은, 인스톨 가능한 형식 또는 실행 가능한 형식의 파일로 CD-ROM, 플렉시블 디스크(FD), CD-R, DVD(Digital Versatile Disk) 등의 컴퓨터로 판독 가능한 기록 매체에 기록해서 제공하도록 구성해도 된다.

또한, 상술한 실시 형태의 각 장치에서 실행되는 프로그램을, 인터넷 등의 네트워크에 접속된 컴퓨터 상에 저장하고, 네트워크 경유로 다운로드시킴으로써 제공하도록 구성해도 된다. 또한, 상술한 실시 형태의 각 장치에서 실행되는 프로그램을 인터넷 등의 네트워크 경유로 제공 또는 배포하도록 구성해도 된다.

본 발명의 몇 가지의 실시 형태를 설명했지만, 이들 실시 형태는, 예로서 제시한 것이며, 발명의 범위를 한정하는 것은 의도하지 않았다. 이들 신규의 실시 형태는, 기타 다양한 형태로 실시되는 것이 가능하고, 발명의 요지를 일탈하지 않는 범위에서, 다양한 생략, 치환, 변경, 조합을 행할 수 있다. 이들 실시 형태나 그 변형은, 발명의 범위나 요지에 포함됨과 함께, 특허 청구 범위에 기재된 발명과 그 균등의 범위에 포함된다.

10: 셀프 POS 단말기,
11: 본체,
12: 바구니 거치대,
13: 봉투 포장대,
131: 받침대, 132: 봉투걸이 훅, 133: 일시 거치대, 134: 지주,
14: 계량부,
15: 입출금부,
16: 스캐너, 161: 판독 창,
17: 터치 패널 디스플레이,
18: 표시등,
19: 카드 리더,
20: 프린터,
21: 카메라, 22: 모터,
101: CPU, 102: ROM, 103: RAM,
104: 기억부, 105: 통신 I/F, 109: 시스템 버스,
110: 제어부,
111: 판독부, 112: 등록부, 113: 조작부, 114: 결제부,
115: 촬상부, 116: 취득부, 117: 대책부,
300: 서버, 310: 제어부, 311: 화상 처리부,
510, 520: 촬상 화상.

Claims

거래 대상인 상품의 정보를 소정의 기억부에 기억시키는 등록 처리를 행하는 등록부와,
상기 등록부가 등록한 상품의 결제에 관련한 결제 처리를 행하는 결제부와,
조작자에 의한 조작을 접수하는 조작부와,
카메라에 의해 상기 조작자가 비치는 범위를 촬상한 화상의 해석에 의해 얻어지는 정보이며 상기 카메라의 촬상 방향이 기준으로부터 어긋나 있는 것을 나타내는 정보를 취득하는 취득부와,
상기 취득부가 상기 정보를 취득하면, 조작자에 의한 부정한 조작을 방지하기 위한 대책 처리를 행하는 대책부
를 구비하는, 판매 데이터 처리 장치.
제1항에 있어서,
상기 대책부는, 상기 대책 처리의 실행 시, 상기 등록 처리 또는 상기 결제 처리의 진행을 정지시키는, 판매 데이터 처리 장치.
제1항에 있어서,
상기 대책부는, 상기 대책 처리에 있어서, 점원이 참조 가능한 장치에, 상기 카메라의 촬상 방향이 기준으로부터 어긋나 있는 것을 알리는 통지를 송신하는, 판매 데이터 처리 장치.
제1항에 있어서,
상기 대책부는, 상기 대책 처리에 있어서, 상기 카메라의 촬상 방향을 바꾸는 구동부의 제어에 의해 상기 카메라의 촬상 방향을 기준에 가깝게 하는, 판매 데이터 처리 장치.
거래 대상으로서 등록된 상품의 결제에 관련한 결제 처리를 행하는 결제부와,
조작자에 의한 조작을 접수하는 조작부와,
카메라에 의해 상기 조작자가 비치는 범위를 촬상한 화상의 해석에 의해 얻어지는 정보이며 상기 카메라의 촬상 방향이 기준으로부터 어긋나 있는 것을 나타내는 정보를 취득하는 취득부와,
상기 취득부가 상기 정보를 취득하면, 조작자에 의한 부정한 조작을 방지하기 위한 대책 처리를 행하는 대책부
를 구비하는, 회계 장치.
조작자에 의한 조작을 접수하는 조작부를 구비하고, 거래 대상인 상품의 정보를 소정의 기억부에 기억시키는 등록 처리와, 상기 기억부에 기억된 상품의 결제에 관련한 결제 처리의 적어도 어느 것을 실행하는 장치의 컴퓨터를,
카메라에 의해 상기 조작자가 비치는 범위를 촬상한 화상의 해석에 의해 얻어지는 정보이며 상기 카메라의 촬상 방향이 기준으로부터 어긋나 있는 것을 나타내는 정보를 취득하는 취득부와,
상기 취득부가 상기 정보를 취득하면, 조작자에 의한 부정한 조작을 방지하기 위한 대책 처리를 행하는 대책부
로서 기능시키기 위한, 컴퓨터 판독가능 기록 매체에 기록된 컴퓨터 프로그램.