TWI770015B - 物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、物品檢查處理方法及程式 - Google Patents

物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、物品檢查處理方法及程式 Download PDF

Info

Publication number
TWI770015B
TWI770015B TW106110272A TW106110272A TWI770015B TW I770015 B TWI770015 B TW I770015B TW 106110272 A TW106110272 A TW 106110272A TW 106110272 A TW106110272 A TW 106110272A TW I770015 B TWI770015 B TW I770015B
Authority
TW
Taiwan
Prior art keywords
product
image
article inspection
article
inspection
Prior art date
Application number
TW106110272A
Other languages
English (en)
Other versions
TW201804381A (zh
Inventor
日高康
近藤克彦
小南友宏
Original Assignee
日商日本電氣股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商日本電氣股份有限公司 filed Critical 日商日本電氣股份有限公司
Publication of TW201804381A publication Critical patent/TW201804381A/zh
Application granted granted Critical
Publication of TWI770015B publication Critical patent/TWI770015B/zh

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G1/00—Storing articles, individually or in orderly arrangement, in warehouses or magazines
    • B65G1/02—Storage devices
    • B65G1/04—Storage devices mechanical
    • B65G1/137—Storage devices mechanical with arrangements or automatic control means for selecting which articles are to be removed
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01G—WEIGHING
    • G01G19/00—Weighing apparatus or methods adapted for special purposes not provided for in the preceding groups
    • G01G19/52—Weighing apparatus combined with other objects, e.g. furniture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Processing (AREA)

Abstract

物品檢查處理裝置，其包括：商品圖像決定部，基於包含作為應檢查對象的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；商品資料登錄部，將前記特定的圖像登錄在記憶部；及核對部，基於前記記憶部中所記憶的圖像，對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。

Description

物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、 物品檢查處理方法及程式
本發明係關於物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、物品檢查處理方法及程式。
在倉庫業或批發商等物流業者將經手流通商品出貨的過程中，在商品出貨前，要和出貨單比較，確認出貨的商品是否是出貨單上所記載的商品。此作業稱之為物品檢查作業。在此物品檢查作業中，有如「100部的相同型錄」、「60部的相同箱子」一般，將複數個相同商品集中進行物品檢查的物品檢查作業。在物品檢查作業時，已有如後的技術：用照相機拍攝一綑商品當中放在最上面的商品的表面等，和已事先登錄的商品的基本資料圖像核對，以特定商品。而且，也有如後的技術(例如參照專利文獻1)：從作為物品檢查對象的商品之重量測定值和物品檢查數量，算出該商品的單位重量，從商品的圖像和單位重量來特定商品。
先行技術文獻 專利文獻：
專利文獻1：日本特開2015-182825號公報
但是，藉由和基本資料圖像核對來進行商品的特定時，物流業者的經手商品數往往超過一萬種，要登錄所有的商品的圖像得花費大量的勞力或時間。另外，商品當中也有立體的形狀的商品。在此種商品的情況下，為了要在物品檢查作業中不論拍攝哪一面都可以進行核對，常常要針對複數個側面拍攝基本資料圖像。在此的情況下，除了登錄的勞力或時間之外，還會因為基本資料圖像的增加造成核對處理時間的大。
本發明的目的之一例為，提供解決上述課題的物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、物品檢查處理方法及程式。
本發明之第1實施態樣的物品檢查處理裝置，其包括：商品圖像決定部，基於包含作為應檢查對象的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；商品資料登錄部，將前記特定的圖像登錄在記憶部；及核對部，基於前記記憶部中所記憶的圖像，對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中 任一者為相同種類的商品。
本發明之第2實施態樣的物品檢查系統，其包括：拍攝裝置，拍攝前記商品群，得到前記第1物品檢查對象圖像；重量計測器，測定前記商品群的重量；如上述的物品檢查處理裝置，取得前記拍攝裝置所得到的前記第1物品檢查對象圖像、及前記重量計測器所測定的前記商品群的重量。
本發明之第3實施態樣的商品基本資料登錄裝置，其包括：商品圖像決定部，基於包含作為應檢查對象的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之物品檢查資料、以及表示和前記物品檢查資料一致的商品群的物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；商品資料登錄部，將前記特定的圖像登錄在商品基本資料庫。
本發明之第4實施態樣的物品檢查處理方法，其包括：基於包含作為應檢查對象的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；將前記特定的圖像登錄在記憶部；及基於前記記憶部中所記憶的圖像，對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。
本發明之第5實施態樣的程式，使電腦執行：基於包含作為應檢查對象的至少一個物品檢查商品及分 別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；將前記特定的圖像登錄在記憶部；及基於前記記憶部中所記憶的圖像，對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。
依據本發明的實施形態，能夠使物品檢查作業使用的商品基本資料圖像的登錄作業效率化。
1‧‧‧物品檢查系統
100‧‧‧物品檢查處理裝置
101‧‧‧控制判斷部
102‧‧‧重量取得部
103‧‧‧商品圖像取得部
104‧‧‧輸入接受部
105、105A‧‧‧顯示資訊輸出部
106‧‧‧特徵量計算部
107‧‧‧物品檢查資料保存部
108‧‧‧目標總重量計算部
109‧‧‧商品資料登錄部
110‧‧‧商品圖像決定部
111‧‧‧圖像切出部
112‧‧‧圖像分析部
113‧‧‧商品特定部
114‧‧‧商品重量計算部
115‧‧‧核對部
116‧‧‧物品檢查資料儲存部
117‧‧‧商品資料儲存部
118‧‧‧部分圖像選擇部
150‧‧‧商品基本資料登錄裝置
151‧‧‧商品基本資料庫
200‧‧‧拍攝裝置
300‧‧‧重量計測器
301‧‧‧台座
302‧‧‧支柱
400‧‧‧顯示裝置
500‧‧‧輸入裝置
600‧‧‧物品檢查對象商品
901‧‧‧CPU
902‧‧‧記憶體
903‧‧‧記憶裝置
904‧‧‧通訊IF
第1圖為表示本發明之第一實施形態的物品檢查處理裝置的構成之方塊圖。
第2圖為表示本發明的第一實施形態的物品檢查處理裝置的構成之一例的方塊圖。
第3圖為表示本發明的第一實施形態的物品檢查系統之一例的圖。
第4圖為表示使用本發明的第一實施形態之物品檢查處理裝置的物品檢查處理之一例的流程圖。
第5圖為表示本發明的第一實施形態的物品檢查確認畫面之一例的第一圖。
第6圖為表示本發明的第一實施形態的物品檢查確認畫面之一例的第二圖。
第7圖為表示本發明的第一實施形態的物品檢查確認畫面之一例的第三圖。
第8圖為表示本發明的第一實施形態的物品檢查處理裝置的基本資料登錄處理之一例的流程圖。
第9A圖為說明本發明的第一實施形態的物品檢查處理之一個第一圖。
第9B圖為說明本發明的第一實施形態的物品檢查處理之另一個第一圖。
第10A圖為說明本發明的第一實施形態的物品檢查處理之一個第二圖。
第10B圖為說明本發明的第一實施形態的物品檢查處理之另一個第二圖。
第11A圖為說明本發明的第一實施形態的物品檢查處理之一個第三圖。
第11B圖為說明本發明的第一實施形態的物品檢查處理之另一個第三圖。
第11C圖為說明本發明的第一實施形態的物品檢查處理之再一個第三圖。
第12A圖為說明本發明的第一實施形態的物品檢查處理之一個第四圖。
第12B圖為說明本發明的第一實施形態的物品檢查處理之另一個第四圖。
第13圖為表示本發明的第二實施形態的物品檢查處理裝置的構成之一例的方塊圖。
第14圖為表示本發明的第二實施形態的物品檢查確認畫面之一例的圖。
第15圖為說明本發明的第二實施形態的基本資料登錄處理的第一圖。
第16A圖為說明本發明的第二實施形態的基本資料登錄處理的一個第二圖。
第16B圖為說明本發明的第二實施形態的基本資料登錄處理的另一個第二圖。
第17圖為表示本發明的第二實施形態的物品檢查處理裝置的基本資料登錄處理之一例的流程圖。
第18圖為表示使用本發明的第三實施形態的物品檢查處理裝置之物品檢查處理的一例之流程圖。
第19圖為表示本發明的第三實施形態的物品檢查確認畫面之一例的圖。
第20圖為表示本發明的實施形態的商品資料登錄裝置之構成的一例的方塊圖。
第21圖為表示本發明的實施形態的物品檢查處理裝置及商品資料登錄裝置的硬體構成之一例的方塊圖。
<第一實施形態>
以下，參照第1圖~第12B圖說明本發明的第一實施形態之物品檢查處理裝置。
第1圖為表示第一實施形態的物品檢查處理裝置的最小構成之圖。
如第1圖所示物品檢查處理裝置100至少包括：商品資料登錄部109、商品圖像決定部110、核對部115。物品檢查處理裝置100為例如具備CPU(Central Processing Unit)的電腦。
商品圖像決定部110，基於包含作為應檢查對象的商品(物品檢查商品)的識別資訊及該商品的物品應檢查數量(物品檢查數量)的物品檢查資料(憑單資料)、以及與該物品檢查資料中包含的物品檢查商品及物品檢查數量一致的商品群拍攝而得的物品檢查對象圖像，特定物品檢查對象商品個別的圖像。
商品資料登錄部109，將商品圖像決定部110所特定的圖像登錄在記憶部。記憶部為後述的商品資料儲存部117，相當於商品基本資料庫。
核對部115，基於登錄了商品圖像決定部110特定的商品圖像的記憶部(商品基本資料庫)所記憶的圖像，特定新的物品檢查資料對應之物品檢查對象圖像所包含的商品。
第2圖為表示本發明的第一實施形態的物品檢查處理裝置的構成之一例的方塊圖。
如第2圖所示，物品檢查處理裝置100包括：控制判斷部101、重量取得部102、商品圖像取得部103、輸入接受部104、顯示資訊輸出部105、特徵量計算部106、物品檢查資料保存部107、目標總重量計算部108、商品資料登錄部109、商品圖像決定部110、商品重量計算部114、核對部115、物品檢查資料儲存部116、商品資料儲存部117。另外，物品檢查資料中包含的應物品檢查商品稱之為物品檢查商品。物品應檢查數量稱之為物品檢查數量。執行物品檢查作業的作業員從貨架拿出作為 物品檢查商品候補的商品稱之為物品檢查對象商品。另外，拍攝物品檢查對象商品群的圖像稱之為物品檢查對象圖像。另外，從物品檢查對象圖像切出來做為物品檢查商品的候補的群組圖像稱之為商品圖像。
控制判斷部101對其他的功能部進行資訊的傳達或處理的指示。
重量取得部102，從重量計測器取得重量計測器所測定的物品檢查對象商品的重量。
商品圖像取得部103，對拍攝裝置下達物品檢查對象商品的拍攝指示，從拍攝裝置取得拍攝裝置所拍攝的物品檢查對象圖像。
輸入接受部104接受作業員的輸入操作。另外，輸入接受部104，基於作業員進行的物品檢查資料的輸入操作，取得物品檢查資料。
顯示資訊輸出部105，產生物品檢查作業所必須的各種資訊，輸出到連接於物品檢查處理裝置100的顯示裝置。
特徵量計算部106，用例如算出圖形特徵量等的一般的特徵量計算手法，計算商品圖像取得部103所取得的物品檢查對象圖像的特徵量。
物品檢查資料保存部107，將作業員輸入的作為物品檢查作業之對象的物品檢查資料記錄在物品檢查資料儲存部116。
目標總重量計算部108，計算物品檢查資料中包含的物品檢查商品的總重量(目標總重量)。另外，目標總重量計算部108，比較計算出的目標總重量和重量取得部102所取得的物品 檢查對象商品的重量，計算其差值。
商品資料登錄部109，將拍攝物品檢查商品的圖像、單位重量等登錄在商品資料儲存部117。商品資料登錄部109具有：商品圖像決定部110和商品重量計算部114。
商品圖像決定部110具有：圖像切出部111、圖像分析部112、商品特定部113。
圖像切出部111，從物品檢查對象圖像切出作為前記物品檢查對象商品的候補之群組圖像(商品圖像)。群組圖像亦可分別為各領域的圖像。
圖像分析部112，將已切出的商品圖像彼此核對，算出物品檢查對象圖像中包含的商品圖像的種類別的數量。
商品特定部113，將商品圖像的種類別的數量、和物品檢查資料中所包含的各物品檢查商品的物品檢查數量比較，特定各商品圖像所表示的商品。
商品圖像決定部110，將商品特定部113所特定的商品圖像和物品檢查商品對應並記錄在商品資料儲存部117(商品基本資料庫)中。
商品重量計算部114，基於表示物品檢查資料中包含的各物品檢查商品的單位重量及各物品檢查商品的物品檢查數量、和測定物品檢查資料中包含的物品檢查商品及物品檢查數量一致的商品群的重量的重量資料的關係之方程式，算出各物品檢查商品的單位重量。
核對部115，使用商品資料儲存部117所記憶的商品的基本資料圖像，核對拍攝物品檢查商品的物品檢查對象圖像，並特 定物品檢查對象圖像中映現的商品，並判斷所特定的商品和物品檢查資料中包含的物品檢查商品是否一致。
物品檢查資料儲存部116，為儲存物品檢查對象的物品檢查資料中包含的物品檢查商品的商品名、物品檢查數量等的資料庫。
商品資料儲存部117，為儲存各商品的商品名、商品的圖像(基本資料圖像)、商品圖像的特徵量、單位重量等的資料庫。
另外，控制判斷部101、重量取得部102、商品圖像取得部103、輸入接受部104、顯示資訊輸出部105、特徵量計算部106、物品檢查資料保存部107、商品資料登錄部109、商品圖像決定部110、圖像切出部111、圖像分析部112、商品特定部113、商品重量計算部114、核對部115當中的至少一部分為，物品檢查處理裝置100所具備的CPU從硬碟等的記憶部讀取並執行程式而實現之功能。
第3圖為表示本發明的第一實施形態的物品檢查系統之一例的圖。
以下，參照第3圖，說明本實施形態的物品檢查系統。
如第3圖所示，物品檢查系統1具有：物品檢查處理裝置100、拍攝裝置200、重量計測器300、顯示裝置400、輸入裝置500。另外，重量計測器300上放置了1個或複數個物品檢查對象商品(物品檢查對象商品600)。另外，重量計測器300的表面(放置物品檢查對象商品的面)上，繪製了具有格子狀等特徵的已知的圖案。
拍攝裝置200，為例如拍攝物品檢查對象商品的照 相機。重量計測器300為測定物品檢查對象商品的重量的裝置。在第3圖中，拍攝裝置200，將鏡頭朝向地面側安裝在支柱302上，使其能夠從正上方拍攝載置於重量計測器300上的物品檢查對象商品。支柱302係由台座301固定。重量計測器300設置於台座301上。拍攝裝置200的安裝位置不限定於第3圖的例子。物品檢查處理裝置100與拍攝裝置200連接，取得拍攝裝置200所拍攝的物品檢查對象商品的圖像。物品檢查處理裝置100，與重量計測器300連接，取得重量計測器300所測定的物品檢查對象商品的重量。
顯示裝置400為例如顯示器。顯示裝置400，與物品檢查處理裝置100連接，顯示物品檢查處理裝置100所產生的物品檢查作業必要的資訊。
輸入裝置500為鍵盤、滑鼠、或者任意的資料讀取手段(儲存媒體讀取裝置等)。作業員，參照顯示於顯示裝置400的資訊，使用輸入裝置500操作物品檢查處理裝置100，執行物品檢查作業。
繼之，參照第3圖說明物品檢查作業的大致流程。首先，作業員，將記載於1張憑單上的作為物品檢查作業的對象的1個或複數個物品檢查商品的候補從貨架等拿下，並將之放置在重量計測器300上。有時作業員會弄錯，選取類似商品作為放置於重量計測器300上的物品檢查對象商品600。1張憑單上常包含複數種類的商品，在此情況下，物品檢查對象商品600中包含複數種類的商品。作業員將物品檢查對象商品600放在重量計測器300上時，重量計測器300測定物品檢查對象商品600的 重量，將所測定的重量資料傳送到物品檢查處理裝置100。物品檢查處理裝置100，在接收了重量資料的時間點，向拍攝裝置200傳送拍攝指示訊號。拍攝裝置200，接收到拍攝指示訊號時，從上方拍攝物品檢查對象商品600，並將已拍攝的物品檢查對象圖像傳送到物品檢查處理裝置100。
另外，在這些處理進行的時候，作業員使用輸入裝置500輸入1張憑單所包含的物品檢查資料(物品檢查商品的名稱、物品檢查數量等)。例如，憑單的資料為電子化的檔案，作業員藉由儲存媒體讀取裝置，將儲存在儲存媒體中的該檔案輸入物品檢查處理裝置100。另外，物品檢查資料中包含的一筆一筆明細稱之為明細資訊。
取得物品檢查對象圖像時，物品檢查處理裝置100進行和商品資料儲存部117所記憶的商品的基本資料圖像的核對處理，特定物品檢查對象圖像中包含的商品。另外，物品檢查處理裝置100，判斷核對處理的結果，已特定是圖像中映現的商品、和物品檢查資料中包含的物品檢查商品是否一致。物品檢查處理裝置100，對於物品檢查資料中包含的所有的物品檢查商品執行此核對處理及判斷處理。另外，物品檢查處理裝置100，計算物品檢查資料中包含的所有的物品檢查商品的總重量，和重量計測器300所測定的重量資料比較。
然後，物品檢查處理裝置100，將所有的物品檢查對象商品的核對處理結果及重量資料的比較結果顯示在顯示裝置400。另外，物品檢查處理裝置100，將物品檢查資料的一覧顯示於顯示裝置400。
作業員，目視確認顯示於顯示裝置400的物品檢查資料的一覧、核對處理結果、重量資料比較結果，以掌握物品檢查結果。作業員，進行數量的調整，將過多或不足量的數量之物品檢查對象商品600放到重量計測器300上或將其拿下。上述作業和處理的結果，若顯示於顯示裝置400的商品的數量和物品檢查資料一樣，則作業員結束該物品檢查資料的物品檢查作業。
物流業者經手的商品有時會超過1萬種，例如開發新商品並將之提供到市場的情況下，必須重新將該新商品的基本資料圖像登錄到商品資料儲存部117。每當推出新商品時就必須要進行基本資料圖像的登錄，相當耗費勞力。尤其是，該新商品為立體物的情況下，作業員不知道要將哪個面朝上放置在重量計測器300上。因此，必須要登錄所有的側面的基本資料圖像，而耗費了更多的勞力或時間。另外，當登錄大量的基本資料圖像時，造成光是核對處理就很耗時的問題。
因此，在本實施形態中提供一種方法，對於新商品等尚未登錄在商品資料儲存部117的商品，記錄進行目視物品檢查的結果之資訊，並基於已記錄的資訊，自動將未登錄商品的基本資料圖像、單位重量登錄在商品資料儲存部117。
繼之，說明本實施形態中，未登錄商品的商品圖像、單位重量的登錄處理。
第4圖為表示使用本發明的第一實施形態之物品檢查處理裝置的物品檢查處理之一例的流程圖。
第5圖為表示本發明的第一實施形態的物品檢查確認畫面 之一例的第一圖。
首先，作業員將某一個物品檢查資料輸入物品檢查處理裝置100。物品檢查處理裝置100中，輸入接受部104取得該物品檢查資料，輸出到控制判斷部101。如此一來，目標總重量計算部108，基於控制判斷部101的指示計算目標總重量(步驟S11)。具體言之，目標總重量計算部108，針對已輸入的物品檢查資料，對於各物品檢查商品，將商品資料儲存部117記憶的該物品檢查商品的單位重量乘以該物品檢查商品的物品檢查數量，計算物品檢查數量分的重量(稱之為物品檢查重量)。目標總重量計算部108，將所有的物品檢查重量合計，計算出目標總重量，並將目標總重量記錄在記憶體。另外，物品檢查資料中包含的物品檢查商品為未登錄的情況下，因為沒有取得單位重量的資訊，所以該物品檢查商品的物品檢查重量為零(0)。
繼之，作業員，參照輸入到物品檢查處理裝置100的物品檢查資料，將物品檢查對象商品600從貨架等取下並放在重量計測器300上。物品檢查對象商品600被放上重量計測器300時，重量取得部102取得重量計測器300所測定的物品檢查對象商品600的重量資料(步驟S12)。重量取得部102將其所取得的重量資料輸出到控制判斷部101。控制判斷部101將重量資料記錄在記憶體。
繼之，控制判斷部101，以已取得重量資料為因，向商品圖像取得部103輸出拍攝指示訊號。如此一來，商品圖像取得部103向拍攝裝置200下達拍攝指示，拍攝裝置200拍攝物品檢 查對象商品600的物品檢查對象圖像。商品圖像取得部103，取得拍攝裝置200拍攝的物品檢查對象圖像(步驟S13)，將之儲存於記憶體。
當圖像被儲存在記憶體，控制判斷部101，向特徵量計算部106下達指示，使其計算已儲存的圖像的特徵量。特徵量計算部106，從記憶體讀取物品檢查對象圖像，用特定的公知特徵計算手法計算特徵量(步驟S14)，並將計算結果輸出到控制判斷部101。此計算結果中包含物品檢查對象圖像上的特徵量的分布。另外，此特徵量分布中包含放置在重量計測器300上的物品檢查對象商品600的所有的商品之特徵量。控制判斷部101將特徵量記錄於記憶體中。
繼之，核對部115，基於商品資料儲存部117中記錄的基本資料圖像，檢索物品檢查對象圖像中包含的商品(步驟S15)。具體言之，核對部115，從已登錄在商品資料儲存部117中的全商品的基本資料圖像中，讀取包含於物品檢查資料中的物品檢查商品的基本資料圖像，將這些基本資料圖像和物品檢查對象圖像比較，特定映現於物品檢查對象圖像中的商品。例如，核對部115，基於物品檢查資料中所包含的商品名，從商品資料儲存部117讀取該商品的特徵量。然後，商品特定部113，將已讀取的核對商品的特徵量和物品檢查對象圖像的特徵量分布比較，核對物品檢查商品的特徵量是否包含於物品檢查對象圖像的特徵量分布中以進行檢索處理。核對部115，當物品檢查商品的特徵量和包含於物品檢查對象圖像的特徵量之間的類似度在特定閾值以上，則判斷為物品檢查對象圖像 中映現了物品檢查商品。核對部115，針對物品檢查資料中包含的各物品檢查商品進行檢索處理，將該檢索結果(檢索完成數量)輸出至控制判斷部101。
當從核對部115取得檢索結果時，控制判斷部101，將該檢索結果輸出到顯示資訊輸出部105，並指示其顯示物品檢查確認畫面。接著，顯示資訊輸出部105讀取物品檢查資料儲存部116中記錄的「明細號碼」、「商品碼」、「物品檢查數量」、商品資料儲存部117中記錄的「單位重量」。另外，顯示資訊輸出部105，向控制判斷部101要求目標總重量、重量取得部102所取得的重量資料、總重量誤差的資訊。總重量誤差為，目標總重量計算部108所計算的目標總重量和重量取得部102所取得的重量資料的差值。控制判斷部101，向目標總重量計算部108下達總重量誤差之計算的指示。目標總重量計算部108，從記憶體讀取先前計算得出的目標總重量和重量取得部102所取得的重量資料，計算總重量誤差。目標總重量計算部108，將目標總重量、重量資料、計算得出的總重量誤差向控制判斷部101輸出。控制判斷部101，將這些資訊向顯示資訊輸出部105輸出。另外，顯示資訊輸出部105，從記憶體取得物品檢查對象圖像。
顯示資訊輸出部105，使用核對部115的判斷結果、從物品檢查資料儲存部116取得的物品檢查資料、目標總重量計算部108所輸出的總重量誤差等的資料、物品檢查對象圖像，產生作業員於物品檢查作業所使用的物品檢查確認畫面的圖像，並將該圖像顯示於顯示裝置400(步驟S16)。
在此，參照第5圖，說明物品檢查確認畫面。第5圖為表示物品檢查確認畫面之一例的圖。如第5圖所示，物品檢查確認畫面包含：物品檢查資料顯示欄61、物品檢查對象圖像顯示欄62、圖像核對結果顯示欄63、重量比較結果顯示欄64、確認按鈕65。顯示資訊輸出部105，在物品檢查資料顯示欄61顯示從物品檢查資料儲存部116等取得的物品檢查資料(「明細號碼」、「商品碼」、「物品檢查數量」、「單位重量」各欄)以及從核對部115取得的檢索結果(「物品檢查實際結果」欄)。顯示資訊輸出部105，將已取得的物品檢查對象圖像顯示於物品檢查對象圖像顯示欄62。另外，顯示資訊輸出部105，將商品特定部113得到的判斷結果顯示於圖像核對結果顯示欄63。例如，從核對部115取得的檢索結果表示與物品檢查資料所包含的所有的商品一致的情況下，顯示資訊輸出部105進行「圖像OK」等的顯示，只要存在與物品檢查資料所包含的商品不一致的判斷結果，就進行「圖像NG」等的顯示。另外，顯示資訊輸出部105，基於從目標總重量計算部108取得的總重量誤差等的資料，進行重量比較結果顯示欄64的顯示。例如，總重量誤差為0的情況下，顯示資訊輸出部105在重量比較結果顯示欄64進行「重量OK」等的顯示。另外，總重量誤差不為「0」的情況下，顯示資訊輸出部105在重量比較結果顯示欄64進行「重量NG」等的顯示。另外，顯示資訊輸出部105，將目標總重量、重量資料、總重量誤差顯示於重量比較結果顯示欄64。另外，顯示資訊輸出部105顯示確認按鈕65。確認按鈕65為，作業員完成目前顯示的物品檢查資料的物品檢查作業時所 按壓的按鈕。
作業員確認商品是否已全部特定(步驟S17)。例如，作業員可以依據圖像核對結果顯示欄63是否顯示了「圖像OK」，來確認商品是否已全部特定。尚未特定的情況下(步驟S17：否)，顯示資訊輸出部105產生目視物品檢查畫面(未圖示)的圖像，並顯示於顯示裝置400(步驟S18)。目視物品檢查畫面為，用於以目視方式確認放置在重量計測器300上的各物品檢查對象商品600的畫面。目視物品檢查畫面中可以將各物品檢查對象商品放大顯示。作業者觀看物品檢查確認畫面，以目視的方式確認所顯示的商品的圖像或商品名。物品檢查對象商品或數量有超過或不足的情況下，作業員調整商品的超過或不足。目視物品檢查的結果，當所有的物品檢查對象商品都正確放置在重量計測器300時，物品檢查結束。另外，商品被更換、追加、刪除時，拍攝裝置200拍攝新的物品檢查對象圖像，商品圖像取得部103取得該圖像。另外，重量計測器300再計測重量，重量取得部102取得再計測而得的新的重量資料。另外，目視確認畫面的配置可以任意安排，只要能夠以目視確認物品檢查對象商品即可，也可以相同於例如第5圖等所例示的物品檢查確認畫面。
另一方面，商品已特定的情況下(步驟S17：是)、接著，作業員確認總重量誤差是否在許容範圍內(步驟S19)。總重量誤差不在許容範圍內的情況下(步驟S19：否)，作業員調整商品的超過或不足。當放置在重量計測器300的商品的數量變化時，重量取得部102取得新的重量資料。另外，目標總重量 計算部108再計算總重量誤差。然後，顯示資訊輸出部105更新重量比較結果顯示欄64的顯示。當藉由上述的作業員的調整作業，總重量誤差落在許容範圍內時(步驟S19)，物品檢查結束。
物品檢查結束時，物品檢查資料保存部107，將物品檢查對象圖像、重量資料、物品檢查資料對應地記錄在物品檢查資料儲存部116中(步驟S20)。另外，物品檢查對象圖像和重量資料為物品檢查結束時的狀況(亦即，和物品檢查資料的內容一致的物品檢查對象商品群的物品檢查對象圖像和重量資料)。另外，在這次物品檢查資料中包含藉由目視進行物品檢查後的明細資訊的情況下，物品檢查資料保存部107，將物品檢查資料等和表示藉由目視進行物品檢查的資訊對應地記錄在物品檢查資料儲存部116。繼之，物品檢查處理裝置100進行基本資料登錄處理(步驟S21)。此基本資料登錄處理為，在步驟S17中，商品已全部特定的情況下，亦即，商品資料儲存部117中已記錄商品的基本資料圖像記錄時不需要進行的處理。繼之，參照第5圖~第12圖，說明基本資料登錄處理。
第6圖為表示本發明的第一實施形態的物品檢查確認畫面之一例的第二圖。
第7圖為表示本發明的第一實施形態的物品檢查確認畫面之一例的第三圖。
在參照第8圖說明的基本資料登錄處理中，說明如後狀況：對於包含作為商品資料儲存部117中未記錄的商品之商品碼「A」、「B」、「C」的商品的物品檢查資料(第5圖~第7圖)，按照「出貨單1」~「出貨單3」的順序進行第4圖中說明的物品檢查 處理。並以此為前提：步驟S20中記錄的物品檢查對象圖像等僅關於第5圖~第7圖中例示的3件物品檢查資料。
具體言之，首先，針對第5圖例示的物品檢查資料「出貨單1」進行物品檢查處理。「出貨單1」中包含後述明細資訊：商品碼「A」的商品(作為商品A)之物品檢查數量為「2」、商品碼「B」的商品(作為商品B)的物品檢查數量為「1」、商品碼「C」的商品(作為商品C)的物品檢查數量為「1」。參照第4圖說明的物品檢查處理的結果，物品檢查資料儲存部116中，對應於「出貨單1」的物品檢查資料，記錄了在目視物品檢查畫面中已經過確認的物品檢查對象圖像、以及該物品檢查對象圖像所示狀態下測定得到的重量資料。
繼之，針對第6圖例示的物品檢查資料「出貨單2」進行物品檢查處理。「出貨單2」中包含如後的明細資訊：商品A的物品檢查數量為「2」、商品B的物品檢查數量為「2」。參照第4圖說明的物品檢查處理的結果，物品檢查資料儲存部116中，對應於「出貨單2」的物品檢查資料，記錄了在目視物品檢查畫面已經過確認的物品檢查對象圖像、以及對應的重量資料。以下說明的步驟S39~步驟S42的基本資料圖像的登錄處理中，假設後述狀況以進行說明：針對此「出貨單2」進行物品檢查處理，在步驟S20中進行物品檢查對象圖像等的記錄，接著進行基本資料登錄處理。
接著針對第7圖例示的物品檢查資料「出貨單3」進行物品檢查處理。「出貨單3」中包含後述明細資訊：商品B的物品檢查數量為「2」、商品C的物品檢查數量為「1」。參照第4圖說明的 物品檢查處理的結果，在物品檢查資料儲存部116中，對應於「出貨單3」的物品檢查資料，記錄了在目視物品檢查畫面已經過確認的物品檢查對象圖像、以及對應於該圖像的重量資料。以下說明的步驟S43~步驟S45的單位重量的登錄處理中，假設後述狀況以進行說明：針對此「出貨單3」進行物品檢查處理，在步驟S20中進行物品檢查對象圖像等的記錄，接著進行基本資料登錄處理。
第8圖為表示本發明的第一實施形態的物品檢查處理裝置的基本資料登錄處理之一例的流程圖。
第9A及9B圖為說明本發明的第一實施形態的物品檢查處理之第一圖。
第10A及10B圖為說明本發明的第一實施形態的物品檢查處理之第二圖。
第11A~11C圖為說明本發明的第一實施形態的物品檢查處理之第三圖。
第12A及12B圖為說明本發明的第一實施形態的物品檢查處理之第四圖。
第8圖為用以詳細說明步驟S21的基本資料登錄處理的圖。
首先，商品資料登錄部109將計數物品檢查資料的變數N初期化，將「N」設定為「1」(步驟S31)。商品資料登錄部109，從物品檢查資料儲存部116讀取第N次的物品檢查處理的步驟S20中所登錄的物品檢查資料和物品檢查對象圖像．重量資料(步驟S32)。因為這次是「N=1」，所以商品資料登錄部109取得第5圖例示的第1次的物品檢查資料、物品檢查對象圖像．重量 資料。
繼之，商品資料登錄部109，判斷在第1次的物品檢查資料中是否包含1件目視得到的物品檢查結果(步驟S33)。所謂的是否包含1件目視得到的物品檢查結果，就是是否包含第4圖所示處理中用目視物品檢查畫面進行物品檢查的商品的意思。例如、商品資料登錄部109，將物品檢查資料和表示以目視進行物品檢查的資訊對應地記錄在物品檢查資料儲存部116的情況下，判斷為包含1件目視得到的物品檢查結果(包含至少1件目視得到的物品檢查結果)。第N件的物品檢查資料不包含用目視的物品檢查(連1件目視得到的物品檢查結果也沒有)的情況下(步驟S33：否)，處理進行步驟S37的判斷。第N件的物品檢查資料包含目視得到的物品檢查結果的情況下(步驟S33：是)，商品資料登錄部109對圖像切出部111下達圖像切出的指示。圖像切出部111，在已讀取的物品檢查對象圖像中切出商品圖像(步驟S34)。如上述，重量計測器300上繪製了例如格子狀的圖案。圖像切出部111，利用此已知的背景圖案，依據背景差分法等的圖像處理，切出映現了作為商品候補的一組物體的部分的圖像(商品圖像)。在「N=1」的情況下，第9A圖的左圖表示切出後的狀態之例。第9A圖的左圖表示圖像切出部111切出後再標示11、12、13、14的號碼的商品圖像被切出的情況。另外，在此，即使是拍攝相同商品A的圖像，在商品A為立體形狀的情況等，商品圖像會隨著商品A的哪一面朝上放置而有不同，但在以下的說明中，係以相同面拍攝相同物品檢查對象商品為前提。
繼之，商品資料登錄部109指示特徵量計算部106，使其計算圖像切出部111所切出的各商品圖像的特徵量。特徵量計算部106，對於已切出的各商品圖像計算特徵量(步驟S35)，並將其值輸出到商品資料登錄部109。商品資料登錄部109，將特徵量與各商品圖像對應地記錄在記憶體中。例如，若第9A圖的切出圖像「11」的特徵量為「AAA」，則商品資料登錄部109將「11」和「AAA」對應地記錄在記憶體中。
繼之，商品資料登錄部109向商品重量計算部114下達產生方程式的指示。
商品重量計算部114，使用第N次的物品檢查資料和第N次的重量資料，將重量資料和物品檢查資料的關係數式化(步驟S36)。例如，第11A圖為表示第1次的物品檢查資料和重量資料的圖。從第11A圖的資料求取物品檢查資料和重量資料的關係時，「Wa(商品A的單位重量)×2(個)+Wb(商品B的單位重量)×1(個)+Wc(商品C的單位重量)×1(個)=450(總重量)」。商品重量計算部114產生此方程式(第12A圖的出貨單1的行)並記錄在記憶體中。
繼之，商品資料登錄部109，判斷變數N與物品檢查資料儲存部116已記錄的物品檢查資料的個數是否相等(步驟S37)。變數N與已記錄的物品檢查資料的個數不相等的情況下(步驟S37：否)，商品資料登錄部109將變數N加算「1」(步驟S38)，並重複步驟S32以後的處理。具體言之，對於「N=2」的「出貨單2」的物品檢查資料，圖像切出部111像第9B圖的左圖那樣，把商品圖像21~24切出。另外，特徵量計算部106計算商 品圖像21~24各自的特徵量。另外，商品重量計算部114，從第11B圖的資料產生方程式「Wa×2+Wc×2=300」(第12A圖的出貨單2)。已記錄的物品檢查資料的個數為2的情況下，進行步驟S39的處理。已記錄的物品檢查資料的個數為「3」的情況下，商品資料登錄部109將變數N加算「1」，接著對於「N=3」的「出貨單3」的物品檢查資料進行相同的處理。例如、商品重量計算部114，從第11C圖的資料產生方程式「Wb×2+Wc×1=450」(第12A圖的出貨單3)。
變數N與已記錄的物品檢查資料的個數相等的情況下(步驟S37：是)，商品資料登錄部109向圖像分析部112下達進行已切出圖像之間的核對的指示。
圖像分析部112，進行圖像切出部111所切出的商品圖像之間的核對(步驟S39)。具體言之，圖像分析部112，針對步驟S32~步驟S37中得到的所有的商品圖像中的每一者，將其特徵量與其他商品圖像比較以進行核對處理。在此，說明在「N=2」的情況下，亦即、現在出貨單1及出貨單2的物品檢查資料已記錄在物品檢查資料儲存部116的情況。圖像分析部112，針對第9A圖的商品圖像11，將商品圖像11分別與商品圖像12、13、14、21、22、23、24進行核對。同樣地，圖像分析部112，將商品圖像12分別與商品圖像11、13、14、21、22、23、24進行核對。對於其他的商品圖像13、14、21、22、23、24也是如此。
繼之，圖像分析部112，判斷在所有的切出圖像當中，有沒有特徵量一致的商品之圖像(步驟S40)。圖像分析部112，例如當商品圖像11的特徵量和商品圖像14的特徵量的類 似度在特定範圍內，則判斷兩者為一致的商品之圖像。第10A圖表是圖像分析部112得到的核對結果之一例。依據第10A圖，核對處理的結果，圖像分析部112判斷商品圖像11、商品圖像14、商品圖像22、商品圖像23為一致的商品之圖像。同樣地，也表示出，圖像分析部112判斷商品圖像12、商品圖像21、商品圖像24為一致的商品之圖像(相同種類的商品之圖像)；商品圖像14、商品圖像22、商品圖像23為一致的商品之圖像；商品圖像21、商品圖像24為一致的商品之圖像；商品圖像22、商品圖像23為一致的商品之圖像。有特徵量一致的商品之圖像的情況下(步驟S40：是)，圖像分析部112，依物品檢查對象圖像別(物品檢查資料別)算出已進行核對的物品檢查對象圖像中包含的商品圖像的種類別的數量。第10A圖的例中，圖像分析部112，由商品圖像11和商品圖像14一致的事實，算出在出貨單1的物品檢查對象圖像中包含與商品圖像11相同種類的商品圖像有2個(商品圖像11和商品圖像14)。另外，圖像分析部112，算出與商品圖像12相同種類的商品圖像有1個(商品圖像12本身)、與商品圖像13相同種類的商品圖像有1個(商品圖像13本身)。同樣地，圖像分析部112，也針對出貨單2，算出其包含與商品圖像11相同種類的商品圖像有2個(商品圖像22和商品圖像23)。另外，圖像分析部112，算出與商品圖像12相同種類的商品圖像有2個(商品圖像21和商品圖像24)、與商品圖像13相同種類的商品圖像有0個。另一方面，在沒有特徵量一致的商品之圖像的情況下(步驟S40：否)，處理進行步驟S43的處理。
有特徵量一致的商品之圖像的情況下，接著，商 品特定部113，判斷是否有特徵量一致的圖像之個數與憑單的物品檢查數量一致的商品(步驟S41)。具體言之，商品特定部113，將圖像分析部112得到的物品檢查對象圖像別(物品檢查資料別)的商品圖像的種類別的數量、與物品檢查資料所包含的物品檢查商品的物品檢查數量比較，特定各個商品圖像所表示的物品檢查商品。茲參照第10B圖詳細說明。第10B圖的「一致圖像」欄、「出貨單1」欄、「出貨單2」欄係將圖像分析部112得出的算出結果彙整於表格中。商品特定部113、將此物品檢查對象圖像別的商品圖像的種類別之數量(第10B圖)、與出貨單1(第9A圖的右圖)及出貨單2(第9B圖的右圖)比較。由第10B圖可知，例如，商品圖像11、14、22、23為同種類、且出貨單1中包含了2個、出貨單2中包含了2個。因為這樣的商品只有商品A，所以商品特定部113特定商品圖像11等所表示的是商品A。另外，針對商品圖像12、21、24，核對物品檢查資料可知，出貨單1中有1個、出貨單2中有2個的商品是商品C，所以商品特定部113特定商品圖像12等所表示的是商品C。另外，針對商品圖像13，核對物品檢查資料可知，出貨單1中有1個、出貨單2中有0個的商品為商品B，所以商品特定部113特定商品圖像13為拍攝商品B而得之圖像。在存在已特定商品的情況下，商品特定部113判斷為，存在有特徵量一致之圖像的個數和憑單的物品檢查數量一致的商品。當判斷為存在有一致的商品時(步驟S41)，商品特定部113將已特定的結果輸出到商品資料登錄部109。繼之，商品資料登錄部109，將物品檢查對象圖像所包含商品圖像的數量和物品檢查資料所包含之物品檢查數量一 致的商品圖像，與該商品對應地登錄於商品資料儲存部117(步驟S42)。如上述，依據本實施形態，即使沒有事前將圖像進行基本資料登錄，也能夠在物品檢查作業的流程中自動將商品的圖像進行基本資料登錄。
當判斷為沒有任何一個一致的商品時(步驟S41：否)，處理進行步驟S43。
繼之，商品重量計算部114，將步驟S36中產生的所有的方程式聯立求解(步驟S43)。在此，說明「N=3」，亦即，現在已將出貨單1、出貨單2、出貨單3的物品檢查資料記錄在物品檢查資料儲存部116的情況。第12A圖表示商品重量計算部114所產生的方程式。第12A圖中，Wa表示商品A的單位重量、Wb表示商品B的單位重量、Wc表示商品C的單位重量。在此，要求出的變數有3種類(Wa、Wb、Wc)、方程式有3個，所以可以解出此聯立方程式，以求出Wa、Wb、Wc。實際上求出的解為，商品A的重量為「100」、商品B的重量為「200」、商品C的重量為「50」。第12B圖中表示解出聯立方程式所得出的各商品A~C的單位重量。商品重量計算部114，將聯立方程式的解(單位重量)與商品對應，並輸出到商品資料登錄部109。另外，商品重量計算部114在無法解出聯立方程式的情況下，將無解等的資訊輸出到商品資料登錄部109。
商品資料登錄部109，基於從商品重量計算部114取得的資訊，判斷是否有聯立方程式的解(步驟S44)。有聯立方程式的解的情況下(步驟S44：是)，商品資料登錄部109，將從商品重量計算部114取得的單位重量與商品對應地登錄在商品 資料儲存部117(步驟S45)。在沒有聯立方程式的解的情況下(步驟S44：否)，結束基本資料登錄處理。
如上述，依據本實施形態，即使沒有事前將單位重量進行基本資料登錄，也能夠在物品檢查作業的流程中自動將單位重量進行基本資料登錄。
另外，在上述例子中，關於商品圖像的登錄，可以在出貨單2的物品檢查處理後的基本資料登錄處理中進行商品圖像的登錄。另外，關於單位重量的登錄，可以在出貨單3的物品檢查處理後的基本資料登錄處理中進行。亦即、商品圖像的基本資料登錄處理和單位重量的基本資料登錄處理可以在獨立的時間點進行。另外，在上述說明中，在步驟S32中，係將物品檢查資料儲存部116中儲存的所有的物品檢查資料讀出以進行處理，但不限定於此。也可以僅讀取最後進行的物品檢查處理所使用的物品檢查資料中包含的明細資訊中有物品檢查對象商品的物品檢查資料。
依據本實施形態的物品檢查處理裝置，核對部115，即使在使用商品資料儲存部117中記錄的基本資料圖像無法特定拍攝對象商品的圖像所映現的商品時，也能夠基於在重複多次物品檢查作業當中所記錄的物品檢查資料和物品檢查對象圖像，自動將物品檢查商品和該物品檢查商品的基本資料圖像對應地登錄於商品資料儲存部117。另外，能夠基於重複多次物品檢查作業當中所記錄的物品檢查資料和重量資料，自動將物品檢查商品和該物品檢查商品的單位重量對應地登錄於商品資料儲存部117。因此，不需要事先將商品的基本資料 圖像及單位重量進行基本資料登錄，能夠減少基本資料登錄的勞力。另外，因為使用物品檢查時的拍攝圖像進行基本資料登錄，所以實際上只有登錄朝上放置之側面的基本資料圖像，並未登錄其他側面的圖像。因此，核對對象的圖像數僅限於實際上物品檢查作業中所使用的側面，所以能夠縮短核對時間。
<第二實施形態>
以下，參照第13圖~第17圖說明本發明之第二實施形態的物品檢查處理裝置。
在多個物品檢查對象商品的情況下，有時候放置在重量計測器300上的物品檢查對象商品會彼此重疊。在此情況下，難以就各商品單獨切出其商品圖像，所以難以用相同於第一實施形態的處理，自動將商品圖像進行基本資料登錄。
在第二實施形態中，在商品彼此重疊放置的情況下，將重疊的商品之圖像分割，並將各個商品圖像登錄在商品資料儲存部117。
第13圖為表示本發明的第二實施形態的物品檢查處理裝置的構成之一例的方塊圖。
如第13圖所示，第二實施形態的物品檢查處理裝置100A與第一實施形態的相異處在於，具有顯示資訊輸出部105A、商品資料登錄部109A，以取代第一實施形態中的顯示資訊輸出部105、商品資料登錄部109。顯示資訊輸出部105A提供作業員輸入手段，使其進行將物品檢查商品和物品檢查對象圖像中映現該物品檢查商品的部分關聯對應的操作。商品資料登錄部109A具有商品圖像決定部110A、及商品重量計算部114。商品圖像 決定部110A和第一實施形態一樣，具有圖像切出部111、圖像分析部112、及商品特定部113，並且具有作為第二實施形態的特徵的部分圖像選擇部118。第二實施形態的物品檢查處理裝置100A的其他構成與第一實施形態相同。
在物品檢查對象圖像中，相較於物品檢查資料中包含的物品檢查數量的合計，切出的群組圖像(商品圖像)的個數較小的情況下，部分圖像選擇部118進行以下的處理。亦即，部分圖像選擇部118，基於將物品檢查資料中包含的物品檢查商品與該物品檢查商品映現的圖像的部分關聯對應的操作，核對作為群組圖像中有複數商品的圖像的包含某一個物品檢查商品(例如商品A)的圖像，和包含相同物品檢查商品(商品A)的其他的群組圖像。部分圖像選擇部118，其核對的結果，將特徵量一致的範圍之圖像選擇作為該物品檢查商品(商品A)的部分圖像。
另外，商品資料登錄部109A，將部分圖像選擇部118所選擇的範圍的圖像，與表示其所對應之商品以及該圖像為不完整的資訊對應地登錄於商品資料儲存部117。另外，商品資料登錄部109A，對於已登錄了部分圖像的某一個商品(例如商品A)，當已取得將該商品的輪廓切出的群組圖像(商品A單體的商品圖像)時，登錄該圖像以取代部分圖像。
繼之，參照第14圖~第16B圖，說明第二實施形態固有的處理。
第14圖為表示本發明的第二實施形態的物品檢查確認畫面之一例的圖。
第14圖表示就「出貨單4」進行物品檢查處理時所顯示的物品檢查確認畫面之例。「出貨單4」中包含：2個商品A、1個商品B、3個商品C。另外，假設商品A、商品B、商品C尚未登錄在商品資料儲存部117。因此，圖像核對結果顯示欄63中顯示「圖像NG」、重量比較結果顯示欄64中顯示「重量NG」。在針對「出貨單4」的物品檢查作業中，商品A~商品C像物品檢查對象圖像顯示欄62所顯示的那樣，放置在重量計測器300上。亦即，1個商品A被放置為其一部與商品C重疊，另一個商品A被放置為其一部與商品B重疊。像這樣，商品被放置為彼此重疊的情況下，圖像切出部111進行商品圖像的切出時，被重疊放置的商品A和商品C被切出為一個群組的商品圖像(虛線圍出的商品圖像41)。另外，重疊放置的商品A和商品B被切出為一個群組的商品圖像(虛線圍出的商品圖像44)。亦即，實際上，雖然是6個商品放置在重量計測器300上的狀況，但是使用背景差分法等的圖像處理中，只能切出4個商品。因此，在第二實施形態中，部分圖像選擇部118，將重疊放置的商品的圖像分割為各個商品，實現半自動的基本資料登錄處理。更具體言之，目視物品檢查畫面(第4圖的步驟S18)中，輸入接受部104接受作業員將物品檢查資料中包含的物品檢查商品、和物品檢查對象圖像中映現該物品檢查商品的圖像部分關聯對應的操作。部分圖像選擇部118，基於此操作進行商品圖像的分割。另外，第二實施形態中，目視物品檢查畫面顯示物品檢查對象圖像，只要有將物品檢查對象圖像當中映現了某個商品的圖像部分和該商品關聯對應之操作的輸入手段，即使是任意的圖像 也沒關係。在此，假設目視物品檢查畫面是和第14圖例示的物品檢查確認畫面相同的畫面，以進行以下的說明。
第15圖為說明本發明的第二實施形態的基本資料登錄處理的第一圖。
第15圖的左圖為，顯示作業員執行將商品以及映現該商品的圖像部分關聯對應操作後的物品檢查對象圖像顯示欄62的一例。第15圖的右圖為「出貨單4」的明細資料。例如，作業員，在與第14圖的物品檢查確認畫面相同的目視確認畫面中，用滑鼠等進行選擇物品檢查資料顯示欄61的第1行的操作，再用滑鼠等進行選擇映現於物品檢查對象圖像顯示欄62的商品A(第15圖的點41A、44A)的操作。然後，作業員按壓點選確認按鈕66。這就是將物品檢查資料中包含的物品檢查商品(商品A)和物品檢查對象圖像中映現該物品檢查商品(商品A)的圖像部分關聯對應的操作之例。作業員執行此關聯對應的操作時，輸入接受部104接收到此操作，透過控制判斷部101，將商品A的識別資訊和作業員所選擇的圖像部分的座標資訊輸出到商品資料登錄部109A。商品資料登錄部109A中，部分圖像選擇部118取得這些資訊。另外，部分圖像選擇部118，取得圖像切出部111切出後的商品圖像41、商品圖像44。另外，部分圖像選擇部118，取得特徵量計算部106所計算的商品圖像41、商品圖像44的特徵量。部分圖像選擇部118使用這些資訊，進行將重疊在一起的商品的圖像分割的處理。另外，同樣地，作業員也可以針對商品B、商品C，執行將商品及映現該商品的圖像部分關聯對應的操作。在此情況下，部分圖像選擇部118取得商 品B的識別資訊和商品B的座標資訊、商品C的識別資訊和商品C的座標資訊。
第16A及16B圖為說明本發明的第二實施形態的基本資料登錄處理的第二圖。
參照第16A及16B圖，說明部分圖像選擇部118的切出處理。部分圖像選擇部118，對於商品圖像41和商品圖像44，進行移動、旋轉等的圖像處理，同時核對兩圖像，找出兩圖像的特徵量重合的位置關係。如此一來，如第16A圖那樣，找出映現了商品A的區域為部分一致的位置關係。部分圖像選擇部118，由第16A圖例示的特徵量一致的位置關係重合的圖像，僅切出特徵量一致的範圍的區域。如此一來，部分圖像選擇部118得到第16B圖例示的商品A的部分圖像。此時，像第16A圖那樣，商品A的一部分被隱藏在其他商品下面時，會在商品A的圖像中映現出其他商品。因此，部分圖像選擇部118有時無法從第16A圖例示的圖像，識別出商品A的正確輪廓，只能得到部分的圖像。但是，如果在切出的部分圖像中，含有足夠的商品A的特徵量，就能夠在物品檢查處理中進行商品A的核對處理。因此，在第二實施形態中，部分圖像選擇部118將已切出的部分的圖像(部分圖像)作為商品A的圖像，將其登錄於商品資料儲存部117。
繼之，參照第17圖，說明第二實施形態的基本資料登錄處理。其前提為，在第4圖的步驟S17中為[否]的情況下，在目視物品檢查畫面(例如可以和第14圖的物品檢查確認畫面相同)中，輸入接受部104接受了作業員執行的將物品檢查 商品和映現該物品檢查商品的圖像部分關聯對應的操作。輸入接受部104，將對應的物品檢查商品的識別資訊和作業員所選擇的圖像部分的座標資訊，向控制判斷部101輸出。控制判斷部101將這些資訊記錄在記憶體中。另外，在步驟S20中，控制判斷部101將物品檢查對象圖像、重量資料、物品檢查資料、商品的識別資訊、作業員所選擇的圖像部分的座標資訊對應地記錄在物品檢查資料儲存部116中。
另外，說明顯示資訊輸出部105A將目視物品檢查畫面輸出時之一例。例如，圖像切出部111從物品檢查對象圖像進行商品的切出處理。商品資料登錄部109A，比較物品檢查資料中包含的物品檢查數量的合計和切出的商品圖像數。當兩者的數量不一致時，商品資料登錄部109A在顯示資訊輸出部105A顯示如後的訊息：「有重疊放置的商品，請進行將物品檢查商品和映現該物品檢查商品的圖像部分關聯對應的操作」等。藉由該顯示內容促使作業員進行關聯對應的操作。
第17圖為表示本發明的第二實施形態的物品檢查處理裝置的基本資料登錄處理之一例的流程圖。
第17圖所示的處理中，對於與第8圖相同的處理，則簡單進行說明。首先，商品資料登錄部109A將變數N設定為「1」(步驟S31)。商品資料登錄部109A，從物品檢查資料儲存部116讀取第N次登錄的物品檢查資料和物品檢查對象圖像．重量資料(步驟S32)。繼之，商品資料登錄部109A，判斷在第N次的物品檢查資料中是否包含1件目視得到的物品檢查結果(步驟S33)。在第N件的物品檢查資料未包含目視的物品檢查的情況 下(步驟S33：否)，處理進行步驟S37的判斷。在包含了目視得到的物品檢查結果的情況下(步驟S33：是)，圖像切出部111針對物品檢查對象圖像進行商品圖像的切出(步驟S34)。繼之，特徵量計算部106，對已切出的各商品圖像計算特徵量(步驟S35)。商品資料登錄部109A，取得圖像切出部111所切出的商品圖像、及該商品圖像的特徵量。繼之，商品資料登錄部109A，判斷切出的商品圖像的個數和第N次的物品檢查資料所包含的全物品檢查商品的個數是否一致(步驟S351)。當其為一致的情況下(步驟S351：是)，處理進行步驟S36。
當其為不一致的情況下(步驟S351：否)，控制判斷部101，讀取物品檢查資料儲存部116中記錄的商品的識別資訊及該商品的圖像部分的座標資訊(步驟S352)，並將這些資訊向商品資料登錄部109A輸出。繼之，在商品資料登錄部109A中，部分圖像選擇部118進行切出部分圖像的處理(步驟S353)。具體言之，如參照第16A及16B圖所作的說明，部分圖像選擇部118進行圖像處理，將包含相同商品的複數個圖像重合使得該圖像所包含的特徵量的分布一致。而且，部分圖像選擇部118僅切出特徵量一致部分的範圍(在第16A及16B圖的例子中是商品A)。另外，像商品A這樣重疊映現的商品有複數種類的情況下，部分圖像選擇部118，針對這些複數種類的商品中的每一者分別進行部分圖像的切出處理。另外，部分圖像選擇部118，對於切出圖像以外的部分的圖像(第15圖的例中，商品圖像41的映現了商品C的部分、商品圖像44的映現了商品B的部分)也進行從包含複數商品的商品圖像的切出。步驟S353的處理中，部 分圖像選擇部118得到：含有商品A的特徵量的2個圖像、還有切出商品A後的包含商品B的特徵量的圖像1個以及包含商品C的特徵量的圖像1個。
繼之，商品重量計算部114，使用第N次的物品檢查資料和與其對應的重量資料，將重量資料和物品檢查資料的關係數式化(步驟S36)。繼之，商品資料登錄部109A判斷變數N與已記錄的物品檢查資料的個數是否相等(步驟S37)。變數N與已記錄的物品檢查資料的個數不相等的情況下(步驟S37：否)，商品資料登錄部109A將變數N加算「1」(步驟S38)，並重複步驟S32以後的處理。變數N與已記錄的物品檢查資料的個數相等的情況下(步驟S37：是)，圖像分析部112，將圖像切出部111、部分圖像選擇部118的切出圖像(包含映現一個商品的商品圖像、以及從映現複數商品的商品圖像中切出的部分圖像)彼此核對(步驟S39)。在得到如第15圖的物品檢查對象圖像的情況下，使用圖像分析部112、圖像切出部111切出的2個商品C的圖像、部分圖像選擇部118切出的2個商品A的圖像、部分圖像選擇部118切出的剩下來的1個商品B的圖像和1個商品C的圖像、及從其他出貨單的物品檢查對象圖像切出的商品圖像，以循環賽的方式進行核對處理，確認是否有特徵量彼此一致的圖像。繼之，圖像分析部112判斷在所有的切出圖像當中是否有一致的商品的圖像(步驟S40)。沒有一致的商品之圖像的情況下(步驟S40：否)，處理進行步驟S43的處理。
有一致的商品之圖像時(步驟S40：是)，圖像分析部112依物品檢查對象圖像別，算出已核對的物品檢查對象圖像 中包含的商品圖像及部分圖像的種類別的數量。繼之，商品特定部113判斷是否有特徵量一致的圖像之個數與物品檢查資料的物品檢查數量一致的商品(步驟S41)。有一致的商品的情況下(步驟S41：是)，商品資料登錄部109A，將物品檢查對象圖像中包含的商品圖像等的數量和物品檢查資料中包含的物品檢查數量一致的商品的商品圖像或部分圖像，與該商品對應地登錄於商品資料儲存部117(步驟S42)。此時，對於登錄的圖像為部分圖像的商品輪廓不明確的商品，商品資料登錄部109A將其對應於表示圖像不完整的資訊並登錄之。另外，在沒有特徵量一致的圖像的個數與物品檢查資料的物品檢查數量一致的商品的情況下(步驟S41：否)，處理進行步驟S43的處理。
繼之，商品重量計算部114將步驟S36中產生的所有的方程式聯立求解(步驟S43)。在聯立方程式有解的情況下(步驟S44：是)，商品資料登錄部109A，將商品重量計算部114所計算的單位重量與商品對應地登錄於商品資料儲存部117(步驟S45)。在聯立方程式無解的情況下(步驟S44：否)，處理進行步驟S46。
繼之，商品資料登錄部109A，針對登錄了部分圖像的商品，判斷是否有得到包含輪廓的圖像(步驟S46)。所謂的登錄了部分圖像的商品，為例如上記的「出貨單4」的商品A那樣的商品。在此，假設在「出貨單4」之後，進行「出貨單5」的物品檢查處理。在此情況下，商品資料登錄部109A，針對出貨單5的物品檢查資料中包含的商品，檢索商品資料儲存部117，確認其是否登錄了與表示不完整圖像的資訊對應登錄的基本資 料圖像。例如，若「出貨單5」的物品檢查資料中包含商品A，商品資料登錄部109A檢索商品資料儲存部117，判斷物品檢查資料中包含登錄了部分圖像的商品。繼之，商品資料登錄部109A，判斷「出貨單5」的物品檢查對象圖像中是否以可得知商品A之輪廓的形態映現。例如，圖像切出部111從物品檢查對象圖像切出所有的商品、商品資料登錄部109A判斷切出的商品圖像數和物品檢查資料中包含的物品檢查數量的合計是否一致。在一致的情況下，圖像分析部112，將圖像切出部111所切出的各個圖像與商品資料儲存部117中登錄得商品A的部分圖像進行核對。核對的結果，在商品圖像中，若有發現特徵量和商品A的部分圖像一致的圖像，則認為該商品圖像為可得知包含商品A的特徵量的商品A的輪廓的圖像。在此情況下，商品資料登錄部109A判斷為可取得包含輪廓的圖像。在判斷為可取得包含輪廓的圖像的情況下(步驟S46：是)，圖像分析部112將包含輪廓的商品圖像向商品資料登錄部109A輸出。商品資料登錄部109A，用該商品圖像更新已登錄的商品A的部分圖像(步驟S47)。例如，商品資料登錄部109A，將圖像分析部112核對的結果判斷為一致得商品A得商品圖像和商品A對應地登錄於商品資料儲存部117。另外，從商品資料儲存部117中刪除已登錄的商品A的部分圖像和表示其為對應於商品A的不完整的圖像的資訊。當判斷為不能取得包含輪廓的圖像的情況下(步驟S46：否)，結束基本資料登錄處理。
依據第二實施形態，能夠得到依據第一實施形態的有利效果，並且，即使在商品被放置為彼此重疊的狀況下， 也能夠不事前將圖像進行基本資料登錄，而能夠在物品檢查作業的流程中半自動地將基本資料圖像登錄於商品資料儲存部117。另外，在繼續進行物品檢查作業時，對於登錄了部分圖像的物品檢查商品，當物品檢查對象圖像中包含了在未重疊狀態下拍攝的商品圖像時，進行將基本資料圖像置換為該商品圖像的處理，就能夠更正在和其他商品重疊狀態下登錄的基本資料圖像，能夠更提高核對的精度。
<第三實施形態>
以下，參照第18圖說明本發明的第三實施形態的物品檢查處理之一例。
第三實施形態中，當商品的圖像尚未登錄於商品資料儲存部117的情況下，能夠藉由作業員的點選確認操作，將該商品的商品圖像登錄於商品資料儲存部117。所謂的點選確認操作為，將物品檢查商品與映現了該商品的圖像部分關聯對應的操作。第三實施形態的構成為例如與第二實施形態的物品檢查處理裝置100A相同。繼之，參照第18圖，說明第三實施形態的物品檢查處理及商品圖像的登錄處理。
第18圖為表示使用本發明的第三實施形態的物品檢查處理裝置之物品檢查處理的一例之流程圖。
第19圖為表示本發明的第三實施形態的物品檢查確認畫面之一例的圖。
第19圖的處理中，簡單說明和第一實施形態的第4圖相同的處理。
前提為，物品檢查資料已被輸入物品檢查處理裝置100A。 如此一來，目標總重量計算部108，用物品檢查資料中包含的物品檢查商品的單位重量、物品檢查數量計算目標總重量(步驟S11)。繼之，作業員將物品檢查對象商品600放置在重量計測器300上。如此一來，重量計測器300測定重量，重量取得部102取得重量資料(步驟S12)。繼之，拍攝裝置200拍攝物品檢查對象商品600的物品檢查對象圖像，商品圖像取得部103取得該物品檢查對象圖像(步驟S13)。繼之，特徵量計算部106計算物品檢查對象圖像的特徵量(步驟S14)。繼之核對部115，使用商品資料儲存部117中已登錄的基本資料圖像，檢索在物品檢查對象圖像中是否映現了物品檢查商品(步驟S15)。繼之，顯示資訊輸出部105A產生第19圖例示的物品檢查確認畫面的圖像，將之顯示於顯示裝置400(步驟S16)。
繼之，作業員確認商品是否已全部特定(步驟S17)。例如，當有任何一個商品未特定的情況下(步驟S17：否)，顯示資訊輸出部105A顯示目視確認畫面(例如可以和第19圖例示的物品檢查確認畫面相同)(步驟S18)。作業員，進行放置在重量計測器300的商品之調整，直到在目視確認畫面上藉由目視完成物品檢查為止。當物品檢查資料中包含的物品檢查商品不多不少地放置在重量計測器300上時，作業員進行未登錄商品的登錄操作。設若目視確認畫面和第19圖例示的畫面相同，進行登錄操作的說明。首先，作業員進行將物品檢查商品與映現了該物品檢查商品的圖像部分關聯對應的操作。例如，作業員進行選擇物品檢查資料顯示欄61的第1行的操作，並且，選擇物品檢查對象圖像顯示欄62中映現了商品A之部分的2處的 操作。然後，作業員按下點選確認按鈕66。作業員對於商品B、商品C也進行相同的操作。輸入接受部104接受作業員將物品檢查商品和映現了該物品檢查商品的圖像部分關聯對應的操作(步驟S22)。輸入接受部104，透過控制判斷部101，將對應的物品檢查商品的識別資訊和作業員所選擇的圖像部分的座標資訊向商品資料登錄部109A輸出。繼之，商品資料登錄部109A，將商品的圖像登錄於商品資料儲存部117(步驟S23)。具體言之，圖像切出部111進行從物品檢查對象圖像切出各商品圖像的處理，商品資料登錄部109A，將切出的商品圖像當中的包含作業員所選擇的部分的座標資訊的商品圖像，和作業員指定與該商品圖像對應的物品檢查商品對應地登錄於商品資料儲存部117中。藉此，物品檢查結束。
另一方面，所有的商品已經特定的情況下(步驟S17：是)，作業員確認總重量誤差是否在許容範圍內(步驟S19)。不在許容範圍內的情況下(步驟S19：否)，作業員調整商品的超過或不足。藉由作業員的調整作業使得總重量誤差在許容範圍內時(步驟S19)，物品檢查結束。物品檢查結束時，控制判斷部101將物品檢查對象圖像、重量資料、物品檢查資料對應地記錄在物品檢查資料儲存部116(步驟S20)。繼之，物品檢查處理裝置100進行基本資料登錄處理(步驟S24)。第三實施形態的基本資料登錄處理中，已藉由作業員的操作完成了基本資料圖像的登錄處理，所以由商品重量計算部114算出單位重量，商品資料登錄部109A將各商品的單位重量登錄於商品資料儲存部117。
依據第三實施形態，在存在基本資料圖像未登錄在商品資料儲存部117的物品檢查商品的情況下，作業員只要在物品檢查作業中，進行將該物品檢查商品和該物品檢查商品的圖像關聯對應的操作，就能夠進行基本資料圖像的登錄。藉此，不需要事前進行基本資料圖像的登錄，能夠節省勞力。另外，在目視確認畫面中，作業員點選確認物品檢查對象圖像中映現的各商品圖像和物品檢查資料中包含的物品檢查商品，可望達成降低物品檢查作業的錯誤的效果。
<變形例>
能夠將第一實施形態中的商品資料登錄部109、第二實施形態中的商品資料登錄部109A分別構成為獨立的裝置，並使用作為商品基本資料登錄裝置。
第20圖為表示本發明的實施形態的商品資料登錄裝置之構成的一例的方塊圖。
如第20圖所示，商品基本資料登錄裝置150具有：控制判斷部101、輸入接受部104、商品資料登錄部109。
商品基本資料登錄裝置150中，輸入接受部104取得複數的物品檢查資料、對於這些物品檢查資料的物品檢查完畢的物品檢查對象圖像及重量資料。例如，商品資料登錄部109，基於作業員的基本資料登錄指示操作等，使用輸入接受部104所取得的資料，依據參照第8圖說明的處理，求出物品檢查資料中包含的商品之基本資料圖像、單位重量，並將這些資訊登錄於商品基本資料庫151。藉由商品基本資料登錄裝置150，利用物品檢查作業中得到的物品檢查資料、物品檢查對象圖像、重量 資料，能夠將基本資料圖像等登錄於商品基本資料庫151。
第21圖為表示本發明的實施形態的物品檢查處理裝置及商品資料登錄裝置的硬體構成之一例的方塊圖。
如第21圖所示，物品檢查處理裝置100、100A由電腦裝置實現，其包括：CPU901、記憶體902、硬碟等的記憶裝置903、網路連接用的通訊IF904(通訊介面)。不過，物品檢查處理裝置100、100A的構成不限定於第21圖所示的電腦裝置。例如，物品檢查處理裝置100、100A，透過通訊IF904將圖像或重量資料傳送至外部，在外部進行物品檢查對象的商品的核對，並接收其結果亦可。就商品基本資料登錄裝置150來說也是如此。
各實施形態中利用的方塊圖係表示功能單位的方塊，而非硬體單位的構成。這些功能方塊藉由硬體和軟體的任意組合而實現。另外，物品檢查處理裝置100、100A、商品基本資料登錄裝置150可以由物理結合的一個裝置來實現，也可以將物理上分離的二個以上的裝置以有線或無線的方式連接並由這些複數裝置來實現。
另外，上述物品檢查處理裝置100、100A、商品基本資料登錄裝置150，其內部有電腦。而且，上述的物品檢查處理裝置100、100A、商品基本資料登錄裝置150的各處理的過程，可以事先以程式的形式記憶在電腦可讀取儲存媒體中，由電腦讀取並執行此程式來執行上述處理。在此，所謂的電腦可讀取儲存媒體為，磁碟、光碟、CD-ROM、DVD-ROM、半導體記憶體等。另外，亦可將此電腦程式以通訊線路配送到電腦，再由接受該配送的電腦執行該程式。
另外，上述程式亦可用以實現前述功能的一部分。而且，上述程式亦可為差分檔案(差分程式)，用其與電腦系統中已記錄的程式之組合來實現前述功能。
另外，在不脫離本發明的趣旨的範圍內，可以適當地用周知的構成要素置換上述實施形態中的構成要素。另外，本發明的技術範圍不限定於上記實施形態，在不脫離本發明趣旨的範圍內可以施以種種變更。
上記實施形態的一部或全部可以記載如下列的附註，但不以其為限。
(附註1)
物品檢查處理裝置，其包括：商品圖像決定部，基於包含作為應檢查對象的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；商品資料登錄部，將前記特定的圖像登錄在記憶部；及核對部，基於前記記憶部中所記憶的圖像，在對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。
(附註2)
如附註1記載的物品檢查處理裝置，其中前記商品圖像決定部包含： 圖像切出部，從前記第1物品檢查對象圖像中切出作為前記至少一個物品檢查商品中任一者的圖像的候補的複數的群組圖像；圖像分析部，將前記切出的複數圖像互相比較，算出前記切出的複數個圖像的種類別的數量；商品特定部，將前記切出的複數個圖像的種類別的數量、與前記至少一個物品檢查數量比較，特定前記切出的複數個圖像分別表示的商品。
(附註3)
如附註1或附註2記載的物品檢查處理裝置，前記商品圖像決定部，基於包含前記第1物品檢查資料的至少一個物品檢查資料、分別與前記至少一個物品檢查資料一致的至少一個物品檢查對象圖像，特定前記至少一個物品檢查資料中包含的各物品檢查商品的圖像。
(附註4)
如附註1到附註3中任1者記載的物品檢查處理裝置，更包括：商品重量計算部，基於表示前記至少一個物品檢查商品的種類別的單位重量及前記至少一個物品檢查數量、和表示前記商品群之已測定的重量的重量資料的關係之方程式，算出前記至少一個物品檢查商品的種類別的單位重量。
(附註5)
如附註4記載的物品檢查處理裝置，前記商品重量計算部，基於包含前記第1物品檢查資料的至少一個物品檢查資 料、分別和前記至少一個物品檢查資料一致的至少一個商品群的重量資料，算出前記至少一個物品檢查資料所包含的物品檢查商品的種類別的單位重量。
(附註6)
如附註1及3到5中任一者記載的物品檢查處理裝置，前記商品圖像決定部包含：圖像切出部，從前記第1物品檢查對象圖像中切出作為前記至少一個物品檢查商品中任一者的圖像的候補的複數的一組圖像；部分圖像選擇部，前記複數個切出圖像包含表示一商品的一部分上重疊了另一商品的圖像的第1群組圖像時，至少基於前記另一商品的特徵量，從前記第1群組圖像當中，選擇表示前記一商品的部分作為前記一商品的部分圖像。
(附註7)
如附註6記載的物品檢查處理裝置，前記商品資料登錄部，將前記部分圖像與表示前記部分圖像為不完整圖像的資訊對應並登錄於前記記憶部。
(附註8)
如附註7記載的物品檢查處理裝置，前記商品資料登錄部，將與前記一商品相同種類的商品在未與另一商品重疊的狀態下拍攝所得到的圖像與前記部分圖像置換。
(附註9)
如附註1到附註8中任一者記載的物品檢查處理裝置，前記商品資料登錄部， 基於使前記至少一個物品檢查商品當中的第1物品檢查商品、與從前記第1物品檢查對象圖像切出的一個群組圖像對應的操作，將前記一個群組圖像作為表示前記第1物品檢查商品的圖像登錄於前記記憶部。
(附註10)
物品檢查系統，其包括：拍攝裝置，拍攝前記商品群，得到前記第1物品檢查對象圖像；重量計測器，測定前記商品群的重量；如附註1到附註9中的任一項所記載的物品檢查處理裝置，取得前記拍攝裝置所得到的前記第1物品檢查對象圖像、及前記重量計測器所測定的前記商品群的重量。
(附註11)
商品基本資料登錄裝置，其包括：商品圖像決定部，基於包含作為應檢查對象的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之物品檢查資料、以及表示和前記物品檢查資料一致的商品群的物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；商品資料登錄部，將前記特定的圖像登錄在商品基本資料庫。
(附註12)
物品檢查處理方法，其包括：基於包含作為應檢查對象的至少一個物品檢查商品及分 別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；將前記特定的圖像登錄在記憶部；及基於前記記憶部中所記憶的圖像，對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。
(附註13)
程式，使電腦執行：基於包含作為應檢查對象的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，特定前記至少一個物品檢查商品個別的圖像；將前記特定的圖像登錄在記憶部；及基於前記記憶部中所記憶的圖像，對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。
本申請案以2016年3月31日申請的日本專利申請2016-069899為基礎主張優先權，並包含其所有揭露內容。
【產業上的利用可能性】
本發明可以適用於物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、物品檢查處理方法及程式。
100‧‧‧物品檢查處理裝置
109‧‧‧商品資料登錄部
110‧‧‧商品圖像決定部
115‧‧‧核對部

Claims (13)

  1. 一種物品檢查處理裝置，其包括：商品圖像決定部，基於包含作為應檢查對象且包含圖像未登錄在記憶部之未登錄商品在內的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，藉由判定前記第1物品檢查對象圖像當中，特徵量一致的商品圖像的個數，是否與前記至少一個物品檢查商品的數量一致，以特定包含前記未登錄商品在內的前記至少一個物品檢查商品個別的圖像；商品資料登錄部，將與包含前記未登錄商品在內的前記至少一個物品檢查商品對應的前記特定的圖像登錄在前記記憶部；及核對部，基於前記記憶部中所記憶的圖像，在對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。
  2. 如申請專利範圍第1項所記載的物品檢查處理裝置，其中前記商品圖像決定部包含：圖像切出部，從前記第1物品檢查對象圖像中切出作為前記至少一個物品檢查商品中任一者的圖像的候補的複數的群組圖像；圖像分析部，將前記切出的複數圖像互相比較，算出前記 切出的複數個圖像的種類別的數量；商品特定部，將前記切出的複數個圖像的種類別的數量、與前記至少一個物品檢查數量比較，特定前記切出的複數個圖像分別表示的商品。
  3. 如申請專利範圍第1或2項所記載的物品檢查處理裝置，前記商品圖像決定部，基於包含前記第1物品檢查資料的至少一個物品檢查資料、分別與前記至少一個物品檢查資料一致的至少一個物品檢查對象圖像，特定前記至少一個物品檢查資料中包含的各物品檢查商品的圖像。
  4. 如申請專利範圍第1或2項所記載的物品檢查處理裝置，更包括：商品重量計算部，基於表示前記至少一個物品檢查商品的種類別的單位重量及前記至少一個物品檢查數量、和表示前記商品群之已測定的重量的重量資料的關係之方程式，算出前記至少一個物品檢查商品的種類別的單位重量。
  5. 如申請專利範圍第4項所記載的物品檢查處理裝置，前記商品重量計算部，基於包含前記第1物品檢查資料的至少一個物品檢查資料、分別和前記至少一個物品檢查資料一致的至少一個商品群的重量資料，算出前記至少一個物品檢查資料所包含的物品檢查商品的種類別的單位重量。
  6. 如申請專利範圍第1項所記載的物品檢查處理裝置，前記商品圖像決定部包含：圖像切出部，從前記第1物品檢查對象圖像中切出作為前記至少一個物品檢查商品中任一者的圖像的候補的複數的 一組圖像；部分圖像選擇部，前記複數個切出圖像包含表示一商品的一部分上重疊了另一商品的圖像的第1群組圖像時，至少基於前記另一商品的特徵量，從前記第1群組圖像當中，選擇表示前記一商品的部分作為前記一商品的部分圖像。
  7. 如申請專利範圍第6項所記載的物品檢查處理裝置，前記商品資料登錄部，將前記部分圖像與表示前記部分圖像為不完整圖像的資訊對應並登錄於前記記憶部。
  8. 如申請專利範圍第7項所記載的物品檢查處理裝置，前記商品資料登錄部，將與前記一商品相同種類的商品在未與另一商品重疊的狀態下拍攝所得到的圖像與前記部分圖像置換。
  9. 如申請專利範圍第1或2項所記載的物品檢查處理裝置，前記商品資料登錄部，基於使前記至少一個物品檢查商品當中的第1物品檢查商品、與從前記第1物品檢查對象圖像切出的一個群組圖像對應的操作，將前記一個群組圖像作為表示前記第1物品檢查商品的圖像登錄於前記記憶部。
  10. 一種物品檢查系統，其包括：拍攝裝置，拍攝前記商品群，得到前記第1物品檢查對象圖像；重量計測器，測定前記商品群的重量；如請求項1到請求項9中的任一項所記載的物品檢查處理裝置，取得前記拍攝裝置所得到的前記第1物品檢查對象 圖像、及前記重量計測器所測定的前記商品群的重量。
  11. 一種商品基本資料登錄裝置，其包括：商品圖像決定部，基於包含作為應檢查對象且包含圖像未登錄在商品基本資料庫之未登錄商品在內的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之物品檢查資料、以及表示和前記物品檢查資料一致的商品群的物品檢查對象圖像，藉由判定前記物品檢查對象圖像當中，特徵量一致的商品圖像的個數，是否與前記至少一個物品檢查商品的數量一致，以特定包含前記未登錄商品在內的前記至少一個物品檢查商品個別的圖像；商品資料登錄部，將與包含前記未登錄商品在內的前記至少一個物品檢查商品對應的前記特定的圖像登錄在前記商品基本資料庫。
  12. 一種物品檢查處理方法，其包括：基於包含作為應檢查對象且包含圖像未登錄在記憶部之未登錄商品在內的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，藉由判定前記第1物品檢查對象圖像當中，特徵量一致的商品圖像的個數，是否與前記至少一個物品檢查商品的數量一致，以特定包含前記未登錄商品在內的前記至少一個物品檢查商品個別的圖像； 將與包含前記未登錄商品在內的前記至少一個物品檢查商品對應的前記特定的圖像登錄在前記記憶部；及基於前記記憶部中所記憶的圖像，對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。
  13. 一種程式，使電腦執行：基於包含作為應檢查對象且包含圖像未登錄在記憶部之未登錄商品在內的至少一個物品檢查商品及分別表示前記至少一個物品檢查商品的數量的至少一個物品檢查數量之第1物品檢查資料、以及表示和前記第1物品檢查資料一致的商品群的第1物品檢查對象圖像，藉由判定前記第1物品檢查對象圖像當中，特徵量一致的商品圖像的個數，是否與前記至少一個物品檢查商品的數量一致，以特定包含前記未登錄商品在內的前記至少一個物品檢查商品個別的圖像；將與包含前記未登錄商品在內的前記至少一個物品檢查商品對應的前記特定的圖像登錄在前記記憶部；及基於前記記憶部中所記憶的圖像，對應於第2物品檢查資料的第2物品檢查對象圖像中所包含的商品當中，特定與前記至少一個物品檢查商品中任一者為相同種類的商品。
TW106110272A 2016-03-31 2017-03-28 物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、物品檢查處理方法及程式 TWI770015B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016069899A JP6724484B2 (ja) 2016-03-31 2016-03-31 検品処理装置、検品システム、商品マスタ登録装置、検品処理方法及びプログラム
JP2016-069899 2016-03-31

Publications (2)

Publication Number Publication Date
TW201804381A TW201804381A (zh) 2018-02-01
TWI770015B true TWI770015B (zh) 2022-07-11

Family

ID=59964579

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106110272A TWI770015B (zh) 2016-03-31 2017-03-28 物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、物品檢查處理方法及程式

Country Status (4)

Country Link
JP (1) JP6724484B2 (zh)
SG (1) SG11201807007PA (zh)
TW (1) TWI770015B (zh)
WO (1) WO2017170260A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7291264B2 (ja) * 2017-11-02 2023-06-14 株式会社オービック 計算処理装置、計算処理方法および計算処理プログラム
US11966435B2 (en) 2018-03-20 2024-04-23 Nec Corporation Information processing apparatus, control method, and program
CN110443553B (zh) * 2019-08-15 2022-08-23 深圳市海思睿科技有限公司 一种基于物品存储箱的无人值守物品管理方法
JP7388871B2 (ja) 2019-10-18 2023-11-29 株式会社キッツ 判定装置、判定方法および判定プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090198464A1 (en) * 2008-01-31 2009-08-06 Caterpillar Inc. System and method for assembly inspection
TWI474267B (zh) * 2008-03-25 2015-02-21 Sicpa Holding Sa 控制物品之生產的方法及系統
US20150332448A1 (en) * 2012-12-27 2015-11-19 Nuctech Company Limited Object detection methods, display methods and apparatuses

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0891543A (ja) * 1994-09-28 1996-04-09 Omron Corp 画像処理方法およびその装置
JP2004318488A (ja) * 2003-04-16 2004-11-11 Konica Minolta Photo Imaging Inc 製品検査方法及び製品検査装置
JP2011039872A (ja) * 2009-08-13 2011-02-24 Komatsu Denshi Kk 物品計数装置及び物品計数方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090198464A1 (en) * 2008-01-31 2009-08-06 Caterpillar Inc. System and method for assembly inspection
TWI474267B (zh) * 2008-03-25 2015-02-21 Sicpa Holding Sa 控制物品之生產的方法及系統
US20150332448A1 (en) * 2012-12-27 2015-11-19 Nuctech Company Limited Object detection methods, display methods and apparatuses

Also Published As

Publication number Publication date
SG11201807007PA (en) 2018-09-27
TW201804381A (zh) 2018-02-01
WO2017170260A1 (ja) 2017-10-05
JP2017178574A (ja) 2017-10-05
JP6724484B2 (ja) 2020-07-15

Similar Documents

Publication Publication Date Title
TWI770015B (zh) 物品檢查處理裝置、物品檢查系統、商品基本資料登錄裝置、物品檢查處理方法及程式
US10859375B2 (en) Methods for improving the accuracy of dimensioning-system measurements
TWI528019B (zh) 用於物件包裝之物件三維尺寸估測系統及方法
JP2019096319A (ja) データラベリング作業検査方法及びプログラム
JP6481460B2 (ja) 物品管理装置、物品管理システム、物品管理方法及びプログラム
JP6679891B2 (ja) 検品処理装置、検品システム、検品処理方法及びプログラム
US9449378B2 (en) System and method for processing stereoscopic vehicle information
WO2016158438A1 (ja) 検品処理装置及び方法、及びプログラム
KR101758054B1 (ko) 포스 시스템을 이용한 온라인/오프라인 통합 재고관리 시스템
US20190073839A1 (en) Package management system and method thereof
de Araujo et al. Computer vision system for workpiece referencing in three-axis machining centers
JP2019049951A (ja) 構造物管理装置、構造物管理方法、及び構造物管理プログラム
CN106155016A (zh) 一种项目型产品装配过程管控系统
JP5888358B2 (ja) 検品処理装置、検品システム、検品処理方法及びプログラム
JP6325834B2 (ja) 整備支援システムおよび整備支援方法
JP6052448B2 (ja) 検品処理装置、検品システム、検品処理方法及びプログラム
US11315286B2 (en) Locating a region of interest on an object
JP6861421B2 (ja) 画像処理システム
EP3901873A1 (en) Method and apparatus for label-less return shipments
JP7032179B2 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
JP6769555B2 (ja) 物品識別装置、物品識別方法、計算装置、システムおよびプログラム
CN108352081B (zh) 排序目标尺寸
JP6582875B2 (ja) 検品処理装置、検品システム、検品処理方法及びプログラム
Pathak et al. Alignment based inspection framework for additive manufactured parts
US20220260410A1 (en) Method of weighing using object recognition and device therefor