CN108137233B - 信息处理系统、信息处理装置、信息处理方法以及程序 - Google Patents

信息处理系统、信息处理装置、信息处理方法以及程序 Download PDF

Info

Publication number
CN108137233B
CN108137233B CN201780003346.9A CN201780003346A CN108137233B CN 108137233 B CN108137233 B CN 108137233B CN 201780003346 A CN201780003346 A CN 201780003346A CN 108137233 B CN108137233 B CN 108137233B
Authority
CN
China
Prior art keywords
article
unit
storage part
information processing
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780003346.9A
Other languages
English (en)
Other versions
CN108137233A (zh
Inventor
小宫山正知
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Railway System Integration Co Ltd
Original Assignee
Nippon Railway System Integration Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Railway System Integration Co Ltd filed Critical Nippon Railway System Integration Co Ltd
Publication of CN108137233A publication Critical patent/CN108137233A/zh
Application granted granted Critical
Publication of CN108137233B publication Critical patent/CN108137233B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G1/00—Storing articles, individually or in orderly arrangement, in warehouses or magazines
    • B65G1/02—Storage devices
    • B65G1/04—Storage devices mechanical
    • B65G1/137—Storage devices mechanical with arrangements or automatic control means for selecting which articles are to be removed
    • B65G1/1371—Storage devices mechanical with arrangements or automatic control means for selecting which articles are to be removed with data records
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B66F9/075—Constructional features or details
    • B66F9/0755—Position control; Position detectors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
    • B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
    • B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
    • B66F9/075—Constructional features or details
    • B66F9/20—Means for actuating or controlling masts, platforms, or forks
    • B66F9/24—Electrical devices or systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Structural Engineering (AREA)
  • Transportation (AREA)
  • Economics (AREA)
  • Mechanical Engineering (AREA)
  • Operations Research (AREA)
  • Geology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Civil Engineering (AREA)
  • Tourism & Hospitality (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Quality & Reliability (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Warehouses Or Storage Devices (AREA)

Abstract

本发明的信息处理系统包含可移动的移动体、设置在所述移动体的拍摄装置、以及信息处理装置，所述拍摄装置具有进行连续拍摄的拍摄单元以及发送由所述拍摄单元拍摄到的拍摄图像的发送单元，所述信息处理装置具有：接收所述拍摄图像的接收单元；从所述拍摄图像确定物品和能够存放所述物品的存放部的确定单元；基于所述确定单元确定的所述物品和所述存放部来选定所述存放部、所述存放部中存放的所述物品的组合的选定单元；以及将表示所述选定单元选定的所述组合中包含的所述存放部的信息和表示所述物品的信息相关联地存储在存储装置的存储单元。

Description

信息处理系统、信息处理装置、信息处理方法以及程序
技术领域
本发明涉及信息处理系统、信息处理装置、信息处理方法以及程序。
背景技术
作为与仓库内物品管理相关的技术，专利文献1公开了如下出入库管理系统。专利文献1的出入库管理系统具备叉车、仓库内数据库、控制装置、拍摄图像的第一以及第二拍摄装置。叉车搬运装载有货物的货盘。在仓库内数据库中记录用于管理货物入库位置的出入库信息。控制装置进行货物的出入库管理。第一拍摄装置设在叉车所经过的仓库出入口的上部。第二拍摄装置设在叉车或仓库内的各个位置。在运载装载有货物的货盘的叉车进入仓库内时，第一拍摄装置拍摄第一图像，该第一图像包含在货盘中装载的货物的品种以及叉车上显示的叉车ID。当叉车将装载有货物的货盘放置在仓库内的预定位置时，第二拍摄装置拍摄包含在位置上显示的位置ID以及叉车ID的第二图像。控制装置基于在第一图像以及第二图像中拍摄到的叉车ID，将第一图像中拍摄到的货物的品种以及第二图像中拍摄到的位置ID与仓库内数据库中记录的出入库信息进行对照。然后，判定与出入库信息一致的货物是否配置在与出入库信息一致的位置。
现有技术文献
专利文献
专利文献1：日本专利第4739580号公报
发明内容
发明要解决的课题
但是，即使使用专利文献1的出入库管理系统，也存在作业人员将物品搬入至错误场所，或者将不应搬出的物品搬出的情况。这种情况下，难以管理仓库内物品。专利文献1的技术中，反复操作并发出警报直至将物品放置在正确场所，但是没有考虑到作业人员无视警报将物品搬运至错误场所的情形。
本发明的目的在于即使在作业人员错误地进行了物品的搬入或搬出的情况下也能管理仓库内物品。
用于解决课题的手段
本发明的信息处理系统包含可移动的移动体、设置在所述移动体的拍摄装置、以及信息处理装置，所述拍摄装置具有进行连续拍摄的拍摄单元以及发送由所述拍摄单元拍摄到的拍摄图像的发送单元，所述信息处理装置具有：接收所述拍摄图像的接收单元；从所述接收单元接收到的所述拍摄图像确定物品和可存放所述物品的存放部的确定单元；基于由所述确定单元确定的所述物品和所述存放部来选定所述存放部与在所述存放部存放的所述物品的组合的选定单元；以及将表示所述选定单元选定的所述组合中包含的所述存放部的信息和表示所述物品的信息关联起来存储到存储装置的存储单元。
发明效果
根据本发明，即使在作业人员错误地进行了物品的搬入或搬出的情况下也能管理仓库内物品。
附图说明
图1表示物品管理系统的结构的一个例子。
图2是货架的主视图。
图3是表示标记的一个例子的图。
图4是表示信息处理装置的硬件结构的一例的图。
图5是表示信息处理装置的软件结构的一例的图。
图6是表示数据库更新处理的一个例子的流程图。
图7是表示拍摄图像的一个例子的图。
具体实施方式
以下，基于附图说明本发明的实施方式。
物品管理系统的整体结构
首先，参照图1说明第一实施方式的物品管理系统300的整体结构。物品管理系统300是管理在仓库301中存放的物品330的系统，具备货架310、搬运机320、拍摄装置340以及信息处理装置360。物品管理系统300是信息处理系统的一个例子。
货架310是存放部的一个例子，在仓库301内配置有多个货架310，货架310能存放物品330。此处，参照图2说明货架310。图2是货架310的主视图。货架310具备一对侧壁311和多个货架板312。一对侧壁311配置为在垂直方向上延伸。各货架板312是货架310的分隔部件，以主面水平的方式，端部与一对侧壁311接合。图2所示货架310从下方开始依次具备第一货架板312A至第五货架板312E的5个货架板312。最上方的第五货架板312E为货架310的顶板。从第一货架板312A至第四货架板312D的4个货架板312分别为货架310的第一层至第四层。货架板312与侧壁311围成的区域为货架310的各层中的物品330的存放空间313。即，货架310的内部由货架板312分隔，形成存放空间313。例如，第一货架板312A、第二货架板312B和一对侧壁311围成的区域为货架310的第一层的存放空间313A。同样，构成货架310的第二层至第四层的存放空间313B至313D。货架310不局限为4层，可以为1层至3层，或者为5层以上。
在货架310的前面粘贴标记350。此处，参照图3说明标记350。图3是标记350的图。标记350是光学读取方式，记录预先确定的信息。通过解析并读取对标记350进行拍摄而得到的图像数据，能获取标记350中包含的信息。标记350包含第一区域351和第二区域352。第一区域351是成为标记350的读取开始位置的区域。读取开始位置是成为从标记350读取信息时的基准的位置，由预先确定的记号、色彩进行定义。第二区域352存放标记350中记录的信息。对于标记350中记录的信息，按照从成为读取开始位置的第一区域351朝向第二区域352的方向(图3的箭头方向)上前进的顺序，一边解析一边读取。
如图2所示，货架310的标记350被粘贴在各货架板312的前面且左右方向的中央部。标记350在一个货架板312上粘贴一张。标记350例如使用QR码(注册商标)、色位(注册商标)，也可使用其他的标记。
在货架310各自的标记350中记录有货架ID以及存放空间ID。货架ID是表示货架310的信息，是每个货架310固有的标识符。存放空间ID是表示存放空间313的信息，是每个存放空间313固有的标识符。
在本实施方式中，使货架310的标记350记录有针对粘贴了各个标记350的货架板312上侧的存放空间313的存放空间ID。例如，第一标记350A记录了表示粘贴有第一标记350A的第一货架板312A的上侧的第一存放空间313A的信息的存放空间ID。在成为顶板的货架板312E上粘贴的第五标记350E中，作为存放空间ID记录了表示货架板312E为货架310的顶板的信息。第五标记350E中也记录有货架ID，因此还能根据第五标记350E确定货架板312。
货架310的各层中能存放物品330。图2的例子中，第一层的第一货架板312A中放置有物品330A。第二层的第二货架板312B中放置有第二物品330B。第三层的第三货架板312C以及第四层的第四货架板312D中没有放置物品330。
在货架310的前面一侧，在各物品330上粘贴有标记331。物品330的标记331是与参照图3说明的标记350相同的结构。物品330的标记331中记录有物品ID。物品ID是表示物品330的信息，是每个物品330固有的标识符。
返回图1继续说明物品管理系统300。
搬运机320是可移动的移动体的例子，能搬运物品330。物品管理系统300中使用了3台搬运机320。第一搬运机320A以及第二搬运机320B是叉车，向仓库301的货架310存放物品330，或者从货架310取出物品330。第三搬运机320C例如将叉车放置在第三搬运机320C上的物品330搬运到预先设定的场所。物品管理系统300中使用的搬运机320的台数不局限为3台。
拍摄装置340能拍摄图像，能将拍摄图像经由网络302发送到信息处理装置360。拍摄装置340设置在搬运机320上。因此，拍摄装置340与搬运机320一起在仓库301中移动。只要没有指示，拍摄装置340继续拍摄，持续将拍摄图像发送到信息处理装置360。而且，网络302为无线通信网络，但也可为有线。
第一搬运机320A中设有2台拍摄装置，即第一拍摄装置340A以及第二拍摄装置340B。将第一拍摄装置340A以拍摄方向成为第一搬运机320A的后方的方式，设置在第一搬运机320A的后部。将第二拍摄装置340B以拍摄方向成为第一搬运机320A的前方的方式，设置在成为第一搬运机320A的顶棚的头罩上。
与第一搬运机320A相同，第二搬运机320B中也在后部设有第三拍摄装置340C，在头罩设置第四拍摄装置340D。
第三搬运机320C中设置1台拍摄装置340E。
也可在搬运机320设置3台以上的拍摄装置340。另外，拍摄装置340的拍摄方向不局限为此处说明的方向，例如可以为搬运机320的右方或者左方等。另外，物品管理系统300也可包含未设置拍摄装置340的搬运机320。
信息处理装置360通过从拍摄装置340接收拍摄图像并进行解析，来更新物品330的存放场所的信息。信息处理装置360的处理的细节在下文叙述。
硬件结构
接着，参照图4说明信息处理装置360的硬件结构。图4是信息处理装置360的硬件结构图。信息处理装置360具备作为硬件的CPU361、显示装置362、存储装置363、通信接口364以及将它们连接的总线365。
CPU361控制整个信息处理装置360。通过由CPU361基于在存储装置363等中存储的程序来执行处理，实现图5所示信息处理装置360的功能以及下文叙述的图6的流程图的处理。
显示装置362是液晶监视器等，能显示图像。
存储装置363是RAM、ROM、HDD等存储装置，用于存储程序、CPU361基于程序执行处理时使用的数据等。另外，存储装置363存储存放信息表以及管理信息表。存储装置363是存储程序的存储介质的一个例子。
存放信息表将货架ID、存放空间ID、物品ID关联起来进行存储。在存放信息表中，将货架ID、货架ID所表示的货架310中的存放空间ID、该存放空间ID所表示的存放空间313中存放的物品330所对应的物品ID关联起来。存放信息表表示当前仓库301的状态。存放信息表通过图6所示的数据库更新处理持续更新。
管理信息表将货架ID、存放空间ID、物品ID关联起来进行存储。在管理信息表中，将货架ID、货架ID所表示的货架310中的存放空间ID、该存放空间ID所表示的存放空间313中应存放的物品330所对应的物品ID关联起来。因此，管理信息表表示仓库301的目标状态，即仓库301的应有的状态。管理信息表例如通过物品管理系统300的管理者来更新。
通信接口364负责信息处理装置360与拍摄装置340等外部装置之间的通信的控制。
接着，说明拍摄装置340的硬件结构。拍摄装置340具备作为硬件的CPU、存储装置、图像传感器、通信接口以及将它们连接的总线。
拍摄装置340的CPU控制整个拍摄装置340。拍摄装置340的CPU基于在拍摄装置340的存储装置等中存储的程序来执行处理，从而实现拍摄装置340的功能。
拍摄装置340的存储装置是RAM、ROM、HDD等存储装置，存储程序、拍摄装置340的CPU基于程序执行处理时使用的数据等。
拍摄装置340的图像传感器在拍摄装置340进行拍摄时使用，根据通过了镜头的光来生成数字图像。
拍摄装置340的通信接口负责拍摄装置340与信息处理装置360等外部装置之间的通信的管理。
软件结构
接着，参照图5说明信息处理装置360的软件结构。图5是信息处理装置360的软件结构图。信息处理装置360具备作为软件的接收部370、确定部371、提取部372、选定部373、存储部374以及通知部375。
接收部370经由通信接口364接收通过拍摄装置340的发送部发送的拍摄图像。有时从多个拍摄装置340发送拍摄图像，接收部370接收全部的拍摄图像。
确定部371从接收部370接收到的拍摄图像确定货架310、存放空间313、物品330。
提取部372基于由确定部371确定的货架310、存放空间313以及物品330，针对每张拍摄图像提取货架310、货架310的存放空间313、存放空间313中存放的物品330的组合。在信息处理装置360中，通过组合信息表示货架310、存放空间313、物品330的组合。组合信息是包含货架ID、存放空间ID以及物品ID的信息。
选定部373基于由确定部371确定的货架310、存放空间313、物品330，选定货架310、货架310的存放空间313、存放空间313中存放的物品330的组合。更具体地，选定由提取部372从预先设定的数量的拍摄图像中的设定的比例以上的拍摄图像提取出的同一组合。
存储部374将选定部373选定的组合中包含的货架310的货架ID、存放空间313的存放部ID、以及物品330的物品ID相关起来存储到存储装置363的存放信息表。
当存放信息表存储的信息与管理信息表存储的信息存在差异时，通知部375向物品管理系统300的管理者等通知关于该差异的信息。
接着，说明拍摄装置340的软件结构。拍摄装置340具备作为软件的拍摄部和发送部。
拍摄装置340的拍摄部以设定的帧率，使用拍摄装置340的图像传感器等进行连续拍摄，持续生成拍摄图像。
拍摄装置340的发送部347经由拍摄装置340的通信接口向信息处理装置360发送拍摄装置340的拍摄部生成的拍摄图像。在拍摄装置340的拍摄部346正进行连续拍摄的期间，拍摄装置340的发送部347持续发送拍摄图像。
数据库更新处理
接着，参照图6说明信息处理装置360进行的数据库更新处理。图6是表示数据库更新处理的一个例子的流程图。
S300中，接收部370从拍摄装置340接收多个拍摄图像。本实施方式中，接收部370在设定的期间内，从拍摄装置340接收拍摄图像。如上所述，物品管理系统300具有多个拍摄装置340，因此接收部370在设定的期间内从多个拍摄装置340接收拍摄图像。
S301中，确定部371从在S300中接收到的拍摄图像，针对每个拍摄图像确定货架310、存放空间313、物品330。确定部371从拍摄图像中所拍摄到的物品330的标记331读取物品330的物品ID，从而从拍摄图像确定物品330。另外，确定部371通过从拍摄图像中所拍摄到的货架310的标记350读取货架ID以及存放空间ID，确定货架310以及存放空间313。在本发明中，利用在拍摄到的图像内同时拍摄到物品330的标记331和货架310的标记350这一情况，来判定存放空间313与物品330的关系，详细内容将在以下说明。
此处，参照图7，说明确定部371进行的货架310、存放空间313以及物品330确定的例子。图7表示拍摄图像400的一个例子。
在拍摄图像400中，物品330的标记331被拍到3个。确定部371通过读取这些标记331来确定物品330。
另外，拍摄图像400中，货架310的标记350被拍到10个。确定部371通过读取这些标记350来确定货架310以及存放空间313。例如，确定部371通过从第一货架310A的第一标记350A读取货架ID以及存放空间ID，来确定与货架ID对应的第一货架310A，并确定与存放空间ID对应的第一存放空间313A。确定部371同样地基于第一货架310A的第二标记350B至第四标记350D来确定第一货架310A以及第二存放空间313B至第四存放空间313D。另外，确定部371基于第二货架310B的第一标记350A至第四标记350D，来确定第二货架310B以及第二货架310B的第一存放空间313A至第四存放空间313D。
S302中，提取部372基于S301中的确定，针对每张拍摄图像提取货架310、货架310的存放空间313、存放空间313中存放的物品330的组合。此时，提取部372根据下述两个判定，提取货架310、货架310的存放空间313、以及存放空间313中存放的物品330的组合。
第一判定是基于在拍摄图像中拍摄到的货架310的标记350的位置以及物品330的标记331的位置进行的判定。第一判定如下进行。
首先，提取部372选择任意一个表示存放空间313的标记350。将该标记350称作基准标记。图7的例子中，提取部372例如选择表示第二存放空间313B的第二标记350B来作为基准标记。
接着，提取部372选择隔着基准标记所表示的存放空间313与基准标记相对的标记350。将该标记称作端部标记。在图7的例子中，以第二标记350B为基准标记时，提取部372选择第三标记350C作为端部标记。在没有端部标记时，提取部372结束针对最近选择的基准标记的第一判定，不进行第二判定。
接着，在从物品330的标记331的位置引出了与连接了基准标记的位置和端部标记的位置的线段、即基准线段垂直的虚拟线时，提取部372判定该虚拟线是否与基准线段相交。相交时，提取部372判定为成为该虚拟线的起点的标记331所表示的物品330为基准标记所表示的存放空间313中存放的物品330的候补。
在图7的例子中，将作为基准标记的第二标记350B的位置与作为端部标记的第三标记350C的位置进行连接的线段401为基准线段。
在从第一物品330A的标记331A引出了与线段401垂直的虚拟线时，该虚拟线与线段401不相交。同样地，在从第三物品330C的标记331C引出了与线段401垂直的虚拟线时，该虚拟线与线段401不相加。因此，第一物品330A以及第三物品330C未成为第二存放空间313B中存放的物品330的候补。
另一方面，在从第二物品330B的标记331B引出了与线段401垂直的虚拟线402时，虚拟线402与线段401相交。因此，第二物品330B成为在第二存放空间313B中存放的物品330的候补。
提取部372以货架310的所有的标记350为基准标记，进行此处说明的第一判定。
第二判定是基于在拍摄图像中拍摄到的货架310的标记350的大小、以及在拍摄图像中拍摄到的物品330的标记331与货架310的标记350之间的距离进行的判定。第二判定如下进行。
首先，提取部372例如以像素数取得拍摄图像中的基准标记的宽度的大小。宽度例如为与基准线段垂直的方向。在图7的例子中，以像素数取得作为基准标记的第二标记350B的宽度403。
接着，提取部372例如以像素数取得拍摄图像中的从第一判定中成为候补的物品330的位置到基准标记的位置的距离、即判定距离。使物品330的位置为物品330的标记331的位置。标记331、350的位置例如通过图3所示的第一区域351的位置表示。在此，使判定距离为宽度方向的距离，即与基准线段垂直的方向的距离。在图7的例子中，取得从第二物品330B的标记331B至作为基准标记的第二标记350B的宽度方向的判定距离404。
接着，在基准标记的宽度的大小为判定距离的设定比例以上时，提取部372判定在第一判定中成为候补的物品330存放在基准标记所表示的货架310的存放空间313中。在图7的例子中，在宽度403为判定距离404的设定比例以上时，提取部372判定第二物品330B存放在第二存放空间313B中。
提取部372在通过第一判定以及第二判定未判定出具有与基准标记对应的存放空间313中存放的物品330时，可以视为与基准标记对应的存放空间313中没有物品330。此时，提取部372使货架310、货架310的存放空间313、存放空间313中存放的物品330的组合具有表示不存在物品330的信息。
S303中，选定部373选定在最近的S302中从最近的S300中接收到的多个拍摄图像中的设定数量以上的拍摄图像中提取出的同一组合。在此选定的组合是货架310、货架310的存放空间313、存放空间313中存放的物品330的组合中的、由提取部372以一定频度提取的组合，可以说可靠性高。
例如，如下所述，选定部373选定货架310、存放空间313、物品330的组合。
选定部373选定通过提取部372从最近的S300中接收到的多个拍摄图像中的设定比例以上的拍摄图像提取出的同一组合。
另外，选定部373针对在S302中提取出的货架310、存放空间313、物品330的各个组合，可以进行以下处理来进行选定。
首先，选定部373选择摄像图像，该摄像图像拍摄到处理对象的组合中包含的货架310、存放空间313以及物品330中的至少一个。该摄像图像是在最近的S300中由接收部370接收到的拍摄图像。
接着，在提取部372从选择出的摄像图像中的设定比例以上的拍摄图像中提取了与处理对象的组合相同的组合时，选定部373将该处理对象的组合选定为在最近的S302从最近的S300中接收到的多个拍摄图像中的设定数量以上的拍摄图像中提取出的同一组合。
S304中，存储部374基于在最近的S303中选定的物品330、存放空间313以及物品330的组合，更新存放信息表。即，存储部374将最近的S303中选定的组合中包含的货架310的货架ID、存放空间313的存放空间ID、物品330的物品ID关联起来存储在存放信息表中。
当未将最近的S303中选定的组合中包含的货架310的货架ID、存放空间313的存放空间ID、物品330的物品ID关联起来存储在存放信息表中时，存储部374可将该货架ID、存放空间ID以及物品ID关联起来存储在存放信息表中。
在S305中，通知部375检测存放信息表中存储的信息与管理信息表中存储的信息的差异。此时，通知部375可以仅比较在最近的S304中更新后的货架ID、存放空间ID以及存放部ID。在通知部375检测到差异时使处理进入S306，在未检测到差异时使处理返回S300。
S306中，通知部375将最近的S305中检测到的关于差异的信息通知给物品管理系统300的管理者等。在最近的S305中检测到的关于差异的信息例如是检测到差异的货架ID、存放空间ID以及物品ID。通知部375使显示装置362显示在最近的S305中检测到的关于差异的信息，向管理者等进行通知。在通知部375向管理者等进行通知后使处理返回至S300。
如此，通过反复进行在S305或者S306的处理后返回至S300的处理，基于拍摄装置340连续拍摄到的拍摄图像反复进行处理，不断通过最新的信息更新存放信息表。
效果
如以上说明的那样，设置在搬运机320的拍摄装置340进行连续拍摄并将拍摄图像发送到信息处理装置360。确定部371根据从拍摄装置340接收到的拍摄图像来确定货架310和物品330。选定部373基于由确定部371确定的货架310与物品330，选定货架310与货架310中存放的物品330的组合。存储部374将选定部373选定的组合的货架310的货架ID与物品330的物品ID存储在存放信息表中。
因此，存放信息表基于最新的信息存储仓库301的接近实时的信息。因此，即使在作业人员错误地进行了物品330的搬入或者搬出的情况下，也能管理仓库内的物品330。并且，即使是事先未决定物品放置场所的所谓自由位置方式的仓库管理方法，通过使用拍摄装置340捕捉适当放置在空闲空间的物品330，自动地将货架ID与物品ID相关联地存放在存放信息表中。因此，不再需要将货架ID和物品ID单独通过扫描器逐一读取。
另外，有时使用未设置拍摄装置340的叉车等搬运机来进行物品330的搬入或者搬出。即使是该情况，通过设在其他搬运机320的拍摄装置340来拍摄货架310，能在存放信息表中反映未设置拍摄装置340的搬运机进行的搬入或者搬出的结果。因此，即使使用未设置拍摄装置340的叉车等搬运机进行物品330的搬入或者搬出，也能管理仓库内的物品330。
另外，确定部371根据从拍摄装置340接收到的拍摄图像来确定货架310和物品330。因此，能更加高速地进行由信息处理装置360确定货架310、物品330的处理。
另外，如图1所示，第一搬运机320A以及第二搬运机320B为叉车。另外，第一拍摄装置340A以及第三拍摄装置340C分别以拍摄方向成为第一搬运机320A以及第二搬运机320B的后方的方式，设置在第一搬运机320A以及第二搬运机320B的后部。因此，能够降低第一拍摄装置340A以及第二拍摄装置340B拍摄出由于叉车的柱或叉子而未拍到货架310、物品330等的图像的风险。
另外，选定部373基于确定部371的确定，选择货架310、货架310的存放空间313、存放空间313中存放的物品330的组合。存储部374将选定部373选定的组合的货架310的货架ID、存放空间313的存放空间ID、物品330的物品ID相关联地存储在存放信息表中。因此，在物品管理系统300中，能管理物品330被存放在哪个货架310的哪个存放空间313中。
另外，选定部373选定由提取部372从多个拍摄图像中的设定比例以上的拍摄图像中提取出的同一组合。该组合是包含货架310、货架310中存放的物品330的组合。
因此，即使在存在货架310的标记350、物品330的标记331由于被遮挡等而未被拍到的拍摄图像的情况下，在一定程度以上的拍摄图像中拍到货架310的标记350等时，信息处理装置360能选定货架310、货架310中存放的物品330。因此，存放信息表中存储的信息的精度提高。
另外，在存放信息表存储的信息与管理信息表存储的信息存在差异时，通知部375向物品管理系统300的管理者等通知该主旨。因此，物品管理系统300的管理者等能够认识到仓库301中存在未正确存放的物品330等。
其他实施方式
在上述实施方式中，在图6的S300中，接收部370在所设定的期间从拍摄装置340接收拍摄图像，并基于该接收到的拍摄图像，进行之后的S301至S304的处理来更新存放信息表。
但是，在图6的S300中，接收部370可以接收在所设定的期间由拍摄装置340的拍摄部拍摄到的拍摄图像，并基于该接收到的拍摄图像，进行之后的S301至S304的处理。此时，接收部370可以在设定期间从拍摄装置340接收拍摄图像，从接收到的拍摄图像中选择在所设定的期间由拍摄装置340的拍摄部拍摄到的拍摄图像。基于该选择的拍摄图像，进行后续的S301至S304的处理来更新存放信息表。
另外，存放信息表可以不将货架ID、存放空间ID、物品ID相关联地存储，而是不存储存放空间ID，将货架ID与物品ID相关联地存储。由此，能节约存储装置363的存储容量。
此时，确定部371可仅确定货架310以及物品ID。提取部372基于确定部371的确定，针对每张拍摄图像提取货架310与货架310中存放的物品330的组合。选定部373基于由确定部371确定的货架310与物品330，选定货架310与货架310中存放的物品330的组合。提取部372能够从货架310的最下方的标记350以及最上方的标记350开始，通过与图6的S302同样的处理，针对每张拍摄图像提取货架310与货架310中存放的物品330的组合。货架310的最下方的标记350是表示第一存放空间313A的标记350，货架310的最上方的标记350是表示成为顶板的货架板312的标记350。由此，能降低信息处理装置360的处理负荷。
另外，拍摄装置340可以具有位置信息取得部。位置信息取得部取得拍摄装置340的位置信息。位置信息取得部例如是GPS(global positioning system全球定位系统)模块，接收来自GPS卫星的信号，取得拍摄装置340的位置信息。拍摄装置340的发送部在将拍摄图像向信息处理装置360发送时一并发送位置信息取得部所取得的位置信息。
信息处理装置360的存储部374在更新存放信息表时，将对记录有货架ID的标记350进行拍摄时的拍摄装置340的位置信息与货架ID等一起存储在存放信息表中。
由此，即使在仓库301内移动了货架310的情况下，通过参照存放信息表也能掌握货架310的大致位置。
以上详细叙述了本发明的优选实施方式，但是本发明不局限于该特定的实施方式，在权利要求书中记载的本发明主旨的范围内，能进行各种变形、变更。例如，上述的实施方式能任意组合来实施。
而且，拍摄装置340以及信息处理装置360分别是计算机的一个例子。

Claims (14)

1.一种信息处理系统，其包含设置在移动体的拍摄装置、以及信息处理装置，其特征在于，
所述拍摄装置具有：
拍摄单元，其进行连续拍摄；以及
发送单元，其发送由所述拍摄单元拍摄到的拍摄图像，
所述信息处理装置具有：
接收单元，其接收所述拍摄图像；
确定单元，其针对通过所述接收单元接收到的每个所述拍摄图像，基于在所述拍摄图像内同时拍摄到的存放部的标记和物品的标记，确定所述物品和能够存放所述物品的所述存放部；
选定单元，其基于由所述确定单元确定的所述物品和所述存放部，选定所述存放部和在所述存放部存放的所述物品的组合；以及
存储单元，其将表示由所述选定单元选定的所述组合中包含的所述存放部的信息和表示所述物品的信息相关联地存储在存储装置。
2.根据权利要求1所述的信息处理系统，其特征在于，
在没有将表示由所述选定单元选定的所述组合中包含的所述存放部的信息和表示所述物品的信息相关联地存储在所述存储装置时，所述存储单元将表示所述组合中包含的所述存放部的信息和表示所述物品的信息相关联地存储在所述存储装置。
3.根据权利要求1或2所述的信息处理系统，其特征在于，
所述移动体为叉车，
将所述拍摄装置以所述拍摄单元的拍摄方向为所述叉车的后方的方式设置在所述叉车的后部。
4.根据权利要求1所述的信息处理系统，其特征在于，
所述存放部是货架，
所述确定单元从通过所述接收单元接收到的所述拍摄图像确定所述货架、将所述货架的内部由分隔部件分隔而形成的存放空间、以及所述物品，
所述选定单元基于由所述确定单元确定的所述货架、所述存放空间、以及所述物品，选定所述货架、所述货架的所述存放空间、以及在所述存放空间中存放的所述物品的组合，
所述存储单元将表示由所述选定单元选定的所述组合中包含的所述货架的信息和表示所述存放空间的信息以及表示所述物品的信息相关联地存储在所述存储装置。
5.根据权利要求1所述的信息处理系统，其特征在于，
所述信息处理装置还具有提取单元，该提取单元基于由所述确定单元确定的所述物品和所述存放部，针对每个所述拍摄图像，提取所述存放部和在所述存放部中存放的所述物品的组合，
所述选定单元选定由所述提取单元从设定的多个所述拍摄图像中的设定的比例以上的所述拍摄图像提取出的同一所述组合。
6.根据权利要求5所述的信息处理系统，其特征在于，
所述设定的多个所述拍摄图像是在设定的期间所述接收单元接收到的多个所述拍摄图像、或者在所述设定的期间所述拍摄单元拍摄到的多个所述拍摄图像。
7.根据权利要求5或6所述的信息处理系统，其特征在于，
所述提取单元至少基于所述拍摄图像中拍摄到的所述存放部的标记的大小、以及所述拍摄图像中拍摄到的所述物品的标记与所述存放部的标记之间的距离，提取所述存放部与所述存放部中存放的所述物品的所述组合。
8.根据权利要求5或6所述的信息处理系统，其特征在于，
所述提取单元至少基于所述拍摄图像中拍摄到的所述存放部的标记的位置、以及所述拍摄图像中拍摄到的所述物品的标记的位置，提取所述存放部与所述存放部中存放的所述物品的所述组合。
9.根据权利要求1所述的信息处理系统，其特征在于，
还具备通知单元，该通知单元在所述存储单元存储的信息与将所述存放部以及所述存放部中应存放的所述物品关联起来的信息之间存在差异时，通知与所述差异有关的信息。
10.根据权利要求9所述的信息处理系统，其特征在于，
还具备显示装置，
所述通知单元使所述显示装置显示与所述差异有关的信息。
11.一种信息处理装置，其特征在于，具有：
接收单元，其接收拍摄图像；
确定单元，其针对通过所述接收单元接收到的每个所述拍摄图像，基于在所述拍摄图像内同时拍摄到的存放部的标记和物品的标记，确定所述物品和能够存放所述物品的所述存放部；
选定单元，其基于由所述确定单元确定的所述物品和所述存放部，选定所述存放部与所述存放部中存放的所述物品的组合；以及
存储单元，其将表示通过所述选定单元选定的所述组合中包含的所述存放部的信息与表示所述存放部中存放的所述物品的信息相关联地存储在存储装置。
12.根据权利要求11所述的信息处理装置，其特征在于，还具备提取单元，该提取单元基于由所述确定单元确定的所述物品和所述存放部，针对每个所述拍摄图像，提取所述存放部和所述存放部中存放的所述物品的组合，
所述选定单元选定由所述提取单元从设定的数量的所述拍摄图像中的设定的比例以上的所述拍摄图像中提取出的同一所述组合。
13.一种由信息处理系统执行的信息处理方法，该信息处理系统包含设置在移动体的拍摄装置、以及信息处理装置，其特征在于，具有：
拍摄步骤，所述拍摄装置进行连续拍摄；
发送步骤，所述拍摄装置发送通过所述拍摄步骤拍摄到的拍摄图像；
接收步骤，所述信息处理装置接收所述拍摄图像；
确定步骤，所述信息处理装置针对通过所述接收步骤接收到的每个所述拍摄图像，基于在所述拍摄图像内同时拍摄到的存放部的标记和物品的标记，确定所述物品和能够存放所述物品的所述存放部；
选定步骤，所述信息处理装置基于通过所述确定步骤确定的所述物品和所述存放部，选定所述存放部和在所述存放部存放的所述物品的组合；以及
存储步骤，所述信息处理装置将表示通过所述选定步骤选定的所述组合中包含的所述存放部的信息和表示所述物品的信息相关联地存储在存储装置。
14.一种计算机可读取的记录介质，其特征在于，该记录介质存储有用于使计算机作为权利要求11或12所述的信息处理装置的各单元发挥功能的程序。
CN201780003346.9A 2016-06-28 2017-06-23 信息处理系统、信息处理装置、信息处理方法以及程序 Active CN108137233B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-127234 2016-06-28
JP2016127234A JP6262809B2 (ja) 2016-06-28 2016-06-28 システム、情報処理装置、情報処理方法、及び、プログラム
PCT/JP2017/023265 WO2018003712A1 (ja) 2016-06-28 2017-06-23 情報処理システム、情報処理装置、情報処理方法、及び、プログラム

Publications (2)

Publication Number Publication Date
CN108137233A CN108137233A (zh) 2018-06-08
CN108137233B true CN108137233B (zh) 2019-09-27

Family

ID=60786383

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780003346.9A Active CN108137233B (zh) 2016-06-28 2017-06-23 信息处理系统、信息处理装置、信息处理方法以及程序

Country Status (6)

Country Link
US (1) US10699357B2 (zh)
JP (1) JP6262809B2 (zh)
CN (1) CN108137233B (zh)
CA (1) CA3000129C (zh)
MX (1) MX2018006310A (zh)
WO (1) WO2018003712A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020030478A (ja) * 2018-08-20 2020-02-27 富士ゼロックス株式会社 荷物配達システム、端末装置及びプログラム
JP7113247B2 (ja) * 2018-09-12 2022-08-05 パナソニックＩｐマネジメント株式会社 入出庫管理装置、入出庫管理方法、及び、入出庫管理プログラム
JP7022671B2 (ja) * 2018-09-12 2022-02-18 日鉄ソリューションズ株式会社 情報処理システム、クライアント装置、情報処理方法、プログラム、及び、記憶媒体
CN109448047A (zh) * 2018-09-18 2019-03-08 北京无线体育俱乐部有限公司 货架分布图生成方法、信息获取方法、装置及系统
CN109132313A (zh) * 2018-10-26 2019-01-04 北京旷视科技有限公司 物品移动系统、取货机器人、搬运机器人及方法
CN111753934A (zh) * 2019-03-29 2020-10-09 青岛九石智能科技股份有限公司 一种存储柜的控制方法、控制装置及存储柜
JP7309171B2 (ja) * 2019-04-09 2023-07-18 ビーコア株式会社 光学式認識コード読取装置、方法及びプログラム
JP7330746B2 (ja) * 2019-04-26 2023-08-22 川崎重工業株式会社 配達サービス用収容体
CN110182513A (zh) * 2019-05-13 2019-08-30 盐城品迅智能科技服务有限公司 一种用于智能仓储装备的分类仓储架及分类仓储方法
JP7303676B2 (ja) * 2019-07-01 2023-07-05 株式会社東芝 機器検出装置
CN111674800B (zh) * 2020-06-03 2021-07-09 灵动科技（北京）有限公司 用于自动驾驶系统的智能仓储技术

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6322500A (ja) * 1986-04-18 1988-01-29 日本輸送機株式会社 在庫管理機付フオ−クリフト
CN1538338A (zh) * 2003-02-25 2004-10-20 ������������ʽ���� 物品管理装置及其方法
CN1684087A (zh) * 2004-04-16 2005-10-19 日本电气株式会社 Id发行管理系统、物品信息管理系统及id发行管理方法
JP2015124023A (ja) * 2013-12-25 2015-07-06 トーヨーカネツソリューションズ株式会社 Ａｒ／ｖｒを利用した物品収納補助装置及びシステム
CN105008251A (zh) * 2013-03-13 2015-10-28 日本电气株式会社 核对系统、终端装置、服务器装置、核对方法及程序

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4739580B2 (ja) 2001-06-28 2011-08-03 株式会社日清製粉グループ本社 入出庫管理システム
JP2004196439A (ja) * 2002-12-16 2004-07-15 Fuji Photo Film Co Ltd 在庫管理システム
US7576639B2 (en) * 2006-03-14 2009-08-18 Mobileye Technologies, Ltd. Systems and methods for detecting pedestrians in the vicinity of a powered industrial vehicle
JP2011084384A (ja) * 2009-10-19 2011-04-28 Nec Corp 物品管理システム及び方法
US9067744B2 (en) 2011-10-17 2015-06-30 Kabushiki Kaisha Yaskawa Denki Robot system, robot, and sorted article manufacturing method
US9785911B2 (en) 2013-07-25 2017-10-10 I AM Robotics, LLC System and method for piece-picking or put-away with a mobile manipulation robot
JP6386311B2 (ja) * 2014-09-08 2018-09-05 ワム・システム・デザイン株式会社 携帯情報端末、情報処理方法、及びプログラム
JP6562716B2 (ja) * 2015-05-27 2019-08-21 ワム・システム・デザイン株式会社 情報処理装置、情報処理方法、プログラム、及びフォークリフト
US10304031B2 (en) * 2015-06-23 2019-05-28 Toshiba Tec Kabushiki Kaisha Image processing apparatus
JP6722438B2 (ja) * 2015-11-24 2020-07-15 ワム・システム・デザイン株式会社 情報処理装置、情報処理方法、及びプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6322500A (ja) * 1986-04-18 1988-01-29 日本輸送機株式会社 在庫管理機付フオ−クリフト
CN1538338A (zh) * 2003-02-25 2004-10-20 ������������ʽ���� 物品管理装置及其方法
CN1684087A (zh) * 2004-04-16 2005-10-19 日本电气株式会社 Id发行管理系统、物品信息管理系统及id发行管理方法
CN105008251A (zh) * 2013-03-13 2015-10-28 日本电气株式会社 核对系统、终端装置、服务器装置、核对方法及程序
JP2015124023A (ja) * 2013-12-25 2015-07-06 トーヨーカネツソリューションズ株式会社 Ａｒ／ｖｒを利用した物品収納補助装置及びシステム

Also Published As

Publication number Publication date
CA3000129A1 (en) 2018-01-04
US20190108605A1 (en) 2019-04-11
WO2018003712A1 (ja) 2018-01-04
US10699357B2 (en) 2020-06-30
MX2018006310A (es) 2018-08-29
JP6262809B2 (ja) 2018-01-17
CN108137233A (zh) 2018-06-08
CA3000129C (en) 2019-12-17
JP2018002331A (ja) 2018-01-11

Similar Documents

Publication Publication Date Title
CN108137233B (zh) 信息处理系统、信息处理装置、信息处理方法以及程序
US11030442B1 (en) Associating events with actors based on digital imagery
JP6789002B2 (ja) 画像処理装置
CN110310330A (zh) 位置关系检测装置
US11284041B1 (en) Associating items with actors based on digital imagery
JP2020102072A (ja) 位置関係検出装置及び位置関係検出システム
JP5902893B2 (ja) 収納システム
US20210216955A1 (en) Augmented reality based package finding assistance system
JP2021000687A (ja) ロボットシステム、その制御方法とプログラム
CN109816298B (zh) 物流管理方法及系统
JP6728995B2 (ja) 自動倉庫システムおよび自動倉庫の管理方法
JP2019163172A (ja) システム、情報処理装置、情報処理方法、プログラム及び記録媒体
JP6686705B2 (ja) 管理システム、管理方法および情報処理装置
US11586668B2 (en) Method for the physical, in particular optical, detection of at least one usage object
TWI675337B (zh) 無人化貨品管理系統與無人化貨品管理方法
JP6690411B2 (ja) 管理システム、管理方法および搬送システム
JP7022671B2 (ja) 情報処理システム、クライアント装置、情報処理方法、プログラム、及び、記憶媒体
KR100971710B1 (ko) 영상 데이터 관리 시스템 및 방법
JP6550736B2 (ja) 撮影対象管理プログラム及び情報処理装置
JP2021017324A (ja) ロボットシステム、情報処理装置、その制御方法とプログラム
JP2020142891A (ja) 配送支援システム、配送支援方法及び携帯情報端末
JP2004277095A (ja) 物品管理装置
US11138713B2 (en) Camera abnormality detecting device and program
JP2018106345A (ja) 情報処理装置、システム、情報処理方法、及び、プログラム
CN113408491A (zh) 物品获得结果的统计方法、装置、系统及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Tokyo, Japan, Japan

Applicant after: Nippon Railway System Integration Co., Ltd.

Address before: Tokyo, Japan, Japan

Applicant before: Nippon Steel & Sumitomo Metal System Integration Co., Ltd.

GR01 Patent grant
GR01 Patent grant