JP2019083522A - Information processing apparatus, control method thereof, and program - Google Patents
Information processing apparatus, control method thereof, and program Download PDFInfo
- Publication number
- JP2019083522A JP2019083522A JP2018204645A JP2018204645A JP2019083522A JP 2019083522 A JP2019083522 A JP 2019083522A JP 2018204645 A JP2018204645 A JP 2018204645A JP 2018204645 A JP2018204645 A JP 2018204645A JP 2019083522 A JP2019083522 A JP 2019083522A
- Authority
- JP
- Japan
- Prior art keywords
- package
- image data
- destination
- imaging
- code
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
Abstract
Description
本発明は、情報処理装置、情報処理装置の制御方法、およびプログラムに関し、特に、荷物の移動作業における、業務効率を向上させることが可能な仕組みに関する。 The present invention relates to an information processing apparatus, a control method of the information processing apparatus, and a program, and more particularly, to a mechanism capable of improving the work efficiency in a luggage transfer operation.
工場のある場所に集荷された荷物を出荷するために、フォークリフトで各出荷先に荷物を配送する配送車のところまで運ぶという業務がある。 In order to ship the picked up cargo to the place where the factory is located, there is a task of transporting it to the delivery car which delivers the goods to each shipping destination with a forklift.
各配送車の配送先に積むべき荷物を確認するために、フォークリフトから降りて、荷物に貼られたラベルを目視して荷物の配送先を確認いるが、毎回フォークリフトから降りる必要があるため効率性が悪く、また、乗降時に転倒したり、荷物のところまで行く途中で、他のフォークリフトにぶつかったりする可能性があり安全性に欠けるという課題があった。そのため、フォークリフトから降りずに出荷先を確認する方法が求められている。 In order to confirm the package that should be loaded on the delivery destination of each delivery vehicle, we get off the forklift and visually check the label attached to the package to confirm the delivery destination of the package, but it is necessary to get off from the forklift every time In addition, there is a problem that it may fall over at the time of getting on and off or may collide with other forklifts on the way to the place of the luggage, and there is a lack of safety. Therefore, there is a need for a method of confirming the shipping destination without getting off the forklift.
ところで、荷物にはラベルが張り付けられていて、このラベルに含まれるＱＲコード（ＱＲコードは登録商標）内に配送先データが格納されている場合がある。そのため、ネットワークカメラでＱＲコードを読み取り、出荷先を特定できれば、運転手は毎回フォークリフトを降りて出荷先を目視する手間を省くことができる。 By the way, a label may be attached to the package, and delivery destination data may be stored in the QR code (QR code is a registered trademark) included in the label. Therefore, if it is possible to read the QR code with the network camera and specify the shipping destination, the driver can save time and effort every time taking down the forklift and visually checking the shipping destination.
上記特許文献１には、カメラ画像の中にある複数のＱＲコードを読み取るために、読み取ったＱＲコードの周辺画像を解析して次のＱＲコードを探す手段が記載されているが、特許文献１に記載の技術を用いた場合、荷物ごとにＱＲコードを探すことになるため、荷物の数が多い場合に、出荷先の特定に時間がかかり、ユーザにとって利便性の悪いものになる恐れがあった。
Although the said
また、上記特許文献１は、あくまで読み取ったＱＲコードの情報を表示することが開示されているにすぎず、特許文献１に記載の技術を用いたとしても、ＱＲコードから読み取った配送先がディスプレイ上に表示されるだけで、表示されている配送先に対応する荷物がどれなのかは依然として運転手は分からない恐れがあった。
Further,
本発明の目的は、荷物の移動作業における、業務効率を向上させることが可能な仕組みを提供することである。 An object of the present invention is to provide a mechanism capable of improving the work efficiency in a luggage transfer operation.
本発明は、移動対象の荷物を撮像する撮像装置と通信可能な情報処理装置であって、前記撮像装置から、画像データを取得する取得手段と、前記取得手段で取得した画像データを用いて当該画像データに映る荷物の移動先を特定する特定手段と、前記特定手段で特定した荷物の移動先を識別可能な画面を生成する生成手段とを備えることを特徴とする。 The present invention is an information processing apparatus capable of communicating with an imaging device for imaging a package to be moved, and using an acquisition unit for acquiring image data from the imaging device and the image data acquired by the acquisition unit. It is characterized by comprising: specification means for specifying the movement destination of the package shown in the image data; and generation means for generating a screen capable of identifying the movement destination of the package specified by the specification unit.
また、本発明は、移動対象の荷物を撮像する撮像装置と通信可能な情報処理装置の制御方法であって、前記撮像装置から、画像データを取得する取得工程と、前記取得工程で取得した画像データを用いて当該画像データに映る荷物の移動先を特定する特定工程と、前記特定工程で特定した荷物の移動先を識別可能な画面を生成する生成工程とを備えることを特徴とする。 Further, the present invention is a control method of an information processing apparatus capable of communicating with an imaging device for imaging a package to be moved, and an acquisition step of acquiring image data from the imaging device, and an image acquired in the acquisition step It is characterized by comprising: a specifying step of specifying a moving destination of a package shown in the image data using the data; and a generating step of generating a screen capable of identifying the moving destination of the package specified in the specifying step.
また、本発明は、移動対象の荷物を撮像する撮像手段と、前記撮像手段で前記荷物を撮像することで得られる画像データを用いて当該画像データに映る荷物の移動先を特定する特定手段と、前記特定手段で特定した荷物の移動先を識別可能な画面を生成する生成手段とを備えることを特徴とする。 Further, according to the present invention, an image pickup means for picking up an object to be moved, and a specifying means for specifying a movement destination of the baggage shown in the image data using image data obtained by picking up the object with the image pickup means And generating means for generating a screen capable of identifying the destination of the package specified by the specifying means.
また、本発明は、移動対象の荷物を撮像する撮像工程と、前記撮像工程で前記荷物を撮像することで得られる画像データを用いて当該画像データに映る荷物の移動先を特定する特定工程と、前記特定工程で特定した荷物の移動先を識別可能な画面を生成する生成工程とを備えることを特徴とする。 The present invention also includes an imaging step of imaging a package to be moved, and a specifying step of identifying a moving destination of a package shown in the image data using image data obtained by imaging the package in the imaging step. And a generation step of generating a screen capable of identifying the destination of the package identified in the identification step.
本発明によれば、荷物の移動作業における、業務効率を向上させることができる。 According to the present invention, it is possible to improve the work efficiency in the load transfer operation.
以下、図面を参照して、本発明の実施形態を詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
図１は、本発明のネットワークカメラシステムの構成の一例を示すシステム構成図である。本ネットワークカメラシステムは、１又は複数のネットワークカメラ１０１、ＰＯＥ ＨＵＢ１０２、画像解析サーバ１０３、無線ＬＡＮルータ１０４、画像表示端末１０５を含む、各機器はネットワーク１０６により接続されている。
FIG. 1 is a system configuration diagram showing an example of the configuration of a network camera system according to the present invention. The network camera system includes one or
ネットワークカメラ１０１は、例えば、倉庫や工場等で、荷物を載せるための荷役台である「パレット」が置かれる場所（集荷場所）を撮影可能な位置に設けられている。ネットワークカメラ１０１は、本発明における、撮像装置の一例である。
The
ＰＯＥ ＨＵＢ（Ｐｏｗｅｒ ｏｖｅｒ Ｅｔｈｅｒｎｅｔ ＨＵＢ）１０２は、ネットワークカメラ１０１に電力を供給して動作させる。
A POE HUB (Power over Ethernet HUB) 102 supplies power to the
画像解析サーバ１０３は、ネットワークカメラ１０１で撮影した画像データを取得し、取得した画像データを解析して、パレットに載っている荷物の配送先の特定等を行う。画像解析サーバ１０３は、本発明における、情報処理装置の一例である。
The
画像表示端末１０５は、フォークリフトを操縦する作業員等が持ち歩くか、フォークリフトに備え付けられる装置である。
The
画像表示端末１０５は、無線ＬＡＮルータ１０４を介してネットワーク１０６に接続し、画像解析サーバ１０３により、各荷物の配送先が重畳された集荷場所画像データを表示部３０６に表示する。
The
作業員は、画像表示端末１０５の表示部３０６に表示された集荷場所画像データを閲覧することで、各荷物の配送先を特定し、特定した配送先に荷物を配送する配送車の所までフォークリフトで荷物を移動させる。
The worker identifies the delivery destination of each package by browsing the collection location image data displayed on the
なお、本実施形態では、荷物の側面にラベルが貼られており、またラベルにはＱＲコード（ＱＲコードは登録商標）と、荷物の配送先を一意に識別するための配送先コードが印字されている。なお、他の実施形態として、ＱＲコードに限らずバーコード（１次元コードともいう）であっても、カラーバーコードであっても良い。以上で、図１の説明を終了する。 In the present embodiment, a label is attached to the side of the package, and a QR code (QR code is a registered trademark) and a delivery destination code for uniquely identifying the delivery destination of the package are printed on the label. ing. Note that as another embodiment, not only the QR code but also a bar code (also referred to as a one-dimensional code) or a color bar code may be used. This is the end of the description of FIG.
次に、図２を用いて、図１に示した画像解析サーバ１０３に適用可能な情報処理装置のハードウェア構成の一例について説明する。
Next, an example of the hardware configuration of the information processing apparatus applicable to the
図２において、２０１はＣＰＵで、システムバス２０４に接続される各デバイスやコントローラを統括的に制御する。また、ＲＯＭ２０２あるいは外部メモリ２１１には、ＣＰＵ２０１の制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ ／ Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やオペレーティングシステムプログラム（以下、ＯＳ）や、ＰＣの実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。
In FIG. 2,
２０３はＲＡＭで、ＣＰＵ２０１の主メモリ、ワークエリア等として機能する。ＣＰＵ２０１は、処理の実行に際して必要なプログラム等をＲＯＭ２０２あるいは外部メモリ２１１からＲＡＭ２０３にロードして、ロードしたプログラムを実行することで各種動作を実現するものである。
A
また、２０５は入力コントローラで、キーボード（ＫＢ）２０９等のポインティングデバイス等からの入力を制御する。２０６はビデオコントローラで、ディスプレイ２１０（液晶、ブラウン管を問わない）等の表示器への表示を制御する。
An
２０７はメモリコントローラで、ブートプログラム、各種のアプリケーション、フォントデータ、ユーザファイル、編集ファイル、各種データ等を記憶する外部記憶装置（ハードディスク（ＨＤ））や、フレキシブルディスク（ＦＤ）、或いはＰＣＭＣＩＡカードスロットにアダプタを介して接続されるコンパクトフラッシュ（登録商標）メモリ等の外部メモリ２１１へのアクセスを制御する。
A
２０８は通信Ｉ／Ｆコントローラで、ネットワークを介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信等が可能である。
A communication I /
なお、ＣＰＵ２０１は、例えばＲＡＭ２０３内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、ディスプレイ２１０上での表示を可能としている。また、ＣＰＵ２０１は、ディスプレイ２１０上の不図示のマウスカーソル等でのユーザ指示を可能とする。
Note that the
本発明を実現するための後述する各種プログラムは、外部メモリ２１１に記録されており、必要に応じてＲＡＭ２０３にロードされることによりＣＰＵ２０１によって実行されるものである。さらに、上記プログラムの実行時に用いられる設定ファイル等も外部メモリ２１１に格納されており、これらについての詳細な説明も後述する。以上で、図２の説明を終了する。
Various programs to be described later for realizing the present invention are stored in the
次に、図３を参照して、図１の画像表示端末１０５のハードウェア構成の一例について説明する。
Next, an example of the hardware configuration of the
図３において、３０１はＣＰＵで、システムバス３１０に接続される後述する各種のデバイスを統括的に制御する。ＲＯＭ３０３や外部メモリ３０９には、ＣＰＵ３０１の制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ／Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やオペレーティングシステム（ＯＳ）や、画像表示端末１０５が実行する機能を実現するために必要な各種プログラムやデータ等が記憶されている。
Referring to FIG. 3,
３０２はＲＡＭで、ＣＰＵ３０１の主メモリ、ワークエリア等として機能する。ＣＰＵ３０１は、後述する各種の処理の実行に際して必要なプログラム等をＲＯＭ３０３や外部メモリ３０９からＲＡＭ３０２にロードして、ロードしたプログラムを実行することで、各種の動作を実現する。
A
撮影部３０４は、撮影レンズ、撮像素子、撮像素子で得られた画像信号を所定の形式に変換する回路等からなる。通信部３０５は、通信ネットワーク（例えば、図１のネットワーク１０６）を介して画像解析サーバ１０３等の外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、ＴＣＰ／ＩＰを用いた通信等が可能である。
The photographing
表示部３０６は、液晶ディスプレイ等からなり、ＣＰＵ３０１が、例えばＲＡＭ３０２内の表示情報用領域へアウトラインフォントの展開（ラスタライズ）処理を実行することにより、表示部３０６への表示を可能としている。
The
操作部３０７はＣＰＵ３０１に対して各種の指示を入力するためのものであり、各種のボタンや表示部３０６に貼られているタッチパネルシートからなる。表示部３０６に表示されているシステムの操作画面に対する押下指示を受け付けると、押されるとその位置情報を操作部３０７はＣＰＵ３０１に伝える。
An
音声入力部３０８は、マイク等から構成され、入力された音声を音声信号に変換する。外部メモリ３０９は、画像表示端末１０５が後述するフローチャート示す各ステップの処理を実行するためのプログラムやデータを記憶する記憶装置である。
The
本発明を実現するための各種プログラムは外部メモリ３０９に記録されており、必要に応じてＲＡＭ３０２にロードされることにより、ＣＰＵ３０１によって実行されるものである。さらに、上記プログラムの実行時に用いられる設定ファイル等も外部メモリ３０９に格納されており、これらについての詳細な説明も後述する。
Various programs for realizing the present invention are stored in the
以上が、図１の画像表示端末１０５のハードウェア構成の一例の説明である。
The above is the description of an example of the hardware configuration of the
次に、図２１を用いて、図１に示したネットワークカメラ１０１（情報処理装置）のハードウェア構成の一例について説明する。 Next, an example of the hardware configuration of the network camera 101 (information processing apparatus) illustrated in FIG. 1 will be described with reference to FIG.
図２１は、ネットワークカメラ１０１のハードウェアの構成を示す構成図である。
FIG. 21 is a block diagram showing the hardware configuration of the
ＣＰＵ２１０１は、システムバス２１０４に接続される各デバイスやコントローラを統括的に制御する。また、ＲＯＭ２１０２あるいは外部メモリ２１０５には、ＣＰＵ２１０１の制御プログラムであるＢＩＯＳ（Ｂａｓｉｃ Ｉｎｐｕｔ ／ Ｏｕｔｐｕｔ Ｓｙｓｔｅｍ）やオペレーティングシステムプログラム（以下、ＯＳ）や、画像処理サーバ１０８の実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。ＲＡＭ２１０３は、ＣＰＵ２１０１の主メモリ、ワークエリア等として機能する。
The
ＣＰＵ２１０１は、処理の実行に際して必要なプログラム等をＲＡＭ２１０３にロードして、プログラムを実行することで各種動作を実現するものである。
The
メモリコントローラ（ＭＣ）２１０６は、ブートプログラム、各種のアプリケーション、フォントデータ、ユーザファイル、編集ファイル、各種データ、画像データ等を記憶するハードディスク（ＨＤ）やＰＣＭＣＩＡカードスロットにアダプタを介して接続されるスマートメディア（登録商標）等の外部メモリ２１０５へのアクセスを制御する。
A memory controller (MC) 2106 is a smart connected via an adapter to a hard disk (HD) that stores a boot program, various applications, font data, user files, editing files, various data, image data, etc. It controls access to the
カメラ部２１０７は、画像処理部２１０８と接続されており、監視対象に対して向けられたレンズを透過して得られた光をＣＣＤやＣＭＯＳ等の受光セルによって光電変換を行った後、ＲＧＢ信号や補色信号を画像処理部２１０８に対して出力する。
The
画像処理部２１０８は、ＲＧＢ信号や捕色信号に基づいて、ホワイトバランス調整、ガンマ処理、シャープネス処理を行い、更に、ＹＣ信号処理を施して輝度信号Ｙとクロマ信号（以下、ＹＣ信号）を生成し、ＹＣ信号を所定の圧縮形式（例えばＪＰＥＧフォーマット、あるいはＭｏｔｉｏｎＪＰＥＧフォーマット等）で圧縮し、この圧縮されたデータは、画像データとして外部メモリ２１０５へ一時保管される。
The
通信Ｉ／Ｆコントローラ（通信Ｉ／ＦＣ）２１０９は、ネットワークを介して、外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行しており、外部メモリ２１０５に記憶された画像データは、通信Ｉ／Ｆコントローラ２１０９によって外部機器へ送信される。
A communication I / F controller (communication I / FC) 2109 connects and communicates with an external device via a network, executes communication control processing in the network, and stores the image stored in the
次に、図４について説明する（本発明の第１の実施形態）。図４は、画像表示端末１０５が画像解析サーバ１０３から解析結果の画像データを受け取り、出荷先を表示した集荷場所画像データを表示する本発明の出荷先表示処理の流れを示すフローチャートの一例である。
Next, FIG. 4 will be described (first embodiment of the present invention). FIG. 4 is an example of a flowchart showing a flow of shipping destination display processing of the present invention in which the
図４に示す各処理は、画像解析サーバ１０３のＣＰＵ２０１、または画像表示端末１０５のＣＰＵ３０１により実行される。
Each process shown in FIG. 4 is executed by the
ステップ４０１で、画像表示端末１０５は、表示部３０６に表示された配送先表示画面（図６）上で、出荷先表示ボタン（６０１）の選択をユーザから受け付けると、ステップ４０２で、画像解析サーバ１０３は、集荷場所のネットワークカメラ画像データの解析を行い、集荷場所画像データ内のパレットに配送先の配色をオーバレイした画像データを作成する。ステップ４０２の処理の詳細は、図５を用いて後ほど説明する。
When the
ここで、図６〜図８について説明する。図６は画像表示端末１０５の表示部３０６に表示される、ＱＲコード解析前の配送先表示画面である。
Here, FIG. 6 to FIG. 8 will be described. FIG. 6 shows a delivery destination display screen before QR code analysis, which is displayed on the
出荷先表示ボタン６０１は、当該ボタンがユーザにより押下されることで、図７に示す通り、画像データ表示領域６０３に表示される画像データ中の各パレットの荷物に配送先の色がオーバレイされて表示（図７の７０１〜７０３）される。また、各配送先をどの色で表示するかは、図８の配送先データテーブルにより決定される。
As shown in FIG. 7, when the shipping
キャンセルボタン６０２は、配送先表示画面の表示を終了するためのボタンである。
The cancel
画像データ表示領域６０３は、ネットワークカメラ１０１で撮影した画像データが表示される。
The image
６０４は、ネットワークカメラ１０１で撮影した画像データに映るパレットを示す。
凡例６０５は、図７に示すように、画像データ表示領域６０３に表示される画像データ中の各パレットの荷物に配送先の色をオーバレイして表示するときに、各色が示す配送先がどこであるかを示す。
The
配送先コードの文字列６０６は、荷物側面に貼られたラベルに印字される、荷物の配送先を一意に識別するためのコードである。
The
図７は、後述する図４のステップ４０４で、出荷先表示ボタン６０１がユーザにより押下されることで各パレットの荷物に配送先の色をオーバレイした状態の一例を示す図である。
FIG. 7 is a view showing an example of a state in which the color of the delivery destination is overlaid on the package of each pallet when the shipping
図８は、画像解析サーバ１０３の外部メモリ２１１で管理される配送先データテーブルの一例を示す図であり、ＱＲコードに埋め込まれている配送先コードから、配送先と配送先を識別するための色を管理するデータテーブルである。
FIG. 8 is a view showing an example of a delivery destination data table managed by the
配送先コード８０１は、各配送先を一意に識別するためのコードであり、パレット上の荷物に張り付けられるＱＲコード（２次元コードともいう）に埋め込まれている情報である。配送先８０２はパレット上の荷物の配送先を示し、色８０３は、画像データ表示領域６０３に表示される画像データ中のパレットの荷物が、配送先８０２に示される配送先である場合に、何色をオーバレイするかを示す。
The
ＱＲコードは、本発明における識別情報の一例である。以上で、図６〜図８の説明を終了し、図４の説明に戻る。 The QR code is an example of identification information in the present invention. This is the end of the description of FIGS. 6 to 8 and returns to the description of FIG. 4.
画像解析サーバ１０３は、ステップ４０３で、画像表示端末１０５に対してステップ４０２で作成した画像データを送信し、ステップ４０４で、画像表示端末１０５は、受信した画像データを表示部３０６に表示する（図７）。以上で図４の説明を終了し、次に図５について説明する。
At step 403, the
図５は、画像解析サーバ１０３が撮影した集荷場所画像データを解析し、パレット画像部分に配送先の配色をオーバレイする手順の一例を示すフローチャートであり、図４のステップ４０２の処理の詳細を示すフローチャートの一例を示す図である。
FIG. 5 is a flow chart showing an example of a procedure for analyzing the collection location image data taken by the
図５に示す各処理は、画像解析サーバ１０３のＣＰＵ２０１、またはネットワークカメラ１０１のＣＰＵにより実行される。
Each process shown in FIG. 5 is executed by the
ステップ５０１で画像解析サーバ１０３は、ネットワークカメラ１０１に集荷場所画像データをリクエストする。
In
ネットワークカメラ１０１は、画像解析サーバ１０３からのリクエストを受信し、ステップ５０２で、当該ネットワークカメラ１０１で撮影した集荷場所画像データを画像解析サーバ１０３に送信する。
The
ステップ５０３で、画像解析サーバ１０３は、集荷場所画像データを受信し、図９に示す通り、あらかじめ決められた数（横Ｘ、縦Ｙ）で画像を分割する。図９は撮影した集荷場所画像データを横Ｘ、縦Ｙで分割した画面のイメージを表している。
In
ステップ５０３と、後述するステップ１００３は、本発明における、撮像装置から、画像データを取得する取得手段の一例である。 Step 503 and step 1003 described later are an example of an acquisition unit for acquiring image data from the imaging apparatus according to the present invention.
ステップ５０４で、画像解析サーバ１０３は、ｘ＝１，ｙ＝１で変数を初期化し、ステップ５０５で、画像解析サーバ１０３は、分割した（ｘ，ｙ）の領域の集荷場所画像データの色分布を解析する。
In step 504, the
ステップ５０６で、画像解析サーバ１０３は、ステップ５０５の解析の結果、白と黒の割合が所定以上あるかどうかを判定し、所定以上あればステップ５０７に移行し、所定以上なければ次の領域の画像を解析するためにステップ５１６に移行する。ステップ５０６は、本発明における、取得手段で取得した画像データを解析し、識別情報を特定する特定手段の一例である。
In step 506, the
白と黒の割合が所定以上であった場合、ステップ５０７で、画像解析サーバ１０３は、ＱＲコードを解析するためにネットワークカメラ１０１に（ｘ，ｙ）領域のズーム画像の送信命令を送る。ステップ５０７は、本発明における、前記特定手段で特定した識別情報をズームして撮像するように前記撮像装置に指示する指示手段の一例である。
If the ratio of white and black is greater than or equal to a predetermined value, in step 507, the
ステップ５０８で、ネットワークカメラ１０１は、画像解析サーバ１０３からの送信命令を受信し、（ｘ，ｙ）領域のズーム画像を画像解析サーバ１０３へ送る。
In step 508, the
ステップ５０９で、画像解析サーバ１０３は（ｘ，ｙ）領域のズーム画像を受信し、ステップ５１０で受信したズーム画像の中にＱＲコードのファインダパターンがあるかどうかを判定する。
In
画像解析サーバ１０３は、ステップ５１０の判定によりＱＲコードのファインダパターンを検出できなかった場合はステップ５１６に処理を移行し、ＱＲコードのファインダパターンを検出した場合は、ステップ５１１に処理を移行してＱＲコードの情報の読み取りを行う。
If the
ステップ５１２で、画像解析サーバ１０３は、ＱＲコードの情報が読み取れたかどうかの判定を行い、読み取れた場合はステップ５１４でＱＲコードに含まれている配送先コードに紐づいた色を配送先データベース（図８）から取得して、ステップ５１５に移行する。
At step 512, the
ステップ５１２でＱＲコードの情報が読み取れなかったと判定された場合、画像解析サーバ１０３は、ステップ５１３でＱＲコードの右上にある配送先コードの文字列（配送先コードの文字列６０６）をＯＣＲで読み取り、ステップ５１５に移行する。
If it is determined in step 512 that the QR code information could not be read, the
なお、本実施例では、配送先コードはＱＲコードの右上にあるものとしたが、配送先コードがどの位置にあるかは、画像解析サーバ１０３にユーザが予め登録していれば、右上でなくとも良い。また、画像解析により、配送先コードを特定しても良い。
In the present embodiment, the delivery destination code is located at the upper right of the QR code, but it is not at the upper right if the user has registered the delivery destination code in advance in the
ステップ５１５では、集荷場所画像データ中のＱＲコードを中心とした荷物のサイズに相当する矩形に配送先コードに紐づいた色をオーバレイ（図７）し、ステップ５１６へ移行する。なお、荷物のサイズは画像解析サーバであらかじめ記憶しても良いし、画像解析により、集荷場所画像中の荷物の領域を特定しても良い。 In step 515, the color linked to the delivery destination code is overlaid (FIG. 7) on a rectangle corresponding to the size of the package centering on the QR code in the collection location image data, and the process proceeds to step 516. The size of the package may be stored in advance by the image analysis server, or the region of the package in the collection location image may be specified by image analysis.
次にステップ５０６で白と黒の割合が所定以上でなかった場合の説明を行う。ステップ５１６では、画像解析サーバ１０３は、ｘが横分割数Ｘと同じかどうかを比較して、同じであればステップ５１８に移行し、同じでなければ次の領域の画像をチェックするためにステップ５１７でｘをインクリメントしてステップ５０５に戻る。
Next, the case where the ratio of white to black is not equal to or more than a predetermined value in step 506 will be described. In step 516, the
ステップ５１８では、画像解析サーバ１０３は、ｙが縦分割数Ｙと同じかどうかを比較して、同じであれば全分割画像を解析したので処理を終了し、同じでなければ次の領域の画像をチェックするためにステップ５１９でｙをインクリメントしてステップ５０５に戻る。
In
なお、図５の処理を実行後に荷物が運ばれると、運ばれた荷物の後ろに置かれていた別の荷物が集荷場所画像データに新たに映ることもあるため、荷物が運ばれた場合、その荷物があった領域に対してのみステップ５０５〜ステップ５１９の処理を実行することで、再度集荷場所画像データ全体に対してステップ５０５〜ステップ５１９の処理を実行するよりも処理負荷を軽減することが可能となる。荷物が運ばれたか否かは、集荷場所画像データを解析することにより特定する。 If a package is transported after the process of FIG. 5 is carried out, another package placed behind the transported package may be newly reflected in the collection location image data. By performing the processing of step 505 to step 519 only on the area where the package was present, the processing load is reduced compared to the processing of step 505 to step 519 on the entire collection location image data again. Is possible. Whether or not the package has been transported is identified by analyzing the collection location image data.
以上で、図５の説明を終了し、次に、図１０を用いて、図４のステップ４０２の処理の詳細を示すフローチャートの他の実施形態について説明する。 This is the end of the description of FIG. 5. Next, another embodiment of the flowchart showing the details of the process of step 402 of FIG. 4 will be described using FIG.
図１０は図５のフローチャートと別技術で、撮影した集荷場所画像データを解析し、パレット画像部分に配送先の配色をオーバレイする手順の一例を示すフローチャートである。 FIG. 10 is a flowchart different from the flowchart of FIG. 5 and is a flowchart showing an example of the procedure of analyzing the photographed collection place image data and overlaying the color scheme of the delivery destination on the pallet image portion.
図５の処理では、パレットに載っている荷物一つ一つのＱＲコードの情報を読み取って、配送先の特定を荷物ごとに行っている。しかしながら、通常同一のパレットに載っている荷物は同一の配送先である。 In the process of FIG. 5, the information of the QR code of each package listed on the pallet is read, and the delivery destination is specified for each package. However, packages that are usually on the same pallet are the same delivery destination.
そのため、本実施形態では、まず集荷場所画像データからパレットを特定し、パレットに載っている荷物のうちの１つのＱＲコードの情報を読み取ることで、その荷物の配送先を特定するとともに、当該荷物と同じパレットに載っているその他の荷物も特定した配送先と同じ配送先として特定する。そうすることで、パレットに載っている荷物一つ一つのＱＲコードの情報を読み取って、配送先の特定を荷物ごとに行うよりも、解析時間を短縮することができる。では、ここから図１０のフローチャートの各ステップについて説明する。 Therefore, in the present embodiment, the pallet is first identified from the collection location image data, and the information on the QR code of one of the packages on the pallet is read to specify the delivery destination of the package, and the package Also specify other packages listed on the same pallet as the same shipping destination as the specified shipping destination. By doing so, it is possible to shorten the analysis time rather than specifying the delivery destination for each package by reading the information of the QR code of each package on the pallet. Now, each step of the flowchart of FIG. 10 will be described from here.
なお、図１０に示す各処理は、画像解析サーバ１０３のＣＰＵ２０１、またはネットワークカメラ１０１のＣＰＵにより実行される。
Each process illustrated in FIG. 10 is executed by the
ステップ１００１で、画像解析サーバ１０３は、ネットワークカメラ１０１に集荷場所画像データをリクエストする。
At step 1001, the
ステップ１００２で、ネットワークカメラ１０１は、画像解析サーバ１０３からのリクエストを受信し、当該ネットワークカメラ１０１で撮影した集荷場所画像データを画像解析サーバ１０３に送信する。
In step 1002, the
ステップ１００３で、画像解析サーバ１０３は、ネットワークカメラ１０１から送信された集荷場所画像データを受信し、集荷場所画像データの中からパレット１１０２を検索する（図１１）。パレットの検索には、既知の画像のパターンマッチング技術を用いる（例えば、予め荷台の画像データを画像解析サーバ１０３で管理し、当該パレットの画像データと特徴量が一致または所定以上類似するものを集荷場所画像データから検索する）。ステップ１００３は、本発明における、取得手段で取得した画像データから台を特定する特定手段の一例である。
At step 1003, the
画像解析サーバ１０３は、ステップ１００４でパレットが見つからなかった場合は本処理を終了し、パレットが見つかった場合は、ステップ１００５で画像解析サーバ１０３はパレット上部の所定の位置の「横ｘ，縦ｙのサイズのＱＲコード解析画像領域（図１１のＱＲコード解析画像領域１１０１）」のズーム画像送信命令をネットワークカメラ１０１に送信する。
The
本実施形態においては、「横ｘ，縦ｙのサイズのＱＲコード解析画像領域」の所定の位置の情報は、ユーザが画像解析サーバ１０３にあらかじめ登録しておくものとする。
In the present embodiment, it is assumed that the information of the predetermined position of “the QR code analysis image area of the size of horizontal x, vertical y” is registered in the
ステップ１００６で、ネットワークカメラ１０１は、画像解析サーバ１０３からの命令を受信し、ＱＲコード解析画像領域１１０１をズームして撮影した画像データを画像解析サーバ１０３へ送る。
In step 1006, the
ステップ１００７で、画像解析サーバ１０３は、ＱＲコード解析画像領域１１０１をズームして撮影した画像データを受信し、ステップ１００８で受信した画像データの中にＱＲコードのファインダパターンがあるかどうかを判定する。
In
画像解析サーバ１０３は、ステップ１００８の判定でＱＲコードを検出できなかった場合はステップ１０１４に移行し、ＱＲコードを検出した場合は、ステップ１００９に移行してＱＲコードの情報を読み取る。
If the
ステップ１０１０で、画像解析サーバ１０３は、ＱＲコードの情報が読み取れたかどうかの判定を行い、読み取れた場合はステップ１０１２でＱＲコードに含まれている配送先コードに紐づいた色を配送先データベース（図８）から取得して、ステップ１０１３に移行する。
In step 1010, the
ステップ１０１０でＱＲコードが読み取れなかった場合は、ステップ１０１１でＱＲコードの右上にある配送先コードの文字列をＯＣＲで読み取り、ステップ１０１３に移行する。 If the QR code can not be read at step 1010, the character string of the delivery destination code at the upper right of the QR code is read by OCR at step 1011, and the process proceeds to step 1013.
なお、本実施例では、配送先コードはＱＲコードの右上にあるものとしたが、配送先コードがどの位置にあるかは、画像解析サーバ１０３にユーザが予め登録していれば、右上でなくとも良い。また、画像解析により、配送先コードを特定しても良い。
In the present embodiment, the delivery destination code is located at the upper right of the QR code, but it is not at the upper right if the user has registered the delivery destination code in advance in the
ステップ１０１３で、画像解析サーバ１０３は、集荷場所画像中のパレットに載っている全荷物に対して、配送先コードに紐づいた色をオーバレイ（図１２）し、ステップ１０１４へ移行する。ステップ１０１３は、本発明における、前記特定手段で特定した前記台ごとに当該台上の荷物を識別表示した画面を生成する生成手段の一例である。
At step 1013, the
ステップ１０１４で、画像解析サーバ１０３は、ステップ１００２でネットワークカメラ１０１から送信された集荷場所画像データの中から、画像検索により次のパレットを検索する。
In step 1014, the
ステップ１０１５でパレットが見つからなかった場合は本処理を終了し、見つかった場合は次のパレットの配送先を解析するためにステップ１００５に戻る。以上で、図１０の説明を終了する。 If the pallet is not found at step 1015, the processing is terminated. If it is found, the process returns to step 1005 to analyze the delivery destination of the next pallet. This is the end of the description of FIG.
次に図１３を用いて、本発明の実施形態における、配送可能な配送車を提示する処理の流れを示すフローチャートの一例について説明する。 Next, an example of a flowchart showing a flow of processing for presenting a deliverable delivery vehicle in the embodiment of the present invention will be described using FIG.
図１３は、既知の車番認識技術（例えば、特開２００７−２９３４９２号公報や、特開２０１３−２５１００５号公報に記載の技術）を利用し、各配送先に荷物を運ぶ配送車が配送可能な状態かどうかをユーザに提示する方法を示すフローチャートの一例である。これにより配送可能なパレットから出荷することができるため、配送車の待機時間を短縮し、効率良い配送業務が可能となる。 FIG. 13 can deliver a delivery vehicle carrying a package to each delivery destination using known vehicle number recognition technology (for example, the techniques described in JP 2007-293492 A and JP 2013-251005 A) It is an example of the flowchart which shows the method of showing to a user whether it is a state. Since it can ship from the deliverable pallet by this, the waiting time of a delivery vehicle can be shortened and efficient delivery operation | work is attained.
ステップ１３０１で、画像解析サーバ１０３は、駐車場の入り口など配送車の帰車が分かる場所に設置されたネットワークカメラから画像データを取得する。ステップ１３０１は、本発明における、前記撮像装置から、荷物を配送先に運ぶ車両を撮像した画像データ（車両画像）を取得する取得手段（車両画像取得手段）の一例である。
In step 1301, the
ステップ１３０２で、画像解析サーバ１０３は、ステップ１３０１で取得した画像データから、これから荷積を行う配送車のナンバーを読み取る。ステップ１３０２は、本発明における、取得手段で取得した画像データから、当該画像データに映る車両を識別可能な識別情報を特定する第１特定手段の一例である。
In step 1302, the
ステップ１３０３で、画像解析サーバ１０３は、配送車データベース（図１４）を参照して、読み取ったナンバーと、ナンバー１４０３が一致する行の配送先１４０２を取得し、ステップ１３０４で、当該配送先１４０２によって示される配送先の配送車が到着したことをユーザに認識させるべく、通知する。
In step 1303, the
ステップ１３０３は、本発明における、第１特定手段で特定した前記識別情報を用いて、前記車両の荷物の配送先を特定する第２特定手段の一例である。また、ステップ１３０４は、本発明における、第２特定手段で特定した配送先をユーザに認識させるべく、通知する通知手段の一例である。 Step 1303 is an example of a second specifying means for specifying the delivery destination of the package of the vehicle using the identification information specified by the first specifying means in the present invention. Step 1304 is an example of notification means for notifying the user of the delivery destination specified by the second specifying means in the present invention.
具体的には、例えば、図１５に示す通り、配送先表示画面上で「配送車到着済み」１５０１を表示することで通知する。なお、複数の配送車が到着した場合には、到着した順番を示す番号がそのまま優先度として、配送先表示画面上に表示される。 Specifically, for example, as shown in FIG. 15, notification is made by displaying “delivery car arrived” 1501 on the delivery destination display screen. When a plurality of delivery vehicles arrive, the number indicating the arrival order is displayed as it is on the delivery destination display screen.
なお、図１３の処理は、ステップ４０１より後の画像表示端末１０５に配送先表示画面を表示している間に実行される。
The process of FIG. 13 is executed while the delivery destination display screen is displayed on the
図１４は、画像解析サーバ１０３の外部メモリ２１１に記憶される配送車データベースの一例を示す図である。
FIG. 14 is a view showing an example of a delivery car database stored in the
配送先コード１４０１は、各配送車の配送先を一意に識別するためのコードである。
The
配送先１４０２は、配送車が荷物を配送する配送先を示す。ナンバー１４０３は、配送車のナンバープレートに記載のナンバーを示す。以上で図１４の説明を終了する。
The
次に図１６を用いて、配送先表示画面の他の実施形態について説明する。図１６は、図４のステップ４０４において、画像表示端末１０５の表示部３０６に表示される配送先表示画面の一例を示す図である。
Next, another embodiment of the delivery destination display screen will be described with reference to FIG. FIG. 16 is a diagram showing an example of the delivery destination display screen displayed on the
パレット選択ボタン１６０１は、フォークリフトでパレットを運ぶ作業員が、配送先表示画面中の荷物の中からこれから運ぶ荷物をタッチ操作等により選択した後に押すボタンである。パレット選択ボタン１６０１が押下されると、その荷物の選択情報を画像解析サーバ１０３が取得・管理し、他の作業員の画像表示端末１０５の表示部３０６に対して、メッセージ１６０２に示すように、当該選択された荷物がすでに運ばれる予定であることを示すメッセージを含む配送先（移動先）表示画面を再度生成して表示する。これにより、例えば、複数のフォークリフトで荷物を運ぶ場合に、他の作業員に対して、選択済みの荷物を優先的に運ぶべきであることを認識させたり、逆に選択済みの荷物以外の荷物を運ぶべきであることを認識させたりすることが可能となる。以上で、図１６の説明を終了する。
The
次に、図１７を用いて、配送先（移動先）表示画面の他の実施形態について説明する。図１７は、図４のステップ４０４において、画像表示端末１０５の表示部３０６に表示される配送先表示画面の一例を示す図である。上述の配送先表示画面では、荷物を最終的に送る先を表示したが、図１７の実施形態では、荷物の移動先をパレットの荷物にオーバレイして表示する。そうすることで、例えば、東京行きの荷物は、東京行きの配送車が到着するエリアＡに移動させるといった運用の場合に、東京行きの荷物であるというだけでは、どのエリアに荷物を移動させれば良いのかが分からないといった課題を解消することが可能となる。
Next, another embodiment of the delivery destination (moving destination) display screen will be described with reference to FIG. FIG. 17 is a view showing an example of the delivery destination display screen displayed on the
次に図１８、図１９を用いて、本発明の第２の実施形態について説明する。第２の実施形態では、図４、図５、図１０、図１３のフローチャートにおいて、画像解析サーバ１０３が実行していた処理をネットワークカメラ１０１が実行する。また、第１の実施形態において画像解析サーバ１０３の外部メモリ２１１で記憶する各データテーブルは、ネットワークカメラ１０１の外部メモリ２１０５で記憶するものとする。そのため、第２の実施形態におけるネットワークカメラシステムでは、画像解析サーバ１０３は必須の構成ではない。
Next, a second embodiment of the present invention will be described using FIG. 18 and FIG. In the second embodiment, in the flowcharts of FIGS. 4, 5, 10, and 13, the
第２の実施形態では、まず、第１の実施形態同様、図４の処理を実行する。なお、上述のとおり、ステップ４０２、およびステップ４０３の処理はネットワークカメラ１０１が実行する。ただし、ステップ４０２の処理の詳細は、図５ではなく、図１８、または図１９である。
In the second embodiment, first, the process of FIG. 4 is executed as in the first embodiment. Note that, as described above, the processes of step 402 and step 403 are executed by the
では、ここから図１８、図１９について説明する。 Now, FIG. 18 and FIG. 19 will be described from here.
図１８は、ネットワークカメラ１０１が撮影した集荷場所画像データを、当該ネットワークカメラ１０１が解析し、パレット画像部分に配送先の配色をオーバレイする手順の一例を示すフローチャートであり、図４のステップ４０２の処理の詳細を示すフローチャートの一例を示す図である。
FIG. 18 is a flow chart showing an example of the procedure of analyzing the collection location image data captured by the
図１８に示す各処理は、ネットワークカメラ１０１のＣＰＵ２１０１により実行される。なお、図５のフローチャートにおいて画像解析サーバ１０３が実行する処理を、ネットワークカメラ１０１が実行する以外は、図５のフローチャートと同様の処理であるため、簡潔に説明する。
Each process shown in FIG. 18 is executed by the
ステップ１８０１で、ネットワークカメラ１０１は、出荷先表示ボタン（６０１）が選択された旨の情報を画像表示端末１０５から受信し、ステップ１８０２で、当該ネットワークカメラ１０１で集荷場所画像データを撮影する。
In step 1801, the
ステップ１８０２と、後述するステップ１９０２は、本発明における、移動対象の荷物を撮像する撮像手段の一例である。 Step 1802 and step 1902 to be described later are an example of an imaging unit for imaging a package to be moved in the present invention.
ステップ１８０３で、ネットワークカメラ１０１は、集荷場所画像データを、図９に示す通り、あらかじめ決められた数（横Ｘ、縦Ｙ）で画像を分割する。
In step S1803, the
ステップ１８０４で、ネットワークカメラ１０１は、ｘ＝１，ｙ＝１で変数を初期化し、ステップ１８０５で、ネットワークカメラ１０１は、分割した（ｘ，ｙ）の領域の集荷場所画像データの色分布を解析する。
In step 1804, the
ステップ１８０６で、ネットワークカメラ１０１は、ステップ１８０５の解析の結果、白と黒の割合が所定以上あるかどうかを判定し、所定以上あればステップ１８０７に移行し、所定以上なければ次の領域の画像を解析するためにステップ１８１４に移行する。
In step 1806, the
白と黒の割合が所定以上であった場合、ステップ１８０７で、ネットワークカメラ１０１は、（ｘ，ｙ）領域のズーム画像を撮影する。
If the ratio of white to black is equal to or more than a predetermined value, the
ステップ１８０８で、ネットワークカメラ１０１は（ｘ，ｙ）領域のズーム画像の中にＱＲコードのファインダパターンがあるかどうかを判定する。
In
ネットワークカメラ１０１は、ステップ１８０８の判定によりＱＲコードのファインダパターンを検出できなかった場合はステップ１８１４に処理を移行し、ＱＲコードのファインダパターンを検出した場合は、ステップ１８０９に処理を移行してＱＲコードの情報の読み取りを行う。ステップ１８０９と、後述するステップ１９０７は、本発明における、前記撮像手段で前記荷物を撮像することで得られる画像データを用いて当該画像データに映る荷物の移動先を特定する特定手段の一例である。
If the
ステップ１８１０で、ネットワークカメラ１０１は、ＱＲコードの情報が読み取れたかどうかの判定を行い、読み取れた場合はステップ１８１２でＱＲコードに含まれている配送先コードに紐づいた色を配送先データベース（図８）から取得して、ステップ１８１３に移行する。
In step 1810, the
ステップ１８１０でＱＲコードの情報が読み取れなかったと判定された場合、ネットワークカメラ１０１は、ステップ１８１１でＱＲコードの右上にある配送先コードの文字列（配送先コードの文字列６０６）をＯＣＲで読み取り、ステップ１８１３に移行する。
If it is determined in step 1810 that the QR code information could not be read, the
なお、本実施例では、配送先コードはＱＲコードの右上にあるものとしたが、配送先コードがどの位置にあるかは、ネットワークカメラ１０１にユーザが予め登録していれば、右上でなくとも良い。また、画像解析により、配送先コードを特定しても良い。
In the present embodiment, the delivery destination code is located at the upper right of the QR code, but the location of the delivery destination code may not be at the upper right if the user has registered in the
ステップ１８１３では、集荷場所画像データ中のＱＲコードを中心とした荷物のサイズに相当する矩形に配送先コードに紐づいた色をオーバレイ（図７）し、ステップ１８１４へ移行する。なお、荷物のサイズは画像解析サーバであらかじめ記憶しても良いし、画像解析により、集荷場所画像中の荷物の領域を特定しても良い。 In step 1813, the color linked to the delivery destination code is overlaid (FIG. 7) on a rectangle corresponding to the size of the package centering on the QR code in the collection location image data, and the process moves to step 1814. The size of the package may be stored in advance by the image analysis server, or the region of the package in the collection location image may be specified by image analysis.
ステップ１８１３と、後述するステップ１９１１は、本発明における、前記特定手段で特定した荷物の移動先を識別可能な画面を生成する生成手段の一例である。 Step 1813 and step 1911 to be described later are an example of a generation unit for generating a screen capable of identifying the destination of the package identified by the identification unit in the present invention.
次にステップ１８０６で白と黒の割合が所定以上でなかった場合の説明を行う。ステップ１８１４では、ネットワークカメラ１０１は、ｘが横分割数Ｘと同じかどうかを比較して、同じであればステップ１８１６に移行し、同じでなければ次の領域の画像をチェックするためにステップ１８１５でｘをインクリメントしてステップ１８０５に戻る。
Next, the case where the ratio of white to black is not equal to or more than a predetermined value in step 1806 will be described. In step 1814, the
ステップ１８１６では、ネットワークカメラ１０１は、ｙが縦分割数Ｙと同じかどうかを比較して、同じであれば全分割画像を解析したので処理を終了し、同じでなければ次の領域の画像をチェックするためにステップ１８１７でｙをインクリメントしてステップ１８０５に戻る。
In step 1816, the
なお、図１８の処理を実行後に荷物が運ばれると、運ばれた荷物の後ろに置かれていた別の荷物が集荷場所画像データに新たに映ることもあるため、荷物が運ばれた場合、その荷物があった領域に対してのみステップ１８０５〜ステップ１８１９の処理を実行することで、再度集荷場所画像データ全体に対してステップ１８０５〜ステップ１８１７の処理を実行するよりも処理負荷を軽減することが可能となる。荷物が運ばれたか否かは、集荷場所画像データを解析することにより特定する。 If a package is transported after the process of FIG. 18 is carried out, another package placed behind the transported package may appear newly in the collection location image data, so if the package is transported, By performing the processing of step 1805 to step 1819 only on the area where the package was present, the processing load is reduced as compared to the processing of step 1805 to step 1817 on the entire collection location image data again. Is possible. Whether or not the package has been transported is identified by analyzing the collection location image data.
以上で、図１８の説明を終了し、次に、図１９を用いて、第２の実施形態における図４のステップ４０２の処理の詳細を示すフローチャートの他の実施形態について説明する。 This is the end of the description of FIG. 18, and next will be described another embodiment of the flowchart showing the details of the process of step 402 of FIG. 4 in the second embodiment with reference to FIG.
図１９は、図５のフローチャートと別技術で、撮影した集荷場所画像データを解析し、パレット画像部分に配送先の配色をオーバレイする手順の一例を示すフローチャートである。 FIG. 19 is a flowchart showing an example of the procedure of analyzing the photographed collection place image data and overlaying the color arrangement of the delivery destination on the pallet image portion, using a technique different from the flowchart of FIG.
なお、図１９に示す各処理は、ネットワークカメラ１０１のＣＰＵ２１０１により実行される。なお、図１０のフローチャートにおいて画像解析サーバ１０３が実行する処理を、ネットワークカメラ１０１が実行する以外は、図１０のフローチャートと同様の処理であるため、簡潔に説明する。
Each process shown in FIG. 19 is executed by the
ステップ１９０１で、ネットワークカメラ１０１は、出荷先表示ボタン（６０１）が選択された旨の情報を画像表示端末１０５から受信し、ステップ１９０２で、当該ネットワークカメラ１０１で集荷場所画像データを撮影する。
In step 1901, the
ステップ１９０３で、ネットワークカメラ１０１は、集荷場所画像データの中からパレット１１０２を検索する（図１１）。
At step 1903, the
ネットワークカメラ１０１は、ステップ１９０４でパレットが見つからなかった場合は本処理を終了し、パレットが見つかった場合は、ステップ１９０５でネットワークカメラ１０１はパレット上部の所定の位置のＱＲコード解析画像領域１１０１をズームして撮影する。
The
ステップ１９０６で、ネットワークカメラ１０１は、ＱＲコード解析画像領域１１０１をズームして撮影した画像データの中にＱＲコードのファインダパターンがあるかどうかを判定する。
In
ネットワークカメラ１０１は、ステップ１９０６の判定でＱＲコードを検出できなかった場合はステップ１９１２に移行し、ＱＲコードを検出した場合は、ステップ１９０７に移行してＱＲコードの情報を読み取る。
If the
ステップ１９０８で、ネットワークカメラ１０１は、ＱＲコードの情報が読み取れたかどうかの判定を行い、読み取れた場合はステップ１９１０でＱＲコードに含まれている配送先コードに紐づいた色を配送先データベース（図８）から取得して、ステップ１９１１に移行する。
In step 1908, the
ステップ１９０８でＱＲコードが読み取れなかった場合は、ステップ１９０９でＱＲコードの右上にある配送先コードの文字列をＯＣＲで読み取り、ステップ１９１１に移行する。 If the QR code can not be read in step 1908, the character string of the delivery destination code at the upper right of the QR code is read by OCR in step 1909, and the process proceeds to step 1911.
ステップ１９１１で、ネットワークカメラ１０１は、集荷場所画像中のパレットに載っている全荷物に対して、配送先コードに紐づいた色をオーバレイ（図１２）し、ステップ１９１２へ移行する。
In step 1911, the
ステップ１９１２で、ネットワークカメラ１０１は、ステップ１９０２でネットワークカメラ１０１から送信された集荷場所画像データの中から、画像検索により次のパレットを検索する。
In step 1912, the
ステップ１９１３でパレットが見つからなかった場合は本処理を終了し、見つかった場合は次のパレットの配送先を解析するためにステップ１９０５に戻る。以上で、図１９の説明を終了する。 If the pallet is not found at step 1913, the processing is terminated. If it is found, the process returns to step 1905 to analyze the delivery destination of the next pallet. This is the end of the description of FIG.
図１８、または図１９の処理を実行後、図１３の処理を実行する。ただし、第２の実施形態においては、図１３の各処理は、画像解析サーバ１０３ではなく、ネットワークカメラ１０１が実行する。以上で第２の実施形態の説明を終了する。
After the process of FIG. 18 or 19 is performed, the process of FIG. 13 is performed. However, in the second embodiment, each process in FIG. 13 is executed not by the
次に、本発明の他の実施形態について説明する。上述の各実施形態では、ＱＲコードに配送先コードが含まれているとしたが、運用によっては、必ずしもＱＲコードに配送先コードが含まれているとは限らない。そこで、本実施形態では、ＱＲコードに配送先コードが含まれておらず、各荷物を一意に識別するための識別情報だけがＱＲコードに含まれている形態について、図２０を用いて説明する。 Next, another embodiment of the present invention will be described. Although the delivery destination code is included in the QR code in each embodiment described above, the delivery destination code is not always included in the QR code depending on the operation. Therefore, in the present embodiment, a form in which the delivery destination code is not included in the QR code and only identification information for uniquely identifying each package is included in the QR code will be described with reference to FIG. .
図２０は、第１の実施形態では画像解析サーバ１０３の外部メモリ２１１に、第２の実施形態では、ネットワークカメラ１０１の外部メモリ２１０５に記憶される配送先特定テーブルの一例を示す図である。識別情報２００１は、各荷物のＱＲに含まれる各荷物を一意に識別するための識別情報を示す。配送先コード２００２は、識別情報２００１によって識別される荷物の配送先を一意に識別するためのコードである。配送先２００３は、配送先コード２００２に対応する配送先を示す。このように、配送先特定テーブルをあらかじめ記憶することにより、ＱＲコードに配送先コードが含まれていなかったとしても、荷物の配送先を特定することが可能となる。
FIG. 20 is a view showing an example of a delivery destination specification table stored in the
なお、図２０の配送先特定テーブルを用いる場合、配送先を特定する処理は、ステップ５１４、ステップ１０１２、ステップ１８１２、ステップ１９１０の処理の前にそれぞれ実行される。以上で、図２０の説明を終了する。
When the delivery destination specification table of FIG. 20 is used, the process of identifying the delivery destination is executed before the process of step 514, step 1012,
以上、本発明によると、荷物の移動作業における、業務効率を向上させることができる。 As described above, according to the present invention, it is possible to improve the work efficiency in the load transfer operation.
本発明は、例えば、システム、装置、方法、プログラム若しくは記憶媒体等としての実施形態も可能であり、具体的には、複数の機器から構成されるシステムに適用してもよいし、また、１つの機器からなる装置に適用してもよい。 The present invention is also applicable to, for example, an embodiment as a system, an apparatus, a method, a program, a storage medium, etc. Specifically, the present invention may be applied to a system composed of a plurality of devices. The present invention may be applied to an apparatus consisting of two devices.
なお、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラムを、システム或いは装置に直接、或いは遠隔から供給するものを含む。そして、そのシステム或いは装置のコンピュータが前記供給されたプログラムコードを読み出して実行することによっても達成される場合も本発明に含まれる。 Note that the present invention includes one that directly or remotely supplies a program of software that implements the functions of the above-described embodiments to a system or an apparatus. The present invention is also included in the present invention if the computer of the system or apparatus reads out and executes the supplied program code.
したがって、本発明の機能処理をコンピュータで実現するために、前記コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。 Therefore, the program code itself installed in the computer to realize the functional processing of the present invention by the computer also implements the present invention. That is, the present invention also includes a computer program itself for realizing the functional processing of the present invention.
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等の形態であってもよい。 In that case, as long as it has the function of a program, it may be in the form of an object code, a program executed by an interpreter, script data supplied to an OS, or the like.
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷなどがある。また、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などもある。 Examples of recording media for supplying the program include a flexible disk, a hard disk, an optical disk, a magneto-optical disk, an MO, a CD-ROM, a CD-R, and a CD-RW. There are also magnetic tapes, non-volatile memory cards, ROMs, DVDs (DVD-ROMs, DVD-Rs) and the like.
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続する。そして、前記ホームページから本発明のコンピュータプログラムそのもの、若しくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。 In addition, as a program supply method, a browser on a client computer is used to connect to an Internet home page. Then, the program can be supplied by downloading the computer program of the present invention itself or a compressed file including an automatic installation function from the home page to a recording medium such as a hard disk.
また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。 The present invention can also be realized by dividing the program code constituting the program of the present invention into a plurality of files and downloading each file from different home pages. That is, the present invention also includes a WWW server which allows a plurality of users to download program files for realizing the functional processing of the present invention by a computer.
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせる。そして、ダウンロードした鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。 In addition, the program of the present invention is encrypted, stored in a storage medium such as a CD-ROM, and distributed to users, and the user who has cleared predetermined conditions downloads key information that decrypts encryption from the homepage via the Internet. Let Then, it is possible to execute the program encrypted by using the downloaded key information and install it on a computer.
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される。その他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。 Also, the functions of the above-described embodiments are realized by the computer executing the read program. In addition, based on the instructions of the program, an OS or the like running on the computer performs part or all of the actual processing, and the functions of the above-described embodiment can be realized by the processing.
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現される。 Furthermore, the program read from the recording medium is written to a memory provided in a function expansion board inserted in the computer or a function expansion unit connected to the computer. Thereafter, based on the instruction of the program, a CPU or the like provided in the function expansion board or the function expansion unit performs part or all of the actual processing, and the function of the above-described embodiment is also realized by the processing.
なお、前述した実施形態は、本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。即ち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。 The embodiments described above merely show examples of implementation in practicing the present invention, and the technical scope of the present invention should not be interpreted in a limited manner by these. That is, the present invention can be implemented in various forms without departing from the technical concept or the main features thereof.
１０１ ネットワークカメラ
１０２ ＰＯＥ ＨＵＢ
１０３ 画像解析サーバ
１０４ 無線ＬＡＮルータ
１０５ 画像表示装置
101 Network Camera 102 POE HUB
103 Image Analysis Server 104
Claims (10)
前記撮像装置から、画像データを取得する取得手段と、
前記取得手段で取得した画像データを用いて当該画像データに映る荷物の移動先を特定する特定手段と、
前記特定手段で特定した荷物の移動先を識別可能な画面を生成する生成手段と
を備えることを特徴とする情報処理装置。 An information processing apparatus capable of communicating with an imaging apparatus for imaging a package to be moved,
Acquisition means for acquiring image data from the imaging device;
Specifying means for specifying the destination of the package shown in the image data using the image data acquired by the acquisition means;
An information processing apparatus, comprising: generation means for generating a screen capable of identifying the destination of the package identified by the identification means.
前記取得手段で取得した画像データから、当該画像データに映る車両を識別可能な識別情報を特定する第１特定手段と、
前記第１特定手段で特定した前記識別情報を用いて、前記車両の荷物の運び先を特定する第２特定手段と、
前記第２特定手段で特定した運び先をユーザに認識させるべく、通知する通知手段と
を備えることを特徴とする請求項１乃至３のいずれか１項に記載の情報処理装置。 Vehicle image acquisition means for acquiring image data obtained by imaging a vehicle for delivering a package from an imaging device for imaging a vehicle;
First identification means for identifying identification information capable of identifying a vehicle shown in the image data from the image data acquired by the acquisition means;
A second specifying unit that specifies the carrying destination of the package of the vehicle using the identification information specified by the first specifying unit;
The information processing apparatus according to any one of claims 1 to 3, further comprising: notification means for making a notification so as to make the user recognize the carrying destination specified by the second specifying means.
前記生成手段は、前記選択情報手段で選択情報を取得した荷物が選択済みであることを識別可能な前記画面を再度生成することを特徴とする請求項１乃至４のいずれか１項に記載の情報処理装置。 The information processing apparatus further comprises selection information means for acquiring selection information of packages displayed in the image data selected via the screen generated by the generation means.
The said generation means produces | generates the said screen which can identify that the package which acquired selection information by the said selection information means has been selected again, It is characterized by the above-mentioned. Information processing device.
前記撮像手段で前記荷物を撮像することで得られる画像データを用いて当該画像データに映る荷物の移動先を特定する特定手段と、
前記特定手段で特定した荷物の移動先を識別可能な画面を生成する生成手段と
を備えることを特徴とする情報処理装置。 An imaging unit for imaging a package to be moved;
Specifying means for specifying a movement destination of the package shown in the image data using the image data obtained by imaging the package by the imaging unit;
An information processing apparatus, comprising: generation means for generating a screen capable of identifying the destination of the package identified by the identification means.
前記撮像装置から、画像データを取得する取得工程と、
前記取得工程で取得した画像データを用いて当該画像データに映る荷物の移動先を特定する特定工程と、
前記特定工程で特定した荷物の移動先を識別可能な画面を生成する生成工程と
を備えることを特徴とする情報処理装置の制御方法。 A control method of an information processing apparatus capable of communicating with an imaging apparatus for imaging a package to be moved,
An acquisition step of acquiring image data from the imaging device;
A specifying step of specifying a moving destination of a package shown in the image data using the image data acquired in the acquiring step;
A control method of an information processing apparatus, comprising: a generation step of generating a screen capable of identifying a destination of a package identified in the identification step.
前記撮像工程で前記荷物を撮像することで得られる画像データを用いて当該画像データに映る荷物の移動先を特定する特定工程と、
前記特定工程で特定した荷物の移動先を識別可能な画面を生成する生成工程と
を備えることを特徴とする情報処理装置の制御方法。 An imaging step of imaging a package to be moved;
A specifying step of specifying a moving destination of the package shown in the image data using the image data obtained by imaging the package in the imaging step;
A control method of an information processing apparatus, comprising: a generation step of generating a screen capable of identifying a destination of a package identified in the identification step.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017210006 | 2017-10-31 | ||
| JP2017210006 | 2017-10-31 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2019083522A true JP2019083522A (en) | 2019-05-30 |
| JP2019083522A5 JP2019083522A5 (en) | 2022-09-01 |
| JP7323757B2 JP7323757B2 (en) | 2023-08-09 |
Family
ID=66670690
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018204645A Active JP7323757B2 (en) | 2017-10-31 | 2018-10-31 | Information processing device, control method for information processing device, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7323757B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7467075B2 (en) | 2019-11-06 | 2024-04-15 | 東芝テック株式会社 | Information processing device and program |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014091609A (en) * | 2012-11-02 | 2014-05-19 | Daifuku Co Ltd | Article information display device |
| JP2014122075A (en) * | 2012-06-29 | 2014-07-03 | Toyo Kanetsu Solutions Kk | Supporting system for article picking operation |
| JP2015184894A (en) * | 2014-03-24 | 2015-10-22 | パイオニア株式会社 | Information storage processing device, terminal device, control method, program, and storage medium |
| JP2017171444A (en) * | 2016-03-23 | 2017-09-28 | パナソニックＩｐマネジメント株式会社 | Projection instruction device, goods assort system and projection instruction method |
-
2018
- 2018-10-31 JP JP2018204645A patent/JP7323757B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014122075A (en) * | 2012-06-29 | 2014-07-03 | Toyo Kanetsu Solutions Kk | Supporting system for article picking operation |
| JP2014091609A (en) * | 2012-11-02 | 2014-05-19 | Daifuku Co Ltd | Article information display device |
| JP2015184894A (en) * | 2014-03-24 | 2015-10-22 | パイオニア株式会社 | Information storage processing device, terminal device, control method, program, and storage medium |
| JP2017171444A (en) * | 2016-03-23 | 2017-09-28 | パナソニックＩｐマネジメント株式会社 | Projection instruction device, goods assort system and projection instruction method |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7467075B2 (en) | 2019-11-06 | 2024-04-15 | 東芝テック株式会社 | Information processing device and program |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7323757B2 (en) | 2023-08-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10339383B2 (en) | Method and system for providing augmented reality contents by using user editing image | |
| JP5879725B2 (en) | Sheet metal work support system | |
| JP6562716B2 (en) | Information processing apparatus, information processing method, program, and forklift | |
| KR100643557B1 (en) | Information management apparatus, information output system, portable terminal, and information outputting method | |
| US11076130B2 (en) | Operation information transmission device, construction management system, operation information transmission method, and program | |
| JP7126251B2 (en) | CONSTRUCTION MACHINE CONTROL SYSTEM, CONSTRUCTION MACHINE CONTROL METHOD, AND PROGRAM | |
| US9779551B2 (en) | Method for generating a content in augmented reality mode | |
| CN104850835A (en) | Scanning method and scanning terminal | |
| EP1833022A1 (en) | Image processing device for detecting position of processing object in image | |
| JP2019082869A (en) | Information processing apparatus, control method of the same, and program | |
| JP7323757B2 (en) | Information processing device, control method for information processing device, and program | |
| JP2020095537A (en) | Learning dataset automatic generation system, server, and learning dataset automatic generation program | |
| JP2019083424A (en) | Information processing apparatus, control method thereof, and program | |
| JP2016025625A (en) | Information processor, information processing method, and program | |
| JP6558145B2 (en) | Information processing terminal, information processing system, processing method thereof, and program | |
| JP6850323B2 (en) | Information processing device, its control method and program | |
| JP2022145287A (en) | Information processing system, position management method, information processing apparatus, and program | |
| JP2017097859A (en) | Information processing device, and processing method and program thereof | |
| JP2017111696A (en) | Information processing device, printing system, control method and program | |
| JP6712861B2 (en) | Information processing device, information processing method, and program | |
| JP2006313480A (en) | Id card reissuing system, id card issuing apparatus and id card reissuing method | |
| JPWO2019167277A1 (en) | Image collection device, image collection system, image collection method, image generation device, image generation system, image generation method, and program | |
| JPWO2019167278A1 (en) | Store equipment, store systems, image acquisition methods, and programs | |
| WO2014064897A1 (en) | Information processing device, information processing method, and information processing program | |
| KR101280840B1 (en) | Method of identifying the laser point position on screen of presentation system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190109 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211029 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220824 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221128 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221129 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230119 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230509 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230612 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230627 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230710 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 7323757 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |